یہ زبان مشین کے ذریعے ترجمہ کی گئی ہے اور کسی انسان نے اس کا جائزہ نہیں لیا۔

NIVΞCTOR
خبریںتعاون

کاؤنٹر ابھی شروع نہیں ہوا

مصنوعی ذہانت · مضمون

AI متن ڈیٹیکٹرز کیسے کام کرتے ہیں، ایک انعام یافتہ ناول کے تنازعے کے ذریعے وضاحت

اشاعت:

مختصراً

AI متن ڈیٹیکٹرز یہ ثابت نہیں کرتے کہ کسی نے کیا لکھا؛ وہ احصائی نمونوں جیسے لفظ کی پیش گوئی اور جملے کی لمبائی کی تبدیلی کو ماپ کر احتمال کا تخمینہ لگاتے ہیں۔ ایک Pangram 4.1 نام کا ڈیٹیکٹر حال ہی میں ایک €20,000 انعام یافتہ ہسپانوی زبان کے ناول کا 99% مصنوعی ذہانت کو منسوب کیا، جس سے اس کے ناشر نے تحقیق کے دوران اشاعتی تقریبات معطل کر دیں۔

یہ نسخہ اصل متن (English) کا مشینی ترجمہ ہے۔ اصل متن پڑھیں

ایک ڈیٹیکشن ٹول کا یہ نتیجہ کہ ایک انعام یافتہ ناول تقریباً مکمل طور پر مشین سے لکھا گیا تھا، AI متن ڈیٹیکٹرز کو تنقید کے نیچے لے آیا ہے۔ یہ معاملہ لکھنے والوں، طالب علموں اور ایڈیٹرز کے لیے ایک عملی سوال پیدا کرتا ہے: یہ ٹولز درست کیا ماپ رہے ہیں، اور ان کے فیصلوں پر کتنا اعتماد کیا جا سکتا ہے؟

بحث کو کیا شروع کیا

پیرو کے مصنف David Silva Rojas نے افتتاحی Almadía Ventosa-Arrufat انٹرنیشنل شارٹ ناول پرائز جیتا، جس کی قیمت €20,000 ہے، اپنے ناول "Donde el agua trabaja" کے لیے، ایک کہانی جو پیرو کے Ica علاقے میں ایک شراب کی باگ میں سیٹ ہے۔ ایک متفق ہیئت جس میں مصنفین Cristina Rivera Garza، Selva Almada اور Mónica Ojeda شامل تھے، نے 22 ممالک میں 2,204 جمہ میں سے یہ کام منتخب کیا، Infobea کے مطابق۔

Infobea کے مطابق، جو Spanish اخبار El País کے تجزیے کا حوالہ دے رہے تھے، تقریباً 26,000 لفظوں کے اس ناول کو Pangram 4.1 ڈیٹیکشن ٹول میں چلانے سے اس کا 99% مصنوعی ذہانت کو منسوب کیا گیا۔ ایک ہی ٹول نے Silva Rojas کے September میں دیے گئے انٹرویو کے جوابات میں سے 97% کو پرچم لگایا اور 924 لفظوں کے ایک خودنوشت متن میں 80% کو جو انہوں نے جمع کرایا تھا، جبکہ انٹرویور کے اپنے الفاظ مکمل طور پر انسانی درج ہوئے۔ مقابلے کی قوانین میں شامل لوگوں سے اپنے مخطوطات کا اعلان کرنا ضروری تھا کہ وہ "مصنوعی ذہانت کے ٹولز سے نہ لکھے گئے ہوں، نہ جزوی طور پر اور نہ ہی مکمل طور پر،" سزا کے طور پر نااہل ہونے کے خطرے میں۔

ناشر Almadía نے ناول کی تقدیمی تقریبات کو Madrid، Barcelona، Seville اور Cádiz میں معطل کر دیا، جو 23 اکتوبر 2026 کو شروع ہونے والے تھے، Proceso کے مطابق۔ ناشر نے کہا کہ Silva Rojas نے ایک معاہدے پر دستخط کیے تھے جس میں اعلان کیا گیا تھا کہ انہوں نے ایسے ٹولز استعمال نہیں کیے ہیں اور تحقیق کے لیے وقت مانگا۔ Silva Rojas نے Infobea کے ذریعے رابطہ کیے جانے پر اپنے اکاؤنٹ پر تبصرہ کرنے سے انکار کر دیا۔

AI متن ڈیٹیکٹرز درست کیسے کام کرتے ہیں

GPTZero کے اپنے شائع شدہ طریقہ کار کے مطابق، اس کا ٹول متن کو تین اہم سگنلز پر سکور دیتا ہے: perplexity، یا لفظ کے انتخاب کتنے قابل پیش گوئی ہیں ایک زبان کی ماڈل میں؛ burstiness، جس کا مطلب ہے کہ جملے کی لمبائی اور انداز ایک حصے میں کتنا مختلف ہیں؛ اور مجموعی سر، یہ چیک کرتے ہوئے کہ لکھنا عام یا دہرایا ہوا ہے یا نہیں۔ GPTZero کہتا ہے کہ یہ ان بنیادی اقدامات کے اوپر ایک ملکانہ ماڈل کے ساتھ "سینکڑوں عوامل" کو جوڑتا ہے۔

Pangram، ناول کے معاملے میں استعمال ہنے والا ٹول، مختلف طریقے سے کام کرتا ہے۔ Wikipedia کے ٹول کے اندراج اور Pangram کے اپنے بلاگ کے مطابق، یہ انسانی لکھنے کی بڑی مقدار کو AI کے ذریعے تیار شدہ متن کے ساتھ موضوع، لمبائی اور سر سے مماثل کرتے ہوئے ایک "mixture of experts" آرکیٹیکچر استعمال کرتے ہوئے انفرادی حصوں کو درجہ بندی کرنے سے پہلے انہیں ایک مقالہ سطح کے اسکور میں ترکیب دیتا ہے۔ Pangram کو نتیجہ دینے کے لیے کم از کم 50 لفظوں کی ضرورت ہے اور تحریری ڈومین کے لحاظ سے الگ الگ غلط مثبت شرح کی رپورٹ کرتا ہے — مثال کے طور پر، میڈیکل پیپرز پر 0% کے قریب بمقابلہ شاعری اور ترکیبوں میں زیادہ شرح۔

اہم بات یہ ہے کہ ان میں سے کوئی بھی ٹول مصنف کی نشاندہی کرنے کا دعویٰ نہیں کرتا۔ وہ ایک احصائی تخمینہ حاصل کرتے ہیں — ایک احتمال کہ ایک دیا گیا حصہ آدمی کے متن سے زیادہ مشین سے تیار شدہ متن سے زیادہ مشابہت رکھتا ہے جو ماڈل نے تربیت میں دیکھا ہے۔

AI متن ڈیٹیکٹرز کا موازنہ
ٹولحالتبنیادی طریقہدعویٰ شدہ غلط مثبت شرح
GPTZero2023 سے فعالPerplexity، burstiness، سر، اور ایک ملکانہ ماڈلمجموعی طور پر 99.9% درستگی کا دعویٰ کرتے ہیں؛ الگ الگ 95.7% AI متن کی شناخت 1% کی غلط مثبت شرح کے ساتھ RAID بینچ مارک میں رپورٹ کرتے ہیں، GPTZero کے مطابق
Pangram2023 میں Checkfor.ai کے طور پر شروع، 2024 میں Pangram Labs کے طور پر دوبارہ برانڈ؛ ورژن 4 جولائی 2026 میں جاریمل کر انسانی/AI تربیتی ڈیٹا پر mixture-of-experts ٹوکن درجہ بندیPangram 4 کے English بینچ مارک میں تقریباً 24,000 میں سے 1؛ مجموعی طور پر تقریباً 10,000 میں سے 1، Pangram کے مطابق
OpenAI AI ٹیکسٹ درجہ بندیجولائی 2023 میں ریٹائر (شروع کی تاریخ ذریعہ سے نہیں دی گئی)شماریاتی درجہ بندی ماڈل"درستگی کی کم شرح" کے لیے ریٹائر کیا گیا؛ TechCrunch کی جانچ صرف 7 AI نمونوں میں سے 1 درستی سے پرچم لگایا گیا، GPTZero کے لیے 7 میں سے 5 کے مقابلے میں

کوئی بھی ڈیٹیکٹر یقین دہانی کیوں نہیں دیتا

OpenAI نے جولائی 2023 میں اپنا اپنا AI متن ڈیٹیکٹر بند کر دیا، TechCrunch کے مطابق درستگی کی کم شرح حوالہ دیتے ہوئے۔ TechCrunch کے سات AI سے تیار شدہ حصوں کی غیر رسمی جانچ میں، OpenAI کا ٹول صرف ایک کی درستی سے نشاندہی کی، جبکہ GPTZero نے پانچوں کی۔ OpenAI نے اس وقت کہا کہ وہ "زیادہ مؤثر نسب تعمیر طریقہ" کی تحقیق کر رہے ہیں۔

Pangram کی اپنی تعداد اعتماد اور غلطی کے درمیان ایک ہی تناؤ ظاہر کرتی ہے۔ Wikipedia کے ٹول کے اندراج میں نوٹ ہے کہ آزاد تشخیصوں نے پایا کہ اس نے ایک خاص انسانی مصنف کے سر کی نقل کرتے ہوئے AI سسٹمز سے 10.1% کے قریب حصوں کو یاد کیا، اور یہ "humanizer" ٹولز کے ذریعے متن پر بدتر کارکردگی دکھائی جو AI آؤٹ پٹ کو چھپانے کے لیے مقصد رکھتے ہیں۔ ایک ہی اندراج ماضی کے تنازعوں کی درج ہے جہاں Pangram کے نتائج کو چیلنج کیا گیا، ناول Mia Ballard سمیت، جن کی تحریریں 78% AI کے طور پر پرچم لگائی گئیں، اور Wall Street Journal کے ایڈیٹر James Taranto کی تنقید، جن کہا کہ ٹول ایک "defamation machine" ہے تین سٹاف مضامین کے بعد اسے پرچم لگایا گیا — اگرچہ ان دو مضامین کے مصنفین نے کہا کہ انہوں نے اپنی ڈرافٹ میں مدد دینے کے لیے صرف AI استعمال کیا تھا۔

کوئی بھی AI ڈیٹیکٹر کبھی سچی طور پر 100% مکمل نہیں ہو سکتا۔

— GPTZero، اپنی شائع شدہ صارفین کے لیے رہنمائی میں

ناول کے معاملے سے کیا ملتا ہے اور کیا نہیں

Pangram 4.1 کا اسکور ایک مضبوط سگنل ہے جس نے Almadía کو ناول کی رولآؤٹ میں توقف دینے اور ایک تحقیق کھولنے کے لیے اکسایا، لیکن ایک ڈیٹیکشن اسکور اکیلے یہ تشکیل نہیں کرتا کہ کس طریقے سے ایک متن تیار کیا گیا۔ Proceso کے ذریعے رپورٹ شدہ ناشر کے بیان کے طور پر، Almadía نے ایک حتمی نتیجہ کا اعلام نہیں کیا، اور Silva Rojas نے ریکارڈ پر اپنا اکاؤنٹ نہیں دیا۔ مقابلے کے اصول AI کے استعمال کے خلاف — اور اس کے ساتھ منسلک دستخط شدہ اعلان — وہی ہے جو مصنف کو ممکنہ سزا کے لیے بے نقاب کرتا ہے اگر ایک تحقیق شک کی تصدیق کرتی ہے، الگ سے جو کوئی بھی ڈیٹیکٹر اسکور اکیلے قائم کر سکتا ہے۔

سوالات

GPTZero اور Pangram جیسے AI متن ڈیٹیکٹرز کیسے کام کرتے ہیں؟
وہ مصنف کی نشاندہی نہیں کرتے؛ وہ شماریاتی نمونوں سے احتمالات کا تخمینہ لگاتے ہیں۔ GPTZero پیش گوئی (perplexity) اور جملے کی لمبائی میں تبدیلی (burstiness) کو ماپتا ہے، جبکہ Pangram انسانی اور AI سے لکھے ہوئے نمونوں پر تربیت شدہ ماڈل استعمال کرتے ہوئے ٹوکن سطح پر متن کو درجہ بندی کرتا ہے، ہر کمپنی کے شائع شدہ طریقہ کار کے مطابق۔
ناول "Donde el agua trabaja" کے ساتھ کیا ہوا؟
Infobea کے مطابق، جو Spain کے El País کے تجزیے کو حوالہ دے رہے ہیں، Pangram 4.1 ٹول نے تقریباً 26,000 لفظوں کے انعام یافتہ ناول کے 99% کو David Silva Rojas کی مصنوعی ذہانت کو منسوب کیا۔ Proceso کے ذریعے رپورٹ شدہ ناشر Almadía نے اس کے بعد اسپینی تقدیمی تقریبات کو معطل کر دیا جبکہ تحقیق کر رہا ہے۔
AI ڈیٹیکٹرز کتنے درست ہیں؟
وکرتا اشاعت بہت کم غلط مثبت شرح — Pangram اپنے تازہ ترین English بینچ مارک کے لیے تقریباً 24,000 میں سے 1 کا حوالہ دیتے ہیں، اور GPTZero مجموعی طور پر تقریباً 99.9% درستگی کا دعویٰ کرتے ہیں — لیکن Wikipedia میں حوالہ دیے گئے آزاد جائزوں نے پایا کہ Pangram 10% سے زیادہ AI متن کو یاد کیا ایک خاص مصنف کے سر کی نقل کرتے ہوئے، اور OpenAI نے TechCrunch کے ذریعے اپنے درجہ بندی کو 2023 میں "درستگی کی کم شرح" کے لیے ریٹائر کر دیا۔
کیا ایک AI ڈیٹیکٹر ایک حقیقی شخص کی تحریر کے بارے میں غلط ہو سکتا ہے؟
ہاں۔ Pangram کے Wikipedia اندراج معاملات کی دستاویزات رکھتے ہیں جیسے مصنفہ Mia Ballard، جن کی تحریریں 78% AI کے طور پر پرچم لگائی گئیں، اور Wall Street Journal کے ایڈیٹر James Taranto، جنہوں نے ٹول کو 'defamation machine' کہا تین سٹاف مضامین کے بعد اسے پرچم لگایا گیا — اگرچہ ان دو مضامین کے مصنفین نے کہا کہ انہوں نے صرف اپنی ڈرافٹس میں مدد دینے کے لیے AI استعمال کیا۔
کیا کوئی AI ڈیٹیکٹر سے آگے نکل سکتا ہے، یا غلط طریقے سے پرچم لگایا جا سکتا ہے؟
Wikipedia کے ذریعے حوالہ دیے گئے آزاد تشخیصوں نے پایا کہ Pangram ایک خاص انسانی مصنف کی نقل کرنے کے لیے ڈیزائن کیے گئے 10.1% AI سے لکھے ہوئے حصوں کو یاد کیا، اور ڈیٹیکٹرز عام طور پر مختصر متن، غیر مقامی English تحریر، یا 'humanizer' ٹولز کے ذریعے تبدیل شدہ متن پر کم قابل اعتماد انجام دیتے ہیں، Pangram اور GPTZero کے مطابق۔

دنیا اسے کیسے بیان کر رہی ہے

ذرائع

  1. Infobae — Una novela premiada con 20.000 euros resultó estar escrita en un 99% por inteligencia artificial
  2. Proceso — Almadía suspende presentación de novela premiada tras sospechas de uso de inteligencia artificial
  3. TechCrunch — OpenAI scuttles AI-written text detector over 'low rate of accuracy'
  4. Pangram — All About False Positives in AI Detectors
  5. GPTZero — AI Detector homepage and methodology
  6. Wikipedia — Pangram (AI detector)

یہ تحریر مصنوعی ذہانت سے تیار کی گئی اور اشاعت سے پہلے ذرائع کی خودکار جانچ سے گزری۔ اگر آپ کو کوئی غلطی نظر آئے تو تصحیح کی درخواست کریں۔ تصحیح یا جواب کی درخواست · ہم کیسے کام کرتے ہیں

متعلقہ تحریریں