ChatGPT کس حد تک جوابات پیدا کرنے میں قابل اعتماد ہے؟

اوپنای ای ، نے ترقی یافتہ AI چیٹ بوٹ چیٹ جی پی ٹی کو مختلف شعبوں میں اس کی درستگی اور کارکردگی کے لئے مشہور بنایا ہے۔ لیکن ذرا ضروری ہے کہ اس کی علمیات کو صرف 2021 تک دستیاب ڈیٹا تک محدود تصور کیا جا سکتا ہے۔ اس کی درستگی کا ایک جائزہ یونیورسٹی آف پنسلوانیا کے پروفیسر کرسچن ٹرویسے کی جانب سے لیا گیا جس نے چیٹ جی پی ٹی کو ایک ایم بی اے امتحان دینے کے لئے آزمایا۔

امتحان مختلف کاروباری تصورات جیسے عمل کا تجزیہ، انتظامِ ذخیرہ، اور قیف کا تجزیہ سے متعلق سات سوالات سے مشتمل تھا۔ یہ ایک حقیقی زندگی کا انسانی ماحول نقل کرنے کے لئے ڈیزائن کیا گیا تھا، اور سوالات ایک انسانی طالبِ علم سے بالکل ایسے پوچھے جاتے تھے جیسے کہ ہوں۔ پروفیسر ٹرویسچ کو حیرت ہوئی کہ چیٹ جی ٹی پی ٹی نے بنجھ ٹاپ کے مفہوم پر پہلے سوال کے اپنے جواب کے لئے A+ حاصل کیا۔

چنانچہ بھی چیٹ بوٹ کچھ مشکل سوالوں سے پیش آیا، پروفیسر کو اس کی کلی عملکردی پر خوشی ہوئی۔ چیٹ جی پی ٹی پر ایم بی اے امتحان کروانے کے بعد، پروفیسر ٹری ویش نے اس AI چیٹ بوٹ کے لئے بی اور بی مندرجہ بمعنی کے درجے کے درمیان نتیجہ دریافت کیا۔

چیٹ جی پی ٹی کی درستگی کی وضاحت

چیٹ‌جی پی ٹی کی درستگی کا دوسرا دلیل طبی شعبے میں تھا، جہاں چیٹ بوٹ کو امریکی طبی لائسنس امتحان (USMLE) پاس کرنے کی صلاحیت حاصل ہوئی۔ تحقیق کے مطابق، چیٹ‌جی‌پی ٹی نے تمام امتحانات میں 50٪ سے بیشتر درستگی حاصل کی اور اپنے جوابات کے لئے تجزیہ اور وضاحت بھی پیش کر دیا۔

انسائبل ہیلتھ سے جاری ایک الگ تحقیق کے مطابق چیٹ جی پی ٹی امریکہ میں ڈاکٹر لائسنس حاصل کرنے کے تین امتحانات میں سے کسی بھی ایک یا تمام کے لیے پاسنگ دائرہ کے قریبی نکتے پر کام کرتا ہے۔ درستی کی حوصلہ افزائی کے باوجود، اس کے کارکردگی دائرہ وسیع یا دیئے گئے متن و موضوع کے مطابق تبدیل ہوسکتا ہے۔

ماڈل کو ٹرین کرنے کے لئے استعمال کیا گیا تربیتی ڈیٹا متن کے ماخذ کی تعصبات اور حدود شامل کرتا ہے، لہذا ماڈل کو ذمہ داری کے ساتھ استعمال کرنا ضروری ہے۔

اس خیال کو اوپن اے آئی کے سی ای او نے پرتبادل کیا جس نے ایک ٹویٹ میں کہا کہ "چیٹ جی پی ٹی انتہائی محدود ہے اور اس پر اب زیادہ توجہ دینا کسی بھی اہم کام کے لئے غلط ہوگا۔"۔

۰۰:۴۸

01:12

چیٹ جی پی ٹی سے ٹیسٹ بات چیت ناکام

جیسا کہ اوپر کے سکرین شاٹ میں دکھایا گیا ہے، چیٹ جی پی ٹی سے اخذ شدہ ٹیسٹ کے ساتھ AI چیٹ بوٹ کی کارکردگی ہمیشہ قابلِ اعتماد نہیں ہوتی۔

جب پوچھا گیا کہ فٹبال کی دنیا کپ کتنی بار جیت چکی ہے تو chatGPT نے شروع میں جواب دیا کہ "1986 میں ارجنٹائن فٹبال کی دنیا کپ ایک بار جیت چکی ہے"۔ لیکن جب پوچھا گیا کہ "فیفا ورلڈ کپ" کس نے 1978 جیتا تو chatGPT نے جواب دیا کہ "ارجنٹائن نے 1978 فیفا ورلڈ کپ جیتا ہے۔"

یہ نتیجہ حاصل ہوا کہ ارجنٹائن نے دو بار ورلڈ کپ جیتا۔ تاہم، جب دوبارہ سوال پوچھا گیا کہ "اب میں دوبارہ آپ سے پوچھ رہا ہوں کہ ارجنٹائن نے کتنی بار ورلڈ کپ جیتا ہے؟" ChatGPT نے پہلی گفتگو کے باوجود "ارجنٹائن نے صرف ایک بار، 1986 میں، فیفا ورلڈ کپ جیتا۔" جواب دیا۔

یہ چیٹ جی پی ٹی کی درستگی کی نشاندہی کرتا ہے اور جاری ترقی اور عمدگی کی ضرورت کی ضرورت ہے۔

ابھی پڑھیں: کیا چیٹ جی پی ٹی کوڈ لکھنے اور آراستہ کرنے کے لئے لکھ سکتا ہے؟

کیا چیٹ جی پی ٹی ہر شخص کو ایک جیسے جواب دیتا ہے؟

ਜ਼یادہ تر ChatGPT کے جوابات کچھ یونیک ہو سکتے ہیں، لیکن اگر صارفین وہی سوال پوچھیں تو عام طور پر ہمیں ایک جیسے جوابات نظر آتے ہیں۔

ChatGPT قابل اعتماد ہے؟

چیٹ جی پی ٹی کی کچھ حدود ہوتے ہیں، یعنی کبھی کبھی غلط یا جھوٹے نتائج دے سکتے ہیں، لہذا محتاط رہیں۔