مطالعهای جدید نشان میدهد که چتبات ChatGPT در 52 درصد مواقع به سؤالات برنامهنویسی جواب نادرست میدهد.
بهگزارش تکناک، یکی از مزایای برجستهی استفاده از چتباتهایی مانند کوپایلت و جمنای و ChatGPT صرفهجویی در زمان است؛ زیرا درمقایسهبا پاسخگویی انسانی پاسخهای سریعتری به پرسشهای کدنویسی و برنامهنویسی میدهند. باوجوداین، گزارشی تازه ادعا کرده است که ChatGPT در ارائه پاسخهای صحیح به پرسشهای برنامهنویسی کوتاهی میکند.
در گزارشی که اوایل ماه می در کنفرانس تعامل انسان و کامپیوتر ارائه شد، تیم تحقیقاتی دانشگاه پردو ۵۱۷ سؤال ارسالی به چتبات ساخت شرکت OpenAI را برای پاسخدهی بررسی کرد. تیم دانشگاه پردو گزارش داده که ChatGPT به این سؤالات برنامهنویسی در 52 درصد مواقع جوابهای نادرست داده است.
بهنقل از نئووین، درحالیکه انتظار میرود چتباتهای هوش مصنوعی گاهی اوقات پاسخهای نادرستی ارائه دهند، تیم دانشگاه پردو تأکید کرد که برنامهنویسان انسانی هنوز در 35 درصد مواقع پاسخهای ChatGPT را بهدلیل دقت و زبان روان آن ترجیح میدهند. بدتر اینکه برنامهنویسان انسانی در 39 درصد مواقع خطاهای پاسخهای چتجیپیتی را نمیگیرند.
ناگفته نماند که این فقط مطالعهای دربارهی یکی از وجوه ویژگیهای ChatGPT است؛ اما نشان میدهد که چتباتهای هوش مصنوعی مولد همچنان درمعرض اشتباهات فراوانی هستند و انسانها ممکن است این اشتباهات را تشخیص ندهند.
دراینمیان، نمای کلی جمنای، هوش مصنوعی گوگل که در اوایل ماه می در ایالات متحده برای جستوجوی گوگل اجرا شده بود، از قبل خلاصههای پاسخهای عجیب و پر از خطا به برخی از پرسشها داده است. گوگل تلاش کرده است تا این خطاهای آشکار را با اظهارنظر به رسانههایی مانند گیزمودو توضیح دهد. این شرکت با انتشار بیانیهای اعلام کرده است:
مواردی که مشاهده شدهاند، عموماً پرسشهای بسیار نادر هستند و نمایندهی تجربیات اکثر افراد نیستند. اکثر قریب به اتفاق چتباتهای هوش مصنوعی پاسخهای نسبتاً دقیق همراه با لینکهایی برای تحقیقات بیشتر در وب ارائه میدهند.
گوگل در بیانیهی خود افزوده است که از این نمونههای جداگانه برای بهبود سیستمهایش بهره خواهد برد.
