کانال تلگرامی «پایش امریکا» نوشت: محققان به این نتیجه رسیدهاند که نسخه پولی ChatGPT GPT-۴ از زمان انتشار به نحوی به طرز محسوسی احمقانه شده است. OpenAI تا حدی با این ارزیابی موافقت کرده است. از سوی دیگر، نسخه رایگان GPT- ۳.۵، در مقابل، تنها بهبود یافته است. OpenAI در روز پنجشنبه در وبلاگ خود ضمن رونمایی از آخرین به روزرسانیها اعلام کرد: بهرغم اینکه اکثر معیارها بهبود را نشان میدهند، وظایفی وجود دارد که ممکن است عملکرد آنها بدتر شود. در هفتههای اخیر، کاربران OpenAIs GPT-۴ از کاهش عملکرد در مقایسه با قابلیتهای قبلی این مدل شکایت داشتند. برخی ناامیدی خود را در توئیتر و انجمن توسعهدهندگان OpenAI ابراز کردند و به مسائلی از جمله منطق ضعیف، پاسخهای اشتباه بیشتر از دستدادن اطلاعات ارائهشده، مشکلات در پیروی از دستورالعملها، فراموش کردن گنجاندن براکتهای فرفری در کد اصلی و حفظ متن ضعیف اشاره کردند. حتی محققان دانشگاه استنفورد مطالعهای را انجام دادند که نسخه فعلی هوش مصنوعی را با نتایج قبلی مقایسه کرد. به نظر میرسد که مدل زبان واقعاً در عرض سه ماه بسیار احمقانه شده است. براساس یافتههای آزمایش، از مارس تا ژوئن ۲۰۲۳، GPT-۴ کاهش قابل توجهی در دقت در سناریوهای مختلف نشان داد. به عنوان مثال، هنگامی که از ۱۷۰۷۷ پرسیده شد که آیا عدد ۱۷۰۷۷ اول است یا خیر با دستورالعمل اضافی «گام به گام فکر کنید»، محققان انتظار داشتند که هوش مصنوعی یک توضیح گام به گام را به عنوان یک اشاره ارائه دهد. با این حال، پاسخهای به دست آمده اغلب نادرست و فاقد توضیحات بودند. در همان زمان، محققان دریافتند که نسخه رایگان GPT-۳.۵، برعکس، در مقایسه با نسخه اولیه خود هوشمندتر شده است.