اكتشف علماء جامعة ستانفورد أن GPT-4 يزداد غباءً بمرور الوقت
Miscellanea / / July 20, 2023
كانت دقة النسخة المدفوعة من ChatGPT أقل من تلك الخاصة ببرنامج الدردشة المجاني.
جديد يذاكر من علماء في جامعة ستانفورد أكدوا ما يشكو منه مستخدمو الإنترنت لأسابيع: ChatGPT Plus ، بناءً على GPT-4 أصبح غبيًا حقًا - على عكس GPT-3.5 ، الذي يشغل الإصدار المجاني من chatbot.
قارن المؤلفون في دراستهم الاستجابات لطلبات مختلفة من روبوت محادثة بناءً على GPT-4 و GPT-3.5. هم وجدت أن سلوك chatbot ودقة الردود على بعض الطلبات في الإصدار الجديد بشكل ملحوظ ساءت.
قارن المؤلفون نماذج اللغات GPT-4 و GPT-3.5 التي تم إصدارها في مارس ويناير. ووجدوا أنه خلال هذا الوقت انخفضت دقة GPT-4 بشكل ملحوظ ، بينما زادت دقة GPT-3.5 ، على العكس من ذلك.
على سبيل المثال ، انخفضت دقة الإجابة على سؤال ما إذا كان 17077 عددًا أوليًا بنسبة 95.2٪ ، بينما زادت دقة GPT-3.5 ، على العكس من ذلك ، من 7.4٪ إلى 86.8٪. أيضًا ، تقلصت فرصة التنفيذ الناجح للكود الذي كتبته الشبكة العصبية في الإصدارات الحالية من كلا النموذجين.
في السابق ، شغل نائب رئيس OpenAI بيتر ويلندر بالفعل أجاب لاتهامات مستخدمي ChatGPT Plus:
لا ، لم نجعل GPT-4 أغبى. كل شيء عكس ذلك تمامًا: نجعل كل إصدار جديد أكثر ذكاءً من الإصدار السابق.
الآن لدينا هذه الفرضية: عندما تستخدم شيئًا بشكل أكثر نشاطًا ، تبدأ في ملاحظة المشكلات التي لم تراها من قبل.
بيتر ويلندر
نائب رئيس المنتج في أوبن إيه آي
في أحد الردود على هذه التغريدة ، Welinder طلبت تقديم دليل على أن برنامج الدردشة الآلي أصبح أسوأ. ظهرت دراسة من علماء ستانفورد بعد 5 أيام من ذلك - ولم يكن هناك رد من شركة أوبن إيه آي حتى الآن.
هذه ليست المرة الأولى التي يتم فيها اتهام GPT-4 بتقديم معلومات خاطئة. في مارس ، محللو NewsGuard اكتشفأن ChatGPT المستند إلى GPT-4 أسهل في قول الكذبة - بينما تدعي OpenAI نفسها زيادة بنسبة 40٪ في دقة الإجابات مقارنة بـ GPT-3.5. في على وجه الخصوص ، في اختبارات NewsGuard ، كان الإصدار الجديد من الشبكة العصبية أقل عرضة لدحض المعلومات الخاطئة - بما في ذلك البيانات الخاطئة حول الأحداث والنظريات الحديثة المؤامرات.
اقرأ أيضا🧐
- 6 نظائرها من ChatGPT
- جيمس كاميرون يتحدث عن مخاطر الذكاء الاصطناعي: "لقد حذرتك مرة أخرى في عام 1984 ، لكنك لم تستمع"
- 8 خرافات عن الذكاء الاصطناعي حتى المبرمجين يؤمنون بها