GPT-4 يتحدى أطباء العيون، وفقًا لدراسة حديثة أجرتها كلية الطب السريري بجامعة كامبريدج، كان أداء GPT-4 الخاص بـ OpenAI يفوق جودة تصنيف أطباء العيون التي يقدمها الخبراء في هذا المجال، وفقًا لتقرير نشرته صحيفة فايننشال تايمز لأول مرة. “مع تطور النماذج اللغوية الأكبر، فإنها تثير أيضًا تساؤلات حول كيفية إفادة المجتمع في مجالات مثل الطب.”
GPT-4 يتحدى طب العيون
في الدراسة المنشورة في PLOS Digital Health، قام الباحثون بتقييم نماذج اللغات الكبيرة GPT-4، وGPT-3.5، وGoogle PaLM 2، وMeta LLaMA باستخدام 87 سؤالًا متعدد الاختيارات. شارك خمسة أطباء عيون متخصصين، وثلاثة أطباء عيون متدربين، واثنين من الأطباء المبتدئين غير المتخصصين في نفس الاختبار الوهمي.
وتم اختيار الأسئلة من كتاب مدرسي مصمم لتدريب المتدربين على مجموعة متنوعة من المواضيع، من حساسية الضوء إلى الأمراض المزمنة. وبما أن هذا المحتوى غير متاح لعامة الناس، يشير الباحثون إلى أنه لم يتم تدريب النماذج اللغوية الكبيرة على مثل هذه البيانات من قبل.
اقرأ أيضا: بلاك شارك تكشف أول خاتم ذكي
الآلية التي يعتمد عليها GPT-4
يمنحك ChatGPT، الذي يعتمد على GPT-4 أو GPT-3.5، ثلاث فرص للإجابة بشكل نهائي أو وضع علامة على إجابتك على أنها فارغة. حصل اختبار GPT-4 على درجات أعلى من تلك التي تم منحها للمتدربين والأطباء المبتدئين، حيث أجاب على 60 سؤالًا من أصل 87 سؤالًا بشكل صحيح.
وكان هذا الرقم أعلى بكثير من متوسط الأطباء المبتدئين البالغ 37 إجابة صحيحة، كما تجاوز متوسط المتدربين الثلاثة البالغ 59.7 إجابة صحيحة. أجاب أحد أطباء العيون الخبراء على 56 سؤالا بدقة، وكان متوسط درجات الأطباء الخمسة 66.4 إجابة صحيحة، متفوقين معا على النموذج اللغوي الكبير.
وفي السياق نفسه، حصل Google PaLM 2 على 49 إجابة صحيحة، فيما سجل GPT-3.5 42 إجابة صحيحة. أما Meta LLaMA، فقد سجلت أدنى درجة بـ 28 إجابة صحيحة، وهو أقل من أداء الأطباء المبتدئين. يشار إلى أن هذه التجارب تمت في منتصف عام 2023.
وأشار الباحثون إلى أن الدراسة قدمت عددا محدودا من الأسئلة، خاصة في بعض الفئات، مما يعني أن النتائج الفعلية قد تظهر تباينا. كما هو الحال في العديد من الحالات التي تنطوي على استخدام نماذج لغوية كبيرة، قد تفتقر الأنظمة في بعض الأحيان إلى الدقة الدقيقة، مما يزيد من احتمال حدوث أخطاء.
شاهد أيضا: واقع لإنشاء كلمات عشوائية
