چت بات هوش مصنوعی هم سطح یک پزشک متخصص!

نتیجه ی مطالعه ای جدید نشان می دهد ChatGPT در حوزه ی چشم پزشکی عملکرد بسیار خوبی دارد.

- جی پلاس، به گزارش فایننشال تایمز، مطالعه ای جدید از دانشکده ی پزشکی بالینی دانشگاه کمبریج نشان می دهد که هوش مصنوعی GPT-4 در ارزیابی چشم پزشکی تقریباً به خوبی یک متخصص در این زمینه عمل می کند.

براساس گزارش زومیت، محققان، مدل های زبانی بزرگ GPT-3.

5 و Palm 2 و LLaMA را با 87 سؤال چند گزینه ای آزمایش کردند.

پنج چشم پزشک متخصص، سه کارآموز چشم پزشکی و دو پزشک غیرمتخصص جوان در آزمون آزمایشی یکسان شرکت کردند.

سؤالات در مورد همه چیز از حساسیت به نور گرفته تا آسیب جدی به چشم مطرح شد.

پاسخ این سؤالات به صورت عمومی در دسترس نبودند، بنابراین محققان معتقدند که مدل های زبانی بزرگ از قبل در مورد آن ها آموزش ندیده اند.

GPT-4 امتیاز بالاتری نسبت به کارآموزان و پزشکان جوان کسب کرد و 60 سوال را به درستی پاسخ داد.

در حالی که پزشکان به طور میانگین به 37 سؤال پاسخ درست دادند.

پزشکان متخصص به 56 سؤال پاسخ دقیقی ارئه کردند؛ اما با میانگین نمره ی 66٫4 نشان دادند که همچنان از هوش مصنوعی جلوترند.

PalM 2 به 49 سؤال و GPT-3.

5 به 42 سؤال به درستی جواب دادند.

LLaMA با 28 پاسخ درست کمترین امتیاز را بین مدل های زبانی بزرگ دیگر به دست آورد.