Николай Чикишев 13 лютага 2023, 16:18

ChatGPT амаль здаў экзамен на атрыманне ліцэнзіі доктара ў ЗША

Алгарытм моўнай мадэлі ChatGPT амаль здаў экзамен на атрыманне ліцэнзіі доктара ў ЗША.

Даследаванне правялі спецыялісты са стартапа Ansible Health. «ChatGPT паказаў вынікі на ўзроўні блізкім да парога здачы ўсіх трох экзаменаў без будзь-якога спецыяльнага навучання або падмацавання. Акрамя таго, ChatGPT прадэманстраваў высокі ўзровень узгодненасці і праніклівасці ў сваіх тлумачэннях», — пішуць даследчыкі ў апублікаванай працы.

АІ-бот быў блізкі да здачы экзамену US Medical Licensing Exam (USNLE) без навучання з пацвярджэннем — на базе аднаго толькі пошуку інфармацыі ў інтэрнэце. Чалавеку патрабуецца ад 300 да 400 гадзін падрыхтоўкі для здачы гэтага экзамену, які складаецца з трох раздзелаў. Прамых адказаў на пытанні USMLE у інтэрнэце няма. ChatGPT генераваў новыя адказы на аснове дадзеных, атрыманых па тэме пытанняў.

Пры прахадным бале ў раёне 60% ChatGPT набраў ад 52,4% да 75% правільных адказаў па ўсіх трох іспытаў. У 88,9% адказаў алгарытм выдаваў як мінімум адзін значны адказ, які даследчыкі класіфікавалі як «новы і невідавочны, хоць клінічна абгрунтаваны». Магчыма, у будучыні ChatGPT сам зможа даваць медыцынскія кансультацыі або стане памочнікам доктара для пастаноўкі дакладнейшых дыягназаў.