Искусственный интеллект преуспел в испытании на получение разрешения на медицинскую деятельность

ChatGPT Искусственный интеллект достиг очередного рубежа. Впечатлив своей способностью содержательно отвечать на вопросы, выполнять разнообразные творческие задания и даже писать эссе или стихи, он теперь преуспел в тесте на получение медицинской лицензии в США.

Разговорный искусственный интеллект ChatGPT показал средний результат около 60 % на тесте, необходимом для сдачи экзамена на получение медицинской лицензии USMLE. По мнению исследователей, подвергших его этой задаче, его ответы имеют последовательный внутренний смысл и содержат инновационные идеи.

Экзамен USMLE, который сдают студенты-медики и врачи, оценивает знания в большинстве областей медицины, от биохимии до диагностического мышления и биоэтики. Исследовательская группа под руководством Виктора Ценга исключила из теста несколько вопросов, основанных на изображениях. Это связано с тем, что искусственный интеллект создан "только" как языковой интерфейс; он еще не распознает изображения. Поэтому исследователи протестировали программу на 350 из 376 открытых вопросов из июньского экзамена USMLE 2022 года.

После удаления нечетких ответов ChatGPT набрал от 52,4 до 75 % на всех трех экзаменах USMLE. Между тем, пороговый уровень сдачи экзаменов составляет примерно 60 % каждый год. В 88,9 % ответов ChatGPT давал один значимый результат - что-то новое и клинически полезное.

Авторы теста были удивлены тем, что ChatGPT превзошел PubMedGPT, который представляет собой аналогичную модель ИИ, но специализированную только для медицинских тем. По результатам того же теста он набрал всего 50,8 %.

Хоть относительно небольшой объем исходных данных ограничил глубину и масштаб анализа, авторы отмечают, что их результаты дают представление о потенциале ChatGPT для улучшения медицинского образования и, возможно, клинической практики. Между тем, они уже сами используют его на практике: они выдают медицинское заключение, а ИИ переводит его с непонятного медицинского жаргона на обычный, понятный человеку язык.

"Тот факт, что программа добилась успешного результата на этом сложном профессиональном экзамене без какого-либо человеческого подкрепления, представляет собой замечательную веху в зрелости клинического искусственного интеллекта", - добавляют авторы.

ChatGPT - это новая система искусственного интеллекта (ИИ), которая работает по принципу большой языковой модели. Идея заключается в том, что он может предсказывать последовательности слов таким образом, чтобы полученные ответы имели смысл для человека. В процессе обучения эта программа получила много знаний, поэтому все они хранятся в ее памяти, и ей больше не нужно искать нужные ответы в Интернете.