GPT-4 имеет уровень знаний в офтальмологии близкий к экспертному – исследование

Из исследования, проведенного Школой клинической медицины Кембриджского университета, следует, что GPT-4, созданный OpenAI, эффективно справляется с оценкой знаний по офтальмологии на уровне экспертов в этой области. Об этом сообщает The Financial Times.

Общение с GPT-4 сравнили со знаниями пяти экспертов, трех стажеров и двух младших врачей. Было использовано 87 вопросов, при этом GPT-4 ответил правильно на 60 из них – это больше, чем среднее количество правильных ответов у стажеров и младших врачей.

Однако по сравнению с пятью экспертами, GPT-4 отставал по количеству правильных ответов. Тестирование было также проведено с использованием других языковых моделей, таких как GPT-3.5, PaLM 2 и LLaMa, при этом GPT-4 показал наилучшие результаты.