Группа исследователей под руководством Калифорнийского университета в Сан-Диего изучила возможность использования чат-бота ChatGPT для онлайн-консультирования пользователей по медицинским вопросам. Ответы ИИ в большинстве случаев оказались более полными и качественными, чем у медработников, и демонстрировали большую чуткость по отношению к пациентам.
Для своего анализа ученые использовали медицинские вопросы, опубликованные на сайте Reddit. Один из сервисов этой сети (AskDocs) позволяет пользователям задавать медицинские вопросы, на которые отвечают профессиональные врачи с подтвержденной сервисом квалификацией. Исследователи случайным образом отобрали 195 сообщений из AskDocs, в которых медицинский работник ответил на вопрос.
Те же вопросы были заданы чат-боту ChatGPT без каких-либо уточнений. Исследователи собрали ответы врачей и тексты, которые написала нейронная сеть. Все вопросы и рекомендации в обезличенном виде были показаны группе экспертов — лицензированных медицинских работников. Они не знали, какие из ответов написаны врачами, а какие — ИИ.
Эксперты сравнивали ответы и рекомендации на основе качества информации и уровня эмпатии — чуткости и сочувствия по отношению к пациенту, а также должны были ответить, какой из ответов кажется им наилучшим. В результате медики предпочли ответы ChatGPT ответам врачей в 79% случаев.
Ответы ChatGPT были оценены значительно выше по качеству и чуткости. Доля ответов хорошего или очень хорошего качества была в 3,6 раза выше для нейросети, чем для врачей. И, к удивлению ученых, чат-бот демонстрировал большую эмпатию: эксперты оценили как чуткие или очень чуткие 45,1% ответов ИИ и только 4,6% ответов медиков.
Оценка экспертами качества ответов (слева) и уровня эмпатии (справа) ChatGPT и профессиональными врачами. Изображение: University of California San Diego
Ученые подчеркивают, что исследование касается только онлайн-консультирования с помощью специализированных сервисов и не заменяет полноценного обследования при приеме в клинике. Они не думают, что нейронная сеть должна заменить или вытеснить врачей, но она может стать дополнительным инструментом, чтобы снизить нагрузку на медицинские учреждения и обеспечить доступом к качественной помощи людей, которые ее лишены.
