Исследование: искусственный интеллект справляется с постановкой диагнозов хуже, чем практикующие врачи

Сегодня искусственные интеллектуальные системы (ИИ) проникают во все сферы жизни. По мнению аналитиков McKinsey Global Institute, в США к 2030 году порядка 12 млн работников сменят профессию из-за развития ИИ, 30% работы человек в США будет делегировать «машине». Каковы же перспективы использования ИИ в практической медицине?

В издании Nature Medicine опубликовано исследование ученых из США, Германии и Великобритании, посвященное оценке точности постановки диагноза большими языковыми моделями (LLM) и изучению возможности внедрения таких технологий в систему здравоохранения.

Авторы оценили возможности LLM в работе с базой, содержащей 2,4 тысячи случаев пациентов с аппендицитом, панкреатитом, холециститом и дивертикулитом. Исследователи пришли к выводу: рассматриваемый вид ИИ выставляет диагнозы с низкой точностью. Кроме того, ученые отмечают сложности интеграции: LLM часто нарушают инструкции, чувствительны к количеству и порядку предоставляемых для анализа данных.

Исследователи поясняют, что перед LLM (Llama 2, Clinical Came, Meditron) стояла задача проанализировать анамнез, поставить диагноз и составить схему лечения. ИИ получил данные физикальной диагностики, лабораторных исследований, отчетов о визуализациях.

Ученые оценивали точность интерпретаций ИИ, верность выводов, соблюдение диагностических и лечебных рекомендаций, способность следовать заданным инструкциям. Решения LLM сравнивали с результатами клиницистов. 

Как показали результаты исследования, «машина» существенно уступает практикующим врачам. LLM обработали 80 диагнозов, и наибольшее количество ошибок допустили при определении холецистита и дивертикулита: если верность диагнозов ИИ варьировалась от 13% до 68%, то точность определения медиками названных диагнозов составила от 84% до 86%.

Выяснено, что с точностью врачебных решений LLM успешно конкурируют только при выявлении аппендицита: некоторые языковые модели показали лучший результат, чем клиницисты – на 3-4%. Авторы отмечают, что на сегодняшний день LLM не имеют «диагностического диапазона» в отличие от медиков.

Также исследователи установили, что ИИ часто не учитывает предписанные диагностические рекомендации для назначения обследований, нередко игнорируют содержание клинических протоколов, а также неточно интерпретируют результаты лабораторных исследований.

Кроме того, тестируя ИИ на способность следовать инструкциям, подбирать и компилировать информацию для упрощения работы врачей, авторы выявили, что LLM ошибается в алгоритмах в 25-50% случаев, а в 20% предлагает применить существующие методы. Также при несущественном изменении формулировки запроса результаты отличались.

Если предоставить ИИ доступ к большому количеству анализов, точность снижается. Наилучшие результаты языковые модели демонстрируют при предоставлении лишь определенного списка обследований.

Авторы подчеркнули, что ранее возможности искусственного интеллекта в медицине оценивались в достаточно простых медицинских контекстах – в таких случаях LLM демонстрировали лучшие результаты в сравнении с клиницистами.

Ни сегодня, ни в ближайшем будущем языковые модели не в состоянии стать заменой практикующему специалисту, однако, по мере технологического развития области ИИ может стать прекрасным помощником, облегчающим работу врача и высвобождающим самое ценное – время.

Будьте в курсе ключевых новостей из сферы восстановительной медицины – подпишитесь на Telegram-канал REAMED!

ещё новости

Омоложение клеток и регенерация тканей: как Россия меняет медицину будущего

В России стартует масштабная программа по созданию инновационных препаратов, способных восстанавливать стареющие клетки и стимулировать регенерацию тканей.

09.06.2025
В России открылся первый объединенный протезно-реабилитационный центр для участников СВО

На базе Федерального научно-клинического центра медицинской реабилитации и курортологии ФМБА начал работу первый в стране объединенный протезно-реабилитационный центр для участников специальной военной операции.

09.06.2025
Минтруд утвердил профстандарт для испытателей реабилитационных изделий

С 1 сентября 2025 года в России вступит в силу новый профессиональный стандарт «Испытатель изделий реабилитационной направленности».

09.06.2025
Китайские ученые представили революционную VR-систему для реабилитации рук

Исследователи из Университета Чжэнчжоу разработали инновационную систему, которая позволяет восстанавливать двигательные функции рук.

09.06.2025
В Самаре успешно испытали биопротезы для ног с нейроуправлением

Российские ученые завершили доклинические испытания инновационных биопротезов для ног. Разработка позволит пациентам двигаться более естественно и избежать проблем, связанных с традиционными протезами.

09.06.2025
Кейс месяца: оснащение геронтологического центра «Синара-Долголетие»

Центр активного долголетия «Синара» – пространство для комфортной жизни и эффективной реабилитации, созданное с учетом всех потребностей старшего поколения.

03.06.2025
Крупнейшее событие в спортивной медицине: Сочи и Санкт-Петербург объединили экспертов

Сочи и Санкт-Петербург стали главными площадками для профессионального диалога в области спортивной медицины.

03.06.2025
В РФ появится сеть центров реабилитации, в том числе для инвалидов СВО

В России планируется создание сети комплексных протезно-реабилитационных центров, в том числе для участников специальной военной операции

02.06.2025
Детским реабилитационным центрам упростят госзакупки

Госдума разрабатывает законопроект, упрощающий госзакупки для детских реабилитационных центров.

02.06.2025
Чудо-имплантат разработали ученые из Техаса

Ученые из Техасского центра биомедицинских устройств представили уникальный имплантат, позволяющий быстро восстановиться при травмах спинного мозга.

02.06.2025
уже работают с нами Посмотреть все
МЦ «ИНЗДРАВ», г. Омск
МЦ «Медси», г. Москва
ГБУ «Научно-практический центр медико-социальной реабилитации имени Л.И. Швецовой», г. Москва
МЦВЛ «Клиника реабилитации академика Лядова», г. Москва
ГАУЗ «Городская клиническая больница №7», г. Казань
НИИ «Научный центр неврологии», г. Москва
СПб ГБУЗ «Городская больница Святого Великомученика Георгия», г. Санкт-Петербург
СПБ ГБУЗ «Городская Мариинская больница», г. Санкт-Петербург
ФГБУ «НМИЦ им. В. А. Алмазова» Минздрава России, г. Санкт-Петербург
Клиника «ИМИН», г. Казань
ФБУН «ЕМНЦ профилактики и охраны здоровья рабочих промпредприятий», г. Екатеринбург
ХК «СКА», г. Санкт-Петербург
ФК «Зенит», г. Санкт-Петербург
ФГБУ ТЦ сборных команд России «Озеро Круглое», д. Агафониха
ГАУЗ СО «Многопрофильный клинический медицинский центр «Бонум», г. Екатеринбург
СПб ГБУЗ «Городская больница № 40», г. Сестрорецк
ФГАУ «Лечебно-реабилитационный центр» МЗ РФ, г. Москва
ФГБУ Санаторий «Заря» Управления делами Президента Российской Федерации, г. Кисловодск
ФГБУ «Северо-Кавказский федеральный научно-клинический центр» ФМБА России, г. Ессентуки
ГБУ «Республиканский центр лечебной физкультуры и спортивной медицины», г. Якутск
Заказать звонок
Оставьте номер телефона и мы перезвоним вам
Вы интересуетесь для:
Нажимая на кнопку, Вы даете согласие на обработку персональных данных и соглашаетесь с политикой конфиденциальности
Запрос КП
Получите коммерческое предложение для лицензирования центра или отделения оборудования с кодами соответствия по приказу. Оставьте Ваши контактные данные, и наши специалисты свяжутся с Вами в ближайшее рабочее время
Вы интересуетесь для:
Нажимая на кнопку, Вы даете согласие на обработку персональных данных и соглашаетесь с политикой конфиденциальности
Стать частью команды
Отправьте своё резюме и мы перезвоним вам
Прикрепите резюме
    Нажимая на кнопку, Вы даете согласие на обработку персональных данных и соглашаетесь с политикой конфиденциальности