Цікавий поворот: У тестах Гарварду ШІ перевершив лікарів у первинній діагностиці пацієнтів

Нове дослідження, опубліковане в журналі Science, показує, що великі мовні моделі можуть демонструвати дуже високі результати в медичній діагностиці, інколи навіть не поступаючись лікарям, передають Патріоти України.

Як пише TechCrunch, роботу виконали дослідники з Гарвардської медичної школи та медичного центру Beth Israel Deaconess, які порівнювали ефективність моделей OpenAI o1 і 4o з лікарями внутрішньої медицини.

В одному з експериментів вони проаналізували 76 реальних випадків пацієнтів у відділенні невідкладної допомоги. Діагнози, поставлені двома лікарями, порівнювали з відповідями ШІ. Оцінювання проводили інші лікарі, які не знали, чи був діагноз сформований людиною, чи моделлю. Результати показали, що модель o1 часто працювала на рівні або трохи краще за лікарів, особливо на першому етапі діагностики, коли інформації про пацієнта найменше, а рішення потрібно приймати швидко.

У тріажних випадках модель o1 правильно або майже правильно визначала діагноз у 67% випадків, тоді як лікарі мали 55% і 50%. Дослідники підкреслюють, що ШІ отримував ті самі дані з електронних медичних карт, без будь-якої додаткової обробки.

Попри ці результати, автори дослідження наголошують, що ШІ не готовий замінити лікарів у реальних клінічних рішеннях. Йдеться лише про необхідність подальших випробувань у реальних умовах, оскільки сучасні моделі мають обмеження, особливо при роботі з нетекстовими даними.

Лікарі також звертають увагу на відсутність чіткої відповідальності за медичні рішення ШІ та підкреслюють, що пацієнти все ще очікують людського контролю в критичних ситуаціях. Інші експерти додають, що результати можуть бути перебільшені заголовками, оскільки порівняння проводилося не з лікарями саме невідкладної допомоги.

Загалом, дослідження показує потенціал ШІ як допоміжного інструменту в медицині, але не як повну заміну лікарів.