Відкрите ШІ зрівнялося з комерційними моделями у медичній діагностиці

Дослідники Гарвардської медичної школи у співпраці з лікарями медичних центрів Beth Israel Deaconess та Brigham and Women's Hospital показали, що відкрита ШІ-модель Llama 3.1 405B може конкурувати з комерційною GPT-4 у вирішенні складних медичних випадків.

Джерело: medicalxpress.com

Результати дослідження

У статті, опублікованій у JAMA Health Forum, автори порівняли продуктивність обох моделей на 92 клінічних випадках із The New England Journal of Medicine.

Основні висновки:

• Llama 3.1 правильно діагностувала 70% випадків, тоді як GPT-4—64%
• Відкрита модель визначила правильний діагноз у першому варіанті у 41% випадків (проти 37% у GPT-4)
• На нових клінічних кейсах, які не входили в навчальні дані Llama, вона показала 73% точності

Чим відкриті ШІ-моделі вигідні?

• Конфіденційність даних: можуть працювати локально без передачі інформації на сторонні сервери
• Гнучкість: можна адаптувати для конкретних клінічних потреб
• Низька залежність від комерційних розробників

Закриті моделі, такі як GPT-4, поки що простіше інтегруються в електронні медичні записи та підтримуються розробниками, але їхня продуктивність більше не є унікальною перевагою.

ШІ як помічник лікаря

Щороку в США 795 000 пацієнтів стають жертвами діагностичних помилок. Впровадження ефективних ШІ-систем могло б зменшити цей показник, пришвидшуючи процес діагностики та зменшуючи витрати на непотрібні тести.

За словами авторів, ці результати можуть змінити підхід до застосування ШІ у медицині, надавши лікарям більше контролю над інструментами, які вони використовують.