Учені з Медичного центру Beth Israel Deaconess у Бостоні з’ясували, що ChatGPT перевершує лікарів у точності постановки діагнозів.
В експерименті брали участь 50 лікарів із кількох великих американських лікарень. Кожному дали шість історій хвороби та попросили назвати три можливих діагнози, підкріпивши кожен з них доказами, і потім поставити остаточний діагноз. Хвороби були не найпоширеніші, але й не екзотичні. Ці випадки ніколи не публікувалися, тому не могли бути включені в датасет ChatGPT.
➕ Результати
Найкраще із завданням впорався ChatGPT, правильно поставивши діагноз у 9 випадках із 10. Лікарі, які звернулися до чат-бота за другою думкою, мали рацію в 76% випадків, а ті, хто діяв, покладаючись винятково на власні знання та інтуїцію, ставили діагноз із точністю лише 74%.
«Я був шокований результатами. ШІ має стати «правою рукою» лікарів», – наполягає лікар і співавтор дослідження Адам Родман.
Якщо ChatGPT вказував лікарям на помилку, вони найчастіше наполягали на своєму і не хотіли змінювати думку. Також у багатьох лікарів не було жодного досвіду використання ШІ: вони навіть не знали, що можуть скопіювати історію хвороби в чат-бот і попросити його дати вичерпну відповідь.
Тільки у США неправильні діагнози отримують понад 400 тис. осіб щорічно. Кожна друга помилка коштує пацієнтам життя. Економічні збитки від людського фактора перевищують $20 млрд.
