Диагностика врачами без помощи ChaGPT: 74% точности.
Врачи с ChatGPT: 76%.
Сам ChatGPT (без врачей): 90%!Как проходило тестирование:
В эксперименте участвовали 50 врачей (26 опытных и 24 резидента), которые решали 6 сложных клинических кейсов. Одна группа полагалась на традиционные ресурсы, такие как UpToDate и Google. Вторая использовала те же ресурсы вместе с ChatGPT. В третьем варианте ChatGPT самостоятельно анализировал кейсы. Оценка базировалась на точности дифференциальных диагнозов, аргументации выводов и выборе дальнейших шагов.
Почему врачи проигрывают даже с ChatGPT:
1️⃣ Когнитивные искажения. Многие врачи игнорировали выводы ChatGPT, если те противоречили их диагнозам.
2️⃣ Недостаток навыков. Врачи использовали ИИ только для точечных вопросов, а не для комплексного анализа случаев.
3️⃣ Недоверие. ИИ всё ещё воспринимается как вспомогательный инструмент, а не как партнёр.
Чтобы раскрыть потенциал ИИ в медицине, нужно обучать специалистов эффективному взаимодействию с ним (а впрочем, как и во всех других областях).
Сергей Булаев AI 🤖 - об AI и не только