Исследование: ИИ оценивает врачей на основе отзывов пациентов

ФОТО: magnific.com /Автор:magnific

ИИ-сервисы, которые используют отзывы для поиска и сравнения врачей, могут перенимать содержащиеся в них гендерные и другие предубеждения, к такому выводу пришли авторы статьи в Digital Medicine. Исследование экспертов из Университета Джонса Хопкинса базируется на анализе отзывов с четырех крупных американских платформ – Healthgrades, Vitals, RateMDs и Yelp. Исходный массив включал 8,69 млн отзывов о 587 562 врачах, собранных по состоянию на 1 августа 2021 года. В итоговую выборку вошли специалисты, имевшие от пяти до ста отзывов.

Таким образом, были сформированы 10 характеристик, которые оценивал ИИ. Пять из них были основаны на модели «Большой пятерки» – открытость новому, добросовестность, экстраверсия, доброжелательность и эмоциональная стабильность. Еще пять отражали непосредственно восприятие врача пациентами – качество общения, клиническую компетентность, внимание к потребностям пациента и результатам лечения, а также признаки доверия. Исследователи отмечали, что речь идет о том, каким специалист предстает в отзывах пациентов.

Мужчины получили более высокие оценки по всем десяти характеристикам. Наибольшие различия между мужчинами и женщинами обнаружили в воспринимаемой клинической компетентности, внимании к результатам лечения, эмоциональной стабильности и показателях доверия.

Анализ продемонстрировал, что представители хирургических направлений получили один из наиболее высоких результатов по большинству характеристик. В частности, диагностические радиологи лидировали по воспринимаемой клинической компетентности, добросовестности и эмоциональной стабильности, а хирурги – по качеству общения и вниманию к удовлетворенности пациентов. Врачи экстренной медицины и психиатры получили более низкие оценки сразу по нескольким параметрам. Ученые связывают это прежде всего с условиями работы: экстренная медицина предполагает короткие и стрессовые контакты с пациентами, а на оценку психиатров может влиять сложность заболеваний и стигматизация психических расстройств.

Дополнительный анализ позволил выделить четыре устойчивых типа врачебных профилей. У 33,8% врачей оценки были высокими практически по всем характеристикам, у 22,6% – преимущественно низкими. Еще две группы различались прежде всего уровнем экстраверсии. При этом высокая экстраверсия сама по себе не сопровождалась высокими оценками других профессиональных качеств, что, по мнению авторов, показывает ограниченность попыток описывать врача одним показателем.

Исследование также показало, что анализ текстов отзывов помогает понять, за что именно пациенты ставят врачу высокие или низкие оценки. Больше звезд обычно получали врачи, которых чаще описывали как внимательных, хорошо общающихся и вызывающих доверие. При этом ИИ позволял отдельно оценить разные стороны взаимодействия с пациентом, которые общий рейтинг не отражает.