Голосовой помощник врача
 

Доброго времени суток. Нужна консультация сообщества.

Мы - команда студентов, будущих специалистов по специальности "Прикладная информатика в здравоохранении", разрабатываем приложение - "Голосовой ассистент врача". Этакий аналог Алисы от Яндекса в сфере здравоохранения.

Основная задача - заполнение клинической документации и предоставление справочной информации.

Например врач говорит:
"Подготовь рецепт для Петрова Петра Петровича 89 года рождения. Выпиши 20 порошков, состоящих из анальгина по 200 миллиграмм и кофеина по 50 миллиграмм. Назначь по 1 порошку при головной боли.
Рецепт действителен 3 месяца"

Система идентифицирует врача по голосу, распознает текст, создает бланк рецепта 107-1/у и заполняет соответствующие поля:
Рецепт: взрослый
ФИО пациента: Петров Петр Петрович
Дата рождения: 10.01.1989
Rp.: Analgini 0.2
Coffeini 0.05
M. f. pulv.
D. t. d. N20
S. По 1 порошку при головной боли.
Рецепт действителен в течение: 3 месяца

1. Как вы оцениваете перспективы применения голосовых помощников в здравоохранении? Нужно ли?
2. Какие задачи можно переложить на голосового помощника?
3. Какие проблемы могут возникнуть у медперсонала при взаимодействии с голосовыми помощниками?
4. Сколько времени у вас уходит на заполнение документов?

В теории нужно- но сто раз в разных вариантах спотыкались о произношение, специфику глоссария,очепятки и тд.
Но надо делать

Диктофон + секретарь = голосовой помощник для всей поликлиники. Или отделения.
Понятно, что нужно бы такой девайс, как голосовой помощник, , но сдается, что проблемы распознавания и сленга будут крайне велики. Произношение, акцент, заикание-шепелявость-картавость, плохой русский язык...

Благодарю за внимание.

Ваши опасения насчет точности распознавания медицинских терминов и сленга вполне обоснованы.
Для решения этой проблемы мы обучаем систему распознавания на наборе данных состоящем из аудио лекций и аудио книг по медицине. Это увеличит точность распознавания специфической лексики.

Насколько часто врачи пользуются медицинскими справочниками? Например справочником лекарственных средств «Видаль».

Будет ли вам полезной функция получения от голосового ассистента справочной информации из этого справочника?
Какая еще справочная информация может оперативно потребоваться?

Смотря какой врач...
Смотря кому полезна.

Как по вашему, какие функции нужны голосовому ассистенту?

ИМХО, идея про рецепты - не перспективна. Классические рецепты мало кто и где выписывает.
Справочниками вроде Видаля пользуются часто, но быстрее открыть инструкцию самому и прочесть нужное.
Из того, что могло бы пригодиться, приходит на ум - сделать голосового помощника для часто используемых калькуляторов. Например, расчет СКФ по К.-Г. или CKD-EPI или ССР по Score.

Спасибо за наводку Parsek1809

Еще шкала для этого же:
CHADSVASC and HASBLED risk factors, EHRA
[Ссылки могут видеть только зарегистрированные пользователи. ]

Может еще будет полезным формирование выписки или консультативного заключения.
ФИО, возраст, текущая дата.
Диагноз (тут уже могут понадобиться шаблоны).
Данные осмотра и обследования.
Рекомендации:
Помощник может вытащить подробнейшую гипохолестериновую диету (что обычно лень очень подробно делать), рекомендации по модификации образа жизни (тоже подробные), медикаменты сообразно диагнозу (напомнить, например, что при сердечной недостаточности нужны прилы и лолы, от холестерина статины).

Как по мне, "птица-секретарь" в распознавании речи (надиктовка дневников, протоколов операций) - основная потребность.

Лазить в сети, ну разве что поиск препаратов по названию или МНН...
Вариант с калькуляторами - можно (BSA для химиотерапии, доза вряд ли, скорее пересчитівать все равно будем)

Еще вот отсюда:
[Ссылки могут видеть только зарегистрированные пользователи. ]
Чтобы по возрасту, полу, факту курения и половой активности
выдавал набор необходимых профилактических обследований и мероприятий.

Korzun, aberzoy спасибо за информацию.
В ближайшее время размещу на форуме видео работы прототипа (работа с одним из мед. калькуляторов и заполнение бланка рецепта)

:ag::ag::ag:

Анекдот.
Два глухих общаются:
- Вы в баню?
- Нет, я в баню!
- А я думал, что Вы в баню...

ИМХО, не нужно делать ненужные приложения, т.к. они не нужны.
Если, конечно, не стоит цель быстро потратить выделенные государством деньги...

P.S. Применительно к рецепту из прошлого века. Порошки уже давно никто не выписывает. Порошок - признак низкой квалификации врача и следовательно неумение им пользоваться достижениями прогресса. Т.е. функционал "про порошки" будет для тех кто не сможет им пользоваться.
P.P.S. И анальгин имеет международное название метамизол, которое и должно быть написано в рецепте (т.е. ошибка детектед). А сам метамизол давно морально сильно устарел и во многих странах не применяется уже. Т.е. еще один шаг в глубокое прошлое в Ваших мыслях про "современное" "нужное" приложение.
P.P.P.S. Неприятно, наверное, читать что то, что уже создано и чем похоже гордитесь (функционал "рецептов"), никому не нужно. Но от куска мрамора Микеланджело решительно отрезал ненужное. И только так получались шедевры!

Korzun.

Пример с порошком и бланком 107-1/у - частный случай для наглядности.

Вместо порошка может быть, например, азитромицин, вместо бланка 107-1/у - ЕМИАС или другая медицинская информационная система.

Смысл демонстрации прототипа заключается в том, чтобы показать, что система можем распознать медицинские термины, сопоставить названия лекарств\веществ с записями в МНН\Vidal, корректно заполнить соответствующие поля документа...и сделать это все быстро.

Идея с калькуляторами крутая - берем в работу расчет HAS-BLED для начала. Какая еще справочная информация (из того же Vidal) требуется врачу? Какие еще задачи, кроме протоколирования, можно передать голосовому ассистенту?