范德比尔特大学医学中心(VUMC)希望利用语音和AI技术“转换”电子健康记录(EHR),让EHR能够自然地与医生互动,找到相关信息,有望改善患者护理。
“声音是我们最自然的交流方式。医学信息学和儿科内分泌学助理教授、医学博士阿雅库马克里斯托在HIMSS会议上说令人惊讶的是,我们并没有更多地把它作为一种沟通方式来发现EHR的问题。"
上周在佛罗里达州奥兰多举行的会议上,库马-克里斯托和VUMC的软件工程师蒂莫西科菲曼讨论了医疗中心开发的语音用户界面的最新原型——范德比尔特EHR语音助手(VEVA)——及其与EHR沟通的努力。
VEVA的目标是自然融入EHR,并使用自然语言处理(NLP)来倾听用户的语音查询,将语音转换为文本,通过语言模型处理信息,找到信息并将其中继回用户/医生。自然语言处理被描述为一种人工智能,可以帮助计算机理解、解释和操纵人类语言。
Kumah-Crystal说:“很像Siri或Alexa,这个工具是用来理解你的请求和你想知道的东西,并以自然的声音提供给你。
“我们将应用程序直接嵌入EHR,这样(医生)就可以直接调出它,”科菲曼说。“只要它在听,就会把这些信息传回到图书馆和云端,然后处理成我们的语言识别模型。”
在对14家VUMC儿科内分泌供应商进行可用性研究后,VEVA被认为是“高度可用”的,平均系统可用性量表得分为80.7分。在这些提供商中,64%的人表示他们愿意使用该系统,而36%的人表示他们不会。
原型的下一步包括:合并用户反馈,增加对临床警报的支持,并确保它可以扩展到其他医院系统。尽管取得了进展,但开发人员仍然面临着VEVA原型和将语音响应集成到EHR的几个挑战和设计考虑。包括延迟、自动连接等挑战以及笔记本电脑和听写麦克风等已安装硬件问题。
Kumah-Crystal还指出,VEVA系统必须简洁明了,以便尽可能准确地分析、解释和提供信息,同时必须以用户听起来和感觉上正确的方式运行。
“这就是语音用户界面的全部意义。如果你做得不好,那么这个人会忙于思考为什么听到你想传达的真正重要的临床信息听起来不对劲,”Kumah-Crystal说。
Kumah-Crystal和Coffman向其他希望将语音助手纳入EHR的医疗机构提供了一些建议和意见,以启动这一进程。
了解并衡量提供商对电子病历的不满。
创建一个业务案例,以优化提供商的体验,并在其EHR工作流程中节省时间
成立跨职能团队构建整体模型,考虑提供者的痛点、工作流程和信息需求。
当用户测试并提供反馈时,构建并迭代语音助手的原型。
理解信息论,映射查询和内容,满足用户需求。
Kumah-Crystal说:“有一种非常特殊和神奇的方式,我们可以真正使用声音,所有的工具都存在。所有的工具都有一段时间了,我们只需要仔细考虑一下。并弄清楚如何使用它,在哪里插入它,以及如何使它工作。
“我们希望许多人都这样做,我们希望许多人都在构建它,使之成为常态,这样范式转变就不再是我们谈论的话题。这只是一个新标准。”