icon应用场景icon
线下医院诊室
医患对话保存、病历生成
患教发送
疾病筛查
医教
线上互联网医院
线上医患对话结构化
智能专病库,赋能科研
线上互联网医院诊疗质控
基层社区医院
建立患者档案、流调表
icon产品介绍icon
打造智慧诊室
将诊室听译机器人放置于医生问诊桌上,位于医患之间,问诊期间,医生专注于问诊本身,机器人实时录音并智能处理医患对话;问诊结束后,医生直接引用自动生成的电子病历,患者扫设备上的二维码,接收医嘱交待,完成诊后随访。
出色的语音分离与降噪能力
诊室听译机器人采用六麦麦克风圆形阵列,经过数十万小时端到端的神经网络训练打磨而成,能够在嘈杂的诊室环境中智能区分医患对话,支持360度全方位拾音,高精度声源定向。
卓越的医疗语音识别能力
诊室听译机器人能把麦克风阵列分离出来的医患录音实时转成文字,它的语音识别引擎内置医学词汇大于100万个,语音识别速度大于300字/秒,语音识别准确率大于96%。
智能的对话理解能力
诊室听译机器人不仅可以准确理解患者的通俗语言,也可针对医患对话中的上下文指代信息进行补全,并引入情感分析模型去判断医患描述内容是否真实发生,还可为医生推送相关临床提醒和患教内容。
先进的病历生成能力
在医生问诊结束后,诊室听译机器人屏幕将会显示完整对话内容和抽取结果,一次性的病历生成准确率达97%。抽取结果经医生简单确认后,便可生成标准病历,支持一键写入医院EMR系统。
便捷的患者智慧服务能力
诊室听译机器人支持医院为线下患者提供智能的诊后服务,引导患者转向互联网医院获取更多持续服务,提升患者对医院的满意度和黏性。
icon产品优势icon
语音识别准,抗噪性能佳
自研并发声源盲分离算法,拾音准确率超99%;深度优化医疗语音识别模型,精准识别并录入医患对话内容,极大提高门诊工作效率。
准确率高
内置医学词汇>100万,语音识别字准确率96%,速度>300字/秒;医患语音分离准确率>90%,召回率90%;电子病历自动化生成准确率>97%。
语义理解能力强
以左手医生病历结构化引擎为基础,针对医患对话进行深度理解,抽取关键性问诊信息,生成结构化病历及标准电子病历。
灵活便捷
根据不同场景进行配置,支持个性化开发;支持分科室语言模型训练,自动优化学习可形成专病数据库,助力临床科研。
保护患者隐私
患者就诊前进行授权;语音录音及识别私有化部署在医院内部。
icon诊室听译机器人是什么icon

诊室听译机器人是综合语音识别,语意识别,对话理解,病历结构化、病历生成等功能于一体的智能设备。

功能体现
语音识别----语音翻译、单人录音
语意识别----医嘱知识推荐 (根据医患对话上下文)
对话理解及病历结构化----完成录音后左侧的对话抽取结果
病历生成----生成符合临床要求的完整规范病历
icon诊室听译机器人应用到的技术icon
语音信号处理
语音降噪、声源定位、波束成形语音增强、盲源分离、角色分离 语音识别(ASR)
结构化&对话理解分析
病例结构化、对话解析、语义理解、指代消歧、相似计算......
icon收音阵列介绍icon
收音范围
医生侧说话对应的角色就是医生(阵列:30°到150° )
患者侧说话对应的角色就是患者(阵列210°到330° )
只支持普通话
阵列不能被覆盖,只能平放,否则会影响音译效果
icon基础功能介绍—带设备版icon
涉及6个端
医生屏幕端(机器人硬件)
医生电脑控制端(PC端插件,Windows+网页
患者屏幕端(机器人硬件副屏幕)
患者小程序端(手机小程序,便于接收电子医嘱消息)
运营管理端(电脑管理端,Windows+Mac+网页)
医生小程序端(手机小程序,便于医患建立关系,可打通疾病管理、随访)
icon基础功能介绍—不带设备版-涉及4个端icon
医生电脑控制端
PC端插件,Windows+网页
患者小程序端
手机小程序,便于接收电子医嘱消息)
运营管理端
(电脑管理端,Windows+Mac+网页)
医生小程序端
(手机小程序,便于医患建立关系,可打通疾病管理、随访)
icon医生端屏幕(机器人硬件)icon

医生设备端,展示实时对话内容、智能推荐提醒内容。医生设备端,医生可通过触摸屏进行操作。医生设备端,区分病历版和患教版,两者功能相同,页面交互不同。

icon患者端屏幕(机器人硬件)icon

患者设备端,听译机器人面向患者的副屏幕中运行的工具端,展示患者协议及二维码信息,患者扫描二维码加入问诊。患者授权录音后扫码获得医嘱交代:患者就诊前被知情告知,默认15S后自动授权,涉及机器人患者端、患者手机小程序/H5端。

icon医生PC端icon

运行在医生PC上的程序,展示医患对话内容、对话抽取结果及生成电子病历。

icon医生管理端icon

医生管理端,可以进行科室及医生个性化配置,并查看、修改既往记录,检索病历等。

icon患者小程序端icon

患者小程序端,查看就医记录,接收医嘱、随访、指导、患教等信息。

icon诊中服务技能—患教icon

诊中医生通过医生屏幕端,推送患教内容到患者端小程序,以减轻医生给患者解答重复性问题。患教内容支持定制化要求。

icon诊后智能服务—和疾病管理打通icon

引导用户加入随访系统:听译功能与整体项目系统结合,业务流程可以对接随访系统,即支持引导用户加入随访系统,智能开展全院病种诊后随访。随访系统的具体涉及参加智能随访部分。如图为患者端App,患者在门诊听译系统添加医生后,可以接到医生加入随访计划的邀请。

icon其他技能—医教icon

管理端可将专家日常问诊积累的病历、对话录音、患教知识内容等形成知识库提供给初级医生进行学习。目前支持基础文本检索和结构化高级检索。

icon使用流程—绑定设备号icon

带设备版:(每个设备只有一个固定的设备号) 不带设备版:无需绑定设备号

icon使用流程—医生登陆icon

带设备版微信扫描医生屏幕端的二维码/工号密码【登录】,医生屏幕、PC端插件/网页同时登录,不带设备版通过pc端扫码或者工号密码【登录】。

icon使用流程—开始使用icon
方式一
医生点击开始,即可进行使用。带设备版:可在设备端或者pc端点击开始。不带设备版:在pc端点击开始。
方式二
对接医院EMR或者HIS,通过点击医院系统患者列表中某患者,可以自动开始本次问诊。
icon使用流程—对话可以随时暂停和继续icon
icon使用流程—患者同意授权icon

医生点击PC端的开始按钮后,患者端弹出协议文件及是否同意授权按钮(此页面持续15秒,为避免交叉感染15秒后患者未点不同意默认同意)

icon使用流程—实时对话翻译icon

患者授权后,医患对话进入实时翻译,带设备版支持在设备端查看语音识别结果

icon使用流程—医生诊中诊后发送患教内容icon

带设备版∶在对话过程中患者询问或者医生提到相关的医嘱知识,会触发我们已有的医嘱知识库,医生点击屏幕的发送,可以直接发送电子医嘱到患者端小程序

icon使用流程—患者扫码领取诊间交代icon

带设备版∶患者直接扫描患者端屏幕上的二维码关注医院公众号,便于实时收到患教内容和诊间交代,建立医患关系

icon使用流程—医患对话完成后,PC端进入结果页icon

带设备版&不带设备版∶医生可以通过鼠标进行补充和编辑,也可以对科室或个人推荐的字段内容、实体属性进行个性化设置,提高专科识别准确率和工作效率

icon使用流程—预览和生成病历icon

带设备版&不带设备版∶医生确定结构化内容后可以【预览】查看病例生成内容,也可以直接点击【生成病历】

icon 使用流程—医生管理端管理病历icon
icon 单人录音功能icon

有设备版∶遥控器需要对着设备按开始/结束录音键;无设备版∶快捷键打开/关闭单人录音功能;录音需要对着麦克风阵列收音区域,语音识别内容会展示在光标后方,方便医生做记录。

产品推荐 查看更多>>
    企业级机器人流程自动化智能平台

    云扩企业级机器人流程自动化智能平台是一个集成了流程管理、执行结果展示、计划任务,机器人管理以及用户管理的云端控制台系统,使您能够协调您的云扩RPA机器人对设计完成的工作流进行统一调度与执行,确保数据的安全,从而可以实现中心管理员对业务的全面掌控。

    功能完备

    高效稳定

    随锐科技 KRD-I220配电室智能巡检机器人

    随锐科技KRD-I220配电室智能巡检机器人,专为配电室环境所设计,采用SLAM激光导航与两级升降设计 (0.3m〜1.6m垂直机械臂),可精准定位检测点,实现配电室巡检区域的全面覆盖。支持多种巡检模式、智能告警、历史数据分析,可代替人工巡视,实现对配电室全自动智能巡检,保障企业用电安全。

    精准定位

    全面覆盖

    多种巡检模式

    智能告警

    智能动态人脸识别立体监控机器人

    智能动态人脸识别立体监控机器人,内置双路高清摄像头,基于人的脸部特征,对输入的视频图像进行判断是否存在人脸,如果存在人脸,则进一步标示出每张脸的位置,大小和主要脸部器官的信息,从多张视频帧上筛选出符合系统要求的人脸照片,通过传输给后端人脸识别管理服务器进行

    功能完备

    安全可靠