CN115565662A - 一种病床语音交互桌面终端系统 - Google Patents

Abstract

本发明提供了一种病床语音交互桌面终端系统，包括：远程通讯模块，用于和医院终端进行通讯，以使得医院终端能够发起远程查房、以及桌面终端主动向所述医院终端发起呼叫服务；患者管理模块，用于将采集到病患发出的语音信息转换为语音文本，并根据所述语音文本执行与所述语音信息相对应的业务操作；医务管理模块，用于对上门巡诊的医务人员进行身份确认，并在身份确认后生成病患的诊疗信息。旨在解决现市面上的智能家庭病床大多是使用智能手机操控的，但大部分申请家庭病床的患者都是老年人，而这部分群体存在不熟练使用智能手机，文字图标太小看不清，不会打字，导致影响智能家庭病床使用的问题。

Description

一种病床语音交互桌面终端系统

技术领域

本发明涉及智能病床技术领域，具体涉及一种病床语音交互桌面终端系统。

背景技术

近年来，随着人类疾病的变化和人口老龄化的到来，人们对居家康复照护的需求越来越大，家庭病床作为医疗卫生机构服务的延伸，对于发展完善康复照护体系、缓解医疗卫生和养老资源紧张、提升康复照护和养老服务获得感发挥着越来越重要的作用。现市面上的家庭病床的服务内容、服务要求，大多需要使用患者服务终端通过互联网、物联网等信息技术将家庭病床与医疗卫生机构进行更好地服务衔接，实现远程健康监测、远程康复照护指导，以有效地保障医疗卫生服务安全、提高专业技术资源的利用效率，为医疗卫生机构更好的开展家庭病床服务提供技术支撑。当前在开展家庭病床业务过程中，患者与远程医务人员的交互主要是使用手机终端来实现的，在患者手机上安装医院家庭病床业务的患者端APP，当需要找护士时打开APP视频呼叫，当医生、护士需要远程查房时主动视频呼叫患者，过程中的相关业务数据需要患者登录APP查看。

但当前申请家庭病床的患者群体大部分是老年人，这部分人群很多都存在操作智能手机门槛太高，甚至很多没有智能手机的情况，而家庭病床的很多交互需要涉及到手机端的打开、关闭、信息反馈、输入信息、阅读信息等操作，对于老年人用户可能会出现很多不熟练使用智能手机，文字图标太小看不清，不会打字，导致无法与医务人员进行远程互动，影响智能家庭病床使用的问题。

有鉴于此，提出本申请。

发明内容

本发明的目的在于提供一种病床语音交互桌面终端系统，旨在解决现市面上的智能家庭病床大多是使用智能手机操控的，但大部分申请家庭病床的患者都是老年人，而这部分群体存在不熟练使用智能手机，文字图标太小看不清，不会打字，导致影响智能家庭病床使用的问题。

本发明提供了一种病床语音交互桌面终端系统,包括：

远程通讯模块，用于和医院终端进行通讯，以使得医院终端能够发起远程查房、以及桌面终端主动向所述医院终端发起呼叫服务；

患者管理模块，用于将采集到病患发出的语音信息转换为语音文本，并根据所述语音文本执行与所述语音信息相对应的业务操作；

医务管理模块，用于对上门巡诊的医务人员进行身份确认，并在身份确认后生成病患的诊疗信息。

优选地，所述远程通讯模块包括：

远程查床模块，用于医院终端向桌面终端发起远程查房服务；

联络家属模块，用于识别患者的语音信息，向患者的家属发起呼叫服务；

呼叫医院模块，用于识别患者的语音信息，向远程医务操作端发起呼叫服务。

优选地，所述患者管理模块包括：

报告查询模块，用于识别患者的语音信息，向病患语音播报病患在建床期间产生的相关医疗数据，其中，所述相关医疗数据包括费用清单、检查检验报告以及用药明细；

护理宣教模块，用于识别患者的语音信息，向病患播放医院终端发送的护理宣教资料，其中，所述护理宣教资料包括宣教视频、宣教PPT以及宣教文图文章；

体征测量模块，测量病患当前的体征数据，进行监测记录，并且当监测到所述体征数据超过预设值时，进行语音告警，其中，所述体征数据包括血糖测量数据、血压测量数据、血氧测量数据、体脂测量数据以及心电测量数据；

用药提醒模块，用于根据医院终端发送的用药医嘱关联获取相应的用药信息，生成提醒计划，当根据所述提醒计划判断到达患者的吃药时间时，自动进行语音用药提醒；

使用说明模块，用于识别患者的语音信息，向病患语音播放病床语音交互桌面终端系统的使用说明视频。

优选地，所述医务管理模块包括：

巡诊打卡模块，用于对上门巡诊的医务人员进行身份确认，并生成打卡记录；

电子床头卡模块，用于在身份确认后生成病患的诊疗信息，并进行展示，以便于医务人员及时了解病患的情况，其中，所述诊疗信息包括患者姓名、建床时间、责任医生、责任护士、以及已建床天数；

设备授权登录模块，用于绑定家庭病床用户账号和设备二维码，以便于用户能够快捷的登录病床语音交互桌面终端系统。

优选地，所述患者管理模块包括语音识别单元，其中，所述语音识别单元用于：

实时获取病患发出的语音信息数据，并对所述语音信息数据进行识别，生成语音文本；

对所述语音文本进行解析处理，生成用户意图解析文本，并对所述用户意图解析文本进行完整度判断；

当判断到所述用户意图解析文本的完整度达到预设值时，对所述用户意图解析文本进行关键词匹配处理，生成与所述语音信息数据相对应的操作指令；

根据所述操作指令执行相应业务操作，将执行相应业务操作之后生成的处理结果进行转换处理，生成反馈语音信息，并将所述反馈语音信息传递给病患。

优选地，实时获取病患发出的语音信息数据，并对所述语音信息数据进行识别，生成语音文本，具体为：

通过所述语音交互组件的内置麦克风实时获取病患发出的语音信息数据；

通过ASR声学和语言模型对所述语音信息数据进行转换处理，生成与所述语音信息数据相对应的语音文本。

优选地，对所述语音文本进行解析处理，生成用户意图解析文本，并对所述用户意图解析文本进行完整度判断，具体为：

通过NLU语义框架对所述语音文本进行语义框架解析处理，生成用户意图解析文本；

通过DM对话管理系统对所述用户意图信息进行对话内容管理处理，并判断所述用户意图解析文本的完整度是否达到预设值；

若是，对所述用户意图解析文本进行关键词匹配处理；

若否，重新获取病患发出的语音信息数据，进行语音识别。

优选地，对所述用户意图解析文本进行关键词匹配处理，生成与所述语音信息数据相对应的操作指令，具体为：

对所述用户意图解析文本进行KWM关键词匹配处理，提取关键词相关数据，生成与所述语音信息数据相对应的操作指令。

优选地，还包括：

实时获取远程医疗终端传输的操作指令，通过DM对话管理系统对所述操作指令进行对话内容管理处理，生成NLG对话文本；

通过TTS文字转语音系统对所述NLG对话文本进行转换处理，生成操作语音信息，并将所述操作语音信息传递给病患。

综上所述，本实施例提供的一种病床语音交互桌面终端系统，给病患提供了一种语音交互操作病床的使用方式，病患只需要通过语音“指令”即可与医院终端进行互动，同时，该系统还能通过语音问答“沟通”的方式获取病患的当前需求意图进而执行机器指令操作具体业务，即基于家庭病床业务与语音处理技术对病患的语音解析形成具体的机器执行指令，进而开展家庭病床业务。从而解决现有技术中的智能家庭病床大多是使用智能手机操控的，但大部分申请家庭病床的患者都是老年人，而这部分群体存在不熟练使用智能手机，文字图标太小看不清，不会打字，导致影响智能家庭病床使用的问题。

附图说明

图1是本发明第一方面提供的一种病床语音交互桌面终端系统的结构示意图。

图2是本发明第二方面提供的一种病床语音交互桌面终端系统的结构示意图。

图3是本发明实施例提供的远程通讯模块的结构示意图。

图4是本发明实施例提供的患者管理模块的结构示意图。

图5是本发明实施例提供的医务管理模块的结构示意图。

图6是本发明实施例提供的一种病床语音交互桌面终端系统的流程示意图。

图7是本发明实施例提供的一种病床语音交互桌面终端系统的语义框架解析处理示意图。

图8是本发明实施例提供的一种病床语音交互桌面终端系统的语音对话交互处理流程示意图。

图9是本发明实施例提供的一种病床语音交互桌面终端系统的家庭病床终端语音交互技术示意图。

具体实施方式

为使本发明实施方式的目的、技术方案和优点更加清楚，下面将结合本发明实施方式中的附图，对本发明实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式是本发明一部分实施方式，而不是全部的实施方式。基于本发明中的实施方式，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式，都属于本发明保护的范围。因此，以下对在附图中提供的本发明的实施方式的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施方式。基于本发明中的实施方式，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式，都属于本发明保护的范围。

以下结合附图对本发明的具体实施例做详细说明。

请参阅图1至图2，本发明的第一实施例提供了一种病床语音交互桌面终端系统,包括：

远程通讯模块10，用于和医院终端进行通讯，以使得医院终端能够发起远程查房、以及桌面终端主动向所述医院终端发起呼叫服务；

患者管理模块20，用于将采集到病患发出的语音信息转换为语音文本，并根据所述语音文本执行与所述语音信息相对应的业务操作；

医务管理模块30，用于对上门巡诊的医务人员进行身份确认，并在身份确认后生成病患的诊疗信息。

当前申请家庭病床的患者群体大部分是老年人，这部分人群很多都存在操作智能手机门槛太高，甚至很多没有智能手机的情况，而家庭病床的很多交互需要涉及到手机端的打开、关闭、信息反馈、输入信息、阅读信息等操作，对于老年人用户可能会出现很多不熟练使用智能手机，文字图标太小看不清，不会打字，导致无法与医务人员进行远程互动，影响智能家庭病床使用的问题。

具体地，在本实施例中，所述远程通讯模块10是连接用户终端与医务操作端的通讯桥梁，所述患者管理模块20是面向用户的家庭病床便民服务功能模块，所述医务管理模块30是面向医务人员上门服务患者时的业务服务功能模块。所述病床语音交互桌面终端系统是基于家庭病床业务和语音处理技术对用户的语音进行解析，从而形成具体的机器执行指令，进而开展家庭病床业务；同时，用户在使用所述病床语音交互桌面终端系统的期间，可以直接采用语音交互的方式通过所述病床语音交互桌面终端系统与远程的医务人员进行互动，解决用户的操作门槛问题；当有医务人员上门巡诊时，自动对该医务人员进行身份确认，进而向其提供病患的诊疗信息，无需病患提供，在一定程度解决了用户业务操作便利性的问题。所述病床语音交互桌面终端系统通过想用户提供语音交互技术的方式，将病患、病床系统和医院终端三者进行关联，且采用语音交互替代传统智能端操作的模式，更加适合老年人群体使用。

请参阅图3，在本发明一个可能的实施例中，所述远程通讯模块10包括：

远程查床模块101，用于医院终端向桌面终端发起远程查房服务；

联络家属模块102，用于识别患者的语音信息，向患者的家属发起呼叫服务；

呼叫医院模块103，用于识别患者的语音信息，向远程医务操作端发起呼叫服务。

具体地，在本实施例中，所述远程查床模块101向用户提供了主动呼叫护士以及医生远程巡诊的服务，用户在使用所述病床语音交互桌面终端系统的过程中出现需要询问护士的情况时，通过语音交互的方式调取远程查房功能，对远程值班护士进行呼叫，在护士接通后即可与家庭病床患者进行视频互动。在医生进行定期巡诊时，医务人员可以通过远程查房服务发起远程巡诊呼叫，进而与用户家庭病床语音交互终端进行连接，病床终端语音模块会进行播报，例如，医生远程查床了，您可以说接听或者稍后，在用户语音回复接听或者手动确认后，即可与医生进行视频通话。

所述联络家属模块102向用户提供了网络电话通讯录与网络电话拨打通话服务，所述病床语音交互桌面终端系统通过对接运营商网络电话模块并开通网络电话服务后可实现网络电话通信，患者家属可以预先在所述病床语音交互桌面终端系统的通讯录中存储好常用联系人的电话号码，当用户需要联系家属时，通过语音指令，例如，联系家属，即可唤起所述病床语音交互桌面终端系统的联系家属业务功能，并在回复确认指令后，所述联络家属模块102能够通过运营商网络电话功能拨打家属电话在线语音通话，该通话记录也会存储在系统的通话记录中。

所述呼叫医院模块103向用户提供了急救拨打医院急救电话服务，所述呼叫医院模块103预先在系统中预设了医院急救电话号码，当出现紧急情况时，用户在发出语音呼叫医院指令以及回复确认指令后，所述病床语音交互桌面终端系统通过运营商网络电话功能拨打到预设的医院急救电话号码进行紧急呼救，在一定程度上减少了很多拨打急救电话浪费的时间。

请参阅图4，在本发明一个可能的实施例中，所述患者管理模块20包括：

报告查询模块201，用于识别患者的语音信息，向病患语音播报病患在建床期间产生的相关医疗数据，其中，所述相关医疗数据包括费用清单、检查检验报告以及用药明细；

护理宣教模块202，用于识别患者的语音信息，向病患播放医院终端发送的护理宣教资料，其中，所述护理宣教资料包括宣教视频、宣教PPT以及宣教文图文章；

体征测量模块203，测量病患当前的体征数据，进行监测记录，并且当监测到所述体征数据超过预设值时，进行语音告警，其中，所述体征数据包括血糖测量数据、血压测量数据、血氧测量数据、体脂测量数据以及心电测量数据；

用药提醒模块204，用于根据医院终端发送的用药医嘱关联获取相应的用药信息，生成提醒计划，当根据所述提醒计划判断到达患者的吃药时间时，自动进行语音用药提醒；

使用说明模块205，用于识别患者的语音信息，向病患语音播放病床语音交互桌面终端系统的使用说明视频。

具体地，在本实施例中，所述报告查询模块201向用户提供了建床期间家庭病床报告查询服务，家庭病床业务作为住院服务的延展，在建床期间产生的相关住院费用清单、检查检验报告、用药明细等医疗数据能够通过所述病床语音交互桌面终端系统进行推送；当有新的报告数据生成时，所述报告查询模块201会自主进行语音播报提醒，语音提示报告主题例如，您有新的费用明细报告是否查阅，在用户回复例如查阅等请求后，即可打开报告查看，用户亦可通过报告查询模块自己操作查看相关历史报告数据。

所述护理宣教模块202向用户提供了学习家庭病床护理宣教服务，医务人员可以通过所述病床语音交互桌面终端系统定向针对用户群体推送对应的护理宣教内容；而当所述病床语音交互桌面终端系统接收到待推送的护理宣教内容时，会自动进行语音播报提醒，语音提示宣教主题例如，您有新护理宣教是否确认播放，在用户回复例如查阅等请求后，即可打开宣教内容自动播放；其中，护理宣教支持宣教视频、宣教PPT、宣教文图文章，用户亦可通过护理宣教模块自己操作查看播放相关护理宣教内容。

所述体征测量模块203向用户提供了体征自助测量服务，用户可向医院租赁或者自行购买仪器设备进行远程人体体征监测，检测到的体征数据可以通过蓝牙通讯的方式同步到所述体征监测模块203内进行保存；用户亦可通过其他厂商设备自测后将所得数据录入到对应体征测量模块。所述体征测量模块203为病情需要的服务对象提供健康数据的连续性监测，并会对接收到的数据进行自动识别，判断其是否超出设定的安全值，若超出设定的安全值，所述体征测量模块203可自行启动告警功能，并将告警信息发送给服务对象及其监护人和责任医生。

所述用药提醒模块204向用户提供了建床期间自动提醒用药服务，所述用药提醒模块204会根据责任医生提供维的用药医嘱信息关联获取相应的用药信息，并根据所述病床语音交互桌面终端系统预先存储的药品用法用量频次自动换算生成提醒计划，当所述病床语音交互桌面终端系统根据所述提醒计划判断到达患者的吃药时间时，所述用药提醒模块204自动触发用药提醒，所述病床语音交互桌面终端系统会自动进行用药信息的轮番语音播报，直至用户回复关闭用药提醒指令后，关闭提醒语音。所述用药提醒模块204也支持家庭病床医院药师针对个别患者进行主动推送提醒。

所述使用说明模块205向用户提供了病床语音交互桌面终端系统的操作使用说明服务，所述使用说明模块205内存储有使用说明图文以及说明视频内容，用户可通过使用说明指令调取所述使用说明模块205，在所述使用说明模块205启动后，所述病床语音交互桌面终端系统采用自动语音播报方式进行自动播放操作说明，用户亦可手动操作点击使用说明进行阅读。

请参阅图5，在本发明一个可能的实施例中，所述医务管理模块30包括：

巡诊打卡模块301，用于对上门巡诊的医务人员进行身份确认，并生成打卡记录；

电子床头卡模块302，用于在身份确认后生成病患的诊疗信息，并进行展示，以便于医务人员及时了解病患的情况，其中，所述诊疗信息包括患者姓名、建床时间、责任医生、责任护士、以及已建床天数；

设备授权登录模块303，用于绑定家庭病床用户账号和设备二维码，以便于用户能够快捷的登录病床语音交互桌面终端系统。

具体地，在本实施例中，所述巡诊打卡模块301向用户提供了上门巡诊的医务人员的打卡签到服务，每个家庭病床用户都有对应设置责任医生跟护士，当对应责任医生或护士上门巡诊时，医务人员可以手动打开所述巡诊打卡模块301，或语音发出上门巡诊打卡指令，所述病床语音交互桌面终端系统在接收到指令后，会调取摄像头进行医生或护士的人脸识别，并与预先保存的责任医生和护士的信息进行比对，只有在判断到当前的医务人员是责任本人后才可进行自动签到，并形成打卡记录；且所述巡诊打卡模块301还可查看历史打卡记录。

所述电子床头卡模块302向用户提供了电子床头卡信息展示服务，医务人员通过所述病床语音交互桌面终端系统针对用户进行医嘱事项，其中，医嘱事项例如饮食推荐、注意事项、诊疗计划，以及患者姓名建床时间、责任医生、责任护士、已建床天数等信息的维护，用户在登录所述病床语音交互桌面终端系统后根据病床ID和用户信息获取家床病床建床信息，并显示在所述电子床头卡模块302上，简单来说，所述电子床头卡模块302用于展示上述主要信息，以便于门巡诊的医务人员上可以根据所述电子床头卡模块302上的信息核对家庭病床建床与终端系统信息是否一致。

所述设备授权登录模块303向用户提供了微信扫一扫授权登录或通过预设账号快捷确认免密登录服务，用户可以通过设备预设的账号进行快捷登录。医院机构在发放终端设备时，可以通过终端绑定管理将家庭病床用户账号与设备码进行绑定，绑定之后设备上就会预设该家庭病床用户的账号，如果意外退出，家庭病床用户直接从登录页面的预设账号直接确认登录即可，无需二维码扫码授权或账号密码登录，方便快捷。此外，用户也可以微信扫一扫终端界面二维码，选择具体亲情账号进行终端授权登录，即可在终端办理家庭病床用户相关业务办理。

请参阅图6至图8，在本发明一个可能的实施例中，所述患者管理模块20包括语音识别单元，其中，所述语音识别单元用于：

S101，实时获取病患发出的语音信息数据，并对所述语音信息数据进行识别，生成语音文本；

现市面上的智能家庭病床很少采用全语音交互的技术，且当前申请家庭病床的患者群体大部分是老年人，老年人群体除了不要会操作智能手机之外，可能还存在口齿不清、表达混乱的问题，因此更需要一个能够清晰识别语音信息，语音含义的智能家庭病床。

具体地，步骤S101包括：通过所述语音交互组件的内置麦克风实时获取病患发出的语音信息数据；

通过ASR声学和语言模型对所述语音信息数据进行转换处理，生成与所述语音信息数据相对应的语音文本。

具体地，在本实施例中，所述病床语音交互桌面终端系统通过内置麦克风对用户发起的语音信息进行采集与识别，并通过ASR声学和语言模型将语音识别为文本，即将口语化的文本进行归一、纠错、书面化处理。其中，ASR声学和语言模型Automatic SpeechRecognition,ASR，是一个将人的语音识别为文本的自动语音识别模型。

S102，对所述语音文本进行解析处理，生成用户意图解析文本，并对所述用户意图解析文本进行完整度判断；

具体地，步骤S102包括：通过NLU语义框架对所述语音文本进行语义框架解析处理，生成用户意图解析文本；

通过DM对话管理系统对所述用户意图信息进行对话内容管理处理，并判断所述用户意图解析文本的完整度是否达到预设值；

若是，对所述用户意图解析文本进行关键词匹配处理；

若否，重新获取病患发出的语音信息数据，进行语音识别。

具体地，在本实施例中，所述病床语音交互桌面终端系统在进入语音处理环节后，终端通过NLU语义框架对文本进行语义框架处理，识别用户意图转入DM管理，NLU语义处理判断语句是否完整，以便询问用户以获得更多的信息、调用内容服务；根据语义处理结果，DM对话管理系统主要是进行对话内容管理，判断当前意图是否明确，当意图不明确时，还需要终端发起语义框架缺失的内容对话机制，继续补充相关内容，通过多轮对话获取完整语义信息，理解用户的实际意图。其中，NLU语义框架Natural Language Understanding,NLU，是通过语义框架对语句进行解析，理解语句完整性跟意图，用于自然语言理解；DM对话管理系统Dialogue Management，DM，为机器之间的信息交换提供各种连接方式。

在本实施例中，语义框架处理需要就输入语句进行结构式解析，主要包括：范畴(Category)、目标(Target)和属性(Attribute)来表示语义结果。其中，范畴(Category)：指同一类型的数据或资源，以及围绕这些数据或资源提供的服务；目标(Target)：指对范畴数据的操作；属性(Attribute)：用来存放范畴的属性。以用户对所述病床语音交互桌面终端系统说出“我要紧急呼叫护士指导吃药”为例，系统ASR处理后进入NLU语义分析：范畴(Category)：护士服务；目标(Target)：呼叫视频对话；属性(Attribute)：时间(date)：现在，服务(Service)：吃药指导。

S103，当判断到所述用户意图解析文本的完整度达到预设值时，对所述用户意图解析文本进行关键词匹配处理，生成与所述语音信息数据相对应的操作指令；

具体地，步骤S103包括：对所述用户意图解析文本进行KWM关键词匹配处理，提取关键词相关数据，生成与所述语音信息数据相对应的操作指令。

具体地，在本实施例中，当语义完整后需要匹配家庭病床业务进行KWM关键词匹配，获取相关数据并进入语义执行，终端系统执行对应业务操作。其中，关键词匹配Keywordmatching，KWM，家庭病床业务关键词数组主要用于根据业务相关度进行预设关联，以便通过关键词执行业务操作指令。以用户对所述病床语音交互桌面终端系统说出“我要紧急呼叫护士指导吃药”为例，数据传入DM对话管理后进行语义处理，包括KWM关键词匹配和Action语义执行。语音对话交互处理逻辑的核心就是理解用户的意图，如何识别意图以及如何处理意图。

S104，根据所述操作指令执行相应业务操作，将执行相应业务操作之后生成的处理结果进行转换处理，生成反馈语音信息，并将所述反馈语音信息传递给病患。

具体地，在本实施例中，根据最终处理结果或对话补充信息以执行结果文本生成NLG，TTS将语义理解后获得的结果文本信息合成为声音反馈给用户，完成一次对话过程。其中，文字转语音模块Text to Speech,TTS，主要是用于对语义理解后获得的结果文本信息合成为声音。

在本实施例中，由于实际情况中，正常用户发起的语句很难一次性“表达到位”，也就是系统所需语义框架内容完整性，系统的处理逻辑需要根据用户的语句表述情况，给出最优机制，从而为用户创建更好的使用体验。系统的处理逻辑最短路径：语义信息是一次性给出所有的必须信息，在语音交互过程中一句话(一轮对话)即可实现。辅助路径：语义信息不完整时设计完整的替换路径和决策树补充用户对话中的缺失信息，由于语音交互的特殊性决定它在出现未知和异常现象时，使用方式或者全面的指引，以及当数据缺失的反馈流程。

以用户对家庭病床终端说出“我要紧急呼叫护士指导吃药”为例，语音对话交互进入处理逻辑，语义框架解析为：范畴(Category)：护士服务；目标(Target)：呼叫视频对话；属性(Attribute)：时间(date)：现在，服务(Service)：吃药指导。解析结果判断为语义完整，走最短路径方式，数据传入DM对话管理后进行语义处理。KWM关键词匹配：根据关键词{护士、呼叫、指导}匹配到关键词{远程查房}。Action语义执行：调取“远程查房”业务，发起远程视频呼叫护士。反馈结果：远程视频呼叫护士。

以用户对家庭病床终端说出“怎么吃药”，语音对话交互进入处理逻辑，语义框架解析为：范畴(Category)：未知；目标(Target)：未知；属性(Attribute)：服务(Service)：吃药。解析结果判断为语义不完整，走辅助路径方式，数据传入DM对话管理后进行语义处理。系统询问：“您可以说查房服务、护士服务、用药服务等”；用户说：“护士服务”；系统询问：“您是否需要呼叫护士”；用户说：“呼叫护士”。KWM关键词匹配：根据关键词{护士、呼叫、吃药}匹配到关键词{远程查房}。Action语义执行：调取“远程查房”业务，发起远程视频呼叫护士。反馈结果：远程视频呼叫护士。

请参阅图9，在本发明一个可能的实施例中，还包括：

实时获取远程医疗终端传输的操作指令，通过DM对话管理系统对所述操作指令进行对话内容管理处理，生成NLG对话文本；

通过TTS文字转语音系统对所述NLG对话文本进行转换处理，生成操作语音信息，并将所述操作语音信息传递给病患。

具体地，在本实施例中，与用户发起语音信息相反，所述病床语音交互桌面终端系统将接收到的远程医疗终端传输的操作指令通过DM对话管理系统精选处理，得到NLG对话文本，并通过TTS文字转语音系统将所述NLG对话文本转换为语音信息，传递给病患。其中，自然语言生成Natural Language Generation,NLG，主要用于通过处理结果文本进行语义组词，生成正常语句文本。

综上，所述病床语音交互桌面终端系统的语音技术主要包括两个部分，语音交互环节和语音处理环节；其中，语音交互环节是面向用户的交互，获取用户的语音表述信息，将最终处理结果反馈给用户；语音处理环节是面向机器处理的交互，对语义进行分析了解用户的意图，匹配家庭病床终端业务，语义执行操作并反馈处理结果。用户在家庭病床建床期间能够通过语音交互方式通过所述病床语音交互桌面终端系统与远程的医务人员进行互动，解决家庭病床业务远程服务效率跟用户与终端机器交互效率。所述病床语音交互桌面终端系统能够通过自动业务提醒代替人工照护方式，并通过语音问答“沟通”方式获取用户的当前需求意图进而执行机器指令操作具体业务，即基于家庭病床业务与语音处理技术对用户的语音解析形成具体的机器执行指令，进而开展家庭病床业务，解决了用户业务操作便利性，为家庭病床远程业务开展提供了效率，代替了人工服务，体现一种“家庭健康管家”效果。

以上仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。

Claims (9)

1.一种病床语音交互桌面终端系统,其特征在于，包括：

远程通讯模块，用于和医院终端进行通讯，以使得医院终端能够发起远程查房、以及桌面终端主动向所述医院终端发起呼叫服务；

患者管理模块，用于将采集到病患发出的语音信息转换为语音文本，并根据所述语音文本执行与所述语音信息相对应的业务操作；

医务管理模块，用于对上门巡诊的医务人员进行身份确认，并在身份确认后生成病患的诊疗信息。

2.根据权利要求1所述的一种病床语音交互桌面终端系统,其特征在于，所述远程通讯模块包括：

远程查床模块，用于医院终端向桌面终端发起远程查房服务；

联络家属模块，用于识别患者的语音信息，向患者的家属发起呼叫服务；

呼叫医院模块，用于识别患者的语音信息，向远程医务操作端发起呼叫服务。

3.根据权利要求1所述的一种病床语音交互桌面终端系统,其特征在于，所述患者管理模块包括：

报告查询模块，用于识别患者的语音信息，向病患语音播报病患在建床期间产生的相关医疗数据，其中，所述相关医疗数据包括费用清单、检查检验报告以及用药明细；

护理宣教模块，用于识别患者的语音信息，向病患播放医院终端发送的护理宣教资料，其中，所述护理宣教资料包括宣教视频、宣教PPT以及宣教文图文章；

体征测量模块，测量病患当前的体征数据，进行监测记录，并且当监测到所述体征数据超过预设值时，进行语音告警，其中，所述体征数据包括血糖测量数据、血压测量数据、血氧测量数据、体脂测量数据以及心电测量数据；

用药提醒模块，用于根据医院终端发送的用药医嘱关联获取相应的用药信息，生成提醒计划，当根据所述提醒计划判断到达患者的吃药时间时，自动进行语音用药提醒；

使用说明模块，用于识别患者的语音信息，向病患语音播放病床语音交互桌面终端系统的使用说明视频。

4.根据权利要求1所述的一种病床语音交互桌面终端系统,其特征在于，所述医务管理模块包括：

巡诊打卡模块，用于对上门巡诊的医务人员进行身份确认，并生成打卡记录；

电子床头卡模块，用于在身份确认后生成病患的诊疗信息，并进行展示，以便于医务人员及时了解病患的情况，其中，所述诊疗信息包括患者姓名、建床时间、责任医生、责任护士、以及已建床天数；

设备授权登录模块，用于绑定家庭病床用户账号和设备二维码，以便于用户能够快捷的登录病床语音交互桌面终端系统。

5.根据权利要求1所述的一种病床语音交互桌面终端系统,其特征在于，所述患者管理模块包括语音识别单元，其中，所述语音识别单元用于：

实时获取病患发出的语音信息数据，并对所述语音信息数据进行识别，生成语音文本；

对所述语音文本进行解析处理，生成用户意图解析文本，并对所述用户意图解析文本进行完整度判断；

当判断到所述用户意图解析文本的完整度达到预设值时，对所述用户意图解析文本进行关键词匹配处理，生成与所述语音信息数据相对应的操作指令；

根据所述操作指令执行相应业务操作，将执行相应业务操作之后生成的处理结果进行转换处理，生成反馈语音信息，并将所述反馈语音信息传递给病患。

6.根据权利要求5所述的一种病床语音交互桌面终端系统,其特征在于，实时获取病患发出的语音信息数据，并对所述语音信息数据进行识别，生成语音文本，具体为：

通过所述语音交互组件的内置麦克风实时获取病患发出的语音信息数据；

通过ASR声学和语言模型对所述语音信息数据进行转换处理，生成与所述语音信息数据相对应的语音文本。

7.根据权利要求5所述的一种病床语音交互桌面终端系统,其特征在于，对所述语音文本进行解析处理，生成用户意图解析文本，并对所述用户意图解析文本进行完整度判断，具体为：

通过NLU语义框架对所述语音文本进行语义框架解析处理，生成用户意图解析文本；

通过DM对话管理系统对所述用户意图信息进行对话内容管理处理，并判断所述用户意图解析文本的完整度是否达到预设值；

若是，对所述用户意图解析文本进行关键词匹配处理；

若否，重新获取病患发出的语音信息数据，进行语音识别。

8.根据权利要求5所述的一种病床语音交互桌面终端系统,其特征在于，对所述用户意图解析文本进行关键词匹配处理，生成与所述语音信息数据相对应的操作指令，具体为：

对所述用户意图解析文本进行KWM关键词匹配处理，提取关键词相关数据，生成与所述语音信息数据相对应的操作指令。

9.根据权利要求5所述的一种病床语音交互桌面终端系统,其特征在于，还包括：

实时获取远程医疗终端传输的操作指令，通过DM对话管理系统对所述操作指令进行对话内容管理处理，生成NLG对话文本；

通过TTS文字转语音系统对所述NLG对话文本进行转换处理，生成操作语音信息，并将所述操作语音信息传递给病患。

Images