CN104778380B - 基于语音控制和图像识别的医嘱装置 - Google Patents

Abstract

本发明涉及一种基于语音控制和图像识别的医嘱装置，属于医疗信息化技术领域。该装置包括语音输入设备、语音协处理器设备、处理器设备、存储设备、语音输出设备、显示设备、内置寄存器的图像协处理器设备和摄像头；通过本发明装置，使得医生能够直接通过语音，拍照录入病历医嘱，并转换成文本信息进行保存，而且医生可以直接用语音调取查询病历医嘱，提高了医生的效率。患者可以直接用移动终端设备通过扫描二维码进入个人信息查询，只要患者移动终端设备处于联网状态，本发明的设备会根据医嘱信息给出患者相关要点提醒。

Description

基于语音控制和图像识别的医嘱装置

技术领域

本发明属于医疗信息化技术领域，具体涉及一种基于语音控制和图像识别的医嘱装置。

背景技术

快速、准确、智能、自动化成为现今信息化的主要特征，医疗信息化也受到广大医务工作者的欢迎。目前的病历医嘱基本上还是医生通过电脑设备手动进行输入，发送。查询患者病历医嘱时也需要手动输入关联信息进行查询。浪费了有效的时间。因此一种高效的基于语音控制、图像识别的医嘱装置就成为解决问题的关键。

发明内容

本发明的目的是为了解决现有技术的不足，提供一种基于语音控制和图像识别的医嘱装置，该装置能够提供快捷、方便、多种方式的医嘱录入，降低了医生的工作量，有效的提高了工作效率。

本发明采用的技术方案如下：

一种基于语音控制和图像识别的医嘱装置，包括：语音输入设备、语音协处理器设备、处理器设备、存储设备、语音输出设备、显示设备、内置寄存器的图像协处理器设备和摄像头；

所述的语音输入设备和语音协处理器设备的输入端相连，所述的语音协处理器设备的输出端与处理器设备的输入端相连；

所述的摄像头与图像协处理器设备的输入端相连，图像协处理器设备的输出端与处理器设备的输入端相连；所述的存储设备、显示设备与分别与处理器设备连接；

所述的语音输入设备用于拾取声音信号，并将声波信号转换成对应的模拟电信号，输出至语音协处理器设备；

所述语音协处理器设备，用于将接收到模拟电信号进行采样，编码成数字信号，进行去噪，增强对有用信号的放大，提高信噪比以保证语音的识别效果然后送至所述处理器设备进行处理；

所述处理器设备，用于接收所述语音协处理器设备所输出的数字信号，分析处理该代表用户声音特征的指令，并将处理后的指令转换成控制信号，分别控制：

控制所述存储设备的读写；

控制所述图像协处理器设备所带寄存器的读写；

控制所述显示设备的显示，并响应所述显示设备的触摸操作；

输出语音信号到所述语音输出设备，驱动声音播报；

所述的存储设备，用于存储病历医嘱信息、用户的语音相关指令、用户的声纹特征及预设指令；

所述的语音输出设备用于对用户进行的操作做语音反馈提示与提醒，是一种将电信号转换成人耳能听见的声音信号的装置；

所述的显示设备用于显示指令运行后的结果，供用户进行查看；

所述的图像协处理器设备用于接收所述摄像头采集图像数据，并对该图像数据进行处理至在不同的光学条件下都能较好的还原现场细节，以保证成像质量；然后将处理好的图像数据通过处理器设备存储至存储设备中；

所述的摄像头用于采集图像数据并将该数据传输给所述的图像协处理器设备；摄像头设备，是一种视频输入设备，内置有图像传感器用于采集图像数据；在本发明中主要拍摄病历医嘱，将病历医嘱的图像传输至所述图像协处理器。

进一步，所述的病历医嘱信息包括图片和文档。

上述技术方案中，所述的图像协处理器设备对摄像头采集图像数据做线性纠正、噪声去除、坏点去除、内插、白平衡和自动曝光控制处理。

上述技术方案中，所述的处理器设备接收语音协处理器设备输出的数字信号后，会自动调取存储设备预存的医生声纹特征信号进行对比，从而识别医生的身份；还可以通过摄像头对用户或患者进行摄像，图像数据经过图像协处理器后，通过处理器设备调取存储设备中的脸部特征数据比对，进行人脸识别，从而识别医生或患者的身份；

确认身份后，处理器设备根据医生的语音指令录入患者病历医嘱，即将数字信号转换成文档信息存储到存储设备，并在显示设备进行显示；

处理器设备也可以根据语音指令调取存储在存储设备的已录入的病历医嘱并通过显示设备进行显示；便于医生查询。

所述的处理器设备还用于医生直接用语音控制所述摄像头对病历医嘱进行拍照，对拍照所得照片进行语音指令保存到存储设备和发送至患者移动终端设备；

所述处理器设备产生二维码通过通过显示设备进行显示，患者可以扫描二维码登录查询病历医嘱。

上述技术方案中，所述处理器设备还用于：

在未识别医生身份信息时，控制语音输出设备及显示设备提示医生为非授权用户，需重新建立医生身份信息档案；医生通过语音输入设备录入信息，并将录入的信息保存在存储设备中；在未识别到所述指定患者的身份信息时，提示医生录入所述指定患者的身份信息。

上述技术方案中，所述处理器设备在接收到语音协处理器设备输出的数字信号后，解析该数字信号，并从存储设备中找到相应的预存指令，然后根据该预存指令执行。

上述技术方案中，医生在用语音指令查找患者病历医嘱时，所述处理器设备根据语音指令调取预存在所述存储设备里的信息，如果是已录入患者的病历医嘱，所述处理器设备将控制显示设备进行显示；如果是未录入患者的病历医嘱，处理器设备将控制显示设备和语音输出设备提示医生录入该患者的病历医嘱，并根据语音指令和该患者的身份信息生成指定的病历医嘱。

上述技术方案中，所述显示设备是一种带触摸输入功能的显示器，用户可以直接在显示器上直接用手触写，修改病历医嘱，将病历医嘱发送给指定的患者，供患者查询。

上述技术方案中，所述摄像头直接对病历医嘱和患者的受患部位进行拍照，通过图像协处理器设备图文并茂的病历医嘱并储存在存储设备中，便于医生进行跟踪治疗；所述的摄像头对患者进行摄像，通过处理器设备进行人脸识别，不需要医生手动输入查找患者的信息，提高了医生的工作效率。本发明中摄像头在接收到拍照指令时，图像协处理器根据所处环境的光照强度和目标相对摄像头的距离进行自动对焦，曝光保障拍照图片的清晰度。用户可以在预览模式，通过所述显示设备进行效果的查看，拍照所得图片将根据用户的语音指令进行存储到所述存储设备和通过相关的语音指令发送到指定患者的终端设备显示。

本发明用户更新的患者病历医嘱将保存到所述存储设备，并通过语音指令或手动操作所述触摸控制显示设备发送给指定患者的终端设备，更新病历医嘱，让患者及时得知病历医嘱的内容。显示设备在接收到将显示内容发送至指定终端设备进行显示的指令时，向所述指定终端设备发送连接请求；以及在接收到指定终端设备的连接确认信息后，将所述显示内容发送至指定终端设备，以使指定终端设备进行显示。

采用本发明装置，患者可以直接采用扫描二维码的方式直接登录，通过患者自行输入个人相关信息可以访问个人病历医嘱，但患者没有编辑病历医嘱的权利，确保病历医嘱数据的安全。

本发明与现有技术相比，其有益效果为：

（1）本发明使得病历医嘱不需要打印，患者直接可以在自己的终端设备上通过登录已注册的帐号进行访问查询，也可以对自己有疑问的地方填写录入。实现无纸化，信息化办公。

（2）本发明通过存储病历医嘱，以及与病历医嘱相关联的调取指令，使得处理设备在接收到用户的语音指令，并将语音指令生成调取指令时，显示设备能够根据调取指令从存储设备中获取到与调取指令相关联的病历医嘱进行显示，从而使得医生在需要对该设备进行调取患者的病历医嘱，能够通过语音指令的方式进行操作，避免了从庞大的数据中查找需要调取的数据，降低了医生的工作量。同时使得医生在不知道如何对该设备进行操作时，也无需从用户手册中查找相应的操作方法，减少了工作量，有助于提高医生的工作效率；

（3）由于字符指令相比于语音指令更易于存储，本发明将语音指令转换成字符指令，方便地建立病历医嘱档案。

（4）本发明装置可通过声音和人脸来识别用户及患者，不需要医生手动输入查找患者的信息，提高了医生的工作效率。

（5）使用本发明装置的用户可以直接通过语音指令让本发明装置进行相关操作，降低了用户的使用难度，无需再为不知道如何操作装置功能而去查看用户手册。

（6）本发明通过对用户身份信息的识别，确保了数据的安全性，在确定用户为未授权用户时，可以提示用户拒绝访问，以避免数据的泄露。另外，采用本发明装置，患者可以直接采用扫描二维码的方式直接登录，通过患者自行输入个人相关信息可以访问个人病历医嘱，但患者没有编辑病历医嘱的权利，确保病历医嘱数据的安全。

附图说明：

图1是本发明基于语音控制和图像识别的医嘱装置的结构示意图；

100、语音输入设备；101、语音协处理器设备；102、处理器设备；103、存储设备；104、语音输出设备；105、显示设备；106、图像协处理器设备；107、摄像头。

具体实施方式

为了能够更清楚的理解本发明的上述目的，特征和优点，下面结合附图和具体实施方式对本发明进行进一步的详细描述，需要说明的是，在不冲突的情况下，本申请的实施例及实施例中的特征可以相互组合。

在下面的描述中阐述了很多具体细节以便于充分理解本发明，但是，本发明还可以采用其他不同于在此描述的其它方式来实施，因此，本发明的保护范围并不受下面公开的具体实施例限制。

本领域技术人员将会理解实施方式中未注明具体技术或条件者，按照本领域内的文献所描述的技术或条件或者按照产品说明书进行。所用材料或仪器未注明生产厂商者，均为可以通过购买获得的常规产品。

如图1所示，一种基于语音控制和图像识别的医嘱装置，包括：语音输入设备100、语音协处理器设备101、处理器设备102、存储设备103、语音输出设备104、显示设备105、内置寄存器的图像协处理器设备106和摄像头107；

所述的语音输入设备100和语音协处理器设备101的输入端相连，所述的语音协处理器设备101的输出端与处理器设备102的输入端相连；

所述的摄像头107与图像协处理器设备106的输入端相连，图像协处理器设备106的输出端与处理器设备102的输入端相连；所述的存储设备103、显示设备105与分别与处理器设备102连接；

所述的语音输入设备100用于拾取声音信号，并将声波信号转换成对应的模拟电信号，输出至语音协处理器设备101；

所述语音协处理器设备101，用于将接收到模拟电信号进行采样，编码成数字信号，进行去噪，增强对有用信号的放大，提高信噪比以保证语音的识别效果然后送至所述处理器设备102进行处理；

所述处理器设备102，用于接收所述语音协处理器设备101所输出的数字信号，分析处理该代表用户声音特征的指令，并将处理后的指令转换成控制信号，分别控制：

控制所述存储设备103的读写；

控制所述图像协处理器设备106所带寄存器的读写；

控制所述显示设备105的显示，并响应所述显示设备105的触摸操作；

输出语音信号到所述语音输出设备104，驱动声音播报；

所述的存储设备103，用于存储病历医嘱信息、用户的语音相关指令、用户的声纹特征及预设指令；

所述的语音输出设备104用于对用户进行的操作做语音反馈提示与提醒；

所述的显示设备105用于显示指令运行后的结果，供用户进行查看；

所述的图像协处理器设备106用于接收所述摄像头107采集图像数据，并对该图像数据进行处理至在不同的光学条件下都能较好的还原现场细节；然后将处理好的图像数据通过处理器设备102存储至存储设备103中；

所述的摄像头107用于采集图像数据并将该数据传输给所述的图像协处理器设备106。

所述的病历医嘱信息包括图片和文档。

所述的图像协处理器设备106对摄像头107采集图像数据做线性纠正、噪声去除、坏点去除、内插、白平衡和自动曝光控制处理。

所述的处理器设备102接收语音协处理器设备101输出的数字信号后，会自动调取存储设备103预存的医生声纹特征信号进行对比，从而识别医生的身份；或者通过摄像头107对用户或患者进行摄像，图像数据经过图像协处理器106后，通过处理器设备102调取存储设备103中的脸部特征数据比对，进行脸部识别，从而识别医生或患者的身份；

确认身份后，处理器设备102根据语音指令录入患者病历医嘱，即将数字信号转换成文档信息存储到存储设备103，并在显示设备105进行显示；

处理器设备102也可以根据语音指令调取存储在存储设备103的已录入的病历医嘱并通过显示设备105进行显示；便于医生查询。

所述的处理器设备102还用于医生直接用语音控制所述摄像头107对病历医嘱进行拍照，对拍照所得照片进行语音指令保存到存储设备103和发送至患者移动终端设备；

所述处理器设备102产生二维码通过通过显示设备105进行显示，患者可以扫描二维码登录查询病历医嘱。

所述处理器设备102还用于：

在未识别医生身份信息时，控制语音输出设备104及显示设备105提示医生为非授权用户，需重新建立医生身份信息档案；医生通过语音输入设备100录入信息，并将录入的信息保存在存储设备103中。

所述处理器设备102在接收到语音协处理器设备101输出的数字信号后，解析该数字信号，并从存储设备103中找到相应的预存指令，然后根据该预存指令执行。

医生在用语音指令查找患者病历医嘱时，所述处理器设备102根据语音指令调取预存在所述存储设备103里的信息，如果是已录入患者的病历医嘱，所述处理器设备102将控制显示设备105进行显示；如果是未录入患者的病历医嘱，处理器设备102将控制显示设备105和语音输出设备104提示医生录入该患者的病历医嘱，并根据语音指令和该患者的身份信息生成指定的病历医嘱。

所述显示设备105为触摸显示器，用户可以直接在显示器上直接用手触写，修改病历医嘱，将病历医嘱发送给指定的患者，供患者查询。

所述摄像头107直接对病历医嘱和患者的受患部位进行拍照，通过图像协处理器设备106图文并茂的病历医嘱并储存在存储设备103中，便于医生进行跟踪治疗。

用户只需要用户对着所述语音输入设备100讲话，所述语音输入设备100和语音协处理器101就会将这个语音信号采样转换成具有声音特征的数字信号进入所述处理器设备102，此时所述处理器设备102会用调取指令调用所述存储设备103中用户声纹信息，两者进行比对，相同即提醒用户为授权用户，可以进行进一步的操作，可以建立或者更新病历医嘱，不同则为未授权用户，所述处理器设备102通过所述语音输出设备104和所述显示器设备105提醒用户需要授权才可以进行下面的操作。多次操作失误将进行语音警告提示和显示警告提示。

用户更新的患者病历医嘱将保存到所述存储设备103，并通过所述语音输入设备100拾取语音指令或手动操作所述触摸控制显示设备105发送给指定患者的终端设备，更新病历医嘱，让患者及时得知病历医嘱的内容。

在该技术方案中，建议患者采用扫描二维码的方式直接登录，通过患者自行输入个人相关信息可以访问个人病历医嘱，但患者没有编辑病历医嘱的权利，确保病历医嘱数据的安全。

通过本发明的技术方案，使得医生能够直接通过语音，拍照录入病历医嘱，并转换成文本信息进行保存，而且医生可以直接用语音调取查询病历医嘱，提高了医生的效率。患者可以直接用移动终端设备通过扫描二维码进入个人信息查询，只要患者移动终端设备处于联网状态，本发明的设备会根据医嘱信息给出患者相关要点提醒。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品， 该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种基于语音控制和图像识别的医嘱装置，其特征在于，包括：语音输入设备（100）、语音协处理器设备（101）、处理器设备（102）、存储设备（103）、语音输出设备（104）、显示设备（105）、内置寄存器的图像协处理器设备（106）和摄像头（107）；

所述的语音输入设备（100）和语音协处理器设备（101）的输入端相连，所述的语音协处理器设备（101）的输出端与处理器设备（102）的输入端相连；

所述的摄像头（107）与图像协处理器设备（106）的输入端相连，图像协处理器设备（106）的输出端与处理器设备（102）的输入端相连；所述的存储设备（103）、显示设备（105）分别与处理器设备（102）连接；

所述的语音输入设备（100）用于拾取声音信号，并将声波信号转换成对应的模拟电信号，输出至语音协处理器设备（101）；

所述语音协处理器设备（101），用于将接收到模拟电信号进行采样，编码成数字信号，然后对该数字信号进行去噪，再送至所述处理器设备（102）进行处理；

所述处理器设备（102），用于接收所述语音协处理器设备（101）所输出的数字信号，分析处理代表用户声音特征的指令，并将处理后的指令转换成控制信号，分别控制：

控制所述存储设备（103）的读写；

控制所述图像协处理器设备（106）所带寄存器的读写；

控制所述显示设备（105）的显示，并响应所述显示设备（105）的触摸操作；

输出语音信号到所述语音输出设备（104），驱动声音播报；

所述的存储设备（103），用于存储病历医嘱信息、用户的语音相关指令、用户的声纹特征及预设指令；

所述的语音输出设备（104）用于对用户进行的操作做语音反馈提示与提醒；

所述的显示设备（105）用于显示指令运行后的结果，供用户进行查看；

所述的图像协处理器设备（106）用于接收所述摄像头（107）采集图像数据，并对该图像数据进行处理至在不同的光学条件下都能较好的还原现场细节；然后将处理好的图像数据通过处理器设备（102）存储至存储设备（103）中；

所述的摄像头（107）用于采集图像数据并将该数据传输给所述的图像协处理器设备（106）；

医生在用语音指令查找患者病历医嘱时，所述处理器设备（102）根据语音指令调取预存在所述存储设备（103）里的信息，如果是已录入患者的病历医嘱，所述处理器设备（102）将控制显示设备（105）进行显示；如果是未录入患者的病历医嘱，处理器设备（102）将控制显示设备（105）和语音输出设备（104）提示医生录入该患者的病历医嘱，并根据语音指令和该患者的身份信息生成指定的病历医嘱。

2.根据权利要求1所述的基于语音控制和图像识别的医嘱装置，其特征在于，所述的病历医嘱信息包括图片和文档。

3.根据权利要求1所述的基于语音控制和图像识别的医嘱装置，其特征在于，所述的图像协处理器设备（106）对摄像头（107）采集图像数据做线性纠正、噪声去除、坏点去除、内插、白平衡和自动曝光控制处理。

4.根据权利要求1所述的基于语音控制和图像识别的医嘱装置，其特征在于，所述的处理器设备（102）接收语音协处理器设备（101）输出的数字信号后，会自动调取存储设备（103）预存的医生声纹特征信号进行对比，从而识别医生的身份；或者通过摄像头（107）对用户或患者进行摄像，图像数据经过图像协处理器（106）后，通过处理器设备（102）调取存储设备（103）中的脸部特征数据比对，进行脸部识别，从而识别医生或患者的身份；

确认身份后，处理器设备（102）根据医生的语音指令录入患者病历医嘱，即将数字信号转换成文档信息存储到存储设备（103），并在显示设备（105）进行显示；

处理器设备（102）也可以根据语音指令调取存储在存储设备（103）的已录入的病历医嘱并通过显示设备（105）进行显示；

所述的处理器设备（102）还用于医生直接用语音控制所述摄像头（107）对病历医嘱进行拍照，对拍照所得照片进行语音指令保存到存储设备（103）和发送至患者移动终端设备；

所述处理器设备（102）产生二维码通过显示设备（105）进行显示，患者可以扫描二维码登录查询病历医嘱。

5.根据权利要求4所述的基于语音控制和图像识别的医嘱装置，其特征在于，所述处理器设备（102）还用于：

在未识别医生身份信息时，控制语音输出设备（104）及显示设备（105）提示医生为非授权用户，需重新建立医生身份信息档案；医生通过语音输入设备（100）录入信息，并将录入的信息保存在存储设备（103）中；

在未识别到指定患者的身份信息时，提示医生录入所述指定患者的身份信息。

6.根据权利要求1所述的基于语音控制和图像识别的医嘱装置，其特征在于，所述处理器设备（102）在接收到语音协处理器设备（101）输出的数字信号后，解析该数字信号，并从存储设备（103）中找到相应的预存指令，然后根据该预存指令执行。

7.根据权利要求1所述的基于语音控制和图像识别的医嘱装置，其特征在于，所述显示设备（105）为触摸显示器，用户可以直接在显示器上直接用手触写，修改病历医嘱，将病历医嘱发送给指定的患者，供患者查询。

8.根据权利要求1所述的基于语音控制和图像识别的医嘱装置，其特征还在于，所述摄像头（107）直接对病历医嘱和患者的受患部位进行拍照，通过图像协处理器设备（106）图文并茂的病历医嘱并储存在存储设备（103）中。