CN103605426A - 基于手势识别的信息显示系统及其信息显示方法 - Google Patents

基于手势识别的信息显示系统及其信息显示方法 Download PDF

Info

Publication number
CN103605426A
CN103605426A CN201310646595.3A CN201310646595A CN103605426A CN 103605426 A CN103605426 A CN 103605426A CN 201310646595 A CN201310646595 A CN 201310646595A CN 103605426 A CN103605426 A CN 103605426A
Authority
CN
China
Prior art keywords
information
gesture
user
operational order
image information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310646595.3A
Other languages
English (en)
Inventor
杨森
田睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE ICT Technologies Co Ltd
Original Assignee
ZTE ICT Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE ICT Technologies Co Ltd filed Critical ZTE ICT Technologies Co Ltd
Priority to CN201310646595.3A priority Critical patent/CN103605426A/zh
Publication of CN103605426A publication Critical patent/CN103605426A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供了一种基于手势识别的信息显示系统和一种基于手势识别的信息显示方法,其中,所述信息显示系统包括:存储单元,用于存储至少一个手势信息,以及与每个手势信息相关联的操作指令;信息采集单元,用于实时采集指定用户的手势信息;查找单元,用于根据所述信息采集单元实时采集的手势信息从已存储的操作指令中查找与所述实时采集的手势信息相关联的操作指令;处理单元,用于在所述查找单元查找到所述相关联的操作指令时,将所述相关联的操作指令发送至指定显示设备,以使所述指定显示设备根据所述操作指令显示相应的信息。通过本发明的技术方案,方便了用户的操作,同时提高了信息显示的准确性。

Description

基于手势识别的信息显示系统及其信息显示方法
技术领域
本发明涉及医疗信息化技术领域,具体而言,涉及一种基于手势识别的信息显示系统和一种基于手势识别的信息显示方法。
背景技术
在相关技术中,医生与手术室的信息系统之间的信息交互是通过鼠标、键盘、触屏等交互方式完成的。这种交互方式在特殊情况下(比如在无菌手术时),无法由医生独立进行操作,只能通过口令的方式由辅助护士完成操作。在紧张的手术过程中难免会出现医生口令不清,或者辅助护士理解错误等造成调阅的信息并不是医生需要的信息,增加了信息传递的出错率,也可能导致医生不能专注于手术而造成医疗事故。
此外,医生在手术中需要调阅患者大量的影像资料,通过口令的方式指挥辅助护士选取需要的影像文件无疑是很困难的。
因此,如何能够在医生手术时,准确地对医生需求的信息进行显示成为亟待解决的技术问题。
发明内容
本发明正是基于上述问题,提出了一种新的基于手势识别的信息显示技术,可以在显示设备显示用户需求的信息时,无需用户对显示设备进行操作,同时也无需通过口令的方式指挥其他人员进行操作,方便了用户的操作,同时提高了信息显示的准确性。
有鉴于此,本发明提出了一种基于手势识别的信息显示系统,包括:存储单元,用于存储至少一个手势信息,以及与每个手势信息相关联的操作指令;信息采集单元,用于实时采集指定用户的手势信息;查找单元,用于根据所述信息采集单元实时采集的手势信息从已存储的操作指令中查找与所述实时采集的手势信息相关联的操作指令;处理单元,用于在所述查找单元查找到所述相关联的操作指令时,将所述相关联的操作指令发送至指定显示设备,以使所述指定显示设备根据所述操作指令显示相应的信息。
在该技术方案中,通过建立并存储至少一个手势信息,以及与每个手势信息相关联的操作指令,使得可以根据实时采集到的手势信息查找相应的操作指令,以使显示设备根据操作指令显示相应的信息,无需用户对显示设备进行操作,同时也无需通过口令的方式指挥其他人员进行操作,方便了用户的操作,提高了信息显示的准确性。具体来说,比如医生在手术中需要调阅患者的相关资料时,可以通过手势直接控制显示设备显示相应的信息,无需通过鼠标、键盘、触屏等交互方式完成,方便了医生的操作过程,同时也避免了通过口令的方式指挥辅助护士调取相应的信息,而辅助护士由于理解错误造成调取的信息不是医生需要的信息,提高了医生对患者信息调取的准确性。其中,信息采集单元可以是一个或多个摄像头。
在上述技术方案中,优选地,所述处理单元还用于:在未查找到所述相关联的操作指令时,从已存储的手势信息中匹配与所述实时采集的手势信息相似度最高的手势信息,并显示与所述实时采集的手势信息相似度最高的手势信息相关联的操作指令,以供用户进行选择。
在该技术方案中,通过匹配与实时采集的手势信息相似度最高的手势信息,并显示与该相似度最高的手势信息相关联的操作指令,使得用户在操作手势不标准的情况下,依然能够通过在显示出的操作指令中选择需要的操作指令,方便了用户的操作。当然,在未查找到所述相关联的操作指令时,也可以将与实时采集的手势信息相似的所有手势信息都显示出来,以供用户进行选择。
在上述技术方案中,优选地,所述存储单元还用于:存储一个或多个授权用户的图像信息;所述信息采集单元还用于:在接收到识别手势信息的指令时,实时采集鉴权用户的图像信息,以得到鉴权图像信息;所述查找单元还用于:从已存储的所述一个或多个授权用户的图像信息中查找与所述信息采集单元采集到的所述鉴权图像信息相同的图像信息;所述处理单元还用于:在所述查找单元查找到所述相同的图像信息时,判定所述鉴权图像信息对应的鉴权用户为授权用户,并将所述授权用户作为所述指定用户。
在该技术方案中,通过存储授权用户的图像信息,并根据授权用户的图像信息和采集到的鉴权用户的图像信息判断需要识别手势操作的用户,使得具有针对性地识别用户的手势,避免识别多个用户的手势造成操作指令的混乱。具体来说,比如在医院手术室中,往往有多个医生和多个护士,为了避免识别多个人的手势造成操作指令的混乱,可以将主刀医生作为授权用户,并且仅识别主刀医生的手势。
在上述技术方案中,优选地,所述存储单元还用于:存储所述多个授权用户的图像信息的优先级;所述处理单元还用于:在所述查找单元根据多个所述鉴权用户的图像信息在所述多个授权用户的图像信息中查找到多个相同的图像信息时,将所述多个相同的图像信息中优先级最高的图像信息对应的鉴权用户作为所述指定用户。
在该技术方案中,通过存储多个授权用户的图像信息的优先级,使得在查找到多个相同的图像信息时,能够选择优先级最高的授权用户作为识别手势的对象,避免了同时对多个授权用户的手势进行识别而造成操作指令的混乱。比如在医院手术室中,可能识别到两个医生都为授权用户,若同时识别两个医生的手势,则可能造成操作指令的混乱,因此,可以为两个医生设置优先级,仅识别优先级高的医生的手势。
在上述技术方案中,优选地,所述信息采集单元还用于:采集所述指定用户的面部信息;所述处理单元还用于:根据所述面部信息确定所述指定用户的视觉焦点,并将所述视觉焦点对应的显示设备作为所述指定显示设备。
在该技术方案中,通过对用户视觉焦点的确认,可以根据用户的视觉焦点选择相应的显示设备,以显示用户需要的信息,避免将用户需要的信息显示在用户不便于观看的显示设备上,提高了信息显示的灵活性。
在上述技术方案中,优选地,还包括:显示单元,用于在接收到对指定手势信息的修改指令时,显示所述指定模板,以及与所述指定模板相关联的操作指令,供用户进行修改,以得到修改后的模板;更新单元,用于在在接收到修改完成的指令时,通过所述修改后的模板,以及与所述修改后的模板相关联的操作指令对所述指定模板,以及与所述指定模板相关联的操作指令进行更新。
在该技术方案中,通过对手势信息的修改,可以使系统更加适应于用户的操作习惯,从而方便用户的操作。
根据本发明的另一方面,还提出了一种基于手势识别的信息显示方法,包括:建立并存储至少一个手势信息,以及与每个手势信息相关联的操作指令;实时采集指定用户的手势信息,并根据实时采集的手势信息从已存储的操作指令中查找与所述实时采集的手势信息相关联的操作指令;若查找到所述相关联的操作指令,则将所述相关联的操作指令发送至指定显示设备,以使所述指定显示设备根据所述操作指令显示相应的信息。
在该技术方案中,通过建立并存储至少一个手势信息,以及与每个手势信息相关联的操作指令,使得可以根据实时采集到的手势信息查找相应的操作指令,以使显示设备根据操作指令显示相应的信息,无需用户对显示设备进行操作,同时也无需通过口令的方式指挥其他人员进行操作,方便了用户的操作,提高了信息显示的准确性。具体来说,比如医生在手术中需要调阅患者的相关资料时,可以通过手势直接控制显示设备显示相应的信息,无需通过鼠标、键盘、触屏等交互方式完成,方便了医生的操作过程,同时也避免了通过口令的方式指挥辅助护士调取相应的信息,而辅助护士由于理解错误造成调取的信息不是医生需要的信息,提高了医生对患者信息调取的准确性。
在上述技术方案中,优选地,若未查找到所述相关联的操作指令,则从已存储的手势信息中匹配与所述实时采集的手势信息相似度最高的手势信息,并显示与所述实时采集的手势信息相似度最高的手势信息相关联的操作指令,以供用户进行选择。
在该技术方案中,通过匹配与实时采集的手势信息相似度最高的手势信息,并显示与该相似度最高的手势信息相关联的操作指令,使得用户在操作手势不标准的情况下,依然能够通过在显示出的操作指令中选择需要的操作指令,方便了用户的操作。当然,在未查找到所述相关联的操作指令时,也可以将与实时采集的手势信息相似的所有手势信息都显示出来,以供用户进行选择。
在上述技术方案中,优选地,在实时采集指定用户的手势信息之前,还包括:采集并存储一个或多个授权用户的图像信息;在接收到识别手势信息的指令时,实时采集鉴权用户的图像信息,以得到鉴权图像信息;判断所述鉴权图像信息是否能够从已存储的所述一个或多个授权用户的图像信息中查找到相同的图像信息,若是,则判定所述鉴权图像信息对应的鉴权用户为授权用户,并将所述授权用户作为所述指定用户。
在该技术方案中,通过存储授权用户的图像信息,并根据授权用户的图像信息和采集到的鉴权用户的图像信息判断需要识别手势操作的用户,使得具有针对性地识别用户的手势,避免识别多个用户的手势造成操作指令的混乱。具体来说,比如在医院手术室中,往往有多个医生和多个护士,为了避免识别多个人的手势造成操作指令的混乱,可以将主刀医生作为授权用户,并且仅识别主刀医生的手势。
在上述技术方案中,优选地,还包括:建立并存储所述多个授权用户的图像信息的优先级;若根据多个所述鉴权用户的图像信息在所述多个授权用户的图像信息中查找到多个相同的图像信息,则将所述多个相同的图像信息中优先级最高的图像信息对应的鉴权用户作为所述指定用户。
在该技术方案中,通过存储多个授权用户的图像信息的优先级,使得在查找到多个相同的图像信息时,能够选择优先级最高的授权用户作为识别手势的对象,避免了同时对多个授权用户的手势进行识别而造成操作指令的混乱。比如在医院手术室中,可能识别到两个医生都为授权用户,若同时识别两个医生的手势,则可能造成操作指令的混乱,因此,可以为两个医生设置优先级,仅识别优先级高的医生的手势。
在上述技术方案中,优选地,在查找到所述相关联的操作指令后,还包括:采集所述指定用户的面部信息,根据所述面部信息确定所述指定用户的视觉焦点;将所述视觉焦点对应的显示设备作为所述指定显示设备。
在该技术方案中,通过对用户视觉焦点的确认,可以根据用户的视觉焦点选择相应的显示设备,以显示用户需要的信息,避免将用户需要的信息显示在用户不便于观看的显示设备上,提高了信息显示的灵活性。
在上述技术方案中,优选地,还包括:在接收到对指定手势信息的修改指令时,显示所述指定模板,以及与所述指定模板相关联的操作指令,供用户进行修改,以得到修改后的模板;以及在接收到修改完成的指令时,通过所述修改后的模板,以及与所述修改后的模板相关联的操作指令对所述指定模板,以及与所述指定模板相关联的操作指令进行更新。
在该技术方案中,通过对手势信息的修改,可以使系统更加适应于用户的操作习惯,从而方便用户的操作。
通过以上技术方案,可以在显示设备显示用户需求的信息时,无需用户对显示设备进行操作,同时也无需通过口令的方式指挥其他人员进行操作,方便了用户的操作,同时提高了信息显示的准确性。
附图说明
图1示出了根据本发明的实施例的基于手势识别的信息显示系统的示意框图;
图2示出了根据本发明的实施例的基于手势识别的信息显示方法的示意流程图;
图3示出了根据本发明的另一个实施例的基于手势识别的信息显示方法的示意流程图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
图1示出了根据本发明的实施例的基于手势识别的信息显示系统的示意框图。
如图1所示,根据本发明的实施例的基于手势识别的信息显示系统100,包括:存储单元102,用于存储至少一个手势信息,以及与每个手势信息相关联的操作指令;信息采集单元104,用于实时采集指定用户的手势信息;查找单元106,用于根据所述信息采集单元实时采集的手势信息从已存储的操作指令中查找与所述实时采集的手势信息相关联的操作指令;处理单元108,用于在所述查找单元106查找到所述相关联的操作指令时,将所述相关联的操作指令发送至指定显示设备,以使所述指定显示设备根据所述操作指令显示相应的信息。
在该技术方案中,通过建立并存储至少一个手势信息,以及与每个手势信息相关联的操作指令,使得可以根据实时采集到的手势信息查找相应的操作指令,以使显示设备根据操作指令显示相应的信息,无需用户对显示设备进行操作,同时也无需通过口令的方式指挥其他人员进行操作,方便了用户的操作,提高了信息显示的准确性。具体来说,比如医生在手术中需要调阅患者的相关资料时,可以通过手势直接控制显示设备显示相应的信息,无需通过鼠标、键盘、触屏等交互方式完成,方便了医生的操作过程,同时也避免了通过口令的方式指挥辅助护士调取相应的信息,而辅助护士由于理解错误造成调取的信息不是医生需要的信息,提高了医生对患者信息调取的准确性。
在上述技术方案中,优选地,所述处理单元108还用于:在未查找到所述相关联的操作指令时,从已存储的手势信息中匹配与所述实时采集的手势信息相似度最高的手势信息,并显示与所述实时采集的手势信息相似度最高的手势信息相关联的操作指令,以供用户进行选择。
在该技术方案中,通过匹配与实时采集的手势信息相似度最高的手势信息,并显示与该相似度最高的手势信息相关联的操作指令,使得用户在操作手势不标准的情况下,依然能够通过在显示出的操作指令中选择需要的操作指令,方便了用户的操作。当然,在未查找到所述相关联的操作指令时,也可以将与实时采集的手势信息相似的所有手势信息都显示出来,以供用户进行选择。
在上述技术方案中,优选地,所述存储单元102还用于:存储一个或多个授权用户的图像信息;所述信息采集单元104还用于:在接收到识别手势信息的指令时,实时采集鉴权用户的图像信息,以得到鉴权图像信息;所述查找单元106还用于:从已存储的所述一个或多个授权用户的图像信息中查找与所述信息采集单元104采集到的所述鉴权图像信息相同的图像信息;所述处理单元108还用于:在所述查找单元106查找到所述相同的图像信息时,判定所述鉴权图像信息对应的鉴权用户为授权用户,并将所述授权用户作为所述指定用户。
在该技术方案中,通过存储授权用户的图像信息,并根据授权用户的图像信息和采集到的鉴权用户的图像信息判断需要识别手势操作的用户,使得具有针对性地识别用户的手势,避免识别多个用户的手势造成操作指令的混乱。具体来说,比如在医院手术室中,往往有多个医生和多个护士,为了避免识别多个人的手势造成操作指令的混乱,可以将主刀医生作为授权用户,并且仅识别主刀医生的手势。
在上述技术方案中,优选地,所述存储单元102还用于:存储所述多个授权用户的图像信息的优先级;所述处理单元108还用于:在所述查找单元106根据多个所述鉴权用户的图像信息在所述多个授权用户的图像信息中查找到多个相同的图像信息时,将所述多个相同的图像信息中优先级最高的图像信息对应的鉴权用户作为所述指定用户。
在该技术方案中,通过存储多个授权用户的图像信息的优先级,使得在查找到多个相同的图像信息时,能够选择优先级最高的授权用户作为识别手势的对象,避免了同时对多个授权用户的手势进行识别而造成操作指令的混乱。比如在医院手术室中,可能识别到两个医生都为授权用户,若同时识别两个医生的手势,则可能造成操作指令的混乱,因此,可以为两个医生设置优先级,仅识别优先级高的医生的手势。
在上述技术方案中,优选地,所述信息采集单元104还用于:采集所述指定用户的面部信息;所述处理单元108还用于:根据所述面部信息确定所述指定用户的视觉焦点,并将所述视觉焦点对应的显示设备作为所述指定显示设备。
在该技术方案中,通过对用户视觉焦点的确认,可以根据用户的视觉焦点选择相应的显示设备,以显示用户需要的信息,避免将用户需要的信息显示在用户不便于观看的显示设备上,提高了信息显示的灵活性。
在上述技术方案中,优选地,还包括:显示单元110,用于在接收到对指定手势信息的修改指令时,显示所述指定模板,以及与所述指定模板相关联的操作指令,供用户进行修改,以得到修改后的模板;更新单元112,用于在在接收到修改完成的指令时,通过所述修改后的模板,以及与所述修改后的模板相关联的操作指令对所述指定模板,以及与所述指定模板相关联的操作指令进行更新。
在该技术方案中,通过对手势信息的修改,可以使系统更加适应于用户的操作习惯,从而方便用户的操作。显示单元110可以是上述显示设备中的一个,也可以是其他的显示设备。
图2示出了根据本发明的实施例的基于手势识别的信息显示方法的示意流程图。
如图2所示,根据本发明的实施例的基于手势识别的信息显示方法,包括:步骤202,建立并存储至少一个手势信息,以及与每个手势信息相关联的操作指令;步骤204,实时采集指定用户的手势信息,并根据实时采集的手势信息从已存储的操作指令中查找与所述实时采集的手势信息相关联的操作指令;步骤206,若查找到所述相关联的操作指令,则将所述相关联的操作指令发送至指定显示设备,以使所述指定显示设备根据所述操作指令显示相应的信息。
在该技术方案中,通过建立并存储至少一个手势信息,以及与每个手势信息相关联的操作指令,使得可以根据实时采集到的手势信息查找相应的操作指令,以使显示设备根据操作指令显示相应的信息,无需用户对显示设备进行操作,同时也无需通过口令的方式指挥其他人员进行操作,方便了用户的操作,提高了信息显示的准确性。具体来说,比如医生在手术中需要调阅患者的相关资料时,可以通过手势直接控制显示设备显示相应的信息,无需通过鼠标、键盘、触屏等交互方式完成,方便了医生的操作过程,同时也避免了通过口令的方式指挥辅助护士调取相应的信息,而辅助护士由于理解错误造成调取的信息不是医生需要的信息,提高了医生对患者信息调取的准确性。
在上述技术方案中,优选地,若未查找到所述相关联的操作指令,则从已存储的手势信息中匹配与所述实时采集的手势信息相似度最高的手势信息,并显示与所述实时采集的手势信息相似度最高的手势信息相关联的操作指令,以供用户进行选择。
在该技术方案中,通过匹配与实时采集的手势信息相似度最高的手势信息,并显示与该相似度最高的手势信息相关联的操作指令,使得用户在操作手势不标准的情况下,依然能够通过在显示出的操作指令中选择需要的操作指令,方便了用户的操作。当然,在未查找到所述相关联的操作指令时,也可以将与实时采集的手势信息相似的所有手势信息都显示出来,以供用户进行选择。
在上述技术方案中,优选地,在实时采集指定用户的手势信息之前,还包括:采集并存储一个或多个授权用户的图像信息;在接收到识别手势信息的指令时,实时采集鉴权用户的图像信息,以得到鉴权图像信息;判断所述鉴权图像信息是否能够从已存储的所述一个或多个授权用户的图像信息中查找到相同的图像信息,若是,则判定所述鉴权图像信息对应的鉴权用户为授权用户,并将所述授权用户作为所述指定用户。
在该技术方案中,通过存储授权用户的图像信息,并根据授权用户的图像信息和采集到的鉴权用户的图像信息判断需要识别手势操作的用户,使得具有针对性地识别用户的手势,避免识别多个用户的手势造成操作指令的混乱。具体来说,比如在医院手术室中,往往有多个医生和多个护士,为了避免识别多个人的手势造成操作指令的混乱,可以将主刀医生作为授权用户,并且仅识别主刀医生的手势。
在上述技术方案中,优选地,还包括:建立并存储所述多个授权用户的图像信息的优先级;若根据多个所述鉴权用户的图像信息在所述多个授权用户的图像信息中查找到多个相同的图像信息,则将所述多个相同的图像信息中优先级最高的图像信息对应的鉴权用户作为所述指定用户。
在该技术方案中,通过存储多个授权用户的图像信息的优先级,使得在查找到多个相同的图像信息时,能够选择优先级最高的授权用户作为识别手势的对象,避免了同时对多个授权用户的手势进行识别而造成操作指令的混乱。比如在医院手术室中,可能识别到两个医生都为授权用户,若同时识别两个医生的手势,则可能造成操作指令的混乱,因此,可以为两个医生设置优先级,仅识别优先级高的医生的手势。
在上述技术方案中,优选地,在查找到所述相关联的操作指令后,还包括:采集所述指定用户的面部信息,根据所述面部信息确定所述指定用户的视觉焦点;将所述视觉焦点对应的显示设备作为所述指定显示设备。
在该技术方案中,通过对用户视觉焦点的确认,可以根据用户的视觉焦点选择相应的显示设备,以显示用户需要的信息,避免将用户需要的信息显示在用户不便于观看的显示设备上,提高了信息显示的灵活性。
在上述技术方案中,优选地,还包括:在接收到对指定手势信息的修改指令时,显示所述指定模板,以及与所述指定模板相关联的操作指令,供用户进行修改,以得到修改后的模板;以及在接收到修改完成的指令时,通过所述修改后的模板,以及与所述修改后的模板相关联的操作指令对所述指定模板,以及与所述指定模板相关联的操作指令进行更新。
在该技术方案中,通过对手势信息的修改,可以使系统更加适应于用户的操作习惯,从而方便用户的操作。
图3示出了根据本发明的另一个实施例的基于手势识别的信息显示方法的示意流程图。
如图3所示,根据本发明的另一个实施例的基于手势识别的信息显示方法,包括:
步骤302,对手势进行建模,并采集操作者影像识别信息。即采集多个手势信息与相应的操作指令进行关联,并设定授权用户,采集授权用户的影像信息作为识别信息。
步骤304,通过摄像头捕捉操作人员的图像,即采集鉴权用户的图像信息。
步骤306,将捕捉的图像与输入的影像识别信息进行对比,可以使用边缘锐化的方法将需要识别的操作人员的图像从背景中分离出来,然后通过图像识别技术如面部识别与已存储的操作者影像识别信息进行对比。
步骤308,判断图像识别是否通过,即捕捉的图像与输入的影像识别信息是否相同,若是,则执行步骤310,否则,返回步骤304。
步骤310,通过摄像头捕捉操作人员的视觉焦点。
步骤312,判断操作人员的视觉焦点是否落在指定终端上,若是,则执行步骤314,否则,返回步骤310。
步骤314,通过摄像头捕捉操作人员的手势并与手势信息进行对比。可以通过图像分析算法如锐化、二值化等提取出手势的姿势图形,并与手势信息进行比较。
步骤316,判断是否查找到与捕捉的手势相同的手势信息,若是,则执行步骤318,否则,返回步骤310。
步骤318,将与查找到的手势信息相对应的指令发送至上述指定终端,以使该指定终端按照该指令显示相应的信息。
以上结合附图详细说明了本发明的技术方案,考虑到在相关技术中,医生与手术室的信息系统之间的信息交互需要通过鼠标、键盘、触屏等交互方式完成,但是这种交互方式在特殊情况下无法由医生独立进行操作,只能通过口令的方式由辅助护士完成操作,而通过口令的方式增加了信息传递的出错率,也可能导致医生不能专注于手术而造成医疗事故。因此,本发明提出了一种新的基于手势识别的信息显示技术,可以在显示设备显示用户需求的信息时,无需用户对显示设备进行操作,同时也无需通过口令的方式指挥其他人员进行操作,方便了用户的操作,同时提高了信息显示的准确性。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于手势识别的信息显示系统,其特征在于,包括:
存储单元,用于存储至少一个手势信息,以及与每个手势信息相关联的操作指令;
信息采集单元,用于实时采集指定用户的手势信息;
查找单元,用于根据所述信息采集单元实时采集的手势信息从已存储的操作指令中查找与所述实时采集的手势信息相关联的操作指令;
处理单元,用于在所述查找单元查找到所述相关联的操作指令时,将所述相关联的操作指令发送至指定显示设备,以使所述指定显示设备根据所述操作指令显示相应的信息。
2.根据权利要求1所述的基于手势识别的信息显示系统,其特征在于,所述存储单元还用于:存储一个或多个授权用户的图像信息;
所述信息采集单元还用于:在接收到识别手势信息的指令时,实时采集鉴权用户的图像信息,以得到鉴权图像信息;
所述查找单元还用于:从已存储的所述一个或多个授权用户的图像信息中查找与所述信息采集单元采集到的所述鉴权图像信息相同的图像信息;
所述处理单元还用于:在所述查找单元查找到所述相同的图像信息时,判定所述鉴权图像信息对应的鉴权用户为授权用户,并将所述授权用户作为所述指定用户。
3.根据权利要求2所述的基于手势识别的信息显示系统,其特征在于,所述存储单元还用于:存储所述多个授权用户的图像信息的优先级;
所述处理单元还用于:在所述查找单元根据多个所述鉴权用户的图像信息在所述多个授权用户的图像信息中查找到多个相同的图像信息时,将所述多个相同的图像信息中优先级最高的图像信息对应的鉴权用户作为所述指定用户。
4.根据权利要求1所述的基于手势识别的信息显示系统,其特征在于,所述信息采集单元还用于:采集所述指定用户的面部信息;
所述处理单元还用于:根据所述面部信息确定所述指定用户的视觉焦点,并将所述视觉焦点对应的显示设备作为所述指定显示设备。
5.根据权利要求1至4中任一项所述的基于手势识别的信息显示系统,其特征在于,还包括:
显示单元,用于在接收到对指定手势信息的修改指令时,显示所述指定模板,以及与所述指定模板相关联的操作指令,供用户进行修改,以得到修改后的模板;
更新单元,用于在在接收到修改完成的指令时,通过所述修改后的模板,以及与所述修改后的模板相关联的操作指令对所述指定模板,以及与所述指定模板相关联的操作指令进行更新。
6.一种基于手势识别的信息显示方法,其特征在于,包括:
建立并存储至少一个手势信息,以及与每个手势信息相关联的操作指令;
实时采集指定用户的手势信息,并根据实时采集的手势信息从已存储的操作指令中查找与所述实时采集的手势信息相关联的操作指令;
若查找到所述相关联的操作指令,则将所述相关联的操作指令发送至指定显示设备,以使所述指定显示设备根据所述操作指令显示相应的信息。
7.根据权利要求6所述的基于手势识别的信息显示方法,其特征在于,在实时采集指定用户的手势信息之前,还包括:
采集并存储一个或多个授权用户的图像信息;
在接收到识别手势信息的指令时,实时采集鉴权用户的图像信息,以得到鉴权图像信息;
判断所述鉴权图像信息是否能够从已存储的所述一个或多个授权用户的图像信息中查找到相同的图像信息,若是,则判定所述鉴权图像信息对应的鉴权用户为授权用户,并将所述授权用户作为所述指定用户。
8.根据权利要求7所述的基于手势识别的信息显示方法,其特征在于,还包括:
建立并存储所述多个授权用户的图像信息的优先级;
若根据多个所述鉴权用户的图像信息在所述多个授权用户的图像信息中查找到多个相同的图像信息,则将所述多个相同的图像信息中优先级最高的图像信息对应的鉴权用户作为所述指定用户。
9.根据权利要求6所述的基于手势识别的信息显示方法,其特征在于,在查找到所述相关联的操作指令后,还包括:
采集所述指定用户的面部信息,根据所述面部信息确定所述指定用户的视觉焦点;
将所述视觉焦点对应的显示设备作为所述指定显示设备。
10.根据权利要求6至9中任一项所述的基于手势识别的信息显示方法,其特征在于,还包括:
在接收到对指定手势信息的修改指令时,显示所述指定模板,以及与所述指定模板相关联的操作指令,供用户进行修改,以得到修改后的模板;以及
在接收到修改完成的指令时,通过所述修改后的模板,以及与所述修改后的模板相关联的操作指令对所述指定模板,以及与所述指定模板相关联的操作指令进行更新。
CN201310646595.3A 2013-12-04 2013-12-04 基于手势识别的信息显示系统及其信息显示方法 Pending CN103605426A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310646595.3A CN103605426A (zh) 2013-12-04 2013-12-04 基于手势识别的信息显示系统及其信息显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310646595.3A CN103605426A (zh) 2013-12-04 2013-12-04 基于手势识别的信息显示系统及其信息显示方法

Publications (1)

Publication Number Publication Date
CN103605426A true CN103605426A (zh) 2014-02-26

Family

ID=50123659

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310646595.3A Pending CN103605426A (zh) 2013-12-04 2013-12-04 基于手势识别的信息显示系统及其信息显示方法

Country Status (1)

Country Link
CN (1) CN103605426A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104856729A (zh) * 2015-05-25 2015-08-26 无锡海斯凯尔医学技术有限公司 弹性检测设备的操作控制方法和弹性检测设备
CN106484287A (zh) * 2016-09-27 2017-03-08 北京小米移动软件有限公司 显示设备控制方法、装置和显示设备
CN107787501A (zh) * 2015-04-29 2018-03-09 皇家飞利浦有限公司 用于由组的成员操作设备的方法和装置
CN109947251A (zh) * 2019-03-20 2019-06-28 成都泰盟软件有限公司 一种实现手术光照与摄像对应的手势控制方法
CN112635044A (zh) * 2020-12-30 2021-04-09 上海市第六人民医院 一种术中远程手势影像控制系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1223391A (zh) * 1997-11-27 1999-07-21 松下电器产业株式会社 控制方法
CN102981748A (zh) * 2011-06-07 2013-03-20 索尼公司 信息处理终端和方法、程序以及记录介质
CN103153171A (zh) * 2010-08-30 2013-06-12 富士胶片株式会社 医疗信息显示设备、方法和程序
CN103201710A (zh) * 2010-11-10 2013-07-10 日本电气株式会社 图像处理系统、图像处理方法以及存储图像处理程序的存储介质
CN103376891A (zh) * 2012-04-23 2013-10-30 凹凸电子(武汉)有限公司 多媒体系统,显示装置的控制方法及控制器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1223391A (zh) * 1997-11-27 1999-07-21 松下电器产业株式会社 控制方法
CN103153171A (zh) * 2010-08-30 2013-06-12 富士胶片株式会社 医疗信息显示设备、方法和程序
CN103201710A (zh) * 2010-11-10 2013-07-10 日本电气株式会社 图像处理系统、图像处理方法以及存储图像处理程序的存储介质
CN102981748A (zh) * 2011-06-07 2013-03-20 索尼公司 信息处理终端和方法、程序以及记录介质
CN103376891A (zh) * 2012-04-23 2013-10-30 凹凸电子(武汉)有限公司 多媒体系统,显示装置的控制方法及控制器

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107787501A (zh) * 2015-04-29 2018-03-09 皇家飞利浦有限公司 用于由组的成员操作设备的方法和装置
JP2018525696A (ja) * 2015-04-29 2018-09-06 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. グループのメンバによってデバイスを操作する方法及び装置
US10720237B2 (en) 2015-04-29 2020-07-21 Koninklijke Philips N.V. Method of and apparatus for operating a device by members of a group
CN104856729A (zh) * 2015-05-25 2015-08-26 无锡海斯凯尔医学技术有限公司 弹性检测设备的操作控制方法和弹性检测设备
CN104856729B (zh) * 2015-05-25 2018-07-31 无锡海斯凯尔医学技术有限公司 弹性检测设备的操作控制方法和弹性检测设备
CN106484287A (zh) * 2016-09-27 2017-03-08 北京小米移动软件有限公司 显示设备控制方法、装置和显示设备
CN109947251A (zh) * 2019-03-20 2019-06-28 成都泰盟软件有限公司 一种实现手术光照与摄像对应的手势控制方法
CN112635044A (zh) * 2020-12-30 2021-04-09 上海市第六人民医院 一种术中远程手势影像控制系统

Similar Documents

Publication Publication Date Title
US11759109B2 (en) Method for automating collection, association, and coordination of multiple medical data sources
KR102014385B1 (ko) 수술영상 학습 및 학습 기반 수술동작 인식 방법 및 장치
CN103605426A (zh) 基于手势识别的信息显示系统及其信息显示方法
CN103295028B (zh) 手势操作控制方法、装置及智能显示终端
US20140049465A1 (en) Gesture operated control for medical information systems
CN107196788A (zh) 一种埋点数据的处理方法、装置、服务器及客户端
CN107405079A (zh) 用于解剖区域的视频图像的内容管理的方法和系统
US20090136094A1 (en) Systems And Methods For Patient Identification Using Mobile Face Recognition
CN110502104A (zh) 利用深度传感器进行无接触操作的装置
CN104255023A (zh) 由平板电脑控制的相机系统
US20150173843A1 (en) Tracking medical devices
CN104520859A (zh) 用于实时获得医学处置事件的记录的图形用户界面
CN101785870B (zh) 一种具有可追溯性的清洗消毒器
CN105787844A (zh) 病历及医嘱的辅助录入方法和装置
CN103838805A (zh) 医疗记录搜索方法和医疗记录搜索装置
WO2017151904A1 (en) Methods and systems for anatomical image registration
CN104520858A (zh) 用于管理医学处置事件的标注记录的方法和装置
JP6407526B2 (ja) 医用情報処理システム、医用情報処理方法及び情報処理システム
CN103605892A (zh) 基于语音驱动的医疗系统
US20210249109A1 (en) Information processing system, information processing device, and information processing method
CN109446191A (zh) 医疗数据处理系统及方法、存储介质和电子设备
US20130226615A1 (en) Medical information processing system and medical information processing apparatus
CN106446643B (zh) 终端的控制方法及装置
EP3579240A1 (en) Method and system for providing second medical data record
Alkawaz et al. Augmented reality for patient information using face recognition and cloud computing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140226

RJ01 Rejection of invention patent application after publication