CN113764093A - 混合现实显示设备及其手术信息处理方法、存储介质 - Google Patents
混合现实显示设备及其手术信息处理方法、存储介质 Download PDFInfo
- Publication number
- CN113764093A CN113764093A CN202110949779.1A CN202110949779A CN113764093A CN 113764093 A CN113764093 A CN 113764093A CN 202110949779 A CN202110949779 A CN 202110949779A CN 113764093 A CN113764093 A CN 113764093A
- Authority
- CN
- China
- Prior art keywords
- data
- surgical
- vital sign
- mixed reality
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 37
- 238000003672 processing method Methods 0.000 title claims abstract description 31
- 238000004891 communication Methods 0.000 claims description 21
- 238000012545 processing Methods 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 7
- 230000036772 blood pressure Effects 0.000 claims description 6
- 238000012544 monitoring process Methods 0.000 claims description 6
- 230000036760 body temperature Effects 0.000 claims description 4
- 230000029058 respiratory gaseous exchange Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 abstract description 11
- 210000003811 finger Anatomy 0.000 description 8
- 210000003813 thumb Anatomy 0.000 description 8
- 238000012806 monitoring device Methods 0.000 description 7
- 238000002059 diagnostic imaging Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 210000004247 hand Anatomy 0.000 description 5
- 238000002591 computed tomography Methods 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 239000011521 glass Substances 0.000 description 3
- 238000001356 surgical procedure Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000005084 2D-nuclear magnetic resonance Methods 0.000 description 1
- 238000010146 3D printing Methods 0.000 description 1
- 238000005481 NMR spectroscopy Methods 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004659 sterilization and disinfection Methods 0.000 description 1
- 238000000293 three-dimensional nuclear magnetic resonance spectroscopy Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Business, Economics & Management (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种混合现实显示设备及其手术信息处理方法、存储介质。其中，混合现实显示设备的手术信息处理方法包括以下步骤：响应于手术信息的选择操作，获取与所述手术信息对应的手术数据；实时获取手术患者的生命体征数据；将所述手术数据与所述生命体征数据同时显示于虚拟显示面板上。本发明根据选择的手术信息获取对应的手术数据以及手术患者的生命体征数据，并将手术数据和生命体征数据同时显示于虚拟显示面板中，使得医生在为手术患者进行手术的过程中通过混合现实显示设备就可以同时查看手术患者的手术数据和生命体征数据，无需在手术过程中查看不同的显示设备，极大地方便了医生的操作。
Description
技术领域
本发明涉及混合现实技术领域，特别涉及一种混合现实显示设备及其手术信息处理方法、存储介质。
背景技术
在传统的椎弓根置钉手术过程中，医生如果需要查看患者的医学影像，大多依靠医生离开主刀位置，走到手术室的医用观片灯处查看，并且传统的医学影像是通过片子显示的患者病患处的二维影像。近年来也有一些医院尝试使用三维打印的形式，提前将患者的病患处的医学影像以三维的形式打印出来，这在一定的程度上提高了医生观看患者影像的直观性，但是在实际操作中需要考虑到消毒等问题。传统病患的生命体征等数据的呈现，大多依赖多块不同的显示器来显示，需要医生的抬头看屏幕、低头看手术操作部位容易疲劳，增加了医生的手术难度。
发明内容
本发明要解决的技术问题是为了克服现有技术中需要医生查看不同显示器获取病患的医学影像以及生命体征数据导致手术难度增加的缺陷，提供一种混合现实显示设备及其手术信息处理方法、存储介质。
本发明是通过下述技术方案来解决上述技术问题：
本发明的第一方面提供一种混合现实显示设备的手术信息处理方法，包括以下步骤：
响应于手术信息的选择操作，获取与所述手术信息对应的手术数据；
实时获取手术患者的生命体征数据；
将所述手术数据与所述生命体征数据同时显示于虚拟显示面板上。
可选地，所述获取与所述手术信息对应的手术数据的步骤具体包括：从医学影像服务器或者与医学影像服务器连接的数据中台获取与所述手术信息对应的手术数据。
可选地，所述实时获取手术患者的生命体征数据的步骤具体包括：从生命体征监测设备或者与生命体征监测设备连接的数据中台实时获取手术患者的生命体征数据。
可选地，所述手术信息处理方法还包括以下步骤：
响应于采集的手势操作，获取所述手势操作所处的位置；
若所述手势操作所处的位置与所述虚拟显示面板所处的位置相匹配，则根据所述手势操作对所述虚拟显示面板上显示的内容进行相应的处理。
可选地，所述根据所述手势操作对所述虚拟显示面板上显示的内容进行相应的处理的步骤具体包括：
若所述手势操作与第一手势相匹配，则对所述虚拟显示面板上显示的所述手术数据进行相应的处理。
可选地，所述根据所述手势操作对所述虚拟显示面板上显示的内容进行相应的处理的步骤具体包括：
若所述手势操作与第二手势相匹配，则对所述虚拟显示面板上显示的所述生命体征数据进行相应的处理。
可选地，所述手术数据包括以下中的至少一种：二维医学图像、三维医学模型、病历信息、手术术式。
可选地，所述生命体征数据包括以下中的至少一种：体温、脉搏、呼吸、血压。
本发明的第二方面提供一种混合现实显示设备，包括通信模块、显示模块、存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现第一方面所述的手术信息处理方法。
本发明的第三方面提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现第一方面所述的手术信息处理方法。
本发明的第四方面提供一种手术信息处理系统，包括通信连接的混合现实显示设备和数据中台；
所述混合现实显示设备用于响应于手术信息的选择操作，从所述数据中台获取与所述手术信息对应的手术数据以及手术患者的生命体征数据，并将所述手术数据与所述生命体征数据同时显示于虚拟显示面板上。
本发明的积极进步效果在于：根据选择的手术信息获取对应的手术数据以及手术患者的生命体征数据，并将手术数据和生命体征数据同时显示于虚拟显示面板中，使得医生在为手术患者进行手术的过程中通过混合现实显示设备就可以同时查看手术患者的手术数据和生命体征数据，无需在手术过程中查看不同的显示设备，极大地方便了医生的操作。
附图说明
图1为本发明实施例1提供的一种混合现实显示设备的手术信息处理方法的流程图。
图2为本发明实施例1提供的一种混合现实显示设备的手术信息处理方法的应用场景图。
图3为本发明实施例1提供的一种混合现实显示设备的手术信息处理方法的局部流程图。
图4为本发明实施例2提供的一种混合现实显示设备的结构示意图。
图5为本发明实施例4提供的一种手术信息处理系统的结构框图。
具体实施方式
下面通过实施例的方式进一步说明本发明，但并不因此将本发明限制在所述的实施例范围之中。
实施例1
图1为本实施例提供的一种混合现实显示设备的手术信息处理方法的流程图。本实施例提供的混合现实显示设备的手术信息处理方法可以由混合现实显示设备执行，其中，混合现实显示设备可以为混合现实眼镜，具体可以为头戴式，也可以为耳戴式。
下面结合混合现实显示设备为执行主体对手术信息处理方法进行说明。如图1所示，本实施例提供的混合现实显示设备的手术信息处理方法可以包括以下步骤S101～S103：
步骤S101、响应于手术信息的选择操作，获取与所述手术信息对应的手术数据。
在具体实施中，可以由医生对手术信息进行选择操作，具体可以根据混合现实显示设备显示于虚拟显示面板上的内容通过手势选择，也可以通过语音指令选择。
其中，手术信息与手术数据一一对应。手术信息可以包括表征手术患者唯一身份的信息，可以包括医院为手术患者分配的ID(Identity document，身份标识号)、二维码等信息，还可以包括手术患者的床号、姓名等信息。手术数据可以包括手术患者的二维医学图像，例如X光片、二维CT(Computed Tomography，电子计算机断层扫描)图像、二维核磁共振图像等，可以包括手术患者的三维医学模型，例如三维CT模型、三维核磁共振模型等，还可以包括手术患者的病历信息、手术术式等。
在步骤S101可选的一种实施方式中，从医学影像服务器获取与所述手术信息对应的手术数据。本实施方式中，混合现实显示设备与医学影像服务器通信连接，根据手术信息从医学影像服务器获取对应的手术数据。
在步骤S101可选的另一种实施方式中，从与医学影像服务器连接的数据中台获取与所述手术信息对应的手术数据。本实施方式中，混合现实显示设备与数据中台通信连接，数据中台与医学影像服务器通信连接。数据中台用于从医学影像服务器获取所有手术患者的手术数据，并存储于不同的数据库中。混合现实显示设备用于从数据中台获取与所述手术信息对应的手术数据。
步骤S102、实时获取手术患者的生命体征数据。其中，所述生命体征数据可以包括体温、脉搏、呼吸、血压等数据。
生命体征监测设备用于监测手术患者的生命体征数据。在步骤S102可选的一种实施方式中，从生命体征监测设备实时获取手术患者的生命体征数据。本实施方式中，混合现实显示设备与生命体征监测设备通信连接，以实时获取手术患者的生命体征数据。
在步骤S102可选的另一种实施方式中，从与生命体征监测设备连接的数据中台实时获取手术患者的生命体征数据。本实施方式中，混合现实显示设备与数据中台通信连接，数据中台与生命体征监测设备通信连接。数据中台从生命体征监测设备实时获取手术患者的生命体征数据，并存储于不同的数据库中。混合现实显示设备从数据中台实时获取所述手术患者的生命体征数据。
步骤S103、将所述手术数据与所述生命体征数据同时显示于虚拟显示面板上。
在具体实施中，可以通过混合现实显示设备采集当前手术场景的图像或者视频，并根据SLAM(Simultaneous Localization and Mapping，同步定位与建图)算法锚定虚拟显示面板的位置，以方便医生在手术过程中查看手术数据和生命体征数据。在一个具体的例子中，为了避免分散医生在手术过程中的注意力，根据手术患者的位置确定虚拟显示面板的位置，也即根据手术患者的位置确定手术数据与生命体征数据的显示位置，以使得医生通过混合现实显示设备看到的手术数据与生命体征数据可以直接显示于手术患者的身体上，极大地方便了医生的操作。
图2为本实施例提供的一种混合现实显示设备的手术信息处理方法的应用场景图。在如图2所示的例子中，数据中台分别与混合现实眼镜、医学影像服务器以及生命体征监测设备通信连接，数据中台用于从医学影像服务器获取所有手术患者的手术数据，包括二维医学图像例如X光片、二维CT图像等，以及三维医学模型例如三维核磁共振模型、病历信息等，并将获取的手术数据存储于不同的数据库中，以及从生命体征监测设备实时获取手术患者的血压、呼吸、脉搏和体温等生命体征数据，并将获取的生命体征数据存储于数据库中。混合现实眼镜从数据中台的数据库中获取与选择的手术信息对应的X光片和三维医学模型，以及手术患者的生命体征数据，并将X光片、三维医学模型以及生命体征数据同时显示于虚拟显示面板上。
本实施方式中，根据选择的手术信息获取对应的手术数据以及手术患者的生命体征数据，并将手术数据和生命体征数据同时显示于虚拟显示面板中，使得医生在为手术患者进行手术的过程中通过混合现实显示设备就可以同时查看手术患者的手术数据和生命体征数据，无需在手术过程中查看不同的显示设备，极大地方便了医生的操作。
在可选的一种实施方式中，若检测到生命体征数据低于对应的预设阈值，则输出提示信息，医生可以根据提示信息判断是否采取进一步的措施。可以理解地，不同的生命体征数据对应不同的预设阈值，例如脉搏对应的预设阈值可以为30次/分钟，血压对应的预设阈值可以为40mmHg。另外，由于不同手术患者的身体情况不一，因此，也可以根据不同的手术患者设置不同的预设阈值，例如手术患者A的脉搏对应的预设阈值为30次/分钟，手术患者B的脉搏对应的预设阈值为20次/分钟。
其中，上述提示信息可以为声音，例如混合现实显示设备通过扬声器输出声音以提示医生手术患者的生命体征数据存在异常。上述提示信息还可以为图像，例如混合现实显示设备通过在虚拟显示面板显示图像的方式提示医生。
在本实施方式中，还可以在检测到生命体征数据低于对应的预设阈值的情况下输出对应的医学处理措施，以供医生进行参考。
在可选的一种实施方式中，如图3所示，上述手术信息处理方法还包括以下步骤S104～S106：
步骤S104、响应于采集的手势操作，获取所述手势操作所处的位置。在具体实施中，可以利用混合现实显示设备中的摄像头、传感器等装置采集医生的手势操作，并确定手势操作所处的位置。
步骤S105、判断所述手势操作所处的位置与所述虚拟显示面板所处的位置是否相匹配，若是，则执行步骤S106，否则返回步骤S104。在具体实施中，可以根据手势操作所处的位置与虚拟显示面板所处的位置之间的距离判断二者是否相匹配，例如若二者之间的距离小于预设距离，则判断二者相匹配，否则判断二者不匹配。
步骤S106、根据所述手势操作对所述虚拟显示面板上显示的内容进行相应的处理。其中，可以根据不同的手势操作对虚拟显示面板上显示的不同内容进行不同的处理。
在步骤S106可选的一种实施方式中，若所述手势操作与第一手势相匹配，则对所述虚拟显示面板上显示的所述手术数据进行相应的处理，以使得医生能够从不同的视角查看手术数据。
在一个具体的例子中，上述第一手势包括在左手的食指和大拇指触碰的情况下移动左手，上述手术数据包括三维医学模型。若混合现实显示设备采集的手势操作与所述第一手势相匹配，则对虚拟显示面板上显示的三维医学模型进行跟随左手移动的处理，直至左手的食指和大拇指分开或者左手停止移动。
在另一个具体的例子中，上述第一手势包括在左手的食指和大拇指触碰的情况下旋转左手，上述手术数据包括三维医学模型。若混合现实显示设备采集的手势操作与所述第一手势相匹配，则对虚拟显示面板上显示的三维医学模型进行跟随左手旋转的处理，直至左手的食指和大拇指分开或者左手停止移动。
在另一个具体的例子中，上述第一手势包括在两只手的食指和大拇指均触摸的情况下两只手远离，上述手术数据包括三维医学模型。若混合现实显示设备采集的手势操作与所述第一手势相匹配，则对虚拟显示面板上显示的三维医学模型进行放大处理，直至任一只手的食指和大拇指分开或者两只手之间的距离保持不变。
在另一个具体的例子中，上述第一手势包括在两只手的食指和大拇指均触摸的情况下两只手靠近，上述手术数据包括二维医学图像。若混合现实显示设备采集的手势操作与所述第一手势相匹配，则对虚拟显示面板上显示的二维医学图像进行缩小处理，直至任一只手的食指和大拇指分开或者两只手之间的距离保持不变。
在步骤S106可选的另一种实施方式中，若所述手势操作与第二手势相匹配，则对所述虚拟显示面板上显示的所述生命体征数据进行相应的处理。
在一个具体的例子中，上述第二手势包括拖拽，上述生命体征数据包括脉搏和血压。若混合现实显示设备采集的手势操作与所述第二手势相匹配，则对虚拟显示面板上显示的生命体征数据进行拖拽处理，以使得所述生命体征数据的显示位置靠近或者远离医生。
实施例2
图4为本实施例提供的一种混合现实显示设备的结构示意图。所述混合现实显示设备包括用于与其它设备通信的通信模块、显示模块、至少一个处理器以及与所述至少一个处理器通信连接的存储器。其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行实施例1中的手术信息处理方法。图4显示的混合现实显示设备3仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
混合现实显示设备3的组件可以包括但不限于：通信模块、显示模块、上述至少一个处理器4、上述至少一个存储器5、连接不同系统组件(包括存储器5和处理器4)的总线6、通信模块7、显示模块8。
总线6包括数据总线、地址总线和控制总线。
存储器5可以包括易失性存储器，例如随机存取存储器(RAM)51和/或高速缓存存储器52，还可以进一步包括只读存储器(ROM)53。
存储器5还可以包括具有一组(至少一个)程序模块54的程序/实用工具55，这样的程序模块54包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。
通信模块7可以包括天线、移动通信单元、无线通信单元、调制解调处理器以及基带处理器等。天线用于发射和接收电磁波信号。移动通信单元可以提供应用在电子设备上的包括2G/3G/4G/5G等无线通信的解决方案。在一些实施例中，移动通信单元的至少部分功能模块可以被设置于处理器4中。在一些实施例中，移动通信单元的至少部分功能模块可以与处理器4的至少部分模块被设置在同一个器件中。无线通信单元可以提供应用在电子设备上的包括无线局域网WLAN，如Wi-Fi网络、蓝牙，全球导航卫星系统、调频FM、近距离无线通信技术NFC、红外技术等无线通信的解决方案。如图4所示，通信模块7通过总线与电子设备3的其它模块通信。
处理器4通过运行存储在存储器5中的计算机程序，从而执行各种功能应用以及数据处理，例如本发明实施例1中的手术信息处理方法。
混合现实显示设备3也可以与一个或多个外部设备10(例如键盘、指向设备等)通信。这种通信可以通过输入/输出(I/O)接口9进行。应当明白，尽管图4中未示出，还可以结合混合现实显示设备3使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID(磁盘阵列)系统、磁带驱动器以及数据备份存储系统等。
应当注意，尽管在上文详细描述中提及了混合现实显示设备的若干单元/模块或子单元/模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之，上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。
实施例3
本实施例提供一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行实施例1中的手术信息处理方法。
其中，可读存储介质可以采用的更具体可以包括但不限于：便携式盘、硬盘、随机存取存储器、只读存储器、可擦拭可编程只读存储器、光存储器件、磁存储器件或上述的任意合适的组合。
在可能的实施方式中，本发明还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在混合现实显示设备上运行时，所述程序代码用于使所述混合现实显示设备执行实现实施例1中的手术信息处理方法。
其中，可以以一种或多种程序设计语言的任意组合来编写用于执行本发明的程序代码，所述程序代码可以完全地在混合现实显示设备上执行、部分地在混合现实显示设备上执行、作为一个独立的软件包执行、部分在混合现实显示设备上部分在远程设备上执行或完全在远程设备上执行。
实施例4
如图5所示，本实施例提供一种手术信息处理系统50，包括通信连接的混合现实显示设备51和数据中台52。
混合现实显示设备51用于响应于手术信息的选择操作，从数据中台52获取与所述手术信息对应的手术数据以及手术患者的生命体征数据，并将所述手术数据与所述生命体征数据同时显示于虚拟显示面板上。
其中，上述混合现实显示设备可以为实施例2提供的混合现实显示设备。
本实施例提供的手术信息处理系统根据选择的手术信息获取对应的手术数据以及手术患者的生命体征数据，并将手术数据和生命体征数据同时显示于虚拟显示面板中，使得医生在为手术患者进行手术的过程中通过混合现实显示设备就可以同时查看手术患者的手术数据和生命体征数据，无需在手术过程中查看不同的显示设备，极大地方便了医生的操作。
虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。
Claims (10)
1.一种混合现实显示设备的手术信息处理方法，其特征在于，包括以下步骤：
响应于手术信息的选择操作，获取与所述手术信息对应的手术数据；
实时获取手术患者的生命体征数据；
将所述手术数据与所述生命体征数据同时显示于虚拟显示面板上。
2.如权利要求1所述的手术信息处理方法，其特征在于，所述获取与所述手术信息对应的手术数据的步骤具体包括：从医学影像服务器或者与医学影像服务器连接的数据中台获取与所述手术信息对应的手术数据。
3.如权利要求1所述的手术信息处理方法，其特征在于，所述实时获取手术患者的生命体征数据的步骤具体包括：从生命体征监测设备或者与生命体征监测设备连接的数据中台实时获取手术患者的生命体征数据。
4.如权利要求1所述的手术信息处理方法，其特征在于，所述手术信息处理方法还包括以下步骤：
响应于采集的手势操作，获取所述手势操作所处的位置；
若所述手势操作所处的位置与所述虚拟显示面板所处的位置相匹配，则根据所述手势操作对所述虚拟显示面板上显示的内容进行相应的处理。
5.如权利要求4所述的手术信息处理方法，其特征在于，所述根据所述手势操作对所述虚拟显示面板上显示的内容进行相应的处理的步骤具体包括：
若所述手势操作与第一手势相匹配，则对所述虚拟显示面板上显示的所述手术数据进行相应的处理。
6.如权利要求4所述的手术信息处理方法，其特征在于，所述根据所述手势操作对所述虚拟显示面板上显示的内容进行相应的处理的步骤具体包括：
若所述手势操作与第二手势相匹配，则对所述虚拟显示面板上显示的所述生命体征数据进行相应的处理。
7.如权利要求1-6中任一项所述的手术信息处理方法，其特征在于，
所述手术数据包括以下中的至少一种：二维医学图像、三维医学模型、病历信息、手术术式；和/或，
所述生命体征数据包括以下中的至少一种：体温、脉搏、呼吸、血压。
8.一种混合现实显示设备，包括通信模块、显示模块、存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1-7中任一项所述的手术信息处理方法。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述的手术信息处理方法。
10.一种手术信息处理系统，其特征在于，包括通信连接的混合现实显示设备和数据中台；
所述混合现实显示设备用于响应于手术信息的选择操作，从所述数据中台获取与所述手术信息对应的手术数据以及手术患者的生命体征数据，并将所述手术数据与所述生命体征数据同时显示于虚拟显示面板上。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110949779.1A CN113764093A (zh) | 2021-08-18 | 2021-08-18 | 混合现实显示设备及其手术信息处理方法、存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110949779.1A CN113764093A (zh) | 2021-08-18 | 2021-08-18 | 混合现实显示设备及其手术信息处理方法、存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113764093A true CN113764093A (zh) | 2021-12-07 |
Family
ID=78790312
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110949779.1A Pending CN113764093A (zh) | 2021-08-18 | 2021-08-18 | 混合现实显示设备及其手术信息处理方法、存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113764093A (zh) |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104394375A (zh) * | 2014-12-08 | 2015-03-04 | 段然 | 一种将病人生命体征信息接入到手术摄录系统的方法 |
| CN105868541A (zh) * | 2016-03-24 | 2016-08-17 | 苏州麦迪斯顿医疗科技股份有限公司 | 一种患者多媒体数据控制方法及装置 |
| CN106777894A (zh) * | 2016-11-23 | 2017-05-31 | 北京汉博信息技术有限公司 | 手术室可视化数据处理方法 |
| WO2017118075A1 (zh) * | 2016-01-04 | 2017-07-13 | 京东方科技集团股份有限公司 | 人机交互系统、方法及装置 |
| CN109754651A (zh) * | 2019-01-31 | 2019-05-14 | 北京汉博信息技术有限公司 | 手术示教方法及系统 |
| CN109935313A (zh) * | 2019-03-04 | 2019-06-25 | 苏州达辰医疗科技有限公司 | 三维可视化和混合现实的医学应用 |
| KR102000552B1 (ko) * | 2018-02-20 | 2019-07-16 | 연세대학교 원주산학협력단 | 안면보호구 및 안면보호구의 구동 방법 |
| CN110136813A (zh) * | 2019-03-29 | 2019-08-16 | 北京汉博信息技术有限公司 | 手术数据处理方法 |
| EP3657511A1 (en) * | 2018-11-21 | 2020-05-27 | General Electric Company | Methods and apparatus to capture patient vitals in real time during an imaging procedure |
| CN112309552A (zh) * | 2020-10-14 | 2021-02-02 | 江门市中心医院 | 一种基于ai的手环式放疗安全智能化全程管理系统及方法 |
| CN113081268A (zh) * | 2021-03-31 | 2021-07-09 | 上海电气集团股份有限公司 | 基于AR和IoT的手术引导系统 |
-
2021
- 2021-08-18 CN CN202110949779.1A patent/CN113764093A/zh active Pending
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104394375A (zh) * | 2014-12-08 | 2015-03-04 | 段然 | 一种将病人生命体征信息接入到手术摄录系统的方法 |
| WO2017118075A1 (zh) * | 2016-01-04 | 2017-07-13 | 京东方科技集团股份有限公司 | 人机交互系统、方法及装置 |
| CN105868541A (zh) * | 2016-03-24 | 2016-08-17 | 苏州麦迪斯顿医疗科技股份有限公司 | 一种患者多媒体数据控制方法及装置 |
| CN106777894A (zh) * | 2016-11-23 | 2017-05-31 | 北京汉博信息技术有限公司 | 手术室可视化数据处理方法 |
| KR102000552B1 (ko) * | 2018-02-20 | 2019-07-16 | 연세대학교 원주산학협력단 | 안면보호구 및 안면보호구의 구동 방법 |
| EP3657511A1 (en) * | 2018-11-21 | 2020-05-27 | General Electric Company | Methods and apparatus to capture patient vitals in real time during an imaging procedure |
| CN109754651A (zh) * | 2019-01-31 | 2019-05-14 | 北京汉博信息技术有限公司 | 手术示教方法及系统 |
| CN109935313A (zh) * | 2019-03-04 | 2019-06-25 | 苏州达辰医疗科技有限公司 | 三维可视化和混合现实的医学应用 |
| CN110136813A (zh) * | 2019-03-29 | 2019-08-16 | 北京汉博信息技术有限公司 | 手术数据处理方法 |
| CN112309552A (zh) * | 2020-10-14 | 2021-02-02 | 江门市中心医院 | 一种基于ai的手环式放疗安全智能化全程管理系统及方法 |
| CN113081268A (zh) * | 2021-03-31 | 2021-07-09 | 上海电气集团股份有限公司 | 基于AR和IoT的手术引导系统 |
Non-Patent Citations (1)
| Title |
|---|
| 张震江，等: "利用可穿戴高清视频录播设备进行远程手术指导", 中国数字医学, vol. 12, no. 02, pages 86 - 88 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6987893B2 (ja) | 診断試験をリアルタイムの治療に統合する汎用デバイスおよび方法 | |
| US11443431B2 (en) | Augmented reality patient positioning using an atlas | |
| KR101929127B1 (ko) | 의료 영상에 기반하여 상태를 진단하는 장치 및 방법 | |
| US10567660B2 (en) | Overlay of anatomical information in a microscope image | |
| US10022199B2 (en) | Registration correction based on shift detection in image data | |
| de Oliveira et al. | A hand‐eye calibration method for augmented reality applied to computer‐assisted orthopedic surgery | |
| CN105931237A (zh) | 一种图像校准方法和系统 | |
| EP3803540B1 (en) | Gesture control of medical displays | |
| CN204428155U (zh) | 用于重新定位移动式成像设备的图像采集单元 | |
| WO2018174937A1 (en) | Method and system for optimizing healthcare delivery | |
| WO2017151904A1 (en) | Methods and systems for anatomical image registration | |
| Esposito et al. | Multimodal US–gamma imaging using collaborative robotics for cancer staging biopsies | |
| CN113648056B (zh) | 混合现实显示设备及手术导航系统 | |
| JP2021536605A (ja) | 検査又は介入処置中の拡張現実ユーザガイダンス | |
| CN113764093A (zh) | 混合现实显示设备及其手术信息处理方法、存储介质 | |
| Baum et al. | Visual aid for identifying vertebral landmarks in ultrasound | |
| US11869216B2 (en) | Registration of an anatomical body part by detecting a finger pose | |
| CN111223575A (zh) | 基于虚拟智能医疗平台的放射治疗辅助显示方法及系统 | |
| EP4041114B1 (en) | Patterned incision foil and method for determining a geometry of an anatomical surface | |
| Chae et al. | Imaging and printing in plastic and reconstructive surgery part 2: emerging techniques | |
| US20240090866A1 (en) | System and method for displaying ablation zone progression | |
| US20210358220A1 (en) | Adapting an augmented and/or virtual reality | |
| GB2611556A (en) | Augmented reality ultrasound-control system for enabling remote direction of a user of ultrasound equipment by experienced practitioner | |
| WO2022261783A1 (en) | Systems and methods for displaying predetermined information for clinical use | |
| CN117830194A (zh) | 手术路径规划方法、装置及系统、电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |