CN114886461A - 基于增强现实的超声显示系统及方法 - Google Patents
基于增强现实的超声显示系统及方法 Download PDFInfo
- Publication number
- CN114886461A CN114886461A CN202210316907.3A CN202210316907A CN114886461A CN 114886461 A CN114886461 A CN 114886461A CN 202210316907 A CN202210316907 A CN 202210316907A CN 114886461 A CN114886461 A CN 114886461A
- Authority
- CN
- China
- Prior art keywords
- ultrasonic
- real
- image
- time
- ultrasound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 22
- 238000000034 method Methods 0.000 title claims abstract description 20
- 239000000523 sample Substances 0.000 claims abstract description 59
- 230000000007 visual effect Effects 0.000 claims abstract description 18
- 238000003384 imaging method Methods 0.000 claims abstract description 13
- 238000001514 detection method Methods 0.000 claims abstract description 10
- 238000002604 ultrasonography Methods 0.000 claims description 81
- 238000004891 communication Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 7
- 230000003902 lesion Effects 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 4
- 210000001367 artery Anatomy 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 210000003191 femoral vein Anatomy 0.000 description 2
- 238000012285 ultrasound imaging Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000003759 clinical diagnosis Methods 0.000 description 1
- 238000000502 dialysis Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000001105 femoral artery Anatomy 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000000004 hemodynamic effect Effects 0.000 description 1
- 238000001802 infusion Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/462—Displaying means of special interest characterised by constructional features of the display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B17/34—Trocars; Puncturing needles
- A61B17/3403—Needle locating or guiding means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
- A61B8/0841—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating instruments
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5292—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves using additional data, e.g. patient information, image labeling, acquisition parameters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/361—Image-producing devices, e.g. surgical cameras
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B17/34—Trocars; Puncturing needles
- A61B17/3403—Needle locating or guiding means
- A61B2017/3413—Needle locating or guiding means guided by ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B2090/364—Correlation of different images or relation of image positions in respect to the body
- A61B2090/365—Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/378—Surgical systems with images on a monitor during operation using ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0891—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of blood vessels
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Gynecology & Obstetrics (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
本发明提供了一种基于增强现实的超声显示系统及方法,其中,基于增强现实的超声显示系统包括超声探测装置和AR装置,超声探测装置包括超声探头和与超声成像模块,超声探头用于对目标对象实时进行超声扫描,超声成像模块用于根据超声探头采集的超声数据生成并输出超声图像;AR装置用于实时获取其可视空间内的现实场景图像和实时接收超声图像,将实时的超声图像投放在现实场景图像中,以及将投放有超声图像的现实场景图像显示在佩戴者的视线,佩戴者通过AR装置能够同时观察到现实场景和实时的超声图像,实现穿刺过程中的可视化操作,无需频繁转换视野,有利于佩戴者根据实时的超声图像对穿刺部位进行判断,从而能够有效提高穿刺的准确性和效率。
Description
技术领域
本发明涉及医疗器械领域,尤其涉及一种基于增强现实的超声显示系统及方法。
背景技术
目前在临床上进行透析、体外循环支持、进行快速补液及血流动力学监测等诊治过程中常需要对病人各部位动、静脉血管(颈内动静脉、股动静脉等)进行穿刺操作。目前常用手段为通过床旁的超声显示设备的超声影像了解血管大致位置及深度,在穿刺时跟踪穿刺针回声影像引导穿刺。此方式存在以下缺点:
超声显示图像以二维画面显示在超声设备显示屏幕上,在穿刺部位上并无影像进行空间定位,操作者进行穿刺时难以把握进针角度及深度,视野需要在穿刺部位与超声显示屏幕上来回转换,反复观察穿刺针与穿刺部位的实时相对位置,使操作者难以准确定位穿刺的位置、深度和方向,工作效率低下。
发明内容
本发明的目的在于提供一种基于增强现实的超声显示系统及方法,能够避免佩戴者的视野在穿刺部位与屏幕上来回切换,能够有效提高穿刺的准确性和效率。
为了实现上述目的,本发明提供了一种基于增强现实的超声显示系统,包括:
超声探测装置,包括超声探头和与所述超声探头连接的超声成像模块,所述超声探头用于对目标对象实时进行超声扫描,所述超声成像模块用于根据所述超声探头采集的超声数据生成并输出超声图像;以及
AR装置,与所述超声成像模块通信连接,所述AR装置用于实时获取其可视空间内的现实场景图像和实时接收所述超声图像,将实时的所述超声图像投放在所述现实场景图像中,以及将投放有所述超声图像的所述现实场景图像显示在佩戴者的视线。
可选的,所述AR装置被配置为获取所述超声探头在所述现实场景图像中的实时位置并将实时接收的所述超声图像投放在所述现实场景图像中的超声探头的一侧,使所述超声图像在所述现实场景图像中实时跟随所述超声探头的位置移动。
可选的,所述AR装置包括:
获取模块,与所述超声成像模块通信连接,所述获取模块用于实时获取所述超声图像;
定位模块,所述定位模块用于获取所述超声探头在所述现实场景图像中的位置;
投放模块,与所述获取模块和所述定位模块连接,所述投放模块用于将实时获取的所述超声图像投放于所述超声探头的一侧以使所述超声图像在所述现实场景图像中实时跟随所述超声探头的位置移动。
可选的,所述AR装置还包括:
调节模块,所述调节模块用于调节投放在所述现实场景图像中的所述超声图像的大小和透明度。
可选的,所述超声显示系统还包括穿刺辅助装置,所述穿刺辅助装置用于在所述现实场景图像中至少添加引线、点、角度中之一者进行辅助穿刺定位。
可选的,所述穿刺辅助装置包括:
识别模块,所述识别模块用于根据实时接收的所述超声图像识别所述目标对象的病灶;
处理模块,所述处理单元用于根据所述病灶和所述超声探头的位置获取穿刺点在所述现实场景图像中的位置;
标记模块,所述标记模块用于根据所述穿刺点的位置将所述穿刺点标记于所述现实场景图像中。
为了实现上述目的,本发明还提供了一种基于增强现实的超声显示方法,由AR装置执行,所述AR装置与超声探测装置可建立通信连接,所述超声显示方法包括:
实时获取所述AR装置的可视空间内的现实场景图像;
实时接收所述超声探测装置输出的超声图像,所述超声图像根据超声探头实时采集的超声数据生成;
将实时接收的所述超声图像投放在所述现实场景图像中;
将投放有所述超声图像的所述现实场景图像显示在佩戴者的视线。
可选的,实时获取所述AR装置的可视空间内的现实场景图像;
实时接收所述超声探测装置输出的超声图像,所述超声图像根据超声探头实时采集的超声数据生成;
将实时接收的所述超声图像投放在所述现实场景图像中;
将投放有所述超声图像的所述现实场景图像显示在佩戴者的视线。
本发明的基于增强现实的超声显示系统中,通过AR装置实时接收的超声图像投放在现实场景图像中,并将投放有超声图像的现实场景图像显示在佩戴者的视线中,佩戴者通过AR装置能够同时观察到现实场景和实时的超声图像,实现穿刺过程中的可视化操作,无需频繁转换视野,有利于佩戴者根据实时的超声图像对穿刺部位进行判断,从而能够有效提高穿刺的准确性和效率。
附图说明
图1是本发明实施例基于增强现实的超声显示系统的模块图。
图2是本发明实施例现实场景图像的示意图。
图3是本发明实施例AR装置的模块图。
图4是本发明实施例穿刺辅助装置的模块图。
具体实施方式
为了详细说明本发明的技术内容、构造特征、实现的效果,以下结合实施方式并配合附图详予说明。
如图1至图4所示,本发明实施例提供了一种基于增强现实的超声显示系统,包括超声探测装置10和AR装置20。
超声探测装置10包括超声探头11和超声成像模块12,超声探头11用于对目标对象实时进行超声扫描,超声成像模块12用于根据超声探头11采集的超声数据生成并输出超声图像。
AR装置20与超声成像模块12通信连接,AR装置20用于实时获取其可视空间内的现实场景图像和实时接收超声图像,将实时的超声图像投放在现实场景图像中,以及将投放有超声图像的现实场景图像显示在佩戴者的视线中。
本发明实施例的基于增强现实的超声显示系统中,通过AR装置20实时接收的超声图像投放在现实场景图像中,并将投放有超声图像的现实场景图像显示在佩戴者的视线中,佩戴者通过AR装置20能够同时观察到现实场景和实时的超声图像,实现穿刺过程中的可视化操作,无需频繁转换视野,有利于佩戴者根据实时的超声图像对穿刺部位进行判断,从而能够有效提高穿刺的准确性和效率。
需要说明的是,“可视空间”是指佩戴者通过AR装置20可以看到的视野范围内的空间,可视空间随着佩戴者的移动、转动会发生变化;“现实场景图像”是指AR装置20对其可视空间进行拍摄获取的图像,“现实场景图像”可以是AR装置20对整个可视空间进行拍摄获取的图像,也可以是AR装置20对可视空间内的部分区域进行拍摄获取的图像。当然,可以理解的是,AR装置20始终将超声探头拍摄在“现实场景图像”中。
可以理解的是,AR装置20可以包括头戴式设备(比如AR眼镜),医生、护士等进行穿刺操作的人员佩戴头戴式设备,头戴式设备用于实时获取其可视空间内的现实场景图像,以及将投放有超声图像的现实场景图像显示在佩戴头戴式设备的人员的视线中。
可以理解的是,可以通过计算机程序、软件等对AR装置接收的超声图像进行处理以将超声图像投放在现实场景图像中。
比如,以图2为例进行说明,佩戴者或其他人员手持超声探头11对手腕部进行超声扫描,通过AR装置20实时获取超声探头11进行扫描的现实场景图像和超声图像,AR装置20将超声图像投放在现实场景图像中并将投放有超声图像的现实场景图像显示在佩戴者的视线中,使佩戴者通过AR装置20能够同时观察到现实场景和超声图像。当然,AR装置20不以图2为限,根据超声探头11的扫描区域进行拍摄。
在一些实施例中,AR装置20被配置为获取超声探头11在现实场景图像中的实时位置并将实时接收的超声图像投放在现实场景图像中的超声探头11的一侧(如图2所示),使超声图像在现实场景图像中实时跟随超声探头11的位置移动,能够更有利于佩戴者判断穿刺部位。当然,本发明实施例中对超声图像在现实场景图像中的投放位置不作限制,只要能够使佩戴者同时观察到现实场景和超声图像即可。
具体而言,如图2和图3所示,AR装置20包括获取模块21、定位模块22和投放模块23,获取模块21与超声成像模块12通信连接,获取模块21用于实时获取超声图像,定位模块22用于获取超声探头11在现实场景图像中的位置,投放模块23与获取模块21和定位模块22连接,投放模块23用于将实时获取的超声图像投放于超声探头11的一侧以使超声图像在现实场景图像中实时跟随超声探头11的位置移动。通过定位模块22对超声探头11进行定位,从而投放模块23能够将超声图像投放在超声探头11的一侧。其中,超声图像可以投放在超声探头11的前侧、后侧、左侧、右侧或上侧,只要能够完整地显示在现实场景图像中供佩戴者查看即可。
如图3所示,为了方便佩戴者,AR装置20还包括调节模块24,调节模块24用于调节投放在现实场景图像中的超声图像的大小和透明度,使佩戴者能够根据自身习惯和需求对投放在现实场景图像中的超声图像的大小和透明度进行调节。当佩戴者将超声图像调节为具有一定透明度时,能够防止超声图像遮挡现实场景图像的部分区域,从而更有利于佩戴者对穿刺部位的判断。调节模块24可以包括内置的计算机程序,调节模块24可以接收通过按键或触摸屏等等向其发送的指令对超声图像投放在现实场景图像中的大小和透明度进行调节。
在一些实施例中,超声显示系统还包括穿刺辅助装置30,穿刺辅助装置30用于在现实场景图像中至少添加引线、点、角度中之一者进行辅助穿刺定位,使佩戴者能够根据添加的引线、点或角度对目标对象进行穿刺操作,进一步提高穿刺的准确性和效率。
如图4所示,穿刺辅助装置30包括识别模块31、处理模块32和标记模块33,识别模块31用于根据实时接收的超声图像识别目标对象的病灶,处理单元用于根据病灶和超声探头11的位置获取穿刺点在现实场景图像中的位置。
具体地,超声探头11对目标对象进行实时扫描,识别模块31对实时接收到的超声图像进行图像识别,当识别到超声图像中包含有病灶时,佩戴者同时也能够观察到投放在现实场景图像中的超声图像包含病灶,佩戴者可以停止移动超声探头11,使超声探头11始终扫描病灶区域,处理模块32此时获取病灶和超声探头11的位置,进行计算处理,计算出适于穿刺的穿刺点位置,穿刺点不限于一个,标记模块33根据处理模块32计算出的穿刺点位置在现实场景图像中进行标记,从而使佩戴者能够根据标记的穿刺点对病灶进行穿刺操作。当然,标记模块33还可以通过在现实场景图像中添加引线、角度(比如进针角度等)以进行辅助穿刺。
本发明实施例还提供了一种基于增强现实的超声显示方法,由AR装置20执行,AR装置20与超声探测装置可建立通信连接,超声现实方法包括:
实时获取AR装置20的可视空间内的现实场景图像;
实时接收超声探测装置输出的超声图像,超声图像根据超声探头11实时采集的超声数据生成;
将实时接收的超声图像投放在现实场景图像中;
将投放有超声图像的现实场景图像显示在佩戴者的视线中。
本发明实施例的基于增强现实的超声显示方法中,AR装置20实时接收的超声图像投放在现实场景图像中,并将投放有超声图像的现实场景图像显示在佩戴者的视线中,佩戴者通过AR装置20能够同时观察到现实场景和实时的超声图像,实现穿刺过程中的可视化操作,无需频繁转换视野,有利于佩戴者根据实时的超声图像对穿刺部位进行判断,从而能够有效提高穿刺的准确性和效率。
可以理解的是,本发明实施例中的超声显示方法的先后顺序不以上述描述顺序为限,超声显示方法既可以先获取AR装置的可视空间内的现实场景图像再获取超声图像,也可以先获取超声图像再获取现实场景图像。而由于现实场景图像和超声图像均在实时更新,还可以交替更换获取现实场景图像和超声图像的先后顺序。
进一步地,步骤“将实时接收的超声图像投放在现实场景图像中”包括:
获取超声探头11在现实场景图像中的位置;
将实时接收的超声图像投放在现实场景图像中的超声探头11的一侧,使超声图像在现实场景图像中实时跟随超声探头11的位置移动。
以上所揭露的仅为本发明的较佳实例而已,其作用是方便本领域的技术人员理解并据以实施,当然不能以此来限定本发明的之权利范围,因此依本发明的申请专利范围所作的等同变化,仍属于本发明的所涵盖的范围。
Claims (8)
1.一种基于增强现实的超声显示系统,其特征在于,包括:
超声探测装置,包括超声探头和与所述超声探头连接的超声成像模块,所述超声探头用于对目标对象实时进行超声扫描,所述超声成像模块用于根据所述超声探头采集的超声数据生成并输出超声图像;以及
AR装置,与所述超声成像模块通信连接,所述AR装置用于实时获取其可视空间内的现实场景图像和实时接收所述超声图像,将实时的所述超声图像投放在所述现实场景图像中,以及将投放有所述超声图像的所述现实场景图像显示在佩戴者的视线中。
2.根据权利要求1所述的基于增强现实的超声显示系统,其特征在于,所述AR装置被配置为获取所述超声探头在所述现实场景图像中的实时位置并将实时接收的所述超声图像投放在所述现实场景图像中的超声探头的一侧,使所述超声图像在所述现实场景图像中实时跟随所述超声探头的位置移动。
3.根据权利要求1或2所述的基于增强现实的超声显示系统,其特征在于,所述AR装置包括:
获取模块,与所述超声成像模块通信连接,所述获取模块用于实时获取所述超声图像;
定位模块,所述定位模块用于获取所述超声探头在所述现实场景图像中的位置;
投放模块,与所述获取模块和所述定位模块连接,所述投放模块用于将实时获取的所述超声图像投放于所述超声探头的一侧以使所述超声图像在所述现实场景图像中实时跟随所述超声探头的位置移动。
4.根据权利要求3所述的基于增强现实的超声显示系统,其特征在于,所述AR装置还包括:
调节模块,所述调节模块用于调节投放在所述现实场景图像中的所述超声图像的大小和透明度。
5.根据权利要求1所述的基于增强现实的超声显示系统,其特征在于,还包括穿刺辅助装置,所述穿刺辅助装置用于在所述现实场景图像中至少添加引线、点、角度中之一者进行辅助穿刺定位。
6.根据权利要求5所述的基于增强现实的超声显示系统,其特征在于,所述穿刺辅助装置包括:
识别模块,所述识别模块用于根据实时接收的所述超声图像识别所述目标对象的病灶;
处理模块,所述处理单元用于根据所述病灶和所述超声探头的位置获取穿刺点在所述现实场景图像中的位置;
标记模块,所述标记模块用于根据所述穿刺点的位置将所述穿刺点标记于所述现实场景图像中。
7.一种基于增强现实的超声显示方法,由AR装置执行,所述AR装置与超声探测装置可建立通信连接,其特征在于,所述超声显示方法包括:
实时获取所述AR装置的可视空间内的现实场景图像;
实时接收所述超声探测装置输出的超声图像,所述超声图像根据超声探头实时采集的超声数据生成;
将实时接收的所述超声图像投放在所述现实场景图像中;
将投放有所述超声图像的所述现实场景图像显示在佩戴者的视线中。
8.根据权利要求7所述的基于增强现实的超声显示方法,其特征在于,所述“将实时接收的所述超声图像投放在所述现实场景图像中”包括:
获取所述超声探头在所述现实场景图像中的位置;
将实时接收的所述超声图像投放在所述现实场景图像中的所述超声探头的一侧,使所述超声图像在所述现实场景图像中实时跟随所述超声探头的位置移动。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210316907.3A CN114886461A (zh) | 2022-03-28 | 2022-03-28 | 基于增强现实的超声显示系统及方法 |
NL2034443A NL2034443A (en) | 2022-03-28 | 2023-03-27 | Ultrasonic display system and method based on augmented reality |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210316907.3A CN114886461A (zh) | 2022-03-28 | 2022-03-28 | 基于增强现实的超声显示系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114886461A true CN114886461A (zh) | 2022-08-12 |
Family
ID=82715428
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210316907.3A Pending CN114886461A (zh) | 2022-03-28 | 2022-03-28 | 基于增强现实的超声显示系统及方法 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN114886461A (zh) |
NL (1) | NL2034443A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107854142A (zh) * | 2017-11-28 | 2018-03-30 | 无锡祥生医疗科技股份有限公司 | 医用超声增强现实成像系统 |
CN110090069A (zh) * | 2019-06-18 | 2019-08-06 | 无锡祥生医疗科技股份有限公司 | 超声穿刺引导方法、引导装置和存储介质 |
US20200187901A1 (en) * | 2017-08-31 | 2020-06-18 | The Regents Of The University Of California | Enhanced ultrasound systems and methods |
CN112932627A (zh) * | 2021-03-08 | 2021-06-11 | 河南省中医院(河南中医药大学第二附属医院) | 一种基于超声引导穿刺装置及方法 |
CN113786228A (zh) * | 2021-09-15 | 2021-12-14 | 苏州朗润医疗系统有限公司 | 一种基于ar增强现实的辅助穿刺导航系统 |
CN113974830A (zh) * | 2021-11-02 | 2022-01-28 | 中国人民解放军总医院第一医学中心 | 一种用于超声引导甲状腺肿瘤热消融的手术导航系统 |
CN114129232A (zh) * | 2021-11-09 | 2022-03-04 | 上海长征医院 | 一种超声穿刺引导系统及方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5410629B1 (ja) * | 2013-05-14 | 2014-02-05 | 健司 三木 | 超音波診断システム、画像処理装置およびその制御方法と制御プログラム |
JP2021525632A (ja) * | 2018-05-31 | 2021-09-27 | マット・マクグラス・デザイン・アンド・カンパニー,リミテッド・ライアビリティー・カンパニーMatt Mcgrath Design & Co, Llc | 複数配列を使用する医用撮像方法 |
US20200352655A1 (en) * | 2019-05-06 | 2020-11-12 | ARUS Inc. | Methods, devices, and systems for augmented reality guidance of medical devices into soft tissue |
-
2022
- 2022-03-28 CN CN202210316907.3A patent/CN114886461A/zh active Pending
-
2023
- 2023-03-27 NL NL2034443A patent/NL2034443A/en unknown
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20200187901A1 (en) * | 2017-08-31 | 2020-06-18 | The Regents Of The University Of California | Enhanced ultrasound systems and methods |
CN107854142A (zh) * | 2017-11-28 | 2018-03-30 | 无锡祥生医疗科技股份有限公司 | 医用超声增强现实成像系统 |
CN110090069A (zh) * | 2019-06-18 | 2019-08-06 | 无锡祥生医疗科技股份有限公司 | 超声穿刺引导方法、引导装置和存储介质 |
CN112932627A (zh) * | 2021-03-08 | 2021-06-11 | 河南省中医院(河南中医药大学第二附属医院) | 一种基于超声引导穿刺装置及方法 |
CN113786228A (zh) * | 2021-09-15 | 2021-12-14 | 苏州朗润医疗系统有限公司 | 一种基于ar增强现实的辅助穿刺导航系统 |
CN113974830A (zh) * | 2021-11-02 | 2022-01-28 | 中国人民解放军总医院第一医学中心 | 一种用于超声引导甲状腺肿瘤热消融的手术导航系统 |
CN114129232A (zh) * | 2021-11-09 | 2022-03-04 | 上海长征医院 | 一种超声穿刺引导系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
NL2034443A (en) | 2023-05-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11058497B2 (en) | Use of augmented reality to assist navigation during medical procedures | |
RU2740259C2 (ru) | Позиционирование датчика ультразвуковой визуализации | |
CN108814691B (zh) | 针的超声引导辅助装置及系统 | |
EP2554103B1 (en) | Endoscope observation supporting system and programme | |
JP5410629B1 (ja) | 超音波診断システム、画像処理装置およびその制御方法と制御プログラム | |
JP4875416B2 (ja) | 医用ガイドシステム | |
CN107854142B (zh) | 医用超声增强现实成像系统 | |
US20080146915A1 (en) | Systems and methods for visualizing a cannula trajectory | |
CN110403681B (zh) | 超声波诊断装置以及图像显示方法 | |
JP2011200533A (ja) | 超音波診断装置 | |
JP3707830B2 (ja) | 術式支援用画像表示装置 | |
CN110537980A (zh) | 一种基于运动捕捉和混合现实技术的穿刺手术导航方法 | |
CN110584782B (zh) | 医学图像处理方法、装置、医学系统、计算机及存储介质 | |
EP3075342B1 (en) | Microscope image processing device and medical microscope system | |
CN109745074B (zh) | 一种三维超声成像的系统及方法 | |
CN116423547A (zh) | 手术机器人踏板控制系统、方法、可读介质及手术机器人 | |
CN110638524B (zh) | 一种基于vr眼镜的肿瘤穿刺实时模拟系统 | |
JP4022068B2 (ja) | 内視鏡システム | |
CN114886461A (zh) | 基于增强现实的超声显示系统及方法 | |
US20200085411A1 (en) | Method, apparatus and readable storage medium for acquiring an image | |
CN109171905B (zh) | 基于红外成像的穿刺引导设备 | |
CN114367986B (zh) | 智能机器人低温活检方法、装置和控制系统 | |
CN208017582U (zh) | 计算机辅助微创手术装置 | |
CN115737119A (zh) | 一种手术刀实时监测系统及其方法 | |
CN111631814B (zh) | 术中血管立体定位导航系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |