CN112180600B - 一种可用于超声图像显示的增强现实处理方法和系统 - Google Patents

一种可用于超声图像显示的增强现实处理方法和系统 Download PDF

Info

Publication number
CN112180600B
CN112180600B CN202010991008.4A CN202010991008A CN112180600B CN 112180600 B CN112180600 B CN 112180600B CN 202010991008 A CN202010991008 A CN 202010991008A CN 112180600 B CN112180600 B CN 112180600B
Authority
CN
China
Prior art keywords
elastic plate
limiting
augmented reality
fixed
ultrasonic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010991008.4A
Other languages
English (en)
Other versions
CN112180600A (zh
Inventor
宋新华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Chuyun Kairui Management Consulting Co ltd
Original Assignee
Shanghai Chuyun Kairui Management Consulting Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Chuyun Kairui Management Consulting Co ltd filed Critical Shanghai Chuyun Kairui Management Consulting Co ltd
Publication of CN112180600A publication Critical patent/CN112180600A/zh
Application granted granted Critical
Publication of CN112180600B publication Critical patent/CN112180600B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0176Head mounted characterised by mechanical features
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking

Landscapes

  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Engineering & Computer Science (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

本发明公开了一种可用于超声图像显示的增强现实处理方法和系统,包括增强现实眼镜和带视觉标记的超声探头,所述增强现实眼镜包括头戴显示模组和主机,所述增强现实眼镜上安装有一个以上的摄像头,所述带视觉标记的超声探头在探头机身位置分布有一圈视觉标记,可以反射/发射可见光或红外光,与现有技术相比,本发明将虚拟屏幕始终直接投影到使用者的眼睛里,并且始终投射在相对使用者舒适的角度上,或者投射在使用者的超声探头附近的固定位置,可以避免使用者长期扭头造成的肌肉劳损,也可以产生使用者直接透视看到病人身体内部的视觉效果。

Description

一种可用于超声图像显示的增强现实处理方法和系统
技术领域
本发明涉及增强现实技术和超声技术,具体为一种可用于超声图像显示的增强现实处理系统和方法。
背景技术
目前医疗市场使用的超声系统中,呈现图像采用的都是医用显示屏,一般放置在超声台车的上方。病人躺在医生的一侧,医生由于职业训练的素养,在观察屏幕的时候看不到病人,医生需要根据检查项目来选测病人的体位,如平卧位,左侧卧位,右侧卧位,坐位或半卧位等。医生本人的位置是固定的,看屏幕的方向也是固定的,所以检查各种体位的病人时,经常需要作出侧身的体位去触及病人的检查部位。所以肩周炎和颈椎病成为了超声医生的一项职业病。
本发明提出一种可用于超声图像显示的增强现实处理系统,由一AR增强现实眼镜,一计算处理装置,以及固定在超声探头上的红外追踪标记构成。该系统可以将超声图像一直显示在医生眼前,或者跟随医生身体的转动将超声图像显示在医生身前的固定高度,或者在超声引导类的穿刺治疗中直接将超声图像融合显示在病人的患处。从而能够减少医生在操作超声的过程中长期肩周,颈椎紧张的情况,减少职业病的发生。
目前的AR显示技术配合的头动检测基本上是基于三种技术来实现,一种是IMU姿态传感器,能够感受3个或6个轴上的加速度和角速度。第二种是采用头盔上的三维视觉传感器,第三种是安装在房间空间中的图像传感器,捕捉增强现实眼镜上分布的标记点,从而可以计算使用者头部相对于房间固定位置的角度。本发明提出的头动检测并不关注头戴显示相对于实际物理空间的位置,而关注头部相对与身体的位置。实现将图形投影在使用者身体的特定方向,图像随着使用者运动。本发明涉及的另一个技术为检测超声探头相对于使用者头戴显示的位置,实现将图像投影在超声探头的相对位置上,由于超声回波图象相对于超声探头的位置是固定的,所以最终可以实现将超声图像投影在患处相应位置。
发明内容
本发明的目的在于提供一种可用于超声图像显示的增强现实处理方法及系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:
一种可用于超声图像显示的增强现实处理系统,其特征在于:包括增强现实眼镜和带视觉标记的超声探头,所述增强现实眼镜包括头戴显示模组(2)和主机(3),所述增强现实眼镜上安装有一个以上的摄像头,所述主机为具有图像处理或接口转发能力的计算单元;所述带视觉标记的超声探头在探头机身位置分布有若干视觉标记,可以反射/发射可见光或红外光,所述增强现实眼镜和带视觉标记的超声探头,分别与超声主机电性连接或无线连接;
优选的,所述主机(3)通过有线或无线接口与第三方超声系统主机连接进行数据交互,所述头戴显示模组(2)与所述主机(3)之间有线电性连接,所述主机(3)悬挂在人体颈部,所述主机(3)中安装有第一套姿态传感器(6),所述头戴显示模组(2)中安装有第二套姿态传感器(9),姿态传感器包括三轴角加速度传感器或三轴地磁传感器;
还包括一种可用于超声图像显示的增强现实处理方法,采用模式一将图像输出给所述头戴显示模组(2)中左右眼两个屏幕的图像,使得使用者始终可以在头部绕身体转动的特定方向看到悬挂的虚拟屏幕内容,所述模式一具体为:
第一步,坐标系下,预设虚拟屏幕的(0,0)坐标位于相对于人体前方d距离(θ,φ)方向处;
第二步,采用所述第一套姿态传感器读出的相对地磁场角度
Figure BDA0002695765140000031
用所述第二套姿态传感器读出的相对地磁场角度
Figure BDA0002695765140000032
第三步,在所述第三方系统主机中计算得出两个相对地磁场角度的偏差,得出使用者头部相对于身体旋转的角度
Figure BDA0002695765140000033
第四步,所述第三方系统主机以
Figure BDA0002695765140000034
角度输出给所述头戴显示模组(2),原视频内容在人体前方半径为d的球体上以偏移
Figure BDA0002695765140000035
角度输出后,仍然处于所述头戴显示模组(2)的虚拟屏幕视场角内;
还包括一种可用于超声图像显示的增强现实处理方法,采用模式二将图像输出给所述头戴显示模组(2)中左右眼两个屏幕的图像,使得使用者可以在相对于所述带视觉标记的超声探头固定的空间位置看到虚拟的视频内容,所述模式二具体为:
第一步,所述增强现实眼镜上的一个摄像头或多个摄像头,采用结构光方法或者视差法定位所述带视觉标记的超声探头,根据所述视觉标记,计算出超声探头相对于所述增强现实眼镜的三维空间位置(x,y,z)和超声探头指向方向角度(θ’,φ’);
第二步,假设需要将图像呈现在探头前方L(L≥0)的距离上,则虚拟屏幕的(0,0)坐标相对于增强现实眼镜位于(x+L sinθ’Cosφ’,y+LSinθ’Sinφ’,z+LCosθ’)位置;
第三步,所述第三方系统主机根据当前摄像头读出的(x,y,z)坐标和(θ’,φ’),将视频内容输出至(x+L sinθ’Cosφ’,y+LSinθ’Sinφ’,z+LCosθ’)位置;
优选的,所述视觉标记构成一个非旋转对称的图案,图案中至少有一个三维指向;
优选的,所述增强现实眼镜上设有Wifi通讯模块或蜂窝移动通讯模块。
另外,还包括一种超声诊断/检测系统,超声检测设备及设备的外设通过有线或者无线的方式连接所述的一种可用于超声图像显示的增强现实处理系统,作为所述超声诊断/检测系统的显示设备之一。
优选的,所述主机(3)通过脖圈(4)悬挂在人体颈部,所述脖圈(4)包括安装板、第一弹性板和第二弹性板,所述主机固定在安装板的一侧,所述第一弹性板和第二弹性板对称固定在安装板远离主机的一侧,所述第一弹性板和第二弹性板均为圆弧状,且第一弹性板和第二弹性板远离安装板一端的间距为5厘米,所述第一弹性板、第二弹性板和安装板三者围成穿戴区。
优选的,所述第一弹性板和第二弹性板远离安装板的一端固定有调节机构,所述调节机构包括调节带、松紧带、转向装置和限位装置,所述松紧带的两端分别与第一弹性板和第二弹性板的内侧固定,所述转向装置和限位装置分别与第一弹性板和第二弹性板远离安装板的一端固定,所述调节带为柔性带,所述调节带的一端与第二弹性板远离安装板一端的端口处固定,另一端穿过转向装置与限位装置的限位端固定。
优选的,所述转向装置包括支撑块和转向辊,所述支撑块固定在第一弹性板远离安装板一端的外侧,所述支撑块远离第一弹性板的一侧设有装置槽,所述转向辊的两端分别与装置槽的两侧壁转动连接,所述调节带远离第二弹性板的一端穿过转向辊与装置槽底部的间隙,并绕过转向辊与限位装置的限位端固定。
优选的,所述限位装置包括安装块、挡板、限位块、限位板、限位弹簧、限位杆和凸块,所述安装块固定在第二弹性板远离安装板的一端,所述安装块上设有通槽,所述通槽内侧对称固定两个挡板,所述调节带绕过转向辊的一端穿插在挡板与通槽靠近第二弹性板一侧的间隙内,所述调节带的外侧等距设有多个限位槽,所述限位槽为直角三棱锥结构,所述限位块的一端为与限位槽相配合的锥形结构,且限位块为锥形结构的一端插接在限位槽内,另一端与限位板固定,所述限位板与限位弹簧的一端固定,所述限位弹簧的另一端与通槽远离第二弹性板的一侧固定,所述限位杆的一端套接在限位弹簧的内侧,且与限位板固定,所述限位杆远离限位板的一端穿过安装块与凸块固定,所述限位杆与安装块滑动连接。
优选的,所述第一弹性板和第二弹性板的内侧固定有防护件,所述防护件包括防护带和支撑件,所述防护带的一端与第二弹性板固定,另一端通过支撑件搭接在第一弹性板的内侧。
优选的,所述支撑件包括U型架,所述U型架的两端均与第一弹性板的内侧固定,所述防护带远离第二弹性板的一端插接在U型架与第一弹性板之间的间隙内。
与现有技术相比,本发明的有益效果是:
本发明采用差分角速度或者差分地磁传感器两种方案,来实现使用者运动过程中视野的跟踪,使得使用者可以始终在头摆动的固定角度,看到固定的显示内容。或者将超声图像投影在前方,后方,上方,或者病人患处等超声探头的相对位置上。
附图说明
图1为本发明整体结构示意图
图2为本发明脖圈结构示意图;
图3为本发明限位机构结构示意图;
图4为图2中A区域放大图;
图5为图2中B区域放大图;
图6为图3中C区域放大图;
图7为本发明系统结构框图;
图8为非旋转情况下姿态角度示意图;
图9为采用模式一的示意图;
图10为采用模式二的示意图;
图中:1-计算处理装置;2-显示模组;3-主机;4-脖圈;5-处理器;6-第一套姿态传感器;7-电池;8-近眼显示模组;9-第二套姿态传感器;10-安装板;11-第一弹性板;12-第二弹性板;13-穿戴区;14-调节机构;15-调节带;16-松紧带;17-转向装置;18-限位装置;19-支撑块;20-转向辊;21-装置槽;22-安装块;23-挡板;24-限位块;25-限位板;26-限位弹簧;27-限位杆;28-凸块;29-通槽;30-限位槽;31-防护件;32-防护带;33-支撑件;34-U型架。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1-10,本发明提供一种技术方案:
一种可用于超声图像显示的增强现实处理系统,其特征在于:包括增强现实眼镜和带视觉标记的超声探头,所述增强现实眼镜包括头戴显示模组(2)和主机(3),所述增强现实眼镜上安装有一个以上的摄像头,所述带视觉标记的超声探头在探头机身位置分布有若干视觉标记,可以反射/发射可见光或红外光,所述增强现实眼镜和带视觉标记的超声探头,分别与超声主机电性连接或无线连接,或者探头本身就是便携式主机从而所述增强现实眼镜和超声探头电性连接或无线连接。
所述增强现实眼镜可以拆分成两个结构,头戴显示模组2和主机3,所述主机3通过有线或无线接口与第三方系统主机连接进行数据交互,所述头戴显示模组2与主机3之间有线电性连接,所述主机3悬挂在人体颈部,所述主机3中安装有第一套姿态传感器,所述头戴显示模组2中安装有第二套姿态传感器9,姿态传感器包括有三轴角速度传感器或三轴地磁传感器,姿态传感器至少有3个互相正交的角速度传感器,地磁场传感器至少包含三个互相正交的地磁场传感器。
优选的,所述头戴显示模组2包括第二套姿态传感器9、近眼显示模组和配套的驱动电路,并安装有一对摄像头,所述第二套姿态传感器9包括三轴角速度或者三轴地磁场传感器。
还包括一种可用于超声图像显示的增强现实处理方法,采用模式一将图像输出给所述头戴显示模组2中左右眼两个屏幕的图像,使得使用者始终可以在头部绕身体转动的特定方向看到悬挂的虚拟屏幕内容,所述模式一具体为:
第一步,坐标系下,预设虚拟屏幕的(0,0)坐标位于相对于人体前方d距离(θ,φ)方向处;
第二步,采用所述第一套姿态传感器读出的相对地磁场角度
Figure BDA0002695765140000071
用所述第二套姿态传感器读出的相对地磁场角度
Figure BDA0002695765140000072
第三步,在所述第三方系统主机中计算得出两个相对地磁场角度的偏差,得出使用者头部相对于身体旋转的角度
Figure BDA0002695765140000073
第四步,所述第三方系统主机以
Figure BDA0002695765140000074
角度输出给所述头戴显示模组2,原视频内容在人体前方半径为d的球体上以偏移
Figure BDA0002695765140000075
角度输出后,仍然处于所述头戴显示模组2的虚拟屏幕视场角内;
还包括一种可用于超声图像显示的增强现实处理方法,采用模式二将图像输出给所述头戴显示模组2中左右眼两个屏幕的图像,使得使用者可以在相对于所述带视觉标记的超声探头固定的空间位置看到虚拟的视频内容,所述模式二具体为:
第一步,所述增强现实眼镜上的一个摄像头或多个摄像头,采用结构光方法或者视差法定位所述带视觉标记的超声探头,根据所述视觉标记,计算出超声探头相对于所述增强现实眼镜的三维空间位置(x,y,z)和超声探头指向方向角度(θ’,φ’);
第二步,假设需要将图像呈现在探头前方L(L≥0)的距离上,则虚拟屏幕的(0,0)坐标相对于增强现实眼镜位于(x+L sinθ’Cosφ’,y+LSinθ’Sinφ’,z+LCosθ’)位置;
第三步,所述第三方系统主机根据当前摄像头读出的(x,y,z)坐标和(θ’,φ’),将视频内容输出至(x+L sinθ’Cosφ’,y+LSinθ’Sinφ’,z+LCosθ’)位置;
优选的,所述视觉标记构成一个非旋转对称的图案,图案中至少有一个三维指向;
优选的,采用圆形标记外面配备一个特殊的三角形标记,产生整个图形的一个特殊方向。
优选的,所述增强现实眼镜上设有Wifi通讯模块或蜂窝移动通讯模块。
另外,还包括一种超声诊断/检测系统,超声检测设备及设备的外设通过有线或者无线的方式连接所述的一种可用于超声图像显示的增强现实处理系统,作为所述超声诊断/检测系统的显示设备之一。
所述主机3通过脖圈4悬挂在人体颈部,所述脖圈4包括安装板10、第一弹性板11和第二弹性板12,所述主机3固定在安装板10的一侧,所述第一弹性板11和第二弹性板12对称固定在安装板10远离主机3的一侧,所述第一弹性板11和第二弹性板12均为圆弧状,且第一弹性板11和第二弹性板12远离安装板10一端的间距为5厘米,所述第一弹性板11、第二弹性板12和安装板10三者围成穿戴区13,穿戴时,使用者可分别对第一弹性板11和第二弹性板12施加应力,使第一弹性板11和第二弹性板12远离安装板10一端的间距变大,使用者颈部进入穿戴区13内,即可实现对主机3的穿戴。
所述第一弹性板11和第二弹性板12远离安装板10的一端固定有调节机构14,通过调节机构14可调节穿戴区13的大小,使脖圈4适用于不同体形的使用者,防止使用者走动时第一弹性板11和第二弹性板12在人体颈部窜动。
所述调节机构14包括调节带15、松紧带16、转向装置17和限位装置18,所述松紧带16的两端分别与第一弹性板11和第二弹性板12的内侧固定,所述转向装置17和限位装置18分别与第一弹性板11和第二弹性板12远离安装板10的一端固定,所述调节带15为柔性带,所述调节带15的一端与第二弹性板12远离安装板10一端的端口处固定,另一端穿过转向装置17与限位装置18的限位端固定,松紧带16的长度可根据使用者的体形进行变化,通过控制调节带15的长度,可实现对第一弹性板11和第二弹性板12远离安装板10一端的间距的调节,从而实现对穿戴区13大小的调节。
所述转向装置17包括支撑块19和转向辊20,所述支撑块19固定在第一弹性板11远离安装板10一端的外侧,所述支撑块19远离第一弹性板11的一侧设有装置槽21,所述转向辊20的两端分别与装置槽21的两侧壁转动连接,所述调节带15远离第二弹性板12的一端穿过转向辊20与装置槽21底部的间隙,并绕过转向辊20与限位装置18的限位端固定,转向装置17改变了调节带15的方向,便于对调节带15进行固定。
所述限位装置18包括安装块22、挡板23、限位块24、限位板25、限位弹簧26、限位杆27和凸块28,所述安装块22固定在第二弹性板12远离安装板10的一端,所述安装块22上设有通槽29,所述通槽29内侧对称固定两个挡板23,所述调节带15绕过转向辊20的一端穿插在挡板23与通槽29靠近第二弹性板12一侧的间隙内,所述调节带15的外侧等距设有多个限位槽30,所述限位槽30为直角三棱锥结构,所述限位块24的一端为与限位槽30相配合的锥形结构,且限位块24为锥形结构的一端插接在限位槽30内,另一端与限位板25固定,所述限位板25与限位弹簧26的一端固定,所述限位弹簧26的另一端与通槽29远离第二弹性板12的一侧固定,所述限位杆27的一端套接在限位弹簧26的内侧,且与限位板25固定,所述限位杆27远离限位板25的一端穿过安装块22与凸块28固定,所述限位杆27与安装块22滑动连接;在减小穿戴区13的大小时,对调节带15的一端施加拉力,限位块24在当前限位槽30内滑出,并与调节带15上不同位置的限位槽30卡接,即可实现穿戴区13的缩小;在增大穿戴区13的大小时,通过对凸块28施加拉力,使限位块24脱离限位槽30,再移动调节带15的位置,增大第一弹性板11和第二弹性板12远离安装板10一端的间距,调节带15的位置确定后,取消对凸块28的拉力,限位块24重新卡接在限位槽30内,即可实现穿戴区13的放大。
所述第一弹性板11和第二弹性板12的内侧固定有防护件31,所述防护件31包括防护带32和支撑件33,所述防护带32的一端与第二弹性板12固定,另一端通过支撑件33搭接在第一弹性板11的内侧,通过防护带32可对第一弹性板11和第二弹性板12远离安装板10一端的间隙起到隔离作用,防止其对人体颈部造成磨损。
所述支撑件33包括U型架34,所述U型架34的两端均与第一弹性板11的内侧固定,所述防护带32远离第二弹性板12的一端插接在U型架34与第一弹性板11之间的间隙内,U型架34对防护带32起到支撑作用,使防护带32的位置分别与第一弹性板11和第二弹性板12保持一致。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (8)

1.一种可用于超声图像显示的增强现实处理系统,其特征在于:包括增强现实眼镜和带视觉标记的超声探头,所述增强现实眼镜包括头戴显示模组(2)和主机(3),所述增强现实眼镜上安装有一个以上的摄像头,所述主机(3)为具有图像处理或接口转发能力的计算单元;所述带视觉标记的超声探头在探头机身位置分布有若干视觉标记,可以反射/发射可见光或红外光,所述增强现实眼镜和带视觉标记的超声探头,分别与第三方超声系统主机电性连接或无线连接;所述主机(3)通过有线或无线接口与第三方超声系统主机连接进行数据交互,所述头戴显示模组(2)与所述主机(3)之间有线电性连接,所述主机(3)悬挂在人体颈部,所述主机(3)中安装有第一套姿态传感器(6),所述头戴显示模组(2)中安装有第二套姿态传感器(9),姿态传感器包括三轴角速度传感器或三轴地磁传感器。
2.一种可用于超声图像显示的增强现实处理方法,其特征在于:根据权利要求1所述的一种可用于超声图像显示的增强现实处理系统,采用模式一将图像输出给所述头戴显示模组(2)中左右眼两个屏幕的图像,使得使用者始终可以在头部绕身体转动的特定方向看到悬挂的虚拟屏幕内容,所述模式一具体为:
第一步,坐标系下,预设虚拟屏幕的(0,0)坐标位于相对于人体前方d距离(θ,φ)方向处;其中θ为虚拟屏幕方向线在坐标系下x-y平面的投影和x轴的夹角,φ为虚拟屏幕方向线在坐标系下与z轴的夹角;
第二步,采用所述第一套姿态传感器读出的相对地磁场角度
Figure FDA0003494709140000011
用所述第二套姿态传感器读出的相对地磁场角度
Figure FDA0003494709140000012
其中
Figure FDA0003494709140000013
Figure FDA0003494709140000014
分别为第一套姿态传感器方向线和第二套姿态传感器方向线在坐标系下x-y平面的投影和x轴的夹角,
Figure FDA0003494709140000015
Figure FDA0003494709140000016
为第一套姿态传感器方向线和第二套姿态传感器方向线在坐标系下与z轴的夹角;
第三步,在所述第三方超声系统主机中计算得出两个相对地磁场角度的偏差,得出使用者头部相对于身体旋转的角度
Figure FDA0003494709140000021
第四步,所述第三方超声系统主机以
Figure FDA0003494709140000022
角度输出给所述头戴显示模组(2),原视频内容在人体前方半径为d的球体上以偏移
Figure FDA0003494709140000023
Figure FDA0003494709140000024
角度输出后,仍然处于所述头戴显示模组(2)的虚拟屏幕视场角内。
3.一种可用于超声图像显示的增强现实处理方法,其特征在于:根据权利要求1所述的一种可用于超声图像显示的增强现实处理系统,采用模式二将图像输出给所述头戴显示模组(2)中左右眼两个屏幕的图像,使得使用者可以在相对于所述带视觉标记的超声探头固定的空间位置看到虚拟的视频内容,所述模式二具体为:
第一步,所述增强现实眼镜上的一个摄像头或多个摄像头,采用结构光方法或者视差法定位所述带视觉标记的超声探头,根据所述视觉标记,计算出超声探头相对于所述增强现实眼镜的三维空间位置(x,y,z)和超声探头指向方向角度(θ’,φ’);其中θ’为超声探头方向线在坐标系下x-y平面的投影和x轴的夹角,φ’为超声探头方向线在坐标系下与z轴的夹角;
第二步,假设需要将图像呈现在探头前方L(L≥0)的距离上,则虚拟屏幕的(0,0)坐标相对于增强现实眼镜位于(x+L sinθ’Cosφ’,y+LSinθ’Sinφ’,z+LCosθ’)位置;
第三步,所述第三方超声系统主机根据当前摄像头读出的(x,y,z)坐标和(θ’,φ’),将视频内容输出至(x+L sinθ’Cosφ’,y+LSinθ’Sinφ’,z+LCosθ’)位置。
4.根据权利要求2或3所述的一种可用于超声图像显示的增强现实处理方法,其特征在于,所述视觉标记构成一个非旋转对称的图案,图案中至少有一个三维指向。
5.根据权利要求2或3所述的一种可用于超声图像显示的增强现实处理方法,其特征在于:所述增强现实眼镜上设有Wifi通讯模块或蜂窝移动通讯模块。
6.一种超声诊断/检测系统,其特征在于,超声检测设备及设备的外设通过有线或者无线的方式连接权利要求1所述的一种可用于超声图像显示的增强现实处理系统,作为所述超声诊断/检测系统的显示设备之一;所述主机(3)通过脖圈(4)悬挂在人体颈部,所述脖圈(4)包括安装板(10)、第一弹性板(11)和第二弹性板(12),所述主机(3)固定在安装板(10)的一侧,所述第一弹性板(11)和第二弹性板(12)对称固定在安装板(10)远离主机(3)的一侧,所述第一弹性板(11)和第二弹性板(12)均为圆弧状,且第一弹性板(11)和第二弹性板(12)远离安装板(10)一端的间距为5厘米,所述第一弹性板(11)、第二弹性板(12)和安装板(10)三者围成穿戴区(13)。
7.根据权利要求6所述的一种超声诊断/检测系统,其特征在于:所述第一弹性板(11)和第二弹性板(12)远离安装板(10)的一端固定有调节机构(14),所述调节机构(14)包括调节带(15)、松紧带(16)、转向装置(17)和限位装置(18),所述松紧带(16)的两端分别与第一弹性板(11)和第二弹性板(12)的内侧固定,所述转向装置(17)和限位装置(18)分别与第一弹性板(11)和第二弹性板(12)远离安装板(10)的一端固定,所述调节带(15)为柔性带,所述调节带(15)的一端与第二弹性板(12)远离安装板(10)一端的端口处固定,另一端穿过转向装置(17)与限位装置(18)的限位端固定。
8.根据权利要求7所述的一种超声诊断/检测系统,其特征在于:所述转向装置(17)包括支撑块(19)和转向辊(20),所述支撑块(19)固定在第一弹性板(11)远离安装板(10)一端的外侧,所述支撑块(19)远离第一弹性板(11)的一侧设有装置槽(21),所述转向辊(20)的两端分别与装置槽(21)的两侧壁转动连接,所述调节带(15)远离第二弹性板(12)的一端穿过转向辊(20)与装置槽(21)底部的间隙,并绕过转向辊(20)与限位装置(18)的限位端固定;所述限位装置(18)包括安装块(22)、挡板(23)、限位块(24)、限位板(25)、限位弹簧(26)、限位杆(27)和凸块(28),所述安装块(22)固定在第二弹性板(12)远离安装板(10)的一端,所述安装块(22)上设有通槽(29),所述通槽(29)内侧对称固定两个挡板(23),所述调节带(15)绕过转向辊(20)的一端穿插在挡板(23)与通槽(29)靠近第二弹性板(12)一侧的间隙内,所述调节带(15)的外侧等距设有多个限位槽(30),所述限位槽(30)为直角三棱锥结构,所述限位块(24)的一端为与限位槽(30)相配合的锥形结构,且限位块(24)为锥形结构的一端插接在限位槽(30)内,另一端与限位板(25)固定,所述限位板(25)与限位弹簧(26)的一端固定,所述限位弹簧(26)的另一端与通槽(29)远离第二弹性板(12)的一侧固定,所述限位杆(27)的一端套接在限位弹簧(26)的内侧,且与限位板(25)固定,所述限位杆(27)远离限位板(25)的一端穿过安装块(22)与凸块(28)固定,所述限位杆(27)与安装块(22)滑动连接;所述第一弹性板(11)和第二弹性板(12)的内侧固定有防护件(31),所述防护件(31)包括防护带(32)和支撑件(33),所述防护带(32)的一端与第二弹性板(12)固定,另一端通过支撑件(33)搭接在第一弹性板(11)的内侧;所述支撑件(33)包括U型架(34),所述U型架(34)的两端均与第一弹性板(11)的内侧固定,所述防护带(32)远离第二弹性板(12)的一端插接在U型架(34)与第一弹性板(11)之间的间隙内。
CN202010991008.4A 2019-09-24 2020-09-23 一种可用于超声图像显示的增强现实处理方法和系统 Active CN112180600B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910902733.7A CN110609388A (zh) 2019-09-24 2019-09-24 一种可用于超声图像显示的增强现实处理方法和系统
CN2019109027337 2019-09-24

Publications (2)

Publication Number Publication Date
CN112180600A CN112180600A (zh) 2021-01-05
CN112180600B true CN112180600B (zh) 2022-03-25

Family

ID=68892055

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910902733.7A Pending CN110609388A (zh) 2019-09-24 2019-09-24 一种可用于超声图像显示的增强现实处理方法和系统
CN202010991008.4A Active CN112180600B (zh) 2019-09-24 2020-09-23 一种可用于超声图像显示的增强现实处理方法和系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910902733.7A Pending CN110609388A (zh) 2019-09-24 2019-09-24 一种可用于超声图像显示的增强现实处理方法和系统

Country Status (1)

Country Link
CN (2) CN110609388A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113100828A (zh) * 2021-05-11 2021-07-13 天津大学 头箍式发音运动超声图像探测头盔

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104856720B (zh) * 2015-05-07 2017-08-08 东北电力大学 一种基于rgb‑d传感器的机器人辅助超声扫描系统
CN109069103B (zh) * 2016-04-19 2022-01-25 皇家飞利浦有限公司 超声成像探头定位
CN108616752B (zh) * 2018-04-25 2020-11-06 北京赛博恩福科技有限公司 支持增强现实交互的头戴设备及控制方法

Also Published As

Publication number Publication date
CN110609388A (zh) 2019-12-24
CN112180600A (zh) 2021-01-05

Similar Documents

Publication Publication Date Title
KR101988110B1 (ko) 생체신호연동 가상현실 교육 시스템 및 방법
CN106062826B (zh) 图像生成装置以及图像生成方法
JP6083880B2 (ja) 入出力機構を有する着用可能な装置
CA2934987A1 (en) Stereoscopic viewing of an image on a body supported computer
CN107166153B (zh) 头部穿戴摄像机架
CN108474952A (zh) 头戴式电子设备
JP2004537227A (ja) イメージディスプレイ方法およびイメージディスプレイ装置
EP3779559A1 (en) Head-mounted display, and display screen, head-mounted bracket and video thereof
KR20220148921A (ko) 근육 센서들을 사용하여 안면 표정을 결정하는 안경류
CN107028613B (zh) 颈椎健康状态监测仪
US20140375947A1 (en) Headset with comfort fit temple arms
JP6774975B2 (ja) 眼球回転検出装置、電子機器及びシステム
CN203722793U (zh) 一种可穿戴设备
KR101203921B1 (ko) 안구 추적과 위치 기반 서비스를 이용한 정보 제공 장치
JPWO2016013272A1 (ja) 情報処理装置及び情報処理方法、並びに画像表示システム
CN112180600B (zh) 一种可用于超声图像显示的增强现实处理方法和系统
CN109189279A (zh) 人机交互装置
CN110275602A (zh) 人工现实系统和头戴式显示器
KR20160107552A (ko) 양안시 개선 장치
US20120038543A1 (en) Method and Apparatus to Support Miniature Image Displays
CN210626783U (zh) 可用于超声图像显示的增强现实处理系统及诊断/检测系统
CN106842565A (zh) 一种分离式可穿戴智能视觉增强设备
JP6342440B2 (ja) 眼球運動検出装置、眼球運動検出方法、およびアイウエア
WO2021246134A1 (ja) デバイス、制御方法及びプログラム
JP2023174820A (ja) ウェアラブル機器及び表示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant