CN104013424A - 一种基于深度信息的超声宽景成像方法 - Google Patents

一种基于深度信息的超声宽景成像方法 Download PDF

Info

Publication number
CN104013424A
CN104013424A CN201410231496.3A CN201410231496A CN104013424A CN 104013424 A CN104013424 A CN 104013424A CN 201410231496 A CN201410231496 A CN 201410231496A CN 104013424 A CN104013424 A CN 104013424A
Authority
CN
China
Prior art keywords
ultrasonic
ultrasonoscopy
ultrasonic probe
video camera
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410231496.3A
Other languages
English (en)
Other versions
CN104013424B (zh
Inventor
黄庆华
张强志
赵夏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN201410231496.3A priority Critical patent/CN104013424B/zh
Publication of CN104013424A publication Critical patent/CN104013424A/zh
Application granted granted Critical
Publication of CN104013424B publication Critical patent/CN104013424B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开了一种基于深度信息的超声宽景成像方法,包括以下步骤:1)采集超声图像及图像的空间位置信息;2)由于不同设备采集的信息传入计算机的时间可能存在差异,需要进行时间标定,保证深度摄像仪获取的超声探头位置与该时刻超声探头扫描获得的超声图像一一对应;3)根据所得空间坐标建立显示坐标系,将得到的每帧超声图像的空间位置信息拟合得到一个新平面或曲面,然后将每帧图像映射到这个平面或曲面上,即可得到宽景图像。本发明方法操作简便,在成像过程中不需要进行图像配准及图像坐标系变换,节约了计算时间,提高了宽景成像的实时性。

Description

一种基于深度信息的超声宽景成像方法
技术领域
本发明涉及医学超声宽景成像的技术领域,尤其是指一种基于深度信息的超声宽景成像方法。
背景技术
医学超声成像是现代临床医学的重要诊断方法之一,由于传统的超声检测由于硬件原因造成视野狭小,不能反映被检测区域的整体影像,一定程度上影响了医疗诊断的准确性和快速性。1996年weng等人为解决传统超声视野狭小这一问题,提出了超声宽景成像技术(Extended field-of-view ultrasound)。它采集一系列超声图像,利用图像配准技术实时拼接形成一幅观察视野更大的图像,方便医生诊断。
传统超声宽景成像在应用时有诸多限制,实际扫描中通常采用的方法是一种蛇形轨迹超声宽景成像方法(详见已公开的专利:一种蛇形轨迹超声宽景成像方法,公开号:CN102166122A),这种方法是采集一系列超声图像及其位置信息,然后将这些图像根据位置信息通过坐标变换到一个世界坐标系中进行宽景成像,但这种方法的空间标定和坐标变换过程比较耗时。
发明内容
本发明的目的在于克服现有技术的不足与缺陷,提供一种基于深度信息的超声宽景成像方法,省去空间标定以及坐标系变换等过程。
为实现上述目的,本发明所提供的技术方案为:一种基于深度信息的超声宽景成像方法,包括以下步骤:
1)采集超声图像及图像的空间位置信息
在图像采集过程中,要求超声探头垂直于检测组织运动,在使用超声探头扫描组织的过程中,通过配合使用深度摄像仪,使超声探头时刻保持在深度摄像仪扫描的范围内,以便实时得到超声图像及图像的空间位置信息;
2)由于不同设备采集的信息传入计算机的时间可能存在差异,需要进行时间标定,保证深度摄像仪获取的超声探头位置与该时刻超声探头扫描获得的超声图像一一对应;
3)根据所得空间坐标建立显示坐标系,将得到的每帧超声图像的空间位置信息拟合得到一个新平面或曲面,然后将每帧图像映射到这个平面或曲面上,即可得到宽景图像。
在步骤1)中,使用深度摄像仪获取超声探头处于起始位置时的轮廓,利用深度摄像仪获取探头轮廓在探头扫描运动过程中的时空特征,对这些特征点实时跟踪即可获得超声探头在各时刻所处的空间坐标位置,然后获取超声探头位置与超声图像之间的位置坐标关系,进行相应的位置坐标转换后,可得到超声图像实际的空间位置坐标,由此可以实时得到超声图像及图像的空间位置信息。
在步骤2)中,首先制作一个水槽,制作水槽时中间穿一根尼龙绳,在尼龙绳与水槽外壳相交点的外壁安装一个铁钉,要保证铁钉和尼龙绳在同一直线上且垂直于水槽表面,以获得尼龙绳所在位置的深度信息;标定准备时,将水槽注水或超声耦合剂到浸没尼龙绳为止,将水槽有铁钉一面正对深度摄像仪;标定过程中,扫描路径要垂直于尼龙绳,以保证尽可能多的获取超声探头的深度信息;将超声探头刚扫描到尼龙绳位置设为起点,将超声探头刚扫完尼龙绳位置设为终点,然后将这段距离归一化,可以获得以计算机时间为横轴,距离为纵轴的两条曲线,分别表示超声图像中超声探头的位置及深度摄像仪获取的探头位置,将这两条曲线平移进行匹配,获得最匹配曲线时的时间差即为超声图像与对应深度信息传入计算机的时间差,按所得时间差进行补偿使超声图像与对应深度信息同时传入计算机,完成时间标定。
在步骤3)中,显示坐标系的选取有如下两种选取方法:
①直接选择深度摄像仪所提供的坐标系作为显示坐标系;
②将所得坐标转换至以采集第一帧图像坐标为空间原点坐标,以扫描前进方向为正方向的坐标系为显示坐标系。
本发明与现有技术相比,具有如下优点与有益效果:
1、本发明方法操作简便,在成像过程中不需要进行图像配准及图像坐标系变换,节约了计算时间,提高了宽景成像的实时性;
2、与传统宽景成像技术相比提高了成像实时性,并且对于大角度弯曲组织成像有比较理想的效果。
附图说明
图1为本发明所述超声宽景成像方法用到的装置示意图。
图2a为本发明进行时间标定时制作的水槽的正视图。
图2b为本发明进行时间标定时制作的水槽的左视图。
图2c为本发明进行时间标定时制作的水槽的俯视图;图中:1为尼龙绳,2为有机玻璃,3为铁钉。
图3为本发明采集实际的超声图像序列的示意图。
图4为本发明实现的超声宽景成像的示意图。
具体实施方式
下面结合具体实施例对本发明作进一步说明。
如图1所示,本实施例所述的基于深度信息的超声宽景成像方法,是采用超声探头获取图像,并使用深度摄像仪(本例中深度摄像仪使用Microsoft公司开发的Kinect设备)获取该图像所对应的空间位置信息,然后在计算机中对包含位置信息的图像进行处理。其具体过程如下:
1)采集超声图像及图像的空间位置信息
图像采集过程中,要求超声探头垂直于检测组织运动。在使用超声探头扫描组织的过程中,通过配合使用深度摄像仪,使超声探头时刻保持在深度摄像仪扫描的范围内,使用深度摄像仪获取超声探头处于起始位置时的轮廓,利用深度摄像仪获取探头轮廓在探头扫描运动过程中的时空特征,对这些特征点实时跟踪即可获得探头在各时刻所处的空间坐标位置;然后获取超声探头位置与超声图像之间的位置坐标关系,进行相应的位置坐标转换后,可得到超声图像实际的空间位置坐标,由此可以实时得到超声图像及图像的空间位置信息。
2)由于不同设备采集的信息传入计算机的时间可能存在差异,需要进行时间标定,保证深度摄像仪获取的超声探头位置与该时刻超声探头扫描获得的超声图像一一对应,使传入计算机的深度信息和超声图像信息在时间上同步。首先制作一个水槽,如图2a至2c所示,制作水槽外壳使用的是有机玻璃2,中间穿一根尼龙绳1,在尼龙绳1与水槽外壳相交点的外壁安装一个铁钉3,要保证铁钉3和尼龙绳1在同一直线上且垂直于水槽表面,以获得尼龙绳1所在位置的深度信息;标定准备时,将水槽注水或超声耦合剂到浸没尼龙绳1为止,将水槽有铁钉3一面正对深度摄像仪;标定过程中,扫描路径要垂直于尼龙绳1,以保证尽可能多的获取超声探头的深度信息;将超声探头刚扫描到尼龙绳位置设为起点,将超声探头刚扫完尼龙绳位置设为终点,然后将这段距离归一化,可以获得以计算机时间为横轴,距离为纵轴的两条曲线,分别表示超声图像中探头的位置及深度摄像仪获取的探头位置,将这两条曲线平移进行匹配,获得最匹配曲线时的时间差即为超声图像与对应深度信息传入计算机的时间差,按所得时间差进行补偿使超声图像与对应深度信息同时传入计算机,完成时间标定。
3)根据所得空间坐标建立显示坐标系,将得到的每帧超声图像的空间位置信息拟合得到一个新平面或曲面,然后将每帧图像映射到这个平面或曲面上,即可得到宽景图像。所示显示坐标系的选取有如下两种选取方法:
①直接选择深度摄像仪所提供的坐标系作为显示坐标系;
②将所得坐标转换至以采集第一帧图像坐标为空间原点坐标,以扫描前进方向为正方向的坐标系为显示坐标系。
如图3所示,从测量初始位置开始,依次获取每帧图像以及图像在深度摄像仪所提供的空间坐标系中的坐标值。
如图4所示,根据每帧图像的空间位置信息拟合得到一个新曲面,然后将每帧图像映射到这个曲面上,即可得到宽景成像结果。
以上所述实施例子只为本发明较佳实施例,并非以此限制本发明的实施范围,故凡依本发明之形状、原理所作的变化,均应涵盖在本发明的保护范围内。

Claims (4)

1.一种基于深度信息的超声宽景成像方法,其特征在于,包括以下步骤:
1)采集超声图像及图像的空间位置信息
在图像采集过程中,要求超声探头垂直于检测组织运动,在使用超声探头扫描组织的过程中,通过配合使用深度摄像仪,使超声探头时刻保持在深度摄像仪扫描的范围内,以便实时得到超声图像及图像的空间位置信息;
2)由于不同设备采集的信息传入计算机的时间可能存在差异,需要进行时间标定,保证深度摄像仪获取的超声探头位置与该时刻超声探头扫描获得的超声图像一一对应;
3)根据所得空间坐标建立显示坐标系,将得到的每帧超声图像的空间位置信息拟合得到一个新平面或曲面,然后将每帧图像映射到这个平面或曲面上,即可得到宽景图像。
2.根据权利要求1所述的一种基于深度信息的超声宽景成像方法,其特征在于:在步骤1)中,使用深度摄像仪获取超声探头处于起始位置时的轮廓,利用深度摄像仪获取探头轮廓在探头扫描运动过程中的时空特征,对这些特征点实时跟踪即可获得超声探头在各时刻所处的空间坐标位置,然后获取超声探头位置与超声图像之间的位置坐标关系,进行相应的位置坐标转换后,可得到超声图像实际的空间位置坐标,由此可以实时得到超声图像及图像的空间位置信息。
3.根据权利要求1所述的一种基于深度信息的超声宽景成像方法,其特征在于:在步骤2)中,首先制作一个水槽,制作水槽时中间穿一根尼龙绳,在尼龙绳与水槽外壳相交点的外壁安装一个铁钉,要保证铁钉和尼龙绳在同一直线上且垂直于水槽表面,以获得尼龙绳所在位置的深度信息;标定准备时,将水槽注水或超声耦合剂到浸没尼龙绳为止,将水槽有铁钉一面正对深度摄像仪;标定过程中,扫描路径要垂直于尼龙绳,以保证尽可能多的获取超声探头的深度信息;将超声探头刚扫描到尼龙绳位置设为起点,将超声探头刚扫完尼龙绳位置设为终点,然后将这段距离归一化,可以获得以计算机时间为横轴,距离为纵轴的两条曲线,分别表示超声图像中超声探头的位置及深度摄像仪获取的探头位置,将这两条曲线平移进行匹配,获得最匹配曲线时的时间差即为超声图像与对应深度信息传入计算机的时间差,按所得时间差进行补偿使超声图像与对应深度信息同时传入计算机,完成时间标定。
4.根据权利要求1所述的一种基于深度信息的超声宽景成像方法,其特征在于:在步骤3)中,显示坐标系的选取有如下两种选取方法:
①直接选择深度摄像仪所提供的坐标系作为显示坐标系;
②将所得坐标转换至以采集第一帧图像坐标为空间原点坐标,以扫描前进方向为正方向的坐标系为显示坐标系。
CN201410231496.3A 2014-05-28 2014-05-28 一种基于深度信息的超声宽景成像方法 Expired - Fee Related CN104013424B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410231496.3A CN104013424B (zh) 2014-05-28 2014-05-28 一种基于深度信息的超声宽景成像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410231496.3A CN104013424B (zh) 2014-05-28 2014-05-28 一种基于深度信息的超声宽景成像方法

Publications (2)

Publication Number Publication Date
CN104013424A true CN104013424A (zh) 2014-09-03
CN104013424B CN104013424B (zh) 2016-01-20

Family

ID=51430629

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410231496.3A Expired - Fee Related CN104013424B (zh) 2014-05-28 2014-05-28 一种基于深度信息的超声宽景成像方法

Country Status (1)

Country Link
CN (1) CN104013424B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104706385A (zh) * 2015-01-06 2015-06-17 华南理工大学 一种超声弹性宽景成像方法及装置
CN104856720A (zh) * 2015-05-07 2015-08-26 东北电力大学 一种基于rgb-d传感器的机器人辅助超声扫描系统
CN105738477A (zh) * 2016-02-24 2016-07-06 飞依诺科技(苏州)有限公司 超声扫描的宽景成像方法及装置
CN106404922A (zh) * 2016-10-11 2017-02-15 华南理工大学 一种超声成像弧度测量系统准确性验证装置
CN108778143A (zh) * 2016-03-16 2018-11-09 皇家飞利浦有限公司 用于将腹腔镜图像与超声图像进行叠加的计算设备
CN112545551A (zh) * 2019-09-10 2021-03-26 通用电气精准医疗有限责任公司 用于医学成像设备的方法和系统
CN112991166A (zh) * 2019-12-16 2021-06-18 无锡祥生医疗科技股份有限公司 智能辅助导引方法、超声设备及存储介质

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104706385A (zh) * 2015-01-06 2015-06-17 华南理工大学 一种超声弹性宽景成像方法及装置
CN104706385B (zh) * 2015-01-06 2017-06-20 华南理工大学 一种超声弹性宽景成像方法及装置
CN104856720A (zh) * 2015-05-07 2015-08-26 东北电力大学 一种基于rgb-d传感器的机器人辅助超声扫描系统
CN104856720B (zh) * 2015-05-07 2017-08-08 东北电力大学 一种基于rgb‑d传感器的机器人辅助超声扫描系统
CN105738477A (zh) * 2016-02-24 2016-07-06 飞依诺科技(苏州)有限公司 超声扫描的宽景成像方法及装置
CN105738477B (zh) * 2016-02-24 2018-08-17 飞依诺科技(苏州)有限公司 超声扫描的宽景成像方法及装置
CN108778143A (zh) * 2016-03-16 2018-11-09 皇家飞利浦有限公司 用于将腹腔镜图像与超声图像进行叠加的计算设备
CN108778143B (zh) * 2016-03-16 2022-11-01 皇家飞利浦有限公司 用于将腹腔镜图像与超声图像进行叠加的计算设备
CN106404922A (zh) * 2016-10-11 2017-02-15 华南理工大学 一种超声成像弧度测量系统准确性验证装置
CN106404922B (zh) * 2016-10-11 2023-04-21 华南理工大学 一种超声成像弧度测量系统准确性验证装置
CN112545551A (zh) * 2019-09-10 2021-03-26 通用电气精准医疗有限责任公司 用于医学成像设备的方法和系统
CN112991166A (zh) * 2019-12-16 2021-06-18 无锡祥生医疗科技股份有限公司 智能辅助导引方法、超声设备及存储介质

Also Published As

Publication number Publication date
CN104013424B (zh) 2016-01-20

Similar Documents

Publication Publication Date Title
CN104013424B (zh) 一种基于深度信息的超声宽景成像方法
CN110032278B (zh) 一种人眼感兴趣物体的位姿识别方法、装置及系统
CN109297413B (zh) 一种大型筒体结构视觉测量方法
CN104287946B (zh) 盲人避障提示装置及方法
CN109544628B (zh) 一种指针式仪表的准确读数识别系统及方法
CN108012143B (zh) 双目摄像头标定方法及装置
CN110599540A (zh) 多视点相机下的实时三维人体体型与姿态重建方法及装置
CN110547872B (zh) 手术导航注册系统
CN102253057B (zh) 内窥镜系统及使用内窥镜系统的测量方法
CN103750859B (zh) 基于位置信息的超声宽景成像方法
CN104134188A (zh) 一种基于二维和三维摄像机融合的三维视觉信息获取方法
CN103829973A (zh) 一种远程控制的超声探头扫描系统及其方法
CN104537616A (zh) 鱼眼图像畸变的校正方法
CN109859271B (zh) 一种水下摄像机与前视声纳的联合标定方法
CN113240726B (zh) 一种内窥镜下光学目标尺寸实时测量方法
CN112907631B (zh) 一种引入反馈机制的多rgb相机实时人体动作捕捉系统
CN105486751A (zh) 一种设备缺陷综合检测系统
CN108234966A (zh) 一种基于嵌入式平台的实时全景视频拼接系统
CN103674963A (zh) 一种基于数字全景摄像的隧道检测装置及其检测方法
CN104034269A (zh) 一种单目视觉测量方法与装置
CN103584885B (zh) 一种基于定位导航穿刺针的自由臂超声标定方法
CN103528562A (zh) 一种基于单摄像头检测人眼与显示终端距离的方法
CN104706385A (zh) 一种超声弹性宽景成像方法及装置
CN110288653A (zh) 一种多角度超声图像融合方法、系统及电子设备
CN104257396A (zh) 基于ct的宽幅面动态三维人体扫描系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160120

Termination date: 20210528