CN106023078A - 一种dr影像的拼接方法 - Google Patents

一种dr影像的拼接方法 Download PDF

Info

Publication number
CN106023078A
CN106023078A CN201610331276.7A CN201610331276A CN106023078A CN 106023078 A CN106023078 A CN 106023078A CN 201610331276 A CN201610331276 A CN 201610331276A CN 106023078 A CN106023078 A CN 106023078A
Authority
CN
China
Prior art keywords
image
curve
pix
registration
joining method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610331276.7A
Other languages
English (en)
Other versions
CN106023078B (zh
Inventor
刘金虎
王东辉
加冯刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Perlove Medical Equipment Co Ltd
Original Assignee
Nanjing Perlove Medical Equipment Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Perlove Medical Equipment Co Ltd filed Critical Nanjing Perlove Medical Equipment Co Ltd
Priority to CN201610331276.7A priority Critical patent/CN106023078B/zh
Publication of CN106023078A publication Critical patent/CN106023078A/zh
Application granted granted Critical
Publication of CN106023078B publication Critical patent/CN106023078B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及图像处理技术领域,尤其涉及一种DR影像的拼接方法,该方法包括:采集图像:DR系统采用正直摄影的方式采集图像;然后图像配准:首先将DR系统采集的图像数据在低分辨率下进行粗略配准,然后将粗略配准后的图像数据在高分辨率下进行精细配准;最后进行图像融合:即采用基于多频带的曲线进行融合,消除图像中的重影。本发明通过使用DR系统进行正直摄影,拍摄场景简单;通过使用粗略配准和精细配准对DR系统的X光透视效应具有较好的容忍度;图像融合技术针对现有拼接方法存在伪影的问题,采用基于多频带的曲线融合有效的避免了伪影,即很好的消除了重影。

Description

一种DR影像的拼接方法
技术领域
本发明涉及图像处理技术领域,尤其涉及一种DR影像的拼接方法。
背景技术
随着医疗技术的不断发展,直接数字化X射线摄影系统(Digital Radiography即DR系统)在诊断和医学中有着广泛的应用。但是,当前的临床DR系统只能提供有限的视野,这在很多情况下存在限制,例如:在人体脊椎或长骨等骨科诊断和手术治疗中,获取完整的解剖结构图像是至关重要的,当医生需要观察一幅图像边缘的区域时要根据自己的就诊经验对多幅在不同时刻、具有重叠区域的不同部位图片进行手工拼接或是使用photoshop等第三方工具进行拼接。虽然研究者探索出各种图像拼接算法,但是多用于相机照片的拼接。相机照片跟DR系统的成像原理有很大的不同,因此造成了X光影像配准的困难。当前的拼接算法都是从相机拼接中移植过来,没有考虑到X光的透视影响。而且现有的图像拼接方法对重叠度要求较高,较高的重叠度意味着曝光次数的增多,对病人危害极大。而且对重叠度要求固定,不能灵活的处理重叠度不同的影像。同时现有的X光拼接算法处理旋转、缩放,加剧算法的复杂性从而算法运行时间指数级别增加,但实际DR拍摄中并不存在这么复杂的拍摄场景,99%采用正直摄影。现有的拼接融合算法中还存在很明显的伪影。
发明内容
本发明的目的是克服现有技术存在的缺陷,提供一种快速、拼接流程简单的DR影像的拼接方法。
实现本发明目的的技术方案是:一种DR影像的拼接方法,该方法包括如下步骤:
1)采集图像:DR系统采用正直摄影的方式采集图像;
2)图像配准:首先将DR系统采集的图像数据在低分辨率下进行粗略配准,然后将粗略配准后的图像数据在高分辨率下进行精细配准;
3)图像融合:对步骤2)处理后的图像,采用基于多频带的曲线进行融合,消除图像中的重影。
作为本发明的优化方案,步骤1)中采集图像时,DR系统的射线主光轴与像平面垂直,拍摄时的基线与像平面平行。
作为本发明的优化方案,采用DR系统对图像进行重复拍摄,图像成像的重叠部分大于两次拍摄时射线源距离的十分之一。
作为本发明的优化方案,步骤2)中进行粗略配准时,首先将DR系统采集的图像的分辨率降低,然后结合canny边缘算子和相位相关法得出图像在低分辨率下的粗略配准。
作为本发明的优化方案,进行精细配准时,首先提高粗略配准后图像的分辨率,使用MLNC测度函数来衡量两幅图像之间的相似度。
作为本发明的优化方案,使用MLNC测度函数来衡量两幅图像之间的相似度时,首先将两幅图像的重叠部分细分为很多窗口,然后针对每个窗口求取归一化相关系数,将所有取得的归一化相关系数求平均值。
作为本发明的优化方案,步骤3)中对图像进行融合时,在高频部分使用曲率大的曲线,融合曲线的数学模型如公式(1)所示;在低频部分使用曲率小的曲线,融合曲线的数学模型如公式(2)所示,中频部分融合曲线的数学模型如公式(3)所示;
r a t i o = 8 * ( i d i s t ) 4 , i &le; c e n t e r 1 - 8 * ( i - d i s t d i s t ) 4 , c e n t e r < i &le; d i s t - - - ( 1 )
r a t i o = 2 * ( i d i s t ) 2 , i &le; c e n t e r 1 - 2 * ( i - d i s t d i s t ) 2 , c e n t e r < i &le; d i s t - - - ( 2 )
r a t i o = 4 * ( i d i s t ) 3 , i &le; c e n t e r 1 - 4 * ( i - d i s t d i s t ) 3 , c e n t e r < i &le; d i s t - - - ( 3 )
其中,ratio表示融合曲线的曲率,i表示待融合的像素点距离重叠区域上边界的距离,dist表示重叠区域上下边界的距离,center为dist的中心位置,融合结果的像素值为:
Pixresult=PixA*ratio+PixB*(1-ratio) (4)
其中,Pixresult为重叠区域某一点的融合结果像素值,PixA为该点在图像A中对应的像素值,PixB为该点在图像B中对应的像素值。
本发明具有积极的效果:1)本发明通过使用DR系统进行正直摄影,拍摄场景简单;
2)本发明通过使用粗略配准和精细配准对DR系统的X光透视效应具有较好的容忍度;
3)本发明的图像融合技术针对现有拼接方法存在伪影的问题,采用基于多频带的曲线融合有效的避免了伪影,即很好的消除了重影。
附图说明
为了使本发明的内容更容易被清楚地理解,下面根据具体实施例并结合附图,对本发明作进一步详细的说明,其中:
图1是本发明的影像采集场景图;
图2是本发明的影像透视图;
图3是本发明的配准算法流程图;
图4是多频带融合曲线实施例图;
图5是多频带融合曲线实施例图。
具体实施方式
如图1-图5所示,本发明公开了一种DR影像的拼接方法,该方法包括如下步骤:
1)采集图像:DR系统采用正直摄影的方式采集图像;
2)图像配准:首先将DR系统采集的图像数据在低分辨率下进行粗略配准,然后将粗略配准后的图像数据在高分辨率下进行精细配准;
3)图像融合:对步骤2)处理后的图像,采用基于多频带的曲线进行融合,消除图像中的重影。
如图1所示,在步骤1)中采集图像时,DR系统的射线主光轴与像平面垂直,拍摄时的基线与像平面平行。
采用DR系统对图像进行重复拍摄,图像成像的重叠部分大于两次拍摄时射线源距离的十分之一,从图1看,重叠部分大于h2-h1的十分之一,其中,几次拍摄中不要求重叠部分相同。
如图2所示,如果o1、o2是两个相机,只会看到人体的表面,通过相机从不同角度观察人体的表面都是一样的结果,即一个像素点对应表面一点。当前的拼接算法都是根据相机成像原理对X光影像拼接,很少有人在拼接中考虑到透视的影响;如果图2中o1、o2为射线源,则图中细节部分的直线在像1中为直线,像2中为点,X影像中的一点代表一X线穿过人体时一条路径,传统的方法很难配准。
如图3所示,在步骤2)中进行粗略配准时,首先将DR系统采集的图像的分辨率降低,然后结合canny边缘算子和相位相关法得出图像在低分辨率下的粗略配准。由于根据实际经验和对X光影像的观察发现,虽然在不同角度对人体同一个关键解剖结构拍片,得到的影像虽然在细节中发生了很大的变化,并且这种变化并非刚体变换,这也是导致传统的针对相机的配准方法不能用于X光影像配准的重要原因,但是如果将分辨率降低,低分辨率图像包含较少的细节,利用低分辨率图像进行粗略配准对X光透视效应有较好的容忍度。首先将将图像分辨率降低,在低分辨率下保留的细节部分减少,此时结合canny边缘算子和相位相关法就可以很容易得出在低分辨率下的粗略配准。
粗略配准由于是在低分辨率下进行的,比如1/8的低分辨率下偏移1个像素将导致原图偏移8个像素,因此进行精细配准是需要的。粗略配准阶段将精细配准的范围缩小,精细配准只需要在粗略配准的结果上、下微调,当重叠部分相似度达到最大时,就获得最佳的匹配。进行精细配准时,首先提高粗略配准后图像的分辨率,使用MLNC测度函数来衡量两幅图像之间的相似度。使用MLNC测度函数来衡量两幅图像之间的相似度时,首先将两幅图像的重叠部分细分为很多窗口,然后针对每个窗口求取归一化相关系数,将所有取得的归一化相关系数求平均值。由于X光影像存在透视变形,不可能存在一模一样的重叠部分,甚至相差很大,利用传统的相似度衡量函数无法胜任该工作。本发明提出了使用MLNC(mean oflocal normalize correlation)测度函数来衡量两幅图像之间的相似度,这种相似度评测函数对影像的局部变形有很好的容忍度,其中公式(5)中的nc为两幅图像重叠部分之间归一化相关系数,如果针对整个重叠部分使用归一化相关系数,它是非线性的,一块小区域的完全不同但是其他所有区域都相同都会导致相关性很低,公式(6)的MLNC将重叠部分细分为很多窗口,然后针对每个窗口求取归一化相关系数,将所有取得的归一化相关系数求均值,这样将归一化相关系数转化为线性的,如果有一个窗口完全不一样,对整体匹配的影响权重不至于过大。
n c = &Sigma; m &Sigma; n &lsqb; ( r - r &OverBar; ) ( f - f &OverBar; ) &rsqb; &Sigma; m &Sigma; n ( r - r &OverBar; ) 2 &Sigma; m &Sigma; n ( f - f &OverBar; ) 2 - - - ( 5 )
M L N C = 1 M &Sigma; i = 1 M nc i - - - ( 6 )
其中,m代表窗口的长度,n代表窗口的宽度,M代表窗口的个数。
如果使用传统的“渐进渐出”的融合方法会出现重影,经过分析,重影是由重叠区域的高频部分引起的,但是如果整幅图使用曲率很大的曲线可以消除重影,但是此时也消除了图像的细节部分,为了在消除重影的同时能保留更多的信息,在高频部分采用曲率更大的曲线,低频部分使用曲率小的曲线,融合曲线如图4和5所示。
融合曲线数学模型:
低频部分:
r a t i o = 2 * ( i d i s t ) 2 , i &le; c e n t e r 1 - 2 * ( i - d i s t d i s t ) 2 , c e n t e r < i &le; d i s t - - - ( 1 )
中频部分:
r a t i o = 4 * ( i d i s t ) 3 , i &le; c e n t e r 1 - 4 * ( i - d i s t d i s t ) 3 , c e n t e r < i &le; d i s t - - - ( 2 )
高频部分:
r a t i o = 8 * ( i d i s t ) 4 , i &le; c e n t e r 1 - 8 * ( i - d i s t d i s t ) 4 , c e n t e r < i &le; d i s t - - - ( 3 )
结合图4中A、B两幅图像的重叠区域,i表示待融合的像素点距离重叠区域上边界的距离,dist为重叠区域上下边界距离,center为dist的中心位置。融合结果的像素值为:
Pixresult=PixA*ratio+PixB*(1-ratio) (4)
其中,Pixresult为重叠区域某一点的融合结果像素值,PixA该点在图像A中对应的像素值,PixB为该点在图像B中对应的像素值,ratio为曲线曲率。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种DR影像的拼接方法,其特征在于:所述方法包括如下步骤:
1)采集图像:DR系统采用正直摄影的方式采集图像;
2)图像配准:首先将DR系统采集的图像数据在低分辨率下进行粗略配准,然后将粗略配准后的图像数据在高分辨率下进行精细配准;
3)图像融合:对步骤2)处理后的图像,采用基于多频带的曲线进行融合,消除图像中的重影。
2.根据权利要求1所述的一种DR影像的拼接方法,其特征在于:所述的步骤1)中采集图像时,DR系统的射线主光轴与像平面垂直,拍摄时的基线与像平面平行。
3.根据权利要求2所述的一种DR影像的拼接方法,其特征在于:采用DR系统对图像进行重复拍摄,图像成像的重叠部分大于两次拍摄时射线源距离的十分之一。
4.根据权利要求1所述的一种DR影像的拼接方法,其特征在于:所述的步骤2)中进行粗略配准时,首先将DR系统采集的图像的分辨率降低,然后结合canny边缘算子和相位相关法得出图像在低分辨率下的粗略配准。
5.根据权利要求4所述的一种DR影像的拼接方法,其特征在于:进行精细配准时,首先提高粗略配准后图像的分辨率,使用MLNC测度函数来衡量两幅图像之间的相似度。
6.根据权利要求5所述的一种DR影像的拼接方法,其特征在于:使用MLNC测度函数来衡量两幅图像之间的相似度时,首先将两幅图像的重叠部分细分为很多窗口,然后针对每个窗口求取归一化相关系数,将所有取得的归一化相关系数求平均值。
7.根据权利要求1所述的一种DR影像的拼接方法,其特征在于:在步骤3)中对图像进行融合时,在高频部分使用曲率大的曲线,融合曲线的数学模型如公式(1)所示;在低频部分使用曲率小的曲线,融合曲线的数学模型如公式(2)所示,中频部分融合曲线的数学模型如公式(3)所示;
r a t i o = 8 * ( i d i s t ) 4 , i &le; c e n t e r 1 - 8 * ( i - d i s t d i s t ) 4 , c e n t e r < i &le; d i s t - - - ( 1 )
r a t i o = 2 * ( i d i s t ) 2 , i &le; c e n t e r 1 - 2 * ( i - d i s t d i s t ) 2 , c e n t e r < i &le; d i s t - - - ( 2 )
r a t i o = 4 * ( 1 d i s t ) 3 , i &le; c e n t e r 1 - 4 * ( i - d i s t d i s t ) 3 , c e n t e r < i &le; d i s t - - - ( 3 )
其中,ratio表示融合曲线的曲率,i表示待融合的像素点距离重叠区域上边界的距离,dist表示重叠区域上下边界的距离,center为dist的中心位置,融合结果的像素值为:
Pixresult=PixA*ratio+PixB*(1-ratio) (4)
其中,Pixresult为重叠区域某一点的融合结果像素值,PixA为该点在图像A中对应的像素值,PixB为该点在图像B中对应的像素值。
CN201610331276.7A 2016-05-18 2016-05-18 一种dr影像的拼接方法 Active CN106023078B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610331276.7A CN106023078B (zh) 2016-05-18 2016-05-18 一种dr影像的拼接方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610331276.7A CN106023078B (zh) 2016-05-18 2016-05-18 一种dr影像的拼接方法

Publications (2)

Publication Number Publication Date
CN106023078A true CN106023078A (zh) 2016-10-12
CN106023078B CN106023078B (zh) 2019-04-23

Family

ID=57098829

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610331276.7A Active CN106023078B (zh) 2016-05-18 2016-05-18 一种dr影像的拼接方法

Country Status (1)

Country Link
CN (1) CN106023078B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110035687A (zh) * 2016-11-30 2019-07-19 卡普索影像公司 对使用胶囊相机所撷取的图像进行图像拼接的方法及装置
CN111815514A (zh) * 2020-06-17 2020-10-23 东软医疗系统股份有限公司 影像获取方法、装置、可读存储介质及影像采集设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5917963A (en) * 1995-09-21 1999-06-29 Canon Kabushiki Kaisha Image processing apparatus and image processing method
CN103198501A (zh) * 2013-04-09 2013-07-10 上海理工大学 一种牙齿全景图像自动重构方法
CN103226822A (zh) * 2013-05-15 2013-07-31 清华大学 医疗影像拼接方法
CN103295209A (zh) * 2012-02-24 2013-09-11 深圳市蓝韵实业有限公司 Dr图像的拼接方法及系统
CN103514591A (zh) * 2012-06-15 2014-01-15 深圳市蓝韵实业有限公司 基于orb配准的dr图像拼接方法及系统
CN104732482A (zh) * 2015-03-30 2015-06-24 中国人民解放军63655部队 一种基于控制点的多分辨率图像拼接方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5917963A (en) * 1995-09-21 1999-06-29 Canon Kabushiki Kaisha Image processing apparatus and image processing method
CN103295209A (zh) * 2012-02-24 2013-09-11 深圳市蓝韵实业有限公司 Dr图像的拼接方法及系统
CN103514591A (zh) * 2012-06-15 2014-01-15 深圳市蓝韵实业有限公司 基于orb配准的dr图像拼接方法及系统
CN103198501A (zh) * 2013-04-09 2013-07-10 上海理工大学 一种牙齿全景图像自动重构方法
CN103226822A (zh) * 2013-05-15 2013-07-31 清华大学 医疗影像拼接方法
CN104732482A (zh) * 2015-03-30 2015-06-24 中国人民解放军63655部队 一种基于控制点的多分辨率图像拼接方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110035687A (zh) * 2016-11-30 2019-07-19 卡普索影像公司 对使用胶囊相机所撷取的图像进行图像拼接的方法及装置
CN110035687B (zh) * 2016-11-30 2022-02-11 卡普索影像公司 对使用胶囊相机所撷取的图像进行图像拼接的方法及装置
CN111815514A (zh) * 2020-06-17 2020-10-23 东软医疗系统股份有限公司 影像获取方法、装置、可读存储介质及影像采集设备

Also Published As

Publication number Publication date
CN106023078B (zh) 2019-04-23

Similar Documents

Publication Publication Date Title
JP5026939B2 (ja) 画像処理装置およびそのプログラム
KR101747300B1 (ko) 영상을 처리하는 방법, 이를 수행하는 영상처리장치 및 의료영상시스템
US20100290707A1 (en) Image acquisition method, device and radiography system
JP2000342558A (ja) 画像の位置合わせ処理装置及び画像間演算処理装置
US11288848B2 (en) Three-dimensional ultrasound image display method
WO2009055913A1 (en) System and method for image stitching
CN103295209A (zh) Dr图像的拼接方法及系统
US20230306657A1 (en) Noise suppression using deep convolutional networks
Florkow et al. The impact of MRI-CT registration errors on deep learning-based synthetic CT generation
CN103514591A (zh) 基于orb配准的dr图像拼接方法及系统
Paniagua et al. Validation of CBCT for the computation of textural biomarkers
CN106023078A (zh) 一种dr影像的拼接方法
US10650561B2 (en) Composite radiographic image that corrects effects of parallax distortion
Preuhs et al. Over-exposure correction in CT using optimization-based multiple cylinder fitting
CN111275617B (zh) 一种abus乳腺超声全景图的自动拼接方法、系统和存储介质
JP2007037864A (ja) 医用画像処理装置
Hopp et al. Segmentation of 3D ultrasound computer tomography reflection images using edge detection and surface fitting
Luckner et al. Towards full-body x-ray images
Minet et al. Diagnosis of rheumatoid arthritis using light: correction of motion artefacts and color visualization of multispectral images
JP2004216007A (ja) 画像処理装置、画像処理方法及びプログラム
KR101034270B1 (ko) 고대조도 단층영상을 재구성하기 위한 장치 및 그 방법
Ladefoged et al. Automatic correction of dental artifacts in PET/MRI
KR100399051B1 (ko) 흉부 단순 엑스선 영상에서 늑골의 경계를 자동으로추출하는 방법
KR101835411B1 (ko) 디지털 단층영상합성 시스템에 최적화된 3d의료영상 분석을 위한 인터페이스 시스템 및 그것의 제어 방법
EP2285282B1 (en) Spatial orientation method of an immobilized subject

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder

Address after: 211100 No.97 and 99, Wangxi Road, Jiangning District, Nanjing, Jiangsu Province

Patentee after: NANJING PERLOVE MEDICAL EQUIPMENT Co.,Ltd.

Address before: 211112 No. 168 Kaiyuan Road, Science Park, Jiangning District, Jiangsu, Nanjing

Patentee before: NANJING PERLOVE MEDICAL EQUIPMENT Co.,Ltd.

CP02 Change in the address of a patent holder