CN102651145B - 股骨三维模型可视化方法 - Google Patents

股骨三维模型可视化方法 Download PDF

Info

Publication number
CN102651145B
CN102651145B CN201210099633.3A CN201210099633A CN102651145B CN 102651145 B CN102651145 B CN 102651145B CN 201210099633 A CN201210099633 A CN 201210099633A CN 102651145 B CN102651145 B CN 102651145B
Authority
CN
China
Prior art keywords
femur
dimensional model
image
normotopia
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201210099633.3A
Other languages
English (en)
Other versions
CN102651145A (zh
Inventor
张斌
孙金玮
孙绍斌
孟尚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Institute of Technology
Harbin University of Science and Technology
Original Assignee
Harbin Institute of Technology
Harbin University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Institute of Technology, Harbin University of Science and Technology filed Critical Harbin Institute of Technology
Priority to CN201210099633.3A priority Critical patent/CN102651145B/zh
Publication of CN102651145A publication Critical patent/CN102651145A/zh
Application granted granted Critical
Publication of CN102651145B publication Critical patent/CN102651145B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)

Abstract

股骨三维模型可视化方法,涉及图像处理领域,它为了解决现有采用直接数字X光图像DR无法获取三维空间信息,而采用CT由于体积庞大不适于在突发情况下的骨折影像显示的问题,它包括以下步骤:步骤一、建立通用股骨三维模型;步骤二、对待建模的股骨正位DR图像和股骨侧位DR图像进行预处理;步骤三、确定正位图像的配准变换关系,确定侧位图像的配准变换关系;步骤四、实现待建模的股骨的三维姿态估计,完成股骨三维模型姿态的可视化。本发明利用双平面DR图像实现股骨的三维模型可视化,成像迅速。适用于股骨三维影像显示。

Description

股骨三维模型可视化方法
技术领域
本发明涉及图像处理领域。
背景技术
股骨是一种典型的人体长骨,具有不规则的空间结构,由两端的松质骨和中间的管状皮质骨构成。股骨三维模型的可视化,对于股骨骨折的术前诊断和手术计划的制定都具有极其重要的意义。
目前国内骨折的影像显示主要采用直接数字X光图像DR(Digital Radiography),但该方法最大的缺陷在于二维投影成像,导致影像重叠,丢失了大量三维的空间信息,而这些三维信息对于医生的临床诊断恰恰是十分重要的;另一方面,现有的医学三维可视化技术如计算机断层扫描成像CT(Computer Tomography)虽然可以获得研究对象的精确三维结构形态,但其体积庞大,不适于在突发情况下的骨折影像显示。
发明内容
本发明目的是为了解决现有采用直接数字X光图像DR无法获取三维空间信息,而采用CT由于体积庞大不适于在突发情况下的股骨影像显示的问题,提供了一种股骨三维模型可视化方法。
本发明所述股骨三维模型可视化方法,它包括以下步骤:
步骤一、建立通用股骨三维模型,通过通用股骨三维模型的正位投影获取通用股骨的正位股骨三维模型投影轮廓,通过通用股骨三维模型的侧位投影获取通用股骨的侧位股骨三维模型投影轮廓;
步骤二、对待建模的股骨正位DR图像和股骨侧位DR图像进行预处理,提取股骨正位DR图像中的股骨边缘轮廓获得正位股骨边缘轮廓,提取股骨侧位DR图像中的股骨边缘轮廓获得侧位股骨边缘轮廓;
步骤三、对步骤二提取的待建模的股骨正位DR图像的边缘轮廓与步骤一所述的通用正位股骨三维模型投影轮廓进行仿射配准,确定正位图像的配准变换关系;
对步骤二提取的待建模的股骨侧位DR图像的边缘轮廓与步骤一所述的通用侧位股骨三维模型投影轮廓进行仿射配准,确定侧位图像的配准变换关系;
步骤四、根据步骤三获得的正位图像的配准变换关系和侧位图像的配准变换关系确定股骨三维模型的姿态,实现股骨的三维模型的可视化。
本发明的优点:相对于已有的医学三维可视化方法,本发明利用双平面DR图像实现股骨的三维模型可视化,成本低,操作简单,有害辐射小,重建图像比较迅速,能为股骨粉碎性骨折手术的诊断和手术计划的制定提供可靠的三维影像学信息。
采用本发明所述方法使骨折断端移位情况显示得更加立体直观,医生不必再凭借经验估计骨折的类型和损伤的情况,减少了漏检和误诊的发生率,对术前手术计划的制定和手术方式的选择有重要意义。
附图说明
图1为本发明的框图示意图,图2至图5为具体实施方式四中能量泛函与边界曲线关系的示意图,其中图2是边界曲线包含边缘轮廓的示意图,图3是边界曲线在边缘轮廓内部的示意图,图4是边界曲线穿过边缘轮廓的示意图,图5是边界曲线对应边缘轮廓的示意图,图6为具体实施方式二中三维点与其在二维图像上的投影点之间变换关系的示意图,图7为具体实施方式二中通用股骨的三维模型示意图,图8为具体实施方式五中仿射配准前待建模的股骨正位DR图像轮廓和通用股骨正位投影轮廓的示意图,图中粗线表示待建模的股骨正位DR图像轮廓,细线表示通用股骨正位投影轮廓;图9为具体实施方式五中仿射配准后待建模的股骨正位DR图像轮廓和通用股骨正位投影轮廓的示意图,图10是三维姿态估计后的股骨三维模型示意图。
具体实施方式
具体实施方式一:结合图1说明本实施方式,本实施方式所述股骨三维模型可视化方法,它包括以下步骤:
步骤一、建立通用股骨三维模型,通过通用股骨三维模型的正位投影获取通用股骨的正位股骨三维模型投影轮廓,通过通用股骨三维模型的侧位投影获取通用股骨的侧位股骨三维模型投影轮廓;
步骤二、对待建模的股骨正位DR图像和股骨侧位DR图像进行预处理,提取股骨正位DR图像中的股骨边缘轮廓获得正位股骨边缘轮廓,提取股骨侧位DR图像中的股骨边缘轮廓获得侧位股骨边缘轮廓;
步骤三、对步骤二提取的待建模的股骨正位DR图像的边缘轮廓与步骤一所述的通用正位股骨三维模型投影轮廓进行仿射配准,确定正位图像的配准变换关系;
对步骤二提取的待建模的股骨侧位DR图像的边缘轮廓与步骤一所述的通用侧位股骨三维模型投影轮廓进行仿射配准,确定侧位图像的配准变换关系;
步骤四、根据步骤三获得的正位图像的配准变换关系和侧位图像的配准变换关系确定股骨三维模型的姿态,实现股骨的三维模型的可视化。
具体实施方式二:结合图6和图7说明本实施方式,本实施方式是对实施方式一所述股骨三维模型可视化方法的进一步限定,步骤一中建立通用股骨三维模型,通过通用股骨三维模型进行正侧位投影获取通用股骨三维模型投影轮廓的过程为:
步骤一一、选取一个通用股骨对其进行CT扫描,获取通用股骨的CT片,根据通用股骨的CT片构建出通用股骨三维模型;
步骤一二、对通用股骨三维模型进行正位投影获取正位通用股骨三维模型的投影轮廓,对通用股骨三维模型进行侧位投影获取侧位通用股骨三维模型的投影轮廓,具体为:
三维点与其在二维图像上的投影点之间有如下变换关系:
u v 1 = A 1 A 2 X w Y w Z w 1 - - - ( 1 )
其中(Xw,Yw,Zw)是点P在世界坐标系下的三维坐标;(u,v)是该点二维像素坐标系下的二维投影坐标;A1为内参数矩阵,描述了相机几何及光学特性参数;A2为外参数矩阵,描述了相机在世界坐标系的位置和姿态。
这里设模板平面在世界坐标系的Zw=0的平面上,不失一般性。则(1)式能改写为:
u v 1 = A 1 r 1 r 2 r 3 t X w Y w 0 1 = A 1 r 1 r 2 t X w Y w 1 - - - ( 2 )
其中r1,r2,r3,t分别是矩阵A2的列向量,即A2=[r1 r2 r3 t]。由于每幅图像都能确定一个3*3的单应性矩阵H,该单应性矩阵能通过棋盘标定法计算来确定,并根据单应性矩阵的性质,有如下关系式:
H = h 1 h 2 h 3 = η A 1 r 1 r 2 t - - - ( 3 )
其中η为任意标量。旋转矩阵的性质具有如下两个性质:
r 1 T r 2 = 0 | | r 1 | | = | | r 2 | | = 1 - - - ( 4 )
由(3)式可得:
r 1 = η - 1 A 1 - 1 h 1 r 2 = η - 1 A 1 - 1 h 2 - - - ( 5 )
将(5)式代入(4)式中,每个图像就能获得以下两个对内参数矩阵的约束:
h 1 T A 1 - T A 1 - 1 h 2 = 0 h 1 T A 1 - T A 1 - 1 h 1 = h 2 T A 1 - T A 1 - 1 h 2 - - - ( 6 )
由公式(6)即可求解出内参数矩阵A1。再根据A1和单应性矩阵H能进一步计算出外参数r1,r2,r3,t:
r 1 = η - 1 A 1 - 1 h 1 r 2 = η - 1 A 1 - 1 h 2 r 3 = r 1 × r 2 t = η - 1 A 1 - 1 h 3 - - - ( 7 ) ;
将公式(6)和(7)得到的参数代入公式(2),得到三维点在二维图像上对应的投影点;
对通用股骨三维模型进行正位投影,所述正位投影的外边缘点构成正位股骨三维模型的投影轮廓;
对通用股骨三维模型进行侧位投影,所述侧位投影的外边缘点构成侧位股骨三维模型的投影轮廓。
本发明对棋盘标定法进行了改进,采用覆细铜线网格构成的PCB板取代经典的黑白格棋盘作为标定板,以适用于X射线下的拍摄环境,利用以上标定的参数,分别对通用模型进行正位投影和侧位投影,获得投影轮廓,完成对通用股骨三维模型投影轮廓的获取。
具体实施方式三:本实施方式是对实施方式一所述股骨三维模型可视化方法的进一步限定,步骤二中对待建模的股骨正位DR图像和股骨侧位DR图像进行预处理的过程为:对待建模的股骨正位DR图像和股骨侧位DR图像进行中值滤波。
利用中值滤波方法对股骨正位DR图像和股骨侧位DR进行图像增强预处理,达到消减噪声、突出解剖结构特征的目的。
具体实施方式四:结合图2至图5说明本实施方式,本实施方式是对实施方式一所述股骨三维模型可视化方法的进一步限定,步骤二中提取待建模的正位股骨边缘轮廓和待建模的侧位股骨边缘轮廓的过程为:
步骤二一、C为待提取的正位股骨边缘轮廓曲线,初始化该闭合曲线C=C0,所述闭合曲线置于股骨正位DR图像或股骨侧位DR图像上,C0为任意形状的闭合曲线;
采用无边缘活动轮廓模型在股骨正位DR图像中进行全局边缘检测,无边缘活动轮廓模型定义最小化能量泛函为:
其中,c1是曲线内部的平均灰度,c2是曲线外部的平均灰度,Fin表示曲线内部区域的灰度值与c1的平方误差,Fout表示曲线外部区域的灰度值与c2的平方误差,I表示DR图像,Length(C)表示边界曲线的长度,μ、λ1和λ2是权重系数,其中,μ≥0;
能量泛函与边界曲线具有如下关系:
(一)当Fin>0,Fout=0,F(C,c1,c2)=Fin+Fout>0时,边界曲线包含边缘轮廓;见图2;
(二)当Fin=0,Fout>0,F(C,c1,c2)=Fin+Fout>0时,边界曲线在边缘轮廓内部;见图3;
(三)当Fin>0,Fout>0,F(C,c1,c2)=Fin+Fout>0时,边界曲线穿过边缘轮廓;见图4;
(四)当Fin=0,Fout=0,F(C,c1,c2)=Fin+Fout=0时,边界曲线对应边缘轮廓;见图5;
仅当能量函数达到最小值时,对应的边界曲线为图像的边缘轮廓;
步骤二二、采用变分水平集的方法,将公式(8)中引入Heaviside函数,将它修改为水平集函数u的泛函得到公式(9):
F ( u , c 1 , c 2 ) = λ 1 ∫ ∫ | I - c 1 | 2 H ( u ) dxdy + λ 2 ∫ ∫ | I - c 2 | 2 ( 1 - H ( u ) ) dxdy + μ ∫ ∫ δ ( u ) | ▿ u | dxdy - - - ( 9 )
其中,u(x,y)为水平集函数,与曲线存在如下关系:
u ( x , y ) < 0 ( x , y ) inside ( C ) u ( x , y ) = 0 ( x , y ) on ( C ) u ( x , y ) > 0 ( x , y ) outside ( C ) - - - ( 10 )
Heaviside函数表达式为:
H ( z ) = 1 , z &GreaterEqual; 0 0 , z < 0 - - - ( 11 )
&delta; ( z ) = dH ( z ) dz - - - ( 12 )
将公式(8)关于C曲线环路积分项改写为面积分的形式:
将公式(10)、(11)、(12)代入公式(8)能得到公式(9);
步骤二三、利用梯度下降流方法求解公式(9)的最小值,得公式:
&PartialD; u &PartialD; t = &delta; ( u ) [ &mu; &CenterDot; div ( &dtri; u | &dtri; u | ) - &lambda; 1 ( 1 - c 1 ) 2 + &lambda; 2 ( 1 - c 2 ) 2 ] - - - ( 14 )
其中,按照差分的形式能表示为
其中,τ表示时间步长,设为0.1;
步骤二四、将初始轮廓值C0=u0(x,y)代入公式(14),设定迭代次数,求解出此时刻的水平集函数u,根据公式(10),令u(x,y)=0,得到边缘轮廓曲线C。
具体实施方式五:本实施方式是对实施方式一所述股骨三维模型可视化方法的进一步限定,步骤三中的变换关系的获取过程为:
步骤三一一、由患者股骨边缘轮廓上的点构成参考图像点集P,P={p1,p2,...,pi},i=1,2,...n,n为正整数;由通用股骨三维模型投影轮廓上的点构成浮动图像点集Q,Q={q1,q2,...,qi},并对两个点集进行采样,保证数据量相等。仿射配准前待建模的股骨正位DR图像轮廓和通用股骨正位投影轮廓见图8;
步骤三一二、将参考图像点集P与浮动图像点集Q代入公式(15)中,依据最小二乘准则进行参数优化,获得α,β,tx,ty,tz,sx,sy,sz共八个自由度的配准变换参数;配准算法迭代终止条件为:超过算法的最大迭代次数(一般取值范围为100次~1000次),或浮动图像点集近两次的迭代误差小于设定阈值(一般取值范围为10-4~10-10),即终止配准算法的迭代过程。仿射配准后待建模的股骨正位DR图像轮廓和通用股骨正位投影轮廓见图9。
( &alpha; , &beta; , t x , t y , t z , s x , s y , s z ) = arg min ( &Sigma; i = 1 n | | p i - ( S 2 &times; 2 R 2 &times; 2 q i + T 2 &times; 1 ) | | 2 2 ) - - - ( 15 )
其中α,β分别为绕X轴、Y轴的旋转角度,tx,ty,tz分别为沿X轴、Y轴、Z轴的平移量,sx,sy,sz分别为沿X轴、Y轴、Z轴的比例系数,S2×2为二维比例变换矩阵,R2×2为二维旋转变换矩阵,T2×1为二维平移向量, q i = x i y i 为浮动点集中某点的二维坐标向量, p i = a i b i 为参考点集中某点的二维坐标向量。
对于股骨的正位图像,配准变换的具体表达式为:
S AP R AP q i + T AP = s y 0 0 s z cos &alpha; - sin &alpha; sin &alpha; cos &alpha; q i + t y t z - - - ( 16 )
对于股骨的侧位图像,配准变换关系的具体表达式为:
S LAT R LAT q i + T LAT = s x 0 0 s z cos &beta; sin &beta; - sin &beta; cos &beta; q i + t x t z - - - ( 17 ) .
具体实施方式六:本实施方式是对实施方式一所述股骨三维模型可视化方法的进一步限定,步骤四所述三维变换关系矩阵G满足公式:
X w &prime; Y w &prime; Z w &prime; 1 = G X w Y w Z w 1 = R 3 &times; 3 R 3 &times; 3 T 3 &times; 1 0 1 X w Y w Z w 1 - - - ( 18 )
其中, X w Y w Z w 1 为原始通用模型的三维齐次坐标;
X w &prime; Y w &prime; Z w &prime; 1 为姿态调整后股骨模型的三维齐次坐标;
S 3 &times; 3 = s x 0 0 0 s y 0 0 0 s z , S3×3为三维比例变换矩阵;
R 3 &times; 3 = R z R y R x = cos &beta; cos &gamma; sin &alpha; sin &beta; cos &gamma; - cos &alpha; sin &gamma; cos &alpha; sin &beta; cos &gamma; + sin &alpha; sin &gamma; cos &beta; sin &gamma; cos &alpha; cos &gamma; + sin &alpha; sin &beta; sin &gamma; cos &alpha; sin &beta; sin &gamma; - sin &alpha; cos &gamma; - sin &beta; sin &alpha; cos &beta; cos &alpha; cos &beta;
,R3×3为三维旋转变换矩阵;
R x = 1 0 0 0 cos &alpha; - sin &alpha; 0 sin &alpha; cos &alpha; 为绕X轴的矩阵分量, R y = cos &beta; 0 sin &beta; 0 1 0 - sin &beta; 0 cos &beta; 为绕Y轴的矩阵分量, R z = cos &gamma; - sin &gamma; 0 sin &gamma; cos &gamma; 0 0 0 1 为Z轴旋转的矩阵分量;
T 3 &times; 1 = t x t t t z , T3×1为三维平移变换矩阵;
G = R 3 &times; 3 R 3 &times; 3 T 3 &times; 1 0 1 , G为总的三维齐次坐标变换矩阵。
这里,除了绕Z轴的旋转角度γ未知以外,{α,β,tx,ty,tz,sx,sy,sz}等八个配准参数均已求得。参数γ的估计方法如下:
步骤四一、医生根据股骨骨折手术的临床经验,确定出γ的变化范围(一般范围为:-10°~+10°)。设定γ的初始值为γ0,并与其他八个配准参数构成三维变换矩阵G,根据公式(18)将G作用到三维通用模型上,对股骨三维模型进行更新;
步骤四二、根据公式(2),将更新后的三维模型重新做正位投影,获取投影轮廓数据。按公式(19)计算正位投影轮廓与患者DR图像轮廓间的平均误差:
E = 1 n &Sigma; i = 1 n min | | p i - q j &prime; | | 2 2 - - - ( 19 )
其中,Q′={q′1,q′2,...,q′j},j=1,2,...m,m为正整数,为更新后三维模型的正位投影轮廓点集,P={p1,p2,...,pi},i=1,2,...n,n为正整数,为患者股骨的正位DR图像轮廓点集。
步骤四三、以0.5°为步长改变γ的角度值,重复步骤四一和步骤四二,在γ的变化范围获得20组误差E,其中最小的误差E对应的γ值为最优的Z轴旋转角度,至此完成全部的股骨三维姿态估计。见图10。
此时更新后的股骨三维模型即为经过姿态估计后的患者个体化股骨三维模型。

Claims (6)

1.股骨三维模型可视化方法,其特征在于,它包括以下步骤:
步骤一、建立通用股骨三维模型,通过通用股骨三维模型的正位投影获取通用股骨的正位股骨三维模型投影轮廓,通过通用股骨三维模型的侧位投影获取通用股骨的侧位股骨三维模型投影轮廓;
步骤二、对待建模的股骨正位DR图像和股骨侧位DR图像进行预处理,提取股骨正位DR图像中的股骨边缘轮廓获得正位股骨边缘轮廓,提取股骨侧位DR图像中的股骨边缘轮廓获得侧位股骨边缘轮廓;
步骤三、对步骤二提取的待建模的股骨正位DR图像的边缘轮廓与步骤一所述的通用正位股骨三维模型投影轮廓进行仿射配准,确定正位图像的配准变换关系;
对步骤二提取的待建模的股骨侧位DR图像的边缘轮廓与步骤一所述的通用侧位股骨三维模型投影轮廓进行仿射配准,确定侧位图像的配准变换关系;
正位图像的配准变换关系和侧位图像的配准变换关系包含了八个自由度的配准参数{α,β,tx,ty,tz,sx,sy,sz},其中α为绕X轴的旋转角度、β为绕Y轴的旋转角度、tx为沿X轴的平移量、ty为沿Y轴的平移量、tz为沿Z轴的平移量、sx为沿X轴的比例系数、sy为沿Y轴的比例系数和sz为沿Z轴的比例系数;
变换关系的获取过程为:
步骤三一一、由待建模的股骨边缘轮廓上的点构成参考图像点集P,P={p1,p2,...,pi},i=1,2,...n,n为正整数;由通用股骨三维模型投影轮廓上的点构成浮动图像点集Q,Q={q1,q2,...,qi},并对两个点集进行采样,保证数据量相等;
步骤三一二、将参考图像点集P与浮动图像点集Q代入公式(15)中,依据最小二乘准则进行参数优化,获得α,β,tx,ty,tz,sx,sy,sz共八个自由度的配准变换参数;
( &alpha; , &beta; , t x , t y , t z , s x , s y , s z ) = arg min ( &Sigma; i = 1 n | | p i - ( S 2 &times; 2 R 2 &times; 2 q i + T 2 &times; 1 ) | | 2 2 ) - - - ( 15 )
其中S2×2为二维比例变换矩阵,R2×2为二维旋转变换矩阵,T2×1为二维平移向量, q i = x i y i 为浮动点集中某点的二维坐标向量, p i = a i b i 为参考点集中某点的二维坐标向量;
对于股骨的正位图像,得到正位图像的配准变换关系的具体表达式为:
S AP R AP q i + T AP = s y 0 0 s z cos &alpha; - sin &alpha; sin &alpha; cos &alpha; q i + t y t z - - - ( 16 )
对于股骨的侧位图像,得到侧位图像的配准变换关系的具体表达式为:
S LAT R LAT q i + T LAT = s x 0 0 s z cos &beta; sin &beta; - sin &beta; cos &beta; q i + t x t z - - - ( 17 )
步骤四、根据步骤三获得的正位图像的配准变换关系和侧位图像的配准变换关系确定股骨三维模型的姿态,实现股骨的三维模型的可视化。
2.根据权利要求1所述的股骨三维模型可视化方法,其特征在于,步骤四中,实现股骨的三维模型的可视化的过程为:
设由步骤一得到的通用股骨三维模型绕Z轴的旋转角度为γ,将步骤三配准获得的待建模的股骨的边缘轮廓与通用股骨三维模型投影轮廓之间的八个配准参数{α,β,tx,ty,tz,sx,sy,sz}与γ构成的三维变换关系矩阵G作用在通用股骨三维模型上,以固定步长0.5°改变γ来调整通用股骨三维模型的三维姿态,并对其做正向投影,通过计算投影轮廓与股骨边缘轮廓的误差E,估计通用股骨三维模型绕Z轴的旋转角度,实现待建模的股骨的三维姿态估计,完成股骨三维模型姿态的可视化。
3.根据权利要求1所述股骨三维模型可视化方法,其特征在于,步骤一中建立通用股骨三维模型,通过通用股骨三维模型进行正侧位投影获取通用股骨三维模型投影轮廓的过程为:
步骤一一、选取一个通用股骨对其进行CT扫描,获取通用股骨的CT片,根据通用股骨的CT片构建出通用股骨三维模型;
步骤一二、对通用股骨三维模型进行正位投影获取正位通用股骨三维模型的投影轮廓,对通用股骨三维模型进行侧位投影获取侧位通用股骨三维模型的投影轮廓,具体为:
三维点与其在二维图像上的投影点之间有如下变换关系:
u v 1 = A 1 A 2 X w Y w Z w 1 - - - ( 1 )
其中(Xw,Yw,Zw)是点P在世界坐标系下的三维坐标;(u,v)是该点在二维像素坐标系下的二维投影坐标;A1为内参数矩阵;A2为外参数矩阵;
设模板平面在世界坐标系的Zw=0的平面上,则(1)式能改写为:
u v 1 = A 1 r 1 r 2 r 3 t X w Y w 0 1 = A 1 r 1 r 2 t X w Y w 1 - - - ( 2 )
其中r1,r2,r3,t分别是矩阵A2的列向量,根据单应性矩阵的性质,有如下关系式:
H = h 1 h 2 h 3 = &eta; A 1 r 1 r 2 t - - - ( 3 )
其中η为任意标量;
旋转矩阵具有如下两个性质:
r 1 T r 2 = 0 | | r 1 | | = | | r 2 | | = 1 - - - ( 4 )
由(3)式得:
r 1 = &eta; - 1 A 1 - 1 h 1 r 2 = &eta; - 1 A 1 - 1 h 2 - - - ( 5 )
将(5)式代入(4)式,每个图像就能获得以下两个对内参数矩阵的约束:
h 1 T A 1 - T A 1 - 1 h 2 = 0 h 1 T A 1 - T A 1 - 1 h 1 = h 2 T A 1 - T A 1 - 1 h 2 - - - ( 6 )
由公式(6)求解出内参数矩阵A1
根据A1和单应性矩阵H能进一步计算出外参数r1,r2,r3,t:
r 1 = &eta; - 1 A 1 - 1 h 1 r 2 = &eta; - 1 A 1 - 1 h 2 r 3 = r 1 &times; r 2 t = &eta; - 1 A 1 - 1 h 3 - - - ( 7 ) ;
将公式(6)和(7)得到的参数代入公式(2),得到三维点在二维图像上对应的投影点;
对通用股骨三维模型进行正位投影,所述正位投影的外边缘点对应的投影点的集合构成正位股骨三维模型的投影轮廓;
对通用股骨三维模型进行侧位投影,所述侧位投影的外边缘点对应的投影点的集合构成侧位股骨三维模型的投影轮廓。
4.根据权利要求1所述股骨三维模型可视化方法,其特征在于,步骤二中对待建模的的股骨正位DR图像和股骨侧位DR图像进行预处理的过程为:对待建模的的股骨正位DR图像和股骨侧位DR图像进行中值滤波。
5.根据权利要求1所述股骨三维模型可视化方法,其特征在于,步骤二中提取待建模的正位股骨边缘轮廓和待建模的侧位股骨边缘轮廓的过程相同,其中提取待建模的正位股骨边缘轮廓的过程为:
步骤二一、C为待提取的正位股骨边缘轮廓曲线,初始化该闭合曲线C=C0,所述闭合曲线置于股骨正位DR图像上,C0为任意形状的闭合曲线;
采用无边缘活动轮廓模型在股骨正位DR图像中进行全局边缘检测,提取待建模的正位股骨边缘轮廓,无边缘活动轮廓模型定义最小化能量泛函为:
其中,c1是曲线内部的平均灰度,c2是曲线外部的平均灰度,Fin表示曲线内部区域的灰度值与c1的平方误差,Fout表示曲线外部区域的灰度值与c2的平方误差,I表示股骨正位DR图像,Length(C)表示边界曲线的长度,μ、λ1和λ2是权重系数,其中,μ≥0;
能量泛函与边界曲线具有如下关系:
㈠当Fin>0,Fout=0,F(C,c1,c2)=Fin+Fout>0时,边界曲线包含边缘轮廓;
㈡当Fin=0,Fout>0,F(C,c1,c2)=Fin+Fout>0时,边界曲线在边缘轮廓内部;
㈢当Fin>0,Fout>0,F(C,c1,c2)=Fin+Fout>0时,边界曲线穿过边缘轮廓;
㈣当Fin=0,Fout=0,F(C,c1,c2)=Fin+Fout=0时,边界曲线对应边缘轮廓;
仅当能量函数达到最小值时,对应的曲线为图像的边缘轮廓;
步骤二二、采用变分水平集的方法,将公式(8)中引入Heaviside函数,将它修改为水平集函数u的泛函得到公式(9):
F ( u , c 1 , c 2 ) = &lambda; 1 &Integral; &Integral; | I - c 1 | 2 H ( u ) dxdy + &lambda; 2 &Integral; &Integral; | I - c 2 | 2 ( 1 - H ( u ) ) dxdy + &mu; &Integral; &Integral; &delta; ( u ) | &dtri; u | dxdy - - - ( 9 )
其中,u(x,y)为水平集函数,与曲线存在如下关系:
u ( x , y ) < 0 ( x , y ) inside ( C ) u ( x , y ) = 0 ( x , y ) on ( C ) u ( x , y ) > 0 ( x , y ) outside ( C ) - - - ( 10 )
Heaviside函数表达式为:
H ( z ) = 1 , z &GreaterEqual; 0 0 , z < 0 - - - ( 11 )
&delta; ( z ) = dH ( z ) dz - - - ( 12 )
将公式(8)关于C曲线环路积分项改写为面积分的形式:
将公式(10)、(11)、(12)代入公式(8)能得到公式(9);
步骤二三、利用梯度下降流方法求解公式(9)的最小值,得公式:
&PartialD; u &PartialD; t = &delta; ( u ) [ &mu; &CenterDot; div ( &dtri; u | &dtri; u | ) - &lambda; 1 ( 1 - c 1 ) 2 + &lambda; 2 ( 1 - c 2 ) 2 ] - - - ( 14 )
其中,按照差分的形式能表示为
其中,τ表示时间步长,设为0.1;
步骤二四、将初始轮廓值C0=u0(x,y)代入公式(14),设定迭代次数,求解出此时刻的水平集函数u,根据公式(10),令u(x,y)=0,得到边缘轮廓曲线C。
6.根据权利要求2所述股骨三维模型可视化方法,其特征在于,步骤四所述三维变换关系矩阵G满足公式:
X w &prime; Y w &prime; Z w &prime; 1 = G X w Y w Z w 1 = S 3 &times; 3 R 3 &times; 3 T 3 &times; 1 0 1 X w Y w Z w 1 - - - ( 18 )
其中, X w Y w Z w 1 为原始通用股骨三维模型的三维齐次坐标;
X w &prime; Y w &prime; Z w &prime; 1 为姿态调整后股骨模型的三维齐次坐标;
S 3 &times; 3 = s x 0 0 0 s y 0 0 0 s z , S3×3为三维比例变换矩阵;
R 3 &times; 3 = R z R y R x = cos &beta; cos &gamma; sin &alpha; sin &beta; cos &gamma; - cos &alpha; sin &gamma; cos &alpha; sin &beta; cos &gamma; + sin &alpha; sin &gamma; cos &beta; sin &gamma; cos &alpha; cos &gamma; + sin &alpha; sin &beta; sin &gamma; cos &alpha; sin &beta; sin &gamma; - sin &alpha; cos &gamma; - sin &beta; sin &alpha; cos &beta; cos &alpha; cos &beta; , R3×3为三维旋转变换矩阵;
R x = 1 0 0 0 cos &alpha; - sin &alpha; 0 sin &alpha; cos &alpha; 为绕X轴的矩阵分量, R y = cos &beta; 0 sin &beta; 0 1 0 - sin &beta; 0 cos &beta; 为绕Y轴的矩阵分量, R z = cos &gamma; - sin &gamma; 0 sin &gamma; cos &gamma; 0 0 0 1 为Z轴旋转的矩阵分量;
T 3 &times; 1 = t x t t t z , T3×1为三维平移变换矩阵;
G = S 3 &times; 3 R 3 &times; 3 T 3 &times; 1 0 1 , G为总的三维齐次坐标变换矩阵;
所述{α,β,tx,ty,tz,sx,sy,sz}八个配准参数均已由步骤三求得;绕Z轴的旋转角度γ为未知,参数γ的估计方法如下:
步骤四一、确定出γ的变化范围为:-10°~+10°,设定γ的初始值为γ0,并与{α,β,tx,ty,tz,sx,sy,sz}八个配准参数构成三维变换矩阵G,根据公式(18)将G作用到通用股骨三维模型上,对通用股骨三维模型进行更新;
步骤四二、根据公式(2),将更新后的通用股骨三维模型重新做正位投影,获取投影轮廓数据;按公式(19)计算正位投影轮廓与股骨正位DR图像轮廓间的平均误差:
E = 1 n &Sigma; i = 1 n min | | p i - q j &prime; | | 2 2 - - - ( 19 )
其中,Q'={q'1,q'2,...,q'j},j=1,2,...m,m为正整数,为更新后三维模型的正位投影轮廓点集,P={p1,p2,...,pi},i=1,2,...n,n为正整数,为待建模的股骨正位DR图像轮廓点集;
步骤四三、以0.5°为步长改变γ的角度值,重复步骤四一和步骤四二,在γ的变化范围获得20组误差E,其中最小的误差E对应的γ值为最优的Z轴旋转角度,完成股骨三维姿态估计。
CN201210099633.3A 2012-04-06 2012-04-06 股骨三维模型可视化方法 Expired - Fee Related CN102651145B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210099633.3A CN102651145B (zh) 2012-04-06 2012-04-06 股骨三维模型可视化方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210099633.3A CN102651145B (zh) 2012-04-06 2012-04-06 股骨三维模型可视化方法

Publications (2)

Publication Number Publication Date
CN102651145A CN102651145A (zh) 2012-08-29
CN102651145B true CN102651145B (zh) 2014-11-05

Family

ID=46693148

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210099633.3A Expired - Fee Related CN102651145B (zh) 2012-04-06 2012-04-06 股骨三维模型可视化方法

Country Status (1)

Country Link
CN (1) CN102651145B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103247056B (zh) * 2013-05-29 2016-01-13 中国人民解放军第三军医大学第一附属医院 人体骨关节系统三维模型-二维影像空间配准方法
CN105078514A (zh) * 2014-04-22 2015-11-25 重庆海扶医疗科技股份有限公司 三维模型的构建方法及装置、图像监控方法及装置
CN105094725B (zh) * 2014-05-14 2019-02-19 同方威视技术股份有限公司 图像显示方法
KR101624670B1 (ko) * 2015-09-25 2016-05-26 주식회사 동우 이앤씨 건축사사무소 구조물의 모델링에 관한 정보를 제공하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
CN105761304B (zh) * 2016-02-02 2018-07-20 飞依诺科技(苏州)有限公司 三维脏器模型构造方法和装置
US10559100B2 (en) * 2017-05-22 2020-02-11 Prismatic Sensors Ab Method and devices for image reconstruction
CN109242910B (zh) * 2018-08-21 2021-10-08 电子科技大学 一种基于任意已知平面形状的单目相机自标定方法
CN110123451B (zh) * 2019-04-17 2020-07-28 华南理工大学 应用于无标记点光学手术导航系统的病人表面注册方法
CN111415404B (zh) * 2020-03-16 2021-06-29 广州柏视医疗科技有限公司 术中预设区域的定位方法、装置、存储介质及电子设备
CN111739006B (zh) * 2020-06-22 2021-07-13 深圳企业云科技股份有限公司 一种基于围道积分的椭圆图像检测算法及系统
CN115082534B (zh) * 2022-07-21 2022-12-16 杭州三坛医疗科技有限公司 双平面图像配准方法、装置及机器人

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1868157A1 (en) * 2006-06-14 2007-12-19 BrainLAB AG Shape reconstruction using X-ray images
CN101615303A (zh) * 2009-07-10 2009-12-30 天津医科大学总医院 骨内部结构三维可视化模型制作方法

Also Published As

Publication number Publication date
CN102651145A (zh) 2012-08-29

Similar Documents

Publication Publication Date Title
CN102651145B (zh) 股骨三维模型可视化方法
Markelj et al. A review of 3D/2D registration methods for image-guided interventions
CN108765417B (zh) 一种基于深度学习和数字重建放射影像的股骨x线片生成系统及方法
Baka et al. 2D–3D shape reconstruction of the distal femur from stereo X-ray imaging using statistical shape models
Betke et al. Landmark detection in the chest and registration of lung surfaces with an application to nodule registration
Otake et al. Robust 3D–2D image registration: application to spine interventions and vertebral labeling in the presence of anatomical deformation
Otake et al. Automatic localization of vertebral levels in x-ray fluoroscopy using 3D-2D registration: a tool to reduce wrong-site surgery
US9282944B2 (en) C-arm pose estimation using intensity-based registration of imaging modalities
Dang et al. dPIRPLE: a joint estimation framework for deformable registration and penalized-likelihood CT image reconstruction using prior images
Pernus 3D-2D registration of cerebral angiograms: A method and evaluation on clinical images
CN105641814B (zh) 用于处理医学图像的装置、方法和程序以及放射治疗装置
Maken et al. 2D-to-3D: a review for computational 3D image reconstruction from X-ray images
JP2010246883A (ja) 患者位置決めシステム
Otake et al. 3D–2D registration in mobile radiographs: algorithm development and preliminary clinical evaluation
EP3552184A1 (en) Methods of reconstructing skulls
EP2056255B1 (en) Method for reconstruction of a three-dimensional model of an osteo-articular structure
Zhen et al. Deformable image registration of CT and truncated cone-beam CT for adaptive radiation therapy
EP4365838A1 (en) Registration method and system
Shao et al. Real-time liver tumor localization via a single x-ray projection using deep graph neural network-assisted biomechanical modeling
Mishra et al. Adaptation and applications of a realistic digital phantom based on patient lung tumor trajectories
Zhang et al. A kernel-based method for markerless tumor tracking in kV fluoroscopic images
Reaungamornrat et al. Deformable image registration with local rigidity constraints for cone-beam CT-guided spine surgery
Muhit et al. Image-assisted non-invasive and dynamic biomechanical analysis of human joints
Forsberg et al. Model-based registration for assessment of spinal deformities in idiopathic scoliosis
ES2717457T3 (es) Método de procesamiento de imágenes

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20141105

Termination date: 20150406

EXPY Termination of patent right or utility model