CN103315739A - 基于动态跟踪技术免除运动伪影的磁共振影像方法和系统 - Google Patents

基于动态跟踪技术免除运动伪影的磁共振影像方法和系统 Download PDF

Info

Publication number
CN103315739A
CN103315739A CN2013101907346A CN201310190734A CN103315739A CN 103315739 A CN103315739 A CN 103315739A CN 2013101907346 A CN2013101907346 A CN 2013101907346A CN 201310190734 A CN201310190734 A CN 201310190734A CN 103315739 A CN103315739 A CN 103315739A
Authority
CN
China
Prior art keywords
coordinate
video
motion
space
magnetic resonance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013101907346A
Other languages
English (en)
Other versions
CN103315739B (zh
Inventor
徐冬溶
严序
范亮艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
East China Normal University
Original Assignee
East China Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by East China Normal University filed Critical East China Normal University
Priority to CN201310190734.6A priority Critical patent/CN103315739B/zh
Publication of CN103315739A publication Critical patent/CN103315739A/zh
Application granted granted Critical
Publication of CN103315739B publication Critical patent/CN103315739B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Magnetic Resonance Imaging Apparatus (AREA)

Abstract

本发明涉及磁共振成像研究领域,是一种基于计算机视觉目标识别和追踪技术,在磁共振成像数据的采集过程中,跟踪被试的空间姿态,实时动态调整扫描仪成像参数,避免采集到有运动伪影图像的方法和系统。通过模拟人眼立体视觉的至少两台摄像仪,识别目标并计算被试的空间姿态,监控和判断其空间运动。一旦发现发生运动,立即计算修正好的空间姿态参数并通过TCP/IP传递给扫描仪,实时调整扫描仪的成像参数,确保即使在被试有运动的情况下,扫描仪能在正确的空间位置去采集图像数据,从而最终获得的图像仿佛是被试没有发生运动而采集得到图像一样。由此采集得到的图像数据质量稳定可靠,完全免除了运动伪影,不再需要在后处理中做运动校正。

Description

基于动态跟踪技术免除运动伪影的磁共振影像方法和系统
技术领域
本发明涉及磁共振成像研究领域,是一种基于计算机视觉目标识别和追踪技术的实时校正磁共振图像采集参数从而避免采集到存在运动伪影的图像数据的方法及系统。
背景技术
磁共振成像具有无损伤,软组织对比度高,且任意方向断层等特点。同时,磁共振成像的方法灵活,可以提供不同种类反差(或者称为对比度)的图像,不仅能够提供组织形态学信息,而且能够反映活体生物组织的功能特性(水分子弥散、血流灌注、脑心理功能、铁沉积、新陈代谢水平等)及分子水平的信息,因此磁共振成像已经广泛应用于医学临床诊断。
磁共振成像的扫描时间较长,扫描过程中被扫描对象经常会有不由自主的运动,会导致运动伪影。运动伪影是磁共振影像中常见的问题,常常会严重影响成像质量,但一直以来都没有得到完善的解决。可以将MRI比作一个曝光时间数分钟的相机,如果在成像的过程中有了运动,图像就会模糊。早期的MRI运动校正方法是在数据采集完成后,使用后处理算法进行补救,通过采集数据本身的信息恢复受影响的信号。但是,如果被试在扫描过程发生了不规则运动,后处理方法不能估算合适运动模型,就无法完全去除运动模糊带来的伪影;若是扫描过程中被试活动太大甚至移出扫描层面,就好像相机拍摄时对象跑出了取景范围,任何图像后处理方法都不可能恢复图像。
较常用的实时运动矫正方法是导航回波。这种方法可以在成像过程中矫正运动伪影。该方法通常在正式数据采集之前先采集部分K空间的数据或者一个低分辨的3D图像数据,通过这些数据来估计目标的运动参数,然后修改扫描平面位置使其与被扫描物体的位置保持一致,从而去除运动伪影。但这类方法需要额外的数据采集,这将影响正式采集的信号,同时也将显著增加扫描时间,因此为了提高效率只能采集少量数据来计算运动参数,但这又将降低运动参数计算的精度,需要在精度和耗时之前权衡。另一种方法是采用一个小的磁共振线圈作为标记,固定在被试上,通过检测这个线圈中磁体中的运动情况间接判别被试的活动。但是这种方法对磁共振成像本身会有干扰,而且需要与磁共振扫描仪之间较为复杂的技术连接,因此技术上实现不太方便,需要对扫描仪平台本身做一些改动,难以在现有平台上普及。
发明内容
本发明的目的是针对上述已有技术的不足而提出的一种基于计算机视觉的对象识别和追踪技术的磁共振影像实时运动校正和伪影消除的方法和系统,目标是通过动态自动调整成像参数,彻底去除成像过程中可能产生的运动伪影。该方法使用独立于磁共振成像的光学视频系统,通过摄像机监控对象,通过计算机视觉的对象识别和追踪技术跟踪计算对象的运动,然后将估算的运动信息实时传入到磁共振系统中,动态修改脉冲序列程序的成像参数,使扫描平面和视野与被扫描对象之间保持相对关系不变,从而总是能够获取清晰的图像数据,彻底解决被扫描者在长时间数据采集过程中因为不能保持静止而不可避免产生的运动伪影问题。与其他方法相比,第一,本方法对磁共振成像扫描的影响较小,不需要增加额外的扫描时间;第二,由于采用为机器人视觉领域较为成熟的技术,运动参数估计准确性很高;第三,本系统相对独立于磁共振扫描仪器系统,不需要对扫描仪本身进行太多技术修正,因此灵活性较大。
为了实现上述目的,本发明提出了一种基于动态跟踪技术免除运动伪影的磁共振影像方法和并实现了相应的系统,主要包含了如下模块:
模块一:视频识别和跟踪模块。该模块主要使用计算机视觉系统监控识别头部并监控头部运动,计算头部在三维空间的运动参数;
模块二:网络传输模块。该模块主要提供视频识别和跟踪模块与磁共振扫描控制台之间的通讯,用于传递监控计算得到的运动参数和需要的修正结果;
模块三:脉冲序列控制模块。该模块主要根据运动参数,修改脉冲序列参数,并将更新的序列参数发送到脉冲序列控制单元,调整扫描的视野、位置和平面。
其中,模块一进一步包含了四个部分,视频信号采集系统、目标和标记识别、跟踪标记物、运动跟踪计算程序。视频采集系统包含模拟双眼并构造立体视觉的两个高分辨率工业摄像头,同时采集视频信息;目标和标记识别需要从视频信号中分离背景并识别目标和标记;跟踪标记物模块将具有特殊图像纹理的标记与被跟踪物体固定在一起,并且要在视频数据流中连续串联和跟踪该标记;运动跟踪和计算程序标记物随时间变化在不同图像数据帧之间的光流,在三维空间坐标系重建对象和标记的空间立体坐标,计算对象的运动姿态并估算是否有空间运动,如果有运动,估算运动参数,并且进行不同坐标系统(扫描仪座标系统、视频座标系统、物理世界座标系统等)之间的统一和转换,最后获得被跟踪物体的空间运动信息。
其中运动跟踪和计算程序包含了若干子模块,如下:
子模块一:视频信号处理,保证两个摄像机数据的稳定和快速视频数据流入;
子模块二:视觉标定,计算两个摄像头的内参数集和外参数集,通过这些参数建立模拟双眼立体系统的几何模型,获得视频采集的图像像素坐标与真实空间中的实际坐标之间的对应关系。摄像头的内参数集指那些主要与摄像机的内部结构相关的参数,包括焦距在图像坐标系x,y方向的等效焦距,摄像机光轴与成像平面的交点的图像坐标。外参数集是指右摄像机相对于左摄像机的空间转换关系,主要包括一个空间旋转矩阵R和一个空间平移向量T;
子模块三:标记物在空间中的三维坐标计算,在双摄像机采集视频里分别识别标记物上的标记点,并通过标定参数构建的几何模型计算标记点在物理空间中的坐标;
子模块四:运动参数估计,使用标记点三维坐标计算被跟踪物体的刚体运动参数,参数包括三维平移和三维旋角度的六个系数。
其中运动参数的计算,设摄像机坐标系下的标记点运动前后的旋转矩阵为R c ,平移向量为t c 。假设t 0 t 1 时刻标记点的坐标分别为X c0 X c1 ,那么
Figure 270792DEST_PATH_IMAGE001
式中X c0 X c1 为3×N的矩阵,N为标记点的个数,从中估算出R c t c ,算法如下:
Figure DEST_PATH_IMAGE002
式中
Figure 724776DEST_PATH_IMAGE003
Figure DEST_PATH_IMAGE004
分别是t 0 t 1 时刻N个标记点的平均坐标向量。
C进行奇异值分解(SVD)得到
Figure DEST_PATH_IMAGE005
,从而解出R c t c
再将旋转矩阵转换成三个旋转角度。
子模块五:系统互标定,由于运动参数估计模块获得的运动系数是在摄像机坐标系下,需要转换到磁共振成像系统的坐标系下。做法是设计一个用于空间坐标标定的水模,其上包含了一系列标记点,标记点坐标可以同时在摄像机和MRI两个坐标系下获得,然后可通过求解下式得到两坐标系之间的转换关系:
Xm = Rcm·Xc + Tcm
其中Xc和Xm分别为标记点在摄像机系统和磁共振成像系统下的空间坐标,Rcm为两个坐标系的3x3的旋转系数,Tcm为3x1的平移向量。Rcm和Tcm的求解与步骤四中运动参数计算的方法相同。通过Rcm和Tcm,可是用如下公式计算磁共振坐标系下的运动参数Rm和Tm
假设t 0 t 1 时刻标记点的坐标分别为X m0 X m1 ,那么:
Figure DEST_PATH_IMAGE007
结合
Figure DEST_PATH_IMAGE008
得到:
所以
Figure DEST_PATH_IMAGE010
    在模块二中,通讯程序使用TCP/IP协议,将模块一中计算得到的运动参数实时传输到磁共振成像扫描控制台电脑。
    在模块三中,磁共振成像序列获得了由模块二发送来的最新运动参数后,将根据该参数修改与空间定位相关序列参数,然后将这些参数发送至脉冲序列控制单元,实时更新扫描平面。
本发明应用计算机视觉中成熟的视频目标识别和跟踪技术开发了一个在磁共振环境下的三维空间视频监控、跟踪和立体坐标重建的方法和系统,应用到了磁共振成像中,在磁共振扫描过程中实时计算被扫描对象的空间姿态和对应运动参数,并且不间断的将最新获得的空间位置姿态和位置参数传递给扫描仪,动态控制和调整在磁共振扫描过程中的脉冲序列程序的成像视野、位置和扫描平面,从而在数据采集阶段彻底解决了运动伪影问题。本发明的优点是:1)跟踪准确性高,速度较快,光学跟踪技术使用高分辨,高采集速度的摄像机,跟踪精度可以在亚毫米级,运动参数的更新频率高。2)硬件独立:对磁共振成像信号采集的影响小,光学跟踪系统独立于磁共振成像系统,不需要额外的成像扫描的时间,同时采用磁共振兼容摄像机,对成像扫描基本没有影响。 3)软件系统图例:相应的软件系统也是独立研发的,对扫描仪本身的脉冲序列仅仅需要最小的接口改动,很容易以外挂和添加到方式,应用到已经在世界各地在被使用的商用系统上去。4)容易和各种磁共振序列结合,本发明对磁共振序列没有限制和额外要求,可以与任何序列结合,同时序列的改动较小。
附图说明
图1为发明的方法流程图;
图2为本发明系统实施例示意图;
图3为本发明互标定水模示意图;
图4为本发明的运动矫正效果图;其中,(左)图无运动参考图,采集过程中被试保持静止;(中)图为多幅运动矫正图像的平均图,采集过程中被试有运动,但是采用本发明可以保持动态跟踪,因此采集得到的图像在成像视野中的相对位置高度一致,所以平均结果边界非常整齐,脑中结构清晰,和参照图差别很小,误差在容忍范围之内(亚毫米);(右)图为多幅无运动矫正图像的平均图;采集过程中被试有运动,但是采集中成像序列不做相应视野和参数修正;因此,由于多幅图像在成像视野中的相对位置完全不固定,可以看到结果中图像对齐很差,平均图像的边界非常模糊,存在多重伪影。
具体实施方式
下面结合具体实施例和附图,对本项发明作进一步的详细说明。在以下内容中,有关实施本项发明的过程、条件、实验方法等,除了特别指出的之外,均为本领域的普遍知识和公知常识,本项发明不做特别限制。
本发明基于西门子3T Trio磁共振扫描仪实现实时运动矫正,其流程包括以下步骤:
步骤1 :各个设备在磁共振成像环境下的安装和摆放,包括摄像机,运动跟踪电脑,磁共振成像控制主机,以及它们之间的连接线,还有摄像机跟踪标记物的固定。图1是本项发明的系统总图,图2显示一个实施实例的布局概念。
其中,使用了两个ImageSource的DFK31BF03工业级袖珍摄像头,放置于磁体房内距离磁体腔中心大约2.5米的位置。跟踪系统计算机放在磁体房外,通过一根10米的1394线与摄像头连接,电脑上安装两个1394 - PCI(或PCIE)转接卡,以接受视频数据,同时,其与磁共振成像控制台电脑之间通过一根网线连接。
步骤2 :视频采集:通过模拟双眼立体空间视觉的双摄像头视频系统,同时采集包含跟踪标记物的视频图像信息。
其中,视频采集模块是基于本发明方法编写的算法,在windows 7环境下利用Visual Studio 2008环境独立研发。
步骤3 :识别标记物:从视频流数据中识别目标并分离标记物。这一步是利用计算机视觉模式识别的方法实现的。
步骤4 :摄像头标定: 利用识别和分离得到的标记物,计算摄像镜头的内外参数,通过这些参数建立摄像机的几何模型,获得摄像机采集的图像像素坐标与真实空间中的实际坐标之间的对应关系。
其中的空间标定算法,是将计算机视觉研究通用方法,根据本项发明的具体配置(即摄像仪、棋盘格标记等),编写了一个模块实现的。其主要子模块包括:(1)在摄像机采集视频图像中寻找棋盘图的像素级内标记点位置;(2)找到精确的亚像素级标记点位置;(3)通过标记点位置计算单个摄像机的内外参数及畸变参数;(4)通过两个摄像机各自的内外参数进一步计算双摄像头立体标定参数。
步骤5 :系统互标定,计算摄像机和磁共振成像系统坐标系两坐标系之间的转换关系,即互标定参数。
其中互标定通常的做法是分别获得一系列标记点同时在摄像机和MRI两个系统下的坐标Xc和Xm,然后求解方程Xm = Rcm·Xc + Tcm得到3×3的旋转矩阵Rcm和3×1的平移向量Tcm。图3为一个在摄像机和MRI下均可见的水模。该水模是一个20×20×20 cm3的立方体,充入盐溶液,内部为网格结构。在水模的一侧贴上一张黑白的棋盘纸,黑白格子的交叉点,即角点,与水模的网格结构的交叉点对应。角点位置可通过光学跟踪系统获得,水模中的网格结构可以在MRI下检测到,而棋盘角点与水模交叉点存在一个固定的相对位移,可以通过测量获得,则角点在MRI下的坐标可以获得。于是接着可通过解方程Xm = Rcm·Xc + Tcm计算得到两坐标系的旋转矩阵和平移向量,也即是互标定参数。
步骤6 :计算标记物中标记点的空间三维坐标,在双摄像机采集视频里分别识别标记物中特殊标记点,并通过 步骤4 的标定参数构建的几何模型计算标记点在物理空间中的坐标,在摄像机坐标系下计算坐标。
其中,计算标记点三维坐标,根据二维图像点与三维空间点之间的映射关系,可得到:
Figure DEST_PATH_IMAGE011
 (ui,vi,1)T分别为左右摄像机的对应二维图像坐标,为相同世界坐标系中的坐标点。其中
Figure DEST_PATH_IMAGE012
 ,A 1 A 2 为两摄像头的内参数矩阵。I为3×3的单位阵,0=[0,0,0] T Rt为右摄像机坐标系相对于左摄像机坐标系的旋转矩阵和平移向量。
分别展开消去两个比例参数,得到:
 
三个未知数,四个方程,联立求得最终的三维世界坐标。
步骤7 :通过 步骤2、6 采集并记录标记点的初始三维坐标。
步骤8 :通过 步骤2、6 采集当前标记点三维坐标,并通过步骤7记录的标记点初始坐标和当前坐标计算被跟踪物体在摄像机坐标系下的刚体运动参数。
设摄像机坐标系下的标记点运动前后的旋转矩阵为R c ,平移向量为t c 。假设t 0 t 1 时刻标记点的坐标分别为X c0 X c1 ,那么
Figure 389292DEST_PATH_IMAGE001
式中X c0 X c1 为3×N的矩阵,N为标记点的个数,从中估算出R c t c ,算法如下:
式中
Figure DEST_PATH_IMAGE014
Figure 589516DEST_PATH_IMAGE015
分别是t 0 t 1 时刻N个标记点的平均坐标向量。
C进行奇异值分解(SVD)得到,从而解出R c t c
Figure 326527DEST_PATH_IMAGE017
再将旋转矩阵转换成三个旋转角度。
步骤9 :利用 步骤5 中获得的互标定参数计算在磁共振成像系统坐标系下的运动参数。
假设t 0 t 1 时刻标记点的坐标分别为X m0 X m1 ,那么:
结合
Figure 787596DEST_PATH_IMAGE019
得到:
Figure DEST_PATH_IMAGE020
所以
Figure 217440DEST_PATH_IMAGE010
     步骤10 :使用基于TCP/IP协议的通讯程序将 步骤9 中得到的运动参数实时传输到磁共振成像扫描控制台电脑。其中通讯程序通过WinSock编写,Winsock是为Windows系统开发的一套标准的TCP/IP网络编程接口,是处理网络的Windows API,让程序员回避具体的网络细节,更专注于应用程序的开发。
     步骤11 :磁共振成像扫描控制台电脑中的成像序列程序接受 步骤10 中传入的运动参数,然后根据该参数修改脉冲序列程序中与空间定位相关的各参数,并将这些参数发送至脉冲序列控制单元,实时更新扫描平面。
    其中控制台电脑可按照标准TCP/IP协议规定,通过自己实现的一个程序或者西门子提供的一个ReModProt程序接受运动参数,修改当前序列的相关参数,然后序列程序将更新参数发送到脉冲序列控制单元。
     步骤12 :重复 步骤8、9、10、11 ,直到扫描结束。
本实施例中,磁共振成像采用自旋回波-平面回波成像序列,具体参数为: 恢复/回波时间为 4000/68 ms, 分辨率2×2×3 mm3----,35层,采样矩阵 128×128。矫正是在每个3D图像的采集之前进行,而被试在每幅3D图像之间运动。图4显示了参考图像,多幅经过矫正的图像平均结果与多幅不经过矫正图像的平均结果。由图4可见通过运动矫正后的图像位置一致,平均结果图像细节清晰,消除了可能存在的运动模糊和伪影;而没有经过矫正的图像由于存在相对运动,各图像之间的空间位置完全不匹配,在平均后图像变模糊。

Claims (2)

1.一种基于动态跟踪技术免除运动伪影的磁共振影像方法,利用计算机视觉的目标识别和跟踪技术,动态监控被试在扫描仪内地活动和空间姿态,实时调整磁共振成像过程,从而确保采集到的影像学数据中被试的相对位置固定从而免除图像中的运动和模糊,其特征在于该方法包括以下具体步骤:  
a、视频识别和跟踪
使用计算机视觉识别头部目标并动态监控头部运动的技术,实时计算头部在三维空间的运动参数;包括:
ⅰ)视频信号采集
利用模拟双眼并构造立体视觉的至少两个高分辨率工业摄像头,同时采集视频信息;
ⅱ)目标和标记识别
从视频信号中分离背景并识别目标和标记;
ⅲ)跟踪标记物
将具有特殊图像纹理的标记与被跟踪物体固定在一起,并且在视频数据流中连续串联和跟踪该标记;
ⅳ)运动跟踪计算
计算标记物随时间变化在不同图像数据帧之间的光流,在三维空间坐标系重建对象和标记的空间立体坐标;计算对象的运动姿态并估算是否有空间运动,若有运动,计算运动参数,并且进行不同坐标系统即扫描仪座标系统、视频座标系统、物理世界座标系统之间的统一和转换,获得被跟踪物体的空间运动信息;具体包括:
 1)视频信号处理
保证两个摄像机数据的稳定和快速视频数据流入;
2)视觉标定
计算两个摄像头的内参数集和外参数集,通过这些参数建立模拟双眼立体系统的几何模型,获得视频采集的图像像素坐标与真实空间中的实际坐标之间的对应关系;其中,摄像头的内参数集指那些主要与摄像机的内部结构相关的参数,包括焦距在图像坐标系x,y方向的等效焦距,摄像机光轴与成像平面的交点的图像坐标;外参数集是指右摄像机相对于左摄像机的空间转换关系,包括一个空间旋转矩阵R和一个空间平移向量T;
3)标记物在空间中的三维坐标计算
在双摄像机采集视频里分别识别标记物上的标记点,并通过标定参数构建的几何模型计算标记点在物理空间中的坐标;
4)运动参数估计
使用标记点三维坐标计算被跟踪物体的刚体运动参数,参数包括三维平移和三维旋角度的六个系数;
其中运动参数的计算,设摄像机坐标系下的标记点运动前后的旋转矩阵为R c ,平移向量为t c ;假设t 0 t 1 时刻标记点的坐标分别为X c0 X c1 ,那么
式中X c0 X c1 为3×N的矩阵,N为标记点的个数,从中估算出R c t c ,算法如下:
Figure 865270DEST_PATH_IMAGE002
式中
Figure 425564DEST_PATH_IMAGE004
分别是t 0 t 1 时刻N个标记点的平均坐标向量;
C进行奇异值分解(SVD)得到
Figure 197211DEST_PATH_IMAGE005
,从而解出R c t c
Figure 147850DEST_PATH_IMAGE006
再将旋转矩阵转换成三个旋转角度;
5)系统互标定
运动参数计算获得的运动系数是在摄像机坐标系下,将其转换到磁共振成像系统的坐标系下;做法是设计一个用于空间坐标标定的水模,其上包含了一系列标记点,标记点坐标同时在摄像机和MRI两个坐标系下获得,然后通过求解下式得到两坐标系之间的转换关系:
Xm = Rcm·Xc + Tcm
其中Xc和Xm分别为标记点在摄像机系统和磁共振成像系统下的空间坐标,Rcm为两个坐标系的3x3的旋转系数,Tcm为3x1的平移向量;Rcm和Tcm的求解与步骤四中运动参数计算的方法相同;通过Rcm和Tcm,用如下公式计算磁共振坐标系下的运动参数Rm和Tm
假设t 0 t 1 时刻标记点的坐标分别为X m0 X m1 ,那么:
Figure 843404DEST_PATH_IMAGE007
结合
Figure 195888DEST_PATH_IMAGE008
得到:
Figure 138436DEST_PATH_IMAGE009
所以
b、网络传输
提供视频识别和跟踪步骤与磁共振扫描控制台之间的通讯,用于传递监控计算得到的运动参数和需要的修正结果;其中,通讯程序使用TCP/IP协议,将视频识别和跟踪步骤计算得到的运动参数实时传输到磁共振成像扫描控制台电脑;
c、脉冲序列控制
根据运动参数,修改脉冲序列参数,并将更新的序列参数发送到脉冲序列控制单元,调整扫描的视野、位置和平面。
2.一种基于动态跟踪技术免除运动伪影的磁共振影像的系统,其特征在于该系统包括:
a、视频识别和跟踪模块
使用计算机视觉系统监控识别头部并监控头部运动,计算头部在三维空间的运动参数;
b、网络传输模块
提供视频识别和跟踪模块与磁共振扫描控制台之间的通讯,用于传递监控计算得到的运动参数和需要的修正结果;其中通讯程序使用TCP/IP协议,将视频识别和跟踪模块计算得到的运动参数实时传输到磁共振成像扫描控制台电脑;
c、脉冲序列控制模块
根据由网络传输模块发送来的最新运动参数,修改与空间定位相关序列参数,并将更新的序列参数发送到脉冲序列控制单元,调整扫描的视野、位置和平面;
其中所述视频识别和跟踪模块包括:
ⅰ)视频信号采集系统
模拟双眼并构造立体视觉的两个高分辨率工业摄像头,同时采集视频信息;
ⅱ)目标和标记识别
从视频信号中分离背景并识别目标和标记;
ⅲ)跟踪标记物模块
将具有特殊图像纹理的标记与被跟踪物体固定在一起,并且要在视频数据流中连续串联和跟踪该标记;
ⅳ)运动跟踪计算程序
计算标记物随时间变化在不同图像数据帧之间的光流,在三维空间坐标系重建对象和标记的空间立体坐标,计算对象的运动姿态并估算是否有空间运动,若有运动,计算运动参数,并且进行不同坐标系统即扫描仪座标系统、视频座标系统、物理世界座标系统之间的统一和转换,最后获得被跟踪物体的空间运动信息;具体包括:
子模块一  视频信号处理模块
保证两个摄像机数据的稳定和快速视频数据流入;
子模块二  视觉标定模块
计算两个摄像头的内参数集和外参数集,通过这些参数建立模拟双眼立体系统的几何模型,获得视频采集的图像像素坐标与真实空间中的实际坐标之间的对应关系;摄像头的内参数集指那些主要与摄像机的内部结构相关的参数,包括焦距在图像坐标系x,y方向的等效焦距,摄像机光轴与成像平面的交点的图像坐标;外参数集是指右摄像机相对于左摄像机的空间转换关系,包括一个空间旋转矩阵R和一个空间平移向量T;
子模块三  标记物在空间中的三维坐标计算
在双摄像机采集视频里分别识别标记物上的标记点,并通过标定参数构建的几何模型计算标记点在物理空间中的坐标;
子模块四  运动参数计算模块
使用标记点三维坐标计算被跟踪物体的刚体运动参数,参数包括三维平移和三维旋角度的六个系数;
其中运动参数的计算,设摄像机坐标系下的标记点运动前后的旋转矩阵为R c ,平移向量为t c ;假设t 0 t 1 时刻标记点的坐标分别为X c0 X c1 ,那么
Figure 59305DEST_PATH_IMAGE001
式中X c0 X c1 为3×N的矩阵,N为标记点的个数,从中估算出R c t c ,算法如下:
Figure 531875DEST_PATH_IMAGE011
式中
Figure 645324DEST_PATH_IMAGE003
Figure 570555DEST_PATH_IMAGE004
分别是t 0 t 1 时刻N个标记点的平均坐标向量;
C进行奇异值分解(SVD)得到,从而解出R c t c
Figure 669409DEST_PATH_IMAGE006
再将旋转矩阵转换成三个旋转角度;
子模块五  系统互标定模块
由于运动参数估计模块获得的运动系数是在摄像机坐标系下,需要转换到磁共振成像系统的坐标系下;做法是设计一个特殊水模,其上包含了一系列标记点,标记点坐标可以同时在摄像机和MRI两个坐标系下获得,然后可通过求解下式得到两坐标系之间的转换关系:
Xm = Rcm·Xc + Tcm
其中Xc和Xm分别为标记点在摄像机系统和磁共振成像系统下的空间坐标,Rcm为两个坐标系的3x3的旋转系数,Tcm为3x1的平移向量;Rcm和Tcm的求解与步骤四中运动参数计算的方法相同;通过Rcm和Tcm,可是用如下公式计算磁共振坐标系下的运动参数Rm和Tm
假设t 0 t 1 时刻标记点的坐标分别为X m0 X m1 ,那么:
结合
Figure 428603DEST_PATH_IMAGE008
得到:
所以
CN201310190734.6A 2013-05-22 2013-05-22 基于动态跟踪技术免除运动伪影的磁共振影像方法和系统 Active CN103315739B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310190734.6A CN103315739B (zh) 2013-05-22 2013-05-22 基于动态跟踪技术免除运动伪影的磁共振影像方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310190734.6A CN103315739B (zh) 2013-05-22 2013-05-22 基于动态跟踪技术免除运动伪影的磁共振影像方法和系统

Publications (2)

Publication Number Publication Date
CN103315739A true CN103315739A (zh) 2013-09-25
CN103315739B CN103315739B (zh) 2015-08-19

Family

ID=49184994

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310190734.6A Active CN103315739B (zh) 2013-05-22 2013-05-22 基于动态跟踪技术免除运动伪影的磁共振影像方法和系统

Country Status (1)

Country Link
CN (1) CN103315739B (zh)

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104644171A (zh) * 2013-11-19 2015-05-27 上海联影医疗科技有限公司 用于磁共振系统的定位方法及装置
CN104771167A (zh) * 2014-01-09 2015-07-15 上海联影医疗科技有限公司 磁共振扫描方法、磁共振扫描装置及系统
CN105612554A (zh) * 2013-10-11 2016-05-25 冒纳凯阿技术公司 用于表征通过视频医疗设备获取的图像的方法
CN105745922A (zh) * 2013-11-18 2016-07-06 皇家飞利浦有限公司 用于mri安全监测的视频监控
CN105763864A (zh) * 2016-02-23 2016-07-13 北京理工大学 立体视觉成像装置和立体视觉刺激设备
CN105792748A (zh) * 2013-12-02 2016-07-20 小利兰·斯坦福大学托管委员会 光学运动跟踪系统与磁共振成像扫描仪之间的坐标变换的确定
WO2016172838A1 (zh) * 2015-04-28 2016-11-03 Ge医疗系统环球技术有限公司 磁共振成像系统和磁共振成像方法
CN106205268A (zh) * 2016-09-09 2016-12-07 上海健康医学院 一种x射线模拟摄像系统和方法
CN106461747A (zh) * 2014-05-19 2017-02-22 西诺德牙科设备有限公司 利用核磁共振成像为循环运动拍摄图像的方法
CN106580470A (zh) * 2016-10-18 2017-04-26 南京医科大学附属口腔医院 基于双目视觉的头部定位方法及系统
CN106651809A (zh) * 2016-12-30 2017-05-10 上海联影医疗科技有限公司 去除图像中伪影的方法及装置
CN106780643A (zh) * 2016-11-21 2017-05-31 清华大学 磁共振多次激发扩散成像运动矫正方法
WO2017143745A1 (zh) * 2016-02-22 2017-08-31 上海乐相科技有限公司 一种确定待测对象的运动信息的方法及装置
CN107240115A (zh) * 2016-03-28 2017-10-10 浙江中正智能科技有限公司 一种基于标识物的识别方法
CN107316334A (zh) * 2017-07-31 2017-11-03 华东师范大学 个性化精准磁共振影像方法
CN108294772A (zh) * 2017-12-31 2018-07-20 北京纳米维景科技有限公司 一种ct扫描视觉定位方法及ct系统
CN108839032A (zh) * 2018-06-27 2018-11-20 深圳大图科创技术开发有限公司 一种智能机器人
CN109949366A (zh) * 2019-03-08 2019-06-28 鲁班嫡系机器人(深圳)有限公司 一种定位设备及其方法
CN110811623A (zh) * 2019-11-21 2020-02-21 上海联影医疗科技有限公司 医学图像扫描计划方法、装置、设备及存储介质
CN110946600A (zh) * 2018-09-26 2020-04-03 西门子医疗有限公司 用于记录图像数据的方法和医学成像系统
CN111166330A (zh) * 2018-11-13 2020-05-19 西门子医疗有限公司 用于减少磁共振成像中的运动伪影的方法和装置
CN111387949A (zh) * 2020-04-13 2020-07-10 上海交通大学医学院附属新华医院 一种儿童头颅扫描仪
CN111789606A (zh) * 2020-08-10 2020-10-20 上海联影医疗科技有限公司 一种成像系统和方法
CN112545543A (zh) * 2021-02-19 2021-03-26 南京安科医疗科技有限公司 基于病床运动信息的扫描运动监测方法、系统及存储介质
CN112649773A (zh) * 2020-12-22 2021-04-13 上海联影医疗科技股份有限公司 磁共振扫描方法、装置、设备及存储介质
CN113240732A (zh) * 2014-05-29 2021-08-10 株式会社高迎科技 光学跟踪系统及光学跟踪系统的标记部姿势及位置算出方法
CN115359144A (zh) * 2022-10-19 2022-11-18 之江实验室 一种磁共振平面回波成像伪影仿真方法及系统
US11567156B2 (en) 2019-05-08 2023-01-31 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for magnetic resonance imaging
US11707235B2 (en) 2019-05-08 2023-07-25 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for controlling imaging
TWI814680B (zh) * 2023-02-14 2023-09-01 國立中正大學 三維影像處理之校正方法
CN117192458A (zh) * 2023-10-09 2023-12-08 无锡市第五人民医院 基于动态跟踪技术免除运动伪影的磁共振影像生成方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4937526A (en) * 1988-11-23 1990-06-26 Mayo Foundation For Medical Education And Research Adaptive method for reducing motion and flow artifacts in NMR images
US20040213480A1 (en) * 2003-04-24 2004-10-28 Morton Roger R. A. Method and system for automatically reducing aliasing artifacts
US20060239585A1 (en) * 2005-04-04 2006-10-26 Valadez Gerardo H System and method for reducing artifacts in motion corrected dynamic image sequences
CN101017197A (zh) * 2006-02-10 2007-08-15 西门子公司 校正图像伪影的方法
CN101133431A (zh) * 2005-02-03 2008-02-27 布拉科成像S.P.A.公司 能够减少物体运动造成的成像伪影的生物医学图像配准方法和计算机程序产品
CN101411620A (zh) * 2007-09-17 2009-04-22 威斯康星校友研究基金会 用于减少高抑制医学图像中运动伪像的方法
CN101470178A (zh) * 2007-12-29 2009-07-01 西门子(中国)有限公司 一种抑制残余运动伪影的方法及装置
US20110249882A1 (en) * 2007-08-01 2011-10-13 Depuy Orthop??Die Gmbh Image processing

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4937526A (en) * 1988-11-23 1990-06-26 Mayo Foundation For Medical Education And Research Adaptive method for reducing motion and flow artifacts in NMR images
US20040213480A1 (en) * 2003-04-24 2004-10-28 Morton Roger R. A. Method and system for automatically reducing aliasing artifacts
CN101133431A (zh) * 2005-02-03 2008-02-27 布拉科成像S.P.A.公司 能够减少物体运动造成的成像伪影的生物医学图像配准方法和计算机程序产品
US20060239585A1 (en) * 2005-04-04 2006-10-26 Valadez Gerardo H System and method for reducing artifacts in motion corrected dynamic image sequences
CN101017197A (zh) * 2006-02-10 2007-08-15 西门子公司 校正图像伪影的方法
US20110249882A1 (en) * 2007-08-01 2011-10-13 Depuy Orthop??Die Gmbh Image processing
CN101411620A (zh) * 2007-09-17 2009-04-22 威斯康星校友研究基金会 用于减少高抑制医学图像中运动伪像的方法
CN101470178A (zh) * 2007-12-29 2009-07-01 西门子(中国)有限公司 一种抑制残余运动伪影的方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
孙杰 等: "MR图像伪影的种类及消除方法的探讨", 《临床影像技术》, vol. 22, no. 1, 31 January 2007 (2007-01-31) *
龙响云 等: "高场磁共振成像常见伪影与消除分析", 《中南医学科学杂志》, vol. 39, no. 3, 31 May 2011 (2011-05-31) *

Cited By (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105612554A (zh) * 2013-10-11 2016-05-25 冒纳凯阿技术公司 用于表征通过视频医疗设备获取的图像的方法
CN105612554B (zh) * 2013-10-11 2019-05-10 冒纳凯阿技术公司 用于表征通过视频医疗设备获取的图像的方法
CN105745922A (zh) * 2013-11-18 2016-07-06 皇家飞利浦有限公司 用于mri安全监测的视频监控
CN105745922B (zh) * 2013-11-18 2019-06-04 皇家飞利浦有限公司 用于mri安全监测的视频监控
CN104644171B (zh) * 2013-11-19 2019-06-28 上海联影医疗科技有限公司 用于磁共振系统的定位方法及装置
CN104644171A (zh) * 2013-11-19 2015-05-27 上海联影医疗科技有限公司 用于磁共振系统的定位方法及装置
CN105792748B (zh) * 2013-12-02 2019-05-03 小利兰·斯坦福大学托管委员会 光学运动跟踪系统与磁共振成像扫描仪之间的坐标变换的确定
CN105792748A (zh) * 2013-12-02 2016-07-20 小利兰·斯坦福大学托管委员会 光学运动跟踪系统与磁共振成像扫描仪之间的坐标变换的确定
CN104771167B (zh) * 2014-01-09 2018-11-30 上海联影医疗科技有限公司 磁共振扫描方法、磁共振扫描装置及系统
CN104771167A (zh) * 2014-01-09 2015-07-15 上海联影医疗科技有限公司 磁共振扫描方法、磁共振扫描装置及系统
CN106461747A (zh) * 2014-05-19 2017-02-22 西诺德牙科设备有限公司 利用核磁共振成像为循环运动拍摄图像的方法
CN106461747B (zh) * 2014-05-19 2020-01-10 西诺德牙科设备有限公司 利用核磁共振成像为循环运动拍摄图像的方法
CN113240732A (zh) * 2014-05-29 2021-08-10 株式会社高迎科技 光学跟踪系统及光学跟踪系统的标记部姿势及位置算出方法
CN113240732B (zh) * 2014-05-29 2024-04-19 株式会社高迎科技 光学跟踪系统及光学跟踪系统的标记部姿势及位置算出方法
WO2016172838A1 (zh) * 2015-04-28 2016-11-03 Ge医疗系统环球技术有限公司 磁共振成像系统和磁共振成像方法
WO2017143745A1 (zh) * 2016-02-22 2017-08-31 上海乐相科技有限公司 一种确定待测对象的运动信息的方法及装置
CN105763864A (zh) * 2016-02-23 2016-07-13 北京理工大学 立体视觉成像装置和立体视觉刺激设备
CN107240115B (zh) * 2016-03-28 2019-07-09 浙江中正智能科技有限公司 一种基于标识物的识别方法
CN107240115A (zh) * 2016-03-28 2017-10-10 浙江中正智能科技有限公司 一种基于标识物的识别方法
CN106205268A (zh) * 2016-09-09 2016-12-07 上海健康医学院 一种x射线模拟摄像系统和方法
CN106205268B (zh) * 2016-09-09 2022-07-22 上海健康医学院 一种x射线模拟摄像系统和方法
CN106580470A (zh) * 2016-10-18 2017-04-26 南京医科大学附属口腔医院 基于双目视觉的头部定位方法及系统
CN106580470B (zh) * 2016-10-18 2019-04-02 南京医科大学附属口腔医院 基于双目视觉的头部定位方法及系统
CN106780643A (zh) * 2016-11-21 2017-05-31 清华大学 磁共振多次激发扩散成像运动矫正方法
CN106780643B (zh) * 2016-11-21 2019-07-26 清华大学 磁共振多次激发扩散成像运动矫正方法
CN106651809B (zh) * 2016-12-30 2020-03-31 上海联影医疗科技有限公司 去除图像中伪影的方法及装置
CN106651809A (zh) * 2016-12-30 2017-05-10 上海联影医疗科技有限公司 去除图像中伪影的方法及装置
CN107316334A (zh) * 2017-07-31 2017-11-03 华东师范大学 个性化精准磁共振影像方法
CN107316334B (zh) * 2017-07-31 2020-02-14 华东师范大学 个性化精准磁共振影像方法
CN108294772A (zh) * 2017-12-31 2018-07-20 北京纳米维景科技有限公司 一种ct扫描视觉定位方法及ct系统
CN108839032A (zh) * 2018-06-27 2018-11-20 深圳大图科创技术开发有限公司 一种智能机器人
CN110946600A (zh) * 2018-09-26 2020-04-03 西门子医疗有限公司 用于记录图像数据的方法和医学成像系统
CN110946600B (zh) * 2018-09-26 2024-03-22 西门子医疗有限公司 用于记录图像数据的方法和医学成像系统
CN111166330B (zh) * 2018-11-13 2023-11-07 西门子医疗有限公司 用于减少磁共振成像中的运动伪影的方法和装置
CN111166330A (zh) * 2018-11-13 2020-05-19 西门子医疗有限公司 用于减少磁共振成像中的运动伪影的方法和装置
CN109949366A (zh) * 2019-03-08 2019-06-28 鲁班嫡系机器人(深圳)有限公司 一种定位设备及其方法
US11707235B2 (en) 2019-05-08 2023-07-25 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for controlling imaging
US11567156B2 (en) 2019-05-08 2023-01-31 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for magnetic resonance imaging
CN110811623A (zh) * 2019-11-21 2020-02-21 上海联影医疗科技有限公司 医学图像扫描计划方法、装置、设备及存储介质
CN111387949B (zh) * 2020-04-13 2023-08-08 上海交通大学医学院附属新华医院 一种儿童头颅扫描仪
CN111387949A (zh) * 2020-04-13 2020-07-10 上海交通大学医学院附属新华医院 一种儿童头颅扫描仪
CN111789606A (zh) * 2020-08-10 2020-10-20 上海联影医疗科技有限公司 一种成像系统和方法
CN112649773A (zh) * 2020-12-22 2021-04-13 上海联影医疗科技股份有限公司 磁共振扫描方法、装置、设备及存储介质
CN112649773B (zh) * 2020-12-22 2023-05-26 上海联影医疗科技股份有限公司 磁共振扫描方法、装置、设备及存储介质
CN112545543A (zh) * 2021-02-19 2021-03-26 南京安科医疗科技有限公司 基于病床运动信息的扫描运动监测方法、系统及存储介质
CN115359144B (zh) * 2022-10-19 2023-03-03 之江实验室 一种磁共振平面回波成像伪影仿真方法及系统
CN115359144A (zh) * 2022-10-19 2022-11-18 之江实验室 一种磁共振平面回波成像伪影仿真方法及系统
TWI814680B (zh) * 2023-02-14 2023-09-01 國立中正大學 三維影像處理之校正方法
CN117192458A (zh) * 2023-10-09 2023-12-08 无锡市第五人民医院 基于动态跟踪技术免除运动伪影的磁共振影像生成方法
CN117192458B (zh) * 2023-10-09 2024-03-26 无锡市第五人民医院 基于动态跟踪技术免除运动伪影的磁共振影像生成方法

Also Published As

Publication number Publication date
CN103315739B (zh) 2015-08-19

Similar Documents

Publication Publication Date Title
CN103315739B (zh) 基于动态跟踪技术免除运动伪影的磁共振影像方法和系统
CN110874864B (zh) 获取对象三维模型的方法、装置、电子设备及系统
CN109166077B (zh) 图像对齐方法、装置、可读存储介质及计算机设备
CN100373394C (zh) 基于仿生复眼的运动目标的检测方法
CN108765498A (zh) 单目视觉跟踪方法、装置及存储介质
Stoyanov Stereoscopic scene flow for robotic assisted minimally invasive surgery
CN111343367B (zh) 一种十亿像素虚拟现实视频采集装置、系统与方法
CN109758230A (zh) 一种基于增强现实技术的神经外科手术导航方法和系统
CN108830905A (zh) 仿真医疗器械的双目标定定位方法及虚拟仿真医教系统
CN103948361B (zh) 无标志点的内窥镜定位跟踪方法和系统
Cañero et al. Predictive (un) distortion model and 3-D reconstruction by biplane snakes
CN103313675A (zh) 用于内窥镜手术的术中照相机校准
CN105395196B (zh) Eeg或meg电极在脑mr图像中的定位装置和方法
CN105809654A (zh) 目标对象跟踪方法、装置和立体显示设备及方法
US20150237325A1 (en) Method and apparatus for converting 2d images to 3d images
Beck et al. Volumetric calibration and registration of multiple RGBD-sensors into a joint coordinate system
Itoh et al. Performance and sensitivity analysis of indica: Interaction-free display calibration for optical see-through head-mounted displays
Cvišić et al. Recalibrating the KITTI dataset camera setup for improved odometry accuracy
D'Apuzzo Surface measurement and tracking of human body parts from multi station video sequences
CN102222348A (zh) 一种三维目标运动矢量计算方法
CN111401340B (zh) 目标对象的运动检测方法和装置
US20210035326A1 (en) Human pose estimation system
CN108742495A (zh) 一种用于医疗领域的三维立体腹腔镜系统及立体匹配方法
CN110097623A (zh) 一种非同源图像数据信息融合处理方法及系统
CN112132971A (zh) 三维人体建模方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant