CN110956633B - 一种基于虚拟立体定位像的快速ct扫描方法及系统 - Google Patents

Abstract

本发明公开了一种基于虚拟立体定位像的快速CT扫描方法及系统，方法包括步骤：输入不同角度拍摄的包括待扫描区域在内的病人图像，对病人图像进行关键点检测；输入定位像数据模板并标记出关键点；根据病人图像和定位像数据模板中的关键点，进行匹配计算，获得立体虚拟定位像；根据所述立体虚拟定位像确定病人的CT扫描区域，输出最终的CT图像。本发明利用光学图像生成的虚拟定位像替代传统定位像，减少扫描定位像所需要的时间，进而减少了病人所接受的辐射剂量，而且能够清晰地显示病人的解剖结构，使得医生能够更加精确地定位扫描区域，减轻了医生的工作量。

Description

一种基于虚拟立体定位像的快速CT扫描方法及系统

技术领域

本发明涉及医学成像技术领域，具体涉及一种基于虚拟立体定位像的快速CT扫描方法及系统。

背景技术

目前在CT扫描流程中，为了更加准确的选定扫描区域，需要首先扫描定位像，然后在定位像中选择扫描区域。如图5所示，一般CT流程包括：病人登记；根据扫描需要，采集水平和/或垂直方向的定位像；CT扫描。医生通常根据经验判断病人定位像扫描区域，此方法获得的定位像并不准确。公开号为CN110338835A的中国专利“一种智能扫描立体监测方法及系统”，公开了一种在有辅助相机的场景下，通过相机拍摄待扫描病人位于检测台上的图像、然后对图像进行处理，实现快速准确判断病人定位像扫描区域的方法。其根据不同患者类别信息不同的特点，准确地定位特征点，提高了图像中体位信息的准确性，并进一步判断各部位的移动信息，获得较为准确的定位像，但是其并没有解决如下技术问题：

1、定位像扫描也存在一定的辐射剂量，尤其是对于低剂量CT筛查的协议，定位像扫描的剂量占比达到30-50％左右，对患者极为不利；所以如果能够减少或省略低剂量扫描，就能够大幅度减少患者接受的辐射剂量。

2、正常CT扫描时，机架是连续旋转的，准备时间很短。但是扫描定位像需要机架从运动到停止，直到定位在指定角度后再进行扫描，整个机架的加速、减速和定位均需要时间，因此扫描的准备时间比较长，影响了扫描效率，尤其是在应用双定位像的条件下，不能适应体检、筛查等大规模筛查的需求。

3、在常规的CT扫描中，由于扫描效率和剂量等因素的制约，常常只应用一个定位像，而根据一个定位像来精确确定扫描范围，对医生临床经验要求较高，欠缺临床经验的医生选择的定位像区域可能不够准确，如果重复做定位像扫描，病人可能遭受过多的辐射。

发明内容

技术目的：为解决上述技术问题，本发明提供了一种基于虚拟立体定位像的快速CT扫描方法及系统，利用光学图像生成的虚拟定位像替代传统定位像，减少扫描定位像所需要的时间，进而减少了病人所接受的辐射剂量，而且能够清晰地显示病人的解剖结构，使得医生能够更加精确地定位扫描区域，减轻了医生的工作量。

技术方案：为实现这一技术目的，本发明采用了如下技术方案：

一种基于虚拟立体定位像的快速CT扫描方法，其特征在于，包括步骤：

S1、输入不同角度拍摄的包括待扫描区域在内的病人图像，并对病人图像进行人体部位的关键点检测；

S2、输入人体数据的定位像数据模板，在定位像数据模板中标记出人体部位的关键点；

S3、根据病人图像和定位像数据模板中的关键点，将对应相同部位的关键点作为匹配点，根据匹配点的位置信息进行匹配计算，获得立体虚拟定位像；

S4、根据所述立体虚拟定位像确定病人的CT扫描区域，输出最终的CT图像。

优选地，所述步骤S1中病人图像包括俯视和侧面视角拍摄的图像，步骤S2中定位像数据模板采用CT扫描的人体数据，分别沿冠状面和矢状面对人体数据取平均，冠状面和矢状面方向分别对应俯视和侧面视角。

优选地，所述步骤S3中，匹配计算时，建立用于匹配处理CT图像的变换函数如下：

其中，x_pic、y_pic为病人图像中关键点的横坐标、纵坐标，x_ct、y_ct为定位像数据模板中关键点的横坐标、纵坐标，将若干个匹配点的横坐标和纵坐标分别带入变换函数中，使得均方误差最小，计算得到系数k₁₁、k₁₂、k₁₃、k₂₁、k₂₂、k₂₃的值，确定变换函数。

优选地，所述步骤S1中将病人图像输入训练好的神经网络进行关键点检测，方法为：输入病人图像、通过卷积网络提取病人图像中的特征，然后通过上采样输出人体关键部位掩膜。

优选地，所述步骤S1中将病人图像输入训练好的神经网络进行关键点检测，方法为：输入病人图像、通过特征提取网络提取病人图像中的特征，粗略回归计算输出第一关键点坐标；然后对第一关键点坐标根据人体部位进行分类和修正，输出第二关键点坐标。

优选地，所述病人图像包括光学图像和深度图像。

优选地，所述关键点包括双眼、鼻子、嘴角、颈部、双肩、胯部、膝盖、双脚。

本发明还公开了一种基于虚拟立体定位像的快速CT扫描系统，其特征在于，包括：

图像获取模块，用于不同角度拍摄的包括待扫描区域在内的病人图像；

图像处理模块，用于对病人图像进行关键点检测；

CT扫描模块，用于扫描目标对像并获得对应的CT数据；

CT数据标注模块，用于对定位像数据模板进行关键点标记；

虚拟定位像生成模块，用于对病人图像和定位像数据模板中的关键点进行匹配运算，并生成虚拟定位像。

优选地，所述图像获取模块采用双目视觉系统，同时采集两个不同角度的病人图像。

技术效果：由于采用了上述技术方案，本发明具有如下技术效果：

(1)、本发明利用光学图像生成的虚拟定位像替代传统定位像，减少扫描定位像所需要的时间，减少单个病人的扫描时间，提升扫描效率，减轻医生的工作量；而且能够清晰地显示病人的解剖结构，使得医生能够更加精确地定位扫描区域。

(2)、利用光学采集图像，可以采用双目视觉的系统来同时实时地采集光学图像和深度图像(rgb-d图像)，节省了机械运动的时间；根据rgb-d图像来生成虚拟的立体定位像，快速的为CT扫描选择扫描区域。此方法节省了定位像的扫描的辐射剂量和扫描时间，大幅度加快了扫描流程，同时提供立体定位像，能够更加精确的进行扫描定位。

(3)、本发明的方法将能够在相机拍摄的图像上展示病人的解剖结构，使得医生能够更加精准定位扫描区域，且本发明方法生成的虚拟立体定位像可以避免病人扫描定位像，减少病人所接受的辐射剂量。

(4)、本发明的方法充分利用现有CT产品硬件，最终将算法集成在影像链中。

附图说明

图1为本发明的虚拟立体双定位像方法的流程图；

图2中，图(a)为俯视视角从病床上方拍摄病人图像的示意图；

图(b)为侧视视角从病床侧面拍摄病人图像的示意图；

图3中，图(c)和图(d)分别为两种关键点检测方法的流程图；

图4是采用本发明的虚拟立体双定位像方法的CT扫描的流程图；

图5为常规的双定位像的CT扫描的流程图。

具体实施方式

如图1至图4所示，本发明提供一种基于虚拟立体定位像的快速CT扫描方法及系统，其利用rgb-d图像生成虚拟定位像，具体包括步骤1)～5)。

1)、病人图像输入：

如图2所示，输入病人图像为两个方向拍摄的病人图像。利用光学采集图像，可以采用双目视觉的系统来同时实时的采集光学图像和深度图像(rgb-d图像)，节省了机械运动的时间。

2)、关键点检测：

本发明可采用如图3所示的两种网络图像关键点检测方法对病人图像进行处理。图3中的(c)所示，输入图像、通过卷积网络提取特征，然后通过上采样输出人体关键部位掩膜。图3中的(d)所示，输入图像、通过特征提取网络提取特征，粗略回归输出关键点坐标，然后将关键点坐标根据部位进行分类和修正，最终输出人体关键点部位和坐标。特征提取网络为DenseNet、ResNet等网络框架。两种网络结构采用类似的训练方法。

以图3中的(c)所示方法中的网络为例，对其进行网络训练：从临床数据中选取10000多图像，图像大小为640*480，手动标记人体关键点坐标，其中关键点包括不限于双眼、鼻子、嘴角、颈部、双肩、胯部、膝盖和双脚等，通过tensorflow框架训练网络。网络输入数据大小为1*640*480，网络输出数据形状为nkp+1*640*480，其中nkp为人体关键点数量，网络损失函数为交叉熵函数，如下：

Loss＝y_t*logy_p+(1-y_t)*log(1-y_p)

其中，y_t为真实数据标记，y_p为网络预测概率。

3)、定位像数据模板以及关键点标记

定位像数据模板采用CT扫描的人体数据，分别沿冠状面和矢状面对数据取平均，分别对应俯视视角拍摄的图像和侧面拍摄的图像。然后在定位像数据模板中标记出关键点，其中关键点部位包括不限于双眼、鼻子、嘴角、颈部、双肩、胯部、膝盖和双脚等。

4)、图像和定位像数据模板匹配

根据图像关键点和定位像数据模板的关键点将图像和定位像数据模板匹配。通过图像和定位像模板数据中相同部位的关键点计算图像匹配的结果。

具体计算匹配关键点的方法如下：

x方向变换函数参数，其函数为：

x_pic＝x_ct*(1+k₁₁*r²+k₁₂*r⁴+k₁₃*r⁶)

y方向变换函数参数，其函数为：

y_pic＝y_ct*(1+k₂₁*r²+k₂₂*r⁴+k₂₃*r⁶)

其中，x_pic、y_pic为拍摄图像中关键点的横坐标、纵坐标，x_ct、y_ct为CT图像中关键点横坐标、纵坐标，r²＝x²+y²。

将匹配点的x，y对分别带入上面两个公式中，使得均方误差最小，计算参数k₁₁、k₁₂、k₁₃、k₂₁、k_22、k₂₃。

5)、输出匹配的虚拟定位像图像

将定位像数据模板根据上述两个公式进行变换，输出与拍摄图像匹配的虚拟定位像数据。医生可以根据匹配后的虚拟定位像数据判断病人的解剖结构，从而能够更加精确定位病人的扫描区域。

以上所述仅是本发明的优选实施方式，应当指出：对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (8)

1.一种基于虚拟立体定位像的快速CT扫描方法，其特征在于，包括步骤：

S1、输入不同角度拍摄的包括待扫描区域在内的病人图像，并对病人图像进行人体部位的关键点检测；

S2、输入人体数据的定位像数据模板，在定位像数据模板中标记出人体部位的关键点；

S3、根据病人图像和定位像数据模板中的关键点，将对应相同部位的关键点作为匹配点，根据匹配点的位置信息进行匹配计算，获得立体虚拟定位像；

S4、根据所述立体虚拟定位像确定病人的CT扫描区域，输出最终的CT图像；

所述步骤S3中，匹配计算时，建立用于匹配处理CT图像的变换函数如下：

其中，x_pic、y_pic为病人图像中关键点的横坐标、纵坐标，x_ct、y_ct为定位像数据模板中关键点的横坐标、纵坐标，将若干个匹配点的横坐标和纵坐标分别带入变换函数中，使得每个(x_pic、y_pic)与对应的经过所述变换得到的(x_ct、y_ct)之间的均方误差最小，计算得到系数k₁₁、k₁₂、k₁₃、k₂₁、k₂₂、k₂₃的值，确定变换函数。

2.根据权利要求1所述的一种基于虚拟立体定位像的快速CT扫描方法，其特征在于：所述步骤S1中病人图像包括俯视和侧面视角拍摄的图像，步骤S2中定位像数据模板采用CT扫描的人体数据，分别沿冠状面和矢状面对人体数据取平均，冠状面和矢状面方向分别对应俯视和侧面视角。

3.根据权利要求1所述的一种基于虚拟立体定位像的快速CT扫描方法，其特征在于，所述步骤S1中进行关键点检测的方法为，将病人图像输入训练好的神经网络进行关键点检测：输入病人图像、通过卷积网络提取病人图像中的特征，然后通过上采样输出人体关键部位掩膜。

4.根据权利要求1所述的一种基于虚拟立体定位像的快速CT扫描方法，其特征在于，所述步骤S1中进行关键点检测的方法为，将病人图像输入训练好的神经网络进行关键点检测：输入病人图像、通过特征提取网络提取病人图像中的特征，粗略回归计算输出第一关键点坐标；然后对第一关键点坐标根据人体部位进行分类和修正，输出第二关键点坐标。

5.根据权利要求1所述的一种基于虚拟立体定位像的快速CT扫描方法，其特征在于：所述病人图像包括光学图像和深度图像。

6.根据权利要求1所述的一种基于虚拟立体定位像的快速CT扫描方法，其特征在于：所述关键点包括双眼、鼻子、嘴角、颈部、双肩、胯部、膝盖、双脚。

7.用于实现权利要求1至6任一所述方法的一种基于虚拟立体定位像的快速CT扫描系统，其特征在于，包括：

图像获取模块，用于不同角度拍摄的包括待扫描区域在内的病人图像；

图像处理模块，用于对病人图像进行关键点检测；

CT扫描模块，用于扫描目标对像并获得对应的CT数据；

CT数据标注模块，用于对定位像数据模板进行关键点标记；

虚拟定位像生成模块，用于对病人图像和定位像数据模板中的关键点进行匹配运算，并生成虚拟定位像。

8.根据权利要求7所述的一种基于虚拟立体定位像的快速CT扫描系统，其特征在于：所述图像获取模块采用双目视觉系统，同时采集两个不同角度的病人图像。

Images