CN107194922A - 一种血管内超声图像序列关键帧的提取方法 - Google Patents
一种血管内超声图像序列关键帧的提取方法 Download PDFInfo
- Publication number
- CN107194922A CN107194922A CN201710362384.5A CN201710362384A CN107194922A CN 107194922 A CN107194922 A CN 107194922A CN 201710362384 A CN201710362384 A CN 201710362384A CN 107194922 A CN107194922 A CN 107194922A
- Authority
- CN
- China
- Prior art keywords
- mrow
- field picture
- searched
- image sequence
- intravascular ultrasound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000002608 intravascular ultrasound Methods 0.000 title claims abstract description 120
- 238000000034 method Methods 0.000 title claims abstract description 57
- 230000002708 enhancing effect Effects 0.000 claims abstract description 6
- 230000008569 process Effects 0.000 claims description 18
- 238000010276 construction Methods 0.000 claims description 10
- 230000000747 cardiac effect Effects 0.000 claims description 7
- 239000000203 mixture Substances 0.000 claims description 6
- 238000001228 spectrum Methods 0.000 claims description 6
- 238000002604 ultrasonography Methods 0.000 claims description 6
- 239000008280 blood Substances 0.000 claims description 4
- 210000004369 blood Anatomy 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 3
- 229910017435 S2 In Inorganic materials 0.000 claims 1
- 239000011800 void material Substances 0.000 claims 1
- 238000012545 processing Methods 0.000 abstract description 6
- 239000000284 extract Substances 0.000 abstract description 4
- 238000005516 engineering process Methods 0.000 description 4
- 210000004204 blood vessel Anatomy 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000007812 deficiency Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 241000406668 Loxodonta cyclotis Species 0.000 description 1
- 244000208734 Pisonia aculeata Species 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000003759 clinical diagnosis Methods 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000686 essence Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000002560 therapeutic procedure Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10132—Ultrasound image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
本发明公开了一种血管内超声图像序列关键帧的提取方法,该方法首先计算血管内超声图像序列中各帧图像Zernike矩,针对于每帧图像,将其与后一帧图像Zernike矩的欧式距离作为每帧图像的距离特征值,根据每帧图像的距离特征值构造一维距离特征函数;通过一维距离特征函数频域空间获取到检查对象的心率,然后根据图像采集速率、检查对象的心率以及人体心率范围确定出关键帧搜索范围;同时通过一维指数滤波器对每帧图像的距离特征值进行增强处理,得到每帧图像增强的距离特征值;根据所有帧图像增强的一维距离特征值,通过关键帧搜索范围搜索出构成全局最短路径的各帧图像,作为关键帧,本发明方法能够快速、准确、有效地提取出关键帧。
Description
技术领域
本发明涉及图像处理技术,特别涉及一种血管内超声图像序列关键帧的提取方法。
背景技术
血管内超声(Intravascular Ultrasound,IVUS)作为临床上诊断血管内病变的“金标准”之一,是进行微创介入治疗的重要检查手段。检查过程中是将微型化的超声探头经导管技术进入血管腔内,显示血管横截面图像。临床采用的超声导管回撤速率是0.5mm/s,采集速率为30帧/s,检查一段长约15mm的血管回撤一次可采集900帧图像,不仅图像数据量大,而且相邻帧之间的关联性高,处理起来耗时、繁琐和效率低下。关键帧是记录血管内有重大形态改变位置的帧,具有很强代表性且数量较总帧数少很多。所以对后期的图像分析以及临床诊断有很大帮助。
一般提取血管内超声图像关键帧采用ECG门控和图像门控技术,前者是利用ECG采集装置在介入采集图像过程中,在每个心动周期的同一时相(一般为R波)采集关键帧。但临床设备缺少ECG门控图像采集装置以及延长介入时间限制了此方面的应用;后者图像门控技术弥补了ECG门控的不足,采用后处理的方式,代表性方法是O'Malley S Mn,Carlier SG,Naghavi M,et al.Image-based frame gating of IVUS pullbacks:A surrogate forecg[C]//Acoustics,Speech and Signal Processing,2007.ICASSP 2007.IEEEInternational Conference on.IEEE,2007,1:I-433-I-436(基于图像门控的IVUS回撤:心电门控的替代法),基本原理是通过计算图像灰度特征的归一化相关系数,作为各帧图像之间相似度的衡量,构建图像序列的差异矩阵,通过分析差异矩阵的周期性结构寻找心动周期中心脏舒张末期采集的一帧图像作为关键帧,组成门控序列。但这种方法计算复杂,将帧之间的均方误差作为相似性匹配准则,对心率变化较大的IVUS序列,受运动的干扰较大,提取的关键帧结果不佳。
发明内容
本发明的目的在于克服现有技术的缺点与不足,提供一种血管内超声图像序列关键帧的提取方法,该方法对于心脏运动具有很强的鲁棒性,能够快速、准确而有效地提取出将血管内超声图像序列中的关键帧。
本发明的目的通过下述技术方案实现:一种血管内超声图像序列关键帧的提取方法,步骤如下:
S1、采集血管内超声图像序列,并且计算出血管内超声图像序列中各帧图像的Zernike矩;
S2、针对于每帧图像,计算出其与后一帧图像Zernike矩的欧式距离,将上述计算得到的欧式距离作为每帧图像的距离特征值,然后根据每帧图像的距离特征值构造得到血管内超声图像序列的一维距离特征函数;
S3、将血管内超声图像序列的一维距离特征函数傅里叶变换到频域空间上,通过该频域空间获取到血管内超声图像序列对应检查对象的心率;根据图像采集速率、血管内超声图像序列对应检查对象的心率以及人体心率范围确定出关键帧搜索范围;同时构造一维指数滤波器,通过一维指数滤波器针对步骤S2中构造得到每帧图像的距离特征值进行增强处理,得到每帧图像增强的一维距离特征值;
S4、根据步骤S3中获取到的血管内超声图像序列中所有帧图像增强的一维距离特征值,通过关键帧搜索范围搜索出构成全局最短路径的各帧图像,作为关键帧。
优选的,血管内超声图像序列中各帧图像的Zernike矩计算过程如下:
针对于血管内超声图像序列中大小为N×N的各帧图像,得到其Zernike矩的实部和虚部分别如下:
其中
其中Rnm(ρ)表示各帧图像中像素点(x,y)处的径向多项式,n和m为正交多项式的阶数,n是非负整数,n-|m|是偶数,并且n≥|m|,s为阶数变量;Ci为血管内超声图像序列中第i帧图像的Zernike矩的实部,Si为血管内超声图像序列中第i帧图像的Zernike矩的虚部;其中x和y分别表示各帧图像中像素点的横坐标和纵坐标;
fi(r,σ)是血管内超声图像序列中第i帧图像中极坐标为(r,σ)处像素点对应的灰度值;
其中上述公式中r和σ为引入的两个参数,定义r=max(|x|,|y|);
当|x|=r,则
当|y|=r,则
通过参数r和σ获取到像素点(x,y)对应的极坐标(ρ,θ)为:
ρ=2r/N,θ=πσ(4r)。
优选的,步骤S2中每帧图像的距离特征值d(i)为:
其中d(i)为血管内超声图像序列中第i帧图像的距离特征值,l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;Ci为血管内超声图像序列中第i帧图像的Zernike矩的实部,Ci+1为血管内超声图像序列中第i+1帧图像的Zernike矩的实部,Si为血管内超声图像序列中第i帧图像的Zernike矩的虚部,Si+1为血管内超声图像序列中第i+1帧图像的Zernike矩的虚部。
优选的,步骤S3中通过频域空间获取到血管内超声图像序列对应检查对象的心率的具体方式为:在频域空间中找到频谱峰值,将该频谱峰值对应的频率值作为血管内超声图像序列对应检查对象的心率。
优选的,步骤S3中根据图像采集速率、血管内超声图像序列对应检查对象的心率以及人体心率范围确定出关键帧搜索范围为:
L0=(60×R)/R0;
L1=(60×R)/R1;
L2=(60×R)/R2;
其中△为关键帧搜索范围,R为图像采集速率,R0为血管内超声图像序列对应检查对象的心率,R1~R2为人体心率范围,L0为血管内超声图像序列对应检查对象的心率R0所对应的心动周期长度;L1~L2为人体心率范围R1~R2所对应的心动周期长度范围。
优选的,所述图像采集速率R=30帧/秒,所述人体心率范围R1~R2为60~100次/分。
优选的,步骤S3中构造的一维指数滤波器h(δ)为:
步骤S3中获取到的每帧图像增强的距离特征值为:
其中l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;d(i)为血管内超声图像序列中第i帧图像的距离特征值;D(i)为第i帧图像增强的距离特征值。
优选的,步骤S4中获取到关键帧的具体过程如下:
S41、首先从血管内超声图像序列的所有帧图像增强的距离特征值中选取出其中的最小值、第一局部最小值和最后一个局部最小值;
S42、将第一局部最小值对应图像帧作为当前起点纳入最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S43、通过评估函数计算各待搜索项的评估函数值,将评估函数值为0的待搜索项进行剔除,得到最终的待搜索项,然后进入步骤S44;
S44、针对于步骤S43得到的最终的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S45、将步骤S44中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最小值对应帧图像,若是,则进入步骤S46,若否,则进入步骤S43;
S46、将最小值对应图像帧作为当前起点纳入当前最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S47、通过评估函数计算步骤S46中获取的各待搜索项的评估函数值,将评估函数值为0的待搜索项进行剔除,得到最终的待搜索项,然后进入步骤S48;
S48、针对于步骤S47得到的最终的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入最短路径中;
S49、将步骤S48中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最后一个局部最小值对应帧图像,若否,则进入步骤S47,若是,则结束搜索,将上述构成全局最短路径的各帧图像作为关键帧。
更进一步的,所述步骤S43和步骤S47中通过评估函数计算待搜索项的评估函数值的具体过程如下:
其中l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;D(i)为血管内超声图像序列中第i帧图像的增强的距离特征值,当步骤S43或步骤S47中血管内超声图像序列中第i帧图像为待搜索项时,则通过评估函数计算出第i帧图像的评估函数值为F(i),当F(i)为0时,则将该待搜索项剔除,当F(i)为1时,则保留该待搜索项。
优选的,步骤S4中获取到关键帧的具体过程如下:
S41、首先从血管内超声图像序列的所有帧图像增强的距离特征值中选取出其中的最小值、第一局部最小值和最后一个局部最小值;
S42、将第一局部最小值对应图像帧作为当前起点纳入最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S43、针对于步骤S42得到的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S44、将步骤S43中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围,获取到多帧图像作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最小值对应帧图像,若是,则进入步骤S45,若否,则进入步骤S43;
S45、将最小值对应图像帧作为当前起点纳入最短路径,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S46、针对于步骤S45得到的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S47、将步骤S46中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围,获取到多帧图像作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最后一个局部最小值对应帧图像,若否,则进入步骤S46,若是,则结束搜索,将上述构成全局最短路径的各帧图像作为关键帧。
本发明相对于现有技术具有如下的优点及效果:
(1)本发明血管内超声图像序列关键帧的提取方法首先计算出采集的血管内超声图像序列中各帧图像的Zernike矩,针对于每帧图像,将其与后一帧图像Zernike矩的欧式距离作为每帧图像的距离特征值,根据每帧图像的距离特征值构造得到血管内超声图像序列的一维距离特征函数;通过血管内超声图像序列的一维距离特征函数频域空间获取到检查对象的心率,然后根据图像采集速率、检查对象的心率以及人体心率范围确定出关键帧搜索范围;同时通过一维指数滤波器对每帧图像的距离特征值进行增强处理,得到每帧图像增强的距离特征值;根据血管内超声图像序列中所有帧图像增强的一维距离特征值,根据关键帧搜索范围搜索出构成全局最短路径的各帧图像,作为关键帧。其中相邻帧之间Zernike矩的欧氏距离反映了图像整体灰度变化,本发明采用Zernike矩的欧式距离构造的一维距离特征函数,能够代表相邻帧的差异度,由于Zernike矩具有旋转不变性,因此,它对于血管内超声图像采集过程中因心脏或导管的运动产生的图像位移,具有更强的鲁棒性。另外,本发明方法通过一维指数滤波器对每帧图像的距离特征值进行滤波增强处理,从而实现对关键帧所在的局部最小值进行增强,抑制非关键帧所在的局部最小值点,因此能够将更加准确、快速、有效的将血管内超声图像中处于心脏舒张末期、心脏运动最慢时的关键帧提取出来。
(2)本发明根据每帧图像增强的距离特征值,通过关键帧搜索范围搜索出全局构成最短路径的各帧图像,该最短路径以第一局部最小值对应图像帧图像作为最初起点,以最后一个局部最小值对应图像作为终点;具体过程为:从起点出发,初始最短路径为0,根据起点和关键帧搜索范围确定出待搜索项,每次在待搜索项中选取出与最短路径中所有帧图像增强的距离特征值累计值最小的图像帧,将该图像帧纳入最短路径,并且将其作为当前起点进行下一次搜索,直到搜索范围包含终点时结束搜索。本发明通过最短路径的方式搜索出关键帧,具有关键帧搜索更加准确的优点。并且在搜索过程中,本发明方法采取了评估函数,通过评估函数减少搜索范围内的待搜索项,降低了搜索全局最短路径时的计算复杂度,进一步提高关键帧提取的速度。
附图说明
图1是本发明方法流程图。
图2是本发明方法中构造血管内超声图像序列的一维距离特征函数图。
图3是本发明方法中一维指数滤波器波形图。
图4是本发明方法血管内超声图像序列的增强的一维距离特征函数图。
图5是在图4基础上标注(如图中小圆点所示)出关键帧所在位置的血管内超声图像序列的增强的一维距离特征函数图。
图6a是本发明方法采集的血管内超声图像序列纵向图。
图6b是本发明方法从图6a所示的血管内超声图像序列中提取的关键帧序列纵向图。
具体实施方式
下面结合实施例及附图对本发明作进一步详细的描述,但本发明的实施方式不限于此。
实施例1
本实施例公开了一种血管内超声图像序列关键帧的提取方法,如图1所示,步骤如下:
S1、采集血管内超声图像序列,并且计算出血管内超声图像序列中各帧图像的Zernike矩;本实施例中血管内超声图像序列中各帧图像的Zernike矩计算过程如下:
针对于血管内超声图像序列中大小为N×N的各帧图像,得到其Zernike矩的实部和虚部分别如下:
其中
其中Rnm(ρ)表示各帧图像中像素点(x,y)处的径向多项式,n和m为正交多项式的阶数,n是非负整数,n-|m|是偶数,并且n≥|m|,s为阶数变量;Ci为血管内超声图像序列中第i帧图像的Zernike矩的实部,Si为血管内超声图像序列中第i帧图像的Zernike矩的虚部;其中x和y分别表示各帧图像中像素点的横坐标和纵坐标;在本实施例中采集的血管内超声图像序列的各帧图像的大小为512×512,即N为512。
fi(r,σ)是血管内超声图像序列中第i帧图像中极坐标为(r,σ)处像素点对应的灰度值;
其中上述公式中r和σ为引入的两个参数,定义r=max(|x|,|y|);
当|x|=r,则
当|y|=r,则
通过参数r和σ获取到像素点(x,y)对应的极坐标(ρ,θ)为:
ρ=2r/N,θ=πσ(4r)。
S2、针对于每帧图像,计算出其与后一帧图像Zernike矩的欧式距离,将上述计算得到的欧式距离作为每帧图像的距离特征值,然后根据每帧图像的距离特征值构造得到血管内超声图像序列的一维距离特征函数;每帧图像的距离特征值d(i)为:
其中d(i)为血管内超声图像序列中第i帧图像的距离特征值,l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;Ci为血管内超声图像序列中第i帧图像的Zernike矩的实部,Ci+1为血管内超声图像序列中第i+1帧图像的Zernike矩的实部,Si为血管内超声图像序列中第i帧图像的Zernike矩的虚部,Si+1为血管内超声图像序列中第i+1帧图像的Zernike矩的虚部。
如图2所示为本实施例中血管内超声图像序列中每帧图像的距离特征值构造得到的一维距离特征函数。
S3、将血管内超声图像序列的一维距离特征函数傅里叶变换到频域空间上,通过该频域空间获取到血管内超声图像序列对应检查对象的心率;根据图像采集速率、血管内超声图像序列对应检查对象的心率以及人体心率范围确定出关键帧搜索范围;同时构造一维指数滤波器,通过一维指数滤波器针对步骤S2中构造得到每帧图像的距离特征值进行增强处理,得到每帧图像增强的一维距离特征值;
本步骤中通过频域空间获取到血管内超声图像序列对应检查对象的心率的具体方式为:在频域空间中找到频谱峰值,将该频谱峰值对应的频率值作为血管内超声图像序列对应检查对象的心率。
本步骤中根据图像采集速率、血管内超声图像序列对应检查对象的心率以及人体心率范围确定出关键帧搜索范围为:
L0=(60×R)/R0;
L1=(60×R)/R1;
L2=(60×R)/R2;
其中△为关键帧搜索范围,R为图像采集速率,R0为血管内超声图像序列对应检查对象的心率,R1~R2为人体心率范围,L0为血管内超声图像序列对应检查对象的心率R0所对应的心动周期长度;L1~L2为人体心率范围R1~R2所对应的心动周期长度范围。在本实施例中图像采集速率R=30帧/秒,所述人体心率范围R1~R2为60~100次/分。在本实施例中当获取到血管内超声图像序列对应检查对象的心率为71次/秒,则确定出的关键帧搜索范围为18~30帧。
本步骤中构造的一维指数滤波器h(δ)为:
步骤S3中获取到的每帧图像增强的距离特征值为:
其中l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;d(i)为血管内超声图像序列中第i帧图像的距离特征值;D(i)为第i帧图像增强的距离特征值。在本实施例中取一维指数滤波器h(δ)中心点周围长度为20,如图3所示为本实施例所采用的一维指数滤波器h(δ)。本实施例中,若将如图2所示的血管内超声图像序列的一维距离特征函数进行如图3所示的一维指数滤波器h(δ)的滤波增强处理,则得到血管内超声图像序列的增强的一维距离特征函数如图4所示,其中图4中每帧图像对应增强的距离特征值即为每帧图像的距离特征值进行滤波增强处理后得到的。
S4、根据步骤S3中获取到的血管内超声图像序列中所有帧图像增强的一维距离特征值,通过关键帧搜索范围搜索出构成全局最短路径的各帧图像,将构成全局最短路径的各帧图像作为关键帧进行提取。
本步骤中获取到关键帧的具体过程如下:
S41、首先从血管内超声图像序列的所有帧图像增强的距离特征值中选取出其中的最小值、第一局部最小值和最后一个局部最小值;
S42、将第一局部最小值对应图像帧作为当前起点纳入最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S43、通过评估函数计算各待搜索项的评估函数值,将评估函数值为0的待搜索项进行剔除,得到最终的待搜索项,然后进入步骤S44;
S44、针对于步骤S43得到的最终的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来,纳入当前最短路径中;例如最终的待搜索项中其中一帧图像增强的距离特征值为D(a),而当前最短路径中各帧图像增强的距离特征值分别为D(b)、D(c),、、、、,D(h),则当最终的待搜索项中这帧图像增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加时,得到的累加值为D(a)+D(b)+D(c)+,...,D(h);
S45、将步骤S44中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最小值对应帧图像,若是,则进入步骤S46,若否,则进入步骤S43;
S46、将最小值对应图像帧作为当前起点纳入当前最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S47、通过评估函数计算步骤S46中获取的各待搜索项的评估函数值,将评估函数值为0的待搜索项进行剔除,得到最终的待搜索项,然后进入步骤S48;
S48、针对于步骤S47得到的最终的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入最短路径中;
S49、将步骤S48中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最后一个局部最小值对应帧图像,若否,则进入步骤S47,若是,则结束搜索,将上述构成全局最短路径的各帧图像作为关键帧进行提取。
本实施例上述步骤S43和步骤S47中通过评估函数计算待搜索项的评估函数值的具体过程如下:
其中l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;D(i)为血管内超声图像序列中第i帧图像的增强的距离特征值,当步骤S43或步骤S47中血管内超声图像序列中第i帧图像为待搜索项时,则通过评估函数计算出第i帧图像的评估函数值为F(i),当F(i)为0时,则将该待搜索项剔除,当F(i)为1时,则保留该待搜索项。
在如图4所示的血管内超声图像序列对应的每帧帧图像增强的距离特征值下,本实施例上述步骤S41中选取出的最小值、第一局部最小值和最后一个局部最小值分别位于第121帧、第25帧和第1106帧图像;当采用的关键搜索范围为18~30帧时,在最初起点第25帧时,则得到的待搜索项为第43帧至第55帧图像,为第一次得到的待搜索项,依次类推,若当前起点为第x帧,则得到的待搜索项为第x+18帧至第x+30帧。通过本实施例上述方法,提取到49帧关键帧。如图5中的圆圈所示即为关键帧图像在增强的一维距离特征函数中的位置,这些帧即为构造全局最短路径的图像。
如图6a所示为本实施例中原始采集的血管内超声图像序列,通过本发明方法提取出的关键帧如图6b所示。
实施例2
本实施例公开了一种血管内超声图像序列关键帧的提取方法,与实施例1的区别仅仅在于步骤S4中获取关键帧具体过程不同,本实施例步骤S4中获取到关键帧的具体过程如下:
S41、首先从血管内超声图像序列的所有帧图像增强的距离特征值中选取出其中的最小值、第一局部最小值和最后一个局部最小值;
S42、将第一局部最小值对应图像帧作为当前起点纳入最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S43、针对于步骤S42得到的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S44、将步骤S43中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围,获取到多帧图像作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最小值对应帧图像,若是,则进入步骤S45,若否,则进入步骤S43;
S45、将最小值对应图像帧作为当前起点纳入最短路径,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S46、针对于步骤S45得到的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S47、将步骤S46中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围,获取到多帧图像作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最后一个局部最小值对应帧图像,若否,则进入步骤S46,若是,则结束搜索,将上述构成全局最短路径的各帧图像作为关键帧进行提取。
上述实施例为本发明较佳的实施方式,但本发明的实施方式并不受上述实施例的限制,其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明的保护范围之内。
Claims (10)
1.一种血管内超声图像序列关键帧的提取方法,其特征在于,步骤如下:
S1、采集血管内超声图像序列,并且计算出血管内超声图像序列中各帧图像的Zernike矩;
S2、针对于每帧图像,计算出其与后一帧图像Zernike矩的欧式距离,将上述计算得到的欧式距离作为每帧图像的距离特征值,然后根据每帧图像的距离特征值构造得到血管内超声图像序列的一维距离特征函数;
S3、将血管内超声图像序列的一维距离特征函数傅里叶变换到频域空间上,通过该频域空间获取到血管内超声图像序列对应检查对象的心率;根据图像采集速率、血管内超声图像序列对应检查对象的心率以及人体心率范围确定出关键帧搜索范围;同时构造一维指数滤波器,通过一维指数滤波器针对步骤S2中构造得到每帧图像的距离特征值进行增强处理,得到每帧图像增强的一维距离特征值;
S4、根据步骤S3中获取到的血管内超声图像序列中所有帧图像增强的一维距离特征值,通过关键帧搜索范围搜索出构成全局最短路径的各帧图像,作为关键帧。
2.根据权利要求1所述的血管内超声图像序列关键帧的提取方法,其特征在于,血管内超声图像序列中各帧图像的Zernike矩计算过程如下:
针对于血管内超声图像序列中大小为N×N的各帧图像,得到其Zernike矩的实部和虚部分别如下:
<mrow>
<msub>
<mi>C</mi>
<mi>i</mi>
</msub>
<mo>=</mo>
<mfrac>
<mrow>
<mn>2</mn>
<mi>n</mi>
<mo>+</mo>
<mn>2</mn>
</mrow>
<msup>
<mi>N</mi>
<mn>2</mn>
</msup>
</mfrac>
<munderover>
<mo>&Sigma;</mo>
<mrow>
<mi>r</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mrow>
<mi>N</mi>
<mo>/</mo>
<mn>2</mn>
</mrow>
</munderover>
<msub>
<mi>R</mi>
<mrow>
<mi>n</mi>
<mi>m</mi>
</mrow>
</msub>
<mrow>
<mo>(</mo>
<mi>&rho;</mi>
<mo>)</mo>
</mrow>
<munderover>
<mo>&Sigma;</mo>
<mrow>
<mi>&sigma;</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mrow>
<mn>8</mn>
<mi>r</mi>
</mrow>
</munderover>
<mi>c</mi>
<mi>o</mi>
<mi>s</mi>
<mfrac>
<mrow>
<mi>&pi;</mi>
<mi>m</mi>
<mi>&sigma;</mi>
</mrow>
<mrow>
<mn>4</mn>
<mi>r</mi>
</mrow>
</mfrac>
<msub>
<mi>f</mi>
<mi>i</mi>
</msub>
<mrow>
<mo>(</mo>
<mi>r</mi>
<mo>,</mo>
<mi>&sigma;</mi>
<mo>)</mo>
</mrow>
<mo>;</mo>
</mrow>
<mrow>
<msub>
<mi>S</mi>
<mi>i</mi>
</msub>
<mo>=</mo>
<mfrac>
<mrow>
<mn>2</mn>
<mi>n</mi>
<mo>+</mo>
<mn>2</mn>
</mrow>
<msup>
<mi>N</mi>
<mn>2</mn>
</msup>
</mfrac>
<munderover>
<mo>&Sigma;</mo>
<mrow>
<mi>r</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mrow>
<mi>N</mi>
<mo>/</mo>
<mn>2</mn>
</mrow>
</munderover>
<msub>
<mi>R</mi>
<mrow>
<mi>n</mi>
<mi>m</mi>
</mrow>
</msub>
<mrow>
<mo>(</mo>
<mi>&rho;</mi>
<mo>)</mo>
</mrow>
<munderover>
<mo>&Sigma;</mo>
<mrow>
<mi>&sigma;</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mrow>
<mn>8</mn>
<mi>r</mi>
</mrow>
</munderover>
<mi>s</mi>
<mi>i</mi>
<mi>n</mi>
<mfrac>
<mrow>
<mi>&pi;</mi>
<mi>m</mi>
<mi>&sigma;</mi>
</mrow>
<mrow>
<mn>4</mn>
<mi>r</mi>
</mrow>
</mfrac>
<msub>
<mi>f</mi>
<mi>i</mi>
</msub>
<mrow>
<mo>(</mo>
<mi>r</mi>
<mo>,</mo>
<mi>&sigma;</mi>
<mo>)</mo>
</mrow>
<mo>;</mo>
</mrow>
其中
<mrow>
<msub>
<mi>R</mi>
<mrow>
<mi>n</mi>
<mi>m</mi>
</mrow>
</msub>
<mrow>
<mo>(</mo>
<mi>&rho;</mi>
<mo>)</mo>
</mrow>
<mo>=</mo>
<munderover>
<mo>&Sigma;</mo>
<mrow>
<mi>s</mi>
<mo>=</mo>
<mn>0</mn>
</mrow>
<mrow>
<mo>(</mo>
<mi>n</mi>
<mo>-</mo>
<mo>|</mo>
<mi>m</mi>
<mo>|</mo>
<mo>)</mo>
<mo>/</mo>
<mn>2</mn>
</mrow>
</munderover>
<mfrac>
<mrow>
<msup>
<mrow>
<mo>(</mo>
<mo>-</mo>
<mn>1</mn>
<mo>)</mo>
</mrow>
<mi>s</mi>
</msup>
<mo>&lsqb;</mo>
<mrow>
<mo>(</mo>
<mi>n</mi>
<mo>-</mo>
<mi>s</mi>
<mo>)</mo>
</mrow>
<mo>!</mo>
<mo>&rsqb;</mo>
<msup>
<mi>&rho;</mi>
<mrow>
<mi>n</mi>
<mo>-</mo>
<mn>2</mn>
<mi>s</mi>
</mrow>
</msup>
</mrow>
<mrow>
<mi>s</mi>
<mo>!</mo>
<mrow>
<mo>(</mo>
<mfrac>
<mrow>
<mi>n</mi>
<mo>+</mo>
<mo>|</mo>
<mi>m</mi>
<mo>|</mo>
</mrow>
<mn>2</mn>
</mfrac>
<mo>-</mo>
<mi>s</mi>
<mo>)</mo>
</mrow>
<mo>!</mo>
<mrow>
<mo>(</mo>
<mfrac>
<mrow>
<mi>n</mi>
<mo>+</mo>
<mo>|</mo>
<mi>m</mi>
<mo>|</mo>
</mrow>
<mn>2</mn>
</mfrac>
<mo>+</mo>
<mi>s</mi>
<mo>)</mo>
</mrow>
<mo>!</mo>
</mrow>
</mfrac>
<mo>;</mo>
</mrow>
其中Rnm(ρ)表示各帧图像中像素点(x,y)处的径向多项式,n和m为正交多项式的阶数,n是非负整数,n-|m|是偶数,并且n≥|m|,s为阶数变量;Ci为血管内超声图像序列中第i帧图像的Zernike矩的实部,Si为血管内超声图像序列中第i帧图像的Zernike矩的虚部;其中x和y分别表示各帧图像中像素点的横坐标和纵坐标;
fi(r,σ)是血管内超声图像序列中第i帧图像中极坐标为(r,σ)处像素点对应的灰度值;
其中上述公式中r和σ为引入的两个参数,定义r=max(|x|,|y|);
当|x|=r,则
<mrow>
<mi>&sigma;</mi>
<mo>=</mo>
<mfrac>
<mrow>
<mn>2</mn>
<mrow>
<mo>(</mo>
<mi>r</mi>
<mo>-</mo>
<mi>x</mi>
<mo>)</mo>
</mrow>
<mi>y</mi>
</mrow>
<mrow>
<mo>|</mo>
<mi>y</mi>
<mo>|</mo>
</mrow>
</mfrac>
<mo>+</mo>
<mfrac>
<mrow>
<mi>x</mi>
<mi>y</mi>
</mrow>
<mi>r</mi>
</mfrac>
<mo>;</mo>
</mrow>
当|y|=r,则
<mrow>
<mi>&sigma;</mi>
<mo>=</mo>
<mn>2</mn>
<mi>y</mi>
<mo>-</mo>
<mfrac>
<mrow>
<mi>x</mi>
<mi>y</mi>
</mrow>
<mi>r</mi>
</mfrac>
<mo>;</mo>
</mrow>
通过参数r和σ获取到像素点(x,y)对应的极坐标(ρ,θ)为:
ρ=2r/N,θ=πσ(4r)。
3.根据权利要求1所述的血管内超声图像序列关键帧的提取方法,其特征在于,步骤S2中每帧图像的距离特征值d(i)为:
<mrow>
<mi>d</mi>
<mrow>
<mo>(</mo>
<mi>i</mi>
<mo>)</mo>
</mrow>
<mo>=</mo>
<msqrt>
<mrow>
<msup>
<mrow>
<mo>(</mo>
<msub>
<mi>C</mi>
<mrow>
<mi>i</mi>
<mo>+</mo>
<mn>1</mn>
</mrow>
</msub>
<mo>-</mo>
<msub>
<mi>C</mi>
<mi>i</mi>
</msub>
<mo>)</mo>
</mrow>
<mn>2</mn>
</msup>
<mo>+</mo>
<msup>
<mrow>
<mo>(</mo>
<msub>
<mi>S</mi>
<mrow>
<mi>i</mi>
<mo>+</mo>
<mn>1</mn>
</mrow>
</msub>
<mo>-</mo>
<msub>
<mi>S</mi>
<mi>i</mi>
</msub>
<mo>)</mo>
</mrow>
<mn>2</mn>
</msup>
</mrow>
</msqrt>
<mo>,</mo>
<mi>i</mi>
<mo>=</mo>
<mn>1</mn>
<mo>,</mo>
<mo>...</mo>
<mo>,</mo>
<mi>l</mi>
<mo>-</mo>
<mn>1</mn>
<mo>;</mo>
</mrow>
其中d(i)为血管内超声图像序列中第i帧图像的距离特征值,l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;Ci为血管内超声图像序列中第i帧图像的Zernike矩的实部,Ci+1为血管内超声图像序列中第i+1帧图像的Zernike矩的实部,Si为血管内超声图像序列中第i帧图像的Zernike矩的虚部,Si+1为血管内超声图像序列中第i+1帧图像的Zernike矩的虚部。
4.根据权利要求1所述的血管内超声图像序列关键帧的提取方法,其特征在于,步骤S3中通过频域空间获取到血管内超声图像序列对应检查对象的心率的具体方式为:在频域空间中找到频谱峰值,将该频谱峰值对应的频率值作为血管内超声图像序列对应检查对象的心率。
5.根据权利要求1或4所述的血管内超声图像序列关键帧的提取方法,其特征在于,步骤S3中根据图像采集速率、血管内超声图像序列对应检查对象的心率以及人体心率范围确定出关键帧搜索范围为:
<mrow>
<mi>&Delta;</mi>
<mo>=</mo>
<mrow>
<mo>(</mo>
<mfrac>
<msub>
<mi>L</mi>
<mn>0</mn>
</msub>
<mn>2</mn>
</mfrac>
<mo>,</mo>
<mfrac>
<mrow>
<mn>3</mn>
<msub>
<mi>L</mi>
<mn>0</mn>
</msub>
</mrow>
<mn>2</mn>
</mfrac>
<mo>)</mo>
</mrow>
<mo>&cap;</mo>
<mrow>
<mo>(</mo>
<msub>
<mi>L</mi>
<mn>1</mn>
</msub>
<mo>,</mo>
<msub>
<mi>L</mi>
<mn>2</mn>
</msub>
<mo>)</mo>
</mrow>
<mo>;</mo>
</mrow>
L0=(60×R)/R0;
L1=(60×R)/R1;
L2=(60×R)/R2;
其中△为关键帧搜索范围,R为图像采集速率,R0为血管内超声图像序列对应检查对象的心率,R1~R2为人体心率范围,L0为血管内超声图像序列对应检查对象的心率R0所对应的心动周期长度;L1~L2为人体心率范围R1~R2所对应的心动周期长度范围。
6.根据权利要求1所述的血管内超声图像序列关键帧的提取方法,其特征在于,所述图像采集速率R=30帧/秒,所述人体心率范围R1~R2为60~100次/分。
7.根据权利要求1所述的血管内超声图像序列关键帧的提取方法,其特征在于,步骤S3中构造的一维指数滤波器h(δ)为:
<mrow>
<mi>h</mi>
<mrow>
<mo>(</mo>
<mi>&delta;</mi>
<mo>)</mo>
</mrow>
<mo>=</mo>
<msup>
<mi>e</mi>
<mrow>
<mo>-</mo>
<mfrac>
<mrow>
<mo>|</mo>
<mi>&delta;</mi>
<mo>|</mo>
</mrow>
<mn>4</mn>
</mfrac>
</mrow>
</msup>
<mo>,</mo>
<mo>-</mo>
<mi>&infin;</mi>
<mo><</mo>
<mi>&delta;</mi>
<mo><</mo>
<mo>+</mo>
<mi>&infin;</mi>
<mo>;</mo>
</mrow>
步骤S3中获取到的每帧图像增强的距离特征值为:
<mrow>
<mi>D</mi>
<mrow>
<mo>(</mo>
<mi>i</mi>
<mo>)</mo>
</mrow>
<mo>=</mo>
<mi>d</mi>
<mrow>
<mo>(</mo>
<mi>i</mi>
<mo>)</mo>
</mrow>
<mo>&CircleTimes;</mo>
<mi>h</mi>
<mrow>
<mo>(</mo>
<mi>&delta;</mi>
<mo>)</mo>
</mrow>
<mo>,</mo>
<mn>1</mn>
<mo>&le;</mo>
<mi>i</mi>
<mo>&le;</mo>
<mi>l</mi>
<mo>-</mo>
<mn>1</mn>
<mo>;</mo>
</mrow>
其中l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;d(i)为血管内超声图像序列中第i帧图像的距离特征值;D(i)为第i帧图像增强的距离特征值。
8.根据权利要求1所述的血管内超声图像序列关键帧的提取方法,其特征在于,步骤S4中获取到关键帧的具体过程如下:
S41、首先从血管内超声图像序列的所有帧图像增强的距离特征值中选取出其中的最小值、第一局部最小值和最后一个局部最小值;
S42、将第一局部最小值对应图像帧作为当前起点纳入最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S43、通过评估函数计算各待搜索项的评估函数值,将评估函数值为0的待搜索项进行剔除,得到最终的待搜索项,然后进入步骤S44;
S44、针对于步骤S43得到的最终的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S45、将步骤S44中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最小值对应帧图像,若是,则进入步骤S46,若否,则进入步骤S43;
S46、将最小值对应图像帧作为当前起点纳入当前最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S47、通过评估函数计算步骤S46中获取的各待搜索项的评估函数值,将评估函数值为0的待搜索项进行剔除,得到最终的待搜索项,然后进入步骤S48;
S48、针对于步骤S47得到的最终的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入最短路径中;
S49、将步骤S48中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最后一个局部最小值对应帧图像,若否,则进入步骤S47,若是,则结束搜索,将上述构成全局最短路径的各帧图像作为关键帧。
9.根据权利要求8所述的血管内超声图像序列关键帧的提取方法,其特征在于,所述步骤S43和步骤S47中通过评估函数计算待搜索项的评估函数值的具体过程如下:
<mrow>
<mi>F</mi>
<mrow>
<mo>(</mo>
<mi>i</mi>
<mo>)</mo>
</mrow>
<mo>=</mo>
<mfenced open = "{" close = "">
<mtable>
<mtr>
<mtd>
<mrow>
<mn>1</mn>
<mo>,</mo>
<mfrac>
<mrow>
<mi>d</mi>
<mo>&lsqb;</mo>
<mi>D</mi>
<mrow>
<mo>(</mo>
<mi>i</mi>
<mo>)</mo>
</mrow>
<mo>&rsqb;</mo>
</mrow>
<mrow>
<mi>d</mi>
<mi>i</mi>
</mrow>
</mfrac>
<mo>&le;</mo>
<mn>0</mn>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<mn>0</mn>
<mo>,</mo>
<mfrac>
<mrow>
<mi>d</mi>
<mo>&lsqb;</mo>
<mi>D</mi>
<mrow>
<mo>(</mo>
<mi>i</mi>
<mo>)</mo>
</mrow>
<mo>&rsqb;</mo>
</mrow>
<mrow>
<mi>d</mi>
<mi>i</mi>
</mrow>
</mfrac>
<mo>></mo>
<mn>0</mn>
</mrow>
</mtd>
</mtr>
</mtable>
</mfenced>
<mo>,</mo>
<mn>1</mn>
<mo>&le;</mo>
<mi>i</mi>
<mo>&le;</mo>
<mi>l</mi>
<mo>-</mo>
<mn>1</mn>
<mo>;</mo>
</mrow>
其中l表示步骤S1中采集的血管内超声图像序列的长度,即血管内超声图像序列中帧的总数;D(i)为血管内超声图像序列中第i帧图像的增强的距离特征值,当步骤S43或步骤S47中血管内超声图像序列中第i帧图像为待搜索项时,则通过评估函数计算出第i帧图像的评估函数值为F(i),当F(i)为0时,则将该待搜索项剔除,当F(i)为1时,则保留该待搜索项。
10.根据权利要求1所述的血管内超声图像序列关键帧的提取方法,其特征在于,步骤S4中获取到关键帧的具体过程如下:
S41、首先从血管内超声图像序列的所有帧图像增强的距离特征值中选取出其中的最小值、第一局部最小值和最后一个局部最小值;
S42、将第一局部最小值对应图像帧作为当前起点纳入最短路径中,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S43、针对于步骤S42得到的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S44、将步骤S43中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围,获取到多帧图像作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最小值对应帧图像,若是,则进入步骤S45,若否,则进入步骤S43;
S45、将最小值对应图像帧作为当前起点纳入最短路径,然后根据该起点和关键帧搜索范围搜索到多帧图像,将搜索到的这些图像分别作为待搜索项;
S46、针对于步骤S45得到的待搜索项中每帧图像,分别将其增强的距离特征值与当前最短路径中各帧图像增强的距离特征值进行累加;然后将累加值最小的对应待搜索项图像帧选取出来纳入当前最短路径中;
S47、将步骤S46中选取出来的累加值最小的对应待搜索项图像帧作为当前起点,并且根据该起点和关键帧搜索范围,获取到多帧图像作为待搜索项;判断待搜索项中是否包括步骤S41中选取出的最后一个局部最小值对应帧图像,若否,则进入步骤S46,若是,则结束搜索,将上述构成全局最短路径的各帧图像作为关键帧。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710362384.5A CN107194922B (zh) | 2017-05-22 | 2017-05-22 | 一种血管内超声图像序列关键帧的提取方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710362384.5A CN107194922B (zh) | 2017-05-22 | 2017-05-22 | 一种血管内超声图像序列关键帧的提取方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107194922A true CN107194922A (zh) | 2017-09-22 |
CN107194922B CN107194922B (zh) | 2019-10-18 |
Family
ID=59874225
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710362384.5A Expired - Fee Related CN107194922B (zh) | 2017-05-22 | 2017-05-22 | 一种血管内超声图像序列关键帧的提取方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107194922B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110197713A (zh) * | 2019-05-10 | 2019-09-03 | 上海依智医疗技术有限公司 | 一种医疗影像的处理方法、装置、设备和介质 |
CN111214255A (zh) * | 2020-01-12 | 2020-06-02 | 刘涛 | 一种医学超声图像计算机辅助诊断方法 |
CN113723360A (zh) * | 2021-09-16 | 2021-11-30 | 益佳福(杭州)科技有限责任公司 | 基于ecg和对抗增强门控循环网络多源血管内超声关键帧自动检索方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120283569A1 (en) * | 2011-05-04 | 2012-11-08 | Boston Scientific Scimed, Inc. | Systems and methods for navigating and visualizing intravascular ultrasound sequences |
CN104899861A (zh) * | 2015-04-01 | 2015-09-09 | 华北电力大学(保定) | 一种血管内超声视频中关键帧的自动检索方法 |
CN106060568A (zh) * | 2016-06-28 | 2016-10-26 | 电子科技大学 | 一种视频篡改检测及定位方法 |
-
2017
- 2017-05-22 CN CN201710362384.5A patent/CN107194922B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120283569A1 (en) * | 2011-05-04 | 2012-11-08 | Boston Scientific Scimed, Inc. | Systems and methods for navigating and visualizing intravascular ultrasound sequences |
CN104899861A (zh) * | 2015-04-01 | 2015-09-09 | 华北电力大学(保定) | 一种血管内超声视频中关键帧的自动检索方法 |
CN106060568A (zh) * | 2016-06-28 | 2016-10-26 | 电子科技大学 | 一种视频篡改检测及定位方法 |
Non-Patent Citations (4)
Title |
---|
FRANCESCO CIOMPI 等: "Automatic Key Frames Detection in Intravascular Ultrasound Sequence", 《PROCEEDINGS OF MICCAI WORKSHOP IN COMPUTING AND VISUALIZATION FOR (INTRA)VASCULAR IMAGING(CVII)》 * |
毛海群 等: "基于流形学习的血管内超声图像序列关键帧的提取及应用", 《南方医科大学学报》 * |
王立欣 等: "血管内超声图像序列关键帧的自动检索", 《光电工程》 * |
袁维: "基于单目视频的人体步态识别", 《中国优秀硕士学位论文全文数据库信息科技辑》 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110197713A (zh) * | 2019-05-10 | 2019-09-03 | 上海依智医疗技术有限公司 | 一种医疗影像的处理方法、装置、设备和介质 |
CN110197713B (zh) * | 2019-05-10 | 2021-12-14 | 上海依智医疗技术有限公司 | 一种医疗影像的处理方法、装置、设备和介质 |
CN111214255A (zh) * | 2020-01-12 | 2020-06-02 | 刘涛 | 一种医学超声图像计算机辅助诊断方法 |
CN113723360A (zh) * | 2021-09-16 | 2021-11-30 | 益佳福(杭州)科技有限责任公司 | 基于ecg和对抗增强门控循环网络多源血管内超声关键帧自动检索方法 |
CN113723360B (zh) * | 2021-09-16 | 2023-10-27 | 益佳福(杭州)科技有限责任公司 | 基于ecg和对抗增强门控循环网络多源血管内超声关键帧自动检索方法 |
Also Published As
Publication number | Publication date |
---|---|
CN107194922B (zh) | 2019-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106108889B (zh) | 基于深度学习算法的心电图分类方法 | |
KR101982149B1 (ko) | 의료 영상의 일부 정보를 활용한 장기 영상 생성 방법 및 장치 | |
CN101309645B (zh) | 超声波诊断装置 | |
CN110755076B (zh) | 磁共振扫描仪的图像采集方法、装置、设备和介质 | |
CN113379693B (zh) | 基于视频摘要技术的胶囊内镜关键病灶图像检测方法 | |
CN105997043B (zh) | 一种基于腕式可穿戴设备的脉率提取方法 | |
KR20110128197A (ko) | 심장 m-모드 뷰들의 자동 분석 | |
CN107194922B (zh) | 一种血管内超声图像序列关键帧的提取方法 | |
CN101919704B (zh) | 一种心音信号定位、分段方法 | |
Bourbakis | Detecting abnormal patterns in WCE images | |
CN116196099A (zh) | 心血管介入手术路径规划方法、系统、存储介质及终端 | |
CN112200162A (zh) | 基于端到端网络的非接触式心率测量方法、系统和装置 | |
CN110349143A (zh) | 一种确定管状组织感兴趣区的方法、装置、设备及介质 | |
CN111353996A (zh) | 一种血管钙化检测方法及装置 | |
CN113935976A (zh) | 一种增强ct图像的脏器内血管自动分割方法及系统 | |
Behnami et al. | Automatic detection of patients with a high risk of systolic cardiac failure in echocardiography | |
CN111462082A (zh) | 一种病灶图片识别装置、方法、设备及可读存储介质 | |
CN110801227B (zh) | 基于可穿戴设备的立体色块障碍测试的方法和系统 | |
CN114862865B (zh) | 基于多视角冠状动脉造影序列图像的血管分割方法及系统 | |
JP2801536B2 (ja) | 超音波画像処理装置 | |
CN114511602B (zh) | 基于图卷积Transformer的医学图像配准方法 | |
CN111345815B (zh) | 一种心电信号中qrs波的检测方法、装置、设备和存储介质 | |
CN111803061B (zh) | 一种基于目标检测的r波识别方法及装置 | |
JPH09299366A (ja) | 領域抽出装置 | |
CN114119688A (zh) | 基于深度学习的冠状动脉造影前后单模医学图像配准方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20191018 |