CN114972388A - 基于非对称测地线的交互式图像分割方法 - Google Patents
基于非对称测地线的交互式图像分割方法 Download PDFInfo
- Publication number
- CN114972388A CN114972388A CN202210565987.6A CN202210565987A CN114972388A CN 114972388 A CN114972388 A CN 114972388A CN 202210565987 A CN202210565987 A CN 202210565987A CN 114972388 A CN114972388 A CN 114972388A
- Authority
- CN
- China
- Prior art keywords
- point
- image
- points
- geodesic
- gradient
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/12—Edge-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/181—Segmentation; Edge detection involving edge growing; involving edge linking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/187—Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
一种基于非对称测地线的交互式图像分割方法,通过在基于测地线投票算法中引入最远点采样方法以尽可能在整个图像域中来确定端点,并且在此模型中采用非对称二次型度量函数确定所得端点至交互点的回溯测地线路径,更好的考虑了人工交互信息以及图像边缘的各向异性和非对称特性,从而获得更为准确的图像分割结果。
Description
技术领域
本发明涉及计算机计算机视觉技术领域,具体涉及一种新的基于非对称测地线的最小路径模型与交互式图像分割方法。
背景技术
最小测地线路径模型(参考文献:Cohen,L.D.and Kimmel,R.(1997).Globalminimum for active contour models:A minimal path approach.Int.J.Comput.Vis.,24(1):57–78.)由Cohen和Kimmel首次引入,目的是寻找原始活动轮廓模型中使用的泛函简化版本的全局最小值。本质上,这种简化的活动轮廓能量泛函可以看作是加权曲线长度,可以通过程函偏微分方程求解。基于最小测地线路径模型,在2013年提出了测地线投票算法(参考文献:Rouchdy,Y.,&Cohen,L.D.(2013).Geodesic voting for the automaticextraction of tree structures.Methods and applications.Computer Vision andImage Understanding,117(10),1453–1467.)来分割细树形结构,该方法通过一系列密集分布于目标区域内部而稀疏的分布于外部的抽样点,计算大量的测地线,利用这些测地线对图像定义域的每一个点进行投票,从而估算每一个点位于目标区域内部的概率。但在上述测地线投票方法中,测地线的计算方法未考虑图像梯度特征的方向性特征。
发明内容
本发明为了克服以上技术的不足,提供了一种可以获得更为准确的图像分割结果的基于非对称测地线的交互式图像分割方法。
本发明克服其技术问题所采用的技术方案是:
一种基于非对称测地线的交互式图像分割方法,包括如下步骤:
a)输入彩色图像I,用I=(I1,I2,I3):表示矢量值彩色图像,I1为彩色图像I的R通道数值,I2为彩色图像I的G通道数值,I3为彩色图像I的B通道数值,为三维实数空间,Ω为图像的定义域,在彩色图像I中由使用者手动在目标物体轮廓上标注若干交互点xj,xj∈S,S为点集,j=1,2,...,NS,NS为点集S中交互点的个数,S∈Ω;
b)采用最远点采样算法得到目标端点集RN∈Ω;
d)计算得到测地线路径γi,j;
e)计算得到测地线路径γi,j经过的图像像素点的投票值ψ;
f)根据图像像素点的投票值ψ,完成图像分割。
进一步的,步骤b)包括如下步骤:
b-1)定义彩色图像I的图像域中像素点为nk,k=1,2,...,T,T为彩色图像I中像素点的总个数,通过公式计算得到图像域中像素点nk至点集S中交互点xj的距离d(nk,xj),式中c为连接像素点nk与交互点xj两点的曲线上的点,||c'||为c的导数的范数,为各向同性度量函数,exp(.)为以e为底的指数函数,β为标量函数,β>0,为点c处的梯度向量, 为点c的R通道的梯度向量,为点c的G通道的梯度向量,为点c的B通道的梯度向量;
进一步的,步骤c)包括如下步骤:
c-1)利用标准差为σ的高斯核函数Gσ来计算图像上每一点nk∈Ω的雅克比矩阵J(nk), 为梯度算子,J(nk)为2×3矩阵,通过公式计算得到图像边缘函数||·||为范数,通过公式计算得到边缘外观特性函数g(nk),nm为彩色图像I的图像域中的像素点,为当像素点nm属于图像域区别于像素点nk的其他像素点时图像边缘函数在图像的定义域Ω的上确界,通过公式计算得到图像梯度张量场式中Id为2×2的单位矩阵,T为转置;
c-2)对图像梯度张量场进行特征向量和特征值的分解,得到最小特征值所对应的特征向量 为二维实数向量,通过公式计算得到张量场式中为向量的张量积,θ(nk)⊥为特征向量θ(nk)的垂直向量,α为参数,且α<0,为实数,通过公式计算得到矢量场函数ω(nk),式中为矢量场,M为一个逆时针旋转矩阵,其旋转角度为λ为标量值参数,
进一步的,步骤e)包括如下步骤:
e-1)通过公式计算得到目标端点集RN中的所有端点至交互点xj的投票值φj(nk),式中δp(·)为函数,如果测地线路径γi,j经过像素点nk,则返回1,如果测地线路径γi,j不经过像素点nk,则返回0;
进一步的,步骤f)包括如下步骤:
f-1)根据求得的测地线投票值,选取阈值Th,标记测地线投票值大于阈值的像素点,得到初始目标轮廓;
f-2)计算彩色图像I上的每一个像素点的梯度方向,在梯度方向连线与邻域的交点使用梯度值进行插值,获得位于当前像素点梯度方向正负方向的两个插值点,将当前像素点的梯度强度与两个插值点的梯度强度进行比较,如果该像素点的梯度强度大于两个插值点的梯度强度,则将该像素点作为边缘点,如果该像素点的梯度强度小于等于两个插值点的梯度强度,则将该像素点的梯度值设置为0,得到非极大值抑制的彩色图像I′;
f-3)设置高阈值Hedge和低阈值Ledge,Hedge=TH×max,Ledge=TL×max,式中TH=0.3或TH=0.2,TL=0.1,max为非极大值抑制的彩色图像I′最大像素值,如果非极大值抑制的彩色图像I′中的像素点的像素值大于低阈值Ledge并小于高阈值Hedge且该像素点与边缘点连通,则将该像素点记为边缘点,各个边缘点组成的图像为边缘图像,完成图像分割。
本发明的有益效果是:通过在基于测地线投票算法中引入最远点采样方法以尽可能在整个图像域中来确定端点,并且在此模型中采用非对称二次型度量函数确定所得端点至交互点的回溯测地线路径,更好的考虑了人工交互信息以及图像边缘的各向异性和非对称特性,从而获得更为准确的图像分割结果。
附图说明
图1为本发明的方法流程图。
具体实施方式
下面结合附图1对本发明做进一步说明。
一种基于非对称测地线的交互式图像分割方法,包括如下步骤:
a)输入彩色图像I,用I=(I1,I2,I3):表示矢量值彩色图像,I1为彩色图像I的R通道数值,I2为彩色图像I的G通道数值,I3为彩色图像I的B通道数值,为三维实数空间,Ω为图像的定义域,在彩色图像I中由使用者手动在目标物体轮廓上标注若干交互点xj,xj∈S,S为点集,j=1,2,...,NS,NS为点集S中交互点的个数,S∈Ω。
b)采用最远点采样算法得到目标端点集RN∈Ω。
d)计算得到测地线路径γi,j。
e)计算得到测地线路径γi,j经过的图像像素点的投票值ψ。
f)根据图像像素点的投票值ψ,完成图像分割。
通过在基于测地线投票算法中引入最远点采样方法以尽可能在整个图像域中来确定端点,并且在此模型中采用非对称二次型度量函数确定所得端点至交互点的回溯测地线路径,更好的考虑了人工交互信息以及图像边缘的各向异性和非对称特性,从而获得更为准确的图像分割结果。
实施例1:
步骤b)包括如下步骤:
b-1)定义彩色图像I的图像域中像素点为nk,k=1,2,...,T,T为彩色图像I中像素点的总个数,通过公式计算得到图像域中像素点nk至点集S中交互点xj的距离d(nk,xj),式中c为连接像素点nk与交互点xj两点的曲线上的点,||c'||为c的导数的范数,为各向同性度量函数,exp(.)为以e为底的指数函数,β为标量函数,β>0,为点c处的梯度向量, 为点c的R通道的梯度向量,为点c的G通道的梯度向量,为点c的B通道的梯度向量。
实施例2:
步骤c)包括如下步骤:
c-1)利用标准差为σ的高斯核函数Gσ来计算图像上每一点nk∈Ω的雅克比矩阵J(nk), 为梯度算子,J(nk)为2×3矩阵,通过公式计算得到图像边缘函数||·||为范数,通过公式计算得到边缘外观特性函数g(nk),nm为彩色图像I的图像域中的像素点,为当像素点nm属于图像域区别于像素点nk的其他像素点时图像边缘函数在图像的定义域Ω的上确界,通过公式计算得到图像梯度张量场式中Id为2×2的单位矩阵,T为转置。
c-2)对图像梯度张量场进行特征向量和特征值的分解,得到最小特征值所对应的特征向量 为二维实数向量,通过公式计算得到张量场式中为向量的张量积,θ(nk)⊥为特征向量θ(nk)的垂直向量,α为参数,且α<0,为实数,通过公式计算得到矢量场函数ω(nk),式中为矢量场,M为一个逆时针旋转矩阵,其旋转角度为λ为标量值参数,
实施例3:
实施例4:
步骤e)包括如下步骤:
e-1)通过公式计算得到目标端点集RN中的所有端点至交互点xj的投票值φj(nk),式中δp(·)为函数,如果测地线路径γi,j经过像素点nk,则返回1,如果测地线路径γi,j不经过像素点nk,则返回0;
实施例5:
步骤f)包括如下步骤:
f-1)根据求得的测地线投票值,选取阈值Th,标记测地线投票值大于阈值的像素点,得到初始目标轮廓;
f-2)计算彩色图像I上的每一个像素点的梯度方向,在梯度方向连线与邻域的交点使用梯度值进行插值,获得位于当前像素点梯度方向正负方向的两个插值点,将当前像素点的梯度强度与两个插值点的梯度强度进行比较,如果该像素点的梯度强度大于两个插值点的梯度强度,则将该像素点作为边缘点,如果该像素点的梯度强度小于等于两个插值点的梯度强度,则将该像素点的梯度值设置为0,得到非极大值抑制的彩色图像I′;
f-3)设置高阈值Hedge和低阈值Ledge,Hedge=TH×max,Ledge=TL×max,TH与TL的比率为2:1或3:1,一般TH=0.3或TH=0.2,TL=0.1,max为非极大值抑制的彩色图像I′最大像素值,图像中的点如果大于高阈值上界则为强边界,如果低于低阈值的像素点必然不是边界,因此如果非极大值抑制的彩色图像I′中的像素点的像素值大于低阈值Ledge并小于高阈值Hedge且该像素点与边缘点连通,则将该像素点记为边缘点,各个边缘点组成的图像为边缘图像,完成图像分割。
实施例6:
最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (7)
1.一种基于非对称测地线的交互式图像分割方法,其特征在于,包括如下步骤:
a)输入彩色图像I,用I=(I1,I2,I3):表示矢量值彩色图像,I1为彩色图像I的R通道数值,I2为彩色图像I的G通道数值,I3为彩色图像I的B通道数值,为三维实数空间,Ω为图像的定义域,在彩色图像I中由使用者手动在目标物体轮廓上标注若干交互点xj,xj∈S,S为点集,j=1,2,...,NS,NS为点集S中交互点的个数,S∈Ω;
b)采用最远点采样算法得到目标端点集RN∈Ω;
d)计算得到测地线路径γi,j;
e)计算得到测地线路径γi,j经过的图像像素点的投票值ψ;
f)根据图像像素点的投票值ψ,完成图像分割。
2.根据权利要求1所述的基于非对称测地线的交互式图像分割方法,其特征在于,步骤b)包括如下步骤:
b-1)定义彩色图像I的图像域中像素点为nk,k=1,2,...,T,T为彩色图像I中像素点的总个数,通过公式计算得到图像域中像素点nk至点集S中交互点xj的距离d(nk,xj),式中c为连接像素点nk与交互点xj两点的曲线上的点,||c'||为c的导数的范数,为各向同性度量函数,exp(.)为以e为底的指数函数,β为标量函数,β>0,为点c处的梯度向量, 为点c的R通道的梯度向量,为点c的G通道的梯度向量,为点c的B通道的梯度向量;
3.根据权利要求2所述的基于非对称测地线的交互式图像分割方法,其特征在于,步骤c)包括如下步骤:
c-1)利用标准差为σ的高斯核函数Gσ来计算图像上每一点nk∈Ω的雅克比矩阵J(nk), 为梯度算子,J(nk)为2×3矩阵,通过公式计算得到图像边缘函数||·||为范数,通过公式计算得到边缘外观特性函数g(nk),nm为彩色图像I的图像域中的像素点,为当像素点nm属于图像域区别于像素点nk的其他像素点时图像边缘函数在图像的定义域Ω的上确界,通过公式计算得到图像梯度张量场式中Id为2×2的单位矩阵,T为转置;
c-2)对图像梯度张量场进行特征向量和特征值的分解,得到最小特征值所对应的特征向量 为二维实数向量,通过公式计算得到张量场式中为向量的张量积,为特征向量的垂直向量,α为参数,且α<0,为实数,通过公式计算得到矢量场函数ω(nk),式中为矢量场,M为一个逆时针旋转矩阵,其旋转角度为λ为标量值参数,
6.根据权利要求1所述的基于非对称测地线的交互式图像分割方法,其特征在于,步骤f)包括如下步骤:
f-1)根据求得的测地线投票值,选取阈值Th,标记测地线投票值大于阈值的像素点,得到初始目标轮廓;
f-2)计算彩色图像I上的每一个像素点的梯度方向,在梯度方向连线与邻域的交点使用梯度值进行插值,获得位于当前像素点梯度方向正负方向的两个插值点,将当前像素点的梯度强度与两个插值点的梯度强度进行比较,如果该像素点的梯度强度大于两个插值点的梯度强度,则将该像素点作为边缘点,如果该像素点的梯度强度小于等于两个插值点的梯度强度,则将该像素点的梯度值设置为0,得到非极大值抑制的彩色图像I′;
f-3)设置高阈值Hedge和低阈值Ledge,Hedge=TH×max,Ledge=TL×max,式中TH=0.3或TH=0.2,TL=0.1,max为非极大值抑制的彩色图像I′最大像素值,如果非极大值抑制的彩色图像I′中的像素点的像素值大于低阈值Ledge并小于高阈值Hedge且该像素点与边缘点连通,则将该像素点记为边缘点,各个边缘点组成的图像为边缘图像,完成图像分割。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210565987.6A CN114972388B (zh) | 2022-05-23 | 2022-05-23 | 基于非对称测地线的交互式图像分割方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210565987.6A CN114972388B (zh) | 2022-05-23 | 2022-05-23 | 基于非对称测地线的交互式图像分割方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114972388A true CN114972388A (zh) | 2022-08-30 |
CN114972388B CN114972388B (zh) | 2023-03-24 |
Family
ID=82985382
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210565987.6A Active CN114972388B (zh) | 2022-05-23 | 2022-05-23 | 基于非对称测地线的交互式图像分割方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114972388B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116524191A (zh) * | 2023-05-11 | 2023-08-01 | 山东省人工智能研究院 | 融入测地线投票算法的深度学习网络的血管分割方法 |
CN116823842A (zh) * | 2023-06-25 | 2023-09-29 | 山东省人工智能研究院 | 融合测地线模型的双解码器网络的血管分割方法 |
CN117522902A (zh) * | 2024-01-04 | 2024-02-06 | 齐鲁工业大学(山东省科学院) | 一种基于测地线模型的自适应割方法及设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6078688A (en) * | 1996-08-23 | 2000-06-20 | Nec Research Institute, Inc. | Method for image segmentation by minimizing the ratio between the exterior boundary cost and the cost of the enclosed region |
CN109886939A (zh) * | 2019-01-30 | 2019-06-14 | 西安电子科技大学 | 基于张量投票的桥梁裂缝检测方法 |
CN112651933A (zh) * | 2020-12-21 | 2021-04-13 | 山东省人工智能研究院 | 基于测地线距离图和程函方程的血管分割方法 |
CN114445443A (zh) * | 2022-01-24 | 2022-05-06 | 山东省人工智能研究院 | 基于非对称测地线距离的交互式图像分割方法 |
-
2022
- 2022-05-23 CN CN202210565987.6A patent/CN114972388B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6078688A (en) * | 1996-08-23 | 2000-06-20 | Nec Research Institute, Inc. | Method for image segmentation by minimizing the ratio between the exterior boundary cost and the cost of the enclosed region |
CN109886939A (zh) * | 2019-01-30 | 2019-06-14 | 西安电子科技大学 | 基于张量投票的桥梁裂缝检测方法 |
CN112651933A (zh) * | 2020-12-21 | 2021-04-13 | 山东省人工智能研究院 | 基于测地线距离图和程函方程的血管分割方法 |
CN114445443A (zh) * | 2022-01-24 | 2022-05-06 | 山东省人工智能研究院 | 基于非对称测地线距离的交互式图像分割方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116524191A (zh) * | 2023-05-11 | 2023-08-01 | 山东省人工智能研究院 | 融入测地线投票算法的深度学习网络的血管分割方法 |
CN116524191B (zh) * | 2023-05-11 | 2024-01-19 | 山东省人工智能研究院 | 融入测地线投票算法的深度学习网络的血管分割方法 |
CN116823842A (zh) * | 2023-06-25 | 2023-09-29 | 山东省人工智能研究院 | 融合测地线模型的双解码器网络的血管分割方法 |
CN116823842B (zh) * | 2023-06-25 | 2024-02-02 | 山东省人工智能研究院 | 融合测地线模型的双解码器网络的血管分割方法 |
CN117522902A (zh) * | 2024-01-04 | 2024-02-06 | 齐鲁工业大学(山东省科学院) | 一种基于测地线模型的自适应割方法及设备 |
CN117522902B (zh) * | 2024-01-04 | 2024-03-29 | 齐鲁工业大学(山东省科学院) | 一种基于测地线模型的自适应割方法及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN114972388B (zh) | 2023-03-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114972388B (zh) | 基于非对称测地线的交互式图像分割方法 | |
CN107122705B (zh) | 基于三维人脸模型的人脸关键点检测方法 | |
CN113096234B (zh) | 利用多张彩色图片生成三维网格模型的方法及装置 | |
US10380413B2 (en) | System and method for pose-invariant face alignment | |
US9942535B2 (en) | Method for 3D scene structure modeling and camera registration from single image | |
CN111462207A (zh) | 一种融合直接法与特征法的rgb-d同时定位与地图创建方法 | |
CN113139453B (zh) | 一种基于深度学习的正射影像高层建筑基底矢量提取方法 | |
CN109974743B (zh) | 一种基于gms特征匹配及滑动窗口位姿图优化的视觉里程计 | |
CN110163207B (zh) | 一种基于Mask-RCNN船舶目标定位方法及存储设备 | |
US10467791B2 (en) | Motion edit method and apparatus for articulated object | |
CN109493417A (zh) | 三维物体重建方法、装置、设备和存储介质 | |
CN109087261A (zh) | 基于非受限采集场景的人脸矫正方法 | |
CN113393577B (zh) | 一种倾斜摄影地形重建方法 | |
CN113177592B (zh) | 一种图像分割方法、装置、计算机设备及存储介质 | |
CN108960267A (zh) | 用于模型调整的系统和方法 | |
CN115631317B (zh) | 隧道衬砌正射影像生成方法及装置、存储介质、终端 | |
CN113506333A (zh) | 基于可变形图谱的医学影像配准网络训练数据集扩充方法 | |
CN114202632A (zh) | 网格线性结构恢复方法、装置、电子设备及存储介质 | |
CN114332125A (zh) | 点云重建方法、装置、电子设备和存储介质 | |
CN116805356A (zh) | 建筑模型的构建方法、设备及计算机可读存储介质 | |
CN117372604B (zh) | 一种3d人脸模型生成方法、装置、设备及可读存储介质 | |
CN110910417B (zh) | 一种基于超像素邻帧特征对比的弱小运动目标检测方法 | |
CN110490973B (zh) | 一种模型驱动的多视图鞋模型三维重建方法 | |
Smith et al. | Height estimation from vector fields of surface normals | |
CN108510569B (zh) | 一种基于多通道的艺术字生成方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |