CN104463917B - 基于除法归一化的图像视觉显著性检测方法 - Google Patents

基于除法归一化的图像视觉显著性检测方法 Download PDF

Info

Publication number
CN104463917B
CN104463917B CN201410619259.4A CN201410619259A CN104463917B CN 104463917 B CN104463917 B CN 104463917B CN 201410619259 A CN201410619259 A CN 201410619259A CN 104463917 B CN104463917 B CN 104463917B
Authority
CN
China
Prior art keywords
mrow
msub
mover
division
munderover
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410619259.4A
Other languages
English (en)
Other versions
CN104463917A (zh
Inventor
余映
林洁
杨鉴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yunnan University YNU
Original Assignee
Yunnan University YNU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yunnan University YNU filed Critical Yunnan University YNU
Priority to CN201410619259.4A priority Critical patent/CN104463917B/zh
Publication of CN104463917A publication Critical patent/CN104463917A/zh
Application granted granted Critical
Publication of CN104463917B publication Critical patent/CN104463917B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于除法归一化的图像视觉显著性检测方法，属于自底向上视觉显著性的自动计算领域。该方法利用各个像素的颜色和亮度特征来计算其视觉显著性，采用除法归一化计算模拟了初级视觉皮层中具有同类检测特征神经元的相互抑制作用，具有生物合理性。和传统的显著性计算方法相比，本发明计算简单高效，能准确检测到颜色差异引起的视觉显著性，且显著区域的显著值得到整体增强，获取的图像视觉显著图具有清晰的形状。

Description

基于除法归一化的图像视觉显著性检测方法
技术领域
本发明属于自底向上视觉显著性的自动计算领域，具体涉及一种基于除法归一化的图像视觉显著性检测方法。
背景技术
人脑的神经资源是有限的，它无法同时处理所有的视觉感知信息。视觉注意是一种重要的视觉信息处理机制，它只允许少量的视觉感知信息进入高级皮层进行处理，如短期记忆、视觉意识、识别和学习等。视觉显著性(Visual saliency)是一种视觉感知特性，它能够让一个显著的目标或区域从复杂的视觉场景当中凸显出来，从而可以引起我们的视觉注意。有的视觉注意形成于场景依赖的或称自底向上的视觉显著性，而有的视觉注意受控于任务依赖的或称自顶向下的视觉显著性。
视觉显著图(Visual saliency map)被广泛的应用于许多计算机视觉应用当中，如感兴趣物体分割、物体识别、自适应图像压缩、内容敏感的图像缩放、图像检索等。视觉显著图中各像素灰度级的大小代表了视觉场景中对应位置显著性的强弱。Itti等人于1998年提出了“A model of saliency-based visual attention for rapid scene analysis”。该方法在计算结构上模仿人脑中视觉显著性形成的神经机制，可以计算出输入场景图像的视觉显著图。近来出现了一类显著性检测方法是从信息理论的角度来计算视觉显著性的，这类方法包括Bruce等人于2005年提出的“Saliency based on informationmaximization”，以及Harel等人于2006年提出的“Graph-based visual saliency”。尽管这类算法具有较好的显著性检测性能，但它们计算量很大，仍然不能实时处理。
另一类视觉显著性计算方法是在频域里进行计算的。Hou等人于2007年提出了“Saliency detection：a spectral residual approach”，该方法利用输入图像傅立叶变换幅度谱和自然图像的幅度谱均值之间的残差来计算输入图像的视觉显著性。Yu等人于2009年提出了“Pulse discrete cosine transform for saliency-based visualattention”，该方法通过归一化输入图像离散余弦变换的变换域系数来计算图像的视觉显著图。基于频域的显著性计算方法计算复杂度低，计算速度非常快，能够应用于实时处理系统，但它们的显著图分辨率较低，不能提供清晰的物体形状。
目前大多数的显著性计算方法仅能获得低分别率的视觉显著图，而且计算代价昂贵。有些算法只能检测到显著目标的边缘，而不能检测出完整的显著目标。Achanta等人于2009年提出了“Frequency-tuned salient region detection”，该方法利用每个像素的颜色值与整幅图像的颜色均值之间的欧氏距离来计算视觉显著图。尽管该方法步骤很简单，而且可以获得全分辨率的显著图，但它不是按照视觉显著性的形成机制设计出来的，因此其显著图与人的视觉感知差距较大。
发明内容
本发明的目的在于提出一种基于除法归一化的图像视觉显著性检测方法，可以使得图像中重要物体区域被均匀地凸显出来。
为达到本发明的上述目的，本发明提供的基于除法归一化的图像视觉显著性检测方法，具体包括以下步骤：
1)将大小为M×N像素的彩色输入图像从RGB颜色空间变换到CIE1976 L*a*b*颜色空间。输入图像经过变换后会产生三个具有生物合理性的颜色通道，其中亮度通道L、绿/红对立通道A和蓝/黄对立通道B；
2)将绿/红对立通道A分解为两个子通道：A-和A+，其中，A-是将矩阵A的所有正值元素置0而得到，而A+是将矩阵A的所有负值元素置0而得到；将蓝/黄对立通道B分解为两个子通道：B-和B+，其中，B-是将矩阵B的所有正值元素置0而得到，而B+是将矩阵B的所有负值元素置0得到，将矩阵A-、A+、B-和B+看作四个颜色通道，分别对应绿、红、蓝、黄四种颜色；
3)计算出绿、红、蓝、黄和亮度通道的能量，其中，Eg、Er、Eb、Ey和EL分别对应绿、红、蓝、黄和亮度5个特征通道的能量；
4)对绿、红、蓝、黄和亮度通道矩阵的每个元素都除以该通道的能量，做除法归一化；
5)将做了除法归一化的绿、红、蓝、黄四个颜色通道重新合并为两个颜色对立通道，利用除法归一化的特征通道和构成除法归一化图像，该图像中每一个像素视为三维空间里的一个点，某一个像素与所有像素均值之间的欧氏距离就是该像素的显著值。
其中，在第三步中，计算出绿、红、蓝、黄和亮度通道的能量，这里的通道能量定义为通道矩阵中所有元素的绝对值之和，具体计算公式如下：
其中，Eg、Er、Eb、Ey和EL分别对应绿、红、蓝、黄和亮度5个特征通道的能量。
其中，在第四步中，除法归一化是将通道矩阵的每个元素都除以该通道的能量，即除以该通道矩阵所有元素的绝对值之和，具体计算公式如下：
其中，和分别是做了除法归一化的绿、红、蓝、黄和亮度5个特征通道。经过上述除法归一化计算以后，每个颜色通道的能量均等于1。这意味着，如果某一颜色通道的能量很小，那么经过除法归一化后其所有元素的绝对值(幅度)就会相对放大。也就是说，能量较弱的颜色通道相对得到加强，能量较强的颜色通道相对被减弱。对于那些在除法归一化之前能量非常小(低于M×N×128的1％～5％之间)的颜色通道，在除法归一化处理后需要对其进行抑制或置零，以防这种人眼几乎感知不到的弱信号在除法归一化后被极度放大。这是因为，人是感觉不到能量很弱的颜色特征的，这种弱信号可视为图像噪声。
其中，在第五步中，将做了除法归一化的绿、红、蓝、黄四个颜色通道两两重新合并为两个颜色对立通道，具体计算公式如下：
其中，分别是除法归一化的绿/红对立通道和除法归一化的蓝/黄对立通道。
利用除法归一化的特征通道和来计算输入图像的显著图。算法的基本思想如下：在由和构成的除法归一化图像中，每一个像素都可以视为三维空间里的一个点，某一个像素与所有像素均值之间的欧氏距离就是该像素的显著值。如果分解在三个颜色通道中进行计算，那么在给定颜色通道中，某一像素的通道显著值可以定义为该像素的值与通道均值的差的绝对值。计算出每个像素对应的三个通道显著值以后，可将其整合成一张显著图S(其尺寸仍然是M×N的)。显著图中某一位置的显著值就是该位置的三个通道显著值的欧几里德范数(Euclidean Norm)，具体计算公式为：
其中，和分别表示除法归一化特征通道和各自的均值。注意在上面公式中加入了三个参数ω1、ω2和ω3，这是为了可以灵活的调整各个通道显著值在计算中所占的权重。一般地，可以设置ω1＝1，而设置ω2＝ω3＝2.55。最后，还需要将获得的显著图S归一化到灰度级范围[0,255]。
本发明所提出的图像视觉显著性计算方法利用各个像素的颜色和亮度特征来计算其视觉显著性，采用的除法归一化计算模拟了初级视觉皮层中具有同类检测特征神经元的相互抑制作用，具有生物合理性。和传统的显著性计算方法相比，本方法具有如下四个优点：1、计算简单高效；2、能准确检测到颜色差异引起的视觉显著性；3、能获得全分辨率的显著图；4、显著区域的显著值得到整体增强，具有清晰的形状。本方法在多种视觉显著性测试模板和自然图像测试集上取得了明显优于其他传统方法的结果。
附图说明
图1是本发明实施列的基于除法归一化的图像视觉显著性检测方法流程图；
图2是视觉显著性测试模板的示例；
其中：(a)测试模板；(b)对应每张测试模板计算得到的视觉显著图；
图3是大目标显著区域自然图像的示例；
其中：(a)自然图像；(b)对应每张自然图像计算得到的视觉显著图；
图4是小目标显著区域自然图像的示例；
其中：(a)自然图像；(b)对应每张自然图像计算得到的视觉显著图。
具体实施方式
下面通过实例对本发明做进一步说明。需要注意的是，公布实施例的目的在于帮助进一步理解本发明，但是本领域的技术人员可以理解：在不脱离本发明及所附权利要求的精神和范围内，各种替换和修改都是可能的。因此，本发明不应局限于实施例所公开的内容，本发明要求保护的范围以权利要求书界定的范围为准。
图1是本发明基于除法归一化的图像视觉显著性计算方法的处理流程图，包括：
第一步，将输入图像变换到CIE1976 L*a*b*颜色空间
将大小为M×N像素的彩色输入图像从RGB颜色空间变换到CIE1976 L*a*b*颜色空间。输入图像经过变换后会产生三个具有生物合理性的颜色通道，即亮度通道L、绿/红对立通道A和蓝/黄对立通道B。
第二步，计算绿、红、蓝、黄四个颜色通道
将绿/红对立通道A分解为两个子通道：A-和A+，其中，A-是将矩阵A的所有正值元素置0而得到，而A+是将矩阵A的所有负值元素置0而得到。相似地，将蓝/黄对立通道B分解为两个子通道：B-和B+，其中，B-是将矩阵B的所有正值元素置0而得到，而B+是将矩阵B的所有负值元素置0得到。根据L*a*b*颜色空间的定义，可以将矩阵A-、A+、B-和B+看作四个颜色通道，分别对应绿、红、蓝、黄四种颜色。
第三步，计算绿、红、蓝、黄和亮度通道的能量
计算出绿、红、蓝、黄和亮度通道的能量，这里的通道能量定义为通道矩阵中所有元素的绝对值之和，具体计算公式如下：
其中，Eg、Er、Eb、Ey和EL分别对应绿、红、蓝、黄和亮度5个特征通道的能量。
第四步，对绿、红、蓝、黄和亮度通道做除法归一化
除法归一化是将通道矩阵的每个元素都除以该通道的能量，即除以该通道矩阵所有元素的绝对值之和，具体计算公式如下：
其中，和分别是做了除法归一化的绿、红、蓝、黄和亮度5个特征通道。经过上述除法归一化计算以后，每个颜色通道的能量均等于1。这意味着，如果某一颜色通道的能量很小，那么经过除法归一化后其所有元素的绝对值(幅度)就会相对放大。也就是说，能量较弱的颜色通道相对得到加强，能量较强的颜色通道相对被减弱。
第五步，对能量很弱的颜色通道进行抑制
对于原本能量非常小(例如，低于可能的最大能量值M×N×128的3％)的颜色通道，在除法归一化处理后需要对其进行抑制或置零，以防这种人眼几乎感知不到的弱信号在除法归一化后被极度放大。这是因为，人是感觉不到能量很弱的颜色特征的，这种弱信号可视为图像噪声。
第六步，将除法归一化的绿、红、蓝、黄四个颜色通道合并为两个颜色对立通道
将做了除法归一化的绿、红、蓝、黄四个颜色通道两两重新合并为两个颜色对立通道，具体计算公式如下：
其中，分别是除法归一化的绿/红对立通道和除法归一化的蓝/黄对立通道。
第七步，利用除法归一化的特征通道来计算输入图像的显著图
利用除法归一化的特征通道和来计算输入图像的显著图。算法的基本思想如下：在由和构成的除法归一化图像中，每一个像素都可以视为三维空间里的一个点，某一个像素与所有像素均值之间的欧氏距离就是该像素的显著值。如果分解在三个颜色通道中进行计算，那么在给定颜色通道中，某一像素的通道显著值可以定义为该像素的值与通道均值的差的绝对值。计算出每个像素对应的三个通道显著值以后，可将其整合成一张显著图S(其尺寸仍然是M×N的)。显著图中某一位置的显著值就是该位置的三个通道显著值的欧几里德范数(Euclidean Norm)，具体计算公式为：
其中，和分别表示除法归一化特征通道和各自的均值。注意在公式中加入三个参数ω1、ω2和ω3，这是为了可以灵活的调整各个通道显著值在计算中所占的权重。一般地，可以设置ω1＝1，而设置ω2＝ω3＝2.55。最后，还需要将获得的显著图S归一化到灰度级范围[0,255]。
如图2所示为上述处理过程处理一组视觉显著性测试模板时的示例图。图2(a)所示为4张视觉显著性测试模板，在每一张图像中，只有一个显著的目标，它具有唯一的颜色，而且从第一张图像到第四张图像，目标的视觉显著性在逐渐的减弱。在图2(b)所示的本方法计算得到的视觉显著图中，目标与干扰物体显著值的差别在逐渐的减弱，这与人的视觉感知正好相吻合。该示例说明，本方法对颜色细微变化的检测也非常准确，且与人的视觉感知情况相吻合。
如图3所示为上述处理过程处理一组大目标显著区域自然图像的示例。图3(a)所示为7张自然图像，每张图像中包含着较大的显著目标区域。在图3(b)所示的本方法计算得到的视觉显著图中，显著图是全分辨率的，显著目标具有清晰的轮廓，而且显著目标的显著值是整体增强的。
如图4所示为上述处理过程处理一组小目标显著区域自然图像的示例。图4(a)所示为7张自然图像，每张图像中包含着较小的显著目标区域。在图4(b)所示的本方法计算得到的视觉显著图中，显著图是全分辨率的，显著目标具有清晰的轮廓，显著区域的显著值得到整体提高。
本发明公开的图像显著性计算方法，仅利用输入图像各个像素的颜色和亮度特征来计算图像中各个位置的视觉显著性，采用的除法归一化具有生物合理性，它能够模拟人脑初级视觉皮层中同类特征相互抑制的过程，方法简单、高效，能获得全分辨率的显著图。本发明在多种视觉显著性测试模板和自然图像测试集上取得了明显优于其他传统方法的结果。本发明能够自动计算出图像中各个像素的视觉显著性，在计算得到的显著图中，显著区域具有清晰的形状，其结果可以应用于重要目标分割、物体识别、自适应图像压缩、内容敏感的图像缩放和图像检索等应用领域。
虽然本发明已以较佳实施例披露如上，然而并非用以限定本发明。任何熟悉本领域的技术人员，在不脱离本发明技术方案范围情况下，都可利用上述揭示的方法和技术内容对本发明技术方案作出许多可能的变动和修饰，或修改为等同变化的等效实施例。因此，凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰，均仍属于本发明技术方案保护的范围内。

Claims (7)

1.一种基于除法归一化的图像视觉显著性检测方法，具体包括以下步骤：
1)将大小为M×N像素的彩色输入图像从RGB颜色空间变换到CIE1976L*a*b*颜色空间，输入图像经过变换后会产生三个具有生物合理性的颜色通道，其中亮度通道L、绿/红对立通道A和蓝/黄对立通道B；
2)将绿/红对立通道A分解为两个子通道：A-和A+，其中，A-是将矩阵A的所有正值元素置0而得到，而A+是将矩阵A的所有负值元素置0而得到；将蓝/黄对立通道B分解为两个子通道：B-和B+，其中，B-是将矩阵B的所有正值元素置0而得到，而B+是将矩阵B的所有负值元素置0得到，将矩阵A-、A+、B-和B+看作四个颜色通道，分别对应绿、红、蓝、黄四种颜色；
3)计算出绿、红、蓝、黄和亮度通道的能量，其中，Eg、Er、Eb、Ey和EL分别对应绿、红、蓝、黄和亮度5个特征通道的能量；
4)对绿、红、蓝、黄和亮度通道矩阵的每个元素都除以该通道的能量，做除法归一化；
5)将做了除法归一化的绿、红、蓝、黄四个颜色通道重新合并为两个颜色对立通道，利用除法归一化的特征通道和构成除法归一化图像，该图像中每一个像素视为三维空间里的一个点，某一个像素与所有像素均值之间的欧氏距离就是该像素的显著值。
2.如权利要求1所述的基于除法归一化的图像视觉显著性检测方法，其特征在于，步骤3)中通道能量的具体计算公式如下：
<mrow> <msub> <mi>E</mi> <mi>g</mi> </msub> <mo>=</mo> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>x</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>M</mi> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>y</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <mo>|</mo> <msub> <mi>A</mi> <mo>-</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>,</mo> </mrow>
<mrow> <msub> <mi>E</mi> <mi>r</mi> </msub> <mo>=</mo> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>x</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>M</mi> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>y</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <mo>|</mo> <msub> <mi>A</mi> <mo>+</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>,</mo> </mrow>
<mrow> <msub> <mi>E</mi> <mi>b</mi> </msub> <mo>=</mo> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>x</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>M</mi> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>y</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <mo>|</mo> <msub> <mi>B</mi> <mo>-</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>,</mo> </mrow>
<mrow> <msub> <mi>E</mi> <mi>y</mi> </msub> <mo>=</mo> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>x</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>M</mi> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>y</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <mo>|</mo> <msub> <mi>B</mi> <mo>+</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>,</mo> </mrow>
<mrow> <msub> <mi>E</mi> <mi>L</mi> </msub> <mo>=</mo> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>x</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>M</mi> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>y</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <mo>|</mo> <mi>L</mi> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>.</mo> </mrow>
3.如权利要求1所述的基于除法归一化的图像视觉显著性检测方法，其特征在于，步骤4)中除法归一化的具体计算公式如下：
<mrow> <msub> <mover> <mi>A</mi> <mo>~</mo> </mover> <mo>-</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <msub> <mi>A</mi> <mo>-</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> </mrow> <msub> <mi>E</mi> <mi>g</mi> </msub> </mfrac> <mo>,</mo> </mrow>
<mrow> <msub> <mover> <mi>A</mi> <mo>~</mo> </mover> <mo>+</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <msub> <mi>A</mi> <mo>+</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> </mrow> <msub> <mi>E</mi> <mi>r</mi> </msub> </mfrac> <mo>,</mo> </mrow>
<mrow> <msub> <mover> <mi>B</mi> <mo>~</mo> </mover> <mo>-</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <msub> <mi>B</mi> <mo>-</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> </mrow> <msub> <mi>E</mi> <mi>b</mi> </msub> </mfrac> <mo>,</mo> </mrow>
<mrow> <msub> <mover> <mi>B</mi> <mo>~</mo> </mover> <mo>+</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <msub> <mi>B</mi> <mo>+</mo> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> </mrow> <msub> <mi>E</mi> <mi>y</mi> </msub> </mfrac> <mo>,</mo> </mrow> 1
<mrow> <mover> <mi>L</mi> <mo>~</mo> </mover> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <mi>L</mi> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> </mrow> <msub> <mi>E</mi> <mi>L</mi> </msub> </mfrac> <mo>.</mo> </mrow>
4.如权利要求1所述的基于除法归一化的图像视觉显著性检测方法，其特征在于，步骤4)中对在做除法归一化前能量低于M×N×128的5％的颜色通道进行抑制或置零。
5.如权利要求3所述的基于除法归一化的图像视觉显著性检测方法，其特征在于，步骤5)中将做了除法归一化的绿、红、蓝、黄四个颜色通道两两合并，具体计算公式如下：
<mrow> <mover> <mi>A</mi> <mo>~</mo> </mover> <mo>=</mo> <msub> <mover> <mi>A</mi> <mo>~</mo> </mover> <mo>-</mo> </msub> <mo>+</mo> <msub> <mover> <mi>A</mi> <mo>~</mo> </mover> <mo>+</mo> </msub> <mo>,</mo> </mrow>
<mrow> <mover> <mi>B</mi> <mo>~</mo> </mover> <mo>=</mo> <msub> <mover> <mi>B</mi> <mo>~</mo> </mover> <mo>-</mo> </msub> <mo>+</mo> <msub> <mover> <mi>B</mi> <mo>~</mo> </mover> <mo>+</mo> </msub> <mo>.</mo> </mrow>
6.如权利要求1所述的基于除法归一化的图像视觉显著性检测方法，其特征在于，步骤5)中某一像素的显著值的具体计算公式为：
<mrow> <mi>S</mi> <mrow> <mo>(</mo> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>=</mo> <msqrt> <mrow> <msup> <mrow> <mo>&amp;lsqb;</mo> <msub> <mi>&amp;omega;</mi> <mn>1</mn> </msub> <mo>&amp;CenterDot;</mo> <mrow> <mo>(</mo> <mover> <mi>L</mi> <mo>~</mo> </mover> <mo>(</mo> <mrow> <mi>x</mi> <mo>,</mo> <mi>y</mi> </mrow> <mo>)</mo> <mo>-</mo> <msub> <mi>m</mi> <mover> <mi>L</mi> <mo>~</mo> </mover> </msub> <mo>)</mo> </mrow> <mo>&amp;rsqb;</mo> </mrow> <mn>2</mn> </msup> <mo>+</mo> <msup> <mrow> <mo>&amp;lsqb;</mo> <msub> <mi>&amp;omega;</mi> <mn>2</mn> </msub> <mo>&amp;CenterDot;</mo> <mrow> <mo>(</mo> <mover> <mi>A</mi> <mo>~</mo> </mover> <mo>(</mo> <mrow> <mi>x</mi> <mo>,</mo> <mi>y</mi> </mrow> <mo>)</mo> <mo>-</mo> <msub> <mi>m</mi> <mover> <mi>A</mi> <mo>~</mo> </mover> </msub> <mo>)</mo> </mrow> <mo>&amp;rsqb;</mo> </mrow> <mn>2</mn> </msup> <mo>+</mo> <msup> <mrow> <mo>&amp;lsqb;</mo> <msub> <mi>&amp;omega;</mi> <mn>3</mn> </msub> <mo>&amp;CenterDot;</mo> <mrow> <mo>(</mo> <mover> <mi>B</mi> <mo>~</mo> </mover> <mo>(</mo> <mrow> <mi>x</mi> <mo>,</mo> <mi>y</mi> </mrow> <mo>)</mo> <mo>-</mo> <msub> <mi>m</mi> <mover> <mi>B</mi> <mo>~</mo> </mover> </msub> <mo>)</mo> </mrow> <mo>&amp;rsqb;</mo> </mrow> <mn>2</mn> </msup> </mrow> </msqrt> <mo>,</mo> </mrow>
其中，和分别表示除法归一化特征通道和各自的均值；ω1、ω2和ω3分别为特征通道和的计算参数。
7.如权利要求6所述的基于除法归一化的图像视觉显著性检测方法，其特征在于，所述ω1：ω2：ω3＝1：2.55：2.55。
CN201410619259.4A 2014-11-06 2014-11-06 基于除法归一化的图像视觉显著性检测方法 Active CN104463917B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410619259.4A CN104463917B (zh) 2014-11-06 2014-11-06 基于除法归一化的图像视觉显著性检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410619259.4A CN104463917B (zh) 2014-11-06 2014-11-06 基于除法归一化的图像视觉显著性检测方法

Publications (2)

Publication Number Publication Date
CN104463917A CN104463917A (zh) 2015-03-25
CN104463917B true CN104463917B (zh) 2017-10-03

Family

ID=52909899

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410619259.4A Active CN104463917B (zh) 2014-11-06 2014-11-06 基于除法归一化的图像视觉显著性检测方法

Country Status (1)

Country Link
CN (1) CN104463917B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106407978B (zh) * 2016-09-24 2020-10-30 上海大学 一种结合似物度的无约束视频中显著物体检测方法
CN107145824B (zh) * 2017-03-29 2020-10-23 纵目科技（上海）股份有限公司 一种基于显著性分析的车道线分割方法及系统、车载终端
CN113781451B (zh) * 2021-09-13 2023-10-17 长江存储科技有限责任公司 晶圆检测方法、装置、电子设备及计算机可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8369652B1 (en) * 2008-06-16 2013-02-05 Hrl Laboratories, Llc Visual attention system for salient regions in imagery
CN102930542A (zh) * 2012-10-31 2013-02-13 电子科技大学 一种基于全局对比度的矢量化显著检测方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8369652B1 (en) * 2008-06-16 2013-02-05 Hrl Laboratories, Llc Visual attention system for salient regions in imagery
CN102930542A (zh) * 2012-10-31 2013-02-13 电子科技大学 一种基于全局对比度的矢量化显著检测方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
Modeling Surround Suppression in V1 Neurons with a Statistically-Derived Normalization Model;Eero P. Simoncelli;《Advances in Neural Information Processing Systems》;19981231(第11期);153-159 *
Visual saliency: a biologically plausible contourlet-like frequency domain approach;Peng Bian 等;《Cognitive Neurodynamics》;20100930(第4期);189-198 *
基于频率域的显著性区域提取方法;于振洋;《长沙理工大学学报(自然科学版)》;20110928;第8卷(第3期);83-88 *
视觉注意的研究;边鹏;《中国优秀硕士学位论文全文数据库 信息科技辑》;20110315;I138-997 *

Also Published As

Publication number Publication date
CN104463917A (zh) 2015-03-25

Similar Documents

Publication Publication Date Title
CN104966085B (zh) 一种基于多显著特征融合的遥感图像感兴趣区域检测方法
CN103186904B (zh) 图片轮廓提取方法及装置
CN103914699A (zh) 一种基于色彩空间的自动唇彩的图像增强的方法
CN103218605B (zh) 一种基于积分投影与边缘检测的快速人眼定位方法
CN106228547A (zh) 一种基于视觉颜色理论和同质抑制的轮廓与边界检测算法
CN104484658A (zh) 一种基于多通道卷积神经网络的人脸性别识别方法及装置
CN102903081A (zh) 基于rgb彩色模型的低光照图像增强方法
CN104392233B (zh) 一种基于区域的图像显著图提取方法
CN103295241A (zh) 一种基于Gabor小波的频域显著性目标检测方法
CN104361574A (zh) 一种基于稀疏表示的无参考彩色图像质量评价方法
CN104463917B (zh) 基于除法归一化的图像视觉显著性检测方法
CN102063627B (zh) 基于多小波变换的自然图像和计算机生成图像的识别方法
CN104463821A (zh) 一种红外图像与可见光图像的融合方法
CN105809173A (zh) 一种基于仿生物视觉变换的图像rstn不变属性特征提取及识别方法
CN106295657A (zh) 一种视频数据结构化过程中提取人体高度特征的方法
CN102567969B (zh) 一种彩色图像边缘检测方法
CN106355596B (zh) 一种融合均匀颜色信息和复合感受野模型的边缘检测方法
CN110298893A (zh) 一种行人衣着颜色识别模型的生成方法及装置
CN105844667A (zh) 一种紧凑颜色编码的结构化目标跟踪方法
CN106296749B (zh) 基于l1范数约束的rgb-d图像本征分解方法
CN107146258A (zh) 一种图像显著区域检测方法
CN104537687B (zh) 一种具有速度信息的时序模板动作表示方法
CN108090460A (zh) 基于韦伯多方向描述子的人脸表情识别特征提取算法
CN105513071B (zh) 一种地形图图式质量评价方法
CN107145892A (zh) 一种基于自适应融合机制的图像显著性物体检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant