CN112418218B - 目标区域检测方法、装置、设备及存储介质 - Google Patents

目标区域检测方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN112418218B
CN112418218B CN202011331390.2A CN202011331390A CN112418218B CN 112418218 B CN112418218 B CN 112418218B CN 202011331390 A CN202011331390 A CN 202011331390A CN 112418218 B CN112418218 B CN 112418218B
Authority
CN
China
Prior art keywords
super
superpixel
pixel
adjacent
superpixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011331390.2A
Other languages
English (en)
Other versions
CN112418218A (zh
Inventor
王勇
张洋
程卓
黄田野
王典洪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China University of Geosciences
Original Assignee
China University of Geosciences
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China University of Geosciences filed Critical China University of Geosciences
Priority to CN202011331390.2A priority Critical patent/CN112418218B/zh
Publication of CN112418218A publication Critical patent/CN112418218A/zh
Application granted granted Critical
Publication of CN112418218B publication Critical patent/CN112418218B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/136—Segmentation; Edge detection involving thresholding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及计算机视觉领域，提供一种目标区域检测方法，包括以下步骤：获取待处理图像，通过超像素分割将所述待处理图像分割为u个超像素；基于无向图模型建立u个所述超像素中所有相邻超像素的关联；对u个所述超像素进行迭代合并处理，获得k个超像素块；大大降低了目标区域检测的计算成本；提取k个所述超像素块中每个超像素块的特征信息，通过计算获得每个超像素块的显著值；通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域。超像素迭代合并与中心约束、边界约束相结合有效提高了目标区域检测的效果；更好兼顾了目标区域检测的准确性与时效性。

Description

目标区域检测方法、装置、设备及存储介质
技术领域
本发明涉及计算机视觉领域，尤其涉及一种目标区域检测方法、装置、设备及存储介质。
背景技术
视觉显著性分析是一种有效的目标区域自动检测方法，采用显著性检测方法可以迅速地了解图像信息，将注意力集中在感兴趣目标上，同时忽略周围背景信息的干扰，实现目标的快速精确定位。
现有显著性检测算法可以分为自底向上和自顶向下两类方法。前者是指利用纹理、强度、颜色和边缘等低层次线索来度量显著值，大致可分为以下三种检测模型：(1)基于局部对比度的方法，如经典的Itti算法和基于图论的GBVS算法，该类方法通过提取目标的颜色、亮度和方向等低层特征，经过线性融合得到目标的显著性图，优点是特征易于提取、实现简单，但该模型获得的显著性图对场景目标的描述较模糊，容易产生块效应，很难获取目标区域的整体信息和边缘信息；(2)基于全局对比度的方法，如谱残差(SR)方法和频域可调谐的显著区域检测(FT)算法，这两种方法均是在频率域从全局结构中去除图像的冗余部分，运算简单且快速，但只考虑了图像的整体特征而忽略了局部特征信息，对目标的纹理细节不能进行很好地描述，对复杂背景和噪声稳健性差；(3)局部和全局对比度相结合的方法，如基于上下文感知(CA)算法，该方法只考虑了显著性目标周围的小部分背景区域，导致在全局范围内对非显著性区域的抑制不足，只在边缘处得到增强，对大尺度目标检测容易产生内容缺失，复杂场景中误检现象严重。
相比之下，后者是利用高层次先验知识，采用训练学习的方式进行显著性识别。例如，Borji等提取图像中每一个像素点位置低层的和自顶向下的特征，选取训练过的分类器去决定该位置是否属于显著性区域。Lu等人通过对已有的图像库标签数据进行大量学习，生成了一组显著性种子，并使用这些种子来识别显著性区域。Vig使用深度卷积网络进行首次显著性预测的尝试。然而在这类方法的计算过程中提取了数量巨大的且与目标无关的候选区域，耗费了大量的计算时间。因此，在实际工程应用中，这类算法不适合在资源有限的视觉感知平台上运行。
现有显著性检测方法存在以下问题：①为了得到更加清晰的目标边界，通常在像素级别上来进行显著性计算，计算成本过大，部分取得不错检测效果的算法往往要以增加计算复杂度为代价；②实验表明，这些常用方法应用于背景与目标区分度低、目标处于图像边缘区域或者目标区域较大等复杂场景时，检测效果不理想。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于，提供能有效兼顾检测准确性与时效性的目标区域检测方法、装置、设备及存储介质，旨在解决现有技术中显著性检测方法计算成本过大，背景与目标区分度低、目标处于图像边缘区域或者目标区域较大等复杂场景时，检测效果不理想的技术问题。
为实现上述目的，本发明提供目标区域检测方法，包括以下步骤：
获取待处理图像，通过超像素分割将所述待处理图像分割为u个超像素；
获取u个所述超像素中所有的相邻超像素对；
对u个所述超像素进行迭代合并处理，获得k个超像素块；
提取k个所述超像素块中每个超像素块的特征信息，通过计算获得每个超像素块的显著值；
通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域。
优选地，所述获取u个所述超像素中所有的相邻超像素对，包括：
构建u个所述超像素的无向图模型G(V,E)，其中V表示超像素的标号集合，E表示超像素的相邻关系；对所述待处理图像进行超像素分割获得超像素的标号集合V，同一超像素中的所有像素点具有相同的标号；
依次判断所述待处理图像中每个像素点所属的超像素标号是否与右方相邻像素点所属的超像素标号和下方相邻像素点所属的超像素标号一致；
若不一致，则对应的像素点所属的超像素与右方或下方相邻像素点所属的超像素为相邻超像素对；
遍历所有像素点，获得所有的相邻超像素对，其集合即为E。
优选地，所述对u个所述超像素进行迭代合并处理，获得k个超像素块，包括：
计算u个所述超像素中每个超像素的LAB分量均值，将每个所述超像素的LAB分量均值作为对应超像素的特征向量；
计算所有的所述相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离；
计算所有获得的所述欧式距离的均值，将所述均值作为阈值T；
将每个相邻超像素对的欧式距离依次与所述阈值T进行比较，将所述欧式距离小于所述阈值T的相邻超像素对进行合并；
重复上述步骤进行n次迭代，获得k个超像素块，所述n为正整数，取值范围为3到5，缺省值为4。
优选地，所述计算所述所有的相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离的公式为：
Figure BDA0002795937050000031
其中
Figure BDA0002795937050000032
分别表示超像素的LAB分量均值，i、j为一对相邻超像素的标号，i和j均为正整数，且i不等于j。
优选地，所述提取k个所述超像素块中每个超像素块的特征信息，计算获得每个超像素块的显著值，包括：
计算获得超像素块ri和超像素块rj的颜色距离Dc(ri,rj)，公式具体为：
Figure BDA0002795937050000033
计算获得超像素块ri和超像素块rj的空间距离Dp(ri,rj)，公式具体为：
Figure BDA0002795937050000034
其中sqrt()表示开方运算，
Figure BDA0002795937050000035
分别为超像素块ri和超像素块rj中所有像素点的LAB分量均值,
Figure BDA0002795937050000036
分别为超像素块ri和超像素块rj中所有像素点位置坐标的均值，i、j为一对相邻超像素的标号，i和j均为正整数，且i不等于j；
对所述超像素块ri与其它所有超像素块的颜色距离之和以及空间距离之和进行计算，获得所述超像素块ri的特征信息D(ri)，公式具体为：
Figure BDA0002795937050000041
系数c＝5，Dc(ri)为超像素块ri与其它所有超像素块的颜色距离之和，Ds(ri)为超像素块ri与其它所有超像素块的空间距离之和；
根据所述超像素块ri的特征信息D(ri)，计算获得超像素块ri的显著值S(ri)，公式具体为：
S(ri)＝1-exp(-D(ri))
其中，exp()为以自然常数e为底的指数函数，D(ri)为超像素块ri的特征信息。
优选地，所述通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域，包括：
计算所述超像素块ri的边界约束wb(ri)和中心约束wc(ri)，公式具体为：
Figure BDA0002795937050000042
Figure BDA0002795937050000043
其中，n为超像素块ri包含图像边界像素点的数目，N为图像边界像素点的总数目，t为控制二者比例的权值参数，经验值取t＝10，pi为超像素块ri中每个像素点的位置坐标，pc是图像的中心位置坐标，Ni是超像素块ri中像素点的个数；
根据所述超像素块ri的显著值S(ri)、所述边界约束wb(ri)和所述中心约束wc(ri)，计算获得所述超像素块ri的最终显著值S′(ri)，具体公式为：
S′(ri)＝wb(ri)×wc(ri)×S(ri)
重复上述步骤，获得所有超像素块的最终显著值，根据所有所述超像素块的最终显著值，获得最终显著性图像；
所述最终显著性图像中的高亮部分，即为目标区域。
此外，为实现上述目的，本发明还提出目标区域检测设备，所述目标区域检测设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的目标区域检测程序，所述目标区域检测程序配置为实现如上文所述的目标区域检测方法的步骤。
此外，为实现上述目的，本发明还提出一种存储介质，所述存储介质上存储有目标区域检测程序，所述目标区域检测程序被处理器执行时实现如上文所述的目标区域检测方法的步骤。
此外，为实现上述目的，本发明还提出目标区域检测装置，包括：
分割模块，用于获取待处理图像，通过超像素分割将所述待处理图像分割为u个超像素；
相邻超像素对提取模块，用于获取u个所述超像素中所有的相邻超像素对；
合并模块，用于对u个所述超像素进行迭代合并处理，获得k个超像素块；
显著值计算模块，用于提取k个所述超像素块中每个超像素块的特征信息，通过计算获得每个超像素块的显著值；
目标区域获取模块，用于通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域。
本发明具有以下有益效果：超像素分割迭代合并算法新颖独特，只需几次合并运算即可分割目标与背景区域，大大降低了目标区域检测的计算成本；引入中心约束与边界约束进一步提高了目标区域检测的效果；更好兼顾了目标区域检测的准确性与时效性。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的目标区域检测设备的结构示意图；
图2为本发明目标区域检测方法的流程示意图；
图3为本发明目标区域检测装置的结构框图；
图4为对测试图像使用不同方法得到结果对比；
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
参照图1，图1为本发明实施例方案涉及的硬件运行环境的目标区域检测设备结构示意图。
如图1所示，该目标区域检测设备可以包括：处理器1001，例如中央处理器(Central Processing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)，可选用户接口1003还可以包括标准的有线接口、无线接口，对于用户接口1003的有线接口在本发明中可为USB接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(WIreless-FIdelity，WI-FI)接口)。存储器1005可以是高速的随机存取存储器(Random Access Memory，RAM)，也可以是稳定的存储器(Non-volatileMemory，NVM)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的结构并不构成对目标区域检测设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及目标区域检测程序。
在图1所示的目标区域检测设备中，网络接口1004主要用于连接后台服务器，与所述后台服务器进行数据通信；用户接口1003主要用于连接用户设备；所述目标区域检测设备通过处理器1001调用存储器1005中存储的目标区域检测程序，并执行本发明实施例提供的目标区域检测方法。
基于上述硬件结构，提出本发明目标区域检测方法的实施例。
参照图2，图2为本发明目标区域检测方法的流程示意图。
在第一实施例中，所述目标区域检测方法适用于基于树莓派的视觉感知系统，具体包括以下步骤：
S10：获取待处理图像，通过超像素分割将所述待处理图像分割为u个超像素。
在具体实现中，优选地，u的值为200，利用树莓派视觉感知系统采集待检测图像，对图像采用单线性迭代聚类方法SLIC(Simple linear iterative clustering)进行超像素分割，紧凑系数为40，分成200块互不重叠的超像素。后续的检测过程在超像素级别上进行，有助于提高检测算法的运行速度。
S20：获取u个所述超像素中所有的相邻超像素对。
在具体实现中，依次对所有像素点分别与其右边以及下边紧邻的像素点进行比较，判断它们各自所属的超像素标号是否一致，如果不一致说明它们是超像素的边缘点且分属的两个超像素是相邻的，在数组中记录这两个超像素的标号，遍历所有的像素可以得到所有相邻超像素对。
S30：对u个所述超像素进行迭代合并处理，获得k个超像素块。
在具体实现中，计算所有相邻超像素对在CIELAB颜色空间的欧式距离，将其均值作为阈值，将颜色欧式距离小于该阈值的超像素进行合并，重复n次步骤S20、S30得到合并后的超像素块，优选地，n取4。
S40：提取k个所述超像素块中每个超像素块的特征信息，通过计算获得每个超像素块的显著值。
在具体实现中，计算每个超像素块与其他所有超像素块的颜色距离之和以及空间距离之和，构建基于这二者的综合函数并计算每个超像素块的显著值。
S50：通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域。
在具体实现中，对于每个超像素块，分别求解边界约束与中心约束；通过计算最终显著值，从而生成最终的显著性图，图中目标区域高亮显示。
进一步地，所述获取u个所述超像素中所有的相邻超像素对，包括：
S201：构建u个所述超像素的无向图模型G(V,E)，其中V表示超像素的标号集合，E表示超像素的相邻关系；对所述待处理图像进行超像素分割获得超像素的标号集合V，同一超像素中的所有像素点具有相同的标号；
S202：依次判断所述待处理图像中每个像素点所属的超像素标号是否与右方相邻像素点所属的超像素标号和下方相邻像素点所属的超像素标号一致；
S203：若不一致，则对应的像素点所属的超像素与右方或下方相邻像素点所属的超像素为相邻超像素对；
S204：遍历所有像素点，获得所有的相邻超像素对，其集合即为E。
进一步地，所述对u个所述超像素进行迭代合并处理，获得k个超像素块，包括：
S301：计算u个所述超像素中每个超像素的LAB分量均值，将每个所述超像素的LAB分量均值作为对应超像素的特征向量；
S302：计算所有的所述相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离；
S303：计算所有获得的所述欧式距离的均值，将所述均值作为阈值T；
S304：将每个相邻超像素对的欧式距离依次与所述阈值T进行比较，将所述欧式距离小于所述阈值T的相邻超像素对进行合并；
S305：重复上述步骤进行n次迭代，获得k个超像素块，所述n为正整数，取值范围为3到5，缺省值为4。
在具体实现中，k的值由具体实验决定，取值范围一般为2到5的整数。
进一步地，所述计算所述所有的相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离的公式为：
Figure BDA0002795937050000081
其中
Figure BDA0002795937050000082
分别表示超像素的LAB分量均值，i、j为一对相邻超像素的标号，i和j均为正整数，且i不等于j。
进一步地，所述提取k个所述超像素块中每个超像素块的特征信息，计算获得每个超像素块的显著值，包括：
S401：计算获得超像素块ri和超像素块rj的颜色距离Dc(ri,rj)，公式具体为：
Figure BDA0002795937050000083
S402：计算获得超像素块ri和超像素块rj的空间距离Dp(ri,rj)，公式具体为：
Figure BDA0002795937050000084
其中sqrt()表示开方运算，
Figure BDA0002795937050000085
分别为超像素块ri和超像素块rj中所有像素点的LAB分量均值,
Figure BDA0002795937050000086
分别为超像素块ri和超像素块rj中所有像素点位置坐标的均值，i、j为一对相邻超像素的标号，i和j均为正整数，且i不等于j；x和y为空间坐标。
S403：对所述超像素块ri与其它所有超像素块的颜色距离之和以及空间距离之和进行计算，获得所述超像素块ri的特征信息D(ri)，公式具体为：
Figure BDA0002795937050000091
系数c＝5，Dc(ri)为超像素块ri与其它所有超像素块的颜色距离之和，Ds(ri)为超像素块ri与其它所有超像素块的空间距离之和；
S404：根据所述超像素块ri的特征信息D(ri)，计算获得超像素块ri的显著值S(ri)，公式具体为：
S(ri)＝1-exp(-D(ri)) (5)
其中，exp()为以自然常数e为底的指数函数，D(ri)为超像素块ri的特征信息。
进一步地，所述通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域，包括：
S501：计算所述超像素块ri的边界约束wb(ri)和中心约束wc(ri)，公式具体为：
Figure BDA0002795937050000092
Figure BDA0002795937050000093
其中，n为超像素块ri包含图像边界像素点的数目，N为图像边界像素点的总数目，t为控制二者比例的权值参数，经验值取t＝10，pi为超像素块ri中每个像素点的位置坐标，pc是图像的中心位置坐标，Ni是超像素块ri中像素点的个数；
S502：根据所述超像素块ri的显著值S(ri)、所述边界约束wb(ri)和所述中心约束wc(ri)，计算获得所述超像素块ri的最终显著值S′(ri)，具体公式为：
S′(ri)＝wb(ri)×wc(ri)×S(ri) (8)
S503：重复上述步骤，获得所有超像素块的最终显著值，根据所有所述超像素块的最终显著值，获得最终显著性图像；
所述最终显著性图像中的高亮部分，即为目标区域。
为了对本发明方法的性能进行评估，将本发明的目标区域检测方法与六种典型的显著性检测算法(FT、GMR、HC、MSS、PCA和RC算法)进行比较。
图4给出了测试图像采用不同方法得到的显著性图。图4(a)为搭载树莓派视觉感知系统的小型无人机采集的测试图像，图4(b)～(g)分别给出了上述六种算法的检测结果，图4(h)是本方法的检测结果。对比检测结果可以发现，采用传统方法时目标区域检测不够完整，特别是当背景区分度较差时，传统算法会有更多的误检。相反，本方法可以抑制背景干扰的影响，在各种条件下都能得到更加完整的检测结果，边缘轮廓也更加清晰。
在代码未经优化的情况下，单幅352*288图像在树莓派上的平均处理时间约为30s，基本可以满足搭载树莓派视觉感知系统的无人机空中监测任务的需求。
此外，本发明实施例还提出一种存储介质，所述存储介质上存储有目标区域检测程序，所述目标区域检测程序被处理器执行时实现如上文所述的目标区域检测方法的步骤。
此外，参照图3，本发明实施例还提出目标区域检测装置，所述目标区域检测装置包括：
分割模块10，用于获取待处理图像，通过超像素分割将所述待处理图像分割为u个超像素；
相邻超像素对提取模块20，用于获取u个所述超像素中所有的相邻超像素对；
合并模块30，用于对u个所述超像素进行迭代合并处理，获得k个超像素块；
显著值计算模块40，用于提取k个所述超像素块中每个超像素块的特征信息，通过计算获得每个超像素块的显著值；
目标区域获取模块50，用于通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域。
本发明所述目标区域检测装置的其他实施例或具体实现方式可参照上述各方法实施例，此处不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。词语第一、第二、以及第三等的使用不表示任何顺序，可将这些词语解释为标识。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如只读存储器镜像(Read Only Memory image，ROM)/随机存取存储器(Random AccessMemory，RAM)、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (6)

1.一种目标区域检测方法，其特征在于，包括以下步骤：
获取待处理图像，通过超像素分割将所述待处理图像分割为u个超像素；
获取u个所述超像素中所有的相邻超像素对；
所述获取u个所述超像素中所有的相邻超像素对，包括：
构建u个所述超像素的无向图模型G(V,E)，其中V表示超像素的标号集合，E表示超像素的相邻关系；对所述待处理图像进行超像素分割获得超像素的标号集合V，同一超像素中的所有像素点具有相同的标号；
依次判断所述待处理图像中每个像素点所属的超像素标号是否与右方相邻像素点所属的超像素标号和下方相邻像素点所属的超像素标号一致；
若不一致，则对应的像素点所属的超像素与右方或下方相邻像素点所属的超像素为相邻超像素对；
遍历所有像素点，获得所有的相邻超像素对，其集合即为E；
对u个所述超像素进行迭代合并处理，获得k个超像素块；
所述对u个所述超像素进行迭代合并处理，获得k个超像素块，包括：
计算u个所述超像素中每个超像素的LAB分量均值，将每个所述超像素的LAB分量均值作为对应超像素的特征向量；
计算所有的所述相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离；
计算所有获得的所述欧式距离的均值，将所述均值作为阈值T；
将每个相邻超像素对的欧式距离依次与所述阈值T进行比较，将所述欧式距离小于所述阈值T的相邻超像素对进行合并；
重复上述步骤进行n次迭代，获得k个超像素块，所述n为正整数，取值范围为3到5，缺省值为4；
所述计算所述所有的相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离的公式为：
Figure FDA0003778483490000011
其中
Figure FDA0003778483490000012
分别表示超像素的LAB分量均值，i、j为一对相邻超像素的标号，i和j均为正整数，且i不等于j；
提取k个所述超像素块中每个超像素块的特征信息，通过计算获得每个超像素块的显著值；
通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域。
2.根据权利要求1所述的一种目标区域检测方法，其特征在于，所述提取k个所述超像素块中每个超像素块的特征信息，计算获得每个超像素块的显著值，包括：
计算获得超像素块ri和超像素块rj的颜色距离Dc(ri,rj)，公式具体为：
Figure FDA0003778483490000021
计算获得超像素块ri和超像素块rj的空间距离Dp(ri,rj)，公式具体为：
Figure FDA0003778483490000022
其中sqrt()表示开方运算，
Figure FDA0003778483490000023
分别为超像素块ri和超像素块rj中所有像素点的LAB分量均值,
Figure FDA0003778483490000024
分别为超像素块ri和超像素块rj中所有像素点位置坐标的均值，i、j为一对相邻超像素的标号，i和j均为正整数，且i不等于j；
对所述超像素块ri与其它所有超像素块的颜色距离之和以及空间距离之和进行计算，获得所述超像素块ri的特征信息D(ri)，公式具体为：
Figure FDA0003778483490000025
系数c＝5，Dc(ri)为超像素块ri与其它所有超像素块的颜色距离之和，Ds(ri)为超像素块ri与其它所有超像素块的空间距离之和；
根据所述超像素块ri的特征信息D(ri)，计算获得超像素块ri的显著值S(ri)，公式具体为：
S(ri)＝1-exp(-D(ri))
其中，exp()为以自然常数e为底的指数函数，D(ri)为超像素块ri的特征信息。
3.根据权利要求2所述的一种目标区域检测方法，其特征在于，所述通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域，包括：
计算所述超像素块ri的边界约束wb(ri)和中心约束wc(ri)，公式具体为：
Figure FDA0003778483490000031
Figure FDA0003778483490000032
其中，n为超像素块ri包含图像边界像素点的数目，N为图像边界像素点的总数目，t为控制二者比例的权值参数，经验值取t＝10，pi为超像素块ri中每个像素点的位置坐标，pc是图像的中心位置坐标，Ni是超像素块ri中像素点的个数；
根据所述超像素块ri的显著值S(ri)、所述边界约束wb(ri)和所述中心约束wc(ri)，计算获得所述超像素块ri的最终显著值S′(ri)，具体公式为：
S′(ri)＝wb(ri)×wc(ri)×S(ri)
重复上述步骤，获得所有超像素块的最终显著值，根据所有所述超像素块的最终显著值，获得最终显著性图像；
所述最终显著性图像中的高亮部分，即为目标区域。
4.一种目标区域检测装置，其特征在于，所述一种目标区域检测装置包括：
分割模块，用于获取待处理图像，通过超像素分割将所述待处理图像分割为u个超像素；
相邻超像素对提取模块，用于获取u个所述超像素中所有的相邻超像素对；
所述获取u个所述超像素中所有的相邻超像素对，包括：
构建u个所述超像素的无向图模型G(V,E)，其中V表示超像素的标号集合，E表示超像素的相邻关系；对所述待处理图像进行超像素分割获得超像素的标号集合V，同一超像素中的所有像素点具有相同的标号；
依次判断所述待处理图像中每个像素点所属的超像素标号是否与右方相邻像素点所属的超像素标号和下方相邻像素点所属的超像素标号一致；
若不一致，则对应的像素点所属的超像素与右方或下方相邻像素点所属的超像素为相邻超像素对；
遍历所有像素点，获得所有的相邻超像素对，其集合即为E；
合并模块，用于对u个所述超像素进行迭代合并处理，获得k个超像素块；
所述对u个所述超像素进行迭代合并处理，获得k个超像素块，包括：
计算u个所述超像素中每个超像素的LAB分量均值，将每个所述超像素的LAB分量均值作为对应超像素的特征向量；
计算所有的所述相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离；
计算所有获得的所述欧式距离的均值，将所述均值作为阈值T；
将每个相邻超像素对的欧式距离依次与所述阈值T进行比较，将所述欧式距离小于所述阈值T的相邻超像素对进行合并；
重复上述步骤进行n次迭代，获得k个超像素块，所述n为正整数，取值范围为3到5，缺省值为4；
所述计算所述所有的相邻超像素对中每个相邻超像素对在CIELAB颜色空间的欧式距离的公式为：
Figure FDA0003778483490000041
其中
Figure FDA0003778483490000042
分别表示超像素的LAB分量均值，i、j为一对相邻超像素的标号，i和j均为正整数，且i不等于j；
显著值计算模块，用于提取k个所述超像素块中每个超像素块的特征信息，通过计算获得每个超像素块的显著值；
目标区域获取模块，用于通过中心约束和边界约束对每个所述超像素块的显著值进行加权计算，获得目标区域。
5.一种目标区域检测设备，其特征在于，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的目标区域检测程序，所述目标区域检测程序被所述处理器执行时实现如权利要求1至3中任一项所述的一种目标区域检测方法的步骤。
6.一种存储介质，其特征在于，所述存储介质上存储有目标区域检测程序，所述目标区域检测程序被处理器执行时实现如权利要求1至3中任一项所述的一种目标区域检测方法的步骤。
CN202011331390.2A 2020-11-24 2020-11-24 目标区域检测方法、装置、设备及存储介质 Active CN112418218B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011331390.2A CN112418218B (zh) 2020-11-24 2020-11-24 目标区域检测方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011331390.2A CN112418218B (zh) 2020-11-24 2020-11-24 目标区域检测方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN112418218A CN112418218A (zh) 2021-02-26
CN112418218B true CN112418218B (zh) 2023-02-28

Family

ID=74778546

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011331390.2A Active CN112418218B (zh) 2020-11-24 2020-11-24 目标区域检测方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN112418218B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105976378A (zh) * 2016-05-10 2016-09-28 西北工业大学 基于图模型的显著性目标检测方法
CN106447679A (zh) * 2016-10-17 2017-02-22 大连理工大学 一种基于迭代图割和自适应聚类的显著性检测方法
CN108416347A (zh) * 2018-01-04 2018-08-17 天津大学 基于边界先验和迭代优化的显著目标检测算法
CN109636784A (zh) * 2018-12-06 2019-04-16 西安电子科技大学 基于最大邻域和超像素分割的图像显著性目标检测方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110088805B (zh) * 2016-12-20 2023-06-06 柯达阿拉里斯股份有限公司 用于检测和分割多个前景对象的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105976378A (zh) * 2016-05-10 2016-09-28 西北工业大学 基于图模型的显著性目标检测方法
CN106447679A (zh) * 2016-10-17 2017-02-22 大连理工大学 一种基于迭代图割和自适应聚类的显著性检测方法
CN108416347A (zh) * 2018-01-04 2018-08-17 天津大学 基于边界先验和迭代优化的显著目标检测算法
CN109636784A (zh) * 2018-12-06 2019-04-16 西安电子科技大学 基于最大邻域和超像素分割的图像显著性目标检测方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
基于视觉感知的无人机目标识别与跟踪技术研究;王海罗;《中国博士学位论文全文数据库 信息科技辑》;20160715;第40-50页 *
基于超像素一致显著性的视频运动目标检测算法;于洪洋等;《长春理工大学学报(自然科学版)》;20191215(第06期);全文 *
王海罗.基于视觉感知的无人机目标识别与跟踪技术研究.《中国博士学位论文全文数据库 信息科技辑》.2016,第40-50页. *

Also Published As

Publication number Publication date
CN112418218A (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
CN110502982B (zh) 一种检测高速公路中障碍物的方法、装置及计算机设备
CN108629286B (zh) 一种基于主观感知显著模型的遥感机场目标检测方法
CN112381775A (zh) 一种图像篡改检测方法、终端设备及存储介质
EP3073443B1 (en) 3d saliency map
CN111932544A (zh) 篡改图像检测方法、装置及计算机可读存储介质
CN110807110B (zh) 结合局部和全局特征的图片搜索方法、装置及电子设备
Herrault et al. Automatic extraction of forests from historical maps based on unsupervised classification in the CIELab color space
CN110852327A (zh) 图像处理方法、装置、电子设备及存储介质
CN111274964B (zh) 一种基于无人机视觉显著性分析水面污染物的检测方法
CN108960247B (zh) 图像显著性检测方法、装置以及电子设备
CN114444565A (zh) 一种图像篡改检测方法、终端设备及存储介质
CN111738252A (zh) 图像中的文本行检测方法、装置及计算机系统
Chen et al. Image segmentation based on mathematical morphological operator
CN113378837A (zh) 车牌遮挡识别方法、装置、电子设备和存储介质
CN111476226B (zh) 一种文本定位方法、装置及模型训练方法
CN112132750A (zh) 一种视频处理方法与装置
CN112418218B (zh) 目标区域检测方法、装置、设备及存储介质
CN115294162B (zh) 目标识别方法、装置、设备及存储介质
Ghandour et al. Building shadow detection based on multi-thresholding segmentation
CN111047614A (zh) 一种基于特征提取的复杂场景图像的目标角点提取方法
CN112241736A (zh) 一种文本检测的方法及装置
CN115223173A (zh) 对象识别方法、装置、电子设备及存储介质
CN112101139B (zh) 人形检测方法、装置、设备及存储介质
KR102285269B1 (ko) 빅데이터 기반 Geo AI를 활용한 이미지 분석 장치 및 방법
Wang et al. Boundary detection using unbiased sparseness‐constrained colour‐opponent response and superpixel contrast

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20210226

Assignee: Hubei Hongrui Membrane Technology Co.,Ltd.

Assignor: CHINA University OF GEOSCIENCES (WUHAN CITY)

Contract record no.: X2024980001471

Denomination of invention: Target area detection methods, devices, equipment, and storage media

Granted publication date: 20230228

License type: Common License

Record date: 20240129

Application publication date: 20210226

Assignee: Wuhan Xingqi Technology Co.,Ltd.

Assignor: CHINA University OF GEOSCIENCES (WUHAN CITY)

Contract record no.: X2024980001469

Denomination of invention: Target area detection methods, devices, equipment, and storage media

Granted publication date: 20230228

License type: Common License

Record date: 20240129

Application publication date: 20210226

Assignee: Wuhan Xintiande Energy Technology Co.,Ltd.

Assignor: CHINA University OF GEOSCIENCES (WUHAN CITY)

Contract record no.: X2024980001464

Denomination of invention: Target area detection methods, devices, equipment, and storage media

Granted publication date: 20230228

License type: Common License

Record date: 20240129

Application publication date: 20210226

Assignee: Wuhan Shitu Technology Co.,Ltd.

Assignor: CHINA University OF GEOSCIENCES (WUHAN CITY)

Contract record no.: X2024980001462

Denomination of invention: Target area detection methods, devices, equipment, and storage media

Granted publication date: 20230228

License type: Common License

Record date: 20240129

Application publication date: 20210226

Assignee: Wuhan Rongguo Biotechnology Co.,Ltd.

Assignor: CHINA University OF GEOSCIENCES (WUHAN CITY)

Contract record no.: X2024980001461

Denomination of invention: Target area detection methods, devices, equipment, and storage media

Granted publication date: 20230228

License type: Common License

Record date: 20240129

Application publication date: 20210226

Assignee: TIANJIN YONGXINGTAI TECHNOLOGY CO.,LTD.

Assignor: CHINA University OF GEOSCIENCES (WUHAN CITY)

Contract record no.: X2024980001460

Denomination of invention: Target area detection methods, devices, equipment, and storage media

Granted publication date: 20230228

License type: Common License

Record date: 20240129

EE01 Entry into force of recordation of patent licensing contract