CN111768368B - 一种基于最大稳定极值区域的图像区域复制篡改检测方法 - Google Patents
一种基于最大稳定极值区域的图像区域复制篡改检测方法 Download PDFInfo
- Publication number
- CN111768368B CN111768368B CN202010452710.3A CN202010452710A CN111768368B CN 111768368 B CN111768368 B CN 111768368B CN 202010452710 A CN202010452710 A CN 202010452710A CN 111768368 B CN111768368 B CN 111768368B
- Authority
- CN
- China
- Prior art keywords
- image
- region
- regions
- extremum
- sharpness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 96
- 238000000034 method Methods 0.000 claims abstract description 81
- 238000012545 processing Methods 0.000 claims abstract description 5
- 238000004422 calculation algorithm Methods 0.000 claims description 13
- 101100460704 Aspergillus sp. (strain MF297-2) notI gene Proteins 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims description 3
- 230000000877 morphologic effect Effects 0.000 claims description 3
- 238000011524 similarity measure Methods 0.000 claims description 3
- 239000013598 vector Substances 0.000 claims description 3
- 238000005070 sampling Methods 0.000 claims description 2
- 238000012937 correction Methods 0.000 abstract description 12
- 230000006835 compression Effects 0.000 abstract description 10
- 238000007906 compression Methods 0.000 abstract description 10
- 238000001914 filtration Methods 0.000 abstract description 9
- 235000002566 Capsicum Nutrition 0.000 abstract description 4
- 239000006002 Pepper Substances 0.000 abstract description 4
- 235000016761 Piper aduncum Nutrition 0.000 abstract description 4
- 235000017804 Piper guineense Nutrition 0.000 abstract description 4
- 235000008184 Piper nigrum Nutrition 0.000 abstract description 4
- 150000003839 salts Chemical class 0.000 abstract description 4
- 230000014759 maintenance of location Effects 0.000 abstract description 2
- 244000203593 Piper nigrum Species 0.000 abstract 1
- 238000012360 testing method Methods 0.000 description 17
- 238000012805 post-processing Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000000007 visual effect Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000002474 experimental method Methods 0.000 description 5
- 238000000605 extraction Methods 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 241000722363 Piper Species 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 230000010076 replication Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010367 cloning Methods 0.000 description 1
- 238000007621 cluster analysis Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000012733 comparative method Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
- G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Quality & Reliability (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种基于最大稳定极值区域的图像区域复制篡改检测方法,包括以下步骤:首先提取图像的SIFT特征点并进行匹配;然后分别提取R,G,B三个颜色通道的最大稳定极值区域,将找到的特征点替换为所对应的最大稳定极值区域;找到极值区域数目最多的两个通道,将这两个通道上所对应的可疑区域分别利用颜色和锐利度进行匹配;最后,通过两个通道的可疑区域的交集定位篡改区域。本发明的方法直接针对图像对象,可以精确检测出复制区域的准确位置和形状;本发明的方法对于内容保持的图像处理操作,如不同质量因子的JPEG压缩,高斯噪声,椒盐噪声,中值滤波,维纳滤波,伽马矫正等具有较强的鲁棒性。
Description
技术领域
本发明属于图像篡改检测技术领域,涉及一种基于最大稳定极值区域的图像区域复制篡改检测方法。
背景技术
随着强大的图像编辑工具和图像处理软件的广泛使用,在不留下任何可见线索的情况下,数字图像的内容正在被随意的篡改着。这些篡改图像的存在引发了很多问题,甚至在许多领域中导致了犯罪。作为保护图像内容真实性和完整性的一项关键技术,近年来,数字图像被动取证技术已成为学术界和工业界的研究热点。
图像被动取证主要包括图像篡改检测、图像源识别和操作历史追踪。图像内容篡改包括异源图像拼接/合成,同源图像区域复制(也称为Copy-Move)攻击,和图像局部性质改变。由于区域复制是图像内容篡改的最常用手段之一,因此,近年来,针对图像区域复制攻击的检测方法得到了工业界和学术界的极大关注。图像区域复制攻击是指将一部分图像内容复制-粘贴到同一图像中,生成复制区域,其目的是隐藏图像对象或克隆特定区域以伪造不存在的场景,如图1所示,其中(a1)是真实图像;(a2)是对(a1)进行区域复制篡改后的图像;(b2)是对(b1)进行区域复制篡改后的图像;(c2)是对(c1)进行区域复制篡改后的图像;(d2)是对(d1)进行区域复制篡改后的图像。
图像区域复制篡改检测技术一经提出,就受到学界广泛关注。近年来,许多学者致力于图像区域复制篡改检测方法的研究,涌现出许多优秀的检测方法。在现存文献中,常见的图像区域复制篡改检测方法主要分为三大类:基于图像块的方法,基于特征点的方法以及图像块与特征点相结合的方法。
基于图像块的方法通常是将图像分割成规则或不规则的块,然后从每个块中提取特征,通过排序在所有特征集中搜索相似的特征对。基于图像块的方法由于需要在特征集中搜索相似的特征对,因而一般都存在计算效率低的问题。为了提高计算效率,许多研究者提出了基于特征点的图像区域复制检测方法。该类方法一经提出,学者们就展开了深入研究,近年来涌现出许多优秀的方法。文献[1]提出了一种使用不同特征点混合的方法,在该方法中,作者把SURF特征点与二元鲁棒不变可伸缩特征点(BRISK)相结合,该方法对常见的后处理操作具有较强的鲁棒性。文献[2]描述了一种图像复制区域检测方法,该方法利用PatchMatch算法对整个图像进行近似邻域计算,降低了计算复杂度。在2016年,文献[3]提出了一种使用Harris检测器提取图像特征点,并利用特征点邻域的统计特征进行区域复制检测。2017年,文献[4]提出一种基于全局内容验证的图像区域复制检测方法。2019年,文献[5]描述了一种基于SIFT、不变矩和区域生长技术的图像区域复制伪造检测方法。
基于特征点的图像Copy-Move篡改检测由于特征点的稀疏性,往往存在检测区域误差较大的问题(如图3所示)。最近,学者们将基于图像块的方法和基于特征点的方法相结合,提出了许多优秀的检测方法。文献[6]介绍了一种对几何变换具有鲁棒性的图像区域复制篡改检测方法。在该方法中,作者把以Harris角点为圆心的圆形邻域划分成扇形区域,并计算每个扇形区域的统计量,最后使用best-bin-first算法对圆形区域进行匹配。2017年,文献[7]报告了一种基于超像素分割和Harris特征点相结合的图像区域复制篡改检测方法。在该方法中,作者首先利用超像素分割和聚类分析技术将图像内容划分为复杂区域和平滑区域,然后提取以Harris角点为圆心的圆形邻域的特征,对复杂区域和平滑区域进行特征匹配,并进行篡改区域定位。2018年,文献[8]提出一种使用二进制判别特征的Copy-Move伪造检测方法。该方法首先提取Fast特征点,然后使用二进制判别描述符进行特征检测和匹配,将匹配的点替换为相应的超像素块,从而识别出篡改区域。
现存的问题:
(1)虽然基于图像块的图像区域复制篡改检测方法可以在大多数情况下检测出区域复制伪造,但大多数算法对于旋转或缩放操作不具有鲁棒性,特别是在复制区域被旋转或缩放的情况下,检测算法可能失效。此外,除了计算复杂度高之外,大多数基于图像块的检测方法的检测精度不够准确,如图2所示,其中(a1)和(a2)是原始图像,(b1)是对(a1)进行区域复制攻击后的篡改图像,(c1)是利用方法[11]对(b1)进行检测得到的结果;(b2)是对(a2)进行区域复制攻击后的篡改图像,(c2)是利用方法[11]对(b2)进行检测得到的结果。
(2)基于特征点的图像区域复制篡改检测方法可以准确地确定复制区域的位置,但是由于特征点的稀疏性,这些方法仍然不能准确地检测出复制区域的轮廓,如图3所示,其中(a)是原始图像,(b)是对(a)进行区域复制攻击后的篡改图像,(c)是利用方法[5]对(b)进行检测得到的结果。
(3)很多区域复制篡改检测方法对于自相似图像失效,也就是,往往把图像中的自然相似区域检测为复制区域,如文献[13]。
(4)相对于单纯的基于图像块的方法和基于特征点的方法,图像块与特征点相结合的方法的检测精度有了很大的提高,但是,由于特征点的稀疏性和图像块的局部整体性,这种方法依然存在漏检测和误检测的问题。
参考文献:
[1]Kumar S,Desai J V,Mukherjee S.A fast keypoint based hybrid methodfor copy move forgery detection[J].arXiv preprint arXiv:1612.03989,2015.
[2]Cozzolino D,Poggi G,Verdoliva L.Efficient dense-field copy–moveforgery detection[J].IEEE Transactions on Information Forensics and Security,2015,10(11):2284-2297.
[3]Wang X,He G,Tang C.Keypoints-based image passive forensics methodfor copy-move attacks[J].International Journal of Pattern Recognition andArtificial Intelligence,2016,30(03):1655008.
[4]Zhou Z,Wang Y,Wu Q M J,et al.Effective and efficient globalcontext verification for image copy detection[J].IEEE Transactions onInformation Forensics and Security,2017,12(1):48-63.
[5]Chen C C,Lu W Y,Chou C H.Rotational copy-move forgery detectionusing SIFT and region growing strategies[J].Multimedia Tools andApplications,2019:1-16.
[6]Chen L,Lu W,Ni J,et al.Region duplication detection based onHarris corner points and step sector statistics[J].Journal of VisualCommunication and image representation,2013,24(3):244-254.
[7]Liu Y,Wang H X,Wu H Z.An Efficient Copy-Move Detection AlgorithmBased on Superpixel Segmentation and Harris Key-Points[C].InternationalConference on Cloud Computing and Security.Springer,Cham,2017:61-73.
[8]Raju P M,Nair M S.Copy-move forgery detection using binarydiscriminant features[J].Journal of King Saud University-Computer andInformation Sciences,2018.
[9]Nistér D,Stewénius H.Linear time maximally stable extremal regions[C]//European Conference on Computer Vision.Springer,Berlin,Heidelberg,2008:183-196.
[10]Bahrami K,Kot A C.A fast approach for no-reference imagesharpness assessment based on maximum local variation[J].IEEE SignalProcessing Letters,2014,21(6):751-755.
[11]Wang X,Zhang X,Li Z,et al.A DWT-DCT based passive forensicsmethod for copy-move attacks[C].2011 Third International Conference onMultimedia Information Networking and Security.IEEE,2011:304-308.
[12]DG Lowe.Distinctive Image Features from Scale-Invariant Keypoints[J].International Journal of Computer Vision,2004,60(2):91-110.
[13]P.Kakar,N.Sudha.Exposing postprocessed copy–paste forgeriesthrough transform invariant features[J].IEEE Transactions on InformationForensics and Security,2012,7(3):1018-1028.
发明内容
本发明的目的是提供一种基于最大稳定极值区域的图像区域复制篡改检测方法,解决现有技术中存在的检测计算复杂度高,精度不准确的问题。
本发明所采用的技术方案是,一种基于最大稳定极值区域的图像区域复制篡改检测方法,具体按照以下步骤实施:
步骤1、提取图像的SIFT特征点并进行匹配;
步骤2、分别提取R,G,B三个颜色通道的最大稳定极值区域,将匹配的特征点替换为所对应的最大稳定极值区域;
步骤3、对图像进行锐利度估计和颜色特征估计;
步骤4、利用图像锐利度和颜色特征信息进行相似区域匹配;
步骤5、图像篡改区域定位。
本发明的特点还在于:
步骤1具体为,对图像f提取m个SIFT特征点{p1,p2,...,pm},并进行特征点匹配,利用随机抽样一致算法去除误匹配,得到经去除误匹配后的特征点集为{p1,p2,...,pr}。
步骤2具体按照以下步骤实施:
步骤2.1、定义最大稳定极值区域;
对于大小为M×N的图像f,假设H为二维像素空间,U为灰度值空间,U={0,1,2,...,255},C为空间H中定义的四邻域关系,即像素(x,y)的上下左右4邻域是:(x+1,y),(x-1,y),(x,y+1),(x,y-1);
将图像f转换为灰度图像f′:
f′=0.2989R+0.587G+0.114B
则对于灰度图像f′:H→U是二维像素空间H到灰度值空间U的映射,灰度图像f′中的极值区域A满足下列条件:
其中关系E∈{>,<},T(A)是区域A的边界,即:
如果E是关系“>”,则区域A被称为最大极值区域并用A+表示;
如果E是关系“<”,区域A被称为最小极值区域,用A-表示;
其中Δ是最大稳定极值区域检测器的输入参数,Δ表示像素值的变化量,|·|表示集合的基数,A+Δ和A-Δ是极值区域并被定义为:
步骤2.2、利用步骤2.1的方法在R,G,B通道上提取图像的最大稳定极值区域;
步骤2.3、检查步骤2.2中提取的最大稳定极值区域中是否包含了步骤1中所得到的匹配特征点{p1,p2,...,pr},若是,则将该特征点替换为与其对应的最大稳定极值区域,根据特征点之间的匹配关系得到最大稳定极值区域之间的对应关系,即匹配的区域,把这些区域定义为可疑区域 n为得到的匹配区域的数目。
步骤3具体按照以下步骤实施:
步骤3.1、图像锐利度估计;
利用最大局部方差,即MLV估计图像的锐利度分布,对于大小为M×N的灰度图像f′,记位置(x,y)的像素为f′x,y,考虑一个包含f′x,y的8邻域的3×3的块,定义f′x,y的MLV为:
σ(f′x,y)=max{|f′x,y-f′u,v||u=x-1,x,x+1;v=y-1,y,y+1}
在图像中,MLV值较大的像素对锐利度估计的影响较大,通过对MLV值赋不同的权值来校正锐利度值,令
其中,K×P表示该区域的大小;
步骤3.2、估计图像的颜色特征;
步骤4具体为,用图像锐利度和三个颜色通道的信息作为取证特征来进行相似区域检测;
步骤5具体为,分别计算R,G,B三通道提取的最大稳定极值区域的数目:QR,QG,QB,计算其中的最大值ω1和次大值ω2,即
ω={ω1,ω2}
定义ω1和ω2所对应的两个颜色通道的最大稳定极值区域为可疑区域,分别记为Y1,Y2,令Y=Y1∩Y2,对Y进行形态学处理即得到篡改区域。
本发明的有益效果是:
(1)本发明一种基于最大稳定极值区域的图像Copy-Move篡改检测方法把最大稳定极值区域的概念引入到图像Copy-Move篡改检测中,利用最大稳定极值区域提取图像中具有视觉意义的对象;
(2)本发明提供了一种与现有方法完全不同的检测方法,该方法直接针对图像对象,可以精确检测出复制伪造区域的准确位置和形状,其像素级检测精度达到91.84%;
(3)本发明的方法具有辨别图像中的自相似区域与复制伪造区域的能力,能够在具有自相似区域的图像中检测出复制伪造区域;
(4)本发明的方法对于内容保持的图像处理操作,如不同质量因子的JPEG压缩,高斯噪声,椒盐噪声,中值滤波,维纳滤波,伽马矫正等具有较强的鲁棒性。
附图说明
图1是区域复制篡改图像示例图;
图2是方法[10]的检测结果示例图;
图3是方法[5]的检测结果示例图;
图4为本发明检测方法的流程图;
图5是本发明检测方法的SIFT特征点匹配示例图;
图6是本发明检测方法的对图5(c)去除误匹配后的匹配特征点示例图;
图7是本发明检测方法的四邻域关系示意图;
图8是本发明检测方法的极值区域示意图;
图9是本发明检测方法的不同通道提取的最大稳定极值区域示例图;
图10是本发明检测方法的可疑区域示意图;
图11是本发明检测方法的不同通道的伪造区域示意图;
图12是本发明检测方法的将两个通道上提取的可疑区域取交集得到篡改结果的示意图;
图13是本发明检测方法的区域复制篡改检测结果示例图;
图14是自相似图像区域复制篡改检测结果示例图;
图15是当篡改检测阈值U变化时,对于不同图像后处理操作下的实验结果所对应的ROC曲线图;
图16是不同质量因子JPEG压缩对区域复制篡改检测效果的影响示例;
图17是伽马矫正对区域复制篡改检测结果的影响示例图;
图18是本发明检测方法与方法[2]、[3]、[8]的比较结果示例图。
具体实施方式
下面结合附图和具体实施方式对本发明进行详细说明。
本发明一种基于最大稳定极值区域的图像区域复制篡改检测方法,如图4所示,具体按照以下步骤实施:
步骤1.SIFT特征点的提取及匹配
尺度不变特征变换(Scale Invariant Feature Transform,SIFT)[12]是计算机视觉领域常用的图像特征提取算法之一,具有很强的局部描述能力,并对噪声失真和几何变换具有良好的鲁棒性,因此我们首先提取图像的SIFT特征点并进行匹配;
对于给定的图像f,假设提取了m个SIFT特征点{p1,p2,...,pm},根据文献[12]进行特征点匹配,图5举例说明了特征点匹配的情况,其中(a)是原始图像,(b)是对(a)进行区域复制篡改后的图像,(c)是利用方法[12]对(b)进行特征点匹配得到的结果图,从图5中可以看出,经过匹配后的特征点会有一些误匹配,利用随机抽样一致(Random SampleConsensus,RANSAC)算法去除误匹配后,假设得到的去除误匹配后的特征点集为{p1,p2,...,pr},如图6所示;
步骤2.提取最大稳定极值区域
步骤2.1最大稳定极值区域的定义
对于给定的大小为M×N的图像f,假设H为二维像素空间,U为灰度值空间,U={0,1,2,...,255},C为空间H中定义的四邻域关系,如图7所示,即像素(x,y)的4邻域是:(x+1,y),(x-1,y),(x,y+1),(x,y-1)(上下左右);
将图像f转换为灰度图像f′:
f′=0.2989R+0.587G+0.114B
则对于灰度图像f′:H→U是二维像素空间H到灰度值空间U的映射。灰度图像f′中的极值区域A,如图8所示,满足下列条件:
其中关系E∈{>,<},T(A)是区域A的边界,即:
如果E是关系“>”,则区域A被称为最大极值区域并用A+表示,如果E是关系“<”,区域A被称为最小极值区域,用A-表示;
其中Δ是最大稳定极值区域检测器的输入参数,表示像素值的变化量,|·|表示集合的基数,A+Δ和A-Δ是极值区域并被定义为:
步骤2.2提取图像的最大稳定极值区域
利用步骤2.1所描述的方法提取图像的最大稳定极值区域,为了观察灰度图像与R,G,B三个颜色通道分量上所提取的最大稳定极值区域的差异,我们从文献[3]描述的图像数据库中随机选取4幅图像,如图9中第一列所示,分别在灰度图像以及R,G,B三个颜色通道上提取最大稳定极值区域,得到的结果如图9所示,图9(a)是从文献[3]描述的图像库中随机选取的原始图像,(b)是在灰度图像上提取的最大稳定极值区域,(c)-(e)分别为在R,G,B三个通道上提取的最大稳定极值区域;
从图9中可以看出,在R,G,B通道上提取的最大稳定极值区域要比在灰度图上提取的最大稳定极值区域效果好,因此,我们最终在R,G,B通道上提取最大稳定极值区域;
步骤2.3.SIFT特征点与最大稳定极值区域的对应
最大稳定极值区域对于仿射变换具有不变性,SIFT特征对缩放和旋转具有不变性,因此,两种特征的结合对几何变换攻击具有更强的鲁棒性;
对于步骤2.2中提取的最大稳定极值区域,检查其中是否包含了步骤1所得到的匹配特征点{p1,p2,...,pr},若是,将特征点替换为与其对应的最大稳定极值区域,根据特征点之间的匹配关系得到最大稳定极值区域之间的对应关系,即匹配的区域,把这些区域定义为可疑区域,其对应的R、G、B分量表示为n为得到的匹配区域的数目,如图10所示,其中圆圈表示特征点所对应的最大稳定极值区域。
步骤3.特征提取
步骤3.1.图像锐利度估计
根据文献[10]中的方法,利用最大局部方差(Maximum Local Variation,MLV)估计图像的锐利度分布,对于大小为M×N的灰度图像f′,记位置(x,y)的像素为f′x,y,考虑一个包含f′x,y的8邻域的3×3的块,定义f′x,y的MLV为:
σ(f′x,y)=max{|f′x,y-f′u,v||u=x-1,x,x+1;v=y-1,y,y+1}
在图像中,MLV值较大的像素对锐利度估计的影响较大,我们通过对MLV值赋不同的权值来校正锐利度值,令
其中,K×P表示该区域的大小;
步骤3.2.估计图像的颜色特征
因为区域复制篡改是将一部分图像内容复制-粘贴到同一图像中的其他位置,所以在复制区域与原始区域之间具有相同的纹理和颜色,我们用图像锐利度和三个颜色通道的信息作为取证特征来进行相似区域检测。
步骤5.篡改区域定位
为了对篡改区域定位,我们首先分别计算R,G,B三通道提取的最大稳定极值区域的数目:QR,QG,QB。计算其中的最大值ω1和次大值ω2,即
ω={ω1,ω2}
定义ω1和ω2所对应的两个颜色通道的最大稳定极值区域为可疑区域,分别记为Y1,Y2,图11举例说明了最大稳定极值区域的数目最多和次多的两个颜色通道的可疑区域Y1,Y2,令
Y=Y1∩Y2
对Y进行形态学处理得到复制伪造的区域。图12举例说明了检测到的结果。
本发明方法的仿真实验结果:
为了检测本文发明方法的性能,我们进行了大量的仿真实验,包括有效性测试,鲁棒性测试以及对比实验,实验数据库选用了CoMoFoD,MICC-F200以及文献[3]中介绍的测试图像库。
1.有效性测试
(1)视觉效果
为了验证本发明方法的有效性,我们首先从CoMoFoD图像库中随机选取6张篡改图像,利用本发明的方法对其进行检测,图13展示的是所得出的视觉效果图。在图13中,(a1)-(a6)是原始图像,(b1)-(b6)是篡改图像,其中(b1)-(b2)是将篡改区域只是经过复制平移后进行粘贴得到的篡改图像,(b3)-(b4)是将篡改区域经过旋转以后得到的篡改图像,(b5)-(b6)是将篡改区域进行缩放以后得到的篡改图像。(c1)-(c6)是篡改图像对应的实值图像,(d1)-(d6)是利用本发明的方法得到的检测结果。从图13所展示的结果中,可以看出本发明的方法能够有效地检测出复制伪造的区域。
(2)对自相似图像的有效性
很多区域复制篡改检测方法不能抗拒图像中自相似区域的干扰,也就是说,把图像中的自相似区域错误地检测为复制区域,从而对自相似图像的检测失效。为了测试本发明方法对自相似图像的检测性能,我们进行了大量的实验,图14举例说明了本发明方法对于自相似图像的检测结果。在图14中,(a1)-(a4)是存在自相似区域的自然图像,(b1)-(b4)是对图像(a1)-(a4)的区域复制篡改图像,(c1)-(c4)是篡改图像对应的实值图像,(d1)-(d4)是利用本发明方法对(b1)-(b4)的检测结果,从图14可以看出,本发明的方法具有辨别图像中的自相似区域与复制伪造区域的能力,即不受图像中自然相似区域的干扰,能够在具有自相似区域的图像中检测出复制伪造区域。
2.鲁棒性测试
(1)鲁棒性测试的数值结果
为了使篡改伪造的图像具有更加自然的视觉效果,伪造者通常采用不同的后处理操作来隐藏篡改伪造的痕迹。因此,抵抗后处理操作的能力是衡量图像区域复制伪造检测技术性能的重要指标。算法的鲁棒性指的是对图像后处理操作的稳定性,也就是说,即使经历过后处理操作,算法依然有效。最常用的图像后处理操作如JPEG压缩、Gaussian噪声、椒盐噪声、中值滤波、wiener滤波和Gamma校正等。为了测试本发明方法的鲁棒性,我们对经过不同后处理操作的篡改图像进行仿真实验。利用文献[3]中的图像数据库,我们创建了包含500幅原始图像和450幅篡改图像的数据集。通过对这些图像进行不同的后处理操作,得到不同篡改检测阈值U下的ROC曲线。
图15显示了当篡改检测阈值U变化时,对于不同图像后处理操作下的实验结果所对应的ROC曲线。其中(a)为对图像进行质量因子分别为90,80,70,60的JPEG压缩后的检测结果所得出的ROC曲线;(b)为对图像添加均值为0、标准差分别为0.02,0.04,0.06,0.08的Gaussian噪声后进行检测所得出的ROC曲线;(c)为对图像添加标准差分别为0.01,0.03,0.05和0.07的椒盐噪声后进行检测所得出的ROC曲线;(d)为对测试图像进行中值滤波后进行检测所得出的ROC曲线;(e)为对测试图像进行滤波器窗口分别为3×3,5×5,7×7的维纳滤波后进行检测所得到的ROC曲线;(f)为对测试图像进行伽马校正后进行检测所得到的ROC曲线。
从图15中可以看出,所本发明方法能够在较低的假阳性率下达到较高的准确率。在JPEG压缩的情况下,可以看出随着质量因子的降低,其检测性能趋于稳定。此外,本发明方法对于中值滤波,维纳滤波和伽马校正等操作也具有较强的鲁棒性。但是,当超声因子较大时,其检测精度有所下降。
(2)鲁棒性测试的视觉效果
为了研究不同质量因子的JPEG压缩对区域复制篡改检测算法的影响,我们首先对经过区域复制攻击图像分别进行质量因子为90、80、70和60的JPEG压缩,然后用本发明的方法进行检测,图16举例说明了检测结果的视觉效果。在图16中,(a1)、(b1)、(c1)、(d1)分别为质量因子为90、80、70、60的JPEG压缩图像,(a2)、(b2)、(c2)、(d2)分别为利用本发明的方法对(a1)、(b1)、(c1)、(d1)进行检测得到的结果。从图16可以看出,对于质量压缩因子为60以上的JPEG压缩图像,本发明的方法对压缩后的篡改图像仍能够检测出复制的区域,说明本发明的方法对于JPEG压缩具有较好的鲁棒性。
为了研究伽马校正对区域复制篡改检测算法的影响,我们首先对经过区域复制攻击的图像进行伽玛校正,然后用本发明的方法进行检测,图17举例说明了检测结果。在图17中,(a1)、(a2)、(a3)是经过伽马矫正的篡改图像,(b1)、(b2)、(b3)是利用本发明的方法对(a1)、(a2)、(a3)进行检测得到的结果。从图17中可以看出,本发明的方法对伽马校正后的篡改图像仍能够检测出复制的区域,说明本发明的方法对伽马校正具有很好的鲁棒性。
3.对比实验
为了进一步讨论本发明方法的性能,我们与相关工作[2],[3]和[8]中的方法进行比较,通过视觉效果和数值结果说明本发明方法的优越性。在实验中,我们用CoMoFoD和MICC-F200数据库中的图像作为测试图像。图18举例说明了本发明方法以及文献[2],[3]和[8]中的方法的检测结果。在图18中,(a1)、(b1)、(c1)、(d1)、(e1)是从CoMoFoD和MICC-F200数据库中随机取出的篡改图像,(a2)、(b2)、(c2)、(d2)、(e2)是分别是篡改图像所对应的实值图像,(a3)、(b3)、(c3)、(d3)、(e3)是方法[2]的检测结果,(a4)、(b4)、(c4)、(d4)、(e4)是方法[3]的检测结果,(a5)、(b5)、(c5)、(d5)、(e5)是方法[8]的检测结果,(a6)、(b6)、(c6)、(d6)、(e6)是本发明方法的检测结果。
从图18中可以看出,对于大多数图像,文献[2]都有较好的检测精度,但对于图(c1),文献[2]所提出的方法将失效。文献[3]是基于特征点的定位方法,仅可以定位篡改区域的大致位置。文献[8]可以检测出篡改区域,但误检较高。与其他方法相比,我们的方法具有较好的定位效果。
为了更清楚地说明问题,我们从像素级考察衡量检测算法准确性的三个性能指标:精确率、召回率和F1分数。
其中Z表示检测到的伪造区域,Z′表示实值图像中的伪造区域。
我们用本发明的方法以及方法[2],[3]和[8]对图18中的5个测试图像进行检测,并计算像素级精确率、召回率和F1分数,结果见表1所示。
表1不同方法检测结果的比较
从表1可以看出,本发明方法的检测精度明显优于方法[2],[3]和[8]。
为了更好地说明本发明方法的优越性,我们把本发明方法与方法[2],[3]和[8]在CoMoFoD和MICC-F200图像库进行比较,并计算像素级精确率、召回率和F1分数的平均值,结果见表2和表3。表2展示的是CoMoFoD图像库的平均检测结果。表3展示的是MICC-F200图像库的平均检测结果。从表2和表3可以看出,本发明方法的检测结果明显优于对比的方法。
表2 CoMoFoD图像库平均像素级检测精度(%)
表3 MICC-F200图像库平均像素级检测精度(%)
Claims (3)
1.一种基于最大稳定极值区域的图像区域复制篡改检测方法,其特征在于,具体按照以下步骤实施:
步骤1、提取图像的SIFT特征点并进行匹配:对图像f提取m个SIFT特征点{p1,p2,...,pm},并进行特征点匹配,利用随机抽样一致算法去除误匹配,得到经去除误匹配后的特征点集为{p1,p2,...,pr};
步骤2、分别提取R,G,B三个颜色通道的最大稳定极值区域,将匹配的特征点替换为所对应的最大稳定极值区域:
步骤2.1、定义最大稳定极值区域;
对于大小为M×N的图像f,假设H为二维像素空间,U为灰度值空间,U={0,1,2,...,255},C为空间H中定义的四邻域关系,即像素(x,y)的上下左右4邻域是:(x+1,y),(x-1,y),(x,y+1),(x,y-1);
将图像f转换为灰度图像f′:
f′=0.2989R+0.587G+0.114B
则对于灰度图像f′:H→U是二维像素空间H到灰度值空间U的映射,灰度图像f′中的极值区域A满足下列条件:
其中关系E∈{>,<},T(A)是区域A的边界,即:
如果E是关系“>”,则区域A被称为最大极值区域并用A+表示;
如果E是关系“<”,区域A被称为最小极值区域,用A-表示;
其中Δ是最大稳定极值区域检测器的输入参数,Δ表示像素值的变化量,|·|表示集合的基数,A+Δ和A-Δ是极值区域并被定义为:
步骤2.2、利用步骤2.1的方法在R,G,B通道上提取图像的最大稳定极值区域;
步骤2.3、检查步骤2.2中提取的最大稳定极值区域中是否包含了步骤1中所得到的匹配特征点{p1,p2,...,pr},若是,则将该特征点替换为与其对应的最大稳定极值区域,根据特征点之间的匹配关系得到最大稳定极值区域之间的对应关系,即匹配的区域,把这些区域定义为可疑区域j=1,2,...,n,n为得到的匹配区域的数目;
步骤3、对图像进行锐利度估计和颜色特征估计;
步骤4、利用图像锐利度和颜色特征信息进行相似区域匹配;
步骤5、图像篡改区域定位:
分别计算R,G,B三通道的最大稳定极值区域的数目:QR,QG,QB,计算其中的最大值ω1和次大值ω2,即
ω={ω1,ω2}
定义ω1和ω2所对应的两个颜色通道的最大稳定极值区域为可疑区域,分别记为Y1,Y2,令Y=Y1∩Y2,对Y进行形态学处理即得到复制伪造的区域。
2.根据权利要求1所述的一种基于最大稳定极值区域的图像区域复制篡改检测方法,其特征在于,所述步骤3具体按照以下步骤实施:
步骤3.1、图像锐利度估计;
利用最大局部方差,即MLV估计图像的锐利度分布,对于大小为M×N的灰度图像f′,记位置(x,y)的像素为f′x,y,考虑一个包含f′x,y的8邻域的3×3的块,定义f′x,y的MLV为:
σ(f′x,y)=max{|f′x,y-f′u,v||u=x-1,x,x+1;v=y-1,y,y+1}
在图像中,MLV值较大的像素对锐利度估计的影响较大,通过对MLV值赋不同的权值来校正锐利度值,令
步骤3.2、估计图像的颜色特征;
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010452710.3A CN111768368B (zh) | 2020-05-26 | 2020-05-26 | 一种基于最大稳定极值区域的图像区域复制篡改检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010452710.3A CN111768368B (zh) | 2020-05-26 | 2020-05-26 | 一种基于最大稳定极值区域的图像区域复制篡改检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111768368A CN111768368A (zh) | 2020-10-13 |
CN111768368B true CN111768368B (zh) | 2022-05-03 |
Family
ID=72719596
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010452710.3A Active CN111768368B (zh) | 2020-05-26 | 2020-05-26 | 一种基于最大稳定极值区域的图像区域复制篡改检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111768368B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112435226B (zh) * | 2020-11-13 | 2023-09-15 | 西安理工大学 | 一种细粒度图像拼接区域检测方法 |
CN113470039B (zh) * | 2021-01-29 | 2024-09-27 | 西安理工大学 | 一种基于轻量级感知Hash的细粒度图像篡改定位方法 |
CN113763405A (zh) * | 2021-02-02 | 2021-12-07 | 北京沃东天骏信息技术有限公司 | 一种图像检测方法和装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102693522A (zh) * | 2012-04-28 | 2012-09-26 | 中国矿业大学 | 一种彩色图像区域复制篡改检测方法 |
CN102968803A (zh) * | 2012-11-15 | 2013-03-13 | 西安理工大学 | 针对cfa插值图像的篡改检测与篡改定位方法 |
CN104766084A (zh) * | 2015-04-10 | 2015-07-08 | 南京大学 | 一种多目标匹配的近复制图像检测方法 |
CN110348464A (zh) * | 2019-07-17 | 2019-10-18 | 安徽建筑大学 | 一种基于多支持区域局部亮度序的图像伪造检测算法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102609948B (zh) * | 2012-02-10 | 2014-04-16 | 浙江理工大学 | 一种针对复制粘贴篡改的数码照片伪造检测方法 |
US10515448B2 (en) * | 2016-09-20 | 2019-12-24 | International Business Machines Corporation | Handprint analysis to predict genetically based traits |
CN110910345B (zh) * | 2019-10-16 | 2023-03-14 | 广东外语外贸大学南国商学院 | 一种复制-粘贴篡改图像检测方法 |
-
2020
- 2020-05-26 CN CN202010452710.3A patent/CN111768368B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102693522A (zh) * | 2012-04-28 | 2012-09-26 | 中国矿业大学 | 一种彩色图像区域复制篡改检测方法 |
CN102968803A (zh) * | 2012-11-15 | 2013-03-13 | 西安理工大学 | 针对cfa插值图像的篡改检测与篡改定位方法 |
CN104766084A (zh) * | 2015-04-10 | 2015-07-08 | 南京大学 | 一种多目标匹配的近复制图像检测方法 |
CN110348464A (zh) * | 2019-07-17 | 2019-10-18 | 安徽建筑大学 | 一种基于多支持区域局部亮度序的图像伪造检测算法 |
Non-Patent Citations (2)
Title |
---|
"A SIFT-Based Forensic Method for Copy–Move Attack Detection and Transformation Recovery";Irene Amerini et al.;《IEEE TRANSACTIONS ON INFORMATION FORENSICS AND SECURITY》;20110930;第6卷(第3期);第1099-1110页 * |
"基于多支持区域局部亮度序的图像伪造检测";颜普 等;《计算机应用》;20191231;第2707-2711页 * |
Also Published As
Publication number | Publication date |
---|---|
CN111768368A (zh) | 2020-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Teerakanok et al. | Copy-move forgery detection: A state-of-the-art technical review and analysis | |
Al-Qershi et al. | Passive detection of copy-move forgery in digital images: State-of-the-art | |
CN107622489B (zh) | 一种图像篡改检测方法及装置 | |
CN111768368B (zh) | 一种基于最大稳定极值区域的图像区域复制篡改检测方法 | |
Prakash et al. | Detection of copy-move forgery using AKAZE and SIFT keypoint extraction | |
Uliyan et al. | A novel forged blurred region detection system for image forensic applications | |
Abidin et al. | Copy-move image forgery detection using deep learning methods: a review | |
Yan et al. | Multi-scale difference map fusion for tamper localization using binary ranking hashing | |
CN110136125B (zh) | 一种基于层次特征点匹配的图像复制移动伪造检测方法 | |
Tahaoglu et al. | Ciratefi based copy move forgery detection on digital images | |
Liu et al. | Improved SIFT-based copy-move detection using BFSN clustering and CFA features | |
Tahaoglu et al. | Improved copy move forgery detection method via L* a* b* color space and enhanced localization technique | |
Sadeghi et al. | Keypoint based authentication and localization of copy-move forgery in digital image | |
CN110147800A (zh) | 基于sift的图像复制粘贴篡改盲检方法 | |
Kaur et al. | Efficient hybrid passive method for the detection and localization of copy-moveand spliced images | |
Isaac et al. | Image forgery detection using region–based Rotation Invariant Co-occurrences among adjacent LBPs | |
Zedan et al. | Copy move forgery detection techniques: a comprehensive survey of challenges and future directions | |
Panzade et al. | Copy-move forgery detection by using HSV preprocessing and keypoint extraction | |
Liu et al. | A SIFT and local features based integrated method for copy-move attack detection in digital image | |
Rathi et al. | Copy move forgery detection by using integration of SLIC and SIFT | |
Resmi et al. | A novel segmentation based copy-move forgery detection in digital images | |
Tripathi et al. | Comparative Analysis of Techniques Used to Detect Copy-Move Tampering for Real-World Electronic Images | |
Sreelakshmy et al. | An improved method for copy-move forgery detection in digital forensic | |
Zahra | Image duplication forgery detection using two robust features | |
Makandar et al. | Spliced Image Forgery Detection Using Adaptive Over-Segmentation Combined With AKAZE, ORB, and SIFT Feature Descriptors |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20231019 Address after: Building 3, Building 7, Xi'an Construction Engineering Technology Entrepreneurship Base, No. 299 Gongye Second Road, Xi'an City, Shaanxi Province, 710075 Patentee after: XI'AN REALECT ELECTRONIC DEVELOPMENT CO.,LTD. Address before: 710048 Shaanxi province Xi'an Beilin District Jinhua Road No. 5 Patentee before: XI'AN University OF TECHNOLOGY |