CN105989611A - 带有阴影去除的分块感知哈希跟踪方法 - Google Patents
带有阴影去除的分块感知哈希跟踪方法 Download PDFInfo
- Publication number
- CN105989611A CN105989611A CN201510062052.6A CN201510062052A CN105989611A CN 105989611 A CN105989611 A CN 105989611A CN 201510062052 A CN201510062052 A CN 201510062052A CN 105989611 A CN105989611 A CN 105989611A
- Authority
- CN
- China
- Prior art keywords
- sub
- block
- target
- tracks
- window
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开了一种带有阴影去除的分块感知哈希跟踪方法,先根据阴影图像在CIELAB色彩空间中各通道灰度图的分布特点确定出图像中的阴影区域,然后采用颜色恒常理论将阴影区像素点恢复至无阴影效果,接着将分块感知哈希编码值与颜色自相似性相结合,以此作为相似性度量来对相邻帧的跟踪目标子块进行匹配,最后将上述子块组合得到跟踪目标在当前帧的区域位置,实现对视频中的跟踪目标进行跟踪。本发明的优点在于根据人体部位运动范围和形变程度的不同,将人体目标分为8个子块,并在此基础上,提出了一种分块的感知哈希编码方法,解决了目前的跟踪算法在人体被部分或完全遮挡、部分旋转,以及自然场景中阴影区与非阴影区光照突变等情况下跟踪失败的问题。
Description
技术领域
本发明涉及视频图像跟踪技术,具体是一种带有阴影去除的分块感知哈希跟踪方法。
背景技术
随着计算机技术日新月异的发展,利用计算机实现人类各种智能功能的需求逐渐成为现实。其中,通过计算机来模拟人类视觉去获取认知外界环境信息,在几十年时间,获得了飞速的发展,也因此成为计算机科学领域一个热门的研究课题。其中,视频跟踪技术是计算机视觉重要研究内容之一,也是当前计算机视觉研究中尚未根本解决的难点问题。
现有的跟踪方法主要有基于目标区域的跟踪、基于目标特征的跟踪、基于光流场的目标跟踪、基于目标模型的跟踪和基于预测的跟踪。但是,这些方法都存在各自的技术缺点:1.基于目标区域匹配的跟踪方法需要对所有区域进行跟踪目标匹配,搜索耗时大,而且在跟踪目标发生部分遮挡时跟踪效果不好;2.基于特征的跟踪方法是基于跟踪目标的某个或某些特征进行相邻帧的跟踪目标匹配,通常难以选择合适的特征表示跟踪目标,而且特征数量与算法效率难以均衡;3.基于光流场的跟踪方法是通过特征匹配来求得特征点处的流速,但由于得到的是稀疏的光流场,因而难以提取运动对象的精确形状;4.基于目标模型的跟踪方法通常采用线图模型、2D模型和3D模型表示跟踪目标,该方法可以处理遮挡,能够获得更多的行为分析所需的数据,但缺点是在监控场景中要获得所有运动目标的精确几何模型非常困难,而且运算量巨大,难以实现实时性;5.基于预测旳跟踪方法主要有卡尔曼滤波法、粒子滤波等。卡尔曼滤波器可以有效进行线性最优估计,但该方法不能处理非线性和非高斯的问题。粒子滤波方法能够应用于非线性非高斯的运动系统中,但缺点是计算量很大,实时性差。
发明内容
本发明的目的在于提供一种带有阴影去除的分块感知哈希跟踪方法,可以适用于自然场景中阴影区与非阴影区光照差异大、人体部分旋转,以及遮挡导致人体部分或完全缺失等情况的跟踪。该方法是根据阴影图像在CIELAB色彩空间中各通道灰度图的分布特点确定出图像中的阴影区域,然后采用颜色恒常理论将阴影区像素点恢复至无阴影效果,接着将分块感知哈希编码值与颜色自相似性相结合,以此作为相似性度量来对相邻帧的跟踪目标子块进行匹配,最后将子块组合得到跟踪目标在当前帧的区域位置,实现对视频中的跟踪目标进行跟踪。
实现本发明目的的技术解决方案为:一种带有阴影去除的分块感知哈希跟踪方法,包括以下步骤:
步骤1:输入视频图像序列f(x,y,t),第t帧图像的大小为M*N,M为图像的行数,N为图像的列数,且M、N均为自然数,(x,y)表示图像像素点的位置坐标,t表示视频序列的第t帧图像。
步骤2:将输入的视频f(x,y,t)由RGB空间转换到CIELAB空间,根据CIELAB空间中b*通道灰度直方图的双峰性,以及a*通道阴影减弱和灰度分布的单峰性,通过阈值分割方法得到图像中的阴影区域。
步骤3:采用颜色恒常算法分别估计出阴影区域图像n(x1,y1,t)和非阴影区域图像b(x2,y2,t)的光照颜色,计算将n(x1,y1,t)中像素点变换到非阴影区光照效果下的校正增益,然后通过颜色校正增益将阴影区域的图像颜色校正到无阴影的效果。
步骤4:手动选取跟踪目标,将跟踪目标按照运动形变大小划分为8个子块,8个子块从上到下、从左到右依次编号,第一排3个子块,第二排3个子块,第三排2个子块,坐标原点(0,0)设置在矩形框0.5倍宽度与起始高度的交汇处,分块结果以y=0轴左右对称。
步骤5:假设跟踪目标在前一帧t1无遮挡,在当前帧t2,以前一帧t1的跟踪目标位置为中心,找出使第5子块的汉明距离取最小值的n个候选窗口,分别计算上述候选窗口的总汉明距离,找出使总汉明距离取最小值的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,若至少有5个子块的颜色自相似性相匹配,则用该候选窗口更新t2的跟踪目标;否则,找到使总汉明距离取值第二小的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,以此类推,直到找到符合条件的候选窗口,并用此候选窗口更新t2的跟踪目标。
步骤6:在当前帧t2,若更新后的跟踪目标外接矩形框变小,说明跟踪目标在t2被部分遮挡,在下一帧t3,根据跟踪目标在t2被遮挡的情况以及t3中是否找到匹配的跟踪目标选取不同的跟踪方式;若更新后的跟踪目标外接矩形框没有变小,说明跟踪目标在t2没有被遮挡,返回步骤5。
本发明与现有技术相比,其显著优点为:1、根据人体不同部位运动范围与形变程度的不同,将人体分成8块,并对不同的块赋予不同的权值,得到加权的分块感知哈希编码,该特征与其他常用的跟踪目标特征相比,鲁棒性强、特征向量简单以及计算复杂度低;2、采用颜色恒常算法和Von Kries色系数定律将阴影区像素点恢复至无阴影效果,解决了跟踪目标在阴影区与非阴影区之间运动时,一般跟踪算法因光照突变导致跟踪目标跟丢的问题;3、将基于分块的感知哈希编码与颜色自相似性相结合来对相邻帧的跟踪目标进行匹配,可以将细节变化对全局结果的影响限制在局部,即使由于人体部分旋转,以及被部分或完全遮挡,也能有效识别出相同跟踪目标和不同跟踪目标。
附图说明
图1是本发明一种带有阴影去除的分块感知哈希跟踪方法的算法流程图。
图2是运动人体分块的结果图。
图3是当输入的视频图像中的运动目标被遮挡时,采用本发明一种带有阴影去除的分块感知哈希跟踪方法对跟踪目标进行跟踪的结果;其中图(a)为在输入视频的第194帧对目标进行跟踪后的结果图;图(b)为在输入视频的第200帧对目标进行跟踪后的结果图;图(c)为在输入视频的第206帧对目标进行跟踪后的结果图。
具体实施方式
下面结合附图对本发明作进一步详细描述。
本发明是一种带有阴影去除的分块感知哈希跟踪方法,其原理为:人在运动时,胳膊、腿等躯干部分活动范围大、形变剧烈,而头部、上半身(不包含胳膊)等部位只存在较小范围的转动,整体形变程度相对很小,因此可以先对人体按照运动时的活动范围和形变大小进行分块,然后使用分块的哈希编码与颜色自相似性来匹配相邻帧的跟踪目标,从而实现跟踪目标的跟踪。
结合图1和图2,一种带有阴影去除的分块感知哈希跟踪方法,包括以下步骤:
步骤1:输入视频图像序列f(x,y,t),第t帧图像的大小为M*N,M为图像的行数,N为图像的列数,且M、N均为自然数,(x,y)表示图像像素点的位置坐标,t表示视频序列的第t帧图像。
步骤2:将输入的视频图像序列f(x,y,t)由RGB空间转换到CIELAB空间,根据CIELAB空间中b*通道灰度直方图的双峰性,以及a*通道阴影减弱和灰度分布的单峰性,通过阈值分割方法得到图像中的阴影区域。
步骤3:采用颜色恒常算法分别估计出阴影区域图像n(x1,y1,t)和非阴影区域图像b(x2,y2,t)的光照颜色,计算将n(x1,y1,t)中像素点变换到非阴影区光照效果下的校正增益,然后通过颜色校正增益将阴影区域的图像颜色校正到无阴影的效果。
步骤4:选取跟踪目标,将跟踪目标按照运动形变大小划分为8个子块,8个子块从上到下、从左到右依次编号,第一排3个子块,第二排3个子块,第三排2个子块,坐标原点(0,0)设置在矩形框0.5倍宽度与起始高度的交汇处,分块结果以y=0轴左右对称。
步骤5:假设跟踪目标在前一帧t1无遮挡,在当前帧t2,以前一帧t1的跟踪目标位置为中心,找出使第5子块的汉明距离取最小值的n个候选窗口,分别计算上述候选窗口的总汉明距离,找出使总汉明距离取最小值的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,若至少有5个子块的颜色自相似性相匹配,则用该候选窗口更新t2的跟踪目标;否则,找到使总汉明距离取值第二小的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,以此类推,直到找到符合条件的候选窗口,并用此候选窗口更新t2的跟踪目标。
更新t2的跟踪目标具体步骤为:
5-1)在当前帧t2,以t1跟踪目标位置为中心,扫描窗口大小为width*height,其中width表示跟踪目标外接矩形框的宽度,height表示跟踪目标外接矩形框的高度,在大小为3width*3height的区域内进行滑动扫描,计算所有扫描窗口中第5子块的哈希编码,找出使其与跟踪目标间汉明距离取最小值的n个扫描窗口,即为候选窗口,依次记为H1,H2,…,Hn,其中H1为使第5子块汉明距离取最小值的候选窗口,Hn为使第5子块汉明距离取最大值的候选窗口,且满足Hn-H1≤th3,取th3=10;分块感知哈希编码与汉明距离的计算步骤如下:
5-1-1)对跟踪目标的8个子块赋予不同的权重w(k),其中(k)表示第k个子块,w(k)定义如下:
5-1-2)将各个子块转换成灰度图像,并缩小至大小为32*32的正方形区域以简化DCT变换,若某个子块的长度或宽度小于32个像素,则以长度和宽度中的较小值为压缩尺寸进行压缩,然后对压缩后的正方形块进行DCT变换:
其中,u,v均表示变换域中的频率分量,F(0,0)表示变换域中的低频成分,F(u,v)表示变换域的高频成分,N表示跟踪目标块的尺寸;经过DCT变换得到的变换系数矩阵左上角为低频系数,由于低频信息描述图像的大部分信息,因此只保留左上角8*8的矩阵。
5-1-3)对8*8的DCT矩阵进行哈希编码:
其中,Hash(i,k)为第k个子块中的第i个编码,G(i,k)是第k个子块的DCT矩阵中第i个元素的值,meank为第k个子块的DCT矩阵的均值。
5-1-4)记跟踪目标的第k个子块的第i个编码值为Hash0(i,k),扫描窗口的第k个子块的第i个编码值为Hash1(i,k),则跟踪目标与扫描窗口的第k个子块间的汉明距离dis(k)为:
5-2)依次比较H1,H2,…,Hn的总汉明距离,找出使总汉明距离取最小值的候选窗口,上述候选窗口是t2中跟踪目标最有可能位于的位置,记为W1,并判断W1与跟踪目标中具有相同编号的子块是否匹配;定义H1,H2,…,Hn的总汉明距离分别为D1,D2,…,Dn,归一化汉明距离因子NDism(k),其中(k)表示第k个子块,NDism(k)和D1,D2,…,Dn的定义公式如下:
定义dism(k)为第m个候选窗口的第k个子块的汉明距离,则W1与跟踪目标中具有相同编号子块的哈希编码的匹配公式为:
其中,1≤m≤n,TM1,TM2,TM3均为阈值参数,TM1的取值范围为[10,20],TM2的取值范围为[25,35],TM3的取值范围为[45,55],matchm(k)表示该子块与跟踪目标是否匹配,matchm(k)=1表示匹配;matchm(k)=0表示不匹配。
5-3)找出W1中使match(k)=1的所有子块,计算这些子块与跟踪目标中对应子块的颜色自相似性,根据颜色自相似性判断子块对是否匹配,若至少有5个子块对相匹配,说明W1是t2中跟踪目标的位置,并用使match(k)=1的子块更新跟踪目标的位置与外接矩形框的尺寸;否则,找到D1,D2,…,Dn中取值第二小的候选窗口,记作W2,计算其与跟踪目标各个对应子块的颜色自相似性,以此类推,直到找到符合条件的候选窗口,记作Wn,并用Wn中使match(k)=1的子块更新t2中的跟踪目标;Wn和跟踪目标中具有相同编号子块的颜色自相似性的计算步骤如下:
5-3-1)计算跟踪目标与Wn中各个子块的颜色直方图:将RGB颜色空间量化至16*16*16的量化级,通过计算子块中像素点的颜色落在每个量化区间内的数量得到颜色直方图,记跟踪目标与Wn中各个子块的颜色直方图分别为Ct1(k)和Ct2(k),归一化的颜色直方图计算公式如下:
其中,N0(k)是第k个子块的总像素数,N(r,g,b)表示子块中具有颜色(R=r,G=g,B=b)的个数,m=1表示跟踪目标的颜色直方图;m=2表示Wn的颜色直方图。
5-3-2)采用巴氏距离判断跟踪目标与W1中各个对应子块的颜色直方图的相似性,Ct1(k)和Ct2(k)的巴氏距离ρ(Ct1(k),Ct2(k))为:
其中,M表示颜色直方图的量化级数,此处为16,ρ(Ct1(k),Ct2(k))越小,两个子块的颜色直方图越相似;设定三个阈值参数T1,T2,T3,取值范围均为[0,1],且T1<T2<T3,根据如下公式判断跟踪目标与Wn中的对应子块的颜色是否相似:
其中,s(k)为相似性参数,s(k)=1表示跟踪目标与Wn中的对应子块相似;s(k)=0表示不相似。
步骤6:在当前帧t2,若更新后的跟踪目标外接矩形框变小,说明跟踪目标在t2被部分遮挡,在下一帧t3,根据跟踪目标在t2被遮挡的情况以及t3中是否找到匹配的跟踪目标选取不同的跟踪方式;若更新后的跟踪目标外接矩形框没有变小,说明跟踪目标在t2没有被遮挡,返回步骤5。
根据跟踪目标在t2被遮挡的情况以及t3中是否找到匹配的跟踪目标选取不同的跟踪方式,跟踪方式具体分为以下六种情况:
①若跟踪目标的左半部分在t2被遮挡,即当k=1,4,7时,至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第3子块、第6子块和第8子块组合成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dr,m,下标m表示当前的扫描窗口为第m个,Dr,m的计算公式如下:
找到使Dr,m取值最小的扫描窗口,且该扫描窗口中的第3子块、第6子块和第8子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
②若跟踪目标的右半部分在t2被遮挡,即当k=3,6,8时,至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第1子块、第4子块和第7子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dl,m,Dl,m的计算公式为:
找到使Dl,m取值最小的扫描窗口,且该扫描窗口中的第1子块、第4子块和第7子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
③若跟踪目标的上半部分在t2被遮挡,即当k=1,2,3时,其中至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第7子块和第8子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dd,m,Dd,m的计算公式为:
找到使Dd,m取值最小的扫描窗口,且该扫描窗口中的第7子块和第8子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
④若跟踪目标的下半部分在t2被遮挡,即当k=7,8时,其中至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第1子块、第2子块和第3子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Da,m,Da,m的计算公式为:
找到使Da,m取值最小的扫描窗口,且该扫描窗口中的第1子块、第2子块和第3子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
⑤若①~④没有找到满足条件的扫描窗口,且跟踪目标在t2的外接矩形框的某一条边距离视场边界不大于5个像素,说明跟踪目标在t3运动出摄像机视场,在之后的视频帧中,继续以t2中的跟踪目标为中心进行窗口扫描,若跟踪目标的某一部分在t2被遮挡,则采用与上述子块位置对称的子块组成的总汉明距离和颜色自相似性与跟踪目标进行匹配;定义变量num表示跟踪目标消失的帧数,若num大于阈值time,说明跟踪目标永远消失;否则,返回步骤5,重新对跟踪目标进行分块感知哈希跟踪;time的取值范围为[200,220]。
⑥若①~④没有找到满足条件的扫描窗口,且跟踪目标在t2的外接矩形框的所有边距离跟踪目标边界均大于5个像素,说明跟踪目标在t3被完全遮挡,在下一帧t4,用跟踪目标未被遮挡,即t1中的外接矩形框作为扫描窗口的尺寸,在t2的跟踪目标中心点的周围区域进行滑动扫描,计算扫描窗口与t1的跟踪目标中各个子块的匹配度matchm(k),若matchm(k)=1,说明第m个扫描窗口的第k个子块与跟踪目标的第k个子块相匹配,然后找出使matchm(k)=1的所有扫描窗口及其包含的子块,并计算上述扫描窗口的总汉明距离和颜色自相似性,得到最佳扫描窗口,用该窗口中使match(k)=1的子块更新跟踪目标;若t4中的所有扫描窗口子块的matchm(k)都等于0,则在下一帧t5中继续以t1的跟踪目标外接矩形框作为扫描窗口的尺寸,在t2的跟踪目标中心点周围进行滑动扫描,重复上述扫描步骤,直至找到与跟踪目标相匹配的扫描窗口,并用该扫描窗口更新当前帧的跟踪目标。
实施例:
结合图1和图2,本发明一种带有阴影去除的分块感知哈希跟踪方法,包括以下步骤:
步骤1:输入视频图像序列f(x,y,t),第t帧图像的大小为M*N,其中M为图像的行数,N为图像的列数,且M、N均为自然数,取M=492,N=660,(x,y)表示图像像素点的位置,t表示视频序列的第t帧图像。
步骤2:将输入的视频图像序列f(x,y,t)由RGB空间转换到CIELAB空间,根据CIELAB空间中b*通道灰度直方图的双峰性,以及a*通道阴影减弱和灰度分布的单峰性,通过阈值分割方法得到图像中的阴影区域,具体步骤如下:
2-1)将输入的视频图像序列的第t帧f(x,y,t)先由RGB空间转换到CIEXYZ空间,再由CIEXYZ空间转换到CIELAB空间,转换公式如下:
公式(2)的X0Y0Z0是CIE标准照明体的三刺激值,取标准照明体C的三刺激值,分别为X0=98.07,Y0=100,Z0=118,22。
2-2)根据CIELAB空间中b*通道灰度直方图的双峰性质,设定灰度图双峰间的波谷为阈值th1,th1取值范围为[5,10],取th1=10,将f(x,y,t)中像素灰度值小于th1的图像记为T1(x,y,t),然后根据a*通道阴影减弱和灰度分布单峰性,设立灰度图最左边的波谷为阈值th2,th2取值范围为[0.05,3],取th2=3,将f(x,y,t)中像素灰度值小于th2的图像记为T2(x,y,t),将T1(x,y,t)和T2(x,y,t)相与得到f(x,y,t)中的阴影区域图像;与运算的结果为AND(x,y,t),与运算的数学表达式为:
步骤3:采用颜色恒常算法分别估计阴影区域图像n(x1,y1,t)和非阴影区域图像b(x2,y2,t)的光照颜色,计算将n(x1,y1,t)中像素点变换到非阴影区光照效果下的颜色校正增益,然后通过颜色校正增益将阴影区域的图像颜色校正到无阴影的效果,具体步骤如下:
3-1)对n(x1,y1,t)和b(x2,y2,t)分别进行颜色恒常计算,估计出n(x1,y1,t)的光照颜色e1和b(x2,y2,t)的光照颜色e2:
公式(4)和(5)中,e1和e2是由RGB三个颜色通道组合成的光照颜色,sum(n)和sum(b)分别为n(x1,y1,t)和b(x2,y2,t)的像素点总数,k1和k2分别为n(x1,y1,t)和b(x2,y2,t)的颜色校正增益,由RGB三个颜色通道组成;颜色校正增益的计算公式如下:
其中,当i=1时表示n(x1,y1,t)的颜色校正增益;i=2时表示b(x2,y2,t)的颜色校正增益。
3-2)将n(x1,y1,t)变换到标准光照下的图像记作变换到标准光照下的图像记作变换公式如下:
由于标准光照是国际照明委员会规定的统一光照,因此图像和的场景光照是一样的,令n(x1,y1,t)变换到非阴影区光照e2下之后的图像为按照公式(7)、(8)将n(x1,y1,t)和统一变换到标准光照下,则有
3-3)根据公式(9),得到去除阴影后的图像
步骤4:手动选取跟踪目标,将跟踪目标按照运动形变大小划分为8个子块,8个子块从上到下、从左到右依次编号,第一排3个子块,第二排3个子块,第三排2个子块,坐标原点(0,0)设置在矩形框0.5倍宽度与起始高度(位于跟踪目标的外接矩形框顶部)的交汇处,分块结果以y=0轴左右对称。
步骤5:假设跟踪目标在前一帧t1无遮挡,在当前帧t2,以前一帧t1的跟踪目标位置为中心,找出使第5子块的汉明距离取最小值的n个候选窗口,分别计算上述候选窗口的总汉明距离,找出使总汉明距离取最小值的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,若至少有5个子块的颜色自相似性相匹配,则用该候选窗口更新t2的跟踪目标;否则,找到使总汉明距离取值第二小的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,以此类推,直到找到符合条件的候选窗口,并用此候选窗口更新t2的跟踪目标。具体步骤如下:
5-1)在当前帧t2,以t1跟踪目标位置为中心,扫描窗口大小为width*height,其中width表示跟踪目标外接矩形框的宽度,height表示跟踪目标外接矩形框的高度,取width=17,height=48,在大小为3width*3height的区域内进行滑动扫描,计算所有扫描窗口中第5子块的哈希编码,找出使其与跟踪目标间汉明距离取最小值的n个扫描窗口,即为候选窗口,依次记为H1,H2,…,Hn,其中H1为使第5子块汉明距离取最小值的候选窗口,Hn为使第5子块汉明距离取最大值的候选窗口,且满足Hn-H1≤th3,取th3=10;优先匹配第5子块的原因是跟踪目标在相邻帧间的相对运动距离较小,因此跟踪目标区域也是逐帧慢慢被遮挡或消失的,即不可能从上一帧完全可见到下一帧完全消失,由于第5子块位于跟踪目标的中心,因此假设第5子块在t2没有被遮挡,或者只是被遮挡一小部分,不影响扫描窗口与跟踪目标中第5子块的匹配结果;分块感知哈希编码与汉明距离的计算步骤如下:
5-1-1)对跟踪目标的8个子块赋予不同的权重w(k),其中(k)表示第k个子块,w(k)定义如下:
5-1-2)将各个子块转换成灰度图像,并缩小至大小为32*32的正方形区域以简化离散余弦变换(DCT),若某个子块的长度或宽度小于32个像素,则以长度和宽度中的较小值为压缩尺寸进行压缩,然后对压缩后的正方形块进行DCT变换:
其中,u,v表示变换域中的频率分量,F(0,0)表示变换域中的低频成分,F(u,v)表示变换域的高频成分,N表示跟踪目标块的尺寸;经过DCT变换得到的变换系数矩阵左上角为低频系数,由于低频信息描述图像的大部分信息,因此只保留左上角8*8的矩阵。
5-1-3)对8*8的DCT矩阵进行哈希编码:
其中,Hash(i,k)为第k个子块中的第i个编码,G(i,k)是第k个子块的DCT矩阵中第i个元素的值,meank为第k个子块的DCT矩阵的均值。
5-1-4)记跟踪目标的第k个子块的第i个编码值为Hash0(i,k),扫描窗口的第k个子块的第i个编码值为Hash1(i,k),则跟踪目标与扫描窗口的第k个子块间的汉明距离dis(k)为:
5-2)依次比较H1,H2,…,Hn的总汉明距离,找出使总汉明距离取最小值的候选窗口,上述候选窗口是t2中跟踪目标最有可能位于的位置,记为W1,并判断W1与跟踪目标中具有相同编号的子块是否匹配;定义H1,H2,…,Hn的总汉明距离分别为D1,D2,…,Dn,归一化汉明距离因子NDism(k),其中(k)表示第k个子块,NDism(k)和D1,D2,…,Dn的定义公式如下:
定义dism(k)为第m个候选窗口的第k个子块的汉明距离,则W1与跟踪目标中具有相同编号子块的哈希编码的匹配公式为:
其中,1≤m≤n,TM1,TM2,TM3均为阈值参数,TM1的取值范围为[10,20],取TM1=15,TM2的取值范围为[25,35],取TM2=30,TM3的取值范围为[45,55],取TM3=50,matchm(k)表示该子块与跟踪目标是否匹配,matchm(k)=1表示匹配;matchm(k)=0表示不匹配。
5-3)找出W1中使match(k)=1的所有子块,计算这些子块与跟踪目标中对应子块的颜色自相似性,根据颜色自相似性判断子块对是否匹配,若至少有5个子块对相匹配,说明W1是t2时跟踪目标的位置,并用使match(k)=1的子块更新跟踪目标的位置与外接矩形框的尺寸;否则,找到D1,D2,…,Dn中取值第二小的候选窗口,记作W2,计算其与跟踪目标各个对应子块的颜色自相似性,以此类推,直到找到符合条件的候选窗口,记作Wn,并用Wn中使match(k)=1的子块更新t2中的跟踪目标;Wn和跟踪目标中具有相同编号子块的颜色自相似性的计算步骤如下:
5-3-1)计算跟踪目标与Wn中各个子块的颜色直方图:将RGB颜色空间量化至16*16*16的量化级,通过计算子块中像素点的颜色落在每个量化区间内的数量得到颜色直方图,记跟踪目标与Wn中各个子块的颜色直方图分别为Ct1(k)和Ct2(k),归一化的颜色直方图计算公式如下:
其中,N0(k)是第k个子块的总像素数,N(r,g,b)表示子块中具有颜色(R=r,G=g,B=b)的个数,m=1表示跟踪目标的颜色直方图;m=2表示Wn的颜色直方图。
5-3-2)采用巴氏距离判断跟踪目标与W1中各个对应子块的颜色直方图的相似性,Ct1(k)和Ct2(k)的巴氏距离为:
其中,M表示颜色直方图的量化级数,此处为16,ρ(Ct1(k),Ct2(k))越小,两个子块的颜色直方图越相似;设定三个阈值参数T1,T2,T3,取值范围均为[0,1],且T1<T2<T3,取T1=0.15,T2=0.33,T3=0.60,根据如下公式判断跟踪目标与Wn中的对应子块是否相似:
其中,s(k)为相似性参数,s(k)=1表示跟踪目标与Wn中的对应子块相似;s(k)=0表示不相似。
步骤6:在当前帧t2,若更新后的跟踪目标外接矩形框变小,说明跟踪目标在t2被部分遮挡,在下一帧t3,根据跟踪目标在t2被遮挡的情况以及t3中是否找到匹配的跟踪目标选取不同的跟踪方式;若更新后的跟踪目标外接矩形框没有变小,说明跟踪目标在t2没有被遮挡,返回步骤5。根据跟踪目标在t2被遮挡的情况以及t3中是否找到匹配的跟踪目标选取不同的跟踪方式,跟踪方式具体分为以下六种情况:
①若跟踪目标的左半部分在t2被遮挡,即当k=1,4,7时,至少有两个使match(k)=0,在t3中第2子块、第5子块或第2子块和第5子块被遮挡,因此在t3以t2中的跟踪目标为中心,在其周围区域进行窗口扫描时,采用第3子块、第6子块和第8子块组合成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dr,m,下标m表示当前的扫描窗口为第m个,Dr,m的计算公式如下:
找到使Dr,m取值最小的扫描窗口,且该扫描窗口中的第3子块、第6子块和第8子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
②若跟踪目标的右半部分在t2被遮挡,即当k=3,6,8时,至少有两个使match(k)=0,在t3中第2子块、第5子块或第2子块和第5子块被遮挡,因此在t3以t2中的跟踪目标为中心,在其周围区域进行窗口扫描时,采用第1子块、第4子块和第7子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dl,m,Dl,m的计算公式为:
找到使Dl,m取值最小的扫描窗口,且该扫描窗口中的第1子块、第4子块和第7子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
③若跟踪目标的上半部分在t2被遮挡,即当k=1,2,3时,其中至少有两个使match(k)=0,在t3中第4子块、第5子块或第6子块可能被遮挡,因此在t3以t2中的跟踪目标为中心,在其周围区域进行窗口扫描时,采用第7子块和第8子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dd,m,Dd,m的计算公式为:
找到使Dd,m取值最小的扫描窗口,且该扫描窗口中的第7子块和第8子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
④若跟踪目标的下半部分在t2被遮挡,即当k=7,8时,其中至少有两个使match(k)=0,在t3中第4子块、第5子块或第6子块可能被遮挡,因此在t3以t2中的跟踪目标为中心,在其周围区域进行窗口扫描时,采用第1子块、第2子块和第3子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Da,m,Da,m的计算公式为:
找到使Da,m取值最小的扫描窗口,且该扫描窗口中的第1子块、第2子块和第3子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标。
⑤若①~④没有找到满足条件的扫描窗口,且跟踪目标在t2的外接矩形框的某一条边距离视场边界不大于5个像素,说明跟踪目标在t3运动出摄像机视场,在之后的视频帧中,继续以t2中的跟踪目标为中心进行窗口扫描,若跟踪目标的某一部分在t2被遮挡,则采用与上述子块位置对称的子块组成的总汉明距离和颜色自相似性与跟踪目标进行匹配;定义变量num表示跟踪目标消失的帧数,若num大于阈值time,说明跟踪目标永远消失;否则,返回步骤5,重新对跟踪目标进行分块感知哈希跟踪;time的取值范围为[200,220],取time=200。
⑥若①~④没有找到满足条件的扫描窗口,且跟踪目标在t2的外接矩形框的所有边距离跟踪目标边界均大于5个像素,说明跟踪目标在t3被完全遮挡,在下一帧t4,用跟踪目标未被遮挡,即t1中的外接矩形框作为扫描窗口的尺寸,在t2的跟踪目标中心点的周围区域进行滑动扫描,计算扫描窗口与t1的跟踪目标中各个子块的匹配度matchm(k),若matchm(k)=1,说明第m个扫描窗口的第k个子块与跟踪目标的第k个子块相匹配,然后找出使matchm(k)=1的所有扫描窗口及其包含的子块,并计算上述扫描窗口的总汉明距离和颜色自相似性,得到最佳扫描窗口,用该窗口中使match(k)=1的子块更新跟踪目标;若t4中的所有扫描窗口子块的matchm(k)都等于0,则在下一帧t5中继续以t1的跟踪目标外接矩形框作为扫描窗口的尺寸,在t2的跟踪目标中心点周围进行滑动扫描,重复上述扫描步骤,直至找到与跟踪目标相匹配的扫描窗口,并用该扫描窗口更新当前帧的跟踪目标。
结合图3,输入视频图像序列f(x,y,t),从图3可知,一种带有阴影去除的分块感知哈希跟踪方法能够准确地跟踪感兴趣的跟踪目标,具有很好的跟踪效果。它是根据人体不同部位运动范围与形变程度的不同,将人体分成8块,并对不同的块赋予不同的权值,得到加权的分块感知哈希编码,具有鲁棒性强、特征向量简单和计算复杂度低的优点;另外该方法采用颜色恒常算法和Von Kries色系数定律将阴影区像素点恢复至无阴影效果,克服了跟踪目标在阴影区与非阴影区之间运动时,一般跟踪算法因光照突变难以跟踪目标的问题;同时本发明将基于分块的感知哈希编码与颜色自相似性相结合来对相邻帧的跟踪目标进行匹配,可以将细节变化对全局结果的影响限制在局部,即使人体部分旋转和遮挡,也能有效识别出相同跟踪目标和不同跟踪目标。
Claims (3)
1.一种带有阴影去除的分块感知哈希跟踪方法,其特征在于,包括以下步骤:
步骤1:输入视频图像序列f(x,y,t),第t帧图像的大小为M*N,M为图像的行数,N为图像的列数,且M、N均为自然数,(x,y)表示图像像素点的位置坐标,t表示视频序列的第t帧图像;
步骤2:将输入的视频图像序列f(x,y,t)由RGB空间转换到CIELAB空间,根据CIELAB空间中b*通道灰度直方图的双峰性,以及a*通道阴影减弱和灰度分布的单峰性,通过阈值分割方法得到图像中的阴影区域;
步骤3:采用颜色恒常算法分别估计出阴影区域图像n(x1,y1,t)和非阴影区域图像b(x2,y2,t)的光照颜色,计算将n(x1,y1,t)中像素点变换到非阴影区光照效果下的校正增益,然后通过颜色校正增益将阴影区域的图像颜色校正到无阴影的效果;
步骤4:选取跟踪目标,将跟踪目标按照运动形变大小划分为8个子块,8个子块从上到下、从左到右依次编号,第一排3个子块,第二排3个子块,第三排2个子块,坐标原点(0,0)设置在矩形框0.5倍宽度与起始高度的交汇处,分块结果以y=0轴左右对称;
步骤5:假设跟踪目标在前一帧t1无遮挡,在当前帧t2,以前一帧t1的跟踪目标位置为中心,找出使第5子块的汉明距离取最小值的n个候选窗口,分别计算上述候选窗口的总汉明距离,找出使总汉明距离取最小值的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,若至少有5个子块的颜色自相似性相匹配,则用该候选窗口更新t2的跟踪目标;否则,找到使总汉明距离取值第二小的候选窗口,计算其与跟踪目标各个对应子块的颜色自相似性,以此类推,直到找到符合条件的候选窗口,并用此候选窗口更新t2的跟踪目标;
步骤6:在当前帧t2,若更新后的跟踪目标外接矩形框变小,说明跟踪目标在t2被部分遮挡,在下一帧t3,根据跟踪目标在t2被遮挡的情况以及t3中是否找到匹配的跟踪目标选取不同的跟踪方式;若更新后的跟踪目标外接矩形框没有变小,说明跟踪目标在t2没有被遮挡,返回步骤5。
2.根据权利要求1所述的带有阴影去除的分块感知哈希跟踪方法,其特征在于,上述步骤5中,更新t2的跟踪目标具体步骤为:
5-1)在当前帧t2,以t1跟踪目标位置为中心,扫描窗口大小为width*height,其中width表示跟踪目标外接矩形框的宽度,height表示跟踪目标外接矩形框的高度,在大小为3width*3height的区域内进行滑动扫描,计算所有扫描窗口中第5子块的哈希编码,找出使其与跟踪目标间汉明距离取最小值的n个扫描窗口,即为候选窗口,依次记为H1,H2,…,Hn,其中H1为使第5子块汉明距离取最小值的候选窗口,Hn为使第5子块汉明距离取最大值的候选窗口,且满足Hn-H1≤th3,取th3=10;分块感知哈希编码与汉明距离的计算步骤如下:
5-1-1)对跟踪目标的8个子块赋予不同的权重w(k),其中(k)表示第k个子块,w(k)定义如下:
5-1-2)将各个子块转换成灰度图像,并缩小至大小为32*32的正方形区域以简化DCT变换,若某个子块的长度或宽度小于32个像素,则以长度和宽度中的较小值为压缩尺寸进行压缩,然后对压缩后的正方形块进行DCT变换:
其中,u,v均表示变换域中的频率分量,F(0,0)表示变换域中的低频成分,F(u,v)表示变换域的高频成分,N表示跟踪目标块的尺寸;经过DCT变换得到的变换系数矩阵左上角为低频系数,由于低频信息描述图像的大部分信息,因此只保留左上角8*8的矩阵;
5-1-3)对8*8的DCT矩阵进行哈希编码:
其中,Hash(i,k)为第k个子块中的第i个编码,G(i,k)是第k个子块的DCT矩阵中第i个元素的值,meank为第k个子块的DCT矩阵的均值;
5-1-4)记跟踪目标的第k个子块的第i个编码值为Hash0(i,k),扫描窗口的第k个子块的第i个编码值为Hash1(i,k),则跟踪目标与扫描窗口的第k个子块间的汉明距离dis(k)为:
5-2)依次比较H1,H2,…,Hn的总汉明距离,找出使总汉明距离取最小值的候选窗口,上述候选窗口是t2中跟踪目标最有可能位于的位置,记为W1,并判断W1与跟踪目标中具有相同编号的子块是否匹配;定义H1,H2,…,Hn的总汉明距离分别为D1,D2,…,Dn,归一化汉明距离因子NDism(k),其中(k)表示第k个子块,NDism(k)和D1,D2,…,Dn的定义公式如下:
定义dism(k)为第m个候选窗口的第k个子块的汉明距离,则W1与跟踪目标中具有相同编号子块的哈希编码的匹配公式为:
else matchm(k)=0
其中,1≤m≤n,TM1,TM2,TM3均为阈值参数,TM1的取值范围为[10,20],TM2的取值范围为[25,35],TM3的取值范围为[45,55],matchm(k)表示该子块与跟踪目标是否匹配,matchm(k)=1表示匹配;matchm(k)=0表示不匹配;
5-3)找出W1中使match(k)=1的所有子块,计算这些子块与跟踪目标中对应子块的颜色自相似性,根据颜色自相似性判断子块对是否匹配,若至少有5个子块对相匹配,说明W1是t2中跟踪目标的位置,并用使match(k)=1的子块更新跟踪目标的位置与外接矩形框的尺寸;否则,找到D1,D2,…,Dn中取值第二小的候选窗口,记作W2,计算其与跟踪目标各个对应子块的颜色自相似性,以此类推,直到找到符合条件的候选窗口,记作Wn,并用Wn中使match(k)=1的子块更新t2中的跟踪目标;Wn和跟踪目标中具有相同编号子块的颜色自相似性的计算步骤如下:
5-3-1)计算跟踪目标与Wn中各个子块的颜色直方图:将RGB颜色空间量化至16*16*16的量化级,通过计算子块中像素点的颜色落在每个量化区间内的数量得到颜色直方图,记跟踪目标与Wn中各个子块的颜色直方图分别为Ct1(k)和Ct2(k),归一化的颜色直方图计算公式如下:
其中,N0(k)是第k个子块的总像素数,N(r,g,b)表示子块中具有颜色(R=r,G=g,B=b)的个数,m=1表示跟踪目标的颜色直方图;m=2表示Wn的颜色直方图;
5-3-2)采用巴氏距离判断跟踪目标与W1中各个对应子块的颜色直方图的相似性,Ct1(k)和Ct2(k)的巴氏距离ρ(Ct1(k),Ct2(k))为:
其中,M表示颜色直方图的量化级数,此处为16,ρ(Ct1(k),Ct2(k))越小,两个子块的颜色直方图越相似;设定三个阈值参数T1,T2,T3,取值范围均为[0,1],且T1<T2<T3,根据如下公式判断跟踪目标与Wn中的对应子块的颜色是否相似:
else s(k)=0
其中,s(k)为相似性参数,s(k)=1表示跟踪目标与Wn中的对应子块相似;s(k)=0表示不相似。
3.根据权利要求1所述的带有阴影去除的分块感知哈希跟踪方法,其特征在于,上述步骤6所述的根据跟踪目标在t2被遮挡的情况以及t3中是否找到匹配的跟踪目标选取不同的跟踪方式;跟踪方式具体分为以下六种情况:
①若跟踪目标的左半部分在t2被遮挡,即当k=1,4,7时,至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第3子块、第6子块和第8子块组合成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dr,m,下标m表示当前的扫描窗口为第m个,Dr,m的计算公式如下:
找到使Dr,m取值最小的扫描窗口,且该扫描窗口中的第3子块、第6子块和第8子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标;
②若跟踪目标的右半部分在t2被遮挡,即当k=3,6,8时,至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第1子块、第4子块和第7子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dl,m,Dl,m的计算公式为:
找到使Dl,m取值最小的扫描窗口,且该扫描窗口中的第1子块、第4子块和第7子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标;
③若跟踪目标的上半部分在t2被遮挡,即当k=1,2,3时,其中至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第7子块和第8子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Dd,m,Dd,m的计算公式为:
找到使Dd,m取值最小的扫描窗口,且该扫描窗口中的第7子块和第8子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标;
④若跟踪目标的下半部分在t2被遮挡,即当k=7,8时,其中至少有两个使match(k)=0,在t3中进行窗口扫描时,采用第1子块、第2子块和第3子块组成的总汉明距离与跟踪目标进行匹配,记此时的总汉明距离为Da,m,Da,m的计算公式为:
找到使Da,m取值最小的扫描窗口,且该扫描窗口中的第1子块、第2子块和第3子块中至少要有两个使match(k)=1,之后,计算该扫描窗口中使match(k)=1的所有子块与跟踪目标中对应子块的颜色自相似性,按照步骤5-3),找到符合条件的最佳候选窗口,并用此候选窗口中使match(k)=1的子块更新t3中的跟踪目标;
⑤若①~④没有找到满足条件的扫描窗口,且跟踪目标在t2的外接矩形框的某一条边距离视场边界不大于5个像素,说明跟踪目标在t3运动出摄像机视场,在之后的视频帧中,继续以t2中的跟踪目标为中心进行窗口扫描,若跟踪目标的某一部分在t2被遮挡,则采用与上述子块位置对称的子块组成的总汉明距离和颜色自相似性与跟踪目标进行匹配;定义变量num表示跟踪目标消失的帧数,若num大于阈值time,说明跟踪目标永远消失;否则,返回步骤5,重新对跟踪目标进行分块感知哈希跟踪;time的取值范围为[200,220];
⑥若①~④没有找到满足条件的扫描窗口,且跟踪目标在t2的外接矩形框的所有边距离跟踪目标边界均大于5个像素,说明跟踪目标在t3被完全遮挡,在下一帧t4,用跟踪目标未被遮挡,即t1中的外接矩形框作为扫描窗口的尺寸,在t2的跟踪目标中心点的周围区域进行滑动扫描,计算扫描窗口与t1的跟踪目标中各个子块的匹配度matchm(k),若matchm(k)=1,说明第m个扫描窗口的第k个子块与跟踪目标的第k个子块相匹配,然后找出使matchm(k)=1的所有扫描窗口及其包含的子块,并计算上述扫描窗口的总汉明距离和颜色自相似性,得到最佳扫描窗口,用该窗口中使match(k)=1的子块更新跟踪目标;若t4中的所有扫描窗口子块的matchm(k)都等于0,则在下一帧t5中继续以t1的跟踪目标外接矩形框作为扫描窗口的尺寸,在t2的跟踪目标中心点周围进行滑动扫描,重复上述扫描步骤,直至找到与跟踪目标相匹配的扫描窗口,并用该扫描窗口更新当前帧的跟踪目标。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510062052.6A CN105989611B (zh) | 2015-02-05 | 2015-02-05 | 带有阴影去除的分块感知哈希跟踪方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510062052.6A CN105989611B (zh) | 2015-02-05 | 2015-02-05 | 带有阴影去除的分块感知哈希跟踪方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105989611A true CN105989611A (zh) | 2016-10-05 |
CN105989611B CN105989611B (zh) | 2019-01-18 |
Family
ID=57037888
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510062052.6A Expired - Fee Related CN105989611B (zh) | 2015-02-05 | 2015-02-05 | 带有阴影去除的分块感知哈希跟踪方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105989611B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106685426A (zh) * | 2016-11-28 | 2017-05-17 | 北京航天自动控制研究所 | 一种目标信息的编码方法 |
CN106951908A (zh) * | 2017-03-24 | 2017-07-14 | 深圳汇通智能化科技有限公司 | 一种有效的目标识别装置 |
CN107424172A (zh) * | 2017-07-24 | 2017-12-01 | 福建师范大学 | 基于前景判别和圆形搜索方法的运动目标跟踪方法 |
CN108108699A (zh) * | 2017-12-25 | 2018-06-01 | 重庆邮电大学 | 融合深度神经网络模型和二进制哈希的人体动作识别方法 |
CN108694411A (zh) * | 2018-04-03 | 2018-10-23 | 南昌奇眸科技有限公司 | 一种识别相似图像的方法 |
CN110647858A (zh) * | 2019-09-29 | 2020-01-03 | 上海依图网络科技有限公司 | 一种视频遮挡判断方法、装置和计算机存储介质 |
CN111860189A (zh) * | 2020-06-24 | 2020-10-30 | 北京环境特性研究所 | 一种目标跟踪方法和装置 |
CN112200126A (zh) * | 2020-10-26 | 2021-01-08 | 上海盛奕数字科技有限公司 | 一种基于人工智能跑步肢体遮挡姿态识别方法 |
CN114663434A (zh) * | 2022-05-25 | 2022-06-24 | 国家海洋局北海海洋技术保障中心 | 一种侧扫声呐影像的阴影判别方法 |
CN114821280A (zh) * | 2022-04-28 | 2022-07-29 | 西安交通大学 | 一种基于滑动窗口的slam局部实时重定位方法 |
CN114972125A (zh) * | 2022-07-29 | 2022-08-30 | 中国科学院国家天文台 | 深空探测多光谱图像的真彩色图像恢复方法和装置 |
CN116485987A (zh) * | 2019-01-07 | 2023-07-25 | 北京达美盛软件股份有限公司 | 一种基于阴影渲染的真实环境模拟方法及装置 |
CN117372933A (zh) * | 2023-12-06 | 2024-01-09 | 南京智绘星图信息科技有限公司 | 图像去冗方法、装置及电子设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101916447A (zh) * | 2010-07-29 | 2010-12-15 | 江苏大学 | 一种鲁棒的运动目标检测与跟踪图像处理系统 |
US20120250984A1 (en) * | 2010-12-01 | 2012-10-04 | The Trustees Of The University Of Pennsylvania | Image segmentation for distributed target tracking and scene analysis |
-
2015
- 2015-02-05 CN CN201510062052.6A patent/CN105989611B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101916447A (zh) * | 2010-07-29 | 2010-12-15 | 江苏大学 | 一种鲁棒的运动目标检测与跟踪图像处理系统 |
US20120250984A1 (en) * | 2010-12-01 | 2012-10-04 | The Trustees Of The University Of Pennsylvania | Image segmentation for distributed target tracking and scene analysis |
Non-Patent Citations (2)
Title |
---|
KAIHUA ZHANG ET AL: "Real-Time Compressive Tracking", 《EUROPEAN CONFERENCE ON COMPUTER VISION》 * |
牛夏牧 等: "感知哈希综述", 《电子学报》 * |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106685426A (zh) * | 2016-11-28 | 2017-05-17 | 北京航天自动控制研究所 | 一种目标信息的编码方法 |
CN106685426B (zh) * | 2016-11-28 | 2021-02-09 | 北京航天自动控制研究所 | 一种目标信息的编码方法 |
CN106951908A (zh) * | 2017-03-24 | 2017-07-14 | 深圳汇通智能化科技有限公司 | 一种有效的目标识别装置 |
CN106951908B (zh) * | 2017-03-24 | 2020-06-26 | 爱保科技有限公司 | 一种有效的目标识别装置 |
CN107424172A (zh) * | 2017-07-24 | 2017-12-01 | 福建师范大学 | 基于前景判别和圆形搜索方法的运动目标跟踪方法 |
CN107424172B (zh) * | 2017-07-24 | 2020-09-25 | 福建师范大学 | 基于前景判别和圆形搜索方法的运动目标跟踪方法 |
CN108108699A (zh) * | 2017-12-25 | 2018-06-01 | 重庆邮电大学 | 融合深度神经网络模型和二进制哈希的人体动作识别方法 |
CN108694411B (zh) * | 2018-04-03 | 2022-02-25 | 南昌奇眸科技有限公司 | 一种识别相似图像的方法 |
CN108694411A (zh) * | 2018-04-03 | 2018-10-23 | 南昌奇眸科技有限公司 | 一种识别相似图像的方法 |
CN116485987A (zh) * | 2019-01-07 | 2023-07-25 | 北京达美盛软件股份有限公司 | 一种基于阴影渲染的真实环境模拟方法及装置 |
CN110647858A (zh) * | 2019-09-29 | 2020-01-03 | 上海依图网络科技有限公司 | 一种视频遮挡判断方法、装置和计算机存储介质 |
CN111860189A (zh) * | 2020-06-24 | 2020-10-30 | 北京环境特性研究所 | 一种目标跟踪方法和装置 |
CN111860189B (zh) * | 2020-06-24 | 2024-01-19 | 北京环境特性研究所 | 一种目标跟踪方法和装置 |
CN112200126A (zh) * | 2020-10-26 | 2021-01-08 | 上海盛奕数字科技有限公司 | 一种基于人工智能跑步肢体遮挡姿态识别方法 |
CN114821280A (zh) * | 2022-04-28 | 2022-07-29 | 西安交通大学 | 一种基于滑动窗口的slam局部实时重定位方法 |
CN114663434A (zh) * | 2022-05-25 | 2022-06-24 | 国家海洋局北海海洋技术保障中心 | 一种侧扫声呐影像的阴影判别方法 |
CN114972125A (zh) * | 2022-07-29 | 2022-08-30 | 中国科学院国家天文台 | 深空探测多光谱图像的真彩色图像恢复方法和装置 |
CN117372933A (zh) * | 2023-12-06 | 2024-01-09 | 南京智绘星图信息科技有限公司 | 图像去冗方法、装置及电子设备 |
CN117372933B (zh) * | 2023-12-06 | 2024-02-20 | 南京智绘星图信息科技有限公司 | 图像去冗方法、装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN105989611B (zh) | 2019-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105989611A (zh) | 带有阴影去除的分块感知哈希跟踪方法 | |
CN110119780B (zh) | 基于生成对抗网络的高光谱图像超分辨重建方法 | |
CN109741256A (zh) | 基于稀疏表示和深度学习的图像超分辨率重建方法 | |
CN102999913B (zh) | 一种基于可信点传播的局部立体匹配方法 | |
CN102867313B (zh) | 一种融合区域颜色和HoG特征的视觉显著性检测方法 | |
WO2017084204A1 (zh) | 一种二维视频流中的人体骨骼点追踪方法及系统 | |
CN103093444A (zh) | 基于自相似性和结构信息约束的图像超分辨重建方法 | |
CN108038420A (zh) | 一种基于深度视频的人体行为识别方法 | |
CN106600632B (zh) | 一种改进匹配代价聚合的立体图像匹配方法 | |
CN104408700A (zh) | 基于形态学和pca的轮廓波红外与可见光图像融合方法 | |
CN105825503A (zh) | 基于视觉显著性的图像质量评价方法 | |
CN103871041A (zh) | 基于认知正则化参数构建的图像超分辨率重构方法 | |
CN105664462A (zh) | 基于人体姿态估计算法的辅助训练系统 | |
CN103077542B (zh) | 一种深度图的感兴趣区域压缩方法 | |
CN107633482A (zh) | 一种基于序列图像的超分辨率重建方法 | |
CN103020933A (zh) | 一种基于仿生视觉机理的多源图像融合方法 | |
CN104036468A (zh) | 基于预放大非负邻域嵌入的单帧图像超分辨重建方法 | |
CN102420985A (zh) | 一种多视点视频对象提取方法 | |
CN106447654B (zh) | 基于统计相似性和双向显著性保真度的图像重定向质量评价方法 | |
CN104331877A (zh) | 融合色调梯度的彩色图像边缘检测方法 | |
CN103971354A (zh) | 低分辨率红外图像重建高分辨率红外图像的方法 | |
CN109559278B (zh) | 基于多特征学习的超分辨图像重建方法及系统 | |
CN105844667A (zh) | 一种紧凑颜色编码的结构化目标跟踪方法 | |
CN113822816A (zh) | 气雾散射模型优化的单张遥感图像去霾方法 | |
CN102510437B (zh) | 基于rgb分量分布的视频图像背景检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190118 Termination date: 20210205 |
|
CF01 | Termination of patent right due to non-payment of annual fee |