CN105005760B - 一种基于有限混合模型的行人再识别方法 - Google Patents

一种基于有限混合模型的行人再识别方法 Download PDF

Info

Publication number
CN105005760B
CN105005760B CN201510318830.3A CN201510318830A CN105005760B CN 105005760 B CN105005760 B CN 105005760B CN 201510318830 A CN201510318830 A CN 201510318830A CN 105005760 B CN105005760 B CN 105005760B
Authority
CN
China
Prior art keywords
pedestrian
image
mrow
mixture model
finite mixture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510318830.3A
Other languages
English (en)
Other versions
CN105005760A (zh
Inventor
王天江
陈应
李金生
吴善农
冯琪
刘芳
王明理
龚立宇
邵光普
冯平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huazhong University of Science and Technology
China Construction Third Bureau Intelligent Technology Co Ltd
Original Assignee
Huazhong University of Science and Technology
China Construction Third Bureau Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huazhong University of Science and Technology, China Construction Third Bureau Intelligent Technology Co Ltd filed Critical Huazhong University of Science and Technology
Priority to CN201510318830.3A priority Critical patent/CN105005760B/zh
Publication of CN105005760A publication Critical patent/CN105005760A/zh
Application granted granted Critical
Publication of CN105005760B publication Critical patent/CN105005760B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53—Recognition of crowd images, e.g. recognition of crowd congestion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于有限混合模型的行人再识别方法，属于计算机视觉和模式识别领域，提升行人再识别的准确度，包括以下步骤：(1)构建行人图像库预处理图像并提取图像特征；(2)计算图像库中所有图像的有限混合模型和待再识别行人的图像的有限混合模型参数；(3)将需再识别行人的有限混合模型与图像库中所有图像的有限混合模型之间的距离进行最优化求解，并进行距离排序返回再识别结果。本发明优化混合模型之间的距离度量，提高行人再识别的准确度。

Description

一种基于有限混合模型的行人再识别方法
技术领域
本发明属于计算机视觉与模式识别领域，更具体地，涉及一种基于有限混合模型的行人再识别方法。
背景技术
行人再识别在视频监控网络中中是非常重要的问题，在监控网络中的行人会在不同的摄像头下出现。行人再识别的任务是在监控网络中行人的身份的鉴定，将曾经在监控网络中出现过的目标行人在其他摄像机的场景内时再次识别出来的技术，即在给定一些候选目标的情况下如何将行人进行再识别。
现有的行人再识别方法中主要分为以下几步：从原始视频数据中提取更为可靠、鲁棒和精确的特征数据；通过提取的特征数据来建立描述子能够有效描述不同个体；将需再识别图像与监控网络中的行人进行距离度量并返回再识别行人的候选行人图像。
但现有的行人再识别方法也存在着一些相应的问题：(1)提取的特征不能够建立一个鲁棒性的描述子对行人图像的整体信息进行描述；(2)不同个体的描述子是处在黎曼流形上，简单得采用一些欧式空间度量距离的方法往往带来很大的偏差。
发明内容
针对现有技术的以上缺陷或改进需求，本发明提供了一种基于有限混合模型的行人再识别方法，其目的在于，在提取的特征上建立更为鲁棒性的描述子对行人图像进行描述，并对不同行人图像的描述子建立度量模型以更准确得返回再识别行人的候选行人图像。
为实现上述目的，按照本发明的一个方面，提供了一种基于有限混合模型的行人再识别方法，包括以下步骤：
(1)对监控视频进行预处理，以构建行人图像库，并提取需再识别行人的图像和行人图像库的多维特征向量；
(2)利用步骤(1)中得到的多维特征向量并使用期望最大化算法计算行人图像库中所有图像的有限混合模型参数和需再识别行人的图像的有限混合模型参数；
(3)采用李群运土工距离分别获得需再识别行人的有限混合模型与行人图像库中所有图像的有限混合模型之间的距离，并对距离按照从小到大的顺序排序后返回排名前列的多个结果所对应的行人数据库中的多幅图像。
优选地，本方法进一步包括：在步骤(1)之后，利用主成分分析法对提取的多维特征向量进行维数削减。
优选地，步骤(1)包括以下子步骤：
(1.1)对监控视频进行行人检测，提取所有行人的最小矩形框图像，并根据提取的最小矩形框图像构建行人图像库；
(1.2)将需再识别行人的图像与行人图像库中所有图像按照统一的图像长度和宽度进行缩放，并将行人图像库中的所有图像进行颜色直方图均衡化处理，其中以图像左上方的顶点作为坐标原点，像素点的坐标为(x,y)；
(1.3)提取步骤(1.2)处理后的需再识别行人的图像与处理后的行人图像库中所有图像的每个像素点(x,y)处的多维特征向量z(x,y)。
优选地，步骤(1.3)具体为，提取像素点(x,y)处多维特征向量其中R、G、B分别为像素点(x,y)处的颜色信息，Ix与Iy分别为图像经过(-1,0,1)T、(-1,0,1)滤波后在像素点(x,y)处的一阶梯度值，Ixx与Iyy则分别为图像经过(-1,2,1)T、(-1,2,1)滤波后像素在像素点(x,y)处的二阶梯度值，(·)T表示对矩阵进行转置操作。
优选地，步骤(2)包括以下子步骤：
(2.1)采用有限混合模型对需再识别行人的图像及行人图像库中的每幅图像的多维特征向量z(x,y)进行建模，以生成有限混合模型中的模型参数T和S；具体而言，有限混合模型的基函数采用高斯函数，基函数的个数根据经验设置一个值N，使用EM算法获取有限混合模型中需再识别行人的图像的模型参数T＝{(w1,T,μ1,T,∑1,T),(w2,T,μ2,T,∑2,T),K(wK,T,μK,T,∑K,T)}，以及有限混合模型中行人图像库中图像的模型参数S＝{(w1,S,μ1,S,∑1,S),(w2,S,μ2,S,∑2,S),K(wJ,S,μJ,S,∑J,S)}，其中K和J分别为有限混合模型中需再识别行人的图像、行人图像库中的图像经过EM算法迭代融合后的基函数个数，且1≤K≤N，1≤J≤N；这里(wk,T,μk,T,∑k,T)分别表示需再识别行人图像的有限混合模型中高斯基函数的权值、均值向量和协方差矩阵，(wj,S,μj,S,∑j,S)分别表示行人图像库图像的有限混合模型中高斯基函数的权值、均值向量和协方差矩阵，且
(2.2)将需再识别行人的图像与行人图像库中的图像的有限混合模型中高斯基函数的协方差矩阵Σk,T、Σj,S进行乔列斯基分解分解，以得到下三角矩阵Lk,T、Lj,S：其中分解所得到的Lk,T、Lj,S是唯一的；
(2.3)根据得到的下三角矩阵Lk,T、Lj,S并通过多维标准正态分布生成仿射变换矩阵多个Tk,T、Tk,S形成有限混合模型的模型参数T＝{(w1,T,T1,T),(w2,T,T2,T),K(wK,T,TK,T)}、S＝{(w1,S,S1,S),(w2,S,S2,S),K(wJ,S,SJ,S)}。
优选地，步骤(3)包括以下子步骤：
(3.1)度量需再识别行人的有限混合模型与行人图像库中每幅图像的有限混合模型之间的距离；
(3.2)遍历整个行人图像库计算图像库中所有行人与需再识别行人之间的李群运土工距离，将距离LGEMD(S,T)进行排序，并返回排名前列的多个结果所对应的行人数据库中的多幅候选图像。
优选地，步骤(3.1)包括以下子步骤：
(3.1.1)将行人图像库中每个行人的第j个高斯成分Sj,S映射到需再识别行人的第k个仿射变换矩阵Tk,T的切空间上，并计算第j个高斯成分Sj,S到切空间的测地线距离||·||F为矩阵的弗罗贝尼乌斯范数；
(3.1.2)采用LGEMD计算方法来优化由模型参数S＝{(w1,S,S1,S),(w2,S,S2,S),K(wJ,S,SJ,S)}到模型参数T＝{(w1,T,T1,T),(w2,T,T2,T),K(wK,T,TK,T)}之间的距离，其通过以下线性目标函数表示：
其中约束条件为：
βjk≥0 1≤j≤J,1≤k≤K
上述优化问题可通过单纯形方法求出，上式中的djk由(3.2.1)运算得到，然后根据所得的优化参数{βjk}计算出两混合模型之间的李群运土工距离
按照本发明的另一方面，提供了一种基于有限混合模型的行人再识别系统，包括：
第一模块，用于对监控视频进行预处理，以构建行人图像库，并提取需再识别行人的图像和行人图像库的多维特征向量；
第二模块，用于利用第一模块中得到的多维特征向量并使用期望最大化算法计算行人图像库中所有图像的有限混合模型参数和需再识别行人的图像的有限混合模型参数；
第三模块，用于采用李群运土工距离分别获得需再识别行人的有限混合模型与行人图像库中所有图像的有限混合模型之间的距离，并对距离按照从小到大的顺序排序后返回排名前列的多个结果所对应的行人数据库中的多幅图像。
总体而言，通过本发明所构思的以上技术方案与现有技术相比，能够取得下列有益效果：
1、本发明采用了步骤(1)和步骤(2)，能够使提取的行人图像描述子更为鲁棒，并很好得反映行人的整体信息；
2、在不同行人图像描述子距离度量上本发明采用步骤(3)，依据李群李代数的相关理论和线性优化方法进行度量不同行人描述子之间的距离，度量距离更为可靠。
附图说明
图1是本发明基于有限混合模型的行人再识别方法的流程图。
图2是本发明方法中步骤(2)的细化流程图。
图3是本发明方法中步骤(3)的细化流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
本发明的基本思路在于，提出一种基于有限混合模型进行特征融合，并将局部特征信息转化为能描述行人整体信息的混合模型基函数的参数，协方差描述子具有更强的描述能力。混合模型的基函数采用高斯函数，并进一步将所有基函数的参数抽象为混合高斯特征，实现图像的局部信息描述向整体信息描述的过渡，并利用图像的整体信息进行距离度量，整体信息的度量基于高斯基函数之间的测地线距离。
如图1所示，本发明提供的基于有限混合模型的行人再识别方法包括以下步骤：
(1)对监控视频进行预处理，以构建行人图像库，并提取需再识别(Reidentification)行人的图像和行人图像库的多维特征向量，本步骤包括以下子步骤：
(1.1)对监控视频进行行人检测，提取所有行人的最小矩形框图像，并根据提取的最小矩形框图像构建行人图像库；
(1.2)将需再识别行人的图像与行人图像库中所有图像按照统一的图像长度和宽度进行缩放，并将行人图像库中的所有图像进行颜色直方图均衡化处理，其中以图像左上方的顶点作为坐标原点，像素点的坐标为(x,y)；具体而言，缩放后的图像大小将决定再识别的效果，其大小越大，则再识别的速度变慢，效果更好；反之则识别速度快，效果变差；
(1.3)提取步骤(1.2)处理后的需再识别行人的图像与处理后的行人图像库中所有图像的每个像素点(x,y)处的多维特征向量z(x,y)，本步骤具体为，提取像素点(x,y)处多维特征向量其中R、G、B分别为像素点(x,y)处的颜色信息，Ix与Iy分别为图像经过(-1,0,1)T、(-1,0,1)滤波后在像素点(x,y)处的一阶梯度值，Ixx与Iyy则分别为图像经过(-1,2,1)T、(-1,2,1)滤波后像素在像素点(x,y)处的二阶梯度值，(·)T表示对矩阵进行转置操作；
优选地，在本步骤之后，也可以利用主成分分析法(Principle ComponentAnalysis，简称PCA)对提取的多维特征向量进行维数削减，目的在于减少计算量。
(2)利用步骤(1)中得到的多维特征向量z(x,y)并使用期望最大化算法(Expectation Maximum，简称EM)计算行人图像库中所有图像的有限混合模型参数和需再识别行人的图像的有限混合模型参数，如图2所示，本步骤包括以下子步骤：
(2.1)采用有限混合模型对需再识别行人的图像及行人图像库中的每幅图像的多维特征向量z(x,y)进行建模，以生成有限混合模型中的模型参数T和S；具体而言，有限混合模型的基函数采用高斯函数，基函数的个数根据经验设置一个相对较大的值N(其取值小于50，优选为20至40)，使用EM算法获取有限混合模型中需再识别行人的图像的模型参数T＝{(w1,T,μ1,T,∑1,T),(w2,T,μ2,T,∑2,T),K(wK,T,μK,T,∑K,T)}，以及有限混合模型中行人图像库中图像的模型参数S＝{(w1,S,μ1,S,∑1,S),(w2,S,μ2,S,∑2,S),K(wJ,S,μJ,S,∑J,S)}，其中K和J分别为有限混合模型中需再识别行人的图像、行人图像库中的图像经过EM算法迭代融合后的基函数个数，且1≤K≤N，1≤J≤N；这里(wk,T,μk,T,∑k,T)分别表示需再识别行人图像的有限混合模型中高斯基函数的权值、均值向量和协方差矩阵，(wj,S,μj,S,∑j,S)分别表示行人图像库图像的有限混合模型中高斯基函数的权值、均值向量和协方差矩阵，且
(2.2)将需再识别行人的图像与行人图像库中的图像的有限混合模型中高斯基函数的协方差矩阵Σk,T、Σj,S进行乔列斯基分解(Cholesky decomposition)分解，以得到下三角矩阵Lk,T、Lj,S：其中分解所得到的Lk,T、Lj,S是唯一的；
(2.3)根据得到的下三角矩阵Lk,T、Lj,S并通过多维标准正态分布生成仿射变换矩阵多个Tk,T、Tk,S形成有限混合模型的模型参数T＝{(w1,T,T1,T),(w2,T,T2,T),K(wK,T,TK,T)}、S＝{(w1,S,S1,S),(w2,S,S2,S),K(wJ,S,SJ,S)}；
(3)采用李群运土工距离(Lie Group Earth Mover's Distance，简称LGEMD)分别获得需再识别行人的有限混合模型与行人图像库中所有图像的有限混合模型之间的距离，并对距离按照从小到大的顺序排序后返回排名前列的多个结果所对应的行人数据库中的多幅图像，如图3所示，本步骤包括以下子步骤：
(3.1)度量需再识别行人的有限混合模型与行人图像库中每幅图像的有限混合模型之间的距离，包括以下子步骤：
(3.1.1)将行人图像库中每个行人的第j个高斯成分Sj,S映射到需再识别行人的第k个仿射变换矩阵Tk,T的切空间上，并计算第j个高斯成分Sj,S到切空间的测地线距离||·||F为矩阵的弗罗贝尼乌斯范数(Frobenius norm)；
(3.1.2)采用LGEMD计算方法来优化由模型参数S＝{(w1,S,S1,S),(w2,S,S2,S),K(wJ,S,SJ,S)}到模型参数T＝{(w1,T,T1,T),(w2,T,T2,T),K(wK,T,TK,T)}之间的距离，其通过以下线性目标函数表示：
其中约束条件为：
βjk≥0 1≤j≤J,1≤k≤K
上述优化问题可通过单纯形方法求出，上式中的djk由(3.2.1)运算得到，然后根据所得的优化参数{βjk}计算出两混合模型之间的李群运土工距离
(3.2)遍历整个行人图像库计算图像库中所有行人与需再识别行人之间的李群运土工距离，将距离LGEMD(S,T)进行排序，并返回排名前列的多个结果所对应的行人数据库中的多幅候选图像。
本领域的技术人员容易理解，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (7)

1.一种基于有限混合模型的行人再识别方法，其特征在于，包括以下步骤：
(1)对监控视频进行预处理，以构建行人图像库，并提取需再识别行人的图像和行人图像库的多维特征向量；
(2)利用步骤(1)中得到的多维特征向量并使用期望最大化算法计算行人图像库中所有图像的有限混合模型参数和需再识别行人的图像的有限混合模型参数；
(3)采用李群运土工距离分别获得需再识别行人的有限混合模型与行人图像库中所有图像的有限混合模型之间的距离，并对距离按照从小到大的顺序排序后返回排名前列的多个结果所对应的行人数据库中的多幅图像；
其中，步骤(1)包括以下子步骤：
(1.1)对监控视频进行行人检测，提取所有行人的最小矩形框图像，并根据提取的最小矩形框图像构建行人图像库；
(1.2)将需再识别行人的图像与行人图像库中所有图像按照统一的图像长度和宽度进行缩放，并将行人图像库中的所有图像进行颜色直方图均衡化处理，其中以图像左上方的顶点作为坐标原点，像素点的坐标为(x,y)；
(1.3)提取步骤(1.2)处理后的需再识别行人的图像与处理后的行人图像库中所有图像的每个像素点(x,y)处的多维特征向量z(x,y)。
2.根据权利要求1所述的行人再识别方法，其特征在于，进一步包括：在步骤(1)之后，利用主成分分析法对提取的多维特征向量进行维数削减。
3.根据权利要求1所述的行人再识别方法，其特征在于，步骤(1.3)具体为，提取像素点(x,y)处多维特征向量其中R、G、B分别为像素点(x,y)处的颜色信息，Ix与Iy分别为图像经过(-1,0,1)T、(-1,0,1)滤波后在像素点(x,y)处的一阶梯度值，Ixx与Iyy则分别为图像经过(-1,2,1)T、(-1,2,1)滤波后像素在像素点(x,y)处的二阶梯度值，(·)T表示对矩阵进行转置操作。
4.根据权利要求3所述的行人再识别方法，其特征在于，步骤(2)包括以下子步骤：
(2.1)采用有限混合模型对需再识别行人的图像及行人图像库中的每幅图像的多维特征向量z(x,y)进行建模，以生成有限混合模型中的模型参数T和S；具体而言，有限混合模型的基函数采用高斯函数，基函数的个数根据经验设置一个值N，使用EM算法获取有限混合模型中需再识别行人的图像的模型参数T＝{(w1,T,μ1,T,∑1,T),(w2,T,μ2,T,∑2,T),...(wK,T,μK,T,∑K,T)}，以及有限混合模型中行人图像库中图像的模型参数S＝{(w1,S,μ1,S,∑1,S),(w2,S,μ2,S,∑2,S),...(wJ,S,μJ,S,∑J,S)}，其中K和J分别为有限混合模型中需再识别行人的图像、行人图像库中的图像经过EM算法迭代融合后的基函数个数，且1≤K≤N，1≤J≤N；这里(wk,T,μk,T,∑k,T)分别表示需再识别行人图像的有限混合模型中高斯基函数的权值、均值向量和协方差矩阵，(wj,S,μj,S,∑j,S)分别表示行人图像库图像的有限混合模型中高斯基函数的权值、均值向量和协方差矩阵，且
(2.2)将需再识别行人的图像与行人图像库中的图像的有限混合模型中高斯基函数的协方差矩阵Σk,T、Σj,S进行乔列斯基分解分解，以得到下三角矩阵Lk,T、Lj,S：其中分解所得到的Lk,T、Lj,S是唯一的；
(2.3)根据得到的下三角矩阵Lk,T、Lj,S并通过多维标准正态分布生成仿射变换矩阵多个Tk,T、Tk,S形成有限混合模型的模型参数T＝{(w1,T,T1,T),(w2,T,T2,T),...(wK,T,TK,T)}、S＝{(w1,S,S1,S),(w2,S,S2,S),...(wJ,S,SJ,S)}。
5.根据权利要求4所述的行人再识别方法，其特征在于，步骤(3)包括以下子步骤：
(3.1)度量需再识别行人的有限混合模型与行人图像库中每幅图像的有限混合模型之间的距离；
(3.2)遍历整个行人图像库计算图像库中所有行人与需再识别行人之间的李群运土工距离，将距离LGEMD(S,T)进行排序，并返回排名前列的多个结果所对应的行人数据库中的多幅候选图像。
6.根据权利要求5所述的行人再识别方法，其特征在于，步骤(3.1)包括以下子步骤：
(3.1.1)将行人图像库中每个行人的第j个高斯成分Sj,S映射到需再识别行人的第k个仿射变换矩阵Tk,T的切空间上，并计算第j个高斯成分Sj,S到切空间的测地线距离||·||F为矩阵的弗罗贝尼乌斯范数；
(3.1.2)采用LGEMD计算方法来优化由模型参数S＝{(w1,S,S1,S),(w2,S,S2,S),...(wJ,S,SJ,S)}到模型参数T＝{(w1,T,T1,T),(w2,T,T2,T),...(wK,T,TK,T)}之间的距离，其通过以下线性目标函数表示：
<mrow> <munder> <mrow> <mi>m</mi> <mi>i</mi> <mi>n</mi> </mrow> <mi>&amp;beta;</mi> </munder> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>j</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>J</mi> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>k</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>K</mi> </munderover> <msub> <mi>d</mi> <mrow> <mi>j</mi> <mi>k</mi> </mrow> </msub> <msub> <mi>&amp;beta;</mi> <mrow> <mi>j</mi> <mi>k</mi> </mrow> </msub> </mrow>
其中约束条件为：
βjk≥0 1≤j≤J,1≤k≤K
<mrow> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>j</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>J</mi> </munderover> <msub> <mi>&amp;beta;</mi> <mrow> <mi>j</mi> <mi>k</mi> </mrow> </msub> <mo>=</mo> <msub> <mi>w</mi> <mrow> <mi>k</mi> <mo>,</mo> <mi>T</mi> </mrow> </msub> <mo>,</mo> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>k</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>K</mi> </munderover> <msub> <mi>&amp;beta;</mi> <mrow> <mi>j</mi> <mi>k</mi> </mrow> </msub> <mo>=</mo> <msub> <mi>w</mi> <mrow> <mi>j</mi> <mo>,</mo> <mi>S</mi> </mrow> </msub> </mrow>
<mrow> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>j</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>J</mi> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>k</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>K</mi> </munderover> <msub> <mi>&amp;beta;</mi> <mrow> <mi>i</mi> <mi>j</mi> </mrow> </msub> <mo>=</mo> <mn>1</mn> </mrow>
上述优化问题可通过单纯形方法求出，上式中的djk由(3.2.1)运算得到，然后根据所得的优化参数{βjk}计算出两混合模型之间的李群运土工距离
7.一种基于有限混合模型的行人再识别系统，其特征在于，包括：
第一模块，用于对监控视频进行预处理，以构建行人图像库，并提取需再识别行人的图像和行人图像库的多维特征向量；
第二模块，用于利用第一模块中得到的多维特征向量并使用期望最大化算法计算行人图像库中所有图像的有限混合模型参数和需再识别行人的图像的有限混合模型参数；
第三模块，用于采用李群运土工距离分别获得需再识别行人的有限混合模型与行人图像库中所有图像的有限混合模型之间的距离，并对距离按照从小到大的顺序排序后返回排名前列的多个结果所对应的行人数据库中的多幅图像；
其中，所述第一模块包括：
第四模块，用于对监控视频进行行人检测，提取所有行人的最小矩形框图像，并根据提取的最小矩形框图像构建行人图像库；
第五模块，用于将需再识别行人的图像与行人图像库中所有图像按照统一的图像长度和宽度进行缩放，并将行人图像库中的所有图像进行颜色直方图均衡化处理，其中以图像左上方的顶点作为坐标原点，像素点的坐标为(x,y)；
第六模块，用于提取所述第五模块处理后的需再识别行人的图像与处理后的行人图像库中所有图像的每个像素点(x,y)处的多维特征向量z(x,y)。
CN201510318830.3A 2015-06-11 2015-06-11 一种基于有限混合模型的行人再识别方法 Expired - Fee Related CN105005760B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510318830.3A CN105005760B (zh) 2015-06-11 2015-06-11 一种基于有限混合模型的行人再识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510318830.3A CN105005760B (zh) 2015-06-11 2015-06-11 一种基于有限混合模型的行人再识别方法

Publications (2)

Publication Number Publication Date
CN105005760A CN105005760A (zh) 2015-10-28
CN105005760B true CN105005760B (zh) 2018-04-24

Family

ID=54378425

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510318830.3A Expired - Fee Related CN105005760B (zh) 2015-06-11 2015-06-11 一种基于有限混合模型的行人再识别方法

Country Status (1)

Country Link
CN (1) CN105005760B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109446956A (zh) * 2018-10-17 2019-03-08 华东师范大学 一种行人再识别方法及设备

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106778633B (zh) * 2016-12-19 2020-07-07 江苏慧眼数据科技股份有限公司 一种基于区域分割的行人识别方法
WO2018122585A1 (zh) * 2016-12-30 2018-07-05 同济大学 一种基于浮动车数据的城市道路交通异常检测方法
CN107133601B (zh) * 2017-05-13 2021-03-23 五邑大学 一种基于生成式对抗网络图像超分辨率技术的行人再识别方法
CN107316031B (zh) * 2017-07-04 2020-07-10 北京大学深圳研究生院 用于行人重识别的图像特征提取方法
CN107944340B (zh) * 2017-10-25 2020-06-16 宁波大学 一种结合直接度量和间接度量的行人再识别方法
CN108182416A (zh) * 2017-12-30 2018-06-19 广州海昇计算机科技有限公司 一种无人机监控场景下的人体行为识别方法、系统及装置
CN108280411A (zh) * 2018-01-10 2018-07-13 上海交通大学 一种具有空间变换能力的行人搜索方法
CN108647618A (zh) * 2018-05-02 2018-10-12 深圳市唯特视科技有限公司 一种基于动态行人代理混合模型的轨迹语义分割方法
CN109214366B (zh) * 2018-10-24 2021-05-04 北京旷视科技有限公司 局部目标重识别方法、装置及系统
CN109671102B (zh) * 2018-12-03 2021-02-05 华中科技大学 一种基于深度特征融合卷积神经网络的综合式目标跟踪方法
CN111738143B (zh) * 2020-06-19 2022-04-19 重庆邮电大学 一种基于期望最大化的行人重识别方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101350099A (zh) * 2008-09-12 2009-01-21 西安电子科技大学 基于小波域隐马尔科夫树模型的图像分割方法
CN103793702A (zh) * 2014-02-28 2014-05-14 武汉大学 基于协同尺度学习的行人重识别方法
CN103839084A (zh) * 2014-03-12 2014-06-04 湖州师范学院 一种应用于行人再识别的多核支持向量机多示例学习算法
CN103984915A (zh) * 2014-02-28 2014-08-13 中国计量学院 一种监控视频中行人重识别方法
US8913791B2 (en) * 2013-03-28 2014-12-16 International Business Machines Corporation Automatically determining field of view overlap among multiple cameras
CN104268583A (zh) * 2014-09-16 2015-01-07 上海交通大学 基于颜色区域特征的行人重识别方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140169624A1 (en) * 2012-12-14 2014-06-19 Hyundai Motor Company Image based pedestrian sensing apparatus and method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101350099A (zh) * 2008-09-12 2009-01-21 西安电子科技大学 基于小波域隐马尔科夫树模型的图像分割方法
US8913791B2 (en) * 2013-03-28 2014-12-16 International Business Machines Corporation Automatically determining field of view overlap among multiple cameras
CN103793702A (zh) * 2014-02-28 2014-05-14 武汉大学 基于协同尺度学习的行人重识别方法
CN103984915A (zh) * 2014-02-28 2014-08-13 中国计量学院 一种监控视频中行人重识别方法
CN103839084A (zh) * 2014-03-12 2014-06-04 湖州师范学院 一种应用于行人再识别的多核支持向量机多示例学习算法
CN104268583A (zh) * 2014-09-16 2015-01-07 上海交通大学 基于颜色区域特征的行人重识别方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于李群的图像广义高斯特征结构分析研究;龚立宇;《中国博士学位论文全文数据库 信息科技辑》;20130715;I138-26,第37页-39页第4.2节，第39页第4.3节 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109446956A (zh) * 2018-10-17 2019-03-08 华东师范大学 一种行人再识别方法及设备
CN109446956B (zh) * 2018-10-17 2021-01-01 华东师范大学 一种行人再识别方法及设备

Also Published As

Publication number Publication date
CN105005760A (zh) 2015-10-28

Similar Documents

Publication Publication Date Title
CN105005760B (zh) 一种基于有限混合模型的行人再识别方法
Liu et al. Multiscale U-shaped CNN building instance extraction framework with edge constraint for high-spatial-resolution remote sensing imagery
CN102982341B (zh) 一种可跨摄像机的自适应人群密度估计方法
Alidoost et al. A CNN-based approach for automatic building detection and recognition of roof types using a single aerial image
CN108875600A (zh) 一种基于yolo的车辆信息检测和跟踪方法、装置及计算机存储介质
CN108596108B (zh) 基于三元组语义关系学习的航拍遥感图像变化检测方法
CN105809651B (zh) 基于边缘非相似性对比的图像显著性检测方法
JP6397379B2 (ja) 変化領域検出装置、方法、及びプログラム
CN105528575B (zh) 基于上下文推理的天空检测方法
CN106951830B (zh) 一种基于先验条件约束的图像场景多对象标记方法
Abdollahi et al. Extraction of road features from UAV images using a novel level set segmentation approach
CN109034035A (zh) 基于显著性检测和特征融合的行人重识别方法
Xu et al. Power line extraction from mobile LiDAR point clouds
CN113191204B (zh) 一种多尺度遮挡行人检测方法及系统
CN111881804A (zh) 基于联合训练的姿态估计模型训练方法、系统、介质及终端
CN111400572A (zh) 一种基于卷积神经网络实现图像特征识别的内容安全监测系统及其方法
Nice et al. Sky pixel detection in outdoor imagery using an adaptive algorithm and machine learning
US20230095533A1 (en) Enriched and discriminative convolutional neural network features for pedestrian re-identification and trajectory modeling
Raza et al. Framework for estimating distance and dimension attributes of pedestrians in real-time environments using monocular camera
Li et al. An aerial image segmentation approach based on enhanced multi-scale convolutional neural network
CN114358133B (zh) 一种基于语义辅助双目视觉slam检测回环帧的方法
Chen et al. Stingray detection of aerial images with region-based convolution neural network
CN116385660A (zh) 室内单视图场景语义重建方法及系统
Mubarak et al. Effect of Gaussian filtered images on Mask RCNN in detection and segmentation of potholes in smart cities
Praganingrum et al. Image Processing Applications in Construction Projects: Challenges and Opportunities

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information

Inventor after: Wang Tianjiang

Inventor after: Feng Ping

Inventor after: Chen Ying

Inventor after: Li Jinsheng

Inventor after: Wu Shannong

Inventor after: Feng Qi

Inventor after: Liu Fang

Inventor after: Wang Mingli

Inventor after: Gong Liyu

Inventor after: Shao Guangpu

Inventor before: Wang Tianjiang

Inventor before: Wu Shannong

Inventor before: Feng Qi

Inventor before: Liu Fang

Inventor before: Wang Mingli

Inventor before: Gong Liyu

Inventor before: Shao Guangpu

Inventor before: Feng Ping

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180424

CF01 Termination of patent right due to non-payment of annual fee