CN112699810B - 一种提升室内监控系统人物识别精度的方法及装置 - Google Patents
一种提升室内监控系统人物识别精度的方法及装置 Download PDFInfo
- Publication number
- CN112699810B CN112699810B CN202011637901.3A CN202011637901A CN112699810B CN 112699810 B CN112699810 B CN 112699810B CN 202011637901 A CN202011637901 A CN 202011637901A CN 112699810 B CN112699810 B CN 112699810B
- Authority
- CN
- China
- Prior art keywords
- person
- appearance
- face
- features
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 94
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000001514 detection method Methods 0.000 claims description 36
- 238000000605 extraction Methods 0.000 claims description 18
- 238000012545 processing Methods 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 abstract description 3
- 238000005516 engineering process Methods 0.000 description 8
- 230000001815 facial effect Effects 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
Abstract
本发明提供一种提升室内监控系统人物识别精度的方法及装置,方法包括:设置人脸特征库和外观特征库;对进入监控图像范围内的人物目标提取人脸特征和外观特征,并对人物目标进行识别;对出现在监控图像范围内其他位置的人物目标提取人脸特征和外观特征,并对人物目标进行识别;当监控图像范围内人数较多时,分别提取每个人物的人脸特征和外观特征,并对每个人物进行识别;当对监控图像范围内的人物无法提取人脸特征时,利用人物的外观特征进行检测识别。本发明能够显著提高监控系统人物识别的精度和性能,运行效率高,在提升系统性能的同时,并未增加系统的计算负担,易于部署、扩展和系统升级,可应用到办公场所、商场等智能视频监控系统中。
Description
技术领域
本发明属于智能视频监控技术领域,具体涉及一种提升室内监控系统人物识别精度的方法及装置。
背景技术
随着社会的不断发展,公共安全成为全社会的一个共同话题,与之相辅相成的视频监控系统也得到了大量普及。视频监控系统可以直观地再现目标场景,可作为重点人物和事件监控的强力辅助。在特定重点区域监控中,人物目标的识别和定位是极其关键的一步。在过去的很长一段时间内,监控系统中人物目标的识别是通过人工观察监控录像完成的,这种查找方法效率十分低下,同时造成了很大的资源浪费。
随着人工智能学科的兴起和蓬勃发展,以深度神经网络方法为代表的人工智能方法越来越多地被应用在各个领域中。在智能视频监控方面,人脸识别是一种较为成熟的解决方案。人脸识别是一种依据人的面部特征(如统计特征或几何特征等),自动进行身份鉴定的一种技术,它综合运用了数字图像处理/视频处理、模式识别等多种技术。
目前,人脸识别技术的四个环节分别为:
1.人脸检测:实现人脸自动提取采集,从视频的复杂背景中自动提取出人的面部图像。
2.人脸校准:对检测到的人脸进行姿态的矫正,以提高人脸识别的精度。
3.人脸确认:将提取出的人脸面部图像与指定的图像进行比对,判断两者是否为同一人。一般小型办公室的人脸打卡系统中就是采用的这种方法。
4.人脸鉴别:将提取的人脸图像与数据库中的存入的人脸进行比对,与环节3中使用的两两比对的方法相比,人脸鉴别在识别阶段更多地采用分类的方法,对进行了环节1和环节2后的图像进行分类。
但是,在实际应用场景中,视频监控系统很多时候无法捕捉到监控区域内所有人的人脸图像,或者因为相机角度问题导致人脸检测失败,因而,人们提出了跨设备行人重识别技术(Person Re-identification,Re-ID)。
跨设备行人重识别技术一般首先获取人物的视觉特征,区别于人脸特征,视觉特征需要从不受约束的环境中捕获的从数据中提取健壮而有区别的视觉描述符,在这些环境中,人们可能无法合作并且环境不受控制,最简单的特征就是外观特征,如颜色和纹理。然后,利用采集到的特征与特征库进行匹配,若匹配度大于某一预先设定阈值λ,则表示成功匹配。若采集的特征与特征库中已有的特征均无法匹配,则将该目标标记为新目标,并将其特征加入特征库。
实际应用中,例如在某单位内部监控系统或者商场视频监控中,当某些人物在监控盲点进行换装等行为,人物外部特征发生明显变化后,监控系统即无法准确识别人物目标。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一,提供一种提升室内监控系统人物识别精度的方法及装置。
本发明的一个方面,提供一种提升室内监控系统人物识别精度的方法,所述方法包括:
设置人脸特征库和外观特征库,所述人脸特征库包括预设的人脸特征,每个所述人脸特征对应所述外观特征库中的两组外观特征;
对进入监控图像范围内的人物目标提取人脸特征和外观特征,并对所述人物目标进行识别;
对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征,并对所述人物目标进行识别;
当监控图像范围内人数较多时,分别提取每个人物的人脸特征和外观特征,并对每个人物进行识别;
当对监控图像范围内的人物无法提取人脸特征时,利用人物的外观特征进行检测,以对监控图像范围内的人物进行识别。
在一些可选地实施方式中,所述对进入监控图像范围内的人物目标提取人脸特征和外观特征,并对所述人物目标进行识别,包括:
当所述人物目标进入监控图像范围内时,分别提取所述人物目标的所述人脸特征和所述外观特征;
将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理。
在一些可选地实施方式中,所述将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理,包括:
所述匹配结果为成功时,则正确识别到所述人物目标,并将所述人物目标的所述外观特征存入所述外观特征库;
所述匹配结果为失败时,则将所述人物目标标记为新人物,并将所述人物目标的所述人脸特征存入所述人脸特征库,将所述人物目标的所述外观特征存入所述外观特征库。
在一些可选地实施方式中,所述对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征,并对所述人物目标进行识别,包括:
对出现在监控图像范围内其他位置的所述人物目标,分别提取所述人脸特征和所述外观特征;
将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理。
在一些可选地实施方式中,所述将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理,包括:
所述匹配结果为成功时,则正确识别到所述人物目标,之后,将所述人物目标的外观特征与其所述人脸特征对应的所述外观特征库中的原始外观特征进行匹配,并根据匹配度分别进行处理;
若匹配度低于预设阈值,则将所述人物目标的外观特征存入所述外观特征库;
若匹配度高于预设阈值,则将所述外观特征库中的所述原始外观特征进行更新。
在一些可选地实施方式中,所述将所述外观特征库中的所述原始外观特征进行更新,包括:
采用以下两种方式进行更新:
其中,Vnew为更新后的外观特征,Vold为原始外观特征,Vpre为当前提取到的外观特征,n为更新次数,为更新系数,取值为0.9。
在一些可选地实施方式中,所述当监控图像范围内人数较多时,分别提取每个人物的人脸特征和外观特征,并对每个人物进行识别,包括:
当监控图像范围内人数较多时,计算每个人物的人脸检测框和外观特征检测框,当所述人脸检测框和所述外观特征检测框的交并比大于90%时,视为同一个人物的人脸检测框和外观特征检测框,并以此为基础提取每个人物的人脸特征和外观特征,并对每个人物进行识别。
本发明的另一个方面,提供一种提升室内监控系统人物识别精度的装置,所述装置包括:
人脸特征库,用于存储每个人物的人脸特征,所述人脸特征库包括预设的人脸特征;
外观特征库,用于存储所述每个人物的外观特征,其中,每个所述人脸特征对应两组外观特征;
提取模块,用于提取人物的人脸特征和外观特征;
识别模块,用于根据所述提取模块提取的所述人脸特征和所述外观特征对所述每个人物进行识别。
在一些可选地实施方式中,所述提取模块具体用于:
对进入监控图像范围内的人物目标提取人脸特征和外观特征;以及,
对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征;以及,
当监控图像范围内人数较多时,分别提取每个人物的人脸特征和外观特征;以及,
当对监控图像范围内的人物无法提取人脸特征时,提取人物的外观特征。
在一些可选地实施方式中,所述识别模块具体用于:
对进入监控图像范围内的人物目标进行识别;以及,
对出现在监控图像范围内其他位置的所述人物目标进行识别;以及,
当监控图像范围内人数较多时,分别对每个人物进行识别;以及,
当对监控图像范围内的人物无法提取人脸特征时,利用人物的外观特征进行检测,以对监控图像范围内的人物进行识别。
本发明的一种提升室内监控系统人物识别精度的方法及装置,通过人脸识别技术和行人重识别技术互补的方式,能够显著提高监控系统人物识别的精度和性能,运行效率高,在提升系统性能的同时,并未增加系统的计算负担,易于部署、扩展和系统升级,可应用到办公场所、商场等智能视频监控系统中。
附图说明
图1为本发明提供的一实施例的一种提升室内监控系统人物识别精度的方法的流程图;
图2为本发明提供的另一实施例的一种提升室内监控系统人物识别精度的方法的算法结构示意图;
图3为本发明提供的另一实施例的一种提升室内监控系统人物识别精度的装置的结构示意图。
具体实施方式
为使本领域技术人员更好地理解本发明的技术方案,下面结合附图和具体实施方式对本发明作进一步详细描述。
本发明的一个方面,提供一种提升室内监控系统人物识别精度的方法。
如图1所示,一种提升室内监控系统人物识别精度的方法S100,包括:
S110、设置人脸特征库和外观特征库,所述人脸特征库包括预设的人脸特征,每个所述人脸特征对应所述外观特征库中的两组外观特征。
示例性的,在本步骤中,可以分别设置人脸特征库以及外观特征库。其中,人脸特征库可以用来存储人脸特征信息,外观特征库可以用来存储外观特征信息。在人脸特征库中,可以根据现有信息存储部分预设的人脸特征。示例性的,对于人脸特征库里的每个人脸特征,可以对应外观特征库中的两组外观特征,比如,两组外观特征可以分别记为V1=<Q1,H1,Z1,Y1>、V2=<Q2,H2,Z2,Y2>。当然,本领域技术人员也可以根据实际需要进行设置,本实施例对此并不具体限制。
S120、对进入监控图像范围内的人物目标提取人脸特征和外观特征,并对所述人物目标进行识别。
示例性的,一并结合图2,在本步骤中,假设进入监控视频/图像范围内的人物目标为A,对A的人脸特征和外观特征进行提取,并对A进行识别。
需要说明的是,本实施例并不限制具体的提取方式,本领域技术人员可以采用传统特征提取、深度神经网络提取、人为设计特征提取等方式,也可以采用其他方式,本实施例对此并不限制。
优选的,步骤S120包括:
当所述人物目标进入监控图像范围内时,分别提取所述人物目标的所述人脸特征和所述外观特征。
示例性的,在本步骤中,当人物目标A进入监控图像范围内时,分别提取A的人脸特征和外观特征。本领域技术人员可以根据实际需要选择具体的提取方式,本实施例对此并不限制。
将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理。
示例性的,在本步骤中,将人物目标A的人脸特征与人脸特征库中预设的人脸特征进行匹配,并根据匹配结果分别进行处理。
优选的,所述匹配结果为成功时,则正确识别到所述人物目标,并将所述人物目标的所述外观特征存入所述外观特征库。
示例性的,在本步骤中,当匹配结果为成功时,则正确识别到人物目标A,并将人物目标A的外观特征存入与其人脸特征对应的外观特征库中。
优选的,所述匹配结果为失败时,则将所述人物目标标记为新人物,并将所述人物目标的所述人脸特征存入所述人脸特征库,将所述人物目标的所述外观特征存入所述外观特征库。
示例性的,在本步骤中,当匹配结果为失败时,则将人物目标A标记为新人物,并将人物目标A的人脸特征存入人脸特征库,将人物目标A的外观特征存入与其人脸特征对应的外观特征库中。
需要说明的是,本实施例并不限制具体的匹配方式,本领域技术人员可以根据实际需要进行选择,本实施例对此并不限制。
S130、对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征,并对所述人物目标进行识别。
优选的,对出现在监控图像范围内其他位置的所述人物目标,分别提取所述人脸特征和所述外观特征。
示例性的,在本步骤中,当人物目标A出现在监控图像范围内的其他位置时,分别提取A的人脸特征和外观特征。
优选的,将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理。
示例性的,一并结合图2,在本步骤中,将人物目标A的人脸特征与人脸特征库中预设的人脸特征进行匹配,并根据匹配结果分别进行处理。也就是说,在本步骤中,需要对人物目标A进行目标检测,并根据检测结果进行处理。
优选的,所述匹配结果为成功时,则正确识别到所述人物目标,之后,将所述人物目标的外观特征与其所述人脸特征对应的所述外观特征库中的原始外观特征进行匹配,并根据匹配度分别进行处理。
示例性的,在本步骤中,当匹配结果为成功时,则正确识别到人物目标A,之后,将人物目标A的外观特征与A的人脸特征对应的外观特征库中的原始外观特征进行匹配,并根据匹配度分别进行处理。
优选的,若匹配度低于预设阈值,则将所述人物目标的外观特征存入所述外观特征库。
示例性的,一并结合图2,在本步骤中,将预设阈值记为λ,当匹配度低于λ时,表明人物目标A的外观特征发生了明显变化,比如,可能A进行了换装等行为,此时,将提取到的人物目标A的外观特征存入外观特征库,使其与人物目标A在人脸特征库中的人脸特征相对应。也就是说,当匹配度低于阈值时,需要在外观特征库中的增加模板,以对人物目标A的外观特征进行存储。
优选的,若匹配度高于预设阈值,则将所述外观特征库中的原始外观特征进行更新。
示例性的,一并结合图2,在本步骤中,当匹配度高于预设阈值λ时,则将人物目标A的人脸特征对应的外观特征库中的原始外观特征进行更新。也就是说,当匹配度高于阈值时,需要在外观特征库中的更新模板,以对人物目标A的外观特征进行存储。
优选的,采用以下两种方式进行更新:
其中,Vnew为更新后的外观特征,Vold为原始外观特征,Vpre为当前提取到的外观特征,n为更新次数,为更新系数,取值一般为0.9。
S140、当监控图像范围内人数较多时,分别提取每个人物的人脸特征和外观特征,并对每个人物进行识别。
优选的,当监控图像范围内人数较多时,计算每个人物的人脸检测框和外观特征检测框,当所述人脸检测框和所述外观特征检测框的交并比大于90%时,视为同一个人物的人脸检测框和外观特征检测框,并以此为基础提取每个人物的人脸特征和外观特征,并对每个人物进行识别。
示例性的,在本步骤中,当监控图像范围内人数较多时,比如,当监控图像范围内有2人、3人、4人等多人时,分别计算每个人物的人脸检测框和外观特征检测框(即轮廓检测框),当人脸检测框和外观特征检测框的交并比IOU大于90%时,视为同一个人物的人脸检测框和外观特征检测框,并以此为基础提取每个人物的人脸特征和外观特征,并对每个人物进行识别。具体的提取过程和识别过程可以参考前述步骤,在此不再赘述。
S150、当对监控图像范围内的人物无法提取人脸特征时,利用人物的外观特征进行检测,以对监控图像范围内的人物进行识别。
示例性的,在本步骤中,当对监控图像范围内的人物无法提取人脸特征时,比如,监控图像范围内可能只有人物的背影,或者,某个人物对脸部进行了遮挡等等。此时,可以利用人物的外观特征进行检测,以对监控图像范围内的人物进行识别。在本实施例中,由于外观特征通过上述方法进行了更新和细化,使得本步骤中利用外部特征进行检测的检测精度也得到了提升。同时,本实施例的方法是利用人脸特征和外观特征进行人物识别的重要步骤,无论以何种方式(传统特征提取方式、深度神经网络提取特征方式、人为设计特征提取方式等)提取特征,均可使用本实施例的方法提升整体系统性能。
本实施例的一种提升室内监控系统人物识别精度的方法,通过人脸识别技术和行人重识别技术互补的方式,能够显著提高监控系统人物识别的精度和性能,运行效率高,在提升系统性能的同时,并未增加系统的计算负担,易于部署、扩展和系统升级,可应用到办公场所、商场等智能视频监控系统中。
本发明的另一个方面,如图3所示,提供一种提升室内监控系统人物识别精度的装置100。该装置100可以应用于前文记载的方法,下述装置中未提及的具体内容可以参考前文相关记载,在此不作赘述。所述装置100包括:
人脸特征库110,用于存储每个人物的人脸特征,所述人脸特征库包括预设的人脸特征。
外观特征库120,用于存储所述每个人物的外观特征,其中,每个所述人脸特征对应两组外观特征。
提取模块130,用于提取人物的人脸特征和外观特征。
识别模块140,用于根据所述提取模块提取的所述人脸特征和所述外观特征对所述每个人物进行识别。
本实施例的一种提升室内监控系统人物识别精度的装置,能够显著提高监控系统人物识别的精度和性能,运行效率高,在提升系统性能的同时,并未增加系统的计算负担,易于部署、扩展和系统升级,可应用到办公场所、商场等智能视频监控系统中。
优选的,所述提取模块130具体用于:
对进入监控图像范围内的人物目标提取人脸特征和外观特征;以及,
对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征;以及,
当监控图像范围内人数较多时,分别提取每个人物的人脸特征和外观特征;以及,
当对监控图像范围内的人物无法提取人脸特征时,提取人物的外观特征。
优选的,所述识别模块140具体用于:
对进入监控图像范围内的人物目标进行识别;以及,
对出现在监控图像范围内其他位置的所述人物目标进行识别;以及,
当监控图像范围内人数较多时,分别对每个人物进行识别;以及,
当对监控图像范围内的人物无法提取人脸特征时,利用人物的外观特征进行检测,以对监控图像范围内的人物进行识别。
可以理解的是,以上实施方式仅仅是为了说明本发明的原理而采用的示例性实施方式,然而本发明并不局限于此。对于本领域内的普通技术人员而言,在不脱离本发明的精神和实质的情况下,可以做出各种变型和改进,这些变型和改进也视为本发明的保护范围。
Claims (6)
1.一种提升室内监控系统人物识别精度的方法,其特征在于,所述方法包括:
设置人脸特征库和外观特征库,所述人脸特征库包括预设的人脸特征,每个所述人脸特征对应所述外观特征库中的两组外观特征;
对进入监控图像范围内的人物目标提取人脸特征和外观特征,并对所述人物目标进行识别;
对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征,并对所述人物目标进行识别;
当监控图像范围内人数大于等于2人时,分别提取每个人物的人脸特征和外观特征,并对每个人物进行识别;
当对监控图像范围内的人物无法提取人脸特征时,利用人物的外观特征进行检测,以对监控图像范围内的人物进行识别;
所述对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征,并对所述人物目标进行识别,包括:
对出现在监控图像范围内其他位置的所述人物目标,分别提取所述人脸特征和所述外观特征;
将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理;
所述将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理,包括:
所述匹配结果为成功时,则正确识别到所述人物目标,之后,将所述人物目标的外观特征与其所述人脸特征对应的所述外观特征库中的原始外观特征进行匹配,并根据匹配度分别进行处理;
若匹配度低于预设阈值,则将所述人物目标的外观特征存入所述外观特征库;
若匹配度高于预设阈值,则将所述外观特征库中的所述原始外观特征进行更新。
2.根据权利要求1所述的方法,其特征在于,所述对进入监控图像范围内的人物目标提取人脸特征和外观特征,并对所述人物目标进行识别,包括:
当所述人物目标进入监控图像范围内时,分别提取所述人物目标的所述人脸特征和所述外观特征;
将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理。
3.根据权利要求2所述的方法,其特征在于,所述将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理,包括:
所述匹配结果为成功时,则正确识别到所述人物目标,并将所述人物目标的所述外观特征存入所述外观特征库;
所述匹配结果为失败时,则将所述人物目标标记为新人物,并将所述人物目标的所述人脸特征存入所述人脸特征库,将所述人物目标的所述外观特征存入所述外观特征库。
4.根据权利要求1所述的方法,其特征在于,所述将所述外观特征库中的所述原始外观特征进行更新,包括:
采用以下两种方式进行更新:
其中,Vnew为更新后的外观特征,Vold为原始外观特征,Vpre为当前提取到的外观特征,n为更新次数,为更新系数,取值为0.9。
5.根据权利要求1所述的方法,其特征在于,所述当监控图像范围内人数大于等于2人时,分别提取每个人物的人脸特征和外观特征,并对每个人物进行识别,包括:
当监控图像范围内人数大于等于2人时,计算每个人物的人脸检测框和外观特征检测框,当所述人脸检测框和所述外观特征检测框的交并比大于90%时,视为同一个人物的人脸检测框和外观特征检测框,并以此为基础提取每个人物的人脸特征和外观特征,并对每个人物进行识别。
6.一种提升室内监控系统人物识别精度的装置,所述装置包括:
人脸特征库,用于存储每个人物的人脸特征,所述人脸特征库包括预设的人脸特征;
外观特征库,用于存储所述每个人物的外观特征,其中,每个所述人脸特征对应两组外观特征;
提取模块,用于提取人物的人脸特征和外观特征;
识别模块,用于根据所述提取模块提取的所述人脸特征和所述外观特征对所述每个人物进行识别;
所述提取模块具体用于:
对进入监控图像范围内的人物目标提取人脸特征和外观特征;以及,
对出现在监控图像范围内其他位置的所述人物目标提取人脸特征和外观特征;以及,
当监控图像范围内人数大于等于2人时,分别提取每个人物的人脸特征和外观特征;以及,
当对监控图像范围内的人物无法提取人脸特征时,提取人物的外观特征;
所述识别模块具体用于:
对进入监控图像范围内的人物目标进行识别;以及,
对出现在监控图像范围内其他位置的所述人物目标进行识别;以及,
当监控图像范围内人数大于等于2人时,分别对每个人物进行识别;以及,
当对监控图像范围内的人物无法提取人脸特征时,利用人物的外观特征进行检测,以对监控图像范围内的人物进行识别;
所述提取模块具体用于对出现在监控图像范围内其他位置的所述人物目标,分别提取所述人脸特征和所述外观特征;
所述识别模块具体用于对出现在监控图像范围内其他位置的所述人物目标进行识别,包括:
所述识别模块具体用于将所述人物目标的所述人脸特征与所述预设的人脸特征进行匹配,并根据匹配结果分别进行处理,包括:
所述识别模块具体用于:
所述匹配结果为成功时,则正确识别到所述人物目标,之后,将所述人物目标的外观特征与其所述人脸特征对应的所述外观特征库中的原始外观特征进行匹配,并根据匹配度分别进行处理;
若匹配度低于预设阈值,则将所述人物目标的外观特征存入所述外观特征库;
若匹配度高于预设阈值,则将所述外观特征库中的所述原始外观特征进行更新。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011637901.3A CN112699810B (zh) | 2020-12-31 | 2020-12-31 | 一种提升室内监控系统人物识别精度的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011637901.3A CN112699810B (zh) | 2020-12-31 | 2020-12-31 | 一种提升室内监控系统人物识别精度的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112699810A CN112699810A (zh) | 2021-04-23 |
CN112699810B true CN112699810B (zh) | 2024-04-09 |
Family
ID=75513948
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011637901.3A Active CN112699810B (zh) | 2020-12-31 | 2020-12-31 | 一种提升室内监控系统人物识别精度的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112699810B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115083004B (zh) * | 2022-08-23 | 2022-11-22 | 浙江大华技术股份有限公司 | 一种身份识别方法、装置和计算机可读存储介质 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102938065A (zh) * | 2012-11-28 | 2013-02-20 | 北京旷视科技有限公司 | 基于大规模图像数据的人脸特征提取方法及人脸识别方法 |
WO2018133666A1 (zh) * | 2017-01-17 | 2018-07-26 | 腾讯科技(深圳)有限公司 | 视频目标跟踪方法和装置 |
CN109255286A (zh) * | 2018-07-21 | 2019-01-22 | 哈尔滨工业大学 | 一种基于yolo深度学习网络框架的无人机光学快速检测识别方法 |
CN109344787A (zh) * | 2018-10-15 | 2019-02-15 | 浙江工业大学 | 一种基于人脸识别与行人重识别的特定目标跟踪方法 |
CN109934176A (zh) * | 2019-03-15 | 2019-06-25 | 艾特城信息科技有限公司 | 行人识别系统、识别方法及计算机可读存储介质 |
CN110427905A (zh) * | 2019-08-08 | 2019-11-08 | 北京百度网讯科技有限公司 | 行人跟踪方法、装置以及终端 |
CN110609920A (zh) * | 2019-08-05 | 2019-12-24 | 华中科技大学 | 一种视频监控场景下的行人混合搜索方法及系统 |
CN110717414A (zh) * | 2019-09-24 | 2020-01-21 | 青岛海信网络科技股份有限公司 | 一种目标检测追踪方法、装置及设备 |
KR20200029659A (ko) * | 2018-09-06 | 2020-03-19 | 포항공과대학교 산학협력단 | 얼굴 인식 방법 및 장치 |
CN110929695A (zh) * | 2019-12-12 | 2020-03-27 | 易诚高科(大连)科技有限公司 | 一种人脸识别和行人重识别关联方法 |
WO2020108075A1 (zh) * | 2018-11-29 | 2020-06-04 | 上海交通大学 | 结合人脸与外观的两阶段行人搜索方法 |
CN111553234A (zh) * | 2020-04-22 | 2020-08-18 | 上海锘科智能科技有限公司 | 融合人脸特征与Re-ID特征排序的行人跟踪方法及装置 |
CN111709303A (zh) * | 2020-05-21 | 2020-09-25 | 北京明略软件系统有限公司 | 一种人脸图像的识别方法和装置 |
CN111881866A (zh) * | 2020-08-03 | 2020-11-03 | 杭州云栖智慧视通科技有限公司 | 一种实时人脸抓取推荐方法、装置及计算机设备 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7689011B2 (en) * | 2006-09-26 | 2010-03-30 | Hewlett-Packard Development Company, L.P. | Extracting features from face regions and auxiliary identification regions of images for person recognition and other applications |
EP3610410A1 (en) * | 2017-04-14 | 2020-02-19 | Koninklijke Philips N.V. | Person identification systems and methods |
CN109753920B (zh) * | 2018-12-29 | 2021-09-17 | 深圳市商汤科技有限公司 | 一种行人识别方法及装置 |
-
2020
- 2020-12-31 CN CN202011637901.3A patent/CN112699810B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102938065A (zh) * | 2012-11-28 | 2013-02-20 | 北京旷视科技有限公司 | 基于大规模图像数据的人脸特征提取方法及人脸识别方法 |
WO2018133666A1 (zh) * | 2017-01-17 | 2018-07-26 | 腾讯科技(深圳)有限公司 | 视频目标跟踪方法和装置 |
CN109255286A (zh) * | 2018-07-21 | 2019-01-22 | 哈尔滨工业大学 | 一种基于yolo深度学习网络框架的无人机光学快速检测识别方法 |
KR20200029659A (ko) * | 2018-09-06 | 2020-03-19 | 포항공과대학교 산학협력단 | 얼굴 인식 방법 및 장치 |
CN109344787A (zh) * | 2018-10-15 | 2019-02-15 | 浙江工业大学 | 一种基于人脸识别与行人重识别的特定目标跟踪方法 |
WO2020108075A1 (zh) * | 2018-11-29 | 2020-06-04 | 上海交通大学 | 结合人脸与外观的两阶段行人搜索方法 |
CN109934176A (zh) * | 2019-03-15 | 2019-06-25 | 艾特城信息科技有限公司 | 行人识别系统、识别方法及计算机可读存储介质 |
CN110609920A (zh) * | 2019-08-05 | 2019-12-24 | 华中科技大学 | 一种视频监控场景下的行人混合搜索方法及系统 |
CN110427905A (zh) * | 2019-08-08 | 2019-11-08 | 北京百度网讯科技有限公司 | 行人跟踪方法、装置以及终端 |
CN110717414A (zh) * | 2019-09-24 | 2020-01-21 | 青岛海信网络科技股份有限公司 | 一种目标检测追踪方法、装置及设备 |
CN110929695A (zh) * | 2019-12-12 | 2020-03-27 | 易诚高科(大连)科技有限公司 | 一种人脸识别和行人重识别关联方法 |
CN111553234A (zh) * | 2020-04-22 | 2020-08-18 | 上海锘科智能科技有限公司 | 融合人脸特征与Re-ID特征排序的行人跟踪方法及装置 |
CN111709303A (zh) * | 2020-05-21 | 2020-09-25 | 北京明略软件系统有限公司 | 一种人脸图像的识别方法和装置 |
CN111881866A (zh) * | 2020-08-03 | 2020-11-03 | 杭州云栖智慧视通科技有限公司 | 一种实时人脸抓取推荐方法、装置及计算机设备 |
Non-Patent Citations (2)
Title |
---|
Person re-identification by symmetry-driven accumulation of local features;M. Farenzena et al;《2010 IEEE Computer Society Conference on Computer Vision and Pattern Recognition》;第2360-2367页 * |
基于特征融合的目标动态身份识别方法;黄玳 等;《电视技术》;第44卷(第06期);第6-10+38页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112699810A (zh) | 2021-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109961051B (zh) | 一种基于聚类和分块特征提取的行人重识别方法 | |
US8135220B2 (en) | Face recognition system and method based on adaptive learning | |
JP4479478B2 (ja) | パターン認識方法および装置 | |
CN111144366A (zh) | 一种基于联合人脸质量评估的陌生人脸聚类方法 | |
CN108090406B (zh) | 人脸识别方法及系统 | |
EP1835462A1 (en) | Tracing device, and tracing method | |
CN110414376B (zh) | 更新人脸识别模型的方法、人脸识别相机及服务器 | |
CN101887518B (zh) | 人体检测装置与方法 | |
CN110096945B (zh) | 基于机器学习的室内监控视频关键帧实时提取方法 | |
CN110826390A (zh) | 一种基于人脸矢量特征的视频数据处理方法 | |
CN112434638A (zh) | 一种人脸面部表情识别分类与分析系统 | |
CN110321801B (zh) | 一种基于自编码网络的换衣行人重识别方法及系统 | |
CN112699810B (zh) | 一种提升室内监控系统人物识别精度的方法及装置 | |
JP2015204030A (ja) | 認識装置及び認識方法 | |
CN109859112B (zh) | 一种实现人脸补全的方法及系统 | |
CN111598144A (zh) | 图像识别模型的训练方法和装置 | |
CN114863337A (zh) | 一种新型屏幕防拍照识别方法 | |
CN112418055A (zh) | 一种基于视频分析的调度方法及人员轨迹追踪方法 | |
KR20070097636A (ko) | 조명 변화에 강인한 얼굴 검출 방법 | |
KR20200094844A (ko) | 딥러닝을 이용한 얼굴 인식 장치 및 그것의 동작 방법 | |
CN112001254B (zh) | 一种行人识别的方法及相关装置 | |
CN116156149B (zh) | 一种用于检测摄像头移动的检测方法及装置 | |
Pathak | A Review on Face Recognition | |
Cheng et al. | Mitigating the effects of variable illumination for tracking across disjoint camera views | |
Le et al. | Face identification system using single hidden markov model and single sample image per person |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |