CN108875527A - 行人识别系统、方法和监控系统 - Google Patents

行人识别系统、方法和监控系统 Download PDF

Info

Publication number
CN108875527A
CN108875527A CN201810012112.7A CN201810012112A CN108875527A CN 108875527 A CN108875527 A CN 108875527A CN 201810012112 A CN201810012112 A CN 201810012112A CN 108875527 A CN108875527 A CN 108875527A
Authority
CN
China
Prior art keywords
photo
pedestrian
certificate
identified
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810012112.7A
Other languages
English (en)
Inventor
丁敬峰
付运旭
宋灵建
余振兴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Megvii Technology Co Ltd
Original Assignee
Beijing Megvii Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Megvii Technology Co Ltd filed Critical Beijing Megvii Technology Co Ltd
Priority to CN201810012112.7A priority Critical patent/CN108875527A/zh
Publication of CN108875527A publication Critical patent/CN108875527A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明公开了一种行人识别系统、方法和监控系统。该行人识别系统包括:读卡器,用于读取行人所携带的证件,以获取证件中存储的照片;与读卡器之间的距离小于距离阈值的摄像装置,用于以第一频率采集行人的照片并输出待识别照片,其中待识别照片是所采集的行人的照片或对所采集的行人的照片进行处理之后的照片;以及与读卡器和摄像装置连接的核验装置,用于根据证件中存储的照片的获取时刻,从待识别照片中确定待比对照片,并且根据待比对照片和证件中存储的照片核验行人身份。上述方案,无需待识别人的主动配合即可顺利完成行人核验。摄像装置无需诸如红外触发装置等的复杂的结构,隐蔽性强,降低了系统的成本;还确保了行人核验的准确性。

Description

行人识别系统、方法和监控系统
技术领域
本发明涉及模式识别领域,具体涉及一种行人识别系统、方法以及监控系统。
背景技术
随着平安城市建设的不断推进,人工智能系统在安防领域的监控点位越来越多。监控点位的规模已经从最初的几千条路,到几万条路,甚至于到现在的几十万条路。由各个监控点位所生成的视频产生海量的数据。与此同时,随着高清视频、智能分析、云计算和大数据等相关技术的发展,安防工作正在从传统的被动防御向主动判断、预警发展。人工智能系统的应用也从单一的安全领域,向多行业应用、提升生产效率、提高生活智能化程度的方向发展,为更多的行业和人群提供可视化、智能化解决方案。
人工智能系统在安防领域的应用有着非常好的前景,但目前技术上还较薄弱,在应用过程中还有较多问题需要完善和解决。
射频识别(RFID)是一种无线通信技术,可以通过无线电信号识别特定目标并读写相关数据,而无需识别系统与特定目标之间建立机械或者光学接触。但是RFID本身仅能够识别特定目标,例如行人所携带的IC卡,但无法识别行人本身。
因此,目前通过射频识别技术无法确定行人是否为IC卡的合法持有者。
发明内容
鉴于上述问题,提出了本发明以便提供一种至少部分地解决上述问题的行人识别系统和方法。
根据本发明一个方面,提供了一种行人识别系统,包括:
读卡器,用于读取行人所携带的证件,以获取所述证件中存储的照片;
与所述读卡器之间的距离小于距离阈值的摄像装置,用于以第一频率采集行人的照片并输出待识别照片,其中所述待识别照片是所采集的行人的照片或对所述所采集的行人的照片进行处理之后的照片;以及
与所述读卡器和所述摄像装置连接的核验装置,用于根据所述证件中存储的照片的获取时刻,从所述待识别照片中确定待比对照片,并且根据所述待比对照片和所述证件中存储的照片核验行人身份。
示例性地,所述读卡器包括外置天线。
示例性地,所述读卡器的数目是一个,并且所述外置天线的数目是多个,多个所述外置天线分别设置于不同位置。
示例性地,所述读卡器的数目是多个,并且多个所述读卡器分别设置于不同位置。
示例性地,所述多个读卡器以第二频率交替工作。
示例性地,对于所述待识别照片是对所述所采集的行人的照片进行处理之后的照片的情况,所述摄像装置还用于:
检测所述所采集的行人的照片中的人脸,以获得所述待识别照片,所述待识别照片为所述所采集的行人的照片中的人脸检测框内的图像;
所述核验装置具体用于:
在所述待识别照片中确定至少部分待识别照片为所述待比对照片,其中所述至少部分待识别照片所来自的行人的照片是第一时段采集的,所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
示例性地,对于所述待识别照片是所采集的行人的照片的情况,所述核验装置具体用于:
在所述待识别照片中确定在第一时段采集的待识别照片为所述待比对照片,其中所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述待比对照片中的人脸和所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
示例性地,所述核验装置集成在所述摄像装置内部。
示例性地,所述系统还包括与所述核验装置连接的存储器,用于存储所述核验装置的核验结果。
示例性地,所述核验装置是服务器。
根据本发明另一方面,还提供了一种行人识别方法,包括:
步骤S100,由读卡器读取行人所携带的证件,以获取所述证件中存储的照片;
步骤S200,由与所述读卡器之间的距离小于距离阈值的摄像装置以第一频率采集行人的照片并输出待识别照片,其中所述待识别照片是所采集的行人的照片或对所述所采集的行人的照片进行处理之后的照片;以及
步骤S300,根据所述证件中存储的照片的获取时刻,从所述待识别照片中确定待比对照片,并且根据所述待比对照片和所述证件中存储的照片核验行人身份。
示例性地,对于所述待识别照片是对所述所采集的行人的照片进行处理之后的照片的情况,所述步骤S200进一步包括:
检测所述所采集的行人的照片中的人脸,以获得所述待识别照片,所述待识别照片为所述所采集的行人的照片中人脸检测框内的图像;
所述步骤S300进一步包括:
在所述待识别照片中确定至少部分待识别照片为所述待比对照片,其中所述至少部分待识别照片所来自的行人的照片是第一时段采集的,所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
示例性地,对于所述待识别照片是所采集的行人的照片的情况,所述步骤S300进一步包括:
在所述待识别照片中确定在第一时段采集的待识别照片为所述待比对照片,其中所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述待比对照片中的人脸和所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
根据本发明再一方面,还提供了一种监控系统,包括上述行人识别系统。
本发明所提供的上述行人识别系统和方法,有利地利用了地理距离较近的读卡器和摄像装置来获取行人的数据,以进行行人身份的核验。与现有技术相比,上述系统和方法进行行人核验的过程无需待识别人的主动配合即可顺利完成。此外,上述技术方案中,根据读卡器获取行人证件中存储的照片的时刻确定摄像装置所获取的待比对照片,因此该摄像装置无需采用诸如红外触发装置等的任何复杂的结构,隐蔽性更强,降低了系统的成本;还保证了待比对照片中的人脸的质量,进而确保了行人核验的准确性。
利用上述行人识别系统和方法的监控系统,1.无需待识别人的主动配合;2.结构简单,从而成本更低;3.隐蔽性强;4.所获得的行人核验结果准确。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明一个实施例的行人识别系统的示意性框图;
图2示出了根据本发明一个实施例的核验装置进行行人核验的示意性流程图;
图3示出了根据本发明一个实施例的行人识别系统的示意图;
图4示出了根据本发明另一个实施例的行人识别系统的示意图;以及
图5示出了根据本发明一个实施例的行人识别方法的流程图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一个实施例的行人识别系统100的示意性框图。该行人识别系统100可以设置在任何地点,尤其是具有狭窄通道的地点。该狭窄通道的宽度例如小于或等于70厘米。这样的地点具体例如电梯口、限流通道、任何门和闸机的位置处。如图1所示,该行人识别系统100包括读卡器110、摄像装置120和核验装置130。
读卡器110用于读取行人所携带的证件,以获取所述证件中存储的照片。可以理解,证件可以是任意存储有该证件的合法持有者的标识信息的卡片、在其内部集成有芯片的纸张或本子等的各种信息载体。其中证件的合法持有者的标识信息中包括合法持有者本人的脸部照片。证件的合法持有者的标识信息中还可以包括合法持有者的其他信息,例如姓名、出生日期、性别等。此外,证件中还可以存储有证件本身的信息,例如证件的有效期等。照片可以未印刷于证件的表面,而仅仅存储在证件内;照片还可以印刷于证件的表面,从而便于查看。证件可以是例如IC卡的形式,具体例如中华人民共和国居民身份证。
读卡器110是能够进行非接触式点对点数据传输的通信设备。例如,各种可以用于近场通信的读卡器。在一个示例中,读卡器110基于RFID技术读取行人所携带的证件,以获取证件中所存储的照片。
本领域普通技术人员可以理解,读卡器110的读取过程可以是当行人靠近行人识别系统100时实时进行的,无需行人主动配合。该读取过程耗用时间非常短暂,可以瞬时完成。读卡器110读取证件的技术可以利用当前已知的技术或任何未来实现的相关技术,本领域普通技术人员可以理解其过程,进而理解读卡器110的构成。这里并不对其具体实现进行任何限制。
摄像装置120设置在与读卡器110之间的距离小于特定距离阈值的位置处,其用于以特定频率采集行人的照片并输出待识别照片,其中所述待识别照片是所采集的行人的照片或对所采集到的行人的照片进行处理之后的照片。
摄像装置120与读卡器110之间的距离可以根据行人识别系统100所设置的场景来确定。例如,在行人识别系统100设置在电梯口的情况下,摄像装置120可以与读卡器110设置在相同位置处。又例如,在行人识别系统100设置在限流通道的情况下,读卡器110可以设置在该限流通道的入口处,摄像装置120可以设置在该限流通道的出口处,并且朝向入口的方向。例如,摄像装置120的采集操作可以是行人靠近时实时进行的。又例如,只要摄像装置120处于工作状态,那么该摄像装置120即以特定频率采集其摄像区域内的照片,无论该摄像区域内是否有行人出现。该特定频率例如20帧/秒。因为摄像装置120与读卡器110之间距离较近,所以可以大概率地保证摄像装置120所拍摄到的行人是读卡器110所读取的证件的携带者。由此,保证行人核验的顺利进行。
可以理解,每个行人的外貌都有其各自唯一的特点。例如,每个人的面部长相不同,由此,每个行人的人脸图像都具有该行人特有的特征。摄像装置120所采集的行人的照片可以用于进行行人核验。
在一个示例中,摄像装置120在采集了行人的照片之后,将所采集的行人的照片作为待识别图像输出。在另一个示例中,摄像装置120还可以对所采集的行人的照片进行处理,例如图像去噪、人脸检测、归一化等。将经处理的行人的照片作为待识别照片进行输出。
在一个示例中,摄像装置120的采集操作无需特殊的触发装置,如红外检测装置等,即可获得证件的携带者的照片,以用于利用证件中存储的照片和采集到的照片二者进行行人核验。这样,一方面,摄像装置120结构更简单,成本较低廉。另一方面,因为无特殊的触发装置,所以摄像装置120无需暴露出来,隐蔽性更强。进而,显著降低了行人识别系统100的复杂度和成本,增强了行人识别系统100的隐蔽性。
核验装置130与读卡器110和摄像装置120相连接。核验装置130用于从读卡器110接收其所获取的证件中存储的照片,还用于从摄像装置120接收待识别照片。读卡器110和摄像装置120可以以有线或无线方式分别连接到核验装置130。核验装置130可以是独立的服务器。独立的服务器处理能力强大,能够保证行人识别系统100的功能实现。核验装置130还可以集成在摄像装置120内部,例如集成在摄像装置120的壳体内,以简化行人识别系统并降低其成本。行人识别系统100还可以包括与核验装置130连接的存储器(未示出)。存储器可以存储大量的来自核验装置130的核验结果,便于用户查看和检索。该存储器可以用服务器或任意计算机可读存储介质实现。
在一个示例中,读卡器110获取到证件中存储的照片之后,将该照片以及该照片的获取时刻发送给核验装置130。核验装置130还用于根据该证件中存储的照片的获取时刻,从待识别照片中确定待比对照片,并且根据该待比对照片和该证件中存储的照片核验行人身份,以确定行人是否为其所携带证件的合法持有者。
在一些实施例中,核验装置130还可以与电梯、限流通道、门禁系统或闸机等的控制装置连接,核验装置130可以将行人身份的核验结果发送给控制装置,控制装置可以根据核验结果执行相应的控制操作。例如,如果核验结果指示该行人不是其所携带证件的合法持有者,则控制装置可以控制发送器向工作人员发送报警信号,或控制报警器发出声音报警,或控制电梯门、限流通道门、门禁或闸机等处于关闭状态;如果核验装置指示该行人是其所携带证件的合法持有者,则控制装置可以控制电梯门、限流通道门、门禁或闸机等处于打开状态。
如前所述,读卡器110与摄像装置120的距离较近,由此,虽然二者获取照片的方式不同,但是二者获取同一行人的照片的时间也会比较接近。在读卡器110获取行人所携带的证件中存储的照片的时刻前后,摄像装置120所采集的照片中大概率地包括该行人。否则,摄像装置120所采集的照片中可能不包括该行人。核验装置130根据读卡器110获取行人所携带的证件中存储的照片的时刻,从来自摄像装置120的待识别照片中确定可能包括该行人的照片,即待比对照片。
核验装置130还用于根据其确定的待比对照片和证件中存储的照片核验行人的身份。核验装置130可以从待比对照片和证件中存储的照片中分别提取行人的面部特征信息,并对所提取的面部特征进行比较,以确定其相似度。所述面部特征例如是人脸的诸如眼睛、鼻子、嘴角等关键点的位置特征。基于所确定的相似度来确定摄像装置120所拍摄的行人和其携带的证件上所涉及的行人是否为同一人。当相似度大于预设相似度阈值时,核验装置130确定摄像装置120所拍摄的行人与其携带的证件上的行人是同一人;否则,反之。
上述行人识别系统100有利地利用了地理距离较近的读卡器110和摄像装置120来获取行人的数据,以进行行人身份的核验。与现有技术相比,上述系统和方法进行行人核验的过程无需待识别人的主动配合即可顺利完成。此外,该行人识别系统100中,根据读卡器110获取行人证件中存储的照片的时刻确定摄像装置120所获取的待比对照片。因此,摄像装置120无需采用诸如红外触发装置等的任何复杂的结构,隐蔽性更强,降低了行人识别系统100的成本;还保证了待比对照片中的人脸的质量,进而确保了行人核验的准确性。
如前所述,上述行人识别系统中的摄像装置120可以在采集了行人的照片后,对该行人的照片进行处理,然后将经处理的行人的照片作为待识别照片输出。这里,摄像装置120可以是结构化摄像头,例如人脸抓拍摄像头。在这种情况中,摄像装置120还可以用于检测所采集的行人的照片中的人脸,以获得待识别照片,该待识别照片是所述所采集的行人的照片中人脸检测框内的图像。人脸检测框用于标识所采集的照片中的人脸区域,即所检测的人脸。具体地,摄像装置120可以检测所采集的行人的照片中人脸,获得一个或多个人脸检测框。将所采集的行人的照片中、在该人脸检测框内部的图像作为待识别图像输出。根据所采集的行人的照片中呈现的人脸个数,从一个所采集的行人的照片可以获得一个或多个待识别图像。可选地,利用其采集的一系列行人的照片,摄像装置120还可以针对所检测的人脸检测框进行人脸跟踪,从而针对每个行人筛选出人脸质量最佳的人脸检测框。例如,在此人脸检测框中,人脸呈现为正脸且其中的各个特征(眼角、嘴角、鼻子等)清晰。摄像装置120可以针对每个行人将这些质量最佳的人脸检测框中的图像作为待识别图像输出。
在上述情况中,核验装置130可以具体按照以下步骤进行行人核验。图2示出了根据本发明一个实施例的核验装置130进行行人核验的示意性流程图。
首先,在自摄像装置120接收的全部待识别照片中确定其中的至少部分待识别照片为待比对照片。可以理解,每个待识别照片是摄像装置120对其采集的行人的照片进行人脸检测后,从其采集的行人的照片中提取出来的。对于这里所确定的待比对照片,其所来自的行人的照片是在第一时段内采集的,所述第一时段是[t-Δt,t+Δt],t表示证件中存储的照片的获取时刻,Δt表示预定时间间隔。换言之,第一时段内的每个时刻与证件中存储的照片的获取时刻之间的时间间隔小于预定时间间隔Δt。该预定时间间隔Δt可以是数秒,例如1秒或2秒。由此,将在获取证件中存储的照片的时刻前后采集的照片用于行人核验。可选地,根据摄像装置120的设置位置,可以将该第一时段确定为[t,t+Δt]。可以理解,根据摄像装置120的采集照片的频率和上述预定时间间隔Δt,此步骤中可能确定了一个或多个待比对照片。
然后,检测证件中存储的照片中的人脸。这里可以采用任何现在已知的或未来研发的人脸检测技术,对此不做限制。
再后,确定待比对照片中的人脸与证件中存储的照片中的人脸之间的相似度。可以分别提取每个待比对照片中的人脸的特征。为了描述方便,将该特征简称为第一特征。同样,提取证件中存储的照片中的人脸的特征,为了描述方便,将该特征简称为第二特征。分别计算所有第一特征和第二特征的相似度,以作为人脸之间的相似度。
最后,根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与证件中存储的照片中的人脸是否属于同一行人。当该最高相似度大于预设相似度阈值时,核验装置130确定该最高相似度对应的行人与证件上的行人是同一人;否则,反之。应理解,在确定了一个待比对照片的情况下,该最高相似度即为该待比对照片中的人脸与证件中存储的照片中的人脸之间的相似度。在确定了多个待比对照片的情况下,该最高相似度为该多个待比对照片中的人脸分别与证件中存储的照片中的人脸之间的相似度中取值最大的相似度。
在上述实施例中,直接利用结构化摄像机来进行人脸检测,保证了人脸检测的质量,进而保证了行人识别系统100的人证核验。此外,由于结构化摄像机将采集到的图像中人脸检测框内的图像作为待识别图像传输给核验装置,所以减少了行人识别系统100内部的数据通信量。最后,行人识别系统100可以适用于可能同时出现多个行人的场景,例如限流通道。行人识别系统100自动识别了多个行人中与证件中的照片最匹配的行人,并将该最匹配的行人与证件进行核验。由此,提高了系统的适应广度。
根据本发明另一个实施例,行人识别系统中的摄像装置120可以直接将所采集的行人的照片作为待识别照片输出给核验装置130。核验装置130具体根据以下步骤进行行人核验。
首先,在来自摄像装置120的待识别照片(即所采集的行人的照片)中确定在第一时段采集的行人的照片为前述待比对照片,其中所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔。该预定时间间隔Δt可以是数秒,例如1秒或2秒。由此,将在获取证件中存储的照片的时刻前后采集的照片用于行人核验。可选地,根据摄像装置120的设置位置,可以将该第一时段确定为[t,t+Δt]。可以理解,根据摄像装置120的采集照片的频率和上述预定时间间隔Δt,此步骤中可能确定了1个或多个待比对照片。
然后,检测待比对照片中的人脸和证件中存储的照片中的人脸。可以理解,每个待比对照片中可能包括多个人脸。例如,可能在摄像装置120的摄像区域中,同时出现了多个行人。在此步骤中,检测待比对照片中的所有人脸。这里可以采用任何现在已知的或未来研发的人脸检测技术,对此不做限制。
再后,确定待比对照片中的人脸与证件中存储的照片中的人脸之间的相似度。可以分别提取每个待比对照片中的每个人脸的特征。为了描述方便,将该特征简称为第一特征。同样,提取证件中存储的照片中的人脸的特征,为了描述方便,将该特征简称为第二特征。分别计算所有第一特征和第二特征的相似度,以作为相应的人脸之间的相似度。
可选地,对于核验装置130确定了多个待比对照片的情况,核验装置130具体用于执行以下操作:
1)分别提取每个待比对照片中的每个人脸的特征。
2)根据所提取的特征之间的相似度,将所提取的特征分类为属于不同行人的人脸特征组。该操作可以采用聚类的方法实现。在一个示例中,在待比对照片Ph1中,包括两个行人;在待比对照片Ph2中,包括三个行人;在待比对照片Ph3中,也包括三个行人。可能照片Ph2中的三个行人包括照片Ph1中的两个行人,并且照片Ph2中的三个行人和照片Ph3中的三个行人是相同的三个人。由此,可以将从照片Ph1中提取的两个人脸特征、从照片Ph2中提取的三个人脸特征以及从照片Ph3中提取的三个人脸特征分类为分别对应于不同行人的三个人脸特征组。
3)对于经分类的每一个人脸特征组,分别计算其与第二特征之间的相似度,以作为相应的人脸和证件中存储照片的人脸之间的相似度。可选地,对于每个人脸特征组与第二特征之间的相似度,可以依据每个人脸特征组中的人脸特征的平均值进行计算。又可选地,对于每个人脸特征组,还可以从该人脸特征组中任意选取一个人脸特征,计算该人脸特征与第二特征的相似度,以作为该人脸特征组与第二特征之间的相似度。再可选地,检测待比对照片中的人脸质量。从每个人脸特征组中选择与质量最佳的人脸相对应的人脸特征,计算该人脸特征与第二特征的相似度,以作为该人脸特征组与第二特征之间的相似度。
通过上述操作,可以在保证行人识别质量的同时,减少行人识别系统的计算量,提高数据处理速度。
最后,根据所确定的相似度中的最高相似度,确定所述待比对照片中的、与所述最高相似度对应的人脸与证件中存储的照片中的人脸是否属于同一行人。当该最高相似度大于预设相似度阈值时,核验装置130确定该最高相似度对应的行人与证件上的行人是同一人;否则,反之。
通过核验装置130的上述操作,行人识别系统100可以采用最普通的摄像装置,并且可以适用于可能同时出现多个行人的场景,例如限流通道。行人识别系统100自动识别了多个行人中与证件中的照片最匹配的行人,并将该最匹配的行人与证件进行核验。由此,提高了系统的适应广度。
图3示出了根据本发明一个实施例的行人识别系统300的示意图。如图3所示,行人识别系统300包括读卡器310、摄像装置320和与前两者连接的核验装置330。
如图3所示,行人识别系统300中包括的读卡器的数目是一个,即读卡器310。在一些场景中,行人识别系统的识别范围较小。例如在电梯口,行人识别系统可能只用于针对进出电梯的行人进行识别。采用一个读卡器即可实现对行人所携带证件的识别,简化行人识别系统并降低其成本。
读卡器可以包括天线,以与证件进行数据通信并读取证件上所存储的信息。该天线可以是内置天线或外置天线。图3示出的读卡器310包括外置天线。外置天线功率高,性能好,从而提高了行人识别系统的证件识别率。
可选地,读卡器310的外置天线的数目是多个,多个外置天线分别设置于不同位置。通过多个外置天线设置在不同位置,可以显著扩大行人识别系统300的证件识别范围,保证了行人识别系统300不漏掉附近的任何行人。例如,在狭长通道的应用场景中,可以在狭长通道的两端各设置一个天线,以保证尽快获取经过该狭长通道的行人所携带的证件信息。当然外置天线的数目也可以是1个。
图4示出了根据本发明另一个实施例的行人识别系统400的示意图。如图4所示,行人识别系统400包括读卡器411、读卡器412、摄像装置420和与前三者连接的核验装置430。
如图4所示,行人识别系统400中包括的读卡器的数目是两个,即读卡器411和读卡器412。本领域普通技术人员可以理解,在本申请的实施例中,行人识别系统还可以包括更多读卡器。这些读卡器分别设置于不同位置。在一些场景中,需要行人识别系统的识别范围更大。例如在狭长的通道处,读卡器可以分别设置在通道的两端。采用多个读卡器可保证实现对目标区域中出现的所有行人进行识别和核验。
可选地,上述多个读卡器,例如读卡器411和读卡器412,可以根据实际需要以特定频率交替工作,以更及时地获取行人的证件信息。
另外,通过设置多个读卡器,可以在某个读卡器出现故障的情况下,仍能由其他读卡器读取行人所携带的证件,有利于提高行人识别系统的可靠性。
通过前面关于图1的行人识别系统100的描述,本领域普通技术人员能够理解上述行人识别系统300和行人识别系统400的实现和运行方式,为了简洁,在此不再赘述。
根据本发明另一方面,还提供了一种行人识别方法。图5示出了根据本发明一个实施例的行人识别方法500的流程图。如图5所示,行人识别方法500包括步骤S510、步骤S520和步骤S530。
在步骤S510中,由读卡器读取行人所携带的证件,以获取所述证件中存储的照片。
在步骤S520中,由与所述读卡器之间的距离小于距离阈值的摄像装置以第一频率采集行人的照片并输出待识别照片,其中所述待识别照片是所采集的行人的照片或对所述所采集的行人的照片进行处理之后的照片。
在步骤S530中,根据所述证件中存储的照片的获取时刻,从所述待识别照片中确定待比对照片,并且根据所述待比对照片和所述证件中存储的照片核验行人身份。
示例性地,对于所述待识别照片是对所述所采集的行人的照片进行处理之后的照片的情况,所述步骤S520进一步包括:
检测所述所采集的行人的照片中的人脸,以获得所述待识别照片,所述待识别照片为所述所采集的行人的照片中人脸检测框内的图像;
所述步骤S530进一步包括:
在所述待识别照片中确定至少部分待识别照片为所述待比对照片,其中所述部分待识别照片所来自的行人的照片是第一时段采集的,所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
示例性地,对于所述待识别照片是所采集的行人的照片的情况,所述步骤S530进一步包括:
在所述待识别照片中确定在第一时段采集的待识别照片为所述待比对照片,其中所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述待比对照片中的人脸和所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
可选地,上述行人识别方法500还可以包括存储核验结果的步骤。
本领域普通技术人员可以理解,虽然上述方法500中,步骤S510先于步骤S520描述。但是,这并不表示前者一定先于后者执行,二者可以以任意顺序执行。
根据本发明又一方面,还提供了一种监控系统。该监控系统包括前述行人识别系统并用于执行前述行人识别方法。
本领域普通技术人员通过阅读上文关于行人识别系统的详细描述,能够理解上述行人识别方法的步骤、实现和优点以及监控系统的构成、实现和优点,因此这里不再赘述。
在此提供的方法和系统不与任何特定计算机、虚拟系统或者其它系统固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者装置的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。词语第一、第二、以及第三等的使用不表示任何顺序。可将这些词语解释为名称。

Claims (14)

1.一种行人识别系统,包括:
读卡器,用于读取行人所携带的证件,以获取所述证件中存储的照片;
与所述读卡器之间的距离小于距离阈值的摄像装置,用于以第一频率采集行人的照片并输出待识别照片,其中所述待识别照片是所采集的行人的照片或对所述所采集的行人的照片进行处理之后的照片;以及
与所述读卡器和所述摄像装置连接的核验装置,用于根据所述证件中存储的照片的获取时刻,从所述待识别照片中确定待比对照片,并且根据所述待比对照片和所述证件中存储的照片核验行人身份。
2.如权利要求1所述的系统,其中,所述读卡器包括外置天线。
3.如权利要求2所述的系统,其中,所述读卡器的数目是一个,并且所述外置天线的数目是多个,多个所述外置天线分别设置于不同位置。
4.如权利要求1所述的系统,其中,所述读卡器的数目是多个,并且多个所述读卡器分别设置于不同位置。
5.如权利要求4所述的系统,其中,所述多个读卡器以第二频率交替工作。
6.如权利要求1所述的系统,其中,对于所述待识别照片是对所述所采集的行人的照片进行处理之后的照片的情况,所述摄像装置还用于:
检测所述所采集的行人的照片中的人脸,以获得所述待识别照片,所述待识别照片为所述所采集的行人的照片中人脸检测框内的图像;
所述核验装置具体用于:
在所述待识别照片中确定至少部分待识别照片为所述待比对照片,其中所述至少部分待识别照片所来自的行人的照片是第一时段采集的,所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
7.如权利要求1所述的系统,其中,对于所述待识别照片是所采集的行人的照片的情况,所述核验装置具体用于:
在所述待识别照片中确定在第一时段采集的待识别照片为所述待比对照片,其中所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述待比对照片中的人脸和所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
8.如权利要求1或7所述的系统,其中,所述核验装置集成在所述摄像装置内部。
9.如权利要求1所述的系统,其中,所述系统还包括与所述核验装置连接的存储器,用于存储所述核验装置的核验结果。
10.如权利要求1或7所述的系统,其中,所述核验装置是服务器。
11.一种行人识别方法,包括:
步骤S100,由读卡器读取行人所携带的证件,以获取所述证件中存储的照片;
步骤S200,由与所述读卡器之间的距离小于距离阈值的摄像装置以第一频率采集行人的照片并输出待识别照片,其中所述待识别照片是所采集的行人的照片或对所述所采集的行人的照片进行处理之后的照片;以及
步骤S300,根据所述证件中存储的照片的获取时刻,从所述待识别照片中确定待比对照片,并且根据所述待比对照片和所述证件中存储的照片核验行人身份。
12.如权利要求11所述的方法,其中,对于所述待识别照片是对所述所采集的行人的照片进行处理之后的照片的情况,所述步骤S200进一步包括:
检测所述所采集的行人的照片中的人脸,以获得所述待识别照片,所述待识别照片为所述所采集的行人的照片中人脸检测框内的图像;
所述步骤S300进一步包括:
在所述待识别照片中确定至少部分待识别照片为所述待比对照片,其中所述至少部分待识别照片所来自的行人的照片是第一时段采集的,所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
13.如权利要求11所述的方法,其中,对于所述待识别照片是所采集的行人的照片的情况,所述步骤S300进一步包括:
在所述待识别照片中确定在第一时段采集的待识别照片为所述待比对照片,其中所述第一时段是[t-Δt,t+Δt],t表示所述证件中存储的照片的获取时刻,Δt表示预定时间间隔;
检测所述待比对照片中的人脸和所述证件中存储的照片中的人脸;
确定所述待比对照片中的人脸与所述证件中存储的照片中的人脸之间的相似度;以及
根据所确定的相似度中的最高相似度,确定与所述最高相似度对应的待比对照片中的人脸与所述证件中存储的照片中的人脸是否属于同一行人。
14.一种监控系统,包括如所述权利要求1至10任一项所述的行人识别系统。
CN201810012112.7A 2018-01-05 2018-01-05 行人识别系统、方法和监控系统 Pending CN108875527A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810012112.7A CN108875527A (zh) 2018-01-05 2018-01-05 行人识别系统、方法和监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810012112.7A CN108875527A (zh) 2018-01-05 2018-01-05 行人识别系统、方法和监控系统

Publications (1)

Publication Number Publication Date
CN108875527A true CN108875527A (zh) 2018-11-23

Family

ID=64325978

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810012112.7A Pending CN108875527A (zh) 2018-01-05 2018-01-05 行人识别系统、方法和监控系统

Country Status (1)

Country Link
CN (1) CN108875527A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113807264A (zh) * 2021-09-18 2021-12-17 北京市商汤科技开发有限公司 任务演示方法及装置、电子设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103559485A (zh) * 2013-11-08 2014-02-05 广州广电运通金融电子股份有限公司 一种基于远程银行vtm的身份认证方法及装置
CN104112114A (zh) * 2013-10-30 2014-10-22 北京安捷天盾科技发展有限公司 身份验证方法和装置
CN104240349A (zh) * 2014-09-12 2014-12-24 宝鸡市交通信息工程研究所 重点场所实名身份快速确认方法及人像身份比对安检系统
CN106257493A (zh) * 2016-08-30 2016-12-28 重庆市城投金卡信息产业股份有限公司 交通优惠卡冒用识别方法及识别系统
CN106650623A (zh) * 2016-11-18 2017-05-10 广东工业大学 一种基于人脸检测的出入境人证核实的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104112114A (zh) * 2013-10-30 2014-10-22 北京安捷天盾科技发展有限公司 身份验证方法和装置
CN103559485A (zh) * 2013-11-08 2014-02-05 广州广电运通金融电子股份有限公司 一种基于远程银行vtm的身份认证方法及装置
CN104240349A (zh) * 2014-09-12 2014-12-24 宝鸡市交通信息工程研究所 重点场所实名身份快速确认方法及人像身份比对安检系统
CN106257493A (zh) * 2016-08-30 2016-12-28 重庆市城投金卡信息产业股份有限公司 交通优惠卡冒用识别方法及识别系统
CN106650623A (zh) * 2016-11-18 2017-05-10 广东工业大学 一种基于人脸检测的出入境人证核实的方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113807264A (zh) * 2021-09-18 2021-12-17 北京市商汤科技开发有限公司 任务演示方法及装置、电子设备和存储介质
CN113807264B (zh) * 2021-09-18 2024-03-26 北京市商汤科技开发有限公司 任务演示方法及装置、电子设备和存储介质

Similar Documents

Publication Publication Date Title
US10248860B2 (en) System and method for object re-identification
Alioua et al. Driver’s fatigue detection based on yawning extraction
CN110008813B (zh) 基于活体检测技术的人脸识别方法和系统
CN106803301A (zh) 一种基于深度学习的人脸识别门禁方法及系统
CN101556717A (zh) 一种atm智能安保系统及监测方法
CN108416336A (zh) 一种智慧社区人脸识别的方法和系统
CN103324912A (zh) 一种应用于atm机的人脸识别系统及方法
CN102170563A (zh) 智能人员卡口系统及人员监控管理方法
CN113269091A (zh) 一种面向智慧园区的人员轨迹分析方法、设备及介质
CN112633255B (zh) 目标检测方法、装置及设备
US20160125404A1 (en) Face recognition business model and method for identifying perpetrators of atm fraud
CN109409250A (zh) 一种基于深度学习的无交叠视域跨摄像机行人再识别方法
Kant et al. Fake face recognition using fusion of thermal imaging and skin elasticity
Patil et al. Comparative analysis of facial recognition models using video for real time attendance monitoring system
AU2017231602A1 (en) Method and system for visitor tracking at a POS area
Khodaskar et al. Human face detection & recognition using raspberry Pi
CN108648312A (zh) 人脸识别智能迎宾方法及系统
CN111753658A (zh) 一种睡岗告警方法、装置和计算机设备
Ryan et al. Scene invariant crowd counting
Goud et al. Smart attendance notification system using SMTP with face recognition
CN108875527A (zh) 行人识别系统、方法和监控系统
Lakshmi et al. Automated face recognition by smart security system using AI & ML algorithms
Peng et al. [Retracted] Helmet Wearing Recognition of Construction Workers Using Convolutional Neural Network
Gupta et al. HaarCascade and LBPH Algorithms in Face Recognition Analysis
Kalangi et al. Deployment of Haar Cascade algorithm to detect real-time faces

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181123