CN111401170A - 一种人脸检测方法及装置 - Google Patents

一种人脸检测方法及装置 Download PDF

Info

Publication number
CN111401170A
CN111401170A CN202010152694.6A CN202010152694A CN111401170A CN 111401170 A CN111401170 A CN 111401170A CN 202010152694 A CN202010152694 A CN 202010152694A CN 111401170 A CN111401170 A CN 111401170A
Authority
CN
China
Prior art keywords
face
camera
face detection
vector
detection rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010152694.6A
Other languages
English (en)
Other versions
CN111401170B (zh
Inventor
约翰·阿尔伯特·卡迈克尔
陆博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orca Data Technology Xian Co Ltd
Original Assignee
Orca Data Technology Xian Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orca Data Technology Xian Co Ltd filed Critical Orca Data Technology Xian Co Ltd
Priority to CN202010152694.6A priority Critical patent/CN111401170B/zh
Publication of CN111401170A publication Critical patent/CN111401170A/zh
Application granted granted Critical
Publication of CN111401170B publication Critical patent/CN111401170B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)

Abstract

本申请实施例提供了一种人脸检测方法及装置,方法应用与人脸检测平台的人脸检测设备,所述人脸检测平台还包括多台摄像机,所述方法包括:获取各所述摄像机对应的人脸检测率,其中,所述人脸检测率用于表示摄像机拍摄的图像中被检测出存在人脸的概率;根据各所述摄像机对应的人脸检测率,按照分配的计算资源的大小与人脸检测率的大小成正比的原则,为各所述摄像机分配计算资源;使用为所述摄像机分配的资源,对所述摄像机拍摄的图像进行人脸识别。使用本申请实施例提供方案,可以提高人脸检测效率。

Description

一种人脸检测方法及装置
技术领域
本申请涉及计算机技术领域,特别是涉及一种人脸检测方法及装置。
背景技术
随着云技术发展,可以将云技术运用在人脸识别领域,使用云技术可以对 多于百万数量级台数的摄像机拍摄的图像进行人脸识别,也可以管理一个数十 亿人的人脸参考数据库。
现有人脸检测方法由于人脸检测效率较低,不适用于云规模的、包括数百 万摄像机的人脸检测的平台。因此,针对云规模的人脸检测平台,需要设计一 种检测效率高的人脸检测方法。
发明内容
本申请实施例的目的在于提供一种人脸检测方法及装置,以提高人脸检测 的效率。具体技术方案如下:
一方面,本申请实施例提供了一种人脸检测方法,应用与人脸检测平台的 人脸检测设备,所述人脸检测平台还包括多台摄像机,所述方法包括:
获取各所述摄像机对应的人脸检测率,其中,所述人脸检测率用于表示摄 像机拍摄的图像中被检测出存在人脸的概率;
根据各所述摄像机对应的人脸检测率,按照分配的计算资源的大小与人脸 检测率的大小成正比的原则,为各所述摄像机分配计算资源;
使用为所述摄像机分配的资源,对所述摄像机拍摄的图像进行人脸识别。
可选的,所述方法具体应用于人脸检测设备的图形处理器GPU;所述计算 资源为GPU资源。
可选的,所述人脸检测设备中存储有各参考人脸向量以及各参考人脸向量 对应的人脸信息;
所述对所述摄像机拍摄的图像进行人脸识别,包括:
识别所述摄像机拍摄的图像中人脸所在的区域,得到人脸区域图像;
将所述人脸区域图像划分为多个分割区域,并将各个分割区域转换为向量;
使用欧几里得距离公式将所转换的向量与所述各所述参考人脸向量进行 比较,得到各个比较差别,将比较差别小于预设差别的参考人脸向量对应的人 脸信息,确定为所述摄像机拍摄的图像中人脸的信息。
可选的,所述参考人脸向量中包括热点人脸向量;
所述方法还包括:
当比较差别小于预设差别的人脸向量为热点人脸向量时,发送提示信息。
可选的,所述方法还包括:
每隔预设时长,对所述摄相机的人脸检测率进行校准,得到所述摄相机对 应的校准后人脸检测率,并将所述摄相机的人脸检测率更新为所述校准后人脸 检测率;
所述对所述摄相机的人脸检测率进行校准,包括:
统计所述摄像机在距离当前时刻预设时间段内检测出的人脸的数量;
获取所述摄像机在单位时间内获取的视频帧数;
将所述数量除以所述预设时间段的时长和所述视频帧数的积,得到校准后 人脸检测率。
另一方面,本申请实施例提供了一种人脸检测装置,应用与人脸检测平台 的人脸检测设备,所述人脸检测平台还包括多台摄像机,所述装置包括:
检测率获取单元,用于获取各所述摄像机对应的人脸检测率,其中,所述 人脸检测率用于表示摄像机拍摄的图像中被检测出存在人脸的概率;
资源分配单元,用于根据各所述摄像机对应的人脸检测率,按照分配的计 算资源的大小与人脸检测率的大小成正比的原则,为各所述摄像机分配计算资 源;
人脸识别单元,用于使用为所述摄像机分配的资源,对所述摄像机拍摄的 图像进行人脸识别。
可选的,所述装置具体应用于人脸检测设备的图形处理器GPU;所述计算 资源为GPU资源。
可选的,所述人脸检测设备中存储有各参考人脸向量以及各参考人脸向量 对应的人脸信息;
人脸识别单元,包括:
区域获取子单元,用于识别所述摄像机拍摄的图像中人脸所在的区域,得 到人脸区域图像;
向量转换子单元,用于将所述人脸区域图像划分为多个分割区域,并将各 个分割区域转换为向量;
人脸确定子单元,用于使用欧几里得距离公式将所转换的向量与所述各所 述参考人脸向量进行比较,得到各个比较差别,将比较差别小于预设差别的参 考人脸向量对应的人脸信息,确定为所述摄像机拍摄的图像中人脸的信息。
可选的,所述参考人脸向量中包括热点人脸向量;
所述装置还包括:
提示发送单元,用于当比较差别小于预设差别的人脸向量为热点人脸向量 时,发送提示信息。
可选的,所述装置还包括:
校准单元,用于每隔预设时长,对所述摄相机的人脸检测率进行校准,得 到所述摄相机对应的校准后人脸检测率,并将所述摄相机的人脸检测率更新为 所述校准后人脸检测率;
所述校准单元,包括:
数量统计子单元,用于统计所述摄像机在距离当前时刻预设时间段内检测 出的人脸的数量;
帧数获取子单元,用于获取所述摄像机在单位时间内获取的视频帧数;
检测率得到子单元,用于将所述数量除以所述预设时间段的时长和所述视 频帧数的积,得到校准后人脸检测率。
使用本申请实施例提供的技术方案,按照分配的计算资源的大小与人脸检 测率的大小成正比的原则,为各摄像机分配计算资源后,可以使人脸检测率高 的摄像机分配到较多的计算资源,使人脸检测率低的摄像机分配到较少的计算 资源,从而可以更合理地分配计算资源,使计算资源得到合理利用,提高了人 脸检测效率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施 例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述 中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付 出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例的数据存储与传输示意图;
图2为本发明实施例的系统架构和空间管理示意图;
图3为本发明实施例的人脸检测组件图;
图4为轮询选择画面的示意图;
图5为人脸边界框元数据的示意图;
图6为访问生成器的一种工作时的示意图;
图7为进行人脸向量比较的一种示意图;
图8为与热点人脸比较的一种示意图;
图9为人脸去重的一种示意图;
图10为人脸去重的另一种示意图;
图11为热门列表所包含信息的示意图;
图12为实现摄像机负载均衡的一种方法的示意图;
图13为向量匹配的示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清 楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是 全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造 性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为了提高人脸检测效率,本申请实施例提供了一种人脸检测方法及装置。
下面,首先对本申请实施例提供的人脸检测方法进行介绍。
本申请实施例提供的人脸检测方法应用与人脸检测平台的人脸检测设备, 所述人脸检测平台还包括多台摄像机。所述方法包括以下步骤:
获取各所述摄像机对应的人脸检测率,其中,所述人脸检测率用于表示摄 像机拍摄的图像中被检测出存在人脸的概率;
根据各所述摄像机对应的人脸检测率,按照分配的计算资源的大小与人脸 检测率的大小成正比的原则,为各所述摄像机分配计算资源;
使用为所述摄像机分配的资源,对所述摄像机拍摄的图像进行人脸识别。
使用本申请实施例提供的技术方案,按照分配的计算资源的大小与人脸检 测率的大小成正比的原则,为各摄像机分配计算资源后,可以使人脸检测率高 的摄像机分配到较多的计算资源,使人脸检测率低的摄像机分配到较少的计算 资源,从而可以更合理地分配计算资源,使计算资源得到合理利用,提高了人 脸检测效率。
在一种实施方式中,所述方法具体可以应用于人脸检测设备的图形处理器 GPU;所述计算资源为GPU资源。
在一种实施方式中,所述人脸检测设备中可以存储有各参考人脸向量以及 各参考人脸向量对应的人脸信息;
所述对所述摄像机拍摄的图像进行人脸识别,包括:
识别所述摄像机拍摄的图像中人脸所在的区域,得到人脸区域图像;
将所述人脸区域图像划分为多个分割区域,并将各个分割区域转换为向量;
使用欧几里得距离公式将所转换的向量与所述各所述参考人脸向量进行 比较,得到各个比较差别,将比较差别小于预设差别的参考人脸向量对应的人 脸信息,确定为所述摄像机拍摄的图像中人脸的信息。
在一种实施方式中,所述参考人脸向量中可以包括热点人脸向量;
所述方法还包括:
当比较差别小于预设差别的人脸向量为热点人脸向量时,发送提示信息。
在一种实施方式中,所述方法还可以包括:
每隔预设时长,对所述摄相机的人脸检测率进行校准,得到所述摄相机对 应的校准后人脸检测率,并将所述摄相机的人脸检测率更新为所述校准后人脸 检测率;
所述对所述摄相机的人脸检测率进行校准,包括:
统计所述摄像机在距离当前时刻预设时间段内检测出的人脸的数量;
获取所述摄像机在单位时间内获取的视频帧数;
将所述数量除以所述预设时间段的时长和所述视频帧数的积,得到校准后 人脸检测率。
本申请的一个实施例中,GPU可以通过算法实时选择视频画面的指定区域 进行人脸检测运算,而不是全画幅,提高GPU工作效率。
本申请实施例中,通过删减人脸检测率低的视频源画面,使GPU所计算的 画面拥有更高的人脸出现比,降低GPU的无效计算,提高GPU的人脸检测效 率。另外,人物的历史访问轨迹经过访问去重和人脸去重,单位存储内可储存 更多的历史访问记录,提高了存储效率和检索命中率。
图1为本发明实施例的数据存储与传输示意图。如图1所示,视频数据存储 在数据服务器中,可用架构参阅4.1。视频数据内容通过本地部署的GPU人脸检 测应用4.2,得到权重表4.3保存在数据服务,边界框元数据4.5保存在元数据服 务,元数据服务上的访问生成器4.6使用边界框元数据,通过GPU运算得到人 脸和扇区访问,存在访问历史记录服务。热点任务单4.8加载在访问生成器,通 过比对生成提示记录。访问历史记录服务通过人脸去重4.9和访问去重4.10压缩 优化历史记录。历史记录服务使用人脸和摄像头作为数据记录的索引4.14。通 过人脸数据库4.13识别历史记录服务中的人脸。
图2为本发明实施例的系统架构和空间管理示意图。如图2所示,一个摄像 机流1.1将与4个数据中心对接,其中一个是主数据中心1.2和三个备用数据中心 1.3、1.4、1.5。数据中心的服务器会有一个元数据服务1.6,元数据服务与备用 元数据服务1.10是相互拷贝的。元数据服务通过路由器对应数据池1.8,数据池 是数据磁盘1.7的集合,为上层提供存储空间。人脸检测会在数据池1.8上进行 分析,不必通过网络传输数据。将结果返回给元数据1.7储存。
图3为本发明实施例的人脸检测组件图。如图3所示,人脸检测是在数据池 服务器2.1上的的GPU2.4上执行的。一个数据服务器2.2里储存视频数据2.3,并 配置本地的GPU2.4.视频数据内容包括视频片段2.5,设备id 2.6,文件区段id 2.7, GPU应用类型2.8,视频源权重表2.9。视频数据内容作为GPU输入,GPU基 于2.8决定使用哪种应用(算法),基于权重表2.9(详述4.3)得到数据处理的优 先级。GPU运算后得到边界框元数据2.11返还给元数据服务。
表1
FIG 3-Face Detection Effectiveness Weights
Figure BDA0002403003280000071
表1列出了人脸检测有效性权重,每隔一段时间,对每台相机的人脸检测 率进行校准,并将其作为统计数据存储。表1中,列3.1统计每个摄像头小人脸 (50*50像素)的检测率,3.2统计大人脸(100*100像素)的检测率。通过权重 表可以分配有限的GPU资源在同一时间找到更多的人脸,最大化GPU工作效率。
图4为轮询选择画面的示意图,如图4所示,由于扫描视频的每一帧是不可 取的,需要引进一个轮询算法,用来保持GPU实时处理视频的能力。当GPU资 源有限,每秒钟处理的帧数少于应处理的视频帧数时,便存在延时。为了避免 延时,首先校准GPU的运算能力4.1,得到以帧每秒为单位的处理效率4.2。通 过校准视频数据接入时的状态4.3,得到现在状态的视频帧数每秒。轮询算法通 过以上数据可得到在此状态下为了保持GPU正常无延时运转而需要删除的帧 数。轮询算法通过权重表得到哪些视频源可作为删除帧数的对象。使用轮询算 法后,可从视频源中删除人脸检测率低的场景画面,避免不必要的GPU计算, 使GPU始终处于未饱和且高效的计算状态。
图5为人脸边界框元数据的示意图。图5中,数据服务器将元数据作为响应 消息,返回给发起请求的扇区元数据服务。一个视频片段5.1会有很多画面5.2, 其中人脸只出现在画面的一小部分区域。GPU通过对视频的处理,返回人脸的 边界框给元数据服务,包括人脸位置和所在的帧数。
图6为访问生成器的一种工作时的示意图,图6中,访问生成器(一个GPU 应用程序)运行在一个元服务节点上。其接受来自数据服务的边界框元数据, 并创建扇区访问和人脸访问。这些访问被发送到访问历史服务6.8。
图7为进行人脸向量比较的一种示意图。图7中,通过比较人脸向量来决定 身份的匹配人脸图像将被分割为128个区域(7.1),像素将转换为一个代表性向 量(7.2)。使用欧几里得距离公式(7.5)对向量(7.3,7.4)进行比较。如果差异很小 (7.6),则认为两幅图像相同。
图8为与热点人脸比较的一种示意图。图8中,最新的人脸向量会率先比较 热点名单。一个热点人员名单(8.1)定期加载到访问生成器。当创建一个新向量 (8.3)时,将它与热门列表向量(8.2)进行比较(8.4),在匹配(8.5)时,将生成一个 提示(8.6),并将该向量视为高优先级(8.7)。此技术用于支撑不用的人脸检测业 务场景。
图9为人脸去重的一种示意图。如图9所示,同时出现在前期列表和现期列 表的人脸被定义为重复人脸,为了减少不必要的数据记录,重复的人脸将被去 重。减少数据存储量,为大规模部署提供存储优化。
图10为人脸去重的另一种示意图。如图10所示,为了减少不必要的数据记 录,重复的人脸将被去重如果相同的人脸(4.1,4.2)在相同的视频源数据内被发现, 则只记录第一个实例。如果同一人脸在同一时间段内出现多次(10.3),则只记 录第一次和最后一次。一张重复的脸可以在连续10分钟内(10.4)被去重。如果 一张脸出现了多次,但不是连续的(10.7),它可能被记录为多次访问。
图11为热门列表所包含信息的示意图,从图11中可见,一个热门列表访问 包含了比正常访问更多的信息量。
图12为实现摄像机负载均衡的一种方法的示意图,从图12可见,在高负荷 工作量期间,边界框的处理将被平均分配给摄像头。
图13为向量匹配的示意图,从图13可见,参考人脸向量可以大规模横向扩 展。参考人脸向量(多达20亿),切分为1024个组,分布在256个人脸访问记录节 点上(13.1)。在访问历史记录中检测到的新面孔(13.2)计算碎片索引(13.3)并将向 量发送到相应的节点进行身份匹配(13.4)。
可通过人脸和摄像头索引访问记录。
当发出访问记录时,每个视频段都被视为一个单独的记录。一个视频段可 以包含多个人脸,但是出现在一个画面中的重复人脸将被删除。包含特定人脸 的每个区段的FVISIT(14.1)记录存储在人脸向量的访问历史碎片中。 CVISIT(14.2)记录了在特定相机发现的人脸,并储存在相机的元扇区上。
在本发明实施例中,人脸检测平台包括空间管理组件,该组件用于对于人 脸检测进行空间管理和实现持续可检测性,在空间管理组件中,每个数据中心 包括一台服务器的一个硬盘负责摄像头流的元数据服务数据会通过转子机制 均匀分布在数据磁盘池中每个数据中心上的元数据服务以3种方式复制(1.10), 以防止媒体故障。这意味着,如果4个数据中心池中的任何一个有空闲空间, 并且4个元服务中的任何一个正在运行,就可以存储新的摄像机数据。这就会 支撑较强的可用性,并且存储空间饱和的情况会很少出现。
在本发明实施例中,人脸检测平台包括人脸检测组件,人脸检测组件进行 人脸检测是在数据池服务器(2.1)上的GPU(2.4)上执行的。一个原始数据可能包 含14秒H.265(2.5)的区段,通过服务器接收(2.2)并储存在本地(2.3)。该消息还包 括一个摄像机ID(2.6)和原始数据ID(2.7),后者是一个时间戳。CDN(2.8)中的宿 主柜GPU类决定调用哪个GPU应用程序(2.10)。GPU应用程序(2.10)接收帧数据 和身份数据,基于权重表(2.9)对帧应用优先级,并返回边界框元数据(2.11)。
在一种实施方式中,可以每隔一段时间,对每台相机的人脸检测率进行校 准,并将其作为统计数据存储。每个视频源数据的平均小人脸数(3.1)和平均大 人脸数(3.2)被记录下来。默认情况下,小的人脸是50x50像素,大的人脸是 100x100像素。这是一个衡量相机效率的指标。考虑到GPU处理的稀缺性,本 发明实施例的目标是在给定一定处理能力的情况下,找到最大的人脸数,换句 话说,最大化GPU的效率。由于户外相机容易受到外界因素的影响,这个指标 也会检测到定位误差。
在一种实施方式中,由于扫描视频的每一帧是不可取的,可以通过轮询算 法选取需要扫描的视频帧。在GPU校准(4.1)过程中,计算了一个标称帧每秒速 率(4.2)。这个数值将取决于GPU的模型和数量。在处理正在进行的NVR(4.3)数 据时,记录当前帧到达率(4.4)。一般来讲,例如32个相机x 25帧每秒是常见的。 如果GPU不足,那么一些帧将会被忽略掉,不被扫描。在本例中,通过标称GPU 容量和有效性权重(5.5),计算得出可能的投票率。
在一种实施方式中,数据服务器将元数据作为响应消息,返回给发起请求 的扇区元数据服务一个视频数据(5.1)可能包含多达250帧(5.2),有可能在某些 帧(5.3)上会发现很多不同的人脸(5.4、5.5)。一组帧通常包括一个完整的帧(I帧), 加上一组部分的(P帧)组件(5.6),因此如果不按顺序播放帧,就无法提取Pframe 组件中的人脸。一个人脸(5.7)通常只占框架的一小部分。作为帧重传的替代方 法,人脸检测器将返回一组或者多组边界框(5.8)数据,其中包括相对帧数和 人脸位置(5.9)。
在一种实施方式中,访问生成器(一个GPU应用程序)运行在一个元服务节 点上。它接受来自数据服务的边界框元数据,并创建扇区访问和人脸访问。元 节点(6.1)包括扇区的元数据存储(6.2)和GPU(6.3)。访问应用程序(6.4)会运行在 两者之上。边界框元数据(6.5)被转发到GPU应用程序(6.6)。这个应用程序依次 生成扇区访问(6.7)和人脸访问(6.9),这些访问被发送到访问历史服务(6.8)。
在一种实施方式中,通过比较人脸向量来决定身份的匹配人脸图像将被分 割为128个区域(7.1),像素将转换为一个代表性向量(7.2)。可以使用欧几里得 距离公式(7.5)对向量(7.3,7.4)进行比较。如果差异很小(7.6),则认为两幅图像相 同。
在一种实施方式中,最新的人脸向量会率先比较热点人员名单,一个热点 人员名单(8.1)定期加载到访问生成器。当创建一个新向量(8.3)时,将它与热门 列表向量(8.2)进行比较(8.4),在匹配(8.5)时,将生成一个警报(8.6),并将该向 量视为高优先级(8.7)。作为新创建向量的百分比,最想要的列表匹配将非常罕 见。一般情况下,面部访问记录可能会比视频制作慢1分钟,对于一张普通的 脸,可能会比视频制作慢5分钟。这样做是为了避免过多的人员在不同地点的 图像使访问历史饱和。
为了减少不必要的数据记录,重复的人脸可以被去重每个周期(例如,一分 钟)的唯一向量集(9.1)将会被保存。当前的人脸(9.3)与之前的人脸(9.2)进行比较, 如果匹配(9.4)就被认为是重复的(9.5)。一个热门列表访问包含了比正常访问更 多的信息量单个视频段(11.1,11.2)将除去重复数据。每个周期发出一个访问记 录,其中包括所有有人脸的视频段(11.3)。
为了使得摄像机负载均衡,在一种实施方式中,在高负荷工作量期间,边 界框的处理可以被平均分配给摄像头每秒边界框的标称数值(12.2)(12.1)将被 计算。如果当前到达的数量(12.3)超过了容量,负载就会减少,以便在所有相 机(12.4)之间均衡处理。边界框大小等因素也会明显影响选择过程,较大的边 界框比较小的边界框更有优先级。
参考人脸向量可以大规模横向扩展,参考人脸向量(多达20亿),切分为1024 个组,分布在256个人脸访问记录节点上(13.1)。在访问历史记录中检测到的新 面孔(13.2)计算碎片索引(13.3)并将向量发送到相应的节点进行身份匹配(13.4)。 可通过人脸和摄像头索引访问记录。
当发出访问记录时,每个视频段都被视为一个单独的记录。一个视频段可 以包含多个人脸,但是出现在一个画面中的重复人脸将被删除。包含特定人脸 的每个区段的FVISIT(14.1)记录存储在人脸向量的访问历史碎片中。 CVISIT(14.2)记录了在特定相机发现的人脸,并储存在相机的元扇区上。
本申请实施例提供了一种人脸检测装置,应用与人脸检测平台的人脸检测 设备,所述人脸检测平台还包括多台摄像机,所述装置包括:
检测率获取单元,用于获取各所述摄像机对应的人脸检测率,其中,所述 人脸检测率用于表示摄像机拍摄的图像中被检测出存在人脸的概率;
资源分配单元,用于根据各所述摄像机对应的人脸检测率,按照分配的计 算资源的大小与人脸检测率的大小成正比的原则,为各所述摄像机分配计算资 源;
人脸识别单元,用于使用为所述摄像机分配的资源,对所述摄像机拍摄的 图像进行人脸识别。
可选的,所述装置具体应用于人脸检测设备的图形处理器GPU;所述计算 资源为GPU资源。
可选的,所述人脸检测设备中存储有各参考人脸向量以及各参考人脸向量 对应的人脸信息;
人脸识别单元,包括:
区域获取子单元,用于识别所述摄像机拍摄的图像中人脸所在的区域,得 到人脸区域图像;
向量转换子单元,用于将所述人脸区域图像划分为多个分割区域,并将各 个分割区域转换为向量;
人脸确定子单元,用于使用欧几里得距离公式将所转换的向量与所述各所 述参考人脸向量进行比较,得到各个比较差别,将比较差别小于预设差别的参 考人脸向量对应的人脸信息,确定为所述摄像机拍摄的图像中人脸的信息。
可选的,所述参考人脸向量中包括热点人脸向量;
所述装置还包括:
提示发送单元,用于当比较差别小于预设差别的人脸向量为热点人脸向量 时,发送提示信息。
可选的,所述装置还包括:
校准单元,用于每隔预设时长,对所述摄相机的人脸检测率进行校准,得 到所述摄相机对应的校准后人脸检测率,并将所述摄相机的人脸检测率更新为 所述校准后人脸检测率;
所述校准单元,包括:
数量统计子单元,用于统计所述摄像机在距离当前时刻预设时间段内检测 出的人脸的数量;
帧数获取子单元,用于获取所述摄像机在单位时间内获取的视频帧数;
检测率得到子单元,用于将所述数量除以所述预设时间段的时长和所述视 频帧数的积,得到校准后人脸检测率。
对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简 单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将 一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些 实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包 含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素 的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的 其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在 没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包 括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。 凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等,均包含在 本申请的保护范围内。

Claims (10)

1.一种人脸检测方法,其特征在于,应用于人脸检测平台的人脸检测设备,所述人脸检测平台还包括多台摄像机,所述方法包括:
获取各所述摄像机对应的人脸检测率,其中,所述人脸检测率用于表示摄像机拍摄的图像中被检测出存在人脸的概率;
根据各所述摄像机对应的人脸检测率,按照分配的计算资源的大小与人脸检测率的大小成正比的原则,为各所述摄像机分配计算资源;
使用为所述摄像机分配的资源,对所述摄像机拍摄的图像进行人脸识别。
2.根据权利要求1所述的方法,其特征在于,所述方法具体应用于人脸检测设备的图形处理器GPU;所述计算资源为GPU资源。
3.根据权利要求1所述的方法,其特征在于,所述人脸检测设备中存储有各参考人脸向量以及各参考人脸向量对应的人脸信息;
所述对所述摄像机拍摄的图像进行人脸识别,包括:
识别所述摄像机拍摄的图像中人脸所在的区域,得到人脸区域图像;
将所述人脸区域图像划分为多个分割区域,并将各个分割区域转换为向量;
使用欧几里得距离公式将所转换的向量与所述各所述参考人脸向量进行比较,得到各个比较差别,将比较差别小于预设差别的参考人脸向量对应的人脸信息,确定为所述摄像机拍摄的图像中人脸的信息。
4.根据权利要求3所述的方法,其特征在于,所述参考人脸向量中包括热点人脸向量;
所述方法还包括:
当比较差别小于预设差别的人脸向量为热点人脸向量时,发送提示信息。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述方法还包括:
每隔预设时长,对所述摄相机的人脸检测率进行校准,得到所述摄相机对应的校准后人脸检测率,并将所述摄相机的人脸检测率更新为所述校准后人脸检测率;
所述对所述摄相机的人脸检测率进行校准,包括:
统计所述摄像机在距离当前时刻预设时间段内检测出的人脸的数量;
获取所述摄像机在单位时间内获取的视频帧数;
将所述数量除以所述预设时间段的时长和所述视频帧数的积,得到校准后人脸检测率。
6.一种人脸检测装置,其特征在于,应用与人脸检测平台的人脸检测设备,所述人脸检测平台还包括多台摄像机,所述装置包括:
检测率获取单元,用于获取各所述摄像机对应的人脸检测率,其中,所述人脸检测率用于表示摄像机拍摄的图像中被检测出存在人脸的概率;
资源分配单元,用于根据各所述摄像机对应的人脸检测率,按照分配的计算资源的大小与人脸检测率的大小成正比的原则,为各所述摄像机分配计算资源;
人脸识别单元,用于使用为所述摄像机分配的资源,对所述摄像机拍摄的图像进行人脸识别。
7.根据权利要求6所述的装置,其特征在于,所述装置具体应用于人脸检测设备的图形处理器GPU;所述计算资源为GPU资源。
8.根据权利要求6所述的装置,其特征在于,所述人脸检测设备中存储有各参考人脸向量以及各参考人脸向量对应的人脸信息;
人脸识别单元,包括:
区域获取子单元,用于识别所述摄像机拍摄的图像中人脸所在的区域,得到人脸区域图像;
向量转换子单元,用于将所述人脸区域图像划分为多个分割区域,并将各个分割区域转换为向量;
人脸确定子单元,用于使用欧几里得距离公式将所转换的向量与所述各所述参考人脸向量进行比较,得到各个比较差别,将比较差别小于预设差别的参考人脸向量对应的人脸信息,确定为所述摄像机拍摄的图像中人脸的信息。
9.根据权利要求8所述的装置,其特征在于,所述参考人脸向量中包括热点人脸向量;
所述装置还包括:
提示发送单元,用于当比较差别小于预设差别的人脸向量为热点人脸向量时,发送提示信息。
10.根据权利要求6至9任一项所述的装置,其特征在于,所述装置还包括:
校准单元,用于每隔预设时长,对所述摄相机的人脸检测率进行校准,得到所述摄相机对应的校准后人脸检测率,并将所述摄相机的人脸检测率更新为所述校准后人脸检测率;
所述校准单元,包括:
数量统计子单元,用于统计所述摄像机在距离当前时刻预设时间段内检测出的人脸的数量;
帧数获取子单元,用于获取所述摄像机在单位时间内获取的视频帧数;
检测率得到子单元,用于将所述数量除以所述预设时间段的时长和所述视频帧数的积,得到校准后人脸检测率。
CN202010152694.6A 2020-03-06 2020-03-06 一种人脸检测方法及装置 Active CN111401170B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010152694.6A CN111401170B (zh) 2020-03-06 2020-03-06 一种人脸检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010152694.6A CN111401170B (zh) 2020-03-06 2020-03-06 一种人脸检测方法及装置

Publications (2)

Publication Number Publication Date
CN111401170A true CN111401170A (zh) 2020-07-10
CN111401170B CN111401170B (zh) 2023-06-06

Family

ID=71430572

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010152694.6A Active CN111401170B (zh) 2020-03-06 2020-03-06 一种人脸检测方法及装置

Country Status (1)

Country Link
CN (1) CN111401170B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115410302A (zh) * 2022-08-23 2022-11-29 上海上电漕泾发电有限公司 一种电气开关室区域识别设备及ai计算资源分配方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019100608A1 (zh) * 2017-11-21 2019-05-31 平安科技(深圳)有限公司 摄像装置、人脸识别的方法、系统及计算机可读存储介质
CN110062199A (zh) * 2018-01-19 2019-07-26 杭州海康威视系统技术有限公司 负载均衡方法、装置及计算机可读存储介质
CN110149500A (zh) * 2019-05-24 2019-08-20 深圳市珍爱云信息技术有限公司 监控视频的处理方法、装置、设备和存储介质
CN110427265A (zh) * 2019-07-03 2019-11-08 平安科技(深圳)有限公司 人脸识别的方法、装置、计算机设备和存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019100608A1 (zh) * 2017-11-21 2019-05-31 平安科技(深圳)有限公司 摄像装置、人脸识别的方法、系统及计算机可读存储介质
CN110062199A (zh) * 2018-01-19 2019-07-26 杭州海康威视系统技术有限公司 负载均衡方法、装置及计算机可读存储介质
CN110149500A (zh) * 2019-05-24 2019-08-20 深圳市珍爱云信息技术有限公司 监控视频的处理方法、装置、设备和存储介质
CN110427265A (zh) * 2019-07-03 2019-11-08 平安科技(深圳)有限公司 人脸识别的方法、装置、计算机设备和存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
姚文韬;: "基于高清智能摄像机的人脸检测与识别系统" *
魏振钢;孔勇强;魏兆强;张小龙;: "基于多摄像头监控的人体跌倒检测算法" *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115410302A (zh) * 2022-08-23 2022-11-29 上海上电漕泾发电有限公司 一种电气开关室区域识别设备及ai计算资源分配方法
CN115410302B (zh) * 2022-08-23 2024-10-11 上海上电漕泾发电有限公司 一种电气开关室区域识别设备及ai计算资源分配方法

Also Published As

Publication number Publication date
CN111401170B (zh) 2023-06-06

Similar Documents

Publication Publication Date Title
US7236992B2 (en) Storage system
US9047224B2 (en) Method, system and server of removing a distributed caching object
CN103198293B (zh) 用于指纹识别视频的系统和方法
JP3568117B2 (ja) ビデオ画像の分割、分類、および要約のための方法およびシステム
CN103685914B (zh) 图像管理装置及管理方法
US20180204093A1 (en) Clustering-based person re-identification
US20080201336A1 (en) Distributed data storage system, data distribution method, and apparatus and program to be used for the same
CN108228709B (zh) 数据存储方法和系统、电子设备、程序和介质
JP2012070283A (ja) 映像処理装置、方法、及び映像処理システム
CN107092686B (zh) 一种基于云存储平台的文件管理方法及装置
KR100946694B1 (ko) 영상 정보 기반의 동영상 파일 중복 검사와 관리를 위한시스템 및 방법
CN111191591B (zh) 一种水印检测、视频处理方法和相关设备
CN111401170B (zh) 一种人脸检测方法及装置
CN109947730A (zh) 元数据恢复方法、装置、分布式文件系统及可读存储介质
KR20050029282A (ko) 콘텐트-기반 콘텐트 표를 생성하기 위한 방법, 시스템, 및프로그램 제품
CN111368753B (zh) 一种人脸检测方法及装置
JP2010218390A (ja) ストリーム蓄積制御装置
JP2009049668A (ja) データ処理装置、データ処理方法、プログラムおよび記録媒体
CN108763465B (zh) 一种基于大数据的视频存储分配方法
CN115379014A (zh) 数据请求分发方法、装置,以及,电子设备
JP6203424B2 (ja) 映像音声記録装置および監視システム
CN112135092B (zh) 一种图像处理方法
CN106557469B (zh) 一种处理数据仓库中数据的方法及装置
KR102141411B1 (ko) 콘텐츠 기반 클린 클라우드 시스템 및 그 방법
CN112749724B (zh) 训练分类器、预测应用性能扩展性的方法、设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant