CN101236599A - 基于多摄像机信息融合的人脸识别检测装置 - Google Patents
基于多摄像机信息融合的人脸识别检测装置 Download PDFInfo
- Publication number
- CN101236599A CN101236599A CNA2007103075796A CN200710307579A CN101236599A CN 101236599 A CN101236599 A CN 101236599A CN A2007103075796 A CNA2007103075796 A CN A2007103075796A CN 200710307579 A CN200710307579 A CN 200710307579A CN 101236599 A CN101236599 A CN 101236599A
- Authority
- CN
- China
- Prior art keywords
- face
- image
- camera
- human
- video camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 90
- 230000010354 integration Effects 0.000 title description 4
- 238000012544 monitoring process Methods 0.000 claims abstract description 95
- 238000000034 method Methods 0.000 claims abstract description 63
- 238000012545 processing Methods 0.000 claims abstract description 30
- 230000008569 process Effects 0.000 claims abstract description 27
- 230000004927 fusion Effects 0.000 claims abstract description 23
- 230000001815 facial effect Effects 0.000 claims description 53
- 238000004422 calculation algorithm Methods 0.000 claims description 40
- 238000012549 training Methods 0.000 claims description 28
- 238000003384 imaging method Methods 0.000 claims description 26
- 238000009826 distribution Methods 0.000 claims description 24
- 235000017899 Spathodea campanulata Nutrition 0.000 claims description 20
- 238000013507 mapping Methods 0.000 claims description 15
- 230000033001 locomotion Effects 0.000 claims description 13
- 239000011159 matrix material Substances 0.000 claims description 13
- 238000000354 decomposition reaction Methods 0.000 claims description 10
- 238000012360 testing method Methods 0.000 claims description 9
- 230000000007 visual effect Effects 0.000 claims description 8
- 230000003044 adaptive effect Effects 0.000 claims description 7
- 239000000203 mixture Substances 0.000 claims description 7
- 239000013598 vector Substances 0.000 claims description 7
- 230000007797 corrosion Effects 0.000 claims description 6
- 238000005260 corrosion Methods 0.000 claims description 6
- 238000010168 coupling process Methods 0.000 claims description 6
- 238000005859 coupling reaction Methods 0.000 claims description 6
- 238000000605 extraction Methods 0.000 claims description 6
- 230000008676 import Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 3
- 230000008878 coupling Effects 0.000 claims description 3
- 239000004744 fabric Substances 0.000 claims description 3
- 230000006870 function Effects 0.000 claims description 3
- 238000009434 installation Methods 0.000 claims description 3
- 230000009467 reduction Effects 0.000 claims description 3
- 229920006395 saturated elastomer Polymers 0.000 claims description 3
- 230000007306 turnover Effects 0.000 claims description 3
- 244000027321 Lychnis chalcedonica Species 0.000 claims 4
- IBDVBNUJEGRVQN-UHFFFAOYSA-N (+)-(R)-(12Z,15Z)-2-hydroxy-4-oxohenicosa-12,15-dien-1-yl acetate Natural products CCCCCC=CCC=CCCCCCCCC(=O)CC(O)COC(C)=O IBDVBNUJEGRVQN-UHFFFAOYSA-N 0.000 claims 1
- IBDVBNUJEGRVQN-RHNLGMIQSA-N persin Chemical compound CCCCC\C=C/C\C=C/CCCCCCCC(=O)C[C@@H](O)COC(C)=O IBDVBNUJEGRVQN-RHNLGMIQSA-N 0.000 claims 1
- 230000008901 benefit Effects 0.000 abstract description 2
- 235000013350 formula milk Nutrition 0.000 description 40
- 244000188014 Spathodea campanulata Species 0.000 description 16
- 230000014509 gene expression Effects 0.000 description 12
- 238000004364 calculation method Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 5
- 238000011160 research Methods 0.000 description 5
- 230000006399 behavior Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 244000287680 Garcinia dulcis Species 0.000 description 3
- 230000009471 action Effects 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 238000012804 iterative process Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000000151 deposition Methods 0.000 description 2
- 239000012467 final product Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 239000004576 sand Substances 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000012876 topography Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 206010003830 Automatism Diseases 0.000 description 1
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 239000000306 component Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 239000008358 core component Substances 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000011478 gradient descent method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 229940074869 marquis Drugs 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- VBUNOIXRZNJNAD-UHFFFAOYSA-N ponazuril Chemical compound CC1=CC(N2C(N(C)C(=O)NC2=O)=O)=CC=C1OC1=CC=C(S(=O)(=O)C(F)(F)F)C=C1 VBUNOIXRZNJNAD-UHFFFAOYSA-N 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
Abstract
一种基于多摄像机信息融合的人脸识别检测装置,包括用于监控大空间范围内多目标人体的大范围视频监控摄像机、用于对被跟踪的人物的脸部进行特写抓拍的多个快速球型摄像机和用于进行信息融合和人脸检测识别处理的微处理器,控制多个预先架设好的快速球型摄像机同时对准某特定人物的人脸部位进行特写抓拍,得到多角度的人脸部位图像并对其进行粗检测,自动判断适合的正面或者正侧位人脸图像后送给人脸识别引擎进行人脸识别检测处理,最后对上述多张单个人脸图像的识别结果通过系统的决策表决方式来确定系统人脸识别的结果。本发明实现的大范围、实时、非配合情况下人脸识别装置,具有识别精度高、检测速度快、设备要求低、实用性好等优点。
Description
技术领域
本发明涉及人脸识别检测领域,尤其是一种人脸识别检测装置。
背景技术
基于人脸识别检测可用于机关单位的安全和考勤、网络安全、银行、海关边检、物业管理、军队安全、计算机登录系统。比如,公安布控监控、监狱监控、司法认证、民航安检、口岸出入控制、海关身份验证、银行密押、智能身份证、智能门禁、智能视频监控、智能出入控制、司机驾照验证、各类银行卡、金融卡、信用卡、储蓄卡的持卡人的身份验证,等等。
人脸识别检测研究,主要包括人脸识别(face recognition)技术和人脸检测(facedetection)技术的研究。最初人脸研究主要集中在人脸识别领域,而且早期的人脸识别算法都是在认为已经得到了一个正面人脸或者人脸很容易获得的前提下进行的。但是随着人脸应用范围的不断扩大和开发实际系统需求的不断提高,这种假设下的研究不再能满足需求。在无约束条件情况下人脸识别检测正在作为独立的研究内容引起研究人员的更多关注和重视。
人脸识别检测是指对于任意一幅给定的图像,采用一定的策略对其进行搜索以确定其中是否含有人脸,如果是则返回人脸的位置、大小和姿态,接着对人脸进行识别。它是一个复杂的具有挑战性的模式检测问题,其主要的难点有三方面,(一)由于人脸内在的变化所引起:(1)人脸具有相当复杂的细节变化,不同的外貌如脸形、肤色等,不同的表情如眼、嘴的开与闭等;(2)人脸的遮挡,如眼镜、头发和头部饰物以及其他外部物体等;(二)由于外在条件变化所引起:(1)由于成像角度的不同造成人脸的多姿态,如平面内旋转、深度旋转以及上下旋转,其中深度旋转影响较大;(2)光照的影响,如图像中的亮度、对比度的变化和阴影等。(3)图像的成像条件,如摄像设备的焦距、成像距离,图像获得的途径等等;(三)由于图像采集手段所引起:在非理想采集条件下,人脸识别检测装置是在摄像环境不可控、环境条件变化剧烈、用户不配合的情况下使用的,难度更大的是在大空间范围内如何快速有效的跟踪多目标人体对象、获取人脸部位的图像,尤其是正面的人脸图像。上述这些困难都为解决人脸识别检测问题造成了难度。
精度和速度是一个人脸识别检测系统的两个重要方面,一般都希望一个系统既能有很高的精度又能达到实时的速度。但是实际应用中这两方面又常常存在矛盾。一般是在精度不能满足的条件下,牺牲速度来满足精度。如何能在保证精度的前提下,有效地提高系统的速度,对人脸识别检测的实际应用有很重要的意义。
在候机、候车、侯船大厅或者人潮拥挤的车站等大空间进行摄像监控时,最大的问题是如何架设摄像机以有效覆盖整个监控范围。光是监控几个出入口是不够的,当要监控在大空间内任意移动的人或物的行为或动向时,目前多采用架设多个固定摄像机来覆盖整个空间或采用快速球型摄像机来扫描整个空间。但是采用架设多个固定摄像机时如何有效管理这些摄像机是一个大问题,而且每个摄像机与实际环境的对应关系不容易建立,以及各摄像机的分辨率等不足等问题的存在都可能造成识别检测时的困难。即使采用快速球型摄像机来扫描整个空间,摄像机在转动过程中也会产生时间上的监控死角。尤其是在控制快速球型摄像机转动时,因为只能控制向上、向下、向左、向右等运动,往往无法很快地将快速球型摄像机转动到希望的监控对象位置,或者说不知道要控制快速球型摄像机转动到什么地方,造成监控效率的降低。
另外在大空间进行人脸识别检测时,最大的问题是如何获得人脸的正面图像。一般的人脸识别系统为了提高识别率,要求被识别者以正面的角度面对摄像机,这种方式容易造成被识别者的负担。另一方面,由于被识别者意识到摄像机的存在,故意避开摄像机或者背向摄像机而造成很难应用在安全监控系统上。由于上述原因,目前的这些识别检测方法在这样的情况下识别性能下降非常快很多情况下识别系统正确识别率陡降至75%以下,识别检测系统等错误率攀升到10%以上,这样的性能显然是应用系统用户无法接受的。
中国发明专利CN1794264中提出的视频序列中人脸的实时检测与持续跟踪的方法及系统,中国发明专利CN1924894中提出的多姿态人脸检测与追踪系统及方法,这些发明都是基于在小范围内的人脸检测;美国专利US2007092245中提出使用多个云台摄像机(PTZ Camera)监控以实现人脸的检测与跟踪,而多摄像机的跟踪对于运动目标的定位存在着一定的难度,同时采用普通的摄像机由于可视的范围是受限的,单一角度的,而且这种人脸检测的方法需要人必须正对着摄像机或者正侧面对着摄像机。上述已有技术在大范围多目标、摄像环境不可控、环境条件变化剧烈、用户不配合的情况下的人脸识别检测是难以实现的。
一个完善的、实用的人脸识别检测装置应该是装置去适应人,而不是人来适应装置,为了达到人脸识别的目的对使用者做过多的限制和要求实际上降低了装置实际应用价值。因此需要人脸识别检测装置自动判断人的存在与否,并且始终跟随人的运动,在此过程中完成智能感知或者交互的任务,然后根据被跟踪的人体对象的各方面细节去分析与判断该对象是谁;虽然目前的许多研究者尝试用人脸跟踪的方法获得更多的人脸部位的信息,但是人不可能总是固定不动,会有转身等动作;当这类动作发生时,人脸跟踪就会出现丢失、跟踪不到人脸而无法实现智能感知等问题,同时这种人脸跟踪技术无法实现对多目标情况下的人脸检测与识别。
发明内容
为了克服现有的人脸识别检测装置在获取人脸部分视频手段上单一、受限,无法实现大范围多目标的人脸识别以及在人脸识别时必须要求被识别者以正面或者正侧面的角度面对摄像机、识别的精度与速度还达不到实际应用等问题,本发明提供一种实现大范围实时人体跟踪视频监控与多角度定点的人脸抓拍、识别精度高、速度快、实用性好的基于多摄像机信息融合的人脸识别检测装置。
本发明解决其技术问题所采用的技术方案是:
一种基于多摄像机信息融合的人脸识别检测装置,包括用于跟踪监控大空间范围内多目标人体的运动以及行为的大范围视频监控摄像机、用于对被跟踪的人物的脸部进行特写抓拍的多个快速球型摄像机和用于对多摄像机进行信息融合和人脸检测识别处理的微处理器,所述的微处理器包括:大范围监控摄像机标定模块,用于建立监控空间的图像与所获得的视频图像的对应关系;大范围监控摄像机与快速球摄像机之间的视频数据融合模块,用于控制快速球摄像机的转动与调焦,使得快速球摄像机能对准所跟踪人体对象的脸部进行特写抓拍;虚拟线定制模块,用于定制在监控领域内的检测检测线,虚拟线定制在监控领域的出入口处;
人体对象ID号和存放跟踪人体对象的脸部图像文件夹的自动生成模块,用于对刚进入大范围监控摄像机的视场最外边的虚拟线的人体对象进行命名,当活动人体对象进入监控范围时,系统自动会产生一个人体对象ID号并同时生成一个以该人体对象ID号命名的文件夹,用于存放该人体对象的脸部的特写图像;
多对象人体跟踪模块,用于跟踪监控领域内的多目标人体对象,包括:
自适应背景消减单元,用于在底层特征层将监控领域背景中把前景对象目标部分的像素点提取出来,混合高斯分布模型来表征图像帧中每一个像素点的特征;设用来描述每个点颜色分布的高斯分布共有K个,分别标记为:
η(Yt,μt,i,∑t,i),i=1,2,3…,k (12)
式(12)中的下标t表示时间,各高斯分布分别具有不同的权值和优先级,再将K个背景模型按照优先级从高到低的次序排序,取定适当的背景模型权值和阈值,在检测前景点时,按照优先级次序将Yt与各高斯分布模型逐一匹配,若匹配,则判定该点可能为前景点,否则为前景点;若某个高斯分布与Yt匹配,则对该高斯分布的权值和高斯参数按一定的更新率进行更新;
阴影抑制单元,用于通过形态学运算实现,利用腐蚀和膨胀算子分别去除孤立的噪声前景点和填补目标区域的小孔,先对消除了背景模型后的前景点集F分别进行膨胀和腐蚀处理,得到扩张集Fe和收缩集Fc,通过处理所得到的扩张集Fe和收缩集Fc是对初始前景点集F进行填补小孔和去除孤立噪声点的结果;因此有以下关系Fc<F<Fe成立,接着以收缩集Fc作为起始点,在扩张集Fe上检测连通区域,然后将检测结果记为{Rei,i=1,2,3,…,n},最后将检测所得的连通区域重新投影到初始前景点集F上,得到最后的连通检测结果{Ri=Rei∩F,i=1,2,3,…,n};
连通区域标识单元,用于采用八连通区域提取算法提取前景目标对象;
跟踪处理单元;用于基于目标颜色特征跟踪算法,利用目标对象的颜色特征在视频图像中找到运动目标对象所在的位置和大小,在下一帧视频图像中,用运动目标当前的位置和大小初始化搜寻窗口,在连通区域标识单元处理后所得到的目标对象的方位以及大小,然后将处理结果提交给目标颜色特征跟踪算法,以实现多目标对象的自动跟踪;
人体对象的脸部特写图像定位抓拍模块,用于定位抓拍跟踪人体对象的脸部图像,对人体肤色建立一张二值图像,进行连通区域个数计算,检测人体头部在整个人体上端部位,检测连通区域高度的1/3;
人脸图像检测预处理模块,用于对存放在以人体对象ID号命名的文件夹内人体对象的脸部特写图像进行粗检测,用肤色区域的二值映射图作为人脸检测判定标准,如检测窗口Awindow内皮肤区域面积Askin所占的比例在设定范围之间,遍历整个人脸图像,并采用椭圆方法判定是否为正面人脸;
人脸检测精处理模块,用于对存放在以人体对象ID号命名的文件夹内经人脸图像检测预处理后的图像进行进一步的处理,采用离散小波分解、局部加窗得到局部冗余信号,两两配对计算局部信号相似度得到局部特征向量集,并将特征集分为两类“类内差”ΩT和“类间差”ΩE,利用Boosting算法从特征集中自适应选择弱分类器,最终构成强分类器,得到人脸图像IS;
人脸识别模块,用于对存放在人体对象ID号命名的文件夹中的有标记的人体对象的脸部的特写图像进行识别,经精检测后的人脸图像IS经过与训练步骤相同的特征提取得到局部信号,并与比对样本逐个计算局部相似度,然后输入集成分类器,最终识别类别由输出值最大的样本决定。
作为优选的一种方案:所述微处理器还包括:识别结果进行表决处理模块,用于对某个人体对象ID所对应的多个识别结果进行表决,评价一个人脸识别系统的标准,包括识别率、错误拒绝率、错误接受率;通过混淆矩阵来定义,混淆矩阵表示属于第i类的测试特征向量被分配到第j类的概率,用矩阵表示估计值和实际输出值,对于每一张人脸图像识别是一个两类问题的四个可能的分类结果;
对于第I张人脸图像的识别率可以由以下公式(19)计算,
对于第I张人脸图像的拒判率(False rejection rate,FRR)或拒真率(Falsenegtive rate)可以由以下公式(20)计算,
对于第I张人脸图像的误判率(False acceptance rate,FAR)或认假率(Falsepositive rate)可以由以下公式(21)计算,
采用多数表决的方法来确定K/n多数表决系统的PersonIDFAR(K/n)、PersonIDFRR(K/n)和PersonIDaccuracy(K/n);
共有n张被识别的图像,如果K张图像的人脸识别结果相同就判定为该结果,K为预设的阈值。
作为优选的另一种方案:所述微处理器采用多线程处理,将整个人脸识别检测分为以下处理线程:①多目标的人体跟踪与特写抓拍作为一个线程;②将基于YCrCb颜色模型进行粗检测作为一个线程,③将基于AdaBoost算法的组合成强分类器处理作为一个线程;④将人脸图像识别作为一个线程;⑤将表决处理作为一个线程;上述5个线程的优先级别是从线程的①到⑤顺序来确定。
进一步,所述的大范围视频监控摄像机为广角摄像机,所述广角摄像机安装在监控空间的一侧。
所述的大范围监控摄像机与快速球摄像机之间的视频数据融合模块,通过空间位置的映射将大范围视频监控摄像机和快速球型摄像机进行融合,当大范围视频监控摄像机发现人体对象目标之后,系统返回一个人体对象目标的坐标信息,并利用这一信息来控制多个快速球型摄像机以定位拍人体对象头部目标,多个快速球型摄像机抓拍人体对象头部目标的图像信息保存在系统所规定的文件夹内供后续人脸检测及人脸识别处理;每个快速球型摄像机安装位置不同,每个快速球型摄像机对应相应的空间对应关系标定表,当大范围视频监控摄像机检测到人体目标时,每个快速球型摄像机能根据自己与大范围视频监控摄像机的对应关系标定表进行快速定位。
所述大范围视频监控摄像机采用全方位视觉传感器,标定方法为:以全景图像中心为圆心,根据需要将全景图像分成一些圆环,然后将每个圆环划分成数个等份;一幅全景图像就被规则地分成了数个区域,每个区域有它特定的角度、方向和大小;根据全方位视觉传感器距地面的高度、快速球型摄像机空间位置和摄像头焦距等参数,依次确定各快速球型摄像机要检测的区域所需要水平、垂直旋转的角度以及焦距。
所述大范围视频监控摄像机采用广角摄像装置,标定方法为:依据广角摄像机的视场范围将所拍摄到的图像划分成数个等份,每个区域有它特定的角度、方向和大小,根据广角摄像装置距地面的高度、倾斜的角度、快速球型摄像机空间位置和摄像头焦距参数,依次确定各快速球型摄像机要检测的区域所需要水平、垂直旋转的角度以及焦距。
或者:所述的大范围视频监控摄像机为全方位摄像机,所述全方位摄像机安装在监控领域的中间,所述的全方位摄像机包括用于反射监控领域中物体的外凸折反射镜面,外凸折反射镜面朝下,用于防止光折射和光饱和的黑色圆锥体,黑色圆锥体固定在折反射镜面外凸部的中心,用于支撑外凸折反射镜面的透明圆柱体,用于拍摄外凸反射镜面上成像体的摄像头,摄像头对着外凸反射镜面朝上。
本发明的技术构思为:近年发展起来的全方位摄像机ODVS(Omni-Directional Vision Sensors)为实时获取场景的全景图像提供了一种新的解决方案。ODVS的特点是视野广(360度),能把一个半球视野中的信息压缩成一幅图像,一幅图像的信息量更大;获取一个场景图像时,ODVS在场景中的安放位置更加自由;检测环境时ODVS不用瞄准目标;检测和跟踪检测范围内的运动物体时算法更加简单;ODVS容易获得场景的实时图像并通过与快速球型摄像机之间的所建立映射关系实现多摄像机之间的信息融合。通过对360度全景范围内多目标人体对象的跟踪技术、全方位摄像机的三维空间定位技术以及多摄像机的信息融合技术,控制多个预先架设好的快速球型摄像机来同时对准某特定人物进行抓拍,然后系统自动判断适合的正面人脸后送给人脸识别引擎进行后续的人脸识别处理。本发明中将多目标人体对象的跟踪、快速球型摄像机的定位抓拍、人脸的检测与识别等处理采用多线程的方法对多个模块进行并行处理,这样人脸识别检测装置能够及时把处理器资源分给不同的模块,从而在保证检测和识别精度的前提下一定程度上解决了速度问题,使人脸识别检测装置达到实时与实用。
要解决人脸识别实用化的核心问题是:1)要实现使被识别者在无意识状态下的人脸识别,识别的环境条件几乎没有任何限制;2)识别的速度和精度都必须在使用者可以接受的范围内。
通过大范围视频监控摄像机来跟踪监控大空间范围内多目标人体的运动以及行为,通过对大空间范围内多目标人体对象的跟踪技术、人脸的定位技术、全方位摄像机的三维空间定位技术以及多摄像机的位置信息融合技术,控制多个预先架设好的快速球型摄像机来同时对准某特定人物的人脸部位进行特写抓拍,得到多角度的该人物的人脸部位图像并对其进行粗检测,然后由装置自动判断适合的正面或者正侧位人脸图像后送给人脸识别引擎进行后续的人脸识别检测处理,最后对上述多张单个人脸图像(不同摄像机在不同时间所拍摄的人脸图像)的识别结果通过系统的决策表决方式来确定系统人脸识别的结果。
本发明的有益效果主要表现在:解决了传统的监控设备监控范围单一角度的问题,从而无论人体处在实际场景的任何位置,都可以抓拍到实际的人脸的识别,不在需要人脸正对着摄像头,实现了机器去适应人;2、采用了从宏观、中观到微观的不同层次的、从全局到局部的、从粗到细节的各种不同的图像处理方法,并将这些处理分别以多线程方式来实现,圆满的解决了人脸识别中的速度与精度两者之间的矛盾,处理无须依赖于较大型设备,提高了系统的性能价格比;3、采用信息融合的手段,从时间和空间上将多个摄像机的信息进行融合,对多个人脸识别结果在决策层的信息融合,大大提高了人脸识别的正确率,减少了误判率和拒判率;4、实现的算法自动化智能化程度高,使用过程中无需人的任何干预,安装全方位摄像机以及快速球型摄像机方便、容易实现多传感器的信息融合。
附图说明
图1为全方位视觉传感器作为人体跟踪其他多个快速球型摄像机作为抓拍人体特写图像的多传感器融合的结构原理图;
图2为广角摄像机作为人体跟踪其他多个快速球型摄像机作为抓拍人体特写图像的多传感器融合的结构原理图;
图3为多视觉传感器融合的硬件组成结构图;
图4为多视觉传感器融合的人脸识别流程框图;
图5为人脸图像精检测中层叠分类器的处理流程;
图6为四个矩形的积分图的值计算的示意图;
图7为5种检测窗内的矩形特征例子;
图8为人脸识别系统训练过程框架图;
图9为人脸识别系统识别过程框架图;
图10为局部图像块采样扫描过程示意图;
图11为在最后的决策层中K/n多数表决系统的示意图;
图12为双曲面全方位视觉光学原理图;
图13为一种双曲面全方位视觉传感器的结构图;
图14为基于多摄像机信息融合的人脸识别检测系统的处理流程图;
图15为多目标人体跟踪的前期预处理流程图。
具体实施方式
下面结合附图对本发明作进一步描述。
实施例1
参照图1、图3~图15,一种基于多摄像机信息融合的人脸识别检测装置,大范围视频监控摄像机1,用于跟踪监控大空间范围内多目标人体的运动以及行为;采用多个快速球型摄像机2,用于对被跟踪的人物的脸部进行特写抓拍;采用一台微处理器5,用于对多摄像机进行信息融合和人脸检测识别处理,处理的流程参照附图14进行说明,1)大范围视频监控摄像机1跟踪大范围内多目标人体对象;2)根据被跟踪的人体对象的空间位置控制多个快速球型摄像机2对脸部进行特写抓拍;3)将特写抓拍到的脸部图像保存在某一预定的存储单元内;上述的处理是在一个线程中进行处理的,该线程的处理级别最高,如图14中的线程①所示;接着线程②对所采集到的人脸图像进行粗检测,在该线程处理中采用模式拒绝思想,对存储单元内的图像采用基于YCrCb颜色模型进行粗检测,淘汰一些不能或者难以进行人脸检测识别图像,接着判断可进行人脸检测识别图像数,如果达不到规定的可进行人脸检测识别图像数则要求多个快速球型摄像机2对继续跟踪人体脸部进行特写抓拍;粗检测后通过的图像文件被重新命名保存在文件夹内以便作下一步的精检测,线程②的优先级别略低于线程①;进一步进行人脸的精检测,精检测是在线程③中完成的,具体做法是采用基于AdaBoost算法的组合成强分类器,强分类器作为分级分类器的前面几级,对基于YCrCb颜色模型进行粗检测后的图像进行过滤,最后再用一个强分类器进行进一步过滤。通过在前几级的处理基本上过滤掉了大多数的非人脸图像以及难以识别的人脸图像,因此在最后一级强分类器的图像窗口有大幅度的减少,在提高检测速度的同时又提高检测精度;精检测后通过的图像文件被重新命名保存在文件夹内以便作下一步的人脸识别,线程③的优先级别略低于线程②;更进一步,对精检测处理后的图像进行人脸识别,人脸识别是在线程④中完成的;在该线程中采用基于局部特征人脸识别方法,与人脸检测一样,不同的是在人脸检测中使用的样本是人脸和非人脸,而在人脸识别中使用的样本各种不同人脸样本,识别的结果是找到与人脸样本中相匹配的人脸,线程④的优先级别略低于线程③;最后对多个人脸图像识别的结果进行表决处理,由于在上述的技术方案中采用了对在不同的摄像条件下某一个特定的人脸进行了多次识别,每张人脸图像识别结果是相对独立的,因此可以采用概率统计的方法对多个识别结果进行表决处理来提高整个装置的识别率(Accuracy),减少误判率(False acceptance rate,FAR)和拒判率(False rejectionrate,FRR);表决处理是在线程⑤中进行的,其优先级别是最低的;
下面结合上述的处理流程具体说明实现的细节与系统的连接方法,所述大范围视频监控摄像机1和多个快速球型摄像机2通过视频卡连接微处理器,如图3所示;所述的微处理器包括:图像显示单元,用于显示整个监控范围内的视频图像、跟踪人体对象的人脸部位图像;所述的大范围监控摄像机1为全方位摄像机,该全方位摄像机安装在监控领域的中间,用于监视整个空间内的人体对象;所述的快速球型摄像机2,用于对进入监控领域内的人体对象的人脸部位进行特写抓拍,通过大范围监控摄像机1的跟踪得到人体对象所在的空间位置,微处理器根据该位置信息指示快速球型摄像机2朝着人体对象的人脸部位所在的空间位置的方向旋转调焦,然后进行抓拍;所述的大范围监控摄像机1与快速球型摄像机2之间的动作关系是通过映射表来实现的;所述的全方位摄像机包括用于反射监控领域中物体的外凸折反射镜面,外凸折反射镜面朝下,用于防止光折射和光饱和的黑色圆锥体,黑色圆锥体固定在折反射镜面外凸部的中心,用于支撑外凸折反射镜面的透明圆柱体,用于拍摄外凸反射镜面上成像体的摄像头,摄像头对着外凸反射镜面朝上;所述的微处理器还包括:大范围监控摄像机1标定模块,用于建立监控空间的图像与所获得的视频图像的对应关系;大范围监控摄像机1与快速球摄像机2之间的视频数据融合模块,用于控制快速球摄像机2的转动与调焦,使得快速球摄像机2能对准所跟踪人体对象的脸部进行特写抓拍;多目标跟踪模块,用于跟踪监控领域内的多目标人体对象;虚拟线定制模块,用于定制在监控领域内的检测检测线,一般虚拟线定制在监控领域的出入口处;人体对象ID号和存放跟踪人体对象的脸部图像文件夹的自动生成模块,用于对刚进入大范围监控摄像机的视场最外边的虚拟线的人体对象进行命名,当活动人体对象进入监控范围时,系统自动会产生一个人体对象ID号并同时生成一个以该人体对象ID号命名的文件夹,用于存放该人体对象的脸部的特写图像;多目标人体跟踪模块,用于跟踪进入监控领域内的多目标人体对象;人体对象的脸部特写图像定位抓拍模块,用于定位抓拍跟踪人体对象的脸部图像;人脸图像检测预处理模块,用于对存放在以人体对象ID号命名的文件夹内人体对象的脸部特写图像进行粗检测,快速的淘汰一些没有人脸部位的图像,对有希望能进行人脸识别的图像的文件名上做上标记,为后续人脸检测精处理准备好图像数据;人脸检测精处理模块,用于对存放在以人体对象ID号命名的文件夹内经人脸图像检测预处理后的图像进行进一步的处理,以保证后续图像识别处理的效率,对有希望能进行人脸识别的图像的文件名上做上标记,为后续人脸识别处理准备好图像数据;人脸识别模块,用于对存放在人体对象ID号命名的文件夹中的有标记的人体对象的脸部的特写图像进行识别;识别结果进行表决处理模块,用于对某个人体对象ID所对应的多个识别结果进行表决,以提高整个装置的识别率,减少误判率和拒判率;
所述的人体对象ID号,用于产生一个能标识跟踪的人体对象、存储对该人体对象的进入监控领域的时间、走向等数据进行记录的主键,人体对象ID号的命名规则是:YYYYMMDDHHMMSS*以14位符号命名,YYYY-表示公历的年;MM-表示月;DD-表示日;HH-表示小时;MM-表示分;SS-表示秒;均由计算机的系统时间自动产生;
所述的人体对象ID号和存放跟踪人体对象的脸部图像文件夹的自动生成模块,用于保存跟踪的人体对象脸部的特写图像以及后续处理后的图像结果,当人体对象进入监控范围(最外的虚拟线)时,系统自动产生一个人体对象ID号,同时在某个存放图像的文件夹内创建一个与人体对象ID号同名的文件夹,用来存放该人体对象脸部的特写图像以及后续处理后的图像结果,图像文件的命名方式是根据对快速球摄像机2的编号以及抓拍的次数来确定的,如果有5台快速球摄像机2构成,我们对这5台快速球摄像机2进行编号,分别为1号快速球摄像机,...,5号快速球摄像机;如果系统抓拍了一次,那么所产生的图像文件名分别为11、21、31、41、51,图像文件名51就表示了编号为5号的快速球摄像机第1次抓拍到的人体对象脸部的特写图像;
所述的多目标人体跟踪模块,用于跟踪进入监控领域内的多目标人体对象;为计算活动人体走向、各种事件的检测以及人体对象脸部的定位抓拍提供技术基础;在实现多目标人体跟踪时,首先要在底层特征层将监控领域背景中把前景人体部分的像素点提取出来。提取人体部分的像素点的方法主要由自适应背景消减、阴影抑制和连通区域标识三个部分组成,其顺序图如附图15所示;
所述的自适应背景消减,用于实时分割人体对象目标,我们采用的是基于混合高斯分布模型的自适应背景消除算法,它的基本思想是:使用混合高斯分布模型来表征图像帧中每一个像素点的特征;当获得新的图像帧时,更新混合高斯分布模型;在每一个时间段上选择混合高斯分布模型的子集来表征当前的背景;如果当前图像的像素点与混合高斯分布模型相匹配,则判定该点为背景点,否则判定该点为前景点。
针对图像的YCrCb颜色空间中的亮度值Y分量进行检测。自适应混合高斯模型对每个图像点采用了多个高斯模型的混合表示,设用来描述每个点颜色分布的高斯分布共有K个,分别标记为
η(Yt,μt,i,∑t,i),i=1,2,3…,k (1)
式(1)中的下标t表示时间。各高斯分布分别具有不同的权值和优先级,再将K个背景模型按照优先级从高到低的次序排序,取定适当的背景模型权值和阈值。在检测前景点时,按照优先级次序将Yt与各高斯分布模型逐一匹配。若匹配,则判定该点可能为前景点,否则为前景点。若某个高斯分布与Yt匹配,则对该高斯分布的权值和高斯参数按一定的更新率进行更新。
所述的连通区域标识,用于提取前景人体对象,连通区域标识的方法很多,本发明中采用的是八连通区域提取算法。另外连通区域标识受初始数据中的噪声影响很大,一般需要先进行去噪处理,去噪处理可以通过形态学运算实现,本文中利用腐蚀和膨胀算子分别去除孤立的噪声前景点和填补目标区域的小孔,具体做法是:先对消除了背景模型后的前景点集F分别进行膨胀和腐蚀处理,得到扩张集Fe和收缩集Fc,通过处理所得到的扩张集Fe和收缩集Fc可以认为是对初始前景点集F进行填补小孔和去除孤立噪声点的结果。因此有以下关系Fc<F<Fe成立,接着以收缩集Fc作为起始点,在扩张集Fe上检测连通区域,然后将检测结果记为{Rei,i=1,2,3,...,n},最后将检测所得的连通区域重新投影到初始前景点集F上,得到最后的连通检测结果{Ri=Rei∩F,i=1,2,3,...,n},通过这种目标分割算法既能保持目标的完整性同时也避免了噪声前景点的影响,还保留了目标的边缘细节部分。
经过以上三个步骤就可以从静态的监控领域背景中将动态的前景人体对象提取出来,并且可以得到基于人体对象的一些初始信息,如人体对象的大小和位置等等。在监控领域背景中提取出前景人体对象后,接着的处理是对监控领域内的人体对象进行跟踪处理;本发明中采用基于目标颜色特征跟踪算法,该算法是对MEANSHIFT算法的进一步改进,在该算法中利用人体目标对象的颜色特征在视频图像中找到运动人体目标对象所在的位置和大小,在下一帧视频图像中,用运动目标当前的位置和大小初始化搜寻窗口,重复这个过程就可以实现对目标的连续跟踪。在每次搜寻前将搜寻窗口的初始值设置为运动目标当前的位置和大小,由于搜寻窗口就在运动日标可能出现的区域附近进行搜寻,这样就可以节省大量的搜寻时间,使该算法具有了良好的实时性。同时该算法是通过颜色匹配找到运动目标,在运动目标运动的过程中,颜色信息变化不大,所以该算法具有良好的鲁棒性。在连通区域标识处理后所得到的人体目标对象的方位以及大小,然后将处理结果提交给目标颜色特征跟踪算法,以实现人体对象的自动跟踪,如附图4所示。
所述的人体对象的脸部特写图像定位抓拍模块,用于定位抓拍跟踪人体对象的脸部图像;在多目标人体跟踪模块处理中获得了人体对象的大小与方位信息,我们还需要从整个人体跟踪框内快速的获得人体对象的脸部位置信息,以便能对人体对象的脸部特写抓拍;但是有时候会出现这种情况,即人体对象背朝着大范围监控摄像机1的视觉方向,因此在大范围监控摄像机1视频图像中无法获得人体对象的脸部信息;本发明中采用肤色定位以及人体模型来确定人体对象的头部位置,大量研究表明不同年龄的人的肤色看上去不同,但是这种不同主要体现在亮度上。在去除亮度的亮度空间中,不同人的肤色分布具有很好的聚类性。建立肤色聚类模型的步骤如下:
1、将人脸的皮肤区域从每区域分割出来,获取肤色样本;
2、由于大部分的图像捕捉设备采用的都是RGB格式,因此需要将肤色样本的颜色格式进行转换,从RGB空间转换到YUV色彩空间的转换矩阵如下;
3、对转换后的肤色区域的Cr和Cb的值进行统计分析,给出它们值的分布信息。根据研究成果,发现人脸肤色在YUV空间内的Cr和Cb值分布在特定的范围之内:133≤Cr≤173,77≤Cb≤127,则可判断出为人体。如果满足上述条件,即为肤色点,并对人体肤色建立一张二值图像,并进行连通区域个数计算。对于人脸肤色的检测,并不需要检测二值图中的一个连通区域的全部,因为只需要脸部肤色检测即可,人体头部在整个人体上端部位,则可设置只检测连通区域高度的1/3,能快速的将人脸部位进行定位。对于无法检测到的人脸肤色情况,考虑人体的头部占整个人体对象高度方向上的1/7左右,因此可以对所检测连通区域高度方向上端的1/6~1/7处进行定位,定位框的大小是由人体对象连通区域宽度和人体对象高度的比例来确定的。在得到定位框的大小以及方位后,就可以指示其他多个快速球摄像机2朝着定位框的方位进行抓拍人脸部位图像,所拍摄的图像按所述的人体对象ID号和存放跟踪人体对象的脸部图像文件夹的自动生成模块中所约定的方式存储,为是否含有人脸检查模块中进行粗检测提供图像数据;
上述这些处理模块都集成在线程①内;
所述的人脸检测预处理模块,用于对存放在以人体对象ID号命名的文件夹内人体对象的脸部特写图像进行粗检测,集成在线程②内,主要是对有希望能进行人脸识别的图像的文件名上做上标记,为后续人脸识别处理准备好图像数据;本发明中采用模式拒绝思想,对存储单元内的脸部特写图像采用基于YCrCb颜色模型进行粗检测,淘汰一些不能或者难以进行人脸检测识别图像,基于肤色模型的人脸检测大致上可分为两个步骤:(1)人脸区域筛选:利用肤色模型逐个检测像素是否属于皮肤或人脸区域内的像素或者评估属于皮肤或人脸区域的似然度。与模式拒绝的类似,用于减少侯选区域的范围;(2)人脸验证:对属于皮肤或人脸的区域进一步进行验证,以判断是否为人脸。人脸检测预处理算法步骤如下:
1)遍历图像的每个像素,用YCrCb空间的查找表方法为每个像素赋一个属于肤色的概率值,根据预先设置的阈值(133≤Cr≤173,77≤Cb≤127)决定该像素是否属于人脸皮肤,最后得到图像的肤色区域二值映射图,0、1分别表示皮肤区域和非皮肤区域;
2)用肤色区域的二值映射图作为人脸检测的重要线索,只有检测窗口Awindow内皮肤区域面积Askin所占的比例在某个范围之间才进行下一步的人脸验证,验证的公式如式(3)所示,
式中:Awindow为二值映射图的检测窗口,Askin为二值映射图的检测窗口Awindow内皮肤区域面积,λ1、λ2为判断系数,分别取0.65和0.98;在计算检测窗口内皮肤区域的面积时用到积分图像的方法,对上面的二值映射图求积分图像,这样肤色区域面积可以通过积分图像的简单的加减运算得到,事实上积分图像在上一步遍历图像的同时即可计算得到,通过人脸检测预处理的筛选大部分非人脸区域以及侧位的人脸图像被排淘汰了;由于人脸在正面情况下,其外部轮廓为椭圆型,因此也可以通过椭圆拟合的方法来进行验证二值映射图是否是正面人脸;
3)对于通过人脸验证的检测窗口Awindow,为了提高后续人脸识别的效率,首先我们将检测窗口Awindow乘上一个数来适当的扩大窗口的面积,使得该面积能包含整个人脸部分(类似于身份证的照片)并对其进行截取,然后将所截取在原图像名的后面加上一个字符0,比如原图像名为51,经人脸检测预处理算法处理后的图像名为510,在后续人脸识别处理中只对文件名长度为3个字符的图像文件进行人脸识别检测处理;
4)在人脸检测预处理模块中需要遍历在文件夹下面的所有文件名长度为2个字符的图像文件(抓拍的图像),在处理完这些图像文件后,需要检查可供人脸识别检测处理的图像文件数,如果检测出少于所规定的数,那么就要求快速球摄像机2继续进行抓拍。
所述的人脸检测精处理模块,用于对存放在以人体对象ID号命名的文件夹内经人脸图像检测预处理后的图像进行进一步的处理,以保证后续图像识别处理的效率,该模块集成在线程③内,主要是对有希望能进行人脸识别的图像的文件名上做上标记,为后续人脸识别处理准备好图像数据;本发明中采用基于AdaBoost算法的组合成强分类器对人脸图像检测预处理后的图像进行处理,附图5为一种层叠分类器的形式,它是由一系列强分类器的组合而成,其中每一层都是算法训练得到的一个强分类器。层叠分类器中的第一级可以只使用非常少的计算量,去除大量的非人脸窗口。接下来的一些子分类器层进一步去除剩余部分中的非人脸窗口,但是需要更多的计算量。经过几级分类器的处理,候选人脸的子窗口数量急剧下降。组成强分类器的弱分类器个数随着级数的增加而增加。每层的强分类器经过阈值调整,使得每一层都能让几乎全部的人脸样本通过,而淘汰很大一部分非人脸样本。
人脸检测精处理模块中主要包括训练器和检测器两个部分,关于检测器中的特征计算主要由学者P.Viola首先提出,该学者的重要贡献是实现了快速人脸检测,使人脸检测更趋于实用。在检测器中有三个关键问题得到了很好的解决:1)利用了“积分图”的概念,这使得检测器中特征的计算非常快;2)基于AdaBoost的学习算法。它能从一个很大的特征集中选择很小的一部分关键的特征,从而产生一个极其有效的分类器;3)在级联的检测器中不断增加更多的强分类器。这可以很快排除背景区域,从而节约出时间用于对那些更像人脸的区域进行计算。
所述的“积分图”,如附图6所示,坐标点(x,y)的积分图定义为其所对应的图中左上角的像素值之和,用公式(4)表示,
式中,ii(x,y)表示像素点(x,y)的积分图,i(x,y)表示原始图像。
因此要计算得到ii(x,y)通过通过公式(5)进行迭代计算,
s(x,y)=s(x,y-1)+i(x,y) (5)
ii(x,y)=ii(x-1,y)+s(x,y)
式中,s(x,y)表示行的积分和,且s(x,-1)=0,ii(-1,y)=0。
因此要求得一幅图像的积分和,只需遍历一次图像即可。借助于图6中使用的四个矩形,可以使用积分图计算任何矩形中所有像素的值之和。对于图6中使用的四个矩形的积分图的值计算,点“1”的积分图的值是矩形框A中所有像素的像素值之和。点“2”的积分图所对应的值为A+B,点“3”是A+C,点“4”是A+B+C+D,所以D中所有的像素值之和可以用4+1-(2+3)计算。
关于求矩形构成的特征,如图7所示的是检测窗内的矩形特征例子。特征值的求法为白色矩形框内的所有像素点的和减去灰色矩形框中的所有像素点的和。图7中的(A)(B)表示的是两个矩形框的Harr-like特征,图7中的(C)表示的是三个矩形框的Harr-like特征,图7中的(D)(E)表示的是四个矩形框的Harr-like特征,这五种对称矩形Haar-Like特征是由学者P.Viola所提出,并用来描述人脸的边缘特征信息。很明显,图7中由两个矩形构成的特征,其像素和之差可通过六个参考矩形求得;由三个矩形构成的特征可以通过八个参考矩形求得;由四个矩形构成的特征可以通过九个参考矩形求得。
所述的基于AdaBoost的学习算法,用于将一个很大的特征集中选择很小的一部分人脸关键的特征,从而产生一个极其有效的分类器;图7中所示的矩形特征在样本图像中的大小和位置都是可变的,因此在逐像素遍历的情况下特征总数目为210208个,其具体分布数目如表1所示,
表1对称矩形特征数目统计表
特征类型 | A | B | C | D | E |
数目 | 65472 | 66240 | 41664 | 31680 | 5152 |
表1中的特征总数目数远大于图像中像素的数目,由于采用了上述的“积分图”后每个特征都能很快计算出来,表2为各类对称矩形特征值的辅助计算次数表,
表2对称矩形特征值的辅助计算次数表
特征类型 | A | B | C | D | E |
计算次数 | 6 | 6 | 8 | 9 | 16 |
由于正面人脸的器官布局比较固定,具有明显的对称性,考虑到后续的人脸识别中需要的是正面人脸的图像,所以本发明中采用对称矩形特征来描述人脸。接着可以通过试验选出一小部分作为特征以形成一个有效的分类器。要得到最终的强分类器,最重要的是如何找到这些特征。因此每个弱分类器的设计都是从能对正例和反例进行正确分类的所有弱分类器的集合中选择错误率最小的一个。对每个特征而言,弱学习器决定弱分类器的最佳的门限值,使其具有最小的误分样本数。因此一个弱分类器hj(x)由一个特征fj、一个门限值θj和一个指示不等式方向的校验器Pj所构成,用公式(7)表示,
式中:hj(x)表示弱分类器的分类结果,θj表示弱学习算法寻找出的阈值,Pj∈{-1,1)表示不等号的偏置方向,fj(x)表示特征值,x表示一个矩形特征,是图像中一个24×24像素大小的子窗口;由于不等号的偏置方向有两个,因而每个特征对应有两个弱分类器。弱学习的最终目的是找出使分类器具有最好分类性能的θj和Pj。
在AdaBoost的训练过程中,训练样本自身的各个特征值不会随着训练而改变,改变的只是样本的权重ωj。因此对于每个正在进行弱学习的特征,将对于所有样本的该特征值都计算出来,θj的遍历寻优只需在样本特征值分布空间中进行,对单个特征fj(x)而言,所有的训练样本对于该特征值可以表示为fj(x1),fj(x2),…,fj(xn),因此只要求得和i=1,2,…,n,这样得到了一个先验信息,最优阈值θj只需要在区间 内寻找,从而可以缩小遍历空间,减少训练时间。另外偏置Pj∈{-1,1}所构成的弱分类器的误差εt,P=-1和εt,P=1是互补的,即存在着εt,P=-1=1-εt,P=1关系,所以我们只需要对其中一个偏置计算出其最大的误差率maxεt,P=-1或者最小的误差率minεt,P=-1,如果minεt,P=-1<1-maxεt,P=-1成立,那么该弱分类器的最优偏置为-1,否则为1,通过这种判断可以减少计算量。下面是训练一个弱分类器的算法,
●给定矩形特征f(x)及训练样本(x1,y1),...,(xm,ym)和样本权值ω1,...,ωm;
●error=(lerror+rerror)表示当前弱分类器的错误里的最小值。初始时左误差lerror=lel0,右误差rerror=lel0;
●for i=1 to rn=f(xj)
●对样本按eval从小到大排序
●for i=1 to m-1
3.left=wyl/wl,right=wyr/wr
4.if left<right then left=-1,right=1else left=1,right=-1
6.if lerror+rerror<error then
error=lerror+rerror
θ=(eval[i]+eval[i+1])/2
α1=left,α2=right
从AdaBoost算法的迭代过程可以看出,AdaBoost算法的核心思想是每一次迭代过程在当前的概率分布(样本权值可以看作一种概率分布)上找到一个具有最小错误率的弱分类器,然后调整概率分布,增大当前弱分类器错分的样本的权值,降低当前弱分类器正确分类的样本的权值,以突出分类错误的样本,使得下一次迭代更加针对本次的不正确分类,即针对更“难”分类的样本,使得那些被错分的样本得到进一步的重视。最终选择最具有分类意义的t个弱分类器根据权值合成一个强分类器。
所述的AdaBoost训练强分类器算法如下,
●确定要训练的轮数T
●获取并保存训练样本
P表示人脸样本集合,叫做P集,人脸样本也叫正例;N表示非人脸样本集合,叫做N集,非人脸样本也叫负例;样本可以表示为(x1,y1),...,(xm,ym),当yi=1时,样本i是正例,yi=-1是负例;m是样本总个数,p为正样本个数q为负样本个数,p+q=m。
●初始化样本权值,wi(i)=1/2p for正例,wi(i)=1/2q for负例
●f为当前强分类器的误检率,初值f=1
●for t=1 to T
●for每个矩形特征训练一个相应的弱分类器hj(x),选择分类错误最小的弱分类器做为当前分类器ht(x)。其中,分类错误
●更新每个样本的权值
●t=t+1
上述的AdaBoost算法用于人脸与非人脸的检测,在检测并判定为是人脸的情况下,接着就需要进行人脸识别,识别出这张图像是谁;
所述的人脸识别,用于对精检测后的人脸图像进行人脸识别,该识别模块集成在线程④内,本专利中采用基于局部特征人脸识别方法,与人脸检测一样,不同的是在人脸检测中使用的样本是人脸和非人脸,而在人脸识别中使用的样本各种不同人脸样本,因此首先对精检测后的人脸图像IS进行离散小波变换将人脸模式的差异分为类内差和类间差,通过在不同分辨率的局部区域采样构造弱分类器并用AdaBoost算法进行自适应集成。针对输入图像IS和数据库样本IT之间的差异d(IS,IT)进行建模,d(IS,IT)可以分为两类,“类内差”ΩT和“类间差”ΩE。根据Bayes决策理论,若IS和IT属于同类则有公式(8),
P(ΩT|d(Is,IT))>P(ΩE|d(Is,IT)) (8)
决策规则可以用公式(9)表示,
J(Is,IT)=P(d(Is,IT)|ΩT)P(ΩT)-P(d(Is,IT)|ΩE)P(ΩE) (9)
在识别过程中只有J(Is,IT)≥0,即当差异属于“类内差”ΩT时,才将IS和IT判为同类,否则属于不同类;为了实现基于局部特征人脸识别,系统构造分为训练和识别两个阶段,在系统训练阶段时,人脸识别系统训练过程框架如附图8所示;人脸图像样本经过预处理、离散小波分解、局部加窗采样得到局部冗余信号,然后两两配对计算局部信号相似度得到局部特征向量集,并将特征集分为两类“类内差”ΩT和“类间差”ΩE。然后利用Boosting算法从特征集中自适应选择弱分类器,最终构成强分类器;在系统识别阶段时,人脸识别系统框架如附图9所示,经精检测后的人脸图像IS经过与训练步骤相同的特征提取得到局部信号,并与比对样本逐个计算局部相似度,然后输入集成分类器,最终识别类别由输出值最大的样本决定。在进行人脸识别时提交给识别的图像是在人脸精检测处理后的人脸图像,从而保证了在识别阶段的人脸图像的质量,同时也决定了人脸的确切位置。
在附图8、9中所示的图像预处理中,本发明中用一个椭圆模板对图像进行掩模处理,其目的是为了突出人脸部分而抑制发型衣服背景的影响,具体做法是采用模糊模板构造方法,以坐标(39.5,41)为中心的椭圆,把椭圆内部设置为1,把椭圆外部以指数形式递减至0;在掩模处理操作时只要将这个预先存储的模板与输入的图像矩阵做点对点的乘法即可;这种做法的优点是:考虑到不同的脸型在人脸识别中的重要作用的同时又能充分抑制背景、衣服等对识别的影响;
在附图8、9中所示的离散小波变换处理中,本发明采用线性变换的形式对掩模处理后的人脸图像进行离散小波变换,变换公式由(10)给出,
式中,Wwavelet T为小波滤波器,y称为小波脸,x为掩模处理后的人脸图像;
由于小波脸投影方向只与单个样本有关,当人脸数据库中加入新个体时不需要考虑全部训练样本。如果我们采用4级小波分解的系数的方法,其中每级分解都是在前一级的近似系数域上进行的,同时抛弃第一、二级分解的细节系数,可以得到14个小波系数域;在低分辨率的小波域中不同个体的人脸表现出极大的相似性,因而不容易进行人脸识别;而在较高的分辨率的小波域中能显示出不同人脸间的细节差异,通过提取局部人脸特征信息为人脸识别作好特征数据准备;
在附图8、9中所示的局部区域采样处理中,为了得到鲁棒的局部分类器,对原始信号冗余化,用移动正方形窗口在小波系数域上采样,子窗口扫描方向为从左到右、从上到下,附图10表示了局部图像块采样扫描过程;窗口边长si和移动距离gi在不同分辨率有所不同,表3所示的是小波分解每级的局部特征说明,
表3小波分解每级的局部特征
小波分解级数 | 对应的块的序号 | 分辨率(像素) | 移动窗尺寸si(像素) | 移动栅格gi(像素) | 数目N=280(个) |
1 | 1、2、3 | 48*40 | 16 | 8 | 20*3=60 |
2 | 4、5、6 | 24*20 | 8 | 4 | 20*3=60 |
3 | 7、8、9、10 | 12*10 | 4 | 2 | 20*4=80 |
4 | 11、12、13、14 | 6*5 | 2 | 1 | 20*4=80 |
接着需要进行计算小波局部块特征,这些计算出来的特征值用于设计弱分类器,弱分类器的设计要求是对特征计算简单并能有效的区分“类内差”ΩT和“类间差”ΩE两类不同的特征,本发明中使用一对局部信号WIl t、WIl r的归一化相关系数作为区分两类的特征,用公式(11)来进行计算,
式中,1为对应的局部区域,xl的取值范围[-1,+1],越接近1表示相关性越好,为了增加特征对人脸表情和光照等变化的鲁棒性,本发明中采用了邻域局部搜索和方差规范化这两种方法;
所述的邻域局部搜索方法,是对输入图像的局部块在参考图像对应块邻域上下左右平移计算相关值,并取最大值,由计算公式(12)给出,
式中,参考图像对应块邻域上下左右平移量Δ=si/8,si为局部块的边长;
所述的方差规范化方法,本发明中采用块内方差规范化方法来抑制光照的影响,块内方差规范化计算公式由(13)给出,
式中,m为信号均值,σ为方差,σ的计算公式如下,
为了提高计算速度,本发明中使用附图6所示的积分图方法,预先计算并存储样本小波系数的积分图及平方值的积分图,这样可以把局部求和的运算简化为加减运算;
在附图8、9中所示的强分类器,是从以上计算得到的弱分类器集合里选择一个子集组成有效的强分类器,并计算弱分类器权重;因此组合强分类器模型构造的关键问题是:1)如何选择弱分类器{ht(x)}t=1 T;2)如何确定分类器权重{αt}t=1 T,使得组合分类器的泛化误差小。
所述的弱分类器,是在小波分解系数的不同区域构造多个分类器;“类内差”ΩT和“类间差”ΩE分别构成训练集的正样本和负样本。分类效率是选择弱学习 器的主要依据,本专利中使用优化阈值分类器用样本特征的加权版本训练,wi为样本权重,优化约束条件为
,利用梯度下降法得到对应的最优阈值θi,这样阈值分类函数可以由公式(14)给出,
所述的确定分类器权重{αt}t=1 T,用于将以上弱分类器集合里选择一个子集组成有效的强分类器,本发明中采用基于置信率Confidence-rated的AdaBoost分类方法组成有效的强分类器,该分类方法是一个迭代过程它的每次迭代都选择一个弱分类器ht,使公式(15)最小化,
式中,wt(i)是第t次迭代中样本i的权重,xi是样本特征,yi∈(-1,1)为类标记,ht为弱分类器,置信率α有两种可能的取值,即
式中,W+-为正样本被错分为负样本时的权重,W-+为负样本被错分为正样本时的权重,W++为正样本被分为正样本时的权重,W--为负样本被分为负样本时的权重;
人脸识别与训练的关键算法如下,
●输入N个训练样本序列((x1,y1),...,(xN,yN))
●初始化根据yi=-1或1设置训练样本初始权重
其中i=1,...,N,m和l分别为负样本和正样本个数,N=m+1
●Do for t=1,...,T其中T代表迭代次数
1.规范化权重分布
2.对于每一个特征j用权重分布wi t训练弱分类器hj,具体见上述的弱分类器训练过程,
3.计算hj误分类损失
4.选择弱分类器ht,依据若 εt>0.5,则置T=t-1退出循环。
5.计算加权值αt,具体见确定分类器权重的处理,公式(16)
6.设置新的权重向量为
●输出 最终的强分类器为
为了提高人脸识别速度,在识别过程中增加了模式拒绝的手段来加速识别速度,具体做法是首先排除明显的样本空间中不相关样本来缩小侯选范围,由T个弱分类器组成强分类器,
然而T个弱分类器不必全部计算完后才进行判断,阶段性地根据拒绝阈值Threject拒绝负样本,即样本相似度小于Threject则属于“类间差”ΩE,用公式(17)来表示,
式中,
Ti为弱特征子集个数,Ti<T,拒绝阈值Threject通过训练样本得到;
实际中为了保证鲁棒性每增加10个特征进行一次拒绝操作,并给拒绝阈值设置一个松弛量Threject=min(H(x+)t-Δ),Δ的取值范围可以由下列公式计算,
Δ=0.1*(max(H(x+)t)-min(H(x+)t)) (18)
所述的决策层表决处理模块,用于对某个人体对象ID所对应的多个识别结果进行表决,以提高整个装置的识别率,减少误判率和拒判率;该模块集成在线程⑤内;评价一个人脸识别系统的标准,包括识别率、错误拒绝率、错误接受率等;可以通过混淆矩阵来定义,混淆矩阵(Confusion matrix)表示属于第i类的测试特征向量被分配到第j类的概率,用矩阵表示估计值和实际输出值,对于每一张人脸图像识别是一个两类问题的四个可能的分类结果;用表4表示一张人脸图像识别分类的混淆矩阵,
表4混淆矩阵
对于第I张人脸图像的识别率可以由以下公式(19)计算,
对于第I张人脸图像的拒判率(False rejection rate,FRR)或拒真率(Falsenegtive rate)可以由以下公式(20)计算,
对于第I张人脸图像的误判率(False acceptance rate,FAR)或认假率(Falsepositive rate)可以由以下公式(21)计算,
误判率是衡量一张人脸图像的识别性能好坏的重要指标,然而实际使用中更关注的是拒真率FRR和认假率FAR这两项指标。因为识别率=100%-FAR-FRR,而由于接受阈值的作用使FAR和FRR之间是相互矛盾的,因此根据实际应用需求合理地选择平衡这两个指标是非常重要的;
在本发明中,我们采用了人体跟踪技术,并将在多个角度、多个摄像机抓拍的人脸图像经检测预处理后存放在存放跟踪人体对象的脸部图像文件夹内,因此可以采用对在不同的摄像条件下某一个特定人物的多张人脸图像进行识别;由于摄像人脸的内外部条件相对独立这时该人物的每张人脸图像识别结果是相对独立的,因此可以采用概率统计的方法对多个识别结果进行表决处理来提高整个装置的识别率(Accuracy),减少误判率(False acceptance rate,FAR)和拒判率(Falserejection rate,FRR);如附图4所示,下面结合图4做流程说明,图中有5个快速球型摄像机,在跟踪某一个人体对象过程中共抓拍了5次,共得到25张抓拍图像,经人脸检测检验后可用于人脸识别的图像共有5张(文件名以3个字符表示),也就是说在人脸检测检验过程中淘汰了20张不太有希望进行人脸识别的图像,我们用表5来表示该过程,图像文件名的变迁情况,
表5经人脸检测检验前后抓拍的图像文件的变化
为了提高人脸识别率、减少误判率和拒判率,本专利中提出了一种简单的K/n的多数表决方法,既共有n张被识别的图像,如果有K张图像的人脸识别结果相同就判定为该结果,多数表决系统框图如图11所示;多数表决系统的作用是将多摄像机在不同的空间和时间所获得的人脸图像识别结果在决策层进行信息融合;具体的做法是采用多数表决的方法来确定K/n多数表决系统的PersonIDFAR(K/n)、PersonIDFRR(K/n)和PersonIDaccuracy(K/n);
针对表5所示的情况,对110、150、430、520和540这5张人脸图像进行识别,为了简化计算,我们假设在人脸识别处理中在大量被测试者的人脸识别率的统计概率FAR为10%,FRR为10%,Accuracy为80%的话,并假设每张人脸图像识别的FAR、FRR和Accuracy都相同,如果我们采用3/5作为多数表决的话,那么可以通过如下计算得到系统的正确识别率为,
同样道理,用以下公式计算4/7多数表决结果,可以得到系统的正确识别率为,
我们可以用同样方法得到各种K/n多数表决系统的PersonIDFAR(K/n)、PersonIDFRR(K/n)和PersonIDaccuracy(K/n)的估计值;
进一步,要实现大范围、无约束的人脸识别,第一步是大范围内的人体视频检测,为了获得更多的视频信息,本发明中的大范围监控视觉传感器1采用全方位视觉传感器,由于全方位视觉传感器能捕捉到水平方向上360°的视频图像,如附图1所示,而快速球型摄像机2的水平方向的转角范围是360°、垂直方向的转角范围是90°,通过空间位置的映射将全方位视觉传感器和快速球型摄像机进行融合,当全方位视觉传感器发现某个人体对象目标之后,系统返回一个人体对象目标的坐标信息,并利用这一信息来控制多个快速球型摄像机以定位拍人体对象头部目标,多个快速球型摄像机抓拍人体对象头部目标的图像信息保存在系统所规定的文件夹内供后续人脸检测及人脸识别处理。值得指出的是,由于每个快速球型摄像机安装位置不同,有多少个快速球型摄像机就需要事先设定多少张空间对应关系标定表,当全方位视觉传感器检测到人体目标时,每个快速球型摄像机能根据自己与全方位视觉传感器的对应关系标定表进行快速定位。标定方法为:以全景图像中心为圆心,根据需要将全景图像分成一些圆环,如图1所示,然后将每个圆环划分几等份,可根据实际需要划分。这样,一幅全景图像就被规则地分成了数个区域,每个区域有它特定的角度、方向和大小。然后,根据全方位视觉传感器距地面的高度、快速球型摄像机空间位置和摄像头焦距等参数,依次确定快速球型摄像机要检测的区域所需要水平、垂直旋转的角度以及焦距。如果全方位视觉传感器检测到有人体对象目标存在,系统就可以根据该人体对象目标所在区域和标定表自动调节各个快速球型摄像机,对人体对象目标进行抓拍特写;在全方位视觉传感器中能实现水平方向的360°的实时监控,其核心部件是折反射镜面,如图13中的3所示;其工作原理是:进入双曲面镜的中心的光,根据双曲面的镜面特性向着其虚焦点折射。实物图像经双曲面镜反射到聚光透镜中成像,在该成像平面上的一个点P(x,y)对应着实物在空间上的一个点的坐标A(X,Y,Z)。
图12中3-双曲线面镜,4-入射光线,7-双曲面镜的焦点Om(0,0,c),8-双曲面镜的虚焦点即相机中心Oc(0,0,-c),9-折反射光线,10-成像平面,11-实物图像的空间坐标A(X,Y,Z),5-入射到双曲面镜面上的图像的空间坐标,6-反射在成像平面上的点P(x,y)。
进一步,所述的折反射镜面为了能够得到与空间物体坐标的对应点,折反射镜面采用双曲面镜来进行设计:所示的双曲面镜构成的光学系统可以由下面5个等式表示;
((X2+Y2)/a2)-(Z2/b2)=-1(Z>0) (23)
β=tan-1(Y/X) (25)
α=tan-1[(b2+c2)sinγ-2bc]/(b2+c2)cosγ (26)
式中X,Y,Z表示空间坐标,c表示双曲面镜的焦点,2c表示两个焦点之间的距离,a,b分别是双曲面镜的实轴和虚轴的长度,β表示入射光线在XY平面上的夹角一方位角,α表示入射光线在XZ平面上的夹角一俯角,f表示成像平面到双曲面镜的虚焦点的距离;
通过公式(28),(29),可将空间上的点(X,Y,Z)映射到成像平面上的坐标点(x,y),可以实现空间的信息与成像平面信息的转换,以达到空间信息标定成像平面的信息的目的。
更进一步,多视觉传感器信息的融合是通过映射表来实现的,目前市场上销售的快速球型摄像机可以带80-256个预置点,为了达到快速地将快速球型摄像机转动到全方位视觉传感器所检测到的目标并迅速对焦;为了实现多视觉传感器信息的融合,在本专利中将全方位视觉传感器的视场分为128个区域,如附图1所示,每个区域对应着其他多个快速球型摄像机的一个预置点,因此只要在全方位视觉传感器所拍摄的视频图像上划分好128个区域,然后对每个区域的中心作为其他多个快速球型摄像机的预置点;在全方位视觉传感器检测到人体对象的头部在某个检测区域出现时,微处理器得到该信息后控制快速球摄像机到与该区域所对应的预置点,对人体对象的头部进行特写抓拍。
实施例2
参照图2,其余部分与实施例1相同,所不同的是大范围监控摄像机1为广角摄像机,安装在监控空间的某一侧,用于监视整个空间内的人体对象,相应的广角摄像机与多个快速球型摄像机的映射表的建立是依据广角摄像机的视场范围来确定的。
实施例3
其余部分与实施例1~2相同,所不同的是各种线程的处理分布在不同的计算机上完成,具体做法是将多台计算机组成网络,将图像文件夹作为共享,在不同的计算机上完成其不同的计算内容,并将计算结果放入约定好的文件夹内,以实现分布式计算,提高运行速度。
Claims (8)
1、一种基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述人脸识别检测装置包括用于跟踪监控大空间范围内多目标人体的运动以及行为的大范围视频监控摄像机、用于对被跟踪的人物的脸部进行特写抓拍的多个快速球型摄像机和用于对多摄像机进行信息融合和人脸检测识别处理的微处理器,所述的微处理器包括:
大范围监控摄像机标定模块,用于建立监控空间的图像与所获得的视频图像的对应关系;
大范围监控摄像机与快速球摄像机之间的视频数据融合模块,用于控制快速球摄像机的转动与调焦,使得快速球摄像机能对准所跟踪人体对象的脸部进行特写抓拍;
虚拟线定制模块,用于定制在监控领域内的检测检测线,虚拟线定制在监控领域的出入口处;
人体对象ID号和存放跟踪人体对象的脸部图像文件夹的自动生成模块,用于对刚进入大范围监控摄像机的视场最外边的虚拟线的人体对象进行命名,当活动人体对象进入监控范围时,系统自动会产生一个人体对象ID号并同时生成一个以该人体对象ID号命名的文件夹,用于存放该人体对象的脸部的特写图像;
多对象人体跟踪模块,用于跟踪监控领域内的多目标人体对象,包括:
自适应背景消减单元,用于在底层特征层将监控领域背景中把前景对象目标部分的像素点提取出来,混合高斯分布模型来表征图像帧中每一个像素点的特征;设用来描述每个点颜色分布的高斯分布共有K个,分别标记为:
η(Yi,μt,i,∑t,i),i=1,2,3…,k (12)
式(12)中的下标t表示时间,各高斯分布分别具有不同的权值和优先级,再将K个背景模型按照优先级从高到低的次序排序,取定适当的背景模型权值和阈值,在检测前景点时,按照优先级次序将Yt与各高斯分布模型逐一匹配,若匹配,则判定该点可能为前景点,否则为前景点;若某个高斯分布与Yt匹配,则对该高斯分布的权值和高斯参数按一定的更新率进行更新;
阴影抑制单元,用于通过形态学运算实现,利用腐蚀和膨胀算子分别去除孤立的噪声前景点和填补目标区域的小孔,先对消除了背景模型后的前景点集F分别进行膨胀和腐蚀处理,得到扩张集Fe和收缩集Fc,通过处理所得到的扩张集Fe和收缩集Fc是对初始前景点集F进行填补小孔和去除孤立噪声点的结果;因此有以下关系Fc<F<Fe成立,接着以收缩集Fc作为起始点,在扩张集Fe上检测连通区域,然后将检测结果记为{Rei,i=1,2,3,…,n},最后将检测所得的连通区域重新投影到初始前景点集F上,得到最后的连通检测结果{Ri=Rei∩F,i=1,2,3,…,n};
连通区域标识单元,用于采用八连通区域提取算法提取前景目标对象;
跟踪处理单元;用于基于目标颜色特征跟踪算法,利用目标对象的颜色特征在视频图像中找到运动目标对象所在的位置和大小,在下一帧视频图像中,用运动目标当前的位置和大小初始化搜寻窗口,在连通区域标识单元处理后所得到的目标对象的方位以及大小,然后将处理结果提交给目标颜色特征跟踪算法,以实现多目标对象的自动跟踪;
人体对象的脸部特写图像定位抓拍模块,用于定位抓拍跟踪人体对象的脸部图像,对人体肤色建立一张二值图像,进行连通区域个数计算,检测人体头部在整个人体上端部位,检测连通区域高度的1/3;
人脸图像检测预处理模块,用于对存放在以人体对象ID号命名的文件夹内人体对象的脸部特写图像进行粗检测,用肤色区域的二值映射图作为人脸检测判定标准,如检测窗口Awindow内皮肤区域面积Askin所占的比例在设定范围之间,遍历整个人脸图像,并采用椭圆方法判定是否为正面人脸;
人脸检测精处理模块,用于对存放在以人体对象ID号命名的文件夹内经人脸图像检测预处理后的图像进行进一步的处理,采用离散小波分解、局部加窗得到局部冗余信号,两两配对计算局部信号相似度得到局部特征向量集,并将特征集分为两类“类内差”ΩT和“类间差”ΩE,利用Boosting算法从特征集中自适应选择弱分类器,最终构成强分类器,得到人脸图像IS;
人脸识别模块,用于对存放在人体对象ID号命名的文件夹中的有标记的人体对象的脸部的特写图像进行识别,经精检测后的人脸图像IS经过与训练步骤相同的特征提取得到局部信号,并与比对样本逐个计算局部相似度,然后输入集成分类器,最终识别类别由输出值最大的样本决定。
2、如权利要求1所述的基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述微处理器还包括:
识别结果进行表决处理模块,用于对某个人体对象ID所对应的多个识别结果进行表决,评价一个人脸识别系统的标准,包括识别率、错误拒绝率、错误接受率;
通过混淆矩阵来定义,混淆矩阵表示属于第i类的测试特征向量被分配到第i类的概率,用矩阵表示估计值和实际输出值,对于每一张人脸图像识别是一个两类问题的四个可能的分类结果;
对于第I张人脸图像的识别率可以由以下公式(19)计算,
对于第I张人脸图像的拒判率(False rejection rate,FRR)或拒真率(Falsenegtive rate)可以由以下公式(20)计算,
对于第I张人脸图像的误判率(False acceptance rate,FAR)或认假率(Falsepositive rate)可以由以下公式(21)计算,
采用多数表决的方法来确定K/n多数表决系统的PersonIDFAR(K/n)、PersonIDFRR(K/n)和PersonIDaccuracy(K/n);
共有n张被识别的图像,如果K张图像的人脸识别结果相同就判定为该结果,K为预设的阈值。
3、如权利要求2所述的基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述微处理器采用多线程处理,将整个人脸识别检测分为以下处理线程:①多目标的人体跟踪与特写抓拍作为一个线程;②将基于YCrCb颜色模型进行粗检测作为一个线程,③将基于AdaBoost算法的组合成强分类器处理作为一个线程;④将人脸图像识别作为一个线程;⑤将表决处理作为一个线程;上述5个线程的优先级别是从线程的①到⑤顺序来确定。
4、如权利要求1-3之一所述的基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述的大范围视频监控摄像机为广角摄像机,所述广角摄像机安装在监控空间的一侧。
5、如权利要求1-3之一所述的基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述的大范围视频监控摄像机为全方位摄像机,所述全方位摄像机安装在监控领域的中间,所述的全方位摄像机包括用于反射监控领域中物体的外凸折反射镜面,外凸折反射镜面朝下,用于防止光折射和光饱和的黑色圆锥体,黑色圆锥体固定在折反射镜面外凸部的中心,用于支撑外凸折反射镜面的透明圆柱体,用于拍摄外凸反射镜面上成像体的摄像头,摄像头对着外凸反射镜面朝上。
6、如权利要求1-3之一所述的基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述的大范围监控摄像机与快速球摄像机之间的视频数据融合模块,通过空间位置的映射将大范围视频监控摄像机和快速球型摄像机进行融合,当大范围视频监控摄像机发现人体对象目标之后,系统返回一个人体对象目标的坐标信息,并利用这一信息来控制多个快速球型摄像机以定位拍人体对象头部目标,多个快速球型摄像机抓拍人体对象头部目标的图像信息保存在系统所规定的文件夹内供后续人脸检测及人脸识别处理;每个快速球型摄像机安装位置不同,每个快速球型摄像机对应相应的空间对应关系标定表,当大范围视频监控摄像机检测到人体目标时,每个快速球型摄像机能根据自己与大范围视频监控摄像机的对应关系标定表进行快速定位。
7、如权利要求6所述的基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述大范围视频监控摄像机采用全方位视觉传感器,标定方法为:以全景图像中心为圆心,根据需要将全景图像分成一些圆环,然后将每个圆环划分成数个等份;一幅全景图像就被规则地分成了数个区域,每个区域有它特定的角度、方向和大小;根据全方位视觉传感器距地面的高度、快速球型摄像机空间位置和摄像头焦距等参数,依次确定各快速球型摄像机要检测的区域所需要水平、垂直旋转的角度以及焦距。
8、如权利要求6所述的基于多摄像机信息融合的人脸识别检测装置,其特征在于:所述大范围视频监控摄像机采用广角摄像装置,标定方法为:依据广角摄像机的视场范围将所拍摄到的图像划分成数个等份,每个区域有它特定的角度、方向和大小,根据广角摄像装置距地面的高度、倾斜的角度、快速球型摄像机空间位置和摄像头焦距参数,依次确定各快速球型摄像机要检测的区域所需要水平、垂直旋转的角度以及焦距。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2007103075796A CN100568262C (zh) | 2007-12-29 | 2007-12-29 | 基于多摄像机信息融合的人脸识别检测装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2007103075796A CN100568262C (zh) | 2007-12-29 | 2007-12-29 | 基于多摄像机信息融合的人脸识别检测装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101236599A true CN101236599A (zh) | 2008-08-06 |
CN100568262C CN100568262C (zh) | 2009-12-09 |
Family
ID=39920206
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB2007103075796A Expired - Fee Related CN100568262C (zh) | 2007-12-29 | 2007-12-29 | 基于多摄像机信息融合的人脸识别检测装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100568262C (zh) |
Cited By (143)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101447023A (zh) * | 2008-12-23 | 2009-06-03 | 北京中星微电子有限公司 | 人头检测方法和系统 |
CN101895685A (zh) * | 2010-07-15 | 2010-11-24 | 杭州华银视讯科技有限公司 | 视频采集控制装置及其方法 |
CN101894212A (zh) * | 2010-07-05 | 2010-11-24 | 上海交通大学医学院 | 一种对皮肤创面综合检测的方法 |
CN101923637A (zh) * | 2010-07-21 | 2010-12-22 | 康佳集团股份有限公司 | 一种移动终端及其人脸检测方法和装置 |
CN102045548A (zh) * | 2010-12-28 | 2011-05-04 | 天津市亚安科技电子有限公司 | 一种控制云台摄像机自动变倍的方法 |
CN102087702A (zh) * | 2009-12-04 | 2011-06-08 | 索尼公司 | 图像处理设备、图像处理方法和程序 |
CN102117475A (zh) * | 2009-12-31 | 2011-07-06 | 财团法人工业技术研究院 | 图像识别率计算方法与系统及其嵌入式图像处理系统 |
CN102156537A (zh) * | 2010-02-11 | 2011-08-17 | 三星电子株式会社 | 一种头部姿态检测设备及方法 |
CN102196173A (zh) * | 2010-03-08 | 2011-09-21 | 索尼公司 | 成像控制设备与成像控制方法 |
CN101751562B (zh) * | 2009-12-28 | 2011-09-21 | 镇江奇点软件有限公司 | 基于人脸识别的银行交易取证图像的获取方法 |
CN101419670B (zh) * | 2008-11-21 | 2011-11-02 | 复旦大学 | 基于先进音视频编码标准的视频监控方法及系统 |
CN102236785A (zh) * | 2011-06-29 | 2011-11-09 | 中山大学 | 一种非重叠摄像机视点之间的行人匹配方法 |
CN102254169A (zh) * | 2011-08-23 | 2011-11-23 | 东北大学秦皇岛分校 | 基于多摄像机的人脸识别方法及系统 |
CN102307297A (zh) * | 2011-09-14 | 2012-01-04 | 镇江江大科茂信息系统有限责任公司 | 一种多方位视频目标跟踪检测的智能监控系统 |
CN102436576A (zh) * | 2011-10-21 | 2012-05-02 | 洪涛 | 基于多层级结构的多尺度自适应高效目标图像识别方法 |
CN102456127A (zh) * | 2010-10-21 | 2012-05-16 | 三星电子株式会社 | 头部姿态估计设备和方法 |
CN102622604A (zh) * | 2012-02-14 | 2012-08-01 | 西安电子科技大学 | 一种基于可变形部件加权的多角度人脸检测方法 |
CN102629385A (zh) * | 2012-02-28 | 2012-08-08 | 中山大学 | 一种基于多摄像机信息融合的目标匹配与跟踪系统及方法 |
CN102687171A (zh) * | 2009-10-16 | 2012-09-19 | 日本电气株式会社 | 人物服装特征提取装置、人物检索装置及其处理方法 |
CN102708361A (zh) * | 2012-05-11 | 2012-10-03 | 哈尔滨工业大学 | 远距离人脸采集方法 |
WO2012139239A1 (en) * | 2011-04-11 | 2012-10-18 | Intel Corporation | Techniques for face detection and tracking |
CN102855459A (zh) * | 2011-06-30 | 2013-01-02 | 株式会社理光 | 用于特定前景物体的检测验证的方法和系统 |
CN102938059A (zh) * | 2012-11-26 | 2013-02-20 | 昆山振天智能化设备有限公司 | 一种智能人脸识别系统 |
CN102970514A (zh) * | 2011-08-30 | 2013-03-13 | 株式会社日立制作所 | 映像监视装置、映像监视方法以及程序 |
CN101751551B (zh) * | 2008-12-05 | 2013-03-20 | 比亚迪股份有限公司 | 一种基于图像的人脸识别方法、装置、系统及设备 |
CN102999450A (zh) * | 2011-05-26 | 2013-03-27 | 索尼公司 | 信息处理装置、信息处理方法、程序和信息处理系统 |
US8411901B2 (en) | 2009-12-29 | 2013-04-02 | Industrial Technology Research Institute | Method and system for calculating image recognition rate and embedded image processing system |
CN103069431A (zh) * | 2010-07-02 | 2013-04-24 | 英特尔公司 | 面部检测方法和设备 |
CN101673346B (zh) * | 2008-09-09 | 2013-06-05 | 日电(中国)有限公司 | 对图像进行处理的方法、设备和系统 |
CN103167270A (zh) * | 2011-12-14 | 2013-06-19 | 杭州普维光电技术有限公司 | 人员头部拍摄方法、系统及服务器 |
CN103218627A (zh) * | 2013-01-31 | 2013-07-24 | 沈阳航空航天大学 | 一种图像检测方法及设备 |
CN103473564A (zh) * | 2013-09-29 | 2013-12-25 | 公安部第三研究所 | 一种基于敏感区域的正面人脸检测方法 |
CN103546672A (zh) * | 2013-11-07 | 2014-01-29 | 苏州君立软件有限公司 | 一种图像采集系统 |
CN103616954A (zh) * | 2013-12-06 | 2014-03-05 | Tcl通讯(宁波)有限公司 | 一种虚拟键盘系统、实现方法及移动终端 |
CN103795978A (zh) * | 2014-01-15 | 2014-05-14 | 浙江宇视科技有限公司 | 一种多画面智能识别方法及其装置 |
WO2014082496A1 (zh) * | 2012-11-27 | 2014-06-05 | 腾讯科技(深圳)有限公司 | 客户端特征的识别方法、装置及存储介质 |
CN103971103A (zh) * | 2014-05-23 | 2014-08-06 | 西安电子科技大学宁波信息技术研究院 | 一种人数统计系统 |
CN104156689A (zh) * | 2013-05-13 | 2014-11-19 | 浙江大华技术股份有限公司 | 一种对目标对象的特征信息进行定位的方法和设备 |
WO2015003287A1 (zh) * | 2013-07-12 | 2015-01-15 | 台湾色彩与影像科技股份有限公司 | 一种行为辨识及追踪系统及其运作方法 |
CN104616008A (zh) * | 2015-02-15 | 2015-05-13 | 四川川大智胜软件股份有限公司 | 一种多视角二维人脸图像采集平台及其采集方法 |
CN104641398A (zh) * | 2012-07-17 | 2015-05-20 | 株式会社尼康 | 被拍摄体跟踪装置以及相机 |
CN104699237A (zh) * | 2013-12-10 | 2015-06-10 | 宏达国际电子股份有限公司 | 辨识使用者操作的方法及相关互动装置与计算机可读介质 |
CN104794439A (zh) * | 2015-04-10 | 2015-07-22 | 上海交通大学 | 基于多相机的准正面人脸图像实时优选方法及系统 |
CN104820838A (zh) * | 2015-04-24 | 2015-08-05 | 深圳信息职业技术学院 | 基于设置正负例错分值的百分比的可控置信机器算法 |
CN103020707B (zh) * | 2012-10-19 | 2015-08-26 | 浙江工业大学 | 基于机器视觉的流水式高精度、高速的颗粒物自动计数装置 |
WO2015131712A1 (zh) * | 2014-09-19 | 2015-09-11 | 中兴通讯股份有限公司 | 一种脸部识别方法、装置和计算机可读存储介质 |
CN104915000A (zh) * | 2015-05-27 | 2015-09-16 | 天津科技大学 | 用于裸眼3d广告的多感知生物识别交互方法 |
CN105354579A (zh) * | 2015-10-30 | 2016-02-24 | 浙江宇视科技有限公司 | 一种特征检测的方法和装置 |
CN105373626A (zh) * | 2015-12-09 | 2016-03-02 | 深圳融合永道科技有限公司 | 分布式人脸识别轨迹搜索系统和方法 |
CN105447465A (zh) * | 2015-11-25 | 2016-03-30 | 中山大学 | 基于行人局部和整体融合匹配的无交叠视域摄像头之间的不完整行人匹配方法 |
CN105512644A (zh) * | 2016-01-15 | 2016-04-20 | 福建宜品网络科技有限公司 | 一种指静脉识别装置及其识别方法 |
CN105513223A (zh) * | 2016-01-27 | 2016-04-20 | 大连楼兰科技股份有限公司 | 一种基于摄像机的银行卡防盗方法 |
CN105590097A (zh) * | 2015-12-17 | 2016-05-18 | 重庆邮电大学 | 暗视觉条件下双摄像头协同实时人脸识别安防系统及方法 |
CN105704368A (zh) * | 2015-12-23 | 2016-06-22 | 电子科技大学中山学院 | 一种人脸图像采集的自适应控制方法及其装置 |
CN105741261A (zh) * | 2014-12-11 | 2016-07-06 | 北京大唐高鸿数据网络技术有限公司 | 一种基于四摄像头的平面多目标定位方法 |
CN106156688A (zh) * | 2015-03-10 | 2016-11-23 | 上海骏聿数码科技有限公司 | 一种动态人脸识别方法及系统 |
CN106169071A (zh) * | 2016-07-05 | 2016-11-30 | 厦门理工学院 | 一种基于动态人脸与胸卡识别的考勤方法及系统 |
CN106331596A (zh) * | 2015-07-06 | 2017-01-11 | 中兴通讯股份有限公司 | 一种家居监控方法及系统 |
CN103702014B (zh) * | 2013-12-31 | 2017-02-15 | 中国科学院深圳先进技术研究院 | 非接触式生理参数检测方法、系统及装置 |
CN106503615A (zh) * | 2016-09-20 | 2017-03-15 | 北京工业大学 | 基于多传感器的室内人体检测跟踪和身份识别系统 |
CN106557750A (zh) * | 2016-11-22 | 2017-04-05 | 重庆邮电大学 | 一种基于肤色和深度二叉特征树的人脸检测方法 |
CN106710020A (zh) * | 2016-12-05 | 2017-05-24 | 广州日滨科技发展有限公司 | 智能考勤方法与系统 |
CN106707834A (zh) * | 2015-11-13 | 2017-05-24 | 杭州摩图科技有限公司 | 一种基于计算机视觉技术的遥控设备 |
CN106845378A (zh) * | 2017-01-03 | 2017-06-13 | 江苏慧眼数据科技股份有限公司 | 一种自对向图像中识别人体目标的方法 |
CN106940789A (zh) * | 2017-03-10 | 2017-07-11 | 广东数相智能科技有限公司 | 一种基于视频识别的数量统计的方法、系统及装置 |
CN106941601A (zh) * | 2017-02-13 | 2017-07-11 | 杭州百航信息技术有限公司 | 金融系统风控双录装置及其文件生物识别方法 |
CN107590488A (zh) * | 2017-10-27 | 2018-01-16 | 广州市浩翔计算机科技有限公司 | 一种拆分式快速识别的人脸识别系统 |
CN107771336A (zh) * | 2015-09-15 | 2018-03-06 | 谷歌有限责任公司 | 基于颜色分布的图像中的特征检测和掩模 |
WO2018068521A1 (zh) * | 2016-10-10 | 2018-04-19 | 深圳云天励飞技术有限公司 | 一种人群分析方法及计算机设备 |
CN107966944A (zh) * | 2017-11-30 | 2018-04-27 | 贵州财经大学 | 智慧大棚分区控制系统及分区采摘方法 |
CN108073859A (zh) * | 2016-11-16 | 2018-05-25 | 天津市远卓自动化设备制造有限公司 | 一种特定区域的监测装置及方法 |
CN108133183A (zh) * | 2017-12-19 | 2018-06-08 | 深圳怡化电脑股份有限公司 | 定点捕捉人像的方法、装置、自助设备及计算机可读存储介质 |
CN108197250A (zh) * | 2017-12-29 | 2018-06-22 | 深圳云天励飞技术有限公司 | 图片检索方法、电子设备及存储介质 |
CN108234904A (zh) * | 2018-02-05 | 2018-06-29 | 刘捷 | 一种多视频融合方法、装置与系统 |
CN108268864A (zh) * | 2018-02-24 | 2018-07-10 | 达闼科技(北京)有限公司 | 人脸识别方法、系统、电子设备和计算机程序产品 |
CN108388857A (zh) * | 2018-02-11 | 2018-08-10 | 广东欧珀移动通信有限公司 | 人脸检测方法及相关设备 |
CN108629935A (zh) * | 2018-05-17 | 2018-10-09 | 山东深图智能科技有限公司 | 一种基于视频监控检测爬楼翻窗盗窃行为的方法及系统 |
CN108664782A (zh) * | 2017-03-28 | 2018-10-16 | 三星电子株式会社 | 面部验证方法和设备 |
CN108921204A (zh) * | 2018-06-14 | 2018-11-30 | 平安科技(深圳)有限公司 | 电子装置、图片样本集生成方法和计算机可读存储介质 |
CN108986407A (zh) * | 2018-08-23 | 2018-12-11 | 浙江理工大学 | 一种用于独居老人的安全侦测系统及方法 |
CN109031262A (zh) * | 2018-06-05 | 2018-12-18 | 长沙大京网络科技有限公司 | 一种定位寻车系统及其方法 |
CN109086670A (zh) * | 2018-07-03 | 2018-12-25 | 百度在线网络技术(北京)有限公司 | 人脸识别方法、装置及设备 |
CN109145734A (zh) * | 2018-07-17 | 2019-01-04 | 深圳市巨龙创视科技有限公司 | 基于4k平台的ipc智能人脸识别抓拍算法 |
CN109191530A (zh) * | 2018-07-27 | 2019-01-11 | 深圳六滴科技有限公司 | 全景相机标定方法、系统、计算机设备和存储介质 |
CN109389367A (zh) * | 2018-10-09 | 2019-02-26 | 苏州科达科技股份有限公司 | 人员考勤方法、装置及存储介质 |
CN109446901A (zh) * | 2018-09-21 | 2019-03-08 | 北京晶品特装科技有限责任公司 | 一种可嵌入式移植的实时人形目标自动识别算法 |
CN109493369A (zh) * | 2018-09-11 | 2019-03-19 | 深圳控石智能系统有限公司 | 一种智能机器人视觉动态定位跟踪方法及系统 |
CN109600584A (zh) * | 2018-12-11 | 2019-04-09 | 中联重科股份有限公司 | 观察塔机的方法和装置、塔机及机器可读存储介质 |
CN109618173A (zh) * | 2018-12-17 | 2019-04-12 | 深圳Tcl新技术有限公司 | 视频压缩方法、装置和计算机可读存储介质 |
CN109716402A (zh) * | 2016-08-05 | 2019-05-03 | 亚萨合莱有限公司 | 用于使用生物统计辨识外加标签验证的自动化物理访问控制系统的方法及系统 |
CN109800727A (zh) * | 2019-01-28 | 2019-05-24 | 云谷(固安)科技有限公司 | 一种监控方法和装置 |
CN110019899A (zh) * | 2017-08-25 | 2019-07-16 | 腾讯科技(深圳)有限公司 | 一种目标对象识别方法、装置、终端及存储介质 |
CN110114801A (zh) * | 2017-01-23 | 2019-08-09 | 富士通株式会社 | 图像前景检测装置及方法、电子设备 |
CN110147717A (zh) * | 2019-04-03 | 2019-08-20 | 平安科技(深圳)有限公司 | 一种人体动作的识别方法及设备 |
CN110245590A (zh) * | 2019-05-29 | 2019-09-17 | 广东技术师范大学 | 一种基于皮肤图像检测的产品推荐方法及系统 |
CN110248112A (zh) * | 2019-07-12 | 2019-09-17 | 成都微光集电科技有限公司 | 一种图像传感器的曝光控制方法 |
CN110263712A (zh) * | 2019-06-20 | 2019-09-20 | 江南大学 | 一种基于区域候选的粗精行人检测方法 |
CN110309709A (zh) * | 2019-05-20 | 2019-10-08 | 平安科技(深圳)有限公司 | 人脸识别方法、装置及计算机可读存储介质 |
CN110418076A (zh) * | 2019-08-02 | 2019-11-05 | 新华智云科技有限公司 | 视频集锦生成方法、装置、电子设备及存储介质 |
CN110427826A (zh) * | 2019-07-04 | 2019-11-08 | 深兰科技(上海)有限公司 | 一种手掌识别方法、装置、电子设备及存储介质 |
CN110458049A (zh) * | 2019-07-24 | 2019-11-15 | 东北师范大学 | 一种基于多视觉的行为测量与分析方法 |
CN110826390A (zh) * | 2019-09-09 | 2020-02-21 | 博云视觉(北京)科技有限公司 | 一种基于人脸矢量特征的视频数据处理方法 |
CN110874589A (zh) * | 2020-01-17 | 2020-03-10 | 南京甄视智能科技有限公司 | 人脸照片获取方法与系统 |
CN111091628A (zh) * | 2019-11-20 | 2020-05-01 | 深圳市桑格尔科技股份有限公司 | 一种带监控功能的人脸识别考勤设备 |
CN111145274A (zh) * | 2019-12-06 | 2020-05-12 | 华南理工大学 | 一种基于视觉的坐姿检测方法 |
CN111160105A (zh) * | 2019-12-03 | 2020-05-15 | 北京文香信息技术有限公司 | 一种视频图像的监测方法、装置、设备及存储介质 |
CN111277746A (zh) * | 2018-12-05 | 2020-06-12 | 杭州海康威视系统技术有限公司 | 一种室内人脸抓拍方法及系统 |
CN111372037A (zh) * | 2018-12-25 | 2020-07-03 | 杭州海康威视数字技术股份有限公司 | 目标抓拍系统和方法 |
CN111405241A (zh) * | 2020-02-21 | 2020-07-10 | 中国电子技术标准化研究院 | 一种用于视频监控的边缘计算方法和系统 |
CN111583485A (zh) * | 2020-04-16 | 2020-08-25 | 北京澎思科技有限公司 | 小区门禁系统、门禁控制方法和装置、门禁单元及介质 |
CN111612930A (zh) * | 2020-04-14 | 2020-09-01 | 安徽中迅徽软科技有限公司 | 一种考勤系统及方法 |
RU2731519C1 (ru) * | 2019-09-19 | 2020-09-03 | Акционерное общество "Федеральный научно-производственный центр "Производственное объединение "Старт" им. М.В. Проценко" (АО "ФНПЦ ПО "Старт" им. М.В. Проценко") | Комбинированная система контроля и управления доступом для системы физической защиты особо важных объектов |
CN111698467A (zh) * | 2020-05-08 | 2020-09-22 | 北京中广上洋科技股份有限公司 | 基于多摄像机的智能跟踪方法及系统 |
CN111814763A (zh) * | 2020-08-26 | 2020-10-23 | 长沙鹏阳信息技术有限公司 | 一种基于跟踪序列的无感考勤和制服识别方法 |
TWI709324B (zh) * | 2018-10-31 | 2020-11-01 | 聰泰科技開發股份有限公司 | 採集與標示記錄方法 |
CN112132057A (zh) * | 2020-09-24 | 2020-12-25 | 天津锋物科技有限公司 | 一种多维身份识别方法及系统 |
CN112132200A (zh) * | 2020-09-17 | 2020-12-25 | 山东大学 | 基于多维岩石图像深度学习的岩性识别方法及系统 |
CN112132067A (zh) * | 2020-09-27 | 2020-12-25 | 深圳市梦网视讯有限公司 | 一种基于压缩信息的人脸倾斜度分析方法、系统及设备 |
CN112200092A (zh) * | 2020-10-13 | 2021-01-08 | 深圳龙岗智能视听研究院 | 一种基于球型摄像机可变焦移动的智能吸烟检测方法 |
CN112329497A (zh) * | 2019-07-18 | 2021-02-05 | 杭州海康威视数字技术股份有限公司 | 一种目标识别方法、装置及设备 |
CN112347856A (zh) * | 2020-10-13 | 2021-02-09 | 广东电网有限责任公司培训与评价中心 | 一种基于教室场景的无感知考勤系统及方法 |
CN112651998A (zh) * | 2021-01-18 | 2021-04-13 | 沈阳航空航天大学 | 基于注意力机制和双流多域卷积神经网络的人体跟踪算法 |
CN112650461A (zh) * | 2020-12-15 | 2021-04-13 | 广州舒勇五金制品有限公司 | 一种基于相对位置的展示系统 |
CN112702564A (zh) * | 2019-10-23 | 2021-04-23 | 成都鼎桥通信技术有限公司 | 图像监控方法及设备 |
CN112738476A (zh) * | 2020-12-29 | 2021-04-30 | 上海应用技术大学 | 基于机器学习算法的城市风险监控网络系统和方法 |
CN112766395A (zh) * | 2021-01-27 | 2021-05-07 | 中国地质大学(北京) | 一种图像匹配方法、装置、电子设备及可读存储介质 |
WO2021098779A1 (zh) * | 2019-11-20 | 2021-05-27 | Oppo广东移动通信有限公司 | 目标检测方法、装置、设备及计算机可读存储介质 |
CN112883765A (zh) * | 2019-11-30 | 2021-06-01 | 浙江宇视科技有限公司 | 一种目标移动轨迹获取方法、装置、存储介质及电子设备 |
CN112966131A (zh) * | 2021-03-02 | 2021-06-15 | 中华人民共和国成都海关 | 一种海关数据风控类型识别方法、海关智能化风险布控方法、装置、计算机设备及存储介质 |
CN112990096A (zh) * | 2021-04-13 | 2021-06-18 | 杭州金线连科技有限公司 | 一种基于ocr与人脸检测融合的身份证信息录用方法 |
CN113095116A (zh) * | 2019-12-23 | 2021-07-09 | 深圳云天励飞技术有限公司 | 身份识别方法及相关产品 |
CN113256863A (zh) * | 2021-05-13 | 2021-08-13 | 深圳他米科技有限公司 | 基于人脸识别的酒店入住方法、装置、设备及存储介质 |
CN113301256A (zh) * | 2021-05-23 | 2021-08-24 | 成都申亚科技有限公司 | 一种低功耗多目标连续自动监测的摄像模组及其摄像方法 |
CN113327286A (zh) * | 2021-05-10 | 2021-08-31 | 中国地质大学(武汉) | 一种360度全方位的说话人视觉空间定位方法 |
CN113535357A (zh) * | 2021-07-07 | 2021-10-22 | 厦门墨逦标识科技有限公司 | Eagle视觉应用中保障主线程性能的方法、存储介质 |
CN113642449A (zh) * | 2021-08-09 | 2021-11-12 | 福建平潭瑞谦智能科技有限公司 | 一种人脸识别装置及系统 |
CN113656625A (zh) * | 2021-10-19 | 2021-11-16 | 浙江大华技术股份有限公司 | 一种确定人体空间域的方法、装置及电子设备 |
CN113920172A (zh) * | 2021-12-14 | 2022-01-11 | 成都睿沿芯创科技有限公司 | 一种目标跟踪方法、装置、设备以及存储介质 |
CN113945253A (zh) * | 2021-10-18 | 2022-01-18 | 成都天仁民防科技有限公司 | 一种轨道交通轨行区的水位测量方法 |
WO2022134916A1 (zh) * | 2020-12-24 | 2022-06-30 | 中兴通讯股份有限公司 | 身份特征生成方法、设备及存储介质 |
CN115171200A (zh) * | 2022-09-08 | 2022-10-11 | 深圳市维海德技术股份有限公司 | 基于变倍的目标跟踪特写方法、装置、电子设备及介质 |
CN115633248A (zh) * | 2022-12-22 | 2023-01-20 | 浙江宇视科技有限公司 | 多场景协同检测方法与系统 |
US12087087B2 (en) | 2017-03-28 | 2024-09-10 | Samsung Electronics Co., Ltd. | Face verifying method and apparatus |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SG10201504080WA (en) * | 2015-05-25 | 2016-12-29 | Trakomatic Pte Ltd | Method and System for Facial Recognition |
TWI642000B (zh) * | 2017-10-31 | 2018-11-21 | 拓連科技股份有限公司 | 特定區域中之未識別物件追蹤系統及方法,及相關電腦程式產品 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2003235641A1 (en) * | 2002-01-16 | 2003-07-30 | Iritech, Inc. | System and method for iris identification using stereoscopic face recognition |
CN100468467C (zh) * | 2006-12-01 | 2009-03-11 | 浙江工业大学 | 基于人脸鉴别技术的门禁和考勤装置 |
-
2007
- 2007-12-29 CN CNB2007103075796A patent/CN100568262C/zh not_active Expired - Fee Related
Cited By (216)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101673346B (zh) * | 2008-09-09 | 2013-06-05 | 日电(中国)有限公司 | 对图像进行处理的方法、设备和系统 |
CN101419670B (zh) * | 2008-11-21 | 2011-11-02 | 复旦大学 | 基于先进音视频编码标准的视频监控方法及系统 |
CN101751551B (zh) * | 2008-12-05 | 2013-03-20 | 比亚迪股份有限公司 | 一种基于图像的人脸识别方法、装置、系统及设备 |
CN101447023A (zh) * | 2008-12-23 | 2009-06-03 | 北京中星微电子有限公司 | 人头检测方法和系统 |
CN101447023B (zh) * | 2008-12-23 | 2013-03-27 | 北京中星微电子有限公司 | 人头检测方法和系统 |
CN104933669A (zh) * | 2009-10-16 | 2015-09-23 | 日本电气株式会社 | 人物服装特征提取装置及方法 |
US8891880B2 (en) | 2009-10-16 | 2014-11-18 | Nec Corporation | Person clothing feature extraction device, person search device, and processing method thereof |
US9495754B2 (en) | 2009-10-16 | 2016-11-15 | Nec Corporation | Person clothing feature extraction device, person search device, and processing method thereof |
CN102687171B (zh) * | 2009-10-16 | 2015-07-08 | 日本电气株式会社 | 人物检索装置及人物检索方法 |
CN102687171A (zh) * | 2009-10-16 | 2012-09-19 | 日本电气株式会社 | 人物服装特征提取装置、人物检索装置及其处理方法 |
CN102087702B (zh) * | 2009-12-04 | 2013-07-24 | 索尼公司 | 图像处理设备和图像处理方法 |
CN102087702A (zh) * | 2009-12-04 | 2011-06-08 | 索尼公司 | 图像处理设备、图像处理方法和程序 |
CN101751562B (zh) * | 2009-12-28 | 2011-09-21 | 镇江奇点软件有限公司 | 基于人脸识别的银行交易取证图像的获取方法 |
US8411901B2 (en) | 2009-12-29 | 2013-04-02 | Industrial Technology Research Institute | Method and system for calculating image recognition rate and embedded image processing system |
CN102117475A (zh) * | 2009-12-31 | 2011-07-06 | 财团法人工业技术研究院 | 图像识别率计算方法与系统及其嵌入式图像处理系统 |
CN102156537B (zh) * | 2010-02-11 | 2016-01-13 | 三星电子株式会社 | 一种头部姿态检测设备及方法 |
CN102156537A (zh) * | 2010-02-11 | 2011-08-17 | 三星电子株式会社 | 一种头部姿态检测设备及方法 |
CN102196173A (zh) * | 2010-03-08 | 2011-09-21 | 索尼公司 | 成像控制设备与成像控制方法 |
CN103069431A (zh) * | 2010-07-02 | 2013-04-24 | 英特尔公司 | 面部检测方法和设备 |
CN101894212B (zh) * | 2010-07-05 | 2012-02-15 | 上海交通大学医学院 | 一种对皮肤创面综合检测的方法 |
CN101894212A (zh) * | 2010-07-05 | 2010-11-24 | 上海交通大学医学院 | 一种对皮肤创面综合检测的方法 |
CN101895685A (zh) * | 2010-07-15 | 2010-11-24 | 杭州华银视讯科技有限公司 | 视频采集控制装置及其方法 |
CN101895685B (zh) * | 2010-07-15 | 2012-07-25 | 杭州华银视讯科技有限公司 | 视频采集控制装置及其方法 |
CN101923637B (zh) * | 2010-07-21 | 2016-03-16 | 康佳集团股份有限公司 | 一种移动终端及其人脸检测方法和装置 |
CN101923637A (zh) * | 2010-07-21 | 2010-12-22 | 康佳集团股份有限公司 | 一种移动终端及其人脸检测方法和装置 |
CN102456127B (zh) * | 2010-10-21 | 2018-03-20 | 三星电子株式会社 | 头部姿态估计设备和方法 |
CN102456127A (zh) * | 2010-10-21 | 2012-05-16 | 三星电子株式会社 | 头部姿态估计设备和方法 |
CN102045548A (zh) * | 2010-12-28 | 2011-05-04 | 天津市亚安科技电子有限公司 | 一种控制云台摄像机自动变倍的方法 |
WO2012139239A1 (en) * | 2011-04-11 | 2012-10-18 | Intel Corporation | Techniques for face detection and tracking |
US9965673B2 (en) | 2011-04-11 | 2018-05-08 | Intel Corporation | Method and apparatus for face detection in a frame sequence using sub-tasks and layers |
CN102999450A (zh) * | 2011-05-26 | 2013-03-27 | 索尼公司 | 信息处理装置、信息处理方法、程序和信息处理系统 |
CN102999450B (zh) * | 2011-05-26 | 2016-12-14 | 索尼公司 | 信息处理装置、信息处理方法和信息处理系统 |
CN102236785A (zh) * | 2011-06-29 | 2011-11-09 | 中山大学 | 一种非重叠摄像机视点之间的行人匹配方法 |
CN102855459B (zh) * | 2011-06-30 | 2015-11-25 | 株式会社理光 | 用于特定前景物体的检测验证的方法和系统 |
CN102855459A (zh) * | 2011-06-30 | 2013-01-02 | 株式会社理光 | 用于特定前景物体的检测验证的方法和系统 |
CN102254169A (zh) * | 2011-08-23 | 2011-11-23 | 东北大学秦皇岛分校 | 基于多摄像机的人脸识别方法及系统 |
CN102254169B (zh) * | 2011-08-23 | 2012-08-22 | 东北大学秦皇岛分校 | 基于多摄像机的人脸识别方法及系统 |
CN102970514A (zh) * | 2011-08-30 | 2013-03-13 | 株式会社日立制作所 | 映像监视装置、映像监视方法以及程序 |
CN102307297A (zh) * | 2011-09-14 | 2012-01-04 | 镇江江大科茂信息系统有限责任公司 | 一种多方位视频目标跟踪检测的智能监控系统 |
CN102436576A (zh) * | 2011-10-21 | 2012-05-02 | 洪涛 | 基于多层级结构的多尺度自适应高效目标图像识别方法 |
CN103167270A (zh) * | 2011-12-14 | 2013-06-19 | 杭州普维光电技术有限公司 | 人员头部拍摄方法、系统及服务器 |
CN103167270B (zh) * | 2011-12-14 | 2016-05-04 | 杭州普维光电技术有限公司 | 人员头部拍摄方法、系统及服务器 |
CN102622604A (zh) * | 2012-02-14 | 2012-08-01 | 西安电子科技大学 | 一种基于可变形部件加权的多角度人脸检测方法 |
CN102622604B (zh) * | 2012-02-14 | 2014-01-15 | 西安电子科技大学 | 一种基于可变形部件加权的多角度人脸检测方法 |
CN102629385A (zh) * | 2012-02-28 | 2012-08-08 | 中山大学 | 一种基于多摄像机信息融合的目标匹配与跟踪系统及方法 |
CN102629385B (zh) * | 2012-02-28 | 2014-09-24 | 中山大学 | 一种基于多摄像机信息融合的目标匹配与跟踪系统及方法 |
CN102708361A (zh) * | 2012-05-11 | 2012-10-03 | 哈尔滨工业大学 | 远距离人脸采集方法 |
CN102708361B (zh) * | 2012-05-11 | 2014-10-29 | 哈尔滨工业大学 | 远距离人脸采集方法 |
CN107610153B (zh) * | 2012-07-17 | 2020-10-30 | 株式会社尼康 | 电子设备以及相机 |
CN104641398A (zh) * | 2012-07-17 | 2015-05-20 | 株式会社尼康 | 被拍摄体跟踪装置以及相机 |
CN107610153A (zh) * | 2012-07-17 | 2018-01-19 | 株式会社尼康 | 电子设备以及相机 |
CN104641398B (zh) * | 2012-07-17 | 2017-10-13 | 株式会社尼康 | 被拍摄体跟踪装置以及相机 |
CN103020707B (zh) * | 2012-10-19 | 2015-08-26 | 浙江工业大学 | 基于机器视觉的流水式高精度、高速的颗粒物自动计数装置 |
CN102938059A (zh) * | 2012-11-26 | 2013-02-20 | 昆山振天智能化设备有限公司 | 一种智能人脸识别系统 |
US9697440B2 (en) | 2012-11-27 | 2017-07-04 | Tencent Technology (Shenzhen) Company Limited | Method and apparatus for recognizing client feature, and storage medium |
WO2014082496A1 (zh) * | 2012-11-27 | 2014-06-05 | 腾讯科技(深圳)有限公司 | 客户端特征的识别方法、装置及存储介质 |
CN103218627A (zh) * | 2013-01-31 | 2013-07-24 | 沈阳航空航天大学 | 一种图像检测方法及设备 |
CN104156689A (zh) * | 2013-05-13 | 2014-11-19 | 浙江大华技术股份有限公司 | 一种对目标对象的特征信息进行定位的方法和设备 |
CN104156689B (zh) * | 2013-05-13 | 2017-03-22 | 浙江大华技术股份有限公司 | 一种对目标对象的特征信息进行定位的方法和设备 |
WO2015003287A1 (zh) * | 2013-07-12 | 2015-01-15 | 台湾色彩与影像科技股份有限公司 | 一种行为辨识及追踪系统及其运作方法 |
CN103473564B (zh) * | 2013-09-29 | 2017-09-19 | 公安部第三研究所 | 一种基于敏感区域的正面人脸检测方法 |
CN103473564A (zh) * | 2013-09-29 | 2013-12-25 | 公安部第三研究所 | 一种基于敏感区域的正面人脸检测方法 |
CN103546672B (zh) * | 2013-11-07 | 2016-09-07 | 苏州君立软件有限公司 | 一种图像采集系统 |
CN103546672A (zh) * | 2013-11-07 | 2014-01-29 | 苏州君立软件有限公司 | 一种图像采集系统 |
CN103616954A (zh) * | 2013-12-06 | 2014-03-05 | Tcl通讯(宁波)有限公司 | 一种虚拟键盘系统、实现方法及移动终端 |
US9971411B2 (en) | 2013-12-10 | 2018-05-15 | Htc Corporation | Method, interactive device, and computer readable medium storing corresponding instructions for recognizing user behavior without user touching on input portion of display screen |
CN104699237A (zh) * | 2013-12-10 | 2015-06-10 | 宏达国际电子股份有限公司 | 辨识使用者操作的方法及相关互动装置与计算机可读介质 |
CN104699237B (zh) * | 2013-12-10 | 2018-01-30 | 宏达国际电子股份有限公司 | 辨识使用者操作的方法及相关互动装置与计算机可读介质 |
CN103702014B (zh) * | 2013-12-31 | 2017-02-15 | 中国科学院深圳先进技术研究院 | 非接触式生理参数检测方法、系统及装置 |
CN103795978A (zh) * | 2014-01-15 | 2014-05-14 | 浙江宇视科技有限公司 | 一种多画面智能识别方法及其装置 |
CN103795978B (zh) * | 2014-01-15 | 2018-03-09 | 浙江宇视科技有限公司 | 一种多画面智能识别方法及其装置 |
CN103971103A (zh) * | 2014-05-23 | 2014-08-06 | 西安电子科技大学宁波信息技术研究院 | 一种人数统计系统 |
US10311291B2 (en) | 2014-09-19 | 2019-06-04 | Zte Corporation | Face recognition method, device and computer readable storage medium |
WO2015131712A1 (zh) * | 2014-09-19 | 2015-09-11 | 中兴通讯股份有限公司 | 一种脸部识别方法、装置和计算机可读存储介质 |
CN105741261A (zh) * | 2014-12-11 | 2016-07-06 | 北京大唐高鸿数据网络技术有限公司 | 一种基于四摄像头的平面多目标定位方法 |
CN104616008A (zh) * | 2015-02-15 | 2015-05-13 | 四川川大智胜软件股份有限公司 | 一种多视角二维人脸图像采集平台及其采集方法 |
CN106156688A (zh) * | 2015-03-10 | 2016-11-23 | 上海骏聿数码科技有限公司 | 一种动态人脸识别方法及系统 |
CN104794439A (zh) * | 2015-04-10 | 2015-07-22 | 上海交通大学 | 基于多相机的准正面人脸图像实时优选方法及系统 |
CN104820838A (zh) * | 2015-04-24 | 2015-08-05 | 深圳信息职业技术学院 | 基于设置正负例错分值的百分比的可控置信机器算法 |
CN104915000A (zh) * | 2015-05-27 | 2015-09-16 | 天津科技大学 | 用于裸眼3d广告的多感知生物识别交互方法 |
CN106331596A (zh) * | 2015-07-06 | 2017-01-11 | 中兴通讯股份有限公司 | 一种家居监控方法及系统 |
CN107771336B (zh) * | 2015-09-15 | 2021-09-10 | 谷歌有限责任公司 | 基于颜色分布的图像中的特征检测和掩模 |
CN107771336A (zh) * | 2015-09-15 | 2018-03-06 | 谷歌有限责任公司 | 基于颜色分布的图像中的特征检测和掩模 |
CN105354579A (zh) * | 2015-10-30 | 2016-02-24 | 浙江宇视科技有限公司 | 一种特征检测的方法和装置 |
CN105354579B (zh) * | 2015-10-30 | 2020-07-28 | 浙江宇视科技有限公司 | 一种特征检测的方法和装置 |
CN106707834A (zh) * | 2015-11-13 | 2017-05-24 | 杭州摩图科技有限公司 | 一种基于计算机视觉技术的遥控设备 |
CN105447465B (zh) * | 2015-11-25 | 2020-02-07 | 中山大学 | 基于行人局部和整体融合匹配的无交叠视域摄像头之间的不完整行人匹配方法 |
CN105447465A (zh) * | 2015-11-25 | 2016-03-30 | 中山大学 | 基于行人局部和整体融合匹配的无交叠视域摄像头之间的不完整行人匹配方法 |
CN105373626A (zh) * | 2015-12-09 | 2016-03-02 | 深圳融合永道科技有限公司 | 分布式人脸识别轨迹搜索系统和方法 |
CN105590097B (zh) * | 2015-12-17 | 2019-01-25 | 重庆邮电大学 | 暗视觉条件下双摄像头协同实时人脸识别安防系统及方法 |
CN105590097A (zh) * | 2015-12-17 | 2016-05-18 | 重庆邮电大学 | 暗视觉条件下双摄像头协同实时人脸识别安防系统及方法 |
CN105704368B (zh) * | 2015-12-23 | 2018-07-10 | 电子科技大学中山学院 | 一种人脸图像采集的自适应控制方法 |
CN105704368A (zh) * | 2015-12-23 | 2016-06-22 | 电子科技大学中山学院 | 一种人脸图像采集的自适应控制方法及其装置 |
CN105512644A (zh) * | 2016-01-15 | 2016-04-20 | 福建宜品网络科技有限公司 | 一种指静脉识别装置及其识别方法 |
CN105513223B (zh) * | 2016-01-27 | 2018-03-06 | 大连楼兰科技股份有限公司 | 一种基于摄像机的银行卡防盗方法 |
CN105513223A (zh) * | 2016-01-27 | 2016-04-20 | 大连楼兰科技股份有限公司 | 一种基于摄像机的银行卡防盗方法 |
CN106169071B (zh) * | 2016-07-05 | 2019-06-21 | 厦门理工学院 | 一种基于动态人脸与胸卡识别的考勤方法及系统 |
CN106169071A (zh) * | 2016-07-05 | 2016-11-30 | 厦门理工学院 | 一种基于动态人脸与胸卡识别的考勤方法及系统 |
US11069167B2 (en) | 2016-08-05 | 2021-07-20 | Assa Abloy Ab | Method and system for automated physical access control system using biometric recognition coupled with tag authentication |
CN109716402A (zh) * | 2016-08-05 | 2019-05-03 | 亚萨合莱有限公司 | 用于使用生物统计辨识外加标签验证的自动化物理访问控制系统的方法及系统 |
CN106503615B (zh) * | 2016-09-20 | 2019-10-08 | 北京工业大学 | 基于多传感器的室内人体检测跟踪和身份识别系统 |
CN106503615A (zh) * | 2016-09-20 | 2017-03-15 | 北京工业大学 | 基于多传感器的室内人体检测跟踪和身份识别系统 |
WO2018068521A1 (zh) * | 2016-10-10 | 2018-04-19 | 深圳云天励飞技术有限公司 | 一种人群分析方法及计算机设备 |
CN108073859A (zh) * | 2016-11-16 | 2018-05-25 | 天津市远卓自动化设备制造有限公司 | 一种特定区域的监测装置及方法 |
CN106557750A (zh) * | 2016-11-22 | 2017-04-05 | 重庆邮电大学 | 一种基于肤色和深度二叉特征树的人脸检测方法 |
CN106710020B (zh) * | 2016-12-05 | 2019-01-11 | 日立楼宇技术(广州)有限公司 | 智能考勤方法与系统 |
CN106710020A (zh) * | 2016-12-05 | 2017-05-24 | 广州日滨科技发展有限公司 | 智能考勤方法与系统 |
CN106845378A (zh) * | 2017-01-03 | 2017-06-13 | 江苏慧眼数据科技股份有限公司 | 一种自对向图像中识别人体目标的方法 |
CN110114801A (zh) * | 2017-01-23 | 2019-08-09 | 富士通株式会社 | 图像前景检测装置及方法、电子设备 |
CN110114801B (zh) * | 2017-01-23 | 2022-09-20 | 富士通株式会社 | 图像前景检测装置及方法、电子设备 |
CN106941601A (zh) * | 2017-02-13 | 2017-07-11 | 杭州百航信息技术有限公司 | 金融系统风控双录装置及其文件生物识别方法 |
CN106940789A (zh) * | 2017-03-10 | 2017-07-11 | 广东数相智能科技有限公司 | 一种基于视频识别的数量统计的方法、系统及装置 |
CN108664782B (zh) * | 2017-03-28 | 2023-09-12 | 三星电子株式会社 | 面部验证方法和设备 |
US12087087B2 (en) | 2017-03-28 | 2024-09-10 | Samsung Electronics Co., Ltd. | Face verifying method and apparatus |
CN108664782A (zh) * | 2017-03-28 | 2018-10-16 | 三星电子株式会社 | 面部验证方法和设备 |
CN110019899B (zh) * | 2017-08-25 | 2023-10-03 | 腾讯科技(深圳)有限公司 | 一种目标对象识别方法、装置、终端及存储介质 |
CN110019899A (zh) * | 2017-08-25 | 2019-07-16 | 腾讯科技(深圳)有限公司 | 一种目标对象识别方法、装置、终端及存储介质 |
CN107590488A (zh) * | 2017-10-27 | 2018-01-16 | 广州市浩翔计算机科技有限公司 | 一种拆分式快速识别的人脸识别系统 |
CN107966944A (zh) * | 2017-11-30 | 2018-04-27 | 贵州财经大学 | 智慧大棚分区控制系统及分区采摘方法 |
CN107966944B (zh) * | 2017-11-30 | 2020-12-08 | 贵州财经大学 | 智慧大棚分区控制系统及分区采摘方法 |
CN108133183A (zh) * | 2017-12-19 | 2018-06-08 | 深圳怡化电脑股份有限公司 | 定点捕捉人像的方法、装置、自助设备及计算机可读存储介质 |
CN108197250A (zh) * | 2017-12-29 | 2018-06-22 | 深圳云天励飞技术有限公司 | 图片检索方法、电子设备及存储介质 |
CN108197250B (zh) * | 2017-12-29 | 2019-10-25 | 深圳云天励飞技术有限公司 | 图片检索方法、电子设备及存储介质 |
CN108234904B (zh) * | 2018-02-05 | 2020-10-27 | 刘捷 | 一种多视频融合方法、装置与系统 |
CN108234904A (zh) * | 2018-02-05 | 2018-06-29 | 刘捷 | 一种多视频融合方法、装置与系统 |
CN108388857A (zh) * | 2018-02-11 | 2018-08-10 | 广东欧珀移动通信有限公司 | 人脸检测方法及相关设备 |
CN108268864A (zh) * | 2018-02-24 | 2018-07-10 | 达闼科技(北京)有限公司 | 人脸识别方法、系统、电子设备和计算机程序产品 |
CN108629935A (zh) * | 2018-05-17 | 2018-10-09 | 山东深图智能科技有限公司 | 一种基于视频监控检测爬楼翻窗盗窃行为的方法及系统 |
CN109031262A (zh) * | 2018-06-05 | 2018-12-18 | 长沙大京网络科技有限公司 | 一种定位寻车系统及其方法 |
CN109031262B (zh) * | 2018-06-05 | 2023-05-05 | 鲁忠 | 一种定位寻车系统及其方法 |
CN108921204A (zh) * | 2018-06-14 | 2018-11-30 | 平安科技(深圳)有限公司 | 电子装置、图片样本集生成方法和计算机可读存储介质 |
WO2019237558A1 (zh) * | 2018-06-14 | 2019-12-19 | 平安科技(深圳)有限公司 | 电子装置、图片样本集生成方法和计算机可读存储介质 |
CN108921204B (zh) * | 2018-06-14 | 2023-12-26 | 平安科技(深圳)有限公司 | 电子装置、图片样本集生成方法和计算机可读存储介质 |
CN109086670A (zh) * | 2018-07-03 | 2018-12-25 | 百度在线网络技术(北京)有限公司 | 人脸识别方法、装置及设备 |
CN109086670B (zh) * | 2018-07-03 | 2019-10-11 | 百度在线网络技术(北京)有限公司 | 人脸识别方法、装置及设备 |
CN109145734A (zh) * | 2018-07-17 | 2019-01-04 | 深圳市巨龙创视科技有限公司 | 基于4k平台的ipc智能人脸识别抓拍算法 |
CN109191530A (zh) * | 2018-07-27 | 2019-01-11 | 深圳六滴科技有限公司 | 全景相机标定方法、系统、计算机设备和存储介质 |
CN109191530B (zh) * | 2018-07-27 | 2022-07-05 | 深圳六滴科技有限公司 | 全景相机标定方法、系统、计算机设备和存储介质 |
CN108986407A (zh) * | 2018-08-23 | 2018-12-11 | 浙江理工大学 | 一种用于独居老人的安全侦测系统及方法 |
CN109493369A (zh) * | 2018-09-11 | 2019-03-19 | 深圳控石智能系统有限公司 | 一种智能机器人视觉动态定位跟踪方法及系统 |
CN109446901A (zh) * | 2018-09-21 | 2019-03-08 | 北京晶品特装科技有限责任公司 | 一种可嵌入式移植的实时人形目标自动识别算法 |
CN109389367A (zh) * | 2018-10-09 | 2019-02-26 | 苏州科达科技股份有限公司 | 人员考勤方法、装置及存储介质 |
CN109389367B (zh) * | 2018-10-09 | 2021-06-18 | 苏州科达科技股份有限公司 | 人员考勤方法、装置及存储介质 |
TWI709324B (zh) * | 2018-10-31 | 2020-11-01 | 聰泰科技開發股份有限公司 | 採集與標示記錄方法 |
CN111277746A (zh) * | 2018-12-05 | 2020-06-12 | 杭州海康威视系统技术有限公司 | 一种室内人脸抓拍方法及系统 |
CN109600584A (zh) * | 2018-12-11 | 2019-04-09 | 中联重科股份有限公司 | 观察塔机的方法和装置、塔机及机器可读存储介质 |
CN109618173A (zh) * | 2018-12-17 | 2019-04-12 | 深圳Tcl新技术有限公司 | 视频压缩方法、装置和计算机可读存储介质 |
CN109618173B (zh) * | 2018-12-17 | 2021-09-28 | 深圳Tcl新技术有限公司 | 视频压缩方法、装置和计算机可读存储介质 |
CN111372037A (zh) * | 2018-12-25 | 2020-07-03 | 杭州海康威视数字技术股份有限公司 | 目标抓拍系统和方法 |
CN111372037B (zh) * | 2018-12-25 | 2021-11-02 | 杭州海康威视数字技术股份有限公司 | 目标抓拍系统和方法 |
CN109800727A (zh) * | 2019-01-28 | 2019-05-24 | 云谷(固安)科技有限公司 | 一种监控方法和装置 |
CN110147717A (zh) * | 2019-04-03 | 2019-08-20 | 平安科技(深圳)有限公司 | 一种人体动作的识别方法及设备 |
CN110147717B (zh) * | 2019-04-03 | 2023-10-20 | 平安科技(深圳)有限公司 | 一种人体动作的识别方法及设备 |
CN110309709A (zh) * | 2019-05-20 | 2019-10-08 | 平安科技(深圳)有限公司 | 人脸识别方法、装置及计算机可读存储介质 |
CN110245590B (zh) * | 2019-05-29 | 2023-04-28 | 广东技术师范大学 | 一种基于皮肤图像检测的产品推荐方法及系统 |
CN110245590A (zh) * | 2019-05-29 | 2019-09-17 | 广东技术师范大学 | 一种基于皮肤图像检测的产品推荐方法及系统 |
CN110263712A (zh) * | 2019-06-20 | 2019-09-20 | 江南大学 | 一种基于区域候选的粗精行人检测方法 |
CN110427826B (zh) * | 2019-07-04 | 2022-03-15 | 深兰科技(上海)有限公司 | 一种手掌识别方法、装置、电子设备及存储介质 |
CN110427826A (zh) * | 2019-07-04 | 2019-11-08 | 深兰科技(上海)有限公司 | 一种手掌识别方法、装置、电子设备及存储介质 |
CN110248112B (zh) * | 2019-07-12 | 2021-01-29 | 成都微光集电科技有限公司 | 一种图像传感器的曝光控制方法 |
CN110248112A (zh) * | 2019-07-12 | 2019-09-17 | 成都微光集电科技有限公司 | 一种图像传感器的曝光控制方法 |
CN112329497A (zh) * | 2019-07-18 | 2021-02-05 | 杭州海康威视数字技术股份有限公司 | 一种目标识别方法、装置及设备 |
CN110458049A (zh) * | 2019-07-24 | 2019-11-15 | 东北师范大学 | 一种基于多视觉的行为测量与分析方法 |
CN110418076A (zh) * | 2019-08-02 | 2019-11-05 | 新华智云科技有限公司 | 视频集锦生成方法、装置、电子设备及存储介质 |
CN110826390B (zh) * | 2019-09-09 | 2023-09-08 | 博云视觉(北京)科技有限公司 | 一种基于人脸矢量特征的视频数据处理方法 |
CN110826390A (zh) * | 2019-09-09 | 2020-02-21 | 博云视觉(北京)科技有限公司 | 一种基于人脸矢量特征的视频数据处理方法 |
RU2731519C1 (ru) * | 2019-09-19 | 2020-09-03 | Акционерное общество "Федеральный научно-производственный центр "Производственное объединение "Старт" им. М.В. Проценко" (АО "ФНПЦ ПО "Старт" им. М.В. Проценко") | Комбинированная система контроля и управления доступом для системы физической защиты особо важных объектов |
CN112702564A (zh) * | 2019-10-23 | 2021-04-23 | 成都鼎桥通信技术有限公司 | 图像监控方法及设备 |
WO2021098779A1 (zh) * | 2019-11-20 | 2021-05-27 | Oppo广东移动通信有限公司 | 目标检测方法、装置、设备及计算机可读存储介质 |
CN111091628A (zh) * | 2019-11-20 | 2020-05-01 | 深圳市桑格尔科技股份有限公司 | 一种带监控功能的人脸识别考勤设备 |
CN112883765B (zh) * | 2019-11-30 | 2024-04-09 | 浙江宇视科技有限公司 | 一种目标移动轨迹获取方法、装置、存储介质及电子设备 |
CN112883765A (zh) * | 2019-11-30 | 2021-06-01 | 浙江宇视科技有限公司 | 一种目标移动轨迹获取方法、装置、存储介质及电子设备 |
CN111160105A (zh) * | 2019-12-03 | 2020-05-15 | 北京文香信息技术有限公司 | 一种视频图像的监测方法、装置、设备及存储介质 |
CN111145274B (zh) * | 2019-12-06 | 2022-04-22 | 华南理工大学 | 一种基于视觉的坐姿检测方法 |
CN111145274A (zh) * | 2019-12-06 | 2020-05-12 | 华南理工大学 | 一种基于视觉的坐姿检测方法 |
CN113095116B (zh) * | 2019-12-23 | 2024-03-22 | 深圳云天励飞技术有限公司 | 身份识别方法及相关产品 |
CN113095116A (zh) * | 2019-12-23 | 2021-07-09 | 深圳云天励飞技术有限公司 | 身份识别方法及相关产品 |
CN110874589A (zh) * | 2020-01-17 | 2020-03-10 | 南京甄视智能科技有限公司 | 人脸照片获取方法与系统 |
CN111405241A (zh) * | 2020-02-21 | 2020-07-10 | 中国电子技术标准化研究院 | 一种用于视频监控的边缘计算方法和系统 |
CN111612930A (zh) * | 2020-04-14 | 2020-09-01 | 安徽中迅徽软科技有限公司 | 一种考勤系统及方法 |
CN111583485A (zh) * | 2020-04-16 | 2020-08-25 | 北京澎思科技有限公司 | 小区门禁系统、门禁控制方法和装置、门禁单元及介质 |
CN111698467A (zh) * | 2020-05-08 | 2020-09-22 | 北京中广上洋科技股份有限公司 | 基于多摄像机的智能跟踪方法及系统 |
CN111814763B (zh) * | 2020-08-26 | 2021-01-08 | 长沙鹏阳信息技术有限公司 | 一种基于跟踪序列的无感考勤和制服识别方法 |
CN111814763A (zh) * | 2020-08-26 | 2020-10-23 | 长沙鹏阳信息技术有限公司 | 一种基于跟踪序列的无感考勤和制服识别方法 |
CN112132200A (zh) * | 2020-09-17 | 2020-12-25 | 山东大学 | 基于多维岩石图像深度学习的岩性识别方法及系统 |
CN112132057A (zh) * | 2020-09-24 | 2020-12-25 | 天津锋物科技有限公司 | 一种多维身份识别方法及系统 |
CN112132067B (zh) * | 2020-09-27 | 2024-04-09 | 深圳市梦网视讯有限公司 | 一种基于压缩信息的人脸倾斜度分析方法、系统及设备 |
CN112132067A (zh) * | 2020-09-27 | 2020-12-25 | 深圳市梦网视讯有限公司 | 一种基于压缩信息的人脸倾斜度分析方法、系统及设备 |
CN112200092A (zh) * | 2020-10-13 | 2021-01-08 | 深圳龙岗智能视听研究院 | 一种基于球型摄像机可变焦移动的智能吸烟检测方法 |
CN112347856A (zh) * | 2020-10-13 | 2021-02-09 | 广东电网有限责任公司培训与评价中心 | 一种基于教室场景的无感知考勤系统及方法 |
CN112650461A (zh) * | 2020-12-15 | 2021-04-13 | 广州舒勇五金制品有限公司 | 一种基于相对位置的展示系统 |
WO2022134916A1 (zh) * | 2020-12-24 | 2022-06-30 | 中兴通讯股份有限公司 | 身份特征生成方法、设备及存储介质 |
CN112738476A (zh) * | 2020-12-29 | 2021-04-30 | 上海应用技术大学 | 基于机器学习算法的城市风险监控网络系统和方法 |
CN112651998B (zh) * | 2021-01-18 | 2023-10-31 | 沈阳航空航天大学 | 基于注意力机制和双流多域卷积神经网络的人体跟踪算法 |
CN112651998A (zh) * | 2021-01-18 | 2021-04-13 | 沈阳航空航天大学 | 基于注意力机制和双流多域卷积神经网络的人体跟踪算法 |
CN112766395A (zh) * | 2021-01-27 | 2021-05-07 | 中国地质大学(北京) | 一种图像匹配方法、装置、电子设备及可读存储介质 |
CN112766395B (zh) * | 2021-01-27 | 2023-11-28 | 中国地质大学(北京) | 一种图像匹配方法、装置、电子设备及可读存储介质 |
CN112966131B (zh) * | 2021-03-02 | 2022-09-16 | 中华人民共和国成都海关 | 一种海关数据风控类型识别方法、海关智能化风险布控方法、装置、计算机设备及存储介质 |
CN112966131A (zh) * | 2021-03-02 | 2021-06-15 | 中华人民共和国成都海关 | 一种海关数据风控类型识别方法、海关智能化风险布控方法、装置、计算机设备及存储介质 |
CN112990096B (zh) * | 2021-04-13 | 2021-08-27 | 杭州金线连科技有限公司 | 一种基于ocr与人脸检测融合的身份证信息录用方法 |
CN112990096A (zh) * | 2021-04-13 | 2021-06-18 | 杭州金线连科技有限公司 | 一种基于ocr与人脸检测融合的身份证信息录用方法 |
CN113327286A (zh) * | 2021-05-10 | 2021-08-31 | 中国地质大学(武汉) | 一种360度全方位的说话人视觉空间定位方法 |
CN113327286B (zh) * | 2021-05-10 | 2023-05-19 | 中国地质大学(武汉) | 一种360度全方位的说话人视觉空间定位方法 |
CN113256863A (zh) * | 2021-05-13 | 2021-08-13 | 深圳他米科技有限公司 | 基于人脸识别的酒店入住方法、装置、设备及存储介质 |
CN113301256B (zh) * | 2021-05-23 | 2023-12-22 | 成都申亚科技有限公司 | 一种低功耗多目标连续自动监测的摄像模组及其摄像方法 |
CN113301256A (zh) * | 2021-05-23 | 2021-08-24 | 成都申亚科技有限公司 | 一种低功耗多目标连续自动监测的摄像模组及其摄像方法 |
CN113535357A (zh) * | 2021-07-07 | 2021-10-22 | 厦门墨逦标识科技有限公司 | Eagle视觉应用中保障主线程性能的方法、存储介质 |
CN113642449A (zh) * | 2021-08-09 | 2021-11-12 | 福建平潭瑞谦智能科技有限公司 | 一种人脸识别装置及系统 |
CN113945253A (zh) * | 2021-10-18 | 2022-01-18 | 成都天仁民防科技有限公司 | 一种轨道交通轨行区的水位测量方法 |
CN113656625B (zh) * | 2021-10-19 | 2022-02-15 | 浙江大华技术股份有限公司 | 一种确定人体空间域的方法、装置及电子设备 |
CN113656625A (zh) * | 2021-10-19 | 2021-11-16 | 浙江大华技术股份有限公司 | 一种确定人体空间域的方法、装置及电子设备 |
CN113920172B (zh) * | 2021-12-14 | 2022-03-01 | 成都睿沿芯创科技有限公司 | 一种目标跟踪方法、装置、设备以及存储介质 |
CN113920172A (zh) * | 2021-12-14 | 2022-01-11 | 成都睿沿芯创科技有限公司 | 一种目标跟踪方法、装置、设备以及存储介质 |
CN115171200B (zh) * | 2022-09-08 | 2023-01-31 | 深圳市维海德技术股份有限公司 | 基于变倍的目标跟踪特写方法、装置、电子设备及介质 |
CN115171200A (zh) * | 2022-09-08 | 2022-10-11 | 深圳市维海德技术股份有限公司 | 基于变倍的目标跟踪特写方法、装置、电子设备及介质 |
CN115633248A (zh) * | 2022-12-22 | 2023-01-20 | 浙江宇视科技有限公司 | 多场景协同检测方法与系统 |
Also Published As
Publication number | Publication date |
---|---|
CN100568262C (zh) | 2009-12-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100568262C (zh) | 基于多摄像机信息融合的人脸识别检测装置 | |
CN108596277B (zh) | 一种车辆身份识别方法、装置和存储介质 | |
Li et al. | Line-cnn: End-to-end traffic line detection with line proposal unit | |
US9852340B2 (en) | System and method for object re-identification | |
CN102663413B (zh) | 一种面向多姿态和跨年龄的人脸图像认证方法 | |
CN101142584B (zh) | 面部特征检测的方法 | |
CN108229335A (zh) | 关联人脸识别方法和装置、电子设备、存储介质、程序 | |
CN103632132A (zh) | 一种基于肤色分割和模板匹配的人脸检测与识别方法 | |
CN103914904A (zh) | 人脸识别排号机 | |
CN104504408A (zh) | 一种人脸识别比对方法和实现该方法的系统 | |
CN106156688A (zh) | 一种动态人脸识别方法及系统 | |
CN103440475A (zh) | 一种自动取款机使用者人脸可见性判断系统及方法 | |
Björklund et al. | Automatic license plate recognition with convolutional neural networks trained on synthetic data | |
CN102867188A (zh) | 一种基于级联结构的会场内座位状态检测方法 | |
Chumuang et al. | Face detection system for public transport service based on scale-invariant feature transform | |
Dehshibi et al. | Persian vehicle license plate recognition using multiclass Adaboost | |
Javed et al. | Automated multi-camera surveillance: algorithms and practice | |
CN110427815A (zh) | 实现门禁有效内容截取的视频处理方法及装置 | |
Das et al. | Crowd monitoring system using facial recognition | |
CN111160150A (zh) | 基于深度残差神经网络卷积的视频监控人群行为的识别方法 | |
Jain et al. | Number plate detection using drone surveillance | |
Zhang et al. | Real-time license plate detection under various conditions | |
Archana et al. | Face recognition using Deep Neural Network and Support Based Anchor Boxes Methods in video frames | |
Zingman | Semi-automated detection of fragmented rectangular structures in high resolution remote sensing images with application in archaeology | |
Irhebhude | Object detection, recognition and re-identification in video footage |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20091209 Termination date: 20121229 |