CN112242061A - 一种基于人脸分析的车辆管理系统 - Google Patents
一种基于人脸分析的车辆管理系统 Download PDFInfo
- Publication number
- CN112242061A CN112242061A CN201910645525.3A CN201910645525A CN112242061A CN 112242061 A CN112242061 A CN 112242061A CN 201910645525 A CN201910645525 A CN 201910645525A CN 112242061 A CN112242061 A CN 112242061A
- Authority
- CN
- China
- Prior art keywords
- image
- face
- vehicle
- assembly
- driver
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 14
- 230000001276 controlling effect Effects 0.000 claims abstract description 17
- 230000003044 adaptive Effects 0.000 claims abstract description 7
- 238000001514 detection method Methods 0.000 claims description 30
- 230000000875 corresponding Effects 0.000 claims description 11
- 230000001960 triggered Effects 0.000 claims description 8
- 230000001815 facial Effects 0.000 claims description 6
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000010200 validation analysis Methods 0.000 claims description 3
- 238000000034 method Methods 0.000 abstract description 10
- 239000000446 fuel Substances 0.000 description 10
- 239000007789 gas Substances 0.000 description 7
- 210000000887 Face Anatomy 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 210000000554 Iris Anatomy 0.000 description 1
- 229910000831 Steel Inorganic materials 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000019504 cigarettes Nutrition 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000029578 entry into host Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000003502 gasoline Substances 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 239000003915 liquefied petroleum gas Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006011 modification reaction Methods 0.000 description 1
- 239000003345 natural gas Substances 0.000 description 1
- 230000003287 optical Effects 0.000 description 1
- ATUOYWHBWRKTHZ-UHFFFAOYSA-N propane Chemical compound CCC ATUOYWHBWRKTHZ-UHFFFAOYSA-N 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000005507 spraying Methods 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/017—Detecting movement of traffic to be counted or controlled identifying vehicles
- G08G1/0175—Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
Abstract
本发明实施例提供了一种基于人脸分析的车辆管理系统,包括图像采集组件、处理器组件和控制器组件,其中,图像采集组件用于在车辆的自适应巡航控制电源ACC上电后,按照第一预设时间间隔,采集针对车辆的驾驶位置的第一图像,将采集到的第一图像发送至处理器组件;处理器组件用于接收来自图像采集组件的第一图像,并对第一图像进行人脸认证,根据人脸认证结果控制控制器组件;控制器组件被配置为与车辆内置的电子元件相连接,用于响应处理器组件的人脸认证结果;若人脸认证结果为认证失败,则控制电子元件对车辆进行管制。这样,在车辆行驶过程中,可以及时控制控制器组件对车辆进行管制操作,从而实现对车辆的实时管理。
Description
技术领域
本发明涉及车辆管理领域,特别是涉及一种基于人脸分析的车辆管理系统。
背景技术
通常,车辆由固定的一个或几个驾驶员进行驾驶,因此,在对车辆进行管理时,为了减少安全隐患和管理漏洞,在车辆的每次行驶之前,都需要对驾驶车辆的驾驶员进行身份认证,只有驾驶员的身份认证成功,才允许车辆行驶。
相关技术中,基于驾驶员的身份,对车辆进行管理的方法通常为:
首先,车辆管控电子设备抓拍驾驶员的人脸图像,并将抓拍到的人脸图像上传到平台端服务器,由平台端服务器根据人脸图像对驾驶员进行身份认证,并反馈认证结果;若接收到平台端服务器反馈的认证成功信息,则车辆管控电子设备允许车辆行驶;若接收到平台端服务器反馈的认证失败信息,则车辆管控电子设备控制车辆停止行驶。
但是,在上述车辆管理方法中,基于驾驶员的人脸图像进行身份认证的步骤只在车辆发动机工作前进行一次,无法检测到发动机处于工作状态时更换驾驶员等异常情况。也就是说,上述方法无法对车辆行驶过程中驾驶员的情况进行实时检测,对车辆进行管理的实时性较差。
发明内容
本发明实施例的目的在于提供一种基于人脸分析的车辆管理系统,以实现对车辆进行实时管理。具体技术方案如下:
本发明实施例提供了一种基于人脸分析的车辆管理系统,所述系统包括图像采集组件、处理器组件和控制器组件;
所述图像采集组件,用于在所述车辆的自适应巡航控制电源ACC上电后,按照第一预设时间间隔,采集针对所述车辆的驾驶位置的第一图像,将采集到的第一图像发送至所述处理器组件;
所述处理器组件,用于接收来自所述图像采集组件的第一图像,并对所述第一图像进行人脸认证,根据人脸认证结果控制所述控制器组件;
所述控制器组件,被配置为与所述车辆内置的电子元件相连接,用于响应所述处理器组件的人脸认证结果;若所述人脸认证结果为认证失败,则控制所述电子元件对所述车辆进行管制。
可选的,所述处理器组件,包括:人脸检测单元、人脸比对单元和目标跟踪单元,其中:
所述人脸检测单元,用于在所述目标跟踪单元启动前,接收所述图像采集组件发送的第一图像,对所述第一图像进行人脸检测;若在所述第一图像中检测到人脸,则将所述第一图像作为人脸图像,发送至所述人脸比对单元;若在所述第一图像中未检测到人脸,则触发所述控制器组件对所述车辆进行管制;
所述人脸比对单元,用于基于已存储的驾驶员人脸图像库,对接收到的人脸图像进行人脸比对;若所述人脸图像中包括驾驶员的人脸,则将所述人脸图像作为目标图像,发送至所述目标跟踪单元,以触发所述目标跟踪单元;若所述人脸图像中不包括驾驶员的人脸,则触发所述控制器组件对所述车辆进行管制;
所述目标跟踪单元,用于在接收到所述目标图像之后,接收所述图像采集组件发送的第一图像;根据所述目标图像,对接收到的第一图像进行目标跟踪;在目标跟踪失败的情况下,触发所述控制器组件对所述车辆进行管制。
可选的,所述人脸比对单元,还用于将所述目标图像中驾驶员的人脸的位置,发送至所述目标跟踪单元;
所述目标跟踪单元,具体用于识别接收到的第一图像中的运动目标,根据所述驾驶员的人脸在所述目标图像中的位置,从所述运动目标中确定待跟踪人脸;从所述运动目标中确定所述待跟踪人脸对应的人体,作为待跟踪人体;在接收到的第一图像中,对所述待跟踪人脸和所述待跟踪人体进行跟踪。
可选的,所述目标跟踪单元,具体用于:
若在接收到的第一图像中,未跟踪到所述待跟踪人脸及所述待跟踪人体的次数满足第一预设条件,则判定目标跟踪失败,触发所述控制器组件控制对所述车辆进行管制。
可选的,所述目标跟踪单元,还用于:
在接收到所述目标图像之后,向所述人脸检测单元发送切换指令,以使所述人脸检测单元停止接收所述第一图像;
在目标跟踪失败的情况下,向所述人脸检测单元发送触发指令,以使所述人脸检测单元接收所述第一图像,并对所述第一图像进行人脸检测。
可选的,所述目标跟踪单元,还用于:
在目标跟踪失败的情况下,向平台上传报警信息,所述报警信息包括以下一项或多项:预设的报警类型值、所述车辆的车辆信息、报警时间以及一张或多张接收到的第一图像。
可选的,所述驾驶员人脸图像库中存储的人脸图像是由移动摄像终端经由无线传输网络上传到所述处理器组件的。
可选的,所述人脸检测单元,还用于在第一预设时间内接收到的第一图像中,均未检测到人脸的情况下,向平台上传报警信息,所述报警信息包括以下一项或多项:预设的报警类型值、所述车辆的车辆信息、报警时间以及一张或多张接收到的第一图像。
可选的,所述人脸比对单元,具体用于:
在第二预设时间内接收到的人脸图像中,确定待比对人脸图像;
判断已存储的驾驶员人脸图像库中是否存在与所述待比对人脸图像的相似度满足第二预设条件的驾驶员人脸图像;
若存在,则判定所述待比对人脸图像中包括驾驶员的人脸。
可选的,所述人脸比对单元,还用于在判定所述人脸图像中不包括驾驶员的人脸的次数满足第二预设条件的情况下,向平台上传报警信息,所述报警信息包括以下一项或多项:预设的报警类型值、所述车辆的车辆信息、报警时间以及一张或多张接收到的第一图像。
可选的,所述处理器组件,还用于:
接收平台下发的操作指令,所述操作指令包括人脸抓拍指令和/或人脸比对指令;
对所述车辆执行与所述操作指令对应的操作。
可选的,所述控制器组件,具体用于:
在所述车辆处于非行驶状态的情况下,控制所述电子元件所述对车辆进行以下一项或多项管制操作:断油、断气、断电、锁车、熄火;
在所述车辆处于行驶状态的情况下,进行语音报警,并控制所述电子元件对所述车辆进行减速操作,以使所述车辆处于非行驶状态。
可选的,所述控制器组件,还用于:
若在第三预设时间内对所述车辆的管制成功,则将已采取的管制操作和管制生效时间上报平台;
若在第三预设时间内对所述车辆的管制失败,则将管制失败的信息上报平台。
可选的,在所述图像采集组件被配置为多路摄像机的情况下,
所述图像采集组件,还用于按照第二预设时间间隔,采集针对所述车辆内的第二图像,将采集到的第二图像发送至所述处理器组件;
所述处理器组件,用于接收来自所述图像采集组件的第二图像,并对所述第二图像进行人脸比对。
本发明实施例提供的基于人脸分析的车辆管理系统,包括图像采集组件、处理器组件和控制器组件,其中,图像采集组件用于在车辆的自适应巡航控制电源ACC上电后,按照第一预设时间间隔,采集针对车辆的驾驶位置的第一图像,将采集到的第一图像发送至处理器组件;处理器组件用于接收来自图像采集组件的第一图像,并对第一图像进行人脸认证,根据人脸认证结果控制控制器组件;控制器组件被配置为与车辆内置的电子元件相连接,用于响应处理器组件的人脸认证结果;若人脸认证结果为认证失败,则控制电子元件对车辆进行管制。这样,在车辆行驶过程中,图像采集组件可以不断地按照第一预设时间间隔,获取针对驾驶位置采集的第一图像,并由处理器组件根据第一图像对驾驶员进行人脸认证,当人脸认证失败时,可以及时控制控制器组件对车辆进行管制操作,从而实现对车辆的实时管理。当然,实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种基于人脸分析的车辆管理系统的时序图;
图2为本发明实施例提供的一种用于采集第一图像的图像采集设备的安装示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
相关技术中,基于驾驶员的身份对车辆进行管理的方法,通常通过在车辆行驶前,抓拍驾驶员的人脸图像,并将抓拍到的人脸图像上传到平台端服务器,由平台端服务器根据人脸图像对驾驶员进行身份认证的方式实现。但是,在上述方法中,基于驾驶员的人脸图像进行身份认证的步骤只在车辆发动机工作前进行一次,无法检测到发动机处于工作状态时更换驾驶员等异常情况,无法对车辆行驶过程中驾驶员的情况进行实时检测,对车辆进行管理的实时性较差。
为了解决上述技术问题,本发明提供了一种基于人脸分析的车辆管理系统。
下面从总体上对本发明实施例提供的基于人脸分析的车辆管理系统进行说明,该系统包括图像采集组件、处理器组件和控制器组件。
图像采集组件,用于在车辆的自适应巡航控制电源ACC上电后,按照第一预设时间间隔,采集针对车辆的驾驶位置的第一图像,将采集到的第一图像发送至处理器组件;
处理器组件,用于接收来自图像采集组件的第一图像,并对第一图像进行人脸认证,根据人脸认证结果控制控制器组件;
控制器组件,被配置为与车辆内置的电子元件相连接,用于响应处理器组件的人脸认证结果;若人脸认证结果为认证失败,则控制电子元件对车辆进行管制。
由以上可见,本发明实施例提供的基于人脸分析的车辆管理系统,在车辆行驶过程中,图像采集组件可以不断地按照第一预设时间间隔,获取针对驾驶位置采集的第一图像,并由处理器组件根据第一图像对驾驶员进行人脸认证,当人脸认证失败时,可以及时控制控制器组件对车辆进行管制操作,从而实现对车辆的实时管理。
下面通过具体实施例,对本发明实施例提供的基于人脸分析的车辆管理系统进行详细说明。
如图1所示,为本发明实施例提供的一种基于人脸分析的车辆管理系统的时序图,该系统包括图像采集组件、处理器组件和控制器组件,其中:
S101:图像采集组件110在车辆的自适应巡航控制电源ACC上电后,按照第一预设时间间隔,采集针对车辆的驾驶位置的第一图像。
举例而言,可以在检测到车辆的ACC(Adaptive Cruise Control,车辆自适应巡航控制电源)上电启动之后,开启图像采集组件,按照第一预设时间间隔,采集针对驾驶位置的第一图像。
其中,第一预设时间间隔可以根据车辆的供电情况确定,比如,当车辆供电充足时,可以每隔1秒采集一张第一图像,当电量不足时,则每隔5秒采集一张第一图像;或者,第一预设时间间隔也可以是某一固定时间间隔,比如,可以为10秒、5秒,等等,或者,第一预设时间间隔还可以是某一较短的时间间隔,换句话说,第一图像可以是针对驾驶位置实时采集的。
可以理解,在ACC上电启动之后,车辆上的功率较小的设备才可以通电,如收音机、点烟器、行车记录仪等设备,这时,图像采集组件可以启动,能够采集针对驾驶位置的第一图像。但是,此时发动机还未点火,车辆还处于非行驶状态。
如图2所示,为一种实现方式中,用于采集第一图像的图像采集组件的安装示意图,其中,图像采集组件的镜头正对驾驶位置,可以理解,这样可以使得采集到的第一图像中能够更准确的获取到驾驶员的信息,便于后续的人脸识别等操作。如图2所示,假设驾驶员坐在驾驶位置时,距离地面高度h为0.7米,图像采集组件的镜头距离驾驶员的水平距离为D,图像采集组件的俯视角度α为10°,那么,可推算出图2所示的图像采集组件的安装高度H为0.7+D×0.18。
其中,图像采集组件可以被配置为一台车载红外摄像机。车载红外摄像机具备良好的车载防振性能、宽动态性能以及低照度效果,并支持红外补光,可以在逆光或高曝光环境、低照度环境以及夜晚无光环境进行视频监控和人脸抓拍。举例而言,车载红外摄像机的红外灯可采用850nm~980nm波段的红外灯。
另外,一种实现方式中,车载红外摄像机还可以增加内置加热模块,这样,当车辆内的温度低于-30℃时,车载红外摄像机仍然能够正常启动,采集到第一图像,同时,还可以防止车载红外摄像机的镜头起雾,影响采集到的第一图像的清晰度,从而提高对车辆进行管理的准确度。
在驾驶室为半开放式或全开放式的情况下,图像采集组件还可以被配置为防护等级为IP66及以上的摄像机。其中,IP66是指摄像机可以完全防止外物侵入,且可完全防止灰尘进入,承受猛烈的海浪冲击或强烈喷水时,电器的进水量应不致达到有害的影响。另外,在这种情况下,对于带透明罩的半球型摄像机,还需要具备至少IK08及以上的防暴等级,其中,IK08是指在受到2.5公斤、半径25mm的钢制撞锤同等机械冲击力时,被撞摄像机的功能不会受到影响。
另外,对于两排座小型轿车、公交车、校车等车型的车辆,还可以将图像采集组件配置为多路摄像机,其中,一路摄像机用于采集第一图像,其他一路或多路摄像机则用于采集车辆上其他人员的第二图像,并对采集到的第二图像进行分析,比如,人脸检测、人脸比对或人脸跟踪等。这样,可以更全面的掌握车辆上的人员信息,便于针对该车辆采用更合理的管制操作,还可以及时对车辆上的异常情况进行报警。
此外,图像采集组件中的其他路摄像机该可以用于采集针对车辆前方的图像,这些图像可以作为普通视频监控,也可以基于这些图像,对车辆前方的汽车进行车牌抓拍、对路边的行人进行人脸抓拍或比对等处理。这样,可以便于掌握车辆当前所处环境的情况,在一些场景中,可以及时对车辆进行管制操作。
S102:图像采集组件110将采集到的第一图像发送至处理器组件120。
S103:处理器组件120接收来自图像采集组件的第一图像,并对第一图像进行人脸认证。
一种实现方式中,处理器组件120包括人脸检测单元121、人脸比对单元122和目标跟踪单元123,对第一图像进行人脸认证的过程包括:
人脸检测单元121在目标跟踪单元123启动前,接收图像采集组件110发送的第一图像,对第一图像进行人脸检测。若在第一图像中检测到人脸,则将第一图像作为人脸图像,发送至人脸比对单元122;若在第一图像中未检测到人脸,则触发控制器组件130对车辆进行管制。
一种实现方式中,在第一图像中未检测到人脸的情况下,还可以向平台上传报警信息,并触发控制器组件130对车辆进行管制,以使车辆停止行驶。具体的,可以在第一预设时间内接收到的第一图像中,均未检测到人脸的情况下,向平台上传报警信息,比如,第一预设时间可以为1800秒;或者,也可以在确定最新获取的第一图像中未检测到人脸的情况下,直接向平台上传报警信息。
其中,报警信息中可以包括以下一项或多项:预设的报警类型值、车辆的车辆信息、报警时间以及一张或多张接收到的第一图像。车辆信息可以包括车型、车牌号等信息。
人脸比对单元122用于基于已存储的驾驶员人脸图像库,对接收到的人脸图像进行人脸比对;若人脸图像中包括驾驶员的人脸,则将人脸图像作为目标图像,发送至目标跟踪单元123,以触发目标跟踪单元123;若人脸图像中不包括驾驶员的人脸,则触发控制器组件130对车辆进行管制。
其中,在进行比对时,可以计算该第一图像中的人脸与已存储的驾驶员人脸图像库中的人脸的相似度,当相似度不低于设定的阈值时,即判定为比对成功,否则判定为比对失败。
或者,也可以在第二预设时间内,先接收人脸图像,然后,从接收到的人脸图像中,确定待比对人脸图像。其中,待比对人脸图像可以是清晰度最高的图像,或人脸细节最完整的图像,等等。进而,再判断已存储的驾驶员人脸图像库中是否存在与待比对人脸图像的相似度满足第二预设条件的驾驶员人脸图像,若存在,则判定待比对人脸图像中包括驾驶员的人脸。这样,可以进一步减少计算量。
驾驶员人脸图像库中的人脸图像可以是由移动摄像终端经由无线传输网络上传到处理器组件的,也可以是直接通过车载终端输入至处理器组件的。
在本步骤中,若人脸比对失败,表明当前处于驾驶位置的人员不是预设的驾驶员之一,也就是说,车辆存在被偷窃、盗用的可能性,因此,需要对车辆进行管制,以使车辆处于非行驶状态。另外,一种实现方式中,还可以向平台上传报警信息,其中,报警信息可以包括以下一项或多项:预设的报警类型值、车辆的车辆信息、报警时间以及一张或多张接收到的第一图像等等。
其中,可以在确定最新获取的第一图像人脸比对失败的情况下,直接判定人脸比对失败,触发控制器组件130对车辆进行管制;或者,也可以在人脸图像中不包括驾驶员的人脸的次数满足第二预设条件的情况下,判定人脸比对失败,比如,第二预设条件可以为次数大于预设阈值,或,也可以为,在一段时间内,不包括驾驶员的人脸的次数大于包括驾驶员的人脸的次数,等等。
另外,在触发目标跟踪单元123或控制器组件130之前,还可以将第一图像及比对结果上传至平台,以使平台根据第一图像,对比对结果进行校验,若接收到平台返回的校验失败信息,则判定比对失败,可以触发平台管理员进行人工肉眼识别进行干预,以提高驾驶员人脸验证准确率;若接收到平台返回的校验成功信息,则判定比对成功。
目标跟踪单元123用于在接收到目标图像之后,接收图像采集组件110发送的第一图像;根据目标图像,对接收到的第一图像进行目标跟踪;在目标跟踪失败的情况下,触发控制器组件130对车辆进行管制。
其中,根据目标图像,对接收到的第一图像进行目标跟踪的方法,可以为:直接识别接收到的第一图像中的人脸和人体,作为待跟踪目标,进行跟踪。
或者,在一种实现方式中,人脸比对单元122将目标图像中驾驶员的人脸的位置发送至目标跟踪单元123的情况下,还可以采用如下方法:首先,识别第一图像中的运动目标,然后,根据目标图像中的识别出的人脸的位置,从运动目标中确定待跟踪人脸,进而,确定待跟踪人脸对应的人体,作为待跟踪人体,对待跟踪人脸和待跟踪人体进行跟踪。
举例而言,在识别第一图像中的运动目标时,可以先获取多张第一图像,从而可以识别出第一图像中的所有运动目标,然后,可以对识别出的运动目标进行检测和分类,将其分为候选人脸和每个候选人脸对应的候选人体,并为每个运动目标分配ID,将属于同一人的人脸目标和人体目标的坐标、宽高值、ID等信息进行关联。其中,每个运动目标的坐标、宽高值等信息跟随实际物体移动情况进行实时更新。
可以理解,图像采集的时间间隔比较短,也就是说,在这段时间间隔内,人的移动量较小,基于此,可以根据目标图像中比对成功的人脸的坐标、宽高值、ID等信息,从目标跟踪单元123接收到的第一图像的运动目标中确定待跟踪人脸和待跟踪人体,也就是说,可以将目标图像中比对成功的人脸的位置,作为目标跟踪单元123接收到的第一图像中该人的位置。一种实现方式中,目标跟踪单元123接收到的第一图像中检测到多个运动目标都为人脸,那么,可以只对人脸进行跟踪,其他运动目标可以不做跟踪处理。
一种实现方式中,在根据目标图像,对接收到的第一图像进行目标跟踪之前,还可以通过预设传感器对车辆的驾驶员进行辅助认证,在辅助认证成功的情况下,在待检测视频中识别目标帧中的人脸及对应的人体,对人脸和人体进行跟踪。
其中,辅助认证可以为刷卡认证、指纹认证、虹膜认证等方式,也可以多种认证手段可以结合起来使用,具体不做限定。
在本步骤中,跟踪失败可以是指:在接收到的第一图像中,未跟踪到待跟踪人脸及待跟踪人体的次数满足第一预设条件,其中,第一预设条件可以是指连续累计次数达到预设次数,比如,预设次数可以为20次。
在跟踪失败的情况下,还可以向平台上传报警信息,其中,报警信息可以包括以下一项或多项:预设的报警类型值、车辆的车辆信息、报警时间以及一张或多张接收到的第一图像等等。
一种实现方式中,处理器组件120还可以接收平台下发的操作指令,对车辆执行与操作指令对应的管控操作,并向平台反馈操作结果。其中,操作指令可以包括人脸抓拍、人脸认证、车辆管制等指令。对于离线的处理器组件120,平台未发送成功的指令将在一段时间内都保存在平台中,待处理器组件120连接平台成功后,平台将之前保存的指令下发至处理器组件120。
比如,通常,一辆车辆会对应一名或多名授权确认的合法驾驶员,处理器组件120的人脸比对单元122可以获取合法驾驶员的证件照片,并对获取到的证件照片进行特征提取,得到合法驾驶员的人脸特征,并将合法驾驶员的证件照片及对应的人脸特征存储在人脸库中。这样,处理器组件120的人脸比对单元122在获取针对驾驶位置采集的第一图像之后,可以将每张第一图像与预先存储在人脸库中的人脸特征进行比对。
其中,处理器组件120可以从平台中获取合法驾驶员的证件照片,或者,在网络状态不佳,与平台之间连接不正常的情况下,还可以通过移动终端录入合法驾驶员的证件照片。在网络状态恢复并与平台连接正常后,可以将合法驾驶员的证件照片上传至平台,由平台进行审核并与对应车辆信息进行绑定。
另外,一种实现方式中,在所获取的第一图像中对人脸和人体进行跟踪时,若接收到平台下发的人脸比对指令,处理器组件120的目标跟踪单元123可以即时退出跟踪环节,触发人脸比对单元122回到基于已存储的驾驶员人脸图像库,对接收到的人脸图像进行人脸比对的步骤。同时,还可以将本次抓拍到的人脸图、背景大图、人脸比对结果上传平台。
也就是说,可以实时根据平台下发的人脸比对指令,重新对处于驾驶位置的人员进行人脸比对。一方面,可以实时对车辆管控的结果进行验证,另一方面,还可以在人脸特征被更新的情况下,及时根据存储的人脸特征调整人脸认证结果。
在本发明实施例中,处理器组件120中的人脸检测单元121、人脸比对单元122和目标跟踪单元123是交替运行的。举例而言,目标跟踪单元123在接收到目标图像之后,可以向人脸检测单元121发送切换指令,以使人脸检测单元121停止接收第一图像;而在目标跟踪单元123进行目标跟踪失败的情况下,可以向人脸检测单元121发送触发指令,以使人脸检测单元121接收第一图像,并对第一图像进行人脸检测,进而由人脸比对单元122进行人脸比对。
也就是说,当人脸检测单元121和人脸比对单元122将第一图像中的人脸与已存储的驾驶员人脸图像库比对成功之后,就结束运行,同时目标跟踪单元123立即开始运行,对应的,当目标跟踪单元123跟踪失败之后,就结束运行,同时人脸检测单元121和人脸比对单元122立即开始运行,从而构成一个闭环。这样,可以保证车辆未被管制的任意时刻,处理器组件120中至少有一个单元是处于运行状态,可以进一步保证驾驶员全过程的动态跟踪和认证,可以对行驶过程中驾驶员更换的问题进行有效管控。
S104:处理器组件120根据人脸认证结果控制控制器组件130。
其中,处理器组件120对控制器组件130的控制可以是通过脉冲、电平或IO接口等方式,具体不做限定。或者,也可以向控制器组件130发送数字信号,由控制器组件130中的子处理器单元接收并分析该数字信号,并执行相应的操作。控制器组件130是用来对车辆进行管制的组件,其与主机、提前安装在车辆的油路、电路、气路等线路上的继电器、电子门阀等装置或ECU(Electronic Control Unit,电子控制单元)的I/O口相连接,从而可以实现对车辆的断油、断气、断电、锁车、熄火等操作。
一种实现方式中,控制器组件130中可以包括断油控制器、断电控制器、断气控制器和ECU控制器。针对不同类型车辆,可以采用其中任意一种或多种控制器的组合。
其中,断电控制器可以应用于燃油车辆的发动机或者电动车辆,通过切断车辆发动机启动电路或者电机电力系统,从而致使燃油车辆的发动机或者电动车辆的电机无法启动运行。
断油控制器可以应用于以汽油或柴油作为燃料提供动力的车辆,通过切断车辆发动机燃油供应的控制装置,阻止车辆的启动和行驶。
断气控制器可以应用于以液化石油气或压缩天然气作为燃料提供动力的车辆,通过切断车辆发动机燃气供应的控制装置,阻止车辆的启动和行驶。
ECU控制器可以通过连通电子设备和车辆的ECU,从而实现锁车、限速、限转、断油、断电、断气或者刹车等功能。
S105:控制器组件130,被配置为与车辆内置的电子元件相连接,用于响应处理器组件120的人脸认证结果;若人脸认证结果为认证失败,则控制电子元件对车辆进行管制。
可以理解,控制器组件130在控制电子元件对车辆进行管制时,存在两种情况:一种情况下,车辆还未启动,或者,车辆的发动机可能已启动,但发动机仍然处于空转状态,在这种情况,可以采取断油、断气、断电、锁车、熄火等管制操作,迫使车辆保持在非行驶状态;另一种情况下,车辆已经处于行驶状态,这时,可以采取先语音报警,并控制电子元件对车辆进行减速操作,以使车辆处于非行驶状态。举例而言,可以每过5分钟,将速度限制为当前时速的70%,等车速降低到5km/h以内后,再缓慢刹车,直到车辆停稳处于发动机空转状态时,再采取断油、断气、断电、锁车、熄火等管制措施。这样,可以提高车内人员的安全性。
在本发明实施例中,管制操作中的具体措施要依据不同车型、管制控制器可靠性、灵敏度以及监管部门或法律法规要求确定,并且,需要进行充足的测试验证,从而确保车辆及车辆内人员的安全。
一种实现方式中,若在第三预设时间内对车辆的管制成功,可以将已采取的管制操作和管制生效时间上报平台,若在第三预设时间内对车辆的管制失败,可以将管制失败的信息上报平台。这样,可以进一步提高车辆管制的安全性。
由以上可见,在车辆行驶过程中,图像采集组件可以不断地按照第一预设时间间隔,获取针对驾驶位置采集的第一图像,并由处理器组件根据第一图像对驾驶员进行人脸认证,当人脸认证失败时,可以及时控制控制器组件对车辆进行管制操作,从而实现对车辆的实时管理。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (14)
1.一种基于人脸分析的车辆管理系统,其特征在于,所述系统包括图像采集组件、处理器组件和控制器组件;
所述图像采集组件,用于在所述车辆的自适应巡航控制电源ACC上电后,按照第一预设时间间隔,采集针对所述车辆的驾驶位置的第一图像,将采集到的第一图像发送至所述处理器组件;
所述处理器组件,用于接收来自所述图像采集组件的第一图像,并对所述第一图像进行人脸认证,根据人脸认证结果控制所述控制器组件;
所述控制器组件,被配置为与所述车辆内置的电子元件相连接,用于响应所述处理器组件的人脸认证结果;若所述人脸认证结果为认证失败,则控制所述电子元件对所述车辆进行管制。
2.根据权利要求1所述的系统,其特征在于,所述处理器组件,包括:人脸检测单元、人脸比对单元和目标跟踪单元,其中:
所述人脸检测单元,用于在所述目标跟踪单元启动前,接收所述图像采集组件发送的第一图像,对所述第一图像进行人脸检测;若在所述第一图像中检测到人脸,则将所述第一图像作为人脸图像,发送至所述人脸比对单元;若在所述第一图像中未检测到人脸,则触发所述控制器组件对所述车辆进行管制;
所述人脸比对单元,用于基于已存储的驾驶员人脸图像库,对接收到的人脸图像进行人脸比对;若所述人脸图像中包括驾驶员的人脸,则将所述人脸图像作为目标图像,发送至所述目标跟踪单元,以触发所述目标跟踪单元;若所述人脸图像中不包括驾驶员的人脸,则触发所述控制器组件对所述车辆进行管制;
所述目标跟踪单元,用于在接收到所述目标图像之后,接收所述图像采集组件发送的第一图像;根据所述目标图像,对接收到的第一图像进行目标跟踪;在目标跟踪失败的情况下,触发所述控制器组件对所述车辆进行管制。
3.根据权利要求2所述的系统,其特征在于,
所述人脸比对单元,还用于将所述目标图像中驾驶员的人脸的位置,发送至所述目标跟踪单元;
所述目标跟踪单元,具体用于识别接收到的第一图像中的运动目标,根据所述驾驶员的人脸在所述目标图像中的位置,从所述运动目标中确定待跟踪人脸;从所述运动目标中确定所述待跟踪人脸对应的人体,作为待跟踪人体;在接收到的第一图像中,对所述待跟踪人脸和所述待跟踪人体进行跟踪。
4.根据权利要求3所述的系统,其特征在于,所述目标跟踪单元,具体用于:
若在接收到的第一图像中,未跟踪到所述待跟踪人脸及所述待跟踪人体的次数满足第一预设条件,则判定目标跟踪失败,触发所述控制器组件控制对所述车辆进行管制。
5.根据权利要求2所述的系统,其特征在于,所述目标跟踪单元,还用于:
在接收到所述目标图像之后,向所述人脸检测单元发送切换指令,以使所述人脸检测单元停止接收所述第一图像;
在目标跟踪失败的情况下,向所述人脸检测单元发送触发指令,以使所述人脸检测单元接收所述第一图像,并对所述第一图像进行人脸检测。
6.根据权利要求2所述的系统,其特征在于,所述目标跟踪单元,还用于:
在目标跟踪失败的情况下,向平台上传报警信息,所述报警信息包括以下一项或多项:预设的报警类型值、所述车辆的车辆信息、报警时间以及一张或多张接收到的第一图像。
7.根据权利要求2所述的系统,其特征在于,所述驾驶员人脸图像库中存储的人脸图像是由移动摄像终端经由无线传输网络上传到所述处理器组件的。
8.根据权利要求2所述的系统,其特征在于,
所述人脸检测单元,还用于在第一预设时间内接收到的第一图像中,均未检测到人脸的情况下,向平台上传报警信息,所述报警信息包括以下一项或多项:预设的报警类型值、所述车辆的车辆信息、报警时间以及一张或多张接收到的第一图像。
9.根据权利要求2所述的系统,其特征在于,所述人脸比对单元,具体用于:
在第二预设时间内接收到的人脸图像中,确定待比对人脸图像;
判断已存储的驾驶员人脸图像库中是否存在与所述待比对人脸图像的相似度满足第二预设条件的驾驶员人脸图像;
若存在,则判定所述待比对人脸图像中包括驾驶员的人脸。
10.根据权利要求2所述的系统,其特征在于,
所述人脸比对单元,还用于在判定所述人脸图像中不包括驾驶员的人脸的次数满足第二预设条件的情况下,向平台上传报警信息,所述报警信息包括以下一项或多项:预设的报警类型值、所述车辆的车辆信息、报警时间以及一张或多张接收到的第一图像。
11.根据权利要求1所述的系统,其特征在于,所述处理器组件,还用于:
接收平台下发的操作指令,所述操作指令包括人脸抓拍指令和/或人脸比对指令;
对所述车辆执行与所述操作指令对应的操作。
12.根据权利要求1所述的系统,其特征在于,所述控制器组件,具体用于:
在所述车辆处于非行驶状态的情况下,控制所述电子元件所述对车辆进行以下一项或多项管制操作:断油、断气、断电、锁车、熄火;
在所述车辆处于行驶状态的情况下,进行语音报警,并控制所述电子元件对所述车辆进行减速操作,以使所述车辆处于非行驶状态。
13.根据权利要求1所述的系统,其特征在于,所述控制器组件,还用于:
若在第三预设时间内对所述车辆的管制成功,则将已采取的管制操作和管制生效时间上报平台;
若在第三预设时间内对所述车辆的管制失败,则将管制失败的信息上报平台。
14.根据权利要求1所述的系统,其特征在于,在所述图像采集组件被配置为多路摄像机的情况下,
所述图像采集组件,还用于按照第二预设时间间隔,采集针对所述车辆内的第二图像,将采集到的第二图像发送至所述处理器组件;
所述处理器组件,用于接收来自所述图像采集组件的第二图像,并对所述第二图像进行人脸比对。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910645525.3A CN112242061A (zh) | 2019-07-17 | 2019-07-17 | 一种基于人脸分析的车辆管理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910645525.3A CN112242061A (zh) | 2019-07-17 | 2019-07-17 | 一种基于人脸分析的车辆管理系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112242061A true CN112242061A (zh) | 2021-01-19 |
Family
ID=74166870
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910645525.3A Pending CN112242061A (zh) | 2019-07-17 | 2019-07-17 | 一种基于人脸分析的车辆管理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112242061A (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07320189A (ja) * | 1994-05-26 | 1995-12-08 | Omron Corp | 車両判別装置、車両通行処理装置および駐車場装置 |
KR101311728B1 (ko) * | 2011-11-25 | 2013-09-26 | 한국과학기술연구원 | 침입자의 얼굴감지 시스템 및 그 방법 |
CN104834910A (zh) * | 2015-05-12 | 2015-08-12 | 郑州畅想高科股份有限公司 | 机车乘务员防作弊饮酒检测装置和方法 |
CN105447459A (zh) * | 2015-11-18 | 2016-03-30 | 上海海事大学 | 一种无人机自动检测目标和跟踪方法 |
CN106023253A (zh) * | 2016-05-18 | 2016-10-12 | 杭州智诚惠通科技有限公司 | 一种城市目标轨迹追踪的方法 |
CN107423684A (zh) * | 2017-06-09 | 2017-12-01 | 湖北天业云商网络科技有限公司 | 一种应用于驾驶员疲劳检测的快速人脸定位方法及系统 |
CN107871114A (zh) * | 2016-09-23 | 2018-04-03 | 杭州海康威视数字技术股份有限公司 | 一种推送目标人员跟踪信息的方法、装置及系统 |
CN108304830A (zh) * | 2018-03-09 | 2018-07-20 | 西安艾润物联网技术服务有限责任公司 | 车辆内人员身份在线监测方法、装置和存储介质 |
CN108446600A (zh) * | 2018-02-27 | 2018-08-24 | 上海汽车集团股份有限公司 | 一种车辆驾驶员疲劳监测预警系统及方法 |
CN108846853A (zh) * | 2018-04-26 | 2018-11-20 | 武汉幻视智能科技有限公司 | 一种基于目标跟踪和姿态检测的教学行为分析方法及装置 |
CN109583174A (zh) * | 2019-01-26 | 2019-04-05 | 南京云计趟信息技术有限公司 | 一种驾驶员人脸识别离线身份验证系统及方法 |
-
2019
- 2019-07-17 CN CN201910645525.3A patent/CN112242061A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07320189A (ja) * | 1994-05-26 | 1995-12-08 | Omron Corp | 車両判別装置、車両通行処理装置および駐車場装置 |
KR101311728B1 (ko) * | 2011-11-25 | 2013-09-26 | 한국과학기술연구원 | 침입자의 얼굴감지 시스템 및 그 방법 |
CN104834910A (zh) * | 2015-05-12 | 2015-08-12 | 郑州畅想高科股份有限公司 | 机车乘务员防作弊饮酒检测装置和方法 |
CN105447459A (zh) * | 2015-11-18 | 2016-03-30 | 上海海事大学 | 一种无人机自动检测目标和跟踪方法 |
CN106023253A (zh) * | 2016-05-18 | 2016-10-12 | 杭州智诚惠通科技有限公司 | 一种城市目标轨迹追踪的方法 |
CN107871114A (zh) * | 2016-09-23 | 2018-04-03 | 杭州海康威视数字技术股份有限公司 | 一种推送目标人员跟踪信息的方法、装置及系统 |
CN107423684A (zh) * | 2017-06-09 | 2017-12-01 | 湖北天业云商网络科技有限公司 | 一种应用于驾驶员疲劳检测的快速人脸定位方法及系统 |
CN108446600A (zh) * | 2018-02-27 | 2018-08-24 | 上海汽车集团股份有限公司 | 一种车辆驾驶员疲劳监测预警系统及方法 |
CN108304830A (zh) * | 2018-03-09 | 2018-07-20 | 西安艾润物联网技术服务有限责任公司 | 车辆内人员身份在线监测方法、装置和存储介质 |
CN108846853A (zh) * | 2018-04-26 | 2018-11-20 | 武汉幻视智能科技有限公司 | 一种基于目标跟踪和姿态检测的教学行为分析方法及装置 |
CN109583174A (zh) * | 2019-01-26 | 2019-04-05 | 南京云计趟信息技术有限公司 | 一种驾驶员人脸识别离线身份验证系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108304830B (zh) | 车辆内人员身份在线监测方法、装置和存储介质 | |
US9235750B1 (en) | Using passive driver identification and other input for providing real-time alerts or actions | |
CN108540579B (zh) | 驾驶员身份在线监测方法、装置和存储介质 | |
CN105383416B (zh) | 用于事件数据记录的激活与记录的方法和设备 | |
US8885929B2 (en) | Abnormal behavior detection system and method using automatic classification of multiple features | |
US20190009785A1 (en) | System and method for detecting bullying of autonomous vehicles while driving | |
CN103213502A (zh) | 基于生物识别技术的校车安全管理方法 | |
CN105049785A (zh) | 一种车辆行驶安全监控终端、系统、方法 | |
CN103425731A (zh) | 数据源识别系统和方法、数据搜集系统和方法以及数据存储系统 | |
CN109799801B (zh) | 无人驾驶运输系统 | |
US10713861B2 (en) | Vehicle tracker for monitoring operation of a vehicle and method thereof | |
US9376017B2 (en) | Method and apparatus for combatting distracted driving | |
CN111277575B (zh) | 驾驶员身份的识别方法、装置、计算机设备和存储介质 | |
CN107464416B (zh) | 巴士的半自动驾驶方法及系统 | |
WO2022143427A1 (zh) | 驾驶员检测 | |
CN108062805B (zh) | 一种车载数据处理方法和服务器 | |
CN206031294U (zh) | 基于蓝牙手机身份二次识别的汽车防盗车门控制装置 | |
CN206031295U (zh) | 基于蓝牙手机身份识别的汽车防盗系统 | |
CN112242061A (zh) | 一种基于人脸分析的车辆管理系统 | |
CN111540208A (zh) | 一种基于区块链技术的防无证驾驶及疲劳驾驶的方法 | |
SE542225C2 (en) | A method for facilitating identification of a reckless driver of a road vehicle, a system, a computer program, a computer-readable medium and a vehicle | |
US10984613B2 (en) | Method for estimating the travel time of a vehicle based on the determination of the state of the vehicle | |
CN108297831B (zh) | 基于生物识别的汽车防盗系统及其实现方法和实现系统 | |
CN112224170A (zh) | 车辆控制系统及方法 | |
CN206031296U (zh) | 基于蓝牙手机身份二次识别的汽车防盗安全控制装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210119 |
|
RJ01 | Rejection of invention patent application after publication |