CN111422163B - 基于人脸识别的车辆点火方法、系统及车辆 - Google Patents

基于人脸识别的车辆点火方法、系统及车辆 Download PDF

Info

Publication number
CN111422163B
CN111422163B CN202010200697.2A CN202010200697A CN111422163B CN 111422163 B CN111422163 B CN 111422163B CN 202010200697 A CN202010200697 A CN 202010200697A CN 111422163 B CN111422163 B CN 111422163B
Authority
CN
China
Prior art keywords
vehicle
safety
ignition
face recognition
authentication code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010200697.2A
Other languages
English (en)
Other versions
CN111422163A (zh
Inventor
程紫尧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xiaopeng Motors Technology Co Ltd
Original Assignee
Guangzhou Xiaopeng Motors Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xiaopeng Motors Technology Co Ltd filed Critical Guangzhou Xiaopeng Motors Technology Co Ltd
Publication of CN111422163A publication Critical patent/CN111422163A/zh
Application granted granted Critical
Publication of CN111422163B publication Critical patent/CN111422163B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20Means to switch the anti-theft system on or off
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20Means to switch the anti-theft system on or off
    • B60R25/25Means to switch the anti-theft system on or off using biometry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns

Abstract

本发明公开一种基于人脸识别的车辆点火方法,所述车辆通过与预设的终端设备建立蓝牙连接,触发车辆解锁后启动点火,所述点火方法包括:车辆控制单元接收车载大屏发送的人脸识别成功的通知消息;车辆控制单元向车载安全单元获取用于确认当前车载大屏安全状态的消息;当所述车载大屏为安全状态时,车辆控制单元发送点火指令以实现车辆点火操作。本发明还公开一种基于人脸识别的车辆点火系统及车辆,本发明所述方法的点火过程通过车载大屏采集人脸图像,人脸识别对点火操作做进一步验证,以确保在车辆安全情况下进行点火操作,从而使得车辆点火操作更安全,且有更高的用户体验度。

Description

基于人脸识别的车辆点火方法、系统及车辆
技术领域
本发明涉及车辆技术领域,具体涉及基于人脸识别的车辆点火方法、系统及车辆。
背景技术
随着物联网的发展与普及,一些汽车厂商为了提高用户的使用体验,选择通过人体的生物特征触发车辆的点火操作。如通过语音识别作为触发条件,但该种识别方式受环境和识别率的影响非常大,一旦车外或车内存在噪音或干扰,或者用户存在方言或输入不清等情况,对识别成功率影响非常大,且无法做到更好的用户体验。
同时,识别模块往往会集成在车载大屏(IVI),常规下,车载大屏为非安全件,其系统层面,如android操作系统会存在不少攻击面,如端口,流量,服务等,这些安全隐患并不能通过如上方案所示的认证方式进行规避。
发明内容
本发明为了解决1)识别率问题;2)识别模块所处系统安全问题,公开一种基于人脸识别的车辆点火方法、系统及车辆,利用人脸识别提供用户无感的识别,且人脸特征为唯一特征,其识别成功率更高,同时,通过安全检测模块来识别系统安全状况,在人脸点火时作为触发判断条件,满足安全性才可触发点火操作。
本发明实施例第一方面公开一种基于人脸识别的车辆点火方法,所述车辆通过与预设的终端设备建立蓝牙连接,触发车辆解锁后启动点火,所述点火方法包括:
车辆控制单元接收车载大屏发送的人脸识别成功的通知消息;
车辆控制单元向车载安全单元获取用于确认当前车载大屏安全状态的消息;
当所述车载大屏为安全状态时,车辆控制单元发送点火指令以实现车辆点火操作。
进一步地,所述车辆通过与预设的终端设备建立蓝牙连接,触发车辆解锁的步骤包括:
接收预设终端设备发送的认证请求,获取设备指纹和第一认证码;
查找预先存储的与所述设备指纹对应的业务密钥,并根据所述设备指纹和所述业务密钥计算得到第二认证码;
基于所述第一认证码、所述第二认证码、所述设备指纹以及所述业务密钥确定第三认证码和第四认证码,以完成所述终端设备对所述车辆的解锁认证。
更进一步地,所述基于第一认证码、所述第二认证码、所述设备指纹以及所述业务密钥确定第三认证码和第四认证码,以完成所述终端设备对所述车辆的解锁认证的步骤包括:
当检测出所述第一认证码与所述第二认证码相同时,将随机生成的第一随机数和所述业务密钥进行计算,得到异或值;
向所述终端设备发送包含所述异或值的第一响应,以使所述终端设备根据所述第一响应计算得到第三认证码,并反馈包含所述第三验证码的第二响应;
当接收到所述第二响应时,根据所述设备指纹、所述业务密钥以及所述第一随机数计算得到第四认证码;
当检测出所述第三验证码和所述第四验证码相同时,确认完成所述终端设备对所述车辆的解锁认证。
可选的,所述车载大屏安全状态的检测由其内置的安全检测模块执行,至少执行以下一种或多种检测操作:
确定车载大屏系统是否存在非法系统服务的调用;
识别车载大屏流量是否存在恶意流量;
识别车载大屏是否存在外接的恶意服务器;
检测车载大屏操作系统的安全性。
优选的,所述安全检测模块将所述车载大屏安全状态的检测结果生成日志文件。
优选的,所述车载大屏与车载安全单元之间通过局域网建立独立的通信链路。
优选的,所述安全检测模块与所述车载安全单元通过所述独立的通信链路按照预设的周期进行通信,以将所述用于描述车载大屏安全状态的日志文件发送至车载安全单元。
进一步地,所述车辆控制单元发送点火指令之前还执行以下检测步骤:
检测车辆是否上电;
检测车辆制动踏板踩下且为合法状态。
本发明实施例另一方面公开一种基于人脸识别的车辆点火系统,包括:
车辆控制单元,用于检测车辆当前是否满足点火条件以及触发点火;
车载大屏,用于执行人脸识别操作和车载大屏安全检测操作;
车载安全单元,用于判断车载大屏安全状态是否满足点火条件。
本发明实施例又一方面公开一种车辆,所述车辆包括上述基于人脸识别的车辆点火系统。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,所述车辆通过与预设的终端设备建立蓝牙连接,从而进行安全认证后触发车辆解锁后启动点火,点火过程通过车载大屏采集人脸图像,人脸识别对点火操作做进一步验证,以确保在车辆安全情况下进行点火操作,从而使得车辆点火操作更安全,且有更高的用户体验度。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种基于人脸识别的车辆点火方法的流程示意图;
图2是本发明实施例公开的另一种基于人脸识别的车辆点火方法的时序流程图;
图3是本发明实施例公开的基于人脸识别的车辆点火系统的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开一种基于人脸识别的车辆点火方法及系统,能够在提高用户体验度的同时确保车辆点火的安全性。以下分别进行详细说明。
实施例一
请参阅图1,图1是本发明实施例公开的一种基于人脸识别的车辆点火方法的流程示意图。如图1所示,该基于人脸识别的车辆点火方法包括以下步骤:
S101、车辆控制单元接收车载大屏发送的人脸识别成功的通知消息;
所述车辆控制单元即车载电脑或整车控制器,包括对车身、电池、制动系统、驱动系统等的控制。车辆解锁后,整车上电,车载大屏启动并触发人脸识别模块,当检测到有人脸时,则人脸识别模块采集人脸数据并进行匹配验证,具体地所述人脸识别包括以下步骤:
1、采集人脸图像数据;
人脸识别模块触发车载摄像头采集当前的人脸图像,摄像头将采集的人脸图像数据发送给人脸识别模块。
2、提取人脸图像的特征信息;
人脸识别模块提取人脸图像的特征信息,所述特征信息可以是sift特征、asift特征、轮廓特征等,本发明实施例对此不做限制。
3、将所述特征信息与预存储的特征信息进行匹配;
将提取的特征信息与预存储的特征信息做匹配,所述预存储信息为用户注册身份信息时采集的人脸图像的特征信息。
4、确认匹配成功的人脸通过人脸认证。
匹配成功的人脸确认为之前注册过的用户人脸图像,该人脸图像通过认证。
其中,所述人脸识别模块内置于车载大屏,当人脸识别认证通过后,车载大屏向车辆控制单元发送人脸识别成功的消息。
S102、车辆控制单元向车载安全单元获取用于确认当前车载大屏安全状态的消息;
所述车载安全单元优选地为PSU(Programmable Security Unit,即可编程安全单元),车辆控制单元接收到人脸识别认证通过的消息后,向车载安全单元发送消息以获取车载大屏当前的安全状态。具体地,所述车载大屏内置有安全检测模块车载安全单元,所述车载大屏安全状态的检测由其内置的安全检测模块执行,所述车载大屏与车载安全单元之间通过局域网建立独立的通信链路,如通过以太网直接连接,进一步地,所述安全检测模块与所述车载安全单元通过所述独立的通信链路按照预设的周期进行通信,以将所述用于描述车载大屏安全状态的日志文件发送至车载安全单元。
具体地,所述车载安全单元为服务端,所述安全检测模块为客户端,安全检测模块为大屏系统中隐藏的进程,与其他服务或进程之间没有调用接口或服务,且也不向其他应用开放调用权限,因此具有很高的安全性。具体地,所述安全检测模块至少执行以下一种或多种检测操作:
1、确定车载大屏系统是否存在非法系统服务的调用;
具体地,所述安全检测模块定期扫描现有大屏系统服务、端口,如NMAP扫描现有安卓系统IP及开放的服务端口,识别现有大屏系统是否存在非法的系统服务调用,如ssh,telnet等。
2、识别车载大屏流量是否存在恶意流量;
识别车载大屏流量是否在上一个周期存在非线性激增的恶意流量,其中所述对恶意流量的识别方法不作为对本发明的限制。
3、识别车载大屏是否存在外接的恶意服务器;
根据内置的黑白名单或信誉值,如IP信誉及URL信誉,识别是否存在外连的恶意服务器。
4、检测车载大屏操作系统的安全性。
主要包括root检测、调试模式检测或开发者模式检测、Xposed、Frida等hook工具检测、安装应用检测、系统代理检测、WiFi安全检测或蓝牙安全检测、系统版本检测、木马查杀等。其中,所述安装应用检测可通过预设的白名单或应用权限检测,系统版本检测具体检测当前是否为最新版本,以规避旧版可能存在的漏洞。
优选的,所述安全检测模块根据上述的检测结果将所述车载大屏安全状态生成日志文件,并定期发送给车载安全单元。
S103、当所述车载大屏为安全状态时,车辆控制单元发送点火指令以实现车辆点火操作。
车辆安全单元收到车辆控制单元发送的用于确认当前车载大屏安全状态的消息后,根据接收到的安全检测模块发送的车载大屏检测结果判定大屏当前的安全状态,判定结果包含三种情况,0x0:No Command(无指令);0x1:Fail(失败);0x2:Pass(通过)。如判定结果为0x2:Pass(通过),即车载大屏为安全状态,则车辆控制单元发送安全认证通过指令给车辆控制单元。
进一步地,所述车辆控制单元发送点火指令之前还执行以下检测步骤:
1、检测车辆是否上电
正常情况下,车辆开门后即自动上电。
2、检测车辆制动踏板踩下且为合法状态
制动踏板踩下为切换档位信号,车辆点火启动时需在D档位,因此在点火前需确保车辆制动踏板踩下,且为了保证安全,制动踏板踩下的操作应确保为合法状态。
3、蓝牙钥匙已连接
所述蓝牙钥匙已连接,具体指车辆点火前,先通过蓝牙模块实现车辆解锁,蓝牙钥匙为虚拟钥匙,由预设终端设备通过蓝牙连接车辆的蓝牙模块,对车辆进行解锁认证。
4、防盗认证通过
为保证车辆的安全,在蓝牙钥匙对车辆解锁的过程中,需进一步对蓝牙和车身控制模块作防盗认证,以确保有权限的用户才能解锁车辆。
当车载大屏安全状态合格,及其他点火判定条件都满足时,车载控制单元发送点火指令触发点火操作,以实现车辆点火。
其中,上述车辆进行基于人脸识别的点火操作前先做车辆解锁认证,具体地,所述车辆通过与预设的终端设备建立蓝牙连接,触发车辆解锁。
具体地,所述车辆通过与预设的终端设备建立蓝牙连接,触发车辆解锁的步骤包括:
S11、接收预设终端设备发送的认证请求,获取设备指纹和第一认证码;
本发明实施例中,终端设备可以为智能手机、智能手环等设备,对此,本发明实施例不做限定。车辆中的解锁认证装置中可以设置车载系统等软件系统,解锁认证装置可以实现对车辆任意部件的控制,从而便于用户对车辆的操作。解锁认证装置中可以包含车外蓝牙模组、车身控制模组、语音识别模组、安全模组以及整车控制模组等,解锁认证装置可以控制车外蓝牙模组与终端设备实现蓝牙连接,以实现终端设备通过蓝牙向终端设备发送认证请求的操作,还可以存储与车辆绑定的终端设备的设备特征信息,以使终端设备可以与车辆通过蓝牙成功连接。
本发明实施例中,当终端设备处于与车辆进行蓝牙连接的范围内时,可以通过蓝牙向车辆发送认证请求,并通过该认证请求使得车辆的解锁认证装置执行对终端设备的认证操作,且只有在终端设备认证通过之后,终端设备的用户才可以对当前车辆实现控制,并进一步通过人脸识别完成车辆点火操作。此外,认证请求中可以包含终端设备的设备指纹和终端设备生成的第一认证码等信息。
本发明实施例中,终端设备根据自身的设备指纹和业务密钥计算生成对应的第一认证码H1,即H1=HMAC(deviceid,key)。
可选的,终端设备根据自身的设备指纹和业务密钥计算生成对应的第一认证码的方式可以为:当终端设备检测到输入的解/闭锁指令时,终端设备可以获取终端设备的设备特征信息,该设备特征信息中至少可以包含终端设备的设备指纹和业务密钥;以及终端设备可以根据设备指纹和业务密钥计算得到第一认证码。此外,终端设备还可以向车辆发送包含该设备指纹和第一认证码的认证请求。其中,任意一个终端设备可以对应唯一的设备特征信息,该设备特征信息中可以包含终端设备的设备指纹和业务密钥,设备指纹可以用于唯一的标识出终端设备的设备特征,从而根据设备指纹可以唯一的确定终端设备。业务密钥可以为业务公私钥对或业务对称密钥,业务密钥可以在终端设备与车辆的绑定过程中对设备特征信息进行加签和加密操作,以使存储的基于业务密钥的加签和加密后的设备特征信息能够被存储有该业务密钥的终端设备验证。
S12、查找预先存储的与所述设备指纹对应的业务密钥,并根据所述设备指纹和所述业务密钥计算得到第二认证码;
本发明实施例中,车辆可以预先在终端设备与车辆进行绑定的过程存储终端设备的设备特征信息,该设备特征信息可以包含终端设备的设备指纹、业务密钥等信息,因此,车辆解锁认证装置可以查找与认证请求中包含的设备指纹对应的业务密钥,如果车辆解锁认证装置未查找到与该业务指纹对应的业务密钥,可以认为该终端设备与车辆之间未绑定,因此,车辆解锁认证装置可以确认该终端设备认证未通过。
所述车辆解锁认证装置通过车外蓝牙模组根据设备指纹和业务密钥计算得到第二认证码H2,具体地,通过设备指纹和对应的业务密钥计算得到所述第二认证码,即H2=HMAC(deviceid,key)。
S13、基于所述第一认证码、所述第二认证码、所述设备指纹以及所述业务密钥确定第三认证码和第四认证码,以完成所述终端设备对所述车辆的解锁认证。
所述基于第一认证码、第二认证码、设备指纹以及业务密钥确定第三认证码和第四认证码,以完成终端设备对车辆的解锁认证的方式可以包含以下步骤:
当检测出第一认证码与第二认证码相同时,车辆解锁认证装置将随机生成的第一随机数和业务密钥进行计算,得到异或值;
车辆解锁认证装置向终端设备发送包含异或值的第一响应,以使终端设备根据第一响应计算得到第三认证码,并反馈包含第三验证码的第二响应;
当接收到第二响应时,车辆解锁认证装置根据设备指纹、业务密钥以及第一随机数计算得到第四认证码;
当检测出第三验证码和第四验证码相同时,车辆解锁认证装置确认完成终端设备对车辆的解锁认证。
其中,实施这种方式,可以向终端设备发送计算得到的异或值,以使终端设备反馈根据异或值得到的第四认证码,进而根据第三认证码和第四认证码实现终端设备对车辆的解锁认证,以使终端设备对车辆的解锁认证是通过终端设备生成的第三认证码和车辆生成的第四认证码共同实现的,保证了终端设备对车辆解锁的可靠性。
本发明实施例中,第一认证码和第二认证码都是通过设备指纹和业务密钥计算得到,且终端设备和车辆解锁认证装置计算使用的设备指纹都相同,则如果终端设备的业务密钥和车辆解锁认证装置的业务密钥相同,则第一认证码和第二认证码是相同的,如果第一认证码和第二认证码不相同,车辆解锁认证装置可以认为该终端设备未与车辆进行绑定,进而确定该终端设备未通过认证。此外,车辆解锁认证装置可以将第一随机数与业务密钥进行异或运算,从而得到异或值,终端设备可以根据第一响应中包含的异或值以及设备指纹和业务密钥计算得到第三认证码H3,H3=HMAC(deviceid,key||Rand1)。
此外,车辆解锁认证装置通过车外蓝牙模组根据设备指纹、业务密钥以及第一随机数计算得到第四认证码H4,即H4=HMAC(deviceid,key||Rand1)。
可选的,终端设备计算得到第三认证码,并反馈包含第三验证码的第二响应的方式可以为:终端设备可以从接收到的第一响应中读取异或值;并且可以根据异或值和设备特征信息计算得到第三认证码;以及将该第三验证码添加至第二响应中,并向车辆解锁认证装置反馈包含第三认证码的第二响应,以使车辆解锁认证装置根据第二响应对终端设备进行认证。
当终端设备认证成功后,则可通过蓝牙连接对车辆解锁,解锁后即可通过人脸识别进一步对车辆进行点火操作,从而使得整个过程对用户无感,体验度更高。
本发明实施例一所述的基于人脸识别的车辆点火方法,可以使用户通过人脸识别完成车辆的点火操作,相比传统的车辆点火操作,在用户无感知的情况下即可完成,提高了用户体验度。且相比现有的语音识别点火,对噪音的鲁棒性更高,且避免了方言或输入不清楚情况下语音识别率低的问题,具有更高的识别率。
更进一步的,本发明所述点火方法是在车辆经过安全验证的蓝牙钥匙解锁情况下执行,即上文所述的基于蓝牙钥匙的车辆解锁方法,必须在解锁认证成功后才能再进一步通过人脸认证完成车辆点火,任何一个环节认证不成功都无法实现点火操作,从而使得车辆的自动点火操作更智能、更安全。
实施例二
请参阅图2所示,为进一步对本发明所述方法做说明,本发明实施例公开另一种基于人脸识别的车辆点火方法的时序流程图,将各车辆模块的交互流程做简要说明。
具体地,涉及的硬件主要包括车辆蓝牙BLE、车辆控制单元、车载大屏、车载安全单元PSU等,其中所述车辆控制单元包括多个模块,如用于车身控制、防盗认证的iBCM或MCU,用于车辆制动系统、驱动系统等控制的VCU。
车辆通过蓝牙认证解锁操作后,用户要触发启动点火操作,车辆各硬件模块按照以下交互流程执行:
1、车载大屏触发人脸识别模块进行人脸数据采集及匹配验证。
整车上电后,所述车载大屏触发人脸识别模块对应的传感器采集人脸数据,如摄像头采集人脸信息,优先的,所述摄像头位于主驾方便采集用户人脸的区域,如设置于车辆A柱。将采集的人脸图像与预存储的人脸图像进行匹配,所述预存储的人脸图像在用户首次进行身份注册时采集获取。通过进行人脸识别确定人脸图像是否匹配,从而确定人脸识别是否成功,其中所述人脸识别算法不构成对本发明内容的限制。
2、车载大屏人脸识别成功,发送成功确认消息ACK告知车辆控制单元,如iBCM或MCU等用于控制车身、防盗验证的模块。
3、当iBCM或MCU等用于控制车身、防盗验证的模块收到所述确认消息ACK后,向PSU(Programmable Security Unit,即车载安全芯片,全称可编程安全单元)询问现在大屏的安全状态,即发送用于获取大屏当前安全状态的消息。
具体地,PSU和车载大屏直接通过以太网相连,PSU与车载大屏内的安全检测模块,即安全探针保持周期性的通信,即PSU为server,安全探针为client,该安全探针为安卓系统隐藏进程,即与其他服务或进程之间没有调用接口或服务,也不会暴露权限调用关系给其他应用。所述安全探针的主要检测工作至少包含如下:
1、安全探针主要通过定期扫描现有大屏系统服务、端口,如NMAP扫描现有安卓系统IP及开放的服务端口,可以识别现有大屏系统是否存在非法的系统服务调用,如ssh,telnet等;
2、根据大屏流量可以识别是否在上一段周期存在非线性激增的恶意流量;
3、根据内置的黑白名单或信誉值,如IP信誉及URL信誉,可识别是否存在外连的恶意服务器;
4、root检测、调试模式检测/开发者模式检测、Xposed、Frida等hook工具检测、安装应用检测(白名单、权限检查)、系统代理检测、WiFi安全检测/蓝牙安全检测、系统版本检测(是否最新,旧版可能存在漏洞)、木马查杀等操作系统方面的检测;
5、根据如上检测工作,安全探针可将最终结果形成事件,即log,并定期发送给PSU做最终判断。
6、PSU收到车内控制单元的询问请求后,根据大屏检测结果判定(log)大屏现有安全状态是否可触发人脸点火功能,判定结果包含是三种可能,如0x0:No Command(无指令);0x1:Fail(失败);0x2:Pass(通过)。如判定结果为0x2:Pass(通过),则PSU发送TBOX_CDU_AndroidAuthSt(0x2:Pass)给车辆控制单元。
7、大屏判定安全状态合格,及其他点火判定条件都满足时,iBCM或MCU等用于控制车身、防盗验证的模块将发送人脸点火请求给如VCU用于控制车辆驱动、制动等的控制模块,从而触发车辆点火。
本发明实施例采用在车载大屏集成人脸识别模块及安全检测模块的方法,当车载大屏存在系统层面的安全隐患时,通过人脸识别做进一步安全认证,防止车辆被盗。
实施例三
如图3所示的基于人脸识别的车辆点火系统的结构框图,本实施例公开一种基于人脸识别的车辆点火系统,包括车辆控制单元11、车载大屏12、车载安全单元13,其中,
车辆控制单元11用于检测车辆当前是否满足点火条件以及触发点火;其中,所述点火条件至少包括:
1、检测车辆是否上电
正常情况下,车辆开门后即自动上电。
2、检测车辆制动踏板踩下且为合法状态
制动踏板踩下为切换档位信号,车辆点火启动时需在D档位,因此在点火前需确保车辆制动踏板踩下,且为了保证安全,制动踏板踩下的操作应确保为合法状态。
3、蓝牙钥匙已连接
所述蓝牙钥匙已连接,具体指车辆点火前,先通过蓝牙模块实现车辆解锁,蓝牙钥匙为虚拟钥匙,由预设终端设备通过蓝牙连接车辆的蓝牙模块,对车辆进行解锁认证。
5、防盗认证通过
为保证车辆的安全,在蓝牙钥匙对车辆解锁的过程中,需进一步对蓝牙和车身控制模块作防盗认证,以确保有权限的用户才能解锁车辆。
当车载大屏安全状态合格,及其他点火判定条件都满足时,车载控制单元触发点火操作,以实现车辆点火。
车载大屏12用于执行人脸识别操作和车载大屏安全检测操作。
所述车载大屏12集成人脸识别模块和安全检查模块,所述人脸识别模块用于对触发车辆点火的人脸图像进行认证,认证通过的则触发安全检测模块发送当前车载大屏的安全情况,主要包括大屏是否存在非法系统服务和端口、是否存在恶意流量、是否存在恶意服务器、操作系统是否存在安全漏洞等。
车载安全单元13用于判断车载大屏安全状态是否满足点火条件。
所述车载安全单元13与车载大屏中的安全检测模块通过以太网连接,保持周期性的通信,即PSU为server,安全探针为client,该安全探针为安卓系统隐藏进程,即与其他服务或进程之间没有调用接口或服务,也不会暴露权限调用关系给其他应用。所述车载大屏中的安全检测模块将将大屏的安全检测结果形成事件,即log,并定期发送给车载安全单元13做最终判断。
判定结果包含三种可能,0x0:No Command(无指令);0x1:Fail(失败);0x2:Pass(通过)。如判定结果为0x2:Pass(通过),则车载安全单元13发送TBOX_CDU_AndroidAuthSt(0x2:Pass)给车辆控制单元11。
本发明实施例又一方面公开一种车辆,所述车辆包括上述基于人脸识别的车辆点火系统。所述车辆集成所述车辆点火系统的各个模块,当用户解锁车辆以后,上车进行人脸认证,触发车辆自动点火,使从车辆解锁到车辆点火的整个过程无需手动操作,且保证点火过程的安全性,大大提高用户体验。
实施例四
本发明实施例还公开一种计算机可读存储介质,其中,计算机可读存储介质存储了程序代码,其中,程序代码包括用于执行以上各方法实施例中的方法或系统的部分或全部步骤的指令。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本发明实施例还公开一种应用发布平台,其中,应用发布平台用于发布计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
应理解,说明书通篇中提到的“本发明实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在本发明实施例中”未必一定指相同的实施例。此外,这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本发明所必须的。
在本发明的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
另外,本文中术语“系统”和“网络”在本文中常可互换使用。应理解,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
在本发明所提供的实施例中,应理解,“与A对应的B”表示B与A相关联,根据A可以确定B。但还应理解,根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其他信息确定B。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。
以上对本发明实施例公开的基于人脸识别的车辆点火方法、系统及车辆进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于人脸识别的车辆点火方法,其特征在于,所述车辆通过与预设的终端设备建立蓝牙连接,触发车辆解锁后启动点火,所述点火方法包括:
车辆控制单元接收车载大屏发送的人脸识别成功的通知消息,其中所述通知消息由车载大屏在对其所触发的人脸识别模块进行人脸数据匹配成功后发送,所述人脸识别模块用于采集人脸数据并进行人脸数据的匹配验证;
接收到人脸识别成功的通知消息后,车辆控制单元向车载安全单元获取用于确认当前车载大屏安全状态的消息,其中,所述车载大屏安全状态的检测由其内置的安全检测模块执行,所述车载安全单元为服务端,所述安全检测模块为客户端,安全检测模块为大屏系统中隐藏的进程;
当所述车载大屏为安全状态时,车辆控制单元发送点火指令以实现车辆点火操作。
2.根据权利要求1所述的基于人脸识别的车辆点火方法,其特征在于,所述车辆通过与预设的终端设备建立蓝牙连接,触发车辆解锁的步骤包括:
接收预设终端设备发送的认证请求,获取设备指纹和第一认证码;
查找预先存储的与所述设备指纹对应的业务密钥,并根据所述设备指纹和所述业务密钥计算得到第二认证码;
基于所述第一认证码、所述第二认证码、所述设备指纹以及所述业务密钥确定第三认证码和第四认证码,以完成所述终端设备对所述车辆的解锁认证。
3.根据权利要求2所述的基于人脸识别的车辆点火方法,其特征在于,所述基于第一认证码、所述第二认证码、所述设备指纹以及所述业务密钥确定第三认证码和第四认证码,以完成所述终端设备对所述车辆的解锁认证的步骤包括:
当检测出所述第一认证码与所述第二认证码相同时,将随机生成的第一随机数和所述业务密钥进行计算,得到异或值;
向所述终端设备发送包含所述异或值的第一响应,以使所述终端设备根据所述第一响应计算得到第三认证码,并反馈包含所述第三认证码的第二响应;
当接收到所述第二响应时,根据所述设备指纹、所述业务密钥以及所述第一随机数计算得到第四认证码;
当检测出所述第三认证码和所述第四认证码相同时,确认完成所述终端设备对所述车辆的解锁认证。
4.根据权利要求1所述的基于人脸识别的车辆点火方法,其特征在于,所述车载大屏安全状态的检测由其内置的安全检测模块执行,至少执行以下一种或多种检测操作:
确定车载大屏系统是否存在非法系统服务的调用;
识别车载大屏流量是否存在恶意流量;
识别车载大屏是否存在外接的恶意服务器;
检测车载大屏操作系统的安全性。
5.根据权利要求4所述的基于人脸识别的车辆点火方法,其特征在于,所述安全检测模块将所述车载大屏安全状态的检测结果生成日志文件。
6.根据权利要求5所述的基于人脸识别的车辆点火方法,其特征在于,所述车载大屏与车载安全单元之间通过局域网建立独立的通信链路。
7.根据权利要求6所述的基于人脸识别的车辆点火方法,其特征在于,所述安全检测模块与所述车载安全单元通过所述独立的通信链路按照预设的周期进行通信,以将所述用于描述车载大屏安全状态的日志文件发送至车载安全单元。
8.根据权利要求1所述的基于人脸识别的车辆点火方法,其特征在于,所述车辆控制单元发送点火指令之前还执行以下检测步骤:
检测车辆是否上电;
检测车辆制动踏板踩下且为合法状态。
9.一种基于人脸识别的车辆点火系统,其特征在于,执行如权利要求1-8任意一项所述的基于人脸识别的车辆点火方法,包括:
车辆控制单元,用于检测车辆当前是否满足点火条件以及触发点火;
车载大屏,用于执行人脸识别操作和车载大屏安全检测操作,并通过车载安全单元向车载控制单元发送车载大屏安全状态,其中所述车载大屏安全状态的检测由其内置的安全检测模块执行,所述车载安全单元为服务端,所述安全检测模块为客户端,安全检测模块为大屏系统中隐藏的进程;
车载安全单元,用于判断车载大屏安全状态是否满足点火条件。
10.一种车辆,其特征在于,所述车辆包括权利要求9所述的基于人脸识别的车辆点火系统。
CN202010200697.2A 2020-01-06 2020-03-20 基于人脸识别的车辆点火方法、系统及车辆 Active CN111422163B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2020100091379 2020-01-06
CN202010009137 2020-01-06

Publications (2)

Publication Number Publication Date
CN111422163A CN111422163A (zh) 2020-07-17
CN111422163B true CN111422163B (zh) 2021-10-12

Family

ID=71553620

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010200697.2A Active CN111422163B (zh) 2020-01-06 2020-03-20 基于人脸识别的车辆点火方法、系统及车辆

Country Status (1)

Country Link
CN (1) CN111422163B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7306348B2 (ja) * 2020-08-11 2023-07-11 トヨタ自動車株式会社 車両、認証システム、プログラム及び認証方法
CN112960620A (zh) * 2021-04-02 2021-06-15 北京天地玛珂电液控制系统有限公司 叉车限速安全控制系统
CN113223326B (zh) * 2021-04-28 2022-11-11 上海电科智能系统股份有限公司 基于路侧的多车多控多源低速辅助停车系统
CN114559902A (zh) * 2022-03-03 2022-05-31 徐工汉云技术股份有限公司 基于人脸识别和蓝牙技术的叉车控制系统
CN114677789A (zh) * 2022-03-24 2022-06-28 北京金和网络股份有限公司 特种车辆管理系统
CN115416610A (zh) * 2022-04-19 2022-12-02 一汽奔腾轿车有限公司 一种基于人脸识别的个性化车辆启动控制方法
CN116846683B (zh) * 2023-08-30 2023-11-28 中汽智联技术有限公司 车载终端与云端的通信认证方法、设备和介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201677853U (zh) * 2010-05-07 2010-12-22 深圳市飞瑞斯科技有限公司 基于人脸识别控制汽车点火的防盗系统
CN107766713A (zh) * 2017-10-18 2018-03-06 广东欧珀移动通信有限公司 人脸模板数据录入控制方法及相关产品
CN109131216A (zh) * 2017-06-19 2019-01-04 广州英卓电子科技有限公司 一种汽车远程控制车门锁和启动的方法及其装置
CN208646796U (zh) * 2018-08-16 2019-03-26 广州桓浩信息科技有限公司 基于人脸识别的共享汽车验证系统
CN110011811A (zh) * 2019-03-29 2019-07-12 广州小鹏汽车科技有限公司 基于终端设备的车辆解锁认证方法及装置
CN110171389A (zh) * 2019-05-15 2019-08-27 广州小鹏汽车科技有限公司 一种人脸登录的设置引导方法、车载系统及车辆

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9043048B2 (en) * 2011-10-13 2015-05-26 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America RF biometric ignition control system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201677853U (zh) * 2010-05-07 2010-12-22 深圳市飞瑞斯科技有限公司 基于人脸识别控制汽车点火的防盗系统
CN109131216A (zh) * 2017-06-19 2019-01-04 广州英卓电子科技有限公司 一种汽车远程控制车门锁和启动的方法及其装置
CN107766713A (zh) * 2017-10-18 2018-03-06 广东欧珀移动通信有限公司 人脸模板数据录入控制方法及相关产品
CN208646796U (zh) * 2018-08-16 2019-03-26 广州桓浩信息科技有限公司 基于人脸识别的共享汽车验证系统
CN110011811A (zh) * 2019-03-29 2019-07-12 广州小鹏汽车科技有限公司 基于终端设备的车辆解锁认证方法及装置
CN110171389A (zh) * 2019-05-15 2019-08-27 广州小鹏汽车科技有限公司 一种人脸登录的设置引导方法、车载系统及车辆

Also Published As

Publication number Publication date
CN111422163A (zh) 2020-07-17

Similar Documents

Publication Publication Date Title
CN111422163B (zh) 基于人脸识别的车辆点火方法、系统及车辆
CN110758322B (zh) 车辆启动方法、装置、设备及存储介质
CN110011811B (zh) 基于终端设备的车辆解锁认证方法及装置
CN112822630B (zh) 设备的数据处理方法和计算机可读存储介质
CN108235291A (zh) 一种用于车辆防盗的安全认证装置及方法
CN110570569B (zh) 虚拟钥匙配置信息的激活方法、移动终端及服务器
CN109920114B (zh) 一种基于地理位置的门锁控制方法及系统
CN106600083B (zh) 一种司机接单的管理方法和设备
CN109067881B (zh) 远程授权方法及其装置、设备和存储介质
CN113492797B (zh) 一种自动登录车机的方法及其系统、车辆
CN105429943B (zh) 一种信息处理方法及其终端
CN112153640A (zh) 车辆控制方法、系统、用户终端、车辆及可读存储介质
CN113129486A (zh) 车锁控制方法、终端设备、hid车锁设备及电子设备
CN110077361B (zh) 一种车辆控制方法及装置
CN112819997A (zh) 创建车辆钥匙的方法、装置和计算机可读存储介质
JP5678907B2 (ja) 中継システム、外部装置
CN110194123B (zh) 一种无钥匙状态下的车辆启动方法及系统、车辆
CN109583906B (zh) 基于车牌识别的安全支付方法及系统
WO2017181846A1 (zh) 车辆监控方法及装置、存储介质
US11433853B2 (en) Vehicle unlocking authentication method and apparatus based on terminal device
CN109067745B (zh) 对乘车人进行认证的方法及其装置、设备和存储介质
CN112910850A (zh) 一种控制车辆的安全验证方法及系统
CN106446719B (zh) 一种防止eSIM文件被篡改的方法及移动终端
CN113232624B (zh) 车辆控制方法、装置、电子控制器以及车辆
CN106599619A (zh) 一种验证方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant