CN112037380B - 车辆控制方法及装置、电子设备、存储介质和车辆 - Google Patents

车辆控制方法及装置、电子设备、存储介质和车辆 Download PDF

Info

Publication number
CN112037380B
CN112037380B CN202010917459.3A CN202010917459A CN112037380B CN 112037380 B CN112037380 B CN 112037380B CN 202010917459 A CN202010917459 A CN 202010917459A CN 112037380 B CN112037380 B CN 112037380B
Authority
CN
China
Prior art keywords
vehicle
information
face
person
face information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010917459.3A
Other languages
English (en)
Other versions
CN112037380A (zh
Inventor
黎建平
王俊越
孙牵宇
许亮
刘卫龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Lingang Jueying Intelligent Technology Co ltd
Original Assignee
Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sensetime Lingang Intelligent Technology Co Ltd filed Critical Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority to CN202010917459.3A priority Critical patent/CN112037380B/zh
Publication of CN112037380A publication Critical patent/CN112037380A/zh
Priority to PCT/CN2021/078679 priority patent/WO2022048119A1/zh
Application granted granted Critical
Publication of CN112037380B publication Critical patent/CN112037380B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00571Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by interacting with a central unit

Abstract

本公开涉及一种车辆控制方法及装置、电子设备、存储介质和车辆。所述方法包括:获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息;将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配;响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作。

Description

车辆控制方法及装置、电子设备、存储介质和车辆
技术领域
本公开涉及车辆技术领域,尤其涉及一种车辆控制方法及装置、电子设备、存储介质和车辆。
背景技术
随着汽车逐渐成为人们生活的主要交通工具之一,消费者对汽车的安全性等各方面的要求越来越高,智能汽车越来越受到消费者的关注。相关技术中,可以通过人脸识别的方式解锁车门。例如,在人员A通过人脸识别的方式解锁车门后,人员B可以驾驶车辆,导致存在较大的安全隐患。
发明内容
本公开提供了一种车辆控制技术方案。
根据本公开的一方面,提供了一种车辆控制方法,包括:
获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息;
将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配;
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作。
在一种可能的实现方式中,所述成功解锁车门的人员的人脸信息包括:
最近一次成功解锁车门的人员的人脸信息;
或者,
在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息。
在一种可能的实现方式中,所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,包括:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围;
根据所述当前乘员在所述操作权限范围内的操控行为对所述车辆进行控制操作;和/或,
对所述当前乘员在所述操作权限范围外的操控行为进行报警提示。
在一种可能的实现方式中,所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围,包括:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定所述当前乘员的年龄信息;
根据所述当前乘员的年龄信息,确定所述当前乘员的操作权限范围。
在一种可能的实现方式中,所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围,包括:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定当前时间所属的时间段;
获取所述当前乘员在所述当前时间所属的时间段的操作权限范围。
在一种可能的实现方式中,
所述获取当前乘员的人脸图像和第一目标人脸信息,包括:响应于检测到所述当前乘员启动车辆的操控行为,获取所述当前乘员的人脸图像和第一目标人脸信息;
所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,包括:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,控制所述车辆启动。
在一种可能的实现方式中,所述方法还包括:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败,生成第一提示信息,其中,所述第一提示信息用于提示非法入侵。
在一种可能的实现方式中,在所述生成第一提示信息之后,所述方法还包括:
生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第一提示信息的控制信息;
和/或,
向所述车辆的车主终端发送所述第一提示信息。
在一种可能的实现方式中,所述当前乘员的人脸图像由安装在车舱内的第一摄像头采集,所述第一目标人脸信息由安装在车舱外的第二摄像头采集。
在一种可能的实现方式中,所述方法还包括:
获取当前驾驶员的人脸图像和第二目标人脸信息,其中,所述第二目标人脸信息表示最近一次成功启动所述车辆的人员的人脸信息;
将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配;
响应于所述当前驾驶员的人脸图像与所述第二目标人脸信息匹配失败,生成第二提示信息,其中,所述第二提示信息用于提示非法入侵。
在一种可能的实现方式中,所述将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配,包括:
每隔预设时长将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配。
在一种可能的实现方式中,所述方法还包括:
响应于接收到人脸信息的注册管理请求,获取所述车辆的行驶状态信息;
响应于根据所述行驶状态信息确定所述车辆的行驶状态属于预设的静止状态,根据所述人脸信息的注册管理请求对所述车辆的注册人脸信息进行管理。
在一种可能的实现方式中,在所述获取所述车辆的行驶状态信息之后,所述方法还包括:
响应于根据所述行驶状态信息确定所述车辆的行驶状态不属于所述预设的静止状态,生成第三提示信息,其中,所述第三提示信息用于提示驾驶员专心驾驶。
在一种可能的实现方式中,所述预设的静止状态包括以下至少之一:所述车辆的档位为P档、所述车辆的档位为N档、所述车辆的车速为0。
在一种可能的实现方式中,所述方法还包括:
获取人脸注册请求;
响应于所述人脸注册请求对应的人脸信息属于已注册的人脸信息,生成第四提示信息,其中,所述第四提示信息用于提示所述人脸注册请求对应的人脸信息已注册;所述人脸注册请求对应的人脸信息和所述已注册人脸信息中的一项由安装在车舱内的第一摄像头采集,另一项由安装在车舱外的第二摄像头采集。
根据本公开的一方面,提供了一种车辆控制装置,包括:
第一获取模块,用于获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息;
第一匹配模块,用于将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配;
控制操作模块,用于响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作。
在一种可能的实现方式中,所述成功解锁车门的人员的人脸信息包括:
最近一次成功解锁车门的人员的人脸信息;
或者,
在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息。
在一种可能的实现方式中,所述控制操作模块用于:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围;
根据所述当前乘员在所述操作权限范围内的操控行为对所述车辆进行控制操作;和/或,
对所述当前乘员在所述操作权限范围外的操控行为进行报警提示。
在一种可能的实现方式中,所述控制操作模块用于:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定所述当前乘员的年龄信息;
根据所述当前乘员的年龄信息,确定所述当前乘员的操作权限范围。
在一种可能的实现方式中,所述控制操作模块用于:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定当前时间所属的时间段;
获取所述当前乘员在所述当前时间所属的时间段的操作权限范围。
在一种可能的实现方式中,
所述第一获取模块用于:响应于检测到所述当前乘员启动车辆的操控行为,获取所述当前乘员的人脸图像和第一目标人脸信息;
所述控制操作模块用于:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,控制所述车辆启动。
在一种可能的实现方式中,所述装置还包括:
第一生成模块,用于响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败,生成第一提示信息,其中,所述第一提示信息用于提示非法入侵。
在一种可能的实现方式中,所述装置还包括:
第二生成模块,用于生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第一提示信息的控制信息;
和/或,
发送模块,用于向所述车辆的车主终端发送所述第一提示信息。
在一种可能的实现方式中,所述当前乘员的人脸图像由安装在车舱内的第一摄像头采集,所述第一目标人脸信息由安装在车舱外的第二摄像头采集。
在一种可能的实现方式中,所述装置还包括:
第二获取模块,用于获取当前驾驶员的人脸图像和第二目标人脸信息,其中,所述第二目标人脸信息表示最近一次成功启动所述车辆的人员的人脸信息;
第二匹配模块,用于将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配;
第三生成模块,用于响应于所述当前驾驶员的人脸图像与所述第二目标人脸信息匹配失败,生成第二提示信息,其中,所述第二提示信息用于提示非法入侵。
在一种可能的实现方式中,所述第二匹配模块用于:
每隔预设时长将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配。
在一种可能的实现方式中,所述装置还包括:
第三获取模块,用于响应于接收到人脸信息的注册管理请求,获取所述车辆的行驶状态信息;
管理模块,用于响应于根据所述行驶状态信息确定所述车辆的行驶状态属于预设的静止状态,根据所述人脸信息的注册管理请求对所述车辆的注册人脸信息进行管理。
在一种可能的实现方式中,所述装置还包括:
第四生成模块,用于响应于根据所述行驶状态信息确定所述车辆的行驶状态不属于所述预设的静止状态,生成第三提示信息,其中,所述第三提示信息用于提示驾驶员专心驾驶。
在一种可能的实现方式中,所述预设的静止状态包括以下至少之一:所述车辆的档位为P档、所述车辆的档位为N档、所述车辆的车速为0。
在一种可能的实现方式中,所述装置还包括:
第四获取模块,用于获取人脸注册请求;
第五生成模块,用于响应于所述人脸注册请求对应的人脸信息属于已注册的人脸信息,生成第四提示信息,其中,所述第四提示信息用于提示所述人脸注册请求对应的人脸信息已注册;所述人脸注册请求对应的人脸信息和所述已注册人脸信息中的一项由安装在车舱内的第一摄像头采集,另一项由安装在车舱外的第二摄像头采集。
根据本公开的一方面,提供了一种车辆,包括:
第一摄像头,安装在车舱内,用于采集当前乘员的人脸图像;
控制器,与所述第一摄像头连接,用于获取所述当前乘员的人脸图像和第一目标人脸信息,将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配,响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息。
在一种可能的实现方式中,还包括:
第二摄像头,与所述控制器连接,安装在车舱外,用于采集车舱外的视频流。
根据本公开的一方面,提供了一种电子设备,包括:一个或多个处理器;用于存储可执行指令的存储器;其中,所述一个或多个处理器被配置为调用所述存储器存储的可执行指令,以执行上述方法。
根据本公开的一方面,提供了一种计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令被处理器执行时实现上述方法。
在本公开实施例中,通过获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息,将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配,并响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,由此在当前乘员与成功解锁车门的人员匹配成功时,才根据所述当前乘员的操控行为对所述车辆进行控制操作,从而能够提高车辆的安全性,减少安全隐患。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本公开。
根据下面参考附图对示例性实施例的详细说明,本公开的其它特征及方面将变得清楚。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。
图1示出本公开实施例提供的车辆控制方法的流程图。
图2示出本公开实施例提供的车辆的框图。
图3示出本公开实施例提供的车辆的另一框图。
图4示出本公开实施例提供的车辆控制装置的框图。
图5示出本公开实施例提供的一种电子设备800的框图。
具体实施方式
以下将参考附图详细说明本公开的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面,但是除非特别指出,不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
另外,为了更好地说明本公开,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本公开同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本公开的主旨。
本公开实施例提供了一种车辆控制方法及装置、电子设备、存储介质和车辆,通过获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息,将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配,并响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,由此在当前乘员与成功解锁车门的人员匹配成功时,才根据所述当前乘员的操控行为对所述车辆进行控制操作,从而能够有效地对车辆的操控进行安全控制,减少安全隐患。
图1示出本公开实施例提供的车辆控制方法的流程图。所述车辆控制方法的执行主体可以是车辆控制装置。例如,所述车辆控制方法可以由终端设备或其它处理设备执行。其中,终端设备可以是车载设备、用户设备(User Equipment,UE)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理(Personal Digital Assistant,PDA)、手持设备、计算设备或者可穿戴设备等。其中,车载设备可以是车舱内的控制器、域控制器、车机或者处理器,还可以是DMS(Driver Monitor System,驾驶员监控系统)或者OMS(OccupantMonitoring System,乘员监控系统)中用于执行图像等数据处理操作的设备主机等。在一些可能的实现方式中,所述车辆控制方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。如图1所示,所述车辆控制方法包括步骤S11至步骤S13。
在步骤S11中,获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息。
在本公开实施例中,车辆的乘员可以是搭乘所述车辆的任意人员。例如,乘员可以包括搭乘所述车辆的驾驶员、非驾驶员、乘客、大人、老人、小孩、前排人员、后排人员等中的至少之一。所述当前乘员可以表示当前搭乘所述车辆的人员。在本公开实施例中,可以获取部分或全部当前乘员的人脸图像。例如,可以仅获取当前驾驶员的人脸图像。又如,可以仅获取当前在副驾驶座的人员的人脸图像。又如,可以获取当前驾驶员的人脸图像和当前在副驾驶座的人员的人脸图像。又如,可以获取当前车舱内的所有乘员的人脸图像。
在本公开实施例中,可以从车舱内的视频流中,获取所述当前乘员的人脸图像。在一种可能的实现方式中,可以通过第一摄像头采集所述车舱内的视频流,并可以从所述第一摄像头获取所述车舱内的视频流,以从所述车舱内的视频流中获取所述当前乘员的人脸图像。其中,所述第一摄像头可以包括DMS摄像头和/或OMS摄像头等。所述第一摄像头的数量可以是一个或多个。所述第一摄像头可以安装在车舱内的任意位置。作为该实现方式的一个示例,所述第一摄像头可以安装在以下至少一个位置:A柱、仪表板、顶灯、内后视镜、中控台、前挡风玻璃。
在本公开实施例中,所述第一目标人脸信息可以包括成功解锁车门的人员的人脸图像、人脸特征、身份信息等中的至少之一。所述第一目标人脸信息可以是基于车舱外的视频流得到的。在一种可能的实现方式中,可以通过第二摄像头采集车舱外的视频流,并可以从所述第二摄像头获取所述车舱外的视频流。其中,所述第二摄像头的数量可以是一个或多个。作为该实现方式的一个示例,所述第二摄像头可以安装在以下至少一个位置上:至少一根B柱、至少一个车门、至少一个外后视镜、横梁。例如,所述第二摄像头可以安装在所述车辆的主驾驶座侧的B柱上。例如,主驾驶座在左侧,则所述第二摄像头可以安装在所述车辆的左侧的B柱上。又如,所述第二摄像头可以安装在两根B柱和后备箱门上。作为该实现方式的一个示例,所述第二摄像头可以采用ToF(Time of Flight,飞行时间)摄像头、双目摄像头等。
在一种可能的实现方式中,所述当前乘员也可以是基于车舱外的视频流检测出的具有进入车舱的意图的人员,相应地,所述当前乘员的人脸图像可以从所述车舱外的视频流中获取。例如,可以基于所述车舱外的视频流,检测是否有人员从车舱外进入车舱内,若是,则可以判定检测到该人员具有进入车舱的意图,并可以将该人员作为所述当前乘员,从所述车舱外的视频流中获取该人员的人脸图像作为所述当前乘员的人脸图像。又如,可以基于所述车舱外的视频流,检测是否有人员从车外打开车门,若是,则可以判定检测到该人员具有进入车舱的意图,并可以将该人员作为所述当前乘员,从所述车舱外的视频流中获取该人员的人脸图像作为所述当前乘员的人脸图像。进一步地,还可以在进一步根据注册信息判断具有进入车舱的意图的人员是否被允许进入车舱,若具有进入车舱的意图的人员被允许进入车舱,则可以将该人员作为车辆的当前乘员。
在一种可能的实现方式中,可以获取所述车舱外的视频流,根据所述车舱外的视频流进行人脸识别,得到车舱外的人脸识别结果,响应于所述车舱外的人脸识别结果为人脸识别成功,控制车门解锁和/或打开,并根据所述车舱外的视频流中的至少一个视频帧和/或所述车舱外的人脸识别结果,得到所述第一目标人脸信息。
作为该实现方式的一个示例,可以根据所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的至少一个视频帧,得到所述第一目标人脸信息。其中,所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的视频帧,可以表示所述车舱外的视频流中、所述人脸识别结果对应的人脸出现的视频帧。例如,所述车舱外的人脸识别结果对应的人脸出现在所述车舱外的视频流中的视频帧F1至FN,则视频帧F1至FN是所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的视频帧。
在一个例子中,可以将所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的部分或全部视频帧,作为所述第一目标人脸信息。在这个例子中,所述第一目标人脸信息可以包括成功解锁车门的人员的人脸图像,所述成功解锁车门的人员的人脸图像可以包括所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的部分或全部视频帧。
在另一个例子中,可以从所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的部分或全部视频帧中截取人脸图像,作为所述第一目标人脸信息。在这个例子中,所述第一目标人脸信息可以包括成功解锁车门的人员的人脸图像,所述成功解锁车门的人员的人脸图像可以包括从所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的部分或全部视频帧中截取的人脸图像。
在另一个例子中,可以提取所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的部分或全部视频帧中的人脸特征,作为所述第一目标人脸信息。在这个例子中,所述第一目标人脸信息可以包括成功解锁车门的人员的人脸特征,所述成功解锁车门的人员的人脸特征可以包括从所述车舱外的视频流中、用于得到所述车舱外的人脸识别结果的部分或全部视频帧中提取的人脸特征。
作为该实现方式的另一个示例,可以将所述车舱外的人脸识别结果对应的身份信息,作为所述第一目标人脸信息。在该示例中,所述第一目标人脸信息可以包括成功解锁车门的人员的身份信息,所述成功解锁车门的人员的身份信息可以包括所述车舱外的人脸识别结果对应的身份信息。
在步骤S12中,将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配。
在本公开实施例中,通过将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配,可以判断所述当前乘员是否是成功解锁车门的人员。
在一种可能的实现方式中,所述第一目标人脸信息包括成功解锁车门的人员的人脸图像。若所述当前乘员的人脸图像与所述成功解锁车门的人员的人脸图像的相似度大于或等于第一阈值,则可以判定所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功;若所述当前乘员的人脸图像与所述成功解锁车门的人员的人脸图像的相似度小于第一阈值,则可以判定所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败。
在另一种可能的实现方式中,所述第一目标人脸信息包括成功解锁车门的人员的人脸特征。对所述当前乘员的人脸图像进行人脸特征提取,可以得到所述当前乘员的人脸图像的人脸特征。若所述当前乘员的人脸图像的人脸特征与所述成功解锁车门的人员的人脸特征的相似度大于或等于第二阈值,则可以判定所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功;若所述当前乘员的人脸图像的人脸特征与所述成功解锁车门的人员的人脸特征的相似度小于第二阈值,则可以判定所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败。
在另一种可能的实现方式中,所述第一目标人脸信息包括成功解锁车门的人员的身份信息。对所述当前乘员的人脸图像进行人脸识别,可以得到所述当前乘员的人脸图像对应的身份信息,即,可以确定所述当前乘员的身份信息。若所述当前乘员的人脸图像对应的身份信息与所述成功解锁车门的人员的身份信息匹配成功,则可以判定所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功;若所述当前乘员的人脸图像对应的身份信息与所述成功解锁车门的人员的身份信息匹配失败,则可以判定所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败。
在步骤S13中,响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作。
在本公开实施例中,所述当前乘员的操控行为可以指所述当前乘员操控所述车辆的行为。例如,所述当前乘员的操控行为可以包括启动车辆、操控车载娱乐系统(例如播放音频、视频等)、调节空调、升降车窗、调整后视镜等中的至少之一。在本公开实施例中,在所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功时,可以允许所述当前乘员操控车辆;在所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败时,可以禁止所述当前乘员操作车辆。例如,所述当前乘员的操控行为为启动车辆,可以响应于当前乘员的人脸图像与所述第一目标人脸信息匹配成功,启动车辆,并可以响应于当前乘员的人脸图像与所述第一目标人脸信息匹配失败,禁止启动车辆。
在本公开实施例中,通过获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息,将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配,并响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,由此在当前乘员与成功解锁车门的人员匹配成功时,才根据所述当前乘员的操控行为对所述车辆进行控制操作,从而能够有效地对车辆的操控进行安全控制,减少安全隐患。
在一种可能的实现方式中,所述方法还包括:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败,生成第一提示信息,其中,所述第一提示信息用于提示非法入侵。在该实现方式中,通过响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败,生成第一提示信息,能够起到警示非法入侵人员的作用。
作为该实现方式的一个示例,在所述生成第一提示信息之后,所述方法还包括:生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第一提示信息的控制信息。在该示例中,所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一可以在所述控制信息的控制下,发出所述第一提示信息,由此能够起到警示当前乘员的作用。例如,所述当前乘员为当前驾驶员,根据该示例,能够起到警示当前驾驶员的作用。
例如,所述第一提示信息可以包括文字信息,可以通过所述车辆的车机、仪表盘和显示屏中的至少之一,显示所述第一提示信息中的文字信息。例如,所述第一提示信息可以包括“发现非法入侵,请尽快下车”的文字信息。又如,所述第一提示信息可以包括动画信息,可以通过所述车辆的车机、仪表盘和显示屏中的至少之一,显示所述第一提示信息中的动画信息。又如,所述第一提示信息可以包括语音信息,可以通过所述车辆的扬声器播放所述第一提示信息中的语音信息。例如,所述第一提示信息可以包括“发现非法入侵,请尽快下车”的语音信息。又如,可以在显示第一提示信息中的文字信息和/或播放第一提示信息中的语音信息的同时,控制所述震动模块震动,以起到进一步警示非法入侵人员的作用。
作为该实现方式的另一个示例,在所述生成第一提示信息之后,所述方法还包括:向所述车辆的车主终端发送所述第一提示信息。在该示例中,通过向所述车辆的车主终端发送所述第一提示信息,由此使车主能够及时发现非法入侵的情况,从而能够提高车辆的安全性。在该示例中,可以通过短信、电话、APP(Application,应用)等方式,向车主终端发送所述第一提示信息。在一个例子中,可以预先存储车主终端的标识信息,并在生成第一提示信息之后,根据所述车主终端的标识信息,向所述车主终端发送所述第一提示信息。例如,所述车主终端的标识信息可以是车主终端的电话号码、APP的ID(Identity Document,身份识别账户)等。在一个例子中,可以通过所述车辆的TBox(远程控制系统)与车主终端进行通信,向所述车主终端发送所述第一提示信息。
在一个例子中,所述第一提示信息可以包括所述当前乘员的照片和/或视频。通过响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败,向所述车辆的车主终端发送所述当前乘员的照片和/或视频,由此使车主能够通过当前乘员的照片和/或视频快速判断当前乘员是否是非法入侵人员,从而能够提高车辆的安全性。在这个例子中,可以根据所述第一摄像头采集的车舱内的视频流,得到所述当前乘员的照片和/或视频。例如,可以将所述车舱内的视频流中的一个或多个视频帧作为所述当前乘员的照片。又如,可以从所述车舱内的视频流中的一个或多个视频帧中截取人脸区域,得到所述当前乘员的照片。又如,可以从所述车舱内的视频流截取视频片段,作为所述当前乘员的视频。
在一个例子中,在所述向所述车辆的车主终端发送所述第一提示信息之后,所述方法还包括:响应于接收到来自于车主终端的确认信息,关闭所述车辆内的提示信息,其中,所述确认信息用于确定当前乘员不属于非法乘员,例如,可以用于确定当前驾驶员不属于非法驾驶员。其中,所述关闭所述车辆内的提示信息,可以指不再通过所述车辆的车机、仪表盘、显示屏、扬声器、震动模块等发出第一提示信息。
当然,在其他可能的实现方式中,在所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败的情况下,也可以不进行任何操作,例如,可以既不生成第一提示信息,也不根据所述当前乘员的操控行为对所述车辆进行控制操作。
在一种可能的实现方式中,所述成功解锁车门的人员的人脸信息包括:最近一次成功解锁车门的人员的人脸信息。在该实现方式中,通过响应于所述当前乘员的人脸图像与最近一次成功解锁车门的人员的人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,由此在所述当前乘员为最近一次成功解锁车门的人员时,才根据所述当前乘员的操控行为对所述车辆进行控制操作,从而能够进一步提高车辆的安全性,减少安全隐患。例如,在所述当前乘员为当前驾驶员且所述操控行为为启动车辆的情况下,可以响应于所述当前驾驶员的人脸图像与所述最近一次成功解锁车门的人员的人脸信息匹配成功,启动车辆,由此在当前在主驾驶座的人员与最近一次成功解锁车门的人员匹配成功时,才启动车辆,从而能够进一步提高车辆的安全性。
作为该实现方式的一个示例,可以响应于所述当前乘员的人脸图像与所述最近一次成功解锁车门的人员的人脸信息匹配失败,生成第一提示信息。根据该示例,能够在所述当前乘员不为最近一次成功解锁车门的人员的情况下进行提示。
在另一种可能的实现方式中,所述成功解锁车门的人员的人脸信息包括:在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息。在该实现方式中,通过响应于所述当前乘员的人脸图像与在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,由此在所述当前乘员为在主驾驶座无人的状态下最近一次成功解锁车门的人员时,才根据所述当前乘员的操控行为对所述车辆进行控制操作,从而能够进一步提高车辆的安全性,减少安全隐患。另外,根据该实现方式,在主驾驶座已有人(即驾驶员已上车)的状态下,其他乘员仍然可以通过刷脸的方式解锁车门,从而能够方便其他乘员上车。通过采用该实现方式,在驾驶员上车后,可以将驾驶员的人脸信息作为具有操控权限的人员的人脸信息(即第一目标人脸信息),由此能够将车辆的操控权限优先归属于驾驶员,对非驾驶员操控车辆的风险进行控制。
例如,乘员A是第一个上车的乘员,乘员B是第二个上车的乘员,乘员C是第三个上车的乘员。乘员A刷脸解锁车门上车后,坐在副驾驶座,此时,所述在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息(即第一目标人脸信息)为乘员A的人脸信息。乘员B刷脸解锁车门上车后,坐在主驾驶座,此时,所述在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息(即第一目标人脸信息)更新为乘员B(即当前驾驶员)的人脸信息。乘员C刷脸解锁车门上车后,坐在后排座位,此时,所述在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息(即第一目标人脸信息)仍为乘员B的人脸信息。例如,在乘员B(即当前驾驶员)的操控行为为启动车辆的情况下,可以将乘员B的人脸图像与所述在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息进行匹配,并可以响应于乘员B的人脸图像与所述在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息进行匹配成功,启动车辆。在这个例子中,在乘员B(即当前驾驶员)上车后,其他乘员(例如乘员C)仍然可以通过刷脸的方式解锁车门;在乘员C上车后,乘员B(即当前驾驶员)仍然具有操控车辆(例如启动车辆)的权限。
作为该实现方式的一个示例,可以响应于所述当前乘员的人脸图像与所述在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息匹配失败,生成第一提示信息。根据该示例,能够在所述当前乘员不为在主驾驶座无人的状态下最近一次成功解锁车门的人员的情况下进行提示。
在一种可能的实现方式中,所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,包括:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围;根据所述当前乘员在所述操作权限范围内的操控行为对所述车辆进行控制操作;和/或,对所述当前乘员在所述操作权限范围外的操控行为进行报警提示。在该实现方式中,可以根据所述当前乘员的身份信息、归属人群信息、年龄信息等中的至少之一,确定所述当前乘员的操作权限范围。其中,乘员的操作权限范围可以是预先配置的,并与乘员的身份信息、归属人群信息、年龄信息等中的至少之一关联。在获取当前乘员的人脸图像后,可以根据当前乘员的人脸图像进行身份识别、归属人群识别、年龄识别等个人属性识别中的至少一项,进而根据个人属性识别结果确定对应的操作权限范围。在该实现方式中,通过根据所述当前乘员在所述操作权限范围内的操控行为对所述车辆进行控制操作,由此能够进一步提高车辆的安全性。通过对所述当前乘员在所述操作权限范围外的操控行为进行报警提示,由此能够提醒所述当前乘员在所述操作权限范围内对所述车辆进行操控。
作为该实现方式的一个示例,所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围,包括:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定所述当前乘员的年龄信息;根据所述当前乘员的年龄信息,确定所述当前乘员的操作权限范围。在该示例中,可以对所述当前乘员的人脸图像进行年龄识别,确定所述当前乘员的年龄信息,或者,可以根据所述当前乘员的身份信息,获取预先存储的所述当前乘员的年龄信息。在该示例中,可以预先建立年龄条件与操作权限范围之间的对应关系,根据所述对应关系以及所述当前乘员的年龄信息,确定所述当前乘员的操作权限范围。例如,大于或等于18岁对应的操作权限范围包括启动车辆、调整后视镜、操控车载娱乐系统(例如播放音频、视频等)、调节空调、升降车窗等;小于18岁对应的操作权限范围可以包括操控车载娱乐系统、调节空调、升降车窗等。其中,小于18岁对应的操作权限范围不包括启动车辆。在该示例中,通过响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定所述当前乘员的年龄信息,根据所述当前乘员的年龄信息,确定所述当前乘员的操作权限范围,由此能够减少未成年人驾驶车辆带来的安全隐患。
作为该实现方式的另一个示例,所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围,包括:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定当前时间所属的时间段;获取所述当前乘员在所述当前时间所属的时间段的操作权限范围。在该示例中,同一乘员在不同时间段的操作权限范围可以不同。例如,所述车辆是公交车、列车、地铁等运营车辆,所述当前乘员是所述运营车辆的驾驶员,若所述当前时间所属的时间段为所述当前乘员的当班时间段,则所述当前乘员在所述当前时间所属的时间段的操作权限范围可以包括启动车辆,若所述当前时间所属的时间段不为所述当前乘员的当班时间段,则所述当前乘员在所述当前时间所属的时间段的操作权限范围可以不包括启动车辆。根据该示例,有助于提高运营车辆的安全性,并能够帮助管理运营车辆。
在另一种可能的实现方式中,若所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,默认设置所述当前乘员具有所述车辆的所有操作权限,并根据所述当前乘员的操控行为对所述车辆进行控制操作。在该实现方式中,可以无需获取所述当前乘员的操作权限范围。
在一种可能的实现方式中,所述获取当前乘员的人脸图像和第一目标人脸信息,包括:响应于检测到所述当前乘员启动车辆的操控行为,获取所述当前乘员的人脸图像和第一目标人脸信息;所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,包括:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,控制所述车辆启动。在该实现方式中,所述当前乘员可以是当前驾驶员,可以在所述当前驾驶员人为触发启动车辆后,再判断当前驾驶员与成功解锁车门的人员是否是同一人员,进而判定是否控制车辆启动,由此能够进一步提高车辆的安全性。在该实现方式中,驾驶员可以通过钥匙、启动按钮、语音、手势等,人为触发启动车辆。相应地,当前驾驶员启动车辆的操控行为可以包括以下至少之一:转动钥匙至启动位置、按下启动按钮、发出启动车辆的语音指令、执行启动车辆的手势。
在另一种可能的实现方式中,所述获取当前乘员的人脸图像和第一目标人脸信息,包括:响应于检测到所述当前乘员启动车辆的操控行为,且所述车辆的档位为预设档位,获取所述当前乘员的人脸图像和第一目标人脸信息,其中,所述预设档位为P档(Parkgear,驻车档)和/或N档(Neutral gear,空挡);所述响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,包括:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,控制所述车辆启动。在该实现方式中,在当前驾驶员人为触发启动车辆且车辆的档位为P档或N档的情况下,再判断当前驾驶员与成功解锁车门的人员是否是同一人员,进而判定是否启动车辆,由此能够进一步提高车辆的安全性。
在一种可能的实现方式中,所述当前乘员的人脸图像由安装在车舱内的第一摄像头采集,所述第一目标人脸信息由安装在车舱外的第二摄像头采集。在该实现方式中,可以将用于刷脸开车门的第二摄像头与用于乘员监测的第一摄像头联动起来,将第一摄像头采集的当前乘员的人脸图像与基于第二摄像头获得的成功解锁车门的人员的人脸信息进行比对,在第一摄像头采集的当前乘员的人脸图像与基于第二摄像头获得的成功解锁车门的人员的人脸信息匹配成功时,才根据所述当前乘员的操控行为对所述车辆进行控制操作,从而灵活地应用设置在车舱的多个摄像头来进行乘员身份校验和车辆操作权限控制,提升车辆的安全性,减少安全隐患。例如,所述当前乘员为当前驾驶员,根据该实现方式,可以将用于刷脸开车门的第二摄像头与用于驾驶员监测的第一摄像头联动起来,将第一摄像头采集的当前驾驶员的人脸图像与基于第二摄像头获得的成功解锁车门的人员的人脸信息进行比对,在第一摄像头采集的当前在主驾驶座的人员的人脸图像与基于第二摄像头获得的成功解锁车门的人员的人脸信息匹配成功时,才启动车辆,由此能够减少某一人员刷脸开车门后、另一人员驾驶车辆的安全隐患。
在一种可能的实现方式中,所述方法还包括:获取当前驾驶员的人脸图像和第二目标人脸信息,其中,所述第二目标人脸信息表示最近一次成功启动所述车辆的人员的人脸信息;将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配;响应于所述当前驾驶员的人脸图像与所述第二目标人脸信息匹配失败,生成第二提示信息,其中,所述第二提示信息用于提示非法入侵。
在该实现方式中,当前驾驶员可以表示当前驾驶车辆的人员。作为该实现方式的一个示例,第一摄像头可以安装在主驾驶座附近,以采集驾驶区域的视频流。根据所述第一摄像头采集的驾驶区域的视频流,可以得到当前驾驶员的人脸图像。例如,可以将所述驾驶区域的视频流中的一个或多个视频帧作为所述当前驾驶员的人脸图像。又如,可以从所述驾驶区域的视频流的一个或多个视频帧中截取人脸区域,得到所述当前驾驶员的人脸图像。
在该实现方式中,所述最近一次成功启动车辆的人员的人脸信息,可以表示最近一次成功启动车辆的驾驶员的人脸的信息,例如,可以表示所述车辆最近一次成功启动时所述第一摄像头采集的驾驶员的人脸信息。例如,所述最近一次成功启动车辆的人员的人脸信息可以包括以下至少之一:最近一次成功启动车辆的人员的人脸图像、最近一次成功启动车辆的人员的人脸特征、最近一次成功启动车辆的人员的身份信息。在该实现方式中,可以根据所述车辆最近一次成功启动时、驾驶区域的视频流中的至少一个视频帧,得到所述第二目标人脸信息。
作为该实现方式的一个示例,可以将所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧,作为所述第二目标人脸信息。在该示例中,所述第二目标人脸信息可以包括最近一次成功启动车辆的人员的人脸图像,所述最近一次成功启动车辆的人员的人脸图像可以包括所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧。
作为该实现方式的另一个示例,可以从所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧中截取人脸图像,作为所述第二目标人脸信息。在该示例中,所述第二目标人脸信息可以包括最近一次成功启动车辆的人员的人脸图像,所述最近一次成功启动车辆的人员的人脸图像可以包括从所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧中截取的人脸图像。
作为该实现方式的另一个示例,可以提取所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧的人脸特征,作为所述第二目标人脸信息。在该示例中,所述第二目标人脸信息可以包括最近一次成功启动车辆的人员的人脸特征,所述最近一次成功启动车辆的人员的人脸特征可以包括从所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧中提取的人脸特征。
作为该实现方式的另一个示例,可以对所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧进行人脸识别,得到驾驶员的身份信息,作为所述第二目标人脸信息。在该示例中,所述第二目标人脸信息可以包括最近一次成功启动车辆的人员的身份信息,所述最近一次成功启动车辆的人员的身份信息可以包括对所述车辆最近一次成功启动时、所述驾驶区域的视频流中的至少一个视频帧进行人脸识别得到的驾驶员的身份信息。
在该实现方式中,若所述当前驾驶员的人脸图像与所述最近一次成功启动车辆的人员的人脸信息匹配成功,则可以不进行任何操作。在该实现方式中,通过响应于所述当前的驾驶员的人脸图像与所述第二目标人脸信息匹配失败,生成第二提示信息,由此能够起到警示非法入侵人员的作用。
例如,在一些场景中,A驾驶员启动车辆后,临时有事下车,但是忘记熄火并上锁车辆,为了减少B驾驶员在未经授权的情况下直接把车开走的情况,可以采用该实现方式,通过比对当前驾驶员的人脸图像(例如B驾驶员的人脸图像)与最近一次成功启动车辆的人员的人脸信息(例如A驾驶员的人脸信息),及时发现当前在驾驶座的人员(例如B驾驶员)与最近一次成功启动车辆的人员(例如A驾驶员)不一致的情况,从而能够提高车辆的安全性。
作为该实现方式的一个示例,在所述生成第二提示信息之后,所述方法还包括:生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第二提示信息的控制信息;和/或,向所述车辆的车主终端发送所述第二提示信息。
作为该实现方式的一个示例,所述将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配,包括:每隔预设时长将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配。例如,预设时长可以是10秒。在该示例中,每隔一定的时间进行驾驶员识别,由此能够持续检测驾驶员是否更换,减少在车辆启动(例如等红绿灯时)之后更换驾驶员带来的安全隐患,从而能够提高车辆的安全性。
在一种可能的实现方式中,所述方法还包括:响应于接收到人脸信息的注册管理请求,获取所述车辆的行驶状态信息;响应于根据所述行驶状态信息确定所述车辆的行驶状态属于预设的静止状态,根据所述人脸信息的注册管理请求对所述车辆的注册人脸信息进行管理。在该实现方式中,对所述车辆的注册人脸信息进行管理的前提条件是所述车辆的行驶状态信息属于预设的静止状态,由此能够提高行车的安全性。在该实现方式中,人脸信息的注册管理请求可以包括以下至少之一:人脸注册请求、删除已注册的人脸信息的请求、修改已注册的人脸信息的请求。作为该实现方式的一个示例,可以通过车机展示人脸信息的注册管理的操作界面。
作为该实现方式的一个示例,在所述获取所述车辆的行驶状态信息之后,所述方法还包括:响应于根据所述行驶状态信息确定所述车辆的行驶状态不属于所述预设的静止状态,生成第三提示信息,其中,所述第三提示信息用于提示驾驶员专心驾驶。在该示例中,若所述车辆的行驶状态信息不属于预设的静止状态,例如车辆在行驶过程中,则不允许进行人脸信息的注册管理,例如不允许进行人脸注册、删除已注册的人脸信息、修改已注册的人脸信息等,从而能够提高行车的安全性。
在一个例子中,在所述生成第三提示信息之后,所述方法还包括:生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第三提示信息的控制信息;和/或,向所述车辆的车主终端发送所述第三提示信息。例如,第三提示信息可以包括文字信息,可以通过所述车辆的车机、仪表盘和显示屏中的至少之一,显示所述第三提示信息中的文字信息。例如,所述第三提示信息可以包括“请专心驾驶,待停车后再注册人脸”的文字信息。又如,所述第三提示信息可以包括动画信息,可以通过所述车辆的车机、仪表盘和显示屏中的至少之一,显示所述第三提示信息中的动画信息。又如,所述第三提示信息可以包括语音信息,可以通过所述车辆的扬声器播放所述第三提示信息中的语音信息。例如,所述第三提示信息可以包括“请专心驾驶,待停车后再注册人脸”的语音信息。
作为该实现方式的一个示例,所述预设的静止状态包括以下至少之一:所述车辆的档位为P档、所述车辆的档位为N档、所述车辆的车速为0。例如,所述预设的静止状态可以包括:所述车辆的档位为P档且所述车辆的车速为0,或者,所述车辆的档位为N档且所述车辆的车速为0。
在一种可能的实现方式中,所述方法还包括:获取人脸注册请求;响应于所述人脸注册请求对应的人脸信息属于已注册的人脸信息,生成第四提示信息,其中,所述第四提示信息用于提示所述人脸注册请求对应的人脸信息已注册;所述人脸注册请求对应的人脸信息和所述已注册人脸信息中的一项由安装在车舱内的第一摄像头采集,另一项由安装在车舱外的第二摄像头采集。根据该实现方式,能够对已经注册过的用户在没有删除已注册的人脸信息的情况下再次注册的情况进行提示,从而有助于提高人脸识别的准确率。根据该实现方式,若某一用户已通过第一摄像头注册人脸信息,则该用户再次通过第二摄像头注册人脸信息时,可以生成第四提示信息,以提示该用户人脸信息已注册;类似地,若某一用户已通过第二摄像头注册人脸信息,则该用户再次通过第一摄像头注册人脸信息时,可以生成第四提示信息,以提示该用户人脸信息已注册。根据该实现方式,可以将通过第一摄像头注册的人脸信息与通过第二摄像头注册的人脸信息关联起来,实现更灵活的注册人脸信息的管理和基于人脸信息的安全认证。例如,通过第一摄像头注册的人脸信息也可以通过第二摄像头进行人脸识别,从而能够刷脸开车门,又如,通过第二摄像头注册的人脸信息也可以通过第一摄像头进行人脸识别,从而能够实现乘员的人脸识别。
作为该实现方式的一个示例,可以将所述已注册的人脸信息保存在控制器中。例如,所述控制器可以同时保存通过所述第一摄像头注册的人脸信息和通过第二摄像头注册的人脸信息。
作为该实现方式的一个示例,在所述生成第四提示信息之后,所述方法还包括:生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第四提示信息的控制信息;和/或,向所述车辆的车主终端发送所述第四提示信息。例如,第四提示信息可以包括文字信息,可以通过所述车辆的车机、仪表盘和显示屏中的至少之一,显示所述第四提示信息中的文字信息。例如,所述第四提示信息可以包括“您已注册,请勿重复注册”的文字信息。又如,所述第四提示信息可以包括动画信息,可以通过所述车辆的车机、仪表盘和显示屏中的至少之一,显示所述第四提示信息中的动画信息。又如,所述第四提示信息可以包括语音信息,可以通过所述车辆的扬声器播放所述第四提示信息中的语音信息。例如,所述第四提示信息可以包括“您已注册,请勿重复注册”的语音信息。
下面对本公开实施例的一个应用场景进行说明。在该应用场景中,安装在B柱上的第二摄像头可以采集车舱外的视频流。控制器可以根据所述车舱外的视频流进行人脸识别,得到车舱外的人脸识别结果,并响应于所述车舱外的人脸识别结果为人脸识别成功,控制车门解锁和/或打开。控制器可以在主驾驶座无人的情况下,根据所述车舱外的视频流中的至少一个视频帧和/或所述车舱外的人脸识别结果,得到所述第一目标人脸信息。安装在车舱内的第一摄像头可以采集车舱内的视频流。控制器可以响应于检测到当前驾驶员启动车辆的操控行为,从所述车舱内的视频流中,获取所述当前驾驶员的人脸图像,并将所述当前驾驶员的人脸图像与所述第一目标人脸信息进行匹配。控制器可以响应于所述当前驾驶员的人脸图像与所述第一目标人脸信息匹配成功,控制所述车辆启动。所述控制器可以每隔预设时长将当前驾驶员的人脸图像与最近一次成功启动所述车辆的人员的人脸信息进行匹配,并响应于所述当前驾驶员的人脸图像与所述最近一次成功启动所述车辆的人员的人脸信息匹配失败,生成第二提示信息,从而能够起到警示非法入侵人员的作用。
可以理解,本公开提及的上述各个方法实施例,在不违背原理逻辑的情况下,均可以彼此相互结合形成结合后的实施例,限于篇幅,本公开不再赘述。本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
此外,本公开还提供了车辆、车辆控制装置、电子设备、计算机可读存储介质、程序,上述均可用来实现本公开提供的任一种车辆控制方法,相应技术方案和技术效果可参见方法部分的相应记载,不再赘述。
图2示出本公开实施例提供的车辆的框图。如图2所示,所述车辆包括:第一摄像头21,安装在车舱内,用于采集当前乘员的人脸图像;控制器22,与所述第一摄像头21连接,用于获取所述当前乘员的人脸图像和第一目标人脸信息,将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配,响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息。
在一种可能的实现方式中,所述控制器22可以通过CAN(Controller AreaNetwork,控制器22局域网络)总线、以太网等方式与其他模块进行交互。其中,其他模块可以包括车机、仪表盘、显示屏、扬声器、震动模块、车身控制模块(Body Control Module,BCM)等中的至少之一。
图3示出本公开实施例提供的车辆的另一框图。如图3所示,在一种可能的实现方式中,所述车辆还包括:第二摄像头23,与所述控制器22连接,安装在车舱外,用于采集车舱外的视频流。
图4示出本公开实施例提供的车辆控制装置的框图。如图4所示,所述车辆控制装置包括:第一获取模块41,用于获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息;第一匹配模块42,用于将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配;控制操作模块43,用于响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作。
在一种可能的实现方式中,所述成功解锁车门的人员的人脸信息包括:最近一次成功解锁车门的人员的人脸信息;或者,在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息。
在一种可能的实现方式中,所述控制操作模块43用于:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,获取所述当前乘员的操作权限范围;根据所述当前乘员在所述操作权限范围内的操控行为对所述车辆进行控制操作;和/或,对所述当前乘员在所述操作权限范围外的操控行为进行报警提示。
在一种可能的实现方式中,所述控制操作模块43用于:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定所述当前乘员的年龄信息;根据所述当前乘员的年龄信息,确定所述当前乘员的操作权限范围。
在一种可能的实现方式中,所述控制操作模块43用于:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,确定当前时间所属的时间段;获取所述当前乘员在所述当前时间所属的时间段的操作权限范围。
在一种可能的实现方式中,所述第一获取模块41用于:响应于检测到所述当前乘员启动车辆的操控行为,获取所述当前乘员的人脸图像和第一目标人脸信息;所述控制操作模块43用于:响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,控制所述车辆启动。
在一种可能的实现方式中,所述装置还包括:第一生成模块,用于响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配失败,生成第一提示信息,其中,所述第一提示信息用于提示非法入侵。
在一种可能的实现方式中,所述装置还包括:第二生成模块,用于生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第一提示信息的控制信息;和/或,发送模块,用于向所述车辆的车主终端发送所述第一提示信息。
在一种可能的实现方式中,所述当前乘员的人脸图像由安装在车舱内的第一摄像头采集,所述第一目标人脸信息由安装在车舱外的第二摄像头采集。
在一种可能的实现方式中,所述装置还包括:第二获取模块,用于获取当前驾驶员的人脸图像和第二目标人脸信息,其中,所述第二目标人脸信息表示最近一次成功启动所述车辆的人员的人脸信息;第二匹配模块,用于将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配;第三生成模块,用于响应于所述当前驾驶员的人脸图像与所述第二目标人脸信息匹配失败,生成第二提示信息,其中,所述第二提示信息用于提示非法入侵。
在一种可能的实现方式中,所述第二匹配模块用于:每隔预设时长将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配。
在一种可能的实现方式中,所述装置还包括:第三获取模块,用于响应于接收到人脸信息的注册管理请求,获取所述车辆的行驶状态信息;管理模块,用于响应于根据所述行驶状态信息确定所述车辆的行驶状态属于预设的静止状态,根据所述人脸信息的注册管理请求对所述车辆的注册人脸信息进行管理。
在一种可能的实现方式中,所述装置还包括:第四生成模块,用于响应于根据所述行驶状态信息确定所述车辆的行驶状态不属于所述预设的静止状态,生成第三提示信息,其中,所述第三提示信息用于提示驾驶员专心驾驶。
在一种可能的实现方式中,所述预设的静止状态包括以下至少之一:所述车辆的档位为P档、所述车辆的档位为N档、所述车辆的车速为0。
在一种可能的实现方式中,所述装置还包括:第四获取模块,用于获取人脸注册请求;第五生成模块,用于响应于所述人脸注册请求对应的人脸信息属于已注册的人脸信息,生成第四提示信息,其中,所述第四提示信息用于提示所述人脸注册请求对应的人脸信息已注册;所述人脸注册请求对应的人脸信息和所述已注册人脸信息中的一项由安装在车舱内的第一摄像头采集,另一项由安装在车舱外的第二摄像头采集。
在本公开实施例中,通过获取当前乘员的人脸图像和第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息,将所述当前乘员的人脸图像与所述第一目标人脸信息进行匹配,并响应于所述当前乘员的人脸图像与所述第一目标人脸信息匹配成功,根据所述当前乘员的操控行为对所述车辆进行控制操作,由此在当前乘员与成功解锁车门的人员匹配成功时,才根据所述当前乘员的操控行为对所述车辆进行控制操作,从而能够提高车辆的安全性,减少安全隐患。
在一些实施例中,本公开实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法,其具体实现和技术效果可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
本公开实施例还提供一种计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令被处理器执行时实现上述方法。其中,所述计算机可读存储介质可以是非易失性计算机可读存储介质,或者可以是易失性计算机可读存储介质。
本公开实施例还提出一种计算机程序,包括计算机可读代码,当所述计算机可读代码在电子设备中运行时,所述电子设备中的处理器执行用于实现上述方法。
本公开实施例还提供了另一种计算机程序产品,用于存储计算机可读指令,指令被执行时使得计算机执行上述任一实施例提供的车辆控制方法的操作。
本公开实施例还提供一种电子设备,包括:一个或多个处理器;用于存储可执行指令的存储器;其中,所述一个或多个处理器被配置为调用所述存储器存储的可执行指令,以执行上述方法。
电子设备可以被提供为终端、服务器或其它形态的设备。所述电子设备可以是车舱内的域控制器、控制器、车机或者处理器,还可以是DMS或者OMS中用于执行图像等数据处理操作的设备主机等。
图5示出本公开实施例提供的一种电子设备800的框图。例如,电子设备800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等终端。
参照图5,电子设备800可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制电子设备800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在电子设备800的操作。这些数据的示例包括用于在电子设备800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件806为电子设备800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为电子设备800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述电子设备800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当电子设备800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当电子设备800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为电子设备800提供各个方面的状态评估。例如,传感器组件814可以检测到电子设备800的打开/关闭状态,组件的相对定位,例如所述组件为电子设备800的显示器和小键盘,传感器组件814还可以检测电子设备800或电子设备800一个组件的位置改变,用户与电子设备800接触的存在或不存在,电子设备800方位或加速/减速和电子设备800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如互补金属氧化物半导体(CMOS)或电荷耦合装置(CCD)图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于电子设备800和其他设备之间有线或无线方式的通信。电子设备800可以接入基于通信标准的无线网络,如无线网络(Wi-Fi)、第二代移动通信技术(2G)、第三代移动通信技术(3G)、第四代移动通信技术(4G)/通用移动通信技术的长期演进(LTE)、第五代移动通信技术(5G)或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种非易失性计算机可读存储介质,例如包括计算机程序指令的存储器804,上述计算机程序指令可由电子设备800的处理器820执行以完成上述方法。
本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (14)

1.一种车辆控制方法,其特征在于,包括:
基于车舱外的视频流,检测是否有人员从车舱外进入车舱内或者是否有人员从车外打开车门,若有人员从车舱外进入车舱内或者有人员从车外打开车门,则判定检测到该人员具有进入车舱的意图,并将该人员作为当前乘员,从所述车舱外的视频流中获取该人员的人脸图像作为所述当前乘员的人脸图像;
获取第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息,所述第一目标人脸信息包括成功解锁车门的人员的身份信息,还包括成功解锁车门的人员的人脸图像和/或人脸特征;所述成功解锁车门的人员的人脸信息包括:最近一次成功解锁车门的人员的人脸信息,或者,在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息;
将所述当前乘员的人脸图像与所述第一目标人脸信息中的人脸图像和/或人脸特征进行匹配;
响应于所述当前乘员的人脸图像与所述第一目标人脸信息中的人脸图像和/或人脸特征匹配成功,根据所述身份信息,获取预先存储的所述当前乘员的年龄信息;
根据所述当前乘员的年龄信息,以及预先建立的年龄条件与操作权限范围之间的对应关系,确定所述当前乘员的操作权限范围;
根据所述当前乘员在所述操作权限范围内的操控行为对所述车辆进行控制操作;和/或,对所述当前乘员在所述操作权限范围外的操控行为进行报警提示。
2.根据权利要求1所述的方法,其特征在于,所述根据所述当前乘员的年龄信息,以及预先建立的年龄条件与操作权限范围之间的对应关系,确定所述当前乘员的操作权限范围,包括:
确定当前时间所属的时间段;
根据所述当前乘员的年龄信息,以及预先建立的年龄条件与操作权限范围之间的对应关系,获取所述当前乘员在所述当前时间所属的时间段的操作权限范围。
3.根据权利要求1或2所述的方法,其特征在于,在所述将所述当前乘员的人脸图像与所述第一目标人脸信息中的人脸图像和/或人脸特征进行匹配之后,所述方法还包括:
响应于所述当前乘员的人脸图像与所述第一目标人脸信息中的人脸图像和/或人脸特征匹配失败,生成第一提示信息,其中,所述第一提示信息用于提示非法入侵。
4.根据权利要求3所述的方法,其特征在于,在所述生成第一提示信息之后,所述方法还包括:
生成控制所述车辆的车机、仪表盘、显示屏、扬声器、震动模块中的至少之一发出所述第一提示信息的控制信息;
和/或,
向所述车辆的车主终端发送所述第一提示信息。
5.根据权利要求1或2所述的方法,其特征在于,所述成功解锁车门的人员的人脸图像是由安装在车舱外的第二摄像头采集的。
6.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
获取当前驾驶员的人脸图像和第二目标人脸信息,其中,所述第二目标人脸信息表示最近一次成功启动所述车辆的人员的人脸信息;
将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配;
响应于所述当前驾驶员的人脸图像与所述第二目标人脸信息匹配失败,生成第二提示信息,其中,所述第二提示信息用于提示非法入侵。
7.根据权利要求6所述的方法,其特征在于,所述将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配,包括:
每隔预设时长将所述当前驾驶员的人脸图像与所述第二目标人脸信息进行匹配。
8.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
响应于接收到人脸信息的注册管理请求,获取所述车辆的行驶状态信息;
响应于根据所述行驶状态信息确定所述车辆的行驶状态属于预设的静止状态,根据所述人脸信息的注册管理请求对所述车辆的注册人脸信息进行管理。
9.根据权利要求8所述的方法,其特征在于,在所述获取所述车辆的行驶状态信息之后,所述方法还包括:
响应于根据所述行驶状态信息确定所述车辆的行驶状态不属于所述预设的静止状态,生成第三提示信息,其中,所述第三提示信息用于提示驾驶员专心驾驶。
10.根据权利要求8所述的方法,其特征在于,所述预设的静止状态包括以下至少之一:所述车辆的档位为P档、所述车辆的档位为N档、所述车辆的车速为0。
11.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
获取人脸注册请求;
响应于所述人脸注册请求对应的人脸信息属于已注册的人脸信息,生成第四提示信息,其中,所述第四提示信息用于提示所述人脸注册请求对应的人脸信息已注册;所述人脸注册请求对应的人脸信息和所述已注册人脸信息中的一项由安装在车舱内的第一摄像头采集,另一项由安装在车舱外的第二摄像头采集。
12.一种车辆控制装置,其特征在于,包括:
第一获取模块,用于基于车舱外的视频流,检测是否有人员从车舱外进入车舱内或者是否有人员从车外打开车门,若有人员从车舱外进入车舱内或者有人员从车外打开车门,则判定检测到该人员具有进入车舱的意图,并将该人员作为当前乘员,从所述车舱外的视频流中获取该人员的人脸图像作为所述当前乘员的人脸图像;获取第一目标人脸信息,其中,所述第一目标人脸信息表示成功解锁车门的人员的人脸信息,所述第一目标人脸信息包括成功解锁车门的人员的身份信息,还包括成功解锁车门的人员的人脸图像和/或人脸特征;所述成功解锁车门的人员的人脸信息包括:最近一次成功解锁车门的人员的人脸信息,或者,在主驾驶座无人的状态下最近一次成功解锁车门的人员的人脸信息;
第一匹配模块,用于将所述当前乘员的人脸图像与所述第一目标人脸信息中的人脸图像和/或人脸特征进行匹配;
控制操作模块,用于响应于所述当前乘员的人脸图像与所述第一目标人脸信息中的人脸图像和/或人脸特征匹配成功,根据所述身份信息,获取预先存储的所述当前乘员的年龄信息;根据所述当前乘员的年龄信息,以及预先建立的年龄条件与操作权限范围之间的对应关系,确定所述当前乘员的操作权限范围;根据所述当前乘员在所述操作权限范围内的操控行为对所述车辆进行控制操作;和/或,对所述当前乘员在所述操作权限范围外的操控行为进行报警提示。
13.一种电子设备,其特征在于,包括:
一个或多个处理器;
用于存储可执行指令的存储器;
其中,所述一个或多个处理器被配置为调用所述存储器存储的可执行指令,以执行权利要求1至11中任意一项所述的方法。
14.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,所述计算机程序指令被处理器执行时实现权利要求1至11中任意一项所述的方法。
CN202010917459.3A 2020-09-03 2020-09-03 车辆控制方法及装置、电子设备、存储介质和车辆 Active CN112037380B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010917459.3A CN112037380B (zh) 2020-09-03 2020-09-03 车辆控制方法及装置、电子设备、存储介质和车辆
PCT/CN2021/078679 WO2022048119A1 (zh) 2020-09-03 2021-03-02 车辆控制方法及装置、电子设备、存储介质和车辆

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010917459.3A CN112037380B (zh) 2020-09-03 2020-09-03 车辆控制方法及装置、电子设备、存储介质和车辆

Publications (2)

Publication Number Publication Date
CN112037380A CN112037380A (zh) 2020-12-04
CN112037380B true CN112037380B (zh) 2022-06-24

Family

ID=73592292

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010917459.3A Active CN112037380B (zh) 2020-09-03 2020-09-03 车辆控制方法及装置、电子设备、存储介质和车辆

Country Status (2)

Country Link
CN (1) CN112037380B (zh)
WO (1) WO2022048119A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112037380B (zh) * 2020-09-03 2022-06-24 上海商汤临港智能科技有限公司 车辆控制方法及装置、电子设备、存储介质和车辆
CN114633720B (zh) * 2020-12-15 2023-08-18 博泰车联网科技(上海)股份有限公司 智能开启后备箱的方法、装置、存储介质及车辆
CN114655160A (zh) * 2021-01-28 2022-06-24 北京新能源汽车股份有限公司 一种控制车辆启动的方法及装置
CN113090134B (zh) * 2021-05-07 2022-07-12 广东金力变速科技股份有限公司 安全锁车的方法
CN113742688A (zh) * 2021-08-31 2021-12-03 广州朗国电子科技股份有限公司 一种解锁权限处理方法及系统
CN114312666A (zh) * 2021-11-22 2022-04-12 江铃汽车股份有限公司 基于人脸识别的车辆控制方法、装置、存储介质及设备
CN114333119A (zh) * 2021-12-31 2022-04-12 上海商汤临港智能科技有限公司 车辆解锁方法、管理方法、终端、系统、设备及存储介质
CN114619993B (zh) * 2022-03-16 2023-06-16 上海齐感电子信息科技有限公司 基于人脸识别汽车控制方法及其系统、设备及存储介质
CN114724122B (zh) * 2022-03-29 2023-10-17 北京卓视智通科技有限责任公司 一种目标追踪方法、装置、电子设备及存储介质
CN115324444A (zh) * 2022-08-15 2022-11-11 长城汽车股份有限公司 一种车盖控制方法、装置、车载终端及存储介质
CN115257630A (zh) * 2022-08-19 2022-11-01 中国第一汽车股份有限公司 车辆控制方法、装置和车辆
CN115393990A (zh) * 2022-08-30 2022-11-25 上汽通用五菱汽车股份有限公司 车辆解锁方法、装置、设备以及存储介质
CN115431919A (zh) * 2022-08-31 2022-12-06 中国第一汽车股份有限公司 一种控制车辆的方法、装置、电子设备及存储介质
CN115520201B (zh) * 2022-10-26 2023-04-07 深圳曦华科技有限公司 车辆主驾驶位功能动态响应方法及相关装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150009010A1 (en) * 2013-07-03 2015-01-08 Magna Electronics Inc. Vehicle vision system with driver detection
DE102013114394A1 (de) * 2013-12-18 2015-06-18 Huf Hülsbeck & Fürst Gmbh & Co. Kg Verfahren zur Authentifizierung eines Fahrers in einem Kraftfahrzeug
CN103693012A (zh) * 2013-12-23 2014-04-02 杭州电子科技大学 一种汽车防盗系统
CN106394492A (zh) * 2015-07-21 2017-02-15 百利得汽车主动安全系统(苏州)有限公司 车用动态人脸识别安全控制系统及其控制方法
CN105882605B (zh) * 2016-04-21 2019-06-07 东风汽车公司 一种基于人脸识别的车辆防盗系统及方法
CN109249895A (zh) * 2017-07-13 2019-01-22 上海荆虹电子科技有限公司 一种基于生物特征识别的汽车及管理控制系统和方法
CN108082124B (zh) * 2017-12-18 2020-05-08 奇瑞汽车股份有限公司 一种利用生物识别控制车辆的方法和装置
CN108327680A (zh) * 2018-01-04 2018-07-27 惠州市德赛西威汽车电子股份有限公司 一种车辆控制方法、装置及系统
CN110182172A (zh) * 2018-02-23 2019-08-30 福特环球技术公司 车辆驾驶员认证系统及方法
CN108846924A (zh) * 2018-05-31 2018-11-20 上海商汤智能科技有限公司 车辆及车门解锁控制方法、装置和车门解锁系统
CN108819900A (zh) * 2018-06-04 2018-11-16 上海商汤智能科技有限公司 车辆控制方法和系统、车载智能系统、电子设备、介质
CN109002757A (zh) * 2018-06-04 2018-12-14 上海商汤智能科技有限公司 驾驶管理方法和系统、车载智能系统、电子设备、介质
US10745018B2 (en) * 2018-09-19 2020-08-18 Byton Limited Hybrid user recognition systems for vehicle access and control
CN112037380B (zh) * 2020-09-03 2022-06-24 上海商汤临港智能科技有限公司 车辆控制方法及装置、电子设备、存储介质和车辆

Also Published As

Publication number Publication date
CN112037380A (zh) 2020-12-04
WO2022048119A1 (zh) 2022-03-10

Similar Documents

Publication Publication Date Title
CN112037380B (zh) 车辆控制方法及装置、电子设备、存储介质和车辆
WO2022041670A1 (zh) 车舱内的乘员检测方法及装置、电子设备和存储介质
JP5881596B2 (ja) 車載情報装置、通信端末、警告音出力制御装置、および警告音出力制御方法
US10479370B2 (en) System and method for authorizing a user to operate a vehicle
CN111332252A (zh) 车门解锁方法、装置、系统、电子设备和存储介质
US9842448B1 (en) Real-time vehicle feature customization at point of access
JP2015098218A (ja) 自動運転車
CN112026790B (zh) 车载机器人的控制方法及装置、车辆、电子设备和介质
WO2023273064A1 (zh) 对象说话检测方法及装置、电子设备和存储介质
CN112036314A (zh) 方向盘脱手检测方法及装置、电子设备和存储介质
CN105160898A (zh) 车辆限速方法及装置
CN104527544A (zh) 车辆操控方法及装置
CN112100445A (zh) 一种影像信息的处理方法及装置、电子设备和存储介质
JP2015128915A (ja) 後席乗員モニタシステム及び後席乗員モニタ方法
CN107139925A (zh) 车辆起步控制方法及装置、车辆、存储介质
CN112667084B (zh) 车载显示屏的控制方法及装置、电子设备和存储介质
CN111717083B (zh) 一种车辆交互方法和一种车辆
CN113488043A (zh) 乘员说话检测方法及装置、电子设备和存储介质
CN113807167A (zh) 车辆碰撞检测方法及装置、电子设备和存储介质
CN113486759A (zh) 危险动作的识别方法及装置、电子设备和存储介质
WO2023071175A1 (zh) 关联车内的人和物的方法及装置、电子设备和存储介质
CN114407630A (zh) 车门控制方法及装置、电子设备和存储介质
CN114332941A (zh) 基于乘车对象检测的报警提示方法、装置及电子设备
CN110543928A (zh) 检测无轨胶轮车载人人数的方法及装置
CN113911054A (zh) 车辆个性化配置方法及装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Room 01, 2 / F, No. 29 and 30, Lane 1775, Qiushan Road, Nicheng Town, Lingang New District, Shanghai pilot Free Trade Zone, 200232

Patentee after: Shanghai Lingang Jueying Intelligent Technology Co.,Ltd.

Address before: Room 01, 2 / F, No. 29 and 30, Lane 1775, Qiushan Road, Nicheng Town, Lingang New District, Shanghai pilot Free Trade Zone, 200232

Patentee before: Shanghai Shangtang Lingang Intelligent Technology Co.,Ltd.

PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Vehicle control methods and devices, electronic devices, storage media, and vehicles

Effective date of registration: 20230914

Granted publication date: 20220624

Pledgee: Bank of Shanghai Limited by Share Ltd. Pudong branch

Pledgor: Shanghai Lingang Jueying Intelligent Technology Co.,Ltd.

Registration number: Y2023310000549