CN113911061A - 车载儿童监护方法、装置、设备及可读存储介质 - Google Patents

车载儿童监护方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN113911061A
CN113911061A CN202111165302.0A CN202111165302A CN113911061A CN 113911061 A CN113911061 A CN 113911061A CN 202111165302 A CN202111165302 A CN 202111165302A CN 113911061 A CN113911061 A CN 113911061A
Authority
CN
China
Prior art keywords
child
vehicle
user
features
voiceprint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111165302.0A
Other languages
English (en)
Inventor
张新安
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lantu Automobile Technology Co Ltd
Original Assignee
Lantu Automobile Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lantu Automobile Technology Co Ltd filed Critical Lantu Automobile Technology Co Ltd
Priority to CN202111165302.0A priority Critical patent/CN113911061A/zh
Publication of CN113911061A publication Critical patent/CN113911061A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512—Passenger detection systems
    • B60R21/0153—Passenger detection systems using field detection presence sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512—Passenger detection systems
    • B60R21/01516—Passenger detection systems using force or pressure sensing means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512—Passenger detection systems
    • B60R21/0153—Passenger detection systems using field detection presence sensors
    • B60R21/01534—Passenger detection systems using field detection presence sensors using electromagneticwaves, e.g. infrared
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512—Passenger detection systems
    • B60R21/0153—Passenger detection systems using field detection presence sensors
    • B60R21/01538—Passenger detection systems using field detection presence sensors for image processing, e.g. cameras or sensor arrays
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/22—Interactive procedures; Man-machine interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Emergency Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Lock And Its Accessories (AREA)

Abstract

本发明提供一种车载儿童监护方法、装置、设备及可读存储介质，车载儿童监护方法包括：当车内存在用户时，则获取所述用户的面部特征与声纹特征；当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。通过本发明可以在儿童日常出行乘坐汽车时，通过摄像头与声纹同时智能识别到儿童用户后，智能控制打开儿童用户所在位置的儿童锁，以免成人用户遗忘打开儿童锁而危害到儿童乘车的安全性。并当车内用户包括儿童或成人打开车后窗与天窗时，对应输出警示语音或显示信息，以保障在行车过程中车后排儿童的乘车安全。以及打开多媒体与儿童进行娱乐性互动，分散儿童的精力，从而不会影响主驾用户的安全驾驶。

Description

车载儿童监护方法、装置、设备及可读存储介质
技术领域
本发明涉及智能驾驶领域，尤其涉及一种车载儿童监护方法、装置、设备及可读存储介质。
背景技术
随着国民生活水平的提高，汽车已经成为越来越大众化使用的交通工具，人们日常工作和休闲出行对汽车也更加依赖。但是现有技术中，虽然车企在汽车智能驾驶相关功能上不断开发，但是主要集中在针对驾驶的安全性如碰撞预警等、或驾驶的便利性如远程操控等、或驾驶的娱乐性如大数据推荐方面，其中适用场景与服务对象多针对于成人驾驶，而忽视了儿童乘车的使用场景。用户乘坐在车内时，其车内乘坐环境的安全性并不受人们关注。而车内环境的变化往往是悄然发生或隐蔽的，对于儿童乘车来说，若在无人看护的情况下，车内用户包括成人或者儿童，可能存在误触或者其他危害自身安全或者驾驶安全的行为，例如，汽车在行车状态且有儿童乘客的情况下忘记对车门置于儿童锁模式，从而出现在车辆行驶过程车门突然打开、儿童意外坠落的惨况。因此儿童在日常乘车出行方面还存在着很大的安全隐患。而且由于儿童自身精力以及路程的限制，儿童需要娱乐性互动以度过车程的时间，分散儿童自身精力，以及通过实时监测儿童自身状态以达到监护儿童当前行车过程中的安全的作用。
发明内容
本发明的主要目的在于提供一种车载儿童监护方法、装置、设备及可读存储介质，旨在解决现有技术中儿童乘车过程中安全性无法得到有效保障，以及基础互动娱乐需求无法满足的技术问题。
第一方面，本发明提供一种车载儿童监护方法，所述车载儿童监护方法包括以下步骤：
当车内存在用户时，则获取所述用户的面部特征与声纹特征；
当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。
可选的，在所述根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童的步骤之后包括：
当监测到车内用户对后排车窗与天窗的操作时，输出相关警示信息。
可选的，在所述根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童的步骤之后包括：
确定所述儿童的身份信息；
根据所述身份信息生成对应的个性化推荐。
可选的，在所述确定所述儿童的身份信息的步骤之后包括：
若当前日期与所述身份信息包含的生日日期一致，则输出生日祝福提示信息。
第二方面，本发明还提供一种车载儿童监护装置，所述车载儿童监护装置包括：
获取模块，用于当车内存在用户时，则获取所述用户的面部特征与声纹特征；
控制模块，用于当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。
可选的，所述控制模块，还用于：
当监测到车内用户对后排车窗与天窗的操作时，输出相关警示信息。
可选的，所述控制模块，还用于：
确定所述儿童的身份信息；
根据所述身份信息生成对应的个性化推荐。
可选的，所述控制模块，还用于：
若当前日期与所述身份信息包含的生日日期一致，则输出生日祝福提示信息。
第三方面，本发明还提供一种车载儿童监护设备，所述车载儿童监护设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的车载儿童监护程序，其中所述车载儿童监护程序被所述处理器执行时，实现如上述所述的车载儿童监护方法的步骤。
第四方面，本发明还提供一种可读存储介质，其特征在于，所述可读存储介质上存储有车载儿童监护程序，其中所述车载儿童监护程序被处理器执行时，实现如上述所述的车载儿童监护方法的步骤。
本发明中，当车内存在用户时，则获取所述用户的面部特征与声纹特征；当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。通过本发明可以在儿童日常出行乘坐汽车时，在通过摄像头与声纹同时识别到车内存在儿童用户后，并且可以通过声纹特征与面部特征进行空间同步，得到所识别的每个儿童用户的位置后，通过电子控制单元智能控制打开每个儿童用户所在位置的儿童锁，以免成人用户遗忘打开儿童锁而危害到儿童乘车的安全性。并当车内用户包括儿童或成人打开车后窗与天窗时，对应输出警示语音或显示信息，以保障在行车过程中车后排儿童的乘车安全。以及打开多媒体与儿童进行娱乐性互动，分散儿童的精力，并且通过对每次儿童互动行为进行记录上传到云端，以便给予儿每个童用户以对应的个性化推荐，进而也不会影响主驾用户的安全驾驶。
附图说明
图1为本发明实施例方案中涉及的车载儿童监护设备的硬件结构示意图；
图2为本发明车载儿童监护方法一实施例的流程示意图；
图3为本发明车载儿童监护装置一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
第一方面，本发明实施例提供一种车载儿童监护设备。
参照图1，图1为本发明实施例方案中涉及的车载儿童监护设备的硬件结构示意图。本发明实施例中，车载儿童监护设备可以包括处理器1001(例如中央处理器CentralProcessing Unit，CPU)，通信总线1002，用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信；用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)；网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真WIreless-FIdelity，WI-FI接口)；存储器1005可以是高速随机存取存储器(random access memory，RAM)，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器，存储器1005可选的还可以是独立于前述处理器1001的存储装置。本领域技术人员可以理解，图1中示出的硬件结构并不构成对本发明的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
继续参照图1，图1中作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及车载儿童监护程序。其中，处理器1001可以调用存储器1005中存储的车载儿童监护程序，并执行本发明实施例提供的车载儿童监护方法。
第二方面，本发明实施例提供了一种车载儿童监护方法。
参照图2，图2为本发明车载儿童监护方法一实施例的流程示意图。
在本发明车载儿童监护方法一实施例中，车载儿童监护方法包括：
步骤S10，当车内存在用户时，则获取所述用户的面部特征与声纹特征；
本实施例中，在监测到车辆从关闭到开启状态的切换时，通过安装在车内的摄像头、或者红外探测装置、或者重力感应装置、或者毫米波雷达，来监测车内是否存在用户。当使用摄像头来进行监测时，可以通过图像识别监测一下生命体征，从而判断车内是否存在用户；当使用红外探测装置时，可以通过红外监测热源来识别生命体征，从而判断车内是否存在用户；当使用重力感应装置时，可以通过座椅内的重力感应装置来判断车内是否存在用户；当使用毫米波雷达时，可以通过用雷达对车内生命体征的心跳、脉搏等进行扫描分析判断车内是否存在用户。
当监测到车内存在用户时，可以通过多个安装位的摄像头以同一采样频率获取车内后排的影像，并将多个摄像头所获取的图片进行畸变矫正后，在空间坐标系上进行位置同步，将所有影像合成成车内后排的全景影像，将所合成的全景影像进行二值化处理得到灰度图，从所的的灰度图中分割人脸特征的部分，得到车后排所有用户的面部特征。
同时可以根据多个安装位的收音装置以同一采样频率采集车内的音频片段的数据，将所采集的音频数据传送给声纹提取单元，声纹提取单元将音频数据中所包含的所有音频信号的频率、幅度相位、空间位置等特征都提取出来，并且根据将多个收音装置所获得所有声纹特征进行比对，并且通过设置阈值过滤掉电子播放设备的声纹特征，得到最终的所有用户的声纹特征，并通过面部特征里所包含的空间位置与声纹特征例所包含的空间位置同步，将所获得的面部特征与声纹特征与车后排所有用户一一对应，得到车后排所有用户的面部特征与声纹特征。
步骤S20，当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。
本实施例中，因为儿童与成人的面部比例结构不同，可以在图像上所识别的面部特征上提取多个坐标点作为形状特征，以显示该面部特征对应用户的面部比例结构。基于多个图像样本中的面部的形状特征对面部识别算法进行训练，以不同图像样本对应的年龄阶段作为标签，根据面部识别算法对所输入的图像样本中的面部特征进行识别，得到图像样本中的面部特征对应的年龄，根据算法所得到的年龄对应的标签，与图像样本中的面部特征实际年龄对应的标签进行对比，通过训练得到拟合度以及准确度高于预设阈值的面部识别算法模型。将所获得的所有用户的面部特征输入到训练完成的面部识别算法模型中，得到所获得的所有用户的面部特征的年龄对应的标签的不同拟合度，根据所述标签可知每个用户的面部特征是否为儿童特征。
因为儿童与成人的声音中的基频(即声带振动的频率)与发同一个音的共振峰频率(即口腔、鼻腔的共振频率)不同，一般儿童声音的基频以及发同一个音时的共振峰频率高于成人，所以可以根据收音装置接收的音频数据，以及声纹提取单元从音频数据提取到的声纹特征中的频率特征，与数据库中的频率特征进行对比，识别频率特征匹配度超过阈值的声纹样本所对应的年龄，从而可以根据声纹特征判别所获得的每个用户的声纹特征是否为儿童特征。
根据所识别到的同一用户的面部与声纹特征综合判断均为儿童特征，则判断该用户为儿童用户，同时使用声纹与面部特征两个尺度来双重认证，其中，摄像头的视觉算法目前识别准确性可以达到一定的准确度，声纹的识别也能达到一定准确度，两者结合识别可以进一步提高判断儿童特征的准确性。当根据用户的面部特征与声纹特征确定存在至少一个用户为儿童时，则根据所获得的面部与声纹特征确定儿童用户在车内的空间位置时，自动关联打开所述儿童所在位置的儿童锁，从而保障儿童的安全，同时自动关联比以往人为操作更加便利。
进一步，一实施例中，在所述根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童的步骤之后包括：
当监测到车内用户对后排车窗与天窗的操作时，输出相关警示信息。
本实施例中，当根据所采集的车内用户的面部特征与声纹特征确定存在至少一个用户为儿童时，需要保护车内儿童的安全，因此车内用户包括儿童与成人对后排的左右车窗与天窗有开启操作时，对儿童自身安全是有一定危险的，所以当监测到车内用户包括儿童与成人对后排的左右车窗与天窗有开启操作时，必须使用警示语音或者警示图标对相应的操作人以及整车用户进行提示，以进一步在行车状态下保障儿童乘车安全。
进一步，一实施例中，在所述根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童的步骤之后包括：
确定所述儿童的身份信息；
根据所述身份信息生成对应的个性化推荐。
本实施例中，当根据车内用户的面部特征与声纹特征确定用户为儿童时，需要根据儿童用户的面部特征与声纹特征在车载云端创建身份账号，每次在出行上车后监测到车内的面部特征与声纹特征为儿童用户的特征时，将此面部特征与声纹特征，与车载云端所有儿童用户的身份账号所保存的面部特征与声纹特征进行相似度对比，如果存在一个儿童用户的两者相似度均大于预设的阈值，那找到车载云端所保存的此儿童用户的身份账号对应的数据信息，结合所采集的对应的儿童音频数据识别儿童需求，来确定此儿童用户的频次最高的多媒体互动数据，从而给儿童用户生成对应的个性化推荐；如果不存在儿童用户的两者相似度大于预设的阈值，则先将所监测到的车内不满足相似度阈值的儿童用户的面部特征与声纹特征在车载云端创建新的身份账号，此时只需要根据所采集的对应的儿童音频数据识别儿童需求，从而直接进行语音互动，根据语音互动的结果给儿童用户生成对应的个性化推荐，同时根据儿童用户对应的年龄拦截不良信息。
进一步，一实施例中，在所述确定所述儿童的身份信息的步骤之后包括：
若当前日期与所述身份信息包含的生日日期一致，则输出生日祝福提示信息。
本实施例中，每次创建儿童用户对应的身份账号后，也同时根据其他用户对儿童用户的信息录入来进行相应响应，包括每个身份账号对应的儿童用户的生日信息，其中，每个儿童用户对应一个身份信息，每个身份信息对应一个生日日期。当根据车内用户的面部特征与声纹特征确定用户为儿童时，通过将此儿童用户的面部特征与声纹特征与车载云端所有的身份账号对应的面部特征与声纹特征进行相似度对比，对比后满足相似度大于预设阈值的，则表示当前所识别到的儿童用户在车载云端具有对应的身份账号，则直接读取此儿童用户对应的身份账号的数据信息，包括生日日期，判断当前日期是否与此儿童用户的生日日期一致，若判断一致，则开启对应的生日祝福的语音提示及多媒体语音推荐。
本实施例中，当车内存在用户时，则获取所述用户的面部特征与声纹特征；当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。通过本发明可以在儿童日常出行乘坐汽车时，在通过摄像头与声纹同时识别到车内存在儿童用户后，并且可以通过声纹特征与面部特征进行空间同步，得到所识别的每个儿童用户的位置后，通过电子控制单元智能控制打开每个儿童用户所在位置的儿童锁，以免成人用户遗忘打开儿童锁而危害到儿童乘车的安全性。并当车内用户包括儿童或成人打开车后窗与天窗时，对应输出警示语音或显示信息，以保障在行车过程中车后排儿童的乘车安全。以及打开多媒体与儿童进行娱乐性互动，分散儿童的精力，并且通过对每次儿童互动行为进行记录上传到云端，以便给予儿每个童用户以对应的个性化推荐，进而也不会影响主驾用户的安全驾驶。
第三方面，本发明实施例还提供一种车载儿童监护装置。
参照图3，车载儿童监护装置一实施例的功能模块示意图。
本实施例中，所述车载儿童监护装置包括：
获取模块10，用于当车内存在用户时，则获取所述用户的面部特征与声纹特征；
本实施例中，获取模块10，用于在监测到车辆从关闭到开启状态的切换时，通过安装在车内的摄像头、或者红外探测装置、或者重力感应装置、或者毫米波雷达，可以监测到车内是否存在用户。当使用摄像头来进行监测时，可以通过图像识别监测一下生命体征，从而判断车内是否存在用户；当使用红外探测装置时，可以通过红外监测热源来识别生命体征，从而判断车内是否存在用户；当使用重力感应装置时，可以通过座椅内的重力感应装置来判断车内是否存在用户；当使用毫米波雷达时，可以通过用雷达对车内生命体征的心跳、脉搏等进行扫描分析判断车内是否存在用户。
当监测到车内存在用户时，可以通过多个安装位的摄像头以同一采样频率获取车内后排的影像，并将多个摄像头所获取的图片进行畸变矫正后，在空间坐标系上进行位置同步，将所有影像合成成车内后排的全景影像，将所合成的全景影像进行二值化处理得到灰度图，从所的的灰度图中分割人脸特征的部分，得到车后排所有用户的面部特征。
同时可以根据多个安装位的收音装置以同一采样频率采集车内的音频片段的数据，将所采集的音频数据传送给声纹提取单元，声纹提取单元将音频数据中所包含的所有音频信号的频率、幅度相位、空间位置等特征都提取出来，并且根据将多个收音装置所获得所有声纹特征进行比对，并且通过设置阈值过滤掉电子播放设备的声纹特征，得到最终的所有用户的声纹特征，并通过面部特征里所包含的空间位置与声纹特征例所包含的空间位置同步，将所获得的面部特征与声纹特征与车后排所有用户一一对应，得到车后排所有用户的面部特征与声纹特征。
控制模块20，用于当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。
本实施例中，因为儿童与成人的面部比例结构不同，可以在图像上所识别的面部特征上提取多个坐标点作为形状特征，以显示该面部特征对应用户的面部比例结构。基于多个图像样本中的面部的形状特征对面部识别算法进行训练，以不同图像样本对应的年龄阶段作为标签，根据面部识别算法对所输入的图像样本中的面部特征进行识别，得到图像样本中的面部特征对应的年龄，根据算法所得到的年龄对应的标签，与图像样本中的面部特征实际年龄对应的标签进行对比，通过训练得到拟合度以及准确度高于预设阈值的面部识别算法模型。将所获得的所有用户的面部特征输入到训练完成的面部识别算法模型中，得到所获得的所有用户的面部特征的年龄对应的标签的不同拟合度，根据所述标签可知每个用户的面部特征是否为儿童特征。
因为儿童与成人的声音中的基频(即声带振动的频率)与发同一个音的共振峰频率(即口腔、鼻腔的共振频率)不同，一般儿童声音的基频以及发同一个音时的共振峰频率高于成人，所以可以根据收音装置接收的音频数据，以及声纹提取单元从音频数据提取到的声纹特征中的频率特征，与数据库中的频率特征进行对比，识别频率特征匹配度超过阈值的声纹样本所对应的年龄，从而可以根据声纹特征判别所获得的每个用户的声纹特征是否为儿童特征。
当控制模块20，根据所识别到的同一用户的面部与声纹特征综合判断均为儿童特征，则判断该用户为儿童用户，同时使用声纹与面部特征两个尺度来双重认证，其中，摄像头的视觉算法目前识别准确性可以达到一定的准确度，声纹的识别也能达到一定准确度，两者结合识别可以进一步提高判断儿童特征的准确性。当根据用户的面部特征与声纹特征确定存在至少一个用户为儿童时，则根据所获得的面部与声纹特征确定儿童用户在车内的空间位置时，自动关联打开所述儿童所在位置的儿童锁，从而保障儿童的安全，同时自动关联比以往人为操作更加便利。
进一步，一实施例中，所述控制模块20，还用于：
当监测到车内用户对后排车窗与天窗的操作时，输出相关警示信息。
本实施例中，当根据所采集的车内用户的面部特征与声纹特征确定存在至少一个用户为儿童时，不止需要关联打开儿童锁，也需要保护车内儿童的安全，因此车内用户包括儿童与成人对后排的左右车窗与天窗有开启操作时，对儿童自身安全是有一定危险的，所以控制模块20，还用于当监测到车内用户包括儿童与成人对后排的左右车窗与天窗有开启操作时，必须使用警示语音或者警示图标对相应的操作人以及整车用户进行提示，以进一步在行车状态下保障儿童乘车安全。
进一步，一实施例中，所述控制模块20，还用于：
确定所述儿童的身份信息；
根据所述身份信息生成对应的个性化推荐。
本实施例中，控制模块20，用于当根据车内用户的面部特征与声纹特征确定用户为儿童时，需要根据儿童用户的面部特征与声纹特征在车载云端创建身份账号，每次在出行上车后监测到车内的面部特征与声纹特征为儿童用户的特征时，将此面部特征与声纹特征，与车载云端所有儿童用户的身份账号所保存的面部特征与声纹特征进行相似度对比，如果存在一个儿童用户的两者相似度均大于预设的阈值，那找到车载云端所保存的此儿童用户的身份账号对应的数据信息，结合所采集的对应的儿童音频数据识别儿童需求，来确定此儿童用户的频次最高的多媒体互动数据，从而给儿童用户生成对应的个性化推荐；如果不存在儿童用户的两者相似度大于预设的阈值，则先将所监测到的车内不满足相似度阈值的儿童用户的面部特征与声纹特征在车载云端创建新的身份账号，此时只需要根据所采集的对应的儿童音频数据识别儿童需求，从而直接进行语音互动，根据语音互动的结果给儿童用户生成对应的个性化推荐，同时根据儿童用户对应的年龄拦截不良信息。
进一步，一实施例中，所述控制模块20，还用于：
若当前日期与所述身份信息包含的生日日期一致，则输出生日祝福提示信息。
本实施例中，每次创建儿童用户对应的身份账号后，也同时根据其他用户对儿童用户的信息录入来进行相应响应，包括每个身份账号对应的儿童用户的生日信息，其中，每个儿童用户对应一个身份信息，每个身份信息对应一个生日日期。当根据车内用户的面部特征与声纹特征确定用户为儿童时，通过将此儿童用户的面部特征与声纹特征与车载云端所有的身份账号对应的面部特征与声纹特征进行相似度对比，对比后满足相似度大于预设阈值的，则表示当前所识别到的儿童用户在车载云端具有对应的身份账号，则直接读取此儿童用户对应的身份账号的数据信息，包括生日日期，判断当前日期是否与此儿童用户的生日日期一致，若判断一致，则控制模块20，还用于自动开启对应的生日祝福的语音提示及多媒体语音推荐。
其中，上述车载儿童监护装置中各个模块的功能实现与上述车载儿童监护方法实施例中各步骤相对应，其功能和实现过程在此处不再一一赘述。
第四方面，本发明实施例还提供一种可读存储介质。
本发明可读存储介质上存储有车载儿童监护程序，其中所述车载儿童监护程序被处理器执行时，实现如上述的车载儿童监护方法的步骤。
其中，车载儿童监护程序被执行时所实现的方法可参照本发明车载儿童监护方法的各个实施例，此处不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种车载儿童监护方法，其特征在于，所述车载儿童监护方法包括：
当车内存在用户时，则获取所述用户的面部特征与声纹特征；
当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。
2.如权利要求1所述的车载儿童监护方法，其特征在于，在所述根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童的步骤之后包括：
当监测到车内用户对后排车窗与天窗的操作时，输出相关警示信息。
3.如权利要求1所述的车载儿童监护方法，其特征在于，在所述根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童的步骤之后包括：
确定所述儿童的身份信息；
根据所述身份信息生成对应的个性化推荐。
4.如权利要求3所述的车载儿童监护方法，其特征在于，在所述确定所述儿童的身份信息的步骤之后包括：
若当前日期与所述身份信息包含的生日日期一致，则输出生日祝福提示信息。
5.一种车载儿童监护装置，其特征在于，所述车载儿童监护装置包括：
获取模块，用于当车内存在用户时，则获取所述用户的面部特征与声纹特征；
控制模块，用于当根据所述用户的面部特征与声纹特征确定存在至少一个用户为儿童时，打开所述儿童所在位置的儿童锁。
6.如权利要求5所述的车载儿童监护装置，其特征在于，所述控制模块，还用于：
当监测到车内用户对后排车窗与天窗的操作时，输出相关警示信息。
7.如权利要求5所述的车载儿童监护装置，其特征在于，所述控制模块，还用于：
确定所述儿童的身份信息；
根据所述身份信息生成对应的个性化推荐。
8.如权利要求5所述的车载儿童监护装置，其特征在于，所述控制模块，还用于：
若当前日期与所述身份信息包含的生日日期一致，则输出生日祝福提示信息。
9.一种车载儿童监护设备，其特征在于，所述车载儿童监护设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的车载儿童监护程序，其中所述车载儿童监护程序被所述处理器执行时，实现如权利要求1至4中任一项所述的车载儿童监护方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储有车载儿童监护程序，其中所述车载儿童监护程序被处理器执行时，实现如权利要求1至4中任一项所述的车载儿童监护方法的步骤。
CN202111165302.0A 2021-09-30 2021-09-30 车载儿童监护方法、装置、设备及可读存储介质 Pending CN113911061A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111165302.0A CN113911061A (zh) 2021-09-30 2021-09-30 车载儿童监护方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111165302.0A CN113911061A (zh) 2021-09-30 2021-09-30 车载儿童监护方法、装置、设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN113911061A true CN113911061A (zh) 2022-01-11

Family

ID=79237926

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111165302.0A Pending CN113911061A (zh) 2021-09-30 2021-09-30 车载儿童监护方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN113911061A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5732375A (en) * 1995-12-01 1998-03-24 Delco Electronics Corp. Method of inhibiting or allowing airbag deployment
CN104660679A (zh) * 2015-01-21 2015-05-27 上海修源网络科技有限公司 一种带有语音提示功能的汽车操作系统及其控制方法
CN107415882A (zh) * 2017-08-10 2017-12-01 上海博泰悦臻网络技术服务有限公司 一种儿童锁智能控制系统和方法
CN110490997A (zh) * 2018-05-15 2019-11-22 上海博泰悦臻网络技术服务有限公司 车辆及其基于人脸识别的儿童锁控制方法
CN110481504A (zh) * 2019-07-10 2019-11-22 深圳市汇顶科技股份有限公司 车辆控制方法及系统、指纹芯片
CN112124242A (zh) * 2020-09-25 2020-12-25 长城汽车股份有限公司 儿童乘车安全控制方法、装置、存储介质以及车辆

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5732375A (en) * 1995-12-01 1998-03-24 Delco Electronics Corp. Method of inhibiting or allowing airbag deployment
CN104660679A (zh) * 2015-01-21 2015-05-27 上海修源网络科技有限公司 一种带有语音提示功能的汽车操作系统及其控制方法
CN107415882A (zh) * 2017-08-10 2017-12-01 上海博泰悦臻网络技术服务有限公司 一种儿童锁智能控制系统和方法
CN110490997A (zh) * 2018-05-15 2019-11-22 上海博泰悦臻网络技术服务有限公司 车辆及其基于人脸识别的儿童锁控制方法
CN110481504A (zh) * 2019-07-10 2019-11-22 深圳市汇顶科技股份有限公司 车辆控制方法及系统、指纹芯片
CN112124242A (zh) * 2020-09-25 2020-12-25 长城汽车股份有限公司 儿童乘车安全控制方法、装置、存储介质以及车辆

Similar Documents

Publication Publication Date Title
US11498573B2 (en) Pacification method, apparatus, and system based on emotion recognition, computer device and computer readable storage medium
US20170327082A1 (en) End-to-end accommodation functionality for passengers of fully autonomous shared or taxi-service vehicles
US9573541B2 (en) Systems, methods, and apparatus for identifying an occupant of a vehicle
US9552830B2 (en) Vehicle language setting system
CN112037380A (zh) 车辆控制方法及装置、电子设备、存储介质和车辆
CN111717083B (zh) 一种车辆交互方法和一种车辆
CN110103878A (zh) 用于控制无人车的方法和装置
CN111415347A (zh) 遗留对象检测方法和装置及交通工具
CN112744174B (zh) 车辆碰撞监测方法、装置、设备及计算机可读存储介质
CN112046428A (zh) 一种车辆、调整驾驶座椅和后视镜的控制方法及装置
CN111137212A (zh) 后视镜装置及车辆
CN113815562A (zh) 基于全景摄像头的车辆解锁方法、设备及存储介质
CN114332941A (zh) 基于乘车对象检测的报警提示方法、装置及电子设备
CN116567895A (zh) 车载氛围灯控制方法、装置、电子设备及车辆
CN110509931A (zh) 语音问答的信息展示方法、装置和系统
CN110712606B (zh) 车内生命体识别方法、装置、设备及存储介质
CN113911061A (zh) 车载儿童监护方法、装置、设备及可读存储介质
CN111731323A (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111902864A (zh) 用于运行机动车的声音输出装置的方法、语音分析与控制装置、机动车和机动车外部的服务器装置
CN113573938A (zh) 用于在车辆的语言对话系统中提供以手语的语言对话的方法
CN115101070A (zh) 车辆控制方法、装置、车辆及电子设备
CN114170559A (zh) 车载设备的控制方法、装置和车辆
KR20200076972A (ko) 차량의 도어를 개폐하는 장치, 방법 및 컴퓨터 프로그램
CN115497478A (zh) 一种车辆内外交流的方法、装置和可读存储介质
CN113911054A (zh) 车辆个性化配置方法及装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20220111