CN111516642B - 一种基于人体行为分析的新能源汽车唤醒系统 - Google Patents

一种基于人体行为分析的新能源汽车唤醒系统 Download PDF

Info

Publication number
CN111516642B
CN111516642B CN202010363460.6A CN202010363460A CN111516642B CN 111516642 B CN111516642 B CN 111516642B CN 202010363460 A CN202010363460 A CN 202010363460A CN 111516642 B CN111516642 B CN 111516642B
Authority
CN
China
Prior art keywords
behavior
data
vehicle
human
human body
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010363460.6A
Other languages
English (en)
Other versions
CN111516642A (zh
Inventor
方文豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yueqing taiboheng Electronic Technology Co., Ltd
Original Assignee
Yueqing Taiboheng Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yueqing Taiboheng Electronic Technology Co Ltd filed Critical Yueqing Taiboheng Electronic Technology Co Ltd
Priority to CN202010363460.6A priority Critical patent/CN111516642B/zh
Priority to CN202110674443.9A priority patent/CN113264009B/zh
Publication of CN111516642A publication Critical patent/CN111516642A/zh
Application granted granted Critical
Publication of CN111516642B publication Critical patent/CN111516642B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20—Means to switch the anti-theft system on or off
    • B60R25/25—Means to switch the anti-theft system on or off using biometry
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60H—ARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00—Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642—Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • B60H1/00735—Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/10—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device
    • B60R25/102—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device a signal being sent to a remote location, e.g. a radio signal being transmitted to a police station, a security company or the owner
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00—Brake-action initiating means
    • B60T7/12—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00—Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/02—Active or adaptive cruise control system; Distance control
    • B60T2201/022—Collision avoidance systems

Abstract

本发明公开了一种基于人体行为分析的新能源汽车唤醒系统，该汽车唤醒系统包括整车控制器、唤醒系统，所述唤醒系统包括人体行为采集系统、人体行为分类系统、自主学习系统，所述唤醒系统与整车控制器连接，唤醒系统与云端数据库连接，所述人体行为采集系统对人体的面部变化以及肢体动作进行采集，所述人体行为分类系统将面部变化与肢体动作相结合并根据云端数据库进行分类，所述自主学习系统对未出现过的人体行为以及所采取的行车动作进行保存并上传云端数据库，本发明科学合理，使用安全方便，唤醒系统根据人体行为向整车控制器中发送不同的信号，当人体行为过于激烈时，唤醒系统向整车控制器中发送制动信号，从而避免发生交通事故。

Description

一种基于人体行为分析的新能源汽车唤醒系统
技术领域
本发明涉及新能源汽车技术领域，具体是一种基于人体行为分析的新能源汽车唤醒系统。
背景技术
新能源汽车是指采用非常规的车用燃料作为动力来源(或使用常规的车用燃料、采用新型车载动力装置)，综合车辆的动力控制和驱动方面的先进技术，形成的技术原理先进、具有新技术、新结构的汽车。
新能源汽车包括四大类型混合动力电动汽车(HEV)、纯电动汽车(BEV，包括太阳能汽车)、燃料电池电动汽车(FCEV)、其他新能源(如超级电容器、飞轮等高效储能器)汽车等。
本新能源汽车唤醒系统与新能源汽车中的整车控制器连接，本新能源汽车唤醒系统通过行为采集器对车外以及车内的人体行为进行数据采集并进行数据分析，通过数据分析实现新能源汽车的无钥匙开门、面部识别车辆启动，以及对车辆行驶中过激的人体行为进行监测并进行车辆制动，防止因过激行为导致的失误操作而导致交通事故的发生。
发明内容
本发明的目的在于提供一种基于人体行为分析的新能源汽车唤醒系统，以解决现有技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种基于人体行为分析的新能源汽车唤醒系统，该汽车唤醒系统包括整车控制器、唤醒系统，所述唤醒系统包括人体行为采集系统、人体行为分类系统、自主学习系统，所述唤醒系统与整车控制器连接，唤醒系统与云端数据库连接，所述人体行为采集系统对人体的面部表情以及肢体动作进行采集，所述人体行为分类系统将面部表情与肢体动作相结合并根据云端数据库进行分类，所述自主学习系统对未出现过的人体行为以及所采取的行车动作进行保存并上传云端数据库，所述唤醒系统根据不同的人体行为向整车控制器中发送不同的控制信号。整车控制器为电动汽车的大脑，唤醒系统与整车控制器连接，人体行为采集系统对人在车外以及车内的行为进行数据采集，人体行为分类系统将人体行为采集系统采集的数据与云端数据库中的人体行为数据进行对比，并根据这些行为产生的车辆数据变化进行分类，自主学习系统对未出现过的人体行为以及云端数据库中没有的行为数据进行自主学习并保存到云端数据库中，唤醒系统中的人体行为分类系统根据人体行为采集系统采集的行为数据向整车控制器中发送不同的信号，当人体行为过于激烈或长时间没有行为动作且与前车距离不断缩短时，唤醒系统向整车控制器中发送制动信号使车速降低，从而避免发生交通事故。
作为优选技术方案，所述人体行为采集系统包括若干组行为采集器、三维组建模块，若干组所述行为采集器对人体的行为动作以及面部变化进行收集，行为采集器将采集的数据传输到三维组建模块中，所述三维组建模块对数据进行分析、计算并重建出人体三维模型；所述人体行为分类系统与云端数据库连接，人体行为分类系统与人体行为采集系统连接，人体行为分类系统包括车辆制动模块、车载空调调节模块，人体行为分类系统根据云端数据库中的数据对人体行为采集系统采集的数据进行分类，所述车辆制动模块与整车控制器连接，所述车载空调调节模块与整车控制器连接；所述自主学习系统分别与人体行为采集系统、人体行为分类系统连接，自主学习系统根据人体行为采集系统采集的数据以及行车行为将数据传输到人体行为分类系统中。行为采集器对人体行为数据进行采集，包括对人体的图像采集和与人体之间的距离数据采集，三维组建模块对人体图像进行识别、分割和三维重建，并生成人体三维模型，三维组建模块将行为采集器采集到的与人体之间的距离应用到重建的模型中，使三维模型更加真实，且三维组建模块根据行为采集器实时传输的数据对三维模型进行实时的调整，使三维模型根据人体的变化而变化，车辆制动模块和车载空调调节模块为人体行为分类系统的两个模块，车辆制动模块向整车控制器中发送车辆制动信号，使车辆速度降低或者紧急刹车，车载空调调节模块向整车控制器中发送空调调节信号，整车控制器根据空调调节信号对空调的温度进行调高或调低。
作为优选技术方案，若干组所述行为采集器包括外部行为采集器；所述外部行为采集器对人体在车外的行为进行数据采集以及对车辆行驶中与两侧的车辆距离进行数据采集，外部行为采集器将人体的鼻尖以及手腕作为数据采集点，分别建立数据集合B＝{X，Y，Z|(X1，Y1，Z1)，(X2，Y2，Z2)，…，(XN，YN，ZN)}、S＝{x，y，z|(x1，y1，z1)，(x2，y2，z2)，…，(xn，yn，zn)}，其中，集合B代表鼻尖位置的数据集合，X代表鼻尖相对于外部行为采集器的左右位置、Y代表鼻尖相对于外部行为采集器的前后位置、Z代表鼻尖相对于外部行为采集器的上下位置；集合S代表手腕位置的数据集合，x代表手腕相对于外部行为采集器的左右位置、y代表手腕相对于外部行为采集器的前后位置、z代表手腕相对于外部行为采集器的上下位置。
作为优选技术方案，所述外部行为采集器将采集的集合数据传输到三维组建模块中，所述三维组建模块对手腕与鼻尖之间的向量距离进行计算，其手腕与鼻尖之间的向量距离
Figure BDA0002475782010000041
Figure BDA0002475782010000042
所述外部行为采集器对人体与车之间的距离进行测量，其测量值为d，当外部行为采集器采集到向量距离L与测量值d均满足设定值时，唤醒系统控制整车控制器将车门打开。
作为优选技术方案，若干组所述行为采集器还包括内部行为采集器；所述内部行为采集器对人体在车内的面部变化以及肢体行为进行数据采集，所述内部行为采集器分为面部行为采集器和肢体行为采集器，所述面部行为采集器对人脸进行实时数据采集，将人脸中的鼻尖、两侧脸颊、两侧耳垂、下颚作为数据采集点，分别标定为B、L1、L2、E1、E2、I，面部行为采集器对人脸进行图像采集以及与各个采集点之间的距离进行实时数据采集，面部行为采集器与各个采集点之间的距离依次为AB、AL1、AL2、AE1、AE2、AI，其中，A代表面部行为采集器的位置点，面部行为采集器将人脸图像以及与采集点之间的距离传输到三维组建模块中，所述三维组建模块对人脸图像进行识别、分割和三维重组并形成人脸三维模型，三维组建模块将各个采集点的距离数据整合到人脸三维模型中，三维组建模块根据实时变化的数据对人脸三维模型进行实时调整。内部行为采集器对人脸图像进行数据采集，并对各个采集点的数据进行采集，三维组建模块将采集点的数据与人脸图像进行结合，使形成的人脸三维模型更具真实性，且三维组建模型根据人脸图像的变化以及采集点数据的变化对人脸三维模型进行调整，使人脸三维模型与真实的人体变化向匹配，使人体行为分类系统可以更加准确的对人体行为进行分分类处理。
作为优选技术方案，所述肢体行为采集器对人体的肢体动作进行数据采集，肢体行为采集器对手臂的动作进行数据采集，肢体行为采集器对肢体动作进行实时的图像数据采集，并将采集的图像数据传输到三维组建模块中，三维组建模块对图像数据进行分析、分割和三维重组，并将重组后的肢体三维模型与人脸三维模型相结合，形成一个完整的人体行为三维模型。肢体行为采集器对人的上半身的肢体动作进行数据采集，肢体行为采集器将手臂作为数据采集点，通过对手臂动作的数据采集，使人体行为分类系统对人体行为的动作分析及分类更加准确，三维组建模块将肢体三维模型与人脸三维模型相结合，形成一个人体上半身的三维模型，通过对人体上半身的三维建模，使人体行为分类系统可以对人体上半身进行全面的数据对比，使唤醒系统发送的唤醒信号更加的准确无误，避免发送错误的唤醒信号，导致行车体验感降低。
作为优选技术方案，所述人体行为分类系统对肢体三维模型和人脸三维模型结合后的模型进行行为分析，人体行为分类系统根据云端数据库中保存的数据对模型的行为进行分类处理并保存到车辆制动模块中，所述车辆制动模块与整车控制器电性连接，当模型中的人体行为与车辆制动模块中保存的行为数据向符合时，所述车辆制动模块向整车控制器中发送车辆制动信号，使车辆的行驶速度降低。
作为优选技术方案，所述车辆制动模块与云端数据库连接，车辆制动模块对云端数据库中导致车祸发生的人体行为进行收集和保存，所述外部行为采集器对两侧车辆以及前方车辆的距离进行监测，所述面部行为采集器对采集点的数据进行采集，所述肢体行为采集器对肢体进行数据采集，当面部行为采集器与肢体行为采集器采集的数据保持不变，且外部行为采集器采集的与前车的距离一直缩短时，车辆制动模块将车辆制动信号传输到整车控制器中。
作为优选技术方案，所述车载空调调节模块与整车控制器进行电性连接，当肢体行为采集器采集到手臂在面部来回摆动，且面部行为采集器采集到面部数据没有发生变化时，车载空调调节器根据内部保存的数据与人体三维模型进行数据对比，当车载空调调节模块向整车控制器中发送信号，整车控制器将空调的温度往下调节。
作为优选技术方案，当人体行为分类系统对人体行为采集系统采集的数据无法进行分类时，所述自主学习系统将人体行为采集系统采集的面部行为数据以及肢体行为数据进行保存，同时将人体行为采集系统采集的数据传输到云端数据库中。自主学习系统对未出现的人体行为以及行车行为数据进行保存，并传输到云端数据库中，人体行为分类系统先与自主学习系统中的行为数据进行对比，当人体行为分类系统匹配到行为数据时，人体行为分类系统向整车控制器中发送控制信号，整车控制器对车辆的行驶进行控制。
与现有技术相比，本发明的有益效果是：
1、当唤醒系统通过无线连接模块与车主手机或其他移动设备成功进行密钥配对后，外部行为采集器采集到向量距离L与测量值d均满足设定值时，唤醒系统控制整车控制器将车门打开，其设定值为车辆行驶人员自行设定的数值，当密钥配对不成功且外部行为采集器采集到向量距离L与测量值d均满足设定值时，唤醒系统通过无线连接模块向车主手机或其他移动设备中发送安全警告的消息，可以防止车辆被偷窃。
2、当人进入车辆内部时，面部行为采集器将鼻尖以及两侧脸颊作为初始标定点，当面部行为采集器采集的脸部图像为侧脸且AL1>AB>AL2或AL2>AB>AL1时，表示人的脸部不是面向车辆正前方，这时，唤醒系统仅仅对面部数据进行采集，不会发出任何唤醒指令；当面部行为采集器采集到正脸图像且AL1＝AB＝AL2时，且驾驶人员已系好安全带，这时唤醒系统根据面部行为采集器采集的数据向整车控制器中发送车辆启动信号，整车控制器通过车辆启动信号启动车辆，从而实现通过面部识别启动车辆的功能。
3、当外部行为采集器采集到与两侧车辆之间的距离较近，且不断与前方车辆拉近距离时，唤醒系统对驾驶人员作出减速提醒，当3秒后驾驶人员没有作出减速处理时，唤醒系统向整车控制器发送紧急刹车信号，使车辆进行紧急刹车，防止与前车发送碰撞，从而避免交通事故的发生。
附图说明
图1为本发明一种基于人体行为分析的新能源汽车唤醒系统的整体结构示意图；
图2为本发明一种基于人体行为分析的新能源汽车唤醒系统的人体行为采集系统的结构示意图；
图3为本发明一种基于人体行为分析的新能源汽车唤醒系统的人体行为分类系统的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例：如图1-3所示，一种基于人体行为分析的新能源汽车唤醒系统，该汽车唤醒系统包括整车控制器、唤醒系统，唤醒系统包括人体行为采集系统、人体行为分类系统、自主学习系统，唤醒系统通过通讯电缆与整车控制器电性连接连接，唤醒系统通过车载无线连接模块与云端数据库连接，唤醒系统还通过无线连接模块与车主身上的手机或者其他移动设备进行连接，人体行为采集系统对人体的面部表情以及肢体动作进行采集，人体行为分类系统将面部表情与肢体动作相结合并根据云端数据库进行分类，自主学习系统对未出现过的人体行为以及所采取的行车动作进行保存并上传云端数据库，唤醒系统根据不同的人体行为向整车控制器中发送不同的控制信号。
云端数据库为网络大数据中人体在行车过程中的人体行为数据，云端数据库中的数据包括导致车祸发生的人体行为数据、对车载空调进行调节的人体行为数据，唤醒系统为搭载三维组建软件的微型电脑系统，人体行为采集系统、人体行为分类系统以及自主学习系统均为微型电脑系统中的部分处理系统。
人体行为采集系统包括若干组行为采集器、三维组建模块，若干组行为采集器为微型摄像头，三维组建模块为微型电脑系统中的计算机处理模块，且内部安装有三维组建软件，若干组行为采集器通过通讯电缆与三维组建模块连接，若干组行为采集器对人体的行为动作以及面部变化进行收集，行为采集器将采集的数据传输到三维组建模块中，所述三维组建模块对数据进行分析、计算并重建出人体三维模型；
若干组行为采集器包括外部行为采集器和内部行为采集器，外部行为采集器安装在车辆的外侧，如车门、前挡风玻璃上方等位置，内部行为采集器安装在车辆内部，具体位置可根据实际需要进行安装；
外部行为采集器对人体在车外的行为进行数据采集以及对车辆行驶中与两侧的车辆距离进行数据采集，外部行为采集器将人体的鼻尖以及手腕作为数据采集点，分别建立数据集合B＝{X，Y，Z|(X1，Y1，Z1)，(X2，Y2，Z2)，…，(XN，YN，ZN)}、S＝{x，y，z|(x1，y1，z1)，(x2，y2，z2)，…，(xn，yn，zn)}，其中，集合B代表鼻尖位置的数据集合，X代表鼻尖相对于外部行为采集器的左右位置、Y代表鼻尖相对于外部行为采集器的前后位置、Z代表鼻尖相对于外部行为采集器的上下位置；集合S代表手腕位置的数据集合，x代表手腕相对于外部行为采集器的左右位置、y代表手腕相对于外部行为采集器的前后位置、z代表手腕相对于外部行为采集器的上下位置。
外部行为采集器将采集的集合数据传输到三维组建模块中，所述三维组建模块对手腕与鼻尖之间的向量距离进行计算，其手腕与鼻尖之间的向量距离
Figure BDA0002475782010000111
Figure BDA0002475782010000112
外部行为采集器对人体与车之间的距离进行测量，其测量值为d，当唤醒系统通过无线连接模块与车主手机或其他移动设备成功进行密钥配对后，外部行为采集器采集到向量距离L与测量值d均满足设定值时，唤醒系统控制整车控制器将车门打开，其设定值为车辆行驶人员自行设定的数值，当密钥配对不成功且外部行为采集器采集到向量距离L与测量值d均满足设定值时，唤醒系统通过无线连接模块向车主手机或其他移动设备中发送安全警告的消息，可以防止车辆被偷窃。
内部行为采集器对人体在车内的面部变化以及肢体行为进行数据采集，内部行为采集器分为面部行为采集器和肢体行为采集器，面部行为采集器对人脸进行实时数据采集，将人脸中的鼻尖、两侧脸颊、两侧耳垂、下颚作为数据采集点，分别标定为B、L1、L2、E1、E2、I，面部行为采集器对人脸进行图像采集以及与各个采集点之间的距离进行实时数据采集，面部行为采集器与各个采集点之间的距离依次为AB、AL1、AL2、AE1、AE2、AI，其中，A代表面部行为采集器的位置点，面部行为采集器将人脸图像以及与采集点之间的距离传输到三维组建模块中，所述三维组建模块对人脸图像进行识别、分割和三维重组并形成人脸三维模型，三维组建模块将各个采集点的距离数据整合到人脸三维模型中，三维组建模块根据实时变化的数据对人脸三维模型进行实时调整。
肢体行为采集器对人体上半身的肢体动作进行数据采集，肢体行为采集器对手臂的动作进行数据采集，肢体行为采集器对肢体动作进行实时的图像数据采集，并将采集的图像数据传输到三维组建模块中，三维组建模块对图像数据进行分析、分割和三维重组，并将重组后的肢体三维模型与人脸三维模型相结合，形成一个完整的人体行为三维模型。
当人进入车辆内部时，面部行为采集器将鼻尖以及两侧脸颊作为初始标定点，当面部行为采集器采集的脸部图像为侧脸且AL1>AB>AL2或AL2>AB>AL1时，表示人的脸部不是面向车辆正前方，这时，唤醒系统仅仅对面部数据进行采集，不会发出任何唤醒指令；
当面部行为采集器采集到正脸图像且AL1＝AB＝AL2时，且驾驶人员已系好安全带，这时唤醒系统根据面部行为采集器采集的数据向整车控制器中发送车辆启动信号，整车控制器通过车辆启动信号启动车辆，从而实现通过面部识别启动车辆的功能。
人体行为分类系统包括与微型电脑系统独立的计算机处理器，人体行为分类系统中的计算机处理器与云端数据库连接，计算机处理器通过通讯电缆与人体行为采集系统中的三维组建模块连接，人体行为分类系统还包括车辆制动模块、车载空调调节模块、车辆启动模块，车辆制动模块、车载空调调节模块、车辆启动模块分别通过通讯电缆与计算机处理器电性连接，计算机处理器根据云端数据库中的数据对人体行为采集系统采集的数据进行分析，车辆制动模块与整车控制器连接，车载空调调节模块与整车控制器连接，车辆启动模块与整车控制器连接，车辆制动模块向整车控制器中发送车辆制动信号，使车辆的速度降低或者紧急刹车，车载空调调节模块向整车控制器中发送空调温度调节信号，使车载空调的温度上调或下调，车辆启动模块向整车控制器中发送车辆启动信号，使车辆无钥匙启动。
人体行为分类系统通过计算机处理器对肢体三维模型和人脸三维模型结合后的模型进行行为分析，人体行为分类系统通过计算机处理器根据云端数据库中保存的数据对模型的行为进行分类处理，当模型中的人体行为与云端数据库中需要进行车辆制动的人体行为相符合时，计算机处理器将此人体行为保存到车辆制动模块中，车辆制动模块对人体行为采集系统中采集的人体行为数据进行监测，当出现人体行为与车辆制动模块中的人体行为向吻合时，车辆制动模块向整车控制器中发送车辆制动信号，使车辆的行驶速度降低。
同时计算机处理器还对云端数据库中导致车祸发生的人体行为进行收集并将其保存到车辆制动模块中，外部行为采集器对两侧车辆以及前方车辆的距离进行监测，面部行为采集器对采集点的数据进行采集，肢体行为采集器对肢体进行数据采集，在车辆行驶过程中，当面部行为采集器与肢体行为采集器采集的数据保持不变，且外部行为采集器采集的与前车的距离一直缩短时，车辆制动模块将车辆制动信号传输到整车控制器中，整车控制器对车辆进行减速处理，同时唤醒系统提醒车辆进行变道，防止车辆与前方车辆发生追尾，当外部行为采集器采集到与两侧车辆之间的距离较近，且不断与前方车辆拉近距离时，唤醒系统对驾驶人员作出减速提醒，当3秒后驾驶人员没有作出减速处理时，唤醒系统向整车控制器发送紧急刹车信号，使车辆进行紧急刹车，防止与前车发送碰撞，从而避免交通事故的发生。
肢体行为采集器采集到手臂在面部来回摆动，且面部行为采集器采集到面部数据没有发生变化时，计算机处理器根据人体行为采集系统中的人体三维模型的动作与云端数据库中的数据进行对比，当计算机处理器匹配到此动作为调节空调的动作时，计算机处理器将此行为数据保存到车载空调调节模块中，车载空调调节模块根据这些数据对人体三维模型的行为动作进行对比，当匹配到保存的数据时，车载空调调节模块向整车控制器中发送信号，整车控制器将空调的温度往下调节或往上调节。
自主学习系统通过通讯电缆分别与人体行为采集系统中的计算机处理器以及人体行为分类系统中的三维组建模块连接，自主学习系统根据人体行为采集系统采集的数据以及行车行为将数据传输到人体行为分类系统中的计算机处理中。
当计算机处理器对人体行为采集系统采集的数据无法进行分类时，所述自主学习系统将人体行为采集系统采集的面部行为数据以及肢体行为数据进行保存，同时将人体行为采集系统采集的数据传输到云端数据库中。
当人体行为与自主学习系统的行为数据相符合时，自主学习系统向整车控制器中发送指令，使整车控制器对车辆进行控制。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。

Claims (8)

1.一种基于人体行为分析的新能源汽车唤醒系统，包括整车控制器，其特征在于：该汽车唤醒系统还包括唤醒系统，所述唤醒系统包括人体行为采集系统、人体行为分类系统、自主学习系统，所述唤醒系统与整车控制器连接，唤醒系统与云端数据库连接，所述人体行为采集系统对人体的面部表情以及肢体动作进行采集，所述人体行为分类系统将面部表情与肢体动作相结合并根据云端数据库进行分类，所述自主学习系统对未出现过的人体行为以及所采取的行车动作进行保存并上传云端数据库，所述唤醒系统根据不同的人体行为向整车控制器发送不同的控制信号；
所述人体行为采集系统包括若干组行为采集器、三维组建模块，若干组所述行为采集器对人体的行为动作以及面部变化进行收集，行为采集器将采集的数据传输到三维组建模块中，所述三维组建模块对数据进行分析、计算并重建出人体三维模型；
所述人体行为分类系统与云端数据库连接，人体行为分类系统与人体行为采集系统连接，人体行为分类系统包括车辆制动模块、车载空调调节模块，人体行为分类系统根据云端数据库中的数据对人体行为采集系统采集的数据进行分类，所述车辆制动模块与整车控制器连接，所述车载空调调节模块与整车控制器连接；
所述自主学习系统分别与人体行为采集系统、人体行为分类系统连接，自主学习系统根据人体行为采集系统采集的数据以及行车行为将数据传输到人体行为分类系统中；
若干组所述行为采集器还包括内部行为采集器；
所述内部行为采集器对人体在车内的面部变化以及肢体行为进行数据采集，所述内部行为采集器分为面部行为采集器和肢体行为采集器，所述面部行为采集器对人脸进行实时数据采集，将人脸中的鼻尖、两侧脸颊、两侧耳垂、下颚作为数据采集点，分别标定为B、L1、L2、E1、E2、I，面部行为采集器对人脸进行图像采集以及与各个采集点之间的距离进行实时数据采集，面部行为采集器与各个采集点之间的距离依次为AB、AL1、AL2、AE1、AE2、AI，其中，A代表面部行为采集器的位置点，面部行为采集器将人脸图像以及与采集点之间的距离传输到三维组建模块中，所述三维组建模块对人脸图像进行识别、分割和三维重组并形成人脸三维模型，三维组建模块将各个采集点的距离数据整合到人脸三维模型中，三维组建模块根据实时变化的数据对人脸三维模型进行实时调整；
当人进入车辆内部时，面部行为采集器将鼻尖以及两侧脸颊作为初始标定点，当面部行为采集器采集的脸部图像为侧脸且AL1>AB>AL2或AL2>AB>AL1时，表示人的脸部不是面向车辆正前方，这时，唤醒系统仅仅对面部数据进行采集，不会发出任何唤醒指令；
当面部行为采集器采集到正脸图像且AL1＝AB＝AL2时，且驾驶人员已系好安全带，这时唤醒系统根据面部行为采集器采集的数据向整车控制器发送车辆启动信号，整车控制器通过车辆启动信号启动车辆，从而实现通过面部识别启动车辆的功能。
2.根据权利要求1所述的一种基于人体行为分析的新能源汽车唤醒系统，其特征在于：若干组所述行为采集器包括外部行为采集器；所述外部行为采集器对人体在车外的行为进行数据采集以及对车辆行驶中与两侧的车辆距离进行数据采集，外部行为采集器将人体的鼻尖以及手腕作为数据采集点，分别建立数据集合B＝{X，Y，Z|(X1，Y1，Z1)，(X2，Y2，Z2)，…，(XN，YN，ZN)}、S＝{x，y，z|(x1，y1，z1)，(x2，y2，z2)，…，(xn，yn，zn)}，其中，集合B代表鼻尖位置的数据集合，X代表鼻尖相对于外部行为采集器的左右位置、Y代表鼻尖相对于外部行为采集器的前后位置、Z代表鼻尖相对于外部行为采集器的上下位置；集合S代表手腕位置的数据集合，x代表手腕相对于外部行为采集器的左右位置、y代表手腕相对于外部行为采集器的前后位置、z代表手腕相对于外部行为采集器的上下位置。
3.根据权利要求2所述的一种基于人体行为分析的新能源汽车唤醒系统，其特征在于：所述外部行为采集器将采集的集合数据传输到三维组建模块中，所述三维组建模块对手腕与鼻尖之间的向量距离进行计算，其手腕与鼻尖之间的向量距离
Figure FDA0002969701170000031
所述外部行为采集器对人体与车之间的距离进行测量，其测量值为d，当外部行为采集器采集到向量距离L与测量值d均满足设定值时，唤醒系统控制整车控制器将车门打开。
4.根据权利要求3所述的一种基于人体行为分析的新能源汽车唤醒系统，其特征在于：所述肢体行为采集器对人体的肢体动作进行数据采集，肢体行为采集器对手臂的动作进行数据采集，肢体行为采集器对肢体动作进行实时的图像数据采集，并将采集的图像数据传输到三维组建模块中，三维组建模块对图像数据进行分析、分割和三维重组，并将重组后的肢体三维模型与人脸三维模型相结合，形成一个完整的人体行为三维模型。
5.根据权利要求4所述的一种基于人体行为分析的新能源汽车唤醒系统，其特征在于：所述人体行为分类系统对肢体三维模型和人脸三维模型结合后的模型进行行为分析，人体行为分类系统根据云端数据库中保存的数据对模型的行为进行分类处理并保存到车辆制动模块中，所述车辆制动模块与整车控制器电性连接，当模型中的人体行为与车辆制动模块中保存的行为数据向符合时，所述车辆制动模块向整车控制器发送车辆制动信号，使车辆的行驶速度降低。
6.根据权利要求5所述的一种基于人体行为分析的新能源汽车唤醒系统，其特征在于：所述车辆制动模块与云端数据库连接，车辆制动模块对云端数据库中导致车祸发生的人体行为进行保存，所述外部行为采集器对两侧车辆以及前方车辆的距离进行监测，所述面部行为采集器对采集点的数据进行采集，所述肢体行为采集器对肢体进行数据采集，当面部行为采集器与肢体行为采集器采集的数据保持不变，且外部行为采集器采集的与前车的距离一直缩短时，车辆制动模块将车辆制动信号传输到整车控制器中。
7.根据权利要求6所述的一种基于人体行为分析的新能源汽车唤醒系统，其特征在于：所述车载空调调节模块与整车控制器进行电性连接，当肢体行为采集器采集到手臂在面部来回摆动，且面部行为采集器采集到面部数据没有发生变化时，车载空调调节模块根据内部保存的数据对人体三维模型进行数据对比，车载空调调节模块向整车控制器发送信号，整车控制器将空调的温度往下调节或者往上调节。
8.根据权利要求7所述的一种基于人体行为分析的新能源汽车唤醒系统，其特征在于：当人体行为分类系统对人体行为采集系统采集的数据无法进行分类时，所述自主学习系统将人体行为采集系统采集的面部行为数据以及肢体行为数据进行保存，同时将人体行为采集系统采集的数据传输到云端数据库中。
CN202010363460.6A 2020-04-30 2020-04-30 一种基于人体行为分析的新能源汽车唤醒系统 Active CN111516642B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010363460.6A CN111516642B (zh) 2020-04-30 2020-04-30 一种基于人体行为分析的新能源汽车唤醒系统
CN202110674443.9A CN113264009B (zh) 2020-04-30 2020-04-30 基于人体行为分析的新能源汽车唤醒系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010363460.6A CN111516642B (zh) 2020-04-30 2020-04-30 一种基于人体行为分析的新能源汽车唤醒系统

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202110674443.9A Division CN113264009B (zh) 2020-04-30 2020-04-30 基于人体行为分析的新能源汽车唤醒系统

Publications (2)

Publication Number Publication Date
CN111516642A CN111516642A (zh) 2020-08-11
CN111516642B true CN111516642B (zh) 2021-11-30

Family

ID=71908572

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202010363460.6A Active CN111516642B (zh) 2020-04-30 2020-04-30 一种基于人体行为分析的新能源汽车唤醒系统
CN202110674443.9A Active CN113264009B (zh) 2020-04-30 2020-04-30 基于人体行为分析的新能源汽车唤醒系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110674443.9A Active CN113264009B (zh) 2020-04-30 2020-04-30 基于人体行为分析的新能源汽车唤醒系统

Country Status (1)

Country Link
CN (2) CN111516642B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114202965B (zh) * 2022-02-18 2022-05-17 上海齐感电子信息科技有限公司 辅助驾驶方法、装置、车载终端及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994022693A1 (en) * 1993-03-31 1994-10-13 Automotive Technologies International, Inc. Vehicle occupant position and velocity sensor
JPH07144653A (ja) * 1993-11-24 1995-06-06 Nissan Motor Co Ltd 車両のヨーイング運動量制御装置
CN108297864A (zh) * 2018-01-25 2018-07-20 广州大学 驾驶员与车辆主动安全技术联动的控制方法及控制系统
CN109552340A (zh) * 2017-09-22 2019-04-02 奥迪股份公司 用于车辆的手势和表情控制

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6400835B1 (en) * 1996-05-15 2002-06-04 Jerome H. Lemelson Taillight mounted vehicle security system employing facial recognition using a reflected image
JP4209303B2 (ja) * 2003-10-17 2009-01-14 アルパイン株式会社 車両用顔画像処理装置
CN101986328B (zh) * 2010-12-06 2012-06-27 东南大学 一种基于局部描述符的三维人脸识别方法
CN104102183A (zh) * 2013-04-13 2014-10-15 王斌 一种智能家居手势控制方法及装置
CN108674365B (zh) * 2018-03-29 2022-05-03 斑马网络技术有限公司 用于汽车的识别装置和车门控制方法
CN110751009A (zh) * 2018-12-20 2020-02-04 北京嘀嘀无限科技发展有限公司 人脸识别方法、目标识别方法、装置和电子设备
CN110171389B (zh) * 2019-05-15 2020-08-07 广州小鹏车联网科技有限公司 一种人脸登录的设置引导方法、车载系统及车辆
CN110182174A (zh) * 2019-05-27 2019-08-30 深圳市赛格车圣科技有限公司 基于人脸识别的车辆无钥匙进入和启动系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994022693A1 (en) * 1993-03-31 1994-10-13 Automotive Technologies International, Inc. Vehicle occupant position and velocity sensor
JPH07144653A (ja) * 1993-11-24 1995-06-06 Nissan Motor Co Ltd 車両のヨーイング運動量制御装置
CN109552340A (zh) * 2017-09-22 2019-04-02 奥迪股份公司 用于车辆的手势和表情控制
CN108297864A (zh) * 2018-01-25 2018-07-20 广州大学 驾驶员与车辆主动安全技术联动的控制方法及控制系统

Also Published As

Publication number Publication date
CN111516642A (zh) 2020-08-11
CN113264009B (zh) 2022-08-05
CN113264009A (zh) 2021-08-17

Similar Documents

Publication Publication Date Title
CN104408878B (zh) 一种车队疲劳驾驶预警监控系统及方法
CN206561805U (zh) 一种防疲劳驾驶车载装置
CN111329497A (zh) 基于前额脑电信号的可穿戴式疲劳驾驶监测系统及方法
CN207809194U (zh) 汽车安全驾驶辅助系统
CN107146412A (zh) 一种基于车联网的高速公路车辆防碰撞预警综合变量构建方法
CN109649316A (zh) 一种基于车辆碰撞类事故的呼救系统及方法
CN205022382U (zh) 一种车辆限速装置
CN111516642B (zh) 一种基于人体行为分析的新能源汽车唤醒系统
CN203832484U (zh) 一种保障安全行车的控制装置
CN207601622U (zh) 一种纯电动汽车智能网联ivcu控制系统
CN203941599U (zh) 防止汽车驾驶员瞌睡的装置
CN102941853A (zh) 基于实时无线通讯网络的汽车智能辅助驾驶系统及方法
CN108010269A (zh) 一种基于车联网的驾驶分心监测、预警系统及方法
CN109131066A (zh) 智能车辆主动发声系统及交通工具
CN108437993A (zh) 一种路怒车辆自适应驾驶控制系统及方法
CN111137136B (zh) 一种纯电驱动车辆刹车响应方法及系统
CN114735010B (zh) 基于情绪识别的智能车辆行驶控制方法、系统及存储介质
CN106274777B (zh) 用于车内安全座椅的智能安全监控方法
CN212439664U (zh) 一种基于云平台的蒸汽提神及co气体探测装置
CN108657150A (zh) 一种具有主动安全性的电动汽车制动控制系统
CN204915555U (zh) 远程监控的电动汽车
CN115384363A (zh) 基于体态识别的汽车座椅智能调节系统
CN114771545A (zh) 一种智能安全驾驶系统
CN205545291U (zh) 一种车联网与图像融合的前向车辆驾驶人驾驶行为预测系统
CN212675573U (zh) 基于出行场景的安全通讯采集系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20211112

Address after: 325600 Liu Shi Zhen Hou Xi Cun, Leqing City, Wenzhou City, Zhejiang Province

Applicant after: Yueqing taiboheng Electronic Technology Co., Ltd

Address before: 215008 No. 858, Ganjiang East Road, Gusu District, Suzhou City, Jiangsu Province

Applicant before: Fang Wenhao

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant