CN110539799B - 一种基于驾驶员状态的分层架构人机共驾系统 - Google Patents
一种基于驾驶员状态的分层架构人机共驾系统 Download PDFInfo
- Publication number
- CN110539799B CN110539799B CN201910954724.2A CN201910954724A CN110539799B CN 110539799 B CN110539799 B CN 110539799B CN 201910954724 A CN201910954724 A CN 201910954724A CN 110539799 B CN110539799 B CN 110539799B
- Authority
- CN
- China
- Prior art keywords
- driver
- driving
- steering
- automobile
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000014509 gene expression Effects 0.000 claims description 129
- 230000001133 acceleration Effects 0.000 claims description 68
- 238000000034 method Methods 0.000 claims description 40
- 230000008921 facial expression Effects 0.000 claims description 39
- 238000000605 extraction Methods 0.000 claims description 18
- 230000006399 behavior Effects 0.000 claims description 15
- 238000004891 communication Methods 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 9
- 230000003993 interaction Effects 0.000 claims description 9
- 230000004397 blinking Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 6
- 238000002474 experimental method Methods 0.000 claims description 4
- 239000012141 concentrate Substances 0.000 claims description 3
- 238000013016 damping Methods 0.000 claims description 3
- 230000003247 decreasing effect Effects 0.000 claims description 3
- 238000006073 displacement reaction Methods 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 3
- 239000000725 suspension Substances 0.000 claims description 3
- 238000012360 testing method Methods 0.000 claims description 3
- 238000004364 calculation method Methods 0.000 claims description 2
- 238000005516 engineering process Methods 0.000 description 4
- 230000008447 perception Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/029—Steering assistants using warnings or proposing actions to the driver without influencing the steering system
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Abstract
本发明公开了一种基于驾驶员状态的分层架构人机共驾系统,属于智能汽车决策领域,通过采将集到的驾驶员方向盘输入力矩与辅助驾驶系统计算得到的动态阈值比较,并通过采集汽车车速和方向盘输入角加速度以及驾驶员面部表情比例进一步感知驾驶员驾驶状态,据此分配驾驶权,发出警报,最后利用模糊控制方法控制前轮转角,直至人机共驾系统达到平衡。本系统还可以根据车内儿童状态调整辅助驾驶系统当决策驾驶权比例,控制汽车在车内儿童可接受情况下安全行驶。
Description
技术领域
本发明属于智能汽车决策领域,尤其涉及一种基于驾驶员状态的分层架构人机共驾系统。
背景技术
智能汽车是集周围环境感知、驾驶员操作感知、智能决策和其它多项技术于一体的高级驾驶系统。近年来,人工智能技术、存储技术和网络技术的迅猛发展也引领智能汽车向着更高水平迈进,智能汽车将代替人类驾驶员执行更多驾驶基本操作和较复杂操作。根据美国国家公路交通安全管理局(NHTSA)和汽车工程师协会(SAE)的规定,自动驾驶系统分为L0到L5共6个层次,从L0的全手动驾驶到L5的全自动驾驶。但因伦理问题和与其它等级车的协调问题,目前L5级全自动驾驶汽车实现较为困难,相对简单的L2-L4等级汽车的人机共驾系统成为人们关注的重点。
人机共驾系统通过模型优化方法、预先实验取得个性化数据和一些其它方法,根据驾驶员的行为和操作,预测驾驶员方向盘输入转角、驾驶轨迹和其它信息,进行相应的驾驶员驾驶辅助,以达到使汽车安全、准确行驶的目的。
中国专利CN106347449A公开了一种人机共驾型电动助力转向系统及模式切换方法,在现有电动助力转向系统上安装后置转矩/转角传感器,通过检测并计算当前车速下横摆角速度的安全值,控制驱动电机运转,实现人驾模式和机驾模式的转换,但只涉及理想情况的转向,未考虑驾驶员行为带来的影响。
发明内容
为了系统考虑驾驶员行为的影响,本发明提出了一种基于驾驶员状态的分层架构人机共驾系统;
为实现以上目的,本发明采用以下解决方案:
一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,其包括汽车行驶状态采集系统、人员信息采集系统、辅助驾驶系统、人机共驾稳定判断和协调系统;
汽车行驶状态采集系统,其用于采集汽车车速、汽车前轮转角、转向系统的转向轴负荷及轮胎气压、汽车侧向加速度、纵向加速度,以及汽车和儿童座椅的垂向加速度、横摆角速度和侧倾角;
人员信息采集系统,其用于采集驾驶员方向盘输入力矩、驾驶员方向盘输入转角和驾驶员面部表情;
辅助驾驶系统,其用于根据所采集的人员信息采集系统输出的信息判断驾驶员驾驶状态,并分配驾驶权,控制前轮转角,并根据具体情况的不同而发出不同警报;
人机共驾稳定判断和协调系统,其用于实时检测驾驶员对人机共驾系统是否满意并调整人机共驾策略。
上述方案中,所述的汽车行驶状态采集系统利用安装在悬架导向机构上的位移传感器,采集左前轮转角信息,右前轮转角通过标定系统得到左前轮转角在不同轮胎气压下的关系得到,具体为:
θr=k1θl 2+k2θl+b
其中,θr为右前轮转角,θl为左前轮转角,根据不同轮胎气压下的实验数据拟合得到上述公式中参数值为k1=-0.0085,k2=1.1137,b=0;
利用布置在转向轴上的应变片测量转向系统的转向轴负荷,利用安装在底盘中心的陀螺仪检测汽车横摆角速度、侧倾角,利用安装在后排儿童座椅上的陀螺仪测量儿童座椅垂向加速度、横摆角速度、侧倾角,利用安装在汽车上的加速度传感器测量汽车侧向加速度、纵向加速度和垂向加速度;
其中儿童座椅的动态质心位置由儿童座椅基础质心数据和儿童座椅上安装的重力感应器测得的实际儿童乘客重量并根据儿童乘客重量估计儿童身高信息,最后将儿童座椅基础质心数据和测得的儿童乘客重量和身高数据加权平均得到估计的儿童座椅的动态质心位置;
上述方案中,所述人员信息采集系统包括驾驶员操作采集模块、驾驶员状态采集模块、驾驶员面部表情采集模块、车内人员互动程度检测模块;
驾驶员操作采集模块,其用于利用安装于转向传动机构上的转矩传感器和角加速度传感器定期采集驾驶员方向盘输入力矩和方向盘输入角加速度,设当前车速为v,单位km/h,数据采集间隔系数为z,当v大于140km/h时,z的值为0.1;当v小于等于140km/h时,其值为
根据人员信息采集系统采集的驾驶员方向盘输入转角信息;
若驾驶员输入方向盘转角小于60°,则相邻两次数据采集间隔为0.1z秒;
若驾驶员输入方向盘转角大于等于60°小于120°,则相邻两次数据采集间隔为0.05z秒;
若驾驶员输入方向盘转角大于等于120°,则相邻两次数据采集间隔为0.02z秒;
驾驶员状态采集模块,其用于利用车内摄像设备判断驾驶员是否有接电话行为,并捕捉驾驶员眨眼频率和头部向右转向角度以及后方儿童年龄;
驾驶员面部表情采集模块,采集驾驶员面部表现出的愤怒表情、高兴表情、悲伤表情、惊讶表情、厌恶表情、恐惧表情、紧张表情,并采集后排儿童座椅上儿童是否有悲伤表情;
车内人员互动程度检测模块,其用于检测驾驶员与前、后排乘客交流时长以及驾驶员注视前、后排乘客时长;
上述方案中,所述辅助驾驶系统包括驾驶员驾驶状态判断模块、驾驶权分配模块、转向控制模块、警报模块;
驾驶员驾驶状态判断模块,其用于根据驾驶员操作采集模块和驾驶员状态采集模块所采集的信息将驾驶员驾驶行为分为正常、分心、激进三种情况;
驾驶权分配模块,其用于在驾驶员驾驶状态判断模块判断驾驶员分心时分配驾驶员和辅助驾驶系统的驾驶权;
转向控制模块,用于在驾驶员驾驶状态判断模块判断驾驶员激进驾驶的情况下控制汽车前轮转角在0°-40°范围内;
警报模块,其用于在驾驶员驾驶状态判断模块判断驾驶员分心或激进驾驶时进行噪音警报、踏板振动警报、座椅震动警报、摄像头闪动警报、方向盘振动警报、对话警报,其中对话警报包含“请驾驶员顾及儿童时专心开车”、“请驾驶员专心开车”、“请后排乘客保持安静”、“请驾驶员减速慢行”语音。
上述方案中,所述驾驶员驾驶状态判断模块进行判断的驾驶员状态初步判断方法:
辅助驾驶系统第一预设阈值Ma,其求解过程如下,驾驶员为克服汽车转向系统阻力需要对方向盘施加的转向力矩为
其中,Js为转向柱转动惯量,is为传动比,δ为前轮转角,bs为转向柱阻尼比,由汽车行驶状态采集系统获取,Tr为方向盘回正力矩,Tz为转向助力系统输出力矩;
在驾驶员驾驶汽车前,首先对驾驶员进行预测试,得到驾驶员在车速为50km/h时的最小方向盘输入力矩Mg,其值和驾驶员为克服汽车转向系统阻力需要对方向盘施加的转向力矩Ma相比较,较大者被设定为第一预设阈值;
驾驶员标准方向盘输入力矩定义为辅助驾驶系统第二预设阈值Mb,其值为
其中,Dsw为方向盘直径,R为车轮半径,ip为转向系力传动比;
MR为转向阻力矩,其值为
其中f为轮胎和路面间的滑动摩擦系数,G为转向系统的转向轴负荷,由汽车行驶状态采集系统采集得到,p为轮胎气压,由汽车行驶状态采集系统采集得到;
驾驶员极限方向盘输入力矩Mc由对驾驶员进行预测实验得到;
驾驶员在车速为50km/h时的方向盘力矩输入边界值由对驾驶员进行与测试得到,其从大到小排列分别为Md、Me;
当驾驶员操纵力矩M输入时,根据其所在力矩范围,初步判断驾驶员驾驶状态,判断方法为:
1)当有驾驶员方向盘输入力矩M∈[Me,Md]、驾驶员方向盘输入力矩M∈[Ma,Me]且车速小于40km/h和驾驶员方向盘输入力矩M∈[Ma,Me]且车大于80km/h情况至少其中之一时判断驾驶员正常驾驶;
2)当驾驶员方向盘输入力矩M∈[Ma,Me]且车速大于40km/h小于80km/h时,判断驾驶员分心驾驶;
3)当有驾驶员方向盘输入力矩M∈[Md,Mc]和车速大于80km/h情况至少其中之一时,判断驾驶员激进驾驶;
上述方案中,所述驾驶员状态判断初步判断方法细分为如下情况:
1)当初步判断驾驶员正常驾驶时,系统不进行辅助操作;
2)当初步判断驾驶员分心驾驶时,进入下一判断阶段:
首先,当检测前轮转角范围在0°-5°时,判断驾驶员分心程度为C1,若同时驾驶员状态采集模块采集到驾驶员接电话行为、头部向右转动大于等于90°和驾驶员眨眼频率低于15次每秒至少其中之一,系统进行噪音警报与座椅震动警报、方向盘振动警报;
其次,当检测前轮转角范围在5°-10°时,判断驾驶员分心程度为C2,系统进行噪音警报、方向盘振动警报;
再次,当检测前轮转角大于10°时,当检测到车内人员互动程度检测模块观察到驾驶员与车内其他乘客交流时间大于等于5秒且目光注视车内其他乘客时间大于等于3秒和驾驶员头部向右转向角度大于90度并注视儿童座椅方向大于等于2秒至少其中之一则判断驾驶员被动分心,判断驾驶员分心程度为C3;
最后,当检测到驾驶员头部转动,看向侧向且3秒内头部未转回前方则判定驾驶员主动分心,判断驾驶员分心程度为C4,若无以上情况取消分心驾驶认定,恢复驾驶员驾驶状态判定为正常驾驶。
3)当初步判断驾驶员激进驾驶时,进入下一判断阶段:
首先,当驾驶员操作采集模块采集到驾驶员方向盘输入角加速度在1秒内持续增加时,判断驾驶员状态为D1,系统进行噪音警报,踏板振动警报、座椅震动警报和方向盘振动警报;
其次,当驾驶员操作采集模块采集到驾驶员方向盘输入角加速度1秒内不增加时,判断驾驶员状态为D2,且检测到驾驶员方向盘输入角加速度值3秒内一直递减,系统恢复驾驶员驾驶状态判定为正常驾驶。否则,维持驾驶员状态判定为D2,进行噪音警报和座椅震动警报。
上述方案中,所述动态分配驾驶权装置及动态分配驾驶权方法:
所述动态分配驾驶权装置,其组成为驾驶员方向盘力矩输入传感器、动态分配驾驶权电子控制元件、前轮转向电机、转向器;
当驾驶员转动方向盘时,驾驶员方向盘力矩输入传感器检测驾驶员方向盘力矩输入并将其转化为电信号发送给动态分配驾驶权电子控制元元件,动态分配驾驶权电子控制元件根据其内部设定的动态分配驾驶权方法,计算前轮转向电机应该输出的转矩,并向前轮转向电机发出电信号,控制前轮转向电机输出动态分配驾驶权电子控制元件决策的转向力矩,从而控制转向器完成转向。
当驾驶员驾驶状态判断模块判断驾驶员驾驶状态为C1、C2时,启用驾驶权分配模块,当驾驶员转动方向盘时,驾驶员方向盘力矩输入传感器将检测到的驾驶员方向盘输入力矩发送给动态分配驾驶权电子控制元件,动态分配驾驶权电子控制元件内部设定的动态分配驾驶权方法如下:驾驶员方向盘输入力矩M,令驾驶员驾驶权分配系数
汽车系统驾驶权分配系数为
σ2=1-σ1
最终方向盘输入力矩为
M总=σ1Mb+σ2M
上述方案中,所述模糊控制汽车转角方法:
当系统判断驾驶员驾驶状态为D1、D2时,启用辅助驾驶系统中的转向控制模块,该模块所用控制方法为模糊控制方法,该模糊控制方法输出为汽车前轮转角,其模糊集合定义为正大(PB)、正小(PS)、正常(Z)、负小(NS)、负小(NB),模糊规则定义如下,其中V为车速,Y为车偏离道路中心线的距离,PB为偏向道路内侧较多,PS为偏向道路内侧较少,Z为在道路正中,NS为偏向道路外侧较少NB为偏向道路外侧较多。
上述模糊控制规则为
上述方案中,所述人机共驾有效判断和协调系统包括驾驶员面部表情比例提取模块、人机共驾有效判断模块、人机共驾协调模块:
驾驶员面部表情比例提取模块,其用于接收驾驶员面部表情采集模块采取到的驾驶员现在表情,并分析、计算愤怒表情、高兴表情、悲伤表情、惊讶表情、厌恶表情、恐惧表情和其它表情各个表情所占的比例,驾驶员愤怒表情比例A、高兴表情比例B、悲伤表情概比例C、惊讶表情比例D、厌恶表情比例E、恐惧表情比例F、紧张表情比例G、其它表情比例H满足
A+B+C+D+E+F+G+H=1
人机共驾有效判断模块,其用于判断人机共驾系统是否处于稳定状态,其判断方法为:
当驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例大于等于50%时,以及驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例小于50%但高兴表情比例占比最多且除高兴表情外的表情比例都小于10%时,判断辅助驾驶系统执行驾驶权分配决策和前轮转角决策有效,其他情况下判定辅助驾驶系统执行的驾驶权分配决策和前轮转角决策未能达到预期目的,即驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意;
除上述情况以外的情况下判定辅助驾驶系统执行的驾驶权分配决策和前轮转角决策未能达到预期目的,即驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意;
人机共驾协调模块,其用于在人机共驾有效判断模块判断驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意时,对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策进行调整并观察决策调整后的驾驶员面部表情比例提取模块中高兴表情比例、紧张表情比例的协调方法:
当驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意时:
若此时对驾驶员状态判定为C1、C2,则令驾驶权分配模块将驾驶员驾驶权提升10%,若提升驾驶员驾驶权后,驾驶员当驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例上升,则继续提升10%驾驶员驾驶权至驾驶员高兴表情比例大于等于50%,设定驾驶员驾驶权上限为80%,当检测到提升驾驶员驾驶权后驾驶员高兴表情比例未上升,证明驾驶员仍然对辅助驾驶系统决策不满意,则令驾驶权分配模块停止工作;
若此时对驾驶员状态判定为C3,当检测到车内人员互动程度检测模块观察到驾驶员与车内其他乘客交流时间大于等于5秒且目光注视车内其他乘客时间大于等于3秒,认定驾驶员因他人原因导致分心驾驶,控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2,进行对话警报,播放“请驾驶员专心开车”语音;
当检测到驾驶员头部向右转向角度大于90度,驾驶员注视儿童座椅方向大于等于2秒并且驾驶员紧张表情比例大于驾驶员高兴表情比例,认定驾驶员驾驶行为受到儿童影响,则控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2并根据驾驶员状态采集模块采集到的后排儿童年龄信息,若儿童年龄在0-3岁范围内,进行对话警报,播放“请驾驶员顾及儿童时专心开车”语音;
若儿童年龄在4-8岁范围内,进行对话警报,播放“请驾驶员专心开车”语音;
若儿童年龄为9岁及以上,进行对话警报,播放“请后排乘客保持安静”语音;
若此时对驾驶员状态判定为C4,认定驾驶员主动分心驾驶,,则控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2,进行对话警报,播放“请驾驶员专心开车”语音;
若此时对驾驶员状态判定为D1、D2,汽车行驶状态采集系统采集到车内后排儿童座椅的侧倾角大于20°且车内儿童悲伤表情所占比例为50%以上,则判定为特殊情况,进行摄像头闪动警报3秒,若驾驶员不响应警报,则关闭摄像头闪动警报,令驾驶权分配模块停止工作,驾驶员自行操作,只控制汽车侧向加速度小于3m/s2,横摆角速度小于4m/s2,前轮转角小于30°,以保证车内人员安全,否则将驾驶权完全交还给驾驶员。
上述方案中,所述基于驾驶员状态的分层架构人机共驾系统在可以判断汽车行驶平顺性、操纵稳定性并作出调整:
检测汽车垂直方向上的加速度和后排儿童座椅垂直方向上的加速度,若后排儿童座椅垂直方向上的加速度低于汽车垂直方向上的加速度的70%,则评定该汽车有良好的行驶平顺性;若后排儿童座椅垂直方向上的加速度大于等于汽车垂直方向上的加速度的70%,且车内儿童悲伤表情所占比例大于等于50%,为照顾后排儿童承受能力低,同时降低后排儿童乘坐震感,播放“请驾驶员减速慢行”语音至车内儿童悲伤表情所占比例小于50%;
检测汽车侧倾角和后排儿童座椅侧倾角,若后排儿童座椅侧倾角低于汽车侧倾角值的50%,则评定该汽车舒适性良好;若后排儿童座椅侧倾角大于等于汽车侧倾角值的50%且车内儿童悲伤表情所占比例大于等于50%,则控制汽车侧向加速度小于3m/s2,控制儿童座椅横摆角速度小于4m/s2至车内儿童悲伤表情所占比例小于50%。
附图说明
图1本发明基于驾驶员状态的人机共驾系统结构示意图;
图2图1中驾驶员状态识别并辅助驾驶方法。
具体实施方式
下面根据附图及具体实施例,对本发明进一步详细说明
如图1所示,本发明基于驾驶员状态的分层架构人机共驾系统包括汽车行驶状态采集系统、人员信息采集系统、辅助驾驶系统、人机共驾稳定判断和协调系统;
汽车行驶状态采集系统,其用于采集汽车车速、汽车前轮转角、转向系统的转向轴负荷及轮胎气压、汽车侧向加速度、纵向加速度,以及汽车和儿童座椅的垂向加速度、横摆角速度和侧倾角;人员信息采集系统,其用于采集驾驶员方向盘输入力矩、驾驶员方向盘输入转角和驾驶员面部表情;辅助驾驶系统,其用于根据所采集的人员信息采集系统输出的信息判断驾驶员驾驶状态,并分配驾驶权,控制前轮转角,并根据具体情况的不同而发出不同警报;人机共驾稳定判断和协调系统,其用于实时检测驾驶员对人机共驾系统是否满意并调整人机共驾策略。
所述的汽车行驶状态采集系统利用安装在悬架导向机构上的位移传感器,采集左前轮转角信息,右前轮转角通过标定系统得到左前轮转角在不同轮胎气压下的关系得到,具体为:
θr=k1θl 2+k2θl+b
其中,θr为右前轮转角,θl为左前轮转角,根据实验数据拟合得到上述公式中参数值为k1=-0.0085,k2=1.1137,b=0;
利用布置在转向轴上的应变片测量转向系统的转向轴负荷,利用安装在底盘中心的陀螺仪检测汽车横摆角速度、侧倾角,利用安装在后排儿童座椅上的陀螺仪测量儿童座椅垂向加速度、横摆角速度、侧倾角,其中不同儿童乘坐下的儿童座椅的动态质心位置由儿童重量信息、儿童身高信息进行参数估计和计算获得,利用安装在汽车上的加速度传感器测量汽车侧向加速度、纵向加速度和垂向加速度。
所述人员信息采集系统包括驾驶员操作采集模块、驾驶员状态采集模块、驾驶员面部表情采集模块、车内人员互动程度检测模块;
驾驶员操作采集模块,其用于利用安装于转向传动机构上的转矩传感器和角加速度传感器定期采集驾驶员方向盘输入力矩和方向盘输入角加速度,设当前车速为v,单位km/h,数据采集间隔系数为z,当v大于140km/h时,z的值为0.1;当v小于等于140km/h时,其值为
根据人员信息采集系统采集的驾驶员方向盘输入转角信息,若驾驶员输入方向盘转角小于60°,则相邻两次数据采集间隔为0.1z秒;若驾驶员输入方向盘转角大于等于60°小于120°,则相邻两次数据采集间隔为0.05z秒;若驾驶员输入方向盘转角大于等于120°,则相邻两次数据采集间隔为0.02z秒;
驾驶员状态采集模块,其用于利用车内摄像设备判断驾驶员是否有接电话行为,并捕捉驾驶员眨眼频率和头部向右转向角度以及后方儿童年龄;
驾驶员面部表情采集模块,采集驾驶员面部表现出的愤怒表情、高兴表情、悲伤表情、惊讶表情、厌恶表情、恐惧表情、紧张表情,并采集后排儿童座椅上儿童是否有悲伤表情;
车内人员互动程度检测模块,其用于检测驾驶员与前、后排乘客交流时长以及驾驶员注视前、后排乘客时长。
所述辅助驾驶系统包括驾驶员驾驶状态判断模块、驾驶权分配模块、转向控制模块、警报模块;
驾驶员驾驶状态判断模块,其用于根据驾驶员操作采集模块和驾驶员状态采集模块所采集的信息将驾驶员驾驶行为分为正常、分心、激进三种情况;
驾驶权分配模块,其用于在驾驶员驾驶状态判断模块判断驾驶员分心时分配驾驶员和辅助驾驶系统的驾驶权;
转向控制模块,用于在驾驶员驾驶状态判断模块判断驾驶员激进驾驶的情况下控制汽车前轮转角在0°-40°范围内;
警报模块,其用于在驾驶员驾驶状态判断模块判断驾驶员分心或激进驾驶时进行噪音警报、踏板振动警报、座椅震动警报、摄像头闪动警报、方向盘振动警报、对话警报,其中对话警报包含“请驾驶员顾及儿童时专心开车”、“请驾驶员专心开车”、“请后排乘客保持安静”、“请驾驶员减速慢行”语音。
所述驾驶员驾驶状态判断模块进行判断的驾驶员状态初步判断方法:
辅助驾驶系统第一预设阈值Ma,其求解过程如下,驾驶员为克服汽车转向系统阻力需要对方向盘施加的转向力矩为
其中,Js为转向柱转动惯量,is为传动比,δ为前轮转角,bs为转向柱阻尼比,由汽车行驶状态采集系统获取,Tr为方向盘回正力矩,Tz为转向助力系统输出力矩;
在驾驶员驾驶汽车前,首先对驾驶员进行预测试,得到驾驶员在车速为50km/h时的最小方向盘输入力矩Mg,其值和驾驶员为克服汽车转向系统阻力需要对方向盘施加的转向力矩Ma相比较,较大者被设定为第一预设阈值;
驾驶员标准方向盘输入力矩定义为辅助驾驶系统第二预设阈值Mb,其值为
其中,Dsw为方向盘直径,R为车轮半径,ip为转向系力传动比;
MR为转向阻力矩,其值为
其中f为轮胎和路面间的滑动摩擦系数,G为转向系统的转向轴负荷,由汽车行驶状态采集系统采集得到,p为轮胎气压,由汽车行驶状态采集系统采集得到;
驾驶员极限方向盘输入力矩Mc由对驾驶员进行预测实验得到;
驾驶员在车速为50km/h时的方向盘力矩输入边界值由对驾驶员进行与测试得到,其从大到小排列分别为Md、Me;
当驾驶员操纵力矩M输入时,根据其所在力矩范围,初步判断驾驶员驾驶状态,判断方法为:
1)当有驾驶员方向盘输入力矩M∈[Me,Md]、驾驶员方向盘输入力矩M∈[Ma,Me]且车速小于40km/h和驾驶员方向盘输入力矩M∈[Ma,Me]且车大于80km/h情况至少其中之一时判断驾驶员正常驾驶;
2)当驾驶员方向盘输入力矩M∈[Ma,Me]且车速大于40km/h小于80km/h时,判断驾驶员分心驾驶;
3)当有驾驶员方向盘输入力矩M∈[Md,Mc]和车速大于80km/h情况至少其中之一时,判断驾驶员激进驾驶。
上述方案中,所述驾驶员状态判断初步判断方法细分为如下情况:
1)当初步判断驾驶员正常驾驶时,系统不进行辅助操作;
2)当初步判断驾驶员分心驾驶时,进入下一判断阶段:
首先,当检测前轮转角范围在0°-5°时,判断驾驶员分心程度为C1,若同时驾驶员状态采集模块采集到驾驶员接电话行为、头部向右转动大于等于90°和驾驶员眨眼频率低于15次每秒至少其中之一,系统进行噪音警报与座椅震动警报、方向盘振动警报;
其次,当检测前轮转角范围在5°-10°时,判断驾驶员分心程度为C2,系统进行噪音警报、方向盘振动警报;
再次,当检测前轮转角大于10°时,当检测到车内人员互动程度检测模块观察到驾驶员与车内其他乘客交流时间大于等于5秒且目光注视车内其他乘客时间大于等于3秒和驾驶员头部向右转向角度大于90度并注视儿童座椅方向大于等于2秒至少其中之一则判断驾驶员被动分心,判断驾驶员分心程度为C3;
最后,当检测到驾驶员头部转动,看向侧向且3秒内头部未转回前方则判定驾驶员主动分心,判断驾驶员分心程度为C4,若无以上情况取消分心驾驶认定,恢复驾驶员驾驶状态判定为正常驾驶;
3)当初步判断驾驶员激进驾驶时,进入下一判断阶段:
首先,当驾驶员操作采集模块采集到驾驶员方向盘输入角加速度在1秒内持续增加时,判断驾驶员状态为D1,系统进行噪音警报,踏板振动警报、座椅震动警报和方向盘振动警报;
其次,当驾驶员操作采集模块采集到驾驶员方向盘输入角加速度1秒内不增加时,判断驾驶员状态为D2,且检测到驾驶员方向盘输入角加速度值3秒内一直递减,系统恢复驾驶员驾驶状态判定为正常驾驶。否则,维持驾驶员状态判定为D2,进行噪音警报和座椅震动警报。
上述方案中,所述动态分配驾驶权装置及动态分配驾驶权方法:
所述动态分配驾驶权装置,其组成为驾驶员方向盘力矩输入传感器、动态分配驾驶权电子控制元件、前轮转向电机、转向器;
当驾驶员转动方向盘时,驾驶员方向盘力矩输入传感器检测驾驶员方向盘力矩输入并将其转化为电信号发送给动态分配驾驶权电子控制元元件,动态分配驾驶权电子控制元件根据其内部设定的动态分配驾驶权方法,计算前轮转向电机应该输出的转矩,并向前轮转向电机发出电信号,控制前轮转向电机输出动态分配驾驶权电子控制元件决策的转向力矩,从而控制转向器完成转向。
当驾驶员驾驶状态判断模块判断驾驶员驾驶状态为C1、C2时,启用驾驶权分配模块,当驾驶员转动方向盘时,驾驶员方向盘力矩输入传感器将检测到的驾驶员方向盘输入力矩发送给动态分配驾驶权电子控制元件,动态分配驾驶权电子控制元件内部设定的动态分配驾驶权方法如下:驾驶员方向盘输入力矩M,令驾驶员驾驶权分配系数
汽车系统驾驶权分配系数为
σ2=1-σ1
最终方向盘输入力矩为
M总=σ1Mb+σ2M
上述方案中,所述模糊控制汽车转角方法:
当系统判断驾驶员驾驶状态为D1、D2时,启用辅助驾驶系统中的转向控制模块,该模块所用控制方法为模糊控制方法,该模糊控制方法输出为汽车前轮转角,其模糊集合定义为正大(PB)、正小(PS)、正常(Z)、负小(NS)、负小(NB),模糊规则定义如下,其中V为车速,Y为车偏离道路中心线的距离,PB为偏向道路内侧较多,PS为偏向道路内侧较少,Z为在道路正中,NS为偏向道路外侧较少NB为偏向道路外侧较多。
上述模糊控制规则为
上述方案中,所述人机共驾有效判断和协调系统包括驾驶员面部表情比例提取模块、人机共驾有效判断模块、人机共驾协调模块:
驾驶员面部表情比例提取模块,其用于接收驾驶员面部表情采集模块采取到的驾驶员现在表情,并分析、计算愤怒表情、高兴表情、悲伤表情、惊讶表情、厌恶表情、恐惧表情和其它表情各个表情所占的比例,驾驶员愤怒表情比例A、高兴表情比例B、悲伤表情概比例C、惊讶表情比例D、厌恶表情比例E、恐惧表情比例F、紧张表情比例G、其它表情比例H满足
A+B+C+D+E+F+G+H=1
人机共驾有效判断模块,其用于判断人机共驾系统是否处于稳定状态,其判断方法为:
当驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例大于等于50%时,以及驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例小于50%但高兴表情比例占比最多且除高兴表情外的表情比例都小于10%时,判断辅助驾驶系统执行驾驶权分配决策和前轮转角决策有效;
除上述情况以外的情况下判定辅助驾驶系统执行的驾驶权分配决策和前轮转角决策未能达到预期目的,即驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意;
人机共驾协调模块,其用于在人机共驾有效判断模块判断驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意时,对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策进行调整并观察决策调整后的驾驶员面部表情比例提取模块中高兴表情比例、紧张表情比例的协调方法:
当驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意时:
若此时对驾驶员状态判定为C1、C2,则令驾驶权分配模块将驾驶员驾驶权提升10%,若提升驾驶员驾驶权后,驾驶员当驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例上升,则继续提升10%驾驶员驾驶权至驾驶员高兴表情比例大于等于50%,设定驾驶员驾驶权上限为80%,当检测到提升驾驶员驾驶权后驾驶员高兴表情比例未上升,证明驾驶员仍然对辅助驾驶系统决策不满意,则令驾驶权分配模块停止工作;
若此时对驾驶员状态判定为C3,当检测到车内人员互动程度检测模块观察到驾驶员与车内其他乘客交流时间大于等于5秒且目光注视车内其他乘客时间大于等于3秒,认定驾驶员因他人原因导致分心驾驶,控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2,进行对话警报,播放“请驾驶员专心开车”语音;
当检测到驾驶员头部向右转向角度大于90度,驾驶员注视儿童座椅方向大于等于2秒并且驾驶员紧张表情比例大于驾驶员高兴表情比例,认定驾驶员驾驶行为受到儿童影响,则控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2并根据驾驶员状态采集模块采集到的后排儿童年龄信息,若儿童年龄在0-3岁范围内,进行对话警报,播放“请驾驶员顾及儿童时专心开车”语音;
若儿童年龄在4-8岁范围内,进行对话警报,播放“请驾驶员专心开车”语音;
若儿童年龄为9岁及以上,进行对话警报,播放“请后排乘客保持安静”语音;
若此时对驾驶员状态判定为C4,认定驾驶员主动分心驾驶,,则控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2,进行对话警报,播放“请驾驶员专心开车”语音;
若此时对驾驶员状态判定为D1、D2,汽车行驶状态采集系统采集到车内后排儿童座椅的侧倾角大于20°且车内儿童悲伤表情所占比例为50%以上,则判定为特殊情况,进行摄像头闪动警报3秒,若驾驶员不响应警报,则关闭摄像头闪动警报,令驾驶权分配模块停止工作,驾驶员自行操作,只控制汽车侧向加速度小于3m/s2,横摆角速度小于4m/s2,前轮转角小于30°,以保证车内人员安全,否则将驾驶权完全交还给驾驶员。
以上实施例仅用于说明本发明的设计思想和特点,并不用于限制本发明,凡应用本发明所揭示的原理、设计思路所做的修改和等同变换,均在本发明的保护范围内。
Claims (10)
1.一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,其包括汽车行驶状态采集系统、人员信息采集系统、辅助驾驶系统、人机共驾稳定判断和协调系统;
汽车行驶状态采集系统,其用于采集汽车车速、转向系统的转向轴负荷及轮胎气压、汽车侧向加速度、纵向加速度,以及汽车和儿童座椅的垂向加速度、横摆角速度和侧倾角、左前轮转角信息,右前轮转角通过标定系统得到左前轮转角在不同轮胎气压下的关系得到;
人员信息采集系统,其用于采集驾驶员方向盘输入力矩、驾驶员方向盘输入转角和驾驶员面部表情,驾驶员与前、后排乘客交流时长以及驾驶员注视前、后排乘客时长;
辅助驾驶系统,其用于根据所采集的人员信息采集系统输出的信息判断驾驶员驾驶状态,判断驾驶员分心时分配驾驶员和辅助驾驶系统的驾驶权,判断驾驶员激进驾驶的情况下控制汽车前轮转角,判断模块判断驾驶员分心或激进驾驶时根据具体情况的不同而发出不同警报;
人机共驾稳定判断和协调系统,其用于分析、计算愤怒表情、高兴表情、悲伤表情、惊讶表情、厌恶表情、恐惧表情和其他表情各个表情所占的比例,判断驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意时,对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策进行调整。
2.根据权利要求1所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,所述的汽车行驶状态采集系统利用安装在悬架导向机构上的位移传感器,采集左前轮转角信息,右前轮转角通过标定系统得到左前轮转角在不同轮胎气压下的关系得到,具体为:
θr=k1θl 2+k2θl+b
其中,θr为右前轮转角,θl为左前轮转角,k1、k2、b为系数,利用布置在转向轴上的应变片测量转向系统的转向轴负荷,利用安装在底盘中心的陀螺仪检测汽车横摆角速度、侧倾角,利用安装在后排儿童座椅上的陀螺仪测量儿童座椅垂向加速度、横摆角速度、侧倾角,其中不同儿童乘坐下的儿童座椅的动态质心位置由儿童重量信息、儿童身高信息进行参数估计和计算获得,利用安装在汽车上的加速度传感器测量汽车侧向加速度、纵向加速度和垂向加速度。
3.根据权利要求1所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,所述人员信息采集系统包括驾驶员操作采集模块、驾驶员状态采集模块、驾驶员面部表情采集模块、车内人员互动程度检测模块;
驾驶员操作采集模块,其用于利用安装于转向传动机构上的转矩传感器和角加速度传感器定期采集驾驶员方向盘输入力矩和方向盘输入角加速度,设当前车速为v,单位km/h,数据采集间隔系数为z,当v大于140km/h时,z的值为0.1;当v小于等于140km/h时,其值为
根据人员信息采集系统采集的驾驶员方向盘输入转角信息,若驾驶员输入方向盘转角小于60°,则相邻两次数据采集间隔为0.1z秒;若驾驶员输入方向盘转角大于等于60°小于120°,则相邻两次数据采集间隔为0.05z秒;若驾驶员输入方向盘转角大于等于120°,则相邻两次数据采集间隔为0.02z秒;
驾驶员状态采集模块,其用于利用车内摄像设备判断驾驶员是否有接电话行为,并捕捉驾驶员眨眼频率和头部向右转向角度以及后方儿童年龄;
驾驶员面部表情采集模块,采集驾驶员面部表现出的愤怒表情、高兴表情、悲伤表情、惊讶表情、厌恶表情、恐惧表情、紧张表情,并采集后排儿童座椅上儿童是否有悲伤表情;
车内人员互动程度检测模块,其用于检测驾驶员与前、后排乘客交流时长以及驾驶员注视前、后排乘客时长。
4.根据权利要求1所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,所述辅助驾驶系统包括驾驶员驾驶状态判断模块、驾驶权分配模块、转向控制模块、警报模块;
驾驶员驾驶状态判断模块,其用于根据驾驶员操作采集模块和驾驶员状态采集模块所采集的信息将驾驶员驾驶行为分为正常、分心、激进三种情况;
驾驶权分配模块,其用于在驾驶员驾驶状态判断模块判断驾驶员分心时分配驾驶员和辅助驾驶系统的驾驶权;
转向控制模块,用于在驾驶员驾驶状态判断模块判断驾驶员激进驾驶的情况下控制汽车前轮转角在0°-40°范围内;
警报模块,其用于在驾驶员驾驶状态判断模块判断驾驶员分心或激进驾驶时进行噪音警报、踏板振动警报、座椅震动警报、摄像头闪动警报、方向盘振动警报、对话警报,其中对话警报包含“请驾驶员顾及儿童时专心开车”、“请驾驶员专心开车”、“请后排乘客保持安静”、“请驾驶员减速慢行”语音。
5.根据权利要求4所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,所述驾驶员驾驶状态判断模块进行判断的驾驶员状态初步判断方法:
辅助驾驶系统第一预设阈值Ma,其求解过程如下,驾驶员为克服汽车转向系统阻力需要对方向盘施加的转向力矩为
其中,Js为转向柱转动惯量,is为传动比,δ为前轮转角,bs为转向柱阻尼比,由汽车行驶状态采集系统获取,Tr为方向盘回正力矩,Tz为转向助力系统输出力矩;在驾驶员驾驶汽车前,首先对驾驶员进行预测试,得到驾驶员在车速为50km/h时的最小方向盘输入力矩Mg,其值和驾驶员为克服汽车转向系统阻力需要对方向盘施加的转向力矩Ma相比较,较大者被设定为第一预设阈值;
驾驶员标准方向盘输入力矩定义为辅助驾驶系统第二预设阈值Mb,其值为
其中,MR为转向阻力矩,Dsw为方向盘直径,R为车轮半径,ip为转向系力传动比,其值为其中f为轮胎和路面间的滑动摩擦系数,G为转向系统的转向轴负荷,由汽车行驶状态采集系统采集得到,p为轮胎气压,由汽车行驶状态采集系统采集得到;
驾驶员极限方向盘输入力矩Mc由对驾驶员进行预测实验得到;
驾驶员在车速为50km/h时的方向盘力矩输入边界值由对驾驶员进行测试得到,其从小到大排列分别为Md、Me;
当驾驶员操纵力矩M输入时,根据其所在力矩范围,初步判断驾驶员驾驶状态,判断方法为:
1)当有驾驶员方向盘输入力矩M∈[Me,Md]、驾驶员方向盘输入力矩M∈[Ma,Me]且车速小于40km/h和驾驶员方向盘输入力矩M∈[Ma,Me]且车速大于80km/h情况至少其中之一时判断驾驶员正常驾驶;
2)当驾驶员方向盘输入力矩M∈[Ma,Me]且车速大于40km/h小于80km/h时,判断驾驶员分心驾驶;
3)当有驾驶员方向盘输入力矩M∈[Md,Mc]和车速大于80km/h情况至少其中之一时,判断驾驶员激进驾驶。
6.根据权利要求5所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,所述驾驶员状态初步判断方法细分为如下情况:
1)当初步判断驾驶员正常驾驶时,系统不进行辅助操作;
2)当初步判断驾驶员分心驾驶时,进入下一判断阶段:
首先,当检测前轮转角范围在0°-5°时,判断驾驶员分心程度为C1,若同时驾驶员状态采集模块采集到驾驶员接电话行为、头部向右转动大于等于90°和驾驶员眨眼频率低于15次每秒至少其中之一,系统进行噪音警报与座椅震动警报、方向盘振动警报;
其次,当检测前轮转角范围在5°-10°时,判断驾驶员分心程度为C2,系统进行噪音警报、方向盘振动警报;
再次,当检测前轮转角大于10°时,当检测到车内人员互动程度检测模块观察到驾驶员与车内其他乘客交流时间大于等于5秒且目光注视车内其他乘客时间大于等于3秒和驾驶员头部向右转向角度大于90度并注视儿童座椅方向大于等于2秒至少其中之一则判断驾驶员被动分心,判断驾驶员分心程度为C3;
最后,当检测到驾驶员头部转动,看向侧向且3秒内头部未转回前方则判定驾驶员主动分心,判断驾驶员分心程度为C4,若无以上情况取消分心驾驶认定,恢复驾驶员驾驶状态判定为正常驾驶;
3)当初步判断驾驶员激进驾驶时,进入下一判断阶段:
首先,当驾驶员操作采集模块采集到驾驶员方向盘输入角加速度在1秒内持续增加时,判断驾驶员状态为D1,系统进行噪音警报,踏板振动警报、座椅震动警报和方向盘振动警报;
其次,当驾驶员操作采集模块采集到驾驶员方向盘输入角加速度1秒内不增加时,判断驾驶员状态为D2,且检测到驾驶员方向盘输入角加速度值3秒内一直递减,系统恢复驾驶员驾驶状态判定为正常驾驶;否则,维持驾驶员状态判定为D2,进行噪音警报和座椅震动警报。
7.根据权利要求4所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,驾驶权分配模块中,包括动态分配驾驶权装置及动态分配驾驶权方法:
所述动态分配驾驶权装置,其组成为驾驶员方向盘力矩输入传感器、动态分配驾驶权电子控制元件、前轮转向电机、转向器;
当驾驶员转动方向盘时,驾驶员方向盘力矩输入传感器检测驾驶员方向盘力矩输入并将其转化为电信号发送给动态分配驾驶权电子控制元件,动态分配驾驶权电子控制元件根据其内部设定的动态分配驾驶权方法,计算前轮转向电机应该输出的转矩,并向前轮转向电机发出电信号,控制前轮转向电机输出动态分配驾驶权电子控制元件决策的转向力矩,从而控制转向器完成转向;
当驾驶员驾驶状态判断模块判断驾驶员驾驶状态为C1、C2时,启用驾驶权分配模块,当驾驶员转动方向盘时,驾驶员方向盘力矩输入传感器将检测到的驾驶员方向盘输入力矩发送给动态分配驾驶权电子控制元件,动态分配驾驶权电子控制元件内部设定的动态分配驾驶权方法如下:驾驶员方向盘输入力矩M,令驾驶员驾驶权分配系数
汽车系统驾驶权分配系数为
σ2=1-σ1
最终方向盘输入力矩为
M总=σ1Mb+σ2M。
8.根据权利要求4所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,转向控制模块中,控制方法如下:
当系统判断驾驶员驾驶状态为D1、D2时,启用辅助驾驶系统中的转向控制模块,该模块所用控制方法为模糊控制方法,该模糊控制方法输出为汽车前轮转角,其模糊集合定义为正大(PB)、正小(PS)、正常(Z)、负小(NS)、负大 (NB),模糊规则定义如下,其中V 为车速,Y为车偏离道路中心线的距离,PB为偏向道路内侧较多,PS为偏向道路内侧较少,Z为在道路正中,NS为偏向道路外侧较少,NB为偏向道路外侧较多。
9.根据权利要求1所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,人机共驾稳定判断和协调系统中,所述人机共驾稳定判断和协调系统包括驾驶员面部表情比例提取模块、人机共驾有效判断模块、人机共驾协调模块:
驾驶员面部表情比例提取模块,其用于接收驾驶员面部表情采集模块采取到的驾驶员现在表情,并分析、计算愤怒表情、高兴表情、悲伤表情、惊讶表情、厌恶表情、恐惧表情和其他表情各个表情所占的比例,驾驶员愤怒表情比例A、高兴表情比例B、悲伤表情比例E、惊讶表情比例F、厌恶表情比例G、恐惧表情比例H、紧张表情比例I、其它表情比例J满足
A+B+E+F+G+H+I+J=1
人机共驾有效判断模块,其用于判断人机共驾系统是否处于稳定状态,其判断方法为:
当驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例大于等于50%时,以及驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例小于50%但高兴表情比例占比最多且除高兴表情外的表情比例都小于10%时,判断辅助驾驶系统执行驾驶权分配决策和前轮转角决策有效,其他情况下判定辅助驾驶系统执行的驾驶权分配决策和前轮转角决策未能达到预期目的,即驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意;
人机共驾协调模块,其用于在人机共驾有效判断模块判断驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意时,对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策进行调整并观察决策调整后的驾驶员面部表情比例提取模块中高兴表情比例、紧张表情比例的协调方法:
当驾驶员对辅助驾驶系统执行的驾驶权分配决策和前轮转角决策不满意时:
若此时对驾驶员状态判定为C1、C2,则令驾驶权分配模块将驾驶员驾驶权提升10%,若提升驾驶员驾驶权后,驾驶员当驾驶员面部表情比例提取模块提取到驾驶员面部表情中高兴表情比例上升,则继续提升10%驾驶员驾驶权至驾驶员高兴表情比例大于等于50%,设定驾驶员驾驶权上限为80%,当检测到提升驾驶员驾驶权后驾驶员高兴表情比例未上升,证明驾驶员仍然对辅助驾驶系统决策不满意,则令驾驶权分配模块停止工作;
若此时对驾驶员状态判定为C3,当检测到车内人员互动程度检测模块观察到驾驶员与车内其他乘客交流时间大于等于5秒且目光注视车内其他乘客时间大于等于3秒,认定驾驶员因他人原因导致分心驾驶,控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2,进行对话警报,播放“请驾驶员专心开车”语音;当检测到驾驶员头部向右转向角度大于90度,驾驶员注视儿童座椅方向大于等于2秒并且驾驶员紧张表情比例大于驾驶员高兴表情比例,认定驾驶员驾驶行为受到儿童影响,则控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2并根据驾驶员状态采集模块采集到的后排儿童年龄信息,若儿童年龄在0-3岁范围内,进行对话警报,播放“请驾驶员顾及儿童时专心开车”语音;若儿童年龄在4-8岁范围内,进行对话警报,播放“请驾驶员专心开车”语音;若儿童年龄为9岁及以上,进行对话警报,播放“请后排乘客保持安静”语音;
若此时对驾驶员状态判定为C4,认定驾驶员主动分心驾驶,则控制汽车纵向加速度小于0.8m/s2,横摆角速度小于4m/s2,进行对话警报,播放“请驾驶员专心开车”语音;
若此时对驾驶员状态判定为D1、D2,汽车行驶状态采集系统采集到车内后排儿童座椅的侧倾角大于20°且车内儿童悲伤表情所占比例为50%以上,则判定为特殊情况,进行摄像头闪动警报3秒,若驾驶员不响应警报,则关闭摄像头闪动警报,令驾驶权分配模块停止工作,驾驶员自行操作,只控制汽车侧向加速度小于3m/s2,横摆角速度小于4m/s2,前轮转角小于30°,以保证车内人员安全,否则将驾驶权完全交还给驾驶员。
10.根据权利要求1所述的一种基于驾驶员状态的分层架构人机共驾系统,其特征在于,所述基于驾驶员状态的分层架构人机共驾系统在可以判断汽车行驶平顺性、操纵稳定性并作出调整:
检测汽车垂直方向上的加速度和后排儿童座椅垂直方向上的加速度,若后排儿童座椅垂直方向上的加速度低于汽车垂直方向上的加速度的70%,则评定该汽车有良好的行驶平顺性;若后排儿童座椅垂直方向上的加速度大于等于汽车垂直方向上的加速度的70%,且车内儿童悲伤表情所占比例大于等于50%,为照顾后排儿童承受能力低,同时降低后排儿童乘坐震感,播放“请驾驶员减速慢行”语音至车内儿童悲伤表情所占比例小于50%;
检测汽车侧倾角和后排儿童座椅侧倾角,若后排儿童座椅侧倾角低于汽车侧倾角值的50%,则评定该汽车舒适性良好;若后排儿童座椅侧倾角大于等于汽车侧倾角值的50%且车内儿童悲伤表情所占比例大于等于50%,则控制汽车侧向加速度小于3m/s2,控制儿童座椅横摆角速度小于4m/s2至车内儿童悲伤表情所占比例小于50%。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910954724.2A CN110539799B (zh) | 2019-10-09 | 2019-10-09 | 一种基于驾驶员状态的分层架构人机共驾系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910954724.2A CN110539799B (zh) | 2019-10-09 | 2019-10-09 | 一种基于驾驶员状态的分层架构人机共驾系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110539799A CN110539799A (zh) | 2019-12-06 |
CN110539799B true CN110539799B (zh) | 2021-07-23 |
Family
ID=68715408
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910954724.2A Expired - Fee Related CN110539799B (zh) | 2019-10-09 | 2019-10-09 | 一种基于驾驶员状态的分层架构人机共驾系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110539799B (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7399774B2 (ja) * | 2020-03-31 | 2023-12-18 | 株式会社日立製作所 | 移動体制御システム |
CN111703434B (zh) * | 2020-06-01 | 2021-08-06 | 哈尔滨工业大学 | 一种自动驾驶下被动控制权切换听觉提示设计方法 |
US11597408B2 (en) * | 2020-07-09 | 2023-03-07 | Aptiv Technologies Limited | Vehicle control system |
CN112455533B (zh) * | 2020-10-29 | 2021-12-14 | 天水师范学院 | 一种用于自动驾驶汽车的转向助力方法 |
CN113296443B (zh) * | 2021-05-24 | 2022-08-26 | 中国汽车工程研究院股份有限公司 | 一种基于底盘参数选型的路噪控制分析系统 |
CN113200056B (zh) * | 2021-06-22 | 2022-04-08 | 吉林大学 | 一种非完全信息非合作博弈人机共驾控制方法 |
CN113635904A (zh) * | 2021-09-10 | 2021-11-12 | 安波福电子(苏州)有限公司 | 用于检测激进驾驶状态的检测方法、检测装置 |
CN113650609B (zh) * | 2021-09-28 | 2023-03-24 | 中国科学技术大学先进技术研究院 | 基于模糊规则的人机共驾控制权柔性转移方法及系统 |
CN113978548B (zh) * | 2021-11-12 | 2023-01-31 | 京东鲲鹏(江苏)科技有限公司 | 应用于无人车的转向协同控制方法、装置、设备及介质 |
CN114348108B (zh) * | 2021-12-06 | 2024-03-19 | 江苏大学 | 人机共驾多模式切换控制器、应用该控制器的转向系统及多模式切换控制方法 |
CN114179740A (zh) * | 2021-12-23 | 2022-03-15 | 芜湖雄狮汽车科技有限公司 | 用于车辆中安抚儿童的方法及装置 |
CN114537413B (zh) * | 2022-03-21 | 2024-09-24 | 东南大学 | 一种基于驾驶行为预测的辅助驾驶控制方法 |
CN115489585B (zh) * | 2022-09-27 | 2024-08-27 | 吉林大学 | 一种适用于智能汽车的人机共驾型线控转向控制系统 |
CN118457561B (zh) * | 2024-07-10 | 2024-09-03 | 吉林大学 | 一种智能转向稳定性控制方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106627589A (zh) * | 2016-12-27 | 2017-05-10 | 科世达(上海)管理有限公司 | 一种车辆行驶安全辅助方法、系统及车辆 |
CN107662611A (zh) * | 2017-11-06 | 2018-02-06 | 吉林大学 | 一种基于驾驶员情绪识别的自动驾驶模式切换系统 |
CN109949508A (zh) * | 2017-05-15 | 2019-06-28 | 成都中技智慧企业管理咨询有限公司 | 一种共享设备的安全管理方法 |
-
2019
- 2019-10-09 CN CN201910954724.2A patent/CN110539799B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106627589A (zh) * | 2016-12-27 | 2017-05-10 | 科世达(上海)管理有限公司 | 一种车辆行驶安全辅助方法、系统及车辆 |
CN109949508A (zh) * | 2017-05-15 | 2019-06-28 | 成都中技智慧企业管理咨询有限公司 | 一种共享设备的安全管理方法 |
CN107662611A (zh) * | 2017-11-06 | 2018-02-06 | 吉林大学 | 一种基于驾驶员情绪识别的自动驾驶模式切换系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110539799A (zh) | 2019-12-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110539799B (zh) | 一种基于驾驶员状态的分层架构人机共驾系统 | |
CN102398602B (zh) | 用于车辆的控制系统 | |
CN104627180B (zh) | 一种半主动巡航控制系统及其方法 | |
CN112046454B (zh) | 一种基于车辆环境识别的自动紧急制动方法 | |
EP2517952B1 (en) | Rider characteristics assessment device and straddle-ridden vehicle provided therewith | |
CN107351825B (zh) | 车辆的速度控制系统以及操作其的方法 | |
CN108583430B (zh) | 一种用于检测和提醒驾驶员分心的驾驶系统及判断方法 | |
CN105711588A (zh) | 一种车道保持辅助系统和车道保持辅助方法 | |
CN108189763A (zh) | 一种分析驾驶员驾驶行为的方法及专用智能车载后视镜 | |
CN112590801B (zh) | 一种基于驾驶员疲劳程度的前方碰撞预警控制方法 | |
CN108639065B (zh) | 一种基于视觉的车辆安全行驶控制方法 | |
CN104260725A (zh) | 一种含有驾驶员模型的智能驾驶系统 | |
CN114987539B (zh) | 一种基于风险场模型的自动驾驶汽车个性化碰撞分级预警方法及系统 | |
CN102874259A (zh) | 一种汽车驾驶员情绪监视及车辆控制系统 | |
CN107128307A (zh) | 一种车辆巡航控制方法、装置及汽车 | |
CN109017758B (zh) | 一种先行调节的车辆稳定控制系统和方法 | |
CN110239556B (zh) | 一种驾驶员即时操控能力感知方法 | |
CN109987085A (zh) | 车辆及其控制方法和装置 | |
CN113580867A (zh) | 悬架的控制方法、装置和车辆 | |
CN112874515A (zh) | 利用驾驶姿态对驾驶辅助系统进行安全提醒的系统和方法 | |
Lu et al. | From vehicle stability control to intelligent personal minder: Real-time vehicle handling limit warning and driver style characterization | |
CN116476588A (zh) | 一种车辆主动悬架的控制方法及系统 | |
CN205819182U (zh) | 基于侧风影响的车道偏移控制系统 | |
CN209921295U (zh) | 一种横纵向车道中心保持系统 | |
CN111731280A (zh) | 车辆的控制装置、车辆的控制方法及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210723 |