CN113954848A - 辅助驾驶方法及系统、车辆及计算机存储介质 - Google Patents

辅助驾驶方法及系统、车辆及计算机存储介质 Download PDF

Info

Publication number
CN113954848A
CN113954848A CN202111473610.XA CN202111473610A CN113954848A CN 113954848 A CN113954848 A CN 113954848A CN 202111473610 A CN202111473610 A CN 202111473610A CN 113954848 A CN113954848 A CN 113954848A
Authority
CN
China
Prior art keywords
driving
driver
control instruction
fatigue
fatigue driving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111473610.XA
Other languages
English (en)
Inventor
朱仕阳
董志华
黄柳巧
朱槿乔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Avatr Technology Chongqing Co Ltd
Original Assignee
Avatr Technology Chongqing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Avatr Technology Chongqing Co Ltd filed Critical Avatr Technology Chongqing Co Ltd
Priority to CN202111473610.XA priority Critical patent/CN113954848A/zh
Publication of CN113954848A publication Critical patent/CN113954848A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/229Attention level, e.g. attentive to driving, reading or sleeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/26Incapacity

Abstract

本申请提供一种辅助驾驶方法,包括:获取汽车行驶过程中驾驶员的第一驾驶状态信息;依照所述第一驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶;响应于所述驾驶员当前驾驶状态为疲劳驾驶,则判断所述驾驶员的疲劳驾驶等级;以及依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令以改善所述驾驶员的当前驾驶状态。本申请可有效改善驾驶员的疲劳状态,提升驾驶安全性。此外,一种辅助驾驶系统、车辆及计算机存储介质也被一同提出。

Description

辅助驾驶方法及系统、车辆及计算机存储介质
技术领域
本发明涉及智能汽车技术领域,特别是涉及一种辅助驾驶方法及系统、车辆及计算机存储介质。
背景技术
目前,随着我国国民经济高速稳步的发展,居民收入和购买能力也稳步提升。越来越多的家庭都购买了小轿车,但是随着汽车保有量的提升,更多与汽车相关的问题凸显出来。特别是在节假日探亲、旅游、民工返乡等春运客流的集中到来,长途货物运输量的增长,造成客货汽车超载,超速、疲劳驾驶等违章行为严重,特别是因驾驶员疲劳驾驶所引发的重特大交通事故,造成群死群伤的情况时有发生。
因此,如何避免或改善上述疲劳驾驶问题,降低疲劳驾驶所带来的安全隐患,提高行车安全;同时在此过程中给驾驶员带来全新的、非凡的体验,是本申请所要解决的问题。
发明内容
基于此,有必要针对上述问题,提供一种辅助驾驶方法,包括:
获取汽车行驶过程中驾驶员的第一驾驶状态信息;
依照所述第一驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶;
响应于所述驾驶员当前驾驶状态为疲劳驾驶,则判断所述驾驶员的疲劳驾驶等级;以及
依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令以改善所述驾驶员的当前驾驶状态。
上述辅助驾驶方法,通过先获取汽车行驶过程中驾驶员的第一驾驶状态信息,然后依照该第一驾驶状态信息判断驾驶员当前驾驶状态是否为疲劳驾驶;同时在判断驾驶员当前驾驶状态为疲劳驾驶时;再进一步判断驾驶员的疲劳驾驶等级;最后依照确定的疲劳驾驶等级,输出与之对应的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。一方面,降低了疲劳驾驶所带来的安全隐患,提高了行车安全;另一方面,透过对疲劳驾驶等级的判定以及与之相应的汽车内部环境改变,来为驾驶员带来全新的、非凡的疲劳驾驶改善体验。
在其中一个实施例中,所述第一驾驶状态信息包括眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少一种;
所述依照所述驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶的步骤,包括:
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少一种超过对应的预设阈值,则判定所述驾驶员当前驾驶状态为疲劳驾驶。
在其中一个实施例中,所述疲劳驾驶等级包括轻度疲劳驾驶、中度疲劳驾驶和重度疲劳驾驶;
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的任意一种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为轻度疲劳驾驶;
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少两种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为中度疲劳驾驶;
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少三种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为重度疲劳驾驶。
在其中一个实施例中,所述控制指令包括音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的至少一种;
所述依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令的步骤包括:
响应于所述驾驶员当前疲劳驾驶等级为轻度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的任意一种控制指令;
响应于所述驾驶员当前疲劳驾驶等级为中度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的至少两种控制指令;
响应于所述驾驶员当前疲劳驾驶等级为重度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令和车窗控制指令中的至少三种控制指令。
在其中一个实施例中,所述第一驾驶状态信息还包括驾驶员视线偏离正前方的时长;
所述方法还包括:
判断所述时长是否超过预设阈值;
响应于所述时长超过预设阈值,则判定所述驾驶员当前驾驶分心,并输出告警信号。
在其中一个实施例中,所述辅助驾驶方法还包括:
获取所述控制指令输出后预设时间内所述驾驶员的第二驾驶状态信息;
基于所述第二驾驶状态信息判断所述驾驶员是否仍处于疲劳驾驶;以及
响应于所述驾驶员仍处于疲劳驾驶,则输出额外辅助手段以改善所述驾驶员的驾驶状态。
在其中一个实施例中,所述输出额外辅助手段的步骤,具体包括:打开汽车主驾驶位按摩功能、打开设有提神物品的手套箱或导航至就近停车场中的至少一种。
基于同样的发明构思,本申请还提供一种辅助驾驶系统,包括:
获取单元,用于获取汽车行驶过程中驾驶员的第一驾驶状态信息;
疲劳驾驶判断单元,用于依照所述第一驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶;
疲劳等级判断单元,用于在所述驾驶员当前驾驶状态为疲劳驾驶时,判断所述驾驶员的疲劳驾驶等级;以及
控制指令输出单元,依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令以改善所述驾驶员的当前驾驶状态。
上述辅助驾驶系统,通过设置获取单元来获取汽车行驶过程中驾驶员的第一驾驶状态信息,疲劳驾驶判断单元依照该第一驾驶状态信息判断驾驶员当前驾驶状态是否为疲劳驾驶;疲劳等级判断单元在判断驾驶员当前驾驶状态为疲劳驾驶时,再进一步判断驾驶员的疲劳驾驶等级;最后由控制指令输出单元依照确定的疲劳驾驶等级,输出与之对应的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。一方面,降低了疲劳驾驶所带来的安全隐患,提高了行车安全;另一方面,透过对疲劳驾驶等级的判定以及与之相应的汽车内部环境改变,来为驾驶员带来全新的、非凡的疲劳驾驶改善体验。
基于同样的发明构思,本申请还提供一种车辆,所述车辆配备有如前述所述的辅助驾驶系统。
上述车辆,由于配备有前述所述的辅助驾驶系统,而该辅助驾驶系统,通过设置获取单元来获取汽车行驶过程中驾驶员的第一驾驶状态信息,疲劳驾驶判断单元依照该第一驾驶状态信息判断驾驶员当前驾驶状态是否为疲劳驾驶;疲劳等级判断单元在判断驾驶员当前驾驶状态为疲劳驾驶时,再进一步判断驾驶员的疲劳驾驶等级;最后由控制指令输出单元依照确定的疲劳驾驶等级,输出与之对应的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。一方面,提升了该车辆的行车安全,降低了该车辆的安全隐患;另一方面,透过对疲劳驾驶等级的判定以及与之相应的汽车内部环境改变,来为驾驶员驾乘该车辆时带来全新的、非凡的疲劳驾驶改善体验。
基于同样的发明构思,本申请还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时可用于执行前述任一所述的方法。
附图说明
图1为一实施例中的辅助驾驶方法的流程示意图;
图2为图1中步骤S200的子步骤示意图;
图3为图1中步骤S300的子步骤示意图;
图4为图1中步骤S400的子步骤示意图
图5为另一实施例中的辅助驾驶方法的流程示意图;
图6为又一实施例中的辅助驾驶方法的流程示意图;
图7为一实施例中的辅助驾驶系统的模块示意图。
具体实施方式
为了便于理解本发明,下面将参照相关附图对本发明进行更全面的描述。附图中给出了本发明的较佳实施方式。但是,本发明可以以许多不同的形式来实现,并不限于本文所描述的实施方式。相反地,提供这些实施方式的目的是使对本发明的公开内容理解的更加透彻全面。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施方式的目的,不是旨在于限制本发明。
目前,随着我国国民经济高速稳步的发展,居民收入和购买能力也稳步提升。越来越多的家庭都购买了小轿车,但是随着汽车保有量的提升,更多与汽车相关的问题凸显出来。特别是在节假日探亲、旅游、民工返乡等春运客流的集中到来,长途货物运输量的增长,造成客货汽车超载,超速、疲劳驾驶等违章行为严重,特别是因驾驶员疲劳驾驶所引发的重特大交通事故,造成群死群伤的情况时有发生。
因此,如何避免或改善上述疲劳驾驶问题,降低疲劳驾驶所带来的安全隐患,提高行车安全;同时在此过程中给驾驶员带来全新的、非凡的体验,是本申请所要解决的问题。
基于此,本申请希望提供一种新的方案,以解决前述所记载的技术问题,其具体构成将在后续实施例中得以详细阐述。
根据本发明的第一个方面,可参照图1,为本申请提供的一种辅助驾驶方法的流程示意图。该辅助驾驶方法可以包括步骤:S100-S400。
步骤S100,获取汽车行驶过程中驾驶员的第一驾驶状态信息。
具体地,可透过设置在汽车内部的摄像头或者ISP图像传感器来获取,其获取的可以仅是图片数据,也可以是一段时间内的视频数据(借由摄像头对图像数据进行一帧一帧不间断捕捉)。相应地,在获取方式上,可以是周期性不间断地获取,也可以是周期性间断地获取。应当理解,对于获取的周期和间断的时长可以依照实际要求进行选择和调整,本申请对此没有进一步要求和限制。
本申请中,所获取的主要为一段时间内的视频数据,该些视频数据中包含了驾驶员的面部、眼部和头部运动特征信息。经由车载的视频解码器对视频进行解码后,送入车载主控IC,并借由AI算法对该视频数据中的每一帧图像进行预处理和分析,以获得驾驶员的第一驾驶状态信息。
可选地,该第一驾驶状态信息可例如包括眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少一种。该些第一驾驶状态信息可依照实际处理需要进行灵活调整,例如,仅获取其中两种第一驾驶状态信息,或者,仅获取其中一种第一驾驶状态信息,又或者,获取所有第一驾驶状态信息。
在另一种可选实施例中,该第一驾驶状态信息还可以包括低头时间或视野偏离正前方的时长等信息。
步骤S200,依照所述第一驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶。
具体地,在前述步骤S100获取到驾驶员的实时第一驾驶状态信息后,即可透过该些第一驾驶状态信息判断驾驶员是否疲劳驾驶。
可选地,可辅助参阅图2,该判断驾驶员是否疲劳驾驶的步骤S200可以包括步骤S200a。
步骤200a,响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少一种超过对应的预设阈值,则判定所述驾驶员当前驾驶状态为疲劳驾驶。
具体地,以哈欠频率为例,若依照驾驶状态信息判断驾驶员在10分钟内连续打了5个哈欠,该频率与预设的标准阈值(10分钟内不超过1个哈欠)相比,明显超过,故此时即可判定驾驶员当前驾驶状态为疲劳驾驶。可选地,为了增加判断的精准度,应当尽可能多地结合该些第一驾驶状态信息进行判断。例如,可至少结合三种第一驾驶状态信息(哈欠频率、闭眼时长及嘴型)进行判断。
在另一种可选实施例中,在判断驾驶员当前驾驶状态为疲劳驾驶后,还可透过车载电器例如音箱、屏幕或座椅来为驾驶员发出警告。具体地,可例如通过播放警示音,屏幕闪烁或座椅震动等方式为驾驶员发出警告。
步骤S300,响应于所述驾驶员当前驾驶状态为疲劳驾驶,则判断所述驾驶员的疲劳驾驶等级。
具体地,依照疲劳程度可以将驾驶员的疲劳驾驶等级分为轻度、中度和重度三个等级。可以理解,还可以依照实际情况进行类似划分,本申请对此不作进一步限制。
可选地,可辅助参阅图3,该判断驾驶员疲劳等级的步骤可以包括子步骤S300a-S300c。
步骤S300a,响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的任意一种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为轻度疲劳驾驶。
具体地,考虑到实际上因为轻度疲劳驾驶所引发的事故概率较小,故本申请针对轻度疲劳驾驶的判定标准相对简单。也即是可透过上述任一种第一驾驶状态信息来作为判断驾驶员轻度疲劳驾驶的依据。以闭眼时长举例而言,通过对驾驶员的眼部进行监测,分析出驾驶员的眼睛在一定时间内闭合的时间比例超过了预设比例,则可以判定驾驶员当前出现了轻度疲劳驾驶。依照其余第一驾驶状态信息的判定可以参照此类推,在此不作进一步赘述。
考虑到驾驶员实际存在非疲劳驾驶状态,但出现偶然符合轻度疲劳驾驶的情况。故,为了降低系统的误判率,可以针对轻度疲劳驾驶设置一定的容错次数,也即是说,在偶然出现一次判定为轻度疲劳驾驶的情况时,系统不作下一步反应,而是继续获取驾驶员的第一驾驶状态信息。可以理解,针对可允许的容错次数可依照实际情况和具体的判定标准(例如针对依照眨眼频率所判定的轻度疲劳驾驶设置2次的容错次数,针对依照闭眼时长所判定的轻度疲劳驾驶设置3次的容错次数,针对依照眼睛开合度所判定的轻度疲劳驾驶设置1次的容错次数)进行选择和调整,本申请对此不作进一步限定。
步骤S300b,响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少两种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为中度疲劳驾驶。
具体地,考虑到实际上因为中度疲劳驾驶所引发的事故概率较大,故本申请针对中度疲劳驾驶的判定标准设置相对复杂,以期提高识别准确性,同时便于后续做出适应性的改善措施。也即,在判断中度疲劳驾驶时,可透过上述至少两种第一驾驶状态信息来作为判断驾驶员中度疲劳驾驶的依据。以闭眼时长和嘴型举例而言,通过对驾驶员的眼部进行监测,分析出驾驶员的眼睛在一定时间内闭合的时间比例超过了预设比例,同时,在该段时间内,驾驶员的嘴部长时间处于张开状态。则可以据此判定驾驶员当前出现了中度疲劳驾驶。其余第一驾驶状态信息的组合判定可以参照此类推,在此不作进一步赘述。
步骤S300c,响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少三种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为重度疲劳驾驶。
具体地,考虑到实际上因为重度疲劳驾驶所引发的事故概率最大,故本申请针对重度疲劳驾驶的判定标准设置更为复杂,以期提高识别准确性,及时性,同时便于后续做出适应性的改善措施。也即,在判断重度疲劳驾驶时,可透过上述全部第一驾驶状态信息来作为判断驾驶员重度疲劳驾驶的依据。通过对驾驶员的眼部和面部进行监测,分析出驾驶员在一定时间内上述信息均超过了预设比例。则可以据此判定驾驶员当前出现了重度疲劳驾驶。
本申请设置不同程度的疲劳驾驶判断标准。来适应性地判断驾驶员的驾驶状态,再结合具体的疲劳驾驶改善措施,在提高行车安全的同时,还可以带给用户非凡的、全新的体验。另外,通过在轻度疲劳驾驶时,设置了一定的容错次数,提升了驾驶员的驾乘体验,提高驾驶员对产品的满意度。
步骤S400,依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令以改善所述驾驶员的当前驾驶状态。
具体地,本申请的所述控制指令包括音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的至少一种。相应地,音乐控制指令可以用于控制车载音响的打开、关闭或音乐切换。氛围灯控制指令可以用于控制车载氛围灯的打开、关闭或颜色切换。香氛控制指令可以用于控制车载香氛的打开、关闭或香水切换。空调控制指令可以用于控制车载空调的打开、关闭、调高或调低。车窗控制指令可以用于控制车窗的打开程度。
可辅助参照图4,该依照不同的疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令的步骤可以包括:S400a-S400c。
步骤S400a,响应于所述驾驶员当前疲劳驾驶等级为轻度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的任意一种控制指令。
由于驾驶员处于轻度疲劳驾驶时,较易清醒,故在针对该等级下的疲劳改善措施选择时,可以仅输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的任意一种控制指令,从而控制汽车内部单一场景的改变,以帮助驾驶员改善驾驶状态。可以理解,还可以依照汽车内部电器的设置和实际情况对控制指令进行选择和调整,例如,在汽车设置有语音助手时,可通过语音助手发出语音的方式帮助驾驶员改善驾驶状态。本申请对此不作进一步限定。
步骤S400b,响应于所述驾驶员当前疲劳驾驶等级为中度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的至少两种控制指令。
由于驾驶员处于中度疲劳驾驶时,较难清醒,故在针对该等级下的疲劳改善措施选择时,可以结合至少两种控制指令来帮助驾驶员改善当前驾驶状态。例如,可通过输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的至少两种控制指令,来实现汽车内部至少两种场景的改变,以帮助驾驶员改善驾驶状态。例如,可通过音乐和氛围灯结合的方式来帮助舒缓驾驶员的疲劳感,营造轻松愉快的氛围,帮助其放松心情。可以理解,还可以依照汽车内部电器的设置和实际情况对控制指令进行组合,本申请对此不作进一步限定。
步骤S400c,响应于所述驾驶员当前疲劳驾驶等级为重度疲劳驾驶,则同时输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令和车窗控制指令。
由于驾驶员处于重度疲劳驾驶时,最难清醒,故在针对该等级下的疲劳改善措施选择时,可以结合所有的控制指令来帮助驾驶员改善当前驾驶状态。例如,可通过同时输出至少三种控制指令的方式,来实现汽车内部多场景的协同改变,以帮助驾驶员改善驾驶状态。示例性地,可通过同时输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令,来实现汽车内部多场景改变,例如,音乐和氛围灯结合、提供松弛神经的香水、开启面部吹风、打开车窗,从而帮助改善驾驶员的疲劳感。可以理解,还可以依照汽车内部电器的设置和实际情况对控制指令进行选择和调整,本申请对此不作进一步限定。
综上,本申请的辅助驾驶方法,通过先获取汽车行驶过程中驾驶员的第一驾驶状态信息,然后依照该第一驾驶状态信息判断驾驶员当前驾驶状态是否为疲劳驾驶;同时在判断驾驶员当前驾驶状态为疲劳驾驶时;再进一步判断驾驶员的疲劳驾驶等级;最后依照确定的疲劳驾驶等级,输出与之对应的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。
在另一种可选实施例中,所述第一驾驶状态信息还可以进一步包括驾驶员视线偏离正前方的时长;
可参照图5,本申请的辅助驾驶方法还可以包括步骤S510-S520。
步骤S510,判断所述时长是否超过预设阈值。
步骤S520,响应于所述时长超过预设阈值,则判定所述驾驶员当前驾驶分心,并输出告警信号。
具体地,当获取到包含驾驶员视线偏离正前方的时长信息时,可据此判断驾驶员在一段时间内没有看到前方道路的时间频率是否大于预定阈值,若是的话,则产生告警信号。另外,如果驾驶员正向前看,在特定时间段内闭眼的时间百分比超过预定阈值,则也可产生告警信号。示例性地,该告警信号可以包括声、光或电信号中的至少一种信号。
本方案可实现分心监测,亦可提升行车安全。
在另一种可选实施例中,可参照图6,本申请的辅助驾驶方法还可以包括步骤S610-S630。
步骤S610,获取所述控制指令输出后预设时间内所述驾驶员的第二驾驶状态信息;
步骤S620,基于所述第二驾驶状态信息判断所述驾驶员是否仍处于疲劳驾驶;以及
步骤S630,响应于所述驾驶员仍处于疲劳驾驶,则输出额外辅助手段以改善所述驾驶员的驾驶状态。
具体地,考虑到存在经由前述疲劳改善措施后仍不能改善驾驶员困意的情况。故本申请还额外设置了辅助手段,相应的启动条件在前述控制指令输出后预设时间内,针对疲劳驾驶的判断标准可参照前述有关描述进行了解。本申请对此不作进一步赘述。另外,有关预设时间的时长亦可依照实际需求和不同人群进行选择和调整。此实施例着重强调为驾驶员所提供的额外辅助手段。
可选地,所述额外辅助手段可以包括打开汽车主驾驶位按摩功能、打开设有提神物品的手套箱或导航至就近停车场中的至少一种。具体地,上述额外辅助手段可同步进行,也可以分步进行,还可以单独进行。另外,在具体实施时序上,也没有进一步限制。
示例性地,可在判断驾驶员仍处于疲劳驾驶后,先为导航至驾驶员附近(距离车辆直线距离最近处)停车场,待驾驶员到达该停车场后,再打开汽车主驾驶位按摩功能(头部、颈部、背部、腰部、腿部的全身按摩)。同时打开设有提神物品的手套箱。可选的提神物品包括湿巾、风油精等可刺激大脑神经的物品。
示例性地,还可在判断驾驶员仍处于疲劳驾驶后,同时为驾驶员提供附近停车场位置引导信息,并打开汽车主驾驶位按摩功能。待驾驶员到达该停车场后,打开设有提神物品的手套箱。
上述带有额外辅助手段的驾驶方法,可进一步帮助驾驶员改善驾驶疲劳,提升行车安全,并为驾驶员带来不一样的体验。
根据本发明的第二个方面,可参照图7,为本申请所提供的一种辅助驾驶系统的模块示意图。该系统可以包括获取单元100,疲劳驾驶判断单元200,疲劳等级判断单元300和控制指令输出单元400。
其中,获取单元100,主要用于获取汽车行驶过程中驾驶员的第一驾驶状态信息。具体地,获取单元100可以理解为设置在汽车内部的摄像头或者ISP图像传感器,其获取的可以仅是图片数据,也可以是一段时间内的视频数据(借由摄像头对图像数据进行一帧一帧不间断捕捉)。本申请中,所获取的主要为一段时间内的视频数据,该些视频数据中包含了驾驶员的面部、眼部和头部运动特征信息。经由车载的视频解码器对视频进行解码后,送入车载主控IC,并借由AI算法对该视频数据中的每一帧图像进行预处理和分析,以获得驾驶员的驾驶状态信息。该驾驶状态信息可例如包括眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少一种。进一步地,该第一驾驶状态信息还可以包括低头时间或视野偏离正前方的时长等信息。
疲劳驾驶判断单元200,用于依照所述第一驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶。
疲劳等级判断单元300,用于在所述驾驶员当前驾驶状态为疲劳驾驶时,判断所述驾驶员的疲劳驾驶等级。
控制指令输出单元400,依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。
可以理解,针对本申请第二方面的系统的描述,可以参照前述方法进行了解,本申请在此不作进一步赘述。应当理解地,上述疲劳驾驶判断单元200,疲劳等级判断单元300,控制指令输出单元400所执行的具体主体可以是设置于车辆上的主控芯片。该主控芯片可以采用主流车载CPU,即QualcommA8155。
上述辅助驾驶系统,通过设置获取单元100来获取汽车行驶过程中驾驶员的第一驾驶状态信息,疲劳驾驶判断单元200依照该第一驾驶状态信息判断驾驶员当前驾驶状态是否为疲劳驾驶;疲劳等级判断单元300在判断驾驶员当前驾驶状态为疲劳驾驶时,再进一步判断驾驶员的疲劳驾驶等级;最后由控制指令输出单元400依照确定的疲劳驾驶等级,输出与之对应的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。一方面,降低了疲劳驾驶所带来的安全隐患,提高了行车安全;另一方面,透过对疲劳驾驶等级的判定以及与之相应的汽车内部环境改变,来为驾驶员带来全新的、非凡的疲劳驾驶改善体验。
为了便于进一步理解本申请的发明原理,现结合具体场景应用进行举例:
车机检测系统(摄像头)监测到驾驶员眼皮下垂、嘴部打哈欠等驾驶状态信息,该些驾驶状态信息传输到车机主控系统后,经分析,判定中度疲劳。车机主控系统发出控制指令信号给网关(同时座舱域内信号给到音频模块-开启舒缓音乐,并提示用户有疲劳驾驶行为),经过网关传输到车身电器(车窗执行开缝、氛围灯自行调整灯光效果)、同时经过车身电器LIN信号给到空调(开启吹风,根据信号信息调整风量、温度)。经过车机检测系统持续监测,分析5分钟后驾驶员状态转为正常状态,车机主控系统随即停止发出控制指令,其他相关执行器恢复正常状态。
根据本发明的第三个方面,提供了一种车辆,所述车辆配备有如前述所述的辅助驾驶系统。具体地,该车辆的动力来源可以包括燃油、电能或氢能中的任意一种。
上述车辆,由于配备有前述所述的辅助驾驶系统,而该辅助驾驶系统,通过设置获取单元来获取汽车行驶过程中驾驶员的第一驾驶状态信息,疲劳驾驶判断单元依照该第一驾驶状态信息判断驾驶员当前驾驶状态是否为疲劳驾驶;疲劳等级判断单元在判断驾驶员当前驾驶状态为疲劳驾驶时,再进一步判断驾驶员的疲劳驾驶等级;最后由控制指令输出单元依照确定的疲劳驾驶等级,输出与之对应的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。一方面,提升了该车辆的行车安全,降低了该车辆的安全隐患;另一方面,透过对疲劳驾驶等级的判定以及与之相应的汽车内部环境改变,来为驾驶员驾乘该车辆时带来全新的、非凡的疲劳驾驶改善体验。
根据本发明的第四个方面,提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时可用于执行本发明上述实施例中任一实施例所描述的方法。
可选地,该计算机可读存储介质可以包括易失性存储器(英文:VolatileMemory),例如随机存取存储器(英文:Random-Access Memory,缩写:RAM),如静态随机存取存储器(英文:Static Random-Access Memory,缩写:SRAM),双倍数据率同步动态随机存取存储器(英文:Double Data Rate Synchronous Dynamic RandomAccess Memory,缩写:DDRSDRAM)等;存储器也可以包括非易失性存储器(英文:Non-Volatile Memory),例如快闪存储器(英文:Flash Memory)。存储器用于存储计算机程序(如实现上述方法的应用程序、功能模块等)、计算机指令等,上述的计算机程序、计算机指令等可以分区存储在一个或多个存储器中。并且上述的计算机程序、计算机指令、数据等可以被处理器调用。
上述的计算机程序、计算机指令等可以分区存储在一个或多个存储器中。并且上述的计算机程序、计算机指令、数据等可以被处理器调用。
处理器,用于执行存储器存储的计算机程序,以实现上述实施例涉及的方法中的各个步骤。具体可以参见前面方法实施例中的相关描述。
处理器和存储器可以是独立结构,也可以是集成在一起的集成结构。当处理器和存储器是独立结构时,存储器、处理器可以通过总线耦合连接。
上述计算机可读存储介质,由于其上存储的计算机程序被处理器执行时可用于执行前述任一实施例所描述的辅助驾驶方法,通过先获取汽车行驶过程中驾驶员的第一驾驶状态信息,然后依照该第一驾驶状态信息判断驾驶员当前驾驶状态是否为疲劳驾驶;同时在判断驾驶员当前驾驶状态为疲劳驾驶时;再进一步判断驾驶员的疲劳驾驶等级;最后依照确定的疲劳驾驶等级,输出与之对应的用于调节汽车内部环境的控制指令以帮助所述驾驶员改善当前驾驶状态。一方面,降低了疲劳驾驶所带来的安全隐患,提高了行车安全;另一方面,透过对疲劳驾驶等级的判定以及与之相应的汽车内部环境改变,来为驾驶员带来全新的、非凡的疲劳驾驶改善体验。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种辅助驾驶方法,其特征在于,包括:
获取汽车行驶过程中驾驶员的第一驾驶状态信息;
依照所述第一驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶;
响应于所述驾驶员当前驾驶状态为疲劳驾驶,则判断所述驾驶员的疲劳驾驶等级;以及
依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令以改善所述驾驶员的当前驾驶状态。
2.根据权利要求1所述的辅助驾驶方法,其特征在于,所述第一驾驶状态信息包括眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少一种;
所述依照所述驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶的步骤,包括:
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少一种超过对应的预设阈值,则判定所述驾驶员当前驾驶状态为疲劳驾驶。
3.根据权利要求2所述的辅助驾驶方法,其特征在于,所述疲劳驾驶等级包括轻度疲劳驾驶、中度疲劳驾驶和重度疲劳驾驶;
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的任意一种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为轻度疲劳驾驶;
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少两种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为中度疲劳驾驶;
响应于所述眼睛开合度、眨眼频率、闭眼时长、哈欠频率或嘴型中的至少三种超过对应的预设阈值,则判定所述驾驶员当前疲劳驾驶等级为重度疲劳驾驶。
4.根据权利要求3所述的辅助驾驶方法,其特征在于,所述控制指令包括音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的至少一种;
所述依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令的步骤包括:
响应于所述驾驶员当前疲劳驾驶等级为轻度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的任意一种控制指令;
响应于所述驾驶员当前疲劳驾驶等级为中度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令或车窗控制指令中的至少两种控制指令;
响应于所述驾驶员当前疲劳驾驶等级为重度疲劳驾驶,则输出音乐控制指令、氛围灯控制指令、香氛控制指令、空调控制指令和车窗控制指令中的至少三种控制指令。
5.根据权利要求2所述的辅助驾驶方法,其特征在于,所述第一驾驶状态信息还包括:驾驶员视线偏离正前方的时长;所述方法还包括:
判断所述时长是否超过预设阈值;
响应于所述时长超过预设阈值,则判定所述驾驶员当前驾驶分心,并输出告警信号。
6.根据权利要求1-5任一项所述的辅助驾驶方法,其特征在于,还包括:
获取所述控制指令输出后预设时间内所述驾驶员的第二驾驶状态信息;
基于所述第二驾驶状态信息判断所述驾驶员是否仍处于疲劳驾驶;以及
响应于所述驾驶员仍处于疲劳驾驶,则输出额外辅助手段以改善所述驾驶员的驾驶状态。
7.根据权利要求6所述的辅助驾驶方法,其特征在于,所述输出额外辅助手段的步骤,具体包括:打开汽车主驾驶位按摩功能、打开设有提神物品的手套箱或导航至就近停车场中的至少一种。
8.一种辅助驾驶系统,其特征在于,包括:
获取单元,用于获取汽车行驶过程中驾驶员的第一驾驶状态信息;
疲劳驾驶判断单元,用于依照所述第一驾驶状态信息判断所述驾驶员当前驾驶状态是否为疲劳驾驶;
疲劳等级判断单元,用于在所述驾驶员当前驾驶状态为疲劳驾驶时,判断所述驾驶员的疲劳驾驶等级;以及
控制指令输出单元,用于依照不同的所述疲劳驾驶等级,输出不同的用于调节汽车内部环境的控制指令以改善所述驾驶员的当前驾驶状态。
9.一种车辆,其特征在于,所述车辆配备有如权利要求8所述的辅助驾驶系统。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时可用于执行权利要求1-7中任一项所述的方法。
CN202111473610.XA 2021-11-29 2021-11-29 辅助驾驶方法及系统、车辆及计算机存储介质 Pending CN113954848A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111473610.XA CN113954848A (zh) 2021-11-29 2021-11-29 辅助驾驶方法及系统、车辆及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111473610.XA CN113954848A (zh) 2021-11-29 2021-11-29 辅助驾驶方法及系统、车辆及计算机存储介质

Publications (1)

Publication Number Publication Date
CN113954848A true CN113954848A (zh) 2022-01-21

Family

ID=79472889

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111473610.XA Pending CN113954848A (zh) 2021-11-29 2021-11-29 辅助驾驶方法及系统、车辆及计算机存储介质

Country Status (1)

Country Link
CN (1) CN113954848A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201749540U (zh) * 2010-07-26 2011-02-16 华南农业大学 一种疲劳驾驶检测及规范装置
CN108656900A (zh) * 2018-03-27 2018-10-16 斑马网络技术有限公司 车载气味生成系统及其应用
CN110638473A (zh) * 2019-09-10 2020-01-03 中国平安财产保险股份有限公司 疲劳驾驶判定的方法、装置、电子设备和存储介质
CN111391858A (zh) * 2020-02-18 2020-07-10 吉利汽车研究院(宁波)有限公司 一种智能座舱系统控制方法、系统及汽车
CN111634288A (zh) * 2020-04-30 2020-09-08 长城汽车股份有限公司 疲劳驾驶监测方法、系统及智能识别系统
CN111754729A (zh) * 2020-06-23 2020-10-09 上汽大众汽车有限公司 疲劳驾驶提示装置及提示方法
CN113112753A (zh) * 2021-04-15 2021-07-13 奇瑞汽车股份有限公司 一种汽车疲劳驾驶提醒系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201749540U (zh) * 2010-07-26 2011-02-16 华南农业大学 一种疲劳驾驶检测及规范装置
CN108656900A (zh) * 2018-03-27 2018-10-16 斑马网络技术有限公司 车载气味生成系统及其应用
CN110638473A (zh) * 2019-09-10 2020-01-03 中国平安财产保险股份有限公司 疲劳驾驶判定的方法、装置、电子设备和存储介质
CN111391858A (zh) * 2020-02-18 2020-07-10 吉利汽车研究院(宁波)有限公司 一种智能座舱系统控制方法、系统及汽车
CN111634288A (zh) * 2020-04-30 2020-09-08 长城汽车股份有限公司 疲劳驾驶监测方法、系统及智能识别系统
CN111754729A (zh) * 2020-06-23 2020-10-09 上汽大众汽车有限公司 疲劳驾驶提示装置及提示方法
CN113112753A (zh) * 2021-04-15 2021-07-13 奇瑞汽车股份有限公司 一种汽车疲劳驾驶提醒系统及方法

Similar Documents

Publication Publication Date Title
US10875536B2 (en) Coordinated vehicle response system and method for driver behavior
US8930086B2 (en) Driver assistance system for a motor vehicle, motor vehicle, and method for operating a driver assistance system
US20080006651A1 (en) Driving support system using fragrance emitting
US20200216095A1 (en) Vehicle driving assistance apparatus
DE112014001436T5 (de) Koordiniertes Fahrzeug-Reaktionssystem und Verfahren für Fahrerverhalten
US10752172B2 (en) System and method to control a vehicle interface for human perception optimization
JPH10315800A (ja) 車両の走行補助装置
JP2019159711A (ja) 覚醒度維持装置
JP2014511301A (ja) 運転者の挙動に応答するシステムおよび方法
WO2016117272A1 (ja) 運転支援装置、方法及びプログラム
US20190248374A1 (en) Concentration degree determination device, concentration degree determination method, and program for determining concentration degree
KR102050466B1 (ko) 차량 내에 위치하는 차량 탑승자를 지원하는 방법 및 장치
CN107826037A (zh) 摄像机监视系统
US11285966B2 (en) Method and system for controlling an autonomous vehicle response to a fault condition
CN110422169A (zh) 一种车辆控制方法、系统及设备
CN111086480A (zh) 车辆唤醒方法、车机及车辆
US20230077868A1 (en) Systems and methods for deterrence of intruders
CN111976626A (zh) 模式控制方法、装置、车辆及计算机可读存储介质
CN111137212A (zh) 后视镜装置及车辆
KR20100028253A (ko) 운전 보조 장치 및 운전 보조 방법
CN113954848A (zh) 辅助驾驶方法及系统、车辆及计算机存储介质
Umemura Driver behavior and active safety (overview)
Serbedzija et al. Vehicle as a co-driver
CN104118354A (zh) 一种独自行车警示装置
CN113942453A (zh) 车载智能香氛控制方法、控制设备、车辆及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination