CN115965857B - 一种环境光处理方法及dms系统 - Google Patents
一种环境光处理方法及dms系统 Download PDFInfo
- Publication number
- CN115965857B CN115965857B CN202310028316.0A CN202310028316A CN115965857B CN 115965857 B CN115965857 B CN 115965857B CN 202310028316 A CN202310028316 A CN 202310028316A CN 115965857 B CN115965857 B CN 115965857B
- Authority
- CN
- China
- Prior art keywords
- brightness
- change
- state
- driver
- ambient light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 30
- 230000008859 change Effects 0.000 claims abstract description 204
- 238000012544 monitoring process Methods 0.000 claims abstract description 73
- 230000001815 facial effect Effects 0.000 claims abstract description 11
- 238000000034 method Methods 0.000 claims description 17
- 230000006870 function Effects 0.000 claims description 14
- 238000013507 mapping Methods 0.000 claims description 12
- 230000000007 visual effect Effects 0.000 claims description 11
- 230000003247 decreasing effect Effects 0.000 claims description 3
- 238000003384 imaging method Methods 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 230000005484 gravity Effects 0.000 abstract description 3
- 230000004438 eyesight Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000004313 glare Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 201000004569 Blindness Diseases 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000004393 visual impairment Effects 0.000 description 1
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Traffic Control Systems (AREA)
Abstract
本发明提出了一种环境光处理方法及DMS系统,通过设置在汽车前挡风玻璃下方中控台处的光线传感器检测环境光的第一亮度,所述光线传感器正面朝上且中轴线与重力方向的夹角小于45度,通过设置在汽车驾驶位前方的摄像装置获取驾驶员的面部图像,计算所述驾驶员的面部图像的第二亮度,实时监测所述第一亮度和所述第二亮度的变化,根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态,根据所述环境光的实时变化状态执行驾驶员监测,能够监测环境光的变化对驾驶员的影响,保障行车安全。
Description
技术领域
本发明涉及驾驶员监测技术领域,特别涉及一种环境光处理方法及DMS系统。
背景技术
DMS(Driver monitoring system,驾驶员监测系统)是基于驾驶员面部图像、生理指标或车辆信息处理以判定驾驶员状态的实时系统,主要实现对驾驶员的身份识别、疲劳监测、分心监测以及危险驾驶行为的监测功能。而其中利用驾驶员的面部图像对驾驶员的状态进行监测是其中最为常用也是较为重要的一种。众所周知,汽车行驶过程中,环境光对驾驶员的状态影响非常大,而其中来自于阳光、汽车灯光、车身或外部镜面物体的反光导致的驾驶员眩光由于会引起驾驶员眼部不适甚至短时间丧失视觉,是其中危害较大且被人们广泛关注的情况,因此针对如何缓解眩光对驾驶员的影响的解决方案也层出不穷。行车过程中,影响环境光的因素很多,除了眩光外,建筑物、植物或山体遮挡所引起的环境光变化也会对驾驶员造成影响,常见的如进出隧道或者在阳光直射状态下进出遮挡区域时,也会发生驾驶员短时间丧失视觉的情况,在汽车高速行驶过程中,特别是在较为复杂的路况下,驾驶员失去视觉将会导致车上的驾驶员、乘客以及路上的行人置于很高的风险当中。
发明内容
本发明正是基于上述问题,提出了一种环境光处理方法及DMS系统,能够监测环境光的变化对驾驶员的影响,保障行车安全。
有鉴于此,本发明的第一方面提出了一种环境光处理方法,包括:
通过设置在汽车前挡风玻璃下方中控台处的光线传感器检测环境光的第一亮度;
通过设置在汽车驾驶位前方的摄像装置获取驾驶员的面部图像;
计算所述驾驶员的面部图像的第二亮度;
实时监测所述第一亮度和所述第二亮度的变化;
根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态;
根据所述环境光的实时变化状态执行驾驶员监测。
进一步的,在上述的环境光处理方法中,根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态的步骤具体包括:
当检测到所述第一亮度和所述第二亮度发生变化时;
判断所述第一亮度和所述第二亮度的大小变化类型是否相同以及大小变化持续时间是否大致相等,所述大小变化类型包括亮度变大或者亮度变小;
当所述第一亮度和所述第二亮度的大小变化类型相同且大小变化持续时间大致相等时,确定所述第一亮度和所述第二亮度为同步变大或同步变小状态;
将所述第一亮度和所述第二亮度同步变大或同步变小的状态确定为环境光的目标监测状态;
记录环境光在所述目标监测状态下所述第一亮度和所述第二亮度的变化数据,以及所述第一亮度和所述第二亮度的变化速度与汽车行驶速度的关联关系。
进一步的,在上述的环境光处理方法中,根据所述环境光的实时变化状态执行驾驶员监测的步骤具体包括:
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,通过所述驾驶员的面部图像分析所述驾驶员的可见状态;
记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系。
进一步的,在上述的环境光处理方法中,在记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系的步骤之后,还包括:
根据所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系获取所述驾驶员处于可见状态时的所述第一亮度和所述第二亮度的变化速度数据;
将所述变化速度数据中所述驾驶员处于可见状态时所述第一亮度的变化速度的最大值配置为所述驾驶员的第一可见状态变化区间的下界;
将所述变化速度数据中所述驾驶员处于可见状态时的所述第二亮度的变化速度的最大值配置为所述驾驶员的第二可见状态变化区间的下界。
进一步的,在上述的环境光处理方法中,通过所述驾驶员的面部图像分析所述驾驶员的可见状态的步骤具体包括:
当检测到驾驶员处于不可见状态时,获取驾驶员处于不可见状态的持续时间;
记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的关联关系。
进一步的,在上述的环境光处理方法中,在记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的关联关系的步骤之后,还包括:
拟合所述第一亮度的变化速度与所述驾驶员的不可见状态的持续时间的第一映射函数;
拟合所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的第二映射函数;
使用所述第一映射函数推算所述驾驶员的不可见状态的持续时间为零时对应的所述第一亮度的变化速度,将所述变化速度确定为所述驾驶员的第一可见状态变化区间的上界;
使用所述第二映射函数推算所述驾驶员的不可见状态的持续时间为零时对应的所述第二亮度的变化速度,将所述变化速度确定为所述驾驶员的第二可见状态变化区间的上界。
进一步的,在上述的环境光处理方法中,根据所述环境光的实时变化状态执行驾驶员监测的步骤还包括:
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,将当前位置确定为目标监测位置,记录所述目标监测位置的坐标、汽车经过所述目标监测位置的经过时间、汽车经过所述目标监测位置的行驶速度、第一稳态亮度、第二稳态亮度、第三稳态亮度以及第四稳态亮度,所述经过时间为所述第一亮度和/或所述第二亮度的变化速度最大的时间,所述第一稳态亮度为在所述经过时间之前预设时间段内所述第一亮度的变化幅度小于预设的第三阈值时的平均亮度,所述第二稳态亮度为在所述经过时间之后预设时间段内所述第一亮度的变化幅度小于预设的第三阈值时的平均亮度,所述第三稳态亮度为在所述经过时间之前预设时间段内所述第二亮度的变化幅度小于预设的第四阈值时的平均亮度,所述第四稳态亮度为在所述经过时间之后预设时间段内所述第二亮度的变化幅度小于预设的第四阈值时的平均亮度。
进一步的,在上述的环境光处理方法中,根据所述环境光的实时变化状态执行驾驶员监测的步骤还包括:
获取汽车的行驶路线和预设的预警距离;
当汽车的行驶路线即将经过任一个所述目标监测位置且与所述目标监测位置的距离小于或等于所述预警距离时,根据所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型以及所记录的第一稳态亮度、第二稳态亮度、第三稳态亮度、第四稳态亮度判断汽车的行驶速度是否为安全车速;
当汽车的行驶速度大于安全车速时发出安全预警。
进一步的,在上述的环境光处理方法中,在根据所述环境光的实时变化状态执行驾驶员监测的步骤之前,还包括:
在汽车行驶过程中实时计算对应第一亮度和第二亮度的第一实时稳态亮度TL1和第二实时稳态亮度TL2;
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,判断所述第一亮度和所述第二亮度的大小变化类型是否为亮度变小;
判断为是时,记录所述第一亮度和所述第二亮度发生变化前所计算得到的所述第一实时稳态亮度TL1和所述第二实时稳态亮度TL2;
根据所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型以及所记录的第一稳态亮度、第二稳态亮度、第三稳态亮度、第四稳态亮度判断汽车的行驶速度是否为安全车速的步骤具体包括:
根据所述驾驶员的第一可见状态变化区间和所述第二可见状态变化区间确定第一安全变化速度LC1和第二安全变化速度LC2;
获取所记录的汽车最近一次经过所述目标监测位置的车速vl和驾驶员的不可见状态的持续时间Δtl;
在所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型为亮度变小时,获取所述第二稳态亮度L2和所述第四稳态亮度L4;
使用以下公式计算汽车的安全行驶速度:
在所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型为亮度变大时,获取所述第一稳态亮度L1和所述第三稳态亮度L3;
使用以下公式计算汽车的安全行驶速度:
判断当前汽车行驶速度是否大于所述安全行驶速度vs。
本发明的第二方面提出了一种DMS系统,包括设置在汽车前挡风玻璃下方中控台处的用于检测环境光的第一亮度的光线传感器以及设置在汽车驾驶位前方的用于获取驾驶员的面部图像的摄像装置,所述DMS系统还包括处理器,所述处理器用于计算所述驾驶员的面部图像的第二亮度,根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态,以根据所述环境光的实时变化状态执行驾驶员监测。
本发明提出了一种环境光处理方法及DMS系统,通过设置在汽车前挡风玻璃下方中控台处的光线传感器检测环境光的第一亮度,所述光线传感器正面朝上且中轴线与重力方向的夹角小于45度,通过设置在汽车驾驶位前方的摄像装置获取驾驶员的面部图像,计算所述驾驶员的面部图像的第二亮度,实时监测所述第一亮度和所述第二亮度的变化,根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态,根据所述环境光的实时变化状态执行驾驶员监测,能够监测环境光的变化对驾驶员的影响,保障行车安全。
附图说明
图1是本发明一个实施例提供的一种环境光处理方法的流程图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
在本发明的描述中,术语“多个”则指两个或两个以上,除非另有明确的限定,术语“上”、“下”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。术语“连接”、“安装”、“固定”等均应做广义理解,例如,“连接”可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是直接相连,也可以通过中间媒介间接相连。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。此外,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”等的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。
在本说明书的描述中,术语“一个实施例”、“一些实施方式”、“具体实施例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或实例。而且,描述的具体特征、结构、材料或特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
下面参照附图来描述根据本发明一些实施方式提供的一种环境光处理方法及DMS系统。
如图1所示,本发明的第一方面提出了一种环境光处理方法,包括:
通过设置在汽车前挡风玻璃下方中控台处的光线传感器检测环境光的第一亮度;
通过设置在汽车驾驶位前方的摄像装置获取驾驶员的面部图像;
计算所述驾驶员的面部图像的第二亮度;
实时监测所述第一亮度和所述第二亮度的变化;
根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态;
根据所述环境光的实时变化状态执行驾驶员监测。
优选的,所述光线传感器以正面朝上的姿态设置在汽车前挡风玻璃下方的中控台处,所述光线传感器的中轴线与重力方向的夹角小于45度朝向汽车车头方向一侧。采用该实施方式的技术方案,所述光线传感器主要采集来自于汽车上方的光线以测量环境光的亮度,不受来自于汽车前方或者车内外后视镜的其它车辆灯光的影响。
在上述的环境光处理方法中,根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态的步骤具体包括:
当检测到所述第一亮度和所述第二亮度发生变化时;
判断所述第一亮度和所述第二亮度的大小变化类型是否相同以及大小变化持续时间是否大致相等,所述大小变化类型包括亮度变大或者亮度变小;
当所述第一亮度和所述第二亮度的大小变化类型相同且大小变化持续时间大致相等时,确定所述第一亮度和所述第二亮度为同步变大或同步变小状态;
将所述第一亮度和所述第二亮度同步变大或同步变小的状态确定为环境光的目标监测状态;
记录环境光在所述目标监测状态下所述第一亮度和所述第二亮度的变化数据,以及所述第一亮度和所述第二亮度的变化速度与汽车行驶速度的关联关系。
在上述的环境光处理方法中,根据所述环境光的实时变化状态执行驾驶员监测的步骤具体包括:
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,通过所述驾驶员的面部图像分析所述驾驶员的可见状态;
记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系。
在上述的环境光处理方法中,在记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系的步骤之后,还包括:
根据所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系获取所述驾驶员处于可见状态时的所述第一亮度和所述第二亮度的变化速度数据;
将所述变化速度数据中所述驾驶员处于可见状态时所述第一亮度的变化速度的最大值配置为所述驾驶员的第一可见状态变化区间的下界;
将所述变化速度数据中所述驾驶员处于可见状态时的所述第二亮度的变化速度的最大值配置为所述驾驶员的第二可见状态变化区间的下界。
在上述实施方式的技术方案中,所述驾驶员的第一可见状态变化区间的下界以及所述驾驶员的第二可见状态变化区间的下界分别小于使所述驾驶员丧失视觉的第一亮度和第二亮度的变化速度的边界,当系统记录的所述驾驶员处于可见状态时的所述第一亮度和所述第二亮度的变化速度数据越多时,所述驾驶员的第一可见状态变化区间的下界以及所述驾驶员的第二可见状态变化区间的下界越趋近于使所述驾驶员丧失视觉的第一亮度和第二亮度的变化速度的边界。
在上述的环境光处理方法中,通过所述驾驶员的面部图像分析所述驾驶员的可见状态的步骤具体包括:
当检测到驾驶员处于不可见状态时,获取驾驶员处于不可见状态的持续时间;
记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的关联关系。
在上述的环境光处理方法中,在记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的关联关系的步骤之后,还包括:
拟合所述第一亮度的变化速度与所述驾驶员的不可见状态的持续时间的第一映射函数;
拟合所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的第二映射函数;
使用所述第一映射函数推算所述驾驶员的不可见状态的持续时间为零时对应的所述第一亮度的变化速度,将所述变化速度确定为所述驾驶员的第一可见状态变化区间的上界;
使用所述第二映射函数推算所述驾驶员的不可见状态的持续时间为零时对应的所述第二亮度的变化速度,将所述变化速度确定为所述驾驶员的第二可见状态变化区间的上界。
在上述实施方式的技术方案中,所述驾驶员的第一可见状态变化区间的上界以及所述驾驶员的第二可见状态变化区间的上界分别大于使所述驾驶员丧失视觉的第一亮度和第二亮度的变化速度的边界,当系统记录的使所述驾驶员丧失视觉的所述第一亮度和所述第二亮度的变化数据越多时,所述驾驶员的第一可见状态变化区间的上界以及所述驾驶员的第二可见状态变化区间的上界同样越趋近于使所述驾驶员丧失视觉的第一亮度和第二亮度的变化速度的边界,即随着系统记录数据的积累,所述驾驶员的第一可见状态变化区间和第二可见状态变化区间会越来越小,系统对驾驶员的监测和预警也将更加精准。
在上述的环境光处理方法中,根据所述环境光的实时变化状态执行驾驶员监测的步骤还包括:
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,将当前位置确定为目标监测位置,记录所述目标监测位置的坐标、汽车经过所述目标监测位置的经过时间、汽车经过所述目标监测位置的行驶速度、第一稳态亮度、第二稳态亮度、第三稳态亮度以及第四稳态亮度,所述经过时间为所述第一亮度和/或所述第二亮度的变化速度最大的时间,所述第一稳态亮度为在所述经过时间之前预设时间段内所述第一亮度的变化幅度小于预设的第三阈值时的平均亮度,所述第二稳态亮度为在所述经过时间之后预设时间段内所述第一亮度的变化幅度小于预设的第三阈值时的平均亮度,所述第三稳态亮度为在所述经过时间之前预设时间段内所述第二亮度的变化幅度小于预设的第四阈值时的平均亮度,所述第四稳态亮度为在所述经过时间之后预设时间段内所述第二亮度的变化幅度小于预设的第四阈值时的平均亮度。
在本发明的一些实施方式中,将所述第三阈值配置为所述驾驶员的第一可见状态变化区间的下界,将所述第四阈值配置为所述驾驶员的第二可见状态变化区间的下界。
在本发明的一些实施方式中,所述预设时间段为预先配置的固定值。优选的,在该实施方式中,所述预设时间段被配置为10到20秒之间的任一数值。以汽车行驶速度为60公里每小时为例,其每秒经过的距离约为17米,10到20秒的运动距离约为170米到340米之间,遮挡距离小于该距离区间的路段,环境光的变化对驾驶员的影响较小。而当所述预设的时间段取值大于20秒时,由于距离过远的亮度与所述目标监测位置的亮度变化速度关联关系不大,将其纳入稳态亮度的均值计算会使得计算结果偏差较大。
在上述的环境光处理方法中,根据所述环境光的实时变化状态执行驾驶员监测的步骤还包括:
获取汽车的行驶路线和预设的预警距离;
当汽车的行驶路线即将经过任一个所述目标监测位置且与所述目标监测位置的距离小于或等于所述预警距离时,根据所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型以及所记录的第一稳态亮度、第二稳态亮度、第三稳态亮度、第四稳态亮度判断汽车的行驶速度是否为安全车速;
当汽车的行驶速度大于安全车速时发出安全预警。
在上述的环境光处理方法中,在根据所述环境光的实时变化状态执行驾驶员监测的步骤之前,还包括:
在汽车行驶过程中实时计算对应第一亮度和第二亮度的第一实时稳态亮度TL1和第二实时稳态亮度TL2;
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,判断所述第一亮度和所述第二亮度的大小变化类型是否为亮度变小;
判断为是时,记录所述第一亮度和所述第二亮度发生变化前所计算得到的所述第一实时稳态亮度TL1和所述第二实时稳态亮度TL2;
根据所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型以及所记录的第一稳态亮度、第二稳态亮度、第三稳态亮度、第四稳态亮度判断汽车的行驶速度是否为安全车速的步骤具体包括:
根据所述驾驶员的第一可见状态变化区间和所述第二可见状态变化区间确定第一安全变化速度LC1和第二安全变化速度LC2;
获取所记录的汽车最近一次经过所述目标监测位置的车速vl和驾驶员的不可见状态的持续时间Δtl;
在所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型为亮度变小时,获取所述第二稳态亮度L2和所述第四稳态亮度L4;
使用以下公式计算汽车的安全行驶速度:
在所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型为亮度变大时,获取所述第一稳态亮度L1和所述第三稳态亮度L3;
使用以下公式计算汽车的安全行驶速度:
判断当前汽车行驶速度是否大于所述安全行驶速度vs。
在上述实施方式的技术方案中,min为在两个或两个以上的数值中取最小值的函数,例如当a>b时,min(a,b)=。
本发明的第二方面提出了一种DMS系统,包括设置在汽车前挡风玻璃下方中控台处的用于检测环境光的第一亮度的光线传感器以及设置在汽车驾驶位前方的用于获取驾驶员的面部图像的摄像装置,所述DMS系统还包括处理器,所述处理器用于计算所述驾驶员的面部图像的第二亮度,根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态,以根据所述环境光的实时变化状态执行驾驶员监测。所述DMS系统还包括存储器,所述处理器还用于执行所述存储器存储的计算机程序实现本发明第一方面各个实施方式所述的环境光处理方法。
应当说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
依照本发明的实施例如上文所述,这些实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施例。显然,根据以上描述,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本发明的原理和实际应用,从而使所属技术领域技术人员能很好地利用本发明以及在本发明基础上的修改使用。本发明仅受权利要求书及其全部范围和等效物的限制。
Claims (7)
1.一种环境光处理方法,其特征在于,包括:
通过设置在汽车前挡风玻璃下方中控台处的光线传感器检测环境光的第一亮度;
通过设置在汽车驾驶位前方的摄像装置获取驾驶员的面部图像;
计算所述驾驶员的面部图像的第二亮度;
实时监测所述第一亮度和所述第二亮度的变化;
根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态;
根据所述环境光的实时变化状态执行驾驶员监测;
根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态的步骤具体包括:
当检测到所述第一亮度和所述第二亮度发生变化时;
判断所述第一亮度和所述第二亮度的大小变化类型是否相同以及大小变化持续时间是否大致相等,所述大小变化类型包括亮度变大或者亮度变小;
当所述第一亮度和所述第二亮度的大小变化类型相同且大小变化持续时间大致相等时,确定所述第一亮度和所述第二亮度为同步变大或同步变小状态;
将所述第一亮度和所述第二亮度同步变大或同步变小的状态确定为环境光的目标监测状态;
记录环境光在所述目标监测状态下所述第一亮度和所述第二亮度的变化数据,以及所述第一亮度和所述第二亮度的变化速度与汽车行驶速度的关联关系;
根据所述环境光的实时变化状态执行驾驶员监测的步骤具体包括:
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,通过所述驾驶员的面部图像分析所述驾驶员的可见状态;
记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系;
通过所述驾驶员的面部图像分析所述驾驶员的可见状态的步骤具体包括:
当检测到驾驶员处于不可见状态时,获取驾驶员处于不可见状态的持续时间;
记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的关联关系。
2.根据权利要求1所述的环境光处理方法,其特征在于,在记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系的步骤之后,还包括:
根据所述第一亮度和所述第二亮度的变化速度与所述驾驶员的可见状态的关联关系获取所述驾驶员处于可见状态时的所述第一亮度和所述第二亮度的变化速度数据;
将所述变化速度数据中所述驾驶员处于可见状态时所述第一亮度的变化速度的最大值配置为所述驾驶员的第一可见状态变化区间的下界;
将所述变化速度数据中所述驾驶员处于可见状态时的所述第二亮度的变化速度的最大值配置为所述驾驶员的第二可见状态变化区间的下界。
3.根据权利要求1所述的环境光处理方法,其特征在于,在记录所述第一亮度和所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的关联关系的步骤之后,还包括:
拟合所述第一亮度的变化速度与所述驾驶员的不可见状态的持续时间的第一映射函数;
拟合所述第二亮度的变化速度与所述驾驶员的不可见状态的持续时间的第二映射函数;
使用所述第一映射函数推算所述驾驶员的不可见状态的持续时间为零时对应的所述第一亮度的变化速度,将所述变化速度确定为所述驾驶员的第一可见状态变化区间的上界;
使用所述第二映射函数推算所述驾驶员的不可见状态的持续时间为零时对应的所述第二亮度的变化速度,将所述变化速度确定为所述驾驶员的第二可见状态变化区间的上界。
4.根据权利要求2或3所述的环境光处理方法,其特征在于,根据所述环境光的实时变化状态执行驾驶员监测的步骤还包括:
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,将当前位置确定为目标监测位置,记录所述目标监测位置的坐标、汽车经过所述目标监测位置的经过时间、汽车经过所述目标监测位置的行驶速度、第一稳态亮度、第二稳态亮度、第三稳态亮度以及第四稳态亮度,所述经过时间为所述第一亮度和/或所述第二亮度的变化速度最大的时间,所述第一稳态亮度为在所述经过时间之前预设时间段内所述第一亮度的变化幅度小于预设的第三阈值时的平均亮度,所述第二稳态亮度为在所述经过时间之后预设时间段内所述第一亮度的变化幅度小于预设的第三阈值时的平均亮度,所述第三稳态亮度为在所述经过时间之前预设时间段内所述第二亮度的变化幅度小于预设的第四阈值时的平均亮度,所述第四稳态亮度为在所述经过时间之后预设时间段内所述第二亮度的变化幅度小于预设的第四阈值时的平均亮度。
5.根据权利要求4所述的环境光处理方法,其特征在于,根据所述环境光的实时变化状态执行驾驶员监测的步骤还包括:
获取汽车的行驶路线和预设的预警距离;
当汽车的行驶路线即将经过任一个所述目标监测位置且与所述目标监测位置的距离小于或等于所述预警距离时,根据所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型以及所记录的第一稳态亮度、第二稳态亮度、第三稳态亮度、第四稳态亮度判断汽车的行驶速度是否为安全车速;
当汽车的行驶速度大于安全车速时发出安全预警。
6.根据权利要求5所述的环境光处理方法,其特征在于,在根据所述环境光的实时变化状态执行驾驶员监测的步骤之前,还包括:
在汽车行驶过程中实时计算对应第一亮度和第二亮度的第一实时稳态亮度和第二实时稳态亮度/>;
当所述第一亮度的变化速度大于预设的第一阈值,且所述第二亮度的变化速度大于预设的第二阈值时,判断所述第一亮度和所述第二亮度的大小变化类型是否为亮度变小;
判断为是时,记录所述第一亮度和所述第二亮度发生变化前所计算得到的所述第一实时稳态亮度和所述第二实时稳态亮度/>;
根据所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型以及所记录的第一稳态亮度、第二稳态亮度、第三稳态亮度、第四稳态亮度判断汽车的行驶速度是否为安全车速的步骤具体包括:
根据所述驾驶员的第一可见状态变化区间和所述第二可见状态变化区间确定第一安全变化速度和第二安全变化速度/>;
获取所记录的汽车最近一次经过所述目标监测位置的车速和驾驶员的不可见状态的持续时间/>;
在所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型为亮度变小时,获取所述第二稳态亮度和所述第四稳态亮度/>;
使用以下公式计算汽车的安全行驶速度:
在所述目标监测位置对应的所述第一亮度和所述第二亮度的大小变化类型为亮度变大时,获取所述第一稳态亮度和所述第三稳态亮度/>;
使用以下公式计算汽车的安全行驶速度:
判断当前汽车行驶速度是否大于所述安全行驶速度。
7.一种DMS系统,其特征在于,包括设置在汽车前挡风玻璃下方中控台处的用于检测环境光的第一亮度的光线传感器以及设置在汽车驾驶位前方的用于获取驾驶员的面部图像的摄像装置,所述DMS系统还包括处理器,所述处理器用于计算所述驾驶员的面部图像的第二亮度,根据所述第一亮度和所述第二亮度的变化确定环境光的实时变化状态,以根据所述环境光的实时变化状态执行驾驶员监测,所述DMS系统还包括存储器,所述处理器还用于执行所述存储器存储的计算机程序实现如权利要求1-6任一项所述的环境光处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310028316.0A CN115965857B (zh) | 2023-01-09 | 2023-01-09 | 一种环境光处理方法及dms系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310028316.0A CN115965857B (zh) | 2023-01-09 | 2023-01-09 | 一种环境光处理方法及dms系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115965857A CN115965857A (zh) | 2023-04-14 |
CN115965857B true CN115965857B (zh) | 2024-05-10 |
Family
ID=87352700
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310028316.0A Active CN115965857B (zh) | 2023-01-09 | 2023-01-09 | 一种环境光处理方法及dms系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115965857B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116246054B (zh) * | 2023-05-09 | 2023-09-29 | 钧捷智能(深圳)有限公司 | 一种用于dms环境光干扰的处理系统及方法 |
CN117082695B (zh) * | 2023-10-13 | 2023-12-26 | 深圳市汇杰芯科技有限公司 | 一种新能源汽车无线氛围灯控制方法、系统和存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10359125A1 (de) * | 2003-12-17 | 2005-07-14 | Volkswagen Ag | Verfahren zur Erkennung der Reaktionsbereitschaft eines Fahrers eines Kraftfahrzeugs |
CN103123725A (zh) * | 2011-11-18 | 2013-05-29 | 鸿富锦精密工业(深圳)有限公司 | 图像分析装置及分析方法 |
CN103648210A (zh) * | 2013-11-26 | 2014-03-19 | 清华大学 | 基于驾驶员视觉亮度适应机制的车灯控制方法 |
CN104159034A (zh) * | 2014-08-21 | 2014-11-19 | 深圳市中兴移动通信有限公司 | 拍摄方法和拍摄装置 |
CN106571015A (zh) * | 2016-09-09 | 2017-04-19 | 武汉依迅电子信息技术有限公司 | 基于互联网络的驾驶行为数据采集方法 |
CN112349254A (zh) * | 2019-08-09 | 2021-02-09 | 本田技研工业株式会社 | 显示控制装置、显示控制方法及存储介质 |
WO2021129059A1 (zh) * | 2019-12-25 | 2021-07-01 | 恒大新能源汽车投资控股集团有限公司 | 一种遮光板控制方法、遮光板控制系统及装置 |
CN114245538A (zh) * | 2021-12-16 | 2022-03-25 | 中交国通公路工程技术有限公司 | 一种隧道照明智能监测装置及其监测系统 |
CN114286014A (zh) * | 2021-12-29 | 2022-04-05 | 南京斯代尔网络科技有限公司 | 一种图像数据库采集方法 |
CN115416574A (zh) * | 2022-08-30 | 2022-12-02 | 重庆长安汽车股份有限公司 | 一种汽车驾驶中的强光预警方法、装置、设备及存储介质 |
-
2023
- 2023-01-09 CN CN202310028316.0A patent/CN115965857B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10359125A1 (de) * | 2003-12-17 | 2005-07-14 | Volkswagen Ag | Verfahren zur Erkennung der Reaktionsbereitschaft eines Fahrers eines Kraftfahrzeugs |
CN103123725A (zh) * | 2011-11-18 | 2013-05-29 | 鸿富锦精密工业(深圳)有限公司 | 图像分析装置及分析方法 |
CN103648210A (zh) * | 2013-11-26 | 2014-03-19 | 清华大学 | 基于驾驶员视觉亮度适应机制的车灯控制方法 |
CN104159034A (zh) * | 2014-08-21 | 2014-11-19 | 深圳市中兴移动通信有限公司 | 拍摄方法和拍摄装置 |
CN106571015A (zh) * | 2016-09-09 | 2017-04-19 | 武汉依迅电子信息技术有限公司 | 基于互联网络的驾驶行为数据采集方法 |
CN112349254A (zh) * | 2019-08-09 | 2021-02-09 | 本田技研工业株式会社 | 显示控制装置、显示控制方法及存储介质 |
WO2021129059A1 (zh) * | 2019-12-25 | 2021-07-01 | 恒大新能源汽车投资控股集团有限公司 | 一种遮光板控制方法、遮光板控制系统及装置 |
CN114245538A (zh) * | 2021-12-16 | 2022-03-25 | 中交国通公路工程技术有限公司 | 一种隧道照明智能监测装置及其监测系统 |
CN114286014A (zh) * | 2021-12-29 | 2022-04-05 | 南京斯代尔网络科技有限公司 | 一种图像数据库采集方法 |
CN115416574A (zh) * | 2022-08-30 | 2022-12-02 | 重庆长安汽车股份有限公司 | 一种汽车驾驶中的强光预警方法、装置、设备及存储介质 |
Non-Patent Citations (3)
Title |
---|
Cars and distraction: How to address the limits of Driver Monitoring Systems and improve safety benefits using evidence from German young drivers;Tim Jannusch 等;Technology in Society;20211231;1-10 * |
考虑驾驶员视觉适应的公路隧道入口段亮度确定方法;胡英奎 等;土木建筑与环境工程;20160831;38(04);20-26 * |
驾车接近隧道过程中驾驶员的适应亮度变化规律;胡英奎 等;重庆大学学报;20160229;第39卷(第1期);98-104 * |
Also Published As
Publication number | Publication date |
---|---|
CN115965857A (zh) | 2023-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115965857B (zh) | 一种环境光处理方法及dms系统 | |
CN108216251B (zh) | 驾驶员状态监测方法、系统及非瞬时性计算机可读介质 | |
EP1878604B1 (en) | Method of mitigating driver distraction | |
EP2117432B1 (en) | Anti-drowsing device and anti-drowsing method | |
EP2908726B1 (en) | Method and device for detecting decreased attentiveness of vehicle driver | |
US9956962B2 (en) | Method and device for determining a reaction time of a vehicle driver | |
JP4370915B2 (ja) | 車載アプリケーション選択システム及び車載アプリケーション選択装置 | |
WO2017006853A1 (ja) | 運転者異常検出装置及び運転者異常検出方法 | |
US20150124097A1 (en) | Optical reproduction and detection system in a vehicle | |
CN107272194A (zh) | 抬头显示装置及其方法 | |
CN114872713A (zh) | 一种驾驶员异常驾驶状态监测装置和方法 | |
JP6365423B2 (ja) | 運転者状態判定方法及びその判定装置 | |
Mizuno et al. | Detecting driver's visual attention area by using vehicle-mounted device | |
CN115667044A (zh) | 用于确定反应能力的方法 | |
CN115299948A (zh) | 一种驾驶员疲劳检测方法及检测系统 | |
JP6689470B1 (ja) | 情報処理装置、プログラム及び情報処理方法 | |
JP7163578B2 (ja) | 運転状態判定装置及び運転状態判定方法 | |
JP2017061216A (ja) | 車載撮像システム、車両および撮像方法 | |
WO2023017595A1 (ja) | 乗員状態判定装置、乗員状態判定方法、および、乗員状態判定システム | |
JP7342635B2 (ja) | 運転者状態推定装置および運転者状態推定方法 | |
US11947721B2 (en) | Vehicle display control apparatus and display processing method | |
JP5144412B2 (ja) | 車両用物体判定装置 | |
US11893807B2 (en) | Method for determining a level of alertness of a driver | |
JP2024013618A (ja) | 漫然運転判定装置及び漫然運転判定方法 | |
JP7127282B2 (ja) | 運転状態判定装置及び運転状態判定方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |