CN109291794A - 驾驶员状态监测方法、汽车以及存储介质 - Google Patents
驾驶员状态监测方法、汽车以及存储介质 Download PDFInfo
- Publication number
- CN109291794A CN109291794A CN201811143622.4A CN201811143622A CN109291794A CN 109291794 A CN109291794 A CN 109291794A CN 201811143622 A CN201811143622 A CN 201811143622A CN 109291794 A CN109291794 A CN 109291794A
- Authority
- CN
- China
- Prior art keywords
- driver
- automobile
- status monitoring
- monitoring method
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
- B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Human Computer Interaction (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Traffic Control Systems (AREA)
- Emergency Alarm Devices (AREA)
Abstract
本发明公开了一种驾驶员状态监测方法、汽车以及存储介质,包括以下步骤:当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据;根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态;当驾驶员处于危险驾驶状态时,发出警示提醒。本发明能够在汽车行驶时根据驾驶员的面部数据判断驾驶员的驾驶状态,在驾驶员处于危险状态时提醒驾驶员及时应对,避免了汽车行驶时因驾驶员状态异常而发生交通事故,提升了汽车行驶的安全性。
Description
技术领域
本发明涉及汽车安全技术领域,尤其涉及一种驾驶员状态监测方法、汽车以及存储介质。
背景技术
目前,随着汽车技术的不断发展,机动车的数量不断提升。但与此同时,汽车所引起的交通事故数量也与日俱增。研究表明,现有的交通事故中,有很大一部分原因是由于驾驶员的状态出现异常而导致事故发生,由此可见,驾驶员状态出现异常易引发严重的交通安全问题。
发明内容
本发明的主要目的在于提供一种驾驶员状态监测方法、汽车以及存储介质,旨在解决驾驶员状态出现异常易引发交通事故的问题。
为实现上述目的,本发明提供一种驾驶员状态监测方法,所述驾驶员状态监测方法包括以下步骤:
当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据;
根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态;
当驾驶员处于危险驾驶状态时,发出警示提醒。
可选地,所述获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
控制所述车载平板电脑的投射器向驾驶员面部投射结构光;
利用所述车载平板电脑的摄像模块拍摄所述驾驶员面部在经过结构光投射后形成的三维光图形;
将所述三维光图形进行处理后获得驾驶员的面部特征数据。
可选地,所述控制所述车载平板电脑的投射器向驾驶员面部投射结构光的步骤之前包括:
控制摄像模块对驾驶位置进行拍摄,得到驾驶位置图像;
根据所述驾驶位置图像确定驾驶员面部的位置。
可选地,所述当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤之前包括:
当检测到驾驶员时,通过对驾驶员进行人脸识别,以确认驾驶员身份;
在确认驾驶员身份时,向所述驾驶员许可驾驶权限。
可选地,所述通过对驾驶员进行人脸识别,以确认驾驶员身份的步骤包括:
获取所述汽车的驾驶员的人脸图像数据;
将所述人脸图像数据与预设人脸图像数据进行匹配;
当所述人脸图像数据与预设人脸图像数据匹配时,确认驾驶员身份。
可选地,所述当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
当所述汽车开始行驶时,启动计时以计算驾驶员的驾驶时间,并获取预设时长内所述汽车的驾驶员的面部特征数据;
所述驾驶员状态监测方法还包括步骤:
检测所述驾驶员的驾驶时间是否大于预设疲劳时间;
当检测到驾驶员的驾驶时间大于预设疲劳时间时,确定驾驶员处于危险驾驶状态。
可选地,所述车载平板电脑内设置有广角摄像头,所述当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
当汽车处于行驶状态时,通过所述广角摄像头获取预设时长内所述汽车的驾驶员的面部特征数据以及所述汽车的内部图像数据;
所述驾驶员状态监测方法方法还包括步骤:
根据所述内部图像数据,确定所述汽车内部是否发生影响驾驶员驾驶的行为;
当所述汽车内部发生影响驾驶员驾驶的行为时,向远程终端发送警示提醒。
可选地,所述面部特征数据包括眨眼频率、闭眼时长以及头部偏移频率,所述根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态的步骤包括以下步骤中的至少一项:
当检测到眨眼频率大于预设眨眼频率时,确定驾驶员处于危险驾驶状态;
当检测到闭眼时长大于预设闭眼时长时,确定驾驶员处于危险驾驶状态;
当检测到头部偏移频率大于预设头部偏移频率时,确定驾驶员处于危险驾驶状态。
此外,为实现上述目的,本发明还提供一种汽车,所述汽车包括可拆卸设置于汽车内的车载平板电脑,所述车载平板电脑包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的驾驶员状态监测程序,所述驾驶员状态监测程序被所述处理器执行时实现如上所述的驾驶员状态监测方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有驾驶员状态监测程序,所述驾驶员状态监测程序被处理器执行时实现如上所述的驾驶员状态监测方法的步骤。
本发明实施例提出的一种驾驶员状态监测方法、汽车以及存储介质,通过使用设置在汽车内的车载平板电脑,在驾驶员处于驾驶状态时获取到驾驶员的面部数据,并根据获取到的面部数据判断驾驶员的行驶状态。当检测到驾驶员处于危险驾驶状态时,向驾驶员发出警示提醒,以提醒驾驶员及时作出应对,避免了汽车在驾驶员状态异常时继续行驶而产生的风险,提升了汽车行驶的安全性,降低了交通事故的发生率。并且,所采用的车载平板电脑为可拆卸设置于汽车内部,在结束行驶以后,用户能够取下车载平板并正常携带使用。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的结构示意图;
图2为本发明驾驶员状态监测方法第一实施例的流程示意图;
图3为本发明驾驶员状态监测方法第二实施例、第三实施例的流程示意图;
图4为本发明驾驶员状态监测方法第四实施例的流程示意图;
图5为本发明驾驶员状态监测方法第四实施例中步骤S16的细化流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的装置结构示意图。
本发明实施例终端可以是车载平板电脑,也可以是智能手机、平板电脑、电子书阅读器、MP3(Moving Picture Experts Group Audio Layer III,动态影像专家压缩标准音频层面3)播放器、MP4(Moving Picture Experts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、便携计算机等具有显示功能的可移动式终端设备。
如图1所示,该终端可以包括:处理器1001,例如CPU,通信总线1002,用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选的用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
车载平板电脑包括摄像模块,可选地,终端还可以包括RF(Radio Frequency,射频)电路,传感器、音频电路、WiFi模块等等。其中,传感器比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示屏的亮度,接近传感器可在硬件设备移动到耳边时,关闭显示屏和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别硬件设备姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;当然,硬件设备还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,并执行如下驾驶员状态监测方法中各实施所述的步骤:
当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据;
根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态;
当驾驶员处于危险驾驶状态时,发出警示提醒。
进一步地,处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,还执行以下操作:
控制所述车载平板电脑的投射器向驾驶员面部投射结构光;
利用所述车载平板电脑的摄像模块拍摄所述驾驶员面部在经过结构光投射后形成的三维光图形;
将所述三维光图形进行处理后获得驾驶员的面部特征数据。
进一步地,处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,还执行以下操作:
控制摄像模块对驾驶位置进行拍摄,得到驾驶位置图像;
根据所述驾驶位置图像确定驾驶员面部的位置。
进一步地,处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,还执行以下操作:
当检测到驾驶员时,通过对驾驶员进行人脸识别,以确认驾驶员身份;
在确认驾驶员身份时,向所述驾驶员许可驾驶权限。
进一步地,处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,还执行以下操作:
获取所述汽车的驾驶员的人脸图像数据;
将所述人脸图像数据与预设人脸图像数据进行匹配;
当所述人脸图像数据与预设人脸图像数据匹配时,确认驾驶员身份。
进一步地,处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,还执行以下操作:
当所述汽车开始行驶时,启动计时以计算驾驶员的驾驶时间,并获取预设时长内所述汽车的驾驶员的面部特征数据;
检测所述驾驶员的驾驶时间是否大于预设疲劳时间;
当检测到驾驶员的驾驶时间大于预设疲劳时间时,确定驾驶员处于危险驾驶状态。
进一步地,处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,还执行以下操作:
当汽车处于行驶状态时,通过所述广角摄像头获取预设时长内所述汽车的驾驶员的面部特征数据以及所述汽车的内部图像数据;
根据所述内部图像数据,确定所述汽车内部是否发生影响驾驶员驾驶的行为;
当所述汽车内部发生影响驾驶员驾驶的行为时,向远程终端发送警示提醒。
进一步地,处理器1001可以用于调用存储器1005中存储的驾驶员状态监测程序,还执行以下操作:
当检测到眨眼频率大于预设眨眼频率时,确定驾驶员处于危险驾驶状态;
当检测到闭眼时长大于预设闭眼时长时,确定驾驶员处于危险驾驶状态;
当检测到头部偏移频率大于预设头部偏移频率时,确定驾驶员处于危险驾驶状态。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
请参照图2,图2为本发明驾驶员状态监测方法第一实施例的流程示意图,其中,所述驾驶员状态监测方法包括如下步骤:
步骤S10,当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据;
在本实施例中,驾驶员状态监测方法可以应用于车载平板电脑,也可以应用于车载监控设备或行车记录仪等汽车内设,以下以车载平板电脑为例进行解释说明。其中,车载平板电脑包括摄像模块,该摄像模块能够对汽车内部的驾驶位进行拍摄并生成图像数据。
在车载平板电脑检测到汽车处于行驶状态时,车载平板电脑通过自身设置的摄像模块对驾驶员进行拍摄,以得到预设时长内的驾驶员的面部特征数据。预设时长指一段预先设置的时间的长度,车载平板电脑在该时长内对驾驶员进行持续拍摄,获取到预设时长内的驾驶员的面部图像,在经过车载平板电脑的处理后,将拍摄到的驾驶员的面图像转化为面部特征数据。面部特征数据表示驾驶员的面部表情与面部细节,而在预设时长内获取到的驾驶员的面部特征数据则能够表现出驾驶员面部表情的变化程度以及面部细节变化的具体数据。
在汽车处于行驶状态时,驾驶员保持着驾驶状态,此时驾驶员需要保持自身的专注度,以确保行驶安全。通过车载平板电脑对驾驶员进行一段时间的拍摄,能够得到驾驶员在这段时间面部表情和面部的细节变化。
步骤S20,根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态;
在本实施例中,车载平板电脑根据获取到的一段时间内的驾驶员的面部特征数据,能够得出在这段时间内驾驶员面部表情的变化以及面部状态的变化。通过对面部特征数据进行分析处理,能够识别出驾驶员在这段时间内的驾驶状态。由于车载平板电脑获取驾驶员面部特征数据时汽车正处于行驶状态,因此,有必要根据面部特征数据识别出驾驶员是否处于危险驾驶状态,以根据驾驶员的驾驶状态进行相应的动作,保护行驶安全与驾驶员的人身安全。其中,危险驾驶状态指驾驶员在行驶的过程中产生疲劳或者驾驶员在行驶过程中作出影响驾驶安全的行为和动作,例如驾驶员在驾驶时抽烟、拨打电话、操纵移动设备、未注意路面行驶状态等危及驾驶安全的行为。
步骤S30,当驾驶员处于危险驾驶状态时,发出警示提醒。
车载平板电脑在对一段时间内的驾驶员的面部特征数据进行分析后,当判断得出这段时间内驾驶员处于危险驾驶状态时,及时对驾驶员进行提醒,以保障汽车的行车安全,避免交通事故的发生。
在本实施例中,汽车正处于行驶状态时,车载平板电脑在预设的时长内获取到驾驶员的面部特征数据,并根据获取到的面部特征数据分析驾驶员在这段时间内的驾驶状态,当车载平板电脑确定驾驶员处于危险驾驶状态时,向驾驶员发出警示提醒,以使驾驶员脱离危险驾驶状态,保障行车安全,避免事故发生。优选地,在本方案中,车载平板电脑在监测出驾驶员处于危险驾驶状态时,可以通过发出声音提醒的方式提醒驾驶员正处于危险驾驶状态,将会影响到车辆行驶的安全性,以提醒驾驶员安全驾驶。
进一步地,参照图3,图3为本发明驾驶员状态监测方法第二实施例的流程示意图,在本实施例中,所述步骤S10,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
步骤S11,控制所述车载平板电脑的投射器向驾驶员面部投射结构光;
步骤S12,利用所述车载平板电脑的摄像模块拍摄所述驾驶员面部在经过结构光投射后形成的三维光图形;
步骤S13,将所述三维光图形进行处理后获得驾驶员的面部特征数据。
在本实施例中,车载平板电脑通过3D结构光来对驾驶员进行识别。车载平板电脑设置有能够投射结构光的投射器和能够进行拍摄的摄像模块,3D结构光技术指使用投射器投射特定的光到物体表面以后,由摄像模块进行采集。根据物体造成的光信号的变化来计算物体的位置和深度等信息,进而得到物体的三维结构。车载平板电脑通过投射器向驾驶员的面部位置投射结构光,并利用摄像模块对结构光投射在驾驶员面部而形成的三维光图形进行摄像采集,在获取到驾驶员面部的三维光图形后,三维光图形表现为具有深度的图像,通过车载平板电脑内设置的算法对三维光图形进行计算分析,能够精确识别出驾驶员面部的三维形状,以获取驾驶员面部的具体细节和表情,当车载平板电脑通过摄像模块对驾驶员的面部进行一段时间的采集后,能够根据一段时间内驾驶员面部特征数据的变化得出驾驶员面部表情和面部细节的变化,进而有效地分析出驾驶员的驾驶状态,通过监测驾驶员的驾驶状态保证汽车行驶时的安全性。
进一步地,继续参照图3,图3为本发明驾驶员状态监测方法第三实施例的流程示意图,在本实施例中,所述步骤S11,控制所述车载平板电脑的投射器向驾驶员面部投射结构光的步骤之前包括:
步骤S14,控制摄像模块对驾驶位置进行拍摄,得到驾驶位置图像;
步骤S15,根据所述驾驶位置图像确定驾驶员面部的位置。
在本实施例中,车载平板电脑上设置有摄像模块和投射器,在通过投射器向驾驶员面部投射结构光前,由于不同驾驶员的身高不同,需要确定驾驶员的面部位置。车载平板电脑可以通过摄像模块对整个驾驶位置进行拍摄,以得到驾驶位置图像,通过对驾驶位置图像进行分析,能够确定驾驶员的身体形状,进而确定驾驶员的面部位置。由于不同驾驶员进入驾驶位时,驾驶员的头部位置并不相同,因此,车载平板电脑需要先确定驾驶员的头部位置后,才能够通过3D结构光获取驾驶员的面部特征数据,以监测驾驶员的驾驶状态。在驾驶员处于危险驾驶状态时及时进行提醒,避免事故的发生,保护驾驶员的人身安全。
进一步地,参照图4,图4为本发明驾驶员状态监测方法第四实施例的流程示意图,在本实施例中,所述步骤S10,当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤之前包括:
步骤S16,当检测到驾驶员时,通过对驾驶员进行人脸识别,以确认驾驶员身份;
步骤S17,在确认驾驶员身份时,向所述驾驶员许可驾驶权限。
在本实施例中,汽车在行驶前需要进行驾驶员的身份识别,以避免汽车被其他身份的人驾驶而产生危险。在车载平板电脑检测到驾驶员时,对驾驶员进行人脸识别,以确认驾驶员的身份。在经过人脸识别并确认驾驶员的身份时,车载平板电脑向驾驶员进行驾驶权限的许可。驾驶员需要得到驾驶权限后才能驾驶汽车上路行驶,在未获取驾驶权限时,驾驶员无法操纵汽车行驶。
优选地,车载平板电脑与汽车的处理器相连接,在驾驶员进入驾驶位时,通过驾驶位上设置的传感器确定驾驶员是否进入驾驶位并就坐,车载平板电脑通过汽车内部的通信方式获取驾驶员就坐信息,以检测驾驶位是否有驾驶员。
优选地,在车载平板电脑对驾驶员进行人脸识别前,可以通过摄像模块对驾驶位进行拍摄,获取驾驶位图像,并根据驾驶位图像确定驾驶员的面部位置,进而对驾驶员的面部进行人脸识别。
进一步地,参照图5,图5为本发明驾驶员状态监测方法第四实施例中步骤S16的细化流程示意图,在本实施例中,所述步骤S16,通过对驾驶员进行人脸识别,以确认驾驶员身份的步骤包括:
步骤S161,获取所述汽车的驾驶员的人脸图像数据;
步骤S162,将所述人脸图像数据与预设人脸图像数据进行匹配;
步骤S163,当所述人脸图像数据与预设人脸图像数据匹配时,确认驾驶员身份。
在本实施例中,车载平板电脑通过摄像模块获取汽车的驾驶员的人脸图像数据,且车载平板电脑内预先设置有对应驾驶员身份的人脸图像数据,将通过摄像模块拍摄得到的人脸图像数据与预设的人脸图像数据进行匹配,当拍摄的人脸图像数据与预设人脸图像数据匹配时,预设人脸图像数据对应的驾驶员身份即为车载平板电脑拍摄到的驾驶员的实际身份。在本技术方案中,用户可以预先在车载平板电脑内设置一个或多个能够获取驾驶权限的驾驶员身份,并对应每一个驾驶员身份设置相应的人脸图像数据作为预设人脸图像数据,当车载平板电脑检测到汽车内部有驾驶员进入驾驶位时,对驾驶员的面部进行人脸识别,当识别出驾驶员的身份后,即为确认驾驶员身份。通过人脸识别的方式,在确认驾驶员身份后向驾驶员许可驾驶权限,能够避免未被用户确认的驾驶员驾驶汽车,保护汽车的安全性。
进一步地,本发明驾驶员状态监测方法第五实施例中,所述步骤S10,当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
步骤S18,当所述汽车开始行驶时,启动计时以计算驾驶员的驾驶时间,并获取预设时长内所述汽车的驾驶员的面部特征数据;
步骤S18的步骤之后还包括:
步骤S181,检测所述驾驶员的驾驶时间是否大于预设疲劳时间;
步骤S182,当检测到驾驶员的驾驶时间大于预设疲劳时间时,确定驾驶员处于危险驾驶状态。
在本实施例中,驾驶员控制汽车开始行驶时进行计时,计时时间即为驾驶员驾驶汽车的时间,并在行驶过程中根据预设时长在一段时间内对驾驶员的面部特征数据进行采集分析。预设疲劳时间为预先设定的驾驶员将会产生疲劳的驾驶时间,当计时时间超过预设疲劳时间时,表示驾驶员在长时间的驾驶中有可能会产生疲劳,需要进行休息,此时确定驾驶员正处于危险驾驶状态,需要对驾驶员及时进行提醒,以保护驾驶员的安全。
优选地,预设疲劳时间还可以包括连续驾驶疲劳时间和累计驾驶疲劳时间。当驾驶员的连续驾驶汽车的驾驶时间超过连续驾驶疲劳时间时,确认驾驶员处于危险驾驶状态;当驾驶员在一段时间内的累积驾驶汽车的驾驶时间超过累积驾驶疲劳时间时,确认驾驶员处于危险驾驶状态。例如,当驾驶员连续驾驶汽车超过4小时,则认为驾驶员连续驾驶汽车的驾驶时间超过连续驾驶疲劳时间,驾驶员处于危险驾驶状态;当驾驶员在1天内累积驾驶超过10小时,认为驾驶员累积驾驶汽车的驾驶时间超过超过驾驶疲劳时间,驾驶员处于危险驾驶状态。
进一步地,本发明驾驶员状态监测方法第六实施例中,所述车载平板电脑内的摄像模块可以是广角摄像头,所述步骤S10,当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
步骤S19,当汽车处于行驶状态时,通过所述广角摄像头获取预设时长内所述汽车的驾驶员的面部特征数据以及所述汽车的内部图像数据;
步骤S19的步骤之后还包括:
步骤S191,根据所述内部图像数据,确定所述汽车内部是否发生影响驾驶员驾驶的行为;
步骤S192,当所述汽车内部发生影响驾驶员驾驶的行为时,向远程终端发送警示提醒。
在本实施例中,车载平板电脑内设置有广角摄像头,能够对汽车内部的驾驶位、副驾驶位,甚至是后车座椅位置同时进行拍摄,在汽车处于行驶状态时,通过广角摄像头获取驾驶员的面部特征数据和汽车的内部图像数据。汽车的内部图像数据指广角摄像头拍摄的汽车内部驾驶员和副驾驶员的行为和动作的特征数据,根据内部图像数据,车载平板电脑能够分析得出汽车内部驾驶员和副驾驶员的行为和动作,并确定是否发生了足以影响驾驶员保持安全驾驶的行为。当车载平板电脑确认汽车内部发生了足以影响驾驶员保持安全驾驶的行为时,向远程终端发送紧急提醒,以保护汽车的行驶安全和汽车内部人员的人身安全。其中,远程终端可以是用户预先设置的紧急联系人的通讯设备,还可以是距离汽车现在的位置最近的公安机关的紧急处理机构。
优选地,在汽车处于停车状态时,车载平板电脑可以通过广角摄像头对汽车内部进行停车监控。当车载平板电脑在停车状态监测到异常人员或异常行为时,能够通过远程通信的方式及时向用户发出提醒,以保护车辆安全。
进一步地,本发明驾驶员状态监测方法第七实施例中,所述面部特征数据包括眨眼频率、闭眼时长以及头部偏移频率,所述步骤S20,根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态的步骤包括以下步骤中的至少一项:
步骤S21,当检测到眨眼频率大于预设眨眼频率时,确定驾驶员处于危险驾驶状态;
步骤S22,当检测到闭眼时长大于预设闭眼时长时,确定驾驶员处于危险驾驶状态;
步骤S23,当检测到头部偏移频率大于预设头部偏移频率时,确定驾驶员处于危险驾驶状态。
在本实施例中,车载平板电脑通过获取到的驾驶员的面部特征数据,识别驾驶员的面部细节和面部表情,在预设时长内,车载平板电脑根据面部特征数据,能够得到驾驶员在预设时长内的眨眼频率、闭眼时长以及头部偏移频率等数据。当预设时长内的眨眼频率超过预设的眨眼频率时,表示驾驶员在该预设时长内由于过于疲劳而不断眨眼,进而确定驾驶员处于危险驾驶状态;当预设时长内驾驶员的闭眼时长超过预设闭眼时长时,表示驾驶员正处于疲劳状态,无法保证专注于汽车行驶,进而确定驾驶员处于危险驾驶状态;当检测到驾驶员在一段时间内的头部偏移频率大于预设头部偏移频率时,表示驾驶员在预设时长内频繁低头或者将头偏向与驾驶无关的事物,即确定驾驶员处于危险驾驶状态。通过驾驶员的面部表情和面部细节的变化,确定驾驶员的驾驶状态,并在驾驶员处于危险驾驶状态时及时进行提醒,有助于保持安全行驶,保障汽车内部人员的安全。
优选地,车载平板电脑在检测到预设时长内驾驶员发生打呵欠的动作时,也可以确认为驾驶员处于危险驾驶状态,并对驾驶员发出警示提醒。
优选地,车载平板电脑还可以通过软件升级,增加对驾驶员驾驶状态的判断方式以及优化面部特征数据的分析算法,以准确地对驾驶员的驾驶状态进行监测与提醒,保护驾驶员的行驶安全。
优选地,车载平板电脑为可拆卸地安装于汽车内部,通过汽车内部设置的连接接口接入汽车。在不需要使用车载平板电脑时,用户能够从汽车上取下车载平板电脑并作为平板电脑正常使用。
此外本发明实施例还提出一种计算机可读存储介质,其上存储有驾驶员状态监测程序,所述存储介质可以是图1的终端中的存储器1005,也可以是如ROM(Read-OnlyMemory,只读存储器)/RAM(Random Access Memory,随机存取存储器)、磁碟、光盘中的至少一种,所述计算机可读存储介质包括若干指令用以使得一台具有处理器的终端设备(可以是手机,计算机,服务器,或者电视机等)执行本发明各个实施例所述的驾驶员状态监测方法。
可以理解的是,在本说明书的描述中,参考术语“一实施例”、“另一实施例”、“其他实施例”、或“第一实施例~第N实施例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种驾驶员状态监测方法,应用于车载平板电脑,其特征在于,所述驾驶员状态监测方法包括以下步骤:
当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据;
根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态;
当驾驶员处于危险驾驶状态时,发出警示提醒。
2.如权利要求1所述的驾驶员状态监测方法,其特征在于,所述获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
控制所述车载平板电脑的投射器向驾驶员面部投射结构光;
利用所述车载平板电脑的摄像模块拍摄所述驾驶员面部在经过结构光投射后形成的三维光图形;
将所述三维光图形进行处理后获得驾驶员的面部特征数据。
3.如权利要求2所述的驾驶员状态监测方法,其特征在于,所述控制所述车载平板电脑的投射器向驾驶员面部投射结构光的步骤之前包括:
控制摄像模块对驾驶位置进行拍摄,得到驾驶位置图像;
根据所述驾驶位置图像确定驾驶员面部的位置。
4.如权利要求1所述的驾驶员状态监测方法,其特征在于,所述当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤之前包括:
当检测到驾驶员时,通过对驾驶员进行人脸识别,以确认驾驶员身份;
在确认驾驶员身份时,向所述驾驶员许可驾驶权限。
5.如权利要求4所述的驾驶员状态监测方法,其特征在于,所述通过对驾驶员进行人脸识别,以确认驾驶员身份的步骤包括:
获取所述汽车的驾驶员的人脸图像数据;
将所述人脸图像数据与预设人脸图像数据进行匹配;
当所述人脸图像数据与预设人脸图像数据匹配时,确认驾驶员身份。
6.如权利要求1所述的驾驶员状态监测方法,其特征在于,所述当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
当所述汽车开始行驶时,启动计时以计算驾驶员的驾驶时间,并获取预设时长内所述汽车的驾驶员的面部特征数据;
所述驾驶员状态监测方法还包括步骤:
检测所述驾驶员的驾驶时间是否大于预设疲劳时间;
当检测到驾驶员的驾驶时间大于预设疲劳时间时,确定驾驶员处于危险驾驶状态。
7.如权利要求1所述的驾驶员状态监测方法,其特征在于,所述车载平板电脑内设置有广角摄像头,所述当汽车处于行驶状态时,获取预设时长内所述汽车的驾驶员的面部特征数据的步骤包括:
当汽车处于行驶状态时,通过所述广角摄像头获取预设时长内所述汽车的驾驶员的面部特征数据以及所述汽车的内部图像数据;
所述驾驶员状态监测方法方法还包括步骤:
根据所述内部图像数据,确定所述汽车内部是否发生影响驾驶员驾驶的行为;
当所述汽车内部发生影响驾驶员驾驶的行为时,向远程终端发送警示提醒。
8.如权利要求1-7中任一项所述的驾驶员状态监测方法,其特征在于,所述面部特征数据包括眨眼频率、闭眼时长以及头部偏移频率,所述根据所述面部特征数据,识别驾驶员是否处于危险驾驶状态的步骤包括以下步骤中的至少一项:
当检测到眨眼频率大于预设眨眼频率时,确定驾驶员处于危险驾驶状态;
当检测到闭眼时长大于预设闭眼时长时,确定驾驶员处于危险驾驶状态;
当检测到头部偏移频率大于预设头部偏移频率时,确定驾驶员处于危险驾驶状态。
9.一种汽车,其特征在于,所述汽车包括可拆卸设置于汽车内的车载平板电脑,所述车载平板电脑包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的驾驶员状态监测程序,其中:所述驾驶员状态监测程序被所述处理器执行时实现如权利要求1至8中任一项所述的驾驶员状态监测方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有驾驶员状态监测程序,所述驾驶员状态监测程序被处理器执行时实现如权利要求1至8中任一项所述的驾驶员状态监测方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811143622.4A CN109291794A (zh) | 2018-09-28 | 2018-09-28 | 驾驶员状态监测方法、汽车以及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811143622.4A CN109291794A (zh) | 2018-09-28 | 2018-09-28 | 驾驶员状态监测方法、汽车以及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109291794A true CN109291794A (zh) | 2019-02-01 |
Family
ID=65165009
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811143622.4A Pending CN109291794A (zh) | 2018-09-28 | 2018-09-28 | 驾驶员状态监测方法、汽车以及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109291794A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111563456A (zh) * | 2020-05-07 | 2020-08-21 | 安徽江淮汽车集团股份有限公司 | 驾乘行为预警方法及系统 |
CN112149482A (zh) * | 2019-06-28 | 2020-12-29 | 深圳市商汤科技有限公司 | 驾驶员在岗状态检测方法、装置、设备和计算机存储介质 |
CN112455453A (zh) * | 2020-12-08 | 2021-03-09 | 安徽江淮汽车集团股份有限公司 | 驾驶员状态检测方法、装置及计算机可读存储介质 |
CN112937559A (zh) * | 2019-11-22 | 2021-06-11 | 深圳市超捷通讯有限公司 | 行车警示方法及车载装置 |
CN114766047A (zh) * | 2020-01-04 | 2022-07-19 | 龟井正通 | 驾驶限制系统 |
CN114895983A (zh) * | 2022-05-12 | 2022-08-12 | 合肥杰发科技有限公司 | Dms的启动方法及相关设备 |
CN116129409A (zh) * | 2023-04-11 | 2023-05-16 | 钧捷智能(深圳)有限公司 | 一种基于运动分析的驾驶员监测方法及系统 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10111994A (ja) * | 1996-10-09 | 1998-04-28 | Nissan Diesel Motor Co Ltd | 居眠り運転防止システム |
CN101082765A (zh) * | 2006-06-01 | 2007-12-05 | 高宏 | 一种三维人像摄影系统及其实现方法 |
CN101301200A (zh) * | 2008-05-29 | 2008-11-12 | 上海交通大学 | 测量颜面缺损患者面部三维形貌的方法 |
CN101388114A (zh) * | 2008-09-03 | 2009-03-18 | 北京中星微电子有限公司 | 一种人体姿态估计的方法和系统 |
CN202703278U (zh) * | 2012-05-25 | 2013-01-30 | 李国杰 | 一种汽车防疲劳驾驶控制系统 |
CN105160913A (zh) * | 2015-08-17 | 2015-12-16 | 上海斐讯数据通信技术有限公司 | 一种规范驾驶人驾驶行为的方法及装置 |
CN105292052A (zh) * | 2015-11-12 | 2016-02-03 | 福州大学 | 车辆行车安全自动监控与报警系统 |
CN105966404A (zh) * | 2015-11-06 | 2016-09-28 | 乐卡汽车智能科技(北京)有限公司 | 一种驾驶行为评测方法及装置 |
CN106740862A (zh) * | 2016-11-29 | 2017-05-31 | 深圳市元征科技股份有限公司 | 驾驶员状态监控方法及驾驶员状态监控装置 |
CN107332875A (zh) * | 2017-05-27 | 2017-11-07 | 上海与德科技有限公司 | 一种网约车监控方法及系统、云端服务器 |
CN107729870A (zh) * | 2017-01-24 | 2018-02-23 | 问众智能信息科技(北京)有限公司 | 基于计算机视觉的车内安全监测的方法和装置 |
CN108229345A (zh) * | 2017-12-15 | 2018-06-29 | 吉利汽车研究院(宁波)有限公司 | 一种驾驶员检测系统 |
CN108407813A (zh) * | 2018-01-25 | 2018-08-17 | 惠州市德赛西威汽车电子股份有限公司 | 一种基于大数据的车辆抗疲劳安全驾驶方法 |
CN108446600A (zh) * | 2018-02-27 | 2018-08-24 | 上海汽车集团股份有限公司 | 一种车辆驾驶员疲劳监测预警系统及方法 |
-
2018
- 2018-09-28 CN CN201811143622.4A patent/CN109291794A/zh active Pending
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10111994A (ja) * | 1996-10-09 | 1998-04-28 | Nissan Diesel Motor Co Ltd | 居眠り運転防止システム |
CN101082765A (zh) * | 2006-06-01 | 2007-12-05 | 高宏 | 一种三维人像摄影系统及其实现方法 |
CN101301200A (zh) * | 2008-05-29 | 2008-11-12 | 上海交通大学 | 测量颜面缺损患者面部三维形貌的方法 |
CN101388114A (zh) * | 2008-09-03 | 2009-03-18 | 北京中星微电子有限公司 | 一种人体姿态估计的方法和系统 |
CN202703278U (zh) * | 2012-05-25 | 2013-01-30 | 李国杰 | 一种汽车防疲劳驾驶控制系统 |
CN105160913A (zh) * | 2015-08-17 | 2015-12-16 | 上海斐讯数据通信技术有限公司 | 一种规范驾驶人驾驶行为的方法及装置 |
CN105966404A (zh) * | 2015-11-06 | 2016-09-28 | 乐卡汽车智能科技(北京)有限公司 | 一种驾驶行为评测方法及装置 |
CN105292052A (zh) * | 2015-11-12 | 2016-02-03 | 福州大学 | 车辆行车安全自动监控与报警系统 |
CN106740862A (zh) * | 2016-11-29 | 2017-05-31 | 深圳市元征科技股份有限公司 | 驾驶员状态监控方法及驾驶员状态监控装置 |
CN107729870A (zh) * | 2017-01-24 | 2018-02-23 | 问众智能信息科技(北京)有限公司 | 基于计算机视觉的车内安全监测的方法和装置 |
CN107332875A (zh) * | 2017-05-27 | 2017-11-07 | 上海与德科技有限公司 | 一种网约车监控方法及系统、云端服务器 |
CN108229345A (zh) * | 2017-12-15 | 2018-06-29 | 吉利汽车研究院(宁波)有限公司 | 一种驾驶员检测系统 |
CN108407813A (zh) * | 2018-01-25 | 2018-08-17 | 惠州市德赛西威汽车电子股份有限公司 | 一种基于大数据的车辆抗疲劳安全驾驶方法 |
CN108446600A (zh) * | 2018-02-27 | 2018-08-24 | 上海汽车集团股份有限公司 | 一种车辆驾驶员疲劳监测预警系统及方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112149482A (zh) * | 2019-06-28 | 2020-12-29 | 深圳市商汤科技有限公司 | 驾驶员在岗状态检测方法、装置、设备和计算机存储介质 |
CN112937559A (zh) * | 2019-11-22 | 2021-06-11 | 深圳市超捷通讯有限公司 | 行车警示方法及车载装置 |
CN114766047A (zh) * | 2020-01-04 | 2022-07-19 | 龟井正通 | 驾驶限制系统 |
CN114766047B (zh) * | 2020-01-04 | 2023-08-04 | 株式会社蓝地商业 | 驾驶限制系统 |
CN111563456A (zh) * | 2020-05-07 | 2020-08-21 | 安徽江淮汽车集团股份有限公司 | 驾乘行为预警方法及系统 |
CN112455453A (zh) * | 2020-12-08 | 2021-03-09 | 安徽江淮汽车集团股份有限公司 | 驾驶员状态检测方法、装置及计算机可读存储介质 |
CN114895983A (zh) * | 2022-05-12 | 2022-08-12 | 合肥杰发科技有限公司 | Dms的启动方法及相关设备 |
CN116129409A (zh) * | 2023-04-11 | 2023-05-16 | 钧捷智能(深圳)有限公司 | 一种基于运动分析的驾驶员监测方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109291794A (zh) | 驾驶员状态监测方法、汽车以及存储介质 | |
US9714037B2 (en) | Detection of driver behaviors using in-vehicle systems and methods | |
EP3825981B1 (en) | Warning apparatus and driving tendency analysis device | |
CN105667421B (zh) | 包括眼跟踪装置的供车辆使用的系统和方法 | |
US9679210B2 (en) | Using passive driver identification and other input for providing real-time alerts or actions | |
US20200312062A1 (en) | Safety for vehicle users | |
US9776644B2 (en) | On-vehicle situation detection apparatus and method | |
US20140347458A1 (en) | Cellular phone camera for driver state estimation | |
CN110395260B (zh) | 车辆、安全驾驶方法和装置 | |
KR101768847B1 (ko) | 차량 내부 모니터링 및 알림기능이 구비된 블랙박스 | |
JP2007094618A (ja) | 通知制御装置および方法、記録媒体、並びに、プログラム。 | |
CN112509279A (zh) | 车内生命体和物品遗留的检测和保护方法及系统 | |
US20130187847A1 (en) | In-car eye control method | |
JPWO2019198179A1 (ja) | 搭乗者状態判定装置、警告出力制御装置及び搭乗者状態判定方法 | |
CN112046497B (zh) | 驾驶辅助设备、驾驶辅助方法和驾驶辅助程序 | |
JP2005108033A (ja) | 運転者状況判定装置および運転者状況判定方法 | |
US20180022357A1 (en) | Driving recorder system | |
JP2008305190A (ja) | 居眠り警告装置及び自動車 | |
US20160193921A1 (en) | Vehicular display device | |
CN112298172A (zh) | 一种车载主动安全系统、方法及存储介质 | |
CN117465474A (zh) | 车辆驾驶的检测方法、装置、设备及存储介质 | |
CN116883977A (zh) | 一种乘客状态监控方法、装置、终端设备和车辆 | |
JP2021060676A (ja) | システムおよびプログラム等 | |
US20190149777A1 (en) | System for recording a scene based on scene content | |
CN115716459A (zh) | 一种车辆行驶中保障车内人员安全的方法、装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190201 |
|
RJ01 | Rejection of invention patent application after publication |