CN112319485B - 一种基于多模态数据分析驾驶员驾驶操作的方法及系统 - Google Patents

一种基于多模态数据分析驾驶员驾驶操作的方法及系统 Download PDF

Info

Publication number
CN112319485B
CN112319485B CN202011220466.4A CN202011220466A CN112319485B CN 112319485 B CN112319485 B CN 112319485B CN 202011220466 A CN202011220466 A CN 202011220466A CN 112319485 B CN112319485 B CN 112319485B
Authority
CN
China
Prior art keywords
information
obtaining
output
sensor
interval time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011220466.4A
Other languages
English (en)
Other versions
CN112319485A (zh
Inventor
柳佳妮
赵国朕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhongke Xinyan Technology Co ltd
Original Assignee
Beijing Zhongke Xinyan Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhongke Xinyan Technology Co ltd filed Critical Beijing Zhongke Xinyan Technology Co ltd
Priority to CN202011220466.4A priority Critical patent/CN112319485B/zh
Publication of CN112319485A publication Critical patent/CN112319485A/zh
Application granted granted Critical
Publication of CN112319485B publication Critical patent/CN112319485B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Navigation (AREA)

Abstract

本发明公开了一种基于多模态数据分析驾驶员驾驶操作的方法及系统,通过所述九轴传感器获得第一输出信息;获得第一预定运动判断标准;判断所述第一输出信息是否满足所述第一预定运动判断标准;当满足时,通过皮肤电传感器获得第一采集信号信息;获得预定皮肤电阻阻值的阈值;判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;所述第一输出结果表明驾驶员未按规范姿势进行驾驶。解决了现有技术中对于驾驶员驾驶操作是否规范的分析监测不够准确,存在不能够准确判断驾驶员在机动车行驶过程中的驾驶操作是否规范的技术问题。

Description

一种基于多模态数据分析驾驶员驾驶操作的方法及系统
技术领域
本发明涉及驾驶员驾驶操作分析领域,尤其涉及一种基于多模态数据分析驾驶员驾驶操作的方法及系统。
背景技术
随着经济的不断发展,社会的持续进步,汽车走进千家万户。汽车在方便人们出行的同时,也带来了安全隐患。按照驾驶规范驾驶机动车更是我们持续关注的话题。
但本申请发明人在实现本申请实施例中发明技术方案的过程中,发现上述技术至少存在如下技术问题:
现有技术中对于驾驶员驾驶操作是否规范的分析监测不够准确,存在不能够准确判断驾驶员在机动车行驶过程中的驾驶操作是否规范的技术问题。
发明内容
本申请实施例通过提供一种基于多模态数据分析驾驶员驾驶操作的方法及系统,解决了现有技术中对于驾驶员驾驶操作是否规范的分析监测不够准确,存在不能够准确判断驾驶员在机动车行驶过程中的驾驶操作是否规范的技术问题,达到更加准确分析判断机动车行驶过程中驾驶员的驾驶操作是否规范的技术效果。
鉴于上述问题,提出了本申请实施例提供一种基于多模态数据分析驾驶员驾驶操作的方法及系统。
第一方面,本申请实施例提供了一种基于多模态数据分析驾驶员驾驶操作的方法,所述方法应用于规范驾驶管理系统,所述规范驾驶管理系统与皮肤电传感器、光体积变化描记图传感器及九轴传感器连接,所述方法包括:通过所述九轴传感器获得第一输出信息;获得第一预定运动判断标准;判断所述第一输出信息是否满足所述第一预定运动判断标准;当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;获得预定皮肤电阻阻值的阈值;判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;所述第一输出结果表明驾驶员未按规范姿势进行驾驶。
另一方面,本申请还提供了一种基于多模态数据分析驾驶员驾驶操作的系统,所述系统包括:第一获得单元,所述第一获得单元用于通过所述九轴传感器获得第一输出信息;第二获得单元,所述第二获得单元用于获得第一预定运动判断标准;第一判断单元,所述第一判断单元用于判断所述第一输出信息是否满足所述第一预定运动判断标准;第三获得单元,所述第三获得单元用于获得当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;第四获得单元,所述第四获得单元用于获得预定皮肤电阻阻值的阈值;第二判断单元,所述第二判断单元用于判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;第五获得单元,所述第五获得单元用于当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;第六获得单元,所述第六获得单元用于所述第一输出结果表明驾驶员未按规范姿势进行驾驶。
第三方面,本发明提供了一种基于多模态数据分析驾驶员驾驶操作的系统,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述程序时实现第一方面所述方法的步骤。
本申请实施例中提供的一个或多个技术方案,至少具有如下技术效果或优点:
由于采用了通过九轴传感器获得第一输出信息,判断所述第一输出信息是否满足第一预定判断标准,当满足时通过皮肤电传感器获得第一采集信号信息,判断所述第一采集信号信息是否超过所述预定皮肤电阻阻值的方式,对机动车是否在行驶进行准确的判断,当所述机动车行驶时,通过对位于方向盘的皮肤电传感器采集的第一采集信号进行分析,达到判断驾驶员是否规范驾驶的技术效果。
上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。
附图说明
图1为本申请实施例一种基于多模态数据分析驾驶员驾驶操作的方法的流程示意图;
图2为本申请实施例一种基于多模态数据分析驾驶员驾驶操作的系统的结构示意图;
图3为本申请实施例示例性电子设备的结构示意图。
附图标记说明:第一获得单元11,第二获得单元12,第一判断单元13,第三获得单元14,第四获得单元15,第二判断单元16,第五获得单元17,第六获得单元18,总线300,接收器301,处理器302,发送器303,存储器304,总线接口306。
具体实施方式
本申请实施例通过提供一种基于多模态数据分析驾驶员驾驶操作的方法及系统,解决了现有技术中对于驾驶员驾驶操作是否规范的分析监测不够准确,存在不能够准确判断驾驶员在机动车行驶过程中的驾驶操作是否规范的技术问题,达到更加准确分析判断机动车行驶过程中驾驶员的驾驶操作是否规范的技术效果。下面,将参考附图详细的描述根据本申请的示例实施例。显然,所描述的实施例仅是本申请的一部分实施例,而不是本申请的全部实施例,应理解,本申请不受这里描述的示例实施例的限制。
申请概述
随着经济的不断发展,社会的持续进步,汽车走进千家万户。汽车在方便人们出行的同时,也带来了安全隐患。按照驾驶规范驾驶机动车更是我们持续关注的话题。但现有技术中对于驾驶员驾驶操作是否规范的分析监测不够准确,存在不能够准确判断驾驶员在机动车行驶过程中的驾驶操作是否规范的技术问题。
针对上述技术问题,本申请提供的技术方案总体思路如下:
本申请实施例提供了一种基于多模态数据分析驾驶员驾驶操作的方法,所述方法应用于规范驾驶管理系统,所述规范驾驶管理系统与皮肤电传感器、光体积变化描记图传感器及九轴传感器连接,所述方法包括:通过所述九轴传感器获得第一输出信息;获得第一预定运动判断标准;判断所述第一输出信息是否满足所述第一预定运动判断标准;当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;获得预定皮肤电阻阻值的阈值;判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;所述第一输出结果表明驾驶员未按规范姿势进行驾驶。
在介绍了本申请基本原理后,下面将结合说明书附图来具体介绍本申请的各种非限制性的实施方式。
实施例一
如图1所示,本申请实施例提供了一种基于多模态数据分析驾驶员驾驶操作的方法,其中,所述方法应用于规范驾驶管理系统,所述规范驾驶管理系统与皮肤电传感器、光体积变化描记图传感器及九轴传感器连接,其中,所述方法包括:
步骤S100:通过所述九轴传感器获得第一输出信息;
具体而言,所述九轴传感器包括三轴加速度计、三轴陀螺仪以及三轴磁力计。获得三轴加速度计、三轴陀螺仪、三轴磁力计的输出信号,根据所述输出信号获得第一输出信息。
步骤S200:获得第一预定运动判断标准;
步骤S300:判断所述第一输出信息是否满足所述第一预定运动判断标准;
具体而言,所述第一预定运动判断标准为根据所述第一输出信息中的三个输出信号获得的综合判定机动车是否在行驶的预定运动判断标准,进一步而言,只有在第一输出信息中的三个信号同时满足运动要求时,才判定所述机动车为运动状态,此时对驾驶员的驾驶行为进行分析。
步骤S400:当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;
具体而言,根据所述第一预定判断标准,判断所述第一输出信息满足要求时,对皮肤传感器的第一采集信号信息进行收集和分析。进一步而言,当识别所述场景为机动车未行驶时,此时皮肤传感器仍然在采集信号,不过此时不对所述采集信号进行分析。
步骤S500:获得预定皮肤电阻阻值的阈值;
步骤S600:判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;
具体而言,所述皮肤电传感器(GSR)通过人体皮肤(手部皮肤)接通,当手部离开所述皮肤电传感器位置时,此时信号采集回路中断,获得一预定的皮肤电阻阻值的阈值,当所述第一采集信号的电阻信息超过所述预定皮肤电阻阻值的阈值时,认为此时手部离开方向盘设置皮肤电传感器的位置,此时获得第一输出结果。
步骤S700:当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;
步骤S800:所述第一输出结果表明驾驶员未按规范姿势进行驾驶。
具体而言,当所述第一采集信息信号的电阻信息超过所述预定皮肤电阻阻值的阈值时,判断所述第一采集信号采集的电阻阻值异常的时间,当所述时间大于10S时,获得所述第一输出结果。所述第一输出结果代表所述驾驶员未按照驾驶规范驾驶机动车。
进一步而言,所述通过九轴传感器获得第一输出信息,本申请实施例步骤S100还包括:
步骤S110:获得三轴加速度传感器的第一检测信息,所述三轴加速度传感器包含于所述九轴传感器;
步骤S120:将所述第一检测信息作为所述第一输出信息的第一信号。
具体而言,所述三轴加速度传感器为采用压阻式、压电式和电容式工作原理,产生的加速度正比于电阻、电压和电容的变化,通过相应的放大和滤波电路进行采集的传感器。它可在预先不知道物体运动方向的场合下,检测加速度信号。三维加速度传感器具有体积小和重量轻特点,可以测量空间加速度,能够全面准确反映物体的运动性质。通过所述三轴加速度传感器获得第一信号,为后续准确判断机动车是否处于行驶状态奠定了基础。
进一步而言,所述将所述第一检测信息作为所述第一输出信息的第一信号,本申请实施例步骤S120还包括:
步骤S121:获得三轴陀螺仪的第二检测信息,所述三轴陀螺仪包含于所述九轴传感器;
步骤S122:将所述第二检测信息作为所述第一输出信息的第二信号。
具体而言,所述三轴陀螺仪又叫运动传感器,它可以通过测量角速度,以判别物体的运动状态,通过所述三轴陀螺仪获得第二信号,所述第二信号为后续准确判断运动状态夯实了基础。
进一步而言,所述将所述第二检测信息作为所述第一输出信息的第二信号,本申请实施例步骤S122还包括:
步骤S1221:获得三轴磁力计的第三检测信息,所述三轴磁力计包含于所述九轴传感器;
步骤S1222:将所述三轴磁力计作为所述第一输出信息的第三信号;
步骤S1223:判断所述第一输出信息的第一信号、第二信号、第三信号是否同时满足运动判定条件;
步骤S1224:当满足时,获得所述第一输出信息满足所述第一预定运动判断标准的结果。
具体而言,所述三轴磁力计的输出信号几乎不受磁场变动、磁温度系数、磁传感器距离与位置变动影响,可以达到高准确度与高效能的判定位置信息的效果。通过三轴加速度计、三轴陀螺仪以及三轴磁力计的输出信号,可以实时采集机动车在行驶中或停靠时的上下、左右、前后三个方向上的加速度,左右倾斜、前后倾斜、左右摇摆的动态方位信息,以及地磁场变化,从而得到被测对象的方向变化与运动信息,当所述第一信号、第二信号、第三信号同时满足运动判定条件时,此时获得机动车运动的信息,进而达到对机动车是否处于行驶状态准确判断的技术效果,为后续在行驶状态判断驾驶员是否驾驶规范夯实了基础。
进一步而言,本申请实施例还包括:
步骤S910:通过光体积变化描记图传感器获得第二采集信号信息;
步骤S920:获得所述第二采集信号信息的中断间隔时间信息;
步骤S930:获得第一中断间隔时间阈值;
步骤S940:判断所述中断间隔时间信息是否超出所述第一中断间隔时间阈值;
步骤S950:当所述中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果。
具体而言,所述光体积变化描记图传感器为利用特定光感器对血管内血液吸收光能的PPG信号波形进行分析,可以对血压进行预测的传感器。通过光体积变化描记图传感器获得第二采集信号信息,判断所述第二采集信号信息的中断间隔时间信息是否超出所述第一中断间隔时间阈值,所述第一中断间隔时间阈值为10S,则可以判断为驾驶员未握方向盘或单手握方向盘,未按规范姿势进行驾驶操作。
进一步而言,所述当所述中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果,本申请实施例步骤S950还包括:
步骤S951:将所述第一采集信号信息和第二采集信号信息作为第一传输数据输入所述规范驾驶管理系统;
步骤S952:通过所述规范驾驶管理系统对所述第一传输数据进行分析;
步骤S953:当所述第一传输数据中所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值和/或所述中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果。
具体而言,所述皮肤电传感器以及光体积变化描记图传感器置于方向盘两侧,所述传感器同时采集到有效数据时才可进行数据上传。如两侧传感器的中的两个或其中任意一个中断采集,则数据传输断开,将所述第一采集信号信息和第二采集信号信息作为第一传输数据输入所述规范驾驶管理系统。进一步而言,首先,通过九轴传感器采集的信号信息,识别机动车的运行场景。如果机动车处于停车状态,则保持采集,不对信号的采集状态进行检测与判断。如机动车处于驾驶状态,则对信号的采集状态进行检测与判断。此时,如果皮肤电传感器采集的皮肤电阻值大于预定皮肤电阻阻值的阈值(可判断为信号采集回路中断),或光体积变化描记图传感器采集信号无数据;且皮肤电传感器采集的皮肤电阻值大于预定皮肤电阻阻值的阈值、光体积变化描记图传感器采集信号无数据的持续时间大于10秒钟,则可以判断为驾驶员未握方向盘或单手握方向盘,未按规范姿势进行驾驶操作。
综上所述,本申请实施例所提供的一种基于多模态数据分析驾驶员驾驶操作的方法及系统具有如下技术效果:
1、由于采用了通过九轴传感器获得第一输出信息,判断所述第一输出信息是否满足第一预定判断标准,当满足时通过皮肤电传感器获得第一采集信号信息,判断所述第一采集信号信息是否超过所述预定皮肤电阻阻值的方式,对机动车是否在行驶进行准确的判断,当所述机动车行驶时,通过对位于方向盘的皮肤电传感器采集的第一采集信号进行分析,达到判断驾驶员是否规范驾驶的技术效果。
2、由于采用了判断所述第一信号、第二信号、第三信号是否同时满足运动判定条件的方式,进而达到对机动车是否处于行驶状态准确判断的技术效果,为后续在行驶状态判断驾驶员是否驾驶规范夯实了基础。
实施例二
基于与前述实施例中一种基于多模态数据分析驾驶员驾驶操作的方法同样发明构思,本发明还提供了一种基于多模态数据分析驾驶员驾驶操作的系统,如图2所示,所述系统包括:
第一获得单元11,所述第一获得单元11用于通过所述九轴传感器获得第一输出信息;
第二获得单元12,所述第二获得单元12用于获得第一预定运动判断标准;
第一判断单元13,所述第一判断单元13用于判断所述第一输出信息是否满足所述第一预定运动判断标准;
第三获得单元14,所述第三获得单元14用于获得当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;
第四获得单元15,所述第四获得单元15用于获得预定皮肤电阻阻值的阈值;
第二判断单元16,所述第二判断单元16用于判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;
第五获得单元17,所述第五获得单元17用于当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;
第六获得单元18,所述第六获得单元18用于所述第一输出结果表明驾驶员未按规范姿势进行驾驶。
进一步的,所述系统还包括:
第七获得单元,所述第七获得单元用于获得三轴加速度传感器的第一检测信息,所述三轴加速度传感器包含于所述九轴传感器;
第八获得单元,所述第八获得单元用于将所述第一检测信息作为所述第一输出信息的第一信号;
进一步的,所述系统还包括:
第九获得单元,所述第九获得单元用于获得三轴陀螺仪的第二检测信息,所述三轴陀螺仪包含于所述九轴传感器;
第十获得单元,所述第十获得单元用于将所述第二检测信息作为所述第一输出信息的第二信号。
进一步的,所述系统还包括:
第十一获得单元,所述第十一获得单元用于获得三轴磁力计的第三检测信息,所述三轴磁力计包含于所述九轴传感器;
第十二获得单元,所述第十二获得单元用于将所述三轴磁力计作为所述第一输出信息的第三信号;
第三判断单元,所述第三判断单元用于判断所述第一输出信息的第一信号、第二信号、第三信号是否同时满足运动判定条件;
第十三获得单元,所述第十三获得单元用于当满足时,获得所述第一输出信息满足所述第一预定运动判断标准的结果。
进一步的,所述系统还包括:
第十四获得单元,所述第十四获得单元用于通过光体积变化描记图传感器获得第二采集信号信息;
第十五获得单元,所述第十五获得单元用于获得所述第二采集信号信息的中断间隔时间信息;
第十六获得单元,所述第十六获得单元用于获得第一中断间隔时间阈值;
第四判断单元,所述第四判断单元用于判断所述中断间隔时间信息是否超出所述第一中断间隔时间阈值;
第十七获得单元,所述第十七获得单元用于当所述中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果。
进一步的,所述系统还包括:
第一输入单元,所述第一输入单元用于将所述第一采集信号信息和第二采集信号信息作为第一传输数据输入所述规范驾驶管理系统;
第一分析单元,所述第一分析单元用于通过所述规范驾驶管理系统对所述第一传输数据进行分析;
第十八获得单元,所述第十八获得单元用于当所述第一传输数据中所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值和/或所述中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果。
前述图1实施例一中的一种基于多模态数据分析驾驶员驾驶操作的方法的各种变化方式和具体实例同样适用于本实施例的一种基于多模态数据分析驾驶员驾驶操作的系统,通过前述对一种基于多模态数据分析驾驶员驾驶操作的方法的详细描述,本领域技术人员可以清楚的知道本实施例中一种基于多模态数据分析驾驶员驾驶操作的系统的实施方法,所以为了说明书的简洁,在此不再详述。
示例性电子设备
下面参考图3来描述本申请实施例的电子设备。
图3图示了根据本申请实施例的电子设备的结构示意图。
基于与前述实施例中一种基于多模态数据分析驾驶员驾驶操作的方法的发明构思,本发明还提供一种基于多模态数据分析驾驶员驾驶操作的系统,其上存储有计算机程序,该程序被处理器执行时实现前文所述一种基于多模态数据分析驾驶员驾驶操作的方法的任一方法的步骤。
其中,在图3中,总线架构(用总线300来代表),总线300可以包括任意数量的互联的总线和桥,总线300将包括由处理器302代表的一个或多个处理器和存储器304代表的存储器的各种电路链接在一起。总线300还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起,这些都是本领域所公知的,因此,本文不再对其进行进一步描述。总线接口306在总线300和接收器301和发送器303之间提供接口。接收器301和发送器303可以是同一个元件,即收发机,提供用于在传输介质上与各种其他系统通信的单元。
处理器302负责管理总线300和通常的处理,而存储器304可以被用于存储处理器302在执行操作时所使用的数据。
本发明实施例提供的一种基于多模态数据分析驾驶员驾驶操作的方法,所述方法应用于规范驾驶管理系统,所述规范驾驶管理系统与皮肤电传感器、光体积变化描记图传感器及九轴传感器连接,所述方法包括:通过所述九轴传感器获得第一输出信息;获得第一预定运动判断标准;判断所述第一输出信息是否满足所述第一预定运动判断标准;当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;获得预定皮肤电阻阻值的阈值;判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;所述第一输出结果表明驾驶员未按规范姿势进行驾驶。解决了现有技术中对于驾驶员驾驶操作是否规范的分析监测不够准确,存在不能够准确判断驾驶员在机动车行驶过程中的驾驶操作是否规范的技术问题,达到更加准确分析判断机动车行驶过程中驾驶员的驾驶操作是否规范的技术效果。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的系统。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令系统的制造品,该指令系统实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (6)

1.一种基于多模态数据分析驾驶员驾驶操作的方法,其中,所述方法应用于规范驾驶管理系统,所述规范驾驶管理系统与皮肤电传感器、光体积变化描记图传感器及九轴传感器连接,其中,所述方法包括:
通过所述九轴传感器获得第一输出信息,其中,所述第一输出信息包括所述九轴传感器的三轴加速度传感器、三轴陀螺仪和三轴磁力计的输出信号;
获得第一预定运动判断标准,其中,所述第一预定运动判断标准为根据所述第一输出信息中的三个输出信号获得综合判定机动车是否在行驶的预定运动判断标准;
判断所述第一输出信息是否满足所述第一预定运动判断标准;
当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;
获得预定皮肤电阻阻值的阈值;
判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;
当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;
所述第一输出结果表明驾驶员未按规范姿势进行驾驶;
通过光体积变化描记图传感器获得第二采集信号信息;
获得所述第二采集信号信息的中断间隔时间信息;
获得第一中断间隔时间阈值;
判断所述中断间隔时间信息是否超出所述第一中断间隔时间阈值;
当所述中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果;
所述方法还包括:
将所述第一采集信号信息和所述第二采集信号信息作为第一传输数据输入所述规范驾驶管理系统;
通过所述规范驾驶管理系统对所述第一传输数据进行分析;
当所述第一传输数据中所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值和所述第二采集信号信息的中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果。
2.如权利要求1所述的方法,所述通过九轴传感器获得第一输出信息,还包括:
获得三轴加速度传感器的第一检测信息,所述三轴加速度传感器包含于所述九轴传感器;
将所述第一检测信息作为所述第一输出信息的第一信号。
3.如权利要求2所述的方法,所述通过九轴传感器获得第一输出信息,还包括:
获得三轴陀螺仪的第二检测信息,所述三轴陀螺仪包含于所述九轴传感器;
将所述第二检测信息作为所述第一输出信息的第二信号。
4.如权利要求3所述的方法,所述通过九轴传感器获得第一输出信息,还包括:
获得三轴磁力计的第三检测信息,所述三轴磁力计包含于所述九轴传感器;
将所述三轴磁力计作为所述第一输出信息的第三信号;
判断所述第一输出信息的第一信号、第二信号、第三信号是否同时满足运动判定条件;
当满足时,获得所述第一输出信息满足所述第一预定运动判断标准的结果。
5.一种基于多模态数据分析驾驶员驾驶操作的系统,其中,所述系统包括:
第一获得单元,所述第一获得单元用于通过九轴传感器获得第一输出信息,其中,所述第一输出信息包括所述九轴传感器的三轴加速度传感器、三轴陀螺仪和三轴磁力计的输出信号;
第二获得单元,所述第二获得单元用于获得第一预定运动判断标准,其中,所述第一预定运动判断标准为根据所述第一输出信息中的三个输出信号获得综合判定机动车是否在行驶的预定运动判断标准;
第一判断单元,所述第一判断单元用于判断所述第一输出信息是否满足所述第一预定运动判断标准;
第三获得单元,所述第三获得单元用于当所述第一输出信息满足所述第一预定运动判断标准时,通过皮肤电传感器获得第一采集信号信息;
第四获得单元,所述第四获得单元用于获得预定皮肤电阻阻值的阈值;
第二判断单元,所述第二判断单元用于判断所述第一采集信号信息的电阻信息是否超过所述预定皮肤电阻阻值的阈值;
第五获得单元,所述第五获得单元用于当所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值时,获得第一输出结果;
第六获得单元,所述第六获得单元用于表明所述第一输出结果为驾驶员未按规范姿势进行驾驶;
第十四获得单元,所述第十四获得单元用于通过光体积变化描记图传感器获得第二采集信号信息;
第十五获得单元,所述第十五获得单元用于获得所述第二采集信号信息的中断间隔时间信息;
第十六获得单元,所述第十六获得单元用于获得第一中断间隔时间阈值;
第四判断单元,所述第四判断单元用于判断所述中断间隔时间信息是否超出所述第一中断间隔时间阈值;
第十七获得单元,所述第十七获得单元用于当所述中断间隔时间信息超出所述第一中断间隔时间阈值时,获得所述第一输出结果;
进一步的,所述系统还包括:
第一输入单元,所述第一输入单元用于将所述第一采集信号信息和第二采集信号信息作为第一传输数据输入规范驾驶管理系统;
第一分析单元,所述第一分析单元用于通过所述规范驾驶管理系统对所述第一传输数据进行分析;
第十八获得单元,所述第十八获得单元用于当所述第一传输数据中所述第一采集信号信息的电阻信息超过所述预定皮肤电阻阻值的阈值和第二采集信号信息的所述中断间隔时间信息超出所述第一中断间隔时间阈值,获得所述第一输出结果。
6.一种基于多模态数据分析驾驶员驾驶操作的系统,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述程序时实现权利要求1-4任一项所述方法的步骤。
CN202011220466.4A 2020-11-05 2020-11-05 一种基于多模态数据分析驾驶员驾驶操作的方法及系统 Active CN112319485B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011220466.4A CN112319485B (zh) 2020-11-05 2020-11-05 一种基于多模态数据分析驾驶员驾驶操作的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011220466.4A CN112319485B (zh) 2020-11-05 2020-11-05 一种基于多模态数据分析驾驶员驾驶操作的方法及系统

Publications (2)

Publication Number Publication Date
CN112319485A CN112319485A (zh) 2021-02-05
CN112319485B true CN112319485B (zh) 2022-04-01

Family

ID=74317034

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011220466.4A Active CN112319485B (zh) 2020-11-05 2020-11-05 一种基于多模态数据分析驾驶员驾驶操作的方法及系统

Country Status (1)

Country Link
CN (1) CN112319485B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114869240B (zh) * 2022-06-13 2024-07-12 北京中科心研科技有限公司 一种筛查飞行学员晕动症的方法及手环和系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6172610B1 (en) * 1999-04-08 2001-01-09 Robert S. Prus Sleeping driver detector and alarm system
CN101123027A (zh) * 2007-09-26 2008-02-13 曹明礼 汽车疲劳驾驶报警方法
CN205344687U (zh) * 2016-01-06 2016-06-29 北京汽车股份有限公司 一种方向盘抓握监测系统、汽车方向盘总成及汽车
CN206049659U (zh) * 2016-09-30 2017-03-29 清华大学深圳研究生院 一种简化的集成运动传感器的驾驶行为分析装置
CN107054374A (zh) * 2011-06-22 2017-08-18 Tk控股公司 用于车辆的方向盘的传感器系统
CN109249931A (zh) * 2017-07-06 2019-01-22 新华网股份有限公司 用于车辆驾驶的控制方法和装置
CN111674397A (zh) * 2020-06-15 2020-09-18 中国第一汽车股份有限公司 一种车辆的方向盘脱手状态的检测方法、装置及车载设备
CN111811829A (zh) * 2020-06-18 2020-10-23 深圳市周立功单片机有限公司 一种方向盘离手检测装置及方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11254209B2 (en) * 2013-03-15 2022-02-22 Honda Motor Co., Ltd. System and method for controlling vehicle systems in a vehicle
KR101599479B1 (ko) * 2015-03-05 2016-03-04 주식회사 휴이노 다중 생체신호 측정 수단을 포함하는 자동차 키 장치, 상기 키 장치가 연결되는 스티어링 휠 도킹 스테이션 및 상기 자동차 키 장치와 스티어링 휠 도킹 스테이션을 포함하는 시스템
KR102485331B1 (ko) * 2016-12-15 2023-01-05 현대자동차주식회사 운전자의 핸즈오프 검출 장치 및 그 방법
KR101978963B1 (ko) * 2017-05-11 2019-05-16 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
CN209634401U (zh) * 2018-11-08 2019-11-15 浙江清华柔性电子技术研究院 一种具有健康监测功能的汽车方向盘
CN109714419A (zh) * 2018-12-27 2019-05-03 南京美均电子科技有限公司 一种车载健康检测系统及其方法
CN111845764B (zh) * 2020-06-17 2022-07-19 宁波吉利汽车研究开发有限公司 一种脱手检测方法、装置、设备及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6172610B1 (en) * 1999-04-08 2001-01-09 Robert S. Prus Sleeping driver detector and alarm system
CN101123027A (zh) * 2007-09-26 2008-02-13 曹明礼 汽车疲劳驾驶报警方法
CN107054374A (zh) * 2011-06-22 2017-08-18 Tk控股公司 用于车辆的方向盘的传感器系统
CN205344687U (zh) * 2016-01-06 2016-06-29 北京汽车股份有限公司 一种方向盘抓握监测系统、汽车方向盘总成及汽车
CN206049659U (zh) * 2016-09-30 2017-03-29 清华大学深圳研究生院 一种简化的集成运动传感器的驾驶行为分析装置
CN109249931A (zh) * 2017-07-06 2019-01-22 新华网股份有限公司 用于车辆驾驶的控制方法和装置
CN111674397A (zh) * 2020-06-15 2020-09-18 中国第一汽车股份有限公司 一种车辆的方向盘脱手状态的检测方法、装置及车载设备
CN111811829A (zh) * 2020-06-18 2020-10-23 深圳市周立功单片机有限公司 一种方向盘离手检测装置及方法

Also Published As

Publication number Publication date
CN112319485A (zh) 2021-02-05

Similar Documents

Publication Publication Date Title
CN105109490B (zh) 一种基于三轴加速度传感器判断车辆急转弯的方法
CN103502075B (zh) 道路倾斜度的估计
CN104246516B (zh) 一种确定车辆加速度的方法及装置
US20130316310A1 (en) Methods for determining orientation of a moving vehicle
EP3761274A1 (en) Method, apparatus, storage medium and electronic device for testing dynamic parameter of vehicle
CN108698593A (zh) 车辆用危险避免装置
US6999859B2 (en) Vehicle speed measuring apparatus
EP2923905A1 (en) Vehicle state determination device, vehicle state determination method, and driving operation diagnosis device
CN108569279A (zh) 用于识别车位的方法和装置
CN110143200A (zh) 一种车辆状态数据获取方法、装置、车载设备及存储介质
KR102470306B1 (ko) 타이어 압력 추정 장치 및 그 추정 방법
CN112319485B (zh) 一种基于多模态数据分析驾驶员驾驶操作的方法及系统
EP3001146A1 (en) Method and system for aiding a navigation device in determination of an elevated road, and navigation device
US9701314B2 (en) Method for detecting the attentional state of the driver of a vehicle
CN115071723A (zh) 在行驶期间检测驾驶员的手握住/松开方向盘的方法和系统
CN107662613A (zh) 一种基于移动群智感知的极端驾驶行为识别方法及系统
CN110779736A (zh) 一种对车辆esc性能的测试系统
CN110382339A (zh) 估计自行车上骑行者行为和/或沿着所述自行车所遵循的路径的道路质量的系统和方法
JP5786503B2 (ja) 状態検出装置、電子機器、プログラム及び状態検出方法
CN201688966U (zh) 离合踏板特性分析系统
CN104155966B (zh) 汽车cdc数据采集分析装置
CN115805924A (zh) 一种矿用车辆制动控制系统
CN203142524U (zh) 路面障碍物识别系统
CN105629953A (zh) 基于车辆辅助驾驶的杆体识别系统
CN109883435A (zh) 地图数据采集的控制方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant