CN116714596A - 一种自动驾驶数据处理系统及方法 - Google Patents

一种自动驾驶数据处理系统及方法 Download PDF

Info

Publication number
CN116714596A
CN116714596A CN202310696338.4A CN202310696338A CN116714596A CN 116714596 A CN116714596 A CN 116714596A CN 202310696338 A CN202310696338 A CN 202310696338A CN 116714596 A CN116714596 A CN 116714596A
Authority
CN
China
Prior art keywords
information
vehicle
real
time
warning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310696338.4A
Other languages
English (en)
Inventor
周雄
徐云和
王伟
宛蓉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Speed Spacetime Information Co ltd
Original Assignee
Beijing Speed Spacetime Information Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Speed Spacetime Information Co ltd filed Critical Beijing Speed Spacetime Information Co ltd
Priority to CN202310696338.4A priority Critical patent/CN116714596A/zh
Publication of CN116714596A publication Critical patent/CN116714596A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096725Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information generates an automatic action on the vehicle control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0059Estimation of the risk associated with autonomous or manual driving, e.g. situation too complex, sensor failure or driver incapacity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0808Diagnosing performance data
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125Traffic data processing
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0137Measuring and analyzing of parameters relative to traffic conditions for specific applications
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0004In digital systems, e.g. discrete-time systems involving sampling
    • B60W2050/0005Processor details or data handling, e.g. memory registers or chip architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种自动驾驶数据处理系统及方法,包括车辆信息采集模块、导航信息采集模块、车内影像采集模块、其他信息采集模块、数据处理模块与信息发送模块;所述车辆信息采集模块用于在自动驾驶过程中采集车辆信息,所述导航信息采集模块用于在自动驾驶过程中采集当导航路线信息;所述车内影像采集模块用于在自动驾驶过程中采集车内实时影像信息,所述车外影像采集模块用于在自动驾驶过程中采集车外实时影像信息;所述数据处理模块用于对车辆信息、导航路线信息、车内实时影像信息与车外实时影像信息进行处理,获取到车内警示信息、车外警示信息与车辆警示信息。本发明能够更全面的对自动驾驶数据进行处理,保证自动驾驶的安全。

Description

一种自动驾驶数据处理系统及方法
技术领域
本发明涉及自动驾驶领域,具体涉及一种自动驾驶数据处理系统及方法。
背景技术
自动驾驶汽车依靠人工智能、视觉计算、雷达、监控装置和全球定位系统协同合作,让电脑可以在没有任何人类主动的操作下,自动安全地操作机动车辆;
自动驾驶技术虽然已经非常成熟,但在现有状况下,多还是作为驾驶辅助,因此在自动驾驶过程中,需要通过自动驾驶数据处理系统及方法来处理自动驾驶数据来保证行驶安全。
现有的自动驾驶数据处理系统及方法,数据处理效果较差,不能更好的保证自动驾驶的安全,给自动驾驶数据处理系统及方法的使用带来了一定的影响,因此,提出一种自动驾驶数据处理系统及方法。
发明内容
本发明所要解决的技术问题在于:如何解决现有的自动驾驶数据处理系统及方法,数据处理效果较差,不能更好的保证自动驾驶的安全,给自动驾驶数据处理系统及方法的使用带来了一定的影响的问题,提供了一种自动驾驶数据处理系统及方法。
本发明是通过以下技术方案解决上述技术问题的,本发明包括车辆信息采集模块、导航信息采集模块、车内影像采集模块、其他信息采集模块、数据处理模块与信息发送模块;
所述车辆信息采集模块用于在自动驾驶过程中采集车辆信息,所述导航信息采集模块用于在自动驾驶过程中采集当导航路线信息;
所述车内影像采集模块用于在自动驾驶过程中采集车内实时影像信息,所述车外影像采集模块用于在自动驾驶过程中采集车外实时影像信息;
所述数据处理模块用于对车辆信息、导航路线信息、车内实时影像信息与车外实时影像信息进行处理,获取到车内警示信息、车外警示信息与车辆警示信息;
所述信息发送模块用于在车内警示信息、车外警示信息与车辆警示信息生成后,将上述信息发送到预设接收终端。
进一步在于,所述车内警示信息的具体处理过程如下:提取出采集到的车内影像信息,从车内影像信息进行驾驶位的人脸影像识别,当识别出人脸警示信息,即生成车内警示信息;
当车内影像信息中的驾驶位未识别人脸影像信息,即重新进行车内影像信息采集,再次采集到的车内影像信息中的驾驶位仍未识别到人脸影像信息,即生成停车控制信息,停车控制信息即控制车辆自动行驶到安全位置后停止车辆,当停车控制信息生成时,车辆处于警示位置时,即生成警示通报信息,警示通报信息生成后,在车内循环播放提示音。
进一步在于,所述人脸警示信息的具体处理过程如下:提取出采集到车内影像信息,从车内影像信息提取出,选取出驾驶位的人脸影像信息,对其进行特征点标记,并对特征点进行处理,获取到第一特征参数信息、第二特征参数与第三特征参数,当第一特征参数、第二特征参数与第三特征参数中至少两个存在异常时,即生成人脸警示信息。
进一步在于,所述特征点标记的具体过程如下:提取出采集到的驾驶位的人脸影像信息,将人脸影像信息中左眼的两个眼角分别标记为点A1和点A2,之后再采集上眼皮的最高点和下眼皮的最低点,将其标记为点A3和A4;
对人脸影像信息中右眼进行上述过程的处理,获取到点B1、B2、B3和B4;
再提取出驾驶位的人脸影像信息,采集鼻尖点,将其标记为点C;
再对驾驶位的人脸影像信息选取人脸影像中的下巴位置的最左侧点和最右侧点,将其标记为点D1和D2。
进一步在于,所述对特征点进行处理获取到第一特征参数信息、第二特征参数与第三特征参数的具体过程如下:提取出特征点A1、A2、A3和A4,将点A1与A2分别和A3连线获取到线段L1和线段L2,将点A1与A2分别和A4连线获取到线段L3和线段L4,线段L1、L2、L3和L4围成标识图形Aa;
再对特征点B1、B2、B3和B4进行与上述过程相同的处理,获取到标识图形Bb,对标识图形Aa和标识图形Bb进行面积采集,即获取到第一特征参数;
提取出特征点C,以方向盘的中点所在高度为基准高度,作一条水平线P,之后测量出特征点C与水平线P之间的长度即获取到第二特征参数;
提取出特征点D1和D2,将D1和D2连线获取到线段E,将线段E的中点标记为D3,测量出D3与水平线P之间的长度,即获取到第三特征参数。
进一步在于,所述第一特征参数、第二特征参数与第三特征参数的异常判定过程如下:在预设时长内每隔预设时间段采集一次第一特征参数,获取到多个第一特征参数,之后对多个第一特征参数进行分析,当多个第一特征参数连续小于预设值或者小于警示值的数量大于预设值,即表示第一特征参数异常;
连续采集x个第二特征参数和第三特征参数信息,当第二特征参数中小于预设值的数量超过x/3,即表示第二特征参数异常,当第三特征参数信息小于预设值的数量超过x/3,即表示第三特征参数异常。
进一步在于,所述车外警示信息的具体处理过程如下:提取出采集到的车外影像信息,对车外影像信息为车辆前方影像信息与车辆后方影像信息,对车辆前方影像信息进行其他车辆模型识别获取到前方其他车辆,之后对影像信息进行实时处理,获取到实时前方车辆距离信息;
再对车辆后方影像信息进行其他车辆模型识别获取到后方其他车辆,之后对影像信息进行实时处理,获取到实时后方车辆距离信息;
对实时前方车辆距离信息与实时后方车辆距离信息进行处理,当实时前方车辆距离信息与实时后方车辆距离信息中任意一个存在异常时,即生成车外警示信息。
进一步在于,所述实时前方车辆距离信息与实时后方车辆距离信息的异常判定过程如下:提取出采集到的实时前方车辆距离信息,实时前方车辆距离信息为多个前方车辆距离信息的集合,当实时前方车辆距离信息连续变小,且最后采集到的前方车辆距离小于警示值,即表示实时前方车辆距离信息存在异常;
实时后方车辆距离信息为多个后方车辆距离信息的集合,当实时后方车辆距离信息连续变小,且最后采集到的后方车辆距离小于警示值,即表示实时后方车辆距离信息存在异常。
进一步在于,所述车辆警示信息的具体过程如下:提取出采集到的车辆信息,车辆信息包括车辆实时位置信息与车辆实时车速信息,每个预设时长即采集一次车辆实时位置信息Q,连续采集m次,m≥5,之将采集到m次车辆实时位置信息Q按照顺序连线,获取到实时行驶路线图K1,之后从导航信息中提取出导航路线的预设导航路线图K2,将实时行驶路线图K1与预设导航路线图K2进行相似度比对,当相似度小于预设值时,即生成车辆警示信息;
再提取出车辆实时车速信息与车辆实时位置信息,从导航信息中提取出车辆实时位置的限速信息,当车辆实时车速信息大于限速信息时,即生成车辆警示信息。
一种自动驾驶数据处理方法。所述处理方法包括以下步骤:
步骤一:在自动驾驶过程中采集车辆信息与当导航路线信息;
步骤二:在自动驾驶过程中采集通过车内设置的影像采集设备采集车内实时影像信息;
步骤三:在自动驾驶过程中采集通过车外设置的影像采集设备采集车外实时影像信息;
步骤四:对车辆信息、导航路线信息、车内实时影像信息与车外实时影像信息进行处理,获取到车内警示信息、车外警示信息与车辆警示信息;
步骤五:在车内警示信息、车外警示信息与车辆警示信息生成后,将上述信息发送到预设接收终端。
本发明相比现有技术具有以下优点:该自动驾驶数据处理系统及方法,通过对车辆影像信息进行处理,能过了解到自动驾驶过程中驾驶人的状况现在的自动驾驶技术主要还是起辅助作用,在正常行驶过程中,还是需要驾驶人员集中注意力来应对突发状况,因此实时的监测驾驶人的状态,在发现其异常时,及时的进行警示,避免交通事故的发生,同时通过在车辆行驶过程中,通过该系统对车辆外部的影像数据进行处理,发现异常时及时的进行警示,能够更好的保证自动驾驶的,让该数据处理系统能够更加全面的保证自动驾驶的安全,并且该数据处理系统及方法在自动驾驶过程对车辆的行驶路径和速度进行了综合处理,在发现数据异常及时的进行警示,更进一步的保证自动驾驶车辆的行驶安全,让该系统及方法更加值得推广使用。
附图说明
图1是本发明的系统框图。
具体实施方式
下面对本发明的实施例作详细说明,本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述的实施例。
如图1所示,本实施例提供一种技术方案:一种自动驾驶数据处理系统,包括车辆信息采集模块、导航信息采集模块、车内影像采集模块、其他信息采集模块、数据处理模块与信息发送模块;
所述车辆信息采集模块用于在自动驾驶过程中采集车辆信息,所述导航信息采集模块用于在自动驾驶过程中采集当导航路线信息;
所述车内影像采集模块用于在自动驾驶过程中采集车内实时影像信息,所述车外影像采集模块用于在自动驾驶过程中采集车外实时影像信息;
所述数据处理模块用于对车辆信息、导航路线信息、车内实时影像信息与车外实时影像信息进行处理,获取到车内警示信息、车外警示信息与车辆警示信息;
所述信息发送模块用于在车内警示信息、车外警示信息与车辆警示信息生成后,将上述信息发送到预设接收终端;
通过对车辆影像信息进行处理,能过了解到自动驾驶过程中驾驶人的状况现在的自动驾驶技术主要还是起辅助作用,在正常行驶过程中,还是需要驾驶人员集中注意力来应对突发状况,因此实时的监测驾驶人的状态,在发现其异常时,及时的进行警示,避免交通事故的发生,同时通过在车辆行驶过程中,通过该系统对车辆外部的影像数据进行处理,发现异常时及时的进行警示,能够更好的保证自动驾驶的,让该数据处理系统能够更加全面的保证自动驾驶的安全,并且该数据处理系统及方法在自动驾驶过程对车辆的行驶路径和速度进行了综合处理,在发现数据异常及时的进行警示,更进一步的保证自动驾驶车辆的行驶安全,让该系统及方法更加值得推广使用。
所述车内警示信息的具体处理过程如下:提取出采集到的车内影像信息,从车内影像信息进行驾驶位的人脸影像识别,当识别出人脸警示信息,即生成车内警示信息;
当车内影像信息中的驾驶位未识别人脸影像信息,即重新进行车内影像信息采集,再次采集到的车内影像信息中的驾驶位仍未识别到人脸影像信息,即生成停车控制信息,停车控制信息即控制车辆自动行驶到安全位置后停止车辆,当停车控制信息生成时,车辆处于警示位置时,即生成警示通报信息,警示通报信息生成后,在车内循环播放提示音;
该系统通过对采集到车内影像数据进行处理,能够了解到车内驾驶人员是否存在异常,在发现异常,及时的进行警示,从而减少在自动驾驶过程突发意外,驾驶人反应不及时导致的意外发生。
所述人脸警示信息的具体处理过程如下:提取出采集到车内影像信息,从车内影像信息提取出,选取出驾驶位的人脸影像信息,对其进行特征点标记,并对特征点进行处理,获取到第一特征参数信息、第二特征参数与第三特征参数,当第一特征参数、第二特征参数与第三特征参数中至少两个存在异常时,即生成人脸警示信息;
通过上述过程,能够更加准确的生成人脸警示信息,避免了人脸警示信息误发送的状况发生。
所述特征点标记的具体过程如下:提取出采集到的驾驶位的人脸影像信息,将人脸影像信息中左眼的两个眼角分别标记为点A1和点A2,之后再采集上眼皮的最高点和下眼皮的最低点,将其标记为点A3和A4;
对人脸影像信息中右眼进行上述过程的处理,获取到点B1、B2、B3和B4;
再提取出驾驶位的人脸影像信息,采集鼻尖点,将其标记为点C;
再对驾驶位的人脸影像信息选取人脸影像中的下巴位置的最左侧点和最右侧点,将其标记为点D1和D2;
通过上述过程,能够更加准确的进行特征点的提取,为后续数据处理提供稳定的数据支持。
所述对特征点进行处理获取到第一特征参数信息、第二特征参数与第三特征参数的具体过程如下:提取出特征点A1、A2、A3和A4,将点A1与A2分别和A3连线获取到线段L1和线段L2,将点A1与A2分别和A4连线获取到线段L3和线段L4,线段L1、L2、L3和L4围成标识图形Aa;
再对特征点B1、B2、B3和B4进行与上述过程相同的处理,获取到标识图形Bb,对标识图形Aa和标识图形Bb进行面积采集,即获取到第一特征参数;
提取出特征点C,以方向盘的中点所在高度为基准高度,作一条水平线P,之后测量出特征点C与水平线P之间的长度即获取到第二特征参数;
提取出特征点D1和D2,将D1和D2连线获取到线段E,将线段E的中点标记为D3,测量出D3与水平线P之间的长度,即获取到第三特征参数;
所述第一特征参数、第二特征参数与第三特征参数的异常判定过程如下:在预设时长内每隔预设时间段采集一次第一特征参数,获取到多个第一特征参数,之后对多个第一特征参数进行分析,当多个第一特征参数连续小于预设值或者小于警示值的数量大于预设值,即表示第一特征参数异常;
第一特征参数异常即表示驾驶人员的眼皮频繁的闭合,可能存在疲劳驾驶或打瞌睡等状况;
连续采集x个第二特征参数和第三特征参数信息,当第二特征参数中小于预设值的数量超过x/3,即表示第二特征参数异常,当第三特征参数信息小于预设值的数量超过x/3,即表示第三特征参数异常;
第二特征参数异常和第三特征参数异常即表示驾驶人员频繁的低头,可能存在与驾驶无关的其他行为,需要进行警示;
上述过程中的预设值为驾驶进入车辆时采集其初始的人脸影像,对其进行处理即能够获取到对应的预设值。
所述车外警示信息的具体处理过程如下:提取出采集到的车外影像信息,对车外影像信息为车辆前方影像信息与车辆后方影像信息,对车辆前方影像信息进行其他车辆模型识别获取到前方其他车辆,之后对影像信息进行实时处理,获取到实时前方车辆距离信息;
再对车辆后方影像信息进行其他车辆模型识别获取到后方其他车辆,之后对影像信息进行实时处理,获取到实时后方车辆距离信息;
对实时前方车辆距离信息与实时后方车辆距离信息进行处理,当实时前方车辆距离信息与实时后方车辆距离信息中任意一个存在异常时,即生成车外警示信息;
通过上述过程,对车辆前后的影像信息进行处理,在发现车辆异常靠近时,及时的进行警示,从而避免交通事故的发生。
所述实时前方车辆距离信息与实时后方车辆距离信息的异常判定过程如下:提取出采集到的实时前方车辆距离信息,实时前方车辆距离信息为多个前方车辆距离信息的集合,当实时前方车辆距离信息连续变小,且最后采集到的前方车辆距离小于警示值,即表示实时前方车辆距离信息存在异常;
实时后方车辆距离信息为多个后方车辆距离信息的集合,当实时后方车辆距离信息连续变小,且最后采集到的后方车辆距离小于警示值,即表示实时后方车辆距离信息存在异常;
通过上述过程,能够更加准确的进行危险判定,上述过程中的预设值根据实际需求进行自动设定。
所述车辆警示信息的具体过程如下:提取出采集到的车辆信息,车辆信息包括车辆实时位置信息与车辆实时车速信息,每个预设时长即采集一次车辆实时位置信息Q,连续采集m次,m≥5,之将采集到m次车辆实时位置信息Q按照顺序连线,获取到实时行驶路线图K1,之后从导航信息中提取出导航路线的预设导航路线图K2,将实时行驶路线图K1与预设导航路线图K2进行相似度比对,当相似度小于预设值时,即生成车辆警示信息;
再提取出车辆实时车速信息与车辆实时位置信息,从导航信息中提取出车辆实时位置的限速信息,当车辆实时车速信息大于限速信息时,即生成车辆警示信息;
通过上述过程,能够了解到自动驾驶的车辆是否标准的按照既定的导航路线和速度进行自动驾驶,在发现存在异常时,及时的进行警示并切换回人工驾驶模式,从而避免意外发生。
一种自动驾驶数据处理方法。所述处理方法包括以下步骤:
步骤一:在自动驾驶过程中采集车辆信息与当导航路线信息;
步骤二:在自动驾驶过程中采集通过车内设置的影像采集设备采集车内实时影像信息;
步骤三:在自动驾驶过程中采集通过车外设置的影像采集设备采集车外实时影像信息;
步骤四:对车辆信息、导航路线信息、车内实时影像信息与车外实时影像信息进行处理,获取到车内警示信息、车外警示信息与车辆警示信息;
步骤五:在车内警示信息、车外警示信息与车辆警示信息生成后,将上述信息发送到预设接收终端。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种自动驾驶数据处理系统,其特征在于,包括车辆信息采集模块、导航信息采集模块、车内影像采集模块、其他信息采集模块、数据处理模块与信息发送模块;
所述车辆信息采集模块用于在自动驾驶过程中采集车辆信息,所述导航信息采集模块用于在自动驾驶过程中采集当导航路线信息;
所述车内影像采集模块用于在自动驾驶过程中采集车内实时影像信息,所述车外影像采集模块用于在自动驾驶过程中采集车外实时影像信息;
所述数据处理模块用于对车辆信息、导航路线信息、车内实时影像信息与车外实时影像信息进行处理,获取到车内警示信息、车外警示信息与车辆警示信息;
所述信息发送模块用于在车内警示信息、车外警示信息与车辆警示信息生成后,将上述信息发送到预设接收终端。
2.根据权利要求1所述的一种自动驾驶数据处理系统,其特征在于:所述车内警示信息的具体处理过程如下:提取出采集到的车内影像信息,从车内影像信息进行驾驶位的人脸影像识别,当识别出人脸警示信息,即生成车内警示信息;
当车内影像信息中的驾驶位未识别人脸影像信息,即重新进行车内影像信息采集,再次采集到的车内影像信息中的驾驶位仍未识别到人脸影像信息,即生成停车控制信息,停车控制信息即控制车辆自动行驶到安全位置后停止车辆,当停车控制信息生成时,车辆处于警示位置时,即生成警示通报信息,警示通报信息生成后,在车内循环播放提示音。
3.根据权利要求2所述的一种自动驾驶数据处理系统,其特征在于:所述人脸警示信息的具体处理过程如下:提取出采集到车内影像信息,从车内影像信息提取出,选取出驾驶位的人脸影像信息,对其进行特征点标记,并对特征点进行处理,获取到第一特征参数信息、第二特征参数与第三特征参数,当第一特征参数、第二特征参数与第三特征参数中至少两个存在异常时,即生成人脸警示信息。
4.根据权利要求3所述的一种自动驾驶数据处理系统,其特征在于:所述特征点标记的具体过程如下:提取出采集到的驾驶位的人脸影像信息,将人脸影像信息中左眼的两个眼角分别标记为点A1和点A2,之后再采集上眼皮的最高点和下眼皮的最低点,将其标记为点A3和A4;
对人脸影像信息中右眼进行上述过程的处理,获取到点B1、B2、B3和B4;
再提取出驾驶位的人脸影像信息,采集鼻尖点,将其标记为点C;
再对驾驶位的人脸影像信息选取人脸影像中的下巴位置的最左侧点和最右侧点,将其标记为点D1和D2。
5.根据权利要求3所述的一种自动驾驶数据处理系统,其特征在于:所述对特征点进行处理获取到第一特征参数信息、第二特征参数与第三特征参数的具体过程如下:提取出特征点A1、A2、A3和A4,将点A1与A2分别和A3连线获取到线段L1和线段L2,将点A1与A2分别和A4连线获取到线段L3和线段L4,线段L1、L2、L3和L4围成标识图形Aa;
再对特征点B1、B2、B3和B4进行与上述过程相同的处理,获取到标识图形Bb,对标识图形Aa和标识图形Bb进行面积采集,即获取到第一特征参数;
提取出特征点C,以方向盘的中点所在高度为基准高度,作一条水平线P,之后测量出特征点C与水平线P之间的长度即获取到第二特征参数;
提取出特征点D1和D2,将D1和D2连线获取到线段E,将线段E的中点标记为D3,测量出D3与水平线P之间的长度,即获取到第三特征参数。
6.根据权利要求2所述的一种自动驾驶数据处理系统,其特征在于:所述第一特征参数、第二特征参数与第三特征参数的异常判定过程如下:在预设时长内每隔预设时间段采集一次第一特征参数,获取到多个第一特征参数,之后对多个第一特征参数进行分析,当多个第一特征参数连续小于预设值或者小于警示值的数量大于预设值,即表示第一特征参数异常;
连续采集x个第二特征参数和第三特征参数信息,当第二特征参数中小于预设值的数量超过x/3,即表示第二特征参数异常,当第三特征参数信息小于预设值的数量超过x/3,即表示第三特征参数异常。
7.根据权利要求1所述的一种自动驾驶数据处理系统,其特征在于:所述车外警示信息的具体处理过程如下:提取出采集到的车外影像信息,对车外影像信息为车辆前方影像信息与车辆后方影像信息,对车辆前方影像信息进行其他车辆模型识别获取到前方其他车辆,之后对影像信息进行实时处理,获取到实时前方车辆距离信息;
再对车辆后方影像信息进行其他车辆模型识别获取到后方其他车辆,之后对影像信息进行实时处理,获取到实时后方车辆距离信息;
对实时前方车辆距离信息与实时后方车辆距离信息进行处理,当实时前方车辆距离信息与实时后方车辆距离信息中任意一个存在异常时,即生成车外警示信息。
8.根据权利要求1所述的一种自动驾驶数据处理系统,其特征在于:所述实时前方车辆距离信息与实时后方车辆距离信息的异常判定过程如下:提取出采集到的实时前方车辆距离信息,实时前方车辆距离信息为多个前方车辆距离信息的集合,当实时前方车辆距离信息连续变小,且最后采集到的前方车辆距离小于警示值,即表示实时前方车辆距离信息存在异常;
实时后方车辆距离信息为多个后方车辆距离信息的集合,当实时后方车辆距离信息连续变小,且最后采集到的后方车辆距离小于警示值,即表示实时后方车辆距离信息存在异常。
9.根据权利要求1所述的一种自动驾驶数据处理系统,其特征在于:所述车辆警示信息的具体过程如下:提取出采集到的车辆信息,车辆信息包括车辆实时位置信息与车辆实时车速信息,每个预设时长即采集一次车辆实时位置信息Q,连续采集m次,m≥5,之将采集到m次车辆实时位置信息Q按照顺序连线,获取到实时行驶路线图K1,之后从导航信息中提取出导航路线的预设导航路线图K2,将实时行驶路线图K1与预设导航路线图K2进行相似度比对,当相似度小于预设值时,即生成车辆警示信息;
再提取出车辆实时车速信息与车辆实时位置信息,从导航信息中提取出车辆实时位置的限速信息,当车辆实时车速信息大于限速信息时,即生成车辆警示信息。
10.一种自动驾驶数据处理方法,所述处理方法基于权利要全1-9任一所述的处理系统,其特征在于:所述处理方法包括以下步骤:
步骤一:在自动驾驶过程中采集车辆信息与当导航路线信息;
步骤二:在自动驾驶过程中采集通过车内设置的影像采集设备采集车内实时影像信息;
步骤三:在自动驾驶过程中采集通过车外设置的影像采集设备采集车外实时影像信息;
步骤四:对车辆信息、导航路线信息、车内实时影像信息与车外实时影像信息进行处理,获取到车内警示信息、车外警示信息与车辆警示信息;
步骤五:在车内警示信息、车外警示信息与车辆警示信息生成后,将上述信息发送到预设接收终端。
CN202310696338.4A 2023-06-13 2023-06-13 一种自动驾驶数据处理系统及方法 Pending CN116714596A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310696338.4A CN116714596A (zh) 2023-06-13 2023-06-13 一种自动驾驶数据处理系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310696338.4A CN116714596A (zh) 2023-06-13 2023-06-13 一种自动驾驶数据处理系统及方法

Publications (1)

Publication Number Publication Date
CN116714596A true CN116714596A (zh) 2023-09-08

Family

ID=87874741

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310696338.4A Pending CN116714596A (zh) 2023-06-13 2023-06-13 一种自动驾驶数据处理系统及方法

Country Status (1)

Country Link
CN (1) CN116714596A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190029192A (ko) * 2017-09-12 2019-03-20 현대자동차주식회사 자율 주행 제어 장치, 그를 가지는 차량 및 그 제어 방법
CN112349097A (zh) * 2020-10-30 2021-02-09 安徽李悦阳信息技术有限公司 一种基于5g网络的汽车辅助预警系统
CN113043985A (zh) * 2021-05-13 2021-06-29 清华大学苏州汽车研究院(吴江) 车辆防追尾提醒方法和系统
CN113085890A (zh) * 2021-03-26 2021-07-09 银隆新能源股份有限公司 自动驾驶车辆的行驶路径的调整方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190029192A (ko) * 2017-09-12 2019-03-20 현대자동차주식회사 자율 주행 제어 장치, 그를 가지는 차량 및 그 제어 방법
CN112349097A (zh) * 2020-10-30 2021-02-09 安徽李悦阳信息技术有限公司 一种基于5g网络的汽车辅助预警系统
CN113085890A (zh) * 2021-03-26 2021-07-09 银隆新能源股份有限公司 自动驾驶车辆的行驶路径的调整方法及装置
CN113043985A (zh) * 2021-05-13 2021-06-29 清华大学苏州汽车研究院(吴江) 车辆防追尾提醒方法和系统

Similar Documents

Publication Publication Date Title
CN109080626B (zh) 车辆故障处理方法
DE102016109146A1 (de) Fahrzeugfahrt-Steuerungsvorrichtung
DE102012200345A1 (de) System zum Bestimmen eines anomalen Fahrens und zum Warnen auf Basis eines Fahrzeugstandorts
CN103871200A (zh) 用于汽车驾驶的安全提醒系统及方法
CN105654674A (zh) 监测车辆的驾驶员专注度
CN110136464B (zh) 一种辅助驾驶的方法、装置及设备
DE102020104032A1 (de) Vorrichtung zum überwachen eines fahrers, system mit derselben und verfahren davon
DE102020206946A1 (de) Autonomes fahrzeugsteuerungssystem und autonomes fahrzeugsteuerungsverfahren unter verwendung desselben
CN104691333B (zh) 基于车道偏离频次的长途客车驾驶员疲劳状态评价方法
EP2777032A1 (de) Verfahren und vorrichtung zum warnen des fahrers eines kraftfahrzeugs bei mangelnder aufmerksamkeit
CN109987090A (zh) 驾驶辅助系统和方法
CN115366907A (zh) 驾驶员的状态异常提醒方法、装置、车辆及存储介质
CN114194190A (zh) 车道机动意图检测系统和方法
CN114872713A (zh) 一种驾驶员异常驾驶状态监测装置和方法
CN112349097A (zh) 一种基于5g网络的汽车辅助预警系统
DE112018004773B4 (de) Informationsverarbeitungseinrichtung, informationsverarbeitungsverfahren, programm und fahrzeug
CN116913077B (zh) 一种基于数据采集的高速公路应急管理系统
CN116714596A (zh) 一种自动驾驶数据处理系统及方法
CN112141094A (zh) 车辆及其防撞方法和装置
DE102015216638B4 (de) Fahrerinformationssystem für ein Fahrzeug
KR20150066308A (ko) 운전자 운행 상태 판단 장치 및 그 방법
CN116552542A (zh) 车辆控制方法、装置、电子设备和存储介质
CN110395256A (zh) 一种车辆控制方法、系统及车辆
CN212569985U (zh) 一种疲劳驾驶预警系统
CN114132330A (zh) 驾驶员非正常驾驶状态的提醒方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination