CN111137283A - 传感器数据融合方法、装置、高级辅助驾驶系统及车辆 - Google Patents

传感器数据融合方法、装置、高级辅助驾驶系统及车辆 Download PDF

Info

Publication number
CN111137283A
CN111137283A CN201911378488.0A CN201911378488A CN111137283A CN 111137283 A CN111137283 A CN 111137283A CN 201911378488 A CN201911378488 A CN 201911378488A CN 111137283 A CN111137283 A CN 111137283A
Authority
CN
China
Prior art keywords
weight
radar
vehicle
obstacle
precision
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911378488.0A
Other languages
English (en)
Other versions
CN111137283B (zh
Inventor
李娟娟
张芬
宋玉朋
杜金枝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dazhuo Intelligent Technology Co ltd
Dazhuo Quxing Intelligent Technology Shanghai Co ltd
Original Assignee
Chery Automobile Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chery Automobile Co Ltd filed Critical Chery Automobile Co Ltd
Priority to CN201911378488.0A priority Critical patent/CN111137283B/zh
Publication of CN111137283A publication Critical patent/CN111137283A/zh
Application granted granted Critical
Publication of CN111137283B publication Critical patent/CN111137283B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)

Abstract

本申请提供了一种传感器数据融合方法、装置、高级辅助驾驶系统及车辆,涉及车辆领域。该方法可以先获取视觉传感器的第一精度信息和雷达的第二精度信息,并可以基于第一精度信息和第二精度信息确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重。之后可以第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。由此,即使车辆上的视觉传感器和雷达中的一个传感器对障碍物进行检测时的精度降低,也可以基于另一个传感器采集的障碍物的数据准确的确定车辆与车辆前方的障碍物之间的距离,从而确保车辆的安全行驶。

Description

传感器数据融合方法、装置、高级辅助驾驶系统及车辆
技术领域
本申请涉及车辆领域,特别涉及一种传感器数据融合方法、装置、高级辅助驾驶系统及车辆。
背景技术
目前,车辆的高级驾驶辅助系统(advanced driver assistance system,ADAS)可以确定车辆与车辆前方的障碍物之间的安全距离,并可以在其检测出与车辆前方的障碍物之间的距离小于该安全距离时,发出告警信号,或自动紧急制动,以确保车辆的安全行驶。
相关技术中,车辆的ADAS可以通过安装在车辆上的视觉传感器或雷达获取位于车辆前方的障碍物的数据,之后车辆的ADAS可以基于该障碍物的数据确定车辆与障碍物之间的距离。其中,障碍物的数据包括障碍物相对于车辆的位置信息。
但是,在车辆的使用过程中,车辆上的视觉传感器或雷达对障碍物进行检测的精度可能会降低,导致ADAS确定的车辆与车辆前方的障碍物之间的距离的准确性较低。
发明内容
本申请提供了一种传感器数据融合方法、装置、高级辅助驾驶系统及车辆,可以解决相关技术的ADAS确定的车辆与车辆前方的障碍物之间的距离的准确性较低的问题。所述技术方案如下:
一方面,提供了一种传感器数据融合方法,其特征在于,应用于车辆的高级驾驶辅助系统控制器,所述方法包括:
获取车辆的视觉传感器的第一精度信息,以及雷达的第二精度信息,所述第一精度信息用于表征所述视觉传感器对障碍物进行检测时的精度,所述第二精度信息用于表征所述雷达对障碍物进行检测时的精度;
基于所述第一精度信息与所述第二精度信息,确定与所述视觉传感器采集的数据对应的第一权重,以及与所述雷达采集的数据对应的第二权重,其中,若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,所述第一权重大于所述第二权重,若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,所述第一权重小于所述第二权重;
基于所述第一权重和所述第二权重,对所述视觉传感器采集的数据和所述雷达采集的数据进行融合。
可选的,基于所述第一精度信息与所述第二精度信息,确定与所述视觉传感器采集的数据对应的第一权重,以及与所述雷达采集的数据对应的第二权重,包括:
获取所述车辆当前的车速;
若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第一对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重;
若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第二对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重。
可选的,基于所述第一权重和所述第二权重,对所述视觉传感器采集的数据和所述雷达采集的数据进行融合,包括:
在所述视觉传感器采集的数据中获取目标障碍物在所述视觉传感器坐标系中的第一位置信息;
在所述雷达采集的数据中获取所述目标障碍物在所述雷达坐标系中的第二位置信息;
将所述第二位置信息映射至所述视觉传感器坐标系中,得到位于所述视觉传感器坐标系中的第三位置信息;
基于所述第一权重和所述第二权重,对所述第一位置信息和所述第三位置信息进行融合,得到所述目标障碍物的目标位置信息。
可选的,所述方法还包括:
对所述视觉传感器采集的数据和所述雷达采集的数据融合后的数据进行滤波处理。
可选的,所述方法还包括:
若所述视觉传感器对所述障碍物进行检测时的精度低于第一精度阈值,且所述雷达对所述障碍物进行检测时的精度低于第二精度阈值,发出用于指示高级驾驶辅助系统出现故障的报警信号。
另一方面,提供了一种传感器数据融合装置,应用于车辆的高级驾驶辅助系统控制器,所述装置包括:
获取模块,用于获取车辆的视觉传感器的第一精度信息,以及雷达的第二精度信息,所述第一精度信息用于表征所述视觉传感器对障碍物进行检测时的精度,所述第二精度信息用于表征所述雷达对障碍物进行检测时的精度;
确定模块,用于基于所述第一精度信息与所述第二精度信息,确定与所述视觉传感器采集的数据对应的第一权重,以及与所述雷达采集的数据对应的第二权重,其中,若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,所述第一权重大于所述第二权重,若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,所述第一权重小于所述第二权重;
融合模块,用于基于所述第一权重和所述第二权重,对所述视觉传感器采集的数据和所述雷达采集的数据进行融合。
可选的,所述确定模块用于:
获取所述车辆当前的车速;
若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第一对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重;
若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第二对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重。
可选的,所述融合模块用于:
在所述视觉传感器采集的数据中获取目标障碍物在所述视觉传感器坐标系中的第一位置信息;
在所述雷达采集的数据中获取所述目标障碍物在所述雷达坐标系中的第二位置信息;
将所述第二位置信息映射至所述视觉传感器坐标系中,得到位于所述视觉传感器坐标系中的第三位置信息;
基于所述第一权重和所述第二权重,对所述第一位置信息和所述第三位置信息进行融合,得到所述目标障碍物的目标位置信息。
又一方面,提供了一种传感器数据融合装置,所述装置包括:处理器、存储器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述方面所述传感器数据融合方法。
再一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述计算机可读存储介质在计算机上运行时,使得计算机执行如上述方面所述的传感器数据融合方法。
再一方面,提供了一种包含指令的计算机程序产品,当所述计算机程序产品在所述计算机上运行时,使得所述计算机执行上述方面所述的传感器数据融合方法。
再一方面,提供了一种高级辅助驾驶系统,所述高级辅助驾驶系统包括:高级辅助驾驶系统控制器,所述高级辅助驾驶系统控制器包括如上述方面所述的传感器数据融合装置。
再一方面,提供了一种车辆,所述车辆包括:如上述方面所述的高级辅助驾驶系统。
本申请提供的技术方案带来的有益效果至少包括:
本申请提供了一种传感器数据融合方法、装置、高级辅助驾驶系统及车辆,该方法可以先获取视觉传感器的第一精度信息和雷达的第二精度信息,并可以基于第一精度信息和第二精度信息确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重。之后可以第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。由此,即使车辆上的视觉传感器和雷达中的一个传感器对障碍物进行检测时的精度降低,也可以基于另一个传感器采集的障碍物的数据准确的确定车辆与车辆前方的障碍物之间的距离,从而确保车辆的安全行驶。此外,由于将视觉传感器采集的数据和雷达采集的数据进行融合,可以实现两个传感器采集的数据相互校正,起到互补的作用,相较于单个传感器采集的数据而言,融合后的数据的精度较高。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种传感器数据融合方法的流程图;
图2是本申请实施例提供的另一种传感器数据融合方法的流程图;
图3是本申请实施例提供的一种ADAS控制器与车辆中器件的连接示意图;
图4是本申请实施例提供的一种确定第一权重和第二权重的方法流程图;
图5是本申请实施例提供的一种进行传感器数据融合的方法流程图;
图6是本申请实施例提供的一种传感器数据融合装置的结构框图;
图7是本申请实施例提供的另一种传感器数据融合装置的结构框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
本申请实施例提供了一种车辆的传感器数据融合方法,该方法可以应用于车辆ADAS中的ADAS控制器。参见图1,该方法可以包括:
步骤101、获取车辆的视觉传感器的第一精度信息,以及雷达的第二精度信息。
其中,第一精度信息用于表征视觉传感器对障碍物进行检测时的精度,第二精度信息用于表征雷达对障碍物进行检测时的精度。
步骤102、基于第一精度信息与第二精度信息,确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重。
其中,若视觉传感器对障碍物进行检测时的精度高于雷达对障碍物进行检测时的精度,第一权重大于第二权重,若视觉传感器对障碍物进行检测时的精度低于雷达对障碍物进行检测时的精度,第一权重小于第二权重。
步骤103、基于第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。
综上所述,本申请实施例提供了一种传感器数据融合方法,该方法可以先获取视觉传感器的第一精度信息和雷达的第二精度信息,并可以基于第一精度信息和第二精度信息确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重。之后可以第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。由此,即使车辆上的视觉传感器和雷达中的一个传感器对障碍物进行检测时的精度降低,也可以基于另一个传感器采集的障碍物的数据准确的确定车辆与车辆前方的障碍物之间的距离,从而确保车辆的安全行驶。此外,由于将视觉传感器采集的数据和雷达采集的数据进行融合,可以实现两个传感器采集的数据相互校正,起到互补的作用,相较于单个传感器采集的数据而言,融合后的数据的精度较高。
图2是本申请实施例提供的另一种传感器数据融合方法,该方法可以应用于车辆的ADAS控制器。参见图2,该方法可以包括:
步骤201、获取车辆的视觉传感器的第一精度信息,以及雷达的第二精度信息。
其中,第一精度信息用于表征视觉传感器对障碍物进行检测时的精度,第二精度信息用于表征雷达对障碍物进行检测时的精度。
在本申请实施例中,车辆的视觉传感器和雷达均具有自我诊断功能,可以在启用时执行自检程序,并在执行自检程序后,将通过执行自检程序得到的自检结果信息发送至车辆的ADAS控制器。相应的,车辆的ADAS控制器在接收到视觉传感器的自检结果信息和雷达的自检结果信息后,可以基于视觉传感器的自检结果信息获取视觉传感器的第一精度信息,并可以基于雷达的自检结果信息获取雷达的第二精度信息。
其中,视觉传感器的自检结果信息可以包括:用于指示视觉传感器关闭未开启的信息、用于指示视觉传感器的安装位置超出指定范围或安装位置错误的信息、用于指示视觉传感器的电压未位于第一正常工作电压范围内的信息以及用于指示视觉传感器的镜头模糊或镜头上存在遮挡物的信息中的至少一种。雷达的自检结果信息可以包括:用于指示雷达的电压未位于第二正常工作电压范围内的信息、用于指示雷达的信号被干扰的信息、用于指示雷达温度较高的信息以及用于指示雷达失效的信息中的至少一种。
可选的,该雷达可以为毫米波雷达,该毫米波雷达的工作频率可以为77赫兹(Hz),探测距离可以为170米(m)。该视觉传感器可以为具有摄像功能的射线设备,例如摄像头,该视觉传感器的像素可以为100万,探测距离可以为120m。
在本申请实施例中,参见图3,视觉传感器01可以通过第一控制器局域(controller area network,CAN)网络与车辆的ADAS控制器02建立通信连接,并通过该第一CAN向ADAS控制器发送信号(该信号可以包括自检结果信息以及采集的数据)。雷达03可以通过第二CAN与ADAS控制器02建立通信连接,并可以通过该第二CAN向ADAS控制器02发送信号。车辆中的其他器件(例如变速箱、电机、速度传感器、制动踏板以及方向盘角度传感器等)可以通过第三CAN(也可以称为车载CAN)与ADAS控制器02建立通信连接,并向其发送信号。
由于第一CAN、第二CAN以及第三CAN是相互独立的,并且视觉传感器和雷达均直接将信号发送至ADAS,且仅会将信号发送至ADAS,并不会发送将信号发送至整车网络中,从而可以避免视觉传感器和雷达发送的信号造成整车网络堵塞,有效确保了整车网络的稳定性,同时确保了视觉传感器和雷达发送的信号的安全性。此外,各个CAN相互独立,还可以有效提高ADAS的电磁兼容性(electromagnetic compatibility,EMC)。其中,该EMC是指ADAS在其电磁环境中符合要求运行并不对其环境中的其他设备产生无法忍受的电磁干扰的能力。
从图3还可以看出,该车辆的ADAS控制器02可以包括:控制芯片021,与该控制芯片021连接的晶振022和电源023。该控制芯片021可以包括用于与视觉传感器01和雷达03连接的接口(也可以称为传感器CAN协议接口),该传感器01和雷达03可以通过该接口与控制芯片021连接。该控制芯片021还可以包括用于与其他器件连接的接口(也可以称为车载CAN接口),车辆中的其他器件04可以通过该接口与控制芯片021连接。
参见图3,ADAS的开关可以与控制芯片021中的通用输入/输出接口(general-purpose input/output,GPIO),即控制芯片021中GPIO引脚连接。车辆中的人机界面05(human machine interface,HMI),例如仪表盘,可以与控制芯片021中的联合测试工作组(joint test action group,JPAG)接口(也可以称为JPAG引脚)连接。该控制芯片021还可以通过连接器06(connecter,CONN)与车辆中的插件07(例如导航仪)连接。
步骤202、基于第一精度信息与第二精度信息,确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重。
其中,若视觉传感器对障碍物进行检测时的精度高于雷达对障碍物进行检测时的精度,则第一权重大于第二权重;若视觉传感器对障碍物进行检测时的精度低于雷达对障碍物进行检测时的精度,第一权重小于第二权重。该第一权重与第二权重之和可以为预设值。可选的,该预设值可以为1。
若ADAS控制器获取的雷达的自检结果信息包括:用于指示雷达的电压未位于属于第二正常工作电压范围的信息、用于指示雷达的信号被干扰的信息、用于指示雷达温度较高的信息以及用于指示雷达失效的信息中的至少一种,而获取的视觉传感器的自检结果信息不包括:用于指示视觉传感器关闭未开启的信息、用于指示视觉传感器的安装位置超出指定范围或安装位置错误的信息、用于指示视觉传感器的电压未位于第一正常工作电压范围的信息和用于指示视觉传感器的镜头模糊或镜头上存在遮挡物的信息,则ADAS控制器可以确定该视觉传感器的对障碍物进行检测时的精度较高,雷达对障碍物进行检测时的精度较低,进而确定的第一权重可以大于第二权重。
若ADAS控制器获取的视觉传感器的自检结果信息包括:用于指示视觉传感器关闭未开启的信息、用于指示视觉传感器的安装位置超出指定范围或安装位置错误的信息、用于指示视觉传感器的电压未位于第一指定电压范围的信息以及用于指示视觉传感器的镜头模糊或镜头上存在遮挡物的信息中的至少一种,而获取的雷达的自检结果信息不包括:用于指示雷达的电压未位于第二正常工作电压范围的信息、用于指示雷达的信号被干扰的信息、用于指示雷达温度较高的信息和用于指示雷达失效的信息,则ADAS控制器可以确定该视觉传感器的对障碍物进行检测时的精度较低,雷达对障碍物进行检测时的精度较高,进而确定的第一权重可以小于第二权重。
在本申请实施例中,参见图4,ADAS控制器确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重的过程可以包括:
步骤2021、获取车辆当前的车速。
可选的,车辆上可以安装有速度传感器,该速度传感器可以用于检测车辆当前的车速,并可以将获取的当前的车速发送至ADAS控制器。相应的,ADAS控制器可以获取车辆当前的车速。
步骤2022、若视觉传感器对障碍物进行检测时的精度高于雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第一对应关系,将与车辆当前的车速对应的第一权重确定为与视觉传感器采集的数据对应的第一权重,将与车辆当前的车速对应的第二权重确定为与雷达采集的数据对应的第二权重。
可选的,该第一对应关系可以是车辆的ADAS控制器中预先存储的,该第一关系可以如表1所示。其中,低速可以是指车辆当前的速度小于30千米每小时(km/h),中速可以是指车辆当前的速度大于或等于30km/h且小于或等于60km/h,高速可以是指车辆当前的速度大于60km/h且小于或等于100km/h。
表1
Figure BDA0002341654140000091
从表1中可以看出,若车辆当前的车速为低速,则ADAS控制器可以确定与视觉传感器采集的数据对应的第一权重为0.7,与雷达采集的数据对应的第二权重为0.3。若车辆当前的车速为中速,则ADAS控制器可以确定与视觉传感器采集的数据对应的第一权重为0.6,与雷达采集的数据对应的第二权重为0.4。若车辆当前的车速为高速,则ADAS控制器可以确定与视觉传感器采集的数据对应的第一权重为0.5,与雷达采集的数据对应的第二权重为0.5。
步骤2023、若视觉传感器对障碍物进行检测时的精度低于雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第二对应关系,将与车辆当前的车速对应的第一权重确定为与视觉传感器采集的数据对应的第一权重,将与车辆当前的车速对应的第二权重确定为与雷达采集的数据对应的第二权重。
可选的,该第二对应关系可以是车辆中的ADAS控制器预先存储的,该第二对应关系可以如表2所示。
表2
Figure BDA0002341654140000101
从表2中可以看出,若车辆当前的车速为低速,则ADAS可以确定与视觉传感器采集的数据对应的第一权重为0.25,与雷达采集的数据对应的第二权重为0.75。若车辆当前的车速为中速或高度,则ADAS可以确定与视觉传感器采集的数据对应的第一权重为0.15,与雷达采集的数据对应的第二权重为0.85。
步骤203、基于第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。
其中,融合可以是指将视觉传感器坐标系中的视觉传感器采集的数据,以及雷达坐标系中雷达采集的数据均转换至车辆的车身坐标系后进行融合。其中,视觉传感器坐标系是以视觉传感器所在位置为中心所建立的坐标系,且该视觉传感器坐标系一般为三维坐标系。雷达坐标系是以雷达所在位置为中心所建立的坐标系,且该雷达坐标系通常为极坐标系。车身坐标系可以是指以车辆的挡风玻璃上靠近驾驶员的位置处的某点为中心(例如挡风玻璃上靠近车辆的车轮的中心位置处,或挡风玻璃上远离车辆的车轮的中心位置处)所建立的坐标系,且该车身坐标系一般为三维坐标系。由于视觉传感器通常设置在车辆得前挡风玻璃的中心位置处(例如靠近车辆的车轮的中心位置处,或远离车辆的车轮的中心位置处),而雷达通常设置在车辆的保险杠所在位置处,因此通常可以将视觉传感器坐标系作为车辆的车身坐标系。在对视觉传感器采集的数据和雷达采集的数据进行融合时,可以将雷达坐标中的雷达采集的数据转换至视觉传感器坐标系中,继而进行融合。
在本申请实施例中,参见图5,ADAS控制器进行传感器数据融合的过程可以包括:
步骤2031、在视觉传感器采集的数据中获取目标障碍物在视觉传感器坐标系中的第一位置信息。
ADAS控制器在获取到视觉传感器采集的障碍物的数据后,可以基于约定的第一协议对视觉传感器采集的障碍物的数据进行解析,从而获取目标障碍物在视觉传感器坐标系中的第一位置信息。该第一位置信息可以包括用于表征目标障碍物位置的多个第一坐标。
其中,该第一协议可以是基于视觉传感器的型号确定并预先存储在ADAS控制器中的。视觉传感器采集的障碍物数据可以包括:车辆与前方障碍物之间的距离,车辆所在车道的车道线,道路标志,以及障碍物与车辆的相对角度。该相对角度是指:以车辆的中心为中心建立的角度坐标系中,目标障碍物的中心与车辆中心的连线,与角度坐标系的横轴正方向的夹角的度数。该角度坐标系的横轴正方向为正东方向,纵轴正方向为正北方向。
可选的,目标障碍物可以是指位于车辆的前方且与该车辆处于同一车道内的车辆。
步骤2032、在雷达采集的数据中获取目标障碍物在雷达坐标系中的第二位置信息。
ADAS控制器在获取到雷达采集的障碍物的数据后,可以基于约定的第二协议对雷达采集的障碍物的数据进行解析,从而获取目标障碍物在雷达坐标系中的第二位置信息。
其中,该第二协议可以是基于雷达的型号确定并预先存储在ADAS控制器中的。雷达采集的障碍物数据可以包括:车辆与前方障碍物之间的距离,以及障碍物与车辆的相对角度。
步骤2033、将第二位置信息映射至视觉传感器坐标系中,得到位于视觉传感器坐标系中的第三位置信息。
在本申请实施例中,ADAS在通过上述步骤2031和步骤2032获取到目标障碍物的第一位置信息和第二位置信息后,可以基于视觉传感器坐标系和雷达坐标系之间的转换关系,将雷达坐标系中的第二位置信息映射至视觉传感器坐标系中,从而得到位于视觉传感器坐标系中的第三位置信息。该第三位置信息可以包括用于表征目标障碍物位置的多个第二坐标。
其中,该第三位置信息包括的用于表征目标障碍物位置的多个第二坐标与第一位置信息包括的用于表征目标障碍物位置的多个第一坐标一一对应。
步骤2034、基于第一权重和第二权重,对第一位置信息和第三位置信息进行融合,得到目标障碍物的目标位置信息。
其中,目标障碍物的目标位置信息可以采用多个目标坐标表征。
ADAS控制器在得到视觉传感器坐标系中的目标障碍物的第一位置信息和第三位置信息后,对于第一位置信息中用于表征目标障碍物的多个第一坐标中的每个第一坐标,可以先确定该第一坐标与第一权重的第一乘积,并可以确定第三位置信息中与该第一坐标对应的第二坐标与第二权重的第二乘积,之后可以将第一乘积与第二乘积之和,确定为目标障碍物的一个目标坐标,从而可以得到多个目标坐标,继而得到目标障碍物的目标位置信息。
需要说明的是,由于视觉传感器的采样周期通常小于雷达的采样周期,且视觉传感器和雷达是独立进行采样的,因此视觉传感器与雷达需要为采集的数据加上时间戳信息,以确保后续ADAS控制器可以基于该时间戳信息对同一时刻该两个传感器采集的目标障碍物数据进行融合,从而确保融合的数据的准确性。示例的,视觉传感器的采样周期可以为40毫秒(ms),雷达的采样周期可以为50ms。
还需要说明的是,为了确保ADAS追踪的目标障碍物的准确性,避免无效追踪,在上述步骤2031之后,ADAS控制器可以基于视觉传感器坐标系中的目标障碍物的第一位置信息,在距视觉传感器采集到第一位置信息的目标时长内,检测雷达采集的数据中是否存在该目标障碍物。示例的,该目标时长可以为200毫秒(ms)。若检测到雷达采集的数据中存在该目标障碍物,则继续执行步骤2032。若检测到雷达采集的数据中不存在该目标障碍物,则可以删除接收到的关于该目标障碍物的全部信息,以节省内存。
由于视觉传感器主要用于确定目标障碍物的位置,且视觉传感器的采样周期小于雷达的采样周期,因此ADAS控制器一般是基于视觉传感器坐标系中的目标障碍物的第一位置信息,在距视觉传感器采集到第一位置信息的目标时长内,检测雷达采集的数据中是否存在该目标障碍物。
还需要说明的是,在视觉传感器和雷达采集障碍物的数据之前,ADAS控制器可以先建立时间基准,即对视觉传感器和雷达开始采集数据的时间进行初始化,以使得视觉传感器和雷达开始采集障碍物数据的时间相同,从而确保雷达和视觉传感器采集的数据的同步性,进一步确保融合的数据的准确性。
步骤204、对视觉传感器采集的数据和雷达采集的数据融合后的数据进行滤波处理。
可选的,ADAS可以采用卡尔曼(Kalman)滤波算法对视觉传感器采集的数据和雷达采集的数据融合后的数据(即目标障碍物的目标位置信息)进行滤波处理。
由于Kalman滤波算法可以对基于一段指定时间内的目标障碍物的相关数据,预测该段时间的下一段内的目标障碍物的相关数据,由此可以基于预测的数据预测可能出现的风险,并及时控制车辆避免该风险,进一步确保了车辆的安全行驶。
在本申请实施例中,ADAS控制器可以基于融合后的数据,确定车辆与目标障碍物之间的距离,相对速度,以及与目标障碍物之间的安全距离,之后可以基于确定的上述数据确定车辆的档位信息、加速度信息以及油门需求信息,并将该档位信息发送至车辆的变速箱控制器,将加速度信息发送至车辆的电子稳定程序系统(electronic stabilityprogram,ESP),并将油门需求信息发送至车辆的电机控制器,从而控制车辆的安全行驶。
此外,ADAS控制器还可以基于视觉传感器采集的车辆所处的车道线,确定车道线的曲率,并基于曲率控制车辆行驶,以避免车辆偏离车道,造成安全事故。
步骤205、若视觉传感器对障碍物进行检测时的精度低于第一精度阈值,且雷达对障碍物进行检测时的精度低于第二精度阈值,发出用于指示高级驾驶辅助系统出现故障的报警信号。
在本申请实施例中,若ADAS控制器基于视觉传感器的自检结果信息确定视觉传感器对障碍物进行检测时的精度低于第一精度阈值,并且ADAS的控制基于雷达的自检结果信息确定雷达对障碍物进行检测时的精度低于第二精度阈值,此时,为了确保行车安全,ADAS可以发出报警信号,以及时提醒驾驶员。其中,第一精度阈值和第二精度阈值可以是工作人员基于实验确定并输入至ADAS中的。
可选的,ADAS控制器可以先生成用于指示ADAS出现故障的报警控制信息,之后将该报警控制信息发送至车辆的仪表盘的控制器。仪表盘的控制器在接收到该报警控制信息后可以基于该报警控制信息控制车辆的仪表盘中的指示灯闪烁,和/或,控制车辆的仪表盘中的蜂鸣器发出声音,从而提示驾驶员。
需要说明的是,本申请实施例提供的传感器数据融合方法的步骤的先后顺序可以进行适当调整,步骤也可以根据情况进行相应增减。任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化的方法,都应涵盖在本申请的保护范围之内,因此不再赘述。
综上所述,本申请实施例提供了一种传感器数据融合方法,该方法可以先获取视觉传感器的第一精度信息和雷达的第二精度信息,并可以基于第一精度信息和第二精度信息确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重。之后可以第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。由此,即使车辆上的视觉传感器和雷达中的一个传感器对障碍物进行检测时的精度降低,也可以基于另一个传感器采集的障碍物的数据准确的确定车辆与车辆前方的障碍物之间的距离,从而确保车辆的安全行驶。此外,由于将视觉传感器采集的数据和雷达采集的数据进行融合,可以实现两个传感器采集的数据相互校正,起到互补的作用,相较于单个传感器采集的数据而言,融合后的数据的精度较高。
本申请实施例提供了一种传感器融合装置,该装置可以应用于车辆的高级驾驶辅助系统控制器。参见图6,该装置300可以包括:
获取模块301,用于获取车辆的视觉传感器的第一精度信息,以及雷达的第二精度信息,第一精度信息用于表征视觉传感器对障碍物进行检测时的精度,第二精度信息用于表征雷达对障碍物进行检测时的精度。
确定模块302,用于基于第一精度信息与第二精度信息,确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重,其中,若视觉传感器对障碍物进行检测时的精度高于雷达对障碍物进行检测时的精度,第一权重大于第二权重,若视觉传感器对障碍物进行检测时的精度低于雷达对障碍物进行检测时的精度,第一权重小于第二权重。
融合模块303,用于基于第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。
可选的,确定模块302可以用于:
获取车辆当前的车速;若视觉传感器对障碍物进行检测时的精度高于雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第一对应关系,将与车辆当前的车速对应的第一权重确定为与视觉传感器采集的数据对应的第一权重,将与车辆当前的车速对应的第二权重确定为与雷达采集的数据对应的第二权重;若视觉传感器对障碍物进行检测时的精度低于雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第二对应关系,将与车辆当前的车速对应的第一权重确定为与视觉传感器采集的数据对应的第一权重,将与车辆当前的车速对应的第二权重确定为与雷达采集的数据对应的第二权重。
可选的,该融合模块303可以用于:
在视觉传感器采集的数据中获取目标障碍物在视觉传感器坐标系中的第一位置信息;在雷达采集的数据中获取目标障碍物在雷达坐标系中的第二位置信息;将第二位置信息映射至视觉传感器坐标系中,得到位于视觉传感器坐标系中的第三位置信息;基于第一权重和第二权重,对第一位置信息和第三位置信息进行融合,得到目标障碍物的目标位置信息。
综上所述,本申请实施例提供了一种传感器数据融合装置,该装置可以先获取视觉传感器的第一精度信息和雷达的第二精度信息,并可以基于第一精度信息和第二精度信息确定与视觉传感器采集的数据对应的第一权重,以及与雷达采集的数据对应的第二权重。之后可以第一权重和第二权重,对视觉传感器采集的数据和雷达采集的数据进行融合。由此,即使车辆上的视觉传感器和雷达中的一个传感器对障碍物进行检测时的精度降低,也可以基于另一个传感器采集的障碍物的数据准确的确定车辆与车辆前方的障碍物之间的距离,从而确保车辆的安全行驶。此外,由于将视觉传感器采集的数据和雷达采集的数据进行融合,可以实现两个传感器采集的数据相互校正,起到互补的作用,相较于单个传感器采集的数据而言,融合后的数据的精度较高。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置和各模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本申请实施例提供了一种传感器数据融合装置,参见图7,该装置400可以包括:处理器401、存储器402以及存储在存储器402上并可在处理器401上运行的计算机程序,该处理器402执行计算机程序时实现如上述方法实施例提供的传感器数据融合方法,例如图1或图2所示的方法。
本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当计算机可读存储介质在计算机上运行时,使得计算机执行如上述方法实施例提供的传感器数据融合方法,例如图1或图2所示的方法。
本申请实施例提供了一种包含指令的计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行如上述方法实施例提供的传感器数据融合方法,例如图1或图2所示的方法。
本申请实施例提供了一种高级辅助驾驶系统,该高级辅助驾驶系统可以包括:高级辅助驾驶系统控制器,该控制器可以包括如上述所述的传感器数据融合装置,例如图6或图7所示的装置。
本申请实施例提供了一种车辆,该车辆可以包括:如上述所示的高级辅助驾驶系统。
可选的,该车辆可以为电动车辆,例如纯电动车辆。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的示例性实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种传感器数据融合方法,其特征在于,应用于车辆的高级驾驶辅助系统控制器,所述方法包括:
获取车辆的视觉传感器的第一精度信息,以及雷达的第二精度信息,所述第一精度信息用于表征所述视觉传感器对障碍物进行检测时的精度,所述第二精度信息用于表征所述雷达对障碍物进行检测时的精度;
基于所述第一精度信息与所述第二精度信息,确定与所述视觉传感器采集的数据对应的第一权重,以及与所述雷达采集的数据对应的第二权重,其中,若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,所述第一权重大于所述第二权重,若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,所述第一权重小于所述第二权重;
基于所述第一权重和所述第二权重,对所述视觉传感器采集的数据和所述雷达采集的数据进行融合。
2.根据权利要求1所述的方法,其特征在于,基于所述第一精度信息与所述第二精度信息,确定与所述视觉传感器采集的数据对应的第一权重,以及与所述雷达采集的数据对应的第二权重,包括:
获取所述车辆当前的车速;
若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第一对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重;
若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第二对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重。
3.根据权利要求1所述的方法,其特征在于,基于所述第一权重和所述第二权重,对所述视觉传感器采集的数据和所述雷达采集的数据进行融合,包括:
在所述视觉传感器采集的数据中获取目标障碍物在所述视觉传感器坐标系中的第一位置信息;
在所述雷达采集的数据中获取所述目标障碍物在所述雷达坐标系中的第二位置信息;
将所述第二位置信息映射至所述视觉传感器坐标系中,得到位于所述视觉传感器坐标系中的第三位置信息;
基于所述第一权重和所述第二权重,对所述第一位置信息和所述第三位置信息进行融合,得到所述目标障碍物的目标位置信息。
4.根据权利要求1至3任一所述的方法,其特征在于,所述方法还包括:
对所述视觉传感器采集的数据和所述雷达采集的数据融合后的数据进行滤波处理。
5.根据权利要求1至3任一所述的方法,其特征在于,所述方法还包括:
若所述视觉传感器对所述障碍物进行检测时的精度低于第一精度阈值,且所述雷达对所述障碍物进行检测时的精度低于第二精度阈值,发出用于指示高级驾驶辅助系统出现故障的报警信号。
6.一种传感器数据融合装置,其特征在于,应用于车辆的高级驾驶辅助系统控制器,所述装置包括:
获取模块,用于获取车辆的视觉传感器的第一精度信息,以及雷达的第二精度信息,所述第一精度信息用于表征所述视觉传感器对障碍物进行检测时的精度,所述第二精度信息用于表征所述雷达对障碍物进行检测时的精度;
确定模块,用于基于所述第一精度信息与所述第二精度信息,确定与所述视觉传感器采集的数据对应的第一权重,以及与所述雷达采集的数据对应的第二权重,其中,若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,所述第一权重大于所述第二权重,若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,所述第一权重小于所述第二权重;
融合模块,用于基于所述第一权重和所述第二权重,对所述视觉传感器采集的数据和所述雷达采集的数据进行融合。
7.根据权利要求6所述的装置,其特征在于,所述确定模块用于:
获取所述车辆当前的车速;
若所述视觉传感器对障碍物进行检测时的精度高于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第一对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重;
若所述视觉传感器对障碍物进行检测时的精度低于所述雷达对障碍物进行检测时的精度,基于车速、第一权重和第二权重的第二对应关系,将与所述车辆当前的车速对应的第一权重确定为与所述视觉传感器采集的数据对应的第一权重,将与所述车辆当前的车速对应的第二权重确定为与所述雷达采集的数据对应的第二权重。
8.根据权利要求6所述的装置,其特征在于,所述融合模块用于:
在所述视觉传感器采集的数据中获取目标障碍物在所述视觉传感器坐标系中的第一位置信息;
在所述雷达采集的数据中获取所述目标障碍物在所述雷达坐标系中的第二位置信息;
将所述第二位置信息映射至所述视觉传感器坐标系中,得到位于所述视觉传感器坐标系中的第三位置信息;
基于所述第一权重和所述第二权重,对所述第一位置信息和所述第三位置信息进行融合,得到所述目标障碍物的目标位置信息。
9.一种高级辅助驾驶系统,其特征在于,所述高级辅助驾驶系统包括:高级辅助驾驶系统控制器,所述高级辅助驾驶系统控制器包括如权利要求6至8任一所述的传感器数据融合装置。
10.一种车辆,其特征在于,所述车辆包括:如权利要求9所述的高级辅助驾驶系统。
CN201911378488.0A 2019-12-27 2019-12-27 传感器数据融合方法、装置、高级辅助驾驶系统及车辆 Active CN111137283B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911378488.0A CN111137283B (zh) 2019-12-27 2019-12-27 传感器数据融合方法、装置、高级辅助驾驶系统及车辆

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911378488.0A CN111137283B (zh) 2019-12-27 2019-12-27 传感器数据融合方法、装置、高级辅助驾驶系统及车辆

Publications (2)

Publication Number Publication Date
CN111137283A true CN111137283A (zh) 2020-05-12
CN111137283B CN111137283B (zh) 2022-02-01

Family

ID=70521042

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911378488.0A Active CN111137283B (zh) 2019-12-27 2019-12-27 传感器数据融合方法、装置、高级辅助驾驶系统及车辆

Country Status (1)

Country Link
CN (1) CN111137283B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111881874A (zh) * 2020-08-05 2020-11-03 北京四维智联科技有限公司 车位识别方法、设备及系统
CN112319440A (zh) * 2020-11-25 2021-02-05 武汉格罗夫氢能汽车有限公司 一种燃料电池氢能汽车自动紧急制动系统及制动方法
CN112597122A (zh) * 2020-09-03 2021-04-02 禾多科技(北京)有限公司 自动驾驶车辆的车载数据处理方法、装置和电子设备
CN112784679A (zh) * 2020-12-14 2021-05-11 深兰人工智能(深圳)有限公司 车辆避障方法和装置
CN112784678A (zh) * 2020-12-14 2021-05-11 深兰人工智能(深圳)有限公司 危险提示方法和装置
CN113052241A (zh) * 2021-03-28 2021-06-29 重庆长安汽车股份有限公司 一种多传感器数据融合方法、装置及汽车
CN113721587A (zh) * 2021-08-24 2021-11-30 深圳市盛视技术有限公司 一种多传感器融合的车辆控制数据采集方法、装置及系统
CN113836199A (zh) * 2021-09-22 2021-12-24 芜湖雄狮汽车科技有限公司 车辆的传感数据处理方法、装置、电子设备及存储介质
CN113844463A (zh) * 2021-09-26 2021-12-28 国汽智控(北京)科技有限公司 基于自动驾驶系统的车辆控制方法、装置及车辆
CN114084129A (zh) * 2021-10-13 2022-02-25 武汉光庭信息技术股份有限公司 一种基于融合的车辆自动驾驶控制方法及系统
CN114248790A (zh) * 2022-03-02 2022-03-29 北京鉴智科技有限公司 一种视觉报警方法、装置及系统
CN114415489A (zh) * 2021-12-02 2022-04-29 北京罗克维尔斯科技有限公司 一种车载传感器时间同步方法、装置、设备和介质
CN115223133A (zh) * 2022-02-14 2022-10-21 广州汽车集团股份有限公司 泊车障碍物检测方法、检测装置、车辆及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040184667A1 (en) * 2003-03-19 2004-09-23 Ramesh Raskar Enhancing low quality images of naturally illuminated scenes
US20060227316A1 (en) * 2005-04-06 2006-10-12 Phillip Gatt Three-dimensional imaging device
CN202163431U (zh) * 2011-06-30 2012-03-14 中国汽车技术研究中心 基于多传感器信息融合的碰撞及偏离预警装置
CN102542843A (zh) * 2010-12-07 2012-07-04 比亚迪股份有限公司 防止车辆碰撞的预警方法及装置
CN103576154A (zh) * 2012-08-01 2014-02-12 通用汽车环球科技运作有限责任公司 使用雷达和摄像机的障碍物探测的融合
CN106526605A (zh) * 2016-10-28 2017-03-22 北京康力优蓝机器人科技有限公司 激光雷达与深度相机的数据融合方法及系统
CN107202983A (zh) * 2017-05-19 2017-09-26 深圳佑驾创新科技有限公司 基于图像识别和毫米波雷达融合的自动刹车方法和系统
CN108639048A (zh) * 2018-05-15 2018-10-12 智车优行科技(北京)有限公司 汽车变道辅助方法、系统以及汽车
CN109677402A (zh) * 2018-11-13 2019-04-26 顺丰科技有限公司 自动驾驶工具的安全防护系统及方法
CN110304063A (zh) * 2019-07-15 2019-10-08 广州小鹏汽车科技有限公司 一种车辆自动变道方法及系统、车辆

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040184667A1 (en) * 2003-03-19 2004-09-23 Ramesh Raskar Enhancing low quality images of naturally illuminated scenes
US20060227316A1 (en) * 2005-04-06 2006-10-12 Phillip Gatt Three-dimensional imaging device
CN102542843A (zh) * 2010-12-07 2012-07-04 比亚迪股份有限公司 防止车辆碰撞的预警方法及装置
CN202163431U (zh) * 2011-06-30 2012-03-14 中国汽车技术研究中心 基于多传感器信息融合的碰撞及偏离预警装置
CN103576154A (zh) * 2012-08-01 2014-02-12 通用汽车环球科技运作有限责任公司 使用雷达和摄像机的障碍物探测的融合
CN106526605A (zh) * 2016-10-28 2017-03-22 北京康力优蓝机器人科技有限公司 激光雷达与深度相机的数据融合方法及系统
CN107202983A (zh) * 2017-05-19 2017-09-26 深圳佑驾创新科技有限公司 基于图像识别和毫米波雷达融合的自动刹车方法和系统
CN108639048A (zh) * 2018-05-15 2018-10-12 智车优行科技(北京)有限公司 汽车变道辅助方法、系统以及汽车
CN109677402A (zh) * 2018-11-13 2019-04-26 顺丰科技有限公司 自动驾驶工具的安全防护系统及方法
CN110304063A (zh) * 2019-07-15 2019-10-08 广州小鹏汽车科技有限公司 一种车辆自动变道方法及系统、车辆

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111881874A (zh) * 2020-08-05 2020-11-03 北京四维智联科技有限公司 车位识别方法、设备及系统
CN112597122A (zh) * 2020-09-03 2021-04-02 禾多科技(北京)有限公司 自动驾驶车辆的车载数据处理方法、装置和电子设备
CN112319440B (zh) * 2020-11-25 2024-02-06 武汉格罗夫氢能汽车有限公司 一种燃料电池氢能汽车自动紧急制动系统及制动方法
CN112319440A (zh) * 2020-11-25 2021-02-05 武汉格罗夫氢能汽车有限公司 一种燃料电池氢能汽车自动紧急制动系统及制动方法
CN112784679A (zh) * 2020-12-14 2021-05-11 深兰人工智能(深圳)有限公司 车辆避障方法和装置
CN112784678A (zh) * 2020-12-14 2021-05-11 深兰人工智能(深圳)有限公司 危险提示方法和装置
CN113052241A (zh) * 2021-03-28 2021-06-29 重庆长安汽车股份有限公司 一种多传感器数据融合方法、装置及汽车
CN113721587A (zh) * 2021-08-24 2021-11-30 深圳市盛视技术有限公司 一种多传感器融合的车辆控制数据采集方法、装置及系统
CN113836199A (zh) * 2021-09-22 2021-12-24 芜湖雄狮汽车科技有限公司 车辆的传感数据处理方法、装置、电子设备及存储介质
CN113836199B (zh) * 2021-09-22 2024-04-09 芜湖雄狮汽车科技有限公司 车辆的传感数据处理方法、装置、电子设备及存储介质
CN113844463A (zh) * 2021-09-26 2021-12-28 国汽智控(北京)科技有限公司 基于自动驾驶系统的车辆控制方法、装置及车辆
CN114084129A (zh) * 2021-10-13 2022-02-25 武汉光庭信息技术股份有限公司 一种基于融合的车辆自动驾驶控制方法及系统
CN114415489A (zh) * 2021-12-02 2022-04-29 北京罗克维尔斯科技有限公司 一种车载传感器时间同步方法、装置、设备和介质
CN114415489B (zh) * 2021-12-02 2023-09-22 北京罗克维尔斯科技有限公司 一种车载传感器时间同步方法、装置、设备和介质
CN115223133A (zh) * 2022-02-14 2022-10-21 广州汽车集团股份有限公司 泊车障碍物检测方法、检测装置、车辆及存储介质
CN114248790A (zh) * 2022-03-02 2022-03-29 北京鉴智科技有限公司 一种视觉报警方法、装置及系统

Also Published As

Publication number Publication date
CN111137283B (zh) 2022-02-01

Similar Documents

Publication Publication Date Title
CN111137283B (zh) 传感器数据融合方法、装置、高级辅助驾驶系统及车辆
US11385639B2 (en) Automatic driving system
US10604155B2 (en) Driving assistance device
US8996276B2 (en) Vehicle driving support control apparatus
US11092970B2 (en) Autonomous vehicle systems utilizing vehicle-to-vehicle communication
CN107102347B (zh) 位置感知装置、具有该装置的车辆及控制该装置的方法
JP5702400B2 (ja) 車載装置および制御方法
KR100709401B1 (ko) 차선이탈경보시스템용 힐스 장치 및 그의 시험 방법
GB2484794A (en) Determining a restricted detection range of a sensor of a vehicle
EP1886891A2 (en) Driver assistance system controller and driver assistance control method for vehicles
EP3637385A1 (en) Driving-obstacle detecting device and vehicle navigation system
CN112534487B (zh) 信息处理设备、移动体、信息处理方法和程序
CN109774473B (zh) 一种基于摄像头与导航数据融合的限速控制方法
CN112950997B (zh) 一种应急联动方法与系统
CN109823340A (zh) 一种控制车辆停车的方法、控制设备
CN113557173A (zh) 外界感测信息处理装置
CN106428014A (zh) 一种用于汽车的前车驾驶员不安全驾驶行为检测装置
US20240001846A1 (en) Apparatus and method for giving warning about vehicle in violation of traffic signal at intersection
CN103241243B (zh) 一种确定车辆状态的方法和装置
CN112319486A (zh) 一种基于驾驶数据采集的驾驶检测方法及相关装置
CN103674027A (zh) 一种基于车辆诊断接口为车载惯性导航提供信号的方法
CN116203925A (zh) 一种针对域控制器的测试方法
CN111028544A (zh) 一种v2v技术和车载多传感器融合的行人预警系统
KR20190133522A (ko) 센서 감지 정보와 v2x 정보의 융합된 정보를 이용하여 획득한 자동차 상황인지 정보를 이용한 차량 제어장치
CN114228705A (zh) 一种电动车预警系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200717

Address after: 241000 Anshan South Road, Wuhu economic and Technological Development Zone, Anhui

Applicant after: Wuhu Sambalion auto technology Co.,Ltd.

Applicant after: CHERY AUTOMOBILE Co.,Ltd.

Address before: 241006 Wuhu economic and Technological Development Zone, Anhui, No. 8 Changchun Road

Applicant before: CHERY AUTOMOBILE Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220211

Address after: 241006 Anshan South Road, Wuhu Economic and Technological Development Zone, Anhui Province

Patentee after: Wuhu Sambalion auto technology Co.,Ltd.

Address before: 241000 Anshan South Road, Wuhu economic and Technological Development Zone, Anhui

Patentee before: Wuhu Sambalion auto technology Co.,Ltd.

Patentee before: CHERY AUTOMOBILE Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20240419

Address after: 241000 10th Floor, Block B1, Wanjiang Wealth Plaza, Guandou Street, Jiujiang District, Wuhu City, Anhui Province

Patentee after: Dazhuo Intelligent Technology Co.,Ltd.

Country or region after: China

Patentee after: Dazhuo Quxing Intelligent Technology (Shanghai) Co.,Ltd.

Address before: 241006 Anshan South Road, Wuhu Economic and Technological Development Zone, Anhui Province

Patentee before: Wuhu Sambalion auto technology Co.,Ltd.

Country or region before: China

TR01 Transfer of patent right