CN113486836B - 针对低通度障碍物的自动驾驶操控方法 - Google Patents
针对低通度障碍物的自动驾驶操控方法 Download PDFInfo
- Publication number
- CN113486836B CN113486836B CN202110815586.7A CN202110815586A CN113486836B CN 113486836 B CN113486836 B CN 113486836B CN 202110815586 A CN202110815586 A CN 202110815586A CN 113486836 B CN113486836 B CN 113486836B
- Authority
- CN
- China
- Prior art keywords
- obstacle
- low
- pass
- distance
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 238000005259 measurement Methods 0.000 claims abstract description 30
- 238000003384 imaging method Methods 0.000 claims abstract description 23
- 230000008569 process Effects 0.000 claims abstract description 15
- 230000000007 visual effect Effects 0.000 claims abstract description 8
- 238000009434 installation Methods 0.000 claims description 6
- 230000001133 acceleration Effects 0.000 claims description 3
- 238000001514 detection method Methods 0.000 abstract description 11
- 238000004364 calculation method Methods 0.000 abstract description 5
- 230000004927 fusion Effects 0.000 abstract description 5
- 238000013507 mapping Methods 0.000 abstract description 3
- 238000013461 design Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 206010034701 Peroneal nerve palsy Diseases 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000000945 filler Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000035772 mutation Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 239000002352 surface water Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
- B60W60/0011—Planning or execution of driving tasks involving control alternatives for a single driving scenario, e.g. planning several paths to avoid obstacles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明公开了一种针对低通度障碍物的自动驾驶操控方法,通过对自动驾驶车辆持续行驶过程中采集的图像内容进行两级视觉识别,获得目标障碍物的精准信息,并结合映射成像原理,将现有通过诸如相位及时差关系的测距方法改进为通过平面几何关系求解目标障碍物距离的方式,尤其适合于低通度障碍物的距离测算;并且为了确保测距结果的精准度,提出对多种求解结果进行融合,最后利用识别出的目标障碍物信息以及精准的测距结果,实现以障碍物类型为导向的自适应避障决策。本发明实现了对低通度障碍物的精准检测并显著简化了测距过程,同时配合低通度障碍的检测结果可灵活调整驾驶安全措施,达到具有针对性地合理避让或通过低通度障碍物的目的。
Description
技术领域
本发明涉及自动驾驶领域,尤其涉及一种针对低通度障碍物的自动驾驶操控方法。
背景技术
自动驾驶汽车通过高精地图+定位系统、雷达探测系统、高清摄像头实现对环境的感知。雷达探测系统可以实现对障碍物的测距,高清摄像头采集图像,通过机器视觉识别可以判断出障碍物是人还是车或者其他事物。其中,雷达适合对感应范围内,具有一定高度的物体进行探测,但是车辆行驶的路况较为复杂,雷达对于地面的减震带、坑洼、偶遇的砖石、路面积水等低通度物体则难以做到探测无误,这里所述的低通度障碍物是指相对于车辆坐标系而言,Z方向上占据较小区间的障碍物(可以简单理解为较为低矮的障碍物);而安装在自动驾驶汽车上的激光雷达虽然可以侦测到低通度障碍物并绘制点云数据,但是同样受限于对目标场景物体的捕捉角度,对于低通度障碍物的成像分辨率并不会太高,生成的三维点云数据也难以准确描述低通度障碍物的距离。
因而,现有技术对低通度障碍物的测距效果并不理想。由于缺少了准确的距离探测,可以预想到,现阶段自动驾驶汽车的域控制器在面对低通度障碍物时的轨迹规划是被简化的。
发明内容
鉴于上述,本发明旨在提供一种针对低通度障碍物的自动驾驶操控方法,以获得更为准确的低通度障碍物检测结果,进而实现精准的避让及通过操控。
本发明采用的技术方案如下:
一种针对低通度障碍物的自动驾驶操控方法,其中包括:
在行驶过程中持续接收安装于车辆前部的摄像头所采集的前方道路的图像;
对各帧所述图像中的物体进行初步识别,判断所述图像中是否存在疑似低通度障碍物;
若是,则记录所述疑似低通度障碍物的识别信息;
基于所述识别信息,对后续所采集图像中的所述疑似低通度障碍物进行精细识别;
当识别出所述疑似低通度障碍物为目标障碍物时,获取所述目标障碍物的类型信息并基于投影成像原理对所述目标障碍物进行距离测定;其中,所述距离测定包含若干种求解算法;
将对应若干种求解算法的距离测定结果进行融合,得到最终的测距信息;
根据当前的车辆行驶信息、所述测距信息以及如下一种或多种所述目标障碍物的信息:位置信息和尺寸信息,确定针对当前所述目标障碍物的类型信息的避让通过策略。
在其中至少一种可能的实现方式中,所述基于投影成像原理对所述目标障碍物进行距离测定包括:
预先构造摄像头的虚拟成像面,并确定摄像头与所述虚拟成像面之间的成像距离以及摄像头投影至所述虚拟成像面上的第一交点;
将由初步识别后得到的所述疑似低通度障碍物投影至所述虚拟成像面,得到第二交点以及第一投影距离,所述第一投影距离表征所述第一交点与所述第二交点的间距;
将由精细识别后得到的所述目标障碍物投影至所述虚拟成像面,得到第三交点以及第二投影距离,所述第一投影距离表征所述第一交点与所述第三交点的间距;
利用所述第一投影距离、所述第二投影距离、预先确定的摄像头离地高度以及由初步识别至精细识别过程所对应的车辆前进距离,并按照既定的若干种几何算法求解出车辆与所述目标障碍物的若干个测距结果。
在其中至少一种可能的实现方式中,所述预先构造摄像头的虚拟成像面包括:
以摄像头的镜头面中点为起点,依据摄像头的安装角度向前方延伸出射线;
将所述射线与地面线的交汇点作为垂足,形成垂直于地面线的平面,得到所述虚拟成像面。
在其中至少一种可能的实现方式中,在所述虚拟成像面获得疑似低通度障碍物或目标障碍物的投影交点的方式包括:
以摄像头的镜头面中点为起点,将摄像头与障碍物进行连线并延长至虚拟成像面,得到障碍物的投影交点以及对应的投影位置信息。
在其中至少一种可能的实现方式中,所述识别信息包括:相对位置信息、尺寸信息以及视觉特征信息。
在其中至少一种可能的实现方式中,所述将对应若干种求解算法的距离测定结果进行融合包括:
求取若干个距离测定结果的均值;或者,
按照既定的权重对若干个距离测定结果进行加权求和。
在其中至少一种可能的实现方式中,所述方法还包括:若判断所述图像中存在疑似低通度障碍物,则暂停车辆的加速模式并进入预减速模式,直至获得精细识别结果。
在其中至少一种可能的实现方式中,所述方法还包括:在进行所述距离测定之前,根据车辆的当前行驶信息以及路况信息,决策是否开始执行所述距离测定。
本发明的设计构思在于,通过对自动驾驶车辆持续行驶过程中采集的图像内容进行两级视觉识别,可以准确确定出目标障碍物的相关信息,并结合映射成像原理,将现有通过诸如反射波的相位及时差关系的测距方法改进为通过平面几何关系求解目标障碍物距离的方式,尤其适合于相对紧附于地面的低通度障碍物的距离测算;并且为了确保测距计算结果的精准度,提出对多种求解结果进行融合,最后利用识别出的目标障碍物信息以及精准的测距结果,实现以障碍物类型为导向的自适应避障决策。本发明解决了低通度障碍物难以检测并测距的问题,实现了对低通度障碍物的精准检测并显著简化了测距过程,同时配合低通度障碍的检测结果可灵活调整驾驶安全措施,达到具有针对性地合理避让或通过低通度障碍物的目的。
附图说明
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步描述,其中:
图1为本发明实施例提供的针对低通度障碍物的自动驾驶操控方法的流程图;
图2为本发明实施例提供的用于距离求解的示意图。
具体实施方式
下面详细描述本发明的实施例,实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
本发明提出了一种针对低通度障碍物的自动驾驶操控方法的实施例,具体来说,如图1所示,可以包括如下:
步骤S1、在行驶过程中持续接收安装于车辆前部的摄像头所采集的前方道路的图像;
步骤S2、对各帧所述图像中的物体进行初步识别,判断所述图像中是否存在疑似低通度障碍物;
若是,则执行步骤S3、记录所述疑似低通度障碍物的识别信息;
步骤S4、基于所述识别信息,对后续所采集图像中的所述疑似低通度障碍物进行精细识别;
步骤S5、当识别出所述疑似低通度障碍物为目标障碍物时,获取所述目标障碍物的类型信息并基于投影成像原理对所述目标障碍物进行距离测定;
步骤S6、将对应若干种求解算法的距离测定结果进行融合,得到最终的测距信息;
步骤S7、根据当前的车辆行驶信息、所述测距信息以及如下一种或多种所述目标障碍物的信息:位置信息和尺寸信息,确定针对当前所述目标障碍物的类型信息的避让通过策略。
进一步地,所述基于投影成像原理对所述目标障碍物进行距离测定包括:
预先构造摄像头的虚拟成像面,并确定摄像头与所述虚拟成像面之间的成像距离以及摄像头投影至所述虚拟成像面上的第一交点;
将由初步识别后得到的所述疑似低通度障碍物投影至所述虚拟成像面,得到第二交点以及第一投影距离,所述第一投影距离表征所述第一交点与所述第二交点的间距;
将由精细识别后得到的所述目标障碍物投影至所述虚拟成像面,得到第三交点以及第二投影距离,所述第一投影距离表征所述第一交点与所述第三交点的间距;
利用所述第一投影距离、所述第二投影距离、预先确定的摄像头离地高度以及由初步识别至精细识别过程所对应的车辆前进距离,并按照既定的若干种几何算法求解出车辆与所述目标障碍物的若干个测距结果。
进一步地,所述预先构造摄像头的虚拟成像面包括:
以摄像头的镜头面中点为起点,依据摄像头的安装角度向前方延伸出射线;
将所述射线与地面线的交汇点作为垂足,形成垂直于地面线的平面,得到所述虚拟成像面。
进一步地,在所述虚拟成像面获得疑似低通度障碍物或目标障碍物的投影交点的方式包括:
以摄像头的镜头面中点为起点,将摄像头与障碍物进行连线并延长至虚拟成像面,得到障碍物的投影交点以及对应的投影位置信息。
进一步地,所述识别信息包括:相对位置信息、尺寸信息以及视觉特征信息。
进一步地,所述将对应若干种求解算法的距离测定结果进行融合包括:
求取若干个距离测定结果的均值;或者,
按照既定的权重对若干个距离测定结果进行加权求和。
进一步地,所述方法还包括:若判断所述图像中存在疑似低通度障碍物,则暂停车辆的加速模式并进入预减速模式,直至获得精细识别结果。
进一步地,所述方法还包括:在进行所述距离测定之前,根据车辆的当前行驶信息以及路况信息,决策是否开始执行所述距离测定。
为了便于理解上述实施例及其优选方案,此处提供如下具体说明供参考:
自动驾驶汽车在行驶过程中,摄像头不断捕捉前方道路的图像,形成一帧帧的平面图像(称为帧图像)。摄像头将平面图像信息传送给自动驾驶汽车的域控制器。域控制器对接收到的平面图像信息进行粗略判断,即各帧图像中是否可能存在所述低通度障碍物(判定标准可以是平面图像中是否存在颜色突变的集中区域,或采用其他快捷的现有逻辑算法。此处仅为初步的粗略判断)。若判断可能存在所述低通度障碍物,则对疑似障碍物的信息(例如但不限于相对位置、视觉特征等)进行锁定,并调用预置的低通度障碍物识别模块,对继续行驶过程中后续采集的平面图像中被前步判定为疑似障碍物(由锁定的疑似障碍物信息在后续图像中定位到该障碍物)的低通度障碍物进行精细识别。与此同时,域控制器指示自动驾驶汽车不再有加油门动作,直到图像识别模块完成了最终的识别分析,此阶段汽车进入预减速模式,例如滑行、轻制动或进入能量回收状态。
关于前述对低通度障碍物的精细识别具体可基于卷积神经网络实现,例如对每一种低通度障碍物拥有多个卷积核(可以是颜色、形状、积水表面的水纹等特征),并且通过网络自身的深度学习可以不断优化卷积核,在实际识别操作时,利用这些卷积核对后续平面图像中的疑似障碍物进行多层次的池化和激活,最终完成图像的识别。在实际操作中,可以采用机器视觉领域中已有的成熟技术,对识别技术本身本发明可不作限定。
若最终经检测判定不是低通度障碍物,则将识别结果返回给域控制器,域控制器恢复正常的自动驾驶操控;若判定是目标障碍物,则确定出目标障碍物的类型并将该识别结果返回给域控制器,域控制器触发基于投影成像原理预置的低通度障碍物测距算法,在持续行驶条件下对该目标障碍物进行距离测定。需指出的是,本发明所述的低通度障碍物测距算法被触发的前提,可以是车辆以相对较高速度正在开阔且整体较为平坦的路面行驶,而非行驶在障碍物相对密集的狭窄路面,因为通常来说,当行驶诸如障碍物密集的狭窄路面等特殊路况时,自动驾驶车辆的预设车速策略一般会出于安全优先机制采用相对较低的速度行驶,所以不必然需要执行本发明所述的低通度障碍物测距算法,也不需要再次降低车速或改变汽车行驶方向。
关于本发明提出的投影成像测距方式,具体来说,可以参考如下:
如图2所示,可以预先构造出摄像头的虚拟成像面,具体地,可以从位于车辆前部的摄像头的镜头面中点,按摄像头的安装角度(通常相对地面线略微向下)向前方延伸出射线,由于安装角度的客观存在,可以理解的,该射线与地面线在有限远处(可以取决于摄像头的可视距离)交汇为一点,以该交汇点作为垂足,形成垂直于地面线的平面,即构成所述虚拟成像面。
并且,摄像头所在位置与所述虚拟成像面之间的间距是固定的,结合图示,L0即为摄像头与所述虚拟成像面的距离,可称其为成像距离,并且还可以据此得到摄像头投影至所述虚拟平面上的点,即所示第一交点,并可由预先构建的虚拟成像面的坐标系得到对应的坐标信息(上述成像距离、第一交点、坐标信息等参数在摄像头的安装位置及角度确定后便可以固化)。图示中的h是摄像头在车辆上安装位置的离地高度,该参数也是可以预先确定的。
根据前述在平面图像中识别出的低通度障碍物,以摄像头所在位置(即图示的车头)为起点,可将摄像头与目标障碍物进行连线(较佳地,可以如图示连接在低通度障碍物靠近摄像头的位置)并延长至虚拟成像面得到第二交点(及对应的坐标信息),并且此段连线涉及的角度α即为当前时刻摄像头拍摄到低通障碍物时的成像夹角(此角度可以由摄像头成像信息获得),由此可以得到摄像头与低通障碍物在虚拟成像面上的投影距离L1(第一交点至第二交点的距离)。由于摄像头拍摄的帧图像与虚拟成像面上的图像具有比例放大关系,因此在实际操作中,L1可以通过对摄像头所拍摄到的帧图像中图像的绝对零点和低通度障碍物所在的像素点的像素距离,按预设比例放大而计算得到。
在前文提及的两级图像识别算法进行过程中,车辆实际已经行驶一段距离ΔS(利用车速对时间的积分可以求得),那么按上一段落所述,在经过行驶ΔS距离后,可以获得针对目标障碍物的第三交点(及对应的坐标信息),并得到投影距离L2(第一交点至第三交点的距离,其计算过程可以参考前文对L1获取方式的说明),其中涉及的成像夹角β同样可以由实际成像角获得,而图中的S即为待测算的当前时刻车辆与目标障碍物的间距。本领域技术人员可以理解的是,在实际操作中,利用上述参数,为了计算低通度障碍物距离自动驾驶汽车的距离S,可以有多种平面几何求解方式,此处结合前述投影成像构思,提供但不限于如下两种求解方式供参考:
进一步地,为了提升求解的精准度,还可以考虑采用多种求解结果(如上述两种)的均值,或者按照既定的权重关系对各个求解结果进行加权求和,以此作为S的最终取值。这里提及求均值或加权的融合构思,是考虑到每种求解方式均可能存在一定误差,例如参数量过少信息不全面,或者参数量过多引入额外干扰等,因此利用融合机制可以弱化单一求解方式的不足,从而得到更为全面、准确、可靠的最终测距结果。
接续前文,域控制器在获得目标障碍物的位置、类型以及当前时刻与本车的距离等信息之后,便可以规划出下一时刻车辆的行驶方式,以使自动驾驶车辆做出针对性的应对决策。
举例来说,当图像识别结果反馈该目标障碍物为减速带等类似无法避让的低通度障碍物类型时,便可以控制车辆进入主动减速模式,具体来说是依据默认的通过速度V0、当前车速V、该类型低通度障碍物与本车距离S,计算出以何种减速度完成减速通过。
当图像识别结果反馈该目标障碍物为相对较小的砖石、他车掉落物、井盖、浅坑等低通度障碍物类型时,便可以控制车辆根据当前车速V、该类型低通度障碍物与本车距离S以及相对位置,选择转向避让,或者还可以微调车辆行驶方向,以使该低通度障碍物靠近车辆的中线,即,使低通度障碍物在车辆左右轮之间通过。
当图像识别结果反馈该目标障碍物为较小面积积水时,可以参考前述的降速通过策略或者僻让通过策略,此处不作赘述;而当该目标障碍物为较大面积积水或类似的低通度障碍物,则可以根据测距信息,执行紧急制动策略或平缓制动策略,以使自动驾驶汽车在涉险前制动停驻,并可以重新规划新的行驶路线。
综上所述,本发明的设计构思在于,通过对自动驾驶车辆持续行驶过程中采集的图像内容进行两级视觉识别,可以准确确定出目标障碍物的相关信息,并结合映射成像原理,将现有通过诸如反射波的相位及时差关系的测距方法改进为通过平面几何关系求解目标障碍物距离的方式,尤其适合于相对紧附于地面的低通度障碍物的距离测算;并且为了确保测距计算结果的精准度,提出对多种求解结果进行融合,最后利用识别出的目标障碍物信息以及精准的测距结果,实现以障碍物类型为导向的自适应避障决策。本发明解决了低通度障碍物难以检测并测距的问题,实现了对低通度障碍物的精准检测并显著简化了测距过程,同时配合低通度障碍的检测结果可灵活调整驾驶安全措施,达到具有针对性地合理避让或通过低通度障碍物的目的。
本发明实施例中,“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示单独存在A、同时存在A和B、单独存在B的情况。其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项”及其类似表达,是指的这些项中的任意组合,包括单项或复数项的任意组合。例如,a,b和c中的至少一项可以表示:a,b,c,a和b,a和c,b和c或a和b和c,其中a,b,c可以是单个,也可以是多个。
以上依据图式所示的实施例详细说明了本发明的构造、特征及作用效果,但以上仅为本发明的较佳实施例,需要言明的是,上述实施例及其优选方式所涉及的技术特征,本领域技术人员可以在不脱离、不改变本发明的设计思路以及技术效果的前提下,合理地组合搭配成多种等效方案;因此,本发明不以图面所示限定实施范围,凡是依照本发明的构想所作的改变,或修改为等同变化的等效实施例,仍未超出说明书与图示所涵盖的精神时,均应在本发明的保护范围内。
Claims (5)
1.一种针对低通度障碍物的自动驾驶操控方法,其特征在于,包括:
在行驶过程中持续接收安装于车辆前部的摄像头所采集的前方道路的图像;
对各帧所述图像中的物体进行初步识别,判断所述图像中是否存在疑似低通度障碍物;
若是,则记录所述疑似低通度障碍物的识别信息;
基于所述识别信息,对后续所采集图像中的所述疑似低通度障碍物进行精细识别;
低通度障碍物是指相对于车辆坐标系而言Z方向上占据较小区间的障碍物即低矮的障碍物;
当识别出所述疑似低通度障碍物为目标障碍物时,获取所述目标障碍物的类型信息并基于投影成像原理对所述目标障碍物进行距离测定;其中,所述距离测定包含若干种求解算法;
将对应若干种求解算法的距离测定结果进行融合,得到最终的测距信息;
根据当前的车辆行驶信息、所述测距信息以及如下一种或多种所述目标障碍物的信息:位置信息和尺寸信息,确定针对当前所述目标障碍物的类型信息的避让通过策略;
所述基于投影成像原理对所述目标障碍物进行距离测定包括:
预先构造摄像头的虚拟成像面,并确定摄像头与所述虚拟成像面之间的间距即成像距离,在车辆行驶的过程中摄像头的虚拟成像面会随着车辆行驶发生对应的移动,保持摄像头与所述虚拟成像面之间的成像距离固定不变;确定摄像头投影至所述虚拟成像面上的第一交点;
将由初步识别后得到的所述疑似低通度障碍物投影至第一虚拟成像面,得到第二交点以及第一投影距离,所述第一投影距离表征所述第一虚拟成像面的第一交点与所述第二交点的间距;所述第一虚拟成像面为对各帧所述图像中的物体进行初步识别时对应的虚拟成像面;将由精细识别后得到的所述目标障碍物投影至第二虚拟成像面,得到第三交点以及第二投影距离,所述第二投影距离表征所述第二虚拟成像面的第一交点与所述第三交点的间距;所述第二虚拟成像面为对后续所采集图像中的所述疑似低通度障碍物进行精细识别时对应的虚拟成像面;
利用所述第一投影距离、所述第二投影距离、预先确定的摄像头离地高度、摄像头与所述虚拟成像面之间的成像距离以及由初步识别至精细识别过程所对应的车辆前进距离,并按照多种几何算法求解出车辆与所述目标障碍物的若干个测距结果;
所述预先构造摄像头的虚拟成像面包括:
以摄像头的镜头面中点为起点,依据摄像头的安装角度向前方延伸出射线;
将所述射线与地面线的交汇点作为垂足,形成垂直于地面线的平面,得到所述虚拟成像面;
在所述第一虚拟成像面获得疑似低通度障碍物或在所述第二虚拟成像面获得目标障碍物的投影交点的方式包括:
以摄像头的镜头面中点为起点,将摄像头与疑似低通度障碍物进行连线并延长至第一虚拟成像面,得到障碍物的投影交点以及对应的投影位置信息,障碍物的投影交点作为第二交点;
以摄像头的镜头面中点为起点,将摄像头与目标障碍物进行连线并延长至第二虚拟成像面,得到障碍物的投影交点以及对应的投影位置信息,障碍物的投影交点作为第三交点。
2.根据权利要求1所述的针对低通度障碍物的自动驾驶操控方法,其特征在于,所述识别信息包括:相对位置信息、尺寸信息以及视觉特征信息。
3.根据权利要求1所述的针对低通度障碍物的自动驾驶操控方法,其特征在于,所述将对应若干种求解算法的距离测定结果进行融合包括:
求取若干个距离测定结果的均值;或者,
按照既定的权重对若干个距离测定结果进行加权求和。
4.根据权利要求1~3任一项所述的针对低通度障碍物的自动驾驶操控方法,其特征在于,所述方法还包括:若判断所述图像中存在疑似低通度障碍物, 则暂停车辆的加速模式并进入预减速模式,直至获得精细识别结果。
5.根据权利要求1~3任一项所述的针对低通度障碍物的自动驾驶操控方法,其特征在于,所述方法还包括:在进行所述距离测定之前,根据车辆的当前行驶信息以及路况信息,决策是否开始执行所述距离测定。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110815586.7A CN113486836B (zh) | 2021-07-19 | 2021-07-19 | 针对低通度障碍物的自动驾驶操控方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110815586.7A CN113486836B (zh) | 2021-07-19 | 2021-07-19 | 针对低通度障碍物的自动驾驶操控方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113486836A CN113486836A (zh) | 2021-10-08 |
CN113486836B true CN113486836B (zh) | 2023-06-06 |
Family
ID=77941449
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110815586.7A Active CN113486836B (zh) | 2021-07-19 | 2021-07-19 | 针对低通度障碍物的自动驾驶操控方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113486836B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114572233B (zh) * | 2022-03-25 | 2022-11-29 | 阿波罗智能技术(北京)有限公司 | 基于模型集合的预测方法、电子设备及自动驾驶车辆 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08315299A (ja) * | 1995-05-19 | 1996-11-29 | Honda Motor Co Ltd | 車両の外部環境認識装置 |
JP2007180803A (ja) * | 2005-12-27 | 2007-07-12 | Aisin Aw Co Ltd | 運転支援方法及び運転支援装置 |
JP2014106901A (ja) * | 2012-11-29 | 2014-06-09 | Aisin Seiki Co Ltd | 距離算出装置、衝突検出システム、距離算出方法、衝突検出方法、及びプログラム |
KR101521842B1 (ko) * | 2014-08-27 | 2015-05-20 | 현대모비스 주식회사 | 주차 공간 탐색 장치 및 그 탐색 방법 |
JP2016038226A (ja) * | 2014-08-06 | 2016-03-22 | マツダ株式会社 | 車両の距離計測装置 |
KR20170067306A (ko) * | 2015-12-08 | 2017-06-16 | 현대모비스 주식회사 | 차량의 후진주행보조시스템 및 후진주행보조방법 |
CN107161141A (zh) * | 2017-03-08 | 2017-09-15 | 深圳市速腾聚创科技有限公司 | 无人驾驶汽车系统及汽车 |
CN109940612A (zh) * | 2019-03-04 | 2019-06-28 | 东北师范大学 | 基于一字线激光的智能避障机器人及其避障方法 |
CN110696822A (zh) * | 2019-11-25 | 2020-01-17 | 安徽江淮汽车集团股份有限公司 | 自动泊车控制方法、装置、设备及存储介质 |
CN110751127A (zh) * | 2019-10-30 | 2020-02-04 | 芜湖汽车前瞻技术研究院有限公司 | 距离的确定方法、装置及存储介质 |
CN110825093A (zh) * | 2019-11-28 | 2020-02-21 | 安徽江淮汽车集团股份有限公司 | 自动驾驶策略生成方法、装置、设备及存储介质 |
CN111506084A (zh) * | 2020-05-19 | 2020-08-07 | 安徽江淮汽车集团股份有限公司 | 无人驾驶车辆的障碍物避让方法、装置、设备及存储介质 |
CN111598010A (zh) * | 2020-05-15 | 2020-08-28 | 安徽江淮汽车集团股份有限公司 | 动态障碍物检测方法、装置、电子设备及存储介质 |
CN111930125A (zh) * | 2020-08-19 | 2020-11-13 | 山东华锐智能技术有限公司 | 适用于agv的低成本障碍物检测装置及方法 |
CN111971682A (zh) * | 2018-04-16 | 2020-11-20 | 三菱电机株式会社 | 路面检测装置、利用了路面检测装置的图像显示装置、利用了路面检测装置的障碍物检测装置、路面检测方法、利用了路面检测方法的图像显示方法以及利用了路面检测方法的障碍物检测方法 |
CN112014845A (zh) * | 2020-08-28 | 2020-12-01 | 安徽江淮汽车集团股份有限公司 | 一种车辆障碍物定位方法、装置、设备及存储介质 |
CN112113536A (zh) * | 2020-08-10 | 2020-12-22 | 浙江吉利汽车研究院有限公司 | 一种车载摄像头测距方法及系统 |
CN112163446A (zh) * | 2020-08-12 | 2021-01-01 | 浙江吉利汽车研究院有限公司 | 一种障碍物检测方法、装置、电子设备及存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101637716B1 (ko) * | 2014-11-03 | 2016-07-07 | 현대자동차주식회사 | 차량의 장애물 위치 인식 장치 및 방법 |
JP6465127B2 (ja) * | 2016-02-10 | 2019-02-06 | 株式会社デンソー | 走行支援装置 |
JP6565893B2 (ja) * | 2016-12-26 | 2019-08-28 | トヨタ自動車株式会社 | 運転支援装置 |
US10671862B2 (en) * | 2018-01-30 | 2020-06-02 | Wipro Limited | Method and system for detecting obstacles by autonomous vehicles in real-time |
KR102148561B1 (ko) * | 2018-02-27 | 2020-08-26 | 한양대학교 산학협력단 | 차량의 adas 테스트를 위한 가상 레이더 센서의 장애물 검출 방법 |
JP7183521B2 (ja) * | 2018-11-30 | 2022-12-06 | マツダ株式会社 | 経路候補設定システム及び経路候補設定方法 |
-
2021
- 2021-07-19 CN CN202110815586.7A patent/CN113486836B/zh active Active
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08315299A (ja) * | 1995-05-19 | 1996-11-29 | Honda Motor Co Ltd | 車両の外部環境認識装置 |
JP2007180803A (ja) * | 2005-12-27 | 2007-07-12 | Aisin Aw Co Ltd | 運転支援方法及び運転支援装置 |
JP2014106901A (ja) * | 2012-11-29 | 2014-06-09 | Aisin Seiki Co Ltd | 距離算出装置、衝突検出システム、距離算出方法、衝突検出方法、及びプログラム |
JP2016038226A (ja) * | 2014-08-06 | 2016-03-22 | マツダ株式会社 | 車両の距離計測装置 |
KR101521842B1 (ko) * | 2014-08-27 | 2015-05-20 | 현대모비스 주식회사 | 주차 공간 탐색 장치 및 그 탐색 방법 |
KR20170067306A (ko) * | 2015-12-08 | 2017-06-16 | 현대모비스 주식회사 | 차량의 후진주행보조시스템 및 후진주행보조방법 |
CN107161141A (zh) * | 2017-03-08 | 2017-09-15 | 深圳市速腾聚创科技有限公司 | 无人驾驶汽车系统及汽车 |
CN111971682A (zh) * | 2018-04-16 | 2020-11-20 | 三菱电机株式会社 | 路面检测装置、利用了路面检测装置的图像显示装置、利用了路面检测装置的障碍物检测装置、路面检测方法、利用了路面检测方法的图像显示方法以及利用了路面检测方法的障碍物检测方法 |
CN109940612A (zh) * | 2019-03-04 | 2019-06-28 | 东北师范大学 | 基于一字线激光的智能避障机器人及其避障方法 |
CN110751127A (zh) * | 2019-10-30 | 2020-02-04 | 芜湖汽车前瞻技术研究院有限公司 | 距离的确定方法、装置及存储介质 |
CN110696822A (zh) * | 2019-11-25 | 2020-01-17 | 安徽江淮汽车集团股份有限公司 | 自动泊车控制方法、装置、设备及存储介质 |
CN110825093A (zh) * | 2019-11-28 | 2020-02-21 | 安徽江淮汽车集团股份有限公司 | 自动驾驶策略生成方法、装置、设备及存储介质 |
CN111598010A (zh) * | 2020-05-15 | 2020-08-28 | 安徽江淮汽车集团股份有限公司 | 动态障碍物检测方法、装置、电子设备及存储介质 |
CN111506084A (zh) * | 2020-05-19 | 2020-08-07 | 安徽江淮汽车集团股份有限公司 | 无人驾驶车辆的障碍物避让方法、装置、设备及存储介质 |
CN112113536A (zh) * | 2020-08-10 | 2020-12-22 | 浙江吉利汽车研究院有限公司 | 一种车载摄像头测距方法及系统 |
CN112163446A (zh) * | 2020-08-12 | 2021-01-01 | 浙江吉利汽车研究院有限公司 | 一种障碍物检测方法、装置、电子设备及存储介质 |
CN111930125A (zh) * | 2020-08-19 | 2020-11-13 | 山东华锐智能技术有限公司 | 适用于agv的低成本障碍物检测装置及方法 |
CN112014845A (zh) * | 2020-08-28 | 2020-12-01 | 安徽江淮汽车集团股份有限公司 | 一种车辆障碍物定位方法、装置、设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
激光雷达与摄像头交互式障碍物检测算法;许峰;程子龙;陈华;张雪杉;张正楠;;数字通信世界(第09期) * |
Also Published As
Publication number | Publication date |
---|---|
CN113486836A (zh) | 2021-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10073462B2 (en) | Autonomous vehicle with improved visual detection ability | |
CA2987373C (en) | Position estimation device and position estimation method | |
CN110103967B (zh) | 一种车辆自动变道方法及车辆控制系统、车辆 | |
CN110745140B (zh) | 一种基于连续图像约束位姿估计的车辆换道预警方法 | |
US11460851B2 (en) | Eccentricity image fusion | |
CN112154455B (zh) | 数据处理方法、设备和可移动平台 | |
JP7276282B2 (ja) | 物体検出装置、物体検出方法及び物体検出用コンピュータプログラム | |
JP7067574B2 (ja) | 距離推定装置及び距離推定用コンピュータプログラム | |
CN113486836B (zh) | 针对低通度障碍物的自动驾驶操控方法 | |
JP6988873B2 (ja) | 位置推定装置および位置推定用コンピュータプログラム | |
KR102634443B1 (ko) | 차량용 센서의 보정 정보 획득 장치 및 방법 | |
CN112298165A (zh) | 一种基于前向视觉的主动转向控制方法 | |
US20220309776A1 (en) | Method and system for determining ground level using an artificial neural network | |
CN113486837B (zh) | 针对低通度障碍物的自动驾驶控制方法 | |
JP2020201746A (ja) | 距離推定装置、距離推定方法及び距離推定用コンピュータプログラム | |
CN113022593B (zh) | 障碍物处理方法、装置和行驶设备 | |
CN112731451B (zh) | 一种基于激光雷达检测地面障碍物的方法及系统 | |
US11815626B2 (en) | Method for detecting intensity peaks of a specularly reflected light beam | |
US20220315002A1 (en) | Traveling lane planning device, medium storing computer program for traveling lane planning, and traveling lane planning method | |
US11840257B2 (en) | Lane change determination for vehicle on shoulder | |
CN211166694U (zh) | 自动驾驶车辆 | |
JP7363469B2 (ja) | 位置関係検出システム | |
JP7347204B2 (ja) | 位置関係検出装置、および位置関係検出方法 | |
CN111043977B (zh) | 用于确定第一车辆相对于第二车辆的相对参数的方法 | |
US20230152807A1 (en) | Vehicle control system and vehicle driving method using the vehicle control system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: No.669 Shixin Road, economic development zone, Feixi County, Hefei City, Anhui Province Applicant after: ANHUI JIANGHUAI AUTOMOBILE GROUP Corp.,Ltd. Address before: 230601 No. 669 Shixin Road, Taohua Industrial Park, Hefei City, Anhui Province Applicant before: ANHUI JIANGHUAI AUTOMOBILE GROUP Corp.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |