CN110573905B - 障碍物检知装置 - Google Patents
障碍物检知装置 Download PDFInfo
- Publication number
- CN110573905B CN110573905B CN201880027990.4A CN201880027990A CN110573905B CN 110573905 B CN110573905 B CN 110573905B CN 201880027990 A CN201880027990 A CN 201880027990A CN 110573905 B CN110573905 B CN 110573905B
- Authority
- CN
- China
- Prior art keywords
- obstacle
- distance
- wave
- host vehicle
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/593—Depth or shape recovery from multiple images from stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
- G01S15/06—Systems determining the position data of a target
- G01S15/08—Systems for measuring distance only
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/86—Combinations of sonar systems with lidar systems; Combinations of sonar systems with systems not using wave reflection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/93—Sonar systems specially adapted for specific applications for anti-collision purposes
- G01S15/931—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/579—Depth or shape recovery from multiple images from motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Geometry (AREA)
- Traffic Control Systems (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
- Image Analysis (AREA)
Abstract
位置获取部(261)基于由测距传感器(21)接收到的接收波来获取本车辆与障碍物的相对位置信息。形状识别部(262)基于由拍摄部(22)获取到的图像信息来执行障碍物的形状识别。检知处理部(263)基于由位置获取部获取到的相对位置信息和形状识别部的形状识别结果来检知障碍物。检知处理部判定障碍物的高度是否是规定高度以上。在形状识别部的形状识别结果中的障碍物的高度小于规定高度的情况下,检知处理部废弃与该障碍物对应的相对位置信息。
Description
相关申请的交叉引用
本申请基于2017年4月28日申请的日本专利申请编号2017-89962号,并在此通过参照引入其记载内容。
技术领域
本公开涉及被构成为通过搭载于本车辆来检知存在于上述本车辆的外侧的障碍物的障碍物检知装置。
背景技术
日本特开2014-58247号公报所记载的装置具备具有照射部、接收部以及位置检测部的声纳、和物体判定部。声纳也可以被称为“测距传感器”。照射部向本车辆的外侧照射超声波。接收部接收来自物体的反射波。位置检测部基于超声波的往复时间来检测物体的存在位置。物体判定部根据基于反射波所确定的物体的检测状态的变化来判定与物体的高度有关的特征。
如上述那样,在这种装置中,基于探测波被障碍物反射的反射波来获取从测距传感器或者搭载测距传感器的本车辆到障碍物为止的距离。反射波的检知结果包括同测距传感器与物体之间的距离对应的信息,另一方面本质上不包括与物体的高度对应的信息。因此,根据以往的这种的装置,不能够准确地获得与物体的高度有关的信息。
另一方面,反射波的检知结果受到障碍物的高度尺寸所带来的影响。因此,关于以往的这种装置,在障碍物检知精度的方面,仍有改善的余地。即,例如,存在作为检知对象的障碍物是路缘石等从路面的突出高度较低的障碍物的情况。该情况下,有可能在获取到的距离和实际的本车辆与障碍物之间的水平距离之间,产生无法忽略的程度的误差。
发明内容
本公开是鉴于上述所例示的情况等而完成的。
根据本公开的一个观点,障碍物检知装置被构成为通过搭载于本车辆来检知存在于上述本车辆的外侧的障碍物。
该障碍物检知装置具备:
至少一个测距传感器,被设置成通过朝向上述本车辆的外侧发送探测波并且接收包含上述探测波被上述障碍物反射的反射波的接收波,来输出和与上述障碍物之间的距离对应的信号;
拍摄部,被设置成获取与上述本车辆的周围的图像对应的图像信息;
车辆状态获取部,被设置成获取与上述本车辆的行驶状态对应的行驶状态信息;
位置获取部,被设置成基于上述测距传感器的输出来获取与上述障碍物相对于上述本车辆的相对位置对应的相对位置信息;
形状识别部,被设置成基于由上述拍摄部获取到的上述图像信息和由上述车辆状态获取部获取到的上述行驶状态信息来执行上述障碍物的形状识别;以及
检知处理部,被设置成基于由上述位置获取部获取到的上述相对位置信息和上述形状识别部的形状识别结果来检知上述障碍物,
上述检知处理部被构成为在上述形状识别结果中的上述障碍物的高度尺寸小于规定尺寸的情况下,废弃与该障碍物对应的上述相对位置信息。
根据本公开的另一个观点,障碍物检知装置被构成为通过搭载于本车辆来检知存在于上述本车辆的外侧的障碍物。
该障碍物检知装置具备:
至少一个测距传感器,被设置成通过朝向上述本车辆的外侧发送探测波并且接收包含上述探测波被上述障碍物反射的反射波的接收波,来输出和与上述障碍物之间的距离对应的信号;
拍摄部,被设置成获取与上述本车辆的周围的图像对应的图像信息;
距离获取部,被设置成基于上述测距传感器的输出来获取与上述障碍物距上述本车辆的距离对应的距离信息;
形状识别部,被设置成基于由上述拍摄部获取到的上述图像信息来执行上述障碍物的形状识别;以及
距离修正部,被设置成在上述形状识别部的形状识别结果中的上述障碍物的高度尺寸小于规定尺寸的情况下,基于上述测距传感器的车高方向上的搭载位置来修正与该障碍物对应的上述距离信息。
此外,对各要素标注的带括号的参照附图标记仅是表示该要素与后述的实施方式中记载的具体的结构等之间的对应关系的一个例子。
附图说明
图1是表示搭载有实施方式所涉及的障碍物检知装置的本车辆的简要结构的俯视图。
图2是图1所示的障碍物检知装置的第一实施方式的功能框图。
图3是用于说明图2所示的障碍物检知装置的动作概要的示意图。
图4A是用于说明图2所示的障碍物检知装置的动作概要的示意图。
图4B是用于说明图2所示的障碍物检知装置的动作概要的示意图。
图5是表示图2所示的障碍物检知装置的动作例的流程图。
图6是表示图2所示的障碍物检知装置的动作例的流程图。
图7是用于说明图1所示的障碍物检知装置的第二实施方式的动作概要的示意图。
图8是用于说明图1所示的障碍物检知装置的第二实施方式的动作概要的示意图。
图9是用于说明图1所示的障碍物检知装置的第三实施方式的动作概要的示意图。
图10是表示图1所示的障碍物检知装置的第三实施方式的动作例的流程图。
图11是图1所示的障碍物检知装置的第四实施方式的功能框图。
图12A是用于说明图11所示的障碍物检知装置的动作概要的示意图。
图12B是用于说明图11所示的障碍物检知装置的动作概要的示意图。
图12C是用于说明图11所示的障碍物检知装置的动作概要的示意图。
图13A是用于说明图11所示的障碍物检知装置的动作概要的示意图。
图13B是用于说明图11所示的障碍物检知装置的动作概要的示意图。
图14是表示图11所示的障碍物检知装置的动作例的流程图。
图15是表示图1所示的障碍物检知装置的第五实施方式的动作例的流程图。
图16是表示图1所示的障碍物检知装置的第五实施方式的动作例的流程图。
图17是表示图1所示的障碍物检知装置的第五实施方式的动作例的流程图。
具体实施方式
以下,基于附图对实施方式进行说明。此外,对于能够应用于某一个实施方式的各种变形例,不在与该实施方式有关的一系列的说明的中途插入,而在一系列的说明之后汇总进行说明。
参照图1,车辆10是所谓的四轮汽车,在俯视时具备大致矩形形状的车体11。以下,将通过车辆10的车宽方向上的中心且与车辆10中的车辆全长方向平行的虚拟直线称为车辆中心轴线VL。车辆全长方向是与车宽方向正交且与车高方向正交的方向。车高方向是规定车辆10的车高的方向,是与将车辆10载置于水平面的情况下的重力作用方向平行的方向。在图1中,车辆全长方向是图中上下方向,车宽方向是图中左右方向。
如图1中箭头所示那样定义车辆10中的“前”、“后”、“左”、“右”。即,车辆全长方向与前后方向同义。另外,车宽方向与左右方向同义。并且,车高方向与上下方向同义。但是,如后述那样,关于车高方向即上下方向,根据车辆10的载置条件或者行驶条件,可能有不与重力作用方向平行的情况。
在车体11的前侧的端部亦即前面部12安装有前保险杠13。在车体11的后侧的端部亦即后面部14安装有后保险杠15。在车体11的侧面部16设置有车门板17。在图1所示的具体例中,设置有左右分别各2块、共计4块车门板17。在前侧的左右一对车门板17的每一个安装有车门后视镜18。
在车辆10搭载有障碍物检知装置20。障碍物检知装置20被构成为通过搭载于车辆10而能够检知存在于车辆10的外侧的障碍物B。以下,将搭载有障碍物检知装置20的车辆10称为“本车辆10”。
具体而言,障碍物检知装置20具备测距传感器21、拍摄部22、车速传感器23、换档位置传感器24、转向角传感器25、控制部26以及显示器27。以下,对构成障碍物检知装置20的各部的详细进行说明。此外,为了简化图示,在图1中省略构成障碍物检知装置20的各部之间的电气连接关系。
测距传感器21被设置成通过朝向本车辆10的外侧发送探测波并且接收包含探测波被障碍物B的壁面BW反射的反射波的接收波,来输出和与障碍物B之间的距离对应的信号。具体而言,在本实施方式中,测距传感器21是所谓的超声波传感器,并且被构成为发送作为超声波的探测波,并且能够接收包含超声波的接收波。
障碍物检知装置20具备至少一个测距传感器21。具体而言,在本实施方式中,多个测距传感器21被安装于车体11。多个测距传感器21分别被配置为从车辆中心轴线VL向车宽方向上的任意一侧偏移。另外,多个测距传感器21中的至少一部分被设置成沿着与车辆中心轴线VL交叉的方向发送探测波。
具体而言,在前保险杠13安装有作为测距传感器21的第一前声纳SF1、第二前声纳SF2、第三前声纳SF3以及第四前声纳SF4。同样地,在后保险杠15安装有作为测距传感器21的第一后声纳SR1、第二后声纳SR2、第三后声纳SR3以及第四后声纳SR4。
另外,在车体11的侧面部16安装有作为测距传感器21的第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4。在未特别指定第一前声纳SF1、第二前声纳SF2、第三前声纳SF3、第四前声纳SF4、第一后声纳SR1、第二后声纳SR2、第三后声纳SR3、第四后声纳SR4、第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4中的任意一个的情况下,以下,使用“测距传感器21”这样的单数形式的表现或者“多个测距传感器21”这样的表现。
将某一个测距传感器21称为“第一测距传感器”,将另一个测距传感器称为“第二测距传感器”,如以下那样定义“直接波”以及”间接波”。将是被第一测距传感器接收的接收波、且是起因于从第一测距传感器发送的探测波被障碍物B反射的反射波的接收波称为“直接波”。与此相对,将是被第一测距传感器接收的接收波、且是起因于从第二测距传感器发送的探测波被障碍物B反射的反射波的接收波称为“间接波”。
第一前声纳SF1被设置在前保险杠13的前侧表面V1中的左端部,以向本车辆10的左前方发送探测波。第二前声纳SF2被设置在前保险杠13的前侧表面V1中的右端部,以向本车辆10的右前方发送探测波。第一前声纳SF1和第二前声纳SF2隔着车辆中心轴线VL对称地配置。
第三前声纳SF3和第四前声纳SF4在前保险杠13的前侧表面V1中的靠中央的位置沿车宽方向排列。第三前声纳SF3在车宽方向上配置在第一前声纳SF1与车辆中心轴线VL之间,以向本车辆10的大致前方发送探测波。第四前声纳SF4在车宽方向上配置在第二前声纳SF2与车辆中心轴线VL之间,以向本车辆10的大致前方发送探测波。第三前声纳SF3和第四前声纳SF4隔着车辆中心轴线VL对称地配置。
如上述那样,第一前声纳SF1和第三前声纳SF3在俯视时配置在相互不同的位置。另外,在车宽方向上相互相邻的第一前声纳SF1和第三前声纳SF3相互被设置成一方发送的探测波被障碍物B反射的反射波能够作为另一方的接收波来接收的位置关系。
即,第一前声纳SF1被配置成能够接收与自己发送的探测波对应的直接波、和与第三前声纳SF3发送的探测波对应的间接波这双方。同样地,第三前声纳SF3被配置成能够接收与自己发送的探测波对应的直接波、和与第一前声纳SF1发送的探测波对应的间接波这双方。
同样地,第三前声纳SF3和第四前声纳SF4在俯视时被配置在相互不同的位置。另外,在车宽方向上相互相邻的第三前声纳SF3和第四前声纳SF4相互被设置成一方发送的探测波被障碍物B反射的反射波能够作为另一方的接收波来接收的位置关系。
同样地,第二前声纳SF2和第四前声纳SF4在俯视时被配置在相互不同的位置。另外,在车宽方向上相互相邻的第二前声纳SF2和第四前声纳SF4相互被设置成一方发送的探测波被障碍物B反射的反射波能够作为另一方的接收波来接收的位置关系。
第一后声纳SR1被设置在后保险杠15的后侧表面V2中的左端部,以向本车辆10的左后方发送探测波。第二后声纳SR2被设置在后保险杠15的后侧表面V2中的右端部,以向本车辆10的右后方发送探测波。第一后声纳SR1和第二后声纳SR2隔着车辆中心轴线VL对称地配置。
第三后声纳SR3和第四后声纳SR4在后保险杠15的后侧表面V2中的靠中央的位置沿车宽方向排列。第三后声纳SR3在车宽方向上配置在第一后声纳SR1与车辆中心轴线VL之间,以向本车辆10的大致后方发送探测波。第四后声纳SR4在车宽方向上配置在第二后声纳SR2与车辆中心轴线VL之间,以向本车辆10的大致后方发送探测波。第三后声纳SR3和第四后声纳SR4隔着车辆中心轴线VL对称地配置。
如上述那样,第一后声纳SR1和第三后声纳SR3在俯视时被配置在相互不同的位置。另外,在车宽方向上相互相邻的第一后声纳SR1和第三后声纳SR3相互被设置成一方发送的探测波被障碍物B反射的反射波能够作为另一方的接收波来接收的位置关系。
即,第一后声纳SR1被配置成能够接收与自己发送的探测波对应的直接波、和与第三后声纳SR3发送的探测波对应的间接波这双方。同样地,第三后声纳SR3被配置成能够接收与自己发送的探测波对应的直接波、和与第一后声纳SR1发送的探测波对应的间接波这双方。
同样地,第三后声纳SR3和第四后声纳SR4在俯视时被配置在相互不同的位置。另外,在车宽方向上相互相邻的第三后声纳SR3和第四后声纳SR4相互被设置成一方发送的探测波被障碍物B反射的反射波能够作为另一方的接收波来接收的位置关系。
同样地,第二后声纳SR2和第四后声纳SR4在俯视时被配置在相互不同的位置。另外,在车宽方向上相互相邻的第二后声纳SR2和第四后声纳SR4相互被设置成一方发送的探测波被障碍物B反射的反射波能够作为另一方的接收波来接收的位置关系。
第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4被设置成从侧面部16的外侧表面亦即车辆侧面V3向本车辆10的侧方发送探测波。第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4分别被设置成仅能接收直接波。
第一侧声纳SS1在前后方向上配置在左侧的车门后视镜18与第一前声纳SF1之间,以向本车辆10的左方发送探测波。第二侧声纳SS2在前后方向上配置在右侧的车门后视镜18与第二前声纳SF2之间,以向本车辆10的右方发送探测波。第一侧声纳SS1和第二侧声纳SS2隔着车辆中心轴线VL对称地设置。
第三侧声纳SS3在前后方向上配置在左后侧的车门板17与第一后声纳SR1之间,以向本车辆10的左方发送探测波。第四侧声纳SS4在前后方向上配置在右后侧的车门板17与第二后声纳SR2之间,以向本车辆10的右方发送探测波。第三侧声纳SS3和第四侧声纳SS4隔着车辆中心轴线VL对称地设置。
多个测距传感器21分别与控制部26电连接。即,多个测距传感器21分别在控制部26的控制下发送探测波,并且产生与接收波的接收结果对应的信号并发送至控制部26。以下将与接收波的接收结果对应的信号所包含的信息称为“接收信息”。接收信息包括与接收波的接收强度相关联的信息、以及与多个测距传感器21的各个与障碍物B之间的距离相关联的信息。和与障碍物B之间的距离相关联的信息包括与从探测波的发送到接收波的接收为止的时间差相关联的信息。
拍摄部22被设置成拍摄本车辆10的周围的图像,来获取与该图像对应的图像信息。在本实施方式中,拍摄部22是数码相机装置,具备CCD等图像传感器。CCD是ChargeCoupled Device(电荷耦合设备)的缩写。
在本实施方式中,在本车辆10搭载有多个拍摄部22,即,前相机CF、后相机CB、左侧相机CL以及右侧相机CR。在未特别指定前相机CF、后相机CB、左侧相机CL以及右侧相机CR中的任意一个的情况下,以下,使用“拍摄部22”这样的单数形式的表现或者“多个拍摄部22”这样的表现。
前相机CF被安装在车体11的前面部12,以获取与本车辆10的前方的图像对应的图像信息。后相机CB被安装在车体11的后面部14,以获取与本车辆10的后方的图像对应的图像信息。左侧相机CL被安装在左侧的车门后视镜18,以获取与本车辆10的左方的图像对应的图像信息。右侧相机CR被安装在右侧的车门后视镜18,以获取与本车辆10的右方的图像对应的图像信息。
多个拍摄部22分别与控制部26电连接。即,多个拍摄部22分别在控制部26的控制下获取图像信息,并且将获取到的图像信息发送至控制部26。
车速传感器23、换档位置传感器24以及转向角传感器25与控制部26电连接。车速传感器23被设置成产生与本车辆10的行驶速度对应的信号并发送至控制部26。以下将本车辆10的行驶速度简称为“车速”。换档位置传感器24被设置成产生与本车辆10的换档位置对应的信号并发送至控制部26。转向角传感器25被设置成产生与本车辆10的转向操纵角对应的信号并发送至控制部26。
控制部26被配置在车体11的内侧。控制部26是所谓的车载微型计算机,具备未图示的CPU、ROM、RAM、非易失性RAM等。非易失性RAM例如是闪存ROM等。以下将控制部26的CPU、ROM、RAM以及非易失性RAM简称为“CPU”、“ROM”、“RAM”以及“非易失性RAM”。
控制部26被构成为通过CPU从ROM或者非易失性RAM读出程序并执行而能够实现各种控制动作。该程序包括与后述的各例程对应的程序。另外,在ROM或者非易失性RAM中预先储存有执行程序时所使用的各种数据。各种数据例如包括初始值、查询表、映射等。
控制部26被构成为基于从多个测距传感器21的各个、多个拍摄部22的各个、车速传感器23、换档位置传感器24、转向角传感器25等接收到的信号以及信息来执行障碍物检知动作。显示器27被配置在本车辆10中的车厢内。显示器27与控制部26电连接,以便在控制部26的控制下进行伴随着障碍物检知动作的显示。
(第一实施方式)
接下来,除了图1之外还参照图2,对第一实施方式中的障碍物检知装置20以及控制部26的功能模块构成进行说明。控制部26被构成为基于利用测距传感器21得到的接收波的接收结果、利用拍摄部22得到的图像的拍摄结果、从车速传感器23等各种传感器接收到的各种信号来检知障碍物B。具体而言,如图2所示,控制部26具备车辆状态获取部260、位置获取部261、形状识别部262以及检知处理部263,作为功能上的构成。
车辆状态获取部260被设置成通过从图1所示的车速传感器23、换档位置传感器24、转向角传感器25等接收各种信号,来获取与本车辆10的行驶状态对应的行驶状态信息。行驶状态信息包括车速、转向操纵角、换档位置等。行驶状态信息也包括本车辆10停止中,即车速为0km/h的情况。在本实施方式中,车辆状态获取部260是被设置在车速传感器23等各种传感器与CPU之间的接口,将从车速传感器23等各种传感器接收到的各种信号或者对相关信号实施了规定的处理后的信号发送至CPU。此外,为了简化图示,在图2中,省略车速传感器23等各种传感器的图示。
在障碍物检知装置20检知位于本车辆10的前方的障碍物B的情况下,将第一前声纳SF1、第二前声纳SF2、第三前声纳SF3以及第四前声纳SF4中的相互相邻的任意两个设为第一测距传感器以及第二测距传感器。与此相对,在障碍物检知装置20检知位于本车辆10的后方的障碍物B的情况下,对于第一测距传感器以及第二测距传感器而言,将第一后声纳SR1、第二后声纳SR2、第三后声纳SR3以及第四后声纳SR4中的相互相邻的任意两个设为第一测距传感器以及第二测距传感器。
位置获取部261被设置成通过基于第一测距传感器以及第二测距传感器将第一测距传感器发送的探测波被障碍物B反射的反射波作为接收波接收的情况下的、第一测距传感器以及第二测距传感器的位置的三角测量,来获取与本车辆10和障碍物B的位置关系对应的相对位置信息。即,位置获取部261基于多个测距传感器21的各个的输出来获取相对位置信息。
相对位置信息是与基于多个测距传感器21的各个中的接收波而获取的障碍物B相对于本车辆10的相对位置对应的信息。相对位置信息包括距离信息以及方位信息。距离信息是与障碍物B距本车辆10的距离对应的信息。方位信息是与障碍物B相对于本车辆10的方位、即从本车辆10朝向障碍物B的有向线段与车辆中心轴线VL所成的角对应的信息。
形状识别部262被设置成基于由拍摄部22获取到的图像信息和由车辆状态获取部260获取到的行驶状态信息来执行障碍物B的形状识别。具体而言,在本实施方式中,形状识别部262被构成为通过基于伴随着本车辆10的移动而按时间序列获取到的多个图像信息获取图像信息中的多个特征点的三维位置,来识别障碍物B的三维形状。即,形状识别部262基于在车辆10的移动中由拍摄部22依次拍摄到的多个图像,三维识别图像中的物体等中的特征形状。
特征形状包括水平边缘、垂直边缘等直线边缘。“直线边缘”是在图像中与物体的外形线等对应地连续规定以上的长度的像素列。“水平边缘”是指在图像中与水平线平行的直线边缘。“垂直边缘”是指在图像中与垂直线平行的直线边缘。“物体的外形线等”不仅包括障碍物B的外形线,还包括划分线等显示物中的外形线。
具体而言,形状识别部262被构成为能够通过所谓的移动立体技术或者SFM技术三维识别特征形状。SFM是Structure From Motion(从运动求取结构)的缩写。对于移动立体技术以及SFM技术,在本申请的申请时,已经公知或者众所周知。因而,在本说明书中,省略与移动立体技术以及SFM技术有关的详细的说明。
检知处理部263被设置成基于由位置获取部261获取到的相对位置信息和形状识别部262的形状识别结果来检知障碍物B。具体而言,在本实施方式中,检知处理部263被构成为在形状识别部262的形状识别结果中的障碍物B的高度尺寸小于规定尺寸的情况下,废弃与该障碍物B对应的相对位置信息。
(动作概要)
以下,参照图1~图6,对障碍物检知装置20、即控制部26中的动作的概要进行说明。此外,在以下的动作说明中,为了避免图示以及说明的复杂化,设为本车辆10正向前方直线前进,适当地省略各部的图示。
图3、图4A以及图4B表示本车辆10检知存在于前方的障碍物B的样子。如图3所示,障碍物检知装置20使用第一前声纳SF1、第二前声纳SF2、第三前声纳SF3以及第四前声纳SF4来检知存在于前方的障碍物B。另外,障碍物检知装置20使用前相机CF来识别存在于前方的障碍物B的三维形状。
此外,在本车辆10后退的情况下,障碍物检知装置20使用第一后声纳SR1、第二后声纳SR2、第三后声纳SR3以及第四后声纳SR4来检知存在于后方的障碍物B。另外,障碍物检知装置20使用后相机CB来识别存在于后方的障碍物B的三维形状。然而,后退时的障碍物检知动作基本上与前进时相同。因而,以下,以前进时的障碍物检知动作为例,对障碍物检知装置20的动作概要进行说明。
图3表示障碍物B在车宽方向上位于第三前声纳SF3与第四前声纳SF4之间的情况。该情况下,通过由第三前声纳SF3以及第四前声纳SF4接收从第三前声纳SF3或者第四前声纳SF4发送的探测波WS被障碍物B的壁面BW反射的反射波,从而获取障碍物B相对于本车辆10的相对位置。以下,假设从第三前声纳SF3发送探测波WS,由第三前声纳SF3接收与该探测波WS对应的接收波WR1,并且由第四前声纳SF4接收与该探测波WS对应的接收波WR2的情况,来继续动作概要的说明。
第三前声纳SF3中的直接波亦即接收波WR1通过从第三前声纳SF3发送的探测波WS被障碍物B的壁面BW反射而被第三前声纳SF3接收。另一方面,第四前声纳SF4中的间接波亦即接收波WR2通过从第三前声纳SF3发送的探测波WS被障碍物B的壁面BW反射而被第四前声纳SF4接收。
将从第三前声纳SF3中的探测波WS的发送时刻到接收波WR1的接收时刻为止的所需时间设为T1。将从第三前声纳SF3中的探测波WS的发送时刻到第四前声纳SF4中的接收波WR2的接收时刻为止的所需时间设为T2。将音速设为c。该情况下,如果将从第三前声纳SF3到障碍物B的壁面BW为止的、沿着接收波WR1的传播方向的距离设为D1,则D1=0.5T1×c。另外,如果将从第四前声纳SF4到障碍物B的壁面BW为止的、沿着接收波WR2的传播方向的距离设为D2,则D2=(T2-0.5T1)×c。
如果将被推断为反射探测波WS的、障碍物B的壁面BW上的点设为“检测点P”,则D1是从第三前声纳SF3到检测点P为止的距离,D2是从第四前声纳SF4到检测点P为止的距离。本车辆10中的第三前声纳SF3以及第四前声纳SF4的水平位置是固定的。因而,使用第三前声纳SF3以及第四前声纳SF4的水平位置、和计算出的距离D1以及D2,并通过三角测量来获取检测点P相对于本车辆10的相对位置。
本车辆10向前方行进中的能够行进距离DC是从前侧表面V1到检测点P为止的、本车辆10的行进方向上的水平距离。如图3所示,在本车辆10直线前进中的情况下,能够行进距离DC成为前后方向上的从前侧表面V1到检测点P为止的距离。此外,能够行进距离DC在本车辆10直线前进的情况下最小。因而,从处理负荷减少等的观点来看,本车辆10向前方行进中的能够行进距离DC即使不管转向操纵角如何都设为前后方向上的从前侧表面V1到检测点P为止的距离,也毫无关系。
图4A表示本车辆10朝向高度尺寸较大的障碍物B行进的样子。图4B表示本车辆10朝向高度尺寸较小的障碍物B行进的样子。图4A所示那样的高度尺寸较大的障碍物B例如是墙壁等。图4B所示那样的高度尺寸较小的障碍物B、即从路面RS的突出高度较低的障碍物B例如是台阶、路缘石等。
此外,本实施方式中的障碍物B的高度尺寸相当于障碍物B从路面RS的突出高度,即车高方向上的障碍物B从路面RS的突出长度。该障碍物B的高度尺寸也可以被称为车高方向上的障碍物B的基端部与前端部之间的距离。在图4A以及图4B的例子中,基端部与下端部对应,前端部与上端部对应。
在图4A以及图4B中,表示能够行进距离DC的箭头是本车辆10与障碍物B之间的水平距离,是俯视时的本车辆10与障碍物B之间的最短距离。规定能够行进距离DC的方向与路面RS平行。但是,车高方向、即上下方向可能有根据路面RS的倾斜状态而不与重力作用方向平行的情况。
测距传感器21被安装在车体11上。车体11位于比路面RS靠上方。因而,测距传感器21的搭载高度、即测距传感器21的车高方向上的搭载位置成为车高方向上的测距传感器21距路面RS的距离。
以下,将测距传感器21的搭载高度称为“传感器搭载高度”。传感器搭载高度成为与车体11距路面RS的距离、和测距传感器21在车体11上的搭载位置对应的规定值。具体而言,传感器搭载高度是在与水平面平行的路面RS上载置本车辆10的情况下的、测距传感器21的搭载位置距路面RS的高度。
如图4A所示,在高度尺寸大于传感器搭载高度的障碍物B的情况下,在与测距传感器21相同的高度存在障碍物B的壁面BW。因而,到达测距传感器21的接收波WR与规定水平距离的方向平行地传播。因此,在这种情况下,使用测距传感器21所获取到的障碍物B的距离信息会成为与实际的本车辆10与障碍物B之间的水平距离、即能够行进距离DC对应的、基本准确的信息。
另一方面,如图4B所示,在高度尺寸小于传感器搭载高度的障碍物B的情况下,障碍物B的上端部处于比测距传感器21低的位置。即,在与测距传感器21相同的高度不存在障碍物B的壁面BW。该情况下,到达测距传感器21的接收波WR从障碍物B的下端部朝向测距传感器21向斜上方传播。因此,在高度尺寸小于传感器搭载高度的障碍物B的情况下,使用测距传感器21所获取到的障碍物B的距离信息成为包括较大的误差的不准确的信息。
另外,存在上述那样的、高度尺寸小于传感器搭载高度的障碍物B是突出高度低到本车辆10能够直接越过的程度的物体的情况。这样的物体的例子例如是5cm左右的较低的台阶、窨井的盖等。由于这样的障碍物B不会对本车辆10的行驶造成任何的妨碍,所以识别为驾驶辅助动作中的“障碍物”的必要性较低。
因此,在本实施方式中,障碍物检知装置20在使用了前相机CF的形状识别结果中的障碍物B的高度尺寸是规定尺寸以上的情况下,使与该障碍物B对应的相对位置信息有效化,并储存至非易失性RAM。与此相对,障碍物检知装置20在使用了前相机CF的形状识别结果中的障碍物B的高度尺寸小于规定尺寸的情况下,使与该障碍物B对应的相对位置信息无效化,并废弃。
由此,可以尽可能地抑制将突出高度低到对本车辆10的行驶无障碍且能够直接越过的程度的物体识别为障碍物B而造成的、不必要的报告动作等。用于抑制这种物体的误识别的、上述“规定高度”例如可以设定为5~10cm左右。
(动作例)
以下,使用流程图,对根据本实施方式的结构的、与上述的动作概要对应的具体的动作例进行说明。此外,在附图以及说明书中的以下的说明中,将“步骤”简单地略记为“S”。
图5是表示基于由拍摄部22获取到的图像信息的、障碍物B的形状识别动作的一个例子的流程图。图5所示的图像识别例程与形状识别部262的动作对应。在后述的第二实施方式~第四实施方式中,也同样地执行该图像识别例程。该图像识别例程在规定的启动条件成立后,按规定时间间隔由CPU启动。
若图5所示的图像识别例程被启动,则首先,在S501中,CPU从拍摄部22获取图像信息。另外,CPU将获取到的图像信息按时间序列储存至非易失性RAM。
接下来,在S502中,CPU使用移动立体技术或者SFM技术来执行形状识别部262的图像识别动作。由此,图像中的物体等的三维形状被识别。具体而言,例如,能够识别障碍物B的高度等。接着,在S503中,CPU将形状识别部262的图像识别结果储存至非易失性RAM,并暂时结束本例程。
图6是表示基于由相邻的两个测距传感器21获取到的相对位置信息、和由拍摄部22获取到的图像信息的、障碍物B的检知动作的一个例子的流程图。图6所示的障碍物检知例程与位置获取部261以及检知处理部263的动作对应。在后述的第二实施方式以及第三实施方式中也同样地执行该障碍物检知例程。该障碍物检知例程在规定的启动条件成立后,按规定时间间隔由CPU启动。
若图6所示的障碍物检知例程被启动,则首先,在S601中,CPU选择相邻的两个测距传感器21,从选择出的两个测距传感器21获取接收信息。在上述的例子中,相邻的两个测距传感器21是第三前声纳SF3以及第四前声纳SF4。即,在S601中,从第三前声纳SF3发送探测波,由第三前声纳SF3以及第四前声纳SF4接收接收波。
接下来,在S602中,CPU判定是否相邻的两个测距传感器21中的接收波的强度都是规定的阈值以上。在相邻的两个测距传感器21中的接收波的强度都是规定的阈值以上这个条件不成立的情况下(即S602=否),上述的三角测量不成立。因而,该情况下,CPU全部跳过S603及其之后的处理,并暂时结束本例程。
以下,设为相邻的两个测距传感器21中的接收波的强度都是规定的阈值以上这个条件成立(即S602=是),继续进行本例程的说明。该情况下,CPU使处理进入S603及其之后。
在S603中,CPU基于获取到的接收信息来获取障碍物B的相对位置信息。在上述的例子中,在S603中,CPU获取与障碍物B对应的检测点P。接下来,在S604中,CPU获取到障碍物B为止的距离。在上述的例子中,在S604中,CPU获取能够行进距离DC。在S603以及S604中获取到的相对位置信息以及能够行进距离DC暂时被储存至非易失性RAM。
接着,在S605中,CPU基于非易失性RAM中储存的图像识别结果来获取与阈值以上的强度的接收波对应的障碍物B的高度H。另外,在S606中,CPU判定在S605中获取到的高度H是否小于规定高度Hth1。规定高度Hth1例如是5cm。
在高度H小于规定高度Hth1的情况下(即S606=是),CPU使处理进入到S607后,暂时结束本例程。在S607中,CPU使在本次S603以及S604中获取到的相对位置信息以及能够行进距离DC无效化,并废弃。即,CPU消除在本次S603以及S604中获取到的相对位置信息以及能够行进距离DC的非易失性RAM中的记录。
另一方面,在高度H为规定高度Hth1以上的情况下(即S606=否),CPU跳过S607的处理,并暂时结束本例程。该情况下,同与阈值以上的强度的接收波对应且具有规定高度Hth1以上的高度尺寸的障碍物B有关的、相对位置信息以及能够行进距离DC用于本车辆10的行驶辅助动作。
(第二实施方式)
以下,对第二实施方式的障碍物检知装置20进行说明。在以下的第二实施方式的说明中,以与上述的第一实施方式的不同点为主进行说明。另外,在第二实施方式和上述的第一实施方式中,对相互相同或者等同的部分附加相同的附图标记。因此,在以下的第二实施方式的说明中,关于具有与上述的第一实施方式相同的附图标记的构成要素,除非在技术上矛盾或者另有特殊的附加说明,否则能够适当地引用上述第一实施方式中的说明。在后述的第三实施方式等中也是同样的。
本实施方式的结构与上述的第一实施方式的结构相同。本实施方式与使用了第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4的障碍物B的检知动作对应。
参照图7,第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4输出和与位于本车辆10的侧方的障碍物B之间的距离对应的信号。另外,左侧相机CL以及右侧相机CR获取与本车辆10的侧方的图像对应的图像信息。在将障碍物检知装置20使用于停车辅助动作时,它们用于停车空间检测等。
如上述那样,第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4的各个能够通过直接波来检知与所对置的障碍物B之间的距离。另外,障碍物检知装置20能够通过使用第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4,来识别位于本车辆10的侧方的障碍物B的形状。
图7例示在第二侧声纳SS2以及右侧相机CR的右侧存在障碍物B的情况。以下,使用图7的例子,对位于本车辆10的右方的障碍物B的检知动作的概要进行说明。
如图7所示,第二侧声纳SS2通过将自己发送的探测波WS被障碍物B反射的反射波作为接收波WR接收,从而输出和与该障碍物B之间的距离对应的信号。障碍物检知装置20在本车辆10的行驶中,基于第二侧声纳SS2按规定时间间隔反复接收到的接收波WR,反复获取与障碍物B之间的距离DD。规定时间例如是数百毫秒。另外,障碍物检知装置20基于本车辆10的行驶状态信息、和探测波WS的发送时刻或者接收波WR的接收时刻来获取声纳位置、即与多个距离DD的各个对应的第二侧声纳SS2的位置。
障碍物检知装置20能够基于如上述那样获取到的多个距离DD、和与这些多个距离DD的各个对应的声纳位置概要地推断障碍物B的俯视时的外形形状。例如,障碍物检知装置20将多个距离DD识别为横轴为声纳位置、纵轴为距离DD的二维坐标上的点列。障碍物检知装置20通过针对这些点列执行基于三角测量法的规定的处理,从而推断与多个距离DD的各个对应的反射点PR。
反射点PR是被推断为反射接收波WR的障碍物B上的位置的位置。即,反射点PR是与通过一次的接收波WR的接收所获取到的距离DD对应的、虚拟的障碍物B上的位置。根据包括多个反射点PR的点列,概要地推断障碍物B的俯视时的外形形状。反射点PR是障碍物B中的、被推断为与本车辆10对置的壁面BW上的点的点,与障碍物B的相对位置信息对应。
此外,对于上述那样的、使用了直接波的、障碍物B的俯视时的外形形状的推断,在本申请的申请时已经众所周知。例如,参照美国专利第7739046号说明书、美国专利第7843767号说明书、美国专利第8130120号说明书等。
另外,障碍物检知装置20能够基于在本车辆10的行驶中的不同的时刻获取到的、第二侧声纳SS2中的声纳位置以及距离DD,并通过三角测量,来获取反射点PR。图8表示这样的反射点PR的获取例子的概要。
即,参照图8,实线所示的第二侧声纳SS2的位置表示本次的接收波WR的接收时的第二侧声纳SS2的位置。另一方面,虚线所示的第二侧声纳SS2的位置表示前一次的接收波WR的接收时的第二侧声纳SS2的位置。将本次设为第N次,将前一次设为第N-1次。另外,将前一次获取到的距离DD设为DD(N-1),将本次获取到的距离DD设为DD(N)。
获取前一次的距离DD(N-1)的时刻与获取本次的距离DD(N)的时刻的时间间隔如上述那样足够小。因此,能够假设与距离DD(N-1)对应的反射探测波的壁面BW的位置、和与距离DD(N)对应的反射探测波的壁面BW的位置相同。因此,障碍物检知装置20获取以获取距离DD(N-1)的时刻的第二侧声纳SS2的位置为中心且半径为距离DD(N-1)的第一圆、与以获取距离DD(N)的时刻的第二侧声纳SS2的位置为中心且半径为距离DD(N)的第二圆的交点,作为反射点PR。
如上述那样,障碍物检知装置20能够通过使用第一侧声纳SS1、第二侧声纳SS2、第三侧声纳SS3以及第四侧声纳SS4,来获取与位于本车辆10的侧方的障碍物B有关的相对位置信息以及俯视时的概要的形状。然而,关于障碍物B的高度,是不详的。
另一方面,障碍物检知装置20能够使用左侧相机CL以及右侧相机CR来获取障碍物B的高度。具体而言,如图7所示,在障碍物B存在于本车辆10的右侧的情况下,障碍物检知装置20能够使用右侧相机CR来获取障碍物B的高度。即,例如,障碍物检知装置20能够通过上述那样的移动立体技术或者SFM技术等图像处理技术来识别障碍物B的高度。
图7示出障碍物检知装置20在本车辆10的右侧搜索停车空间的状况。在该状况下,可能有障碍物B是突出高度低到本车辆10能够直接地越过的程度的物体的情况。作为这种的物体的例子,例如列举5cm左右低的台阶、窨井的盖等。
该情况下,该障碍物B在停车辅助动作中实际上不会成为障碍物。即,能够将包括该障碍物B的区域设定为停车空间。另外,即使该障碍物B存在于到停车空间的停车路径上,也没有任何妨碍。因此,无需保持与该障碍物B对应的相对位置信息。
因此,障碍物检知装置20在使用了左侧相机CL以及右侧相机CR的形状识别结果中的障碍物B的高度尺寸是规定尺寸以上的情况下,使与该障碍物B对应的相对位置信息有效化,并储存至非易失性RAM。与此相对,障碍物检知装置20在使用了左侧相机CL以及右侧相机CR的形状识别结果中的障碍物B的高度尺寸小于规定尺寸的情况下,使与该障碍物B对应的相对位置信息无效化,并废弃。根据本实施方式,能够实现更适当的停车辅助动作,并且能够减少CPU中的计算负荷以及非易失性RAM中的存储容量。
(第三实施方式)
以下,对第三实施方式的障碍物检知装置20进行说明。在以下的第三实施方式的说明中,也以与上述的第一实施方式的不同点为主进行说明。
本实施方式的结构与上述的第一实施方式的结构相同。如图9所示,本实施方式与本车辆10一边接近以相对于车辆中心轴线VL倾斜的方式竖立设置的壁状的障碍物B一边行进的情况下的、障碍物B的检知动作对应。以下,将该情况下的障碍物B称为“倾斜壁”。
此外,在图9的例子中,为了简化说明,假设本车辆10正向前方直线前进,作为倾斜壁的障碍物B存在于本车辆10的右前方。另外,在图中,用双点划线表示第二前声纳SF2以及第四前声纳SF4的能够检知范围。
在图9的例子中,倾斜壁中的物体中心轴BL与车辆中心轴线VL交叉。在俯视时,物体中心轴BL是沿着车辆行进方向的障碍物B的中心轴。在该例子中,在俯视时,物体中心轴BL与障碍物B中的与本车辆10对置的壁面BW平行。
如图9所示,可能有由于物体中心轴BL与车辆中心轴线VL所成的角度变小,而作为倾斜壁的障碍物B仅存在于第二前声纳SF2的能够检知范围的情况。该情况下,能接收第二前声纳SF2中的直接波,而不能接收第二前声纳SF2以及第四前声纳SF4中的间接波。即,该情况下,利用第二前声纳SF2以及第四前声纳SF4的三角测量不成立。
在图9所示的例子中,基于第二前声纳SF2中的直接波来获取与障碍物B对应的相对位置信息。该直接波是由第二前声纳SF2接收的接收波WR,起因于从第二前声纳SF2发送的探测波WS被障碍物B反射的反射波。
具体而言,例如,障碍物检知装置20能将第二前声纳SF2的能够检知范围中的、俯视时最右侧的位置推断为检测点P。或者,例如,障碍物检知装置20能将探测波WS的中心轴线上的位置推断为检测点P。或者,例如,障碍物检知装置20能够与上述的第二实施方式同样地基于不同的时刻的第二前声纳SF2的位置和检知距离来推断检测点P。
这样的相对位置信息不是基于第一间接波而获取的,该第一间接波是由第二前声纳SF2接收的接收波并起因于从第四前声纳SF4发送的探测波被障碍物B反射的反射波。另外,该相对位置信息不是基于第二间接波而获取的,该第二间接波是由第四前声纳SF4接收的接收波并起因于从第二前声纳SF2发送的探测波被障碍物B反射的上述反射波。因而,以下,将这样的相对位置信息表现为“仅基于第二前声纳SF2中的直接波”。
仅基于第二前声纳SF2中的直接波的、与障碍物B的壁面BW之间的检知距离其本身有可能无法利用于本车辆10的驾驶辅助。但是,可以基于基于由前相机CF获取到的图像信息的形状识别结果、和仅基于第二前声纳SF2中的直接波的检知距离,来推断作为倾斜壁的障碍物B中的行进方向前方的端部BE的相对位置信息。因而,即使基于由拍摄部22获取到的图像信息的形状识别结果中的障碍物B的高度尺寸是规定尺寸以上,在检测点P是仅基于第二前声纳SF2中的直接波的点的情况下,障碍物检知装置20也识别出障碍物B是倾斜壁。
在本实施方式中,第二前声纳SF2以及第四前声纳SF4被设置在本车辆10的行进方向侧的面亦即前面部12。另外,障碍物检知装置20、即图2所示的检知处理部263在使用了前相机CF的形状识别结果中的障碍物B的高度尺寸是规定尺寸以上、且获取到的相对位置信息仅基于第二前声纳SF2中的直接波的情况下,识别出障碍物B是倾斜壁。该倾斜壁具有与本车辆10的车辆中心轴线VL交叉的壁面BW,有可能伴随着本车辆10的行驶而壁面BW接近本车辆10。
在识别出障碍物B是倾斜壁的情况下,障碍物检知装置20执行规定的处理。规定的处理例如是与上述的第一实施方式同样地使与障碍物B对应的相对位置信息无效化并废弃的处理。或者,规定的处理例如是通过显示器27等向本车辆10的驾驶员报告前方的倾斜壁的存在的处理。或者,规定的处理例如是在基于图像信息的形状识别结果中搜索通过检测点P的附近且向前方延伸的直线边缘,形成从检测点P沿着该直线边缘的延长线,将与该延长线交叉的垂直边缘的相对位置推断为端部BE的相对位置。
(动作例)
图10是表示与本实施方式对应的具体的动作例的流程图。图10所示的障碍物识别例程在规定的启动条件成立后,按规定时间间隔由CPU启动。此外,作为图10所示的障碍物识别例程被启动的前提,设为已经执行图5所示的图像识别例程以及图6所示的障碍物检知例程。
并且,在本实施方式中,图6所示的障碍物检知例程中的S602的判定内容成为选择的相邻的两个测距传感器21中的任意一方的接收波的强度是否是规定的阈值以上的判定。即,在本实施方式中,在仅选择的相邻的两个测距传感器21中的一方的直接波具有规定的阈值以上的强度的情况下,也执行S603以及S604的处理。因而,在这种情况下,也如上述那样,基于直接波来获取包括到障碍物B为止的距离的障碍物B的相对位置信息。
若图10所示的障碍物识别例程被启动,则首先,在S1001中,CPU判定是否有效地获取到与障碍物B之间的距离。即,在S1001中,CPU针对获取到相对位置信息的障碍物B,判定是否高度H为规定高度Hth1以上且相对位置信息暂时被有效化。
在没有有效地获取到与障碍物B之间的距离的情况下(即S1001=否),CPU全部跳过S1002以后的处理,并暂时结束本例程。另一方面,在有效地获取到与障碍物B之间的距离的情况下(即S1001=是),CPU使处理进入S1002及其之后。
在S1002中,CPU判定获取到的距离是否仅基于第一前声纳SF1或者第二前声纳SF2中的直接波。在仅基于第二前声纳SF2中的直接波获取到与障碍物B之间的距离的情况下,如图9所示,障碍物B是位于本车辆10的左前方的倾斜壁。另一方面,在仅基于第一前声纳SF1中的直接波获取到与障碍物B之间的距离的情况下,障碍物B是位于本车辆10的左前方的倾斜壁。
在获取到的距离仅基于直接波的情况下(即S1002=是),CPU使处理进入S1003后,暂时结束本例程。在S1003中,CPU识别为本次检知到的障碍物B是倾斜壁,执行上述那样的规定的处理。另一方面,在获取到的距离基于间接波的情况下(即S1002=否),CPU跳过S1003的处理,暂时结束本例程。
(第四实施方式)
接下来,参照图11,对第四实施方式的障碍物检知装置20以及控制部26的功能模块构成进行说明。在以下的第四实施方式的说明中,也以与上述的第一实施方式的不同点为主进行说明。此外,在第一实施方式和第四实施方式中,图1的结构是共用的。因而,在以下的第四实施方式的说明中,可以适当地参照图1以及图3。
如图1所示,本实施方式的障碍物检知装置20也被构成为通过搭载于本车辆10来检知存在于本车辆10的外侧的障碍物B。参照图1,本实施方式的障碍物检知装置20具备测距传感器21、拍摄部22、车速传感器23、换档位置传感器24、转向角传感器25、控制部26以及显示器27。测距传感器21以及拍摄部22与上述的第一实施方式相同。
障碍物检知装置20具备至少一个测距传感器21。控制部26被构成为基于利用测距传感器21得到的接收波的接收结果、利用拍摄部22得到的图像的拍摄结果、从车速传感器23等各种传感器接收到的各种信号,来检知障碍物B。具体而言,如图11所示,控制部26具备车辆状态获取部260、距离获取部264、形状识别部265以及距离修正部266,作为功能上的构成。
距离获取部264被设置成基于测距传感器21的输出来获取与障碍物B距本车辆10的距离对应的距离信息。具体而言,距离获取部264与上述的各实施方式同样地被构成为能够获取与障碍物B之间的距离。
形状识别部265被设置成基于由拍摄部22获取到的图像信息来执行障碍物B的形状识别。即,形状识别部265与上述的第一实施方式中的形状识别部262同样地具有从按时间序列获取到的多个图像信息识别物体的三维形状的功能。
距离修正部266被设置成在形状识别部265的形状识别结果中的障碍物B的高度尺寸小于规定尺寸的情况下,基于传感器搭载高度对与该障碍物B对应的距离信息进行修正。上述“规定尺寸”如后述那样例如可以设定为10~25cm左右。
(动作概要)
图12A表示本车辆10朝向高度尺寸较大的障碍物B、即从路面RS的突出高度比测距传感器21的搭载高度足够高的障碍物B行进的样子。
图12A所示那样的、高度尺寸较大的障碍物B例如是墙壁等。如图12A所示,在障碍物B的高度尺寸较大,在与测距传感器21相同的高度存在障碍物B的壁面BW的情况下,使用了测距传感器21的障碍物B的距离信息会成为与实际的本车辆10与障碍物B之间的水平距离对应的、基本准确的信息。
图12B以及图12C表示使图12A中的障碍物B的高度低于传感器搭载高度的情况下的样子。图12B以及图12C所示那样的、高度尺寸较小的障碍物B例如是台阶、车挡、路缘石等。图12C表示与图12B所示的状态相比,本车辆10更接近障碍物B的状态。
如图12B所示,在障碍物B的高度尺寸较小,在与测距传感器21相同的高度不存在障碍物B的壁面BW的情况下,使用了测距传感器21的障碍物B的距离信息可能包括相对于实际的本车辆10与障碍物B之间的水平距离不能够忽略的程度的误差。并且,从图12B和图12C的对比可知,障碍物B距本车辆10的实际的水平距离越小,则距离信息的误差越大。
因此,在本实施方式中,距离修正部266在形状识别部265的形状识别结果中的障碍物B的高度尺寸小于规定尺寸的情况下,对由距离获取部264获取到的与障碍物B之间的距离进行修正。由此,能够更准确地进行从路面RS的突出高度较低的障碍物B相对于本车辆10的相对位置的识别。作为这种障碍物B的例子,例如列举车挡、路缘石等。因此,为了修正这种障碍物B中的距离信息的上述“规定高度”例如可以设定为10~25cm左右。
图13A以及图13B表示距离修正部266的距离修正的概要。此外,在该例子中,假设障碍物B在车宽方向上位于第三前声纳SF3与第四前声纳SF4之间。以下,使用图13A以及图13B的例子,对检知距离的获取以及修正的概要进行说明。
距离获取部264通过使用了第三前声纳SF3和第四前声纳SF4的三角测量获取从安装有与障碍物B对置的测距传感器21的本车辆10的端面到障碍物B之间的水平距离。在该例子中,本车辆10的端面是前保险杠13的前侧表面V1。获取的水平距离是能够行进距离DC。
假设,在如图12A所示那样,障碍物B中的上端部的高度比第三前声纳SF3以及第四前声纳SF4的传感器搭载高度足够高的情况下,由距离获取部264获取到的能够行进距离DC成为准确的水平距离。与此相对,在如图13B所示那样,障碍物B中的上端部的高度低于传感器搭载高度的情况下,由距离获取部264获取到的能够行进距离不能成为准确的水平距离,在侧视时,成为倾斜方向的距离DC0。将该DC0称为“修正前距离”。
修正前距离DC0相当于将与应获取的修正后的能够行进距离DC相当的长度设为底边、将高度设为SH的直角三角形的斜边。SH是车高方向上的、障碍物B的基端部位置与第三前声纳SF3以及第四前声纳SF4的传感器搭载位置之间的距离。SH可以同样看待为传感器搭载高度。距离修正部266在形状识别部265的形状识别结果中的障碍物B的高度尺寸小于规定尺寸的情况下,对获取到的水平距离、即能够行进距离DC进行修正。即,距离修正部266可以通过算式DC=(DC02-SH2)1/2计算修正后的能够行进距离DC。
(动作例)
图14是表示与本实施方式对应的具体的动作例的流程图。图14所示的障碍物检知例程在规定的启动条件成立后,按规定时间间隔由CPU启动。此外,作为图14所示的障碍物识别例程被启动的前提,设为已经执行图5所示的图像识别例程。即,图14所示的障碍物检知例程是变更图6所示的障碍物检知例程的一部分而得到的。
图14所示的障碍物检知例程在规定的启动条件成立后,按规定时间间隔由CPU启动。在图14所示的障碍物检知例程中,S601~S603与图6所示的障碍物检知例程中的处理相同。因而,省略与S601~S603有关的说明。
在S603的处理之后,CPU执行S1404的处理。在S1404中,CPU获取能够行进距离DC。此外,在后述的S1406的判定为是且执行S1407的修正处理的情况下,在S1404中获取到的能够行进距离DC相当于上述的修正前距离DC0。
在S1404的处理之后,CPU执行S1405的处理。在S1405中,CPU基于非易失性RAM中储存的图像识别结果来获取与阈值以上的强度的接收波对应的障碍物B的高度H。即,S1405的处理内容与图6所示的障碍物检知例程中的S605的处理相同。
在S1405的处理之后,CPU执行S1406的处理。在S1406中,CPU判定在S1405中获取到的高度H是否小于规定高度Hth2。规定高度Hth2例如是20cm。即,本实施方式中的处理是在障碍物B具有的高度尺寸低于传感器搭载高度且另一方面是本车辆10不能够越过的程度的高度尺寸的情况下进行能够行进距离DC的修正的处理。因此,成为S1406的判定的阈值的规定高度Hth2是考虑到传感器搭载高度而设定的,通常为大于S606中的阈值Hth1的值。
在S1405中获取到的高度H小于规定高度Hth2的情况下(即S1406=是),CPU执行S1407的处理后,暂时结束本例程。在S1407中,CPU将S1404中获取到的能够行进距离作为修正前距离DC0,并通过算式DC=(DC02-SH2)1/2计算修正后的能够行进距离DC。另一方面,在S1405中获取到的高度H为规定高度Hth2以上的情况下(即S1406=否),CPU跳过S1407的处理,并暂时结束本例程。
(第五实施方式)
接下来,对第五实施方式的障碍物检知装置20进行说明。本实施方式相当于同使用了移动立体技术或者SFM技术的第四实施方式相比,减少图像识别的处理负荷的方式。
本实施方式的功能模块构成与第四实施方式相同。因而,在本实施方式的结构的说明中,可以适当地参照图1以及图11、及与这些图有关的说明。另外,在本实施方式的动作概要的说明中,可以适当地参照图12A~图13B、及与这些图有关的说明。在以下的第五实施方式的说明中,也以与上述的第四实施方式的不同点为主进行说明。
形状识别部265被设置成基于由拍摄部22获取到的图像信息来执行障碍物B的形状识别。但是,在本实施方式中,形状识别部265与第一实施方式~第四实施方式不同,具有从与一枚图像对应的图像信息提取物体的特征形状的功能、和识别纹理图像中的模样的功能。
即,形状识别部265提取与由距离获取部264获取到的距离信息对应的直线边缘。另外,形状识别部265基于提取出的直线边缘的周围的纹理图像来识别与上述的直线边缘对应的障碍物B。具体而言,形状识别部265通过对隔着一条直线边缘而相邻的两个图像区域中的纹理图像进行对比,来判定与上述的直线边缘对应的障碍物B是否是高度尺寸较小的台阶。以下,将该台阶称为“低台阶”。
这样,在本实施方式中,形状识别部265能够基于由拍摄部22获取到的图像信息简单地判定障碍物B是否是低台阶。在由形状识别部265识别为障碍物B是低台阶的情况下,距离修正部266对与该障碍物B对应的距离信息进行修正。距离信息的修正与上述的第四实施方式相同。
(动作例)
图15~图17是表示与本实施方式对应的具体的动作例的流程图。图15所示的距离获取例程与距离获取部264的动作对应。该距离获取例程在规定的启动条件成立后,按规定时间间隔由CPU启动。
若图15所示的距离获取例程被启动,则首先,在S1501中,CPU选择相邻的两个测距传感器21,并从选择出的两个测距传感器21获取接收信息。接下来,在S1502中,CPU判定相邻的两个测距传感器21中的接收波的强度是否都是规定的阈值以上。
在相邻的两个测距传感器21中的接收波的强度都是规定的阈值以上这个条件不成立的情况下(即S1502=否),上述的三角测量不成立。因而,该情况下,CPU跳过S1503以及S1504的处理,并暂时结束本例程。另一方面,在相邻的两个测距传感器21中的接收波的强度都是规定的阈值以上这个条件成立的情况下(即S1502=是),CPU执行S1503以及S1504的处理后,暂时结束本例程。
在S1503中,CPU基于获取到的接收信息来获取障碍物B的相对位置信息。具体而言,如图13A所示,CPU获取与障碍物B对应的检测点P。接下来,在S1504中,CPU获取与障碍物B对应的距离信息。即,在S1504中,CPU获取能够行进距离DC。另外,CPU在S1503以及S1504中将获取结果储存至非易失性RAM。
图16所示的图像识别例程与形状识别部265的动作的一部分对应。该图像识别例程在规定的启动条件成立后,按规定时间间隔由CPU启动。
若图16所示的图像识别例程被启动,则首先,在S1601中,CPU从拍摄部22获取图像信息。另外,CPU将获取到的图像信息储存至非易失性RAM。接下来,在S1602中,CPU提取储存的图像信息中的直线边缘等特征形状、和纹理图像中的模样。接着,在S1603中,CPU将S1602的提取结果储存至非易失性RAM,并暂时结束本例程。
图17所示的碍物检知例程与形状识别部265的动作的一部分以及距离修正部266的动作对应。该障碍物检知例程在规定的启动条件成立后,按规定时间间隔由CPU启动。
若图17所示的障碍物检知例程被启动,则首先,CPU在S1701中从非易失性RAM读出通过图15所示的距离获取例程的执行而获取到的相对位置信息。由此,获取由测距传感器21获得到的检测点P的二维图。接下来,在S1702中,CPU从非易失性RAM读出通过图16所示的图像识别例程的执行而获取到的直线边缘。
接着,在S1703中,CPU判定是否存在与检测点P对应的直线边缘。当不存在与检测点P对应的直线边缘的情况下(即S1703=否),CPU全部跳过S1704及其之后的处理,并暂时结束本例程。另一方面,当存在与检测点P对应的直线边缘的情况下(即S1703=是),CPU使处理进入S1704以及S1705。
在S1704中,CPU对隔着直线边缘而相邻的两个图像区域中的纹理图像进行对比,来识别与直线边缘对应的障碍物B是否是低台阶。具体而言,在隔着直线边缘而相邻的两个图像区域中的纹理一致的情况下,CPU识别为障碍物B是低台阶。另一方面,在隔着直线边缘而相邻的两个图像区域中的纹理不一致的情况下,CPU识别为障碍物B是高度尺寸大于低台阶的立体物。
在S1705中,CPU判定障碍物B的识别结果是否是低台阶。在障碍物B的识别结果是低台阶的情况下(即S1705=是),CPU执行S1706的处理后,暂时结束本例程。在S1706中,CPU与上述的第四实施方式同样地,将在S1504中获取到的能够行进距离作为修正前距离DC0,并通过DC=(DC02-SH2)1/2计算修正后的能够行进距离DC。在障碍物B的识别结果是高度尺寸较大的立体物的情况下(即S1705=否),CPU跳过S1706的处理,并暂时结束本例程。
(效果)
基于由测距传感器21获取到的相对位置信息的障碍物B的检知结果直接与以往技术同样地受到障碍物B的高度尺寸所带来的影响。但是,如上述的日本特开2014-58247号公报那样,基于测距传感器21的检知结果本身来获取障碍物B的高度尺寸,误差也变大。这是因为测距传感器21的基本的功能是输出和与障碍物B之间的距离对应的信号,在该输出中本质上不包括与障碍物B的高度有关的信息。
另一方面,根据基于由拍摄部22获取到的图像信息的图像识别结果,能够获得与障碍物B的高度方向有关的信息。因此,在上述的各实施方式中,障碍物检知装置20综合基于由测距传感器21获取到的相对位置信息的障碍物B的检知结果、和基于由拍摄部22获取到的图像信息的图像识别结果,来检知障碍物B。由此,能够更适当地进行存在于本车辆10的外侧的障碍物B的检知。
(变形例)
本公开并不限于上述的各实施方式。因而,能够适当地对上述的实施方式进行变更。以下,对代表的变形例进行说明。在以下的变形例的说明中,以与上述的实施方式的不同点为主进行说明。
本公开并不限于在上述的各实施方式中所示的具体的装置结构。即,例如,车辆10并不限于四轮汽车。具体而言,车辆10也可以是三轮汽车,也可以是货车等六轮或者八轮汽车。另外,车辆10的种类也可以是仅具备内燃机的汽车,也可以是不具备内燃机的电动汽车或者燃料电池车,也可以是混合动力汽车。车体11的形状也不限于箱状、即俯视时的大致矩形形状。对于车门板17的数量,也没有特殊的限定。
测距传感器21为超声波传感器的情况下的测距传感器21的配置以及个数并不限于上述的具体例。即,例如,参照图1,在第三前声纳SF3配置于车宽方向上的中央位置的情况下,省略第四前声纳SF4。同样地,在第三后声纳SR3配置于车宽方向上的中央位置的情况下,省略第四后声纳SR4。可以省略第三侧声纳SS3以及第四侧声纳SS4。
测距传感器21并局限于超声波传感器。即,例如,测距传感器21也可以是激光雷达传感器、或者毫米波雷达传感器。同样地,构成拍摄部22的图像传感器并不限于CCD传感器。即,例如,也可以代替CCD传感器,而使用CMOS传感器。CMOS是Complementary MOS的缩写。
拍摄部22的配置以及个数并不限于上述的例子。即,例如,前相机CF也可以配置于车厢内。具体而言,例如,前相机CF也可以在车厢内例如安装于车室后视镜。前相机CF可以是一个,也可以是两个。即,障碍物检知装置20也可以具有复眼立体相机结构。例如,左侧相机CL以及右侧相机CR可以配置于与车门后视镜18不同的位置。或者,可以省略左侧相机CL以及右侧相机CR。
在上述的各实施方式中,控制部26是CPU从ROM等读出程序并启动的结构。然而,本公开并不限于这样的结构。即,例如,控制部26也可以是被构成为能够进行上述那样的动作的数字电路、例如门阵列等ASIC。ASIC是APPLICATION SPECIFIC INTEGRATED CIRCUIT(专用集成电路)的缩写。
本公开并不限于上述实施方式中所示的具体的动作例以及处理方式。例如,识别结果等的储存场所也可以是非易失性RAM以外的存储介质,例如,RAM以及/或者磁存储介质。
在上述的具体例中,专门对本车辆10的前进时的处理进行了说明。然而,本公开也可以适当地应用于本车辆10的后退时。即,对于后退时的处理内容而言,除了使用设置在本车辆10的后面部14侧的测距传感器21以及拍摄部22以外,本质上与上述的前进时的处理内容相同。
形状识别部262中的处理内容并不限于上述的例子。即,例如,可以使用复眼立体处理或者SFM和复眼立体的综合处理。对于复眼立体处理或者SFM和复眼立体的综合处理,在本申请的申请时,已经公知或者众所周知。例如,参照日本特开2007-263657号公报、日本特开2007-263669号公报等。
在S607中的相对位置信息以及能够行进距离DC的无效化时,也可以不废弃这些被无效化的数据。即,例如,S607中的相对位置信息以及能够行进距离DC的无效化也可以是将本次在S603以及S604中获取到的相对位置信息以及能够行进距离DC储存至非易失性RAM,并也将这些已被无效化的主旨的信息储存至非易失性RAM的处理。
也可以在S1406的判定之前执行S606的判定。在该变形例中,CPU在S1406的判定之前,判定在S1405中获取到的高度H是否小于规定高度Hth1。
在该变形例中,CPU在高度H小于规定高度Hth1的情况下,执行S607的处理。即,使相对位置信息以及能够行进距离DC的获取结果无效化。之后,暂时结束例程。另一方面,在高度H为规定高度Hth1以上的情况下,CPU使处理进入S1406。即,在障碍物B的高度为Hth1以上且小于Hth2的情况下,CPU通过S1407的处理对能够行进距离DC进行修正。
规定高度Hth1和规定高度Hth2也可以是相同的值。
S1407等中的能够行进距离DC的修正并不限于使用上述的算式的计算。具体而言,例如,可以如以下那样进行能够行进距离DC的修正。
如上述那样,障碍物B与本车辆10之间的实际的水平距离越小,则距离信息的误差越大。另外,高度H的值越小,则距离信息的误差越大。
因此,能够预先通过适当试验等创建将在S1404中获取的能够行进距离DC的值和在S1405中获取的高度H的值作为参数的修正值映射DC_AMD(DC,H)。另外,通过利用使用该修正值映射所获取到的修正值DC_AMD、和在S1404中获取到的修正前的能够行进距离DC的值来进行规定的运算,可以获取修正后的能够行进距离DC。具体而言,例如,可以将修正值DC_AMD和在S1404中获取到的修正前的能够行进距离DC的值相加或者累计。
可能有图4A、图4B、图12A、图12B以及图12C中的障碍物B被配置在从天花板向下方延伸配置的墙壁、或者能上下移动的翻板闸门窗等比路面RS更靠上方的状况。在该状况下,在障碍物B与路面RS之间形成空间。以下,将该空间称为“下方空间”。
在对该状况应用上述的各例的情况下,例如,在S605中获取的高度H被设为上述的下方空间的高度,即,与障碍物B的下端对应的水平边缘距路面RS的高度。另外,例如,S606中的判定成为下方空间的高度H是否是规定高度Hth3以下的判定。
在下方空间的高度H超过规定高度Hth3的情况下,由于障碍物B的下端过度高于传感器搭载高度,所以产生与上述相同的检知距离误差。因此,该情况下,对能够行进距离DC进行修正。另一方面,在下方空间的高度H为规定高度Hth3以下的情况下,障碍物B的壁面BW与测距传感器21良好地对置。因此,该情况下,不修正能够行进距离DC。
例如,根据搭载有障碍物检知装置20的本车辆10的车高,可能有无法通过从天花板向下方延伸配置的墙壁的下方空间的情况。或者,例如,可能有搭载有障碍物检知装置20的本车辆10无法通过在上升中途一直停止而处于故障中的翻板闸门亦即障碍物B的下方的情况。对于这一点,根据本变形例,能够更准确地获取这些情况下的、不能通过下方空间的障碍物B与本车辆10之间的距离。
此外,可能有图4A等中的障碍物B是从天花板向下方突出设置的梁的状况。在该状况下,本车辆10不会与该障碍物B相干扰。因而,不需要修正与该障碍物B对应的相对位置信息以及能够行进距离DC,而且即使无效化,也不妨碍。因此,CPU也可以在下方空间的高度H超过规定高度Hth4的情况下,执行与S607相同的无效化处理。
CPU也可以将修正处理方式按情况分类为障碍物B从路面RS向上方突出设置的情况、和从天花板向下方延伸配置的情况。即,在障碍物B从路面RS向上方突出设置的情况下,修正处理方式与图14(即S1406以及S1407)相同。与此相对,在障碍物B从天花板向下方延伸配置的情况下,将S1406设为“H>Hth3?”的判定处理。另外,也可以在该判定处理之后适当地进行“H>Hth4?”的判定处理。
上述的情况分类可以由CPU基于图像处理结果来进行。即,CPU可以基于图像处理结果来判定与提取出的水平边缘对应的障碍物B是从路面RS向上方突出设置还是从天花板向下方延伸配置。
对于规定高度Hth3以及Hth4,规定值可以预先储存至ROM或者非易失性RAM。或者,可以根据搭载障碍物检知装置20的本车辆10的车高来变更规定高度Hth3。即,在障碍物检知装置20中,可以将与所搭载的本车辆10的车高对应的值的规定高度Hth3可重写地储存至非易失性RAM。规定高度Hth3的重写可以由本车辆10或者障碍物检知装置20的制造者、销售者、管理者或者使用者来适当地进行。
“获取”可以适当地变更为“推断”、“检测”、“检知”、“计算”等类似的表现。各判定处理中的不等号可以是带等号,也可以是无等号。即,例如,“小于规定尺寸”可以变更为“规定尺寸以下”。同样地,“规定尺寸以上”可以变更为“超过规定尺寸”。同样地,“小于规定高度”可以变更为“规定高度以下”。同样地,“阈值以上”可以变更为“超过阈值”。
变形例也不限于上述的例示。另外,可以相互组合多个变形例。进一步,可以相互组合上述的各实施方式。
Claims (12)
1.一种障碍物检知装置,被构成为通过搭载于本车辆(10)来检知存在于所述本车辆的外侧的障碍物(B),所述障碍物检知装置(20)具备:
至少一个测距传感器(21),被设置成通过朝向所述本车辆的外侧发送探测波并且接收包含所述探测波被所述障碍物反射的反射波的接收波,来输出和与所述障碍物之间的距离对应的信号;
拍摄部(22),被设置成获取与所述本车辆的周围的图像对应的图像信息;
车辆状态获取部(260),被设置成获取与所述本车辆的行驶状态对应的行驶状态信息;
位置获取部(261),被设置成基于所述测距传感器的输出来获取与所述障碍物相对于所述本车辆的相对位置对应的相对位置信息;
形状识别部(262),被设置成基于由所述拍摄部获取到的所述图像信息和由所述车辆状态获取部获取到的所述行驶状态信息来执行所述障碍物的形状识别;以及
检知处理部(263),被设置成基于由所述位置获取部获取到的所述相对位置信息和所述形状识别部的形状识别结果来检知所述障碍物,
所述检知处理部被构成为在所述形状识别结果中的所述障碍物的高度尺寸小于规定尺寸的情况下,废弃与该障碍物对应的所述相对位置信息,
至少一个所述测距传感器包括被设置在相互不同的位置的第一测距传感器以及第二测距传感器,
所述第一测距传感器以及所述第二测距传感器相互被设置成一方发送的所述探测波被所述障碍物反射的所述反射波能够作为另一方的所述接收波来接收的位置关系,
所述位置获取部被设置成通过基于所述第一测距传感器以及所述第二测距传感器将所述第一测距传感器发送的所述探测波被所述障碍物反射的所述反射波作为所述接收波接收的情况下的、所述第一测距传感器以及所述第二测距传感器的位置的三角测量,来获取所述相对位置信息,
所述第一测距传感器以及所述第二测距传感器被设置于所述本车辆的行进方向侧的面,
在所述形状识别结果中的所述障碍物的所述高度尺寸为所述规定尺寸以上,并且与该障碍物对应的所述相对位置信息不是基于第一间接波也不是基于第二间接波而是基于直接波来获取的情况下,所述检知处理部识别为该障碍物具有相对于所述本车辆的车辆中心轴线(VL)倾斜的壁面(BW),并且有伴随着所述本车辆的行驶而所述壁面接近所述本车辆的可能性,
所述第一间接波是由所述第一测距传感器接收的所述接收波,并且起因于从所述第二测距传感器发送的所述探测波被该障碍物反射的所述反射波,
所述第二间接波是由所述第二测距传感器接收的所述接收波,并且起因于从所述第一测距传感器发送的所述探测波被该障碍物反射的所述反射波,
所述直接波是由所述第一测距传感器接收的所述接收波,并且起因于从所述第一测距传感器发送的所述探测波被该障碍物反射的所述反射波。
2.根据权利要求1所述的障碍物检知装置,其中,
所述测距传感器被设置成通过将自己发送的所述探测波被所述障碍物反射的所述反射波作为所述接收波接收,来输出和与该障碍物之间的距离对应的信号,
所述位置获取部被设置成基于在所述本车辆的行驶中的不同的时刻获取到的所述测距传感器的位置以及与所述障碍物之间的距离,通过三角测量,来获取所述相对位置信息。
3.根据权利要求1或2所述的障碍物检知装置,其中,
所述形状识别部被设置成通过基于由所述车辆状态获取部获取到的所述行驶状态信息、和由所述拍摄部伴随着所述本车辆的移动而按时间序列获取到的多个所述图像信息,获取所述图像信息中的多个特征点的三维位置,来识别所述障碍物的三维形状。
4.根据权利要求1或2所述的障碍物检知装置,其中,
所述高度尺寸是所述障碍物从路面的突出高度。
5.根据权利要求1或2所述的障碍物检知装置,其中,
所述测距传感器是超声波传感器。
6.一种障碍物检知装置,被构成为通过搭载于本车辆(10)来检知存在于所述本车辆的外侧的障碍物(B),所述障碍物检知装置(20)具备:
至少一个测距传感器(21),被设置成通过朝向所述本车辆的外侧发送探测波并且接收包含所述探测波被所述障碍物反射的反射波的接收波,来输出和与所述障碍物之间的距离对应的信号;
拍摄部(22),被设置成获取与所述本车辆的周围的图像对应的图像信息;
距离获取部(264),被设置成基于所述测距传感器的输出来获取与所述障碍物距所述本车辆的距离对应的距离信息;
形状识别部(265),被设置成基于由所述拍摄部获取到的所述图像信息来执行所述障碍物的形状识别;以及
距离修正部(266),被设置成在所述形状识别部的形状识别结果中的所述障碍物的高度尺寸小于规定尺寸的情况下,基于所述测距传感器的车高方向上的搭载位置来修正与该障碍物对应的所述距离信息。
7.根据权利要求6所述的障碍物检知装置,其中,
所述距离获取部被设置成获取从安装有所述测距传感器的所述本车辆的端面(V1、V2、V3)到所述障碍物为止的水平距离,
所述距离修正部被设置成在所述形状识别结果中的所述障碍物的所述高度尺寸小于所述规定尺寸的情况下,通过以下的公式来修正所述水平距离,
DC=(DCO2-SH2)1/2,
其中,将DC0设为由所述距离获取部获取并由所述距离修正部修正之前的所述水平距离,将DC设为由所述距离修正部修正后的所述水平距离,将SH设为所述障碍物的所述车高方向上的基端部位置与所述搭载位置之间的所述车高方向上的距离。
8.根据权利要求7所述的障碍物检知装置,其中,
至少一个所述测距传感器包括在位于所述本车辆的行进方向侧的所述本车辆的所述端面亦即行进侧端面被设置于相互不同的位置的第一测距传感器以及第二测距传感器,
所述第一测距传感器以及所述第二测距传感器相互被设置成一方发送的所述探测波被所述障碍物反射的所述反射波能够作为另一方的所述接收波来接收的位置关系,
所述距离获取部被设置成通过基于所述第一测距传感器以及所述第二测距传感器将所述第一测距传感器发送的所述探测波被所述障碍物反射的所述反射波作为所述接收波接收的情况下的、所述第一测距传感器以及所述第二测距传感器的位置的三角测量,来获取作为所述水平距离的、从所述行进侧端面到所述障碍物为止的所述行进方向上的距离亦即能够行进距离(DC),
所述距离修正部被设置成在所述形状识别部的所述形状识别结果中的所述障碍物的所述高度尺寸小于所述规定尺寸的情况下,修正所述能够行进距离。
9.根据权利要求6~8中的任意一项所述的障碍物检知装置,其中,
所述障碍物检知装置还具备车辆状态获取部(24),所述车辆状态获取部被设置成获取与所述本车辆的行驶状态对应的行驶状态信息,
所述形状识别部被设置成通过基于由所述车辆状态获取部获取到的所述行驶状态信息、和由所述拍摄部伴随着所述本车辆的移动而按时间序列获取到的多个所述图像信息,获取所述图像信息中的多个特征点的三维位置,来识别所述障碍物的三维形状。
10.根据权利要求6~8中的任意一项所述的障碍物检知装置,其中,
所述形状识别部在所述图像信息中提取与由所述距离获取部获取到的所述距离信息对应的直线边缘,并且基于所述直线边缘的周围的纹理图像来识别所述障碍物是否是所述高度尺寸小于所述规定尺寸的台阶,
所述距离修正部被设置成在由所述形状识别部识别为所述障碍物是所述台阶的情况下,修正与该障碍物对应的所述距离信息。
11.根据权利要求6~8中的任意一项所述的障碍物检知装置,其中,
所述高度尺寸是所述障碍物从路面的突出高度。
12.根据权利要求6~8中的任意一项所述的障碍物检知装置,其中,
所述测距传感器是超声波传感器。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017089962A JP6790998B2 (ja) | 2017-04-28 | 2017-04-28 | 障害物検知装置および制御装置 |
JP2017-089962 | 2017-04-28 | ||
PCT/JP2018/010273 WO2018198574A1 (ja) | 2017-04-28 | 2018-03-15 | 障害物検知装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110573905A CN110573905A (zh) | 2019-12-13 |
CN110573905B true CN110573905B (zh) | 2023-05-02 |
Family
ID=63920243
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880027990.4A Active CN110573905B (zh) | 2017-04-28 | 2018-03-15 | 障碍物检知装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20200057897A1 (zh) |
JP (1) | JP6790998B2 (zh) |
CN (1) | CN110573905B (zh) |
DE (1) | DE112018002247B4 (zh) |
WO (1) | WO2018198574A1 (zh) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019191029A1 (en) * | 2018-03-26 | 2019-10-03 | Jabil Inc. | Apparatus, system, and method of using depth assessment for autonomous robot navigation |
JP6930512B2 (ja) * | 2018-10-19 | 2021-09-01 | 株式会社デンソー | 物体検知装置、物体検知方法およびプログラム |
JP2020095623A (ja) * | 2018-12-14 | 2020-06-18 | 株式会社デンソーテン | 画像処理装置および画像処理方法 |
JP7220358B2 (ja) * | 2018-12-21 | 2023-02-10 | 株式会社タダノ | 作業車 |
JP7205368B2 (ja) * | 2019-04-23 | 2023-01-17 | 株式会社Soken | 物体検知装置 |
JP6945776B2 (ja) * | 2019-08-07 | 2021-10-06 | 三菱電機株式会社 | 障害物検出装置 |
JP7078587B2 (ja) * | 2019-09-30 | 2022-05-31 | 本田技研工業株式会社 | 走行支援システム、走行支援方法およびプログラム |
JP7406350B2 (ja) * | 2019-11-15 | 2023-12-27 | 日本信号株式会社 | 物体検知装置及び物体検知プログラム |
KR102333240B1 (ko) * | 2019-12-18 | 2021-12-01 | 현대모비스 주식회사 | 차량용 물체 인식 장치 및 방법 |
CN111198385A (zh) * | 2019-12-26 | 2020-05-26 | 北京旷视机器人技术有限公司 | 障碍物检测方法、装置、计算机设备和存储介质 |
JP2021196253A (ja) * | 2020-06-12 | 2021-12-27 | 株式会社アイシン | 運転支援装置 |
JP2022014975A (ja) * | 2020-07-08 | 2022-01-21 | トヨタ自動車株式会社 | 車両周辺監視装置 |
JP2023035255A (ja) * | 2021-08-31 | 2023-03-13 | 株式会社デンソー | 物体検知装置、物体検知方法 |
DE102021213034A1 (de) | 2021-11-19 | 2023-05-25 | Robert Bosch Gesellschaft mit beschränkter Haftung | Korrektur von ultraschallbasierten Messungen mittels Winkelinformationen |
CN114771408A (zh) * | 2022-03-28 | 2022-07-22 | 海尔(深圳)研发有限责任公司 | 用于车辆的置顶式空调器及其控制方法 |
CN116400362B (zh) * | 2023-06-08 | 2023-08-08 | 广汽埃安新能源汽车股份有限公司 | 一种行车边界检测方法、装置、存储介质及设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08278368A (ja) * | 1995-04-03 | 1996-10-22 | Mazda Motor Corp | 障害物検知装置 |
CN1255624A (zh) * | 1998-11-26 | 2000-06-07 | 松下电器产业株式会社 | 车辆用单摄像机的三维观测系统 |
JP2010249613A (ja) * | 2009-04-14 | 2010-11-04 | Toyota Motor Corp | 障害物認識装置及び車両制御装置 |
CN103359034A (zh) * | 2012-03-28 | 2013-10-23 | 本田技研工业株式会社 | 道口挡道器判断装置与车辆 |
CN104021388A (zh) * | 2014-05-14 | 2014-09-03 | 西安理工大学 | 基于双目视觉的倒车障碍物自动检测及预警方法 |
CN106600681A (zh) * | 2016-11-02 | 2017-04-26 | 上海航天设备制造总厂 | 一种有障碍物曲面的打磨方法 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0845000A (ja) * | 1994-07-28 | 1996-02-16 | Fuji Heavy Ind Ltd | 車間距離制御装置 |
JP4042579B2 (ja) * | 2002-01-28 | 2008-02-06 | 松下電工株式会社 | 車両用障害物検出警報システム |
JP4193765B2 (ja) * | 2004-01-28 | 2008-12-10 | トヨタ自動車株式会社 | 車両用走行支援装置 |
JP4179285B2 (ja) | 2005-01-12 | 2008-11-12 | トヨタ自動車株式会社 | 駐車支援装置 |
JP4123259B2 (ja) | 2005-09-02 | 2008-07-23 | トヨタ自動車株式会社 | 物体検出装置および物体検出方法 |
JP2007131092A (ja) * | 2005-11-09 | 2007-05-31 | Toyota Motor Corp | 障害物検出装置及びこれを含む車両制動システム |
JP4814669B2 (ja) | 2006-03-28 | 2011-11-16 | 株式会社デンソーアイティーラボラトリ | 3次元座標取得装置 |
JP2007263657A (ja) | 2006-03-28 | 2007-10-11 | Denso It Laboratory Inc | 3次元座標取得装置 |
JP4386083B2 (ja) | 2007-02-27 | 2009-12-16 | トヨタ自動車株式会社 | 駐車支援装置 |
JP2009096306A (ja) * | 2007-10-16 | 2009-05-07 | Hiroshima Industrial Promotion Organization | 駐車支援方法 |
JP5831415B2 (ja) | 2012-09-18 | 2015-12-09 | アイシン精機株式会社 | 駐車支援装置 |
JP6251951B2 (ja) * | 2012-11-27 | 2017-12-27 | 日産自動車株式会社 | 障害物検出装置、加速抑制制御装置、障害物検出方法 |
JP5918689B2 (ja) * | 2012-12-14 | 2016-05-18 | 株式会社日本自動車部品総合研究所 | 駐車支援装置 |
JP5891188B2 (ja) * | 2013-02-19 | 2016-03-22 | 株式会社日本自動車部品総合研究所 | 駐車空間検知装置 |
JP2015004562A (ja) * | 2013-06-20 | 2015-01-08 | 株式会社デンソー | 障害物検知装置 |
JP5870985B2 (ja) * | 2013-10-23 | 2016-03-01 | トヨタ自動車株式会社 | 運転支援装置 |
JP6189815B2 (ja) * | 2014-10-29 | 2017-08-30 | 株式会社Soken | 走行区画線認識システム |
JP6559545B2 (ja) | 2015-11-09 | 2019-08-14 | リンナイ株式会社 | 換気装置 |
-
2017
- 2017-04-28 JP JP2017089962A patent/JP6790998B2/ja active Active
-
2018
- 2018-03-15 CN CN201880027990.4A patent/CN110573905B/zh active Active
- 2018-03-15 WO PCT/JP2018/010273 patent/WO2018198574A1/ja active Application Filing
- 2018-03-15 DE DE112018002247.1T patent/DE112018002247B4/de active Active
-
2019
- 2019-10-24 US US16/662,380 patent/US20200057897A1/en not_active Abandoned
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08278368A (ja) * | 1995-04-03 | 1996-10-22 | Mazda Motor Corp | 障害物検知装置 |
CN1255624A (zh) * | 1998-11-26 | 2000-06-07 | 松下电器产业株式会社 | 车辆用单摄像机的三维观测系统 |
JP2010249613A (ja) * | 2009-04-14 | 2010-11-04 | Toyota Motor Corp | 障害物認識装置及び車両制御装置 |
CN103359034A (zh) * | 2012-03-28 | 2013-10-23 | 本田技研工业株式会社 | 道口挡道器判断装置与车辆 |
CN104021388A (zh) * | 2014-05-14 | 2014-09-03 | 西安理工大学 | 基于双目视觉的倒车障碍物自动检测及预警方法 |
CN106600681A (zh) * | 2016-11-02 | 2017-04-26 | 上海航天设备制造总厂 | 一种有障碍物曲面的打磨方法 |
Also Published As
Publication number | Publication date |
---|---|
DE112018002247T5 (de) | 2020-01-16 |
JP2018189422A (ja) | 2018-11-29 |
CN110573905A (zh) | 2019-12-13 |
US20200057897A1 (en) | 2020-02-20 |
WO2018198574A1 (ja) | 2018-11-01 |
JP6790998B2 (ja) | 2020-11-25 |
DE112018002247B4 (de) | 2023-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110573905B (zh) | 障碍物检知装置 | |
JP6942712B2 (ja) | コンテキスト及び深さ順序を用いる、部分的に遮られた物体の検出 | |
US10861176B2 (en) | Systems and methods for enhanced distance estimation by a mono-camera using radar and motion data | |
US9809223B2 (en) | Driving assistant for vehicles | |
CN109219546B (zh) | 停车辅助装置以及停车辅助方法 | |
US9151626B1 (en) | Vehicle position estimation system | |
US8442755B2 (en) | Systems and methods for preventing motor vehicle side doors from coming into contact with obstacles | |
JP6091977B2 (ja) | 建設機械 | |
WO2017057058A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN109789845B (zh) | 停车控制装置和停车控制方法 | |
WO2015098344A1 (ja) | 鉱山用作業機械 | |
US20190152487A1 (en) | Road surface estimation device, vehicle control device, and road surface estimation method | |
CN112771591B (zh) | 用于评价运输工具的环境中的对象对运输工具的行驶机动动作的影响的方法 | |
JP2019067116A (ja) | 立体物接地判定装置 | |
CN112776797A (zh) | 泊出原始车位创建方法、系统、车辆和存储介质 | |
WO2019151156A1 (ja) | 物体検知装置および駐車支援装置 | |
CN110462706B (zh) | 障碍物检测装置 | |
JP7135579B2 (ja) | 物体検知装置 | |
KR101734726B1 (ko) | 주차공간 탐지 방법 및 이를 실행하는 장치 | |
US20210370919A1 (en) | Information processing device and information processing method | |
JP7236556B2 (ja) | 物体検知装置および物体検知プログラム | |
JP7334572B2 (ja) | 物体検知装置および物体検知プログラム | |
JP7318377B2 (ja) | 物体検知装置 | |
JP2019207161A (ja) | 物体検知装置 | |
JP7452374B2 (ja) | 物体検知装置および物体検知プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |