CN105830131A - 用于检测行人相对于车辆轨迹的侧向位置的装置 - Google Patents
用于检测行人相对于车辆轨迹的侧向位置的装置 Download PDFInfo
- Publication number
- CN105830131A CN105830131A CN201480068803.9A CN201480068803A CN105830131A CN 105830131 A CN105830131 A CN 105830131A CN 201480068803 A CN201480068803 A CN 201480068803A CN 105830131 A CN105830131 A CN 105830131A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- warning
- track
- image
- barrier
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003287 optical effect Effects 0.000 claims abstract description 16
- 230000004888 barrier function Effects 0.000 claims description 29
- 238000011156 evaluation Methods 0.000 claims description 11
- 230000000007 visual effect Effects 0.000 claims description 8
- 238000000034 method Methods 0.000 claims description 4
- 230000003044 adaptive effect Effects 0.000 claims description 2
- 238000004458 analytical method Methods 0.000 description 5
- 238000013507 mapping Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000010191 image analysis Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 230000005855 radiation Effects 0.000 description 2
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 241000282994 Cervidae Species 0.000 description 1
- 241000282898 Sus scrofa Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 230000004297 night vision Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 238000012731 temporal analysis Methods 0.000 description 1
- 238000000700 time series analysis Methods 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
- B60W30/095—Predicting travel path or likelihood of collision
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/029—Steering assistants using warnings or proposing actions to the driver without influencing the steering system
- B62D15/0295—Steering assistants using warnings or proposing actions to the driver without influencing the steering system by overlaying a vehicle path based on present steering angle over an image without processing that image
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/179—Distances to obstacles or vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/10—Longitudinal speed
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/18—Steering angle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明提出一种用于辅助车辆(2)驾驶的系统(1),该系统包括一个相机(10)并且包括一个光学识别装置,该光学识别装置能够识别在该相机(10)的视野(4)中的一个障碍物(3)。该装置(1)包括一个轨迹估算单元(24)并且包括一个侧向判别单元(25),该轨迹估算单元被配置成限定能够叠加到该相机(10)的图像上的一个右手侧轨迹边界曲线(5)和一个左手侧轨迹边界曲线(6),该侧向判别单元被配置成递送至少两个分开的警告值,这些警告值取决于该障碍物(3)的图像的位置相对于该右手侧轨迹边界和该左手侧轨迹边界。
Description
技术领域
本发明的主题是用于辅助车辆驾驶的系统、并且更具体地是用于辅助标识位于车辆轨迹上的障碍物或人员的系统。虽然在驾驶者的驾驶决策中通过放置在道路上的地面上的发光反射标记来辅助他或她,另一方面,尤其在如有雾天气或夜晚的不良能见度的状况下,他或她不总是有时间分析位于道路两侧的目标或人员的性质。
背景技术
在机动车辆上可获得不同的夜视系统。这种系统可以检测夜晚的行人并且通过不同的人机界面(HMI)来为其显示。HMI可以例如在屏幕上高亮代表行人的图像区域,或者可以在仪表盘上出现表示行人的象形图。来自丰田公司的专利申请US20090231116通过使用LED投影到车辆的风窗玻璃上来表明所检测的行人相对于车辆的位置,这些LED投影的光束应该能构建驾驶者所看见的行人的图像。
这种表示的精确度是相对的,因为行人的投影图像根据驾驶者的大小和位置不叠加在风窗玻璃上的相同点处,并且即使假设光束构建行人的实际位置,驾驶者仍然必须分析情况来估算行人是否位于车辆轨迹的左边或者右边以及驾驶者将必须在哪个方向上修改车辆的轨迹。
专利US20100253526披露了一种用于表示在车辆前方检测的目标或行人的方法。该文件提出为驾驶者表明目标的相对于横向于车辆方向的方向的运动方向,但没有表明确定运动方向所用的器件。
发明内容
本发明的目的是提出一种驾驶辅助系统,该驾驶辅助系统不仅可以相对于车辆的风窗玻璃或相对于屏幕上的数字化图像来标识可能行人的位置,而且可以直接为驾驶者提供关于他或她必须向哪一侧偏转轨迹的信息。
为此,本发明提出一种用于辅助车辆驾驶的装置,该装置包括相机并且包括光学识别装置,该光学识别装置能够识别在相机的视野中的障碍物、尤其是被标识为潜在造成事故的行人或障碍物。该装置包括轨迹估算单元并且包括侧向判别单元,该轨迹估算单元被配置成限定可以在来自该相机的图像上叠加的右轨迹边界曲线和左轨迹边界曲线,该侧向判别单元被配置成递送至少两个不同的警告值,这些警告值是相对于该右轨迹边界和该左轨迹边界的该障碍物的图像的位置的函数。这两个不同的警告值可以是根据障碍物的图像的位置指配给存储器中相同变量的两个不同的值。根据另一个变体实施例,这两个警告值可以对应于两个不同的存储器变量,其可以各自采取多个值。根据具体的变体实施例,右边界曲线和左边界曲线可以合并,并且例如对应于车辆的前保险杠的中心点的可预测轨迹。根据另外的变体实施例,右轨迹边界和左轨迹边界可以例如对应于车辆的右边缘和左边缘的可预测轨迹,或者甚至可以对应于由恒定安全余量加宽的这些轨迹。轨迹估算单元可以根据车辆的车轮的瞬时角度、或者根据可以推回导向车轮的这个角度的参数来全局地确定每个右边界曲线或左边界曲线。根据另一个实施例,轨迹估算单元可以通过考虑车轮角度的最近变量并且通过由此外推这个车轮角度的变量来确定各个右边界曲线或左边界曲线,例如从而确定在相机视界中距车辆最远距离的轨迹的部分。障碍物或行人在此应该被理解为意味着由图像分析系统用具体信号(例如红外信号和/或形状因数信号和/或运动型信号)检测的元素、和/或与标识为道路图像的区域相交或接近。被检测作为行人的形式可以例如包括站立的人类(可以是骑自行车的人或轮椅中的人员)、狗、鹿、野猪、朝路倾斜的树等,或者根据其他的变体,相反选择性地包括站立和/或运动中的人类。根据某些变体实施例,由装置考虑在内的目标或行人可以被限制为接近道路的目标或行人、或是占据道路的目标或行人。
行人或障碍物的脚在下文中应该被理解为意味着行人或障碍物的与地面接触的点,或者默认的是,所检测的形式的底部,“底部”应理解为是沿着对应于拍摄场景的竖直线的图像的竖直轴线。
该装置可以与该车辆的这些导向车轮的角度的估算器相关联,并且该轨迹估算单元可以被配置成根据这些导向车轮的角度来限定右轨迹边界曲线和左轨迹边界曲线。这些导向车轮的角度的估算器可以例如与车辆方向盘角度传感器并且与车辆前进速率的估算器相关联,并且使用这两个值的历史来计算车轮的角度。根据变体实施例,例如对于没有动力转向的车辆,可以仅根据方向盘角度来确定右轨迹边界和左轨迹边界。可以例如根据车轮的角度来计算、或优选地映射这些轨迹或轨迹的部分,从而允许对检测到行人时的状况进行快速分析。
优先地,在估算这些警告值的时刻,该相机的光轴位于包括该车辆的前进方向的竖直平面中,该光轴是在部分下倾的方向上定向的。部分下倾的方向在此应该被理解为意味着朝地面导向、与地面没有成直角的方向。以此方式,与做出在车辆的附近的道路的边缘的元素一起,在来自相机的图像中获得了在车辆前方的道路的一部分。在获得的图像中,图像的坐标之一(通常是图像的纵坐标)可以反映距在车辆前方的水平平面中的目标的距离以及基本上竖直的目标的高度。另一个坐标代表横向于车辆轨迹的、基本上水平的尺寸。
侧向判别单元可以被配置成确定右相交点,该右相交点是作为右轨迹边界与障碍物的脚踏线的相交来计算的。该脚踏线是由该识别系统做出该障碍物的图像在该图像的对应于水平轴线的方向上的边缘来确定的,该水平轴线横向于该车辆的前进方向。侧向判别单元可以进一步被配置成确定左相交点,该左相交点是作为在该左轨迹边界与该障碍物的相同脚踏线之间的相交来计算的。侧向判别单元可以例如计算这两个相交点的横坐标,其纵坐标是障碍物的脚踏线的纵坐标,因此是已知的。
侧向判别单元可以被配置成将该右相交点和该左相交点的横坐标与所检测的障碍物的至少一个横坐标特征进行对比。所检测的障碍物的横坐标特征可以例如对应于该障碍物的图像的重心的横坐标。根据另一个变体实施例,侧向判别单元将障碍物的极右横坐标和极左横坐标均考虑在内,该极右横坐标和该极左横坐标是通过识别系统随着做出障碍物的图像的边缘的那两个竖直线来确定的。竖直线可以被理解为来自相机的图像的线,这些线对应于相机的视野的竖直线。
根据变体实施例,侧向判别单元仅计算中央轨迹线(而不是右轨迹边界和左轨迹边界)、计算脚踏线与中央轨迹线的相交、并且然后将这个相交的位置与所检测的障碍物的横坐标特征进行对比,通过检查这个横坐标是否位于与中央线的相交的右边或左边的最小距离处。这个实施例实际上等同于将特征横坐标与做出该车辆右边和左边的轨迹的边缘的两个交点的位置进行对比。
如果极左横坐标位于右相交点的右边,则侧向判别单元可以例如发出第一信号,并且如果极右横坐标位于左相交点的左边,则该侧向判别单元发出不同的信号。根据另一个变体实施例,如果右相交点位于极右横坐标与极左横坐标之间,则侧向判别单元可以例如发出第一信号,并且如果左相交点位于极右横坐标与极左横坐标之间,则该侧向判别单元发出不同的信号。根据又另一个变体实施例,如果极左横坐标位于右相交点的右边、在小于距右相交点的阈值的距离处,则侧向判别单元可以发出第一信号,并且如果极右横坐标位于左相交点的左边、在小于距左相交点的阈值的距离处,则该侧向判别单元发出不同的信号。右和左应该被理解为意味着沿障碍物的脚踏线的轴线的相对位置,也就是说沿相机的对应于与车辆的前进方向成直角的水平方向的轴线。
根据有利实施例,该侧向判别单元被配置成:根据从该右相交点与该障碍物的横坐标特征的距离、或者根据从该左相交点与该障碍物的横坐标特征的距离来适配这些警告值。从该点到横坐标的距离应该被理解为意味着从该点到穿过这个横坐标的竖直线的距离。
优先地,该装置包括一个警告界面,该警告界面被配置成根据这些估算的警告值发出光信号、触摸信号或声音信号,对于该警告值的至少一个值在该车辆的驾驶者的右侧发出这些光信号、触摸信号或声音信号,并且对于该警告值的至少一个另外的值在该驾驶者的左侧发出这些光信号、触摸信号或声音信号。因此,如果该警告值例如对应于可以在至少三个不同的值中采用的单个变量,则当该变量采取第一预定值时在驾驶者的左侧发出信号,当该变量采取第二预定值时在驾驶者的右侧发出信号,并且只要该变量等于第三预定值就不发出信号。在这些警告值对应于可以各自采用多个值的两个变量的实施例中,当这两个变量中的第一个变量采取预定值时在驾驶者的左侧发出信号,并且当这两个变量中的第二个变量采取预定值时在驾驶者的右侧发出信号。相同变量的多个预定值于是可以在驾驶者的相同侧产生具有不同强度的信号。
根据有利实施例,该装置包括能够检测在红外线范围中的图像的相机。
根据另一个方面,本发明提出一种装备有如前所述的驾驶辅助装置的机动车辆。
本发明还提出一种用于辅助机动车辆驾驶的方法,其中,在共同的参考系中将尤其根据该车辆的方向盘角度确定的至少两个轨迹线的位置与通过朝该车辆的前方指向的一个相机获得的图像的至少一个特征元素进行对比,并且取决于该元素是否位于这两个轨迹线的左边或者右边来给该车辆驾驶者发送至少两个不同的信号。
附图说明
通过阅读单纯作为非限定性实例并参见附图所给出的以下说明将明了本发明的其他目标、特征和优点,在附图中:
-图1是装备有根据本发明的驾驶辅助装置的车辆的示意表示,
-图2是考虑由根据本发明的驾驶辅助装置使用的几何元素的简化表示,并且
-图3是根据本发明的驾驶辅助装置的运行的简化算法的实例。
具体实施方式
如在图1中展示的,车辆2在由右道路边缘7和左道路边缘8定界的道路上运行。该车辆遵循由右轨迹边缘5和左轨迹边缘6定界的轨迹。在图1中,行人3位于道路上、在右轨迹边缘5附近。右轨迹边界和左轨迹边界可以例如被任意地限定为车辆的车轮9的轨迹的外包迹的轨迹、或者根据变体实施例被限定为车辆车身的一个或多个点的轨迹的外包迹。
根据变体实施例,无论这些轨迹是由车轮的点的轨迹还是由车辆的车身的点的轨迹限定的,都可以限定相对于由车辆的物理点实际描绘的轨迹加宽任意宽度的安全轨迹。在本文的下文中,认为车辆的轨迹被限定在与道路相同的平面中。因此该轨迹最常位于基本上水平平面中、或至少位于与由车辆的车轮的轴线限定的平面平行并且穿过车辆车轮的与路接触的点的平面中。
车辆包括电子控制单元13、人机界面12、多个导向车轮9、相机10、车轮速度传感器11、方向盘14。
电子控制单元13包括轨迹估算单元24和侧向判别单元25。轨迹估算单元24与映射15相关联、或包括该映射,并且与车辆车轮角度ψ估算器相关、或直接与方向盘角度传感器(该方向盘角度传感器将方向盘角度值发送给其)相关联,并且与车辆的前进速率的线性估算器、例如车辆车轮速度传感器11相关联。
侧向判别单元25与人机界面12、轨迹估算单元24和接收由相机10发送的图像的图像分析系统相关联。
相机10被安排为相对于车辆2的方式使得能够朝车辆的前方摄影。典型地,相机10接收来源于代表相机视野的光束圆锥4的呈可见光、红外光、或其他波长的光线。圆锥4的光线方向中的至少一些光线方向定向的方式是朝该车辆的前方下倾,从而可以在来自相机的图像中记录位于车辆前方的道路的一部分。
相机10将图像的记录值发送至电子控制单元13。电子控制单元13还从车辆方向盘14接收例如呈方向盘角度数据形式的信息。它接收例如从车辆车轮速度传感器11中产生的车辆的线性前进速率v的值。电子控制单元13从车辆方向盘角度可以计算车辆的方向盘相对于车辆前进的纵向轴线的角度。
根据一些变体实施例,电子控制单元13可以直接接收关于车辆导向车轮的角度的信息,而不是方向盘角度和前进速率v的信息。
电子控制单元13与映射15相关联,使得可以由车轮与车辆的纵向轴线Z形成的角度来构建可以在来自相机10的图像上叠加的两个理论轨迹边界。按照惯例,在图1中展示的图像中,Z表示当车辆在直线中前进时车辆的正常前进方向,Y表示当车辆在平坦地带行驶时的竖直方向,或者如果车辆没有在平坦地带行驶时,Y表示与由车轮的轴线限定的正中面成直角的方向,并且X表示车辆的横向方向,也就是说与车辆的正常前进方向成直角的水平方向。
图2示意性地展示了由图1的相机10捕获的图像,其中,如果分别代表左轨迹边界6和右轨迹边界5的曲线19和20在由相机10数字化的图像中是可视的,如其可以被投影的来将其结合。在x、y轴系中呈现了来自相机10的图像16。轴线x、或x轴的方向对应于可以通过相机在车辆前方可视并且经在车辆的横向方向X上定向的线的方向。
方向y、或y轴对应于来自相机的图像与方向x成直角的另一个方向,并且对应于通过相机在车辆前方可见的竖直线的投影的方向和对应于平行于车辆的前进方向Z的线的方向。在图2中展示的图像16是已经通过已知图像分析方法经受一系列滤波和分析的图像。这些滤波和分析尤其可以确定在图1中呈现的行人3的图像的轮廓17、以及对应于道路的物理边界的可能的线(在图2中未呈现)、和/或对应于在道路上和在其边缘上的标记的线。
可以将图1的行人3例如作为具体的对比和/或形状因数元素来检测。这就是如何在图像16中限定行人3的图像的轮廓17。
图像分析系统还限定了行人的外轮廓,在此呈矩形18的形式,这可以限定行人3的剪影的轮廓17的左侧x1和右侧x2。左侧例如对应于矩形18的左侧的坐标,并且右侧对应于矩形18的右侧的坐标。可以设想多个变体实施例,其中,行人的剪影17将不与矩形轮廓18相关,而是例如与椭圆形轮廓相关,于是左边界坐标x1和右边界坐标x2能够例如被限定为椭圆形的位于轴线x上的最左的点和位于轴线x上的最右的点的横坐标。框架18的最低点可以限定行人17的剪影的脚踏线23。脚踏线23可以例如被限定为平行于轴线x、并且在轴线y的方向上穿过框架18的最低点的线。
行人17的这个脚踏线23的纵坐标y1在此被放置在轴线y上。为了理解本发明,已经将两个曲线19和20放置在经滤波分析的图像16上。曲线19代表车辆2的轨迹的左边缘,并且曲线20代表车辆2的轨迹的右边缘。为了实施本发明,不需要随时在屏幕上显示经滤波分析的图像、或者在其上叠加线19和20。
然而,本发明需要分析由相机检测的图像从而在其中标识任何行人,并且还需要知道将在来自相机的这个图像中具有的车辆的轨迹的右边缘和左边缘的坐标(在图2中分别由曲线20和19呈现)。例如,可以将曲线20和19以映射形式15作为第一函数“边缘R”和第二函数“边缘L”来存储。例如,对应于曲线20和19的这些函数根据导向车轮角度ψ并且根据图16的平面的纵坐标y来映射在轴线x上。
根据变体实施例,该映射可以考虑导向车轮的角度,根据另外的变体实施例,该映射可以直接考虑车辆的速度和车辆的方向盘角度根据另外的变体实施例,用于计算导向车轮的角度的单元由车辆的历史速度v并且由车辆的历史方向盘角度来计算导向车轮的这个角度ψ。侧向判别单元25分析行人17的剪影是否位于由线20和20定界的轨迹的右边或左边,并且根据剪影17的位置给车辆的驾驶者发送一个信号,该信号表明行人位于车辆的轨迹的右边或者行人位于车辆的轨迹的左边,在必要时,这可以使驾驶者在甚至实际看见行人之前将车辆的轨迹略微转变方向。
该信号可以例如是根据行人的位置在驾驶者左侧上、或驾驶者的右侧上发送光信号、声音信号、振动信号,因此尤其如果驾驶者不再知道他的右侧和左侧在哪时使得信号的解释更加直观。为了确定行人3是否位于由线5和6定界的车辆的轨迹的右边或左边,判别单元25例如通过分别代表车辆轨迹的左边缘和车辆轨迹的右边缘的曲线19和20来确定行人的脚踏线23的交点(分别为21和22)的坐标。
如果剪影17或其轮廓18位于点22的右边或者跨越这个点22,则判别单元25发送在车辆的驾驶者的右边发出的信号。如果剪影17或其轮廓18位于点21的左边或者跨越这个点21,则判别单元25给HMI12发送在车辆的驾驶者的左边发出的信号。
图3展示了可以由判别单元25使用以确定行人3是否位于车辆2的轨迹的右边或左边的运行的示例性算法30。在对应于图3的具体实施例中,判别单元25产生变量警告R和警告L,当不必为了驾驶者的关注发送侧向检测信号时,这些变量具有值0,当行人位于轨迹的右外侧或车辆轨迹的左外侧时,这些变量具有值1,并且当行人的剪影覆盖左轨迹边缘19或覆盖右轨迹边缘20时,这些变量具有值2。还可以使用变量警告M,只要行人不位于车辆的轨迹上,该变量例如就保持在零值处,并且如果判别单元25检测行人位于车辆的轨迹上,该变量就例如达到值1。基于变量警告M的值,可以将应急策略落实到位,例如制动策略。当变量警告R具有值1时,判别单元可以例如引起在驾驶者的右边发出第一信号,并且当警告R信号具有值2时仍然引起在驾驶者的右边发出更加强烈的信号。类似地,当变量警告L具有值1时,判别单元25可以引起在驾驶者的左边发出信号,并且当变量警告L具有值2时引起发出更加强烈的信号。
在判别单元检测出行人的剪影17位于线19与20之间的情况下,也就是说行人位于车辆的轨迹上,将其他策略落实到位,这些策略在此不详述并且可以例如包括:如果此外车辆的另一个前部安装的检测器检测出行人位于紧邻车辆处时该车辆自动制动。
如在图3中所展示的,在初始化步骤中,变量警告R、警告L和警告M被设置为零。
在步骤32中,相机10的分析系统执行测试以决定在相机的视界中是否可视行人3。如果结果是负的,则返回至初始化步骤31。如果结果是正的,在步骤33中,图像分析系统在横坐标轴线x上确定行人的剪影17的极位置x1、x2,并且在轴线y上确定行人的剪影17的底部位置y1。
然后执行一系列的测试34至38或34至37以确定行人相对于车辆轨迹的位置。测试34检测行人的剪影17是否位于代表左轨迹边缘的线9的左边。如果响应是正的,则在步骤41中使变量警告L达到值1。
如果响应是负的,则在步骤35中执行测试来看剪影17是否跨越线19。如果是这种情况,则在步骤42中使警告L的值达到2。如果不再是这种情况,则在步骤36中执行测试来看行人在其脚踏线的水平处的剪影17是否位于线19与20之间,也就是说行人是否位于车辆轨迹上。如果是这种情况,则在步骤39中将变量警告M转变为值1。
在测试36具有负响应的情况下,然后执行测试37来检查行人在他或她的脚踏线的水平处是否跨越代表右轨迹边缘的线20,并且如果是这种情况,则变量警告R被带到步骤43。
如果响应是负的,则可以执行测试38,或者可以直接推论出行人在他或她的脚踏线的水平处位于右轨迹边缘20的右边。在这种情况下,在步骤40中将变量警告R激活为1。
在图3中描述的运行模式只是可以根据本发明设想出的运行模式之一。例如,可以仅当行人完全位于轨迹的左边或者完全位于轨迹的右边时激活信号,并且可以只要行人触及车辆的轨迹就激活应急程序。
在这种情况下,当剪影17跨越线19和20之一时,已经将应急策略落实到位。还可以设想变体实施例,其中,该位置不是相对于两个轨迹边缘线、而是相对于四个线来进行对比的。第一线直接做出右边的轨迹边缘,并且第二线以轻微的间距做出更右边一点的轨迹。两个另外的线限定轨迹左边的条带。然后,当行人的脚踏线的部分位于做出车辆的理论轨迹的边缘的左条带内、或右条带内时递送警告信号。
本发明并不局限于所描述的这些示例性实施例并且能大量变体中被使用。可以计算而不是映射出轨迹的左边缘线19和右边缘线20的结合。
可以选择轨迹线19和20的位置以便对应于车辆2的加宽轨迹,也就是说,如果它们被叠加在来自相机的图像上,则在图像上画出比由车辆的物理点行进的轨迹更宽的轨迹。
例如可以提供对应于车辆的物理侧向点加宽几十厘米、例如20cm量级的宽度的轨迹。
根据本发明的驾驶辅助系统可以使驾驶者甚至在他或她没有时间自己识别位于道路边缘的行人的不良能见度的情况下做出反应。
Claims (10)
1.一种用于辅助车辆(2)驾驶的系统(1),该系统包括一个相机(10)并且包括一个光学识别装置,该光学识别装置能够识别在该相机(10)的视野(4)中的一个障碍物(3)、尤其是一个被标识为潜在造成事故的行人或障碍物,其特征在于,该装置(1)包括一个轨迹估算单元(24)、并且包括一个侧向判别单元(25),该轨迹估算单元被配置成限定能够在来自该相机(10)的图像(16)上叠加一个右轨迹边界曲线(20)和一个左轨迹边界曲线(19),该侧向判别单元被配置成递送至少两个不同的警告值(警告L,警告R),这些警告值是该障碍物(3)的图像(17)的位置相对于该右轨迹边界(20)和该左轨迹边界(19)的函数。
2.如权利要求1所述的驾驶辅助系统,该驾驶辅助系统与该车辆的这些导向车轮的角度(ψ)的一个估算器(13)相关联,其中,该轨迹估算单元(24)被配置成根据该车辆的这些导向车轮(9)的角度(ψ)来限定一个右轨迹边界曲线(20)和一个左轨迹边界曲线(19)。
3.如权利要求1和2中任一项所述的驾驶辅助系统,其中,在估算这些警告值(警告L,警告R)的时刻,该相机的光轴位于包括该车辆(2)的前进方向的一个竖直平面(YZ)中,该光轴是在部分下倾的方向上定向的。
4.如权利要求3所述的驾驶辅助系统,其中,该侧向判别单元(25)被配置成确定作为该右轨迹边界(20)与该障碍物的脚踏线(23)相交的一个右相交点(22),该脚踏线是由该识别系统做出该障碍物的图像(17)在该图像的对应于一个水平轴线(X)的方向(x)上的边缘来确定的,该水平轴线横向于该车辆的前进方向(Z),并且该侧向判别单元(25)被配置成确定作为在该左轨迹边界(19)与该障碍物的相同脚踏线(23)之间相交的一个左相交点(21)。
5.如权利要求4所述的驾驶辅助系统,其中,该侧向判别单元被配置成将该右相交点(22)和该左相交点(21)的横坐标(边缘R(ψ,y1),边缘L(ψ,y1))与所检测的该障碍物(3)的至少一个横坐标特征(x1,x2)进行对比。
6.如权利要求5所述的驾驶辅助系统,其中,该侧向判别单元(25)被配置成:根据从该右相交点(22)与该障碍物的横坐标特征的距离、或者根据从该左相交点(19)与该障碍物的横坐标特征(x1,x2)的距离来适配这些警告值(警告L,警告R)。
7.如权利要求1至6中任一项所述的驾驶辅助系统,包括一个警告界面(12),该警告界面被配置成根据这些估算的警告值(警告L,警告R)发出光信号、触摸信号或声音信号,对于该警告值的至少一个值(警告R=1)在该车辆的驾驶者的右侧发出这些光信号、触摸信号或声音信号,并且对于该警告值的至少一个另外的值(警告L=1)在该驾驶者的左侧发出这些光信号、触摸信号或声音信号。
8.如权利要求1至7中任一项所述的驾驶辅助系统,包括能够检测在红外线范围中的图像的一个相机(10)。
9.一种机动车辆,装备有如权利要求1至7中任一项所述的驾驶辅助系统。
10.一种用于辅助机动车辆(2)驾驶的方法,其中,在共同的参考系(x,y)中将尤其根据该车辆的方向盘角度确定的至少两个轨迹线(19,20)的位置与通过朝该车辆(2)的前方指向的一个相机(10)获得的图像的至少一个特征元素(17)进行对比,并且取决于该元素是否位于这两个轨迹线(19,20)的左边或者右边来给该车辆驾驶者发送至少两个不同的信号。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FRFR1360772 | 2013-11-04 | ||
FR1360772A FR3012784B1 (fr) | 2013-11-04 | 2013-11-04 | Dispositif de detection de la position laterale d'un pieton par rapport a la trajectoire du vehicule |
PCT/FR2014/052760 WO2015063422A2 (fr) | 2013-11-04 | 2014-10-30 | Dispositif de détection de la position latérale d'un piéton par rapport à la trajectoire du véhicule |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105830131A true CN105830131A (zh) | 2016-08-03 |
Family
ID=49817072
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480068803.9A Pending CN105830131A (zh) | 2013-11-04 | 2014-10-30 | 用于检测行人相对于车辆轨迹的侧向位置的装置 |
Country Status (4)
Country | Link |
---|---|
EP (1) | EP3065989A2 (zh) |
CN (1) | CN105830131A (zh) |
FR (1) | FR3012784B1 (zh) |
WO (1) | WO2015063422A2 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109727188A (zh) * | 2017-10-31 | 2019-05-07 | 比亚迪股份有限公司 | 图像处理方法及其装置、安全驾驶方法及其装置 |
CN110113580A (zh) * | 2019-06-06 | 2019-08-09 | 天津艾思科尔科技有限公司 | 一种站台越界检测系统 |
CN110709298A (zh) * | 2017-07-26 | 2020-01-17 | 捷豹路虎有限公司 | 接近感测系统及其控制 |
CN110843910A (zh) * | 2018-08-21 | 2020-02-28 | 上海博泰悦臻网络技术服务有限公司 | 车辆拐弯控制装置及方法 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SE539097C2 (en) | 2015-08-20 | 2017-04-11 | Scania Cv Ab | Method, control unit and system for avoiding collision with vulnerable road users |
SE539098C2 (en) * | 2015-08-20 | 2017-04-11 | Scania Cv Ab | Method, control unit and system for path prediction |
DE112015006601T5 (de) * | 2015-08-27 | 2018-05-24 | Ford Global Technologies, Llc | Verbesserte Kollisionsabwendung |
FR3055870B1 (fr) * | 2016-09-15 | 2019-09-27 | Renault S.A.S. | Methode d'aide a la conduite, procede d'implementation d'une telle methode et dispositif d'aide a la conduite |
CN111127582B (zh) * | 2018-10-31 | 2023-06-23 | 驭势(上海)汽车科技有限公司 | 一种轨迹重合段识别方法、装置、系统及存储介质 |
CN114078326B (zh) * | 2020-08-19 | 2023-04-07 | 北京万集科技股份有限公司 | 碰撞检测方法、装置、视觉传感器和存储介质 |
CN114485511A (zh) * | 2020-10-27 | 2022-05-13 | 湖南中车智行科技有限公司 | 一种车辆限界宽度的测量方法及装置 |
CN114446092B (zh) * | 2022-01-19 | 2022-12-27 | 无锡学院 | 一种基于三维相机组网的s型公路模拟障碍物预警方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101405174A (zh) * | 2006-03-22 | 2009-04-08 | 日产自动车株式会社 | 回避操作计算装置、回避控制装置、具备各装置的车辆、回避操作计算方法及回避控制方法 |
US20090184845A1 (en) * | 2008-01-22 | 2009-07-23 | Toru Saito | Vehicle Detecting System |
JP2009282564A (ja) * | 2008-05-19 | 2009-12-03 | Mitsubishi Electric Corp | 車両用警報装置 |
JP2011257984A (ja) * | 2010-06-09 | 2011-12-22 | Toyota Central R&D Labs Inc | 対象物検出装置及びプログラム |
EP2420986A1 (en) * | 2010-08-19 | 2012-02-22 | Koito Manufacturing Co., Ltd. | Vehicle illumination system |
JP2012212351A (ja) * | 2011-03-31 | 2012-11-01 | Mazda Motor Corp | 車両用情報提供装置 |
FR2979299A1 (fr) * | 2011-08-31 | 2013-03-01 | Peugeot Citroen Automobiles Sa | Dispositif de traitement pour estimer une trajectoire future d'un vehicule, associee a une couleur fonction d'un niveau de risque de collision estime, pour un systeme d'aide a la conduite |
CN103217165A (zh) * | 2012-01-19 | 2013-07-24 | 沃尔沃汽车公司 | 驾驶员辅助系统 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2003300514A1 (en) * | 2003-12-01 | 2005-06-24 | Volvo Technology Corporation | Perceptual enhancement displays based on knowledge of head and/or eye and/or gaze position |
JP2009217682A (ja) | 2008-03-12 | 2009-09-24 | Yazaki Corp | 車両用表示装置 |
US8344894B2 (en) | 2009-04-02 | 2013-01-01 | GM Global Technology Operations LLC | Driver drowsy alert on full-windshield head-up display |
-
2013
- 2013-11-04 FR FR1360772A patent/FR3012784B1/fr active Active
-
2014
- 2014-10-30 WO PCT/FR2014/052760 patent/WO2015063422A2/fr active Application Filing
- 2014-10-30 EP EP14825394.1A patent/EP3065989A2/fr not_active Withdrawn
- 2014-10-30 CN CN201480068803.9A patent/CN105830131A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101405174A (zh) * | 2006-03-22 | 2009-04-08 | 日产自动车株式会社 | 回避操作计算装置、回避控制装置、具备各装置的车辆、回避操作计算方法及回避控制方法 |
US20090184845A1 (en) * | 2008-01-22 | 2009-07-23 | Toru Saito | Vehicle Detecting System |
JP2009282564A (ja) * | 2008-05-19 | 2009-12-03 | Mitsubishi Electric Corp | 車両用警報装置 |
JP2011257984A (ja) * | 2010-06-09 | 2011-12-22 | Toyota Central R&D Labs Inc | 対象物検出装置及びプログラム |
EP2420986A1 (en) * | 2010-08-19 | 2012-02-22 | Koito Manufacturing Co., Ltd. | Vehicle illumination system |
JP2012212351A (ja) * | 2011-03-31 | 2012-11-01 | Mazda Motor Corp | 車両用情報提供装置 |
FR2979299A1 (fr) * | 2011-08-31 | 2013-03-01 | Peugeot Citroen Automobiles Sa | Dispositif de traitement pour estimer une trajectoire future d'un vehicule, associee a une couleur fonction d'un niveau de risque de collision estime, pour un systeme d'aide a la conduite |
CN103217165A (zh) * | 2012-01-19 | 2013-07-24 | 沃尔沃汽车公司 | 驾驶员辅助系统 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110709298A (zh) * | 2017-07-26 | 2020-01-17 | 捷豹路虎有限公司 | 接近感测系统及其控制 |
CN110709298B (zh) * | 2017-07-26 | 2023-11-10 | 捷豹路虎有限公司 | 接近感测系统及其控制 |
CN109727188A (zh) * | 2017-10-31 | 2019-05-07 | 比亚迪股份有限公司 | 图像处理方法及其装置、安全驾驶方法及其装置 |
CN110843910A (zh) * | 2018-08-21 | 2020-02-28 | 上海博泰悦臻网络技术服务有限公司 | 车辆拐弯控制装置及方法 |
CN110113580A (zh) * | 2019-06-06 | 2019-08-09 | 天津艾思科尔科技有限公司 | 一种站台越界检测系统 |
CN110113580B (zh) * | 2019-06-06 | 2024-04-09 | 天津艾思科尔科技有限公司 | 一种站台越界检测系统 |
Also Published As
Publication number | Publication date |
---|---|
FR3012784A1 (fr) | 2015-05-08 |
EP3065989A2 (fr) | 2016-09-14 |
WO2015063422A2 (fr) | 2015-05-07 |
FR3012784B1 (fr) | 2016-12-30 |
WO2015063422A3 (fr) | 2015-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105830131A (zh) | 用于检测行人相对于车辆轨迹的侧向位置的装置 | |
US9359009B2 (en) | Object detection during vehicle parking | |
JP5389002B2 (ja) | 走行環境認識装置 | |
US10163016B2 (en) | Parking space detection method and device | |
CN107077792B (zh) | 行驶控制系统 | |
JP5863233B2 (ja) | 運転者注視方向連動の前方衝突危険警報システム、その方法及びそれを利用した車両 | |
JP4879189B2 (ja) | 安全走行支援装置 | |
US8872919B2 (en) | Vehicle surrounding monitoring device | |
JP6304086B2 (ja) | 自動運転装置 | |
CN110065494B (zh) | 一种基于车轮检测的车辆防碰撞方法 | |
CN108263279A (zh) | 基于传感器整合的行人检测和行人碰撞避免装置及方法 | |
JP4847051B2 (ja) | 車両周囲監視方法およびシステム | |
KR101137817B1 (ko) | 주차 지원장치 | |
JP4420011B2 (ja) | 物体検知装置 | |
CN108238056A (zh) | 车载警告设备 | |
KR20180114723A (ko) | 차량 및 차량 후진 시 충돌방지 보조 방법 | |
WO2017042089A1 (en) | Automated detection of hazardous drifting vehicles by vehicle sensors | |
US10878253B2 (en) | Periphery monitoring device | |
CN106945660A (zh) | 一种自动泊车系统 | |
CN106568448A (zh) | 用于验证针对机动车辆的道路位置信息的系统和方法 | |
JP5712119B2 (ja) | 車両用歩行者報知装置 | |
JP2016199262A (ja) | 後退走行中の前輪軌道逸脱に基づく衝突の回避 | |
US10732420B2 (en) | Head up display with symbols positioned to augment reality | |
CN103241240A (zh) | 用于在汽车中保护外后视镜与侧面障碍物碰撞的装置 | |
CN107408338A (zh) | 驾驶员辅助系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160803 |
|
RJ01 | Rejection of invention patent application after publication |