CN103108796B - 辅助车辆停车操作的方法、驾驶员辅助系统和机动车辆 - Google Patents
辅助车辆停车操作的方法、驾驶员辅助系统和机动车辆 Download PDFInfo
- Publication number
- CN103108796B CN103108796B CN201180044159.8A CN201180044159A CN103108796B CN 103108796 B CN103108796 B CN 103108796B CN 201180044159 A CN201180044159 A CN 201180044159A CN 103108796 B CN103108796 B CN 103108796B
- Authority
- CN
- China
- Prior art keywords
- power actuated
- actuated vehicle
- image
- observation
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 230000000007 visual effect Effects 0.000 claims abstract description 37
- 230000003287 optical effect Effects 0.000 claims abstract description 13
- 230000008859 change Effects 0.000 claims description 11
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 7
- 230000008901 benefit Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- NBIIXXVUZAFLBC-UHFFFAOYSA-N Phosphoric acid Chemical compound OP(O)(O)=O NBIIXXVUZAFLBC-UHFFFAOYSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/027—Parking aids, e.g. instruction means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/027—Parking aids, e.g. instruction means
- B62D15/0275—Parking aids, e.g. instruction means by overlaying a vehicle path based on present steering angle over an image without processing that image
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/027—Parking aids, e.g. instruction means
- B62D15/028—Guided parking by providing commands to the driver, e.g. acoustically or optically
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/586—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/168—Driving aids for parking, e.g. acoustic or visual feedback on parking space
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Chemical & Material Sciences (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Automation & Control Theory (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Aviation & Aerospace Engineering (AREA)
- Electromagnetism (AREA)
- Traffic Control Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明提供一种方法,用于使用驾驶员辅助系统(2)对机动车辆(1)的停车操作进行辅助。驾驶员辅助系统(2)确定停车路径,沿该停车路径,机动车辆(1)可以被停放到停放空间(21)中或驶出该停放空间(21)。通过驾驶员辅助系统(2)的至少一个光学捕获装置(5a至5d)捕获关于机动车辆(1)的周围环境(10至13)的图像数据。处理图像数据以产生图像(19),该图像显示靠近机动车辆(1)的至少一个周围环境区域(20)的透视图。该图像(19)被显示在显示装置(3)上。图像(19)通过考虑机动车辆(1)在计算出的停车路径上的当前位置而产生。观察方向(14)和/或视场(15)可以例如基于机动车辆(1)在停车路径上的当前位置被调整,透视图自该观察方向(14)和/或视场(15)显示。本发明还涉及驾驶员辅助系统(2)和机动车辆(1)。
Description
技术领域
本发明涉及一种用于辅助机动车辆的停车操作的方法,其使用驾驶员辅助系统。通过确定停车路径以及通过借助驾驶员辅助系统的至少一个光学捕获装置而捕获关于机动车辆的周围环境的图像数据而提供所述辅助,机动车辆沿所述停车路径被停放到停放空间中(没有碰撞)或被驶出所述停放空间。图像数据被处理以产生图像,该图像显示出机动车辆附近的至少一个周围环境区域的透视图。图像被显示在显示装置上。本发明还涉及用于执行这样的方法的驾驶员辅助系统,并涉及具有这样的驾驶员辅助系统的机动车辆。
背景技术
从现有技术中已经已知停车辅助系统或驾驶员辅助装置,其辅助驾驶员执行停车操作。该辅助至少涉及机动车辆相对于被识别的潜在停放空间的当前相对位置,该停放空间作为驾驶员辅助系统计算停车路径的基础,机动车辆可以沿所述停车路径没有碰撞地停放到停放空间中。在最简单的停车辅助系统中,随后输出关于驾驶员需要如何转向以使机动车辆能被沿计算出处的停车路径停车的信息或建议。还已知系统,其中,在机动车辆的可转向轮被转向并因此自动(从而独立于驾驶员)转动时,告知驾驶员加速和制动。在完全自主或自动的停车辅助系统的情况下,系统还在车辆的传动系中采取动作;驾驶员仅需要启动自主停车操作,并还可以在任何时间中断停车操作。
例如,从文献WO2008/055567A1已知停车辅助系统。
在机动车辆内部中的显示装置上显示机动车辆周围环境的图像也是现有技术。最新的趋势是处理来自多个摄像头一起的图像数据,以产生这样的图像,其显示出机动车辆还有机动车辆周围的周围环境的平面图。在该情况下,机动车辆的地图被预先储存,而周围环境的地图基于动态基础每次重新通过连续捕获的图像数据被逐渐产生。机动车辆和其周围环境在这样的图像中以鸟瞰视角被显示。这样的方案例如从文献EP1179958A1以被披露的形式显现。在基于该文献的主题中,可以基于机动车辆的各个瞬时行进状态而改变机动车辆和周围环境被显示的观察方向。作为例子,可以基于车辆速度或基于当前转向角设定观察方向。
发明内容
本发明的目的是展示一种方案,该方案是在前述类型的方法的情况下,如何可以通过驾驶员辅助系统而辅助驾驶员执行停车操作,特别是以可靠和用户友好的方式。
通过具有根据本专利权利要求1的特征的方法、通过根据有关本专利权利要求13的特征的驾驶员辅助系统以及通过具有本专利权利要求14的特征的机动车辆而实现本发明的目的。本发明的有利实施例是本专利从属权利要求和说明书的主题。
根据本发明的用于辅助机动车辆的停车操作的方法包括驾驶员辅助系统,该系统确定停车路径,沿该停车路径,机动车辆可以被停放到停放空间中而没有碰撞或可以驶出该停放空间。关于机动车辆的周围环境的图像数据通过驾驶员辅助系统的至少一个光学捕获装置–例如摄像头–被捕获。驾驶员辅助系统处理图像数据以产生图像,该图像显示靠近机动车辆的至少一个周围环境区域的透视图–特别是从机动车辆上方观察的平面图。图像被显示在驾驶员辅助系统的显示装置上。本发明的主要构思在于通过考虑机动车辆在停车路径上的当前位置而产生图像。
由此,在由图像数据产生图像时或基于机动车辆相对于停放空间的各个当前相对位置产生图像时,通过考虑机动车辆在计算出出的停车路径上的各个瞬时位置而获得根据本发明的效果。以此方式,能以特别可靠和用户友好的方式辅助驾驶员执行停车操作。原因是,基于机动车辆的位置,图像可显示靠近机动车辆的各个不同区域,其结果是驾驶员具有显示给他的不同的周围环境的图像,即取决于在停车路径上的当前位置。因此可以从各个最佳视角显示靠近机动车辆的各个相关区域。
通常,图像的至少一个参数或至少一个性质可以通过考虑机动车辆相对于停放空间的各个当前位置而被设定。作为例子,这可以是观察方向和/或视场,透视图从该观察方向和/或视场被显示。在该实施例中,观察方向和/或视场由此基于机动车辆在停车路径上的当前位置而被设定。这具有的优势是,取决于机动车辆的位置,可以设定各个最佳的视角。驾驶员由此具有显示给他的图像,该图像从这样的观察方向或从这样的视场显示周围环境区域以及特别是机动车辆本身,所述观察方向或视场迎合最佳的视野或最佳的展示。作为例子,在停车操作开始时–当机动车辆处于停车路径的初始区域–观察方向可沿停放空间的方向指向,结果是停放空间被从机动车辆上方的视场展示。相反,在停车操作结束时,机动车辆和其周围环境可从这样的观察方向显示,该观察方向与车辆垂直轴线重合。这允许驾驶员无需很大努力就能推断机动车辆和在车辆之外的且界定停放空间的物体之间的距离。
在本文中,“观察方向”被理解为,表示虚拟观察者在看图像时所沿的方向。
另外,或作为替换,被绘制的周围环境区域的尺寸还可以基于机动车辆在停车路径上的当前位置而被设定。在该实施例中,换句话说,为周围环境区域的地图设定缩放因子。作为例子,这可采取这样的外观:在停车操作开始时,与在停车操作结束时相比,图像显示自机动车辆更大范围的周围环境区域。在该情况下,在停车操作开始时,驾驶员可还看到这样的阻碍物,所述阻碍物位于距机动车辆相对较大距离处,例如即在停放空间中,其结果是如果必要的话停车操作也可被中断。另一方面,在停车操作结束时,驾驶员能以高准确度水平确定机动车辆和界定停放空间的障碍物之间的距离。这样的方式由此首先满足安全停车操作、其次满足用户友好的显示。
优选地,图像数据被处理,从而图像从机动车辆上方显示至少靠近机动车辆的周围环境区域的平面图。换句话说,在该实施例中,图像从鸟瞰视角显示周围环境区域以及可能地机动车辆的至少一个区域。确切地,这为驾驶员提供监视周围环境区域和可能地以最小努力推断机动车辆和在车辆之外的物体之间的距离的选项。
在一个实施例中,对于停车路径的至少一段,除了周围环境区域之外,图像还显示机动车辆的至少一个区域。特别地,图像显示整个机动车辆以及对于停车路径的至少一段显示机动车辆周围的周围环境区域的平面图。在该情况下,驾驶员在所显示的图像中可以不仅看到周围环境,而且可以看到他自己的机动车辆;他能推断出障碍物相对于机动车辆的各个瞬时相对位置。
机动车辆的地图被展示在显示装置上,优选地在固定位置处或静止地在所显示的图像中,而周围环境区域的地图每次从图像数据重新产生或被逐渐调整。机动车辆的地图优选地预先存储,即在驾驶员辅助系统的存储器中。作为被在固定位置处展现的机动车辆的结果,可以展示靠近机动车辆的各个相同的周围环境区域,或周围环境区域可总是展示至距机动车辆的相同范围。
在机动车辆通过停放空间时,总是勘察或捕获停放空间。则确切地,发现如果驾驶员能在显示装置上看到停放空间是特别有利的。在捕获停放空间的操作期间–也就是说,特别是在机动车辆通过停放空间时–因此透视图可以从这样的观察方向显示,所述观察方向促使停放空间以透视展示被显示在图像中。如果停放空间仍在机动车辆前方,观察方向可由此具有机动车辆的行进方向的方向分量和机动车辆的横向半轴线的方向分量,即对右侧交通方式特别是右横向半轴线和对左侧交通方式特别是左横向半轴线。相反,如果停放空间–沿行进方向观察–已经在机动车辆之后,观察方向可具有与行进方向相反的方向分量以及对所说的横半轴线的方向分量。原因是,在该情况下,能够保证停放空间总是绘制在所显示的图像中,且驾驶员在显示装置上看到停放空间的透视图。
如果机动车辆在车道的初始区域,透视图可自这样的观察方向显示,所述观察方向沿停车路径的结束方向指向或沿停放空间方向指向。也在该情况下,驾驶员可在显示装置上看到停放空间的透视图。
在停车操作期间,如果停车路径的剩余距离小于规定的最小值,或如果机动车辆到达停车路径的规定的结束区域,则透视图可以从这样的观察方向显示,所述观察方向与车辆垂直轴线重合。在该情况下,驾驶员在显示装置上以直角看到周围环境区域以及特别地整个机动车辆的平面图;驾驶员可因此特别安全地操纵机动车辆,因为他能特别容易地确定机动车辆和障碍物之间的距离。
当机动车辆沿停车路径移动时,观察方向和/或视场也可以逐渐地改变–即随时间连续地–至少对于一段停车路径。优选地,平稳地进行观察方向和/或视场的这种改变,即,从而驾驶员不会感受到观察方向的突兀改变。观察方向或视场的这种改变是特别用户友好的,且此外,确保驾驶员在所显示的图像中总是能够保持他的取向。作为例子,观察方向和/或视场的逐渐改变可基于机动车辆的当前速度和/或基于停车路径的剩余距离而发生,所述剩余距离即距停放空间的最终位置还剩下的距离。特别地,观察方向和/或视场的逐渐改变的速度可基于机动车辆的速度和/或基于剩余距离而被设定。
使用图像数据和/或使用来自距离传感器–特别是超声传感器–的数据,驾驶员辅助系统还可以检测在车辆之外的至少一个物体。在该情况下,该物体可具有叠加在其上的预定标记,或可以被该标记遮蔽,至少在被显示的图像中的区域中。因此,机动车辆的周围环境中的物体可以被加亮,结果是,驾驶员能极其容易地识别它们。
图像数据由至少一个光学捕获装置捕获。发现如果图像数据由至少两个、特别是由至少三个光学捕获装置捕获是特别有利的。还可以设置总共四个光学捕获装置。由此还可以总共使用多个捕获装置,即在左侧板上一个捕获装置和/或在左外视镜上一个捕获装置和/或在右侧板上一个捕获装置和/或在右外视镜上一个捕获装置和/或在机动车辆的前保险杠上和/或在后保险杠上或尾板上一个捕获装置。总体上,捕获装置能够捕获机动车辆周围的周围环境的360°图像。所述至少一个捕获装置可以是摄像头,例如,即特别是CMOS(互补金属氧化物半导体)摄像头或CCD(电荷耦合装置)摄像头。
优选地,所述至少一个光学捕获装置具有值为170°至195°范围的捕获角。由此,所述至少一个捕获装置优选地是鱼眼摄像头。以此方式,可以使用仅三个或四个捕获装置以捕获机动车辆周围的整个周围环境。驾驶员辅助系统由此仅要求较小数量的捕获装置。
此外,本发明提供了用于机动车辆、即用于辅助停车操作的驾驶员辅助系统。驾驶员辅助系统包括至少一个光学捕获装置,用于捕获关于机动车辆的周围环境的图像数据。其还包括控制装置,用于确定用于停车操作的停车路径以及用于处理图像数据以产生图像,所述图像显示靠近机动车辆的至少一个周围环境区域的透视图。图像显示在驾驶员辅助系统的显示装置上。控制装置被设计为通过考虑机动车辆在停车路径上的当前位置而产生图像。
根据本发明的机动车辆包括根据本发明的驾驶员辅助系统。参考根据本发明的方法提出的优选实施例以及所述实施例的优势相应地适用于根据本发明的驾驶员辅助系统和根据本发明的机动车辆。
本发明进一步的特征出自权利要求、附图和对附图的描述。在上述说明中所述的所有特征和特征组合以及在附图描述中和/或仅在附图中示出的特征和特征组合不仅能够分别以指出的组合使用,还可以其他组合或它们本身地使用。
附图说明
现将使用单个优选示例性实施例并还参考附图来更详细地解释本发明,其中:
图1显示了具有基于本发明实施例的驾驶员辅助系统的机动车辆的平面图的示意图;
图2显示了图1所示的机动车辆的示意性透视图,更详细地解释了由图像数据产生图像;和
图3至5显示了由图像数据产生的图像的时序图,其在停放空间的勘察期间和对机动车辆进行停车操作的期间被显示。
具体实施方式
机动车辆1如图1所示是小汽车。机动车辆1包括驾驶员辅助系统2,该辅助系统包括以下部件:显示装置3、控制装置4,还有四个摄像头5a至5d。控制装置4促动显示装置3。摄像头5a至5d将被捕获的图像数据传送至控制装置4,即例如经由机动车辆1的内部通信总线。
作为例子,显示装置3可以是LCD显示器。替代地,其可以是图像投影仪,所述投影仪可用于将图像投射到机动车辆1的挡风玻璃6上(平视显示(Head-Up-Display))。
控制装置4,即存储器7,储存有机动车辆1的地图,且更精确地说,是表示机动车辆1的地图的数据。
摄像头5a至5d被安装在机动车辆1的外表面上。在图1中仅作为例子显示了摄像头5a至5d的数量和布置;取决于实施例,摄像头5a至5d的数量和其在机动车辆1上的布置可改变。在示例性实施例中,第一摄像头5a被布置在机动车辆1的前保险杠上,而第二摄像头5b被布置在后保险杠上或尾板上。第三摄像头5c被安装在左侧面上;其可还被并入在左外视镜8中。第四摄像头5d被安装在右侧面上,即在右外视镜9的区域中。第四摄像头5d可还并入在外视镜9中。
每个摄像头5a至5d具有宽的捕获角,且因此称为鱼眼摄像头。作为例子,各捕获角可以在自170°至195°的值的范围内。从图1可以明显看出,第一摄像头5a捕获机动车辆1前方的区域10,而第二摄像头5b捕获机动车辆1后面的区域11。相应地,第三摄像头5c捕获机动车辆1左边的区域12;第四摄像头5d捕获机动车辆1右边的区域13。摄像头5a至5d由此能捕获机动车辆1周围的几乎全部周围环境,即360°图像。
控制装置4能处理由摄像头5a至5d捕获的图像数据。控制装置4可使用图像数据以产生图像,该图像显示从机动车辆1上方观察的机动车辆1的周围环境的平面图,即捕获区域10至13。控制装置4可由此获得图像数据,并产生图像,该图像以鸟瞰视角显示捕获区域10至13的平面图。
如已经解释的,存储器7储存机动车辆1的地图。该地图还从鸟瞰视角显示机动车辆1;换句话说,该地图从机动车辆1的上方显示机动车辆1的平面图。控制装置4可获得(take)机动车辆1的地图和使用图像数据产生的周围环境的地图,并且产生周围环境的图像,该图像显示机动车辆1和机动车辆1周围的周围环境二者的平面图,即从鸟瞰视角。单个周围环境的图像因此被用于从鸟瞰视角展示机动车辆1的周围环境和机动车辆1本身。周围环境的该图像可通过控制装置4显示在显示装置3上。周围环境的该图像可被连续地显示;这意味着可针对车辆1的周围环境逐渐地或动态地调整周围环境的图像。原因在于,图像数据被摄像头5a至5d逐渐捕获,周围环境的图像基于动态基础每次从被逐渐捕获的图像数据重新产生。在周围环境的图像中,机动车辆1可在固定位置或被静态地显示,而周围环境的地图可被一直更新和动态地调整。
由此,控制装置4可产生周围环境的图像,其以从机动车辆1上方观察的透视展示来显示机动车辆附近的周围环境区域以及机动车辆的平面图。这样的图像展示机动车辆1以及周围环境区域,也就是说从鸟瞰视角。如图2所示,控制装置4可产生这样的图像,其展示自观察方向14以及自虚拟摄像头16的视场15观察的平面图。由此,产生了使用这样的摄像头16将会产生的图像。在图2中展示的摄像头16是假象或虚拟摄像头,其实际上并不存在。只有来自摄像头5a至5d的图像数据被处理,从而由其产生的图像显示自观察方向14和虚拟摄像头16的视场15观察的平面图。
示例性实施例特别地涉及辅助驾驶员将机动车辆1停放到停放空间中。为了这个目的,驾驶员辅助系统2包括两个距离传感器17、18,即特别是超声传感器。第一距离传感器17是安装在左侧面上–例如在前保险杠的左边缘区域中–而第二距离传感器18对称地设置在机动车辆1的相反侧上。对停车操作的支持至少包括:驾驶员辅助系统2首先捕获停放空间,然后获取机动车辆1相对于停放空间的当前位置,作为用于计算停车路径的基础,沿该停车路径,机动车辆1可没有碰撞地被停放在停放空间中。通常,在机动车辆1通过停放空间时,停放空间被捕获或被勘察。当识别出适当的停放空间时,驾驶员被告知,并能开始停车操作。当在垂直停放空间中停放时和当在平行停放空间中停车时,驾驶员辅助系统2都可辅助驾驶员。
在停放空间的勘察期间和在停车操作期间,显示装置3用于显示图像,该图像由图像数据产生,所述图像数据基于连续的基础每次重新被逐渐捕获。这涉及通过考虑机动车辆相对于停放空间的各个瞬时相对位置或通过考虑机动车辆1在计算出的停车路径上的当前位置而产生图像。具体地,在示例性实施例中,观察方向14、视场15以及被绘制的周围环境区域的尺寸–也就是说针对虚拟摄像头16的虚拟捕获角α–基于机动车辆1相对于停放空间的各个瞬时位置或机动车辆1在计算出的停车路径上的当前位置而被设定。
图3至5显示了图像19的示例性时序图,如在停车操作期间在显示装置3上所展示的。图3自透视视角显示机动车辆1’以及机动车辆1的周围环境区域20。机动车辆1’通过一连串其他机动车辆。在机动车辆1’的右侧,存在停放空间21,其通过距离传感器18勘察。图3中所示的图像19将机动车辆1’展示在固定位置或静态地展示了机动车辆1’,而周围环境区域20每次重新从被连续捕获的图像数据逐渐产生。由此,在图像19中的周围环境区域20移动,即包括所述一连串其他机动车辆,如通过箭头标记22所展示的。在图3中展示的图像19自机动车辆1’之后的视场15显示机动车辆1’以及周围环境区域20。此外,观察方向14大体指向机动车辆1的行进方向。更精确地,观察方向14包含行进方向的方向分量以及机动车辆1的右侧横向半轴线的方向分量。以此方式,可以绘制出位于机动车辆1前方的停放空间21。
当机动车辆1通过停放空间21时,能使用距离传感器18勘察该停放空间21。如果该停放空间21适于停车,则通知驾驶员。在图4中示出的图像19中,停放空间21已经在机动车辆1之后。因为该停放空间21适于停车,观察方向14现被持续改变,且停放空间21以透视表示被显示。图像19用于询问驾驶员是否应该开始停车操作。在图4中示出的图像19中,机动车辆1由此处于计算出的停车路径的初始区域。在该情况下,观察方向14沿停车路径21的方向指向。视场15可位于机动车辆1之后或在机动车辆1之上或在机动车辆1前方。
停放空间21通过在图4中示出的图像19中的标记23被加亮。紧邻停放空间21的其他机动车辆还每个都具有叠加在其他机动车辆上或遮蔽它们的标记24、25。因此,这些机动车辆也被加亮。
当机动车辆1进入停车路径的规定的结束区域中时或当停车路径的剩余距离小于规定的最小值时,观察方向14和视场15被改变,从而它们与车辆垂直轴线z重合(图2)。图5中展示了用于该观察方向14的这样的图像19。图5中显示的图像19由此显示整个机动车辆1’以及周围环境区域20(其相对于图像平面成直角)的平面图。驾驶员可因此使用该图像19,以特别容易地推断机动车辆1和在车辆之外的物体之间的距离。图5中示出的图像19还将机动车辆1’展示在固定位置,而周围环境区域20每次重新从被逐渐捕获的图像数据被绘制。
从图3所示的图像19经由图4所示的变化到图5所示的图像19的变化在示例性实施例中持续进行,即,从而驾驶员不会感知到图像19的任何突兀变化。由此平顺地进行过渡。这意味着观察方向14和视场15被持续地变化。还可设置使得观察方向14和/或视场15随时间连续地变化持续停车路径的至少一段。作为例子,该变化的速度可基于机动车辆1的各当前速度和/或基于停车路径的剩余距离或机动车辆1和在停放空间21中的最终位置之间的距离而被设定。
Claims (13)
1.一种用于使用驾驶员辅助系统(1)辅助机动车辆(1)的停车操作的方法,该方法包括:
-确定停车路径,沿该停车路径,机动车辆(1)被停放到停放空间(21)中或驶出该停放空间(21),
-通过驾驶员辅助系统(1)的至少一个光学捕获装置(5a至5d)捕获关于机动车辆(1)的周围环境(10至13)的图像数据,
-处理图像数据,以产生图像(19),该图像显示靠近机动车辆(1)的至少一个周围环境区域(20)的透视图,且将该图像(19)显示在显示装置(3)上,
其特征在于
图像(19)通过考虑机动车辆(1)在停车路径上的当前位置而被产生,使得观察方向(14)和/或视场(15)基于机动车辆(1)在停车路径上的当前位置被设定,透视图自该观察方向(14)和/或视场(15)显示,或
被绘制的周围环境区域(20)的尺寸基于机动车辆(1)在停车路径上的当前位置被设定。
2.如权利要求1所述的方法,
其特征在于
图像数据被处理,从而图像(19)从机动车辆(1)上方显示靠近机动车辆(1)的至少周围环境区域(20)的平面图。
3.如权利要求1或2所述的方法,
其特征在于
对于停车路径的至少一段,除了周围环境区域(20)之外,图像(19)还显示机动车辆(1’)的至少一个区域。
4.如权利要求3所述的方法,
其特征在于
机动车辆(1’)的地图在被显示的图像(19)中被展示在固定位置,而周围环境区域(20)的地图每次重新通过图像数据产生。
5.如权利要求1或2所述的方法,
其特征在于
在捕获停放空间(21)的操作期间,在机动车辆(1)通过停放空间(21)时,以这样的观察方向(14)显示透视图,该观察方向具有机动车辆(1)的行进方向的方向分量和机动车辆(1)的右横向半轴线的方向分量。
6.如权利要求1或2所述的方法,
其特征在于
当机动车辆(1)位于车道的初始区域时,透视图从这样的观察方向(14)显示,所述观察方向沿停车路径的结束方向指向。
7.如权利要求1或2所述的方法,
其特征在于
当停车路径的剩余距离低于规定的最小值时,透视图从这样的观察方向(14)显示,所述观察方向与车辆垂直轴线(z)重合。
8.如权利要求1或2所述的方法,
其特征在于
当机动车辆(1)沿停车路径移动时,对于至少一段停车路径,基于机动车辆(1)的当前速度和/或基于停车路径的剩余距离而逐渐改变观察方向(14)和/或视场(15),透视图自所述观察方向(14)和/或视场(15)显示。
9.如权利要求1或2所述的方法,
其特征在于
图像数据由至少两个光学捕获装置(5a至5d)捕获。
10.如权利要求1或2所述的方法,
其特征在于
图像数据由至少三个光学捕获装置(5a至5d)捕获。
11.如权利要求1或2所述的方法,
其特征在于
所述至少一个光学捕获装置(5a至5d)具有的捕获角在170°至195°的范围中。
12.一种用于机动车辆(1)的驾驶员辅助系统(1),其用于辅助停车操作,具有:
至少一个光学捕获装置(5a至5d),用于捕获关于机动车辆(1)的周围环境(10至13)的图像数据,
控制装置(4),用于确定用于停车操作的停车路径,并用于处理图像数据以产生图像(19),所述图像显示靠近机动车辆(1)的至少一个周围环境区域(20)的透视图,和
显示装置(3),用于显示图像(19),
其特征在于
控制装置(4)被设计为通过考虑机动车辆(1)在停车路径上的当前位置而产生图像(19),使得观察方向(14)和/或视场(15)基于机动车辆(1)在停车路径上的当前位置被设定,透视图自该观察方向(14)和/或视场(15)显示,或
被绘制的周围环境区域(20)的尺寸基于机动车辆(1)在停车路径上的当前位置被设定。
13.一种机动车辆(1),其具有根据权利要求12所述的驾驶员辅助系统(1)。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102010034139A DE102010034139A1 (de) | 2010-08-12 | 2010-08-12 | Verfahren zur Unterstützung eines Parkvorgangs eines Kraftfahrzeugs, Fahrerassistenzsystem und Kraftfahrzeug |
DE102010034139.8 | 2010-08-12 | ||
PCT/EP2011/063182 WO2012019932A1 (de) | 2010-08-12 | 2011-08-01 | Verfahren zur unterstützung eines parkvorgangs eines kraftfahrzeugs, fahrerassistenzsystem und kraftfahrzeug |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103108796A CN103108796A (zh) | 2013-05-15 |
CN103108796B true CN103108796B (zh) | 2016-04-06 |
Family
ID=44545684
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201180044159.8A Active CN103108796B (zh) | 2010-08-12 | 2011-08-01 | 辅助车辆停车操作的方法、驾驶员辅助系统和机动车辆 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10558221B2 (zh) |
EP (1) | EP2603413B1 (zh) |
JP (1) | JP2013533168A (zh) |
CN (1) | CN103108796B (zh) |
DE (1) | DE102010034139A1 (zh) |
WO (1) | WO2012019932A1 (zh) |
Families Citing this family (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102804762A (zh) * | 2009-06-29 | 2012-11-28 | 松下电器产业株式会社 | 车载用影像显示装置 |
KR101340738B1 (ko) * | 2011-11-08 | 2013-12-12 | 엘지이노텍 주식회사 | 주차 보조 시스템 |
DE102012016868A1 (de) * | 2012-08-25 | 2014-02-27 | Audi Ag | Verfahren und System zum Betreiben eines Fahrzeugs unter Überwachung der Fortbewegung des Fahrzeugs mit Hilfe einer Kameraeinrichtung einer mobilen Bedieneinrichtung |
US10599818B2 (en) * | 2012-10-02 | 2020-03-24 | Banjo, Inc. | Event-based vehicle operation and event remediation |
JP6223685B2 (ja) | 2013-01-30 | 2017-11-01 | 富士通テン株式会社 | 画像処理装置および画像処理方法 |
DE102013011969A1 (de) * | 2013-07-18 | 2015-01-22 | GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) | Verfahren zum Betreiben eines Kraftfahrzeugs und Kraftfahrzeug |
DE102014009985A1 (de) * | 2014-07-04 | 2016-01-07 | Daimler Ag | Verfahren zum Betreiben eines Kraftfahrzeugs in verschiedenen Fahrmodi sowie Kraftfahrzeug |
DE102014111951A1 (de) * | 2014-08-21 | 2016-02-25 | Valeo Schalter Und Sensoren Gmbh | Verfahren zum Warnen eines Fahrers eines Kraftfahrzeugs vor der Anwesenheit eines Objekts in der Umgebung, Fahrerassistenzsystem und Kraftfahrzeug |
DE102014113957A1 (de) * | 2014-09-26 | 2016-03-31 | Connaught Electronics Ltd. | Verfahren zum Konvertieren eines Bilds, Fahrerassistenzsystem und Kraftfahrzeug |
WO2016087900A1 (en) * | 2014-12-05 | 2016-06-09 | Audi Ag | Driver assistance system for a vehicle as well as method for assisting a driver of a vehicle |
US20160176340A1 (en) * | 2014-12-17 | 2016-06-23 | Continental Automotive Systems, Inc. | Perspective shifting parking camera system |
DE102015200044B4 (de) * | 2015-01-06 | 2022-07-07 | Ford Global Technologies, Llc | Verfahren und Vorrichtung zur Unterstützung eines Manövriervorganges eines Kraftfahrzeugs |
FR3036353B1 (fr) * | 2015-05-20 | 2018-12-07 | Valeo Comfort And Driving Assistance | Procede de controle interactif du stationnement automatique d'un vehicule automobile au moyen d'un terminal mobile |
DE102015112289A1 (de) * | 2015-07-28 | 2017-02-02 | Valeo Schalter Und Sensoren Gmbh | Verfahren zum Identifizieren eines Objekts in einem Umgebungsbereich eines Kraftfahrzeugs, Fahrerassistenzsystem sowie Kraftfahrzeug |
US11691619B2 (en) | 2015-08-12 | 2023-07-04 | Hyundai Motor Company | Automatic parking system and automatic parking method |
US10392009B2 (en) * | 2015-08-12 | 2019-08-27 | Hyundai Motor Company | Automatic parking system and automatic parking method |
CN105141927A (zh) * | 2015-09-22 | 2015-12-09 | 浙江吉利汽车研究院有限公司 | 一种车载图像监控装置 |
CN108140311B (zh) * | 2015-10-22 | 2021-08-24 | 日产自动车株式会社 | 停车辅助信息的显示方法及停车辅助装置 |
CN105405249B (zh) * | 2015-12-01 | 2017-12-29 | 小米科技有限责任公司 | 防碰撞方法、装置、测距传感器及终端 |
DE102015121952A1 (de) * | 2015-12-16 | 2017-06-22 | Valeo Schalter Und Sensoren Gmbh | Verfahren zum Identifizieren eines Objektes in einem Umgebungsbereich eines Kraftfahrzeugs, Fahrerassistenzsystem sowie Kraftfahrzeug |
CN106515722B (zh) * | 2016-11-08 | 2018-09-21 | 西华大学 | 一种垂直泊车轨迹规划方法 |
EP3550829B1 (en) * | 2017-04-03 | 2021-08-11 | Jvc Kenwood Corporation | Bird's-eye-view video generation device, bird's-eye-view video display device, bird's-eye-view video generation method, and program |
DE102017218074A1 (de) * | 2017-10-11 | 2019-04-11 | Robert Bosch Gmbh | Verfahren zum Darstellen einer Umgebung eines Fahrzeugs |
JP2019116244A (ja) * | 2017-12-27 | 2019-07-18 | トヨタ自動車株式会社 | 車両 |
US10614320B2 (en) * | 2018-04-03 | 2020-04-07 | Honda Motor Co., Ltd. | System and method for advanced highway lane detection |
CN108921973A (zh) * | 2018-06-11 | 2018-11-30 | 合肥越明交通电子科技有限公司 | 一种评判车辆运行姿态的高精度智能检测预警系统 |
US11066067B2 (en) * | 2018-06-29 | 2021-07-20 | Baidu Usa Llc | Planning parking trajectory for self-driving vehicles |
DE102018214874B3 (de) * | 2018-08-31 | 2019-12-19 | Audi Ag | Verfahren und Anordnung zum Erzeugen einer mit Bildinformationen texturierten Umfeldkarte eines Fahrzeugs und Fahrzeug umfassend eine solche Anordnung |
JP7475107B2 (ja) * | 2019-03-27 | 2024-04-26 | パナソニックオートモーティブシステムズ株式会社 | 電子ミラーシステム、画像表示方法、及び移動体 |
DE102019208788A1 (de) * | 2019-06-17 | 2020-12-17 | Volkswagen Aktiengesellschaft | Kraftfahrzeug |
JP2021043815A (ja) * | 2019-09-12 | 2021-03-18 | アイシン精機株式会社 | 画像処理装置 |
DE102020107108A1 (de) * | 2020-03-16 | 2021-09-16 | Kopernikus Automotive GmbH | Verfahren und System zum autonomen Fahren eines Fahrzeugs |
GB2595271A (en) * | 2020-05-20 | 2021-11-24 | Daimler Ag | A method for an automated parking of motor vehicle, as well as an assistance system |
CN111731273B (zh) * | 2020-06-22 | 2022-08-09 | 重庆长安汽车股份有限公司 | 自动泊车限位桩工况识别方法及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1333626A (zh) * | 2000-07-07 | 2002-01-30 | 松下电器产业株式会社 | 图像合成装置和方法 |
CN1344470A (zh) * | 1999-04-16 | 2002-04-10 | 松下电器产业株式会社 | 图象处理装置及监视系统 |
CN1559055A (zh) * | 2001-09-26 | 2004-12-29 | �ձ������ȷ湫˾ | 图象产生装置、图象产生方法、电子设备和计算机程序 |
CN1731450A (zh) * | 2004-08-05 | 2006-02-08 | 株式会社东芝 | 监视设备以及显示鸟瞰视图的方法 |
CN1766932A (zh) * | 2004-10-25 | 2006-05-03 | 索尼株式会社 | 信息处理装置及方法、程序以及导航装置 |
CN1975331A (zh) * | 2005-11-28 | 2007-06-06 | 株式会社电装 | 车辆停泊辅助系统和方法 |
CN101085608A (zh) * | 2006-06-05 | 2007-12-12 | 富士通株式会社 | 记录介质、停车辅助装置和停车辅助画面 |
WO2009044654A1 (ja) * | 2007-10-01 | 2009-04-09 | Nissan Motor Co., Ltd. | 駐車支援装置及び駐車支援方法 |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7277123B1 (en) * | 1998-10-08 | 2007-10-02 | Matsushita Electric Industrial Co., Ltd. | Driving-operation assist and recording medium |
JP3698039B2 (ja) * | 2000-09-18 | 2005-09-21 | 日産自動車株式会社 | 駐車支援装置 |
JP3297040B1 (ja) * | 2001-04-24 | 2002-07-02 | 松下電器産業株式会社 | 車載カメラの画像合成表示方法及びその装置 |
KR100866450B1 (ko) * | 2001-10-15 | 2008-10-31 | 파나소닉 주식회사 | 차량 주위 감시 장치 및 그 조정 방법 |
JP2003219411A (ja) * | 2002-01-17 | 2003-07-31 | Clarion Co Ltd | 車両周囲監視方法および車両周囲監視装置 |
JP2003267171A (ja) | 2002-03-13 | 2003-09-25 | Nissan Motor Co Ltd | 車両後方監視装置 |
JP4427953B2 (ja) * | 2003-01-29 | 2010-03-10 | 株式会社豊田自動織機 | 駐車支援装置 |
JP3938559B2 (ja) * | 2003-08-28 | 2007-06-27 | アイシン精機株式会社 | 車両後退支援装置 |
JP4023478B2 (ja) * | 2004-08-03 | 2007-12-19 | 株式会社デンソー | 駐車支援システム |
EP1696669B1 (en) * | 2005-02-24 | 2013-07-03 | Aisin Seiki Kabushiki Kaisha | Vehicle surrounding monitoring device |
JP4815993B2 (ja) * | 2005-10-19 | 2011-11-16 | アイシン・エィ・ダブリュ株式会社 | 駐車支援方法及び駐車支援装置 |
JP4682809B2 (ja) * | 2005-11-04 | 2011-05-11 | 株式会社デンソー | 駐車支援システム |
JP2007176244A (ja) * | 2005-12-27 | 2007-07-12 | Aisin Seiki Co Ltd | 駐車支援装置 |
JP4863791B2 (ja) | 2006-07-05 | 2012-01-25 | アルパイン株式会社 | 車両周辺画像生成装置および画像切替方法 |
DE102006031895B4 (de) * | 2006-07-07 | 2014-03-27 | Continental Automotive Gmbh | Anzeigesystem zur Visualisierung von Fahrzeugabständen |
US7728879B2 (en) * | 2006-08-21 | 2010-06-01 | Sanyo Electric Co., Ltd. | Image processor and visual field support device |
DE102006052575A1 (de) | 2006-11-08 | 2008-05-21 | Volkswagen Ag | Parklenkassistent mit verbesserter Quereinparkfunktion |
JP4915966B2 (ja) * | 2007-01-16 | 2012-04-11 | パイオニア株式会社 | 車両用表示装置の調整方法及び車両用表示装置 |
KR100854766B1 (ko) * | 2007-04-27 | 2008-08-27 | 주식회사 만도 | 거리 센서를 이용한 주차 공간 검출 방법 |
JP5003946B2 (ja) * | 2007-05-30 | 2012-08-22 | アイシン精機株式会社 | 駐車支援装置 |
DE102007044536A1 (de) * | 2007-09-18 | 2009-03-19 | Bayerische Motoren Werke Aktiengesellschaft | Vorrichtung zum Überwachen der Umgebung eines Kraftfahrzeugs |
US8218007B2 (en) * | 2007-09-23 | 2012-07-10 | Volkswagen Ag | Camera system for a vehicle and method for controlling a camera system |
JP4900232B2 (ja) * | 2007-12-26 | 2012-03-21 | 日産自動車株式会社 | 車両用駐車支援装置および映像表示方法 |
DE102008060684B4 (de) * | 2008-03-28 | 2019-05-23 | Volkswagen Ag | Verfahren und Vorrichtung zum automatischen Einparken eines Kraftfahrzeugs |
JP4716139B2 (ja) * | 2008-05-14 | 2011-07-06 | アイシン精機株式会社 | 周辺監視装置 |
JP5017213B2 (ja) * | 2008-08-21 | 2012-09-05 | 本田技研工業株式会社 | 運転支援装置 |
DE102008046544A1 (de) * | 2008-09-10 | 2009-05-20 | Daimler Ag | Verfahren und Vorrichtung zur Überwachung einer Umgebung eines Fahrzeuges |
-
2010
- 2010-08-12 DE DE102010034139A patent/DE102010034139A1/de not_active Withdrawn
-
2011
- 2011-08-01 JP JP2013523561A patent/JP2013533168A/ja active Pending
- 2011-08-01 WO PCT/EP2011/063182 patent/WO2012019932A1/de active Application Filing
- 2011-08-01 EP EP11743807.7A patent/EP2603413B1/de active Active
- 2011-08-01 CN CN201180044159.8A patent/CN103108796B/zh active Active
- 2011-08-01 US US13/814,952 patent/US10558221B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1344470A (zh) * | 1999-04-16 | 2002-04-10 | 松下电器产业株式会社 | 图象处理装置及监视系统 |
CN1333626A (zh) * | 2000-07-07 | 2002-01-30 | 松下电器产业株式会社 | 图像合成装置和方法 |
CN1559055A (zh) * | 2001-09-26 | 2004-12-29 | �ձ������ȷ湫˾ | 图象产生装置、图象产生方法、电子设备和计算机程序 |
CN1731450A (zh) * | 2004-08-05 | 2006-02-08 | 株式会社东芝 | 监视设备以及显示鸟瞰视图的方法 |
CN1766932A (zh) * | 2004-10-25 | 2006-05-03 | 索尼株式会社 | 信息处理装置及方法、程序以及导航装置 |
CN1975331A (zh) * | 2005-11-28 | 2007-06-06 | 株式会社电装 | 车辆停泊辅助系统和方法 |
CN101085608A (zh) * | 2006-06-05 | 2007-12-12 | 富士通株式会社 | 记录介质、停车辅助装置和停车辅助画面 |
WO2009044654A1 (ja) * | 2007-10-01 | 2009-04-09 | Nissan Motor Co., Ltd. | 駐車支援装置及び駐車支援方法 |
Also Published As
Publication number | Publication date |
---|---|
DE102010034139A1 (de) | 2012-02-16 |
CN103108796A (zh) | 2013-05-15 |
JP2013533168A (ja) | 2013-08-22 |
US10558221B2 (en) | 2020-02-11 |
EP2603413B1 (de) | 2015-09-09 |
WO2012019932A1 (de) | 2012-02-16 |
EP2603413A1 (de) | 2013-06-19 |
US20130169792A1 (en) | 2013-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103108796B (zh) | 辅助车辆停车操作的方法、驾驶员辅助系统和机动车辆 | |
US8441536B2 (en) | Vehicle periphery displaying apparatus | |
KR102206272B1 (ko) | 주차 지원 방법 및 주차 지원 장치 | |
US10810446B2 (en) | Parking space line detection method and device | |
US9139133B2 (en) | Vehicle collision warning system and method | |
US9620009B2 (en) | Vehicle surroundings monitoring device | |
EP2455927A1 (en) | Driving support device, driving support method, and program | |
CN109792507A (zh) | 周边监视装置 | |
CN110621550B (zh) | 泊车控制方法以及泊车控制装置 | |
JP6723820B2 (ja) | 画像生成装置、画像表示システムおよび画像表示方法 | |
JP2004240480A (ja) | 運転支援装置 | |
JP2018142885A (ja) | 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム | |
WO2019008762A1 (ja) | 駐車支援方法及び駐車支援装置 | |
JP2012076551A (ja) | 駐車支援装置、駐車支援方法、及び、駐車支援システム | |
JP2009246808A (ja) | 車両用周辺監視装置 | |
JP6439233B2 (ja) | 車両用画像表示装置及び画像処理方法 | |
JP6573218B2 (ja) | 車両用画像表示装置及び設定方法 | |
JP6044429B2 (ja) | 駐車支援装置、及び駐車支援方法 | |
KR20160107529A (ko) | 차량 이미지가 애니메이션되는 주차 안내 장치 및 방법 | |
JP5723561B2 (ja) | 運転支援装置 | |
JP6586972B2 (ja) | 車両用画像表示装置及び画像処理方法 | |
JP2012061989A (ja) | 画像処理装置、及び、画像処理方法 | |
WO2022202780A1 (ja) | 表示制御装置 | |
JP2009214790A (ja) | 撮像装置および方法、並びに、画像処理装置および方法 | |
WO2018037032A1 (en) | A vehicle camera system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |