CN104321224A - 具有摄像机监控系统的机动车 - Google Patents

具有摄像机监控系统的机动车 Download PDF

Info

Publication number
CN104321224A
CN104321224A CN201380025916.6A CN201380025916A CN104321224A CN 104321224 A CN104321224 A CN 104321224A CN 201380025916 A CN201380025916 A CN 201380025916A CN 104321224 A CN104321224 A CN 104321224A
Authority
CN
China
Prior art keywords
image
camera
self
region
pick
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380025916.6A
Other languages
English (en)
Other versions
CN104321224B (zh
Inventor
P·海纳曼
M·施利滕鲍尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Publication of CN104321224A publication Critical patent/CN104321224A/zh
Application granted granted Critical
Publication of CN104321224B publication Critical patent/CN104321224B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

一种机动车(1),包括至少两个摄像机(4、5、7、8、11)、至少一个处理装置(6、9、10)以及至少一个显示装置(2、3),所述至少两个摄像机至少沿车辆纵向相互间隔并用于检测机动车(1)的车辆环境,其中,处理装置(6、9、10)设计为用于由所述至少两个摄像机(4、5、7、8、11)的摄像机数据产生至少一个目标图像(25),其中,目标图像(25)包括两个并列设置的图像区域(26、27),其中,第一图像区域(26)的内容由第一摄像机(4、7、11)的图像数据确定,而第二图像区域(27)的内容由第二摄像机(5、8)的图像数据确定,其中,处理装置(6、9、10)设计为用于驱控显示装置(2、3)以便输出目标图像(25),其中,第一摄像机(4、7、11)是用于机动车的后部空间成像的后部空间摄像机,而第二摄像机(5、8)是用于广角检测位于机动车侧面的区域的侧面摄像机,其中,目标图像在第一图像区域(26)中对后部空间摄像机(4、7、11)的固定设定的立体角进行成像,而在第二图像区域(27)中对侧面摄像机(5、8)的固定设定的立体角进行成像,其中,侧面摄像机(5、8)和后部空间摄像机(4、7、11)的成像的立体角至少在机动车后面的区域中重叠。

Description

具有摄像机监控系统的机动车
技术领域
本发明涉及一种机动车,包括至少两个摄像机、至少一个处理装置以及至少一个显示装置,所述至少两个摄像机至少沿车辆纵向相互间隔并用于检测机动车的车辆环境,其中,处理装置设计为用于由所述至少两个摄像机的摄像机数据产生至少一个目标图像,其中,目标图像包括两个并列设置的图像区域,其中,第一图像区域的内容由第一摄像机的图像数据确定,而第二图像区域的内容由第二摄像机的图像数据确定,其中,处理装置设计为用于驱控显示装置以便输出目标图像。
背景技术
摄像机监控系统在现代机动车中越来越重要。摄像机监控系统的应用之一是摄像机和监控器的应用,以便代替传统的后视镜。通过一个或多个在机动车上设置的摄像机以及至少一个显示装置代替传统的反射镜允许可靠地显示后面的机动车环境的固定区域,而不依赖于驾驶员的座位位置。在一定条件下可以通过在外部设置在机动车上的摄像机监控系统也避免在机动车的外部区域中设置反射镜。这特别在空气阻力优化以及机动车吸引人的外观设计方面是有利的。
出于安全原因以及基于在一些国家的法律规定,显示器中的视野以及对象显示大小相应于传统反射镜的应用中的视野和显示大小。因此系统的摄像机必须限制于确定的可见范围并且经常被大幅度突出于车辆轮廓地固定,以便避免由于车辆轮廓对相关可见范围的遮盖。
在将可见范围限于一个相应于传统反射镜可见范围的可见范围的情况下,存在很大的死角,该死角既没有通过驾驶员转头也没有通过摄像机覆盖。此外,由于必需将摄像机设置在车辆的最外点上而大幅减小了使用摄像机监控系统相对于传统反射镜的优点,也就是改善空气动力学以及在其作用下更好的设计兼容性。
虽然可能的是通过扩展摄像机的可见范围来减小死角,然而这导致了图像内容的危及安全性的缩小。而且该解决方案无助于改善空气动力学或者更好的设计兼容性。
发明内容
因此本发明的目的在于,提出一种具有相对改善的摄像机监控系统的机动车。
该目的按照本发明由此实现:在开始所述类型的机动车中,第一摄像机是用于机动车的后部空间成像的后部空间摄像机,而第二摄像机是用于广角检测位于机动车侧面的区域的侧面摄像机,其中,目标图像在第一图像区域中对后部空间摄像机的固定设定的立体角进行成像,而在第二图像区域中对侧面摄像机的固定设定的立体角进行成像,其中,侧面摄像机和后部空间摄像机的成像的立体角至少在机动车后面的区域中重叠。
作为本发明的基础的构思在于,将所述摄像机用于对传统反射镜的可见范围进行成像和对死角进行成像,其中,由两个摄像机的数据产生一个共同的目标图像,该共同的目标图像在第一区域中显示第一摄像机的图像数据,所述图像数据特别是相应于传统的反射镜的视野。该图像数据在一个显示区域中显示,该显示区域有利地具有传统反射镜的图像的大小。在目标图像的与之并列的另一区域中实现第二摄像机的图像数据的显示,该显示特别是对死角进行成像。
在按照本发明的机动车中,可以为驾驶员特别直观地显示出关于车辆后部空间的信息。由此可以例如通过以下方式显示目标图像,使得第二区域位于图像的位置上,该图像在传统反射镜中相应于一个非球面区域。
作为侧面摄像机可以有利地使用所谓的俯视摄像机,该俯视摄像机在多种现代机动车中总归存在。这样的俯视摄像机是广角摄像机,其通常用于实现从上方对车辆环境的显示。备选地但是自然也可能的是使用仅仅配置给摄像机监控系统的侧面摄像机,该摄像机监控系统用作反射镜替代品。为了实现好地覆盖死角,然而也在此有利的是,侧面摄像机拍摄一个大的立体角。特别是在俯视摄像机的共同使用中有利的是,摄像机的视向基本上垂直于机动车行驶方向。在该情况下摄像机也可以非常接近车辆轮廓地设置或者集成到其中,而不会遮盖车辆部件的成像的立体角的主要部分。
因为机动车的侧面区域已经由侧面摄像机检测,所以可能的是,将后部空间摄像机移到机动车的后部空间中。这首先是有利的,因为后部空间摄像机可以在该情况下更接近机动车轮廓地设置,而机动车的部件不会遮盖通过后部空间摄像机成像的立体角的大部分。例如可以将一个设置在机动车尾部的摄像机无问题地集成到车辆几何结构中。在该情况下没有机动车部件设置在由摄像机成像的立体角中——尽管摄像机没有以必要的方式与车辆轮廓间隔。如此例如后部空间摄像机集成到尾灯中是可能的。
在最简单的情况下可以设定,在机动车的至少一侧上设置侧面摄像机、尾部摄像机以及显示装置。这三个构件与一个处理装置通信,该处理装置处理两个摄像机的图像数据并且在显示装置上显示目标图像。该目标图像分为两个并列设置的图像区域。在第一图像区域中——该第一图像区域例如可以大于第二图像区域——显示了由后部空间摄像机的数据确定的图像。该图像可以特别是相应于在机动车的后部空间中通过传统反射镜成像的立体角。该通过后部空间摄像机拍摄的角范围可以大于在第一图像区域中示出的角范围。然而为了实现显示——该显示相应于传统反射镜的视野和显示大小——仅仅使用图像数据的相应于一个立体角的部分,该立体角通过传统反射镜显示。这是可以轻易实现的,因为在数字摄像机中每个像素相应于一个固定的立体角。有待显示的立体角范围具有关于机动车的固定位置。由此立体角的选择可以例如通过固定设定后部空间摄像机的有待显示的像素实现。显示装置可以如此构成,使得显示装置的分辨率如此大,使得在第一图像区域中在高度和宽度上的像素的数量正好等于后部空间摄像机的图像的图像部分的高度和宽度。备选地然而也可以缩放后部空间摄像机的图像的待显示区域,以便使图像适配于第一区域的大小和分辨率。
为了计算在显示装置上所显示的目标图像,处理装置给第一图像区域还添加与之并列设置的第二图像区域。在该第二图像区域中显示侧面摄像机的图像数据。如已经提及的那样有利的是,侧面摄像机特别是沿水平方向对一个大的立体角进行成像。这一方面是有利的,因为在该情况下可以将侧面摄像机附加地用作俯视摄像机,另一方面由此也可能的是,基本上垂直于车身表面设置该摄像机。由此可以非常接近车身轮廓地设置摄像机,而车身不会覆盖通过摄像机成像的立体角的大部分。侧面摄像机的大的成像的角范围然而也导致成像的立体角的仅仅一部分对于应该对车辆后部空间进行成像的系统是相关的。处理装置现在选择每个相应于在第二图像区域中待显示的死角的像素。该死角相应于一个区域,该区域既没有成像在第一图像区域中,而且对于驾驶员也不容易看到。特别是关于侧面摄像机应该注意的是,基于在此应该成像的大的角范围的事实可能的是,成像不是中心投影的。在该情况下相应于期望的立体角部分的图像部分不必要是矩形的。特别是在侧面摄像机的图像数据的处理中,也就是在第二图像区域的产生中也可能的是,处理装置由侧面摄像机的非矩形的图像区域计算通常矩形的第二图像区域。但是这样的计算能够无问题地通过图像处理、特别是图像的校正的已知方法来实现。此外也适用于第二图像区域的是,该第二图像区域对机动车的环境的一个区域进行成像,该区域关于机动车具有一个固定位置。该位置也在非中心投影成像的情况下相应于固定数量的像素。因此,一次固定选择待处理的图像区域和处理可以在没有每个变化的情况下始终用于计算出第二图像区域。
自然也可能的是,对于左侧和右侧显示装置的图像——该左侧和右侧显示装置代替左侧和右侧传统反射镜——使用一个用于所有摄像机的共同的处理装置,所述所有摄像机用于数据获取。此外也可能的是,使用一个在车辆上的单个的后部空间摄像机来产生两个目标图像,一个用于左侧后部空间,而一个用于右侧后部空间。此外自然可以使用相同的摄像机用于产生相应于内后视镜的图像。
有利的是,侧面摄像机在水平面中的拍摄角大于90°,特别是大于120°。更大的拍摄角通常允许将侧面摄像机以一个相对于行驶方向更陡的角定向,而后部空间的大部分不会保持未成像。如上所述,相对于行驶方向更陡的角主要具有的优点在于,摄像机更接近于车辆轮廓设置并且可以集成到其中,而图像区域的大部分不会被车辆的部件覆盖。此外,大的拍摄角具有的优点在于,侧面摄像机除了应用在虚拟反射镜中之外也可以用作俯视摄像机。特别是可以使用鱼眼镜头,备选地然而也可以使用广角镜头或超广角镜头。
侧面摄像机的成像的角,也就是在目标图像的第二图像区域中示出的角可以在水平面中小于90°,特别是小于60°,特别是小于45°。以下所述的主要目标是可实现的:死角可以通过以下方式显示,即可以识别重要的细节。大的角范围、特别是大于90°的成像对于用于后部空间的成像的应用是没有意义的。大的角范围的成像还会导致:必须使用非常大的第二图像区域,或者第二图像区域的显示大幅变形。对于驾驶员难以可见的并且在第一图像区域中未示出的角范围通常已经能够以小于45°的成像角在水平面中成像。
对于虚拟后视镜有利的是,图像区域的大小被固定地设定。一方面可以由此可靠地满足法律规定,另一方面可以通过这样固定设定的图像区域可靠地实现可见范围的最佳效果。机动车的和安全相关的系统的使用恰恰应该是尽可能简单和直观的。如果在虚拟后视镜中不仅固定设定了对于两个图像区域中每个图像区域的示出的立体角而且还固定设定了图像区域的大小,那么可以固定设定完全的图像计算。这表示,总是将相同的运算应用于摄像机图像的图像数据,以便由两个摄像机图像得到目标图像。由此目标图像的计算是特别简单的并且由此也是特别抗变换的。
特别是在用于侧面摄像机的鱼眼镜头的应用中,在第二图像区域中产生的图像可以大幅变形。对于按照本发明的机动车的虚拟后视镜而言应该在该区域中显示死角。然而,该死角是成像的边缘区域并且由此特别大幅地变形。这特别是引起垂直线的大幅变形,该变形特别是在移动对象的成像中不相应于人的观察习惯。因此有利的是,处理装置设计为用于校正侧面摄像机的图像数据。而且该计算在固定设定的成像的立体角和第二图像区域的固定设定的大小的情况下是特别简单的。在该情况下可以对于在第二图像区域中目标图像的每个像素而言形成了在侧面摄像机的数据的若干少量像素上的加权的和,其中,固定设定加权系数。备选地然而也可能的是首先校正侧面摄像机的图像并且随后选择在目标图像的第二图像区域中显示的图像部分。
死角的角范围可以远大于相应于传统后视镜并且在第一图像区域中显示的角范围。此外,如果现在每个像素相应于在两个区域中类似的大的立体角范围,那么第二图像区域必须具有比第一图像区域更大的尺寸。这将导致非常大的显示装置。然而一般在死角的区域中相比于在通过传统后视镜成像的区域中对于驾驶员需要的信息更少。对于按照本发明的机动车的驾驶员特别重要的是知道是否另外的对象、特别是另外的机动车位于死角中。因此可以有利的是,处理装置设计为用于产生第二图像区域的图像数据,以便沿水平方向压缩侧面摄像机的图像数据。虽然这导致总地来说再现了关于死角的更少的信息,然而该信息足以容易地确定例如第二机动车位于死角中。
特别有利的是,处理装置设计为用于在目标图像中产生标记,该标记标出在两个图像区域之间的边界。这样的标记为驾驶员简化了两个图像区域的区别。由此总是清楚可见的是,目标图像的哪个区域相应于经典后视镜的图像,以及哪个区域由死角显示了图像数据。这主要出于两个原因是有利的。一方面驾驶员在该情况下立即识别到,另一对象——该另一对象不仅相对于本机动车而且也相对于环境移动——位于死角中。因为在死角中的对象接近地位于车辆之后或者已经在车辆旁边,所以这样的对象的识别特别是在车道转换时是必要的。另一方面驾驶员通过该标记获得以下清楚的指示:在第二图像区域中的显示以另一个角拍摄并且可能变形地显示。由此所感知到的间隔是不同的。
有利的是,目标图像全平面地在显示装置上被输出。按照本发明的机动车的虚拟后视镜是和安全相关的系统。因此在此有利的是,该系统尽可能简单地构成并且具有单独的显示元件。
可能的是,机动车具有两个在机动车侧面上设置的侧面摄像机,其中,所述侧面摄像机之一设置在机动车沿行驶方向的左侧,而另一侧面摄像机设置在机动车沿行驶方向的右侧。在该情况下,死角可以不仅在机动车左侧而且也在右侧成像。车辆此外可以具有两个显示装置,并且处理装置可以设计为用于:产生第一目标图像;驱控第一显示装置以便显示第一目标图像;产生第二目标图像;驱控第二显示装置以便显示第二目标图像,其中,第一目标图像的第二图像区域对第一侧面摄像机的图像数据进行成像,而第二目标图像的第二图像区域对第二侧面摄像机的图像数据进行成像。
备选地,机动车也可以具有两个显示装置和两个处理装置,其中,第一处理装置可以设计为用于产生第一目标图像并且用于驱控第一显示装置以便显示第一目标图像,其中,第一目标图像的第二图像区域对第一侧面摄像机的图像数据进行成像,而第二处理装置可以设计为用于产生第二目标图像并且用于驱控第二显示装置以便在第二显示装置上显示第二目标图像,其中,第二目标图像的第二图像区域对第二侧面摄像机的图像数据进行成像。
传统外后视镜的可见范围——其应该由按照本发明的机动车的虚拟后视镜成像——在一侧上基本上通过车辆侧的直线延长部限制。所述这种可见范围可以通过以下方式被特别好地再现:机动车具有两个后部空间摄像机,其中,第一目标图像的第一图像区域对第一后部空间摄像机的图像数据进行成像,而第二目标图像的第一图像区域对第二后部空间摄像机的图像数据进行成像。
附图说明
本发明的另外的优点和细节由在下文中所述的实施例以及根据附图得出。其中示出:
图1示出了按照本发明的机动车的一个实施例;
图2示出了按照本发明的机动车的另一实施例;
图3示出了按照本发明的机动车的第三实施例;
图4示出了具有传统反射镜的必要可见范围的机动车;
图5示出了在使用具有传统反射镜的位置和视角的摄像机的情况下视角的示意图;
图6示出了具有图5的摄像机可见范围的用于行驶情况的产生的图像;
图7示出了具有扩展的角范围的摄像机的视角的示意图;
图8示出了与图6中相同的行驶情况,然而以在图7中示出的摄像机角度拍摄;
图9示出了在按照本发明的机动车中摄像机的拍摄角的示意图;以及
图10示出了与在图6和图8中相同的交通情况,然而以在图9中示出的摄像机角度拍摄。
具体实施方式
图1示出了机动车1的原理图。机动车包括两个显示装置2、3,两个侧面摄像机5、8,两个后部空间摄像机4、7以及两个处理装置6、9。目标图像的产生应该通过左侧处理系的例子进行说明,该左侧处理系在显示装置2上显示目标图像。然而,以下说明同样适用于显示装置3目标图像的产生。处理装置6与后部空间摄像机4和侧面摄像机5以及显示装置2通信。在图1中的示意图中示出了在处理装置6与另外的构件之间的直接通信。备选地然而也可能的是,这样的连接通过车辆内部总线、例如CAN总线实现。
处理装置6接收后部空间摄像机4和侧面摄像机5的图像数据,计算目标图像并且如此驱控显示装置2,使得该显示装置显示目标图像。目标图像由两个区域组成,其中,第一图像区域由后部空间摄像机4的数据计算出,而第二图像区域由侧面摄像机5的数据计算出。此外,处理装置在图像的两个区域之间插入标记。目标图像也就由第一图像区域、标记和第二图像区域组成。
第一和第二图像区域的产生应该在下文中更准确地阐述。后部空间摄像机4拍摄一个角范围,该角范围大于对通过传统外后视镜成像的区域进行成像所必需的角范围。这随后依照图9和10更准确地阐明。该拍摄的图像数据被提供给处理装置6。因为后部空间摄像机4不具有太大的拍摄角度,所以后部空间摄像机4的图像没有或几乎没有变形。因此在处理装置6中后部空间摄像机4的图像数据的处理限于,每个相应于通过传统后视镜成像的立体角的图像数据被传输到第一图像区域中。如果图像数据的相应于待形成的立体角的尺寸正好相应于目标图像区域的像素大小,那么该成像可以直接通过像素信息的复制实现。假如这些大小是不一致的,那么此外可以在处理装置6中进行缩放,该缩放使得后部空间摄像机4的图像数据的使用的部分的分辨率适配于显示装置2的区域的分辨率,该显示装置可用于显示第一图像区域。
侧面摄像机5给处理装置6提供图像数据,图像数据用于计算第二图像区域。为了能够对大的角范围进行成像,侧面摄像机5设计为具有鱼眼镜头的摄像机。摄像机的视向基本上垂直于机动车车身。相应于死角的图像区域由此位于侧面摄像机5的图像的左边缘上。摄像机的图像的左部分的纯粹复制和/或缩放——为了计算第二图像区域——将导致大幅变形的成像,其中,成像的水平角范围在图像的上边缘和下边缘上大于在中间成像的水平角范围。因此侧面摄像机5的图像应该通过处理装置6校正。此外,在第二图像区域中待成像的死角的立体角大于在第一空间范围中待成像的立体角。如果该立体角必须相同类型地显示,那么由此第二图像区域必须比第一图像区域宽得多。然而,第一图像区域包括显示传统后视镜的信息。第二图像区域应该仅仅用于确定是否另外的移动的对象位于死角中。因此附加地在传输到第二图像区域中之前水平地压缩侧面摄像机5的校正的图像。
侧面摄像机5的图像校正、水平压缩以及可能必要的分辨率适配可以被组合在一起,其方法是:对于第二图像区域的每个像素选择侧面摄像机5的图像的单个像素。然而为了实现更好的图像质量,对于第二图像区域的每个像素计算出侧面摄像机5的图像的多个点的每个像素的加权的和。因为在第二图像区域中总是应该示出摄像机5的图像的相同的角部分并且该区域也总是大小相同,所以可以总是再次使用一次确定的点坐标和加权系数。由此为了计算目标而不需要复杂的运算,而是必须对于第一和第二图像区域的每个像素仅仅形成对于后部空间摄像机4或侧面摄像机5的图像数据的若干少量点的加权和。
计算的目标图像被写入到缓冲器中,该缓冲器被交付给显示装置。该显示装置显示图像。
图2示出了机动车的另一实施例。在此对于左显示装置2和左显示装置3的目标图像的计算使用一个共同的处理装置10。向处理装置10引导左和右侧面摄像机5、6和左和右后部空间摄像机4、7的信号。处理装置10由左摄像机4、5的数据计算目标图像并且驱控左显示装置2以便显示该图像并且由右摄像机7、8的数据计算另一目标图像并且驱控显示装置3以便显示该图像。目标图像的计算如图1所述那样实现。
如果在机动车中已经存在一个处理装置,该处理装置例如用于驾驶员辅助系统的数据处理,那么一个共同的处理装置的使用是特别有意义的。如果一个共同的处理装置用于多个计算任务,那么机动车的构造通常会更简单和更有利。
图3示出了具有虚拟反射镜的机动车的第三实施例。与图2的机动车的重要区别在于,在此对于两个目标图像的计算使用后部空间摄像机11的数据。由此,由侧面摄像机4的数据和后部空间摄像机11的部分图像计算第一目标图像并且在显示装置2上示出并且由侧面摄像机8以及后部空间摄像机11的另一部分图像的图像数据计算另一目标图像并且在显示装置3上显示。
图4示意地示出了:在机动车环境中的哪个区域必须被作为最低要求通过虚拟反射镜成像。在具有行驶方向12的机动车1中这是区域13和14。区域13、14基本上相应于这样的区域,该区域能够通过传统后视镜看到。该区域13、14应该类似于通过传统反射镜成像的方式进行成像。
图5为此示意地示出摄像机监控系统的视角,该摄像机监控系统模仿传统反射镜的功能。摄像机16在此与车身稍微间隔地设置,以便阻止车身覆盖图像区域的大部分。在此又以12表示机动车1的行驶方向。至少应该对区域13进行成像,其中,对象在显示器中的显示大小应该类似于传统反射镜。这由此实现:相应窄地选择摄像机16的拍摄角度23。
这种布置结构具有多个缺点。一方面死角15没有成像并且也不容易由驾驶员看到。由此对于驾驶员而言——正如在应用传统反射镜的情况下那样——缺少重要信息。为了通过摄像机16对区域13进行成像,另一方面必要的是将摄像机设置在车辆的前部区域中并且与车身相对远地间隔。两者可以对于机动车的空气阻力和设计是不利的。
图6示出了一种交通情况的通过根据图5的虚拟后视镜确定的图像19。在此仅仅机动车20是可见的,该机动车以统一的间隔在本机动车后面驶来。位于死角中的另一机动车在图6中不可见,因为图5的虚拟后视镜没有实现死角的成像。
图7示出了具有在前部区域中并且与车身间隔设置的摄像机的机动车1的拍摄角。死角15在此在摄像机的视野24中被一起检测,因为通过摄像机16拍摄的区域24相比于在图5中的摄像机16具有沿水平方向大很多的角度。图7中的摄像机16的、在之前已经描述过的交通情况下确定的图像在图8中示出。在此,除了机动车20之外现在也能够看到机动车22。然而应该注意,机动车20的显示在此比在图6中的显示小得多——尽管图像21已经明显更宽。这归因于图7的摄像机16的水平张角的大幅增大。与图5中摄像机16的张角23或传统反射镜的视角相比,在图7中的摄像机16的成像区域24的张角大约为三倍那么大。这对于对相对大的死角进行成像是必要的。然而这导致了显示的强烈的变小,这不是值得期望的并且也不在所有国家都被允许。如在图7中示出的摄像机的拍摄角16的增大也就仅仅随着显示装置的大幅增大才能实现。备选地可以在处理装置中压缩和/或变形地显示摄像机24的视野的相应于死角15的部分。由此能够实现更紧凑的显示,然而此外在前部区域中并且在车身之外较远处安放摄像机是必要的。如已经描述的那样,这对于机动车的设计和空气阻力是不利的。
图9示出了在机动车中形成的角,其中使用广角侧面摄像机以及在后部车辆区域中设置的后部空间摄像机用于产生虚拟反射镜的图像。至少待成像的区域13在此位于后部空间摄像机4的成像区域中。后部空间摄像机4实际上具有更大的拍摄角,然而仅仅使用了相应于待拍摄的立体角17的点。这些点显示在第一图像区域26中,该第一图像区域在图10中示出。第一图像区域26如传统后视镜或相应的摄像机监控系统的图像19那么大。同时,通过侧面摄像机5——其在机动车1中也用作俯视摄像机——拍摄在机动车侧面的区域18的广角图像。死角15位于该区域内。由摄像机5的图像数据——该摄像机显示整个区域18的拍摄——如已经描述的那样计算图像区域,该图像区域相应于死角15。此外,该区域被校正并且沿水平方向压缩。该第二图像区域27同样在图10中示出。由此在显示装置上输出目标图像25,该目标图像由第一图像区域26——该第一图像区域基本上再现了传统后视镜的图像、标记28以及第二图像区域27形成,该第二图像区域再现了死角的图像数据。通过该图像示出了如在图5和6中传统的摄像机监控系统的优点,并且如在图7和8中所示同时实现了具有另一成像角的摄像机监控系统的优点。此外,不仅后部空间摄像机4而且侧面摄像机5都可以集成到车辆轮廓中。由此可以实现更低的空气阻力并且展现了新的设计可能性。

Claims (12)

1.一种机动车(1),包括至少两个摄像机(4、5、7、8、11)、至少一个处理装置(6、9、10)以及至少一个显示装置(2、3),所述至少两个摄像机至少沿车辆纵向相互间隔并用于检测机动车(1)的车辆环境,其中,处理装置(6、9、10)设计为用于由所述至少两个摄像机(4、5、7、8、11)的摄像机数据产生至少一个目标图像(25),其中,目标图像(25)包括两个并列设置的图像区域(26、27),其中,第一图像区域(26)的内容由第一摄像机(4、7、11)的图像数据确定,而第二图像区域(27)的内容由第二摄像机(5、8)的图像数据确定,其中,处理装置(6、9、10)设计为用于驱控显示装置(2、3)以便输出目标图像(25),其中,第一摄像机(4、7、11)是用于机动车的后部空间成像的后部空间摄像机,而第二摄像机(5、8)是用于广角检测位于机动车侧面的区域的侧面摄像机,其中,侧面摄像机(5、8)和后部空间摄像机(4、7、11)的成像的立体角至少在机动车后面的区域中重叠,其中,后部空间摄像机设置在机动车的尾部,
其特征在于,
目标图像在第一图像区域(26)中对后部空间摄像机(4、7、11)的固定设定的立体角进行成像,而在第二图像区域(27)中对侧面摄像机(5、8)的固定设定的立体角进行成像,其中,在第一图像区域中显示出对传统的外后视镜的视野进行成像的图像数据。
2.根据权利要求1所述的机动车,其特征在于,所述侧面摄像机(5、8)在水平面上的拍摄角度大于90度,特别是大于120度。
3.根据权利要求1或2所述的机动车,其特征在于,所述侧面摄像机(5、8)在水平面上的成像角小于90度,特别是小于60度,特别是小于45度。
4.根据上述权利要求中任一项所述的机动车,其特征在于,图像区域(26、27)的大小被固定地设定。
5.根据上述权利要求中任一项所述的机动车,其特征在于,所述处理装置(6、9、10)设计为用于校正侧面摄像机(5、8)的图像数据。
6.根据上述权利要求中任一项所述的机动车,其特征在于,所述处理装置(6、9、10)设计为用于产生第二图像区域(27)的图像数据,以便沿水平方向压缩侧面摄像机(5、8)的图像数据。
7.根据上述权利要求中任一项所述的机动车,其特征在于,所述处理装置(6、9、10)设计为用于在目标图像(25)中产生标记(28),该标记标出在两个图像区域(26、27)之间的边界。
8.根据上述权利要求中任一项所述的机动车,其特征在于,所述目标图像(25)全平面地在显示装置(2、3)上被输出。
9.根据上述权利要求中任一项所述的机动车,其特征在于,所述机动车(1)具有两个在机动车侧面上设置的侧面摄像机(5、8),其中,所述侧面摄像机之一(5)设置在机动车(1)沿行驶方向的左侧,而另一侧面摄像机设置在机动车沿行驶方向的右侧。
10.根据权利要求9所述的机动车,其特征在于,所述机动车(1)具有两个显示装置(2、3),处理装置(10)设计为用于:产生第一目标图像(25);驱控第一显示装置(2)以便显示第一目标图像(25);产生第二目标图像;驱控第二显示装置(3)以便显示第二目标图像,其中,第一目标图像(25)的第二图像区域(27)对第一侧面摄像机(5)的图像数据进行成像,而第二目标图像的第二图像区域对第二侧面摄像机(8)的图像数据进行成像。
11.根据权利要求9所述的机动车,其特征在于,所述机动车(1)具有两个显示装置(2、3)和两个处理装置(6、9),其中,第一处理装置(6)设计为用于产生第一目标图像(25)并且用于驱控第一显示装置(2)以便显示第一目标图像(25),其中,第一目标图像(25)的第二图像区域(27)对第一侧面摄像机(5)的图像数据进行成像,而第二处理装置(9)设计为用于产生第二目标图像并且用于驱控第二显示装置(3)以便在第二显示装置(3)上显示第二目标图像,其中,第二目标图像的第二图像区域对第二侧面摄像机(8)的图像数据进行成像。
12.根据权利要求10或11所述的机动车,其特征在于,所述机动车(1)具有两个后部空间摄像机(4、7),其中,第一目标图像(25)的第一图像区域(26)对第一后部空间摄像机(4)的图像数据进行成像,而第二目标图像的第一图像区域对第二后部空间摄像机(7)的图像数据进行成像。
CN201380025916.6A 2012-12-22 2013-11-12 具有摄像机监控系统的机动车 Active CN104321224B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102012025322.2 2012-12-22
DE102012025322.2A DE102012025322B4 (de) 2012-12-22 2012-12-22 Kraftfahrzeug mit Kamera-Monitor-System
PCT/EP2013/003398 WO2014094941A1 (de) 2012-12-22 2013-11-12 Kraftfahrzeug mit kamera-monitor-system

Publications (2)

Publication Number Publication Date
CN104321224A true CN104321224A (zh) 2015-01-28
CN104321224B CN104321224B (zh) 2016-09-07

Family

ID=49554204

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380025916.6A Active CN104321224B (zh) 2012-12-22 2013-11-12 具有摄像机监控系统的机动车

Country Status (5)

Country Link
US (1) US9499099B2 (zh)
EP (1) EP2934947A1 (zh)
CN (1) CN104321224B (zh)
DE (1) DE102012025322B4 (zh)
WO (1) WO2014094941A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107826037A (zh) * 2016-09-15 2018-03-23 株式会社小糸制作所 摄像机监视系统

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013015847B3 (de) * 2013-09-24 2015-03-05 Mekra Lang Gmbh & Co. Kg Sichtsystem
DE102014106035A1 (de) * 2014-04-30 2015-11-05 Connaught Electronics Ltd. Verfahren zum Betreiben eines Fahrerassistenzsystems mit einem elektronischen Rückspiegel, Fahrerassistenzsystem und Kraftfahrzeug
EP3209017B1 (en) * 2014-10-17 2019-12-04 Ricoh Company, Ltd. Vehicle image display system
DE102014116285B4 (de) * 2014-11-07 2021-11-11 Connaught Electronics Ltd. Verfahren zum Betreiben eines Kamerasystems, Kamerasystem und Kraftfahrzeug
DE102014018040A1 (de) * 2014-12-05 2016-06-09 Mekra Lang Gmbh & Co. Kg Sichtsystem
DE102015202743A1 (de) * 2015-02-16 2016-08-18 Bayerische Motoren Werke Aktiengesellschaft Stirnflächenneutrale Positionierung einer Kamera an einem Fahrzeug
JP2016168877A (ja) * 2015-03-11 2016-09-23 株式会社東海理化電機製作所 車両用視認装置
US9902322B2 (en) 2015-10-30 2018-02-27 Bendix Commercial Vehicle Systems Llc Filling in surround view areas blocked by mirrors or other vehicle parts
JP6669569B2 (ja) * 2016-04-04 2020-03-18 アルパイン株式会社 車両用周辺監視装置
JP6344424B2 (ja) * 2016-04-19 2018-06-20 トヨタ自動車株式会社 周辺情報検出センサの取付構造
EP3511205A4 (en) * 2016-09-06 2020-03-04 Koito Manufacturing Co., Ltd. VEHICLE DETECTOR AND HEADLIGHT
US11034295B2 (en) * 2017-02-02 2021-06-15 Magna Electronics Inc. Vehicle vision system using at least two cameras
EP3451279A1 (en) 2017-08-30 2019-03-06 SMR Patents S.à.r.l. Rear view mirror simulation
CN110281846A (zh) * 2018-03-19 2019-09-27 株式会社小糸制作所 图像数据生成装置
EP3726473A1 (en) 2019-04-18 2020-10-21 SMR Patents S.à.r.l. Method for rearview device simulation
GB202017464D0 (en) * 2020-10-30 2020-12-16 Tractable Ltd Remote vehicle damage assessment
DE102021118100A1 (de) 2021-07-13 2023-01-19 Bayerische Motoren Werke Aktiengesellschaft Anzeigesystem für ein Fahrzeug

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002036954A (ja) * 2000-05-18 2002-02-06 Suekage Sangyo Kk 車両周辺監視装置および車両周辺監視システム
US7136754B2 (en) * 2003-04-11 2006-11-14 Daimlerchrysler Ag Free space monitoring system for motor vehicles
CN101269635A (zh) * 2007-03-23 2008-09-24 株式会社电装 视场监视设备
CN101396989A (zh) * 2007-09-26 2009-04-01 日产自动车株式会社 车辆周边监视设备和车辆周边监视方法
CN101396988A (zh) * 2007-09-26 2009-04-01 日产自动车株式会社 车辆周边监视设备和车辆周边监视方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5670935A (en) 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
JP3298851B2 (ja) * 1999-08-18 2002-07-08 松下電器産業株式会社 多機能車載カメラシステムと多機能車載カメラの画像表示方法
US6424273B1 (en) 2001-03-30 2002-07-23 Koninklijke Philips Electronics N.V. System to aid a driver to determine whether to change lanes
JP4021662B2 (ja) * 2001-12-28 2007-12-12 松下電器産業株式会社 運転支援装置及び画像出力装置並びにカメラ付きロッド
JP2003242366A (ja) 2002-02-14 2003-08-29 Nec Soft Ltd 個人データバンクおよび個人データ利用方法
DE10221513B4 (de) * 2002-05-14 2004-03-11 Ce-Sys Gmbh Ilmenau Verfahren zur Darstellung von Bildern mit verändertem Breite-Höhe-Verhältnis
US7576767B2 (en) * 2004-07-26 2009-08-18 Geo Semiconductors Inc. Panoramic vision system and method
DE102004060776A1 (de) * 2004-12-17 2006-07-06 Audi Ag Vorrichtung zur Aufnahme und Wiedergabe einer Bilddarstellung eines neben oder hinter einem Fahrzeug liegenden Verkehrsraumes
DE102007033735A1 (de) 2007-02-26 2008-08-28 Volkswagen Ag Verfahren und Vorrichtung zur Detektion von nachfolgenden Fahrzeugen in einem Kraftfahrzeug
DE102008034594B4 (de) * 2008-07-25 2021-06-24 Bayerische Motoren Werke Aktiengesellschaft Verfahren sowie Informationssystem zur Information eines Insassen eines Fahrzeuges
DE102010020201B4 (de) 2009-11-06 2021-08-26 Volkswagen Ag Verfahren und Vorrichtung zur Darstellung der Bilder eines Rückblickkamerasystems eines Kraftfahrzeugs
EP2431226B1 (de) * 2010-09-17 2016-07-27 SMR Patents S.à.r.l. Rückblickeinrichtung für ein Kraftfahrzeug
DE102011010624B4 (de) * 2011-02-08 2014-10-16 Mekra Lang Gmbh & Co. Kg Anzeigevorrichtung für Sichtfelder eines Nutzfahrzeugs
DE102011005102B3 (de) 2011-03-04 2012-08-16 Siemens Aktiengesellschaft Vorrichtung zum Ein- und Ausschalten eines elektrischen Schalters
DE102011121616A1 (de) 2011-12-20 2013-06-20 Audi Ag Verfahren zur Ansteuerung einerAnzeigeeinrichtung eines Kraftfahrzeugs
DE102012002149B3 (de) 2012-02-04 2013-06-20 Audi Ag Verfahren zur Visualisierung des Umfelds eines Kraftfahrzeugs und zugehöriges Kraftfahrzeug

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002036954A (ja) * 2000-05-18 2002-02-06 Suekage Sangyo Kk 車両周辺監視装置および車両周辺監視システム
US7136754B2 (en) * 2003-04-11 2006-11-14 Daimlerchrysler Ag Free space monitoring system for motor vehicles
CN101269635A (zh) * 2007-03-23 2008-09-24 株式会社电装 视场监视设备
CN101396989A (zh) * 2007-09-26 2009-04-01 日产自动车株式会社 车辆周边监视设备和车辆周边监视方法
CN101396988A (zh) * 2007-09-26 2009-04-01 日产自动车株式会社 车辆周边监视设备和车辆周边监视方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107826037A (zh) * 2016-09-15 2018-03-23 株式会社小糸制作所 摄像机监视系统
CN107826037B (zh) * 2016-09-15 2021-01-29 株式会社小糸制作所 摄像机监视系统

Also Published As

Publication number Publication date
DE102012025322A1 (de) 2014-06-26
WO2014094941A1 (de) 2014-06-26
CN104321224B (zh) 2016-09-07
EP2934947A1 (de) 2015-10-28
DE102012025322B4 (de) 2014-08-21
US9499099B2 (en) 2016-11-22
US20150343950A1 (en) 2015-12-03

Similar Documents

Publication Publication Date Title
CN104321224A (zh) 具有摄像机监控系统的机动车
CN106537904B (zh) 具有环境监测装置的车辆以及用于运行这种监测装置的方法
KR102193269B1 (ko) 차량 주변의 측방 및/또는 후방 구역을 재생하기 위한 방법 및 장치
CN103770706B (zh) 动态后视镜显示特征
US8441536B2 (en) Vehicle periphery displaying apparatus
JP2021170826A (ja) 車両・被牽引車両コンビの周辺シーンを表示するための方法、並びに、装置
CN107027329B (zh) 将行进工具的周围环境的局部图像拼接成一个图像
JP2018531530A6 (ja) 車両・被牽引車両コンビの周辺シーンを表示するための方法、並びに、装置
JP4640238B2 (ja) 車両周囲映像作成装置及び車両周囲映像作成方法
WO2013047012A1 (ja) 車両周辺監視装置
CN104859538A (zh) 车辆图像显示系统中基于视觉的物体感测和突出显示
JP5870608B2 (ja) 画像生成装置
CN101442618A (zh) 用于车辆辅助驾驶的360度环形视频合成方法
CN104163133A (zh) 使用后视镜位置的后视摄像机系统
JP2012147149A (ja) 画像生成装置
WO2003107273A1 (ja) 運転支援装置
JP5516998B2 (ja) 画像生成装置
US9682655B2 (en) Method and device for operating a vehicle
CN102291541A (zh) 一种车辆虚拟合成显示系统
JP2008141578A (ja) 車両周辺視認装置
JP2010028803A (ja) 駐車補助のための画像表示方法
CN105793909B (zh) 用于借助车辆周围环境的通过摄像机采集的两个图像产生警告的方法和设备
JP2012116400A (ja) コーナーポール投影装置
JP2019202584A (ja) 画像処理装置および画像処理方法
CN115936982A (zh) 用于协调从非重叠相机视图获取的图像的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant