CN101396988A - 车辆周边监视设备和车辆周边监视方法 - Google Patents

车辆周边监视设备和车辆周边监视方法 Download PDF

Info

Publication number
CN101396988A
CN101396988A CNA2008101683289A CN200810168328A CN101396988A CN 101396988 A CN101396988 A CN 101396988A CN A2008101683289 A CNA2008101683289 A CN A2008101683289A CN 200810168328 A CN200810168328 A CN 200810168328A CN 101396988 A CN101396988 A CN 101396988A
Authority
CN
China
Prior art keywords
image
vehicle
original image
zone
read out
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008101683289A
Other languages
English (en)
Other versions
CN101396988B (zh
Inventor
知野见聪
柳拓良
赤塚健
中野良宣
川野勉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Publication of CN101396988A publication Critical patent/CN101396988A/zh
Application granted granted Critical
Publication of CN101396988B publication Critical patent/CN101396988B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02Rear-view mirror arrangements
    • B60R1/04Rear-view mirror arrangements mounted inside vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12Mirror assemblies combined with other articles, e.g. clocks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038Image mosaicing, e.g. composing plane images from plane sub-images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1253Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B60R2300/8026Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明涉及一种车辆周边监视设备和车辆周边监视方法。车辆周边监视设备包括摄像装置、显示装置和图像处理装置。摄像装置用于拍摄车辆的后方区域的第一原始图像以及车辆的侧后方区域的第二原始图像。显示装置包括第一显示区域和布置在第一显示区域侧面的第二显示区域。图像处理装置用于在第一显示区域中显示根据第一原始图像的第一显示图像,并在第二显示区域中显示根据第二原始图像的第二显示图像,以在显示装置上形成组合后的图像,其中,第二显示图像从第二原始图像水平压缩的程度至少比第一显示图像的大。

Description

车辆周边监视设备和车辆周边监视方法
技术领域
本发明涉及一种用于向驾驶员呈现车辆的后方区域和车辆的侧后方区域的图像的车辆周边监视设备和图像显示方法。
背景技术
在传统技术中,已经使用车载(安装在车辆上的)照相机来拍摄车辆的后方区域和车辆的侧后方区域的图像。然后,在安装在车辆内部的显示装置上显示该图像,从而驾驶员能够精确地确定车辆的正后方和侧后方的区域中的情况。这可以在确保与车辆的内后视镜和门镜的盲点相对应的区域的视野的同时通过观看方向上的少量改变来实现。
例如,  日本特开2003-81014号公报公开了这样一种车辆周边监视设备:该车辆周边监视设备使用安装在车辆的尾端部分的后方照相机(rearward camera)来拍摄车辆的后方区域的图像,并使用安装在车辆的左门镜和右门镜上的一对侧部照相机(lateral camera)来拍摄车辆的侧后方区域的图像。该传统的车辆周边监视设备将这些图像显示在配置在车辆内部的单个显示装置上。这些图像水平并排显示在显示装置上,从而车辆的后方区域的图像位于车辆的侧(左侧和右侧)后方区域的图像之间。
发明内容
本发明的一个目的是提供一种能够显示本车辆的驾驶员可以相对容易识别的图像的车辆周边监视设备和图像显示方法。
鉴于上述,一种车辆周边监视设备包括摄像装置、显示装置和图像处理装置。摄像装置用于拍摄车辆的后方区域的第一原始图像以及所述车辆的侧后方区域的第二原始图像。显示装置安装在所述车辆内部。所述显示装置包括第一显示区域和布置在所述第一显示区域侧面的第二显示区域。图像处理装置用于在所述显示装置的所述第一显示区域中显示根据所述车辆的所述后方区域的所述第一原始图像的第一显示图像,并在所述显示装置的所述第二显示区域中显示根据所述车辆的所述侧后方区域的所述第二原始图像的第二显示图像,以在所述显示装置上形成组合后的图像,其中,所述第二显示图像从所述第二原始图像水平压缩的程度至少比所述第一显示图像的大。
根据本发明的另一方面,一种车辆周边监视设备,包括:摄像部件,用于拍摄车辆的后方区域的第一原始图像和所述车辆的侧后方区域的第二原始图像;图像处理部件,用于根据所述车辆的所述后方区域的所述第一原始图像生成第一显示图像,并根据所述车辆的所述侧后方区域的所述第二原始图像生成第二显示图像,其中,所述第二显示图像从所述第二原始图像水平压缩的程度至少比所述第一显示图像的大;以及显示部件,用于在第一显示区域中显示所述第一显示图像,并在第二显示区域中显示所述第二显示图像,以在所述显示部件上形成组合后的图像。
根据本发明的又一方面,一种车辆周边监视方法,包括:拍摄车辆的后方区域的第一原始图像和所述车辆的侧后方区域的第二原始图像;根据所述车辆的所述后方区域的所述第一原始图像生成第一显示图像,并根据所述车辆的所述侧后方区域的所述第二原始图像生成第二显示图像,其中,所述第二显示图像从所述第二原始图像水平压缩的程度至少比所述第一显示图像的大;以及在显示装置的第一显示区域中显示所述第一显示图像,并在所述显示装置的第二显示区域中显示所述第二显示图像,以在所述显示装置上形成组合后的图像。
附图说明
现在参考形成该原始公开的一部分的附图:
图1是根据第一实施例的用于本车辆的车辆周边监视设备的示意图;
图2是示出根据第一实施例的利用本车辆的内后视镜和左右门镜可以观察到的本车辆的正后方区域和本车辆的侧后方区域的示意图;
图3是示出根据第一实施例的安装在本车辆内部的图像显示装置的显示区域的示例的示意图;
图4是示出通过将正后方图像PB、右侧后方图像PR和左侧后方图像PL组合成单个广角(wide angle)图像所获得的图像的示例的示意图,其中根据图像显示装置的显示区域的大小调整各个图像的图像大小;
图5是根据第一实施例的如在内后视镜中观察到的本车辆的后方区域的镜面反射图像的示意图;
图6是示出根据第一实施例的在车辆周边监视设备的图像显示装置上显示的图像的第一示例的示意图;
图7是示出根据第一实施例的在车辆周边监视设备的图像显示装置上显示的图像的第二示例的示意图;
图8是示出根据第一实施例的在车辆周边监视设备的图像显示装置上显示的图像的第三示例的示意图;
图9是示出根据第一实施例的在车辆周边监视设备的图像显示装置上显示的图像的第四示例的示意图;
图10是根据第一实施例的车辆周边监视设备的控制系统的简化框图;
图11是示出根据第一实施例的在车辆周边监视设备中使用的摄像装置(车载照相机)的结构的示例的示意图;
图12是根据第二实施例的车辆周边监视设备的控制系统的简化框图;
图13是示出根据第二实施例的在车辆周边监视设备中使用的摄像装置(车载照相机)的结构的示例的示意图。
具体实施方式
现在参考附图说明本发明的优选实施例。根据本公开,对于本领域的技术人员来说,以下对实施例的说明仅是示例性的,并且目的不是为了限制由所附权利要求书及其等同物所限定的本发明,这是显而易见的。
第一实施例
首先参考图1,将说明根据第一实施例的用于本车辆V的车辆周边监视设备。如在图1中所示,根据第一实施例的车辆周边监视设备配备有包括后部摄像机(后方照相机)1、右侧摄像机(侧向照相机)2和左侧摄像机(侧向照相机)3的多个车载照相机。后部照相机1安装在本车辆V的后部。右侧照相机2安装在本车辆V的右侧部分。左侧照相机3安装在本车辆V的左侧部分。后部照相机1、右侧照相机2和左侧照相机3构成第一实施例的摄像装置,该摄像装置用于拍摄本车辆的正后方区域的图像以及本车辆V的侧后方区域的图像。右侧照相机2和左侧照相机3优选用于顺序拍摄本车辆的后方区域的图像(视频)以及本车辆V的侧后方区域的图像。车辆周边监视设备还包括图像处理单元10(图像处理装置的一个示例),该图像处理单元10用于根据利用后部照相机1、右侧照相机2和左侧照相机3获得的所拍摄图像来生成显示图像。此外,车辆周边监视设备包括安装在本车辆V的内部的显示装置(图像显示装置)4。显示装置4用于为本车辆V的驾驶员显示由图像处理单元10生成的显示图像。更具体地,图像处理单元10用于基于由后部照相机1、右侧照相机2和左侧照相机3拍摄到的图像来生成包括本车辆V的正后方区域和本车辆V的侧后方区域的视频图像,并在显示装置4上显示所生成的图像。
现在参考图2,将说明本车辆V的正后方区域的图像(下文中称为“后方图像PB”)和本车辆V的侧后方区域的图像(下文中,将车辆的右侧后方区域的图像称为“右侧后方图像PR”,并将车辆的左侧后方区域的图像称为“左侧后方图像PL”)之间的关系。
图2是示出配备有根据第一实施例的车辆周边监视设备的本车辆V的主要后方区域的示意图。更具体地,图2示出本车辆V的驾驶员利用本车辆V的内后视镜RM以及左门镜DML和右门镜DMR可以观察到的本车辆V的正后方区域和本车辆V的侧后方区域。在图2中,将驾驶员利用后视镜RM可以观察到的区域表示为区域A1,将驾驶员利用右门镜DMR可以观察到的区域表示为区域A2,并且将驾驶员利用左门镜DML可以观察到的区域表示为区域A3。  当利用后视镜RM及右门镜DMR和左门镜DML来观察区域A1、A2和A3时,实际可以观察到的区域被由本车辆V的车辆主体的结构而引起的盲点(即,不能看见的区域)所中断。然而,在本说明书中,为了简洁,忽略这些盲点。此外,利用后视镜RM及右门镜DMR和左门镜DML实际可以观察到的区域A1、A2和A3依赖于后视镜RM及右门镜DMR和左门镜DML的角度以及驾驶员眼睛的位置(眼点)而改变。然而,在本说明书中,将假定镜面角度和眼点固定在通常的平均位置。
在根据第一实施例的车辆周边监视设备中,显示在显示装置4上的后方图像PB是从本车辆V向后方延伸的以本车辆V的纵向中心轴为中心的区域的图像,例如,驾驶员在本车辆V的后视镜RM中可以观察到的后方区域A1的图像。换句话说,如图2中所示,后方图像PB是这样一种图像:在该图像中,可以观察到与本车辆V行驶在同一车道中的跟随车辆V1,并且如果行驶在相邻车道中的跟随车辆V2位于本车辆V后面至少规定距离(例如,20米)处,则可以观察到该跟随车辆V2。
右侧后方图像PR是位于后方图像PB中拍摄到的后方区域的右侧且与该后方区域相邻的区域的图像。右侧后方图像PR至少包括驾驶员在本车辆V的右门镜DMR中可以观察到的右侧后方区域A2。换句话说,如在图2中所示,右侧后方图像PR是这样一种图像:在该图像中,即使在本车辆V正行驶的车道右侧并且与本车辆V正行驶的车道相邻的车道中行驶的跟随车辆V3与本车辆V相对较近,仍可以观察到跟随车辆V3。
左侧后方图像PL是位于后方图像PB中拍摄到的后方区域的左侧且与该后方区域相邻的区域的图像。左侧后方图像PL至少包括驾驶员在本车辆V的左门镜DML中可以观察到的左侧后方区域A3。换句话说,如在图2中所示,左侧后方图像PL是这样一种图像:在该图像中,即使在本车辆V正行驶的车道左侧并与本车辆V正行驶的车道相邻的车道中行驶的跟随车辆V4与本车辆V相对较近,仍可以观察到跟随车辆V4。
包括在后方图像PB中的本车辆V的后方区域不一定必须与本车辆V的驾驶员在后视镜RM中可以观察到的后方区域A1完全一致。代替地,包括在后方图像PB中的本车辆V的后方区域可以大于或小于区域A1。在任何一种情况下,右侧后方图像PR是位于后方图像PB中拍摄到的区域右侧并且与该区域相邻的区域的图像,并且左侧后方图像PL是位于后方图像PB中拍摄到的区域左侧并且与该区域相邻的区域的图像。包括在右侧后方图像PR和左侧后方图像PL中的区域的大小应当至少大到足以包括区域A2和A3。
在第一实施例中,图像处理单元10用于在显示装置4上显示图像,使得与后方图像PB相比更大程度地压缩了右侧后方图像PR和左侧后方图像PL,稍后将对此进行更详细地说明。因此,优选包括在右侧后方图像PR和左侧后方图像PL中的区域的大小不大,从而当在显示装置4上进行显示时图像的可视性不致于由于压缩而大大劣化。
现在参考图3至图9,将说明显示区域的结构,在该显示区域中,在车辆周边监视设备的显示装置4上显示后方图像PB、右侧后方图像PR以及左侧后方图像PL。更具体地,现在将使用如下情况作为示例来说明显示后方图像PB、右侧后方图像PR和左侧后方图像PL的方法的概要,其中,在该情况下,在本车辆V后面大约2米的距离处,跟随车辆V1行驶在与本车辆V相同的车道中。
图3是示出显示装置4的多个显示区域的示例的示意图。图4是示出通过将后方图像PB、右侧后方图像PR和左侧后方图像PL组合成单个广角图像所获得的图像的比较示例的示意图,其中,根据显示装置4的相应显示区域的大小调整各个图像PB、PR和PL的图像大小。图5是示出如在后视镜RM中观察到的本车辆V的后方区域A1的镜面反射图像的示意图。
如在图5中所示,当跟随车辆V1在本车辆V后面大约2米处行驶并且本车辆V的驾驶员在后视镜RM中观察后方情况时,跟随车辆V1在后视镜RM中看到的反射图像中看上去相对较大。由于驾驶员习惯在后视镜RM中观看镜面反射图像,因此驾驶员具有用于基于跟随车辆V1在镜面反射图像中的大小来估计与跟随车辆V1的近似距离的感知。
图4示出在车辆周边监视设备的比较示例中显示的图像,其中,使用安装在本车辆V的后部的车载照相机来拍摄本车辆V的后方和侧后方的大的区域的图像作为广角图像,并且根据显示装置4的显示区域的大小调整图像大小,将该图像显示在显示装置4上。在该比较示例中,如图4所示,跟随车辆V1在显示装置4上显示的广角图像中看起来小。更具体地,与驾驶员习惯观看的后视镜RM中的跟随车辆V1(图5)相比,跟随车辆V1在显示图像中看起来小很多。因此,如果如图4所示仅根据显示装置4的显示区域的大小来调整图像的大小而显示该广角图像,则本车辆V的驾驶员可能不能够精确地判断与跟随车辆V1的距离,并且可能错误地假定跟随车辆V1比其实际的距离要远。
因此,在根据第一实施例的车辆周边监视设备中,在显示装置4上显示包括了与利用后视镜RM可以观察到的区域相对应的本车辆V的后方区域的、具有与后视镜RM的镜面反射图像的图像外观接近的图像外观的后方图像PB。更具体地,例如,将后方图像PB转换成与后视镜RM的镜面反射图像的大小相对应的图像大小(基准图像大小)。如在图3中所示,显示装置4包括划分成中间显示区域D1、右侧显示区域D2和左侧显示区域D3的显示区域。中间显示区域D1是布置在显示装置4的水平中间部分中的相对宽的显示区域。将后方图像PB转换成与后视镜RM的镜面反射图像相对应的图像大小并显示在显示装置4的中间显示区域D1中。图像大小不需要与后视镜RM的镜面反射图像的大小完全相同。图像大小使驾驶员可以以与利用后视镜RM的反射图像获得的深度感知类似的方式来感知距离就足够了。当由后部照相机1和/或右侧照相机2和左侧照相机3获得与图4中所示的图像类似的广角图像时,图像处理单元10用于从广角图像提取与后方图像PB(对应于图2中的区域A1)相对应的图像部分,将所提取的图像放大到使得能够获得与利用后视镜RM的反射图像所获得的深度感知相类似的深度感知的图像大小,并将放大后的图像显示在显示装置4的中间显示区域D1中。
另一方面,图像处理单元10用于显示右侧后方图像PR和左侧后方图像PL,使得对右侧后方图像PR和左侧后方图像PL进行比后方图像PB更大程度的压缩,从而使得能够在显示装置4的有限显示区域中显示后方图像PB、右侧后方图像PR和左侧后方图像PL。在位于中间显示区域D1外侧的右侧显示区域D2和左侧显示区域D3中显示右侧后方图像PR和左侧后方图像PL。
为了获得显示在显示装置4上的具有与后视镜RM及左门镜DML和右门镜DMR的镜面反射图像类似的外观的图像,显示利用后部照相机1、右侧照相机2和左侧照相机3拍摄到的图像以便水平反转这些图像。换句话说,与如果沿利用车载照相机拍摄的方向看将会看到的情形(即,如果驾驶员转身并且向后方看将会看到的情形)相比,后视镜RM或左门镜DML或右门镜DMR的反射图像被水平反转。因此,水平反转利用后部照相机1、右侧照相机2和左侧照相机3拍摄的图像以与镜面反射图像相对应并且在显示装置4上显示这些图像,从而在中间显示区域D1中显示后方图像PB,在位于中间显示区域D1右侧的右侧显示区域D2中显示右侧后方图像PR,并且在位于中间显示区域D1左侧的左侧显示区域D3中显示左侧后方图像PL。另一方面,如果显示图像将显示在显示装置4上,使得图像的外观与车载照相机的拍摄方向相对应,则不水平反转由车载照相机拍摄的图像并且在左侧显示区域D3中显示右侧后方图像PR并在右侧显示区域D2中显示左侧后方图像PL。
图6是示出由根据第一实施例的车辆周边监视设备显示的图像的示例的示意图。如之前所述,在根据第一实施例的车辆周边监视设备中,在显示装置4的中间显示区域D1中显示后方图像PB,以使其图像大小与如图5所示的后视镜RM的镜面反射图像相对应。在右侧显示区域D2和左侧显示区域D3中显示右侧后方图像PR和左侧后方图像PL,以使对右侧后方图像PR和左侧后方图像PL进行比后方图像PB更大程度的压缩(例如,以更高的压缩比进行压缩)。结果,如图6所示,可以更高效地使用图像显示装置的有限显示区域以显示包括大的区域的图像,并且可以显示后方图像PB,以使驾驶员可以基于显示在显示装置4上的图像来正确地感知距离。
在图6中示出的显示示例中,仅在水平方向上压缩了右侧后方图像PR和左侧后方图像PL。然而,如图7所示,在水平方向和垂直方向上均压缩右侧后方图像PR和左侧后方图像PL也是可接受的。通过如图7所示在水平和垂直方向上均进行压缩,可以抑制右侧后方图像PR和左侧后方图像PL的失真,并且可以使整个图像看上去不会异常或者不自然。可以将右侧后方图像PR和左侧后方图像PL的压缩设置为统一的压缩比。可选地,可以配置右侧后方图像PR和左侧后方图像PL的压缩,以使压缩比随着图像从与后方图像PB相邻的内侧位置向外移动而逐渐增加,从而保持后方图像PB以及侧后方图像PR和PL之间的视觉连续性。
如果显示装置4的中间显示区域D1的高宽比不同于后视镜RM的高宽比,从而与在后视镜RM的情况下相比,中间显示区域D1的垂直大小相对于水平大小大,则例如如图8所示,可以将如后视镜RM形状的框图像F重叠在显示于中间显示区域D1中的后方图像PB上。这是使驾驶员识别与后视镜RM的镜面反射图像相对应的图像部分的有效方法。以该方式,驾驶员可以根据更接近于驾驶员从后视镜RM的镜面反射图像获得的图像的后方图像PB来获得距离感知。
在上述示例中,调整后方图像PB的图像大小以与后视镜RM的镜面反射图像的大小相对应,从而显示装置4上图像的外观类似于后视镜RM的镜面反射图像的外观。如果将在显示装置4上显示后方图像PB的中间显示区域D1的大小与后视镜RM的大小极不相同,则例如如图9所示,可以转换后方图像PB,从而在中间显示区域D1中仅显示后方图像PB中与后视镜RM的镜面反射图像相对应的部分,其中,所显示的部分具有与后视镜RM相同的高宽比和与中间显示区域D1的大小相匹配的图像大小。以该方式,可以以与后视镜RM的镜面反射图像的外观接近的外观来呈现后方图像PB。在这种情况下,可以通过在右侧显示区域D2和左侧显示区域D3中显示比后方图像PB压缩了更大程度的右侧后方图像PR和左侧后方图像PL,以有效方式来显示广角图像。
现在参考图10和11,将说明由车辆周边监视设备的图像处理单元10执行的控制操作。图10是示出根据第一实施例的车辆周边监视设备的控制系统的简化框图。图11是示出根据第一实施例的车辆周边监视设备中使用的后部照相机1、右侧照相机2和左侧照相机3的拍摄区域的示例的图。
如在图1和11中所示,后部照相机1安装在本车辆V后部的规定位置中,例如安装在车顶扰流器(roof spoiler)上。如在图11中所示,后部照相机1用于拍摄例如位于本车辆V后方的相对大的区域B1(下文中称为“后方拍摄区域B1”)的图像。因此,构成后方图像PB所包含的区域的区域A1(图2)是由后部照相机1拍摄到的后方拍摄区域B1的一部分。换句话说,后方图像PB是通过提取由后部照相机1拍摄到的图像的一部分所获得的图像。
如在图1和图11中所示,右侧照相机2安装在本车辆V的右侧部分的规定位置中,例如,安装在右手门镜上。如在图11中所示,右侧照相机2用于从本车辆V的右侧部分拍摄例如位于本车辆V后方的相对大的区域B2(下文中称为“右侧拍摄区域B2”)的图像。构成右侧后方图像PR所包含的区域的区域A2(图2)是由右侧照相机2拍摄到的右侧拍摄区域B2的一部分。换句话说,右侧后方图像PR是通过提取由右侧照相机2拍摄到的图像的一部分所获得的图像。
如在图1和图11中所示,左侧照相机3安装在本车辆V的左侧部分的规定位置中,例如,安装在左手门镜上。如在图11中所示,左侧照相机3用于从本车辆V的左侧部分拍摄例如位于本车辆V后方的相对大的区域B3(下文中称为“左侧拍摄区域B3”)的图像。构成左侧后方图像PL所包含的区域的区域A3(图2)是由左侧照相机3拍摄到的左侧拍摄区域B3的一部分。换句话说,左侧后方图像PL是通过提取由左侧照相机3拍摄到的图像的一部分所获得的图像。
优选将后部照相机1、右侧照相机2和左侧照相机3中的每一个配置为具有包括镜头和例如CCD元件和CMOS元件的光接收元件的光学系统的传统摄像机。将穿过镜头并到达光接收元件的光转换成电信号并作为包括所拍摄的图像的每个像素的数值的图像信号输出该电信号。由图像处理单元10接收从后部照相机1、右侧照相机2和左侧照相机3输出的图像信号。
图像处理单元10用于对来自后部照相机1、右侧照相机2和左侧照相机3的图像信号进行处理,并合成显示图像以在显示装置4上进行显示。如图10所示,图像处理单元10包括图像输入部11、第一图像处理部12、第二图像处理部13以及图像组合和输出部14。
图像处理单元10优选包括微计算机,该微计算机具有对如下所述的图像输入部11、第一图像处理部12、第二图像处理部13以及图像组合和输出部14进行控制的图像处理控制程序。图像处理单元10还可以包括输入接口电路、输出接口电路以及如ROM(只读存储器)装置和RAM(随机存取存储器)装置等的存储装置等的其它传统组件。对图像处理单元10的微计算机编程以控制车辆周边监视设备的显示装置4和其它组件。存储器电路存储处理结果以及用于由处理器电路运行的图像转换操作的程序等的控制程序。图像处理单元10以传统方式操作性地连接到后部照相机1、右侧照相机2、左侧照相机3以及显示装置4。
图像处理单元10的图像输入部11用于分开接收由后部照相机1、右侧照相机2和左侧照相机3拍摄到的图像。图像输入部11具有均包括RAM的三个输入图像帧存储器21、22和23。输入图像帧存储器21对应于后部照相机1,输入图像帧存储器22对应于右侧照相机2,并且输入图像帧存储器23对应于左侧照相机3。根据输入图像的帧大小对由后部照相机1、右侧照相机2和左侧照相机3所拍摄的图像分别进行数字化并将它们逐帧地分别存储在输入图像帧存储器21、22和23中。
图像处理单元10的第一图像处理部12包括计算部24和后方图像帧存储器25。第一图像处理部12用于从由后部照相机1拍摄到的后方拍摄区域B1的图像提取将成为后方图像PB的部分(与图2中的区域A1相对应的部分)。然后,第一图像处理部12用于将所提取的部分转换成与本车辆V的驾驶员将在后视镜RM中看到的后方镜面反射图像相对应的图像大小。
更具体地,第一图像处理部12的计算部24用于获取由后部照相机1所拍摄的并且作为帧存储在图像输入部11的输入图像帧存储器21中的图像(第一原始图像)的像素数据,基于定义表将像素数据重新配置为后方图像帧存储器25的像素,从而根据由后部照相机1拍摄的图像来生成后方图像PB(第一显示图像)。由于通过提取由后部照相机1拍摄的一部分图像来获得后方图像PB,因此所提取的图像的大小经常小于驾驶员将在本车辆V的后视镜RM中看到的后方镜面反射图像。如果从后部照相机1拍摄的图像中提取出的图像小于后视镜RM的镜面反射图像,则将所提取的图像放大到与后视镜RM的镜面反射图像相对应的图像大小。
在定义表中说明了由后部照相机1拍摄到的图像和后方图像PB之间的关系。更具体地,定义表规定了存储在后方图像帧存储器25中的每个像素和输入图像帧存储器21的坐标系统(照相机坐标系统)之间的对应关系,即,每个像素在坐标系统中的位置。不一定由整数值给出后方图像帧存储器25的每个像素在输入图像帧存储器21的坐标系统中的位置。如果放大了图像大小,则由此得到的坐标可能是位于像素之间的实数值。在这种情况下,使用已知的图像插值方法(例如,最邻近法(nearestneighbor method)、双线性法(bilinear method)或者双三次法(bicubic method))来确定每个像素的坐标。
可选地,后部照相机1可以设置有放大/缩小功能,从而通过以规定放大比率对本车辆V的规定后方区域进行放大以拍摄具有与后视镜RM的镜面反射图像相对应的图像大小的图像,可以获得后方图像PB。
图像处理单元10的第二图像处理部13包括与右侧后方图像PR相对应的计算部26和右侧后方图像帧存储器27、以及与左侧后方图像PL相对应的计算部28和左侧后方图像帧存储器29。第二图像处理部13用于从由右侧照相机2拍摄到的右侧拍摄区域B2的图像提取将成为右侧后方图像PR的部分(至少与图2中的区域A2相对应的部分)。第二图像处理部13还用于从由左侧照相机3拍摄到的左侧拍摄区域B3的图像提取将成为左侧后方图像PL的部分(至少与图2中的区域A3相对应的部分)。第二图像处理部13进一步用于将所提取的图像转换成与后方图像PB相比压缩了更大程度的图像,从而使所提取的图像分别适合显示装置4的右侧显示区域D2和左侧显示区域D3。
与右侧后方图像PR相对应的计算部26用于获取由右侧照相机2拍摄到的并且作为帧存储在图像输入部11的输入图像帧存储器22中的图像(例如,第二或第三原始图像)的像素数据,并且基于定义表将该像素数据重新配置成右侧后方图像帧存储器27的像素,从而根据右侧照相机2拍摄到的图像来生成右侧后方图像PR(第二或第三显示图像)。右侧后方图像PR是与后方图像PB相比至少在水平方向上压缩了更大程度的图像。如在这里使用的,术语“压缩了”是指所显示的图像的状态,在该状态中,与右侧照相机2拍摄到的原始图像相比,所显示的图像(右侧后方图像PR)看上去被压缩了。换句话说,右侧后方图像PR中的被摄体与由右侧照相机2拍摄到的原始图像中的同一被摄体相比,前者看上去较小(在水平方向上或者在水平和垂直两个方向上)。任何传统的方法或处理可以用于压缩由右侧照相机2拍摄到的原始图像以获得右侧后方图像PR。例如,可以使用根据定义表来疏化像素数据的传统方法来实现右侧后方图像PR的压缩,其中,该定义表规定了存储在右侧后方图像帧存储器27中的每个像素和输入图像帧存储器22的坐标系统之间的对应关系,即,每个像素在坐标系统中的位置。
类似地,与左侧后方图像PL相对应的计算部28用于获取由左侧照相机3拍摄到的并且作为帧存储在图像输入部11的输入图像帧存储器23中的图像(第二或第三原始图像)的像素数据,并基于定义表将像素数据重新配置为左侧后方图像帧存储器29的像素,从而根据左侧照相机3拍摄到的图像来生成左侧后方图像PL(第二或第三显示图像)。与右侧后方图像PR类似,左侧后方图像PL是与后方图像PB相比至少在水平方向上压缩了更大程度的图像。例如,使用根据定义表来疏化像素数据的传统方法实现左侧后方图像PL的压缩,其中,该定义表规定了存储在左侧后方图像帧存储器29中的每个像素和输入图像帧存储器23的坐标系统之间的对应关系,即,每个像素在坐标系统中的位置。
图像处理单元10的图像组合和输出部14用于将由第一图像处理部12生成的后方图像PB和由第二图像处理部13生成的右侧后方图像PR和左侧后方图像PL进行组合。然后,图像组合和输出部14用于将组合后的图像作为单个显示图像输出到显示装置4。更具体地,图像组合和输出部14用于顺序输出包括后方图像PB以及右侧后方图像PR和左侧后方图像PL的组合后的图像,以形成显示在显示装置4上的视频序列的多个帧。因此,本车辆V的驾驶员基本上可以实时观察显示在显示装置4上的本车辆V的后方和侧后方区域的视频序列。图像组合和输出部14包括计算部30和输出图像帧存储器31。
图像组合和输出部14的计算部30用于对如下像素数据进行重新配置:存储在第一图像处理部12的后方图像帧存储器25中的后方图像PB的像素数据、存储在第二图像处理部13的右侧后方图像帧存储器27中的右侧后方图像PR的像素数据以及存储在第二图像处理部13的左侧后方图像帧存储器29中的左侧后方图像PL的像素数据。基于图像组合定义表将像素数据重新配置到输出图像帧存储器31中,从而生成组合了后方图像PB、右侧后方图像PR和左侧后方图像PL的单个显示图像。图像组合定义表规定了存储在输出图像帧存储器31中的每个像素(对应于显示装置4的显示区域即显示装置4的中间显示区域D1以及右侧显示区域D2和左侧显示区域D3的布局)与在后方图像帧存储器25、右侧后方图像帧存储器27和左侧后方图像帧存储器29中每个像素所对应的位置之间的对应关系。通过根据图像组合定义表重新配置这些像素,生成使右侧后方图像PR和左侧后方图像PL并列布置在后方图像PB的右侧和左侧的显示图像,并将该显示图像存储在输出图像帧存储器31中。
将存储在图像组合和输出部14的输出图像帧存储器31中的显示图像的图像数据顺序输出到显示装置4。结果,如图6所示,在显示装置4上显示使右侧后方图像PR和左侧后方图像PL并列布置在后方图像PB的右侧和左侧的显示图像。更具体地,在调整后方图像PB的图像大小以与后视镜RM的镜面反射图像相对应的情况下,在位于显示装置4的水平中间部分的中间显示区域D1中显示后方图像PB。另一方面,在位于水平两侧的右侧显示区域D2和左侧显示区域D3中显示右侧后方图像PR和左侧后方图像PL作为与后方图像PB相比压缩了更大程度的图像。
如上所述,如图7所示,在水平方向和垂直方向上均压缩右侧后方图像PR和左侧后方图像PL也是可以接受的。这可以通过如下处理来实现:当将存储在输入图像帧存储器22和23中的像素数据重新配置到右侧后方图像帧存储器27和左侧后方图像帧存储器29中时,改变由图像处理单元10的第二图像处理部13的计算部26和28所使用的定义表,从而除水平方向以外还在垂直方向上对像素数据进行疏化。
如上所述,如图8所示,显示覆盖在后方图像PB上的后视镜形状的框图像F也是可以接受的。这可以通过如下处理来实现:包括具有与后视镜相对应的形状的框图像F的预先存储的像素数据,从而当图像组合和输出部14的计算部30将显示图像的图像数据存储在输出图像帧存储器31中时,在与后视镜的观察区域的边界相对应的位置处将框图像F覆盖在后方图像PB上。
如上所述,如图9所示,显示后方图像PB以使得后方图像PB具有与后视镜相同的高宽比也是可以接受的。这可以通过如下处理来实现:改变由第一图像处理部12的计算部24所使用的定义表,从而仅从输入图像帧存储器21提取与后视镜的镜面反射图像相对应的一部分后方图像PB的像素数据,并将该像素数据重新配置到后方图像帧存储器25中。
因此,利用第一实施例,车辆周边监视设备用于将后方图像PB显示在位于显示装置4的水平中间部分的相对宽的中间显示区域D1中,并将右侧后方图像PR和左侧后方图像PL分别显示在位于中间显示区域D1外侧的右侧显示区域D2和左侧显示区域D3中。将后方图像PB的图像大小设置为与后视镜RM的镜面反射图像相对应,并且与后方图像PB相比,更大程度地压缩了右侧后方图像PR和左侧后方图像PL。结果,显示装置4的有限显示区域的较大部分可用于显示本车辆V的后方区域的后方图像PB,因此,可以更高效地使用显示装置4的有限显示区域来显示包含了位于本车辆V的后方和侧后方的大的区域的图像。此外,利用第一实施例的车辆周边监视设备,可以显示本车辆V的后方区域的后方图像PB,从而本车辆V的驾驶员可以基于显示在显示装置4上的图像来正确地感知距离。
第二实施例
现在参考图12和13,将说明根据第二实施例的车辆周边监视设备。考虑到第一实施例和第二实施例之间的相似性,对第二实施例中与第一实施例的部件相同的部件赋予与第一实施例的部件相同的附图标记。此外,为了简洁,可以省略对第二实施例中与第一实施例的部件相同的部件的说明。
第二实施例的车辆周边监视设备与第一实施例的车辆周边监视设备的不同之处在于:第二实施例的车辆周边监视设备配备有单个车载照相机(广角后部照相机41)而不是第一实施例的多个车载照相机(后部照相机1、右侧照相机2和左侧照相机3)。
图12是示出根据第二实施例的车辆周边监视设备的控制系统的框图。图13是示出根据第二实施例的车辆周边监视设备中使用的广角后部照相机41的配置的示例的示意图。根据第二实施例的车辆周边监视设备用于仅使用安装在本车辆V后部的广角后部照相机41来拍摄本车辆V的后方和侧后方区域的图像。在第二实施例中,图像处理单元10的用于生成显示图像的图像输入部11包括如12所示的可与广角后部照相机41兼容的输入图像帧存储器42,而不是如图10所示的第一实施例的输入图像帧存储器21、22和23。否则,第二实施例的车辆周边监视设备与第一实施例的车辆周边监视设备相同。
与第一实施例的后部照相机1类似,广角后部照相机41安装在本车辆V后部的规定位置中,例如安装在车顶扰流器上。如在图13中所示,广角后部照相机14用于拍摄例如位于本车辆V的后方和侧后方的大区域C1(下文中称为广角拍摄区域C1)的广角图像。与第一实施例类似,获得包含区域A1(图2)的后方图像PB以及包含区域A2和A3(图2)的右侧后方图像PR和左侧后方图像PL。后方图像PB以及右侧后方图像PR和左侧后方图像PL中的每一个均包含由广角后部照相机41拍摄到的广角拍摄区域C1的一部分。换句话说,通过提取由广角后部照相机41拍摄到的图像的一部分来分别获得后方图像PB、右侧后方图像PR和左侧后方图像PL。
优选将广角后部照相机41配置为具有包括镜头和例如CCD元件或CMOS元件的光接收元件的光学系统的传统广角照相机。将穿过镜头并到达光接收元件的光转换成电信号并将该电信号作为包括拍摄到的图像的每个像素的数值的图像信号而输出。对广角后部照相机41拍摄到的图像进行数字化并逐帧地将其存储在设置在图像处理单元10的图像输入部11中的输入图像帧存储器42中。
与在第一实施例中说明的第一图像处理部12类似,第二实施例的图像处理单元10的第一图像处理部12配备有计算部24和后方图像帧存储器25。提取由广角后部照相机41拍摄到的并存储在输入图像帧存储器42中的广角拍摄区域C1的一部分图像,并将其转换成与本车辆V的驾驶员在后视镜RM中观察到的镜面反射图像相对应的图像大小,以获得后方图像PB。除了提取由广角后部照相机41拍摄到的广角拍摄区域C1的一部分图像以用作后方图像PB的任务以外,由第一图像处理部12的计算部24执行的处理与第一实施例中的处理相同,并且为了简洁,省略对其的详细说明。
与第二实施例的第二图像处理部13类似,第二实施例的第二图像处理部13包括计算部26和28、右侧后方图像帧存储器27以及左侧后方图像帧存储器29。第二实施例的第二图像处理部13用于提取由广角后部照相机41拍摄到的并存储在输入图像帧存储器42中的广角拍摄区域C1的部分图像以用作右侧后方图像PR和左侧后方图像PL,并将所提取的图像转换成与后方图像PB相比压缩了更大程度的图像。除了提取由广角后部照相机41拍摄到的广角拍摄区域C1的部分图像以用作右侧后方图像PR和左侧后方图像PL的任务以外,在第二实施例中由第二图像处理部13的计算部26和28执行的处理与在第一实施例中的处理相同,并且为了简洁,省略对其的详细说明。
与第一实施例的图像组合和输出部14类似,第二实施例的图像组合和输出部14包括计算部30和输出图像帧存储器31。图像组合和输出部14用于将由第一图像处理部12所生成的后方图像PB与由第二图像处理部13所生成的右侧后方图像PR和左侧后方图像PL进行组合,并将组合后的图像作为单个显示图像输出到显示装置4。结果,如在图6中所示,在显示装置4上显示使右侧后方图像PR和左侧后方图像PL并列布置在后方图像PB的右侧和左侧的显示图像。更具体地,在位于显示装置4的水平中间部分的中间显示区域D1中显示后方图像PB,并且调整后方图像PB的图像大小以与后视镜RM的镜面反射图像的大小相对应。另一方面,将右侧后方图像PR和左侧后方图像PL显示在位于水平两侧的右侧显示区域D2和左侧显示区域D3中作为与后方图像PB相比压缩了更大程度的图像。
如图7所示,第二实施例中在水平和垂直方向上均压缩右侧后方图像PR和左侧后方图像PL也是可以接受的。与第一实施例类似,这可以通过如下处理来实现:当将存储在输入图像帧存储器42中的像素数据重新配置到右侧后方图像帧存储器27和左侧后方图像帧存储器29中时,改变由图像处理单元10的第二图像处理部13的计算部26和28所使用的定义表,从而除水平方向以外还在垂直方向上对像素数据进行疏化。
在第二实施例中,如图8所示,显示覆盖后方图像PB的后视镜形状的框图像F也是可以接受的。与第一实施例类似,这可以通过如下处理来实现:包括具有与后视镜相对应的形状的框图像F的预先存储的像素数据,从而当图像组合和输出部14的计算部30将显示图像的图像数据存储在输出图像帧存储器31中时,在与后视镜RM的观察区域的边界相对应的位置处将框图像F覆盖在后方图像PB上。
在第二实施例中,如在图9中所示,显示后方图像PB以使得后方图像PB具有与后视镜相同的高宽比也是可以接受的。与第一实施例类似,这可以通过如下处理来实现:改变由第一图像处理部12的计算部24所使用的定义表,从而从输入图像帧存储器42仅提取与后视镜RM的镜面反射图像相对应的一部分后方图像PB的像素数据,并且将该像素数据重新配置到后方图像帧存储器25。
因此,第二实施例的车辆周边监视设备用于将后方图像PB显示在位于显示装置4的水平中间部分的相对宽的中间显示区域D1中,并将右侧后方图像PR和左侧显示图像PL显示在位于中间显示区域D1外侧的右侧显示区域D2和左侧显示区域D3中。将后方图像PB的图像大小设置为与后视镜RM的镜面反射图像相对应,并且与后方图像PB相比更大程度地压缩了右侧后方图像PR和左侧后方图像PL。结果,可以更有效地使用显示装置4的有限显示区域以显示包含位于本车辆V的后方和侧后方的大的区域的图像,并且可以显示本车辆V的后方区域的后方图像PB以使得本车辆V的驾驶员可以基于显示在显示装置4上的图像来正确地感知距离。
上面基于第一实施例和第二实施例说明了车辆周边监视设备的示例。实施例仅是如何利用本发明的示例。实施例的内容不是要限制本发明的技术范围。本发明的技术范围不局限于实施例中公开的特定技术方面,并且从实施例的公开中可以容易地得到各种变形、修改以及替代技术。
例如,尽管在第一实施例和第二实施例中,通过利用图像处理单元10对由后部照相机1、右侧照相机2和左侧照相机3拍摄到的图像或者由广角后部照相机41(摄像装置)拍摄到的图像进行处理来生成后方图像PB、右侧后方图像PR和左侧后方图像PL,但在摄像装置处生成后方图像PB、右侧后方图像PR和左侧后方图像PL也是可行的。在这种情况下,图像处理单元10仅用于组合由摄像装置拍摄到的图像以生成显示图像。另外,在第一实施例中,后部照相机1、右侧照相机2和左侧照相机3中的每一个可以设置有变焦功能,从而可以将后部照相机1、右侧照相机2和左侧照相机3中的每个分别调整为不同的变焦设置。在这种情况下,可以使用利用不同的变焦设置所获得的图像来生成后方图像PB、右侧后方图像PR和左侧后方图像PL。在第二实施例中,可以通过将由广角后部照相机41拍摄到的图像划分成三个区域、并且在广角后部照相机41内执行图像处理以选择性地放大或压缩这些区域中每个区域的图像,来生成后方图像PB、右侧后方图像PR和左侧后方图像PL。
术语的一般说明
在理解本发明的范围时,如这里使用的术语“包括”及其派生词意图作为开放术语:即指定已说明的特征、元件、组件、组、整体和/或步骤的存在,但并不排除其它未说明的特征、元件、组件、组、整体和/或步骤的存在。前述还适用于具有类似含义的词:如术语“包含”、“具有”及其派生词等。并且,当以单数形式使用术语“部件”、“部”、“部分”、“构件”或“元件”时,这些术语可以具有单个部件或多个部件的双重含义。并且,如在这里用于说明上述实施例的,以下方向性术语“前方”、“后方”、“上面”、“向下”、“垂直”、“水平”、“下面”和“横向”以及任何其它类似的方向性术语是指配备有车辆周边监视设备的车辆的方向。因此,如用于说明本发明的这些术语应当与配备有车辆周边监视设备的车辆相对地进行解释。这里用于说明装置的组件、部或部件的术语“配置有”包括所构建的和/或编程以执行期望功能的硬件和/或软件。
尽管仅选择了优选的实施例来说明本发明,但是根据说明书,对于本领域的技术人员来说,在不背离如在所附权利要求书中所限定的本发明的范围的情况下可以进行各种改变和变形,这是显而易见的。例如,可以根据需要和/或期望来改变各种组件的大小、形状、位置或方向。所示出的彼此直接连接或接触的组件可以具有布置在它们之间的中间结构。两个元件可以进行一个元件的功能,反之亦然。可以在其它实施例中采用一个实施例的结构和功能。没有必要在特定实施例中同时呈现所有的优点。还应当将相对于现有技术特有的每个特征单独地或者与其它特征结合地看作是申请人对进一步发明的单独说明,其包括了由这种特征所包含的结构和/或功能性概念。因此,根据本发明的实施例的前述说明仅是示例性的,并且目的不是为了限制由所附权利要求书及其等同物所限定的本发明。
本申请要求2007年9月26日提交的日本专利申请2007-249472的优先权。因此该日本专利申请2007-249472的全部内容通过引用而包括于此。

Claims (18)

1.一种车辆周边监视设备,包括:
摄像装置,用于拍摄车辆的后方区域的第一原始图像以及所述车辆的侧后方区域的第二原始图像;
显示装置,其安装在所述车辆内部,所述显示装置包括第一显示区域和布置在所述第一显示区域侧面的第二显示区域;以及
图像处理装置,用于在所述显示装置的所述第一显示区域中显示根据所述车辆的所述后方区域的所述第一原始图像的第一显示图像,并在所述显示装置的所述第二显示区域中显示根据所述车辆的所述侧后方区域的所述第二原始图像的第二显示图像,以在所述显示装置上形成组合后的图像,其中,所述第二显示图像从所述第二原始图像水平压缩的程度至少比所述第一显示图像的大。
2.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述图像处理装置用于压缩由所述摄像装置拍摄到的所述车辆的所述后方区域的所述第一原始图像,以在所述显示装置的所述第一显示区域中显示所述第一显示图像。
3.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述图像处理装置用于将由所述摄像装置拍摄到的所述车辆的所述后方区域的所述第一原始图像转换成所述第一显示图像,其中,所述第一显示图像具有通常与驾驶员在所述车辆的内后视镜中观察到的所述车辆的所述后方区域的镜面反射图像相对应的基准图像大小。
4.根据权利要求3所述的车辆周边监视设备,其特征在于,
所述图像处理装置用于提取由所述摄像装置拍摄到的所述车辆的所述后方区域的所述第一原始图像的规定部分,并将所提取的图像转换成具有所述基准图像大小的所述第一显示图像。
5.根据权利要求4所述的车辆周边监视设备,其特征在于,
所述图像处理装置用于将所提取的图像放大至所述基准图像大小,以获得所述第一显示图像。
6.根据权利要求3所述的车辆周边监视设备,其特征在于,
所述图像处理装置用于垂直压缩由所述摄像装置拍摄到的所述车辆的所述侧后方区域的所述第二原始图像。
7.根据权利要求1所述的车辆周边监视设备,其特征在于,所述摄像装置包括:
后方照相机,用于从所述车辆的后部拍摄所述车辆的所述后方区域的所述第一原始图像,以及
侧部照相机,用于从所述车辆的侧部拍摄所述车辆的所述侧后方区域的所述第二原始图像。
8.根据权利要求7所述的车辆周边监视设备,其特征在于,所述侧部照相机安装在所述车辆的门镜上。
9.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述摄像装置包括用于拍摄所述车辆的所述后方区域的所述第一原始图像和所述车辆的所述侧后方区域的所述第二原始图像的单个照相机。
10.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述摄像装置进一步用于拍摄相对于所述第一原始图像中的所述车辆的所述后方区域而布置在包含于所述第二原始图像中的所述车辆的所述侧后方区域的相对侧的所述车辆的侧后方区域的第三原始图像,
所述显示装置进一步包括布置在所述第一显示区域的侧面的、所述第二显示区域相对侧的第三显示区域,以及
所述图像处理装置进一步用于在所述显示装置的所述第三显示区域中显示根据所述车辆的所述侧后方区域的所述第三原始图像的第三显示图像,以在所述显示装置上形成组合后的图像,其中,所述第三显示图像从所述第三原始图像水平压缩的程度至少比所述第一显示图像的大。
11.根据权利要求10所述的车辆周边监视设备,其特征在于,所述摄像装置包括:
后方照相机,用于从所述车辆的后部拍摄所述车辆的所述后方区域的所述第一原始图像,以及
一对左侧照相机和右侧照相机,用于从所述车辆的左侧部分和右侧部分分别拍摄所述车辆的所述侧后方区域的所述第二原始图像和所述第三原始图像。
12.根据权利要求11所述的车辆周边监视设备,其特征在于,
所述左侧照相机和所述右侧照相机分别安装在所述车辆的左门镜和右门镜上。
13.根据权利要求10所述的车辆周边监视设备,其特征在于,
所述摄像装置包括用于拍摄所述车辆的所述后方区域的所述第一原始图像和所述车辆的所述侧后方区域的所述第二原始图像和所述第三原始图像的单个照相机。
14.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述图像处理装置进一步用于处理所述第二原始图像,从而在水平方向上均匀地压缩所述第二显示图像。
15.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述图像处理装置进一步用于处理所述第二原始图像,使得随着从与所述第一显示区域相邻的内侧位置在水平方向上向外移动,逐渐以更大程度压缩显示在所述第二显示区域中的所述第二显示图像。
16.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述摄像装置用于顺序拍摄所述第一原始图像和所述第二原始图像,以及
所述图像处理装置用于顺序输出包括所述第一显示图像和所述第二显示图像的所述组合后的图像,以形成显示在所述显示装置上的视频序列的多个帧。
17.一种车辆周边监视设备,包括:
摄像部件,用于拍摄车辆的后方区域的第一原始图像和所述车辆的侧后方区域的第二原始图像;
图像处理部件,用于根据所述车辆的所述后方区域的所述第一原始图像生成第一显示图像,并根据所述车辆的所述侧后方区域的所述第二原始图像生成第二显示图像,其中,所述第二显示图像从所述第二原始图像水平压缩的程度至少比所述第一显示图像的大;以及
显示部件,用于在第一显示区域中显示所述第一显示图像,并在第二显示区域中显示所述第二显示图像,以在所述显示部件上形成组合后的图像。
18.一种车辆周边监视方法,包括:
拍摄车辆的后方区域的第一原始图像和所述车辆的侧后方区域的第二原始图像;
根据所述车辆的所述后方区域的所述第一原始图像生成第一显示图像,并根据所述车辆的所述侧后方区域的所述第二原始图像生成第二显示图像,其中,所述第二显示图像从所述第二原始图像水平压缩的程度至少比所述第一显示图像的大;以及
在显示装置的第一显示区域中显示所述第一显示图像,并在所述显示装置的第二显示区域中显示所述第二显示图像,以在所述显示装置上形成组合后的图像。
CN2008101683289A 2007-09-26 2008-09-26 车辆周边监视设备和车辆周边监视方法 Active CN101396988B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2007249472 2007-09-26
JP2007249472A JP5194679B2 (ja) 2007-09-26 2007-09-26 車両用周辺監視装置および映像表示方法
JP2007-249472 2007-09-26

Publications (2)

Publication Number Publication Date
CN101396988A true CN101396988A (zh) 2009-04-01
CN101396988B CN101396988B (zh) 2010-11-03

Family

ID=40229891

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008101683289A Active CN101396988B (zh) 2007-09-26 2008-09-26 车辆周边监视设备和车辆周边监视方法

Country Status (6)

Country Link
US (1) US8144033B2 (zh)
EP (1) EP2042374B1 (zh)
JP (1) JP5194679B2 (zh)
KR (1) KR100936557B1 (zh)
CN (1) CN101396988B (zh)
DE (1) DE602008002118D1 (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102481876A (zh) * 2009-09-11 2012-05-30 爱信精机株式会社 车辆周边监视装置
CN102577350A (zh) * 2009-09-03 2012-07-11 松下电器产业株式会社 图像处理装置和图像处理方法
CN102653259A (zh) * 2011-03-04 2012-09-05 株式会社本田阿克塞斯 车辆后方监视装置
CN102783145A (zh) * 2010-03-12 2012-11-14 爱信精机株式会社 图像控制装置
CN102834853A (zh) * 2010-04-08 2012-12-19 株式会社东芝 车辆周围监测装置、车辆周围监测方法及车辆装置
CN102843640A (zh) * 2011-06-24 2012-12-26 索尼公司 声音控制设备、程序和控制方法
CN102859567A (zh) * 2010-04-19 2013-01-02 本田技研工业株式会社 车辆周边监视装置
CN104126195A (zh) * 2012-02-14 2014-10-29 日产自动车株式会社 行驶控制装置以及行驶控制方法
CN104321224A (zh) * 2012-12-22 2015-01-28 奥迪股份公司 具有摄像机监控系统的机动车
CN105172679A (zh) * 2014-05-30 2015-12-23 华创车电技术中心股份有限公司 广域行车影像系统
CN106165407A (zh) * 2014-04-03 2016-11-23 松下知识产权经营株式会社 后方视野确认装置和装载它的汽车
CN109291853A (zh) * 2017-07-24 2019-02-01 拉碧斯半导体株式会社 图像处理装置
CN109703556A (zh) * 2018-12-20 2019-05-03 斑马网络技术有限公司 驾驶辅助方法及设备
CN110271489A (zh) * 2018-03-15 2019-09-24 松下知识产权经营株式会社 车辆周边显示系统以及显示控制装置
US10525885B2 (en) 2011-12-22 2020-01-07 Toyota Jidosha Kabushiki Kaisha Vehicle rear monitoring system
CN110901531A (zh) * 2018-09-14 2020-03-24 夏普株式会社 后方显示装置、后方显示方法以及记录介质

Families Citing this family (99)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5910854A (en) 1993-02-26 1999-06-08 Donnelly Corporation Electrochromic polymeric solid films, manufacturing electrochromic devices using such solid films, and processes for making such solid films and devices
US8294975B2 (en) 1997-08-25 2012-10-23 Donnelly Corporation Automotive rearview mirror assembly
US8288711B2 (en) 1998-01-07 2012-10-16 Donnelly Corporation Interior rearview mirror system with forwardly-viewing camera and a control
US6693517B2 (en) 2000-04-21 2004-02-17 Donnelly Corporation Vehicle mirror assembly communicating wirelessly with vehicle accessories and occupants
US6329925B1 (en) 1999-11-24 2001-12-11 Donnelly Corporation Rearview mirror assembly with added feature modular display
US6477464B2 (en) 2000-03-09 2002-11-05 Donnelly Corporation Complete mirror-based global-positioning system (GPS) navigation solution
US7004593B2 (en) 2002-06-06 2006-02-28 Donnelly Corporation Interior rearview mirror system with compass
US7167796B2 (en) 2000-03-09 2007-01-23 Donnelly Corporation Vehicle navigation system for use with a telematics system
US7370983B2 (en) 2000-03-02 2008-05-13 Donnelly Corporation Interior mirror assembly with display
US6918674B2 (en) 2002-05-03 2005-07-19 Donnelly Corporation Vehicle rearview mirror system
US7329013B2 (en) 2002-06-06 2008-02-12 Donnelly Corporation Interior rearview mirror system with compass
EP1543358A2 (en) 2002-09-20 2005-06-22 Donnelly Corporation Mirror reflective element assembly
US7310177B2 (en) 2002-09-20 2007-12-18 Donnelly Corporation Electro-optic reflective element assembly
US7289037B2 (en) 2003-05-19 2007-10-30 Donnelly Corporation Mirror assembly for vehicle
US7446924B2 (en) 2003-10-02 2008-11-04 Donnelly Corporation Mirror reflective element assembly including electronic component
US7308341B2 (en) 2003-10-14 2007-12-11 Donnelly Corporation Vehicle communication system
ATE517368T1 (de) 2005-05-16 2011-08-15 Donnelly Corp Fahrzeugspiegelanordnung mit zeichen am reflektierenden teil
EP1949666B1 (en) 2005-11-01 2013-07-17 Magna Mirrors of America, Inc. Interior rearview mirror with display
US8154418B2 (en) 2008-03-31 2012-04-10 Magna Mirrors Of America, Inc. Interior rearview mirror system
JP5316783B2 (ja) 2008-05-15 2013-10-16 株式会社リコー 面発光レーザ素子、面発光レーザアレイ、光走査装置及び画像形成装置
US8411245B2 (en) * 2009-02-06 2013-04-02 Gentex Corporation Multi-display mirror system and method for expanded view around a vehicle
JP4914458B2 (ja) * 2009-02-12 2012-04-11 株式会社日本自動車部品総合研究所 車両周辺表示装置
US20100225461A1 (en) * 2009-03-05 2010-09-09 Raja Singh Tuli Apparatus and method for detection of a specified audio signal or gesture
DE102009057553A1 (de) * 2009-12-09 2011-06-16 Conti Temic Microelectronic Gmbh Verfahren zur Unterstützung des Fahrers eines straßengebundenen Fahrzeugs bei der Fahrzeugführung
WO2011093354A1 (ja) * 2010-01-29 2011-08-04 富士通テン株式会社 画像処理装置、および画像処理方法
US8872887B2 (en) * 2010-03-05 2014-10-28 Fotonation Limited Object detection and rendering for wide field of view (WFOV) image acquisition systems
JP5819420B2 (ja) 2010-06-15 2015-11-24 コンティ テミック マイクロエレクトロニック ゲゼルシャフト ミットベシュレンクテル ハフツングConti Temic microelectronic GmbH 自動車の交通標識認識システムと車線認識システムとを融合する方法
JP5316550B2 (ja) * 2011-01-05 2013-10-16 株式会社デンソー 後方視界支援システム
US20120229642A1 (en) * 2011-03-10 2012-09-13 Nissan North America, Inc. Vehicle monitoring system
US8723959B2 (en) 2011-03-31 2014-05-13 DigitalOptics Corporation Europe Limited Face and other object tracking in off-center peripheral regions for nonlinear lens geometries
JP2012222664A (ja) * 2011-04-11 2012-11-12 Honda Elesys Co Ltd 車載カメラシステム
JP5741321B2 (ja) * 2011-08-23 2015-07-01 株式会社富士通ゼネラル 運転支援装置
US8493459B2 (en) 2011-09-15 2013-07-23 DigitalOptics Corporation Europe Limited Registration of distorted images
US10457209B2 (en) * 2012-02-22 2019-10-29 Magna Electronics Inc. Vehicle vision system with multi-paned view
WO2013126715A2 (en) * 2012-02-22 2013-08-29 Magna Electronics, Inc. Vehicle camera system with image manipulation
JP6136114B2 (ja) * 2012-05-23 2017-05-31 市光工業株式会社 車両用インナーミラーシステム
US8928730B2 (en) 2012-07-03 2015-01-06 DigitalOptics Corporation Europe Limited Method and system for correcting a distorted input image
KR20140039820A (ko) * 2012-09-25 2014-04-02 엘지이노텍 주식회사 디스플레이 룸미러 시스템
US9122933B2 (en) * 2013-03-13 2015-09-01 Mighty Carma, Inc. After market driving assistance system
US9654740B2 (en) 2013-05-28 2017-05-16 International Business Machines Corporation Controlling automotive rear-view mirror based on eye movement
DE102013219909A1 (de) 2013-10-01 2015-04-02 Conti Temic Microelectronic Gmbh Verfahren und Vorrichtung zur Erkennung von Verkehrszeichen
KR101646340B1 (ko) * 2014-08-27 2016-08-05 현대자동차주식회사 차량정보 표시장치 및 그 표시방법
US9403491B2 (en) 2014-08-28 2016-08-02 Nissan North America, Inc. Vehicle camera assembly
US20160129838A1 (en) * 2014-11-11 2016-05-12 Garfield Ron Mingo Wide angle rear and side view monitor
DE102014018040A1 (de) 2014-12-05 2016-06-09 Mekra Lang Gmbh & Co. Kg Sichtsystem
US20160214536A1 (en) * 2015-01-23 2016-07-28 Glenn S. Burdge Door-Mounted Side View Camera System For A Vehicle
DE102015202330A1 (de) * 2015-02-10 2016-08-11 Continental Automotive Gmbh Fahrerassistenzsystem
JP6293089B2 (ja) * 2015-05-12 2018-03-14 萩原電気株式会社 後方モニタ
DE102015209187B3 (de) * 2015-05-20 2016-09-29 Volkswagen Aktiengesellschaft Überwachungsvorrichtung für ein Kraftfahrzeug
US10486599B2 (en) 2015-07-17 2019-11-26 Magna Mirrors Of America, Inc. Rearview vision system for vehicle
JP6578547B2 (ja) * 2015-07-23 2019-09-25 株式会社ホンダロック 後方視認装置
JP2017034453A (ja) * 2015-07-31 2017-02-09 富士通テン株式会社 画像処理装置、画像表示システム及び画像処理方法
KR101895485B1 (ko) * 2015-08-26 2018-09-05 엘지전자 주식회사 운전 보조 장치 및 그 제어 방법
US20170124881A1 (en) * 2015-10-28 2017-05-04 Velvac Incorporated Blind zone warning for semi-trailer
KR101745872B1 (ko) * 2015-12-22 2017-06-12 재단법인 다차원 스마트 아이티 융합시스템 연구단 저전력 영상감시장치 및 그 방법
SE539443C2 (en) * 2016-02-10 2017-09-26 Scania Cv Ab System for reducing a blind spot for a vehicle
CN105644442B (zh) * 2016-02-19 2018-11-23 深圳市歌美迪电子技术发展有限公司 一种扩展显示视野的方法、系统及汽车
WO2017154317A1 (ja) * 2016-03-09 2017-09-14 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6730615B2 (ja) * 2016-07-12 2020-07-29 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2018043643A (ja) * 2016-09-14 2018-03-22 株式会社東海理化電機製作所 車両用視認装置
EP3305597B1 (en) * 2016-10-04 2020-12-09 Ficomirrors, S.A.U. Vehicle driving assist system
US10897572B2 (en) 2016-10-25 2021-01-19 Toyota Jidosha Kabushiki Kaisha Imaging and display device for vehicle and recording medium thereof for switching an angle of view of a captured image
KR102543454B1 (ko) 2016-11-25 2023-06-14 에스엘 주식회사 차량의 주변 영상 처리 장치
JP6617688B2 (ja) 2016-11-29 2019-12-11 トヨタ自動車株式会社 車両用ミラーシステム
JP6744236B2 (ja) * 2017-02-08 2020-08-19 トヨタ自動車株式会社 画像表示装置
JP6730612B2 (ja) * 2017-02-27 2020-07-29 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示制御システム、車両用表示制御方法およびプログラム
WO2018170353A1 (en) * 2017-03-17 2018-09-20 Gentex Corporation Dual display reverse camera system
JP6649914B2 (ja) * 2017-04-20 2020-02-19 株式会社Subaru 画像表示装置
KR102301030B1 (ko) 2017-06-09 2021-09-10 에스엘 주식회사 차량의 주변 감시 장치
JP6837931B2 (ja) * 2017-06-26 2021-03-03 アルパイン株式会社 表示制御装置、表示制御方法及びカメラモニタリングシステム
JP6958147B2 (ja) * 2017-09-07 2021-11-02 トヨタ自動車株式会社 画像表示装置
EP3460516B1 (en) * 2017-09-20 2020-05-27 Aptiv Technologies Limited A device and a method for distinguishing between traversable and non-traversable objects
KR102322474B1 (ko) 2017-09-29 2021-11-05 에스엘 주식회사 카메라 모니터 시스템의 온/오프 제어 장치 및 방법
KR102322484B1 (ko) 2017-09-29 2021-11-05 에스엘 주식회사 카메라 모니터 시스템의 구동 제어 장치 및 방법
KR102473121B1 (ko) 2017-12-14 2022-12-01 에스엘 주식회사 불안정한 전압에서 영상을 제어하는 영상제어장치 및 그 방법
JP7069692B2 (ja) * 2017-12-20 2022-05-18 トヨタ自動車株式会社 画像表示装置
JP7188727B2 (ja) 2018-02-20 2022-12-13 株式会社東海理化電機製作所 車両用視認装置
KR102441924B1 (ko) 2018-03-13 2022-09-08 에스엘 주식회사 카메라 모니터 시스템
KR102409835B1 (ko) 2018-03-13 2022-06-17 에스엘 주식회사 카메라 모니터 시스템
CN110933461B (zh) * 2018-09-19 2022-12-30 中兴通讯股份有限公司 图像处理方法、装置、系统、网络设备、终端及存储介质
US11722645B2 (en) * 2018-10-31 2023-08-08 Sony Group Corporation Image-capturing apparatus, image processing method, and program
JP7159801B2 (ja) 2018-11-15 2022-10-25 トヨタ自動車株式会社 車両用電子ミラーシステム
US11830104B2 (en) * 2018-11-22 2023-11-28 Sony Semiconductor Solutions Corporation Image processing apparatus, camera system, and image processing method for superimposing an image representing a part of a vehicle body
JP7345106B2 (ja) * 2019-03-29 2023-09-15 パナソニックIpマネジメント株式会社 視界支援画像生成装置および画像変換プログラム
JP2020183166A (ja) * 2019-05-07 2020-11-12 アルパイン株式会社 画像処理装置、画像処理システム、画像処理方法、及びプログラム
KR20210014021A (ko) 2019-07-29 2021-02-08 삼성전자주식회사 이미지 센서, 이미지 처리 시스템 및 이의 동작 방법
KR20210082999A (ko) 2019-12-26 2021-07-06 주식회사 에스엘미러텍 차량의 주변 감시 장치
KR20210082997A (ko) 2019-12-26 2021-07-06 주식회사 에스엘미러텍 차량의 주변 감시 장치
KR20210083693A (ko) 2019-12-27 2021-07-07 주식회사 에스엘미러텍 차량의 주변 감시 장치 및 그 동작 방법
KR20230104298A (ko) 2020-01-22 2023-07-07 노다르 인크. 비-강성 스테레오 비전 카메라 시스템
US11427193B2 (en) 2020-01-22 2022-08-30 Nodar Inc. Methods and systems for providing depth maps with confidence estimates
US20210229601A1 (en) * 2020-01-27 2021-07-29 Nvidia Corporation Automatically-adjusting mirror for use in vehicles
KR102671989B1 (ko) * 2020-12-21 2024-06-04 현대모비스 주식회사 차량용 카메라 및 이를 구비한 주차보조 장치
JP2022098337A (ja) * 2020-12-21 2022-07-01 京セラ株式会社 撮像装置および画像処理装置
KR102668282B1 (ko) * 2021-01-06 2024-05-29 노다르 인크. 깊이 맵에 신뢰도 추정치를 제공하는 방법 및 시스템
CN117859029A (zh) 2021-08-20 2024-04-09 金泰克斯公司 灯光组合件和具有灯光组合件的照明系统
US11577748B1 (en) 2021-10-08 2023-02-14 Nodar Inc. Real-time perception system for small objects at long range for autonomous vehicles
JP2023066954A (ja) 2021-10-29 2023-05-16 トヨタ自動車株式会社 画像制御システム
US20240336199A1 (en) 2023-04-04 2024-10-10 Alps Alpine Co., Ltd. Rear image display apparatus

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5420940A (en) * 1992-06-16 1995-05-30 Hughes Training, Inc. CGSI pipeline performance improvement
US5670935A (en) * 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
JP3035262U (ja) * 1996-08-30 1997-03-11 新和プリント工業株式会社 自動車の後方視認装置
US6243645B1 (en) * 1997-11-04 2001-06-05 Seiko Epson Corporation Audio-video output device and car navigation system
CN100438623C (zh) * 1999-04-16 2008-11-26 松下电器产业株式会社 图象处理装置及监视系统
JP3645196B2 (ja) 2001-02-09 2005-05-11 松下電器産業株式会社 画像合成装置
US6424273B1 (en) * 2001-03-30 2002-07-23 Koninklijke Philips Electronics N.V. System to aid a driver to determine whether to change lanes
JP2002334322A (ja) 2001-05-10 2002-11-22 Sharp Corp 透視投影画像生成システム、透視投影画像生成方法、透視投影画像生成プログラムおよび透視投影画像生成プログラムを記憶した記憶媒体
JP2003081014A (ja) 2001-09-14 2003-03-19 Auto Network Gijutsu Kenkyusho:Kk 車両周辺監視装置
JP4195966B2 (ja) * 2002-03-05 2008-12-17 パナソニック株式会社 画像表示制御装置
JP3876761B2 (ja) * 2002-05-20 2007-02-07 日産自動車株式会社 車両用周辺監視装置
JP3979330B2 (ja) * 2003-04-02 2007-09-19 トヨタ自動車株式会社 車両用画像表示装置
JP2005328181A (ja) * 2004-05-12 2005-11-24 Mitsubishi Electric Corp 周囲確認装置
JP4560716B2 (ja) * 2004-09-28 2010-10-13 アイシン精機株式会社 車両の周辺監視システム
JP4088288B2 (ja) 2004-10-21 2008-05-21 本田技研工業株式会社 車両用周辺監視装置
JP2007028443A (ja) * 2005-07-20 2007-02-01 Auto Network Gijutsu Kenkyusho:Kk 画像表示システム
JP4698351B2 (ja) * 2005-09-13 2011-06-08 パナソニック株式会社 車両側方確認装置
JP2007124088A (ja) * 2005-10-26 2007-05-17 Olympus Corp 画像撮影装置
JP4762698B2 (ja) * 2005-11-30 2011-08-31 アルパイン株式会社 車両周辺画像表示装置
JP4172490B2 (ja) 2006-03-15 2008-10-29 オムロン株式会社 プログラマブルコントローラ
JP4961160B2 (ja) * 2006-04-18 2012-06-27 パナソニック株式会社 車両周囲状況確認装置
US7926219B2 (en) * 2007-01-05 2011-04-19 Paul Kevin Reimer Digital scope with horizontally compressed sidefields
US8238676B2 (en) * 2007-12-14 2012-08-07 Yamaha Corporation Image data compressor and image data decompressor

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102577350A (zh) * 2009-09-03 2012-07-11 松下电器产业株式会社 图像处理装置和图像处理方法
CN102577350B (zh) * 2009-09-03 2015-04-22 松下电器产业株式会社 图像处理装置和图像处理方法
CN102481876A (zh) * 2009-09-11 2012-05-30 爱信精机株式会社 车辆周边监视装置
CN102481876B (zh) * 2009-09-11 2014-12-17 爱信精机株式会社 车辆周边监视装置
CN102783145B (zh) * 2010-03-12 2015-11-25 爱信精机株式会社 图像控制装置
CN102783145A (zh) * 2010-03-12 2012-11-14 爱信精机株式会社 图像控制装置
CN102834853A (zh) * 2010-04-08 2012-12-19 株式会社东芝 车辆周围监测装置、车辆周围监测方法及车辆装置
CN102834853B (zh) * 2010-04-08 2014-12-10 株式会社东芝 车辆周围监测装置、车辆周围监测方法及车辆装置
CN102859567A (zh) * 2010-04-19 2013-01-02 本田技研工业株式会社 车辆周边监视装置
CN102859567B (zh) * 2010-04-19 2015-06-03 本田技研工业株式会社 车辆周边监视装置
CN102653259B (zh) * 2011-03-04 2014-11-12 株式会社本田阿克塞斯 车辆后方监视装置
CN102653259A (zh) * 2011-03-04 2012-09-05 株式会社本田阿克塞斯 车辆后方监视装置
CN102843640A (zh) * 2011-06-24 2012-12-26 索尼公司 声音控制设备、程序和控制方法
CN102843640B (zh) * 2011-06-24 2017-12-01 索尼公司 声音控制设备和控制方法
US11052823B2 (en) 2011-12-22 2021-07-06 Toyota Jidosha Kabushiki Kaisha Vehicle rear monitoring system
US10525885B2 (en) 2011-12-22 2020-01-07 Toyota Jidosha Kabushiki Kaisha Vehicle rear monitoring system
CN104126195A (zh) * 2012-02-14 2014-10-29 日产自动车株式会社 行驶控制装置以及行驶控制方法
CN104126195B (zh) * 2012-02-14 2016-01-20 日产自动车株式会社 行驶控制装置以及行驶控制方法
CN104321224B (zh) * 2012-12-22 2016-09-07 奥迪股份公司 具有摄像机监控系统的机动车
CN104321224A (zh) * 2012-12-22 2015-01-28 奥迪股份公司 具有摄像机监控系统的机动车
CN106165407A (zh) * 2014-04-03 2016-11-23 松下知识产权经营株式会社 后方视野确认装置和装载它的汽车
CN105172679B (zh) * 2014-05-30 2017-12-01 华创车电技术中心股份有限公司 广域行车影像系统
CN105172679A (zh) * 2014-05-30 2015-12-23 华创车电技术中心股份有限公司 广域行车影像系统
CN109291853A (zh) * 2017-07-24 2019-02-01 拉碧斯半导体株式会社 图像处理装置
CN110271489A (zh) * 2018-03-15 2019-09-24 松下知识产权经营株式会社 车辆周边显示系统以及显示控制装置
CN110271489B (zh) * 2018-03-15 2022-10-25 松下知识产权经营株式会社 车辆周边显示系统以及显示控制装置
CN110901531A (zh) * 2018-09-14 2020-03-24 夏普株式会社 后方显示装置、后方显示方法以及记录介质
CN110901531B (zh) * 2018-09-14 2023-06-16 夏普株式会社 后方显示装置、后方显示方法以及记录介质
CN109703556A (zh) * 2018-12-20 2019-05-03 斑马网络技术有限公司 驾驶辅助方法及设备

Also Published As

Publication number Publication date
EP2042374A2 (en) 2009-04-01
US8144033B2 (en) 2012-03-27
CN101396988B (zh) 2010-11-03
JP2009081664A (ja) 2009-04-16
DE602008002118D1 (de) 2010-09-23
US20090079585A1 (en) 2009-03-26
KR100936557B1 (ko) 2010-01-13
EP2042374B1 (en) 2010-08-11
KR20090031998A (ko) 2009-03-31
EP2042374A3 (en) 2009-05-06
JP5194679B2 (ja) 2013-05-08

Similar Documents

Publication Publication Date Title
CN101396988B (zh) 车辆周边监视设备和车辆周边监视方法
US10899277B2 (en) Vehicular vision system with reduced distortion display
US8174576B2 (en) Vehicle periphery video providing apparatus and method
US11472338B2 (en) Method for displaying reduced distortion video images via a vehicular vision system
US11080567B2 (en) Obstacle detection in vehicle using a wide angle camera and radar sensor fusion
US11910123B2 (en) System for processing image data for display using backward projection
US8115810B2 (en) Vehicle-periphery viewing apparatus
CN103609101A (zh) 车辆周边监视装置
CN110651301A (zh) 用于自动为夜视图像着色的方法和系统
US20090058878A1 (en) Method for displaying adjustment images in multi-view imaging system, and multi-view imaging system
EP2551817A2 (en) Vehicle rear view camera system and method
JP7467402B2 (ja) 画像処理システム、移動装置、画像処理方法、およびコンピュータプログラム
US10737725B2 (en) System and method for assisting parallel parking using orthogonal projection
JP2001111989A (ja) 車載用撮像装置
JP7500527B2 (ja) 画像処理システム、移動装置、画像処理方法、およびコンピュータプログラム
JP4747670B2 (ja) 画像処理装置
KR101750156B1 (ko) 차량의 파노라마 영상 표시장치 및 방법
KR101750161B1 (ko) 관심영역 이미지 패치 관리 시스템 및 방법
JP2024007203A (ja) カメラシステムおよびその制御方法、プログラム
JP2024094584A (ja) 撮像設定装置、撮像装置および撮像設定方法
KR20210091148A (ko) 화상 처리 장치, 카메라 시스템 및 화상 처리 방법
KR20220170207A (ko) 주변 감시 시스템
CN116843595A (zh) 融合摄影方法、装置、电子设备及车辆
CN114697562A (zh) 摄像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant