CN101396989A - 车辆周边监视设备和车辆周边监视方法 - Google Patents

车辆周边监视设备和车辆周边监视方法 Download PDF

Info

Publication number
CN101396989A
CN101396989A CNA2008101683325A CN200810168332A CN101396989A CN 101396989 A CN101396989 A CN 101396989A CN A2008101683325 A CNA2008101683325 A CN A2008101683325A CN 200810168332 A CN200810168332 A CN 200810168332A CN 101396989 A CN101396989 A CN 101396989A
Authority
CN
China
Prior art keywords
vehicle
image
blind spot
display image
zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008101683325A
Other languages
English (en)
Other versions
CN101396989B (zh
Inventor
柳拓良
知野见聪
赤塚健
川野勉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Publication of CN101396989A publication Critical patent/CN101396989A/zh
Application granted granted Critical
Publication of CN101396989B publication Critical patent/CN101396989B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/804Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for lane monitoring
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9315Monitoring blind spots
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9322Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles using additional data, e.g. driver condition, road state or weather data

Abstract

本发明涉及一种车辆周边监视设备和车辆周边监视方法,该车辆周边监视设备包括摄像装置、显示装置、盲点判断部以及处理部。摄像装置用于拍摄本车辆的后方区域的图像和本车辆的侧后方区域的图像。处理部用于当盲点判断部判断为存在跟随车辆形成的盲点区域时,将显示装置上的显示图像从第一显示图像切换为第二显示图像。第一显示图像包括本车辆的后方区域的图像,第二显示图像包括本车辆的侧后方区域的图像的至少一部分,该至少一部分包含第一显示图像缺少的跟随车辆形成的盲点区域。

Description

车辆周边监视设备和车辆周边监视方法
技术领域
本发明涉及一种车辆周边监视设备和图像显示方法,用于向驾驶员提供车辆后方区域以及车辆侧后方区域的图像。
背景技术
在传统的技术中,已经使用车载(车辆安装的)照相机来拍摄车辆后方区域以及车辆侧后方区域的图像。然后,在安装在车辆内的显示装置上显示该图像,从而使得驾驶员能准确地知道在车辆正后方以及侧后方的区域中的情况。通过在确保观看与车辆的内后视镜以及门镜的盲点相对应的区域时视向发生少量的改变,来完成这个动作。
例如,  日本特开2003-81014公开了一种车辆周边监视设备,该设备使用安装在车辆后端部上的后侧照相机来拍摄车辆后方区域的图像以及使用一对安装在车辆的左门镜和右门镜上的照相机来拍摄车辆侧后方区域的图像。这个传统的车辆周边监视设备将图像显示在布置于车辆内侧的单个显示装置上。在显示装置上水平地并排显示这些图像,使得车辆后方区域的图像置于车辆侧(左侧和右侧)后方区域的图像之间。
发明内容
本发明的一个目的在于提供一种能为本车辆(host vehicle)的驾驶员显示相对易于识别的图像的车辆周边监视设备以及图像显示方法。
鉴于上述,一种车辆周边监视设备包括摄像装置、显示装置、盲点判断部以及处理部。摄像装置用于拍摄配置有车辆周边监视设备的本车辆的后方区域的图像和本车辆的侧后方区域的图像。显示装置安装在本车辆内。盲点判断部用于当检测到表示跟随车辆阻挡本车辆的侧后方区域的一部分的参数时,判断本车辆的侧后方区域中是否存在跟随车辆形成的盲点区域。处理部用于响应于盲点判断部判断为存在跟随车辆形成的盲点区域,将显示装置上的显示图像从第一显示图像切换为第二显示图像。第一显示图像包括本车辆后方区域的图像,第二显示图像包括本车辆侧后方区域的图像的至少一部分,该至少一部分包含第一显示图像缺少的跟随车辆形成的盲点区域。
根据本发明的另一方面,一种车辆周边监视方法包括:拍摄配置有所述车辆周边监视设备的本车辆的后方区域的图像和所述本车辆的侧后方区域的图像;  当检测到表示跟随车辆阻挡所述本车辆的侧后方区域的一部分的参数时,判断为所述本车辆的侧后方区域中存在所述跟随车辆形成的盲点区域;以及响应于判断为存在所述跟随车辆形成的盲点区域,将显示装置上显示的显示图像从第一显示图像切换为第二显示图像,其中,所述第一显示图像包括所述本车辆的后方区域的图像,所述第二显示图像包括所述本车辆的侧后方区域的图像的至少一部分,所述至少一部分包含所述第一显示图像缺少的所述跟随车辆形成的盲点区域。
附图说明
下面参照构成本原始公开内容的一部分的附图:
图1是示出根据第一实施例的车辆周边监视设备的构成特征的简化框图;
图2是示出用在根据第一实施例的车辆周边监视设备中的车载摄像机的布置的示例的图;
图3是示出其中跟随车辆正行驶在安装有车辆周边监视设备的车辆之后一定距离的位置时的交通状况的简化示意图;
图4是示出在图3所示的交通状况中由三个车载照相机拍摄到的图像的示例的一系列示意图(a)至(c),其中,  图(a)示出由后侧摄像机拍摄到的图像,图(b)示出由右侧摄像机拍摄到的图像,以及图(c)示出由左侧摄像机拍摄到的图像;
图5是示出在比较示例中,  当图4所示的由三个车载照相机拍摄到的图像水平地并排显示在显示装置上时获得的显示图像的示意图;
图6示出在图3所示的交通状况中将出现在车辆后视镜中的车辆后方区域的镜面反射图像;
图7示出在根据第一实施例不存在盲点区域的状况中,显示在根据第一实施例的车辆周边监视设备的显示装置上的显示图像的示例;
图8是示出大型跟随车辆正在安装有根据第一实施例的车辆周边监视设备的车辆之后靠近地行驶的交通状况的示意图;
图9是示出在比较示例中,在图8所示的交通状况中,  当车辆后方区域的图像被放大并显示在显示装置上时获得的显示图像的示意图;
图10示出在根据第一实施例存在盲点区域的状况中,显示在车辆周边监视设备的显示装置上的显示图像的示例;
图11示出在根据第一实施例存在盲点区域的情况中,显示在车辆周边监视设备的显示装置上的显示图像的另一示例;
图12是用于说明为了检测在安装有根据第一实施例的车辆周边监视设备的车辆之后靠近地行驶的跟随车辆而对由后侧照相机拍摄到的图像应用图像处理的方法的示意图;
图13是用于说明根据第一实施例判断是否存在盲点区域的方法的示例的示意图;
图14是示出在比跟随车辆更靠近安装有车辆周边监视设备的车辆的位置处存在障碍物(例如,两轮车辆)的交通状况的示意图;
图15是示出在图14所示的交通状况中显示在显示装置上的显示图像的示例的一系列图(a)至(c),其中,  图(a)示出当由右侧照相机拍摄到的盲点区域的图像仅布置成邻近由后侧照相机拍摄到的后方图像的右侧时获得的显示图像的示例,图(b)示出当由后侧照相机拍摄到的后方图像所包含的范围被放大至能识别障碍物的存在的程度时获得的显示图像的示例,以及图(c)示出根据第一实施例的当由右侧照相机拍摄到的盲点区域的图像布置成邻近由后侧照相机拍摄到的后方图像的右侧并且表示障碍物存在的图标在与障碍物被定位的位置相对应的位置处叠加在结合的显示图像上时获得的显示图像的示例;
图16是示出根据第二实施例的车辆周边监视设备的构成特征的简化框图;
图17是示出由后侧照相机拍摄到的区域与用于在根据第二实施例的车辆周边监视设备中生成显示图像的图像的部分之间的关系的示意图;
图18是示出大型跟随车辆正在安装有根据第一实施例的车辆周边监视设备的车辆之后靠近地行驶的交通状况的示意图;
图19是示出在根据第二实施例存在盲点区域的状况中显示在周边监视设备的显示装置上的显示图像的示例的示意图。
具体实施例
下面将参照附图说明本发明选定的实施例。通过本申请,本领域技术人员将明白下面关于本发明实施例的说明仅作解释用而并非用于限制本发明,本发明由所附的权利要求书及其等同物限定。
第一实施例
首先参照图1和图2,示出了根据本发明第一实施例的车辆周边监视设备。在第一实施例中,车辆周边监视设备被构造并布置成通过利用安装在采用了车辆周边监视设备的车辆(下面称之为“本车辆V”)上的多个(即,三个)车载摄像机来拍摄本车辆V的正后方以及侧后方区域的图像。图1是示出根据第一实施例的车辆周边监视设备的构成特征的简化框图。图2是示出三个车载照相机的布置的示例的示意图。
如图1所示,根据第一实施例的车辆周边监视设备具有三个车载摄像机,包括后侧摄像机1、右侧摄像机2和左侧摄像机3,它们共同构成摄像装置。如图2所示,后侧照相机1安装在本车辆V的后侧部分上,右侧照相机2安装在本车辆V的右侧部分上,且左侧照相机3安装在本车辆V的左侧部分上。车辆周边监视设备还包括被构造成利用由后侧照相机1、右侧照相机2和左侧照相机3拍摄的图像来生成要显示的图像(被显示的图像)的图像处理单元10以及被构造成显示由图像处理单元10生成的显示图像的显示装置(图像显示装置)4。
如图2所示,后侧照相机1安装在本车辆V的后侧部分的规定位置处,例如车顶扰流器(roof spoiler)。后侧照相机1被构造并布置成拍摄位于本车辆V的正后方以及侧后方的相对大的区域的图像。图2中示出的区域A1为由后侧照相机1拍摄的区域的示例。右侧照相机2安装在本车辆V的右侧部分的规定位置处,例如,在右门镜DMR上。右侧照相机2被构造并布置成拍摄位于本车辆V右侧的侧后方的相对大的区域的图像。因此,右侧照相机2被构造并布置成从不同于后侧照相机1的视点进行拍摄。因此,后侧照相机1对应于第一摄像部,且右侧照相机2和左侧照相机3对应于第一实施例的第二摄像部和第三摄像部。图2中示出的区域A2是由右侧照相机2拍摄的区域的示例。左侧照相机3安装在本车辆V的左侧部分的规定位置处,例如,在左门镜DML上。左侧照相机3被构造并布置成拍摄位于本车辆V左侧的侧后方的相对大的区域的图像。因此,左侧照相机3被布置成从不同于后侧照相机1的视点进行拍摄。图2中示出的区域A3是由左侧照相机3拍摄的区域的示例。本车辆V的后方区域为以从本车辆V向后延伸的本车辆V的纵向中心轴线为中心的规定区域,例如与本车辆V的驾驶员可以在后视镜RM中观察到的区域相对应的区域。本车辆V的侧后方区域是指位于本车辆V后方区域的左侧外部和右侧外部的区域,且对应于例如本车辆V的驾驶员能在左门镜DML和右门镜DMR中观察到的区域。
与传统的摄像机一样,后侧照相机1、右侧照相机2和左侧照相机3均被布置成具有包括透镜和例如CCD元件或CMOS元件的光接收元件的光学系统。将经过透镜并照射光接收元件的光转换为电信号并作为图像信号输出,该图像信号包括所拍摄图像的每个像素的多个值。从后侧照相机1、右侧照相机2和左侧照相机3输出的图像信号由图像处理单元10接收。
图像处理单元10被构造成利用由后侧照相机1、右侧照相机2和左侧照相机3拍摄的图像来生成显示图像并将该生成的显示图像显示在安装于本车辆V内的显示装置4上。在第一实施例中,当在本车辆V后方行驶的跟随车辆并不靠近本车辆V时,在生成并显示在显示装置4上的显示图像中,由后侧照相机1拍摄的本车辆V后方区域的图像被放大。另一方面,  当在本车辆V的后方行驶的跟随车辆靠近本车辆V移动,使得在跟随车辆的侧向上形成盲点区域(跟随车辆形成的盲点区域)时,将由右侧照相机2或左侧照相机3拍摄的盲点区域的图像与由后侧照相机1拍摄的本车辆V后方区域的图像结合,且将结合后的图像作为显示图像显示在显示装置4上。因此,就第一实施例而言,通过根据是否存在由于跟随车辆的接近而导致的盲点区域来切换显示在显示装置4上的显示图像,能显示出本车辆V后方区域的图像,从而使本车辆V的驾驶员能基于该图像正确地感知距离,且当由于跟随车辆接近本车辆V而存在盲点区域时能以精确的方式向本车辆V的驾驶员呈现所需的信息。
下面利用具体的交通状况作为示例来说明由图像处理单元10执行的处理的概况。
考虑如图3所示的情况,在本车辆V正行驶在行驶方向上具有三个车道的道路的中间车道上,并且跟随车辆V1正在本车辆V之后一定距离位置处行驶。图4是示出在图3所示的交通状况中由后侧照相机1、右侧照相机2和左侧照相机3拍摄到的图像的示例的一系列示意图(a)至(c)。更具体地,图4中的图(a)是由后侧摄像机1拍摄到本车辆V后方区域的图像的示意图,图4中的示意图(b)是表示由右侧摄像机2拍摄到本车辆V右侧后方区域的图像的示意图,而图4中的图(c)是表示由左侧摄像机3拍摄到的本车辆V左侧后方区域的图像的示意图。图5是在比较示例中当图(a)至(c)中示出的图像被并排地布置形成与显示装置4的显示区域的大小相匹配的显示图像时,在显示装置4上显示的显示图像的示例的示意图。尽管图5中示出的显示图像使得可以向本车辆V的驾驶员呈现在横跨本车辆V的后方以及左侧和右侧后方的宽区域中存在的情况,然而在显示装置4上的显示图像中所出现的跟随车辆V1的大小小于其在后视镜RM的镜面反射图像中所出现的大小。因此,驾驶员有可能错误地感知从本车辆V到跟随车辆V1的距离。
在图3所示的交通状况中,驾驶员将在本车辆V的后视镜RM中观察到的本车辆V后方区域的镜面反射图像将例如如图6中所示一样出现。由于本车辆V的驾驶员习惯于观察后视镜RM的镜面反射图像,因此驾驶员趋向于根据镜面反射图像中的物体大小来确定到物体的距离。因此,如果出现在显示装置4上的显示图像中的跟随车辆V1的大小小于在后视镜RM的镜面反射图像中出现的大小,则当本车辆V的驾驶员在显示装置4上的显示图像中观察跟随车辆V1时,驾驶员将错误地断定跟随车辆V1比其实际情况更远。
为了出现避免这种问题,一种切实有效的方式是在显示装置4上仅显示由后侧照相机1拍摄到的后方图像并将由后侧照相机1拍摄到的图像放大,使得在显示装置4上显示的显示图像的大小大致等于如图7中所示在后视镜RM中观察到的镜面反射图像的大小。这样,驾驶员能更容易地感知本车辆V与跟随车辆V1之间的间隔距离。这种方法有利的原因还在于,与观察从多个视点(例如,后侧照相机1、右侧照相机2和左侧照相机3)拍摄并以图5所示的方式显示的图像相比,从单个视点观察图像能更容易地掌握存在于本车辆V后方的状况。然而,利用与图7中所示的那个相类似的显示图像,在不同的交通状况下会产生不同的问题,从而使得车辆周边监视设备不能以适当的方式向本车辆V的驾驶员呈现所需的信息。
例如,在图8所示的交通状况下,大型跟随车辆V2(例如,卡车)正接近本车辆V的后方,且另一跟随车辆V3在本车辆V正行驶的车道右侧的相邻车道中正与跟随车辆V2并排行驶。由于跟随车辆V2的接近,后侧照相机1不能拍摄到的盲点区域(跟随车辆形成的盲点区域)存在于跟随车辆V2的侧面,如图8所示。尽管在图8中仅示出了在本车辆V的右侧后方区域中的盲点区域,然而该盲点区域也可由于跟随车辆V2的存在而形成于本车辆V的左侧后方区域中。在图8所示的交通状况中,对于本车辆V的驾驶员,跟随车辆V3正在右侧相邻车道上行驶的事实是非常重要的信息,以判断将车道变换为右侧相邻车道是否安全。然而,如果如图9所示,在显示装置4上仅显示了由后侧照相机1拍摄的图像作为第一显示图像,则本车辆V的驾驶员将不能在显示装置4上的显示图像中清楚地认识到跟随车辆V3的存在。因此,驾驶员可能作出关于变换车道的错误的决定。
因此,在第一实施例的车辆周边监视设备中,图像处理单元10被构造并布置成,判断由于跟随车辆靠近本车辆V而在跟随车辆的侧向是否存在后侧照相机1不能拍摄的盲点区域。当不存在盲点区域时,由后侧照相机1拍摄的本车辆V后方区域的图像显示在显示装置4上,使得其被放大至大小与后视镜的镜面反射图像(如图6所示)相等的图像。另一方面,如果判断为存在盲点区域,则由右侧照相机2和左侧照相机3拍摄的盲点区域的图像与由后侧照相机1拍摄的本车辆V后方区域的图像相结合,以生成例如如图10或图11所示的要显示在显示装置4上的显示图像(第二显示图像)。在图10所示的示例中,分别由右侧照相机2和左侧照相机拍摄到的盲点区域的图像R2和R3在大致与盲点区域所处位置相对应的位置叠加在由后侧照相机拍摄的图像R1上。在图11所示的示例中,由右侧照相机2和左侧照相机3拍摄的盲点区域的图像R2和R3布置在邻近由后侧照相机1拍摄的后方图像R1的右侧和左侧。
再参照图1,将更详细地说明为了生成显示图像而由图像处理单元10执行的处理。如图1所示,图像处理单元10包括图像输入部11、盲点判断部(判断装置)12、显示图像生成部(处理部)13和图像输出部14。
图像处理单元10优选包括具有图像处理控制程序的微型计算机,该图像处理控制程序控制如下所述的图像输入部11,盲点判断部12,显示图像生成部13和图像输出部14。图像处理单元10还可包括其他传统的构件,诸如输入接口电路、输出接口电路、以及诸如ROM(只读存储器)装置和RAM(随机存储器)装置的存储装置。图像处理单元10的微型计算机被设计成控制车辆周边监视设备的显示装置4和其他构件。存储电路存储处理结果和控制程序,该控制程序为诸如用于由处理器电路运行的盲点确定操作和图像转换操作的控制程序。图像处理单元10以传统的方式与后侧照相机1、右侧照相机2、左侧照相机3和显示装置4操作地连接。
图像处理单元10的图像输入部11被构造成分开地接收由三个车载照相机即后侧照相机1、右侧照相机2和左侧照相机3拍摄的图像。图像输入部11包括三个输入图像帧存储器21、22和23,每个存储器均包括RAM。输入图像帧存储器21对应于后侧照相机1,输入图像帧存储器22对应于右侧照相机22,且输入图像帧处理器23对应于左侧照相机3。由后侧照相机1、右侧照相机2和左侧照相机3拍摄的图像根据输入图像的帧大小均被转换为数字信号并分别逐帧地存储在输入图像帧存储器21、22和23中。
图像处理单元10的盲点判断部12被构造成,判断由于跟随车辆靠近本车辆V在跟随车辆的侧向是否存在后侧照相机1不能拍摄到的盲点区域(跟随车辆形成的盲点区域)。更具体地,盲点判断部12被构造成,当检测到表示跟随车辆阻挡本车辆V侧后方区域的一部分的参数时,判断为在本车辆的侧后方区域中存在跟随车辆形成的盲点区域。例如,盲点判断部12被构造成,对由后侧照相机1拍摄的并存储在图像输入部11的输入图像帧存储器21中的图像应用诸如边缘检测和图案识别的传统的图像处理技术,以检测与本车辆V处于相同车道中的、正在本车辆V之后紧密靠近的跟随车辆。  当检测到跟随车辆在本车辆V之后紧密靠近时,盲点判断部12被构造成用矩形框F近似跟随车辆的形状,如图12所示。然后,盲点判断部12被构造成基于由后侧照相机1拍摄的图像中的框F的位置和大小来计算跟随车辆的位置和大小。更具体地,根据后侧照相机1的安装位置和角度以及后侧照相机的视角,能以唯一的方式确定跟随车辆在本车辆V后方区域中的实际位置与跟随车辆在由后侧照相机1拍摄的图像中建立的坐标系中的位置之间的关系。因此,可根据框F的下边缘在由后侧照相机1拍摄的图像中的位置,计算跟随车辆在本车辆V的后方区域中的位置(即,本车辆V与跟随车辆之间的间隔距离)。然后,根据跟随车辆的计算位置,可基于框F在由后侧照相机1拍摄的图像中的水平宽度,计算跟随车辆的大小(车辆宽度)。
尽管在第一实施例中,通过对由后侧照相机1拍摄的后方图像执行图像处理来计算跟随车辆的位置和大小,然而如果在本车辆V上安装有传统的车载物体检测装置(例如,  毫波(milliwave)雷达15或激光雷达),则也可以基于由这种物体检测装置检测到的信息来计算跟随车辆的大小和位置。也可以基于对由后侧照相机1拍摄的图像应用图像处理所获得的结果以及由车载物体检测装置检测到的信息来计算跟随车辆的大小和位置。
基于跟随车辆的计算位置和大小,盲点判断部12被构造成确定跟随车辆的接近是否已经产生了不能被后侧照相机1拍摄到从而在同一跟随车辆的侧向形成的盲点区域。考虑例如这种情况,本车辆V正在三车道道路的中间车道中行驶,且跟随车辆V2(例如,卡车)在本车辆V之后行驶,如图13所示。在图13所示的状况下,根据上述的过程检测从本车辆V到跟随车辆V2的距离L1以及跟随车辆V2的宽度W。然后,将从安装有后侧照相机1的本车辆V的边缘部分沿本车辆V的横向方向延伸的线与相邻车道的中心线C相交的位置设定为假设点M1,并且将从后侧照相机1延伸从而接触跟随车辆V2的边缘部分的线L3与中心线C相交的位置设定为假设点M2。如果两个点M1和M2之间的距离L2等于或小于规定的阈值,则盲点判断部12被构造成判断为在跟随车辆V2的侧向存在盲点。更具体地,如果跟随车辆V2在行驶的同时相对于本车辆V保持一定距离,则距离L2相对长,并且不会产生盲点。相反,如果跟随车辆V2已经行驶接近本车辆V,则距离L2将缩短,并且很有可能存在盲点。盲点判断部12还能被构造成,  当本车辆V与跟随车辆V2之间的间隔距离L1等于或小于规定的阈值时,简单地判断为在跟随车辆V2的侧向存在盲点区域。只要当跟随车辆存在于本车辆V之后时就会产生不能被后侧照相机1拍摄的一定程度的盲点,但是从监视本车辆V的周边的观点出发,轻微的盲点可以忽略。在第一实施例中,术语“盲点区域”是指足够大以至于实质上阻挡在相邻车道中行驶的其他跟随车辆或两轮车辆的盲点。
利用上述方法,盲点判断部12被构造,判断由于跟随车辆的接近而在跟随车辆的侧向上是否存在不能被后侧照相机1拍摄到的盲点区域。如果盲点判断部12判断为存在盲点区域,则盲点判断部12被构造成向显示图像生成部13传送表示存在盲点区域的信息。
只要没有从盲点判断部12接收到表示存在盲点区域的信息,显示图像生成部13就被构造成利用由后侧照相机1拍摄的图像来生成显示图像,其中本车辆V后方区域的图像被放大成大小与后视镜RM的镜面反射图像相等的图像,例如如图7中所示。如果显示装置4的显示区域足够大,可以生成这样的显示图像,在该显示图像中包括本车辆V后方区域的图像之外的本车辆V侧后方区域的图像。
更具体地,显示图像生成部13被构造成,通过获取由后侧照相机1拍摄的并以帧的形式存储在图像输入部11的输入图像帧存储器21中的图像的像素数据,并基于定义表(definitiontable)将该像素数据重新设置到图像输出部14的输出图像帧存储器24中,来生成显示图像。对于将由后侧照相机1拍摄的本车辆V后方区域的图像放大至与后视镜RM的镜面反射图像的大小相等的图像的情况,这里使用的定义表规定了存储在输出图像帧存储器24中的每个像素与输入图像帧存储器21的坐标系(照相机坐标系)之间的对应关系,即,每个像素在坐标系中的位置。
可选择地,后侧照相机1可具有放大/缩小功能,从而通过以规定的放大比例放大本车辆V的规定后方区域来拍摄具有与后视镜RM的镜面反射图像相对应的图像大小的图像,来获得显示图像。
当盲点判断部12传送表示存在盲点区域的信息时,显示图像生成部13被构造成,将显示装置4上的显示图像从本车辆V后方区域的图像(第一显示图像)切换为包括本车辆侧后方区域的图像的至少一部分的显示图像,其中,该本车辆V后方区域的图像被放大至大小与后视镜RM的镜面反射图像相等的图像,例如图9中所示,以及该至少一部分包含图9中示出的显示图像中缺少的盲点区域。更具体地,显示图像生成部13被构造成,将由右侧照相机2和左侧照相机3拍摄的盲点区域的图像与由后侧照相机1拍摄的本车辆V后方区域的图像结合,以生成与例如图10和图11中所示类似的显示图像(第二显示图像)。如图10和图11所示,该显示图像包括本车辆V侧后方区域的图像的至少一部分,该至少一部分包含图9中示出的显示图像缺少的盲点区域。更具体地,显示图像生成部13被构造成,通过例如利用上述定义表将由后侧照相机1拍摄的图像的像素数据重新设置到图像输出部14的输出帧存储器24中,并从由右侧照相机2拍摄并存储在输入图像帧存储器22中的图像以及由左侧照相机3拍摄并存储在输入图像帧存储器23中的图像中提取出与盲点区域对应的部分图像的像素数据,来生成显示图像。然后将所提取的与盲点区域相对应的像素数据复制到图像输出部14的输出图像帧存储器24中的规定位置。
与从由右侧照相机2拍摄的图像或者由左侧照相机3拍摄的图像中提取的盲点区域相对应的部分图像的复制目的地为大致对应于盲点区域位于由后侧照相机1拍摄的后方图像中的位置,即,邻近由后侧照相机1拍摄的后方图像的左侧或右侧的位置。当预先确定了对应于盲点图像的部分图像的复制目的地时,可以确定复制源即输入图像帧存储器22或23的像素与将用作复制目的地的输出图像帧存储器24的位置之间的对应关系。该对应关系可用于预先建立盲点区域定义表,从而使得能容易地生成显示图像,诸如图10或11中示出的显示图像。
在图10和11中示出的示例中,由右侧照相机2和左侧照相机3拍摄的盲点区域的图像R2和R3与后侧照相机1拍摄的后方图像结合,从而使驾驶员能看见本车辆V右侧和左侧的盲点区域。因此,本车辆V的驾驶员能看见在本车辆V右侧的经过车辆(跟随车辆V3)。然而,也可以将所述设备布置成,仅将由右侧照相机2或左侧照相机3拍摄的盲点区域的图像R2和R3中的一个与后侧照相机1拍摄的后方图像结合,或者根据本车辆V的当前车道、行驶数度和交通状况,自动地选择由右侧照相机2拍摄的盲点区域的图像或由左侧照相机3拍摄的盲点区域的图像与由后侧照相机1拍摄的后方图像结合。车辆周边监视设备还可被构造并布置成,基于本车辆V的操作条件(例如,检测到驾驶员想要改变车道的意图等)选择要结合的图像。例如,车辆周边监视设备可被构造成,当根据方向指示器的操作检测到驾驶员打算向右侧车道改变车道且盲点判断部12判断为存在盲点时,将显示图像从仅本车辆V的后方图像(例如,图7)改变成本车辆V的后方区域的图像与由右侧照相机2拍摄的右侧盲点区域的图像的结合图像。在任一这些情况中,用于切换显示图像的触发事件是判断为由于跟随车辆的接近而在跟随车辆的侧向存在不能被后侧照相机1拍摄到的盲点区域。
图像输出部14配置有包括RAM的输出图像帧存储器24。图像输出部14被构造成将由显示图像生成部13生成的显示图像传送至显示装置4。更具体地,图像结合和输出部14被构造成顺序地输出显示图像,以形成显示在显示装置4上的视频序列的多个帧。因此,本车辆V的驾驶员能大致实时地观察显示在显示装置4上的本车辆V后方区域的视频序列。如上所述,由显示图像生成部13生成的显示图像的图像数据存储在输出图像帧存储器24中。将存储在图像输出部14的输出图像帧存储器24中的显示图像的显示数据顺序地输出给显示装置4。结果,在跟随车辆不是在本车辆V之后靠近地行驶的情况下,将通过放大本车辆V后方区域的图像为大小与后视镜RM的镜面反射图像相等的图像而获得的显示图像显示在显示装置4上,例如如图7所示。另一方面,在跟随车辆在本车辆V之后靠近地行驶从而形成盲点区域的状况下,将通过结合由右侧照相机2或左侧照相机3拍摄的盲点区域的图像与由后侧照相机1拍摄的后方图像而获得的显示图像显示在显示装置4上,例如如图10或图11所示。
在将存在盲点区域且诸如图10或11中所示的显示图像显示在显示装置4上的状况下,存在这样一种可能性:在本车辆V和跟随车辆V2之间可能存在例如摩托车或两轮车辆的障碍物M(即,比跟随车辆V2更接近本车辆V),其中该障碍物处于在显示装置4上显示的图像中没有示出障碍物M或者在显示装置4上显示的图像中仅示出障碍物M的一部分的位置处。图14中示出了这种状况的一个示例。在这种状况下,障碍物M可能在结合图像中被隐藏,而本车辆V的驾驶员不能在显示装置4显示上的显示图像中识别出障碍物M。例如,在图14所示的交通状况中,盲点判断部12如上所述判断为由于跟随车辆V2的接近而在跟随车辆V2的侧向存在盲点区域。如果通过将由右侧照相机2拍摄的盲点区域的图像布置在邻近由后侧照相机1拍摄的后方图像的提取部分的右侧而由显示图像生成部13生成显示图像,则显示在显示装置4上的显示图像将如图15中的示意图(a)所示出现。因此,难以从显示在显示装置4上的显示图像中识别出障碍物M(例如,两轮车辆)。
因此,第一实施例的车辆周边监视设备优选还被构造和布置成在图像处理单元10中检测存在于本车辆V附近的障碍物M(例如,两轮车辆)。显示图像生成部13被构造成生成显示图像,其中在该显示图像中,当检测到障碍物M且同时存在盲点区域时,能在显示装置4上识别出障碍物M的存在。更具体地,优选显示图像生成部13被构造成,当检测到在本车辆V附近存在障碍物M且同时存在盲点区域时,将诸如例如图15中的示意图(b)或(c)所示的显示图像显示在显示装置4上。在图15的示意图(b)所示的示例中,包含在由后侧照相机1拍摄的后方图像中的区域被放大,从而使得在显示图像中能识别出障碍物M的存在。在图15的示意图(c)所示的示例中,表示障碍物M存在的图标在对应于障碍物M所处的位置处叠加在所生成的显示图像上。这样,本车辆V的驾驶员能注意到在本车辆V附近存在两轮车辆或其他障碍物M。车辆周边监视设备能被构造并布置成以例如与盲点判断部12执行的盲点区域判断处理类似的方式检测障碍物M,即,通过对由后侧照相机1拍摄的图像执行传统的图像处理技术,如边缘监视或图案识别。如果本车辆V上安装有传统的车载物体检测装置(例如,毫波雷达15或激光雷达),则还可以利用这种物体检测装置的检测结果来检测障碍物M。
如上基于第一实施例进行的详细说明,车辆周边监视设备被构造和布置成,当跟随车辆不是在本车辆V之后靠近地行驶时,将通过放大本车辆V后方区域的图像为大小与后视镜RM的镜面反射图像相同的图像而获得的显示图像显示在显示装置4上,使得本车辆V的驾驶员基于显示在显示装置4上的后方图像能正确地感知距离。根据这个实施例的车辆周边监视设备还被构造和布置成,当跟随车辆行驶在本车辆V之后靠近地行驶,使得在跟随车辆的侧向上形成不能被后侧照相机1拍摄到的盲点区域时,将通过结合由右侧照相机2或左侧照相机3拍摄的盲点区域的图像与由后侧照相机1拍摄的后方图像而获得的显示图像显示在显示装置4上。结果,能向本车辆V的驾驶员呈现关于在跟随车辆的侧向上存在盲点区域的状况的信息。
因此,通过第一实施例的车辆周边监视设备,当跟随车辆接近本车辆时能在显示装置4上以相对大的大小显示本车辆后方区域的图像,从而使本车辆的驾驶员基于显示装置4上显示的图像能正确地感知到跟随车辆的距离。另一方面,  当跟随车辆行驶接近本车辆从而在跟随车辆的侧向上的区域中形成盲点区域时,能向本车辆V的驾驶员呈现存在位于跟随车辆的侧向的盲点区域的状况。
第二实施例
现在参照图16至图19,将说明根据第二实施例的车辆周边监视设备。考虑到第一和第二实施例之间的相似性,第二实施例的与第一实施例的部分相同的部分将由与第一实施例的部分相同的附图标记表示。而且,为了简便,省略了对第二实施例的与第一实施例的部分相同的部分的说明。
第二实施例的车辆周边监视设备与第一实施例的车辆周边监视设备的不同之处在于,第二实施例的车辆周边监视设备配置有单个车载摄像机(后侧照相机)而不是第一实施例的多个车载摄像机(后侧照相机1、右侧照相机2和左侧照相机3)。图16是表示根据第二实施例的车辆周边监视设备的构成特征的框图。图17是示出由后侧照相机1拍摄到的区域与用于显示图像的图像部分之间关系的示意图。
在根据第二实施例的车辆周边监视设备中,由安装在本车辆V后部上的后侧照相机1拍摄本车辆V后方区域以及本车辆V侧后方区域的图像。在跟随车辆不是在本车辆V之后靠近地行驶的情况下,通过仅对与本车辆V后方区域对应的后侧照相机1拍摄的图像的一部分进行提取或修剪、并将提取部分放大至大小等于后视镜的镜面反射图像的图像而获得的显示图像显示在显示装置4上。另一方面,在行驶在本车辆V之后的跟随车辆在本车辆V之后靠近从而形成不能被拍摄在本车辆V后方区域的图像中的盲点区域的情况下,将由后侧照相机1拍摄的本车辆V后方区域以及本车辆V侧后方区域的图像显示在显示装置4上。如图16所示,这个车辆周边监视设备的构成特征基本上与第一实施例的构成特征相同,除了第二实施例的车辆周边监视设备并不包括右侧照相机2、左侧照相机3、或用于存储由右侧照相机2和左侧照相机3拍摄的图像的输入图像帧存储器22和23。
如在第一实施例中所述,后侧照相机1被布置在本车辆V后侧部分上的规定位置处,例如车顶扰流器上。后侧照相机1被构造成拍摄位于本车辆V的后方和侧后方的相对大的区域的图像。图17中示出的区域A1是由后侧照相机1拍摄的区域的示例。本车辆V后方的区域是以从本车辆V向后延伸的本车辆V的纵向中心轴线为中心的规定区域,例如,与本车辆V的驾驶员可以在后视镜RM中观察到的区域相对应的区域(即,图17中示出的区域B1)。本车辆V侧后方的区域是指位于本车辆V后方区域B1的左右外侧上的区域并且对应于例如本车辆V的驾驶员能在左右门镜中观察到的区域(即,图17中示出的区域B2和B3)。
将由后侧照相机1拍摄的本车辆V后方的区域B1以及本车辆V侧后方的区域B2和B3的图像数字化并逐帧地存储在图像处理单元10的图像输入部11中设置的输入图像帧存储器21中。
图像处理单元10的盲点判断部12被构造成使用基本上与第一实施例中使用的方法相同的方法,来判断由于跟随车辆接近本车辆V而在跟随车辆的侧向上是否存在不能被后侧照相机1拍摄的盲点区域。更具体地,盲点判断部12被构造成通过对由后侧照相机1拍摄的图像执行诸如边缘检测或图案识别的传统图像处理来计算跟随车辆的大小和位置。可选择地,与第一实施例中的一样,如果车辆配置有传统的车载物体检测装置(例如,毫波雷达或激光雷达),则盲点判断部12能基于传统的物体检测装置的检测结果来计算跟随车辆的大小和位置。然后,基于跟随车辆的位置和大小,盲点判断部12被构造成,确定能由后侧照相机1拍摄的在本车辆V后方的相邻车道中的可见距离以及通过判断该可见距离是否等于或小于规定的阈值来判断是否存在盲点区域。盲点判断部12也可以通过判断本车辆V与跟随车辆之间的间隔距离是否等于或小于规定值来判断是否存在盲点区域。如果盲点判断部12判断为存在盲点区域,则盲点判断部12被构造成将表示存在盲点区域的信息输出给显示图像生成部13。
只要没有从盲点判断部12接收到表示存在盲点区域的信息,显示图像生成部13就被构造成,从由后侧照相机1拍摄的图像中提取本车辆V后方区域(图17中的区域B1)的图像并生成显示图像,其中本车辆V后方区域(图17中的区域B1)的图像被放大成大小与后视镜RM的镜面反射图像相等的图像。与第一实施例类似,可以通过获取由后侧照相机1拍摄的并以帧的形式存储在图像输入部11的输入图像帧存储器21中的图像的像素数据、并基于定义表将该像素数据重新布置到图像输出部14的输出图像帧存储器24中,来完成显示图像的生成。
如果显示图像生成部13从盲点判断部12接收到表示存在盲点区域的信息,则显示图像生成部13被构造成,通过将由后侧照相机1拍摄的本车辆V后方区域以及本车辆V侧后方区域的图像(即,图17中示出的区域B1、B2和B3的图像)转换为大小与显示装置4的显示区域相匹配的图像,来生成显示图像。这里,也可以通过利用定义表将存储在输入图像帧存储器21中的像素数据(即,由后侧照相机1拍摄的图像的像素数据)重新设置到输出图像帧存储器24中来完成显示图像的生成,其中该定义表用于调节包含本车辆V后方区域以及本车辆V侧后方区域的宽范围的图像。
关于第二实施例,图像处理单元10被构造成,根据是否存在盲点区域,来在本车辆V后方区域(包含区域B1)的放大图像(第一显示图像)与本车辆V后方以及侧后方区域(包含区域B1,B2,B3)的宽范围图像(第二显示图像)之间切换由显示图像生成部13生成的显示图像。因此,可以显示本车辆V后方区域的图像,以使本车辆V的驾驶员能基于显示在显示装置4上的图像正确地感知距离,并且当由于跟随车辆接近本车辆V而导致盲点区域存在时能以精确的方式向本车辆V的驾驶员呈现所需信息。
下面将基于图18中例示的交通状况说明第二实施例中的显示图像的切换。在图18所示的交通状况下,大型跟随车辆V2(例如,卡车)正接近本车辆V的后侧且另一跟随车辆V3正在本车辆V正行驶的车道右侧的相邻车道中与跟随车辆V2并排行驶。在图18中,区域B1是由后侧照相机1拍摄的本车辆V后方的区域,而区域B2和B3是由后侧照相机1拍摄的本车辆V侧后方的区域。
在图18中示出的交通状况下,尽管由于跟随车辆V2接近本车辆V而在跟随车辆V2的侧向上存在盲点区域,然而由于正在右侧相邻车道中行驶的另一跟随车辆V3的一部分位于盲点区域的外侧,因此跟随车辆V3能被后侧照相机1部分地拍摄到。然而,如果仅由后侧照相机1拍摄到的本车辆V后方区域的图像(即,图18所示的区域B1的图像)被放大并用作显示图像,则即使跟随车辆V3能被后侧照相机1拍摄到,在显示图像中也并不包括跟随车辆V3,而本车辆V的驾驶员并不能基于显示图像知道跟随车辆V3的存在。因此,在这个实施例中,当由于跟随车辆V2接近本车辆V而在跟随车辆V2的侧向上产生盲点区域时,显示图像从本车辆V后方区域(区域B1)的放大图像切换为包含本车辆V后方以及侧后方区域的较宽范围的图像(即,图18中示出的区域B1,B2,B3的图像),从而本车辆V的驾驶员能知道跟随车辆V3的存在。
与第一实施例类似,图像输出部14被构造成顺序地将由显示图像生成部13生成并存储在输出图像帧存储器24中的显示图像的图像数据传送给显示装置4。结果,当跟随车辆不是在本车辆V之后靠近时,将通过放大本车辆V后方区域(区域B1)的图像为大小等于后视镜RM的镜面反射图像的图像而获得的显示图像显示在显示装置4上,与例如图7中所示一样。另一方面,当跟随车辆正在本车辆V之后靠近地行驶,从而在跟随车辆的侧向上存在盲点区域时,将包含本车辆V后方区域(区域B1)以及本车辆V侧后方区域(区域B2和B3)的宽范围的图像如例如图19中所示一样显示在显示装置4上。图19中示出的显示图像例示了在图18所示的交通状况下将显示在显示装置4上的图像。基于图19中示出的显示图像,本车辆V的驾驶员能够知道位于在本车辆V之后靠近地行驶的跟随车辆V2的侧向(侧面)上的另一跟随车辆V3的存在。
如上基于第二实施例所作的详细说明,车辆周边监视设备被构造并布置成,当跟随车辆不是在本车辆V之后靠近地行驶时,在显示装置4上显示本车辆V后方区域(区域B1)的放大图像,从而使本车辆V的驾驶员能基于该后方图像正确地感知距离。另一方面,根据第二实施例的车辆周边监视设备被构造和布置成,当跟随车辆在本车辆V之后靠近地行驶从而在跟随车辆的侧向上存在盲点区域时,在显示装置4上显示本车辆V后方区域以及侧后方区域的宽范围的图像。  因此,可以向本车辆V的驾驶员呈现关于由于跟随车辆的接近而导致的盲点区域的重要信息。
上面的第一和第二实施例仅为本发明应用的示例且这些实施例的内容并不旨在限制本发明的技术范围。换言之,本发明的技术范围并不限于在实施例中公开的具体技术方面,通过这些实施例的公开内容可以容易地得出各种变化、修改或其他技术。
术语的一般说明
在理解本发明范围时,这里使用的术语“包括”及其衍生词旨在为说明所述的特征、元件、构件、组、整数、和/或步骤的存在的开放式术语,而并不排出其他未说明的特征、元件、构件、组、整数、和/或步骤的存在。前述也适用于诸如术语“包括”,“具有”及它们的衍生词等具有类似含义的词语。同样,以单数形式使用的术语“部分”、“部”、“组件”或“元件”可以具有单个部分或多个部分的双重含义。同样,这里使用的说明上述实施例的以下方向术语“前方”、“后方”、“上方”、“下方”、“垂直”、“水平”、“之下”和“横向”以及其他类似的方向术语是指配置有车辆监视设备的车辆的那些方向。因此,为说明本发明所使用的这些术语应关于配置有车辆周边监视设备的车辆进行解释。这里使用的术语“被构造成”用于说明装置的构件、部或部分,包括被设置和/或设计来执行所希望功能的硬件和/或软件。
尽管仅选择了所选定的实施例来示出本发明,然而本领域技术人员通过本申请将明白在不背离所附权利要求中限定的本发明范围的情况下可以作出各种改变和修改。例如,各种构件的大小、形状、位置或方向可以根据需要和/或要求而改变。示出为直接连接或相互接触的构件可具有设置在它们之间的中间结构。一个元件的功能可以由两个元件来执行,反之亦然。一个实施例的结构和功能可用于另一实施例。在特定实施例中同时实现所有的优点并不是必要的。也应该考虑到将相对于现有技术独特的每一个特征单独或与其他特征结合作为对本申请人的其他发明的单独说明,包括这种特征采用的结构原理和/或功能原理。因此,前面对根据本发明的实施例的说明仅用于说明,且并不用于限制本发明,本发明应由所附的权利要求书及其等同物限定。
本申请要求申请日为2007年9月26日的日本专利中请2007-249476的优先权。这里以引用的方式结合日本专利申请2007-249476的全部公开内容。

Claims (15)

1.一种车辆周边监视设备,包括:
摄像装置,用于拍摄配置有所述车辆周边监视设备的本车辆的后方区域的图像和所述本车辆的侧后方区域的图像;
显示装置,其安装在所述本车辆内;
盲点判断部,用于当检测到表示跟随车辆阻挡所述本车辆的侧后方区域的一部分的参数时,判断为在所述本车辆的侧后方区域中存在所述跟随车辆形成的盲点区域;以及
处理部,用于响应于所述盲点判断部判断为存在所述跟随车辆形成的盲点区域,将所述显示装置上的显示图像从第一显示图像切换为第二显示图像,其中,所述第一显示图像包括所述本车辆的后方区域的图像,所述第二显示图像包括所述本车辆的侧后方区域的图像的至少一部分,其中所述至少一部分包含所述第一显示图像缺少的所述跟随车辆形成的盲点区域。
2.根据权利要求1所述的车辆周边监视设备,其特征在于,所述摄像装置包括:
第一摄像部,用于拍摄包括所述本车辆的后方区域和所述本车辆的侧后方区域的图像的第一图像;以及
第二摄像部,用于从不同于所述第一摄像部的视点拍摄包括所述本车辆的侧后方区域的图像的第二图像。
3.根据权利要求2所述的车辆周边监视设备,其特征在于,
所述处理部用于通过利用由所述第一摄像部拍摄的所述第一图像来生成所述第一显示图像,以及通过将由所述第二摄像部拍摄的所述第二图像的包括所述跟随车辆形成的盲点区域的至少一部分与由所述第一摄像部拍摄的所述第一图像相结合来生成所述第二显示图像。
4.根据权利要求3所述的车辆周边监视设备,其特征在于,
所述处理部用于通过将由所述第二摄像部拍摄的所述第二图像的包括所述跟随车辆形成的盲点区域的至少一部分叠加在由所述第一摄像部拍摄的所述第一图像上,来生成所述第二显示图像。
5.根据权利要求3所述的车辆周边监视设备,其特征在于,
所述处理部用于通过将由所述第二摄像部拍摄的所述第二图像的包括所述跟随车辆形成的盲点区域的至少一部分布置成与由所述第一摄像部拍摄的所述第一图像并排,来生成所述第二显示图像。
6.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述盲点判断部用于当所述本车辆与所述跟随车辆之间的距离等于或小于规定阈值时,判断为存在所述跟随车辆形成的盲点区域。
7.根据权利要求2所述的车辆周边监视设备,其特征在于,
所述盲点判断部用于通过处理所述第一图像来判断是否存在所述跟随车辆形成的盲点区域。
8.根据权利要求6所述的车辆周边监视设备,其特征在于,还包括:
跟随车辆检测装置,用于检测在所述本车辆之后行驶的所述跟随车辆,
所述盲点判断部用于基于所述跟随车辆检测装置的检测结果来判断是否存在所述跟随车辆形成的盲点区域。
9.根据权利要求1所述的车辆周边监视设备,其特征在于,还包括:
障碍物检测装置,用于检测在所述本车辆与所述跟随车辆之间是否存在障碍物,
所述处理部用于将表示由所述障碍物检测装置检测到的障碍物的标记叠加在所述第二显示图像上。
10.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述摄像装置包括单个照相机,所述单个照相机用于产生所述第一显示图像和所述第二显示图像两者。
11.根据权利要求10所述的车辆周边监视设备,其特征在于,
所述处理部用于通过放大由所述摄像装置拍摄的所述本车辆的后方区域的图像来生成所述第一显示图像。
12.根据权利要求2所述的车辆周边监视设备,其特征在于,
所述摄像装置还包括第三摄像部,所述第三摄像部用于拍摄第三图像,其中所述第三图像包括位于如下位置的车辆的侧后方区域的图像:该车辆相对于所述第一图像中的所述本车辆的后方区域,在所述第二图像中包含的所述本车辆的侧后方区域的相反侧,以及
所述处理部用于通过将由所述第二摄像部和所述第三摄像部拍摄的所述第二图像和所述第三图像的包括所述跟随车辆形成的盲点区域的至少一部分与由所述第一摄像部拍摄的所述第一图像结合,来生成所述第二显示图像。
13.根据权利要求12所述的车辆周边监视设备,其特征在于,
所述摄像装置包括单个照相机,所述单个照相机用于产生所述第一显示图像和所述第二显示图像两者。
14.根据权利要求1所述的车辆周边监视设备,其特征在于,
所述摄像装置用于顺序地拍摄所述本车辆的后方区域的图像和所述本车辆的侧后方区域的图像,以及
所述处理部用于顺序地输出所述第一显示图像和所述第二显示图像中的一个,来形成显示在所述显示装置上的多帧的视频序列。
15.一种车辆周边监视方法,包括:
拍摄配置有所述车辆周边监视设备的本车辆的后方区域的图像和所述本车辆的侧后方区域的图像;
当检测到表示跟随车辆阻挡所述本车辆的侧后方区域的一部分的参数时,判断为所述本车辆的侧后方区域中存在所述跟随车辆形成的盲点区域;以及
响应于判断为存在所述跟随车辆形成的盲点区域,将显示装置上显示的显示图像从第一显示图像切换为第二显示图像,其中,所述第一显示图像包括所述本车辆的后方区域的图像,所述第二显示图像包括所述本车辆的侧后方区域的图像的至少一部分,所述至少一部分包含所述第一显示图像缺少的所述跟随车辆形成的盲点区域。
CN2008101683325A 2007-09-26 2008-09-26 车辆周边监视设备和车辆周边监视方法 Active CN101396989B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2007-249476 2007-09-26
JP2007249476 2007-09-26
JP2007249476A JP5347257B2 (ja) 2007-09-26 2007-09-26 車両用周辺監視装置および映像表示方法

Publications (2)

Publication Number Publication Date
CN101396989A true CN101396989A (zh) 2009-04-01
CN101396989B CN101396989B (zh) 2010-09-29

Family

ID=40364371

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008101683325A Active CN101396989B (zh) 2007-09-26 2008-09-26 车辆周边监视设备和车辆周边监视方法

Country Status (6)

Country Link
US (1) US8058980B2 (zh)
EP (1) EP2045133B1 (zh)
JP (1) JP5347257B2 (zh)
KR (1) KR100936558B1 (zh)
CN (1) CN101396989B (zh)
DE (1) DE602008001229D1 (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102387349A (zh) * 2011-10-31 2012-03-21 深圳市长宇电器有限公司 车载摄像头取得图像的显示方法及装置
CN102449673A (zh) * 2009-06-03 2012-05-09 爱信精机株式会社 车辆周边监控方法及车辆周边监控装置
CN102652327A (zh) * 2010-02-24 2012-08-29 爱信精机株式会社 车辆周边监视装置
CN101934771B (zh) * 2009-06-29 2012-10-03 财团法人车辆研究测试中心 车辆碰撞警示系统
CN102740055A (zh) * 2011-04-01 2012-10-17 财团法人工业技术研究院 环场监控装置及其方法
CN103609101A (zh) * 2011-06-16 2014-02-26 爱信精机株式会社 车辆周边监视装置
CN103793684A (zh) * 2012-10-30 2014-05-14 现代自动车株式会社 用于全景式监控系统的检测障碍物的设备和方法
CN104321224A (zh) * 2012-12-22 2015-01-28 奥迪股份公司 具有摄像机监控系统的机动车
CN104660985A (zh) * 2009-05-29 2015-05-27 富士通天株式会社 图像处理设备、电子设备和图像处理方法
CN104859538A (zh) * 2013-10-22 2015-08-26 通用汽车环球科技运作有限责任公司 车辆图像显示系统中基于视觉的物体感测和突出显示
CN105584417A (zh) * 2014-11-11 2016-05-18 丰田自动车株式会社 车辆用视野辅助装置
CN107264399A (zh) * 2016-03-31 2017-10-20 株式会社斯巴鲁 车辆周围监视装置
CN109417611A (zh) * 2016-07-13 2019-03-01 索尼公司 图像生成设备、图像生成方法和程序
CN109606263A (zh) * 2017-10-04 2019-04-12 斯特拉德视觉公司 对监视车辆的盲点进行监视的方法及使用该方法的盲点监视器
CN109922308A (zh) * 2017-12-05 2019-06-21 丰田自动车株式会社 图像显示装置
CN110271489A (zh) * 2018-03-15 2019-09-24 松下知识产权经营株式会社 车辆周边显示系统以及显示控制装置
CN110281846A (zh) * 2018-03-19 2019-09-27 株式会社小糸制作所 图像数据生成装置
CN110386067A (zh) * 2018-04-23 2019-10-29 夏普株式会社 车辆周边显示装置
CN111886858A (zh) * 2018-03-15 2020-11-03 株式会社小糸制作所 车辆用影像系统
CN113844363A (zh) * 2020-06-26 2021-12-28 丰田自动车株式会社 车辆周边监视装置、监视方法及非瞬时性存储介质

Families Citing this family (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8305444B2 (en) * 2008-11-14 2012-11-06 Toyota Motor Engineering & Manufacturing North America, Inc. Integrated visual display system
JP2010183170A (ja) * 2009-02-03 2010-08-19 Denso Corp 車両用表示装置
JP5077307B2 (ja) 2009-08-05 2012-11-21 株式会社デンソー 車両周囲画像表示制御装置
EP2476588B1 (en) * 2009-09-11 2014-07-30 Aisin Seiki Kabushiki Kaisha Vehicle surrounding monitor apparatus
US8502860B2 (en) * 2009-09-29 2013-08-06 Toyota Motor Engineering & Manufacturing North America (Tema) Electronic control system, electronic control unit and associated methodology of adapting 3D panoramic views of vehicle surroundings by predicting driver intent
US8606316B2 (en) * 2009-10-21 2013-12-10 Xerox Corporation Portable blind aid device
DE102009050519A1 (de) * 2009-10-23 2011-04-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Fahrerinformation
DE102010020201B4 (de) 2009-11-06 2021-08-26 Volkswagen Ag Verfahren und Vorrichtung zur Darstellung der Bilder eines Rückblickkamerasystems eines Kraftfahrzeugs
WO2011093354A1 (ja) * 2010-01-29 2011-08-04 富士通テン株式会社 画像処理装置、および画像処理方法
US10643467B2 (en) * 2010-03-28 2020-05-05 Roadmetric Ltd. System and method for detecting and recording traffic law violation events
US20120229642A1 (en) * 2011-03-10 2012-09-13 Nissan North America, Inc. Vehicle monitoring system
EP2741270B1 (en) * 2011-08-02 2020-11-25 Nissan Motor Co., Ltd. Driving assistance apparatus and driving assistance method
CN103826929B (zh) * 2011-09-22 2016-08-17 日产自动车株式会社 车辆控制装置
JP5682788B2 (ja) * 2011-09-27 2015-03-11 アイシン精機株式会社 車両周辺監視装置
WO2013126715A2 (en) * 2012-02-22 2013-08-29 Magna Electronics, Inc. Vehicle camera system with image manipulation
JP5686123B2 (ja) * 2012-09-18 2015-03-18 株式会社デンソー 車両検出装置および警報装置
KR101896715B1 (ko) * 2012-10-31 2018-09-07 현대자동차주식회사 주변차량 위치 추적 장치 및 방법
US9164511B1 (en) * 2013-04-17 2015-10-20 Google Inc. Use of detected objects for image processing
KR101322162B1 (ko) 2013-07-09 2013-10-28 한국비전기술(주) 차량 검지시스템을 이용한 차량 검지방법
JP6036601B2 (ja) * 2013-08-09 2016-11-30 株式会社デンソー 画像処理装置及び画像処理方法
KR102092625B1 (ko) * 2013-10-15 2020-04-14 현대모비스 주식회사 차량 상태 경보 방법 및 이를 위한 장치
US10431105B2 (en) * 2014-01-07 2019-10-01 Honeywell International Inc. Enhanced awareness of obstacle proximity
US10963133B2 (en) 2014-01-07 2021-03-30 Honeywell International Inc. Enhanced awareness of obstacle proximity
WO2015104860A1 (ja) * 2014-01-10 2015-07-16 アイシン精機株式会社 画像表示制御装置および画像表示システム
EP3550513B1 (en) * 2014-02-26 2021-10-13 NavVis GmbH Method of generating panorama views on a mobile mapping system
WO2016039554A1 (ko) * 2014-09-11 2016-03-17 김철수 비젼 카메라를 이용한 데이터 획득 장치
KR101596751B1 (ko) * 2014-09-26 2016-02-23 현대자동차주식회사 운전자 맞춤형 사각 영역 표시 방법 및 장치
EP3209017B1 (en) * 2014-10-17 2019-12-04 Ricoh Company, Ltd. Vehicle image display system
US9649979B2 (en) * 2015-01-29 2017-05-16 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle operation in view-obstructed environments
DE102015202330A1 (de) * 2015-02-10 2016-08-11 Continental Automotive Gmbh Fahrerassistenzsystem
CN107848465B (zh) * 2015-05-06 2021-06-01 麦格纳镜片美国有限公司 具有盲区显示和警示系统的车辆视觉系统
KR101614247B1 (ko) * 2015-05-20 2016-04-29 주식회사 와이즈오토모티브 파노라마 영상의 접합면 표시장치
US9959765B2 (en) * 2015-07-20 2018-05-01 Dura Operating Llc System and method for providing alert to a vehicle or an advanced driver assist system based on vehicle dynamics input
US20170124881A1 (en) * 2015-10-28 2017-05-04 Velvac Incorporated Blind zone warning for semi-trailer
DE102015223176A1 (de) * 2015-11-24 2017-05-24 Conti Temic Microelectronic Gmbh Verfahren und Vorrichtung zur Ermittlung von Verdeckungsbereichen in der Fahrzeugumgebung eines Fahrzeuges
US20170151909A1 (en) * 2015-11-30 2017-06-01 Razmik Karabed Image processing based dynamically adjusting surveillance system
JP2017114155A (ja) * 2015-12-21 2017-06-29 三菱自動車工業株式会社 運転支援装置
US20190031102A1 (en) * 2016-01-28 2019-01-31 Hon Hai Precision Industry Co., Ltd. Image display system for vehicle use and vehicle equipped with the image display system
JP2017154530A (ja) * 2016-02-29 2017-09-07 株式会社オートネットワーク技術研究所 車載機及び車両保安システム
JP6690312B2 (ja) * 2016-03-09 2020-04-28 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6575404B2 (ja) * 2016-03-15 2019-09-18 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2017154316A1 (ja) * 2016-03-09 2017-09-14 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6690311B2 (ja) * 2016-03-09 2020-04-28 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6919740B2 (ja) * 2016-03-09 2021-08-18 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2017154317A1 (ja) * 2016-03-09 2017-09-14 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6690315B2 (ja) * 2016-03-10 2020-04-28 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
US9975480B2 (en) 2016-04-12 2018-05-22 Denso International America, Inc. Methods and systems for blind spot monitoring with adaptive alert zone
US9947226B2 (en) * 2016-04-12 2018-04-17 Denso International America, Inc. Methods and systems for blind spot monitoring with dynamic detection range
US9994151B2 (en) 2016-04-12 2018-06-12 Denso International America, Inc. Methods and systems for blind spot monitoring with adaptive alert zone
US9931981B2 (en) 2016-04-12 2018-04-03 Denso International America, Inc. Methods and systems for blind spot monitoring with rotatable blind spot sensor
JP6511015B2 (ja) * 2016-05-25 2019-05-08 株式会社ミツバ 車両モニタシステム
JP6730615B2 (ja) * 2016-07-12 2020-07-29 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6706797B2 (ja) * 2016-10-26 2020-06-10 パナソニックIpマネジメント株式会社 電子ミラー装置
KR20180060753A (ko) * 2016-11-29 2018-06-07 주식회사 와이즈오토모티브 운전 보조 장치 및 방법
EP3562710A4 (en) * 2016-12-30 2019-11-13 Gentex Corporation COMPLETE DISPLAY MIRROR WITH ON-DEMAND OBSERVER VIEW
JP6601422B2 (ja) * 2017-01-11 2019-11-06 トヨタ自動車株式会社 画像表示装置
JP2018116516A (ja) * 2017-01-19 2018-07-26 トヨタ自動車株式会社 車両の注意喚起装置
JP6744236B2 (ja) * 2017-02-08 2020-08-19 トヨタ自動車株式会社 画像表示装置
JP6730612B2 (ja) * 2017-02-27 2020-07-29 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示制御システム、車両用表示制御方法およびプログラム
JP6680254B2 (ja) * 2017-03-22 2020-04-15 トヨタ自動車株式会社 車両用表示制御装置
JP6649914B2 (ja) * 2017-04-20 2020-02-19 株式会社Subaru 画像表示装置
JP7080616B2 (ja) * 2017-10-10 2022-06-06 マツダ株式会社 車両用表示装置
JP2019110390A (ja) * 2017-12-15 2019-07-04 株式会社東海理化電機製作所 車両周辺監視装置
JP7021001B2 (ja) * 2018-05-25 2022-02-16 アルパイン株式会社 画像処理装置および画像処理方法
JP7052632B2 (ja) * 2018-08-10 2022-04-12 トヨタ自動車株式会社 車両用周辺表示装置
US10967792B1 (en) 2018-10-12 2021-04-06 Roger Stafford Apparatus for monitoring periphery of a vehicle and displaying a view of the periphery on a display device
JP7159802B2 (ja) * 2018-11-15 2022-10-25 トヨタ自動車株式会社 車両用電子ミラーシステム
JP7279566B2 (ja) 2019-07-26 2023-05-23 トヨタ自動車株式会社 車両用電子ミラーシステム
JP7280006B2 (ja) * 2019-08-06 2023-05-23 アルパイン株式会社 画像処理装置、画像処理方法および画像処理プログラム
US10981507B1 (en) 2019-11-07 2021-04-20 Focused Technology Solutions, Inc. Interactive safety system for vehicles
JP2021153286A (ja) * 2020-03-23 2021-09-30 パナソニックIpマネジメント株式会社 画像合成装置、及び、画像合成方法
JP7347330B2 (ja) * 2020-05-27 2023-09-20 トヨタ自動車株式会社 車両周辺監視装置
JP7314885B2 (ja) * 2020-09-01 2023-07-26 トヨタ自動車株式会社 車両用周辺監視装置

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3102250B2 (ja) * 1994-02-14 2000-10-23 三菱自動車工業株式会社 車両用周囲情報表示装置
JPH0858470A (ja) * 1994-08-24 1996-03-05 Alpine Electron Inc 後方確認装置
US5680123A (en) * 1996-08-06 1997-10-21 Lee; Gul Nam Vehicle monitoring system
JPH10257482A (ja) * 1997-03-13 1998-09-25 Nissan Motor Co Ltd 車両周辺状況表示装置
JPH115501A (ja) * 1997-06-18 1999-01-12 Nissan Motor Co Ltd 車両後側方状況表示装置
CN100438623C (zh) * 1999-04-16 2008-11-26 松下电器产业株式会社 图象处理装置及监视系统
US6734896B2 (en) * 2000-04-28 2004-05-11 Matsushita Electric Industrial Co., Ltd. Image processor and monitoring system
WO2001085491A1 (en) * 2000-05-08 2001-11-15 Automotive Technologies International, Inc. Vehicular blind spot identification and monitoring system
JP3645196B2 (ja) 2001-02-09 2005-05-11 松下電器産業株式会社 画像合成装置
US7634341B2 (en) * 2001-03-07 2009-12-15 1138037 Ontario Ltd. (“Alirt”) Detecting device and method of using same
JP2002308030A (ja) * 2001-04-16 2002-10-23 Yazaki Corp 車両用周辺監視装置
JP2002334322A (ja) 2001-05-10 2002-11-22 Sharp Corp 透視投影画像生成システム、透視投影画像生成方法、透視投影画像生成プログラムおよび透視投影画像生成プログラムを記憶した記憶媒体
JP2003081014A (ja) * 2001-09-14 2003-03-19 Auto Network Gijutsu Kenkyusho:Kk 車両周辺監視装置
KR100866450B1 (ko) * 2001-10-15 2008-10-31 파나소닉 주식회사 차량 주위 감시 장치 및 그 조정 방법
US6737964B2 (en) * 2001-11-05 2004-05-18 Ford Global Technologies, Llc Vehicle blind spot monitoring system
JP2004040411A (ja) * 2002-07-02 2004-02-05 Sumitomo Electric Ind Ltd 車外画像表示システム、画像処理装置及び車外画像表示方法
JP2004312523A (ja) * 2003-04-09 2004-11-04 Equos Research Co Ltd 車載画像処理装置
DE10343866A1 (de) 2003-09-23 2005-04-21 Daimler Chrysler Ag Stereokameraanordnung
JP2005328181A (ja) * 2004-05-12 2005-11-24 Mitsubishi Electric Corp 周囲確認装置
JP4552525B2 (ja) * 2004-06-11 2010-09-29 株式会社エクォス・リサーチ 車両の画像処理装置
JP4560716B2 (ja) * 2004-09-28 2010-10-13 アイシン精機株式会社 車両の周辺監視システム
JP4468859B2 (ja) * 2005-06-06 2010-05-26 アルパイン株式会社 画像合成装置および合成方法
JP4720386B2 (ja) 2005-09-07 2011-07-13 株式会社日立製作所 運転支援装置
JP4762698B2 (ja) 2005-11-30 2011-08-31 アルパイン株式会社 車両周辺画像表示装置
CN101029823B (zh) * 2006-02-28 2010-09-15 东软集团股份有限公司 基于车辆状态分类的车辆跟踪方法和装置
JP2007249476A (ja) 2006-03-15 2007-09-27 Ricoh Co Ltd 情報処理装置および情報処理方法
JP4731392B2 (ja) * 2006-04-26 2011-07-20 アルパイン株式会社 車載周辺状況提示装置
JP4906437B2 (ja) * 2006-08-22 2012-03-28 アルパイン株式会社 周辺監視システム
TWI314115B (en) * 2007-09-27 2009-09-01 Ind Tech Res Inst Method and apparatus for predicting/alarming the moving of hidden objects

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104660985B (zh) * 2009-05-29 2018-02-13 富士通天株式会社 图像处理设备、电子设备和图像处理方法
CN104660985A (zh) * 2009-05-29 2015-05-27 富士通天株式会社 图像处理设备、电子设备和图像处理方法
US8854197B2 (en) 2009-06-03 2014-10-07 Aisin Seiki Kabushiki Kaisha Method of monitoring vehicle surroundings, and apparatus for monitoring vehicle surroundings
CN102449673A (zh) * 2009-06-03 2012-05-09 爱信精机株式会社 车辆周边监控方法及车辆周边监控装置
CN101934771B (zh) * 2009-06-29 2012-10-03 财团法人车辆研究测试中心 车辆碰撞警示系统
CN102652327A (zh) * 2010-02-24 2012-08-29 爱信精机株式会社 车辆周边监视装置
US9073483B2 (en) 2010-02-24 2015-07-07 Aisin Seiki Kabushiki Kaisha Vehicle surroundings monitoring device
CN102652327B (zh) * 2010-02-24 2015-03-11 爱信精机株式会社 车辆周边监视装置
CN102740055A (zh) * 2011-04-01 2012-10-17 财团法人工业技术研究院 环场监控装置及其方法
US8823796B2 (en) 2011-04-01 2014-09-02 Industrial Technology Research Institute Adaptive surrounding view monitoring apparatus and method thereof
US9013579B2 (en) 2011-06-16 2015-04-21 Aisin Seiki Kabushiki Kaisha Vehicle surrounding-area monitoring apparatus
CN103609101A (zh) * 2011-06-16 2014-02-26 爱信精机株式会社 车辆周边监视装置
CN102387349B (zh) * 2011-10-31 2014-12-10 深圳市长宇电器有限公司 车载摄像头取得图像的显示方法及装置
CN102387349A (zh) * 2011-10-31 2012-03-21 深圳市长宇电器有限公司 车载摄像头取得图像的显示方法及装置
CN103793684B (zh) * 2012-10-30 2018-11-16 现代自动车株式会社 用于全景式监控系统的检测障碍物的设备和方法
CN103793684A (zh) * 2012-10-30 2014-05-14 现代自动车株式会社 用于全景式监控系统的检测障碍物的设备和方法
CN104321224A (zh) * 2012-12-22 2015-01-28 奥迪股份公司 具有摄像机监控系统的机动车
CN104321224B (zh) * 2012-12-22 2016-09-07 奥迪股份公司 具有摄像机监控系统的机动车
CN104859538A (zh) * 2013-10-22 2015-08-26 通用汽车环球科技运作有限责任公司 车辆图像显示系统中基于视觉的物体感测和突出显示
CN105584417A (zh) * 2014-11-11 2016-05-18 丰田自动车株式会社 车辆用视野辅助装置
CN107264399A (zh) * 2016-03-31 2017-10-20 株式会社斯巴鲁 车辆周围监视装置
CN107264399B (zh) * 2016-03-31 2021-07-09 株式会社斯巴鲁 车辆周围监视装置
CN109417611A (zh) * 2016-07-13 2019-03-01 索尼公司 图像生成设备、图像生成方法和程序
US10857942B2 (en) 2016-07-13 2020-12-08 Sony Corporation Image generating device, image generating method, and program
CN109606263B (zh) * 2017-10-04 2022-03-11 斯特拉德视觉公司 对监视车辆的盲点进行监视的方法及使用该方法的盲点监视器
CN109606263A (zh) * 2017-10-04 2019-04-12 斯特拉德视觉公司 对监视车辆的盲点进行监视的方法及使用该方法的盲点监视器
CN109922308A (zh) * 2017-12-05 2019-06-21 丰田自动车株式会社 图像显示装置
US10965872B2 (en) 2017-12-05 2021-03-30 Toyota Jidosha Kabushiki Kaisha Image display apparatus
CN109922308B (zh) * 2017-12-05 2021-04-27 丰田自动车株式会社 图像显示装置
CN109922308B9 (zh) * 2017-12-05 2021-06-04 丰田自动车株式会社 图像显示装置
CN110271489A (zh) * 2018-03-15 2019-09-24 松下知识产权经营株式会社 车辆周边显示系统以及显示控制装置
CN110271489B (zh) * 2018-03-15 2022-10-25 松下知识产权经营株式会社 车辆周边显示系统以及显示控制装置
CN111886858A (zh) * 2018-03-15 2020-11-03 株式会社小糸制作所 车辆用影像系统
CN110281846A (zh) * 2018-03-19 2019-09-27 株式会社小糸制作所 图像数据生成装置
CN110386067A (zh) * 2018-04-23 2019-10-29 夏普株式会社 车辆周边显示装置
CN113844363A (zh) * 2020-06-26 2021-12-28 丰田自动车株式会社 车辆周边监视装置、监视方法及非瞬时性存储介质
CN113844363B (zh) * 2020-06-26 2023-08-08 丰田自动车株式会社 车辆周边监视装置、监视方法及非瞬时性存储介质

Also Published As

Publication number Publication date
KR100936558B1 (ko) 2010-01-13
EP2045133A3 (en) 2009-05-06
KR20090031997A (ko) 2009-03-31
EP2045133B1 (en) 2010-05-12
JP2009081666A (ja) 2009-04-16
US20090079553A1 (en) 2009-03-26
JP5347257B2 (ja) 2013-11-20
EP2045133A2 (en) 2009-04-08
US8058980B2 (en) 2011-11-15
DE602008001229D1 (de) 2010-06-24
CN101396989B (zh) 2010-09-29

Similar Documents

Publication Publication Date Title
CN101396989A (zh) 车辆周边监视设备和车辆周边监视方法
US10449899B2 (en) Vehicle vision system with road line sensing algorithm and lane departure warning
US10324297B2 (en) Heads up display system for vehicle
US8009868B2 (en) Method of processing images photographed by plural cameras and apparatus for the same
US10380439B2 (en) Vehicle sensing system for detecting turn signal indicators
US10000155B2 (en) Method and device for reproducing a lateral and/or rear surrounding area of a vehicle
JP5132249B2 (ja) 車載用撮像装置
US11648877B2 (en) Method for detecting an object via a vehicular vision system
KR102045088B1 (ko) 영상 표시 방법 및 이를 위한 위한 장치
US8477191B2 (en) On-vehicle image pickup apparatus
US10846833B2 (en) System and method for visibility enhancement
JP4200343B2 (ja) モニタ装置
JP2012195793A (ja) 車両周辺監視装置
US20190135169A1 (en) Vehicle communication system using projected light
CN108698542A (zh) 车辆监控系统
JP2002120675A (ja) 車両周辺監視支援装置
JP4479183B2 (ja) 映像提示装置
JP3464368B2 (ja) 車両用後側方監視装置
JP3988551B2 (ja) 車両周囲監視装置
JPH04193641A (ja) 車両用障害物検出装置
JP2003151096A (ja) 進入警報装置
KR102010407B1 (ko) 스마트 리어뷰 시스템
US11648876B2 (en) System and method for visibility enhancement
US20230286439A1 (en) Vehicular vision system with advanced safety views
US20230085024A1 (en) Apparatus for obstacle detection based on relative image motion

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant