CN104918825B - 用于车辆的后视成像系统 - Google Patents

用于车辆的后视成像系统 Download PDF

Info

Publication number
CN104918825B
CN104918825B CN201380055886.3A CN201380055886A CN104918825B CN 104918825 B CN104918825 B CN 104918825B CN 201380055886 A CN201380055886 A CN 201380055886A CN 104918825 B CN104918825 B CN 104918825B
Authority
CN
China
Prior art keywords
vehicle
visual field
imaging system
fov
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380055886.3A
Other languages
English (en)
Other versions
CN104918825A (zh
Inventor
P·科科伦
P·比焦伊
P·斯特克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fotonation Ltd
Original Assignee
DigitalOptics Corp Europe Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DigitalOptics Corp Europe Ltd filed Critical DigitalOptics Corp Europe Ltd
Publication of CN104918825A publication Critical patent/CN104918825A/zh
Application granted granted Critical
Publication of CN104918825B publication Critical patent/CN104918825B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1253—Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

一种用于车辆(10)的后视成像系统包括：安装在车辆的后部、用于提供从车辆向后的广角水平视场(FoV)的至少一个视频相机；以及处于车辆中驾驶员可查看的位置的显示设备。视频处理器将相机FoV细分为三个水平设置的子FoV(RH FoV、中央FoV、LH FoV)并且在显示设备屏幕的视觉上分离的并排区域上显示所述子FoV。至少一个子FoV的水平位置和/或范围作为车辆运动的函数可变。

Description

用于车辆的后视成像系统
相关申请
本申请涉及于2012年7月3日提交的美国申请No.13/541,650，其通过引用方式并入于此。
技术领域
本发明涉及用于汽车和其它车辆的后视成像系统。
背景
美国专利4,214,266(通过引用方式被并入)描述了在操纵车辆的同时用于协助操作者的视觉辅助系统。由'266专利描述的系统包含闭路视频系统，闭路视频系统包含距离测量装置。系统使操作者能够看到车辆的后面，并且通过使用距离指示装置，操作者可知道车辆的后部距离经由视频系统看到的对象多远。
美国专利5,670,935(通过引用方式被并入)描述了用于车辆的后视视觉系统，其包括至少一个相对于车辆行驶方向向后定向的图像捕获设备。显示系统(例如包括在'935专利中示意性图示的显示器20、20'、20"或20"'中的任何显示器)提供了从图像捕获设备的输出合成的图像。在'935专利描述的显示系统在其是车辆乘客室前部的焦距处可与车辆驾驶员的前方视场邻接。多个图像捕获设备可如'935专利中阐述的而被提供，且显示系统可显示从图像捕获设备的输出合成的单一图像，从而逼近从诸如车辆前部之类的单个位置的面后向的视图。
美国专利6,559,761(通过引用方式被并入)公开了用于车辆的俯视图显示系统。在'761专利中公开的显示系统包括在俯视场内的参考车辆指示器和至少三个视场显示部分。每个显示部分表示毗邻参考车辆的物理区域，且包括适于显示区域内另一车辆的存在以及在参考车辆和该另一车辆之间的相对距离的第一指示器。在'761专利中公开的另一个实施例中，每个视场显示部分包括适于表示在参考车辆和另一车辆之间的相对距离的改变方向、并可能表示车辆类型的第二指示器。因此，在'761专利中公开的显示系统将关于车辆的操作环境的信息传达给车辆操作者，同时尝试限制驾驶员注意力分散的程度。期望具有进一步降低驾驶员注意力分散的后视成像系统。
美国专利7,139,412(通过引用方式被并入)描述了用来创建车辆周围区域的合成“鸟瞰图”的手段。多台相机(CAM1)至(CAM8)在'412专利中被描述为安装在车辆上以用于拍摄局部车辆的外围。当得到时，相机图像被合成并在显示设备的屏幕上显示。相机图像的像素数据在'412专利中被描述为构成被补偿的合成图像，使得毗邻相机图像的像素数据的差异减少。在'412专利中描述的一个示例中，像素数据被校正，使得他们的值等于毗邻相机图像的像素数据的平均值。期望具有信息量更多但可容易查看的后视图像，其被提供在显示器上用于车辆用户查看。
美国专利7,881,496(通过引用方式被并入)描述了用于车辆的视觉系统，其包含具有成像传感器的成像设备、相机微控制器、具有显示元件的显示设备、显示微控制器、以及至少一个可由用户选择性地致动的用户输入。成像设备将图像信号经由通信链路传达至显示设备。显示微控制器响应于至少一个用户输入而影响图像信息。相机微控制器监控在通信链路上的图像信号，并响应于检测到受影响的图像信号而调整成像设备的功能。'496专利中描述的视觉系统与距离检测系统结合可调整系统的显示器或传感器。期望具有改进的后视成像系统。
美国专利8,150,210描述了用于车辆的图像合成系统，以为驾驶员提供车的360度环视的面向下的图像。系统包括：第一相机，其用于拍摄车辆外围的第一图像；第二相机，其用于拍摄车辆外围的第二图像，其中第二图像和第一图像有重叠区域。'210专利中公开的图像处理设备包括定义部件和合成部件，其用于合成第一图像和第二图像并输出第三图像。显示设备用于显示第三图像。期望具有管理在重叠区域中的对象合成的系统，使得对象不被扭曲。
美国专利6,734,896和美国专利7,714,887(它们通过引用方式被并入)描述了图像处理器，其被编程为从用捕获车辆周围环境的多个相机取得的相机图像生成自然合成的图像。参数储存部分储存表示在相机图像和合成图像之间的对应性并具有不同的空间或时间分辨率关系的多个图像合成参数组。参数选择部分根据用于检测诸如行驶速度和方向之类的车辆运动的车辆运动检测部分的输出来选择图像合成参数组。图像合成部分根据所选择的图像合成参数组从相机图像来生成合成图像。
附图说明
本发明的实施例现在将通过示例的方式参考附图来描述，在附图中：
图1a和图1b分别图示依照某些实施例的汽车的示意性侧视图和顶视图。
图2a到图2d图示依照某些实施例当车辆倒车时相机的整体广角视场(WFoV)被视频处理器分割为三个子FoV。
图3a和图3b分别图示依照某些实施例的装备有后视成像的汽车的示意性侧视图和顶视图，其中当车辆转变为向前运动时水平和竖直视场(FoV)在显示器上变窄。
图4到图6示意性地图示了包含两个或更多相机的实施例。
具体实施方式
根据某些实施例，用于车辆的后视成像系统包含至少一个安装在车辆后部的视频相机，以用于提供车辆向后的广角水平视场(FoV)。显示设备被提供在车辆中在可由驾驶员查看的位置处，以用于查看由至少一个视频相机提供的图像。视频处理器把相机FoV细分为多个子FoV，例如三个水平设置的子FoV。视频处理器生成显示的图像，图像包括在显示设备屏幕的视觉上分离的并排区域上显示的子FoV，其中至少一个子FoV的水平位置和/或延伸作为车辆运动的函数可变。
例如在其中相机FoV被细分成三个子FoV的示例实施例中，相机FoV可被分为左边(LH)、右边(RH)和中央子FoV。
在某些实施例中，当车辆在倒车和转向特定方向时，在中央FoV与在车辆侧边的其中车辆正在倒车的一个或多个子FoV之间的界线朝车辆的该侧移位。在这个示例中，当车辆在倒车以及转向上述特定方向时，显示中央FoV的显示屏幕区域可以以牺牲显示屏幕的至少一个其它区域为代价而被拉长。
当车辆向前移动时，一个或多个子视场可以在某些实施例中变窄。子视场在车辆速度增加时可以逐渐变得更窄。
在某些实施例中，在车辆在向后运动中变慢、停止和/或开始向前运动时，包括用于停车或倒车操作的广角查看系统和调整FoV的动态视场系统的组合系统的好处。二显示或三显示(或更多显示)格式在某些实施例中被提供，其当处于向前运动时，可模拟传统的左、右和后视镜。包括车辆的后部以及车辆的一侧或两侧的至少部分、从而包括一个或多个盲点的例如90°或120°或150°或180°的全景视图的宽视场被有利地提供在可容易地查看的显示器上以用于驾驶员在倒车时利用。
图1a和图1b分别是依照某些实施例的示意性地图示竖直和水平视场(FoV)的汽车10的示意性侧视图和顶视图。在这个实施例中的后视成像系统包含在后部安装在车辆外部的用于对车辆后面的视图进行成像的面向后的广角视场(WFoV)视频相机12。这个实施例的系统可仅包含单个WFoV相机12，或者两个或更多相机可被使用(见例如图4、图5和图6以及下面的对两个和三个(或更多)相机实施例的描述)。相机12可被安装在车辆壳体、行李箱壳体、保险杠壳体、牌照壳体、刹车灯或转向信号壳体内部的隔室中，或在具有足够用于捕获具有期望的一个或多个视场的图像的孔径(aperture)的其它隔室中。相机或相机模块可被使用，其具有诸如减震、防水密封、缩放和/或自动聚焦、电磁干扰(EMI)屏蔽之类的特征，或者具有如可能在美国专利申请13/571,393、13/571,395、13/571,397、13/571,405、13/445,857、61/609,293和61/643,331和美国专利RE42,898以及美国公开专利申请号20120063761、20110221936、20110216158、20090115885和20090225171中的任何项描述的一个或多个或几个进一步的特征，它们被转让给相同受让人，且通过引用方式并入于此。可以用备选实施例包括的其它相机和相机模块实施例以及相机模块的特征和部件的实施例在美国专利号7,224,056、7,683,468、7,936,062、7,935,568、7,927,070、7,858,445、7,807,508、7,569,424、7,449,779、7,443,597、7,768,574、7,593,636、7,566,853、8,005,268、8,014,662、8,090,252、8,004,780、8,119,516、7,920,163、7,747,155、7,368,695、7,095,054、6,888,168、6,583,444和5,882,221和美国公开专利申请号2012/0063761、2011/0317013、2011/0255182、2011/0274423、2010/0053407、2009/0212381、2009/0023249、2008/0296,717、2008/0099907、2008/0099900、2008/0029879、2007/0190747、2007/0190691、2007/0145564、2007/0138644、2007/0096312、2007/0096311、2007/0096295、2005/0095835、2005/0087861、2005/0085016、2005/0082654、2005/0082653、2005/0067688和美国专利申请号61/609,293以及PCT申请号PCT/US2012/024018和PCT/US2012/025758进行了描述，其全部都通过引用方式并入于此。
再次参考图1a和图1b的示例图示，宽频显示设备14被安装在车辆内部在前面以用于驾驶员查看。视频处理器16被包括用于处理来自相机12的视频信号以用于在显示设备14处查看，且在下文中详细描述。相机12、视频处理器16和显示器14在图1a中的示例配置中被图示，且可以各种方式被安装并连接。例如，有线或无线信号可在部件12、14和16之间传送并接收，且可以设置两个相机12以提供3D图像，且距离信息可以通过在美国公开申请号2012/0007940Al、2012/0200725Al、2012/0120283Al、2012/0075492Al和/或2007/0269108和/或美国专利申请序列号PCT/US2012/025758、US 13/077,891和/或美国专利7,469,071、7,692,696、7,606,417和/或7,868,922中的任何项描述的技术而被提供，它们被转让给相同受让人，且通过引用方式并入。
图1a图示了当相机的竖直FoV未被选择在水平线之上显著延伸时的侧视图的示例；然而，由于FoV可被在视频处理器内的图像处理部分数字化地调整，具有所选择的FoV的相机(包含多达完整半球的视图)可被使用，并且例如通过使用多个相机和/或一个或多个镜子，甚至大于180°的FoV可在某些实施例中被使用。虽然视频处理器16在图1a中作为独立单元被示出，但是它的一些或所有功能可被包含在相机和/或显示单元内，或分布在二者之间，且多个处理器部件可组合来形成视频处理器16，诸如图像信号处理器或ISP、中央处理单元或CPU和/或硬件加速部件，诸如在美国公开申请号2012/0008002Al、2011/0134287A1、2011/0115928Al和/或2012/0106790Al描述的，其全部都通过引用方式被并入。
图1a图示了大约70度的示例性竖直FoV，且图1b图示了其可以尽可能接近180度、且在多个实施例中不小于135度的水平FoV。在某些实施例中，相机被安装得更高，诸如在更高的车辆上或朝向车顶定位，且相应地提供不同的、通常更宽的竖直FoV。
在若干实施例中，相机FoV以及相机位置的配置以及一个或多个相机的数量以及不同指向的相机以及组合的视场允许对紧跟在车辆后面的区域和在驾驶员后面侧边上的一个或两个盲点进行成像。
图2a图示了依照某些实施例的用于相机12的整体广角FoV的显示器14如何被视频处理器16分割为三个子FoV，在这个示例中，当车辆倒车时，包含左边FoV、右边FoV和中央FoV。
当倒车时，竖直FoV(其在某些实施例中可被动态调整)包含如图1a所示的紧跟在车辆后面的以及在驾驶员侧边和后面的盲点中的区域。当使子FoV变宽和变窄例如参考图3b进行描述、或改变在子FoV之间的界线参考图2d进行描述时，在某些实施例中这些通过视频处理器16的协助得以完成，而相机(或在以后的实施例中的多个相机)的一个或多个物理视场不会改变。在备选的实施例中，一个或多个相机的视场可被调整。
源自三个子FoV的图像被传送到宽屏显示设备14，并且并排显示在宽屏显示设备14上，宽屏显示设备14可包含实现在宽屏显示单元上的虚拟2屏或3屏(或更多屏)显示器。三个图像场之间的分离可以如利用在显示器上清楚地给每个图像与其相邻图像划界的软件生成的竖条20所示。
在图2a中，儿童22被表示在车辆的盲点中，且与左边FoV和中央FoV重叠。第一点是如果视频表示直接被转移到显示设备14，儿童会跨右边条20出现，这对驾驶员来说是反直觉的，因为儿童实际上是在车辆的左手侧。因此在某些实施例中，整个视频显示器是左右反转的，以获得显示设备屏幕上的正确直觉显示，如图2b所示。
关于图2a的第二点是，比起如果其图像完全落在图像之一的子FoV内，在其图像跨越条20的情况下，儿童更不太可能被看见。因此，在某些实施例中，当车辆实际上倒车时(与处于静止相反)，中央FoV在倒车的方向上旋转，使得在倒车方向上的前景对象偏移被带入中央图像内。这在图2d中示出，其中车辆正在向左倒车，并且中央FoV已向左旋转；使得儿童被带入中央FoV图像内，如图2c所示。在某些实施例中，LH FoV的角度已减少，同时RH FoV的角度已增加相同量。备选地，然而，仅仅是中央FoV的左边边界可以向左旋转，从而将右边边界留在原处。在某些实施例中，在LH FoV角度将减少的同时，RH FoV角度将保持不变。
在其它实施例中，即使当车辆静止时，系统被配置为以图2d中示出的方式来旋转后FoV。这可通过前景/背景分析来实现，以检测感兴趣的前景对象，且当发现这样的前景对象时，中央FoV或至少在车辆相关侧的中央FoV的边界被旋转，以将对象包含在中央FoV内。
同样，三个子FoV图像—左边FoV、中央FoV和右边FoV—的宽度可基于车辆运动而动态适配。因此在某些实施例中，在倒车的同时，当驾驶员开始向左转时，在这个方向上的视图被视为变得更加重要，且因此视图的这个部分的表示可在显示单元上被放大和/或拉长，同时后FoV或右边FoV的表示或二者可相应地减小。这种情况也在图2c中图示。
图3a和图3b分别为图示水平和竖直FoV的汽车10的示意性侧视图和顶视图，水平和竖直FoV在某些实施例中当车辆从向后运动或从停止转变成向前运动时可以变窄，和/或当车辆从向前运动或从停止转变为倒车方向时可以变宽。
当正在进行向向前运动的转变时，后视成像系统继续监控车辆的后部，但是由于示出车辆的后区域和侧区域的非常宽的全景显示现在被视为不太重要，两个或三个或更多水平子FoV(例如RH FoV、LH FoV和中央FoV)的角度范围相比于倒车而变窄(再一次，这种变窄在某些实施例中通过视频处理器选择期望FoV而完成，而不是通过改变相机的物理FoV；虽然在备选的实施例中相机FoV可被调整)。在某些实施例中随着车辆的速度增加，水平FoV的角度范围逐渐变得更窄，直到最后，例如在高速行驶时，LH和RH FoV将近似对应于侧视镜(wing mirror)的视场，而中央FoV近似对应于后视镜的视场(见图3b)。在对紧跟在车辆后部的盲点进行成像和显示现在被视为不太重要时，除了水平FoV的变窄之外，竖直FoV也可在某些实施例中变窄(图3a)。
用于实现某些实施例的特别有用的处理器16在于2012年7月3日提交的美国申请号13/541,650中被描述(代理人参考：FN-384-US/P10275us00)，其通过引用方式并入于此。在本文中，处理器将显示器14分为许多局部网格。每个网格在三个子FoV的实施例中对应于相应左边、右边和中央FoV，且每个子FoV对应于从相机12获取的图像流的区域。由相机12提供的图像流被存储在存储器中，且用于每个网格的图像信息区域转而由处理器的校正引擎部件跨系统总线检索。校正引擎使用于每个局部网格的图像信息在将校正的信息写回到系统存储器(从系统存储器检索校正的信息以用于显示)之前经受包括局部仿射和全局变换的变换组合。例如在某些实施例中，这些变换中的每个变换可以补偿物理透镜畸变(全局变换)、仿真透镜畸变(局部变换)，或例如可以实现关于相机视图的显示镜像(仿射变换)。然而，通过单独定义个体变换并在用于局部网格的单个步骤中应用变换组合，校正引擎可因此有效地在显示器的侧边仿真侧视镜视场，其中在中央具有单独调整的后视图显示。此外，响应于如上文描述的车辆的移动，处理器还可容易调整每个网格的尺寸。在某些实施例中，特征和部件可以是如在美国公开专利申请号US20110216156A1、US20120133746A1、US20110141227A1、US20110141229A1和/或US20120019613A1以及美国专利申请序列号13/077,891、13/084,340和/或13/078,971描述的特征和部件，它们全部通过引用方式被并入。
图4示意性地图示了包含具有重叠视场的两个WFoV相机的另一个实施例。如示出的，在这种情况下左边相机FoV的左边部分提供用于显示设备14的LH FoV，右边相机FoV的右边部分提供用于显示设备的RH FoV，且用于显示设备的中央FoV源自两个相机的中央FoV#1和中央FoV#2部分。这些FoV通过视频处理器16来定义。在某些实施例中涉及通过视频处理器的一些附加后处理，以组合来自两个独立相机的两个中央FoV。两个或更多相机的这种配置允许一些范围以成像并分析阻挡单个相机的全部中央FoV的后面对象。这个备选的实施例还为在高速行驶时的LH和RH显示提供与侧视镜FoV对应的更真实的FoV。许多备选是可能的，诸如使用四个子FoV或另一个偶数(例如2、6、8等)，使得中央FoV被简单分为分别与两个相机的右和左子FoV对应的左侧和右侧，或三个(或5、7等)相机可被使用，其中中间相机提供中央FoV。
图5图示了另一个实施例，其中一个或多个附加面向后的相机被并入在侧视镜的位置或靠近侧视镜的位置。在图5所示的示例中，包括两个附加的相机。在更高的向前速度下这些相机可被启动，且他们的输出供给显示设备14的LH和RH显示屏，代替来自在车辆后部的WFoV相机的LH FoV和RH FoV。在某些实施例中，来自这些相机的视图可与LH FoV和RHFoV组合，以创建用于LH和RH显示屏的复合显示。这消除了针对正好行驶到我们车辆的侧边且因此在WFoV后相机的视图之外的另一车辆的潜在盲点。
图6图示了某些实施例，其中三个视频相机(未示出)相互非常接近地位于车辆后部中央。每个相机的FoV提供相应的将被传送到显示设备14的三个水平FoV之一。因此左边相机的FoV提供LHFoV，右边相机的FoV提供RH FoV，且中间相机的FoV提供中央FoV。期望在LH和中央子FoV之间以及在中央和RH子FoV之间的一些重叠，以允许在这些FoV之间的配准(registration)。
如将理解的，本发明实现在车辆中，其中由相机提供的图像流将通过使处理器平台尽可能合理化来可靠地实时处理并显示。
本发明不限于本文中描述的实施例，其可被修改或改变而不脱离本发明的范围。
例如，用于移动透镜或其它光学部件以便自动聚焦和/或缩放的合适MEMS致动器被描述在美国专利申请序列号61/622,480以及美国PCT申请号PCT/US12/24018以及US20110230013和20080157323，其中这些中的每个均通过引用方式被并入。
在其它实施例中，导电线路(例如见USSN 13/571,393)还可部分沿传感器部件或传感器部件壳体或透镜镜筒的外面、或者通过传感器壳体或传感器运行(例如使用如US20110230013或20080157323中的热过孔或硅通过孔或导电过孔或铜过孔，它们通过引用方式被并入)。依照某些实施例，导电线路可将电子致动器部件的接触垫连接到柔性印刷电路或印刷电路板的接触垫。可以设置减震海绵或其它弹性部件，以屏蔽内部相机模块光学器件和电子设备免遭对相机模块的外壳的震动，且EMI屏蔽和自动聚焦且/或缩放特征或调节可被提供，如可在13/571,393申请中通过示例描述的，其通过引用方式被并入。
依照某些实施例，加速计和/或定向传感器可包含在相机模块中，例如如可以在美国序列号61/622,480和/或61/675,812描述的，它们被转让给相同的受让人，且通过引用方式并入。
虽然本发明的示例性附图和具体实施例已被描述和图示，但是要理解的是本发明的范围将不限于所讨论的特定实施例。因此，实施例应被当做说明性的而不是限制性的，且应理解的是本领域的技术工作者可以在那些实施例中做出变化，而不脱离本发明的范围。
另外，在可根据本文中的优选实施例执行且可以已在上文中被描述的方法中，已经以所选的排版顺序对操作进行了描述。然而，出于排版方便，顺序已被选择和如此排序，且并不旨在暗示任何用于执行操作的特定排序，除了其中可能明确阐述特定排序或其中本领域普通技术人员可能认为特定排序是必要的那些顺序。
另外，在本文中上面和下面引用的所有参考都通过引用方式被并入，以及背景、摘要和附图说明和美国申请12/213,472、12/225,591、12/289,339、12/774,486、13/026,936、13/026,937、13/036,938、13/027,175、13/027,203、13/027,219、13/051,233、13/163,648、13/264,251和PCT申请WO/2007/110097和美国专利6,873,358和RE42,898各自均通过引用方式被并入具体实施方式，如同公开备选的实施例。
此外，以下项也通过引用方式被并入，如同公开备选的实施例：
美国专利号8,055,029、7,855,737、7,995,804、7,970,182、7,916,897、8,081,254、7,620,218、7,995,855、7,551,800、7,515,740、7,460,695、7,965,875、7,403,643、7,916,971、7,773,118、8,055,067、7,844,076、7,315,631、7,792,335、7,680,342、7,692,696、7,599,577、7,606,417、7,747,596、7,506,057、7,685,341、7,694,048、7,715,597、7,565,030、7,636,486、7,639,888、7,536,036、7,738,015、7,590,305、7,352,394、7,564,994、7,315,658、7,630,006、7,440,593、7,317,815和7,289,278，以及
美国专利申请序列号13/306,568、13/282,458、13/234,149、13/234,146、13/234,139、13/220,612、13/084,340、13/078,971、13/077,936、13/077,891、13/035,907、13/028,203、13/020,805、12/959,320、12/944,701和12/944,662；以及
美国公开专利申请序列号US20120019614、US20120019613、US20120008002、US20110216156、US20110205381、US20120007942、US20110141227、US20110002506、US20110102553、US20100329582、US20110007174、US20100321537、US20110141226、US20100141787、US20110081052、US20100066822、US20100026831、US20090303343、US20090238419、US20100272363、US20090189998、US20090189997、US20090190803、US20090179999、US20090167893、US20090179998、US20080309769、US20080266419、US20080220750、US20080219517、US20090196466、US20090123063、US20080112599、US20090080713、US20090080797、US20090080796、US20080219581、US20090115915、US20080309770、US20070296833和US20070269108。

Claims (26)

1.一种用于车辆的后视成像系统，包括：
至少一个视频相机，安装在所述车辆上，用于提供采用从所述车辆向后的广角水平视场(FoV)捕获的图像的视频信号，
显示设备，处于所述车辆中驾驶员可查看的位置，和
视频处理器，用于对采用所述相机的视场捕获的并且提供图像的所述视频信号动态地并且数字地进行调整，以使得所述图像被提供在所述视频信号中，所述图像在车辆在转向方向上转向时被显示在一个或多个实时的显示器上，以在所述转向方向上水平地旋转，
其中至少一个子视场的水平位置和/或范围能够作为所述车辆的运动的函数变化。
2.根据权利要求1所述的后视成像系统，其中所述相机视场被分为左边(LH)子视场、右边(RH)子视场和中央子视场。
3.根据权利要求2所述的后视成像系统，其中当所述车辆倒车和转向特定方向时，在中央视场与所述车辆的在所述车辆倒车的一侧的所述子视场之间的界线朝向所述车辆的该一侧移位。
4.根据权利要求3所述的后视成像系统，其中当所述车辆倒车和转向所述特定方向时，显示所述中央视场的显示屏幕的区域以牺牲所述显示屏幕的至少一个其它区域为代价被拉长。
5.根据权利要求4所述的后视成像系统，其中当所述车辆向前移动时所述子视场变窄。
6.根据权利要求5所述的后视成像系统，其中随着所述车辆的速度增加，所述子视场逐渐变得更窄。
7.根据权利要求4所述的后视成像系统，其中所述视频相机的所述广角水平视场至少是135度。
8.根据权利要求4所述的后视成像系统，其中所述视频相机的竖直视场至少是70度。
9.根据权利要求4所述的后视成像系统，其中所述至少一个视频相机包括多个相机，并且其中从所述车辆向后的所述广角水平视场(FoV)源自所述多个相机。
10.根据权利要求3所述的后视成像系统，其中当所述车辆向前移动时所述子视场变窄。
11.根据权利要求10所述的后视成像系统，其中随着所述车辆的速度增加，所述子视场逐渐变得更窄。
12.根据权利要求3所述的后视成像系统，其中所述视频相机的所述广角水平视场至少是135度。
13.根据权利要求3所述的后视成像系统，其中所述视频相机的竖直视场至少是70度。
14.根据权利要求3所述的后视成像系统，其中所述至少一个视频相机包括多个相机，并且其中从所述车辆向后的所述广角水平视场(FoV)源自所述多个相机。
15.根据权利要求2所述的后视成像系统，其中当所述车辆向前移动时所述子视场变窄。
16.根据权利要求15所述的后视成像系统，其中随着所述车辆的速度增加，所述子视场逐渐变得更窄。
17.根据权利要求2所述的后视成像系统，其中所述视频相机的所述广角水平视场至少是135度。
18.根据权利要求2所述的后视成像系统，其中所述视频相机的竖直视场至少是70度。
19.根据权利要求2所述的后视成像系统，其中所述至少一个视频相机包括多个相机，并且其中从所述车辆向后的所述广角水平视场(FoV)源自所述多个相机。
20.根据权利要求1所述的后视成像系统，其中当所述车辆向前移动时所述子视场变窄。
21.根据权利要求20所述的后视成像系统，其中随着所述车辆的速度增加，所述子视场逐渐变得更窄。
22.根据权利要求1所述的后视成像系统，其中所述视频相机的所述广角水平视场至少是135度。
23.根据权利要求1所述的后视成像系统，其中所述视频相机的竖直视场至少是70度。
24.根据权利要求1所述的后视成像系统，其中所述至少一个视频相机包括多个相机，并且其中从所述车辆向后的所述广角水平视场(FoV)源自所述多个相机。
25.根据权利要求1所述的后视成像系统，其中至少一个相机安装在所述车辆的后部。
26.根据权利要求1所述的后视成像系统，其中至少一个相机安装在所述车辆的壳体内。
CN201380055886.3A 2012-08-27 2013-08-27 用于车辆的后视成像系统 Active CN104918825B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/596,044 2012-08-27
US13/596,044 US9242602B2 (en) 2012-08-27 2012-08-27 Rearview imaging systems for vehicle
PCT/EP2013/067671 WO2014033099A2 (en) 2012-08-27 2013-08-27 Rearview imaging systems for vehicle

Publications (2)

Publication Number Publication Date
CN104918825A CN104918825A (zh) 2015-09-16
CN104918825B true CN104918825B (zh) 2017-07-21

Family

ID=49034100

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380055886.3A Active CN104918825B (zh) 2012-08-27 2013-08-27 用于车辆的后视成像系统

Country Status (6)

Country Link
US (2) US9242602B2 (zh)
EP (1) EP2731828B1 (zh)
KR (1) KR102071096B1 (zh)
CN (1) CN104918825B (zh)
ES (1) ES2533594T3 (zh)
WO (1) WO2014033099A2 (zh)

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10457209B2 (en) * 2012-02-22 2019-10-29 Magna Electronics Inc. Vehicle vision system with multi-paned view
US8928730B2 (en) 2012-07-03 2015-01-06 DigitalOptics Corporation Europe Limited Method and system for correcting a distorted input image
US9242602B2 (en) * 2012-08-27 2016-01-26 Fotonation Limited Rearview imaging systems for vehicle
JP6036548B2 (ja) * 2013-05-22 2016-11-30 株式会社デンソー 車両用の映像制御装置
US9598012B2 (en) * 2014-03-11 2017-03-21 Toyota Motor Engineering & Manufacturing North America, Inc. Surroundings monitoring system for a vehicle
DE102014105297A1 (de) 2014-04-14 2015-10-15 Connaught Electronics Ltd. Verfahren zum Detektieren eines Objekts in einem Umgebungsbereich eines Kraftfahrzeugs mittels eines Kamerasystems des Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102014106035A1 (de) 2014-04-30 2015-11-05 Connaught Electronics Ltd. Verfahren zum Betreiben eines Fahrerassistenzsystems mit einem elektronischen Rückspiegel, Fahrerassistenzsystem und Kraftfahrzeug
US10127463B2 (en) * 2014-11-21 2018-11-13 Magna Electronics Inc. Vehicle vision system with multiple cameras
US9744907B2 (en) * 2014-12-29 2017-08-29 Gentex Corporation Vehicle vision system having adjustable displayed field of view
US10423164B2 (en) 2015-04-10 2019-09-24 Robert Bosch Gmbh Object position measurement with automotive camera using vehicle motion data
US20170080861A1 (en) * 2015-05-04 2017-03-23 Pearl Automation Inc. Vehicle sensor system and method of use
US10373378B2 (en) 2015-06-26 2019-08-06 Paccar Inc Augmented reality system for vehicle blind spot prevention
US10486599B2 (en) 2015-07-17 2019-11-26 Magna Mirrors Of America, Inc. Rearview vision system for vehicle
US9942475B2 (en) 2015-07-24 2018-04-10 Robert Bosch Gmbh Real cross traffic—quick looks
US9304386B1 (en) 2015-08-17 2016-04-05 Ford Global Technologies, Llc Seal ring for pickup truck box camera in center high mount stop lamp
DE102015216907A1 (de) * 2015-09-03 2017-03-09 Robert Bosch Gmbh Digitaler Rückspiegel
WO2017044576A1 (en) * 2015-09-08 2017-03-16 Pearl Automation Inc. Vehicle sensor system and method of use
US10999559B1 (en) * 2015-09-11 2021-05-04 Ambarella International Lp Electronic side-mirror with multiple fields of view
US20170091559A1 (en) * 2015-09-29 2017-03-30 Valeo North America, Inc. Camera monitor system for a vehicle
US11228700B2 (en) * 2015-10-07 2022-01-18 Magna Electronics Inc. Vehicle vision system camera with adaptive field of view
CN105882549A (zh) * 2015-11-02 2016-08-24 乐卡汽车智能科技（北京）有限公司 控制车辆上全景摄像头俯角的方法和车载设备
WO2017154317A1 (ja) * 2016-03-09 2017-09-14 株式会社Ｊｖｃケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2017154316A1 (ja) 2016-03-09 2017-09-14 株式会社Ｊｖｃケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6511015B2 (ja) * 2016-05-25 2019-05-08 株式会社ミツバ 車両モニタシステム
DE102016007522B4 (de) * 2016-06-20 2022-07-07 Mekra Lang Gmbh & Co. Kg Spiegelersatzsystem für ein Fahrzeug
EP3487172A4 (en) * 2016-07-13 2019-07-10 Sony Corporation PICTURE GENERATING DEVICE, PICTURE PRODUCTION PROCESS AND PROGRAM
JP2018026706A (ja) * 2016-08-10 2018-02-15 パナソニックＩｐマネジメント株式会社 画像処理装置、画像表示装置、画像処理システム、及び画像処理方法
JP6551336B2 (ja) * 2016-08-12 2019-07-31 株式会社デンソー 周辺監査装置
US10078908B2 (en) * 2016-08-12 2018-09-18 Elite Robotics Determination of relative positions
CN106314282B (zh) * 2016-08-31 2019-04-16 惠州华阳通用电子有限公司 一种车内后视镜显示角度自动调节方法及装置
JP6953531B2 (ja) 2016-12-07 2021-10-27 アーベーベー・シュバイツ・アーゲーＡＢＢ Ｓｃｈｗｅｉｚ ＡＧ 航行およびマッピング能力を備える液浸式の検査ビークル
EP3562708B1 (en) * 2016-12-27 2021-02-17 Gentex Corporation Rear vision system with eye-tracking
US10313584B2 (en) 2017-01-04 2019-06-04 Texas Instruments Incorporated Rear-stitched view panorama for rear-view visualization
US10841485B2 (en) * 2017-01-26 2020-11-17 Huawei Technologies Co., Ltd. Photographing method and photographing apparatus for terminal, and terminal
US11034295B2 (en) * 2017-02-02 2021-06-15 Magna Electronics Inc. Vehicle vision system using at least two cameras
DE102017001122B3 (de) 2017-02-07 2018-02-01 Audi Ag Kraftfahrzeug
US20180281685A1 (en) * 2017-04-03 2018-10-04 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Rear view manual adjustment perspective change system and method
US20180332219A1 (en) 2017-05-10 2018-11-15 Fotonation Limited Wearable vision system and method of monitoring a region
US20190098226A1 (en) * 2017-09-26 2019-03-28 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Smart field of view (fov) adjustment for a rearview display system in a motor vehicle
US9934440B1 (en) * 2017-10-04 2018-04-03 StradVision, Inc. Method for monitoring blind spot of monitoring vehicle and blind spot monitor using the same
JP2019080238A (ja) * 2017-10-26 2019-05-23 シャープ株式会社 車両運転支援装置及び車両運転支援プログラム
EP3489087B1 (en) * 2017-11-24 2021-05-05 Ficomirrors, S.A.U. Vehicle imaging system
US10618471B2 (en) * 2017-11-30 2020-04-14 Robert Bosch Gmbh Virtual camera panning and tilting
JP6733647B2 (ja) * 2017-12-05 2020-08-05 トヨタ自動車株式会社 画像表示装置
JP7069692B2 (ja) 2017-12-20 2022-05-18 トヨタ自動車株式会社 画像表示装置
JP7067225B2 (ja) * 2018-04-16 2022-05-16 株式会社Ｊｖｃケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法、およびプログラム
DE102018208513A1 (de) * 2018-05-29 2019-12-05 Continental Automotive Gmbh Kamera-Monitor-System für ein Kraftfahrzeug und Verwendung eines Spiegelersatzsystems für ein Kraftfahrzeug
CN110509850A (zh) * 2019-08-09 2019-11-29 上海豫兴电子科技有限公司 一种双曲率电子后视镜系统
CN110509851B (zh) * 2019-08-09 2023-03-17 上海豫兴电子科技有限公司 一种随动显示的多曲率电子后视镜
FR3100914B1 (fr) * 2019-09-12 2022-03-11 Renault Sas Procédé d’élaboration d’une image distordue
WO2021061651A1 (en) * 2019-09-24 2021-04-01 Seek Thermal, Inc. Thermal imaging system with multiple selectable viewing angles and fields of view for vehicle applications
US11891057B2 (en) 2019-09-24 2024-02-06 Seek Thermal, Inc. Thermal imaging system with multiple selectable viewing angles and fields of view for vehicle applications
US11034298B2 (en) * 2019-11-18 2021-06-15 Continental Automotive Systems, Inc. Vehicle surround view system for identifying unobservable regions while reversing a trailer
JP7321987B2 (ja) * 2020-10-01 2023-08-07 ダイハツ工業株式会社 車両用複眼カメラ
US11772560B2 (en) 2021-05-03 2023-10-03 Mastercraft Boat Company, Llc Trailer back-up system

Family Cites Families (161)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4214266A (en) 1978-06-19 1980-07-22 Myers Charles H Rear viewing system for vehicles
JPH06227318A (ja) 1993-02-08 1994-08-16 Hitachi Ltd 車両の後方モニタ装置及び方法
US5670935A (en) 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
US6498620B2 (en) * 1993-02-26 2002-12-24 Donnelly Corporation Vision system for a vehicle including an image capture device and a display system having a long focal length
US5882221A (en) 1996-03-21 1999-03-16 Tessera, Inc. Socket for semiconductor devices
JP4643773B2 (ja) 1996-12-17 2011-03-02 テセラ・テクノロジーズ・ハンガリー・ケイエフティー 電子ズーム画像入力方式
US6583444B2 (en) 1997-02-18 2003-06-24 Tessera, Inc. Semiconductor packages having light-sensitive chips
US6044181A (en) 1997-08-01 2000-03-28 Microsoft Corporation Focal length estimation method and apparatus for construction of panoramic mosaic images
US7738015B2 (en) 1997-10-09 2010-06-15 Fotonation Vision Limited Red-eye filter method and apparatus
US7352394B1 (en) 1997-10-09 2008-04-01 Fotonation Vision Limited Image modification based on red-eye filter analysis
US7630006B2 (en) 1997-10-09 2009-12-08 Fotonation Ireland Limited Detecting red eye filter and apparatus using meta-data
JP3732346B2 (ja) * 1998-10-14 2006-01-05 ダイハツ工業株式会社 車両用モニタ装置
US7920163B1 (en) 1999-06-15 2011-04-05 Tessera International, Inc. Sealed, waterproof digital electronic camera system and method of fabricating same
US6734896B2 (en) 2000-04-28 2004-05-11 Matsushita Electric Industrial Co., Ltd. Image processor and monitoring system
US20050084175A1 (en) 2003-10-16 2005-04-21 Olszak Artur G. Large-area imaging by stitching with array microscope
JP3297040B1 (ja) 2001-04-24 2002-07-02 松下電器産業株式会社 車載カメラの画像合成表示方法及びその装置
JP4786076B2 (ja) * 2001-08-09 2011-10-05 パナソニック株式会社 運転支援表示装置
US6559761B1 (en) 2001-10-05 2003-05-06 Ford Global Technologies, Llc Display system for vehicle environment awareness
US7813634B2 (en) 2005-02-28 2010-10-12 Tessera MEMS Technologies, Inc. Autofocus camera
JP4140410B2 (ja) * 2003-03-17 2008-08-27 住友電気工業株式会社 車両用表示システム及び車両用映像表示方法
JP2005020377A (ja) * 2003-06-26 2005-01-20 Kyocera Corp カメラ
US7685341B2 (en) 2005-05-06 2010-03-23 Fotonation Vision Limited Remote control apparatus for consumer electronic appliances
US8170294B2 (en) 2006-11-10 2012-05-01 DigitalOptics Corporation Europe Limited Method of detecting redeye in a digital image
US7565030B2 (en) 2003-06-26 2009-07-21 Fotonation Vision Limited Detecting orientation of digital images using face detection information
US7844076B2 (en) 2003-06-26 2010-11-30 Fotonation Vision Limited Digital image processing using face detection and skin tone information
US7636486B2 (en) 2004-11-10 2009-12-22 Fotonation Ireland Ltd. Method of determining PSF using multiple instances of a nominally similar scene
US7440593B1 (en) 2003-06-26 2008-10-21 Fotonation Vision Limited Method of improving orientation and color balance of digital images using face detection information
US7747596B2 (en) 2005-06-17 2010-06-29 Fotonation Vision Ltd. Server device, user interface appliance, and media processing network
US7506057B2 (en) 2005-06-17 2009-03-17 Fotonation Vision Limited Method for establishing a paired connection between media devices
US8989516B2 (en) 2007-09-18 2015-03-24 Fotonation Limited Image processing method and apparatus
US8363951B2 (en) 2007-03-05 2013-01-29 DigitalOptics Corporation Europe Limited Face recognition training method and apparatus
US8199222B2 (en) 2007-03-05 2012-06-12 DigitalOptics Corporation Europe Limited Low-light video frame enhancement
US7606417B2 (en) 2004-08-16 2009-10-20 Fotonation Vision Limited Foreground/background segmentation in digital images with differential exposure calculations
US7317815B2 (en) 2003-06-26 2008-01-08 Fotonation Vision Limited Digital image processing composition using face detection information
US7680342B2 (en) 2004-08-16 2010-03-16 Fotonation Vision Limited Indoor/outdoor classification in digital images
US8155397B2 (en) 2007-09-26 2012-04-10 DigitalOptics Corporation Europe Limited Face tracking in a camera processor
US8698924B2 (en) 2007-03-05 2014-04-15 DigitalOptics Corporation Europe Limited Tone mapping for low-light video frame enhancement
US8339462B2 (en) 2008-01-28 2012-12-25 DigitalOptics Corporation Europe Limited Methods and apparatuses for addressing chromatic abberations and purple fringing
US8264576B2 (en) 2007-03-05 2012-09-11 DigitalOptics Corporation Europe Limited RGBW sensor array
US7536036B2 (en) 2004-10-28 2009-05-19 Fotonation Vision Limited Method and apparatus for red-eye detection in an acquired digital image
US8204330B2 (en) 2009-06-29 2012-06-19 DigitalOptics Corporation Europe Limited Adaptive PSF estimation technique using a sharp preview and a blurred image
US8494286B2 (en) 2008-02-05 2013-07-23 DigitalOptics Corporation Europe Limited Face detection in mid-shot digital images
US7620218B2 (en) 2006-08-11 2009-11-17 Fotonation Ireland Limited Real-time face tracking with reference images
US7970182B2 (en) 2005-11-18 2011-06-28 Tessera Technologies Ireland Limited Two stage detection for photographic eye artifacts
US9160897B2 (en) 2007-06-14 2015-10-13 Fotonation Limited Fast motion estimation method
US8553949B2 (en) 2004-01-22 2013-10-08 DigitalOptics Corporation Europe Limited Classification and organization of consumer digital images using workflow, and face detection and recognition
US8948468B2 (en) 2003-06-26 2015-02-03 Fotonation Limited Modification of viewing parameters for digital images using face detection information
US7792335B2 (en) 2006-02-24 2010-09-07 Fotonation Vision Limited Method and apparatus for selective disqualification of digital images
US8180173B2 (en) 2007-09-21 2012-05-15 DigitalOptics Corporation Europe Limited Flash artifact eye defect correction in blurred images using anisotropic blurring
US8036458B2 (en) 2007-11-08 2011-10-11 DigitalOptics Corporation Europe Limited Detecting redeye defects in digital images
US8417055B2 (en) 2007-03-05 2013-04-09 DigitalOptics Corporation Europe Limited Image processing method and apparatus
US7129576B2 (en) 2003-09-26 2006-10-31 Tessera, Inc. Structure and method of making capped chips including vertical interconnects having stud bumps engaged to surfaces of said caps
US7315658B2 (en) 2003-09-30 2008-01-01 Fotonation Vision Limited Digital camera
US8369650B2 (en) 2003-09-30 2013-02-05 DigitalOptics Corporation Europe Limited Image defect map creation using batches of digital images
US7590305B2 (en) 2003-09-30 2009-09-15 Fotonation Vision Limited Digital camera with built-in lens calibration table
US7564994B1 (en) 2004-01-22 2009-07-21 Fotonation Vision Limited Classification system for consumer digital images using automatic workflow and face detection and recognition
US8427538B2 (en) 2004-04-30 2013-04-23 Oncam Grandeye Multiple view and multiple object processing in wide-angle video camera
US7368695B2 (en) 2004-05-03 2008-05-06 Tessera, Inc. Image sensor package and fabrication method
US7768574B2 (en) 2004-05-04 2010-08-03 Tessera, Inc. Compact lens turret assembly
US7881496B2 (en) 2004-09-30 2011-02-01 Donnelly Corporation Vision system for vehicle
US8320641B2 (en) 2004-10-28 2012-11-27 DigitalOptics Corporation Europe Limited Method and apparatus for red-eye detection using preview or other reference images
US7639888B2 (en) 2004-11-10 2009-12-29 Fotonation Ireland Ltd. Method and apparatus for initiating subsequent exposures based on determination of motion blurring artifacts
US8488023B2 (en) 2009-05-20 2013-07-16 DigitalOptics Corporation Europe Limited Identifying facial expressions in acquired digital images
US7315631B1 (en) 2006-08-11 2008-01-01 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
US7715597B2 (en) 2004-12-29 2010-05-11 Fotonation Ireland Limited Method and component for image recognition
US20110102553A1 (en) 2007-02-28 2011-05-05 Tessera Technologies Ireland Limited Enhanced real-time face models from stereo imaging
US8995715B2 (en) 2010-10-26 2015-03-31 Fotonation Limited Face or other object detection including template matching
US8503800B2 (en) 2007-03-05 2013-08-06 DigitalOptics Corporation Europe Limited Illumination detection using classifier chains
US7769284B2 (en) 2005-02-28 2010-08-03 Silmpel Corporation Lens barrel assembly for a camera
US7495852B2 (en) 2005-02-28 2009-02-24 Siimpel Corporation Zoom lens assembly
US8143095B2 (en) 2005-03-22 2012-03-27 Tessera, Inc. Sequential fabrication of vertical conductive interconnects in capped chips
US7449779B2 (en) 2005-03-22 2008-11-11 Tessera, Inc. Wire bonded wafer level cavity package
US7694048B2 (en) 2005-05-06 2010-04-06 Fotonation Vision Limited Remote control apparatus for printer appliances
ES2627790T3 (es) 2005-05-17 2017-07-31 Vestas Wind Systems A/S Pala de turbina eólica controlada por cabeceo que tiene medios de generación de turbulencia, turbina eólica y uso de la misma
US7566853B2 (en) 2005-08-12 2009-07-28 Tessera, Inc. Image sensor employing a plurality of photodetector arrays and/or rear-illuminated architecture
US7599577B2 (en) 2005-11-18 2009-10-06 Fotonation Vision Limited Method and apparatus of correcting hybrid flash artifacts in digital images
US20070138644A1 (en) 2005-12-15 2007-06-21 Tessera, Inc. Structure and method of making capped chip having discrete article assembled into vertical interconnect
US7443597B2 (en) 2005-12-27 2008-10-28 Tessera, Inc. Liquid lens with piezoelectric voltage converter
US7692696B2 (en) 2005-12-27 2010-04-06 Fotonation Vision Limited Digital image acquisition system with portrait mode
US20070190747A1 (en) 2006-01-23 2007-08-16 Tessera Technologies Hungary Kft. Wafer level packaging to lidded chips
US7936062B2 (en) 2006-01-23 2011-05-03 Tessera Technologies Ireland Limited Wafer level chip packaging
WO2007095477A2 (en) 2006-02-14 2007-08-23 Fotonation Vision Limited Image blurring
IES20060558A2 (en) 2006-02-14 2006-11-01 Fotonation Vision Ltd Image blurring
KR100691624B1 (ko) 2006-02-15 2007-03-12 삼성전기주식회사 초소형 촬상 광학계
US7804983B2 (en) 2006-02-24 2010-09-28 Fotonation Vision Limited Digital image acquisition control and correction method and apparatus
US20080002460A1 (en) 2006-03-01 2008-01-03 Tessera, Inc. Structure and method of making lidded chips
WO2007110097A1 (en) 2006-03-29 2007-10-04 Tessera Technologies Hungary Kft. Image capturing device with improved image quality
JP4961160B2 (ja) * 2006-04-18 2012-06-27 パナソニック株式会社 車両周囲状況確認装置
IES20060564A2 (en) 2006-05-03 2006-11-01 Fotonation Vision Ltd Improved foreground / background separation
IES20070229A2 (en) 2006-06-05 2007-10-03 Fotonation Vision Ltd Image acquisition method and apparatus
US7965875B2 (en) 2006-06-12 2011-06-21 Tessera Technologies Ireland Limited Advances in extending the AAM techniques from grayscale to color images
US7515740B2 (en) 2006-08-02 2009-04-07 Fotonation Vision Limited Face recognition with combined PCA-based datasets
WO2008102205A2 (en) 2006-08-09 2008-08-28 Fotonation Vision Limited Detection of airborne flash artifacts using preflash image
US20090115915A1 (en) 2006-08-09 2009-05-07 Fotonation Vision Limited Camera Based Feedback Loop Calibration of a Projection Device
US7916897B2 (en) 2006-08-11 2011-03-29 Tessera Technologies Ireland Limited Face tracking for controlling imaging parameters
US7403643B2 (en) 2006-08-11 2008-07-22 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
WO2008152441A2 (en) 2006-09-15 2008-12-18 Tessera Technologies Hungary Kft. Imaging system with improved image quality and associated methods
US7935568B2 (en) 2006-10-31 2011-05-03 Tessera Technologies Ireland Limited Wafer-level fabrication of lidded chips with electrodeposited dielectric coating
US7807508B2 (en) 2006-10-31 2010-10-05 Tessera Technologies Hungary Kft. Wafer-level fabrication of lidded chips with electrodeposited dielectric coating
US8004780B2 (en) 2009-05-08 2011-08-23 Tessera MEMS Technologies, Inc. Integrated lens barrel
US7569424B2 (en) 2006-11-15 2009-08-04 Tessera, Inc. Method of forming a wall structure in a microelectronic assembly
US7683468B2 (en) 2006-12-21 2010-03-23 Tessera, Inc. Enabling uniformity of stacking process through bumpers
US7952195B2 (en) 2006-12-28 2011-05-31 Tessera, Inc. Stacked packages with bridging traces
US8055067B2 (en) 2007-01-18 2011-11-08 DigitalOptics Corporation Europe Limited Color segmentation
US7593636B2 (en) 2007-02-01 2009-09-22 Tessera, Inc. Pin referenced image sensor to reduce tilt in a camera module
KR101247147B1 (ko) 2007-03-05 2013-03-29 디지털옵틱스 코포레이션 유럽 리미티드 디지털 영상 획득 장치에서의 얼굴 탐색 및 검출
US7995804B2 (en) 2007-03-05 2011-08-09 Tessera Technologies Ireland Limited Red eye false positive filtering using face location and orientation
WO2008109622A1 (en) 2007-03-05 2008-09-12 Fotonation Vision Limited Face categorization and annotation of a mobile phone contact list
US7773118B2 (en) 2007-03-25 2010-08-10 Fotonation Vision Limited Handheld article with movement discrimination
WO2008131823A1 (en) 2007-04-30 2008-11-06 Fotonation Vision Limited Method and apparatus for automatically controlling the decisive moment for an image acquisition device
US7916971B2 (en) 2007-05-24 2011-03-29 Tessera Technologies Ireland Limited Image processing method and apparatus
US20080296717A1 (en) 2007-06-01 2008-12-04 Tessera, Inc. Packages and assemblies including lidded chips
US20080309770A1 (en) 2007-06-18 2008-12-18 Fotonation Vision Limited Method and apparatus for simulating a camera panning effect
US7990628B1 (en) 2007-08-29 2011-08-02 Tessera MEMS Technologies, Inc. Planar flexure system with high pitch stiffness
US7832948B1 (en) 2007-09-13 2010-11-16 Tessera MEMS Technologies, Inc. Impulse actuated MEMS devices
US8503818B2 (en) 2007-09-25 2013-08-06 DigitalOptics Corporation Europe Limited Eye defect detection in international standards organization images
JP2009123863A (ja) 2007-11-14 2009-06-04 Tessera Interconnect Materials Inc バンプ構造形成方法及びバンプ構造
JP5337818B2 (ja) 2008-01-18 2013-11-06 デジタルオプティックス・コーポレイション・ヨーロッパ・リミテッド 画像処理方法および装置
TWI361396B (en) 2008-01-18 2012-04-01 Univ Nat Chiao Tung Image synthesis system for a vehicle and the manufacturing method thereof mage synthesis device and method
US8750578B2 (en) 2008-01-29 2014-06-10 DigitalOptics Corporation Europe Limited Detecting facial expressions in digital images
US8212864B2 (en) 2008-01-30 2012-07-03 DigitalOptics Corporation Europe Limited Methods and apparatuses for using image acquisition data to detect and correct image defects
US20090212381A1 (en) 2008-02-26 2009-08-27 Tessera, Inc. Wafer level packages for rear-face illuminated solid state image sensors
US20100053407A1 (en) 2008-02-26 2010-03-04 Tessera, Inc. Wafer level compliant packages for rear-face illuminated solid state image sensors
US7855737B2 (en) 2008-03-26 2010-12-21 Fotonation Ireland Limited Method of making a digital camera image of a scene including the camera user
US8520089B2 (en) 2008-07-30 2013-08-27 DigitalOptics Corporation Europe Limited Eye beautification
CN102027505A (zh) 2008-07-30 2011-04-20 泰塞拉技术爱尔兰公司 使用脸部检测的自动脸部和皮肤修饰
US8081254B2 (en) 2008-08-14 2011-12-20 DigitalOptics Corporation Europe Limited In-camera based method of detecting defect eye with high accuracy
US8340453B1 (en) 2008-08-29 2012-12-25 Adobe Systems Incorporated Metadata-driven method and apparatus for constraining solution space in image processing techniques
US8340870B2 (en) * 2008-09-16 2012-12-25 Honda Motor Co., Ltd. Vehicle maneuver assistance device
WO2010063463A2 (en) 2008-12-05 2010-06-10 Fotonation Ireland Limited Face recognition using face tracker classifier data
DE102009000550B4 (de) * 2009-02-02 2018-10-04 Ford Global Technologies, Llc Weitwinkelbildgebungssystem für die Bereitstellung eines Bildes der Umgebung eines Fahrzeugs, insbesondere eines Kraftfahrzeugs
US8411245B2 (en) * 2009-02-06 2013-04-02 Gentex Corporation Multi-display mirror system and method for expanded view around a vehicle
JP4861449B2 (ja) * 2009-05-07 2012-01-25 富士通テン株式会社 車両の運転支援装置
US9041806B2 (en) 2009-09-01 2015-05-26 Magna Electronics Inc. Imaging and display system for vehicle
US20120154590A1 (en) * 2009-09-11 2012-06-21 Aisin Seiki Kabushiki Kaisha Vehicle surrounding monitor apparatus
CN102481875A (zh) 2009-09-11 2012-05-30 爱信精机株式会社 车辆周围监视装置
US8379917B2 (en) 2009-10-02 2013-02-19 DigitalOptics Corporation Europe Limited Face recognition performance using additional image features
US8633810B2 (en) * 2009-11-19 2014-01-21 Robert Bosch Gmbh Rear-view multi-functional camera system
US20120019613A1 (en) 2009-12-11 2012-01-26 Tessera Technologies Ireland Limited Dynamically Variable Stereo Base for (3D) Panorama Creation on Handheld Device
US20110141229A1 (en) 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama imaging using super-resolution
US20120019614A1 (en) 2009-12-11 2012-01-26 Tessera Technologies Ireland Limited Variable Stereo Base for (3D) Panorama Creation on Handheld Device
US10080006B2 (en) 2009-12-11 2018-09-18 Fotonation Limited Stereoscopic (3D) panorama creation on handheld device
US20110141226A1 (en) 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama imaging based on a lo-res map
KR20110076300A (ko) * 2009-12-29 2011-07-06 전자부품연구원 차량정보 기반 사각지대 인지용 적응형 멀티모드 뷰 시스템 및 그 제어방법
US8116587B2 (en) 2010-02-16 2012-02-14 Ricoh Co., Ltd. Method and apparatus for high-speed and low-complexity piecewise geometric transformation of signals
US8872887B2 (en) 2010-03-05 2014-10-28 Fotonation Limited Object detection and rendering for wide field of view (WFOV) image acquisition systems
US8723912B2 (en) 2010-07-06 2014-05-13 DigitalOptics Corporation Europe Limited Scene background blurring including face modeling
US9053681B2 (en) 2010-07-07 2015-06-09 Fotonation Limited Real-time video frame pre-processing hardware
US8970770B2 (en) 2010-09-28 2015-03-03 Fotonation Limited Continuous autofocus based on face detection and tracking
US8648959B2 (en) 2010-11-11 2014-02-11 DigitalOptics Corporation Europe Limited Rapid auto-focus using classifier chains, MEMS and/or multiple object focusing
JP5547854B2 (ja) 2010-11-29 2014-07-16 デジタルオプティックス・コーポレイション・ヨーロッパ・リミテッド 携帯型装置で捕捉される多重画像からの肖像画像合成
US8797414B2 (en) 2010-12-23 2014-08-05 Samsung Electronics Co., Ltd. Digital image stabilization device
US8508652B2 (en) 2011-02-03 2013-08-13 DigitalOptics Corporation Europe Limited Autofocus method
US8548274B2 (en) * 2011-04-29 2013-10-01 Aptina Imaging Corporation Systems and methods for efficient storage of image transformations
US8493460B2 (en) 2011-09-15 2013-07-23 DigitalOptics Corporation Europe Limited Registration of differently scaled images
US9124895B2 (en) 2011-11-04 2015-09-01 Qualcomm Incorporated Video coding with network abstraction layer units that include multiple encoded picture partitions
US9740912B2 (en) 2011-12-20 2017-08-22 Definiens Ag Evaluation of co-registered images of differently stained tissue slices
EP2810429B1 (en) 2012-01-30 2020-02-19 SeeScan, Inc. Adjustable variable resolution inspection systems and methods
US8928730B2 (en) 2012-07-03 2015-01-06 DigitalOptics Corporation Europe Limited Method and system for correcting a distorted input image
US9242602B2 (en) * 2012-08-27 2016-01-26 Fotonation Limited Rearview imaging systems for vehicle
US9349210B2 (en) 2012-11-30 2016-05-24 Arm Limited Methods of and apparatus for using textures in graphics processing systems

Also Published As

Publication number Publication date
ES2533594T3 (es) 2015-04-13
KR20150052148A (ko) 2015-05-13
KR102071096B1 (ko) 2020-01-29
US20140055616A1 (en) 2014-02-27
CN104918825A (zh) 2015-09-16
US9998675B2 (en) 2018-06-12
WO2014033099A2 (en) 2014-03-06
EP2731828B1 (en) 2014-12-24
EP2731828A2 (en) 2014-05-21
US9242602B2 (en) 2016-01-26
WO2014033099A3 (en) 2014-04-24
US20160212354A1 (en) 2016-07-21

Similar Documents

Publication Publication Date Title
CN104918825B (zh) 用于车辆的后视成像系统
US11303806B2 (en) Three dimensional rendering for surround view using predetermined viewpoint lookup tables
TWI600559B (zh) 用於影像處理之系統及方法
CN104442567B (zh) 交通工具图像显示系统中的物体突显和传感
CN103770706B (zh) 动态后视镜显示特征
JP3871614B2 (ja) 運転支援装置
JP4934308B2 (ja) 運転支援システム
KR101150546B1 (ko) 차량의 주변감시장치
JP4640238B2 (ja) 車両周囲映像作成装置及び車両周囲映像作成方法
CN1921621A (zh) 全景可视驾驶辅助设备
US20190202356A1 (en) Method for providing a rear mirror view of a surroundings of a vehicle
WO2000064175A1 (fr) Dispositif de traitement d'images et systeme de surveillance
US11087438B2 (en) Merging of partial images to form an image of surroundings of a mode of transport
CN104321224A (zh) 具有摄像机监控系统的机动车
JP6338930B2 (ja) 車両周囲表示装置
CN107851305A (zh) 后部交叉交通快速检视
TWI552907B (zh) 行車安全輔助系統和方法
JP5226621B2 (ja) 車両用画像表示装置
CN1825951A (zh) 车辆周围环境观察装置
JP7029350B2 (ja) 画像処理装置および画像処理方法
JP3154676B2 (ja) 車載カメラ映像合成透視装置
JP2013225903A (ja) 画像処理装置、画像処理システム、および、画像処理方法
US20180316868A1 (en) Rear view display object referents system and method
CN112215917A (zh) 车载全景图生成方法、装置及系统
JP2012065228A (ja) 画像処理装置、画像表示システム及び画像表示方法

Legal Events

Date Code Title Description
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant