CN108718376B - 具有自动聚焦的纤薄多孔径成像系统及其使用方法 - Google Patents

具有自动聚焦的纤薄多孔径成像系统及其使用方法 Download PDF

Info

Publication number
CN108718376B
CN108718376B CN201810567323.7A CN201810567323A CN108718376B CN 108718376 B CN108718376 B CN 108718376B CN 201810567323 A CN201810567323 A CN 201810567323A CN 108718376 B CN108718376 B CN 108718376B
Authority
CN
China
Prior art keywords
camera
color
sub
image
dual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810567323.7A
Other languages
English (en)
Other versions
CN108718376A (zh
Inventor
G·沙布岱
N·科恩
E·戈登堡
N·吉瓦
O·吉古因斯基
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Corephotonics Ltd
Original Assignee
Corephotonics Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Corephotonics Ltd filed Critical Corephotonics Ltd
Publication of CN108718376A publication Critical patent/CN108718376A/zh
Application granted granted Critical
Publication of CN108718376B publication Critical patent/CN108718376B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B19/00Cameras
    • G03B19/18Motion-picture cameras
    • G03B19/22Double cameras
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/64Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
    • G02B27/646Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • G02B7/36Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B30/00Camera modules comprising integrated lens units and imaging units, specially adapted for being embedded in other devices, e.g. mobile phones or vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/133Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0053Driving means for the movement of one or more optical element
    • G03B2205/0069Driving means for the movement of one or more optical element using electromagnetic actuators, e.g. voice coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values

Abstract

本发明提供了具有自动聚焦(AF)的双孔径数字摄影机以及有关的方法,其用于获得对象或场景的聚焦的并且可选地经过光学稳定的彩色图像。双孔径摄影机包括:具有第一光学元件模块以及用于提供彩色图像的彩色图像传感器的第一子摄影机,具有第二光学元件模块以及用于提供辉度图像的透明图像传感器的第二子摄影机,其中第一和第二子摄影机具有基本上相同的视场;机械地耦合到至少第一光学元件模块的AF机制;以及耦合到AF机制并且耦合到两个图像传感器的摄影机控制器,其被配置成控制AF机制,计算彩色与辉度图像之间的由于AF机制所造成的缩放差异和锐度差异,并且利用所计算出的差异把彩色和辉度图像处理成融合彩色图像。

Description

具有自动聚焦的纤薄多孔径成像系统及其使用方法
相关申请的交叉引用
本申请是母案为申请日2016年1月31日的、申请号201480043316.7的中国专利申请的分案申请;该母案申请系国际申请PCT/IB2014/063393的中国国家阶段申请,并要求了于2013年8月1日提交的具有相同标题的美国临时专利申请号61/861,185的优先权,该优先权申请被全文合并在此以作参考。
技术领域
这里所公开的实施例总体上涉及数字摄影机,并且特别涉及具有自动聚焦的纤薄多孔径数字摄影机。
背景技术
近年来,例如蜂窝电话、平板器件和膝上型计算机之类的移动器件已经变得无所不在。这些器件当中的大多数包括一个或两个紧凑型摄影机——即朝向后方的主要摄影机(即处于器件的背面的摄影机,其朝向离开用户的方向并且常常被用于随意的摄影)和朝向前方的次要摄影机(即位于器件的正面的摄影机,其常常被用于视频会议)。
虽然其性质是相对紧凑的,但是这些摄影机当中的大多数的设计仍然非常类似于数字静止摄影机的传统结构,也就是说其包括放置在图像传感器之上的光学组件(或者一串几个光学元件和主要孔径)。所述光学组件(其也被称作“光学元件(optics)”)对进入的光线进行折射,并且将其弯曲以在传感器上产生场景的图像。这些摄影机的规格在很大程度上由传感器的尺寸以及由光学元件的高度决定。这些因素通常通过透镜的焦距(“f”)及其视场(FOV)而关联在一起——必须把特定FOV成像在特定尺寸的传感器上的透镜具有特定的焦距。通过把FOV保持恒定,传感器的规格越大(例如在X-Y平面中),焦距和光学元件高度就越大。
随着移动器件的规格缩小,紧凑型摄影机规格越来越成为限制器件厚度的关键因素。已经提出了几种方法来减小紧凑型摄影机厚度以便减轻这一约束。近来,为此目的已经提出了多孔径系统。在这样的系统中,取代具有一串光学元件的一个孔径,摄影机被划分成几个孔径,每一个孔径具有专用的光学元件,并且所有孔径共享类似的视场。后面把每一个这样的孔径连同光学元件以及在其上形成图像的传感器区域定义成一个“子摄影机”。通常来说,在多孔径摄影机设计中,与由参考单孔径摄影机产生的图像相比,每一个子摄影机在图像传感器上产生较小的图像。因此,每一个子摄影机的高度可以小于单孔径摄影机的高度,从而可以减小摄影机的总高度并且允许更加纤细的移动器件设计。
图1A和1B分别示出了传统摄影机和具有两个子摄影机的双孔径摄影机的示意性设计。图1A中的传统摄影机100’包括放置在基板104上的图像传感器102和透镜106。“摄影机高度”被定义成从基板104到透镜106的顶部的摄影机模块的高度。图1B中的双孔径摄影机100”包括两个子摄影机,即具有图像传感器112a和具有光轴118a的透镜116a的子摄影机1,以及具有图像传感器112b和具有光轴118b的透镜116b的子摄影机2。两个传感器分别被放置在基板114a和114b上。为了比较起见,假设参考单孔径摄影机和双孔径摄影机具有相同的视场(FOV),并且其传感器具有相同的像素尺寸。但是图像传感器102与图像传感器112a或图像传感器112b相比具有更高的分辨率(像素数目),因此尺寸也更大。可以认识到双孔径摄影机的摄影机高度方面的潜在优点(也就是从基板114a到透镜116a的顶部以及从基板114b到透镜116b的顶部的厚度)。
在多孔径摄影机设计中涉及几方面的重大挑战。首先,每一个子摄影机的传感器区域与单孔径摄影机的传感器区域相比更小。如果把每一个子摄影机传感器中的像素尺寸与单孔径摄影机传感器中的像素尺寸保持相同,则由每一个子摄影机捕获的图像的分辨率小于由单孔径摄影机捕获的分辨率。如果将把输出图像的分辨率保持相同,则需要把来自不同子摄影机的图像组合成更高分辨率的图像。这通常是通过专用算法在数字域内进行的。已经提出了用于组合较低分辨率图像以产生更高分辨率图像的几种方法。这样的方法中的一些算法需要低分辨率图像的集合之间的配准步骤,以便解决视差(其由于子摄影机之间的视点的偏移而存在于多孔径摄影机系统中)。在标题为“Dual aperture zoomdigital camera(双孔径变焦数字摄影机)”的共同转让的PCT专利申请PCT/IB2014/062180中描述了这样的一种算法,其被全文合并在此以作参考。
另一项挑战涉及要求摄影机对于较宽的物距范围(在紧凑型摄影机模块中通常是从几厘米到无限远)提供焦点对准的图像。为了满足这一要求,单孔径摄影机可以包括自动聚焦(AF)机制,其通过沿着光轴移动光学元件从而改变其在传感器上方的高度来控制光学元件的聚焦位置。在多孔径摄影机中,为了对于较宽的物距范围支持焦点对准图像,一种直接明了的方法将是在每一个子摄影机中提供专用的AF机制。这种方法存在几个缺陷,其中包括摄影机的尺寸和成本的增加、更高的操作功率以及更加复杂的控制,这是因为每一个子摄影机的AF机制需要被同步以便确保所有的子摄影机都被聚焦到相同的位置。
在多孔径摄影机中使用AF机制时可能出现的另一个难题与组合较低分辨率子摄影机图像以产生更高分辨率图像的算法有关。由于AF机制在传感器上方沿着光轴移动光学元件,因此其在某种程度上对形成在传感器上的图像进行缩放。每一个子摄影机中的不同AF机制的聚焦位置之间的微小差异可能导致不同的尺度被应用于较低分辨率子摄影机图像。这样的尺度差异可能会降低算法中的图像配准步骤的性能。由于所述尺度的动态性质,针对不同尺度的校正并非是轻而易举的——被应用在图像上的尺度取决于光学元件的聚焦位置,而光学元件的聚焦位置又会随着物距改变。这意味着无法通过校准多孔径摄影机以及应用固定的校正来轻易地校正尺度,相反,必须在每一幅图像处估计正确的尺度。在有视差存在的情况下(其中不同的对象出现在作为其与摄影机的距离的函数的不同位置处)以及在一个孔径中存在对象的可能遮挡而在另一个孔径中不存在的情况下,从图像估计将要应用的正确尺度并非是轻而易举的。因此,需要一种可以在每幅图像的基础上准确地估计并且校正缩放差异的方法。
作为针对使用AF的一种替换方案,已经提出了完全不具有AF机制的多孔径摄影机设计。这样的设计依赖于每一个子摄影机的较小焦距来提供与支持更大传感器的相应的单孔径摄影机相比增大的聚焦深度(DOF)。由于更大的DOF意味着更宽的物距范围在焦点对准的情况下被成像到传感器上,因此可以去除AF机制。虽然这种方法在成本、尺寸和系统复杂度方面是有利的,但是从多孔径摄影机的较短焦距导致的更大DOF常常不足以对于其范围从几厘米到无限远的物距支持焦点对准的图像。在这些情况中,满足于具有固定聚焦光学元件的多孔径摄影机导致近物距处的较差成像性能。
在使用多个AF机制与仅使用固定聚焦光学元件之间,需要一种组合了AF机制的益处而不会对摄影机系统添加附加的复杂度和成本的多孔径摄影机系统。
发明内容
这里所公开的实施例提供了具有AF机制的多孔径摄影机的设计,描述了一种动态地校正子摄影机图像之间的尺度差异的算法,并且提出了一种与标准彩色滤光器阵列(CFA)相比在组合子摄影机图像时可以得到更高分辨率和灵敏度的CFA设计。
在各个实施例中,提供了具有自动聚焦(AF)以用于对对象或场景进行成像的双孔径数字摄影机,每一个这样的双孔径数字摄影机包括:包括第一光学元件模块以及具有第一像素数目的彩色图像传感器的第一子摄影机,第一摄影机适于提供对象或场景的彩色图像;包括第二光学元件模块以及具有第二像素数目的透明图像传感器的第二子摄影机,第二子摄影机适于提供对象或场景的辉度图像,其中第一和第二子摄影机具有基本上相同的视场;机械地耦合到至少第一光学元件模块的AF机制;以及耦合到AF机制并且耦合到两个图像传感器的摄影机控制器,其被配置成控制AF机制,计算彩色与辉度图像之间的由于AF机制所造成的缩放差异和锐度差异,并且利用所计算出的差异把彩色和辉度图像处理成融合彩色图像。
第一像素数目和第二像素数目可以是相等的或不同的。第一和第二图像传感器被形成在单个基板上。第一子摄影机可以包括阻止IR波长进入彩色图像传感器的红外(IR)滤光器,并且第二子摄影机可以被配置成允许至少一些IR波长进入透明图像传感器。在一些实施例中,所述彩色图像传感器可以包括非标准彩色滤光器阵列(CFA)。
在一个实施例中,AF机制可以机械地耦合到第一光学元件模块,并且第二光学元件模块可以具有固定的聚焦位置。在一个实施例中,所述固定聚焦位置可以使得第二子摄影机的DOF范围处于无限远与小于大约100cm之间。在一个实施例中,AF机制可以机械地耦合到第一和第二光学元件模块,并且适于在对应的光学元件模块光轴的共同方向上将其一同移动。
在一个实施例中,所述摄影机还可以包括机械地耦合到第一和第二光学元件模块的光学图像稳定机制,且处在垂直于对应的光学元件模块光轴的方向上以便对AF融合彩色图像实施光学稳定。
在一个实施例中,提供了一种用于利用双孔径摄影机获得对象或场景的聚焦彩色图像的方法,其包括以下步骤:同时获得对象或场景的自动聚焦彩色图像和自动聚焦或固定聚焦辉度图像,其中彩色图像具有第一分辨率、第一有效分辨率和第一信噪比(SNR),并且其中辉度图像具有第二分辨率、第二有效分辨率和第二SNR;在考虑到由AF动作所导致的缩放和锐度差异的情况下,对所述两幅图像进行预处理,以便获得对应的经过矫正、规范化以及尺度调节的彩色和辉度图像;在所述经过矫正、规范化以及尺度调节的彩色和辉度图像之间实施局部配准,从而获得配准图像;以及将配准图像融合到聚焦融合彩色图像中。
在一个实施例中,所述用以获得经过尺度调节的彩色和辉度图像的预处理步骤包括计算彩色和辉度图像中的相应点的集合,从每一个相应点提取单个坐标,并且使用所述单个坐标来估计彩色与辉度图像之间的缩放因数S。所提取的坐标是Y,并且缩放因数S可以由S=(Y2’*W*Y2)\Y2’*W*Y1给出,其中Y1是从一幅图像取得的各点的Y坐标的矢量,Y2是从另一幅图像取得的各点的Y坐标的矢量,并且W是保持Y2的绝对值的对角矩阵。
在一个实施例中,一种方法还可以包括使用缩放因数S对其中一幅图像进行缩放以便匹配另一幅图像,从而获得配准图像。
在一个实施例中,一种方法还可以包括对所获得的彩色和辉度图像实施光学稳定。
附图说明
下面将参照在本段之后列出的附图来描述这里所公开的实施例的非限制性实例。附图及其描述意图说明和澄清这里所公开的实施例,而不应当被视为以任何方式作出限制。
图1A示意性地示出了传统数字摄影机的设计;
图1B示意性地示出了多孔径摄影机的设计;
图2在(a)一般等距视图和(b)剖面等距视图中示意性地示出了这里所公开的具有自动聚焦的双孔径成像系统的一个实施例;
图3示出了用于图2中的成像系统的图像传感器的一个实施例,其中一个子摄影机具有CFA传感器,另一个子摄影机则具有透明传感器;
图4A示意性地示出了这里所公开的方法的一个实施例的流程图;
图4B在流程图中示出了图4A所示的方法中的尺度调节步骤的细节;
图4C示出了具有相应点的两幅图像;
图5A在剖面等距视图中示意性地示出了这里所公开的具有单个自动聚焦机制的双孔径成像系统的另一个实施例;
图5B在流程图中示意性地示出了用于利用图5A中的成像系统进行自动聚焦成像的方法的一个实施例;
图6在剖面等距视图中示意性地示出了利用单个自动聚焦机制编号的双孔径成像系统的另一个实施例。
具体实施方式
图2在(a)一般等距视图和(b)剖面等距视图中示意性地示出了编号为200的这里所公开的具有自动聚焦的双孔径成像系统的一个实施例。在后面的描述中,“成像系统”和“摄影机”可以被互换使用。系统200包括被标记为202和204的两个子摄影机,每一个子摄影机具有其自身的光学元件。因此,子摄影机202包括具有孔径208的光学元件模块206和光学透镜模块210,以及传感器212。类似地,子摄影机204包括具有孔径216的光学元件模块214和光学透镜模块218,以及传感器220。所述传感器在后面也被称作“传感器1”(212)和“传感器2”(220)。应当提到的是,所述两个传感器可以被实施成相同基板上的两个不同的区域,而不一定被实施成两个独立的传感器。每一个光学透镜模块可以包括几个透镜元件以及红外(IR)滤光器222a、b。在一些实施例中,属于不同孔径的其中一些或所有透镜元件可以被形成在相同的基板上。所述两个子摄影机被彼此紧挨着放置,其中在两个孔径208与216之间有一条较小的基线224。每一个子摄影机还分别包括自动聚焦机制226和228。
在每一个子摄影机中使用的传感器可以具有不同的彩色滤光器阵列(CFA)。在一些实施例中,传感器1可以具有一种类型的CFA,传感器2则可以具有另一种类型的CFA。在一些实施例中,传感器1可以具有CFA,传感器2可以具有“白色”或“透明”滤光器阵列(由W标记)——其中所有像素吸收例如400nm到700nm之间的相同的较宽波长范围(而不是每一个像素吸收光谱的一个较小部分)。具有彩色滤光器阵列的传感器在后面可以被称作“彩色图像传感器”,而具有透明或W滤光器阵列的传感器则被称作“透明图像传感器”。
图3示出了一个传感器实施例300,其中数字“1”代表传感器1(其具有CFA),数字“2”代表传感器2(其具有透明“白色”滤光器阵列)。圆圈302a、302b标记由光学元件在传感器上形成的图像圆圈,白色区域304则标记传感器位于其上的基板。圆圈302a、302b可以大于在其上形成图像的传感器的对应尺寸。在某些情况下,可能会发生两个图像圆圈之间的重叠,并且可能需要机械挡光元件(例如壁板)以防止子摄影机之间的光学串扰。通过使用传感器1上的CFA,子摄影机1捕获关于场景的颜色信息,子摄影机2则捕获关于场景的辉度信息。
传感器1的CFA可以是标准的或非标准的。这里所使用的“标准CFA”可以包括已知的CFA,比如Bayer、RGBE、CYYM、CYGM以及不同的RGBW滤光器,比如RGBW#1、RGBW#2和RGBW#3。“非标准”CFA式样作为示例可以包括:2x2微单元的重复,其中彩色滤光器顺序是RRBB、RBBR或YCCY,其中Y=黄色=绿色+红色,C=蓝绿色=绿色+蓝色;3x3微单元的重复,其中彩色滤光器顺序是GBRRGBBRG(比如图3中的传感器1中那样);以及6x6微单元的重复,其中彩色滤光器顺序是以下选项的其中之一:
1、第1行:RBBRRB。第2行:RWRBWB。第3行:BBRBRR。第4行:RRBRBB。第5行:BWBRWR。第6行:BRRBBR。
2、第1行:BBGRRG。第2行:RGRBGB。第3行:GBRGRB。第4行:RRGBBG。第5行:BGBRGR。第6行:GRBGBR。
3、第1行:RBBRRB。第2行:RGRBGB。第3行:BBRBRR。第4行:RRBRBB。第5行:BGBRGR。第6行:BRRBBR。
4、第1行:RBRBRB。第2行:BGBRGR。第3行:RBRBRB。第4行:BRBRBR。第5行:RGRBGB。第6行:BRBRBR。
利用前面列出的其中一些非标准CFA的传感器1的CFA式样相对于标准Bayer式样的一个优点在于,其把红色、绿色和蓝色均匀地划分在传感器像素上。这样与标准Bayer式样相比就导致对于红色和蓝色的更加精细的采样,而绿色则受到更加粗略的采样。但是由于传感器2所捕获的图像被用来提取关于场景的辉度信息(而不是像在使用Bayer式样时的情况那样为此依赖于绿色通道),因此绿色像素仅被用于颜色信息。
在传统的紧凑型摄影机设计中,允许可见范围内的光进入并且阻挡IR范围内的光的滤光器通常被放置在光径中,有时是作为保护传感器的覆盖玻璃的一部分。虽然对于IR光的阻挡会浪费光子,但是其允许更加准确地估计场景中的颜色,这是因为其减少了来自R、G和B彩色滤光器(其可能对于IR光敏感)的光谱响应的颜色串扰。在一个实施例中,使得透明传感器2对于IR光敏感,这是通过去除IR滤光器或者通过将其光谱响应重新设计成允许IR范围内的一些光进入。除了可见范围内的光之外,捕获IR光的动机是提高图像中的信噪比(SNR),这是因为许多自然的和人工的光源也会在IR光谱中发出光子。与具有彩色CFA的传感器(即传感器1)不同,对于IR光的吸收不会在透明传感器2中引入颜色串扰(这是因为该传感器记录场景的全色图像)。
去除IR滤光器可能对图像质量有一些负面影响。举例来说,扩展由摄影机捕获的波长范围可能会导致纵向色差,这可能会降低点扩散函数(PSF)的质量从而导致模糊的图像。为了解决这一问题,在一个实施例中,在可见和IR范围全部二者上对子摄影机2的光学元件进行优化,以便减轻色差的影响,并且与使用IR滤光器的标准紧凑型摄影机光学元件相比得到更加紧凑的PSF。这与仅考虑可见范围内的波长的标准优化处理不同。
在使用中,两个子摄影机共享类似的FOV,并且具有基本上相等(仅受到制造容差的限制)的焦距。图像捕获处理被同步,从而使得两个子摄影机在特定时刻捕获场景的图像。由于子摄影机的两个孔径之间的较小的基线(其可以是仅仅几毫米,例如6.5mm或8.5mm),根据场景中的物距,输出图像可能会表现出视差。数字图像处理算法在被称作“图像融合”的处理中把两幅图像组合成一幅图像。在后文中,实施该处理的算法被称作“图像融合算法”。与一幅子摄影机图像相比,所述算法所得到的图像可以具有更高的分辨率(在图像像素方面)和/或更高的“有效分辨率”(在解析场景中的空间频率的能力方面,更高的“有效分辨率”意味着解析更高空间分辨率的能力)和/或更高的SNR。
在分辨率方面并且作为示例,如果每一个子摄影机产生5兆像素(2592x1944像素)图像,则图像融合算法可以组合两幅图像以产生具有8兆像素(3264x2448像素)分辨率的一幅图像。在有效分辨率方面,假设所成像的对象或场景包括空间频率,则通过使用这里所公开的具有透明传感器和彩色传感器的双孔径摄影机导致有效分辨率的总体提高,这是因为与彩色传感器相比,透明传感器有能力解析场景的辉度分量的更高空间频率。在这里所公开的方法(参见后文)中实施的彩色和透明图像的融合在比彩色(例如Bayer)子摄影机所可能捕获的更高空间频率中增加了信息。
为了生成更高分辨率或更高有效分辨率的图像,所述图像融合算法把来自子摄影机1的颜色信息与来自子摄影机2的辉度信息相组合。由于透明传感器2与彩色传感器1中的任何颜色通道或其辉度相比在更高的有效空间采样率下对场景进行采样,因此与仅来自子摄影机1的输出图像相比,所述算法合成了包括更高空间频率处的信息的图像。所述算法的目标是达到类似于从具有更高像素数目的传感器的单孔径摄影机所获得的空间分辨率。继续前面的实例,所述算法可以组合两幅5兆像素图像(一幅彩色图像和一幅辉度图像),从而产生具有类似于单孔径8兆像素彩色摄影机的信息内容的一幅8兆像素图像。
除了改进的空间分辨率之外,与来自相应的单孔径摄影机的图像相比,所述图像融合算法还使用来自透明传感器2的辉度信息生成具有提高的SNR的图像。传感器2的像素未被彩色滤光器覆盖的事实允许每一个像素在更宽的波长光谱中吸收光,从而与彩色CFA摄影机相比导致光效率的显著提高。在一个实施例中,透明图像信息与彩色图像信息的融合于是提供与单孔径数字摄影机相比的+3dB的SNR提高。
由于透明传感器2比彩色传感器1更加敏感,可能需要调节曝光时间或模拟增益以便匹配两个摄影机之间的数字信号水平。这可以通过对于全部两个传感器固定相同的曝光时间并且对于每一个传感器配置不同的模拟增益来实现,或者通过固定全部两个传感器中的模拟增益并且对于每一个传感器配置不同的曝光时间来实现。
图4A在流程图中示意性地示出了这里所公开的方法的一个实施例。图4B在流程图中示出了图4A所示的方法中的尺度调节步骤的细节。分别来自子摄影机1和2的两幅图像400a和400b充当输入。两幅图像分别在对应于传感器1的彩色图像的步骤402a和对应于传感器2的辉度图像的步骤402b中经历预处理。步骤402a包括ISP管线中的数字图像信号处理(ISP)。ISP生成在每一个图像像素处具有R、G、B数值的全彩色图像。如果传感器1上的CFA式样是非标准的,则ISP包括非标准的去马赛克(demosaicing),以便在每一个像素位置处内插缺失的颜色。除了去马赛克之外,可以在图像上应用本领域内已知的其他标准ISP管线算法,比如黑色水平校正、缺陷像素校正、噪声去除等等。此外还对来自子摄影机2的辉度图像进行预处理,以便校正缺陷、噪声、阴影分布、模糊以及其他光学、模拟和数字像差。随后在步骤404中在两幅图像上应用规范化、矫正和尺度调节。首先,对两幅图像进行规范化,以使其具有相同的均值信号强度和标准偏差(其是针对图像动态范围的度量)。这是通过在每一幅图像中从每一个像素减去均值并且将每一个像素除以标准偏差而实现的。随后通过应用两个射影矩阵对图像进行矫正,以便校正围绕x、y和z轴的不同旋转,校正两个摄影机的光学中心的x-y平移,并且修复透镜畸变。所述射影矩阵参数是从校准数据预先计算的,所述校准数据可以是通过在摄影机模块组装期间对于每一个摄影机模块所应用的校准步骤而获取的。所述数据可以被保存在摄影机模块中的一次可编程存储器或EEPROM中。在矫正步骤之后,在两个子摄影机被沿着X轴并排放置的情况下,全部两幅图像中的核线或多或少地平行于图像的水平轴,或者在两个子摄影机被沿着Y轴并排放置的情况下,则平行于图像的垂直轴。
现在将参照图4B更加详细地描述在矫正步骤之后进行的尺度调节。分别来自子摄影机1和2的经过预处理和矫正的图像418a和418b(其也在图4C中被示例性地示出)充当输入。在步骤420中,找到两幅图像之间的相应点。在一个实施例中,在整幅图像上计算相应点的集合。在另一个实施例中,对于每一幅图像中的特定感兴趣区段(ROI)找到相应点的集合。图4C示意性地示出了由具有一些视差的邻近摄影机(即由子摄影机1捕获的A以及由子摄影机2捕获的A’)捕获的相同场景的两幅图像A和B——由于不同的视点,取决于其与摄影机的距离,对象被成像时与另一幅图像相比在一幅图像中具有一些位移。特征对a-a’、b-b’和c-c’代表两幅图像A和A’中的相同的“相应点”。使用一种算法来找到两幅图像之间的相应点。在两幅图像中找到一个显著点的集合(例如角落),并且随后所述算法找到两幅图像中的点之间的匹配。这样的算法对于本领域技术人员是已知的。在步骤422中,仅提取Y坐标以便估计两幅图像之间的尺度。由于受到AF机制控制的光学元件的位置可能在两幅子摄影机图像之间引入不同的尺度,因此需要对于每一幅捕获的图像(也就是对于每一个聚焦位置)确定适当的尺度。假设两个子摄影机被沿着X轴彼此邻近放置,则一旦找到相应的点对,则在步骤422中从每一个点提取单个坐标。也就是说,所述算法仅考虑其Y坐标而不考虑其X坐标。发明人已经有利地认识到,X坐标可能会受到视差的影响,而Y坐标在矫正步骤之后则在很大程度上不受视差的影响,因此Y坐标可以被用来更加鲁棒地估计尺度。如果两个子摄影机被沿着Y轴邻近放置,则一旦找到相应的点对,则所述算法仅考虑其X坐标而不考虑其Y坐标。继续假设两个子摄影机沿着X轴邻近,相应点的Y坐标在步骤424中被用来估计图像之间的缩放因数S。在一个示例性实施例中,利用最小二乘法来实施缩放因数估计,在这种情况下S由下式给出:
S=(Y2’*W*Y2)\Y2’*W*Y1
其中Y1是从一幅图像取得的各点的Y坐标的矢量,Y2是从另一幅图像取得的各点的Y坐标的矢量,并且W是保持Y2的绝对值的对角矩阵。随后在步骤426中使用缩放因数S对一幅图像进行缩放,以便匹配两幅图像之间的尺度。在步骤426中,把每一幅图像中的点坐标乘以相同的缩放因数S。最后,在步骤428中,经过缩放的相应点对被用来对于每一个轴计算两幅图像之间的x和y轴中的偏移。在一个实施例中,只有位于特定ROI中的相应点的一个子集被用来计算x和y中的偏移。举例来说,所述ROI可以是被用来确定聚焦并且可以由用户或摄影机软件(SW)选择的区段。在其中一幅图像或全部两幅图像上应用所估计的偏移。图4B中(以及图4A的步骤404中)的尺度调节处理的结果是经过缩放的图像430。
现在参照图4A,在步骤406中对经过缩放的图像应用局部配准和视差校正以便估计视差图(disparity map)。局部配准使用在步骤404中找到的尺度和偏移参数。随后通过根据所述视差图组合来自全部两幅图像的信息,在步骤408中实施融合以便增强最终图像中的分辨率并且改进SNR。融合处理使用来自子摄影机1的图像作为基线。其输出是融合图像410。随后可以对融合图像应用后处理,比如色调映射、伽马校正、对比度增强以及颜色校正/增强。
自动聚焦
正如前面关于图2所提到的那样,这里所公开的摄影机系统包括控制光学元件的聚焦位置的AF机制。图2中示出的系统包括两个这样的AF机制。图5A在剖面等距视图中示意性地示出了具有单个自动聚焦机制的编号为500的双孔径成像系统的另一个实施例。除了常规的图像传感器和光学元件之外,系统500只包括位于彩色子摄影机1中的AF机制502。辉度子摄影机2不具有AF机制,而是固定聚焦摄影机,其焦点被固定到特定的物距。取决于焦距和光学元件设计,所述聚焦位置使得子摄影机2的DOF范围处于无限远与几十厘米之间。举例来说,DOF可以处于无限远与50cm之间,从而使得子摄影机2将对于处在距离摄影机的该范围内的物距产生清晰的图像。在系统500中,通过改变光学元件的聚焦位置,子摄影机1可以产生其中主要对象对于较宽的物距范围处于焦点对准的图像,从而使其在子摄影机1图像中看起来是清晰的。
图5B在流程图中示意性地示出了利用具有AF的成像系统500进行图像融合的方法的一个实施例。分别来自子摄影机1和2的两幅图像500a和500b充当输入。在步骤502中,对于子摄影机1选择聚焦位置。在步骤504中实施检查以便确定所成像的对象的距离是否处在子摄影机2的DOF内,正如本领域内已知的那样,这是通过计算子摄影机1和2的图像上的锐度量度而实现的。所述锐度量度的计算可以得到锐度差异。如果步骤504的检查中的回答为“是”,则所述对象在子摄影机2图像中看起来将是清晰的。在这种情况下,在步骤506中对由全部两个子摄影机获得的对象图像应用前面所描述的图像融合,以便获得更高的输出分辨率和更好的SNR。如果对于检查504的回答为“否”(也就是说对象的位置更靠近摄影机,并且处在子摄影机2的DOF范围之外),则对象在子摄影机2图像中看起来将是模糊的(不清晰)。在这种情况下,来自子摄影机2的图像不被用来增强分辨率,而是仅被用来改进来自子摄影机1的图像的SNR。为此,在步骤508中应用类似于前面的融合算法(规程)的另一种算法(规程)。将来自子摄影机1的图像缩放到适当的输出尺寸,并且应用使用来自子摄影机2图像的信息的去噪声算法。由于在这种情况下在子摄影机2图像中丢失了高频率(由于散焦),因此所述算法仅考虑来自子摄影机2的图像的低空间频率处的信息。为了确定物距,使用子摄影机1的AF机制的所选择的聚焦位置(在聚焦处理收敛之后)。
图6在剖面等距视图中示意性地示出了具有单个AF机制的编号为600的双孔径成像系统的另一个实施例。类似于系统500,系统600除了常规的图像传感器和光学元件之外只包括一个AF机制602。但是与AF机制502不同,AF机制602把子摄影机1的光学元件和子摄影机2的光学元件一同移动。各个光学元件被安放在透镜支架604上,所述透镜支架604具有用以固定两个透镜的专用螺纹并且由AF机制移动。由于子摄影机1和子摄影机2的光学元件具有非常类似的焦距,因此所述机械移动把来自子摄影机1和来自子摄影机2的图像同时带到聚焦。这种构造与只具有一个AF机制相比的优点在于,全部两个子摄影机都支持相同的物距范围,因此可以对于整个范围应用图像融合算法。在AF机制选择对应于透镜的最佳聚焦位置时,可以把来自全部两幅子摄影机图像的信息纳入考虑(以便例如帮助在低光情况下聚焦)。在低光中,由于图像中的较低SNR,AF锐度测量的噪声更多。通过使用两幅图像而不是一幅,可以帮助减少噪声并且改进AF处理(算法)的鲁棒性和准确性。
在一个实施例中,利用晶片级光学元件制造技术或者玻璃或塑料材料的喷射模塑,子摄影机1和子摄影机2的其中一些或所有光学元件被制作在相同的管芯上。在这种情况下,所述单个AF机制移动两个子摄影机的光学元件被制作在其上的光学管芯,从而使得两个光学堆叠一同移动。
在另一个实施例中,一种摄影机类似于摄影机500,并且包括被放置在子摄影机1(其具有彩色CFA)上的单个AF机制。子摄影机2不具有AF机制,而是使用具有提供扩展的聚焦深度的独特特性的固定聚焦光学元件,这是通过光学设计而实现的(例如通过采用具有更窄的孔径和更高F数的光学元件)。子摄影机2的光学元件的光学性能被设计成对于处在距离摄影机无限远与几cm之间的物距支持清晰的图像——在这种情况下,与前面所描述的单AF实施例相比,可以应用融合算法以便对于更宽的物距范围增强输出分辨率。在摄影机的DOF与DOF范围上的最小可实现PSF尺寸之间通常存在折中。在应用融合算法以组合照片之前,可以使用一种算法来增强由子摄影机2捕获的图像的锐度。这样的算法在本领域内是已知的。
作为结论,这里所公开的双孔径摄影机以及此类摄影机的使用方法在摄影机高度、分辨率、有效分辨率和SNR方面具有优于单孔径摄影机的若干优点。在摄影机高度方面,在一个实例中,具有70度对角线FOV的标准8兆像素1/3”摄影机可以具有5.7mm的模块高度。与此相比,这里所公开的双孔径摄影机可以具有4.5mm的模块高度,其中所述双孔径摄影机具有两个5兆像素1/4”图像传感器(一个彩色图像传感器和一个透明图像传感器),其分别具有70度对角线视场。在另一个实例中,具有76度对角线FOV的标准8兆像素1/3”摄影机可以具有5.2mm的模块高度。与此相比,这里所公开的双孔径摄影机可以具有4.1mm的模块高度,其中所述双孔径摄影机具有两个5兆像素1/4”图像传感器(一个彩色图像传感器和一个透明图像传感器),其分别具有76度对角线FOV。
虽然通过某些实施例和总体上相关联的方法描述了本公开内容,但是本领域技术人员将认识到所述实施例和方法的改动和置换。应当理解的是,本公开内容不受这里所描述的具体实施例的限制,而是仅由所附权利要求书的范围限制。此外,在本申请中对于任何参考文献的引述或标识应当被解释成承认这样的参考文献可用于作为本申请的现有技术。

Claims (22)

1.一种具有自动聚焦AF以用于对对象或场景进行成像的双孔径数字摄影机,其包括:
a)包括第一光学元件模块以及具有第一像素数目的彩色图像传感器的第一子摄影机,第一子摄影机适于提供对象或场景的彩色图像;
b)包括第二光学元件模块以及具有第二像素数目的透明图像传感器的第二子摄影机,第二子摄影机适于提供对象或场景的辉度图像,其中第一和第二子摄影机具有基本上相同的视场;
c)机械地耦合到至少第一光学元件模块以及用于在至少第一光学元件模块上进行AF操作的AF机制;以及
d)耦合到AF机制并且耦合到两个图像传感器的摄影机控制器,其被配置成控制AF机制,计算彩色与辉度图像之间的由于AF操作所造成的锐度差异,并且利用所计算出的锐度差异把彩色和辉度图像处理成融合彩色图像。
2.根据权利要求1所述的双孔径数字摄影机,其中,所述彩色图像传感器包括非标准彩色滤光片阵列。
3.根据权利要求1所述的双孔径数字摄影机,其中,所述摄影机控制器结构基于通过校准步骤所取得的校准数据。
4.根据权利要求3所述的双孔径数字摄影机,其中,所述校准数据保存在双孔径数字摄影机的一次性可编程存储器或者EEPROM中。
5.根据权利要求1所述的双孔径数字摄影机,其中,第一像素数目和第二像素数目是相等的。
6.根据权利要求1所述的双孔径数字摄影机,其中,第一像素数目和第二像素数目是不同的。
7.根据权利要求1所述的双孔径数字摄影机,其中,彩色图像传感器和透明图像传感器具有相同尺寸的像素。
8.根据权利要求1所述的双孔径数字摄影机,其中,所述摄影机控制器进一步设置成发现彩色和辉度图像中的对应点,估算缩放因数并使用缩放因数来处理所述彩色和辉度图像成为融合彩色图像。
9.根据权利要求1所述的双孔径数字摄影机,其中,所述摄影机控制器进一步设置成预处理所述彩色和辉度图像,以获得对应的矫正彩色和辉度图像,对矫正彩色和辉度图像进行配准以获得相应的配准彩色和辉度图像,以及把配准的彩色和辉度图像融合成融合彩色图像。
10.根据权利要求9所述的双孔径数字摄影机,其中,矫正后的颜色和辉度图像中的极线与矫正的颜色和辉度图像的水平轴或垂直轴或多或少平行。
11.根据权利要求8所述的双孔径数字摄影机,其中,所述摄影机控制器进一步设置成预处理所述彩色和辉度图像,以获得对应的矫正彩色和辉度图像,对矫正彩色和辉度图像进行配准以获得相应的配准彩色和辉度图像,以及把配准的彩色和辉度图像融合成融合彩色图像。
12.根据权利要求11所述的双孔径数字摄影机,其中,矫正后的颜色和辉度图像中的极线在第一子摄影机和第二子摄影机被沿着X轴并排放置的情况下与矫正后的颜色和辉度图像的水平轴或多或少平行,或者在第一子摄影机和第二子摄影机被沿着Y轴并排放置的情况下与矫正后的颜色和辉度图像的垂直轴或多或少平行。
13.根据权利要求12所述的双孔径数字摄影机,其中,所述摄影机控制器结构基于通过校准步骤所取得的校准数据,其中所述校准数据保存在双孔径数字摄影机的一次性可编程存储器或者EEPROM中。
14.根据权利要求13所述的双孔径数字摄影机,其中,第一像素数目和第二像素数目是不同的。
15.根据权利要求1所述的双孔径数字摄影机,其中,第一子摄影机包括阻止IR波长进入彩色图像传感器的红外IR滤光器,并且其中第二子摄影机被配置成允许至少一些IR波长进入透明图像传感器。
16.一种用于对对象或场景进行成像的双孔径数字摄影机,其包括:
a)包括第一光学元件模块以及具有第一像素数目的彩色图像传感器的第一子摄影机,第一子摄影机适于提供对象或场景的彩色图像;
b)包括第二光学元件模块以及具有第二像素数目的透明图像传感器的第二子摄影机,第二子摄影机适于提供对象或场景的辉度图像,其中第一子摄影机包括阻止IR波长进入彩色图像传感器的红外IR滤光器,并且其中第二子摄影机被配置成允许至少一些IR波长进入透明图像传感器;和
c)耦合到彩色图像传感器和透明图像传感器的摄影机控制器,其中所述摄影机控制器配置成基于通过校准步骤所取得的校准数据,其中所述校准数据保存在双孔径数字摄影机的一次性可编程存储器或者EEPROM中,其中所述摄影机控制器进一步设置成预处理所述彩色和辉度图像,以获得对应的矫正彩色和辉度图像,对矫正彩色和辉度图像进行配准以获得相应的配准彩色和辉度图像,以及把来自配准的彩色和辉度图像的数据和来自彩色图像的数据合并。
17.根据权利要求16所述的双孔径数字摄影机,进一步包括机械地耦合到至少第一光学元件模块以及用于在至少第一光学元件模块上进行AF操作的AF机制。
18.一种双孔径数字摄影机,其包括:
a)第一子摄影机,包括具有对应第一光轴的第一光学元件模块、覆盖有彩色滤光片阵列的第一彩色图像传感器和阻止IR波长进入彩色图像传感器的红外IR滤光器,其中第一子摄影机设置成输出第一图像;
b)第二子摄影机,包括具有对应第二光轴的第二光学元件模块和可配置成允许至少一些IR波长进入透明图像传感器的第二图像传感器,其中所述第二子摄影机配置成输出第二图像;和
c)图像融合算法结构,其将来自第一和第二图像的数据合并成合并彩色图像,其中第二图像中离焦区域中的数据不和第一图像中的对应数据相融合。
19.一种用于融合双摄影机中的第一子摄影机的图像和第二子摄影机的图像方法,包括:
a)同时地利用所述第一子摄影机获得对象或场景的彩色图像以及利用所述第二子摄影机获得辉度图像,其中第一子摄影机包括第一光学元件模块,其中第二子摄影机包括第二光学元件模块,以及其中第一和第二子摄影机具有基本上相同的视场;
b)使用机械地耦合到至少第一光学元件模块用于在至少第一光学元件模块上进行AF操作的AF机制;
c)预处理所述彩色和辉度图像,以获得对应的矫正和尺度调节彩色和辉度图像,同时考虑到由于AF操作引起的锐度差异;
d)在经过矫正以及尺度调节的彩色和辉度图像之间实施配准,从而获得配准图像;以及
d)将配准图像融合成聚焦融合彩色图像。
20.根据权利要求19所述的方法,其中,配准图像的融合,在非聚焦区域中并不进行。
21.根据权利要求19所述的方法,其中,所述用以获得对应的矫正和尺度调节彩色和辉度图像的预处理步骤包括计算彩色和辉度图像中的相应点的集合,从每一个相应点提取单个坐标,并且使用所述单个坐标来估计彩色与辉度图像之间的缩放因数S。
22.根据权利要求21所述的方法,其中,还包括使用缩放因数S对其中一幅图像进行缩放以便匹配另一幅图像的步骤,从而获得配准图像。
CN201810567323.7A 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法 Active CN108718376B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361861185P 2013-08-01 2013-08-01
US61/861,185 2013-08-01
CN201480043316.7A CN105917641B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201480043316.7A Division CN105917641B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法

Publications (2)

Publication Number Publication Date
CN108718376A CN108718376A (zh) 2018-10-30
CN108718376B true CN108718376B (zh) 2020-08-14

Family

ID=52432504

Family Applications (6)

Application Number Title Priority Date Filing Date
CN201810567323.7A Active CN108718376B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN201810946529.0A Active CN108989649B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN201480043316.7A Active CN105917641B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN201811064283.0A Active CN109120823B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN201811063380.8A Active CN109246339B (zh) 2013-08-01 2014-07-24 用于对对象或场景进行成像的双孔径数字摄影机
CN201810946469.2A Active CN108989648B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法

Family Applications After (5)

Application Number Title Priority Date Filing Date
CN201810946529.0A Active CN108989649B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN201480043316.7A Active CN105917641B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN201811064283.0A Active CN109120823B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN201811063380.8A Active CN109246339B (zh) 2013-08-01 2014-07-24 用于对对象或场景进行成像的双孔径数字摄影机
CN201810946469.2A Active CN108989648B (zh) 2013-08-01 2014-07-24 具有自动聚焦的纤薄多孔径成像系统及其使用方法

Country Status (5)

Country Link
US (10) US9571731B2 (zh)
EP (1) EP3028443A2 (zh)
CN (6) CN108718376B (zh)
IL (4) IL243776B (zh)
WO (1) WO2015015383A2 (zh)

Families Citing this family (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3008890A4 (en) 2013-06-13 2016-05-04 Corephotonics Ltd ZOOM OF A DIGITAL CAMERA WITH DUAL IRIS
US9857568B2 (en) 2013-07-04 2018-01-02 Corephotonics Ltd. Miniature telephoto lens assembly
WO2015001440A1 (en) 2013-07-04 2015-01-08 Corephotonics Ltd. Miniature telephoto lens assembly
CN108718376B (zh) * 2013-08-01 2020-08-14 核心光电有限公司 具有自动聚焦的纤薄多孔径成像系统及其使用方法
WO2015068056A1 (en) 2013-11-06 2015-05-14 Corephotonics Ltd. Electromagnetic actuators for digital cameras
EP3164987B1 (en) 2014-07-01 2024-01-03 Apple Inc. Mobile camera system
US9781345B1 (en) 2015-02-13 2017-10-03 Apple Inc. Dual camera magnet arrangement
US11381747B2 (en) 2015-02-13 2022-07-05 Apple Inc. Dual camera magnet arrangement
CN111175935B (zh) 2015-04-16 2022-02-08 核心光电有限公司 紧凑型折叠式相机中的自动对焦和光学图像稳定
WO2016195135A1 (ko) * 2015-06-03 2016-12-08 재단법인 다차원 스마트 아이티 융합시스템 연구단 자동 초점 조절 기능 및/또는 깊이 추정 기능을 갖는 멀티 애퍼쳐 카메라 시스템
TWI569640B (zh) * 2015-06-23 2017-02-01 台灣東電化股份有限公司 攝影模組
CN111812910B (zh) * 2015-06-24 2021-05-11 核心光电有限公司 折叠式相机模块
US10523854B2 (en) 2015-06-25 2019-12-31 Intel Corporation Array imaging system having discrete camera modules and method for manufacturing the same
KR102336447B1 (ko) * 2015-07-07 2021-12-07 삼성전자주식회사 촬영 장치 및 그 동작 방법
KR102253997B1 (ko) * 2015-08-13 2021-05-20 코어포토닉스 리미티드 비디오 지원 및 스위칭/비스위칭 동적 제어 기능이 있는 듀얼-애퍼처 줌 카메라
DE102015215836B4 (de) 2015-08-19 2017-05-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung mit einer reflektierende Facetten aufweisenden Strahlumlenkvorrichtung
DE102015215844B4 (de) * 2015-08-19 2017-05-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, tragbare Vorrichtung und Verfahren zum Herstellen einer Multiaperturabbildungsvorrichtung
DE102015215840B4 (de) 2015-08-19 2017-03-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102015215845B4 (de) 2015-08-19 2017-06-22 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung mit kanalindividueller Einstellbarkeit
DE102015215841B4 (de) 2015-08-19 2017-06-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multikanalabbildungsvorrichtung und Verfahren zum Herstellen derselben
DE102015215837A1 (de) 2015-08-19 2017-02-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Verfahren zum Herstellen derselben und Abbildungssystem
US9774787B2 (en) 2015-09-30 2017-09-26 Apple Inc. Mobile zoom using multiple optical image stabilization cameras
US10382698B2 (en) 2015-09-30 2019-08-13 Apple Inc. Mobile zoom using multiple optical image stabilization cameras
US9769419B2 (en) 2015-09-30 2017-09-19 Cisco Technology, Inc. Camera system for video conference endpoints
US10264188B2 (en) 2015-09-30 2019-04-16 Apple Inc. Mobile zoom using multiple optical image stabilization cameras
US9769389B2 (en) 2015-09-30 2017-09-19 Apple Inc. Mobile zoom using multiple optical image stabilization cameras
US10063783B2 (en) * 2015-09-30 2018-08-28 Apple Inc. Mobile zoom using multiple optical image stabilization cameras
KR102480600B1 (ko) 2015-10-21 2022-12-23 삼성전자주식회사 이미지 처리 장치의 저조도 화질 개선 방법 및 상기 방법을 수행하는 이미지 처리 시스템의 동작 방법
US10097747B2 (en) * 2015-10-21 2018-10-09 Qualcomm Incorporated Multiple camera autofocus synchronization
JP6711612B2 (ja) * 2015-12-21 2020-06-17 キヤノン株式会社 画像処理装置、画像処理方法、および撮像装置
US9781324B2 (en) * 2016-02-18 2017-10-03 Ningbo Sunny Opotech Co., Ltd. Array imaging module and molded photosensitive assembly, circuit board assembly and manufacturing methods thereof for electronic device
US10630876B2 (en) * 2016-02-18 2020-04-21 Ningbo Sunny Opotech Co., Ltd. Array imaging module and molded photosensitive assembly, circuit board assembly and manufacturing methods thereof for electronic device
US10908324B2 (en) * 2016-03-12 2021-02-02 Ningbo Sunny Opotech Co., Ltd. Molded photosensitive assembly of array imaging module
US10750071B2 (en) * 2016-03-12 2020-08-18 Ningbo Sunny Opotech Co., Ltd. Camera module with lens array arrangement, circuit board assembly, and image sensor and manufacturing method thereof
DE102016204148A1 (de) * 2016-03-14 2017-09-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Erfassen eines Objektbereichs
CN107205109B (zh) * 2016-03-18 2020-10-09 聚晶半导体股份有限公司 具有多摄像模块的电子装置及其控制的方法
US10362205B2 (en) 2016-04-28 2019-07-23 Qualcomm Incorporated Performing intensity equalization with respect to mono and color images
US11536930B2 (en) 2016-05-24 2022-12-27 Microsoft Licensing Technology, LLC. Suspended actuator
KR101785458B1 (ko) * 2016-06-07 2017-10-16 엘지전자 주식회사 카메라 모듈 및 이를 구비하는 이동 단말기
KR101893722B1 (ko) * 2016-06-19 2018-08-30 코어포토닉스 리미티드 듀얼 애퍼처 카메라 시스템에서의 프레임 동기화
KR102636272B1 (ko) 2016-07-26 2024-02-14 삼성전자주식회사 영상 촬상 장치 및 이를 포함하는 전자 시스템
JP2019526833A (ja) * 2016-08-24 2019-09-19 ハッチンソン テクノロジー インコーポレイテッドHutchinson Technology Incorporated 光学画像安定化を伴うデュアルカメラ組立体
TWI613477B (zh) * 2016-09-12 2018-02-01 台睿精工股份有限公司 雙鏡頭機械零傾角結構及其調整方法
EP3513380B1 (en) 2016-10-26 2023-12-27 Huawei Technologies Co., Ltd. Method and device for depth detection using stereo images
US9860456B1 (en) * 2016-11-11 2018-01-02 Motorola Mobility Llc Bayer-clear image fusion for dual camera
KR101823272B1 (ko) * 2016-12-01 2018-01-29 삼성전기주식회사 카메라 모듈
CN206339770U (zh) * 2016-12-10 2017-07-18 瑞声科技(新加坡)有限公司 双镜头模组及采用该双镜头模组的电子设备
US10154204B2 (en) * 2017-03-09 2018-12-11 Nokia Of America Corporation Video compressive sensing with side information
CN110476118B (zh) * 2017-04-01 2021-10-15 深圳市大疆创新科技有限公司 用于机器视觉的低轮廓多波段高光谱成像
US10567645B2 (en) * 2017-05-17 2020-02-18 Samsung Electronics Co., Ltd. Method and apparatus for capturing video data
CN109040534A (zh) * 2017-06-12 2018-12-18 杭州海康威视数字技术股份有限公司 一种图像处理方法及图像采集设备
CN107277348B (zh) 2017-06-16 2019-08-16 Oppo广东移动通信有限公司 对焦方法、装置、计算机可读存储介质和移动终端
US11218626B2 (en) * 2017-07-28 2022-01-04 Black Sesame International Holding Limited Fast focus using dual cameras
KR102378472B1 (ko) 2017-08-10 2022-03-25 삼성전자주식회사 미러를 회전 시킬수 있는 구동 장치를 포함하는 카메라를 이용하여 이미지를 획득하는 방법 및 전자 장치
US10462370B2 (en) 2017-10-03 2019-10-29 Google Llc Video stabilization
US11263782B2 (en) 2017-10-11 2022-03-01 Qualcomm Incorporated Image signal processor for processing images
KR102318013B1 (ko) * 2017-10-13 2021-10-27 삼성전자 주식회사 복수의 이미지들을 합성하는 전자장치 및 방법
CN107765392A (zh) * 2017-11-29 2018-03-06 瑞声声学科技(苏州)有限公司 双镜头模组驱动装置
US10171738B1 (en) 2018-05-04 2019-01-01 Google Llc Stabilizing video to reduce camera and face movement
CN108900772A (zh) * 2018-07-19 2018-11-27 维沃移动通信有限公司 一种移动终端及图像拍摄方法
US11272112B2 (en) * 2018-08-08 2022-03-08 Canon Kabushiki Kaisha Image capturing apparatus
TWI768105B (zh) * 2018-08-16 2022-06-21 先進光電科技股份有限公司 光學成像模組、成像系統及其製造方法
TWI768106B (zh) * 2018-08-16 2022-06-21 先進光電科技股份有限公司 光學成像模組、成像系統及其製造方法
TWI746881B (zh) * 2018-08-16 2021-11-21 先進光電科技股份有限公司 光學成像模組、成像系統及其製造方法
TWI771472B (zh) * 2018-08-16 2022-07-21 先進光電科技股份有限公司 光學成像模組、成像系統及其製造方法
TWI761575B (zh) * 2018-08-16 2022-04-21 先進光電科技股份有限公司 光學成像模組、成像系統及其製造方法
TWI768102B (zh) * 2018-08-16 2022-06-21 先進光電科技股份有限公司 光學成像模組、成像系統及其製造方法
DE102018222861A1 (de) * 2018-12-21 2020-06-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multiaperturabbildungsvorrichtung zum Akkumulieren von Bildinformation
KR102648912B1 (ko) * 2019-01-23 2024-03-19 삼성전자주식회사 영상 데이터를 분석하여 최종 영상 데이터를 생성하는 프로세서
WO2021006379A1 (ko) * 2019-07-09 2021-01-14 엘지전자 주식회사 디스플레이 화소 자동 검사 시스템 및 방법
WO2021044186A1 (en) * 2019-09-02 2021-03-11 Trieye Ltd. Multi-view image fusion by image space equalization and stereo-based rectification from two different cameras
KR20210151450A (ko) 2020-06-05 2021-12-14 에스케이하이닉스 주식회사 스마트 비닝 회로, 이미지 센싱 장치 및 그 동작방법
US11190689B1 (en) 2020-07-29 2021-11-30 Google Llc Multi-camera video stabilization
US11689822B2 (en) 2020-09-04 2023-06-27 Altek Semiconductor Corp. Dual sensor imaging system and privacy protection imaging method thereof
US11496660B2 (en) * 2020-09-04 2022-11-08 Altek Semiconductor Corp. Dual sensor imaging system and depth map calculation method thereof
US11418719B2 (en) 2020-09-04 2022-08-16 Altek Semiconductor Corp. Dual sensor imaging system and calibration method which includes a color sensor and an infrared ray sensor to perform image alignment and brightness matching
US11568526B2 (en) * 2020-09-04 2023-01-31 Altek Semiconductor Corp. Dual sensor imaging system and imaging method thereof
US11496694B2 (en) 2020-09-04 2022-11-08 Altek Semiconductor Corp. Dual sensor imaging system and imaging method thereof
US11924563B2 (en) * 2021-12-22 2024-03-05 Qualcomm Incorporated High dynamic range (HDR) photography with in-sensor zoom

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010116367A1 (en) * 2009-04-07 2010-10-14 Nextvision Stabilized Systems Ltd Continuous electronic zoom for an imaging system with multiple imaging devices having different fixed fov
CN102037717A (zh) * 2008-05-20 2011-04-27 派力肯成像公司 使用具有异构成像器的单片相机阵列的图像拍摄和图像处理
CN102511013A (zh) * 2010-07-23 2012-06-20 索尼公司 摄像装置及其控制方法和程序
CN102982518A (zh) * 2012-11-06 2013-03-20 扬州万方电子技术有限责任公司 红外与可见光动态图像的融合方法及装置
TWI399975B (zh) * 2008-02-01 2013-06-21 Omnivision Tech Inc 藉由多孔徑成像系統捕捉的影像之融合
CN103229509A (zh) * 2010-02-19 2013-07-31 双光圈股份有限公司 处理多孔径像数据

Family Cites Families (478)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3085354A (en) 1957-01-31 1963-04-16 Westinghouse Electric Corp Multi-gimbal flight simulator
US3149327A (en) 1957-06-26 1964-09-15 Robert W Bogle Microwave superregenerative pulse radar
US3238695A (en) 1961-06-05 1966-03-08 Warrick Equipment Corp Packaging machine
US3274552A (en) 1962-06-25 1966-09-20 Martin Marietta Corp Adaptive missile control system
US3115825A (en) 1962-07-18 1963-12-31 Great West Super Markets Inc Eradicator attachment for marking stamps
US3483452A (en) 1968-09-11 1969-12-09 Hercules Inc Capacitors with polypropylene film and liquid dielectrics
US3584513A (en) 1969-01-06 1971-06-15 Singer General Precision Self-calibrating system for navigational instruments
US3941001A (en) 1973-11-09 1976-03-02 Lear Siegler, Inc. Gimbal control mechanism
GB1462795A (en) 1974-04-02 1977-01-26 Baker Perkins Holdings Ltd Jaw crushers
US4199785A (en) 1979-01-05 1980-04-22 Honeywell Inc. Electronic zoom system
JPS59191146A (ja) 1983-04-13 1984-10-30 Hitachi Ltd 光学走査装置
US5099263A (en) 1984-11-10 1992-03-24 Minolta Camera Kabushiki Kaisha Variable focal length camera
JPH0690350B2 (ja) 1986-12-15 1994-11-14 富士写真光機株式会社 カメラ
EP0342419B1 (de) 1988-05-19 1992-10-28 Siemens Aktiengesellschaft Verfahren zur Beobachtung einer Szene und Einrichtung zur Durchführung des Verfahrens
DE3927334C1 (zh) 1989-08-18 1991-01-10 Messerschmitt-Boelkow-Blohm Gmbh, 8012 Ottobrunn, De
JP2703105B2 (ja) 1989-10-20 1998-01-26 富士写真フイルム株式会社 手振れ補正装置
US5032917A (en) 1990-03-12 1991-07-16 Rca Licensing Corporation Video signal blending apparatus
JPH0443773A (ja) 1990-06-11 1992-02-13 Matsushita Electric Ind Co Ltd 演算回路
US5041852A (en) 1990-10-18 1991-08-20 Fjui Photo Film Co., Ltd. Camera shake correction system
JP3261152B2 (ja) 1991-03-13 2002-02-25 シャープ株式会社 複数の光学系を備えた撮像装置
US5394520A (en) 1991-09-26 1995-02-28 Hughes Aircraft Company Imaging apparatus for providing a composite digital representation of a scene within a field of regard
US5657402A (en) 1991-11-01 1997-08-12 Massachusetts Institute Of Technology Method of creating a high resolution still image using a plurality of images and apparatus for practice of the method
JP3103166B2 (ja) 1991-11-26 2000-10-23 富士写真光機株式会社 射出瞳の遠いマクロレンズ
US5248971A (en) 1992-05-19 1993-09-28 Mandl William J Method and apparatus for multiplexed oversampled analog to digital modulation
JP3218730B2 (ja) 1992-10-19 2001-10-15 株式会社ニコン 予測機能を有する焦点調節装置
JPH06177706A (ja) 1992-12-08 1994-06-24 Sony Corp 信号処理装置
EP0605045B1 (fr) 1992-12-29 1999-03-31 Laboratoires D'electronique Philips S.A.S. Procédé et dispositif de traitement d'images pour construire une image à partir d'images adjacentes
US5682198A (en) 1993-06-28 1997-10-28 Canon Kabushiki Kaisha Double eye image pickup apparatus
US5805140A (en) 1993-07-16 1998-09-08 Immersion Corporation High bandwidth force feedback interface using voice coils and flexures
US6128416A (en) 1993-09-10 2000-10-03 Olympus Optical Co., Ltd. Image composing technique for optimally composing a single image from a plurality of digital images
JP3355787B2 (ja) 1994-05-20 2002-12-09 ソニー株式会社 光軸補正機構
US6714665B1 (en) 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
CA2155719C (en) 1994-11-22 2005-11-01 Terry Laurence Glatt Video surveillance system with pilot and slave cameras
JPH08271976A (ja) 1995-03-29 1996-10-18 Canon Inc カメラ
JPH0995194A (ja) 1995-09-29 1997-04-08 Aisin Seiki Co Ltd 車両前方の物体検出装置
US5768443A (en) 1995-12-19 1998-06-16 Cognex Corporation Method for coordinating multiple fields of view in multi-camera
US5982951A (en) 1996-05-28 1999-11-09 Canon Kabushiki Kaisha Apparatus and method for combining a plurality of images
US5926190A (en) 1996-08-21 1999-07-20 Apple Computer, Inc. Method and system for simulating motion in a computer graphics application using image registration and view interpolation
JPH10126796A (ja) 1996-09-12 1998-05-15 Eastman Kodak Co デュアル・モード・ソフトウェア処理を用いた動画・静止画像用デジタル・カメラ
US5960218A (en) 1997-02-18 1999-09-28 Mobi Corporation Dual focal length camera
US5940641A (en) 1997-07-10 1999-08-17 Eastman Kodak Company Extending panoramic images
GB9720911D0 (en) 1997-10-03 1997-12-03 Britax Rainsfords Pty Ltd Hall effect sensor system
US6148120A (en) 1997-10-30 2000-11-14 Cognex Corporation Warping of focal images to correct correspondence error
US6268611B1 (en) 1997-12-18 2001-07-31 Cellavision Ab Feature-free registration of dissimilar images using a robust similarity metric
JP3695119B2 (ja) 1998-03-05 2005-09-14 株式会社日立製作所 画像合成装置、及び画像合成方法を実現するプログラムを記録した記録媒体
US6208765B1 (en) 1998-06-19 2001-03-27 Sarnoff Corporation Method and apparatus for improving image resolution
US7057647B1 (en) * 2000-06-14 2006-06-06 E-Watch, Inc. Dual-mode camera system for day/night or variable zoom operation
GB9823689D0 (en) 1998-10-30 1998-12-23 Greenagate Limited Improved methods and apparatus for 3-D imaging
US6211668B1 (en) 1998-12-09 2001-04-03 Cts Magnetic position sensor having opposed tapered magnets
US6611289B1 (en) 1999-01-15 2003-08-26 Yanbin Yu Digital cameras using multiple sensors with multiple lenses
JP3861855B2 (ja) 1999-01-21 2006-12-27 日本電気株式会社 画像入力装置
US20020075258A1 (en) 1999-05-12 2002-06-20 Imove Inc. Camera system with high resolution image inside a wide angle view
US6738073B2 (en) 1999-05-12 2004-05-18 Imove, Inc. Camera system with both a wide angle view and a high resolution view
US20020063711A1 (en) 1999-05-12 2002-05-30 Imove Inc. Camera system with high resolution image inside a wide angle view
US6346950B1 (en) 1999-05-20 2002-02-12 Compaq Computer Corporation System and method for display images using anamorphic video
US6222359B1 (en) 1999-06-18 2001-04-24 Cts Corporation Non-contacting position sensor using radial bipolar tapered magnets
US7038716B2 (en) 1999-07-30 2006-05-02 Pixim, Inc. Mobile device equipped with digital image sensor
US7015954B1 (en) 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6650368B1 (en) 1999-10-26 2003-11-18 Hewlett-Packard Development Company, Lp. Digital camera and method of enhancing zoom effects
DE19955886A1 (de) 1999-11-20 2001-05-23 Bosch Gmbh Robert Magnetventil mit einem Rückschlagventil
US6643416B1 (en) 1999-11-30 2003-11-04 Eastman Kodak Company Method for determining necessary resolution for zoom and crop images
US6553106B1 (en) 1999-12-27 2003-04-22 Avaya Technology Corp. Alphanumeric messaging system
FI20000556A0 (fi) 2000-03-10 2000-03-10 Vaasa Control Oy Kondensaattorin kiinnitys- ja suojajärjestely
KR100456319B1 (ko) 2000-05-19 2004-11-10 주식회사 하이닉스반도체 폴리머와 산화막의 연마 선택비 차이를 이용한 반도체소자의 게이트 형성 방법
US20020005902A1 (en) 2000-06-02 2002-01-17 Yuen Henry C. Automatic video recording system using wide-and narrow-field cameras
JP2002010276A (ja) 2000-06-22 2002-01-11 Olympus Optical Co Ltd 撮像装置
JP4501239B2 (ja) 2000-07-13 2010-07-14 ソニー株式会社 カメラ・キャリブレーション装置及び方法、並びに、記憶媒体
US7002583B2 (en) 2000-08-03 2006-02-21 Stono Technologies, Llc Display of images and image transitions
US6778207B1 (en) 2000-08-07 2004-08-17 Koninklijke Philips Electronics N.V. Fast digital pan tilt zoom video
US7345277B2 (en) * 2000-08-09 2008-03-18 Evan Zhang Image intensifier and LWIR fusion/combination system
JP2002099014A (ja) 2000-09-22 2002-04-05 Nikon Corp 信号予測装置及びこれを具えたカメラ
JP2002214662A (ja) 2001-01-23 2002-07-31 Olympus Optical Co Ltd 光学装置の振れ補正装置
US6741250B1 (en) 2001-02-09 2004-05-25 Be Here Corporation Method and system for generation of multiple viewpoints into a scene viewed by motionless cameras and for presentation of a view path
GB2372659A (en) 2001-02-23 2002-08-28 Sharp Kk A method of rectifying a stereoscopic image
US20040012698A1 (en) * 2001-03-05 2004-01-22 Yasuo Suda Image pickup model and image pickup device
US7346217B1 (en) 2001-04-25 2008-03-18 Lockheed Martin Corporation Digital image enhancement using successive zoom images
JP2002341220A (ja) 2001-05-14 2002-11-27 Olympus Optical Co Ltd 光学機器
GB0116877D0 (en) 2001-07-10 2001-09-05 Hewlett Packard Co Intelligent feature selection and pan zoom control
US6680748B1 (en) 2001-09-27 2004-01-20 Pixim, Inc., Multi-mode camera and method therefor
US20030093805A1 (en) 2001-11-15 2003-05-15 Gin J.M. Jack Dual camera surveillance and control system
US7339621B2 (en) 2001-12-13 2008-03-04 Psion Teklogix Systems, Inc. Imager output signal processing
JP4198449B2 (ja) 2002-02-22 2008-12-17 富士フイルム株式会社 デジタルカメラ
JP2003298920A (ja) 2002-03-29 2003-10-17 Fuji Photo Film Co Ltd デジタルカメラ
JP2003304024A (ja) 2002-04-12 2003-10-24 Nippon Telegr & Teleph Corp <Ntt> 駆動回路内蔵光モジュール
GB2388265B (en) 2002-04-30 2005-10-12 Hewlett Packard Co Improvements in and relating to processing of images
JP4657564B2 (ja) 2002-04-30 2011-03-23 イーストマン コダック カンパニー 電子スチルカメラ及び画像処理方法
CA2386560A1 (en) 2002-05-15 2003-11-15 Idelix Software Inc. Controlling optical hardware and dynamic data viewing systems with detail-in-context viewing tools
JP3870124B2 (ja) 2002-06-14 2007-01-17 キヤノン株式会社 画像処理装置及びその方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体
US6839067B2 (en) 2002-07-26 2005-01-04 Fuji Xerox Co., Ltd. Capturing and producing shared multi-resolution video
JP2004260787A (ja) 2002-09-09 2004-09-16 Rohm Co Ltd イメージセンサモジュール
US20040061788A1 (en) 2002-09-26 2004-04-01 Logitech Europe S.A. Multiple mode capture button for a digital camera
JP4481560B2 (ja) 2002-10-08 2010-06-16 オリンパス株式会社 レンズ鏡筒
US7321470B2 (en) 2002-10-08 2008-01-22 Olympus Corporation Camera
GB2394852B (en) 2002-10-31 2006-12-20 Hewlett Packard Co Image capture systems using motion detection
JP2004219569A (ja) 2003-01-10 2004-08-05 Olympus Corp 電子撮像装置
JP3861815B2 (ja) 2003-01-17 2006-12-27 コニカミノルタフォトイメージング株式会社 手振れ補正機能付きカメラ
JP4055599B2 (ja) 2003-02-13 2008-03-05 コニカミノルタオプト株式会社 撮像レンズ装置およびそれを備えた電子機器
KR101162050B1 (ko) 2003-02-14 2012-07-04 베이 센서스 앤드 시스템즈 캄파니, 인코포레이티드 선형 홀?효과 센서를 이용하고, 증가된 선형성을 위한 자기 배열을 갖는 위치 센서
AU2003236050A1 (en) 2003-03-20 2004-10-11 Seijiro Tomita Panoramic picture creating method and device, and monitor system using the method and device
KR20040103786A (ko) 2003-06-02 2004-12-09 펜탁스 가부시키가이샤 다초점 촬상 장치 및 다초점 촬상 장치를 가진 모바일 장치
US7596284B2 (en) 2003-07-16 2009-09-29 Hewlett-Packard Development Company, L.P. High resolution image reconstruction
US7619683B2 (en) 2003-08-29 2009-11-17 Aptina Imaging Corporation Apparatus including a dual camera module and method of using the same
JP2005099265A (ja) 2003-09-24 2005-04-14 Fujinon Corp 撮像装置および撮像方法、ならびに測距方法
JP2005122084A (ja) 2003-09-25 2005-05-12 Kyocera Corp 光素子モジュール
CN1544990A (zh) * 2003-11-12 2004-11-10 浙江大学 四镜头分色成像的超薄手机成像方法
EP1536633A1 (en) 2003-11-27 2005-06-01 Sony Corporation Photographing apparatus and method, supervising system, program and recording medium
US7746396B2 (en) * 2003-12-17 2010-06-29 Nokia Corporation Imaging device and method of creating image file
KR100557040B1 (ko) 2003-12-30 2006-03-03 엘지전자 주식회사 광 픽업 시스템
JP2005208194A (ja) 2004-01-21 2005-08-04 Konica Minolta Photo Imaging Inc 撮影装置
US7773143B2 (en) * 2004-04-08 2010-08-10 Tessera North America, Inc. Thin color camera having sub-pixel resolution
KR20050090780A (ko) 2004-03-10 2005-09-14 삼성전자주식회사 영상촬영장치
US7620265B1 (en) * 2004-04-12 2009-11-17 Equinox Corporation Color invariant image fusion of visible and thermal infrared video
EP1594321A3 (en) * 2004-05-07 2006-01-25 Dialog Semiconductor GmbH Extended dynamic range in color imagers
JP4201140B2 (ja) 2004-05-10 2008-12-24 株式会社コルグ 操作子
WO2006040687A2 (en) 2004-07-19 2006-04-20 Grandeye, Ltd. Automatically expanding the zoom capability of a wide-angle video camera
EP1780567B1 (en) 2004-07-20 2011-09-14 Five Dimension Co., Ltd. Electronic imaging device
WO2006026354A2 (en) 2004-08-25 2006-03-09 Newport Imaging Corporation Apparatus for multiple camera devices and method of operating same
US7916180B2 (en) 2004-08-25 2011-03-29 Protarius Filo Ag, L.L.C. Simultaneous multiple field of view digital cameras
US7564019B2 (en) 2005-08-25 2009-07-21 Richard Ian Olsen Large dynamic range cameras
CN101036380A (zh) * 2004-09-09 2007-09-12 诺基亚公司 创建彩色图像的方法、成像设备和成像模块
US7465107B2 (en) 2004-09-21 2008-12-16 Canon Kabushiki Kaisha Photographing apparatus and control method therefor
KR101054344B1 (ko) 2004-11-17 2011-08-04 삼성전자주식회사 박막 트랜지스터 표시판 및 그 제조 방법
US8531562B2 (en) 2004-12-03 2013-09-10 Fluke Corporation Visible light and IR combined image camera with a laser pointer
EP1669251A1 (en) 2004-12-07 2006-06-14 IEE INTERNATIONAL ELECTRONICS &amp; ENGINEERING S.A. Child seat detection system
US7688364B2 (en) 2004-12-10 2010-03-30 Ambarella, Inc. Decimating and cropping based zoom factor for a digital camera
US20060126737A1 (en) 2004-12-15 2006-06-15 International Business Machines Corporation Method, system and program product for a camera to track an object using motion vector data
KR100636969B1 (ko) 2004-12-30 2006-10-19 매그나칩 반도체 유한회사 Isp 내장형 이미지 센서 및 듀얼 카메라 시스템
US7573514B2 (en) 2005-02-03 2009-08-11 Eastman Kodak Company Digital imaging system with digital zoom warning
US7965314B1 (en) * 2005-02-09 2011-06-21 Flir Systems, Inc. Foveal camera systems and methods
US7663662B2 (en) 2005-02-09 2010-02-16 Flir Systems, Inc. High and low resolution camera systems and methods
US7646400B2 (en) 2005-02-11 2010-01-12 Creative Technology Ltd Method and apparatus for forming a panoramic image
US7256944B2 (en) 2005-02-18 2007-08-14 Eastman Kodak Company Compact image capture assembly using multiple lenses and image sensors to provide an extended zoom range
US7206136B2 (en) 2005-02-18 2007-04-17 Eastman Kodak Company Digital camera using multiple lenses and image sensors to provide an extended zoom range
US20060187322A1 (en) 2005-02-18 2006-08-24 Janson Wilbert F Jr Digital camera using multiple fixed focal length lenses and multiple image sensors to provide an extended zoom range
US7236306B2 (en) 2005-02-18 2007-06-26 Eastman Kodak Company Digital camera using an express zooming mode to provide expedited operation over an extended zoom range
US7561191B2 (en) 2005-02-18 2009-07-14 Eastman Kodak Company Camera phone using multiple lenses and image sensors to provide an extended zoom range
JP2006237914A (ja) 2005-02-24 2006-09-07 Kyocera Corp 携帯端末装置
JP2006238325A (ja) 2005-02-28 2006-09-07 Canon Inc カメラシステム
KR100658150B1 (ko) 2005-04-08 2006-12-15 삼성전기주식회사 카메라 모듈 및 이의 제작방법
JP3934151B2 (ja) 2005-06-22 2007-06-20 松下電器産業株式会社 画像生成装置および画像生成方法
KR20070005946A (ko) 2005-07-05 2007-01-11 엘지전자 주식회사 휴대 단말기용 카메라 렌즈의 위치 검출 장치
JP2007033879A (ja) 2005-07-27 2007-02-08 Sony Corp 撮像レンズ装置及び撮像装置
US7424218B2 (en) 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
JP4573724B2 (ja) 2005-08-01 2010-11-04 イーストマン コダック カンパニー 複数光学系を有する撮像装置
JP4573725B2 (ja) 2005-08-01 2010-11-04 イーストマン コダック カンパニー 複数光学系を有する撮像装置
US7964835B2 (en) * 2005-08-25 2011-06-21 Protarius Filo Ag, L.L.C. Digital cameras with direct luminance and chrominance detection
JP4188394B2 (ja) 2005-09-20 2008-11-26 フジノン株式会社 監視カメラ装置及び監視カメラシステム
WO2007044953A2 (en) 2005-10-13 2007-04-19 Rjs Technology, Inc. System and method for a high performance color filter mosaic array
US7822330B2 (en) 2005-11-14 2010-10-26 Nikon Corporation Image blur correction device and camera
JP4788953B2 (ja) 2005-11-16 2011-10-05 ソニー株式会社 撮像装置及びズームレンズ
US8238695B1 (en) 2005-12-15 2012-08-07 Grandeye, Ltd. Data reduction techniques for processing wide-angle video
US7423540B2 (en) 2005-12-23 2008-09-09 Delphi Technologies, Inc. Method of detecting vehicle-operator state
US20070177025A1 (en) 2006-02-01 2007-08-02 Micron Technology, Inc. Method and apparatus minimizing die area and module size for a dual-camera mobile device
US20090219547A1 (en) 2006-02-06 2009-09-03 Petteri Kauhanen Method and Device for Position Sensing in an Imaging System
US20090122406A1 (en) 2006-02-06 2009-05-14 Jarkko Rouvinen Optical Image Stabilizer Using Gimballed Prism
JP4579842B2 (ja) 2006-02-06 2010-11-10 イーストマン コダック カンパニー 撮像装置
US9182228B2 (en) 2006-02-13 2015-11-10 Sony Corporation Multi-lens array system and method
JP4622882B2 (ja) 2006-02-21 2011-02-02 カシオ計算機株式会社 デジタルカメラ
EP1999947B1 (en) * 2006-03-29 2012-08-29 DigitalOptics Corporation Europe Limited Image capturing device with improved image quality
US7708478B2 (en) 2006-04-13 2010-05-04 Nokia Corporation Actuator mechanism and a shutter mechanism
JP5934459B2 (ja) 2006-04-17 2016-06-15 オムニビジョン テクノロジーズ, インコーポレイテッド アレイ化撮像システムおよび関連方法
US9274807B2 (en) * 2006-04-20 2016-03-01 Qualcomm Incorporated Selective hibernation of activities in an electronic device
US7773121B1 (en) 2006-05-03 2010-08-10 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration High-resolution, continuous field-of-view (FOV), non-rotating imaging system
CN101433077B (zh) 2006-05-05 2011-03-23 诺基亚公司 具有小高度和高分辨率的光学图像记录设备
JP2007306282A (ja) 2006-05-11 2007-11-22 Citizen Electronics Co Ltd カメラモジュール
KR100749337B1 (ko) 2006-06-13 2007-08-14 삼성전자주식회사 복수의 카메라렌즈를 구비한 이동통신단말기를 이용한 촬영방법 및 장치
JP2008011123A (ja) * 2006-06-28 2008-01-17 Fujitsu Ltd 冗長なデータ通信を行う通信装置
US7737379B2 (en) 2006-07-19 2010-06-15 Witdouck Calvin J System and method for sorting larvae cocoons
US8189100B2 (en) 2006-07-25 2012-05-29 Qualcomm Incorporated Mobile device with dual digital camera sensors and methods of using the same
US7756330B2 (en) 2006-07-27 2010-07-13 Eastman Kodak Company Producing an extended dynamic range digital image
JP4875942B2 (ja) * 2006-07-31 2012-02-15 イーストマン コダック カンパニー 複数光学系を有する撮像装置
US20080030592A1 (en) 2006-08-01 2008-02-07 Eastman Kodak Company Producing digital image with different resolution portions
US7667762B2 (en) 2006-08-01 2010-02-23 Lifesize Communications, Inc. Dual sensor video camera
JP2008076485A (ja) 2006-09-19 2008-04-03 Konica Minolta Opto Inc レンズ鏡胴、及び撮像装置
JP2008096584A (ja) 2006-10-10 2008-04-24 Nikon Corp カメラ
KR101278239B1 (ko) 2006-10-17 2013-06-24 삼성전자주식회사 듀얼 렌즈 광학계 및 이를 구비하는 듀얼 렌즈 카메라
US7697053B2 (en) 2006-11-02 2010-04-13 Eastman Kodak Company Integrated display having multiple capture devices
JP4448844B2 (ja) 2006-11-22 2010-04-14 富士フイルム株式会社 複眼撮像装置
KR100871566B1 (ko) 2006-12-04 2008-12-02 삼성전자주식회사 이미지 촬상 장치의 손떨림 보상을 위한 장치 및 방법
JP4662071B2 (ja) * 2006-12-27 2011-03-30 富士フイルム株式会社 画像再生方法
US7533819B2 (en) 2007-01-31 2009-05-19 Symbol Technologies, Inc. Dual camera assembly for an imaging-based bar code reader
US7978239B2 (en) 2007-03-01 2011-07-12 Eastman Kodak Company Digital camera using multiple image sensors to provide improved temporal sampling
US7729602B2 (en) 2007-03-09 2010-06-01 Eastman Kodak Company Camera using multiple lenses and image sensors operable in a default imaging mode
US7676146B2 (en) 2007-03-09 2010-03-09 Eastman Kodak Company Camera using multiple lenses and image sensors to provide improved focusing capability
US7683962B2 (en) 2007-03-09 2010-03-23 Eastman Kodak Company Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map
US7859588B2 (en) 2007-03-09 2010-12-28 Eastman Kodak Company Method and apparatus for operating a dual lens camera to augment an image
WO2008123675A1 (en) 2007-04-06 2008-10-16 Korea Expressway Corporation Multi-area monitoring system from single cctv having a camera quadratic curved surface mirror structure and it, and unwrapping method for the same
JP5040412B2 (ja) 2007-04-18 2012-10-03 ソニー株式会社 撮像素子パッケージ、撮像素子モジュールおよびレンズ鏡筒並びに撮像装置
EP2149067A1 (en) 2007-04-19 2010-02-03 D.V.P. Technologies Ltd. Imaging system and method for use in monitoring a field of regard
US7918398B2 (en) 2007-06-04 2011-04-05 Hand Held Products, Inc. Indicia reading terminal having multiple setting imaging lens
US8390729B2 (en) 2007-09-05 2013-03-05 International Business Machines Corporation Method and apparatus for providing a video image having multiple focal lengths
US20090086074A1 (en) 2007-09-27 2009-04-02 Omnivision Technologies, Inc. Dual mode camera solution apparatus, system, and method
US8084969B2 (en) 2007-10-01 2011-12-27 Allegro Microsystems, Inc. Hall-effect based linear motor controller
KR101428042B1 (ko) 2007-10-08 2014-08-07 엘지이노텍 주식회사 차량 카메라 제어 시스템
US8752969B1 (en) 2007-10-15 2014-06-17 Arete Associates Method of operating a fast scanning mirror
JP2009109904A (ja) 2007-10-31 2009-05-21 Sony Corp レンズ鏡筒及び撮像装置
US20090122195A1 (en) 2007-11-09 2009-05-14 Van Baar Jeroen System and Method for Combining Image Sequences
US20090128644A1 (en) 2007-11-15 2009-05-21 Camp Jr William O System and method for generating a photograph
US8310587B2 (en) 2007-12-04 2012-11-13 DigitalOptics Corporation International Compact camera optics
KR20090058229A (ko) 2007-12-04 2009-06-09 삼성전기주식회사 듀얼 카메라 모듈
TW200928431A (en) 2007-12-26 2009-07-01 Delta Electronics Inc Optical actuator
US7745779B2 (en) 2008-02-08 2010-06-29 Aptina Imaging Corporation Color pixel arrays having common color filters for multiple adjacent pixels for use in CMOS imagers
US8115825B2 (en) 2008-02-20 2012-02-14 Apple Inc. Electronic device with two image sensors
CN101276415A (zh) 2008-03-03 2008-10-01 北京航空航天大学 用多定焦摄像机实现多分辨率图像采集的装置和方法
CN102036953B (zh) 2008-03-24 2015-05-06 诺华股份有限公司 基于芳基磺酰胺的基质金属蛋白酶抑制剂
US20100097444A1 (en) * 2008-10-16 2010-04-22 Peter Lablans Camera System for Creating an Image From a Plurality of Images
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
FI20085510L (fi) 2008-05-28 2009-11-29 Valtion Teknillinen Zoom-kamera -järjestely, joka käsittää useita alikameroita
JP5017184B2 (ja) 2008-06-10 2012-09-05 株式会社日立製作所 熱アシスト磁気記録ヘッド
JP4513906B2 (ja) 2008-06-27 2010-07-28 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び記録媒体
US8134589B2 (en) 2008-07-17 2012-03-13 Eastman Kodak Company Zoom by multiple image capture
KR101477178B1 (ko) 2008-07-17 2014-12-29 삼성전자주식회사 듀얼 카메라를 구비하는 휴대 단말기 및 이를 이용한 촬영방법
GB2462095A (en) 2008-07-23 2010-01-27 Snell & Wilcox Ltd Processing of images to represent a transition in viewpoint
US8237807B2 (en) 2008-07-24 2012-08-07 Apple Inc. Image capturing device with touch screen for adjusting camera settings
EP2328017A4 (en) * 2008-09-10 2011-11-02 Panasonic Corp CAMERA BODY AND PICTURE DEVICE
CN101394487B (zh) 2008-10-27 2011-09-14 华为技术有限公司 一种合成图像的方法与系统
JP5472584B2 (ja) * 2008-11-21 2014-04-16 ソニー株式会社 撮像装置
JP5230376B2 (ja) 2008-11-28 2013-07-10 三星電子株式会社 撮像装置及び撮像方法
CN101493893B (zh) * 2008-12-11 2012-01-11 中山大学 一种图像数据融合方法
JP5265336B2 (ja) 2008-12-25 2013-08-14 富士フイルム株式会社 手振れ補正装置及び光学機器
CN102334333B (zh) * 2009-01-16 2016-05-11 双光圈国际株式会社 改善成像系统的景深
US20100202068A1 (en) 2009-02-06 2010-08-12 Panasonic Corporation Lens barrel structure
US8749635B2 (en) * 2009-06-03 2014-06-10 Flir Systems, Inc. Infrared camera systems and methods for dual sensor applications
JP2010204341A (ja) 2009-03-03 2010-09-16 Nikon Corp カメラ
US8602896B2 (en) * 2009-03-05 2013-12-10 Igt Methods and regulated gaming machines including game gadgets configured for player interaction using service oriented subscribers and providers
CN101833157A (zh) 2009-03-13 2010-09-15 鸿富锦精密工业(深圳)有限公司 相机模组
RU2486707C1 (ru) * 2009-03-17 2013-06-27 Хуавэй Текнолоджиз Ко., Лтд. Способ, устройство и система для распределения мощности нисходящей линии связи
JP2012521673A (ja) * 2009-03-19 2012-09-13 フレクストロニクス エイピー エルエルシー デュアルセンサカメラ
JP5121769B2 (ja) 2009-03-30 2013-01-16 富士フイルム株式会社 レンズユニット
KR101552481B1 (ko) 2009-04-13 2015-09-21 삼성전자 주식회사 줌 렌즈 모듈
WO2010122841A1 (ja) 2009-04-22 2010-10-28 コニカミノルタオプト株式会社 レンズ鏡胴、撮像装置及びレンズ鏡胴の製造方法
US8553106B2 (en) 2009-05-04 2013-10-08 Digitaloptics Corporation Dual lens digital zoom
US9843743B2 (en) * 2009-06-03 2017-12-12 Flir Systems, Inc. Infant monitoring systems and methods using thermal imaging
US8253832B2 (en) * 2009-06-09 2012-08-28 Omnivision Technologies, Inc. Interpolation for four-channel color filter array
CN102428405A (zh) 2009-06-16 2012-04-25 英特尔公司 手持装置中的摄像机应用
US20100321494A1 (en) 2009-06-18 2010-12-23 Theia Technologies, Llc Compact dome camera
US9215385B2 (en) 2009-06-22 2015-12-15 Ominivision Technologies, Inc. System and method for an image sensor operable in multiple video standards
WO2011009108A2 (en) 2009-07-17 2011-01-20 Universal Robotics, Inc. System and method for automatic calibration of stereo images
JP5846346B2 (ja) 2009-08-21 2016-01-20 ミツミ電機株式会社 カメラの手振れ補正装置
JP2011055246A (ja) 2009-09-02 2011-03-17 Panasonic Corp 望遠撮像装置
CN201514511U (zh) 2009-09-08 2010-06-23 华晶科技股份有限公司 潜望式镜头结构
KR101613928B1 (ko) 2009-09-09 2016-04-20 엘지전자 주식회사 이동 단말기
ES2739036T3 (es) 2009-09-14 2020-01-28 Viion Systems Inc Cámara de análisis de vídeo de resolución dual sacádica
US8194165B2 (en) * 2009-09-30 2012-06-05 Truesense Imaging, Inc. Methods for capturing and reading out images from an image sensor
KR101617289B1 (ko) 2009-09-30 2016-05-02 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
JP5513834B2 (ja) 2009-10-13 2014-06-04 台湾東電化股▲ふん▼有限公司 レンズ駆動装置
CA3043204C (en) 2009-11-19 2021-08-31 Esight Corp. Apparatus and method for a dynamic "region of interest" in a display system
KR101081630B1 (ko) 2009-11-20 2011-11-09 엘지이노텍 주식회사 보이스 코일 모터
EP2502115A4 (en) 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
US8400555B1 (en) 2009-12-01 2013-03-19 Adobe Systems Incorporated Focused plenoptic camera employing microlenses with different focal lengths
US20110128288A1 (en) 2009-12-02 2011-06-02 David Petrou Region of Interest Selector for Visual Queries
JP5310539B2 (ja) 2009-12-28 2013-10-09 富士通株式会社 メール送受信装置、メール送受信方法及びメール送受信プログラム
KR20110080590A (ko) 2010-01-06 2011-07-13 삼성테크윈 주식회사 흔들림 보정 모듈 및 이를 구비하는 카메라 모듈
WO2011094292A1 (en) 2010-01-28 2011-08-04 Pathway Innovations And Technologies, Inc. Document imaging system having camera-scanner apparatus and personal computer based processing software
JP5728673B2 (ja) * 2010-02-19 2015-06-03 デュアル・アパーチャー・インターナショナル・カンパニー・リミテッド 多開口画像データの処理
JP5445235B2 (ja) 2010-03-09 2014-03-19 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
WO2011112633A1 (en) 2010-03-09 2011-09-15 Flir Systems, Inc. Imager with multiple sensor arrays
JP5079836B2 (ja) 2010-03-24 2012-11-21 台灣東電化股▲ふん▼有限公司 レンズのオートフォーカスモジュールの手ブレ防止構造
JP2011205374A (ja) 2010-03-25 2011-10-13 Fujifilm Corp 表示装置
JP4783465B1 (ja) 2010-03-26 2011-09-28 富士フイルム株式会社 撮像装置及び表示装置
TWI478828B (zh) 2010-03-26 2015-04-01 Hon Hai Prec Ind Co Ltd 車載影像系統及安裝有該車載影像系統的汽車
US8456518B2 (en) 2010-03-31 2013-06-04 James Cameron & Vincent Pace Stereoscopic camera with automatic obstruction removal
US8547389B2 (en) 2010-04-05 2013-10-01 Microsoft Corporation Capturing image structure detail from a first image and color from a second image
US9001227B2 (en) 2010-04-05 2015-04-07 Qualcomm Incorporated Combining data from multiple image sensors
CN102215373B (zh) 2010-04-07 2014-12-24 苹果公司 会议中的显示调整
US8446484B2 (en) 2010-04-21 2013-05-21 Nokia Corporation Image processing architecture with pre-scaler
US20130300875A1 (en) * 2010-04-23 2013-11-14 Flir Systems Ab Correction of image distortion in ir imaging
EP2567287B1 (en) 2010-05-03 2019-08-21 InVisage Technologies, Inc. Devices and methods for high-resolution image and video capture
US20130250150A1 (en) 2010-05-03 2013-09-26 Michael R. Malone Devices and methods for high-resolution image and video capture
CN101853500A (zh) * 2010-05-13 2010-10-06 西北工业大学 一种彩色多聚焦图像融合方法
US8565522B2 (en) 2010-05-21 2013-10-22 Seiko Epson Corporation Enhancing color images
DE102010017057B4 (de) 2010-05-21 2015-03-19 Jena-Optronik Gmbh Kamera mit mehreren Festbrennweiten
WO2011155809A2 (ko) * 2010-06-11 2011-12-15 (주)하이소닉 소형 카메라 엑츄에이터 및 소형 입체영상 촬영장치
KR20130094294A (ko) 2010-07-13 2013-08-23 램 스리칸쓰 밀래이 스틸 사진용의 가변 3차원 카메라 어셈블리
US9137574B2 (en) * 2010-07-28 2015-09-15 Yahoo! Inc. Method or system to predict media content preferences
US8493482B2 (en) 2010-08-18 2013-07-23 Apple Inc. Dual image sensor image processing system and method
US8896655B2 (en) 2010-08-31 2014-11-25 Cisco Technology, Inc. System and method for providing depth adaptive video conferencing
JP5609467B2 (ja) 2010-09-15 2014-10-22 株式会社リコー 撮像装置及び撮像方法
US8780251B2 (en) 2010-09-20 2014-07-15 Canon Kabushiki Kaisha Image capture with focus adjustment
US20120075489A1 (en) 2010-09-24 2012-03-29 Nishihara H Keith Zoom camera image blending technique
US20140192238A1 (en) 2010-10-24 2014-07-10 Linx Computational Imaging Ltd. System and Method for Imaging and Image Processing
US9204026B2 (en) 2010-11-01 2015-12-01 Lg Electronics Inc. Mobile terminal and method of controlling an image photographing therein
JP5809925B2 (ja) * 2010-11-02 2015-11-11 オリンパス株式会社 画像処理装置、それを備えた画像表示装置及び撮像装置、画像処理方法、並びに画像処理プログラム
JP5719148B2 (ja) 2010-11-10 2015-05-13 キヤノン株式会社 撮像装置及びその制御方法、プログラム
KR101731346B1 (ko) 2010-11-12 2017-04-28 엘지전자 주식회사 멀티미디어 장치의 디스플레이화면 제공 방법 및 그에 따른 멀티미디어 장치
WO2012075250A1 (en) 2010-12-01 2012-06-07 Magna Electronics Inc. System and method of establishing a multi-camera image using pixel remapping
JP5589823B2 (ja) 2010-12-21 2014-09-17 株式会社リコー ステレオカメラの校正装置および校正方法
US8274552B2 (en) 2010-12-27 2012-09-25 3Dmedia Corporation Primary and auxiliary image capture devices for image processing and related methods
JP5654867B2 (ja) 2010-12-27 2015-01-14 パナソニックIpマネジメント株式会社 映像信号処理装置及び映像信号処理方法
US10200671B2 (en) 2010-12-27 2019-02-05 3Dmedia Corporation Primary and auxiliary image capture devices for image processing and related methods
JP2012141442A (ja) * 2010-12-28 2012-07-26 Sony Corp レンズ保護装置、レンズユニット及び撮像装置
US8824823B1 (en) 2011-01-20 2014-09-02 Verint Americas Inc. Increased quality of image objects based on depth in scene
US8803990B2 (en) 2011-01-25 2014-08-12 Aptina Imaging Corporation Imaging system with multiple sensors for producing high-dynamic-range images
US8520080B2 (en) 2011-01-31 2013-08-27 Hand Held Products, Inc. Apparatus, system, and method of use of imaging assembly on mobile terminal
JP5814566B2 (ja) 2011-02-28 2015-11-17 オリンパス株式会社 撮像装置、撮像方法及び撮像装置の制御プログラム
EP2684026A4 (en) 2011-03-08 2014-09-10 Spectral Instr Imaging Llc IMAGING SYSTEM COMPRISING PRIMARY AND AUXILIARY CAMERA SYSTEMS
JP5708097B2 (ja) 2011-03-18 2015-04-30 株式会社リコー 撮像装置、撮像方法、及び撮像プログラム
US9172856B2 (en) 2011-03-29 2015-10-27 Microsoft Technology Licensing, Llc Folded imaging path camera
CN102739949A (zh) 2011-04-01 2012-10-17 张可伦 多镜头相机和多镜头装置的控制方法
EP2523450B1 (en) 2011-05-10 2014-05-14 HTC Corporation Handheld electronic device with dual image capturing method and computer program product
US8553129B2 (en) 2011-05-10 2013-10-08 Htc Corporation Handheld electronic device with two lens modules, dual image capturing method applying for the handheld electronic device, and computer program product for load into the handheld electronic device
JP2012253531A (ja) * 2011-06-02 2012-12-20 Sony Corp 撮像装置、撮像方法および画像処理装置
CN102298769A (zh) * 2011-06-11 2011-12-28 浙江理工大学 基于色彩传递的夜视弱光图像与红外图像的彩色融合方法
KR101224790B1 (ko) 2011-06-14 2013-01-21 삼성전기주식회사 영상 촬상 장치
WO2012176355A1 (ja) * 2011-06-23 2012-12-27 パナソニック株式会社 撮像装置
US8605199B2 (en) 2011-06-28 2013-12-10 Canon Kabushiki Kaisha Adjustment of imaging properties for an imaging assembly having light-field optics
WO2013006811A1 (en) 2011-07-06 2013-01-10 Flextronics Ap, Llc Camera module with magnetic shielding and method of manufacture
JP5821356B2 (ja) 2011-07-15 2015-11-24 ミツミ電機株式会社 レンズ駆動装置
US9270875B2 (en) 2011-07-20 2016-02-23 Broadcom Corporation Dual image capture processing
JP6103840B2 (ja) 2011-07-28 2017-03-29 キヤノン株式会社 補正光学装置及び撮像装置
US8891185B2 (en) 2011-08-16 2014-11-18 Flextronics Ap, Llc Camera module and method for manufacturing same
US8988564B2 (en) 2011-09-09 2015-03-24 Apple Inc. Digital camera with light splitter
EP2592823A3 (en) 2011-10-12 2013-06-19 Canon Kabushiki Kaisha Image-capturing device
US8947627B2 (en) 2011-10-14 2015-02-03 Apple Inc. Electronic devices having displays with openings
JP5809936B2 (ja) 2011-11-08 2015-11-11 オリンパス株式会社 撮像装置
JP5884421B2 (ja) 2011-11-14 2016-03-15 ソニー株式会社 画像処理装置、画像処理装置の制御方法およびプログラム
JP5741395B2 (ja) 2011-11-16 2015-07-01 コニカミノルタ株式会社 撮像装置
WO2013080552A1 (ja) * 2011-11-30 2013-06-06 パナソニック株式会社 撮像装置及び撮像システム
JP2013120262A (ja) 2011-12-07 2013-06-17 Panasonic Corp 撮像装置
AU2011253982B9 (en) 2011-12-12 2015-07-16 Canon Kabushiki Kaisha Method, system and apparatus for determining a subject and a distractor in an image
TWI537670B (zh) 2011-12-13 2016-06-11 鴻海精密工業股份有限公司 雙鏡頭拍攝裝置
US8970655B2 (en) 2011-12-16 2015-03-03 Polycom, Inc. Reflective and refractive solutions to providing direct eye contact videoconferencing
KR101300353B1 (ko) 2011-12-22 2013-08-28 삼성전기주식회사 손떨림 보정장치
US8619148B1 (en) 2012-01-04 2013-12-31 Audience, Inc. Image correction after combining images from multiple cameras
WO2013105012A2 (en) 2012-01-12 2013-07-18 Corephotonics Ltd. Electromagnetic actuators for digital cameras
JP2013143753A (ja) 2012-01-12 2013-07-22 Olympus Corp 撮像装置
KR101993222B1 (ko) 2012-01-19 2019-06-26 엘지전자 주식회사 디스플레이 장치
KR20130090225A (ko) 2012-02-03 2013-08-13 삼성전자주식회사 카메라 이미지 센서의 동작 모드 변경 방법
GB2499200B (en) 2012-02-07 2014-12-17 Canon Kk Method and device for transitioning between an image of a first video sequence and an image for a second video sequence
JP2013183353A (ja) * 2012-03-02 2013-09-12 Toshiba Corp 画像処理装置
US8866943B2 (en) 2012-03-09 2014-10-21 Apple Inc. Video camera providing a composite video sequence
KR20130104764A (ko) 2012-03-15 2013-09-25 엘지전자 주식회사 이동단말기
JP2013205550A (ja) 2012-03-28 2013-10-07 Olympus Corp 位置検出装置及び位置制御装置
US20130258044A1 (en) * 2012-03-30 2013-10-03 Zetta Research And Development Llc - Forc Series Multi-lens camera
US9029759B2 (en) 2012-04-12 2015-05-12 Nan Chang O-Film Optoelectronics Technology Ltd Compact camera modules with features for reducing Z-height and facilitating lens alignment and methods for manufacturing the same
JP2013238848A (ja) 2012-04-20 2013-11-28 Hoya Corp 撮像装置
WO2013163579A2 (en) 2012-04-27 2013-10-31 Adobe Systems Incorporated Automatic adjustment of images
IL219639A (en) 2012-05-08 2016-04-21 Israel Aerospace Ind Ltd Remote object tracking
CN102722321A (zh) 2012-05-22 2012-10-10 中兴通讯股份有限公司 双摄像头切换的方法及装置
US8953084B2 (en) 2012-05-30 2015-02-10 Digimarc Corporation Plural focal-plane imaging
US20130321675A1 (en) * 2012-05-31 2013-12-05 Apple Inc. Raw scaler with chromatic aberration correction
WO2013182873A1 (en) 2012-06-08 2013-12-12 Nokia Corporation A multi-frame image calibrator
WO2013186804A1 (ja) 2012-06-11 2013-12-19 株式会社ソニー・コンピュータエンタテインメント 画像生成装置および画像生成方法
US8941948B2 (en) 2012-06-18 2015-01-27 HGST Netherlands B.V. Perpendicular recording head with leading bump in the main pole having narrow leading gap (LG)
KR101991719B1 (ko) 2012-06-29 2019-06-21 엘지이노텍 주식회사 카메라 모듈
DE102012211383A1 (de) 2012-06-29 2014-01-02 Continental Automotive Gmbh Magnetfelderzeuger und Sensorvorrichtung für den Einsatz beim Ermitteln eines Rotationswinkels
US9134503B2 (en) 2012-07-06 2015-09-15 Apple Inc. VCM OIS actuator module
EP2874003B1 (en) 2012-07-12 2017-12-20 Sony Corporation Image shake correction device and image shake correction method and image pickup device
WO2014008939A1 (en) 2012-07-12 2014-01-16 Dual Aperture, Inc. Gesture-based user interface
KR102051501B1 (ko) 2012-07-26 2019-12-03 엘지이노텍 주식회사 카메라 모듈
US9007520B2 (en) 2012-08-10 2015-04-14 Nanchang O-Film Optoelectronics Technology Ltd Camera module with EMI shield
US9398264B2 (en) 2012-10-19 2016-07-19 Qualcomm Incorporated Multi-camera system using folded optics
CN104937920A (zh) 2012-10-31 2015-09-23 因维萨热技术公司 扩展视场图像和视频捕获
CN105122129A (zh) 2012-11-08 2015-12-02 威动光有限公司 微型光学变焦镜头
JP6152386B2 (ja) 2012-11-16 2017-06-21 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America カメラ駆動装置
WO2014083489A1 (en) 2012-11-28 2014-06-05 Corephotonics Ltd. High-resolution thin multi-aperture imaging systems
KR101960493B1 (ko) 2012-12-12 2019-07-15 삼성전자주식회사 광학조절장치
CN103024272A (zh) 2012-12-14 2013-04-03 广东欧珀移动通信有限公司 移动终端的双摄像头控制装置、方法、系统以及移动终端
US9282228B2 (en) 2013-01-05 2016-03-08 The Lightco Inc. Camera methods and apparatus using optical chain modules which alter the direction of received light
US20140313316A1 (en) 2013-01-30 2014-10-23 SeeScan, Inc. Adjustable variable resolution inspection systems and methods using multiple image sensors
US20140218587A1 (en) 2013-02-07 2014-08-07 Motorola Mobility Llc Double sided camera module
US20190215440A1 (en) * 2018-01-10 2019-07-11 Duelight Llc Systems and methods for tracking a region using an image sensor
US9293500B2 (en) * 2013-03-01 2016-03-22 Apple Inc. Exposure control for image sensors
WO2014152855A2 (en) 2013-03-14 2014-09-25 Geerds Joergen Camera system
US9851803B2 (en) 2013-03-15 2017-12-26 Eyecam, LLC Autonomous computing and telecommunications head-up displays glasses
JP6214206B2 (ja) 2013-05-13 2017-10-18 キヤノン株式会社 撮像装置、制御方法及びプログラム
JP6100089B2 (ja) 2013-05-17 2017-03-22 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
DE102013209829B4 (de) 2013-05-27 2016-04-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Optische Struktur mit daran angeordneten Stegen und Verfahren zur Herstellung derselben
CN203406908U (zh) 2013-06-03 2014-01-22 王傲立 手机用旋转摄像头
KR102166262B1 (ko) 2013-06-10 2020-10-15 삼성전자주식회사 카메라 렌즈 어셈블리
EP3008890A4 (en) 2013-06-13 2016-05-04 Corephotonics Ltd ZOOM OF A DIGITAL CAMERA WITH DUAL IRIS
JP6227294B2 (ja) 2013-06-20 2017-11-08 惠州市大亜湾永昶電子工業有限公司 手振れ抑制機能付きレンズ駆動装置
US9432575B2 (en) 2013-06-28 2016-08-30 Canon Kabushiki Kaisha Image processing apparatus
TWI546570B (zh) 2013-07-01 2016-08-21 台灣東電化股份有限公司 可切換光路徑之光學防震機構
WO2015001440A1 (en) 2013-07-04 2015-01-08 Corephotonics Ltd. Miniature telephoto lens assembly
US9137447B2 (en) 2013-07-31 2015-09-15 Panasonic Intellectual Property Management Co., Ltd. Imaging apparatus that generates an image including an emphasized in-focus part of a captured image
CN108718376B (zh) 2013-08-01 2020-08-14 核心光电有限公司 具有自动聚焦的纤薄多孔径成像系统及其使用方法
US9285566B2 (en) 2013-08-08 2016-03-15 Apple Inc. Mirror tilt actuation
US9494769B2 (en) 2013-09-12 2016-11-15 Hong Kong Applied Science And Technology Research Institute Co. Ltd. Multi-lens imaging module and actuator with auto-focus adjustment
WO2015041496A1 (ko) 2013-09-23 2015-03-26 엘지이노텍 주식회사 카메라 모듈 및 그 제작 방법
US9615012B2 (en) 2013-09-30 2017-04-04 Google Inc. Using a second camera to adjust settings of first camera
TW201515433A (zh) 2013-10-14 2015-04-16 Etron Technology Inc 影像校正系統和立體照相機的校正方法
US9736365B2 (en) 2013-10-26 2017-08-15 Light Labs Inc. Zoom related methods and apparatus
KR101528626B1 (ko) 2013-11-04 2015-06-17 서경진 원형베일러의 개량형 롤베일 입상배출장치
US9344626B2 (en) 2013-11-18 2016-05-17 Apple Inc. Modeless video and still frame capture using interleaved frames of video and still resolutions
US9509979B2 (en) 2013-11-26 2016-11-29 Mobileye Vision Technologies Ltd. Stereo auto-calibration from structure-from-motion
US8730299B1 (en) * 2013-11-27 2014-05-20 Dmitry Kozko Surround image mode for multi-lens mobile devices
CN104680501B (zh) 2013-12-03 2018-12-07 华为技术有限公司 图像拼接的方法及装置
US9215377B2 (en) 2013-12-04 2015-12-15 Nokia Technologies Oy Digital zoom with sensor mode change
CN105339840B (zh) 2013-12-06 2019-06-14 华为终端有限公司 双镜头设备的拍照方法及双镜头设备
JP6263623B2 (ja) 2013-12-06 2018-01-17 華為終端(東莞)有限公司 画像生成方法及びデュアルレンズ装置
WO2015081562A1 (zh) 2013-12-06 2015-06-11 华为终端有限公司 一种终端及图像处理方法、图像采集方法
EP3067746B1 (en) 2013-12-06 2019-08-21 Huawei Device Co., Ltd. Photographing method for dual-camera device and dual-camera device
US9538096B2 (en) 2014-01-27 2017-01-03 Raytheon Company Imaging system and methods with variable lateral magnification
WO2015124966A1 (en) 2014-02-19 2015-08-27 Corephotonics Ltd. Magnetic shielding between voice coil motors in a dual-aperture camera
KR102128468B1 (ko) 2014-02-19 2020-06-30 삼성전자주식회사 복수의 이미지 신호 프로세서들을 포함하는 이미지 처리 장치 및 이미지 처리 방법
DE102014203189A1 (de) 2014-02-21 2015-08-27 Carl Zeiss Smt Gmbh Spiegel-Array
TW201533514A (zh) 2014-02-27 2015-09-01 Tdk Taiwan Corp 相機模組的反射鏡結構
US9557627B2 (en) 2014-03-07 2017-01-31 Apple Inc. Folded camera lens systems
US9316810B2 (en) 2014-03-07 2016-04-19 Apple Inc. Folded telephoto camera lens system
CN103841404A (zh) 2014-03-18 2014-06-04 江西省一元数码科技有限公司 一种新型三维影像拍摄模组
US20150271471A1 (en) 2014-03-19 2015-09-24 Htc Corporation Blocking detection method for camera and electronic apparatus with cameras
KR102214193B1 (ko) 2014-03-25 2021-02-09 삼성전자 주식회사 깊이 카메라 장치, 그것을 구비한 3d 영상 디스플레이 시스템 및 그 제어방법
US9383550B2 (en) 2014-04-04 2016-07-05 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
US9618770B2 (en) 2014-04-11 2017-04-11 Samsung Electro-Mechanics Co., Ltd. Camera module with function of auto-focus and image stabilize
KR101771778B1 (ko) 2014-04-11 2017-08-25 삼성전기주식회사 카메라 모듈
CN105024516B (zh) 2014-04-30 2017-12-01 光宝电子(广州)有限公司 音圈马达阵列模块
EP3099044B1 (en) 2014-05-15 2018-12-26 Huawei Technologies Co. Ltd. Multi-frame noise reduction method and terminal
US20150334309A1 (en) 2014-05-16 2015-11-19 Htc Corporation Handheld electronic apparatus, image capturing apparatus and image capturing method thereof
US9360671B1 (en) 2014-06-09 2016-06-07 Google Inc. Systems and methods for image zoom
US9392188B2 (en) 2014-08-10 2016-07-12 Corephotonics Ltd. Zoom dual-aperture camera with folded lens
TW201632949A (zh) 2014-08-29 2016-09-16 伊奧克里公司 捕捉在一可攜式電子器件上之影像之影像轉向
JP2016057468A (ja) 2014-09-10 2016-04-21 Hoya株式会社 屈曲撮像装置
KR102032882B1 (ko) 2014-09-30 2019-10-16 후아웨이 테크놀러지 컴퍼니 리미티드 자동 포커싱 방법, 장치 및 전자 장치
CN107077046A (zh) 2014-10-20 2017-08-18 肖特玻璃科技(苏州)有限公司 用于相机模块的光学系统、具有光学系统的相机模块和制造光学系统的方法
WO2016081567A1 (en) 2014-11-19 2016-05-26 Orlo James Fiske Thin optical system and camera
KR102287013B1 (ko) 2014-11-25 2021-08-06 삼성디스플레이 주식회사 박막 트랜지스터, 이를 포함하는 유기 발광 표시 장치 및 그 제조 방법
JP6622503B2 (ja) 2014-11-25 2019-12-18 日本放送協会 カメラモデルパラメータ推定装置及びそのプログラム
JP6483418B2 (ja) 2014-11-27 2019-03-13 エイブリック株式会社 ホールセンサおよびホールセンサの温度によるオフセットの補償方法
US10634867B2 (en) 2014-11-28 2020-04-28 Samsung Electro-Mechanics Co., Ltd. Camera module
KR102120840B1 (ko) 2014-12-22 2020-06-09 니혼덴산가부시키가이샤 위치 추정 방법, 위치 추정 장치 및 위치 제어 장치
US9286680B1 (en) 2014-12-23 2016-03-15 Futurewei Technologies, Inc. Computational multi-camera adjustment for smooth view switching and zooming
US11019330B2 (en) 2015-01-19 2021-05-25 Aquifi, Inc. Multiple camera system with auto recalibration
US9800798B2 (en) 2015-02-13 2017-10-24 Qualcomm Incorporated Systems and methods for power optimization for imaging devices with dual cameras
US9798135B2 (en) 2015-02-16 2017-10-24 Apple Inc. Hybrid MEMS scanning module
US9591237B2 (en) 2015-04-10 2017-03-07 Qualcomm Incorporated Automated generation of panning shots
CN111175935B (zh) 2015-04-16 2022-02-08 核心光电有限公司 紧凑型折叠式相机中的自动对焦和光学图像稳定
US9485432B1 (en) 2015-04-29 2016-11-01 Uurmi Systems Private Limited Methods, systems and apparatuses for dual-camera based zooming
US20160353012A1 (en) 2015-05-25 2016-12-01 Htc Corporation Zooming control method for camera and electronic apparatus with camera
CN105847662A (zh) 2015-06-19 2016-08-10 维沃移动通信有限公司 一种基于移动终端的运动物体拍摄方法和移动终端
US10291842B2 (en) 2015-06-23 2019-05-14 Samsung Electronics Co., Ltd. Digital photographing apparatus and method of operating the same
CN111812910B (zh) 2015-06-24 2021-05-11 核心光电有限公司 折叠式相机模块
CN105827903A (zh) 2015-06-26 2016-08-03 维沃移动通信有限公司 摄像头模组和移动终端
US9863789B2 (en) 2015-06-30 2018-01-09 Ford Global Technologies, Llc Rotating camera systems and methods
CN106709899B (zh) 2015-07-15 2020-06-02 华为终端有限公司 双摄像头相对位置计算方法、装置和设备
KR102253997B1 (ko) 2015-08-13 2021-05-20 코어포토닉스 리미티드 비디오 지원 및 스위칭/비스위칭 동적 제어 기능이 있는 듀얼-애퍼처 줌 카메라
EP3207301A4 (en) 2015-08-14 2018-05-09 SZ DJI Osmo Technology Co., Ltd. Gimbal having parallel stability mechanism
US20170070731A1 (en) 2015-09-04 2017-03-09 Apple Inc. Single And Multi-Camera Calibration
KR101993077B1 (ko) 2015-09-06 2019-06-25 코어포토닉스 리미티드 소형의 접이식 카메라의 롤 보정에 의한 자동 초점 및 광학식 손떨림 방지
US10382698B2 (en) 2015-09-30 2019-08-13 Apple Inc. Mobile zoom using multiple optical image stabilization cameras
KR101858694B1 (ko) 2015-11-03 2018-06-27 엘지전자 주식회사 차량 및 그 제어방법
KR20170075442A (ko) 2015-12-23 2017-07-03 삼성전자주식회사 촬상 장치 모듈, 이를 포함하는 사용자 단말 장치 및 촬상 장치 모듈의 작동 방법
KR102433623B1 (ko) 2015-12-29 2022-08-18 코어포토닉스 리미티드 자동 조정가능 텔레 시야(fov)를 갖는 듀얼-애퍼처 줌 디지털 카메라
CN205301703U (zh) 2016-01-19 2016-06-08 西安励德微系统科技有限公司 一种激光光幕投影扫描装置
JP6508532B2 (ja) 2016-02-17 2019-05-08 新シコー科技株式会社 レンズ駆動装置、カメラ装置及び電子機器
US9843736B2 (en) 2016-02-26 2017-12-12 Essential Products, Inc. Image capture with a camera integrated display
KR20170105236A (ko) 2016-03-09 2017-09-19 엘지전자 주식회사 손떨림 보정 장치
KR20170113066A (ko) 2016-03-24 2017-10-12 삼성전자주식회사 디스플레이를 가진 전자 장치 및 그의 이미지 표시 방법
KR20170112491A (ko) 2016-03-31 2017-10-12 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN107925717B (zh) 2016-05-30 2020-10-27 核心光电有限公司 旋转滚珠引导音圈电动机
KR102657464B1 (ko) 2016-07-07 2024-04-12 코어포토닉스 리미티드 폴디드 옵틱용 선형 볼 가이드 보이스 코일 모터
US10303042B2 (en) 2016-07-12 2019-05-28 Tdk Taiwan Corp. Lens driving module
CN111580239B (zh) 2016-07-12 2022-07-12 台湾东电化股份有限公司 镜头驱动模块
TWM533229U (en) 2016-08-26 2016-12-01 Largan Precision Co Ltd Optical path folding element, imaging lens module and electronic device
CA3037378C (en) 2016-09-19 2023-03-07 Tau Technologies, LLC Multi-camera imaging systems
US10516773B2 (en) 2016-10-13 2019-12-24 Samsung Electro-Mechanics Co., Ltd. Camera module and portable electronic device including the same
KR102609464B1 (ko) 2016-10-18 2023-12-05 삼성전자주식회사 영상을 촬영하는 전자 장치
US9860456B1 (en) * 2016-11-11 2018-01-02 Motorola Mobility Llc Bayer-clear image fusion for dual camera
CN106603765B (zh) 2016-12-20 2020-03-17 Oppo广东移动通信有限公司 支架组件及移动终端
CN106534655B (zh) 2017-01-11 2019-04-16 Oppo广东移动通信有限公司 摄像头模组及移动终端
US10884321B2 (en) 2017-01-12 2021-01-05 Corephotonics Ltd. Compact folded camera
KR102140582B1 (ko) 2017-04-28 2020-08-03 자화전자(주) 다축 구조의 반사계 구동장치
US10334149B2 (en) 2017-02-23 2019-06-25 Qualcomm Incorporated Adjustment for cameras for low power mode operation
CN114137790A (zh) 2017-03-15 2022-03-04 核心光电有限公司 具有全景扫瞄范围的系统、移动电子装置及其方法
KR102426728B1 (ko) 2017-04-10 2022-07-29 삼성전자주식회사 포커스 제어 방법 및 이를 지원하는 전자 장치
JP6967715B2 (ja) 2017-04-18 2021-11-17 パナソニックIpマネジメント株式会社 カメラ校正方法、カメラ校正プログラム及びカメラ校正装置
KR102390184B1 (ko) 2017-04-26 2022-04-25 삼성전자주식회사 전자 장치 및 전자 장치의 영상 표시 방법
WO2018217951A1 (en) 2017-05-24 2018-11-29 Camplex, Inc. Surgical visualization systems and displays
US11190702B2 (en) 2017-09-05 2021-11-30 Sony Corporation Image-capturing apparatus
US20190100156A1 (en) 2017-09-29 2019-04-04 GM Global Technology Operations LLC System and method for controlling a display
CN107682489B (zh) 2017-11-20 2019-11-19 珠海市魅族科技有限公司 一种移动终端和移动终端的显示屏控制方法
EP3513110B1 (en) 2017-11-23 2023-08-23 Corephotonics Ltd. Compact folded camera structure
US10600157B2 (en) 2018-01-05 2020-03-24 Qualcomm Incorporated Motion blur simulation
US11294105B2 (en) 2018-01-25 2022-04-05 Tdk Taiwan Corp. Optical system
EP3822588B1 (en) 2018-04-23 2022-09-07 Corephotonics Ltd. An optical-path folding-element with an extended two degree of freedom rotation range
US11055866B2 (en) 2018-10-29 2021-07-06 Samsung Electronics Co., Ltd System and method for disparity estimation using cameras with different fields of view
CN109729266A (zh) 2018-12-25 2019-05-07 努比亚技术有限公司 一种图像拍摄方法、终端及计算机可读存储介质
DE102019128781A1 (de) * 2019-10-24 2021-04-29 Leica Camera Aktiengesellschaft Verfahren zur Erzeugung eines Ausgabesignals eines PDAF-Bildpunkts

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI399975B (zh) * 2008-02-01 2013-06-21 Omnivision Tech Inc 藉由多孔徑成像系統捕捉的影像之融合
CN102037717A (zh) * 2008-05-20 2011-04-27 派力肯成像公司 使用具有异构成像器的单片相机阵列的图像拍摄和图像处理
WO2010116367A1 (en) * 2009-04-07 2010-10-14 Nextvision Stabilized Systems Ltd Continuous electronic zoom for an imaging system with multiple imaging devices having different fixed fov
CN103229509A (zh) * 2010-02-19 2013-07-31 双光圈股份有限公司 处理多孔径像数据
CN102511013A (zh) * 2010-07-23 2012-06-20 索尼公司 摄像装置及其控制方法和程序
CN102982518A (zh) * 2012-11-06 2013-03-20 扬州万方电子技术有限责任公司 红外与可见光动态图像的融合方法及装置

Also Published As

Publication number Publication date
IL243776B (en) 2018-06-28
US20180278831A1 (en) 2018-09-27
WO2015015383A2 (en) 2015-02-05
EP3028443A2 (en) 2016-06-08
US20190149721A1 (en) 2019-05-16
CN105917641A (zh) 2016-08-31
CN108989648B (zh) 2021-01-15
CN108718376A (zh) 2018-10-30
US20180278832A1 (en) 2018-09-27
CN109120823A (zh) 2019-01-01
IL291274B2 (en) 2023-05-01
IL276581B (en) 2021-10-31
IL259908A (en) 2018-08-30
WO2015015383A3 (en) 2016-07-07
CN108989648A (zh) 2018-12-11
CN109120823B (zh) 2020-07-14
IL291274B1 (en) 2023-01-01
CN108989649A (zh) 2018-12-11
US20170126959A1 (en) 2017-05-04
CN105917641B (zh) 2018-10-19
US20230022168A1 (en) 2023-01-26
US20230328374A1 (en) 2023-10-12
CN109246339A (zh) 2019-01-18
CN109246339B (zh) 2020-10-23
US20200275012A1 (en) 2020-08-27
IL291274A (en) 2022-05-01
IL259908B (en) 2020-08-31
US11470235B2 (en) 2022-10-11
US10250797B2 (en) 2019-04-02
US10469735B2 (en) 2019-11-05
US9998653B2 (en) 2018-06-12
IL276581A (en) 2020-09-30
CN108989649B (zh) 2021-03-19
US10694094B2 (en) 2020-06-23
US10084953B1 (en) 2018-09-25
US20160182821A1 (en) 2016-06-23
IL243776A0 (en) 2016-07-31
US9571731B2 (en) 2017-02-14
US20190222747A1 (en) 2019-07-18
US11716535B2 (en) 2023-08-01
US20240080556A1 (en) 2024-03-07
US11856291B2 (en) 2023-12-26

Similar Documents

Publication Publication Date Title
CN108718376B (zh) 具有自动聚焦的纤薄多孔径成像系统及其使用方法
CN108141571B (zh) 无掩模相位检测自动聚焦
JP5901246B2 (ja) 撮像装置
JP5606208B2 (ja) 焦点検出装置および撮像装置
JP2016038414A (ja) 焦点検出装置およびその制御方法、並びに撮像装置
CN114424516A (zh) 图像处理装置、图像处理方法、摄像装置和程序
JP2015194736A (ja) 撮像装置およびその制御方法
JP2007235862A (ja) 撮像装置
US20220392092A1 (en) Image processing apparatus, image processing method, and storage medium
JP2017102240A (ja) 画像処理装置および画像処理方法、撮像装置、プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant