CN104412155A - 自动对焦过程期间的成像和传感 - Google Patents

自动对焦过程期间的成像和传感 Download PDF

Info

Publication number
CN104412155A
CN104412155A CN201280074333.8A CN201280074333A CN104412155A CN 104412155 A CN104412155 A CN 104412155A CN 201280074333 A CN201280074333 A CN 201280074333A CN 104412155 A CN104412155 A CN 104412155A
Authority
CN
China
Prior art keywords
imageing sensor
auto
focusing
reading
focal zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280074333.8A
Other languages
English (en)
Other versions
CN104412155B (zh
Inventor
J·阿拉卡吕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Technologies Oy
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Oyj filed Critical Nokia Oyj
Publication of CN104412155A publication Critical patent/CN104412155A/zh
Application granted granted Critical
Publication of CN104412155B publication Critical patent/CN104412155B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/282—Autofocusing of zoom lenses
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/443—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading pixels from selected 2D regions of the array, e.g. for windowing or digital zooming
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G03B13/36—Autofocus systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

一种方法包括：选择图像传感器的多个读取开始位置中的一个读取开始位置；在第一自动对焦帧期间，根据自动对焦控制信号相对于图像传感器移动光学系统的聚焦区域并且随后在相对于所述图像传感器移动了光学系统的所述聚焦区域之后并且在第一自动对焦帧期间，从读取开始位置开始读取图像传感器。可以执行该方法的一种装置。

Description

自动对焦过程期间的成像和传感
技术领域
本发明的实施例涉及自动对焦。具体而言，其涉及自动对焦过程期间的成像和传感。
背景技术
自动对焦包含相对于图像传感器自动移动光学系统的聚焦区域，使得当图像被图像传感器捕获时，图像已经聚焦。
发明内容
根据本发明的各种(但是不必须所有)实施例，提供有一种包括如下步骤的方法：选择图像传感器的多个读取开始位置中的一个读取开始位置；在第一自动对焦帧期间，根据自动对焦控制信号，相对于图像传感器移动光学系统的聚焦区域并且接着在相对于图像传感器移动光学系统的聚焦区域之后并且在第一自动对焦帧期间，从读取开始位置开始图像传感器的读取。
根据本发明的各种(但是不必须所有)实施例，提供有一种装置，该装置包括：至少一个处理器；以及至少一个存储器，该存储器包括计算机程序代码，该至少一个存储器和计算机程序代码被配置为使用至少一个处理器使得装置至少执行：选择图像传感器的多个读取开始位置中的一个读取开始位置；在第一自动对焦帧期间，根据自动对焦控制信号，相对于图像传感器移动光学系统的聚焦区域并且接着在相对于图像传感器移动光学系统的聚焦区域之后并且在第一自动对焦帧期间，从读取开始位置开始读取图像传感器。
根据本发明的各种(但是不必须所有)实施例，提供有一种装置，该装置包括：选择器，被配置为选择图像传感器的多个读取开始位置中的一个读取开始位置；对焦控制器，被配置为，在第一自动对焦帧期间，相对于图像传感器移动光学系统的聚焦区域；读取控制器，被配置为，在第一自动对焦帧期间以及在聚焦区域和图像传感器之间的相对移动之后，从读取开始位置控制图像传感器的开始读取。
附图说明
为了更好地理解本发明实施例的各种示例，将仅通过示例参照附图，其中：
图1示出了(在截面图中)相对于图像传感器移动光学系统的聚焦区域；
图2示出了(在平面图中)图像传感器；
图3示出了装置的示例；
图4A示出了控制器的示例；
图4B示意性地示出了控制器的示例；
图5示出了方法的示例，其在单个自动对焦帧期间，相对于图像传感器移动光学系统的聚焦区域以及随后从所选择的读取开始位置开始读取图像传感器；
图6示出了确定移动过程和读取过程是否应该约束为位于相同帧周期内的控制方法的示例；
图7示出了图5所示方法的示例；
图8示出了图5所示方法的类似于图7但是具有不同选择的读取开始位置的示例；并且
图9示出了跟随对焦自动对焦过程的图像捕获过程；
具体实施方式
附图示出了一种方法50，该方法包括：选择50图像传感器6的多个读取开始位置70中的一个读取开始位置；在第一自动对焦帧F1期间，根据自动对焦控制信号30，相对于图像传感器6移动光学系统4的自动聚焦区域8，以及随后在相对于图像传感器6移动了光学系统4的聚焦区域8之后并且在第一自动对焦帧F1期间，从读取开始位置70开始图像传感器6的读取72。
图像传感器6的读取开始位置可以是时间位置，该时间位置定义用于读取图像传感器6的自动对焦帧的子集的开始位置。图像传感器6的读取开始位置可以是图像传感器6内的逻辑位置或者物理位置，该位置定义了图像传感器6的子集的被读取的开始位置。
图1示出了(在截面图中)相对于图像传感器6移动光学系统4的自动聚焦区域8。例如，可以通过朝着和/或远离图像传感器移动光学系统4，和/或通过朝着和/或远离光学系统4移动图像传感器6，和/或通过改变成像系统的光功率(例如通过改变成像系统的焦距)来产生移动。
光学系统4可以包括一个或者多个透镜或者其它光学元件。
图像传感器6是能够感应可见光的传感器。其可以包括传感器元件(传感元件(sensels))阵列，每个传感器元件能够感应传感器平面7之上的光强。该传感器元件可以是彩色传感器元件，在此情形下，它们还能够感应颜色，例如单色传感器元件可以包括感应红光强度的红色传感器元件、感应绿光强度的绿色传感器元件、以及感觉蓝光强度的蓝色传感器元件。
图2示出了(在平面图中)图像传感器6以及图像传感器6的传感器平面7。图像传感器6的子集20对应于图像用于对焦的区域。期望此子集20对应于聚焦区域8。如图1所示，在自动对焦过程期间，相对于图像传感器6移动光学系统4的聚焦区域8，使得该聚焦区域位于传感器平面7上并且覆盖图像传感器6的子集20。
图像传感器的子集20的位置可以是可选择的。即，如图2所示，该子集20在传感器平面7内可以具有不同的位置。
图像传感器的子集20的大小可以是可选择的。即，如图2所示，该子集20在传感器平面7内可以具有不同的面积。
在本发明的实施例中，自动对焦过程期间的图像传感器6的读取被限制为读取图像传感器6的子集20，而不是读取整个图像传感器6。子集20的起始定义读取开始位置70而子集20的结尾定义读取结束位置71。随着子集20的位置和/或大小变化，读取开始位置70和读取结束位置71的标识也变化。
对于自动对焦过程，子集20对于此自动对焦过程可以是确定的或者固定的(在大小和位置方面)。读取开始位置70和读取结束位置71也将因此是固定的。
图5示出了一种方法50的示例，其在单个自动对焦帧F1期间，相对于图像传感器6移动光学系统4的自动聚焦区域8，以及随后在相对于图像传感器6移动光学系统4的聚焦区域8之后并且在同一自动对焦帧F1期间，从读取开始位置70开始图像传感器6的读取72。
方法50在区块52处开始，在该区块处，选择多个读取开始位置70中的一个读取开始位置。对于在迭代循环59之外的自动对焦过程，图像传感器6的子集20在此区块中定义，因此子集20在下面描述的自动对焦过程的迭代期间对于每个自动对焦帧F是恒定的。
在区块54处，光学系统4的聚焦区域8根据自动对焦控制信号30相对于图像传感器6移动。
接着在区块56处，在相对于图像传感器6移动了光学系统4的聚焦区域8之后，从读取开始位置70读取图像传感器6的子集20的起始。
接着在区块58处，在读取结束位置71处读取图像传感器6的子集20的结尾。
区块54、56以及58全部在相同的自动对焦帧内开始和结束。自动对焦帧是在迭代自动对焦过程中使用的时间帧。其可以是例如33毫秒，对应于30帧每秒。
在此迭代中，区块54、56以及58全部在相同自动对焦帧内开始和结束。
在区块58之后，该方法贯穿迭代循环59而重复。
在区块54处，光学系统4的聚焦区域8根据新的自动对焦控制信号30相对于图像传感器6移动。新的自动对焦控制信号30从读取自图像传感器6的前一自动对焦帧中的子集20的数据生成。
接着在区块56处，在相对于图像传感器6移动了光学系统4的聚焦区域8之后，从读取开始位置70读取图像传感器6的子集20的起始。
接着在区块58处，在读取结束位置处读取图像传感器6的子集20的结尾。
在此迭代中，区块54、56以及58都在相同自动对焦帧内开始和结束。
在自动对焦过程的每个迭代中，使用图像传感器6的共用子集20。对于迭代中的每个帧，所选择的读取开始位置70和所选择的读取结束位置71是固定的。
在区块58之后，该方法重复，直到自动对焦过程结束。在区块52处，该方法再次开始，用于新的自动对焦过程。
方法50还可以参照图7所示的具体示例来理解。图7将图像传感器6的传感器元件绘制为y轴并且将时间绘制为x轴。
如图7的y轴上所示，子集20在读取开始位置70和读取结束位置71之间延伸。
如图7的具体示例所示，移动过程80出现在自动对焦帧的起始处。对于第一自动对焦帧F1，其出现在自动对焦帧F1的起始和时间T1之间。在图7的示例中，每个自动对焦帧具有持续时间(duration)F。
移动过程80包含相对于图像传感器6移动光学系统4的聚焦区域8。移动过程80出现在每个帧中。移动过程80在相同帧中的读取过程73之前并且跟随前一个帧(如果有的话)中的读取过程73。读取过程73和移动过程不重叠。在图7的示例中，移动过程具有持续时间M，该持续时间可以是恒定的或者是可变的。
读取过程73包含读取图像传感器6的整个所选择的子集20。读取过程73的起始与前一个的移动过程80具有固定的关系(例如，在所示的示例中紧接着而没有延迟)。
读取过程73以对读取开始位置70开始读取而开始72并且持续到到达并且读取所选择的读取结束位置71。读取过程73以结束读取读取结束位置71而结束74，该读取结束位置71在下一个移动过程80开始的时间T2处或者之前。读取过程73在第一自动对焦帧F1期间出现并且在每个帧F重复。
一个帧(例如T1)中的移动过程80的结尾和下一帧(例如T2)中的移动过程80的起始之间的持续时间F-M定义了用于读取过程73的最大可用时间并且因此定义了最大可用曝光时间ET。读取过程73位于持续时间F-M内。
方法50还可以参照图8中的具体示例来理解。图8的示例类似于图7的示例，除了图像传感器6的子集20具有不同的位置和不同的大小。读取开始位置70不同并且读取开始位置70和读取结束位置71之间的间隔不同。
此图示出了在不同自动对焦过程92期间(比较图7和图8)，图像传感器6的子集20可以具有不同的位置和/或不同的大小。
图8示出了在相同自动对焦过程92的连续的自动对焦帧期间，图像传感器6的子集20保持固定。
对于自动对焦过程92，图像传感器的子集20的位置因而是可选择的，但是对于该过程的自动对焦帧，该位置则是固定的。
对于自动对焦过程92，图像传感器的子集20的大小因而是可选择的，但是对于该过程的自动对焦帧，该大小则是固定的。
参照图7和图8，重置过程83包含重置图像传感器6的所选择的子集20的每个传感元件(sensel)。特定传感元件的重置过程83的开始与该传感元件的前一读取过程73的终止(与子集20相反)具有固定的关系(例如，在所示的示例中紧接着而没有延迟)。
重置过程83以在读取开始位置70开始重置传感器6而开始82并且持续到到达并且重置所选择的读取结束位置71。重置过程83以完成重置读取结束位置而完成84。整个子集20的重置过程83在一个自动对焦帧中开始，在下一个自动对焦帧的移动过程80期间继续并且在下一个自动对焦帧的读取过程73期间结束。
读取开始位置70的重置过程83在一个自动对焦帧F1中开始，在下一个自动对焦帧F2的移动过程80期间继续但是在下一个自动对焦帧F2的读取过程73之前完成。
读取结束位置71的重置过程83在一个自动对焦帧F1的结尾处开始，在下一个自动对焦帧F2的移动过程80期间继续并且在下一个自动对焦帧F2的读取过程73期间完成。
如果单个传感元件的重置过程83的持续时间是恒定的并且传感元件的重置仅可以以固定速率出现，则子集20的所有传感元件的重置过程83的持续时间R取决于子集的大小。
在自动对焦帧期间，子集20的每个传感元件必须被读取73和重置。必须贡献于子集20的重置过程的自动对焦帧的百分比(％)随着子集的大小增加并且定义最大可用曝光的自动对焦帧的百分比％因此减少。最大可用曝光时间(传感元件的最大可用读取时间)ET等于帧持续时间F减掉移动过程80的持续时间M减掉整个子集的重置时间R，即ET＝F–M–R。
在图像传感器6处的重置过程83可以在后续的移动过程80开始之前，在所选择的读取开始位置70处开始。当后续移动过程80结束时，在图像传感器处的重置过程83可以在所选择的读取开始位置70处结束。
在图像传感器6处的重置过程可以在当后续的移动过程80开始时，在所选择的读取结束位置71处开始。在图像传感器6处的重置过程可以在后续移动过程80结束之后，在所选择的读取结束位置71处结束。
图6示出了控制方法60的示例。此方法60的目的为确定移动过程80和读取过程73是否应该被约束为位于相同的帧周期F内(如图7和图8所示)，或者移动过程80和读取过程73是否不应该被约束为位于相同的帧周期F内，其中读取过程73的至少部分占据后续的帧F至移动过程80。
如果读取过程73被约束为位于与具有持续时间M的移动过程80相同的帧周期F内，则时间F-M必须等于或者大于子集20的总重置时间R加最大可用曝光时间ET。如上文所解释，子集20的总重置时间20可以随着子集20的大小变化并且因此总可用曝光时间ET也可以变化。
如果总可用曝光时间ET不大于或者等于需要的曝光时间，则自动对焦过程92可能不能正确工作。
根据方法60，在需要的曝光时间不超过可用曝光时间ET时，则移动过程80和后续的读取过程73被约束为位于相同的帧周期F内，如图7和图8所示。
然而，当需要的曝光时间超过可用曝光时间时，则移动过程80和后续的读取过程73不被约束为位于相同的帧周期F内，并且读取过程73的至少部分可以占据后续帧F至移动过程80。这可以显著增加可用曝光时间。在一个实施例中，后续的读取过程73可以在移动过程80之后立刻开始，但是延伸进入下一个帧并且直到下一个帧的结尾。在另一实施例中，后续的读取过程73在下一个帧的起始处开始。
参照图6，在方法60的此示例中，方法60在区块62处通过设定约束上文所解释的移动过程80和读取过程73两者的推定周期而开始。默认值是一个自动对焦帧。
接着在区块64处，测试推定周期是否可以使用。可用的曝光时间ET基于推定周期F确定，ET＝F–M–R。
如果需要的曝光时间(例如，可以取决于照相机光圈以及环境照明)小于或者等于可用的曝光时间，则方法60可以移动到区块66，该方法在此处结束。对于后续自动对焦过程92，推定周期则变成固定周期。
如果需要的曝光时间(例如，可以取决于照相机光圈以及环境照明)大于可用的曝光时间，则方法60移动到区块68，推定周期在此处增加，在此示例中增加到两个自动对焦周期。该方法接着移动到区块66，并且在此处结束。对于后续自动对焦过程92，推定周期则变成固定周期。
对于每个自动对焦过程92，可以执行方法60。
图9示出了跟随自动对焦过程92的图像捕获过程90。
自动对焦过程92类似于参照图7所述描述的自动对焦过程并且将不在此做进一步地描述。
图像捕获过程90跟随自动对焦过程92，在帧94的起始处开始。在帧94期间读取图像传感器6而不相对于图像传感器6移动光学系统的聚焦区域8。在不同于并且大于子集20的区域上读取图像传感器6。可以例如在从初始位置96到最终位置98的最大可用区域上读取图像传感器6。
图3示出了装置10的示例，该装置包括：控制器2，被配置为控制成像系统4并且与图像传感器6通信。
部件被操作地耦合并且可以存在的任何数目或者组合的居间元件(包括没有居间元件)。
控制器2被配置为控制包括上文描述的一些或者所有方法的自动对焦过程，这些方法包括例如图5所示的方法50和图6所示的方法60。
控制器2的实施方式可以为仅硬件(电路、处理器…)，可以具有为仅软件(包括固件)的某些方面或者可以是硬件和软件的结合(包括固件)。
控制器2可以使用实现硬件功能的指令进行实施，例如，通过在通用处理器或者专用处理器中使用将被这种处理器执行的可以存储在计算机可读存储介质(硬盘、存储器等)上的可执行计算机程序指令。
在图4A中，控制器2包括被配置为对存储器40读取和写入的处理器42。处理器42还可以包括输出接口，经由该输出接口由处理器输出数据和/或命令，并且还可以包括输入接口，经由该输入接口数据和/或命令被输入到处理器42。
存储器40存储计算机程序44，该计算机程序包括计算机程序指令，该计算机程序指令控制控制器2的操作，并且可能在加载到处理器42中时控制装置10。
计算机程序指令44提供使得装置能够执行图5、图6、图7、图8以及图9所示的方法的逻辑和例程。通过读取存储器40，处理器42能够加载和执行计算机程序44。
装置10从而包括：至少一个处理器42；以及包括计算机程序代码44的至少一个存储器40，该至少一个存储器40和计算机程序代码44被配置为用至少一个处理器42使得装置10至少执行：方法50，该方法50包括：选择50图像传感器6的多个读取开始位置70中的一个读取开始位置；在第一自动对焦帧F1期间，根据自动对焦控制信号30，相对于图像传感器6移动光学系统4的聚焦区域8，以及随后在相对于图像传感器6移动了光学系统4的聚焦区域8之后并且在第一自动对焦帧F1期间，从读取开始位置70开始72图像传感器6的读取。
计算机程序可以经由任何合适的传送机制抵达装置10。该传送机制可以是，例如，非瞬态计算机可读存储介质、计算机程序产品、存储器设备、诸如光盘只读存储器(CD-ROM)或者数字多功能光盘(DVD)之类的记录介质、使计算机程序44有形实体化的制品。该传送机制可以是被配置为可靠地传递计算机程序44的信号。装置10可以将计算机程序44作为计算机数据信号传播或者发射。
虽然存储器40被图示为单个部件，但是可以将其实施为一个或者多个单独的部件，这些单独的部件中的一些或者所有可以是集成的/可移除的和/或可以提供永久的/半永久的/动态/缓存存储。
图4B示意性地示出了装置2的示例。装置2包括多个逻辑区块，这些逻辑区块包括选择器43、对焦控制器45以及读取控制器47，它们中的每个都执行单独的功能。
区块43、区块45、区块47可以以硬件实施为分立电路或者可以以硬件实施在单个电路中。
区块43、区块45、区块47可以移植在固件或者软件中作为分立的例程或者程序或者可以实施在单个程序内。
选择器44被配置为选择图像传感器的多个读取开始位置中的一个读取开始位置。
对焦控制器45被配置为，在第一自动对焦帧期间，相对于图像传感器6移动光学系统4的聚焦区域8。
读取控制器47被配置为，在第一自动对焦帧期间以及在聚焦区域8和图像传感器6之间的相对移动之后，从读取开始位置70控制图像传感器6的开始读取。
选择器44可以，例如，被配置为附加地定义图像传感器的读取结束位置或者另外定义图像传感器6在第一自动对焦帧期间读取的子集20。
对焦控制器45可以被配置为在自动对焦过程中，每帧一次地相对于图像传感器6移动光学系统4的聚焦区域8。
读取控制器47可以被配置为在自动对焦过程的每帧中，控制从读取开始位置70到读取结束位置71的图像传感器6的读取。
读取控制器可以被配置为，在第一自动对焦帧期间以及在聚焦区域8和图像传感器4之间的每个相对移动之后，从读取开始位置70开始每个周期一次地控制图像传感器的读取。装置2可以被配置为使用一个帧或者两个帧作为该周期。光学系统的聚焦区域相对于图像传感器的后续移动之间的时间被控制为大于需要的曝光时间。
对“计算机可读存储介质”、“计算机程序产品”、“有形实体化计算机程序”等或者“控制器”、“计算机”、“处理器”等的参照应该理解为不仅包含具有诸如单/多-处理器架构和顺序(冯诺依曼)/并行架构之类的不同结构的计算机，还包含诸如现场可编程门阵列(FPGA)、专用集成电路(ASIC)、信号处理设备以及其他处理电子线路之类的专用集成电路。对计算机程序、指令、代码等的参照应该理解为包含用于可编程处理器的软件或者诸如，例如，硬件设备的可编程内容(不管是用于处理器的指令还是用于固定功能设备、门阵列或者可编程逻辑设备等的配置设定)之类的固件。
如在本应用中所使用的，术语“电路系统”指代以下所有：
(a)仅硬件电路实施方式(诸如在仅模拟和/或数字电路系统中的实施方式)以及
(b)电路和软件(和/或固件)的组合，诸如(如可应用的)：(多个)处理器的组合或者(ii)一起工作形成诸如移动电话或者服务器之类的装置以便执行各种功能的(多个)处理器/软件(包括(多个)数字信号处理器)的部分、软件、以及(多个)存储器，以及
(c)诸如需要软件或者固件用于操作(即使该软件或者固件并不物理存在)的(多个)微处理器或者(多个)微处理器的部分之类的电路。
“电路系统”的定义适应于此术语在本申请中的所有使用，包括在任一权利要求中。作为进一步的示例，如在本申请中所使用的那样，术语“电路系统”还可以覆盖仅处理器(或者多处理器)或者处理器的部分以及其附带软件和/或固件的实施方式。术语“电路系统”还可以覆盖，例如(并且如果适用于具体声明元件)，基带集成电路或者用于移动电话的应用处理器集成电路或者服务器中的类似集成电路、蜂窝网络设备、或者其它网络设备。
在之前的段落中，参照了具有帧持续时间F的帧。帧持续时间F可以对应于33毫秒(例如30帧每秒)。在一些实施例中，移动过程80可以耗费少于20％的帧持续时间。移动过程80可以耗费少于5毫秒。
读取过程73的持续时间可以随，例如，快门速度变化，然而读取过程73可以灵活地具有长持续时间(例如长达30毫秒)并且支持慢的快门速度/长曝光时间并且还可以在自动对焦过程的每个帧中出现。以30帧每秒所支持的快门速度可以是，例如，1/1000秒、1/500秒、1/250秒、1/125秒以及1/60秒。
光学系统4可以使用高速致动器以便调节聚焦区域8的位置。高速致动器的示例包括例如，基于来自于Polight的压电聚合物解决方案。
装置10可以是诸如，例如，照相机或者移动蜂窝电话或者一些其它个人便携设备之类的成像设备的部分。
装置10可以是模块。控制器2可以是模块。此处所使用的“模块”指代排除了可以由终端生产商或者用户加入的某些部分/部件的单元或者装置。
图5和图6所示的区块可表示方法中的步骤和/或计算机程序中的代码段。对于区块的特定顺序图示不一定暗示对于区块有要求的或者优选的顺序并且区块的顺序和布置可以变化。此外，也可以省略一些区块。
虽然在之前的段落中参照各种示例描述了本发明的实施例，应该领会的是可以做出对给出的示例的更改而不背离所要求的本发明的范围。之前的说明中所描述的特征可以以除了明确描述的组合之外的组合使用。
虽然参照某些特征描述了一些功能，但是这些功能可以由其它特征执行，无论是否描述。
虽然参照某些实施例描述了一些特征，但是这些特征也可以存在于其它实施例中，无论是否描述。
在上文的说明书中尝试强调本发明中确信为非常重要的那些特征的同时，应该理解的是，申请人要求关于上文中涉及和/或在附图中示出的任何可取得专利的特征或者特征的组合(无论是否已经关于其做出了特别强调)的保护。

Claims (28)

1.一种方法，包括：
选择图像传感器的多个读取开始位置中的一个读取开始位置；
在第一自动对焦帧期间，根据自动对焦控制信号来相对于图像传感器移动光学系统的聚焦区域，并且随后在相对于所述图像传感器移动所述光学系统的所述聚焦区域之后并且在所述第一自动对焦帧期间，从所述读取开始位置开始读取所述图像传感器。
2.根据权利要求1所述的方法，其中在所述第一自动对焦帧期间，读取所述图像传感器持续到所述图像传感器的所选择的读取结束位置。
3.根据前述权利要求中的任一项所述的方法，其中在所述第一自动对焦帧期间读取所述图像传感器的子集。
4.根据权利要求3所述的方法，其中所述图像传感器的所述子集的位置是可选择的。
5.根据权利要求3或者权利要求4中的任一项所述的方法，其中所述图像传感器的所述子集的大小是可选择的。
6.根据前述权利要求中的任一项所述的方法，其中从所述读取开始位置开始的读取所述图像传感器的所选择的子集的过程的结束预定在第一时间并且随后以所选择的周期发生，其中相对于所述图像传感器移动所述光学系统的所述聚焦区域的后续过程的开始预定在第二时间并且随后以所述所选择的周期发生，
并且其中所述第一时间和所述第二时间之间的持续时间定义了最大可用曝光时间，并且所述方法包括：选择所述所选择的周期，使得需要的曝光时间小于所述可用曝光时间。
7.根据权利要求6所述的方法，其中当所述所选择的周期是一个帧时，如果所述需要的曝光时间小于所述可用曝光时间，则使用一个帧作为所述所选择的周期，而当所述所选择的周期是一个帧时，如果所述需要的曝光时间大于所述可用的曝光时间，则使用两个帧作为所述所选择的周期。
8.根据前述权利要求中的任一项所述的方法，在第二自动对焦帧期间，紧接着所述第一帧，根据新的自动对焦控制信号相对于所述图像传感器移动所述光学系统的所述聚焦区域并且随后在相对于所述图像传感器移动所述光学系统的所述聚焦区域之后，从所述读取开始位置开始读取所述图像传感器。
9.根据权利要求8所述的方法，其中在所述第二自动对焦帧期间，读取所述图像传感器持续到所选择的读取结束位置。
10.根据权利要求8或9所述的方法，其中所述所选择的读取结束位置对于所述第一帧和所述第二帧是固定的。
11.根据权利要求8、9或10所述的方法，其中在所述第一自动对焦帧和所述第二自动对焦帧期间，读取所述图像传感器的共用子集。
12.根据权利要求11所述的方法，其中对于所述第一自动对焦帧和所述第二自动对焦帧，所述图像传感器的所述共用子集的位置是可选择的并且是固定的。
13.根据权利要求11或12所述的方法，其中对于所述第一自动对焦帧和所述第二自动对焦帧，所述图像传感器的所述子集的大小是可选择的并且是固定的。
14.根据权利要求8到13中的任一项所述的方法，其中在第三图像捕获帧期间，接着所述第二帧，读取所述图像传感器，而不相对于所述图像传感器移动所述光学系统的所述聚焦区域，从预定开始位置读取所述图像传感器以便捕获图像。
15.根据权利要求14所述的方法，其中在所述第三捕获帧期间，读取所述图像传感器持续到预定结束位置。
16.根据前述权利要求中的任一项所述的方法，其中从所述读取开始位置开始读取所述图像传感器的过程与之前的终止相对于所述图像传感器移动所述光学系统的所述聚焦区域具有固定的时间关系。
17.根据权利要求16所述的方法，其中从所述读取开始位置开始读取所述图像传感器的所述过程紧紧跟随终止关于所述图像传感器移动所述光学系统的所述聚焦区域。
18.一种装置，包括用于执行权利要求1到17中的任一项所述的方法的装置。
19.一种装置，包括：
至少一个处理器；以及
至少一个存储器，包括计算机程序代码
所述至少一个存储器和所述计算机程序代码被配置为使用所述至少一个处理器使得所述装置至少执行权利要求1到17中的任一项所述的方法。
20.一种装置，包括：
选择器，被配置为选择图像传感器的多个读取开始位置中的一个读取开始位置；
对焦控制器，被配置为，在第一自动对焦帧期间，相对于图像传感器移动光学系统的聚焦区域；
读取控制器，被配置为，在所述第一自动对焦帧期间并且在所述聚焦区域和所述图像传感器之间的相对移动之后，从所述读取开始位置控制所述图像传感器的开始读取。
21.根据权利要求20所述的装置，其中所述选择器被配置为为所述图像传感器定义读取结束位置；并且所述读取控制器被配置为从所述读取开始位置到所述读取结束位置控制所述图像传感器的读取。
22.根据权利要求20或者21所述的装置，其中所述选择器被配置为定义所述图像传感器的子集，所述子集在所述第一自动对焦帧期间被读取。
23.根据权利要求20到22中的任一项所述的装置，其中所述对焦控制器被配置为每个周期一次地相对于图像传感器移动光学系统的所述聚焦区域；所述读取控制器被配置为，在所述第一自动对焦帧期间并且在所述聚焦区域和所述图像传感器之间的相对移动之后，每个周期一次地从所述读取开始位置控制所述图像传感器的开始读取并且其中所述装置被配置为使用一个帧或者两个帧作为所述周期。
24.根据权利要求20到23中的任一项所述的装置，其中所述光学系统的所述聚焦区域相对于图像传感器的后续移动之间的时间被控制为大于需要的曝光时间。
25.根据权利要求20到24中的任一项所述的装置，其中所述对焦控制器被配置为，在第二自动对焦帧期间，相对于图像传感器移动所述光学系统的所述聚焦区域；并且所述读取控制器被配置为，在所述第二自动对焦帧期间并且在所述聚焦区域和所述图像传感器之间的相对移动之后，从所述读取开始位置控制所述图像传感器的开始读取。
26.根据权利要求20到25中的任一项所述的装置，其中所述对焦控制器被配置为，在每个帧期间，相对于图像传感器移动所述光学系统的所述聚焦区域；并且所述读取控制器被配置为，在每个帧期间并且在所述聚焦区域和所述图像传感器之间的相对移动之后，从所述读取开始位置控制所述图像传感器的开始读取。
27.一种成像设备，包括权利要求18到26中的任一项所述的装置。
28.一种计算机程序，当在处理器上运行时，其使得所述处理器执行权利要求1到17中的任一项所述的方法。
CN201280074333.8A 2012-06-27 2012-06-27 自动对焦过程期间的成像和传感 Active CN104412155B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/IB2012/053258 WO2014001844A1 (en) 2012-06-27 2012-06-27 Imaging and sensing during an auto-focus procedure

Publications (2)

Publication Number Publication Date
CN104412155A true CN104412155A (zh) 2015-03-11
CN104412155B CN104412155B (zh) 2018-02-09

Family

ID=49782339

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280074333.8A Active CN104412155B (zh) 2012-06-27 2012-06-27 自动对焦过程期间的成像和传感

Country Status (4)

Country Link
US (1) US10136046B2 (zh)
EP (1) EP2847636A4 (zh)
CN (1) CN104412155B (zh)
WO (1) WO2014001844A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105991911A (zh) * 2016-07-29 2016-10-05 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060198624A1 (en) * 2005-03-04 2006-09-07 Sony Corporation Focus control device, image pickup device, and focus control method
US20070188630A1 (en) * 2006-02-10 2007-08-16 Canon Kabushiki Kaisha Imaging apparatus
CN100538501C (zh) * 2004-07-02 2009-09-09 索尼株式会社 电子像机和自动聚焦方法
CN101918892A (zh) * 2008-02-13 2010-12-15 高通股份有限公司 图像俘获装置的自动对焦校准
CN102016912A (zh) * 2008-05-02 2011-04-13 诺基亚公司 提供改进的图像捕获的方法、计算机程序产品和装置

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03214868A (ja) 1990-01-19 1991-09-20 Ricoh Co Ltd 自動焦点調整装置
US5138356A (en) 1990-01-31 1992-08-11 Minolta Camera Kabushiki Kaisha Automatic focus adjusting apparatus of a camera
US5235375A (en) 1990-04-12 1993-08-10 Olympus Optical Co., Ltd. Focusing position detecting and automatic focusing apparatus with optimal focusing position calculation method
JP3210027B2 (ja) * 1991-04-05 2001-09-17 キヤノン株式会社 カメラ
JPH11113008A (ja) 1997-10-08 1999-04-23 Olympus Optical Co Ltd 電子的撮像装置
US7046290B2 (en) 2000-01-26 2006-05-16 Nikon Corporation Multi-point auto-focus digital camera including electronic zoom
AU2003240945A1 (en) 2002-05-31 2003-12-19 Wavefront Sciences, Inc. Methhod and system for sensing and analyzing a wavefront of an optically transmissive system
JP2005157268A (ja) 2003-11-06 2005-06-16 Canon Inc 撮像装置及びその制御方法及びプログラム及び記憶媒体
JP4732748B2 (ja) * 2004-07-02 2011-07-27 ソニー株式会社 電子式カメラ及び自動フォーカス方法
WO2007057498A1 (en) * 2005-11-15 2007-05-24 Nokia Corporation Imaging system with adjustable optics
JP2007140278A (ja) 2005-11-21 2007-06-07 Eastman Kodak Co デジタルカメラ、露出条件決定方法
JP2008009341A (ja) * 2006-06-30 2008-01-17 Sony Corp オートフォーカス装置、撮像装置及びオートフォーカス方法
US8120696B2 (en) 2006-08-31 2012-02-21 Micron Technology, Inc. Methods, apparatuses and systems using windowing to accelerate automatic camera functions
US8190015B2 (en) 2007-09-07 2012-05-29 Qualcomm Incorporated Method and device for damping lens vibration
JP4863955B2 (ja) 2007-09-10 2012-01-25 三洋電機株式会社 自動焦点調節装置
JP4544291B2 (ja) 2007-11-26 2010-09-15 ソニー株式会社 フォーカス制御装置、フォーカス制御方法
US9398205B2 (en) 2010-09-01 2016-07-19 Apple Inc. Auto-focus control using image statistics data with coarse and fine auto-focus scores

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100538501C (zh) * 2004-07-02 2009-09-09 索尼株式会社 电子像机和自动聚焦方法
US20060198624A1 (en) * 2005-03-04 2006-09-07 Sony Corporation Focus control device, image pickup device, and focus control method
US20070188630A1 (en) * 2006-02-10 2007-08-16 Canon Kabushiki Kaisha Imaging apparatus
CN101918892A (zh) * 2008-02-13 2010-12-15 高通股份有限公司 图像俘获装置的自动对焦校准
CN102016912A (zh) * 2008-05-02 2011-04-13 诺基亚公司 提供改进的图像捕获的方法、计算机程序产品和装置

Also Published As

Publication number Publication date
CN104412155B (zh) 2018-02-09
EP2847636A1 (en) 2015-03-18
WO2014001844A1 (en) 2014-01-03
US20150365585A1 (en) 2015-12-17
US10136046B2 (en) 2018-11-20
EP2847636A4 (en) 2015-12-16

Similar Documents

Publication Publication Date Title
EP3435669B1 (en) Method and device for adjusting white balance and storage medium
US10200600B2 (en) Digital image photographing apparatus and method of controlling the same
US9131173B2 (en) Digital image photographing apparatus for skip mode reading and method of controlling the same
US8681258B2 (en) Imaging system, imaging apparatus, interchangeable lens, method of controlling imaging system, and program
US9918004B2 (en) Camera body capable of driving an image sensor along an optical axis in response to a change in an optical state of an object image
CN108141525A (zh) 具有集成存储器和处理器的智能图像传感器
CN104509092B (zh) 控制相机的方法及相关计算设备和计算机可读存储介质
CN104243827A (zh) 拍摄方法和装置
CN105323470A (zh) 变焦控制设备和变焦控制方法
EP2672696A1 (en) Image restoration device, imaging device, and image restoration method
US20190068883A1 (en) Automatic processing of automatic image capture parameter adjustment
US10104301B2 (en) Image pickup apparatus that performs process of detecting change in brightness, control method therefor, and storage medium
JP6338471B2 (ja) 撮像装置、制御方法およびプログラム
CN104412155A (zh) 自动对焦过程期间的成像和传感
JP6653071B2 (ja) 撮影装置、フォーカス制御方法及びプログラム
CN108886592A (zh) 图像传感器、芯片、图像处理设备及相关方法
US9066020B2 (en) Image capture apparatus and method for controlling the same
JP6198397B2 (ja) 撮像装置、遠隔操作端末、カメラシステム、撮像装置の制御方法、遠隔操作端末の制御方法
JP2020155886A5 (zh)
CN109697814A (zh) 设置设备、控制方法和介质
JP5842884B2 (ja) 追尾装置およびカメラ
JP7241511B2 (ja) 撮像装置およびその制御方法
US11277555B2 (en) Image pickup apparatus that performs focus bracketing, control method therefor, and storage medium
JP6501628B2 (ja) 撮像装置、その制御方法、および制御プログラム
CN106796576A (zh) 默认校准的传感器模块设置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160203

Address after: Espoo, Finland

Applicant after: Technology Co., Ltd. of Nokia

Address before: Espoo, Finland

Applicant before: Nokia Oyj

GR01 Patent grant
GR01 Patent grant