CN112449107A - 控制设备、控制方法和存储介质 - Google Patents

控制设备、控制方法和存储介质 Download PDF

Info

Publication number
CN112449107A
CN112449107A CN202010872122.5A CN202010872122A CN112449107A CN 112449107 A CN112449107 A CN 112449107A CN 202010872122 A CN202010872122 A CN 202010872122A CN 112449107 A CN112449107 A CN 112449107A
Authority
CN
China
Prior art keywords
driving
focus
tilt
evaluation value
drive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010872122.5A
Other languages
English (en)
Other versions
CN112449107B (zh
Inventor
千野俊介
川崎谅
佐藤夏子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN112449107A publication Critical patent/CN112449107A/zh
Application granted granted Critical
Publication of CN112449107B publication Critical patent/CN112449107B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B5/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G03B5/06—Swinging lens about normal to the optical axis
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B5/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G03B5/08—Swing backs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/685—Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0007—Movement of one or more optical elements for control of motion blur
    • G03B2205/0038—Movement of one or more optical elements for control of motion blur by displacing the image plane with respect to the optical axis

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)
  • Lens Barrels (AREA)

Abstract

本发明提供控制设备、控制方法和存储介质。控制设备包括：控制单元，其被配置为控制用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、以及用于使调焦透镜沿光轴方向移动的调焦驱动；获取单元，其被配置为获取摄像设备所拍摄的图像中的第一区域和第二区域中的聚焦水平；第一确定单元，其被配置为基于聚焦水平来确定是要进行倾斜驱动还是要进行调焦驱动；以及第二确定单元，其被配置为基于聚焦水平来确定倾斜驱动或调焦驱动的驱动方向。

Description

控制设备、控制方法和存储介质
技术领域
本发明涉及控制调焦机构和倾斜机构的控制设备。
背景技术
近年来，为了安全目的，在诸如房屋和停车场等的各种地方安装了照相机(摄像设备)。除了安全应用之外，照相机图像还被用于在工厂的通道中管理产品。在这样的各种应用中，需要获得具有深的景深的图像。然而，取决于诸如镜头性能、视角和F值等的摄像条件，可能不能获得深的景深。例如，在使用天花板上所安装的网络照相机来拍摄道路、行人和车辆的图像的具有深度的场景中，聚焦摄像区域可能变为一部分。
因此，已知Scheimpflug(沙伊姆弗勒)原理，该Scheimpflug原理通过(倾斜控制或者)使摄像面相对于与用于拍摄被摄体图像的摄像光轴系统正交的摄像光轴面倾斜或旋转来调整焦平面，并且使摄像场景的景深加深。日本特开(“JP”)2010-130633公开了一种摄像设备，该摄像设备获取其倾斜角度、焦距信息和被摄体距离信息，在无需输入参数的情况下计算图像传感器的倾斜角度，并进行自动倾斜控制。
然而，JP 2010-130633中所公开的摄像设备由于诸如倾斜角度、调焦位置的停止精度、滞后变化和摄像设备的倾斜(倾斜度)等的各种信息的误差而不能实现精确且快速的倾斜控制。
发明内容
本发明提供了各自能够实现精确且快速的倾斜控制的控制设备、控制方法和存储介质。
根据本发明的一方面的控制设备包括：控制单元，其被配置为控制用于用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、以及用于使调焦透镜沿光轴方向移动的调焦驱动；获取单元，其被配置为获取摄像设备所拍摄的图像中的第一区域和第二区域内的聚焦水平；第一确定单元，其被配置为基于聚焦水平来确定是要进行倾斜驱动、还是要进行调焦驱动；以及第二确定单元，其被配置为基于聚焦水平来确定倾斜驱动或调焦驱动的驱动方向。与以上控制设备相对应的控制方法和存储介质也构成本发明的另一方面。
一种控制设备，包括：控制单元，其被配置为进行用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、以及用于使调焦透镜沿光轴方向移动的调焦驱动；获取单元，其被配置为获取摄像设备所拍摄的图像中的第一区域和第二区域的评价值；第一确定单元，其被配置为基于所述评价值来确定是要进行所述倾斜驱动还是要进行所述调焦驱动；以及第二确定单元，其被配置为基于所述评价值来确定所述倾斜驱动或所述调焦驱动的驱动方向。
一种控制方法，用于对控制设备进行控制，所述控制方法包括：获取摄像设备所拍摄的图像中的第一区域和第二区域的评价值；基于评价值来确定是要进行用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、还是要进行用于使调焦透镜沿光轴方向移动的调焦驱动；基于所述评价值来确定所述倾斜驱动或所述调焦驱动的驱动方向；以及控制倾斜驱动和调焦驱动。
一种非暂时性计算机可读存储介质，其存储用于使计算机执行用于控制控制设备的控制方法的程序，其特征在于，所述控制方法包括：获取摄像设备所拍摄的图像中的第一区域和第二区域的评价值；基于评价值来确定是要进行用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、还是要进行用于使调焦透镜沿光轴方向移动的调焦驱动；基于所述评价值来确定所述倾斜驱动或所述调焦驱动的驱动方向；以及控制倾斜驱动和调焦驱动。
根据以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。
附图说明
图1是根据本实施例的摄像设备的框图。
图2A～2C说明根据本实施例的倾斜控制。
图3说明根据本实施例的倾斜角度和调焦位置。
图4示出根据本实施例的评价框的设置示例。
图5说明根据本实施例的驱动器和驱动方向。
图6说明根据本实施例的倾斜驱动方向。
图7是根据本实施例的控制方法的流程图。
图8说明根据本实施例的用于判断聚焦评价值是增加了还是减少了的方法。
图9说明根据本实施例的聚焦停止方法。
具体实施方式
现在参考附图，将详细说明根据本发明的实施例。
现在参考图1，将说明根据本实施例的摄像设备的结构。图1是摄像设备100的框图。在根据本实施例的摄像设备100中，摄像设备主体和摄像光学系统(镜头设备)彼此一体化。然而，本发明不限于本实施例，并且还适用于包括摄像设备主体以及可从摄像设备主体拆卸的镜头设备的摄像系统。然后，可以在摄像设备主体或镜头设备中设置诸如后述的倾斜/调焦控制单元115等的各单元。
变焦透镜101沿光轴方向移动并改变焦距。调焦透镜102在调焦期间沿光轴方向移动。光圈单元(孔径光阑单元)103调整光量。根据本实施例的摄像光学系统包括变焦透镜101、调焦透镜102和光圈单元103。然而，本发明不限于本实施例，并且适用于不包括变焦透镜101、调焦透镜102和光圈单元103中至少之一的摄像光学系统。
通过摄像光学系统的光经由带通滤波器(BPF)104和滤色器105在图像传感器106上形成被摄体图像作为光学图像。BPF 104可以相对于摄像光学系统的光路前后移动。图像传感器106具有CMOS传感器等，并且对经由摄像光学系统形成的被摄体图像进行光电转换以输出模拟电信号(拍摄图像)。AGC107控制从图像传感器106输出的模拟电信号的增益。AD转换器108将模拟电信号转换为数字信号(数字摄像信号)并将数字信号输出到照相机信号处理器109。
照相机信号处理器109对数字摄像信号进行各种图像处理以生成视频信号。该视频信号经由通信器110输出到通过有线或无线通信连接至摄像设备100的监视设备111。通信器110从外部装置接收命令(指令)，并向倾斜/调焦控制单元(控制单元)115输出诸如命令等的控制信号。
聚焦评价值计算器(获取单元)112针对各对象被摄体区域接收来自AD转换器108或照相机信号处理器109的RGB像素值或亮度值，并获取特定频率的对比度相关评价值(聚焦评价值或聚焦水平)。代替仅基于特定频率的评价值，评价值可以除以对比度以进行归一化。可以获取基于相位差等的距离信息作为评价值。聚焦评价值计算器112将当前的聚焦评价值与过去的聚焦评价值进行比较，并计算由于倾斜角度和调焦位置的驱动而引起的聚焦评价值的变化(变化量)。
被摄体设置器113基于来自照相机信号处理器109的信号从拍摄图像中检测被摄体。被摄体设置器113可以判断(检测)诸如人或汽车等的预设被摄体，并设置用于计算聚焦评价值的框。用户指定区域可以用作用于设置聚焦评价值的框。聚焦评价值计算器112计算并比较被摄体设置器113所设置的框中的聚焦评价值。
倾斜/调焦确定单元114包括第一确定单元114a和第二确定单元114b，并基于聚焦评价值计算器112所计算出的评价值的变化以及过去的驱动器和驱动方向来确定下次要驱动的驱动器(驱动单元)和驱动方向。第一确定单元114a基于评价值(聚焦水平)来确定是要进行倾斜驱动(倾斜控制)还是要进行调焦驱动(调焦控制)。第二确定单元114b基于评价值(聚焦水平)来确定倾斜驱动或调焦驱动的驱动方向。倾斜/调焦确定单元114计算利用所确定的驱动器和驱动方向要驱动的倾斜角度和调焦位置，并向倾斜/调焦控制单元115通知所计算出的倾斜角度和调焦位置。
倾斜/调焦控制单元115用作被配置为控制倾斜角度(倾斜驱动)的倾斜控制单元以及被配置为控制调焦位置(调焦驱动)的调焦控制单元。倾斜/调焦控制单元115根据来自通信器110的指示、通过自动调焦(AF)或手动调焦(MF)来进行调焦控制。倾斜/调焦控制单元115从图像传感器驱动器116(图像传感器驱动单元)和调焦驱动器117(调焦驱动单元)接收当前位置，并向倾斜/调焦确定单元114通知当前位置。倾斜/调焦控制单元115基于倾斜/调焦确定单元114所计算出的倾斜角度和调焦位置来向图像传感器驱动器116和调焦驱动器117中的每一个指示驱动位置。
图像传感器驱动器(倾斜驱动器、倾斜驱动单元)116基于倾斜/调焦控制单元115所指示的倾斜角度来使图像传感器106倾斜(进行倾斜驱动)。通常，使图像传感器106倾斜的旋转轴位于拍摄图像的中心，并且图像传感器106围绕旋转轴倾斜。然而，本发明不限于本实施例，并且倾斜驱动器可以使摄像光学系统而不是摄像元件106倾斜。换句话说，倾斜驱动是用于改变图像传感器106和摄像光学系统中至少之一的倾斜度的驱动。调焦驱动器117基于倾斜/调焦控制单元115所指示的调焦设置位置来控制调焦透镜102的位置。换句话说，调焦驱动是用于使调焦透镜102沿光轴方向移动的驱动，其中调焦透镜102构成摄像光学系统的至少一部分。
现在将参考图2A～2C来说明倾斜控制。图2A～2C说明倾斜控制。图2A示出光学系统(摄像光学系统)的主面和图像传感器106的摄像面彼此平行。聚焦于聚焦距离L，并且焦平面与光学系统和图像传感器106中的每一个平行。图2B示出图像传感器106从图2A的状态起围绕图像传感器旋转轴旋转、并且进行倾斜控制。在基于Scheimpflug原理的倾斜控制期间，焦平面也围绕与图像传感器旋转轴相对应的焦平面旋转轴旋转，并且可以关于某个平面从近距离至长距离聚焦于所有被摄体。根据Scheimpflug原理，当光学系统的主面与图像传感器的摄像面在一条直线上相交时，焦平面也在该同一条直线上相交。使用(透镜)焦距f、聚焦距离L和俯角α，根据Scheimpflug原理通过下式(1)计算倾斜角度b。
b＝tan-1(f/(L tanα))…(1)
图2C示出存在被摄体X(第一被摄体区域)和被摄体Y(第二被摄体区域)的场景。然后，如图2C所示，可以对具有使得聚焦于被摄体的面部的高度的焦平面进行控制。为了该目的，需要调焦控制以及倾斜控制。最佳焦平面(或最佳倾斜角度和调焦位置)对于各被摄体而言是不同的，并且手动控制对于用户而言是困难的。
现在参考图3，将说明根据被摄体来计算最佳倾斜角度和调焦位置的示例。图3说明倾斜角度和调焦位置的计算。作为对象被摄体，与图2C同样地，存在被摄体X和Y。当前的倾斜角度和调焦透镜102的位置具有如图3的上部所示的位置关系，其中x是聚焦于被摄体X所需的焦平面上的校正量，并且y是聚焦于被摄体Y所需的焦平面上的校正量。假设从图像传感器106上的倾斜轴到被摄体的距离对于被摄体X而言是k1[μm]，并且对于被摄体Y而言是k2[μm]。在α[°]是同时聚焦于被摄体X和Y的倾斜角度、并且β是焦平面上的调焦校正量的情况下，下式(2)和(3)的关系成立。
x-β＝k1×tanα+β…(2)
y＝k2×tanα-β…(3)
求解联立方程式(2)和(3)来分别计算出如下式(4)和式(5)所表示的倾斜角度α和调焦校正量β：
Figure BDA0002651461650000071
Figure BDA0002651461650000072
调焦控制量可以简单地通过仅将β除以调焦透镜102的灵敏度来计算。实际上，由于诸如倾斜角度、调焦位置的停止精度和滞后等的机械因素以及诸如被摄体何时移动等的因素，因而产生误差。为了即使在存在这种误差的情况下也控制最佳倾斜角度和调焦位置，倾斜/调焦控制单元115判断由聚焦评价值计算器112计算出的评价值，并基于判断来进行适当的控制。
图4示出根据本实施例的评价框设置示例。如图4所示，在存在被摄体X和Y的情况下，倾斜/调焦控制单元115驱动倾斜角度和调焦位置(进行倾斜驱动和调焦驱动)。然后，基于此时的聚焦评价值的变化，倾斜/调焦确定单元114将倾斜驱动或调焦驱动其中之一设置为下次驱动，并将倾斜驱动方向或调焦驱动方向的驱动方向设置为下次的驱动方向。例如，假设第一区域(第一被摄体区域)是图像中存在被摄体X的区域(评价框)，并且第二区域(第二被摄体区域)是存在被摄体Y的区域(评价框)。本实施例不限于被摄体仅存在于第一区域和第二区域中、而其它被摄体存在于除第一区域和第二区域以外的第三区域中的情况。
图5说明根据本实施例的驱动器和驱动方向，并且示出基于移动的驱动器和驱动方向以及聚焦评价值的变化而要在下次驱动的驱动器和驱动方向。例如，在倾斜角度沿+方向驱动并且被摄体X(第一区域)的评价值和被摄体Y(第二区域)的评价值这两者增加的情况下，状况意味着倾斜角度不足，并且下次控制使同一驱动器沿同一方向驱动。换句话说，倾斜驱动器(图像传感器驱动器116、图像传感器106)沿+方向驱动。在倾斜角度沿+方向驱动、被摄体X的评价值增加、并且被摄体Y的评价值减少的情况下，倾斜角度不存在问题，但是调焦位置位于无限远侧，因此下次驱动不同的驱动器。换句话说，调焦驱动器(调焦透镜102、调焦驱动器117)沿近距离方向驱动。图6说明倾斜驱动方向，并分别示出倾斜角度的+方向和-方向。
现在参考图7，将说明根据本实施例的控制方法。图7是示出根据本实施例的控制方法(主处理)的流程图。图7中的各步骤主要由聚焦评价值计算器112、倾斜/调焦确定单元114或倾斜/调焦控制单元115执行。
首先，在步骤S701中，倾斜/调焦控制单元(控制单元)115控制用于倾斜或调焦驱动的图像传感器驱动器116或调焦驱动器117，以对多个被摄体进行最佳倾斜控制。更具体地，倾斜控制单元进行倾斜驱动，并且调焦控制单元进行调焦控制。在未决定是要进行倾斜驱动还是要进行调焦驱动的情况下(诸如在驱动开始时等)，通过从耐久次数较多的一者进行驱动，透镜可以被使用长的时间。接着，在步骤S702中，聚焦评价值计算器112计算多个区域(第一区域和第二区域)中的各区域的聚焦评价值(聚焦水平)。聚焦评价值框主要是面部或移动物体，并且可以通过检测诸如移动物体等的被摄体而自动地设置，或者可以由用户指定。
接着，在步骤S703中，聚焦评价值计算器112基于在步骤S702中计算出的多个区域的聚焦评价值的变化量来计算各框的增加或减少的变化量。接着，在步骤S704中，聚焦评价值计算器112判断多个区域中的聚焦评价值的增加或减少的变化量是否相同。在多个区域中的聚焦评价值的增加或减少的量相同的情况下，流程进入步骤S705。在步骤S705中，聚焦评价值计算器112判断聚焦评价值是否增加。如果聚焦评价值增加，则流程进入步骤S706。在步骤S706中，倾斜/调焦确定单元114确定使同一驱动器(图像传感器驱动器116或调焦驱动器117)沿同一方向驱动。然后，倾斜/调焦控制单元115使同一驱动器沿同一方向驱动。
在步骤S704中判断为多个区域中的聚焦评价值的变化量相同、并且在步骤S705中各框的聚焦评价值减少的情况下，流程进入步骤S707。在步骤S707中，倾斜/调焦确定单元114确定使同一驱动器(图像传感器驱动器116或调焦驱动器117)沿不同方向或相反方向驱动。换句话说，倾斜/调焦控制单元115使同一驱动器沿不同方向驱动。
在步骤S704中判断为多个区域中的聚焦评价值的变化量不同的情况下，流程进入步骤S708。在步骤S708中，倾斜/调焦确定单元114确定使不同驱动器沿多个区域中的聚焦评价值增加的方向驱动。然后，倾斜/调焦控制单元115使不同驱动器沿聚焦评价值增加的方向驱动。
现在参考图8，将说明用于判断多个区域中的聚焦评价值是增加了还是减少了的方法。图8说明用于判断聚焦评价值是增加了还是减少了的方法。在图8中，横轴表示倾斜角度或调焦位置，并且纵轴表示聚焦评价值。在图8中，前一位置表示驱动前倾斜角度或调焦位置，当前位置表示当前的倾斜角度或调焦位置，并且下一位置表示下次驱动后的倾斜角度或调焦位置。聚焦评价值计算器112或倾斜/调焦确定单元114可以通过将前一位置和当前位置彼此进行比较并且判断聚焦评价值是增加了还是减少了，来判断驱动方向。随着用于判断的位置的数量增加，判断时间也增加，但是为了减少噪声等的影响，可以基于前一位置、当前位置和下一位置各自的聚焦评价值来进行判断。可选地，可以基于前一位置和下一位置的聚焦评价值来进行判断。
本实施例确定使用倾斜角度或调焦位置处的聚焦评价值来判断聚焦评价值是增加了还是减少了，但本发明不限于本实施例。如上所述，本发明可以使用基于诸如相位差等的距离信息来确定倾斜/调焦驱动/驱动量的方法，或者可以使用获取图像传感器100的倾斜角度、焦距信息和被摄体距离信息并且利用固定量来提供倾斜/调焦驱动的方法。可选地，可以通过首先利用这种方法进行粗略倾斜驱动和粗略调焦驱动、然后使用根据本实施例的方法进行精确驱动来进行快速的倾斜控制和调焦控制。例如，可以使用相位差传感器来进行粗略倾斜驱动和粗略调焦驱动。
现在参考图5和9，将说明在倾斜角度和调焦位置被最佳地控制的情况下的聚焦停止方法。在驱动图5所示的驱动器、并且被摄体X和Y的评价值都减少的情况下，驱动前的倾斜角度或调焦位置可能成为聚焦评价值的峰值位置。峰值位置变为聚焦停止位置。
图9示出根据本实施例的聚焦停止方法。在图9中，横轴表示倾斜角度或调焦位置，并且纵轴表示聚焦评价值。在图9中，前一位置表示驱动前的倾斜角度或调焦位置，当前位置表示当前的倾斜角度或调焦位置，并且下一位置表示下次驱动后的倾斜角度或调焦位置。
聚焦评价值的峰值位置对应于在前一位置和下一位置中的各位置处评价值减少的当前位置。在优先考虑精度而不是时间的情况下，在确认为下一位置的聚焦评价值减少之后，沿相反方向进行驱动，并且通过确认为聚焦评价值减少了来判断峰值位置。这使得可以可靠地判断峰值位置。另一方面，在优先考虑直到聚焦停止为止的时间而不是精度的情况下，在被摄体X和Y的评价值都减少时判断聚焦评价值的峰值位置，驱动可被调整至峰值位置，并且聚焦可以停止。
本实施例通过改变图像传感器106的摄像面的角度来进行倾斜控制，但本发明不限于本实施例，并且可以通过改变摄像光学系统(光学系统的主面)的角度的至少一部分来进行倾斜控制。此外，不仅水平方向上的倾斜控制，而且可以以相同的方式采用相对于水平方向和垂直方向这两者的双轴倾斜控制，来在维持两个平面上的被摄体的可识别性的同时实现倾斜控制。
如上所述，根据本实施例，控制设备(摄像设备100)包括控制单元(倾斜/调焦控制单元115)、获取单元(聚焦评价值计算器112)、第一确定单元114a和第二确定单元114b。控制单元控制倾斜驱动和调焦驱动。获取单元获取图像中的第一区域(第一被摄体区域)和第二区域(第二被摄体区域)各自的聚焦水平。第一确定单元基于聚焦水平来确定是要进行倾斜驱动还是要进行调焦驱动。第二确定单元基于聚焦水平来确定倾斜驱动或调焦驱动的驱动方向。
获取单元可以获取图像中的第三区域内的聚焦水平。控制单元可以包括被配置为控制倾斜驱动的倾斜控制单元以及被配置为控制调焦驱动的调焦控制单元。获取单元可以获取倾斜驱动或调焦驱动之前或之后(即，倾斜驱动或调焦驱动之前和之后中至少之一，并且以下同样适用)的至少第一区域和第二区域的聚焦水平。控制单元可以基于倾斜驱动或调焦驱动之前或之后的至少第一区域和第二区域各自的聚焦水平的变化来控制倾斜驱动或调焦驱动。
控制单元可以在第一区域的聚焦水平和第二区域的聚焦水平这两者在倾斜驱动或调焦驱动之前或之后增加或减少的情况下，将倾斜驱动和调焦驱动中的与前次驱动相同的驱动设置为下次驱动。另一方面，控制单元可以在第一区域的聚焦水平和第二区域的聚焦水平中的一者增加而另一者减少的情况下，将倾斜驱动和调焦驱动中的与前次驱动不同的驱动设置为下次驱动(S704～S708)。
控制单元可以在第一区域的聚焦水平和第二区域的聚焦水平这两者在倾斜驱动或调焦驱动之前或之后增加的情况下，将倾斜驱动和调焦驱动中的与前次驱动相同的驱动设置为下次驱动，并将倾斜驱动和调焦驱动的驱动方向中与前次驱动方向相同的驱动方向设置为下次驱动方向(S705、S706)。
控制单元可以在第一区域的聚焦水平和第二区域的聚焦水平这两者在倾斜驱动或调焦驱动之前或之后减少的情况下，将倾斜驱动和调焦驱动中的与前次驱动相同的驱动设置为下次驱动，并将倾斜驱动和调焦驱动的驱动方向中与前次驱动方向相反的驱动方向设置为下次驱动方向(S705、S707)。
控制单元可以在第一区域的聚焦水平和第二区域的聚焦水平中的一者增加而第一区域的聚焦水平和第二区域的聚焦水平中的另一者减少的情况下将倾斜驱动和调焦驱动中的与前次驱动不同的驱动设置为下次驱动，并将倾斜驱动和调焦驱动的驱动方向中相对于前次驱动方向聚焦水平增加的驱动方向设置为下次驱动方向(S704、S708)。
控制单元可以在第一区域的聚焦水平和第二区域的聚焦水平这两者减少的情况下确定聚焦停止位置。控制单元可以基于聚焦水平和摄像设备的安装状况中至少之一来进行粗略倾斜驱动和粗略调焦驱动其中之一。然后，控制单元可以在进行粗略倾斜驱动和粗略调焦驱动其中之一之后基于聚焦水平来控制倾斜驱动和调焦驱动中的相应驱动。控制单元可以使用相位差传感器来进行粗略倾斜驱动和粗略调焦驱动其中之一。图像传感器的安装状况可以是摄像设备的安装角度、焦距和被摄体距离其中至少之一。获取单元可以基于被摄体的高频分量来计算聚焦水平。控制单元可以在倾斜驱动和调焦驱动中的相应驱动的初始驱动期间选择倾斜驱动和调焦驱动中的驱动耐久次数较多的驱动。
其它实施例
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
各实施例基于图像中的多个区域内的聚焦水平来控制调焦位置和倾斜角度。因此，各实施例可以提供各自能够实现精确且快速的倾斜控制的控制设备、控制方法和存储介质。
虽然已经参考典型实施例说明了本发明，但应当理解，本发明不限于所公开的典型实施例。以下权利要求书的范围应被给予最广泛的理解，以包含所有这样的修改以及等同结构和功能。

Claims (16)

1.一种控制设备，包括：
控制单元，其被配置为进行用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、以及用于使调焦透镜沿光轴方向移动的调焦驱动；
获取单元，其被配置为获取摄像设备所拍摄的图像中的第一区域和第二区域的评价值；
第一确定单元，其被配置为基于所述评价值来确定是要进行所述倾斜驱动还是要进行所述调焦驱动；以及
第二确定单元，其被配置为基于所述评价值来确定所述倾斜驱动或所述调焦驱动的驱动方向。
2.根据权利要求1所述的控制设备，其特征在于，所述获取单元获取所述图像中的第三区域的评价值。
3.根据权利要求1所述的控制设备，其特征在于，所述控制单元包括：
倾斜控制单元，其被配置为控制所述倾斜驱动；以及
调焦控制单元，其被配置为控制所述调焦驱动。
4.根据权利要求1所述的控制设备，其特征在于，所述获取单元在所述倾斜驱动和所述调焦驱动其中之一之前或之后获取所述第一区域和所述第二区域各自的评价值，
其中，所述控制单元基于在所述倾斜驱动和所述调焦驱动其中之一之前或之后的至少所述第一区域和所述第二区域各自的评价值的变化来控制所述倾斜驱动或所述调焦驱动。
5.根据权利要求4所述的控制设备，其特征在于，在所述第一区域的评价值和所述第二区域的评价值这两者在所述倾斜驱动或所述调焦驱动之前或之后增加或减少的情况下，所述控制单元将所述倾斜驱动和所述调焦驱动中的与前次驱动相同的驱动设置为下次驱动，
其中，在所述第一区域的评价值和所述第二区域的评价值中的一者增加而另一者减少的情况下，所述控制单元将所述倾斜驱动和所述调焦驱动中的与前次驱动不同的驱动设置为下次驱动。
6.根据权利要求4所述的控制设备，其特征在于，在所述第一区域的评价值和所述第二区域的评价值这两者在所述倾斜驱动或所述调焦驱动之前或之后增加的情况下，所述控制单元将所述倾斜驱动和所述调焦驱动中的与前次驱动相同的驱动设置为下次驱动，并且将所述倾斜驱动和所述调焦驱动的驱动方向中的与前次驱动方向相同的驱动方向设置为下次驱动方向。
7.根据权利要求4所述的控制设备，其特征在于，在所述第一区域的评价值和所述第二区域的评价值这两者在所述倾斜驱动或所述调焦驱动之前或之后减少的情况下，所述控制单元将所述倾斜驱动和所述调焦驱动中的与前次驱动相同的驱动设置为下次驱动，并且将所述倾斜驱动和所述调焦驱动的驱动方向中的与前次驱动方向相反的驱动方向设置为下次驱动方向。
8.根据权利要求4所述的控制设备，其特征在于，在所述第一区域的评价值和所述第二区域的评价值中的一者增加而所述第一区域的评价值和所述第二区域的评价值中的另一者减少的情况下，所述控制单元将所述倾斜驱动和所述调焦驱动中的与前次驱动不同的驱动设置为下次驱动，并且将所述倾斜驱动和所述调焦驱动的驱动方向中的相对于前次驱动方向所述评价值增加的驱动方向设置为下次驱动方向。
9.根据权利要求1所述的控制设备，其特征在于，在所述第一区域的评价值和所述第二区域的评价值这两者减少的情况下，所述控制单元确定聚焦停止位置。
10.根据权利要求1所述的控制设备，其特征在于，所述控制单元基于所述评价值和所述摄像设备的安装状况其中至少之一来进行粗略倾斜驱动和粗略调焦驱动其中之一，
其中，所述控制单元在进行所述粗略倾斜驱动和所述粗略调焦驱动其中之一之后，基于所述评价值来控制所述倾斜驱动和所述调焦驱动中的相应驱动。
11.根据权利要求10所述的控制设备，其特征在于，所述控制单元使用相位差传感器来进行所述粗略倾斜驱动和所述粗略调焦驱动其中之一。
12.根据权利要求10所述的控制设备，其特征在于，所述摄像设备的安装状况包括所述摄像设备的安装角度、焦距和被摄体距离其中至少之一。
13.根据权利要求1所述的控制设备，其特征在于，所述获取单元基于被摄体的高频分量来计算所述评价值。
14.根据权利要求1所述的控制设备，其特征在于，所述控制单元在所述倾斜驱动和所述调焦驱动中的相应驱动的初始驱动期间，选择所述倾斜驱动和所述调焦驱动中的驱动耐久次数较多的驱动。
15.一种控制方法，用于对控制设备进行控制，所述控制方法包括：
获取摄像设备所拍摄的图像中的第一区域和第二区域的评价值；
基于评价值来确定是要进行用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、还是要进行用于使调焦透镜沿光轴方向移动的调焦驱动；
基于所述评价值来确定所述倾斜驱动或所述调焦驱动的驱动方向；以及
控制倾斜驱动和调焦驱动。
16.一种非暂时性计算机可读存储介质，其存储用于使计算机执行用于控制控制设备的控制方法的程序，
其特征在于，所述控制方法包括：
获取摄像设备所拍摄的图像中的第一区域和第二区域的评价值；
基于评价值来确定是要进行用于使图像传感器和摄像光学系统其中至少之一相对于与光轴正交的平面倾斜的倾斜驱动、还是要进行用于使调焦透镜沿光轴方向移动的调焦驱动；
基于所述评价值来确定所述倾斜驱动或所述调焦驱动的驱动方向；以及
控制倾斜驱动和调焦驱动。
CN202010872122.5A 2019-08-29 2020-08-26 控制设备、控制方法和存储介质 Active CN112449107B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-156280 2019-08-29
JP2019156280A JP7362360B2 (ja) 2019-08-29 2019-08-29 制御装置、撮像装置、レンズ装置、および、プログラム

Publications (2)

Publication Number Publication Date
CN112449107A true CN112449107A (zh) 2021-03-05
CN112449107B CN112449107B (zh) 2023-04-18

Family

ID=71994287

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010872122.5A Active CN112449107B (zh) 2019-08-29 2020-08-26 控制设备、控制方法和存储介质

Country Status (4)

Country Link
US (1) US11297220B2 (zh)
EP (1) EP3787279A1 (zh)
JP (1) JP7362360B2 (zh)
CN (1) CN112449107B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102510704B1 (ko) * 2018-10-30 2023-03-16 캐논 가부시끼가이샤 촬상 장치
JP7271159B2 (ja) * 2018-12-14 2023-05-11 キヤノン株式会社 制御装置、撮像装置、レンズ装置、プログラム、および制御装置の制御方法
EP3968624B1 (en) * 2020-09-14 2023-11-15 Canon Kabushiki Kaisha Information processing apparatus, information processing method, and program
JP2022166384A (ja) * 2021-04-21 2022-11-02 キヤノン株式会社 制御装置、撮像装置、制御方法、およびプログラム
JP7293310B2 (ja) * 2021-04-21 2023-06-19 キヤノン株式会社 撮像装置、制御方法、および記憶媒体
US20220345633A1 (en) * 2021-04-21 2022-10-27 Canon Kabushiki Kaisha Image pickup apparatus, control method, and memory medium
US11722775B2 (en) 2021-08-17 2023-08-08 Canon Kabushiki Kaisha Image pickup apparatus and controlling method thereof

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6359650B1 (en) * 1994-12-28 2002-03-19 Canon Kabushiki Kaisha Electronic camera having a tilt detection function
US20020080242A1 (en) * 2000-07-04 2002-06-27 Koji Takahashi Image sensing system and its control method
US20070071429A1 (en) * 2005-08-31 2007-03-29 Woehler Christian F Digital camera with tiltable image sensor
CN101078860A (zh) * 2006-05-26 2007-11-28 佳能株式会社 摄像光学系统
US20160277668A1 (en) * 2015-03-19 2016-09-22 Canon Kabushiki Kaisha Automatic focus adjustment apparatus and control method therefor
CN106375650A (zh) * 2015-11-17 2017-02-01 北京智谷睿拓技术服务有限公司 对焦方法和装置、图像采集设备
US20170192247A1 (en) * 2016-01-06 2017-07-06 Canon Kabushiki Kaisha Optical control apparatus, optical apparatus, and storage medium for storing optical control program
US20170272658A1 (en) * 2016-03-16 2017-09-21 Ricoh Imaging Company, Ltd. Photographing apparatus
CN108432230A (zh) * 2015-12-21 2018-08-21 高通股份有限公司 用于计算Scheimpflug相机的方法和设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4297630B2 (ja) * 2001-04-25 2009-07-15 株式会社リコー 電子撮像装置
JP5176912B2 (ja) 2008-12-01 2013-04-03 株式会社ニコン 撮像装置
JP6838417B2 (ja) * 2016-03-16 2021-03-03 リコーイメージング株式会社 撮影装置
KR102510704B1 (ko) 2018-10-30 2023-03-16 캐논 가부시끼가이샤 촬상 장치
JP7271159B2 (ja) 2018-12-14 2023-05-11 キヤノン株式会社 制御装置、撮像装置、レンズ装置、プログラム、および制御装置の制御方法
US11381731B2 (en) 2019-03-15 2022-07-05 Canon Kabushiki Kaisha Imaging apparatus, imaging control method, and storage medium

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6359650B1 (en) * 1994-12-28 2002-03-19 Canon Kabushiki Kaisha Electronic camera having a tilt detection function
US20020080242A1 (en) * 2000-07-04 2002-06-27 Koji Takahashi Image sensing system and its control method
US20070071429A1 (en) * 2005-08-31 2007-03-29 Woehler Christian F Digital camera with tiltable image sensor
CN101078860A (zh) * 2006-05-26 2007-11-28 佳能株式会社 摄像光学系统
US20160277668A1 (en) * 2015-03-19 2016-09-22 Canon Kabushiki Kaisha Automatic focus adjustment apparatus and control method therefor
CN106375650A (zh) * 2015-11-17 2017-02-01 北京智谷睿拓技术服务有限公司 对焦方法和装置、图像采集设备
CN108432230A (zh) * 2015-12-21 2018-08-21 高通股份有限公司 用于计算Scheimpflug相机的方法和设备
US20170192247A1 (en) * 2016-01-06 2017-07-06 Canon Kabushiki Kaisha Optical control apparatus, optical apparatus, and storage medium for storing optical control program
US20170272658A1 (en) * 2016-03-16 2017-09-21 Ricoh Imaging Company, Ltd. Photographing apparatus

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
柳升龙;孙聪;刘海波;于起峰;: "一种新的移轴相机两步标定方法" *

Also Published As

Publication number Publication date
EP3787279A1 (en) 2021-03-03
US20210067704A1 (en) 2021-03-04
US11297220B2 (en) 2022-04-05
CN112449107B (zh) 2023-04-18
JP2021033189A (ja) 2021-03-01
JP7362360B2 (ja) 2023-10-17

Similar Documents

Publication Publication Date Title
CN112449107B (zh) 控制设备、控制方法和存储介质
CN111698417B (zh) 摄像设备、摄像控制方法和存储介质
US11343432B2 (en) Imaging apparatus
RU2456654C2 (ru) Устройство для съемки изображения, способ управления им и носитель информации
JP4998308B2 (ja) 焦点調節装置および撮像装置
CN112637479B (zh) 控制设备、摄像设备、控制方法和存储介质
CN111614890B (zh) 摄像设备、摄像设备的控制方法和存储介质
US11582394B2 (en) Control apparatus, control method, and storage medium for providing tilt control
JP5426874B2 (ja) オートフォーカスシステム
JP4596246B2 (ja) オートフォーカスシステム
JP2007133301A (ja) オートフォーカスカメラ
JP2020076960A (ja) 撮像装置
JP2005189634A (ja) カメラの焦点検出装置
US20220272274A1 (en) Imaging device, storage medium, and method of controlling imaging device
JP2005234350A (ja) プロジェクタ装置および焦点調節方法
KR20240010421A (ko) 촬상 장치, 제어 방법, 및 컴퓨터 프로그램
JP2020194039A (ja) 撮像装置およびセンサあおり制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant