CN104065868B - 摄像设备及其控制方法 - Google Patents

摄像设备及其控制方法 Download PDF

Info

Publication number
CN104065868B
CN104065868B CN201410100503.6A CN201410100503A CN104065868B CN 104065868 B CN104065868 B CN 104065868B CN 201410100503 A CN201410100503 A CN 201410100503A CN 104065868 B CN104065868 B CN 104065868B
Authority
CN
China
Prior art keywords
image
image stabilization
unit
amount
stabilization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410100503.6A
Other languages
English (en)
Other versions
CN104065868A (zh
Inventor
宫原晋平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN104065868A publication Critical patent/CN104065868A/zh
Application granted granted Critical
Publication of CN104065868B publication Critical patent/CN104065868B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6842—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by controlling the scanning position, e.g. windowing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/685—Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position

Abstract

本发明提供一种摄像设备及其控制方法。该摄像设备包括：摄像装置；第一图像稳定单元，用于通过驱动光学系统的一部分，光学校正图像模糊；第二图像稳定单元，用于通过控制所述摄像装置的图像读出位置，电子校正图像模糊；抖动检测单元，用于检测所述摄像设备的抖动；校正量计算单元，用于基于所检测到的抖动信号，计算图像稳定量；以及分割单元，用于将预定频带的第一图像稳定量，分成用于所述第一图像稳定单元校正图像模糊的第二图像稳定量和用于所述第二图像稳定单元校正图像模糊的第三图像稳定量。

Description

摄像设备及其控制方法
技术领域
本发明涉及一种具有图像稳定功能的摄像设备。
背景技术
已知一种具有抖动校正功能(光学图像稳定功能)的摄像设备，其中，该功能用于检测摄像设备的抖动，并且驱动可移动摄像镜头来校正由该抖动所引起的图像模糊。还提出了这样一种图像稳定功能(电子图像稳定功能)：该功能用于在抵消由抖动所导致的图像的移动的方向上，控制运动图像拍摄时的图像读取位置。该功能被用于小型的重量轻的摄像设备和装配有摄像设备的移动电话。将该类图像稳定称为电子图像稳定。
近年来，还已知这样一种技术：对于由行走等期间的拍摄而生成的大的图像模糊，与传统技术相比，该技术对运动图像记录时广角侧的图像稳定范围进行加宽以增强图像稳定效果。同时，还已知这样一种技术：该技术通过使用光学图像稳定和电子图像稳定两者来应对更大的图像模糊，以获得更大的校正效果。
作为使用光学图像稳定和电子图像稳定的技术，已知下面的技术。例如，在日本特开2010-004370中，通过滤波器将所检测到的图像模糊信号分成高频和低频。通过光学图像稳定来校正高频图像模糊，并且通过电子图像稳定校正低频图像模糊。这使得控制计算高效，从而增强校正效果。
在日本专利2803072中，当图像模糊量落在直到预定值的范围内时，通过电子图像稳定校正图像模糊。当图像模糊量等于或大于预定值时，通过光学图像稳定校正图像模糊。结果，简单加宽校正范围，从而增强校正效果。
尽管通过光学图像稳定可以在曝光期间实现图像稳定，但是，由于通过图像提取来进行图像稳定，因而不能通过电子图像稳定在曝光期间进行图像稳定。因此，在日本特开2010-004370中，仅可以在静止图像曝光期间进行光学图像稳定。另外，在日本特开2010-004370中，仅可以对高频图像模糊进行光学图像稳定。结果，仅可以在静止图像拍摄时进行高频图像稳定。此外，该技术还存在以下等问题：用于分割频率的滤波器是必需的，并且由于分割后的光学图像稳定量的计算和电子图像稳定量的计算，计算负荷和程序量增大。
在日本专利2803072中，在电子图像稳定和光学图像稳定之间存在边界。在该边界处，在用于光学图像稳定的驱动时的过冲等的影响下，图像受到干扰。
发明内容
为了解决上述问题作出本发明，并且本发明提供这样一种摄像设备：该摄像设备在无需增大计算负荷和程序量的情况下，提高运动图像拍摄或运动图像拍摄期间的静止图像拍摄时的图像稳定效果。
一个方面，本发明提供一种摄像设备，其包括：摄像装置，用于对摄像光学系统所形成的被摄体图像进行光电转换；第一图像稳定单元，用于通过在校正所述被摄体图像的模糊的方向上驱动所述摄像光学系统的一部分，来对图像模糊进行光学校正；第二图像稳定单元，用于通过在校正所述被摄体图像的模糊的方向上控制所述摄像装置的图像读出位置，来对图像模糊进行电子校正；抖动检测单元，用于检测所述摄像设备的抖动以输出抖动信号；校正量计算单元，用于基于所述抖动检测单元所检测到的抖动信号，计算图像稳定量；以及分割单元，用于将所述校正量计算单元所计算出的预定频带的第一图像稳定量，分成用于所述第一图像稳定单元校正图像模糊的第二图像稳定量和用于所述第二图像稳定单元校正图像模糊的第三图像稳定量，其中，在运动图像记录期间指示静止图像拍摄操作时进行静止图像曝光的情况下，所述第一图像稳定单元通过使用从在静止图像曝光期间所计算出的所述第一图像稳定量减去在指示静止图像拍摄操作时所获得的所述第三图像稳定量而获得的校正量，来对图像模糊进行光学校正。
另一方面，本发明提供一种用于控制摄像设备的方法，其中，所述摄像设备包括用于对摄像光学系统所形成的被摄体图像进行光电转换的摄像装置，所述方法包括以下步骤：第一图像稳定步骤，用于通过在校正所述被摄体图像的模糊的方向上驱动所述摄像光学系统的一部分，来对图像模糊进行光学校正；第二图像稳定步骤，用于通过在校正所述被摄体图像的模糊的方向上控制所述摄像装置的图像读出位置，来对图像模糊进行电子校正；抖动检测步骤，用于检测所述摄像设备的抖动以输出抖动信号；校正量计算步骤，用于基于在所述抖动检测步骤中所检测到的抖动信号，计算图像稳定量；以及分割步骤，用于将在所述校正量计算步骤中所计算出的预定频带的第一图像稳定量，分成用于在所述第一图像稳定步骤中校正图像模糊的第二图像稳定量和用于在所述第二图像稳定步骤中校正图像模糊的第三图像稳定量，其中，在运动图像记录期间指示静止图像拍摄操作时进行静止图像曝光的情况下，通过使用从在静止图像曝光期间所计算出的所述第一图像稳定量减去在指示静止图像拍摄操作时所获得的第三图像稳定量而获得的校正量，来在所述第一图像稳定步骤中对图像模糊进行光学校正。
通过以下参考附图对实施例的说明，本发明的其他特征将变得显而易见。
附图说明
图1是示出根据本发明实施例的摄像设备的框图；
图2是示出图像稳定控制单元的框图；
图3是示出图像稳定控制单元的另一例子的框图；
图4是示出焦距和图像稳定范围之间的关系的图；
图5是示出焦距和分割系数K之间的关系的图；
图6是详细示出第一摇摄控制器的框图；
图7是详细示出第二摇摄控制器的框图；
图8是示出运动图像拍摄期间的静止图像拍摄时的图像稳定量的切换的图；以及
图9是示出图像稳定计算处理的流程图。
具体实施方式
现参考附图详细说明本发明的实施例。
图1是示出根据本发明实施例的摄像设备的结构的框图。摄像设备是主要用于拍摄静止图像和运动图像的数字照相机。然而，摄像设备可以不是数字照相机，而是数字单镜头反光照相机或数字摄像机。
参考图1，变焦单元101是包括用于进行变焦的变焦透镜的透镜单元。变焦驱动控制单元102控制驱动变焦单元101。光圈/快门单元103用作光圈和快门。光圈/快门驱动控制单元104控制驱动光圈/快门单元103。由用作为校正构件的移位透镜(图像稳定透镜)构成图像稳定单元105。图像稳定单元105通过在与光轴垂直的方向上沿以光轴为转动中心的圆弧移动用作为摄像光学系统的一部分的图像稳定透镜(移位透镜)，偏转摄像光轴。因此，可以移动摄像平面上的图像的图像形成位置。图像稳定控制单元106控制驱动图像稳定单元105。调焦单元107包括通过调节焦点而形成被摄体图像的调焦透镜。焦点驱动控制单元108控制驱动调焦单元107。
摄像单元109将穿过各透镜组的光学图像光电转换成电信号。摄像信号处理单元110将从摄像单元109输出的电信号转换成视频信号。另外，摄像信号处理单元110根据图像稳定控制单元106的校正量，控制视频信号的读出位置。视频信号处理单元111根据用途来处理从摄像信号处理单元110输出的视频信号。如果需要，显示单元112基于从视频信号处理单元111输出的信号显示图像。电源单元113根据用途来向整个系统提供电力。外部输入/输出端子单元114从外部输入通信信号和视频信号以及将通信信号和视频信号输出到外部。使用操作单元115来操作该系统。存储单元116存储诸如视频信息等的各种数据。抖动检测单元117检测施加于照相机的抖动，并且输出抖动检测信号。照相机系统控制单元118控制整个系统。
接着说明具有上述结构的摄像设备的示意性操作。
操作单元115包括能够选择图像稳定ON/OFF的图像稳定开关。当利用图像稳定开关选择了图像稳定ON时，照相机系统控制单元118指示图像稳定控制单元106进行图像稳定操作。在接收到该指示时，图像稳定控制单元106进行图像稳定操作，直到发出图像稳定OFF指示为止。操作单元115还包括能够选择下面的模式的图像稳定模式开关：仅通过光学图像稳定来进行图像稳定的模式(第一图像稳定)和通过光学图像稳定和电子图像稳定两者来进行图像稳定的模式(第二图像稳定)。在仅通过光学图像稳定来进行图像稳定的模式中，摄像单元109的读出位置是恒定的，但是加宽读出范围从而使得摄像设备可以应对广角拍摄。相反，当选择了通过光学图像稳定和电子图像稳定两者来进行图像稳定的模式时，摄像单元109的读出范围(作为图像所输出的范围)变窄，但是可以根据图像稳定量而改变读出位置，从而使得摄像设备可以应对更大的图像模糊。
操作单元115包括被配置成根据按下量顺序接通第一开关SW1和第二开关SW2的快门释放按钮。当快门释放按钮差不多被按下一半时，接通开关SW1，并且当完全按下快门释放按钮时，接通开关SW2。当接通开关SW1时，焦点驱动控制单元108驱动调焦单元107来调节焦点。同时，光圈/快门驱动控制单元104驱动光圈/快门单元103来设置适当的曝光量。当接通开关SW2时，将根据摄像单元109所曝光的光学图像所获得的图像数据存储在存储单元116中。
操作单元115包括运动图像记录开关。当按下该开关时，开始运动图像拍摄，并且当在记录期间再次按下该开关时，结束记录。当在运动图像拍摄期间按下SW1和SW2时，摄像设备甚至可以应对运动图像拍摄期间的静止图像拍摄。操作单元115还包括能够选择重放模式的重放模式选择开关。在重放模式下，停止图像稳定操作。
此外，操作单元115包括输入变焦指示所使用的变焦开关。当从变焦开关输入变焦指示时，变焦驱动控制单元102经由照相机系统控制单元118接收该指示，并且驱动变焦单元101以将变焦单元101移动至所指示的变焦位置。这样，焦点驱动控制单元108基于从摄像单元109所发送的、并且通过信号处理单元110和111处理后的图像信息，驱动调焦单元107来调节焦点。
图2是用于更详细地说明图像稳定控制单元106的框图。图像稳定控制单元106在俯仰方向和横摆方向上具有相同结构，因而说明仅用于一个轴的结构。
抖动检测单元117主要通过使用陀螺仪来检测抖动，并且输出角速度数据作为抖动检测信号。A/D转换器201将从抖动检测单元117输出的数据转换成数字数据。
高通滤波器202消除陀螺偏移成分和温度漂移成分。低通滤波器203对角速度数据进行积分，从而将其转换成角度数据。光学图像稳定灵敏度乘法器204(校正量计算单元)将角度数据转换成图像稳定透镜的移位量(驱动目标位置)。由于灵敏度根据焦距而改变，因而光学图像稳定灵敏度乘法器204针对当时的焦距乘以不同的灵敏度。图像稳定量分割单元205以K：1-K(0<K<1)分割图像稳定量。图像稳定量分割单元205将图像稳定量乘以K以计算用于光学图像稳定(第一图像稳定)的图像稳定量。图像稳定量分割单元205将图像稳定量乘以1-K以计算用于电子图像稳定(第二图像稳定)的图像稳定量。
光学图像稳定输出切换单元206在运动图像拍摄和静止图像拍摄(包括运动图像拍摄期间的静止图像拍摄)之间切换图像稳定量。光学图像稳定输出切换单元206在静止图像拍摄时，输出用于光学图像稳定(第一图像稳定)的图像稳定量。光学图像稳定量限制器A207将图像稳定量钳位在光学图像稳定的可校正范围(图像稳定透镜可移动范围或可控制范围)内。也就是说，光学图像稳定量限制器A207通过使用光学图像稳定的可能范围作为上限，输出用于光学图像稳定的图像稳定量。这样可以防止下面的情况：图像稳定透镜撞到光学图像稳定的可校正范围的端部。当图像稳定透镜撞到光学图像稳定的可校正范围的端部时，不能进行任何图像稳定，图像稳定效果降低，并且视频表现变差。
PID控制器208是用于控制图像稳定透镜的位置的控制器。驱动器单元209将图像稳定量转换成电压，并且提供用于驱动的电流。位置检测器211检测图像稳定单元105中的图像稳定透镜的位置，并且将其输出为电压。A/D转换器212将表示图像稳定透镜的位置的模拟电压转换成数字数据(位置检测数据)。
灵敏度乘法器213将用于电子图像稳定(第二图像稳定)的图像稳定量(用作为光学图像稳定量的移位量)转换成用作为电子图像稳定量的读出像素量。电子图像稳定输出切换单元214在运动图像拍摄和运动图像拍摄期间的静止图像拍摄之间切换图像稳定量。电子图像稳定输出切换单元214输出运动图像拍摄时用于光学图像稳定(第一图像稳定)和电子图像稳定(第二图像稳定)的图像稳定量。电子图像稳定量限制器B215将用于电子图像稳定(第二图像稳定)的图像稳定量钳位在电子图像稳定的可能范围内。也就是说，电子图像稳定量限制器B215通过使用电子图像稳定的可能范围作为上限，输出用于电子图像稳定的图像稳定量。
图3示出用于在运动图像拍摄期间的静止图像拍摄时获得更大图像稳定效果的结构，尽管CPU的计算负荷和程序量与图2的结构相比变得更大。在对图3的说明中，仅说明与图2的不同。
相位补偿滤波器316通过补偿来自高通滤波器302的输出的相位，加宽要进行图像稳定控制的抖动的频带。第二低通滤波器317对用作为从抖动检测单元117所输出的抖动检测信号的角速度数据进行积分，从而将角速度数据转换成角度数据。灵敏度乘法器318将角度数据转换成图像稳定透镜的移位量。相位补偿滤波器316、低通滤波器317和灵敏度乘法器318的路径形成用于计算静止图像曝光时的图像稳定量的计算单元。在运动图像拍摄或静止图像拍摄的待机时，不使用来自相位补偿滤波器316、低通滤波器317和灵敏度乘法器318的路径的输出。这是因为加宽了要进行图像稳定控制的抖动的频带。
当加宽要进行图像稳定控制的抖动的频带时，校正摇摄等时的低频带的抖动。然而，如果在如运动图像拍摄或静止图像拍摄的待机时那样容易发生诸如摇摄等的操作的情况下，加宽要进行图像稳定控制的抖动的频带，则校正构件和电子图像稳定范围的图像输出范围容易达到可校正范围的端部。因此，防止校正构件和电子图像稳定范围的图像输出范围达到电子图像稳定范围的图像输出范围，从而使得不会降低图像稳定效果和使得视频表现劣化。
图4是示出照相机的焦距和图像稳定的可移动范围之间的关系的图。在图4中，横坐标表示焦距，并且纵坐标表示可移动范围。在图4中，(a)是光学图像稳定的可移动范围，(b)是电子图像稳定的可移动范围，并且(c)是整体图像稳定的可移动范围。也就是说，(a)＋(b)＝(c)。
由透镜的光学特性决定光学图像稳定的可移动范围A。由摄像装置的剩余像素决定电子图像稳定的可移动范围B。注意，校正角(用于校正由抖动所导致的图像的移动的光轴的偏转度)针对光学图像稳定的可移动范围A和电子图像稳定的可移动范围B两者，在变焦时改变。更具体地，即使当向照相机施加相同的抖动时，为了校正由抖动所生成的图像模糊而驱动图像稳定单元105的图像稳定透镜的量，根据变焦位置(光学变焦倍率和焦距)而改变。即使同样向照相机施加1deg抖动，图像稳定单元105为了校正由1deg抖动所生成的图像模糊而在广角端移动的量，小于图像稳定单元105在远摄端移动的量。
图5是示出焦距和分割系数K之间的关系的图。基于上述的光学图像稳定的可校正范围A和电子图像稳定的可校正范围B确定分割系数K：
K=A/(A+B)...(1)
当沿横坐标绘制焦距、并且沿纵坐标绘制分割系数K时，如图5所示，K始终取值1或更小。
根据公式(1)，抑制了由光学图像稳定的过冲所导致的图像干扰。在如图5所示照相机处于广角端、中间位置和远摄端的情况下对此进行详细说明。
当图像稳定单元105的图像稳定透镜在光学图像稳定的可校正范围A内移动、并且电子图像稳定的图像读出范围(图像输出范围)在可校正范围B内移动时，可以校正直到与括号内的抖动角相对应的图像模糊的图像模糊。假定光学图像稳定的可校正范围A在广角端、中间位置和远摄端分别为(2deg、0.75deg、0.3deg)，并且电子图像稳定的可校正范围B在广角端、中间位置和远摄端分别为(2.5deg、1.6deg、1.1deg)，则分割系数K在广角端、中间位置和远摄端变成(0.444、0.319、0.214)。
接着参考图6和7说明摇摄时的光学图像稳定控制和电子图像稳定控制。
图6和2之间的不同在于第一摇摄控制器616，其中，第一摇摄控制器616接收通过对抖动检测信号进行A/D转换所获得的输出(来自A/D转换器201的输出)和乘以了灵敏度的图像稳定量(来自光学图像稳定灵敏度乘法器204的输出)。第一摇摄控制器616改变图像稳定控制单元106的高通滤波器202和低通滤波器203的截止频率。图像稳定模式选择器617可以选择仅使用光学图像稳定的模式或者使用光学图像稳定和电子图像稳定两者的模式。基本上，随着通过A/D转换抖动信号所获得的输出(来自A/D转换器201的输出)越大，第一摇摄控制器616增大高通滤波器202和低通滤波器203的截止频率。另外，随着图像稳定量(来自光学图像稳定灵敏度乘法器204的输出)越大，第一摇摄控制器616增大高通滤波器202和低通滤波器203的截止频率。这样衰减图像稳定量，防止校正构件和电子图像稳定范围的图像输出范围停留在图像稳定控制末端，并且在摇摄之后提早恢复图像稳定。
在使用光学图像稳定和电子图像稳定两者的图像稳定模式下，与仅使用光学图像稳定的图像稳定模式相比，能够进行图像稳定的范围变宽。为此，在使用光学图像稳定和电子图像稳定两者的图像稳定模式下，与仅使用光学图像稳定的图像稳定模式相比，摇摄时的截止频率的升高率降低。
图7和2之间的不同在于第二摇摄控制器716，其中，第二摇摄控制器716接收通过A/D转换抖动信号所获得的输出和乘以了灵敏度的图像稳定量。来自第二摇摄控制器716的输出是要从抖动信号减去的偏移值。图像稳定模式选择器717可以选择仅使用光学图像稳定的模式或者使用光学图像稳定和电子图像稳定两者的模式。基本上，偏移值随着抖动信号变大而变大，并且还随着图像稳定量变大而变大。这样衰减图像稳定量，防止停留在图像稳定控制末端，并且在摇摄之后提早恢复图像稳定。
在使用光学图像稳定和电子图像稳定两者的图像稳定模式下，与仅使用光学图像稳定的模式相比，图像稳定范围变宽，因而即使对于相同图像稳定信号和图像稳定量，偏移值也减小。例如，在使用光学图像稳定和电子图像稳定两者的图像稳定模式下，当整个校正范围是仅光学图像稳定下的可移动范围的两倍宽时，摇摄时要从抖动信号减去的偏移值减小至仅光学图像稳定下所使用的偏移值的1/2。
接着参考图8说明在使用光学图像稳定和电子图像稳定两者时的静止图像拍摄处理。应该理解，可以通过以上参考图2、3、6或7所述的图像稳定配置中的任一配置来进行以下所述在使用光学图像稳定和电子图像稳定两者时的静止图像拍摄。在图8中，上图是光学图像稳定量的时间序列图，下图是电子图像稳定量的时间序列图。
在除静止图像曝光以外的操作期间(即，在运动图像记录期间)，在光学图像稳定时，将透镜驱动通过将图像稳定量乘以K=A/(A+B)所获得的用于光学图像稳定(第一图像稳定)的图像稳定量。相反，在电子图像稳定时，将图像读出位置改变通过将图像稳定量乘以K=B/(A+B)所获得的用于电子图像稳定(第二图像稳定)的图像稳定量。当按下SW2以开始静止图像曝光时，使用K＝1计算图像稳定量来进行光学图像稳定。另外，保持作为通过从基于K＝1的图像稳定量减去基于K=A/(A+B)的图像稳定量所获得的值的OffsetB(即，指示静止图像拍摄时的电子图像稳定量)(例如，保持在存储器中)，从而使得可以从紧挨着的前一透镜位置开始连续进行光学图像稳定。因此，OffsetB是在运动图像记录期间指示静止图像拍摄时所获得的电子图像稳定量。在该曝光期间，使用始终通过从基于K＝1的图像稳定量减去OffsetB所获得的值进行光学图像稳定(第一切换)。换句话说，通过从在静止图像曝光期间所计算出的光学图像稳定量(基于K＝1的图像稳定量)减去在指示静止图像拍摄操作时所获得的电子图像稳定量(OffsetB)，获得光学图像稳定量。
相反，在电子图像稳定时，保持根据对于SW2的基于K＝0的图像稳定量的、用作为基于K=B/(A+B)的图像稳定量(即，指示静止图像拍摄时的电子图像稳定量)的OffsetA(例如，保持在存储器中)。在该曝光期间，将通过把OffsetA相加至基于K＝0的图像稳定量所获得的值设置为图像读出位置，并且输出图像(第二切换)。
在曝光结束之后，图像稳定量分割单元205将分割系数K从K＝1逐渐切换(即，改变)成K=A/(A+B)。结果，将光学图像稳定量从图像稳定量逐渐切换(改变)成通过将图像稳定量乘以K=A/(A+B)所获得的值。即使在电子图像稳定时，图像稳定量在曝光结束时也为0，并且逐渐被切换(改变)成通过将图像稳定量乘以K=B/(A+B)所获得的值。
假定S是基于K＝1的图像稳定量，并且C(例如，0≤C≤100)是用于逐渐切换(改变)图像稳定量的转变计数器，则如下给出转变期间的光学图像稳定量S0和电子图像稳定量Se：
S0=(S-OffsetB)×(100-C)/100+K×S×C/100
Se=OffsetA×(100-C)/100+(1-K)×S×C/100
(其中，C计数从0到100)...(2)
在转变计数器C达到最大值之后，使用通过将图像稳定量乘以分割系数K=A/(A+B)所获得的值，通过光学图像稳定进行图像稳定。在电子图像稳定时，使用通过将图像稳定量乘以分割系数K=B/(A+B)所获得的值来改变图像读出位置，并且进行图像稳定。
接着参考图9的流程图详细说明处理。在启动照相机之后，通过预定控制采样来重复进行该流程图。
在步骤S901，检查在图像稳定模式下仅使用光学图像稳定还是使用光学图像稳定和电子图像稳定两者。如果图像稳定模式仅使用光学图像稳定，则在步骤S902将图像稳定量分割系数K强制设置成1。
在步骤S903，仅对于光学图像稳定改变摇摄控制参数。也就是说，图像稳定量分割单元205代入(设置)分割系数K＝1。在步骤S904，将图像稳定量S(通过将图像稳定量S乘以分割系数K＝1所获得的计算结果)代入(设置为)光学图像稳定量S0，并且将0(实际上，通过将图像稳定量S乘以1－K＝0所获得的计算结果)代入(设置为)电子图像稳定量Se。
如果在步骤S901，图像稳定模式使用光学图像稳定和电子图像稳定两者，则图像稳定量分割单元205在步骤S905计算分割系数K=A/(A+B)。在步骤S906，第一摇摄控制器616改变摇摄控制参数。在步骤S907，判断是否正在进行静止图像曝光。如果没有进行静止图像曝光(步骤S907为“否”)，则在步骤S908判断转变标志。如果步骤S908为假(FALSE)，也就是说，既没有进行静止图像曝光也没有进行转变，则将S×K设置为光学图像稳定量S0，并且将S×(1-K)设置为电子图像稳定量Se。
如果正在进行静止图像曝光(步骤S907为“是”)，则将此时的OffsetA和OffsetB保持在存储器中，并且在步骤S910将转变标志改变成真(TRUE)。作为静止图像曝光期间的图像稳定量，设置S0=S-OffsetB和Se=OffsetA。
如果静止图像曝光结束、并且在步骤S907判断为没有进行静止图像曝光，则紧接着在静止图像曝光结束之后将转变标志设置为真。因此，在步骤S911，转变计数器C增大。在图9中，例如，转变计数器取0～100的数值，但是最大数值是任意数值。
然后，在步骤S912，设置图像稳定量。通过公式(2)给出此时的图像稳定量。在步骤S913，判断转变计数器是否达到了最大值。如果转变计数器没有达到最大值，则结束该处理，并且返回至步骤S901。
如果在步骤S913判断为转变计数器达到了最大值，则将转变标志改变成假，并且将转变计数器初始化成0，并且处理返回至步骤S901。如果C＝100(最大值)，则根据步骤S912的结果，光学图像稳定量S0变成K×S，并且电子图像稳定量Se变成(1-K)×S，其中，它们与步骤S909的计算结果连续相关。
如上所述，作为根据本发明实施例的摄像设备，示例性说明了用于拍摄静止图像和运动图像的数字照相机。然而，摄像设备可以是诸如移动电话、智能手机、平板装置或游戏装置等的装配有摄像设备的电子装置。
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管参考实施例说明了本发明，但是应该理解，本发明不局限于所公开的实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (6)

1.一种摄像设备，其包括：
摄像装置，用于对摄像光学系统所形成的被摄体图像进行光电转换；
第一图像稳定单元，用于通过在校正所述被摄体图像的模糊的方向上驱动所述摄像光学系统的一部分，来对图像模糊进行光学校正；
第二图像稳定单元，用于通过在校正所述被摄体图像的模糊的方向上控制所述摄像装置的图像读出位置，来对图像模糊进行电子校正；
抖动检测单元，用于检测所述摄像设备的抖动以输出抖动信号；
校正量计算单元，用于基于所述抖动检测单元所检测到的抖动信号，计算图像稳定量；以及
分割单元，用于将所述校正量计算单元所计算出的预定频带的第一图像稳定量，分成用于所述第一图像稳定单元校正图像模糊的第二图像稳定量和用于所述第二图像稳定单元校正图像模糊的第三图像稳定量，
其特征在于，在运动图像记录期间指示静止图像拍摄操作时进行静止图像曝光的情况下，所述第一图像稳定单元通过使用从在静止图像曝光期间所计算出的所述第一图像稳定量减去在指示静止图像拍摄操作时所获得的所述第三图像稳定量而获得的校正量，来对图像模糊进行光学校正。
2.根据权利要求1所述的摄像设备，其中，在运动图像记录期间指示静止图像拍摄操作时进行静止图像曝光的情况下，将所述第二图像稳定单元保持在使用在指示静止图像拍摄操作时所获得的所述第三图像稳定量而计算出的所述摄像装置的图像读出位置处。
3.根据权利要求1所述的摄像设备，其中，
所述分割单元以所述第二图像稳定量：所述第三图像稳定量＝K：(1－K)来分割所述第一图像稳定量，以及
设A是所述第一图像稳定单元的可移动范围，以及B是所述第二图像稳定单元的可移动范围，
则满足分割系数K＝A/(A+B)。
4.根据权利要求3所述的摄像设备，其中，与远摄侧相比，所述分割系数K在广角侧取更大的值。
5.根据权利要求1所述的摄像设备，其中，还包括：
模式选择单元，用于选择仅利用所述第一图像稳定单元进行图像稳定的模式以及利用所述第一图像稳定单元和所述第二图像稳定单元两者进行图像稳定的模式，以及
摇摄控制单元，用于基于所述抖动信号和所述第一图像稳定量，从输入至所述校正量计算单元的所述抖动信号减去预定偏移值，
其中，与仅使用所述第一图像稳定单元的模式相比，在使用所述第一图像稳定单元和所述第二图像稳定单元两者的模式下，所述偏移值减小。
6.一种用于控制摄像设备的方法，其中，所述摄像设备包括用于对摄像光学系统所形成的被摄体图像进行光电转换的摄像装置，所述方法包括以下步骤：
第一图像稳定步骤，用于通过在校正所述被摄体图像的模糊的方向上驱动所述摄像光学系统的一部分，来对图像模糊进行光学校正；
第二图像稳定步骤，用于通过在校正所述被摄体图像的模糊的方向上控制所述摄像装置的图像读出位置，来对图像模糊进行电子校正；
抖动检测步骤，用于检测所述摄像设备的抖动以输出抖动信号；
校正量计算步骤，用于基于在所述抖动检测步骤中所检测到的抖动信号，计算图像稳定量；以及
分割步骤，用于将在所述校正量计算步骤中所计算出的预定频带的第一图像稳定量，分成用于在所述第一图像稳定步骤中校正图像模糊的第二图像稳定量和用于在所述第二图像稳定步骤中校正图像模糊的第三图像稳定量，
其特征在于，在运动图像记录期间指示静止图像拍摄操作时进行静止图像曝光的情况下，通过使用从在静止图像曝光期间所计算出的所述第一图像稳定量减去在指示静止图像拍摄操作时所获得的第三图像稳定量而获得的校正量，来在所述第一图像稳定步骤中对图像模糊进行光学校正。
CN201410100503.6A 2013-03-18 2014-03-18 摄像设备及其控制方法 Active CN104065868B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013055419A JP6074298B2 (ja) 2013-03-18 2013-03-18 撮像装置、画像処理装置、及びそれらの制御方法
JP2013-055419 2013-03-18

Publications (2)

Publication Number Publication Date
CN104065868A CN104065868A (zh) 2014-09-24
CN104065868B true CN104065868B (zh) 2017-05-24

Family

ID=50634969

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410100503.6A Active CN104065868B (zh) 2013-03-18 2014-03-18 摄像设备及其控制方法

Country Status (5)

Country Link
US (1) US9253400B2 (zh)
JP (1) JP6074298B2 (zh)
CN (1) CN104065868B (zh)
DE (1) DE102014204905B4 (zh)
GB (1) GB2514657B (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6074298B2 (ja) 2013-03-18 2017-02-01 キヤノン株式会社 撮像装置、画像処理装置、及びそれらの制御方法
JP6494202B2 (ja) * 2013-08-07 2019-04-03 キヤノン株式会社 像振れ補正装置、その制御方法、および撮像装置
US9596411B2 (en) * 2014-08-25 2017-03-14 Apple Inc. Combined optical and electronic image stabilization
JP6530602B2 (ja) * 2014-12-22 2019-06-12 キヤノン株式会社 撮像装置及びその制御方法
JP6598469B2 (ja) * 2015-02-16 2019-10-30 キヤノン株式会社 ブレ補正装置及びその制御方法
JP2016161884A (ja) * 2015-03-04 2016-09-05 キヤノン株式会社 撮像装置及びその制御方法
JP6642971B2 (ja) * 2015-03-13 2020-02-12 キヤノン株式会社 像ブレ補正装置、光学機器、撮像装置および制御方法
JP6590541B2 (ja) * 2015-06-11 2019-10-16 オリンパス株式会社 ぶれ補正装置
US10659676B2 (en) 2015-12-08 2020-05-19 Canon Kabushiki Kaisha Method and apparatus for tracking a moving subject image based on reliability of the tracking state
US10270973B2 (en) 2015-12-08 2019-04-23 Canon Kabushiki Kaisha Control device and imaging apparatus with a subject selectable mode with higher image blur correction
JP6833461B2 (ja) * 2015-12-08 2021-02-24 キヤノン株式会社 制御装置および制御方法、撮像装置
JP6700853B2 (ja) * 2016-02-26 2020-05-27 キヤノン株式会社 撮像システムおよびその制御方法、撮像装置、レンズ装置
JP6635825B2 (ja) * 2016-02-26 2020-01-29 キヤノン株式会社 撮像システムおよびその制御方法、撮像装置、レンズ装置
JP6674701B2 (ja) * 2016-09-28 2020-04-01 ルネサスエレクトロニクス株式会社 画像処理モジュール、および半導体システム
TWI622300B (zh) * 2016-10-27 2018-04-21 財團法人國家實驗研究院 影像感測器讀取裝置
JP7013199B2 (ja) * 2017-10-23 2022-01-31 キヤノン株式会社 撮像装置およびその制御方法
JP2019106656A (ja) * 2017-12-14 2019-06-27 ルネサスエレクトロニクス株式会社 半導体装置および電子機器
JP2019106655A (ja) * 2017-12-14 2019-06-27 ルネサスエレクトロニクス株式会社 半導体装置および電子機器
WO2020171015A1 (ja) 2019-02-20 2020-08-27 富士フイルム株式会社 ぶれ補正装置、撮像装置、監視システム、及びプログラム
KR20210118622A (ko) * 2020-03-23 2021-10-01 삼성전자주식회사 고배율에서 흔들림을 보정하는 방법 및 그 전자 장치
JP7299385B2 (ja) * 2021-03-08 2023-06-27 ローム株式会社 アクチュエータドライバ、およびこれを用いた撮像装置、ならびに撮像方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2775878B2 (ja) * 1989-07-26 1998-07-16 キヤノン株式会社 防振撮像装置
JP2803072B2 (ja) 1990-10-18 1998-09-24 富士写真フイルム株式会社 手振れ補正装置
JPH07123317A (ja) * 1993-10-21 1995-05-12 Canon Inc 防振機能付き撮影装置
JP2005077886A (ja) * 2003-09-02 2005-03-24 Canon Inc 撮影装置
JP2006081006A (ja) * 2004-09-10 2006-03-23 Konica Minolta Photo Imaging Inc 振れ補正機構付きカメラ
CN1838738A (zh) * 2005-03-25 2006-09-27 株式会社尼康 电子照相机
WO2007015417A1 (ja) * 2005-08-04 2007-02-08 Matsushita Electric Industrial Co., Ltd. 撮像装置
JP4766320B2 (ja) * 2006-02-06 2011-09-07 カシオ計算機株式会社 撮像装置及びそのプログラム
JP4969182B2 (ja) * 2006-08-28 2012-07-04 富士フイルム株式会社 手振れ量検出装置及び撮影装置
JP4900939B2 (ja) * 2006-11-28 2012-03-21 キヤノン株式会社 撮像装置の制御方法
US8692895B2 (en) * 2007-01-05 2014-04-08 Ricoh Company, Ltd. Image apparatus and electronic device
JP4840731B2 (ja) * 2007-02-21 2011-12-21 カシオ計算機株式会社 撮像装置、撮像方法、及びプログラム
US8035692B2 (en) * 2007-03-30 2011-10-11 Fujifilm Corporation Image taking apparatus which forms an image of a subject on an imaging device to create image data representative of the subject
JP4518197B2 (ja) 2008-06-20 2010-08-04 ソニー株式会社 撮像装置、及び像振れ補正方法並びにプログラム
JP5094606B2 (ja) * 2008-07-15 2012-12-12 キヤノン株式会社 像振れ補正装置およびそれを備えた光学機器、撮像装置、像振れ補正装置の制御方法
JP5111306B2 (ja) * 2008-08-29 2013-01-09 キヤノン株式会社 像ブレ補正機能を有する光学機器及びその制御方法
JP5328307B2 (ja) * 2008-11-14 2013-10-30 キヤノン株式会社 振れ補正機能を有する撮影装置及びその制御方法
JP5419647B2 (ja) * 2009-11-16 2014-02-19 キヤノン株式会社 像振れ補正装置およびそれを備えた撮像装置、像振れ補正装置の制御方法
KR101630297B1 (ko) * 2009-12-03 2016-06-14 삼성전자주식회사 손떨림 보정 방법 및 장치
JP5553597B2 (ja) * 2009-12-25 2014-07-16 キヤノン株式会社 撮像装置及びその制御方法
JP5003769B2 (ja) * 2010-01-18 2012-08-15 株式会社Ｊｖｃケンウッド 撮像装置および画像振れ補正方法
JP5520071B2 (ja) * 2010-02-05 2014-06-11 キヤノン株式会社 像振れ補正装置および像振れ補正装置を備えた光学機器、撮像装置、像振れ補正装置の制御方法
JP5181001B2 (ja) * 2010-08-09 2013-04-10 キヤノン株式会社 像振れ補正装置及びその制御方法、及び、像振れ補正装置を搭載した撮像装置及び光学機器
JP6004785B2 (ja) 2012-06-29 2016-10-12 キヤノン株式会社 撮像装置、光学機器、撮像システムおよび制御方法
JP6074298B2 (ja) 2013-03-18 2017-02-01 キヤノン株式会社 撮像装置、画像処理装置、及びそれらの制御方法

Also Published As

Publication number Publication date
CN104065868A (zh) 2014-09-24
GB201404826D0 (en) 2014-04-30
US9253400B2 (en) 2016-02-02
US20140267807A1 (en) 2014-09-18
DE102014204905A1 (de) 2014-09-18
GB2514657B (en) 2015-09-16
JP6074298B2 (ja) 2017-02-01
JP2014182209A (ja) 2014-09-29
DE102014204905B4 (de) 2019-11-07
GB2514657A (en) 2014-12-03

Similar Documents

Publication Publication Date Title
CN104065868B (zh) 摄像设备及其控制方法
TWI360349B (en) Digital imaging apparatus with camera shake compen
KR101034109B1 (ko) 촬영장치 및 프로그램이 기억된 컴퓨터 판독 가능한 기록매체
US9635258B2 (en) Image pickup apparatus, method of controlling image pickup apparatus, image processing apparatus, and image processing method
KR101528860B1 (ko) 디지털 촬영 장치의 흔들림 보정 방법 및 장치
JP6727791B2 (ja) 追尾制御装置および追尾制御方法、撮像装置
US9170429B2 (en) Optical apparatus and image capturing apparatus, and method of controlling the same and storage medium
US20170155841A1 (en) Image-shake correction apparatus and control method thereof
US9906708B2 (en) Imaging apparatus, imaging method, and non-transitory storage medium storing imaging program for controlling an auto-focus scan drive
CN105007406B (zh) 光学装置及其控制方法
CN104717403B (zh) 图像抖动校正装置及其控制方法、光学装置以及摄像装置
US20070242140A1 (en) Image capturing apparatus, control method therefor, image processing apparatus, image processing method, and program
JP2006303709A (ja) シェーディング補正装置及び撮像装置
CN108337428A (zh) 图像稳定设备及其控制方法、摄像设备和存储介质
JP4487811B2 (ja) 撮影装置
JP6643095B2 (ja) 像ブレ補正装置及びその制御方法、プログラム、記憶媒体
JP2012090216A (ja) 撮像装置及び撮像装置の制御方法
US9143684B2 (en) Digital photographing apparatus, method of controlling the same, and computer-readable storage medium
JP2016063307A (ja) 画像処理装置、撮像装置、画像処理方法
JP2007306436A (ja) 撮像装置
JP2018098735A (ja) 撮像装置およびその制御方法
JP2002330335A (ja) 静止画像撮像装置
JP2011135537A (ja) 撮像装置及び撮像装置の制御方法
JP2009159380A (ja) 撮像装置及び撮像方法
JP6465553B2 (ja) 撮像装置およびその制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant