JP2016151619A - Shake correction device and control method thereof - Google Patents

Shake correction device and control method thereof Download PDF

Info

Publication number
JP2016151619A
JP2016151619A JP2015027923A JP2015027923A JP2016151619A JP 2016151619 A JP2016151619 A JP 2016151619A JP 2015027923 A JP2015027923 A JP 2015027923A JP 2015027923 A JP2015027923 A JP 2015027923A JP 2016151619 A JP2016151619 A JP 2016151619A
Authority
JP
Japan
Prior art keywords
signal
blur
correction
blur correction
shake
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015027923A
Other languages
Japanese (ja)
Other versions
JP6598469B2 (en
Inventor
柴田 昌宏
Masahiro Shibata
昌宏 柴田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2015027923A priority Critical patent/JP6598469B2/en
Publication of JP2016151619A publication Critical patent/JP2016151619A/en
Application granted granted Critical
Publication of JP6598469B2 publication Critical patent/JP6598469B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a shake correction device capable of, when generating a static image from a dynamic image taken with camera work having motion, obtaining a perfectly still static image with no shake which cannot always be achieved when seen in a frame unit, while suppressing generation of a significantly shaken static image, and also capable of reducing a trouble of selecting a static image from continuous multiple frame images of a prolonged period.SOLUTION: An acquisition timing for a static image frame is determined while taking a dynamic image, enabling a shake correction control appropriate for a static image with a static image correction amount as a correction target value, and a high-quality static image with little shake can be extracted when generating a static image from a recorded dynamic image.SELECTED DRAWING: Figure 1

Description

本発明は、動画像と静止画像の撮像に最適なブレ補正制御を行う技術を搭載したブレ補正装置に関する。   The present invention relates to a shake correction apparatus equipped with a technique for performing shake correction control optimal for capturing moving images and still images.

近年、カメラやビデオなどの撮像装置の普及とその利用形態の変化に伴って、1台で動画像と静止画像を同時に撮れる撮像装置の要求が高まってきている。しかし、動画像は映像の時間変化が映し出されるものであり、静止画像は瞬時の画像が切り出されるものである。   In recent years, with the widespread use of imaging devices such as cameras and videos and changes in their usage, there has been an increasing demand for imaging devices that can simultaneously capture a moving image and a still image. However, a moving image shows a time change of a video, and a still image is an instantaneous image cut out.

このようの画像表現の違いにより、動画像の撮影と静止画像の撮影とでは、手ブレ補正(IS)やオートフォーカス(AF)や露出制御(AE)などカメラ撮影時の制御が異なる点が多い。   Due to such differences in image representation, there are many differences between camera shooting and camera control such as camera shake correction (IS), autofocus (AF), and exposure control (AE) between moving image shooting and still image shooting. .

例えば、ブレ補正制御に関して言うと、動画像撮影の場合には、時にはきっちりと止まっていないブレの残った映像であっても、フレーム間の連続性すなわち時間的な動きの滑らかさが重要である。   For example, with regard to blur correction control, in the case of moving image shooting, continuity between frames, that is, smooth temporal motion, is important even when there is still a blurring video that has not stopped exactly. .

一方で、静止画像撮影の場合には、時間的にある瞬間を捉えた画像であり、主被写体にブレの無い鮮明さが要求される。   On the other hand, in the case of still image shooting, it is an image that captures a certain moment in time, and the main subject is required to have no blur.

その結果、動きのあるカメラワークで撮影された動画像の中から静止画像を生成する場合、手ブレ補正は動画の滑らかさを考慮した補正制御を行う。そのため、フレーム単位で見た時に必ずしもきっちりと止まったブレの無い画像になるとは限らず、ブレの大きな静止画像が生成されてしまうことがあった。   As a result, when a still image is generated from a moving image photographed with a moving camera work, camera shake correction performs correction control in consideration of the smoothness of a moving image. For this reason, when viewed in frame units, the image does not always stop exactly and does not always have a blur, and a still image with a large blur may be generated.

また、静止画撮影をメインとしたカメラにおいては、手ブレ補正をフレーム単位できっちり止める補正制御を行うため、動画像としては滑らかさが損なわれ、パラパラとした画像になってしまっていた。   In addition, in cameras mainly for still image shooting, correction control for stopping camera shake correction in units of frames is performed, so that the smoothness is lost as a moving image, and the image is flipped.

静止画撮影をメインとしたカメラにおいては、動画撮影中に静止画取得の指示を受けた時に、動画撮影時よりもより補正効果の高いブレ補正制御に切り替える方法が提案されている(例えば、特許文献1参照)。   In cameras mainly for still image shooting, a method of switching to blur correction control having a higher correction effect than when shooting a movie has been proposed when a still image acquisition instruction is received during movie shooting (for example, patents). Reference 1).

特開2013−47766号公報JP 2013-47766 A

しかしながら、特許文献1に記載の従来技術においては、動画像撮影か静止画像撮影かを撮影者が指示しなければならなかった。従って、撮影操作として動画か静止画かを切り替える手間を要する問題があった。   However, in the prior art described in Patent Document 1, the photographer has to instruct whether to shoot moving images or still images. Therefore, there is a problem that it takes time and effort to switch between a moving image and a still image as a shooting operation.

また、撮影した動画像から静止画像を生成する場合には、長時間の連続した多数のフレーム画像から静止画を選び出す手間を要する問題もあった。   Further, when generating a still image from a captured moving image, there is a problem that it takes time and effort to select a still image from a large number of continuous frame images for a long time.

本発明は上記問題点を鑑みてなされたものであり、動画像の撮影中に特定のフレームだけ静止画像の撮影に適したブレ補正制御を行うことで、撮影した動画像からブレの無い静止画像を容易に生成できるブレ補正装置を提供することを目的とする。   The present invention has been made in view of the above problems, and by performing blur correction control suitable for capturing a still image of a specific frame during capturing of a moving image, a still image free from blurring from the captured moving image. It is an object of the present invention to provide a shake correction apparatus that can easily generate the image.

上記目的を達成するために、本発明の請求項1に記載のブレ補正装置は、動画像撮影時にブレ検出手段から出力されたブレ情報に基づいて第1のブレ補正信号を算出する第1の信号算出手段と、静止画像の撮影時に前記ブレ情報に基づいて前記第1のブレ補正信号よりも防振性能が高い第2のブレ補正信号を算出する第2の信号算出手段と、ブレ補正を実行する信号を前記第1のブレ補正信号及び前記第2のブレ補正信号のどちらか一方から選択するブレ補正選択手段と、を有するブレ補正装置であって、
前記ブレ補正選択手段は、前記動画像撮影中に、前記ブレ検出手段から出力されたブレ情報が所定条件を満たした場合、前記ブレ補正を実行する信号を前記第1のブレ補正信号から前記第2のブレ補正信号に切り換える構成とした。
In order to achieve the above object, a blur correction apparatus according to claim 1 of the present invention calculates a first blur correction signal based on the blur information output from the blur detection means during moving image shooting. A signal calculating means, a second signal calculating means for calculating a second shake correction signal having a higher image stabilization performance than the first shake correction signal based on the shake information at the time of shooting a still image, and a shake correction. A shake correction selecting unit that selects a signal to be executed from one of the first shake correction signal and the second shake correction signal;
The blur correction selecting means receives a signal for executing the blur correction from the first blur correction signal when the blur information output from the blur detection means satisfies a predetermined condition during the moving image shooting. The configuration is switched to 2 blur correction signals.

以上説明したように、本発明によれば、動画像撮影中に、静止画用フレーム取得タイミングを判定して静止画用補正量を補正目標値として静止画に最適なブレ補正制御を行うことを可能とすることで、記録した動画像の中から静止画像を生成する時に、高品位でブレの小さい静止画像を抽出することができる。   As described above, according to the present invention, during moving image shooting, it is possible to determine the still image frame acquisition timing and perform still image correction optimal for still images using the still image correction amount as a correction target value. By making it possible, when generating a still image from recorded moving images, it is possible to extract a high-quality still image with less blur.

本発明の第1の実施形態に係る撮像装置の構成例を示すブロック図。1 is a block diagram illustrating a configuration example of an imaging apparatus according to a first embodiment of the present invention. 第1の実施形態に係る補正量算出部112の構成例を示すブロック図。The block diagram which shows the structural example of the correction amount calculation part 112 which concerns on 1st Embodiment. 第1の実施形態における補正量の切り替え処理を示すフローチャート。5 is a flowchart illustrating correction amount switching processing according to the first embodiment. 第1の実施形態における補正量切り替えタイミングの判定方法を説明するグラフ。The graph explaining the determination method of the correction amount switching timing in 1st Embodiment. 第1の実施形態における補正量切り替えと補正量演算の動作の一例を示すフローチャート。5 is a flowchart illustrating an example of operations of correction amount switching and correction amount calculation according to the first embodiment. 第2の実施形態に係る撮像装置の構成例を示すブロック図。The block diagram which shows the structural example of the imaging device which concerns on 2nd Embodiment. 第2の実施形態に係る補正量算出部112の構成例を示すブロック図。The block diagram which shows the structural example of the correction amount calculation part 112 which concerns on 2nd Embodiment. 第2の実施形態における補正量の切り替え処理を示すフローチャート。10 is a flowchart illustrating correction amount switching processing according to the second embodiment.

以下、本発明の実施の形態を、図面を参照しながら詳細に説明する。なお、以下では、本発明の実施形態に係るブレ補正装置の一例としてのデジタルビデオカメラについて説明するが、本発明は、動画撮影機能と静止画撮影機能との両機能を有する任意の撮像装置や、そのような撮像装置に装着する光学装置に対して適用可能である。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In the following, a digital video camera as an example of a shake correction apparatus according to an embodiment of the present invention will be described, but the present invention is not limited to an arbitrary imaging apparatus having both a moving image shooting function and a still image shooting function. The present invention can be applied to an optical device attached to such an imaging device.

また、ここでいう撮像装置には、カメラ付きの携帯電話、ゲーム機、パーソナルコンピュータなど、撮像装置が組み込まれた、もしくは内蔵された機器も含まれる。   In addition, the imaging device referred to here includes a device with a built-in imaging device, such as a mobile phone with a camera, a game machine, or a personal computer.

〔第1の実施形態〕
図1は、第1の実施形態におけるブレ補正機能を備えた撮像装置のシステム構成を示すブロック図である。
[First Embodiment]
FIG. 1 is a block diagram illustrating a system configuration of an imaging apparatus having a blur correction function according to the first embodiment.

図1において、101は撮像光学系で複数枚のレンズから構成されるレンズ群である。102は画像の振れを補正する補正光学系で、光軸に直交する平面上を動いて振れを補正するブレ補正レンズ群(シフトレンズ)である。   In FIG. 1, reference numeral 101 denotes an image pickup optical system that is a lens group including a plurality of lenses. Reference numeral 102 denotes a correction optical system that corrects image shake, and is a shake correction lens group (shift lens) that moves on a plane orthogonal to the optical axis to correct shake.

103は撮像光学系101により結像された画像を光電変換する撮像素子、104は撮像素子103により光電変換された撮像信号を例えば標準ビデオ信号などに変換処理するカメラ信号処理回路であり、アナログ信号処理回路とデジタル信号処理回路からなる。   Reference numeral 103 denotes an image pickup device that photoelectrically converts an image formed by the image pickup optical system 101. Reference numeral 104 denotes a camera signal processing circuit that converts an image pickup signal photoelectrically converted by the image pickup device 103 into, for example, a standard video signal. It consists of a processing circuit and a digital signal processing circuit.

アナログ信号処理回路は、撮像素子103で得られた信号に所定の処理を施してアナログ撮像信号を生成するものである。   The analog signal processing circuit performs a predetermined process on the signal obtained by the image sensor 103 to generate an analog image signal.

例えば、CDS(co−related double sampling:相関二重サンプリング)回路、AGC(Automatic Gain Control)回路等から構成されている。   For example, it comprises a CDS (co-related double sampling) circuit, an AGC (Automatic Gain Control) circuit, and the like.

デジタル信号処理回路は、A/D変換器によりアナログ撮像信号をデジタル信号に変換し、ガンマ補正、ホワイトバランス等、所定の信号処理をしたデジタル映像信号を生成する。105はカメラ信号処理回路104から得られた標準出力信号端子で、上記の構成により撮像された画像を標準ビデオ信号として出力する。   The digital signal processing circuit converts an analog imaging signal into a digital signal by an A / D converter, and generates a digital video signal subjected to predetermined signal processing such as gamma correction and white balance. Reference numeral 105 denotes a standard output signal terminal obtained from the camera signal processing circuit 104, and outputs an image captured by the above configuration as a standard video signal.

標準出力信号端子105から出力される標準ビデオ信号は、外部モニタなどに接続しても良い。また、撮像装置に備えた表示装置(液晶パネルやビューファインダ)に出力表示することも可能であるし、また、所定の記録形式に変換して記録媒体(メモリカード、ハードディスク、DVD、磁気テープなど)に映像信号を記録することもできる。   The standard video signal output from the standard output signal terminal 105 may be connected to an external monitor or the like. It can also be output and displayed on a display device (liquid crystal panel or viewfinder) provided in the imaging device, or converted into a predetermined recording format and recorded on a recording medium (memory card, hard disk, DVD, magnetic tape, etc.) ) Can also record video signals.

110は、撮像装置に加わる振れの検出を行うための角速度センサである。例えば、振動ジャイロ等で構成されており、手振れ等による撮像装置の振れの角速度を検出して電気信号を出力する。   Reference numeral 110 denotes an angular velocity sensor for detecting a shake applied to the imaging apparatus. For example, it is composed of a vibrating gyroscope or the like, and detects an angular velocity of shaking of the imaging apparatus due to hand shaking or the like and outputs an electrical signal.

角速度センサ110は、光軸に直交する一平面上で互いに直交した検出軸をなすように、例えば水平方向の回転軸(Yaw)と垂直方向の回転軸(Pitch)との2軸方向に二つの角速度センサを配置する。   The angular velocity sensor 110 has two axial directions such as a horizontal rotation axis (Yaw) and a vertical rotation axis (Pitch) so as to form detection axes orthogonal to each other on one plane orthogonal to the optical axis. An angular velocity sensor is arranged.

そして、検出した各軸別々に補正量を算出し、水平方向及び垂直方向の2軸方向に補正光学系102を制御する。水平方向の回転軸(Yaw)と垂直方向の回転軸(Pitch)の補正量の演算及び補正光学系の制御は、両軸とも同じ処理で実現することができるので、以降は片方の軸についてのみ説明するものとする。   Then, the correction amount is calculated separately for each detected axis, and the correction optical system 102 is controlled in the two axial directions of the horizontal direction and the vertical direction. Since the calculation of the correction amount of the horizontal rotation axis (Yaw) and the vertical rotation axis (Pitch) and the control of the correction optical system can be realized by the same processing for both axes, only one of the axes will be performed thereafter. Shall be explained.

111は、角速度センサの出力信号をマイコンに取り込むためのA/D変換器である。112は、角速度センサ110の出力信号をA/D変換機111を介して取得したデジタル信号から補正光学系102の補正量を算出する補正量算出部である。   Reference numeral 111 denotes an A / D converter for taking the output signal of the angular velocity sensor into the microcomputer. Reference numeral 112 denotes a correction amount calculation unit that calculates the correction amount of the correction optical system 102 from the digital signal obtained from the output signal of the angular velocity sensor 110 via the A / D converter 111.

なお、110の角速度センサがデジタルセンサであるならば、A/D変換器111は不要であり、マイコンとの通信によってデジタルデータを取得すればよい。補正量算出部112については、後で詳細に説明する。   If the angular velocity sensor 110 is a digital sensor, the A / D converter 111 is unnecessary, and digital data may be acquired by communication with a microcomputer. The correction amount calculation unit 112 will be described in detail later.

130から134は、補正光学系(シフトレンズ)102を制御するための補正制御ブロックである。133はシフトエンコーダであり、シフトレンズ102の位置検出を行うセンサで、例えばホール・センサなどである。シフトエンコーダ133の出力値はA/D変換器134を介してブレ補正制御回路130に入力される。   Reference numerals 130 to 134 denote correction control blocks for controlling the correction optical system (shift lens) 102. Reference numeral 133 denotes a shift encoder, which is a sensor for detecting the position of the shift lens 102, such as a hall sensor. The output value of the shift encoder 133 is input to the shake correction control circuit 130 via the A / D converter 134.

130はブレ補正制御回路で、補正量算出部112からの補正量(目標値)とシフトエンコーダ133から得られるシフトレンズ102の現在位置との差分からシフトレンズの制御量を算出し制御信号を出力する。ここでは、差分データに対して、増幅器と位相補償フィルタによる信号処理が行われて制御量が算出される。   A blur correction control circuit 130 calculates a control amount of the shift lens from the difference between the correction amount (target value) from the correction amount calculation unit 112 and the current position of the shift lens 102 obtained from the shift encoder 133, and outputs a control signal. To do. Here, the control amount is calculated by performing signal processing by the amplifier and the phase compensation filter on the difference data.

131はシフトレンズ駆動回路で、ブレ補正制御回路130からPWMなどで出力される制御信号を受けてモータ132に駆動波形を出力するドライブ回路である。132はモータで、シフトレンズ102を駆動するボイスコイルモータなどである。   A shift lens drive circuit 131 is a drive circuit that receives a control signal output by PWM or the like from the shake correction control circuit 130 and outputs a drive waveform to the motor 132. Reference numeral 132 denotes a motor, such as a voice coil motor that drives the shift lens 102.

次に図2を用いて、補正量算出部112の詳細について説明する。ここで、補正量算出部112への入力信号を供給するA/D変換器111と、補正量算出部112からの出力信号を受け取るブレ補正制御回路130とは図1と同じものを示している。   Next, details of the correction amount calculation unit 112 will be described with reference to FIG. Here, the A / D converter 111 that supplies an input signal to the correction amount calculation unit 112 and the blur correction control circuit 130 that receives an output signal from the correction amount calculation unit 112 are the same as those in FIG. .

まず、A/D変換器111からブレ信号を取得する。これは、角速度センサ110で検出したブレの角速度信号がデジタル変換された信号である。120はハイパスフィルタ(HPF)であり、その周波数特性を可変し得る機能を有しており、取得した角速度信号に含まれる低周波成分を遮断して出力する。   First, a blur signal is acquired from the A / D converter 111. This is a signal obtained by digitally converting the blurring angular velocity signal detected by the angular velocity sensor 110. Reference numeral 120 denotes a high-pass filter (HPF) having a function capable of changing the frequency characteristic thereof, and blocks and outputs a low-frequency component included in the acquired angular velocity signal.

121は積分器であり、HPF120から出力された角速度信号を時間積分することにより角変位量を得る。なお、積分器121は、不完全積分で行われ、その時定数を任意に変更することが可能となっている。   Reference numeral 121 denotes an integrator, which obtains an angular displacement amount by time-integrating the angular velocity signal output from the HPF 120. The integrator 121 is performed by incomplete integration, and its time constant can be arbitrarily changed.

122はパンニング制御部で、A/D変換器111から得られる角速度信号と、積分器121から得られる角変位量の大きさに応じて、撮像装置がパンニング状態か否かを判断する。そして、その判断結果に応じて、角速度信号が大きい場合はHPF120のカットオフ周波数を変更し、角変位量が大きくなった場合は積分器121の時定数変更を行う。   A panning control unit 122 determines whether the imaging apparatus is in a panning state according to the angular velocity signal obtained from the A / D converter 111 and the magnitude of the angular displacement obtained from the integrator 121. Then, according to the determination result, the cutoff frequency of the HPF 120 is changed when the angular velocity signal is large, and the time constant of the integrator 121 is changed when the angular displacement amount becomes large.

123は、飽和防止制御部であり、シフトレンズ102が機械的な可動端に突き当たることがないように、積分器121で生成された制御量に制限をかけるためのものである。その制御の一例としては、補正光学系の制御量が所定値(以下、リミッタと記す)を超えないように、積分器121からの出力にリミットを施した値を最終的な補正目標位置として出力する。   Reference numeral 123 denotes a saturation prevention control unit for limiting the control amount generated by the integrator 121 so that the shift lens 102 does not hit the mechanical movable end. As an example of the control, a value obtained by limiting the output from the integrator 121 is output as a final correction target position so that the control amount of the correction optical system does not exceed a predetermined value (hereinafter referred to as a limiter). To do.

HPF120から飽和防止制御部123までが、動画用補正量算出部113であり、動画撮影に適したブレ補正を行うための補正目標値を算出する。   From the HPF 120 to the saturation prevention control unit 123 is a moving image correction amount calculation unit 113, which calculates a correction target value for performing blur correction suitable for moving image shooting.

124は、積分器であり、A/D変換器111から得られた角速度信号を、HPFを介さずに時間積分して角変位量を得る。125は飽和防止制御部であり、上記説明した動画用補正量算出部113内の飽和防止制御部123と同機能である。   An integrator 124 integrates the angular velocity signal obtained from the A / D converter 111 with time without using the HPF to obtain an angular displacement amount. A saturation prevention control unit 125 has the same function as the saturation prevention control unit 123 in the moving image correction amount calculation unit 113 described above.

積分器124から飽和防止制御部125までが、静止画用補正量算出部114であり、静止画撮影に適したブレ補正を行うための補正目標値を算出する。   From the integrator 124 to the saturation prevention control unit 125 is a still image correction amount calculation unit 114, which calculates a correction target value for performing blur correction suitable for still image shooting.

第1の信号算出手段としての動画用補正量算出部113は、HPF120とパンニング制御部122を備える点が、静止画用補正量算出部114と異なる点である。動画撮影では、パンニングやチルティングなどのカメラワークの操作を伴うが、その動きを補正してしまうと、撮影者にとっては意図したカメラワークとは異なる画角変化になってしまう。   The moving image correction amount calculation unit 113 as the first signal calculation unit is different from the still image correction amount calculation unit 114 in that it includes an HPF 120 and a panning control unit 122. Moving image shooting involves camerawork operations such as panning and tilting. If the movement is corrected, the angle of view differs from the intended camerawork for the photographer.

また、さらに、補正光学系102がすぐにリミッタに近づいてしまうため、その後のブレ補正が効きにくい状況になってしまう。そこで、パンニング制御部122やHPF120を備えることで、パンニングやチルティングが行われた時にその動きを無理に補正しないようにし、ブレ信号の低周波成分をカットして補正目標値を変更する仕組みになっている。   Furthermore, since the correction optical system 102 approaches the limiter immediately, it becomes difficult for subsequent blur correction to be effective. Therefore, the panning control unit 122 and the HPF 120 are provided so that the movement is not forcibly corrected when panning or tilting is performed, and the correction target value is changed by cutting the low frequency component of the blur signal. It has become.

一方、静止画撮影では、時間的な変化の中である瞬間を捉えた画像であり、その瞬間、すなわち画像を取り込んでいる1フレームの期間は、ブレの無いことが望ましい。従って、この時は低周波成分も含めてブレ信号を補正するように補正目標値を算出する仕組みになっている。   On the other hand, in still image shooting, it is an image that captures a moment in a temporal change, and it is desirable that there is no blur at that moment, that is, a period of one frame in which the image is captured. Accordingly, at this time, the correction target value is calculated so as to correct the blur signal including the low frequency component.

126は、ブレ補正選択手段としてのタイミング判定部であり、A/D変換器111から得られる角速度信号と、積分器121から得られる角変位量の大きさに応じて、補正量の切り替えタイミングを判定する。   Reference numeral 126 denotes a timing determination unit as a blur correction selection unit, which sets the correction amount switching timing according to the angular velocity signal obtained from the A / D converter 111 and the angular displacement amount obtained from the integrator 121. judge.

127は、切り替え器であり、動画用補正量算出部113から得られる第1のブレ補正信号としての動画用補正量と静止画用補正量算出部114から得られる第2のブレ補正信号としての静止画用補正量とを受け取る。   Reference numeral 127 denotes a switch, which is a moving image correction amount as the first shake correction signal obtained from the moving image correction amount calculation unit 113 and a second shake correction signal obtained from the still image correction amount calculation unit 114. Receive still image correction amount.

そして、タイミング判定部126の判定結果に基づいて切り替え、選択したいずれかの補正量をブレ補正制御回路130へ出力する。   Then, switching is performed based on the determination result of the timing determination unit 126, and one of the selected correction amounts is output to the blur correction control circuit 130.

次に、図3を用いて、補正量の切り替え処理の動作について、詳細に説明する。図3は補正量切り替え処理の動作の一例を示すフローチャートである。なお、図3に示す処理は、例えば角速度データのA/D変換による取り込み周期など、任意の所定の周期で繰り返し実行される。   Next, the operation of the correction amount switching process will be described in detail with reference to FIG. FIG. 3 is a flowchart showing an example of the operation of the correction amount switching process. Note that the processing shown in FIG. 3 is repeatedly executed at an arbitrary predetermined cycle, such as a capturing cycle by A / D conversion of angular velocity data.

ステップS1001では、角速度センサ110のデータをA/D変換器111で取り込み、角速度データ及び角変位量を取得する。ステップS1002では、ステップS1001で取得した角速度データ及び角変位量から、静止画用補正を行うタイミングか否かを判定する。   In step S1001, the data of the angular velocity sensor 110 is captured by the A / D converter 111, and the angular velocity data and the angular displacement amount are acquired. In step S1002, it is determined from the angular velocity data acquired in step S1001 and the amount of angular displacement whether or not it is time to perform still image correction.

その結果、静止画用補正タイミングであると判定されればステップS1003へ進み、静止画用補正タイミングではないと判定されればステップS1004へ進む。   As a result, if it is determined that it is the still image correction timing, the process proceeds to step S1003. If it is determined that it is not the still image correction timing, the process proceeds to step S1004.

ステップS1003では、第2の信号算出手段としての静止画用補正量算出部114で算出された補正量を選択して、切り替え器127からブレ補正制御回路130へ補正量を出力してステップS1005へ進む。   In step S1003, the correction amount calculated by the still image correction amount calculation unit 114 as the second signal calculation means is selected, and the correction amount is output from the switch 127 to the blur correction control circuit 130, and the flow advances to step S1005. move on.

第2の信号算出手段としての静止画用補正量算出部114は、静止画像の撮影時にブレ情報に基づいて第1のブレ補正信号よりも防振性能が高い第2のブレ補正信号を算出する。   The still image correction amount calculation unit 114 as the second signal calculation unit calculates a second shake correction signal having higher image stabilization performance than the first shake correction signal based on the shake information when a still image is captured. .

防振性能が高いとは、HPFのカットオフ周波数の下限値を低くして低周波数帯域まで防振効果を得ることを意味する。また、防振性能が高いとは、振れ信号に基く補正量のゲインを高くして防振効果を得ることを意味する。   High anti-vibration performance means that the lower limit value of the cutoff frequency of HPF is lowered to obtain an anti-vibration effect up to a low frequency band. In addition, high anti-vibration performance means that the anti-vibration effect is obtained by increasing the gain of the correction amount based on the shake signal.

ステップS1004では、動画用補正量算出部113で算出された補正量を選択して、切り替え器127からブレ補正制御回路130へ補正量を出力してステップS1005へ進む。ステップS1005では、切り替え器127から取得した補正量(目標値)と現在位置との差分から制御量を算出する。   In step S1004, the correction amount calculated by the moving image correction amount calculation unit 113 is selected, the correction amount is output from the switch 127 to the blur correction control circuit 130, and the process proceeds to step S1005. In step S1005, the control amount is calculated from the difference between the correction amount (target value) acquired from the switch 127 and the current position.

ステップS1006では、ステップS1005で算出された制御量に応じてシフトレンズ102を駆動制御して本処理を終了する。   In step S1006, the shift lens 102 is driven and controlled in accordance with the control amount calculated in step S1005, and this process ends.

次に、図4を用いて、図3のフローチャートのステップS1002の処理について、すなわち、タイミング判定部126において処理される補正量の切り替えタイミングの判定について説明する。図4に示す波形は、手持ち撮影時の角変位量の時間変化の例を示している。   Next, with reference to FIG. 4, the process of step S1002 in the flowchart of FIG. The waveform shown in FIG. 4 shows an example of the change over time in the amount of angular displacement during handheld shooting.

図4の波形上に円で示したポイントは、角変位量の変曲点であり、角速度が0近傍の値を示す点である。角速度が0近傍となる点は揺れの反転時であり、ブレによる動きが瞬間的に小さい時である。静止画撮影では、画像の取り込みを行う1フレーム期間ブレの無いことが望ましいので、このタイミングで静止画に最適なブレ補正制御に切り替える。   A point indicated by a circle on the waveform of FIG. 4 is an inflection point of the angular displacement amount, and is a point where the angular velocity shows a value near zero. The point where the angular velocity is close to 0 is when the swing is reversed, and when the motion due to the shake is momentarily small. In still image shooting, it is desirable that there is no blur for one frame period during which an image is captured. Therefore, at this timing, switching to blur correction control optimal for a still image is performed.

角速度が0近傍になる時はブレの動きが小さい時であるから、ブレの生じないように静止画撮影に適したブレ補正を行っても動画撮影の連続性への影響はほとんど無いと言える。   When the angular velocity is close to 0, the motion of blurring is small, so it can be said that even if blur correction suitable for still image shooting is performed so as not to cause blurring, there is almost no influence on the continuity of moving image shooting.

つまり、ブレ補正選択手段は、ブレ情報に基づく角速度が所定値よりも小さくなる場合、ブレ補正を実行する信号を第1のブレ補正信号から第2のブレ補正信号に切り換える。   That is, when the angular velocity based on the shake information is smaller than a predetermined value, the shake correction selection unit switches the signal for executing the shake correction from the first shake correction signal to the second shake correction signal.

この時の静止画用補正量への切り替えタイミング判定の条件としては、例えば、角速度が所定値A以下であり、かつ角変位量も所定値B以下であり、かつパンニング状態でない時、などとすればよい。   As a condition for determining the switching timing to the still image correction amount at this time, for example, when the angular velocity is a predetermined value A or less, the angular displacement amount is a predetermined value B or less, and the panning state is not set. That's fine.

角変位量も所定値B以下とするのは、パンニング状態になるような大きな振幅が生じていないこと、及び、補正光学系がリミッタに近づくことで光学特性の劣化が生じないこと、を静止画取り込みの条件とするためである。   The reason why the angular displacement amount is also equal to or less than the predetermined value B is that there is no large amplitude that causes a panning state and that the optical characteristics are not deteriorated when the correction optical system approaches the limiter. This is to make it a condition for capturing.

つまり、ブレ補正選択手段は、ブレ情報に基づく角変位量が角変位量の基準位置の所定範囲内にある場合、ブレ補正を実行する信号を第1のブレ補正信号から第2のブレ補正信号に切り換える。   In other words, when the angular displacement amount based on the blur information is within a predetermined range of the reference position of the angular displacement amount, the blur correction selecting unit changes the signal for executing the blur correction from the first blur correction signal to the second blur correction signal. Switch to.

また、図4の波形上に四角で示したポイントは、角変位量が0近傍となる点である。角変位量が0近傍となる点は、補正光学系が制御中心付近にある時である。補正光学系が制御中心付近にある時は、片ボケや解像度劣化などが生じにくく光学特性が良好な時である。   Also, the points indicated by squares on the waveform of FIG. 4 are points where the amount of angular displacement is near zero. The point where the angular displacement amount is near 0 is when the correction optical system is near the control center. When the correction optical system is in the vicinity of the control center, it is a time when optical blurring and resolution deterioration are unlikely to occur and the optical characteristics are good.

静止画撮影では、画像の鮮明さ要求されることから、このタイミングで静止画に最適なブレ補正制御に切り替える。角変位量が0近傍になる時は光学特性が良好な時であるから、静止画撮影に適したブレ補正を行い、鮮明な静止画像を取得できるようにする。   In still image shooting, since image clarity is required, switching to blur correction control optimal for a still image is performed at this timing. When the angular displacement amount is close to 0, the optical characteristics are good. Therefore, blur correction suitable for still image shooting is performed so that a clear still image can be acquired.

この時の静止画用補正量への切り替えタイミング判定の条件としては、例えば、角変位量が所定値b以下であり、角速度も所定値a以下であり、かつパンニング状態でない時、などとすればよい。   As a condition for determining the switching timing to the still image correction amount at this time, for example, when the angular displacement amount is equal to or less than the predetermined value b, the angular velocity is equal to or less than the predetermined value a, and the panning state is not set. Good.

角速度も所定値a以下とするのは、大きな高周波の動きを無理に補正してしまうと動画撮影時の連続的な滑らかさが失われてしまうので、大きな高周波のブレが生じていないこと、を静止画取り込みの条件とするためである。   The reason why the angular velocity is also set to a predetermined value a or less is that if a large high-frequency movement is forcibly corrected, continuous smoothness at the time of moving image shooting is lost, so that a large high-frequency blur does not occur. This is to make it a condition for capturing a still image.

なお、上記のタイミング判定の条件において、角速度の所定値A、a及び角変位量の所定値B、bは、次の条件を満たすこととする。
0≒A<a
0≒b<B
In the above timing determination conditions, the predetermined values A and a of angular velocity and the predetermined values B and b of angular displacement amount satisfy the following conditions.
0 ≒ A <a
0 ≒ b <B

次に、動画用と静止画用の補正量算出について説明する。先に記載したように、動画用補正量算出部113はHPF120とパンニング制御部122とを備えている。一方、静止画用補正量算出部114はHPFを介さずに角速度データを積分器124で積分して角変位量を算出する仕組みになっている。   Next, calculation of correction amounts for moving images and still images will be described. As described above, the moving image correction amount calculation unit 113 includes the HPF 120 and the panning control unit 122. On the other hand, the still image correction amount calculation unit 114 is configured to calculate the angular displacement amount by integrating the angular velocity data with the integrator 124 without using the HPF.

そのため、当然ながら動画用の積分器121と静止画用の積分器124とで算出される角変位量は異なった値が出力される。この時、切り替え器127で、補正量を動画用から静止画用、あるいは静止画用から動画用へいきなり切り替えてしまうと補正量が大きく変化して、シフトレンズ102の補正の動きも大きくなり、画像上の画角変化が大きく生じてしまう場合がある。   Therefore, as a matter of course, the angular displacement amounts calculated by the moving picture integrator 121 and the still picture integrator 124 are different from each other. At this time, if the switch 127 switches the correction amount from moving image to still image or from still image to moving image suddenly, the correction amount changes greatly, and the shift lens 102 also increases in correction movement. There may be a large change in the angle of view on the image.

この問題を改善するためには、タイミング判定部126で切り替えタイミングと判定した時に、積分器121あるいは積分器124で角変位量を算出する際に、直前の補正量に基づいて積分演算を行う必要がある。   In order to improve this problem, it is necessary to perform an integration operation based on the immediately preceding correction amount when the angular displacement amount is calculated by the integrator 121 or the integrator 124 when the timing determination unit 126 determines the switching timing. There is.

例えば、動画用から静止画用に切り替える場合には、動画用で算出された直前の補正量を用いて現在の静止画用補正量を算出し、その結果を補正量としてブレ補正制御回路130へ出力する。逆に、静止画用から動画用に切り替える場合には、静止画用で算出された直前の補正量を用いて現在の動画用補正量を算出し、その結果を補正量としてブレ補正制御回路130へ出力する。   For example, when switching from a moving image to a still image, the current still image correction amount is calculated using the immediately preceding correction amount calculated for the moving image, and the result is used as a correction amount to the blur correction control circuit 130. Output. Conversely, when switching from still image use to movie use, the current movie correction amount is calculated using the correction amount immediately before calculated for the still image, and the result is used as a correction amount for the shake correction control circuit 130. Output to.

つまり、ブレ補正選択手段は、静止画像の撮影後に動画像撮影に戻る場合、第1のブレ補正信号から第2のブレ補正信号に切り換えた時の第1のブレ補正信号をブレ補正を実行する信号として引き継ぐ。   In other words, when returning to moving image shooting after shooting a still image, the shake correction selecting unit performs shake correction on the first shake correction signal when the first shake correction signal is switched to the second shake correction signal. Take over as a signal.

ここで、積分器をローパスフィルタ(LPF)とするならば、切り替えタイミングに応じて、LPFの中間値を動画用から静止画用へ、あるいは静止画用から動画用へと引き継がせて演算することによって段差の生じない補正量の連続性を維持することができる。   Here, if the integrator is a low-pass filter (LPF), the intermediate value of the LPF is calculated from the moving image to the still image, or from the still image to the moving image, depending on the switching timing. Therefore, the continuity of the correction amount that does not cause a step can be maintained.

また、静止画用フレームを取得する間の露光期間は、静止画用補正量を用いて補正制御する必要がある。従って、切り替えタイミングの判定で静止画補正を選択された後は、シャッタースピードに応じてその露光期間中は、静止画補正量算出部114で算出された補正量で補正制御を行う。   In addition, it is necessary to perform correction control on the exposure period during the acquisition of the still image frame using the still image correction amount. Therefore, after still image correction is selected in the switching timing determination, correction control is performed with the correction amount calculated by the still image correction amount calculation unit 114 during the exposure period according to the shutter speed.

そして、その露光期間終了に合わせて、静止画用補正量から動画用補正量に切り替える。なお、動画用補正量への切り替えは、露光期間よりも長い時間経過後であれば静止画フレームへの影響は無くなる。   Then, in accordance with the end of the exposure period, the still image correction amount is switched to the moving image correction amount. Note that switching to the moving image correction amount has no effect on the still image frame after a time longer than the exposure period has elapsed.

つまり、ブレ補正選択手段は、第2のブレ補正信号が選択された場合、画像取り込み時間よりも長い期間、ブレ補正を実行する信号として第2のブレ補正信号を選択し続ける。   That is, when the second shake correction signal is selected, the shake correction selection means continues to select the second shake correction signal as a signal for executing the shake correction for a period longer than the image capture time.

上記を踏まえて、動画用と静止画用の補正量切り替えと、その際の積分器(LPF)演算による補正量算出について、図5を用いて説明する。図5は補正量切り替えと補正量演算の動作の一例を示すフローチャートである。   Based on the above, the correction amount switching for moving image and still image and the calculation of the correction amount by the integrator (LPF) calculation at that time will be described with reference to FIG. FIG. 5 is a flowchart showing an example of correction amount switching and correction amount calculation operations.

なお、図5に示す処理は、例えば角速度データのA/D変換による取り込み周期など、任意の所定の周期で繰り返し実行される。   Note that the process shown in FIG. 5 is repeatedly executed at an arbitrary predetermined cycle, such as an acquisition cycle of angular velocity data by A / D conversion.

ステップS2001では、静止画用フレームの露光中にセットする静止画露光中フラグが0であるか否かを判別し、フラグが0であればステップS2002へ進み、フラグが0でなければステップS2007へ進む。ステップS2002では、静止画用補正を行うタイミングか否かを判定する。   In step S2001, it is determined whether or not the still image exposure flag set during exposure of the still image frame is 0. If the flag is 0, the process proceeds to step S2002. If the flag is not 0, the process proceeds to step S2007. move on. In step S2002, it is determined whether it is time to perform still image correction.

その結果、静止画用補正タイミングではないと判定されればステップS2003へ進み、静止画用補正タイミングであると判定されればステップS2004へ進む。ステップS2003では、動画用LPF演算で補正量を算出する。   As a result, if it is determined that it is not the still image correction timing, the process proceeds to step S2003, and if it is determined that it is the still image correction timing, the process proceeds to step S2004. In step S2003, the correction amount is calculated by the LPF calculation for moving images.

一方、ステップS2004では、動画用LPFの中間値を静止画用LPFに引き継がせ、その中間値を使用して静止画用LPF演算で補正量を算出する。そして、ステップS2005では、静止画用フレームの露光中と判断するための静止画用露光中フラグを1にセットする。   On the other hand, in step S2004, the intermediate value of the moving image LPF is transferred to the still image LPF, and the correction amount is calculated by the still image LPF calculation using the intermediate value. In step S2005, a still image exposure flag for determining that the still image frame is being exposed is set to 1.

また、ステップS2007では、静止画用フレームの露光が終了したか否かを判別する。これは、シャッター速度に応じて露光期間を計算し、現フレームにおいてその露光期間が経過したか否かを判別すればよい。   In step S2007, it is determined whether or not the exposure of the still image frame is completed. This can be done by calculating the exposure period according to the shutter speed and determining whether the exposure period has elapsed in the current frame.

そして、露光が終了していなければステップS2008へ進み、露光が終了していればステップS2009へ進む。ステップS2008では、静止画用LPF演算で補正量を算出する。   If the exposure is not completed, the process proceeds to step S2008. If the exposure is completed, the process proceeds to step S2009. In step S2008, the correction amount is calculated by the still image LPF calculation.

一方、ステップS2009では、静止画用LPFの中間値を動画用LPFに引き継がせ、その中間値を使用して動画用LPF演算で補正量を算出する。   On the other hand, in step S2009, the intermediate value of the still image LPF is transferred to the moving image LPF, and the correction value is calculated by the moving image LPF calculation using the intermediate value.

そして、ステップS2010では、静止画用フレームの露光終了と判断するために、静止画用露光中フラグを0にセットする。最後に、ステップS2006では、ステップS2003あるいはステップS2004あるいはステップS2008あるいはステップS2009で算出した補正量を、切り替え器127からブレ補正制御回路130へ出力して本処理を終了する。   In step S2010, the still image exposure flag is set to 0 in order to determine that the exposure of the still image frame has ended. Finally, in step S2006, the correction amount calculated in step S2003, step S2004, step S2008, or step S2009 is output from the switch 127 to the shake correction control circuit 130, and this process ends.

なお、上記のように動画像撮影時に、静止画用フレームを取得するタイミングを判定した時には、記録画像のそのフレームに静止画用ブレ補正を行ったことを示す情報をメタデータなどで記録しておけばよい。   When the timing for acquiring a still image frame is determined during moving image shooting as described above, information indicating that still image blur correction has been performed on that frame of the recorded image is recorded in metadata or the like. Just keep it.

その結果、記録した動画像から静止画像を生成する時には、そのメタデータから判定すれば、ブレの少ない静止画像を抽出することが可能となる。   As a result, when a still image is generated from the recorded moving image, it is possible to extract a still image with less blurring if determined from the metadata.

上記のように、本発明では、ブレ補正選択手段は、動画像撮影中に、ブレ検出手段から出力されたブレ情報が所定条件を満たした場合、ブレ補正を実行する信号を第1のブレ補正信号から第2のブレ補正信号に切り換える。   As described above, in the present invention, the blur correction selecting unit outputs a signal for executing the blur correction when the blur information output from the blur detection unit satisfies a predetermined condition during moving image shooting. The signal is switched to the second image stabilization signal.

以上説明してきたように、本発明の第1の実施形態においては、動画像撮影時に、角速度データ及び角変位量データから静止画用フレーム取得のタイミングであるか否かを判定する。   As described above, in the first embodiment of the present invention, at the time of moving image shooting, it is determined from the angular velocity data and the angular displacement amount data whether or not it is the timing for acquiring a still image frame.

その判定結果を踏まえて、静止画用フレーム取得タイミングでは静止画用補正量を補正目標値として静止画に最適なブレ補正制御を行うことによって、記録した動画像の中から静止画像を生成する時に、高品位でブレの小さい静止画像を抽出することができる。   Based on the determination result, when still image is generated from the recorded moving image by performing the optimum blur correction control for the still image with the still image correction amount as the correction target value at the still image frame acquisition timing. It is possible to extract a high-quality still image with little blur.

〔第2の実施形態〕
次に第2の実施形態について説明する。第1の実施形態においては、角速度データ及び角変位量から静止画用フレーム取得タイミングを判定していたが、本実施例では、水平検知手段にて画像の水平状態を検知して静止画用フレーム取得タイミングを判定する方法について説明する。
[Second Embodiment]
Next, a second embodiment will be described. In the first embodiment, the still image frame acquisition timing is determined from the angular velocity data and the angular displacement amount. However, in this embodiment, the horizontal detection unit detects the horizontal state of the image to detect the still image frame. A method for determining the acquisition timing will be described.

図6は、第2の実施形態におけるブレ補正機能を備えた撮像装置のシステム構成を示すブロック図である。本実施形態における撮像装置の構成は、第1の実施形態で示した図1と基本的には同じ構成である。従って、同じブロックには同一番号を付して、説明を省略する。   FIG. 6 is a block diagram illustrating a system configuration of an imaging apparatus having a shake correction function according to the second embodiment. The configuration of the imaging apparatus in the present embodiment is basically the same as that in FIG. 1 shown in the first embodiment. Therefore, the same number is attached to the same block, and the description is omitted.

図6において、図1と異なるのは、次の点である。115は水平検知手段としての加速度センサであり、撮像装置の水平姿勢に対する傾き状態を検出する。   6 differs from FIG. 1 in the following points. Reference numeral 115 denotes an acceleration sensor serving as a horizontal detection unit, which detects a tilt state with respect to the horizontal posture of the imaging apparatus.

116は、加速度センサ115の出力信号をマイコンに取り込むためのA/D変換器であり、取得した加速度データのデジタル信号を補正量算出部112に受け渡す。なお、実施例1でも記載したが、加速度センサ115がデジタルセンサであるならば、A/D変換器116は不要であり、マイコンとの通信によってデジタルデータを取得すればよい。   Reference numeral 116 denotes an A / D converter for taking the output signal of the acceleration sensor 115 into the microcomputer, and delivers the acquired digital signal of the acceleration data to the correction amount calculation unit 112. As described in the first embodiment, if the acceleration sensor 115 is a digital sensor, the A / D converter 116 is unnecessary, and digital data may be acquired by communication with a microcomputer.

図7は、本実施形態における補正量算出部112の詳細を示すブロック図である。図7も第1の実施形態で示した図2と基本的には同じ構成であるから、同じブロックには同一番号を付して、説明を省略する。   FIG. 7 is a block diagram showing details of the correction amount calculation unit 112 in the present embodiment. Since FIG. 7 also has basically the same configuration as FIG. 2 shown in the first embodiment, the same blocks are denoted by the same reference numerals and description thereof is omitted.

図7において、図2と異なるのは、次の点である。タイミング判定部126は、A/D変換器116から加速度データを取得する。そして、取得した加速度データに応じて、補正量の切り替えタイミングを判定する。   7 is different from FIG. 2 in the following points. The timing determination unit 126 acquires acceleration data from the A / D converter 116. Then, a correction amount switching timing is determined according to the acquired acceleration data.

具体的には、加速度データが水平姿勢と判断できる傾き状態であれば、静止画フレーム取得タイミングと判定して、切り替え器127に静止画用補正量を選択するように指示する。加速度データが水平姿勢と判断できるしきい値を超えていれば、傾きが大きいので、動画用補正量を選択するように指示する。   Specifically, if the acceleration data is in a tilt state where it can be determined to be a horizontal posture, it is determined as the still image frame acquisition timing, and the switch 127 is instructed to select a still image correction amount. If the acceleration data exceeds a threshold that can be determined to be a horizontal posture, the inclination is large, and an instruction is given to select a moving image correction amount.

図8は、本実施形態において、補正量切り替え処理の動作の一例を示すフローチャートである。なお、図8に示す処理も、例えば角速度データのA/D変換による取り込み周期など、任意の所定の周期で繰り返し実行される。   FIG. 8 is a flowchart showing an example of the operation of the correction amount switching process in the present embodiment. Note that the processing shown in FIG. 8 is also repeatedly executed at an arbitrary predetermined cycle, for example, a capturing cycle by A / D conversion of angular velocity data.

ステップS3001では、加速度センサ115のデータをA/D変換器116で取り込み、傾き情報を取得する。ステップS3002では、ステップS3001で取得した傾き情報から水平状態を検知して、静止画用補正を行うタイミングか否かを判定する。   In step S3001, the data of the acceleration sensor 115 is taken in by the A / D converter 116 and the tilt information is acquired. In step S3002, a horizontal state is detected from the tilt information acquired in step S3001, and it is determined whether or not it is time to perform still image correction.

その結果、静止画用補正タイミングであると判定されればステップS3003へ進み、静止画用補正タイミングではないと判定されればステップS3004へ進む。ステップS3003では、静止画用補正量算出部114で算出された補正量を選択して、切り替え器127からブレ補正制御回路130へ補正量を出力してステップS3005へ進む。   As a result, if it is determined that it is the still image correction timing, the process proceeds to step S3003. If it is determined that it is not the still image correction timing, the process proceeds to step S3004. In step S3003, the correction amount calculated by the still image correction amount calculation unit 114 is selected, the correction amount is output from the switch 127 to the blur correction control circuit 130, and the process proceeds to step S3005.

ステップS3004では、動画用補正量算出部113で算出された補正量を選択して、切り替え器127からブレ補正制御回路130へ補正量を出力してステップS3005へ進む。ステップS3005では、切り替え器127から取得した補正量(目標値)と現在位置との差分から制御量を算出する。ステップS3006では、ステップS3005で算出された制御量に応じてシフトレンズ102を駆動制御して本処理を終了する。   In step S3004, the correction amount calculated by the moving image correction amount calculation unit 113 is selected, the correction amount is output from the switch 127 to the blur correction control circuit 130, and the process proceeds to step S3005. In step S3005, the control amount is calculated from the difference between the correction amount (target value) acquired from the switch 127 and the current position. In step S3006, the shift lens 102 is driven and controlled in accordance with the control amount calculated in step S3005, and this process ends.

傾き情報において、水平近傍となる時が画面の水平性が保たれる時である。静止画撮影では、できるだけ水平性が保たれている方が、ユーザにとって見やすい画像となることから、このタイミングで静止画に最適なブレ補正制御に切り替える。   In the tilt information, the time when the image is near the horizontal is the time when the horizontality of the screen is maintained. In still image shooting, if the level is kept as much as possible, the image becomes easier for the user to see. Therefore, at this timing, the control is switched to the blur correction control optimum for the still image.

傾きが水平近傍となる時は、水平性がほぼ保たれている時であるから、静止画撮影に適したブレ補正を行い、見やすい静止画像を取得できるようにする。   When the inclination is in the vicinity of the horizontal, the horizontality is almost maintained, so blur correction suitable for still image shooting is performed so that a still image that is easy to view can be acquired.

つまり、ブレ補正選択手段は、動画像撮影中に、傾き情報が所定範囲内の場合、ブレ補正を実行する信号を第1のブレ補正信号から第2のブレ補正信号に切り換える。   That is, the blur correction selection unit switches the signal for executing the blur correction from the first blur correction signal to the second blur correction signal when the tilt information is within a predetermined range during moving image shooting.

以上説明してきたように、本発明の第2の実施形態においては、動画像撮影中に、加速度センサの傾き情報に基づいて静止画用フレーム取得のタイミングであるか否かを判定する。   As described above, in the second embodiment of the present invention, it is determined whether or not it is the timing for acquiring a still image frame based on the tilt information of the acceleration sensor during moving image shooting.

その判定結果を踏まえて、静止画用フレーム取得タイミングでは静止画用補正量を補正目標値として静止画に最適なブレ補正制御を行うことによって、記録した動画像の中から静止画像を生成する時に、高品位でブレの小さい静止画像を抽出することができる。   Based on the determination result, when still image is generated from the recorded moving image by performing the optimum blur correction control for the still image with the still image correction amount as the correction target value at the still image frame acquisition timing. It is possible to extract a high-quality still image with little blur.

なお、本実施形態では、傾き情報に基づいて静止画用フレーム取得タイミングを判定したが、当然ながら、第1の実施形態で示した角速度と角変位量と、本実施形態で示した傾き状態とを組み合わせて静止画用フレーム取得タイミングを判定してもよい。   In this embodiment, the still image frame acquisition timing is determined based on the tilt information. Naturally, the angular velocity and the angular displacement shown in the first embodiment, and the tilt state shown in the present embodiment May be used to determine the still image frame acquisition timing.

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。   Although the present invention has been described in detail based on preferred embodiments thereof, the present invention is not limited to these specific embodiments, and various forms within the scope of the present invention are also included in the present invention. included. A part of the above-described embodiments may be appropriately combined.

また、上述の実施形態の機能を実現するソフトウェアのプログラムを、記録媒体から直接、或いは有線/無線通信を用いてプログラムを実行可能なコンピュータを有するシステム又は装置に供給し、そのプログラムを実行する場合も本発明に含む。   Also, when a software program that realizes the functions of the above-described embodiments is supplied from a recording medium directly to a system or apparatus having a computer that can execute the program using wired / wireless communication, and the program is executed Are also included in the present invention.

従って、本発明の機能処理をコンピュータで実現するために、該コンピュータに供給、インストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の機能処理を実現するためのコンピュータプログラム自体も本発明に含まれる。   Accordingly, the program code itself supplied and installed in the computer in order to implement the functional processing of the present invention by the computer also realizes the present invention. That is, the computer program itself for realizing the functional processing of the present invention is also included in the present invention.

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、OSに供給するスクリプトデータ等、プログラムの形態を問わない。   In this case, the program may be in any form as long as it has a program function, such as an object code, a program executed by an interpreter, or script data supplied to the OS.

プログラムを供給するための記録媒体としては、例えば、ハードディスク、磁気テープ等の磁気記録媒体、光/光磁気記憶媒体、不揮発性の半導体メモリでもよい。   The recording medium for supplying the program may be, for example, a magnetic recording medium such as a hard disk or a magnetic tape, an optical / magneto-optical storage medium, or a nonvolatile semiconductor memory.

また、プログラムの供給方法としては、コンピュータネットワーク上のサーバに本発明を形成するコンピュータプログラムを記憶し、接続のあったクライアントコンピュータはがコンピュータプログラムをダウンロードしてプログラムするような方法も考えられる。   As a program supply method, a computer program that forms the present invention is stored in a server on a computer network, and a connected client computer downloads and programs the computer program.

113 動画用補正量算出部
114 静止画用補正量算出部
126 タイミング判定部
127 切り替え器
130 ブレ補正制御回路
131 シフトレンズ駆動回路
113 correction amount calculation unit for moving image 114 correction amount calculation unit for still image 126 timing determination unit 127 switch 130 shake correction control circuit 131 shift lens drive circuit

Claims (9)

動画像撮影時にブレ検出手段から出力されたブレ情報に基づいて第1のブレ補正信号を算出する第1の信号算出手段と、静止画像の撮影時に前記ブレ情報に基づいて前記第1のブレ補正信号よりも防振性能が高い第2のブレ補正信号を算出する第2の信号算出手段と、ブレ補正を実行する信号を前記第1のブレ補正信号及び前記第2のブレ補正信号のどちらか一方から選択するブレ補正選択手段と、を有するブレ補正装置であって、
前記ブレ補正選択手段は、前記動画像撮影中に、前記ブレ検出手段から出力されたブレ情報が所定条件を満たした場合、前記ブレ補正を実行する信号を前記第1のブレ補正信号から前記第2のブレ補正信号に切り換えることを特徴とするブレ補正装置。
First signal calculation means for calculating a first blur correction signal based on the blur information output from the blur detection means during moving image shooting, and the first blur correction based on the blur information during still image shooting. A second signal calculation means for calculating a second shake correction signal having a higher image stabilization performance than the signal, and a signal for executing the shake correction is either the first shake correction signal or the second shake correction signal. A blur correction device having a blur correction selection means to select from one of the following:
The blur correction selecting means receives a signal for executing the blur correction from the first blur correction signal when the blur information output from the blur detection means satisfies a predetermined condition during the moving image shooting. 2. A blur correction device that switches to two blur correction signals.
前記ブレ補正選択手段は、前記ブレ情報に基づく角速度が所定値よりも小さくなる場合、前記ブレ補正を実行する信号を前記第1のブレ補正信号から前記第2のブレ補正信号に切り換えることを特徴とする請求項1に記載のブレ補正装置。   When the angular velocity based on the blur information is smaller than a predetermined value, the blur correction selection unit switches a signal for executing the blur correction from the first blur correction signal to the second blur correction signal. The blur correction apparatus according to claim 1. 前記ブレ補正選択手段は、前記ブレ情報に基づく角変位量が前記角変位量の基準位置の所定範囲内にある場合、前記ブレ補正を実行する信号を前記第1のブレ補正信号から前記第2のブレ補正信号に切り換えることを特徴とする請求項1に記載のブレ補正装置。   When the angular displacement amount based on the blur information is within a predetermined range of the reference position of the angular displacement amount, the blur correction selection unit sends a signal for executing the blur correction from the first blur correction signal to the second The blur correction apparatus according to claim 1, wherein the blur correction signal is switched to the first blur correction signal. 動画像撮影時にブレ検出手段から出力されたブレ情報に基づいて第1のブレ補正信号を算出する第1の信号算出手段と、静止画像の撮影時に前記ブレ情報に基づいて前記第1のブレ補正信号よりも防振性能が高い第2のブレ補正信号を算出する第2の信号算出手段と、ブレ補正を実行する信号を前記第1のブレ補正信号及び前記第2のブレ補正信号のどちらか一方から選択するブレ補正選択手段と、装置の傾き情報を取得する水平検知手段と、を有するブレ補正装置であって、
前記ブレ補正選択手段は、前記動画像撮影中に、前記傾き情報が所定範囲内の場合、前記ブレ補正を実行する信号を前記第1のブレ補正信号から前記第2のブレ補正信号に切り換えることを特徴とするブレ補正装置。
First signal calculation means for calculating a first blur correction signal based on the blur information output from the blur detection means during moving image shooting, and the first blur correction based on the blur information during still image shooting. A second signal calculation means for calculating a second shake correction signal having a higher image stabilization performance than the signal, and a signal for executing the shake correction is either the first shake correction signal or the second shake correction signal. A shake correction apparatus having a shake correction selection means for selecting from one side and a horizontal detection means for acquiring tilt information of the apparatus,
The blur correction selecting means switches the signal for executing the blur correction from the first blur correction signal to the second blur correction signal when the tilt information is within a predetermined range during the moving image shooting. A blur correction device characterized by the above.
前記ブレ補正選択手段は、前記静止画像の撮影後に前記動画像撮影に戻る場合、前記第1のブレ補正信号から前記第2のブレ補正信号に切り換えた時の前記第1のブレ補正信号を前記ブレ補正を実行する信号として引き継ぐことを特徴とする請求項1乃至4の何れか一項に記載のブレ補正装置。   The blur correction selection means, when returning to the moving image shooting after shooting the still image, the first blur correction signal when the first blur correction signal is switched to the second blur correction signal. The shake correction apparatus according to claim 1, wherein the shake correction apparatus takes over as a signal for executing the shake correction. 前記ブレ補正選択手段は、前記第2のブレ補正信号が選択された場合、画像取り込み時間よりも長い期間、前記ブレ補正を実行する信号として前記第2のブレ補正信号を選択し続けることを特徴とする請求項1乃至5の何れか一項に記載のブレ補正装置。   When the second blur correction signal is selected, the blur correction selection means continues to select the second blur correction signal as a signal for executing the blur correction for a period longer than the image capture time. The blur correction device according to any one of claims 1 to 5. 請求項1乃至6の何れか一項に記載のブレ補正装置と、撮像素子とを有する撮像装置。   An imaging apparatus comprising: the blur correction apparatus according to claim 1; and an imaging element. 動画像撮影時にブレ検出手段から出力されたブレ情報に基づいて第1のブレ補正信号を算出する第1の信号算出工程と、静止画像の撮影時に前記ブレ情報に基づいて前記第1のブレ補正信号よりも防振性能が高い第2のブレ補正信号を算出する第2の信号算出工程と、ブレ補正を実行する信号を前記第1のブレ補正信号及び前記第2のブレ補正信号のどちらか一方から選択するブレ補正選択工程と、を有するブレ補正装置の制御方法であって、
前記ブレ補正選択工程は、前記動画像撮影中に、前記ブレ検出手段から出力されたブレ情報が所定条件を満たした場合、前記ブレ補正を実行する信号を前記第1のブレ補正信号から前記第2のブレ補正信号に切り換えることを特徴とするブレ補正装置の制御方法。
A first signal calculation step of calculating a first blur correction signal based on the blur information output from the blur detection means during moving image shooting; and the first blur correction based on the blur information during still image shooting. A second signal calculation step for calculating a second shake correction signal having a higher image stabilization performance than the signal, and a signal for executing the shake correction is either the first shake correction signal or the second shake correction signal. A shake correction selecting step for selecting from one of the methods, and a control method for the shake correction device,
In the blur correction selecting step, when the blur information output from the blur detection unit satisfies a predetermined condition during the moving image shooting, a signal for executing the blur correction is transmitted from the first blur correction signal to the first blur correction signal. 2. A method for controlling a shake correction apparatus, wherein the control is switched to a second shake correction signal.
動画像撮影時にブレ検出手段から出力されたブレ情報に基づいて第1のブレ補正信号を算出する第1の信号算出工程と、静止画像の撮影時に前記ブレ情報に基づいて前記第1のブレ補正信号よりも防振性能が高い第2のブレ補正信号を算出する第2の信号算出工程と、ブレ補正を実行する信号を前記第1のブレ補正信号及び前記第2のブレ補正信号のどちらか一方から選択するブレ補正選択工程と、装置の傾き情報を取得する水平検知工程と、を有するブレ補正装置の制御方法であって、
前記ブレ補正選択工程は、前記動画像撮影中に、前記傾き情報が所定範囲内の場合、前記ブレ補正を実行する信号を前記第1のブレ補正信号から前記第2のブレ補正信号に切り換えることを特徴とするブレ補正装置の制御方法。
A first signal calculation step of calculating a first blur correction signal based on the blur information output from the blur detection means during moving image shooting; and the first blur correction based on the blur information during still image shooting. A second signal calculation step for calculating a second shake correction signal having a higher image stabilization performance than the signal, and a signal for executing the shake correction is either the first shake correction signal or the second shake correction signal. A method for controlling a shake correction apparatus having a shake correction selection process for selecting from one side and a horizontal detection process for acquiring tilt information of the apparatus,
The blur correction selection step switches the signal for executing the blur correction from the first blur correction signal to the second blur correction signal when the tilt information is within a predetermined range during the moving image shooting. A control method of a shake correction apparatus characterized by the above.
JP2015027923A 2015-02-16 2015-02-16 Blur correction apparatus and control method thereof Active JP6598469B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015027923A JP6598469B2 (en) 2015-02-16 2015-02-16 Blur correction apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015027923A JP6598469B2 (en) 2015-02-16 2015-02-16 Blur correction apparatus and control method thereof

Publications (2)

Publication Number Publication Date
JP2016151619A true JP2016151619A (en) 2016-08-22
JP6598469B2 JP6598469B2 (en) 2019-10-30

Family

ID=56696494

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015027923A Active JP6598469B2 (en) 2015-02-16 2015-02-16 Blur correction apparatus and control method thereof

Country Status (1)

Country Link
JP (1) JP6598469B2 (en)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001268429A (en) * 2000-03-21 2001-09-28 Ricoh Co Ltd Image pickup device, image pickup method and computer readable recording medium recorded with program to execute the method by computer
JP2001358982A (en) * 2000-06-14 2001-12-26 Canon Inc Moving picture/still picture pickup device, camera-shake correction method, and storage medium
JP2002209136A (en) * 2001-01-05 2002-07-26 Canon Inc Photographing device
JP2003333415A (en) * 2002-05-14 2003-11-21 Matsushita Electric Ind Co Ltd Image motion correcting apparatus
JP2004072550A (en) * 2002-08-08 2004-03-04 Minolta Co Ltd Imaging device and picture reproducing device
JP2007249071A (en) * 2006-03-17 2007-09-27 Ricoh Co Ltd Imaging method and imaging apparatus
JP2010141736A (en) * 2008-12-12 2010-06-24 Olympus Imaging Corp Image capturing apparatus
JP2011119936A (en) * 2009-12-02 2011-06-16 Panasonic Corp Photographing device and reproducing method
JP2013033160A (en) * 2011-08-02 2013-02-14 Canon Inc Image blur correction device, its control method, and optical instrument or imaging apparatus
US20140267807A1 (en) * 2013-03-18 2014-09-18 Canon Kabushiki Kaisha Image capture apparatus and control method thereof

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001268429A (en) * 2000-03-21 2001-09-28 Ricoh Co Ltd Image pickup device, image pickup method and computer readable recording medium recorded with program to execute the method by computer
JP2001358982A (en) * 2000-06-14 2001-12-26 Canon Inc Moving picture/still picture pickup device, camera-shake correction method, and storage medium
JP2002209136A (en) * 2001-01-05 2002-07-26 Canon Inc Photographing device
JP2003333415A (en) * 2002-05-14 2003-11-21 Matsushita Electric Ind Co Ltd Image motion correcting apparatus
JP2004072550A (en) * 2002-08-08 2004-03-04 Minolta Co Ltd Imaging device and picture reproducing device
JP2007249071A (en) * 2006-03-17 2007-09-27 Ricoh Co Ltd Imaging method and imaging apparatus
JP2010141736A (en) * 2008-12-12 2010-06-24 Olympus Imaging Corp Image capturing apparatus
JP2011119936A (en) * 2009-12-02 2011-06-16 Panasonic Corp Photographing device and reproducing method
JP2013033160A (en) * 2011-08-02 2013-02-14 Canon Inc Image blur correction device, its control method, and optical instrument or imaging apparatus
US20140267807A1 (en) * 2013-03-18 2014-09-18 Canon Kabushiki Kaisha Image capture apparatus and control method thereof

Also Published As

Publication number Publication date
JP6598469B2 (en) 2019-10-30

Similar Documents

Publication Publication Date Title
JP5413344B2 (en) Imaging apparatus, image composition method, and program
CN104065868B (en) Image capture apparatus and control method thereof
US9800772B2 (en) Focus adjustment device and focus adjustment method that detects spatial frequency of a captured image
US9635258B2 (en) Image pickup apparatus, method of controlling image pickup apparatus, image processing apparatus, and image processing method
RU2591845C2 (en) Image stabilisation apparatus, control method therefor, data medium storing control program therefor, as well as image capturing device equipped with image stabilisation device
JP2012075018A (en) Reproduction device and method, and program
JP6302341B2 (en) Imaging apparatus, control method therefor, program, and storage medium
JP6478504B2 (en) Imaging apparatus and control method thereof
JP2012070241A (en) Image capturing apparatus, method and program
JP6108940B2 (en) Image blur correction apparatus, control method therefor, program, and storage medium
JP6045254B2 (en) Image processing apparatus, control method thereof, and control program
JP5888348B2 (en) Imaging apparatus, imaging control method, and program
JP6642971B2 (en) Image blur correction device, optical device, imaging device, and control method
JP6721084B2 (en) Zoom control device, zoom control method, and program
JP6039212B2 (en) Image blur correction apparatus, imaging apparatus, and image blur correction apparatus control method
JP2012080204A (en) Image processing device and method, and program
JP2018072540A (en) Image processing device, image processing method, and optical apparatus
JP5896181B2 (en) Imaging apparatus, imaging control method, and program
US9071758B2 (en) Image capture apparatus having image stabilization function and control method for same
JP2012090216A (en) Imaging device and control method for imaging device
JP6598469B2 (en) Blur correction apparatus and control method thereof
JP5621265B2 (en) Camera shake correction apparatus, imaging processing method, and program
EP3836540B1 (en) Image processing apparatus and image capturing apparatus
JP4888829B2 (en) Movie processing device, movie shooting device, and movie shooting program
JP6717354B2 (en) Image processing apparatus, image processing method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180205

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190308

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190903

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191001

R151 Written notification of patent or utility model registration

Ref document number: 6598469

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151