JP4759238B2 - Optical equipment - Google Patents

Optical equipment Download PDF

Info

Publication number
JP4759238B2
JP4759238B2 JP2004244289A JP2004244289A JP4759238B2 JP 4759238 B2 JP4759238 B2 JP 4759238B2 JP 2004244289 A JP2004244289 A JP 2004244289A JP 2004244289 A JP2004244289 A JP 2004244289A JP 4759238 B2 JP4759238 B2 JP 4759238B2
Authority
JP
Japan
Prior art keywords
signal
motion vector
angular displacement
angular velocity
generation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004244289A
Other languages
Japanese (ja)
Other versions
JP2006064776A5 (en
JP2006064776A (en
Inventor
智明 山中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2004244289A priority Critical patent/JP4759238B2/en
Publication of JP2006064776A publication Critical patent/JP2006064776A/en
Publication of JP2006064776A5 publication Critical patent/JP2006064776A5/ja
Application granted granted Critical
Publication of JP4759238B2 publication Critical patent/JP4759238B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Adjustment Of Camera Lenses (AREA)
  • Studio Devices (AREA)

Description

本発明は、ビデオカメラや交換レンズ等の光学機器に関し、特に像振れ補正機能を有する光学機器に関するものである
The present invention relates to an optical apparatus such as a video camera or an interchangeable lens, and more particularly to an optical apparatus having an image blur correction function .

光学機器には、振動による像振れを補正する像振れ補正機能が搭載されていることが多い。図8には、角速度センサからの出力と画像の動きベクトルとを用いた像振れ補正システムを有する撮像装置の構成例を示す。(特許文献1,2参照)。   Optical devices often have an image blur correction function for correcting image blur due to vibration. FIG. 8 shows a configuration example of an imaging apparatus having an image blur correction system using an output from an angular velocity sensor and an image motion vector. (See Patent Documents 1 and 2).

図8において、301は角速度センサ(ジャイロセンサ)であり、撮像装置の物理的な振れを検出する。302はジャイロセンサ301からの出力信号のうち直流成分を遮断して交流成分、すなわち振動成分のみを通過させるDCカットフィルタである。   In FIG. 8, reference numeral 301 denotes an angular velocity sensor (gyro sensor), which detects a physical shake of the imaging apparatus. Reference numeral 302 denotes a DC cut filter that blocks the direct current component of the output signal from the gyro sensor 301 and passes only the alternating current component, that is, the vibration component.

303はDCカットフィルタ302から出力された角速度信号を、適当なレベルに増幅するアンプである。312はアンプ303の出力信号を振れ信号としての角変位信号に変換するためのジャイロ信号処理部である。   An amplifier 303 amplifies the angular velocity signal output from the DC cut filter 302 to an appropriate level. Reference numeral 312 denotes a gyro signal processing unit for converting the output signal of the amplifier 303 into an angular displacement signal as a shake signal.

317は撮影光学系により形成された被写体像を光電変換する撮像素子であり、該撮像素子317からの出力信号(光電変換信号)は映像信号処理回路318に入力される。映像信号処理回路318では、入力された光電変換信号に対して各種処理を施して映像信号を生成する。315は動きベクトル検出部であり、映像信号処理回路318から出力された映像信号に基づいて映像の動きベクトルの検出を行う。   Reference numeral 317 denotes an image sensor that photoelectrically converts a subject image formed by the photographing optical system. An output signal (photoelectric conversion signal) from the image sensor 317 is input to the video signal processing circuit 318. The video signal processing circuit 318 performs various processes on the input photoelectric conversion signal to generate a video signal. A motion vector detection unit 315 detects a motion vector of the video based on the video signal output from the video signal processing circuit 318.

角変位信号と動きベクトル信号は加算器313で加算され、振れ補正制御信号として位相・ゲイン補償部311に入力される。位相ゲイン補償部311で処理された振れ補正制御信号は、像振れ補正ユニット200を駆動する駆動回路308へ入力される。
The angular displacement signal and the motion vector signal are added by an adder 313 and input to the phase / gain compensation unit 311 as a shake correction control signal. The shake correction control signal processed by the phase / gain compensation unit 311 is input to the drive circuit 308 that drives the image shake correction unit 200.

このような角速度センサの出力と動きベクトルを用いた像振れ補正システムでは、高周波域の振れの検出に適した角速度センサと、低周波域の振れの検出に適した動きベクトルとを組み合わせることで、広帯域の振れを検出し、像振れを補正することが可能である。
特開平4−163533号公報(第2頁左下欄13行〜第4頁左上欄14行、第1図等) 特開平10−322584号公報(段落0029〜0039、図1等)
In such an image blur correction system using the output of an angular velocity sensor and a motion vector, by combining an angular velocity sensor suitable for detecting a shake in a high frequency range and a motion vector suitable for detecting a shake in a low frequency range, It is possible to detect a wide-range shake and correct an image shake.
JP-A-4-163533 (page 2, lower left column, line 13 to page 4, upper left column, line 14, FIG. 1, etc.) Japanese Patent Laid-Open No. 10-322584 (paragraphs 0029 to 0039, FIG. 1, etc.)

しかしながら、上述した角速度センサからの出力はアナログ信号であり、一般に外的ノイズに弱い。このため、角速度センサの出力と動きベクトルを用いた像振れ補正システム全体としての外的ノイズに対する信頼性が低いという問題がある。   However, the output from the above-described angular velocity sensor is an analog signal and is generally vulnerable to external noise. For this reason, there is a problem in that the image blur correction system as a whole using the output of the angular velocity sensor and the motion vector has low reliability against external noise.

また、従来の像振れ補正システムでは、角速度信号のサンプリング周波数は数kHz(例えば、2kHz)であるのに対し、動きベクトルのサンプリング周波数は、撮像素子における電荷蓄積および読み出し周波数に対応した周波数(例えば、NTSC方式では60Hz、PAL方式では50Hz)に設定されている。つまり角速度信号と動きベクトルの生成周期が大きく異なる。このため、これら異なるサンプリング周期で得られる振れ信号をそのまま加算すると、該加算信号の変動が大きくなる場合があり、その結果、像振れ補正された出力映像が不自然な動きをしてしまう。   In the conventional image stabilization system, the sampling frequency of the angular velocity signal is several kHz (for example, 2 kHz), whereas the sampling frequency of the motion vector is a frequency (for example, a frequency corresponding to the charge accumulation and readout frequency in the image sensor). The NTSC system is set to 60 Hz, and the PAL system is set to 50 Hz. That is, the angular velocity signal and the motion vector generation period are greatly different. For this reason, if the shake signals obtained at these different sampling periods are added as they are, fluctuations in the added signal may increase, and as a result, the output video that has undergone image blur correction moves unnaturally.

本発明は、外的ノイズに対する信頼性が高く、広帯域での振れに対応可能な像振れ補正を行うことができる光学機器を提供することを目的の1つとしている。さらに、本発明は、加算される振れ信号が異なる周期でサンプリングされる場合でも、自然な出力画像が得られるようにした光学機器を提供することを目的の1つとしている。   An object of the present invention is to provide an optical apparatus that can perform image blur correction with high reliability against external noise and capable of dealing with a wide-range blur. Furthermore, an object of the present invention is to provide an optical apparatus that can obtain a natural output image even when a shake signal to be added is sampled at different periods.

本発明の光学機器は、振動を検出してアナログ信号である角速度信号を出力する角速度センサと、撮影光学系により形成された被写体像を光電変換する撮像素子と、像振れを補正する補正手段と、角速度センサからの出力のAD変換により得られたデジタル信号としての角速度信号を積分して生成された角変位信号と撮像素子から得られる映像信号を用いて生成された垂直方向および水平方向での画像の動きを表す動きベクトルを示す動きベクトル信号とを用いて、補正手段を制御するための制御信号を生成する信号生成手段とを有する。そして、信号生成手段は、動きベクトル信号を、角変位信号の生成周期に応じた周期毎の動きベクトルの変化量を示す信号に変換し、該動きベクトルの変化量を示す信号を角変位信号の生成周期に応じた周期で角変位信号に累積的に加算して制御信号を生成することを特徴とする。 An optical apparatus according to the present invention includes an angular velocity sensor that detects vibration and outputs an angular velocity signal that is an analog signal, an image sensor that photoelectrically converts a subject image formed by a photographing optical system, and a correction unit that corrects image blur. In the vertical and horizontal directions generated using the angular displacement signal generated by integrating the angular velocity signal as a digital signal obtained by AD conversion of the output from the angular velocity sensor and the video signal obtained from the image sensor. Signal generating means for generating a control signal for controlling the correcting means, using a motion vector signal indicating a motion vector representing the motion of the image. Then, the signal generation means converts the motion vector signal into a signal indicating a change amount of the motion vector for each period according to the generation period of the angular displacement signal, and converts the signal indicating the change amount of the motion vector into the angular displacement signal. The control signal is generated by cumulatively adding to the angular displacement signal at a period corresponding to the generation period .

本発明の交換レンズは、撮像素子を有するカメラ本体に着脱可能な交換レンズであって、振動を検出してアナログ信号である角速度信号を出力する角速度センサと、像振れを補正する補正手段と、角速度センサからの出力のAD変換により得られたデジタル信号としての角速度信号を積分して生成された角変位信号と撮像素子から得られる映像信号を用いて生成された垂直方向および水平方向での画像の動きを表す動きベクトルを示す動きベクトル信号とを用いて、補正手段を制御するための制御信号を生成する信号生成手段とを有する。そして、信号生成手段は、動きベクトル信号を、角変位信号の生成周期に応じた周期毎の動きベクトルの変化量を示す信号に変換し、該動きベクトルの変化量を示す信号を角変位信号の生成周期に応じた周期で角変位信号に累積的に加算して制御信号を生成することを特徴とする。An interchangeable lens according to the present invention is an interchangeable lens that can be attached to and detached from a camera body having an imaging device, detects an oscillation, and outputs an angular velocity signal that is an analog signal, a correction unit that corrects image blur, Vertical and horizontal images generated using an angular displacement signal generated by integrating an angular velocity signal as a digital signal obtained by AD conversion of an output from the angular velocity sensor and a video signal obtained from an image sensor. Signal generating means for generating a control signal for controlling the correcting means, using a motion vector signal indicating a motion vector representing the motion of the correction means. Then, the signal generation means converts the motion vector signal into a signal indicating a change amount of the motion vector for each period according to the generation period of the angular displacement signal, and converts the signal indicating the change amount of the motion vector into the angular displacement signal. The control signal is generated by cumulatively adding to the angular displacement signal at a period corresponding to the generation period.

本発明によれば、角速度センサからの角速度信号と撮像素子から得られる映像信号を用いて生成される動きベクトル信号とが異なる周期でサンプリングされる場合でも、動きベクトル信号を、角変位信号の生成周期に応じた周期毎の動きベクトルの変化量を示す信号に変換し、該動きベクトルの変化量を示す信号を角変位信号の生成周期に応じた周期で角変位信号に累積的に加算して像振れ補正のための制御信号を生成するので、自然な像振れ補正画像を得ることができる。 According to the present invention, even when the angular velocity signal from the angular velocity sensor and the motion vector signal generated using the video signal obtained from the image sensor are sampled at different periods, the motion vector signal is generated as an angular displacement signal. A signal indicating the change amount of the motion vector for each cycle according to the cycle is converted, and the signal indicating the change amount of the motion vector is cumulatively added to the angular displacement signal at a cycle according to the generation cycle of the angular displacement signal. Since a control signal for image blur correction is generated, a natural image blur correction image can be obtained.

以下、本発明の実施例について図面を参照しながら説明する。   Embodiments of the present invention will be described below with reference to the drawings.

図1には、本発明の実施例1である像振れ補正機能付きビデオカメラであって、レンズ一体型のビデオカメラ(撮像装置)の構成を示している。   FIG. 1 shows a configuration of a lens-integrated video camera (imaging device) that is a video camera with an image blur correction function that is Embodiment 1 of the present invention.

図1において、100は固定のフロントレンズユニット、101は光軸方向に移動して変倍を行うズームレンズユニット、103は固定レンズユニット、104は光軸方向に移動して焦点調節を行うフォーカスレンズユニットである。102は光量調整を行う絞りである。   In FIG. 1, 100 is a fixed front lens unit, 101 is a zoom lens unit that moves in the optical axis direction and performs zooming, 103 is a fixed lens unit, and 104 is a focus lens that moves in the optical axis direction and performs focus adjustment. Is a unit. Reference numeral 102 denotes an aperture for adjusting the amount of light.

4は光学式像振れ補正を行うための可変頂角プリズムであり、対向配置された平板ガラス間に高屈折率の透明な弾性体または不活性液体が封入されて構成されている。この可変頂角プリズム4は、上記平板ガラスを傾けることで光路を変位させることができる。   Reference numeral 4 denotes a variable apex angle prism for performing optical image blur correction, which is configured by sealing a transparent elastic body or an inert liquid having a high refractive index between flat glass plates arranged opposite to each other. The variable apex angle prism 4 can displace the optical path by tilting the flat glass.

不図示の被写体からの光束は、可変頂角プリズム4およびレンズユニット100,101,103,104および絞り102を通過して、CCDセンサやCMOSセンサ等の撮像素子(光電変換素子)17の受光面上で結像する。撮像素子17では、光電変換された電荷が蓄積され、所定のタイミングで該電荷が読み出される。撮像素子17から出力された信号は、映像信号処理回路18に送られる。映像信号処理回路18では撮像素子17からの出力信号に対して所定の増幅やガンマ補正などの各種処理を施して映像信号を生成する。映像信号は不図示の表示デバイス(液晶ディスプレイパネル等)に出力される。また、映像信号は、信号生成回路105内の動きベクトル検出部15にも入力される。この動きベクトル検出部15での検出動作については後述する。
A light beam from a subject (not shown) passes through the variable apex angle prism 4, the lens units 100 , 101, 103, 104 and the diaphragm 102, and the light receiving surface of the image sensor (photoelectric conversion element) 17 such as a CCD sensor or a CMOS sensor. Image above. In the image sensor 17, the photoelectrically converted charge is accumulated, and the charge is read out at a predetermined timing. The signal output from the image sensor 17 is sent to the video signal processing circuit 18. The video signal processing circuit 18 performs various processes such as predetermined amplification and gamma correction on the output signal from the image sensor 17 to generate a video signal. The video signal is output to a display device (not shown) (liquid crystal display panel or the like). The video signal is also input to the motion vector detection unit 15 in the signal generation circuit 105. The detection operation in the motion vector detection unit 15 will be described later.

1はジャイロセンサ(検出手段)であり、該ビデオカメラの振動を物理的又は機械的に検出する。2はジャイロセンサ1からの出力信号のうち直流成分を遮断して振動成分のみを通過させるDCカットフィルタである。3はDCカットフィルタ2から出力された角速度信号を所要のレベルに増幅するアンプである。該アンプ3で増幅された角速度信号は、信号生成回路105内のAD変換器10によりアナログ信号からデジタル信号に変換され、ジャイロ信号処理部12へ入力される。ここで、信号生成回路(信号生成手段)105は、各種演算をデジタルで行うマイクロコンピュータやDSP(digital signal processor)等の演算装置(制御回路)内に設けられている。
Reference numeral 1 denotes a gyro sensor (detection means) that physically or mechanically detects the vibration of the video camera. Reference numeral 2 denotes a DC cut filter that blocks the direct current component of the output signal from the gyro sensor 1 and passes only the vibration component. An amplifier 3 amplifies the angular velocity signal output from the DC cut filter 2 to a required level. The angular velocity signal amplified by the amplifier 3 is converted from an analog signal to a digital signal by the AD converter 10 in the signal generation circuit 105 and input to the gyro signal processing unit 12. Here, the signal generation circuit (signal generation means) 105 is provided in a calculation device (control circuit) such as a microcomputer or DSP (digital signal processor) that performs various calculations digitally.

ジャイロ信号処理部12は、角速度信号を角変位信号に変換する。該ジャイロ信号処理部12は、基本的に積分器により構成されており、任意の帯域で特性を変化させることができる可変ハイパスフィルタ(HPF)の機能や角速度信号の周波数を検出する機能も有する。   The gyro signal processing unit 12 converts the angular velocity signal into an angular displacement signal. The gyro signal processing unit 12 is basically composed of an integrator, and has a function of a variable high-pass filter (HPF) capable of changing characteristics in an arbitrary band and a function of detecting the frequency of an angular velocity signal.

動きベクトル検出部15は、映像信号のフィールド周期毎に、映像の動きベクトルを検出し、検出した動きベクトルを示す信号(動きベクトル信号)を動きベクトル変換部16に送る。   The motion vector detection unit 15 detects a video motion vector for each field period of the video signal, and sends a signal (motion vector signal) indicating the detected motion vector to the motion vector conversion unit 16.

ここで、図2には、動きベクトル検出部15の構成例を示している。現在、画像の符号化装置や画像の振れ検出装置に必要な動きベクトル検出方法としては、相関法やブロックマッチング法などがある。ブロックマッチング法では、入力映像信号のフィールド(又はフレーム、以下同じ)を複数の適当な大きさのブロック(例えば、8×8ライン)に分割し、現フィールドの特定ブロックとの相関値が最小となる前フィールド中のブロックを検索する。相関値とは、例えば特定ブロックと前フィールドの探索ブロックの画素値(輝度値)の差の絶対値の和で示される。そして、相関値が最小である前フィールドのブロックと現フィールドの特定ブロックとの相対的なずれ量および方向を、該特定ブロックの動きベクトルとして表す。   Here, FIG. 2 illustrates a configuration example of the motion vector detection unit 15. Currently, as a motion vector detection method necessary for an image encoding device and an image shake detection device, there are a correlation method and a block matching method. In the block matching method, a field (or frame, the same applies hereinafter) of an input video signal is divided into a plurality of appropriately sized blocks (for example, 8 × 8 lines), and the correlation value with a specific block of the current field is minimized. Search for a block in the previous field. The correlation value is indicated by, for example, the sum of absolute values of differences between pixel values (luminance values) between a specific block and a search block in the previous field. The relative shift amount and direction between the block in the previous field and the specific block in the current field having the smallest correlation value are expressed as a motion vector of the specific block.

このようにして検出(算出)される動きベクトルは、画素単位での垂直方向および水平方向それぞれの移動量を示す。この動きベクトルは、連続した撮像画像(フィールド画像又はフレーム画像)の単位時間当たりの移動量を示すものであり、連続した撮像画像の移動量に比例した値が得られる。なお、実際の振動による変位量に対してジャイロセンサにより検出された振れ変位量に誤差がない場合(例えば、高周波域の振れのみの場合)は、画像上の動きベクトルは検出されず、動きベクトルに基づく振れ補正の補助情報も0となる。
The motion vector detected (calculated) in this way indicates the amount of movement in the vertical and horizontal directions in units of pixels. This motion vector indicates a movement amount per unit time of continuous captured images (field image or frame image), and a value proportional to the movement amount of the continuous captured images is obtained. When there is no error in the shake displacement amount detected by the gyro sensor 1 with respect to the displacement amount due to actual vibration (for example, only in the case of shake in a high frequency range), the motion vector on the image is not detected, and the motion The auxiliary information for shake correction based on the vector is also zero.

図2には、このようなブロックマッチング法を用いた場合の動きベクトル検出部15の構成例を示している。動きベクトルの検出対象となる映像信号がフィールド単位で第1の記憶部210および空間周波数フィルタ212にそれぞれ与えられる。第1の記憶部210は1フィールドの画像信号を一時的に記憶するメモリから構成されている。フィルタ212は、画像信号から動きベクトル検出に有用な空間周波数成分を抽出するものであり、画像信号の高空間周波数成分を除去するために設けられる。   FIG. 2 shows a configuration example of the motion vector detection unit 15 when such a block matching method is used. A video signal to be detected as a motion vector is supplied to the first storage unit 210 and the spatial frequency filter 212 for each field. The first storage unit 210 includes a memory that temporarily stores an image signal of one field. The filter 212 extracts a spatial frequency component useful for motion vector detection from the image signal, and is provided to remove a high spatial frequency component of the image signal.

フィルタ212を通過した画像信号は、2値化部213により所定レベルを境に2値化される。2値化された画像信号は、相関演算部214および1フィールド期間の遅延手段としての第2の記憶部216に与えられる。相関演算部214には、更に第2の記憶部216から前フィールドの画像信号が加えられている。相関演算部214は、上述したブロックマッチング法に従ってブロック単位で現フィールドと前フィールドの相関演算を行い、その結果を次段の動きベクトル算出部218に与える。   The image signal that has passed through the filter 212 is binarized by a binarization unit 213 at a predetermined level. The binarized image signal is given to the correlation calculation unit 214 and the second storage unit 216 as a delay means for one field period. The correlation calculation unit 214 is further added with the image signal of the previous field from the second storage unit 216. The correlation calculation unit 214 performs a correlation calculation between the current field and the previous field in block units according to the block matching method described above, and gives the result to the motion vector calculation unit 218 in the next stage.

動きベクトル算出部218は、与えられた相関値からブロック単位で動きベクトルを算出する。ブロック単位の動きベクトルは動きベクトル決定部224に与えられる。動きベクトル決定部224は、ブロック単位の動きベクトルより全体の動きベクトルを決定する。例えば、ブロック単位の動きベクトルの中央値または平均値を全体の動きベクトルとして決定する。   The motion vector calculation unit 218 calculates a motion vector for each block from the given correlation value. The motion vector in units of blocks is given to the motion vector determination unit 224. The motion vector determination unit 224 determines the entire motion vector from the block-based motion vector. For example, the median value or average value of the motion vectors in block units is determined as the entire motion vector.

動きベクトル決定部224で決定された動きベクトルは、動きベクトル変換部16に入力され、ここでは該動きベクトルを所定の方法により変換する。具体的な変換方法については後述する。そして、変換後の動きベクトル信号と前述したジャイロセンサ1からの出力に基づいて生成された角変位信号とを加算器14により加算し、加算結果に対応した可変頂角プリズム4の目標駆動量および駆動方向を示す信号が生成され、信号生成回路105内の減算器13に入力される。
The motion vector determined by the motion vector determination unit 224 is input to the motion vector conversion unit 16, where the motion vector is converted by a predetermined method. A specific conversion method will be described later. The converted motion vector signal and the angular displacement signal generated based on the output from the gyro sensor 1 are added by the adder 14, and the target drive amount of the variable apex angle prism 4 corresponding to the addition result and A signal indicating the driving direction is generated and input to the subtracter 13 in the signal generation circuit 105.

また、可変頂角プリズム4の駆動量(位置)はエンコーダ5により検出され、該検出信号は信号処理回路6を介してAD変換器9でデジタル信号に変換されて減算器13にフィードバックされる。減算器13の出力は、可変頂角プリズム4の目標駆動量と実際の可変頂角プリズム4の駆動量との誤差を示し、この誤差量に応じた信号が位相・ゲイン補償部11で位相およびゲインの補償がなされることにより振れ補正制御信号として駆動回路8に入力される。
The driving amount (position) of the variable apex angle prism 4 is detected by the encoder 5, and the detected signal is converted into a digital signal by the AD converter 9 via the signal processing circuit 6 and fed back to the subtractor 13. The output of the subtractor 13 indicates an error between the target drive amount of the variable apex angle prism 4 and the actual drive amount of the variable apex angle prism 4, and a signal corresponding to the error amount is output by the phase / gain compensator 11 as the phase and gain. As the gain is compensated, it is input to the drive circuit 8 as a shake correction control signal.

駆動回路8は、該振れ補正制御信号に応じた駆動量および駆動方向に可変頂角プリズム4を駆動するようアクチュエータ7を駆動する。アクチュエータ7は、ボイスコイルモータ等からなり、可変頂角プリズム4の平板ガラスを揺動させる。これにより、ジャイロセンサ1を用いて生成された振れ信号(角変位信号)と画像の動きベクトルを示す信号とに基づく像振れ補正が行われる。
The drive circuit 8 drives the actuator 7 to drive the variable apex angle prism 4 in the drive amount and drive direction according to the shake correction control signal. The actuator 7 is composed of a voice coil motor or the like, and swings the flat glass of the variable apex angle prism 4. Thereby, image blur correction based on the shake signal (angular displacement signal) generated using the gyro sensor 1 and the signal indicating the motion vector of the image is performed.

次に、動きベクトル変換部16内での変換方法について説明する。図3(a)は動きベクトルの本来のサンプリング周期での動きベクトルの変化を示している。前述したように、動きベクトルはフィールド周期(NTSCでは1/60sec、PALでは1/50sec、図中ではV周期と示す)で生成、すなわちサンプリングされる。これに対し、ジャイロセンサ1を用いた角変位信号の生成(サンプリング周期は、ジャイロ信号処理部12での演算(変換)周期或いはAD変換器10による角速度信号の読み込み周期の整数倍又は整数分の一の周期であり、例えば1.2kHz,2kHzとか12kHzといった周波数に対応した周期である。この場合、動きベクトルのサンプリング周期毎の変動が大きくなるので、その結果、該動きベクトル信号と角変位信号との加算結果の変動量も大きくなってしまう。
Next, a conversion method in the motion vector conversion unit 16 will be described. FIG. 3A shows the change of the motion vector in the original sampling period of the motion vector. As described above, the motion vector is generated, that is, sampled in a field period (1/60 sec for NTSC, 1/50 sec for PAL, and indicated as V period in the figure). On the other hand, the generation ( sampling ) cycle of the angular displacement signal using the gyro sensor 1 is an integer multiple or an integer of the calculation (conversion) cycle in the gyro signal processing unit 12 or the read cycle of the angular velocity signal by the AD converter 10. For example, 1.2 kHz, 2 kHz, or 12 kHz. In this case, since the fluctuation of the motion vector for each sampling period increases, as a result, the fluctuation amount of the addition result of the motion vector signal and the angular displacement signal also increases.

図3(b)には、本実施例の動きベクトル変換部16で変換処理された動きベクトルの変化を示している。該動きベクトル変換部16では、下記(1)式により、フィールド周期ΔT1毎に得られる動きベクトルの量Wを、ジャイロセンサ1による角変位信号の生成周期ΔT2で分割することで、該周期ΔT2ごとの動きベクトルの変化量ΔVを求める。
ΔV=W/(ΔT1/ΔT2)…(1)
FIG. 3B shows a change in the motion vector converted by the motion vector conversion unit 16 of the present embodiment. The motion vector conversion unit 16 divides the motion vector amount W obtained for each field period ΔT1 by the angular displacement signal generation period ΔT2 by the gyro sensor 1 according to the following equation (1), so that each period ΔT2 The change amount ΔV of the motion vector is obtained.
ΔV = W / (ΔT1 / ΔT2) (1)

この変換を行うことで、デジタル演算処理において、動きベクトルの変化量を示す信号を角変位信号の生成周期に略同期させて(つまりは角変位信号の生成周期に応じた周期で)角変位信号に累積的に加算することができるため、これらの加算した結果の上記周期ΔT2ごとの変動量が小さくなり、違和感のない像振れ補正画像を得ることが可能となる。 By performing this conversion, in the digital arithmetic processing, the signal indicating the change amount of the motion vector is substantially synchronized with the generation period of the angular displacement signal (that is, with a period corresponding to the generation period of the angular displacement signal). it is possible to add cumulatively, the amount of variation of each said periodic ΔT2 of the addition result is reduced, it is possible to obtain a no image blur corrected image sense of incongruity.

なお、ΔT2で示される周期は厳密にはV周期と同期していないが、ΔVが小さいため、実際の像振れ補正にはほとんど影響はない。   Although the period indicated by ΔT2 is not strictly synchronized with the V period, since ΔV is small, the actual image blur correction is hardly affected.

以上、本実施例のビデオカメラを構成する各部の機能および処理の流れについて説明したが、信号生成回路105は、図4に示すソフトウェア(プログラム)に従って動作する。   The function and processing flow of each unit constituting the video camera of this embodiment has been described above. The signal generation circuit 105 operates according to software (program) shown in FIG.

ステップ(図ではSと略す)1では、像振れ補正動作を実行させるか否かをユーザーが選択するための防振スイッチ(IS SW)がオンか否かを判別し、オンである場合はステップ2およびステップ4に進む。   In step (abbreviated as S in the figure) 1, it is determined whether or not the image stabilization switch (IS SW) for selecting whether or not to execute the image blur correction operation is ON. Go to 2 and Step 4.

ステップ2では、ジャイロセンサ1からの角速度信号を取り込み、ステップ3では、該角速度信号を積分して角変位信号に変換する。
In step 2, the angular velocity signal from the gyro sensor 1 is captured, and in step 3, the angular velocity signal is integrated and converted into an angular displacement signal.

一方、ステップ4では、映像信号処理回路18から映像信号を取り込み、ステップ5で前述したブロックマッチング法等を用いて動きベクトルを検出および決定する。そして、ステップ6では、(1)式を用いて角速度信号の生成周期ごとの動きベクトルの変化量ΔVを算出する。 On the other hand, in step 4, a video signal is taken from the video signal processing circuit 18, and a motion vector is detected and determined using the block matching method described above in step 5. In step 6, the motion vector change amount ΔV for each angular velocity signal generation cycle is calculated using equation (1).

次に、ステップ7では、ステップ3で得られた角変位信号とステップ6で得られた動きベクトルの変化量ΔVを示す信号とを角変位信号の生成周期ΔT2で累積的に加算する。そして、ステップ8では、該加算した結果からエンコーダ5のAD変換後の出力を減算(フィードバック)し、さらに該減算結果の信号に対して位相およびゲイン補償処理を行って振れ補正制御信号を生成する。次に、ステップ9で、振れ補正制御信号を駆動回路8に出力し、可変頂角プリズム4を駆動する。そして、ステップ1に戻る。 Next, in step 7, the angular displacement signal obtained in step 3 and the signal indicating the motion vector change amount ΔV obtained in step 6 are cumulatively added in the angular displacement signal generation period ΔT2. In step 8, the output after the AD conversion of the encoder 5 is subtracted (feedback) from the addition result, and the shake correction control signal is generated by performing phase and gain compensation processing on the signal of the subtraction result. . Next, in step 9, a shake correction control signal is output to the drive circuit 8, and the variable apex angle prism 4 is driven. And it returns to step 1.

図5には、本発明の実施例2であるレンズ交換が可能なビデオカメラシステムの構成を示している。図5において、左側が交換可能なレンズ装置(光学機器)を、右側がビデオカメラ本体(撮像装置)を示している。
FIG. 5 shows a configuration of a video camera system capable of exchanging lenses, which is Embodiment 2 of the present invention. 5, left interchangeable lens apparatus (optical apparatus), and the right side shows a video camera (image pickup apparatus).

交換レンズにおいて、100は固定のフロントレンズユニット、101は光軸方向に移動して変倍を行うズームレンズユニット、103は固定レンズユニット、104は光軸方向に移動して焦点調節を行うフォーカスレンズユニットである。102は光量調整を行う絞りである。   In the interchangeable lens, 100 is a fixed front lens unit, 101 is a zoom lens unit that moves in the optical axis direction and performs zooming, 103 is a fixed lens unit, and 104 is a focus lens that moves in the optical axis direction and performs focus adjustment. Is a unit. Reference numeral 102 denotes an aperture for adjusting the amount of light.

4は光学式像振れ補正を行うための可変頂角プリズムであり、対向配置された平板ガラス間に高屈折率の透明な弾性体または不活性液体が封入されて構成されている。この可変頂角プリズム4は、上記平板ガラスを傾けることで光路を変位させることができる。
ビデオカメラ本体において、17はCCDセンサやCMOSセンサ等の撮像素子(光電変換素子)である。該ビデオカメラ本体のマウント(図示せず)には、交換レンズのマウント(図示せず)がバヨネット結合により装着されている。
Reference numeral 4 denotes a variable apex angle prism for performing optical image blur correction, which is configured by sealing a transparent elastic body or an inert liquid having a high refractive index between flat glass plates arranged opposite to each other. The variable apex angle prism 4 can displace the optical path by tilting the flat glass.
In the video camera body, reference numeral 17 denotes an image sensor (photoelectric conversion element) such as a CCD sensor or a CMOS sensor. An interchangeable lens mount (not shown) is mounted on the video camera body mount (not shown) by bayonet coupling.

不図示の被写体からの光束は、可変頂角プリズム4およびレンズユニット100,101,103,104および絞り102を通過して、撮像素子17の受光面上で結像する。撮像素子17では、光電変換された電荷が蓄積され、所定のタイミングで該電荷が読み出される。撮像素子17から出力された信号は、カメラ本体に設けられた映像信号処理回路18に送られる。映像信号処理回路18では撮像素子17からの出力信号に対して所定の増幅やガンマ補正などの各種処理を施して映像信号を生成する。映像信号は不図示の表示デバイス(液晶ディスプレイパネル等)に出力される。また、映像信号は、カメラ本体に設けられた動きベクトル検出部15にも入力される。この動きベクトル検出部15の構成および動作は、実施例1で説明したものと同じである。また、カメラ本体には、カメラ本体側の全ての制御を司るカメラ制御回路108が設けられている。
A light beam from a subject (not shown) passes through the variable apex angle prism 4, the lens units 100 , 101, 103, 104 and the diaphragm 102 and forms an image on the light receiving surface of the image sensor 17. In the image sensor 17, the photoelectrically converted charge is accumulated, and the charge is read out at a predetermined timing. The signal output from the image sensor 17 is sent to a video signal processing circuit 18 provided in the camera body. The video signal processing circuit 18 performs various processes such as predetermined amplification and gamma correction on the output signal from the image sensor 17 to generate a video signal. The video signal is output to a display device (not shown) (liquid crystal display panel or the like). The video signal is also input to a motion vector detection unit 15 provided in the camera body. The configuration and operation of the motion vector detection unit 15 are the same as those described in the first embodiment. The camera body is provided with a camera control circuit 108 that controls all of the control on the camera body side.

また、交換レンズにおいて、1は角速度センサ(ジャイロセンサ)であり、交換レンズの物理的又は機械的な振動を検出する。2はジャイロセンサ1からの出力信号のうち直流成分を遮断して振動成分のみを通過させるDCカットフィルタである。   In the interchangeable lens, reference numeral 1 denotes an angular velocity sensor (gyro sensor) that detects physical or mechanical vibration of the interchangeable lens. Reference numeral 2 denotes a DC cut filter that blocks the direct current component of the output signal from the gyro sensor 1 and passes only the vibration component.

3はDCカットフィルタ2から出力された角速度信号を適当なレベルに増幅するアンプである。アンプ3で増幅された角速度信号は、信号生成回路106に設けられたAD変換器10によってアナログ信号からデジタル信号に変換され、ジャイロ信号処理部12へ入力される。   An amplifier 3 amplifies the angular velocity signal output from the DC cut filter 2 to an appropriate level. The angular velocity signal amplified by the amplifier 3 is converted from an analog signal to a digital signal by the AD converter 10 provided in the signal generation circuit 106 and input to the gyro signal processing unit 12.

ジャイロ信号処理部12は、角速度信号を角変位信号に変換するため、基本的に積分器を有して構成される。ジャイロ信号処理部12は、任意の帯域で特性を可変する可変ハイパスフィルタ(HPF)の機能や角速度信号の周波数検出機能も有する。   The gyro signal processing unit 12 basically includes an integrator in order to convert an angular velocity signal into an angular displacement signal. The gyro signal processing unit 12 also has a function of a variable high-pass filter (HPF) that changes characteristics in an arbitrary band and a frequency detection function of an angular velocity signal.

カメラ本体側の動きベクトル検出部15によってフィールド周期毎に検出された動きベクトルを示す信号(動きベクトル信号)は、カメラ通信部20から通信用接点21を介してレンズ通信部19に送信される。カメラ通信部20およびレンズ通信部19は、同期式シリアル通信など、電気的なデータ伝達機能を有するものであればその通信方式を問わない。また、動きベクトル信号の通信は、例えば、映像信号の垂直同期信号に同期したタイミングで行われる。   A signal (motion vector signal) indicating a motion vector detected for each field period by the motion vector detection unit 15 on the camera body side is transmitted from the camera communication unit 20 to the lens communication unit 19 via the communication contact 21. The camera communication unit 20 and the lens communication unit 19 may be of any communication method as long as they have an electrical data transmission function such as synchronous serial communication. The communication of the motion vector signal is performed at a timing synchronized with the vertical synchronization signal of the video signal, for example.

交換レンズ側の信号生成回路106内に設けられた動きベクトル変換部16では、カメラ本体側から受信した動きベクトル信号を、実施例1で説明した(1)式を用いて変換する。そして、変換後の動きベクトルの変化量を示す信号と前述したジャイロセンサ1からの出力に基づいて生成された角変位信号とを加算器14により加算し、加算結果に対応した可変頂角プリズム4の目標駆動量および駆動方向を示す信号が生成され、信号生成回路106内の減算器13に入力される。ここで、信号生成回路106は、各種演算をデジタルで行うマイクロコンピュータやDSP(digital signal processor)等の演算装置(レンズ制御回路)内に設けられている。該演算装置は、可変頂角プリズム4の駆動制御の他、ズームレンズ101、フォーカスレンズ104および絞り102などの制御を行う。 The motion vector conversion unit 16 provided in the signal generation circuit 106 on the interchangeable lens side converts the motion vector signal received from the camera body side using the equation (1) described in the first embodiment. Then, a signal indicating the amount of change in the motion vector after conversion and the angular displacement signal generated based on the output from the gyro sensor 1 are added by the adder 14, and the variable apex angle prism 4 corresponding to the addition result is added. A signal indicating the target drive amount and drive direction is generated and input to the subtracter 13 in the signal generation circuit 106. Here, the signal generation circuit 106 is provided in a calculation device (lens control circuit) such as a microcomputer or a DSP (digital signal processor) that performs various calculations digitally. The arithmetic unit controls the zoom lens 101, the focus lens 104, the diaphragm 102, and the like in addition to driving control of the variable apex angle prism 4.

また、可変頂角プリズム4の駆動量(位置)はエンコーダ5により検出され、該検出信号は信号処理回路6を介してAD変換器9でデジタル信号に変換されて減算器13にフィードバックされる。減算器13の出力は、可変頂角プリズム4の目標駆動量と実際の可変頂角プリズム4の駆動量との誤差を示し、この誤差量に応じた信号が位相・ゲイン補償部11で位相およびゲインの補償がなされることにより振れ補正制御信号として駆動回路8に入力される。
The driving amount (position) of the variable apex angle prism 4 is detected by the encoder 5, and the detected signal is converted into a digital signal by the AD converter 9 via the signal processing circuit 6 and fed back to the subtractor 13. The output of the subtractor 13 indicates an error between the target drive amount of the variable apex angle prism 4 and the actual drive amount of the variable apex angle prism 4, and a signal corresponding to the error amount is output by the phase / gain compensator 11 in phase and gain. As the gain is compensated, it is input to the drive circuit 8 as a shake correction control signal.

駆動回路8は、該振れ補正制御信号に応じた駆動量および駆動方向に可変頂角プリズム4を駆動するようアクチュエータ7を駆動する。アクチュエータ7は、ボイスコイルモータ等からなり、可変頂角プリズム4の平板ガラスを揺動させる。これにより、ジャイロセンサ1を用いて生成された振れ信号(角変位信号)と画像の動きベクトルを示す信号とに基づく像振れ補正が行われる。
The drive circuit 8 drives the actuator 7 to drive the variable apex angle prism 4 in the drive amount and drive direction according to the shake correction control signal. The actuator 7 is composed of a voice coil motor or the like, and swings the flat glass of the variable apex angle prism 4. Thereby, image blur correction based on the shake signal (angular displacement signal) generated using the gyro sensor 1 and the signal indicating the motion vector of the image is performed.

以上、本実施例のビデオカメラシステムを構成する各部の機能および処理の流れについて説明したが、カメラ制御回路108およびレンズ制御回路(信号生成回路106)は、以下に説明するソフトウェア(プログラム)に従って動作する。   The function and processing flow of each unit constituting the video camera system of the present embodiment has been described above. The camera control circuit 108 and the lens control circuit (signal generation circuit 106) operate according to software (program) described below. To do.

図6には、カメラ本体側に設けられたカメラ制御回路108における動きベクトルの検出から該検出結果の交換レンズ側への通信までの動作を制御するプログラムのフローチャートを示す。なお、カメラ制御回路108は、動きベクトル信号のみならず、オートフォーカスや絞り駆動、ズーム駆動等に関する指令や情報を交換レンズ側に送信する。

FIG. 6 shows a flowchart of a program for controlling an operation from detection of a motion vector to communication of the detection result to the interchangeable lens side in the camera control circuit 108 provided on the camera body side. The camera control circuit 108 transmits not only the motion vector signal but also commands and information related to autofocus, aperture driving, zoom driving, and the like to the interchangeable lens side.

図6において、カメラ制御回路108は、ステップ301において、所定のタイミングで本プログラムの処理を開始する。そして、ステップ302では、動きベクトルの演算(検出)が終了したか否かを確認し、終了したときはステップ303に進む。   In FIG. 6, the camera control circuit 108 starts processing of this program at a predetermined timing in step 301. In step 302, it is checked whether or not the motion vector calculation (detection) is completed.

ステップ303では、動きベクトル信号を含む交換レンズに対する通信データをセットする。次に、ステップ304では、カメラ本体において垂直同期信号が発生したか否かを確認する。垂直同期信号が発生したことが確認された場合は、次の処理に進む
In step 303, communication data for the interchangeable lens including the motion vector signal is set. Next, in step 304, it is confirmed whether or not a vertical synchronization signal is generated in the camera body. If it is confirmed that the vertical synchronization signal has been generated, the process proceeds to the next process .

ステップ305では、ステップ303でセットされた通信データを交換レンズ側に送信するための通信割り込み要求を交換レンズに送信し、交換レンズから通信割り込み許可信号を受信することに応じて、該データの通信を行う。そして、ステップ302に戻る。   In step 305, a communication interrupt request for transmitting the communication data set in step 303 to the interchangeable lens is transmitted to the interchangeable lens, and the communication of the data is performed in response to receiving a communication interrupt permission signal from the interchangeable lens. I do. Then, the process returns to step 302.

次に、図7には、交換レンズ側に設けられたレンズ制御回路(信号生成回路106)におけるジャイロセンサ1からの出力の取得から可変頂角プリズム4の駆動までの動作を制御するプログラムのフローチャートを示す。
Next, FIG. 7 is a flowchart of a program for controlling operations from acquisition of an output from the gyro sensor 1 to driving of the variable angle prism 4 in a lens control circuit (signal generation circuit 106) provided on the interchangeable lens side. Indicates.

ステップ310では、レンズ制御回路は、所定のタイミングで本プログラムの処理を開始する。ステップ311では、カメラ本体側からの通信割り込み要求があったかどうかを確認する。割り込み要求があった場合は、ステップ312に進む。   In step 310, the lens control circuit starts processing of this program at a predetermined timing. In step 311, it is confirmed whether there has been a communication interrupt request from the camera body side. If there is an interrupt request, the process proceeds to step 312.

ステップ312では、カメラ本体に通信割り込み許可信号を送信し、カメラ本体とのデータ(動きベクトル信号等)の通信を開始する。そして、ステップ313では、(1)式を用いて角速度信号の生成周期ごとの動きベクトルの変化量ΔVを算出する。次に、ステップ314では、ジャイロセンサ1からの出力に基づいて生成された角変位信号とステップ313で取得した動きベクトルの変化量ΔVとを角変位信号の生成周期ΔT2で加算する。そして、ステップ315では、該加算した結果からエンコーダ5のAD変換後の出力を減算(フィードバック)し、さらに該減算結果の信号に対して位相およびゲイン補償処理を行って振れ補正制御信号を生成する。続いて、ステップ316では、振れ補正制御信号を駆動回路8に出力し、可変頂角プリズム4を駆動する。そして、ステップ311に戻る。 In step 312, a communication interrupt permission signal is transmitted to the camera body, and communication of data (such as motion vector signals) with the camera body is started. In step 313, the motion vector change amount ΔV for each angular velocity signal generation cycle is calculated using equation (1). Next, in step 314, the angular displacement signal generated based on the output from the gyro sensor 1 and the motion vector change amount ΔV acquired in step 313 are added in the angular displacement signal generation period ΔT2. In step 315, the output after the AD conversion of the encoder 5 is subtracted (feedback) from the addition result, and a shake correction control signal is generated by performing phase and gain compensation processing on the subtraction result signal. . Subsequently, in step 316, a shake correction control signal is output to the drive circuit 8 to drive the variable apex angle prism 4. Then, the process returns to step 311.

以上説明したように、上記各実施例によれば、ジャイロセンサ(角速度センサ)の出力に基づいて生成された角変位信号(第1の振れ信号)と、撮像素子を用いて取得した画像の動きベクトルを示す動きベクトル信号(第2の振れ信号)とを加算して像振れ補正を行うに際して、動きベクトル信号をジャイロセンサのAD変換周期やフィルタ演算周期、すなわち角変位信号の生成周期に合わせて分割し、角変位信号の生成周期毎の動きベクトルの変化量を示す信号を角変位信号の生成周期に応じた周期で角変位信号に加算することで、ジャイロセンサに基づく振れ信号と動きベクトルに基づく振れ信号とを用いたデジタルハイブリッド像振れ補正を実現することが可能となる。
As described above, according to each of the above embodiments, the angular displacement signal (first shake signal) generated based on the output of the gyro sensor (angular velocity sensor) and the motion of the image acquired using the image sensor. When image blur correction is performed by adding a motion vector signal indicating a vector (second shake signal), the motion vector signal is matched with the AD conversion cycle of the gyro sensor or the filter calculation cycle, that is, the generation cycle of the angular displacement signal. By dividing and adding a signal indicating the amount of change in the motion vector for each generation period of the angular displacement signal to the angular displacement signal at a period corresponding to the generation period of the angular displacement signal, the shake signal and motion vector based on the gyro sensor are added. It is possible to realize digital hybrid image shake correction using the shake signal based thereon.

なお、上記各実施例では、像振れ補正手段として可変頂角プリズムを用いた場合について説明したが、レンズを光軸直交方向等、光軸方向以外の方向に移動させて光路を変位させるいわゆるシフト式像振れ補正手段を用いる場合にも本発明を適用することができる。また、その他、ミラーを揺動させたり撮像素子を受光面の面内方向に駆動したりする像振れ補正手段等、様々な形態の像振れ補正手段を用いる場合に本発明を適用することができる。   In each of the above-described embodiments, the case where the variable apex angle prism is used as the image blur correction unit has been described. The present invention can also be applied to the case where a formula image shake correction unit is used. In addition, the present invention can be applied to other types of image shake correction means such as an image shake correction means that swings a mirror or drives an image sensor in the in-plane direction of the light receiving surface. .

さらに、上記実施例2においては、レンズ交換が可能なビデオカメラシステムにおいて、カメラ本体側に動きベクトル検出部15を設け、交換レンズ側に信号生成回路106(動きベクトル変換部16および加算部14等)を設けた場合について説明したが、これらの構成要素は、カメラ本体側と交換レンズ側のいずれに設けてもよい。例えば、信号生成回路106を動きベクトル検出部15とともにカメラ本体側に設けて、ジャイロセンサ1からの出力を交換レンズ側からカメラ本体側に通信するようにしてもよいし、また信号生成回路106と動きベクトル検出部15を交換レンズ側に設けて、映像信号をカメラ本体側から交換レンズ側に通信するようにしてもよい。
Further, in the second embodiment, in the video camera system capable of exchanging lenses, the motion vector detecting unit 15 is provided on the camera body side, and the signal generating circuit 106 (the motion vector converting unit 16 and the adding unit 14 and the like are provided on the interchangeable lens side. However, these components may be provided on either the camera body side or the interchangeable lens side. For example, the signal generation circuit 106 may be provided on the camera body side together with the motion vector detection unit 15 so that the output from the gyro sensor 1 is communicated from the interchangeable lens side to the camera body side. The motion vector detection unit 15 may be provided on the interchangeable lens side, and the video signal may be communicated from the camera body side to the interchangeable lens side.

また、上記各実施例において、撮影倍率(光学ズーム倍率×電子ズーム倍率、電子ズーム機能がない場合は光学ズーム倍率)に応じて角変位信号の生成周期、つまりは振れ補正制御信号の生成周期を変更するようにしてもよい。例えば、ワイド側よりもテレ側での方が同じ大きさの振動でも発生する像振れが大きくなるので、ワイド側よりもテレ側において、振れ補正制御信号の生成周期を短くするようにしてもよい。   In each of the above embodiments, the generation period of the angular displacement signal, that is, the generation period of the shake correction control signal is set according to the shooting magnification (optical zoom magnification × electronic zoom magnification, or optical zoom magnification when there is no electronic zoom function). It may be changed. For example, the image blur that occurs even with the same magnitude of vibration is greater on the tele side than on the wide side, so the generation period of the shake correction control signal may be shortened on the tele side than on the wide side. .

また、上記各実施例では、ビデオカメラの振動を検出するセンサとしてジャイロセンサを用いた場合について説明したが、これに代えて又はこれとともに加速度センサを用いてもよい。
In each of the above-described embodiments, the case where the gyro sensor is used as the sensor for detecting the vibration of the video camera has been described. However, instead of this, an acceleration sensor may be used.

本発明の実施例1であるビデオカメラの構成を示すブロック図。1 is a block diagram showing a configuration of a video camera that is Embodiment 1 of the present invention. 実施例1における動きベクトル検出部の構成を示すブロック図。FIG. 3 is a block diagram illustrating a configuration of a motion vector detection unit according to the first embodiment. (a),(b)は、実施例1における動きベクトルの変換処理を説明するための概念図。(A), (b) is a conceptual diagram for demonstrating the conversion process of the motion vector in Example 1. FIG. 実施例1のビデオカメラの像振れ補正動作を示すフローチャート。3 is a flowchart illustrating an image blur correction operation of the video camera according to the first embodiment. 本発明の実施例2であるビデオカメラシステムの構成を示すブロック図。The block diagram which shows the structure of the video camera system which is Example 2 of this invention. 実施例2におけるカメラ本体の動作を示すフローチャート。9 is a flowchart showing the operation of the camera body in Embodiment 2. 実施例2における交換レンズの動作を示すフローチャート。9 is a flowchart showing the operation of the interchangeable lens in Example 2. 従来のビデオカメラの像振れ補正に関する構成を示すブロック図。The block diagram which shows the structure regarding the image blur correction of the conventional video camera.

符号の説明Explanation of symbols

1 角速度センサ(ジャイロセンサ)
4 可変頂角プリズム
10 AD変換器
14 加算器
15 動きベクトル検出部
16 動きベクトル変換部
17 撮像素子
105,106 信号生成回路(制御回路)
1 Angular velocity sensor (gyro sensor)
4 variable apex angle prism 10 AD converter 14 adder 15 motion vector detection unit 16 motion vector conversion unit 17 image sensor 105, 106 signal generation circuit (control circuit)

Claims (6)

振動を検出してアナログ信号である角速度信号を出力する角速度センサと、
撮影光学系により形成された被写体像を光電変換する撮像素子と、
像振れを補正する補正手段と、
前記角速度センサからの出力のAD変換により得られたデジタル信号としての角速度信号を積分して生成された角変位信号と前記撮像素子から得られる映像信号を用いて生成された垂直方向および水平方向での画像の動きを表す動きベクトルを示す動きベクトル信号とを用いて、前記補正手段を制御するための制御信号を生成する信号生成手段と、を有し、
前記信号生成手段は、前記動きベクトル信号を、前記角変位信号の生成周期に応じた周期毎の前記動きベクトルの変化量を示す信号に変換し、該動きベクトルの変化量を示す信号を前記角変位信号の生成周期に応じた周期で前記角変位信号に累積的に加算して前記制御信号を生成することを特徴とする光学機器。
An angular velocity sensor that detects vibration and outputs an angular velocity signal that is an analog signal ;
An image sensor that photoelectrically converts a subject image formed by the photographing optical system;
Correction means for correcting image blur;
In the vertical and horizontal directions generated using the angular displacement signal generated by integrating the angular velocity signal as a digital signal obtained by AD conversion of the output from the angular velocity sensor and the video signal obtained from the image sensor. Signal generation means for generating a control signal for controlling the correction means using a motion vector signal indicating a motion vector representing the motion of the image of
The signal generation means converts the motion vector signal into a signal indicating a change amount of the motion vector for each period according to a generation period of the angular displacement signal, and converts the signal indicating the change amount of the motion vector into the angle optical apparatus and generates said control signal at a cycle corresponding to the generation cycle of the displacement signal cumulatively added to the angular displacement signal.
前記信号生成手段は、映像のフィールド周期ΔT1毎に得られる前記動きベクトル信号により示される前記動きベクトルの量をW、前記角速度センサからの出力に基づいて生成される角変位信号の生成周期をΔT2としたとき、前記角変位信号の生成周期ΔT2毎の前記動きベクトルの変化量ΔVを以下の式で求め、
ΔV=W/(ΔT1/ΔT2)
求めた前記ΔVを示す信号を前記角変位信号の生成周期ΔT2で前記角変位信号に累積的に加算することを特徴とする請求項1に記載の光学機器。
The signal generation means sets the amount of the motion vector indicated by the motion vector signal obtained for each field period ΔT1 of the video to W, and sets the generation cycle of the angular displacement signal generated based on the output from the angular velocity sensor to ΔT2. when a, calculated by the following equation variation ΔV of the motion vector of each generation period ΔT2 of the angular displacement signal,
ΔV = W / (ΔT1 / ΔT2)
2. The optical apparatus according to claim 1, wherein a signal indicating the obtained ΔV is cumulatively added to the angular displacement signal in the angular displacement signal generation cycle ΔT <b> 2.
前記角変位信号の生成周期は、前記角速度信号をデジタル信号に変換する周期の整数分の一の周期であることを特徴とする請求項1又は2に記載の光学機器。 3. The optical apparatus according to claim 1, wherein the generation period of the angular displacement signal is a period of an integer of a period for converting the angular velocity signal into a digital signal. 前記信号生成手段は、撮影倍率に応じて前記角変位信号の生成周期を変更するとともに、前記変更された生成周期に応じた周期で前記動きベクトルの変化量を示す信号を前記角変位信号に累積的に加算することを特徴とする請求項1からのいずれか1つに記載の光学機器。 The signal generation unit changes a generation cycle of the angular displacement signal according to a photographing magnification, and accumulates a signal indicating a change amount of the motion vector in the angular displacement signal at a cycle according to the changed generation cycle. The optical apparatus according to any one of claims 1 to 3 , wherein addition is performed automatically. 前記光学機器は、光学素子を含む撮影光学系を有し、前記補正手段は前記光学素子を駆動して像振れ補正を行う撮像装置であることを特徴とする請求項1からのいずれか1つに記載の光学機器。 The optical apparatus includes a photographic optical system including an optical element, wherein the correction means one of the four claims 1, characterized in that an imaging apparatus that performs image blur correction by driving the optical element 1 Optical equipment described in one. 撮像素子を有するカメラ本体に着脱可能な交換レンズであって、An interchangeable lens that can be attached to and detached from a camera body having an image sensor,
振動を検出してアナログ信号である角速度信号を出力する角速度センサと、An angular velocity sensor that detects vibration and outputs an angular velocity signal that is an analog signal;
像振れを補正する補正手段と、Correction means for correcting image blur;
前記角速度センサからの出力のAD変換により得られたデジタル信号としての角速度信号を積分して生成された角変位信号と前記撮像素子から得られる映像信号を用いて生成された垂直方向および水平方向での画像の動きを表す動きベクトルを示す動きベクトル信号とを用いて、前記補正手段を制御するための制御信号を生成する信号生成手段と、を有し、In the vertical and horizontal directions generated using the angular displacement signal generated by integrating the angular velocity signal as a digital signal obtained by AD conversion of the output from the angular velocity sensor and the video signal obtained from the image sensor. Signal generation means for generating a control signal for controlling the correction means using a motion vector signal indicating a motion vector representing the motion of the image of
前記信号生成手段は、前記動きベクトル信号を、前記角変位信号の生成周期に応じた周期毎の前記動きベクトルの変化量を示す信号に変換し、前記動きベクトルの変化量を示す信号を前記角変位信号の生成周期に応じた周期で前記角変位信号に累積的に加算して前記制御信号を生成することを特徴とする交換レンズ。The signal generation means converts the motion vector signal into a signal indicating a change amount of the motion vector for each period according to a generation cycle of the angular displacement signal, and converts the signal indicating the change amount of the motion vector into the angle. An interchangeable lens, wherein the control signal is generated by cumulatively adding to the angular displacement signal at a period corresponding to a generation period of a displacement signal.
JP2004244289A 2004-08-24 2004-08-24 Optical equipment Expired - Fee Related JP4759238B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004244289A JP4759238B2 (en) 2004-08-24 2004-08-24 Optical equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004244289A JP4759238B2 (en) 2004-08-24 2004-08-24 Optical equipment

Publications (3)

Publication Number Publication Date
JP2006064776A JP2006064776A (en) 2006-03-09
JP2006064776A5 JP2006064776A5 (en) 2007-10-04
JP4759238B2 true JP4759238B2 (en) 2011-08-31

Family

ID=36111356

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004244289A Expired - Fee Related JP4759238B2 (en) 2004-08-24 2004-08-24 Optical equipment

Country Status (1)

Country Link
JP (1) JP4759238B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016206656A (en) * 2015-04-22 2016-12-08 キヤノン株式会社 Vibration-proof control device, optical instrument, and vibration-proof control program
JP7389569B2 (en) * 2019-06-04 2023-11-30 キヤノン株式会社 Anti-vibration control device and method, and imaging device

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2647165B2 (en) * 1988-09-14 1997-08-27 日本放送協会 Image motion detection device and image motion correction device
JP3359138B2 (en) * 1993-12-28 2002-12-24 キヤノン株式会社 Camera system, image blur correction system, and image blur correction device
JP3592007B2 (en) * 1996-11-15 2004-11-24 キヤノン株式会社 Imaging device and lens unit
JP3564247B2 (en) * 1996-11-26 2004-09-08 松下電器産業株式会社 Image motion compensation device
JPH10197910A (en) * 1996-12-27 1998-07-31 Canon Inc Vibration-proof controller
JP2002333644A (en) * 2001-05-10 2002-11-22 Canon Inc Image blur detector

Also Published As

Publication number Publication date
JP2006064776A (en) 2006-03-09

Similar Documents

Publication Publication Date Title
US8279290B2 (en) Blur correcting image pickup apparatus and control method
JP6530602B2 (en) Image pickup apparatus and control method thereof
JP4717748B2 (en) Camera body and camera system having the same
KR102393775B1 (en) Camera controller, image processing module, and semiconductor system
US8081223B2 (en) Imaging apparatus
JP2006086978A (en) Camera system, camera body, and interchangeable lens
JP2018036445A (en) Controller, imaging apparatus, lens unit, control method, program, and storage medium
US9507170B2 (en) Optical apparatus, interchangeable lens, and method for correcting image blurring
JP2012078495A (en) Imaging device, shake correction device, and shake correction method
JP2007140064A (en) Optical equipment with image blur correcting function
JP6643095B2 (en) Image blur correction apparatus and control method thereof, program, storage medium
JP6039212B2 (en) Image blur correction apparatus, imaging apparatus, and image blur correction apparatus control method
JP2018165800A (en) Image blurring correction device, imaging device, and method for controlling imaging device
JP2012090216A (en) Imaging device and control method for imaging device
JPH11177876A (en) Deflection correction device, image pickup device, camera unit and lens unit
CN110418053B (en) Lens apparatus, control method thereof, image pickup apparatus, and control method thereof
JP2001054005A (en) Motion detector and device for correcting motion of image
JPH1127573A (en) Image motion correcting device
JP2008124850A (en) Image motion correction apparatus, lens unit, and imaging apparatus
JP4759238B2 (en) Optical equipment
JP3610210B2 (en) Imaging device and interchangeable lens type imaging device
JP2006203493A (en) Image movement correction device
JPH10322584A (en) Shake correcting method, lens unit, image pickup device and computer readable recording medium
JP7214424B2 (en) Imaging device and its control method
JP7182962B2 (en) IMAGING DEVICE, LENS DEVICE, AND CONTROL METHOD THEREOF

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070821

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070821

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20081023

RD05 Notification of revocation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7425

Effective date: 20081201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100622

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100729

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100907

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101105

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110322

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110330

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110531

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110606

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4759238

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140610

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees