JP2023040890A - 像ブレ抑制装置およびその制御方法 - Google Patents
像ブレ抑制装置およびその制御方法 Download PDFInfo
- Publication number
- JP2023040890A JP2023040890A JP2021148081A JP2021148081A JP2023040890A JP 2023040890 A JP2023040890 A JP 2023040890A JP 2021148081 A JP2021148081 A JP 2021148081A JP 2021148081 A JP2021148081 A JP 2021148081A JP 2023040890 A JP2023040890 A JP 2023040890A
- Authority
- JP
- Japan
- Prior art keywords
- image
- shake
- vibration
- correction mechanism
- image blur
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
Abstract
【課題】撮像装置の振動検出と補正機構の駆動とが継続する現象の発生を検出し、当該現象の影響を軽減することが可能な像ブレ抑制装置およびその制御方法を提供すること。【解決手段】撮像装置の振れに応じてブレ補正機構を移動させることにより、像ブレを抑制する像ブレ抑制装置であって、振れを補正するためのブレ補正機構の目標位置と、ブレ補正機構の現在位置との偏差を0に近づけるように、ブレ補正機構の移動を制御する制御手段と、振れに含まれる、手ブレによる振動の周波数よりも高い、予め定められた周波数の振動を検出する検出手段と、予め定められた周波数の振動が検出された場合、ブレ補正機構の移動を制御するときの制御ゲインを予め定められた周波数の振動が検出されない場合よりも低減する変更手段と、を有することを特徴とする像ブレ抑制装置である。【選択図】図3
Description
本発明は像ブレ抑制装置およびその制御方法に関する。
撮像装置の振動を打ち消すように補正機構(例えば補正レンズおよび撮像素子の少なくとも一方)を駆動することにより、像ブレを抑制する像ブレ抑制装置が知られている。像ブレ抑制装置は、撮像装置の振動検出と、補正機構の駆動とをフィードバック制御することにより、像ブレ抑制精度を向上させている。
撮像装置の筐体に機械的に連結された部材が存在する場合、補正機構の駆動の反作用に起因する撮像装置の微小振動がその部材によって増幅されることがある。微小振動を増幅しうる部材の典型例は、撮像装置の筐体にアームやヒンジを介して連結されている可動部材、アクセサリシューに取り付けられる外付けアクセサリ、特定のレンズユニット(例えば全長および/または重量が閾値以上の交換レンズ)などである。
微小振動が増幅されると、撮像装置の振動検出と補正機構の駆動とが継続する現象(以下、メカニカルフィードバック(MFB)という)が発生しうる。MFBが発生すると、撮像装置が継続的に振動した状態となる。MFBは、フィードバック制御が安定している場合であっても発生しうること、振動の検知を停止すれば発生しないことにおいて、特許文献1に記載されているフィードバック制御の発振現象とは異なる。そして、従来、MFBを軽減するための技術は提案されていない。
本発明はその一態様において、撮像装置の振動検出と補正機構の駆動とが継続する現象の発生を検出し、当該現象の影響を軽減することが可能な像ブレ抑制装置およびその制御方法を提供する。
上述の目的は、撮像装置の振れに応じてブレ補正機構を移動させることにより、像ブレを抑制する像ブレ抑制装置であって、振れを補正するためのブレ補正機構の目標位置と、ブレ補正機構の現在位置との偏差を0に近づけるように、ブレ補正機構の移動を制御する制御手段と、振れに含まれる、手ブレによる振動の周波数よりも高い、予め定められた周波数の振動を検出する検出手段と、予め定められた周波数の振動が検出された場合、ブレ補正機構の移動を制御するときの制御ゲインを予め定められた周波数の振動が検出されない場合よりも低減する変更手段と、を有することを特徴とする像ブレ抑制装置によって達成される。
本発明によれば、撮像装置の振動検出と補正機構の駆動とが継続する現象の発生を検出し、当該現象の影響を軽減することが可能な像ブレ抑制装置およびその制御方法を提供することができる。
以下、添付図面を参照して本発明をその例示的な実施形態に基づいて詳細に説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定しない。また、実施形態には複数の特徴が記載されているが、その全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。
なお、以下の実施形態では、本発明をレンズ交換式デジタルカメラで実施する場合に関して説明する。しかし、本発明は撮像機能を有する任意の電子機器で実施可能である。このような電子機器には、ビデオカメラ、コンピュータ機器(パーソナルコンピュータ、タブレットコンピュータ、メディアプレーヤ、PDAなど)、携帯電話機、スマートフォン、ゲーム機、ロボット、ドローン、ドライブレコーダが含まれる。これらは例示であり、本発明は他の電子機器でも実施可能である。
図1は、本発明の実施形態に係る像ブレ抑制装置を実施可能なレンズ交換式デジタルカメラ100(以下、カメラ100という)の機能構成例を示すブロック図である。カメラ100には、着脱可能なレンズユニット101が装着されている。レンズユニット101は交換不能であってもよい。
レンズユニット101は複数のレンズを有するが、図1ではフォーカスレンズ102のみを示している。また、ブレ補正機構として補正レンズを用いる場合には、補正レンズもレンズユニット101に含まれる。絞り103は、開口量が調整可能な機械絞りである。メカニカルシャッタ104(以下、シャッタ104という)は、撮像素子105の露光を制御する。シャッタ104と電子シャッタとを併用したり、シャッタ104を用いずに電子シャッタのみを用いてもよい。
レンズユニット101は、被写体の光学像を撮像素子105上に形成する。撮像素子105はそれぞれが光電変換部を有する複数の画素が2次元配列された画素アレイを有する。撮像素子105は被写体の光学像を画素信号群(アナログ画像信号)に変換する。撮像素子105は公知のCCDもしくはCMOSイメージセンサであってよい。
本実施形態において、撮像素子105は像面位相差検出方式の自動焦点検出(位相差AF)に対応しており、位相差AF用の信号対を出力可能である。
本実施形態において、撮像素子105は例えば光軸と直交する2方向に移動可能に構成されており、撮像素子105およびその駆動回路は像ブレ抑制装置における補正機構として機能する。なお、撮像素子105は他の方向、例えば光軸周りの回転方向にも移動可能であってもよい。
カメラ制御部150は、プログラムを実行可能な1つ以上のプロセッサ(CPU、MPUなど)を有する。カメラ制御部150は、例えば記憶メモリ112に記憶されたプログラムを内部メモリ110に読み込んで実行し、カメラ100およびレンズユニット101の動作を制御することにより、カメラ100の各種機能を実現する。カメラ制御部150が実現する機能には、例えば像ブレ補正制御、自動露出(AE)制御、AF制御などが含まれる。
図1にはカメラ制御部150が実現する機能の一部を、機能ブロック120~135として記載している。したがって、機能ブロック120~135の動作として説明される事項は、実際にはカメラ制御部150がプログラムを実行することによって実現されている。また、機能ブロック120~135の1つ以上は、カメラ制御部150とは別個のハードウェアによって実現されてもよい。なお、本実施形態における像ブレ抑制装置は155で示す構成要素を有する。
記憶メモリ112は例えば書き換え可能な不揮発性メモリであり、カメラ制御部150が実行可能なプログラム、各種の設定値、GUIデータなどを記憶する。
内部メモリ110は例えば揮発性メモリであり、カメラ制御部150が実行するプログラムを読み込んだり、プログラムの実行中に必要な値を保存したりするために用いられる。また、内部メモリ110の一部領域は、表示部111用のビデオメモリとして用いられる。
内部メモリ110は例えば揮発性メモリであり、カメラ制御部150が実行するプログラムを読み込んだり、プログラムの実行中に必要な値を保存したりするために用いられる。また、内部メモリ110の一部領域は、表示部111用のビデオメモリとして用いられる。
カメラ制御部150は、レンズユニット101が着脱可能である場合、レンズユニット101が有する不図示のレンズ制御部と通信部116を通じて通信する。カメラ制御部150は、レンズユニット101との通信を通じて、フォーカスレンズ102および絞り103の駆動を制御したり、レンズユニット101の情報を取得したりする。カメラ制御部150の動作の詳細については後述する。
ADコンバータ106は、撮像素子105から読み出されたアナログ画像信号に対してノイズ除去処理、ゲイン調整処理、AD変換処理を適用し、デジタル画像信号を生成する。ADコンバータ106は、生成したデジタル画像信号を、カメラ制御部150、位相差AF信号処理部108、および画像処理回路109に出力する。
タイミングジェネレータ107は、カメラ制御部150の制御に従って、撮像素子105の駆動タイミングとADコンバータ106の出力タイミングとを制御する。
位相差AF信号処理部108は、ADコンバータ106の出力するデジタル画像信号から、位相差AF用の一対の像信号(A像信号およびB像信号)を生成する。位相差AF信号処理部108は、生成した一対の像信号に対して加算平均処理を適用してノイズの影響を軽減した後、フィルタ処理を適用して、所定の周波数帯域の信号成分を取り出す。さらに、位相差AF信号処理部108は、フィルタ処理後の信号間の相関が最大になる信号間のずれ量(位相差)を算出し、フォーカス制御部131に出力する。
フォーカス制御部131は位相差AF信号処理部108から与えられるずれ量をデフォーカス量に変換する。フォーカス制御部131は、デフォーカス量に基づくフォーカスレンズ102の駆動方向および駆動量をフォーカスレンズ駆動部130に出力する。フォーカスレンズ駆動部130は、フォーカス制御部131から与えられる駆動方向および駆動量に応じてフォーカスレンズ102を駆動させる。なお、レンズユニット101が交換可能な場合、通信部116を通じてレンズユニット101にフォーカスレンズ102の駆動方向および駆動量を通知し、レンズユニット101がフォーカスレンズ102の駆動を制御してもよい。
画像処理回路109は、ADコンバータ106が出力するデジタル画像信号に対して、色補間処理や補正処理などを適用して、記録用および/または表示用のデジタル画像信号を生成する。画像処理回路109は、記録用および/または表示用のデジタル画像信号を内部メモリ110に格納する。色補間処理は、撮影時に得られない色成分の値を補間する処理であり、デモザイク処理や同時化処理とも呼ばれる。また、補正処理には、ホワイトバランス調整、階調補正(ガンマ処理)、レンズユニット101の光学収差や周辺減光の影響を補正する処理、色を補正する処理などが含まれる。なお、これらは画像処理回路109が適用可能な画像処理の例示であり、画像処理回路109が適用する画像処理を限定するものではない。
画像処理回路109は表示部111に表示するためのデジタル画像信号を、カメラ100の情報を示す画像と合成して内部メモリ110のビデオメモリ領域に格納する。表示部111は、内部メモリ110のビデオメモリ領域に格納された画像信号に基づく画像を表示する。表示部111は例えばカメラ100の筐体に固定されたモニタであってもよいし、筐体にアームやヒンジを介して連結され、角度や向きが可変なバリアングルモニタであってよい。
圧縮伸長処理部114は内部メモリ110に保存されているデジタル画像信号に対して符号化処理を適用して符号化画像データを生成する。また、圧縮伸長処理部114は内部メモリ110に保存されている符号化画像データに対して復号処理を適用してデジタル画像信号に変換する。
操作部115は、ユーザがカメラ100に対して指示を入力するための入力デバイス群の総称である。レリーズボタン、撮影モード切り替えダイヤル、動画撮影ボタン、撮影モード・再生モード切り替えボタン、方向キー、決定ボタン、メニューボタンなどが操作部115に含まれうる。表示部111がタッチディスプレイの場合、表示部111は操作部115としても機能する。
振れ検出部113は、カメラ100の動きを検出する。振れ検出部113は例えばジャイロセンサ(以下ジャイロと呼ぶ)であり、例えば、カメラ100の光軸方向、鉛直方向を含む直交する3軸周りの角速度を検出する。
撮像素子駆動部121は撮像素子105の移動機構を駆動する。
撮像素子位置検出部120は、撮像素子105の位置を検出する。撮像素子105の位置を検出する方法は限定されず、例えばマグネットとホール素子を用いた磁気を利用した方法や発光部と受光センサを用いた光学的な方法など公知の方法でよい。ここでは、撮像素子105が、撮像素子105を光軸と垂直な方向に移動可能な移動機構を有するものとする。
撮像素子位置検出部120は、撮像素子105の位置を検出する。撮像素子105の位置を検出する方法は限定されず、例えばマグネットとホール素子を用いた磁気を利用した方法や発光部と受光センサを用いた光学的な方法など公知の方法でよい。ここでは、撮像素子105が、撮像素子105を光軸と垂直な方向に移動可能な移動機構を有するものとする。
撮像素子PID制御部122は、撮像素子105の目標位置と、撮像素子位置検出部120により検出される現在位置との偏差を0に近づけるために、撮像素子駆動部121をフィードバック制御(例えばPID(比率制御、積分制御、微制御分)制御)する。PID制御は公知技術であるためその詳細についての説明は省略する。
輝度信号検出部135は、ADコンバータ106が出力するデジタル画像信号から、自動露出制御(AE)に用いる輝度情報を生成する。
露出制御部134は、輝度信号検出部135により得られた輝度情報に基づいて、露出条件(シャッタ速度、絞り値など)を決定する。露出制御部134は、決定した露出条件そのシャッタ駆動部132、絞り駆動部133、及び撮影条件判定部129へ通知する。
露出制御部134は、輝度信号検出部135により得られた輝度情報に基づいて、露出条件(シャッタ速度、絞り値など)を決定する。露出制御部134は、決定した露出条件そのシャッタ駆動部132、絞り駆動部133、及び撮影条件判定部129へ通知する。
シャッタ駆動部132は露出制御部134から通知されたシャッタ速度に応じてシャッタ104を駆動する。絞り駆動部133は露出制御部134から通知された絞り値に応じて絞り103を駆動する。なお、レンズユニット101が交換可能な場合、通信部116を通じてレンズユニット101に絞り値を通知し、レンズユニット101が絞り103の駆動を制御してもよい。露出制御部134はまた、撮像素子105ら読み出されたアナログ撮像信号に適用するゲインを制御する。
次に、撮像素子105の目標位置の決定について説明する。振れ検出部113が検出した角速度を積分器125で積分することにより、角度に変換することができる。積分器125で得られる角度は微小なため、定数を乗じることによって位置に変換することができる。これにより、振れ検出部113で検出した角速度に応じて撮像素子105の目標位置を決定することができる。
振れ補正演算部124は、積分部125の出力値に対し、通信部116を通じてレンズユニット101から取得したレンズ敏感度情報を乗算し、振れ補正量を算出する。レンズ敏感度情報はレンズユニット101の焦点距離および合焦距離に応じて変化する値である。したがって、レンズユニット101ならびにレンズユニット101の状態に応じた適切なレンズ敏感度情報を乗算することにより、撮像素子105を目標位置に移動させるための適切な振れ補正量が得られる。
制御ゲイン変更部123は、振れ補正演算部124が算出した振れ補正量と、MFB制御ゲイン管理部126から通知される制御ゲインの変更量とに基づいて、撮像素子PID制御部122における制御ゲインを変更する。制御ゲイン変更部123は、例えば撮像素子PID制御部122がフィードバック制御する偏差に対し、制御ゲインの変更量に応じた定数を積算することにより、制御ゲインを変更することができる。フィードバック時の制御ゲインを増加させると、フィードバック制御の追従性が高くなり、防振効果は高くなるが、外乱に対する感度も高くなる。一方、フィードバック時の制御ゲインを減少させると、フィードバック制御の追従性は低くなり、防振効果は低くなるが、外乱に対する感度も低くなる。
上述したように、バリアングルモニタのような、ヒンジやアームなどを介して筐体に連結されている可動部材や、筐体のアクセサリシューに着脱可能な外部アクセサリは、筐体との接続部分がバネ的な性質(バネ成分)を有する。特定のレンズユニット(例えば全長および/または重量が閾値以上である交換レンズ)も、レンズマウント部分がバネ成分を有する。
図2は、カメラ100のアクセサリシューに外部フラッシュが取り付けられた状態を模式的に示している。振れ検出部113が検出した角速度に応じて像ブレ補正機構(撮像素子105)を移動させた際に生じる反作用による振動がバネ成分によって増幅される。増幅された振動が振れ検出部113によってカメラ100の動きとして検出されると、振動を抑制するために像ブレ補正機構が移動される。このように、撮像素子105の移動の反作用がバネ成分によって増幅されて振れ検出部113で検出されると、フィードバック制御が収束することなく継続する現象(メカニカルフィードバック(MFB))が発生する。MFBは、フィードバック制御が安定していても発生し、撮影で得られる画像をブレさせ、画像の鮮鋭度を低下させる。
図3は、本実施形態に係る像ブレ抑制装置の構成および動作を説明するための図である。ここでは、カメラ100でMFBが発生しているものとする。また、図3の下部のグラフは、振れ検出部113が出力する角速度信号が処理の過程でどのように取り扱われるのかを模式的に示しており、横軸が時間、縦軸が角速度を表している。
振れ検出部113は、所定のデータレートを有する角速度信号(振れデータ)をバンドパスフィルタ(BPF)128に入力する。バンドパスフィルタ128は、ハイパスフィルタ(HPF)201とローパスフィルタ(LPF)202との組み合わせで実現することができる。BPF128は、MFBの周波数成分を抽出するフィルタである。MFBの周波数は、外部アクセサリや可動部材の取り付け部分のばね定数に依存する固有振動数によって定まる共振周波数と一致する。共振周波数は、外部アクセサリや可動部材の種類や数に応じて変化する。そのため、通過帯域の異なる複数のバンドバスフィルタ128を用いて、外部アクセサリや可動部材の種類や数の組み合わせごとの共振周波数成分を抽出する。
なお、MFBの周波数は、手ブレによる振動の周波数(15Hz以下)よりも高く、例えば50Hz以上である。したがって、バンドパスフィルタ128の通過帯域は、手ブレによる振動を検出するための通過帯域よりも高い周波数帯域である。
なお、バリアングルモニタの開閉状態や、存在する外部アクセサリの種類、レンズユニット101の種類といった情報をユーザに入力させたり自動検出したりして、発生するMFBの周波数を特定することもできる。MFBの周波数が特定できる場合、特定された周波数の成分を抽出するバンドバスフィルタ128のみを用いてもよい。また、通過帯域が固定のバンドパスフィルタ128を複数用意する代わりに、可変バンドパスフィルタを用いてバンドパスフィルタ128の数を削減してもよい。
MFB判定部127は、振幅レベル判定部203、継続時間測定部204、および検出値確定部205を有し、バンドパスフィルタ128ごとに設けられている。
振幅レベル判定部203は、BPF128が出力する、MFBの周波数成分の角速度が、所定閾値を上回った回数および下回った回数により、周波数を算出する。図4を用いて、振幅レベル判定部203の動作について説明する。
図4(a)はバンドパスフィルタ128の出力信号の例を示している。バンドパスフィルタ128により、出力信号に含まれるノイズ成分(抽出すべきMFBの周波数成分以外の周波数成分)が少ない。そのため、一定期間内に上側閾値を上回った回数および下側閾値を下回った回数(上側閾値を上回る/下回る期間の長さともいえる)により、MFBの周波数を精度良く算出することができる。ここでは、上側閾値と下側閾値は符号が異なり絶対値が等しい値とする。また、振幅レベル判定部203が用いる上側閾値と下側閾値は対応するバンドパスフィルタ128で抽出する周波数成分に応じて異なる値を有しうる。
一方、図4(b)は、バンドパスフィルタ128を適用しない場合の角速度信号(例えば振れ検出部113の出力信号)の例を示している。この場合、角速度信号にはノイズ成分が多く含まれている。そのため、一定の所定期間内に上側閾値を上回った回数および下側閾値を下回った回数によって算出したMFBの周波数の精度は、図4(a)の場合よりも低下する。
例えば、200msの間に上側閾値を上回った回数および下側閾値を下回った回数の合計が15回以上であり、上側閾値を上回る期間および下側閾値を下回る期間の長さが95Hz~105Hzに相当するとする。この場合、振幅レベル判定部203は、MFBの周波数の候補を100Hzと判定する。なお、上側閾値と下側閾値、200ms、15回といった値は予め設定しておく。
図3に戻り、継続時間測定部204は、振幅レベル判定部203で判定された周波数の候補が、所定時間もしくは所定回数継続しているか否かを判定する。例えば、振幅レベル判定部203が200msごとにMFBの周波数の候補の判定するものとする。この場合、継続時間測定部204は、振幅レベル判定部203が同じ周波数の候補を5回連続で判定した(その候補が1秒間継続した)か否かを判定する。なお、継続時間測定部204が判定する所定時間または所定回数は予め設定しておく。
検出値確定部205は、継続時間測定部204で、振幅レベル判定部203が同じ周波数の候補を5回連続で判定した(その候補が1秒間継続した)と判定されれば、その周波数のMFBが発生していると判定する。図3のように検出値確定部205が複数存在する場合、異なる周波数のMFBが同時に発生していると判定される場合もある。
MFB制御ゲイン管理部126は、検出値確定部205が判定したMFBの周波数に応じて、制御ゲインの変更量を決定し、制御ゲイン変更部123に通知する。MFB制御ゲイン管理部126は、MFBが発生していれば、MFBが発生していないときよりもフィードバック時の制御ゲインを低減することにより、外乱に対する感度を低下させ、MFBがフィードバック制御に与える影響を抑制する。また、MFB制御ゲイン管理部126は、発生しているMFBの周波数に応じて、制御ゲインの低減量を変更する(詳細は後述する)。これにより、MFBに起因するカメラ100の微小振動、ひいては撮影で得られる画像の鮮鋭度の低下を抑制することができる。
撮影条件判定部129は、操作部115により、静止画撮影モードと動画撮影モードとの切り替えが行われた場合と、静止画撮影の露光中もしくは連写中の場合には、制御ゲインの変更を禁止するようにMFB制御ゲイン管理部126に通知する。静止画撮影モードと動画撮影モードとの切り替えが行われた場合には制御ゲインを初期値に戻すためである。また、静止画撮影中に制御ゲインを変更すると、像ブレ補正が不十分になる恐れがあるためである。
図5は、像ブレ抑制装置としてのカメラ制御部150が実施する、像ブレ補正動作に関するフローチャートである。像ブレ補正動作は、カメラ100で像ブレ補正が有効に設定されている際、周期的に実行される。図5では、像ブレ補正動作として周期的に実行されるS104~S114の処理を、防振制御ループとして示している。
S104でカメラ制御部150は、振れ検出部113の出力する角速度信号(振れデータ)を取得する。カメラ制御部150は、取得した角速度データは内部メモリ110に一時的に保存してもよい。取得した振れデータは積分器125およびBPF128に入力される。
図5ではS105~S109の処理が直列に処理されるように示しているが、S105の処理と、S106~S107の処理とは、並列に実行することができる。なお、ここでは2種類の周波数成分を、通過帯域が異なる3つのBPF128を用いて抽出するものとするが、抽出する周波数成分の数に制限はない。
S105でカメラ制御部150は、積分部125によって振れデータを積分し、角度データに変換する。
S106でカメラ制御部150は、振れデータに対して個々のBPF128を適用することにより、BPF処理を実施する。
S107でカメラ制御部150は、個々のBPF128により抽出された周波数成分について、上述したように、振幅レベル判定部203、継続時間測定部204、および検出値確定部205を用いてMFBが発生しているか否かを判定する。
S106でカメラ制御部150は、振れデータに対して個々のBPF128を適用することにより、BPF処理を実施する。
S107でカメラ制御部150は、個々のBPF128により抽出された周波数成分について、上述したように、振幅レベル判定部203、継続時間測定部204、および検出値確定部205を用いてMFBが発生しているか否かを判定する。
S110でカメラ制御部150は、制御ゲイン変更処理を実行する。制御ゲイン変更処理の詳細については図6を用いて後述する。
S111でカメラ制御部150は撮像素子位置検出部120により、撮像素子105の現在位置を取得する。
S112でカメラ制御部150は、S111で取得した現在位置と、S105の積分処理結果に基づいて算出された目標位置との偏差を算出する。
S112でカメラ制御部150は、S111で取得した現在位置と、S105の積分処理結果に基づいて算出された目標位置との偏差を算出する。
S113でカメラ制御部150はS112で算出した偏差を撮像素子PID制御部122に与えることにより、撮像素子105の移動に関するフィードバック制御処理を行う。
S114でカメラ制御部150は、撮像素子PID制御部122が偏差に応じて決定した駆動量を、撮像素子駆動部121に出力する。
S114でカメラ制御部150は、撮像素子PID制御部122が偏差に応じて決定した駆動量を、撮像素子駆動部121に出力する。
次に、S110で実施する制御ゲイン変更処理の詳細について、図6に示すフローチャートを用いて説明する。
S202で撮影条件判定部129は、撮像モードが静止画モードと動画モードとの一方から他方に切り替えられたか否かを判定し、切り替えられたと判定されればS203が、判定されなければS204が実行される。
S202で撮影条件判定部129は、撮像モードが静止画モードと動画モードとの一方から他方に切り替えられたか否かを判定し、切り替えられたと判定されればS203が、判定されなければS204が実行される。
S203でカメラ制御部150は、切り替え前の撮影モードでMFBが発生していたか否かを判定する。切り替え前の撮影モードでMFBが発生していたと判定されれば、S210を実行し、判定されなければ制御ゲインを変更せずに制御ゲイン変更処理を終了する。静止画モードと動画モードとで防振制御特性が異なることに起因して、制御ゲインが異なりうる。撮影モードが切り替えられた場合、切り替え前にMFBが発生していなければ、前回の撮影モード切り替え時に制御ゲインは変更されていないため、制御ゲインを戻す必要がない。一方、切り替え前にMFBが発生していれば、前回の撮影モード切り替え後に制御ゲインが変更されている。そのため、S210でカメラ制御部150は、制御ゲインを切り替え後の撮影モードにおける初期値に変更し、制御ゲイン変更処理を終了する。
図7は、本実施形態における制御ゲインの制御の一例に関するボード線図である。図7のボード線図では、位相線図を上に、ゲイン線図を下に示している。位相線図の横軸は周波数[Hz]、縦軸が位相[deg]を表す。また、ゲイン線図の横軸は周波数[Hz]、縦軸はゲイン[dB]を表す。横軸の周波数は両図に共通している。
図7のゲイン線図では、実線で示す静止画モードでMFBが発生していない際の制御ゲインを基準とし、点線で示す動画モードの制御ゲインは基準に対して―10[dB]であるとする。静止画モードでMFBが発生して、破線で示すように制御ゲインを基準に対して―7[dB]低減していた状態で、静止画モードから動画モードに切り替えられた場合、S210では制御ゲインをさらに―3[dB]低減する。これにより、制御ゲインが基準に対して―10[dB]となり、動画モードにおける初期値に戻すことができる。
図6に戻り、S202で撮影モードが切り替えられたと判定されない場合、S204で撮影条件判定部129は、現在静止画モードで露光中もしくは連写中か否かを判定する。静止画モードで露光中もしくは連写中と判定されれば、カメラ制御部150は制御ゲインを変更せずに制御ゲイン変更処理を終了する。露光中や連写中に制御ゲインを変更すると、画質に影響を与えたり、連写した画像間で画質に差が生じるリスクがあるためである。
S204で静止画モードで露光中もしくは連写撮影中と判定されなければ、S205でカメラ制御部150は、直近にMFBの発生が判定されてから所定時間を経過したか否かを判定する。直近にMFBの発生が判定されてから所定時間を経過したと判定されない場合および、MFBの発生が判定されていない場合、カメラ制御部150は制御ゲインを変更せずに制御ゲイン変更処理を終了する。一方、直近にMFBの発生が判定されてから所定時間を経過したと判定されれば、カメラ制御部150はS206を実行する。
S206でカメラ制御部150は、S107またはS109でMFBが発生したと判定されているか否かを判定する。MFBが発生したと判定されていなければカメラ制御部150は制御ゲインを変更せずに制御ゲイン変更処理を終了する。一方、S107またはS109でMFBが発生したと判定されていれば、カメラ制御部150はS207を実行する。
S207でカメラ制御部150は、MFB制御ゲイン管理部126によってMFBゲイン変更量を決定する。MFB制御ゲイン管理部126は、発生しているとMFB判定部127によって判定されたMFBの周波数に応じたゲイン変更量を決定する。例えば、2つのバンドパスフィルタ128がそれぞれ、図7に示す60~70Hz、120~140Hz、および190~205Hzの通過帯域を有するものとする。
そして、MFBの周波数に応じたゲイン変更量が以下の通りであるとする。
周波数60~70HzのMFBが発生していると判定される場合:―10[dB]
周波数120~140HzのMFBが発生していると判定される場合:―9[dB]
周波数190~205HzのMFBが発生していると判定される場合:―8[dB]
周波数60~70HzのMFBが発生していると判定される場合:―10[dB]
周波数120~140HzのMFBが発生していると判定される場合:―9[dB]
周波数190~205HzのMFBが発生していると判定される場合:―8[dB]
MFB制御ゲイン管理部126は、MFBの発生を判定しているMFB判定部127が1つであれば、MFBの周波数に応じたゲイン変更量を決定する。一方、MFBの発生を判定しているMFB判定部127が複数あれば、MFBの周波数に応じたゲイン変更量のうち、最も大きなゲイン変更量を決定する。例えば、上述した3つの周波数帯域の全てでMFBが発生していると判定されている場合、MFB制御ゲイン管理部126はゲイン変更量―10[dB]を決定する。
S209でカメラ制御部150は、制御ゲイン変更部123により、MFB制御ゲイン管理部126から通知されたゲイン変更量を反映した制御ゲインとなるように、撮像素子PID制御部122の制御ゲインを変更し、制御ゲイン変更処理を終了する。
本実施形態によれば、ブレ補正機構の移動の反作用に起因する撮像装置の振動が共振によって増幅されることによって生じる撮像装置の継続的な微小振動(メカニカルフィードバック:MFB)を抑制することができる。具体的には、MFBの発生が検出された場合、には、ブレ補正機構の移動を制御するフィードバック制御における制御ゲインを低減することにより、MFBを抑制することができる。また、MFBの周波数に応じて制御ゲインの低減量を異ならせることにより、手ブレの防振効果とMFBの抑制とのバランスを取ることができる。
(その他の実施形態)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
本発明は上述した実施形態の内容に制限されず、発明の精神および範囲から離脱することなく様々な変更及び変形が可能である。したがって、発明の範囲を公にするために請求項を添付する。
100…レンズ交換式デジタルカメラ、101…レンズユニット、150…カメラ制御部、155…ブレ抑制装置
Claims (14)
- 撮像装置の振れに応じてブレ補正機構を移動させることにより、像ブレを抑制する像ブレ抑制装置であって、
前記振れを補正するための前記ブレ補正機構の目標位置と、前記ブレ補正機構の現在位置との偏差を0に近づけるように、前記ブレ補正機構の移動を制御する制御手段と、
前記振れに含まれる、手ブレによる振動の周波数よりも高い、予め定められた周波数の振動を検出する検出手段と、
前記予め定められた周波数の振動が検出された場合、前記ブレ補正機構の移動を制御するときの制御ゲインを前記予め定められた周波数の振動が検出されない場合よりも低減する変更手段と、
を有することを特徴とする像ブレ抑制装置。 - 前記予め定めた周波数が、15Hzより高い周波数であることを特徴とする請求項1に記載の像ブレ抑制装置。
- 前記予め定められた周波数が、前記撮像装置に取り付けられた部材の共振周波数に基づくことを特徴とする請求項1または2に記載の像ブレ抑制装置。
- 前記部材と前記撮像装置との接続部分がバネ的な性質を有することを特徴とする請求項3に記載の像ブレ抑制装置。
- 前記部材が、前記撮像装置の筐体にヒンジもしくはアームを介して取り付けられる可動部材であることを特徴とする請求項3または4に記載の像ブレ抑制装置。
- 前記部材が、前記撮像装置に着脱可能な外部アクセサリであることを特徴とする請求項3から5のいずれか1項に記載の像ブレ抑制装置。
- 前記検出手段が、前記撮像装置の角速度が所定期間内に閾値を上回る回数および下回る回数に基づいて前記予め定められた周波数の振動を検出することをと特徴とする請求項1から6のいずれか1項に記載の像ブレ抑制装置。
- 前記撮像装置の撮像モードが切り替えられた場合、前記変更手段は、切り替え後の撮像モードに応じた初期値に前記制御ゲインを戻すことを特徴とする請求項1から7のいずれか1項に記載の像ブレ抑制装置。
- 前記初期値が、静止画モードと動画モードとで異なり、前記動画モードでは前記静止画モードよりも低い値であることを特徴とする請求項8に記載の像ブレ抑制装置。
- 静止画撮影の露光中もしくは連写中には前記制御ゲインを変更しないことを特徴とする請求項1から9のいずれか1項に記載の像ブレ抑制装置。
- 前記ブレ補正機構が撮像素子を含むことを特徴とする請求項1から10のいずれか1項に記載の像ブレ抑制装置。
- 請求項1から11のいずれか1項に記載の像ブレ抑制装置を有することを特徴とする撮像装置。
- 撮像装置の振れに応じてブレ補正機構を移動させることにより、像ブレを抑制する像ブレ抑制装置の制御方法であって、
前記振れを補正するための前記ブレ補正機構の目標位置と、前記ブレ補正機構の現在位置との偏差を0に近づけるように、前記ブレ補正機構の移動を制御する制御工程と、
前記振れに含まれる、手ブレによる振動の周波数よりも高い、予め定められた周波数の振動を検出する検出工程と、
前記予め定められた周波数の振動が検出された場合、前記ブレ補正機構の移動を制御するときの制御ゲインを前記予め定められた周波数の振動が検出されない場合よりも低減する変更工程と、
を有することを特徴とする像ブレ抑制装置の制御方法。 - コンピュータを、請求項1から11のいずれか1項に記載の像ブレ抑制装置が有する各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021148081A JP2023040890A (ja) | 2021-09-10 | 2021-09-10 | 像ブレ抑制装置およびその制御方法 |
US17/939,082 US11863870B2 (en) | 2021-09-10 | 2022-09-07 | Image stabilization apparatus and method of controlling the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021148081A JP2023040890A (ja) | 2021-09-10 | 2021-09-10 | 像ブレ抑制装置およびその制御方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023040890A true JP2023040890A (ja) | 2023-03-23 |
Family
ID=85571513
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021148081A Pending JP2023040890A (ja) | 2021-09-10 | 2021-09-10 | 像ブレ抑制装置およびその制御方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11863870B2 (ja) |
JP (1) | JP2023040890A (ja) |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0566451A (ja) | 1991-09-06 | 1993-03-19 | Canon Inc | カメラの防振装置 |
US20050128309A1 (en) * | 2003-07-25 | 2005-06-16 | Nikon Corporation | Shooting lens having vibration reducing function and camera system for same |
EP1605691A3 (en) * | 2004-06-08 | 2007-04-18 | Nikon Corporation | Vibration reduction apparatus having feedback path for motion signal and camera system |
JP5328307B2 (ja) * | 2008-11-14 | 2013-10-30 | キヤノン株式会社 | 振れ補正機能を有する撮影装置及びその制御方法 |
JP6516544B2 (ja) * | 2015-04-22 | 2019-05-22 | キヤノン株式会社 | 制御装置、光学機器、撮像装置および制御方法 |
JP6682360B2 (ja) * | 2016-05-27 | 2020-04-15 | キヤノン株式会社 | 防振制御装置、光学機器、防振制御方法および防振制御プログラム |
JP2020060531A (ja) * | 2018-10-12 | 2020-04-16 | 株式会社デンソーテン | 異常検出装置、異常検出システム、および、異常検出方法 |
JP7257774B2 (ja) * | 2018-11-08 | 2023-04-14 | キヤノン株式会社 | 撮像システム及びその制御方法、レンズユニット、撮像装置、プログラム、記憶媒体 |
US11575834B2 (en) * | 2019-12-17 | 2023-02-07 | Canon Kabushiki Kaisha | Image stabilization apparatus, method of controlling same, and storage medium |
JP2021173843A (ja) * | 2020-04-23 | 2021-11-01 | キヤノン株式会社 | 振れ検出装置および振れ検出方法、像ブレ補正装置、撮像装置 |
-
2021
- 2021-09-10 JP JP2021148081A patent/JP2023040890A/ja active Pending
-
2022
- 2022-09-07 US US17/939,082 patent/US11863870B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US11863870B2 (en) | 2024-01-02 |
US20230090592A1 (en) | 2023-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9170429B2 (en) | Optical apparatus and image capturing apparatus, and method of controlling the same and storage medium | |
JP6592335B2 (ja) | 像ブレ補正装置及び方法 | |
JP6600232B2 (ja) | 像ブレ補正装置及び方法 | |
US8587673B2 (en) | Camera image stabilization | |
KR101663225B1 (ko) | 디지털 영상처리장치 및 방법 | |
CN108337428B (zh) | 图像稳定设备及其控制方法、摄像设备和存储介质 | |
JP6108940B2 (ja) | 像振れ補正装置及びその制御方法、プログラム、記憶媒体 | |
US11290650B2 (en) | Image blur information acquisition apparatus and method, and storage medium | |
JP6881969B2 (ja) | 撮像装置、交換レンズおよびそれらの制御方法 | |
JP6543946B2 (ja) | ブレ補正装置、カメラ及び電子機器 | |
US9811891B2 (en) | Image shake correction device, optical apparatus, imaging apparatus, and control method | |
JP7257774B2 (ja) | 撮像システム及びその制御方法、レンズユニット、撮像装置、プログラム、記憶媒体 | |
JP6961500B2 (ja) | 像振れ補正装置およびその制御方法、撮像装置 | |
US9264615B2 (en) | Image capturing apparatus and control method thereof | |
JP6395401B2 (ja) | 像振れ補正装置およびその制御方法、光学機器、撮像装置 | |
JP2009008936A (ja) | 撮像装置 | |
JP2023040890A (ja) | 像ブレ抑制装置およびその制御方法 | |
US20200366846A1 (en) | Control apparatus, lens apparatus, imaging apparatus, control method, and storage medium | |
JP7266480B2 (ja) | 撮像装置、レンズ装置、撮像システム、撮像装置の制御方法、レンズ装置の制御方法 | |
JP7356272B2 (ja) | 像ブレ情報取得装置及び方法、像ブレ補正装置、プログラム、記憶媒体 | |
JP7383413B2 (ja) | レンズ装置、撮像装置、撮像システム、及び制御方法 | |
JP7308672B2 (ja) | 像ブレ補正装置及びその制御方法、撮像システム、プログラム | |
JP7305464B2 (ja) | 光学装置およびその制御方法 | |
JP2018205551A (ja) | 撮像装置およびその制御方法 | |
JP6590013B2 (ja) | 交換レンズおよび撮像装置 |