JP5090933B2 - 振れ検出装置及び振れ検出方法 - Google Patents

振れ検出装置及び振れ検出方法 Download PDF

Info

Publication number
JP5090933B2
JP5090933B2 JP2008004654A JP2008004654A JP5090933B2 JP 5090933 B2 JP5090933 B2 JP 5090933B2 JP 2008004654 A JP2008004654 A JP 2008004654A JP 2008004654 A JP2008004654 A JP 2008004654A JP 5090933 B2 JP5090933 B2 JP 5090933B2
Authority
JP
Japan
Prior art keywords
output signal
signal
pass filter
shake
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008004654A
Other languages
English (en)
Other versions
JP2009168939A (ja
Inventor
智之 水田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2008004654A priority Critical patent/JP5090933B2/ja
Priority to US12/349,881 priority patent/US7848626B2/en
Publication of JP2009168939A publication Critical patent/JP2009168939A/ja
Application granted granted Critical
Publication of JP5090933B2 publication Critical patent/JP5090933B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor

Description

本発明は振れ検出装置及び振れ検出方法に係り、特にハイパスフィルタを用いてジャイロセンサ出力の低周波成分を除去して振れを検出する振れ検出装置及び振れ検出方法に関する。
カメラ等の撮像装置において、撮影者の手振れを補正するための機構が知られている。このような手振れ補正機構では、ジャイロセンサにより角速度を検出し、検出された角速度から撮像装置の振れ量を算出し、この算出された振れ量を打ち消すように撮影レンズやイメージセンサなど撮像部の一部を撮影光軸と垂直な面内で移動させることで、振れの補正が行われる。また、ジャイロセンサからの出力信号は、ドリフトによるDC成分等の不要な低周波成分を含むため、ハイパスフィルタによって低周波成分を除去することが行われる。
上記のようにジャイロセンサとハイパスフィルタを使用した振れ補正機能を持つカメラをパンニングさせると、パンニング終了時に、カメラが静止したにもかかわらず、カメラをそれまでの振れとは逆方向に振ったように画面が動いてしまう揺り戻し現象が発生する。これは、ハイパスフィルタのオーバーシュート現象に起因するものである。
このゆり戻し現象を防止するために、特許文献1には、カメラをパンニング中にはハイパスフィルタのカットオフ周波数を高周波側にシフトさせる技術が記載されている。この技術によれば、パンニングを終了させたときにも揺り戻し現象が発生せず、自然なカメラワークを実現することが可能となる。
特開平11−284902号公報
しかしながら、特許文献1に記載の撮像装置においては、揺り戻し現象は軽減するものの、カットオフ周波数を高周波側にシフトさせるために、パンニング中における低周波の振れに対する振れ補正の効果が低下してしまうという欠点があった。本発明はこのような事情に鑑みてなされたもので、パンニング終了時の揺り戻し成分による振れの誤検出を抑制し、さらにパンニング中においても振れ検出の精度が低下することのない振れ検出装置及び振れ検出方法を提供することを目的とする。
前記目的を達成するために請求項1に記載の振れ検出装置は、速度又は角速度を検出するセンサと、前記センサの出力信号の低周波成分を除去するハイパスフィルタと、前記ハイパスフィルタの出力信号に基づいて装置本体の振れを検出する振れ検出手段と、を備えた振れ検出装置において、前記ハイパスフィルタの出力信号に、一定方向に継続した振れが停止したときに出力される揺り戻し成分が含まれているか否かを判定する判定手段と、前記判定手段の結果に基づいて前記ハイパスフィルタの出力信号から前記揺り戻し成分を除去する除去手段とを備え、前記判定手段は、前記ハイパスフィルタの出力信号を積分する積分手段を備え、前記ハイパスフィルタの出力信号が第一の閾値より大きく、かつ前記積分手段の出力信号の反転信号が第二の閾値より大きい場合、又は前記ハイパスフィルタの出力信号が第一の閾値の負数より小さく、かつ前記積分手段の出力信号の反転信号が第二の閾値の負数より小さい場合に、揺り戻し成分を含んでいると判定することを特徴とする。
これにより、ハイパスフィルタの出力信号から揺り戻し成分を除去し、揺り戻しの無い最適な手振れ補正を行うことができる。
これにより、パンニングの終了時の揺り戻し成分を振れと誤検出することなく、揺り戻し成分を検出することができる。
請求項に示すように請求項1に記載の振れ検出装置において、前記除去手段は、前記ハイパスフィルタの出力信号と前記積分手段の出力信号を加算する加算手段を備え、前記判定手段が揺り戻し成分を含んでいないと判定した場合には前記ハイパスフィルタの出力信号をそのまま出力し、前記判定手段が揺り戻し成分を含んでいると判定した場合には前記ハイパスフィルタの出力信号と前記積分手段の出力信号を加算して出力することを特徴とする。
これにより、ハイパスフィルタの揺り戻し成分を簡単に除去することができる。
前記目的を達成するために請求項に記載の振れ検出方法は、センサが速度又は角速度を検出する工程と、ハイパスフィルタが前記センサの出力信号の低周波成分を除去する工程と、前記ハイパスフィルタの出力信号に基づいて装置本体の振れを検出する振れ検出工程と、を備えた振れ検出方法において、前記ハイパスフィルタの出力信号に、一定方向に継続した振れが停止したときに出力される揺り戻し成分が含まれているか否かを判定する判定工程と、前記判定工程の結果に基づいて前記ハイパスフィルタの出力信号から前記揺り戻し成分を除去する除去工程とを備え、前記判定工程は、積分手段が前記ハイパスフィルタの出力信号を積分する積分工程を備え、前記ハイパスフィルタの出力信号が第一の閾値より大きく、かつ前記積分手段の出力信号の反転信号が第二の閾値より大きい場合、又は前記ハイパスフィルタの出力信号が第一の閾値の負数より小さく、かつ前記積分手段の出力信号の反転信号が第二の閾値の負数より小さい場合に、揺り戻し成分を含んでいると判定することを特徴とする。
これにより、ハイパスフィルタの出力信号から揺り戻し成分を除去し、揺り戻しの無い最適な手振れ補正を行うことができる。
本発明によれば、パンニング終了時の揺り戻し成分を振れと誤検出することのない振れ検出装置及び振れ検出方法を提供することができる。
以下、添付図面に従って本発明を実施するための最良の形態について説明する。
<撮像部>
図1は、本発明が適用されたデジタルカメラ1の電気的構成を示すブロック図である。
同図に示すように、本実施の形態のデジタルカメラ1は、CPU111、操作部112、ズームレンズ用モータドライバ114、ズームレンズ10、フォーカスレンズ用モータドライバ115、フォーカスレンズ11、手ぶれ補正制御部117、手ぶれ補正部118、タイミングジェネレータ119、CCDドライバ120、CCD13、アナログ信号処理部122、A/D変換器123、画像入力コントローラ124、画像信号処理回路125、圧縮処理回路126、ビデオエンコーダ127、画像表示装置128、バス129、メディアコントローラ130、記録メディア131、メモリ(SDRAM)132、AF検出回路133、AE検出回路134等を備えて構成される。
各部はCPU111に制御されて動作し、CPU111は、操作部112からの入力に基づき所定の制御プログラムを実行することにより、デジタルカメラ1の各部を制御する。
CPU111はプログラムROMを内蔵しており、このプログラムROMにはCPU111が実行する制御プログラムのほか、制御に必要な各種データ等が記録されている。CPU111は、このプログラムROMに記録された制御プログラムをメモリ132に読み出し、逐次実行することにより、デジタルカメラ1の各部を制御する。
なお、このメモリ132は、プログラムの実行処理領域として利用されるほか、画像データ等の一時記憶領域、各種作業領域として利用される。
操作部112は、レリーズボタン113の他、電源スイッチや撮影モードダイヤル、手ぶれ補正スイッチ等のカメラの一般的な操作手段を含み、操作に応じた信号をCPU111に出力する。レリーズボタン113は、半押し時にONしてフォーカスロック、測光等の撮影準備を行わせるスイッチS1と、全押し時にONして画像の取り込みを行わせるスイッチS2とを有している。
フォーカスレンズ11は、フォーカス用モータドライバ115に駆動されて、ズームレンズ10の光軸上を前後移動する。CPU111は、フォーカス用モータドライバ115を介してフォーカスレンズ11の移動を制御し、フォーカシングを行う。
ズームレンズ10は、ズームレンズ用モータドライバ114に駆動されて、フォーカスレンズ11の光軸上を前後移動する。CPU111は、ズームレンズ用モータドライバ114を介してズームレンズ10の移動を制御し、ズーミングを行う。
手ぶれ補正部118は、補正レンズ12を含み、手ぶれ補正制御部117により制御され、ズームレンズ10、及びフォーカスレンズ11を介した被写体像の手ぶれを補正する。手ぶれ補正制御部117及び手ぶれ補正部118の詳細については、後述する。
CCD13は、手ぶれ補正部118の後段に配置されており、補正レンズ12を透過した被写体光を受光する。CCD13は、周知のように多数の受光素子がマトリクス状に配列された受光面を備えている。補正レンズ12を透過した被写体光は、このCCD13の受光面上に結像され、各受光素子によって電気信号に変換される。
このCCD13は、タイミングジェネレータ119からCCDドライバ120を介して供給される垂直転送クロック及び水平転送クロックに同期して、各画素に蓄積された電荷を1ラインずつシリアルな画像信号として出力する。CPU111は、タイミングジェネレータ119を制御して、CCD13の駆動を制御する。
なお、各画素の電荷蓄積時間(露出時間)は、タイミングジェネレータ119から与えられる電子シャッタ駆動信号によって決められる。CPU111は、タイミングジェネレータ119に対して電荷蓄積時間を指示する。
また、画像信号の出力は、デジタルカメラ1が撮影モードにセットされると開始される。すなわち、デジタルカメラ1が撮影モードにセットされると、画像表示装置128にスルー画像を表示するため、画像信号の出力が開始される。このスルー画像用の画像信号の出力は、本撮影の指示が行われると、一旦停止され、本撮影が終了すると、再度開始される。
CCD13から出力される画像信号は、アナログ信号であり、このアナログの画像信号は、アナログ信号処理部122に取り込まれる。
アナログ信号処理部122は、相関二重サンプリング回路(CDS)、及び自動ゲインコントロール回路(AGC)を含んで構成される。CDSは、画像信号に含まれるノイズの除去を行い、AGCは、ノイズ除去された画像信号を所定のゲインで増幅する。このアナログ信号処理部122で所要の信号処理が施されたアナログの画像信号は、A/D変換器123に取り込まれる。
A/D変換器123は、取り込んだアナログの画像信号を所定ビットの階調幅を持ったデジタルの画像信号に変換する。この画像信号は、いわゆるRAWデータであり、画素ごとR、G、Bの濃度を示す階調値を有している。
画像入力コントローラ124は、所定容量のラインバッファを内蔵しており、A/D変換器123から出力された1コマ分の画像信号を蓄積する。この画像入力コントローラ124に蓄積された1コマ分の画像信号は、バス129を介してメモリ132に格納される。
バス129には、上記CPU111、メモリ132、画像入力コントローラ124のほか、画像信号処理回路125、圧縮処理回路126、ビデオエンコーダ127、メディアコントローラ130、AF検出回路133、AE検出回路134等が接続されており、これらはバス129を介して互いに情報を送受信できるようにされている。
メモリ132に格納された1コマ分の画像信号は、点順次(画素の順番)に画像信号処理回路125に取り込まれる。
画像信号処理回路125は、点順次に取り込んだR、G、Bの各色の画像信号に対して所定の信号処理を施し、輝度信号Yと色差信号Cr、Cbとからなる画像信号(Y/C信号)を生成する。
AF検出回路133は、CPU111の指令に従い、画像入力コントローラ124を介してメモリ132に格納されたR、G、Bの画像信号を取り込み、AF(Automatic Focus)制御に必要な焦点評価値を算出する。このAF検出回路133は、G信号の高周波成分のみを通過させるハイパスフィルタ、絶対値化処理部、画面に設定された所定のフォーカス領域内の信号を切り出すフォーカス領域抽出部、及び、フォーカス領域内の絶対値データを積算する積算部を含み、この積算部で積算されたフォーカス領域内の絶対値データを焦点評価値としてCPU111に出力する。CPU111は、AF制御時、このAF検出回路133から出力される焦点評価値が極大となる位置をサーチし、その位置にフォーカスレンズ11を移動させることにより、主要被写体への焦点合わせを行う。
AE検出回路134は、CPU111の指令に従い、画像入力コントローラ124を介してメモリ132に格納されたR、G、Bの画像信号を取り込み、AE制御に必要な積算値を算出する。CPU111は、積算値から輝度値を算出し、輝度値から露出値を求める。また露出値から所定のプログラム線図に従って、絞り値及びシャッタスピードを決定する。このとき、必要であれば、撮影補助光としてストロボ136を用いる決定をする。
圧縮処理回路126は、CPU111からの圧縮指令に従い、入力された輝度信号Yと色差信号Cr、Cbとからなる画像信号(Y/C信号)に所定形式(たとえば、JPEG)の圧縮処理を施し、圧縮画像データを生成する。また、CPU111からの伸張指令に従い、入力された圧縮画像データに所定形式の伸張処理を施して、非圧縮の画像データを生成する。
ビデオエンコーダ127は、CPU111からの指令に従い、画像表示装置128への表示を制御する。
メディアコントローラ130は、CPU111からの指令に従い、記録メディア131に対してデータの読み/書きを制御する。なお、記録メディア131は、メモリカードのようにカメラ本体に対して着脱自在なものでもよいし、また、カメラ本体に内蔵されたものでもよい。着脱自在とする場合は、カメラ本体にカードスロットを設け、このカードスロットに装填して使用する。
<手ぶれ補正のレンズ移動機構>
次に、手ぶれ補正制御部117及び手ぶれ補正部118について説明する。
デジタルカメラ1は、操作部112によって、手ぶれONモードと手ぶれOFFモードとをユーザが切り替えることが可能である。手ぶれONモードでは、手ぶれがキャンセルされるように、補正レンズ12を移動制御する。手ぶれOFFモードでは、補正レンズ12を停止するように制御する。
図2は、デジタルカメラ1の光学系を示した図である。デジタルカメラ1の光学系は、ズームレンズ10、フォーカスレンズ11、補正レンズ12から構成されている。この光学系の光軸14上にCCD13が配置されており、このCCD13は、前述したように、被写体の画像を電気信号に変換する。
手ぶれが発生すると、1フレーム内で被写体の画像がCCD13上で動くために、CCD13からは、ぼけた画像の電気信号が発生する。この手ぶれの発生を検出するために、カメラボディ又はレンズアセンブリ内に、X方向ジャイロセンサ50(図6参照)及びY方向ジャイロセンサ(図示せず)が設けられている。これらのジャイロセンサは、角速度を表す信号を出力する。また、角加速度を表す信号を出力するジャイロセンサを用いてもよい。
手ぶれが発生していないときは、補正レンズ12の光軸が、光学系の光軸14に一致している。Xジャイロセンサ50及び/又はYジャイロセンサにより手ぶれが検出されると、補正レンズ12は、手ぶれの大きさと方向に応じて、X方向及び/又はY方向に移動する。これにより、CCD13上に形成される画像がほぼ停止した状態となり、シャープな画像を表す信号がCCD13から出力される。
次に、手ぶれ補正制御部117及び手ぶれ補正部118のレンズ移動機構について説明する。図3は、レンズ移動機構を示す分解斜視図であり、図4は、カバーが取り外されている状態のレンズ移動機構の正面図である。また、図5は、レンズ移動機構の一部を示す断面図である。
図3及び図4において、レンズ鏡筒15には、ズームレンズ10及びフォーカスレンズ11が取り付けられている。このレンズ鏡筒15は、レンズアセンブリに固定されている。また、レンズ鏡筒15には、X方向に延びたメインガイド軸16と、Y方向に延びたメインガイド軸17とが設けられており、また、X方向に移動可能なXスライダ18と、Y方向に移動可能なYスライダ19とが収納されている。Xスライダ18及びYスライダ19は、平面から見た形がほぼL字形をしている。
Xスライダ18には、一対の軸孔18aが形成されており、これらの軸孔18aがメインガイド軸16にスライダブリに嵌まっている。同様に、Yスライダ19の一対の軸孔19aは、メインガイド軸17にスライダブリに嵌まっている。
また、Xスライダ18には、一対の軸孔18bが形成されている。この軸孔18bは、Y方向の延びたサブガイド軸20にスライダブリに嵌まっている。Yスライダ19の一対の軸孔19bは、X方向の延びたサブガイド軸21にスライダブリに嵌まっている。
Xスライダ18には、偏平なリング状のコイル22が取り付けられている。同様に、Yスライダ19にもコイル23が取り付けられている。コイル22との間にX方向の電磁力を発生するために、永久磁石26を内側に取り付けたヨーク25がレンズ鏡筒15に取り付けられている。なお、コイル23と間にY方向の電磁力を発生するためのヨーク及び永久磁石は、図では省略してある。
レンズホルダ30は、補正レンズ12を保持している。このレンズホルダ30には、一対の穴30aが形成されており、これらにX方向の延びたサブガイド軸21の両端が嵌合され、そしてサブガイド軸21が動かないように接着剤などで固定されている。同様に、一対の穴30bにサブガイド軸20がしっかりと保持されている。
スライダ18、19を隠すように、レンズホルダ30にカバー32が配置されている。このカバー32は、レンズ鏡筒15のステップ15aに載せられている。カバー32の内面には、2個の永久磁石33、34が取り付けられている。永久磁石33はヨーク25に対面し、永久磁石34は別のヨーク(図示せず)に対面する。
図5に示すように、コイル22の両側には、永久磁石26、33が位置しており、また、ヨーク25の折り曲片25aがコイル22内に入り込んでいる。コイル22を通電すると、コイル22に発生した磁界と、永久磁石26、33の磁界により電磁力が発生する。この電磁力は、コイル22の電流の向きに応じて、+X方向又は−X方向に作用し、Xスライダ18を+X方向又は−X方向に移動する。同様に、コイル23に通電すると、コイル23に発生した磁界と、図示しない永久磁石及び永久磁石34の磁界から発生した電磁力により、Yスライダ19を+Y方向又は−Y方向に移動する。
また、レンズ鏡筒15の穴15b、15cには、Xホール素子40、Yホール素子41が収納されている。Xホール素子40は、Xスライダ18の下面に埋め込まれた小さな磁石42の磁界に応答して電圧を発生する。この電圧は、Xスライダ18のX方向での位置に対応している。また、Yホール素子41も、Yスライダ19の下面に埋め込まれた磁石43の磁界に応答して電圧を発生し、この電圧はYスライダ19のY方向での位置に対応している。各ホール素子40、41は、補正レンズ12の位置に応じて、例えば0〜5Vの電圧範囲の信号を発生する。各ホール素子40、41の出力信号が2.5V(基準電圧)のときには、Xスライダ18はX基準位置に位置し、Yスライダ19がY基準位置に位置している。この状態では、補正レンズ12の光軸が光学系の光軸14に一致している。
次に、手ぶれ補正制御部117及び手ぶれ補正部118のレンズ移動機構の作用について説明する。撮影準備のためにデジタルカメラの電源をONにすると、制御回路(図6参照)は、基準電圧(2.5V)を目標レンズ位置信号とする。そして、制御回路は、各ホール素子40、41の出力信号が目標レンズ位置信号である基準電圧に到達するように、コイル22、23に供給する電流の向き及び大きさをフィードバック制御する。このフィードバック制御により、Xスライダ18はX基準位置に向けて移動され、Yスライダ19はY基準位置に向けて移動される。スライダ18、19が基準位置にセットされると、補正レンズ12の光軸が光学系の光軸14に一致する。手ぶれOFFモードでは、手ぶれがあっても、目標レンズ位置信号は基準電圧に保たれる。これにより、レンズホルダ30は手ぶれがあっても、停止したままとなる。
手ぶれONモードでは、手ぶれに応じて補正レンズ12がレンズホルダ30とともに移動する。X方向の手ぶれはXジャイロセンサ50で検知され、またY方向の手ぶれはYジャイロセンサで検知される。手ぶれが発生すると、各ジャイロセンサは角速度信号を発生する。各ジャイロセンサの角速度信号は個別に積分され、X方向とY方向の角度信号にそれぞれ変換される。この角度信号は、補正レンズ12の直線移動に相当したレンズ変位量信号に変換される。得られたレンズ変位量信号は、基準電圧(2.5V)に加算されて、目標レンズ位置信号となる。ここで、レンズ変位量信号は、手ぶれの方向に応じて正負の符号を有するため、目標レンズ位置信号は、基準電圧(2.5V)を中心にして変化する。
例えば、+X方向に手ぶれが発生すると、マイナスのレンズ変位量信号が基準電圧に加算されて、目標レンズ位置信号が算出される。次に、Xホール素子40の出力信号が目標レンズ位置信号となるように、コイル22の電流の向き及び大きさが決められる。このコイル22の通電により発生した磁界と、永久磁石26、33の磁界とにより、−X方向の電磁力がコイル22に作用する。この電磁力により、Xスライダ18は、メインガイド軸16に沿って−X方向に移動する。また、Xスライダ18はサブガイド軸20を介してレンズホルダ30に連結されているため、Xスライダ18は、レンズホルダ30を−X方向に押す。
ここで、レンズホルダ30に固定されたサブガイド軸21は、Yスライダ19の軸穴19bにガイドされる。これにより、Xスライダ18とレンズホルダ30は、メインガイド軸16及びYスライダ19の一対の軸穴19aにガイドされながら一緒に移動する。
Xスライダ18が、目標レンズ位置信号に対応したレンズ位置まで移動すると、Xホール素子40の出力信号が目標レンズ位置信号に一致する。これにより、レンズホルダ30が、手ぶれのストロークに対応した距離を一X方向に移動するので、CCD13上に形成される画像は殆ど移動しない。したがって、CCD13からは、鮮明な画像の電気信号が発生する。
手ぶれが停止すると、レンズ変位量信号が0になるから、目標レンズ位置信号は基準電圧(2.5V)となる。Xホール素子40の出力信号が基準電圧に戻るように、コイル22の電流の向き及び大きさが決定される。これにより、Xスライダ18がX基準位置に向けて徐々に移動する。Xスライダ18がX基準位置に戻った後は、このX基準位置に維持されるように、コイル22の電流の向きと大きさが制御される。レンズホルダ30は、Xスライダ18と一緒に戻るから、補正レンズ12の光軸が光学系の光軸14に一致した状態となる。
−X方向の手ぶれが発生すると、手ぶれの大きさに応じた値を持ったプラスのレンズ変位量信号が基準電圧に加算され、目標レンズ位置信号が算出される。Xホール素子40の出力信号が目標レンズ位置信号になるように、コイル22の電流の向き及び大きさが決められる。このコイル22の通電により、Xスライダ18は、メインガイド軸16に沿って+X方向に移動する。−X方向の手ぶれがなくなると、Xスライダ18はX基準位置に徐々に戻し、そしてXスライダ18をX基準位置に維持する。このときには、補正レンズ12の光軸は光学系の光軸14に一致している。
Y方向の手ぶれに対しても同様である。このY方向の手ぶれに対しては、コイル23によってYスライダ19をY方向に移動する。このときにサブガイド軸21を介してレンズホルダ30がY方向に押される。Yスライダ19は、メインガイド軸17にガイドされ、レンズホルダ30のサブガイド軸20は、Xスライダ18の軸穴18bにガイドされる。レンズホルダ30が、Yスライダ19と一緒にY方向に移動すると、Y方向の手ぶれによる画像の移動が防止され、CCD13上に形成される画像はほぼ停止する。Y方向の手ぶれがなくなると、Yスライダ19は、Y基準位置に徐々に戻される。
実際の手ぶれは、X方向とY方向の両方で発生するため、レンズホルダ30がX方向とY方向の両方へ同時に移動する。
<手ぶれ補正のレンズ移動制御回路>
次に、手ぶれ補正制御部117及び手ぶれ補正部118の制御回路について説明する。制御回路は、X方向と、Y方向の2つが設けられている。図6は、手ぶれ補正制御部117及び手ぶれ補正部118の、X方向の手ぶれを抑制するための制御回路の構成を示すブロック図である。Xジャイロセンサ50は、X方向の手ぶれが発生すると、角速度信号を発生する。この角速度信号は、ハイパスフィルタ51に送られ、高周波の角速度信号が抽出された後、アンプ52において増幅される。これにより、デジタルカメラ1がゆっくり動かされたときに発生する角速度信号は除去され、デジタルカメラ1が急激に動かされたときに発生する角速度信号だけが増幅されてから、CPU80に送られる。
CPU80はA/D変換器53を備え、アンプ52からのアナログの角速度信号をデジタルの角速度信号に変換する。このA/D変換器53は、16kHzのサンプリングパルスによって、アナログの角速度信号をサンプリングして、10ビットのデジタルの角速度信号に変換する。揺り戻し制御部74は、この10ビットの角速度信号からハイパスフィルタ51のオーバーシュートを検出し、揺り戻し現象を抑制するように信号処理を施す。揺り戻し制御部74の詳細については、後述する。
揺り戻し現象を抑制された角速度信号は平均回路54に送られ、ここで16個の角速度信号の平均値が算出される。これにより、1ms毎に1個の角速度信号が得られる。これは、角速度信号の転送速度が1kHzであることを表している。
平均化された角速度信号は、減算器55と長時間積分器56に送られる。長時間積分器56は、角速度信号を循環積分することで、角速度信号のドリフト成分を算出する。循環積分は、具体的には、現在の信号と、1つ前の信号との差(正負がある)を求め、これを積算するものである。得られたドリフト成分は、減算器55に送られ、入力中の角速度信号から減算される。
ドリフト補正された角速度信号は、コアリング回路57に入力される。このコアリング回路57は、減算器55から出力された角速度がスレシュホードレベル以下のときに、0に変換する。これにより、微細な手ぶれに対しては抑制動作をしないので、補正レンズ12のふらつきを防止することができる。
コアリング処理された角速度信号は、積分回路60に送られる。この積分回路60は、まず入力角速度信号A1を積分して角度信号An+1に変換する。この積分には次式が使われる。
[数1]
n+1=(A1−A)×α+A
ここで、αは係数であり、Aはレジスタから読み出した前回の積分値である。
上記積分により、手ぶれによって発生した光学系の傾き角度が算出される。得られた角度信号An+1は、リミッタに送られる。このリミッタは、傾き角度がリミット角度(例えば2度)を越えた場合には、越えた部分がカットされる。したがって、角度信号An+1の最大値は、リミット角度である。なお、リミット角度は、光学系の焦点距離に関係なく、一定の値である。このリミット処理された角度信号An+1は、積分回路60の出力信号として位相補償器61に送られる。これとともに、角度信号An+1がレジスタに格納され、次の積分演算において積分値Aとして用いられる。
位相補償器61は、角度信号の位相調整をする。位相補償器61に入力された角速度信号は、デジタルカメラ1の振れに対するXジャイロセンサ50からの信号出力までの時間や、積分回路60での積分処理時間の位相遅れが発生しており、位相補償器61は、これらの時間を加算した位相遅れを補償する。
位相補償処理された角度信号は乗算器63に入力される。この乗算器63は、メモリ64から読み出したメカ係数γと角度信号を乗算して、レンズの変位量を算出する。メカ係数γは、光学系の焦点距離に応じた値となっており、焦点距離が大きいほどメカ係数γの値が大きい。実際には、メカ係数γは、焦点距離の外に、コイル22、23の変換効率などを考慮して決められている。各焦点距離におけるメカ係数γとしては、例えば図7に示す数値が用いられる。このメカ係数γにより、同じ手ぶれであっても、焦点距離が長いときは、焦点距離が短いときに比べて、補正レンズ12の移動量が大きくなる。
乗算器63から出力されたレンズ変位量信号は、加算器65で基準電圧(2.5V)に加算され、目標レンズ位置信号が算出される。前述したように、この目標レンズ位置信号は、光学系のぶれ角度の大きさと方向に応じて、基準電圧を中心にして変化した値となっている。この目標レンズ位置信号は、CPU80の出力信号として減算器70に送られる。
アンプ・定電流回路71は、Xホール素子40に定電流を供給する。このXホール素子40は、磁石42の磁界に応答して、Xスライダ18の位置を検出する。また、アンプ・定電流回路71は、Xホール素子40の出力信号を増幅してから、A/D変換器73に入力する。この信号は、A/D変換器73でデジタル信号に変換された後、減算器70に入力され、減算器70は、加算器65及びA/D変換器73から入力された2つの信号の差に応じた信号をドライバ72に送る。ドライバ72は、減算器70の出力信号の大きさに応じた値で、出力信号の符号に応じた向きの電流をコイル22に流して、補正レンズ12を+X方向又は−X方向に移動させる。
なお、コアリング回路57のスレッシュホールドレベル、積分回路60の係数α及びリミッタ値、メモリ62の加算係数β、メモリ64のメカ係数γ、加算器65の基準電圧などは、CPU111によって設定される。
次に、手ぶれ補正制御部117及び手ぶれ補正部118の制御回路の作用について説明する。Xジャイロセンサ50は、例えば+X方向に手ぶれが起こると、符号がマイナスで、角速度の大きさに応じた値の角速度信号を発生する。また、手ぶれが収まるときには、プラスの符号で、収束の角速度に大きさに応じた値の角速度信号が発生する。この角速度信号は、ハイパスフィルタ51で所定周波数以上のものが抽出され、かつアンプ52で増幅されてから、CPU80に送られる。
CPU80のA/D変換器53は角速度信号をデジタル信号に変換し、平均回路54が16個の角速度信号の平均値を算出する。平均化された角速度信号は、減算器55でドリフト成分が除去される。
コアリング回路57は、角速度信号が所定値以下のときに、角速度信号を0に置き換える。コアリング処理がされた角速度信号は、積分回路60で積分されて角度信号に変換され、所定値以上の角度信号はリミット値に置き換えられる。角度信号は、手ぶれの発生時には値が0から増加し、手ぶれが収束するときには値が0に向かって減少する。したがって、手ぶれがないときには、角度信号は0である。また、角度信号には、手ぶれの向きに応じてプラス又はマイナスの符号を持っている。
リミット処理された角度信号は、位相補償器61に送られ、位相補償処理が施される。位相補償処理された角度信号は、乗算器63でメカ係数が乗算され、レンズ変位量信号に変換される。加算器65は、レンズ変位量信号に基準電圧を加算して、目標レンズ位置信号に変換する。この目標レンズ位置信号は、揺り戻し抑制部74で決定された増幅率に乗算器66で乗算されてから、減算器70に入力される。
減算器70は、Xホール素子40の出力信号と、目標レンズ位置信号との差分を算出し、ドライバ72を介してコイル22に流す電流の向きと大きさとを制御する。
前述したように、CPU80は、手ぶれが発生していないときは、目標レンズ位置信号として基準電圧(2.5V)を出力し、手ぶれが発生しているときは、レンズ変位量に応じた電圧だけ、基準電圧よりも大きい又は小さい電圧を目標レンズ位置信号として出力する。ドライバ72は、Xホール素子40の出力信号が目標レンズ位置信号と一致するように、コイル22に流す電流の向き及び大きさを制御する。これにより、Xスライダ18を介して補正レンズ12が移動して、手ぶれを抑制する。また、手ぶれが収まると、目標レンズ位置信号は基準電圧となるので、Xスライダ18は基準位置に戻る。
<第1の実施の形態>
次に、第1の実施の形態のデジタルカメラ1の、揺り戻し抑制部74の動作について説明する。図8は、揺り戻し抑制部74の内部の回路構成について示したブロック図である。
揺り戻し抑制部74は、積分器75、判定部76、スイッチ77、及び加算器78から構成される。前述のように、揺り戻し抑制部74には、A/D変換器53によりデジタル信号に変換された角速度信号が入力される。
図9(a)は、デジタルカメラ1を、停止状態(〜t)、+X方向にパンニング(t〜t)、停止状態(t〜t)、−X方向にパンニング(t〜t)、停止状態(t〜)の順に動かしたときの、Xジャイロセンサ50の出力信号を示す図である。
Xジャイロセンサ50の出力信号は、ハイパスフィルタ51で低周波成分が除去され、アンプ52により増幅された後にA/D変換器53によりデジタル信号に変換され、揺り戻し抑制部74に入力される。図9(b)は、この揺り戻し抑制部74の入力信号を示す図である。ここで、t及びtのタイミングにおいて、デジタルカメラ1が停止しているのにもかかわらず、振幅の大きな信号が存在している。この信号成分が揺り戻し現象の原因となる。
揺り戻し抑制部74においては、まず積分器75が入力信号の積分を行う。図9(c)は、積分器75の出力信号を示す図である。判定部76は、図9(b)に示すA/D変換器53の出力信号及び図9(c)に示す積分器75の出力信号に基づいて、スイッチ77をオンするか否かを判定する。
図10は、判定部76におけるスイッチ77のオン/オフの判定基準を示す図である。図9(b)に示すA/D変換器53の出力信号をHPF、図9(d)に示す積分器75の出力信号の反転信号を−LPF、及びこの2つの信号から推測されるデジタルカメラ1の振れの大きさを振れとして示している。また、A/D変換器53の出力信号(HPF)に関しては閾値A、積分器75の出力信号の反転信号(−LPF)に関しては閾値Bとの比較により、大小を示している。
図11は、判定部76におけるスイッチ77のオン/オフの判定動作を示すフローチャートである。まず、A/D変換器53の出力信号(HPF)が閾値Aより大きく、且つ積分器75の出力信号の反転信号(−LPF)が閾値Bより大きいか否かを判定する(ステップS111)。該当する場合は、判定部76はスイッチ77をオンする(ステップS114)。これにより、加算器78には積分器75の出力信号が入力され、加算器78はこの信号と揺り戻し抑制部74の入力信号であるA/D変換器53の出力信号とを加算し、平均回路54へ出力する。
該当しない場合には、次にA/D変換器53の出力信号(HPF)が−Aより小さく、且つ積分器75の出力信号の反転信号(−LPF)が−Bより小さいか否かを判定する(ステップS112)。該当する場合は、判定部76はスイッチ77をオンする(ステップS114)。これにより、同様に加算器78には積分器75の出力信号が入力される。
どちらにも該当しない場合は、判定部76はスイッチ77をオフする(ステップS113)。これにより、加算器78はA/D変換器53の出力信号をそのまま平均回路54へ出力する。
ここで、図9の各状態におけるスイッチ77のオン/オフについて説明する。図9(e)は、スイッチ77のオン/オフを示す図であり、図9(f)は、加算器78の出力を示す図である。
〜tにおいては、−A<HPF<Aであるので、スイッチ77はオフされる。t〜tにおいては、HPF>A及び−LPF>−Bであるので、スイッチ77はオフされる。また、t〜tにおいても、−A<HPF<Aであるので、スイッチ77はオフされる。したがって、〜tにおいては、図9(f)に示すように、加算器78の出力信号は図9(b)に示すA/D変換器53の出力信号と同様になる。
〜tにおいては、HPF<−A及び−LPF<−Bであり、これは図11のステップS112の条件に該当し、スイッチ77はオンされる。スイッチ77がオンされると、積分器75の出力信号(図9(c))が加算器78に入力され、A/D変換器53の出力信号(図9(b))に加算される。この2つの信号が加算されると、Xジャイロセンサ50の信号が再現されるため、t〜tにおける加算器78の出力信号は、図9(a)に示すt〜tにおけるXジャイロセンサ50の出力と同様にグラウンドレベルとなる。このように、図9(b)に示すt〜tにおける揺り戻し現象の原因となる揺り戻し成分信号が除去される。
さらに、t〜tにおいては、−A<HPF<Aであるので、スイッチ77はオフされる。t〜tにおいては、HPF<−A及び−LPF>−Bであるので、スイッチ77はオフされる。また、t〜tにおいても、−A<HPF<Aであるので、スイッチ77はオフされる。したがって、t〜tにおいては、図9(f)に示すように、加算器78の出力信号は図9(b)に示すA/D変換器53の出力信号と同様になる。
〜tにおいては、HPF>A及び−LPF>Bであり、これは図11のステップS111の条件に該当し、スイッチ77はオンされる。t〜tの場合と同様に、スイッチ77がオンされると、t〜tにおける加算器78の出力信号は、図9(a)に示すt〜tにおけるXジャイロセンサ50の出力と同様にグラウンドレベルとなる。このように、図9(b)に示すt〜tにおける揺り戻し現象の原因となる揺り戻し成分信号が除去される。
さらに、t〜においては、−A<HPF<Aであるので、スイッチ77はオフされる。
このように、揺り戻し現象の原因となるハイパスフィルタ51の揺り戻し成分信号が発生していることを、「A/D変換器53の出力信号が閾値Aより大きく、且つ積分器75の出力信号の反転信号が閾値Bより大きい」場合と、「A/D変換器53の出力信号が−Aより小さく、且つ積分器75の出力信号の反転信号が−Bより小さい」場合から検出している。
また、この条件を検出した場合は、後段への出力信号を、積分器75の出力信号を加算器78で加算して、オーバーシュートのないXジャイロセンサ50の出力信号を再現した信号にすることにより、揺り戻し現象を防止している。
Y方向についても同様の構成とすることにより、チルティングにおける揺り戻し現象を防止することも可能になる。
本発明の実施の形態においては、角速度を検出するジャイロセンサを用いたが、速度を検出するジャイロセンサを用いてもよい。
本発明の実施の形態においては、ぶれに応じて補正レンズを制御させることにより手ぶれ補正を行っているが、手ぶれ補正の方式はこれに限定されるものではなく、例えば撮像素子の位置を制御して手ぶれ補正を行ったものに適用してもよい。その他、屈曲光学系の屈曲角度を制御して手ぶれ補正を行う方式や、撮像レンズ及び撮像素子全体を制御して手ぶれ補正を行う方式についても適用可能である。また、フィルムを用いるアナログカメラの手ぶれ補正においても適用可能である。
図1は、本発明が適用されたデジタルカメラ1の電気的構成を示すブロック図である。 図2は、デジタルカメラ1の光学系を示した図である。 図3は、レンズ移動機構を示す分解斜視図である。 図4は、カバーが取り外されている状態のレンズ移動機構の正面図である。 図5は、レンズ移動機構の一部を示す断面図である。 図6は、X方向の手ぶれを抑制するための制御回路の構成を示すブロック図である。 図7は、レンズの変位量を算出するための各焦点距離におけるメカ係数γについて示した図である。 図8は、揺り戻し抑制部74の内部の回路構成について示したブロック図である。 図9は、Xジャイロセンサ50、A/D変換器53、積分器75、判定部76、及び加算器78の出力信号を示す図である。 図10は、判定部76におけるスイッチ77のオン/オフの判定基準を示す図である。 図11は、判定部76におけるスイッチ77のオン/オフの判定動作を示すフローチャートである。
符号の説明
1…デジタルカメラ、10…ズームレンズ、11…フォーカスレンズ、12…補正レンズ、13…CCD、15…レンズ鏡筒、18…Xスライダ、19…Yスライダ、22…コイル、25…ヨーク、26…永久磁石、33…永久磁石、40…Xホール素子、41…Yホール素子、50…Xジャイロセンサ、70…減算器、71…アンプ・定電流回路、72…Xドライバ、73…A/D変換器、74…揺り戻し抑制部、75…積分器、76…判定部、77…スイッチ、78…加算器、111…CPU、112…操作部、113…レリーズボタン、117…手ぶれ補正制御部、118…手ぶれ補正部、128…画像表示装置、134…AE検出回路

Claims (3)

  1. 速度又は角速度を検出するセンサと、前記センサの出力信号の低周波成分を除去するハイパスフィルタと、前記ハイパスフィルタの出力信号に基づいて装置本体の振れを検出する振れ検出手段と、を備えた振れ検出装置において、
    前記ハイパスフィルタの出力信号に、一定方向に継続した振れが停止したときに出力される揺り戻し成分が含まれているか否かを判定する判定手段と、
    前記判定手段の結果に基づいて前記ハイパスフィルタの出力信号から前記揺り戻し成分を除去する除去手段と、
    を備え
    前記判定手段は、前記ハイパスフィルタの出力信号を積分する積分手段を備え、前記ハイパスフィルタの出力信号が第一の閾値より大きく、かつ前記積分手段の出力信号の反転信号が第二の閾値より大きい場合、又は前記ハイパスフィルタの出力信号が第一の閾値の負数より小さく、かつ前記積分手段の出力信号の反転信号が第二の閾値の負数より小さい場合に、揺り戻し成分を含んでいると判定することを特徴とする振れ検出装置。
  2. 前記除去手段は、前記ハイパスフィルタの出力信号と前記積分手段の出力信号を加算する加算手段を備え、前記判定手段が揺り戻し成分を含んでいないと判定した場合には前記ハイパスフィルタの出力信号をそのまま出力し、前記判定手段が揺り戻し成分を含んでいると判定した場合には前記ハイパスフィルタの出力信号と前記積分手段の出力信号を加算して出力することを特徴とする請求項1に記載の振れ検出装置。
  3. センサが速度又は角速度を検出する工程と、ハイパスフィルタが前記センサの出力信号の低周波成分を除去する工程と、前記ハイパスフィルタの出力信号に基づいて装置本体の振れを検出する振れ検出工程と、を備えた振れ検出方法において、
    前記ハイパスフィルタの出力信号に、一定方向に継続した振れが停止したときに出力される揺り戻し成分が含まれているか否かを判定する判定工程と、
    前記判定工程の結果に基づいて前記ハイパスフィルタの出力信号から前記揺り戻し成分を除去する除去工程と、
    を備え
    前記判定工程は、積分手段が前記ハイパスフィルタの出力信号を積分する積分工程を備え、前記ハイパスフィルタの出力信号が第一の閾値より大きく、かつ前記積分手段の出力信号の反転信号が第二の閾値より大きい場合、又は前記ハイパスフィルタの出力信号が第一の閾値の負数より小さく、かつ前記積分手段の出力信号の反転信号が第二の閾値の負数より小さい場合に、揺り戻し成分を含んでいると判定することを特徴とする振れ検出方法。
JP2008004654A 2008-01-11 2008-01-11 振れ検出装置及び振れ検出方法 Expired - Fee Related JP5090933B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2008004654A JP5090933B2 (ja) 2008-01-11 2008-01-11 振れ検出装置及び振れ検出方法
US12/349,881 US7848626B2 (en) 2008-01-11 2009-01-07 Shake detection apparatus and shake detection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008004654A JP5090933B2 (ja) 2008-01-11 2008-01-11 振れ検出装置及び振れ検出方法

Publications (2)

Publication Number Publication Date
JP2009168939A JP2009168939A (ja) 2009-07-30
JP5090933B2 true JP5090933B2 (ja) 2012-12-05

Family

ID=40850718

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008004654A Expired - Fee Related JP5090933B2 (ja) 2008-01-11 2008-01-11 振れ検出装置及び振れ検出方法

Country Status (2)

Country Link
US (1) US7848626B2 (ja)
JP (1) JP5090933B2 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012032543A (ja) * 2010-07-29 2012-02-16 Olympus Imaging Corp 像ぶれ補正装置および撮像装置
JP6087536B2 (ja) * 2012-08-15 2017-03-01 キヤノン株式会社 撮像装置およびその制御方法
JP6178573B2 (ja) * 2012-12-27 2017-08-09 キヤノン株式会社 像ブレ補正装置及びその制御方法、プログラム、記憶媒体
JP6053535B2 (ja) * 2013-01-25 2016-12-27 キヤノン株式会社 補正光学装置、画像振れ補正装置、及び撮像装置
JP6351247B2 (ja) * 2013-12-12 2018-07-04 キヤノン株式会社 像振れ補正装置及びその制御方法、光学機器、撮像装置
US10334170B2 (en) * 2015-01-23 2019-06-25 Samsung Electro-Mechanics Co., Ltd. Camera module
KR102176284B1 (ko) * 2015-04-08 2020-11-09 삼성전기주식회사 디지털 촬영시스템 및 그 제어방법
JP7175702B2 (ja) 2018-10-16 2022-11-21 キヤノン株式会社 像ブレ補正装置およびその制御方法、撮像装置
US20210360162A1 (en) * 2020-05-13 2021-11-18 Canon Kabushiki Kaisha Control apparatus, image pickup apparatus, control method, and memory medium

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3154776B2 (ja) * 1991-11-22 2001-04-09 キヤノン株式会社 像振れ防止装置
JP3423564B2 (ja) * 1997-01-28 2003-07-07 キヤノン株式会社 光学機器
JPH11266389A (ja) * 1998-03-17 1999-09-28 Canon Inc 撮像装置
JP2000039640A (ja) 1998-07-24 2000-02-08 Canon Inc 撮像装置及び揺れ補正装置及び揺れ補正方法
JPH11275431A (ja) 1998-03-19 1999-10-08 Canon Inc 撮像装置
US6630950B1 (en) * 1998-03-19 2003-10-07 Canon Kabushiki Kaisha Apparatus for improving image vibration suppression
JP4227215B2 (ja) 1998-04-13 2009-02-18 キヤノン株式会社 撮像装置および撮像装置の制御方法
JP4154028B2 (ja) * 1998-03-31 2008-09-24 キヤノン株式会社 撮像装置及びその制御方法並びに記憶媒体
DE10348567A1 (de) * 2002-10-22 2004-05-13 Fuji Photo Optical Co. Ltd. Bildunschärfekorrektureinrichtung
JP4817849B2 (ja) * 2006-01-13 2011-11-16 キヤノン株式会社 振れ補正装置および光学機器
JP2007324929A (ja) * 2006-05-31 2007-12-13 Victor Co Of Japan Ltd 手振れ補正装置

Also Published As

Publication number Publication date
JP2009168939A (ja) 2009-07-30
US20090180769A1 (en) 2009-07-16
US7848626B2 (en) 2010-12-07

Similar Documents

Publication Publication Date Title
JP5090933B2 (ja) 振れ検出装置及び振れ検出方法
JP5296346B2 (ja) 撮影装置
KR101575626B1 (ko) 디지털 카메라 및 그 제어방법
US9626743B2 (en) Image stabilization apparatus, method of controlling the same, image capturing apparatus, lens apparatus, and storage medium
US11297240B2 (en) Imaging device and imaging control method capable of preventing camera shake
EP2051127A1 (en) Optical apparatus including image blur correction device
JP6821358B2 (ja) 制御装置、撮像装置、レンズ装置、制御方法、プログラム、および、記憶媒体
JP2011139169A (ja) 撮像装置
JP2009145852A (ja) オートフォーカス装置、カメラおよびオートフォーカス方法
US9811891B2 (en) Image shake correction device, optical apparatus, imaging apparatus, and control method
CN108668074B (zh) 图像模糊校正装置及其控制方法、摄像设备和存储介质
JP5161513B2 (ja) 手振れ補正装置及び方法
JP2012078495A (ja) 撮像装置、ブレ補正装置及びブレ補正方法
JP2017116924A (ja) ズーム制御装置およびズーム制御方法、撮像装置
JP2009168938A (ja) 撮影装置
JP6395401B2 (ja) 像振れ補正装置およびその制御方法、光学機器、撮像装置
JP2009047756A (ja) 撮影装置
JP5345305B2 (ja) 撮影装置及び撮影方法
JP2008206021A (ja) 撮像装置及びレンズ鏡筒
JP4861928B2 (ja) 撮影装置
JP5168981B2 (ja) ブレ補正装置および光学装置
JP2011013555A (ja) ブレ補正装置及び光学機器
JP2021016022A (ja) 撮像装置およびその制御方法
JP2009047781A (ja) 撮影装置
JP6541368B2 (ja) 像ブレ補正装置、光学機器、撮像装置および制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100618

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120323

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120906

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120913

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150921

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5090933

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees