JPH05323444A - ぶれ画像復元装置 - Google Patents
ぶれ画像復元装置Info
- Publication number
- JPH05323444A JPH05323444A JP4129105A JP12910592A JPH05323444A JP H05323444 A JPH05323444 A JP H05323444A JP 4129105 A JP4129105 A JP 4129105A JP 12910592 A JP12910592 A JP 12910592A JP H05323444 A JPH05323444 A JP H05323444A
- Authority
- JP
- Japan
- Prior art keywords
- image
- blurring
- blur
- locus data
- circuit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Camera Data Copying Or Recording (AREA)
Abstract
(57)【要約】
【目的】この発明のぶれ画像復元装置にあっては、カメ
ラ等による撮影時のぶれを補正するため、ぶれ画像とぶ
れ軌跡データを記憶して、演算により最終出力としてぶ
れのない画像を得ることを特徴とする。 【構成】再生用磁気ヘッド１９ｂ及び再生回路は、フィ
ルム２０上の磁気テープ２１に記録されたぶれ軌跡デー
タを再生し、ぶれ軌跡データ記憶部２３がこれを記憶す
る。ぶれ軌跡データ変換部２４は、この記憶されたぶれ
軌跡データを所定のぶれ伝達関数を求め、ＦＦＴ回路２
５に出力する。また、画像メモリ２９は、撮影レンズ２
７、撮像素子２８を介してぶれ画像を記憶し、ＦＦＴ回
路３０に出力する。除算部３１は、ＦＦＴ回路２５、３
０でフーリエ変換したデータを演算し、逆ＦＦＴ回路３
２で逆フーリエ変換を行ってぶれを補正する。画像表示
部３３はぶれを補正した画像を出力する。
ラ等による撮影時のぶれを補正するため、ぶれ画像とぶ
れ軌跡データを記憶して、演算により最終出力としてぶ
れのない画像を得ることを特徴とする。 【構成】再生用磁気ヘッド１９ｂ及び再生回路は、フィ
ルム２０上の磁気テープ２１に記録されたぶれ軌跡デー
タを再生し、ぶれ軌跡データ記憶部２３がこれを記憶す
る。ぶれ軌跡データ変換部２４は、この記憶されたぶれ
軌跡データを所定のぶれ伝達関数を求め、ＦＦＴ回路２
５に出力する。また、画像メモリ２９は、撮影レンズ２
７、撮像素子２８を介してぶれ画像を記憶し、ＦＦＴ回
路３０に出力する。除算部３１は、ＦＦＴ回路２５、３
０でフーリエ変換したデータを演算し、逆ＦＦＴ回路３
２で逆フーリエ変換を行ってぶれを補正する。画像表示
部３３はぶれを補正した画像を出力する。
Description
【０００１】
【産業上の利用分野】この発明はぶれ画像復元装置に関
し、特にカメラ等の撮影装置にぶれ補正のための機構を
設けることなく最終出力としてぶれのない画像若しくは
映像を得るぶれ画像復元装置に関するものである。
し、特にカメラ等の撮影装置にぶれ補正のための機構を
設けることなく最終出力としてぶれのない画像若しくは
映像を得るぶれ画像復元装置に関するものである。
【０００２】
【従来の技術】従来より、カメラ等の撮影装置により得
られる画像に生じるぶれを補正するものとして、次のよ
うな技術がある。
られる画像に生じるぶれを補正するものとして、次のよ
うな技術がある。
【０００３】例えば、三宅洋一著：画像処理のすすめ、
写真２集、１０９−１１３、６／１９８７の論文には、
等速運動により生じたぶれ画像の復元の方法が記載され
ている。すなわち、被写体ｆ（ｘ，ｙ）がｘ方向にＴ秒
間等速度Ｖで運動すると仮定すると、フィルム上に記録
される画像ｇ（ｘ，ｙ）は、数１の関係式で表される。
写真２集、１０９−１１３、６／１９８７の論文には、
等速運動により生じたぶれ画像の復元の方法が記載され
ている。すなわち、被写体ｆ（ｘ，ｙ）がｘ方向にＴ秒
間等速度Ｖで運動すると仮定すると、フィルム上に記録
される画像ｇ（ｘ，ｙ）は、数１の関係式で表される。
【０００４】
【数１】 この両辺をフーリエ変換すれば、数２の関係式が得られ
る。
る。
【０００５】
【数２】 すなわち、数３の関係式のように表される。
【０００６】
【数３】 そして、数４で表される関係式を逆フーリエ変換してぶ
れ像を復元するものである。
れ像を復元するものである。
【０００７】
【数４】 また、特願平３−２３５０６４号には、フィルムを駆動
手段で駆動してぶれを補正する技術が開示されている。
手段で駆動してぶれを補正する技術が開示されている。
【０００８】
【発明が解決しようとする課題】ぶれを検出し、フィル
ム、或いはレンズの光学手段を駆動してぶれを補正する
装置は、正確な検出と遅れのない素早く正確な補正が必
要である。そのため装置が大掛かりになってしまう。ま
た、ぶれは等速運動でなくランダムに近い動きをするの
で、等速運動を仮定して補正しても効果は限られたもの
となる。
ム、或いはレンズの光学手段を駆動してぶれを補正する
装置は、正確な検出と遅れのない素早く正確な補正が必
要である。そのため装置が大掛かりになってしまう。ま
た、ぶれは等速運動でなくランダムに近い動きをするの
で、等速運動を仮定して補正しても効果は限られたもの
となる。
【０００９】この発明は上記課題に鑑みてなされたもの
で、ぶれが生じた写真、またはぶれが生じた映像から画
像処理によりぶれを補正することのできるぶれ画像復元
装置を提供することを目的とする。
で、ぶれが生じた写真、またはぶれが生じた映像から画
像処理によりぶれを補正することのできるぶれ画像復元
装置を提供することを目的とする。
【００１０】
【課題を解決するための手段】すなわちこの発明は、被
写体像を電気信号に変換する撮像手段と、カメラの撮影
動作中に於けるぶれ軌跡データを記憶するぶれ軌跡デー
タ記憶手段と、上記電気信号と上記ぶれ軌跡データとに
よりぶれのない画像を復元する復元手段とを具備するこ
とを特徴とする。
写体像を電気信号に変換する撮像手段と、カメラの撮影
動作中に於けるぶれ軌跡データを記憶するぶれ軌跡デー
タ記憶手段と、上記電気信号と上記ぶれ軌跡データとに
よりぶれのない画像を復元する復元手段とを具備するこ
とを特徴とする。
【００１１】
【作用】この発明のぶれ画像復元装置にあっては、ぶれ
を含む被写体像が撮像手段によって電気信号に変換され
て画像メモリに記憶される。一方、フィルム上の磁気テ
ープに記憶されたカメラの撮影動作中に於けるぶれ軌跡
データが、磁気ヘッドで読取られてぶれ軌跡データ記憶
手段に記憶される。上記画像メモリに記憶された電気信
号と上記ぶれ軌跡データ記憶手段に記憶されたぶれ軌跡
データは、復元手段によってフーリエ変換された後除算
され、更に逆フーリエ変換されてぶれのない画像として
復元される。
を含む被写体像が撮像手段によって電気信号に変換され
て画像メモリに記憶される。一方、フィルム上の磁気テ
ープに記憶されたカメラの撮影動作中に於けるぶれ軌跡
データが、磁気ヘッドで読取られてぶれ軌跡データ記憶
手段に記憶される。上記画像メモリに記憶された電気信
号と上記ぶれ軌跡データ記憶手段に記憶されたぶれ軌跡
データは、復元手段によってフーリエ変換された後除算
され、更に逆フーリエ変換されてぶれのない画像として
復元される。
【００１２】
【実施例】以下、図面を参照してこの発明の実施例を説
明する。初めに、ぶれ軌跡データからぶれのない画像を
復元する理論的背景について説明する。
明する。初めに、ぶれ軌跡データからぶれのない画像を
復元する理論的背景について説明する。
【００１３】ぶれ軌跡データは、所定の時間間隔で時系
列的に得られる水平垂直方向のぶれ量、△ｘ，△ｙのデ
ータのことである。このデータを並び換えて、ぶれ位置
（△ｘ，△ｙ）が同じデータをカウントし、ｎ個のデー
タがあったとすれば、（△ｘ，△ｙ）の位置の度数をｈ
とする。
列的に得られる水平垂直方向のぶれ量、△ｘ，△ｙのデ
ータのことである。このデータを並び換えて、ぶれ位置
（△ｘ，△ｙ）が同じデータをカウントし、ｎ個のデー
タがあったとすれば、（△ｘ，△ｙ）の位置の度数をｈ
とする。
【００１４】図２はこれを図解したもので、図中の矢印
の長さが各位置（△ｘ，△ｙ）のｈを表している。この
ように表されたｈを、関数ｈ（ｘ，ｙ）で表す。尚、ｈ
（ｘ，ｙ）を、以後ぶれ伝達関数と称することとする。
の長さが各位置（△ｘ，△ｙ）のｈを表している。この
ように表されたｈを、関数ｈ（ｘ，ｙ）で表す。尚、ｈ
（ｘ，ｙ）を、以後ぶれ伝達関数と称することとする。
【００１５】一方、ぶれのない、もとの像の強度分布を
ｆ（ｘ，ｙ）とすると、ぶれ画像は数５の関係式のよう
に、ｆ（ｘ，ｙ）とｈ（ｘ，ｙ）のコンボリューション
積分で表すことができる。
ｆ（ｘ，ｙ）とすると、ぶれ画像は数５の関係式のよう
に、ｆ（ｘ，ｙ）とｈ（ｘ，ｙ）のコンボリューション
積分で表すことができる。
【００１６】
【数５】 両辺をフーリエ変換することにより数６の関係式を得る
ことができる。
ことができる。
【００１７】
【数６】 数６の関係式より上記数４の関係式が得られる。
【００１８】したがって、Ｆ（ｕ，ｖ）を逆フーリエ変
換すると、ぶれのない画像が復元できることになる。数
４の関係式は、ぶれ像の２次元Ｖフーリエ変換と、ぶれ
伝達関数の２次元フーリエ変換から、ぶれのない画像が
復元できることを意味している。
換すると、ぶれのない画像が復元できることになる。数
４の関係式は、ぶれ像の２次元Ｖフーリエ変換と、ぶれ
伝達関数の２次元フーリエ変換から、ぶれのない画像が
復元できることを意味している。
【００１９】図３は、カメラへのぶれ検出手段の装着状
態を示す斜視図である。図３に示されるように、カメラ
本体１１に装着される撮影レンズ１２の光軸方向をＺ軸
とし、Ｚ軸を通りＺ軸に直交する左右方向をＸ軸とし、
Ｚ軸を通りＺ軸に直交する上下方向をＹ軸とする。ま
た、上記各軸回りの回転角成分をそれぞれθｚ，θｘ，
θｙとする。ぶれ検出手段１３には、角度センサ１３ａ
及び１３ｂを適用するものとし、それぞれ回転角θｘ，
θｙの検出を行う。この回転角θｘは、Ｙ軸とＺ軸で形
成されるＹ−Ｚ平面の像の移動に対応し、回転角θｙ
は、Ｘ軸とＺ軸で形成されるＸ−Ｚ平面の像の移動に対
応する。
態を示す斜視図である。図３に示されるように、カメラ
本体１１に装着される撮影レンズ１２の光軸方向をＺ軸
とし、Ｚ軸を通りＺ軸に直交する左右方向をＸ軸とし、
Ｚ軸を通りＺ軸に直交する上下方向をＹ軸とする。ま
た、上記各軸回りの回転角成分をそれぞれθｚ，θｘ，
θｙとする。ぶれ検出手段１３には、角度センサ１３ａ
及び１３ｂを適用するものとし、それぞれ回転角θｘ，
θｙの検出を行う。この回転角θｘは、Ｙ軸とＺ軸で形
成されるＹ−Ｚ平面の像の移動に対応し、回転角θｙ
は、Ｘ軸とＺ軸で形成されるＸ−Ｚ平面の像の移動に対
応する。
【００２０】図４は、カメラ本体１１が回転角θｘだけ
ぶれた場合の像のＸ−Ｚ平面上での移動状態を示す図で
ある。撮影レンズ１２を構成する第１レンズ１４ａ、第
２レンズ１４ｂは、それぞれ１４ａ′、１４ｂ′の位置
まで移動する。同様に、被写体Ｏの像１５は、角度θｘ
傾いた結像面Ｃ−Ｄ上の１５′の位置に移動する。ここ
で、第１及び第２レンズ１４ａ及び１４ｂの焦点距離を
ｆとし、その焦点から被写体Ｏまでの距離をＬとし、焦
点から像位置までの距離をＬ′とし、また、像位置の移
動量を△ｘとすると、上記像の移動量△ｘは、数７の関
係式で示される。
ぶれた場合の像のＸ−Ｚ平面上での移動状態を示す図で
ある。撮影レンズ１２を構成する第１レンズ１４ａ、第
２レンズ１４ｂは、それぞれ１４ａ′、１４ｂ′の位置
まで移動する。同様に、被写体Ｏの像１５は、角度θｘ
傾いた結像面Ｃ−Ｄ上の１５′の位置に移動する。ここ
で、第１及び第２レンズ１４ａ及び１４ｂの焦点距離を
ｆとし、その焦点から被写体Ｏまでの距離をＬとし、焦
点から像位置までの距離をＬ′とし、また、像位置の移
動量を△ｘとすると、上記像の移動量△ｘは、数７の関
係式で示される。
【００２１】
【数７】
【００２２】但し、βはｆ／Ｌであり、撮影倍率を示
す。上記数７の関係式に於ける値ｆは、撮影レンズ情報
として得ることができ、βを与える値Ｌは、図示されな
い測距装置からのＡＦ（オートフォーカス）情報から得
ることができる。また、値θｘは、前記ぶれ検出手段１
３の角度センサ１３ａ（図３参照）により検出すること
ができるので、実質的に移動量△ｘが図示されない演算
手段により求められる。
す。上記数７の関係式に於ける値ｆは、撮影レンズ情報
として得ることができ、βを与える値Ｌは、図示されな
い測距装置からのＡＦ（オートフォーカス）情報から得
ることができる。また、値θｘは、前記ぶれ検出手段１
３の角度センサ１３ａ（図３参照）により検出すること
ができるので、実質的に移動量△ｘが図示されない演算
手段により求められる。
【００２３】図５は、銀塩フィルムの上部に印刷された
磁気テープにぶれ軌跡データを記録するもので、ぶれ画
像復元装置の記録系を示す概略的なブロック構成図であ
る。同図に於いて、ぶれ量検出部１６は、図３及び図４
で説明した方法で水平方向、垂直方向のぶれ量△ｘ，△
ｙを算出するぶれ量検出手段である。ぶれ量検出部１６
からは所定のタイミングで時系列データ△ｘ，△ｙが出
力され、ＲＡＭで構成されるぶれ軌跡データ記憶部１７
に一時的に記憶される。次に、フィルム巻上げに同期し
て△ｘ，△ｙは磁気記録部１８に所定のタイミングで送
られ、記録用磁気ヘッド１９ａを介してフィルム２０上
の磁気テープ２１に記録される。図６は、フィルム面の
ぶれ情報が記録される位置を示したものである。例え
ば、フィルム２０の上部に図示の如く磁気テープ２１が
印刷されている。
磁気テープにぶれ軌跡データを記録するもので、ぶれ画
像復元装置の記録系を示す概略的なブロック構成図であ
る。同図に於いて、ぶれ量検出部１６は、図３及び図４
で説明した方法で水平方向、垂直方向のぶれ量△ｘ，△
ｙを算出するぶれ量検出手段である。ぶれ量検出部１６
からは所定のタイミングで時系列データ△ｘ，△ｙが出
力され、ＲＡＭで構成されるぶれ軌跡データ記憶部１７
に一時的に記憶される。次に、フィルム巻上げに同期し
て△ｘ，△ｙは磁気記録部１８に所定のタイミングで送
られ、記録用磁気ヘッド１９ａを介してフィルム２０上
の磁気テープ２１に記録される。図６は、フィルム面の
ぶれ情報が記録される位置を示したものである。例え
ば、フィルム２０の上部に図示の如く磁気テープ２１が
印刷されている。
【００２４】図１は、ぶれ情報の記録されたネガフィル
ムからぶれ情報を読み取りぶれ画像からぶれのない画像
を復元するぶれ画像復元装置の再生系のブロック構成図
である。同図に於いて、再生用磁気ヘッド１９ｂ及び再
生回路２２で再生されたぶれ軌跡データは、一時的にＲ
ＡＭで構成されたぶれ軌跡データ記憶部２３に記憶され
る。その後、ぶれ軌跡データ変換部２４を経てフーリエ
変換（ＦＦＴ）回路２５にぶれ軌跡データが供給され
る。
ムからぶれ情報を読み取りぶれ画像からぶれのない画像
を復元するぶれ画像復元装置の再生系のブロック構成図
である。同図に於いて、再生用磁気ヘッド１９ｂ及び再
生回路２２で再生されたぶれ軌跡データは、一時的にＲ
ＡＭで構成されたぶれ軌跡データ記憶部２３に記憶され
る。その後、ぶれ軌跡データ変換部２４を経てフーリエ
変換（ＦＦＴ）回路２５にぶれ軌跡データが供給され
る。
【００２５】一方、フィルム２０と同じネガ画像のぶれ
画像２６は、撮影レンズ２７、撮像素子２８を介して画
像メモリ２９に記憶される。そして、ＦＦＴ回路３０を
経て、上記ＦＦＴ回路２５の出力と共に、除算部３１に
供給される。この除算部３１で得られたデータは、逆フ
ーリエ変換（逆ＦＦＴ）回路３２で逆フーリエ変換が行
われてぶれが相殺された後、モニタテレビ、或いはプリ
ンタ等の画像表示部３３に出力される。次に、このぶれ
画像復元装置の再生系の動作を説明する。
画像２６は、撮影レンズ２７、撮像素子２８を介して画
像メモリ２９に記憶される。そして、ＦＦＴ回路３０を
経て、上記ＦＦＴ回路２５の出力と共に、除算部３１に
供給される。この除算部３１で得られたデータは、逆フ
ーリエ変換（逆ＦＦＴ）回路３２で逆フーリエ変換が行
われてぶれが相殺された後、モニタテレビ、或いはプリ
ンタ等の画像表示部３３に出力される。次に、このぶれ
画像復元装置の再生系の動作を説明する。
【００２６】フィルム２０上の磁気テープに記録されて
いるぶれ軌跡データは、再生用磁気ヘッド１９ｂにて読
取られ、再生回路２２で再生処理が行われた後、一時的
にぶれ軌跡データ記憶部２３に記憶される。次いで、ぶ
れ軌跡データ変換部２４で、上記ぶれ軌跡データから上
述したぶれ伝達関数ｈ（ｘ，ｙ）を求める。
いるぶれ軌跡データは、再生用磁気ヘッド１９ｂにて読
取られ、再生回路２２で再生処理が行われた後、一時的
にぶれ軌跡データ記憶部２３に記憶される。次いで、ぶ
れ軌跡データ変換部２４で、上記ぶれ軌跡データから上
述したぶれ伝達関数ｈ（ｘ，ｙ）を求める。
【００２７】ここで、先ず注意をしなければないこと
は、ぶれ画像ｇ（ｘ，ｙ）の倍率とぶれ伝達関数ｈ
（ｘ，ｙ）の倍率を一致させる必要があることである。
すなわち、拡大されたぶれ画像ｇ′（ｘ，ｙ）の倍率を
ｍとすれば、数８の関係式で表される。
は、ぶれ画像ｇ（ｘ，ｙ）の倍率とぶれ伝達関数ｈ
（ｘ，ｙ）の倍率を一致させる必要があることである。
すなわち、拡大されたぶれ画像ｇ′（ｘ，ｙ）の倍率を
ｍとすれば、数８の関係式で表される。
【００２８】
【数８】 同様に、ぶれ伝達関数は数９の関係式で表される。
【００２９】
【数９】
【００３０】次に、撮像素子はｘ方向、ｙ方向に所定ピ
ッチで離散的に配置されているので、上記ピットの画素
面積単位でｈ′（ｘ，ｙ）を離散的データｈ″（ｘ，
ｙ）に変換する必要がある。図２のｘｙ平面の１つのま
すが１画素に相当する。
ッチで離散的に配置されているので、上記ピットの画素
面積単位でｈ′（ｘ，ｙ）を離散的データｈ″（ｘ，
ｙ）に変換する必要がある。図２のｘｙ平面の１つのま
すが１画素に相当する。
【００３１】以上により、ぶれ伝達関数をぶれ画像ｇ′
（ｘ，ｙ）の離散的データと同じ大きさの離散データに
変換することができる。尚、図２の矢印の大きさは、次
のようにして求める。
（ｘ，ｙ）の離散的データと同じ大きさの離散データに
変換することができる。尚、図２の矢印の大きさは、次
のようにして求める。
【００３２】先ず、ぶれ軌跡データ記憶部２３のデータ
の中から（△ｘ，△ｙ）のデータの頻度ｈ（△ｘ，△
ｙ）を求める。これを、全てのデータについて行う。次
に、数９の関係式の変換を行う。いま、ｘ方向のセンサ
ピッチをＰｘ，ｙ方向のセンサピッチをＰｙとすると
き、ｘ方向にｍ番目ｇ方向にｎ番目のます目の離散的ぶ
れ伝達関数ｈ″（ｘ，ｙ）は数１０の関係式で求められ
る。これを、全てのデータについて行う。
の中から（△ｘ，△ｙ）のデータの頻度ｈ（△ｘ，△
ｙ）を求める。これを、全てのデータについて行う。次
に、数９の関係式の変換を行う。いま、ｘ方向のセンサ
ピッチをＰｘ，ｙ方向のセンサピッチをＰｙとすると
き、ｘ方向にｍ番目ｇ方向にｎ番目のます目の離散的ぶ
れ伝達関数ｈ″（ｘ，ｙ）は数１０の関係式で求められ
る。これを、全てのデータについて行う。
【００３３】
【数１０】
【００３４】図１のぶれ軌跡データ変換部２４は、上記
離散的ぶれ伝達関数ｈ″（ｘ，ｙ）を求めるものであ
る。次に、ＦＦＴ回路２５により、ｈ″（ｘ，ｙ）の２
次元フーリエ変換を行い、Ｈ″（ｕ，ｖ）を求める。
離散的ぶれ伝達関数ｈ″（ｘ，ｙ）を求めるものであ
る。次に、ＦＦＴ回路２５により、ｈ″（ｘ，ｙ）の２
次元フーリエ変換を行い、Ｈ″（ｕ，ｖ）を求める。
【００３５】一方、ぶれ画像２６は、撮影レンズ２７及
び２次元撮像素子２８によって撮像され、画像メモリ２
９に記憶される。次いで、ＦＦＴ回路２９によりぶれ画
像ｇ（ｘ，ｙ）のフーリエ変換Ｇ（ｕ，ｖ）が求められ
る。次に、除算部３１に於いて、数１１の関係式が計算
される。
び２次元撮像素子２８によって撮像され、画像メモリ２
９に記憶される。次いで、ＦＦＴ回路２９によりぶれ画
像ｇ（ｘ，ｙ）のフーリエ変換Ｇ（ｕ，ｖ）が求められ
る。次に、除算部３１に於いて、数１１の関係式が計算
される。
【００３６】
【数１１】
【００３７】この結果が、逆ＦＦＴ回路３２により、Ｆ
（ｕ，ｖ）の逆フーリエ変換が演算されて、ぶれのない
画像ｆ（ｕ，ｖ）が復元される。この復元されたぶれの
ない画像ｆ（ｕ，ｖ）が、画像表示部３３に出力され
て、ぶれが補正された画像を見ることができる。
（ｕ，ｖ）の逆フーリエ変換が演算されて、ぶれのない
画像ｆ（ｕ，ｖ）が復元される。この復元されたぶれの
ない画像ｆ（ｕ，ｖ）が、画像表示部３３に出力され
て、ぶれが補正された画像を見ることができる。
【００３８】上述した実施例では、フーリエ変換を応用
してぶれ画像の復元を行うようにしていた。次に、他の
実施例として、多元連立一次方程式を求めてその方程式
を解いてぶれ画像の復元を行う例について述べる。
してぶれ画像の復元を行うようにしていた。次に、他の
実施例として、多元連立一次方程式を求めてその方程式
を解いてぶれ画像の復元を行う例について述べる。
【００３９】いま、ぶれデータを図７に示されるように
簡単なものに仮定する。ここで、図７の１つのます目
は、センサの大きさに等しく、ｈi （ｉ＝０，１，…，
８）は露光時間である。すなわち、位置的にｈi のばら
つきで露光時間がばらつき、ぶれ画像が生じる。
簡単なものに仮定する。ここで、図７の１つのます目
は、センサの大きさに等しく、ｈi （ｉ＝０，１，…，
８）は露光時間である。すなわち、位置的にｈi のばら
つきで露光時間がばらつき、ぶれ画像が生じる。
【００４０】図８は、センサの画素出力を表した図であ
り、同図に於いて左上隅から順にｇ1 ，ｇ2 ，…，
ｇn ，…，ｇ(m-1)n，…，ｇmnとする。このｇ1 ，
ｇ2 ，…，ｇn ，…，ｇ(m-1)n，…，ｇmnに相当するぶ
れのない画像の出力をｆ1 ，ｆ2 ，…，ｆn ，…，ｆ
(m-1)n，…，ｆmnとすると、数１２の関係式のように表
される。
り、同図に於いて左上隅から順にｇ1 ，ｇ2 ，…，
ｇn ，…，ｇ(m-1)n，…，ｇmnとする。このｇ1 ，
ｇ2 ，…，ｇn ，…，ｇ(m-1)n，…，ｇmnに相当するぶ
れのない画像の出力をｆ1 ，ｆ2 ，…，ｆn ，…，ｆ
(m-1)n，…，ｆmnとすると、数１２の関係式のように表
される。
【００４１】
【数１２】 この関係式をベクトルで表現すると、数１３の関係式の
ようになる。
ようになる。
【００４２】
【数１３】 但し、数１４で表される関係式はｍｎ×ｍｎの行列であ
り、数１５及び数１６で表される関係式は、それぞれｍ
ｎ次の列ベクトルである。
り、数１５及び数１６で表される関係式は、それぞれｍ
ｎ次の列ベクトルである。
【００４３】
【数１４】
【００４４】
【数１５】
【００４５】
【数１６】 上記数１３の行列式を解くことにより、数１３の関係式
で表されるぶれのない画像が復元されたことになる。
で表されるぶれのない画像が復元されたことになる。
【００４６】図９は、この多元連立一次方程式によりぶ
れ画像の復元を行うぶれ画像復元装置の再生系のブロッ
ク構成図である。図１の第１の実施例とは、ＦＦＴ回路
２５、３０及び逆ＦＦＴ回路３２がなくなり、除算部３
１に代わって行列演算部３４が設けられている。この行
列演算部３４によって、上記数１２及び数１３の関係式
が演算される。その他の構成は図１のブロック構成図と
同じであるので、同一番号を付してその説明は省略す
る。
れ画像の復元を行うぶれ画像復元装置の再生系のブロッ
ク構成図である。図１の第１の実施例とは、ＦＦＴ回路
２５、３０及び逆ＦＦＴ回路３２がなくなり、除算部３
１に代わって行列演算部３４が設けられている。この行
列演算部３４によって、上記数１２及び数１３の関係式
が演算される。その他の構成は図１のブロック構成図と
同じであるので、同一番号を付してその説明は省略す
る。
【００４７】以上の説明は、銀塩フィルムで撮られた写
真のぶれ画像の復元であったが、電子カメラ、或いはビ
デオカメラの映像にもこの発明を適用できることはいう
までもない。
真のぶれ画像の復元であったが、電子カメラ、或いはビ
デオカメラの映像にもこの発明を適用できることはいう
までもない。
【００４８】
【発明の効果】以上のようにこの発明によれば、ぶれが
生じた写真、またはぶれが生じた映像から画像処理によ
りぶれを補正することのできるぶれ画像復元装置を提供
することができるので、高価で大掛かりなぶれ補正のカ
メラを持ち歩くこともなく現像所等で、ぶれ画像を復元
できるので、手軽で低価格のぶれ補正システムを作るこ
とができる。
生じた写真、またはぶれが生じた映像から画像処理によ
りぶれを補正することのできるぶれ画像復元装置を提供
することができるので、高価で大掛かりなぶれ補正のカ
メラを持ち歩くこともなく現像所等で、ぶれ画像を復元
できるので、手軽で低価格のぶれ補正システムを作るこ
とができる。
【図１】ぶれ画像復元装置の再生系のブロック構成図で
ある。
ある。
【図２】ぶれ位置（△ｘ，△ｙ）の度数を表す図であ
る。
る。
【図３】カメラへのぶれ検出手段の装着状態を示す斜視
図である。
図である。
【図４】カメラ本体１１が回転角θｘだけぶれた場合の
像のＸ−Ｚ平面上での移動状態を示す図である。
像のＸ−Ｚ平面上での移動状態を示す図である。
【図５】銀塩フィルムの上部に印刷された磁気テープに
ぶれ軌跡データを記録するぶれ画像復元装置の記録系を
示す概略的なブロック構成図である。
ぶれ軌跡データを記録するぶれ画像復元装置の記録系を
示す概略的なブロック構成図である。
【図６】フィルム面のぶれ情報が記録される位置を示し
た図である。
た図である。
【図７】この発明の他の実施例を示すもので、ぶれデー
タを模式的に表した図である。
タを模式的に表した図である。
【図８】この発明の他の実施例を示すもので、センサの
画素出力を表した図である。
画素出力を表した図である。
【図９】多元連立一次方程式によりぶれ画像の復元を行
うぶれ画像復元装置の再生系のブロック構成図である。
うぶれ画像復元装置の再生系のブロック構成図である。
１１…カメラ本体、１２…撮影レンズ、１３…ぶれ検出
手段、１６…ぶれ量検出部、１７…ぶれ軌跡データ記憶
部、１８…磁気記録部、１９ａ…記録用磁気ヘッド、１
９ｂ…再生用磁気ヘッド、２０…フィルム、２１…磁気
テープ、２２…再生回路、２３…ぶれ軌跡データ記憶
部、２４…ぶれ軌跡データ変換部、２５、３０…フーリ
エ変換（ＦＦＴ）回路、２６…ぶれ画像、２７…撮影レ
ンズ、２８…撮像素子、２９…画像メモリ、３１…除算
部、３２…逆フーリエ変換（逆ＦＦＴ）回路、３３…画
像表示部、３４…行列演算部。
手段、１６…ぶれ量検出部、１７…ぶれ軌跡データ記憶
部、１８…磁気記録部、１９ａ…記録用磁気ヘッド、１
９ｂ…再生用磁気ヘッド、２０…フィルム、２１…磁気
テープ、２２…再生回路、２３…ぶれ軌跡データ記憶
部、２４…ぶれ軌跡データ変換部、２５、３０…フーリ
エ変換（ＦＦＴ）回路、２６…ぶれ画像、２７…撮影レ
ンズ、２８…撮像素子、２９…画像メモリ、３１…除算
部、３２…逆フーリエ変換（逆ＦＦＴ）回路、３３…画
像表示部、３４…行列演算部。
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成５年５月２１日
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００３
【補正方法】変更
【補正内容】
【０００３】例えば、三宅洋一著：画像処理のすすめ、
写真工業、１０９−１１３、６／１９８７の論文には、
等速運動により生じたぶれ画像の復元の方法が記載され
ている。すなわち、被写体ｆ（ｘ，ｙ）がｘ方向にＴ秒
間等速度Ｖで運動すると仮定すると、フィルム上に記録
される画像ｇ（ｘ，ｙ）は、数１の関係式で表される。
写真工業、１０９−１１３、６／１９８７の論文には、
等速運動により生じたぶれ画像の復元の方法が記載され
ている。すなわち、被写体ｆ（ｘ，ｙ）がｘ方向にＴ秒
間等速度Ｖで運動すると仮定すると、フィルム上に記録
される画像ｇ（ｘ，ｙ）は、数１の関係式で表される。
Claims (1)
- 【請求項１】 被写体像を電気信号に変換する撮像手段
と、カメラの撮影動作中に於けるぶれ軌跡データを記憶
するぶれ軌跡データ記憶手段と、 上記電気信号と上記ぶれ軌跡データとによりぶれのない
画像を復元する復元手段とを具備することを特徴とする
ぶれ画像復元装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP04129105A JP3096521B2 (ja) | 1992-05-21 | 1992-05-21 | ぶれ画像復元装置 |
| US08/062,292 US5365303A (en) | 1992-05-21 | 1993-05-14 | Shake-free image restoration system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP04129105A JP3096521B2 (ja) | 1992-05-21 | 1992-05-21 | ぶれ画像復元装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH05323444A true JPH05323444A (ja) | 1993-12-07 |
| JP3096521B2 JP3096521B2 (ja) | 2000-10-10 |
Family
ID=15001197
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP04129105A Expired - Fee Related JP3096521B2 (ja) | 1992-05-21 | 1992-05-21 | ぶれ画像復元装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3096521B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5461440A (en) * | 1993-02-10 | 1995-10-24 | Olympus Optical Co., Ltd. | Photographing image correction system |
| US7593039B2 (en) | 2004-11-29 | 2009-09-22 | Seiko Epson Corporation | Image correcting method, image correcting apparatus, and storage medium having program stored thereon |
| US7675546B2 (en) | 2004-09-15 | 2010-03-09 | Nikon Corporation | Imaging device having function for correcting image shake of acquired image |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007043393A (ja) * | 2005-08-02 | 2007-02-15 | Matsushita Electric Ind Co Ltd | 画像処理装置、画像処理方法、画像処理プログラム及びプログラム記録媒体 |
-
1992
- 1992-05-21 JP JP04129105A patent/JP3096521B2/ja not_active Expired - Fee Related
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5461440A (en) * | 1993-02-10 | 1995-10-24 | Olympus Optical Co., Ltd. | Photographing image correction system |
| US7675546B2 (en) | 2004-09-15 | 2010-03-09 | Nikon Corporation | Imaging device having function for correcting image shake of acquired image |
| US7593039B2 (en) | 2004-11-29 | 2009-09-22 | Seiko Epson Corporation | Image correcting method, image correcting apparatus, and storage medium having program stored thereon |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3096521B2 (ja) | 2000-10-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11924551B2 (en) | Method and apparatus for correcting blur in all or part of an image | |
| CN110035222B (zh) | 半导体装置和电子设备 | |
| US5365303A (en) | Shake-free image restoration system | |
| EP3417606B1 (en) | A method of stabilizing a sequence of images | |
| JP2018189730A (ja) | 像ブレ補正装置及びその制御方法、プログラム、記憶媒体 | |
| US20070098383A1 (en) | Motion blur reduction and compensation | |
| JPH05323444A (ja) | ぶれ画像復元装置 | |
| JP3152750B2 (ja) | 撮影装置ならびにぶれ画像復元装置 | |
| JP4306438B2 (ja) | 撮像装置 | |
| JPH06118468A (ja) | 画像修復装置 | |
| US7864214B2 (en) | Signal processing device | |
| JPH11155096A (ja) | 撮像装置、コンピュータ読み取り可能な記憶媒体及び画像処理装置 | |
| JP2002051252A (ja) | 画像撮影記録装置 | |
| JPH06162187A (ja) | ボケ画像修復装置 | |
| JPH01109970A (ja) | 動画ぶれ除去装置 | |
| JPH04296176A (ja) | 手振れ補正回路及びその方法 | |
| JPH03159482A (ja) | 画像処理装置 | |
| JPH04336776A (ja) | カメラシステム | |
| JPH03172082A (ja) | 画像処理方法 | |
| JPH03181281A (ja) | 画像処理方法 | |
| JPH06245134A (ja) | 撮像装置 | |
| US20070098382A1 (en) | Exposure boundary selection for motion blur compensation | |
| JP2000187273A (ja) | 画像形成方法及び撮影ユニット | |
| JPH04366929A (ja) | 防振カメラ |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20000725 |
|
| LAPS | Cancellation because of no payment of annual fees |