JP2004070421A - 画像処理システム、画像処理方法、撮像装置、及び画像処理装置 - Google Patents
画像処理システム、画像処理方法、撮像装置、及び画像処理装置 Download PDFInfo
- Publication number
- JP2004070421A JP2004070421A JP2002225057A JP2002225057A JP2004070421A JP 2004070421 A JP2004070421 A JP 2004070421A JP 2002225057 A JP2002225057 A JP 2002225057A JP 2002225057 A JP2002225057 A JP 2002225057A JP 2004070421 A JP2004070421 A JP 2004070421A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image processing
- imaging
- unit
- captured image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 109
- 238000012545 processing Methods 0.000 title claims abstract description 91
- 238000000034 method Methods 0.000 title description 2
- 238000001514 detection method Methods 0.000 claims abstract description 60
- 238000012937 correction Methods 0.000 claims description 76
- 238000003672 processing method Methods 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 6
- 230000006870 function Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 12
- 230000006837 decompression Effects 0.000 description 8
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000000875 corresponding effect Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 3
- 230000001276 controlling effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000005375 photometry Methods 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000003707 image sharpening Methods 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
【課題】撮像した画像における手ぶれを、高い精度で検出する画像処理システムを提供する。
【解決手段】被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部とを有する撮像装置と、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部を有する画像処理装置とを備える。
【選択図】 図２
【解決手段】被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部とを有する撮像装置と、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部を有する画像処理装置とを備える。
【選択図】 図２
Description
【０００１】
【発明の属する技術分野】
本発明は、画像処理システム、画像処理方法、撮像装置、及び画像処理装置に関する。特に本発明は、被写体の画像を撮像する撮像装置と、当該画像に対して画像処理を行う画像処理装置とを備える画像処理システムに関する。
【０００２】
【従来の技術】
従来、手ぶれ検出手段を備えるデジタルカメラが知られている。例えば、特開２０００−８０６１号公報に開示されたデジタルカメラは、手ぶれ検出手段が出力する手ぶれ情報に基づいて、適切にプリントを行えるかどうかを判断し、適切にプリントを行えないと判断された場合に警告を行う。
【０００３】
【発明が解決しようとする課題】
従来の手ぶれ検出手段は、加速センサ等の手ぶれ検出用センサ、または、撮像部からの画像出力情報の監視により手ぶれ量を検出していた。しかし、センサを用いる方法では、センサによる検知量と画像のぶれの量との相関を十分に対応付けることができない場合があり、高い精度での手ぶれ検出ができない場合があった。また、従来の、画像出力情報の監視による方法では、例えば、画像の不鮮明さが手ぶれによるものなのか判断できない場合があり、高い精度での手ぶれ検出は困難であった。
【０００４】
そこで本発明は、上記の課題を解決することのできる画像処理システム、画像処理方法、撮像装置、及び画像処理装置を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。
【０００５】
【課題を解決するための手段】
即ち、本発明の第１の形態によると、被写体の画像を撮像する撮像装置と、当該画像に対して画像処理を行う画像処理装置とを備える画像処理システムであって、撮像装置は、被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部とを有し、画像処理装置は、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部を有する。画像処理装置は、検出部が手ぶれを検出した場合に撮像画像を補正する補正部を更に有してよい。
【０００６】
補正部は、撮像画像に対するシャープネス補正を行ってよい。補正部は、シャープネス補正として、撮像画像のシャープネスを上げる補正を行ってよい。補正部は、撮像画像を複数の領域に分割し、複数の領域のうち、一の領域に対するシャープネス補正を行ってよい。補正部は、当該一の領域に対し、第１補正量でシャープネス補正を行い、複数の領域のうち、他の領域に対し、第１補正量と異なる第２補正量でシャープネス補正を行ってよい。
【０００７】
画像処理装置は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する方向検出部を更に有し、補正部は、手ぶれの方向に基づいて撮像画像に対するシャープネス補正を行ってよい。また、画像処理装置は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する方向検出部を更に有し、補正部は、手ぶれの方向と略直交する方向のエッジを強調する補正を行ってもよい。
【０００８】
検出部は、予備画像の空間周波数成分のピーク成分、及び撮像画像の空間周波数成分のピーク成分に基づいて、手ぶれを検出してよい。検出部は、予備画像における予め定められた領域の空間周波数成分のピーク成分、及び撮像画像における予め定められた領域に対応する領域の空間周波数成分のピーク成分に基づいて、手ぶれを検出してもよい。検出部は、予備画像における被写体の輪郭、及び撮像画像における被写体の輪郭に基づいて、手ぶれを検出してもよい。画像処理装置は、検出部が手ぶれを検出した場合に、ユーザに対する警告を行う警告部を更に有してよい。
【０００９】
本発明の第２の形態によると、被写体の画像を撮像する撮像段階と、当該画像に対して画像処理を行う画像処理段階とを備える画像処理方法であって、撮像段階は、被写体の撮像を指示する第１指示信号を生成する第１撮像指示段階と、第１指示信号に応じて、被写体の画像である予備画像を取得する第１取得段階と、被写体の撮像を指示する第２指示信号を生成する第２撮像指示段階と、第２指示信号に応じて、被写体の画像である撮像画像を取得する第２取得段階とを有し、画像処理段階は、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出段階を有する。
【００１０】
本発明の第３の形態によると、被写体の画像を撮像する撮像装置であって、被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部と、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部とを備える。
【００１１】
本発明の第４の形態によると、撮像装置によって撮像された撮像画像に対して画像処理を行う画像処理装置であって、撮像装置によって撮像された、撮像画像、及び撮像画像に対応する予備画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部を備える。
【００１２】
なお上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションも又発明となりうる。
【００１３】
【発明の実施の形態】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態はクレームに係る発明を限定するものではなく、又実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００１４】
図１は、本発明の一実施形態に係る画像処理システム１８の構成の一例を示す。画像処理システム１８は、デジタルカメラ１０、プリンタ１２、及びパーソナルコンピュータ１４を備える。デジタルカメラ１０、プリンタ１２、及びパーソナルコンピュータ１４は、互いにデータ伝送路を介してデータの送受信を行う。データ伝送路は、例えば、ＩＥＥＥ１３９４、ＵＳＢ等の有線通信媒体や、ＩｒＤＡ、ブルートゥース、無線ＬＡＮ等の無線通信媒体である。データ伝送路は、有線通信媒体及び無線通信媒体を複数用いたネットワーク網、例えばインターネット網であってもよい。また、デジタルカメラ１０、プリンタ１２、及びパーソナルコンピュータ１４間のデータの受け渡しは、リムーバブルメディア等の記録媒体を用いてもよい。
【００１５】
デジタルカメラ１０は、被写体の画像を撮像し、撮像した画像データをプリンタ１２又はパーソナルコンピュータ１４に送信する。本実施形態において、デジタルカメラ１０は、撮像した画像データである撮像画像、及び撮像画像に対応する予備画像をプリンタ１２又はパーソナルコンピュータ１４に送信する。プリンタ１２又はパーソナルコンピュータ１４は、受信した画像データに所定の画像処理を施して出力する。本実施形態において、プリンタ１２又はパーソナルコンピュータ１４は、撮像画像及び予備画像に基づいて、撮像画像の取得時における手ぶれを検出する。プリンタ１２又はパーソナルコンピュータ１４は、当該手ぶれを検出した場合、撮像画像を補正する。プリンタ１２又はパーソナルコンピュータ１４は、当該補正された撮像画像を出力する。即ち、プリンタ１２は、当該補正された撮像画像を印刷して出力し、パーソナルコンピュータ１４は、当該補正された撮像画像をモニタに出力する。また、パーソナルコンピュータ１４は、デジタルカメラ１０又はプリンタ１２に設定情報を送信し、デジタルカメラ１０又はプリンタ１２の設定情報を変更する。
【００１６】
なお、デジタルカメラ１０は、撮像装置の一例であり、プリンタ１２及びパーソナルコンピュータ１４は、画像処理装置の一例である。また、撮像装置は、静止画を撮影するデジタルスチルカメラであってもよく、動画を撮影するデジタルビデオカメラであってもよい。また、画像処理装置は、デジタルカメラで撮影した画像の画質等を自動調整して印刷するラボ用印刷装置であってもよい。
【００１７】
図２は、本実施形態に係るデジタルカメラ１０及びプリンタ１２の構成の一例を示す。デジタルカメラ１０は、被写体の画像を撮像する撮像装置の一例である。デジタルカメラ１０は、撮像指示部３０２及び撮像部２０を有する。撮像指示部３０２は、被写体の撮像を指示する第１指示信号及び第２指示信号を生成する。撮像部２０は、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する。撮像部２０は、予備画像及び撮像画像を、それぞれ異なるシャッタスピードで取得してよい。また、撮像部２０は、予備画像及び撮像画像を、それぞれ異なる絞りで取得してよい。本実施形態において、撮像部２０は、予め定められたシャッタスピード及び絞りで予備画像を取得する。また、撮像部２０は、ＡＥ（自動露光）に基づくシャッタスピード及び絞りで撮像画像を取得する。別の実施例において、撮像部２０は、第１指示信号に応じて撮像画像を取得し、第２指示信号に応じて予備画像を取得してよい。デジタルカメラ１０は、予備画像及び撮像画像を互いに関連づけて格納する格納部を更に備えてもよい。デジタルカメラ１０は、予備画像及び撮像画像をプリンタ１２に供給する。
【００１８】
プリンタ１２は、撮像画像に対して画像処理を行う画像処理装置の一例である。プリンタ１２は、検出部３０４、補正部３０６、方向検出部３０８、出力部３１０、及び警告部３１２を有する。
【００１９】
検出部３０４は、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する。補正部３０６は、検出部３０４が手ぶれを検出した場合に撮像画像を補正する。方向検出部３０８は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する。
【００２０】
出力部３１０は、補正部３０６により補正された撮像画像を出力する。本実施形態において、出力部３１０は、当該補正された撮像画像を印刷出力する。別の実施例において、出力部３１０は、当該補正された撮像画像をモニターに出力してもよい。警告部３１２は、検出部３０４が手ぶれを検出した場合に、ユーザに対する警告を行う。警告部３１２は、当該手ぶれが検出された撮像画像を補正部３０６に補正させるか否かについてのユーザの指示を受け取ってよい。警告部３１２は、当該ユーザの指示に基づいて補正部３０６に撮像画像を補正させてよい。警告部３１２は、当該手ぶれが検出された撮像画像を出力部３１０に印刷させるか否かについてのユーザの指示を受け取ってもよい。
【００２１】
以下、検出部３０４、方向検出部３０８、及び補正部３０６について更に詳しく説明する。本実施形態において、検出部３０４は、予備画像の空間周波数成分のピーク成分、及び撮像画像の空間周波数成分のピーク成分に基づいて、手ぶれを検出する。例えば、検出部３０４は、予備画像においてピーク成分となる空間周波数と、予備画像においてピーク成分となる空間周波数とが予め定められた閾値以上異なる場合に、撮像画像取得時に手ぶれが発生したと判断してよい。
【００２２】
検出部３０４は、予備画像における予め定められた空間周波数成分の強度（パワー）、及び撮像画像における当該予め定められた空間周波数成分の強度に基づいて、手ぶれを検出してもよい。また、検出部３０４は、予備画像における予め定められた領域の空間周波数成分のピーク成分、及び撮像画像における当該予め定められた領域に対応する領域の空間周波数成分のピーク成分に基づいて、手ぶれを検出してもよい。検出部３０４は、予備画像における予め定められた複数の領域、及び撮像画像における当該複数の領域に対応する複数の領域をそれぞれ抽出し、それぞれの領域の空間周波数成分のピーク成分に基づいて、手ぶれを検出してもよい。
【００２３】
別の実施例において、検出部３０４は、予備画像における被写体の輪郭、及び撮像画像における被写体の輪郭に基づいて、手ぶれを検出してもよい。検出部３０４は、予備画像における被写体の位置、及び撮像画像における当該被写体の位置に基づいて、手ぶれを検出してもよい。
【００２４】
方向検出部３０８は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する。方向検出部３０８は、例えば、予備画像及び撮像画像において縦エッジ強度及び横エッジ強度をそれぞれ算出し、当該算出の結果に基づいて手ぶれの方向を検出してよい。
【００２５】
補正部３０６は、検出部３０４が手ぶれを検出した場合に撮像画像を補正する。本実施形態において、補正部３０６は、撮像画像に対するシャープネス補正を行う。補正部３０６は、当該シャープネス補正として、撮像画像のシャープネスを上げる補正を行う。補正部３０６は、撮像画像を複数の領域に分割し、当該複数の領域のうち、一の領域に対するシャープネス補正を行ってよい。また、補正部３０６は、当該一の領域に対し、第１補正量でシャープネス補正を行い、複数の領域のうち、他の領域に対し、当該第１補正量と異なる第２補正量でシャープネス補正を行ってもよい。補正部３０６は、方向検出部３０８が検出する手ぶれの方向に基づいて撮像画像に対するシャープネス補正を行うのが好ましい。
【００２６】
補正部３０６は、シャープネス補正として、例えば、処理対象の画像から当該画像の２次微分画像（ラプラシアン画像）を引くアンシャープマスキング補正を行ってよい。この場合、撮像画像におけるエッジ部分の濃度変化を強調し、撮像画像を鮮鋭化することができる。補正部３０６は、シャープネス補正として、画像のエッジ部分に対するラプラシアン画像のみを抽出する選択的画像鮮鋭化補正を行ってもよい。この場合、ノイズの影響を抑えて撮像画像のエッジ部分を選択的に鮮鋭化することができる。
【００２７】
補正部３０６は、撮像画像に対するエッジ強調補正を行ってもよい。この場合、補正部３０６は、方向検出部３０８が検出する手ぶれの方向と略直交する方向のエッジを強調する補正を行うのが好ましい。
【００２８】
本実施形態によれば、予備画像及び撮像画像に基づいて手ぶれを検出することにより、高い精度で手ぶれを検出することができる。また、本実施形態によれば、手ぶれが検出された撮像画像を補正することにより、適切な印刷出力を得ることができる。
【００２９】
別の実施例においては、デジタルカメラ１０が、検出部３０４を有してもよい。デジタルカメラ１０は、補正部３０６、方向検出部３０８、及び警告部３１２を更に有してもよい。この場合、デジタルカメラ１０は、補正部３０６が補正した撮像画像をプリンタ１２に供給するのが好ましい。検出部３０４は、撮像部２０が撮像画像を取得する度に、当該撮像画像における手ぶれを検出するのが好ましい。
【００３０】
図３は、本実施形態に係る画像処理システム１８による画像処理方法の一例を示すフローチャートである。当該画像処理方法は、被写体の画像を撮像する撮像段階と、当該画像に対して画像処理を行う画像処理段階を備える。撮像段階は、第１撮像指示段階Ｓ１０２、第１取得段階Ｓ１０４、第２撮像指示段階Ｓ１０６、及び第２取得段階Ｓ１０８とを有する。画像処理段階は、検出段階Ｓ１１０、補正段階Ｓ１１２、及び出力段階Ｓ１１４を有する。
【００３１】
本実施形態において、画像処理システム１８は、まず、第１撮像指示段階Ｓ１０２で、被写体の撮像を指示する第１指示信号を生成する。第１撮像指示段階Ｓ１０２は、図２に関連して説明した撮像指示部３０２を用いて行ってよい。
【００３２】
次に、第１取得段階Ｓ１０４で、第１指示信号に応じて、被写体の画像である予備画像を取得する。第１取得段階Ｓ１０４は、図２に関連して説明した撮像部２０を用いて行ってよい。次に、第２撮像指示段階Ｓ１０６で、被写体の撮像を指示する第２指示信号を生成する。第２撮像指示段階Ｓ１０６は、撮像指示部３０２を用いて行ってよい。次に、第２取得段階Ｓ１０８で、第２指示信号に応じて、被写体の画像である撮像画像を取得する。第２取得段階Ｓ１０８は、撮像部２０を用いて行ってよい。
【００３３】
次に、検出段階Ｓ１１０で、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する。検出段階Ｓ１１０は、図２に関連して説明した検出部３０４を用いて行ってよい。検出段階Ｓ１１０において手ぶれが検出された場合、補正段階Ｓ１１２で、撮像画像を補正する。補正段階Ｓ１１２は、図２に関連して説明した補正部３０６を用いて行ってよい。次に、出力段階Ｓ１１４で、当該補正された撮像画像を印刷出力し、画像処理システム１８は動作を終了する。出力段階Ｓ１１４は、図２に関連して説明した出力部３１０を用いて行ってよい。一方、検出段階Ｓ１１０で、手ぶれが検出されない場合、出力段階Ｓ１１４で撮像画像を出力し、画像処理システム１８は動作を終了してよい。
【００３４】
図４は、本実施形態に係るデジタルカメラ１０の詳細な構成の一例を示す。デジタルカメラ１０は、撮像部２０、撮像制御部４０、システム制御部６０、表示部１００、操作部１１０、記憶部１２０、外部接続部１３０、及び画像処理部１４０を備える。撮像部２０は、図２に関連して説明した撮像部２０と同一又は同様の機能を有する。操作部１１０は、図２に関連して説明した撮像指示部３０２と同一又は同様の機能を有する。画像処理部１４０は、図２に関連して説明した検出部３０４、補正部３０６、又は方向検出部３０８と同一又は同様の機能を有してもよい。デジタルカメラ１０は、図２に関連して説明した出力部３１０又は警告部３１２を更に備えてもよい。
【００３５】
撮像部２０は、撮影レンズ部２２、絞り２４、シャッタ２６、光学ＬＰＦ２８、ＣＣＤ３０、撮像信号処理部３２、ファインダ３４、及びストロボ３６を有する。
【００３６】
撮影レンズ部２２は、被写体像を取り込んで処理を施す。撮影レンズ部２２は、フォーカスレンズやズームレンズ等を含み、被写体像をＣＣＤ３０の受光面上に結像する。絞り２４は、撮影レンズ部２２を通過した光を絞り、光学ＬＰＦ２８は、絞り２４を通過した光に含まれる所定の波長より長い波長成分を通過させる。ＣＣＤ３０の各センサエレメントは、結像した被写体像の光量に応じ、電荷を蓄積する（以下その電荷を「蓄積電荷」という）。
【００３７】
シャッタ２６は、機械式シャッタであり、撮影レンズ部２２を通過した光をＣＣＤ３０に露光するか否かを制御する。また、デジタルカメラ１０は、シャッタ２６に代えて電子シャッタ機能を有してもよい。電子シャッタ機能を実現するために、ＣＣＤ３０のセンサエレメントは、シャッタゲート及びシャッタドレインを有する。シャッタゲートを駆動することにより、蓄積電荷がシャッタドレインに掃き出される。シャッタゲートの制御により、各センサエレメントに電荷を蓄積する時間、即ちシャッタスピードを制御できる。ＣＣＤ３０において、蓄積電荷は、リードゲートパルスによってシフトレジスタに読み出され、レジスタ転送パルスによって電圧信号として順次読み出される。
【００３８】
撮像信号処理部３２は、ＣＣＤ３０から出力される被写体像を示す電圧信号、即ちアナログ信号をＲ、Ｇ、Ｂ成分に色分解する。そして、撮像信号処理部３２は、Ｒ、Ｇ、Ｂ成分を調整することにより、被写体像のホワイトバランスを調整する。撮像信号処理部３２は、被写体像のガンマ補正を行う。そして、撮像信号処理部３２は、Ｒ、Ｇ、Ｂ成分に分解されたアナログ信号をＡ／Ｄ変換し、その結果得られた被写体像のデジタルの画像データ（以下「デジタル画像データ」という）をシステム制御部６０へ出力する。
【００３９】
ファインダ３４は、表示手段を有してもよく、後述のメインＣＰＵ６２等からの各種情報をファインダ３４内に表示してもよい。ストロボ３６は、コンデンサに蓄えられたエネルギを放電する放電管３７を有し、放電管３７にエネルギが供給されたとき放電管３７が発光することで機能する。本実施形態において、撮像部２０は、操作部１１０から受け取る第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する。
【００４０】
撮像制御部４０は、ズーム駆動部４２、フォーカス駆動部４４、絞り駆動部４６、シャッタ駆動部４８、それらを制御する撮像系ＣＰＵ５０、測距センサ５２、及び測光センサ５４を有する。ズーム駆動部４２、フォーカス駆動部４４、絞り駆動部４６、及びシャッタ駆動部４８は、それぞれステッピングモータ等の駆動手段を有し、撮像部２０に含まれる機構部材を駆動する。後述のレリーズスイッチ１１４の押下に応じ、測距センサ５２は被写体までの距離を測定し、測光センサ５４は被写体輝度を測定する。そして、測距センサ５２及び測光センサ５４は、測定された被写体までの距離のデータ（以下単に「測距データ」という）及び被写体輝度のデータ（以下単に「測光データ」という）を、それぞれ撮像系ＣＰＵ５０に供給する。
【００４１】
撮像系ＣＰＵ５０は、ユーザから指示されたズーム倍率等の撮影情報に基づき、ズーム駆動部４２及びフォーカス駆動部４４を制御して撮影レンズ部２２のズーム倍率とピントの調整を行う。また、撮像系ＣＰＵ５０は、測距センサ５２から受け取った測距データに基づいて、ズーム駆動部４２及びフォーカス駆動部４４を制御してズーム倍率及びピントの調整を行ってもよい。
【００４２】
撮像系ＣＰＵ５０は、測光センサ５４から受け取った測光データに基づいて、絞り値及びシャッタスピードを決定する。決定された値に従い、絞り駆動部４６及びシャッタ駆動部４８は、絞り２４の絞り量及びシャッタ２６の開閉をそれぞれ制御する。
【００４３】
また、撮像系ＣＰＵ５０は、測光センサ５４から受け取った測光データに基づいて、ストロボ３６の発光を制御し、同時に絞り２４の絞り量を調整する。ユーザが映像の取込を指示したとき、ＣＣＤ３０は電荷蓄積を開始し、測光データから計算されたシャッタ時間の経過後、蓄積電荷を撮像信号処理部３２へ出力する。
【００４４】
システム制御部６０は、メインＣＰＵ６２、キャラクタ生成部８４、タイマ８６、及びクロック発生器８８を有する。メインＣＰＵ６２は、デジタルカメラ１０全体、特にシステム制御部６０を制御する。メインＣＰＵ６２は、シリアル通信等により、撮像系ＣＰＵ５０との間で必要な情報の受け渡しをする。
【００４５】
クロック発生器８８は、メインＣＰＵ６２の動作クロックを発生し、メインＣＰＵ６２に供給する。また、クロック発生器８８は、撮像系ＣＰＵ５０及び表示部１００の動作クロックを発生する。クロック発生器８８は、メインＣＰＵ６２、撮像系ＣＰＵ５０、及び表示部１００に対してそれぞれ異なる周波数の動作クロックを供給してもよい。
【００４６】
キャラクタ生成部８４は、撮影日時、タイトル等の撮影画像に合成する文字情報や、図形情報を生成する。タイマ８６は、例えば電池等でバックアップされ、常に時間をカウントし、当該カウント値に基づいて撮影画像の撮影日時に関する情報等の時刻情報をメインＣＰＵ６２に供給する。タイマ８６は、蓄電池から供給された電力により、デジタルカメラ本体の電源がオフである場合にも時間をカウントするのが望ましい。また、キャラクタ生成部８４及びタイマ８６は、メインＣＰＵ６２に併設されることが好ましい。
【００４７】
記憶部１２０は、メモリ制御部６４、不揮発性メモリ６６、及びメインメモリ６８を有する。メモリ制御部６４は、不揮発性メモリ６６とメインメモリ６８とを制御する。不揮発性メモリ６６は、ＥＥＰＲＯＭ（電気的消去及びプログラム可能なＲＯＭ）やＦＬＡＳＨメモリ等で構成され、ユーザによる設定情報や出荷時の調整値等、デジタルカメラ１０の電源がオフの間も保持すべきデータを格納する。不揮発性メモリ６６は、メインＣＰＵ６２のブートプログラムやシステムプログラム等を格納してもよい。
【００４８】
メインメモリ６８は、ＤＲＡＭのように比較的安価で容量の大きなメモリで構成されることが好ましい。メインメモリ６８は、撮像部２０から出力されたデータを格納するフレームメモリとしての機能、各種プログラムをロードするシステムメモリとしての機能、その他ワークエリアとしての機能を有する。不揮発性メモリ６６及びメインメモリ６８は、システム制御部６０内外の各部とバス８２を介してデータのやりとりを行う。不揮発性メモリ６６は、デジタル画像データを更に格納してもよい。
【００４９】
画像処理部１４０は、ＹＣ処理部７０、エンコーダ７２、及び圧縮伸張処理部７８を有する。また、外部接続部１３０は、オプション装置制御部７４、及び通信Ｉ／Ｆ部８０を有する。
【００５０】
ＹＣ処理部７０は、デジタル画像データにＹＣ変換を施し、輝度信号Ｙ、並びに色差（クロマ）信号Ｂ−Ｙ及びＲ−Ｙを生成する。メインメモリ６８は、メモリ制御部６４の制御に基づいて、輝度信号及び色差信号を格納する。
【００５１】
圧縮伸張処理部７８は、メインメモリ６８から順次輝度信号と色差信号を読み出して圧縮する。そして、オプション装置制御部７４は、圧縮されたデジタル画像データ（以下単に「圧縮データ」という）をオプション装置７６の一例であるメモリカードへ書き込む。当該メモリカードは、予備画像及び撮像画像を互いに関連付けて記憶してよい。
【００５２】
エンコーダ７２は、輝度信号と色差信号を、ビデオ信号（ＮＴＳＣやＰＡＬ信号）に変換して端子９０から出力する。オプション装置７６に記録された圧縮データからビデオ信号を生成する場合、圧縮データは、まずオプション装置制御部７４を介して圧縮伸張処理部７８へ与えられる。続いて、圧縮伸張処理部７８で必要な伸張処理が施されたデータはエンコーダ７２によってビデオ信号へ変換される。
【００５３】
オプション装置制御部７４は、オプション装置７６が許容する信号仕様及びバス８２のバス仕様に従い、バス８２とオプション装置７６との間で必要な信号の生成、論理変換、及び／又は電圧変換等を行う。デジタルカメラ１０は、オプション装置７６として前述のメモリカードの他に、例えばＰＣＭＣＩＡ準拠の標準的なＩ／Ｏカードをサポートしてもよい。その場合、オプション装置制御部７４は、ＰＣＭＣＩＡ用バス制御ＬＳＩ等で構成してもよい。
【００５４】
通信Ｉ／Ｆ部８０は、デジタルカメラ１０がサポートする通信仕様、たとえばＵＳＢ、ＲＳ−２３２Ｃ、イーサネット（登録商標）等の仕様に応じたプロトコル変換等の制御を行う。通信Ｉ／Ｆ部８０は、圧縮データ又はデジタル画像データを、端子９２を介してネットワークを含む外部機器に出力してよい。通信Ｉ／Ｆ部８０は、必要に応じてドライバＩＣを含み、外部機器と端子９２を介して通信する。通信Ｉ／Ｆ部８０は、例えばプリンタ、カラオケ機、ゲーム機等の外部機器との間で独自のインターフェースによるデータ授受を行う構成としてもよい。
【００５５】
表示部１００は、ＬＣＤモニタ１０２、ＬＣＤパネル１０４、モニタドライバ１０６、及びパネルドライバ１０８を有する。モニタドライバ１０６は、ＬＣＤモニタ１０２を制御する。また、パネルドライバ１０８は、ＬＣＤパネル１０４を制御する。ＬＣＤモニタ１０２は、例えば２インチ程度の大きさでカメラ背面に設けられ、現在の撮影や再生のモード、撮影や再生のズーム倍率、電池残量、日時、モード設定のための画面、被写体画像等を表示する。ＬＣＤパネル１０４は例えば小さな白黒ＬＣＤでカメラ上面に設けられ、画質（ＦＩＮＥ／ＮＯＲＭＡＬ／ＢＡＳＩＣ等）、ストロボ発光／発光禁止、標準撮影可能枚数、画素数、電池容量／残量等の情報を表示する。
【００５６】
操作部１１０は、パワースイッチ１１２、レリーズスイッチ１１４、機能設定部１１６、及びズームスイッチ１１８を有する。パワースイッチ１１２は、ユーザの指示に基づいてデジタルカメラ１０の電源をオン／オフする。レリーズスイッチ１１４は、半押しと全押しの二段階押し込み構造を有する。一例として、レリーズスイッチ１１４が半押しされることにより、撮像制御部４０は、自動焦点調整及び自動露出調整を行い、全押しされることにより、撮像部２０は、被写体像を取り込む。レリーズスイッチ１１４は、図２に関連して説明した撮像指示部３０２と同一又は同様の機能を有してよい。レリーズスイッチ１１４は、半押しされることにより、第１指示信号を生成し、全押しされることにより第２指示信号を生成してよい。
【００５７】
機能設定部１１６は、例えば回転式のモードダイヤルや十字キー等であって、「ファイルフォーマット」、「特殊効果」、「印画」、「決定／保存」、「表示切換」等の設定を受け付ける。ズームスイッチ１１８は、撮像部２０が取得する被写体像のズーム倍率の設定を受け付ける。
【００５８】
以上の構成による主な動作は以下のとおりである。まずパワースイッチ１１２が押下され、デジタルカメラ１０の各部に電力が供給される。メインＣＰＵ６２は、機能設定部１１６の状態を読み込むことで、デジタルカメラ１０が撮影モードにあるか再生モードにあるかを判断する。
【００５９】
デジタルカメラ１０が撮影モードの場合、メインＣＰＵ６２は、レリーズスイッチ１１４の半押し状態を監視する。レリーズスイッチ１１４の半押し状態が検出されたとき、撮像系ＣＰＵ５０は、測光センサ５４及び測距センサ５２からそれぞれ測光データと測距データを得る。撮像制御部４０は、撮像系ＣＰＵ５０が得た測光データ及び測距データに基づいて、撮像部２０のピント、絞り等を調整する。調整が完了すると、ＬＣＤモニタは、「スタンバイ」等の文字を表示してユーザにその旨を伝える。本実施形態において、レリーズスイッチ１１４の半押し状態が検出されたとき、レリーズスイッチ１１４は、第１指示信号を生成し、撮像部２０は予備画像を取得する。予備画像は一旦メインメモリ６８へ格納され、この後ＹＣ処理部７０と圧縮伸張処理部７８で処理され、オプション装置制御部７４を経由してオプション装置７６へ記録される。
【００６０】
続いて、メインＣＰＵ６２は、レリーズスイッチ１１４の全押し状態を監視する。レリーズスイッチ１１４の全押し状態が検出されたとき、所定のシャッタ時間をおいてシャッタ２６が閉じられ、ＣＣＤ３０の蓄積電荷が撮像信号処理部３２へ掃き出される。撮像信号処理部３２による処理の結果生成されたデジタル画像データはバス８２へ出力される。本実施形態において、レリーズスイッチ１１４の全押し状態が検出されたとき、レリーズスイッチ１１４は、第２指示信号を生成し、撮像部２０は当該デジタル画像データである撮像画像を取得する。デジタル画像データは一旦メインメモリ６８へ格納され、この後ＹＣ処理部７０と圧縮伸張処理部７８で処理され、オプション装置制御部７４を経由してオプション装置７６へ記録される。記録されたデジタル画像データに基づく撮影画像は、フリーズされた状態でしばらくＬＣＤモニタ１０２に表示され、ユーザは撮影画像を確認することができる。以上で一連の撮影動作が完了する。
【００６１】
一方、デジタルカメラ１０が再生モードの場合、メインＣＰＵ６２は、メインメモリ６８、不揮発性メモリ６６、及び／又はオプション装置７６から撮影した撮影画像を読み出し、これを表示部１００のＬＣＤモニタ１０２へ表示する。
【００６２】
この状態でユーザが機能設定部１１６にて「順送り」、「逆送り」を指示すると、メインＣＰＵ６２は、メインメモリ６８、不揮発性メモリ６６、及び／又はオプション装置７６が格納した他の撮影画像を読み出し、これを表示部１００のＬＣＤモニタ１０２へ表示する。
【００６３】
以上、本発明を実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。上記実施形態に、多様な変更または改良を加えることができる。そのような変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【００６４】
【発明の効果】
上記説明から明らかなように、本発明によれば撮像した画像における手ぶれを、高い精度で検出することができる。
【図面の簡単な説明】
【図１】本発明の一実施形態に係る画像処理システム１８の構成の一例を示す図である。
【図２】本実施形態に係るデジタルカメラ１０及びプリンタ１２の構成の一例を示す図である。
【図３】本実施形態に係る画像処理システム１８の動作の一例を示すフローチャートである。
【図４】本実施形態に係るデジタルカメラ１０の詳細な構成の一例を示す図である。
【符号の説明】
１０ デジタルカメラ
１２ プリンタ
１４ パーソナルコンピュータ
１８ 画像処理システム
２０ 撮像部
２２ 撮影レンズ部
２４ 絞り
２６ シャッタ
２８ 光学ＬＰＦ
３０ ＣＣＤ
３２ 撮像信号処理部
３４ ファインダ
３６ ストロボ
３７ 放電管
４０ 撮像制御部
４２ ズーム駆動部
４４ フォーカス駆動部
４６ 絞り駆動部
４８ シャッタ駆動部
５０ 撮像系ＣＰＵ
５２ 測距センサ
５４ 測光センサ
６０ システム制御部
６２ メインＣＰＵ
６４ メモリ制御部
６６ 不揮発性メモリ
６８ メインメモリ
７０ ＹＣ処理部
７２ エンコーダ
７４ オプション装置制御部
７６ オプション装置
７８ 圧縮伸張処理部
８０ 通信Ｉ／Ｆ部
８２ バス
８４ キャラクタ生成部
８６ タイマ
８８ クロック発生器
９０ 端子
９２ 端子
１００ 表示部
１０２ ＬＣＤモニタ
１０４ ＬＣＤパネル
１０６ モニタドライバ
１０８ パネルドライバ
１１０ 操作部
１１２ パワースイッチ
１１４ レリーズスイッチ
１１６ 機能設定部
１１８ ズームスイッチ
１２０ 記憶部
１３０ 外部接続部
１４０ 画像処理部
３０２ 撮像指示部
３０４ 検出部
３０６ 補正部
３０８ 方向検出部
３１０ 出力部
３１２ 警告部
【発明の属する技術分野】
本発明は、画像処理システム、画像処理方法、撮像装置、及び画像処理装置に関する。特に本発明は、被写体の画像を撮像する撮像装置と、当該画像に対して画像処理を行う画像処理装置とを備える画像処理システムに関する。
【０００２】
【従来の技術】
従来、手ぶれ検出手段を備えるデジタルカメラが知られている。例えば、特開２０００−８０６１号公報に開示されたデジタルカメラは、手ぶれ検出手段が出力する手ぶれ情報に基づいて、適切にプリントを行えるかどうかを判断し、適切にプリントを行えないと判断された場合に警告を行う。
【０００３】
【発明が解決しようとする課題】
従来の手ぶれ検出手段は、加速センサ等の手ぶれ検出用センサ、または、撮像部からの画像出力情報の監視により手ぶれ量を検出していた。しかし、センサを用いる方法では、センサによる検知量と画像のぶれの量との相関を十分に対応付けることができない場合があり、高い精度での手ぶれ検出ができない場合があった。また、従来の、画像出力情報の監視による方法では、例えば、画像の不鮮明さが手ぶれによるものなのか判断できない場合があり、高い精度での手ぶれ検出は困難であった。
【０００４】
そこで本発明は、上記の課題を解決することのできる画像処理システム、画像処理方法、撮像装置、及び画像処理装置を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。
【０００５】
【課題を解決するための手段】
即ち、本発明の第１の形態によると、被写体の画像を撮像する撮像装置と、当該画像に対して画像処理を行う画像処理装置とを備える画像処理システムであって、撮像装置は、被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部とを有し、画像処理装置は、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部を有する。画像処理装置は、検出部が手ぶれを検出した場合に撮像画像を補正する補正部を更に有してよい。
【０００６】
補正部は、撮像画像に対するシャープネス補正を行ってよい。補正部は、シャープネス補正として、撮像画像のシャープネスを上げる補正を行ってよい。補正部は、撮像画像を複数の領域に分割し、複数の領域のうち、一の領域に対するシャープネス補正を行ってよい。補正部は、当該一の領域に対し、第１補正量でシャープネス補正を行い、複数の領域のうち、他の領域に対し、第１補正量と異なる第２補正量でシャープネス補正を行ってよい。
【０００７】
画像処理装置は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する方向検出部を更に有し、補正部は、手ぶれの方向に基づいて撮像画像に対するシャープネス補正を行ってよい。また、画像処理装置は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する方向検出部を更に有し、補正部は、手ぶれの方向と略直交する方向のエッジを強調する補正を行ってもよい。
【０００８】
検出部は、予備画像の空間周波数成分のピーク成分、及び撮像画像の空間周波数成分のピーク成分に基づいて、手ぶれを検出してよい。検出部は、予備画像における予め定められた領域の空間周波数成分のピーク成分、及び撮像画像における予め定められた領域に対応する領域の空間周波数成分のピーク成分に基づいて、手ぶれを検出してもよい。検出部は、予備画像における被写体の輪郭、及び撮像画像における被写体の輪郭に基づいて、手ぶれを検出してもよい。画像処理装置は、検出部が手ぶれを検出した場合に、ユーザに対する警告を行う警告部を更に有してよい。
【０００９】
本発明の第２の形態によると、被写体の画像を撮像する撮像段階と、当該画像に対して画像処理を行う画像処理段階とを備える画像処理方法であって、撮像段階は、被写体の撮像を指示する第１指示信号を生成する第１撮像指示段階と、第１指示信号に応じて、被写体の画像である予備画像を取得する第１取得段階と、被写体の撮像を指示する第２指示信号を生成する第２撮像指示段階と、第２指示信号に応じて、被写体の画像である撮像画像を取得する第２取得段階とを有し、画像処理段階は、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出段階を有する。
【００１０】
本発明の第３の形態によると、被写体の画像を撮像する撮像装置であって、被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部と、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部とを備える。
【００１１】
本発明の第４の形態によると、撮像装置によって撮像された撮像画像に対して画像処理を行う画像処理装置であって、撮像装置によって撮像された、撮像画像、及び撮像画像に対応する予備画像に基づいて、撮像画像の取得時における手ぶれを検出する検出部を備える。
【００１２】
なお上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションも又発明となりうる。
【００１３】
【発明の実施の形態】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態はクレームに係る発明を限定するものではなく、又実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００１４】
図１は、本発明の一実施形態に係る画像処理システム１８の構成の一例を示す。画像処理システム１８は、デジタルカメラ１０、プリンタ１２、及びパーソナルコンピュータ１４を備える。デジタルカメラ１０、プリンタ１２、及びパーソナルコンピュータ１４は、互いにデータ伝送路を介してデータの送受信を行う。データ伝送路は、例えば、ＩＥＥＥ１３９４、ＵＳＢ等の有線通信媒体や、ＩｒＤＡ、ブルートゥース、無線ＬＡＮ等の無線通信媒体である。データ伝送路は、有線通信媒体及び無線通信媒体を複数用いたネットワーク網、例えばインターネット網であってもよい。また、デジタルカメラ１０、プリンタ１２、及びパーソナルコンピュータ１４間のデータの受け渡しは、リムーバブルメディア等の記録媒体を用いてもよい。
【００１５】
デジタルカメラ１０は、被写体の画像を撮像し、撮像した画像データをプリンタ１２又はパーソナルコンピュータ１４に送信する。本実施形態において、デジタルカメラ１０は、撮像した画像データである撮像画像、及び撮像画像に対応する予備画像をプリンタ１２又はパーソナルコンピュータ１４に送信する。プリンタ１２又はパーソナルコンピュータ１４は、受信した画像データに所定の画像処理を施して出力する。本実施形態において、プリンタ１２又はパーソナルコンピュータ１４は、撮像画像及び予備画像に基づいて、撮像画像の取得時における手ぶれを検出する。プリンタ１２又はパーソナルコンピュータ１４は、当該手ぶれを検出した場合、撮像画像を補正する。プリンタ１２又はパーソナルコンピュータ１４は、当該補正された撮像画像を出力する。即ち、プリンタ１２は、当該補正された撮像画像を印刷して出力し、パーソナルコンピュータ１４は、当該補正された撮像画像をモニタに出力する。また、パーソナルコンピュータ１４は、デジタルカメラ１０又はプリンタ１２に設定情報を送信し、デジタルカメラ１０又はプリンタ１２の設定情報を変更する。
【００１６】
なお、デジタルカメラ１０は、撮像装置の一例であり、プリンタ１２及びパーソナルコンピュータ１４は、画像処理装置の一例である。また、撮像装置は、静止画を撮影するデジタルスチルカメラであってもよく、動画を撮影するデジタルビデオカメラであってもよい。また、画像処理装置は、デジタルカメラで撮影した画像の画質等を自動調整して印刷するラボ用印刷装置であってもよい。
【００１７】
図２は、本実施形態に係るデジタルカメラ１０及びプリンタ１２の構成の一例を示す。デジタルカメラ１０は、被写体の画像を撮像する撮像装置の一例である。デジタルカメラ１０は、撮像指示部３０２及び撮像部２０を有する。撮像指示部３０２は、被写体の撮像を指示する第１指示信号及び第２指示信号を生成する。撮像部２０は、第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する。撮像部２０は、予備画像及び撮像画像を、それぞれ異なるシャッタスピードで取得してよい。また、撮像部２０は、予備画像及び撮像画像を、それぞれ異なる絞りで取得してよい。本実施形態において、撮像部２０は、予め定められたシャッタスピード及び絞りで予備画像を取得する。また、撮像部２０は、ＡＥ（自動露光）に基づくシャッタスピード及び絞りで撮像画像を取得する。別の実施例において、撮像部２０は、第１指示信号に応じて撮像画像を取得し、第２指示信号に応じて予備画像を取得してよい。デジタルカメラ１０は、予備画像及び撮像画像を互いに関連づけて格納する格納部を更に備えてもよい。デジタルカメラ１０は、予備画像及び撮像画像をプリンタ１２に供給する。
【００１８】
プリンタ１２は、撮像画像に対して画像処理を行う画像処理装置の一例である。プリンタ１２は、検出部３０４、補正部３０６、方向検出部３０８、出力部３１０、及び警告部３１２を有する。
【００１９】
検出部３０４は、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する。補正部３０６は、検出部３０４が手ぶれを検出した場合に撮像画像を補正する。方向検出部３０８は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する。
【００２０】
出力部３１０は、補正部３０６により補正された撮像画像を出力する。本実施形態において、出力部３１０は、当該補正された撮像画像を印刷出力する。別の実施例において、出力部３１０は、当該補正された撮像画像をモニターに出力してもよい。警告部３１２は、検出部３０４が手ぶれを検出した場合に、ユーザに対する警告を行う。警告部３１２は、当該手ぶれが検出された撮像画像を補正部３０６に補正させるか否かについてのユーザの指示を受け取ってよい。警告部３１２は、当該ユーザの指示に基づいて補正部３０６に撮像画像を補正させてよい。警告部３１２は、当該手ぶれが検出された撮像画像を出力部３１０に印刷させるか否かについてのユーザの指示を受け取ってもよい。
【００２１】
以下、検出部３０４、方向検出部３０８、及び補正部３０６について更に詳しく説明する。本実施形態において、検出部３０４は、予備画像の空間周波数成分のピーク成分、及び撮像画像の空間周波数成分のピーク成分に基づいて、手ぶれを検出する。例えば、検出部３０４は、予備画像においてピーク成分となる空間周波数と、予備画像においてピーク成分となる空間周波数とが予め定められた閾値以上異なる場合に、撮像画像取得時に手ぶれが発生したと判断してよい。
【００２２】
検出部３０４は、予備画像における予め定められた空間周波数成分の強度（パワー）、及び撮像画像における当該予め定められた空間周波数成分の強度に基づいて、手ぶれを検出してもよい。また、検出部３０４は、予備画像における予め定められた領域の空間周波数成分のピーク成分、及び撮像画像における当該予め定められた領域に対応する領域の空間周波数成分のピーク成分に基づいて、手ぶれを検出してもよい。検出部３０４は、予備画像における予め定められた複数の領域、及び撮像画像における当該複数の領域に対応する複数の領域をそれぞれ抽出し、それぞれの領域の空間周波数成分のピーク成分に基づいて、手ぶれを検出してもよい。
【００２３】
別の実施例において、検出部３０４は、予備画像における被写体の輪郭、及び撮像画像における被写体の輪郭に基づいて、手ぶれを検出してもよい。検出部３０４は、予備画像における被写体の位置、及び撮像画像における当該被写体の位置に基づいて、手ぶれを検出してもよい。
【００２４】
方向検出部３０８は、予備画像及び撮像画像に基づいて手ぶれの方向を検出する。方向検出部３０８は、例えば、予備画像及び撮像画像において縦エッジ強度及び横エッジ強度をそれぞれ算出し、当該算出の結果に基づいて手ぶれの方向を検出してよい。
【００２５】
補正部３０６は、検出部３０４が手ぶれを検出した場合に撮像画像を補正する。本実施形態において、補正部３０６は、撮像画像に対するシャープネス補正を行う。補正部３０６は、当該シャープネス補正として、撮像画像のシャープネスを上げる補正を行う。補正部３０６は、撮像画像を複数の領域に分割し、当該複数の領域のうち、一の領域に対するシャープネス補正を行ってよい。また、補正部３０６は、当該一の領域に対し、第１補正量でシャープネス補正を行い、複数の領域のうち、他の領域に対し、当該第１補正量と異なる第２補正量でシャープネス補正を行ってもよい。補正部３０６は、方向検出部３０８が検出する手ぶれの方向に基づいて撮像画像に対するシャープネス補正を行うのが好ましい。
【００２６】
補正部３０６は、シャープネス補正として、例えば、処理対象の画像から当該画像の２次微分画像（ラプラシアン画像）を引くアンシャープマスキング補正を行ってよい。この場合、撮像画像におけるエッジ部分の濃度変化を強調し、撮像画像を鮮鋭化することができる。補正部３０６は、シャープネス補正として、画像のエッジ部分に対するラプラシアン画像のみを抽出する選択的画像鮮鋭化補正を行ってもよい。この場合、ノイズの影響を抑えて撮像画像のエッジ部分を選択的に鮮鋭化することができる。
【００２７】
補正部３０６は、撮像画像に対するエッジ強調補正を行ってもよい。この場合、補正部３０６は、方向検出部３０８が検出する手ぶれの方向と略直交する方向のエッジを強調する補正を行うのが好ましい。
【００２８】
本実施形態によれば、予備画像及び撮像画像に基づいて手ぶれを検出することにより、高い精度で手ぶれを検出することができる。また、本実施形態によれば、手ぶれが検出された撮像画像を補正することにより、適切な印刷出力を得ることができる。
【００２９】
別の実施例においては、デジタルカメラ１０が、検出部３０４を有してもよい。デジタルカメラ１０は、補正部３０６、方向検出部３０８、及び警告部３１２を更に有してもよい。この場合、デジタルカメラ１０は、補正部３０６が補正した撮像画像をプリンタ１２に供給するのが好ましい。検出部３０４は、撮像部２０が撮像画像を取得する度に、当該撮像画像における手ぶれを検出するのが好ましい。
【００３０】
図３は、本実施形態に係る画像処理システム１８による画像処理方法の一例を示すフローチャートである。当該画像処理方法は、被写体の画像を撮像する撮像段階と、当該画像に対して画像処理を行う画像処理段階を備える。撮像段階は、第１撮像指示段階Ｓ１０２、第１取得段階Ｓ１０４、第２撮像指示段階Ｓ１０６、及び第２取得段階Ｓ１０８とを有する。画像処理段階は、検出段階Ｓ１１０、補正段階Ｓ１１２、及び出力段階Ｓ１１４を有する。
【００３１】
本実施形態において、画像処理システム１８は、まず、第１撮像指示段階Ｓ１０２で、被写体の撮像を指示する第１指示信号を生成する。第１撮像指示段階Ｓ１０２は、図２に関連して説明した撮像指示部３０２を用いて行ってよい。
【００３２】
次に、第１取得段階Ｓ１０４で、第１指示信号に応じて、被写体の画像である予備画像を取得する。第１取得段階Ｓ１０４は、図２に関連して説明した撮像部２０を用いて行ってよい。次に、第２撮像指示段階Ｓ１０６で、被写体の撮像を指示する第２指示信号を生成する。第２撮像指示段階Ｓ１０６は、撮像指示部３０２を用いて行ってよい。次に、第２取得段階Ｓ１０８で、第２指示信号に応じて、被写体の画像である撮像画像を取得する。第２取得段階Ｓ１０８は、撮像部２０を用いて行ってよい。
【００３３】
次に、検出段階Ｓ１１０で、予備画像及び撮像画像に基づいて、撮像画像の取得時における手ぶれを検出する。検出段階Ｓ１１０は、図２に関連して説明した検出部３０４を用いて行ってよい。検出段階Ｓ１１０において手ぶれが検出された場合、補正段階Ｓ１１２で、撮像画像を補正する。補正段階Ｓ１１２は、図２に関連して説明した補正部３０６を用いて行ってよい。次に、出力段階Ｓ１１４で、当該補正された撮像画像を印刷出力し、画像処理システム１８は動作を終了する。出力段階Ｓ１１４は、図２に関連して説明した出力部３１０を用いて行ってよい。一方、検出段階Ｓ１１０で、手ぶれが検出されない場合、出力段階Ｓ１１４で撮像画像を出力し、画像処理システム１８は動作を終了してよい。
【００３４】
図４は、本実施形態に係るデジタルカメラ１０の詳細な構成の一例を示す。デジタルカメラ１０は、撮像部２０、撮像制御部４０、システム制御部６０、表示部１００、操作部１１０、記憶部１２０、外部接続部１３０、及び画像処理部１４０を備える。撮像部２０は、図２に関連して説明した撮像部２０と同一又は同様の機能を有する。操作部１１０は、図２に関連して説明した撮像指示部３０２と同一又は同様の機能を有する。画像処理部１４０は、図２に関連して説明した検出部３０４、補正部３０６、又は方向検出部３０８と同一又は同様の機能を有してもよい。デジタルカメラ１０は、図２に関連して説明した出力部３１０又は警告部３１２を更に備えてもよい。
【００３５】
撮像部２０は、撮影レンズ部２２、絞り２４、シャッタ２６、光学ＬＰＦ２８、ＣＣＤ３０、撮像信号処理部３２、ファインダ３４、及びストロボ３６を有する。
【００３６】
撮影レンズ部２２は、被写体像を取り込んで処理を施す。撮影レンズ部２２は、フォーカスレンズやズームレンズ等を含み、被写体像をＣＣＤ３０の受光面上に結像する。絞り２４は、撮影レンズ部２２を通過した光を絞り、光学ＬＰＦ２８は、絞り２４を通過した光に含まれる所定の波長より長い波長成分を通過させる。ＣＣＤ３０の各センサエレメントは、結像した被写体像の光量に応じ、電荷を蓄積する（以下その電荷を「蓄積電荷」という）。
【００３７】
シャッタ２６は、機械式シャッタであり、撮影レンズ部２２を通過した光をＣＣＤ３０に露光するか否かを制御する。また、デジタルカメラ１０は、シャッタ２６に代えて電子シャッタ機能を有してもよい。電子シャッタ機能を実現するために、ＣＣＤ３０のセンサエレメントは、シャッタゲート及びシャッタドレインを有する。シャッタゲートを駆動することにより、蓄積電荷がシャッタドレインに掃き出される。シャッタゲートの制御により、各センサエレメントに電荷を蓄積する時間、即ちシャッタスピードを制御できる。ＣＣＤ３０において、蓄積電荷は、リードゲートパルスによってシフトレジスタに読み出され、レジスタ転送パルスによって電圧信号として順次読み出される。
【００３８】
撮像信号処理部３２は、ＣＣＤ３０から出力される被写体像を示す電圧信号、即ちアナログ信号をＲ、Ｇ、Ｂ成分に色分解する。そして、撮像信号処理部３２は、Ｒ、Ｇ、Ｂ成分を調整することにより、被写体像のホワイトバランスを調整する。撮像信号処理部３２は、被写体像のガンマ補正を行う。そして、撮像信号処理部３２は、Ｒ、Ｇ、Ｂ成分に分解されたアナログ信号をＡ／Ｄ変換し、その結果得られた被写体像のデジタルの画像データ（以下「デジタル画像データ」という）をシステム制御部６０へ出力する。
【００３９】
ファインダ３４は、表示手段を有してもよく、後述のメインＣＰＵ６２等からの各種情報をファインダ３４内に表示してもよい。ストロボ３６は、コンデンサに蓄えられたエネルギを放電する放電管３７を有し、放電管３７にエネルギが供給されたとき放電管３７が発光することで機能する。本実施形態において、撮像部２０は、操作部１１０から受け取る第１指示信号及び第２指示信号のそれぞれに応じて、被写体の画像である、予備画像及び撮像画像をそれぞれ取得する。
【００４０】
撮像制御部４０は、ズーム駆動部４２、フォーカス駆動部４４、絞り駆動部４６、シャッタ駆動部４８、それらを制御する撮像系ＣＰＵ５０、測距センサ５２、及び測光センサ５４を有する。ズーム駆動部４２、フォーカス駆動部４４、絞り駆動部４６、及びシャッタ駆動部４８は、それぞれステッピングモータ等の駆動手段を有し、撮像部２０に含まれる機構部材を駆動する。後述のレリーズスイッチ１１４の押下に応じ、測距センサ５２は被写体までの距離を測定し、測光センサ５４は被写体輝度を測定する。そして、測距センサ５２及び測光センサ５４は、測定された被写体までの距離のデータ（以下単に「測距データ」という）及び被写体輝度のデータ（以下単に「測光データ」という）を、それぞれ撮像系ＣＰＵ５０に供給する。
【００４１】
撮像系ＣＰＵ５０は、ユーザから指示されたズーム倍率等の撮影情報に基づき、ズーム駆動部４２及びフォーカス駆動部４４を制御して撮影レンズ部２２のズーム倍率とピントの調整を行う。また、撮像系ＣＰＵ５０は、測距センサ５２から受け取った測距データに基づいて、ズーム駆動部４２及びフォーカス駆動部４４を制御してズーム倍率及びピントの調整を行ってもよい。
【００４２】
撮像系ＣＰＵ５０は、測光センサ５４から受け取った測光データに基づいて、絞り値及びシャッタスピードを決定する。決定された値に従い、絞り駆動部４６及びシャッタ駆動部４８は、絞り２４の絞り量及びシャッタ２６の開閉をそれぞれ制御する。
【００４３】
また、撮像系ＣＰＵ５０は、測光センサ５４から受け取った測光データに基づいて、ストロボ３６の発光を制御し、同時に絞り２４の絞り量を調整する。ユーザが映像の取込を指示したとき、ＣＣＤ３０は電荷蓄積を開始し、測光データから計算されたシャッタ時間の経過後、蓄積電荷を撮像信号処理部３２へ出力する。
【００４４】
システム制御部６０は、メインＣＰＵ６２、キャラクタ生成部８４、タイマ８６、及びクロック発生器８８を有する。メインＣＰＵ６２は、デジタルカメラ１０全体、特にシステム制御部６０を制御する。メインＣＰＵ６２は、シリアル通信等により、撮像系ＣＰＵ５０との間で必要な情報の受け渡しをする。
【００４５】
クロック発生器８８は、メインＣＰＵ６２の動作クロックを発生し、メインＣＰＵ６２に供給する。また、クロック発生器８８は、撮像系ＣＰＵ５０及び表示部１００の動作クロックを発生する。クロック発生器８８は、メインＣＰＵ６２、撮像系ＣＰＵ５０、及び表示部１００に対してそれぞれ異なる周波数の動作クロックを供給してもよい。
【００４６】
キャラクタ生成部８４は、撮影日時、タイトル等の撮影画像に合成する文字情報や、図形情報を生成する。タイマ８６は、例えば電池等でバックアップされ、常に時間をカウントし、当該カウント値に基づいて撮影画像の撮影日時に関する情報等の時刻情報をメインＣＰＵ６２に供給する。タイマ８６は、蓄電池から供給された電力により、デジタルカメラ本体の電源がオフである場合にも時間をカウントするのが望ましい。また、キャラクタ生成部８４及びタイマ８６は、メインＣＰＵ６２に併設されることが好ましい。
【００４７】
記憶部１２０は、メモリ制御部６４、不揮発性メモリ６６、及びメインメモリ６８を有する。メモリ制御部６４は、不揮発性メモリ６６とメインメモリ６８とを制御する。不揮発性メモリ６６は、ＥＥＰＲＯＭ（電気的消去及びプログラム可能なＲＯＭ）やＦＬＡＳＨメモリ等で構成され、ユーザによる設定情報や出荷時の調整値等、デジタルカメラ１０の電源がオフの間も保持すべきデータを格納する。不揮発性メモリ６６は、メインＣＰＵ６２のブートプログラムやシステムプログラム等を格納してもよい。
【００４８】
メインメモリ６８は、ＤＲＡＭのように比較的安価で容量の大きなメモリで構成されることが好ましい。メインメモリ６８は、撮像部２０から出力されたデータを格納するフレームメモリとしての機能、各種プログラムをロードするシステムメモリとしての機能、その他ワークエリアとしての機能を有する。不揮発性メモリ６６及びメインメモリ６８は、システム制御部６０内外の各部とバス８２を介してデータのやりとりを行う。不揮発性メモリ６６は、デジタル画像データを更に格納してもよい。
【００４９】
画像処理部１４０は、ＹＣ処理部７０、エンコーダ７２、及び圧縮伸張処理部７８を有する。また、外部接続部１３０は、オプション装置制御部７４、及び通信Ｉ／Ｆ部８０を有する。
【００５０】
ＹＣ処理部７０は、デジタル画像データにＹＣ変換を施し、輝度信号Ｙ、並びに色差（クロマ）信号Ｂ−Ｙ及びＲ−Ｙを生成する。メインメモリ６８は、メモリ制御部６４の制御に基づいて、輝度信号及び色差信号を格納する。
【００５１】
圧縮伸張処理部７８は、メインメモリ６８から順次輝度信号と色差信号を読み出して圧縮する。そして、オプション装置制御部７４は、圧縮されたデジタル画像データ（以下単に「圧縮データ」という）をオプション装置７６の一例であるメモリカードへ書き込む。当該メモリカードは、予備画像及び撮像画像を互いに関連付けて記憶してよい。
【００５２】
エンコーダ７２は、輝度信号と色差信号を、ビデオ信号（ＮＴＳＣやＰＡＬ信号）に変換して端子９０から出力する。オプション装置７６に記録された圧縮データからビデオ信号を生成する場合、圧縮データは、まずオプション装置制御部７４を介して圧縮伸張処理部７８へ与えられる。続いて、圧縮伸張処理部７８で必要な伸張処理が施されたデータはエンコーダ７２によってビデオ信号へ変換される。
【００５３】
オプション装置制御部７４は、オプション装置７６が許容する信号仕様及びバス８２のバス仕様に従い、バス８２とオプション装置７６との間で必要な信号の生成、論理変換、及び／又は電圧変換等を行う。デジタルカメラ１０は、オプション装置７６として前述のメモリカードの他に、例えばＰＣＭＣＩＡ準拠の標準的なＩ／Ｏカードをサポートしてもよい。その場合、オプション装置制御部７４は、ＰＣＭＣＩＡ用バス制御ＬＳＩ等で構成してもよい。
【００５４】
通信Ｉ／Ｆ部８０は、デジタルカメラ１０がサポートする通信仕様、たとえばＵＳＢ、ＲＳ−２３２Ｃ、イーサネット（登録商標）等の仕様に応じたプロトコル変換等の制御を行う。通信Ｉ／Ｆ部８０は、圧縮データ又はデジタル画像データを、端子９２を介してネットワークを含む外部機器に出力してよい。通信Ｉ／Ｆ部８０は、必要に応じてドライバＩＣを含み、外部機器と端子９２を介して通信する。通信Ｉ／Ｆ部８０は、例えばプリンタ、カラオケ機、ゲーム機等の外部機器との間で独自のインターフェースによるデータ授受を行う構成としてもよい。
【００５５】
表示部１００は、ＬＣＤモニタ１０２、ＬＣＤパネル１０４、モニタドライバ１０６、及びパネルドライバ１０８を有する。モニタドライバ１０６は、ＬＣＤモニタ１０２を制御する。また、パネルドライバ１０８は、ＬＣＤパネル１０４を制御する。ＬＣＤモニタ１０２は、例えば２インチ程度の大きさでカメラ背面に設けられ、現在の撮影や再生のモード、撮影や再生のズーム倍率、電池残量、日時、モード設定のための画面、被写体画像等を表示する。ＬＣＤパネル１０４は例えば小さな白黒ＬＣＤでカメラ上面に設けられ、画質（ＦＩＮＥ／ＮＯＲＭＡＬ／ＢＡＳＩＣ等）、ストロボ発光／発光禁止、標準撮影可能枚数、画素数、電池容量／残量等の情報を表示する。
【００５６】
操作部１１０は、パワースイッチ１１２、レリーズスイッチ１１４、機能設定部１１６、及びズームスイッチ１１８を有する。パワースイッチ１１２は、ユーザの指示に基づいてデジタルカメラ１０の電源をオン／オフする。レリーズスイッチ１１４は、半押しと全押しの二段階押し込み構造を有する。一例として、レリーズスイッチ１１４が半押しされることにより、撮像制御部４０は、自動焦点調整及び自動露出調整を行い、全押しされることにより、撮像部２０は、被写体像を取り込む。レリーズスイッチ１１４は、図２に関連して説明した撮像指示部３０２と同一又は同様の機能を有してよい。レリーズスイッチ１１４は、半押しされることにより、第１指示信号を生成し、全押しされることにより第２指示信号を生成してよい。
【００５７】
機能設定部１１６は、例えば回転式のモードダイヤルや十字キー等であって、「ファイルフォーマット」、「特殊効果」、「印画」、「決定／保存」、「表示切換」等の設定を受け付ける。ズームスイッチ１１８は、撮像部２０が取得する被写体像のズーム倍率の設定を受け付ける。
【００５８】
以上の構成による主な動作は以下のとおりである。まずパワースイッチ１１２が押下され、デジタルカメラ１０の各部に電力が供給される。メインＣＰＵ６２は、機能設定部１１６の状態を読み込むことで、デジタルカメラ１０が撮影モードにあるか再生モードにあるかを判断する。
【００５９】
デジタルカメラ１０が撮影モードの場合、メインＣＰＵ６２は、レリーズスイッチ１１４の半押し状態を監視する。レリーズスイッチ１１４の半押し状態が検出されたとき、撮像系ＣＰＵ５０は、測光センサ５４及び測距センサ５２からそれぞれ測光データと測距データを得る。撮像制御部４０は、撮像系ＣＰＵ５０が得た測光データ及び測距データに基づいて、撮像部２０のピント、絞り等を調整する。調整が完了すると、ＬＣＤモニタは、「スタンバイ」等の文字を表示してユーザにその旨を伝える。本実施形態において、レリーズスイッチ１１４の半押し状態が検出されたとき、レリーズスイッチ１１４は、第１指示信号を生成し、撮像部２０は予備画像を取得する。予備画像は一旦メインメモリ６８へ格納され、この後ＹＣ処理部７０と圧縮伸張処理部７８で処理され、オプション装置制御部７４を経由してオプション装置７６へ記録される。
【００６０】
続いて、メインＣＰＵ６２は、レリーズスイッチ１１４の全押し状態を監視する。レリーズスイッチ１１４の全押し状態が検出されたとき、所定のシャッタ時間をおいてシャッタ２６が閉じられ、ＣＣＤ３０の蓄積電荷が撮像信号処理部３２へ掃き出される。撮像信号処理部３２による処理の結果生成されたデジタル画像データはバス８２へ出力される。本実施形態において、レリーズスイッチ１１４の全押し状態が検出されたとき、レリーズスイッチ１１４は、第２指示信号を生成し、撮像部２０は当該デジタル画像データである撮像画像を取得する。デジタル画像データは一旦メインメモリ６８へ格納され、この後ＹＣ処理部７０と圧縮伸張処理部７８で処理され、オプション装置制御部７４を経由してオプション装置７６へ記録される。記録されたデジタル画像データに基づく撮影画像は、フリーズされた状態でしばらくＬＣＤモニタ１０２に表示され、ユーザは撮影画像を確認することができる。以上で一連の撮影動作が完了する。
【００６１】
一方、デジタルカメラ１０が再生モードの場合、メインＣＰＵ６２は、メインメモリ６８、不揮発性メモリ６６、及び／又はオプション装置７６から撮影した撮影画像を読み出し、これを表示部１００のＬＣＤモニタ１０２へ表示する。
【００６２】
この状態でユーザが機能設定部１１６にて「順送り」、「逆送り」を指示すると、メインＣＰＵ６２は、メインメモリ６８、不揮発性メモリ６６、及び／又はオプション装置７６が格納した他の撮影画像を読み出し、これを表示部１００のＬＣＤモニタ１０２へ表示する。
【００６３】
以上、本発明を実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。上記実施形態に、多様な変更または改良を加えることができる。そのような変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【００６４】
【発明の効果】
上記説明から明らかなように、本発明によれば撮像した画像における手ぶれを、高い精度で検出することができる。
【図面の簡単な説明】
【図１】本発明の一実施形態に係る画像処理システム１８の構成の一例を示す図である。
【図２】本実施形態に係るデジタルカメラ１０及びプリンタ１２の構成の一例を示す図である。
【図３】本実施形態に係る画像処理システム１８の動作の一例を示すフローチャートである。
【図４】本実施形態に係るデジタルカメラ１０の詳細な構成の一例を示す図である。
【符号の説明】
１０ デジタルカメラ
１２ プリンタ
１４ パーソナルコンピュータ
１８ 画像処理システム
２０ 撮像部
２２ 撮影レンズ部
２４ 絞り
２６ シャッタ
２８ 光学ＬＰＦ
３０ ＣＣＤ
３２ 撮像信号処理部
３４ ファインダ
３６ ストロボ
３７ 放電管
４０ 撮像制御部
４２ ズーム駆動部
４４ フォーカス駆動部
４６ 絞り駆動部
４８ シャッタ駆動部
５０ 撮像系ＣＰＵ
５２ 測距センサ
５４ 測光センサ
６０ システム制御部
６２ メインＣＰＵ
６４ メモリ制御部
６６ 不揮発性メモリ
６８ メインメモリ
７０ ＹＣ処理部
７２ エンコーダ
７４ オプション装置制御部
７６ オプション装置
７８ 圧縮伸張処理部
８０ 通信Ｉ／Ｆ部
８２ バス
８４ キャラクタ生成部
８６ タイマ
８８ クロック発生器
９０ 端子
９２ 端子
１００ 表示部
１０２ ＬＣＤモニタ
１０４ ＬＣＤパネル
１０６ モニタドライバ
１０８ パネルドライバ
１１０ 操作部
１１２ パワースイッチ
１１４ レリーズスイッチ
１１６ 機能設定部
１１８ ズームスイッチ
１２０ 記憶部
１３０ 外部接続部
１４０ 画像処理部
３０２ 撮像指示部
３０４ 検出部
３０６ 補正部
３０８ 方向検出部
３１０ 出力部
３１２ 警告部
Claims (15)
- 被写体の画像を撮像する撮像装置と、前記画像に対して画像処理を行う画像処理装置とを備える画像処理システムであって、
前記撮像装置は、
前記被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、
前記第１指示信号及び前記第２指示信号のそれぞれに応じて、前記被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部と
を有し、
前記画像処理装置は、前記予備画像及び前記撮像画像に基づいて、前記撮像画像の取得時における手ぶれを検出する検出部を有することを特徴とする画像処理システム。 - 前記画像処理装置は、前記検出部が前記手ぶれを検出した場合に前記撮像画像を補正する補正部を更に有することを特徴とする請求項１に記載の画像処理システム。
- 前記補正部は、前記撮像画像に対するシャープネス補正を行うことを特徴とする請求項２に記載の画像処理システム。
- 前記補正部は、前記シャープネス補正として、前記撮像画像のシャープネスを上げる補正を行うことを特徴とする請求項３に記載の画像処理システム。
- 前記補正部は、前記撮像画像を複数の領域に分割し、前記複数の領域のうち、一の領域に対するシャープネス補正を行うことを特徴とする請求項２に記載の画像処理システム。
- 前記補正部は、前記一の領域に対し、第１補正量でシャープネス補正を行い、前記複数の領域のうち、他の領域に対し、前記第１補正量と異なる第２補正量でシャープネス補正を行うことを特徴とする請求項５に記載の画像処理システム。
- 前記画像処理装置は、前記予備画像及び前記撮像画像に基づいて前記手ぶれの方向を検出する方向検出部を更に有し、
前記補正部は、前記手ぶれの方向に基づいて前記撮像画像に対するシャープネス補正を行うことを特徴とする請求項２に記載の画像処理システム。 - 前記画像処理装置は、前記予備画像及び前記撮像画像に基づいて前記手ぶれの方向を検出する方向検出部を更に有し、
前記補正部は、前記手ぶれの方向と略直交する方向のエッジを強調する補正を行うことを特徴とする請求項２に記載の画像処理システム。 - 前記検出部は、前記予備画像の空間周波数成分のピーク成分、及び前記撮像画像の空間周波数成分のピーク成分に基づいて、前記手ぶれを検出することを特徴とする請求項１に記載の画像処理システム。
- 前記検出部は、前記予備画像における予め定められた領域の空間周波数成分のピーク成分、及び前記撮像画像における前記予め定められた領域に対応する領域の空間周波数成分のピーク成分に基づいて、前記手ぶれを検出することを特徴とする請求項１に記載の画像処理システム。
- 前記検出部は、前記予備画像における前記被写体の輪郭、及び前記撮像画像における前記被写体の輪郭に基づいて、前記手ぶれを検出することを特徴とする請求項１に記載の画像処理システム。
- 前記画像処理装置は、前記検出部が前記手ぶれを検出した場合に、ユーザに対する警告を行う警告部を更に有することを特徴とする請求項１に記載の画像処理システム。
- 被写体の画像を撮像する撮像段階と、前記画像に対して画像処理を行う画像処理段階とを備える画像処理方法であって、
前記撮像段階は、
前記被写体の撮像を指示する第１指示信号を生成する第１撮像指示段階と、
前記第１指示信号に応じて、前記被写体の画像である予備画像を取得する第１取得段階と、
前記被写体の撮像を指示する第２指示信号を生成する第２撮像指示段階と、
前記第２指示信号に応じて、前記被写体の画像である撮像画像を取得する第２取得段階と
を有し、
前記画像処理段階は、前記予備画像及び前記撮像画像に基づいて、前記撮像画像の取得時における手ぶれを検出する検出段階を有することを特徴とする画像処理方法。 - 被写体の画像を撮像する撮像装置であって、
前記被写体の撮像を指示する第１指示信号及び第２指示信号を生成する撮像指示部と、
前記第１指示信号及び前記第２指示信号のそれぞれに応じて、前記被写体の画像である、予備画像及び撮像画像をそれぞれ取得する撮像部と、
前記予備画像及び前記撮像画像に基づいて、前記撮像画像の取得時における手ぶれを検出する検出部と
を備えることを特徴とする撮像装置。 - 撮像装置によって撮像された撮像画像に対して画像処理を行う画像処理装置であって、
前記撮像装置によって撮像された、前記撮像画像、及び前記撮像画像に対応する予備画像に基づいて、前記撮像画像の取得時における手ぶれを検出する検出部を備えることを特徴とする画像処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002225057A JP4130338B2 (ja) | 2002-08-01 | 2002-08-01 | 画像処理システム、画像処理方法、撮像装置、及び画像処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002225057A JP4130338B2 (ja) | 2002-08-01 | 2002-08-01 | 画像処理システム、画像処理方法、撮像装置、及び画像処理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004070421A true JP2004070421A (ja) | 2004-03-04 |
| JP4130338B2 JP4130338B2 (ja) | 2008-08-06 |
Family
ID=32012841
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002225057A Expired - Fee Related JP4130338B2 (ja) | 2002-08-01 | 2002-08-01 | 画像処理システム、画像処理方法、撮像装置、及び画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4130338B2 (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007039947A1 (ja) * | 2005-10-04 | 2007-04-12 | Mitsubishi Denki Kabushiki Kaisha | 画像補正装置及び画像補正方法 |
| JP2009104639A (ja) * | 2009-01-26 | 2009-05-14 | Seiko Epson Corp | 画像情報の評価方法、画像情報の評価プログラム及び画像情報評価装置 |
| US7652709B2 (en) | 2003-07-31 | 2010-01-26 | Seiko Epson Corporation | Image forming device, image output device, image processing system, image retrieving method, image quality determining method and recording medium |
| US7693342B2 (en) | 2004-11-29 | 2010-04-06 | Seiko Epson Corporation | Evaluating method of image information, storage medium having evaluation program stored therein, and evaluating apparatus |
| WO2013035847A1 (ja) * | 2011-09-09 | 2013-03-14 | 株式会社ニコン | 形状測定装置、構造物製造システム、形状測定方法、構造物製造方法、形状測定プログラム、コンピュータ読み取り可能な記録媒体 |
-
2002
- 2002-08-01 JP JP2002225057A patent/JP4130338B2/ja not_active Expired - Fee Related
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7652709B2 (en) | 2003-07-31 | 2010-01-26 | Seiko Epson Corporation | Image forming device, image output device, image processing system, image retrieving method, image quality determining method and recording medium |
| US7693342B2 (en) | 2004-11-29 | 2010-04-06 | Seiko Epson Corporation | Evaluating method of image information, storage medium having evaluation program stored therein, and evaluating apparatus |
| WO2007039947A1 (ja) * | 2005-10-04 | 2007-04-12 | Mitsubishi Denki Kabushiki Kaisha | 画像補正装置及び画像補正方法 |
| US7796159B2 (en) | 2005-10-04 | 2010-09-14 | Mitsubishi Electric Corporation | Image correction device and image correction method |
| JP2009104639A (ja) * | 2009-01-26 | 2009-05-14 | Seiko Epson Corp | 画像情報の評価方法、画像情報の評価プログラム及び画像情報評価装置 |
| JP4591603B2 (ja) * | 2009-01-26 | 2010-12-01 | セイコーエプソン株式会社 | 画像情報の評価方法、画像情報の評価プログラム及び画像情報評価装置 |
| WO2013035847A1 (ja) * | 2011-09-09 | 2013-03-14 | 株式会社ニコン | 形状測定装置、構造物製造システム、形状測定方法、構造物製造方法、形状測定プログラム、コンピュータ読み取り可能な記録媒体 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4130338B2 (ja) | 2008-08-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4275344B2 (ja) | 撮像装置、撮像方法、及びプログラム | |
| US7944500B2 (en) | Image processing system, image capturing apparatus, and system and method for detecting backlight status | |
| JP3914060B2 (ja) | 合焦装置 | |
| JP3880862B2 (ja) | 撮像装置 | |
| US7339606B2 (en) | Image capturing apparatus, main subject position determination method, and computer-readable medium storing program | |
| JP2003179807A (ja) | 撮像装置 | |
| JP4343468B2 (ja) | 画像処理システム、撮像装置、画像処理装置、画像処理方法、及びプログラム | |
| JP4202013B2 (ja) | 画像処理システム、撮像装置、画像処理装置、画像処理方法、及びプログラム | |
| JP4130338B2 (ja) | 画像処理システム、画像処理方法、撮像装置、及び画像処理装置 | |
| JP3957147B2 (ja) | 合焦装置 | |
| JP4101673B2 (ja) | 画像処理装置 | |
| JP2003209737A (ja) | 撮像装置 | |
| JP4246952B2 (ja) | 画像処理システム、撮像装置、撮像方法、及びプログラム | |
| JP3828822B2 (ja) | 撮像装置、画像処理システム、撮像方法、及びプログラム | |
| JP2003069872A (ja) | 撮像装置、画像出力装置、画像処理システム、画像出力方法、およびプログラム | |
| JP2003244626A (ja) | 画像処理装置、画像処理システム、画像処理方法、及び撮像装置 | |
| JP3860045B2 (ja) | 撮像装置 | |
| JP2005062469A (ja) | デジタルカメラ | |
| JP3904880B2 (ja) | 撮像装置、試験装置、及びリサイクル方法 | |
| JP2003125257A (ja) | 撮像装置 | |
| JP2007171985A (ja) | 合焦装置 | |
| JP2003234998A (ja) | 撮像装置、撮像方法、及びプログラム | |
| JP2003143538A (ja) | 画像処理装置、画像処理方法、撮像装置、プログラム、及び画像処理システム | |
| JP2003242503A (ja) | 画像処理装置 | |
| JP2003234953A (ja) | 撮像装置、撮像方法、及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050203 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061208 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071128 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071204 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080130 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080226 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080424 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080520 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080521 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4130338 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110530 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110530 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120530 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130530 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140530 Year of fee payment: 6 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |