JP5904886B2 - 撮像装置、欠陥処理方法、欠陥処理プログラムおよび電子情報機器 - Google Patents

Description

本発明は、撮像装置、欠陥処理方法、欠陥処理プログラムおよび電子情報機器に関し、特に、被写体の撮像時に生ずる画像欠陥部分を検出可能な撮像装置、このような画像欠陥部分の検出、補正などの処理を行う欠陥処理方法、この欠陥処理方法をコンピュータにより行うための欠陥処理プログラム、およびこのような撮像装置を備えた電子情報機器に関するものである。

近年、小型情報端末やデジタルカメラなど情報処理を行うさまざまな電子機器には、被写体の撮像を行う撮像部として、ＣＣＤイメージセンサやＣＭＯＳイメージセンサなどの撮像素子と、この撮像素子に外部からの光を導く撮像用レンズなどを含む光学系とを筐体内に一体化して組み込んだカメラモジュールが搭載されている。

このようなカメラモジュールでは、その光学系に異物が侵入することにより、画質の低下を引き起こす欠陥画像が生ずる。

そこで、従来から、光学系に異物が侵入しないように、カメラモジュールを作成する工程の品質改善、カメラモジュールの構造の改善等を実施しているが、このような改善策では、カメラモジュールの高コスト化を招くこと、また、完全には光学系への異物の侵入を防止することができないことなどが課題となっている。

また、このようにカメラモジュールの作成工程や構造を改善して光学系への異物の侵入を未然に防ぐ対策を講じる一方で、このような異物の侵入により生じた欠陥画像を補正することにより画質の低下を回避するといったことも行われている。

例えば、従来から欠陥検出および補正に関する一般的な技術としては、カメラによる撮像動作中に注目画素とその周辺画素との相関により、任意の画像中における任意の注目画素について欠陥判定を行い、その欠陥画素と判定された画素に対してその画素値を補正する技術が知られている（例えば、特許文献１）。

ところが、このような欠陥画素の補正に関する一般的な従来技術では、注目画素とその周辺画素との値の比較によって欠陥画素を検出するようにしているために、撮像により得られた画像が、高周波成分をもった被写体の画像、具体的には画素単位で画素値が変化するような細かい画像やドット柄のような高周波成分を含む画像である場合に、隣接する画素間での画素値の変化が本来の画像の特性による画素値の変化であるにも拘わらず、この画素値の変化が画素欠陥によるものとして判断される場合がある。このような場合、正常な画素が欠陥画素として誤検出されてしまったり、あるいはこの欠陥画素の補正により本来の画像における高周波成分が失われてしまったりするという課題があった。

このような課題に対しては、例えば、特許文献２に開示の撮像装置のように、２つの撮像部により撮影した画像の相互比較により欠陥領域を検出するようにしたものが有効である。

図９および図１０は、この特許文献２に開示の従来の撮像装置を説明する図であり、図９は、この従来の撮像装置の構成を概略的に示し、図１０は、この撮像装置で行われる欠陥領域の補正処理を概念的に示している。

この特許文献２に開示の撮像装置１０は、被写体Ｔａの撮像により第１の画像データを出力する第１のカメラモジュールＡと、被写体Ｔａの撮像により第２の画像データを出力する第２のカメラモジュールＢとを有し、これらの２つのカメラモジュールＡおよびＢは、それぞれの光軸ＬａおよびＬｂが平行になるように隣接させて配置されている。

ここで、第１のカメラモジュールＡは、被写体Ｔａからの光（被写体光）を光電変換して撮像信号を出力するＣＣＤイメージセンサやＣＭＯＳイメージセンサなどの固体撮像素子１１ａと、被写体光を固体撮像素子１１ａに導く光学系１０ａとを有している。光学系１０ａと固体撮像素子１１ａとは一体に取り付けられており、光学系１０ａは、被写体光を固体撮像素子１１ａの撮像面上に結像させるフォーカスレンズ１０ａ２と、このフォーカスレンズ１０ａ２の前に配置され、固体撮像素子１１ａに入射する被写体光の光量を調節する絞り機構１０ａ１とを有している。また、第２のカメラモジュールＢも第１のカメラモジュールＡと同じ構造となっており、被写体Ｔａからの光を光電変換するＣＣＤイメージセンサやＣＭＯＳイメージセンサなどの固体撮像素子１１ｂと、この固体撮像素子１１ｂに一体に取り付けられた光学系１０ｂとを有し、光学系１０ｂは、フォーカスレンズ１０ｂ２と、その前に配置された絞り機構１０ｂ１とを有している。

このような構成の撮像装置１０では、２つのカメラモジュールＡおよびＢが同じ被写体Ｔａを撮像する。つまる、第１のカメラモジュールＡでは、固体撮像素子１１ａが被写体Ｔａを撮像して、撮像画像ａ１を表す第１の画像データを出力し、第２のカメラモジュールＢでは、固体撮像素子１１ｂが被写体Ｔａを撮像して、撮像画像ｂ１を表す第２の画像データを出力する。また、撮像装置１０では、それぞれのカメラモジュールから出力された画像データを用いて、それぞれのカメラモジュールで撮像した撮像画像を比較することにより、撮像画像が欠陥領域を含むか否かを判定する処理が行われる。

なお、この特許文献２に開示の撮像装置１０では、２つのカメラモジュールＡおよびＢで生成した撮像画像は、立体画像を構成する左目画像および右目画像として用いることができるものである。

例えば、図９に示すように、第１のカメラモジュールＡで得られた撮像画像ａ１に欠陥領域Ｐが含まれており、第２のカメラモジュールＢで得られた撮像画像ｂ１に欠陥領域が含まれていないと判定された場合、撮像画像ａ１を補正対象画像とし、撮像画像ｂ１を基準画像として、補正対象画像（撮像画像）ａ１の欠陥領域Ｐを基準画像（撮像画像）ｂ１の対応する部分で置換することで、補正対象画像の補正が行われる。

具体的には、図１０に示すように、撮像装置１０では、画像処理部（図示せず）が、補正対象画像ａ１における欠陥領域Ｐを包含する矩形形状の領域を探索領域Ｄとして、基準画像ｂ１における補正対象画像ａ１と共通する撮像領域を探索して、基準画像ｂ１内で、探索領域Ｄの欠陥領域Ｐ以外の領域の画素値情報と一致する画素値情報を有する対応領域Ｄ０を検出する。

次に、画像処理部は、補正対象画像ａ１の探索領域Ｄに対応する基準画像ｂ１内の対応領域Ｄ０から、補正対象画像ａ１の欠陥領域Ｐに対応する基準画像ｂ１の対応領域Ｐ０を抽出し、補正対象画像ａ１の欠陥領域Ｐを、これに対応する対応領域Ｐ０で置換することで補正対象画像ａ１を補正する。

このように特許文献２に記載の撮像装置では、２つのカメラモジュール（撮像部）で得られた撮影画像の相互比較により欠陥領域を検出するので、撮像画像がドット柄のような高周波成分を含む画像であっても、撮像画像における欠陥領域を高精度に検出することできる。

特開平９−２４７５４８号公報 特開２０１０−２０６５２１号公報

ところが、上記特許文献２に開示の撮像装置で行っている欠陥検出方法では、２つのカメラモジュール（撮像部）は、それぞれの光軸が平行になるよう所定の間隔Ｄｘを空けて配置されているので、それぞれのカメラモジュールで得られた撮像画像に対して、共通する画像領域以外の領域（画角外の領域）が存在し、補正対象となる撮像画像（補正対象画像）の全領域に対して精度よく欠陥領域を検出することが困難であるという問題がある。

図１１はこの問題を説明するための図であり、各カメラモジュールで生成された撮像画像とこれに対する画角外領域とを具体的に示している。

例えば、図９に示すようにカメラモジュールＡが被写体Ｔａに対して左側に位置し、カメラモジュールＢが被写体Ｔａに対して右側に位置する場合、カメラモジュールＡで撮像された撮像画像ａ１には、カメラモジュールＢで撮像された撮像画像ｂ１の右端部分ｂ１２に対応する部分がなく、カメラモジュールＢで撮像された撮像画像ｂ１の右端部分ｂ１２が撮像画像ａ１に対する画角外領域ａ１１に対応する部分となっており、逆に、カメラモジュールＢで撮像された撮像画像ｂ１には、カメラモジュールＡで撮像された撮像画像ａ１の左端部分ａ１２に対応する部分がなく、カメラモジュールＡで撮像された撮像画像ａ１の左端部分ａ１２が撮像画像ｂ１に対する画角外領域ｂ１１に対応する部分となっている。

このため、２つのカメラモジュールＡおよびＢで得られた撮像画像ａ１およびｂ１の比較をする場合、一方の撮像画像ａ１（あるいはｂ１）の、他方の撮像画像ｂ１（あるいはａ１）に対する画角外領域ｂ１１（あるいはａ１１）に相当する部分ａ１２（あるいはｂ１２）については比較を行うことができない。なお、これらの撮像画像中の黒丸印は、被写体のドット模様を示し、×印は、ドット模様のドット部分の画像と同様な欠陥画素による画像を示している。

具体的には、一方の撮像画像ａ１の、他方の撮像画像ｂ１の画角外領域ｂ１１に対応する左端部分ａ１２に欠陥画素（×印）Ｄｐが存在する場合、撮像画像ａ１と撮像画像ｂ１とを比較しても、この撮像画像ａ１の左端部分ａ１２は撮像画像ｂ１に対する画角外領域ｂ１１に対応しているため、これらの撮像画像の比較によって欠陥画素Ｄｐによる画像が本来の正常な画像であるか否かの判断をすることができない。

このように、特許文献２に開示の欠陥検出方法では、補正対象となる撮像画像ａ１あるいはｂ１の全領域に対して精度よく欠陥領域が含まれるか否かの判定を行うことができないという問題がある。

本発明は、上記のような問題点を解決するためになされたものであり、複数の撮像部で共通の被写体を撮像して得られる互いに視差を有する複数の最適焦点画像の各々の全領域を対象として、各最適焦点画像における画像欠陥と疑われる部分を他の撮像画像の対応する部分と比較する処理を行うことができ、これにより、高精度にかつ高速に個々の最適焦点画像に画像欠陥部分が存在するか否かの判定を行うことができる撮像装置および欠陥処理方法、この欠陥処理方法をコンピュータにより行うための欠陥処理プログラム、並びにこのような撮像装置を備えた電子情報機器を得ることを目的とする。

本発明に係る撮像装置は、被写体を撮像する複数の撮像部を有し、該撮像部は、該被写体からの光を光電変換して撮像信号を出力する撮像素子と、該被写体からの光を該撮像素子に導く光学系とを含む撮像装置であって、該複数の撮像部の各々が最適焦点位置で該被写体を撮像して最適焦点画像を生成する最適焦点モードと、該複数の撮像部の各々が、該最適焦点位置での画角より大きな画角で該被写体を撮像して画角拡大画像を生成する画角拡大モードとを該光学系の焦点位置の制御により切り替える動作制御部と、欠陥の判定対象となる最適焦点画像である判定対象画像の、他の最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分を、該他の最適焦点画像に対応する画角拡大画像を用いて検出する欠陥検出部とを備えたものであり、そのことにより上記目的が達成される。

本発明は、上記撮像装置において、前記欠陥検出部は、前記判定対象画像における、画像欠陥部分が発生していると疑われる欠陥疑惑部分を、該判定対象画像の画像解析により検出する画像解析部と、該欠陥疑惑部分を含む判定対象画像を、該判定対象画像以外の他の最適焦点画像あるいは該他の最適焦点画像に対応する画角拡大画像と比較する比較部とを有し、該比較部での比較結果に基づいて該判定対象画像に含まれる画像欠陥部分を検出することが好ましい。

本発明は、上記撮像装置において、前記比較部は、前記判定対象画像の欠陥疑惑部分が、該判定対象画像における前記他の最適焦点画像に対する画角内領域に対応する部分に含まれているとき、該判定対象画像における欠陥疑惑部分を、該他の最適焦点画像における、該欠陥疑惑部分に対応する部分と比較し、該判定対象画像の欠陥疑惑部分が、該判定対象画像における該他の最適焦点画像に対する画角外領域に対応する部分に含まれているとき、該判定対象画像における欠陥疑惑部分を、該他の最適焦点画像に対応する画角拡大画像における、該欠陥疑惑部分に対応する部分と比較することが好ましい。

本発明は、上記撮像装置において、前記動作制御部は、操作者によるシャッター操作信号を受けたとき、前記複数の撮像部の動作モードを、前記複数の撮像部の各々が最適焦点位置で前記被写体を撮像して最適焦点画像を生成する最適焦点モードに設定し、該最適焦点モードで得られた複数の最適焦点画像のうちの前記判定対象画像の欠陥疑惑部分が、該判定対象画像における前記他の最適焦点画像に対する画角外領域に対応する部分に含まれているとき、該他の最適焦点画像に対応する画角拡大画像が生成されるように、該最適焦点モードを前記画角拡大モードに切り換えることが好ましい。

本発明は、上記撮像装置において、前記動作制御部は、操作者によるシャッター操作信号を受けたとき、前記複数の撮像部の動作モードを、該複数の撮像部の各々が最適焦点位置で前記被写体を撮像して最適焦点画像を生成する最適焦点モードに設定し、該最適焦点モードで該撮像部により該最適焦点画像が生成された後、前記他の最適焦点画像に対応する画角拡大画像が生成されるように、該最適焦点モードを前記画角拡大モードに切り換えることが好ましい。

本発明は、上記撮像装置において、前記欠陥検出部により検出された前記判定対象画像の画像欠陥部分を補正する補正処理部を備えたことが好ましい。

本発明は、上記撮像装置において、前記補正処理部は、前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値を用いて補正することが好ましい。

本発明は、上記撮像装置において、前記補正処理部は、前記判定対象画像の画像欠陥部分を、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値を用いて補正することが好ましい。

本発明は、上記撮像装置において、前記補正処理部は、前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値と、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値とを用いて補正することが好ましい。

本発明は、上記撮像装置において、前記複数の撮像部として第１および第２の撮像部を備え、該第１の撮像部は、前記被写体からの光の光電変換により該被写体を撮像する第１の撮像素子と、該被写体からの光を該第１の撮像素子に導く第１の光学系とを有し、該第２の撮像部は、該被写体からの光の光電変換により該被写体を撮像する第２の撮像素子と、該被写体からの光を該第２の撮像素子に導く、該第１の光学系の光軸と所定の間隔を空けて平行に位置する光軸を有する第２の光学系とを有し、該欠陥検出部は、該２つの撮像部の一方で得られた最適焦点画像の、該２つの撮像部の他方で得られた最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分を、該一方の撮像部で得られた最適焦点画像と該他方の撮像部で得られた画角拡大画像との比較により検出することが好ましい。

本発明は、上記撮像装置において、前記光学系は、前記被写体からの光を対応する前記撮像素子に導入する焦点レンズを有し、前記動作制御部は、前記最適焦点モードを前記画角拡大モードに切り換えるとき、該撮像素子により撮像される画像の画角が拡大するように該焦点レンズを該光学系の光軸の最適焦点位置から移動させることが好ましい。

本発明に係る欠陥処理方法は、被写体を撮像する複数の撮像部を備え、該撮像部が、該被写体からの光を光電変換して撮像信号を出力する撮像素子と、該被写体からの光を該撮像素子に導く光学系とを含む撮像装置で得られた撮像画像の画像欠陥部分を処理する欠陥処理方法であって、該複数の撮像部の各々が最適焦点位置で該被写体を撮像して最適焦点画像を生成するステップと、該複数の撮像部の各々が、該最適焦点位置での画角より大きな画角で該被写体を撮像して画角拡大画像を生成するステップと、欠陥の判定対象となる最適焦点画像である判定対象画像の、他の最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分を、該他の最適焦点画像に対応する画角拡大画像を用いて検出するステップとを含むものであり、そのことにより上記目的が達成される。

本発明は、上記欠陥処理方法において、前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値を用いて補正するステップを含むことが好ましい。

本発明は、上記欠陥処理方法において、前記判定対象画像の画像欠陥部分を、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値を用いて補正するステップを含むことが好ましい。

本発明は、上記欠陥処理方法において、前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値と、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値とを用いて補正するステップを含むことが好ましい。

本発明に係る欠陥処理プログラムは、上述した本発明に係る欠陥処理方法をコンピュータにより実行するための欠陥処理プログラムであり、そのことにより上記目的が達成される。

本発明に係る電子情報機器は、被写体の撮像を行う撮像手段を備えた電子情報機器であって、該撮像手段は、上述した本発明に係る撮像装置であり、そのことにより上記目的が達成される。

次に作用について説明する。

本発明においては、被写体を撮像する複数の撮像部と、各撮像部での撮像動作を制御する動作制御部とを備えた撮像装置において、この動作制御部を、複数の撮像部の各々が最適焦点位置で被写体を撮像して最適焦点画像を生成する最適焦点モードと、これらの撮像部の各々が、最適焦点位置での画角より大きな画角で被写体を撮像して画角拡大画像を生成する画角拡大モードとを光学系の焦点位置の制御により切り替えるように構成し、欠陥の判定対象となる最適焦点画像である判定対象画像の、他の最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分の検出に、他の最適焦点画像の画角を拡大して得られる画角拡大画像を用いるので、複数の撮像部の配置上、各最適焦点画像に他の最適焦点画像に対する画角外領域に対応する部分が必ず発生するとしても、他の最適焦点画像に対する画角外領域の画像情報を、他の最適焦点画像の画角を拡大した画角拡大画像から取得することが可能となる。

このため、判定対象画像の全領域、つまり欠陥の判定対象となる１つの撮像部で得られた最適焦点画像の、他の撮像部で得られた最適焦点画像の画角外領域に対応する部分を含めた全領域を、他の撮像部で得られた撮像画像と比較することができる。

つまり、複数の撮像部で共通の被写体を撮像して得られる互いに視差を有する複数の最適焦点画像の各々の全領域を対象として、各最適焦点画像における画像欠陥と疑われる部分を他の撮像画像の対応する部分と比較する処理を行うことができる。これにより、視差を有する複数の撮像部で得られる最適焦点画像の各々に対して、他の撮像部で得られる撮像画像の情報を用いて、高精度にかつ高速に画像欠陥部分が存在するか否かの判定を行うことができる。

また、本発明においては、動作制御部は、操作者によるシャッター操作に対応する操作信号を受けたとき、複数の撮像部の動作モードを、複数の撮像部の各々が最適焦点画像を生成する最適焦点モードに設定し、最適焦点モードで得られた複数の最適焦点画像のうちの判定対象画像の欠陥疑惑部分が、判定対象画像における他の最適焦点画像に対する画角外領域に対応する部分に含まれているとき、他の最適焦点画像に対応する画角拡大画像が生成されるように、最適焦点モードを画角拡大モードに切り換えるので、判定対象画像の画像欠陥部分を検出する際に不必要な画角拡大画像を生成する無駄な動作を回避することができる。

また、本発明においては、動作制御部は、操作者によるシャッター操作信号を受けたとき、複数の撮像部の動作モードを、複数の撮像部の各々が最適焦点位置で被写体を撮像して最適焦点画像を生成する最適焦点モードに設定し、最適焦点モードで撮像部により最適焦点画像が生成された後、他の最適焦点画像に対応する画角拡大画像が生成されるように、最適焦点モードを画角拡大モードに切り換えるので、撮像時には判定対象画像における画像欠陥部分を検出する処理を省略し、この画像欠陥部分の検出処理を、撮像後に最適焦点画像の編集や表示、あるいは記録媒体への記録を行うなどの、操作者が重要と考える撮像画像に対してのみ行うことができ、画像欠陥部分の検出処理を効率よく行うことができる。

また、本発明においては、判定対象画像の画像欠陥部分を、判定対象画像の、画像欠陥部分の周囲に位置する周辺画素の画素値を用いて補正するので、画像欠陥部分の画素値の補正が、同一の撮像素子の画素値により行われることとなり、補正した部分の画素値の特性が他の部分の画素値の特性と大きく異なるのを回避できる。

また、本発明においては、判定対象画像の画像欠陥部分を、判定対象画像以外の他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値を用いて補正するので、判定対象画像の画像欠陥部分には、実質的に本来の判定対象画像が持つべき画素値を補填することができる。

また、本発明では、判定対象画像の画像欠陥部分を、判定対象画像の、画像欠陥部分の周囲に位置する周辺画素の画素値と、他の最適焦点画像に対応する画角拡大画像における、画像欠陥部分に対応する部分の画素の画素値とを用いて補正するので、判定対象画像の画像欠陥部分には、同じ撮像素子における画像欠陥部分の周辺領域の画素値と、異なる撮像素子の、該画像欠陥部分に対応する撮像領域の画素値との重み付けにより、より適切な画素値を補填することができる。

以上のように、本発明によれば、複数の撮像部で共通の被写体を撮像して得られる互いに視差を有する複数の最適焦点画像の各々の全領域を対象として、各最適焦点画像における画像欠陥と疑われる部分を他の撮像画像の対応する部分と比較する処理を行うことができ、これにより、高精度にかつ高速に個々の最適焦点画像に画像欠陥部分が存在するか否かの判定を行うことができる撮像装置および欠陥処理方法、この欠陥処理方法をコンピュータにより行うための欠陥処理プログラム、並びにこのような撮像装置を備えた電子情報機器を実現することができる。

図１は、本発明の実施形態１による撮像装置を説明するブロック図であり、この撮像装置の全体構成を示している。 図２は、本発明の実施形態１による撮像装置を説明する図であり、図２（ａ）はこの撮像装置を構成するモジュール制御部の構成を示し、図２（ｂ）はこの撮像装置を構成するカメラモジュールの断面構造を示している。 図３は、本発明の実施形態１による撮像装置の動作を説明する図であり、判定対象画像の画像欠陥部分を検出して補正する処理をフローチャートにより示している。 図４は、本発明の実施形態１による撮像装置の動作を説明する図であり、判定対象画像における他の最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分を検出する処理を示している。 図５は、本発明の実施形態２による撮像装置を説明する図であり、この撮像装置の全体構成を示している。 図６は、本発明の実施形態２による撮像装置を説明する図であり、この撮像装置を構成するモジュール制御部の構成を示している。 図７は、本発明の実施形態２による撮像装置の動作を説明する図であり、図７（ａ）は、ベストピント画像および画角拡大画像を撮像する処理をフローチャートにより示し、図７（ｂ）は、判定対象画像（ベストピント画像）の画像欠陥部分を検出して補正する処理をフローチャートにより示している。 図８は、本発明の実施形態３として、実施形態１あるいは２の撮像装置を撮像手段に用いた電子情報機器の概略構成例を示すブロック図である。 図９は、特許文献２に開示の従来の撮像装置を説明する図であり、この従来の撮像装置の構成を概略的に示している。 図１０は、特許文献２に開示の従来の撮像装置を説明する図であり、この従来の撮像装置で行われる画像欠陥領域の補正処理を概念的に示している。 図１１は、特許文献２に開示の撮像装置における問題を説明するための図であり、各カメラモジュールで生成された撮像画像とこれに対する画角外領域とを具体的に示している。

以下、本発明の実施形態について図面を参照しながら説明する。

（実施形態１）
図１は、本発明の実施形態１による撮像装置を説明するブロック図であり、この撮像装置の構成を示している。

この実施形態１の撮像装置１００は、被写体を撮像する第１および第２のカメラモジュール１１０および１２０を有しており、これらのカメラモジュール１１０および１２０はそれぞれの光軸Ｌ１およびＬ２が所定間隔を隔てて平行になるように配置されている。

第１のカメラモジュール１１０は、被写体Ｔａからの光を光電変換して撮像信号Ｃｓ１を出力する第１のイメージセンサ（撮像素子）１１１と、被写体Ｔａからの光を第１のイメージセンサ１１１に導く第１の光学系１１４と、第１のイメージセンサ１１１を駆動信号Ｄ１により駆動する駆動回路１１２と、第１のイメージセンサ１１１から出力される撮像信号Ｃｓ１をタイミング信号などの制御信号Ｃｐ１に基づいて処理して第１の画像データＰｓ１を出力する信号処理部１１３とを有している。ここで、第１の光学系１１４は、被写体からの光を第１のイメージセンサ１１１の撮像面上に結像させる焦点レンズ１１４ａと、この焦点レンズ１１４ａの被写体側に配置され、絞り制御信号Ａｐ１に基づいてイメージセンサに入射する被写体光（被写体からの光）の光量を調整する絞り機構１１４ｂと、上記焦点レンズ１１４ａを位置制御信号Ｌｄ１に基づいて光軸Ｌ１の方向に沿って移動させるレンズ駆動機構１１４ｃとを有している。

第２のカメラモジュール１２０は、第１のカメラモジュール１１０と同一の構成を有しており、つまり、被写体Ｔａからの光を光電変換して撮像信号Ｃｓ２を出力する第２のイメージセンサ（撮像素子）１２１と、被写体Ｔａからの光を第２のイメージセンサ１２１に導く第２の光学系１２４と、第２のイメージセンサ１２１を駆動信号Ｄ２により駆動する駆動回路１２２と、第２のイメージセンサ１２１から出力される撮像信号Ｃｓ２をタイミング信号などの制御信号Ｃｐ２に基づいて処理して第２の画像データＰｓ２を出力する信号処理部１２３とを有している。ここで、第２の光学系１２４は、被写体からの光を第２のイメージセンサ１２１の撮像面上に結像させる焦点レンズ１２４ａと、この焦点レンズ１２４ａの被写体側に配置され、絞り制御信号Ａｐ２に基づいて被写体光（被写体からの光）の光量を調整する絞り機構１２４ｂと、上記焦点レンズ１２４ａを位置制御信号Ｌｄ２に基づいて光軸Ｌ２の方向に沿って移動させるレンズ駆動機構１２４ｃとを有している。

また、撮像装置１００は、各カメラモジュール１１０および１２０の駆動回路、信号処理部、絞り機構、およびレンズ駆動機構を制御するとともに、各カメラモジュール１１０および１２０からの画像データＰｓ１およびＰｓ２に基づいて、撮像画像における画像欠陥部分の検出および補正を行うモジュール制御部（ＣＰＵ）１３０と、モジュール制御部１３０での処理対象となる画像データを格納する一時記憶メモリ１４０とを有している。さらに、撮像装置１００は、モジュール制御部１３０で処理した画像データに対して、階調変換、ホワイトバランス補正、γ補正処理などの各種画像処理を施す画像信号処理回路１７０と、種々の処理を施した画像データを表示する表示装置１５０と、種々の処理を施した画像データを記録する記録装置１６０と、画像欠陥部分の検出処理および画像欠陥部分の補正処理などの各種処理を行うプログラム、並びに各部の制御を行うための制御用プログラム、さらには設定情報などを格納しているＥＥＰＲＯＭ１８０とを有している。ここで、表示装置１５０は、液晶パネルなどの表示部１５２と、この表示部１５２で画像データに応じた画像が表示されるようにこの表示部１５２を制御する表示制御部１５１とを有し、記録装置１６０は、画像データを格納する記録媒体１６２と、該記録媒体に対するデータのアクセスを制御するメモリ制御部１６１とを有している。

ここで、モジュール制御部１３０は、一時記憶メモリ１４０、表示制御部１５１、メモリ制御部１６１、画像信号処理回路１７０およびＥＥＰＲＯＭ１８０と相互にデータのアクセスが可能となるようにデータバスＤｂｕｓにより接続されている。また、カメラモジュールを構成するイメージセンサは、例えば、ＣＣＤイメージセンサあるいはＣＭＯＳイメージセンサといった固体撮像素子であるが、光学系とともにモジュール化可能な撮像素子であればどのようなものでもよい。

図２は、本発明の実施形態１による撮像装置を構成するカメラモジュールおよびモジュール制御部の具体的な構成を説明する図であり、図２（ａ）はこのモジュール制御部の構成を示している。

この撮像装置１００のモジュール制御部１３０は、第１および第２のカメラモジュール１１０および１２０からの画像データＰｓ１およびＰｓ２を受けて撮像画像における画像欠陥部分を検出して補正する処理を実行する動作制御部１３１と、この動作制御部１３１から供給された画像データＰｓ１およびＰｓ２ｂに基づいて、各カメラモジュールで得られたベストピント画像（つまり、最適焦点位置で撮像された最適焦点画像）における、画像欠陥部分が発生していると疑われる欠陥疑惑部分を、このベストピント画像の画像解析により検出し、解析結果を示す解析信号Ａｎを出力する画像解析部１３２と、欠陥の判定対象となるベストピント画像（以下、判定対象画像ともいう。）における欠陥疑惑部分を、判定対象画像以外の他のベストピント画像における、該欠陥疑惑部分に対応する部分であって、画像欠陥部分が発生していると疑われていない部分と比較し、比較結果を示す比較結果信号Ｃｐｓを出力する比較部１３３とを備えている。この比較部１３３は、欠陥疑惑部分が、判定対象画像における他のベストピント画像に対する画角内領域に対応する部分に含まれているとき、判定対象画像における欠陥疑惑部分を、他のベストピント画像における、該欠陥疑惑部分に対応する部分であって、画像欠陥部分が発生していると疑われていない部分と比較し、一方、欠陥疑惑部分が、判定対象画像における他のベストピント画像に対する画角外領域に対応する部分に含まれているとき、判定対象画像における欠陥疑惑部分を、他のベストピント画像に対応する画角拡大画像（ベストピント画像の画角を拡大して撮像した画像）における、該欠陥疑惑部分に対応する部分であって、画像欠陥部分が発生していると疑われていない部分と比較するように構成されている。

また、モジュール制御部１３０は、比較部１３３により検出された判定対象画像の画像欠陥部分を補正する補正処理部１３４を備え、さらに、信号処理部１１３および１２３からの画像データ、画像解析部１３２での解析結果Ａｎなどに基づいて、絞り機構１１４ｂおよび１２４ｂ並びにレンズ駆動機構１１４ｃおよび１２４ｃを制御する光学系駆動制御部１３５を備えている。ここで、各カメラモジュールは、モジュール制御部１３０の制御の下でオートフォーカス（ＡＦ動作）を行うように構成されている。また、上記モジュール制御部１３０は、上記ＥＥＰＲＯＭ１８０に格納されている各種プログラムを読み込んで、動作制御部１３１、画像解析部１３２、比較部１３３、補正処理部１３４、および光学系駆動制御部１３５を少なくとも構築するＣＰＵを含むものである。

また、カメラモジュール１１０および１２０は同一構造を有しているので、以下、第１のカメラモジュールの構造について具体的に説明する。

図２（ｂ）は、第１のカメラモジュールの断面構造を示している。

このカメラモジュール１１０は、モジュール基板５０ａと、このモジュール基板５０ａ上に搭載されたイメージセンサ１１１と、このイメージセンサ１１１を囲むよう配置された下側カバー５３とを有し、この下側カバー５３には、イメージセンサ１１１の撮像面に対向するようにカバー開口部５３ａが形成されており、このカバー開口部５３ａの下側には、リッドガラス５９が装着されており、またこのリッドガラス５９に重なるように、被写体からの光の赤外成分を遮断する赤外線カットフィルタ（図示せず）が配置されている。

なお、ここでは、イメージセンサ１１１を駆動する駆動回路１１２およびイメージセンサ１１１からの撮像信号Ｃｓ１を処理する信号処理部１１３は、モジュール基板５０ａ上にイメージセンサ１１１の周囲に位置するように配置されている。ただし、イメージセンサとその周辺回路とは同一チップ上に形成したものでもよい。

また、下側カバー５３上には上側カバー５４が配置されており、この上側カバー５４内には、被写体からの光を集光するレンズ１１４ａと、このレンズ１１４ａを保持するレンズホルダ５６と、このレンズホルダ５６を光軸Ｌ１の方向に沿って移動させるレンズ駆動機構１１４ｃとが収納されている。このレンズ駆動機構１１４ｃは、上記レンズホルダ５６に取り付けられた永久磁石５７と、この永久磁石５７を囲むよう配置された電磁石としてのコイル５８とを有しており、レンズホルダ５６は図示しないバネ部材により下側カバー５３および上側カバー５４に支持されている。

なお、レンズ駆動機構１１４ｃは、上記のような構成に限定されるものではなく、例えば、レンズホルダには電磁石を取付け、永久磁石は上側カバー１５４に取り付けてもよく、従って、カメラモジュールの構成は図２（ｂ）に示すものに限定されるものではない。

次に動作について説明する。

図３は、本発明の実施形態１による撮像装置の動作を説明する図であり、判定対象画像（欠陥の判定対象となるベストピント画像）の画像欠陥部分を検出して補正する処理をフローチャートにより示している。

この実施形態１の撮像装置１００は、図３に示すように、第１および第２のカメラモジュール１１０および１２０で、ベストピント画像を取得するとともに、ベストピント画像に対して画角を拡げた画角拡大画像を取得し、ベストピント画像及び対応する画角拡大画像の合計４枚の画像から所要の画像を用いてベストピント画像における画像欠陥部分の検出を行い、これにより、判定対象画像の全領域にわたり画像欠陥部分を検出可能とするものである。

また、この固体撮像素子１００は、上記画像欠陥部分の補正を、判定補正画像における画像欠陥部分の周囲に位置する周囲画素の情報（画素値）、及び判定対象画像以外のもう一方のベストピント画像あるいはその画角拡大画像における、判定対象画像の画像欠陥部分に該当する部分の画素の情報（画素値）の少なくとも一方の情報（画角値）を用いて行うものである。

以下、この撮像装置の動作について詳述する。

この撮像装置１００では、撮像モードにて操作者がシャッター操作を行うと、モジュール制御部１３０は、シャッター操作に応じた操作信号Ｓｏｐを受けてオートフォーカス動作を行う。具体的には、モジュール制御部１３０では、動作制御部１３１が、レンズ駆動信号Ｌｄ１およびＬｄ２によりレンズ駆動部１１４ｃおよび１２４ｃを駆動して焦点レンズ１１４ａおよび１２４ａの位置を変えてイメージセンサ１１１および１２１で被写体の撮像を行い、イメージセンサ１１１および１２１から得られる撮像画像のコントラストなどに基づいて最適焦点位置を検出し、最適焦点位置で撮像した画像（ベストピント画像）ａ１およびｂ１を取得する（ステップＳ１）。つまり、ステップＳ１では、各カメラモジュール１１０および１２０はベストピント画像ａ１およびｂ１の撮影を行う。このとき、各カメラモジュール１１０および１２０で撮影されたベストピント画像ａ１およびｂ１の画像データＰｓ１およびＰｓ２は信号処理部１１３および１２３からモジュール制御部１３０の動作制御部１３１に供給され、動作制御部１３１により一時記憶メモリ１４０に一旦格納される。

次に、動作制御部１３１が、一時記憶メモリ１４０に格納されている画像データＰｓ１およびＰｓ２を画像解析部１３２に供給すると、この画像解析部１３２では、この画像データＰｓ１およびＰｓ２に基づいて、ベストピント画像ａ１およびｂ１に、画像欠陥部分が発生していると疑われる部分（以下、欠陥疑惑部分という。）が含まれているか否かを判定する（ステップＳ２）。

この欠陥疑惑部分の判定の仕方には種々の方法を用いることができ、例えば、欠陥の判定対象となるベストピント画像における輝度が所定の値に達しない閉じた領域を欠陥疑惑部分とする、あるいは、ベストピント画像における注目画素とその周辺画素との相関に基づいて相関の極端に低い注目画素を欠陥疑惑画素とするといった方法を用いることができる。

次に、画像解析部１３２がこの判定結果を示す判定信号Ａｎを動作制御部１３１に送る。この判定の結果、いずれのベストピント画像ａ１およびｂ１も欠陥疑惑部分を含まない場合、動作制御部１３１は、メモリ制御部１６１を制御して、一時記憶メモリ１４０に格納されているベストピント画像ａ１およびｂ１の画像データＰｓ１、Ｐｓ２を記憶装置１６０の記録媒体１６２に格納する。これにより撮像画像であるベストピント画像の記録が行われる（ステップＳ９）。

一方、上記判定の結果、ベストピント画像ａ１およびｂ１のいずれかに欠陥疑惑部分が含まれる場合、動作制御部１３１は、画像データＰｓ１およびＰｓ２と、画像解析部１３２からの解析信号Ａｎに含まれる欠陥疑惑部分の位置を示す情報とに基づいて、欠陥疑惑部分が、ベストピント画像ａ１およびｂ１の一方における、その他方のベストピント画像に対する画角外領域に対応する部分に含まれるか否かの判定を行う（ステップＳ３）。

例えば、図４に示すように、ベストピント画像ａ１に欠陥疑惑部分Ｄｐがある場合、動作制御部１３１は、この欠陥疑惑部分Ｄｐが、ベストピント画像ａ１におけるベストピント画像ｂ１の画角外領域ｂ１１に対応する部分（つまり、ベストピント画像ａ１の左端部分ａ１２）に含まれているか否かの判定を行う。

この判定の結果、欠陥疑惑部分が、ベストピント画像ａ１およびｂ１の一方における、その他方の画角内領域に対応する部分に含まれているときは、モジュール制御部１３０では、ベストピント画像ａ１およびｂ１同士の比較により欠陥疑惑部分が画像欠陥部分であるか、あるいは本来の画像を構成する正常部分であるかの判定が行われ、画像欠陥部分であれば、これを修復する処理が行われ、画像欠陥部分でなければ、撮像画像であるベストピント画像の記録が行われる（ステップＳ４ａ）。このとき、ベストピント画像ａ１およびｂ１同士の比較は、動作制御部１３１の制御の下で比較部１３３により行われ、画像欠陥部分の補正は、動作制御部１３１の制御の下で補正処理部１３４により行われる。補正された画像データＰｓ１あるいはＰｓ２である画像データＡｐｓは、動作制御部１３１を介して記録装置１６０の記録媒体１６２に格納される。その後、動作制御部１３１は、ステップＳ２で検出された欠陥疑惑部分を全て処理したか否かの判断を行い、全ての欠陥疑惑部分に対する判定および補正処理が完了しておれば、最後に一時記憶メモリ１４０に格納されたベストピント画像の最新の補正データを処理済みの画像データとして記録装置に格納する（ステップＳ９）。

一方、ステップＳ８での判定の結果、未処理の欠陥疑惑部分が残っておれば、動作制御部１３１は、ステップＳ３の処理に戻り、残りの欠陥疑惑部分の１つに対して上記ステップＳ３、Ｓ４、Ｓ４ａ、Ｓ５〜Ｓ９の処理を行う。

また、ステップＳ３での判定の結果、欠陥疑惑部分が、ベストピント画像ａ１およびｂ１の一方における、他方の画角外領域に対応する部分に含まれているときは、モジュール制御部１３０は、光学系駆動制御部１３５に光学系制御信号ＣＬｓより、焦点レンズ１１４ａおよび１２４ａを、ベストピント画像ａ１およびｂ１よりも画角の大きな画角拡大画像ａ２、ｂ２が得られる位置に移動させるように指令する。これにより、光学系駆動制御部１３５はレンズ駆動信号Ｌｄ１およびＬｄ２によりレンズ駆動機構１１４ｃおよび１２４ｃを駆動して焦点レンズ１１４ａおよび１２４ａを、イメージセンサ１１１および１２１から遠ざかる方向に移動させる。この状態で、カメラモジュール１１０および１２０は被写体の撮像を行って画角拡大画像を生成する（ステップＳ４）。得られた画角拡大画像ａ２およびｂ２の画像データＰｓ１およびＰｓ２がモジュール制御部１３０に供給されると、動作制御部１３１は、画角拡大画像ａ２およびｂ２の画像データＰｓ１およびＰｓ２を比較部１３３に供給するとともに、一時記憶メモリ１４０に格納されているベストピント画像ａ１およびｂ１の画像データＰｓ１およびＰｓ２を比較部１３３に供給する。

ここで、画角拡大画像ａ２は、ベストピント画像ａ１と、ベストピント画像ｂ１の右端部分ｂ１２に対応する画角外領域ａ１１の画像とを合わせた合成画像ａ１０を縮小した縮小合成画像ｒａ１０を含んでおり、画角拡大画像ｂ２は、ベストピント画像ｂ１と、ベストピント画像ａ１の左端部分ａ１２に対応する画角外領域ｂ１１の画像とを合わせた合成画像ｂ１０を縮小した縮小合成画像ｒｂ１０を含んでいる。

なお、上記画角拡大画像ａ２はベストピント画像ａ１の画角を拡大して得られる撮像画像であり、上記画角拡大画像ｂ２はベストピント画像ｂ１の画角を拡大して得られる撮像画像である。画角拡大画像２ａには、画角拡大画像ｂ２の右端部分に対応する部分は含まれておらず、この部分はこの画角拡大画像ａ２の画角外領域ａ２１に対応しており、画角拡大画像ｂ２には、画角拡大画像ａ２の左端部分に対応する部分は含まれておらず、この画角拡大画像ｂ２の画角外領域ｂ２１に対応している。

比較部１３３では、欠陥疑惑部分Ｄｐが例えばベストピント画像ａ１の左端部分ａ１２（つまり、ベストピント画像ｂ１の画角外領域ｂ１１に対応する部分）に位置している場合は、判定対象画像であるベストピント画像ａ１を、他のベストピントｂ１の画角を拡大して得られた画角拡大画像ｂ２と比較し（ステップＳ５）、画角拡大画像ｂ２における、ベストピント画像ａ１の欠陥疑惑部分Ｄｐに対応する部分に、欠陥疑惑部分Ｄｐと同様な画素値を持つ画素が存在するか否かの判定を行う（ステップＳ６）。

この判定の結果、ベストピント画像ａ１の欠陥疑惑部分Ｄｐが画像欠陥部分ではなかった場合は、つまり、画角拡大画像ｂ２における、ベストピント画像ａ１の欠陥疑惑部分Ｄｐに対応する部分に、欠陥疑惑部分Ｄｐと同様な画素値を持つ画素が存在している場合は、動作制御部１３１は、すべての欠陥疑惑部分を処理したか否かの判定を行い（ステップＳ８）、全ての欠陥疑惑部分に対する判定および補正処理が完了しておれば、処理済みの画像データを記録装置に格納する（ステップＳ９）。

一方、未処理の欠陥疑惑部分が残っておれば、動作制御部１３１は、ステップＳ３の処理に戻り、残りの欠陥疑惑部分の１つに対して上記ステップＳ４、Ｓ４ａ、Ｓ５〜Ｓ９の処理を行う。

また、ステップＳ６での判定の結果、ベストピント画像ａ１の欠陥疑惑部分Ｄｐが画像欠陥部分であった場合は、つまり、画角拡大画像ｂ２における、ベストピント画像ａ１の欠陥疑惑部分Ｄｐに対応する部分に、欠陥疑惑部分Ｄｐと同様な画素値を持つ画素が存在していない場合は、画像欠陥部分の補正は、動作制御部１３１の制御の下で補正処理部１３４により行われる。

この補正は、該判定対象画像の画像欠陥部分を、該判定対象画像の、画像欠陥部分の周囲に位置する周辺画素の画素値を用いて補間することにより行われる。

ただし、画像欠陥部分の画角値を補正する方法はこれに限定されるものではなく、該判定対象画像の画像欠陥部分を、該他のベストピント画像に対応する画角拡大画像における、判定対象画像の画像欠陥部分に対応する部分の画素の画素値を用いて補正してもよい。

さらに、該判定対象画像の画像欠陥部分を、判定対象画像の、画像欠陥部分の周囲に位置する周辺画素の画素値と、該他のベストピント画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値とを用い、具体的には、両者の画素値を適宜重み付けして加算した合成画素値を用いて補正してもよい。

そして、補正処理部１３４で補正された画像データＣｐｓは動作制御部１３１を介して一時記憶メモリ１４０に格納される。その後、動作制御部１３１は、ステップＳ２で検出された欠陥疑惑部分を全て処理したか否かの判断を行い（ステップＳ８）、未処理の欠陥疑惑部分が残っておれば、動作制御部１３１は、ステップＳ３の処理に戻り、全ての欠陥疑惑部分に対する判定および補正処理が完了しておれば、一時記憶メモリ１４０に格納した補正済みの画像データを処理済みの画像データとして記録装置１６０に格納する（ステップＳ９）。

次に作用効果について説明する。

例えば、複数台のカメラ（実施形態１では２つのカメラモジュール）により同一被写体Ｔａを撮影して撮像画像を取得する場合、各撮像画像に特有の画像部分が発生したときは、その画像部分が画素欠陥などに起因した画像欠陥部分であるか否かの判定を行う必要がある。

ところが、それぞれのカメラ（例えば、撮像部としてのカメラモジュール）で得られた撮像画像にはカメラの配置上、必ず他の撮像画像の画角外領域に対応する部分が発生するため、この実施形態１の撮像装置１００では、撮像画像（ベストピント画像）に対して、オートフォーカスなどの機能を利用して画角を拡げた画角拡大画像を取得し、通常の撮影、つまり最適焦点位置での撮影では得られない画角外の情報を、欠陥の判定対象となる判定対象画像以外のベストピント画像から取得し、判定対象画像における、他のベストピント画像に対する画角外領域に対応する部分を、この他のベストピント画像の画角を拡げた画角拡大画像と比較することで、判定対象画像における画像欠陥部分を検出している。

従って、この実施形態１の撮像装置１００では、２つのカメラモジュール１１０および１２０により、例えば立体画像を構成する視差を有する２つの撮像画像（ベストピント画像）を取得する場合、各カメラモジュールで得られる撮像画像のいずれの位置に画像欠陥部分が含まれていても、確実にかつ短時間に、黒キズやシミの原因となる画素欠陥などによる画像欠陥部分を検出することができる。

また、この実施形態１では、判定対象画像の画像欠陥部分に対して、該判定対象画像における、該画像欠陥部分の周辺に位置する画素の画素値、及び画像欠陥を含まない他の撮像画像における対応部分の画素の画素値の少なくとも一方を用いて画像情報を補間するので、２つのカメラモジュールの特性などを考慮して判定対象画像の周辺画素の画素値と他の撮像画像の画素値との重み付けを調整するなどにより、画像欠陥部分に適切な画素値を補填することが可能となる。

このように本実施形態１では、被写体を撮像する第１および第２のカメラモジュール１１０および１２０を有する撮像装置１００において、モジュール制御部１３０を、各カメラモジュールが最適焦点位置で被写体を撮像してベストピント画像ａ１およびｂ１を生成する最適焦点モードと、各カメラモジュールがベストピント画像の画角より大きい画角で被写体を撮像して画角拡大画像ａ２およびｂ２を生成する画角拡大モードとを、各カメラモジュールの光学系１１４および１２４の焦点位置を制御することにより切り替えるように構成し、一方のベストピント画像の、他方のベストピント画像に対する画角外領域に対応する部分に含まれる画像欠陥部分Ｄｐを、他方のベストピント画像の画角を拡大してなる画角拡大画像を用いて検出するようにしたので、視差を有する２つのカメラモジュールで得られた撮像画像の全領域にわたり、高精度にかつ高速に画像欠陥部分が存在するか否かの判定を行うことができる。

つまり、２つ以上のカメラモジュールを有する撮像装置であれば、あらゆる状況においても画像欠陥部分の検出および補正が可能となり、その結果、画像欠陥による画質の品位低下を防止することが可能となる。これにより、撮像装置の製造工程における異物除去にかかるコストの低減、さらに部材性能や設計面における低コスト化も可能となる。

さらに、撮影時に画像欠陥部分（黒キズ・シミ）を確実に検出できるために、可動異物による画質の低下を低減させることも可能となる。

また、使用時に撮像画像の画像欠陥部分の検出および補正が可能となるため、工程出荷時の異物出荷基準を緩和することも可能となる。

さらに、この実施形態１では、操作者によるシャッター操作に対応する操作信号を受けたとき、複数の撮像部の動作モードを、複数の撮像部の各々がベストピント画像を生成する最適焦点モードに設定し、最適焦点モードで得られた複数のベストピント画像のうちの判定対象画像の欠陥疑惑部分が、判定対象画像における他のベストピント画像に対する画角外領域に対応する部分に含まれているとき、他のベストピント画像に対応する画角拡大画像が生成されるように、最適焦点モードを画角拡大モードに切り換えるので、判定対象画像の画像欠陥部分を検出する際に不必要な画角拡大画像を生成する無駄な動作を回避することができ、電池など消費を抑えることができる。
（実施形態２）
図５は、本発明の実施形態２による撮像装置を説明する図であり、この撮像装置の全体構成を示している。

この実施形態２の撮像装置２００は、実施形態１の撮像装置１００におけるモジュール制御部１３０に代えて、このモジュール制御部１３０とは、撮像画像を取得する処理および画像欠陥部分を検出し補正する処理を行う順序が異なるモジュール制御部２３０を備えたものであり、その他の構成は、実施形態１における撮像装置１００と同一である。

図６は、本発明の実施形態２による撮像装置を構成するモジュール制御部の構成を示している。

このモジュール制御部２３０は、実施形態１の撮像装置１００を構成するモジュール制御部１３０における動作制御部１３１に代えて、常にベストピント画像とその画角を拡大して得られる画角拡大画像とが撮像されるように、光学系駆動制御部１３５を制御するとともに、イメージセンサ１１１および１２１の駆動回路１１２および１２２を制御する動作制御部２３１を備えたものであり、この実施形態２の撮像装置２００におけるモジュール制御部２３０のその他の構成は実施形態１のモジュール制御部１３０におけるものと同一である。

つまり、この実施形態２の撮像装置２００のモジュール制御部２３０では、動作制御部２３１は、シャッター操作時には、各カメラモジュールでベストピント画像およびこれに対応する画角拡大画像が連続して撮像されるようにカメラモジュール１１０および１２０を制御し、さらに撮像されたベストピント画像及び画角拡大画像の画像データを一時記憶メモリ１４０に格納し、撮像後にこれらの画像を編集あるいは表示したり、記録媒体に保存したりする際に、動作制御部２３１は、ベストピント画像における画像欠陥部分の検出および補正が行われるように、画像解析部１３２、比較部１３３および補正処理部１３４を制御する構成となっている。

次に動作について説明する。

図７は、本発明の実施形態２による撮像装置の動作を説明する図であり、図７（ａ）は、ベストピント画像および画角拡大画像を撮像する処理をフローチャートにより示し、図７（ｂ）は、補正対象画像の画像欠陥部分を検出して補正する処理をフローチャートにより示している。

この実施形態２の撮像装置２００では、図７（ａ）に示すように、シャッター操作時には、動作制御部２３１は、各カメラモジュールでベストピント画像およびこれに対応する画角拡大画像の撮像が連続して行われるようにカメラモジュール１１０、１２０の駆動回路および光学系を制御してベストピント画像および画角拡大画像を取得し、取得したベストピント画像及び画角拡大画像の画像データを一時記憶メモリ１４０に記憶する。このように被写体の撮像を行った後、これらの画像を出力する際、つまり撮像した画像を編集あるいは表示したり、記録媒体に保存したりする際に、図７（ｂ）に示す処理フローに従って、ベストピント画像における画像欠陥部分を検出して補正する処理を行う。

以下、この実施形態２の撮像装置２００の動作について詳述する。

この撮像装置２００では、撮像モードにて操作者がシャッター操作を行うと、モジュール制御部２３０の動作制御部２３１は、シャッター操作に対応する操作信号Ｓｏｐを受けて実施形態１のモジュール制御部１３０と同様にオートフォーカス動作を行って最適焦点位置を検出し、ベストピント画像が撮像されるように光学系１１４および１２４並びにイメージセンサ１１１および１２１の駆動回路１１２および１２２を制御する（ステップＳ１ｂ）。これにより各カメラモジュール１１０および１２０でベストピント画像として撮像画像が生成されると、動作制御部２３１は、撮像画像の画像データＰｓ１およびＰｓｐ２を取得し、これらの撮像画像の画像データを一時記憶メモリ１４０に格納する（ステップＳ２ｂ）。

続いて、モジュール制御部２３０では動作制御部２３１は、光学系駆動制御部１３５に、焦点レンズ１１４ａおよび１２４ａを、ベストピント画像ａ１およびｂ１よりも画角の大きな画角拡大画像ａ２、ｂ２が得られる位置に移動させるように光学系制御信号ＣＬｓにより指令する。これにより、光学系駆動制御部１３５はレンズ駆動機構１１４ｃおよび１２４ｃを駆動して焦点レンズ１１４ａおよび１２４ａを、イメージセンサ１１１および１２１から遠ざかる方向に移動させる。この状態で、カメラモジュール１１０および１２０で被写体の撮像が行われ（ステップＳ３ｂ）、これにより撮像画像として画角拡大画像が生成されると、動作制御部２３１は、これらの撮像画像の画像データＰｓ１およびＰｓ２を取得して一時記憶メモリ１４０に格納する（ステップＳ４ｂ）。

その後、撮影モードを終了して、撮影した画像データを編集あるいは表示したり、記録媒体に記録したりする際に、動作制御部２３１は、図７（ｂ）に示すステップＳ１１〜Ｓ１３、Ｓ１３ａ、Ｓ１４〜Ｓ１８に従って、ベストピント画像で生じている画像欠陥部分が検出され、さらに補正されるように、画像解析部１３２、比較部１３３および補正処理部１３４を制御する。

すなわち、操作者により、撮影した画像データの編集、表示あるいは記録媒体への記録を行うための操作が行われると、動作制御部２３１は、対応する操作信号Ｓｏｐを受けて、撮像したベストピント画像ａ１およびｂ１の画像データＰｓ１およびＰｓ２を一時記憶メモリ１４０から読み出し（ステップＳ１１）、さらに読み出した画像データを画像解析部１３２に供給すると、この画像解析部１３２では、この画像データＰｓ１およびＰｓ２に基づいて、ベストピント画像ａ１およびｂ１に、画像欠陥が発生していると疑われる欠陥疑惑部分が含まれているか否かを判定する（ステップＳ１２）。この欠陥疑惑領域の判定の仕方は実施形態１で説明したものと同じ方法を用いる。

画像解析部１３２はこの判定の結果を示す判定信号Ａｎを動作制御部２３１に送る。この判定の結果、いずれのベストピント画像ａ１およびｂ１も欠陥疑惑部分を含まない場合、動作制御部２３１は、一時記憶メモリ１４０に撮像画像として格納されているベストピント画像ａ１およびｂ１の画像データＰｓ１、Ｐｓ２を出力する（ステップＳ１８）。

具体的には、動作制御部２３１は、一時記憶メモリ１４０に格納されているベストピント画像ａ１およびｂ１の画像データＰｓ１、Ｐｓ２が記憶装置１６０の記録媒体１６２に格納されるようにメモリ制御部１６１を制御したり、あるいは一時記憶メモリ１４０に格納されているベストピント画像ａ１およびｂ１の画像データＰｓ１、Ｐｓ２に基づいて、これらのベストピント画像が表示部１５２で表示されるように表示制御部１５１を制御したり、あるいは動作制御部は、一時記憶メモリ１４０に格納されているベストピント画像ａ１およびｂ１の画像データＰｓ１、Ｐｓ２が編集されるように編集処理部（図示せず）を制御する。

一方、ステップＳ１２での判定の結果、ベストピント画像ａ１およびｂ１のいずれかに欠陥疑惑部分が含まれる場合、動作制御部２３１は、ベストピント画像ａ１およびｂ１の画像データＰｓ１およびＰｓ２と、画像解析部１３２からの判定信号Ａｎに含まれる欠陥疑惑部分の位置を示す情報に基づいて、欠陥疑惑部分が、ベストピント画像ａ１およびｂ１の一方における、その他方の画角外領域に対応する部分に含まれるか否かの判定を行う（ステップＳ１３）。

具体的には、動作制御部２３１は、図４に示すように、例えばベストピント画像ａ１に欠陥疑惑部分Ｄｐがある場合、この欠陥疑惑部分Ｄｐが、ベストピント画像ａ１におけるベストピント画像ｂ１の画角外領域ｂ１１に対応する部分ａ１２に含まれているか否かの判定を行う。

この判定の結果、欠陥疑惑部分Ｄｐが、ベストピント画像ａ１およびｂ１の一方における他方のベストピント画像の画角内領域ｂ１に対応する部分ａ１に含まれているときは、モジュール制御部２３０では動作制御部２３１の制御の下で、ベストピント画像ａ１およびｂ１同士の比較により欠陥疑惑部分Ｄｐが画像欠陥部分であるか、あるいは本来の画像を構成する正常部分であるかの判定が行われ、画像欠陥部分であれば、これを修復する処理が行われ、画像欠陥部分でなければ、撮像画像であるベストピント画像の記録が行われる（ステップＳ１３ａ）。このとき、ベストピント画像ａ１およびｂ１同士の比較は、動作制御部２３１の制御の下で比較部１３３により行われ、画像欠陥部分の補正は、動作制御部２３１の制御の下で補正処理部１３４により行われる。

その後、動作制御部２３１は、ステップＳ１２で検出された欠陥疑惑部分を全て処理したか否かの判断を行い（ステップＳ１７）、全ての欠陥疑惑部分に対する判定および補正処理が完了しておれば、補正処理部１３４で補正された画像データＡｐｓは動作制御部２３１を介して記録装置１６０の記録媒体１６２に格納されたり、表示部１５２に表示されたりする。（ステップＳ１８）。

一方、未処理の欠陥疑惑部分が残っておれば、動作制御部２３１は、ステップＳ１３の処理に戻る。

また、ステップＳ１３での判定の結果、欠陥疑惑部分が、ベストピント画像ａ１およびｂ１の一方における他方の画角外領域に含まれているときは、動作制御部２３１は、一時記憶メモリ１４０に格納されている上記ベストピント画像およびこれに対応する画角拡大画像の画像データＰｓ１およびＰｓ２を比較部１３３に供給する。

比較部１３３では、例えば、欠陥疑惑部分Ｄｐが、ベストピント画像ａ１の左端部分ａ１２（つまり、ベストピント画像ｂ１に対する画角外領域ｂ１１に対応する部分）（図４参照）に位置している場合は、ベストピントａ１と画角拡大画像ｂ２との比較を行って（ステップＳ１４）、ベストピント画像ｂ１の画角を拡大して得られた画角拡大画像ｂ２（図４参照）に含まれる縮小合成領域ｒｂ１０における、欠陥疑惑部分Ｄｐに対応する部分に、欠陥疑惑部分Ｄｐと同様な画素値を持つ画素が存在するか否かの判定を行う（ステップＳ１５）。

この判定の結果、ベストピント画像ａ１の欠陥疑惑部分Ｄｐが欠陥ではなかった場合は、動作制御部２３１は、すべての欠陥疑惑部分を処理したか否かの判定を行い（ステップｓ１７）、全ての欠陥疑惑部分に対する判定および補正処理が完了しておれば、処理済みの画像データを出力する（ステップＳ１８）。つまり、処理済みの画像データを記録媒体１６２に格納したり、あるいは表示部１５２に表示させたりする。

一方、未処理の欠陥疑惑部分が残っておれば、動作制御部１３１は、ステップＳ１３の処理に戻る。

また、ステップＳ１５での判定の結果、欠陥疑惑部分Ｄｐがベストピント画像ａ１の画像欠陥部分であった場合は、この画像欠陥部分の補正は、動作制御部２３１の制御の下で補正処理部１３４により行われる（ステップＳ１６）。この補正は、実施形態１で説明したものと同様のものである。

その後、動作制御部２３１は、すべての欠陥疑惑部分を処理したか否かの判定を行い（ステップＳ１７）、未処理の欠陥疑惑部分が残っておれば、動作制御部２３１は、ステップＳ１３の処理に戻り、全ての欠陥疑惑部分に対する判定および補正処理が完了しておれば、処理済みの画像データを出力する（ステップＳ１８）。つまり、処理済みの画像データを記録媒体に格納したり、あるいは表示部に表示させたりする。

このように本実施形態２の撮像装置２００では、シャッター操作時には、図７（ａ）に示す処理フローに従って、各カメラモジュール１１０および１２０でベストピント画像およびこれに対応する画角拡大画像の撮像を連続して行って、これらのベストピント画像及び画角拡大画像の画像データを一時記録メモリ１４０に記憶し、撮像後にこれらの画像を表示したり、記録媒体に保存したりする際に、図７（ｂ）に示す処理フローに従って、ベストピント画像における画像欠陥部分を検出して補正する処理を行うので、実施形態１の撮像装置と同様に、視差を有する２つのカメラモジュールで得られる撮像画像の全領域にわたり、高精度にかつ高速に欠陥領域が存在するか否かの判定を行うことができる。

また、この実施形態２では、操作者によるシャッター操作信号を受けたとき、複数の撮像部の動作モードを、複数のカメラモジュール１１０および１２０の各々が最適焦点位置で被写体を撮像してベストピント画像を生成する最適焦点モードに設定し、最適焦点モードでカメラモジュールによりベストピント画像が生成された後、ベストピント画像に対応する画角拡大画像が生成されるように、最適焦点モードを画角拡大モードに切り換えるので、撮像時には判定対象画像における画像欠陥部分を検出する処理を省略し、この画像欠陥部分の検出処理を、撮像後にベストピント画像の編集や表示、あるいは記録媒体への記録を行うなどの、操作者が重要と考える撮像画像（ベストピント画像）に対してのみ行うことができ、画像欠陥部分の検出処理を効率よく行うことができる。

なお、上記実施形態１および２では、撮像装置が２つのカメラモジュールを有する場合について説明したが、撮像装置を構成する視差を有するカメラモジュールは２つに限定されるものではない。

本発明は、視差を有する３以上の撮像部（カメラモジュール）で同一の被写体を撮像する場合には、１つのカメラモジュールで得られた撮像画像における、他のカメラモジュールで得られた撮像領域の画角外領域に対応する部分にある欠陥疑惑部分が画像欠陥領域であるか正常な画像であるかを判定するのに適用することができる。

つまり、複数台のカメラ（例えば、撮像部としてのカメラモジュール）により同一被写体を撮影した際に、各々のカメラで生成された撮像画像にのみ存在する画像部分が発生した場合、それらの画像部分が欠陥部分であるか否かを判定する必要があるが、カメラの配置上、各カメラの撮像領域には、必ず他のカメラの撮像領域に対する画角外領域に対応する部分が発生する。そこで、他のカメラによる撮像画像の画角をオートフォーカス機能により拡げることにより、通常の最適焦点位置での撮影では得られない、他のカメラによる撮像画像の画角外領域の画像情報を取得し、判定対象画像（ベストピント画像）における、他のカメラによる撮像画像（ベストピント画像）に対する画角外領域に対応する部分を、この他のカメラによる撮像画像（ベストピント画像）の画角を拡げた画角拡大画像と比較することで、画像欠陥部分を検出することができ、あらゆる状況においても、確実に、かつ短時間に画素欠陥などに起因する画像欠陥部分（黒キズ・シミ）を検出することができる。

さらに、上記実施形態１および２では、特に説明しなかったが、上記実施形態１および２の撮像装置の少なくともいずれかを撮像手段として用いた、例えばデジタルビデオカメラ、デジタルスチルカメラなどのデジタルカメラや、画像入力カメラ、スキャナ、ファクシミリ、カメラ付き携帯電話装置などの、画像入力デバイスを有した電子情報機器について以下簡単に説明する。
（実施形態３）
図８は、本発明の実施形態３として、実施形態１あるいは２の撮像装置を撮像手段として用いた電子情報機器の概略構成例を示すブロック図である。

図８に示す本発明の実施形態３による電子情報機器９０は、本発明の上記実施形態１および２の撮像装置の少なくともいずれかを、被写体の撮影を行う撮像手段９１として備えたものであり、このような撮像手段による撮影により得られた高品位な画像データを記録用に所定の信号処理した後にデータ記録する記録メディアなどのメモリ部９２と、この画像データを表示用に所定の信号処理した後に液晶表示画面などの表示画面上に表示する液晶表示装置などの表示部９３と、この画像データを通信用に所定の信号処理をした後に通信処理する送受信装置などの通信部９４と、この画像データを印刷（印字）して出力（プリントアウト）する画像出力部９５とのうちの少なくともいずれかを有している。

このように２つのカメラモジュールを含む撮像装置を搭載した携帯電話などの電子情報機器では、２つのカメラモジュールで１つの被写体を撮像して得られる、例えば１つの立体画像を構成する右目画像および左目画像の一方の画像欠陥部分を、その他方の画像あるいはその画角拡大画像を用いて、立体画像を構成する各画像の全領域にわたり、高精度にかつ高速に欠陥領域が存在するか否かの判定を行うことができる。

以上のように、本発明の好ましい実施形態を用いて本発明を例示してきたが、本発明は、この実施形態に限定して解釈されるべきものではない。本発明は、特許請求の範囲によってのみその範囲が解釈されるべきであることが理解される。当業者は、本発明の具体的な好ましい実施形態の記載から、本発明の記載および技術常識に基づいて等価な範囲を実施することができることが理解される。本明細書において引用した特許、特許出願および文献は、その内容自体が具体的に本明細書に記載されているのと同様にその内容が本明細書に対する参考として援用されるべきであることが理解される。

本発明は、撮像装置、欠陥処理方法、および電子情報機器の分野において、複数の撮像部で共通の被写体を撮像して得られる互いに視差を有する複数の撮像画像の各々の全領域を対象として、各撮像画像における画像欠陥と疑われる部分を他の撮像画像の対応する部分と比較する処理を行うことができ、これにより、高精度にかつ高速に撮像画像に画像欠陥部分が存在するか否かの判定を行うことができる撮像装置および欠陥処理方法、並びにこのような撮像装置を備えた電子情報機器を実現することができる。

５０ａ モジュール基板
５３ 下側カバー
５３ａ カバー開口部
５４ 上側カバー
５６ レンズホルダ
５７ 永久磁石
５８ コイル
５９ リッドガラス
９０ 電子情報機器
９１ 撮像手段
９２ メモリ部
９３ 表示部
９４ 通信部
９５ 画像出力部
１００、２００ 撮像装置
１１０ 第１のカメラモジュール（撮像部）
１１１ 第１のイメージセンサ（撮像素子）
１１２、１２２ 駆動回路
１１３、１２３ 信号処理部
１１４ 第１の光学系
１１４ａ、１２４ａ 焦点レンズ
１１４ｂ、１２４ｂ 絞り機構
１１４ｃ、１２４ｃ レンズ駆動機構
１２０ 第２のカメラモジュール（撮像部）
１２１ 第２のイメージセンサ（撮像素子）
１２４ 第２の光学系
１３０、２３０ モジュール制御部（ＣＰＵ）
１３１、２３１ 動作制御部
１３２ 画像解析部
１３３ 比較部
１３４ 補正処理部
１３５ 光学系駆動制御部
１４０ 一時記憶メモリ
１５０ 表示装置
１５１ 表示制御部
１５２ 表示部
１６０ 記録装置
１６１ メモリ制御部
１６２ 記録媒体
１７０ 画像信号処理回路
１８０ ＥＥＰＲＯＭ
Ａｎ 解析結果信号
Ａｐ１、Ａｐ２ 絞り制御信号
Ａｐｓ 補正画像データ
ａ１ 撮像画像
ａ１０、ｂ１０ 全体撮影範囲
ａ１１、ｂ１１ 画角外領域
ａ１２、ｂ１２ 画角外対応領域
Ｃｄ１、Ｃｄ２ 駆動制御信号
ＣＬｓ 光学系制御信号
Ｃｐ１、Ｃｐ２ 制御信号
Ｃｐｓ 比較結果信号
Ｃｓ１、Ｃｓ２ 撮像信号
Ｐｓ１、Ｐｓ２ 画像データ
Ｄ１、Ｄ２ 駆動信号
Ｄｂｕｓ データバス
Ｌ１、Ｌ２ 光軸
Ｌｄ１、Ｌｄ２ 位置制御信号
Ｌ２ 光軸
Ｐｓ１ 第１の画像データ
Ｐｓ２ 第２の画像データ
Ｓｏｐ 操作信号
Ｔａ 被写体

Claims (17)

1. 被写体を撮像する複数の撮像部を有し、該撮像部は、該被写体からの光を光電変換して撮像信号を出力する撮像素子と、該被写体からの光を該撮像素子に導く光学系とを含む撮像装置であって、
   該複数の撮像部の各々が最適焦点位置で該被写体を撮像して最適焦点画像を生成する最適焦点モードと、該複数の撮像部の各々が、該最適焦点位置での画角より大きな画角で該被写体を撮像して画角拡大画像を生成する画角拡大モードとを該光学系の焦点位置の制御により切り替える動作制御部と、
   欠陥の判定対象となる最適焦点画像である判定対象画像の、他の最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分を、該他の最適焦点画像に対応する画角拡大画像を用いて検出する欠陥検出部と
   を備えた、撮像装置。
2. 前記欠陥検出部は、
   前記判定対象画像における、画像欠陥部分が発生していると疑われる欠陥疑惑部分を、該判定対象画像の画像解析により検出する画像解析部と、
   該欠陥疑惑部分を含む判定対象画像を、該判定対象画像以外の他の最適焦点画像あるいは該他の最適焦点画像に対応する画角拡大画像と比較する比較部とを有し、
   該比較部での比較結果に基づいて該判定対象画像に含まれる画像欠陥部分を検出する、請求項１に記載の撮像装置。
3. 前記比較部は、
   前記判定対象画像の欠陥疑惑部分が、該判定対象画像における前記他の最適焦点画像に対する画角内領域に対応する部分に含まれているとき、該判定対象画像における欠陥疑惑部分を、該他の最適焦点画像における、該欠陥疑惑部分に対応する部分と比較し、
   該判定対象画像の欠陥疑惑部分が、該判定対象画像における該他の最適焦点画像に対する画角外領域に対応する部分に含まれているとき、該判定対象画像における欠陥疑惑部分を、該他の最適焦点画像に対応する画角拡大画像における、該欠陥疑惑部分に対応する部分と比較する、請求項２に記載の撮像装置。
4. 前記動作制御部は、
   操作者によるシャッター操作信号を受けたとき、前記複数の撮像部の動作モードを、前記複数の撮像部の各々が最適焦点位置で前記被写体を撮像して最適焦点画像を生成する最適焦点モードに設定し、
   該最適焦点モードで得られた複数の最適焦点画像のうちの前記判定対象画像の欠陥疑惑部分が、該判定対象画像における前記他の最適焦点画像に対する画角外領域に対応する部分に含まれているとき、該他の最適焦点画像に対応する画角拡大画像が生成されるように、該最適焦点モードを前記画角拡大モードに切り換える、請求項３に記載の撮像装置。
5. 前記動作制御部は、
   操作者によるシャッター操作信号を受けたとき、前記複数の撮像部の動作モードを、該複数の撮像部の各々が最適焦点位置で前記被写体を撮像して最適焦点画像を生成する最適焦点モードに設定し、
   該最適焦点モードで該撮像部により該最適焦点画像が生成された後、前記他の最適焦点画像に対応する画角拡大画像が生成されるように、該最適焦点モードを前記画角拡大モードに切り換える、請求項４に記載の撮像装置。
6. 前記欠陥検出部により検出された前記判定対象画像の画像欠陥部分を補正する補正処理部を備えた、請求項１に記載の撮像装置。
7. 前記補正処理部は、
   前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値を用いて補正する、請求項６に記載の撮像装置。
8. 前記補正処理部は、
   前記判定対象画像の画像欠陥部分を、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値を用いて補正する、請求項６に記載の撮像装置。
9. 前記補正処理部は、
   前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値と、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値とを用いて補正する、請求項６に記載の撮像装置。
10. 前記複数の撮像部として第１および第２の撮像部を備え、
    該第１の撮像部は、
    前記被写体からの光の光電変換により該被写体を撮像する第１の撮像素子と、
    該被写体からの光を該第１の撮像素子に導く第１の光学系とを有し、
    該第２の撮像部は、
    該被写体からの光の光電変換により該被写体を撮像する第２の撮像素子と、
    該被写体からの光を該第２の撮像素子に導く、該第１の光学系の光軸と所定の間隔を空けて平行に位置する光軸を有する第２の光学系とを有し、
    該欠陥検出部は、
    該２つの撮像部の一方で得られた最適焦点画像の、該２つの撮像部の他方で得られた最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分を、該一方の撮像部で得られた最適焦点画像と該他方の撮像部で得られた画角拡大画像との比較により検出する、請求項１に記載の撮像装置。
11. 前記光学系は、前記被写体からの光を対応する前記撮像素子に導入する焦点レンズを有し、
    前記動作制御部は、前記最適焦点モードを前記画角拡大モードに切り換えるとき、該撮像素子により撮像される画像の画角が拡大するように該焦点レンズを該光学系の光軸の最適焦点位置から移動させる、請求項１に記載の撮像装置。
12. 被写体を撮像する複数の撮像部を備え、該撮像部が、該被写体からの光を光電変換して撮像信号を出力する撮像素子と、該被写体からの光を該撮像素子に導く光学系とを含む撮像装置で得られた撮像画像の画像欠陥部分を処理する欠陥処理方法であって、
    該複数の撮像部の各々が最適焦点位置で該被写体を撮像して最適焦点画像を生成するステップと、
    該複数の撮像部の各々が、該最適焦点位置での画角より大きな画角で該被写体を撮像して画角拡大画像を生成するステップと、
    欠陥の判定対象となる最適焦点画像である判定対象画像の、他の最適焦点画像に対する画角外領域に対応する部分に含まれる画像欠陥部分を、該他の最適焦点画像に対応する画角拡大画像を用いて検出するステップと
    を含む、欠陥処理方法。
13. 前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値を用いて補正するステップを含む、請求項１２に記載の欠陥処理方法。
14. 前記判定対象画像の画像欠陥部分を、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値を用いて補正するステップを含む、請求項１２に記載の欠陥処理方法。
15. 前記判定対象画像の画像欠陥部分を、該判定対象画像の、該画像欠陥部分の周囲に位置する周辺画素の画素値と、前記他の最適焦点画像に対応する画角拡大画像における、該画像欠陥部分に対応する部分の画素の画素値とを用いて補正するステップを含む、請求項１２に記載の欠陥処理方法。
16. 請求項１２に記載の欠陥処理方法をコンピュータにより実行するための欠陥処理プログラム。
17. 被写体の撮像を行う撮像手段を備えた電子情報機器であって、
    該撮像手段は、請求項１に記載の撮像装置である電子情報機器。

Images