JP2013187890A - 画像処理装置と画像処理方法 - Google Patents

Abstract

【課題】画像信号の信号処理を容易かつ高速に行うことができるようにする。
【解決手段】評価値生成部３３は、入力画像の画像信号に基づき評価値が生成して、信号処理部３２ａ，３２ｂに出力する。信号処理部３２ａ，３２ｂは、評価値生成部３３で生成された評価値を用いて信号処理を行う。信号処理部３２ａ，３２ｂのそれぞれで評価値を生成して、どのような信号処理を行うか個々に制御しなくとも、まとめて信号処理部３２ａ，３２ｂの制御を行うことが可能となり、複数の信号処理部を設けることによる制御負荷の増大を防止できる。
【選択図】 図１

Description

この技術は、画像処理装置と画像処理方法に関する。詳しくは、画像信号の信号処理を容易かつ高速に行うことができるようにする。

従来より撮像装置では、高精細化がはかられており、高精細化に伴い信号量も増大している。このため、信号処理を高速に行うことができるように、特許文献１では２次元空間的に画像領域を分割して、各画像領域の信号処理が複数の信号処理回路で並列に行われている。

特開２０００−３１２３１１号公報

ところで、複数の信号処理回路を設けた場合、それぞれの信号処理回路に対して、どのような信号処理を行うか制御しなければならず制御負荷が増大してしまう。

そこで、この技術では、画像信号の信号処理を容易かつ高速に行うことができる画像処理装置と画像処理方法を提供する。

この技術の第１の側面は、入力画像の画像分割を行う画像入力部と、前記入力画像の画像信号に基づき評価値を生成する評価値生成部と、前記評価値生成部で生成された評価値に基づいて、前記入力画像の画像信号の信号処理を行う複数の信号処理部とを備え、前記複数の信号処理部は、前記画像入力部で分割された分割画像の画像信号を用いて信号処理を行う画像処理装置にある。

この技術においては、入力画像の画像信号に基づき評価値が生成されて、生成された評価値に基づいて入力画像の画像信号の信号処理が複数の信号処理部で行われる。例えば、入力画像が分割されて、分割画像の補正処理後の画像信号を用いた信号処理が行われる。この補正処理が行われた画像信号を用いた画像合成が行われて、合成画像の縮小画像を用いて評価値の生成が行われる。この生成された評価値を用いて、各分割画像の補正処理後の画像信号に対して信号処理が行われる。入力画像の分割は、信号処理部の数に応じて分割数が設定される。また、信号処理を制御する制御値に関係付けられているアドレス情報に基づき、制御値の取り込みを行う１または複数の信号処理部が指定されて、指定された信号処理部は、取り込んだ制御値に基づいて信号処理が行われる。更に、画像信号処理装置では、分割画像毎に信号処理を行うだけでなく、例えば異なる視点毎の画像信号や動画と静止画の画像信号の信号処理が並列して行うようにしてもよい。また、入力画像をフレーム毎に複数の信号処理部に振り分けて並列に信号処理を行うようにしてもよい。異なる視点の画像信号の信号処理では、例えば所定の視点の画像信号に基づいて評価値を生成する。また、所定の視点の画像信号と他の視点の画像信号毎に評価値を生成して、生成した複数の評価値を統計処理して得られた評価値を複数の信号処理部に出力してもよい。動画と静止画の信号処理では、動画の画像信号に基づいて評価値を生成する。また、入力画像をフレーム毎に前記複数の信号処理部に振り分けて信号処理を行う場合には、入力画像の振り分けに応じて画像を選択して、選択した画像の画像信号に基づき評価値を生成する。

この技術の第２の側面は、入力画像の画像分割を行う工程と、前記入力画像の画像信号に基づき評価値を生成する工程と、前記生成された評価値に基づいて、前記画像分割により分割された分割画像の画像信号の信号処理を分割画像毎に行う工程とを含む画像処理方法にある。

この技術によれば、入力画像の画像分割が行われる。また、入力画像の画像信号に基づき評価値生成部で評価値が生成されて、この生成された評価値に基づいて、複数の信号処理部で分割画像の画像信号の信号処理が行われる。このため、複数の信号処理部のそれぞれで評価値を生成して、どのような信号処理を行うか制御しなくとも、まとめて複数の信号処理部を制御することが可能となり、複数の信号処理部を設けることによる制御負荷の増大を防止できる。

第１の実施の形態の構成を例示した図である。 評価値生成部の構成を例示した図である。 第１の実施の形態の動作を示すフローチャートである。 画像領域毎に評価値を生成して信号処理を行う場合を例示した図である。 合成画像に基づき評価値を生成して信号処理を行う場合を例示した図である。 第２の実施の形態の構成を例示した図である。 第３の実施の形態の構成を例示した図である。 第４の実施の形態の構成を例示した図である。 第５の実施の形態の構成を例示した図である。

以下、本技術を実施するための形態について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態
２．第２の実施の形態
３．第３の実施の形態
４．第４の実施の形態
５．第５の実施の形態

＜１．第１の実施の形態＞
第１の実施の形態では、２次元空間的に画像領域を分割して、各画像領域の信号処理を複数の信号処理回路で並列に行う場合について説明する。なお、以下の説明は、画像領域を２分割する場合である。

［１−１．第１の実施の形態の構成］
図１は、本技術の第１の実施の形態の構成を例示している。画像処理システム１０-1は、画像センサ２０、画像処理部３０-1、メモリ部４０、システム制御部５０を有している。

画像センサ２０は、ＣＣＤやＣＭＯＳ等の撮像素子を用いて構成されており、撮像素子で生成された画像信号を画像処理部３０-1に出力する。

画像処理部３０-1は、画像センサ２０から出力された画像信号に対して補正処理やカメラ信号処理等の種々の処理を並列して行う。画像処理部３０-1は、並列に信号処理を行うことにより得られた画像信号をメモリ部４０に出力する。

メモリ部４０は、例えば並列に信号処理された画像信号を統合して出力するために、並列に信号処理を行うことにより得られた画像信号を記憶する。

システム制御部５０は、所望の画像信号を得ることができるように、画像センサ２０や画像処理部３０-1、メモリ部４０を制御する。

なお、画像処理部３０-1は、メモリ部４０やシステム制御部５０等と一体に構成されていてもよく、画像処理部３０-1を集積回路化して、画像センサ２０やメモリ部４０およびシステム制御部５０と別個に構成されていてもよい。

画像処理部３０-1は、画像入力部３１-1と信号処理部３２ａ，３２ｂ、評価値生成部３３、アクセス制御部３４を有している。

画像入力部３１-1は、例えば画像センサ２０から読み出された画像信号を２つの画像領域の信号に分割する。画像入力部３１-1は、一方の画像領域の画像信号を信号処理部３２ａ、他方の画像領域の画像信号を信号処理部３２ｂに出力する。画像分割は、複数の信号処理部で並列に信号処理を行うことができるように、入力画像に対して信号処理部の数に応じて分割数を設定する。画像入力部３１-1は、信号処理部３２ａと信号処理部３２ｂで並列に信号処理を行うことができるように、入力画像を例えば水平方向が２つの画像領域となるように分割する。なお、画像入力部３１-1は、入力画像を垂直方向が複数の画像領域となるように分割してもよく、斜め方向に分割位置を設定して分割を行ってもよい。

信号処理部３２ａは、画像入力部３１-1から供給された画像信号に対して、種々の信号処理を行う。信号処理部３２ａは、例えば画像信号に対して、画素欠陥補正、黒レベル補正、シェーディング補正等の画像センサ２０等に起因する補正処理を行う。また、信号処理部３２ａは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。例えば信号処理部３２ａは、評価値に基づいて露出調整やホワイトバランス調整等の制御を行い、システム制御部５０からの制御値に基づいて各種制御設定を行う。また、信号処理部３２ａは、補正処理が行われた画像信号を評価値生成部３３に出力する。

信号処理部３２ｂは、信号処理部３２ａと同様な処理を行う。すなわち、信号処理部３２ｂは、画像入力部３１-1から供給された画像信号に対して、画像センサ２０等に起因する補正処理を行う。また、信号処理部３２ａは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。また、信号処理部３２ｂは、補正処理が行われた画像信号を評価値生成部３３に出力する。

評価値生成部３３は、信号処理部３２ａから供給された画像信号と信号処理部３２ｂから供給された画像信号を用いて画像合成を行い、分割が行われていない画像の画像信号を生成する。また、評価値生成部３３は、画像合成によって生成された画像信号を用いて検波処理を行い、評価値を生成する。

図２は、評価値生成部の構成を例示している。評価値生成部３３は、画像合成部３３１、信号選択部３３２、縮小・現像処理部３３３、検波部３３４を有している。

画像合成部３３１は、信号処理部３２ａから供給された画像信号と信号処理部３２ｂから供給された画像信号を用いて画像合成を行い、分割されていない画像の画像信号を生成して信号選択部３３２に供給する。

信号選択部３３２は、評価値の生成に用いる画像信号を選択する。信号選択部３３２は、分割されていない画像の画像信号から評価値を生成する場合、画像合成部３３１で生成された画像信号を選択して縮小・現像処理部３３３に出力する。また、信号選択部３３２は、後述する実施の形態のように、信号処理部３２ａまたは信号処理部３２ｂで用いる画像信号から評価値を生成する場合、信号処理部３２ａまたは信号処理部３２ｂから供給された画像信号を選択して縮小・現像処理部３３３に出力する。

縮小・現像処理部３３３は、信号選択部３３２で選択された画像信号を用いて画像縮小処理や現像処理を行い、処理後の画像信号を検波部３３４に出力する。このように、画像を縮小することで、検波部３３４で評価値の生成に用いる画像信号の信号量を信号選択部３３２で選択された画像信号よりも少なくできる。また、現像処理も行われていることから、信号処理を行う画像に対応する評価値を検波部３３４で容易に生成できるようになる。

検波部３３４は、縮小・現像処理部３３３から供給された画像信号を用いて検波処理を行い、評価値を生成する。例えば、検波部３３４は、画像の明るさやコントラスト，色味の分布等を判別して露出調整やフォーカス調整，ホワイトバランス調整等の制御で用いる評価値を生成する。検波部３３４は生成した評価値を信号処理部３２ａと信号処理部３２ｂに出力する。

図１に示すアクセス制御部３４はシステム制御部５０と接続されている。システム制御部５０は、ＣＰＵ(Central Processing Unit)やＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)等を用いて構成されている。システム制御部５０は、ＲＯＭ等に記憶されているプログラムをＣＰＵで実行して、画像処理部３０-1でどのような信号処理動作を行うか制御する。例えばシステム制御部５０は、信号処理部３２ａ，３２ｂでどのような信号処理を行うかの制御や設定を行うための制御値を生成して画像処理部３０-1に出力する。また、システム制御部５０は、画像処理部３０-1の評価値生成部３３で生成された評価値に基づき、信号処理部３２ａ，３２ｂの信号処理動作を制御する。例えばシステム制御部５０は、画像が明るく白とびが生じるおそれがある場合に白とびが生じる部分の輝度を低下させる処理、所望のコントラストの画像が得られるようにダイナミックレンジを調整する処理等を行う制御値を生成して画像処理部３０-1に出力する。

ところで、信号処理を並列に行う場合、信号処理部の増加に伴い、システム制御部５０からの制御設定が増大する。しかし、信号処理部３２ａと信号処理部３２ｂに対する制御設定の多くは制御や設定を行う制御値が同じ値である。そこで、アクセス制御部３４は、等しい制御値を用いる場合、システム制御部５０で指定されたアドレス信号に基づき制御設定を行う１または複数の信号処理部を指定して、システム制御部５０から供給された制御値を、指定した信号処理部で用いるようにする。このように、１回の制御設定で複数の信号処理部に対する処理を可能とすることで、制御設定の処理の増大を押さえることができる。

システム制御部５０から各信号処理部へのアクセス信号としては、アドレス信号・データ信号・セレクト信号が用いられている。また、各信号処理部は、セレクト信号がアクティブの場合にのみアクセスが可能となる。したがって、アクセス制御部３４は、システム制御部５０からのアドレス信号を基にセレクト信号を生成して、制御設定を行う信号処理部を指定する。例えばアドレスＡ１の場合、信号処理部３２ａに対するセレクト信号をアクティブとして、データ信号で制御値を信号処理部に供給する。アドレスＡ２の場合、信号処理部３２ｂに対するセレクト信号をアクティブとして、データ信号で制御値を信号処理部に供給する。アドレスＡ３の場合、信号処理部３２ａと信号処理部３２ｂに対するセレクト信号をアクティブとして、データ信号で制御値を信号処理部に供給する。

このように、アドレス信号に基づき１または複数の信号処理部を指定するセレクト信号を生成して、指定した信号処理部では、データ信号で示された制御値を用いて制御設定を行う。このため、１回の制御設定で複数の信号処理部の制御設定が可能となり、制御負荷の増大を押さえることができる。

［１−２．第１の実施の形態の動作］
図３は、第１の実施の形態の動作を示すフローチャートである。ステップＳＴ１で画像処理部３０-1は、画像分割を行う。画像処理部３０-1は、２次元空間的に画像領域を分割して、領域毎の画像信号を生成してステップＳＴ２に進む。

ステップＳＴ２で画像処理部３０-1は、画像分割後の画像信号のそれぞれに対して並列に補正処理を行う。画像処理部３０-1は、欠陥補正や黒レベル補正等の補正処理を、画像分割後の画像信号のそれぞれに対して並列に行いステップＳＴ３に進む。

ステップＳＴ３で画像処理部３０-1は、補正処理が行われた画像信号を用いて画像合成を行う。画像処理部３０-1は、補正処理が行われた画像信号を用いて画像合成を行い、分割されていない画像に対して補正処理が行われた画像の画像信号を生成してステップＳＴ４に進む。

ステップＳＴ４で画像処理部３０-1は、画像合成後の画像信号から評価値を生成する。画像処理部３０-1は、画像合成後の画像信号を用いて検波処理を行い、露出調整やホワイトバランス調整等の制御で用いる評価値を生成してステップＳＴ５に進む。なお、画像処理部３０-1は、評価値の生成を容易に行うことができるように、画像縮小処理や現像処理を行い、処理後の画像信号を用いて検波処理を行う。

ステップＳＴ５で画像処理部３０-1は、生成された評価値に基づいて信号処理を並列に行う。画像処理部３０-1は、ステップＳＴ４で生成した評価値を、画像分割後の各画像信号の信号処理で共通に用いて並列に、露出調整やホワイトバランス調整等の信号処理を行う。

このように、２次元空間的に画像領域を分割して、各画像領域の信号処理を複数の信号処理回路で並列に行う場合、画像分割されていない画像から評価値が生成されて、各信号処理部に供給される。したがって、複数の信号処理部のそれぞれで評価値を生成して、どのような信号処理を行うか制御しなくとも、まとめて複数の信号処理部を制御することが可能となる。このため、画像領域を分割して並列に信号処理を行う場合でも制御負荷が増大してしまうことを防止できる。また、評価値生成部で用いられる画像は、補正処理が行われていることから、より精度の高い評価値を生成できる。

更に、信号処理部毎に処理する画像に応じて評価値を生成すると、出力画像は不自然な画像となってしまうおそれがある。例えば図４に示すように、入力画像を分割して、分割画像を評価値生成用の画像として評価値を生成すると、分割画像間で異なる評価値が生成されて、信号処理後の画像は異なる信号処理が行われた画像となってしまうおそれがある。この場合、処理後の分割画像を合成した出力画像では、画像領域間で異なる信号処理が行われたことにより不自然な画像となってしまう。しかし、第１の実施の形態では、図５に示すように、分割画像を合成して、分割が行われていない画像が評価値生成用の画像として用いられる。このため、信号処理後の画像は等しい信号処理が行われた画像となるので、処理後の分割画像を合成した出力画像が不自然な画像となってしまうおそれがない。

＜２．第２の実施の形態＞
第２の実施の形態では、複数視点の画像信号の信号処理を並列に行う場合について説明する。なお、以下の説明は、例えば左視点の画像信号と右視点の画像信号の信号処理を並列に行う場合である。

図６は、第２の実施の形態の構成を例示している。第２の実施の形態において、画像センサ２０Ｌは、左視点画像の画像信号を生成して画像処理部３０-2に出力する。画像センサ２０Ｒは、右視点画像の画像信号を生成して画像処理部３０-2に出力する。画像処理部３０-2は、画像入力部３１-2と信号処理部３２ａ，３２ｂ、評価値生成部３３、アクセス制御部３４を有している。

画像入力部３１-2は、例えは左視点画像の画像信号を信号処理部３２ａ、右視点画像の画像信号を信号処理部３２ｂに分割して出力する。

信号処理部３２ａは、画像入力部３１-2から供給された左視点画像の画像信号の補正処理を行う。また、信号処理部３２ａは、補正処理が行われた画像信号を評価値生成部３３に出力する。信号処理部３２ａは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

信号処理部３２ｂは、画像入力部３１-2から供給された右視点画像の画像信号の補正処理を行う。また、信号処理部３２ｂは、補正処理が行われた画像信号を評価値生成部３３に出力する。信号処理部３２ｂは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

評価値生成部３３は、信号処理部３２ａまたは信号処理部３２ｂから供給された画像信号のいずれかを図２に示す信号選択部３３２で選択して、選択した画像信号を用いて評価値を生成する。画像信号の選択は、主とする視点の画像信号を選択する。例えばユーザ等によって予め指定されている視点を主とする視点として画像信号を選択する。画像信号の選択は、異なる視点の画像信号を順番に選択して評価値を生成するようにしてもよい。また、異なる視点の画像信号を順番に選択して評価値を生成する場合、視点数分の評価値の統計処理を行うことにより得られた統計値例えば平均値を算出して、統計値を信号処理に用いる評価値として各信号処理部に出力するようにしてもよい。

なお、第２の実施の形態では、複数視点の画像信号の信号処理を並列に行うことから、分割画像の信号処理を行うように信号処理後の画像を合成する必要がない。したがって、画像処理部３０-2は、信号処理後の画像信号をメモリ４０に記憶させることなく外部機器等に出力してもよい。また後述する第３乃至第４の実施の形態も同様である。

このような第２の実施の形態では、視点毎の画像信号に対してどのような信号処理を行うか個々に制御しなくとも、まとめて複数の信号処理部の制御を行うことが可能となる。したがって、視点毎の画像信号の信号処理を並列に行う場合でも制御負荷が増大してしまうことを防止できる。

＜３．第３の実施の形態＞
第３の実施の形態では、動画と静止画の画像信号の信号処理を並列に行う場合について説明する。画像センサ２０では、水平方向に対する画素間引きやラインの間引きを行い、動画の解像度に応じた画素信号の読み出しを行うことで動画の画像信号を生成して画像処理部３０-3に出力する。また、画像センサ２０では、間引きを行うことなく画素信号の読み出しを行うことで、動画の撮像中に動画よりも解像度の高い静止画の画像信号を生成して画像処理部３０-3に出力する。

図７は、第３の実施の形態の構成を例示している。第３の実施の形態において、画像処理部３０-3は、第２の実施の形態と同様に画像入力部３１-3と信号処理部３２ａ，３２ｂ、評価値生成部３３、アクセス制御部３４を有している。

画像入力部３１-3は、動画の画像信号を信号処理部３２ａ、静止画の画像信号を信号処理部３２ｂに分割して出力する。

信号処理部３２ａは、画像入力部３１-3から供給された動画の画像信号の補正処理を行う。また、信号処理部３２ａは、補正処理が行われた画像信号を評価値生成部３３に出力する。信号処理部３２ａは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

信号処理部３２ｂは、画像入力部３１-3から供給された静止画の画像信号の補正処理を行う。また、信号処理部３２ｂは、補正処理が行われた画像信号を評価値生成部３３に出力する。信号処理部３２ｂは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

評価値生成部３３は、信号処理部３２ａまたは信号処理部３２ｂから供給された画像信号のいずれかを図２に示す信号選択部３３２で選択して、選択した画像信号を用いて評価値を生成する。

動画の撮像中に静止画の画像信号を生成する場合、静止画は動画の一時点であり静止画生成時の直前の動画や直後の動画とほぼ等しい画像である。したがって、信号選択部３３２は、動画の画像信号を選択する。

このような第３の実施の形態では、動画と静止画の画像信号に対してどのような信号処理を行うか画像信号毎に制御しなくとも、まとめて信号処理部の制御を行うことが可能となる。このため、動画と静止画の画像信号の信号処理を並列に行う場合でも制御負荷が増大してしまうことを防止できる。

＜４．第４の実施の形態＞
第４の実施の形態では、静止画の画像信号の信号処理を並列に行う場合について説明する。例えば、画像センサ２０は、動作モードが連写モードとされて、連続して撮像された複数枚の静止画の画像信号を画像処理部３０-4に出力する。

図８は、第４の実施の形態の構成を例示している。第４の実施の形態において、画像処理部３０-4は、第２，３の実施の形態と同様に画像入力部３１-4と信号処理部３２ａ，３２ｂ、評価値生成部３３、アクセス制御部３４を有している。

画像入力部３１-4は、順次供給される複数枚の静止画の画像信号を、画像単位で、例えば信号処理部３２ａと信号処理部３２ｂに対して交互に振り分ける。

信号処理部３２ａは、画像入力部３１-4から供給された静止画の画像信号の補正処理を行う。また、信号処理部３２ａは、補正処理が行われた画像信号を評価値生成部３３に出力する。信号処理部３２ａは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

信号処理部３２ｂは、画像入力部３１-4から供給された静止画の画像信号の補正処理を行う。また、信号処理部３２ｂは、補正処理が行われた画像信号を評価値生成部３３に出力する。信号処理部３２ｂは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

評価値生成部３３は、信号処理部３２ａまたは信号処理部３２ｂから供給された画像信号のいずれかを図２に示す信号選択部３３２で選択して、選択した画像信号を用いて評価値を生成する。ここで、複数枚の静止画の画像信号が画像入力部３１-4に供給される場合、速やかに評価値を生成できるように、最初の静止画の画像信号が入力された信号処理部から供給された画像信号を選択する。また、画像単位で画像信号を複数の信号処理部に振り分けに応じて、信号選択部３３２で画像信号を選択して、信号処理する画像毎に評価値を生成してもよい。この場合、システム制御部５０からの制御値の供給と同様に、評価値の算出に用いた画像信号の信号処理を行う信号処理部についてセレクト信号をアクティブとする。このようにすれば、各信号処理部に評価値を供給しても、処理する画像信号に対応する評価値を用いて信号処理を行うことができる。

このような第４の実施の形態では、静止画の画像信号の信号処理を行う信号処理部毎に、処理する画像に応じた制御を行わなくとも、まとめて信号処理部の制御を行うことが可能となる。このため、複数枚の静止画の画像信号の信号処理を並列に行う場合でも制御負荷が増大してしまうことを防止できる。なお、第４の実施の形態では、連続して撮像された複数枚の静止画の画像信号を処理する場合について説明したが、動画のフレーム画像を順に信号処理部に振り分けるようにすれば、同様に処理することができる。

＜５．第５の実施の形態＞
上述の実施の形態では、信号処理部３２ａ，３２ｂから画像信号を評価値生成部３３に供給して評価値を生成する場合について説明した。しかし、評価値の生成に用いる画像信号は、画像入力部３１-5から供給するようにしてもよい。

図９は、第５の実施の形態の構成を例示している。第５の実施の形態において画像処理部３０-5は、画像入力部３１-5と信号処理部３２ａ，３２ｂ、評価値生成部３３、アクセス制御部３４を有している。

画像入力部３１-5は、例えば撮像素子から読み出された画像信号を２つの画像領域の信号に分割する。画像入力部３１-5は、一方の画像領域の画像信号を信号処理部３２ａ、他方の画像領域の画像信号を信号処理部３２ｂに出力する。また、画像入力部３１-5は、分割前の画像信号を評価値生成部３３に出力する。

信号処理部３２ａは、画像入力部３１-5から供給された画像信号の補正処理を行う。また、信号処理部３２ａは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

信号処理部３２ｂは、画像入力部３１-5から供給された画像信号の補正処理を行う。また、信号処理部３２ｂは、補正処理が行われた画像信号に対して、評価値生成部３３で生成された評価値やシステム制御部５０からアクセス制御部３４を介して供給された制御値に基づいて高画質化のための各種信号処理を行う。

評価値生成部３３は、画像入力部３１-5から供給された画像信号を図２に示す信号選択部３３２で選択して、選択した画像信号を用いて評価値を生成する。

このような第５の実施の形態では、画像分割後の画像領域毎の画像信号に対してどのような信号処理を行うか制御しなくとも、まとめて複数の信号処理部を制御することが可能となる。このため、画像信号の信号処理を並列に行う場合でも制御負荷が増大してしまうことを防止できる。また、画像入力部から供給された画像信号に基づいて評価値が生成されるので、信号処理部の回路構成等に係らず、信号処理部と独立して評価値を生成できる。

なお、本技術は、上述した技術の実施の形態に限定して解釈されるべきではない。例えば、評価値を用いた処理は上述の処理に限られない。また、信号処理部で行う処理は高画質化のための処理に限られず、他の目的の処理を行うようにしてもよい。この技術の実施の形態は、例示という形態で本技術を開示しており、本技術の要旨を逸脱しない範囲で当業者が実施の形態の修正や代用をなし得ることは自明である。すなわち、本技術の要旨を判断するためには、特許請求の範囲を参酌すべきである。

なお、本技術の画像処理装置は以下のような構成も取ることができる。
（１） 入力画像の画像分割を行う画像入力部と、
前記入力画像の画像信号に基づき評価値を生成する評価値生成部と、
前記評価値生成部で生成された評価値に基づいて、画像信号の信号処理を行う複数の信号処理部とを備え、
前記複数の信号処理部は、前記画像入力部で分割された分割画像の画像信号を用いて信号処理を行う画像処理装置。
（２） 前記複数の信号処理部は、補正処理後の画像信号を用いた信号処理を行い、前記補正処理後の画像信号を前記評価値生成部に出力し、
前記評価値生成部は、前記複数の信号処理部から供給された補正処理後の画像信号を用いて画像合成を行い、合成された画像の画像信号に基づき評価値を生成する（１）に記載の画像処理装置。
（３） 前記画像入力部は、前記入力画像に対して前記信号処理部の数に応じて分割数を設定する（１）または（２）に記載の画像処理装置。
（４） 前記複数の信号処理部は、補正処理後の画像信号を用いた信号処理を行い、前記補正処理後の画像信号を前記評価値生成部に出力し、
前記評価値生成部は、前記複数の信号処理部から供給された補正処理後の画像信号の少なくともいずれかを用いて前記評価値を生成する（１）に記載の画像処理装置。
（５） 前記信号処理を制御する制御値に関係付けられているアドレス情報に基づき、前記制御値の取り込みを行う１または複数の信号処理部を指定するアクセス制御部を更に備え、
前記アクセス制御部によって指定された信号処理部は、取り込んだ前記制御値に基づいて前記信号処理を行う（１）乃至（４）のいずれかに記載の画像処理装置。
（６） 前記評価値生成部は、縮小された前記入力画像の画像信号に基づき前記評価値を生成する（１）乃至（５）のいずれかに記載の画像処理装置。
（７） 前記複数の信号処理部は、それぞれ異なる視点の画像信号の信号処理を行い、
前記評価値生成部は、所定の視点の画像信号に基づいて評価値を生成する（１）に記載の画像処理装置。
（８） 前記評価値生成部は、前記所定の視点の画像信号と他の視点の画像信号毎に評価値を生成して、生成した複数の評価値を統計処理して得られた評価値を前記複数の信号処理部に出力する（８）に記載の画像処理装置。
（９） 前記複数の信号処理部は、動画の画像信号の信号処理を行う信号処理部と、静止画の画像信号の信号処理を行う信号処理部を有し、
前記評価値生成部は、前記動画の画像信号に基づいて評価値を生成する（１）に記載の画像処理装置。
（１０）
前記静止画は、前記動画の一時点である（９）に記載の画像処理装置。
（１１）
前記入力画像をフレーム毎に前記複数の信号処理部に振り分ける画像入力部を更に備え、
前記複数の信号処理部は、前記画像入力部で振り分けられた画像の画像信号を用いて信号処理を行い、
前記評価値生成部は、前記入力画像の振り分けに応じて画像を選択して、選択した画像の画像信号に基づき評価値を生成する（１）に記載の画像処理装置。

この技術の画像処理装置と画像処理方法によれば、入力画像の画像分割が行われる。また、入力画像の画像信号に基づき評価値生成部で評価値が生成されて、この生成された評価値に基づいて、複数の信号処理部で分割画像の画像信号の信号処理が行われる。このため、複数の信号処理部のそれぞれで評価値を生成して、どのような信号処理を行うか制御しなくとも、まとめて複数の信号処理部を制御することが可能となり、複数の信号処理部を設けることによる制御負荷の増大を防止できる。したがって、撮像装置や編集装置など画像信号を用いる種々の機器に適用できる。

１０-1〜１０-5・・・画像処理システム、２０，２０Ｌ，２０Ｒ・・・画像センサ、３０-1〜３０-5・・・画像処理部、３１-1〜３１-5・・・画像入力部、３２ａ，３２ｂ・・・信号処理部、３３・・・評価値生成部、３４・・・アクセス制御部、４０・・・メモリ部、５０・・・システム制御部、３３１・・・画像合成部、３３２・・・信号選択部、３３３・・・縮小・現像処理部、３３４・・・検波部

Claims (12)

1. 入力画像の画像分割を行う画像入力部と、
   前記入力画像の画像信号に基づき評価値を生成する評価値生成部と、
   前記評価値生成部で生成された評価値に基づいて、画像信号の信号処理を行う複数の信号処理部とを備え、
   前記複数の信号処理部は、前記画像入力部で分割された分割画像の画像信号を用いて信号処理を行う画像処理装置。
2. 前記複数の信号処理部は、補正処理後の画像信号を用いた信号処理を行い、前記補正処理後の画像信号を前記評価値生成部に出力し、
   前記評価値生成部は、前記複数の信号処理部から供給された補正処理後の画像信号を用いて画像合成を行い、合成された画像の画像信号に基づき評価値を生成する請求項１記載の画像処理装置。
3. 前記画像入力部は、前記入力画像に対して前記信号処理部の数に応じて分割数を設定する請求項１記載の画像処理装置。
4. 前記複数の信号処理部は、補正処理後の画像信号を用いた信号処理を行い、前記補正処理後の画像信号を前記評価値生成部に出力し、
   前記評価値生成部は、前記複数の信号処理部から供給された補正処理後の画像信号の少なくともいずれかを用いて前記評価値を生成する請求項１記載の画像処理装置。
5. 前記信号処理を制御する制御値に関係付けられているアドレス情報に基づき、前記制御値の取り込みを行う１または複数の信号処理部を指定するアクセス制御部を更に備え、
   前記アクセス制御部によって指定された信号処理部は、取り込んだ前記制御値に基づいて前記信号処理を行う請求項１記載の画像処理装置。
6. 前記評価値生成部は、縮小された前記入力画像の画像信号に基づき前記評価値を生成する請求項１記載の画像処理装置。
7. 前記複数の信号処理部は、それぞれ異なる視点の画像信号の信号処理を行い、
   前記評価値生成部は、所定の視点の画像信号に基づいて評価値を生成する請求項１記載の画像処理装置。
8. 前記評価値生成部は、前記所定の視点の画像信号と他の視点の画像信号毎に評価値を生成して、生成した複数の評価値を統計処理して得られた評価値を前記複数の信号処理部に出力する請求項７記載の画像処理装置。
9. 前記複数の信号処理部は、動画の画像信号の信号処理を行う信号処理部と、静止画の画像信号の信号処理を行う信号処理部を有し、
   前記評価値生成部は、前記動画の画像信号に基づいて評価値を生成する請求項１記載の画像処理装置。
10. 前記静止画は、前記動画の一時点である請求項９記載の画像処理装置。
11. 前記入力画像をフレーム毎に前記複数の信号処理部に振り分ける画像入力部を更に備え、
    前記複数の信号処理部は、前記画像入力部で振り分けられた画像の画像信号を用いて信号処理を行い、
    前記評価値生成部は、前記入力画像の振り分けに応じて画像を選択して、選択した画像の画像信号に基づき評価値を生成する請求項１記載の画像処理装置。
12. 入力画像の画像分割を行う工程と、
    前記入力画像の画像信号に基づき評価値を生成する工程と、
    前記生成された評価値に基づいて、前記画像分割により分割された分割画像の画像信号の信号処理を分割画像毎に行う工程と
    を含む画像処理方法。