JP2017134189A

JP2017134189A - 画像処理装置及び画像処理方法

Info

Publication number: JP2017134189A
Application number: JP2016012954A
Authority: JP
Inventors: 尚志岡; Hisashi Oka
Original assignee: JVCKenwood Corp
Current assignee: JVCKenwood Corp
Priority date: 2016-01-27
Filing date: 2016-01-27
Publication date: 2017-08-03
Also published as: US20180322822A1; US10504402B2; WO2017130529A1

Abstract

【課題】入力画像に対する表示画像の解像度の低下によって生じる画像品位の低下を従来よりも改善することができる画像処理装置を提供する。【解決手段】画像処理装置１は、色画像分離部２、フィルタ制御部３、フィルタ処理部４、表示画像生成部５を備える。色画像分離部２は入力画像データＩＤから赤色画像データＲｍ、緑色画像データＧｍ、及び青色画像データＢｍを分離する。フィルタ制御部３は各色画像データＲｍ，Ｇｍ，Ｂｍに対してフィルタ処理を施すための複数の画素組み合わせパターンを設定する。フィルタ処理部４は各色画像データＲｍ，Ｇｍ，Ｂｍに対して、画素組み合わせパターン毎にフィルタ処理を施す。表示画像生成部５はフィルタ処理された各色画像データＲｍ，Ｇｍ，Ｂｍを同一の画素組み合わせパターンＰＰによるフィルタ処理毎に合成して複数のフルカラー画像データＦＣを生成する。【選択図】図１

Description

本発明は、カラーフィルタ方式により画像を表示するための画像処理装置及び画像処理方法に関する。

特許文献１には、カラーフィルタ方式により画像を表示する画像表示装置が記載されている。カラーフィルタ方式の画像表示装置として、液晶パネルや単板ライトバルブ方式のプロジェクタ等がある。液晶パネルやプロジェクタに用いられる液晶表示素子は、赤色フィルタを有する赤色用画素と、緑色フィルタを有する緑色用画素と、青色フィルタを有する青色用画素とが、所定の配列で配置されている。

特開２００８−１４５５５１号公報

カラーフィルタ方式の画像表示装置では、赤色用画素、緑色用画素、及び、青色用画素の３つの画素によってフルカラー画像を表示するための１画素が構成される。そのため、カラーフィルタ方式の画像表示装置では、入力画像に対して表示画像の解像度が低下する場合がある。

本発明は、入力画像に対する表示画像の解像度の低下によって生じる画像品位の低下を従来よりも改善することができる画像処理装置及び画像処理方法を提供することを目的とする。

本発明は、入力画像データから赤色画像データ、緑色画像データ、及び青色画像データを分離する色画像分離部と、前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対してフィルタ処理を施すための複数の画素組み合わせパターンを設定するフィルタ制御部と、前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対して、前記画素組み合わせパターン毎にフィルタ処理を施すフィルタ処理部と、フィルタ処理された前記赤色画像データ、前記緑色画像データ、及び前記青色画像データを同一の画素組み合わせパターンによるフィルタ処理毎に合成して複数のフルカラー画像データを生成する表示画像生成部とを備えることを特徴とする画像処理装置を提供する。

本発明は、入力画像データから赤色画像データ、緑色画像データ、及び青色画像データを分離し、前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対してフィルタ処理を施すための複数の画素組み合わせパターンを設定し、前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対して、前記画素組み合わせパターン毎にフィルタ処理を施し、フィルタ処理された前記赤色画像データ、前記緑色画像データ、及び前記青色画像データを同一の画素組み合わせパターンによるフィルタ処理毎に合成して複数のフルカラー画像データを生成することを特徴とする画像処理方法を提供する。

本発明の画像処理装置及び画像処理方法によれば、入力画像に対する表示画像の解像度の低下によって生じる画像品位の低下を従来よりも改善することができる。

第１実施形態及び第２実施形態の画像処理装置を示すブロック図である。画素がダイアゴナル配列された構成を有する表示部を示す模式図である。画像処理装置の色画像分離部に入力される入力画像を示す模式図である。第１実施形態の画像処理方法を説明するためのフローチャートである。赤色画像を示す模式図である。緑色画像を示す模式図である。青色画像を示す模式図である。ダイアゴナル配列においてＧ画素を注目画素とした場合の複数の画素組み合わせパターンの一例を示す模式図である。赤色画像と画素組み合わせパターンとの関係を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された赤色画像を示す模式図である。緑色画像と画素組み合わせパターンとの関係を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された緑色画像を示す模式図である。青色画像と画素組み合わせパターンとの関係を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された青色画像を示す模式図である。赤色画像と画素組み合わせパターンとの関係を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された赤色画像を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された緑色画像を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された青色画像を示す模式図である。赤色画像と画素組み合わせパターンとの関係を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された赤色画像を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された緑色画像を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された青色画像を示す模式図である。赤色画像と画素組み合わせパターンとの関係を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された赤色画像を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された緑色画像を示す模式図である。画素組み合わせパターンに基づくフィルタ処理により生成された青色画像を示す模式図である。フィルタ処理により生成された赤色画像と緑色画像と青色画像とが合成されたフルカラー画像を示す模式図である。フィルタ処理により生成された赤色画像と緑色画像と青色画像とが合成されたフルカラー画像を示す模式図である。フィルタ処理により生成された赤色画像と緑色画像と青色画像とが合成されたフルカラー画像を示す模式図である。フィルタ処理により生成された赤色画像と緑色画像と青色画像とが合成されたフルカラー画像を示す模式図である。フルカラー画像が表示部に表示されるタイミングを説明するための模式図である。ダイアゴナル配列においてＧ画素を注目画素とした場合の複数の画素組み合わせパターンの一例を示す模式図である。

図１〜図３２を用いて第１実施形態及び第２実施形態の画像処理装置及び画像処理方法を説明する。第１実施形態及び第２実施形態の画像処理装置及び画像処理方法は、カラーフィルタ方式により画像を表示するための画像処理装置及び画像処理方法である。

［第１実施形態］
図１を用いて第１実施形態の画像処理装置を説明する。図１は第１実施形態の画像処理装置１を示している。

画像処理装置１は、入力画像データＩＤに基づいて表示部１００にフルカラー画像データＦＣを生成し、表示部１００へ出力する。

画像処理装置１は、色画像分離部２、フィルタ制御部３、フィルタ処理部４、及び、表示画像生成部５を備える。色画像分離部２、フィルタ制御部３、フィルタ処理部４、及び、表示画像生成部５を集積回路として構成してもよい。

色画像分離部２は、入力画像データＩＤから赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍを分離する。

色画像分離部２は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍを、フィルタ制御部３、及び、フィルタ処理部４へ出力する。

フィルタ制御部３は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍの画像情報に基づいてフィルタ処理を施すための複数の画素組み合わせパターンＰＰを設定する。フィルタ制御部３は、複数の画素組み合わせパターンが予め記憶されている記憶部から適切な画素組み合わせパターンＰＰを選択して設定するようにしてもよい。また、フィルタ制御部３は、所定のアルゴリズムに基づいて適切な画素組み合わせパターンＰＰを設定するようにしてもよい。なお、具体的な画素組み合わせパターンＰＰについては後述する。

フィルタ制御部３は、設定された画素組み合わせパターンＰＰを示すパターンデータＤＰＰをフィルタ処理部４へ出力する。

フィルタ処理部４は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに対して、入力されたパターンデータＤＰＰに基づいて、画素組み合わせパターン毎にフィルタ処理を施す。

フィルタ処理部４は、フィルタ処理が施された赤色画像データＲｆ、緑色画像データＧｆ、及び、青色画像データＢｆを、表示画像生成部５へ出力する。

表示画像生成部５は、赤色画像データＲｆと緑色画像データＧｆと青色画像データＢｆとを合成してフルカラー画像データＦＣを生成する。表示画像生成部５は、フルカラー画像データＦＣを表示部１００へ出力する。表示部１００は、フルカラー画像データＦＣに基づくフルカラー画像を表示する。

図２〜図３１を用いて第１実施形態の画像処理方法を説明する。以下に、表示部１００の画素がカラーフィルタ方式によりダイアゴナル配列されている状態を例に挙げて説明する。なお、表示部１００の画素配列はダイアゴナル配列に限定されるものではない。

図２は、表示部１００のダイアゴナル配列されている画素を模式的に示している。図２中のＲは赤色画像を表示するためのＲ画素である。Ｒ画素には赤色フィルタが配置されている。Ｇは緑色画像を表示するためのＧ画素である。Ｇ画素には緑色フィルタが配置されている。Ｂは青色画像を表示するためのＢ画素である。Ｂ画素には青色フィルタが配置されている。

フルカラー画像を表示するためには、光の３原色を構成するＲ画素、Ｇ画素、及び、Ｂ画素の３つの画素が必要である。そこで、Ｒ画素、Ｇ画素、及び、Ｂ画素の３つの画素からなる１組の画素を、フルカラー画像を表示するための１単位画素と定義する。

図３は、画像処理装置１の色画像分離部２に入力される入力画像データＩＤのフルカラー画像を模式的に示している。図３では入力画像データＩＤの各画素データが図２に示す表示部１００の画素に対応するように示している。例えば、図３中の画素データＲＧＢ２５は、図２の２行目で５列目のＲ画素に対応する。即ち、図２及び図３は入力画像と表示部１００とが同じ解像度となるように示している。

入力画像データＩＤの各画素データＲＧＢ１１〜ＲＧＢ１８，ＲＧＢ２１〜ＲＧＢ２８，ＲＧＢ３１〜ＲＧＢ３８，ＲＧＢ４１〜ＲＧＢ４８，ＲＧＢ５１〜ＲＧＢ５８，ＲＧＢ６１〜ＲＧＢ６８，ＲＧＢ７１〜ＲＧＢ７８，ＲＧＢ８１〜ＲＧＢ８８，ＲＧＢ９１〜ＲＧＢ９８は、赤色成分、緑色成分、及び、青色成分の画像情報を有している。

なお、図２及び図３では画素構成をわかりやすくするために９行８列のマトリクスで示しているが、入力画像及び表示部１００の画素数や解像度はこれに限定されるものではない。

図４に示すフローチャートを用いて、第１実施形態の画像処理方法を説明する。図４において、色画像分離部２は、ステップＳ１にて、入力画像データＩＤから、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍを分離し、フィルタ制御部３及びフィルタ処理部４へ出力する。

図５は赤色画像データＲｍを模式的に示している。図５は図３に対応している。赤色画像データＲｍの各画素データＲ１１〜Ｒ１８，Ｒ２１〜Ｒ２８，Ｒ３１〜Ｒ３８，Ｒ４１〜Ｒ４８，Ｒ５１〜Ｒ５８，Ｒ６１〜Ｒ６８，Ｒ７１〜Ｒ７８，Ｒ８１〜Ｒ８８，Ｒ９１〜Ｒ９８は、赤色成分の階調等の画像情報を有している。

図６は緑色画像データＧｍを模式的に示している。図６は図３に対応している。緑色画像データＧｍの各画素データＧ１１〜Ｇ１８，Ｇ２１〜Ｇ２８，Ｇ３１〜Ｇ３８，Ｇ４１〜Ｇ４８，Ｇ５１〜Ｇ５８，Ｇ６１〜Ｇ６８，Ｇ７１〜Ｇ７８，Ｇ８１〜Ｇ８８，Ｇ９１〜Ｇ９８は、緑色成分の階調等の画像情報を有している。

図７は青色画像データＢｍを模式的に示している。図７は図３に対応している。青色画像データＢｍの各画素データＢ１１〜Ｂ１８，Ｂ２１〜Ｂ２８，Ｂ３１〜Ｂ３８，Ｂ４１〜Ｂ４８，Ｂ５１〜Ｂ５８，Ｂ６１〜Ｂ６８，Ｂ７１〜Ｂ７８，Ｂ８１〜Ｂ８８，Ｂ９１〜Ｂ９８は、青色成分の階調等の画像情報を有している。

図８（ａ）〜図８（ｄ）は、ダイアゴナル配列においてＧ画素を注目画素とした場合の複数の画素組み合わせパターンの一例を模式的に示している。図８（ａ）〜図８（ｄ）は図２における単位画素を示す部分図である。

フィルタ制御部３は、図４のステップＳ２にて、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに基づいて、複数の画素組み合わせパターンＰＰ、例えば、図８（ａ）に示す画素組み合わせパターンＰＰａ、図８（ｂ）に示す画素組み合わせパターンＰＰｂ、図８（ｃ）に示す画素組み合わせパターンＰＰｃ、及び、図８（ｄ）に示す画素組み合わせパターンＰＰｄを設定する。

画素組み合わせパターンＰＰａ〜ＰＰｄは単位画素により構成されている。画素組み合わせパターンＰＰａ〜ＰＰｄは、フィルタ制御部３に予め記憶されていてもよいし、所定のアルゴリズムに基づいて設定されるようにしてもよい。

フィルタ制御部３は、画素組み合わせパターンＰＰを示すパターンデータＤＰＰ、具体的には、画素組み合わせパターンＰＰａを示すパターンデータＤＰＰａ、画素組み合わせパターンＰＰｂを示すパターンデータＤＰＰｂ、画素組み合わせパターンＰＰｃを示すパターンデータＤＰＰｃ、及び、画素組み合わせパターンＰＰｄを示すパターンデータＤＰＰｄを、フィルタ処理部４へ出力する。

フィルタ処理部４は、ステップＳ３にて、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに対して、複数の画素組み合わせパターンＰＰａ〜ＰＰｄに基づいてフィルタ処理を施す。

図９〜図３０を用いて、複数の画素組み合わせパターンＰＰａ〜ＰＰｄに基づくフィルタ処理について説明する。

フィルタ処理部４は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに対して、画素組み合わせパターン（第１の画素組み合わせパターン）ＰＰａに基づいてフィルタ処理（第１のフィルタ処理）を施す。

図９は赤色画像データＲｍと画素組み合わせパターンＰＰａとの関係を模式的に示している。画素組み合わせパターンＰＰａを太枠で示している。例えば、図９中のＲ４４は図２に示すダイアゴナル配列における４行目で４列目のＲ画素に対応する。Ｒ４５は４行目で５列目のＧ画素に対応する。Ｒ４６は４行目で６列目のＢ画素に対応する。

図１０は画素組み合わせパターンＰＰａに基づいてフィルタ処理が施された赤色画像データＲｆａを模式的に示している。図１０中の画素Ｒ１１ａ，Ｒ１４ａ，Ｒ１７ａ，Ｒ２２ａ，Ｒ２５ａ，Ｒ２８ａ，Ｒ３３ａ，Ｒ３６ａ，Ｒ４１ａ，Ｒ４４ａ，Ｒ４７ａ，Ｒ５２ａ，Ｒ５５ａ，Ｒ５８ａ，Ｒ６３ａ，Ｒ６６ａ，Ｒ７１ａ，Ｒ７４ａ，Ｒ７７ａ，Ｒ８２ａ，Ｒ８５ａ，Ｒ８８ａ，Ｒ９３ａ，Ｒ９６ａは、図２に示すダイアゴナル配列のＲ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍに対して画素組み合わせパターンＰＰａに基づいてフィルタ処理を施すことにより、赤色画像データＲｆａ（図１０参照）を生成する。

具体的には、フィルタ処理部４は、例えば、赤色画像データＲｆａの画素Ｒ４４ａに対応する赤色画像データＲｍの画素Ｒ４４を注目画素として、画素組み合わせパターンＰＰａ内の画素Ｒ４４、画素Ｒ４５、及び画素Ｒ４６の階調の平均値を算出する。フィルタ処理部４は、算出された平均値を赤色画像データＲｆａの画素Ｒ４４ａの階調として設定する。画素Ｒ４４ａは図２に示すダイアゴナル配列における４行目で４列目のＲ画素に相当する。他のＲ画素についても画素組み合わせパターンＰＰａに基づいてフィルタ処理が施される。

赤色画像データＲｍの画素Ｒ４５は、図２に示すダイアゴナル配列における４行目で５列目のＧ画素に相当する。赤色画像データＲｍの画素Ｒ４６は、図２に示すダイアゴナル配列における４行目で６列目のＢ画素に相当する。赤色画像データＲｆａの画素Ｒ４４ａに対応する画素Ｒ４４の周辺画素であるＲ４５及びＲ４６は、表示部１００のＧ画素及びＢ画素に対応するため、従来であればデータして反映されない画素である。画素組み合わせパターンＰＰａを単位画素で構成することにより、従来であれば反映されない周辺画素Ｒ４５及びＲ４６の画像情報を赤色画像データＲｆａの画素Ｒ４４ａに反映させることができる。

図９に示すように、画素組み合わせパターンＰＰａは赤色画像データＲｍの各Ｒ画素に隙間なく配置される。これにより、フィルタ処理部４は、赤色画像データＲｍのほぼ全てのＲ画素を対象にしてフィルタ処理を施すことができる。従って、赤色画像データＲｍのほぼ全てのＲ画素を赤色画像データＲｆａに反映させることができる。

なお、画素組み合わせパターンＰＰａ外の画素をフィルタ処理の対象画素としてもよい。具体的には、例えば画素Ｒ４４を注目画素とした場合、画素Ｒ４４が対象画素として含まれていればよいので、赤色画像データＲｍの画素Ｒ４３、画素Ｒ４４、及び画素Ｒ４５の階調の平均値を算出し、この平均値を画素Ｒ４４ａの階調として設定してもよい。また、赤色画像データＲｍの画素Ｒ４２、画素Ｒ４３、及び画素Ｒ４４の階調の平均値を算出し、この平均値を画素Ｒ４４ａの階調として設定してもよい。

図１１は緑色画像データＧｍと画素組み合わせパターンＰＰａとの関係を模式的に示している。画素組み合わせパターンＰＰａを太枠で示している。例えば、図１１中のＧ４４は図２に示すダイアゴナル配列における４行目で４列目のＲ画素に対応する。Ｇ４５は４行目で５列目のＧ画素に対応する。Ｇ４６は４行目で６列目のＢ画素に対応する。

図１２は画素組み合わせパターンＰＰａに基づいてフィルタ処理が施された緑色画像データＧｆａを模式的に示している。図１２中の画素Ｇ１２ａ，Ｇ１５ａ，Ｇ１８ａ，Ｇ２３ａ，Ｇ２６ａ，Ｇ３１ａ，Ｇ３４ａ，Ｇ３７ａ，Ｇ４２ａ，Ｇ４５ａ，Ｇ４８ａ，Ｇ５３ａ，Ｇ５６ａ，Ｇ６１ａ，Ｇ６４ａ，Ｇ６７ａ，Ｇ７２ａ，Ｇ７５ａ，Ｇ７８ａ，Ｇ８３ａ，Ｇ８６ａ，Ｇ９１ａ，Ｇ９４ａ，Ｇ９７ａは、図２に示すダイアゴナル配列のＧ画素に相当する。

フィルタ処理部４は、緑色画像データＧｍに対して画素組み合わせパターンＰＰａに基づいてフィルタ処理を施すことにより、緑色画像データＧｆａ（図１２参照）を生成する。

具体的には、フィルタ処理部４は、例えば、緑色画像データＧｆａの画素Ｇ４５ａに対応する緑色画像データＧｍの画素Ｇ４５を注目画素として、画素組み合わせパターンＰＰａ内の画素Ｇ４４、画素Ｇ４５、及び画素Ｇ４６の階調の平均値を算出する。フィルタ処理部４は、算出された平均値を緑色画像データＧｆａの画素Ｇ４５ａの階調として設定する。画素Ｇ４５ａは図２に示すダイアゴナル配列における４行目で５列目のＧ画素に相当する。他のＧ画素についても画素組み合わせパターンＰＰａに基づいてフィルタ処理が施される。

緑色画像データＧｍの画素Ｒ４４は、図２に示すダイアゴナル配列における４行目で４列目のＲ画素に相当する。緑色画像データＧｍの画素Ｒ４６は、図２に示すダイアゴナル配列における４行目で６列目のＢ画素に相当する。緑色画像データＧｆａの画素Ｇ４５ａに対応する画素Ｇ４５の周辺画素であるＧ４４及びＧ４６は、表示部１００のＲ画素及びＢ画素に対応するため、従来であればデータして反映されない画素である。画素組み合わせパターンＰＰａを単位画素で構成することにより、従来であれば反映されない周辺画素Ｇ４４及びＧ４６の画像情報を緑色画像データＧｆａの画素Ｇ４５ａに反映させることができる。

図１１に示すように、画素組み合わせパターンＰＰａは緑色画像データＧｍの各Ｇ画素に隙間なく配置される。これにより、フィルタ処理部４は、緑色画像Ｇｍのほぼ全てのＧ画素を対象にしてフィルタ処理を実行することができる。従って、緑色画像データＧｍのほぼ全てのＧ画素を緑色画像データＧｆａに反映させることができる。

なお、画素組み合わせパターンＰＰａ外の画素をフィルタ処理の対象画素としてもよい。具体的には、例えば画素Ｇ４５を注目画素とした場合、画素Ｇ４５が対象画素として含まれていればよいので、緑色画像データＧｍの画素Ｇ４３、画素Ｇ４４、及び画素Ｇ４５の階調の平均値を算出し、この平均値を画素Ｇ４５ａの階調として設定してもよい。また、緑色画像データＧｍの画素Ｇ４５、画素Ｇ４６、及び画素Ｇ４７の階調の平均値を算出し、この平均値を画素Ｇ４５ａの階調として設定してもよい。

図１３は青色画像データＢｍと画素組み合わせパターンＰＰａとの関係を模式的に示している。画素組み合わせパターンＰＰａを太枠で示している。例えば、図１３中のＢ４４は図２に示すダイアゴナル配列における４行目で４列目のＲ画素に対応する。Ｂ４５は４行目で５列目のＧ画素に対応する。Ｂ４６は４行目で６列目のＢ画素に対応する。

図１４は画素組み合わせパターンＰＰａに基づいてフィルタ処理が施された青色画像データＢｆａを模式的に示している。図１４中の画素Ｂ１３ａ，Ｂ１６ａ，Ｂ２１ａ，Ｂ２４ａ，Ｂ２７ａ，Ｂ３２ａ，Ｂ３５ａ，Ｂ３８ａ，Ｂ４３ａ，Ｂ４６ａ，Ｂ５１ａ，Ｂ５４ａ，Ｂ５７ａ，Ｂ６２ａ，Ｂ６５ａ，Ｂ６８ａ，Ｂ７３ａ，Ｂ７６ａ，Ｂ８１ａ，Ｂ８４ａ，Ｂ８７ａ，Ｂ９２ａ，Ｂ９５ａ，Ｂ９８ａは、図２に示すダイアゴナル配列のＢ画素に相当する。

フィルタ処理部４は、青色画像データＢｍに対して画素組み合わせパターンＰＰａに基づいてフィルタ処理を施すことにより、青色画像データＢｆａ（図１４参照）を生成する。

具体的には、フィルタ処理部４は、例えば、青色画像データＢｆａの画素Ｂ４６ａに対応する青色画像データＢｍの画素Ｂ４６を注目画素として、画素組み合わせパターンＰＰａ内の画素Ｂ４４、画素Ｂ４５、及び画素Ｂ４６の階調の平均値を算出する。フィルタ処理部４は、算出された平均値を青色画像データＢｆａの画素Ｂ４６ａの階調として設定する。画素Ｂ４６ａは図２に示すダイアゴナル配列における４行目で６列目のＢ画素に相当する。他のＢ画素についても画素組み合わせパターンＰＰａに基づいてフィルタ処理が施される。

青色画像データＢｍの画素Ｒ４４は、図２に示すダイアゴナル配列における４行目で４列目のＲ画素に相当する。青色画像データＢｍの画素Ｒ４５は、図２に示すダイアゴナル配列における４行目で５列目のＧ画素に相当する。青色画像データＢｆａの画素Ｂ４６ａに対応する画素Ｂ４６の周辺画素であるＢ４４及びＢ４５は、表示部１００のＲ画素及びＧ画素に対応するため、従来であればデータして反映されない画素である。画素組み合わせパターンＰＰａを単位画素で構成することにより、従来であれば反映されない周辺画素Ｂ４４及びＢ４５の画像情報を青色画像データＢｆａの画素Ｂ４６ａに反映させることができる。

図１３に示すように、画素組み合わせパターンＰＰａは青色画像データＢｍの各Ｂ画素に隙間なく配置される。これにより、フィルタ処理部４は、青色画像データＢｍのほぼ全てのＢ画素を対象にしてフィルタ処理を施すことができる。従って、青色画像データＢｍのほぼ全てのＢ画素を青色画像データＢｆａに反映させることができる。

なお、画素組み合わせパターンＰＰａ外の画素をフィルタ処理の対象画素としてもよい。具体的には、例えば画素Ｂ４６を注目画素とした場合、画素Ｂ４６が対象画素として含まれていればよいので、青色画像データＢｍの画素Ｂ４５、画素Ｂ４６、及び画素Ｂ４７の階調の平均値を算出し、この平均値を画素Ｂ４６ａの階調として設定してもよい。また、青色画像データＢｍの画素Ｂ４６、画素Ｂ４７、及び画素Ｂ４８の階調の平均値を算出し、この平均値を画素Ｇ４６ａの階調として設定してもよい。

フィルタ処理部４は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに対して画素組み合わせパターン（第２の画素組み合わせパターン）ＰＰｂに基づいてフィルタ処理（第２のフィルタ処理）を施す。

図１５は赤色画像データＲｍと画素組み合わせパターンＰＰｂとの関係を模式的に示している。画素組み合わせパターンＰＰｂを太枠で示している。例えば、図１５中のＲ２４は図２に示すダイアゴナル配列における２行目で４列目のＢ画素に対応する。Ｒ３４は３行目で４列目のＧ画素に対応する。Ｒ４４は４行目で４列目のＲ画素に対応する。

図１６は画素組み合わせパターンＰＰｂに基づくフィルタ処理により生成された赤色画像データＲｆｂを模式的に示している。図１６中の画素Ｒ１１ｂ，Ｒ１４ｂ，Ｒ１７ｂ，Ｒ２２ｂ，Ｒ２５ｂ，Ｒ２８ｂ，Ｒ３３ｂ，Ｒ３６ｂ，Ｒ４１ｂ，Ｒ４４ｂ，Ｒ４７ｂ，Ｒ５２ｂ，Ｒ５５ｂ，Ｒ５８ｂ，Ｒ６３ｂ，Ｒ６６ｂ，Ｒ７１ｂ，Ｒ７４ｂ，Ｒ７７ｂ，Ｒ８２ｂ，Ｒ８５ｂ，Ｒ８８ｂ，Ｒ９３ｂ，Ｒ９６ｂは、図２に示すダイアゴナル配列のＲ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍに対して画素組み合わせパターンＰＰｂに基づいてフィルタ処理を施すことにより、赤色画像データＲｆｂ（図１６参照）を生成する。

具体的には、フィルタ処理部４は、例えば、赤色画像データＲｆｂの画素Ｒ４４ｂに対応する赤色画像データＲｍの画素Ｒ４４を注目画素として、画素組み合わせパターンＰＰｂ内の画素Ｒ２４、画素Ｒ３４、及び画素Ｒ４４の階調の平均値を算出する。フィルタ処理部４は、算出された平均値を赤色画像データＲｆｂの画素Ｒ４４ｂの階調として設定する。画素Ｒ４４ｂは図２に示すダイアゴナル配列における４行目で４列目のＲ画素に相当する。他のＲ画素についても画素組み合わせパターンＰＰｂに基づいてフィルタ処理が施される。

赤色画像データＲｍの画素Ｒ２４は、図２に示すダイアゴナル配列における２行目で４列目のＢ画素に相当する。赤色画像データＲｍの画素Ｒ３４は、図２に示すダイアゴナル配列における３行目で４列目のＧ画素に相当する。赤色画像データＲｆｂの画素Ｒ４４ｂに対応する画素Ｒ４４の周辺画素であるＲ２４及びＲ３４は、表示部１００のＢ画素及びＧ画素に対応するため、従来であればデータして反映されない画素である。画素組み合わせパターンＰＰｂを単位画素で構成することにより、従来であれば反映されない周辺画素Ｒ２４及びＲ３４の画像情報を赤色画像データＲｆｂの画素Ｒ４４ｂに反映させることができる。

図１５に示すように、画素組み合わせパターンＰＰｂは赤色画像データＲｍの各Ｒ画素に隙間なく配置される。これにより、フィルタ処理部４は、赤色画像データＲｍのほぼ全てのＲ画素を対象にしてフィルタ処理を施すことができる。従って、赤色画像データＲｍのほぼ全てのＲ画素を赤色画像データＲｆｂに反映させることができる。

なお、画素組み合わせパターンＰＰｂ外の画素をフィルタ処理の対象画素としてもよい。具体的には、例えば画素Ｒ４４を注目画素とした場合、画素Ｒ４４が対象画素として含まれていればよいので、赤色画像データＲｍの画素Ｒ３４、画素Ｒ４４、及び画素Ｒ５４の階調の平均値を算出し、この平均値を画素Ｒ４４ｂの階調として設定してもよい。また、赤色画像データＲｍの画素Ｒ４４、画素Ｒ５４、及び画素Ｒ６４の階調の平均値を算出し、この平均値を画素Ｒ４４ｂの階調として設定してもよい。

フィルタ処理部４は、赤色画像データＲｍと同様に、緑色画像データＧｍのほぼ全てのＧ画素を対象にしてフィルタ処理を施し、緑色画像データＧｆｂ（図１７参照）を生成する。従って、緑色画像データＧｍのほぼ全てのＧ画素を緑色画像データＧｆｂに反映させることができる。

図１７中の画素Ｇ１２ｂ，Ｇ１５ｂ，Ｇ１８ｂ，Ｇ２３ｂ，Ｇ２６ｂ，Ｇ３１ｂ，Ｇ３４ｂ，Ｇ３７ｂ，Ｇ４２ｂ，Ｇ４５ｂ，Ｇ４８ｂ，Ｇ５３ｂ，Ｇ５６ｂ，Ｇ６１ｂ，Ｇ６４ｂ，Ｇ６７ｂ，Ｇ７２ｂ，Ｇ７５ｂ，Ｇ７８ｂ，Ｇ８３ｂ，Ｇ８６ｂ，Ｇ９１ｂ，Ｇ９４ｂ，Ｇ９７ｂは、図２に示すダイアゴナル配列のＧ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍと同様に、青色画像データＢｍのほぼ全てのＢ画素を対象にしてフィルタ処理を施し、青色画像データＢｆｂ（図１８参照）を生成する。従って、青色画像データＢｍのほぼ全てのＢ画素を青色画像データＢｆｂに反映させることができる。

図１８中の画素Ｂ１３ｂ，Ｂ１６ｂ，Ｂ２１ｂ，Ｂ２４ｂ，Ｂ２７ｂ，Ｂ３２ｂ，Ｂ３５ｂ，Ｂ３８ｂ，Ｂ４３ｂ，Ｂ４６ｂ，Ｂ５１ｂ，Ｂ５４ｂ，Ｂ５７ｂ，Ｂ６２ｂ，Ｂ６５ｂ，Ｂ６８ｂ，Ｂ７３ｂ，Ｂ７６ｂ，Ｂ８１ｂ，Ｂ８４ｂ，Ｂ８７ｂ，Ｂ９２ｂ，Ｂ９５ｂ，Ｂ９８ｂは、図２に示すダイアゴナル配列のＢ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに対して画素組み合わせパターン（第３の画素組み合わせパターン）ＰＰｃに基づいてフィルタ処理（第３のフィルタ処理）を施す。

図１９は赤色画像データＲｍと画素組み合わせパターンＰＰｃとの関係を模式的に示している。画素組み合わせパターンＰＰｃを太枠で示している。例えば、図１９中のＲ３４は図２に示すダイアゴナル配列における３行目で４列目のＧ画素に対応する。Ｒ３５は３行目で５列目のＢ画素に対応する。Ｒ４４は４行目で４列目のＲ画素に対応する。

図２０は画素組み合わせパターンＰＰｃに基づくフィルタ処理により生成された赤色画像データＲｆｃを模式的に示している。図２０中の画素Ｒ１１ｃ，Ｒ１４ｃ，Ｒ１７ｃ，Ｒ２２ｃ，Ｒ２５ｃ，Ｒ２８ｃ，Ｒ３３ｃ，Ｒ３６ｃ，Ｒ４１ｃ，Ｒ４４ｃ，Ｒ４７ｃ，Ｒ５２ｃ，Ｒ５５ｃ，Ｒ５８ｃ，Ｒ６３ｃ，Ｒ６６ｃ，Ｒ７１ｃ，Ｒ７４ｃ，Ｒ７７ｃ，Ｒ８２ｃ，Ｒ８５ｃ，Ｒ８８ｃ，Ｒ９３ｃ，Ｒ９６ｃは、図２に示すダイアゴナル配列のＲ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍに対して画素組み合わせパターンＰＰｃに基づいてフィルタ処理を施すことにより、赤色画像データＲｆｃ（図２０参照）を生成する。

具体的には、フィルタ処理部４は、例えば、赤色画像データＲｆｃの画素Ｒ４４ｃに対応する赤色画像データＲｍの画素Ｒ４４を注目画素として、画素組み合わせパターンＰＰｃ内の画素Ｒ３４、画素Ｒ３５、及び画素Ｒ４４の階調の平均値を算出する。フィルタ処理部４は、算出された平均値を赤色画像データＲｆｃの画素Ｒ４４ｃの階調として設定する。画素Ｒ４４ｃは図２に示すダイアゴナル配列における４行目で４列目のＲ画素に相当する。他のＲ画素についても画素組み合わせパターンＰＰｃに基づいてフィルタ処理が施される。

赤色画像データＲｍの画素Ｒ３４は、図２に示すダイアゴナル配列における３行目で４列目のＧ画素に相当する。赤色画像データＲｍの画素Ｒ３５は、図２に示すダイアゴナル配列における３行目で５列目のＢ画素に相当する。赤色画像データＲｆｃの画素Ｒ４４ｃに対応する画素Ｒ４４の周辺画素であるＲ３４及びＲ３５は、表示部１００のＧ画素及びＢ画素に対応するため、従来であればデータして反映されない画素である。画素組み合わせパターンＰＰｃを単位画素で構成することにより、従来であれば反映されない周辺画素Ｒ３４及びＲ３５の画像情報を赤色画像データＲｆｃの画素Ｒ４４ｃに反映させることができる。

図１９に示すように、画素組み合わせパターンＰＰｃは赤色画像データＲｍの各Ｒ画素に隙間なく配置される。これにより、フィルタ処理部４は、赤色画像データＲｍのほぼ全てのＲ画素を対象にしてフィルタ処理を施すことができる。従って、赤色画像データＲｍのほぼ全てのＲ画素を赤色画像データＲｆｃに反映させることができる。

フィルタ処理部４は、赤色画像データＲｍと同様に、緑色画像データＧｍのほぼ全てのＧ画素を対象にしてフィルタ処理を施し、緑色画像データＧｆｃ（図２１参照）を生成する。従って、緑色画像データＧｍのほぼ全てのＧ画素を緑色画像データＧｆｃに反映させることができる。

図２１中の画素Ｇ１２ｃ，Ｇ１５ｃ，Ｇ１８ｃ，Ｇ２３ｃ，Ｇ２６ｃ，Ｇ３１ｃ，Ｇ３４ｃ，Ｇ３７ｃ，Ｇ４２ｃ，Ｇ４５ｃ，Ｇ４８ｃ，Ｇ５３ｃ，Ｇ５６ｃ，Ｇ６１ｃ，Ｇ６４ｃ，Ｇ６７ｃ，Ｇ７２ｃ，Ｇ７５ｃ，Ｇ７８ｃ，Ｇ８３ｃ，Ｇ８６ｃ，Ｇ９１ｃ，Ｇ９４ｃ，Ｇ９７ｃは、図２に示すダイアゴナル配列のＧ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍと同様に、青色画像データＢｍのほぼ全てのＢ画素を対象にしてフィルタ処理を施し、青色画像データＢｆｃ（図２２参照）を生成する。従って、青色画像データＢｍのほぼ全てのＢ画素を青色画像データＢｆｃに反映させることができる。

図２２中の画素Ｂ１３ｃ，Ｂ１６ｃ，Ｂ２１ｃ，Ｂ２４ｃ，Ｂ２７ｃ，Ｂ３２ｃ，Ｂ３５ｃ，Ｂ３８ｃ，Ｂ４３ｃ，Ｂ４６ｃ，Ｂ５１ｃ，Ｂ５４ｃ，Ｂ５７ｃ，Ｂ６２ｃ，Ｂ６５ｃ，Ｂ６８ｃ，Ｂ７３ｃ，Ｂ７６ｃ，Ｂ８１ｃ，Ｂ８４ｃ，Ｂ８７ｃ，Ｂ９２ｃ，Ｂ９５ｃ，Ｂ９８ｃは、図２に示すダイアゴナル配列のＢ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに対して画素組み合わせパターン（第４の画素組み合わせパターン）ＰＰｄに基づいてフィルタ処理（第４のフィルタ処理）を施す。

図２３は赤色画像データＲｍと画素組み合わせパターンＰＰｄとの関係を模式的に示している。画素組み合わせパターンＰＰｄを太枠で示している。例えば、図２３中のＲ３５は図２に示すダイアゴナル配列における３行目で５列目のＢ画素に対応する。Ｒ４４は４行目で４列目のＲ画素に対応する。Ｒ４５は４行目で５列目のＧ画素に対応する。

図２４は画素組み合わせパターンＰＰｄに基づくフィルタ処理により生成された赤色画像データＲｆｄを示す模式図である。図２４中の画素Ｒ１１ｄ，Ｒ１４ｄ，Ｒ１７ｄ，Ｒ２２ｄ，Ｒ２５ｄ，Ｒ２８ｄ，Ｒ３３ｄ，Ｒ３６ｄ，Ｒ４１ｄ，Ｒ４４ｄ，Ｒ４７ｄ，Ｒ５２ｄ，Ｒ５５ｄ，Ｒ５８ｄ，Ｒ６３ｄ，Ｒ６６ｄ，Ｒ７１ｄ，Ｒ７４ｄ，Ｒ７７ｄ，Ｒ８２ｄ，Ｒ８５ｄ，Ｒ８８ｄ，Ｒ９３ｄ，Ｒ９６ｄは、図２に示すダイアゴナル配列のＲ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍに対して画素組み合わせパターンＰＰｄに基づいてフィルタ処理を施すことにより、赤色画像データＲｆｄ（図２４参照）を生成する。

具体的には、フィルタ処理部４は、例えば、赤色画像データＲｆｄの画素Ｒ４４ｄに対応する赤色画像データＲｍの画素Ｒ４４を注目画素として、画素組み合わせパターンＰＰｄ内の画素Ｒ３５、画素Ｒ４４、及び画素Ｒ４５の階調の平均値を算出する。フィルタ処理部４は、算出された平均値を赤色画像データＲｆｄの画素Ｒ４４ｄの階調として設定する。画素Ｒ４４ｄは図２に示すダイアゴナル配列における４行目で４列目のＲ画素に相当する。他のＲ画素についても画素組み合わせパターンＰＰｄに基づいてフィルタ処理が施される。

赤色画像データＲｍの画素Ｒ３５は、図２に示すダイアゴナル配列における３行目で５列目のＢ画素に相当する。赤色画像データＲｍの画素Ｒ４５は、図２に示すダイアゴナル配列における４行目で５列目のＧ画素に相当する。赤色画像データＲｆｄの画素Ｒ４４ｄに対応する画素Ｒ４４の周辺画素であるＲ３５及びＲ４５は、表示部１００のＢ画素及びＧ画素に対応するため、従来であればデータして反映されない画素である。画素組み合わせパターンＰＰｄを単位画素で構成することにより、従来であれば反映されない周辺画素Ｒ３５及びＲ４５の画像情報を赤色画像データＲｆｄの画素Ｒ４４ｄに反映させることができる。

図２３に示すように、画素組み合わせパターンＰＰｄは赤色画像データＲｍの各Ｒ画素に隙間なく配置される。これにより、フィルタ処理部４は、赤色画像データＲｍのほぼ全てのＲ画素を対象にしてフィルタ処理を施すことができる。従って、赤色画像データＲｍのほぼ全てのＲ画素を赤色画像データＲｆｄに反映させることができる。

フィルタ処理部４は、赤色画像データＲｍと同様に、緑色画像データＧｍのほぼ全てのＧ画素を対象にしてフィルタ処理を施し、緑色画像データＧｆｄ（図２５参照）を生成する。従って、緑色画像データＧｍのほぼ全てのＧ画素を緑色画像データＧｆｄに反映させることができる。

図２５中の画素Ｇ１２ｄ，Ｇ１５ｄ，Ｇ１８ｄ，Ｇ２３ｄ，Ｇ２６ｄ，Ｇ３１ｄ，Ｇ３４ｄ，Ｇ３７ｄ，Ｇ４２ｄ，Ｇ４５ｄ，Ｇ４８ｄ，Ｇ５３ｄ，Ｇ５６ｄ，Ｇ６１ｄ，Ｇ６４ｄ，Ｇ６７ｄ，Ｇ７２ｄ，Ｇ７５ｄ，Ｇ７８ｄ，Ｇ８３ｄ，Ｇ８６ｄ，Ｇ９１ｄ，Ｇ９４ｄ，Ｇ９７ｄは、図２に示すダイアゴナル配列のＧ画素に相当する。

フィルタ処理部４は、赤色画像データＲｍと同様に、青色画像データＢｍのほぼ全てのＢ画素を対象にしてフィルタ処理を施し、青色画像データＢｆｄ（図２６参照）を生成する。従って、青色画像データＢｍのほぼ全てのＢ画素を緑色画像データＢｆｄに反映させることができる。

図２６中の画素Ｂ１３ｄ，Ｂ１６ｄ，Ｂ２１ｄ，Ｂ２４ｄ，Ｂ２７ｄ，Ｂ３２ｄ，Ｂ３５ｄ，Ｂ３８ｄ，Ｂ４３ｄ，Ｂ４６ｄ，Ｂ５１ｄ，Ｂ５４ｄ，Ｂ５７ｄ，Ｂ６２ｄ，Ｂ６５ｄ，Ｂ６８ｄ，Ｂ７３ｄ，Ｂ７６ｄ，Ｂ８１ｄ，Ｂ８４ｄ，Ｂ８７ｄ，Ｂ９２ｄ，Ｂ９５ｄ，Ｂ９８ｄは、図２に示すダイアゴナル配列のＢ画素に相当する。

表示画像生成部５は、図４のステップＳ４にて、複数の画素組み合わせパターンに基づいて生成された赤色画像データＲｆと緑色画像データＧｆと青色画像データＢｆとを、同一の画素組み合わせパターンによるフィルタ処理毎に合成し、複数のフルカラー画像データＦＣを生成する。

具体的には、表示画像生成部５は、画素組み合わせパターンＰＰａに基づいて生成された赤色画像データＲｆａと緑色画像データＧｆａと青色画像データＢｆａとを合成して、図２７に示すフルカラー画像データ（第１のフルカラー画像データ）ＦＣａを生成する。

表示画像生成部５は、画素組み合わせパターンＰＰｂに基づいて生成された赤色画像データＲｆｂと緑色画像データＧｆｂと青色画像データＢｆｂとを合成して、図２８に示すフルカラー画像データ（第２のフルカラー画像データ）ＦＣｂを生成する。

表示画像生成部５は、画素組み合わせパターンＰＰｃに基づいて生成された赤色画像データＲｆｃと緑色画像データＧｆｃと青色画像データＢｆｃとを合成して、図２９に示すフルカラー画像データ（第３のフルカラー画像データ）ＦＣｃを生成する。

表示画像生成部５は、画素組み合わせパターンＰＰｄに基づいて生成された赤色画像データＲｆｄと緑色画像データＧｆｄと青色画像データＢｆｄとを合成して、図３０に示すフルカラー画像データ（第４のフルカラー画像データ）ＦＣｄを生成する。

表示画像生成部５は、フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，Ｆｃｄを表示部１００へ出力する。

図３１は、フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，Ｆｃｄがフルカラー画像として表示部１００に表示されるタイミングを模式的に示している。

フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，Ｆｃｄは、１フレーム期間内で１／４フレーム毎に切り替えられる。フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，Ｆｃｄが１フレーム期間内で切り替えられる順番やタイミングは、表示画像生成部５、フィルタ処理部４、または、フィルタ制御部３によって制御される。

表示部１００には、フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，Ｆｃｄに基づくフルカラー画像が１フレーム期間内で切り替えられて表示される。

例えば、赤色画像データＲｍの画素Ｒ４４を注目画素とした場合、フルカラー画像データＦＣａの画素Ｒ４４ａは、画素Ｒ４４、画素Ｒ４５、及び画素Ｒ４６の画像情報に基づいて設定される。フルカラー画像データＦＣｂの画素Ｒ４４ｂは、画素Ｒ２４、画素Ｒ３４、及び画素Ｒ４４の画像情報に基づいて設定される。フルカラー画像データＦＣｃの画素Ｒ４４ｃは、画素Ｒ３４、画素Ｒ３５、及び画素Ｒ４４の画像情報に基づいて設定される。フルカラー画像データＦＣｄの画素Ｒ４４ｄは、画素Ｒ３５、画素Ｒ４４、及び画素Ｒ４５の画像情報に基づいて設定される。

フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，Ｆｃｄの画素Ｒ４４ａ，Ｒ４４ｂ，Ｒ４４ｃ，Ｒ４４ｄは、表示部１００の４行目で４列目のＲ画素（図２参照）に表示される。フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，Ｆｃｄの他のＲ画素、Ｇ画素、Ｂ画素についても同様である。

フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，ＦＣｄは画素組み合わせパターンが異なるフィルタ処理により生成されている。そのため、フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，ＦＣｄが１フレーム期間内で切り替えられることによって表示部１００に表示されるフルカラー画像は、単一のフィルタ処理により生成されるフルカラー画像と比較して、より多くの周辺画素を対象画素としてフィルタ処理が施されていることになる。即ち、フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，ＦＣｄが１フレーム期間内で切り替えられることにより、表示部１００にはより多くの画像情報により生成されたフルカラー画像が表示されることになる。

従って、フルカラー画像データＦＣａ，ＦＣｂ，ＦＣｃ，ＦＣｄを１フレーム期間内で切り替えることにより、単一のフィルタ処理により生成されたフルカラー画像よりも画像品位を向上させることができる。

よって、第１実施形態の画像処理装置及び画像処理方法によれば、カラーフィルタ方式において、入力画像に対する表示画像の解像度の低下によって生じる画像品位の低下を従来よりも改善することができる。

なお、第１実施形態の画像処理装置及び画像処理方法では、Ｇ画素を注目画素として画素組み合わせパターンを設定したが、これに限定されるものではなく、Ｒ画素またはＢ画素を注目画素として画素組み合わせパターンを設定するようにしてもよい。

また、第１実施形態の画像処理装置及び画像処理方法では、複数の画素組み合わせパターンとして、４つの画素組み合わせパターンＰＰａ，ＰＰｂ，ＰＰｃ，ＰＰｄを設定したが、これに限定されるものではなく、２つ以上の画素組み合わせパターンであればよい。

２つの画素組み合わせパターンを設定する場合、お互いを補完する関係を有する組み合わせが望ましい。例えば、水平方向の周辺画素を含む画素組み合わせパターンＰＰａと垂直方向の周辺画素を含む画素組み合わせパターンＰＰｂとの組み合わせが望ましい。同様の理由により、画素組み合わせパターンＰＰｃと画素組み合わせパターンＰＰｄとの組み合わせが望ましい。

［第２実施形態］
第２実施形態の画像処理装置は、第１実施形態の画像処理装置と構成が同じであり、フィルタ処理を施すための画素組み合わせパターン、具体的には画素組み合わせパターンの画素数が異なる。説明をわかりやすくするために、第１実施形態の画像処理装置１と同じ構成部には同じ符号を付す。

図３２（ａ）〜図３２（ｆ）は、ダイアゴナル配列においてＧ画素を注目画素とした場合の複数の画素組み合わせパターンの一例を模式的に示している。図３２は図８に対応する。なお、Ｒ画素またはＢ画素を注目画素として画素組み合わせパターンを設定してもよい。

フィルタ制御部３は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに基づいて、複数の画素組み合わせパターンＰＰ、例えば図３２（ａ）に示す画素組み合わせパターンＰＰｅ、図３２（ｂ）に示す画素組み合わせパターンＰＰｆ、図３２（ｃ）に示す画素組み合わせパターンＰＰｇ、図３２（ｄ）に示す画素組み合わせパターンＰＰｈ、図３２（ｅ）に示す画素組み合わせパターンＰＰｉ、及び、図３２（ｆ）に示す画素組み合わせパターンＰＰｊを設定する。

図３２（ａ）〜図３２（ｆ）に示すように、画素組み合わせパターンＰＰｅ，ＰＰｆ，ＰＰｇ，ＰＰｈ，ＰＰｉ，ＰＰｊは一単位画素を含んでいればよい。

画素組み合わせパターンＰＰｅ〜ＰＰｊは、フィルタ制御部３に予め記憶されていてもよいし、所定のアルゴリズムに基づいて設定されるようにしてもよい。

フィルタ処理部４は、赤色画像データＲｍ、緑色画像データＧｍ、及び、青色画像データＢｍに対して、複数の画素組み合わせパターンＰＰｅ〜ＰＰｊに基づいてフィルタ処理を施す。

画素組み合わせパターンＰＰｅ〜ＰＰｊを、第１の実施形態（図９、図１５、図１９、図２３参照）と同様に、それぞれ隙間なく配置することにより、フィルタ処理部４は、赤色画像データＲｍ、緑色画像データＧｍ、及び青色画像データＢｍのほぼ全てのＲ画素、Ｇ画素、及びＢ画素を対象にしてフィルタ処理を施すことができる。

フィルタ処理後の画像処理方法は、第１実施形態の画像処理方法と同様である。

なお、複数の画素組み合わせパターンとして、６つの画素組み合わせパターンＰＰｅ〜ＰＰｊを設定したが、これに限定されるものではなく、２つ以上の画素組み合わせパターンであればよい。

２つの画素組み合わせパターンを設定する場合、お互いを補完する関係を有する組み合わせが望ましい。例えば、水平方向の周辺画素を含む画素組み合わせパターンＰＰｅと垂直方向の周辺画素を含む画素組み合わせパターンＰＰｆとの組み合わせが望ましい。同様の理由により、画素組み合わせパターンＰＰｇと画素組み合わせパターンＰＰｈとの組み合わせ、並びに、画素組み合わせパターンＰＰｉと画素組み合わせパターンＰＰｊとの組み合わせが望ましい。

フィルタ処理を施す場合、画像によっては画素組み合わせパターンの画素数が多いと不要な周辺画素の画像情報もフィルタ処理に反映されてしまうため、画像品位を悪化させる要因となる。

一方、画像によっては画素組み合わせパターンの画素数が少ないと必要な周辺画素の画像情報がフィルタ処理に反映されなくなってしまうため、画像品質を悪化させる要因となる。

そこで、画像に応じて画素数の異なる複数の画素組み合わせパターンでフィルタ処理を施すようにしてもよい。具体的には、画素組み合わせパターンＰＰａ〜ＰＰｄのいずれかによるフィルタ処理と、画素組み合わせパターンＰＰｅ〜ＰＰｊのいずれかによるフィルタ処理とを組み合わせるようにしてもよい。

フィルタ処理を施すための画素組み合わせパターンは、画素組み合わせパターンＰＰａ〜ＰＰｄ及び画素組み合わせパターンＰＰｅ〜ＰＰｊに限定されるものではない。画素組み合わせパターンは、画素組み合わせパターンＰＰａ〜ＰＰｄ及び画素組み合わせパターンＰＰｅ〜ＰＰｊのように隙間なく配置できる形状が望ましい。

なお、本発明に係る実施形態は、上述した構成に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。

１画像処理装置
２色画像分離部
３フィルタ制御部
４フィルタ処理部
５表示画像生成部
ＩＤ入力画像データ
Ｒｍ，Ｒｆ赤色画像データ
Ｇｍ，Ｇｆ緑色画像データ
Ｂｍ，Ｂｆ青色画像データ
ＰＰ画素組み合わせパターン
ＦＣフルカラー画像データ

Claims

入力画像データから赤色画像データ、緑色画像データ、及び青色画像データを分離する色画像分離部と、
前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対してフィルタ処理を施すための複数の画素組み合わせパターンを設定するフィルタ制御部と、
前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対して、前記画素組み合わせパターン毎にフィルタ処理を施すフィルタ処理部と、
フィルタ処理された前記赤色画像データ、前記緑色画像データ、及び前記青色画像データを同一の画素組み合わせパターンによるフィルタ処理毎に合成して複数のフルカラー画像データを生成する表示画像生成部と、
を備えることを特徴とする画像処理装置。
前記フィルタ制御部、前記フィルタ処理部、または前記表示画像生成部は、前記複数のフルカラー画像データを１フレーム期間内で切り替えるよう制御することを特徴とする請求項１に記載の画像処理装置。
入力画像データから赤色画像データ、緑色画像データ、及び青色画像データを分離し、
前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対してフィルタ処理を施すための複数の画素組み合わせパターンを設定し、
前記赤色画像データ、前記緑色画像データ、及び前記青色画像データに対して、前記画素組み合わせパターン毎にフィルタ処理を施し、
フィルタ処理された前記赤色画像データ、前記緑色画像データ、及び前記青色画像データを同一の画素組み合わせパターンによるフィルタ処理毎に合成して複数のフルカラー画像データを生成する
ことを特徴とする画像処理方法。