JP5176936B2 - 画像処理装置および画像表示システム - Google Patents

Description

本発明は、外部から入力される画像データを処理してホールド型の表示装置に出力する画像処理装置、およびそのような画像処理装置を備えた画像表示システムに関する。

近年、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）のような薄型ディスプレイが、ＣＲＴ（Cathode Ray Tube）に代わって広く普及してきており、ＬＣＤの動画表示の技術についての関心が高まってきている。

動画表示に際しては、ＣＲＴのようなインパルス型表示装置とは異なり、ＬＣＤのようなホールド型表示装置では、動画像を構成する複数のフレームまたはフィールド（以下、単に「フレーム」と称する。）のうちのある１つの表示が指示されてから、次のフレームの表示が指示されるまで、その画面を構成する全ての画素の表示を保持させる。そのため、ホールド型表示装置では、いわゆる視線追随積分（動画を追っていく際に人間の網膜に映る残光特性）効果により、動いているオブジェクトについて、前縁のボヤケ、後縁の尾引き、知覚位置遅れなどの動きボケが生じてしまう、という問題がある。特に、ＬＣＤにおいては、液晶の応答速度の遅さが原因で、この動きボケが発生しやすいと考えられている。

このような問題に対して、ＬＣＤの応答特性を改善して動きボケを抑制するための技術の一つとして、オーバードライブ技術がある。オーバードライブ技術は、ＬＣＤにおけるステップ入力に対する応答特性の改善を図るために、例えば、ステップ入力に対しては、入力信号が変化した最初のフレームにおいて、指示された輝度値に対応する目的電圧よりも高い電圧を印加し、輝度が遷移する速度を加速させるものである。このオーバードライブ技術を利用することで、中間階調領域における液晶の応答速度を速め、動きボケを抑制する効果を得ることができる。また、オーバードライブ技術において、各フレームにおける動きベクトルに応じて印加する電圧の波形を変えることにより、より効果的に動きボケを抑制する技術も提案されている（例えば、特許文献１を参照）。

特開２００５−４３８６４号公報

しかしながら、オーバードライブ技術では、液晶に印加できる電圧範囲に限界があるため、例えば、黒表示や白表示などの目的電圧が電圧範囲限界に近い場合（高階調領域や低階調領域における階調変化の場合）には、液晶の応答速度を速めるのに十分に高い電圧を与えられず、動きボケ抑制の効果を十分に発揮できない、という問題があった。

また、ＶＡ系のモードで駆動する液晶ディスプレイでは、液晶の立ち上がりと立ち下がりで特性が異なり、０レベル（例えば黒）からの立ち上がりでは、液晶の分子配列の変化に時間が掛かり、オーバードライブ技術だけでは、液晶の応答速度から考えて、１フレーム内で指示された輝度値まで遷移できない場合がある、という問題もあった。

一方、最近では、視線追随積分の効果を低減させるために、表示フレームを時間分割し、サブフィールドを複数用いて動画表示周波数を上げるために、入力画像の動きベクトルに基づいてフレーム間の補間画像を算出して、ＬＣＤに表示させる倍速駆動技術も開発されている。

しかし、表示周波数を上げることにより、表示装置を駆動する表示ドライバの駆動周波数が上がるため、チャージ電荷の不足、ＩＣやコネクタの端子数の増加、基板面積の増大、発熱、ＥＭＩ（Electro Magnetic Interference）の増加などが生じ、コストアップの要因となる、という問題もあった。

本発明はかかる問題点に鑑みてなされたもので、その目的は、コストアップを抑制しつつ、ホールド型の表示装置における動きボケを抑制して動画像の画質を向上させることが可能な画像処理装置および画像表示システムを提供することにある。

本発明の画像処理装置は、外部から入力される画像データに対して所定の処理を施してホールド型の表示装置に出力するものであって、表示装置における表示対象のフレームにおいて、画像データの動きベクトルの大きさに応じて、その画像データの変化エッジ箇所の傾きをより緩やかにする空間的なＬＰＦ（ロー・パス・フィルタ）処理を画像データに対して施すことにより、画像データにおける画素値を画素ごとに補正する補正処理を行う補正処理部と、動きベクトルの大きさに基づいて、補正処理の際に用いる所定の信号特性情報を画像データから検出する信号特性検出部とを備えたものである。この信号特性検出部は、動きベクトルの大きさに基づいて画像データにおける変化エッジ箇所を検出し、上記信号特性情報として、画像データの所定の補正エリア内における最小画素値およびその画素位置である最小画素位置と最大画素値およびその画素位置である最大画素位置とを検出すると共に、最小画素値および最小画素位置と最大画素値および最大画素位置とに基づいて、補正エリア内の変化エッジ箇所における変化方向を求め、上記補正処理部は、信号特性検出部により求められた変化方向に基づいて、補正処理を行うか否かを決定する。

本発明の画像表示システムは、上記本発明の画像処理装置と、この画像処理装置から出力される処理後の画像データに基づいて画像表示を行うホールド型の表示装置とを備えたものである。

本発明の画像処理装置および画像表示システムでは、表示対象のフレームにおいて、画像データの動きベクトルの大きさに応じて空間的なＬＰＦ処理が画像データに対して施されることにより、画像データにおける画素値が画素ごとに補正される。これにより、ホールド型の表示装置において、視線追随積分効果により引き起こされる、動いているオブジェクトについての動きボケ（前縁のボヤケ、後縁の尾引きまたは知覚位置遅れなどのホールドボヤケ）が、空間方向の補間による擬似的なフレームレート向上作用により抑制される。また、従来の倍速駆動技術（時間方向の補間）などとは異なり、装置自体の変更は不要であるため、コストアップの問題も生じない。さらに、従来のオーバードライブ技術などとは異なり、中間階調以外の領域における階調変化についても、動きボケが十分に抑制される。

本発明の画像処理装置および画像表示システムでは、上記補正処理部が、表示対象のフレームにおいて、動きベクトルの大きさに応じて画像データに対し、上記ＬＰＦ処理に加え、画像データの変化エッジ箇所の両端付近にオーバーシュート領域およびアンダーシュート領域を設ける空間的なＨＰＦ（ハイ・パス・フィルタ）処理をも施すことにより、上記補正処理を行うようにするのが好ましい。このように構成した場合、ＨＰＦ処理により設けられるオーバーシュート領域とアンダーシュート領域との組み合わせによって液晶応答が改善されるため、中間調同士の輝度変化や立ち下がり応答の遅延などにより引き起こされる、縁のボヤケや縁の尾引きなどの動きボケが抑制される。したがって、ホールド型の表示装置における動きボケがより効果的に抑制され、動画像の画質がさらに向上する。

本発明の画像処理装置および画像表示システムによれば、表示対象のフレームにおいて、画像データの動きベクトルの大きさに応じて空間的なＬＰＦ処理を画像データに対して施すことにより、画像データにおける画素値を画素ごとに補正するようにしたので、空間方向の補間による擬似的なフレームレート向上作用によって視線追随積分効果を低減させ、動きボケを抑制することができる。また、従来の技術とは異なり、コストアップの問題を回避することができると共に、中間階調以外の領域における階調変化についても、動きボケを十分に抑制することができる。よって、コストアップを抑制しつつ、ホールド型の表示装置における動きボケを抑制して動画像の画質を向上させることが可能となる。

以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、説明は以下の順序で行う。また、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
１．第１の実施の形態（ＬＰＦ（ロー・パス・フィルタ）を用いた画像処理の例）
２．第２の実施の形態（ＬＰＦおよびＨＰＦ（ハイ・パス・フィルタ）を用いた他の画像処理の例）
３．変形例

＜１．第１の実施の形態＞
［動きボケの改善手段について］
本発明の好適な一実施の形態（第１の実施の形態）について説明する前に、まず、本発明者らが、液晶型表示装置等のホールド型表示装置における動きボケの改善手段として、本発明に係る画像処理装置に想到するに至った経緯について説明する。

前述したように、ホールド型の表示装置においては、動いているオブジェクトについて、前縁のボヤケ、後縁の尾引き、知覚位置遅れなどの動きボケが生じてしまう。この原因として、従来は、液晶等の表示素子の応答速度の遅さによるものであると考えられていた。そのため、ホールド型表示装置における動きボケを改善する手段として、オーバードライブ技術が利用されている。このオーバードライブ技術を利用すれば、液晶等の表示素子の応答速度を速めることが可能となる。

一方、ホールド型表示装置における動きボケの発生原因は、液晶等の表示素子の応答速度の遅さのみではなく、動く画像を追っていく際に人間の網膜に映る残光特性である視線追随積分効果も大きな原因の１つである。そのため、液晶等の表示素子の応答速度の遅さのみを考慮した通常のオーバードライブ技術のみでは、ホールド型表示装置における動きボケの抑制が十分になされていなかった。

これに対して、本件出願人が先に出願した特許文献１に記載された画像処理装置によれば、オーバードライブ技術を利用する際に、液晶の応答速度のみならず、視線追随積分の効果も考慮することにより、ホールド型表示装置における動きボケを十分に抑制できるとされている。

しかしながら、オーバードライブ技術は、中間階調領域における階調変化には、表示素子の応答速度を速める効果を発揮できるものの、白表示や黒表示等の目的電圧が印加可能電圧範囲の限界に近い場合には、表示素子に十分に高い電圧を与えることができず、表示素子の応答速度を速める効果を十分に発揮することができない。

また、ＶＡ系のモードの駆動方式を利用する液晶型表示装置では、０レベル（例えば、黒）からの立ち上がりの際には、液晶の分子配列変化に時間がかかり、オーバードライブ技術のみでは、応答速度が１フレーム内に収まらない場合もある。

ここで、図１を参照しながら、一般的なＶＡ系の液晶にパルス信号を入力した場合を例に挙げて、液晶の応答特性について説明する。なお、図１は、一般的なＶＡ系の液晶にパルス信号を入力した場合における液晶の応答波形の一例を示す説明図である。また、図１では、縦軸が液晶の階調、横軸が時間を示している。さらに、図１では、一般的なＶＡ系の液晶に対し、１フレーム期間に破線で示されている波形のパルス信号Ｐを入力した場合に生じる液晶の応答波形Ｌを実線で示している。

図１に示すように、ＶＡ系の液晶では、立ち上がりと立ち下がりでその応答特性が異なり、立ち上がりは、ＶＴ曲線に沿って応答するため、信号入力から応答までに遅延時間が生じてしまう。一方、立ち下がりの場合は、ＶＴ曲線に沿って応答するわけではないため、遅延時間はそれ程生じない。特に、図１の破線で囲んだ領域Ｕに示すように、低階調（例えば、０レベル）からの立ち上がりで応答時間の遅延が大きいことがわかる。また、立ち上がりのおいては、信号入力時の階調の違いによる応答時間の差が大きいこともわかる。

そこで、本発明者らは、視線追随積分効果とホールド型表示装置における動きボケとの関係についてさらに検討を行った結果、階調の違いによって応答時間の差があることを利用することにより、液晶等の表示素子の応答時間に応じて駆動電圧の印加を制御することにより、ホールド型表示装置における動きボケを効果的に抑制できることを見出し、本願発明を完成するに至った。

［視線追随積分効果について］
以下、図２〜図５を参照しながら、本発明者らが検討した視線追随積分効果とホールド型表示装置における動きボケとの関係について説明する。なお、図２〜図５は、視線追随積分効果とホールド型表示装置における動きボケとの関係の一例について説明するための説明図である。

以下の説明では、ホールド型表示装置の一例として液晶型表示装置を例に挙げ、液晶表示装置の画面を構成する各表示素子（本設例の場合は、液晶）のそれぞれに、フレームまたはフィールド（以下、説明の便宜のため、単に「フレーム」と称する。）を構成する複数の画素のうちの所定の１つが対応付けられているものとして説明する。

取り扱う画像の前提としては、背景は無地一色で、ステップ変化の画像は一定速度で動いているものとする。この前提により、視線追随積分をトレースした場合、このトレース上の輝度は周期関数となり、視線追随積分は１フレーム分のみを考えれば良いことになる。また、計算を容易にするため、本設例では、画像の境界（エッジ部分）の輝度変化は垂直であるものとする。

なお、ホールド型表示装置における動きボケ改善が目標品質に達しているか否かは、通常６０Ｈｚ駆動の倍速駆動を施した１２０Ｈｚ駆動のＬＣＤにおける視線追随積分の結果と同等以上の結果が得られるか否かにより判定することができる。この目標品質の判定項目としては、視線追随積分での境界（前縁と後縁）の急峻さ、到達輝度の半値（最高輝度の半分の値）地点における遅れ等が挙げられる。

ここで、図２から図５では、ステップ変化の画像が４画素／１フレームで液晶型表示装置のディスプレイ画面上を左から右に移動している場合の例が示されている。また、図２から図５における上部の図は、液晶型表示装置に入力された入力画像信号の波形を示し、中部の図は、上部の図の入力画像信号に基づく画像が液晶型表示装置に表示された場合における、液晶の出力レベル（輝度）の時間推移を表しており、下部の図は、ユーザ（人間）が、液晶型表示装置に表示される画像を見た場合における、ユーザの目の網膜に取り込まれる光量（すなわち、視線追随積分の結果）を示している。

また、図２から図５の中部の図中、水平方向の位置は、各フレームを構成する画素の位置（空間方向）を表しており、同図中、垂直下向きの変位は、時間の推移を表している。また、図２から図５の中部の図では、１つの画素に１つの液晶が対応しているものとし、グレー階調の濃淡により、各液晶のそれぞれの出力レベルを示しており、０Ｆ，１Ｆ等とあるのは、各フレームの番号を示している。

さらに、図２から図５の下部の図中、水平方向の位置は、中部の図の時刻ｔｂの時点における、ユーザの目の網膜の位置（空間方向）を表しており、同図中、垂直方向上向きの位置が、ユーザの目の網膜に取り込まれる光量を表している。すなわち、ユーザの目の網膜の位置における光量を積分した結果の領域Ｓ１、Ｓ２、Ｓ３、Ｓ４が、視線追随積分の結果となる。より詳細に説明すると、図２から図５の中部の図中における右下へ向かう斜めの矢印は、ユーザの目の動きを示しており、ユーザの網膜には、時刻ｔａから時刻ｔｂの間の各瞬間のそれぞれの時点で、この斜めの矢印が通る場所に位置する液晶から出力された所定のレベルの光が入射される。その結果、ユーザの網膜には、各瞬間のそれぞれの時点に入射された光が順次蓄積されていくので、時刻ｔｂの時点で、その蓄積された光量（入射された光のレベルの積分値）の光が取り込まれることになる。

以下、図２から図５の各図に基づいて、本発明者らが検討した視線追随積分効果とホールド型表示装置における動きボケとの関係について説明する。

図２は、理想ホールド素子、すなわち、応答時間が０のホールド型の表示素子（例えば、液晶）を使用した表示装置に対し、時刻ｔｂにおいて、上部の図に示す波形の入力画像信号（図の１Ｆのフレームに対応する入力画像信号）を入力した場合における視線追随積分効果と動きボケとの関係を示している。

図２に示すように、理想ホールド素子を使用した表示装置は、ステップ入力に対する応答時間が０であるため、液晶の出力レベルは、入力画像信号に対応する輝度（目標輝度）に瞬間的に到達し、液晶の応答は俊敏である。しかし、理想ホールド素子においても視線追随積分の効果は生じるため、入力されたステップ変化の画像の移動速度に等しい４画素分の動きボケを生じる。

図３は、一般的な液晶型表示装置（ＬＣＤ）に対し、時刻ｔｂにおいて、上部の図に示す波形の入力画像信号（図の１Ｆのフレームに対応する入力画像信号）を入力した場合における視線追随積分効果と動きボケとの関係を示している。

図３に示すように、一般的なＬＣＤは、ステップ入力に対する応答速度が低く、目標輝度に到達するまでに１フレーム分くらいの応答時間がかかる。また、ＬＣＤは、ホールド型駆動を行うため、視線追随積分の効果が生じる。そのため、一般的なＬＣＤにステップ入力が行われた場合には、液晶の応答速度に基づく応答時間に視線追随積分の効果が加わるため、例えば、入力されたステップ変化の画像の移動速度の２倍に想到する８画素分の動きボケを生じる。

図４は、倍速駆動を行う（動画表示周波数が２倍の）ＬＣＤ、すなわち、１フレーム内の２分割されたサブフィールドには、動きベクトルに基づいて補間された画像を表示するＬＣＤに対し、時刻ｔｂにおいて、上部の図に示す波形の入力画像信号（図の１Ｆのフレームに対応する入力画像信号）を入力した場合における視線追随積分効果と動きボケとの関係を示している。

図４に示すように、倍速駆動を行うＬＣＤであっても、一般的なＬＣＤと、液晶の応答速度自体に変化はない。一方、倍速駆動を行うＬＣＤでは、１つのフレームが２つのサブフィールドに分割され、各サブフィールドにおいて補間画像が表示されることから、１の入力画像信号に対するホールド時間が半分になるため、視線追随積分の効果が低減する。その結果、例えば、全体として、５画素分の動きボケに減少する。なお、前述したように、ホールド型表示装置における動きボケ改善が目標品質に達しているか否かは、この倍速駆動を行うＬＣＤにおける５画素分の動きボケと同等あるいはそれ以下か否かにより判定することができる。

図５は、本発明を適用した画像処理装置に対し、時刻ｔｂにおいて、上部の図に示す波形の入力画像信号（図の１Ｆのフレームに対応する入力画像信号）を入力し、これをホールド型表示装置に表示させた場合における視線追随積分効果と動きボケとの関係の一例を示している。

本発明を適用した画像処理装置においては、ホールド型表示装置に目標輝度の画像を表示するための駆動電圧が印加されてから、当該表示装置がこの駆動電圧に対応する輝度の画像を表示するまでの時間を表す応答時間情報が、輝度変化量に対応付けて記憶されている。そして、この応答時間情報と入力画像の動きベクトルに基づいて、表示対象のフレーム（本設例では、１Ｆ）より前のフレーム（本設例では、０Ｆ）で、すなわち、本設例の場合は、時刻ｔａにおいて、表示対象のフレームを構成する各画素の輝度値を、画素ごとに補正する。この補正は、例えば、表示対象のフレーム（１Ｆ）において各画素が目標輝度となるように行われる。図５に示した例では、表示対象のフレームである１Ｆにおいて初めて表示される画素（右端から４画素分）について、０Ｆの時点において各画素に対応する液晶に印加する電圧を画素ごとに調整し、液晶の出力レベルを画素ごとに調整（０Ｆの時点において液晶の出力レベルが階段状になっている部分を参照）することにより、表示対象のフレーム（１Ｆ）において各画素が目標輝度となるようにしている。

このように、表示対象のフレーム（１Ｆ）よりも前のフレーム（０Ｆ）において、表示対象のフレームを構成する各画素が目標輝度に到達するまでの液晶の応答時間を考慮して、各画素に対応する液晶に対し、画素ごとに適当な電圧を予め印加しておく（画素値を補正する）ことにより、視線追随積分の効果を著しく低減させることができる。その結果、図５に示すように、例えば、全体として、２画素分の動きボケに減少し、倍速駆動を行うＬＣＤ以上の動きボケ抑制効果を有することがわかる。本発明においては、画素ごとに画素値の補正処理を行うことから、高精細ディスプレイ等のように高画素であり、ＶＡ系液晶のように階調変化による応答時間の差が大きく、動くオブジェクトの移動速度（動きベクトル量）が大きいほど、補正処理による動きボケ抑制効果が大きくなる。

以上のように、本発明を適用した画像処理装置による処理後の画像をホールド型表示装置に表示することにより、倍速駆動を行うＬＣＤよりも大きな動きボケ抑制効果を得ることができる。また、倍速駆動を行うＬＣＤにおいては、入力画像に対して補間画像を合成することにより、フレームを複数のサブフィールドに分割してフレームレートを上げ、ホールド時間を短縮することにより、動きボケを抑制している。一方、本発明を適用した画像処理装置においては、動きベクトルに基づいて、時間方向ではなく、空間方向の補間を行い、この補間結果を応答時間情報に基づいて、空間変化から時間変化に変換することにより、擬似的にフレームレートを上げる効果を持たせている。その結果、ホールド型表示装置における動画応答性が改善し、動きボケを抑制することができる。

［本発明の画像処理方法の概要］
以下、図６を参照しながら、本実施の形態の画像処理装置における画像処理方法の一例について、その概要を説明する。なお、図６は、本実施の形態の画像処理装置における画像処理方法の一例を概略的に示す説明図である。

図６に示すように、画像処理装置１００に入力画像データが入力されると、まず、画像処理装置１００は、入力された表示対象のフレームに対応する入力画像データと、画像処理装置１００のメモリ５−１に保存されている表示対象のフレームの１つ前のフレームに対応する画像データとを比較して、入力画像の動きベクトルを検出する（Ｓ１１）。検出された動きベクトルは、次の補間画像を生成するステップ（Ｓ１３）で使用される。また、検出された動きベクトルは、その後の補正処理やオーバードライブ処理においても使用され、必要に応じてメモリ５−１に保存されてもよい。

次に、画像処理装置は、ステップＳ１１で検出された動きベクトルに基づいて、表示対象のフレームとその１つ前のフレームの間に挿入する補間画像を生成する（Ｓ１３）。この補間画像を生成することにより、動画表示周波数が２倍になる（通常のＬＣＤでは、６０Ｈｚから１２０Ｈｚになる）。生成された補間画像は、次の補正処理ステップ（Ｓ１５）で使用される。また、生成された補間画像は、メモリ５−１に保存されてもよい。なお、この補間画像生成ステップ（Ｓ１３）は、本発明において、必ずしも必要なステップではなく、動画表示周波数（フレームレート）を高くしなくても、次に説明する補正処理（Ｓ１５）を行うことにより、ホールド型表示装置における動きボケ抑制効果は十分に得られる。

次に、画像処理装置は、ステップＳ１１で検出された動きベクトルと、ルックアップテーブル（ＬＵＴ）５−２に記憶されている応答時間情報とに基づいて、表示対象のフレームにおいて目標輝度の画像が表示されるように、ステップＳ１３で生成された補間画像を所定時間後に表示するための補正情報を生成する。そして、画像処理装置は、この補正情報と入力画像データとを合成し、画素値を補正した補正後の画像データを生成する（Ｓ１５）。生成された補正後の画像データは、次のオーバードライブ処理（Ｓ１７）において使用される。この補正処理ステップ（Ｓ１５）は、表示対象のフレームの前のフレームにおいて行われる。なお、ステップＳ１３を行わない（補間画像を生成しない）場合には、本ステップＳ１５では、補間画像を用いずに、ステップＳ１１で検出された動きベクトルと、ルックアップテーブル（ＬＵＴ）５−２に記憶されている応答時間情報とに基づいて、表示対象のフレームにおいて目標輝度の画像が表示されるための補正後の画素値が直接算出される。そして、算出された補正後の画素値に基づいて、補正後の画像データが生成される。

次に、画像処理装置は、メモリ５−１に保存されている入力画像データと、ステップＳ１５で生成された補正後の画像データを使用して、表示対象のフレームに対応する補正後の画像データに対して、オーバードライブ処理を行う（Ｓ１７）。その結果、ホールド型表示装置に表示するための表示画像データが生成される。

続いて、図７（Ａ）から図７（Ｄ）を参照しながら、ホールド型表示装置にステップ波形を入力した場合における動作波形について説明する。なお、図７（Ａ）から図７（Ｄ）は、ホールド型表示装置にステップ波形を入力した場合における動作波形の一例を示す説明図である。また、図７（Ａ）から図７（Ｄ）において、垂直方向は、フレームを構成する各画素の輝度、水平方向は、フレームを構成する各画素の位置（空間方向）を表している。また、図７（Ａ）から図７（Ｄ）の破線で区画された領域を、複数の画素（本設例では、４画素とする。）からなるユニットと称することとする。

図７（Ａ）は、一般的なＬＣＤに入力されたステップ信号の波形を示している。図７（Ａ）に示すように、入力されたステップ信号には、Ｎ番目のユニットの右端にエッジ部分が存在している。なお、このエッジの高さが表示対象のフレームにおける目標輝度であるとする。

図７（Ｂ）は、オーバードライブ方式を採用したＬＣＤにステップ信号を入力した場合における動作波形を示している。図７（Ｂ）に示すように、オーバードライブ方式では、例えば、入力変化の最初のフレームにおいて、目標輝度の画像を表示装置に表示させるための目的電圧よりも高い電圧を印加し、輝度の遷移を加速させている。そのため、Ｎ番目のユニット位置において、目標輝度よりも高い輝度となっている。ただし、通常のオーバードライブ方式においては、フレーム中の動くオブジェクトの動き、すなわち、動きベクトルを検出せず、動きベクトルによらずに一律に電圧を印加するため、目標輝度よりも高い輝度となっている部分は、Ｎ番目のユニット全体として一律になっている（Ｎ番目のユニットに含まれる各画素で輝度が等しくなっている）。

図７（Ｃ）は、特許文献１に記載されているように、オーバードライブ駆動を行う際に、動きベクトルに基づいて印加する電圧を調整する方式を採用したＬＣＤにステップ信号を入力した場合における動作波形を示している。図７（Ｃ）に示すように、この方式では、目的電圧よりも高い電圧を印加する際に入力画像の動きベクトルを検出し、検出された動きベクトルに基づいて、画素ごとに印加する電圧を調整するものである。これにより、通常のオーバードライブ方式と比べると、ホールド型表示装置における動きボケの抑制効果が向上する。

しかし、前述したように、液晶に印加できる電圧範囲に限界があるため、例えば、黒表示や白表示などの目的電圧が電圧範囲限界に近い場合（高階調領域や低階調領域における階調変化の場合）には、液晶の応答速度を速めるのに十分に高い電圧を与えられず、動きボケ抑制の効果を十分に発揮できない、という問題がある。そこで、本発明では、図６のステップＳ１５で説明したような補正処理を行っている。

図７（Ｄ）は、本発明の画像処理方法を適用した画像処理装置にステップ信号を入力した場合における動作波形の一例を示している。図７（Ｄ）に示すように、本発明の方式では、答時間情報と入力画像の動きベクトルに基づいて、表示対象のフレームより前のフレームで、表示対象のフレームを構成する各画素の輝度値を、画素ごとに補正する。この補正は、例えば、表示対象のフレームにおいて各画素が目標輝度となるように行われる。その結果、ステップ信号のエッジ部分において、垂直に高輝度から低輝度へ急激に低下するのではなく、例えば階段状に、液晶の応答速度に対応して高輝度から低輝度へ緩やかに低下していくような動作波形となる。なお、図７（Ｄ）には、本発明の画像方法に加えて、動きベクトルを考慮したオーバードライブ方式を適用した場合の動作波形が示されているが、本発明においては、オーバードライブ方式は必要に応じて採用すればよく、必ずしも採用しなくてもよい。

続いて、図８（Ａ）から図８（Ｃ）および図９を参照しながら、本発明を適用した画像処理装置における補正処理の動作について、画像処理装置に入力される入力信号と画像処理装置から出力される出力信号の波形を示しながら説明する。なお、図８（Ａ）は、本発明を適用した画像処理装置に入力される入力信号の一例を示す説明図であり、図８（Ｂ）および図８（Ｃ）は、本発明を適用した画像処理装置から出力される出力信号の一例を示す説明図である。また、図９は、本発明を適用した画像処理装置から出力された出力信号に基づいて画像を表示するホールド型表示装置を見たユーザの網膜に蓄積された光量の空間方向の変化を示す説明図である。

図８（Ａ）から図８（Ｃ）において、水平方向の位置は、フレームを構成する各画素の位置（空間方向）を示し、垂直方向は、表示装置から出力される輝度レベルを示している。また、図８（Ａ）から図８（Ｃ）における破線で区画された領域は、フレームを構成する各画素を示している。また、画像処理装置に入力される入力信号は、ステップ波形の信号であるものとし、このステップ波形の信号に基づく入力画像は、４ｄｏｔ／ｖの動きベクトルを有しているものとして、以下の説明を行う。

まず、図８（Ａ）に示すようなエッジ部分を有するステップ波形の信号が、画像処理装置に入力される。このステップ信号は、前述したように、４ｄｏｔ／ｖの速度で図の左から右へ移動している。また、このステップ信号が入力される前は、表示装置においては黒表示がされており、このステップ信号の入力により白表示に変更されるものとする。

この入力されたステップ信号に対し、本発明を適用した画像処理装置においては、図８（Ｂ）に示すように、例えば、特に、ホールド素子（液晶等）の立ち上がりをスムーズにするために、液晶の応答特性に合わせて、立ち上がり部分に予め電圧を印加しておき、輝度レベルが徐々に低下するようにする（補正処理）。特に、黒表示からの立ち上がりの場合には、この処理が重要である。この際、予め電圧を印加する範囲は、動きベクトル量に基づいて決定され、例えば、本設例の場合は、動きベクトル量（４ｄｏｔ／ｖ）と同じ４ｄｏｔ分の画素範囲に予め電圧を印加している。また、予め電圧を印加する場合には、画素ごとに印加する電圧値を決めることができ、例えば、図８（Ｂ）に示すように階段状に徐々に輝度レベルが低下するように電圧を印加してもよく、階段状でなく、直線的に徐々に輝度レベルが低下するように電圧を印加してもよい。なお、直線的に輝度レベルが低下するようにした方が、よりスムーズな立ち上がりを実現することができるため、好ましい。

図８（Ｃ）は、本発明を適用した画像処理装置における補正処理を行った画像データに対し、特許文献１に記載のオーバードライブ技術を適用した場合における動作波形を示している。この場合には、図８（Ｃ）に示すように、オーバードライブが加わることにより、山型の波形の信号が出力されることになる。なお、オーバードライブにより目的電圧よりも高い電圧が印加されることに伴い、補正処理のために予め印加する電圧値も大きくなるため、輝度レベルも全体的に図８（Ｂ）の場合（本発明の補正処理のみの場合）よりも高くなっている。

以上、図８（Ａ）から図８（Ｃ）に基づいて説明したように画像の表示動作を行うことにより、図９に示すようなユーザの網膜に蓄積された光量の空間方向の変化が現れる。すなわち、オーバードライブも本発明の補正処理も行わない場合には、２点鎖線で表された曲線のように、入力されたステップ信号の輝度レベルにユーザの網膜に蓄積された輝度レベルが到達しておらず、表示の遅延が大きく、ホールド型表示装置の動作ボケが発生してしまう。また、オーバードライブのみを行った場合には、破線で示された曲線のように、入力されたステップ信号の輝度レベルに対するユーザの網膜に蓄積された輝度レベルの差は小さくなっており、表示の遅延がやや小さくなっているものの、依然として遅延が生じているため、動作ボケの抑制効果が十分ではない。一方、オーバードライブと本発明の補正処理の双方を行った場合には、実線で表された曲線のように、入力されたステップ信号の輝度レベルにユーザの網膜に蓄積された輝度レベルが到達しており、また、輝度レベルの変化も急峻ではなく緩やかに低下していることがわかる。その結果、視線追随積分の効果が十分に抑制され、ホールド型表示装置における動作ボケ抑制効果が大きくなる。

［本発明の一実施形態に係る画像表示ステムの構成］
続いて、図１０および図１１を参照しながら、前述したような機能を実現可能なシステムとして、本発明の一実施形態に係る画像表示システム１０の機能構成について詳細に説明する。なお、図１０は、本実施形態に係る画像表示システム１０を構成する画像処理装置１００の機能構成を示すブロック図であり、図１１は、本実施形態に係る画像表示システム１０を構成する表示装置２００の機能構成を示すブロック図である。

図１０および図１１に示すように、本実施形態に係る画像表示システム１０は、外部から入力される入力画像データを処理して表示画像データを出力する画像処理装置１００と、画像処理装置１００から入力された表示画像データに基づいて、実際に画像を表示するホールド型の表示装置２００と、を備える。ここで、「システム」とは、複数の装置（機能）が論理的に集合した物をいい、各構成の装置（機能）が同一筐体中にあるか否かを問うものではない。従って、例えば、ＴＶ受信機のように、画像表示システム１０を構成する画像処理装置１００と表示装置２００とが１つの装置にまとまって１つの取引対象となる場合もあり、また、表示装置２００だけが別筐体として単体で扱われる場合もある。以下、この画像表示システム１０を構成する画像処理装置１００および表示装置２００の機能構成について詳細に説明する。

（画像処理装置１００の構成）
図１０に示すように、本実施形態に係る画像処理装置１００は、入力画像データ記憶部１１０と、動きベクトル検出部１２０と、応答時間情報記憶部１３０と、補正処理部１４０と、出力部１６０と、を備える。

入力画像データ記憶部１１０には、外部から画像処理装置１００に入力された入力画像データが、連続する複数のフレームのそれぞれに対応付けられて記憶される。より具体的には、例えば、表示対象のフレームにおいて画像を表示するための入力画像データが画像処理装置１００に入力されると、それが入力画像データ記憶部１１０に記憶される。さらに、次の表示対象のフレームにおいて画像を表示するための入力画像データが画像処理装置１００に入力された場合、それより前のフレームにおける入力画像データは記憶されたままにしておき、動きベクトル検出部１２０による動きベクトルの検出に使用する。なお、入力画像データ記憶部１１０に記憶されている入力画像データは、例えば、必要に応じて時間的に前のものから順に削除されるようにしてもよい。

動きベクトル検出部１２０は、表示対象のフレームにおける入力画像データが入力されると、例えば、表示対象のフレームの１つ前のフレームにおける入力画像データを、入力画像データ記憶部１１０から抽出する。そして、動きベクトル検出部１２０は、表示対象のフレームおける入力画像データと、その１つ前のフレームにおける入力画像データとを比較し、表示画像の中で動いているオブジェクトに着目し、このオブジェクトの動く方向と動いた距離とに基づいて、表示対象のフレームにおける入力画像データの動きベクトルを検出する。なお、動きベクトル検出部１２０は、本実施形態におけるように、画像処理装置１００の一構成要素であってもよく、例えば、ＭＰＥＧデコーダやＩＰ変換器などのような、画像処理装置１００の外部の機器の一構成要素であってもよい。後者の場合、入力画像データの動きベクトルは、画像処理装置１００の外部の機器で別途検出され、画像処理装置１００に入力される。

応答時間情報記憶部１３０は、表示装置２００に駆動電圧が印加されてから、表示装置２００が駆動電圧に対応する階調の画像を表示するまでの時間、すなわち、ホールド型表示素子の応答時間を表す応答時間情報が、表示装置２００の階調変化量に対応付けて記憶される。応答時間情報が応答時間情報記憶部１３０に記憶される形式としては、例えば、階調変化量とそれに対応する表示素子の応答時間がルックアップテーブル（ＬＵＴ）の形式で保存されている場合が挙げられる。あるいは、応答時間情報が応答時間情報記憶部１３０に記憶される形式としては、階調変化量と表示素子の応答時間との関係を示す関数を予め求めておき、この関数を応答時間情報記憶部１３０に記憶させておく場合が挙げられる。この場合、表示対象のフレームにおける入力画像データと、その前のフレームにおける入力画像データとを比較して、各画素における階調変化量が算出され、算出された階調変化量が、応答時間情報記憶部１３０に記憶されている関数により、応答時間情報に変換されることになる。このような機能は、ＲＡＭやＲＯＭ等のハードウェアにより実現することができる。

補正処理部１４０は、入力画像データ記憶部１１０から抽出された入力画像データと、動きベクトル検出部１２０により検出された動きベクトルと、応答時間情報記憶部１３０から抽出された応答時間情報とに基づいて、表示対象のフレームよりも前のフレームで、入力画像データにおける画素値を、フレームを構成する画素ごとに補正する。この補正の結果、表示画像データが生成され、生成された表示画像データは、出力部１６０に出力される。

ここで、補正処理部１４０は、例えば、入力画像データと動きベクトルとから入力されるフレーム間に挿入するための補間画像を生成する補間画像生成部（図示せず。）と、応答時間情報に基づいて補間画像を所定時間後に表示するタイミングを表す表示タイミング情報を生成する表示タイミング情報生成部（図示せず。）と、生成された表示情報を入力画像データに合成する画像合成部（図示せず。）と、を備えるように構成することができる。この構成の場合、補間画像生成部は、動きベクトルに基づいて、時間方向ではなく、空間方向に対して補間画像を生成する。また、表示タイミング情報生成部は、表示階調変化量ごとに表示素子の応答時間に差があることを利用して、補間画像を表示タイミング情報に変化することで、空間方向の変化から時間方向の変化に変換することを可能としている。従って、表示タイミング情報を入力画像データに合成することにより、動きベクトルに基づいて容易に生成される空間方向の補間画像を用いて、時間方向の補間画像を生成した場合と同等の効果、すなわち、フレームレートを擬似的に高める効果を得ることができる。

また、前述の構成のように、補間画像を生成することなく、移動平均フィルタ等の空間フィルタを使用して、直接画素値を補正する構成としてもよい。後者の構成における、より具体的な機能構成については後述する。

出力部１６０は、補正処理部１４０から表示画像データが入力され、入力された表示画像データを表示装置２００に出力する。

（補正処理部１４０の構成）
ここで、図１２を参照しながら、前述した補正処理部１４０の機能構成について、さらに詳細に説明する。なお、図１２は、本実施形態に係る補正処理部１４０の機能構成を示すブロック図である。

図１２に示すように、補正処理部１４０は、補正範囲設定部１４１と、最大最小値検出部１４２と、エッジ検出部１４３と、高周波検出部１４４と、外側置換部１４５と、フィルタ設定部１４６と、フィルタ処理部１４７と、ゲイン調整部１４８と、選択部１４９と、合成部１５０と、を備える。

補正範囲設定部１４１は、動きベクトル検出部１２０から入力された動きベクトルに基づいて、入力画像データにおける画素値を補正する補正範囲を設定する。具体的には、補正範囲設定部１４１は、入力画像データのうちの動きがある領域（動きがあるオブジェクトに対応する部分）を検出し、動きがある領域に位置する画素を補正範囲として設定する。設定された補正範囲に関する情報および入力された動きベクトルに関する情報は、最大最小値検出部１４２、エッジ検出部１４３、高周波検出部１４４、フィルタ設定部１４６に伝送される。

最大最小値検出部１４２は、補正範囲設定部１４１から伝送された補正範囲に関する情報に基づいて、補正範囲内における入力画像データ（入力信号）の最大値および最小値を検出する。検出された入力信号の最大値および最小値に関する情報は、エッジ検出部１４３および外側置換部１４５に伝送される。

エッジ検出部１４３は、補正範囲設定部１４１から伝送された補正範囲に関する情報および入力された動きベクトルに関する情報、および、最大最小値検出部１４２から伝送された入力信号の最大値および最小値に関する情報に基づいて、入力画像データ（入力信号）におけるエッジ部分を検出する。このエッジ検出部１４３は、エッジの存在する位置（エッジ箇所）の検出のみならず、当該エッジ箇所におけるエッジ方向（低階調から高階調への変化の方向か、あるいは、高階調から低階調への変化の方向か）をも検出する。このエッジ方向を検出することにより、表示素子の応答が立ち上がりか立ち下がりかを判定することができる。検出されたエッジ箇所およびエッジ方向に関する情報は、選択部１４９に伝送される。

高周波検出部１４４は、補正範囲設定部１４１から伝送された補正範囲に関する情報に基づいて、補正範囲内における入力画像データの空間周波数の高域信号を検出する。ここでいう高域信号とは、図１３に示すように、補正範囲より狭い範囲の半波長（１／２の波長）を持つ信号をいう。すなわち、補正範囲の２倍より波長の短い信号を高域信号として検出する。これは、高域信号の場合は、補正範囲内に立ち上がりエリアと立ち下がりエリアが混在するため、正しい処理を行えなくなるためである。検出された高域信号は、ゲイン調整部１４８に出力され、フィルタ処理部１４７による処理後のゲイン調整に使用される。

外側置換部１４５は、最大最小値検出部１４２から伝送された入力信号の最大値および最小値に関する情報に基づいて、入力画像データ（入力信号）に対して、その最大値と最小値を用いて外側置換を行う。置換後の入力画像データ（入力信号）は、フィルタ処理部１４７に伝送される。

フィルタ設定部１４６は、入力画像データと、補正範囲設定部１４１から伝送された補正範囲に関する情報および動きベクトルと、応答時間情報記憶部１３０から抽出された応答時間情報に基づいて、表示装置２００が表示対象のフレームを表示する際に、入力画像データに基づいて設定された階調の画像が表示されるように、入力画像データにおける画素値を補正するための空間フィルタの特性を設定する。このフィルタ特性は、当然、補正範囲内に位置する画素にのみ適用される。本実施形態における空間フィルタとしては、例えば、ローパスフィルタ（ＬＰＦ）等の移動平均フィルタを使用することができる。また、本実施形態に係るフィルタの特性としては、例えば、フィルタを掛ける領域や、フィルタのタップ数等が挙げられ、このようなフィルタの特性は、フィルタ行列のフィルタ係数を適宜設定したりすることにより実現できる。このようにして設定されたフィルタ特性に関する情報は、フィルタ処理部１４７に伝送される。

ここで、図１４および図１５を参照しながら、フィルタ特性の設定例について説明する。なお、図１４および図１５は、本実施形態に係るフィルタ設定部１４６によるフィルタ特性の設定例を示す説明図である。

まず、図１４は、表示素子（液晶等）の立ち上がりや立ち下がりで異なるフィルタ特性を設定する例を示しており、この例では、エッジの立ち上がり領域にのみフィルタを適用している。また、図１４には、入力信号として、図の左から右へ移動する４種類のステップ信号の例が挙げられており、それぞれ、信号の最大値（最大輝度）、最小値（最小輝度）、およびエッジ高さ（最大値と最小値との差）が異なっている。なお、図１４中の「２５５」および「０」の数値は、各画素の輝度値を示している。

図１４に示すように、階調変化量（輝度値の最大値と最小値との差）により、各画素における画素値の補正量は異なるものの、エッジの立ち上がり領域にのみフィルタを適用するというフィルタ特性を設定することができる。具体的には、図１３には、図示していないが、例えば、フィルタ設定部１４６が、エッジ検出部１４３により検出されたエッジ方向に関する情報を取得して、エッジ箇所における階調変化の方向から、立ち上がり領域か立ち下がり領域かを判定し、立ち上がり領域であると判定された場合にのみ適用されるというフィルタ特性を設定することができる。

次に、図１５は、入力画像データの動きベクトル量に応じた空間フィルタのタップ数を設定する例を示しており、この例では、動きベクトル量に比例してフィルタのタップ数を変更している。また、図１５には、入力信号として、図の左から右へ異なる移動量（動きベクトル量）で移動する４種類のステップ信号の例が挙げられており、左からそれぞれ、静止画（移動量０ｄｏｔ／ｖ）、移動量２ｄｏｔ／ｖ、移動量４ｄｏｔ／ｖ、移動量６ｄｏｔ／ｖのステップ信号となっている。図１５中の「２５５」および「０」の数値は、各画素の輝度値を示している。

図１５に示す例では、フィルタ設定部１４６は、入力画像データの動きベクトル量（画素数）と等しい数のタップ数とする（例えば、移動量が２ｄｏｔ／ｖであれば、タップ数を２とする）、というフィルタ特性を設定している。このように、入力画像信号の動きベクトル量が大きい（移動速度が速い）程、フィルタのタップ数が多くなるので、入力画像信号の動きベクトル量が大きい（移動速度が速い）程、より細かく精密な画素値の補正処理を行うことができる。従って、本実施形態に係る画像処理装置１００によれば、入力画像データの動きベクトル量が大きいほど、より効果的に、ホールド型の表示装置２００における動きボケを抑制することが可能となる。

フィルタ処理部１４７は、表示装置２００による表示対象のフレームより前のフレームにおいて、フィルタ設定部１４６により設定されたフィルタ特性を有するフィルタを、外側置換部１４５から伝送された外側置換後の入力画像データにかけることで、補正範囲内に位置する画素の画素値を補正する。画素値が補正された入力画像データは、ゲイン調整部１４８に伝送される。なお、本実施形態に係るフィルタ処理部１４７は、外側置換後の入力画像データにフィルタをかけているが、必ずしも外側置換後の入力画像データにフィルタを掛ける必要はなく、入力画像データそのものにフィルタを掛けてもよい。

ゲイン調整部１４８は、高周波検出部１４４から伝送された高域信号に基づいて、フィルタ処理部１４７から伝送された補正後の入力画像データに対し、高周波でのエラーを回避するため、ゲイン調整を行う。ゲイン調整後の入力画像データは、選択部１４９に伝送される。

選択部１４９には、エッジ検出部１４３の検出結果、例えば、エッジ検出部１４３から伝送されたエッジ箇所およびエッジ方向に関する情報や、フィルタ処理部１４７から伝送された画素値が補正された入力画像データや、入力画像データ記憶部１１０から抽出された画素値が補正されていない入力画像データそのものなどが入力される。この選択部１４９は、入力されたエッジ箇所およびエッジ方向に関する情報に応じて、フィルタ処理部１４７により画素値が補正された入力画像データと、フィルタ処理部１４７により画素値が補正されていない入力画像データのいずれか一方を選択する。さらに、選択部１４９は、画素値が補正された（フィルタ処理が行われた）入力画像データを選択した場合にのみ、当該入力画像データを合成部１５０に出力する。より具体的には、例えば、選択部１４９は、エッジ方向に基づいて、エッジ箇所が、低階調から高階調への立ち上がり領域におけるものであると判断された場合には、画素値が補正された入力画像データを選択する。一方、選択部１４９は、エッジ方向に基づいて、エッジ箇所が、低階調から高階調への立ち下がり領域におけるものであると判断された場合には、画素値が補正されていない入力画像データを選択する。このような処理を行うことにより、図１４で説明したような、立ち上がり領域にのみフィルタを掛けるということが可能となる。

なお、本実施形態においては、選択部１４９は、フィルタ処理部１４７の後段に設けられており、フィルタ処理部１４７によりフィルタ処理が行われた後の入力画像データと、外部から入力された入力画像データそのものの双方が選択部１４９に入力される。そして、選択部１４９は、入力されたフィルタ処理後の入力画像データと、外部から入力された入力画像データとから選択する方式を採用している。しかし、このような方式には限られず、例えば、フィルタ処理部１４７によるフィルタ処理を行う前に、選択部１４９により予めフィルタ処理を行うか否かを決定し、選択部１４９により、フィルタ処理を行うことが決定された場合（例えば、エッジ箇所が立ち上がり領域におけるものと判断された場合）にのみ、フィルタ処理を行うようにしてもよい。

合成部１５０は、選択部１４９から、フィルタ処理後の入力画像データが入力された場合には、外部から入力された入力画像データそのもの（フィルタ処理が行われていないもの）と、フィルタ処理後の入力画像データを合成し、出力部１６０に出力する。一方、合成部１５０は、選択部１４９から、フィルタ処理後の入力画像データが入力されない場合には、外部から入力されたフィルタ処理が行われていない入力画像データを、そのまま出力部１６０に出力する。

（表示装置２００の構成）
以上、画像処理装置１００の機能構成について詳細に説明したが、次に、図１１を参照しながら、表示装置２００の構成を説明する。図１１に示すように、表示装置２００は、ホールド型の表示装置であり、画像表示部２１０と、ソースドライバ２２０と、ゲートドライバ２３０と、表示制御部２４０と、を備える。

画像表示部２１０は、画像処理装置１００から入力された表示画像データに対応する画像を表示する。この画像表示部２１０は、例えば、ｍ×ｎ配置のドットマトリクス型のディスプレイである。画像表示部２１０の具体例としては、例えば、ａ−Ｓｉ（アモルファス シリコン）ＴＦＴを用いたアクティブマトリクス型のＯＬＥＤ（Organic Light Emitting Diode）ディスプレイや、ＬＣＤなどが挙げられる。

ソースドライバ２２０およびゲートドライバ２３０は、ｍ×ｎ配置の画像表示部２１０を駆動させる駆動手段である。このうち、ソースドライバ２２０は、データ信号をデータ線２２１に供給し、ゲートドライバ２３０は、セレクト信号（アドレス信号）を走査線２３１に供給する。

表示制御部２４０は、画像処理装置１００から入力された表示画像データに基づき、画像表示部２１０の駆動（ソースドライバ２２０およびゲートドライバ２３０の駆動）を制御する。より具体的には、表示制御部２４０は、画像処理装置１００から得られる表示画像データ（ビデオ信号）に基づき、各ドライバ（ソースドライバ２２０およびゲートドライバ２３０）回路に供給すべき制御信号を必要なタイミングで出力する。

以上、本実施形態に係る画像処理装置１００および表示装置２００の機能の一例を示した。上記の各構成要素は、汎用的な部材や回路を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。また、各構成要素の機能を、ＣＰＵ等が全て行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用する構成を変更することが可能である。

［画像処理装置１００のハードウェア構成について］
続いて、図１６を参照しながら、本実施形態に係る画像処理装置１００のハードウェア構成について説明する。図１６は、本実施形態に係る画像処理装置のハードウェア構成を示すブロック図である。

画像処理装置１００は、主に、ＣＰＵ（Central Processing Unit）９０１と、ＲＯＭ（Read Only Memory）９０３と、ＲＡＭ（Random Access Memory）９０５と、ホストバス９０７と、ブリッジ９０９と、外部バス９１１と、インターフェース９１３と、入力装置９１５と、出力装置９１７と、ストレージ装置９１９と、ドライブ９２１と、接続ポート９２３と、通信装置９２５とを備える。

ＣＰＵ９０１は、演算処理装置および制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージ装置９１９、またはリムーバブル記録媒体９２７に記録された各種プログラムに従って画像処理装置１００内の動作全般またはその一部を制御する。ＲＯＭ９０３は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０５は、ＣＰＵ９０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバス等の内部バスにより構成されるホストバス９０７により相互に接続されている。

ホストバス９０７は、ブリッジ９０９を介して、ＰＣＩ（Peripheral Component Interconnect／Interface）バスなどの外部バス９１１に接続されている。

入力装置９１５は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチおよびレバーなどユーザが操作する操作手段である。また、入力装置９１５は、例えば、赤外線やその他の電波を利用したリモートコントロール手段（いわゆる、リモコン）であってもよいし、画像処理装置１００の操作に対応した携帯電話やＰＤＡ等の外部接続機器９２９であってもよい。さらに、入力装置９１５は、例えば、上記の操作手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。画像処理装置１００のユーザは、この入力装置９１５を操作することにより、画像処理装置１００に対して各種のデータを入力したり処理動作を指示したりすることができる。

出力装置９１７は、例えば、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置およびランプなどの表示装置や、スピーカおよびヘッドホンなどの音声出力装置や、プリンタ装置、携帯電話、ファクシミリなど、取得した情報をユーザに対して視覚的または聴覚的に通知することが可能な装置で構成される。具体的には、表示装置は、画像データ等の各種情報をテキストまたはイメージで表示する。一方、音声出力装置は、音声データ等を音声に変換して出力する。

ストレージ装置９１９は、本実施形態に係る画像処理装置１００の記憶部の一例として構成されたデータ格納用の装置であり、例えば、ＨＤＤ（Hard Disk Drive）等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、または光磁気記憶デバイス等により構成される。このストレージ装置９１９は、ＣＰＵ９０１が実行するプログラムや各種データ、および外部から取得した画像信号データなどを格納する。

ドライブ９２１は、記憶媒体用リーダライタであり、画像信号処理装置に内蔵、あるいは外付けされる。ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体９２７に記録されている情報を読み出して、ＲＡＭ９０５に出力する。また、ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体９２７に記録を書き込むことも可能である。リムーバブル記録媒体９２７は、例えば、ＤＶＤメディア、ＨＤ−ＤＶＤメディア、Ｂｌｕ−ｒａｙメディア、コンパクトフラッシュ（登録商標）（CompactFlash：ＣＦ）、メモリースティック、または、ＳＤメモリカード（Secure Digital memory card）等である。また、リムーバブル記録媒体９２７は、例えば、非接触型ＩＣチップを搭載したＩＣカード（Integrated Circuit card）または電子機器等であってもよい。

接続ポート９２３は、例えばＵＳＢ（Universal Serial Bus）ポートや、ｉ．Ｌｉｎｋ等のＩＥＥＥ１３９４ポート、ＳＣＳＩ（Small Computer System Interface）ポート、ＲＳ−２３２Ｃポート、光オーディオ端子等の、機器を画像処理装置１００に直接接続するためのポートである。この接続ポート９２３に外部接続機器９２９を接続することで、画像処理装置１００は外部接続機器９２９から直接画像信号データを取得したり、外部接続機器９２９に画像信号データを提供したりする。

通信装置９２５は、例えば、通信網１０に接続するための通信デバイス等で構成された通信インターフェースである。通信装置９２５は、例えば、有線または無線ＬＡＮ（Local Area Network）、Ｂｌｕｅｔｏｏｔｈ、またはＷＵＳＢ（Wireless USB）用の通信カード、光通信用のルータ、ＡＤＳＬ（Asymmetric Digital Subscriber Line）用のルータ、または、各種通信用のモデム等である。この通信装置９２５は、例えば、インターネットや他の通信機器との間で画像信号等を送受信することができる。また、通信装置９２５に接続される通信網１０は、有線または無線によって接続されたネットワーク等により構成され、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、または衛星通信等であってもよい。

以上説明した構成により、画像処理装置１００は、接続ポート９２３や通信網１０に接続された他の外部接続機器９２９等の多様な情報源から入力画像信号に関する情報を取得し、表示装置２００に対して画像信号を伝送することが可能になる。

なお、本実施形態に係る表示装置２００のハードウェア構成は、画像処理装置１００のハードウェア構成と実質的に同一であるので、説明を省略する。

以上、本実施形態に係る画像処理装置１００および表示装置２００の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。

［本発明の第１の実施形態に係る画像処理方法の処理の流れ］
以上、本実施形態に係る画像処理装置１００および表示装置２００の構成について詳細に説明した。続いて、図１７を参照しながら、このような構成を有する画像処理装置１００を利用した本実施形態に係る画像処理方法について、詳細に説明する。なお、図１７は、本実施形態に係る画像処理方法の処理の流れを示すフローチャートである。

本実施形態に係る画像処理方法は、外部から画像処理装置１００に入力される入力画像データを処理して、ホールド型の表示装置２００に出力する表示画像データを生成するものである。

具体的には、図１７に示すように、外部から入力画像データが画像処理装置１００に入力されると、当該入力画像データが、入力画像データ記憶部１１０に記憶される（Ｓ１０１）と同時に、動きベクトル検出部１２０に入力される。

動きベクトル検出部１２０に、表示対象のフレームにおける入力画像データが入力されると、動きベクトル検出部１２０は、例えば、表示対象のフレームの１つ前のフレームにおける入力画像データを、入力画像データ記憶部１１０から抽出する。そして、動きベクトル検出部１２０は、表示対象のフレームおける入力画像データと、その１つ前のフレームにおける入力画像データとを比較し、表示画像の中で動いているオブジェクトに着目し、このオブジェクトの動く方向と動いた距離とに基づいて、表示対象のフレームにおける入力画像データの動きベクトルを検出する（Ｓ１０３）。検出された動きベクトルは、補正処理部１４０等に伝送される。

続いて、補正処理部１４０は、表示対象のフレームにおける入力画像データが外部から入力されると、応答時間情報記憶部１３０から、表示対象のフレームにおける各画素の階調変化量に対応する応答時間情報を抽出する（Ｓ１０５）。そして、補正処理部１４０は、外部から入力された入力画像データ、動きベクトル検出部１２０から入力された動きベクトル、および、応答時間情報記憶部１３０から抽出した応答時間情報に基づいて、表示対象のフレームよりも前のフレームで、入力画像データにおける画素値を、フレームを構成する画素ごとに補正する補正処理を行う（Ｓ１０７）。この補正処理の結果、表示画像データが生成され、補正処理部１４０は、生成された表示画像データを出力部１６０に出力する（Ｓ１０９）。

出力部１６０は、補正処理部１４０から表示画像データが入力されると、入力された表示画像データを表示装置２００に出力する（Ｓ１１１）。

ここで、図１８を参照しながら、本実施形態に係る補正処理ステップ（Ｓ１０７）の具
体例について説明する。なお、図１８は、本実施形態に係る補正処理の具体例を示すフローチャートである。

図１８に示すように、補正処理部１４０に、外部から入力画像データが入力されると（Ｓ２０１）、まず、補正範囲設定部１４１が、動きベクトル検出部１２０から入力された動きベクトルに基づいて、入力画像データにおける画素値を補正する補正範囲を設定する（Ｓ２０３）。具体的には、補正範囲設定部１４１は、入力画像データのうちの動きがある領域（動きがあるオブジェクトに対応する部分）を検出し、動きがある領域に位置する画素を補正範囲として設定する。さらに、補正範囲設定部１４１は、設定された補正範囲に関する情報および入力された動きベクトルに関する情報を、最大最小値検出部１４２、エッジ検出部１４３、高周波検出部１４４、フィルタ設定部１４６等に伝送する。

次に、最大最小値検出部１４２が、補正範囲設定部１４１から伝送された補正範囲に関する情報に基づいて、補正範囲内における入力画像データ（入力信号）の最大値および最小値を検出する（Ｓ２０５）。さらに、最大最小値検出部１４２は、検出された入力信号の最大値および最小値に関する情報を、エッジ検出部１４３および外側置換部１４５等に伝送する。

次に、エッジ検出部１４３が、補正範囲設定部１４１から伝送された補正範囲に関する情報および入力された動きベクトルに関する情報、および、最大最小値検出部１４２から伝送された入力信号の最大値および最小値に関する情報に基づいて、入力画像データ（入力信号）におけるエッジ領域を検出する（Ｓ２０７）。この際、エッジ検出部１４３は、エッジの存在する位置（エッジ箇所）の検出のみならず、当該エッジ箇所におけるエッジ方向（低階調から高階調への変化の方向か、あるいは、高階調から低階調への変化の方向か）をも検出する。さらに、エッジ検出部１４３は、検出されたエッジ箇所およびエッジ方向に関する情報を、選択部１４９に伝送する。

次に、高周波検出部１４４が、補正範囲設定部１４１から伝送された補正範囲に関する情報に基づいて、補正範囲内における入力画像データの空間周波数の高域信号を検出する（Ｓ２０９）。ここでいう高周波とは、補正範囲より狭い範囲の半波長（１／２の波長）を持つ信号をいう。つまり、補正範囲の２倍より波長の短い高域信号を高域信号として検出する。これは、高域信号の場合は、補正範囲内に立ち上がりエリアと立ち下がりエリアが混在するため、正しい処理を行えなくなるためである。さらに、高周波検出部１４４は、検出された高域信号をゲイン調整部１４８に出力し、出力された高域信号は、フィルタ処理部１４７による処理後のゲイン調整に使用される。

次に、外側置換部１４５が、最大最小値検出部１４２から伝送された入力信号の最大値および最小値に関する情報に基づいて、入力画像データ（入力信号）に対して、その最大値と最小値を用いて外側置換を行う（Ｓ２１１）。さらに、外側置換部１４５は、置換後の入力画像データ（入力信号）をフィルタ処理部１４７に伝送する。

次に、フィルタ設定部１４６は、外部から表示対象のフレームにおける入力画像データが入力され、補正範囲設定部１４１から補正範囲に関する情報および動きベクトルが伝送されると、応答時間情報記憶部１３０から、表示対象のフレームにおける各画素の階調変化量に対応する応答時間情報を抽出する（Ｓ２１３）。

そして、フィルタ設定部１４６は、入力画像データ、補正範囲に関する情報、動きベクトル、および、応答時間情報に基づいて、表示装置２００が表示対象のフレームを表示する際に、入力画像データに基づいて設定された階調の画像が表示されるように、入力画像データにおける画素値を補正するための空間フィルタの特性を設定する（Ｓ２１５）。本実施形態における空間フィルタとしては、例えば、ローパスフィルタ（ＬＰＦ）等の移動平均フィルタを使用することができる。また、本実施形態に係るフィルタの特性としては、例えば、フィルタを掛ける領域や、フィルタのタップ数等が挙げられ、このようなフィルタの特性は、フィルタ行列のフィルタ係数を適宜設定したりすることにより実現できる。さらに、フィルタ設定部１４６は、このようにして設定されたフィルタ特性に関する情報をフィルタ処理部１４７に伝送する。

次に、フィルタ処理部１４７が、表示装置２００による表示対象のフレームより前のフレームにおいて、フィルタ設定部１４６により設定されたフィルタ特性を有するフィルタを、外側置換部１４５から伝送された外側置換後の入力画像データにかけることで、補正範囲内に位置する画素の画素値を補正するフィルタ処理を行う（Ｓ２１７）。さらに、フィルタ処理部１４７は、画素値が補正された入力画像データをゲイン調整部１４８に伝送する。なお、本実施形態に係るフィルタ処理部１４７は、外側置換後の入力画像データにフィルタをかけているが、必ずしも外側置換後の入力画像データにフィルタを掛ける必要はなく、入力画像データそのものにフィルタを掛けてもよい。

次に、ゲイン調整部１４８が、高周波検出部１４４から伝送された高域信号に基づいて、フィルタ処理部１４７から伝送された補正後の入力画像データに対し、高周波でのエラーを回避するため、ゲイン調整を行う（Ｓ２１９）。さらに、ゲイン調整部１４８は、ゲイン調整後の入力画像データを選択部１４９に伝送する。

次に、選択部１４９は、エッジ検出部１４３の検出結果、フィルタ処理部１４７から伝送された画素値が補正された入力画像データ、入力画像データ記憶部１１０から抽出された画素値が補正されていない入力画像データそのものなどが入力されると、以入力されたエッジ箇所およびエッジ方向に関する情報に応じて、フィルタ処理部１４７により画素値が補正された入力画像データと、フィルタ処理部１４７により画素値が補正されていない入力画像データのいずれか一方を選択する。具体的な処理としては、選択部１４９は、例えば、エッジ方向に基づいて、エッジ箇所が、低階調から高階調への立ち上がり領域におけるものであるか、あるいは、高階調から低階調への立ち下がり領域におけるものであるかを判断する（Ｓ２２１）。

この判断の結果、入力画像データ中のエッジ箇所が立ち上がり領域におけるものであると判断された場合には、選択部１４９は、画素値が補正された入力画像データを選択し（Ｓ２２３）、画素値が補正された（フィルタ処理が行われた）入力画像データを合成部１５０に出力する（Ｓ２２５）。

一方、ステップＳ２２１の判断の結果、入力画像データ中のエッジ箇所が立ち下がり領域におけるものであると判断された場合には、選択部１４９は、画素値が補正されていない入力画像データを選択する（Ｓ２２７）。

最後に、合成部１５０は、選択部１４９から、フィルタ処理後の入力画像データが入力された場合には、外部から入力された入力画像データそのもの（フィルタ処理が行われていないもの）と、フィルタ処理後の入力画像データを合成し（Ｓ２２９）、出力部１６０に出力する（Ｓ２３１）。一方、合成部１５０は、選択部１４９から、フィルタ処理後の入力画像データが入力されない場合には、外部から入力されたフィルタ処理が行われていない入力画像データを、そのまま出力部１６０に出力する（Ｓ２３３）。

なお、本実施形態においては、選択部１４９による選択処理は、フィルタ処理部１４７によるフィルタ処理の後に行われ、選択部１４９は、入力されたフィルタ処理後の入力画像データと、外部から入力された入力画像データとから選択する。しかし、このような場合には限られず、例えば、フィルタ処理部１４７によるフィルタ処理を行う前に、選択部１４９により予めフィルタ処理を行うか否かを決定し、選択部１４９により、フィルタ処理を行うことが決定された場合（例えば、エッジ箇所が立ち上がり領域におけるものと判断された場合）にのみ、フィルタ処理を行うようにしてもよい。

＜２．第２の実施の形態＞
次に、本発明の第２の実施の形態について説明する。なお、第１の実施の形態における構成要素と同一のものには同一の符号を付し、適宜説明を省略する。

［画像処理装置の全体構成例］
図１９は、本発明の第２の実施の形態に係る画像処理装置（画像処理装置３００）のブロック構成を表すものである。この画像処理装置３００は、高フレームレート変換部３１と、動画ボヤケ（動画ボケ）特性検出部３２と、動画ボヤケ改善処理部３３とを備えている。なお、本実施の形態に係る画像表示システムにおける表示装置の構成は、図１１に示した第１の実施の形態の画像表示システム１０における表示装置２００の構成と同様であるので、説明を省略する。

高フレームレート変換部３１は、外部からフレーム単位で入力される入力画像データ（例えば、テレビジョン放送信号等の動画像信号）に対して高フレームレート変換処理を行い、変換画像データ（映像信号）を生成・出力するものである。具体的には、第１のフレームレートの入力画像データに対して高フレームレート変換処理を施し、その結果得られる、第１のフレームレートよりも高い第２のフレームレートの変換画像データを、動画ボヤケ特性検出部３２および動画ボヤケ改善処理部３３へ出力するようになっている。この高フレームレート変換処理とは、入力時の第１のフレームレートが出力（表示）時の第２のフレームレートよりも低い場合に実行される処理であり、入力時の動画像を構成する各フレームのそれぞれの間に、新たなフレームを作成してそれぞれ挿入することにより、第１のフレームレートをそれよりも高い第２のフレームレートに変換する処理を指す。

なお、第１のフレームレートとは、高フレームレート変換部３１に入力された時点の動画像のフレームレートを指す。従って、第１のフレームレートは、任意のフレームレートとなり得るが、ここでは例えば、図示しない撮影装置により動画像が撮影されたときのフレームレート、すなわち、撮像フレームレートであるものとする。また、以下、動画像と、それに対応する動画像データとを個々に区別する必要がない場合、これらをまとめて動画像と単に称する。同様に、フレームと、それに対応するフレームデータとを個々に区別する必要がない場合、これらをまとめてフレームと単に称する。

動画ボヤケ特性検出部３２は、高フレームレート変換部３１から供給される変換画像データ（映像信号）を構成する各フレームのそれぞれについて、動画ボヤケの特性を示す情報（動画ボヤケ特性情報）を検出するものである。検出された動画ボヤケ特性情報は、動画ボヤケ改善処理部３３へ供給されるようになっている。この動画ボヤケ特性情報としては、例えば動きベクトルを用いることができる。

なお、以下、動きベクトルの値を移動速度（移動量）と称し、また、動きベクトルの方向を移動方向と称する。この移動方向は、２次元平面上のいずれの方向ともなり得るものであり、画像処理装置３００は、２次元平面上の何れの方向が移動方向になった場合でも、後述する各種処理を全く同様に実行することが可能である。ただし、以下は説明の簡略上、移動方向は横方向であるとする。また、１つのフレーム内での動画ボヤケ特性情報の検出個数も、特に限定されない。例えば、１つのフレームに対して、動画ボヤケ特性情報が１つのみ検出されるようにしてもよいし、そのフレームを構成する画素ごとに、動画ボヤケ特性情報が１つずつ個別に検出されるようにしてもよい。あるいは、その１つのフレームがいくつかのブロックに分割されると共に、その分割されたブロックごとに、動画ボヤケ特性情報が１つずつ個別に検出されるようにしてもよい。

動画ボヤケ改善処理部３３は、高フレームレート変換部１１から供給される変換画像データ（映像信号）を構成する各フレームのそれぞれについて、動画ボヤケ特性検出部３２により検出された動画ボヤケ特性情報のうちの処理対象のフレームに対応する値に基づいて、処理対象のフレームを構成する各画素値を、表示パネル（画像表示部２１０）の特性に合わせて補正するものである。具体的には、動画ボヤケ改善処理部３３は、処理対象のフレームについての動画ボヤケの特性（動画ボヤケ特性情報の値）と画像表示部２１０の特性に応じて、処理対象のフレームの各画素値を、表示装置２００に表示したときに動画ボヤケが抑制されるように補正するようになっている。このような補正処理により生成された画像データ（表示画像データ）は、表示装置２００へ出力される。

［動画ボヤケ改善処理部の構成例］
図２０は、動画ボヤケ改善処理部３３のブロック構成を表すものである。この動画ボヤケ改善処理部３３は、信号特性検出部３３１と、補正処理部３３２と、補正量調整部３３３と、加算部３３４とを有している。

信号特性検出部３３１は、動画ボヤケ特性情報（例えば、動きベクトル。以下同様。）を用いて、補正処理部３３２における補正処理の際に用いる所定の信号特性情報を、映像信号（変換画像データ。以下同様）から検出するものである。このような信号特性情報としては、例えば、ＭＡＸ／ＭＩＮ情報、空間高周波数情報、空間低周波数情報およびエッジ方向情報などが挙げられる。このうち、ＭＡＸ／ＭＩＮ情報とは、映像信号における所定の補正範囲内（後述するサーチ範囲に対応する範囲）における輝度の最小値（ＭＩＮ値、最小画素値）およびその画素位置、ならびに輝度の最大値（ＭＡＸ値、最大画素値）およびその画素位置などを含む情報のことである。また、エッジ方向情報とは、映像信号における補正対象のエッジ箇所が、低階調から高階調への立ち上がり方向のものであるのか、あるいは高階調から低階調への立ち下がり方向のものであるのか、を示す情報のことである。なお、この信号特性検出部の詳細については、後述する（図２３〜図２６）。

補正処理部３３２は、信号特性検出部３３１において検出された信号特性情報と、動画ボヤケ特性検出部３２において検出された動画ボヤケ特性情報とを用いて、映像信号に対して後述する空間的なＬＰＦ（ロー・パス・フィルタ）処理および空間的なＨＰＦ（ハイ・パス・フィルタ）処理を施すことにより、映像信号における画素値を画素ごとに補正するものである。このような補正処理後の映像信号（補正信号）は、補正量調整部３３３へ出力される。なお、補正処理部３３２は、場合によっては信号特性情報を用いないで補正処理を行うようにしてもよい。

上記したＬＰＦ処理およびＨＰＦ処理は、具体的には、例えば図２１（Ａ）〜（Ｃ）に示したような処理である。

ＬＰＦ処理は、例えば図２１（Ａ）中の矢印で示したように、移動量に対応する補正範囲内において、映像信号のエッジ箇所の傾きをより緩やかにするフィルタ処理である。このＬＰＦ処理はまた、動き適応型であると共に例えば２次微分型のフィルタ処理であり、後述するように、エッジ方向（立ち上がり方向または立ち下がり方向）に応じて非対称の処理となっている。

ＨＰＦ処理は、例えば図２１（Ｂ）中の矢印で示したように、移動量に対応する補正範囲内において、映像信号のエッジ箇所の両端付近（上下付近）に突起領域を設けるフィルタ処理である。具体的には、エッジ箇所の上部付近（高階調側）に、オーバーシュート領域と呼ばれる高階調方向への突起領域を設けると共に、エッジ箇所の下部付近（低階調側）に、アンダーシュート領域と呼ばれる低階調方向への突起を設ける処理である。

また、このようなＬＰＦ処理およびＨＰＦ処理を組み合わせる（両方の処理を施す）と、例えば図２１（Ｃ）中の矢印で示したようなフィルタ処理となる。なお、ＬＰＦ処理およびＨＰＦ処理を組み合わせた後のエッジ箇所は、直線的な波形となるように、後述する各フィルタ係数が設定されるようになっている。

ここで、このような各フィルタ処理の際には、図２１（Ａ）〜（Ｃ）に示したように、移動量の大きさに応じて補正範囲が設定されると共に、例えば図２２に示したように、フィルタのタップ数（tap数）が移動量の大きさに応じて変化する（増加する）ようになっている。これは、移動量の大きさが変わると、フィルタ処理による効果的な波形も変わってくるからである。具体的には、図２２によると、例えば偶数の移動量の場合には、ＬＰＦ処理のタップ数が（移動量−１）個となり、ＨＰＦ処理のタップ数が（移動量＋１）個となることなどにより、各フィルタ処理のタップ数が、移動量の値によらずに常に奇数となるように設定されている。これは、偶数個のタップ数によるフィルタ処理では、エッジの両端部分において左右対称の波形とはならないからである。

なお、この補正処理部３３２の詳細については、後述する（図２７〜図４０）。

補正量調整部３３３は、補正処理部３３２における補正処理の際のフィルタのタップ数切り替えなどで生じる境界面の段差を防ぐため、動画ボヤケ特性情報を用いて、フィルタ処理（補正処理）のゲイン調整を行うものである。なお、この補正量調整部３３３の詳細については、後述する（図４１）。

加算部３３４は、動画ボヤケ改善処理部３３へ入力された元の映像信号と、補正量調整部３３３から出力される補正処理および補正量調整処理の後の映像信号（補正量調整後の補正信号）とを加算することにより、表示画像データを生成・出力するものである。

［信号特性検出部の構成例］
次に、図２３〜図２６を参照して、信号特性検出部３３１について詳細に説明する。図２３は、信号特性検出部３３１のブロック構成例を表すものである。この信号特性検出部３３１は、ＭＡＸ／ＭＩＮ検出部３３１Ａと、空間高周波検出部３３１Ｂと、空間低周波検出部３３１Ｃと、エッジ方向検出部３３１Ｄとを有している。

ＭＡＸ／ＭＩＮ検出部３３１Ａは、動画ボヤケ特性情報を用いて、前述のＭＡＸ／ＭＩＮ情報を映像信号から検出するものである。検出されたＭＡＸ／ＭＩＮ情報は、空間高周波検出部３３１Ｂ、空間低周波検出部３３１Ｃおよびエッジ方向検出部３３１Ｄへ供給されると共に、信号特性情報の１つとして補正処理部３３２へ出力されるようになっている。

具体的には、ＭＡＸ／ＭＩＮ検出部３３１Ａは、例えば図２４（Ａ）に示したように、移動量の２倍の大きさのサーチ範囲（＝｛（タップ数−１）×２＋１｝個の画素範囲）において、ＭＩＮ値およびその画素位置、ＭＡＸ値およびその画素位置などを検出する。その際、例えば図２４（Ｂ）に示したように、ＭＩＮ値およびその画素位置を検出する際には、サーチ範囲内における所定の注目画素からの距離に応じて各画素値に対して正の重み付けをした後に、検出処理を行うようになっている。また、ＭＡＸ値およびその画素位置を検出する際には、上記注目画素からの距離に応じて各画素値に対して負の重み付けをした後に、検出処理を行うようになっている。これは、ＭＡＸ／ＭＩＮ情報を検出する際のノイズ等による誤検出を防ぐためであり、重み付けを行ってサーチ範囲内の注目画素に近い位置の画素値を選ぶことにより、ノイズ耐性を向上させることができるからである。

また、例えば図２５に示したように、このような正および負の重みのうちの少なくとも一方は、サーチ範囲における高域信号量が増加するのに応じて（空間周波数が高くなるのに応じて）、大きくなるように調整される。具体的には、ここでは、高域信号量の値が０以上かつＨ１１未満では重みが一定値となり、Ｈ１１以上かつＨ１２未満では線形に増加し、Ｈ１２以上では再び一定値となっている。これは、後述するエッジ方向検出部３３１Ｄにおけるエッジ方向の誤判断が空間周波数の高い領域（高域）で起こりやすいことから、そのような高域では重みを大きくすることにより、高域での誤判断を低減するためである。

空間高周波検出部３３１Ｂは、ＭＡＸ／ＭＩＮ情報と動画ボヤケ特性情報とに基づいて、サーチ範囲内における映像信号の空間高周波情報（高域信号量）を検出し、信号特性情報の１つとして出力するものである。

空間低周波検出部３３１Ｃは、ＭＡＸ／ＭＩＮ情報と動画ボヤケ特性情報とに基づいて、サーチ範囲内における映像信号の空間低周波情報（低域信号量）を検出し、信号特性情報の１つとして出力するものである。

エッジ方向検出部３３１Ｄは、ＭＡＸ／ＭＩＮ情報と動画ボヤケ特性情報とに基づいて、映像信号におけるエッジ箇所およびそのエッジ方向を求めるものである。これは、エッジ方向が、立ち上がり方向であるのかあるいは立ち下がり方向であるのかによって、補正処理部３３２における補正処理が異なってくるからである。すなわち、詳細は後述するが、補正処理部３３２では、求められたエッジ方向に応じて、ＬＰＦ処理を行うか否かを決定すると共に、ＨＰＦ処理の際のフィルタ係数を決定するようになっている。

エッジ方向検出部３３１Ｄは、具体的には、例えば図２６（Ａ）〜（Ｃ）に示したようにしてエッジ方向を求めるようになっている。すなわち、例えば図２６（Ａ）に示したように、動きベクトルの移動方向が図面上の左から右への方向である場合において、ＭＩＮ値の画素位置（ＭＩＮ位置）よりもＭＡＸ値の画素位置（ＭＡＸ位置）が右側にあるときには、立ち下がり方向であると判断する。また、この移動方向の場合において、例えば図２６（Ｂ）に示したように、ＭＡＸ位置よりもＭＩＮ位置が右側にあるときには、立ち上がり方向であると判断する。なお、例えば図２６（Ｃ）に示したように、ＭＩＮ位置とＭＡＸ位置とが同じである場合には、そのサーチ範囲内にはエッジ箇所が存在しないことになるため、後述する補正処理部３３２による補正処理を行わないと判断する。

［補正処理部の構成例］
次に、図２７〜図４０を参照して、補正処理部３３２について詳細に説明する。図２７は、補正処理部３３２のブロック構成例を表すものである。この補正処理部３３２は、図２１（Ａ）に示したＬＰＦ処理に関するブロックである、第１エッジ置換処理部３３２Ａと、ＬＰＦ処理部３３２Ｃと、ＬＰＦゲイン制御部３３２Ｅとを有している。補正処理部３３２はまた、図２１（Ｂ）に示したＨＰＦ処理に関するブロックである、第２エッジ置換処理部３３２Ｂと、ＨＰＦ処理部３３２Ｄと、ＨＰＦゲイン制御部３３２Ｆとを有している。すなわち、この補正処理部２０は、ＬＰＦ処理に関するブロックと、ＨＰＦ処理に関するブロックとの並列構成となっている。なお、補正処理部３３２はさらに、加算部３３２Ｇを有している。

第１エッジ置換処理部３３２Ａは、信号特性情報と動画ボヤケ特性情報とを用いて後述する第１エッジ置換処理を映像信号に対して施すことにより、ＬＰＦ処理部３３２Ｃにおける補正処理用の第１置換信号を生成・出力するものである（ＬＰＦ処理の前処理に対応）。また、第２エッジ置換処理部３３２Ｂは、信号特性情報と動画ボヤケ特性情報とを用いて後述する第２エッジ置換処理を映像信号に対して施すことにより、ＨＰＦ処理部３３２Ｄにおける補正処理用の第２置換信号を生成・出力するものである（ＨＰＦ処理の前処理に対応）。このような置換処理は、自然画に対してのスルーレートを上げるための処理である。具体的には、撮像ボヤケを含んでいてエッジの鈍った画像に対してフィルタ処理を行ったときに、期待以上にエッジ箇所の傾きが緩やかになってしまうことを防ぐためや、黒縁などがある画像において弊害を減らすためなどに行う処理である。したがって、例えば撮像ボヤケのないテロップ画像やアニメーションなどにおいては、常にエッジ置換処理を行う必要があるわけではない。

これらの第１エッジ置換処理部３３２Ａおよび第２エッジ置換処理部３３２Ｃは、具体的には、例えば図２８（Ａ）〜（Ｃ）に示したようにして、エッジ置換処理を行っている。

第１エッジ置換処理部３３２Ａは、動画ボヤケ特性情報と、信号特性情報（ＭＡＸ／ＭＩＮ情報）としてのＭＡＸ値およびＭＡＸ位置とＭＩＮ値およびＭＩＮ位置とを用いることにより、第１エッジ置換処理（ＭＡＸ／ＭＩＮ置換（外側置換））を行っている。具体的には、例えば図２８（Ａ），（Ｂ）に示したように、サーチ範囲内におけるＭＩＮ位置とＭＡＸ位置との間の画素領域の外側において、ＭＩＮ位置の外側の画素値をＭＩＮ値に置換する（ＭＩＮ置換）と共に、ＭＡＸ位置の外側の画素値をＭＡＸ値に置換する（ＭＡＸ置換）。このような第１エッジ処理を行った後にＬＰＦ処理を行うことにより、エッジ箇所において元の映像信号からの位相ずれを抑えることができるからである。

また、第２エッジ置換処理部３３２Ｂは、動画ボヤケ特性情報と、信号特性情報（ＭＡＸ／ＭＩＮ情報）としてのＭＡＸ値およびＭＡＸ位置とＭＩＮ値およびＭＩＮ位置とを用いることにより、第２エッジ置換処理（ＭＡＸ／ＭＩＮ置換（外側置換）および３点置換）を行っている。具体的には、例えば図２８（Ａ），（Ｃ）に示したように、まず、上記第１エッジ置換処理と同様にして、サーチ範囲内におけるＭＩＮ位置とＭＡＸ位置との間の画素領域の外側において、ＭＡＸ／ＭＩＮ置換（外側置換）を行っている。そして、さらにその画素領域内の画素値を、ＭＩＮ値と、ＭＡＸ値と、ＭＩＮ位置およびＭＡＸ位置の中間付近画素（ＭＩＮ値とＭＡＸ値との中間点に一番近い位置の画素）の画素値と、の３点の画素値に置換している（３点置換）。ＭＩＮ値およびＭＡＸ値への２点置換ではなくこのような３点置換を行うことにより、第２エッジ置換によるエッジ箇所の位相ずれをより効果的に抑えることができるからである。

より具体的には、第１エッジ置換処理部３３２Ａは、例えば図２９（Ａ）〜（Ｃ）および図３０（Ａ），（Ｂ）に示したようにして、第１エッジ置換処理を行っている。なお、図２９（Ａ）は、サーチ範囲の外側にＭＡＸ位置およびＭＩＮ位置がある場合、図２９（Ｂ）は、サーチ範囲の外側にＭＡＸ位置およびＭＩＮ位置の一方（ここでは、ＭＡＸ位置）のみがある場合、図２９（Ｃ）は、サーチ範囲の内側にＭＡＸ位置およびＭＩＮ位置がある場合である。また、図３０（Ａ），（Ｂ）は、サーチ範囲がＭＩＮ位置とＭＡＸ位置との間の画素領域内にない場合である。

また、第２エッジ置換処理部３３２Ｂは、例えば図３１（Ａ）〜（Ｃ）および図３２（Ａ），（Ｂ）に示したようにして、第２エッジ置換処理を行っている。なお、図３１（Ａ）は、サーチ範囲の外側にＭＡＸ位置およびＭＩＮ位置がある場合、図３１（Ｂ）は、サーチ範囲の外側にＭＡＸ位置およびＭＩＮ位置の一方（ここでは、ＭＡＸ位置）のみがある場合、図３１（Ｃ）は、サーチ範囲の内側にＭＡＸ位置およびＭＩＮ位置がある場合である。また、図３２（Ａ），（Ｂ）は、サーチ範囲がＭＩＮ位置とＭＡＸ位置との間の画素領域内にない場合である。すなわち、図３１（Ａ）〜（Ｃ）に示したように、中間点がＭＡＸ位置とＭＩＮ位置との間の画素領域内にある場合には、上述したようにして３点置換が行われる。一方、図３２（Ａ），（Ｂ）に示したように、中間点がＭＡＸ位置とＭＩＮ位置との間の画素領域内にない場合には、第１エッジ置換処理と同様のＭＡＸ／ＭＩＮ置換のみが行われる。つまり、この場合には、後述するＨＰＦ処理による補正量は０（ゼロ）となる。

ＬＰＦ処理部３３２Ｃは、動画ボヤケ特性情報を用いることにより、第１エッジ置換処理部３３２Ａから出力される第１置換信号に対して前述のＬＰＦ処理を施すことにより、ＬＰＦ処理信号を生成・出力するものである。このＬＰＦ処理部３３２Ｃは、例えば図３３に示したように、ＬＰＦ処理の際の固定のフィルタ係数を保持する固定フィルタ係数保持部３３２Ｃ１と、この固定のフィルタ係数と動画ボヤケ特性情報とを用いて実際にＬＰＦ処理を行う移動平均フィルタ部３３２Ｃ２とを有している。なお、ここではＬＰＦ処理を行うフィルタの一例として移動平均フィルタを用いているが、他のＬＰＦを用いるようにしてもよい。

また、前述したように、エッジ方向に応じて、このようなＬＰＦ処理を用いた補正処理を行うか否かが決定されるようになっている。具体的には、エッジ方向が低階調から高階調への立ち上がり方向である場合には、ＬＰＦ処理を用いた補正処理を行う一方、エッジ方向が高階調から低階調への立ち下がり方向である場合には、ＬＰＦ処理を用いた補正処理を行わないようになっている。

ＨＰＦ処理部３３２Ｄは、動画ボヤケ特性情報と信号特性情報とを用いることにより、第２エッジ置換処理部３３２Ｂから出力される第２置換信号に対して前述のＨＰＦ処理を施すことにより、ＨＰＦ処理信号を生成・出力するものである。このＨＰＦ処理部３３２Ｄは、例えば図３４に示したように、動画ボヤケ特性情報および信号特性情報に応じて可変となるフィルタ係数を算出する可変フィルタ係数算出部３３２Ｄ１と、ハイパスフィルタ部３３２Ｄ２とを有している。このハイパスフィルタ部３３２Ｄ２は、可変のフィルタ係数と動画ボヤケ特性情報とを用いて実際にＨＰＦ処理を行うものである。

これらのフィルタ処理部のうち、まず、ＬＰＦ処理部３３２Ｃは、例えば図３５（Ａ），（Ｂ）に示したようにして、ＬＰＦ処理を行う。図３５（Ａ）は、黒レベルから白レベルに遷移する立ち上がりステップエッジに対して、ＬＰＦ処理による補正パターンを直線的とした場合（移動量＝６）の補正パターンを、図３５（Ｂ）は、その場合における動画ボヤケカーブ（網膜残像カーブ）を表している。これらの図から、黒レベルから白レベルへのステップエッジに対して移動量幅の傾き（ＬＰＦ処理の補正パターン）を作るためには、例えば、単純平均によるＬＰＦ処理（直線的に繋いだ補正パターン）とすれば概ね良いことが分かる。また、ＶＡ（Vertical Alignment；垂直配向）方式の液晶パネルによるシミュレーションからも、そのような補正パターンが望ましいという結果が得られた。

ただし、中間調レベルから白レベルへの立ち上がりエッジについては、上記したような単純なＬＰＦ処理では十分な効果が得られず、また、黒レベルからの立ち上がりエッジの場合と比べて位相が移動方向にずれることが分かった。そこで、これらに対する対策として、中間調レベルから白レベルへのステップエッジに対して移動量幅の傾き（ＬＰＦ処理の補正パターン）を作る際には、例えば図３６（Ａ），（Ｂ）に示したように、黒レベル側に下げる方向の補正パターンが望ましいことが分かった。なお、図３６（Ａ）は、中間調レベルから白レベルに遷移する立ち上がりステップエッジに対して適用される望ましい補正パターン（移動量＝６）を、図３６（Ｂ）は、その場合における動画ボヤケカーブ（網膜残像カーブ）を表している。

一方、ＨＰＦ処理部３３２Ｄは、上記したＬＰＦ処理との組み合わせにより、例えば図３７（Ａ），（Ｂ）に示したようにしてＨＰＦ処理を行う。図３７（Ａ）は、ＬＰＦ処理とＨＰＦ処理とを組み合わせた場合の補正パターン（移動量＝６）を、図３７（Ｂ）は、その場合における動画ボヤケカーブ（網膜残像カーブ）を表している。補正パターンの基本構成としては、固定の初期係数を用いたＨＰＦ処理とするというものである。ただし、白レベルに近い側では上記した移動量幅のＬＰＦ処理が望ましいことから、そのような補正パターンを維持するため、立ち上がりエッジにおける階調によっては、ＨＰＦ処理のフィルタ係数をＬＰＦ寄りに設定できるような計算式（詳細は後述）を用いている。なお、図３７（Ａ），（Ｂ）では、液晶の応答が遅い画素とＨＰＦ処理寄りに振った画素との平均値が、ステップ応答に近づく方向に働いていることが分かる（液晶応答時間が０の場合、ステップ状の応答となる）。

このようにして、ＨＰＦ処理部３３２Ｄでは、ＬＰＦ処理部３３２ＣによるＬＰＦ処理との組み合わせによって最適な補正パターンが得られるように、ＨＰＦ処理の際のフィルタ係数が設定されるようになっている。

具体的には、立ち上がりエッジに対しては、例えば図３８（Ａ）〜（Ｅ）に示したような補正パターンとなるように、ＨＰＦ処理の際のフィルタ係数が設定される。
・黒レベル→白レベルへの立ち上がりの際に、移動量のＬＰＦ処理となるようにＨＰＦ処理の際のフィルタ係数の値が抑えられる（図３８（Ｂ）参照）。
・低階調からの立ち上がりの際に、アンダーシュート領域（プリシュート領域）の突起が黒潰れしないように、ＨＰＦ処理の際のフィルタ係数の値が抑えられる（図３８（Ｃ）参照）。
・中間調→白レベルへの立ち上がりの際に、アンダーシュート領域（プリシュート領域）の突起が大きくなりすぎないように、ＨＰＦ処理の際のフィルタ係数の値が抑えられる（図３８（Ｄ）参照）。
・低階調からの立ち上がりの際に、オーバーシュート領域の突起が大きくなりすぎないように、ＨＰＦ処理の際のフィルタ係数の値が抑えられる（図３８（Ｅ）参照）。

一方、立ち下がりエッジに対しては、例えば図３８（Ｆ）〜（Ｊ）に示したような補正パターンとなるように、ＨＰＦ処理の際のフィルタ係数が設定される。
・中間調において、オーバーシュート領域（プリオーバー領域）の突起が大きくなりすぎないように、ＨＰＦ処理の際のフィルタ係数の値が抑えられる（図３８（Ｈ）参照）。
・低階調への立ち下がりの際に、アンダーシュート領域の突起が大きくなりすぎないように、ＨＰＦ処理の際のフィルタ係数の値が抑えられる（図３８（Ｈ），（Ｉ）参照）。
・黒レベルへの立ち下がりの際には、ＨＰＦ処理の際のフィルタ係数が０となり、ＨＰＦ処理が行われない（図３８（Ｇ），（Ｊ）参照）。

このようにして、ＨＰＦ処理の際のフィルタ係数は、エッジ方向に応じて異なる値となるように調整される。具体的には、エッジ方向が立ち上がり方向である場合には、ＬＰＦ処理寄りのフィルタ係数（上下非対称）となり、立ち下がり方向である場合には、オーバーシュート領域およびアンダーシュート領域の突起（エッジ箇所の両端の突起）が互いに同じ大きさ（上下対称）となるように、フィルタ係数が調整される。より具体的には、エッジ方向が立ち上がり方向である場合には、オーバーシュート領域の突起よりもアンダーシュート領域の突起のほうがより大きくなるように、ＨＰＦ処理の際のフィルタ係数が調整される。これは、中間調から白レベルへの立ち上がりの際にＨＰＦ処理の効果が弱まる傾向にあることから、このようなフィルタ係数に調整してＨＰＦ処理の効果を強めるというものである。

また、補正処理後の映像信号（補正信号）における画素値が信号のダイナミックレンジ内に収まるように、ＨＰＦ処理の際のオーバーシュート領域およびアンダーシュート領域の突起の大きさに対応するフィルタ係数がそれぞれ調整されるようにするのが望ましい。これは、そのようなエッジ箇所の両端の突起がダイナミックレンジの端部（黒レベルおよび白レベル）にぶつかると、補正パターンの波形が崩れてしまい、ＨＰＦ処理の効果が弱まってしまうからである。

また、オーバーシュート領域およびアンダーシュート領域の突起の大きさ互いに異なる場合には、それらの突起の大きさの比率が維持されつつ、ＨＰＦ処理の際のフィルタ係数が調整されるようにするのが望ましい。これは、低階調から低階調への小振幅変化の場合、ＨＰＦ処理における初期係数では、補正量が大きくなりすぎるためである。

また、ＨＰＦ処理の際のフィルタ係数は、サーチ範囲内（補正範囲内）における空間周波数に応じて変化するようになっているのが望ましい。これは、例えばランプ信号のような低い空間周波数や、逆に空間周波数の高い高域では、ＨＰＦ処理の破綻が起こる可能性があるため、そのような破綻を回避するものである。

さらに、ＨＰＦ処理の際のフィルタ係数は、サーチ範囲内（補正範囲内）におけるＭＩＮ値とＭＡＸ値との差分値に対応するエッジ振幅の大きさに応じて変化するようになっているのが望ましい。これは、振幅の大きなエッジ箇所では、そのままでは補正量が大きくなりすぎてしまうためである。

以上のようなＨＰＦ処理の際のフィルタ係数は、例えば、以下の（１）式〜（５）式を用いて求められる。これらの式のうち、（１）式〜（３）式は、エッジ方向が立ち上がり方向である場合のフィルタ係数の算出式であり、（４）式および（５）式は、エッジ方向が立ち下がり方向である場合のフィルタ係数の算出式である。このようなフィルタ係数の算出の際には、まず、（移動量＋１）のタップの両端におけるタップ係数を求め、次にその間のタップ係数を求める。そして、タップの両端の係数をａｍ，ａｐとして（右に移動する立ち上がりエッジの左端の係数をａｍ、右端の係数をａｐとする）、エッジ振幅に依存した初期係数により求められた補正パターンが所定の閾値に達したときに、これらａｍ，ａｐをクリップさせるようになっている（図３８参照）。

ここで、図３８を参照して、上記（１）式〜（５）式について詳細に説明する。まず、初期係数は、エッジ方向が立ち上がりの場合および立ち下がりの場合ともそれぞれ２個ずつ存在するため、合計４個存在する。基本は、そのような初期係数を用いたＨＰＦの構成である。そして、初期係数に対して各種計算を行うために、処理画素中心から移動量の２倍の画素領域（サーチ範囲）内で検出したＭＩＮ値およびＭＡＸ値を用いる。

立ち上がり方向のエッジ箇所については、図３８（Ａ）〜（Ｅ）に示したように、黒レベルと、ＭＩＮ値に依存する閾値Ｔｈ１と、白レベルよりも大きな輝度ベルの固定値である閾値Ｔｈ２とからなる、合計３個の閾値が存在する。まず、立ち上がり方向のエッジ箇所において、補正量加算後の信号をダイナミックレンジ内に収めるため、例えば図３８（Ｄ）中の破線の円内に示した画素を黒レベルにクリップする条件式が、（１）式である。また、その場合において、ＭＡＸ値が大きいときには、（２）式でクリップする。その際、係数としては、ａｍ（エッジ箇所の下側の突起（アンダーシュート領域の突起）に相当）に反映させる。また、例えば図３８（Ｅ）中の破線の円内に示した画素については、（３）式によって閾値Ｔｈ１でクリップすることにより、ＨＰＦ処理をＬＰＦ処理寄りに変更することを実現している。ここで、閾値Ｔｈ１は、ＭＩＮ値および移動量（タップ数−１）に応じて自動的に変化する部分と、調整部分（後述する補正値）Δとから構成されている。画像表示部２１０がＶＡ方式の液晶パネルの場合、シングルピクセル構造では、調整部分Δ＝０のときに最適な閾値Ｔｈ１となる一方、サブピクセル構造では、閾値Ｔｈ１が自動設定値よりも下がったほうが、効果的なＨＰＦ処理がなされることが実験により分かった。この調整部分Δは、ＭＩＮ値の関数に対してタップ数に応じたゲインを乗じた値として定めている。また、ＭＡＸ値が小さい場合には、初期係数では補正量が大きすぎるため、ＭＡＸ値に応じて自動調整されるようになっている。その際、係数としては、ａｐ（エッジ箇所の上側の突起（オーバーシュート領域の突起）に相当）に反映させている。

一方、立ち下がり方向のエッジ箇所については、黒レベルのみを閾値として調整するようになっている。図３８（Ｈ）中の下側の破線の円内に示した画素を黒レベルにクリップする条件式が、（４）式である。また、この画素が黒レベルにクリップされた場合には、（５）式によって、図３８（Ｈ）中の上側の破線の円内の画素が連動し、補正量を下げるようになっている。

図２７の説明に戻り、ＬＰＦゲイン制御部３３２Ｅは、信号特性情報のうちの撮像ボヤケ量（図２３中には図示せず）の値と空間高周波情報（高域信号量）の値とに基づいて、ＬＰＦ処理部３３２Ｃから出力されるＬＰＦ信号に対するゲイン制御を行うものである。

具体的には、まず、例えば図３９（Ａ）に示したように、ＬＰＦ処理の際のフィルタのゲイン（ＬＰＦゲイン）の大きさが、撮像ボヤケ量に応じて変化するようになっている。より具体的には、ここでは、撮像ボヤケ量の値が０以上かつｄ１１以下ではＬＰＦゲイン＝０となり、ｄ１１以上かつｄ１２以下ではＬＰＦゲインが線形に増加し、ｄ１２以上では再び一定値となっている。これは、撮像ボヤケを含む映像信号に対してＬＰＦ処理を行う場合、所望の動きベクトルと等しい傾き以上にエッジ箇所を傾ける処理となるため、撮像ボヤケ量の大きい映像信号では、ＬＰＦ処理の際のゲインを絞ったほうが望ましい場合があるからである。

また、例えば図３９（Ｂ）に示したように、ＬＰＦ処理の際のフィルタのゲイン（高域ゲイン）の大きさが、前述のサーチ範囲（補正範囲）における空間高周波数情報（高域信号量）に応じて変化するようになっている。より具体的には、ここでは、高域信号量の値が０以上かつＨ２１以下では高域ゲインが一定値となり、Ｈ２１以上かつＨ２２以下では線形に減少して０となり、Ｈ２２以上では高域ゲイン＝０の一定値となっている。これは、サーチ範囲内に複数のエッジ箇所が存在するような高域信号においては、エッジ方向検出部３３１Ｄにおけるエッジ方向の誤判断が生じやすいため、高域信号量の値が大きくなるのに応じてＬＰＦ処理の際のゲインを絞るようにしたものである。

次に、ＨＰＦゲイン調整部３３２Ｆは、信号特性情報のうちの空間高周波情報（高域信号量）の値と空間低周波情報（低域信号量）の値とに基づいて、ＨＰＦ処理部３３２Ｄから出力されるＨＰＦ信号に対するゲイン制御を行うものである。

具体的には、まず、例えば前述の図３９（Ｂ）に示したのと同様に、ＨＰＦ処理の際のフィルタのゲイン（高域ゲイン）の大きさが、サーチ範囲（補正範囲）における空間高周波数情報（高域信号量）に応じて変化するようになっている。これは、サーチ範囲内に複数のエッジ箇所が存在するような高域信号においては、エッジ方向検出部３３１Ｄにおけるエッジ方向の誤判断やＨＰＦ処理の破綻が生じやすいため、高域信号量の値が大きくなるのに応じてＨＰＦ処理の際のゲインを絞るようにしたものである。

また、例えば図４０（Ａ）に示したように、ＨＰＦ処理の際のフィルタのゲイン（低域ゲイン）の大きさが、サーチ範囲（補正範囲）における空間低周波数情報（低域信号量）に応じて変化するようになっている。ここでは、低域信号量の値が０以上かつＬ１１以下では低域ゲインが一定値となり、Ｌ１１以上かつＬ１２以下では低域ゲインが線形に増加し、Ｌ１２以上では再び一定値となっている。これは、例えばランプ信号のようななだらかな低域信号に対してＨＰＦ処理を行う場合、微小な傾きに対して大きな補正量が適用されることとなり、ＨＰＦ処理の破綻を生じることがあるためである。

さらに、例えば図４０（Ｂ）に示したように、ＨＰＦ処理の際のフィルタのゲイン（ＨＰＦ振幅ゲイン）の大きさが、ＭＩＮ値とＭＡＸ値との差分値（ＭＡＸ／ＭＩＮ差分値）に対応するエッジ振幅の大きさに応じて変化するようになっている。ここでは、ＭＡＸ／ＭＩＮ差分値が０以上かつＭ１１以下ではＨＰＦ振幅ゲインの値が０から線形に増加し、Ｍ１１以上かつＭ１２以下では一定値となり、Ｍ１２以上かつＭ１３以下では線形に減少し、Ｍ１３以上では再び一定値となっている。これは、エッジ振幅の大きなエッジ箇所において補正量が大きくなりすぎるのを回避するためである。

なお、例えば図４０（Ｃ）に示したように、前述の補正値Δの大きさは、ＭＩＮ値の大きさに応じて変化するようになっている。ここでは、ＭＩＮ値が０以上かつＭ２１以下では補正値Δが線形に増加し、Ｍ２１以上かつＭ２２以下では一定値となり、Ｍ２２以上かつＭ２３以下では線形に減少して負の値となり、Ｍ２３以上では再び一定値（負の値）となっている。

次に、加算部３３２Ｇは、ＬＰＦゲイン制御部３３２Ｅから出力されるゲイン制御後のＬＰＦ信号と、ＨＰＦゲイン制御部３３２Ｆから出力されるゲイン制御後のＨＰＦ信号とを加算することにより、補正信号を生成・出力するものである。

［補正量調整部の構成例］
次に、図４１を参照して、補正量調整部３３３について詳細に説明する。図４１は、補正量調整部３３３における調整処理の一例を表すものである。

この図４１では、ＬＰＦ処理およびＨＰＦ処理の際のフィルタのゲイン（移動量ゲイン）の大きさが、動きベクトルの絶対値（動きベクトル量、移動量）に応じて変化するようになっていることを示している。これは、タップ（奇数のみ）の切り替えによって境界に段差が生じることから、動きベクトルの絶対値に応じて異なるゲインとすることにより、タップの切り替わりタイミングで大きな補正量の変動が生じないようにしたものである。

［画像処理装置３００の動作］
次に、本実施の形態の画像処理装置３００の動作について説明する。なお、本実施の形態の画像表示システムにおける表示装置の動作については、第１の実施の形態の画像表示システム１０における表示装置２００の動作と同様であるので、説明を省略する。

この画像処理装置３００では、図１９に示したように、まず、外部からフレーム単位で入力される入力画像データが、高フレームレート変換部３１において高フレームレート変換処理が施されることにより、変換画像データ（映像信号）が生成される。次に、動画ボヤケ特性検出部３２では、この変換画像データから動画ボヤケ特性情報を検出し、動画ボヤケ改善処理部３３へ出力する。そして、動画ボヤケ改善処理部３３において、この動画ボヤケ特性情報を用いて変換画像データ（映像信号）に対する補正処理（動画ボヤケ改善処理）を行うことにより、表示画像データが生成され、表示装置２００へ出力される。

この際、動画ボヤケ改善処理部３３では、図２０に示したように、まず、信号特性検出部３３１において信号特性情報を検出し、補正処理部３３２において、この信号特性情報と動画ボヤケ特性情報とを用いることにより、映像信号に対して補正処理を施す。次に、このような補正処理後の補正信号に対し、補正量調整部３３３において補正量の調整処理を施す。そして、加算部３３４において、補正量調整部３３３から出力される調整処理後の補正信号と元の映像信号とが加算されることにより、表示画像データが生成される。

この際、補正処理部３３２では、例えば図２１（Ａ）〜（Ｃ）に示したようなＬＰＦ処理およびＨＰＦ処理が映像信号に対して施されることにより、補正信号が生成される。

具体的には、図２７に示したように、ＬＰＦ処理については、まず、第１エッジ置換処理部３３２Ａにおいて、映像信号に対して前述の第１エッジ置換処理を施し、第１置換信号を生成する。次に、ＬＰＦ処理部３３２Ｃにおいて、この第１置換信号に対してＬＰＦ処理を施し、ＬＰＦ信号を生成する。そして、ＬＰＦゲイン制御部３３２Ｅにおいて、このＬＰＦ信号に対して前述のＬＰＦゲイン制御を施す。一方、ＨＰＦ処理については、まず、第２エッジ置換処理部３３２Ｂにおいて、映像信号に対して前述の第２エッジ置換処理を施し、第２置換信号を生成する。次に、ＨＰＦ処理部３３２Ｄにおいて、この第２置換信号に対してＨＰＦ処理を施し、ＨＰＦ信号を生成する。そして、ＨＰＦゲイン制御部３３２Ｆにおいて、このＨＰＦ信号に対して前述のＨＰＦゲイン制御を施す。最後に、加算部３３２Ｇにおいて、ＬＰＦゲイン制御部３３２Ｅから出力されるゲイン制御後のＬＰＦ信号と、ＨＰＦゲイン制御部３３２Ｆから出力されるゲイン制御後のＨＰＦ信号とが加算されることにより、補正信号が生成される。

［ＬＰＦ処理の作用・効果］
ここで、図４２〜図４６を参照して、ＬＰＦ処理部３３２ＣによるＬＰＦ処理の作用および効果について、比較例と比較しつつ説明する。図４２〜図４５はそれぞれ、理想ホールド型の場合、通常液晶応答の場合、補間フレームを挿入してフレームレートを２倍にした場合、本実施の形態のＬＰＦ処理（移動量幅のＬＰＦ処理）を用いた場合、の動画ボヤケについて表したものである。これらの図において、（Ａ）は表示画面での応答性を、（Ｂ）はＭＰＲＣ（網膜残像カーブ）を、（Ｃ）は液晶応答（追従視軸）のタイミングを、それぞれ表している。

まず、図４２に示した理想ホールド型の場合、ステップ入力に対する応答時間が０であるため、液晶の出力レベルは、入力画像信号に対応する輝度（目標輝度）に瞬間的に到達し、液晶の応答は俊敏である。しかし、理想ホールド素子においても視線追随積分の効果は生じるため、入力されたステップ変化の画像の移動量に等しい画素分の動画ボヤケが生じる。

一方、図４３に示した通常液晶応答の場合、一般的には、１フレームの移動量のホールドボヤケに対して液晶応答によるボヤケが加わることにより、１フレームの移動量の２倍の範囲に動画ボヤケが広がることになる。すなわち、一般的な液晶表示装置では、ステップ入力に対する応答速度が低いため、目標輝度に到達するまでに１フレーム分くらいの応答時間がかかる。また、液晶表示装置ではホールド型の駆動を行うため、視線追随積分の効果が生じる。そのため、一般的な液晶表示装置においてステップ入力が行われた場合、液晶の応答速度に基づく応答時間に視線追随積分の効果が加わることから、例えば、入力されたステップ変化の画像の移動量の２倍に想到する画素分の動画ボヤケが生じることになる。

そこで、図４４に示したように補間フレームを挿入した場合には、補間フレームを挿入して１フレームの移動量を１／２にすることにより、視線追随積分の効果が低減し、ホールドボヤケ量が１／２となる。また、オーバードライブ処理が機能している階調の場合には、液晶応答時間も１／２となるため、その場合にはトータルの動画ボヤケ量は１／２となる。ただし、実際には暗い階調から白レベルに近い階調への遷移や、明るい階調から黒レベルに近い階調への遷移では、オーバードライブ量が不足するために液晶の応答が十分改善せず、動画ボヤケ量は１／２までは改善しない。

これに対し、図４５および図４６に示した本実施の形態のＬＰＦ処理を用いた場合、表示対象のフレームにおいて、映像信号の動きベクトルの大きさに応じて空間的なＬＰＦ処理（補正範囲内において、映像信号のエッジ箇所の傾きをより緩やかにするフィルタ処理）が映像信号に対して施されることにより、映像信号における画素値が画素ごとに補正される。

これにより、ホールド型の表示装置２００において、視線追随積分効果により引き起こされる、動いているオブジェクトについての動きボケ（前縁のボヤケ、後縁の尾引きまたは知覚位置遅れなどのホールドボヤケ）が、空間方向の補間による擬似的なフレームレート向上作用により抑制される。また、図４４に示したような従来の倍速駆動技術（時間方向の補間）などとは異なり、装置自体の変更は不要であるため、コストアップの問題も生じない。さらに、従来のオーバードライブ技術などとは異なり、中間階調以外の領域における階調変化についても、動きボケが十分に抑制される。

ただし、このＬＰＦ処理では、フレームレートを実際に上げた場合とは異なり、液晶応答の改善効果はないため、動画ボヤケのパターンとしては、液晶応答カーブが見えることになる（図４５（Ｂ），（Ｃ）および図４７（Ｂ），（Ｃ）参照）。そこで、このようなＬＰＦ処理に加え、以下説明するＨＰＦ処理をも用いて補正処理を行うようにするのが望ましいと言える。

［ＨＰＦ処理の作用・効果］
次に、図４７および図４８を参照して、ＨＰＦ処理部３３２ＤによるＨＰＦ処理の作用および効果について、比較例と比較しつつ説明する。図４７，図４８はそれぞれ、通常駆動の場合、本実施の形態のＨＰＦ処理（移動量幅のＨＰＦ処理）を用いた場合、の動画ボヤケについて表したものである。これらの図において、（Ａ）は表示画面での応答性を、（Ｂ）はＭＰＲＣ（網膜残像カーブ）を、（Ｃ）は液晶応答（追従視軸）のタイミングを、それぞれ表している。

まず、図４７に示した通常駆動の場合、一般的な液晶表示装置では、ステップ入力に対する応答速度が低いため、図４７（Ｃ）中の符号Ｐ０で示したように、目標輝度に到達するまでに１フレーム分くらいの応答時間がかかることになる。

これに対し、図４８に示した本実施の形態のＨＰＦ処理を用いた場合、表示対象のフレームにおいて、映像信号の動きベクトルの大きさに応じて空間的なＨＰＦ処理（補正範囲内において、映像信号のエッジ箇所の両端付近（上下付近）に突起領域を設けるフィルタ処理）が映像信号に対して施されることにより、映像信号における画素値が画素ごとに補正される。

これにより、２つの突起領域（オーバーシュート領域およびアンダーシュート領域）の組み合わせ（例えば、図４８（Ｃ）中の符号Ｐ１Ｌ，Ｐ１Ｈの組み合わせや、符号Ｐ２Ｌ，Ｐ２Ｈの組み合わせ）によって、液晶応答が改善される。したがって、ホールド型の表示装置２００において、中間調同士の輝度変化や立ち下がり応答の遅延などにより引き起こされる、縁のボヤケや縁の尾引きなどの動きボケが抑制される。また、図４４に示したような従来の倍速駆動技術（時間方向の補間）などとは異なり、装置自体の変更は不要であるため、コストアップの問題も生じない。さらに、従来のオーバードライブ技術などとは異なり、中間階調以外の領域における階調変化についても、動きボケが十分に抑制される。

なお、図４９は、本実施の形態のＬＰＦ処理およびＨＰＦ処理を用いた場合の液晶応答特性の一例をタイミング波形図で表したものである。図４９（Ａ），（Ｂ）は、０階調（黒レベル）から２５５階調（白レベル）までの立ち上がり時の液晶応答に対応するものであり、図４９（Ａ）は、従来のオーバードライブ（ＯＤ）処理のみを用いた場合を、図４９（Ｂ）は、ＯＤ処理に加えて本実施の形態のＬＰＦ処理を用いた場合を、表している。また、図４９（Ｃ），（Ｄ）は、０階調（黒レベル）から９６階調（中間レベル）までの立ち上がり時の液晶応答に対応するものであり、図４９（Ｃ）は、ＯＤ処理のみを用いた場合を、図４９（Ｄ）は、ＯＤ処理に加えて本実施の形態のＬＰＦ処理およびＨＰＦ処理を用いた場合を、表している。

図４９（Ａ），（Ｂ）により、０階調（黒レベル）から２５５階調（白レベル）までの立ち上がり時において、本実施の形態のＬＰＦ処理を行うことにより、ＰＢＥＴ（Perceived Blur Edge Time）の値が９．８ｍｓから７．８ｍｓにまで短縮し、液晶応答特性が改善していることが分かる。また、図４９（Ｃ），（Ｄ）により、０階調（黒レベル）から９６階調（中間レベル）までの立ち上がり時において、本実施の形態のＬＰＦ処理およびＨＰＦ処理を行うことにより、ＰＢＥＴの値が９．３ｍｓから６ｍｓにまで短縮し、液晶応答特性がさらに改善していることが分かる。

以上のように本実施の形態では、表示対象のフレームにおいて、映像信号の動きベクトルの大きさに応じて空間的なＬＰＦ処理を映像信号に対して施すことにより、映像信号における画素値を画素ごとに補正するようにしたので、空間方向の補間による擬似的なフレームレート向上作用によって視線追随積分効果を低減させ、動きボケを抑制することができる。また、従来の技術とは異なり、コストアップの問題を回避することができると共に、中間階調以外の領域における階調変化についても、動きボケを十分に抑制することができる。よって、コストアップを抑制しつつ、ホールド型の表示装置２００における動きボケを抑制し、動画像の画質を向上させることが可能となる。

また、表示対象のフレームにおいて、映像信号の動きベクトルの大きさに応じて、上記ＬＰＦ処理に加え、空間的なＨＰＦ処理をも映像信号に対して施すことにより、映像信号における画素値を画素ごとに補正するようにしたので、オーバーシュート領域とアンダーシュート領域との組み合わせによって液晶応答を改善させ、動きボケを抑制することができる。したがって、ホールド型の表示装置２００における動きボケをより効果的に抑制することができ、動画像の画質をさらに向上させることが可能となる。

また、上記のように、表示装置２００のコストアップが生じないため、相対的に低コストで実現することができる。

また、上記のように、中間調以外の領域の階調変化についても動きボケの改善に効果があるため、特に、応答速度が遅いディスプレイほど階調変化による遅延時間の差が大きいことから、改善効果が大きくなる。

また、画素ごとに画素値の補正処理を行うことから、高精細ディスプレイ等のように高画素であり、ＶＡ系液晶のように階調変化による応答時間の差が大きく、動くオブジェクトの移動速度（動きベクトル量）が大きいほど、補正処理による動きボケ抑制効果が大きくなる。

＜３．変形例＞
以上、第１および第２の実施の形態を挙げて本発明を説明したが、本発明はこれらの実施の形態に限定されるものではなく、種々の変形が可能である。

例えば、図５０に示した動画ボヤケ改善処理部３３−１のように、上記第２の実施の形態における動画ボヤケ改善処理部３３において、補正処理部３３２および補正量調整部３３３の前後に前処理部３３５や後処理部３３６を設けるようにしてもよい。前処理部３３５は、補正処理前の映像信号に対して高域除去などの処理を行うものであり、後処理部３３６は、補正量調整後の信号に対して、高域除去などの処理を行うものである。このように構成した場合、補正処理による副作用を低減することが可能になる。

また、上記実施の形態では、説明の簡略上、移動方向（動きベクトルの方向）は横方向であるものとし、注目画素に対してフィルタや補正等の上述した各種処理を施す場合に利用する画素もまた、注目画素の横方向に隣接する画素を利用する場合について説明したが、このような場合には限られない。すなわち、移動方向は、２次元平面上のいずれの方向ともなり得ると共に、動画ボヤケ改善処理部は、２次元平面上のいずれの方向が移動方向になった場合でも（例えば、垂直方向になった場合でも）、上述した各種処理を全く同様に実行することが可能である。ただし、移動方向が垂直方向の場合の処理（または、移動方向が斜め方向の場合の処理であって、垂直方向の処理と水平方向の処理との組み合わせ処理）を行うためには、例えば、上記第２の実施の形態で説明した動画ボヤケ改善処理部３３の代わりに、図５１に示した動画ボヤケ改善処理部３３−２を用いる必要がある。この動画ボヤケ改善処理部３３−２では、垂直方向での処理を可能とするため、補正処理部３３２および信号特性検出部３３１の前段にラインメモリ３３７が設けられている。

また、上記第２の実施の形態で説明した補正処理部３３２では、補正処理部３３２において、ＬＰＦ処理およびＨＰＦ処理の両方のフィルタ処理を映像信号に対して施す場合について説明したが、このような場合には限られない。すなわち、例えば図５２（Ａ）に示した補正処理部３３２−１のように、ＬＰＦ処理を用いた補正処理のみを映像信号に対して施すようにしてもよく、また、例えば図５２（Ｂ）に示した補正処理部３３２−２のように、ＨＰＦ処理を用いた補正処理のみを映像信号に対して施すようにしてもよい。

また、上記第２の実施の形態で説明した画像処理装置３００の代わりに、図５３に示したような画像処理装置３００−１，３００−２を用いるようにしてもよい。具体的には、図５３（Ａ）に示した画像処理装置３００−１では、動画ボヤケ改善処理部３３において動画ボヤケを改善した後、高フレームレート変換部３１においてフレームレートの変換を行っている。このように構成した場合、相対的に低いフレーム周波数において、各種処理を行うことが可能になる。また、図５３（Ｂ）に示した画像処理装置３００−２では、高フレームレート変換部３１と動画ボヤケ特性検出部３２とを並列に配置している。このように構成した場合、全体の遅延量を減らすことが可能になる。

さらに、例えば図５４に示した画像処理装置３００−３のように、高フレームレート変換部３１を省くと共に、通常のフレームレート表示を行う表示装置を用いるようにしてもよい。すなわち、動画ボヤケ特性検出部３２と動画ボヤケ改善処理部３３との組だけで画像処理装置を構成してもよく、この場合、さらにコストを削減しつつ、動画ボヤケを抑制することが可能となる。

加えて、例えば図５５（Ａ）に示した画像処理装置３００−４や図５５（Ｂ）に示した画像処理装置３００−５のように、画像処理装置３００において、高フレームレート変換部３１の代わりに（またはこれに加えて）、他の機能ブロックを設けるようにしてもよい。具体的には、図５５（Ａ）に示した画像処理装置３００−４では、高フレームレート変換部３１の代わりにＭＰＥＧ（Moving Picture Experts Group）デコード部３４を設けると共に、このＭＰＥＧデコード部３４から出力されるパラメータ情報を動画ボヤケ特性検出部３２へ供給している。また、図５５（Ｂ）に示した画像処理装置３００−５では、高フレームレート変換部３１の代わりにＩＰ（Interlace／Progressive）変換部３５を設けると共に、このＩＰ変換部３５から出力されるパラメータ情報を動画ボヤケ特性検出部３２へ供給している。これらのように構成した場合、ＭＰＥＧデコード部３４やＩＰ変換部３５から動きベクトル等のパラメータ情報を流用することにより、全体の回路規模を削減することが可能となる。

加えてまた、例えば図５６（Ａ）に示した画像処理装置３００−６および図５６（Ｂ）に示した画像処理装置３００−７のように、画像処理装置３００において、高フレームレート変換部３１の代わりに（またはこれに加えて）、映像信号に含まれる撮像ボヤケを抑制する撮像ボヤケ抑制処理部３６を設けるようにしてもよい。具体的には、図５６（Ａ）に示した画像処理装置３００−６では、撮像ボヤケ抑制処理部３６と動画ボヤケ改善処理部３３とを直列に配置している。このように構成した場合、撮像ボヤケ抑制処理部３６において撮像ボヤケが抑制された映像信号を入力として動画ボヤケ改善処理を行うため、動きベクトルの大きさに対応させるフィルタのタップ数を減らすことが可能となる。また、図５６（Ｂ）に示した画像処理装置３００−７では、撮像ボヤケ抑制処理部３６と動画ボヤケ改善処理部３３とを並列に配置している。このように構成した場合、撮像ボヤケ抑制処理部３６と動画ボヤケ改善処理部３３とにおいて同時に処理が行われるため、遅延機能を持つ遅延回路などを省くことができ、全体の回路規模を削減することが可能となる。

さらにまた、上記実施の形態では、映像信号の動きベクトル等を検出する動画ボヤケ特性検出部３２を画像処理装置内に設けるようにした場合について説明したが、そのような動きベクトル等を、画像処理装置の外部において検出して供給を受けるようにしてもよい。

また、本発明は液晶の応答特性を利用してホールド効果低減を図っているため、フィルタ設定とその効果とは、パネルに依存する。一例として、以下、サブピクセル構造の場合について説明する。シングルピクセル構造のパネル用と同じ補正パターンをサブピクセル構造のパネルに入力した場合、補正パターンに対してサブピクセル用のγ変換が表示制御部２４０（タイミングコントローラ）内で行われる。そのため、各サブピクセル用の補正パターンは、最適値からずれることになる。ここで、シミュレーション結果により、サブピクセルを構成するＡ画素およびＢ画素のうち、Ｂ画素では効果が残っていることが分かったため、Ａ画素を改善する補正パターンが望ましいと考えられる。そのため、例えば図５７（Ａ），（Ｂ）に示したように、前述の（１）式から（５）式の計算式において、閾値Ｔｈ１を下げる方向に設定する必要がある。すなわち、表示装置２００内の各画素がサブピクセル構造を用いて構成されている場合には、補正対象のエッジ箇所が立ち上がり方向のエッジ方向であるとき、ＨＰＦ処理のゲインがＬＰＦ処理寄りの大きさに下がるように調整するのが望ましい。この方向の設定にすることにより、中間調からの立ち上がりエッジにも大きな改善効果が得られる。具体的には、例えばテロップの文字スクロールにおいて、上記のような調整を行わない場合には、動画ボヤケの幅だけ縦線が広がる一方、調整を行った場合には、そのような縦線の広がりを抑えることができる。このようにして、サブピクセル構造の液晶表示装置においても、動画像の品質を向上させることが可能となる。

また、上記実施の形態で実行される高フレームレート変換処理において、入力映像信号の第１のフレームレート（フレーム周波数）と、出力映像信号の第２のフレームレート（フレーム周波数）との組み合わせは、特に限定されず、任意の組み合わせでよい。具体的には例えば、入力映像信号の第１のフレームレートとして６０（または３０）〔Ｈｚ〕を採用し、かつ、出力映像信号の第２のフレームレートとして１２０［Ｈｚ］を採用することができる。例えば、入力映像信号の第１のフレームレートとして６０（または３０）〔Ｈｚ〕を採用し、かつ、出力映像信号の第２のフレームレートとして２４０［Ｈｚ］を採用することができる。例えば、入力映像信号の第１のフレームレートとして、ＰＡＬ（Phase Alternation by Line）方式に対応する５０〔Ｈｚ〕を採用し、かつ、出力映像信号の第２のフレームレートとして１００〔Ｈｚ〕や２００〔Ｈｚ〕を採用することができる。例えば、入力映像信号の第１のフレームレートとして、テレシネに対応する４８〔Ｈｚ〕を採用し、かつ、出力映像信号の第２のフレームレートとしてそれ以上の所定の周波数を採用することができる。なお、このような既存のテレビジョン方式等に由来する入力映像信号に対して、上記実施の形態における高フレームレート変換処理を施すことにより、既存のコンテンツを高品位に表示することが可能になる。

さらに、上記実施の形態では、説明の簡略上、映像信号はＹＵＶフォーマットのＹ（輝度情報）であるものとすると共に、注目画素に対してフィルタや補正等の上述した各種処理を施す場合に利用する信号もまた、輝度信号である場合について説明したが、他の異なるフォーマットの映像信号を用いるようにしてもよい。例えば、ＲＧＢフォーマットや、ＹＵＶフォーマットのＵＶ（色差情報）を用いるようにしてもよい。なお、ＵＶを用いるようにした場合、フィルタ出力のゲイン調整を行うことにより、色差の変化に対しても、適切な画質改善を行うことができる。

一般的なＶＡ系の液晶にパルス信号を入力した場合における液晶の応答波形の一例を示す説明図である。 視線追随積分効果とホールド型表示装置における動きボケとの関係の一例について説明するための説明図である。 視線追随積分効果とホールド型表示装置における動きボケとの関係の一例について説明するための説明図である。 視線追随積分効果とホールド型表示装置における動きボケとの関係の一例について説明するための説明図である。 視線追随積分効果とホールド型表示装置における動きボケとの関係の一例について説明するための説明図である。 本発明の第１の実施の形態に係る画像処理装置における画像処理方法の一例を概略的に示す説明図である。 ホールド型表示装置にステップ波形を入力した場合における動作波形の一例を示す説明図である。 第１の実施の形態の画像処理装置に入力される入力信号の一例を示す説明図である。 第１の実施の形態の画像処理装置から出力された出力信号に基づいて画像を表示するホールド型表示装置を見たユーザの網膜に蓄積された光量の空間方向の変化を示す説明図である。 第１の実施の形態の画像処理装置の機能構成を示すブロック図である。 第１の実施の形態に係る表示装置の機能構成を示すブロック図である。 第１の実施の形態に係る補正処理部の機能構成を示すブロック図である。 第１の実施の形態に係る高周波検出部の機能を説明するための説明図である。 第１の実施の形態に係るフィルタ設定部によるフィルタ特性の設定例を示す説明図である。 第１の実施の形態に係るフィルタ設定部によるフィルタ特性の設定例を示す説明図である。 第１の実施の形態に係る画像処理装置のハードウェア構成を示すブロック図である。 第１の実施の形態に係る画像処理方法の処理の流れを示すフローチャートである。 第１の実施の形態に係る補正処理の具体例を示すフローチャートである。 本発明の第２の実施の形態に係る画像処理装置の構成を表すブロック図である。 図１９に示した動画ボヤケ改善処理部の構成例を表すブロック図である。 図２０に示した補正処理部による補正処理の概要を説明するための波形図である。 移動量とＬＰＦおよびＨＰＦにおけるｔａｐ数との関係の一例を表す図である。 図２０に示した信号特性検出部の構成例を表すブロック図である。 サーチ範囲（処理範囲）におけるＭＡＸ値およびＭＩＮ値ならびにそれらの重みについて説明するための波形図である。 高域信号値と重みとの関係の一例を表す特性図である。 ＭＡＸ位置およびＭＩＮ位置と映像信号の立ち上がりおよび立ち下がりとの関係について説明するための波形図である。 図２０に示した補正処理部の構成例を表すブロック図である。 図２７に示したエッジ置換処理部による処理の概要を説明するための波形図である。 図２７に示した第１エッジ置換処理部による処理の詳細を説明するための波形図である。 図２７に示した第１エッジ置換処理部による処理の詳細を説明するための他の波形図である。 図２７に示した第２エッジ置換処理部による処理の詳細を説明するための波形図である。 図２７に示した第２エッジ置換処理部による処理の詳細を説明するための他の波形図である。 図２７に示したＬＰＦ処理部の構成例を表すブロック図である。 図２７に示したＨＰＦ処理部の構成例を表すブロック図である。 図２７に示したＬＰＦ処理部によるフィルタ処理の一例を表す波形図である。 図２７に示したＬＰＦ処理部によるフィルタ処理の他の例を表す波形図である。 図２７に示したＬＰＦ処理部およびＨＰＦ処理部によるフィルタ処理の一例を表す波形図である。 図２７に示したＨＰＦ処理部におけるフィルタ処理の一例を表す波形図である。 （Ａ）撮像ボヤケ量とＬＰＦゲインとの関係の一例を表す特性図、（Ｂ）高域信号値と高域ゲインとの関係の一例を表す特性図である。 （Ａ）低域信号値と低域ゲインとの関係の一例を表す特性図、（Ｂ）ＭＡＸ／ＭＩＮ差分値とＨＰＦ振幅ゲインとの関係の一例を表す特性図、（Ｃ）ＭＩＮ値と補正地Δとの関係の一例を表す特性図である。 動きベクトル量と移動量ゲインとの関係の一例を表す特性図である。 理想ホールド型の場合の動画ボヤケについて説明するための図である。 通常液晶応答の場合の動画ボヤケについて説明するための図である。 補間フレームを挿入した場合の動画ボヤケについて説明するための図である。 第２の実施の形態のＬＰＦ処理を用いた場合の動画ボヤケについて説明するための図である。 第２の実施の形態のＬＰＦ処理を用いた場合の液晶の立ち上がり特性の一例を表す波形図である。 通常駆動の場合の動画ボヤケについて説明するための図である。 第２の実施の形態のＨＰＦ処理を用いた場合の動画ボヤケについて説明するための図である。 第２の実施の形態のＬＰＦ処理およびＨＰＦ処理を用いた場合の液晶応答特性の一例を表す波形図である。 第２の実施の形態の変形例に係る動画ボヤケ改善処理部の構成を表すブロック図である。 第２の実施の形態の他の変形例に係る動画ボヤケ改善処理部の構成を表すブロック図である。 第２の実施の形態の他の変形例に係る補正処理部の構成を表すブロック図である。 第２の実施の形態の他の変形例に係る画像処理装置の構成を表すブロック図である。 第２の実施の形態の他の変形例に係る画像処理装置の構成を表すブロック図である。 第２の実施の形態の他の変形例に係る画像処理装置の構成を表すブロック図である。 第２の実施の形態の他の変形例に係る画像処理装置の構成を表すブロック図である。 シングルピクセル構造およびサブピクセル構造におけるフィルタ処理の適用例について説明するための波形図である。

符号の説明

１０…画像表示システム、１００，３００，３００−１〜３００−７…画像表示装置、１１０…入力画像データ記憶部、１２０…動きベクトル検出部、１３０…応答時間情報記憶部、１４０…補正処理部、１４１…補正範囲設定部、１４２…最大最小値検出部、１４３…エッジ検出部、１４４…高周波検出部、１４５…外側置換部、１４６…フィルタ設定部、１４７…フィルタ処理部、１４８…ゲイン調整部、１４９…選択部、１５０…合成部、１６０…出力部、２００…表示装置、２１０…画像表示部、２４０…表示制御部、３１…高フレームレート変換部、３２…動画ボヤケ特性検出部、３３，３３−１，３３−２…動画ボヤケ改善処理部、３３１…信号特性検出部、３３１Ａ…ＭＡＸ／ＭＩＮ検出部、３３１Ｂ…空間高周波数検出部、３３１Ｃ…空間低周波数検出部、３３１Ｄ…エッジ方向検出部、３３２，３３２−１，３３２−２…補正処理部、３３２Ａ…第１エッジ置換処理部、３３２Ｂ…第２エッジ置換処理部、３３２Ｃ…ＬＰＦ処理部、３３２Ｃ１…固定フィルタ係数保持部、３３２Ｃ２…移動平均フィルタ部、３３２Ｄ…ＨＰＦ処理部、３３２Ｄ１…可変フィルタ係数算出部、３３２Ｄ２…ハイパスフィルタ部、３３２Ｅ…ＬＰＦゲイン制御部、３３２Ｆ…ＨＰＦゲイン制御部、３３２Ｇ…加算部、３３３…補正量調整部、３３４…加算部、３３５…前処理部、３３６…後処理部、３３７…ラインメモリ、３４…ＭＰＥＧデコード部、３５…ＩＰ変換部、３６…撮像ボヤケ抑制処理部、３７…加算部。

Claims (20)

1. 外部から入力される画像データに対して所定の処理を施してホールド型の表示装置に出力する画像処理装置であって、
   前記表示装置における表示対象のフレームにおいて、前記画像データの動きベクトルの大きさに応じて、その画像データの変化エッジ箇所の傾きをより緩やかにする空間的なＬＰＦ（ロー・パス・フィルタ）処理を前記画像データに対して施すことにより、前記画像データにおける画素値を画素ごとに補正する補正処理を行う補正処理部と、
   前記動きベクトルの大きさに基づいて、前記補正処理の際に用いる所定の信号特性情報を前記画像データから検出する信号特性検出部と
   を備え、
   前記信号特性検出部は、
   前記動きベクトルの大きさに基づいて前記画像データにおける前記変化エッジ箇所を検出し、前記信号特性情報として、前記画像データの所定の補正エリア内における最小画素値およびその画素位置である最小画素位置と最大画素値およびその画素位置である最大画素位置とを検出すると共に、
   前記最小画素値および前記最小画素位置と前記最大画素値および前記最大画素位置とに基づいて、前記補正エリア内の前記変化エッジ箇所における変化方向を求め、
   前記補正処理部は、前記信号特性検出部により求められた前記変化方向に基づいて、前記補正処理を行うか否かを決定する
   画像処理装置。
2. 前記補正処理部は、
   前記変化方向が低階調から高階調への立ち上がり方向である場合には、前記補正処理を行うことを決定し、
   前記変化方向が高階調から低階調への立ち下がり方向である場合には、前記補正処理を行わないことを決定する
   請求項１に記載の画像処理装置。
3. 前記動きベクトルの大きさに基づいて、前記補正エリアが設定される
   請求項１または請求項２に記載の画像処理装置。
4. 前記補正処理部は、前記補正エリア内における前記最小画素位置と前記最大画素位置との間の画素領域の外側の領域における前記画像データの画素値を、前記信号特性検出部により検出された前記最小画素値または前記最大画素値に置換するＬＰＦ用エッジ置換部を有し、
   前記補正処理部は、前記ＬＰＦ用エッジ置換部による置換処理後の画像データに対して、前記ＬＰＦ処理を用いた補正処理を行う
   請求項１ないし請求項３のいずれか１項に記載の画像処理装置。
5. 前記信号特性検出部は、
   前記最小画素値および前記最小画素位置を検出する際には、前記補正エリア内における所定の注目画素からの距離に応じて各画素値に対して正の重み付けをした後に検出処理を行うと共に、
   前記最大画素値および前記最大画素位置を検出する際には、前記注目画素からの距離に応じて各画素値に対して負の重み付けをした後に検出処理を行う
   請求項１ないし請求項４のいずれか１項に記載の画像処理装置。
6. 前記正および負の重み付けの際の重みのうちの少なくとも一方が、前記補正エリアにおける空間周波数が高くなるのに応じて大きくなるように調整される
   請求項５に記載の画像処理装置。
7. 前記ＬＰＦ処理の際のフィルタのタップ数が、前記動きベクトルの大きさに応じて変化するように構成されている
   請求項１ないし請求項６のいずれか１項に記載の画像処理装置。
8. 前記ＬＰＦ処理の際のフィルタのタップ数が、前記動きベクトルの値によらず、常に奇数となるように設定される
   請求項７に記載の画像処理装置。
9. 前記ＬＰＦ処理の際のフィルタのゲインの大きさが、前記補正エリアにおける空間周波数に応じて変化するように構成されている
   請求項１ないし請求項８のいずれか１項に記載の画像処理装置。
10. 前記ＬＰＦ処理の際のフィルタのゲインの大きさが、前記動きベクトルの大きさに応じて変化するように構成されている
    請求項１ないし請求項９のいずれか１項に記載の画像処理装置。
11. 前記補正処理部は、前記動きベクトルに加え、前記表示装置における応答時間と階調変化量とを対応づけてなる応答時間情報をも用いて、前記補正処理を行う
    請求項１ないし請求項１０のいずれか１項に記載の画像処理装置。
12. 前記画像データの動きベクトルを検出する動きベクトル検出部を備えた
    請求項１ないし請求項１１のいずれか１項に記載の画像処理装置。
13. 前記補正処理部は、
    前記表示対象のフレームにおいて、前記動きベクトルの大きさに応じて前記画像データに対し、前記ＬＰＦ処理に加え、前記画像データの前記変化エッジ箇所の両端付近にオーバーシュート領域およびアンダーシュート領域を設ける空間的なＨＰＦ（ハイ・パス・フィルタ）処理をも施すことにより、前記補正処理を行う
    請求項１ないし請求項１２のいずれか１項に記載の画像処理装置。
14. 前記補正処理部は、
    前記補正エリア内における前記最小画素位置と前記最大画素位置との間の画素領域の外側の領域における前記画像データの画素値を、前記信号特性検出部により検出された前記最小画素値または前記最大画素値に置換すると共に、前記最小画素位置と前記最大画素位置との間の画素領域内の画像データの画素値を、前記最小画素値、前記最大画素値、および前記最小画素位置と前記最大画素位置との中間付近の画素の画素値の３つを含む画素値に置換するＨＰＦ用エッジ置換部を有し、
    前記補正処理部は、前記ＨＰＦ用エッジ置換部による置換処理後の画像データに対して、前記ＨＰＦ処理を用いた補正処理を行う
    請求項１３に記載の画像処理装置。
15. 前記表示装置内の各画素が、サブピクセル構造を用いて構成されており、
    前記補正処理部は、
    前記補正エリア内の前記変化エッジ箇所が、低階調から高階調への立ち上がり方向の変化方向である場合には、
    前記ＨＰＦ処理の際のフィルタのゲインが、前記ＬＰＦ処理寄りの大きさに下がるように調整する
    請求項１３または請求項１４に記載の画像処理装置。
16. 前記補正処理部は、前記動きベクトルに加え、前記画像データにおける所定の信号特性情報をも用いて、前記ＨＰＦ処理を行う
    請求項１３に記載の画像処理装置。
17. 前記信号特性検出部により求められた前記変化方向に応じて、前記ＨＰＦ処理の際のフィルタ係数が異なる値となるように調整される
    請求項１３ないし請求項１６のいずれか１項に記載の画像処理装置。
18. 前記変化方向が低階調から高階調への立ち上がり方向である場合には、前記オーバーシュート領域の突起よりも前記アンダーシュート領域の突起のほうがより大きくなるように、前記ＨＰＦ処理の際のフィルタ係数が調整される一方、
    前記変化方向が高階調から低階調への立ち下がり方向である場合には、前記オーバーシュート領域の突起と前記アンダーシュート領域の突起とが互いに同じ大きさとなるように、前記ＨＰＦ処理の際のフィルタ係数が調整される
    請求項１７に記載の画像処理装置。
19. 外部から入力される画像データに対して所定の処理を施す画像処理装置と、
    前記画像処理装置から出力される前記処理後の画像データに基づいて画像表示を行うホールド型の表示装置と
    を備え、
    前記画像処理装置は、
    前記表示装置における表示対象のフレームにおいて、前記画像データの動きベクトルの大きさに応じて、その画像データの変化エッジ箇所の傾きをより緩やかにする空間的なＬＰＦ（ロー・パス・フィルタ）処理を前記画像データに対して施すことにより、前記画像データにおける画素値を画素ごとに補正する補正処理を行う補正処理部と、
    前記動きベクトルの大きさに基づいて、前記補正処理の際に用いる所定の信号特性情報を前記画像データから検出する信号特性検出部と
    を備え、
    前記信号特性検出部は、
    前記動きベクトルの大きさに基づいて前記画像データにおける前記変化エッジ箇所を検出し、前記信号特性情報として、前記画像データの所定の補正エリア内における最小画素値およびその画素位置である最小画素位置と最大画素値およびその画素位置である最大画素位置とを検出すると共に、
    前記最小画素値および前記最小画素位置と前記最大画素値および前記最大画素位置とに基づいて、前記補正エリア内の前記変化エッジ箇所における変化方向を求め、
    前記補正処理部は、前記信号特性検出部により求められた前記変化方向に基づいて、前記補正処理を行うか否かを決定する
    画像表示システム。
20. 前記補正処理部は、
    前記表示対象のフレームにおいて、前記動きベクトルの大きさに応じて前記画像データに対し、前記ＬＰＦ処理に加え、前記画像データの前記変化エッジ箇所の両端付近にオーバーシュート領域およびアンダーシュート領域を設ける空間的なＨＰＦ（ハイ・パス・フィルタ）処理をも施すことにより、前記補正処理を行う
    請求項１９に記載の画像表示システム。

Images