WO2006049213A1

WO2006049213A1 - 映像信号処理方法、映像信号処理装置、及び、表示装置

Info

Publication number: WO2006049213A1
Application number: PCT/JP2005/020219
Authority: WO
Inventors: Atsushi Mino; Satoru Uehara; Takumi Yoshimoto; Teruhiko Kamibayashi
Original assignee: Fujitsu Ten Limited
Priority date: 2004-11-02
Filing date: 2005-11-02
Publication date: 2006-05-11
Also published as: JP2006154756A; EP1808842A1; EP1808842A4; US20070296865A1; KR100854646B1; KR20070072528A

Abstract

　映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部（７）と、映像ソース信号を構成する複数の元画素データに基づいて複数の新たな画素データを変換生成する変換処理手段（２００）と、前記変換処理手段で変換処理された複数の新たな画素データから映像信号を生成するための所定数の画素データを抽出する抽出処理手段（２００）とを備えてなり、前記変換処理手段（２００）は、前記抽出処理手段（２００）による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づいて新たな画素データを変換生成する。

Description

明細書

映像信号処理方法、映像信号処理装置、及び、表示装置

技術分野

[0001] 本発明は、単一の画面で複数の利用者各々に対して独立した異なる情報を実質的に同時に提供することのできる表示装置に関し、詳述すると、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づ、て各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づいて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理方法、映像信号処理装置、及び、表示装置に関する。

背景技術

[0002] これまでの主なディスプレイの開発は、観察者がディスプレイをどの方向から観察しても同じ良好な画質で見ることができるように、或いは、複数の観察者が同時に同じ情報を得ることができるように最適化されてきた。しかし、個々の観察者が同じディスプレイ力もの異なる情報を見ることができることが望ましい用途が数多くある。例えば、自動車の中で、ドライバ一はナビゲーシヨンデータを見ることを望み、隣席の同乗者は映画を見ることを望むということがあり得る。この例において 2つのディスプレイが用いられる場合には、余分な場所をとり、コストを増大させることになる。

[0003] そこで近年、特開平 6-186526号公報及び特開 2000-137443号公報が開示するように、一台の液晶ディスプレイで二画面を同時に表示することができ、例えば、運転席と助手席とから夫々異なる画面を見ることができる表示装置が考案されて、る。また、特開平 11-331876号公報及び特開平 09-46622号公報には、二種類の映像を、同時に同一画面に表示することができる二画面表示装置が開示されている。

[0004] これらは、ディスプレイ画面は一つであるにもかかわらず、異なる方向から観察することにより、二人以上の異なる観察者が、少なくとも二つの異なる映像を同時に見ることが可能な表示装置である。

[0005] 上述の表示装置の第一または第二の何れかの画素群を駆動するに際しては、当該画素群に対応させるベぐソース信号を構成する 1フレームの元画素データから所定方向に圧縮または抽出処理した映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づいて当該画素群を駆動する必要がある。例えば、車載用の TFT液晶表示装置では画素が 800 X 480ドットに構成されたものが主流であるが、このような表示装置の構成をベースとするマルチビュー表示装置では、少なくとも 800 X 480ドットに対応する元画素データ力ら 400 X 480ドットに水平方向に圧縮または抽出処理して映像画素データを生成する必要がある。

発明の開示

発明が解決しょうとする課題

[0006] しかし、ソース信号を構成する元画素データを圧縮率に基づ!/、て単に所定方向に間弓 Iき処理して映像画素データを生成するような圧縮処理方法では、間弓 Iき処理された元画像の情報が欠落する結果、画像情報の高域成分が欠落するのみならず画素データの連続性も失われるため、そのような映像信号に基づいて表示された映像はかなり見辛いものになるという虞があった。

[0007] 本発明の目的は、上述の問題点に鑑み、ソース信号力映像信号を生成する際に、高域成分の欠落を防ぐとともに、画素データの連続性を確保できる映像信号処理方法、映像信号処理装置、及び、表示処理装置を提供する点にある。

課題を解決するための手段

[0008] 上述の目的を達成するため、本発明による映像信号処理方法の第一の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1 フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づいて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理方法であって、前記所定方向に配列された任意の元画素データをその隣接元画素データとの間で所定のフィルタ演算を施して平滑ィヒ処理して新たな画素データを生成する平滑ィ匕処理工程と、平滑化処理された画素データから圧縮率に基づ!/、た数の画素データを前記映像画素データとして抽出する抽出処理工程とからなる点にある。

[0009] 上述の構成によれば、平滑化処理工程によって元画素データとその隣接元画素データとの間で平滑ィヒ処理が行なわれるので、処理後の各画素データは隣接画素データの成分が加味された値として生成される。そのように生成された新たな画素から抽出処理工程において抽出された画素データには、それに対応する元画素に隣接する画素データが加味されているため、或る程度の高域成分が確保され、大きく画質が劣化するようなことが無ぐ或る程度の良好な視認性を確保することができるのである。ここに、画素データの演算は RGBの色成分データ、または YUVの輝度、色差データに基づいて行なうことができる。

[0010] 同第二の特徴構成は、上述の第一特徴構成に加えて、前記抽出処理工程において、前記平滑ィ匕処理工程で生成された新たな画素データから、それに対応する元画素データの隣接元画素データに対する輝度の差分に基づいて前記映像画素データが抽出される点にあり、このように構成することにより、例えば、輝度の差分が大なる画素群を抽出することにより高域成分を強く含む画素が選択され、鮮鋭度が保たれ、良好な視認性を確保することができるようになる。

[0011] 同第三の特徴構成は、上述の第一または第二特徴構成に加えて、前記平滑化処理工程において、元画素データの隣接元画素データに対する輝度の差分と色差信号の位相差の何れかまたは双方に基づ、てフィルタ演算を施す点にあり、このように構成することにより、画像のエッジ部分を強調し、または鈍らすことができ、元画像の特性に応じて圧縮処理後の画像の調子を整えることができるのである。例えば、輝度の差分が大の画素は濃淡エッジと識別でき、色差信号の位相差が大の画素は色の変化するエッジと認識でき、それらを強調するようにフィルタ係数を決定すると、抽出後の画像の鮮鋭度を高めることが可能になる。輝度と色の何れを重視するかにより、輝度の差分と色差信号の位相差の何れかまたは双方に基づいて決定することができる。

[0012] 同第四の特徴構成は、上述の第一力も第三の何れかの特徴構成に加えて、前記平滑ィ匕処理工程にぉ、て、平滑処理の対象となる隣接元画素データの画素数が前記圧縮率に基づいて決定される点にある。つまり、圧縮処理によって欠落する画素成分を確保することが必要であるので、平滑処理の対象画素数を必要以上に多くしても鮮鋭度が確保できず、少な過ぎても高域成分を確保できないのである。そこで、圧縮率に基づいて対象画素数を決定することにより常に安定した結果が得られるようになる。

[0013] 同第五の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づヽて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理方法であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で RGB成分毎に差分を求める比較工程と、前記比較工程で求められた差分に基づいて前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れかとして抽出する抽出処理工程とからなる点にある。

[0014] 上述の構成によれば、圧縮率に基づいて決定された所定数の隣接元画素データと直前に抽出された映像画素データ (圧縮処理後の画素データ）とを RGB成分毎に比較して、その結果に基づいて新たな映像画素データが生成される。例えば、各色成分の差分の大なる成分を夫々選択して新たな映像画素データとすれば、色の大きく変化する画素成分を取り込むことができるので、鮮鋭性を確保することができるようになる。ここに、所定数とは、例えば間引き処理の対象となる画素数で、圧縮率が 1Z2 のときは少なくとも隣接する 2画素が隣接元画素データとなる。

[0015] 同第六の特徴構成は、上述の第五特徴構成に加えて、前記抽出処理工程において、前記比較工程で求められた RGB成分毎の差分のうち、所定の閾値より小となる成分につ!、ては、前記隣接元画素データの何れかの成分またはそれらの平均値が次の映像画素データの成分として抽出される点にあり、閾値を設定することにより、大きく変化する特異点に対して鮮鋭性を確保し、そうでない画素に対しては元画素をある程度忠実に再現することができるようになる。

[0016] 同第七の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づヽて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理方法であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で輝度の差分を求める比較工程と、前記比較工程で求められた差分に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理工程とからなる点にある。

[0017] 上述の構成によれば、例えば所定数の隣接元画素データの中から輝度変化の大なる画素を映像画素として抽出する場合には、コントラストの効いた映像を得ることができ、輝度変化の小なる画素を映像画素として抽出する場合には、柔らかい映像を得ることがでさるよう〖こなる。

[0018] 同第八の特徴構成は、上述の第七特徴構成に加えて、前記抽出処理工程において、前記比較工程で求められた輝度の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データの平均値が次の映像画素データとして抽出される点にあり、閾値を設定することにより、大きく変化する特異点に対してコントラストを確保し、そうでない画素に対しては元画素をある程度忠実に再現することが出来るようになる。

[0019] 同第九の特徴構成は、上述の第七特徴構成に加えて、前記抽出処理工程において、前記比較工程で直前に抽出された映像画素データと比較される前記隣接元画素データ間の輝度の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データの平均値が次の映像画素データとして抽出される点にあり、直前に抽出された映像画素との輝度の差分にかかわらず、隣接元画素データ間の輝度の差分の何れもが所定の閾値未満、つまり大きく変わるものでないときには、それらの平均値を映像画素データとすることで滑らかな映像が得られるのである。

[0020] 同第十の特徴構成は、上述の第七特徴構成に加えて、前記抽出処理工程において、前記比較工程で求められた輝度の差分の差分が所定の閾値未満であるときには、前記隣接元画素データの平均値が次の映像画素データとして抽出される点にあり、輝度の差分の差分が閾値以上のとき、つまり元画素間の輝度が大きく変化しているか否かが判別できるようになる。その結果に基づいてコントラストを確保し、或いは、滑らかな映像を得ることができるようになる。

[0021] 同第十一の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づ、て前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理方法であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で輝度の差分を求め、求めた差分が同一である力求めた差分の何れもが所定の閾値未満である力求めた差分の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データと前記映像画素データの間で色差信号の位相差を求める比較工程と、前記比較工程で求められた位相差が最大となる元画素データを映像画素データとして抽出する抽出処理工程とからなる点にある。

[0022] 上述の構成によれば、輝度の変化が小さいときに、色の変化の大きな画素を新たな映像画素として抽出することにより、鮮鋭性の高い映像を確保することができるようになる。

[0023] 同第十二の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づ、て前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理方法であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で色差信号の位相差を求める比較工程と、前記比較工程で求められた位相差に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理工程とからなる点にあり、これにより、色の変化する画素を抽出の判断対象とすることができ、映像画素から色の変化の欠落を回避することもできるようになるのである。

[0024] 同第十三の特徴構成は、上述の第十二特徴構成に加えて、前記抽出処理工程にぉヽて、前記比較工程で求められた位相差が何れも所定の閾値未満であるときに、前記隣接元画素データの色差信号から求まる彩度に基づいて前記隣接元画素データの何れかが次の映像画素データとして抽出される点にあり、映像画素との色の変化がそれほど顕著でないときに、彩度、つまり、色のパワーに基づいて映像画素データを抽出することにより、より好ましい映像が得られるようになる。

[0025] 同第十四の特徴構成は、上述の第十二特徴構成に加えて、前記抽出処理工程にぉヽて、前記隣接元画素データの色差信号から求まる互!ヽの位相差が何れも所定の閾値未満であるときに、前記隣接元画素データの色差信号から求まる彩度に基づいて前記隣接元画素データの何れかが次の映像画素データとして抽出される点にあり、抽出対象となる隣接元画素データ間の色の差が無いときには、彩度を抽出基準とすることにより、より好ましい映像が得られるようになる。

[0026] 同第十五の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づ、て前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理方法であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で色差信号から求まる彩度の差分を求める比較工程と、前記比較工程で求められた彩度の差分に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理工程とからなる点にあり、直前の映像画素に対して彩度が大きく変化する力否かを抽出基準にとることで、圧縮処理後の映像の鮮やかさを調整することができるようになる。

[0027] 同第十六の特徴構成は、上述の第十三から第十五の何れかの特徴構成に加えて、前記比較工程において、求められた彩度が何れも所定の閾値未何であるときに、前記隣接元画素データと直前に抽出された映像画素データの間で輝度の差分が求められ、前記抽出処理工程において、輝度の差分値に基づいて前記隣接元画素データの何れかが次の映像画素データとして抽出される点にあり、これにより彩度を優先しながらも、人間が敏感に反応する輝度返還に対しても補償することができるようになる。

[0028] 同第十七の特徴構成は、上述の第一力も第六の何れかの特徴構成に加えて、前記抽出処理工程で抽出された前記映像画素データのうち、前記所定方向と直交する方向に隣接する所定数の映像画素データに対応する元画素データの相関の有無を判別する相関判別工程と、前記相関判別工程で相関があると判別されたときに各映像画素データに対して所定の第二フィルタ演算を施して平滑ィ匕処理して新たな映像画素データを生成する第二平滑ィ匕処理工程を備える点にあり、このように構成することにより、圧縮方向と直交する方向における画素の相関を確保して鮮鋭且つ滑らかな映像を確保することができるようになる。

[0029] 同第十八の特徴構成は、上述の第十七特徴構成に加えて、前記相関判別工程において、前記元画素データの輝度または色差に基づいて相関の有無が決定され、前記第二平滑化処理工程におヽて、前記元画素データの輝度または色差の何れかまたは双方に基づいて第二フィルタ演算を施す点にあり、好みに合わせて輝度または色差のエッジの処理を調整することができるようになる。たとえば、エッジ部で第二フィルタ係数を大に設定すれば鮮鋭性の高、映像が得られるようになる。

[0030] 同第十九の特徴構成は、上述の第十七特徴構成に加えて、前記相関判別工程において、前記元画素データの輝度または色差に基づいて相関の有無が決定され、前記第二平滑化処理工程にお、て、前記元画素データの色信号に基づ!/、て第二フィルタ演算を施す点にある。

[0031] 同第二十の特徴構成は、映像ソース信号を構成する複数の元画素データに基づ Vヽて複数の新たな画素データを変換生成する変換処理工程と、前記変換処理工程で変換処理された複数の新たな画素データ力映像信号を生成するための所定数の画素データを抽出する抽出処理工程とを備え、前記変換処理工程は、前記抽出処理工程による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づいて新たな画素データを変換生成する点にある。

[0032] 上述の構成によれば、変換処理工程によって元画素データとその隣接元画素データとの間で例えば平滑ィ匕処理のごとき所定の変換処理が行なわれるので、処理後の各画素データは隣接画素データの成分が加味された値として生成される。そのように生成された新たな画素力抽出処理工程において抽出された画素データには、それに対応する元画素に隣接する画素データが加味されているため、或る程度の高域成分が確保され、大きく画質が劣化するようなことが無ぐ或る程度の良好な視認性を確保することができるのである。ここに、画素データの演算は RGBの色成分データ、または YUVの輝度、色差データに基づ!/、て行なうことができる。

[0033] 同第二十一の特徴構成は、上述の第二十特徴構成に加えて、前記抽出処理工程は、前記変換処理工程で変換生成された新たな画素データに対応する元画素データとその隣接元画素データとの輝度の差分に基づいて、抽出すべき新たな画素データを決定する点にある。

[0034] 同第二十二の特徴構成は、上述の第二十または二十一特徴構成に加えて、前記変換処理工程は、任意の元画素データと少なくともその隣接元画素データとの間で所定のフィルタ演算による平滑ィ匕処理を行なって新たな画素データを生成する点にある。

[0035] 同第二十三の特徴構成は、上述の第二十力も二十二の何れかの特徴構成に加えて、前記変換処理工程は、元画素データとその隣接元画素データとの輝度の差分と色差信号の位相差の何れ力または双方に基づいて新たな画素データを生成する点にある。

[0036] 同第二十四の特徴構成は、上述の第二十力も二十三の何れかの特徴構成に加えて、前記変換処理工程において、新たな画素データを変換生成する対象となる隣接元画素データの数は、前記抽出処理工程における画素データの抽出数によって決定される点にある。

[0037] 同第二十五の特徴構成は、映像ソース信号を構成する複数の画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理工程を備え、前記抽出処理工程は、所定数の隣接元画素データと、直前に抽出された映像画素データとの RGB成分毎の差分に基づき、前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れかとして抽出するにめる。

[0038] 同第二十六の特徴構成は、上述の第二十五特徴構成に加えて、前記抽出処理ェ程は、前記 RGB成分毎の差分のうち、所定の閾値より小となる成分については、前記隣接元画素データの何れかの成分またはそれらの平均値が次の映像画素データの成分として抽出される点にある。

[0039] 同第二十七の特徴構成は、映像ソース信号を構成する複数の元画素データ力映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理工程を備え、前記抽出処理工程は、所定数の隣接元画素データと、直前に抽出された映像画素データとの輝度の差分に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0040] 同第二十八の特徴構成は、上述の第二十七特徴構成に加えて、前記抽出処理ェ程は、前記輝度の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データの平均値を次の映像画素データとして抽出する点にある。

[0041] 同第二十九の特徴構成は、上述の第二十七特徴構成に加えて、前記抽出処理ェ程は、直前に抽出された映像画素データと比較される前記隣接元画素データ間の輝度の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データの平均値を次の映像画素データとして抽出する点にある。

[0042] 同第三十の特徴構成は、上述の第二十七特徴構成に加えて、前記抽出処理工程は、前記輝度の差分の差分が所定の閾値未満であるときには、前記隣接元画素データの平均値を次の映像画素データとして抽出する点にある。 [0043] 同第三十一の特徴構成は、映像ソース信号を構成する複数の元画素データ力映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理工程を備え、前記抽出処理工程は、所定数の隣接元画素データと、直前に抽出された映像画素データとの色差信号の位相差に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0044] 同第三十二の特徴構成は、上述の第三十一特徴構成に加えて、前記抽出処理ェ程は、前記色差信号の位相差の何れもが所定の閾値未満であるときには、前記隣接元画素データの色差信号力求まる彩度に基づいて該隣接画素データの何れかを次の映像画素データとして抽出する点にある。

[0045] 同第三十三の特徴構成は、上述の第三十一特徴構成に加えて、前記抽出処理ェ程は、前記色差信号の位相差の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データの色差信号から求まる彩度に基づいて前記隣接元画素データの何れかを抽出する点にある。

[0046] 同第三十四の特徴構成は、映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理工程を備え、前記抽出処理工程は、所定数の隣接元画素データと、直前に抽出された映像画素データとの色差信号力も求まる彩度の差分に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0047] 同第三十五の特徴構成は、上述の第三十二から三十四の何れかの特徴構成に加えて、前記抽出処理工程は、求められた彩度が何れも所定の閾値未満であるときには、前記隣接元画素データと前記直前に抽出された画素データとの輝度の差分に基づいて前記隣接元画素データの何れかを抽出する点にある。

[0048] 同第三十六の特徴構成は、上述の第二十から第二十五特徴構成に加えて、前記元画素データと、前記元画素データに隣接する隣接元画素データの隣接方向に直交する方向に隣接する所定数の直交隣接元画素データとの相関を判別し、相関があると判別されたときは、抽出された新たな画素データに所定の演算を施して第 2の新たな画素データを生成する演算処理工程を有する点にある。

[0049] 同第三十七の特徴構成は、上述の第三十六特徴構成に加えて、前記演算処理ェ程は、前記元画素データと前記直交隣接元画素データとの輝度の差分または色差信号の位相差に基づいて相関の有無を判別し、前記元画素データの輝度の差分または色差信号の位相差に基づいて演算処理を施す点にある。

[0050] 同第三十八の特徴構成は、上述の第三十六特徴構成に加えて、前記演算処理ェ程は、前記元画素データと前記直交隣接元画素データとの輝度の差分または色差信号の位相差に基づいて相関の有無を判別し、前記元画素データの輝度の差分、色差信号の位相差及び色信号の少なくとも 1つに基づ!ヽて演算処理を施す点にある

[0051] 本発明による映像信号処理装置の第一の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づいて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理装置であって、前記所定方向に配列された任意の元画素データをその隣接元画素データとの間で所定のフィルタ演算を施して平滑化処理して新たな画素データを生成する平滑化処理手段と、平滑化処理された画素データ力圧縮率に基づいた数の画素データを前記映像画素データとして抽出する抽出処理手段とを備えてなる点にある。

[0052] 同第二の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づヽて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理装置であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で RGB成分毎に差分を求める比較手段と、前記比較手段で求められた差分に基づいて前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れかとして抽出する抽出処理手段とを備えてなる点にある。

[0053] 同第三の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づヽて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理装置であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で輝度の差分を求める比較手段と、前記比較手段で求められた差分に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理手段とを備えてなる点にある。

[0054] 同第四の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づヽて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理装置であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で輝度の差分を求め、求めた差分が同一である力、求めた差分の何れもが所定の閾値未満であるか、求めた差分の何れもが所定の閾値未満であるときには、前記隣接元画素データと前記映像画素データの間で色差信号の位相差を求める比較手段と、前記比較手段で求められた位相差が最大となる元画素データを映像画素データとして抽出する抽出処理手段とを備えてなる点にある。

[0055] 同第五の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づヽて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理装置であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で色差信号の位相差を求める比較手段と、前記比較手段で求められた位相差に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理手段とを備えてなる^;にある。

[0056] 同第六の特徴構成は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能なマルチビュー表示装置に対して、ソース信号を構成する 1フレームの元画素データを所定方向に圧縮処理して映像画素データを生成し、生成された前記映像画素データで構成される映像信号に基づヽて前記マルチビュー表示装置の第一または第二の何れかの画素群を駆動する映像信号処理装置であって、前記所定方向に配列され圧縮率に基づ、て決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で色差信号から求まる彩度の差分を求める比較手段と、前記比較手段で求められた彩度の差分に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理手段とを備えてなる点にある。

[0057] 同第七の特徴構成は、映像ソース信号を構成する複数の元画素データに基づいて複数の新たな画素データを変換生成する変換処理手段と、前記変換処理手段で変換処理された複数の新たな画素データ力映像信号を生成するための所定数の画素データを抽出する抽出処理手段とを備え、前記変換処理手段は、前記抽出処理手段による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づいて新たな画素データを変換生成する点にある。

[0058] 同第八の特徴構成は、映像ソース信号を構成する複数の画素データから映像信号を生成するための所定数画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接画素データと、直前に抽出された映像画素データとの RGB成分毎の差分に基づき、前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れかとして抽出する点にある。

[0059] 同第九の特徴構成は、映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの輝度の差分に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0060] 同第十の特徴構成は、映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの色差信号の位相差に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0061] 同第十一の特徴構成は、映像ソース信号を構成する複数の元画素データ力映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの色差信号力も求まる彩度の差分に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0062] 同第十二の特徴構成は、映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データに基づいて複数の新たな画素データを変換生成する変換処理手段と、前記変換処理手段で変換処理された複数の新たな画素データから映像信号を生成するための所定数の画素データを抽出する抽出処理手段とを備えてなる表示装置であって、前記変換処理手段は、前記抽出処理工程による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づ、て新たな画素データを変換生成する点にある。

[0063] 本発明による表示装置の特徴構成は、映像信号に基づ!/ヽて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの RGB成分毎の差分に基づき、前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れかとして抽出する点にある。

[0064] 同第二の特徴構成は、映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの輝度の差分に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0065] 同第三の特徴構成は、映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの色差信号の位相差に基づき、前記隣接元画素データの何れかを抽出する点にある。

[0066] 同第四の特徴構成は、映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの色差信号力求まる彩度の差分に基づき、前記隣接元画素データの何れかを抽出する点にある。

発明の効果

[0067] 以上説明した通り、本発明によれば、ソース信号力映像信号を生成する際に、高域成分の欠落を防ぐとともに、画素データの連続性を確保できる映像信号処理方法、映像信号処理装置、及び、表示装置を提供することができるようになった。

図面の簡単な説明 [図 1]図 1は、本発明の一実施の形態に係る表示装置の概念図である。

[図 2]図 2は、図 1に示した表示装置を車に搭載したことを示す斜視図である。

[図 3]図 3は、図 1に示した表示部の断面図である。

[図 4]図 4は、表示パネルを正面から見た構造の概略図である。

[図 5]図 5は、 TFT基板の概略を示す回路図である。

[図 6]図 6は、図 1に示した表示装置のブロック図である。

[図 7]図 7は、図 6に示した画像出力部 211のブロック図である。

[図 8]図 8は、図 6に示した制御部 200のブロック図である。

[図 9]図 9は、図 6に示したメモリ 218のブロック図である。

[図 10]図 10は、二系統の映像信号から表示部に表示される映像信号の生成手順を示す説明図である。

[図 11]図 11は、本実施例 1による表示装置（映像信号処理装置）のブロック構成図である。

[図 12]図 12は、マルチビュー表示装置の説明図である。

[図 13]図 13は、液晶パネノレの説明図である。

[図 14]図 14は、本発明による映像信号処理方法の説明図である。

[図 15]図 15は、本実施例による映像信号処理方法の説明図である。

[図 16]図 16は、本実施例による映像信号処理方法の説明図である。

[図 17]図 17は、本実施例による映像信号処理装置の要部のブロック構成図である。

[図 18]図 18は、本実施例のフローチャートである。

[図 19]図 19は、別実施形態を示す映像信号処理方法の説明図である。

[図 20]図 20は、別実施形態のフローチャートである。

[図 21]図 21は、別実施形態を示すフローチャートである。

[図 22]図 22は、別実施形態を示す映像信号処理方法の説明図である。

[図 23]図 23は、別実施形態を示すフローチャートである。

[図 24]図 24は、別実施形態を示す映像信号処理方法の説明図である。

[図 25]図 25は、別実施形態を示す映像信号処理方法の説明図である。

[図 26]図 26は、別実施形態を示す映像信号処理方法の説明図である。 [図 27]図 27は、別実施形態を示す映像信号処理方法の説明図である。

[図 28]図 28は、別実施形態を示す映像信号処理方法の説明図である。

[図 29]図 29は、別実施形態を示す映像信号処理方法の説明図である。

[図 30]図 30は、別実施形態を示す映像信号処理方法の説明図である。

[図 31]図 31は、別実施形態を示す映像信号処理方法の説明図である。

[図 32]図 32は、別実施形態を示す映像信号処理方法の説明図である。

[図 33]図 33は、別実施形態を示す表示装置 (映像信号処理装置)のブロック構成図である。

符号の説明

1:第 1の映像ソース、 2:第 2の映像ソース、 3:第 1の画像データ、 4:第 2の画像データ、 5:表示制御部、 6:表示データ、 7:表示部、 8:第 1の表示画像、 9:第 2の表示画像、 10:観察者、 11:観察者、 12:助手席、 13:運転席、 14:ウィンドシールド、 15: 操作部、 16:スピーカ、 100:液晶パネル、 101:バックライト、 102:偏光板、 103:偏光板、 104:TFT基板、 105:液晶層、 106:カラーフィルタ基板、 107:ガラス基板、 1 08:視差バリア、 109:左側 (助手席側)表示用の画素、 110:右側 (運転席側)表示用の画素、 111:表示パネル駆動部、 112:走査線駆動回路、 113:データ線駆動回路、 114:TFT素子、 115〜118：データ線、 119〜121：走査線、 122:画素電極、 123:サブピクセル、 124:タツチノネル、 200:制御部、 201 :CD,MD再生部、 20 2:ラジオ受信部、 203: TV受信部、 204:DVD再生部、 205 :HD (Hard Disk)再生部、 206:ナビゲーシヨン部、 207:分配回路、 208:第 1の画像調整回路、 209:第 2 の画像調整回路、 210:音声調整回路、 211:画像出力部、 212:VICS情報受信部、 213:GPS情報受信部、 214:セレクタ、 215:操作部、 216:リモコン送受信部、 21 7:リモコン、 218:メモリ、 219:外部音声 Z映像入力部、 220:カメラ、 221:明るさ検知手段、 222:乗員検知手段、 223:リア表示部、 224: ETC車載器、 225:通信ュ- ット、 226:第 1の書込回路、 227:第 2の書込回路、 228: VRAM (Video RAM), 22 9:インターフェース、 230:CPU、 231:記憶部、 232:データ記憶部、 233:第 1の画面 RAM、 234:第 2の画面 RAM234、 235:画質設定情報記憶手段、 236:対環境調整値保持手段、 325:マルチビュー表示装置、 340:映像信号処理装置、 341:映像信号出力手段、 342 :抽出処理手段、 343 :平滑化処理手段、 344 :ソース信号選択出力手段、 345 :操作部 (モード切替手段）、 346 :圧縮処理手段

発明を実施するための最良の形態

[0070] 以下、本発明を具現化する表示装置の基本的な実施の形態を図面に従って説明する。但し、本発明の技術的範囲は以下に記載する実施の形態に限定されず、特許請求の範囲に記載された発明とその均等物に及ぶものである。

[0071] 図 1は、本発明に係わるマルチビュー表示装置 (以下、単に「表示装置」と記す。 ) の概念図である。図中、 1は第 1の映像ソース、 2は第 2の映像ソース、 3は第 1の映像ソースからの第 1の画像データ、 4は第 2の映像ソース力もの第 2の画像データ、 5は表示制御手段、 6は表示データ、 7は表示部（例えば液晶パネル等）、 8は第 1の映像ソース 1に基づく第 1の表示画像、 9は第 2の映像ソース 2に基づく第 2の表示画像、 1 0は表示部 7に対して左側に位置する観察者 (利用者）、 11は表示部 7に対して右側に位置する観察者 (利用者)である。

[0072] 図 1の概念図は、表示部 7に対する観察者 10、 11の相対的位置に応じて、換言すれば表示部 7に対する視野角に応じて、観察者 10は第 1の表示画像 8を、観察者 11 は第 2の表示画像 9を実質的に同時に見ることができ、しかも各々の表示画像 8、 9は表示部 7の表示面全体に渡ってみることができることを概念的に示すものである。図 1 において、第 1の映像ソース 1は例えば DVDプレーヤの映画画像やテレビ受信機の受信画像等、第 2の映像ソース 2は例えばカーナビゲーシヨン装置の地図やルート案内画像等であり、それぞれの第 1の映像データ 3及び第 2の映像データ 4は表示制御手段 5に供給され、それらが表示部 7で実質的に同時に表示できるように処理される

[0073] 表示制御手段 5から表示データ 6が供給される表示部 7は、後述する視差バリアを備えた液晶パネル等で構成される。表示部 7の横方向の総画素の半数が第 1の映像ソース 1に基づく第 1の表示画像 8の表示に、残りの半数の画素が第 2の映像ソース 2 に基づく第 2の表示画像 9の表示に使用される。表示部 7に対して左側に位置する観察者 10には、第 1の表示画像 8に対応する画素のみが見え、第 2の表示画像 9は表示部 7の表面に形成されている視差バリアによって遮られて実質的に見えない。一方、表示部 7に対して右側に位置する観察者 11には、第 2の表示画像 9に対応する画素のみが見え、第 1の表示画像 8は視差バリアにより遮られて実質的に見えない。尚

、視差バリアについては、例えば、特開平 10— 123461号公報、特開平 11— 8413

1号公報に開示された構成を応用できる。

[0074] このような構成により、単一の画面で左右の利用者に異なる情報やコンテンツを提供することができる。もちろん、第 1、第 2の映像ソースが同じであれば、従来通り左右の利用者が同じ画像を見ることもできる。

[0075] 図 2は、本発明に係る表示装置の車両への搭載例を示す斜視図である。図中、 12 は助手席、 13は運転席、 14はウィンドシールド、 15は操作部、 16はスピーカである

[0076] 図 1の表示装置の表示部 7は、例えば図 2に示すように、運転席 13と助手席 12とのほぼ中央のダッシュボード部分に配置される。表示装置に対する各種操作は、表示部 7の表面に一体的に形成したタツチパネル（図示せず)や操作部 15又は、赤外線又は無線リモートコントローラ（図示せず）の操作によって行われる。車両の各ドアにはスピーカ 16が配置され、表示画像に連動した音声や警告音等が出力される。

[0077] 運転席 13に図 1の観察者 11が、助手席 12には観察者 10が座る。表示部 7に対する第 1視方向（運転席側)から見ることができる画像は例えばカーナビゲーシヨン装置の地図等の画像であり、実質的に同時に第 2視方向（助手席側)から見ることができる画像は例えばテレビ受信画像や DVDムービー画像である。従って、運転席 13の運転者がカーナビゲーシヨンによる運転支援を受けるのと同時に助手席 12の同乗者はテレビや DVDを楽しむことができる。し力もそれぞれの画像は例えば 7インチの画面全体を使用して表示されるため、従来のマルチウィンドウ表示のように画面サイズ力 S小さくなることもない。つまり、運転者、同乗者にとっては、あた力も各々に独立した専用のディスプレイがあるかの如ぐそれぞれに最適な情報やコンテンツが提供されるのである。

[0078] 図 3は、表示部 7の断面構造の概略図である。図中、 100は液晶パネル、 101はバックライト、 102は液晶パネルのバックライト側に設置された偏光板、 103は液晶パネルの発光方向側の前面に配置された偏光板、 104は TFT(Thin Film Transistor)基板、 105は液晶層、 106はカラーフィルタ基板、 107はガラス基板、 108は視差バリアである。液晶パネル 100は、 TFT基板 104とそれに対向して配置されるカラーフィルタ基板 106の間に液晶層 105を挟持した一対の基板と、その発光方向側の前面に配置された視差バリア 108とガラス基板 107とを、 2枚の偏光板 102· 103の間に挟んだ構成となっており、ノックライト 101からやや離隔して配設される。また、液晶パネル 100は、 RGB色（三原色)で構成される画素を有する。

[0079] 液晶パネル 100の各画素は、左側 (助手席側)表示用と、右側 (運転席側)表示用に分けられて表示制御される。そして、左側 (助手席側)表示用画素は、視差バリア 1 08により右側（運転席側）への表示は遮断され、左側 (助手席側）からは見えるようになっている。また、右側 (運転席側)表示用画素は、視差バリア 108により左側 (助手席側）への表示が遮断され、右側（運転席側）からは見えるようになつている。これによって、運転者と同乗者に異なった表示を提供することが可能となる。つまり、運転者にはナビゲーシヨンの地図情報を与え、同時に同乗者には DVDの映画等を見せることが可能となる。なお、視差バリア 108、前記液晶パネルの各画素の構成を変更すれば、 3方向等、複数方向に異なった画像を表示する構成も可能である。また、視差ノリア自体を電気的に駆動可能な液晶シャツタ等で構成して視野角を可変するようにしてもよい。

[0080] 図 4は、表示パネルを正面から見た構造の概略図であり、図 3は図 4中の A—

断面である。図中、 109は左側 (助手席側）表示用の画素、 110は右側（運転席側）表示用の画素である。図 3及び図 4は、例えば横方向に 800画素、縦方向に 480画素並べられた液晶パネル 100の一部を表す。左側 (助手席側）表示用の画素 109と右側（運転席側）表示用の画素 110は縦方向にグループィ匕され、交互に並んで、る。視差バリア 108は、横方向にある間隔で配置され、縦方向には一様である。これによって、左側力も表示パネルを見ると、視差バリア 108が右側用画素 110を覆い隠して、左側用画素 109が見える。また同様に右側力も見ると、視差バリア 108が左側用画素 109を覆い隠して、右側用画素 110が見える。さらに正面付近では、左側用画素 109と右側用画素 110の両方が見えるため、左側表示画像と右側表示画像とが実質的に重なって見える。ここで、図 4中の交互に並んだ左側用画素 109及び右側用画素 110は、図 3のように RGB色を有している力各グループ縦方向内は、 R列、 G 列、 B列のように単色で構成されていてもよいし、 RGBが複数混じった列として構成されていてもよい。

[0081] 具体的には、例えば、前記表示部 7において、右側 (運転席側）と左側 (助手席側）の 2方向に異なる映像を表示させるためには、夫々の映像に対応するソース信号を構成する 800 X 480の画素を 400 X 480の画素に圧縮することで、前記表示部 7の画素数である 800 X 480に対応した映像信号にするように構成できる。このとき、図 1 0に示すように、運転席側のソース信号については本来映像を表示すべきソース信号のうち奇数列のソース信号を間引き、また、助手席側のソース信号については偶数列のソース信号を間引く構成を採用できる。ただし、間引き方はこれに限定するものではなぐ 1画素を構成する R, G, Bの各要素単位に奇数列、偶数列で間引き処理してもよい。間引き処理により圧縮された夫々の映像ソースを列が交互になるように合成処理して最終の映像ソースが生成される。

[0082] このようにして表示部に表示された映像を右側（運転席側）または左側 (助手席側）力眺めると、間引き処理によって元画像の画像情報の高域成分が欠落し、画素データの連続性も失われて、るので、そのような映像信号に基づ、て表示された映像はかなり見辛いものになる。そこで、本発明では、制御手段（図 6に符号 200で示される）によって、映像ソース信号を構成する複数の元画素データに基づいて複数の新たな画素データを変換生成する変換処理工程と、前記変換処理工程で変換処理された複数の新たな画素データ力映像信号を生成するための所定数の画素データを抽出する抽出処理工程が実行されるように構成されている。ここで、前記変換処理工程は、前記抽出処理工程による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づ!/、てフィルタ演算等を施すことによつて新たな画素データを変換生成するように構成されて!、るので、処理後の各画素データは隣接画素データの成分が加味された値として生成され、画質の劣化の程度が改善される。

[0083] 図 5は TFT基板 104の概略を示す回路図である。 111は表示パネル駆動部、 112 は走査線駆動回路、 113はデータ線駆動回路、 114は TFT素子、 115〜118はデータ線、 119〜121は走査線、 122は画素電極、 123はサブピクセルである。

[0084] 図 5に示すように、サブピクセル 123は各データ線 115〜118及び各走査線 119〜 121によって囲まれた領域を一単位とし、複数形成される。各サブピクセルには、液晶層 105に電圧を印加する画素電極 122とそれをスイッチング制御する TFT素子 1 14が形成されて、る。表示パネル駆動部 111は走査線駆動回路 112及びデータ線駆動回路 113の駆動タイミングを制御する。走査線駆動回路 112は TFT素子 114の選択走査を行い、またデータ線駆動回路 113は画素電極 122への印加電圧を制御する。

[0085] 前記複数のサブピクセルは、第 1の画像データと第 2の画像データの合成データもしくは、第 1と第 2の個々の画像データに基づいて、例えばデータ線 115と 117に第 1 の画素データ (左側画像表示用）を、またデータ線 116と 118に第 2の画素データ（右側画像表示用）を送信することよって、第 1の画像を表示する第 1の画像データ群と第 2の画像を表示する第 2の画像データ群が形成される。

[0086] 図 6は、本発明に係わる表示装置の概要を示すブロック図であり、いわゆる Audio Visual Navigation複合機への適用例である。図中、 124はタツチパネル、 200は制御手段、 201は CDZMD再生部、 202はラジオ受信部、 203は TV受信部、 204は DVD再生、 205は HD (Hard Disk)再生部、 206はナビゲーシヨン部、 207は分配回路、 208は第 1の画像調整回路、 209は第 2の画像調整回路、 210は音声調整回路、 211は画像出力部、 212は¥1じ3情報受信部、 213は GPS情報受信部、 214はセレクタ、 215は操作部、 216はリモコン送受信部、 217はリモコン、 218はメモリ、 21 9は外部音声 Z映像入力部、 220はカメラ、 221は明るさ検知手段、 222は乗員検知手段、 223はリア表示部、 224は ETC車載器、 225は通信ユニットである。

[0087] 表示部 7は、タツチパネル 124、液晶パネル 100及びバックライト 101から構成される。表示部 7の液晶パネル 100は、これまでに述べてきたように、第 1視方向として運転席側から見られる画像と、第 2視方向として助手席側カゝら見られる画像とを、実質的に同時に表示することが可能となっている。尚、表示部 7には、液晶パネル以外のフラットパネルデイスレイ、例えば有機 ELディスプレイパネル、プラズマディスプレイパネル、冷陰極フラットパネルディスプレイ等を用いることもできる。 [0088] 制御手段 200は、各種ソース（CDZMD再生部 201、ラジオ受信部 202、 TV受信部 203、 DVD再生部 204、 HD再生部 205及びナビゲーシヨン部 206)力の画像や音声は、制御手段 200からの指示に基づき左用に指定された映像ソースを 208に、右用に指定されたソースを 209に分配させる分配回路 207を介して、画像であれば第 1の画像調整回路 208及び第 2の画像調整回路 209に、音声であれば音声調整回路 210にそれぞれ分配される。そして、第 1及び第 2の画像調整回路 208、 209では、輝度や色調、コントラストなどが調整され、調整された各画像を画像出力部 211 にて、表示部 7に表示させる。また音声調整回路 210では各スピーカへの分配や音量、音声が調整され、調整された音声が、スピーカ 16から出力される。

[0089] 制御手段 200は、第一の画像調整回路 208、第二の画像調整回路 209、及び画像出力部 211を制御して、例えば、前記変換処理工程においては、水平方向に配列された元画素データに対して、任意の元画素データと少なくともその隣接元画素データとの間で所定のフィルタ演算による平滑ィ匕処理を行なって新たな画素データを生成する処理を全ての元画素データに対して施し、前記抽出処理工程にぉ、ては、前記変換処理工程で変換生成された新たな画素データに対応する元画素データとその隣接元画素データとの輝度の差分に基づいて、映像信号を構成する新たな画素データを抽出処理するのである。このような映像信号処理方法によれば、例えば、変換された画素群力元画素の輝度の差分が大となる画素群を抽出することにより高域成分を強く含む画素を選択することができ、表示された映像の鮮鋭度を保ち、良好な視認性を確保することができる。

[0090] 図 7は画像出力部 211の概略を示すブロック図である。図中、 226は第一の書込回路、 227は第二の書込回路、 228は VRAM (Video RAM)である。

[0091] 画像出力部 211は、例えば図 7に示すように、第 1の書込回路 226と第 2の書込回路 227と VRAM (Video RAM) 228と表示パネル駆動部 111とを備えて!/ヽる。例えば、第 1の書込回路 226は、第 1の画像調整回路 208で調整された画像データのうち奇数列に対応する画像データ (即ち、図 1の第 1の表示画像 8用の画像データ）を、第 2の書込回路 227は、第 2の画像調整回路 209で調整された画像データのうち偶数列に対応する画像データ (即ち、図 1の第 2の表示画像 9用の画像データ）をもとにし、それぞれ VRAM228における該当する領域に書き込む。また表示パネル駆動部 111は液晶パネル 100を駆動する回路であり、 VRAM228に保持されて!ヽる画像データ（第 1の画像データと第 2の画像データの合成データ）に基づいて、液晶表示パネル 100の対応する画素を駆動する。尚、 VRAM228には第 1の画像データと第 2 の画像データの合成されたマルチビュー表示用の画像に対応するように画像データの書き込みが行われているので、駆動回路は 1つでよぐその動作も通常の液晶表示装置の駆動回路の動作と同じである。また別の構成として、第 1の画像データと第 2の画像データを合成せずに、それぞれの画像データに基づいて、液晶表示パネルの対応する画素を駆動する第 1の表示パネル駆動回路及び第 2の表示パネル駆動回路を用いることも考えられる。

[0092] ここで、図 6で示した各種ソースの一例について説明をすると、 HD再生部 205を選択した場合、ハードディスク (HD)に記憶された MP3ファイル等の音楽データや JPE Gファイル等の画像データ、ナビゲーシヨン用の地図データ等が読み出され、音楽データを選択するためのメニュー表示や画像データを表示部 7に表示させることができる。

[0093] ナビゲーシヨン部 206は、ナビゲーシヨンの為に利用される地図情報を記憶した地図情報記憶部を備え、 VICS情報受信部 212、 GPS情報受信部 213から情報を入手し、ナビゲーシヨン動作の為の画像を作成し、表示させることができる。また TV受信部 203は、アンテナ力もセレクタ 214を介して、アナログ TV放送波及びデジタル T V放送波を受信する。

[0094] 図 8は制御手段 200の概略を示すブロック図である。図中、 229はインターフェース、 230ίま CPU、 231【ま記'隐咅^ 232ίまデータ記'隐咅である。

[0095] 尚、制御手段 200は分配回路 207並びに各種ソースを制御し、選択された 2つのソースもしくは 1つのソースについて表示を行わせる。また制御手段 200は、これら各種ソースをコントロールするための操作メニュー表示を表示部 7に表示させることも行つている。ここで、図 8で示すように、制御手段 200はマイクロプロセッサなどで構成され、インターフェース 229を介して、表示装置内の各部や各回路を統括的に制御している CPU230を備えている。この CPU230には、表示装置の動作に必要な各種のプログラムを保持する ROM力もなるプログラム記憶部 231と、各種のデータを保持する RAM力もなるデータ記憶部 232とが設けられている。なお、 ROMや RAM等は、 CPUに内蔵されたものでも、外部に設けたものでも使用することが可能である。又、 ROMはフラッシュメモリの様に電気的に書き換え可能な不揮発性メモリでもよい。

[0096] ユーザは、上記各種ソースのコントロールを、表示部 7の表面に取り付けられているタツチパネル 124や表示部 7の周囲に設けられたスィッチ、もしくは音声認識等の入力操作や選択操作を操作部 215によって行うことができる。またリモコン送受信部 21 6を介して、リモコン 217により入力もしくは選択操作をしてもよい。制御手段 200は、このタツチパネル 124や操作部 215の操作に従って、各種ソースを含めた制御を行つている。また、制御手段 200は、図 2のように車両内に複数備え付けられたスピーカ 16の各音量等を、音声調整回路 210を用いて制御することができるように構成されている。また制御手段 200は、メモリ 218に画質設定情報やプログラム、車両情報等の各種設定情報を記憶させることも行って、る。

[0097] 図 9はメモリ 218の概略を示すブロック図である。図中、 233は第 1の画面 RAM、 2 34は第 2の画面 RAM234、 235は画質設定情報記憶手段、 236は対環境調整値保持手段である。

[0098] メモリ 218は、例えば図 9に示すように、使用者が設定した第 1の画像および第 2の画像の画質の調整値がそれぞれ書き込み可能な第 1の画面 RAM233および第 2の画面 RAM234を有する。また、第 1の画像及び第 2の画像の画質を調整する場合に、読み出すことができるプリセット値として各画質調整用に予め複数段階の画質調整値が記憶されている画質設定情報記憶手段 235も有する。さらに車外の明るさ変化等の周囲環境変化に応じた画質を調整するために、周囲環境に対する第 1の映像及び第 2の映像の画質の調整値を保持する対環境調整値保持手段 236を有している。ここで画質設定情報記憶手段 235及び対環境調整値保持手段 236は、フラッシュメモリなどの電気的書き換え可能不揮発性メモリ又はノッテリバックアップされた揮発性メモリにより構成される。

[0099] 外部音声 Z画像入力部 219に接続された、例えば後方監視用のカメラ 220からの画像を表示部 7に表示するようにしてもよい。なお、後方監視用カメラ 220以外に、ビデォカメラ及びゲーム機等を外部音声 Z画像入力部 219に接続してもよい。

[0100] 制御手段 200は、明るさ検知手段 221 (例えば、車両のライトスィッチや光センサ）や乗員検知手段 222 (例えば、運転席や助手席に設けられる感圧センサ）により検知された情報を元に、音声の定位位置等の設定を変更させることが可能である。

[0101] 223は車両の後席用に設けられたリア表示部であり、画像出力部 211を介して、表示部 7に表示される画像と同じもの、もしくは運転席用の画像カゝ助手席用の画像の一方が表示可能である。

[0102] 制御手段 200は、 ETC車載器 250からの料金表示等を表示させることを行っている。また制御手段 200は、携帯電話などと無線接続するための通信ユニット 225を制御し、これに関する表示がされるようにしてもよい。

[0103] 以下に、上述した表示装置に具現化され、映像ソース信号力映像信号を生成する際に、高域成分の欠落を防ぐとともに、画素データの連続性を確保できる映像信号処理方法、映像信号処理装置について詳述する。図 11に示すように、車両を目的地に誘導するナビゲーシヨン装置 Nと、地上波デジタル放送を受信する電波受信装置 302と、 DVDプレーヤ 330と、前記ナビゲーシヨン装置 N、前記電波受信装置 30 2、または前記 DVDプレーヤ 330の何れか二系統の映像ソース信号による表示画像を同時に表示可能なマルチビュー表示装置 325と、前記マルチビュー表示部 325を表示制御する映像信号処理装置 340等が車両に搭載されている。即ち、マルチビュ一表示部 325と映像信号処理装置 340によって表示装置が構成されている。

[0104] 前記ナビゲーシヨン装置 Nは、道路地図データを記憶した地図データ記憶手段 30 5と、自車の位置情報を認識する GPS受信手段 306と、 GPSアンテナ 306aと、自車の走行状態を管理する自律航法手段 307と、地図データに基づいて指定された目的地までの経路を探索する経路探索手段 308と、地図上に自車の走行位置を表示する走行状態表示処理手段 309と、各種の動作モードや動作条件を設定する操作部 326等を備えて構成され、単一または複数の CPUとその動作プログラムが格納された ROM及びワーキングエリアに使用される RAMを備えて各ブロックが制御されるように構成され、指定された地点に自車を誘導するナビゲーシヨン機能を有してヽる [0105] 前記電波受信装置 2は、受信アンテナ 320と、前記受信アンテナ 320を介して受信された伝送チャンネル (周波数帯域)を選局するチューナ 321と、選局された受信信号力もデジタル信号を取り出して誤り訂正処理を行な、TS (トランスポートストリーム）パケットを出力する OFDM復調部 322と、 TSパケットのうち映像 ·音声パケットから音声信号を復号してスピーカ 324に出力するとともに、映像信号を復号して表示部 325 に出力するデコーダ 323を備えたデジタルテレビ受信機で構成されている。

[0106] 前記マルチビュー表示部 325は、画面を構成する画素群が第一の画素群と第二の画素群に分散配置され、それらが互いに異なる映像信号に基づいて各別に駆動されることにより、二方向に異なる映像が同時に表示可能に構成され、図 12に示すように、 TFTアレイ 916を形成した TFT基板 912とそれに対向して配置される対向基板 914の間に液晶層 913を挟持した一対の基板を 2枚の偏光板 911の間に配置した液晶パネルと、マイクロレンズと遮光スリットを形成した視差バリア層 915を形成した視差バリア基板 917とを一体形成して構成されている。

[0107] 前記 TFTアレイ 916は、図 13に示すように、データ線 925と走査線 924によって囲まれた領域を一単位とする複数の画素が形成され、各画素には液晶層 913に電圧を印加する画素電極 923と、それをスイッチング制御する TFT素子 922が形成されている。走査線駆動回路 921は TFT素子 922の選択走査を行い、またデータ線駆動回路 920は、画素電極 923への印加電圧を制御する。制御回路 926は走査線駆動回路 921及びデータ線駆動回路 920の駆動タイミングを制御する。

[0108] 前記画素は全体として 800 X 480ドット設けられ、一列置き（一データ線置き）に配列 (奇数列と偶数列に分類)された第一の画素群 (400 X 480ドット）と第二の画素群の二つの画素群 (400 X 480ドット)で構成され、それぞれはソースの異なる映像信号に基づいて各別に駆動される。前記二つの画素群を通過した光は、それぞれ視差ノリア層 915によって異なる方向へ導かれ、或いは、特定方向の光は遮光されるため、空間上の表示面 918近傍に限って、異なる方向へ異なる映像を表示することが可能となっている。尚、二つの画素群は一列置きに配列するものに限られるのではなぐ画面内において分散配置されていればよい。

[0109] 前記マルチビュー表示部 325は、運転席と助手席の中央部のフロントパネルに設置され、運転席側から観察される映像と助手席側から観察される映像が異なるよう〖こ表示することが可能な構成となっている。例えば、助手席側では前記電波受信装置

302からの映像情報が観察される一方で、運転者席側では前記ナビゲーシヨン装置 Nのディスプレイとして使用が可能である。

[0110] 前記映像信号処理装置 340は、図 10に示したように、ソース信号を構成する 1フレ一ムの元画素データを所定方向（ここでは、水平方向）に抽出処理して映像画素データを生成し、生成された映像画素データで構成される映像信号に基づヽて前記マルチビュー表示部 325の第一または第二の何れかの画素群を駆動する装置で、図 1 1に示すように、上述した複数の映像ソース信号 (以下、単に「ソース信号」とも記す。 )から各画素群へ供給するソース信号を選択するソース信号選択出力手段 344と、選択された二系統のソース信号の夫々を構成する 1フレームの元画素データを表示部 325の各画素群の画素に対応付けるべく水平方向に 50%の圧縮率で圧縮処理して 1フレームの映像画素データに変換処理する圧縮処理手段 346と、圧縮処理後の夫々の映像信号を出力して前記マルチビュー表示部 325を駆動する映像信号出力手段 341と、前記ソース信号選択出力手段 344によるソース信号の選択基準を設定するモード切替手段としての操作部 345等を備えて構成されている。

[0111] 前記操作部 345は、前記マルチビュー表示部 325の表示画面に設けられたタツチパネルと前記表示画面に表示される選択キーにより入力部が具現化され、夫々の画素群への映像の表示のオン Zオフ操作、ソース信号の選択操作等が行われる。尚、操作部 345は、表示画面上に設けられる構成に限定されるものではない。

[0112] 前記圧縮処理手段 346は、前記ソース信号選択出力手段 344から供給される二系統のソース信号に対して、所定方向（ここでは水平方向）に配列された任意の元画素データとその隣接元画素データとの間で所定の画像変換処理、例えば、フィルタ演算による平滑ィヒ処理等を行なって前記元画素データに対応する新たな画素データを生成する変換処理手段の一例である平滑化処理手段 343と、平滑化処理された画素データ力圧縮率に基づいた所定数の画素データを前記映像画素データとして抽出する抽出処理手段 342とを備えて構成されて、る。

[0113] 前記平滑化処理手段 343は、図 14 (a) , (b)に示すように、ソース信号の 1フレームを構成する元画素データのうち、水平方向に配列された任意の元画素とそれに隣接する隣接元画素の 3画素単位で、 1 : 2 : 1のフィルタ係数を掛けて加算した値を係数和 4で除すことにより新たな画素を生成するローパスフィルタ処理、つまり平滑処理ェ程を実行する。即ち、中心画素を重視しながら左右の隣接画素の影響を加味した新たな画素データが生成されるのである。ここに、第一番目の画素は元画素データがそのまま採用される。

[0114] 尚、元画素とはソース信号を構成する画素で、前記表示部 325の左側或いは右側の何れか一方の視方向に表示される画素を指し、上述のフィルタ処理により隣接画素の値を加味した映像画素の候補として変換処理される。実際に表示に使用される画素数は元画素数の半分であるから、奇数画素或いは偶数画素が採用されることになる。従って、図 14 (b)に示すように、本例では例えば、従来採用されなかった偶数画素の成分データが反映された奇数画素が映像画素として選択される。

[0115] 前記抽出処理手段 342は、図 14 (b)に示すように、新たに生成された画素のうち、偶数配列の画素または奇数配列の画素の何れかの画素群を 1フレームに亘つて抽出することにより前記映像画素データを生成、つまり抽出工程を実行する。このようにして生成された映像画素データは、図 15 (b)に示すように、単に元画素から偶数配列の画素または奇数配列の画素の何れかの画素群を 1フレームに亘つて抽出することによって表示部 325に表示された図 15 (a)に示すような映像に比べて、画素間のデータの変化が大きヽことを示す高周波成分が残されるので、大きく画質が劣化するようなことが無ぐ或る程度の良好な視認性を確保することができるのである。ここに、画素データの変換処理のための演算は RGBの色成分データ、または YUVの輝度、色差データに基づいて行なうことができ、その何れを対象とするものであってもよい。尚、図 15では実際に観察者が見たときの映像を模擬的に示すものであり、変換処理を行なわない元画素データ力抽出された映像画素データにより表示部に表示された映像を示す図 15 (a)では、高周波成分が欠落するため、元の映像から重要なエツジ情報が欠落した状態として見える。図 15 (b)では、隣接画素の情報が抽出画素に加味されるため、元映像の凡そを認識できるようになる。

[0116] また、前記抽出処理手段 342による偶数配列の画素または奇数配列の画素の何れかの画素群の抽出処理に際しては、図 16に示すように、元画素データに隣接する元画素データの輝度または輝度に相当する値 (RGBの平均値等）と元画素データの輝度または輝度に相当する値 (RGBの平均値等）との差分に基づいて偶数または奇数の何れかの画素群を選択することとしてもよ!、。

[0117] 即ち、水平方向に配列されている元画素とその左右に隣接する元画素との輝度の差分を求める処理を 1フレームに亘つて行ない、偶数画素群と奇数画素群で差分を加算し、その値が大なる方の画素群を選択するようにしてもよぐ偶数画素群と奇数画素群で各差分が所定の閾値を超える画素 (特異点)数が多い方の画素群を抽出するものであってもよい。このように構成することにより、輝度変化の大きな画素が選択されることになり、高域成分を強く含む画素が選択され、鮮鋭度が保たれ、良好な視認性を確保することができるようになる。このプロセスを実現するブロック回路を図 1 7に示す。このような抽出処理、つまり偶数画素群と奇数画素群の何れを選択するかの判断は毎フレーム行なう必要が無ぐ図 18に示すように、所定フレーム単位に行なつてもよい。

[0118] また、前記平滑ィ匕処理手段 343により採用されるフィルタ係数は固定されるものに限らず、元画素に隣接する元画素の輝度と元画素の輝度の変化量に基づいて切り替えるように構成してもよい。例えば、図 19 (a) , (b)に示すように、元画素と隣接元画素の輝度の差分が何れも所定の閾値を超えるときには、 1： 2 : 2のフィルタ係数を用いてローパスフィルタ処理を行ない、その他のときには、 1 : 2 : 1のフィルタ係数を用いてローパスフィルタ処理を行なうことにより映像画素の候補画素を獲得するように構成することができる。図 20は 1フレームの元画素の水平同期タイミングで行なわれるフィルタ処理のフローである。即ち、中心画素データが大きな山または谷となるときには一方の隣接画素の影響を強めたフィルタ係数を採用し、そうでないときには通常のフィルタ係数を採用するものである。尚、フィルタ係数の具体的値はこれらの値に限定されるものではなぐ適宜適切な値を可変設定することができる。

[0119] さらに、前記平滑化処理工程において、前記フィルタ係数が、元画素データに隣接する元画素データの輝度 (Y信号)と元画素データの輝度 (Y信号)の差分と、それら間の色差信号 (Cb, Cr信号)の位相差の何れかまたは双方に基づヽて決定されるように構成することができ、これにより、輝度または色の大きな変化に基づいてその影響を取り込んだ処理が可能になり、その結果、映像の鮮鋭性を確保することができるようになる。例えば、図 21は、先ず輝度成分によってフィルタ係数が選択され、このときに通常のフィルタ係数（1 : 2 : 1)が選択されても、色差信号の位相差が閾値より大となるときにはフィルタ係数 ( 1 : 2 : 2)が選択されるように構成することができる。この場合において輝度成分による選択と色差信号の位相差による選択の手順を入れ替えて構成するものであってもよ、。

[0120] 同様に、水平方向に 3画素単位でフィルタ処理する際に、図 22 (a) , (b)、図 23に示すように、フィルタ係数（a : 2 : j8 )の α ( α = lorO) , β ( β = lor2)の値を、任意の元画素の左右に位置する画素を夫々中心としてその両隣の元画素との輝度 (Y信号)の差分と色差信号 (Cb, Cr信号)の位相差の何れかまたは双方に基づ、て決定するように構成するものであってもよい。例えば 3番目力 5番目の 3画素に基づいて 4番目の元画素を変換処理する場合、 3番目の元画素に対するフィルタ係数 exを決定する際には、 2番目の元画素と 3番目の元画素の輝度の差分及び 3番目と 4番目の元画素の輝度の差分が共に所定の閾値よりも大であればフィルタ係数 aを 0に、そうでないときにはノーマルの 1に決定し、 5番目の元画素に対するフィルタ係数 |8を決定する際には、 4番目の元画素と 5番目の元画素の輝度の差分及び 5番目の元画素と 6番目の元画素の輝度の差分が共に所定の閾値よりも大であればフィルタ係数 j8を 2に、そうでないときにはノーマルの 1に決定し、通常のフィルタ係数（1 : 2 : 1)に決定されたときには、さらに対応する元画素について色差信号 (Cb, Cr信号)の位相差が共に所定の閾値より大である力否かを判断してフィルタ係数 OC , βを決定するものである。この場合も、輝度成分による選択と色差信号の位相差による選択の手順を入れ替えて構成することができる。この場合も、変換された画素の奇数番目または偶数番目の何れかの画素が映像画素として抽出される。

[0121] 上述した平滑ィ匕処理工程において、平滑処理の対象となる隣接元画素データの画素数は左右の各 1画素に制限されるものではなぐ圧縮率に基づいて決定されるものである。抽出処理によって欠落する画素成分を確保することが必要であるので、平滑処理の対象画素数を必要以上に多くしても鮮鋭度が確保できず、少な過ぎても高域成分を確保できないのである。そこで、圧縮率に基づいて対象画素数を決定することにより常に安定した結果が得られるようになるのである。

[0122] 以下、さらに、別実施形態を説明する。上述した実施形態では、圧縮処理手段 346 が平滑ィ匕処理手段 343と抽出処理手段 342とで構成されるものを説明した力図 33 に示すように、圧縮処理手段 346が、所定方向に配列され圧縮率に基づいて決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で RGB 成分毎に差分を求める比較手段 343'と、前記比較手段 343'で求められた差分に基づいて前記隣接元画素データの RGB成分の何れかを次の映像画素データの RG B成分の何れかとして抽出する抽出処理手段 342とを備えて構成されるものであってちょい。

[0123] 例えば、前記比較手段 343'で実行される比較工程において、図 24 (a) , (b)に示すように、水平方向に配列され圧縮率に基づ！ヽて決定された所定数の隣接元画素データ（ここでは 50%の圧縮率で 2画素を隣接画素データ数とする）と、前記抽出処理手段 342により直前に抽出された映像画素データ (ここでは、最初の映像画素データは 1番目の元画素データがそのまま抽出される）の間で RGB成分毎に夫々差分を求め、抽出処理工程では、前記比較工程で求められた差分に基づいて前記隣接元画素データのうちから R成分の差分の大なる値、 G成分の差分の大なる値、 B成分の差分の大なる値を個別に抽出して新たな映像画素とするのである。各色成分のうち差分の大なる成分を夫々選択して新たな映像画素データとするので、色の大きく変化する画素成分を取り込むことができ、鮮鋭性を確保することができるのである。

[0124] 前記抽出処理工程において、前記比較工程で求められた RGB成分毎の差分のうち、所定の閾値より小となる成分については、前記隣接元画素データの何れかの成分またはそれらの平均値が次の映像画素データの成分として抽出されるように構成することができ、これにより大きな変化を伴なう画素を特異点として抽出することが可能となる。

[0125] 上述した何れかの圧縮処理手段 346において、前記抽出処理手段 342によって抽出された映像画素データのうち、水平方向と直交する垂直方向に隣接する所定数の映像画素データに対応する元画素データの相関の有無を判別する相関判別手段と、前記相関判別手段で相関があると判別されたときに各映像画素データに対して所定の第二フィルタ演算を施して平滑ィヒ処理して新たな映像画素データを生成する第二平滑化処理手段を備えることにより、圧縮方向と直交する方向における画素の相関を確保して鮮鋭且つ滑らかな映像を確保することができるようになる。

[0126] 例えば、図 25 (a)に示すように、水平方向に沿った nラインと n+ 1ラインに存在する元画素データのうち、垂直方向に隣接する元画素間で輝度の差分を求め、その値が相関の有無を判断する予め決定された所定の閾値よりも小であるときに相関有と判断して、相関が認められるときには nラインと n+ 1ライン間の対応する映像画素間の平均値を n+ 1ラインの新たな映像画素として変換処理し、相関が無いときには抽出処理手段によって抽出された映像画素をそのまま出力することにより、映像画素の垂直方向のスムージング処理を行なうことができる。同図（b)はその際の回路ブロック構成図である。尚、変換処理は隣接する 2ライン間に限るものではなぐ 3ライン以上の複数のライン間で行なうものであってもよ、。

[0127] また、前記相関判別手段における相関の有無の判別は輝度のみならず、前記元画素データの輝度または色差の位相差の何れかまたは双方に基づいて判別することが可能で、前記第二平滑化処理手段において、前記第二フィルタ係数が、前記元画素データの輝度または色差の何れかまたは双方に基づ、て決定されるように構成することも可能である。このようにすれば好みに合わせて垂直方向における輝度または色差のエッジの処理を調整することができるようになる。

[0128] 例えば、エッジ部で第二フィルタ係数を大に設定すれば鮮鋭性の高、映像が得られるようになる。第二フィルタ係数は、図 26 (a)に示すように、 nラインを中心として垂直方向に 1ラインずつの 3ラインにおける垂直方向に配列された映像画素に対応した元画素の相関を例えば輝度の差分で判断し、相関があるときに垂直方向に配列される 3つの映像画素を 1： 2 : 1のフィルタ係数で平滑ィ匕処理することで、滑らかな映像が得られ、図 26 (b)に示すように、フィルタ係数（a、 β 0、 ω )を相関の有無によって可変設定するものであってもよい。この場合、係数 α、 Θは相関有のとき 1に、相関無しのときに 0に設定され、係数 |8は係数ひ、 Θの値に依存して決定される。尚、第二平滑化処理の対象データは前記抽出処理手段によって抽出された映像画素データであり、その演算対象は RGB色成分データ、 YUVデータの何れであってもよい。

[0129] さらに、前記第二平滑化処理手段において決定される第二フィルタ係数が、元画素データの色信号 Cに基づいて決定されるものであってもよい。例えば、ソース信号が NTSC方式で得られる場合、輝度信号 Yと色信号 Cの周波数が異なることからコンポジット信号から輝度成分を除去するバンドパスフィルタを設けて色成分を分離することができる。しかし、単にバンドパスフィルタのみでは輝度成分を完全に除去できないため、色信号 Cがライン毎に位相が反転していることに着目してライン間で減算して平均値を求める減算回路が必要となる。この色信号の差分が所定の閾値より大であるか小であるかによりライン間の相関を判別することができる。そして、図 32に示すように、このときの相関の有無の判別にその減算回路を兼用することにより、別途の相関判定回路を設ける必要が無くなるという利点が生じる。

[0130] またさらに、水平方向に配列され圧縮率に基づいて決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で輝度の差分を求める比較手段と、前記比較手段で求められた差分に基づいて前記隣接画素データの何れかを次の映像画素データとして抽出する抽出処理手段を備えて圧縮処理手段を構成してもよい。

[0131] 例えば、圧縮率に基づいて決定された隣接元画素データ数が 2のとき、図 27 (a) ,

(b) , (c)に示すように、最初の映像画素として最初に配列される左端の元画素を抽出し、当該映像画素を基準画素として 2番目と 3番目の 2つの元画素データ (これらを同図（c)では比較画素 1と比較画素 2と記す。）と夫々輝度を比較する。その差分が大なる画素を次の映像画素として抽出するとともに基準画素とする。図 27 (b)では、基準画素と比較画素 1の輝度の差分が基準画素と比較画素 2の輝度の差分より大であれば次の映像画素（丸で囲まれた数字 2Ίとして比較画素 1つまり 2番目の画素が抽出され、基準画素と比較画素 2の輝度の差分が基準画素と比較画素 1の輝度の差分より大であれば次の映像画素（丸で囲まれた数字 2Ίとして比較画素 2つまり 3番目の画素が抽出されることを示す。さらに、抽出された映像画素 (丸で囲まれた数字 2 Ίを基準画素として、 4番目と 5番目の画素（比較画素 1、比較画素 2とする）の輝度と夫々比較して大なる方を 3番目の映像画素（丸で囲まれた数字 3Ίとして抽出するもので、水平ラインに配列された元画素に沿って基準画素と次の 2つの元画素との輝度の差分を求めるという処理を繰り返すのである。これによれば、基準画素に対する輝度の差分が大なる元画素が選択されるので、コントラストの良好な映像が得られるようになるのである。

[0132] 図 28 (a)に示すように、基準画素と候補とする所定数の元画素との輝度を夫々比較し、何れもが所定の閾値以上であるときには、前述の比較工程を実施して次の映像画素を抽出し、図 28 (b)に示すように、一方の比較画素が所定の閾値以上で他方の比較画素が所定の閾値未満であるときには、一方の比較画素を次の映像画素として抽出し、図 28 (c)に示すように、何れもが所定の閾値未満であるときには、前記隣接元画素データの平均値が次の映像画素データとして抽出されるように構成することができる。この場合、基準画素に対する輝度の差分が大となる元画素が選択されるので、コントラストの良好な映像が得られるようになるとともに、輝度がそれほど変化しない元画素に対しては、平均処理を行なうことで滑らかな画像が得られるようになる。また、図 28 (d)に示すように、比較工程で直前に抽出された映像データと比較される前記隣接画素データ間の輝度の差分が所定の閾値未満であるときには、前記隣接画素データの平均値が次の映像画素データとして抽出されるように構成し、図 28 (e) に示すように、比較工程で直前に抽出された映像画素データと比較される前記隣接元画素データ間の輝度の差分が所定の閾値以上のときに比較するように構成してもよい。さらに、図 28 (f)に示すように、比較工程で求められた輝度の差分の差分が所定の閾値未満であるときには、前記隣接元画素データの平均値が次の映像画素データとして抽出されるように構成し、図 28 (g)に示すように、比較工程で求められた輝度の差分の差分が所定の閾値未満であるときには、前記所定の閾値以上のときに比較するように構成してもよい。何れの場合であっても、輝度がそれほど変化しない元画素に対しては、平均処理を行なうことで滑らかな映像が得られる。

[0133] ここで、水平方向に配列され、圧縮率に基づいて決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で輝度の差分を求め、求めた差分が同一であるか、求めた差分の何れもが所定の閾値未満であるか、求めた差分の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データと前記映像画素データの間で色差信号 (Cb, Cr)の位相差を求める比較手段と、前記比較手段で求められた位相差が最大となる元画素データを映像画素データとして抽出する抽出処理手段を備えて圧縮処理手段を構成してもよヽ。

[0134] さらに別の実施形態では、水平方向に配列され、圧縮率に基づいて決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で色差信号 (C b, Cr)の位相差を求める比較手段と、前記比較手段で求められた位相差に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理手段を備えて圧縮処理手段を構成してもよい。この方式では、図 29 (a) , (b) , ( に示すように、元画素の色の変化がある部分の欠落を防止することができる。尚、図中、丸で囲まれた数字 2'及び 3Ίま、図 27と同様、比較の結果、抽出された映像画素を示す記号である。

[0135] この場合、図 30 (d)に示すように、求められた位相差が何れも所定の閾値未満であるときに、前記隣接元画素データの色差信号から求まる彩度（= (Cb2 + Cr2) 1/2) に基づ!/、て前記隣接元画素データの何れか、例えば彩度の大なる画素が次の映像画素データとして抽出されるように構成することもできる。

[0136] また、図 30 (c)に示すように、隣接元画素データの色差信号から求まる互!、の位相差が何れも所定の閾値未満であるときに、前記隣接元画素データの色差信号力求まる彩度に基づいて前記隣接元画素データの何れかが次の映像画素データとして抽出されるように構成することも可能である。

[0137] また、水平方向に配列され圧縮率に基づいて決定された所定数の隣接元画素データと、直前に抽出された映像画素データの間で色差信号力求まる彩度の差分を求める比較手段と、前記比較手段で求められた彩度の差分に基づいて前記隣接元画素データの何れかを次の映像画素データとして抽出する抽出処理手段とから圧縮処理手段を構成してもよい。この場合には、図 30 (a)に示すように、基準画素に対して比較画素 1は位相差が小さいが彩度が大きぐ比較画素 2は位相差が大きいが彩度が小さい場合に、彩度の大きな比較画素 1を抽出することができるようになる。図 3 0 (b)に示すように、彩度に閾値を設けて閾値以上の元画素を抽出してもよいし、図 3 0 (e)に示すように、基準画素の彩度と比較画素の彩度の差分の差分を求め、その値が所定の閾値より大となる元画素を抽出するように構成してもよい。

[0138] さらに、比較工程において、求められた彩度が何れも所定の閾値未満であるときに、前記隣接元画素データと直前に抽出された映像画素データの間で輝度の差分が求められ、前記抽出処理工程において、輝度の差分値に基づいて前記隣接元画素データの何れかが次の映像画素データとして抽出されるものであってもよい。

[0139] 上述の何れかの実施形態において、基準画素と比較画素の位相を arc tanを用いて求める場合には、図 31 (a)に示すような ROMや割り算回路が必要となる等、回路規模だが大きくコストが嵩む不都合がある。そこで、図 31 (b) , (c)に示すように、色差信号 Cb, Crの正負の符号から位相の象限を判定し、さらに Cb, Crの絶対値から全体を 8つに等分割することで、大まかな位相を検出することが可能になる。この方法による場合には、回路規模が大幅に縮小され、コストが低減されるようになる。

[0140] 上述の実施形態では、何れも圧縮方向が水平方向のものを説明したが、これに限定されるものではなぐ縦方向に圧縮されるものであっても同様の処理が可能である。先の実施形態では、圧縮率が 50%に設定されたものを説明したが、圧縮率も同様にこの値に限定されるものではなぐ適宜設定された圧縮率に対して適用できるものである。

[0141] 上述の実施形態で示した夫々の装置及び方法は本発明の作用効果をそうする限りにおいて適宜組み合わせて実現することができる。また、個々の具体的回路構成は公知の技術を用いて適宜構成されるものである。

[0142] 上述した実施形態では、マルチビュー表示装置として、特開 2004— 206089号公報に記載されたような液晶パネルを用いた場合について説明した力これに限定されるものではなぐ特開 2003— 15535号公報に記載されたような構成を採用するもの等の他、有機 ELやプラズマディスプレイ、 CRT、 SED等を用いて構成されたマルチビユー表示装置一般に対しても同様に適用することができる。

[0143] 上述した実施形態では、車両に搭載されたマルチビュー表示装置について説明したが、これに限定されるものではなぐ家庭用の表示装置に適用することもできる。

[0144] 尚、本例では二方向のマルチビューとした力その他、三方向や四方向等複数の方向のマルチビューとして適用することも可能である。その場合、画素群としてはその方向の数だけ分散配置されることになる。

Claims

請求の範囲

[1] 映像ソース信号を構成する複数の元画素データに基づ、て複数の新たな画素データを変換生成する変換処理工程と、前記変換処理工程で変換処理された複数の新たな画素データから映像信号を生成するための所定数の画素データを抽出する抽出処理工程とを備え、

前記変換処理工程は、前記抽出処理工程による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づ、て新たな画素データを変換生成する映像信号処理方法。

[2] 前記抽出処理工程は、前記変換処理工程で変換生成された新たな画素データに対応する元画素データとその隣接元画素データとの輝度の差分に基づいて、抽出すべき新たな画素データを決定する請求項 1記載の映像信号処理方法。

[3] 前記変換処理工程は、任意の元画素データと少なくともその隣接元画素データとの間で所定のフィルタ演算による平滑ィ匕処理を行なって新たな画素データを生成する請求項 1記載の映像信号処理方法。

[4] 前記変換処理工程は、元画素データとその隣接元画素データとの輝度の差分と色差信号の位相差の何れ力または双方に基づいて新たな画素データを生成する請求項 1記載の映像信号処理方法。

[5] 前記変換処理工程において、新たな画素データを変換生成する対象となる隣接元画素データの数は、前記抽出処理工程における画素データの抽出数によって決定される請求項 1記載の映像信号処理方法。

[6] 映像ソース信号を構成する複数の画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理工程を備え、前記抽出処理工程は、所定数の隣接元画素データと、直前に抽出された映像画素データとの RGB成分毎の差分に基づき、前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れかとして抽出する映像信号処理方法。

[7] 前記抽出処理工程は、前記 RGB成分毎の差分のうち、所定の閾値より小となる成分につ!、ては、前記隣接元画素データの何れかの成分またはそれらの平均値が次の映像画素データの成分として抽出される請求項 6記載の映像信号処理方法。

[8] 映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理工程を備え、前記抽出処理工程は、所定数の隣接元画素データと、直前に抽出された映像画素データとの輝度の差分に基づき、前記隣接元画素データの何れかを抽出する映像信号処理方法。

[9] 前記抽出処理工程は、前記輝度の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データの平均値を次の映像画素データとして抽出する請求項 8記載の映像信号処理方法。

[10] 前記抽出処理工程は、直前に抽出された映像画素データと比較される前記隣接元画素データ間の輝度の差分の何れもが所定の閾値未満であるときには、前記隣接元画素データの平均値を次の映像画素データとして抽出する請求項 8記載の映像信号処理方法。

[11] 前記抽出処理工程は、前記輝度の差分の差分が所定の閾値未満であるときには、前記隣接元画素データの平均値を次の映像画素データとして抽出する請求項 8記載の映像信号処理方法。

[12] 映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理工程を備え、前記抽出処理工程は、所定数の隣接元画素データと、直前に抽出された映像画素データとの色差信号の位相差、直前に抽出された映像画素データとの色差信号から求まる彩度の差分の少なくとも 1つに基づき、前記隣接元画素データの何れかを抽出する映像信号処理方法。

[13] 前記元画素データと、前記元画素データに隣接する隣接元画素データの隣接方向に直交する方向に隣接する所定数の直交隣接元画素データとの相関を判別し、相関があると判別されたときは、抽出された新たな画素データに所定の演算を施して第 2の新たな画素データを生成する演算処理工程を有する請求項 12記載の映像信号処理方法。

[14] 前記演算処理工程は、前記元画素データと前記直交隣接元画素データとの輝度の差分または色差信号の位相差に基づいて相関の有無を判別し、前記元画素データの輝度の差分、色差信号の位相差及び色信号の少なくとも 1つに基づいて演算処理を施す請求項 13記載の映像信号処理方法。

[15] 映像ソース信号を構成する複数の元画素データに基づ!、て複数の新たな画素データを変換生成する変換処理手段と、前記変換処理手段で変換処理された複数の新たな画素データから映像信号を生成するための所定数の画素データを抽出する抽出処理手段とを備え、

前記変換処理手段は、前記抽出処理手段による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づ、て新たな画素データを変換生成する映像信号処理装置。

[16] 映像ソース信号を構成する複数の画素データから映像信号を生成するための所定数画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接画素データと、直前に抽出された映像画素データとの RG B成分毎の差分に基づき、前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れかとして抽出する映像信号処理装置。

[17] 映像ソース信号を構成する複数の元画素データから映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの輝度の差分、直前に抽出された映像画素データとの色差信号の位相差、直前に抽出された色差信号力求まる彩度の差分の少なくとも何れかに基づき、前記隣接元画素データの何れかを抽出する映像信号処理装置。

[18] 映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データに基づ、て複数の新たな画素データを変換生成する変換処理手段と、前記変換処理手段で変換処理された複数の新たな画素データ力映像信号を生成するための所定数の画素データを抽出する抽出処理手段とを備えてなる表示装置であって、

前記変換処理手段は、前記抽出処理手段による画素データの抽出を考慮して、任意の元画素データ及び少なくともその隣接元画素データに基づ、て新たな画素データを変換生成する表示装置。

[19] 映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データ力映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、

前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの RGB成分毎の差分に基づき、前記隣接元画素データの RGB成分の何れかを次の映像画素データの RGB成分の何れ力として抽出する表示装置。

[20] 映像信号に基づいて複数の視方向に対する個別の映像を同一画面上に表示可能な表示部と、映像ソース信号を構成する複数の元画素データ力映像信号を生成するための所定数の元画素データを映像画素データとして抽出する抽出処理手段を備え、

前記抽出処理手段は、所定数の隣接元画素データと、直前に抽出された映像画素データとの輝度の差分、直前に抽出された映像画素データとの色差信号の位相差、直前に抽出された色差信号力も求まる彩度の差分の少なくとも何れかに基づき、前記隣接元画素データの何れかを抽出する表示装置。