JP2010004176A - 画像表示装置およびその制御方法 - Google Patents

Abstract

【課題】分割された複数の画像を共通の補正回路で補正可能にすると共に、表示までの遅延時間を低減する。
【解決手段】画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置は、表示すべき画像に対応する画像信号を受信し、受信した画像信号を部分画像別にバッファに保持し、複数の部分画像の各々に対して対応する表示部の光学系に応じた補正が加わるように画像信号を補正する。ここで、バッファに保持されている画像信号が構成する部分画像毎に、補正処理の速度を変更することにより、所定の時間で当該画像の全体の補正を完了させる。
【選択図】 図１

Description

本発明は、複数の画像表示素子に表示された原画の一部が重なるようにして一つの合成画像に合成して観察者に観察画像を提供する光学系を有する画像表示装置に関し、特にその光学系の歪みを補正する技術に関する。

近年、現実世界と仮想世界をリアルタイムにシームレスに融合させる技術として複合現実技術、いわゆるＭＲ（Mixed Reality）技術が知られている。このようなＭＲ技術や仮想現実技術では、ＨＭＤ（Head Mounted Display）を用いて、復号現実画像や仮想現実画像を提供することが多い。例えば、ＭＲ技術の１つに、ビデオシースルーＨＭＤを利用して、復号現実画像を使用者に提示する技術がある。即ち、ＨＭＤ使用者の瞳位置から観察される被写体と略一致する被写体をビデオカメラなどで撮像し、その撮像画像にＣＧ（ComputerGraphics）を重畳した画像をＨＭＤの使用者が観察できる用に表示する。

図２０はＨＭＤ使用者がＨＭＤ９００を装着している時の図である。ＨＭＤ使用者はＨＭＤ９００を用いることでＭＲ空間を体験することが可能となる。

ＨＭＤの観察光学系として、臨場感を高めるために広画角の画像表示が可能なものが求められる。また、頭部に装着した際に疲労感を与えないような軽量かつ小型のものが求められる。軽量・小型であり広画角の画像表示が可能な観察光学系を実現するためには、表示素子が大きい方が望ましい。しかし、従来のＨＭＤの観察光学系の構成で広画角化を実現できるような大型の表示素子は汎用品が少ない。そこで汎用品が多い小型の表示素子を複数用いて、それぞれ異なる視野に対応する画像を原画として表示させて、それら複数の原画を一つの画像に合成して観察させる観察光学系がある。このような観察光学系による画像の表示形態をタイリング表示という。

例えば、複数の面からなるプリズムを用いて、光路を光学素子内で複数回反射して折りたたむことにより、光学系の最小化を目指したものとして５つの曲面からなる光学素子を用いたものが提案されている。３面からなるプリズムを、視軸に関して対称になるように接合したような５面からなる形状をしている。２枚の表示素子からの画像光を、プリズム内の各々のエリアで複数回内部反射させて折りたたみ、画角の半分ずつの画像光を２つのエリアで分担して眼球に導いている。図２１は、特許文献１に記載の光学系について説明する図である。９０１、９０２はタイリング表示用の分割画像を表示するための第１、および第２の表示パネル、９０３、９０４は第１、および第２の表示パネル９０１、９０２の各表示画像を観察位置に導くための自由曲面プリズムを示している。

観察光学系が９０３、９０４と複数存在するため、観察光学系９０３と９０４の個体差や、観察光学系が異なった場合、観察光学系で発生する歪みの補正を表示パネル毎に行う必要がある。表示パネル（または装置）毎の補正を行うために、表示パネル毎に補正回路を設けて補正を行う技術が、特許文献２に記載されている。また特許文献３では、１つの補正回路で、複数の表示パネルの補正を行う技術が記載されている。
特開平１１−３２６８２０号公報 特開平０６−１７８２４４号公報 特開２００２−０７２３５９号公報

しかしながら、特許文献２では、表示パネル毎の補正回路を設ける必要があるため、回路規模を小さくするのが困難であった。

また、特許文献３では、表示パネルの補正を行う前に１枚の画像を全てバッファに保存し、この後、表示パネル毎に画像を分割して、分割した画像毎に一つの補正回路で補正を行っている。そのため、特許文献３の方法では、ＨＭＤが画像を受信してから実際に表示されるまでの遅延が大きくなってしまう。特に、ＭＲ技術においては、ＨＭＤにおける表示までの遅延時間を短くする必要があるため、遅延を極力少なくする必要があり、上記方法はこの点において不利である。

以上のように、特許文献２に記載された技術では、表示パネル毎に補正回路を設けると、回路規模を小さくするのが困難であった。また、特許文献３に記載された技術では、分割前に１度、１枚分の全画像をバッファに保存するため、表示までの遅延を少なくすることが困難であった。

本発明は、上記の課題に鑑みてなされたものであり、分割された複数の画像を共通の補正回路で補正可能にすると共に、表示までの遅延時間を低減した画像表示装置及びその制御方法を提供することを目的とする。

上記目的を達成するための本発明の一態様による画像表示装置は以下の構成を備える。すなわち、
画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置であって、
前記画像に対応する画像信号を受信する受信手段と、
前記受信手段で受信した画像信号を部分画像別にバッファに保持する保持手段と、
前記複数の部分画像の各々に対して対応する表示部の光学系に応じた補正が加わるように前記画像信号を補正する補正手段と、
前記バッファに保持されている画像信号が構成する部分画像毎に、前記補正手段による補正処理の速度を変更する制御手段とを備える。

また、上記目的を達成するための本発明の一態様による画像表示装置は以下の構成を備える。すなわち、
元の画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置であって、
前記元の画像を受信する受信手段と、
前記元の画像から得られる複数の部分画像の全ライン数が、前記元の画像の全ライン数となるように、受信した前記元の画像の解像度を変換する第１変換手段と、
前記第１変換手段により解像度変された画像から得られる複数の部分画像の各々について、対応する表示部の光学系に応じた補正が加わるように補正処理を行う補正手段と、
前記補正手段で補正された複数の部分画像の各々の解像度を、前記補正された複数の部分画像の全ライン数が前記元の画像から得られる複数の部分画像の全ライン数となるように変換する第２変換手段と、
前記第２変換手段により解像度変換された後の複数の部分画像を、前記複数の表示部に表示する表示手段とを備える。

また、上記目的を達成するための本発明の他の態様による画像表示装置の制御方法は以下の工程を有する。すなわち、
画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置の制御方法であって、
前記画像に対応する画像信号を受信する受信工程と、
前記受信工程で受信した画像信号を部分画像別にバッファに保持する保持工程と、
前記複数の部分画像の各々に対して対応する表示部の光学系に応じた補正が加わるように前記画像信号を補正する補正工程と、
前記バッファに保持されている画像信号が構成する部分画像毎に、前記補正工程による補正処理の速度を変更する制御工程とを有する。

また、上記目的を達成するための本発明の他の態様による画像表示装置の制御方法は以下の工程を有する。すなわち、
元の画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置の制御方法であって、
前記元の画像を受信する受信工程と、
前記元の画像から得られる複数の部分画像の全ライン数が、前記元の画像の全ライン数となるように、受信した前記元の画像の解像度を変換する第１変換工程と、
前記第１変換工程で解像度変された画像から得られる複数の部分画像の各々について、対応する表示部の光学系に応じた補正が加わるように補正処理を行う補正工程と、
前記補正工程で補正された複数の部分画像の各々の解像度を、前記補正された複数の部分画像の全ライン数が前記元の画像から得られる複数の部分画像の全ライン数となるように変換する第２変換工程と、
前記第２変換工程で解像度変換された後の複数の部分画像を、前記複数の表示部に表示する表示工程とを有する。

本発明によれば、分割された複数の画像を共通の補正回路で補正可能にすると共に、表示までの遅延時間を低減することができる。

以下添付図面を参照して、本発明を好適な実施形態に従って詳細に説明する。

＜第１実施形態＞
第１実施形態では、タイリング光学系を有するＨＭＤにおいて、画角を分割してタイリング表示を行う各表示素子に表示する画像の補正方法について説明する。上述したように、タイリング光学系では、隣接する部分画像が重複する領域を有する、複数の部分画像に画像が分割され、複数の部分画像のそれぞれが複数の表示部に表示される。そして、これら複数の表示部に表示された複数の部分画像を観察者に１つの画像として観察させる。第１実施形態では、垂直方向に２つの表示素子で分割してタイリング表示を行う事を前提とする。即ち、部分画像は上下方向に隣接する。

図１は、第１実施形態に係る頭部装着型の画像表示装置（ビデオシースルーＨＭＤ）におけるシステム構成を示すブロック図である。第１実施形態のＨＭＤ１００によれば、タイリング表示を実施しながら、片眼に対して補正部は１つでよく、かつ表示までの遅延を少なくして画像を表示することができる。

ＨＭＤ１００は、ＨＭＤに表示する画像を撮像する撮像素子１０１Ｌ、１０１Ｒ、撮像画像とＣＧ画像の合成画像を表示する表示部１０２Ｌ、１０２Ｒ、画像や信号を送受信する送受信Ｉ／Ｆ１０６を有する。即ち、送受信Ｉ／Ｆ１０６は、表示すべき画像に対応する画像信号を受信する。また、ＨＭＤ１００は、送受信Ｉ／Ｆ１０６を介して受信した画像の一部を保存するバッファ部１０３Ｌ、１０３Ｒ、受信した画像を表示するための補正を行う補正部１０４Ｌ、１０４Ｒを有する。例えば、補正部１０４Ｌ，１０４Ｒは、それぞれ歪み補正、色収差補正の少なくともいずれかを含む補正を行う。更に、ＨＭＤ１００は、上述した各構成を制御する制御部１０５を備える。表示部１０２Ｌは、表示素子１０２１Ｌ、１０２２Ｌから構成されており、表示素子１０２１Ｌ、１０２２ＬにはそれぞれＨＭＤ１００の使用者の左眼で観察される画像の上側と下側が表示される。同様に、表示部１０２Ｒは、表示素子１０２１Ｒ、１０２２Ｒから構成されており、表示素子１０２１Ｒ、１０２２ＲにはそれぞれＨＭＤ１００の使用者の右眼で観察される画像の上側と下側が表示される。

ＨＭＤ１００は、左眼と右眼の各画像に対して個々に処理機能を有する。図１において、左右で同じ機能を有する各部に関しては、左眼用の符号にＬ，右眼用の符号にＲを付けている。以降の説明において、特に左眼と右眼で区別する必要がない場合は、符号Ｌ、Ｒを省略して数字のみで表記する。

表示素子１０２１、１０２２で表示した画像は光学系を介して、ＨＭＤ１００の使用者の眼に導かれる。受信した画像をそのまま表示素子で表示すると、ＨＭＤ１００の使用者は光学系の歪みがかかった画像を観察することになる。そのため、補正部１０４では、光学系を介した画像が歪まずに観察者に観察できるような補正を行う。

画像処理ユニット１２０は、ＰＣやＷＳなどで構成される。画像処理ユニット１２０において、送受信Ｉ／Ｆ１２２は、ＨＭＤ１００の撮像系（撮像素子１０１）からのデジタル画像信号を受信し、ＨＭＤ１００へデジタル画像信号、データ信号を送信する。また、ＣＧ描画部１２１Ｌ、１２１Ｒは、受信した撮像画像とＣＧ画像を合成し、ＭＲ画像を生成する。

ＨＭＤ１００は、撮像素子１０１Ｌ、１０１Ｒで撮像した画像を、送受信Ｉ／Ｆ１０６を介して画像処理ユニット１２０に送信する。画像処理ユニット１２０では受信した撮像画像に対してＣＧ描画部１２１Ｌ、１２１ＲでＣＧ画像の合成を行い、合成処理された画像をＨＭＤ１００へ送信する。ＨＭＤ１００では画像処理ユニット１２０より受信した画像を、表示部１０２で表示する。こうして、ＨＭＤ１００の使用者はリアルタイムに撮像した画像へＣＧ画像が重畳された合成画像を見ることが可能となる。

以上の構成により、ビデオシースルーＨＭＤを装着することで、現実世界と仮想世界とがリアルタイムにシームレスに融合した複合現実世界を体験できる。

図３は、本実施形態での各表示素子への画像の表示と、その際のＨＭＤ１００の使用者が観察できる画像を説明する図である。上部の画像３０１は垂直方向に５６２ラインで、上部の表示素子１０２１に表示される画像であり、下部の画像３０２は垂直方向に５６２ラインで、下部の表示素子１０２２に表示される画像である。画像３０１、３０２では同じ画像を表示する場所が１００ライン存在する。つまり光学系の補正を行わない場合、この１００ラインにはそれぞれの表示素子で同じ画像が表示されることになる。光学系を通すことでＨＭＤ１００の使用者には、画像３０３のように垂直方向へ１０２４ラインの画像として観察される。

なお、本実施形態では、図３のように垂直方向へ均一に分割するような例で説明するが、均一に分割しなくてもよい。均一に分割しない場合、１ライン中に上側の画像と下側の画像が混在することになるが、重なり個所として処理される領域であるため、以下で説明する処理をそのまま適用しても何等問題は無い。

表示素子１０２１と１０２２では、別の光学系を通るため、表示素子１０２１に表示する画像３０１と１０２２に表示する画像３０２には、それぞれ異なった補正を行う必要がある。図２の（ａ）は、ＨＭＤ１００の補正部１０４Ｌ近辺の詳細ブロック図である。補正部１０４Ｌでは補正を行う補正処理部１０４０Ｌ、表示素子１０２１Ｌへの表示に必要な補正テーブルＡ１０４１Ｌ、表示素子１０２２Ｌへの表示に必要な補正テーブルＢ１０４２Ｌを有している。なお、本実施形態では、補正テーブルは補正部１０４Ｌの中にあるとして説明するが、補正部１０４Ｌの外のメモリ内にあってもよい。なお、図２０の（ａ）では、左目用の補正系の構成を示したが、右目用の補正系の構成も同様である。

続いて、本実施形態における画像の補正処理について、図４に示すフローチャートを用いて説明する。本実施形態の説明で使用する上部の画像とは、図３の画像３０１の上画像と画像３０１の重なり個所とを含む画像を示す（上画像は上部の画像３０１から重なり個所を除いた画像である）。また、下部の画像とは、図３の画像３０２の下画像と画像３０２の重なり個所とを含む画像を示す（下画像は下部の画像３０２から重なり個所を除いた画像である）。

図４のフローチャートによって示される処理は、動画像の１フレームの画像を受信した時に開始され、画像信号の一ライン毎に実行される。なお、以下では左目用の表示系について説明するが、右目用の表示系でも同様の処理が行われる。まずステップＳ１００において制御部１０５は受信した画像データが、上部の画像３０１の上画像に表示すべきライン内であるかを判定する。上画像である場合は、ステップＳ１０３において、制御部１０５の制御のもとに補正処理部１０４０Ｌは、補正テーブルＡ１０４１Ｌのテーブルを元に画像の補正を行う。

ステップＳ１００において、上画像でないと判定した場合、ステップＳ１０１において、制御部１０５は、当該受信した画像のライン信号をバッファ部１０３に保存する。そして、ステップＳ１０２において、受信した画像データが重なり個所の画像であるか判定する。つまり画像３０１の重なり個所の画像であるかを判定する。ステップＳ１０２において重なり個所の画像であると判定された場合、ステップＳ１０３において、制御部１０５の制御のもと、補正処理部１０４０Ｌは、補正テーブルＡ１０４１Ｌのテーブルを元に画像に対して補正を行う。ステップＳ１０２において重なり個所の画像でないと判定された場合は、処理は、そのままステップＳ１０４へ進む。ステップＳ１０５以降の処理では、下部の画像３０２に対する補正処理を行うが、受信した下画像に対応する信号は引き続きバッファ部１０３Ｌに格納されていくのものする。

以上の処理によれば、バッファ部１０３Ｌには、下部の表示素子１０２２Ｌに表示すべき部分画像がバッファ部１０３に保持される。これは、受信した画像信号を部分画像別にバッファに保持するという概念である。但し、第１実施形態では、送受信Ｉ／Ｆ１０６による画像信号の受信の順序において先頭の部分画像（上部の画像）に対しては、受信に同期して補正処理を加えている（ステップＳ１０３）。そのため、上部の部分画像に対してはバッファを省略している。即ち、２番目以降の部分画像に対応する画像信号が、部分画像別にバッファに保持されることになり、第１実施形態で下部の画像のみがバッファにほじされることになる。

ステップＳ１０４において、制御部１０５は、画像３０１（重なり個所を含めた上部の画像）の補正が終了したかを判定する。これは、つまり表示素子１０２１Ｌへ表示する画像の補正が終了したかの判定である。上部の画像の補正が終了していないと判定された場合は、ステップＳ１００の処理に戻る。上部の画像の補正が終了した場合は、ステップＳ１０５以降の処理を実施する。

ステップＳ１０５において、制御部１０５は、重なり個所を含めた下部の画像補正を当該１フレーム内の画像で初めて行うかを判定する。初めてではない場合はステップＳ１０９の処理へ遷移し、初めての場合はステップＳ１０６からＳ１０８の処理が実行される。ステップＳ１０６において、制御部１０５は、受信する画像のフォーマットと、重なり個所の垂直方向のライン数から、動画像中の１フレーム画像の終了までに補正を終了させるために必要となる処理クロックの周波数（クロックスピード）を計算する。なお、本フローチャートでは動画像の１フレーム毎に計算するようにしているがこれに限られるものではない。例えば、テーブルから読み出すようにしてもよいし、画像処理ユニット１２０との通信ネゴシエーション時に決定してもよいし、画像処理ユニット１２０から受信する画像フォーマットが変更した時に決定するようにしてもよい。ステップＳ１０７において、制御部１０５は、現在動作しているクロックスピードとステップＳ１０６で計算したクロックスピードとを比較し、クロックスピードを変更する必要があるかを判定する。ここでは、［現在動作しているクロックスピード］＜［ステップＳ１０６で計算したクロックスピード］の場合にクロックスピードを変更する必要があると判定される。以下、クロックスピードを変更することを単にクロックを変更すると記載する場合もある。クロックを変更する必要があると判定した場合、ステップＳ１０８において、制御部１０５は、バッファ部１０３Ｌと表示素子１０２２Ｌの間のクロックスピードをステップＳ１０６で計算したクロックスピードに変更する。より具体的には、補正部１０４Ｌ、表示素子１０２２Ｌ、補正部１０４Ｌと表示素子１０２２Ｌの間、補正部１０４Ｌとバッファ部１０３Ｌの間が変更対象となる。

ここで、重なり個所のライン数による、クロック数を変更する必要性について図５を用いて説明する。図５の（ａ）は、受信画像と補正する画像のタイミングチャートの図である。５３０２は受信した１フレームの画像信号を示している。画像受信前にはフロントポーチ５３０１、画像受信後にはバックポーチ５３０３といった、画像を受信していない時間が存在する。例えば、ＳＸＧＡ（１２８０×１０２４）、６０Ｈｚの場合、フロントポーチ５３０１で１ライン、バックポーチで３８ライン分の時間が存在する。重なり個所の画像については、表示素子１０２１Ｌに表示するための補正と、表示素子１０２２Ｌに表示するための補正と、２つの補正を行う必要がある。また、同じ画像エリアに対して異なる補正を行う個所が存在する。これらのため、図５の（ａ）の補正（Ａ）、補正（Ｂ）のようなタイミングチャートとなり、１フレームの画像を受信する時間よりも補正処理に必要な時間の方が多くなってしまう。また、１フレームの画像の補正処理は次の画像を受信開始するまでに終了する必要がある。そのため、重なり個所のライン数によっては表示素子１０２２Ｌに表示するための補正処理を速くする必要がある。このように、制御部１０５は、バッファに保持されている画像信号が構成する部分画像毎に、補正部１０４Ｌによる補正処理の速度を変更することで、補正処理を規定の時間内に完了させる。

図４に戻って続きを説明する。ステップＳ１０９において、制御部１０５の制御のもと、補正部１０４Ｌはバッファ部１０３Ｌから画像を読み出す。そして、ステップＳ１１０において、制御部１０５の制御のもと、補正処理部１０４０Ｌは補正テーブルＢ１０４２Ｌを参照して、バッファ部１０３Ｌから読み出した画像を補正する。ステップＳ１１１において下部の画像補正が終了していない場合は、処理はステップＳ１００に戻る。下部の画像補正が終了している場合、つまり１フレームの画像補正が終了した場合、処理はステップＳ１１２へ進む。ステップＳ１１２において、制御部１０５は、ステップＳ１０８で変更したクロックスピードをもとのクロックスピードに戻す。なお、ステップＳ１０３とＳ１１０において、補正処理部１０４０Ｌは補正テーブルを切替えることにより、複数の部分画像の各々に対して対応する表示部の光学系に応じた補正が加わるように画像信号を補正している。

図５の（ａ）では重なり部分が少ないため、フロントポーチ５３０１、バックポーチ５３０３の時間を利用することで、補正処理を切替えた後でもクロックを変更せずに処理を終了できる場合の例が示されている。これに対して、図５の（ｂ）〜（ｄ）では重なり個所が多いため、補正処理を切替えた後、同じクロックではフロントポーチ、バックポーチの時間を利用しても終了しない場合の例が示されている。図５の（ｂ）は、図４のステップＳ１０８で処理クロックが変更され、１フレーム画像受信終了とほぼ同時に補正処理が終了する場合の例である。図５の（ｃ）はバックポーチ５３０３の終了までに補正処理が終了するように処理クロックが変更された場合の例である。図５の（ｄ）は、次フレームのフロントポーチ終了前までに補正処理が終了するように処理クロックが変更した場合の例である。図５の（ｂ）〜（ｄ）では、重なり個所を含めた下部の画像に対して補正を行う際に処理クロックを速くすることで、次のフレームを受信する前までに補正処理が終了している。図４のフローチャートのステップＳ１０８では、次フレームのフロントポーチ終了まで（次のフレームの画像を受信するまで）に処理を終了するように処理速度が変更されればよい。従って、図５の（ｂ）、（ｃ）、（ｄ）のいずれのタイミングが採用されてもよい。

このように本実施形態ではバッファ部１０３Ｌはライン毎に保存しながら、読み出すためＦＩＦＯ（First-In-First-Out）のようなラインバッファのようなものになる。また、本実施形態では補正部１０４Ｌがバッファ部１０３Ｌから画像を読み出すような説明をしているが、図２の（ｂ）の切替え部２０１Ｌのようなものを用いてもよい。この場合、切替え部２０１Ｌは、補正部１０４Ｌが上部の画像３０１を補正処理している間は補正部１０４Ｌをａ側に、下部の画像３０２を補正処理している間はｂ側に接続する。

以上のように、第１実施形態では、画像を補正する補正部の前にバッファを設け、重なり個所の幅に応じて次フレームの画像受信前に補正処理を終了するようにクロック数を変更する。これによって、片眼に対して補正部は１つでよく、かつ遅延を少なく画像を表示することができる。

＜第２実施形態＞
第１実施形態では、表示を上下に分割したタイリング光学系を用いた時の補正方法について説明を行った。第２実施形態では、表示を左右に分割したタイリング光学系を用いた時の補正方法について説明する。この場合、部分画像は左右方向に隣接する。

図６は第２実施形態における機能ブロック図である。図１と比べると、バッファ部１０３に代えて、バッファ部Ａ１０７、バッファ部Ｂ１０８が設けられている。また、画像を左右に分割して表示を行う表示部１０２には、表示素子１０２３，１０２４が配されているものとする。図７は、ＨＭＤ１００の補正部１０４Ｌの前後における詳細構成を示すブロック図である。図２と比べると、補正部１０４Ｌは表示素子１０２３Ｌへの表示のための補正テーブルＣ１０４３Ｌ、表示素子１０２４Ｌへの表示のための補正テーブルＤ１０４４Ｌを有する。なお、図７では左目用の表示部１０２Ｌに関する系を示したが、右目用の表示部１０２Ｒに関する系も同様である。

図８は、第２実施形態での各表示素子への画像を表示した時と、その際のＨＭＤ１００の使用者が観察する画像の例を示す図である。左部の画像４０１は表示素子１０２３に表示される画像であり、右部の画像４０２は表示素子１０２４に表示される画像である。画像４０１、４０２は重なっているライン数が１００ラインの場合であり、ＨＭＤ１００の使用者は、これらの画像を水平ラインに１２８０ラインの画像として観察することになる。図８では水平方向へ均一に分割した時の例であるが、均一でなくてもよい。この場合、左部の画像と右部の画像とが混在する垂直ラインが存在することになるが、重なり個所に属するため、後述の処理に何等影響を与えないからである。

１フレームの左画像に対して全て補正を行った後、右画像を全て補正して表示を行う方法では、表示までの遅延が大きくなるため、第２実施形態ではブロック単位に区切って補正処理を行う。図９は第２実施形態における補正処理の順番を記載した例である。図９の（ａ）の画像４１０は表示素子１０２３に表示する画像であり、画像４１１は表示素子１０２４に表示する画像である。図９の（ａ）では画像を４つのブロック（部分領域）に分割したときの例であり、画像４１０の上半分が画像４１２であり、下半分が画像４１３である。即ち、１つの部分画像が更に２つの部分領域に分割されている。同様に、画像４１１の上半分が画像４１５であり、下半分が４１６である。この場合、第２実施形態では、補正を画像４１２、画像４１５、画像４１３、画像４１６の順番に実施する。

即ち、第２実施形態では、複数の部分画像の各々を、隣接する部分領域が重複する領域を有する複数の部分領域（ブロック）に分割して得られるそれら部分領域毎に補正処理を行う。ここで、複数の部分領域に対する補正処理の順番を、送受信Ｉ／Ｆ１０６によって受信する画像信号の順番に対応させる。

画像４１２を補正する際、画像４１３との境界部を補正するためには、画像４１３の一部が必要になる場合がある。図９の（ａ）の例では、画像４１４が該当個所となる。図９の（ｂ）は画像を６つのブロックに分割した時に、画像４１７を補正するときに必要な画像エリアを示した例である。このように水平方向に表示素子を分割して表示を行う場合、対象エリアを補正する際には対象エリアより大きいエリアが必要となる場合がある。

画像は、１フレーム単位で受信される。そのため、図９の（ａ）の画像４１５に対して補正処理を行っている時は、画像４１４と画像４１６を受信している。このとき、画像４１４をバッファ部Ａ１０７に、画像４１６をバッファ部Ｂ１０８に保存する。

続いて、本実施形態における画像の補正処理について、図１０に示すフローチャートを用いて説明する。説明で使用する左部の画像とは、図８の画像４０１の左画像と重なり個所とを含む画像である（左画像は左部の画像４０１から重なり個所を除いた画像である）。また、右部の画像とは、図８の画像４０２の右画像と重なり個所とを含む画像である（右画像は右部の画像４０２から重なり個所を除いた画像である）。以下、左目用の表示系の動作について説明するが、右目用の表示系の動作も同様である。

図１０のフローチャートは１フレームの画像の受信を開始した時に始まる。まずステップＳ２００において制御部１０５は、受信した画像が重なり個所を含めた左部の画像かを判定する。左部の画像である場合、制御部１０５は、ステップＳ２０１において、当該画像をバッファ部Ａ１０７Ｌに保存する。次にステップＳ２０２において、制御部１０５は、受信した画像が重なり個所を含めた右部の画像かを判定する。右部の画像である場合、制御部１０５は、ステップＳ２０３において当該画像をバッファ部Ｂ１０８Ｌに保存する。

ステップＳ２０４において、制御部１０５は、ブロック単位での左部の画像の処理が終了したかを判定する。終了していないと判定された場合、ステップＳ２０５において、制御部１０５の制御のもと、補正部１０４Ｌはバッファ部Ａ１０７Ｌから画像を読み出し、ステップＳ２０６において補正処理部１０４０Ｌが補正テーブルＣ１０４３を参照して補正を行う。なお、ステップＳ２０５において、バッファ部Ａ１０７Ｌから画像を読み出す際には、補正に必要な画像の全てが読み出される。例えば、補正対象が図９の（ａ）の画像４１２であり、上のブロックの画像との境界を補正する際には、画像４１２の処理対象の画像と画像４１４を読み出して補正を行う。また、図９の（ｂ）に示される画像４１７の上側の境界部分が補正処理される場合は、処理対象の画像に加えて、画像４１８も読み出されることになる。

ステップＳ２０４でブロック単位での左部の画像の補正処理が終了していると判定した場合は、ステップＳ２０７からステップＳ２１０において処理クロックのスピードの変更を行う。なお、ステップＳ２０７からステップＳ２１０の変更については、第１実施形態の図４のクロック変更処理（ステップＳ１０５〜ステップＳ１０８）と同様であるため説明を省く。

なお、クロックスピードを決定するための処理対象のブロックへ割り当てられる処理時間は次のようにして決定できる。例えば、左部の画像については、通常のクロックスピードが用いられる場合には、
・１フレームに割り当てられた処理時間から左部の画像のために使用される処理時間を差し引き、
・その残りの処理時間を右部の画像のブロック数で割ることで右部の画像の各ブロックの処理時間を決定する。

ステップＳ２１１において、制御部１０５の制御のもと補正部１０４Ｌはバッファ部Ｂ１０８Ｌから画像を読出し、ステップＳ２１２において補正処理部１０４０Ｌが補正テーブルＤ１０４４Ｌを用いて補正を行う。バッファ部Ｂ１０８Ｌから画像を読み出す際も、ステップＳ２０５と同様、補正部１０４Ｌは、補正に必要な画像データを全て読み出す。ステップＳ２１３において、制御部１０５は、ブロック単位での重なり個所を含めた右部の画像の補正が終了したかを判定する。右部の画像の補正が終了したと判定された場合は、ステップＳ２１４において、制御部１０５はステップＳ２１０で変更したクロックを元に戻す。第２実施形態では補正部１０４Ｌがバッファ部Ａ１０７Ｌ、バッファ部Ｂ１０８Ｌから画像を読み出すように説明をしているがこれに限られるものではない。例えば、図２の（ｂ）の切替え部２０１Ｌのような構成を用いて、バッファ部Ａ，Ｂへのアクセスを切り替えるようにしてもよいことは明らかである。

第１実施形態と同様に、クロック変更により、次フレームのフロントポーチ終了までに補正処理が終了すればよい。

図１１は第２実施形態のフローに従った場合の、画像受信と補正処理のタイミングを示すタイミングチャートである。図１１では、図９の（ｂ）に示すように、垂直方向へ３つのブロックに分割し、かつ右側の補正処理のクロックを早くした場合の例が示されている。図１１において５０２は受信した画像であり、５０４、５０６、５０８は重なり個所を含めた左部の画像の補正処理、５０５、５０７、５０９は重なり個所を含めた右部の画像の補正処理を示している。右側の画像に対する補正処理のクロックが早くなっているため、５０５、５０７、５０９の処理時間は短くなっている。図１１の（ａ）では、クロックの変更により、１フレームの画像受信終了と、ほぼ同時刻に補正処理を終了する例が示されている。図１１の（ｂ）では、クロックの変更により、バックポーチ終了前までに補正処理を終了する例が示されている。図１１の（ｃ）では、クロックの変更により、次フレームのフロントポーチ終了前までに補正処理を終了する例が示されている。いずれも、次のフレームの画像を受信するまでに複数の部分画像の全ての補正を終えるように、補正処理の速度が変更されている。

以上のように、第２実施形態では、画像を補正する補正部の前にバッファを設け、垂直方向にブロックに分割して処理を行っている。これによって、左右に分割するような光学系を用いた場合でも片眼に対して補正部は１つでよく、かつ遅延を少なく画像を表示することができる。

＜第３実施形態＞
第１、第２実施形態では、表示を上下または左右へ２つに分割したタイリング光学系を用いた時の補正方法について説明を行った。第３実施形態では、表示を上下３つに分割したタイリング光学系を用いた時の補正方法について説明する。この場合、３つの部分画像が上下方向に隣接することになる。

図１２は第３実施形態における機能ブロック図である。表示を上下３つに分割するため、図１と比べると表示素子、バッファ部がそれぞれ一つ追加され、表示素子１０２５〜１０２７、バッファ部Ｄ１０９，バッファ部Ｃ１１０が設けられている。図１３は、ＨＭＤ１００における補正部１０４Ｌの前後の詳細を示すブロック図である。図２と比べると、補正テーブルが一つ追加され、補正テーブルＥ１０４５Ｌ、補正テーブルＦ１０４６Ｌ、補正テーブルＧ１０４７Ｌを備えた構成になっている。図１３は左目用の系を示すが、右目用の系（補正部１０４Ｒの前後の詳細）も同様である。

図１４は、第３実施形態での各表示素子への画像を表示した場合と、その際のＨＭＤ１００の使用者が観察できる画像の例を示す図である。上部の画像６００は上部の表示素子１０２５Ｌに表示される画像であり、中央部の画像６０１は中央部の表示素子１０２６Ｌに表示される画像であり、下部の画像６０２は下部の表示素子１０２７Ｌに表示される画像である。図１４において、画像６００及び画像６０２は垂直方向に３６２ライン、画像６０１は垂直方向に５００ラインを有する。そして、各表示素子が表示する画像間で重なっているライン数は１００ラインであり、ＨＭＤ１００の使用者には垂直ラインが１０２４ラインの１つの画像として観察される。なお、図１４では、表示素子１０２５Ｌ、１０２７Ｌに表示する画像６００と画像６０２の垂直方向のライン数が同じ（３６２ライン）であるが、これの限りではない。

続いて、第３実施形態における画像の補正処理について、図１５に示すフローチャートを用いて説明する。なお、説明で使用する上部の画像とは、図１４の上画像と画像６００の重なり個所を含む画像を示している（上画像は上部の画像６００から重なり個所を除いた画像である）。また中央部の画像とは画像６０１の中画像と重なり個所を含む画像である（中画像は中央部の画像６０１から２つの重なり個所を除いた画像である）。また、下部の画像とは画像６０２の下画像と重なり個所を含む画像である（下画像は下部の画像６０２から重なり個所を除いた画像である）。

図１５のフローは１フレームの画像の受信を開始した時に始まり、画像信号の一ライン毎に実行される。まずステップＳ３００において制御部１０５は受信した画像が、上画像に表示すべきライン内であるかを判定する。受信した画像が上部の画像である場合は、ステップＳ３０６において、制御部１０５の制御のもとに補正処理部１０４０Ｌは、補正テーブルＥ１０４５のテーブルを元に補正を行う。ステップＳ３００において上画像でなかった場合、ステップＳ３０１において制御部１０５は、受信した画像が中央部の画像６０１に含まれる画像か否か（重なり個所または中画像であるか否か）を判定する。含まれると判定された場合、中央部の表示素子１０２６Ｌに表示する画像であるため、ステップＳ３０２においてバッファ部Ｃ１１０Ｌに当該受信した画像を保存する。次に、ステップＳ３０３において、制御部１０５は、受信した画像が下部の画像６０２（下部の画像の重なり個所または下画像）に含まれるか否かを判定する。含まれると判定された場合、ステップＳ３０４において、制御部１０５は、画像６００（上部の画像の重なり部または上画像）に含まれるか否かを判定する。含まれると判定された場合、上部の表示素子１０２５Ｌに表示する画像であるので、ステップＳ３０６において補正部１０４は補正テーブルＥ１０４５Ｌを用いて補正を行う。

以下の場合、受信した画像は下部の表示素子１０２７Ｌに表示される画像であるため、ステップＳ３０５において、制御部１０５は、受信した画像をバッファ部Ｄ１０９Ｌに保存する。即ち、
・ステップＳ３０１において、受信した画像が中央部の画像６０１（重なり個所及び中画像）に含まれないと判定された場合。
・ステップＳ３０３において下部の画像６０２（重なり箇所及び下画像）に含まれると判定された場合。

ステップＳ３０７において重なり個所を含めた上部の画像の補正が終了したか判定を行い、終了している場合、ステップＳ３０８において制御部１０５は、処理クロック変更Ａの処理を行う。処理クロック変更Ａでは、制御部１０５は、重なり部を含めた中央部の補正処理の処理クロックを変更する必要がるか判定を行い、必要であれば変更を行う。なお、クロックを変更するべきか否か、及びどれだけクロックを変更するかを判断するためには、当該画像の補正処理に割り当て可能な時間を決定する必要があり、例えば、次のようにして割り当てることができる。即ち、１フレームの画像に割り当てられた処理時間のうち上部の画像６００の補正処理を終えた時点の残り時間を、中央部の画像６０１のライン数と下部の画像６０２のライン数との比で分割して割り当てる。処理時間が与えられたならば、中央部の画像６０１のライン数等から処理量がわかるので、必要なクロックスピードを得ることができる。ステップＳ３０８で処理クロックを変更する個所は、表示素子１０２６Ｌ、補正部１０４Ｌ、表示素子１０２６Ｌと補正部１０４Ｌの間、補正部１０４Ｌとバッファ部Ｃ１１０Ｌの間となる。

ステップＳ３０９において重なり個所を含めた中央部の画像に対する補正が終了しているか判定する。終了していなければ、ステップＳ３１０で制御部１０５の制御のもと補正部１０４Ｌはバッファ部Ｃ１１０Ｌから画像を読出す。そして、ステップＳ３１１において、補正処理部１０４０Ｌは、バッファ部Ｃ１１０Ｌから読み出された画像に対して、補正テーブルＦ１０４６を用いて補正処理を行う。

ステップＳ３０９において中央部の画像に対する補正が終了していると判定された場合、ステップＳ３１２において、制御部１０５は、処理クロック変更Ｂの処理を行う。制御部１０５は画像の受信終了までに補正処理が終了するのに必要とする処理クロックを計算し、変更が必要であれば設定する。ステップＳ３１２で処理クロックを変更する個所は、表示素子１０２７Ｌ、補正部１０４Ｌ、表示素子１０２７Ｌと補正部１０４Ｌの間、補正部１０４Ｌとバッファ部Ｄ１０９Ｌの間となる。制御部１０５の制御のもと、ステップＳ３１３において補正部１０４Ｌがバッファ部Ｄ１０９Ｌから画像を読出し、ステップＳ３１４において補正処理部１０４０Ｌが補正テーブルＧ１０４７Ｌを用いて読み出した画像に対して補正処理を行う。ステップＳ３１５において１フレームの画像補正が終了したと判定された場合、ステップＳ３１６において制御部１０５は変更した処理クロックを元に戻す。第３実施形態では補正部１０４Ｌがバッファ部Ｃ１１０Ｌ、バッファ部Ｄ１０９Ｌから画像を読み出すような説明をしているが、これに限られるものではない。例えば、図２の（ｂ）の切替え部２０１のような構成を用いて、Ｉ／Ｆ１０６、バッファ部Ｃ１１０Ｌ，バッファ部Ｄ１０９Ｌへのアクセスを適宜切り替えるようにしてもよいことは明らかである。

図１６は、第３実施形態の処理に従った場合の画像受信と補正処理のタイミングチャートを示す図である。図１６の（ａ）は重なり個所が少ないため、処理クロックを変更しなくてもよい場合の例である。これに対して、図１６の（ｂ）は重なり個所が多いため、処理クロックを変更した場合の例である。なお、図１５の処理と、図１６の（ｂ）では受信画像終了とほぼ同時に補正処理が終了するように処理クロックを変更しているがこれに限られるものではない。例えば、図１６の（ｃ）のようにバックポーチ終了前までに補正処理を終了しても、図１６の（ｄ）のように次フレームのフロントポーチが終了するまでに補正処理が終了するように処理クロックを変更してもよい。要は、次のフレームの画像を受信するまでに複数の部分画像の全ての補正を終えるように、補正処理の速度が変更されればよい。

なお、第３実施形態では３つに分割する場合について説明したが、４つ以上に分割した場合でも処理方法は基本的に同一であるため説明を省略する。

以上のように、第３実施形態では、画像を補正する補正部の前にバッファを複数設け、処理を行っている。これによって、３つ以上に分割するような光学系を用いた場合でも片眼に対して補正部は１つでよく、かつ遅延を少なく画像を表示することができる。

＜第４実施形態＞
第１乃至第３実施形態では重なり個所があり、このエリア分の補正処理を行う方法について説明を行った。例えば、第１実施形態では垂直方向に１０２４ラインある画像で、重なり個所が上下でそれぞれ１００ライン存在した場合、１１２４ラインについて補正処理が実施される。第４実施形態では、例えば、上下２つに分割する光学系を用いた場合で、垂直方向に１０２４ラインの画像で、重なり個所が上下でそれぞれ１００ライン存在した場合に、１０２４ラインの補正処理を実施する。

図１７は第４実施形態における機能ブロック図である。図１と比べると、解像度変換部Ａ１１１、解像度変換部Ｂ１１２が左右の目の系に追加されている。また、表示素子１０２８は上部の画像を表示するための表示素子であり、表示素子１０２９は下部の画像を表示するための表示素子である。

続いて、第４実施形態における画像の補正処理について、図１９に示すフローチャートを用いて説明する。ステップＳ４００において制御部１０５の制御のもと、解像度変換部Ａ１１１は受信した画像に対して解像度変換を行う。例えば垂直方向に１０２４ラインの画像で、重なり個所が１００ラインある場合、補正部１０４へ入力される画像信号が合計で１０２４ラインとなるように、解像度変換部Ａで１０２４ラインの画像信号の解像度を変換する。

図１８は、その際の画像サイズの例を示したものである。図１８の（ａ）は受信画像であり、垂直方向に１０２４ラインある。画像８０１が表示素子１０２８に表示する画像であり、画像８０２が表示素子１０２９に表示する画像である。

解像度変換部Ａ１１１では、図１８の（ｂ）のように変換を行う。画像８０１が画像８０３のよう、画像８０２が画像８０４のように解像度変換される。つまり重なり個所を冗長するような画像にし、かつ垂直方向には１０２４ラインにする。つまり図１８の例では垂直方向に１００ライン縮小する必要がある。縮小方法については、中心部は比較的ＨＭＤ使用者が注視する個所であるため、上画像の上の方や下画像の下の方（画像の上端部及び下端部）のみを縮小するのが好ましいが、垂直方向へ均一に縮小してもよい。また、画像の縮小処理としては、ラインの間引きが挙げられる。このように、解像度変換部Ａ１１１では、複数の部分画像の全ライン数が画像の全ライン数となるように受信した画像信号の解像度を変換する第１変換の処理を行う。

ステップＳ４０１において、制御部１０５の制御のもと、補正部１０４は画像８０３、画像８０４に対してそれぞれ補正を行う。補正前に垂直方向に縮小したため、ステップＳ４０２において、解像度変換部Ｂ１１２は伸張を行う。この伸張は解像度変換部Ａ１１１で実施した縮小と逆のことを実施すればよい。即ち、解像度変換部Ｂ１１２は、補正された画像信号について、画像のライン数が複数の部分画像の全ライン数となるように解像度を変換する第２変換の処理を行う。

以上のように、第４実施形態では、画像を補正する補正部の前後に解像度変換を設け補正を行っている。これによって受信する画像フォーマットと同じフォーマットを補正する回路を使用できるため、汎用的な補正回路を用いることができる。

以上、実施形態を詳述したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。

尚、本発明は、ソフトウェアのプログラムをシステム或いは装置に直接或いは遠隔から供給し、そのシステム或いは装置のコンピュータが該供給されたプログラムコードを読み出して実行することによって前述した実施形態の機能が達成される場合を含む。この場合、供給されるプログラムは実施形態で図に示したフローチャートに対応したコンピュータプログラムである。

従って、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体及び該コンピュータのプログラムを格納したコンピュータ読み取り可能な記憶媒体も含まれる。

第１実施形態に係る頭部装着型の画像表示装置（ビデオシースルーＨＭＤ）におけるシステム構成を示すブロック図である。 第１実施形態に係る補正部周辺の構成を示すブロック図である。 第１実施形態に係る表示画像の分割の様子を示す図である。 第１実施形態に係る補正処理を示すフローチャートである。 第１実施形態に係る画像受信、補正処理のタイミングチャートである。 第２実施形態に係る頭部装着型の画像表示装置（ビデオシースルーＨＭＤ）におけるシステム構成を示すブロック図である。 第２実施形態に係る補正部周辺の構成を示すブロック図である。 第２実施形態に係る表示画像の分割の様子を示す図である。 第２実施形態に係る補正単位を説明する図である。 第２実施形態に係る補正処理を示すフローチャートである。 第２実施形態に係る画像受信、補正処理のタイミングチャートである。 第３実施形態に係る頭部装着型の画像表示装置（ビデオシースルーＨＭＤ）におけるシステム構成を示すブロック図である。 第３実施形態に係る補正部周辺の構成を示すブロック図である。 第３実施形態に係る表示画像の分割の様子を示す図である。 第３実施形態に係る補正処理を示すフローチャートである。 第３実施形態に係る画像受信、補正処理のタイミングチャートである。 第４実施形態に係る頭部装着型の画像表示装置（ビデオシースルーＨＭＤ）におけるシステム構成を示すブロック図である。 第４実施形態に係る補正処理の概要を説明する図である。 第４実施形態４に係る補正処理を示すフローチャートである。 ＨＭＤを使用者が装着した様子を示す図である。 タイリング光学系を説明する図である。

Claims (13)

1. 画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置であって、
   前記画像に対応する画像信号を受信する受信手段と、
   前記受信手段で受信した画像信号を部分画像別にバッファに保持する保持手段と、
   前記複数の部分画像の各々に対して対応する表示部の光学系に応じた補正が加わるように前記画像信号を補正する補正手段と、
   前記バッファに保持されている画像信号が構成する部分画像毎に、前記補正手段による補正処理の速度を変更する制御手段とを備えることを特徴とする画像表示装置。
2. 前記補正手段は、前記受信手段による画像信号の受信の順序において先頭となる部分画像に対しては、前記受信手段による受信に同期して補正処理を加え、
   前記保持手段は、２番目以降の部分画像に対応する画像信号を、部分画像別にバッファに保持することを特徴とする請求項１に記載の画像表示装置。
3. 前記補正手段は、前記複数の部分画像の各々を、隣接する部分領域が重複する領域を有する複数の部分領域に分割して得られる部分領域毎に補正処理を行い、
   前記制御手段は、前記複数の部分領域の各々の画像信号を処理する際に、前記補正手段による補正処理の速度を変更することを特徴とする請求項１に記載の画像表示装置。
4. 前記複数の部分領域に対する前記補正手段による補正処理の順番は、前記受信手段による部分領域に対応する画像信号の受信が完了する順番であることを特徴とする請求項３に記載の画像表示装置。
5. 前記受信手段は複数のフレームの画像からなる動画像を受信し、
   前記制御手段は、次のフレームの画像を受信するまでに、前記複数の部分画像の全ての補正を終えるように、前記補正処理の速度を変更することを特徴とする請求項１乃至４のいずれか１項に記載の画像表示装置。
6. 前記制御手段は、前記補正手段が動作するためのクロックを変更することにより補正処理の速度を変更することを特徴とする請求項１乃至５のいずれか１項に記載の画像表示装置。
7. 前記補正手段による補正処理は、歪み補正及び色収差補正の少なくともいずれかを含むことを特徴とする請求項１乃至６のいずれか１項に記載の画像表示装置。
8. 元の画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置であって、
   前記元の画像を受信する受信手段と、
   前記元の画像から得られる複数の部分画像の全ライン数が、前記元の画像の全ライン数となるように、受信した前記元の画像の解像度を変換する第１変換手段と、
   前記第１変換手段により解像度変された画像から得られる複数の部分画像の各々について、対応する表示部の光学系に応じた補正が加わるように補正処理を行う補正手段と、
   前記補正手段で補正された複数の部分画像の各々の解像度を、前記補正された複数の部分画像の全ライン数が前記元の画像から得られる複数の部分画像の全ライン数となるように変換する第２変換手段と、
   前記第２変換手段により解像度変換された後の複数の部分画像を、前記複数の表示部に表示する表示手段とを備えることを特徴とする画像表示装置。
9. 前記第１変換手段は、前記画像の上端部及び下端部において解像度変換を行うことを特徴とする請求項８に記載の画像表示装置。
10. 画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置の制御方法であって、
    前記画像に対応する画像信号を受信する受信工程と、
    前記受信工程で受信した画像信号を部分画像別にバッファに保持する保持工程と、
    前記複数の部分画像の各々に対して対応する表示部の光学系に応じた補正が加わるように前記画像信号を補正する補正工程と、
    前記バッファに保持されている画像信号が構成する部分画像毎に、前記補正工程による補正処理の速度を変更する制御工程とを有することを特徴とする画像表示装置の制御方法。
11. 元の画像を、隣接する部分画像が重複する領域を有する複数の部分画像に分割し、前記複数の部分画像のそれぞれを複数の表示部に表示して、前記複数の表示部で表示された部分画像を１つの画像として観察者に観察させる画像表示装置の制御方法であって、
    前記元の画像を受信する受信工程と、
    前記元の画像から得られる複数の部分画像の全ライン数が、前記元の画像の全ライン数となるように、受信した前記元の画像の解像度を変換する第１変換工程と、
    前記第１変換工程で解像度変された画像から得られる複数の部分画像の各々について、対応する表示部の光学系に応じた補正が加わるように補正処理を行う補正工程と、
    前記補正工程で補正された複数の部分画像の各々の解像度を、前記補正された複数の部分画像の全ライン数が前記元の画像から得られる複数の部分画像の全ライン数となるように変換する第２変換工程と、
    前記第２変換工程で解像度変換された後の複数の部分画像を、前記複数の表示部に表示する表示工程とを有することを特徴とする画像表示装置の制御方法。
12. 請求項１０または１１に記載の画像処理装置の制御方法をコンピュータに実行させるためプログラム。
13. 請求項１０または１１に記載の画像処理装置の制御方法をコンピュータに実行させるためプログラムを格納したコンピュータ読み取り可能な記憶媒体。

Images