JP2003209769A

JP2003209769A - 画像生成装置および方法

Info

Publication number: JP2003209769A
Application number: JP2002006072A
Authority: JP
Inventors: Akihiro Katayama; 昭宏片山; Takaaki Endo; ▲隆▼明遠藤; Daisuke Kotake; 大輔小竹; Masahiro Suzuki; 雅博鈴木
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2002-01-15
Filing date: 2002-01-15
Publication date: 2003-07-25

Abstract

(57)【要約】【課題】マルチディスプレイの各画面の配置に応じ
て、繋ぎ目部分で整合性のとれた画像を生成できるよう
にすること目的とする。【解決手段】画像を複数の画像表示画面に表示する表
示部に表示する、視点情報に応じた画像を生成するシス
テムにおいて、記複数の画像表示画面それぞれの画像領
域を特定するパラメータを任意に設定し、視点情報を入
力する入力し、設定されたパラメータと入力された視点
情報とに応じて、複数の画像表示画面のそれぞれに表示
すべき画像を生成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、マルチディスプレ
イの各画面の配置に応じて、繋ぎ目部分で整合性のとれ
た画像を生成するためのものである。

【０００２】

【従来の技術】これまでにマルチディスプレイに関して
は、各画面の輝度の差を低減させる処理や、コンバージ
ェンス調整のための処理に関するものが多数出願されて
いる。たとえば、特開平５−２６５０２９では、３面の
ディスプレイ装置が開示されている。ただし、この特許
では、繋ぎ目に関することには一切言及されていない。
また、特開平８−１２６０１８では、各画面間でずれが
生じないように各画面のコンバージェンスを調整する方
法などが開示されている。また、特開平１０−８３１７
０では、シームレススクリーンに継ぎ目のない画像を表
示するためにオーバーラップ表示を行う処理方法が開示
されている。

【０００３】

【発明が解決しようとする課題】しかしながら、前記従
来例では、複数の独立したディスプレイを隣り合わせて
配置した時に発生する表示不能領域（ディスプレイのフ
レームの部分）において表示画像のパースペクティブが
正しくなるような表示処理方法については言及されてい
ない。例えば、３６０°見回し可能なパノラマ画像を切
り出して特開平５−２６５０２９のような３面ディスプ
レイに表示する場合には、各画面の間のフレーム部分を
考慮しなければ、観察者から見たときの空間的な整合性
を満たすことができず、違和感のある表示になる。ここ
で、空間的な整合性が満たされるとは、窓から外あるい
は中のシーンを観察したときの画像のように表示される
ことである。仮に、フレーム領域を考慮せずに画像を表
示した場合は、シーンが両方の画面に分断される、ある
いは、不適切な欠けが生じる。

【０００４】独立したディスプレイを組み合わせてマル
チディスプレイとして利用する場合には、別の問題も発
生する。ディスプレイ相互の位置関係が設置するたび毎
に変化する場合、すなわち、各ディスプレイ画面の法線
方向（各法線の相対的な方向）が設置するたびに異なる
場合には、画面の法線方向に応じて表示する画像を補正
しなければ、観察者から見たときの画像に歪が生じる。

【０００５】

【課題を解決するための手段】本発明は上述の点に鑑み
てなされたものであり、マルチディスプレイの各画面の
配置に応じて、繋ぎ目部分で整合性のとれた画像を生成
できるようにすること目的とする。

【０００６】上記目的を達成するために本発明は以下の
構成を有する。

【０００７】本願請求項１の発明は、複数の画面を用い
て画像を表示するために、該複数の画面夫々の画像を生
成する画像生成装置であって、画像を保持する保持手段
と、前記複数の画面それぞれの画像領域を特定するため
のパラメータを設定するパラメータ設定手段と、前記設
定されたパラメータ応じて、前記保持手段に保持されて
いる画像から前記複数の画面のそれぞれに対応する画像
を生成する画像生成手段とを備えることを特徴とする。

【０００８】本願請求項８の発明は、複数の画面を用い
て画像を表示するために、該複数の画面夫々の画像を生
成する画像生成装置であって、前記複数の画面を撮影す
る撮影手段と、前記撮影手段により撮影された画像から
各画面の画像領域を特定するためのパラメータを演算す
るパラメータ演算手段と、前記パラメータ演算手段によ
り設定されたパラメータに応じて、予め保持されている
画像から前記複数の画面のそれぞれに表示する画像を生
成する画像生成手段とを備えることを特徴とする。

【０００９】

【発明の実施の形態】（第１実施形態）図１は本実施形
態の特徴を表す図面である。同図において１は獲得され
た画像を保持しておくメモリ、２はメモリ１に保持され
た画像中の表示に必要な領域を計算するためのパラメー
タ設定手段、３ａ〜３ｃはパラメータ設定手段により設
定されたパラメータを利用して表示に必要な領域を確定
し表示用画像を生成するための画像生成手段、４ａ〜４
ｃは生成された画像を保持するビデオメモリ、５ａ〜５
ｃは生成された画像を表示するための表示手段である。
かかる構成において、メモリ１は、ハードディスクやＣ
Ｄ−ＲＯＭ、ＤＶＤ−ＲＯＭなどの外部記憶装置に存在
する画像、あるいはカメラなどから入力されるライブ映
像または記録済映像をキャプチャすることにより得られ
る画像を記憶する。パラメータ設定手段２は各ディスプ
レイの表示画像領域を確定するためのパラメータとし
て、例えば、観察者とディスプレイとの距離、ディスプ
レイの画面サイズ、ディスプレイ間の距離、ディスプレ
イフレーム（表示不能領域）のサイズ、あるいはディス
プレイの画面中心と観察位置を結んだ線分とがなす角
度、各ディスプレイの画像表示領域を規定する点の３次
元座標（矩形画面における４隅の点の世界座標など）、
ディスプレイ画面間に存在する表示不能領域の見込角
（画角）等の情報を少なくとも１つ以上設定することが
できる。画像生成手段３ａ〜３ｃはそれぞれ設定された
パラメータ情報から、最終的に画像表示に必要な矩形領
域を計算して矩形領域の画像を生成し、それぞれビデオ
メモリ４ａ〜４ｃに出力する。表示手段５ａ〜５ｃはビ
デオメモリ４ａ〜４ｃに保持された画像データをそれぞ
れ読み出して表示する。

【００１０】このように、各ディスプレイの表示画像領
域を示すパラメータを設定可能である入力手段をもつこ
とにより、独立した３つのディスプレイを適当に組み合
わせた場合にも違和感の少ない表示を行うことが可能と
なる。

【００１１】以下、本実施形態の詳細な説明を行う。本
実施形態では、ユーザが指示した視点情報に応じて３画
面に表示される画像がリアルタイムに変更するシステム
について説明する。

【００１２】本実施形態では、３つの独立した画像を出
力できるポートを持つＰＣ１台と３台のディスプレイを
接続したシステムについて述べる。ただし、ディスプレ
イの各画面のコンバージェンス調整や輝度の調整などは
既に行われているものとする。また、システムのユーザ
インタフェースとしてジョイスティック（視点位置・方
向設定手段）を利用する。このシステムは、ＰＣのディ
スク中にパノラマ画像系列を保持しており、観察者の視
点位置・方向に応じて適切なパノラマ画像を読み出して
メモリに格納し、設定されたパラメータによってそれぞ
れのディスプレイに表示すべき画像を生成し、ディスプ
レイは同期をとって表示する。この処理を繰り返すこと
により、ユーザにパノラマ画像で構成された仮想の空間
内を移動する感覚を与えることができる。

【００１３】図２に本システムのブロック図を示す。図
中５０１はシステム全体の制御や演算を行うＣＰＵ、５
０２はシステムの制御プログラムやデータを格納したＲ
ＯＭ、５０３はワークメモリであるＲＡＭ、５０４〜５
０６は処理結果を出力するためのグラフィックボード、
５０７〜５０９はグラフィックボード５０４〜５０６の
出力を表示するための表示装置、５１０と５１１は外部
インタフェース、５１２は磁気ディスクやＣＤ−ＲＯ
Ｍ、ＤＶＤ−ＲＯＭなどの記憶装置、５１３はジョイス
ティック、５１４はキーボードである。

【００１４】図３に本システムの処理の流れを示すフロ
ーチャートを示す。まず、ステップＳ１で各表示装置の
配置情報のパラメータを設定する。この設定は、システ
ムの起動時に１度行えばよいが、システム稼動中に表示
装置の相対位置が変化した場合はそのたび毎に設定し直
す。パラメータの設定に関しては後述する。ステップＳ
２ではジョイスティックなどのユーザインタフェースを
介して仮想空間中での観察者の視点位置と方向を獲得す
る。ステップＳ３では、ステップＳ１およびＳ２で獲得
された情報を用いて表示装置に出力するための画像を生
成する。この画像生成処理に関しても後で詳述する。生
成された画像はステップＳ４で表示装置に送られ表示さ
れる。その後、ステップＳ５ではシステムの終了判定が
行われ、終了であればステップＳ６にてシステムを停止
する。終了でなければ、ステップＳ２に戻り、そのまま
処理を続行する。

【００１５】次に、パラメータ設定手段について説明す
る。話を単純にするために、メモリに保持された画像が
３６０°のパノラマ画像で、ディスプレイは図４に示す
ように各画面が観察位置から等距離にあり、ディスプレ
イ画面相互のなす角度が１２０度になるように配置され
ているものとする。ここで図４は配置した３台のディス
プレイを真上から見た図である。この場合、表示に必要
な画像を生成するための最も単純なパラメータは、各画
面（有効表示画面）の端と観察位置１０を結ぶ線分と基
準直線１７（観察位置１０を通過する適当な直線）との
なす角度である。そこで図５に示すようなグラフィカル
ユーザインタフェース（ＧＵＩ）１５をディスプレイの
１つに表示し、これを利用して表示に必要なパラメータ
を設定する。図中の３１〜３６には、それぞれ線分４１
〜４６と基準線１７とのなす角が設定される。設定され
た角度情報から表示に必要な画像領域を決定する。

【００１６】図６は、パラメータ設定手段により設定さ
れた角度情報とパノラマ画像との対応を示している。表
示画面１２には、パノラマ画像の角度２１から角度２２
までの領域５１の画像が変換されて表示され、同様に表
示画面１４、１６にはそれぞれ領域５２、５３の画像が
変換されて表示される。

【００１７】本実施形態では、角度情報２１〜２６をす
べて入力する方法について述べたが、使用するディスプ
レイがすべて同じ物である場合、表示有効画面のサイズ
は決まっているので、角度情報２１、２３、２５がわか
れば、同様にパノラマ画像中の対応領域を確定できる。
さらに、各ディスプレイ間の角度、すなわち、線分４２
と４３の成す角度と線分４４と４５の成す角度とが同じ
である場合は、入力する角度情報は２１のみでよい。こ
のように、予めわかっている情報は入力を省略して、Ｇ
ＵＩを簡略化することも可能である。また、ＧＵＩでは
なく、上記のような情報を設定ファイルとして保持して
おき、システム起動時に適切な設定ファイルを読み込む
ことによりＧＵＩによる設定を省略することもできる。
ディスプレイの配置がいくつかのパターンに分類可能な
場合、そのパターン分の設定ファイルを予め作成してお
けば、ディスプレイ設置時に毎回設定を行わなくてす
み、作業が簡単になる。

【００１８】以上のように、ＧＵＩや設定ファイルを使
うことにより、ディスプレイ配置情報をシステムに動的
に設定できるため、設置スペースなどの条件により、予
めこちらの意図した配置をとれない場合にも、違和感の
少ない表示を実現することができる。ただし、上記の例
はあくまでも配置情報をシステムに伝達するためのパラ
メータの一例であり、最終的にディスプレイ（有効表示
画面）の配置情報が獲得できるのであれば、例えば、観
察視点１０と各表示画面の中心とを結ぶ線分と基準直線
１７との角度および角度情報２１、２３、２５等を入力
情報にしてもよく、パラメータは前述のものに限らな
い。また、ＧＵＩを表示するディスプレイは、予め決め
られたディスプレイでもよいし、その場でＧＵＩを表示
するディスプレイを任意に変更できるようにしてもよ
い。さらに、各ディスプレイにＧＵＩを表示し、表示さ
れたＧＵＩを使って、そのディスプレイに関する情報の
みを設定できるようにしてもよい。

【００１９】次に、ディスプレイへの表示に必要なパノ
ラマ画像中の領域を表示用画像に変換する方法について
図７を用いて説明する。

【００２０】Ｓ２で得られた視点情報に応じた画像をシ
ステムのメモリ１から取得する。取得された画像は円筒
面に投影されたパノラマ画像であるため、これを２次元
平面に再投影しなければ正しい表示画像とならない。図
７中、１４はディスプレイの画像表示面と表し、Ｑ_ｉは
１４上の画素の境界を表すものとする。例えば、表示画
像面１４上の画素Ｒ_ｉはＱ_ｉとＱ_ｉ＋１ではさまれる画
素と定義する。また、表示画像面の水平方向の画素数を
Ｎとする。このとき、表示画像面上の画素Ｒ_ｉは、∠Ｓ
ＯＱ_ｉと∠ＳＯＱ_ｉ＋１との間のパノラマ画像に対応す
る。従って、Ｒ _ｉの画素値は式１および式２の角度の間
にあるパノラマ画像の画素値となる。

【００２１】

【外１】

【００２２】

【外２】

【００２３】ただし、

【外３】

【００２４】

【外４】

【００２５】ｐは、ディスプレイ上の１画素のサイズ
（水平方向）を表し、Ｎは表示有効画面の水平方向の画
素数を表す。

【００２６】ここで、パノラマ画像中の画素が複数対応
する場合は、対応する複数画素の平均をとったり、対応
する画素の面積比に応じて加重平均をとったり、各種フ
ィルタリング処理をして画素値を決定する。図８を用い
てこれを説明する。図中の７１は表示画像面上のｉ番目
の画素Ｒ_ｉを表す。この画素に対応するパノラマ画像の
画素が７２である（ここでは３画素に相当している）。
７２で表される画素値の平均をとることによりＲ_ｉが決
定できる。この演算をディスプレイ上の各画素に対して
行えば、表示画像面上の各画素値を決定することができ
る。以上の計算は画像の水平方向のみについて述べた
が、垂直方向に関しても同様である。パノラマ画像を円
筒面とした場合、垂直方向の各画素の値は、パノラマ画
像中の上記式１および式２で特定された水平方向の位置
に存在する垂直方向の画素をそのまま利用すればよい。
すなわち図９中の表示画像面上に存在する垂直方向にｊ
ライン目、水平方向にｉ番目の画素７２は、画素７２の
水平画素位置と垂直方向ｊライン目で規定される画素７
４で決定される。ただし、ここでは３画素分あるので、
前述と同様にフィルタリング処理された値となる。さら
に他のディスプレイの表示画像面に対しても同様に処理
することにより、各ディスプレイに表示する画像をパノ
ラマ画像から再構成することができる。

【００２７】本実施形態によれば、ＧＵＩや設定ファイ
ルを使うことにより、ディスプレイ配置情報をシステム
に動的に設定できるため、設置スペースなどの条件によ
り、予めこちらの意図した配置をとれない場合にも、違
和感の少ない表示を実現することができる。

【００２８】複数のＰＣを利用する場合のＧＵＩの表示
を、全体を管理しているＰＣのモニタ上に行うことによ
り、複数のマシン間のパラメータ設定を効率的に行うこ
とができる。また、複数のディスプレイにＧＵＩを表示
する場合は、ディスプレイごとに必要なパラメータを設
定できるので、わかりやすいというメリットがある。

【００２９】（実施形態２）以下では、前述の実施形態
に比べてさらにディスプレイ配置の制約を緩和させる方
法および装置について述べる。

【００３０】図１０は３台のディスプレイを任意の位置
と角度で配置したものを上部から眺めたときの概略図で
ある。ただし、話を単純化するために、ディスプレイは
すべてある平面上に存在し、表示面とある平面の角度は
直角としている。図中の１００は観察位置、１２１〜１
２３はそれぞれディスプレイの画像表示面を表してい
る。また、１２５〜１２７はそれぞれ画像表示面１２１
〜１２３の中心と観察位置１００を結ぶ直線を表してい
る。また、１０１はディスプレイの設置角度を表現する
ための基準となる線である。このとき、各ディスプレイ
の画像表示面に表示される画像は、画像表示面の各画素
と観察位置１００を結んだ線分が基準線となす角度で記
述される。図１１は、任意の角度に配置された画像表示
面の１つを表したものである。画像表示面の中心をｑ、
観察位置１００と点ｑとを結んだ直線を１３１、直線１
３１が基準線１０１と成す角度をφ_０、画像表示面と直
線１３１が成す角度をφ_１とする。また、観察位置１０
０と点ｑまでの距離をｄとする。画像表示面の水平方向
の画素数をＮ、画素のサイズをｐ、点ｕの位置を画素位
置０と仮定すると、画素ｉが存在する範囲θ_ｉ〜θ
_ｉ＋１は次式で表すことができる。

【００３１】

【外５】

【００３２】

【外６】

【００３３】ただし、

【外７】

【００３４】従って、画像表示面上の画素ｉの値はパノ
ラマ画像中のθ_ｉ〜θ_ｉ＋１で表される画素の値とな
る。この場合も実施形態１と同様に、θ_ｉ〜θ_ｉ＋１の
範囲に複数の画素が存在する場合は、画素の面積比に応
じた加重平均あるいは単なる平均あるいはその他のフィ
ルタリング処理を行い、画素値を決定する。垂直方向に
並んだ画素に関しても実施形態１の場合と同様である。
これらの処理をその他のディスプレイに対して行うこと
により、それぞれのディスプレイに表示する画像をパノ
ラマ画像から生成することができる。

【００３５】以上述べたように、図１０のおいて画像表
示面の傾き及び位置と表示面の諸パラメータ（例えば、
画素数、１画素のサイズ、画角など）がわかれば、観察
位置から見た歪のない画像を表示することができる。す
なわち、実施形態２を実現するためには、ユーザがこれ
らのパラメータをシステムに設定できるようにすればよ
い。

【００３６】図１２に表示画像を生成するためのパラメ
ータ設定ＧＵＩの例を示す。図中の角度１は、各ディス
プレイの画像表示面の中心と観察位置を結ぶ直線が基準
となる直線と成す角度であり、角度２は各ディスプレイ
の画像表示面が各ディスプレイの画像表示面の中心と観
察位置を結ぶ直線となす角度、距離ｄは観察位置から各
ディスプレイの画像表示面の中心までの距離、画素数Ｎ
は各ディスプレイの画像表示面の画素数、画素サイズｐ
は各ディスプレイの画素のサイズを表す。ここで、ディ
スプレイを３台使用する場合のＧＵＩの一例を示した
が、Ｎ台の場合はそれにあわせて項目数を増やせばよ
い。また、上記例では異なるサイズ、有効画素数のディ
スプレイを想定したＧＵＩを示したが、同一のディスプ
レイを使用する場合は、画素数と画素サイズの欄は１つ
づつでよい。また、ここでは距離と画素サイズを入力す
るようにしているが、代わりに観察位置から見たときの
表示画像面の画角を入力してもよい。また、角度１、角
度２、距離、画素サイズの代わりに、ある点を原点とし
たときの各画像表示面の４隅の座標を入力するようにし
てもよい。

【００３７】このように構成することにより、異なるサ
イズのディスプレイを並べてマルチディスプレイを構成
してもパースペクティブの正しい画像を生成・表示する
ことが可能となる。

【００３８】また、ここではすべてのディスプレイの画
像表示面はある平面と垂直であると仮定したが、傾きが
ある場合も同様の考え方で求めることができる。図１３
はそのような場合の画素値の計算方法を説明するための
図である。図中の２０３は観察位置２００とディスプレ
イの画像表示面の中心とを結んだ直線、２０１はパノラ
マ画像面、２０２は画像表示面である。図１０と比べれ
ば、明らかに水平方向の画素位置を求める場合と同じ考
え方で画素位置を特定し、画素値を求めることが可能で
ある。画像表示面上の１画素がパノラマ画像上で複数画
素に対応する場合は、実施形態１と同様の処理を行えば
よい。

【００３９】（実施形態３）実施形態１および２では、
観察位置から見たときのパースペクティブの正しい画像
を求めるためのパラメータの設定方法について述べた
が、観察位置にカメラを設置し、そこから撮影された画
像からディスプレイの画像表示面の傾き、位置などを自
動的に計算することも可能である。この場合は、パラメ
ータを設定するＧＵＩを省略あるいは簡略化することが
できる。

【００４０】図１４に観察位置にカメラを配置して撮影
した画像の例を示す。カメラの撮像面と各ディスプレイ
の画像表示面がある平面に対して垂直である場合は、画
像に写っている各画像表示面の左辺と右辺の位置を画像
上で求めることにより、実施形態１で与えたパラメータ
を求めることができる。図中、４０１、４０２、４０３
はディスプレイの画像表示面であり、画像表示面４０１
〜４０３の右辺、左辺をＡ_１〜Ａ_６とする。図１５にこ
のときの画像表示面の配置を示す。これは画像表示面を
真上から観察したものである。４００はカメラの光軸、
４１０は観察位置４０５を通りかつ光軸に垂直な直線で
ある。観察位置（カメラの位置）をＯ、直線４１０上の
ある一点をＥ、光軸と撮像面が交わる点をＦとする。こ
こで求めたい角度は∠Ａ_１ＯＥ〜∠Ａ_６ＯＥの６つであ
る。これが求まれば、実施形態１で示したようなＧＵＩ
を使用したパラメータ設定手段を省略あるいは簡略化す
ることができる。カメラの水平画角をｗ、画像表示面の
水平方向の画素数をＮ、画像上の左上隅を原点としたと
きのＡ_１〜Ａ_６のｘ座標（水平方向）をそれぞれａ _１〜
ａ_６、点Ｆのｘ座標をｆとすれば、∠Ａ_１ＯＥは以下の
式で求めることができる。ただし、ｉ＝１、。。、６で
ある。

【００４１】

【外８】

【００４２】この値が求まれば、実施形態１に示したよ
うに、各ディスプレイに表示すべき画像を生成すること
ができる。ａ_１〜ａ_６の算出は、ラプラシアンを使って
画像からエッジを検出することにより行うことができ
る。

【００４３】また、これ以外にも、正しいパースペクテ
ィブの画像を生成するためには、観察位置から見たとき
の画像表示面の位置・姿勢や画素数等がわかればよい。
画像表示面の位置・姿勢は、例えば撮影された画像から
画像表示面が矩形であると仮定して、矩形の４隅や平行
な２本の線分などを検出することによっても求めること
が可能である。検出を容易にするために、各ディスプレ
イに基準パターンを表示し、それを観測することによ
り、カメラとディスプレイの相対位置・姿勢を求めるこ
ともできる。基準パターンとしては、１個以上の円を配
置したものや格子模様などが利用できるが、これに限る
ものではない。ディスプレイの画像表示面の４隅にマー
カを貼り付け、これをトラッキングすることにより、位
置・姿勢を求めることも可能である。

【００４４】また、複数のディスプレイをカメラで観測
する場合、広角レンズを使用する必要が生じるが、この
ようなレンズには歪が伴う。これに関しては、前もっ
て、キャリブレーション用パターンを読み込んで処理す
ることにより、歪を取り除くことが可能である。

【００４５】また、ディスプレイの基本的なパラメータ
として、画素数と物理的なサイズなどが考えられるが、
これらは予めわかっていることが多いため、固定の値と
してシステムで記憶しておけばよい。その場合は画素数
あるいは画面の物理的サイズの設定画面も不要になる。

【００４６】（第４実施形態）実施形態１および２で
は、与えられたパラメータを利用して表示画像を１画素
ごとに計算し、パノラマ画像から抽出（あるいはフィル
タリング処理）している。これをもう少し簡単に行うに
は、コンピュータ・グラフィックス（ＣＧ）のテクスチ
ャ・マッピングのテクニックを利用すればよい。具体的
には、各ディスプレイに表示される、観察位置を中心と
した円筒面にマッピングしたパノラマ画像を２次元画像
に変換する際に、画像表示面の角度に応じてビューボリ
ュームを左右不均一に設定し、レンダリングすればよ
い。この処理により、画像表示面に表示する画像を一度
の処理で生成することができる。この処理はグラフィッ
クハードウェアを利用することにより、さらに高速に実
行することが可能である。

【００４７】これによれば、画像の生成にテクスチャマ
ッピング技術を用いれば効率的に画像を生成することが
でき、グラフィックハードウェアを利用すれば、より高
速に処理を実行できる。

【００４８】また、本発明の実施形態では、１台のＰＣ
と３つの映像出力を独立に行えるグラフィックボードを
考えたが、１つ以上の映像を出力できるグラフィックボ
ードを備えたＰＣをディスプレイの台数分用意してネッ
トワークにつなぐことにより、複数のＰＣで処理を並列
に行うことができるため高速化が実現される。ただし、
複数のＰＣを利用するためには、同期をとって映像の処
理を行い、表示することが必要となるため、全体を管理
するＰＣを１台用意するか、映像処理を行っているいず
れかのＰＣに全体を管理するプロセスを走らせる必要が
ある。

【００４９】ネットワーク接続された複数のＰＣで映像
を処理する場合、全体を管理するプロセスが走っている
ＰＣの画面にパラメータ設定用ＧＵＩを表示すれば、そ
の他のマシンへの情報の設定・伝達が容易になる。ま
た、各ディスプレイにそれぞれの画面のパラメータを設
定するように、各ディスプレイ上にパラメータ設定用Ｇ
ＵＩを表示してもよい。

【００５０】（他の実施形態）前述した実施の形態の機
能を実現する様に各種のデバイスを動作させる様に該各
種デバイスと接続された装置あるいはシステム内のコン
ピュータに、前記実施の形態の機能を実現するためのソ
フトウエアのプログラムコードを供給し、そのシステム
あるいは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）
を格納されたプログラムに従って前記各種デバイスを動
作させることによって実施したものも本発明の範疇に含
まれる。

【００５１】この場合、前記ソフトウエアのプログラム
コード自体が前述した実施の形態の機能を実現すること
になり、そのプログラムコード自体、及びそのプログラ
ムコードをコンピュータに供給するための手段、例えば
かかるプログラムコードを格納した記憶媒体は本発明を
構成する。

【００５２】かかるプログラムコードを格納する記憶媒
体としては例えばフロッピー（登録商標）ディスク、ハ
ードディスク、光ディスク、光磁気ディスク、ＣＤ−Ｒ
ＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等
を用いることが出来る。

【００５３】またコンピュータが供給されたプログラム
コードを実行することにより、前述の実施形態の機能が
実現されるだけではなく、そのプログラムコードがコン
ピュータにおいて稼働しているＯＳ（オペレーティング
システム）、あるいは他のアプリケーションソフト等と
共同して前述の実施形態の機能が実現される場合にもか
かるプログラムコードは本発明の実施形態に含まれるこ
とは言うまでもない。

【００５４】更に供給されたプログラムコードが、コン
ピュータの機能拡張ボードやコンピュータに接続された
機能拡張ユニットに備わるメモリに格納された後そのプ
ログラムコードの指示に基づいてその機能拡張ボードや
機能格納ユニットに備わるＣＰＵ等が実際の処理の一部
または全部を行い、その処理によって前述した実施形態
の機能が実現される場合も本発明に含まれることは言う
までもない。

【００５５】

【発明の効果】本発明によれば、マルチディスプレイの
各画面の配置に応じて、繋ぎ目部分で整合性のとれた画
像を生成することができる。

【００５６】さらに、請求項８の発明によれば、カメラ
で撮影した画像からパラメータ情報を求めることによ
り、ＧＵＩや設定ファイルなどを省略または簡略化する
ことができる。

【図面の簡単な説明】

【図１】ブロック構成図である。

【図２】第１実施形態の構成図である。

【図３】第１実施形態の流れを示すフローチャートであ
る。

【図４】配置されたマルチディスプレイを真上から観察
した図である。

【図５】ＧＵＩ画面の例である。

【図６】パノラマ画像と表示画像の対応を示す図であ
る。

【図７】パノラマ画像から表示画像の生成法を説明する
ための図である。

【図８】パノラマ画像と表示画像の画素の対応を示す図
である。

【図９】垂直方向の画素の求め方を示す図である。

【図１０】任意に置いたディスプレイの配置を真上から
見た図である。

【図１１】表示画像の生成法を説明するための図であ
る。

【図１２】ＧＵＩ画面の別の例である。

【図１３】ディスプレイが上下方向に傾いている場合の
表示画像の生成法を説明するための図である。

【図１４】カメラで撮影した画像である。

【図１５】撮影画像からパラメータを決定する方法を説
明するための図である。

───────────────────────────────────────────────────── フロントページの続き (72)発明者小竹大輔東京都大田区下丸子３丁目30番２号キヤノン株式会社内 (72)発明者鈴木雅博東京都大田区下丸子３丁目30番２号キヤノン株式会社内Ｆターム(参考） 5C054 CC05 EH00 FD02 FE17 HA17 5C058 BA23 BA27 BA35 EA03 5C082 AA03 AA27 AA34 BA12 BA27 BB26 BB53 BD07 CA22 CA81 CA85 DA53 DA73 MM10

Claims

【特許請求の範囲】

【請求項１】複数の画面を用いて画像を表示するため
に、該複数の画面夫々の画像を生成する画像生成装置で
あって、画像を保持する保持手段と、前記複数の画面それぞれの画像領域を特定するためのパ
ラメータを設定するパラメータ設定手段と、前記設定されたパラメータ応じて、前記保持手段に保持
されている画像から前記複数の画面のそれぞれに対応す
る画像を生成する画像生成手段とを備えることを特徴と
する画像生成装置。
【請求項２】前記保持手段に保持されている画像はパ
ノラマ画像であることを特徴とする請求項１に記載の画
像生成装置。
【請求項３】前記パラメータ設定手段はパラメータ設
定用パネルを表示することを特徴とする請求項１に記載
の画像生成装置。
【請求項４】前記パラメータ設定手段は、予め作成し
たパラメータファイルを読み込んでパラメータを設定す
ることを特徴とする請求項１に記載の画像生成装置。
【請求項５】前記パラメータ設定手段により設定され
るパラメータは、観察位置を含む平面上の直線と平面が
ディスプレイの画像表示面の両端と交わる点を結ぶ直線
とがなす角度であることを特徴とする請求項１に記載の
画像生成装置。
【請求項６】前記画像生成手段は、画像表示面の角度
に応じてビューボリュームを左右非対称に設定してレン
ダリングすることを特徴とする請求項１に記載の画像生
成装置。
【請求項７】前記画像生成手段は、テクスチャマッピ
ングのハードウェアを利用してレンダリングすることを
特徴とする請求項１に記載の画像生成装置。
【請求項８】複数の画面を用いて画像を表示するため
に、該複数の画面夫々の画像を生成する画像生成装置で
あって、前記複数の画面を撮影する撮影手段と、前記撮影手段により撮影された画像から各画面の画像領
域を特定するためのパラメータを演算するパラメータ演
算手段と、前記パラメータ演算手段により設定されたパラメータに
応じて、予め保持されている画像から前記複数の画面の
それぞれに表示する画像を生成する画像生成手段とを備
えることを特徴とする画像生成装置。
【請求項９】前記撮影手段は観察位置に配置したカメ
ラであり、その映像をキャプチャして前記パラメータ演
算手段に伝送することを特徴とする請求項８に記載の画
像生成装置。
【請求項１０】前記パラメータ演算手段は前記撮影手
段により撮影された画像中のエッジを検出することによ
り前記各画面の画像領域を特定することを特徴とする請
求項９に記載の画像生成装置。
【請求項１１】前記予め保持されている画像はパノラ
マ画像であることを特徴とする請求項８に記載の画像生
成装置。
【請求項１２】前記画像生成手段は、テクスチャマッ
ピングのハードウェアを利用してレンダリングすること
を特徴とする請求項８に記載の画像生成装置。
【請求項１３】画像を複数の画像表示画面に表示する
表示部に表示する、視点情報に応じた画像を生成する画
像生成方法であって、前記複数の画像表示画面それぞれの画像領域を特定する
パラメータを設定する設定工程と、視点情報を入力する入力工程と、前記設定されたパラメータと前記入力された視点情報と
に応じて、前記複数の画像表示画面のそれぞれに表示す
べき画像を生成する生成工程とを有することを特徴とす
る画像生成方法。
【請求項１４】前記設定工程は、ユーザの指示に応じ
て変更可能であることを特徴とする請求項１９に記載の
画像生成方法。
【請求項１５】前記設定工程は、前記複数の画像表示画面を撮影した撮影画像を入力し、前記撮影画像を解析し、前記パラメータを求めることを
特徴とする請求項１９記載の画像生成方法。
【請求項１６】請求項１３に記載の画像生成方法を実
現するためのプログラム。
【請求項１７】請求項１３に記載の画像生成方法を実
現するためのプログラムを記録した記録媒体。