JP2004287285A

JP2004287285A - 画像表示装置及び画像表示方法

Info

Publication number: JP2004287285A
Application number: JP2003081468A
Authority: JP
Inventors: Masamichi Asukai; 正道飛鳥井
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2003-03-24
Filing date: 2003-03-24
Publication date: 2004-10-14

Abstract

【課題】特殊な装置を必要とせず、しかもフォアグラウンドの処理を妨げずに、周辺視野域に表示された複数の情報を無意識的に認識できる並列的なコミュニケーションを可能とする。
【解決手段】外部環境より入力された複数の情報のうち少なくとも１つの情報に基づく画像を中心視野域の表示要素Ｗ３に表示すると共に残りの画像情報の一部に基づく１つ以上の画像を周辺視野域の表示要素Ｗ１，Ｗ２に表示するように制御する。周辺視野域に部分的な画像として表示される情報に基づく画像の全体像をスリット視により認識できるので、特殊な装置を必要とせずかつフォアグラウンドの処理を妨げずに、複数の外部環境の状況と無意識的かつ並列的にインタラクトしたり、複数の他の画像表示装置のユーザと無意識的かつ並列的にコミュニケイトしたりできる。
【選択図】図１

Description

【０００１】
【発明の属する技術分野】
本発明は、視聴覚機器及び画像表示機能を備えた情報処理機器並びにこれらの周辺機器等に適用して好適な画像表示装置及び画像表示方法に関する。詳しくは、画像表示手段の表示領域を少なくとも２つ以上の表示要素に分け、入力される複数の情報のうち少なくとも１つの情報に基づく画像を画像表示手段の中心視野域に位置する表示要素に表示すると共に、残りの情報の一部に基づく１つ以上の画像を画像表示手段の周辺視野域に位置する表示要素に表示することによって、画像表示手段の中心視野域に表示される画像の視認を妨げることなく、この周辺視野域に表示された画像の一部から、この画像の全体像を無意識的に認識できるようにしたものである。
【０００２】
【従来の技術】
日常生活の中で何かの作業に意識を集中しているときでも、我々は「外が暗くなった」とか「雨が降り出した」等の外部環境からの様々な情報を無意識的（非自覚的）かつ並列的に処理している。
【０００３】
一方、従来のテレビジョン（以下、ＴＶと呼ぶ）及びコンピュータ等における画像表示装置の場合には、意識的な知覚を前提として画像情報を表示している。このため、従来のＴＶ及びコンピュータ等により表示される画像情報の一部を、外部環境から与えられる複数の情報と同じように扱うことができれば、これらの情報を他の画像情報を見ながら無意識的かつ並列的に処理することができることになる。
【０００４】
そこで、人間が行なう並列的な情報処理をフォアグラウンド（ｆｏｒｅｇｒｏｕｎｄ）の処理とバックグラウンド（ｂａｃｋｇｒｏｕｎｄ）の処理とに分類し、前者を主感覚による意識的な作業、後者を周辺感覚による無意識的な作業と位置付けたとき、複数の情報をバックグラウンドで無意識的かつ並列的に処理できるように呈示するアンビエント・メディア（ａｍｂｉｅｎｔｍｅｄｉａ：周縁媒体）が提唱されている。
【０００５】
このアンビエント・メディアでは、通常のディスプレイ（表示装置）、キーボード及びマウス等で構成されるＧＵＩ（ＧｒａｐｈｉｃａｌＵｓｅｒＩｎｔｅｒｆａｃｅ）ではなく、ウオーターランプ（ＷａｔｅｒＬａｍｐ）や風車（Ｐｉｎｗｈｅｅｌｓ）のような特殊な装置を、情報呈示のためのメディアとして用いている。
【０００６】
ウオーターランプは、水面に雨滴が落ちるときの波紋のような光を模倣する装置であって、擬似的な雨滴の数を、例えば、入力されるデジタル情報の情報量（ｂｉｔｓ：ビット数）と対応させることによって、このような情報量の増減を波紋のような光の揺れ具合の変化として感得させることができる。同様に、風車装置においても、その回転速度と入力されるデジタル情報の情報量等とを対応させることによって、この情報量の増減を風車の回転速度の変化として感得させることができる。
【０００７】
このような装置を利用することによって、何か意識的な作業を行っているときにおいても、その作業を妨げられることなく、入力されるデジタル情報の情報量の変化のような他の複数の情報を、視界に入る光の揺れ具合や風車の回転速度の変化として、無意識的に知覚することができる（例えば、非特許文献１参照）。
【０００８】
これに対し、複数の情報の並列的な処理は、フォアグラウンドの処理では困難である。しかし、アンビエント・メディアのように、これらの複数の情報を適切に呈示できるようにバックグラウンドの処理を行うと、これらのバックグラウンドとして呈示された複数の情報を、フォアグラウンドの処理を妨げることなく、無意識的かつ並列的に処理することができるようになる。
【０００９】
ところで、心理学の分野では、人間の視覚に関して周辺視とスリット視という機能が知られている。
【００１０】
周辺視（ｐｅｒｉｐｈｅｒａｌｖｉｓｉｏｎ）は、中心視（ｆｏｖｅａｌｖｉｓｉｏｎ）に対して用いられる用語であり、中心視が網膜において空間や色彩の弁別力に優れた中心眼窩を用いた視覚機能であるのに対して、周辺視は、空間や色彩の弁別力は低いが明るさの弁別力には優れた網膜周辺部を用いた視覚機能である。
【００１１】
中心視と周辺視は拮抗的関係による相互依存関係にあるものの、視覚情報における二つの別の処理の流れであると考えられている。中心視は、最終的には側頭連合野に至る形態視や色彩視を担う形態認識系であり、周辺視は、最終的には頭頂連合野に至る空間視や運動視を担う空間認識系であると言われている。この中心視においては、網膜で遠中心窩を含む２０度径の中心視野は、視野全体の約１．７％を占めるに過ぎないが、大脳皮質では投射領域の約２２％を占めている。このことから、中心視が視覚情報の処理の中心ではあるものの、周辺視による視覚情報に対しても無意識的な処理が行なわれていると推測されている（例えば、非特許文献２参照）。
【００１２】
このような周辺視による視覚情報の処理を利用した技術として、例えば、運転者が、車両前方の状況を中心視で視認したまま前方への注意力を低下させることなく、周辺視により自車と先行車との位置関係等の情報を認識することができるように、複数の情報を運転者の周辺視野域に表示する車両用表示装置が提案されている（例えば、特許文献１参照）。
【００１３】
一方、人間の視覚に関しては周辺視の他にスリット視という機能があることが知られている（例えば、非特許文献３参照）。このスリット視は、アノーソスコピック知覚（ａｎｏｒｔｈｏｓｃｏｐｉｃｐｅｒｃｅｐｔｉｏｎ）に基づく一種の錯視現象として知られる視覚機能の別称であって、図１８に示すように、「不透明面１７１に開けられた狭いスリット１７２を通して、その背後を移動する図形、例えば人物像１７３等を観察する場合、各瞬間にはその人物像１７３の一部分（断片）だけしか見ることができないにもかかわらず、最適運動条件ならば人物像１７３の全体を同時に知覚することができる。」というものである。即ち、たとえスリット１７２のように細長い小さな表示領域であっても、例えば、スリット１７２の幅方向が移動方向（矢印で図示）となるように、換言すれば、適切に移動するように情報が表示されていれば、その表示領域の幅よりも大きい部分を知覚させることができることになる。
【００１４】
【特許文献１】
特開２００２−２７４２１６号公報（第３−４頁、第１図）
【非特許文献１】
ＡｎｄｒｅｗＤａｈｌｅｙ，ＣｒａｉｇＷｉｓｎｅｓｋｉ，ａｎｄＨｉｒｏｓｈｉＩｓｈｉｉ， ”ＡｍｂｉｅｎｔＦｉｘｔｕｒｅｓｓｈｏｒｔｐａｐｅｒｐｒｅｓｅｎｔｅｄａｔＣＨＩ’９８”，［ｏｎｌｉｎｅ］，ＷａｔｅｒＬａｍｐａｎｄＰｉｎｗｈｅｅｌｓ：ＡｍｂｉｅｎｔＰｒｏｊｅｃｔｉｏｎｏｆＤｉｇｉｔａｌＩｎｆｏｒｍａｔｉｏｎｉｎｔｏＡｒｃｈｉｔｅｃｔｕｒａｌＳｐａｃｅ， ”ＣｏｎｆｅｒｅｎｃｅＳｕｍｍａｒｙｏｆＣＨＩ’９８，Ａｐｒｉｌ１８−２３”，（１９９８），「２００２年１１月２０日検索」、インターネット＜ＵＲＬ：ｈｔｔｐ：／／ｔａｎｇｉｂｌｅ．ｍｅｄｉａ．ｍｉｔ．ｅｄｕ／ｐｒｏｊｅｃｔｓ／Ａｍｂｉｅｎｔ＿Ｆｉｘｔｕｒｅｓ／Ａｍｂｉｅｎｔ＿Ｆｉｘｔｕｒｅｓ．ｈｔｍ＞
【非特許文献２】
大山正他２名編、「新編感覚・知覚心理学ハンドブック」、第１版、株式会社誠信書房、１９９４年１月２０日、”１８・５・１周辺視の基本機制”、ｐ．９２３−９２５
【非特許文献３】
大山正他２名編、「新編感覚・知覚心理学ハンドブック」、第１版、株式会社誠信書房、１９９４年１月２０日、”１０・８・３アノーソスコピック知覚”、ｐ．６４４−６４６
【００１５】
【発明が解決しようとする課題】
ところで、アンビエント・メディア及び従来方式の車両用表示装置によれば、以下のような問題がある。
【００１６】
▲１▼ アンビエント・メディアは、気配のような周辺感覚を無意識的に伝える優れたメディアではあるが、人間との親和性を重視するために、ウオーターランプ及び風車のような特殊な装置を必要としていた。また、このような特殊な装置を必要とするために、デジタル情報呈示のためのメディアとしてのみ議論がなされ、コミュニケーションのためのメディアとしての広がりに難点があった。
【００１７】
▲２▼ 周辺視による視覚情報の処理を利用した技術は、車両用表示装置のように適用分野が限られており、従来のヒューマン・インタフェースでは、ほとんど利用されてこなかった。
【００１８】
▲３▼ アノーソスコピック知覚に基づく錯視現象である上述したスリット視は、人間の視覚機能を解明するための研究手法として注目されてきたが、このスリット視による視覚情報の処理を画像表示系に積極的に利用した技術は未だ開示されていない。
【００１９】
そこで、この発明は上述した課題を解決したものであって、周辺視野域で部分的に表示される情報からでもその全体像を認識でき、あるいは外部環境の変化として認識できることを応用することによって、特殊な装置を必要とせず、しかもフォアグラウンドの処理を妨げずに、周辺視野域に表示された複数の情報を無意識的に認識できる、並列的なコミュニケーションを可能とした画像表示装置及び画像表示方法を提供することを目的とする。
【００２０】
【課題を解決するための手段】
上記課題を解決するために、本発明に係る画像表示装置は、画像表示手段の表示領域を少なくとも２つ以上の表示要素を表示できるように割り当て、この表示要素の夫々に任意の画像を表示する画像表示装置であって、この表示要素の夫々に画像として表示される複数の情報を入力する入力手段と、この入力手段により入力された複数の情報を取得すると共に、これら複数の情報に対応した画像を画像表示手段に表示する画像表示制御手段とを備え、この画像表示制御手段は、これら複数の情報のうち少なくとも１つの情報に基づく画像を画像表示手段の中心視野域に位置する表示要素に表示すると共に、残りの情報の一部を用いた画像を画像表示手段の周辺視野域に位置する表示要素に表示するように制御することを特徴とするものである。
【００２１】
本発明に係る画像表示方法は、１つ以上の画像情報又は１つ以上の音声情報のいずれか一方又は双方を入力するステップと、入力された音声情報を画像情報に変換するステップと、入力された画像情報及び音声情報から変換された画像情報のうち少なくとも１つの画像情報に基づく画像を中心視野域に表示すると共に、残りの画像情報の一部に基づく１つ以上の画像を周辺視野域に表示するステップとを含むことを特徴とするものである。
【００２２】
本発明に係る画像表示装置及び画像表示方法によれば、複数の情報、例えば、外部環境からの複数の情報が画像情報又は音声情報として入力される。音声情報として入力された情報は画像情報に変換される。これら複数の情報は、通信回線等を介して通信部により受信された画像又は音声情報であっても良い。このような画像情報のうちの少なくとも１つの画像情報に基づく画像が、画像表示手段の中心視野域に位置した表示要素に表示され、残りの画像情報の一部より生成された１つ以上の画像が、この画像より全体画像をアノーソスコピック知覚に基づく錯視現象により視認し得る形状で画像表示手段の周辺視野域に位置した少なくとも１つ以上の表示要素に表示される。
【００２３】
こうすることで、外部環境からの複数の情報をアノーソスコピック知覚に基づく錯視現象により無意識的かつ並列的に視認し得るように表示したので、中心視野域に表示される画像の中心視による視認を妨げずに、しかも特殊な装置を必要とせずに、外部環境の変化を認識できる。このことは換言すれば、ユーザと複数の外部環境の状況との無意識的かつ並列的なインタラクションを実現できることになる。
【００２４】
また、インターネット等の通信回線を介して通信部により受信した複数の情報を周辺視でのアノーソスコピック知覚に基づく錯視現象により無意識的かつ並列的に視認し得るように表示することもできる。この場合においても、無意識的かつ並列的な外部情報の知覚を中心視野域での処理を妨げることなく実現できる。
【００２５】
【発明の実施の形態】
以下、図面を参照しながら、この発明の実施形態に係る画像表示装置及び画像表示方法について説明する。
［第１の実施形態］
図１（ａ）は、本発明の第１の実施形態としての画像表示装置１００の一部をなす画像表示例を示す概念図である。
【００２６】
この実施形態では、画像表示手段１２として、ＣＲＴ（Ｃａｔｈｏｄｅ−ＲａｙＴｕｂｅ：陰極線管）表示装置又は液晶表示装置（ＬＣＤ：ＬｉｑｕｉｄＣｒｙｓｔａｌＤｉｓｐｌａｙ）、プラズマディスプレイパネル（ＰＤＰ：ＰｌａｓｍａＤｉｓｐｌａｙＰａｎｅｌ）表示装置、電界放出型表示装置（ＦＥＤ：ＦｉｅｌｄＥｍｉｓｓｉｏｎＤｉｓｐｌａｙ）、有機エレクトロルミネッセンス（ＥＬ：ＥｌｅｃｔｒｏＬｕｍｉｎｅｓｃｅｎｃｅ）表示装置あるいは電子ペーパー（Ｐａｐｅｒ）表示装置のような平面表示装置等の単一の画像表示媒体が使用される。
【００２７】
この画像表示手段１２は、中心視野域に位置する表示要素と周辺視野域に位置する表示要素とから構成される。そのため、便宜的に画像表示手段１２の表示領域を、図１に示したように、３つの表示要素Ｗ１，Ｗ２，Ｗ３に分割する。
【００２８】
入力手段２（後述する）により入力された複数の情報のうち少なくとも１つの情報に基づく画像（第１の画像）を画像表示手段１２の中心視野域に位置する表示要素Ｗ３に表示する。そして、残りの情報の一部を用いた画像（第２の画像）を画像表示手段１２の周辺視野域のうち左右端領域に位置する表示要素Ｗ１，Ｗ２に表示するように画像表示制御手段３（後述する）により制御する。これらの表示要素Ｗ１，Ｗ２は、これらの表示要素Ｗ１，Ｗ２に部分的に表示される画像の全体像をスリット視により視認できるような形状（表示領域）となされている。
【００２９】
このような表示形態とすることによって、上述したように、周辺視野域の表示要素Ｗ１，Ｗ２に部分的に表示される画像から、その画像の全体像を、中心視野域の表示要素Ｗ３に表示される画像に対するフォアグラウンドの処理を妨げずに、アノーソスコピック知覚に基づく錯視現象（スリット視）により視認することができる。これによって、ユーザと複数の情報との無意識的かつ並列的なインタラクションを特殊な装置を必要とせずに実現できる。
【００３０】
さて、図１に示す画像表示装置１００は、上述したように、画像表示装置の一例を構成するものであって、入力された複数の情報の夫々に対応した複数の画像を表示する機能を備えた装置である。
【００３１】
画像表示装置１００では、図１に示すように、通常の意識的な作業を行うための情報が、ディスプレイ（画像表示手段）１２の中央の表示要素Ｗ３に画像（第１の画像）として表示され、残りの情報の一部に基づく画像（第２の画像）が、ディスプレイ１２の左右端領域に夫々スリット状に設定された縦長の表示要素Ｗ１及び表示要素Ｗ２に表示される。
【００３２】
画像表示手段１２がパーソナルコンピュータ（以下、ＰＣと記載）用のディスプレイである場合には、ディスプレイ１２中央の表示要素Ｗ３に表示される画像（表示画面）は、文章作成用や表計算用等のアプリケーション・ソフトウエア等により作成されてウインドウ表示された画像（表示画面）である。この表示要素Ｗ３に表示される画像が、ユーザにとっては中心視野域に表示された画像（第１の画像）であり、この画像に対する処理が、フォアグラウンドの処理となる。
【００３３】
一方、残りの情報としては、フォアグラウンドで処理されている情報以外の情報であって、従って、この残りの情報としては、ユーザの処理環境以外の外部環境等から入手する情報が考えられる。また、このときの情報としては、画像情報が一般的である。例えば、門扉に設置した監視カメラから来訪者等の情報が画像情報として利用される。この来訪者の全体像を、スリット視からの部分画像に基づいて容易に視認し得るように、入力された画像情報の一部が、ユーザの周辺視野域であるディスプレイ１２左右端領域に位置する表示要素Ｗ１，Ｗ２に表示される。これらの表示要素Ｗ１，Ｗ２に表示される画像（スリット像）の作成例を次に説明する。
【００３４】
例えば、監視カメラからの画像情報（例えば、１フレームあるいは１フィールドの画像信号）のうち、左端部近傍であって垂直方向に帯状に伸びる画像情報が表示要素Ｗ１に表示される画像として使用され、同様に、同じ画像情報の右端部近傍であって垂直方向に帯状に伸びる画像情報が表示要素Ｗ２に表示される画像として使用される。画像信号との対応関係をとるならば、表示要素Ｗ１，Ｗ２との関係は、図１（ｂ）のようになる。即ち、監視カメラからの画像情報の一部を用いた画像を、周辺視野域に位置する表示要素Ｗ１，Ｗ２に表示する。
【００３５】
このような部分的（断片的）な画像であっても、来訪者が監視カメラの面前で左右に動いたり、監視カメラの方に近寄って来たりすると、その動きの一部が表示要素Ｗ１又は表示要素Ｗ２に表示される。表示要素Ｗ１又は表示要素Ｗ２若しくはこの双方に現れる微かな動きの変化がスリット視により視認できるようになる。
【００３６】
従って、中央の表示要素Ｗ３に表示された画像に意識を集中して文章作成や表計算のような作業を行っているような場合においても、外部環境の変化を無意識的かつ並列的に認識できる。
【００３７】
画像表示装置１００は、例えば、図２に示すように、画像表示機能を有するディスプレイ１２を備えたＰＣ（図２はノート型ＰＣ）１０の本体に、画像入力装置としてビデオカメラ１１ａを接続することにより構成される。
【００３８】
このような画像表示装置１００は、図３に示すように、入力部１１、表示部１２、スリット変換部１３、制御部１４及び入力操作部１５から構成される。入力部１１及び入力操作部１５は入力手段２を構成し、スリット変換部１３及び制御部１４は画像表示制御手段３を構成する。
【００３９】
入力部１１は、第１及び第２の画像の入力部として機能し、第１の画像はＰＣ本体に内蔵されたアプリケーション・ソフトウエアに基づく画像そのものである。第２の画像は外部環境からの情報に対応した画像である。そのため、外部環境からの情報を画像情報として入力する単数又は複数のビデオカメラ１１ａのような画像入力装置を備える。ビデオカメラ１１ａは、入力手段２を構成する入力部１１の一例であって、室内カメラや屋外監視カメラ等が使用される。このビデオカメラ１１ａからは、ユーザが直接観察できない場所の状況を画像情報として取得できる。
【００４０】
ＰＣ１０の本体とビデオカメラ１１ａとをインターネット等のネットワークを介して接続すると、ＰＣ１０とビデオカメラ１１ａとの間に距離的制限がなくなるので、海外のような遠隔地の状況を画像情報として入力することも可能になる。なお、ビデオカメラ１１ａはＰＣ１０に組み込まれた広角カメラであっても良い。このような広角カメラをユーザの視界に入らない領域に向けることによって、このユーザが直接観察できない領域の状況を画像情報として入力できる。
【００４１】
表示部１２は、図１に示したディスプレイ１２のように、第１の画像を中心視野域の表示要素Ｗ３に表示すると共に、第２の画像を周辺視野域の表示要素Ｗ１，Ｗ２に表示する機能を備えた画像表示手段である。表示部１２は、上述したように、ＣＲＴ表示装置、液晶表示装置（ＬＣＤ）、プラズマディスプレイパネル（ＰＤＰ）表示装置、電界放出型表示装置（ＦＥＤ）、有機エレクトロルミネッセンス（ＥＬ）表示装置、あるいは電子ペーパー表示装置のような平面表示装置を単一の画像表示媒体として使用することができる。
【００４２】
スリット変換部１３は、ビデオカメラ１１ａのような画像入力装置から入力された画像を制御部１４を介して取得し、この取得した画像を周辺視野域の表示要素Ｗ１，Ｗ２の位置及び形状に対応させて切り取り（図１（ｂ）参照）、この切り取られた画像を第２の画像として制御部１４を介して出力する機能を有する。これによって、画像入力装置から入力された画像の一部を用いた画像を、第２の画像として表示要素Ｗ１，Ｗ２に表示できる。
【００４３】
スリット変換部１３によって変換される第２の画像の画像切取位置や切取数の関係を図４に示す。図４（ａ）は、１台のビデオカメラ１１ａから入力された画像情報に基づく１つの入力画像５Ａの左端部５Ａ１及び右端部５Ａ２を、夫々表示要素Ｗ１及び表示要素Ｗ２の位置及び形状に合致させて切り取り（抽出し）、これらの切り取られた画像５Ａ１，５Ａ２を表示要素Ｗ１，Ｗ２の表示画像として出力する場合である。これによって、ビデオカメラ１１ａの前で左右方向に移動する（横切る）物体があったときには、この動きを、スリット視として、あたかも中心視野域の表示要素Ｗ３の向こう側を移動するものを覗いているように視認することができる。
【００４４】
図４（ｂ）は、１つの入力画像５Ｂの中央部５Ｂ１を、表示要素Ｗ１（又は表示要素Ｗ２）の形状に合致させて切り取り、この切り取られた画像５Ｂ１を表示要素Ｗ１あるいは表示要素Ｗ２だけに割り当てるか又は双方に割り当てるように出力しても良い。これによって、入力画像５Ｂの中央部でのみ動くものであっても、この動きを捉えて表示要素Ｗ１及び／又は表示要素Ｗ２に表示するように出力できる。
【００４５】
図４（ｃ）は、例えば、２台のビデオカメラ１１ａから入力された２つの入力画像５Ｃ１，５Ｃ２を夫々の表示要素Ｗ１，Ｗ２に割り当てるように出力させた場合である。これらの入力画像５Ｃ１，５Ｃ２の夫々の中央部５Ｃ１１，５Ｃ２１を表示要素Ｗ１及び表示要素Ｗ２の形状に合致させて切り取る。この切り取った表示画像５Ｃ１１を表示要素Ｗ１に対応させて表示できるように出力し、また、表示画像５Ｃ２１を表示要素Ｗ２に対応させて表示できるように出力する。このような変換処理を行うことによって、外部環境の異なる２個所の状況を同時に視認することが可能になる。
【００４６】
制御部１４は、ビデオカメラ１１ａのような画像入力装置から画像情報として入力される外部環境からの情報をスリット変換部１３に与え、この画像情報から上述したように切り取られた表示画像をスリット変換部１３から取得し、この取得した表示画像を表示部１２に出力して周辺視野域の表示要素Ｗ１，Ｗ２に表示するように制御する。そのため、この制御部１４は、入力処理、画像変換処理、制御処理等を行う各種処理プログラムを制御するＣＰＵよりなる処理手段を有する。
【００４７】
入力操作部１５は、図２に示したＰＣ１０のキーボード１５のようなユーザと画像表示装置１００とのインタフェースであって、この入力操作部１５を介して、表示要素Ｗ１，Ｗ２の位置及び大きさや、表示要素Ｗ３に表示される画像の選択等、各種の設定処理のための設定情報が入力される。この設定情報は、制御部１４に与えられて各種の処理が実行される。
【００４８】
画像表示装置１００の制御系をブロック化すると図５のようになる。即ち、この制御系は、図５に示すように、入力部１１、表示部１２、入力操作部１５、ＣＰＵ３１、ＲＡＭ３２及びＲＯＭ３３がバス３４により接続されることにより構成される。なお、この画像表示装置１００の制御系は、更に通信部２５を備えた構成とすることによって、この通信部２５経由で外部情報を取得できる。
【００４９】
ＣＰＵ３１、ＲＡＭ３２及びＲＯＭ３３は画像表示制御手段３を構成し、ＣＰＵ３１がＲＡＭ３２をワークエリアとして使用しながらＲＯＭ３３に格納された所定のプログラムに従い必要な演算をすることによって、スリット変換部１３及び制御部１４としての処理を行う。
【００５０】
また、文章作成や表計算等の作業用の画像を表示要素Ｗ３にウインドウ表示する場合においても、ユーザにより入力操作部１５を介して入力される指示に基づいてＣＰＵ３１は、ＲＯＭ３３又はハードディスクのようなメモリ手段（図示せず）に格納された所定のプログラムを実行する。その結果として、ユーザが指定したアプリケーション・ソフトウエアによる画像が、第１の画像として表示要素Ｗ３にウインドウ表示される。第１の画像は、このようにアプリケーション・ソフトウエアによる画像のみならず、テレビ放送による画像などであっても良い。
【００５１】
次に、本発明に係る画像表示方法として、本実施形態としての画像表示装置１００の動作について詳しく説明する。
図６は、画像表示装置１００のスリット変換部１３での処理例を示すフローチャートであり、図７は、画像表示装置１００の画像表示手段１２の周辺視野域の表示要素Ｗ１，Ｗ２に出力する表示画像の計算例を示すフローチャートである。
【００５２】
この実施形態では、図２に示したＰＣ１０の本体が、画像表示装置１００の表示部１２、スリット変換部１３、制御部１４及び入力操作部１５の機能を備える。更に、この実施形態では、１台のビデオカメラ１１ａが外部環境の状況を画像情報として入力するように接続され、このビデオカメラ１１ａから入力される画像情報に基づく画像を周辺視野域に設けられたスリット視によって視認し得るように、２つのスリット状の表示要素Ｗ１，Ｗ２が、図１に示したように、ディスプレイ１２の左右端領域に設定されていることを前提条件とする。
【００５３】
ＰＣ１０に接続されたビデオカメラ１１ａは１台なので、周辺視野域の表示要素Ｗ１，Ｗ２に出力する表示画像としては、図４（ａ）に示した１つの入力画像５Ａの左右端部から切り取られた異なる画像５Ａ１，５Ａ２を利用するものとする。また、表示要素Ｗ１，Ｗ２の位置及び形状は、制御部１４において、予め設定されているものとする。
【００５４】
この前提条件の下において、スリット変換部１３では、ビデオカメラ１１ａから入力された画像情報と表示要素Ｗ１，Ｗ２の位置及び形状とを、入力部１１及び入力操作部１５から制御部１４を介して取得する。ここで、ディスプレイ１２の横方向（水平走査方向）にｘｙ直交座標系のｘ軸を取り、縦方向（垂直走査方向）にｙ軸を取ると、入力画像情報（入力要素）と表示要素Ｗ１，Ｗ２の位置及び形状との対応関係は、下記表１のように表すことができる。
【００５５】
【表１】

【００５６】
入力画像情報は、表１において、ビデオカメラ１１ａから入力された入力画像Ｉｎ１のみである。ここで、表示要素Ｗ１の左上の座標を（ｘ１，ｙ１）、表示要素Ｗ１の大きさを（ｗ１，ｈ１）とすると、図８に示すように、表示要素Ｗ１の右上、右下及び左下の座標は夫々（ｘ１＋ｗ１，ｙ１），（ｘ１＋ｗ１，ｙ１＋ｈ１），（ｘ１，ｙ１＋ｈ１）と表されるので、これらの座標を頂点とする矩形状の表示要素Ｗ１に、ビデオカメラ１１ａから入力された入力画像Ｉｎ１の対応する部分の画像を表示する。
【００５７】
同様に、図示はしないが、表示要素Ｗ２の左上の座標を（ｘ２，ｙ２）、表示要素Ｗ２の大きさを（ｗ２，ｈ２）とすると、表示要素Ｗ２の右上、右下及び左下の座標は夫々（ｘ２＋ｗ２，ｙ２），（ｘ２＋ｗ２，ｙ２＋ｈ２），（ｘ２，ｙ２＋ｈ２）と表されるので、これらの座標を頂点とする矩形状の表示要素Ｗ２に、ビデオカメラ１１ａから入力された入力画像Ｉｎ１の対応する部分の画像を表示する。
【００５８】
このときのスリット変換部１３における処理を、図６に示すフローチャートを用いて説明する。先ず、全ての入力要素に対して処理を行なうために、ステップＳ０１で、入力要素があるか否かの判断を行う。ここでは、入力要素は１台のビデオカメラ１１ａからの入力画像Ｉｎ１のみであるから、このビデオカメラ１１ａからの入力画像Ｉｎ１に対して処理を行う（Ｙｅｓ）。
【００５９】
次に、周辺視野域の全ての表示要素に対して処理を行なうために、ステップＳ０２で、表示要素が周辺視野域に位置しているか否かの判断を行なう。ここでは、２つの表示要素Ｗ１，Ｗ２が周辺視野域に設定されているため（Ｙｅｓ）、ステップＳ０３に進み、最初に表示要素Ｗ１についての処理を行なう。
【００６０】
ステップＳ０３では、現在の入力要素として入力される画像情報が、表示要素Ｗ１に表示するための画像情報か否かの判断を行う。表示要素Ｗ１に表示される画像は、入力画像Ｉｎ１で表示要素Ｗ１の位置及び形状に合致する部分であり、現在の入力要素として入力される画像情報であるので（Ｙｅｓ）、ステップＳ０４に進み、表示要素Ｗ１に出力する表示画像の計算を行なう。
【００６１】
表示要素Ｗ１に出力する表示画像の計算が終了すると、ステップＳ０２に戻り、表示要素Ｗ２に対する処理を同様にして行なう。再びステップＳ０４まで進み、表示要素Ｗ２に対する処理が終了すると、ステップＳ０２に戻り、表示要素が周辺視野域に残っていないので（Ｎｏ）、ステップＳ０１に戻り、他の入力要素もないので（Ｎｏ）、全ての処理を完了して終了する。
【００６２】
ここで、ステップＳ０４で行う表示要素に出力する表示画像の計算の具体的な処理を、図７に示すフローチャートを用いて説明する。先ず、ステップＳ１１で、スリット変換部１３は、周辺視野域の表示要素Ｗｉの位置（ｘｉ，ｙｉ）及び大きさ（ｗｉ，ｈｉ）を制御部１４を介して取得する。なお、添字ｉは正の整数であって、本実施形態では１又は２である。
【００６３】
次に、取得した表示要素Ｗｉの位置及び大きさの値を用いて、ステップＳ１２で、表示要素Ｗｉに出力する表示画像を計算する。この表示画像の計算は、例えば、下記の式（１）及び（２）を用いて行なう。
ｘ＝ｉｎｔ（Ｗ × ｘｉ／ＷＩＤＴＨ）・・・（１）
ｙ＝ｉｎｔ（Ｈ × ｙｉ／ＨＥＩＧＨＴ）・・・（２）
【００６４】
ここで、ＷとＨは、夫々入力画像Ｉｎ１の幅と高さであり、ＷＩＤＴＨとＨＥＩＧＨＴは、夫々ディスプレイ１２の表示領域の幅と高さである。なお、式（１）及び（２）において、「ｉｎｔ（）」は、カッコ（）内の数値を整数に変換する関数である。これによって、表示要素Ｗｉに出力する表示画像として、左上の座標が（ｘ，ｙ）であり、大きさが（ｗｉ，ｈｉ）の領域である画像のデータを入力画像Ｉｎ１の画像情報から計算し、処理を終了する。
【００６５】
このように本実施形態では、ビデオカメラ１１ａで撮影された入力画像Ｉｎ１から切り取られた表示画像が、ディスプレイ１２の左右端領域に位置する表示要素Ｗ１，Ｗ２の部分に、あたかも矩形状のスリットが開いている壁や板の向こう側に入力画像Ｉｎ１の全体像が存在するかのように表示される。
【００６６】
従って、図１に示したように、表示要素Ｗ３に表示されている画像に対して、ユーザがフォアグラウンドの処理として何か意識的な作業を行なっているときであっても、ビデオカメラ１１ａで撮影された場所の状況を周辺視野域でのスリット視により視認できるので、例えば、ビデオカメラ１１ａの前を人が通り過ぎたときには、実行中の作業を妨げられることなく人が通ったような気配を感じ取ることができる。
【００６７】
なお、本実施形態で表示要素Ｗ１，Ｗ２に表示する画像は、表示要素Ｗ３として第１の画像に重ねて表示しても良ければ、表示要素Ｗ１，Ｗ２の部分の第１の画像を取り除き、ここに第２の画像を嵌め込んで表示しても良い。また、第２の画像と重複しないように、第１の画像の大きさを制限することもできる。
【００６８】
本実施形態での表示要素Ｗ１，Ｗ２は、横方向に主に移動する画像の全体像をスリット視により容易に視認し得るように、ディスプレイ１２の左右端領域に縦方向に長いスリット状に設定されたが、表示要素Ｗ１，Ｗ２は、ディスプレイ１２の上下端部であって、横方向に長いスリット状に設定することもできる。このような表示要素Ｗ１，Ｗ２では、主として上下方向に主に移動する画像から切り取られた表示画像を、この表示要素Ｗ１，Ｗ２に表示することで、この上下方向に移動する画像の全体像をスリット視により容易に視認し得るようになる。
【００６９】
本実施形態での表示要素Ｗ１，Ｗ２の位置及び形状は、ユーザにより予め設定されることを前提としたが、周辺視野域に位置する表示要素Ｗ１，Ｗ２の位置及び形状は、ビデオカメラ１１ａから入力される画像情報に含まれる移動物体の移動方向及び速度により自動的に設定されるように、予めプログラムしてＲＯＭ３３に格納しておくことも可能である。
【００７０】
［第２の実施形態］
次に本発明に係る第２の実施形態として、上述した画像表示装置１００での他の表示例について説明する。この実施形態では、図９に示すように、図１に示したディスプレイ１２の左右端領域に位置する２つのスリット状の表示要素Ｗ１，Ｗ２の代わりに、６つの矩形状の表示要素Ｗ６１，Ｗ６２，Ｗ６３，Ｗ６４，Ｗ６５，Ｗ６６がディスプレイ１２の周縁部に位置するように設定する。
【００７１】
これによって、ディスプレイ１２の周辺視野域のより狭い領域により多くの表示画像を表示できるので、より多くの外部環境の状況と並列的にインターラクトできるようにしたものである。
【００７２】
３つの表示要素Ｗ６１，Ｗ６２，Ｗ６３を利用することで、ディスプレイ１２上端部で横方向に長い１つのスリット状として認識することができる。同様に、３つの表示要素Ｗ６４，Ｗ６５，Ｗ６６は、ディスプレイ１２下端部で横方向に長い１つのスリット状として認識することができる。このため、これらの表示要素Ｗ６１，Ｗ６２，Ｗ６３と表示要素Ｗ６４，Ｗ６５，Ｗ６６とは、夫々ディスプレイ１２の上端部及び下端部において、上下方向に主として移動する画像の全体像をスリット視により視認し易い形状となっている。
【００７３】
なお、ディスプレイ１２中央の２つの大きな面積の表示要素Ｗ６７，Ｗ６８は、フォアグラウンドで通常の処理を行う画像を中心視野域に表示するための表示要素である。このようにフォアグラウンドの処理のための画像は、図１に示した表示要素Ｗ３のような単数の表示要素に表示することもできるが、表示要素Ｗ６７，Ｗ６８のように、中心視野域に位置する複数の表示要素に複数の画像をマルチウインドウ表示することもできる。
【００７４】
ディスプレイ１２の周縁部に複数の方形状の表示要素Ｗ６１，Ｗ６２，Ｗ６３，Ｗ６４，Ｗ６５，Ｗ６６を設定する場合、これらの表示要素Ｗ６１，Ｗ６２，Ｗ６３，Ｗ６４，Ｗ６５，Ｗ６６に表示する画像とビデオカメラ１１ａから入力される画像との間には、図１０（ａ）乃至（ｃ）に示すような対応関係が考えられる。
【００７５】
図９に示した全ての表示要素Ｗ６１，Ｗ６２，Ｗ６３，Ｗ６４，Ｗ６５，Ｗ６６に表示する画像として、図１０（ａ）に示すように、１台のビデオカメラ１１ａから入力される１つの入力画像７Ａの周縁部の画像を利用する。そのため、表示要素Ｗ６１，Ｗ６２，Ｗ６３，Ｗ６４，Ｗ６５，Ｗ６６の位置及び形状に合致する部分７Ａ１，７Ａ２，７Ａ３，７Ａ４，７Ａ５，７Ａ６を表示画像として切り取って使用することになる。こうすることによって、周辺視野域のより小さな面積の表示要素を用いても、入力画像７Ａの全体像をスリット視により視認できるようになる。
【００７６】
図１０（ｂ）は、３台のビデオカメラ１１ａから入力される３つの入力画像７Ｂ，７Ｃ，７Ｄを用いた場合である。この例では、入力画像７Ｂの上下中央端部の画像７Ｂ１，７Ｂ４を図９に示した表示要素Ｗ６１，Ｗ６４に対応させ、入力画像７Ｃの上下中央端部の画像７Ｃ２，７Ｃ５を表示要素Ｗ６２，Ｗ６５に対応させ、入力画像７Ｄの上下中央端部の画像７Ｄ３，７Ｄ６を表示要素Ｗ６３，Ｗ６６に対応させている。そのため、これらの入力画像７Ｂ，７Ｃ，７Ｄのうち、上下中央端部７Ｂ１，７Ｂ４，７Ｃ２，７Ｃ５，７Ｄ３，７Ｄ６を切り取った画像が、表示画像として利用される。
【００７７】
図９に示すように、表示要素Ｗ６１と表示要素Ｗ６４、表示要素Ｗ６２と表示要素Ｗ６５及び表示要素Ｗ６３と表示要素Ｗ６６は、夫々が対となった表示要素として見た場合、これらは縦方向に長い３本のスリット状をなした表示領域とみなすことができる。そのため、入力画像７Ｂ，７Ｃ，７Ｄが左右方向に移動する画像であるとき、この左右方向に移動する画像をスリット視により容易に視認できる。従って、この場合においても、より小さな面積の表示要素によって、より多くの外部環境の状況と並列的にインターラクトできるようになる。
【００７８】
図１０（ｃ）は、２台のビデオカメラ１１ａからの２つの入力画像７Ｅ，７Ｆを用いた場合である。この例では、入力画像７Ｅの上端部の画像７Ｅ１，７Ｅ２，７Ｅ３を表示要素Ｗ６１，Ｗ６２，Ｗ６３に対応させ、入力画像７Ｆの下端部の画像７Ｆ４，７Ｆ５，７Ｆ６を表示要素Ｗ６４，Ｗ６５，Ｗ６６に対応させている。そして、これらの入力画像の対応する周縁部分７Ｅ１，７Ｅ２，７Ｅ３，７Ｆ４，７Ｆ５，７Ｆ６の画像を切り取って各表示要素Ｗ６１，Ｗ６２，Ｗ６３，Ｗ６４，Ｗ６５，Ｗ６６に表示するようにした場合である。入力画像７Ｅ，７Ｆから切り取る部分は、これらの入力画像７Ｅ，７Ｆの周縁部ではなく中央部であっても良い。この場合も、第１の実施形態及び図１０（ａ）に示した例と比較して、周辺視野域のより小さな面積の表示要素によって、より多くの外部環境の状況と並列的にインターラクトできるようになる。
【００７９】
［第３実施形態］
次に本発明に係る第３の実施形態として、上述した画像表示装置１００での他の表示例について説明する。この実施形態では、図１１及び図１２に示すように、画像表示手段１２として複数の画像表示媒体を使用する。これによって、ディスプレイ１２のような単一の画像表示媒体における表示領域の制限に捉われずに、複数の外部環境の状況との並列的なインターラクションを可能としたものである。
【００８０】
図１１（ａ）及び（ｂ）に示す実施形態では、液晶プロジェクタのような投射型表示装置１２ｂ等を用いることによって、ＴＶ３０の画面が壁面１２ａの中心視野域に位置するように配置される。そして、ＴＶ３０の後方の壁面１２ａであって、その周辺視野域に表示要素Ｗ１，Ｗ２に表示する画像を投射する。これによって、外部環境から入力される画像をＴＶ３０を観賞しながら周辺視野域のスリット視により視認することが可能となる。
【００８１】
もちろん、壁面１２ａ全体を画像表示手段１２として利用できるように、ＴＶ３０を設置せずに、図１に示したような表示要素Ｗ１，Ｗ２，Ｗ３に表示される全ての画像を投射型表示装置１２ｂにより壁面１２ａに投射しても良い。
【００８２】
複数の画像表示媒体による周辺視野域の表示要素として、図１２に示すように、有機ＥＬ表示装置又は電子ペーパーのような薄小型表示装置Ｗ５Ｌ，Ｗ５Ｒを、壁面１２ａに貼着して用いることもできる。この場合においても、ＴＶ３０の画面は、中心視野域に配置されるように設置する。有機ＥＬ表示装置又は電子ペーパーのような薄小型表示装置は消費電力が少ないので、環境負荷が少ない構成といえる。小型ディスプレイによる表示要素Ｗ５Ｌと表示要素Ｗ５Ｒとは、夫々縦方向に長いスリット状をなす表示領域とみなすことができるので、左右方向に移動する外部画像を、ＴＶ３０を観賞しながら周辺視野域のスリット視により視認できる。
【００８３】
［第４の実施形態］
次に、本発明に係る第４の実施形態としての画像表示装置２００について説明する。図１３は、本実施形態の一例としての画像表示装置２００を示す模式的外観図である。
【００８４】
この実施形態では、外部環境からの情報を音声情報として入力するマイク１１ｂのような音声入力装置を入力部１１に備える。この音声入力装置により入力された音声情報が特定の画像情報に変換される。この変換された画像情報の一部を用いた画像を、図１に示したように、ディスプレイ１２の周辺視野域に位置する表示要素Ｗ１，Ｗ２に表示するように制御する。
【００８５】
これによって、ディスプレイ１２の中心視野域に位置する表示要素Ｗ３に表示される画像に対するフォアグラウンドの処理を妨げずに、周辺視野域でのスリット視により外部環境の状況を視認し得るように表示できるので、ユーザと複数の外部環境の音声状況との無意識的かつ並列的なインタラクションを、特殊な装置を必要とせずに実現できる。
【００８６】
画像表示装置２００は、例えば、図１３に示すように、画像表示機能を有するディスプレイ１２を備えたＰＣ１０の本体に、音声入力装置としてマイク１１ｂを接続することにより構成される。
【００８７】
ＰＣ１０を使用しているユーザが音声情報を直接取得することができない場所に、マイク１１ｂが設置される。これによって、人間の聴覚機能が直接及ばない遠隔地の状況を音声情報として入力できる。マイク１１ｂからの音声情報をインターネット等のネットワークを介して入力できれば、ＰＣ１０とマイク１１ｂとの間に距離的制限がなくなるので、海外のような遠隔地の状況を音声情報として入力できるようになる。
【００８８】
画像表示装置２００の構成も第１の実施形態の画像表示装置１００と同様であって、図３に示したように、入力部１１、表示部１２、スリット変換部１３、制御部１４及び入力操作部１５から構成される。
【００８９】
画像表示装置２００の制御系も第１の実施形態と同様であって、図５に示したように、入力部１１、表示部１２、入力操作部１５、ＣＰＵ３１、ＲＡＭ３２及びＲＯＭ３３がバス３４により接続された構成となっている。
【００９０】
画像表示装置２００と画像表示装置１００との相違点は、外部環境からの情報を音声情報として入力したとき、この音声情報が、この音声情報に含まれる特性、例えば周波数特性等に応じて予め設定されてＲＯＭ３３に格納された画像情報に変換される。この画像情報は、周辺視野域の表示要素Ｗ１，Ｗ２の位置及び形状に基づいて表示画像に変換して出力される。
【００９１】
図１４（ａ）は、マイク１１ｂから入力された音声情報に含まれる周波数特性に応じて、スリット変換部１３により画像情報として選択される表示画像の一例を示す模式図である。この例では、マイク１１ｂから入力可能な全周波数域を、例えば、４つの周波数帯域「ｆ０〜ｆ１」、「ｆ１〜ｆ２」、「ｆ２〜ｆ３」及び「ｆ３〜ｆ４」（ここに、ｆ０＜ｆ１＜ｆ２＜ｆ３＜ｆ４である）に分割する。そして、夫々の周波数帯域に対応する画像を、図１４（ａ）に示すように割り当てる。例えば、最低の周波数帯域「ｆ０〜ｆ１」には円形状の画像１３１を、最高の周波数帯域「ｆ３〜ｆ４」には十字状の画像１３４を、中間の２つの周波数帯域「ｆ１〜ｆ２」、「ｆ２〜ｆ３」には円形状から十字状への変形過程にある星形状の画像１３２，１３３を割り当てる。そして、これらの画像情報がＲＯＭ３３に格納される。
【００９２】
ここで、マイク１１ｂから入力された音声情報に対して、高速フーリエ変換（ＦＦＴ：ＦａｓｔＦｏｕｒｉｅｒＴｒａｎｓｆｏｒｍ）を用いて周波数解析を行うことによって、入力された音声情報において最大の値を持つ周波数帯域を求める。
【００９３】
入力された音声情報における最大値が、例えば、２番目に低い周波数帯域「ｆ１〜ｆ２」に含まれる場合、図１４（ｂ）に示すように、この周波数帯域に対応する星形状の画像が描かれた幅Ｗの表示画像１３２が選択される。選択されたこの表示画像１３２から、周辺視野域の表示要素Ｗ１，Ｗ２の大きさに応じた部分が部分画像１３２ｈとしてスリット変換部１３により切り取られる。部分画像１３２ｈとして切り取られる画像領域は、画像１３２の左端から右端へ、移動速度ｖで移動する。
【００９４】
このような部分画像１３２ｈが、表示時間の経過と共に表示要素Ｗ１，Ｗ２に制御部１４を介して随時出力される。これによって、入力された音声情報の周波数特性に対応する画像１３２が、表示要素Ｗ１，Ｗ２の向こう側で移動速度ｖで移動しているように、スリット視により視認することができる。これによって、音声情報として入力された外部環境の状況を、ユーザの周辺視野域でのスリット視により視認し得るように表示できるようになる。
【００９５】
次に、本実施形態としての画像表示装置２００の動作について詳しく説明する。但し、画像表示装置２００のスリット変換部１３での処理は、図６に示した第１の実施形態としての画像表示装置１００のスリット変換部１３での処理と同様であるため、図６のフローチャートを再び参照する。図１５は、画像表示装置２００の表示要素Ｗ１，Ｗ２へ出力する部分画像の計算例を示すフローチャートである。
【００９６】
この実施形態では、マイク１１ｂから入力される音声情報の周波数特性に応じて予め設定された複数の画像（図１４（ａ）参照）が、画像情報としてＲＯＭ３３に格納されている。スリット変換部１３では、マイク１１ｂから入力される音声情報と表示要素Ｗ１，Ｗ２の位置及び形状とを制御部１４を介して取得する。ここで、入力部１１から入力要素として与えられる音声情報と入力操作部１５から入力される表示要素Ｗ１，Ｗ２の位置及び形状との対応関係は、表２のように表すことができる。
【００９７】
【表２】

【００９８】
入力部１１から入力要素として与えられる音声情報は、表２において、マイク１１ｂから入力される入力音声Ｉｎ２のみである。ここで、表示要素Ｗ１の左上の座標を（ｘ１，ｙ１）、表示要素Ｗ１の大きさを（ｗ１，ｈ１）とすると、表示要素Ｗ１の右上、右下及び左下の座標は夫々（ｘ１＋ｗ１，ｙ１），（ｘ１＋ｗ１，ｙ１＋ｈ１），（ｘ１，ｙ１＋ｈ１）と表されるので、これらの座標を頂点とする矩形状の表示要素Ｗ１に、マイク１１ｂからの入力音声Ｉｎ２が有する特性に対応する部分画像１３２ｈを表示する。同様に、表示要素Ｗ２の左上の座標を（ｘ２，ｙ２）、表示要素Ｗ２の大きさを（ｗ２，ｈ２）とすると、表示要素Ｗ２の右上、右下及び左下の座標は夫々（ｘ２＋ｗ２，ｙ２），（ｘ２＋ｗ２，ｙ２＋ｈ２），（ｘ２，ｙ２＋ｈ２）と表されるので、これらの座標を頂点とする矩形状の表示要素Ｗ２に、マイク１１ｂからの入力音声Ｉｎ２が有する特性に対応する部分画像１３２ｈを表示する。
【００９９】
このときのスリット変換部１３における処理を、図６に示すフローチャートを用いて説明する。先ず、全ての入力要素に対して処理を行なうために、ステップＳ０１で、入力要素があるか否かの判断を行う。ここでは、入力要素は１つのマイク１１ｂからの入力音声Ｉｎ２のみであるから、このマイク１１ｂからの入力音声Ｉｎ２に対して処理を行う（Ｙｅｓ）。
【０１００】
次に、全ての周辺視野域の表示要素に対して処理を行なうために、ステップＳ０２で、周辺視野域に表示要素があるか否かの判断を行なう。ここでは、周辺視野域に２つの表示要素Ｗ１，Ｗ２があるので（Ｙｅｓ）、次のステップＳ０３で、表示要素Ｗ１についての処理を最初に行なう。
【０１０１】
ステップＳ０３では、現在の入力要素として入力される音声情報が、表示要素Ｗ１に表示するための音声情報か否かの判断を行う。表示要素Ｗ１に表示される画像は、入力音声Ｉｎ２に対応する部分画像１３２ｈであり、現在の入力要素としてマイク１１ｂから入力される音声情報であるので（Ｙｅｓ）、ステップＳ０４に進み、表示要素Ｗ１に出力する部分画像１３２ｈの計算を行なう。
【０１０２】
表示要素Ｗ１に出力する部分画像１３２ｈの計算が終了すると、ステップＳ０２に戻り、表示要素Ｗ２に対する処理を同様にして行なう。再びステップＳ０４まで進み、表示要素Ｗ２に対する処理が終了すると、ステップＳ０２に戻り、周辺視野域には表示要素が残っていないので（Ｎｏ）、ステップＳ０１に戻り、他の入力要素もないので（Ｎｏ）、全ての処理を完了して終了する。
【０１０３】
次に、ステップＳ０４で行う周辺視野域の表示要素Ｗｉに出力する部分画像１３２ｈの計算の具体的な処理を、図１５に示すフローチャートを用いて説明する。
【０１０４】
先ず、ステップＳ２１で、表示要素Ｗｉが未表示か表示中かを、表示時間ＴＩＭＥが０か否かで判断する。表示時間ＴＩＭＥ＝０で未表示の場合（ＹＥＳ）、ステップＳ２２に進み、マイク１１ｂから入力要素として入力された入力音声Ｉｎ２に対して、ＦＦＴにより周波数解析を行なう。
【０１０５】
次に、ステップＳ２３で、入力音声Ｉｎ２において最大の値を持つ周波数帯域を求め、そのときに表示する画像を、図１４（ａ）に示したように、予め周波数帯域に応じて設定された画像から選択する。
【０１０６】
次に、ステップＳ２４で、表示要素Ｗｉの大きさ（ｗｉ，ｈｉ）を、制御部１４を介して入力操作部１５から取得する。これらの表示要素Ｗｉの大きさの値を用いて、ステップＳ２５で、これらの表示要素Ｗｉに出力する部分画像、例えば、１３２ｈを計算する。
この部分画像１３２ｈの計算は、例えば、式（３）及び（４）を用いて行なう。
ｘ＝ＴＩＭＥ × ｖ・・・（３）
ｙ＝０・・・（４）
【０１０７】
ここで、ｖは、図１４（ｂ）に示したように、周辺視野域の表示要素Ｗｉの大きさに応じて部分画像１３２ｈとして切り取られる部分が移動する速度であって、この表示要素Ｗｉに表示する画像の移動速度ｖである。これによって、左上の座標が（ｘ，ｙ）であり、大きさ（ｗｉ，ｈｉ）の領域の画像のデータが、入力音声Ｉｎ２の音声情報から部分画像１３２ｈとして求められる。最後に、ステップＳ２６で、表示時間ＴＩＭＥを１増やして処理を終了する。
【０１０８】
ステップＳ２１で、表示時間ＴＩＭＥ１０で表示中の場合（Ｎｏ）、ステップＳ２７に進み、表示が終了したか否かを、式（５）により判断する。
ＴＩＭＥ × ｖ＋ｗｉ＞Ｗ・・・（５）
【０１０９】
ここで、Ｗは、図１４（ｂ）に示すように、各周波数帯域で表示する画像の幅である。式（５）が成立している場合、表示が終了しているので（Ｙｅｓ）、ステップＳ２８に進み、表示時間ＴＩＭＥを０にして終了する。
【０１１０】
式（５）が成立しない場合、表示が終了していないので（ステップＳ２７でＮｏ）、ステップＳ２５に進み、上記の表示要素Ｗｉに出力する部分画像１３２ｈの計算を行ない、次のステップＳ２６で、表示時間ＴＩＭＥを１増やして処理を終了する。
【０１１１】
このように第４の実施形態としての画像表示装置２００では、マイク１１ｂで録られた音の高さに応じて、形状が異なる図形が周辺視野域に位置する表示要素Ｗ１，Ｗ２の向こう側を右から左に通り過ぎるように感得される。
【０１１２】
これによって、表示要素Ｗ３で意識的な作業を行なっているときにおいても、音声が収音された場所の状況を周辺視野域でのスリット視により感得し得るので、例えば、電話の呼び出し音等の物音がしたときに、作業を妨げられることなくその気配を感じることができる。
【０１１３】
なお、本実施形態の画像表示装置２００は、画像表示装置１００のように、ビデオカメラ１１ａのような画像入力装置を入力部１１に合わせて備えることもできる。この場合、外部環境からの画像情報及び音声情報の両方を合わせて感得できるようになる。
【０１１４】
また、本実施形態の画像表示装置２００は、マイク１１ｂから音声情報が入力されたときに、表示画像の全体像を周辺視野域の表示要素Ｗ１，Ｗ２に表示するように制御されても良い。これによっても、外部環境で何か物音がしたときに、同様に、その気配を感じ取ることができる。
【０１１５】
［第５の実施形態］
次に、本発明に係る第５の実施形態としての画像表示装置３００について説明する。図１６は、本実施形態の一例としての画像表示装置３００の構成例を示す概念図である。
【０１１６】
この実施形態では、外部環境から入力された情報を他の画像表示装置３００に送信したり、他の画像表示装置から送信された情報を受信する通信部２５を備える。この通信部２５を介して受信した情報（画像又は音声）に対応する画像を周辺視野域に位置する表示要素Ｗ１，Ｗ２に表示する。この表示制御は、画像表示制御手段３によって行われる。
【０１１７】
これによって、他の画像表示装置３００が設置された場所の状況を、ユーザのフォアグラウンドの処理を妨げない周辺視野域でのスリット視により視認し得るように表示できるので、ユーザと他の複数の画像表示装置３００のユーザとの無意識的かつ並列的なコミュニケーションを、特殊な装置を必要とせずに実現できるようにしたものである。
【０１１８】
画像表示装置３００は、図１６に示すように、入力部１１、表示部１２、スリット変換部１３、制御部１４、入力操作部１５及び通信部２５により構成される。この画像表示装置３００と第１の実施形態に係る画像表示装置１００との相違点は、画像表示装置３００が通信部２５を備える点である。この通信部２５は、入力部１１から入力された音声又は画像情報を他の単数又は複数の画像表示装置３００に送信すると共に、他の単数又は複数の画像表示装置３００から送信された音声又は画像情報を受信する。
【０１１９】
スリット変換部１３は、通信部２５により受信された音声又は画像情報を、周辺視野域の表示要素Ｗ１，Ｗ２の位置及び形状に基づき表示画像に変換して出力する。
【０１２０】
制御部１４は、入力部１１から入力された音声又は画像情報を、必要に応じて通信部２５に送ると共に、他の画像表示装置３００から送信され通信部２５により受信された音声又は画像情報をスリット変換部１３に与える。そして、第１及び第２の実施形態と同様の処理によって、スリット変換部１３により音声又は画像情報から変換された表示画像を、表示部１２の周辺視野域に位置する表示要素Ｗ１，Ｗ２に表示するように制御する。これによって、他の画像表示装置３００のユーザが居る場所の状況を、周辺視野域でのスリット視により視認し得るように表示できる。
【０１２１】
図１７（ａ）乃至（ｃ）は、本実施形態としての画像表示装置３００の一例を示す模式的外観図である。図１７（ａ）はカメラ付きＰＣ１０であり、図１７（ｂ）はカメラ付きＴＶ３００ａであり、図１７（ｃ）はカメラ付き携帯電話３００ｂである。これらのカメラ付きＰＣ１０、カメラ付きＴＶ３００ａ及びカメラ付き携帯電話３００ｂには、外部環境の状況を画像情報として入力するビデオカメラ１１ａが備えられている。
【０１２２】
このようなカメラ付きＰＣ１０、カメラ付きＴＶ３００ａ及びカメラ付き携帯電話３００ｂは、通信部２５による通信機能を介して夫々インターネット、ＴＶ放送通信網又は一般電話回線網等のネットワークに接続されることによって、画像表示装置３００の機能を有する他の同様な装置、即ち、カメラ付きＰＣ１０、カメラ付きＴＶ３００ａ又はカメラ付き携帯電話３００ｂ等と相互に接続される。
【０１２３】
これによって、画像表示装置３００のユーザが、カメラ付きＰＣ１０のディスプレイ１２中央の表示要素Ｗ３で何か意識的な作業を行なっていたり、カメラ付きＴＶ３００ａを観賞していたり、カメラ付き携帯電話３００ｂで誰かと通話していたりするときにおいても、ビデオカメラ１１ａで撮られた自分の状況を相手に伝えると共に、相手の状況を周辺視野域でのスリット視により視認し得るので、例えば相手が動いたときに、作業を妨げられることなく相手が動いたような気配を感じることができる。
【０１２４】
このような画像表示装置３００において、第２の実施形態と同様にマイク１１ｂが音声入力装置として合わせて備えられている場合、他の画像表示装置３００のユーザが居る場所の状況が音声情報として通信部２５を介して入力されるので、自分の周辺状況を音声情報として相手に伝えると共に、相手の周辺の音声状況を周辺視野域でのスリット視により感得し得る。従って、例えば、相手が何か物音をたてたときに、作業を妨げられることなく相手が物音をたてたような気配を感じることができる。
【０１２５】
これらは親しい人同士の非言語的コミュニケーションに応用することができ、親しい人同士が相手の気配を感じることにより無意識のうちに繋がり感を高めることができる。
【０１２６】
本発明に係る実施形態としての画像表示装置１００，２００，３００において、周辺視野域の表示要素に表示される情報は、従来のアンビエント・メディアにおけるようなデジタル情報であっても良い。このような場合、例えば、ネットワーク経由で通信部２５を介して送受信中の情報量等を、この情報量の増減に応じて予め設定された図形等を、第４の実施形態における音声情報と同様に処理して周辺視野域におけるスリット視により視認し得るように表示することによって、情報量の増減のような様々な情報をユーザのフォアグラウンドの処理を妨げることなく知覚させることができる。
【０１２７】
このように、本発明に係る実施形態としての画像表示装置及び画像表示方法によれば、周辺視による視覚情報の処理とスリット視による視覚情報の処理とを融合応用することによって、周辺視野域に位置する狭領域の表示要素に表示される部分的な画像から、中心視野域に表示される画像に対するフォアグラウンドの処理を妨げずに、様々な情報の全体を認識させることができる。
【０１２８】
従って、アンビエント・メディアでのウオーターランプ又は風車のような特殊な装置を必要としないため、デジタル情報表示のためのメディアとしてのみならず、コミュニケーションのためのメディアとして広く普及させることができる。
【０１２９】
【発明の効果】
以上説明したように、本発明に係る画像表示装置及び画像表示方法によれば、入力された複数の情報のうち少なくとも１つの情報に基づく画像を画像表示手段の中心視野域に位置する表示要素に表示すると共に、残りの情報の一部を用いた画像を画像表示手段の周辺視野域に位置する表示要素に表示するように制御するものである。
【０１３０】
この構成によって、周辺視野域で部分的に表示される画像の全体を周辺視でのアノーソスコピック知覚に基づく錯視現象により無意識的かつ並列的に視認し得るように表示できるので、中心視野域に表示される画像の中心視による視認を妨げずかつ特殊な装置も必要とせずに、ユーザと複数の外部環境の状況との無意識的かつ並列的なインタラクションを実現できる。
【０１３１】
この発明は、視聴覚機器及び画像表示機能を備えた情報処理機器並びにこれらの周辺機器等に適用して極めて好適である。
【図面の簡単な説明】
【図１】本発明に係る第１の実施形態としての画像表示装置１００の表示例を示す模式図である。
【図２】画像表示装置１００の構成例を示す模式的外観図である。
【図３】画像表示装置１００の構成例を示す概念図である。
【図４】画像表示装置１００における入力画像と表示画像との対応例を示す模式図である。
【図５】画像表示装置１００の制御系の構成例を示すブロック図である。
【図６】画像表示装置１００におけるスリット変換部１３での処理例を示すフローチャートである。
【図７】画像表示装置１００の表示要素に出力する表示画像の計算例を示すフローチャートである。
【図８】画像表示装置１００の表示要素Ｗ１の座標表示例を示す概念図である。
【図９】本発明に係る第２の実施形態としての画像表示装置１００での他の表示例を示す模式図である。
【図１０】画像表示装置１００における入力画像と表示画像との他の対応例を示す模式図である。
【図１１】図１１（ａ）は、本発明に係る第３の実施形態としての画像表示装置１００での他の表示例を示す模式図であり、図１１（ｂ）は、図１１（ａ）の模式的側面図である。
【図１２】画像表示装置１００での他の表示例を示す模式図である。
【図１３】本発明に係る第４の実施形態としての画像表示装置２００の構成例を示す模式的外観図である。
【図１４】画像表示装置２００における表示画像の一例を示す模式図である。
【図１５】画像表示装置２００の表示要素に出力する表示画像の計算例を示すフローチャートである。
【図１６】本発明に係る第５の実施形態としての画像表示装置３００の構成例を示す概念図である。
【図１７】画像表示装置３００の構成例を示す模式的外観図である。
【図１８】アノーソスコピック知覚に基づく錯視現象の一例を示す概念的説明図である。
【符号の説明】
１００，２００，３００・・・画像表示装置、２・・・入力手段、３・・・制御手段、１１・・・入力部、１２・・・画像表示手段（表示部）、１３・・・スリット変換部、１４・・・制御部、１５・・・入力操作部、２５・・・通信部

Claims

画像表示手段の表示領域を少なくとも２つ以上の表示要素を表示できるように割り当て、当該表示要素の夫々に任意の画像を表示する画像表示装置であって、
前記表示要素の夫々に前記画像として表示される複数の情報を入力する入力手段と、
前記入力手段により入力された前記複数の情報を取得すると共に、当該複数の情報に対応した画像を前記画像表示手段に表示する画像表示制御手段と
を備え、
前記画像表示制御手段は、
前記複数の情報のうち少なくとも１つの情報に基づく画像を前記画像表示手段の中心視野域に位置する表示要素に表示すると共に、残りの情報の一部を用いた画像を当該画像表示手段の周辺視野域に位置する表示要素に表示するように制御すること
を特徴とする画像表示装置。
前記表示要素を表示する前記周辺視野域は、
前記画像表示手段の左端領域又は右端領域のいずれか一方又は双方であること
を特徴とする請求項１に記載の画像表示装置。
前記表示要素を表示する前記周辺視野域は、
前記画像表示手段の上端領域又は下端領域のいずれか一方又は双方であること
を特徴とする請求項１に記載の画像表示装置。
前記画像表示手段の周辺視野域に位置する表示要素は、
当該表示要素に表示される前記残りの情報の一部に基づく１つ以上の前記画像より当該残りの情報に基づく画像の全体像をアノーソスコピック知覚に基づく錯視現象により視認し得る形状であること
を特徴とする請求項１に記載の画像表示装置。
前記画像表示手段の周辺視野域に位置する表示要素は、スリット状であることを特徴とする請求項４に記載の画像表示装置。
前記入力手段により入力される前記複数の情報は、
１つ以上の画像情報又は１つ以上の音声情報のいずれか一方又は双方であること
を特徴とする請求項１に記載の画像表示装置。
前記入力手段は、
前記画像情報を入力する１つ以上の画像入力装置を有し、
前記画像表示制御手段は、
前記画像入力装置により入力される前記画像情報の一部に基づく１つ以上の画像を、前記画像表示手段の周辺視野域に位置する表示要素に表示するように制御すること
を特徴とする請求項６に記載の画像表示装置。
前記入力手段は、
前記音声情報を入力する１つ以上の音声入力装置を有し、
前記画像表示制御手段は、
前記音声入力装置により入力される前記音声情報を画像情報に変換し、
当該音声情報から変換された当該画像情報に基づく画像の一部又は全部を前記画像表示手段の周辺視野域に位置する表示要素に表示するように制御すること
を特徴とする請求項６に記載の画像表示装置。
前記画像表示制御手段は、
前記音声入力装置により入力される前記音声情報の周波数特性に応じて選択される複数の画像情報が格納されたメモリ手段を備え、
前記音声情報を前記メモリ手段に格納された前記複数の画像情報から選択される一画像情報に変換し、
変換された当該一画像情報に基づく画像の一部又は全部を前記画像表示手段の周辺視野域に位置する表示要素に表示するように制御すること
を特徴とする請求項８に記載の画像表示装置。
前記一画像情報に基づく画像の一部は、
前記周辺視野域に位置する表示要素の形状に合致させて当該一画像情報に基づく画像を当該画像の一端から他端に向けて順次切り取ることにより生成された部分画像であること
を特徴とする請求項９に記載の画像表示装置。
前記入力手段により入力される前記複数の情報を１つ以上の他の画像表示装置に送信すると共に、当該他の画像表示装置から送信される情報を受信する通信部を備え、
前記画像表示制御手段は、
前記通信部により受信された単数又は複数の情報の一部に基づく１つ以上の画像を当該画像表示手段の周辺視野域に位置する表示要素に表示するように制御すること
を特徴とする請求項１に記載の画像表示装置。
前記画像表示手段は、
単一の画像表示媒体が使用されること
を特徴とする請求項１に記載の画像表示装置。
前記単一の画像表示媒体は、
陰極線管表示装置又は平面表示装置であること
を特徴とする請求項１２に記載の画像表示装置。
前記平面表示装置は、
液晶表示装置、プラズマディスプレイパネル表示装置、電界放出型表示装置、有機エレクトロルミネッセンス表示装置、電子ペーパー表示装置の何れかであること
を特徴とする請求項１３に記載の画像表示装置。
前記画像表示手段は、
複数の画像表示媒体が使用され、
当該複数の画像表示媒体のうちの一画像表示媒体は中心視野域に位置する表示要素を表示し、他の画像表示媒体は周辺視野域に位置する表示要素を表示すること
を特徴とする請求項１に記載の画像表示装置。
前記他の画像表示媒体は、
前記一画像表示媒体の後方に位置すること
を特徴とする請求項１５に記載の画像表示装置。
前記他の画像表示媒体は、
投射型表示装置、有機エレクトロルミネッセンス表示装置、電子ペーパー表示装置の何れかであること
を特徴とする請求項１５に記載の画像表示装置。
１つ以上の画像情報又は１つ以上の音声情報のいずれか一方又は双方を入力するステップと、
入力された前記音声情報を画像情報に変換するステップと、
入力された前記画像情報及び前記音声情報から変換された画像情報のうち少なくとも１つの画像情報に基づく画像を中心視野域に表示すると共に、残りの画像情報の一部に基づく１つ以上の画像を周辺視野域に表示するステップと
を含むことを特徴とする画像表示方法。