WO2007129481A1 - 情報表示装置 - Google Patents

Abstract

　少なくとも１つの表示対象情報を、それぞれの画面要素内に表示し、当該画面要素を一覧表示する際に、一覧表示されている画面要素内の表示対象情報を利用した指示操作を受け入れて、当該指示操作に基づく処理を実行する情報表示装置である。

Description

明 細 書

情報表示装置

技術分野

[0001] 本発明は、例えばウェブサーバから取得されるコンテントなどの表示対象情報を、ゥ インドウなどの画面要素内に表示する情報表示装置に関する。

背景技術

[0002] 近年では、パーソナルコンピュータ (PC)をはじめとする情報表示装置にお!、ては、 多種の情報を一つのディスプレイ画面に表示するため、各種類の情報を、ウィンドウ と呼ばれる独立した画面要素内に表示することが行われている。

[0003] 例えば、ネットワークを介してウェブサーバなどから取得されるウェブページのデー タに基づいて、表示の対象となる情報 (表示対象情報)を生成し、当該表示対象情報 を表示するウェブブラウザなどにおいても、ウェブページごとに異なるウィンドウに、各 ウェブページに基づ 、て生成した表示対象情報を表示するものが多 、。

[0004] こうした複数のウィンドウを用いて情報を表示する情報表示装置では、いずれかの ウィンドウ内に表示している表示対象情報に関係して、ユーザに対して動作確認を求 めたり、ノ スワードの入力を求めるなどの通知情報を表示するべき場合がある。

[0005] 具体的な例として、ウェブページであれば、ウェブページを記述して 、る HTML (H yperText Markup Language)データ内に、処理されるべきプログラム（スクリプト）が記 述され、ノ スワードの入力が行われるまで、表示対象情報を表示させないよう制御す るものなどがある。

発明の開示

発明が解決しょうとする課題

[0006] し力しながら、上記従来の情報表示装置では、通知情報もまた、独立したウィンドウ 内に表示されることとなっており、例えば複数のウェブページの情報を、複数のウィン ドウにそれぞれ表示させているときに、通知情報の表示を要することとなった場合に、 当該表示を要する通知情報がどのウィンドウに表示されているウェブページとの関係 で現れたものかをユーザが認識しがたい場合がある。 [0007] 本発明は、上記問題に鑑みて為されたものであり、画面要素に表示される表示対 象情報とユーザに通知する通知情報との関係を明示できる情報表示装置を提供す ることをその目的の一つとする。

課題を解決するための手段

[0008] 上記従来例の問題点を解決するための本発明は、情報表示装置であって、少なく とも 1つの表示対象情報を、それぞれの画面要素内に表示する情報表示部と、前記 画面要素を一覧表示する一覧表示部と、前記一覧表示中に、一覧表示されている 画面要素内の表示対象情報を利用した指示操作を受け入れて、当該指示操作に基 づく処理を実行する実行部と、を含む。

図面の簡単な説明

[0009] [図 1]図 1は、本発明の実施の形態に係る情報表示装置の構成例を表すブロック図 である。

[図 2]図 2は、本発明の実施の形態に係る情報表示装置において実現する仮想空間 の例を表す説明図である。

[図 3]図 3は、本発明の実施の形態に係る情報表示装置によって表示される画面例を 表す説明図である。

[図 4]図 4は、本発明の実施の形態に係る情報表示装置の例を表す機能ブロック図 である。

[図 5]図 5は、本発明の実施の形態に係る情報表示装置による注目ウィンドウの表示 処理例を表すフローチャート図である。

[図 6]図 6は、本発明の実施の形態に係る情報表示装置において、注目ウィンドウを 変化させる場合の仮想空間の設定例、及び対応する表示画面例を表す説明図であ る。

[図 7]図 7は、本発明の実施の形態に係る情報表示装置での仮想空間の設定例を表 すオブジェクトデータベースの内容例の説明図である。

[図 8]図 8は、本発明の実施の形態に係る情報表示装置において、メニュー画面や通 知情報を表示するための領域を形成する方法の例を表す説明図である。

[図 9]図 9は、本発明の実施の形態に係る情報表示装置において、メニュー画面や通 知情報を表示するための領域を形成したときの画面例を表す説明図である。

[図 10]図 10は、本発明の実施の形態に係る情報表示装置におけるメニュー画面の 表示例を表す説明図である。

[図 11]図 11は、本発明の実施の形態に係る情報表示装置での仮想空間の設定例を 表す説明図である。

[図 12]図 12は、本発明の実施の形態に係る情報表示装置での通知情報の表示例を 表す説明図である。

[図 13]図 13は、本発明の実施の形態に係る情報表示装置での通知情報の別の表 示例を表す説明図である。

[図 14]図 14は、本発明の実施の形態に係る情報表示装置での通知情報のさらに別 の表示例を表す説明図である。

[図 15]図 15は、本発明の実施の形態に係る情報表示装置での通知情報のまた別の 表示例を表す説明図である。

[図 16]図 16は、本発明の実施の形態に係る情報表示装置での一覧表示を行う際の 仮想空間の設定例を表す説明図である。

[図 17]図 17は、本発明の実施の形態に係る情報表示装置での一覧表示を行う際の 表示例を表す説明図である。

[図 18]図 18は、本発明の実施の形態に係る情報表示装置での一覧表示を行う際の 仮想空間の別の設定例を表す説明図である。

[図 19]図 19は、本発明の実施の形態に係る情報表示装置での一覧表示を行う際の 種々の表示例を表す説明図である。

[図 20]図 20は、本発明の実施の形態に係る情報表示装置での一覧表示中での注目 ウィンドウの表示例を表す説明図である。

[図 21]図 21は、本発明の実施の形態に係る情報表示装置での一覧表示中での注目 ウィンドウ以外のウィンドウの表示例を表す説明図である。

[図 22]図 22は、本発明の実施の形態に係る情報表示装置での画面表示例を表す説 明図である。

[図 23]図 23は、本発明の実施の形態に係る情報表示装置でのウィンドウの拡大表示 例を表す説明図である。

[図 24]図 24は、本発明の実施の形態に係る情報表示装置でのウィンドウの拡大表示 時の画面例を表す説明図である。

[図 25]図 25は、本発明の実施の形態に係る情報表示装置に接続されるコントローラ の例を表す概要図である。

[図 26]図 26は、本発明の実施の形態に係る情報表示装置に接続されるコントローラ の傾倒操作例を表す説明図である。

[図 27]図 27は、本発明の実施の形態に係る情報表示装置に接続されるコントローラ のまた別の傾倒操作例を表す説明図である。

[図 28]図 28は、本発明の実施の形態に係る情報表示装置に接続されるコントローラ の傾倒操作に基づく処理の例を表すフローチャート図である。

発明を実施するための最良の形態

[0010] [情報表示装置の構成]

図 1は、本発明の実施の形態に係る情報表示装置 1の構成例を表すブロック図で ある。本実施の形態の情報表示装置 1は、 CPU (Central Processing Unit) 11と、 RO M (Read Only Memory) 12と、 RAM (Random Access Memory) 13と、ネットワーク iZ F14と、コントローラ IZF15と、 GPU (Graphics Processing Unit) 21と、 VRAM (Vide o Random Access Memory) 22と、ドライブ 3と、を備える。これら CPU11と、 ROM12 と、 RAM13と、ネットワーク I/F14と、コントローラ I/F15と、 GPU21と、ドライブ 3と はここではバス 16を介して互いに接続されている。また、 VRAM22は GPU21に接 続され、コントローラ IZF15には、コントローラ 4が接続される。

[0011] CPU11は、 ROM12やドライブ 3にセットされている記録媒体から RAM13へと読 み出されたプログラムに従って動作する。この CPU11は、本実施の形態の情報表示 装置 1全体の制御を司っており、表示の対象となる複数種類の情報をそれぞれ画面 要素であるウィンドウに表示出力し、また、表示の対象となる情報に関連して表示す るべき通知情報の表示処理を行う。さらにこの CPU11は、表示されているウィンドウ の一覧表示処理を実行する。これらの CPU11の処理についての具体的な内容につ いては後に詳しく述べる。 [0012] ROM12は、 CPU11によって実行されるプログラムや、種々のデータを格納してい る。 RAM13は、 CPU11によって実行されるプログラムを保持する。また、この RAM 13は、 CPU 11のワークメモリとしても機能する。

[0013] ドライブ 3は、装着された DVD— ROMや、 CD— ROM等の記録媒体からデータを 読取って、読取ったデータを CPU11に対して出力する。このドライブ 3は、これらの 例に限られず、メモリスティック（商標）や、 SDカード (商標）等の記録メディアであつ ても良い。

[0014] コントローラ 4は、例えば家庭用ゲーム機用のコントローラであってもよいし、 PC等 におけるキーボードやマウスなどであってもよい。このコントローラ 4は、コントローラ I /F15を介してバス 16に接続されており、方向キー、その他の操作キー、傾倒量な いし移動操作量に応じた信号を出力するアナログデバイスなどを備えており、ユーザ が行った操作を表す信号を CPU11に対して出力する。

[0015] ネットワーク IZF14は、ネットワークを介して接続されるウェブサーバなどとの間で のデータの送受信を制御する。このネットワーク IZF14は、 CPU11から入力される 指示に従って、ネットワークを介して情報 (データの取得要求など）を送出し、また、ネ ットワークを介して受信される情報 (HTMLのデータなど）を CPU11に出力する。本 実施の形態では、このネットワーク IZF14を介して、 CPU11がインターネット等のネ ットワーク上に存在するウェブサーバから、 HTMLデータを取得する。

[0016] GPU21は、グラフィックスの表示に必要な計算処理を行う。 VRAM22は、ディスプ レイに表示される内容を保持するメモリであり、 GPU21が生成した画像データが書 込まれる。この VRAM22に書込まれた画像データに基づいて、テレビ受像器や、デ イスプレイ装置などに出力する映像信号が、図示しない表示制御部によって生成さ れ、テレビ受像器や、ディスプレイ装置などに、当該映像信号に基づく映像が表示さ れる。

[0017] 以下、情報表示装置 1によって行われる処理の内容について述べる。なお、以下の 説明では、情報表示装置 1が CPU11や GPU21等によってウェブブラウザとしての 動作を行う場合を例として説明するが、これに限られるものではなぐ複数の画面要 素（例えばウィンドウ）を用いた情報の表示処理であれば、表示される情報はどのよう なものであってもよい。

[0018] また、ここで情報表示装置 1が実現するウェブブラウザは、 V、わゆるタブブラウザで あって、各ウェブページをタブとなる独立のペイン（ここではウィンドウとして実現され る）内に表示する。また、各タブをユーザの操作に従って切り替えつつ表示する。

[0019] また本実施の形態の情報表示装置 1は、複数の画面要素（以下では、ウィンドウと 呼ぶ)を用いた情報の表示処理を行う。このとき情報表示装置 1は、各ウィンドウを二 次元的な描画空間に描画する処理を行ってもよい。しかしここでの情報表示装置 1は 、三次元的な仮想空間に、ウィンドウとなる板状の物体を配置し、各板状の物体表面 の少なくとも一方側に、それぞれのウィンドウ内に表示するべき画像を投影するものと する。例えば情報表示装置 1は、表示するべき内容を描画した二次元画像をテクス チヤとして貼り付ける。

[0020] すなわち本実施の形態の情報表示装置 1が生成するデータは、図 2に示すように、 仮想空間 5内に、表示対象情報をその表面に描画した複数のウィンドウ 61, 62, 63 , 64,及び 65 (板状体)を配置したことを表すデータである。また、情報表示装置 1は 、この仮想空間 5に仮想的なカメラ (仮想カメラ) 71を配置する。そして情報表示装置 1は、この仮想カメラ 71に関連して、その仮想的な撮像領域である注目領域 7を設定 する。図 2では、仮想カメラ 71が撮像の対象としている注目領域 7の中央部にはウイ ンドウ 65があり、左端部にはウィンドウ 64の一部がある例を示している。

[0021] そして情報表示装置 1がこれら仮想空間 5に関する情報に基づいて、仮想カメラ 71 の注目領域 7に含まれる部分をレンダリングする。このレンダリングの結果の画像は、 VRAM22に書込まれる。そして、この画像が外部のディスプレイなどに表示されるこ ととなる（図 3)。

[0022] 仮想カメラ 71の配置位置は仮想空間 5内において、任意に設定できる。仮想カメラ 71の移動に伴って注目領域 7が変化すると、レンダリングの結果が変化する。これに よりディスプレイに表示される画像が変化する。

[0023] ここで説明するウェブブラウザとしての情報表示装置は、機能的には図 4に示すよう に、記述情報取得部 31と、記述情報解析部 32と、表示対象情報生成部 33と、プロ グラム処理部 34と、表示制御部 35と、通知情報表示部 36と、仮想空間設定部 37と、 一覧表示設定部 38と、二次元レンダリング処理部 41と、三次元レンダリング処理部 4 2と、合成処理部 43を含んで構成されている。

[0024] これらは、本実施の形態では CPU11や GPU21等の処理により例えばソフトウェア 的に実現される。

[0025] 情報取得部 31は、表示制御部 35や、表示対象情報生成部 33から、データの取得 要求の入力を受け入れる。この取得要求には、 URL等の指定等が含まれる。情報取 得部 31は、この取得要求を受信すると、指定された URL等から、要求されたデータ を取得する。そして情報取得部 31は、要求元である表示制御部 35、または表示対 象情報生成部 33に対して、当該取得したデータを出力する。なお、ここで URLによ つて特定されるデータは、ネットワーク上にあるウェブサーバ等が提供するものに限ら ず、情報表示装置 1自身が有するドライブ 3に装着された記録メディアなどに格納さ れて 、るファイルであってもよ!/、。

[0026] 記述情報解析部 32は、 HTMLデータのバーサ (解析機能)を含む。この記述情報 解析部 32は、表示先となる画面要素を識別する情報 (画面要素の識別子、以下「ゥ インドウ識別子」と呼ぶ）と、 HTMLデータとの入力を、表示制御部 35から受け入れる 。そして記述情報解析部 32は、この受け入れた HTMLデータを、予め定められた規 則に従って解析する。一般に HTMLデータは、表示対象情報の表示を指示する表 示指示データ部分を含み、場合によってはさらに、実行されるべきプログラムデータ 部分を含む。

[0027] この記述情報処理部 32は、 HTMLデータのうちから、表示指示データの部分を抽 出する。そして記述情報処理部 32は、当該抽出した表示指示データとウィンドウ識別 子とを表示対象情報生成部 33に出力する。また記述情報解析部 32は、 HTMLデ ータ内にプログラムデータの部分を見いだすと、当該プログラムデータの部分を抽出 して、ウィンドウ識別子とともにプログラム処理部 34に出力する。

[0028] 表示対象情報生成部 33は、記述情報処理部 32から入力される表示指示データに 基づき、表示の対象となる文字列情報や表示の対象となるべき画像データを特定す る情報 (画像データの URLなど）を抽出する。また、表示対象情報生成部 33は、この 画像データを特定する情報を、情報取得部 31に出力し、当該情報で特定される画 像データの取得を要求する。そして表示対象情報生成部 33は、当該要求に対して 情報取得部 31が取得した画像データの入力を受け入れる。そして表示対象情報生 成部 33は、表示指示データに基づいて文字列情報と画像データとをレイアウトしたゥ エブページ記述情報を生成し、ウィンドウ識別子とともに二次元レンダリング処理部 4 1に出力する。

[0029] プログラム処理部 34は、記述情報処理部 32から入力されるプログラムデータの実 行を行う。また、このプログラム処理部 34は、記述情報処理部 32から入力されるウイ ンドウ識別子に関連づけてプログラムデータの実行に必要となるデータ（プログラムの 実行中の場所を示すポインタや、変数データなどのワークデータ）を保持する。従つ てこのプログラム処理部 34は、複数のウィンドウが開かれているとき (複数のウェブべ ージが表示中であるとき）には、複数のプログラムデータを並列的に実行することがあ る。この並列的な実行の方法は、マルチスレッド処理などとして広く知られた処理を用 V、ることができるので、ここでの詳細な説明を省略する。

[0030] さらにプログラム処理部 34は、いずれかのウィンドウ識別子（以下、区別のため「注 目識別子」という）に関連づけられているプログラムデータの実行中に、ユーザに対し て通知するべき情報（つまり表示対象情報のいずれかとの関係においてユーザに通 知することとなった通知情報）が見いだされると、当該通知するべき情報（以下「通知 情報」という）と、注目識別子とを、通知情報表示部 36に出力する。

[0031] 表示制御部 35は、起動時には、画面要素であるウィンドウを一つ生成するよう仮想 空間設定部 37に指示する。そして表示制御部 35は、生成されたウィンドウを識別す る情報 (ウィンドウ識別子)の入力を、仮想空間設定部 37から受けて、これを保持する

[0032] そして起動時にウィンドウを生成すると、表示制御部 35は、事前に設定されている URLで特定されるデータを取得するよう、情報取得部 31に対して指示する。この UR Lにより特定されるデータは、ここでは HTMLデータであるものとする。表示制御部 3 5は、仮想空間設定部 37から入力を受けたウィンドウ識別子と、情報取得部 31によつ て取得された HTMLデータを記述情報処理部 32に出力する。

[0033] この表示制御部 35は、仮想空間設定部 37によって設定された仮想空間に基づく 三次元画像のレンダリングを、三次元レンダリング処理部 42に行わせる。

[0034] また、この表示制御部 35は、ユーザによって行われた指示に基づ 、て、各部を制 御する。本実施の形態の説明では、ユーザは、

(1)新規にウィンドウ（ウェブブラウザにおいては別のウェブページを表示するべきタ ブとも呼ばれるものでもよ 、）を生成するべき旨の指示 (以下、新規ウィンドウ指示と呼 ぶ）、

(2)複数のウィンドウを一覧表示するべき旨の指示 (以下、一覧表示指示と呼ぶ)、

(3)複数のウィンドウのうち一つを、表示または操作の対象として指定する指示 (以下 、フォーカス指示と呼ぶ）、

(4)選択されて!、るウィンドウに表示されて!、る入力欄に文字列などを入力したり、選 択されているウィンドウに表示されているリンクをクリックしたりする指示（以下、コンテ ント操作指示と呼ぶ)、

(5)ウィンドウを閉じる旨示、

(6)ブラウザとしての処理を終了するべき旨の指示 (以下、終了指示と呼ぶ） などを行う。

[0035] これらの指示は、例えばコントローラ 4を用いて行われる。次に操作の一例として、タ ブ切り替え操作 (仮想カメラ 71に正対するウィンドウの切り替え操作）につ 、て説明す る。このタブ切り替え操作は、コントローラ 4に取り付けられた方向キーの押下操作に よって行う。ここで方向キーは、上下左右の四方向にそれぞれ配置され、右側の方向 キーが押下されたときには、仮想カメラ 71の位置を、その視線方向に対して右手方 向にあるウィンドウに正対する位置へ移動する。同様に、左側の方向キーが押下され たときには、仮想カメラ 71の位置を、その視線方向に対して左手方向にあるウィンド ゥに正対する位置へ移動する。上下方向のキーが押下された場合も同様である。

[0036] また、別の操作の例として、ウィンドウ（タブ）内に表示されて!、るオブジェクト（ボタン や、文字列入力欄など）のクリック操作について説明する。このオブジェクトのクリック 操作は、クリック位置までポインタを移動し、クリックを行うという操作であり、例えば次 のように行われる。すなわち、クリック位置を指定するためのポインタ（マウスカーソル） の移動は、コントローラ 4に設けられているアナログスティックなどを傾倒させる等の操 作によって行われ、方向キーとは別途設けられたキーを押下する操作を、クリック操 作とすることができる。

[0037] また、上述のユーザの操作のうち（1)新規ウィンドウ指示が行われると、表示制御部 35が、画面要素であるウィンドウを一つ生成するよう仮想空間設定部 37に指示する 。表示制御部 35は、仮想空間設定部 37から、生成されたウィンドウを識別する情報（ ウィンドウ識別子)の入力を受けて、これを保持する。

[0038] また表示制御部 35は、事前に設定されている URLで特定されるデータを取得する よう、情報取得部 31に対して指示する。この URLにより特定されるデータは、ここで は HTMLデータであるものとする。表示制御部 35は、仮想空間設定部 37から入力 を受けたウィンドウ識別子と、情報取得部 31によって取得された HTMLデータを記 述情報処理部 32に出力する。

[0039] また（2)—覧表示指示が行われた場合、表示制御部 35は、一覧表示設定部 38に 対して、ウィンドウの一覧表示を行うべき旨の指示を出力する。

[0040] さらに（3)フォーカス指示が行われると、表示制御部 35は、図 5に示す処理を開始 する。以下の説明では指示によって選択されたウィンドウを注目ウィンドウとする。表 示制御部 35は、一覧表示中であるか否かを調べる（101)。ここで一覧表示中でなけ れば、表示制御部 35は、仮想カメラ 71の位置を、注目ウィンドウに正対する位置に 移動して（102)、処理を終了する。この処理 102によると、例えば、ウィンドウ 62が表 示中であったとき（仮想カメラ 71が図 6の A位置にあるとき）に、ウィンドウ 63が注目ゥ インドウとなるべき旨の指示 (ユーザが右端に表示されて 、るウィンドウ 63をクリックす る力、コントローラ 4の右側の方向キーを押下するなど、右隣のウィンドウに移動する 旨の指示）がされると、仮想カメラ 71の位置をウィンドウ 63に正対する位置（図 6の B 位置)へ移動し、注目ウィンドウとなったウィンドウ 63を仮想カメラ 71の注目領域 7の 中央に位置させる。

[0041] また、処理 101において一覧表示中であれば、表示制御部 35は、仮想空間設定 部 37に対して、注目ウィンドウと、注目ウィンドウでないウィンドウとを互いに識別可能 な態様で描画するよう指示して（103)、処理を終了する。ここで互いに識別可能な態 様とは、例えば、ウィンドウ内に表示する画像に、グレイの画像を半透明合成すること としてもよい。この処理 103の具体的な例についても、後に一覧表示の処理とともに 説明する。

[0042] さらに (4)コンテント操作指示を受けたときは、表示制御部 35は、操作の内容に従 つて、注目ウィンドウの表示内容を更新するなどの処理を行う。具体的な例として、ュ 一ザが選択した注目ウィンドウ内に表示された入力欄に、文字列を入力する操作を 行った場合、当該入力欄に入力された文字を表示することとなる。また、リンクやボタ ンなどがクリックされたときには、当該リンクやボタンに関連づけられた HTMLデータ が参照されて、処理が行われることとなる。この処理は一般的なブラウザとしての処理 と同様のものであるので、ここでの詳細な説明を省略する。

[0043] なお、リンク等がクリックされた場合、表示制御部 35は、当該リンク等に関連づけら れた URLからデータを取得する指示を、注目ウィンドウのウィンドウ識別子ととも〖こ情 報取得部 31に対して出力する。

[0044] 表示制御部 35は、 (5)ウィンドウを閉じる指示操作を受けると、その時点で注目ウイ ンドウとなって ヽるウィンドウ識另 U子で特定されるウィンドウ（終了対象ウィンドウ）を表 示されないよう制御する。この制御は例えば、終了対象ウィンドウの板状体を仮想空 間 5から消去するよう仮想空間設定部 37に指示する処理によって行うことができる。

[0045] 表示制御部 35は、さらに（6)終了指示を受けると、終了を確認する通知情報を生 成して、通知情報表示部 36に出力する。

[0046] 通知情報表示部 36は、プログラム処理部 34から、実行中のプログラムデータに関 連する表示対象情報を表示して ヽるウィンドウのウィンドウ識別子 (上述の注目識別 子）と、通知情報との入力を受け入れる。そして通知情報表示部 36は、注目識別子 によって特定されるウィンドウ (例えば通知情報に関係する表示対象情報が表示され ている画面要素（ウィンドウ））を、注目ウィンドウとする。そして通知情報表示部 36は 、当該注目ウィンドウを、他のウィンドウとは識別可能な態様で表示し、それとともに通 知情報を併せて表示する。この表示の態様については、後に詳しく述べる。

[0047] また、通知情報表示部 36は、表示制御部 35等から、表示対象情報のいずれにも 関係しな 、（すなわち 、ずれのウィンドウとの関係のな!、）通知情報を表示するべき 旨の指示を受け入れる。この場合、通知情報表示部 36は、上述の表示対象情報に 関係する通知情報 (すなわちいずれかのウィンドウに関係する通知情報)とは異なる 表示態様にて、通知情報を表示する。この表示の態様についても、後に述べる。

[0048] 仮想空間設定部 37は、表示制御部 35等から入力される指示に従い、仮想空間内 にウィンドウとなる板状体を新規に追加し、あるいは板状体を仮想空間内から削除す る。具体的な例として、仮想空間設定部 37は、仮想空間 5を、図 7に示すようなォブ ジェタトデータベースによって管理する。

[0049] このオブジェクトデータベースは、仮想空間 5の内部に含まれるべき仮想的な物体（ オブジェクト)ごとに、固有の識別子と、物体の形状や属性と、当該物体の位置や姿 勢を表す座標情報とを関連て保持するものである。ここで仮想的な物体の形状等は 、例えば板状体であれば、直方体の形状であって、その幅、奥行き、高さを表す属性 によって定めることができる。また、仮想カメラであれば、仮想カメラである旨の情報と ともに、その視線方向、視野角度など (これらにより注目領域が画定される）の属性に よって定めることができる。また位置座標は、形状ごとに、例えば中心位置座標と、主 軸方向など姿勢を表す座標とを含むものとして定めることができる。

[0050] 仮想空間設定部 37が新規に板状体を追加する場合は、固有の識別子を新規に生 成し (この識別子は、ウィンドウ識別子として利用できる）、図 7に示したオブジェクトデ ータベースに、直方体の形状を追加する。また、仮想空間設定部 37は、当該追加し た形状を表す情報に関連づけて、予めウィンドウである板状体の形状として定められ た形状を設定するとともに、当該板状の直方体の仮想空間内の位置座標などを定め て、オブジェクトデータベースに記録する。

[0051] また、この仮想空間設定部 37は、表示制御部 35等から入力される指示に従い、仮 想カメラ 71と板状体との相対位置を変更する。この相対位置の変更は、変更後の目 的位置の座標を示すベクトル Dと、変更前の初期位置の座標を表すベクトル Sとの間 で、時刻 t (t=0から Tまで）に対して、

[数 1]

として時刻とともにアニメーションするように変化させることとしてもよい。 [0052] 例えば表示制御部 35が、ユーザの操作によってウィンドウのほ力にメニュー画面を 表示する必要がある場合、この仮想空間設定部 37の処理により、仮想空間 5内の板 状体や仮想カメラ 71の相対位置を変更し、ディスプレイの画面上にメニュー画面を 表示する領域を形成することができる。メニュー画面は、新規ウィンドウ、 URLを開く 、ウィンドウを閉じる、等の指示を行うための画面などである。すなわち、図 8に示すよ うに、更新前の状態で、ウィンドウ 61が仮想カメラ 71の注目領域 7中央部に表示され ている場合（図 8上段）を考える。ここでメニュー画面の表示指示が行われると、表示 制御部 35が仮想空間設定部 37にメニュー画面の表示領域を形成するべき指示を 出力する。そして仮想空間設定部 37は、ウィンドウ 61が仮想カメラ 71の注目領域 7 の周縁部に位置するよう、ウィンドウ 61と仮想カメラ 71との相対的位置を更新する（図 8下段)。これにより、図 9に示すように、更新後においては、ウィンドウ 61の表示領域 に重なり合うことなぐメニュー画面を表示可能な領域 (R)が形成される。

[0053] また、この領域 (R)内にメニュー画面が表示しきれない場合 (例えば階層的に構成 されたメニューであって、比較的大きい表示面積を要するものの場合）は、表示制御 部 35は、図 10に示すように、この更新後の位置において、周縁部に表示されたウイ ンドウ 61に、メニュー画面（M)の一部が覆 、被さるようにして表示するよう制御しても よい。仮想空間設定部 37によるさらに別の仮想空間 5の設定例については、さらに 後に述べる。

[0054] さらに仮想空間設定部 37は、表示制御部 35からウィンドウ識別子と、当該ウィンド ゥ識別子で特定されるウィンドウに係る板状体を消去するべき旨の指示とを受け入れ る。このとき仮想空間設定部 37は、オブジェクトデータベースから、当該入力されたゥ インドウ識別子に関わるデータのエントリーを削除する。

[0055] 一覧表示設定部 38は、表示制御部 35からウィンドウの一覧表示をするべき旨の指 示を受け入れる。そして一覧表示設定部 38は、仮想空間設定部 37に対して、複数 のウィンドウを所定の態様に並べ替える指示を行い、仮想カメラ 71の位置を変更する 。つまり一覧表示設定部 38は、すべてのウィンドウが一覧できる位置へ仮想カメラ 71 を移動するよう指示する。この一覧表示の指示に対する一覧表示設定部 38や仮想 空間設定部 37の動作等については、後に詳しく述べる。 [0056] 二次元レンダリング処理部 41は、表示対象情報生成部 33から入力されるウェブべ ージ記述情報に基づ 、て、ウェブページの内容を表すビットマップ画像を生成する。 そしてウェブページ記述情報とともに入力されたウィンドウ識別子に関連づけて、生 成したビットマップ画像を RAM 13に格納する。

[0057] 三次元レンダリング処理部 42は、仮想空間設定部 37による仮想空間 5の設定に基 づいて、三次元画像をレンダリングしたビットマップデータを生成する。すなわち、こ の三次元レンダリング処理部 42は、仮想空間設定部 37によって生成されているォブ ジェタトデータベースを参照し、次の処理を行う。すなわち三次元レンダリング処理部 42は、仮想カメラ 71からの視野 (注目領域 7)に、板状体等を投影した画像を描画す る。このようなレンダリングの処理は、スキャンライン法、レイトレース法、ラジオシティ 法など種々の技術があり、これらの技術を利用できるので、ここでの詳細な説明を省 略する。

[0058] 本実施の形態においては、この三次元レンダリング処理部 42は、各板状体の、仮 想カメラ 71に対向する面のテクスチャとして、各板状体の識別子 (ここではウィンドウ 識別子に同じ）に関連づけて RAM13に格納されているウェブページのビットマップ 画像を設定する。これにより、各板状体が、ウェブページを表示する画像要素（ウィン ドウ）として機能することとなる。

[0059] 合成処理部 43は、三次元レンダリング処理部 42がレンダリングした画像に、重ね合 わせて表示するべき文字列や画像の入力を受けて、当該入力された文字列や画像 を、三次元レンダリング処理部 42がレンダリングした画像に重ね合わせて (例えば半 透明)合成する。

[0060] なお半透明合成とは、例えば合成に係る複数の画像にっ ヽて、それぞれ対応する 画素の値を加算して、合成後の画像を生成する処理である。

[0061] [通知情報の表示態様]

次に、本実施の形態による通知情報の表示態様について述べる。既に説明したよ うに、本実施の形態の情報表示装置としてのウェブブラウザでは、 HTMLデータに 含まれて 、るプログラムデータの実行中、他のウェブページへのジャンプの可否確認 や、ノ スワード入力などをユーザに求める表示 (通知情報の表示）を行うことがある。 [0062] こうした HTMLデータに基づく通知情報は、当該 HTMLデータに基づく表示対象 情報との関係においてユーザに通知することとなったものである。

[0063] 本実施の形態では、このように、いずれかの表示対象情報との関係においてユー ザに通知することとなった通知情報について、次のような態様で表示する。ここでは 実行中のプログラムデータに関連する表示対象情報を表示しているウィンドウのウイ ンドウ識別子 (注目識別子）により、どの表示対象情報に関係する通知情報であるか を判断する。

[0064] すなわち通知情報表示部 36は、注目識別子と、通知情報との入力を受けこの注目 識別子に係るウィンドウを注目ウィンドウとする。そして当該注目ウィンドウを、仮想カメ ラ 71の注目領域 7の周縁部に位置させるよう、仮想空間設定部 37に指示する。そし て仮想空間設定部 37が、注目ウィンドウが仮想カメラ 71の注目領域 7の周縁部に位 置するよう、オブジェクトデータベースにおける注目ウィンドウまたは仮想カメラ 71との 座標位置を変更して、注目ウィンドウと仮想カメラ 71との相対位置を更新する。これ は図 8、図 9に示したメニュー画面の例と同様のものである。

[0065] これにより、図 9に示した例と同様に注目ウィンドウがディスプレイ等の画面のいず れかの端に寄り、通知情報を表示するための領域 (R)が形成されることとなる。そして 通知情報表示部 36は、この領域 (R)に、通知情報を表示する。

[0066] なお図 11に示すように、ウィンドウ 62, 63,…が、仮想カメラ 71に対向して配列され ている場合を考えると、ウィンドウ 62を注目ウィンドウとして注目領域 7の周縁部に表 示されることとなるよう、仮想カメラ 71を移動してしまうと、隣接するウィンドウ 63がその 注目領域 7内に入りこむことも想定される。このような場合には、三次元レンダリング処 理部 42に対して、注目ウィンドウ以外のウィンドウについては、その仮想カメラ 71に 対向する面のテクスチャとして、表示対象情報のテクスチャに対して、グレイのトーン（ グレイで塗りつぶした画像)を半透明合成して、表示対象情報が比較的暗く ( ヽゎゅ るディム）表示されるようにしてもよい（図 12)。この場合、注目ウィンドウの表示対象情 報が比較的明るく表示されることとなり、どのウィンドウに関係する通知情報が表示さ れているのかがユーザに明瞭に認識できるようになる。

[0067] また、通知情報表示部 36は、この隣接するウィンドウ 63が表示されている領域 (R) に重ね合わせて通知情報を表示するよう、合成処理部 43に指示する。

[0068] また、別の例として、三次元レンダリング部 42に対して、注目ウィンドウ以外のウィン ドウのレンダリングを行わないよう指示してもよい。このよう〖こすると、注目ウィンドウ以 外の、他の画面要素が隠蔽される（図 13)。このことで、注目ウィンドウおよび通知情 報のみが表示される態様となるので、注目ウィンドウが容易に識別可能になる。なお 、識別可能な態様としては、これらに限らず、例えば、注目ウィンドウの枠の色を変更 したり、注目ウィンドウを点滅させるなど、種々の方法を採用できる。

[0069] このように本実施の形態では、通知情報の表示の際には、その通知情報に関係す る注目ウィンドウが他のウィンドウと識別可能な態様で表示される。これにより、複数の ウィンドウが表示されていたとしても、どのウィンドウとの関係で通知情報が表示された のかを明瞭に視認できるようになる。

[0070] また、当該注目ウィンドウに対し、通知情報が重ならずに隣接して表示されることで 、注目ウィンドウに表示されている表示対象情報と通知情報の両方を確認できる。

[0071] なお、本実施の形態では、通知情報は、三次元レンダリング部 42によってレンダリ ングされた画像に重ね合わせて表示されるようにするなど、ユーザの操作によって通 知情報の表示内容が移動されることのな 、ように制御されて 、る。

[0072] 通知情報表示部 36は、ユーザが通知情報に対して行った応答操作を受けて、当 該応答操作の内容をプログラム処理部 34に出力する。例えば、「クッキーを受け入れ ます力。」との文字列とともに、「はい」及び「いいえ」のボタンを通知情報として表示す る場合、いずれかのボタンがクリックされると、当該クリックされたボタンを識別する情 報をプログラム処理部 34に出力する。

[0073] プログラム処理部 34は、この通知情報に基づく情報を受けてプログラムデータの処 理を継続する。

[0074] [プログラムデータ実行制御]

さらに通知情報表示部 36が通知情報の表示を行っている間に、プログラム処理部 34は、他のウィンドウに関係するプログラムデータの実行を «続していてもよい。この とき、他のウィンドウに関係するプログラムデータにより、通知情報の表示が必要とな つた場合は、当該通知情報に関わる他のウィンドウのウィンドウ識別子と、通知情報と を関連づけて、 RAM13に確保した、通知情報の待ち行列（キュー）の記憶領域に格 納する。

[0075] そして、この時点で表示されている通知情報の表示が完了したときに、待ち行列の 先頭にある通知情報力 順に、表示の処理を行う。

[0076] なお、例えばジヤノく'スクリプト (JavaScript)などでは、ァラート（alert)、ドキュメント

(document.open)、など複数の方法で通知情報の表示要求を行うことができる。そこ でプログラム処理部 34は、待ち行列への格納の際に、複数の方法のうち、どの方法 で通知情報の表示要求が行われたかによつて優先順位を定めて、優先順位の順序 ( 同じ優先順位であれば発生の時間順でょ 、)でキューに登録してもよ 、。

[0077] さらに通知情報表示部 36は、通知情報の表示を行っている間は、プログラムデー タの処理を中断するよう、プログラム処理部 34に対して指示してもよい。プログラム処 理部 34は、この指示を受けて、表示中の各ウィンドウに関係するプログラムデータの 実行を中断する。

[0078] この場合、通知情報表示部 36は、通知情報に対してユーザが操作を行うなど、通 知情報の表示が完了したときには、プログラム処理部 34に対して、プログラムデータ の処理の継続を指示する。

[0079] これにより、通知情報を表示する傍らで、例えば他のウィンドウに関わるプログラム データの処理が続 、て 、ることで、他のウィンドウの通知情報の表示の必要が生じる など処理が煩雑になることを防止できる。

[0080] また通知情報表示部 36は、通知情報とともに、「このウィンドウのプログラムデータ 実行を中止する」旨の選択ボタン Xを表示してもよい（図 14)。ユーザがこの選択ボタ ン Xを選択して、通知情報に対して応答操作を行ったときには、通知情報表示部 36 は、プログラム処理部 34に対して、注目ウィンドウのウィンドウ識別子とともに、プログ ラムデータの実行中止を指示する。

[0081] プログラム処理部 34は、入力された指示に従って、入力されたウィンドウ識別子に 関わるプログラムの実行用のデータを削除するなど、当該指示されたプログラムデー タの以降の実行を停止する。このようにすると、ループ処理などによって通知情報が 繰り返し表示されてしまう不具合に対処できるようになる。 [0082] [表示対象情報と関わりのない通知情報]

また通知情報表示部 36は、表示制御部 35等から、表示対象情報のいずれにも関 係しな 、通知情報の表示指示を受けることがある。例えばプログラム処理部 34等は、 プログラムデータの処理に必要となるメモリが確保できなくなった場合や、プログラム データの処理中に例外 (エラーなど）が生じたりする場合に、それぞれの旨を通知す る通知情報を表示するよう通知情報表示部 36に指示する。

[0083] これらは、いずれかのウィンドウに関係する場合もある力 ブラウザとしての動作全 体にも関係があるので、表示対象情報と関わりのない通知情報として扱われる。

[0084] 同様に、ネットワークへの接続ができな 、場合や、取得したデータを解析できず、ゥ インドウが作成できない場合、さらにブラウザとしての動作を終了する力否かの確認な どもブラウザとしての動作全体に関係するので、表示対象情報と関わりのない通知情 報として扱われる。

[0085] こうした表示対象情報と関わりのない通知情報を表示する際は、通知情報表示部 3 6は、例えば、各ウィンドウの仮想カメラ 71に対向する面に設定される、表示対象情 報のテクスチャに対して、グレイのトーンを半透明合成する。これ〖こよって各ウィンドウ の表示対象情報が比較的暗く（いわゆるディム)表示されるようにする。そして、通知 情報表示部 36は、このように各ウィンドウが比較的暗い状態で表されるレンダリング 結果 (三次元レンダリング部 42のレンダリング結果)の画像に、通知情報の文字列な どを合成するよう、合成処理部 43に指示する。

[0086] これにより、図 15に示すように、通知情報が浮き上がって視認されるようになり、ウイ ンドウとの関連性なく現れた通知情報であることが容易に知覚できるようになる。なお 、これに代えて、通知情報表示部 36は、三次元レンダリング部 42に対して、すべて のウィンドウのレンダリングを行わな 、よう指示し、通知情報を表示するようにしてもよ い。

[0087] このように、 V、ずれかの表示対象情報と関わりある通知情報の表示態様と、 V、ずれ の表示対象情報とも関わりのない (ブラウザ全体としての)通知情報の表示態様とを、 互いに異なる表示態様としたことで、表示される通知情報が表示対象情報に関係す るものなのか、関係しないものなのかということをユーザが把握し易くなる。 [0088] [一覧表示の表示態様]

次に、本実施の形態におけるウィンドウの一覧表示処理について説明する。本実施 の形態の一覧表示設定部 38は、表示制御部 35からウィンドウの一覧表示をするべき 旨の指示を受け入れる。そして一覧表示設定部 38は、仮想空間設定部 37に対して 、仮想カメラ 71の位置を変更して、すべてのウィンドウが一覧できる位置へ移動する よう指示する。

[0089] この仮想カメラ 71の位置変更の例を次に説明する。図 16に示すように、一覧表示 の指示を受ける時点で、各ウィンドウは平面上に一列に配列されている状態にあると する。また、この時点で、仮想カメラ 71の視野の角度が Θ、仮想カメラ 71の位置が図 16の A位置（ウィンドウの配列された平面カゝら距離 rOの位置）であるとする。この状態 では、図 17において A位置の画像として示すように、一つのウィンドウ 63を中心に、 その左右にウィンドウ 62, 64のそれぞれ一部が視認されている状態にある。

[0090] ここで一覧表示の指示が行われると、一覧表示設定部 38は、仮想空間設定部 37 に対して仮想カメラ 71の位置変更を指示する。仮想空間設定部 37は、すべてのウイ ンドウ 61から 65の表示範囲よりも広い範囲 wが、仮想カメラ 71の視野 (注目領域 7) に収まるよう、仮想カメラ 71の位置を、上記ウィンドウが配列された平面よりも遠隔の 位置（平面から距離 rの位置、図 16の B位置）に移動するよう指示する。この rは、 [数 2]

W

2 tan—

2

となどとして演算できる。

[0091] これにより、図 17に B位置における画像として示すように、表示されているすべての ウィンドウが表示された状態となる。

[0092] またこのときも、初期の状態から、一覧表示となる目標の状態まで、各オブジェクト（ 板状体や仮想カメラなど)の位置等を段階的に移動させることでアニメーションとして 表示する。これにより、どのウィンドウがどこへ移動したのかがユーザに理解できるよう になる。なお、初期の状態における板状体の位置は、 RAM13に、初期位置記録とし て別途記憶しておく。 [0093] さらに一覧表示設定部 38は、このように仮想カメラ 71を各ウィンドウに対応する板 状体から遠隔の位置へ移動させる指示を行う。また、この指示を行うとともに、一覧表 示設定部 38は、仮想空間設定部 37に対して、複数の板状体を所定のレイアウトでに 並べ替える指示を行ってもょ 、。

[0094] 例えば、図 18に示すように、ウィンドウとなる板状体を横一列に 3つ配列している場 合において、一覧表示の指示を受けた一覧表示設定部 38は、これら 3つの板状体を 三角形に配列して、仮想空間 5内の所定一点の近傍 (所定一点から予め定めた範囲 内）に寄せ集め、仮想カメラ 71の位置を、これらウィンドウとなる板状体が配列されて V、る平面力も遠隔した位置に移動させてもょ 、。

[0095] これにより、単に仮想カメラ 71を移動して一列に表示している場合に比べ、比較的 狭い領域内にウィンドウを寄せ集めて表示することとなり、各ウィンドウの表示サイズを 比較的大きくすることができる。

[0096] なお、ウィンドウ (板状体)の数に応じて、予め一覧表示時の各板状体の位置を定 めた座標情報を関連づけて RAM13等に保持してぉ 、てもよ 、。ここで各板状体の 位置は、そのデフォルトのサイズにおいて、互いに重ならない位置に配列されてもよ い（図 19)。なお、各ウィンドウの大きさによって、配置の方法を変更することとしてもよ い。

[0097] また、この一覧表示の状態において、いずれかのウィンドウを閉じる操作が行われ たり、新規のウィンドウを生成する指示が行われて、ウィンドウ (板状体)の数が変動し たときには、新たなウィンドウの数に対して定められた座標情報を目的位置 Dとして、 変更前の初期位置 Sとの間で、時刻 t (t=0から Tまで）に対して、

[数 1]

として時刻とともにアニメーションするように変化させて表示する。

さらに、一覧表示設定部 38は、一覧表示を解除する指示を受けると、 RAM13に 記憶した初期位置記録を参照して、各板状体を元の（一覧表示前の)位置へ移動す るように、仮想空間設定部 37に対して指示する。また、仮想カメラ 71の位置を、その 時点での注目ウィンドウに対応する板状体に正対する位置に移動させ、その注目ウイ ンドウたる板状体までの距離を一覧表示前の距離に戻すよう、仮想空間設定部 37に 指示する。

[0099] 仮想空間設定部 37は、この指示によって各オブジェクトの目標位置を定め、それぞ れのオブジェクトの位置を時刻 tに応じて変化させてアニメーションとして表示する。

[0100] [一覧表示中の操作]

本実施の形態においては、このように一覧表示を行う際に、単に仮想空間 5内の各 オブジェクトの配置を変更して一覧表示を実現している。つまり、各ウィンドウに対す る操作は、一覧表示前と一覧表示中とで異なるところがなぐこの一覧表示中におい てもウィンドウ内のリンクをクリックしたり、ウィンドウ内の文字列入力欄に文字列の入 力を行うことができる。

[0101] 近年では、複数のウィンドウを一覧できる画面があれば利便性を向上できることに 鑑み、複数のウィンドウを一覧させる技術が実装されて 、るオペレーティングシステム の例もある。し力しながら、こうした一覧表示では、一覧表示のままで各ウィンドウに対 して操作を行うことができず、一覧表示からは、ウィンドウを選択する操作を行うことが できるにとどまり、利便性が十分に向上できていない。

[0102] それに対し本実施の形態では、一覧表示中においても、表示制御部 35が、当該一 覧表示されているウィンドウ内の表示対象情報を利用した指示操作を受け入れて、 当該指示操作に基づく処理を行うことができる。

[0103] さらに、本実施の形態における一覧表示では、必ずしも仮想空間 5内のすべてのゥ インドウが一覧できなくてもよい。例えば、所定の操作により複数のタブ (ウィンドウ）が 一斉に生成されることがある。本実施の形態の情報表示装置 1は、このように互いに 関連するウィンドウのセットについて、固有のグループの識別子を発行して各ウィンド ゥに関連づけて保持させる。そして一覧表示設定部 38は、一覧表示の指示が行わ れたときに、グループ識別子が共通しているウィンドウを一覧表示することとしてもよ い。また、表示を切り替える操作を受けて、一覧表示設定部 38は、また別のグループ 識別子が共通に関連づけられて 、るウィンドウを一覧表示するようにしてもょ 、。

[0104] このようにしたことで、例えばウェブページの検索を行ったときに、当該検索結果の 少なくとも一部を複数のウィンドウ (タブ)で一斉に表示する処理が行われたような場 合に、当該一斉に表示されたウィンドウを一覧表示させることができる。

[0105] また例えば、当初表示されていたあるウィンドウ（ベースウィンドウと呼ぶ）内のリンク を開く指示が行われたときに、別のウィンドウ (ターゲットウィンドウと呼ぶ)を生成して 、当該生成した別のウィンドウにリンク先のウェブページを表示するような場合 (新規タ ブでリンク先を表示する場合)もある。この場合に、本実施の形態の情報表示装置 1 は、ターゲットウィンドウに対して、ベースウィンドウと共通のグループ識別子を設定し てもよい。そして一覧表示設定部 38は、一覧表示の指示が行われたときに、グルー プ識別子が共通しているウィンドウを一覧表示することとしてもよい。また、表示を切り 替える操作を受けて、一覧表示設定部 38は、また別のグループ識別子が共通に関 連づけられているウィンドウを一覧表示するようにしてもよい。このようにすると、参照 関係のあるウェブページなどを一覧表示させることができ、利便性が高 、。

[0106] また、仮想空間 5内のウィンドウの数（開かれているタブの数）に関連づけて、仮想 カメラ 71の位置（ウィンドウとなる板状体力もの距離)を定めておいてもよい。そして、 一覧表示設定部 38は、一覧表示の指示が行われたときに、仮想空間 5内のウィンド ゥの数を参照し、当該数に関連づけられた位置に仮想カメラ 71を移動する。この場 合、仮想空間 5内のウィンドウの数（開かれているタブの数）に応じた位置から仮想力 メラ 71の視野範囲において一覧可能な数のウィンドウが表示されていることとなる力 この一覧可能な数は必ずしも仮想空間 5内のすべてのウィンドウとは限られない。

[0107] このように本実施の形態によると、個別のウィンドウの表示と、すべてのウィンドウの 一覧表示と、一部のウィンドウの一覧表示とを行うことができ、さらに、これらの間の表 示をアニメーションとして、画面切り替えとは異なる態様で行うことができる。これにより 、表示前後におけるウィンドウ間の関係の視認性が高まる。

[0108] [一覧表示中のウィンドウの選択]

また、この場合、いずれカゝの画面要素内の表示対象情報を利用した指示操作は、 一覧表示されて!/ヽる画面要素の!/ヽずれかを選択する操作 (タブ切り替えの操作）とは 別に規定される。すなわち表示制御部 35は、少なくとも一覧表示中においては、ウイ ンドウをクリックする操作によって、注目ウィンドウを切り替えることはなぐ例えば別の キー操作などによって注目ウィンドウの選択指示 (タブの切り替え指示)を受け入れる 。このように、ウィンドウの選択操作と表示対象情報に対する操作とが互いに異なるよ うに定められていることで、一覧表示中においても、表示制御部 35が、当該一覧表 示されているウィンドウ内の表示対象情報を利用した指示操作を受け入れて、当該 指示操作に基づく処理を行うことができるようにして 、る。

[0109] なお、一覧表示中においては、注目ウィンドウ以外のウィンドウには、その表示対象 情報のテクスチャに対して、グレイのトーンを半透明合成して、表示対象情報が比較 的暗く（いわゆるディム）表示されるようにする（図 20)。これにより注目ウィンドウがど れであるかを容易に視認できるようにして!/、る。

[0110] さらに、こうしてディム表示した注目ウィンドウ以外のウィンドウには、タイトル（HTM Lデータにおいてタイトルとして指定されるものなど)や、ウェブサイトによって規定さ れたビットマップ画像（いわゆるファピコン（favicon)、ショートカットアイコン、ウェブサ イトアイコンなどとも呼ばれるアイコン画像)などを重ね合わせて表示してもよい（図 21

) o

[0111] [一覧表示から通知情報の表示への移行]

さらに、本実施の形態では、この一覧表示中においても、プログラム処理部 34がプ ログラムデータの処理を遂行できる。このため、プログラム処理部 34が通知情報を表 示するべきことがある。この場合は、一覧表示の状態から、図 12または図 13に示した ような表示状態になるよう、仮想空間 5の設定を更新すればよい。

[0112] [表示例]

本実施の形態では、表示の対象となる映像は、三次元レンダリング部 42によってレ ンダリングされ、また、合成処理部 43によって通知情報などの文字列等の重ね合わ せを受けて生成される。そして、この表示の対象となる映像に対しては、さらに図 22 に例示するように、タイトル (HTMLデータにぉ 、てタイトルとして指定されるものなど )や、ウェブサイトによって規定されたアイコン（ 、わゆるファピコン (favicon) )などを含 むタイトルバー (A)と、可能な操作を案内する情報などを表示する操作案内バー (C) とを重ね合わせる処理が CPU11によって行われる。この処理の後、映像が VRAM2 2に書き込まれることとしてもよい。この図 22においては、表示の対象となる映像を表 示する欄 (B)を挟んで、タイトルバーと操作案内バーとが上下に配置される場合を示 しているが、これに限られるものではない。

[0113] また、本実施の形態の情報表示装置 1は、ユーザから、ウィンドウを拡大表示する べき旨の指示を受けたときには、当該拡大表示の指示の対象となったウィンドウを特 定する。そして当該特定したウィンドウに対応して、仮想空間 5内に配置されている板 状体のサイズを変更する。

[0114] 例えば、図 23に示すように、板状体であるウィンドウ 61の幅 dOを、幅 d (d>dO)へと 変更する。これにより、ディスプレイには、図 24に示すように、変更前のサイズに対し て、幅広となったウィンドウ 61が表示されることとなる。

[0115] 本実施の形態によると、個別のウィンドウ（タブ)を表示している状態と、ウィンドウの 一覧を表示している状態と、及び通知情報を表示している状態とを相互に、アニメ一 シヨン的に移ろうように表示することができる。すなわち、各ウィンドウとなる板状体や、 仮想カメラ 71の位置を連続的に移動することで、各表示の状態を相互に変更できる 。このようにしたことで、各表示の状態において、どのウィンドウがどこへ表示されるこ ととなるかの視認性が向上される。

[0116] また、ここまでの説明では、複数のウィンドウを一覧表示するべき旨の指示 (一覧表 示指示)や、複数のウィンドウのうち一つを、表示または操作の対象として指定するフ オーカス指示、一覧表示を解除して、フォーカスされているウィンドウを画面中央部に 表示するための指示など、は、コントローラ 4に設けられたキーなどを操作することに よって行うこととしていた。

[0117] し力し、コントローラ 4が例えば、加速度センサやジャイロセンサなど、その姿勢を検 出する手段を備えている場合には、コントローラ 4自体を傾倒させる操作を、各指示 等の入力として受け入れてもよい。

[0118] すなわち、この場合のコントローラ 4は、例えば図 25に示すように、その表面に、方 向キーやアナログデバイス、操作ボタン、その他のキー（図中「A」ないし「D」と描く） を備え、また内部に、加速度センサ 51及びジャイロセンサ 52を備える。ここで加速度 センサ 51は、例えば梁に支持された錘を内蔵し、当該錘に力かる加速度 (重力加速 度）によって、錘が変位して、それにより梁に生じるたわみ量を検出することで錘に係 る重力加速度を検出する。本実施の形態の加速度センサ 51は、互いに略直交する 3 軸方向の加速度 (重力による加速度）をそれぞれ検出する、 3軸加速度センサであつ てもよい。図 25に示したように、加速度センサ 51は、コントローラ 4の筐体内部に固定 されており、互いに直交する X軸、 y軸、及び z軸の 3つの基準軸が設定されている。こ こで、例えば X軸はコントローラ 4の長手方向（左右方向）、 y軸はコントローラ 4の奥行 方向（前後方向）、 z軸はコントローラ 4の厚み方向（図において紙面に鉛直手前側の 方向）にそれぞれ対応させてもよい。そして、加速度センサ 51は、 3つの基準軸のそ れぞれに対する加速度を検知し、検知した加速度に応じた 3つの電圧値を出力する 。具体的に加速度センサ 51は、検出した加速度に略比例した電圧信号を出力する。 すなわち、加速度を検知しない状態では加速度センサ 51は、基準電圧 Voを出力す る。出力される電圧値の基準電圧 Voに対する高低により、各軸について、その正負 いずれの方向に加速度が生じているかを表す。コントローラ 4は、この電圧信号を A ZD変換したディジタル値を、傾倒角度を表す情報として出力する。

[0119] この加速度センサ 51の出力のうち、 X軸の加速度は、コントローラ 4の y軸を中心とし た傾きによって変化する。例えばコントローラ 4が図 26に示すように水平面に対して 長手方向に、 0 1度（6 1 < 0)傾ぃた姿勢となってぃる間、 X軸方向の重力加速度 a は a = a sin Θ ylとなる。また、図 27に示すようにコントローラ 4が水平面に対して θ γ2 度（ 0 y2 > 0)傾いている間、 X軸方向の重力加速度 aは a = a sin Θ y2となる。ここで aは、負の係数である。このため、角度を表す情報は、電圧値 Vによって表される加 速度値 aを用い、 Θ =arcsin (aZ a )となる。同様に、 y軸の加速度は、コントローラ 4 の X軸を中心とした傾きによって変化する。

[0120] ジャイロセンサ 52は、コントローラ 4の z軸を中心とした回転の角速度を検知し、当該 角速度の情報を出力する。 CPU1 1は、このジャイロセンサ 52の出力を、一定時間ご とでサンプリングし、積分演算を行うことで、コントローラ 4の z軸に対する回転の変位 量を取得する。

[0121] このようなコントローラ 4を用いると、

A.複数のウィンドウを一覧表示するべき旨の指示 (一覧表示指示)や、

B.複数のウィンドウのうち一つを、表示または操作の対象として指定するフォーカス 指示、

c.一覧表示を解除して、フォーカスされているウィンドウを画面中央部に表示するた めの指示、

などに対応する操作は、例えば次のように定められる。

[0122] まず Aの一覧表示指示については、 X軸を中心としてコントローラ 4を、奥側へ傾倒 させる操作を対応づけることができる。また、 Bのフォーカス指示については、一覧表 示中であると否とに関わらず、コントローラ 4を y軸を中心として左または右に傾倒させ る操作が行われたときに、順次、表示又は操作の対象となるウィンドウを切り替えるこ ととしてもよい。さらに、 Cの一覧表示がされているときにこれを解除する操作としては 、x軸を中心としてコントローラ 4を手前側へ傾倒させる操作を対応づけることができる

[0123] なお、軽微な傾倒操作により、一覧表示がなされたり、フォーカスが切り替えられた りしないよう、予め定められた角度しきい値を超えて傾倒操作がされたときに、これら の操作が行われたものと判断してもよ 、。

[0124] 例えば、 CPU11は、コントローラ 4が出力する、コントローラ 4の傾倒角度の値を表 す情報の入力を受けて、次のように動作する。ここでは、 X軸方向の (y軸を回転軸と する)傾倒角度 Θ yと、 y軸方向の (X軸を回転軸とする)傾倒角度 θ Xの情報とが少な くとも入力されているものとする。

[0125] CPU11は、図 28に示すように、 y軸方向の傾倒角度 θ xが予め定められた第 1の 角度しきい値 Θ xthl ( Θ xthl < 0)を下回っているか否かを調べる（処理 201)。ここで 、 θ Xが予め定められた第 1の角度しきい値 Θ xthlを下回っている場合は、所定の角 度しきい値を超える角度で、コントローラ 4が奥向きに傾倒されていると判断し、一覧 表示指示が行われたとして、一覧表示指示に基づく処理を行って (処理 202)、処理 を終了する。

[0126] また、 CPU11は、処理 201にて、 y軸方向の傾倒角度 θ xが予め定められた第 1の 角度しきい値 Θ xthl ( Θ xthl < 0)を下回っていない場合には、 y軸方向の傾倒角度 θ Xが予め定められた第 2の角度しきい値 Θ xth2 ( Θ xth2 >0)を超えているか否かを 調べる（処理 203)。ここで、 θ Xが予め定められた第 2の角度しきい値 Θ xth2を超え ている場合は、所定の角度しきい値を超える角度で、コントローラ 4が手前向きに傾 倒されていると判断し、一覧表示の解除指示が行われたと判断する。そして CPU11 は、一覧表示が行われている場合には、これを解除して、各ウィンドウの位置を、一 覧表示前の位置に移動させるとともに、仮想カメラ 71を、現在フォーカスされているゥ インドウ（注目ウィンドウ）に対向する位置へ移動し (処理 204)、処理を終了する。

[0127] CPU11は、さらに処理 203にて、 θ xが予め定められた第 2の角度しきい値 Θ xth2 を超えていない場合は、 X軸方向の傾倒角度 Θ yが予め定められた第 3の角度しきい 値 0 yth3 ( 0 yth3く 0)を下回っているか否かを調べる（処理 205)。ここで、 Θ yがこ の第 3の角度しきい値 Θ yth3を下回っている場合は、所定の角度しきい値を超える角 度で、コントローラ 4が左回りに傾倒されていると判断する。そして CPU11は、所定の 選択順序で、ウィンドウを注目ウィンドウとして選択する処理 (フォーカスされて!/、るタ ブを切り替える処理)を実行する（処理 206)。この処理は、一覧表示中であるか否か によって異なり、一覧表示中でなければ、例えば仮想空間 5内で、現在の注目ウィン ドウに対し、仮想カメラ 71の視野の左方に他のウィンドウがあれば、当該他のウィンド ゥを新たな注目ウィンドウとして、仮想カメラ 71の位置を、当該新たな注目ウィンドウ に正対する位置まで移動する。

[0128] また処理 206において一覧表示中であれば、仮想カメラ 71の視野内で、現在の注 目ウィンドウと同じ行、より左方に他のウィンドウがあれば、当該他のウィンドウを新た な注目ウィンドウとする。また、現在の注目ウィンドウと同じ行、より左方に他のウィンド ゥがなければ、注目ウィンドウの上 (仮想カメラ 71の視野内で上方）の行にさらに他の ウィンドウが表示されている力否かを判断し、表示されていれば、当該注目ウィンドウ の上の行の右端にある他のウィンドウを新たな注目ウィンドウとして選択する。注目ゥ インドウがすでに一覧表示されているウィンドウ内で最も左上隅にある場合は、この傾 倒操作による注目ウィンドウの切り替えを行なわなくてもよ 、。

[0129] さらに CPU11は、処理 205にて、 x軸方向の傾倒角度 Θ yが予め定められた第 3の 角度しきい値 0 yth3 ( Θ yth3く 0)を下回っていない場合には、 x軸方向の傾倒角度 Θ yが予め定められた第 4の角度しきい値 0 yth4 ( 0 yth4>0)を超えているか否かを 調べる（処理 207)。ここで、 Θ yが予め定められた第 4の角度しきい値 Θ yth4を超え ている場合は、所定の角度しきい値を超える角度で、コントローラ 4が右回りに傾倒さ れていると判断し、所定の選択順序で、ウィンドウを注目ウィンドウとして選択する処 理 (フォーカスされて!/ヽるタブを切り替える処理)を実行する（処理 208)。この処理も また、一覧表示中である力否かによって異なり、一覧表示中でなければ、例えば仮想 空間 5内で、現在の注目ウィンドウに対し、仮想カメラ 71の視野の右方に他のウィンド ゥがあれば、当該他のウィンドウを新たな注目ウィンドウとして、仮想カメラ 71の位置 を、当該新たな注目ウィンドウに正対する位置まで移動する。

[0130] また処理 208において一覧表示中であれば、仮想カメラ 71の視野内で、現在の注 目ウィンドウと同じ行、より右方に他のウィンドウがあれば、当該他のウィンドウを新た な注目ウィンドウとする。また、現在の注目ウィンドウと同じ行、より右方に他のウィンド ゥがなければ、注目ウィンドウの下 (仮想カメラ 71の視野内で下方）の行にさらに他の ウィンドウが表示されている力否かを判断し、表示されていれば、当該注目ウィンドウ の下の行の左端にある他のウィンドウを新たな注目ウィンドウとして選択する。注目ゥ インドウがすでに一覧表示されているウィンドウ内で最も右下隅にある場合は、この傾 倒操作による注目ウィンドウの切り替えを行なわなくてもよ 、。

[0131] このようなコントローラ 4によると、傾倒動作によって、ウィンドウ（タブ)の表示切り替 えが容易にできるようになる。

[0132] なお、ここで第 1から第 4の角度しきい値は、同じでなくてもよい。例えば奥向きの傾 倒操作が、手前向きの傾倒操作に比べて行いにくいなどの事情があれば、奥向きの 傾倒操作が行われたことを判断する第 1の角度しきい値の絶対値 I 0 xthl Iは、第 2の角度しきい値の絶対値 I 0 xth2 Iよりも小さくしてもよい。

[0133] さらに、処理 206や処理 208の実行後に、 CPU11は処理を単に終了するのではな ぐ所定時間だけ待機し、処理 201から処理を繰り返して実行してもよい。ここで待機 する時間は、傾倒角度 Θ yから、角度しきい値 (処理 206の実行時においては第 3の 角度しきい値 Θ yth3、処理 208の実行時においては第 4の角度しきい値 Θ yth4)を差 し引いて、この差し引き後の値の絶対値の逆数に応じた時間（当該逆数に所定の定 数を乗じて得た時間分）としてもよい。これによれば、傾倒角度に応じて、注目ウィンド ゥの切り替え速度 (タブの切り替え速度）が制御でき、傾倒角度が浅い場合には比較 的低速にて切り替えが行われ、傾倒角度が深!ヽ（大き!、)場合には比較的高速にて 切り替えが行われることとなる。

[0134] さらに、コントローラ 4自体の傾きにより、仮想空間 5内の仮想カメラ 71の位置を移動 してもよい。例えばコントローラ 4を右方向に傾ける操作が行われたときには、仮想力 メラ 71の位置をその視線の右方向へ移動する。またコントローラ 4を手前側に傾ける 操作が行われたときには、仮想カメラ 71の位置をその視線の上方向へ移動する。こ のとき、傾きの大きさ（角度）によって、移動速度を変更してもよい。例えば、傾き角度 Θが大きくなるほど、単位時間あたりの仮想カメラ 71の移動量 (すなわち移動速度） Δ χ、 A yを大きくしてちよい。

[0135] また例えば方向キーの下方向のキーが押下されたときに、仮想カメラ 71の位置をゥ インドウから遠ざ力る方向へ移動して、その視野を拡大し、また方向キーの上方向の キーが押下されたときに仮想カメラ 71の位置をウィンドウに近づく方向へ移動してもよ い。このような操作方法によれば、十字キーにて仮想空間 5内を移動させる操作に比 ベ、ユーザが、仮想空間 5内を自由に浮遊している感覚で、直感的に操作可能とな る。

[0136] なお、ここまでの説明では、予め定められている基準状態 (例えばコントローラ 4を 水平に置いた状態)からのコントローラ 4の傾き角度により、操作を行う例について述 ベた。しかし、コントローラ 4に設けられたキーのうち、いずれかのキー（以下、傾倒操 作指定キーと呼ぶ）が押下された時点での角度値 θ χθ, Θ yOを取得し、この角度値 を傾きの基準として、検出した傾き角度 Θ xd, Θ ydを用いて、傾倒角度を、

θ χ= Θ xd- θ χθ

θ γ= θ yd- θ yO

として演算してちょい。

[0137] また、上記傾倒操作指定キーが押下されている間においてのみ、コントローラ 4の 傾きによる操作を受け入れてもよい。

[0138] ここで、傾倒操作指定キーは、例えば図 25に示したキーのうち、 Aから Dのいずれ かのキーとしてもよ 、し、方向キーの 、ずれかであってもよ!/、。

[0139] また、コントローラ 4の各キーには、情報表示装置 1が実行するプログラムによって、 それぞれ機能が割り当てられている（例えば Bのキーが押下されたときに、クリックが あつたとするなど)が、傾倒操作指定キーは、他の機能が割り当てられていないキー としてちよい。

さらに傾倒操作指定キーは、他の機能が割り当てられているキーであってもよい。 例えば、 Aのキーに、仮想空間 5内における仮想カメラ 71の位置を地図のように表示 する機能 (マップ表示機能）が割り当てられている場合を考える。ここで、当該 Aのキ 一が押下されている間、コントローラ 4自体を傾ける操作によって、仮想空間 5内を移 動できるようにしてもよい。また、傾倒操作指定キーは、いずれか一つでなくてもよい 。例えばマップ表示機能に係る Aキーを傾倒操作指定キーとするとともに、 Aキー以 外の、傾倒操作指定キーとしての専用のキー（例えば Cキー）にも割り当てるようにし てもよい。さらにコントローラ 4の側面 (左右側面だけでなぐ奥側、手前側側面を含む )にキーがある場合は、当該側面のキーを傾倒操作指定キーとしてもよい。

Claims

請求の範囲

[1] 少なくとも 1つの表示対象情報を、それぞれの画面要素内に表示する情報表示部 と、

前記画面要素を一覧表示する一覧表示部と、

前記一覧表示中に、一覧表示されている画面要素内の表示対象情報を利用した 指示操作を受け入れて、当該指示操作に基づく処理を実行する実行部と、

を含む情報表示装置。

[2] 少なくとも 1つの表示対象情報を、それぞれの画面要素内に表示する情報表示手 段と、

前記画面要素を一覧表示する一覧表示手段と、

前記一覧表示中に、一覧表示されて!/、る画面要素の!/、ずれかを選択する操作とは 別に、いずれかの画面要素内の表示対象情報を利用した指示操作が規定され、当 該いずれかの画面要素内の表示対象情報を利用した指示操作を受け入れて、当該 指示操作に基づく処理を実行する手段と、

を含むことを特徴とする情報表示装置。

[3] 請求の範囲第 1項または第 2項に記載の情報表示装置であって、

前後方向または左右方向の少なくとも一方に係る傾倒角度を検出可能なコントロー ラに接続され、

前記コントローラにおいて検出された前後方向または左右方向の少なくとも一方に 係る傾倒角度に基づいて、前記指示操作が行われたカゝ否かを判断し、指示操作を 受け入れることを特徴とする情報表示装置。