JP3482071B2 - 仮想空間型データベース検索方法および検索装置 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は，仮想空間によって
構成されるデータベースから所望の情報を検索する情報
処理システムの技術分野に属し，特に，仮想空間での行
動をコミック形式で要約されたコマ画像情報を用いて簡
単に再開できるようにした仮想空間型データベース検索
方法および検索装置に関する。

【０００２】

【従来の技術】近年，従来型の文字ベースのデータベー
スから，様々な物体の３次元構造を可視化できる仮想空
間型データベースが急速に普及してきている。一般的な
仮想空間型データベースは，図６に示すような構成とな
っている。

【０００３】仮想空間情報蓄積部１０７には，Ｎ個の仮
想空間情報Ｆ_j （ｊ＝０，…，Ｎ−１）が蓄積されてい
る。一つの仮想空間情報は，一つの仮想空間Ｖ_j に対応
しているものとする。仮想空間情報Ｆ_j は，仮想空間を
構成する各オブジェクトのモデル情報，動き制御情報，
およびリンク情報から構成される。

【０００４】モデル情報は，対応するオブジェクトの３
次元構造をポリゴンモデルなどで記述したものであり，
これによって，視点のカメラ状態情報（すなわち，焦点
距離などのカメラの内部パラメータ，および視点位置を
表す並進運動ベクトルと向きを表す回転運動マトリクス
などの外部パラメータ）と光源とを決めると，その視点
から該オブジェクトを見た画像をコンピュータグラフィ
ックス技術などによって生成できるものである。

【０００５】動き制御情報は，対応するオブジェクトの
動き情報を記述したものであり，例えば操作者の視点位
置との距離に応じたオブジェクトの動き（一例として，
操作者の視点が接近すると回転するなど）や，操作者が
入力した操作情報に応じたオブジェクトの動き（一例と
して，操作者が該オブジェクトの特定位置をマウスなど
のポインティングデバイスを用いて指示した場合に，該
オブジェクトが横方向に移動するなど）が記述されてい
る。

【０００６】リンク情報は，対応するオブジェクトを操
作者がポインティングデバイスを用いて指示した場合
に，操作者の視点を移動すべき仮想空間の仮想空間情報
の蓄積位置情報である。

【０００７】仮想空間情報Ｆ_j として，以上のモデル情
報，動き制御情報，およびリンク情報が，各オブジェク
ト毎に各々関連付けられて蓄積されている。この仮想空
間型データベースを検索する場合，操作者は，まず入力
部１０２から，自分が最初に視点を移動したい仮想空間
Ｖ_j の仮想空間情報Ｆ_j の仮想空間情報蓄積部１０７で
の蓄積位置情報，および最初の視点の該仮想空間におけ
るカメラ状態情報を入力する。この入力に対し，検索部
１０６は，仮想空間情報蓄積部１０７の該蓄積位置情報
が示す蓄積位置に蓄積されている仮想空間情報を読み出
し，画像情報生成部１０３の仮想空間情報一時蓄積部１
０５に蓄積する。

【０００８】画像情報生成部１０３は，仮想空間情報一
時蓄積部１０５と画像情報生成処理部１０４から構成さ
れ，操作者が入力する操作情報などに応じてリアルタイ
ムに表示部１０１上に，仮想空間情報一時蓄積部１０５
に蓄積された仮想空間の画像情報を表示する。すなわ
ち，画像情報生成部１０３の画像情報生成処理部１０４
は，入力部１０２から入力される操作情報，仮想空間情
報一時蓄積部１０５に蓄積された仮想空間情報に含まれ
る各オブジェクトのモデル情報および動き制御情報を読
み出し，これらに応じて各オブジェクトのモデル情報に
適当な座標変換を行い，さらに操作者が入力するカメラ
状態情報が示すカメラに各オブジェクトを投影した画像
情報を生成して表示部１０１に表示する。

【０００９】また，画像情報生成部１０３は，該オブジ
ェクトに対応する動き制御情報が示す動き，または操作
者が入力部１０２から入力するカメラ状態情報や操作情
報に従って，該オブジェクトを動かしながら，リアルタ
イムに画像情報の生成を行う。したがって，操作者は表
示部１０１に表示される画像情報を見ながら，あたかも
実際に仮想空間中を歩きまわったり，オブジェクトを操
作しているかのような感覚を得ることができる。

【００１０】操作者が，表示部１０１に表示されている
仮想空間中のオブジェクトを，マウスなどのポインティ
ングデバイスを用いて指示すると，画像情報生成処理部
１０４は，ポインティングデバイスが示す表示部１０１
上の画像座標から指示されているオブジェクトを特定
し，仮想空間情報一時蓄積部１０５に蓄積された該オブ
ジェクトに対応するリンク情報が示す蓄積位置情報を読
み出して，検索部１０６に出力する。

【００１１】検索部１０６は，該蓄積位置情報が示す仮
想空間情報蓄積部１０７上の蓄積位置より，新たな仮想
空間情報を読み出して，仮想空間情報一時蓄積部１０５
に蓄積する。画像情報生成部１０３は，仮想空間情報一
時蓄積部１０５に蓄積されたこの新たな仮想空間情報に
基づいて画像情報を生成し，表示部１０１に表示する。

【００１２】したがって，操作者は，表示部１０１に表
示されたあるオブジェクトを指示することで，異なる仮
想空間に視点を移動することができる。すなわち，異な
る仮想空間の間を自由に渡り歩くことが可能である。こ
のような仮想空間型データベースを記述する手法とし
て，ＶＲＭＬ（Virtual Reality Modeling Language ）
などが提案されている。

【００１３】この仮想空間型データベースにおいては，
前記のとおり，操作者は仮想空間内を自由に歩きまわっ
たり，オブジェクトを操作するなどの行動が可能である
ばかりでなく，異なる複数の仮想空間の間を渡り歩くこ
とが可能である。しかし，このように複数の仮想空間の
間または仮想空間内で行動した後で，すなわち，仮想空
間を渡り歩き，オブジェクトを操作し，視点を移動させ
た後で，再び特定の仮想空間内の特定の視点に移動した
い場合，または特定の仮想空間の特定のオブジェクトに
別の操作を行いたい場合，その特定の仮想空間内の特定
の視点を検索する必要が生じる。

【００１４】従来は，このような場合の仮想空間型デー
タベースの検索手法として，(a) 自分の記憶に依存して
リンクをたどるか，あるいは，(b) 仮想空間を移動中に
興味を持った（後で再度訪れたいと感じるような）場合
には，その仮想空間の仮想空間情報蓄積部１０７におけ
る仮想空間情報蓄積位置と視点位置を何らかの方法で記
録しておくといった手法しか存在しなかった。

【００１５】すなわち，仮想空間における自身の行動結
果を，何らかの方法で記憶する必要があった。しかし
(a) の手法では，本人の記憶が不確かな場合には当てに
ならず，しかもいちいちリンクをたどり直す必要が生じ
る。また(b) の手法では，あらかじめ記録しておいた場
所にしか移動できないという問題点があった。

【００１６】

【発明が解決しようとする課題】本発明の目的は，仮想
空間型データベースにおいて，操作者本人または第三者
の仮想空間内における行動結果を要約することで，容易
に所望する仮想空間内の視点位置に移動することが可能
である検索手法を実現することである。

【００１７】

【課題を解決するための手段】本発明では，仮想空間型
データベースの画像情報生成部がリアルタイムに生成す
る画像情報（動画像情報）に，仮想空間における操作者
のすべての行動，およびオブジェクトとその動きが記録
される点に着目し，該画像情報を要約した要約画像情報
を生成し，この要約画像情報を仮想空間の検索に利用す
ることを特徴としている。この要約画像情報は，検索の
目的で用いられるものであるから，速覧性と一覧性を有
している必要がある。そこで，要約画像情報は，画像情
報生成部が生成する画像情報を適当に分割して得られる
各カットの代表画像情報によって構成する。

【００１８】これらの代表画像情報を羅列することによ
って，要約画像情報を得ることができる。しかし，単純
な定型の代表画像情報を羅列しただけでは，実際の仮想
空間における操作者の行動やオブジェクトの動きが一目
では判りにくい。各代表画像（コマ画像）のレイアウト
や形状を，各カットが実際に生起した順序，各カットに
おける操作者の行動（すなわち，カメラ状態情報や操作
情報の入力），仮想空間内におけるオブジェクトの動き
などを反映するように決定すれば，要約画像情報の速覧
性と一覧性を飛躍的に高めることが可能となる。

【００１９】本発明では，このような要約画像情報とし
て，各代表画像情報（コマ画像情報）をあたかもコミッ
クのコマ割りのように配置したコミック形式の要約画像
情報を適用する。

【００２０】図１は，本発明の原理説明図である。 (a) まず，検索対象となる情報に対応づけられたオブジ
ェクトが配置された仮想空間の画像情報を入力情報に基
づいて生成し表示する。このとき，操作者が入力したカ
メラ状態情報に応じて任意に視点を変更し，また入力し
た操作情報に基づいて各オブジェクトを操作した画像情
報を生成する。

【００２１】(b) 表示した仮想空間における検索のため
の操作に関する情報を，仮想空間の画像情報の生成に用
いた仮想空間型データベースにおける仮想空間情報の蓄
積位置情報とともに蓄積する。この操作に関する情報と
しては，例えば操作者の視点に対応するカメラの動きに
関する情報を含むカメラ状態情報と操作対象のオブジェ
クトの動きに関する情報を含むオブジェクト状態情報が
ある。

【００２２】(c) 次に，蓄積した操作に関する情報に基
づいて，前記表示した仮想空間の画像情報を要約したコ
マ画像情報を，各ページごとにコマ割りされた領域にコ
ミック形式で配置し，要約画像情報を生成する。必要で
あれば，蓄積されたカメラ状態情報に応じてコマ画像情
報を割り当てるコマ形状を決定し，コマ形状に適合した
再レンダリングを行う。

【００２３】(d) 要約画像情報を用いた検索要求に対し
て，コミック形式の要約画像情報を表示し，要約画像情
報中のコマ割りされた領域の指示をポインティングデバ
イス等から入力する。

【００２４】(e) 指示された領域のコマ画像情報に対応
する仮想空間の画像情報を再生し表示する。本発明で
は，以上のようにコミック形式の要約画像情報を用い
て，コマ画像情報が示す仮想空間に簡単に移動すること
ができるので，自分の過去の行動結果または他人の体験
結果から，仮想空間情報の検索を容易に行うことができ
るようになる。特に，仮想空間における検索場面が，コ
ミック形式でコマ割りされた領域に表示されるので，非
常に親しみやすい検索操作環境の提供が可能になる。

【００２５】

【発明の実施の形態】図２は，本発明によるコミック形
式の要約画像情報の作用効果を示す一例である。仮想空
間内において，図２(a) に示すように，操作者が自身の
視点を(1) (2) (3) の順にパンさせたとする。このと
き，単純なカットの羅列によって要約画像情報を生成す
ると，図２(b) のようになってしまい，視点をパンさせ
たという情報は失われる。

【００２６】図２(c) は，コマ形状に変化を持たせたコ
ミック形式で要約画像情報を生成した例である。コミッ
ク形式の要約画像情報は，操作者の行動やオブジェクト
の動きを反映させた形状と配置を有するコマ画像情報に
よって構成される。この場合には，パンさせたことをコ
マ割りから知覚することが可能となっていることがわか
る。このように，コミック形式の要約画像情報とするこ
とで，操作者の行動やオブジェクトの動きを視覚的によ
り容易に理解することが可能となる。

【００２７】さらに本発明では，図３に示すように，各
コマ画像情報が対応する仮想空間情報の仮想空間情報蓄
積部における蓄積位置情報と，そのときのカメラ状態情
報を，コミック形式要約画像情報中の各コマ画像情報に
対応付けて，コミック形式要約画像情報の生成時にあら
かじめ蓄積しておく。

【００２８】したがって，操作者は，自分が，あるいは
他の誰かが仮想空間を過去に渡り歩き行動した結果をま
とめた要約画像情報を見て，再度訪れてみたいコマ画像
情報を選択，指定するだけで，そのコマ画像情報に対応
する仮想空間情報とカメラ状態情報を獲得することがで
きる。すなわち，コマ画像情報が示す仮想空間の“まさ
にその場面”へ視点を移動し，再び仮想空間を渡り歩
き，様々な行動を行うことが可能となる。

【００２９】また，操作者自身の仮想空間におけるかつ
ての行動結果だけでなく，第三者の行動結果の要約画像
情報から，所望のコマ画像情報を選択，指定して，その
コマ画像情報に対応する仮想空間へ視点を移動すること
も可能となる。すなわち，他人の仮想空間における行動
結果，体験結果を参照して，自分が行きたい仮想空間を
決定することができる。

【００３０】図４は本発明の実施の一形態を示す図であ
って，１は仮想空間表示部，２は検索操作入力部，３は
仮想空間情報蓄積部，４は検索部，５は画像情報生成
部，５−１は仮想空間情報一時蓄積部，５−２は画像情
報生成処理部，６は履歴情報蓄積部，６−１は履歴情報
蓄積制御部，６−２〜６−Ｘは仮想空間情報蓄積位置情
報蓄積部，６−２−１〜６−Ｘ−１はオブジェクト状態
情報蓄積部，６−２−２〜６−Ｘ−２はカメラ状態情報
蓄積部，７は仮想空間検索情報蓄積部，７−１〜７−Ｙ
はコマ画像領域情報蓄積部，７−１−１〜７−Ｙ−１は
蓄積位置情報蓄積部，７−１−２〜７−Ｙ−２はカメラ
状態情報蓄積部，８は要約画像情報生成部，８−１は要
約画像情報生成処理部，８−２は要約画像情報蓄積部，
９は要約画像情報検索部，１０は要約開始信号入力部，
１１は要約画像情報表示部，１２は領域情報入力部，１
３は仮想空間型データベース装置，１４は要約画像情報
生成手段，１５は要約画像情報検索手段である。仮想空
間情報蓄積部３には，あらかじめ単一または複数の仮想
空間情報が蓄積されている。

【００３１】〔仮想空間での行動履歴の記録〕本装置の
動作は，以下のとおりである。操作者は，まず検索操作
入力部２から，最初の仮想空間情報の仮想空間情報蓄積
部３における蓄積位置情報を入力する。検索部４は，検
索操作入力部２から蓄積位置情報が入力されると，その
蓄積位置情報が示す仮想空間情報蓄積部３の蓄積位置よ
り，仮想空間情報を読み出し，その読み出した仮想空間
情報を画像情報生成部５の仮想空間情報一時蓄積部５−
１に出力し，その蓄積位置情報を履歴情報蓄積部６の履
歴情報蓄積制御部６−１に出力する。

【００３２】次に操作者は，検索操作入力部２から，カ
メラ状態情報および操作情報を入力する。画像情報生成
処理部５−２は，該仮想空間情報に含まれる各オブジェ
クトのモデル情報および動き制御情報，ならびに検索操
作入力部２から入力された操作情報およびカメラ状態情
報を読み出し，各オブジェクトのオブジェクト状態情報
を動き制御情報および操作情報から抽出し，各オブジェ
クト状態情報に従って各オブジェクトのモデル情報を並
進移動，回転，拡大縮小したものを，カメラ状態情報が
示すカメラに投影した画像情報を生成して仮想空間表示
部１に表示する。なお，オブジェクト状態情報は，例え
ばオブジェクト並進運動ベクトル，オブジェクト回転運
動マトリクス，オブジェクトスケールなどのオブジェク
トの運動に伴う表示のための情報である。

【００３３】さらに，画像情報生成処理部５−２は，こ
のときのオブジェクト状態情報とカメラ状態情報とを同
期して履歴情報蓄積部６の履歴情報蓄積制御部６−１に
出力する。そして，画像情報生成処理部５−２は，検索
操作入力部２に入力されるカメラ状態情報および操作情
報を一定時間間隔で読み出しながら，上記の処理を反復
する。

【００３４】履歴情報蓄積部６の履歴情報蓄積制御部６
−１は，検索部４から蓄積位置情報が入力されると，そ
の蓄積位置情報を履歴情報蓄積部６の第一の仮想空間情
報蓄積位置情報蓄積部６−２に蓄積し，その後に画像情
報生成処理部５−２が一定時間間隔で同期しながら出力
する各オブジェクト状態情報，および検索操作入力部２
から入力されるカメラ状態情報を，該一定時間間隔と同
期しながら読み出し，第一の仮想空間情報蓄積位置情報
蓄積部６−２に蓄積された蓄積位置情報と関連付けなが
ら，順次オブジェクト状態情報蓄積部６−２−１および
カメラ状態情報蓄積部６−２−２に各々蓄積する。

【００３５】操作者が，仮想空間表示部１に表示された
前記画像情報を見ながら，検索操作入力部２に特定のオ
ブジェクトの指示情報を入力すると，画像情報生成処理
部５−２は，入力された指示情報が示す仮想空間情報一
時蓄積部５−１に蓄積されたオブジェクトに対応するリ
ンク情報を読み出し，そのリンク情報が示す蓄積位置情
報を検索部４に出力する。

【００３６】検索部４は，蓄積位置情報が入力される
と，その蓄積位置情報が示す仮想空間情報蓄積部３の蓄
積位置から仮想空間情報を読み出し，再び，仮想空間情
報を画像情報生成部５の仮想空間情報一時蓄積部５−１
に蓄積し，さらにその蓄積位置情報を履歴情報蓄積部６
の履歴情報蓄積制御部６−１に出力する。

【００３７】画像情報生成処理部５−２は，最初の仮想
空間情報が入力された場合と同様にして，検索操作入力
部２に入力されるカメラ状態情報および操作情報を一定
時間間隔で読み出しながら，適当な画像情報を生成して
仮想空間表示部１に出力し，さらに各オブジェクトのオ
ブジェクト状態情報およびカメラ状態情報を同期して履
歴情報蓄積部６の履歴情報蓄積制御部６−１に出力す
る。

【００３８】履歴情報蓄積部６の履歴情報蓄積制御部６
−１は，検索部４から新たに蓄積位置情報が入力される
と，その蓄積位置情報を第二の仮想空間情報蓄積位置情
報蓄積部６−３に蓄積し，その後に画像情報生成処理部
５−２が同期しながら出力する各オブジェクト状態情報
およびカメラ状態情報を，第二の仮想空間情報蓄積位置
情報蓄積部６−３に蓄積された蓄積位置情報と関連付け
ながら，順次オブジェクト状態情報蓄積部６−３−１お
よびカメラ状態情報蓄積部６−３−２に各々蓄積する。

【００３９】このような構成となっているから，操作者
は，仮想空間表示部１に表示される仮想空間の画像情報
を見ながら，検索操作入力部２よりカメラ状態情報およ
び操作情報を入力することで，あたかも仮想空間内を自
由に歩き回り，視点を変更しながら，仮想空間中のオブ
ジェクトを操作するかのような感覚を得ることができ
る。

【００４０】また，検索操作入力部２より特定のオブジ
ェクトの指示情報を入力することで，そのオブジェクト
にあらかじめ関連付けられていた他の仮想空間情報を仮
想空間情報蓄積部３から読み出して，仮想空間表示部１
に表示することができるから，あたかも他の仮想空間に
移動するかのような感覚を得ることができる。

【００４１】さらにまた，操作者が呼び出した各仮想空
間情報の蓄積位置情報に関連付けて，操作者が検索操作
入力部２に入力したカメラ状態情報，および操作者が検
索操作入力部２に入力した操作情報に基づいて抽出した
オブジェクト状態情報が一定時間間隔で同期して履歴情
報蓄積部６に蓄積されるから，操作者の仮想空間におけ
る行動，および各オブジェクトの動きの履歴情報を保存
することができる。

【００４２】〔要約画像の生成〕操作者が，要約開始信
号入力部１０に要約開始信号を入力すると，要約開始信
号入力部１０は，要約画像情報生成処理部８−１にその
要約開始信号を出力する。要約画像情報生成処理部８−
１は，要約開始信号が入力されると，履歴情報蓄積部６
の各仮想空間情報蓄積位置情報蓄積部６−２〜６−Ｘに
蓄積された各仮想空間情報の蓄積位置情報と，これらの
各蓄積位置情報に関連付けられて一定時間間隔でオブジ
ェクト状態情報蓄積部６−２−１〜６−Ｘ−１およびカ
メラ状態情報蓄積部６−２−２〜６−Ｘ−２に蓄積され
ていた各オブジェクト状態情報およびカメラ状態情報
を，各々順次読み出し，仮想空間情報蓄積部３の蓄積位
置情報が示す蓄積位置から仮想空間情報を読み出し，単
一または複数のコマ画像情報から構成されるコミック形
式の要約画像情報を生成して，要約画像情報蓄積部８−
２に出力する。

【００４３】要約画像情報生成処理部８−１が，蓄積位
置情報，オブジェクト状態情報，およびカメラ状態情報
に基づいてコミック形式の要約画像情報を生成する手順
は，例えば，特願平７−２８８２８０号（映像情報変換
装置）に示される手順に従う。具体的には，図５に示す
手順である。

【００４４】まず，ステップＳ１では，オブジェクト状
態情報およびカメラ状態情報から各オブジェクトの状態
変化点を検出する。カメラの状態変化とは，パン，チル
ト，ドリー，トラッキングなどのカメラの一定の運動状
態，またはズームイン，ズームアウトなどのカメラの一
定の撮影状態の変化である。また，オブジェクトの状態
変化とは，オブジェクトの直進運動，回転運動，拡大，
縮小などの一定の運動状態，あるいは上下方向の振動な
どの一定の周期運動の変化である。

【００４５】基本的にこれらの状態変化点によって，仮
想空間情報から得られる一連の画像情報（動画像情報）
のカット点を検出するが，状態変化点が多くなりすぎな
いようにするために，ステップＳ２によって適当な方法
で優先順位を付与し，優先順位の高いものから適当な個
数のオブジェクトの状態変化点を抽出してカット点とす
る（ステップＳ３）。

【００４６】ステップＳ４では，これらのカット点に対
応するカメラ状態情報からカメラワークを抽出し，所定
の抽出条件によってトラッキング（縦，横），ドリー
（前，後），チルト，パン，ズームイン，ズームアウト
等に分類する。なお，どの抽出条件も満たさない場合に
は，カメラワークは標準状態とする。

【００４７】次に，ステップＳ５では，抽出されたカメ
ラワークに基づいて，画像情報の各カットから代表静止
画像を選択し，各ページごとのコマ形状の決定とコマの
レイアウトを行う。コマ形状は，基本的にはトラッキン
グ（縦）とチルトの場合には縦長のコマを，トラッキン
グ（横）とパンの場合には，横長のコマを割り当てる。
縦長および横長のコマは，カットから適当な静止画像を
選択し，これをトリミングするか，あるいは縦長あるい
は横長のパノラマ撮影が行えるようにカメラモデルの視
野角を変更し，カットにおける各オブジェクトのモデル
情報を用いて，再レンダリングすることで生成する。

【００４８】また，ズームインとドリー（前方向）の場
合には，大きいコマから小さいコマへと変移するコマ割
りを割り当て，ズームアウトとドリー（後方向）の場合
には，小さいコマから大きいコマへと変移するコマ割り
を割り当てる。

【００４９】コマ形状が決まったならば，決定されたコ
マ形状を持つ代表静止画像を各ページに自動的に配置す
るレイアウト処理を行い，コミック形式の画像を生成す
る。これをコミック形式の要約画像情報とする。

【００５０】要約画像情報生成処理部８−１は，同時
に，生成した要約画像情報における各コマ画像情報の該
要約画像情報上での領域情報を，仮想空間検索情報蓄積
部７の各コマ画像領域情報蓄積部７−１〜７−Ｙに，各
コマ画像情報が対応する仮想空間情報の蓄積位置情報
を，仮想空間検索情報蓄積部７の蓄積位置情報蓄積部７
−１−１〜７−Ｙ−１に，各コマ画像情報が対応するカ
メラ状態情報を，仮想空間検索情報蓄積部７のカメラ状
態情報蓄積部７−１−２〜７−Ｙ−２に，各々関連付け
て蓄積する。

【００５１】〔要約画像による検索〕要約画像情報蓄積
部８−２に蓄積された要約画像情報は，要約画像情報表
示部１１に表示され，操作者に提示される。操作者は，
要約画像情報表示部１１上に表示された要約画像情報を
見て，領域情報入力部１２より，要約画像情報上のコマ
画像情報の領域情報を入力する。

【００５２】要約画像情報検索部９は，領域情報入力部
１２に入力された領域情報を読み出すと，その入力領域
情報が含まれる領域情報が蓄積されているコマ画像領域
情報蓄積部７−１〜７−Ｙを探索し，コマ画像領域情報
蓄積部７−１〜７−Ｙに対応する仮想空間検索情報蓄積
部７の蓄積位置情報蓄積部７−１−１〜７−Ｙ−１から
該当する仮想空間情報の蓄積位置情報を読み出し，さら
に，コマ画像領域情報蓄積部７−１〜７−Ｙに対応する
仮想空間検索情報蓄積部７のカメラ状態情報蓄積部７−
１−２〜７−Ｙ−２からカメラ状態情報を読み出す。そ
して，要約画像情報検索部９は，読み出した蓄積位置情
報を検索部４に出力し，カメラ状態情報を画像情報生成
処理部５−２に出力する。

【００５３】検索部４は，要約画像情報検索部９から蓄
積位置情報が入力されると，その蓄積位置情報が示す仮
想空間情報蓄積部３の蓄積位置より仮想空間情報を読み
出し，再び，仮想空間情報を画像情報生成部５の仮想空
間情報一時蓄積部５−１に蓄積する。画像情報生成部５
は，仮想空間情報およびカメラ状態情報が入力される
と，先に仮想空間情報が入力された場合と同様にして，
画像情報を生成して仮想空間表示部１に表示する。

【００５４】このような構成となっているから，操作者
はかつて仮想空間内を行動した結果に基づいて生成され
た要約画像情報を見て，再び訪れたい場面に該当するコ
マ画像情報を指示するだけで，仮想空間中のその場面に
視点を移動し，再びその仮想空間での行動を再開するこ
とが可能となる。

【００５５】

【発明の効果】本発明によって，仮想空間型データベー
スにおける操作者の行動を要約したコミック形式の要約
画像情報を自動的に生成することが可能となり，しか
も，その要約画像の特定のコマ画像情報を指示すること
で，指示されたコマ画像情報が対応する仮想空間に視点
を移動し，その仮想空間での行動を再開することが可能
となる。

【図面の簡単な説明】

【図１】本発明の原理説明図である。

【図２】コミック形式の要約画像情報の例を示す図であ
る。

【図３】要約画像情報による仮想空間型データベースの
検索説明図である。

【図４】本発明の実施の一形態を示す図である。

【図５】要約画像情報の生成処理の流れを示す図であ
る。

【図６】従来の仮想空間型データベースの例を示す図で
ある。

【符号の説明】

１ 仮想空間表示部 ２ 検索操作入力部 ３ 仮想空間情報蓄積部 ４ 検索部 ５ 画像情報生成部 ６ 履歴情報蓄積部 ７ 仮想空間検索情報蓄積部 ８ 要約画像情報生成部 ９ 要約画像情報検索部 １０ 要約開始信号入力部 １１ 要約画像情報表示部 １２ 領域情報入力部 １３ 仮想空間型データベース装置 １４ 要約画像情報生成手段 １５ 要約画像情報検索手段

フロントページの続き (56)参考文献 特開 平６−274577（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) G06T 15/00 - 17/50 G06F 17/30

Claims (2)

(57)【特許請求の範囲】
1. 【請求項１】 仮想空間によって構成されるデータベー
   スの中から所望の情報を検索する方法であって， 検索対象となる情報に対応づけられたオブジェクトが配
   置された仮想空間の画像情報を入力情報に基づいて生成
   し表示する過程と， 前記表示した仮想空間における検索のための操作に関す
   る情報を蓄積する過程と， 前記蓄積した操作に関する情報に基づいて，前記表示し
   た仮想空間の画像情報を要約したコマ画像情報を，各ペ
   ージごとにコマ割りされた領域にコミック形式で配置
   し，要約画像情報を生成する過程と， 前記要約画像情報を表示し，要約画像情報中のコマ割り
   された領域の指示を入力する過程と， 指示された領域のコマ画像情報に対応する仮想空間の画
   像情報を再生し表示する過程とを有し， 前記蓄積する操作に関する情報は，操作者の視点に対応
   するカメラの動きに関する情報を含むカメラ状態情報と
   操作対象のオブジェクトの動きに関する情報を含むオブ
   ジェクト状態情報とを含み，これらを前記表示した仮想
   空間の画像情報の生成に用いた仮想空間型データベース
   における仮想空間情報の蓄積位置情報とともに蓄積し， 前記要約画像情報を生成する過程では，蓄積されたカメ
   ラ状態情報に応じてコマ画像情報を割り当てるコマ形状
   を決定し，コマ形状に適合した再レンダリングを行う こ
   とを特徴とする仮想空間型データベース検索方法。
2. 【請求項２】 仮想空間の画像を表示し，表示した仮想
   空間において指示された情報を検索する仮想空間型デー
   タベース検索装置であって， あらかじめ仮想空間における検索対象の情報に対応づけ
   られた単一または複数のオブジェクトの情報を有する仮
   想空間情報を蓄積している仮想空間情報蓄積部と， 前記仮想空間情報に関する検索のための操作情報を入力
   する検索操作入力部と， 入力した操作情報に基づき前記仮想空間情報蓄積部に蓄
   積している仮想空間情報を検索し，該当する仮想空間情
   報を読み出す検索部と， 前記読み出した仮想空間情報と操作情報に基づいて検索
   対象の情報に対応づけられたオブジェクトが配置された
   仮想空間の画像情報を生成する画像情報生成部と， 該画像情報生成部が生成した画像情報を表示する仮想空
   間表示部と，操作者の視点に対応するカメラの動きに関する情報を含
   むカメラ状態情報と操作対象のオブジェクトの動きに関
   する情報を含むオブジェクト状態情報とを含む操作に関
   する情報を，仮想空間の画像情報の生成に用いた前記仮
   想空間情報蓄積部における仮想空間情報の蓄積位置情報
   とともに 順次蓄積する履歴情報蓄積部と， 前記履歴情報蓄積部に蓄積された仮想空間情報の蓄積位
   置情報と関連する操作情報から得られる情報の履歴情報
   とに基づいて，前記履歴情報中のカメラ状態情報に応じ
   てコマ画像情報を割り当てるコマ形状を決定し，コマ形
   状に適合したコミック形式で表されるコマ画像情報から
   構成される要約画像情報を生成する要約画像情報生成部
   と， 前記コマ画像情報に対応する仮想空間情報の前記仮想空
   間情報蓄積部における蓄積位置情報を該各コマ画像情報
   と関連付けて蓄積する仮想空間検索情報蓄積部と， 前記要約画像情報生成部が生成した要約画像情報を表示
   する要約画像情報表示部と， 該要約画像情報表示部に表示された要約画像情報を構成
   するコマ画像情報の領域情報を入力する領域情報入力部
   と， 該領域情報入力部から領域情報が入力された場合に，前
   記仮想空間検索情報蓄積部から該領域情報に合致するコ
   マ画像情報に対応付けられて蓄積されていた蓄積位置情
   報を読み出し，該蓄積位置情報を前記検索部に出力する
   ことにより要約画像中のコマ画像情報に対応する仮想空
   間情報を検索し，その仮想空間情報に基づいて仮想空間
   の画像情報の表示を再現する要約画像情報検索部とを備
   えたことを特徴とする仮想空間型データベース検索装
   置。