JPH02144672A - マルチメディアプレゼンテーションシステム - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 ［産業上の利用分野］ 本発明はテキスト、音声４図形９画像等の情報を蓄積、
検索を行い必要な情報を検索者に提供するマルチメディ
アプレゼンテーションシステムに関する。

［従来の技術］ 本発明に近い公知例として以下の３件がある。

［１］「マルチメディアデータベース総論」情報処理学
会誌　ｖｏｌ、２８　Ｎａ６　Ｊｕｎｅ　１９８７［２
コ　“１ｌｙｐｒｅｃａｒｄとＩＩ　ｙ　ｐ　ｅ　ｒ　
Ｔ　ａ　ｌ　ｋ　”ｂｉｔ、ｖｏｌ、２０．ｎｏ、２．
１９８８［３］　　”ｌ１ｙｐｅｒｔｅｘｔ　　：　　
Ａｎ　　Ｉｎｔｒｏｄｕｃｔｉｏｎ　　ａｎｄＳｕｒｖ
ｅｙ”　　ＩＥＥＥ　　Ｃｏｍｐｕｔｅｒ　　Ｍａｇａ
ｚｉｎｅ、　　５ｅｐｔ。

端末、ワークデータ」ン等の上でテキスト、音声２図形
１画像を組合せ、利用者に情報を提供する、キャプテン
システムに代表されるビデオテックス、ＣＤ−ＲＯＭを
用いた電子化商品カタログ等、情報提供の電子化が進み
つつあるが、これらは表示情報と検索のためのメニュー
とは別々に管理され１表示されたテキスト、画像等とは
独立な情報でメニューが表示され、そのメニューをポイ
ンティングすることによって新たなページが表示される
。この方法では、情報の表示、検索に制約があり、自由
に検索出来ないという問題がある。

また、上記公知例のマルチメディアデータベース［１］
に於いては１画面上に表示される各部品は、夫々テキス
ト２音南２図形９画像等毎のシングルメディア単位に独
立に管理されており、検索者の要求に応じてシングルメ
ディアの部品をファイルから引き出し、それを組合せて
表示し、検索者に情報を提供する方法が提案されている
。これば、検索者の必要とする情報を前もって決めるこ
とは出来ず、更に部品単位で管理することによって部品
の汎用性を高め、かつ部品自身の一貫性。

整合性を保つことを目的としているためである。

更には近年、ハイパーメディア（公知例［３］参照）と
称し、表示画面上で次に引き出す情報を表示中の画面に
あるテキスト、画像等の中にキーとして埋め込み、その
キーをタッチパネル、マウス等のポインティングデバイ
スを用いて指定することによって必要な情報を画面上に
次々に表示して効率的に情報検索を行えるシステムが提
案され、あるいは、実用化されつつあるが、これらの詳
細なデータ構造は公開されていないが、　ｔｌｙｐｅｒ
ｃａｒｄ（公知例［２］参照）では予め登録したボタン
と呼ぶ一種のアイコンを用いている。

［発明が解決しようとする課題］ マルチメディアデータベース［１１では、部品単位でシ
ングルメディア毎に管理し、それを要求に応じて組合せ
た場合、部品単位で、なんらかのキーワード等によって
ファイルにアクセスするために、検索情報を引き出すの
に時間を要し、応答性の上で問題がある。

又、　ＨｙｐｅｒＣａｒｄ　［２１では、使用している
アイコン、即ちボタンは、その種別によってその後の処
理が決定され５表示されている情報５例えばテキスト中
のキーワードに依存した検索は出来ない。

本発明の解決しようとする課題は、この検索のためのフ
ァイルアクセスを高速化すると同時に、画像、音声など
の様に大量のデータを必要とする情報を効率的にアクセ
スできるようにすることである。

［発明を解決するための手段］ 本発明は、−括して表示出力する情報を、比較的データ
効率の高い（必要データ量の少ない）テキストデータ、
図形データ等をリスト構造で表現し、これをページとし
、て１単位のファイルブロックとして格納し、１回のフ
ァイルアクセスで取り出すことを可能とし、かつ、画像
データなど、１単位のファイルブロックに収まらないデ
ータは別個のファイルに格納し、ページブロックのリス
トの中にそのファイルをアクセスするための情報を入れ
ておくことでアクセスの高速化を図り、この問題を解決
するものである。

更に、検索操作に関しては、各ページファイルブロック
のテキスト、図形９画像の部品中のキーとなる字句９部
分図形１画像にポインタを付加し、そのキーをポインテ
ィングデバイス等で指示することによって、次に表示す
べきページファイルを指定し、キーボードの文字キーを
用い場合の非効率性を解決するためのものである。

［作用］ 本発明は、情報処理を行う処理装置、テキスト。

画像等を表示するＣＲＴ等の表示装置、必要に応じて音
声出力装置、データを格納する磁気ディスク、光ディス
ク等の外部記憶装置、キーボード、マウス等、更にはイ
メージスキャナ等の入力装置の組合せによって構成され
、検索の対象となる情報は、ページ単位で管理され、−
回のアクセスで、ページファイルブロックは処理装置の
主記憶に読みだされ、処理装置は、ページファイルブロ
ックのリスト構造を解読し、その中に記録されているフ
ォーマット情報に従ってデータを表示装置に表示、ある
いは音声出力装置を介して音声出力を行う、一方、画像
、音声等、データ壕が大きく、１単位のファイルブロッ
クに納めることが出来ない場合、ページファイルブロッ
クのリスト上に、出力位置等を示す情報とともに、デー
タの格納されているファイルのアクセス情報を付加し、
処理装置はこのアクセス情報を用いて画像、音声データ
を引き出し、出力する。

更に１本発明による情報検索は、ページファイルブロッ
クのデータは５階層的に表現されたリスト構造で表現さ
れており、例えば、テキ入１一部品（バラグラフ等）中
のキーとなる語句、あるいは。

画像部品中の部位を、それが指定された場合に表示する
部品、あるいは他のページのアクヤス情報（ポインタ等
）を、その部品に付属するリストとして付加し、対応す
る語句、部位がポインティングデバイス等１こよって指
定された場合、その部品。

あるいは他のページを表示する。

［実施例］ 第１図は本発明の１実施例の’ｉ霞構成を示したもので
、処理装置１により、検索情報格納用補助（外部）記憶
表コ５より取りだした検索情報を表示装置２に表示する
。このとき、検索すべき情報は入力用キーボード３ある
いは、検索操作用ポインティングデバイス４で指定する
。第２図は前記及示装ｈ２−ヒに表示される情報のレイ
アウトの例であり１例えば、外部記憶装置５に格納され
たページファイルブロックの１単（ａｌ土、第２図に示
すように、ページが而の１．　＊位として表示される。

このページファイルブロックのデータ（以下ページデー
タと略す）は例えば、全体をページ、その中の部品をコ
ラム、コラムの部品をパラグラフと言った階層構造で良
曳している。また、夫々の階層には、ヘッダが付属して
おり、夫ンの部品の題名髪表している、 この構造で画像を表示する場合は、テキストの場合のパ
ラグラフに相当する部分が、テキストコードの変わりに
画像データが使用され１画像をこの枠に表示する。

第３図は外部記憶装置５に格納されているページデータ
が読みだされ、表示されるデータの流れを示したもので
、先ず、ベージデータは外部記憶装置５から処理装置の
メインメモリ１２に読みだされ、処理装置の演算処理部
１１によってデータの構造を解読し、その解読結果のレ
イアウトに従って、データを表示装置２に表示出力する
。

第４図は、この表示されるベージデータのリスト構造を
示したもので、６１ａ〜６１ｅはリス１−のノード（又
はセル）、６２ａ〜６２ｅはセグメントであり、ノード
は２つのインデックスの対であり、前半のポインタはヘ
ッダのセグメントを、後半のインデックスはボディのリ
ストを指している。この時ボディは下位の階層を指すも
ので、同様な構造の繰返しで、ページ、コラム、バラグ
ラフと３つだ階層構造をこれによって表現することが出
来る。

また、セグメントにはフォーマット情報と、表示すべき
データが記録されており、処理装置１はこのりストデー
タに従って表示する。

第５図（ａ）はに記ノードの詳細なフォーマット例を示
したもので、このノードは前述の通り、２つのポインタ
の対からなり、各々のインデックスは、タグ部とポイン
タ部からなっている。

このタグ部は、第５図（ｂ）に示すように、それと対を
なすポインタを鋒飾する情報で、ポインタが他のノード
を指し゛〔いる、即ち更にリストとして展開されている
場合（ＭＯＤＥ）、セグメントを指している場合（ＳＥ
Ｇ）、他のページをさしている場合（ＯＵＴ）、等の区
別を行うための情報で、このタグ部の内容によって、ポ
インタ部の扱い方が異なる。

一方、セグメントは第６図にその例を示す通り。

このセグメントによって表される対象（これをオブジェ
クトと呼ぶ）の属性、フォーマット情報。

等の付帯情報と、オブジェクトの内容、即ち、テキスト
、図形データ等が記録されている。しかしながら、画像
のようなデータはテキストに比べて同一表示面積当たり
のデータ量が３桁以Ｅとなり、ページデータ内に持つよ
り他のファイルに格納した方が扱いやすい、この場合、
この画像データの代オ）りに画像データの入っているフ
ァイルの識別子などのアクセス情報のみをこのセグメン
１へ」二に記録し、この識別子を用いて処理装置は画像
ファイルを引き出し、画面上に表示する。この表示位置
の決定にサグメン１−中の属性、フォーマット情報を用
いることはテキストの場合と同様である。

また、音声データの場合なども同様番Ｊ−実現すること
が出来る。

更に、上記ページの階層構造のうち、例λば、パラグラ
フの下位のオブジェクトとして、キーワードを作り、こ
れを下位のリストで表し、対応するキーワードがボイン
ティングされたとき、これをそのレイアウト情報から処
理Ｍ置がボインティングされた座標位置とキーワードの
対応をとり、そのキーワードをハイライトさせる等のこ
とが出来るとともに５更に、そのキーワードの下位の階
層に、説明文（キャプション）、説明図、あるいはその
キーワードを選択することによって新たに検索されるペ
ージを表示する。あるいは、この検索χ・を象ページ、
あるいは説明文（図）に複数の候補が存在する場合、選
択メニューを表示し、メニューを新たにボインティング
することによって、［１的とするページ、あるいは説明
文（図）を表示させることが出来る。

この機能は、第４図に示したリスト構造データによるオ
ブジェクトの定義、記述によって実現される。

第７図（ｂ）はテキスト中のキーワードがボインティン
グされたときメニューを表示し、そのメニューの１つが
更にボインティングされたとき。

他のページ３，１示する場合のテキストパラグラフ息下
のリスト構造と対応する表示画面の例を示したものであ
る。第７図（、）のりスト構１貴に示すように、ｔｔ応
するメニューを指示するノードの後半の１′ンデツクス
には他のページを示すタグとページの識別子をしめずポ
インタがメニュー毎に定義、記述されている。

この場合、このタブとポインタにページデータ内のセグ
メントを示すものを定義すれば、このページデータとし
て定義、記述されているオブジェクト、例えば説明文（
図）を引き出すことが出来る。これはノードのタグ、ポ
インタの設定の仕方で自由に表示の方法、検索の方法を
設定することが可能である。

第８図はその処理を行うフローチャートの一例の概要を
示したもので、ここではテキストのみの場合について示
しているが、画像が含まれる場合も大差は無い。この処
理は大きくはブロック８０１より８０４において、最初
に表示するバラグラフ以りの表示を行い、ブロック８０
５で検索者によるパラグラフ内のキーワードのボインテ
ィングを待ち、ボインティングされたときブロック８０
６でその座標から対象どするパラグラフ、キーワードを
領域判定して探しだす３次に、ブロック８０７で探しだ
したキーワードに連なるメニューをリストより引き出し
、それを表示するとともに、ブロック８０８でそのメニ
ューが更にボインティングされるのを待ち、ボインティ
ングされた後ブロック８０９でその座標から特定メニュ
ーを領域判定により探しだし、ブロック８１０で当該メ
ニューのリス１−より更に表示すべき、ノードを引き出
し、タグを判定して、セグメンｌ−（ブロック８１１）
あるいは新たなページ（ブロック８１２）を表示する。

以下、再び、先頭に戻って、同じ処理を繰り返す。

以りは、画像１テキスｌ−等の表示であるが、必要に応
じて、音声出力をも行うことが出来る。これは表示した
テキストの文字を音声にしてディジタル録音し、それを
画像と同様にファイルに格納し、またそれを引き出し音
声として再生装置等を介して出力することは可能である
。

更に、オブジェクトの属性として、ある機能を実現する
プログラムを指定することで、ボインティングされたキ
ーワードに付属するプログラムを起動し特殊な処理、ル
ールの実行等を実現することも出来る。

［発明の効果］ 以上、本発明によれば、検索の自由度を向上し、又、検
索のためのファイルアクセス時間を短縮することが出来
、その効果は甚大である。

【図面の簡単な説明】

第１図は本発明の装置構成を示す図、第２図は本発明の
画面表示レイアウトの１例を示す図、第３３図は本発明
の情報検索時におけるデータの流れを示す図、第４図は
本発明のデータ構造を示す図、第５図は本発明のデータ
の１部のフォーマツＩ・を示す図、第６図は本発明の他
のデータのフォー・マットを示す図、第７図はりストデ
ータ構造の１部を示す図、第８図は本発明の処理のフロ
ーチャートである。 第１＠ 第３図 第２図 第５図 ＭＯＤＥ　：１１３−ページ内の他のノードを指すＳＥ
Ｇ　　：同一ページ内のセグメントを指すＯＵＴ　　：
他のページを指す 第６図 第７＠

Claims (1)

1. 【特許請求の範囲】 １、テキスト、図形、画像、音声などの情報を蓄積、表
   示出力する手段を有し、要求に応じて前記情報を表示出
   力する対話システムにおいて、情報表示出力の管理単位
   をページとし、該ページの単位でファイルを区分し、該
   ページの単位で該ファイルの作成、蓄積、検索を行うこ
   とを特徴とするマルチメディアプレゼンテーションシス
   テム。 ２、第１項記載のマルチメディアプレゼンテーションシ
   ステムにおいて、前記ページに対応したファイルの区分
   単位を、ファイルのアクセスを管理するオペレーティン
   グシステムが管理するファイルの論理的／物理的管理区
   分単位とすることを特徴とするマルチメディアプレゼン
   テーションシステム。 ３、第１項記載のマルチメディアプレゼンテーションシ
   ステムにおいて、前記ページに対応したファイルの区分
   単位のデータを作成、蓄積、検索するうえで、音声出力
   、テキスト、図形、画像を含む情報の表示出力を行うた
   めの元となるデータの一部もしくは全部を前記ページに
   対応するファイルとは異なったファイルに要素毎の部品
   のファイルとして構成し、該ページに対応するファイル
   の区分単位のデータに、該部品ファイルの部位を示すイ
   ンデックスを与え、該ページを操作する際、該ページに
   対応するファイルの区分単位のデータ並びに、それに含
   まれるインデックスが示す部品ファイルを操作すること
   を特徴とするマルチメディアプレゼンテーションシステ
   ム。 ４、第３項記載のマルチメディアプレゼンテーションシ
   ステムにおいて、前記部品ファイルを前記ページ区分単
   位の他のページ区分単位とすることを特徴とするマルチ
   メディアプレゼンテーションシステム。 ５、第１項記載のマルチメディアプレゼンテーションシ
   ステムにおいて、ページを構成する部品の表示出力に際
   して、検索者の操作入力によって該部品を表示、出力す
   ることを特徴とするマルチメディアプレゼンテーション
   システム。 ６、第５項記載のマルチメディアプレゼンテーションシ
   ステムにおいて、ページを構成する部品の表示出力に際
   して、前記部品を他のページとし、検索者の操作入力に
   よってページを逐次表示、出力することを特徴とするマ
   ルチメディアプレゼンテーションシステム。