JPS63266964A - デ−タ表現方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は、テキスト、図形、自然画、音声などのマルチ
メディアデータの計算機媒体内の嵌現方式に係り、特に
マルチメディアデータの統合出力が必要となる。電子カ
タログ、％子マニュアルなどに好適な、データ表現方式
に関する。

〔従来の技術〕

従来、マルチメディアデータの統仕出力の方法としては
、ソークステーション等で多用されているマルチウィン
ドウ、レーザーディスク等を利用したアナログオーディ
オヴイジュアル（ＡＶ　）出力装置などがある。

マルチメディアデータの蓄積・検索に関しては、アイ・
イー、イー、イーコンピュータ、１）ｅＣ。

（１９８６年）第４５頁かり第５６員に２いて論じられ
ている。この１文では、オブジェクト概念を用いたマル
チメディアデータ統合表現方式が提案ちれているが、メ
ディア別に真なるデータ符号化方式を利用し、媒体内の
情報表現を効率化することについて配慮さｎていなかっ
た。

〔発明が解決しょうとする問題点〕

上記従来技術のうち、マルチウィンドウ方式は主として
テキスト、図形など〃為ら成る文書２図面の対話微処理
を目的としたもので、自然−像、音声データについては
配慮されておらず、自然４組音戸まで富めた。マルチメ
ディアデータの統合出力を行えるものではなかった。

また、アナログＡＶ装置にぶれば、自然画、音声などの
統合出力が可能ではおるが、アナログ系でめることから
、検索システム等に組込んで使用する場合柔軟性に欠け
る。−また、晶質が落ちるという難点があつ九。

本発明の目的は、主としてディジタルデータからなるマ
ルチメディアデータの統合出力金可能とする。データの
計Ｊ１機媒体内表現方式を提供することにある。

〔問題点を解決するための手段」 上記目的は、テキスト、図形、自然画、音声などの異種
メディアデータｔ、それぞれ、各メディアに過賞した別
個の符号化方式を用いて符号化した単独メディア符号化
データ部と、瞑異櫨メディアデータを、画面上（空間的
）るるいは画面間（時間的）で統合するための構成情報
データ部を備えることにより達成される。

〔作用〕 複数ある単独メディア符号化データは、それぞれの符号
化方式に対応した復号方式により復号された仮、構成情
報に基づき１画賊ブータの場合はｔ険足１１１１１面上
に配置され、音声データの場合は特足画面に対応付けら
ｎ、マルチメディアデータとして統合出力される。

〔実施例〕

第１図には１本発明を実施する際必要となる。

ハードウェア環境の構成例を示す。処理装置１１では、
主記憶装置２會作業バッファとして用いて。

符号化データの仮号、メディア統合などの処理を行う。

外部記憶装置３μ、マルチメディアデータを蓄積するた
めに用いられる。グラフィックディスプレイ４は、画像
データの表示を行う。処理装置への入力指示は、キーボ
ード５あるいはポインティングデバイス６により行われ
る。Ｄ／Ａ変侠器７ｔ−通して、スピーカ８からは音声
情報が出力される。

第２図に従い、マルチメディア統合の概念について説明
する。時系列の出力画面１０〜１３の各画面上には異種
メディアが混在して表示さｎる。

たとえば、画面１０は、テキストデータ１４．図面デー
タ１６．自然ＩＩｊｉＪｌＴを統合したものとなってお
り、さらに、音声データ（画面の音声説明など）２１が
付随している。データによっては、複数画面に共通して
用いられる部会もある。たとえは、第２図において１図
面データ１６ｒＣ，１ｍｉ面１０〜１３で共通に用いら
ｎている。

画面に統合きれる前の単独メディアデータは。

それぞれメディアごとに別個の符号化方式により符号化
され、媒体内に保持されているものとする。

第３図には、メディア別の符号化方式の例を示す。

第４図には、メディア別の符号化データ蓄積と。

出力時のメディア統せを可能とする。データ表現形式會
示す。メディア続合を行うための構成情報の形式１００
は、画面数指示部１０１１画面構成データ数指示部１０
２＆データＩＤ１０３．画面上の表示枠情報（たとえば
矩形の２頂点の座標）１０４からなる。画面数が複数の
場合は、上記データの並びが画面数に等しい回数だけ繰
返され本。

なお、データが音声の場合は１表示枠情＠１０４は不要
となる。以上が構成情報の形式でおるが。

個別データの表現形式１１０ｔｒｉ、　；ｒ−ｆｉ　Ｉ
　ｉ）　１１１　。

メディア種別指示＠１１２．データ長瑣示＠　１１３゜
符号化データ部１１４エク成る。データＩ　Ｄ　１１１
は、構成情報１００の中のデータＩＤ１０３から。

個別データを検索するときのインデクスとして用いられ
る。メディア種別１１２は、テキスト、図形２画像、ｆ
声などの区別を示し、符号化データを復号する際の復号
方式の選択に用いられる。符号化データ１１４は一般に
可変長となるので、そのデータ長１１３’ｉ与えておく
こととする。

第５図は、上述のデータ六現方式を用いた。マルチメデ
ィア情報の統合出力の処理手順を示す７０−テヤートで
ある。嶽ず処理ブロック２００では、＃！４図（ａ）の
構成情報１００を読み出′す。処理ブロック２０１では
、構成情報に基づき、１枚の画面を合成する。にで画面
付酸処理２０１の詳細を第６図の７０−チャートに従い
説明しておく。

処理ブロック３００では、＃ｌ成情報１００中のデータ
Ｉｎ）１０３にｉづ＠、符号化データを読み出す。処理
ブロック３０１で、該符号化データを第４図（ｂ）のメ
ディア種別１１２に従って復号する。

該復号データが音声テークでない場合は、処理ブロック
３０３で、該復号データを画像表示バッファに書き込む
。このとさ、簀き込み位置は、構成１１１ｒ報中の表示
枠情報１０４により識別する。該復号データが音声の場
合は、処理ブロック３０５で音声バッファに書き込む。

処理ブロック３０４では、該画面を構成する全データに
ついて復号が終了したか否かの判定全行い、終了してい
ない場合は、上述の処理ブロック３００以降を繰返すも
のとする。

以上で第６図の画面合成処理の説明を終９．第５図の説
明に戻る。処理ブロック２０２では、合成画面の出力を
行う。処理ブロック２０３では。

音声出力の要求（キーボードあるいはポインティングデ
バイスから入力）があるか否か判定し、要求がある場合
は、処理ブロック２０６で音声出力を行う。処理ブロッ
ク２０４では１画面更新の要求があるか否かの判定を行
い、要求がある場合は。

処理ブロック２０１に戻り次の画面の合成処理に入る。

処理ブロック２０５はＭｙ刊足であり、終了指示がめっ
た場合は、全出力処ｊｌｌ？ｔ−Ｍ了する。

〔尭明の効果〕

本発明によれば、テキスト、図形１画像、音声などのマ
ルチメディアデータｋｍ−ｉｔ的に用いて対象物を奴現
できるので、工り高度なマンマシンインｊ’−７エース
を提供するという効果があるとともに、大量データとな
る自然画、音声を、それぞｎ適合した符号化方式を用い
て圧縮できるので。

蓄積費用を低減でさるという効果がある。

【図面の簡単な説明】

第１図は本発明の夾施例で用いる装置構成図。 第２図はマルチメディア統合出力の概念説明図、５ｇ３
図はメディア別の符号化方式の一例を示す図。 第４図はマルチメディアデータ表現形式の説明図。 第５図はマルチメディアデータ杭会出力処理の７０−チ
ャート、第６図は画面合成処理の７０−チ猶　Ｉ　Ｚ ノ　　処理宅艷慣　　　　　　４　　クハフク・う′コ
スフ・レイ　　　７　％’＞１項す５Ｌ２　主言乙・憔
１ｋ）、　　　　５　六−丁パ−ド　　　　　　　３　
人ビーカー３　　外９下自ｔｑｇ＊−１６イパ４ンティ
ンフ゛テ）でイ人　　９　　へ′人′！ｆＩ　２　口 ２！２４　店声ヂーク 第　３　固 第４　図 ｔ６ｆ） 晃　５　目 ２θ０ 〜２ρ乙　　々理フ・ｏ７７

Claims (1)

【特許請求の範囲】
1. １、マルチメディアデータを蓄積、出力するデータ表現
   方式において、該マルチメディアデータを、各データに
   対してメディア別に適切な符号化を施して得られる符号
   化データ部と、該符号化データ部の復号結果を出力画面
   上あるいは出力画面間に配置統合するための構成情報デ
   ータ部に分離して媒体内に表現することにより、マルチ
   メディアデータを統合出力することを特徴とするデータ
   表現方式。