JPH0916458A - マルチメディアデータ提示方法およびその装置 - Google Patents
マルチメディアデータ提示方法およびその装置Info
- Publication number
- JPH0916458A JPH0916458A JP7189891A JP18989195A JPH0916458A JP H0916458 A JPH0916458 A JP H0916458A JP 7189891 A JP7189891 A JP 7189891A JP 18989195 A JP18989195 A JP 18989195A JP H0916458 A JPH0916458 A JP H0916458A
- Authority
- JP
- Japan
- Prior art keywords
- story
- presentation
- execution
- media
- media data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 28
- 230000001360 synchronised effect Effects 0.000 claims abstract description 15
- 230000008569 process Effects 0.000 claims description 12
- 230000008859 change Effects 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 18
- 238000007726 management method Methods 0.000 description 6
- 230000002123 temporal effect Effects 0.000 description 5
- 238000007796 conventional method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 230000036962 time dependent Effects 0.000 description 1
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Digital Computer Display Output (AREA)
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Stored Programmes (AREA)
Abstract
(57)【要約】
【課題】 マルチメディアデータをオブジェクト指向言
語でオブジェクトとして記述することにより、メディア
データが持つ時間的な性質を明示的に表現し、提示スト
ーリーの変更が柔軟に行えるようにする。 【解決手段】 提示ストーリー生成手段１はメディアオ
ブジェクト，遅延オブジェクト，連続実行オブジェクト
および同期実行オブジェクトを使用することによりメデ
ィアデータの提示ストーリーを生成する。提示ストーリ
ー解析手段３は提示ストーリーを解析して、遅延オブジ
ェクトであれば指定した時間だけ空けることを指定し、
連続実行オブジェクトであればリストについて処理を再
帰的に呼び出して連続して実行することを指定し、同期
実行オブジェクトであれば集合について処理を再帰的に
呼び出して同期をとって実行することを指定し、メディ
アオブジェクトであればその実行を指定する。
語でオブジェクトとして記述することにより、メディア
データが持つ時間的な性質を明示的に表現し、提示スト
ーリーの変更が柔軟に行えるようにする。 【解決手段】 提示ストーリー生成手段１はメディアオ
ブジェクト，遅延オブジェクト，連続実行オブジェクト
および同期実行オブジェクトを使用することによりメデ
ィアデータの提示ストーリーを生成する。提示ストーリ
ー解析手段３は提示ストーリーを解析して、遅延オブジ
ェクトであれば指定した時間だけ空けることを指定し、
連続実行オブジェクトであればリストについて処理を再
帰的に呼び出して連続して実行することを指定し、同期
実行オブジェクトであれば集合について処理を再帰的に
呼び出して同期をとって実行することを指定し、メディ
アオブジェクトであればその実行を指定する。
Description
【０００１】
【発明の属する技術分野】本発明はマルチメディアデー
タ提示方法およびその装置に関し、特に動画，音声，イ
メージおよびテキストのメディアデータ（以下、これら
メディアデータを総称してマルチメディアデータとい
う）を提示するためのマルチメディアデータ提示方法お
よびその装置に関する。
タ提示方法およびその装置に関し、特に動画，音声，イ
メージおよびテキストのメディアデータ（以下、これら
メディアデータを総称してマルチメディアデータとい
う）を提示するためのマルチメディアデータ提示方法お
よびその装置に関する。
【０００２】
【従来の技術】マルチメディアデータ提示方法に関する
従来技術として、特開平５−２７４４１９号公報，特開
平２−１６２９８６号公報等が提案されている。これら
は、単一のメディアデータを提示したり、マルチメディ
アデータをハイパーリンク形式につないでおいて提示す
るといった従来の方式とは異なり、マルチメディアデー
タを時空間情報を考慮して提示することを可能にしたも
のである。しかし、これらで採用されている方法では、
マルチメディアデータをあるストーリーにそって連続ま
たは同期して表示・再生するのに必要なストーリーの生
成，およびそのストーリーに基づくメディアデータの実
行を考慮していなかった。
従来技術として、特開平５−２７４４１９号公報，特開
平２−１６２９８６号公報等が提案されている。これら
は、単一のメディアデータを提示したり、マルチメディ
アデータをハイパーリンク形式につないでおいて提示す
るといった従来の方式とは異なり、マルチメディアデー
タを時空間情報を考慮して提示することを可能にしたも
のである。しかし、これらで採用されている方法では、
マルチメディアデータをあるストーリーにそって連続ま
たは同期して表示・再生するのに必要なストーリーの生
成，およびそのストーリーに基づくメディアデータの実
行を考慮していなかった。
【０００３】一方、近年、それらを考慮したマルチメデ
ィアデータの提示方法として、提示ストーリーをペトリ
ネットを用いて定義する方法（Ｔ．Ｄ．Ｃ．Ｌｉｔｔｌ
ｅａｎｄ Ａ．Ｇｈａｆｏｏｒ，“Ｉｎｔｅｒｖａｌ−
Ｂａｓｅｄ Ｃｏｎｃｅｐｔｕａｌ Ｍｏｄｅｌｓ ｆ
ｏｒ Ｔｉｍｅ−Ｄｅｐｅｎｄｅｎｔ Ｍｕｌｔｉｍｅ
ｄｉａ Ｄａｔａ”，ＩＥＥＥ Ｔｒａｎｓａｃｔｉｏ
ｎｓ ｏｎ Ｋｎｏｗｌｅｇｅ ａｎｄ Ｄａｔａ Ｅ
ｎｇｉｎｅｅｒｉｎｇ，Ｖｏｌ．５，Ｎｏ．４，Ａｕｇ
ｕｓｔ １９９３．参照）や、オブジェクト指向言語の
スキーマ（クラス定義）として定義する方法（Ｋ．Ａｂ
ｅｒｅｒ ａｎｄ Ｗ．Ｋｌａｓ，“Ｓｕｐｐｏｒｔｉ
ｎｇ Ｔｅｍｐｏｒａｌ Ｍｕｌｔｉｍｅｄｉａ Ｏｐ
ｅｒａｔｉｏｎｓ ｉｎ Ｏｂｊｅｃｔ−Ｏｒｉｅｎｔ
ｅｄ Ｄａｔａｂａｓｅ Ｓｙｓｔｅｍｓ”，Ｐｒｏ
ｃ．ｏｆ Ｉｎｔ．Ｃｏｎｆ．ｏｎ Ｍｕｌｔｉｍｅｄ
ｉａ Ｃｏｍｐｕｔｉｎｇ ａｎｄ Ｓｙｓｅｔｍｓ，
１９９４．参照）などが提案されている。
ィアデータの提示方法として、提示ストーリーをペトリ
ネットを用いて定義する方法（Ｔ．Ｄ．Ｃ．Ｌｉｔｔｌ
ｅａｎｄ Ａ．Ｇｈａｆｏｏｒ，“Ｉｎｔｅｒｖａｌ−
Ｂａｓｅｄ Ｃｏｎｃｅｐｔｕａｌ Ｍｏｄｅｌｓ ｆ
ｏｒ Ｔｉｍｅ−Ｄｅｐｅｎｄｅｎｔ Ｍｕｌｔｉｍｅ
ｄｉａ Ｄａｔａ”，ＩＥＥＥ Ｔｒａｎｓａｃｔｉｏ
ｎｓ ｏｎ Ｋｎｏｗｌｅｇｅ ａｎｄ Ｄａｔａ Ｅ
ｎｇｉｎｅｅｒｉｎｇ，Ｖｏｌ．５，Ｎｏ．４，Ａｕｇ
ｕｓｔ １９９３．参照）や、オブジェクト指向言語の
スキーマ（クラス定義）として定義する方法（Ｋ．Ａｂ
ｅｒｅｒ ａｎｄ Ｗ．Ｋｌａｓ，“Ｓｕｐｐｏｒｔｉ
ｎｇ Ｔｅｍｐｏｒａｌ Ｍｕｌｔｉｍｅｄｉａ Ｏｐ
ｅｒａｔｉｏｎｓ ｉｎ Ｏｂｊｅｃｔ−Ｏｒｉｅｎｔ
ｅｄ Ｄａｔａｂａｓｅ Ｓｙｓｔｅｍｓ”，Ｐｒｏ
ｃ．ｏｆ Ｉｎｔ．Ｃｏｎｆ．ｏｎ Ｍｕｌｔｉｍｅｄ
ｉａ Ｃｏｍｐｕｔｉｎｇ ａｎｄ Ｓｙｓｅｔｍｓ，
１９９４．参照）などが提案されている。
【０００４】
【発明が解決しようとする課題】上述した従来のマルチ
メディアデータ提示方法では、提示ストーリーをペトリ
ネットを用いて定義する場合、ストーリーのみをペトリ
ネットで記述し他の表示の処理を行う部分等は別のプロ
グラム言語などで記述しなければならなかったので、モ
デルが統合されず、提示ストーリーだけが分離しその間
のミスマッチを埋める手段が必要になるという問題点が
あった。
メディアデータ提示方法では、提示ストーリーをペトリ
ネットを用いて定義する場合、ストーリーのみをペトリ
ネットで記述し他の表示の処理を行う部分等は別のプロ
グラム言語などで記述しなければならなかったので、モ
デルが統合されず、提示ストーリーだけが分離しその間
のミスマッチを埋める手段が必要になるという問題点が
あった。
【０００５】また、スキーマとして記述する場合は、メ
ディアデータの提示の順序などの変更がスキーマの変更
になってしまい柔軟性に欠けるという問題点があった。
また、提示に関する情報がいろいろなところに分散して
しまうので、全体としての見通しが悪く変更などがしづ
らいという問題点があった。さらに、メディアデータが
持つ時間の概念が提示ストーリーの記述に明確に反映さ
れないという問題点があった。
ディアデータの提示の順序などの変更がスキーマの変更
になってしまい柔軟性に欠けるという問題点があった。
また、提示に関する情報がいろいろなところに分散して
しまうので、全体としての見通しが悪く変更などがしづ
らいという問題点があった。さらに、メディアデータが
持つ時間の概念が提示ストーリーの記述に明確に反映さ
れないという問題点があった。
【０００６】本発明の目的は、上述の点に鑑み、マルチ
メディアデータをオブジェクト指向言語でオブジェクト
として記述することにより、拡張性を持ち、メディアデ
ータが持つ時間的な性質を明示的に表現し、提示ストー
リーの変更が柔軟に行えるマルチメディアデータ提示方
法を提供することにある。
メディアデータをオブジェクト指向言語でオブジェクト
として記述することにより、拡張性を持ち、メディアデ
ータが持つ時間的な性質を明示的に表現し、提示ストー
リーの変更が柔軟に行えるマルチメディアデータ提示方
法を提供することにある。
【０００７】また、本発明の他の目的は、マルチメディ
アデータをオブジェクト指向言語でオブジェクトとして
記述することにより、拡張性を持ち、メディアデータが
持つ時間的な性質を明示的に表現し、提示ストーリーの
変更が柔軟に行えるマルチメディアデータ提示装置を提
供することにある。
アデータをオブジェクト指向言語でオブジェクトとして
記述することにより、拡張性を持ち、メディアデータが
持つ時間的な性質を明示的に表現し、提示ストーリーの
変更が柔軟に行えるマルチメディアデータ提示装置を提
供することにある。
【０００８】
【課題を解決するための手段】本発明のマルチメディア
データ提示方法は、オブジェクト指向言語の所定の記述
により、動画，音声，イメージおよびテキストのメディ
アデータを表示・再生時間という性質を基にメディアオ
ブジェクトとして統一的に扱うとともに、提示の際に時
間を空けることを指定するための遅延オブジェクトと、
前記メディアオブジェクト，前記遅延オブジェクト，後
記同期実行オブジェクトまたは自分自身を要素として含
むリストを持ち要素を連続して実行することを指定する
ための連続実行オブジェクトと、前記メディアオブジェ
クト，前記遅延オブジェクト，前記連続実行オブジェク
トまたは自分自身を要素として含む集合を持ち要素を同
期して実行することを指定するための同時実行オブジェ
クトを使用することにより、メディアデータの提示スト
ーリーを生成する提示ストーリー生成工程と、前記提示
ストーリーを解析して、前記遅延オブジェクトであれば
指定した時間だけ時間を空けることを指定し、前記連続
実行オブジェクトであればリストについて処理を再帰的
に呼び出して連続して実行することを指定し、前記同期
実行オブジェクトであれば集合について処理を再帰的に
呼び出して同期をとって実行することを指定し、メディ
アデータのオブジェクトであればそのオブジェクトの実
行を指定し、以上の指定に基づいてスケジューリングを
行い、メディアデータを実行する提示ストーリー解析・
実行工程とを含む。
データ提示方法は、オブジェクト指向言語の所定の記述
により、動画，音声，イメージおよびテキストのメディ
アデータを表示・再生時間という性質を基にメディアオ
ブジェクトとして統一的に扱うとともに、提示の際に時
間を空けることを指定するための遅延オブジェクトと、
前記メディアオブジェクト，前記遅延オブジェクト，後
記同期実行オブジェクトまたは自分自身を要素として含
むリストを持ち要素を連続して実行することを指定する
ための連続実行オブジェクトと、前記メディアオブジェ
クト，前記遅延オブジェクト，前記連続実行オブジェク
トまたは自分自身を要素として含む集合を持ち要素を同
期して実行することを指定するための同時実行オブジェ
クトを使用することにより、メディアデータの提示スト
ーリーを生成する提示ストーリー生成工程と、前記提示
ストーリーを解析して、前記遅延オブジェクトであれば
指定した時間だけ時間を空けることを指定し、前記連続
実行オブジェクトであればリストについて処理を再帰的
に呼び出して連続して実行することを指定し、前記同期
実行オブジェクトであれば集合について処理を再帰的に
呼び出して同期をとって実行することを指定し、メディ
アデータのオブジェクトであればそのオブジェクトの実
行を指定し、以上の指定に基づいてスケジューリングを
行い、メディアデータを実行する提示ストーリー解析・
実行工程とを含む。
【０００９】本発明のマルチメディアデータ提示装置
は、オブジェクト指向言語の所定の記述により、動画，
音声，イメージおよびテキストのメディアデータを表示
・再生時間という性質を基にメディアオブジェクトとし
て統一的に扱うとともに、提示の際に時間を空けること
を指定するための遅延オブジェクトと、前記メディアオ
ブジェクト，前記遅延オブジェクト，後記同期実行オブ
ジェクトまたは自分自身を要素として含むリストを持ち
要素を連続して実行することを指定するための連続実行
オブジェクトと、前記メディアオブジェクト，前記遅延
オブジェクト，前記連続実行オブジェクトまたは自分自
身を要素として含む集合を持ち要素を同期して実行する
ことを指定するための同時実行オブジェクトを使用する
ことにより、メディアデータの提示ストーリーを生成す
る提示ストーリー生成手段と、前記提示ストーリーを解
析して、前記遅延オブジェクトであれば指定した時間だ
け時間を空けることを指定し、前記連続実行オブジェク
トであればリストについて処理を再帰的に呼び出して連
続して実行することを指定し、前記同期実行オブジェク
トであれば集合について処理を再帰的に呼び出して同期
をとって実行することを指定し、メディアデータのオブ
ジェクトであればそのオブジェクトの実行を指定し、以
上の指定に基づいてスケジューリングを行い、メディア
データを実行する提示ストーリー解析・実行手段とを含
む。
は、オブジェクト指向言語の所定の記述により、動画，
音声，イメージおよびテキストのメディアデータを表示
・再生時間という性質を基にメディアオブジェクトとし
て統一的に扱うとともに、提示の際に時間を空けること
を指定するための遅延オブジェクトと、前記メディアオ
ブジェクト，前記遅延オブジェクト，後記同期実行オブ
ジェクトまたは自分自身を要素として含むリストを持ち
要素を連続して実行することを指定するための連続実行
オブジェクトと、前記メディアオブジェクト，前記遅延
オブジェクト，前記連続実行オブジェクトまたは自分自
身を要素として含む集合を持ち要素を同期して実行する
ことを指定するための同時実行オブジェクトを使用する
ことにより、メディアデータの提示ストーリーを生成す
る提示ストーリー生成手段と、前記提示ストーリーを解
析して、前記遅延オブジェクトであれば指定した時間だ
け時間を空けることを指定し、前記連続実行オブジェク
トであればリストについて処理を再帰的に呼び出して連
続して実行することを指定し、前記同期実行オブジェク
トであれば集合について処理を再帰的に呼び出して同期
をとって実行することを指定し、メディアデータのオブ
ジェクトであればそのオブジェクトの実行を指定し、以
上の指定に基づいてスケジューリングを行い、メディア
データを実行する提示ストーリー解析・実行手段とを含
む。
【００１０】
【発明の実施の形態】次に、本発明について図面を参照
して詳細に説明する。
して詳細に説明する。
【００１１】図１は、本発明のマルチメディアデータ提
示方法が適用された第１実施例に係るマルチメディアデ
ータ提示装置の構成を示すブロック図である。本実施例
のマルチメディアデータ提示装置は、提示ストーリーを
生成する提示ストーリー生成手段１と、提示ストーリー
を一時的に格納するデータバッファ２と、メインルーチ
ン３１および解析ルーチン３２からなり提示ストーリー
を解析する提示ストーリー解析手段３と、解析結果のオ
ブジェクトをスケジューリングするスケジューリング手
段４と、オブジェクトの動作を管理するスレッド管理手
段５と、メディアデータを実行するメディアデータ実行
手段６とから構成されている。
示方法が適用された第１実施例に係るマルチメディアデ
ータ提示装置の構成を示すブロック図である。本実施例
のマルチメディアデータ提示装置は、提示ストーリーを
生成する提示ストーリー生成手段１と、提示ストーリー
を一時的に格納するデータバッファ２と、メインルーチ
ン３１および解析ルーチン３２からなり提示ストーリー
を解析する提示ストーリー解析手段３と、解析結果のオ
ブジェクトをスケジューリングするスケジューリング手
段４と、オブジェクトの動作を管理するスレッド管理手
段５と、メディアデータを実行するメディアデータ実行
手段６とから構成されている。
【００１２】図２は、本実施例のマルチメディアデータ
提示装置がデータ構造として持つオブジェクトに対応す
るクラスの構造・関連図である。本実施例のマルチメデ
ィアデータ提示装置では、データ構造として存在するオ
ブジェクト指向言語の所定の記述により表現されるオブ
ジェクトを使用する。
提示装置がデータ構造として持つオブジェクトに対応す
るクラスの構造・関連図である。本実施例のマルチメデ
ィアデータ提示装置では、データ構造として存在するオ
ブジェクト指向言語の所定の記述により表現されるオブ
ジェクトを使用する。
【００１３】Ｉｎｔｅｒｖａｌ（期間）オブジェクト１
００は、属性として時間を持ち、期間を表す。この属性
は派生クラスに継承され、派生クラスでは表示・再生が
持続する時間を表す。図６は、オブジェクトの具体的な
記述例を示す図である。
００は、属性として時間を持ち、期間を表す。この属性
は派生クラスに継承され、派生クラスでは表示・再生が
持続する時間を表す。図６は、オブジェクトの具体的な
記述例を示す図である。
【００１４】Ｍｅｄｉａオブジェクト１０４は、メディ
アデータの共通の性質として、そのメディアデータの内
容を示す名前，メディアデータが入っているファイルの
名前，メディアデータのファイル形式を共通の情報とし
て持つ。ファイル形式とは、例えば、動画の場合のＡＶ
Ｉ（Ａｕｄｉｏ Ｖｉｄｅｏ Ｉｎｔｅｒｌｅａｖｅ；
Ｍｉｃｒｏｓｏｆｔ社のオペレーティングシステムであ
るＭｉｃｒｏｓｏｆｔＷｉｎｄｏｗｓ上の動画像表示機
構Ｖｉｄｅｏ ｆｏｒ Ｗｉｎｄｏｗｓで利用されてい
る、動画データと音声データとをファイルに交互配置し
て保存する形式），ＷＡＶＥ（Ｍｉｃｒｏｓｏｆｔ Ｗ
ｉｎｄｏｗｓで用いられる音声データを保存するための
形式），ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅ
ｘｐｅｒｔｓ Ｇｒｏｕｐ；動画データを圧縮して保存
する形式）などの記録形式のことを指している。オブジ
ェクト指向言語の継承機能によりＩｎｔｅｒｖａｌオブ
ジェクト１００の性質とＭｅｄｉａオブジェクト１０４
の性質とを継承するオブジェクトとして、Ｖｉｄｅｏ
（動画）オブジェクト１０５，Ａｕｄｉｏ（音声）オブ
ジェクト１０６，Ｉｍａｇｅ（静止画）オブジェクト１
０７およびＴｅｘｔ（テキスト）オブジェクト１０８が
存在する。
アデータの共通の性質として、そのメディアデータの内
容を示す名前，メディアデータが入っているファイルの
名前，メディアデータのファイル形式を共通の情報とし
て持つ。ファイル形式とは、例えば、動画の場合のＡＶ
Ｉ（Ａｕｄｉｏ Ｖｉｄｅｏ Ｉｎｔｅｒｌｅａｖｅ；
Ｍｉｃｒｏｓｏｆｔ社のオペレーティングシステムであ
るＭｉｃｒｏｓｏｆｔＷｉｎｄｏｗｓ上の動画像表示機
構Ｖｉｄｅｏ ｆｏｒ Ｗｉｎｄｏｗｓで利用されてい
る、動画データと音声データとをファイルに交互配置し
て保存する形式），ＷＡＶＥ（Ｍｉｃｒｏｓｏｆｔ Ｗ
ｉｎｄｏｗｓで用いられる音声データを保存するための
形式），ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅ
ｘｐｅｒｔｓ Ｇｒｏｕｐ；動画データを圧縮して保存
する形式）などの記録形式のことを指している。オブジ
ェクト指向言語の継承機能によりＩｎｔｅｒｖａｌオブ
ジェクト１００の性質とＭｅｄｉａオブジェクト１０４
の性質とを継承するオブジェクトとして、Ｖｉｄｅｏ
（動画）オブジェクト１０５，Ａｕｄｉｏ（音声）オブ
ジェクト１０６，Ｉｍａｇｅ（静止画）オブジェクト１
０７およびＴｅｘｔ（テキスト）オブジェクト１０８が
存在する。
【００１５】また、Ｉｎｔｅｒｖａｌオブジェクト１０
０の性質を継承し、連続して実行するＩｎｔｅｒｖａｌ
オブジェクト１００のリストを持つＳｅｑ（連続実行）
オブジェクト１０１と、同期をとって実行するＩｎｔｅ
ｒｖａｌオブジェクト１００の集合を持つＳｙｎｃ（同
期実行）オブジェクト１０２と、時間的な遅延を表すＤ
ｅｌａｙオブジェクト（遅延）１０３とが存在する。
０の性質を継承し、連続して実行するＩｎｔｅｒｖａｌ
オブジェクト１００のリストを持つＳｅｑ（連続実行）
オブジェクト１０１と、同期をとって実行するＩｎｔｅ
ｒｖａｌオブジェクト１００の集合を持つＳｙｎｃ（同
期実行）オブジェクト１０２と、時間的な遅延を表すＤ
ｅｌａｙオブジェクト（遅延）１０３とが存在する。
【００１６】図３は、Ｓｅｑオブジェクト１０１のより
詳細な構造を示す図である。Ｓｅｑオブジェクト１０１
は、Ｉｎｔｅｒｖａｌオブジェクト１００の順序列を示
すリスト２００を持つ。このリスト２００の要素となる
Ｉｎｔｅｒｖａｌオブジェクト１００は、実際は、Ｓｅ
ｑオブジェクト１０１，Ｓｙｎｃオブジェクト１０２，
Ｄｅｌａｙオブジェクト１０３，Ｖｉｄｅｏオブジェク
ト１０５，Ａｕｄｉｏオブジェクト１０６，Ｉｍａｇｅ
オブジェクト１０７，またはＴｅｘｔオブジェクト１０
８のいずれかであり、これらは連続して実行される。
詳細な構造を示す図である。Ｓｅｑオブジェクト１０１
は、Ｉｎｔｅｒｖａｌオブジェクト１００の順序列を示
すリスト２００を持つ。このリスト２００の要素となる
Ｉｎｔｅｒｖａｌオブジェクト１００は、実際は、Ｓｅ
ｑオブジェクト１０１，Ｓｙｎｃオブジェクト１０２，
Ｄｅｌａｙオブジェクト１０３，Ｖｉｄｅｏオブジェク
ト１０５，Ａｕｄｉｏオブジェクト１０６，Ｉｍａｇｅ
オブジェクト１０７，またはＴｅｘｔオブジェクト１０
８のいずれかであり、これらは連続して実行される。
【００１７】図４は、Ｓｙｎｃオブジェクト１０２のよ
り詳細な構造を示す図である。Ｓｙｎｃオブジェクト１
０２は、Ｉｎｔｅｒｖａｌオブジェクト１００の集合２
０１を持つ。この集合２０１の要素となるＩｎｔｅｒｖ
ａｌオブジェクト１００は、実際は、Ｓｅｑオブジェク
ト１０１，Ｓｙｎｃオブジェクト１０２，Ｄｅｌａｙオ
ブジェクト１０３，Ｖｉｄｅｏオブジェクト１０５，Ａ
ｕｄｉｏオブジェクト１０６，Ｉｍａｇｅオブジェクト
１０７，またはＴｅｘｔオブジェクト１０８のいずれか
であり、これらは同期して実行される。
り詳細な構造を示す図である。Ｓｙｎｃオブジェクト１
０２は、Ｉｎｔｅｒｖａｌオブジェクト１００の集合２
０１を持つ。この集合２０１の要素となるＩｎｔｅｒｖ
ａｌオブジェクト１００は、実際は、Ｓｅｑオブジェク
ト１０１，Ｓｙｎｃオブジェクト１０２，Ｄｅｌａｙオ
ブジェクト１０３，Ｖｉｄｅｏオブジェクト１０５，Ａ
ｕｄｉｏオブジェクト１０６，Ｉｍａｇｅオブジェクト
１０７，またはＴｅｘｔオブジェクト１０８のいずれか
であり、これらは同期して実行される。
【００１８】図５は、Ｐｒｅｓｅｎｔａｔｉｏｎオブジ
ェクト２０２の構造を示す図である。Ｐｒｅｓｅｎｔａ
ｔｉｏｎオブジェクト２０２は、Ｉｎｔｅｒｖａｌオブ
ジェクト１００へのポインタを持ち、メディアデータの
提示ストーリーを表す。
ェクト２０２の構造を示す図である。Ｐｒｅｓｅｎｔａ
ｔｉｏｎオブジェクト２０２は、Ｉｎｔｅｒｖａｌオブ
ジェクト１００へのポインタを持ち、メディアデータの
提示ストーリーを表す。
【００１９】図７（ａ）を参照すると、メインルーチン
３１の処理は、Ｐｒｅｓｅｎｔａｔｉｏｎオブジェクト
入力ステップ４００と、Ｉｎｔｅｒｖａｌオブジェクト
引渡しステップ４０１と、スケジューリングステップ４
０２と、メディアデータ表示・再生ステップ４０３とか
らなる。
３１の処理は、Ｐｒｅｓｅｎｔａｔｉｏｎオブジェクト
入力ステップ４００と、Ｉｎｔｅｒｖａｌオブジェクト
引渡しステップ４０１と、スケジューリングステップ４
０２と、メディアデータ表示・再生ステップ４０３とか
らなる。
【００２０】図７（ｂ）を参照すると、解析ルーチン３
２の処理は、Ｉｎｔｅｒｖａｌオブジェクト入力ステッ
プ３００と、Ｓｅｑオブジェクト判定ステップ３０１
と、連続実行指定ステップ３０２と、Ｓｙｎｃオブジェ
クト判定ステップ３０３と、同期実行指定ステップ３０
４と、Ｄｅｌａｙオブジェクト判定ステップ３０５と、
時間空け指定ステップ３０６と、Ｍｅｄｉａオブジェク
ト実行指定ステップ３０７とからなる。
２の処理は、Ｉｎｔｅｒｖａｌオブジェクト入力ステッ
プ３００と、Ｓｅｑオブジェクト判定ステップ３０１
と、連続実行指定ステップ３０２と、Ｓｙｎｃオブジェ
クト判定ステップ３０３と、同期実行指定ステップ３０
４と、Ｄｅｌａｙオブジェクト判定ステップ３０５と、
時間空け指定ステップ３０６と、Ｍｅｄｉａオブジェク
ト実行指定ステップ３０７とからなる。
【００２１】次に、このように構成された本実施例のマ
ルチメディアデータ提示装置の動作について、マルチメ
ディアデータ提示方法とともに説明する。
ルチメディアデータ提示装置の動作について、マルチメ
ディアデータ提示方法とともに説明する。
【００２２】利用者は、提示ストーリー生成手段１を用
いて、メディアデータの提示ストーリーを入力する。提
示ストーリーの生成は、ストーリーをオブジェクト指向
言語でオブジェクトを用いて記述して指定する。利用者
は提示したいメディアデータの種類に応じて、Ｖｉｄｅ
ｏオブジェクト１０５，Ａｕｄｉｏオブジェクト１０
６，Ｉｍａｇｅオブジェクト１０７およびＴｅｘｔオブ
ジェクト１０８を使用する。同期などのために時間を空
けたい場合には、Ｄｅｌａｙオブジェクト１０３を使用
する。また、メディアデータを連続して実行することを
指定するために、Ｓｅｑオブジェクト１０１が、メディ
アデータを同期して実行することを指定するためにＳｙ
ｎｃオブジェクト１０２を使用する。
いて、メディアデータの提示ストーリーを入力する。提
示ストーリーの生成は、ストーリーをオブジェクト指向
言語でオブジェクトを用いて記述して指定する。利用者
は提示したいメディアデータの種類に応じて、Ｖｉｄｅ
ｏオブジェクト１０５，Ａｕｄｉｏオブジェクト１０
６，Ｉｍａｇｅオブジェクト１０７およびＴｅｘｔオブ
ジェクト１０８を使用する。同期などのために時間を空
けたい場合には、Ｄｅｌａｙオブジェクト１０３を使用
する。また、メディアデータを連続して実行することを
指定するために、Ｓｅｑオブジェクト１０１が、メディ
アデータを同期して実行することを指定するためにＳｙ
ｎｃオブジェクト１０２を使用する。
【００２３】利用者は、自分の望む提示のストーリー
を、Ｖｉｄｅｏオブジェクト１０５，Ａｕｄｉｏオブジ
ェクト１０６，Ｉｍａｇｅオブジェクト１０７，Ｔｅｘ
ｔオブジェクト１０８，Ｄｅｌａｙオブジェクト１０
３，Ｓｅｑオブジェクト１０１およびＳｙｎｃオブジェ
クト１０２を組み合わせて指定する。
を、Ｖｉｄｅｏオブジェクト１０５，Ａｕｄｉｏオブジ
ェクト１０６，Ｉｍａｇｅオブジェクト１０７，Ｔｅｘ
ｔオブジェクト１０８，Ｄｅｌａｙオブジェクト１０
３，Ｓｅｑオブジェクト１０１およびＳｙｎｃオブジェ
クト１０２を組み合わせて指定する。
【００２４】例えば、図８（ａ）に示すようなストーリ
ーで提示を行う場合、図８（ｂ）に示すように組み合わ
せる。実際の記述例を、図９に示す。ここで、ＡＶＩお
よびＷＡＶは、列挙型（ｅｎｕｍ）で定義されており、
それぞれ、ＡＶＩ形式およびＷＡＶＥ形式を示してい
る。まず、再生時間が１８０秒でＡＶＩ形式であり、フ
ァイル名がｅｘｐｌｔｎ．ａｖｉである「製品の概要説
明」に関するＶｉｄｅｏオブジェクトｖｉｄｅｏ１を生
成する。さらに、再生時間が２５０秒でＡＶＩ形式であ
りファイル名がＡ．ａｖｉである「製品Ａの説明」に関
するＶｉｄｅｏオブジェクトｖｉｄｅｏ２、および再生
時間が３４０秒でＡＶＩ形式であり、ファイル名がＢ．
ａｖｉである「製品Ｂの説明」に関するＶｉｄｅｏオブ
ジェクトｖｉｄｅｏ３を生成する。また、再生時間が１
５０秒でＷＡＶＥ形式であり、ファイル名がＡ．ｗａｖ
である「ＢＧＭ（ＢａｃｋＧｒｏｕｎｄ Ｍｕｓｉ
ｃ）」のＡｕｄｉｏオブジェクトａｕｄｉｏを生成す
る。さらに、１００秒の間を空けることを指定するＤｅ
ｌａｙオブジェクトｄｅｌａｙを生成する。
ーで提示を行う場合、図８（ｂ）に示すように組み合わ
せる。実際の記述例を、図９に示す。ここで、ＡＶＩお
よびＷＡＶは、列挙型（ｅｎｕｍ）で定義されており、
それぞれ、ＡＶＩ形式およびＷＡＶＥ形式を示してい
る。まず、再生時間が１８０秒でＡＶＩ形式であり、フ
ァイル名がｅｘｐｌｔｎ．ａｖｉである「製品の概要説
明」に関するＶｉｄｅｏオブジェクトｖｉｄｅｏ１を生
成する。さらに、再生時間が２５０秒でＡＶＩ形式であ
りファイル名がＡ．ａｖｉである「製品Ａの説明」に関
するＶｉｄｅｏオブジェクトｖｉｄｅｏ２、および再生
時間が３４０秒でＡＶＩ形式であり、ファイル名がＢ．
ａｖｉである「製品Ｂの説明」に関するＶｉｄｅｏオブ
ジェクトｖｉｄｅｏ３を生成する。また、再生時間が１
５０秒でＷＡＶＥ形式であり、ファイル名がＡ．ｗａｖ
である「ＢＧＭ（ＢａｃｋＧｒｏｕｎｄ Ｍｕｓｉ
ｃ）」のＡｕｄｉｏオブジェクトａｕｄｉｏを生成す
る。さらに、１００秒の間を空けることを指定するＤｅ
ｌａｙオブジェクトｄｅｌａｙを生成する。
【００２５】次に、Ｓｅｑオブジェクトｓｅｑ１のｉｎ
ｔｅｒｖａｌＬに、Ａｕｄｉｏオブジェクトａｕｄｉｏ
とＤｅｌａｙオブジェクトｄｅｌａｙとを代入すること
により、ａｕｄｉｏを再生してからその後に時間を空け
ることを指定する。また、Ｓｙｎｃオブジェクトｓｙｎ
ｃ１のｉｎｔｅｒｖａｌＳに、Ｖｉｄｅｏオブジェクト
ｖｉｄｅｏ２とＳｅｑオブジェクトｓｅｑ１とを代入す
ることにより、２つのオブジェクトを同期再生すること
を指定する。さらに、Ｓｅｑオブジェクトｓｅｑ２のｉ
ｎｔｅｒｖａｌＬに、Ｖｉｄｅｏオブジェクトｖｉｄｅ
ｏ１，ＳｙｎｃオブジェクトｓｙｎｃおよびＶｉｄｅｏ
オブジェクトｖｉｄｅｏ３を代入することにより、これ
らを連続再生することを指定する。これを、Ｐｒｅｓｅ
ｎｔａｔｉｏｎオブジェクトｐｒｅｓｔｎのｓｔｏｒｙ
に代入する。以上により、提示ストーリーを生成する。
ｔｅｒｖａｌＬに、Ａｕｄｉｏオブジェクトａｕｄｉｏ
とＤｅｌａｙオブジェクトｄｅｌａｙとを代入すること
により、ａｕｄｉｏを再生してからその後に時間を空け
ることを指定する。また、Ｓｙｎｃオブジェクトｓｙｎ
ｃ１のｉｎｔｅｒｖａｌＳに、Ｖｉｄｅｏオブジェクト
ｖｉｄｅｏ２とＳｅｑオブジェクトｓｅｑ１とを代入す
ることにより、２つのオブジェクトを同期再生すること
を指定する。さらに、Ｓｅｑオブジェクトｓｅｑ２のｉ
ｎｔｅｒｖａｌＬに、Ｖｉｄｅｏオブジェクトｖｉｄｅ
ｏ１，ＳｙｎｃオブジェクトｓｙｎｃおよびＶｉｄｅｏ
オブジェクトｖｉｄｅｏ３を代入することにより、これ
らを連続再生することを指定する。これを、Ｐｒｅｓｅ
ｎｔａｔｉｏｎオブジェクトｐｒｅｓｔｎのｓｔｏｒｙ
に代入する。以上により、提示ストーリーを生成する。
【００２６】提示の実行は、提示ストーリー解析手段
３，スケジューリング手段４，スレッド管理手段５およ
びメディアデータ実行手段６で行う。
３，スケジューリング手段４，スレッド管理手段５およ
びメディアデータ実行手段６で行う。
【００２７】提示ストーリー解析手段３が起動される
と、メインルーチン３２では、データバッファ２から入
力としてＰｒｅｓｅｎｔａｔｉｏｎオブジェクト２０２
を受け取り（ステップ４００）、それがポインタで指し
ているＩｎｔｅｒｖａｌオブジェクト１００を解析ルー
チン３２に渡す（ステップ４０１）。
と、メインルーチン３２では、データバッファ２から入
力としてＰｒｅｓｅｎｔａｔｉｏｎオブジェクト２０２
を受け取り（ステップ４００）、それがポインタで指し
ているＩｎｔｅｒｖａｌオブジェクト１００を解析ルー
チン３２に渡す（ステップ４０１）。
【００２８】解析ルーチン３２では、Ｉｎｔｅｒｖａｌ
オブジェクト１００を受け取り（ステップ３００）、そ
れがＳｅｑオブジェクト１０１であるかどうかを調べ
（ステップＳ３０１）、Ｓｅｑオブジェクト１０１の場
合には、それが持つリスト２００の要素であるＩｎｔｅ
ｒｖａｌオブジェクト１００について、解析ルーチン３
２を再帰的に呼び出す。このとき、Ｓｅｑオブジェクト
１０１が持つすべてのＩｎｔｅｒｖａｌオブジェクト１
００の実行を連続して行うことをスケジューリング手段
４に指定する（ステップ３０２）。
オブジェクト１００を受け取り（ステップ３００）、そ
れがＳｅｑオブジェクト１０１であるかどうかを調べ
（ステップＳ３０１）、Ｓｅｑオブジェクト１０１の場
合には、それが持つリスト２００の要素であるＩｎｔｅ
ｒｖａｌオブジェクト１００について、解析ルーチン３
２を再帰的に呼び出す。このとき、Ｓｅｑオブジェクト
１０１が持つすべてのＩｎｔｅｒｖａｌオブジェクト１
００の実行を連続して行うことをスケジューリング手段
４に指定する（ステップ３０２）。
【００２９】ステップ３０１でノーの場合、Ｓｙｎｃオ
ブジェクト１０２であるかどうかを調べ（ステップ３０
３）、Ｓｙｎｃオブジェクト１０２の場合にはそれが持
つ集合２０１の要素であるＩｎｔｅｒｖａｌオブジェク
ト１００について、解析ルーチン３２を再帰的に呼び出
す。このとき、Ｓｙｎｃオブジェクト１０２が持つすべ
てのＩｎｔｅｒｖａｌオブジェクト１００の実行を同期
して行うことをスケジューリング手段４に指定する（ス
テップ３０４）。
ブジェクト１０２であるかどうかを調べ（ステップ３０
３）、Ｓｙｎｃオブジェクト１０２の場合にはそれが持
つ集合２０１の要素であるＩｎｔｅｒｖａｌオブジェク
ト１００について、解析ルーチン３２を再帰的に呼び出
す。このとき、Ｓｙｎｃオブジェクト１０２が持つすべ
てのＩｎｔｅｒｖａｌオブジェクト１００の実行を同期
して行うことをスケジューリング手段４に指定する（ス
テップ３０４）。
【００３０】ステップ３０３でノーの場合、Ｄｅｌａｙ
オブジェクト１０３であるかどうかを調べ（ステップ３
０５）、Ｄｅｌａｙオブジェクト１０３の場合は指定し
た時間だけ時間を空けることをスケジューリング手段４
に指定する（ステップ３０６）。
オブジェクト１０３であるかどうかを調べ（ステップ３
０５）、Ｄｅｌａｙオブジェクト１０３の場合は指定し
た時間だけ時間を空けることをスケジューリング手段４
に指定する（ステップ３０６）。
【００３１】ステップ３０５でノーの場合、Ｍｅｄｉａ
オブジェクト１０４であるので、対応するメディアデー
タを実行することをスケジューリング手段４に指定する
（ステップ３０７）。解析ルーチン３２のすべての再帰
呼出しが終了すると、メインルーチン３１に戻る。
オブジェクト１０４であるので、対応するメディアデー
タを実行することをスケジューリング手段４に指定する
（ステップ３０７）。解析ルーチン３２のすべての再帰
呼出しが終了すると、メインルーチン３１に戻る。
【００３２】図９に示した記述例を解析した場合には、
まず、「製品の概要説明」の動画を１８０秒流し、その
後に、「製品Ａの説明」の動画を２５０秒間、最初の１
５０秒についてＢＧＭを同期させて流し、その後に、
「製品Ａの説明」の動画を３４０秒流すことを指定する
ことになる。
まず、「製品の概要説明」の動画を１８０秒流し、その
後に、「製品Ａの説明」の動画を２５０秒間、最初の１
５０秒についてＢＧＭを同期させて流し、その後に、
「製品Ａの説明」の動画を３４０秒流すことを指定する
ことになる。
【００３３】メインルーチン３１では、解析ルーチン３
２で得た情報に基づきスケジューリング手段４でスケジ
ューリングを行う（ステップ４０２）。スケジューリン
グ手段４は、スレッド管理手段５を呼び出し、連続再生
の場合は、個々のメディアデータに対して順番にスレッ
ドを割り当て、そこでメディアデータ実行手段６を呼び
出し、再生・表示を行い、同期再生の場合には、スレッ
ドを並行に割り当て、個々のスレッドからメディアデー
タ実行手段６を呼び出し、再生・表示を行う（ステップ
Ｓ４０３）。
２で得た情報に基づきスケジューリング手段４でスケジ
ューリングを行う（ステップ４０２）。スケジューリン
グ手段４は、スレッド管理手段５を呼び出し、連続再生
の場合は、個々のメディアデータに対して順番にスレッ
ドを割り当て、そこでメディアデータ実行手段６を呼び
出し、再生・表示を行い、同期再生の場合には、スレッ
ドを並行に割り当て、個々のスレッドからメディアデー
タ実行手段６を呼び出し、再生・表示を行う（ステップ
Ｓ４０３）。
【００３４】ところで、Ｖｉｄｅｏオブジェクト１０
５，Ａｕｄｉｏオブジェクト１０６，Ｉｍａｇｅオブジ
ェクト１０７およびＴｅｘｔオブジェクト１０８は、オ
ブジェクト指向言語で記述され、メディアデータとその
メディアデータの内容が何についてのものであるかを示
す情報（例えば、Ｖｉｄｅｏオブジェクト１０５の場
合、映っている物体の名前等）を永続化する必要がある
ことなどから、格納手段（例えば、オブジェクト指向デ
ータベース）に格納しておき、そこから検索して提示ス
トーリー生成手段１で用いる形にすると効率がよい。
５，Ａｕｄｉｏオブジェクト１０６，Ｉｍａｇｅオブジ
ェクト１０７およびＴｅｘｔオブジェクト１０８は、オ
ブジェクト指向言語で記述され、メディアデータとその
メディアデータの内容が何についてのものであるかを示
す情報（例えば、Ｖｉｄｅｏオブジェクト１０５の場
合、映っている物体の名前等）を永続化する必要がある
ことなどから、格納手段（例えば、オブジェクト指向デ
ータベース）に格納しておき、そこから検索して提示ス
トーリー生成手段１で用いる形にすると効率がよい。
【００３５】図１０は、本発明の第２実施例に係るマル
チメディアデータ提示装置の構成を示すブロック図であ
る。本実施例のマルチメディアデータ提示装置は、図１
に示した第１実施例のマルチメディアデータ提示装置に
おけるデータバッファ２を、データベース管理システム
７およびデータベース８と置き換えるようにしたもので
ある。なお、その他の手段等は図１に示した第１実施例
のマルチメディアデータ提示装置と同様なので、対応す
る手段等には同一符号を付してそれらの詳しい説明は割
愛する。
チメディアデータ提示装置の構成を示すブロック図であ
る。本実施例のマルチメディアデータ提示装置は、図１
に示した第１実施例のマルチメディアデータ提示装置に
おけるデータバッファ２を、データベース管理システム
７およびデータベース８と置き換えるようにしたもので
ある。なお、その他の手段等は図１に示した第１実施例
のマルチメディアデータ提示装置と同様なので、対応す
る手段等には同一符号を付してそれらの詳しい説明は割
愛する。
【００３６】このように構成された第２実施例のマルチ
メディアデータ提示装置では、利用者は、提示ストーリ
ー生成手段１を用いて、メディアデータの提示ストーリ
ーを入力する。生成された提示ストーリーは、データベ
ース管理システム７によりデータベース８に格納され、
永続性を持つ。これにより、提示ストーリーを再利用す
ることができる。
メディアデータ提示装置では、利用者は、提示ストーリ
ー生成手段１を用いて、メディアデータの提示ストーリ
ーを入力する。生成された提示ストーリーは、データベ
ース管理システム７によりデータベース８に格納され、
永続性を持つ。これにより、提示ストーリーを再利用す
ることができる。
【００３７】図１１は、本発明の第３実施例に係るマル
チメディアデータ提示装置の構成を示すブロック図であ
る。本実施例のマルチメディアデータ提示装置は、図１
に示した第１実施例のマルチメディアデータ提示装置に
対して、ストーリーをグラフィカルに入力できるグラフ
ィカルユーザインタフェースによる提示ストーリー入力
手段９を付加するようにしたものである。なお、その他
の手段等は図１に示した第１実施例のマルチメディアデ
ータ提示装置と同様なので、対応する手段等には同一符
号を付してそれらの詳しい説明は割愛する。
チメディアデータ提示装置の構成を示すブロック図であ
る。本実施例のマルチメディアデータ提示装置は、図１
に示した第１実施例のマルチメディアデータ提示装置に
対して、ストーリーをグラフィカルに入力できるグラフ
ィカルユーザインタフェースによる提示ストーリー入力
手段９を付加するようにしたものである。なお、その他
の手段等は図１に示した第１実施例のマルチメディアデ
ータ提示装置と同様なので、対応する手段等には同一符
号を付してそれらの詳しい説明は割愛する。
【００３８】このように構成された第３実施例のマルチ
メディアデータ提示装置では、利用者は、提示ストーリ
ー入力手段９を用いて、図８（ａ）に示すようなタイム
ラインチャートに基づいてグラフィカルユーザインタフ
ェースにより提示ストーリーをグラフィカルに入力でき
る。提示ストーリー入力手段９は、利用者からの入力を
受けて、その情報を提示ストーリー生成手段１に送り、
そこで提示ストーリーの生成を行う。
メディアデータ提示装置では、利用者は、提示ストーリ
ー入力手段９を用いて、図８（ａ）に示すようなタイム
ラインチャートに基づいてグラフィカルユーザインタフ
ェースにより提示ストーリーをグラフィカルに入力でき
る。提示ストーリー入力手段９は、利用者からの入力を
受けて、その情報を提示ストーリー生成手段１に送り、
そこで提示ストーリーの生成を行う。
【００３９】
【発明の効果】以上説明したように本発明のマルチメデ
ィアデータ提示方法によれば、メディアデータをオブジ
ェクト指向言語でオブジェクトとして統一的に扱うとと
もに、遅延オブジェクト，連続実行オブジェクトおよび
同期実行オブジェクトを用いることにより、メディアデ
ータが持つ時間的な性質を明示的に表現することができ
るとともに、これらオブジェクトを組み合わせて簡単に
ストーリーを提示することが可能になり、提示ストーリ
ーの変更をオブジェクトの変更で柔軟に行うことができ
るという効果がある。特に、従来の問題であった、提示
ストーリーの変更がスキーマの変更に及ぶことがなくな
る。また、提示ストーリーをオブジェクトで表している
ので、提示ストーリーだけをペリネットで記述する場合
のミスマッチを防ぐことができる。
ィアデータ提示方法によれば、メディアデータをオブジ
ェクト指向言語でオブジェクトとして統一的に扱うとと
もに、遅延オブジェクト，連続実行オブジェクトおよび
同期実行オブジェクトを用いることにより、メディアデ
ータが持つ時間的な性質を明示的に表現することができ
るとともに、これらオブジェクトを組み合わせて簡単に
ストーリーを提示することが可能になり、提示ストーリ
ーの変更をオブジェクトの変更で柔軟に行うことができ
るという効果がある。特に、従来の問題であった、提示
ストーリーの変更がスキーマの変更に及ぶことがなくな
る。また、提示ストーリーをオブジェクトで表している
ので、提示ストーリーだけをペリネットで記述する場合
のミスマッチを防ぐことができる。
【００４０】また、本発明のマルチメディアデータ提示
装置によれば、メディアデータをオブジェクト指向言語
でオブジェクトとして統一的に扱うとともに、遅延オブ
ジェクト，連続実行オブジェクトおよび同期実行オブジ
ェクトを用いることにより、メディアデータが持つ時間
的な性質を明示的に表現することができるとともに、こ
れらオブジェクトを組み合わせて簡単にストーリーを提
示することが可能になり、提示ストーリーの変更をオブ
ジェクトの変更で柔軟に行うことができるという効果が
ある。特に、従来の問題であった、提示ストーリーの変
更がスキーマの変更に及ぶことがなくなる。また、提示
ストーリーをオブジェクトで表しているので、提示スト
ーリーだけをペリネットで記述する場合のミスマッチを
防ぐことができる。
装置によれば、メディアデータをオブジェクト指向言語
でオブジェクトとして統一的に扱うとともに、遅延オブ
ジェクト，連続実行オブジェクトおよび同期実行オブジ
ェクトを用いることにより、メディアデータが持つ時間
的な性質を明示的に表現することができるとともに、こ
れらオブジェクトを組み合わせて簡単にストーリーを提
示することが可能になり、提示ストーリーの変更をオブ
ジェクトの変更で柔軟に行うことができるという効果が
ある。特に、従来の問題であった、提示ストーリーの変
更がスキーマの変更に及ぶことがなくなる。また、提示
ストーリーをオブジェクトで表しているので、提示スト
ーリーだけをペリネットで記述する場合のミスマッチを
防ぐことができる。
【図１】本発明のマルチメディアデータ提示方法が適用
された第１実施例に係るマルチメディアデータ提示装置
の構成を示すブロック図である。
された第１実施例に係るマルチメディアデータ提示装置
の構成を示すブロック図である。
【図２】本実施例のマルチメディアデータ提示装置がデ
ータ構造として持つオブジェクトに対応するクラスの構
造・関連図である。
ータ構造として持つオブジェクトに対応するクラスの構
造・関連図である。
【図３】図２中のＳｅｑオブジェクトの構造図である。
【図４】図２中のＳｙｎｃオブジェクトの構造図であ
る。
る。
【図５】Ｐｒｅｓｅｎｔａｔｉｏｎオブジェクトの構造
図である。
図である。
【図６】図２中のオブジェクトの具体的な記述例を示す
図である。
図である。
【図７】図１中の提示ストーリー解析手段の処理を示す
流れ図であり、（ａ）はメインルーチンの処理を示し、
（ｂ）は解析ルーチンの処理を示す。
流れ図であり、（ａ）はメインルーチンの処理を示し、
（ｂ）は解析ルーチンの処理を示す。
【図８】マルチメディアデータの提示ストーリーの一例
を示す図であり、（ａ）はタイムラインチャートを示
し、（ｂ）はそれに基づいて生成される提示ストーリー
の構造を示す。
を示す図であり、（ａ）はタイムラインチャートを示
し、（ｂ）はそれに基づいて生成される提示ストーリー
の構造を示す。
【図９】図８（ｂ）に例示した提示ストーリーの実際の
記述例を示す図である。
記述例を示す図である。
【図１０】本発明の第２実施例に係るマルチメディアデ
ータ提示装置の構成を示すブロック図である。
ータ提示装置の構成を示すブロック図である。
【図１１】本発明の第３実施例に係るマルチメディアデ
ータ提示装置の構成を示すブロック図である。
ータ提示装置の構成を示すブロック図である。
１ 提示ストーリー生成手段 ２ データバッファ ３ 提示ストーリー解析手段 ４ スケジューリング手段 ５ スレッド管理手段 ６ メディアデータ実行手段 ７ データベース管理システム ８ データベース ９ 提示ストーリー入力手段 １００ Ｉｎｔｅｒｖａｌオブジェクト １０１ Ｓｅｑオブジェクト １０２ Ｓｙｎｃオブジェクト １０３ Ｄｅｌａｙオブジェクト １０４ Ｍｅｄｉａオブジェクト １０５ Ｖｉｄｅｏオブジェクト １０６ Ａｕｄｉｏオブジェクト １０７ Ｉｍａｇｅオブジェクト １０８ Ｔｅｘｔオブジェクト ２００ Ｉｎｔｅｒｖａｌオブジェクトのリスト ２０１ Ｉｎｔｅｒｖａｌオブジェクトの集合 ２０２ Ｐｒｅｓｅｎｔａｔｉｏｎオブジェクト
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｇ０６Ｆ 17/30 9168−5Ｌ Ｇ０６Ｆ 15/20 Ｚ Ｇ０６Ｔ 13/00 9289−5Ｌ 15/40 ３７０Ｇ Ｈ０４Ｎ 7/173 15/62 ３４０Ｚ
Claims (4)
- 【請求項１】 オブジェクト指向言語の所定の記述によ
り、動画，音声，イメージおよびテキストのメディアデ
ータを表示・再生時間という性質を基にメディアオブジ
ェクトとして統一的に扱うとともに、提示の際に時間を
空けることを指定するための遅延オブジェクトと、前記
メディアオブジェクト，前記遅延オブジェクト，後記同
期実行オブジェクトまたは自分自身を要素として含むリ
ストを持ち要素を連続して実行することを指定するため
の連続実行オブジェクトと、前記メディアオブジェク
ト，前記遅延オブジェクト，前記連続実行オブジェクト
または自分自身を要素として含む集合を持ち要素を同期
して実行することを指定するための同時実行オブジェク
トを使用することにより、メディアデータの提示ストー
リーを生成する提示ストーリー生成工程と、 前記提示ストーリーを解析して、前記遅延オブジェクト
であれば指定した時間だけ時間を空けることを指定し、
前記連続実行オブジェクトであればリストについて処理
を再帰的に呼び出して連続して実行することを指定し、
前記同期実行オブジェクトであれば集合について処理を
再帰的に呼び出して同期をとって実行することを指定
し、メディアデータのオブジェクトであればそのオブジ
ェクトの実行を指定し、以上の指定に基づいてスケジュ
ーリングを行い、メディアデータを実行する提示ストー
リー解析・実行工程とを含むことを特徴とするマルチメ
ディアデータ提示方法。 - 【請求項２】 オブジェクト指向言語の所定の記述によ
り、動画，音声，イメージおよびテキストのメディアデ
ータを表示・再生時間という性質を基にメディアオブジ
ェクトとして統一的に扱うとともに、提示の際に時間を
空けることを指定するための遅延オブジェクトと、前記
メディアオブジェクト，前記遅延オブジェクト，後記同
期実行オブジェクトまたは自分自身を要素として含むリ
ストを持ち要素を連続して実行することを指定するため
の連続実行オブジェクトと、前記メディアオブジェク
ト，前記遅延オブジェクト，前記連続実行オブジェクト
または自分自身を要素として含む集合を持ち要素を同期
して実行することを指定するための同時実行オブジェク
トを使用することにより、メディアデータの提示ストー
リーを生成する提示ストーリー生成手段と、 前記提示ストーリーを解析して、前記遅延オブジェクト
であれば指定した時間だけ時間を空けることを指定し、
前記連続実行オブジェクトであればリストについて処理
を再帰的に呼び出して連続して実行することを指定し、
前記同期実行オブジェクトであれば集合について処理を
再帰的に呼び出して同期をとって実行することを指定
し、メディアデータのオブジェクトであればそのオブジ
ェクトの実行を指定し、以上の指定に基づいてスケジュ
ーリングを行い、メディアデータを実行する提示ストー
リー解析・実行手段とを含むことを特徴とするマルチメ
ディアデータ提示装置。 - 【請求項３】 前記提示ストーリーをデータベースに格
納し、ストーリーを永続化する請求項２記載のマルチメ
ディアデータ提示装置。 - 【請求項４】 前記提示ストーリーの情報を入力するた
めのグラフィカルユーザインタフェースによる提示スト
ーリー入力手段を持ち、この提示ストーリー入力手段
は、利用者からの入力を受けてその情報を前記提示スト
ーリー生成手段に送ることにより提示ストーリーを生成
する請求項２および３記載のマルチメディアデータ提示
装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7189891A JP2853732B2 (ja) | 1995-07-03 | 1995-07-03 | マルチメディアデータ提示方法およびその装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7189891A JP2853732B2 (ja) | 1995-07-03 | 1995-07-03 | マルチメディアデータ提示方法およびその装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0916458A true JPH0916458A (ja) | 1997-01-17 |
| JP2853732B2 JP2853732B2 (ja) | 1999-02-03 |
Family
ID=16248918
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP7189891A Expired - Lifetime JP2853732B2 (ja) | 1995-07-03 | 1995-07-03 | マルチメディアデータ提示方法およびその装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2853732B2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002055782A (ja) * | 2000-06-02 | 2002-02-20 | Yamaha Corp | マルチメディア実行システム、マルチメディアファイルおよびマルチメディアファイルの実行方法。 |
| US7333967B1 (en) * | 1999-12-23 | 2008-02-19 | International Business Machines Corporation | Method and system for automatic computation creativity and specifically for story generation |
-
1995
- 1995-07-03 JP JP7189891A patent/JP2853732B2/ja not_active Expired - Lifetime
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7333967B1 (en) * | 1999-12-23 | 2008-02-19 | International Business Machines Corporation | Method and system for automatic computation creativity and specifically for story generation |
| JP2002055782A (ja) * | 2000-06-02 | 2002-02-20 | Yamaha Corp | マルチメディア実行システム、マルチメディアファイルおよびマルチメディアファイルの実行方法。 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2853732B2 (ja) | 1999-02-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6487564B1 (en) | Multimedia playing apparatus utilizing synchronization of scenario-defined processing time points with playing of finite-time monomedia item | |
| US6542692B1 (en) | Nonlinear video editor | |
| Blakowski et al. | A media synchronization survey: Reference model, specification, and case studies | |
| EP0695446B1 (en) | Multimedia synchronization system | |
| JP3476462B2 (ja) | 同期クロック及びメディアプレーヤー | |
| JP3943635B2 (ja) | コンピュータ制御型ディスプレイシステムにおいてセッションの再生ポイントを制御する方法 | |
| JP3943636B2 (ja) | コンピュータ制御型ディスプレイシステム | |
| JP3390553B2 (ja) | 目次インデキシング装置 | |
| US5596696A (en) | Method and apparatus for synchronizing graphical presentations | |
| Schnepf et al. | Doing FLIPS: Flexible interactive presentation synchronization | |
| US5748187A (en) | Synchronization control of multimedia objects in an MHEG engine | |
| JP2001306581A (ja) | ミドルウェアおよびミドルウェアを用いたメディアデータ視聴機器 | |
| JP3265131B2 (ja) | イベント生成分配方式 | |
| JPH09179712A (ja) | 共同作業を表現する一時的データの獲得及び再生のためのシステム | |
| JP2006033659A (ja) | コンテンツ記録再生装置、コンテンツ記録再生方法及びそのプログラム | |
| Davies et al. | Technological perspective on multimedia computing | |
| Chen et al. | Multisync: A synchronization model for multimedia systems | |
| Bulterman | Embedded video in hypermedia documents: supporting integration and adaptive control | |
| TW425520B (en) | System and method for programmatic generation of continuous media presentations | |
| JP2853732B2 (ja) | マルチメディアデータ提示方法およびその装置 | |
| JPH0789267B2 (ja) | データ編集／提示方法とその装置 | |
| Shirmohammadi et al. | An approach for recording multimedia collaborative sessions: design and implementation | |
| JPH1032773A (ja) | 要約映像ブラウジング方法および装置 | |
| JPH08153077A (ja) | 協調作業システム | |
| Aberer et al. | The impact of multimedia data on database management systems |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080901 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 8 Free format text: PAYMENT UNTIL: 20080901 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 9 Free format text: PAYMENT UNTIL: 20090901 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 10 Free format text: PAYMENT UNTIL: 20100901 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110901 Year of fee payment: 11 |
|
| EXPY | Cancellation because of completion of term | ||
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 11 Free format text: PAYMENT UNTIL: 20110901 |