JPH10134030A

JPH10134030A - マルチメディアデータ・プレゼンテーションシステムおよび方法

Info

Publication number: JPH10134030A
Application number: JP12390897A
Authority: JP
Inventors: Akiko Kanetani; 朗子金谷; Kouki Katou; 光幾加藤; Hiroshi Ishikawa; 博石川
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 1996-05-22
Filing date: 1997-05-14
Publication date: 1998-05-22

Abstract

(57)【要約】【課題】マルチメディアデータの複雑なプレゼンテー
ションを、効率よく自動的に実行することが課題であ
る。【解決手段】プレゼンテーションのシナリオを記述し
たスクリプトファイルｘｘｘｘ．ｓｃｒに対応するオブ
ジェクトｓ１を起動すると、指定されたキーワード“相
撲”を有するビューオブジェクトｖ１、ｖ２が検索さ
れ、これらに対応する実行用オブジェクトｅｘ１、ｅｘ
２が生成される。ｅｘ１、ｅｘ２には、それらのｓｔａ
ｒｔＴｉｍｅ属性に記述された時刻０に、ｏｐｅｒａｔ
ｉｏｎ属性に記述された手続き“ｐｌａｙ”がそれぞれ
適用され、ｖ１、ｖ２に対応するビデオデータが同時に
再生開始される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、オブジェクト指向
データベースに格納された多様なマルチメディアデータ
を自由に組合せて、複雑なプレゼンテーションを実行す
ることの可能なマルチメディアデータ・プレゼンテーシ
ョンシステムおよびその方法に関する。

【０００２】

【従来の技術】近年、盛んに利用されるようになったマ
ルチメディアの蓄積、検索、再生を統合して行うプラッ
トフォームとして、マルチメディアデータベースが著し
い発展を果たしつつある。

【０００３】マルチメディアデータベースは、テキス
ト、グラフィックス、動画像、音声など性質が異なる多
様なメディアに対し、データの符号化などの各メディア
に特有な操作をユーザから隠蔽することにより、各メデ
ィアを統合的に扱えるようにしたデータベースである。

【０００４】オブジェクト指向データベースを利用した
マルチメディアデータベースでは、各メディアのデータ
は、対応するオブジェクトを介してアクセスされる。こ
こで、オブジェクトとは、データとそれに適用される手
続きの組みを表し、これを用いることにより、多様なメ
ディアを同等に扱うことが可能になる。

【０００５】このようなマルチメディアデータベースに
格納されるマルチメディアデータの大きな特徴の１つ
は、動画像、音声などの膨大なデータ量の時系列データ
を含んでいることである。これらの時間に関して連続し
た連続メディアデータは、適切な再生スピード（例え
ば、動画像を記録した時と同じピクチャレート）で再生
する必要がある。

【０００６】また、動画像と音声とを同時に出力したり
する場合などにおいて、メディア間の同期を取るため
に、指定時刻から正確に再生を開始する必要があり、再
生中に処理の遅延が許されないという要求もある。

【０００７】さらに、マルチメディアデータを検索した
結果として、複数の動画像を同時に表示する場合、膨大
なデータの復号にコンピュータの資源を大量に用いるた
め、資源の適切な配分を行う必要がある。

【０００８】マルチメディアデータのプレゼンテーショ
ンには、このような要求を満たしつつ、データを部分的
に表示したり、複数のデータを同時に、あるいは連続的
に表示するなどの機能が必要になる。また、ユーザの希
望に応じて、例えば複数の連続メディアデータの再生を
同時に開始／終了させたり、逐次的に連続して実行した
りするような複雑な組合せのプレゼンテーションも考え
られる。

【０００９】ところで、従来のマルチメディアデータベ
ースにおいては、１種類の内容（コンテンツ）に対して
品質の異なる複数の実体データが格納される場合があ
る。例えば、同一の内容のデータにおいて、フォーマッ
トの違いや時系列データの再生レートの違い、あるいは
イメージデータの表示サイズの違いにより、品質の異な
る複数のデータが存在し、必要に応じていずれかが使用
される。

【００１０】しかし、上述のような複雑な組合せのプレ
ゼンテーションにおいては、資源の制約などから使用で
きるデータが制限される場合があり、メディア毎に使用
データを選択する処理が複雑になる。

【００１１】

【発明が解決しようとする課題】上述のような従来のマ
ルチメディアデータベースには次のような問題がある。
従来は、オーサリングツールとしてデータの切り貼り等
の編集を行うソフトウェアツールはあるが、マルチメデ
ィアデータの一部分をデータベースから検索して組み合
わせたり、その編集結果をデータベースに格納して再利
用する機構はない。また、複雑な組合せのプレゼンテー
ションを実行する場合に、資源の制約を考慮して、複数
のデータから適切なデータを自動的に選択するという機
構も存在しない。

【００１２】このため、様々な形態のマルチメディアデ
ータを柔軟に組み合わせて利用することが難しく、それ
らを組み合わせて利用する場合は、すべてのデータを複
製し直す処理が必要になる。また、複雑な構成のプレゼ
ンテーションにおいて、資源の制約を満たす適切なデー
タを選択することが極めて困難である。

【００１３】本発明は、マルチメディアデータを格納し
たオブジェクト指向データベースシステムにおいて、複
雑なプレゼンテーションを効率よく自動的に実行するマ
ルチメディアデータ・プレゼンテーションシステムおよ
びその方法を提供することを目的とする。

【００１４】

【課題を解決するための手段】図１は、本発明のマルチ
メディアデータ・プレゼンテーションシステムの原理図
である。図１のマルチメディアデータ・プレゼンテーシ
ョンシステムは、記憶手段１、生成手段２、および実行
手段３を備える。

【００１５】記憶手段１は、マルチメディアデータの組
合せ方法を含むプレゼンテーションのシナリオを記述し
たスクリプトファイルと、そのスクリプトファイルから
生成される実行用オブジェクトと、その実行用オブジェ
クトに対応するマルチメディアデータとを記憶する。

【００１６】生成手段２は、上記スクリプトファイルを
解析して、上記プレゼンテーションに必要な上記実行用
オブジェクトを生成する。実行手段３は、上記実行用オ
ブジェクトを起動して、その実行用オブジェクトに対応
する上記マルチメディアデータを出力する。

【００１７】プレゼンテーションにおけるマルチメディ
アデータの組合せ方法としては、例えば、動画像と音声
を同時に再生したり、２つ以上の異なる動画像を連続し
て再生するなどの様々なバリエーションが考えられる。
ユーザは、このような組合せ方法と実行時間の制御方法
等を含むシナリオを記述したスクリプト情報をシステム
に入力し、入力されたスクリプト情報はスクリプトファ
イルとして記憶手段１に格納される。

【００１８】次に、生成手段２は、スクリプトファイル
に記述されたシナリオを解析して、組み合わされたマル
チメディアデータを自動的に実行するための実行用オブ
ジェクトを生成し、記憶手段１に格納する。

【００１９】次に、実行手段３は、実行用オブジェクト
を起動することで、それに対応付けられたマルチメディ
アデータを記憶手段１から検索し、シナリオ通りに表示
装置等に出力する。

【００２０】このように、シナリオに基づいて個々のマ
ルチメディアデータに対応付けられた実行用オブジェク
トを生成すれば、それらの実行用オブジェクトを起動す
ることで、自動的にシナリオ通りのプレゼンテーション
が実現される。したがって、多数のマルチメディアデー
タを複雑に組み合わせたシナリオであっても、ユーザが
意識することなく、効率のよいデータ再生が行われる。

【００２１】また、記憶手段１は、さらに上記実行用オ
ブジェクトに対応するマルチメディアデータの内容を表
すコンテンツオブジェクトと、そのコンテンツオブジェ
クトに対応付けられ、そのマルチメディアデータの品質
を表す１つ以上のストリームオブジェクトとを記憶し、
実行手段３は、その実行用オブジェクトを参照して、使
用するマルチメディアデータの品質を決定する。

【００２２】コンテンツオブジェクトは、例えば、テキ
スト、グラフィックス、動画像、音声などのマルチメデ
ィアデータの種類と、実行時間長と、検索に用いられる
キーワード等の内容を表し、ストリームオブジェクト
は、例えば、表示サイズや再生レート等のマルチメディ
アデータの品質を表す。

【００２３】通常、１つのコンテンツオブジェクトに
は、品質の異なる複数のストリームオブジェクトが対応
付けられ、ストリームオブジェクトとマルチメディアデ
ータとは１対１に対応付けられている。あるコンテンツ
オブジェクトが表す内容を出力するためにどのストリー
ムオブジェクトに対応するマルチメディアデータを用い
るかは、後述する実施の形態で説明するように、同時に
再生される内容と計算機資源の制約等を考慮して自動的
に決定される。

【００２４】こうして、１つ以上のストリームオブジェ
クトから選択されたストリームオブジェクトの識別情報
が対応する実行用オブジェクトに保持され、実行手段３
は、その識別情報から、使用するマルチメディアデータ
の品質を決定することができる。これにより、適切な品
質のマルチメディアデータを用いて、シナリオ通りのプ
レゼンテーションが自動的に行われる。

【００２５】また、生成手段２は、上記スクリプトファ
イルに対応するスクリプトオブジェクトを生成して記憶
手段１に格納し、そのスクリプトオブジェクトを起動す
ることにより、上記実行用オブジェクトを生成し、さら
に実行手段３にその実行用オブジェクトを起動させる。

【００２６】スクリプトオブジェクトには、それを実行
するための手続きを作用させることができ、スクリプト
オブジェクトを実行すると、スクリプトファイルの解析
と、実行用オブジェクトの生成および実行の一連の処理
が自動的に行われる。これにより、スクリプトファイル
を利用したプレゼンテーションが完全に自動化される。

【００２７】また、スクリプトオブジェクトには、関連
するすべての実行用オブジェクトの識別情報を保持させ
ることもでき、実行手段３は、その識別情報により指定
される実行用オブジェクトを起動すればよい。

【００２８】このように、スクリプトファイルをオブジ
ェクトとして扱うことで、それに手続きを適用すること
が可能になる。特に、スクリプトオブジェクトをコンテ
ンツオブジェクトと同様に扱えば、コンテンツオブジェ
クトに対して適用可能な時間制御等の任意の手続きを、
スクリプトオブジェクトにも適用することができるよう
になる。

【００２９】このような性質を利用して、スクリプトオ
ブジェクトを別のスクリプトファイル内に記述すれば、
スクリプトファイルを入れ子構造で作成することが可能
になり、既存のスクリプトファイルの再利用が実現され
る。これにより、個々のスクリプトファイルを構成単位
として各スクリプトファイルのシナリオを組み合わせ、
より複雑なプレゼンテーションのシナリオを作成するこ
とが可能になる。

【００３０】例えば、図１の記憶手段１は、実施形態に
おける図２のマルチメディアデータ格納部１１、ストリ
ームオブジェクト格納部１２、コンテンツオブジェクト
格納部１３、スクリプトファイル格納部１４、スクリプ
トオブジェクト格納部１５、および実行用オブジェクト
格納部１６に対応し、生成手段２はスクリプト管理部１
７に対応し、実行手段３はスクリプト実行部１８に対応
する。

【００３１】

【発明の実施の形態】以下、図面を参照しながら、本発
明の実施の形態を詳細に説明する。本発明においては、
多様なマルチメディアデータを複雑に組み合わせてプレ
ゼンテーションを行うために、プレゼンテーションのシ
ナリオを記述したスクリプトを利用する。このプレゼン
テーションのシナリオには、プレゼンテーションに用い
るマルチメディアデータまたはその検索条件、マルチメ
ディアデータの時間的な組合せ方法、マルチメディアデ
ータの出力方法等が含まれる。

【００３２】また、上述のシナリオをより単純化するた
めに、個々のスクリプトをパッケージ化してデータベー
スに保存し、別のスクリプト内で再利用する機構を設け
る。そのために、マルチメディアデータを、その内容を
表すオブジェクト（コンテンツオブジェクト）を介して
扱い、スクリプト自身もオブジェクト（スクリプトオブ
ジェクト）としてコンテンツオブジェクトと同様に扱
う。

【００３３】これにより、スクリプトを入れ子構造で記
述することができ、既に存在するスクリプトを用いて、
より複雑なプレゼンテーションのシナリオを新たに作成
することが可能になる。

【００３４】また、スクリプトオブジェクトに対して手
続きを適用することにより、間接的に、そのスクリプト
から派生するコンテンツオブジェクトに、その手続きが
適用される。このように、スクリプトオブジェクトを用
いれば、実際にコンテンツを記述しなくても手続きを適
用することができるようになる。

【００３５】そして、スクリプトに記述されたプレゼン
テーションを実行する際には、スクリプトに記述された
すべてのコンテンツオブジェクトについて、それを参照
可能であって、かつ、実行開始時刻の属性を持つ実行用
クラスのオブジェクト（実行用オブジェクト）を生成す
る。

【００３６】この実行用オブジェクトにスケジューラを
適用することで、コンテンツオブジェクトに対応付けら
れた品質の異なる複数のマルチメディアデータのオブジ
ェクト（ストリームオブジェクト）が参照され、実行環
境に適したデータおよび開始時刻が自動的に決定され
る。

【００３７】このように、スクリプト自身をコンテンツ
と同様にオブジェクトを用いて扱うことで、多様なプレ
ゼンテーションのシナリオを作成することができ、シナ
リオから生成される実行用オブジェクトを介して、効率
よく自動的にマルチメディアデータを出力することがで
きる。

【００３８】図２は、本発明のマルチメディアデータ・
プレゼンテーションシステムの構成図である。図２のマ
ルチメディアデータ・プレゼンテーションシステムは、
マルチメディアデータ格納部１１、ストリームオブジェ
クト格納部１２、コンテンツオブジェクト格納部１３、
スクリプトファイル格納部１４、スクリプトオブジェク
ト格納部１５、実行用オブジェクト格納部１６、スクリ
プト管理部１７、スクリプト実行部１８、入力装置１
９、および表示装置２０を備える。

【００３９】入力装置１９は、例えばキーボードやポイ
ンティングデバイス等の入力機器および入力インタフェ
ースを含み、表示装置２０は、例えばディスプレイ装置
等の出力装置に対応する。また、マルチメディアデータ
の出力には、表示装置２０以外にプリンタや音声出力装
置等も用いられる。

【００４０】マルチメディアデータ格納部１１はマルチ
メディアデータを格納し、ストリームオブジェクト格納
部１２はマルチメディアデータの品質属性を格納し、コ
ンテンツオブジェクト格納部１３はマルチメディアデー
タの内容属性を格納する。

【００４１】また、スクリプトファイル格納部１４は、
マルチメディアデータのプレゼンテーションのためのシ
ナリオを記述したシナリオファイル（スクリプトファイ
ル）を格納し、スクリプトオブジェクト格納部１５はス
クリプトファイルの属性を格納し、実行用オブジェクト
格納部１６はスクリプトファイルを解析した時に生成さ
れる実行用オブジェクトを格納する。

【００４２】また、スクリプト管理部１７は、スクリプ
トオブジェクト管理部２１、スクリプトパーザ２２、お
よび実行用オブジェクト生成部２３を備える。スクリプ
トオブジェクト管理部２１は、入力装置１９から入力さ
れる指示に応じて、スクリプトオブジェクトを生成し、
それをスクリプトオブジェクト格納部１５に格納して管
理する。

【００４３】スクリプトパーザ２２は、入力装置１９か
ら入力される指示に応じて、スクリプトファイル格納部
１４に格納されたスクリプトファイルを解析し、個々の
コンテンツオブジェクトの実行開始予定時刻を計算した
り、スクリプトオブジェクトの属性を更新したりする。
実行用オブジェクト生成部２３は、スクリプトパーザ２
２からの要求に応じて実行用オブジェクトを生成し、そ
れを実行用オブジェクト格納部１６に格納する。

【００４４】また、スクリプト実行部１８は、スケジュ
ーラ２４とデータ表示部２５を備える。スケジューラ２
４は、実行用オブジェクトをスケジューリングし、それ
ぞれのコンテンツオブジェクトに対して、実行すべきス
トリームオブジェクトと起動に要する時間を考慮した実
際の実行開始時刻を決定する。

【００４５】データ表示部２５は、スケジュールされた
実行開始時刻にプレーヤ２６を起動し、プレーヤ２６
は、ストリームオブジェクトに対応するマルチメディア
データをマルチメディアデータ格納部１１から検索し
て、表示装置２０に表示する。

【００４６】図３は、図２のマルチメディアデータ・プ
レゼンテーションシステムを備えるデータベースシステ
ムの構成例を示している。図３のデータベースシステム
は、コンピュータを用いて実現され、ＣＰＵ（中央処理
装置）３１、メモリ３２、入力装置１９、出力装置２
０、データベース３３、および媒体駆動装置３５を備え
る。これらの各装置は、バス３４により互いに接続され
ている。

【００４７】データベース３３は、図２のマルチメディ
アデータ格納部１１、ストリームオブジェクト格納部１
２、コンテンツオブジェクト格納部１３、スクリプトフ
ァイル格納部１４、スクリプトオブジェクト格納部１
５、および実行用オブジェクト格納部１６を有する。

【００４８】このデータベース３３は、例えば、磁気デ
ィスク装置、光ディスク装置、光磁気ディスク装置等に
より実装され、スクリプト管理部１７とスクリプト実行
部１８の各機能を実現するためのプログラムを保存する
こともできる。

【００４９】また、ＣＰＵ３１は、メモリ３２に格納さ
れたプログラムを実行することにより、スクリプト管理
部１７とスクリプト実行部１８の各機能に対応する処理
を行う。メモリ３２としては、例えばＲＯＭ（read onl
y memory）、ＲＡＭ（randomaccess memory）等が用い
られる。

【００５０】媒体駆動装置３５は、可搬記録媒体３６を
駆動し、その記憶内容にアクセスする。可搬記録媒体３
６としては、メモリカード、フロッピーディスク、ＣＤ
−ＲＯＭ（compact disk read only memory ）、光ディ
スク、光磁気ディスク等、任意のコンピュータ読み取り
可能な記録媒体を使用することができる。この可搬記録
媒体３６には、データのほかに、スクリプト管理部１７
とスクリプト実行部１８の各機能を実現するためのプロ
グラムが格納される。

【００５１】本実施形態においては、スクリプトオブジ
ェクト、実行用オブジェクト、コンテンツオブジェク
ト、およびストリームオブジェクトは、オブジェクト指
向データベースにより管理され、これらのオブジェクト
のクラス階層とデータの参照関係は図４に示すようにな
る。ここで、クラスとはオブジェクトの構造の定義に相
当し、その具体例がオブジェクトとなる。

【００５２】図４において、最上位のクラスはＣｏｍｐ
ｏｓｉｔｅクラス（コンポジットクラス）４０であり、
実行の対象となるオブジェクトをまとめるＴａｒｇｅｔ
クラス（ターゲットクラス）４１と、実行の際に使用す
る実行用オブジェクトをまとめるＥｘｅｃクラス（実行
用クラス）４２と、マルチメディアデータの個々の品質
属性を表すオブジェクトをまとめるＳｔｒｅａｍクラス
（ストリームクラス）６０から成る。

【００５３】ターゲットクラス４１は、個々のマルチメ
ディアデータの内容属性を表すコンテンツオブジェクト
をまとめるＣｏｎｔｅｎｔｓクラス（コンテンツクラ
ス）５０と、コンテンツの組合せを表現するスクリプト
の属性を表すスクリプトオブジェクトをまとめるＳｃｒ
ｉｐｔクラス（スクリプトクラス）４３とから成る。

【００５４】コンテンツクラス５０は、メディア毎にＶ
ｉｄｅｏＣｏｎｔｅｎｔｓクラス（ビデオコンテンツ
クラス）５１、ＡｕｄｉｏＣｏｎｔｅｎｔｓクラス
（オーディオコンテンツクラス）５２等から成る。一
方、ストリームクラス６０も、メディア毎にＶｉｄｅｏ
クラス（ビデオクラス）６１、Ａｕｄｉｏクラス（オー
ディオクラス）６２等から成る。

【００５５】実行用クラス４２に属する実行用オブジェ
クトは、対応するターゲットクラス４１に含まれるコン
テンツクラス５０またはスクリプトクラス４３のオブジ
ェクトを参照する。スクリプトクラス４３に属するスク
リプトオブジェクトは、シナリオを記述するスクリプト
ファイルと、そのスクリプトファイルを解析して生成さ
れる実行用オブジェクトとを参照する。

【００５６】コンテンツクラス５０に含まれる各クラス
５１、５２、・・・のコンテンツオブジェクトは、スト
リームクラス６０の対応する各クラス６１、６２、・・
・のストリームオブジェクトをそれぞれ参照する。ここ
で、１つのコンテンツオブジェクトに対しては、品質の
異なる複数のストリームオブジェクトが対応する場合も
あり得る。

【００５７】さらに、ビデオクラス６１、オーディオク
ラス６２、・・・の各ストリームオブジェクトは、それ
ぞれ対応するマルチメディアデータであるＶｉｄｅｏ
Ｄａｔａ（ビデオデータ）７２、ＡｕｄｉｏＤａｔａ
（オーディオデータ）７３、・・・を参照する。

【００５８】ターゲットクラス４１、スクリプトクラス
４３、実行用クラス４２の属性とメソッドは、それぞれ
図５、６、７に示されるようになる。ここで、メソッド
とはオブジェクトに適用される手続きを表し、各メソッ
ドに含まれる（）内には引数が記述される。

【００５９】図５において、ターゲットクラス４１は、
データの全実行時間長を表すｔｉｍｅＬｅｎｇｔｈ、お
よびキーワードを表すｋｅｙｗｏｒｄｓの各属性と、デ
ータ検索の際に指定キーワードの有無をチェックするｋ
ｅｙｗｏｒｄ（）のメソッドから成る。

【００６０】また、図６において、スクリプトクラス４
３は、対応するスクリプトファイル名を表すｓｃｒｉｐ
ｔＦｉｌｅ、および実行用オブジェクトの集合を表すｅ
ｘｅｃｓの各属性と、起動されるスクリプトオブジェク
ト（起動スクリプト）を解析するｐａｒｓｅ（）、およ
び起動スクリプトを実行するｄｏ（）のメソッドから成
る。スクリプトオブジェクトの生成時には、ｅｘｅｃｓ
属性はＥＭＰＴＹ（空集合）になっている。

【００６１】また、図７において、実行用クラス４２
は、ｓｃｒｉｐｔ、ｓｔａｒｔＴｉｍｅ、ｔａｒｔｇｅ
ｔ、ｏｐｅｒａｔｉｏｎ、ａｌｌＴｉｍｅＬｅｎｇｔ
ｈ、およびｓｃｈｅｄｕｌｅＤａｔａの各属性と、ｐａ
ｒａｌｌｅｌ（）、ｓｅｒｉａｌ（）、ｒｅｎｄｅｚｖ
ｏｕｓ（）、ｗａｉｔ（）、ａｎｙｔｉｍｅ（）、ｓｃ
ｈｅｄｕｌｅ（）、およびｅｘｅｃｕｔｅ（）の各メソ
ッドとから成る。

【００６２】ｓｃｒｉｐｔは対応するスクリプトオブジ
ェクトを表し、ｓｔａｒｔＴｉｍｅは理想的な実行開始
時刻を表し、ｔａｒｔｇｅｔは実行するターゲットオブ
ジェクトを表し、ｏｐｅｒａｔｉｏｎは実行オペレーシ
ョンを表し、ａｌｌＴｉｍｅＬｅｎｇｔｈは対応するス
クリプトオブジェクトの開始から終了までの全実行時間
長を表し、ｓｃｈｅｄｕｌｅＤａｔａは使用ストリーム
データの識別情報とスケジューリング後の実際の実行開
始時刻の組を表す。

【００６３】ここで、使用ストリームデータとは、実際
に使用するマルチメディアデータを指し、その識別情報
としては、例えばそのマルチメディアデータの品質を表
すストリームオブジェクトの識別子が用いられる。

【００６４】実行用オブジェクトの生成時には、ｓｔａ
ｒｔＴｉｍｅ属性は特定のデフォルト値（例えば０）に
設定され、ａｌｌＴｉｍｅＬｅｎｇｔｈ属性はターゲッ
トオブジェクトのｔｉｍｅＬｅｎｇｔｈ属性に記述され
た値に設定される。このとき、ｓｃｈｅｄｕｌｅＤａｔ
ａ属性は空のままである。

【００６５】また、ｐａｒａｌｌｅｌ（）、ｓｅｒｉａ
ｌ（）、ｒｅｎｄｅｚｖｏｕｓ（）、ｗａｉｔ（）、ａ
ｎｙｔｉｍｅ（）は、起動されるオブジェクト（起動オ
ブジェクト）を、それぞれ、同時に、連続して、終了時
刻がそろうように、指定時間だけ遅らせて、指定時間内
に実行するために、起動オブジェクトの実行開始時刻を
計算する。ここで、これらのメソッドの起動オブジェク
トは、複数の実行用オブジェクトの集合である場合があ
る。

【００６６】また、ｓｃｈｅｄｕｌｅ（）は、起動オブ
ジェクトに対して資源の制約を考慮したスケジューリン
グを行い、個々のオブジェクトの実行ストリームと、起
動に要する時間を考慮した実行開始時刻とを決定し、ｅ
ｘｅｃｕｔｅ（）は、スケジューリング後の起動オブジ
ェクトを実行する。

【００６７】コンテンツクラス５０およびストリームク
ラス６０の詳細については、先願の「マルチメディアデ
ータ検索システム、マルチメディアデータのオブジェク
ト生成装置及びマルチメディアデータの管理方法」（特
願平７−２４０３５０）、および「マルチメディアデー
タ検索システム、マルチメディアデータのスケジューリ
ング装置、マルチメディアデータの再生方法及び再生プ
ログラム記憶媒体」（特願平７−２４０３５１）に示さ
れている。

【００６８】そこで、図８から図１７までを参照しなが
ら、これらの先願の技術について説明する。図８は、コ
ンテンツクラス５０の階層構造と、各クラスの属性とメ
ソッドの例を示している。

【００６９】図８において、コンテンツオブジェクトの
クラス構造は、コンテンツオブジェクトの共通の属性を
示すコンテンツクラス５０の下位に、ビデオコンテンツ
クラス５１、オーディオコンテンツクラス５２、イメー
ジコンテンツクラス（ＩｍａｇｅＣｏｎｔｅｎｔｓク
ラス）５３、およびテキストコンテンツクラス（Ｔｅｘ
ｔＣｏｎｔｅｎｔｓクラス）５４を有している。

【００７０】ここで、コンテンツに対応するデータの一
部分を切り取って得られる情報ビューの概念について説
明する。この情報ビューを記述するビューオブジェクト
については、上述の先願（特願平７−２４０３５０、特
願平７−２４０３５１）と、先願「マルチメディアデー
タ検索システム」（特願平７−１６１７１２）とに詳述
されている。

【００７１】ビューオブジェクトとは、一連のデータの
うちの一部分を時間および／または空間の観点から切り
取った結果としての部分データの特徴、例えばキーワー
ドと、その部分データを特定するデータ、例えばテキス
トデータではファイルの先頭から何バイト目から何バイ
ト目までというような部分データを特定するデータを記
述するオブジェクトである。したがって、このビューオ
ブジェクトは、部分データ毎にキーワードに対応して生
成される。

【００７２】オブジェクト指向データベースでは、種類
の異なるデータをオブジェクトとして統一的に扱うこと
ができ、ポリモルフィズムによって、メディアやフォー
マットの違いを意識せずに同じメソッドを使うことがで
きる。したがって、異なるフォーマットを持つデータを
追加する場合には、新たなビューオブジェクトのクラス
を設ければよく、異なるフォーマットを持つデータに対
しても柔軟に拡張できる。

【００７３】マルチメディアデータの表示の手続きにつ
いては、メディアの種類によって一般的に異なるが、ビ
ューオブジェクトに定義されている表示用のメソッドを
起動することにより、そのメディアのデータのフォーマ
ットに適した表示の手続きが実行される。

【００７４】上述のように、ビューオブジェクトはコン
テンツの一部分をアクセスするために用いられ、コンテ
ンツが動画像や音声など時系列データに関する事象の場
合、コンテンツの先頭からビューの先頭までの時間とビ
ューの時間長とを用いることにより、ビューのコンテン
ツに対する位置を表すことができる。

【００７５】また、コンテンツの先頭からビューの先頭
までの時間とビューの時間長とを、ビューオブジェクト
の属性として記録しておく。このビューオブジェクト
は、コンテンツクラス５０で表される。

【００７６】例えば、図９に示すように、コンテンツの
先頭からスキップする時間ｓｋｉｐＬｅｎｇｔｈとビュ
ーの時間長ｔｉｍｅＬｅｎｇｔｈとを指定することによ
り、コンテンツにビューを設定することができる。

【００７７】ビューオブジェクトを実際にユーザに提示
する場合、ビューに対応するコンテンツ、コンテンツの
先頭からビューの先頭までの時間ｓｋｉｐＬｅｎｇｔ
ｈ、およびビューの時間長ｔｉｍｅＬｅｎｇｔｈによ
り、コンテンツにおけるビューの部分を知ることができ
る。このため、コンテンツの指定した部分を再生できる
再生プログラムを用いることにより、ビュー機能をユー
ザに提供することができる。

【００７８】このような情報ビューの機能を用いれば、
例えばあるビデオデータの任意の時間部分を切り取って
表示したり、他のマルチメディアデータのビューと組み
合わせることで、より複雑なプレゼンテーションを実現
したりすることが可能になる。

【００７９】図８において、コンテンツクラス５０は、
コンテンツの実行時間長ｔｉｍｅＬｅｎｇｔｈ、コンテ
ンツのキーワードｋｅｙｗｏｒｄｓ、コンテンツに対応
するストリームデータの集合ｓｔｒｅａｍｓ、コンテン
ツが情報ビューによって切り出された部分コンテンツで
ある場合の元のコンテンツｐａｒｅｎｔ、およびコンテ
ンツに対応する部分コンテンツｃｈｉｌｄｓの各属性
と、コンテンツが該当キーワードを有しているかどうか
をチェックするｋｅｙｗｏｒｄ（）のメソッドを有す
る。

【００８０】また、ビデオコンテンツクラス５１は、コ
ンテンツの先頭からの時間ｓｋｉｐＬｅｎｇｔｈの属
性、事象が生じた時刻ａｂｓＳｔａｒｔＴｉｍｅの属
性、部分ビデオコンテンツを生成するｓｅｔＶｉｅ
ｗ（）のメソッド、コンテンツに対応するビデオストリ
ームオブジェクトを生成するｎｅｗＶｉｄｅｏ（）のメ
ソッド、およびビデオデータのコンテンツを表示するｐ
ｌａｙ（）のメソッドを有する。

【００８１】なお、事象が生じた時刻ａｂｓＳｔａｒｔ
Ｔｉｍｅは、コンテンツオブジェクトの絶対時間を意味
しており、この事象が生じた時刻ａｂｓＳｔａｒｔＴｉ
ｍｅを用いることにより、複数のコンテンツを同期させ
て表示することができる。

【００８２】また、オーディオコンテンツクラス５２
は、コンテンツの先頭からの時間ｓｋｉｐＬｅｎｇｔｈ
の属性、事象の生じた時刻ａｂｓＳｔａｒｔＴｉｍｅの
属性、部分オーディオコンテンツを生成するｓｅｔＶｉ
ｅｗ（）のメソッド、コンテンツに対応するオーディオ
ストリームオブジェクトを生成するｎｅｗＡｕｄｉ
ｏ（）のメソッド、およびオーディオデータのコンテン
ツを表示するｐｌａｙ（）のメソッドを有する。

【００８３】また、イメージコンテンツクラス５３は、
コンテンツの左上相対座標ｓｋｉｐＬｅｎｇｔｈＸ、ｓ
ｋｉｐＬｅｎｇｔｈＹの属性、ビューの大きさｖｉｅｗ
ＬｅｎｇｔｈＸ、ｖｉｅｗＬｅｎｇｔｈＹの属性、部分
イメージコンテンツを生成するｓｅｔＶｉｅｗ（）のメ
ソッド、コンテンツに対応するイメージストリームオブ
ジェクトを生成するｎｅｗＩｍａｇｅ（）のメソッド、
およびイメージデータのコンテンツを表示するｄｉｓｐ
ｌａｙ（）のメソッドを有する。

【００８４】また、テキストコンテンツクラス５４は、
コンテンツの先頭からのバイト数ｓｋｉｐＬｅｎｇｔｈ
の属性、ビューの長さｖｉｅｗＬｅｎｇｔｈの属性、部
分テキストコンテンツを生成するｓｅｔＶｉｅｗ（）の
メソッド、コンテンツに対応するテキストストリームオ
ブジェクトを生成するｎｅｗＴｅｘｔ（）のメソッド、
およびテキストイメージデータのコンテンツを表示する
ｄｉｓｐｌａｙ（）のメソッドを有する。次に、図１０
は、ストリームクラス６０の階層構造と、各クラスの属
性とメソッドの例を示している。

【００８５】図１０において、ストリームオブジェクト
のクラス構造は、ストリームオブジェクトの共通の属性
を示すストリームクラス６０の下位に、ビデオクラス６
１、オーディオクラス６２、イメージクラス（Ｉｍａｇ
ｅクラス）６３、およびテキストクラス（Ｔｅｘｔクラ
ス）６４を有している。

【００８６】さらに、各メディア毎のクラスの下位に
は、各メディア毎のフォーマット毎のクラスを有してい
る。すなわち、ビデオクラス６１の下位にはＭＰＥＧク
ラス６５、オーディオクラス６２の下位にはＭＰＥＧＡ
ｕｄｉｏクラス６６、イメージクラス６３の下位にはＪ
ＰＥＧクラス６７が設けられている。

【００８７】ストリームクラス６０は、ストリームオブ
ジェクトに対応するコンテンツｃｏｎｔｅｎｔｓ、スト
リームオブジェクトに対応する実マルチメディアデータ
のファイル名ｆｉｌｅＮａｍｅ、およびマルチメディア
データを表示装置２０に表示する際の負荷情報ｌｏａｄ
ＣＰＵ、ｌｏａｄＩＯの各属性を有する。

【００８８】この負荷情報ｌｏａｄＣＰＵ、ｌｏａｄＩ
Ｏは、ストリームオブジェクトの選択に使用される。す
なわち、マルチメディアデータを表示する際に、この負
荷情報ｌｏａｄＣＰＵ、ｌｏａｄＩＯを参照して、適切
なストリームオブジェクトを選択することにより、資源
の制約を満足することができる。

【００８９】また、ビデオクラス６１は、ビデオデータ
のピクチャレート（フレームレート）ｆｒａｍｅＲａｔ
ｅの属性、ビデオデータのフレームの大きさｗｉｄｔ
ｈ、ｈｅｉｇｈｔの属性、同一コンテンツでフレームレ
ートの異なるビデオストリームを生成するｎｅｗＲａｔ
ｅ（）のメソッド、同一コンテンツでサイズの異なるビ
デオストリームを生成するｎｅｗＳｉｚｅ（）のメソッ
ド、およびストリームオブジェクトに対応するビデオデ
ータを表示するｐｌａｙ（）のメソッドを有する。

【００９０】また、オーディオクラス６２は、オーディ
オデータのコーディングレートｃｏｄｉｎｇＲａｔｅの
属性、同一コンテンツでコーディングレートの異なるオ
ーディオストリームを生成するｎｅｗＲａｔｅ（）のメ
ソッド、およびストリームオブジェクトに対応するオー
ディオデータを表示するｐｌａｙ（）のメソッドを有す
る。

【００９１】また、イメージクラス６３は、イメージデ
ータの表示サイズｗｉｄｔｈ、ｈｅｉｇｈｔの属性、同
一コンテンツでサイズの異なるイメージストリームを生
成するｎｅｗＳｉｚｅ（）のメソッド、およびストリー
ムオブジェクトに対応するイメージデータを表示するｄ
ｉｓｐｌａｙ（）のメソッドを有する。

【００９２】また、テキストクラス６４は、ストリーム
オブジェクトに対応するテキストデータを表示するｄｉ
ｓｐｌａｙ（）のメソッドを有する。また、ビデオクラ
ス６１の下位のＭＰＥＧクラス６５は、ＭＰＥＧ（movi
ng picture experts group）形式のビデオデータを扱う
もので、同一コンテンツでフレームレートの異なるビデ
オストリームを生成するｎｅｗＲａｔｅ（）のメソッ
ド、同一コンテンツでサイズの異なるビデオストリーム
を生成するｎｅｗＳｉｚｅ（）のメソッド、およびスト
リームオブジェクトに対応するビデオデータを表示する
ｐｌａｙ（）のメソッドを有する。

【００９３】また、オーディオクラス６２の下位のＭＰ
ＥＧＡｕｄｉｏクラス６６は、ＭＰＥＧ形式のオーディ
オデータを扱うもので、同一コンテンツでコーディング
レートの異なるオーディオストリームを生成するｎｅｗ
Ｒａｔｅ（）のメソッド、およびストリームオブジェク
トに対応するオーディオデータを表示するｐｌａｙ（）
のメソッドを有する。

【００９４】また、イメージクラス６３の下位のＪＰＥ
Ｇクラス６７は、ＪＰＥＧ（jointphotographic expert
s group）形式の静止画データを扱うもので、同一コン
テンツでサイズの異なるイメージストリームを生成する
ｎｅｗＳｉｚｅ（）のメソッド、およびストリームオブ
ジェクトに対応するイメージデータを表示するｄｉｓｐ
ｌａｙ（）のメソッドを有する。

【００９５】尚、コンテンツを表示させる場合、コンテ
ンツクラス５０が有するストリームデータの集合ｓｔｒ
ｅａｍｓからストリームオブジェクトの集合を獲得し、
表示する環境に適するストリームオブジェクトを選出
し、その選出したストリームオブジェクトに対応するマ
ルチメディアデータにおいて、コンテンツオブジェクト
のビューで設定された部分を表示する。

【００９６】また、複数のコンテンツを同期させたり、
正確に連続して表示させたりする場合、スケジューラ２
４を用いてストリームオブジェクトの選択と各マルチメ
ディアデータの開始時刻の決定を行う。

【００９７】次に、コンテンツオブジェクトとストリー
ムオブジェクトとマルチメディアデータとの関係につい
て、ビデオデータを例にとって説明する。図１１は、コ
ンテンツオブジェクトとストリームオブジェクトとビデ
オデータの関係を示している。

【００９８】図１１において、例えば、“７時のニュー
ス”という１時間番組に対して、品質の異なる３つのビ
デオデータ８２ａ、８２ｂ、８２ｃがマルチメディアデ
ータ格納部１１に格納されているとする。ここで、ビデ
オデータ８２ａは、例えば、フレームレートが３０ｆｐ
ｓであり、ビデオデータ８２ｂは、例えば、フレームレ
ートが１５ｆｐｓであり、ビデオデータ８２ｃは、例え
ば、フレームレートが１０ｆｐｓである。

【００９９】これらのビデオデータ８２ａ〜８２ｃに対
し、“７時のニュース”という１時間番組の内容属性に
対応するコンテンツオブジェクト８０ａを生成する。こ
こで、コンテンツオブジェクト８０ａに対応する識別子
ｏｉｄをｃ１とする。

【０１００】さらに、“７時のニュース”という１時間
番組の内容属性を有するビデオデータ８２ａ〜８２ｃが
３つ有るので、これらのビデオデータ８２ａ、８２ｂ、
８２ｃにそれぞれ対応するストリームオブジェクト８１
ａ、８１ｂ、８１ｃを生成する。そして、ストリームオ
ブジェクト８１ａ、８１ｂ、８１ｃのビデオデータのフ
ァイル名ｆｉｌｅＮａｍｅに、ビデオデータ８２ａ、８
２ｂ、８２ｃの各ファイル名ｄａｔａ１、ｄａｔａ２、
ｄａｔａ３をそれぞれ記述する。

【０１０１】ここで、ストリームオブジェクト８１ａに
対応する識別子ｏｉｄをｓ１とし、ストリームオブジェ
クト８１ｂに対応する識別子ｏｉｄをｓ２とし、ストリ
ームオブジェクト８１ｃに対応する識別子ｏｉｄをｓ３
とする。

【０１０２】この時、コンテンツオブジェクト８０ａの
ストリームデータの集合ｓｔｒｅａｍｓには、識別子の
集合｛ｓ１、ｓ２、ｓ３｝が記述され、ストリームオブ
ジェクト８１ａ〜８１ｃのコンテンツｃｏｎｔｅｎｔｓ
には、識別子ｃ１が記述される。

【０１０３】次に、“７時のニュース”という１時間番
組の中の一部分の“天気予報”という内容に着目した場
合、コンテンツオブジェクト８０ａにビューを設定する
ことにより、“天気予報”という内容属性に対応するコ
ンテンツオブジェクト（ビューオブジェクト）８０ｂを
生成する。ここで、コンテンツオブジェクト８０ｂに対
応する識別子ｏｉｄをｃ２とする。

【０１０４】この時、コンテンツオブジェクト８０ａの
部分コンテンツｃｈｉｌｄｓには、コンテンツオブジェ
クト８０ｂに対応する識別子｛ｃ２｝が記述される。ま
た、コンテンツオブジェクト８０ｂの元のコンテンツｐ
ａｒｅｎｔには、コンテンツオブジェクト８０ａに対応
する識別子ｃ１が記述される。また、コンテンツオブジ
ェクト８０ｂのストリームデータの集合ｓｔｒｅａｍｓ
には、コンテンツオブジェクト８０ａと同様に識別子の
集合｛ｓ１、ｓ２、ｓ３｝が記述される。

【０１０５】もし、品質の異なる新しいビデオデータが
さらに追加された場合、その新しいビデオデータのスト
リームオブジェクトの識別子を、コンテンツオブジェク
ト８０ａのストリームデータの集合ｓｔｒｅａｍｓに追
加するとともに、コンテンツオブジェクト８０ｂのスト
リームデータの集合ｓｔｒｅａｍｓにも追加する。

【０１０６】こうして、コンテンツオブジェクト８０ａ
とそのビューを表すコンテンツオブジェクト８０ｂと
が、ストリームオブジェクト８１ａ〜８１ｃを介して、
ビデオデータ８２ａ〜８２ｃにそれぞれ関係付けられ
る。したがって、スケジューラ２４は、環境や資源の制
約に応じて適当なフレームレートのビデオデータを選択
することが可能になる。

【０１０７】次に、図１２を参照しながら、ストリーム
オブジェクトのコンテンツオブジェクトへの対応付けの
方法について説明する。まず、図１２（ａ）に示すよう
に、コンテンツオブジェクト８３に対しストリームオブ
ジェクト８４が対応付けられている場合を考える。ここ
で、ストリームオブジェクト８４は、ＭＰＥＧ−１ｖｉ
ｄｅｏフォーマットで、フレームサイズが３２０×２４
０、ピクチャレートが３０ｆｐｓ（フレーム／秒）、再
生時のＣＰＵ３１に対する負荷が１００％のストリーム
データを表すものとする。

【０１０８】次に、図１２（ｂ）に示すように、ストリ
ームオブジェクト８４と異なる品質のストリームデー
タ、例えば、ＭＰＥＧ−１ｖｉｄｅｏフォーマットで、
フレームサイズが３２０×２４０、ピクチャレートが１
５ｆｐｓ、再生時のＣＰＵ３１に対する負荷が６０％の
ストリームデータと、ＭＰＥＧ−１ｖｉｄｅｏフォーマ
ットで、フレームサイズが１６０×１１２、ピクチャレ
ートが３０ｆｐｓ、再生時のＣＰＵ３１に対する負荷が
３５％のストリームデータとを生成し、これらに対応す
るストリームオブジェクトをそれぞれストリームオブジ
ェクト８５、８６とする。

【０１０９】次に、図１２（ｃ）に示すように、新たに
生成したストリームオブジェクト８５、８６をコンテン
ツオブジェクト８３に対応付ける。これは、ストリーム
オブジェクト８４に対し、メソッドｎｅｗＲａｔ
ｅ（）、ｎｅｗＳｉｚｅ（）をそれぞれ施すことにより
行う。

【０１１０】以上により、コンテンツオブジェクト８３
を表示する時に、負荷および品質が異なる３種類のスト
リームオブジェクト８４、８５、８６に対応するストリ
ームデータの中から適切なものを選択して用いることが
できる。

【０１１１】例えば、動画像と音声とを同期させて出力
したり、検索した複数の動画像を同時にウィンドウに表
示させたりすることにより、複数のデータを同時に出力
する場合、計算機が持つＣＰＵ３１、メモリ３２、出力
装置２０などの資源が有限であるため、資源が足りなく
なる可能性がある。

【０１１２】一方、データを再生する場合に使用する資
源とデータの再生品質との間には関連性がある。そし
て、ある特定の品質を持つデータを再生する場合、その
特定の品質を持つデータの再生に要する量の資源が必要
である。そのため、資源が足りないまま再生しようとす
ると、品質の劣化が生じる場合がある。

【０１１３】特に、動画像の場合、資源が足りない状態
で再生すると、フレームの再生が間に合わないため正し
い再生レートより遅くなったり、フレームが不定期に飛
ばされたりして表示される。また、音声の場合、不定期
に音飛びが生じる。

【０１１４】このため、ビューを再生するときに確保で
きる資源を用いて再生できる最も品質の良いデータを選
択して用いることが望まれる。本実施形態では、ビュー
の再生をする場合、ビューに対応するコンテンツに関連
付けられているストリームオフジェクトの属性を見て、
適切なデータを選択することができ、限られた資源の範
囲内で最も品質の良いデータを再生することができる。

【０１１５】例えば、データが動画像の場合、データを
再生するのに要するＣＰＵ３１の資源量は、フレームサ
イズとピクチャレートによって左右される。そのため、
デジタル化されているデータに対し、フレームサイズや
ピクチャレートを変化させることにより、異なる品質で
負荷の異なるデータを新たに生成することができる。

【０１１６】例えば、ある動画像データのピクチャレー
トがｒｆｐｓの場合、フレームをｎ個置きに選択するこ
とにより、ピクチヤレートがｒ／（ｎ＋１）ｆｐｓの動
画像データを生成することができる。そして、ピクチヤ
レートがｒ／（ｎ＋１）ｆｐｓの動画像データをコンテ
ンツと対応付けることにより、異なる負荷のデータをコ
ンテンツに追加することが可能である。

【０１１７】また、既に存在するデータからフレームサ
イズを小さくしたフレームを生成し、そのフレームを用
いてフレームサイズが小さく負荷も小さい（品質も元の
データより劣化した）新たな動画像データを生成し、コ
ンテンツと対応付けることができる。

【０１１８】このように、使用できる資源の範囲内で再
生できるデータを選択する自由度を増すことが可能とな
る。次に、図１３および図１４を参照しながら、マルチ
メディアデータベースにおいて、ピクチャレートを変え
たマルチメディアデータを生成する例を示す。これは、
メソッドｎｅｗＲａｔｅ（）を用いて行う。

【０１１９】図１３において、動画像のフレームは一定
のインターバルで表示される。この場合、フレームをｎ
個置きに選択すると、ピクチャレートが元のデータより
小さいデータを得ることができる。例えば、図１３に示
すように、ピクチャレートがｒｆｐｓのフレームから１
個置きにフレームを選択した場合、ピクチャレートが
（ｒ／２）ｆｐｓのデータを得ることができる。

【０１２０】図１４は、レートを変えたマルチメディア
データの生成装置を示すブロック図である。図１４にお
いて、ＭＰＥＧファイル９１には、ピクチャレートがｒ
ｆｐｓのＭＰＥＧ−１ｖｉｄｅｏデータが格納されてい
る。このピクチャレートがｒｆｐｓのＭＰＥＧ−１ｖｉ
ｄｅｏデータをＭＰＥＧデコーダ９２で復号して、フレ
ームデータを作成する。そして、フレームをｎ個おきに
選択するフレーム選択プログラム９３を用いて、このフ
レームデータを間引く。

【０１２１】フレーム選択プログラム９３により選択さ
れたフレームデータをＭＰＥＧエンコーダ９４で符号化
することにより、ピクチャレートが（ｒ／（ｎ＋１））
ｆｐｓのＭＰＥＧ−１ｖｉｄｅｏデータを生成し、ＭＰ
ＥＧファイル９５に格納する。

【０１２２】そして、このピクチャレートが（ｒ／（ｎ
＋１））ｆｐｓのＭＰＥＧ−１ｖｉｄｅｏデ−タに対応
するストリームオブジェクトを生成し、コンテンツオブ
ジェクトに対応づけることにより、コンテンツを異なる
ピクチヤレートで表現できる。

【０１２３】次に、図１５および図１６を参照しなが
ら、フレームサイズを変えたマルチメディアデータを生
成する例を示す。これは、メソッドｎｅｗＳｉｚｅ（）
を用いて行い、ＭＰＥＧ−１ｖｉｄｅｏデータから各画
素を（ｎ−１）個おきに選択することにより、フレーム
サイズを１／ｎに縮小する。

【０１２４】例えば、図１５（ａ）に示すように、元の
フレーム９６のフレームサイズがｃ画素×ｒ画素のＭＰ
ＥＧ−１ｖｉｄｅｏデータから、図１５（ｂ）（ｃ）に
示すように、Ｖ_1,0、Ｖ_3,0、Ｖ_5,0、・・・、Ｖ_0,1、Ｖ_1,1、Ｖ_2,1、・・・、Ｖ_1,2、Ｖ_3,2、Ｖ_5,2、・・・、Ｖ_0,3、Ｖ_1,3、Ｖ_2,3、・・・、・・・・・・・・・・・・・・・、の画素を間引くことにより、縮小したフレーム９７のフ
レームサイズが（ｃ／２）画素×（ｒ／２）画素のＭＰ
ＥＧ−１ｖｉｄｅｏデータを生成することができる。

【０１２５】図１６は、フレームサイズを変えたマルチ
メディアデータの生成装置を示すブロック図である。図
１６において、ＭＰＥＧファイル１０１には、フレーム
サイズがｃ画素×ｒ画素のＭＰＥＧ−１ｖｉｄｅｏデー
タが格納されている。このフレームサイズがｃ画素×ｒ
画素のＭＰＥＧ−１ｖｉｄｅｏデータをＭＰＥＧデコー
ダ１０２で復号してフレームデータを作成する。このフ
レームデータの各画素を（ｎ−１）個おきに選択するサ
イズ選択プログラム１０３を用いて間引く。

【０１２６】サイズ選択プログラム１０３により縮小さ
れたフレームデータをＭＰＥＧエンコーダ１０４で符号
化することにより、フレームサイズが（ｃ／ｎ）画素×
（ｒ／ｎ）画素のＭＰＥＧ−１ｖｉｄｅｏデータを生成
し、ＭＰＥＧファイル１０５に格納する。

【０１２７】そして、このフレームサイズが（ｃ／ｎ）
画素×（ｒ／ｎ）画素のＭＰＥＧ−１ｖｉｄｅｏデ−タ
に対応するストリームオブジェクトを生成し、コンテン
ツオブジェクトに対応付けることにより、コンテンツを
異なるフレームサイズで表現できる。

【０１２８】尚、上述した例では、フレームデータの各
画素を（ｎ−１）個おきに選択してフレームサイズを縮
小するようにしているが、ｎ×ｎ画素の平均値を用いて
１／ｎの大きさに縮小したフレームを作成してもよい。

【０１２９】次に、図１７を参照しながら、スケジュー
ラ２４によるビューオブジェクトのスケジューリング処
理について説明する。今、ビューオブジェクトが選択可
能なデータが、図１７（ａ）に示すように、優先順位１
〜６のストリームオブジェクトにより示されているとす
る。

【０１３０】ここで、優先順位１のストリームオブジェ
クトは、フレームサイズが３２０×２４０画素で、ピク
チャレートが３０ｆｐｓであり、ＣＰＵ３１の負荷は１
００％となる。

【０１３１】また、優先順位２のストリームオブジェク
トは、フレームサイズが３２０×２４０画素で、ピクチ
ャレートが１５ｆｐｓであり、ＣＰＵ３１の負荷は６０
％となる。

【０１３２】また、優先順位３のストリームオブジェク
トは、フレームサイズが３２０×２４０画素で、ピクチ
ャレートが１０ｆｐｓであり、ＣＰＵ３１の負荷は４５
％となる。

【０１３３】また、優先順位４のストリームオブジェク
トは、フレームサイズが１６０×１１２画素で、ピクチ
ャレートが３０ｆｐｓであり、ＣＰＵ３１の負荷は３５
％となる。

【０１３４】また、優先順位５のストリームオブジェク
トは、フレームサイズが１６０×１１２画素で、ピクチ
ャレートが１５ｆｐｓであり、ＣＰＵ３１の負荷は２０
％となる。

【０１３５】また、優先順位６のストリームオブジェク
トは、フレームサイズが１６０×１１２画素で、ピクチ
ャレートが１０ｆｐｓであり、ＣＰＵ３１の負荷は１５
％となる。

【０１３６】これらの優先順位は、異なるフレームサイ
ズおよびピクチャレートの場合、フレームサイズの大き
い方から優先して選択し、同じフレームサイズでピクチ
ャレートが異なる場合、ピクチャレートの大きい方から
優先して選択するという方法で決定する。

【０１３７】これらのストリームオブジェクトを用い
て、図１７（ｂ）に示すように、長さの異なる４つのビ
ューオブジェクトｖｏ１、ｖｏ２、ｖｏ３、ｖｏ４を再
生する場合、ビューオブジェクト同士の時間に関する重
なりは、例えば、４個の時間帯Ｔ１、Ｔ２、Ｔ３、Ｔ４
に分けられるものとする。

【０１３８】この場合、時間帯Ｔ１から順に負荷を計算
しながら、使用するデータを決定していく。ただし、同
一時間帯において表示される画像は、なるべく品質が同
じになるように選択する。

【０１３９】まず、時間帯Ｔ１において、ビューオブジ
ェクトｖｏ４のみが表示されるので、一旦優先順位１の
ストリームオブジェクトを選択し、フレームサイズが３
２０×２４０画素で、ピクチャレートが３０ｆｐｓで表
示され、ＣＰＵ３１の負荷は１００％となる。

【０１４０】次に、時間帯Ｔ２において、２つのビュー
オブジェクトｖｏ３、ｖｏ４が表示される。この２つの
ビューオブジェクトｖｏ３、ｖｏ４を優先順位１のスト
リームオブジェクトで同時に表示した場合、ＣＰＵ３１
の負荷の合計は２００％となって、１００％を越えてし
まうので、ビューオブジェクトｖｏ３、ｖｏ４に対し、
優先順位３のストリームオブジェクトを選択する。この
ことにより、フレームサイズが３２０×２４０画素で、
ピクチャレートが１０ｆｐｓで表示され、ＣＰＵ３１の
負荷の合計は９０％となる。

【０１４１】次に、時間帯Ｔ３において、４つのビュー
オブジェクトｖｏ１〜ｖｏ４が表示される。これら４つ
を同時に表示するためには、フレームサイズが３２０×
２４０画素の画像を選択することはできず、フレームサ
イズを縮小する必要がある。そのため、ビューオブジェ
クトｖｏ３、ｖｏ４において、時間帯Ｔ１、Ｔ２のスト
リームオブジェクトの選択をやり直し、優先順位４のス
トリームオブジェクトを選択する。

【０１４２】こうして、図１７（ｂ）に示すように、フ
レームサイズが１６０×１１２画素で、ピクチャレート
が３０ｆｐｓの画像が表示され、時間帯Ｔ１のＣＰＵ３
１の負荷は３５％となり、時間帯Ｔ２のＣＰＵ３１の負
荷の合計は７０％となる。

【０１４３】また、時間帯Ｔ３のビューオブジェクトｖ
ｏ１に対し、優先順位４のストリームオブジェクトを選
択し、ビューオブジェクトｖｏ２〜ｖｏ４に対し、優先
順位５のストリームオブジェクトを選択する。この場
合、ＣＰＵ３１の負荷の合計は９５％となる。

【０１４４】次に、時間帯Ｔ４において、ビューオブジ
ェクトｖｏ４のみが表示される。この場合、時間帯Ｔ３
でフレームサイズが１６０×１１２画素に縮小され、優
先順位が４に設定されている。このため、時間帯Ｔ４で
も同サイズでピクチャレートが３０ｆｐｓの画像を選択
する。この場合、ＣＰＵ３１の負荷は３５％となる。

【０１４５】以上の選択処理により、ビューオブジェク
トｖｏ３の場合、時間帯Ｔ２において、フレームサイズ
が１６０×１１２画素で、ピクチャレートが３０ｆｐｓ
の画像データを、時間帯Ｔ３において、フレームサイズ
が１６０×１１２画素で、ピクチャレートが１５ｆｐｓ
の画像データを連続して表示することができる。

【０１４６】また、ビューオブジェクトｖｏ４の場合、
時間帯Ｔ１、Ｔ２において、フレームサイズが１６０×
１１２画素で、ピクチャレートが３０ｆｐｓの画像デー
タを、時間帯Ｔ３において、フレームサイズが１６０×
１１２画素で、ピクチャレートが１５ｆｐｓの画像デー
タを、時間帯Ｔ４において、フレームサイズが１６０×
１１２画素で、ピクチャレートが３０ｆｐｓの画像デー
タを連続して表示することができる。

【０１４７】以上説明したように、先願に示されたコン
テンツオブジェクトとそのビューオブジェクトの関係、
およびコンテンツオブジェクトとストリームオブジェク
トの関係を用いることで、多様なマルチメディアデータ
から適切なものを自動的に選択し、それらをスケジュー
リングすることができる。

【０１４８】次に、図１８から図２４までを参照しなが
ら、図２のマルチメディアデータ・プレゼンテーション
システムの動作について説明する。まず、スクリプトを
利用したプレゼンテーションの流れを図１８に示す。図
１８において、まずスクリプトオブジェクトに対してメ
ソッドｐａｒｓｅ（）を作用させると、スクリプト管理
部１７内のスクリプトパーザ２２が、スクリプトオブジ
ェクトのｓｃｒｉｐｔＦｉｌｅ属性に指定されたファイ
ルを読み込んで解析する。

【０１４９】そして、個々のコンテンツの実行開始時刻
を計算し、その値を属性とする実行用オブジェクトを実
行用オブジェクト生成部２３を介して生成し、その実行
用オブジェクトをスクリプトオブジェクトのｅｘｅｃｓ
属性として、スクリプトオブジェクトを更新する。

【０１５０】次に、生成された実行用オブジェクトに対
してメソッドｓｃｈｅｄｕｌｅ（）を作用させると、ス
クリプト実行部１８内のスケジューラ２４が起動され
る。スケジューラ２４は、実行用オブジェクトをスケジ
ューリングし、起動のために必要な時間を考慮した実行
開始時刻と使用ストリームを決定し、それらをｓｃｈｅ
ｄｕｌｅＤａｔａ属性として実行用オブジェクトを更新
する。

【０１５１】さらに、その実行用オブジェクトにメソッ
ドｅｘｅｃｕｔｅ（）を作用させると、データ表示部２
５は、実行用オブジェクトのｓｃｈｅｄｕｌｅＤａｔａ
属性に記述されたストリームのうち、ｔａｒｇｅｔ属性
に記述されたコンテンツオブジェクトにより指定される
部分を、ｏｐｅｒａｔｉｏｎ属性に記述された方法で、
スケジュールされた実行開始時刻に起動して実行する。

【０１５２】図１８に示す処理の流れは、スクリプトオ
ブジェクトにメソッドｄｏ（）を作用させることで、自
動的に行われる。また、メソッドｐａｒｓｅ（）でスク
リプトファイルを解析した結果、ターゲットオブジェク
トがスクリプトオブジェクトであった場合は、そのスク
リプトオブジェクトに再びｐａｒｓｅ（）を作用させる
ことを繰り返す。こうして、最終的にスクリプトパーザ
２２から出力されるターゲットオブジェクトは、すべて
コンテンツオブジェクトとなる。

【０１５３】図１９は、スクリプトファイルに記述でき
るスクリプトのオペレーションの例を示している。スク
リプトファイルの記述に使用できるオペレーションに
は、オブジェクト生成に関するメソッドとして、新しい
コンテンツオブジェクトを生成するｎｅｗＣｏｎｔｅｎ
ｔｓ（）、コンテンツの部分オブジェクトであるビュー
オブジェクトを生成するｓｅｔＶｉｅｗ（）、各種メデ
ィアのストリームオブジェクトを生成するｎｅｗＶｉｄ
ｅｏ（）、ｎｅｗＡｕｄｉｏ（）、ｎｅｗＩｍａｇ
ｅ（）、ｎｅｗＴｅｘｔ（）、各種ストリームの品質の
異なるストリームオブジェクトを生成するｎｅｗＲａｔ
ｅ（）、ｎｅｗＳｉｚｅ（）等がある。

【０１５４】上述のように、メソッドｎｅｗＣｏｎｔｅ
ｎｔｓ（）およびｓｅｔＶｉｅｗ（）は、Ｃｏｎｔｅｎ
ｔｓクラスのオブジェクトを起動オブジェクトとし、ｎ
ｅｗＶｉｄｅｏ（）、ｎｅｗＡｕｄｉｏ（）、ｎｅｗＩ
ｍａｇｅ（）、ｎｅｗＴｅｘｔ（）は、それぞれ、Ｖｉ
ｄｅｏＣｏｎｔｅｎｔｓクラス、ＡｕｄｉｏＣｏｎｔｅ
ｎｔｓクラス、ＩｍａｇｅＣｏｎｔｅｎｔｓクラス、Ｔ
ｅｘｔＣｏｎｔｅｎｔｓクラスのオブジェクトを起動オ
ブジェクトとする。

【０１５５】また、ｎｅｗＲａｔｅ（）はＶｉｄｅｏク
ラスまたはＡｕｄｉｏクラスのオブジェクトを起動オブ
ジェクトとし、ｎｅｗＳｉｚｅ（）はＶｉｄｅｏクラス
またはＩｍａｇｅクラスのオブジェクトを起動オブジェ
クトとする。

【０１５６】また、検索に関するメソッドとして、起動
オブジェクトに指定キーワードがあるかどうかを調べる
ｋｅｙｗｏｒｄ（）があり、実行制御に関するメソッド
として、オペレーションがｐｌａｙであることを指定す
るｐｌａｙ（）、オペレーションがｄｏであることを指
定するｄｏ（）、実行用オブジェクトを実行するｅｘｅ
ｃｕｔｅ（）がある。

【０１５７】メソッドｋｅｙｗｏｒｄ（）、ｐｌａ
ｙ（）、およびｄｏ（）はＴａｒｇｅｔクラスのオブジ
ェクトを起動オブジェクトとし、メソッドｅｘｅｃｕｔ
ｅ（）はＥｘｅｃクラスのオブジェクトを起動オブジェ
クトとする。

【０１５８】また、時間制御に関するメソッドとして、
起動オブジェクトの開始時刻の同期を指定するｐａｒａ
ｌｌｅｌ（）、起動オブジェクトを連続して開始するよ
うに指定するｓｅｒｉａｌ（）、起動オブジェクトの終
了時刻の同期を指定するｒｅｎｄｅｚｖｏｕｓ（）、起
動オブジェクトの開始時刻を指定した時間内に設定する
ａｎｙｔｉｍｅ（）、起動オブジェクトの開始時刻を指
定した時間だけ遅延させるｗａｉｔ（）がある。

【０１５９】これらの時間制御に関するメソッドは、Ｅ
ｘｅｃクラスのオブジェクトを起動オブジェクトとす
る。さらに、オブジェクト指向データベースシステムが
提供している一般的なメソッドである、起動オブジェク
トの属性を表示するｐｒｉｎｔ（）、起動クラスの新規
オブジェクトを生成するｎｅｗ（）、起動オブジェクト
と同じ属性を持つ新規オブジェクトを生成するｃｏｐｙ
（）等も利用できる。

【０１６０】上述の時間制御用メソッドに関しては、起
動オブジェクトが複数の実行用オブジェクトの集合であ
る場合は、そのすべての要素のオブジェクトに対して対
応する時間制御を行う。また、起動オブジェクトが実行
用オブジェクトの複数の集合を｛｝でまとめたもので
ある場合は、各集合を塊り（ブロック）と見なして、ブ
ロック毎に対応する時間制御を行う。

【０１６１】スクリプトファイルはこれらのオペレーシ
ョンを利用して記述されるが、それ以外に、使用するオ
ブジェクトをスクリプトファイルの最初の部分で宣言す
る、スクリプトの最後に“ｅｎｄ；”を記述する、各文
の最後は“；”で終了するというような決まりがある。

【０１６２】図２０は、スクリプトファイルの第１の例
を示している。このスクリプトファイルの内容を各文に
付けられた文番号にしたがって説明する。１：ＶｉｄｅｏＣｏｎｔｅｎｔｓクラスのオブジェクト
の集合（ｓｅｔ）としてｖｓを用いることを宣言する。２：Ｅｘｅｃクラスのオブジェクトの集合としてｅｘｓ
を用いることを宣言する。３：オブジェクト指向データベースシステムで用意され
た検索文を利用して、キーワードが“相撲”であるＶｉ
ｄｅｏＣｏｎｔｅｎｔｓオブジェクトをデータベース３
３より検索し、検索結果をｖｓに代入する。４：ｖｓの各オブジェクトに対してｐｌａｙオペレーシ
ョンを適用するような実行用オブジェクトを生成し、結
果をｅｘｓに代入する。５：実行用オブジェクトｅｘｓを並列実行（同時に実行
開始する）ように指定し、その結果をｅｘｓに代入す
る。６：ｅｘｓを実行する。７：スクリプトの終了。

【０１６３】このスクリプトファイルのファイル名を
“ｘｘｘｘ．ｓｃｒ”とすると、これを解析した時に利
用されるオブジェクトの関係は、図２１に示すようにな
る。スクリプトファイルｘｘｘｘ．ｓｃｒに対応するス
クリプトオブジェクトをｓ１（ｋｅｙｗｏｒｄｓ＝“相
撲”、ＳｃｒｉｐｔＦｉｌｅ＝“ｘｘｘｘ．ｓｃｒ”）
とし、ｋｅｙｗｏｒｄｓ属性として“相撲”を有する２
つのビューオブジェクトｖ１（ｔｉｍｅＬｅｎｇｔｈ＝
５）、ｖ２（ｔｉｍｅＬｅｎｇｔｈ＝１０）が検索され
たものとする。

【０１６４】スクリプトオブジェクトｓ１を解析する
と、検索されたビューオブジェクトの集合（ｖ１，ｖ
２）に対応して、“ｐｌａｙ”をｏｐｅｒａｔｉｏｎ属
性とし、互いに並列実行される実行用オブジェクト（ｅ
ｘ１，ｅｘ２）が生成される。このとき、実行用オブジ
ェクトｅｘ１、ｅｘ２のｔａｒｇｅｔ属性には、ビュー
オブジェクトｖ１、ｖ２がそれぞれ記述され、ｓｃｒｉ
ｐｔ属性にはｓ１がともに記述される。

【０１６５】さらに、これらの実行用オブジェクトｅｘ
１、ｅｘ２は、スクリプトオブジェクトｓ１のｅｘｅｃ
ｓ属性に記述される。図２１において、実行用オブジェ
クトｅｘ１、ｅｘ２は、ビューオブジェクトｖ１、ｖ２
の時間関係を陽に表現していることが分かる。例えば、
実行用オブジェクトｅｘ１、ｅｘ２のｓｔａｒｔＴｉｍ
ｅの値はともに０であり、同時に実行が開始されること
を示している。また、これらのａｌｌＴｉｍｅＬｅｎｇ
ｔｈの値は、ビューオブジェクトｖ１、ｖ２のｔｉｍｅ
Ｌｅｎｇｔｈのうち大きい方の値１０に揃えられてい
る。

【０１６６】スケジューラ２４は、実行用オブジェクト
ｅｘ１、ｅｘ２により表現された時間関係を利用してス
ケジューリングを行うことになる。図２２は、図２のス
クリプトファイルを解析した結果得られた２つのビュー
オブジェクトｖ１、ｖ２の理想的な実行形態を示すタイ
ミングチャートである。図２２において、ビューオブジ
ェクトｖ１、ｖ２の実行が時刻０から同時に開始され、
時刻５においてビューオブジェクトｖ１が終了し、時刻
１０においてビューオブジェクトｖ２が終了する。

【０１６７】こうして、スクリプトファイルに記述され
たシナリオに基づいて、検索されたビューオブジェクト
ｖ１、ｖ２が並列に実行されることになる。次に、図２
３は、スクリプトファイルの第２の例を示している。こ
のスクリプトファイルの内容を各文に付けられた文番号
にしたがって説明する。１：Ｓｃｒｉｐｔクラスのオブジェクトの集合としてｓ
ｓを用いることを宣言する。２：Ｅｘｅｃクラスのオブジェクトの集合としてｅｘｓ
を用いることを宣言する。３：オブジェクト指向データベースシステムで用意され
た検索文を利用して、キーワードが“相撲”または“野
球”であるスクリプトオブジェクトをデータベース３３
より検索し、検索結果をｓｓに代入する。４：ｓｓの各オブジェクトに対してｄｏオペレーション
を適用するような実行用オブジェクトを生成し、結果を
ｅｘｓに代入する。５：実行用オブジェクトｅｘｓを直列実行（連続して実
行する）ように指定し、その結果をｅｘｓに代入する。６：ｅｘｓを実行する。７：スクリプトの終了。

【０１６８】このように、図２３のスクリプトファイル
には、データベース３３から検索されたスクリプトオブ
ジェクトにｄｏオペレーションを適用するような実行用
オブジェクトを生成することが記述されている。この実
行用オブジェクトを実行すると、スクリプトオブジェク
トにメソッドｄｏ（）が適用される。

【０１６９】これにより、図１８に示すような流れにし
たがって、そのスクリプトオブジェクトに対応するスク
リプトファイルが解析され、新たな実行用オブジェクト
が生成されることになる。したがって、図２３のスクリ
プトファイルは、別のスクリプトファイルが入れ子にな
った構造を持っていることが分かる。

【０１７０】また、スクリプトファイル内に入れ子にな
ったスクリプトファイルを解析した結果、さらに別のス
クリプトオブジェクトにｄｏオペレーションを適用する
こともあり、スクリプトファイルの入れ子構造は２つ以
上の階層を成すことがある。こうしたスクリプトファイ
ルの入れ子構造を利用すれば、非常に複雑なプレゼンテ
ーションのシナリオを、比較的簡単に記述することが可
能になる。

【０１７１】図２３のスクリプトファイルの例では、ｋ
ｅｙｗｏｒｄｓ属性が“相撲”であるスクリプトオブジ
ェクトとして、図２１に示したスクリプトオブジェクト
ｓ１が検索され、ｋｅｙｗｏｒｄｓ属性が“野球”であ
るスクリプトオブジェクトとして、ビューオブジェクト
ｖ３（ｔｉｍｅＬｅｎｇｔｈ＝８）のみから成るスクリ
プトオブジェクトｓ２が検索されたとする。

【０１７２】この場合、図２３のスクリプトファイルが
解析されると、対応するスクリプトオブジェクトのｅｘ
ｅｃｓ属性は、入れ子になっているスクリプトオブジェ
クトｓ１、ｓ２のスクリプトファイルを再び解析して得
られる３つの実行用オブジェクトの集合となる。これら
の実行用オブジェクトは、それぞれビューオブジェクト
ｖ１、ｖ２、ｖ３をｔａｒｇｅｔ属性として有する。

【０１７３】図２４は、図２３のスクリプトファイルを
解析した結果得られた２つのスクリプトオブジェクトｓ
１、ｓ２の理想的な実行形態を示すタイミングチャート
である。図２４において、まずスクリプトオブジェクト
ｓ１から得られたビューオブジェクトｖ１、ｖ２が、図
２２に示すように並列に実行される。これに引き続い
て、スクリプトオブジェクトｓ２から得られたビューオ
ブジェクトｖ３の実行が、時刻１０において開始され時
刻１８において終了する。

【０１７４】こうして、スクリプトファイルに記述され
たシナリオに基づいて、検索されたスクリプトオブジェ
クトｓ１、ｓ２が直列に実行されることになり、その結
果として、ビューオブジェクトｖ１、ｖ２が並列に実行
され、ビューオブジェクトｖ２に連続してビューオブジ
ェクトｖ３が実行される。

【０１７５】次に、図２５から図３８までを参照しなが
ら、図２のマルチメディアデータ・プレゼンテーション
システムにより行われるプレゼンテーション処理を詳細
に説明する。

【０１７６】図２５は、スクリプトを利用したプレゼン
テーションの全体の流れを示すフローチャートである。
入力装置１９からスクリプトファイルまたはファイル名
が入力されると図２５の処理が開始され、スクリプト管
理部１７は、まず与えられたスクリプトファイルに対応
するスクリプトオブジェクトが、スクリプトオブジェク
ト格納部１５にあるかどうかを判定する（ステップＳ
１）。

【０１７７】ここで、もし以前に入力されたスクリプト
ファイルのファイル名が入力された場合は、対応するス
クリプトオブジェクトが存在すると判定し、新たにスク
リプトファイルが入力された場合は対応するスクリプト
オブジェクトは存在しないと判定する。

【０１７８】対応するスクリプトオブジェクトが既に存
在する場合は、次に、スクリプトオブジェクト管理部２
１が、そのスクリプトオブジェクトをスクリプトオブジ
ェクト格納部１５より検索する（ステップＳ２）。ま
た、それが存在しない場合は、スクリプトオブジェクト
管理部２１は、入力されたスクリプトファイルに対応す
るスクリプトオブジェクトを新規に生成して、スクリプ
トオブジェクト格納部１５に格納する（ステップＳ
３）。

【０１７９】ステップＳ２におけるスクリプトオブジェ
クトの検索は、オブジェクト指向データベースシステム
の提供する検索文を利用して行われる。例えば、スクリ
プトファイル“ｘｘｘｘ．ｓｃｒ”に対応するスクリプ
トオブジェクトを検索するには、ＳｃｒｉｐｔｆｒｏｍＳｃｒｉｐｔｗｈｅｒｅ
Ｓｃｒｉｐｔ．ｓｃｒｉｐｔＦｉｌｅ＝＝“ｘｘｘｘ．
ｓｃｒ”；という検索文が作成され、キーワードが“ｘｘｘｘ”の
スクリプトオブジェクトを検索するには、キーワードチ
ェック用のメソッドｋｅｙｗｏｒｄ（）を利用して、ＳｃｒｉｐｔｆｒｏｍＳｃｒｉｐｔｗｈｅｒｅ
Ｓｃｒｉｐｔ．ｋｅｙｗｏｒｄ（“ｘｘｘｘ”）；という検索文が作成される。そして、スクリプトオブジ
ェクト管理部２１はこれらの検索文に対応する検索処理
を行い、スクリプトオブジェクト格納部１５より該当す
るオブジェクトを検索する。

【０１８０】また、ステップＳ３におけるスクリプトオ
ブジェクトの新規生成は、オブジェクト指向データベー
スシステムの提供するメソッドｎｅｗ（）を利用して行
われる。

【０１８１】例えば、スクリプトファイル“ｘｘｘｘ．
ｓｃｒ”に対応するスクリプトオブジェクトを生成する
場合、Ｓｃｒｉｐｔ．ｎｅｗ（ｓｃｒｉｐｔＦｉｌｅ：＝“ｘ
ｘｘｘ．ｓｃｒ”）；により新規にオブジェクトが生成され、生成されたオブ
ジェクトがスクリプトオブジェクト格納部１５に格納さ
れる。

【０１８２】次に、スクリプトパーザ２２は、スクリプ
トファイルに対応するスクリプトオブジェクトに対して
メソッドｄｏ（）を適用し、スクリプトオブジェクトを
実行して（ステップＳ４）、処理を終了する。

【０１８３】例えば、実行するスクリプトオブジェクト
をｓｃとすると、ｓｃ．ｄｏ（）；によりそのスクリプトオブジェクトが実行され、これに
より、図１８の流れにしたがって、ｐａｒｓｅ（）、ｓ
ｃｈｅｄｕｌｅ（）、ｅｘｅｃｕｔｅ（）が順に実行さ
れる。

【０１８４】図２６は、メソッドｄｏ（）に基づくスク
リプトオブジェクトの実行処理を示すフローチャートで
ある。図２６において処理が開始されると、スクリプト
パーザ２２は、まずスクリプトオブジェクトが既に解析
されているかどうかを判定する（ステップＳ１１）。

【０１８５】ここで、実行対象のスクリプトオブジェク
トが新規に生成されたものでない場合、つまり、以前に
入力されたスクリプトファイルに対応する場合は、それ
は既に解析されていると判定し、ステップＳ３において
新規に生成されたスクリプトオブジェクトの場合は、ま
だ解析されていないと判定する。

【０１８６】スクリプトオブジェクトが既に解析されて
いる場合は、次に、スクリプト実行部１８が、スクリプ
トオブジェクトのｅｘｅｃｓ属性に記述された実行用オ
ブジェクトの集合の情報をもとに、実行用オブジェクト
格納部１６よりそれらの実行用オブジェクトを検索する
（ステップＳ１２）。

【０１８７】また、それがまだ解析されていない場合
は、スクリプトパーザ２２がそのスクリプトオブジェク
トにメソッドｐａｒｓｅ（）を適用することでそれを解
析して、実行用オブジェクト生成部２３に実行用オブジ
ェクトを生成させる（ステップＳ１３）。

【０１８８】次に、スクリプト実行部１８は、ステップ
Ｓ１２で検索された実行用オブジェクト、または、ステ
ップＳ１３で生成された実行用オブジェクトがスケジュ
ーリングされているかどうかを調べる（ステップＳ１
４）。そして、それらがスケジューリングされていない
場合は、メソッドｓｃｈｅｄｕｌｅ（）を適用して、ス
ケジューラ２４にスケジューリング処理を行わせる（ス
テップＳ１５）。

【０１８９】次に、データ表示部２５は、スケジューリ
ング後の実行用オブジェクトにメソッドｅｘｅｃｕｔｅ
（）を適用してそれらを実行し（ステップＳ１６）、処
理を終了する。尚、ステップＳ１４において、実行用オ
ブジェクトが既にスケジューリングされている場合は、
直ちにステップＳ１６の処理が行われる。

【０１９０】例えば、スクリプトオブジェクトをｓｃ、
ｓｃに対応する実行用オブジェクトの集合をｘｓとする
と、ｉｆ（ｓｃが既に解析されている）ｘｓ＝ｓｃ．ｅｘｅｃｓ；ｅｌｓｅｘｓ＝ｓｃ．ｐａｒｓｅ（）；ｉｆ（ｘｓがスケジューリングされていない）ｘｓ＝ｘｓ．ｓｃｈｅｄｕｌｅ（）；ｘｓ．ｅｘｅｃｕｔｅ（）；のような内容のプログラムを実行することで、スクリプ
トオブジェクトｓｃが実行される。

【０１９１】次に、図２７から図３８までを参照しなが
ら、図２６におけるステップＳ１３、Ｓ１５、Ｓ１６の
各処理の詳細について説明する。図２７は、ステップＳ
１３におけるスクリプトオブジェクトの解析処理のフロ
ーチャートである。図２７において処理が開始される
と、スクリプトパーザ２２は、スクリプトオブジェクト
のｓｃｒｉｐｔＦｉｌｅ属性に記述されたスクリプトフ
ァイルを解析して実行に適した形式に書き換える。

【０１９２】そして、実行用オブジェクト生成部２３
は、書き換えられたスクリプトファイルに基づいて必要
なメソッドを実行し、実行用オブジェクトの集合ＳＥＴ
１を生成する（ステップＳ２１）。

【０１９３】次に、実行用オブジェクト生成部２３は、
空集合ＳＥＴ２を生成し（ステップＳ２２）、ＳＥＴ１
が空であるかどうかを調べる（ステップＳ２３）。ＳＥ
Ｔ１が空でなければ、そこから１つの実行用オブジェク
トを取り出し、それをＸ１とおく（ステップＳ２４）。
そして、実行用オブジェクトＸ１のｔａｒｇｅｔ属性を
参照して、そこに記述されたターゲットオブジェクトが
スクリプトオブジェクトかコンテンツオブジェクトかを
調べる（ステップＳ２５）。

【０１９４】実行用オブジェクトのターゲットオブジェ
クトがスクリプトオブジェクトである場合は、Ｘ１．ｔａｒｇｅｔ．ｐａｒｓｅ（）；によりメソッドｐａｒｓｅ（）を再帰的に実行すること
で、そのスクリプトオブジェクトが解析され、実行用オ
ブジェクトの集合ＳＥＴ３が生成される（ステップＳ２
６）。

【０１９５】次に、実行用オブジェクト生成部２３は、
メソッドａｄｄ（）を利用してＳＥＴ２にＳＥＴ３の要
素を加え（ステップＳ２７）、メソッドｒｅｍｏｖ
ｅ（）を利用してＳＥＴ１から要素Ｘ１を取り除いて
（ステップＳ２９）、ステップＳ２３以降の処理を繰り
返す。

【０１９６】ステップＳ２５において、ターゲットオブ
ジェクトがコンテンツオブジェクトである場合は、単に
ＳＥＴ２に要素Ｘ１を加えて（ステップＳ２８）、ステ
ップＳ２９以降の処理を行う。

【０１９７】そして、ステップＳ２３においてＳＥＴ１
が空になると、そのときのＳＥＴ２を実行用オブジェク
ト格納部１６に格納し（ステップＳ３０）、メソッドｒ
ｅｔｕｒｎ（）によりＳＥＴ２を出力して（ステップＳ
３１）、処理を終了する。こうして出力されたＳＥＴ２
により、対応するスクリプトオブジェクトのｅｘｅｃｓ
属性が書き換えられる。

【０１９８】例えば、スクリプトオブジェクトをｓｃ、
対応するスクリプトファイルをｓｆ、実行用オブジェク
トの集合をｘｓとすると、ｓｆ＝ｓｃ．ｓｃｒｉｐｔＦｉｌｅ；ｘｓ＝ｓｆを解析した結果生成される実行用オブジェクトｌｏｏｐ（ｘｓのすべての実行用オブジェクトｘについて）ｉｆ（ｘ．ｔａｒｇｅｔのクラスがＳｃｒｉｐｔである）｛ｘ．ｔａｒｇｅｔ．ｐａｒｓｅ（）；ｘを新たに生成された実行用オブジェクトの集合に差し替える。

【０１９９】｝；ｓｃ．ｅｘｅｃｓ＝ｘｓ；のような内容のプログラムを実行することで、実行用オ
ブジェクトを生成して、実行用オブジェクト格納部１６
に格納することができる。

【０２００】スクリプトファイルの中に他のスクリプト
ファイルを表すスクリプトオブジェクトが入れ子になっ
ている場合、このような解析処理を実行することによ
り、入れ子になっているスクリプトオブジェクトが再帰
的に実行用オブジェクトに展開される。したがって、ス
ケジューラ２４は、スクリプトオブジェクトではなく、
実行用オブジェクトとそれに対応するコンテンツオブジ
ェクトとを参照しながら、スケジューリング処理を行う
ことができるようになる。

【０２０１】図２８は、図２７のステップＳ２１におけ
るにスクリプトファイルの解析処理のフローチャートで
ある。図２８において処理が開始されると、スクリプト
パーザ２２は、まず指定されたスクリプトファイルを読
み込み、文の終わり“；”を判断して、一文ずつ取り出
す（ステップＳ４１）。

【０２０２】次に、その文にメソッドが２つ以上存在す
るかどうかを調べ（ステップＳ４２）、２つ以上存在す
る場合はその文を分解して、一文に１つのメソッドとな
るようにする（ステップＳ４３）。

【０２０３】例えば、ａ．ｍ１（）．ｍ２（）；のように、あるオブジェクトａに対して２つのメソッド
ｍ１（）、ｍ２（）が作用している文の場合、仮のオブ
ジェクトｔを用いて、ｔ＝ａ．ｍ１（）；ｔ．ｍ２（）；のような２つの文に分解することができる。

【０２０４】次に、各文のメソッド名が、ｐｌａｙ、ｄ
ｏ、ｐａｒａｌｌｅｌ、ｓｅｒｉａｌ、ｒｅｎｄｅｚｖ
ｏｕｓのいずれかに該当するかどうかを調べる（ステッ
プＳ４４）。メソッド名がこれらのいずれかである場合
は、後述するように、それぞれのメソッドに対応して文
を書き換え（ステップＳ４５）、それ以外のメソッドの
場合はそのままにしておく。

【０２０５】次に、解析していない文が残っているかど
うかを調べ（ステップＳ４６）、そのような文があれ
ば、ステップＳ４１以降の処理を繰り返す。そして、ス
クリプトファイルのすべての文が解析されると、処理を
終了する。ここで、ステップＳ４５の書き換え処理を各
メソッド名毎に説明する。（イ）メソッド名がオペレーション（ｐｌａｙ、ｄｏ）
の場合ターゲットオブジェクトに、オペレーションを行うメソ
ッドｐｌａｙ（）またはｄｏ（）を適用するように記述
されている場合、そのメソッド名をｏｐｅｒａｔｉｏｎ
属性とする実行用オブジェクトを生成するように書き換
える。

【０２０６】例えば、ターゲットオブジェクトｔｇに対
してメソッドｐｌａｙ（）を適用する文ｔｇ．ｐｌａｙ（）；がスクリプトファイルに記述されている場合、この文
を、Ｅｘｅｃ．ｎｅｗ（ｓｃｒｉｐｔ：＝スクリプトファイル名、ｓｔａｒｔＴｉｍｅ：＝０，ｔａｒｇｅｔ：＝ｔｇ，ｏｐｅｒａｔｉｏｎ：＝“ｐｌａｙ” ａｌｌＴｉｍｅＬｅｎｇｔｈ：＝ｔｇ．ｔｉｍｅＬｅｎｇｔｈ）；と書き換える。書き換えられた文をステップＳ２１で実
行することにより、ｔｇにメソッドｐｌａｙ（）を適用
する新しい実行用オブジェクトが生成される。（ロ）メソッド名が時間制御用のメソッドである場合実行用オブジェクトに時間制御を行うメソッドであるｐ
ａｒａｌｌｅｌ（）、ｓｅｒｉａｌ（）、ｒｅｎｄｅｚ
ｖｏｕｓ（）のいずれかを適用するように記述されてい
る場合、それを実行することにより、実行用オブジェク
トの時間に関する属性ｓｔａｒｔＴｉｍｅ、ａｌｌＴｉ
ｍｅＬｅｎｇｔｈが変更される。

【０２０７】ここで、起動オブジェクトが実行用オブジ
ェクトの単体である場合は、そのオブジェクトを唯一の
要素とする集合に起動オブジェクトを書き換えてから実
行するものとする。個々の時間制御用メソッドに対応す
る書き換え処理の内容は以下の通りである。

【０２０８】（１）メソッド名がｐａｒａｌｌｅｌの場
合例えば、ｎ個の実行用オブジェクトの集合（ブロック）
をｘｓとして、ｘｓ．ｐａｒａｌｌｅｌ（）；と記述されているならば、ｘｓの個々の要素を取り出
し、それらの要素をそれぞれ要素１個の集合ｘｓ１，ｘ
ｓ２，．．．，ｘｓｎとみなして、ｘｓ１．ｐａｒａｌｌｅｌ（ｘｓ２）．．．．ｐａｒａ
ｌｌｅｌ（ｘｓｎ）；のように書き換える。

【０２０９】また、それぞれが１つ以上の実行用オブジ
ェクトから成るブロックであるｘｓ１，ｘｓ
２，．．．，ｘｓｎに対して、｛ｘｓ１，ｘｓ２，．．．，ｘｓｎ｝．ｐａｒａｌｌｅ
ｌ（）；と記述されているならば、ｘｓ１．ｐａｒａｌｌｅｌ（ｘｓ２）．．．．ｐａｒａ
ｌｌｅｌ（ｘｓｎ）；のように書き換える。

【０２１０】こうして、複数の実行用オブジェクトの並
列実行を記述する文も、複数のブロックの並列実行を記
述する文も、ともに同じ形式で表現することができた。
書き換えられた文をステップＳ２１で実行することによ
り、ｘｓ１，ｘｓ２，．．．，ｘｓｎの各要素の属性が
更新される。

【０２１１】ここで、２つのブロックの並列実行を表すｘｓ１．ｐａｒａｌｌｅｌ（ｘｓ２）は、ｉｆ（（ｘｓ１の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）＜（ｘｓ２の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ））ｌｏｏｐ（ｘｓ１のすべての要素ｘｉについて）ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝（ｘｓ２の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；ｅｌｓｅｌｏｏｐ（ｘｓ２のすべての要素ｘｉについて）ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝（ｘｓ１の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；のような処理を行うことを意味する。

【０２１２】通常、ａｌｌＴｉｍｅＬｅｎｇｔｈ属性
は、１つのブロック内のすべての要素について同じ値に
なっており、ｘｓ１の要素のａｌｌＴｉｍｅＬｅｎｇｔ
ｈとは、ｘｓ１の任意の要素のａｌｌＴｉｍｅＬｅｎｇ
ｔｈ属性に記述された値を意味する。

【０２１３】このような処理により、ｘｓ１とｘｓ２の
ａｌｌＴｉｍｅＬｅｎｇｔｈ属性のうち小さい方の値が
大きい方の値に更新され、ｘｓ１とｘｓ２のすべての要
素のａｌｌＴｉｍｅＬｅｎｇｔｈ属性が同じ値になる。

【０２１４】尚、ｘｓ１とｘｓ２の間では、各要素のｓ
ｔａｒｔＴｉｍｅ属性の値は独立に設定されているの
で、各ブロックで最初に開始される要素のｓｔａｒｔＴ
ｉｍｅ属性は、例えば生成時に設定された０のままにな
っている。このため、各要素のｓｔａｒｔＴｉｍｅ属性
を更新しなくても、ｘｓ１とｘｓ２は同時に実行開始さ
れる。

【０２１５】さらに、更新されたｘｓ１およびｘｓ２を
１つのブロックとみなして、ｐａｒａｌｌｅｌ（ｘｓ
３），．．．，ｐａｒａｌｌｅｌ（ｘｓｎ）を、同様に
して順に作用させていくことで、最終的にｘｓ１，ｘｓ
２，．．．，ｘｓｎのａｌｌＴｉｍｅＬｅｎｇｔｈ属性
が、それらの最大値に統一される。

【０２１６】こうして更新された実行用オブジェクトの
ブロックｘｓ１，ｘｓ２，．．．，ｘｓｎを実行する
と、各ブロックが１つの要素から成る場合は図２９のよ
うに並列実行され、各ブロックが直列に実行されるいく
つかの要素から成る場合は、図３０のように並列実行さ
れる。図２９においては、各実行用オブジェクトが同時
に実行開始されており、図３０においては、各ブロック
の先頭の実行用オブジェクトが同時に実行開始されてい
ることが分かる。

【０２１７】（２）メソッド名がｓｅｒｉａｌの場合例えば、ｘｓ．ｓｅｒｉａｌ（）；と記述されているならば、ｘｓの個々の要素を取り出
し、それらの要素をそれぞれ要素１個の集合ｘｓ１，ｘ
ｓ２，．．．，ｘｓｎとみなして、ｘｓ１．ｓｅｒｉａｌ（ｘｓ２）．．．．ｓｅｒｉａｌ
（ｘｓｎ）；のように書き換える。

【０２１８】また、それぞれが１つ以上の実行用オブジ
ェクトから成るブロックであるｘｓ１，ｘｓ
２，．．．，ｘｓｎに対して、｛ｘｓ１，ｘｓ２，．．．，ｘｓｎ｝．ｓｅｒｉａ
ｌ（）；と記述されているならば、ｘｓ１．ｓｅｒｉａｌ（ｘｓ２）．．．．ｓｅｒｉａｌ
（ｘｓｎ）；のように書き換える。

【０２１９】こうして、複数の実行用オブジェクトの直
列実行を記述する文も、複数のブロックの直列実行を記
述する文も、ともに同じ形式で表現することができた。
書き換えられた文をステップＳ２１で実行することによ
り、ｘｓ１，ｘｓ２，．．．，ｘｓｎの各要素の属性が
更新される。

【０２２０】ここで、２つのブロックの直列実行を表すｘｓ１．ｓｅｒｉａｌ（ｘｓ２）は、ａｌｌＴｉｍｅＬｅｎｇｔｈ＝（ｘｓ１の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）＋（ｘｓ２の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；ｌｏｏｐ（ｘｓ２のすべての要素ｘｉについて）｛ｘｉ．ｓｔａｒｔＴｉｍｅ＝ｘｉ．ｓｔａｒｔＴｉｍｅ＋（ｘｓ１の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝ａｌｌＴｉｍｅＬｅｎｇｔｈ；｝；ｌｏｏｐ（ｘｓ１のすべての要素ｘｉについて）ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝ａｌｌＴｉｍｅＬｅｎｇｔｈ；のような処理を行うことを意味する。この処理により、
ｘｓ１とｘｓ２のａｌｌＴｉｍｅＬｅｎｇｔｈ属性がそ
れらの和に更新され、ｘｓ２の各要素のｓｔａｒｔＴｉ
ｍｅ属性にｘｓ１のａｌｌＴｉｍｅＬｅｎｇｔｈ属性の
値が加算される。

【０２２１】さらに、更新されたｘｓ１およびｘｓ２を
１つのブロックとみなして、ｓｅｒｉａｌ（ｘｓ
３），．．．，ｓｅｒｉａｌ（ｘｓｎ）を、同様にして
順に作用させていくことで、最終的にｘｓ１，ｘｓ
２，．．．，ｘｓｎのａｌｌＴｉｍｅＬｅｎｇｔｈ属性
がそれらの総和に統一され、ｘｓ２，．．．，ｘｓｎの
各要素のｓｔａｒｔＴｉｍｅ属性がすべて更新される。

【０２２２】こうして更新された実行用オブジェクトの
ブロックｘｓ１，ｘｓ２，．．．，ｘｓｎを実行する
と、各ブロックが１つの要素から成る場合は図３１のよ
うに直列実行され、各ブロックが直列に実行されるいく
つかの要素から成る場合は図３２のように直列実行され
る。

【０２２３】図３１においては、１つの実行用オブジェ
クトが実行終了すると、連続して次の実行用オブジェク
トが実行開始されており、図３２においては、１つのブ
ロックの末尾の実行用オブジェクトが実行終了すると、
連続して次のブロックの先頭の実行用オブジェクトが実
行開始されていることが分かる。

【０２２４】（３）メソッド名がｒｅｎｄｅｚｖｏｕｓ
の場合例えば、ｘｓ．ｒｅｎｄｅｚｖｏｕｓ（）；と記述されているならば、ｘｓの個々の要素を取り出
し、それらの要素をそれぞれ要素１個の集合ｘｓ１，ｘ
ｓ２，．．．，ｘｓｎとみなして、ｘｓ１．ｒｅｎｄｅｚｖｏｕｓ（ｘｓ２）．．．．ｒｅ
ｎｄｅｚｖｏｕｓ（ｘｓｎ）；のように書き換える。

【０２２５】また、それぞれが１つ以上の実行用オブジ
ェクトから成るブロックであるｘｓ１，ｘｓ
２，．．．，ｘｓｎに対して、｛ｘｓ１，ｘｓ２，．．．，ｘｓｎ｝．ｒｅｎｄｅｚｖ
ｏｕｓ（）；と記述されているならば、ｘｓ１．ｒｅｎｄｅｚｖｏｕｓ（ｘｓ２）．．．．ｒｅ
ｎｄｅｚｖｏｕｓ（ｘｓｎ）；のように書き換える。

【０２２６】こうして、複数の実行用オブジェクトの同
時終了を記述する文も、複数のブロックの同時終了を記
述する文も、ともに同じ形式で表現することができた。
書き換えられた文をステップＳ２１で実行することによ
り、ｘｓ１，ｘｓ２，．．．，ｘｓｎの各要素の属性が
更新される。

【０２２７】ここで、２つのブロックの同時終了を表すｘｓ１．ｒｅｎｄｅｚｖｏｕｓ（ｘｓ２）は、ｄｉｆｆ＝（ｘｓ２の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）− （ｘｓ１の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；ｉｆ（ｄｉｆｆ＞０）ｌｏｏｐ（ｘｓ１のすべての要素ｘｉについて）｛ｘｉ．ｓｔａｒｔＴｉｍｅ＝ｘｉ．ｓｔａｒｔＴｉｍｅ＋ｄｉｆｆ；ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝（ｘｓ２の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；｝；ｅｌｓｅｌｏｏｐ（ｘｓ２のすべての要素ｘｉについて）｛ｘｉ．ｓｔａｒｔＴｉｍｅ＝ｘｉ．ｓｔａｒｔＴｉｍｅ−ｄｉｆｆ；ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝（ｘｓ１の要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；｝；のような処理を行うことを意味する。この処理により、
ｘｓ１とｘｓ２のａｌｌＴｉｍｅＬｅｎｇｔｈ属性のう
ち小さい方の値が大きい方の値に更新され、ｘｓ１また
はｘｓ２の各要素のｓｔａｒｔＴｉｍｅ属性に、ｘｓ１
とｘｓ２のａｌｌＴｉｍｅＬｅｎｇｔｈ属性の差（絶対
値）が加算される。

【０２２８】さらに、更新されたｘｓ１およびｘｓ２を
１つのブロックとみなして、ｒｅｎｄｅｚｖｏｕｓ（ｘ
ｓ３），．．．，ｒｅｎｄｅｚｖｏｕｓ（ｘｓｎ）を、
同様にして順に作用させていくことで、最終的にｘｓ
１，ｘｓ２，．．．，ｘｓｎのａｌｌＴｉｍｅＬｅｎｇ
ｔｈ属性がそれらの最大値に統一され、その最大値に満
たないａｌｌＴｉｍｅＬｅｎｇｔｈ属性を持っていた要
素のｓｔａｒｔＴｉｍｅ属性が更新される。

【０２２９】こうして更新された実行用オブジェクトの
ブロックｘｓ１，ｘｓ２，．．．，ｘｓｎを実行する
と、各ブロックが１つの要素から成る場合は図３３のよ
うに実行され、各ブロックが直列に実行されるいくつか
の要素から成る場合は図３４のように実行される。図３
３においては、各実行用オブジェクトが同時に実行終了
しており、図３４においては、各ブロックの末尾の実行
用オブジェクトが同時に実行終了していることが分か
る。

【０２３０】図２８のステップＳ４４において、メソッ
ド名がｐｌａｙ、ｄｏ、ｐａｒａｌｌｅｌ、ｓｅｒｉａ
ｌ、ｒｅｎｄｅｚｖｏｕｓ以外のものである場合は、文
の書き換えは行われず、図２７のステップＳ２１におい
てそのまま実行される。これにより、対応する実行用オ
ブジェクトが新しく生成されたり、実行用オブジェクト
の属性が更新されたりする。

【０２３１】ここで、メソッドｗａｉｔ（）、ａｎｙｔ
ｉｍｅ（）、ｅｘｅｃｕｔｅ（）の場合を例に取り、ス
テップＳ２１で行われる処理を説明する。（ハ）メソッド名がｗａｉｔの場合例えば、ユーザが指定した遅延時間をｔｉｍｅとして、ｘｓ．ｗａｉｔ（ｔｉｍｅ）と記述されているならば、ｌｏｏｐ（ｘｓのすべての要素ｘｉについて）｛ｘｉ．ｓｔａｒｔＴｉｍｅ＝ｘｉ．ｓｔａｒｔＴｉｍｅ＋ｔｉｍｅ；ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＋ｔｉｍｅ；｝；のような処理が行われる。これにより、ｘｓの各要素の
ｓｔａｒｔＴｉｍｅ属性とａｌｌＴｉｍｅＬｅｎｇｔｈ
属性にｔｉｍｅの値が加算される。

【０２３２】こうして更新された実行用オブジェクトの
ブロックｘｓを実行すると、ｘｓが直列に実行される３
つの要素から成る場合は、図３５のように実行される。
図３５において、各実行用オブジェクトは、元のｓｔａ
ｒｔＴｉｍｅより指定時間ｔｉｍｅだけ遅れて実行開始
されていることが分かる。（ニ）メソッド名がａｎｙｔｉｍｅの場合例えば、ユーザが指定した時間をｔｉｍｅとして、ｘｓ．ａｎｙｔｉｍｅ（ｔｉｍｅ）と記述されているならば、ｔｉｍｅＬａｇ＝ｔｉｍｅ−（ｘｓの要素のａｌｌＴｉｍｅＬｅｎｇｔｈ）；ｌｏｏｐ（ｘｓのすべての要素ｘｉについて）｛ｘｉ．ｓｔａｒｔＴｉｍｅ＝［ｘｉ．ｓｔａｒｔＴｉｍｅ，ｘｉ．ｓｔａｒｔＴｉｍｅ＋ｔｉｍｅＬａｇ］；ｘｉ．ａｌｌＴｉｍｅＬｅｎｇｔｈ＝ｔｉｍｅ；｝；のような処理が行われる。ここで、［ａ，ｂ］は、ａ≦
ｔ≦ｂなる任意の値ｔを表している。これにより、ｘｓ
の各要素のｓｔａｒｔＴｉｍｅ属性とａｌｌＴｉｍｅＬ
ｅｎｇｔｈ属性がｔｉｍｅを用いて更新される。

【０２３３】こうして更新された実行用オブジェクトの
ブロックｘｓを実行すると、ｘｓが直列に実行される３
つの要素から成る場合は、図３６のように実行される。
図３６において、各実行用オブジェクトは元のｓｔａｒ
ｔＴｉｍｅより最大ｔｉｍｅＬａｇだけ遅れて実行開始
され、すべての実行用オブジェクトの実行は指定時間ｔ
ｉｍｅ内に完了していることが分かる。

【０２３４】ここで、ｓｔａｒｔＴｉｍｅ属性の更新値
については、例えば動画像のビューを複数表示させる場
合などに、スケジューラ２４を用いて、資源量に余裕の
ある時間帯に表示するように調整することが可能であ
る。この調整方法として、例えば、次の２つの方法が考
えられる。

【０２３５】第１の方法は、メソッドａｎｙｔｉｍｅを
利用するビューオブジェクト以外のビューオブジェクト
の長さを用いて、ビューが重複する時間帯を区切り、ａ
ｎｙｔｉｍｅを利用するビューオブジェクトの開始時刻
を、各時間帯の先頭時刻に仮設定する方法である。この
方法では、ｔｉｍｅＬａｇ内に収まる設定時刻のうち、
重複するビューオブジェクトの数が最も少なくなるよう
な値が、ｓｔａｒｔＴｉｍｅとして採用される。

【０２３６】例えば、図３７（ａ）に示すように、並列
に実行されるビューオブジェクトｖ１１、ｖ１２と同じ
時間帯に、メソッドａｎｙｔｉｍｅ（）が適用されたビ
ューオブジェクトｖ１３を追加する場合を考える。そし
て、ビューオブジェクトｖ１３のｓｔａｒｔＴｉｍｅ属
性が、ａ≦ｓｔａｒｔＴｉｍｅ≦ｂとなるように指定さ
れたとする。

【０２３７】このとき、第１の方法によれば、図３７
（ｂ）に示すように、ビューオブジェクトｖ１１の実行
時間からビューオブジェクトｖ１２の実行時間に対応す
る時間帯Ｔ１１が切り取られ、その残りが時間帯Ｔ１２
となる。ビューオブジェクトｖ１３のｓｔａｒｔＴｉｍ
ｅの設定時刻としては、２つの時間帯Ｔ１１、Ｔ１２の
先頭が考えられるが、この例では、時間帯Ｔ１２の先頭
は上限値ｂを越えていることが分かる。

【０２３８】そこで、ｓｔａｒｔＴｉｍｅは、時間帯Ｔ
１１の先頭である時刻ａに設定される。この場合、時間
帯Ｔ１１のすべてに渡って、３つのビューオブジェクト
ｖ１１、ｖ１２、ｖ１３が重複して実行される。

【０２３９】また、第２の方法は、第１の方法で決定し
たｓｔａｒｔＴｉｍｅをずらして、ビューオブジェクト
同士の重複部分が最小になるように、ｓｔａｒｔＴｉｍ
ｅを設定し直す方法である。

【０２４０】図３７（ｂ）の例に第２の方法を適用する
と、ビューオブジェクトｖ１３のｓｔａｒｔＴｉｍｅ
は、図３７（ｃ）に示すように、上限時刻ｂまでずらさ
れることになる。このとき、時間帯Ｔ１１におけるビュ
ーオブジェクトｖ１１、ｖ１２、ｖ１３の重複時間は、
ａ≦ｓｔａｒｔＴｉｍｅ≦ｂの制限の下で最小となって
いる。（ホ）メソッド名がｅｘｅｃｕｔｅの場合実行用オブジェクトにメソッドｅｘｅｃｕｔｅ（）を適
用するように記述されている場合は、その起動オブジェ
クト（実行用オブジェクト）を解析結果として、集合Ｓ
ＥＴ１の要素に加える。

【０２４１】以上のように、実行用オブジェクトに時間
制御用のメソッドが適用される度に、そのｓｔａｒｔＴ
ｉｍｅ属性やａｌｌＴｉｍｅＬｅｎｇｔｈ属性が更新さ
れるが、更新の結果として、１つのブロックに属する各
実行用オブジェクトのａｌｌＴｉｍｅＬｅｎｇｔｈ属性
は同じ値になる。

【０２４２】また、上述のブロックｘｓ１，ｘｓ
２，．．．，ｘｓｎ，ｘｓ内の各実行用オブジェクト
は、必ずしも、図３０、３２、３４、３５、３６に示し
たように直列に実行されるとは限らず、並列に実行され
ることもあれば、より複雑な時間制御が施されることも
ある。一般に、ブロック内の実行用オブジェクトの時間
関係は、対応するスクリプトファイルの記述に依存して
決まる。

【０２４３】次に、図３８のフローチャートを参照しな
がら、図２６のステップＳ１５における実行用オブジェ
クトのスケジューリング処理について説明する。図３８
において処理が開始されると、スクリプト実行部１８
は、スケジューリングの対象となる複数の実行用オブジ
ェクトのｓｔａｒｔＴｉｍｅ属性に記述された実行開始
時刻と、ａｌｌＴｉｍｅＬｅｎｇｔｈ属性に記述された
全実行時間長とを読み込む（ステップＳ５１）。

【０２４４】また、それらのｔａｒｇｅｔ属性に記述さ
れたコンテンツオブジェクトを参照して、そのｔｉｍｅ
Ｌｅｎｇｔｈ属性に記述された実行時間長と、ｓｔｒｅ
ａｍｓ属性に記述されたストリームデータの品質（スト
リームオブジェクトの識別情報）とを読み込む。

【０２４５】次に、スケジューラ２４を起動して、読み
込んだデータを渡す（ステップＳ５２）。スケジューラ
２４は、同じ時間帯に実行されるコンテンツオブジェク
トと資源の制約等の実行環境とを考慮し、例えば図１７
に示したようなスケジューリング処理を行う。そして、
各実行用オブジェクト毎に、使用するストリームデータ
の品質と、起動に要する時間を考慮した実行開始時刻と
を決定する。

【０２４６】このとき、ｓｔａｒｔＴｉｍｅ属性から読
み取った実行開始時刻に、プレーヤ２６や表示装置２０
等の起動に必要な時間が加味されて、実際の実行開始時
刻が決定される。また、各時間帯において使用可能なＣ
ＰＵ負荷等の制限を満たすように、各コンテンツに対応
するストリームデータが決定される。

【０２４７】そして、決定したストリームデータに対応
するストリームオブジェクトの識別情報と、実行開始時
刻とを用いて、個々の実行用オブジェクトのｓｃｈｅｄ
ｕｌｅＤａｔａ属性を更新し（ステップＳ５３）、処理
を終了する。

【０２４８】このように、実行用オブジェクトに記され
たｓｔａｒｔＴｉｍｅ、ａｌｌＴｉｍｅＬｅｎｇｔｈ、
ｔａｒｇｅｔの各属性を参照することで、複数の実行用
オブジェクトのスケジューリングを自動的に行うことが
可能となる。また、スケジューリングの結果は各実行用
オブジェクトのｓｃｈｅｄｕｌｅＤａｔａ属性に書き込
まれ、対応するマルチメディアデータの実行時に参照さ
れる。

【０２４９】次に、図３９のフローチャートを参照しな
がら、図２６のステップＳ１６における実行用オブジェ
クトの実行処理について説明する。図３９において処理
が開始されると、データ表示部２５は、スケジューリン
グされたｋ個の実行用オブジェクトのｓｃｈｅｄｕｌｅ
Ｄａｔａ属性から、実行開始時刻と使用ストリームデー
タの識別情報の組を読み込む（ステップＳ６１）。

【０２５０】次に、ｓｃｈｅｄｕｌｅＤａｔａに記述さ
れたストリームオブジェクトに対応するストリームデー
タを、各実行用オブジェクト毎に用意されたプレーヤ２
６に一組ずつ渡す（ステップＳ６２−１，Ｓ６２−
１，．．．，Ｓ６２−ｋ）。

【０２５１】そして、スケジューリングされた実行開始
時刻に、コマンドｆｏｒｋ＆ｅｘｅｃを用いて各プレー
ヤ２６を起動し、処理を終了する。こうして、各実行用
オブジェクトに対応するストリームデータがプレーヤ２
６によりスケジュール通りに実行され、表示装置２０に
出力される。

【０２５２】このように、実行用オブジェクトに記され
たｓｃｈｅｄｕｌｅＤａｔａ属性を参照することで、ス
ケジューリング結果に基づくデータ出力が自動的に行わ
れ、その結果として、入力されたスクリプトファイルに
従ったプレゼンテーションが実現される。

【０２５３】次に、動画像を表示する場合を例に取っ
て、上述の先願（特願平７−２４０３５１）に示された
スケジューリング処理およびデータ出力処理について説
明する。

【０２５４】動画像を再生する場合、ハードウェアによ
る１台の復号装置では１度に１つの動画像（ビデオスト
リーム）しか扱うことができないため、任意の数の動画
像を同時に再生することができない。一方、プレーヤ２
６としてソフトウェアを用いる場合、動画像の数に合わ
せてプレーヤ２６を用意することで、任意の数の動画像
を同時に再生することができる。

【０２５５】また、複数の実行用オブジェクトにより複
数のビューとその再生開始時刻（実行開始時刻）とを指
定した場合、幾つかのビューが同時に再生され、同時に
再生される動画像の数が時刻によって変化することがあ
る。このため、同時に再生される動画像の数の変化に応
じて、動画像を再生するための負荷を変化させることに
より、コンピュータ資源を有効に使用することができ
る。

【０２５６】例えば、スケジューラ２４は、あるビュー
に対し、ビュー（動画像）の同時再生数の変化に応じて
再生に使用するストリームデータのファイルを選択す
る。そして、データ表示部２５が管理するウィンドウシ
ステムを用いて作成した１つの表示ウィンドウに、選択
したファイルを順に再生して表示することにより、ユー
ザは、データ自体は独立しているにもかかわらず連続し
たビューが再生されているものとして見ることができ
る。

【０２５７】一方、単にウィンドウを生成して動画像を
順に再生するのみでは、動画像の切替え部分で処理に時
間がかかり連続して再生しているようには見えない。こ
れは、データ表示部２５がプレーヤ２６を起動する時に
生じる初期化に時間がかかったり、マルチメディアデー
タに部分的にアクセスするための処理に時間がかかった
りして、再生画像をウィンドウに連続して出力できない
ためである。

【０２５８】このため、再生画像の出力に先立ち、あら
かじめ必要な前処理を行い、指定された再生開始時刻ま
でｓｌｅｅｐして待つことにより、再生画像をウィンド
ウに連続して出力できるようにする。

【０２５９】すなわち、再生開始時刻より前にプレーヤ
２６をビュー毎に起動する。そして、プレーヤ２６の起
動パラメータとして、ウィンドウシステム上でウィンド
ウを作成する位置とフレームサイズ、ストリームデータ
のファイル名、ビューの再生開始時刻、ピクチャレー
ト、ストリームデータ上の部分アクセスを開始する位
置、ビューの再生時間長（実行時間長）を入力する。こ
れらのパラメータはスケジューラ２４により決定され、
それぞれのビューの表示時間帯は連続させる。

【０２６０】このように、ビューを実現するためには、
与えられたストリームデータに対して、指定された箇所
から再生できなけばならない。動画像の場合、先頭から
のフレーム数などを用いることにより、ストリームデー
タの再生開始場所を指定することができる。

【０２６１】例えば、ＭＰＥＧ−１ｖｉｄｅｏフォーマ
ットでは、数枚のフレームを符号化したデータを１まと
まりにしたＧＯＰ（group of pictures ）という単位を
用いてデータ内の位置が表される。もし、指定されたフ
レームが、どのＧＯＰに含まれるか、さらにＧＯＰ内の
フレームの何番目であるか（オフセット）を知ることが
できれば、そこから再生を開始することができる。

【０２６２】このため、ＭＰＥＧ−１ｖｉｄｅｏデータ
の場合、あらかじめデータ内の各ＧＯＰの開始位置に対
応するバイト数（開始バイト）と、各ＧＯＰ内で最初に
再生されるフレーム番号との対応関係を調べ、それらを
対応表にしてストリームオブジェクトの属性として保持
しておく。

【０２６３】そして、データを指定されたフレームから
再生する場合、対応表にあるフレーム番号のうち指定さ
れたフレーム番号以下であって、かつ、最大のフレーム
番号を検索し、その最大のフレーム番号に対応するＧＯ
Ｐの開始バイトを取得する。また、その最大のフレーム
番号と指定されたフレーム番号との差をオフセットとす
る。

【０２６４】こうして取得したＧＯＰの開始バイトから
データの復号を開始し、オフセットに対応する数のフレ
ームは復号のみ行い、オフセットの次のフレームから表
示を開始すれば、指定されたフレームからの再生が行わ
れる。

【０２６５】したがって、ＭＰＥＧ−１ｖｉｄｅｏデー
タを再生するプレーヤ２６には、ＭＰＥＧ−１ｖｉｄｅ
ｏデータが格納されているファイル名と、ウィンドウシ
ステムでの表示用ウィンドウの位置、再生を開始するＧ
ＯＰの開始バイト、フレームのオフセット、再生開始時
刻、表示フレーム数、ピクチャレート等が入力される。

【０２６６】そして、プレーヤ２６は、データの再生開
始時刻以前にウィンドウシステムに表示用ウィンドウを
生成し、それぞれのビューに対応するデータのシーケン
スヘッダ部分を読み込み、初期化を行う。

【０２６７】その後、指定されたＧＯＰの開始バイトの
位置にファイルの読み出しポインタを移動し、そこから
始まるＧＯＰを解析し、オフセットで指定されたフレー
ム分を表示せずに復号のみ行う。これにより初期化が終
了するので、再生開始時刻までｓｌｅｅｐして待つ。

【０２６８】再生開始時刻になり、ｓｌｅｅｐ状態から
ｒｕｎ状態に遷移すると、プレーヤ２６は、ウィンドウ
システム上の指定位置に生成したウィンドウに、復号し
たフレームを、指定されたピクチャレートで、指定され
たフレームから、指定された表示フレーム数だけ表示す
る。

【０２６９】このように、プレーヤ２６をビュー毎に起
動することで、複数の動画像を同時に連続表示すること
が可能になる。尚、ここで説明したプレーヤ２６の処理
は一例に過ぎず、上述の先願（特願平７−２４０３５
１）に示された他の再生プログラムも、プレーヤ２６と
して同様に使用することができる。

【０２７０】以上説明した実施形態においては、コンテ
ンツの実行方法を記したスクリプト自身に対応するスク
リプトオブジェクトを定義し、これをコンテンツオブジ
ェクトと同じクラスのオブジェクトとして扱うことで、
スクリプトに対してメソッドを自動的に適用することが
可能になる。

【０２７１】このため、入力するスクリプトの中に他の
スクリプトを表す変数を記述しておき、それにｐａｒａ
ｌｌｅｌ（）等の任意の時間制御用メソッドを作用させ
ておけば、間接的に、その変数が表すスクリプトから派
生する実行用オブジェクトにそのメソッドを作用させる
ことができる。

【０２７２】また、スクリプトがこのように入れ子構造
になっている場合、入れ子になっているスクリプトを再
帰的に実行用オブジェクトに展開することで、スケジュ
ーリングを容易に行うことが可能になる。

【０２７３】また、コンテンツオブジェクトとスクリプ
トオブジェクトとを参照可能な実行用オブジェクトのク
ラスを設け、この実行用オブジェクトを参照すること
で、多数のコンテンツの複雑な組合せに対して効率のよ
いスケジューリングが行われる。

【０２７４】本実施形態においては、主としてスクリプ
トを利用した動画像のビューの表示方法について説明し
たが、音声、イメージ（グラフィックス）、テキスト等
の他の任意のマルチメディアデータについても、同様に
スクリプトを利用して出力することができる。また、資
源の制約を満たす限りにおいて、異種のマルチメディア
データを自由に組み合わせたプレゼンテーションを容易
に実現することができる。

【０２７５】また、実行用オブジェクトの時間制御用メ
ソッドとしては、ｐａｒａｌｌｅｌ（）、ｓｅｒｉａｌ
（）、ｒｅｎｄｅｚｖｏｕｓ（）、ｗａｉｔ（）、ａｎ
ｙｔｉｍｅ（）以外にも、任意のメソッドを定義して用
いることができる。例えば、複数のデータを一定時間間
隔で出力したり、順序をランダムに変更して出力したり
するメソッドを用意しておいてもよい。

【０２７６】

【発明の効果】本発明によれば、スクリプトを利用して
複数のマルチメディアデータをデータベースから検索
し、それらの一部分を多様に組み合わせて出力すること
ができる。また、スクリプト自身をデータベース化して
おき、それを必要に応じて検索して再利用することもで
きる。このため、他のスクリプトが入れ子になっている
ような複雑なスクリプトも自動的に実行される。

【０２７７】また、マルチメディアデータのプレゼンテ
ーションにおいては実行環境の資源の制約を受ける場合
が多いが、複雑な組合せのプレゼンテーションであって
も、ユーザが意識することなく適切なスケジューリング
が行われ、制約を満たすデータを用いたプレゼンテーシ
ョンが自動的に行われる。

【０２７８】したがって、マルチメディアデータを格納
したデータベースシステムにおいて、スクリプトに記述
された複雑なプレゼンテーションを効率よく自動的に実
行することが可能になる。

【図面の簡単な説明】

【図１】本発明のマルチメディアデータ・プレゼンテー
ションシステムの原理図である。

【図２】マルチメディアデータ・プレゼンテーションシ
ステムの構成図である。

【図３】データベースシステムの構成図である。

【図４】クラス階層と参照関係を示す図である。

【図５】ターゲットクラスの属性とメソッドを示す図で
ある。

【図６】スクリプトクラスの属性とメソッドを示す図で
ある。

【図７】実行用クラスの属性とメソッドを示す図であ
る。

【図８】コンテンツクラスの属性とメソッドを示す図で
ある。

【図９】コンテンツとビューの時間関係を示す図であ
る。

【図１０】ストリームクラスの属性とメソッドを示す図
である。

【図１１】コンテンツオブジェクトとストリームオブジ
ェクトとビデオデータの関係を示す図である。

【図１２】コンテンツオブジェクトとストリームオブジ
ェクトとの対応付けの方法を示す図である。

【図１３】フレームの選択方法を示す図である。

【図１４】ピクチャレートを下げたデータの生成装置を
示す図である。

【図１５】フレームサイズの縮小方法を示す図である。

【図１６】フレームサイズを縮小したデータの生成装置
を示す図である。

【図１７】スケジューラの選択可能データとスケジュー
リング結果を示す図である。

【図１８】スクリプトを利用したプレゼンテーションの
流れを示す図である。

【図１９】スクリプト用オペレーションを示す図であ
る。

【図２０】第１のスクリプトファイルを示す図である。

【図２１】スクリプトオブジェクトとビューオブジェク
トと実行用オブジェクトの関係を示す図である。

【図２２】２つのビューオブジェクトの並列実行を示す
タイミングチャートである。

【図２３】第２のスクリプトファイルを示す図である。

【図２４】２つのスクリプトオブジェクトの直列実行を
示すタイミングチャートである。

【図２５】スクリプトを利用したプレゼンテーションの
フローチャートである。

【図２６】スクリプトオブジェクトの実行処理のフロー
チャートである。

【図２７】スクリプトオブジェクトの解析処理のフロー
チャートである。

【図２８】スクリプトファイルの解析処理のフローチャ
ートである。

【図２９】実行用オブジェクトの並列実行を示す図であ
る。

【図３０】ブロックの並列実行を示す図である。

【図３１】実行用オブジェクトの直列実行を示す図であ
る。

【図３２】ブロックの直列実行を示す図である。

【図３３】実行用オブジェクトの同時終了実行を示す図
である。

【図３４】ブロックの同時終了実行を示す図である。

【図３５】指定時間だけ遅らせた実行を示す図である。

【図３６】指定時間内の実行を示す図である。

【図３７】指定時間内における実行開始時刻の決定方法
を示す図である。

【図３８】実行用オブジェクトのスケジューリング処理
のフローチャートである。

【図３９】実行用オブジェクトの実行処理のフローチャ
ートである。

【符号の説明】

１記憶手段２生成手段３実行手段１１マルチメディアデータ格納部１２ストリームオブジェクト格納部１３コンテンツオブジェクト格納部１４スクリプトファイル格納部１５スクリプトオブジェクト格納部１６実行用オブジェクト格納部１７スクリプト管理部１８スクリプト実行部１９入力装置２０表示装置２１スクリプトオブジェクト管理部２２スクリプトパーザ２３実行用オブジェクト生成部２４スケジューラ２５データ表示部２６プレーヤ３１ＣＰＵ３２メモリ３３データベース３４バス３５媒体駆動装置３６可搬記録媒体４０コンポジットクラス４１ターゲットクラス４２実行用クラス４３スクリプトクラス５１ビデオコンテンツクラス５２オーディオコンテンツクラス５３イメージコンテンツクラス５４テキストコンテンツクラス６０ストリームクラス６１ビデオクラス６２オーディオクラス６３イメージクラス６４テキストクラス６５Ｍｐｅｇクラス６６ＭｐｅｇＡｕｄｉｏクラス６７Ｊｐｅｇクラス７１スクリプトファイル７２、８２ａ、８２ｂ、８２ｃビデオデータ７３オーディオデータ８０ａ、８０ｂ、８３コンテンツオブジェクト８１ａ、８１ｂ、８１ｃ、８４、８５、８６ストリー
ムオブジェクト９１、９５、１０１、１０５ＭＰＥＧファイル９２、１０２ＭＰＥＧデコーダ９３フレーム選択プログラム９４、１０４ＭＰＥＧエンコーダ９６、９７フレーム１０３サイズ選択プログラム

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁶ 識別記号ＦＩＧ０９Ｇ 5/00 ５１０Ｇ０６Ｆ 15/62 ３２１Ａ

Claims

【特許請求の範囲】

【請求項１】データベースからマルチメディアデータ
を検索して出力する情報処理装置において、マルチメディアデータの組合せ方法を含むプレゼンテー
ションのシナリオを記述したスクリプトファイルと、該
スクリプトファイルから生成される実行用オブジェクト
と、該実行用オブジェクトに対応するマルチメディアデ
ータとを記憶する記憶手段と、前記スクリプトファイルを解析して、前記プレゼンテー
ションに必要な前記実行用オブジェクトを生成する生成
手段と、前記実行用オブジェクトを起動して、該実行用オブジェ
クトに対応する前記マルチメディアデータを出力する実
行手段とを備えることを特徴とするマルチメディアデー
タ・プレゼンテーションシステム。
【請求項２】前記記憶手段は、さらに前記実行用オブ
ジェクトに対応するマルチメディアデータの内容を表す
コンテンツオブジェクトと、該コンテンツオブジェクト
に対応付けられ、該マルチメディアデータの品質を表す
１つ以上のストリームオブジェクトとを記憶し、前記実
行手段は、該実行用オブジェクトを参照して、使用する
マルチメディアデータの品質を決定し、これにより、適
切な品質のマルチメディアデータを用いて、前記スクリ
プトファイルに記述された前記プレゼンテーションを自
動的に行うことを特徴とする請求項１記載のマルチメデ
ィアデータ・プレゼンテーションシステム。
【請求項３】前記記憶手段は、前記マルチメディアデ
ータの内容の一部分を表すビューオブジェクトを前記コ
ンテンツオブジェクトとして記憶し、前記実行手段は、
該ビューオブジェクトを参照して該マルチメディアデー
タの一部分を出力することを特徴とする請求項２記載の
マルチメディアデータ・プレゼンテーションシステム。
【請求項４】前記生成手段は、前記スクリプトファイ
ルに対応する第１のスクリプトオブジェクトを生成して
前記記憶手段に格納し、該第１のスクリプトオブジェク
トを起動することにより、前記実行用オブジェクトを生
成し、さらに前記実行手段に該実行用オブジェクトを起
動させることを特徴とする請求項２記載のマルチメディ
アデータ・プレゼンテーションシステム。
【請求項５】前記記憶手段は、前記第１のスクリプト
オブジェクトの属性として、前記スクリプトファイルの
識別情報と該スクリプトファイルから生成された前記実
行用オブジェクトの識別情報とを記憶し、前記実行手段
は、該第１のスクリプトオブジェクトにより指定される
該実行用オブジェクトを参照して、前記使用するマルチ
メディアデータを出力することを特徴とする請求項４記
載のマルチメディアデータ・プレゼンテーションシステ
ム。
【請求項６】前記記憶手段は、コンテンツオブジェク
トとスクリプトオブジェクトとを、それぞれ、同一のク
ラスに属するターゲットオブジェクトとして記憶し、コ
ンテンツオブジェクトとスクリプトオブジェクトを統一
的に扱うことを特徴とする請求項４記載のマルチメディ
アデータ・プレゼンテーションシステム。
【請求項７】前記生成手段は、前記スクリプトファイ
ルに記述された検索条件にしたがって前記記憶手段から
検索されたターゲットオブジェクトに対応して、該ター
ゲットオブジェクトの識別情報を有する前記実行用オブ
ジェクトを生成することを特徴とする請求項６記載のマ
ルチメディアデータ・プレゼンテーションシステム。
【請求項８】前記スクリプトファイルに、コンテンツ
オブジェクトまたはスクリプトオブジェクトに対してメ
ソッドを作用させるように記述されているとき、前記生
成手段は、記述されたコンテンツオブジェクトまたはス
クリプトオブジェクトの識別情報をターゲット属性と
し、該メソッドをオペレーション属性とするような実行
用オブジェクトを生成することを特徴とする請求項６記
載のマルチメディアデータ・プレゼンテーションシステ
ム。
【請求項９】前記生成手段は、前記スクリプトファイ
ルを解析して、実行対象となるターゲットオブジェクト
と、該ターゲットオブジェクトの第１の実行開始時刻と
を決定するスクリプトパーザ手段を備え、前記記憶手段
は、該第１の実行開始時刻を前記実行用オブジェクトの
開始時刻属性として記憶することを特徴とする請求項６
記載のマルチメディアデータ・プレゼンテーションシス
テム。
【請求項１０】前記スクリプトパーザが前記スクリプ
トファイルを解析したとき、前記実行対象となるターゲ
ットオブジェクトが第２のスクリプトオブジェクトであ
る場合は、該第２のスクリプトオブジェクトに対応する
スクリプトファイルを再び解析し、解析過程で現れるス
クリプトオブジェクトに対応するスクリプトファイルを
再帰的に解析することを繰り返して、最終的な実行対象
のターゲットオブジェクトと、該最終的な実行対象のタ
ーゲットオブジェクトの実行開始時刻とを求めることを
特徴とする請求項９記載のマルチメディアデータ・プレ
ゼンテーションシステム。
【請求項１１】前記実行手段は、前記実行用オブジェ
クトから前記コンテンツオブジェクトの識別情報と開始
時刻属性とを読み取り、読み取った情報に基づいて、使
用するストリームオブジェクトと、起動に要する時間を
考慮した第２の実行開始時刻とを決定し、決定したスト
リームオブジェクトの識別情報と実行開始時刻とを該実
行用オブジェクトのスケジュールデータ属性として格納
するスケジューラ手段を備え、該スケジュールデータ属
性に基づいて、前記使用するマルチメディアデータを出
力することを特徴とする請求項２記載のマルチメディア
データ・プレゼンテーションシステム。
【請求項１２】前記実行部手段は、前記使用するマル
チメディアデータのうち、前記コンテンツオブジェクト
に記述された部分を出力するための処理を前記第２の実
行開始時刻に開始するプレーヤ手段を、各実行用オブジ
ェクト毎に備えることを特徴とする請求項１１記載のマ
ルチメディアデータ・プレゼンテーションシステム。
【請求項１３】前記スクリプトファイルを作成するた
めのスクリプト情報を前記生成手段に入力する入力手段
と、前記マルチメディアデータを前記実行手段から受け
取って表示または再生する出力手段をさらに備え、前記
生成手段は、前記スクリプト情報に基づいて作成した前
記スクリプトファイルを前記記憶手段に格納することを
特徴とする請求項１記載のマルチメディアデータ・プレ
ゼンテーションシステム。
【請求項１４】前記スクリプトファイルに前記実行用
オブジェクトの実行時間制御に関する記述がある場合、
前記生成手段は、該実行時間制御に関する記述に基づい
て、該実行用オブジェクトの第１の実行開始時刻を計算
し、該第１の実行開始時刻を該実行用オブジェクトの開
始時刻属性として前記記憶手段に格納することを特徴と
する請求項１記載のマルチメディアデータ・プレゼンテ
ーションシステム。
【請求項１５】前記スクリプトファイルに２つ以上の
実行用オブジェクトを並列実行するように記述されてい
る場合、前記生成手段は、該２つ以上の実行用オブジェ
クトが同時に実行を開始するように、各実行用オブジェ
クトの第１の実行開始時刻を計算することを特徴とする
請求項１４記載のマルチメディアデータ・プレゼンテー
ションシステム。
【請求項１６】前記スクリプトファイルに、複数の実
行用オブジェクトをブロックとみなして、２つ以上のブ
ロックを並列実行するように記述されている場合、前記
生成手段は、該２つ以上のブロックの先頭の実行用オブ
ジェクトが同時に実行を開始するように、各実行用オブ
ジェクトの第１の実行開始時刻を計算することを特徴と
する請求項１４記載のマルチメディアデータ・プレゼン
テーションシステム。
【請求項１７】前記スクリプトファイルに２つ以上の
実行用オブジェクトを直列実行するように記述されてい
る場合、該２つ以上の実行用オブジェクトが連続して実
行されるように、各実行用オブジェクトの第１の実行開
始時刻を計算することを特徴とする請求項１４記載のマ
ルチメディアデータ・プレゼンテーションシステム。
【請求項１８】前記スクリプトファイルに、複数の実
行用オブジェクトをブロックとみなして、２つ以上のブ
ロックを直列実行するように記述されている場合、該２
つ以上のブロックが連続して実行されるように、各実行
用オブジェクトの第１の実行開始時刻を計算することを
特徴とする請求項１４記載のマルチメディアデータ・プ
レゼンテーションシステム。
【請求項１９】前記スクリプトファイルに２つ以上の
実行用オブジェクトを同時に終了させるように記述され
ている場合、該２つ以上の実行用オブジェクトの終了時
刻が一致するように、各実行用オブジェクトの第１の実
行開始時刻を計算することを特徴とする請求項１４記載
のマルチメディアデータ・プレゼンテーションシステ
ム。
【請求項２０】前記スクリプトファイルに、複数の実
行用オブジェクトをブロックとみなして、２つ以上のブ
ロックを同時に終了させるように記述されている場合、
該２つ以上のブロックの終了時刻が一致するように、各
実行用オブジェクトの第１の実行開始時刻を計算するこ
とを特徴とする請求項１４記載のマルチメディアデータ
・プレゼンテーションシステム。
【請求項２１】前記スクリプトファイルに１つ以上の
実行用オブジェクトを指定時間後に実行するように記述
されている場合、該１つ以上の実行用オブジェクトが該
指定時間だけ遅れて実行を開始するように、各実行用オ
ブジェクトの第１の実行開始時刻を計算することを特徴
とする請求項１４記載のマルチメディアデータ・プレゼ
ンテーションシステム。
【請求項２２】前記スクリプトファイルに１つ以上の
実行用オブジェクトを指定時間内に実行するように記述
されている場合、該１つ以上の実行用オブジェクトが指
定時間内に実行を開始し、終了するように、各実行用オ
ブジェクトの第１の実行開始時刻を計算することを特徴
とする請求項１４記載のマルチメディアデータ・プレゼ
ンテーションシステム。
【請求項２３】データベースからマルチメディアデー
タを検索して出力するためのプログラムを記録した記録
媒体であって、マルチメディアデータの組合せ方法を含むプレゼンテー
ションのシナリオを記述したスクリプトファイルを解析
して、該プレゼンテーションに必要な実行用オブジェク
トを生成する機能と、前記実行用オブジェクトを起動して、該実行用オブジェ
クトに対応するマルチメディアデータを出力する機能と
をコンピュータに実現させるためのプログラムを記録し
たコンピュータ読み取り可能な記録媒体。
【請求項２４】前記スクリプトファイルに対応するス
クリプトオブジェクトを生成する機能と、該スクリプト
オブジェクトを起動することにより、前記実行用オブジ
ェクトを生成して起動する機能とを前記コンピュータに
実現させるためのプログラムをさらに記録した請求項２
３記載のコンピュータ読み取り可能な記録媒体。
【請求項２５】データベースからマルチメディアデー
タを検索して出力する方法において、マルチメディアデータの組合せ方法を含むプレゼンテー
ションのシナリオを記述したスクリプトファイルを作成
し、該スクリプトファイルを解析して、前記プレゼンテーシ
ョンに必要な実行用オブジェクトを生成し、前記実行用オブジェクトを起動して、該実行用オブジェ
クトに対応するマルチメディアデータを出力することを
特徴とするマルチメディアデータ・プレゼンテーション
方法。
【請求項２６】前記スクリプトファイルに対応するス
クリプトオブジェクトを生成し、該スクリプトオブジェ
クトを起動することにより、前記実行用オブジェクトを
生成して起動することを特徴とする請求項２５記載のマ
ルチメディアデータ・プレゼンテーション方法。