JP2001136439A - マルチメディア情報再生／提供装置 - Google Patents

Abstract

(57)【要約】 【課題】 マルチメディア情報再生装置およびマルチメ
ディア情報提供装置の資源消費の低減と、高画質な情報
再生を実現すること。 【解決手段】 クライアント１０２内の改変方法決定部
１２１が、シナリオデータと、改変方法データベース１
２０に保持してあるシナリオデータからマルチメディア
情報の改変方式を決定する情報からマルチメディア情報
の改変情報を決定し、その改変内容に基づきシナリオデ
ータ改変部１１９がシナリオ情報を、メディアデータ形
式変換部１１８がメディアデータの形式変換を行うこと
により新たなマルチメディア情報を構築し、以降のマル
チメディア情報再生にその内容を反映させる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、動画・静止画・文
書・音声などの情報からなるマルチメディアデータ情報
を再生するマルチメディア情報再生装置、およびマルチ
メディア情報を提供するマルチメディア情報提供装置に
関するものである。

【０００２】

【従来の技術】動画・静止画・文書・音声などの複数の
種類のメディアデータを組み合わせたマルチメディア情
報は、マルチメディア情報内で用いられる動画データ・
静止画データ・文書データ・音声データなどのメディア
データと、マルチメディア情報内におけるメディアデー
タの振る舞い（ないし表示方法）を記述したシナリオデ
ータから構成されている。

【０００３】従来、マルチメディア情報再生装置がマル
チメディア情報提供装置に保存されているマルチメディ
ア情報を再生する場合には、（１）シナリオデータに記
述されている各メディアデータの伝送速度、表示開始時
刻、表示終了時刻などの情報を元に各メディアデータを
マルチメディア情報提供装置から伝送し、（２）シナリ
オデータに記述されている各メディアデータの再生パラ
メータ、表示開始時刻、表示終了時刻などの情報を元に
各メディアデータを復号し、（３）シナリオデータに記
述されているマルチメディア情報の表示パラメータと各
メディアデータの表示位置、表示サイズを元に画面を合
成し、出力することで実現していた。

【０００４】そして、マルチメディア情報を形成する動
画・静止画・文書・音声などを表現するデータ形式は様
々なものがあり、例えば、文書を表現する場合、表示イ
メージを静止画で表現することも可能であるが、テキス
トデータで表現し、再生時にフォント展開処理して表示
する再生端末を用いた場合、それらの表示結果はほとん
ど同一である。

【０００５】また、静止画を表現する場合、静止画デー
タとして、静止画符号化形式を用いたメディアデータで
表現することも可能であるが、動きのない画面を表現す
る動画として動画符号化形式で表現し、運用することも
可能であり、こうすることで、動画復号機能しか持たな
い再生端末においても、静止画情報を含んだマルチメデ
ィア情報を再生することが可能になる。

【０００６】このように、マルチメディア情報をどのよ
うなデータで表現するかということは自由であり、一般
にはその用途や再生端末の能力、伝送路の能力などを考
慮して、マルチメディア情報を準備するものが決定して
いる。

【０００７】

【発明が解決しようとする課題】I．ジャンプ処理に関
する問題点 マルチメディア情報再生装置の機能として、代表的なも
のにタイトル時刻ジャンプがある．利用者がタイトル時
刻ジャンプ用の操作を行うと、所望のタイトル時刻の状
態にマルチメディア情報の状態が遷移するこの機能は、
マルチメディア情報中の全てのメディアデータが、指定
されたタイトル時刻の時点の状態に戻り、同期して再生
を行う、という処理を行うことで実現されている。

【０００８】ここで、上述のように動画形式によって静
止画を表現するマルチメディア情報を考えると、静止画
を動画で表現する場合は、動きのない動画として表現し
ており、動画表現形式においては一般的であるフレーム
間差分により、始めの画像は詳細を表現するだけの情報
量は持ち得ないが、連続するデータによって差分情報が
付加され、結果徐々に画面が高画質化してくるという結
果になる。

【０００９】このような情報を持つマルチメディア情報
において、動画形式で表現され、最終的な画質まで向上
した静止画がある場合にタイトル時刻ジャンプをする場
合（最終的な、高画質となった表示段階で、ジャンプ指
示された場合）を考えると、この静止画はタイトル時刻
ジャンプの結果、また最初の低画質な状態から表示をは
じめなければならず、また、最終的画質にまで向上させ
るためには、差分情報の復号計算を繰り返さなければな
らない。

【００１０】また、同様にテキストデータで文章を表現
しているマルチメディア情報を考えると、マルチメディ
ア情報再生装置は、その文章が表示する時に必ずフォン
トを展開し、表示イメージを構築する。タイトル時刻ジ
ャンプを行った場合でも、同じ文書が表示される機会に
は必ずフォント展開計算を行うため、その度に計算資源
を消費してしまう。

【００１１】このように、従来は再生端末において、"
メディアデータの「再生結果を再利用」することができ
ない"ことに起因し、再生端末の資源を消費してしまう
という問題があった（別の言い方をすれば、時間軸依存
性のないデータ（静止画、テキスト等）のジャンプ処理
について、上記のように、これまで何ら有効な解決手段
が与えていられなかったのである）。

【００１２】II．データ提供及びその再生に関する問題
点 また、マルチメディア情報提供装置からマルチメディア
情報サービスを受けるマルチメディア情報再生装置の伝
送路も含めた能力や資源の量は、一般には全て同じでは
なく、端末や環境に応じて異なる。

【００１３】例えば、動画形式で静止画を表現するマル
チメディア情報を持つマルチメディア情報提供装置か
ら、静止画形式を再生するのが最も資源効率のよいマル
チメディア情報再生装置でサービスを受けた場合を考え
ると、静止画形式で静止画を表現するマルチメディア情
報を再生する場合と比較して、多大な計算資源を消費し
てしまうことになる。

【００１４】このように、マルチメディア情報提供装置
において、全てのマルチメディア情報再生装置に対して
資源の使用効率が最もよい表現形態でマルチメディア情
報を準備することは極めて難しいという問題点があっ
た．本発明は、これら課題を解決することを目的とする
ものである。

【００１５】

【課題が解決するための手段】本発明は、上記の目的を
達成するために、改変方法データベースと、改変方法決
定部と、メディアデータ形式変換部と、シナリオデータ
改変部とからなるマルチメディア改変部を備え、再生時
に当該改変部によってマルチメディア情報の改変を行う
ことにより、ジャンプ処理時の資源有効利用、マルチメ
ディア情報の伝送効率化等を実現するものである。

【００１６】

【発明の実施の形態】以下本発明の各実施の形態につい
て、図１から図３８を用いて説明する。なお、本発明は
これら実施の形態に何ら限定されるものではなく、その
要旨を逸脱しない範囲において、種々なる態様で実施し
得る。

【００１７】（実施の形態１）以下、第一の発明の実施
の形態について図面を用いて説明する．図１は、本発明
の一実施形態における構成を示すブロック図である．図
１において、１０１はマルチメディア情報を提供するサ
ーバ、１０２はマルチメディア情報を再生するクライア
ント、１０３はサーバ１０１とクライアント１０２間の
伝送路であるネットワークを示す。

【００１８】また、図１のサーバ１０１内において、１
０４はシナリオデータやメディアデータなどの、マルチ
メディア情報を格納するマルチメディア情報格納部、１
０５はネットワーク１０３に対してデータの発信・受信
を行うネットワークインタフェースを示す。

【００１９】また、図１のクライアント１０２内におい
て、１０６はネットワーク１０３に対してデータの発信
・受信を行うネットワークインタフェース、１０７はシ
ナリオデータに沿ってメディアデータ取得の処理を行う
メディアデータ取得部、１０８はメディアデータを復号
するメディアデータ復号部、１０９はメディアデータ復
号部１０８がメディアデータを復号した結果を、シナリ
オデータに沿って合成し、画面出力イメージを生成する
画面合成部、１１０は画面合成部１０９が生成した画面
出力イメージを実際の画面出力デバイスに出力する画面
出力部、１１１は利用者からの入力を検知する入力検知
部、１１２はシナリオデータを解析し、必要な情報を画
面合成部１０９とメディアデータ取得部１０７に与える
シナリオデータ解析部、１１３はマルチメディア情報の
改変を行い、現在の再生に反映させるマルチメディア情
報改変部、１１４はマルチメディア情報改変部１１３が
新たに生成したメディアデータを一時的に保存しておく
一時ファイルシステムである。

【００２０】図１のメディアデータ復号部１０８内にお
いて、１１５はマルチメディア情報改変前から存在する
メディアデータＡを復号するメディアデータ復号部Ａ、
１１６はマルチメディア情報改変前から存在するメディ
アデータＢを復号するメディアデータ復号部Ｂ、１１７
はマルチメディア情報改変部１１３が新たに生成したメ
ディアデータＢ'の復号するメディアデータ復号部Ｂ'を
表す。なお、この復号部１０８において必須の構成は、
改変前の復号処理（復号部１１６）と改変後の復号処理
（復号部１１７）の少なくとも一組であって、本実施例
において、復号部Ａ１１５は例えば、提供されるマルチ
メディア情報に、マルチメディア情報改変部１１３が改
変対象としない種別のメディアデータＡが含まれている
場合を想定したものにすぎず、その存否は特に問わな
い。また、この復号部は、メディアデータの数だけ準備
され、それぞれのメディアデータの復号処理を行う。

【００２１】また、図１のマルチメディア情報改変部１
１３において、１１８はメディアデータの形式変換を行
うメディアデータ形式変換部、１１９はシナリオデータ
の改変情報を生成するシナリオデータ改変部、１２０は
マルチメディア情報の改変方法と、その条件を示した改
変方法データベース、１２１は改変方法データベース１
２０とシナリオデータを元に、シナリオデータとメディ
アデータの改変方法を決定する改変方法決定部である。

【００２２】次に、図２にマルチメディア情報を表現す
るシナリオデータの一例を示す．[Title]の欄はマルチ
メディア情報自体に関する情報を記述した部位であり、
その中のTitleID項はサーバ１０１内での、このマルチ
メディア情報固有の識別子を、TitleName項はこのマル
チメディア情報の名前を、TitleResolution項はこのマ
ルチメディア情報の表示解像度を、TitleFrameRateはこ
のマルチメディア情報の表示レートを、TitleLengthは
このマルチメディア情報の時間的長さをそれぞれ示して
いる。

【００２３】[MediaData]の欄はメディアデータに関す
る情報を記述した部位であり、次の[MediaData]欄まで
が一つのメディアデータに関した記述であり、その中の
MediaDataID項はこのマルチメディア情報内でのメディ
アデータ固有の識別子を、MediaDataType項はそのメデ
ィアデータの表現するメディア種類を、MediaDataForma
t項はそのメディアデータの符号化種別を、MediaDataSo
urce項はそのメディアデータの位置（格納場所）を、Me
diaDataStartTime項はそのメディアデータの表示を開始
するタイトル内時刻を、MediaDataEndTime項はそのメデ
ィアデータの表示を終了するタイトル内時刻を、MediaD
ataDisplayLocation項はそのメディアデータを表示する
位置を、MediaDataDisplaySize項はそのメディアデータ
を表示する大きさを、MediaDataBitRate項はそのメディ
アデータのビットレート情報を、MediaDataFrameRate項
はそのメディアデータの表示レート情報を、MediaDataS
ize項はそのメディアデータのサイズをそれぞれ示して
いる。

【００２４】上記のように構成された情報提供装置とマ
ルチメディア情報において、以下その動作を説明する．
図３は、マルチメディア情報再生装置がマルチメディア
情報の再生を開始し、終了するまでの処理手順を示すフ
ローチャートである。

【００２５】クライアント１０２のシナリオデータ解析
部１１２は、再生するマルチメディア情報のシナリオデ
ータを、サーバ１０１上のマルチメディア情報格納部１
０４から、サーバ１０１上のネットワークインタフェー
ス１０５，サーバ１０１とクライアント１０２間のネッ
トワーク１０３、クライアント１０２上のネットワーク
インタフェース１０６を経由して取得する（ステップ３
０１）。

【００２６】シナリオデータ解析部１１２は、獲得した
シナリオデータの解析を行い、マルチメディア情報再生
に必要な情報を取得し（ステップ３０２）、マルチメデ
ィア情報改変部１１３が、マルチメディア情報改変のた
めの初期化を行う（ステップ３０３）。この初期化に関
しては、図４にて詳しく説明する。

【００２７】シナリオデータ解析部１１２は、獲得した
マルチメディア情報再生に必要な情報を元に、メディア
データ取得部１０７と、メディアデータ復号部１０８を
初期化する（ステップ３０４）。この際、メディアデー
タ復号部１０８の中には、マルチメディア情報中に含ま
れるメディアデータの数だけメディアデータを復号する
機構が呼び出される。

【００２８】図１の例でメディアデータ復号部１０８内
を説明すると、図２で表されるマルチメディア情報中に
メディアデータの数は２つあるので、メディアデータＡ
を復号するメディアデータ復号部Ａ１１５と、メディア
データＢを復号するメディアデータ復号部Ｂ１１６が初
期化される。

【００２９】次に、マルチメディア情報改変部１１３に
より、マルチメディア情報の改変を実行するかどうかの
検査と、実際の改変処理が行われる（ステップ３０
５）。この改変に関する検査と実際の改変処理に関して
は、図７にて詳しく説明する。

【００３０】メディアデータ取得部１０７は、タイトル
時刻とシナリオデータに従って、サーバ１０１上のマル
チメディア情報格納部１０４から、サーバ１０１上のネ
ットワークインタフェース１０５，サーバ１０１とクラ
イアント１０２間のネットワーク１０３，クライアント
１０２上のネットワークインタフェース１０６を経由し
て取得し、それぞれを復号するメディアデータ復号部１
０８に受け渡す（ステップ３０６）。

【００３１】図１の例でメディアデータ復号部１０８内
を説明すると、サーバ１０１から伝送されたメディアデ
ータＡはメディアデータ復号部Ａ１１５に、メディアデ
ータＢはメディアデータ復号部Ｂ１１６に、それぞれ受
け渡される。

【００３２】メディアデータ復号部１０８は、受け渡さ
れたメディアデータを復号し、画面合成部１０９に復号
結果を受け渡す（ステップ３０７）．図１の例でメディ
アデータ復号部１０８内を説明すると、メディアデータ
復号部Ａ１１５はメディアデータＡを復号した結果を、
メディアデータ復号部Ｂ１１６はメディアデータＢを復
号した結果を、画面合成部１０９に受け渡す。

【００３３】画面合成部１０９は、メディアデータ復号
部１０８から受け渡された復号結果を、シナリオデータ
を元に合成し、マルチメディア情報の出力イメージを生
成し、画面出力部１１０に受け渡す（ステップ３０
８）．画面出力部１１０は、画面合成部１０９から受け
渡されたマルチメディア情報の出力イメージを、実際に
出力デバイスから出力を行う（ステップ３０９）。

【００３４】マルチメディア情報に対して利用者が操作
を行う場合は、マルチメディア情報再生装置の入力検知
部１１１に利用者が入力を行う。この利用者による入力
に対する処理はステップ３１０で行われる。

【００３５】クライアント１０２内の入力検知部１１１
からの入力により、タイトル状態が通常再生のままであ
った場合、特別な処理を行わずにステップ３０５に戻
る．また、タイトル時刻ジャンプを要請する入力を検知
した場合は、メディアデータ取得部１０７と画面合成部
１０９の内部のタイトル時刻を、タイトル時刻ジャンプ
先の時刻に修正する（ステップ３１１）。そして、通常
再生時と同じようにステップ３０５に戻る。

【００３６】その後、ステップ３０６においてはメディ
アデータ取得部１０７が、またステップ３０８において
は画面合成部１０９が、修正されたタイトル時刻を元に
処理を行うため、ステップ３０９における画面出力部１
１０によるマルチメディア情報画面には、タイトル時刻
ジャンプが実現されたものが出力される。

【００３７】このように、マルチメディア情報再生終了
を要請する入力が検知されない場合は、ステップ３０５
からステップ３１０を繰り返して、マルチメディア情報
の再生を実現する。

【００３８】ステップ３１０において、マルチメディア
情報再生終了を要請する入力を検知した場合は、メディ
アデータ取得部１０７、メディアデータ復号部１０８，
および画面合成部１０９の終了処理を行う（ステップ３
１２）。そして必要な終了処理が完了後、マルチメディ
ア情報の再生を終了する。

【００３９】次に、図３のステップシナリオ改変機構の
初期化処理（ステップ３０３）に関しての動作を説明す
る．図４は、シナリオ改変機構の初期化処理に関するフ
ローチャートであり、図３のステップ３０３において、
図１のマルチメディア情報改変部１１３で行われる処理
を示したものである。

【００４０】改変方法決定部１２１は、図１のステップ
３０１と同様に、再生するマルチメディア情報のシナリ
オデータを取得する（ステップ４０１）．改変方法決定
部１２１は、獲得したそのマルチメディア情報のシナリ
オデータと、改変方法データベース１２０に保持するシ
ナリオデータ／メディアデータに関する判断方法から、
改変対象とするメディアデータと、改変内容、および改
変を行うタイトル時刻について決定する（ステップ４０
２）。

【００４１】図５は改変方法データベース１２０に保持
している情報内容を示したものである。シナリオデータ
の条件と、その条件を満たした場合に実施する変換内容
が対に示されている．図２で示されたシナリオデータ
は、メディアデータの種類が静止画で、かつメディアデ
ータの形式がMpeg-4Videoであるため、このシナリオデ
ータが改変方法決定部１２１に入力された場合、改変方
法データベース１２０に保持している図５の条件のう
ち、１番目の条件が真になる。

【００４２】このためこの例の場合、改変方法決定部１
２１は、図５の１番目の改変内容である、改変対象メデ
ィアデータの表示終了時刻における復号結果を、静止画
を表現する形式であるWindowsBitmap形式に変換し、そ
れにあわせてシナリオデータを改変する、というマルチ
メディア情報改変を行うことを決定し、内部にマルチメ
ディア情報改変テーブルを構築する。

【００４３】図６に、この例の場合に構築されるマルチ
メディア情報改変テーブルを示す。マルチメディア情報
改変テーブルは、マルチメディア情報改変を行うべきタ
イトル時刻と、そのマルチメディア情報改変の内容、そ
してその改変処理を終了したかどうかを示す情報の対応
からなる。

【００４４】改変処理を終了したかどうかを示す情報
は、タイトル時刻ジャンプなどでタイトル時刻が変化す
る中、一度行ったマルチメディア情報改変処理を再度行
わないようにするために利用する．このマルチメディア
情報改変テーブルは、改変方法決定部が、シナリオデー
タとメディアデータの改変を行うかどうかの検査の際に
使用される。

【００４５】次に、図３中にステップ３０５として示さ
れた、マルチメディア情報改変部１１３がシナリオデー
タとメディアデータの改変を行うかどうかの検査と、実
際の改変処理の動作を説明する．図７は、マルチメディ
ア情報改変部１１３の改変検査、および改変処理に関す
るフローチャートである。

【００４６】改変方法決定部１２１は、ステップ４０２
によって決定した、改変するメディアデータの復号結果
を獲得するタイトル時刻になっているかを調べる（ステ
ップ７０１）．図６のマルチメディア情報改変テーブル
を見て、メディアデータの復号結果を獲得するタイトル
時刻ではなかった場合や、既にそのメディアデータに関
するマルチメディア情報の改変が行われている場合は、
何の処理もせず終了する。図６の例においては、タイト
ル時刻100場合、改変処理を行うことになる。

【００４７】復号結果を獲得するタイトル時刻になった
場合は、改変方法決定部１２１は、メディアデータ形式
変換部１１８とシナリオデータ改変部１１９に対して、
初期化時に決定した変換を実現するための要請を行う
（ステップ７０２）。

【００４８】メディアデータ形式変換部１１８は、改変
方法決定部１２１の要請に従って、対象となるメディア
データを復号するメディアデータ復号部Ｂ１１６からの
出力から、形式変換した新たなメディアデータＢ'を生
成し、一時ファイルシステム１１４上に保存する（ステ
ップ７０３）．この例の場合、図５の１番目に記述され
たマルチメディア情報の改変を行うため、メディアデー
タ形式変換部１１８はメディアデータ復号部Ｂ１１６の
復号結果をWindowsBitmap形式に形式変換し、一時ファ
イルシステム１１４上に/temp/temp1.bmpという名前で
保存を行う。

【００４９】シナリオデータ改変部１１９は、改変方法
決定部１２１の要請に従って、シナリオデータに対する
改変情報を生成する（ステップ７０４）．図８は、この
例における、ステップ７０４においてシナリオデータ改
変部１１９が生成した、シナリオデータに対する改変情
報の内容である。この情報における [MediaDataUpdate]
の欄は、シナリオデータ変換に関する情報を記述したも
のであることを示している。

【００５０】また、この記述は、MediaDataID項が図２
のものに関して、MediaDataType項をImageに、MediaDat
aFormat項をWindowsBitmapに、MediaDataSource項をCLI
ENT://temp/temp1.bmpに、MediaDataBitRate項を0に、M
ediaDataFrameRate項を0に、MediaDataSize項を4000に
変更する、というシナリオデータに対する改変情報を示
すものである。

【００５１】シナリオデータ改変部１１９は、生成した
シナリオデータに対する改変情報をシナリオデータ解析
部１１２に伝え、シナリオデータ解析部１１２は伝えら
れた改変情報をもとに、内部に保持するシナリオ情報に
対してシナリオ改変を行う（ステップ７０５）。

【００５２】シナリオデータ解析部１１２は、再構築を
行った新たなシナリオ情報をもとに、メディアデータ取
得部１０７と画面合成部１０９が保持する、マルチメデ
ィア情報再生に必要な情報を更新する（ステップ７０
６）．この時、メディアデータ復号部１０８内にメディ
アデータ復号部Ｂ'１１７が初期化され、マルチメディ
ア情報改変によって生成されたメディアデータＢ’の復
号に用いられる．以上の動作により、以降のステップ３
０５からステップ３１０では改変後のシナリオデータお
よびメディアデータを用いたマルチメディア情報再生が
行われる。

【００５３】この例においては、静止画を表現するため
に用いられていたMPEG-4Video形式の動画メディアデー
タを、最も品質の高い最終画質の時点での復号結果を元
に、表示に際して計算資源が少ないWindowsBitmap形式
の静止画メディアデータに改変したため、以降の同メデ
ィアデータの表示の際に、表示直後から最終時画質での
表示が可能になる。

【００５４】以上のように、本実施の形態では、改変方
法決定において「シナリオデータ」と改変方法ＤＢに準
備された情報（ＤＢ情報）とから改変方法を決定するも
のである。

【００５５】つまり、 （１）一度再生した結果を用いて以降の再生での高画質
実現を可能にするマルチメディア情報改変手法（例え
ば、静止画を表現するために用いられていた動画形式デ
ータを、最も品質の高い最終画質の時点での復号結果を
元に、表示に際して計算資源が少ないBitmap形式の静止
画データに改変する等）を改変方法データベース１２０
に準備し、改変方法決定部１２１において提供されるシ
ナリオデータと改変方法データベース１２０に準備され
た情報からマルチメディア情報に対する改変方法を決定
し、メディアデータ形式変換部１１８およびシナリオデ
ータ改変部１１９でマルチメディア情報の改変を行うこ
とにより、マルチメディア情報内でのメディアデータの
うち、動画で表現した静止画に関して、一度再生したメ
ディアデータの復号結果を利用して、タイトル時刻ジャ
ンプ時にも常に最終的画質で再生表示をすることができ
る。

【００５６】また、元のシナリオデータで運用されてい
た復号処理よりも少ない計算資源で利用可能な復号処理
を用いるように、シナリオデータと該当メディアデータ
を改変したことにより、以降の同メディアデータの表示
の際に、クライアント上の資源の節約を実現することが
できる。

【００５７】（２）一度再生した結果を用いて以降の再
生での資源消費を低減するといったマルチメディア情報
改変手法を改変方法データベース１２０に準備し、改変
方法決定部１２１においてシナリオデータと改変方法デ
ータベース１２０に準備された情報からマルチメディア
情報改変方式を決定し、メディアデータ形式変換部１１
８およびシナリオデータ改変部１１９でマルチメディア
情報の改変を行うことにより、一度再生したメディアデ
ータの復号結果を利用して、タイトル時刻ジャンプ時の
マルチメディア情報再生装置の資源消費を低減すること
ができる。

【００５８】また、マルチメディア情報改変によってク
ライアント上に生成されたメディアデータを使用するこ
とで、以降のマルチメディア情報再生においてネットワ
ークを介したメディアデータの伝送量を低減することが
できる。

【００５９】（３）一度再生した結果を用いてマルチメ
ディア情報改変手法を決定する情報を改変方法データベ
ース１２０に準備し、改変方法決定部１２１においてシ
ナリオデータと改変方法データベース１２０に準備され
た情報からネットワークを介したメディアデータの伝送
量を低減するようにマルチメディア情報改変方式を決定
し、メディアデータ形式変換部１１８およびシナリオデ
ータ改変部１１９でマルチメディア情報の改変を行うこ
とにより、一度再生したメディアデータの復号結果を利
用して、タイトル時刻ジャンプ時のマルチメディア情報
再生装置のネットワーク伝送処理に対する計算資源と、
タイトル時刻ジャンプ時のマルチメディア情報再生装置
のネットワーク伝送帯域資源と、マルチメディア情報再
生装置とマルチメディア情報提供装置間のネットワーク
帯域資源の使用量を低減することができる等、その実用
的効果は大きい。

【００６０】（実施の形態２）以下、第二の発明の実施
の形態について図面を用いて説明する．図９は、本発明
の一実施形態における構成を示すブロック図である．図
９において、１０１はマルチメディア情報を提供するサ
ーバ、９０１はマルチメディア情報を再生するクライア
ント、１０３はサーバ１０１とクライアント９０１間の
伝送路であるネットワークを示す。

【００６１】また、図９のサーバ１０１内において、１
０４はシナリオデータやメディアデータなどの、マルチ
メディア情報を格納するマルチメディア情報格納部、１
０５はネットワーク１０３に対してデータの発信・受信
を行うネットワークインタフェースを示す。

【００６２】また、図９のクライアント９０１におい
て、１０６はネットワーク１０３に対してデータの発信
・受信を行うネットワークインタフェース、１０７はシ
ナリオデータに沿ってメディアデータ取得の処理を行う
メディアデータ取得部、９０２はメディアデータを復号
するメディアデータ復号部、１０９はメディアデータ復
号部９０２がメディアデータを復号した結果を、シナリ
オデータに沿って合成し、画面出力イメージを生成する
画面合成部、１１０は画面合成部１０９が生成した画面
出力イメージを実際の画面出力デバイスに出力する画面
出力部、１１１は利用者からの入力を検知する入力検知
部、１１２はシナリオデータを解析し、必要な情報を画
面合成部１０９とメディアデータ取得部１０７に与える
シナリオデータ解析部、９０３はマルチメディア情報の
改変を行い、現在の再生に反映させるマルチメディア情
報改変部、１１４はマルチメディア情報改変部９０３が
新たに生成したメディアデータを一時的に保存しておく
一時ファイルシステムである。

【００６３】また、図９のメディアデータ復号部９０２
内において、９０４はマルチメディア情報改変前から存
在するメディアデータＡを復号するメディアデータ復号
部Ａ、９０５はマルチメディア情報改変前から存在する
メディアデータＢを復号するメディアデータ復号部Ｂ、
９０６はマルチメディア情報改変部１１３が新たに生成
したメディアデータＢ'の復号するメディアデータ復号
部Ｂ'を表す。

【００６４】また、図９のマルチメディア情報改変部９
０３において、１１８はメディアデータの形式変換を行
うメディアデータ形式変換部、１１９はシナリオデータ
の改変情報を生成するシナリオデータ改変部、９０７は
マルチメディア情報の改変方法と、その条件を示した改
変方法データベース、９０８は改変方法データベース９
０７と、メディアデータ復号部９０２からの情報を元
に、シナリオデータとメディアデータの改変方法を決定
する改変方法決定部である。

【００６５】上記のように構成された情報提供装置と、
図２で示されたマルチメディア情報において、以下その
動作を説明する．図１０は、マルチメディア情報再生装
置がマルチメディア情報の再生を開始し、終了するまで
の処理手順を示すフローチャートである。

【００６６】クライアント９０１のシナリオデータ解析
部１１２は、再生するマルチメディア情報のシナリオデ
ータを、サーバ１０１上のマルチメディア情報格納部１
０４から、サーバ１０１上のネットワークインタフェー
ス１０５，サーバ１０１とクライアント１０２間のネッ
トワーク１０３、クライアント９０１上のネットワーク
インタフェース１０６を経由して取得する（ステップ１
００１）。

【００６７】シナリオデータ解析部１１２は、獲得した
シナリオデータの解析を行い、マルチメディア情報再生
に必要な情報を取得する（ステップ１００２）。シナリ
オデータ解析部１１２は、獲得したマルチメディア情報
再生に必要な情報を元に、メディアデータ取得部１０７
と、メディアデータ復号部９０２を初期化する（ステッ
プ１００３）。この際、メディアデータ復号部９０２の
中には、マルチメディア情報中に含まれるメディアデー
タの数だけメディアデータを復号する機構が呼び出され
る。

【００６８】図９の例でメディアデータ復号部９０２内
を説明すると、図２で表されるマルチメディア情報中に
メディアデータの数は２つあるので、メディアデータＡ
を復号するメディアデータ復号部Ａ９０４と、メディア
データＢを復号するメディアデータ復号部Ｂ９０５が初
期化される。

【００６９】次に、マルチメディア情報改変部９０３に
より、マルチメディア情報改変を実行するかどうかの検
査と、実際の改変処理が行われる（ステップ１００
４）。この改変に関する検査と実際の改変処理に関して
は、図１１にて詳しく説明する。

【００７０】メディアデータ取得部１０７は、タイトル
時刻とシナリオデータに従って、サーバ１０１上のマル
チメディア情報格納部１０４から、サーバ１０１上のネ
ットワークインタフェース１０５，サーバ１０１とクラ
イアント９０１間のネットワーク１０３，クライアント
９０１上のネットワークインタフェース１０６を経由し
て取得し、それぞれを復号するメディアデータ復号部９
０２に受け渡す（ステップ１００５）。

【００７１】図９の例でメディアデータ復号部９０２内
を説明すると、サーバ１０１から伝送されたメディアデ
ータＡはメディアデータ復号部Ａ９０４に、メディアデ
ータＢはメディアデータ復号部Ｂ９０５に、それぞれ受
け渡される。

【００７２】メディアデータ復号部９０２は、受け渡さ
れたメディアデータを復号し、画面合成部１０９に復号
結果を受け渡す（ステップ１００６）．図９の例でメデ
ィアデータ復号部９０２内を説明すると、メディアデー
タ復号部Ａ９０４はメディアデータＡを復号した結果
を、メディアデータ復号部Ｂ９０５はメディアデータＢ
を復号した結果を、画面合成部１０９に受け渡す。

【００７３】画面合成部１０９は、メディアデータ復号
部９０２から受け渡された復号結果を、シナリオデータ
を元に合成し、マルチメディア情報の出力イメージを生
成し、画面出力部１１０に受け渡す（ステップ１００
７）．画面出力部１１０は、画面合成部１０９から受け
渡されたマルチメディア情報の出力イメージを、実際に
出力デバイスから出力を行う（ステップ１００８）。マ
ルチメディア情報に対して利用者が操作を行う場合は、
マルチメディア情報再生装置の入力検知部１１１に利用
者が入力を行う。この利用者による入力に対する処理は
ステップ１００９で行われる。

【００７４】クライアント９０１内の入力検知部１１１
からの入力により、タイトル状態が通常再生のままであ
った場合、特別な処理を行わずにステップ１００４に戻
る．また、タイトル時刻ジャンプを要請する入力を検知
した場合は、メディアデータ取得部１０７と画面合成部
１０９の内部のタイトル時刻を、タイトル時刻ジャンプ
先の時刻に修正する（ステップ１０１０）。そして、通
常再生時と同じようにステップ１００４に戻る。

【００７５】その後、ステップ１００５においてはメデ
ィアデータ取得部１０７が、またステップ１００７にお
いては画面合成部１０９が、修正されたタイトル時刻を
元に処理を行うため、ステップ１００８における画面出
力部１１０によるマルチメディア情報画面には、タイト
ル時刻ジャンプが実現されたものが出力される。

【００７６】このように、マルチメディア情報再生終了
を要請する入力が検知されない場合は、ステップ１００
４からステップ１００９を繰り返して、マルチメディア
情報の再生を実現する。

【００７７】ステップ１００９において、マルチメディ
ア情報再生終了を要請する入力を検知した場合は、メデ
ィアデータ取得部１０７、メディアデータ復号部９０
２，および画面合成部１０９の終了処理を行う（ステッ
プ１０１１）。そして必要な終了処理が完了後、マルチ
メディア情報の再生を終了する。

【００７８】次に、図１０中にステップ１００４として
示された、マルチメディア情報改変部９０３がシナリオ
データとメディアデータの改変を行うかどうかの検査
と、実際の改変処理の動作を説明する．図１１は、マル
チメディア情報改変部９０３の改変検査、および改変処
理に関するフローチャートである。

【００７９】改変方法決定部９０８は、メディアデータ
復号部９０２から、各メディアデータを復号した結果の
レポートを取得し、解析を行う（ステップ１１０１）．
このメディアデータ復号部９０２による復号結果のレポ
ートは、そのメディアデータの１処理単位が終了した時
点で改変方法決定部９０８に随時送られる。この１処理
単位は任意であるが、この例においては動画では１フレ
ーム分の復号処理としている。

【００８０】図１２は、メディアデータ復号部Ｂ９０５
が改変方法決定部９０８に伝達した、メディアデータＢ
を復号した結果のレポートの一例である．図１２におい
て、MediaDataIDの値はメディアデータ復号部Ｂ９０５
が復号処理を行うメディアデータＢの、そのマルチメデ
ィア情報のシナリオデータ中に記述されたメディアデー
タ識別子、MediaDataFormatの値はメディアデータ復号
部Ｂ９０５が復号処理を行うメディアデータＢの形式、
DecoderStartTimeの値はメディアデータ復号部Ｂ９０５
がメディアデータＢのうちレポート対象の１フレームの
復号処理を開始した時刻、DecoderEndTimeの値はメディ
アデータ復号部Ｂ９０５がメディアデコーダＢのうちレ
ポート対象の１フレームの復号処理を終了した時刻、Fr
ameTypeの値はそのフレームの種別、MacroBlockTypeは
そのフレームを形成するマクロブロックの種別、Quanti
tizedParameterはそのフレームを符号化した際の量子化
係数、SpentCPUResourceはそのフレームを復号する際の
計算資源の消費量を示している。

【００８１】次に改変方法決定部９０８は、ステップ１
１０１によってメディアデータ復号部９０２から取得し
たメディアデータ復号処理レポートと、改変方法データ
ベース９０７が保持する、メディアデータの復号結果と
マルチメディア情報改変の判断方法の情報から、改変対
象とするメディアデータと、シナリオデータに対する改
変内容を決定する（ステップ１１０２）。ここで該当す
る改変対象と改変内容が決定できなかった場合は、何も
行わずステップ１００５に移行する。

【００８２】図１３は、改変方法データベース９０７が
保持する、メディアデータの復号結果とマルチメディア
情報改変の判断を行う情報の一例を示している．図２で
示されたシナリオデータで用いられている、形式がMpeg
-4VideoのメディアデータＢの全てのフレームが、動き
補償を伴わないマクロブロックにより形成されている場
合を例として考える．この場合、このメディアデータＢ
の再生結果は、動きの伴わない動画になる。即ち、メデ
ィアデータＢは静止画を表現する動画形式のデータであ
るといえる。

【００８３】メディアデータ復号部Ｂ９０５は、復号結
果のレポートとして、動き補償を伴わないマクロブロッ
クがメディアデータＢのフレームを構成していることを
改変方法決定部９０８に伝える．改変方法決定部９０８
は、このレポートを集計し、図１３に示される改変方法
データベース９０７における条件１が真になることを知
る．このためこの例の場合、改変方法決定部９０８は、
図１３の１番目の改変内容である、改変対象メディアデ
ータの復号結果を、静止画を表現する形式であるWindow
sBitmap形式に形式変換し、それにあわせてシナリオデ
ータを改変する、というマルチメディア情報改変を行う
ことを決定する。

【００８４】このようにマルチメディア情報の改変内容
が決定できた場合、改変方法決定部９０８は、メディア
データ形式変換部１１８とシナリオデータ改変部１１９
に対して、前述の改変内容を実現するための要請を行う
（ステップ１１０３）。

【００８５】メディアデータ形式変換部１１８は、改変
方法決定部９０８の要請に従って、対象となるメディア
データを復号するメディアデータ復号部Ｂ９０５からの
出力から、形式変換した新たなメディアデータＢ'を生
成し、一時ファイルシステム１１４上に保存する（ステ
ップ１１０４）．この例の場合、図１３の１番目に記述
されたマルチメディア情報の改変を行うため、メディア
データ形式変換部１１８はメディアデータ復号部Ｂ９０
５の復号結果をWindowsBitmap形式に形式変換し、一時
ファイルシステム１１４上に/temp/temp1.bmpという名
前で保存を行う。

【００８６】シナリオデータ改変部１１９は、改変方法
決定部９０８の要請に従って、シナリオデータに対する
改変情報を生成する（ステップ１１０５）．図１４は、
この例における、ステップ１１０５においてシナリオデ
ータ改変部１１９が生成した、シナリオデータに対する
改変情報の内容である。

【００８７】この情報における [MediaDataUpdate]の欄
は、シナリオデータ変換に関する情報を記述したもので
あることを示している。また、この記述は、MediaDataI
D項が図２のものに関して、MediaDataType項をImage
に、MediaDataFormat項をWindowsBitmapに、MediaDataS
ource項をCLIENT://temp/temp1.bmpに、MediaDataBitRa
te項を0に、MediaDataFrameRate項を0に、MediaDataSiz
e項を4000に変更する、というシナリオデータに対する
改変情報を示すものである。

【００８８】シナリオデータ改変部１１９は、生成した
シナリオデータに対する改変情報をシナリオデータ解析
部１１２に伝え、シナリオデータ解析部１１２は伝えら
れた改変情報をもとに、内部に保持するシナリオ情報に
対してシナリオ改変を行う（ステップ１１０６）。

【００８９】シナリオデータ解析部１１２は、再構築を
行った新たなシナリオ情報をもとに、メディアデータ取
得部１０７と画面合成部１０９が保持する、マルチメデ
ィア情報再生に必要な情報を更新する（ステップ１１０
７）．この時、メディアデータ復号部９０３内にメディ
アデータ復号部Ｂ'９０６が初期化され、マルチメディ
ア情報改変によって生成されたメディアデータＢ’の復
号に用いられる。

【００９０】これ以降、メディアデータ復号部Ｂ'９０
６による、メディアデータＢ'の復号結果のレポート
も、他のメディアデータ復号部と同様に改変方法決定部
９０８に伝達され、同様の改変方法に対する検査がなさ
れる．以上の動作により、以降のステップ１００４から
ステップ１００９では改変後のシナリオデータおよびメ
ディアデータを用いたマルチメディア情報再生が行われ
る。

【００９１】この例においては、マルチメディア情報内
でのMPEG-4Video形式の動画メディアデータが、静止画
データで表現できる内容であることをメディアデータの
復号処理から検知し、メディアデータの先頭フレームよ
りも高画質な状態での復号結果を元に、表示に際して計
算資源が少ないWindowsBitmap形式の静止画メディアデ
ータに改変したため、以降の同メディアデータの表示開
始の際に、動画データのままで運用する場合よりも高画
質での表示が可能になる。

【００９２】以上のように、本実施の形態では、改変方
法決定において、実施の形態１の場合のように、「シナ
リオデータ」と改変方法ＤＢに準備された情報（ＤＢ情
報）とから改変方法を決定するのに対して、「復号部か
らの復号結果」とＤＢ情報とから改変方法を決定するも
のである。

【００９３】つまり、 （１）一度再生した結果を用いて以降の再生での高画質
実現を可能にするマルチメディア情報改変手法を改変方
法データベース９０７に準備し、改変方法決定部９０８
においてメディアデータ復号部９０２からの復号結果レ
ポートと改変方法データベース９０７に準備された情報
からマルチメディア情報に対する改変方式を決定し、メ
ディアデータ形式変換部１１８およびシナリオデータ改
変部１１９でマルチメディア情報の改変を行うことによ
り、マルチメディア情報内でのメディアデータのうち、
動画で表現した静止画に関して、一度再生したメディア
データの復号結果を利用して、タイトル時刻ジャンプ時
にも高画質で再生表示をすることができる。

【００９４】また、元のシナリオデータで運用されてい
た復号処理よりも少ない計算資源で利用可能な復号処理
を用いるように、シナリオデータと該当メディアデータ
を改変したことにより、以降の同メディアデータの表示
の際に、クライアント上の資源の節約を実現することが
できる。

【００９５】（２）一度再生した結果を用いて以降の再
生での資源消費を低減するマルチメディア情報改変手法
を改変方法データベース９０７に準備し、改変方法決定
部９０８においてメディアデータの復号処理レポートと
改変方法データベース９０７に準備された情報からマル
チメディア情報改変方式を決定し、メディアデータ形式
変換部１１８およびシナリオデータ改変部１１９でマル
チメディア情報の改変を行うことにより、一度再生した
メディアデータの復号結果を利用して、タイトル時刻ジ
ャンプ時のマルチメディア情報再生装置の資源消費を低
減することができる。

【００９６】また、メディアデータの復号処理の際に判
明するメディアデータ自体の特質を元にマルチメディア
情報改変方法を決定するため、静止画に置き換えること
が可能な動画メディアデータを、それがマルチメディア
情報制作者が意図的に準備したものではない場合、即ち
シナリオデータに記述されていない場合でも検出するこ
とができ、このような場合のマルチメディア情報におい
てもタイトル時刻ジャンプ時のマルチメディア情報再生
装置の資源消費を低減することができる．また、マルチ
メディア情報改変によってクライアント上に生成された
メディアデータを使用することで、以降のマルチメディ
ア情報再生においてネットワークを介したメディアデー
タの伝送量を低減することができる。

【００９７】（３）一度再生した結果を用いてマルチメ
ディア情報改変手法を決定する情報を改変方法データベ
ース９０７に準備し、改変方法決定部９０８においてメ
ディアデータの復号結果レポートと改変方法データベー
ス９０７に準備された情報からネットワークを介したメ
ディアデータの伝送量を低減するようにマルチメディア
情報改変方式を決定し、メディアデータ形式変換部１１
８およびシナリオデータ改変部１１９でマルチメディア
情報の改変を行うことにより、一度再生したメディアデ
ータの復号結果を利用して、タイトル時刻ジャンプ時の
マルチメディア情報再生装置のネットワーク伝送処理に
対する計算資源と、タイトル時刻ジャンプ時のマルチメ
ディア情報再生装置のネットワーク伝送帯域資源と、マ
ルチメディア情報再生装置とマルチメディア情報提供装
置間のネットワーク帯域資源の使用量を低減することが
できる等、その実用的効果は大きい。

【００９８】（実施の形態３）以下、第三の発明の実施
の形態について図面を用いて説明する．図１５は、本発
明の一実施形態における構成を示すブロック図である．
図１５において、１０１はマルチメディア情報を提供す
るサーバ、１５０１はマルチメディア情報を再生するク
ライアント、１０３はサーバ１０１とクライアント１５
０１間の伝送路であるネットワークを示す。

【００９９】また、図１５のサーバ１０１内において、
１０４はシナリオデータやメディアデータなどの、マル
チメディア情報を格納するマルチメディア情報格納部、
１０５はネットワーク１０３に対してデータの発信・受
信を行うネットワークインタフェースを示す。

【０１００】また、図１５のクライアント１５０１にお
いて、１０６はネットワーク１０３に対してデータの発
信・受信を行うネットワークインタフェース、１０７は
シナリオデータに沿ってメディアデータ取得の処理を行
うメディアデータ取得部、１０８はメディアデータを復
号するメディアデータ復号部、１０９はメディアデータ
復号部１０８がメディアデータを復号した結果を、シナ
リオデータに沿って合成し、画面出力イメージを生成す
る画面合成部、１１０は画面合成部１０９が生成した画
面出力イメージを実際の画面出力デバイスに出力する画
面出力部、１１１は利用者からの入力を検知する入力検
知部、１１２はシナリオデータを解析し、必要な情報を
画面合成部１０９とメディアデータ取得部１０７に与え
るシナリオデータ解析部、１５０２はマルチメディア情
報の改変を行い、現在の再生に反映させるマルチメディ
ア情報改変部、１１４はマルチメディア情報改変部１５
０２が新たに生成したメディアデータを一時的に保存し
ておく一時ファイルシステムである。

【０１０１】また、図１５のメディアデータ復号部１０
８内において、１１５はマルチメディア情報改変前から
存在するメディアデータＡを復号するメディアデータ復
号部Ａ、１１６はマルチメディア情報改変前から存在す
るメディアデータＢを復号するメディアデータ復号部
Ｂ、１１７はマルチメディア情報改変部１１３が新たに
生成したメディアデータＢ'の復号するメディアデータ
復号部Ｂ'を表す。

【０１０２】また、図１５のマルチメディア情報改変部
１５０２において、１１８はメディアデータの形式変換
を行うメディアデータ形式変換部、１１９はシナリオデ
ータの改変情報を生成するシナリオデータ改変部、１５
０４はマルチメディア情報の改変方法と、その条件を示
した改変方法データベース、１５０５は改変方法データ
ベース１５０４と、画面合成部１５０３からの情報を元
に、シナリオデータとメディアデータの改変方法を決定
する改変方法決定部である。

【０１０３】次に、図１６にマルチメディア情報を表現
するシナリオデータの一例を示す．[Title]の欄はマル
チメディア情報自体に関する情報を記述した部位であ
り、その中のTitleID項はサーバ１０１内での、このマ
ルチメディア情報固有の識別子を、TitleName項はこの
マルチメディア情報の名前を、TitleResolution項はこ
のマルチメディア情報の表示解像度を、TitleFrameRate
はこのマルチメディア情報の表示レートを、TitleLengt
hはこのマルチメディア情報の時間的長さをそれぞれ示
している。

【０１０４】[MediaData]の欄はメディアデータに関す
る情報を記述した部位であり、次の[MediaData]欄まで
が一つのメディアデータに関した記述である．その中の
MediaDataID項はこのマルチメディア情報内でのメディ
アデータ固有の識別子を、MediaDataType項はそのメデ
ィアデータの表現するメディア種類を、MediaDataForma
t項はそのメディアデータの符号化種別を、MediaDataSo
urce項はそのメディアデータの位置を、MediaDataStart
Time項はそのメディアデータの表示を開始するタイトル
内時刻を、MediaDataEndTime項はそのメディアデータの
表示を終了するタイトル内時刻を、MediaDataDisplayLo
cation項はそのメディアデータを表示する位置を、Medi
aDataDisplaySize項はそのメディアデータを表示する大
きさを、MediaDataBitRate項はそのメディアデータのビ
ットレート情報を、MediaDataFrameRate項はそのメディ
アデータの表示レート情報を、MediaDataSize項はその
メディアデータのサイズをそれぞれ示している。

【０１０５】上記のように構成された情報提供装置と、
図１６で示されたマルチメディア情報において、以下そ
の動作を説明する．図１７は、マルチメディア情報再生
装置がマルチメディア情報の再生を開始し、終了するま
での処理手順を示すフローチャートである。

【０１０６】クライアント１５０１のシナリオデータ解
析部１１２は、再生するマルチメディア情報のシナリオ
データを、サーバ１０１上のマルチメディア情報格納部
１０４から、サーバ１０１上のネットワークインタフェ
ース１０５，サーバ１０１とクライアント１０２間のネ
ットワーク１０３、クライアント１５０２上のネットワ
ークインタフェース１０６を経由して取得する（ステッ
プ１７０１）。

【０１０７】シナリオデータ解析部１１２は、獲得した
シナリオデータの解析を行い、マルチメディア情報再生
に必要な情報を取得し（ステップ１７０２）、シナリオ
データ解析部１１２は、獲得したマルチメディア情報再
生に必要な情報を元に、メディアデータ取得部１０７
と、メディアデータ復号部１０８を初期化する（ステッ
プ１７０３）。この際、メディアデータ復号部１０８の
中には、マルチメディア情報中に含まれるメディアデー
タの数だけメディアデータを復号する機構が呼び出され
る。

【０１０８】図１５の例でメディアデータ復号部１０８
内を説明すると、図１６で表されるマルチメディア情報
中にメディアデータの数は２つあるので、メディアデー
タＡを復号するメディアデータ復号部Ａ１１５と、メデ
ィアデータＢを復号するメディアデータ復号部Ｂ１１６
が初期化される。

【０１０９】次に、マルチメディア情報改変部１５０２
により、マルチメディア情報改変を実行するかどうかの
検査と、実際の改変処理が行われる（ステップ１７０
４）。この改変に関する検査と実際の改変処理に関して
は、図１８にて詳しく説明する。

【０１１０】メディアデータ取得部１０７は、タイトル
時刻とシナリオデータに従って、サーバ１０１上のマル
チメディア情報格納部１０４から、サーバ１０１上のネ
ットワークインタフェース１０５，サーバ１０１とクラ
イアント１５０１間のネットワーク１０３，クライアン
ト１５０１上のネットワークインタフェース１０６を経
由して取得し、それぞれを復号するメディアデータ復号
部１０８に受け渡す（ステップ１７０５）。

【０１１１】図１５の例でメディアデータ復号部１０８
内を説明すると、サーバ１０１から伝送されたメディア
データＡはメディアデータ復号部Ａ１１５に、メディア
データＢはメディアデータ復号部Ｂ１１６に、それぞれ
受け渡される。

【０１１２】メディアデータ復号部１０８は、受け渡さ
れたメディアデータを復号し、画面合成部１５０３に復
号結果を受け渡す（ステップ１７０６）．図１５の例で
メディアデータ復号部１０８内を説明すると、メディア
データ復号部Ａ１１５はメディアデータＡを復号した結
果を、メディアデータ復号部Ｂ１１６はメディアデータ
Ｂを復号した結果を、画面合成部１５０３に受け渡す。

【０１１３】画面合成部１５０３は、メディアデータ復
号部１０８から受け渡された復号結果を、シナリオデー
タを元に合成し、マルチメディア情報の出力イメージを
生成し、画面出力部１１０に受け渡す（ステップ１６０
７）．画面出力部１１０は、画面合成部１５０３から受
け渡されたマルチメディア情報の出力イメージを、実際
に出力デバイスから出力を行う（ステップ１７０８）。

【０１１４】マルチメディア情報に対して利用者が操作
を行う場合は、マルチメディア情報再生装置の入力検知
部１１１に利用者が入力を行う。この利用者による入力
に対する処理はステップ１７０９で行われる。

【０１１５】クライアント１５０１内の入力検知部１１
１からの入力により、タイトル状態が通常再生のままで
あった場合、特別な処理を行わずにステップ１７０４に
戻る．また、タイトル時刻ジャンプを要請する入力を検
知した場合は、メディアデータ取得部１０７と画面合成
部１５０３の内部のタイトル時刻を、タイトル時刻ジャ
ンプ先の時刻に修正する（ステップ１７１０）。そし
て、通常再生時と同じようにステップ１７０４に戻る。

【０１１６】その後、ステップ１７０５においてはメデ
ィアデータ取得部１０７が、またステップ１７０７にお
いては画面合成部１５０３が、修正されたタイトル時刻
を元に処理を行うため、ステップ１７０８における画面
出力部１１０によるマルチメディア情報画面には、タイ
トル時刻ジャンプが実現されたものが出力される。

【０１１７】このように、マルチメディア情報再生終了
を要請する入力が検知されない場合は、ステップ１７０
４からステップ１７０９を繰り返して、マルチメディア
情報の再生を実現する。

【０１１８】ステップ１７０９において、マルチメディ
ア情報再生終了を要請する入力を検知した場合は、メデ
ィアデータ取得部１０７、メディアデータ復号部１０
８，および画面合成部１５０３の終了処理を行う（ステ
ップ１７１１）。そして必要な終了処理が完了後、マル
チメディア情報の再生を終了する。

【０１１９】次に、図１７中にステップ１７０４として
示された、マルチメディア情報改変部１５０２がシナリ
オデータとメディアデータの改変を行うかどうかの検査
と、実際の改変処理の動作を説明する．図１８は、マル
チメディア情報改変部１５０２の改変検査、および改変
処理に関するフローチャートである。

【０１２０】改変方法決定部１５０５は、画面合成部１
５０３から、各メディアデータの復号結果を合成し、画
面出力部１１０に受け渡す処理の結果レポートを取得
し、解析を行う（ステップ１８０１）。このメディアデ
ータ復号処理結果のレポートは、その１処理単位が終了
した時点で改変方法決定部１５０５に随時送られる。こ
の１処理単位は任意であるが、この例においてはマルチ
メディア情報画面を１フレーム分合成する処理としてい
る。

【０１２１】図１９は、画面合成部１５０３から、改変
方法決定部１５０５に対して送られる、マルチメディア
情報画面１フレームを合成する処理結果のレポートの一
例である．図１９において、MediaDataIDの値は対象と
なるメディアデータの、そのマルチメディア情報のシナ
リオデータ中に記述されたメディアデータ識別子、Expa
ndSourceSizeはメディアデータ復号部１０８から渡され
るメディアデータを復号した出力のサイズ、ExpandOutp
utSizeはシナリオデータに記述されたそのメディアデー
タの表示サイズ、ExpandStartTimeは画面合成部１５０
３がメディアデータ復号部１０８から渡される復号結果
を、シナリオデータに記述された表示サイズに拡大縮小
する処理を開始した時刻、ExpandEndTimeは画面合成部
１５０３がメディアデータ復号部１０８から渡される復
号結果を、シナリオデータに記述された表示サイズに拡
大縮小する処理を終了した時刻、ExpandSpentCPUResour
ceは画面合成部１５０３がメディアデータ復号部１０８
から渡される復号結果を、シナリオデータに記述された
表示サイズに拡大縮小する処理に消費した計算資源量、
ComposeStartTimeはシナリオデータに記述された画面位
置に全てのメディアデータ復号結果を拡大縮小処理した
結果を合成する処理を開始した時刻、ComposeEndTimeは
シナリオデータに記述された画面位置に全てのメディア
データ復号結果を拡大縮小処理した結果を合成する処理
を終了した時刻、ComposeSpentCPUResourceはシナリオ
データに記述された画面位置に全てのメディアデータ復
号結果を拡大縮小処理した結果を合成する処理に消費し
た計算資源量を示している。

【０１２２】図１９におけるMediaDataID、ExpandSourc
eSize、ExpandOutputSize、ExpandStartTime、ExpandEn
dTime、ExpandSpentCPUResourceの項は、その時点で再
生状態にある全てのメディアデータに関してそれぞれ存
在する。

【０１２３】次に改変方法決定部１５０５は、ステップ
１８０１によって画面合成部１５０３から取得したマル
チメディア情報画面合成処理レポートと、改変方法デー
タベース１５０４が保持する、マルチメディア情報画面
合成処理結果とマルチメディア情報改変の判断方法の情
報から、改変対象とするメディアデータと、シナリオデ
ータに対する改変内容を決定する（ステップ１８０
２）。ここで該当する改変対象と改変内容が決定できな
かった場合は、何も行わずステップ１７０５に移行す
る。

【０１２４】図２０は、改変方式データベース１５０４
が保持する、マルチメディア情報画面合成結果とマルチ
メディア情報改変の判断を行う情報の一例を示してい
る．図２０における条件１は、メディアデータ復号部１
０８からの出力をシナリオデータ中のメディアデータ表
示サイズに拡大縮小する処理に消費する計算資源が大き
い場合に真になり、その結果、そのメディアデータのサ
イズを表示サイズに形式変換し、それにあわせてシナリ
オデータを改変するという処理を示している。

【０１２５】また、図２０における条件２は、メディア
データ復号処理１０８からの出力をシナリオデータ中の
メディアデータ表示サイズに拡大縮小した結果を合成し
てマルチメディア情報画面を生成する処理に消費する計
算資源が大きい場合に真になり、その結果、マルチメデ
ィア情報の表示レートを調整するようにシナリオデータ
を改変するという処理を示している。

【０１２６】改変方法決定部１５０５は、画面合成部１
５０３から取得した図１９の情報を解析し、改変方法デ
ータベース１５０４が保持する図２０のうち、条件１が
真になることを知る．このためこの例の場合、改変方法
決定部１５０５は、図２０の１番目の改変内容である、
改変対象メディアデータの復号結果を表示サイズに拡大
縮小したものを、静止画を表現する形式であるWindowsB
itmap形式に形式変換し、それにあわせてシナリオデー
タを改変する、というマルチメディア情報改変を行うこ
とを決定する。

【０１２７】このようにマルチメディア情報の改変内容
が決定できた場合、改変方法決定部１５０５は、メディ
アデータ形式変換部１１８とシナリオデータ改変部１１
９に対して、前述の改変内容を実現するための要請を行
う（ステップ１８０３）。

【０１２８】メディアデータ形式変換部１１８は、改変
方法決定部１５０５の要請に従って、対象となるメディ
アデータを復号するメディアデータ復号部Ｂ１１６から
の出力から、形式変換した新たなメディアデータＢ'を
生成し、一時ファイルシステム１１４上に保存する（ス
テップ１８０４）。

【０１２９】この例の場合、図２０の１番目に記述され
たマルチメディア情報の改変を行うため、メディアデー
タ形式変換部１１８はメディアデータ復号部Ｂ１１６の
復号結果を表示するサイズに拡大縮小し、WindowsBitma
p形式に形式変換し、一時ファイルシステム１１４上に/
temp/temp1.bmpという名前で保存を行う。

【０１３０】シナリオデータ改変部１１９は、改変方法
決定部１５０５の要請に従って、シナリオデータに対す
る改変情報を生成する（ステップ１８０５）．図２１
は、この例における、ステップ１８０５においてシナリ
オデータ改変部１１９が生成した、シナリオデータに対
する改変情報の内容である。

【０１３１】この情報における [MediaDataUpdate]の欄
は、シナリオデータ変換に関する情報を記述したもので
あることを示している。また、この記述は、MediaDataI
D項が図１６のものに関して、MediaDataFormat項をWind
owsBitmapに、MediaDataSource項をCLIENT://temp/temp
1.bmpに、MediaDataSize項を3000に変更する、というシ
ナリオデータに対する改変情報を示すものである。

【０１３２】シナリオデータ改変部１１９は、生成した
シナリオデータに対する改変情報をシナリオデータ解析
部１１２に伝え、シナリオデータ解析部１１２は伝えら
れた改変情報をもとに、内部に保持するシナリオ情報に
対してシナリオ改変を行う（ステップ１８０６）。

【０１３３】シナリオデータ解析部１１２は、再構築を
行った新たなシナリオ情報をもとに、メディアデータ取
得部１０７と画面合成部１０９が保持する、マルチメデ
ィア情報再生に必要な情報を更新する（ステップ１８０
７）。

【０１３４】この時、メディアデータ復号部１０８内に
メディアデータ復号部Ｂ'１１７が初期化され、マルチ
メディア情報改変によって生成されたメディアデータ
Ｂ’の復号に用いられる。

【０１３５】以上の動作により、以降のステップ１７０
４からステップ１７０９では改変後のシナリオデータお
よびメディアデータを用いたマルチメディア情報再生が
行われる。

【０１３６】この例においては、メディアデータの復号
結果をマルチメディア情報での表示サイズに拡大縮小す
る際に大きな計算資源を消費していることを画面合成部
の処理から検知し、表示サイズと同じ大きさのメディア
データに形式変換し、それにあわせてマルチメディア情
報を更新したため、以降のマルチメディア情報再生の際
に、より少ない計算資源での再生が可能になる。

【０１３７】以上のように、本実施の形態では、改変方
法決定において、実施の形態１の場合のような「シナリ
オデータ」、又は、実施の形態２の場合のような「復号
部からの復号結果」と、改変方法ＤＢに準備された情報
（ＤＢ情報）とから改変方法を決定するのに対して、
「合成処理部の処理結果」とＤＢ情報とから改変方法を
決定するものである。

【０１３８】つまり、 （１）マルチメディア情報再生における資源消費を低減
するマルチメディア情報改変手法を改変方法データベー
ス１５０４に準備し、改変方法決定部１５０５において
画面合成部の処理レポートと改変方法データベース１５
０４に準備された情報からマルチメディア情報改変方式
を決定し、メディアデータ形式変換部１１８およびシナ
リオデータ改変部１１９でマルチメディア情報の改変を
行うことにより、タイトル時刻ジャンプ時のマルチメデ
ィア情報再生装置の資源消費を低減することができる。

【０１３９】また、画面合成時の際に判明する情報を元
にマルチメディア情報改変方法を決定するため、タイト
ル時刻ジャンプ時のマルチメディア情報再生装置の資源
消費を、その画面合成処理能力に応じて低減することが
できる。

【０１４０】（２）マルチメディア情報再生における資
源消費を低減するマルチメディア情報改変手法を改変方
法データベース１５０４に準備し、改変方法決定部１５
０５において画面合成部の処理レポートと改変方法デー
タベース１５０４に準備された情報からマルチメディア
情報改変方式を決定し、メディアデータ形式変換部１１
８およびシナリオデータ改変部１１９でマルチメディア
情報の改変を行うことにより、タイトル時刻ジャンプ時
のマルチメディア情報再製装置の資源消費を、その画面
合成処理能力に応じて低減することができる。

【０１４１】また、マルチメディア情報改変によってク
ライアント上に生成されたメディアデータを使用するこ
とで、以降のマルチメディア情報再生においてネットワ
ークを介したメディアデータの伝送量を低減することが
できる。

【０１４２】（２）一度再生した結果を用いてマルチメ
ディア情報改変手法を決定する情報を改変方法データベ
ース１５０４に準備し、改変方法決定部１５０５におい
てマルチメディア情報画面合成の処理レポートと改変方
法データベース１５０４に準備された情報からネットワ
ークを介したメディアデータの伝送量を低減するように
マルチメディア情報改変方式を決定し、メディアデータ
形式変換部１１８およびシナリオデータ改変部１１９で
マルチメディア情報の改変を行うことにより、一度再生
したメディアデータの復号結果を利用して、タイトル時
刻ジャンプ時のマルチメディア情報再生装置のネットワ
ーク伝送処理に対する計算資源と、タイトル時刻ジャン
プ時のマルチメディア情報再生装置のネットワーク伝送
帯域資源と、マルチメディア情報再生装置とマルチメデ
ィア情報提供装置間のネットワーク帯域資源の使用量を
低減することができる等、その実用的効果は大きい。

【０１４３】（実施の形態４）以下、第四の発明の実施
の形態について図面を用いて説明する．図２２は、本発
明の一実施形態における構成を示すブロック図である．
図２２において、２２０１はマルチメディア情報を提供
するサーバ、２２０２はマルチメディア情報を再生する
クライアント、２２０３はサーバ２２０１とクライアン
ト２２０２間の伝送路であるネットワークを示す。

【０１４４】また、図２２のサーバ２２０１内におい
て、２２０４はシナリオデータやメディアデータなど
の、マルチメディア情報を格納するマルチメディア情報
格納部、２２０５はマルチメディア情報格納部２２０４
にマルチメディア情報の登録や更新を行うマルチメディ
ア情報管理部、２２０６はネットワーク２２０３に対し
てデータの発信・受信を行うネットワークインタフェー
スを示す。

【０１４５】また、図２２のクライアント２２０２にお
いて、２２０７はネットワーク２２０３に対してデータ
の発信・受信を行うネットワークインタフェース、１０
７はシナリオデータに沿ってメディアデータ取得の処理
を行うメディアデータ取得部、１０８はメディアデータ
を復号するメディアデータ復号部、１０９はメディアデ
ータ復号部１０８がメディアデータを復号した結果を、
シナリオデータに沿って合成し、画面出力イメージを生
成する画面合成部、１１０は画面合成部１０９が生成し
た画面出力イメージを実際の画面出力デバイスに出力す
る画面出力部、１１１は利用者からの入力を検知する入
力検知部、２２０８はシナリオデータを解析し、必要な
情報を画面合成部１０９とメディアデータ取得部１０７
とシナリオデータ生成部２２１０に与えるシナリオデー
タ解析部、１１３はマルチメディア情報の改変を行い、
現在の再生に反映させるマルチメディア情報改変部、２
２０９はマルチメディア情報改変部１１３が新たに生成
したメディアデータを一時的に保存しておく一時ファイ
ルシステム、２２１０は、マルチメディア情報再生終了
時に、その時点でのシナリオ情報からシナリオデータを
生成するシナリオデータ生成部、２２１１は、マルチメ
ディア情報再生終了時にその時点でのメディアデータと
シナリオデータの保存要請を（マルチメディア情報管理
部２２０５に対して）行うマルチメディア情報保存処理
部である。

【０１４６】図２２のメディアデータ復号部１０８内に
おいて、１１５はマルチメディア情報改変前から存在す
るメディアデータＡを復号するメディアデータ復号部
Ａ、１１６はマルチメディア情報改変前から存在するメ
ディアデータＢを復号するメディアデータ復号部Ｂ、１
１７はマルチメディア情報改変部１１３が新たに生成し
たメディアデータＢ'の復号するメディアデータ復号部
Ｂ'を表す。

【０１４７】また、図２２のマルチメディア情報改変部
１１３において、１１８はメディアデータの形式変換を
行うメディアデータ形式変換部、１１９はシナリオデー
タの改変情報を生成するシナリオデータ改変部、１２０
はマルチメディア情報の改変方法と、その条件を示した
改変方法データベース、１２１は改変方法データベース
１２０の情報とマルチメディア情報の再生情報からシナ
リオデータとメディアデータの改変方法を決定する改変
方法決定部である。

【０１４８】上記のように構成された情報提供装置と図
２のマルチメディア情報において、以下その動作を説明
する．図２３は、マルチメディア情報再生装置がマルチ
メディア情報の再生を開始し、終了するまでの処理手順
を示すフローチャートである。

【０１４９】クライアント２２０２のシナリオデータ解
析部２２０８は、再生するマルチメディア情報のシナリ
オデータを、サーバ２２０１上のマルチメディア情報格
納部２２０４から、サーバ２２０２上のマルチメディア
情報管理部２２２０５、サーバ２２０１上のネットワー
クインタフェース２２０６，サーバ２２０１とクライア
ント２２０２間のネットワーク２２０３、クライアント
２２０１上のネットワークインタフェース２２０１を経
由して取得する（ステップ２３０１）。

【０１５０】シナリオデータ解析部２２０８は、獲得し
たシナリオデータの解析を行い、マルチメディア情報再
生に必要な情報を取得し（ステップ２３０２）、マルチ
メディア情報改変部１１３が、マルチメディア情報改変
のための初期化を行う（ステップ２３０３）。

【０１５１】ここで図２４は、シナリオ改変機構の初期
化処理に関するフローチャートであり、図２３のステッ
プ２３０３において、図２２のマルチメディア情報改変
部１１３で行われる処理を示したものである。

【０１５２】まず、改変方法決定部１２１は、図２３の
ステップ２３０１と同様に、再生するマルチメディア情
報のシナリオデータを取得する（ステップ２４０１）。

【０１５３】改変方法決定部１２１は、獲得したそのマ
ルチメディア情報のシナリオデータと、改変方法データ
ベース１２０に保持するシナリオデータメディアデータ
に関する判断方法から、改変対象とするメディアデータ
と、改変内容、および改変を行うタイトル時刻について
決定する（ステップ２４０２）。

【０１５４】図５は改変方法データベース１２０に保持
している情報内容を示したものである。シナリオデータ
の条件と、その条件を満たした場合に実施する変換内容
が対に示されている．図２で示されたシナリオデータ
は、メディアデータの種類が静止画で、かつメディアデ
ータの形式がMpeg-4Videoであるため、このシナリオデ
ータが改変方法決定部１２１に入力された場合、改変方
法データベース１２０に保持している図５の条件のう
ち、１番目の条件が真になる。

【０１５５】このためこの例の場合、改変方法決定部１
２１は、図５の１番目の改変内容である、改変対象メデ
ィアデータの表示終了時刻における復号結果を、静止画
を表現する形式であるWindowsBitmap形式に変換し、そ
れにあわせてシナリオデータを改変する、というマルチ
メディア情報改変を行うことを決定し、内部にマルチメ
ディア情報改変テーブルを構築する。

【０１５６】図６に、この例の場合に構築されるマルチ
メディア情報改変テーブルを示す．マルチメディア情報
改変テーブルは、マルチメディア情報改変を行うべきタ
イトル時刻と、そのマルチメディア情報改変の内容、そ
してその改変処理を終了したかどうかを示す情報の対応
からなる．改変処理を終了したかどうかを示す情報は、
タイトル時刻ジャンプなどでタイトル時刻が変化する
中、一度行ったマルチメディア情報改変処理を再度行わ
ないようにするために利用する．このマルチメディア情
報改変テーブルは、改変方法決定部が、シナリオデータ
とメディアデータの改変を行うかどうかの検査の際に使
用される。

【０１５７】マルチメディア情報改変部の初期化が終わ
ると、シナリオデータ解析部２２０８は、獲得したマル
チメディア情報再生に必要な情報を元に、メディアデー
タ取得部１０７と、メディアデータ復号部１０８を初期
化する（ステップ２３０４）．この際、メディアデータ
復号部１０８の中には、マルチメディア情報中に含まれ
るメディアデータの数だけメディアデータを復号する機
構が呼び出される。

【０１５８】図２２の例でメディアデータ復号部１０８
内を説明すると、図２で表されるマルチメディア情報中
にメディアデータの数は２つあるので、メディアデータ
Ａを復号するメディアデータ復号部Ａ１１５と、メディ
アデータＢを復号するメディアデータ復号部Ｂ１１６が
初期化される。

【０１５９】次に、マルチメディア情報改変部１１３に
より、マルチメディア情報改変を実行するかどうかの検
査と、実際の改変処理が行われる（ステップ２３０
５）．ここで図２５は、図２３においてステップ２３０
５と表された処理のフローチャートである。これを用い
て、マルチメディア情報改変部１１３が行うシナリオデ
ータとメディアデータの改変を行うかどうかの検査と、
実際の改変処理内容を説明する。

【０１６０】改変方法決定部１２１は、ステップ２４０
２によって決定した、改変するメディアデータの復号結
果を獲得するタイトル時刻になっているかを調べる（ス
テップ２５０１）。

【０１６１】図６のマルチメディア情報改変テーブルを
見て、メディアデータの復号結果を獲得するタイトル時
刻ではなかった場合や、既にそのメディアデータに関す
るマルチメディア情報の改変が行われている場合は、何
の処理もせず終了する。

【０１６２】復号結果を獲得するタイトル時刻になった
場合は、改変方法決定部１２１は、メディアデータ形式
変換部１１８とシナリオデータ改変部１１９に対して、
初期化時に決定した変換を実現するための要請を行う
（ステップ２５０２）。

【０１６３】メディアデータ形式変換部１１８は、改変
方法決定部１２１の要請に従って、対象となるメディア
データを復号するメディアデータ復号部Ｂ１１６からの
出力から、形式変換した新たなメディアデータＢ'を生
成し、一時ファイルシステム２２０９上に保存する（ス
テップ２５０３）。

【０１６４】この例の場合、図５の１番目に記述された
マルチメディア情報の改変を行うため、メディアデータ
形式変換部１１８はメディアデータ復号部Ｂ１１６の復
号結果をWindowsBitmap形式に形式変換し、一時ファイ
ルシステム２２０９上に/temp/temp1.bmpという名前で
保存を行う。

【０１６５】シナリオデータ改変部１１９は、改変方法
決定部１２１の要請に従って、シナリオデータに対する
改変情報を生成する（ステップ２５０４）。

【０１６６】図２６は、この例における、ステップ２５
０４においてシナリオデータ改変部１１９が生成した、
シナリオデータに対する改変情報の内容である．この情
報における [MediaDataUpdate]の欄は、シナリオデータ
変換に関する情報を記述したものであることを示してい
る。

【０１６７】また、この記述は、MediaDataID項が2のも
のに関して、MediaDataType項をImageに、MediaDataFor
mat項をWindowsBitmapに、MediaDataSource項をCLIENT:
//temp/temp1.bmpに、MediaDataBitRate項を0に、Media
DataFrameRate項を0に、MediaDataSize項を4000に変更
する、というシナリオデータに対する改変情報を示すも
のである。

【０１６８】シナリオデータ改変部１１９は、生成した
シナリオデータに対する改変情報をシナリオデータ解析
部２２０８に伝え、シナリオデータ解析部２２０８は伝
えられた改変情報をもとに、内部に保持するシナリオ情
報に対してシナリオ改変を行う（ステップ２５０５）。

【０１６９】シナリオデータ解析部２２０８は、再構築
を行った新たなシナリオ情報をもとに、メディアデータ
取得部１０７と画面合成部１０９が保持する、マルチメ
ディア情報再生に必要な情報を更新する（ステップ２５
０６）。

【０１７０】この時、メディアデータ復号部１０８内に
メディアデータ復号部Ｂ'１１７が初期化され、マルチ
メディア情報改変によって生成されたメディアデータ
Ｂ’の復号に用いられる。

【０１７１】次に、メディアデータ取得部１０７は、タ
イトル時刻とシナリオデータに従って、サーバ２２０１
上のマルチメディア情報格納部２２０４から、サーバ２
２０１上のマルチメディア情報管理部２２０５、サーバ
２２０１上のネットワークインタフェース２２０６，サ
ーバ２２０１とクライアント２２０２間のネットワーク
２２０３，クライアント２２０２上のネットワークイン
タフェース２２０７を経由して取得し、それぞれを復号
するメディアデータ復号部１０８に受け渡す（ステップ
２３０６）。

【０１７２】図２２の例でメディアデータ復号部１０８
内を説明すると、サーバ２２０１から伝送されたメディ
アデータＡはメディアデータ復号部Ａ１１５に、メディ
アデータＢはメディアデータ復号部Ｂ１１６に、それぞ
れ受け渡される。

【０１７３】メディアデータ復号部１０８は、受け渡さ
れたメディアデータを復号し、画面合成部１０９に復号
結果を受け渡す（ステップ２３０７）．図２２の例でメ
ディアデータ復号部１０８内を説明すると、メディアデ
ータ復号部Ａ１１５はメディアデータＡを復号した結果
を、メディアデータ復号部Ｂ１１６はメディアデータＢ
を復号した結果を、画面合成部１０９に受け渡す。

【０１７４】画面合成部１０９は、メディアデータ復号
部１０８から受け渡された復号結果を、シナリオデータ
を元に合成し、マルチメディア情報の出力イメージを生
成し、画面出力部１１０に受け渡す（ステップ２３０
８）。

【０１７５】画面出力部１１０は、画面合成部１０９か
ら受け渡されたマルチメディア情報の出力イメージを、
実際に出力デバイスから出力を行う（ステップ２３０
９）。マルチメディア情報に対して利用者が操作を行う
場合は、マルチメディア情報再生装置の入力検知部１１
１に利用者が入力を行う。この利用者による入力に対す
る処理はステップ２３１０で行われる。

【０１７６】クライアント２２０２内の入力検知部１１
１からの入力により、タイトル状態が通常再生のままで
あった場合、特別な処理を行わずにステップ２３０５に
戻る。また、タイトル時刻ジャンプを要請する入力を検
知した場合は、メディアデータ取得部１０７と画面合成
部１０９の内部のタイトル時刻を、タイトル時刻ジャン
プ先の時刻に修正する（ステップ２３１１）。そして、
通常再生時と同じようにステップ２３０５に戻る。

【０１７７】その後、ステップ２３０６においてはメデ
ィアデータ取得部１０７が、またステップ２３０８にお
いては画面合成部１０９が、修正されたタイトル時刻を
元に処理を行うため、ステップ２３０９における画面出
力部１１０によるマルチメディア情報画面には、タイト
ル時刻ジャンプが実現されたものが出力される。

【０１７８】このように、マルチメディア情報再生終了
を要請する入力が検知されない場合は、ステップ２３０
５からステップ２３１０を繰り返して、マルチメディア
情報の再生を実現する。

【０１７９】ステップ２３１０において、マルチメディ
ア情報再生終了を要請する入力を検知した場合、改変し
たマルチメディア情報をサーバ２２０１に登録する処理
を行う（ステップ２３１１）。

【０１８０】図２７は、図２３でステップ２３１１とし
て示された、改変したマルチメディア情報の登録処理の
フローチャートである．マルチメディア情報再生終了が
要請された場合、その時点で実際にマルチメディア情報
再生に使用していたシナリオ情報をシナリオデータ解析
部２２０８がシナリオデータ生成部２２１０に伝達し、
シナリオデータ生成部２２１０は伝達されたシナリオ情
報を元にシナリオデータを生成する（ステップ２６０
１）。

【０１８１】図２８に、シナリオデータ生成部２２１０
が、シナリオデータ解析部２２０８からの情報を元に生
成したシナリオデータの例を示す。このシナリオデータ
は、図２のシナリオデータに対して、図２６のシナリオ
改変情報の内容を反映したものになっている。

【０１８２】シナリオデータ生成部２２１０は生成した
シナリオデータをマルチメディア情報保存処理部２２１
１に伝達する（ステップ２６０２）。

【０１８３】マルチメディア情報保存処理部２２１１
は、シナリオデータ生成部２２１０から取得したタイト
ル終了時のシナリオデータと、一時ファイルシステム２
２０９中のタイトル終了時に使用されているメディアデ
ータを、サーバ２２０１のマルチメディア情報管理部２
２０５に対し、新たなマルチメディア情報として登録処
理を行う（ステップ２３１２）。

【０１８４】図２９は、ステップ２３１２においてサー
バ２２０１に登録した結果、マルチメディア情報格納部
２２０４に保存されたシナリオデータの例を示す。この
シナリオデータは、図２８のシナリオデータに対して、
マルチメディア情報管理部２２０５がマルチメディア情
報の識別子とメディアデータの場所とを書き換えたもの
になっている。

【０１８５】次にメディアデータ取得部１０７、メディ
アデータ復号部１０８，および画面合成部１０９の終了
処理を行う（ステップ２３１３）。そして必要な終了処
理が完了後、マルチメディア情報の再生を終了する。

【０１８６】この例においては、静止画を表現するため
に用いられていたMPEG-4Video形式の動画メディアデー
タを、最も品質の高い最終画質の時点での復号結果を元
に、表示に際して計算資源が少ないWindowsBitmap形式
の静止画メディアデータに改変したため、以降の同メデ
ィアデータの表示の際に、表示直後から最終時画質での
表示が可能になる。

【０１８７】なお、以上までは、再生する際に改変した
ものを次回再利用するために、再生終了時にクライアン
ト側が保持している「再生していたシナリオ・メディア
データ」をタイトルとしてサーバに新規登録するまでに
ついての詳細を述べた。その後の処理、つまり、登録さ
れたものの再利用方法としては、次のようなものが考え
られる。

【０１８８】前提として、まず再生を行うことでどのよ
うにタイトルが改変されるかは、クライアントの持つ資
源や特性によって異なるため、例えば、クライアントＡ
によってタイトルを改変した結果というものは、クラ
イアントＢに対しては必ずしも望ましい状態になってい
るわけではない、ことがあり得る。この点から、改変さ
れた結果は元にあったタイトルに上書きするのではな
く、新規のタイトルとして登録するべき必要もあり得
る。

【０１８９】そして、再生終了時点に登録されたタイト
ルの利用方法として、例えば、タイトルがクライアン
トＡによって改変されタイトルとして、同じくタイト
ルがクライアントＢによって改変されタイトルとし
て、登録されたとすると、タイトルをクライアントＡ
から指定されたらタイトルを、タイトルをクライア
ントＢから指定されたらタイトルを、送出するような
管理をサーバが行う、または、クライアントＡはタイト
ルがユーザから選択されたらタイトルを、クライア
ントＢはタイトルがユーザから選択されたらタイトル
を、サーバに要請することができるような管理をクラ
イアントが行う等の方法が考えられる。

【０１９０】以上のように、本実施の形態では、改変方
法決定において、（Ａ）実施の形態１の場合のように、
「シナリオデータ」と改変方法ＤＢに準備された情報
（ＤＢ情報）とから改変方法を決定するのに加えて、
（Ｂ）一度再生した改変情報を以後再利用するために、
クライアント側に登録し、また、（Ｃ）その再生終了時
のシナリオデータをサーバ側に通知・登録するものであ
る。

【０１９１】つまり、 （Ａ）一度再生した結果を用いて以降の再生での高画質
実現を可能にするマルチメディア情報改変手法を改変方
法データベース１２０に準備し、改変方法決定部１２１
においてシナリオデータと改変方法データベース１２０
に準備された情報からマルチメディア情報に対する改変
方法を決定し、メディアデータ形式変換部１１８および
シナリオデータ改変部１１９でマルチメディア情報の改
変を行うことにより、マルチメディア情報内でのメディ
アデータのうち、動画で表現した静止画に関して、一度
再生したメディアデータの復号結果を利用して、タイト
ル時刻ジャンプ時にも常に最終的画質で再生表示をする
ことができる。

【０１９２】また、元のシナリオデータで運用されてい
た復号処理よりも少ない計算資源で利用可能な復号処理
を用いるように、シナリオデータと該当メディアデータ
を改変したことにより、以降の同メディアデータの表示
の際に、クライアント上の資源の節約を実現することが
できる。

【０１９３】（Ｂ）一度再生した結果を用いて以降の再
生での資源消費を低減するマルチメディア情報改変手法
を改変方法データベース１２０に準備し、改変方法決定
部１２１においてシナリオデータと改変方法データベー
ス１２０に準備された情報からマルチメディア情報改変
方式を決定し、メディアデータ形式変換部１１８および
シナリオデータ改変部１１９でマルチメディア情報の改
変を行うことにより、一度再生したメディアデータの復
号結果を利用して、タイトル時刻ジャンプ時のマルチメ
ディア情報再生装置の資源消費を低減することができ
る。

【０１９４】また、マルチメディア情報再生を終了する
際に、一度再生したメディアデータの復号結果を利用し
て改変したマルチメディア情報を登録（２２１０，２２
１１）しておくことにより、次からのマルチメディア情
報再生の際にその登録したマルチメディア情報を使用す
ることで、以降は再生直後から、動画で表現していた静
止画に関しては表示開始直後から最終的高画質で表示で
き、またマルチメディア情報再生装置の資源消費を軽減
することができる。

【０１９５】（Ｃ）マルチメディア情報再生を終了する
際に、シナリオデータ生成部２２１０が終了時のシナリ
オ情報からシナリオデータを生成し、メディアデータ形
式変換部１１８が生成したメディアデータとともにサー
バ２２０１に登録（２２０５、２２０４）しておくこと
により、次回以降のマルチメディア情報再生の際にも、
一度再生したメディアデータの復号結果を利用したマル
チメディア情報の高画質表示とマルチメディア情報再生
装置の資源消費軽減の効果を得ることができる等、その
実用的効果は大きい。

【０１９６】（実施の形態５）以下、第五の発明の実施
の形態について図面を用いて説明する。図３０は、本発
明の一実施形態における構成を示すブロック図である。
図３０において、３００１はマルチメディア情報を提供
するサーバ、３００２はマルチメディア情報を再生する
クライアント、３００３はサーバ３００１とクライアン
ト３００２間の伝送路であるネットワークを示す。

【０１９７】また、図３０のサーバ３００１内におい
て、１０４はシナリオデータやメディアデータなどの、
マルチメディア情報を格納するマルチメディア情報格納
部、３００４はマルチメディア情報のシナリオデータ
や、クライアント３００２からのマルチメディア情報改
変情報から、メディアデータの送出スケジュールを生成
するメディアデータ送出管理部、３００５はメディアデ
ータ送出管理部３００４の生成したメディアデータの送
出スケジュールをもとに、実際にメディアデータの送出
処理を行うメディアデータ送出部、３００６はネットワ
ーク２２０３に対してデータの発信・受信を行うネット
ワークインタフェースを示す。

【０１９８】また、図３０のクライアント３００２にお
いて、３００７はネットワーク３００３に対してデータ
の発信・受信を行うネットワークインタフェース、３０
０８はメディアデータを取得し、シナリオデータに沿っ
て処理を行うメディアデータ取得部、１０８はメディア
データを復号するメディアデータ復号部、１０９はメデ
ィアデータ復号部１０８がメディアデータを復号した結
果を、シナリオデータに沿って合成し、画面出力イメー
ジを生成する画面合成部、１１０は画面合成部１０９が
生成した画面出力イメージを実際の画面出力デバイスに
出力する画面出力部、１１１は利用者からの入力を検知
する入力検知部、１１２はシナリオデータを解析し、必
要な情報を画面合成部１０９とメディアデータ取得部３
００８に与えるシナリオデータ解析部、３００９はマル
チメディア情報の改変を行い、現在の再生に反映させる
マルチメディア情報改変部、３０１０はマルチメディア
情報改変部３００９によるマルチメディア情報改変の内
容をサーバ３００１に伝達する改変情報送出部、１１４
はマルチメディア情報改変部３００９が新たに生成した
メディアデータを一時的に保存しておく一時ファイルシ
ステムである。

【０１９９】図３０のメディアデータ復号部１０８内に
おいて、１１５はマルチメディア情報改変前から存在す
るメディアデータＡを復号するメディアデータ復号部
Ａ、１１６はマルチメディア情報改変前から存在するメ
ディアデータＢを復号するメディアデータ復号部Ｂ、１
１７はマルチメディア情報改変部１１３が新たに生成し
たメディアデータＢ'の復号するメディアデータ復号部
Ｂ'を表す。また、図３０のマルチメディア情報改変部
３００９において、１１８はメディアデータの形式変換
を行うメディアデータ形式変換部、３０１１はシナリオ
データの改変情報を生成するシナリオデータ改変部、１
２０はマルチメディア情報の改変方法と、その条件を示
した改変方法データベース、１２１は改変方法データベ
ース１２０の情報とマルチメディア情報の再生情報から
シナリオデータとメディアデータの改変方法を決定する
改変方法決定部である。

【０２００】上記のように構成された情報提供装置と図
２のマルチメディア情報において、以下その動作を説明
する。

【０２０１】図３０に示された例において、マルチメデ
ィア情報再生のためのメディアデータ伝送を処理するの
はサーバ３００１である。サーバ３００１は、マルチメ
ディア情報に必要なメディアデータを、そのシナリオデ
ータに従って送出し、クライアント３００２は、サーバ
３００１から送られてきたデータを処理し、マルチメデ
ィア情報を再生する。

【０２０２】図３１は、サーバ３００１が送出してくる
マルチメディアに関するメディアデータを受信し、再生
を行うクライアント３００２における処理手順を表すフ
ローチャートである。

【０２０３】クライアント３００２のシナリオデータ解
析部１１２は、再生するマルチメディア情報のシナリオ
データを、サーバ３００１上のマルチメディア情報格納
部１０４から、サーバ３００１上のネットワークインタ
フェース３００６，サーバ３００１とクライアント３０
０２間のネットワーク３００３、クライアント３００２
上のネットワークインタフェース３００７を経由して取
得する（ステップ３１０１）。

【０２０４】シナリオデータ解析部１１２は、獲得した
シナリオデータの解析を行い、マルチメディア情報再生
に必要な情報を取得する（ステップ３１０２）。マルチ
メディア情報改変部３００９が、マルチメディア情報改
変のための初期化を行う（ステップ３１０３）。

【０２０５】図３２は、シナリオ改変機構の初期化処理
に関するフローチャートであり、図３１のステップ３１
０３において、図３０のマルチメディア情報改変部３０
０９で行われる処理を示したものである。

【０２０６】改変方法決定部１２１は、図３１のステッ
プ３１０１と同様に、再生するマルチメディア情報のシ
ナリオデータを取得する（ステップ３２０１）。

【０２０７】改変方法決定部１２１は、獲得したそのマ
ルチメディア情報のシナリオデータと、改変方法データ
ベース１２０に保持するシナリオデータメディアデータ
に関する判断方法から、改変対象とするメディアデータ
と、改変内容、および改変を行うタイトル時刻について
決定する（ステップ３２０２）。

【０２０８】図５は改変方法データベース１２０に保持
している情報内容を示したものである。

【０２０９】シナリオデータの条件と、その条件を満た
した場合に実施する変換内容が対に示されている。図２
で示されたシナリオデータは、メディアデータの種類が
静止画で、かつメディアデータの形式がMpeg-4Videoで
あるため、このシナリオデータが改変方法決定部１２１
に入力された場合、改変方法データベース１２０に保持
している図５の条件のうち、１番目の条件が真になる。

【０２１０】このためこの例の場合、改変方法決定部１
２１は、図５の１番目の改変内容である、改変対象メデ
ィアデータの表示終了時刻における復号結果を、静止画
を表現する形式であるWindowsBitmap形式に変換し、そ
れにあわせてシナリオデータを改変する、というマルチ
メディア情報改変を行うことを決定し、内部にマルチメ
ディア情報改変テーブルを構築する。

【０２１１】図６に、この例の場合に構築されるマルチ
メディア情報改変テーブルを示す。マルチメディア情報
改変テーブルは、マルチメディア情報改変を行うべきタ
イトル時刻と、そのマルチメディア情報改変の内容、そ
してその改変処理を終了したかどうかを示す情報の対応
からなる。

【０２１２】改変処理を終了したかどうかを示す情報
は、タイトル時刻ジャンプなどでタイトル時刻が変化す
る中、一度行ったマルチメディア情報改変処理を再度行
わないようにするために利用する。

【０２１３】このマルチメディア情報改変テーブルは、
改変方法決定部が、シナリオデータとメディアデータの
改変を行うかどうかの検査の際に使用される。マルチメ
ディア情報改変部の初期化が終わると、シナリオデータ
解析部１１２は、獲得したマルチメディア情報再生に必
要な情報を元に、メディアデータ取得部３００８と、メ
ディアデータ復号部１０８を初期化する（ステップ３１
０４）。

【０２１４】この際、メディアデータ復号部１０８の中
には、マルチメディア情報中に含まれるメディアデータ
の数だけメディアデータを復号する機構が呼び出され
る。

【０２１５】図３０の例でメディアデータ復号部１０８
内を説明すると、図２で表されるマルチメディア情報中
にメディアデータの数は２つあるので、メディアデータ
Ａを復号するメディアデータ復号部Ａ１１５と、メディ
アデータＢを復号するメディアデータ復号部Ｂ１１６が
初期化される。

【０２１６】次に、マルチメディア情報改変部３００９
により、マルチメディア情報改変を実行するかどうかの
検査と、実際の改変処理が行われる（ステップ３１０
５）。

【０２１７】図３３は、図３１においてステップ３１０
５と表された処理のフローチャートである。

【０２１８】ここで図３３を用いて、マルチメディア情
報改変部３００９が行うシナリオデータとメディアデー
タの改変を行うかどうかの検査と、実際の改変処理内容
を説明する。

【０２１９】改変方法決定部１２１は、ステップ３２０
２によって決定した、改変するメディアデータの復号結
果を獲得するタイトル時刻になっているかを調べる（ス
テップ３３０１）。

【０２２０】図６のマルチメディア情報改変テーブルを
見て、メディアデータの復号結果を獲得するタイトル時
刻ではなかった場合や、既にそのメディアデータに関す
るマルチメディア情報の改変が行われている場合は、何
の処理もせず終了する。

【０２２１】復号結果を獲得するタイトル時刻になった
場合は、改変方法決定部１２１は、メディアデータ形式
変換部１１８とシナリオデータ改変部１１９に対して、
初期化時に決定した変換を実現するための要請を行う
（ステップ３３０２）。

【０２２２】メディアデータ形式変換部１１８は、改変
方法決定部１２１の要請に従って、対象となるメディア
データを復号するメディアデータ復号部Ｂ１１６からの
出力から、形式変換した新たなメディアデータＢ'を生
成し、一時ファイルシステム１１４上に保存する（ステ
ップ３３０３）。

【０２２３】この例の場合、図５の１番目に記述された
マルチメディア情報の改変を行うため、メディアデータ
形式変換部１１８はメディアデータ復号部Ｂ１１６の復
号結果をWindowsBitmap形式に形式変換し、一時ファイ
ルシステム２２０９上に/temp/temp1.bmpという名前で
保存を行う。

【０２２４】シナリオデータ改変部３０１１は、改変方
法決定部１２１の要請に従って、シナリオデータに対す
る改変情報を生成する（ステップ３３０４）。図３４
は、この例における、ステップ３３０４においてシナリ
オデータ改変部３０１１が生成した、シナリオデータに
対する改変情報の内容である。

【０２２５】この情報における [MediaDataUpdate]の欄
は、シナリオデータ変換に関する情報を記述したもので
あることを示している。また、この記述は、MediaDataI
D項が2のものに関して、MediaDataType項をImageに、Me
diaDataFormat項をWindowsBitmapに、MediaDataSource
項をCLIENT://temp/temp1.bmpに、MediaDataBitRate項
を0に、MediaDataFrameRate項を0に、MediaDataSize項
を4000に変更する、というシナリオデータに対する改変
情報を示すものである。

【０２２６】シナリオデータ改変部３０１１は、生成し
たシナリオデータに対する改変情報をシナリオデータ解
析部１１２に伝え、シナリオデータ解析部１１２は伝え
られた改変情報をもとに、内部に保持するシナリオ情報
に対してシナリオ改変を行う（ステップ３３０５）。

【０２２７】シナリオデータ解析部１１２は、再構築を
行った新たなシナリオ情報をもとに、メディアデータ取
得部１０７と画面合成部１０９が保持する、マルチメデ
ィア情報再生に必要な情報を更新する（ステップ３３０
６）。

【０２２８】この時、メディアデータ復号部１０８内に
メディアデータ復号部Ｂ'１１７が初期化され、マルチ
メディア情報改変によって生成されたメディアデータ
Ｂ’の復号に用いられる。

【０２２９】そして、改変情報送出部３０１０は、シナ
リオデータ改変部３０１１が生成した図３４のシナリオ
改変情報を取得し、クライアント３００２のネットワー
クインタフェース３００７、サーバ３００１とクライア
ント３００２間のネットワーク３００３を介して、取得
したシナリオ改変情報をサーバ３００１に通知する（ス
テップ３３０７）。

【０２３０】次に、メディアデータ取得部３００８は、
タイトル時刻とシナリオデータに従って、サーバ３００
１から送出されてくるメディアデータを取得し、それぞ
れを復号するメディアデータ復号部１０８に受け渡す
（ステップ３１０６）。

【０２３１】図３０の例でメディアデータ復号部１０８
内を説明すると、サーバ３００１から送出されたメディ
アデータＡはメディアデータ復号部Ａ１１５に、メディ
アデータＢはメディアデータ復号部Ｂ１１６に、それぞ
れ受け渡される。

【０２３２】メディアデータ復号部１０８は、受け渡さ
れたメディアデータを復号し、画面合成部１０９に復号
結果を受け渡す（ステップ３１０７）。

【０２３３】図３０の例でメディアデータ復号部１０８
内を説明すると、メディアデータ復号部Ａ１１５はメデ
ィアデータＡを復号した結果を、メディアデータ復号部
Ｂ１１６はメディアデータＢを復号した結果を、画面合
成部１０９に受け渡す。

【０２３４】画面合成部１０９は、メディアデータ復号
部１０８から受け渡された復号結果を、シナリオデータ
を元に合成し、マルチメディア情報の出力イメージを生
成し、画面出力部１１０に受け渡す（ステップ３１０
８）。

【０２３５】画面出力部１１０は、画面合成部１０９か
ら受け渡されたマルチメディア情報の出力イメージを、
実際に出力デバイスから出力を行う（ステップ３１０
９）。

【０２３６】マルチメディア情報に対して利用者が操作
を行う場合は、マルチメディア情報再生装置の入力検知
部１１１に利用者が入力を行う。

【０２３７】この利用者による入力に対する処理はステ
ップ３１１０で行われる。クライアント３００２内の入
力検知部１１１からの入力により、タイトル状態が通常
再生のままであった場合、特別な処理を行わずにステッ
プ３１０５に戻る。また、タイトル時刻ジャンプを要請
する入力を検知した場合は、入力検知部１１１は、クラ
イアント３００２のネットワークインタフェース３００
７を介して、サーバ３００１にタイトル時刻ジャンプが
要請されたことを通知する（ステップ３１１１）。

【０２３８】次にメディアデータ取得部３００８と画面
合成部１０９の内部のタイトル時刻を、タイトル時刻ジ
ャンプ先の時刻に修正する（ステップ３１１２）。そし
て、通常再生時と同じようにステップ３１０５に戻る。

【０２３９】その後、サーバ３００１からは修正された
タイトル時刻に伝送されるべきメディアデータがクライ
アント３００２に伝送され、ステップ３１０６において
はメディアデータ取得部３００８が、またステップ３１
０８においては画面合成部１０９が、修正されたタイト
ル時刻を元に処理を行うため、ステップ３１０９におけ
る画面出力部１１０によるマルチメディア情報画面に
は、タイトル時刻ジャンプが実現されたものが出力され
る。

【０２４０】このように、マルチメディア情報再生終了
を要請する入力が検知されない場合は、ステップ３１０
５からステップ３１１０を繰り返して、マルチメディア
情報の再生を実現する。

【０２４１】ステップ３１１１において、マルチメディ
ア情報再生終了を要請する入力を検知した場合は、メデ
ィアデータ取得部３００８、メディアデータ復号部１０
８，および画面合成部１０９の終了処理を行う（ステッ
プ３１１３）。

【０２４２】そして入力検知部１１１は、サーバ３００
１に対して、クライアント３００２のネットワークイン
タフェース３００７を介してマルチメディア情報再生の
終了を要請する（ステップ３１１４）。

【０２４３】そして必要な終了処理が完了後、マルチメ
ディア情報の再生を終了する。

【０２４４】次に、マルチメディア情報をクライアント
３００２に伝送するサーバ３００１の動作について説明
する。

【０２４５】図３５は、サーバ３００１内でのマルチメ
ディア情報送出開始から終了までの処理を示したフロー
チャートである。

【０２４６】サーバ３００１のメディアデータ送出管理
部３００４は、クライアント３００２に送出するマルチ
メディア情報のシナリオデータを、マルチメディア情報
格納部１０４から取得する（ステップ３５０１）。

【０２４７】メディアデータ送出管理部３００４は、獲
得したシナリオデータの解析を行い、メディアデータ送
出に必要な情報を取得する（ステップ３５０２）。

【０２４８】この情報には、送出すべきマルチメディア
情報格納部１０４中のメディアデータと、そのメディア
データ送出を開始する時刻、そのメディアデータ送出を
終了する時刻、そのメディアデータの伝送レートなどが
含まれている。

【０２４９】図２のメディアデータ送出管理部３００４
が、図２のシナリオデータを解析した結果得られた、メ
ディアデータ送出に必要な情報を図３６に示す。

【０２５０】図３６において、[MediaDataForTransmiss
ion]の欄は送出すべきメディアデータ１つに関する情報
を記述した部位であり、その中のMediaDataID項はこの
メディアデータの、このマルチメディア情報内での識別
子を、MediaDataSource項はメディアデータの位置を、M
ediaDataStartTime項はそのメディアデータの伝送を開
始するタイトル内時刻を、MediaDataEndTime項はそのメ
ディアデータの伝送を終了するタイトル内時刻を、Medi
aDataBitRate項はそのメディアデータのビットレート情
報を、MediaDataSizeはそのメディアデータのサイズを
それぞれ示している。

【０２５１】図３６の場合、送出すべきメディアデータ
は２つあり、１つがSERVER://Title/00000022/txt/0000
0001.txtに存在し、タイトル内時刻30に伝送を開始し、
タイトル内時刻50に伝送を終了すべきメディアデータ、
そしてもう１つがSERVER://Title/00000002/mp4/000000
02.mp4に存在し、タイトル内時刻0に伝送を開始し、タ
イトル内時刻100に伝送を終了すべきメディアデータで
ある。メディアデータ送出管理部３００４は、獲得した
メディアデータ送出に必要な情報を元に、メディアデー
タ送出部３００５を初期化する（ステップ３５０３）。
この時、メディアデータ送出部３００５には、ステップ
３５０２でメディアデータ送出管理部３００４が取得し
た、メディアデータ送出に必要な情報を元にした伝送を
実現するための送出準備処理が行われる。

【０２５２】次に、メディアデータ送出管理部３００４
はクライアント３００２からのマルチメディア情報改変
の通知があるか検査し、もしあればその改変内容をメデ
ィアデータ送出に必要な情報に反映させる（ステップ３
５０４）。

【０２５３】この処理内容については後に詳細に説明す
る。メディアデータ送出部３００５は、タイトル時刻と
メディアデータ送出に必要な情報に従って、サーバ３０
０１のマルチメディア情報格納部１０４にある送出すべ
きメディアデータを、サーバ３００１のネットワークイ
ンタフェース３００８からクライアント３００２に送出
する（ステップ３５０５）。

【０２５４】次にメディアデータ送出管理部３００４
は、クライアント３００２からのタイトル状態変化の通
知があるかを検査する（ステップ３５０６）。

【０２５５】もし通知がなければ、それまでのメディア
データ伝送を継続して行うためにステップ３５０４に戻
る。

【０２５６】このようにステップ３５０４からステップ
３５０６を繰り返すことで、クライアント３００２に対
してマルチメディア情報での通常再生を実現するための
メディアデータ伝送を実現する。

【０２５７】また、ステップ３１０６でタイトル時刻ジ
ャンプの通知を検知した場合は、メディアデータ送出管
理部３００４は、メディアデータ送出部のタイトル時刻
をタイトル時刻ジャンプ後のものに変更する（ステップ
３５０７）。そして、通常再生時と同じようにステップ
３５０４の処理に移行する。

【０２５８】これにより、以降のステップ３５０５にお
いて、メディアデータ送出部３００５は、タイトル時刻
ジャンプ後のタイトル時刻の時点からのメディアデータ
を送出するようになるため、クライアント３００２にお
いては、送出されてきたメディアデータを再生すること
で、マルチメディア情報のタイトル時刻ジャンプが実現
される。

【０２５９】ステップ３５０６においてタイトル状態が
マルチメディア情報再生の終了を示すものであることを
検知した場合、メディアデータ送出管理部３００４、お
よびメディアデータ送出部３００５の終了処理を行う
（ステップ３５０８）。

【０２６０】そして必要な終了処理が完了後、マルチメ
ディア情報の伝送処理を終了する。

【０２６１】次に、図３５のステップ３５０４で示され
た、クライアント３００２からのマルチメディア情報改
変通知に対する検査と処理について説明する。

【０２６２】図３７は、図３５のステップ３５０４の処
理内容を詳細に示したフローチャートである。

【０２６３】メディアデータ送出管理部３００４は、ク
ライアント３００２からマルチメディア情報改変の情報
がサーバ３００１に対して通知されていないかを調べる
（ステップ３７０１）。

【０２６４】マルチメディア情報改変情報通知が検知さ
れなかった場合、何の処理も行わずステップ３５０５に
移行する。

【０２６５】マルチメディア情報改変情報通知が検知さ
れた場合、メディアデータ送出管理部３００４は、クラ
イアント３００２からのマルチメディア情報改変情報
を、メディアデータ送出管理部３００４自身が持つシナ
リオ情報に反映させる（ステップ３７０２）。

【０２６６】そしてその改変情報を反映したシナリオ情
報を解析し、メディアデータ送出に必要な情報を生成
し、その情報でメディアデータ送出部３００５を再編成
する（ステップ３７０３）。

【０２６７】図３８は、図３７のステップ３７０３によ
ってメディアデータ送出管理部３００４からメディアデ
ータ送出部３００５に伝達された、クライアント３００
２からのマルチメディア情報改変情報を反映させたメデ
ィアデータ送出に必要な情報の内容を示している。

【０２６８】図３８において、[MediaDataForTransmiss
ion]の欄は送出すべきメディアデータ１つに関する情報
を記述した部位であり、その中のMediaDataID項はこの
メディアデータの、このマルチメディア情報内での識別
子を、MediaDataSource項はメディアデータの位置を、M
ediaDataStartTime項はそのメディアデータの伝送を開
始するタイトル内時刻を、MediaDataEndTime項はそのメ
ディアデータの伝送を終了するタイトル内時刻を、Medi
aDataBitRate項はそのメディアデータのビットレート情
報を、MediaDataSizeはそのメディアデータのサイズを
それぞれ示している。

【０２６９】図３８の場合、送出すべきメディアデータ
は１つであり、SERVER://Title/00000022/txt/0000000
1.txtに存在し、タイトル内時刻30に伝送を開始し、タ
イトル内時刻50に伝送を終了すべきメディアデータであ
ることを示している。

【０２７０】図３６には伝送すべきメディアデータとし
て示されていたサーバ３００１のマルチメディア情報格
納部１０４に存在するSERVER://Title/00000002/mp4/00
000002.mp4は、クライアント３００２によって行われた
マルチメディア情報改変により使用されなくなったた
め、以降のマルチメディア再生においてサーバ３００１
からクライアント３００２に伝送するメディアデータを
示す図３８の情報の中には含まれていない。

【０２７１】ステップ３７０３の結果、以降のステップ
３５０５においては改変情報を反映したシナリオ情報に
基づいてメディアデータの送出を行うようになる。

【０２７２】この例においては、静止画を表現するため
に用いられていたMPEG-4Video形式の動画メディアデー
タを、最も品質の高い最終画質の時点での復号結果を元
に、表示に際して計算資源が少ないWindowsBitmap形式
の静止画メディアデータに改変したため、以降の同メデ
ィアデータの表示の際に、表示直後から最終時画質での
表示が可能になる。

【０２７３】以上のように、本実施の形態では、改変方
法決定において、（Ａ）実施の形態１の場合のように、
「シナリオデータ」と改変方法ＤＢに準備された情報
（ＤＢ情報）とから改変方法を決定するのに加えて、
（Ｂ）一度再生した改変情報をサーバ側へ通知・登録
し、その情報に基づいて、クライアント側への情報提供
をコントロール（何が必要／不必要かを判別して送出制
御）するものである。

【０２７４】つまり、 （Ａ）一度再生した結果を用いて以降の再生での高画質
実現を可能にするマルチメディア情報改変手法を改変方
法データベース１２０に準備し、改変方法決定部１２１
においてシナリオデータと改変方法データベース１２０
に準備された情報からマルチメディア情報に対する改変
方法を決定し、メディアデータ形式変換部１１８および
シナリオデータ改変部１１９でマルチメディア情報の改
変を行うことにより、マルチメディア情報内でのメディ
アデータのうち、動画で表現した静止画に関して、一度
再生したメディアデータの復号結果を利用して、タイト
ル時刻ジャンプ時にも常に最終的画質で再生表示をする
ことができる。

【０２７５】また、元のシナリオデータで運用されてい
た復号処理よりも少ない計算資源で利用可能な復号処理
を用いるように、シナリオデータと該当メディアデータ
を改変したことにより、以降の同メディアデータの表示
の際に、クライアント上の資源の節約を実現することが
できる。

【０２７６】また、一度再生した結果を用いて以降の再
生での資源消費を低減するマルチメディア情報改変手法
を改変方法データベース１２０に準備し、改変方法決定
部１２１においてシナリオデータと改変方法データベー
ス１２０に準備された情報からマルチメディア情報改変
方式を決定し、メディアデータ形式変換部１１８および
シナリオデータ改変部１１９でマルチメディア情報の改
変を行うことにより、一度再生したメディアデータの復
号結果を利用して、タイトル時刻ジャンプ時のマルチメ
ディア情報再生装置の資源消費を低減することができ
る。

【０２７７】（Ｂ）マルチメディア情報改変に関する情
報をサーバ３００１に伝達し、以降のサーバ３００１と
クライアント３００２間のメディアデータ伝送の内容に
反映させることにより、サーバ３００１のネットワーク
３００３へのメディアデータ送出処理に対する計算資源
と、サーバ３００１のネットワーク３００３に対する伝
送帯域と、クライアント３００２のネットワーク３００
３からのメディアデータ受信処理に対する計算資源と、
クライアント３００２のネットワーク３００３に対する
伝送帯域と、サーバ３００１とクライアント３００２間
のネットワーク３００３自体の伝送帯域の消費を軽減す
ることができる。

【０２７８】具体的には、サーバ３００１がメディアデ
ータの伝送を処理する場合においても、クライアント３
００２のマルチメディア情報再生におけるマルチメディ
ア情報の改変に関する情報を、改変情報送出部３０１０
がサーバ３００１に通知し、サーバ３００１内のメディ
アデータ送出管理部３００４が通知された改変情報を反
映させたメディアデータ送出方法を生成し、生成したメ
ディアデータ送出方法をメディアデータ送出部３００５
に反映させることにより、以降のサーバ３００１からの
メディアデータ送出方法にクライアント３００２による
マルチメディア情報改変の内容が反映され、サーバ３０
０１とクライアント３００２の伝送帯域と計算資源と、
サーバ３００１とクライアント３００２間のネットワー
ク３００３自体の伝送帯域の消費を軽減することができ
る。

【０２７９】また、マルチメディア情報改変に関する情
報をサーバ３００１に伝達することで、メディアデータ
送出管理部３００４が以降のメディアデータ送出を再調
整することが可能になる。

【０２８０】この再調整により、以降のメディアデータ
毎の伝送帯域を再調整することができるため、サーバ３
００１内のメディアデータ送出管理部３００４がその時
点で最も効率のよいメディアデータ毎の伝送レートの組
み合わせを選択したメディアデータ送出方法を生成し、
生成したメディアデータ送出方法をメディアデータ送出
部３００５に反映させることにより、以降のサーバ３０
０１からのメディアデータ送出方法においてはサーバ３
００１とクライアント３００２の伝送帯域と計算資源
と、サーバ３００１とクライアント３００２間のネット
ワーク３００３自体の伝送帯域の効率的な使用が実現で
きる。

【０２８１】なお、ここで実施の形態４と５とを比較し
てみると、実施の形態４の場合は、実施の形態１〜３の
ような機構に加え、サーバにあるシナリオおよび各メデ
ィアデータとは記述・形式が異なる状態に改変されたシ
ナリオとデータ（；タイトル）を「次の」セッションで
も利用可能なように、サーバに通知（新規登録／上書
き）しておく、というものであるのに対して、実施の形
態５の場合は、実施の形態１〜３のような機構に加え、
サーバにあるシナリオおよび各メディアデータとは記述
・形式が異なる状態に「改変」されたシナリオの情報を
データ送出に逐次反映するために、サーバに戻す、とい
うもの（「今回の」セッションでクライアントによる改
変を利用するためのもの）である。

【０２８２】また、本発明における用語として、シナリ
オ、シナリオデータ、素材、メディア、メディアデー
タ、タイトル、マルチメディア情報などの記載がある
が、素材ないしメディアとは、動画・静止画・テキスト
・音声などのメディアの種別を表す概念で、メディアデ
ータとは、この概念に該当する実体データを、シナリオ
とは、素材の振る舞い（表示/出力方法）を記述したも
のの概念で、シナリオデータとは、この概念に該当する
実体データを、それぞれ指すが、説明上、これらは厳密
に区別はしていない。

【０２８３】また、マルチメディア情報とは、シナリオ
(データ)、メディア(データ)の両方／一方を単に指すも
のである一方、タイトルとは、シナリオ(データ)とそれ
と対をなすメディア(データ)の組、つまりシナリオ(デ
ータ)に従った再生を行うのに必要なメディア(データ)
と当該シナリオ(データ)との組を指すものである。

【０２８４】

【発明の効果】以上のように、第一の発明によれば、マ
ルチメディア情報再生装置が、マルチメディア情報のシ
ナリオデータから、一度再生した結果を用いて以降の再
生での高画質実現を可能にするようなマルチメディア情
報改変方法を決定し、そのマルチメディア情報改変を実
施することで、マルチメディア情報内でのメディアデー
タのうち、動画で表現した静止画に関して、以降は常に
最終的高画質で再生表示をすることができ、また、マル
チメディア情報再生装置が、マルチメディア情報のシナ
リオデータから、一度再生した結果を用いて以降の再生
での資源消費低減を可能にするようなマルチメディア情
報改変方法を決定し、そのマルチメディア情報改変を実
施することで、タイトル時刻ジャンプ時のマルチメディ
ア情報再生装置の資源消費、およびネットワーク資源の
消費を低減することができる。

【０２８５】第二の発明によれば、マルチメディア情報
再生装置が、マルチメディア情報のメディアデータの復
号結果から、一度再生した結果を用いて以降の再生での
高画質実現を可能にするようなマルチメディア情報改変
方法を決定し、そのマルチメディア情報改変を実施する
ことで、マルチメディア情報内でのメディアデータのう
ち、動画で表現した静止画に関して、以降は常に最終的
高画質で再生表示をすることができ、また、マルチメデ
ィア情報再生装置が、マルチメディア情報のメディアデ
ータの復号結果から、一度再生した結果を用いて以降の
再生での資源消費低減を可能にするようなマルチメディ
ア情報改変方法を決定し、そのマルチメディア情報改変
を実施することで、マルチメディア情報再生装置のメデ
ィアデータ復号能力に応じて、タイトル時刻ジャンプ時
のマルチメディア情報再生装置の資源消費、およびネッ
トワーク資源の消費を低減することができる。

【０２８６】第三の発明によれば、マルチメディア情報
再生装置が、マルチメディア情報のメディアデータの復
号結果から、一度再生した結果を用いて以降の再生での
高画質実現を可能にするようなマルチメディア情報改変
方法を決定し、そのマルチメディア情報改変を実施する
ことで、マルチメディア情報内でのメディアデータのう
ち、動画で表現した静止画に関して、以降は常に最終的
高画質で再生表示をすることができ、また、マルチメデ
ィア情報再生装置が、マルチメディア情報のメディアデ
ータの復号結果から、一度再生した結果を用いて以降の
再生での資源消費低減を可能にするようなマルチメディ
ア情報改変方法を決定し、そのマルチメディア情報改変
を実施することで、マルチメディア情報再生装置の画面
合成能力に応じて、タイトル時刻ジャンプ時のマルチメ
ディア情報再生装置の資源消費、およびネットワーク資
源の消費を低減することができる。

【０２８７】第四の発明によれば、マルチメディア情報
再生装置が、一度再生した結果を用いて以降の再生での
高画質実現を可能にするようなマルチメディア情報改変
方法を決定し、そのマルチメディア情報改変を実施し、
そのマルチメディア情報改変の結果をマルチメディア情
報再生終了時にマルチメディア情報提供装置に登録して
おくことにより、マルチメディア情報内でのメディアデ
ータのうち、動画で表現した静止画に関して、以降の再
生においても常に最終的高画質で再生表示をすることが
でき、また、マルチメディア情報再生装置が、一度再生
した結果を用いて以降の再生での資源消費低減を可能に
するようなマルチメディア情報改変方法を決定し、その
マルチメディア情報改変を実施し、そのマルチメディア
情報改変の結果をマルチメディア情報再生終了時にマル
チメディア情報提供装置に登録しておくことで、以降の
再生においてもタイトル時刻ジャンプ時のマルチメディ
ア情報再生装置の資源消費低減の効果を得ることができ
る。

【０２８８】第五の発明によれば、マルチメディア情報
提供装置がメディアデータの送出処理を行う場合に、マ
ルチメディア情報再生装置が、一度再生した結果を用い
て以降の再生での高画質実現を可能にするようなマルチ
メディア情報改変方法や、一度再生した結果を用いて以
降の再生での資源消費低減を可能にするようなマルチメ
ディア情報改変方法を決定し、そのマルチメディア情報
改変を実施した場合に、そのマルチメディア情報改変に
ついての情報をマルチメディア情報提供装置に通知し、
そのマルチメディア情報改変をマルチメディア情報提供
装置のメディアデータ送出処理に反映させることによ
り、マルチメディア情報提供装置のメディアデータ送出
処理に使用される計算資源と、マルチメディア情報提供
装置のネットワークインタフェースの帯域資源と、マル
チメディア情報再生装置のメディアデータ受信処理に使
用される計算資源と、マルチメディア情報再生装置のネ
ットワークインタフェースの帯域資源と、マルチメディ
ア情報提供装置とマルチメディア情報再生装置間のネッ
トワークの帯域資源の消費低減を実現することができ
る。

【０２８９】また、マルチメディア情報提供装置がメデ
ィアデータの送出処理を行う場合に、マルチメディア情
報再生装置が、一度再生した結果を用いて以降の再生で
の高画質実現を可能にするようなマルチメディア情報改
変方法や、一度再生した結果を用いて以降の再生での資
源消費低減を可能にするようなマルチメディア情報改変
方法を決定し、そのマルチメディア情報改変を実施した
場合に、そのマルチメディア情報改変についての情報を
マルチメディア情報提供装置に通知し、そのマルチメデ
ィア情報改変をマルチメディア情報提供装置のメディア
データ送出処理に反映させる際に、その時点で最も効率
のよいメディアデータ伝送レートの組み合わせを選択す
ることにより、マルチメディア情報提供装置のメディア
データ送出処理に使用される計算資源と、マルチメディ
ア情報提供装置のネットワークインタフェースの帯域資
源と、マルチメディア情報再生装置のメディアデータ受
信処理に使用される計算資源と、マルチメディア情報再
生装置のネットワークインタフェースの帯域資源と、マ
ルチメディア情報提供装置とマルチメディア情報再生装
置間のネットワークの帯域資源の効率的な使用が実現で
きる。

【図面の簡単な説明】

【図１】本発明の第一の発明の実施の形態におけるマル
チメディア情報提供装置とマルチメディア情報再生装置
との構成を示すブロック図

【図２】本発明の第一、第二、第四、第五の発明の実施
の形態におけるマルチメディア情報のシナリオデータの
概念図

【図３】本発明の第一の発明の実施の形態におけるマル
チメディア情報再生装置のマルチメディア情報再生処理
を示すフローチャート

【図４】本発明の第一の発明の実施の形態におけるシナ
リオ改変機構の初期化処理を示すフローチャート

【図５】本発明の第一、第四、第五の発明の実施の形態
における改変方法データベースに保持している情報内容
の概念図

【図６】本発明の第一、第四、第五の発明の実施の形態
におけるシナリオ改変機構の初期化処理において生成さ
れるマルチメディア情報改変テーブルの概念図

【図７】本発明の第一の発明の実施の形態におけるマル
チメディア情報改変部のマルチメディア情報改変検査と
改変処理に関するフローチャート

【図８】本発明の第一の発明の実施の形態におけるシナ
リオデータ改変部が生成したシナリオデータに対する改
変情報の概念図

【図９】本発明の第二の発明の実施の形態におけるマル
チメディア情報提供装置とマルチメディア情報再生装置
との構成を示すブロック図

【図１０】本発明の第二の発明の実施の形態におけるマ
ルチメディア情報再生装置のマルチメディア情報再生処
理を示すフローチャート

【図１１】本発明の第二の発明の実施の形態におけるマ
ルチメディア情報改変部のマルチメディア情報改変検査
と改変処理に関するフローチャート

【図１２】本発明の第二の発明の実施の形態におけるメ
ディアデータ復号部が改変方法決定部に伝達したメディ
アデータを復号した結果レポートの情報の概念図

【図１３】本発明の第二の発明の実施の形態における改
変方法データベースに保持している情報内容の概念図

【図１４】本発明の第二の発明の実施の形態におけるシ
ナリオデータ改変部が生成したシナリオデータに対する
改変情報の概念図

【図１５】本発明の第三の発明の実施の形態におけるマ
ルチメディア情報提供装置とマルチメディア情報再生装
置との構成を示すブロック図

【図１６】本発明の第三の発明の実施の形態におけるマ
ルチメディア情報のシナリオデータの概念図

【図１７】本発明の第三の発明の実施の形態におけるマ
ルチメディア情報再生装置のマルチメディア情報再生処
理を示すフローチャート

【図１８】本発明の第三の発明の実施の形態におけるマ
ルチメディア情報改変部のマルチメディア情報改変検査
と改変処理に関するフローチャート

【図１９】本発明の第三の発明の実施の形態における画
面合成部が改変方法決定部に伝達したマルチメディア情
報画面を合成をした結果レポートの情報の概念図

【図２０】本発明の第三の発明の実施の形態における改
変方法データベースに保持している情報内容の概念図

【図２１】本発明の第三の発明の実施の形態におけるシ
ナリオデータ改変部が生成したシナリオデータに対する
改変情報の概念図

【図２２】本発明の第四の発明の実施の形態におけるマ
ルチメディア情報提供装置とマルチメディア情報再生装
置との構成を示すブロック図

【図２３】本発明の第四の発明の実施の形態におけるマ
ルチメディア情報再生装置のマルチメディア情報再生処
理を示すフローチャート

【図２４】本発明の第四の発明の実施の形態におけるシ
ナリオ改変機構の初期化処理を示すフローチャート

【図２５】本発明の第四の発明の実施の形態におけるマ
ルチメディア情報改変部のマルチメディア情報改変検査
と改変処理に関するフローチャート

【図２６】本発明の第四の発明の実施の形態におけるシ
ナリオデータ改変部が生成したシナリオデータに対する
改変情報の概念図

【図２７】本発明の第四の発明の実施の形態における改
変後のマルチメディア情報の登録処理を示すフローチャ
ート

【図２８】本発明の第四の発明の実施の形態におけるシ
ナリオデータ生成部によるシナリオデータの概念図

【図２９】本発明の第四の発明の実施の形態におけるマ
ルチメディア情報格納部に保存された改変後のシナリオ
データの概念図

【図３０】本発明の第五の発明の実施の形態におけるマ
ルチメディア情報提供装置とマルチメディア情報再生装
置との構成を示すブロック図

【図３１】本発明の第五の発明の実施の形態におけるマ
ルチメディア情報再生装置のマルチメディア情報再生処
理を示すフローチャート

【図３２】本発明の第五の発明の実施の形態におけるシ
ナリオ改変機構の初期化処理を示すフローチャート

【図３３】本発明の第五の発明の実施の形態におけるマ
ルチメディア情報改変部のマルチメディア情報改変検査
と改変処理に関するフローチャート

【図３４】本発明の第五の発明の実施の形態におけるシ
ナリオデータ改変部が生成したシナリオデータに対する
改変情報の概念図

【図３５】本発明の第五の発明の実施の形態におけるマ
ルチメディア情報提供装置によるマルチメディア情報送
出処理を示すフローチャート

【図３６】本発明の第五の発明の実施の形態におけるメ
ディアデータ送出管理部がシナリオデータを解析した結
果得られたメディアデータ送出に必要な情報の概念図

【図３７】本発明の第五の発明の実施の形態におけるマ
ルチメディア情報提供装置のマルチメディア情報改変通
知に対する検査と処理の流れを示すフローチャート

【図３８】本発明の第五の発明の実施の形態におけるメ
ディアデータ送出管理部からメディアデータ送出部に伝
達されるマルチメディア情報改変内容を反映させたメデ
ィアデータ送出に必要な情報の概念図

【符号の説明】

１０４ マルチメディア情報格納部 １０７ メディアデータ取得部 １０８ メディアデータ復号部 １０９ 画面合成部 １１２ シナリオデータ解析部 １１３ マルチメディア情報改変部 １１８ メディアデータ形式変換部 １１９ シナリオデータ改変部 １２０ 改変方法データベース １２１ 改変方法決定部 ２２０５ マルチメディア情報管理部 ２２１０ シナリオデータ生成部 ２２１１ マルチメディア情報保存処理部 ３００４ メディアデータ送出管理部 ３０１０ 改変情報送出部

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 7/24 Ｈ０４Ｎ 5/91 Ｎ ５Ｃ０６４ 7/173 ６１０ 5/92 Ｈ 7/13 Ｚ (72)発明者 高木 利匡 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 Ｆターム(参考） 5B049 CC31 EE03 EE05 EE07 FF03 FF04 FF06 GG04 GG07 5B075 KK07 KK13 KK33 ND03 ND16 ND20 ND23 NK46 NS10 PQ02 PQ20 PQ29 PQ48 PQ49 UU40 5C023 AA02 AA11 AA38 BA11 CA01 DA08 EA03 5C053 FA14 GA11 GB06 GB07 GB09 GB21 GB37 GB40 JA22 KA22 KA24 KA30 LA11 LA15 5C059 KK41 MA00 PP00 PP01 PP20 RC04 RC32 RC33 RC34 SS08 SS26 UA05 5C064 BA07 BB10 BC18 BC27 BD05 BD08 BD09

Claims (6)

【特許請求の範囲】
1. 【請求項１】 動画・静止画・テキスト・音声などの素
   材と、素材の提示方法を記述したシナリオと、からなる
   マルチメディア情報を受信し、当該シナリオに従って、
   当該素材のデータであるメディアデータの復号・合成・
   出力といった再生を行う際に、当該マルチメディア情報
   の改変を行うマルチメディア改変情報部を備えた装置で
   あって、 前記マルチメディア改変情報部は、シナリオデータを元
   に、シナリオデータとメディアデータの改変方法を決定
   するための情報を保持した改変方法データベースと、シ
   ナリオデータと改変方法データベースの情報を元に、マ
   ルチメディア情報のシナリオデータとメディアデータの
   改変方法の決定を行う改変方法決定部と、改変方法決定
   部の要請に応じてメディアデータの形式変換を行うメデ
   ィアデータ形式変換部と、改変方法決定部の要請に応じ
   てシナリオデータの改変を行うシナリオデータ改変部
   と、を備えたマルチメディア情報再生装置。
2. 【請求項２】 動画・静止画・テキスト・音声などの素
   材と、素材の提示方法を記述したシナリオと、からなる
   マルチメディア情報を受信し、当該シナリオに従って、
   当該素材のデータであるメディアデータの復号・合成・
   出力といった再生を行う際に、当該マルチメディア情報
   の改変を行うマルチメディア改変情報部を備えた装置で
   あって、 前記マルチメディア改変情報部は、メディアデータの復
   号情報を元に、シナリオデータとメディアデータの改変
   方法を決定するための情報を保持した改変方法データベ
   ースと、メディアデータの復号情報と改変方法データベ
   ースの情報を元にマルチメディア情報のシナリオデータ
   とメディアデータの改変方法の決定を行う改変方法決定
   部と、改変方法決定部の要請に応じてメディアデータの
   形式変換を行うメディアデータ形式変換部と、改変方法
   決定部の要請に応じてシナリオデータの改変を行うシナ
   リオデータ改変部と、を備えたマルチメディア情報再生
   装置。
3. 【請求項３】 動画・静止画・テキスト・音声などの素
   材と、素材の提示方法を記述したシナリオと、からなる
   マルチメディア情報を受信し、当該シナリオに従って、
   当該素材のデータであるメディアデータの復号・合成・
   出力といった再生を行う際に、当該マルチメディア情報
   の改変を行うマルチメディア改変情報部を備えた装置で
   あって、 前記マルチメディア改変情報部は、画面合成された情報
   を元に、シナリオデータとメディアデータの改変方法を
   決定するための情報を保持した改変方法データベース
   と、画面合成部の情報と改変方法データベースの情報を
   元にマルチメディア情報のシナリオデータとメディアデ
   ータの改変方法の決定を行う改変方法決定部と、改変方
   法決定部の要請に応じてメディアデータの形式変換を行
   うメディアデータ形式変換部と、改変方法決定部の要請
   に応じてシナリオデータの改変を行うシナリオデータ改
   変部と、を備えたマルチメディア情報再生装置。
4. 【請求項４】 マルチメディア情報再生の終了時に、そ
   の時点で再生していたマルチメディア情報のシナリオ情
   報からシナリオデータを生成するシナリオデータ生成部
   と、前記生成されたシナリオデータとメディアデータ形
   式変換部の変換結果とを保存するマルチメディア情報保
   存処理部と、を備え、 前記保持した内容を、本装置に対してマルチメディア情
   報を提供してくれる装置へ通知することを特徴とする、
   請求項１から３のいずれかに記載のマルチメディア情報
   再生装置。
5. 【請求項５】 マルチメディア情報改変部によって改変
   されたマルチメディア情報を、本装置に対してマルチメ
   ディア情報を提供してくれる装置に通知する改変情報送
   出部を備えた請求項１から３のいずれかに記載のマルチ
   メディア情報再生装置。
6. 【請求項６】 請求項５に記載のマルチメディア情報再
   生装置から通知されるマルチメディア情報の改変情報
   を、メディアデータの伝送方法に反映させるメディアデ
   ータ送出管理部を備えるマルチメディア情報提供装置。