JP2000350200A - マルチメディアデータ編集装置及び再生装置 - Google Patents

Abstract

(57)【要約】 【課題】 従来技術のように、パディングデータの挿入
や、一部データの削除を用いて、マルチメディアデータ
のバッファ占有量を制御する場合、扱うメディアデータ
が増加するにつれ、装置規模が大きく複雑になるという
問題がある。また、一度マルチメディアデータをメディ
ア毎に分割加工して処理を行う必要があるために、デー
タの品質、同期等に問題が生じる可能性があった。 【解決手段】 本発明は、メディアデータと同じファイ
ル形式の制御データにより、バッファ占有量の制御を行
うため、複数のメディアデータからなるマルチメディア
データを編集する場合においても、編集時にマルチメデ
ィアデータを分割する必要がないため、データの品質の
低下、同期外れなどの問題を回避することが可能とな
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、１つ以上のメディ
アデータ(動画像データ、音声データなど)から構成され
るマルチメディアデータを対象に、編集及び再生を行う
データ処理装置に関する。

【０００２】

【従来の技術】近年、ISO/IEC MPEGなどディジタル動画
像圧縮用国際標準を用いて符号化されたディジタル動画
像データが広く利用されるようになってきた。これらの
符号化されたデータは、そのまま利用されるだけでな
く、ユーザの要求により、分割、結合、トリミングなど
の編集処理を行った後、新たな動画像データとして利用
される場合がある。

【０００３】符号化データの発生情報量は、通常、再生
装置の入力データバッファのバッファ占有量が上限値と
下限値の範囲に収まるよう生成される。しかし、複数の
動画像データを編集して結合する場合、例えそれぞれの
データのバッファ占有量が前記範囲に収まっていたとし
ても、編集された動画像データのバッファ占有量は前記
範囲に収まる保証はない。それは、結合された二つのデ
ータのそれぞれの時点でのバッファ占有量が異なるから
である。

【０００４】この問題を解決する従来技術として、特開
平８-１４９４０８に示される動画像データ編集装置が
あるが、該動画像データ編集装置について図面を参照し
ながら詳細を説明する。

【０００５】図８は、該動画像データ編集装置の構成を
示すブロック図である。同図において１３は編集情報１
を基に動画像データ１２の解析を行うデータ解析部、１
４は編集情報１を基に、動画像データ１２から指定され
た範囲のデータを抽出するデータ抽出部、１５はデータ
解析部１３の解析結果から新たに追加する必要のあるデ
ータを作成する付加データ作成部、１６はデータ抽出部
１４で抽出された動画像データと付加データから編集結
果となる動画像データを再構成するデータ再構成部であ
る。以後同一構成要素には同一符号を付し、説明を省略
する。

【０００６】上記構成の動画像データ編集装置では、MP
EG-１などの国際標準方式で符号化された動画像データ
を符号化データの状態のまま扱うことで、復号手段及び
符号化手段を必要とせず、簡単な構成の装置で編集を可
能としている。

【０００７】次に、該動画像データ編集装置の動作につ
いて、図９を用いて動画像データAの部分動画像データD
ATA１と動画像データBの部分動画像データDATA２を順に
接続し、新たな動画像データCを作成する例により説明
する。

【０００８】図９は、再生装置における入力データバッ
ファの占有量の時間変化を表したものである。同図(a)
において、B１は動画像データＡを順次復号して、DATA
１の復号を終了し、続くデータを復号開始する直前での
バッファ占有量である。同図(b)において、B２は動画像
データＢを順次復号して、DATA２復号開始直前でのバッ
ファ占有量である。また傾きRはデータ転送レートであ
り、一定速度で外部からデータが転送されることを表し
ている。

【０００９】バッファ内部に蓄積されたデータは、各フ
レームの復号処理が開始されると同時に、必要なデータ
がまとめて復号器に出力され、バッファ占有量が下が
る。このため、バッファ占有量は同図のようにノコギリ
状のグラフになる。

【００１０】復号装置が正常な復号処理を行うため、編
集装置では、編集結果のバッファ占有量の遷移が、上限
値及び下限値内に収まるよう制御を行う必要がある。

【００１１】このため該動画像データ編集装置では、編
集対象の動画像データ、抽出するデータの範囲、再生の
順序などを指定する編集情報１を基に動画像データＡか
ら部分動画像データDATA１、動画像データＢからDATA２
をデータ抽出部１４にて抽出する。

【００１２】次に、復号装置におけるバッファ占有量Ｂ
１、Ｂ２をデータ解析部１３で算出し、そのギャップＢ
１−Ｂ２を求める。

【００１３】Ｂ１−Ｂ２>０の場合、２つの部分動画像
データDATA１、DATA２の単純接続を行うと、同図(c)に
示すように、占有量の上限値を超えたオーバーフローに
なる可能性がある。オーバーフローを起こした場合に
は、一部のデータが欠落することになるため、正常な復
号は行うことができなくなる。

【００１４】そこで、占有量のギャップＢ１−Ｂ２に相
当する、復号画像に影響のないスタッフィングデータを
付加データ作成部１５で作成し、データ再構成部１６が
DATA１とDATA２の間にスタッフィングデータを挿入した
動画像データＣを出力する。

【００１５】スタッフィングデータを挿入したことで、
動画像データＣ復号時の入力データバッファの状態は同
図(d)に示す状態になり、正常な復号処理が可能なデー
タになる。

【００１６】逆にＢ１−Ｂ２<０の場合は、２つの部分
動画像データDATA１、DATA２の単純接続を行うと、同図
(e)に示すように、占有量の下限値を下回るアンダーフ
ローになる可能性がある。アンダーフローの場合には、
復号に必要なデータがバッファから読み出せないため
に、復号処理が一時滞ることになる。

【００１７】そこで、DATA１の一部の符号化データを削
除し、付加データ作成部１５で作成する符号量の少ない
符号化データ(例えば参照画像に対し動きベクトル０、
差分０の符号化データ)で置き換える。

【００１８】さらに、DATA１の符号データ置き換え処理
によって削減される符号量をＤとする時、新たな占有量
のギャップＤ＋Ｂ１−Ｂ２に相当するスタッフィングデ
ータを付加データ作成部１５で作成する。データ再構成
部１６は、DATA１の一部データの置き換え、スタッフィ
ングデータの挿入を行った動画像データＣを出力する。

【００１９】出力された動画像データC復号時の入力デ
ータバッファは、同図(f)に示す状態になり、正常な復
号処理が可能なデータになる。ただし、置き換え処理を
行うため、編集後のデータは、元データと比べ画像が劣
化する。

【００２０】上記動画像データ編集装置は、単一のメデ
ィアデータを扱うメディアデータ編集装置の例である。

【００２１】次に、複数のメディアデータから構成され
るマルチメディアデータの編集を行う従来技術の概略構
成を示すブロック図を図１０に示す。また、マルチメデ
ィアデータの再生を行うマルチメディアデータ再生装置
の概略構成を示すブロック図を図１１に示す。

【００２２】図１０において、８は多重化されたマルチ
メディアデータを個々のメディアデータへ分離する多重
分離部、１８は上記動画像データ編集装置に代表される
メディアデータ編集装置、１７は個々のメディアデータ
を多重化しマルチメディアデータを出力する多重化部で
ある。また図１１において、７は入力データを一時的に
蓄える入力データバッファ、９は単一メディアデータの
復号を行う復号器である。

【００２３】上記構成のマルチメディアデータ編集装置
及び再生装置では、基本的に単一メディアデータを扱う
装置を複数組み合わせることで実現されている。つまり
は、上記した図８に示す動画像編集装置と同様の構成
を、マルチメディアデータ内ののデータ種別の数（メデ
ィアの種類の数）だけ用意することにより、複数のメデ
ィアからなるマルチメディアデータに対して、スタッフ
ィングデータを挿入したり、データを一部削除してデー
タの置き換え処理を行うことにより、マルチメディアデ
ータの編集が可能となる。

【００２４】

【発明が解決しようとする課題】しかしながら、上記従
来技術のマルチメディアデータ編集装置では、単一のメ
ディアデータを編集するメディアデータ編集装置に比
べ、扱うメディアデータが増加するにつれ、装置規模が
大きく複雑になるという問題がある。それは、上記した
ように、マルチメディアデータにおけるメディアの種類
の数だけ、そのメディアに対応する動画像データ編集装
置の構成を用意する必要がある。

【００２５】マルチメディアデータの編集が、従来技術
の動画像データ編集装置と同等の装置で行うことができ
ないのは、マルチメディアデータと単一のメディアデー
タのデータ構造が大きく異なるためである。

【００２６】図１２にマルチメディアデータのデータ構
造の例を示す。図１２の例は、動画像データ（Ｖ）、音
声データ（Ａ）、効果音データ（ＳＥ）の3種類のメデ
ィアデータから構成されるマルチメディアデータの例を
表している。

【００２７】各メディアデータは、マルチメディアデー
タ内部では、同期再生を行うため単位時間毎パケットと
呼ばれる小さな固まりに分割され、同期の為の時間情
報、メディアデータを識別するID情報、データサイズ等
の付加情報（Ｈ）が付加される。

【００２８】このようにパケットへ分割されたメディア
データが時間順に格納されることで、マルチメディアデ
ータは構成され、各メディアデータの格納順序、パケッ
ト化されるデータの単位等は符号化装置に依存する。そ
の結果、同一の内容のマルチメディアデータであって
も、符号化装置の種類によって、図(b)から(d)の例のよ
うに様々な構造が許される。

【００２９】このような構成のデータの場合、従来技術
の動画像データ編集装置のように、編集箇所での符号化
データの追加あるいは削除を行う場合、追加あるいは削
除を行う位置のデータの種別（符号化方法）に基づいた
挿入処理あるいは削除処理を行う必要があり、それぞれ
のデータの種別毎にそのメディアに対応する動画像デー
タ編集装置の構成を用意する必要があるため、従来技術
の動画像データ編集装置のように、編集箇所での符号化
データの追加及び変更が容易でなく、一旦、個々のメデ
ィアデータへの分離が不可欠となる。

【００３０】さらに、従来技術のマルチメディアデータ
編集装置では、回路規模を抑えるために使用できるメデ
ィアデータ種別、及びマルチメディアデータに含まれる
メディアデータの構成、データ構造などが制限される場
合が多い。また、編集により元データの一部が失われる
ことで、編集後のデータの品質、同期等が損なわれる場
合がある。

【００３１】本発明の目的は、以上の課題を解決するた
め、符号化データを追加あるいは削除するのではなく、
符号化データとは異なる制御データを付与することによ
り、メディアデータ間の同期、編集結果の品質を維持
し、編集対象のマルチメディアデータに含まれるメディ
アデータの数、及びマルチメディアデータの構成に係わ
らず単一のメディアデータを編集する装置と同等の構成
及び回路規模で実現可能なマルチメディアデータ編集装
置及び本発明のマルチメディアデータ編集装置の出力す
るマルチメディアデータを再生するマルチメディアデー
タ再生装置を提供することである。

【００３２】

【課題を解決するための手段】本発明は、データ本体と
付加情報から構成される複数のメディアデータを多重化
したマルチメディアデータを編集するマルチメディアデ
ータ編集装置であって、結合編集を行う２つのマルチメ
ディアデータを抽出するデータ抽出部と、前記データ抽
出部で抽出されたマルチメディアデータの再生時におけ
るバッファ占有量を解析するデータ解析部と、前記バッ
ファ占有量に基づいてバッファ占有量を制御する制御デ
ータを作成する制御データ作成部と、前記抽出されたマ
ルチメディアデータ及び前記制御データを結合して一つ
のマルチメディアデータとするデータ再構成部を備え、
その制御データとして、前記メディアデータと同様のデ
ータ構成であり、データ本体として、復号器の制御内容
を示すデータを備えることが特徴であり、このような構
成を備えることにより、マルチメディアデータを一度分
解する必要があるという課題を解決することが可能とな
る。

【００３３】また同様に、結合編集を行う２つのマルチ
メディアデータを抽出するデータ抽出部と、前記データ
抽出部で抽出された２つのマルチメディアデータにおけ
る、各メディアデータと復号器の対応関係を解析するデ
ータ解析部と、前記各メディアデータと復号器の対応関
係に基づいて、各メディアデータと復号器の関係を変更
する制御データを作成する制御データ作成部と、前記抽
出されたマルチメディアデータ及び前記制御データを結
合して一つのマルチメディアデータとするデータ再構成
部を備えるものにおいて、前記制御データを、前記メデ
ィアデータと同様のデータ構成とし、データ本体とし
て、各メディアデータと復号器の関係を変更する制御デ
ータを備えることにより、マルチメディアデータの結合
時に、メディアデータと復号器との関係に齟齬が生じる
という問題を回避できる。

【００３４】また、再生側の装置では、入力されるマル
チメディアデータを各メディアデータと制御データに分
離する多重分離部と、分離された制御データを解釈し、
各復号器の制御を行う復号器制御部とを備えることによ
り、上記課題を解決することができる。

【００３５】

【発明の実施の形態】以下に、図面を用いて本発明の実
施の形態を詳細に説明する。本発明の実施形態１とし
て、マルチメディアデータの編集を行う場合について説
明する。図１は、本発明におけるマルチメディアデータ
編集装置を示すブロック図である。同図において、１は
編集情報であり、編集対象のマルチメディアデータに関
する情報、例えばファイル名や構成するメディアデータ
の種別、データにおける再生開始・終了時刻やフレーム
番号、再生順序などが規定されている。２は、複数のメ
ディアのデータが多重化されているマルチメディアデー
タである。

【００３６】３は編集情報１を基に、マルチメディアデ
ータ２を解析するデータ解析部、、４は編集情報１を基
に、マルチメディアデータ２から編集後のデータに必要
な編集対象データを抽出するデータ抽出部である。

【００３７】５はデータ解析部３の解析結果から再生装
置の制御データを作成する制御データ作成部、６はデー
タ抽出部４で抽出されたマルチメディアデータと制御デ
ータから編集結果となるマルチメディアデータを再構成
するデータ再構成部である。

【００３８】次に、本マルチメディアデータ編集装置の
基本的な動作を説明する。本マルチメディアデータ編集
装置においては、データ抽出部４で、編集情報１を基
に、編集に必要なマルチメディアデータを全て抽出す
る。本実施形態においては、２つのデータのつなぎあわ
せる編集を行うため、データ抽出部４は、編集対象とな
る２つのデータをマルチメディアデータ２から切り出
す。また、データ解析部３では、編集情報１を基に、デ
ータ抽出部４で抽出されたデータを編集する際に使用さ
れる入力バッファのバッファ占有量、つまりは抽出され
た２つのデータの結合部分におけるバッファ占有量を解
析する。

【００３９】制御データ作成部５では、データ解析部３
の解析結果を基に、再生装置の復号器を制御するための
制御データを作成する。データ再構成手段６は、抽出さ
れたデータ及び制御データの再構成を行い編集結果のマ
ルチメディアデータを出力する。つまりは、データ抽出
手段４で抽出された、２つのマルチメディアデータを結
合する際に、制御データ作成部５で作成された制御デー
タを挿入して、結合する。

【００４０】本マルチメディアデータ編集装置では、デ
ータ解析部３の解析結果に基づき、マルチメディアデー
タ再生装置における入力データバッファの占有量の制御
を行う制御データを制御データ作成部５で作成する。こ
れにより、従来技術の動画像データ編集装置の例と同
様、マルチメディアデータ再生装置における入力データ
バッファのオーバーフローまたはアンダーフローの問題
を解決する。

【００４１】次に、データ解析部３と制御データ作成部
５の動作の詳細を、図面を参照しながら説明する。

【００４２】図４は、同一種類のメディアデータで構成
されるマルチメディアデータＡ及びＢの部分データMDAT
A１、MDATA２から新たなマルチメディアデータCを作成
する場合のマルチメディアデータ再生装置における入力
データバッファにおけるバッファ占有量の状態図であ
る。図中の符号については、図９と同一であり説明を省
略する。また、図５は本マルチメディアデータ編集装置
におけるデータ解析部３及び制御データ作成部５の動作
を示すフローチャートである。

【００４３】まず、データ解析部３が、図４(a)、(b)に
おけるバッファ占有量Ｂ１、Ｂ２のギャップＢ１−Ｂ２
を求める（図５S１）。

【００４４】ここで、Ｂ１−Ｂ２＞０ならば、制御デー
タ作成部５が、オーバーフローの可能性を回避するた
め、バッファ占有量を下げることを目的とする制御デー
タを作成し（図５S２）、データ再構成部６がMDATA１、
MDATA２の間に、この制御データを挿入した結果をマル
チメディアデータＣとして出力する。

【００４５】ここでの制御データは、働きとしては従来
のスタッフィングデータと同じであるが、異なる構造で
ある。具体的には、バッファ占有量のギャップＢ１−Ｂ
２に相当するデータ長を有し、マルチメディアデータ再
生装置では、この制御データを読み飛ばす処理を行うこ
とで、図４(c)に示すようなオーバーフローを起こす場
合を、同図(d)に示すような状態へと回避できる。

【００４６】また逆に、Ｂ１−Ｂ２＜０ならば、制御デ
ータ作成部５が、アンダーフローの可能性を回避するた
め、バッファ占有量を増やすことを目的とする制御デー
タを作成し（図５S３）、データ再構成部６がMDATA１、
MDATA２の間に、この制御データを挿入した結果をマル
チメディアデータＣとして出力する。

【００４７】ここでの制御データは、バッファ占有量が
Ｂ２に回復するのに必要な時間（Ｂ２−Ｂ１）／Ｒ
［Ｒ：データ転送速度］だけ、MDATA２の復号開始時刻
及び再生時刻を遅らせる制御データである。これによ
り、図４(e)に示すようなアンダーフローを起こす場合
を、同図(f)に示すような状態へと回避できる。

【００４８】本発明におけるマルチメディアデータ編集
装置が生成する制御データの構造について図１３を元に
説明する。本実施形態におけるマルチメディアデータ編
集装置が作成する制御データは、他のメディアデータ
（図１３(a)）と同様、少なくとも１つ以上のパケット
として生成される。他のメディアデータと同様に、デー
タは付加情報部分とデータ本体からなり、データ本体に
は、復号器の制御内容を示すデータが格納され、付加情
報として、他のメディアデータと同期をとるための時間
情報、制御データを示すID情報、データサイズ等が付加
されている（図１３(b)）。

【００４９】本願発明はバッファ占有量をコントロール
するために、従来技術のように、符号化データを付与す
るのではなく、マルチメディアデータと同様のデータ構
成の制御データを付与する点が、従来技術と異なる点で
ある。

【００５０】このような構成によれば、マルチメディア
データを各メディアのデータ毎に分離した後にそれぞれ
のメディアの符号化方式に基づいた符号化データを付与
する必要がないため、マルチメディアデータの分離を行
う構成が不要となる。

【００５１】上記の処理ではＢ１、Ｂ２のギャップか
ら、バッファ占有量を制御するどちらか一方の制御デー
タを挿入したが、データ解析手段３が、MDATA１、MDATA
２の単純接続を仮定した場合、バッファ占有量の変化を
全てのマルチメディアデータについて詳細に調べ、オー
バーフローまたはアンダーフローが発生する場合のみ、
バッファ占有量を制御する制御データを作成してもよ
い。

【００５２】また本実施形態では、バッファ占有量を制
御する２種類の制御データを用いたが、マルチメディア
データ再生装置が、外部からのデータ転送速度Ｒを制御
する手段を備える場合には、上記バッファ占有量の制御
を行う制御データの代わりに、データ転送速度Ｒを制御
する制御データを用いてもよい。

【００５３】次にメディアデータの構成が異なるマルチ
メディアデータを編集により結合する場合について、図
面を参照しながら説明する。図６は、マルチメディアデ
ータ再生装置における多重分離部の動作を示す説明図で
ある。同図において、メディアＡ、Ｂ、Ｃ、Ｄは異なる
種類のメディアデータを表している。また、第１から第
４復号器は、順にメディアＡ、Ｂ、Ｃ、Ｄを復号する復
号器である。

【００５４】同図(a)、(b)に示すように、マルチメディ
アデータは、再生装置における多重分離部が各メディア
データを識別するためのID情報を持つが、このID情報は
マルチメディアデータ毎に異なる。そのため、編集によ
って２つのマルチメディアデータを結合した場合、同図
(c)に示すように、異なる種類のメディアデータに対
し、同一IDが割り当てられることになり、このままでは
正常な再生を行うことができない。

【００５５】そこで、異なるメディアデータから構成さ
れるマルチメディアデータを編集する場合、制御データ
作成部５は、前記バッファ占有量を制御するための制御
データに、ID情報と使用する復号器の対応関係を表すデ
ータを含めた制御データを作成する。

【００５６】図６(a)及び(b)で示されるマルチメディア
データＡおよびＢを結合する場合、データ解析部３は、
編集情報に１含まれる編集対象のマルチメディアデータ
に関する情報（マルチメディアデータＡ及びＢ中のＩＤ
情報と復号器（符号化・復号化方式）の対応関係）か
ら、２つのマルチメディアデータＡ、Ｂが持つＩＤ情報
と復号器の関係が異なるか否かを検出し、異なる場合、
制御データ作成部５は、新たなＩＤ情報と使用する復号
器の対応関係を示すデータを含む制御データを作成す
る。

【００５７】本実施形態においては、ＩＤ＝３に割り当
てられている復号器が、マルチメディアデータＡでは第
３復号器であり、マルチメディアデータＢでは第４復号
器となっており、対応関係が異なる。そこで、制御デー
タ作成部５は、ＩＤ＝３に対応する符号器を第３復号器
から第４復号器に変更する制御を行う制御データを作成
することになる。

【００５８】作成された制御データは、マルチメディア
データＡとマルチメディアデータＢの間に挿入され、２
つのマルチメディアデータを結合する。この制御データ
を受信した再生装置では、図６(d)に示すように、多重
分離部の保持するID情報と使用する復号器の対応関係を
切替えることで正常な再生を行うことができる。

【００５９】このような構成によって、マルチメディア
データを個々のメディアデータに分離して結合する必要
なく、２つのマルチメディアデータの結合時に、復号器
の対応関係を変更することが可能となる。

【００６０】次に、復号時の処理について説明する。図
２は、本発明におけるマルチメディアデータ再生装置を
示すブロック図であり、同図において１０は、復号器９
の動作を制御する復号器制御部である。

【００６１】本マルチメディアデータ再生装置におい
て、多重分離部８は、多重化されているマルチメディア
データ２を個々のメディアデータ及び制御データに分離
する。マルチメディアデータ編集装置で作成された制御
データは、多重分離部８でメディアデータの一種として
処理され、復号器制御部１０に送られる。

【００６２】分離されたメディアデータは、対応する復
号器９で順次復号、再生される。復号器制御部１０が、
制御データを受信した場合のみ、受信した制御内容に従
って、復号器９の動作を変更する制御を行う。

【００６３】復号器制御部１０が制御データを受信した
場合の処理について図７を元に説明する。図７は、マル
チメディアデータ再生装置における制御データの処理を
示すフローチャートである。

【００６４】受信した制御データが、バッファ占有量を
下げるためのデータの場合、制御データが全て復号器制
御部１０に送られることでバッファ占有量は下げられ
る。そのため、復号器制御部１０は、復号器９に対する
制御を何も行わない。

【００６５】逆に受信した制御データがバッファ占有量
を増やすためのデータの場合、復号器制御部１０は復号
器９に対し、それ以降のマルチメディアデータの復号開
始時刻及び再生時刻を指定された時間だけ遅らせる制御
を行う（図７S４）。指定された時間だけ復号器９の動
作が停止することでバッファ占有量は増加することにな
る。

【００６６】以上説明した本実施形態におけるマルチメ
ディアデータ再生装置が、図１１に示す従来のマルチメ
ディアデータ再生装置と異なる点は、特殊なメディアデ
ータである制御データを解釈し、他の復号器９の動作を
制御する復号器制御部１０を備える点であり、制御デー
タを含まないマルチメディアデータを再生する場合は、
復号器制御部１０は動作しないため、本マルチメディア
データ再生装置の動作は、従来のマルチメディアデータ
再生装置の動作と同じである。

【００６７】また上記構成に加え、図３に示すように復
号器制御部１０が多重分離部８の制御を行う手段を備え
ることで、メディアデータを識別するID情報と復号器９
の対応関係を表すデータが制御データに付加されている
場合、復号器制御部１０が多重分離部８の保持するＩＤ
情報と復号器９の対応関係を更新する（図７S５）。こ
の処理により、メディアデータの構成が途中で変化する
場合に対応できる。

【００６８】

【発明の効果】以上説明したように、本発明におけるマ
ルチメディアデータ編集装置では、マルチメディアデー
タのメディアデータへの分離、再多重化を行わないた
め、編集後のマルチメディアデータにおける各メディア
データの同期を、容易に維持することができる。また、
抽出したマルチメディアデータの一部変更、削除などの
処理を行わないため、編集によるマルチメディアデータ
の品質低下は生じない。

【００６９】さらに、本発明によれば、編集対象のマル
チメディアデータに含まれるメディアデータの数及びマ
ルチメディアデータの構成に関わらず、単一のメディア
データを編集する装置と同等の構成及び回路規模でマル
チメディアデータ編集装置を構成することができる。

【図面の簡単な説明】

【図１】本発明におけるマルチメディアデータ編集装置
の構成を示すブロック図である。

【図２】本発明におけるマルチメディアデータ再生装置
の構成を示すブロック図である。

【図３】多重分離部を制御可能なマルチメディアデータ
再生装置の構成を示すブロック図である。

【図４】本発明におけるマルチメディアデータ再生装置
の入力データバッファの状態を示す図である。

【図５】データ解析部及び制御データ作成部の動作の流
れを示す図である。

【図６】マルチメディアデータ再生装置における多重分
離部の動作を説明する図である。

【図７】マルチメディアデータ再生装置における制御デ
ータの処理の流れを示す図である。

【図８】従来技術における動画像データ編集装置の構成
を示すブロック図である。

【図９】従来技術における動画像データ再生装置の入力
データバッファの状態を示す図である。

【図１０】従来技術におけるマルチメディアデータ編集
装置の構成を示すブロック図である。

【図１１】従来技術におけるマルチメディアデータ再生
装置の構成を示すブロック図である。

【図１２】マルチメディアデータのデータ構造を示す図
である。

【図１３】制御データのデータ構造を示す図である。

【符号の説明】

１編集情報 ２マルチメディアデータ ３データ解析部 ４データ抽出部 ５制御データ作成部 ６データ再構成部 ７入力データバッファ ８多重分離部 ９復号器 １０復号器制御部 １１再生データ １２動画像データ １３データ解析部 １４データ抽出部 １５付加データ作成部 １６データ再構成部 １７多重化部 １８メディアデータ編集装置

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK35 KK39 MA00 PP04 RB10 RC04 RC09 RC28 TA60 TA72 TB01 TC16 TD14 UA02 UA05 UA38 5C063 AA01 AB03 AB07 AB11 AC01 AC05 AC10 CA11 CA23

Claims (5)

【特許請求の範囲】
1. 【請求項１】 データ本体と付加情報から構成される複
   数のメディアデータを多重化したマルチメディアデータ
   を編集するマルチメディアデータ編集装置であって、 結合編集を行う２つのマルチメディアデータを抽出する
   データ抽出部と、 前記データ抽出部で抽出されたマルチメディアデータの
   再生時におけるバッファ占有量を解析するデータ解析部
   と、 前記バッファ占有量に基づいてバッファ占有量を制御す
   る制御データを作成する制御データ作成部と、 前記抽出されたマルチメディアデータ及び前記制御デー
   タを結合して一つのマルチメディアデータとするデータ
   再構成部を備えるものであり、 前記制御データは、前記メディアデータと同様のデータ
   構成であり、データ本体として、復号器の制御内容を示
   すデータを備えることを特徴とするマルチメディアデー
   タ編集装置。
2. 【請求項２】 前記データ解析部で、マルチメディアデ
   ータの再生時におけるバッファ占有量が所定量を超過す
   ると解析された場合、 前記制御データ作成部において、データ本体にバッファ
   占有量を削減するように復号器を制御するデータを作成
   することを特徴とする前記請求項１記載のマルチメディ
   アデータ編集装置。
3. 【請求項３】 前記データ解析部で、マルチメディアデ
   ータの再生時におけるバッファ占有量が所定量以下にな
   ると解析された場合、 前記制御データ作成部において、データ本体にバッファ
   占有量を増加させるように復号器を制御するデータを作
   成することを特徴とする前記請求項１記載のマルチメデ
   ィアデータ編集装置。
4. 【請求項４】 データ本体と付加情報から構成される複
   数のメディアデータを多重化したマルチメディアデータ
   を編集するマルチメディアデータ編集装置であって、 結合編集を行う２つのマルチメディアデータを抽出する
   データ抽出部と、 前記データ抽出部で抽出された２つのマルチメディアデ
   ータにおける、各メディアデータと復号器の対応関係を
   解析するデータ解析部と、 前記各メディアデータと復号器の対応関係に基づいて、
   各メディアデータと復号器の関係を変更する制御データ
   を作成する制御データ作成部と、 前記抽出されたマルチメディアデータ及び前記制御デー
   タを結合して一つのマルチメディアデータとするデータ
   再構成部を備えるものであり、 前記制御データは、前記メディアデータと同様のデータ
   構成であり、データ本体として、各メディアデータと復
   号器の関係を変更する制御データを備えることを特徴と
   するマルチメディアデータ編集装置。
5. 【請求項５】 複数のメディアデータ及び再生装置の制
   御データを多重化したマルチメディアデータを復号再生
   するマルチメディアデータ再生装置であって、 入力されるマルチメディアデータを各メディアデータと
   制御データに分離する多重分離部と、 分離された制御データを解釈し、各復号器の制御を行う
   復号器制御部とを備えることを特徴とするマルチメディ
   アデータ再生装置。