JP2007095163A - マルチメディア符号化データ分離伝送装置 - Google Patents

Abstract

【課題】 ビデオ再生装置とオーディオ再生装置とが無線によって接続している状態の利便性を維持したまま、例えば公共性の高い場所などを始めとする電波使用が制限されている環境においても、簡易な構成によってビデオデータとオーディオデータの同期再生を実現する。
【解決手段】 システムストリーム分離部１０２において、ビデオ符号化データ、オーディオ符号化データ、再生時間の管理を行うための時間情報を含む補助情報が多重化されたマルチメディア符号化データから、オーディオ符号化データ及び補助情報が分離抽出された後、オーディオストリーム再構成部１０５において、オーディオ符号化データ及び補助情報が再構成される。この再構成された符号化データは、オーディオ再生装置２００にあらかじめ格納され、再生時に、ビデオ再生を行うビデオ再生装置から再生開始指示情報及び再生開始時間情報を受けることによって、オーディオの同期再生が行われる。
【選択図】 図１

Description

本発明は、物理的に離れた状態にあるビデオ再生装置及びオーディオ再生装置において、１つのマルチメディア符号化データに含まれるビデオデータ及びオーディオデータの同期再生を可能とする処理を行うマルチメディア符号化データ分離伝送装置に関する。

なお、本明細書では、一般的な輝度信号や色差信号のようなビデオ情報（映像情報）を含むデータをビデオデータと呼び、リニアＰＣＭ（Pulse Code Modulation：パルス符号化方式）やアナログ音声信号のようなオーディオ情報（音声情報）を含むデータをオーディオデータと呼ぶことにする。また、ビデオデータが圧縮された符号化データをビデオ符号化データと呼び、オーディオデータが圧縮された符号化データをオーディオ符号化データと呼ぶことにする。したがって、ビデオ符号化データ及びオーディオ符号化データは、ビデオデータ及びオーディオデータに含まれる。また、本明細書では、ビデオ符号化データ及びオーディオ符号化データの両方を含むデータをマルチメディア符号化データと呼ぶことにする。

従来、ビデオデータ及びオーディオデータを、物理的に離れたそれぞれの再生装置（ビデオ再生装置及びオーディオ再生装置）にて同期再生を行う技術がいくつか提案されており、この技術に関連して、視聴者の多様なニーズに適した製品も発売されている。例えば、無線伝送を利用したものに、赤外領域の光信号としてオーディオデータを伝送するデータ伝送装置と、この光信号を受光装置で受光し、光信号から電気信号に変換してオーディオ再生を行うヘッドフォンとにより構成されている赤外線伝送方式のオーディオ再生システムが存在している。

なお、電波を用いた伝送方式としては、最近では５ＧＨｚ（ギガヘルツ）帯を用いたＩＥＥＥ８０２．１１ａ、２．４ＧＨｚ帯を用いたＩＥＥＥ８０２．１１ｂとＩＥＥＥ８０２．１１ｇが知られている。また、例えば、ブルートゥース（Bluetooth）（登録商標）などの短距離無線伝送方式もオーディオデータの転送に利用されている。これらの電波を用いたデータ伝送は送受信ユニットを小型化することが可能であり、特にブルートゥース（登録商標）に関してはコストも低く、また光を利用した無線通信と比較して伝送可能な範囲も広いため非常に利便性が高い。

また、リアスピーカの配置によってマルチチャンネル再生環境を構築する際、リアスピーカにまで伸延させるスピーカコードが邪魔になるという問題が発生するが、この問題を解決するために、リアスピーカにアンプを搭載させるとともに無線信号受信装置を設け、リアスピーカに向けてオーディオデータを電波信号（無線信号）で伝送することで、リアスピーカへのオーディオデータの供給を行うオーディオ再生システムが存在している。

上述の例として挙げたビデオデータ及びオーディオデータの同期再生は、通常はスピーカコード又はヘッドフォンコードを通じてスピーカに供給され、スピーカにおいて振動エネルギーに戻されるオーディオデータの電気信号を、光信号又は電波信号などの無線信号に変換して伝送することで、物理的に離れた位置に存在するオーディオ出力装置におけるオーディオ出力を可能とするものである。したがって、上述の同期再生は、ビデオデータとオーディオデータとのタイミングを計りながら処理を行うものではなく、同期再生に関しては、ビデオ再生装置及びオーディオ再生装置におけるビデオデータ及びオーディオデータの出力タイミングに依存している。

一方、下記の特許文献１には、物理的に離れた状態にあるビデオ再生装置及びオーディオ再生装置において、マルチメディア符号化データに含まれるビデオデータ及びオーディオデータの同期再生を実現するための技術が開示されている。特許文献１に開示されている技術では、例えば、映像再生装置と音声再生装置（ヘッドフォン）とが無線媒体によって接続されており、映像再生装置は、ビデオデータの再生を行うとともに、オーディオ符号化データを音声再生装置に対して供給する。音声再生装置は、映像再生装置から受信したオーディオ符号化データの復号処理を行って、その音声を出力する。また、音声再生装置は、再生開始時には、入出力バッファ容量、通信遅延、復号遅延などを考慮してビデオ再生と同期した音声再生を図るとともに、再生過程においては、例えば、映像再生装置との間におけるクロック同期を利用して、映像出力と音声出力とのずれ量を計測し、音声再生速度を変更することによって、ずれの解消を行うことが可能である。

次に、従来の技術に係るマルチメディア符号化データを再生するマルチメディア符号化データ再生装置の内部構成について説明する。

図５は、従来の技術に係るマルチメディア符号化データ再生装置の一例を示すブロック図である。なお、図５に示すマルチメディア符号化データ再生装置は、マルチメディア符号化データ内に含まれるビデオデータ及びオーディオデータの同期再生を行うものであり、例えば、ポータブル型ＤＶＤプレーヤに相当する。

図５に図示されているマルチメディア符号化データ再生装置１０００は、マルチメディアストリームバッファ１００１、システムストリーム分離部１００２、オーディオ復号部１００３、ビデオ復号部１００４、制御部（ＣＰＵ：Central Processing Unit）１００５、オーディオデータバッファ１００６、ビデオデータバッファ１００７、スピーカ１００８、モニタ１００９を有している。

図５において、マルチメディアストリームバッファ１００１は、例えば、マルチメディア符号化データを格納するＤＶＤディスクである。例えば、マルチメディアストリームバッファ１００１から光ピックアップを用いて読み込まれたシステムストリームは、システムストリーム分離部１００２においてビデオストリームとオーディオストリームとに分離され、オーディオストリームはオーディオ復号部１００３において、ビデオストリームはビデオ復号部１００４において、それぞれ圧縮されたデータの復号処理が施される。なお、符号化データ、ストリーム、ビットストリームは同意語であり、符号化されたデータは、一般的にストリームと呼ばれている。

オーディオ復号部１００３で復号されたオーディオデータや、ビデオ復号部１００４で復号されたビデオデータは、出力用バッファ（オーディオデータバッファ１００６又はビデオデータバッファ１００７）にいったん蓄積される。そして、システムストリームに記述された時間情報に基づいて再生制御を行う制御部１００５によって、オーディオデータバッファ１００６からのオーディオデータ出力や、ビデオデータバッファ１００７からのビデオデータ出力の制御が行われる。オーディオデータバッファ１００６から出力されたオーディオデータは、スピーカ１００８を通じて音声化され、ビデオデータバッファ１００７から出力されたビデオデータは、モニタ１００９を通じて映像化される。

このように、ビデオデータ及びオーディオデータの同期再生は、マルチメディア符号化データ再生装置１０００内の制御部１００５で管理され、例えば、オーディオ復号部１００３やビデオ復号部１００４、あるいは出力用バッファ（オーディオデータバッファ１００６やビデオデータバッファ１００７）を制御することで実現される。

また、図６は、従来の技術に係る分離型マルチメディア符号化データ再生装置の一例を示すブロック図であり、図７は、従来の技術に係る分離型マルチメディア符号化データ再生装置の一例を示す外観図である。なお、図６及び図７に示す分離型マルチメディア符号化データ再生装置は、例えば物理的に離れたヘッドフォンやスピーカに対して、光又は電波によってオーディオデータの無線伝送を行うものである。

図６に図示されている分離型マルチメディア符号化データ再生装置は、マルチメディア符号化データ再生伝送装置２００１と、オーディオ再生装置２００２とを有している。図６に示す分離型マルチメディア符号化データ再生装置は、例えば図７に図示されているように、マルチメディア符号化データ再生伝送装置２００１として機能し、映像出力を行うモニタや操作ボタンなどを有する本体装置３００１と、オーディオ再生装置２００２として機能するヘッドフォン３００２とのセットに相当する。すなわち、図６に図示されている分離型マルチメディア符号化データ再生装置は、図５に図示されているマルチメディア符号化データ再生装置からオーディオ再生装置を分離し、無線によってオーディオデータの伝送を行うように構成されている。

図６に図示されているマルチメディア符号化データ再生伝送装置２００１は、マルチメディアストリームバッファ２１０１、システムストリーム分離部２１０２、オーディオ復号部２１０３、ビデオ復号部２１０４、制御部２１０５、オーディオデータバッファ２１０６、ビデオデータバッファ２１０７、モニタ２１０９、オーディオデータ送信部２１１０を有している。ただし、後述のように、オーディオ復号部２１０３は必ずしも実装される必要はない。

なお、図５に図示されているマルチメディア符号化データ再生装置１０００と比較した場合、図５のマルチメディア符号化データ再生装置１０００は、スピーカ１００８から音声を出力する一方、図６に図示されているマルチメディア符号化データ再生伝送装置２００１は、オーディオデータ送信部２１１０を通じてオーディオ再生装置２００２に、オーディオデータを無線伝送するように構成されている点で異なっているが、その他の機能（各ブロックの機能）は基本的に同一である。

一方、図６に図示されているオーディオ再生装置２００２は、オーディオデータ受信部２２０１、オーディオ復号部２２０２、オーディオデータバッファ２２０３、スピーカ２２０４を有している。マルチメディア符号化データ再生伝送装置２００１から送られてくるオーディオデータは、オーディオデータ受信部２２０１で受信された後、オーディオ復号部２２０２による復号処理と、オーディオデータバッファ２２０３によるバッファを経て、スピーカ２２０４から音声出力される。

なお、マルチメディア符号化データ再生伝送装置２００１にオーディオ復号部２１０３が実装されている場合には、オーディオ再生装置２００２にオーディオ復号部２２０２が実装される必要はなく、逆に、オーディオ再生装置２００２にオーディオ復号部２２０２が実装されている場合には、マルチメディア符号化データ再生伝送装置２００１にオーディオ復号部２１０３が実装される必要はない。

例えば、マルチメディア符号化データ再生伝送装置２００１にオーディオ復号部２１０３が実装されている場合には、オーディオ再生装置２００２への無線伝送に伴う遅延やバッファ遅延を考慮した分を加味して、マルチメディア符号化データ再生伝送装置２００１の制御部２１０５でビデオデータやオーディオデータの出力タイミング制御を行うことで、図５に図示されているマルチメディア符号化データ再生装置１０００と同様に、ビデオデータ及びオーディオデータの同期再生を実現することが可能となる。

一方、逆にオーディオ再生装置２００２にオーディオ復号部２２０２が実装されている場合には、上述の特許文献１に開示されている技術のように、マルチメディア符号化データ再生伝送装置２００１及びオーディオ再生装置２００２がそれぞれ参照している基準時刻のずれ量を調べることによってビデオデータの出力タイミングとオーディオデータの出力タイミングとのずれを調整したり、単位時間当たりのオーディオデータバッファ蓄積量の変化度合いから、オーディオ再生装置２００２においてオーディオデータの出力タイミングを制御したりする必要がある。なお、ビデオデータの出力タイミングとオーディオデータの出力タイミングとのずれは、物理的に分離した本体側のマルチメディア符号化データ再生伝送装置２００１の基準動作周波数と、ヘッドフォン側のオーディオ再生装置２００２の基準動作周波数とが異なるために生じる現象である。

また、図８には、従来の技術におけるマルチメディアシステムストリームの代表であるＭＰＥＧ−２（Motion Picture Experts Group - 2）のシステムストリームのデータ構造が図示されている。なお、図８には一例として、ＰＳ（Program Stream：プログラムストリーム）と呼ばれる主に蓄積系メディアに記録される場合に用いられるフォーマットが図示されている。ＭＰＥＧ−２のシステムストリームのデータ構造の別の代表的なフォーマットとしては、ＴＳ（Transport Stream：トランスポートストリーム）が規定されているが、このＴＳは、主に通信や放送系のアプリケーションに利用されるものであり、以下では、蓄積メディアの再生を行うことを想定して、主にＰＳフォーマットについて説明する。

ＰＳは一般的なマルチメディアシステムストリームであり、ビデオデータ、オーディオデータ、時間情報などを含む補助情報が所定の単位量で細分化された後、多重化された構造を有している。ＰＳは、複数の可変長のＰＥＳ（Packetized Elementary Stream）パケットが更に複数連続したＰＳパックにより構成されている。ここで、Elementary Stream（エレメンタリストリーム）はＥＳと呼ばれるビデオ要素データ、オーディオ要素データである。

ＰＳパック内のＰＥＳパケットは、同時刻に再生されるべきオーディオＥＳやビデオＥＳが集まったものである。さらに、ＰＥＳパケット内のヘッダには、スタートコード、ストリームの種類（ビデオ、オーディオ、データ）データ長が含まれており、さらに、ＰＥＳのオプション情報を記述する部分（PES_header_option_data）が用意されている。このオプション情報の中には、ＰＴＳ（ビデオやオーディオの表示又は出力時間）やＤＴＳ（復号開始時間）といった時間を管理する情報が含まれており、ビデオとオーディオの同期再生を実現する指標として用いることが可能となっている。
特開２００４−７１４０号公報（図１、４、７）

上述のように、マルチメディア符号化データの再生の際に、ビデオデータの再生（モニタへの出力）を行うビデオ再生装置とは、物理的に離れた場所に存在するオーディオ再生装置に対して、リアルタイムにオーディオデータを無線伝送することで、ビデオ再生装置におけるビデオ再生と、オーディオ再生装置におけるオーディオ再生との同時再生が行われている。

ところで、最近では公共の場での電波を利用する場合のマナーについて、身体的影響も含め、社会的に問題視されている。特に電車内や病院のような公的機関内での携帯電話の利用は、周囲の人々への騒音や人体への危険性などが懸念されており、事実上の使用制限がかけられている。電波を利用したオーディオデータの送信についても同様のことが当てはまる。したがって、ビデオデータとの同期再生の際に、電波を用いてオーディオデータをリアルタイムに無線伝送することは、各家庭内の閉じられた空間や周囲に影響を及ぼさない空間であれば非常に有効な技術であるが、電波の利用が好ましくない状況においては、あまり好適な技術であるとは言えない。

したがって、ビデオデータとオーディオデータの同期再生の際に、物理的に離れた場所に存在するオーディオ再生装置に対して、電波を利用してリアルタイムにオーディオデータを無線伝送することは、特に、電車の中や公共性の高い施設の中での使用に適していない。すなわち、例えば、上述のブルートゥース（登録商標）や５ＧＨｚ帯又は２．４ＧＨｚ帯を用いた伝送方式などの電波を利用して、リアルタイムにオーディオデータの無線伝送を行うことは、基本的に避ける必要がある。

一方、ヘッドフォンやスピーカにコードが接続していないワイヤレス接続は、ユーザに対して、高い利便性を有する快適な環境を提供することができる。例えば、ワイヤレスな状態を保ちながら、かつ電波を用いずにオーディオデータを無線伝送する技術としては、上述のように、赤外線などの光を利用した無線伝送方式（赤外線無線伝送方式）が有効である。

ビデオデータとオーディオデータの同期再生の際に、物理的に離れた場所に存在するオーディオ再生装置に対して、リアルタイムにオーディオデータを伝送するために光を利用した無線伝送方式を採用した場合、オーディオデータの送信側（図６に図示されているマルチメディア符号化データ再生伝送装置２００１に対応）、及びオーディオデータの受信側（図６に図示されているオーディオ再生装置２００２に対応）の両方に光の送受信を行うための光送受信ユニットを設け、この光送受信ユニットを介して、オーディオデータがリアルタイムに送信されるようにする必要がある。しかしながら、この光送受信ユニットは、電波を利用した送受信ユニットに比べて高価であるという問題、光送受信ユニットは小型化が困難なため、装置（例えば、ＤＶＤプレーヤの本体やヘッドフォン）自体の小型化が妨げられてしまうという問題などが生じる。

上述のように、オーディオデータの無線伝送に電波を用いた場合には、装置のコストの低減化や小型化などを実現することは可能となるが、例えば、電波が人体に与える影響などを始めとして周囲の環境に与える影響を十分に考慮する必要があるという課題が生じる。一方、オーディオデータの無線伝送に光を用いた場合には、電波の利用時に生じる周囲の環境への影響を考慮する必要はなくなるが、光送受信ユニットの設置に伴うコストアップや、装置の大型化や高重量化などによって、利便性が低下するという課題が生じる。これらの課題に鑑みながら、ヘッドフォンやスピーカなどのワイヤレス接続を維持し、マルチメディア符号化データの快適な再生環境を実現することが望ましい。

本発明は、上記の課題を解決するために、ビデオ再生装置とオーディオ再生装置とが物理的に離れた場所に存在し、無線によって接続している状態（ワイヤレス接続状態）の利便性を維持したまま、例えば公共性の高い場所などを始めとする電波使用が制限されている環境においても、簡易な構成によってビデオデータとオーディオデータの同期再生を実現することを可能にするマルチメディア符号化データ分離伝送装置を提供することを目的とする。

上記の目的を達成するため、本発明の第１の態様によれば、ビデオ符号化データと、オーディオ符号化データと、前記各符号化データの再生時間の管理を行うための時間情報を含む補助情報とが多重化されたマルチメディア符号化データが記録されている記録媒体から、前記マルチメディア符号化データを読み出すマルチメディア符号化データ読み出し手段と、
前記マルチメディア符号化データ読み出し手段で読み出された前記マルチメディア符号化データから、前記オーディオ符号化データ及び前記補助情報を分離抽出するマルチメディア符号化データ分離手段と、
前記オーディオ符号化データに係るオーディオ再生が行われるように、前記マルチメディア符号化データ分離手段で分離抽出された前記オーディオ符号化データ及び前記補助情報を再構成するオーディオ再構成手段と、
前記オーディオ再構成手段で再構成された前記オーディオ符号化データ及び前記補助情報を、所定のオーディオ再生装置に送信するデータ送信手段とを、
有するマルチメディア符号化データ分離伝送装置が提供される。

さらに、本発明の第２の態様によれば、上記の本発明の第１の態様において、前記マルチメディア符号化データの再生動作に係る外部からの指示を入力するための操作入力手段と、
前記操作入力手段で入力された前記再生動作に係る再生位置を示す時間情報を含む前記補助情報と、前記再生動作の開始指示を行うための操作情報とを、前記所定のオーディオ再生装置に無線を介して送信する無線信号送信手段と、
前記マルチメディア符号化データに含まれる前記ビデオ符号化データに関し、前記操作入力手段で入力された前記再生動作に係る前記再生位置以降の復号処理を行うビデオ復号手段と、
前記ビデオ復号手段における前記ビデオ符号化データの復号処理によって生成されたビデオデータによる映像を視覚的に表示する映像表示手段とを、
有するマルチメディア符号化データ分離伝送装置が提供される。

本発明は、上記の構成を有しており、ビデオ再生装置とオーディオ再生装置とが物理的に離れた場所に存在し、無線によって接続している状態（ワイヤレス接続状態）を維持したまま、例えば公共性の高い場所などを始めとする電波使用が制限されている環境においても、簡易な構成によってビデオデータとオーディオデータの同期再生を実現し、ワイヤレス接続に係る利便性の維持、装置の低コスト化、装置の小型化や低重量化を可能にするという効果を有している。

以下、本発明を実施するための形態について図面を参照しながら説明する。本発明の実施の形態におけるビデオデータとオーディオデータの同期再生方法は、再生前の準備段階（前工程段階）、実際にユーザが視聴を行う再生段階（後工程段階）の２つの段階に大きく分けられる。

まず、図１を参照しながら、再生前の準備段階である前工程段階について説明する。図１は本発明の実施の形態において、前工程段階に係る処理を行うマルチメディア符号化データ分離伝送装置及びオーディオ再生装置の構成の一例を示すブロック図である。

図１には、マルチメディア符号化データ分離伝送装置１００と、オーディオ再生装置２００とが図示されている。図１に図示されているマルチメディア符号化データ分離伝送装置１００は、マルチメディアストリームバッファ１０１、システムストリーム分離部１０２、オーディオストリームバッファ１０３、補助情報バッファ１０４、オーディオストリーム再構成部１０５、オーディオストリーム送信部１０６を有している。また、図１に図示されているオーディオ再生装置２００は、オーディオストリーム受信部２０１、オーディオストリームバッファ２０２、後工程段階に係る処理を行う後工程処理部２０３を有している。

マルチメディアストリームバッファ１０１は、マルチメディア符号化データを格納することが可能な記憶媒体であり、例えば、このマルチメディア符号化データ分離伝送装置１００の本体がＤＶＤプレーヤであればＤＶＤディスクに相当し、携帯電話機やＰＤＡ（Personal Digital Assistance）を始めとするマルチメディア再生機能を有する情報端末であれば、ＨＤＤ（Hard Disc Drive：ハードディスクドライブ）や半導体メモリなどに相当する。なお、ここでは、ユーザが視聴を所望するコンテンツに係るマルチメディアシステムストリームが、このマルチメディアストリームバッファ１０１にあらかじめ格納されているものとする。

一般に、マルチメディア符号化データはビデオデータとオーディオデータ、更にはコンテンツの内容を符号化した情報や、コンテンツ識別情報、その他の補助情報（特に、時間情報及び属性情報を含む）によって構成されており、それぞれ個別の符号化方式に従って情報圧縮された後（情報圧縮されない場合もある）、それぞれが多重化されてシステムストリーム（マルチメディアシステムストリーム）が生成される。したがって、ビデオ符号化データやオーディオ符号化データを復号する際には、あらかじめシステムストリームからそれぞれの要素（エレメンタリストリーム）が分離抽出される必要がある。

マルチメディアストリームバッファ１０１から読み出されたシステムストリームは、システムストリーム分離部１０２において、オーディオストリームと、システムストリームに付随する補助情報（特に、時間情報及び属性情報を含む）とに分離される。システムストリーム分離部１０２における分離後、オーディオストリームはオーディオストリームバッファ１０３に、補助情報は補助情報バッファ１０４にそれぞれ格納される。

オーディオストリームの伝送先となるオーディオ再生装置２００では、単にシステムストリーム分離部１０２で分離されたオーディオストリームのみが提供されても再生を行うことはできない。すなわち、オーディオ再生装置２００でオーディオストリームの再生を行う場合には、このオーディオストリームに付随するコンテンツの情報や再生時間管理を行うための補助情報が必要である。そこで、マルチメディア符号化データ分離伝送装置１００のオーディオストリーム再構成部１０５は、オーディオストリームバッファ１０３に格納されているオーディオストリームに、補助情報バッファ１０４に格納されている補助情報を多重化して、新たなオーディオストリームを再構成する。なお、再構成されたオーディオストリームは、オーディオ再生装置２００で再生可能な状態に生成される。

オーディオストリーム再構成部１０５で再構成されたオーディオストリームは、オーディオストリーム送信部１０６を通じて、マルチメディア符号化データ分離伝送装置１００から物理的に離れたオーディオ再生装置２００に伝送される。なお、マルチメディア符号化データ分離伝送装置１００からオーディオ再生装置２００へのオーディオストリームの伝送方式は、特に限定されるものではなく、例えばＵＳＢ（Universal Serial Bus）を介した有線伝送や、赤外光や電波を用いた無線伝送などを採用することが可能である。また、例えばオーディオストリーム再構成部１０５で再構成されたオーディオストリームが可搬性の記憶媒体に格納され、この可搬性の記憶媒体の着脱によって、マルチメディア符号化データ分離伝送装置１００からオーディオ再生装置２００に、再構成されたオーディオストリームが移動されてもよい。

一方、例えば、オーディオストリーム送信部１０６から送信されたオーディオストリームは、オーディオ再生装置２００のオーディオストリーム受信部２０１で受信され、オーディオ再生装置２００内に設けられているオーディオストリームバッファ２０２に格納されて、再生前の準備（前工程段階）が終了となる。なお、オーディオストリームバッファ２０２に格納された、再構成されたオーディオストリームは、後工程段階の際に後工程処理部２０３で再生処理されるが、後工程処理部２０３に関しては後で詳述する。

以上のように、前工程段階では、マルチメディア符号化データ分離伝送装置１００において、マルチメディア符号化データからオーディオストリーム及び補助情報がいったん分離された後、オーディオストリームに補助情報が多重化されて、ビデオストリームを除いた状態でオーディオストリームが再構成される。そして、この再構成されたオーディオストリームが、オーディオ再生装置２００にあらかじめ格納される。前工程段階において、再構成されたオーディオストリームがオーディオ再生装置２００にあらかじめ格納されることにより、実際の再生処理（後述の後工程段階）の際には、マルチメディア符号化データ分離伝送装置１００からオーディオ再生装置２００に、オーディオデータがリアルタイムで伝送される必要がなくなる。

次に、実際にユーザが視聴を行う再生段階である後工程段階について説明する。図２は本発明の実施の形態において、後工程段階に係る処理を行うマルチメディア符号化データ再生装置の構成の一例を示すブロック図である。

図２に図示されている分離型マルチメディア符号化データ再生装置は、マルチメディア符号化データ再生装置３００と、オーディオ再生装置２００とを有している。図２に図示されているマルチメディア符号化データ再生装置３００は、マルチメディアストリームバッファ３０１、システムストリーム分離部３０２、補助情報抽出部３０３、ビデオ復号部３０４、制御部３０５、補助情報／操作情報送信部３０６、ビデオデータバッファ３０７、モニタ３０８を有している。なお、マルチメディア符号化データ再生装置３００は、モニタ３０８から映像出力を行うことが可能なビデオ再生装置である。

一方、図２に図示されているオーディオ再生装置２００は、図１に図示されているオーディオ再生装置２００と同一であり、オーディオストリームバッファ２０２に、再構成されたオーディオストリームが格納されている。また、図２には、再構成されたオーディオストリームの再生処理を行うためのオーディオ再生装置２００の構成要素（図１に図示されている後工程処理部２０３）の詳細に関しても図示されている。すなわち、図２に図示されているオーディオ再生装置２００は、オーディオストリーム受信部２０１、オーディオストリームバッファ２０２、補助情報／操作情報受信部２０４、制御部２０５、オーディオ復号部２０６、オーディオデータバッファ２０７、スピーカ２０８を有している。

なお、図１に図示されているマルチメディア符号化データ分離伝送装置１００と、図２に図示されているマルチメディア符号化データ再生装置３００とは同一の装置で実現されることが好ましいが、異なる装置によって実現されてもよい。

すなわち、例えば、図７に図示されている本体装置３００１によって、図２に図示されているマルチメディア符号化データ再生装置３００を実現し、図７に図示されているヘッドフォン３００２によって、図２に図示されているオーディオ再生装置２００を実現した場合、図１に図示されているマルチメディア符号化データ分離伝送装置１００の機能を、本体装置３００１に設けて、図１に図示されているマルチメディア符号化データ分離伝送装置１００と、図２に図示されているマルチメディア符号化データ再生装置３００の両方の機能を１つの装置によって実現することが好ましい。しかしながら、例えば、図１に図示されているマルチメディア符号化データ分離伝送装置１００を、固定型のＤＶＤプレーヤやＰＣ（Personal Computer：パーソナルコンピュータ）などによって実現する一方、本体装置３００１には、図２に図示されているマルチメディア符号化データ再生装置３００の機能のみを設けることも可能である。この場合には、ユーザは固定型のＤＶＤプレーヤやＰＣでオーディオデータの再構成を行い、この再構成されたオーディオデータが、オーディオ再生装置２００にあらかじめ格納されるとともに、図７に図示されている本体装置３００１を用いてオーディオ再生装置２００の再生制御が行われる。

図２に図示されているマルチメディア符号化データ再生装置３００において、例えば、ユーザの操作によってコンテンツの再生指示が行われた場合には、まず、再生対象のコンテンツに係るマルチメディア符号化データが、マルチメディアストリームバッファ３０１から読み出される。なお、再生対象のコンテンツは、上述のように、図１に図示されているマルチメディア符号化データ分離伝送装置１００によって再構成処理が行われており、そのコンテンツに係る再構成されたオーディオデータは、既にオーディオ再生装置２００に格納されているものとする。

システムストリーム分離部３０２は、マルチメディアストリームバッファ３０１からシステムストリームを読み込んで分離処理を行い、システムストリーム内に記述されているビデオ・オーディオ同期再生用の補助情報を含むデータを補助情報抽出部３０３に出力する一方、ビデオストリームをビデオ復号部３０４に出力する。

ビデオ復号部３０４は、システムストリーム分離部３０２で分離されたビデオストリームを、ビデオ１フレーム分の各々の画素データを表現する輝度信号と色差信号に変換するなどのビデオ復号処理を行って、処理後のビデオデータをフレームバッファなどのビデオデータバッファ３０７に出力する。ビデオデータはいったんビデオデータバッファ３０７に格納された後、制御部３０５からの出力命令に従ってモニタ３０８に伝送され、モニタ３０８を通じて映像出力される。

一方、補助情報抽出部３０３は、システムストリーム分離部３０２で分離された補助情報を含むデータから、コンテンツを識別するためのコンテンツ識別情報や、再生時の位置を示す時間情報などの同期再生に必要な情報を抽出して補助情報とし、この補助情報を補助情報／操作情報送信部３０６に供給する。補助情報／操作情報送信部３０６は、制御部３０５からの指示に従って、コンテンツ識別情報や再生すべきデータの位置などを示す時間情報が含まれる補助情報、ユーザによる動作指示などが含まれる操作情報をオーディオ再生装置２００に送信する。なお、補助情報には、例えば、上述のようにシステムストリーム内の時間情報や、コンテンツを識別するコンテンツ識別情報が含まれている。また、操作情報の一例は、例えば、再生開始／再生停止の指示や特殊再生の開始／停止の指示などの指示情報である。なお、本明細書では、再生開始／再生停止や特殊再生の開始／停止などを含め、その他の様々なコンテンツの再生に係る動作を再生動作と呼ぶ。また、補助情報／操作情報送信部３０６は、上記の補助情報と操作情報とを１つの情報にまとめて、オーディオ再生装置２００に送信してもよい。

例えば、マルチメディア符号化データ再生装置３００に設けられている操作パネル（図２には不図示）などを用いてユーザが操作入力を行った場合、この操作内容を示す操作情報が制御部３０５を通じて補助情報／操作情報送信部３０６に供給されるとともに、この操作情報に関連する補助情報が補助情報抽出部３０３から読み出されて、補助情報／操作情報送信部３０６を通じてオーディオ再生装置２００に送信される。

マルチメディア符号化データ再生装置３００の補助情報／操作情報送信部３０６から送信された補助情報や操作情報は、オーディオ再生装置２００の補助情報／操作情報受信部２０４で受信され、制御部２０５に送られる。例えば、補助情報として、再生すべきコンテンツを識別するコンテンツ識別情報や再生すべきコンテンツの再生開始位置を示す時間情報が含まれており、操作情報として再生開始を指示する情報が含まれている場合には、オーディオ再生装置２００は、この時間情報に対応した位置のオーディオエレメンタリストリームをオーディオストリームバッファ２０２から読み出し、オーディオ復号部２０６で操作情報に応じた復号処理（ここでは通常の再生処理）を行うことにより、オーディオデータは、オーディオデータバッファ２０７を経て、スピーカ２０８より音声出力される。

なお、マルチメディア符号化データ再生装置３００における映像の再生（モニタ３０８による映像表示）と、オーディオ再生装置２００における音声の再生（スピーカ２０８からの音声出力）との同期付けが行われる必要がある。この同期処理は、ビデオデータ復号遅延やフレームバッファ蓄積遅延などによって生じるビデオ系の遅延量と、時間情報の補助情報伝送遅延、オーディオ符号化データ復号遅延、オーディオデータ蓄積遅延などによって生じるオーディオ系の遅延量との関係に従って、マルチメディア符号化データ再生装置３００からオーディオ再生装置２００に対する操作情報の送信タイミング（音声再生指示タイミング）や、映像の再生タイミングを図るためにマルチメディア符号化データ再生装置３００内で伝送されるビデオ再生開始タイミングなどがあらかじめ適切なタイミングに設定されることによって実現される。すなわち、補助情報や操作情報の送信による再生指示のタイミングに加えて、各処理における遅延を考慮した映像及び音声のそれぞれの出力タイミングを設定することにより、映像再生及び音声再生のずれをなくして同期させることが可能となる。

続いて、図３及び図４を参照しながら、図１に図示されているマルチメディア符号化データ分離伝送装置１００において再構成されたオーディオストリーム（すなわち、オーディオ再生装置２００にあらかじめ格納されたオーディオデータ）の構造について説明する。図３は、本発明の実施の形態において、再構成されたオーディオストリームの構造の第１の例を示す図であり、図４は、本発明の実施の形態において、再構成されたオーディオストリームの構造の第２の例を示す図である。

まず、再構成されるオーディオデータには、コンテンツのビデオデータとオーディオデータとの対応を示すためのコンテンツ識別情報（例えばファイル名やプログラム名）に相当する情報が含まれる必要がある。さらに、再構成されるオーディオデータには、所定の単位時間でフレーム化されて符号化されたオーディオストリームの持つフレーム単位又はデータ長単位の位置を示す時間情報が含まれる必要がある。なお、これらの時間情報は、図８に図示されている従来のＰＳのＰＴＳに相当する。再構成されるオーディオデータは、図３に図示されているように、コンテンツの識別を可能とするコンテンツ識別情報に続いて、所定のデータ長単位のオーディオデータ（オーディオＥＳ）と、このオーディオデータの再生出力時間を含む時間情報とが一体となった構造を有することが可能である。

図３に図示されている再構成されたオーディオストリームは、上述のように、フレーム単位又はデータ長単位で時間情報が与えられている構造を有している。なお、オーディオ再生装置２００では、復号処理の前、又は復号処理と同時に、オーディオＥＳのみを抽出する処理を行う必要があるが、その処理量は極めて少なく、オーディオ再生装置２００に与える処理負荷は軽微なものである。

また、図３に図示されているオーディオデータは、所定量のオーディオＥＳに対して時間情報が付加されている一体構造を有しており、オーディオ復号部２０６においてオーディオ再生の時間管理が行われるが、時間情報を含む補助情報（例えば、時間情報及びデータ長）をオーディオＥＳとは分離して、例えば図４に図示されているように、補助情報部分とオーディオ部分とを別データ（別ファイル）としたり、あるいは、分離されている補助情報部分及びオーディオＥＳ部分をそのまま結合して、前半の補助情報部分をオーディオストリームに対するヘッダ部とする構造としたりすることも可能である。この場合には、例えば、オーディオ再生装置２００の制御部２０５が補助情報を読み出して、時間管理を行うことが可能である。

また、マルチメディアストリームバッファ１０１に格納されているオーディオのＰＳが集合したストリームが、マルチメディア符号化データ分離伝送装置１００からオーディオ再生装置２００に伝送されるようにし、オーディオ再生装置２００において、このオーディオのＰＳが集合したストリームを格納することも可能である。この場合、オーディオ再生装置２００の同期再生処理に係る処理負荷は増加するが、マルチメディア符号化データ再生装置３００におけるオーディオストリームの再構成の際の処理負荷が軽減されるため、特に、前工程処理におけるデータ伝送の高速化や、前工程処理に要する時間の短縮化などが期待できる。

次に、本発明に係る後工程処理（ビデオデータ及びオーディオデータの同期再生処理）を含む動作の流れについて説明する。なお、ここでは、既に上述の前工程処理が完了しており、オーディオデータ（オーディオＥＳ）が、時間情報やコンテンツ識別情報などを含む補助情報と共に、オーディオ再生装置２００のオーディオストリームバッファ２０２にあらかじめ格納されているものとする。

例えば、ユーザ操作によってコンテンツの再生命令が供給された場合、マルチメディア符号化データ再生装置３００は、ビデオストリームを復号してモニタ３０８に出力する一方、モニタ３０８における映像出力と同一の時刻に対応している音声がオーディオ再生装置２００のスピーカ２０８から出力されるように、コンテンツ識別情報（どのコンテンツを再生するかを示す情報）、再生中のストリームから抽出された時間情報（コンテンツのどのオーディオＥＳから再生を開始するかを示す情報）、ユーザによって要求された動作を示す操作情報（例えば、通常再生や特殊再生などの動作を示す情報）をオーディオ再生装置２００に送信する。なお、マルチメディア符号化データ再生装置３００からオーディオ再生装置２００に対するコンテンツ識別情報、時間情報、操作情報などを含む補助情報の伝送は、オーディオデータの処理遅延、ビデオデータやオーディオデータの処理遅延、無線伝送の遅延などが考慮された所定のタイミングで行われる。

例えば、あるコンテンツの再生命令が制御部３０５に伝達された場合、制御部３０５はビデオ復号部３０４に復号開始命令を発するとともに、外部のオーディオ再生装置２００に対して、コンテンツ識別情報や時間情報と共に再生開始命令を発信する。また、再生停止命令も同様に、時間情報と共にマルチメディア符号化データ再生装置３００からオーディオ再生装置２００に発信される。これにより、オーディオ再生装置２００のオーディオ再生は、マルチメディア符号化データ再生装置３００におけるビデオ再生と常に同期されるようになる。

上述のように、マルチメディア符号化データ再生装置３００とオーディオ再生装置２００とは物理的に分離された装置であり、基準となる動作周波数が異なるため、それぞれの動作に時間的なずれが生じる可能性がある。一般的に、このずれは装置のクロック精度に依存するものであるが、このずれは微小なものであるため、ユーザがずれを知覚するまでに時間がかかることもある。したがって、最初に再生を開始する際にのみ制御信号を発信して再生開始タイミングを同期させた後は、基本的にそのまま映像と音声とは同期し続けるので、再生終了時までビデオ再生装置及びオーディオ再生装置を自走させることも可能である。

一方、特に、コンテンツの再生時間が長い場合などには、ユーザが知覚できる程度まで、映像と音声との間にずれが生じる可能性がある。このようなずれに対応するため、マルチメディア符号化データ再生装置３００からオーディオ再生装置２００に対して時間情報を定期的に送信し、オーディオ再生装置２００は、同期再生のずれを検知し、マルチメディア符号化データ再生装置３００から定期的に送られてくる時間情報に従って、オーディオ再生の時間管理を行うことも可能である。ずれが検知された場合には、オーディオ再生装置２００は、例えば、従来の技術（特許文献１に開示されている技術）のようにユーザに違和感を与えないように配慮しながら、オーディオデータを適当なサンプル分だけ挿入又は削除することで、定期的にずれの補正を行うことによって、常にビデオとオーディオの同期付けが継続されるようにすることが可能である。

また、ユーザがずれを知覚した段階で、ユーザ自身がずれの補正指示を行うことによって、マルチメディア符号化データ再生装置３００からオーディオ再生装置２００に対して再生開始命令が再度発信され、ビデオとオーディオの同期再生を再設定できるようにすることも可能である。ユーザの操作による同期の再設定は、必要に応じてずれの補正を行うものである。したがって、マルチメディア符号化データ再生装置３００からオーディオ再生装置２００に対する時間情報の送信は、同期再生の再設定が必要な場合のみ行われることとなり、必要最低限の無線伝送によって同期再生を維持することが可能となるという利点を有している。

また、マルチメディア符号化データ再生装置３００からオーディオ再生装置２００への補助情報及び操作情報の送信に、光無線通信ではなく、電波による無線伝送方式を採用してもよい。本発明は、従来の技術のようにリアルタイムでオーディオデータ伝送を行うものではなく、マルチメディア符号化データ再生装置３００とオーディオ再生装置２００との間で、伝送量の極めて少ない制御信号及び応答信号のやり取りが行われるに過ぎず、電波の利用が好ましくないとされる環境下においても、周囲に影響を与える可能性が非常に小さいと言える。

以上、説明したように、本発明によれば、マルチメディア符号化データ再生装置（ビデオ再生装置）とオーディオ再生装置とが物理的に離れた場所に存在し、無線によって接続している状態において、あらかじめマルチメディア符号化データ分離伝送装置で、マルチメディア符号化データからオーディオデータを再構成して、再構成されたオーディオデータをオーディオ再生装置にあらかじめ格納しておき、コンテンツの再生を行う場合には、マルチメディア符号化データ再生装置からオーディオ再生装置に対して、遅延を考慮したタイミングで、再生開始命令（あるいは、その他の操作命令）が無線を介して送信されるようにすることによって、リアルタイムでオーディオデータを無線伝送することなく、ビデオデータとオーディオデータの同期再生を実現することが可能となる。

なお、上述の実施の形態に記載されている構成や動作は一例にすぎず、本発明は、上述の実施の形態の記載に限定されるものではない。また、本発明を説明するために図示されているブロック図の各構成要素は機能を表すものであり、これらの各構成要素は、ハードウェア、ソフトウェア、あるいは、ハードウェアとソフトウェアの組み合わせによって実現可能である。

また、本発明によれば、下記の態様も提供される。

本発明の第３の態様によれば、ビデオ符号化データと、オーディオ符号化データと、前記各符号化データの再生時間の管理を行うための時間情報を含む補助情報とが多重化されたマルチメディア符号化データが記録されている記録媒体から、前記マルチメディア符号化データを読み出すマルチメディア符号化データ読み出し手段と、
前記マルチメディア符号化データ読み出し手段で読み出された前記マルチメディア符号化データから、前記オーディオ符号化データ及び前記補助情報を分離抽出するマルチメディア符号化データ分離手段と、
前記オーディオ符号化データに係るオーディオ再生が行われるように、前記マルチメディア符号化データ分離手段で分離抽出された前記オーディオ符号化データ及び前記補助情報を再構成するオーディオ再構成手段と、
前記オーディオ再構成手段で再構成された前記オーディオ符号化データ及び前記補助情報を、所定のオーディオ再生装置において読み取り可能な記録媒体に格納するデータ格納手段とを、
有するマルチメディア符号化データ分離装置が提供される。

また、本発明の第４の態様によれば、上記の本発明の第１〜３の態様において、前記オーディオ再構成手段は、前記オーディオ符号化データ及び前記補助情報のそれぞれを統合して、統合された前記オーディオ符号化データ及び前記補助情報をそれぞれ別データとするか、あるいは、統合された前記オーディオ符号化データに対して、統合された前記補助情報がヘッダ部として付加された構造のデータを生成することによって、前記オーディオ符号化データ及び前記補助情報の再構成を行うように構成されているマルチメディア符号化データ分離伝送装置又はマルチメディア符号化データ分離装置が提供される。

また、本発明の第５の態様によれば、上記の本発明の第１〜３の態様において、前記オーディオ再構成手段は、前記オーディオ符号化データ及び前記補助情報をＭＰＥＧ−２のプログラムストリームフォーマットによって多重化することによって、前記オーディオ符号化データ及び前記補助情報の再構成を行うように構成されているマルチメディア符号化データ分離伝送装置又はマルチメディア符号化データ分離装置が提供される。

また、本発明の第６の態様によれば、ビデオ符号化データと、オーディオ符号化データと、前記各符号化データの再生時間の管理を行うための時間情報を含む補助情報とが多重化されたマルチメディア符号化データから前記オーディオ符号化データ及び前記補助情報がいったん分離された後、オーディオ符号化データのオーディオ再生が行われるように再構成された前記オーディオ符号化データ及び前記補助情報を格納するデータ格納手段と、
再生動作に係る再生位置を示す時間情報を含む前記補助情報と、前記再生動作の開始指示を行うための操作情報とを、所定のビデオ再生装置から無線を介して受信する無線信号受信手段と、
前記無線信号受信手段で受信した前記補助情報及び前記操作情報に基づいて、前記データ格納手段に格納されている前記オーディオ符号化データに関し、前記再生動作に係る前記再生位置以降の復号処理を行うオーディオ復号手段と、
前記オーディオ復号手段で復号された前記オーディオ符号化データの音声を出力する音声出力手段とを、
有するオーディオ再生装置が提供される。

また、本発明の第７の態様によれば、上記の本発明の第６の態様において、前記無線信号受信手段が、赤外線を用いた光無線伝送によって無線信号の伝送を行うように構成されているオーディオ再生装置が提供される。

また、本発明の第８の態様によれば、ビデオ符号化データと、オーディオ符号化データと、前記各符号化データの再生時間の管理を行うための時間情報を含む補助情報とが多重化されたマルチメディア符号化データが記録されている記録媒体から、前記マルチメディア符号化データを読み出すマルチメディア符号化データ読み出し手段と、
前記マルチメディア符号化データの再生動作に係る外部からの指示を入力するための操作入力手段と、
前記操作入力手段で入力された前記再生動作に係る再生位置を示す時間情報を含む前記補助情報と、前記再生動作の開始指示を行うための操作情報とを、前記マルチメディア符号化データに含まれる前記オーディオ符号化データがあらかじめ格納されている所定のオーディオ再生装置に無線を介して送信する無線信号送信手段と、
前記マルチメディア符号化データに含まれる前記ビデオ符号化データに関し、前記操作入力手段で入力された前記再生動作に係る前記再生位置以降の復号処理を行うビデオ復号手段と、
前記ビデオ復号手段における前記ビデオ符号化データの復号処理によって生成されたビデオデータによる映像を視覚的に表示する映像表示手段と、
前記無線信号送信手段による前記補助情報及び前記操作情報の送信に基づくタイミングで、前記操作入力手段で入力された前記再生動作に係る前記再生位置以降の映像出力を開始するように制御するビデオ再生制御手段とを、
有するビデオ再生装置が提供される。

また、本発明の第９の態様によれば、上記の本発明の第８の態様において、前記無線信号送信手段が、赤外線を用いた光無線伝送によって無線信号の伝送を行うように構成されているビデオ再生装置が提供される。

本発明は、ビデオ再生装置とオーディオ再生装置とが物理的に離れた場所に存在し、無線によって接続している状態を維持したまま、例えば公共性の高い場所などを始めとする電波使用が制限されている環境においても、簡易な構成によってビデオデータとオーディオデータの同期再生を実現し、ワイヤレス接続に係る利便性の維持、装置の低コスト化、装置の小型化や低重量化を可能にするという効果を有しており、物理的に離れた状態にあるビデオ再生装置及びオーディオ再生装置において、１つのマルチメディア符号化データに含まれるビデオデータ及びオーディオデータの同期再生を可能とするための技術に適用可能である。

本発明の実施の形態において、前工程段階に係る処理を行うマルチメディア符号化データ分離伝送装置及びオーディオ再生装置の構成の一例を示すブロック図である。 本発明の実施の形態において、後工程段階に係る処理を行うマルチメディア符号化データ再生装置の構成の一例を示すブロック図である。 本発明の実施の形態において、再構成されたオーディオストリームの構造の第１の例を示す図である。 本発明の実施の形態において、再構成されたオーディオストリームの構造の第２の例を示す図である。 従来の技術に係るマルチメディア符号化データ再生装置の一例を示すブロック図である。 従来の技術に係る分離型マルチメディア符号化データ再生装置の一例を示すブロック図である。 従来の技術に係る分離型マルチメディア符号化データ再生装置の一例を示す外観図である。 従来の技術におけるマルチメディアシステムストリームの代表であるＭＰＥＧ−２のシステムストリームのデータ構造の一例を示す図である。

符号の説明

１００ マルチメディア符号化データ分離伝送装置
１０１、３０１、１００１、２１０１ マルチメディアストリームバッファ
１０２、３０２、１００２、２１０２ システムストリーム分離部
１０３、２０２ オーディオストリームバッファ
１０４ 補助情報バッファ
１０５ オーディオストリーム再構成部
１０６ オーディオストリーム送信部
２００、２００２ オーディオ再生装置
２０１ オーディオストリーム受信部
２０３ 後工程処理部
２０４ 補助情報／操作情報受信部
２０５、３０５、１００５、２１０５ 制御部
２０６、１００３、２１０３、２２０２ オーディオ復号部
２０７、１００６、２１０６、２２０３ オーディオデータバッファ
２０８、１００８、２２０４ スピーカ
３００、１０００ マルチメディア符号化データ再生装置
３０３ 補助情報抽出部
３０４、１００４、２１０４ ビデオ復号部
３０６ 補助情報／操作情報送信部
３０７、１００７、２１０７ ビデオデータバッファ
３０８、１００９、２１０９ モニタ
２００１ マルチメディア符号化データ再生伝送装置
２１１０ オーディオデータ送信部
２２０１ オーディオデータ受信部
３００１ 本体装置
３００２ ヘッドフォン

Claims (2)

1. ビデオ符号化データと、オーディオ符号化データと、前記各符号化データの再生時間の管理を行うための時間情報を含む補助情報とが多重化されたマルチメディア符号化データが記録されている記録媒体から、前記マルチメディア符号化データを読み出すマルチメディア符号化データ読み出し手段と、
   前記マルチメディア符号化データ読み出し手段で読み出された前記マルチメディア符号化データから、前記オーディオ符号化データ及び前記補助情報を分離抽出するマルチメディア符号化データ分離手段と、
   前記オーディオ符号化データに係るオーディオ再生が行われるように、前記マルチメディア符号化データ分離手段で分離抽出された前記オーディオ符号化データ及び前記補助情報を再構成するオーディオ再構成手段と、
   前記オーディオ再構成手段で再構成された前記オーディオ符号化データ及び前記補助情報を、所定のオーディオ再生装置に送信するデータ送信手段とを、
   有するマルチメディア符号化データ分離伝送装置。
2. 前記マルチメディア符号化データの再生動作に係る外部からの指示を入力するための操作入力手段と、
   前記操作入力手段で入力された前記再生動作に係る再生位置を示す時間情報を含む前記補助情報と、前記再生動作の開始指示を行うための操作情報とを、前記所定のオーディオ再生装置に無線を介して送信する無線信号送信手段と、
   前記マルチメディア符号化データに含まれる前記ビデオ符号化データに関し、前記操作入力手段で入力された前記再生動作に係る前記再生位置以降の復号処理を行うビデオ復号手段と、
   前記ビデオ復号手段における前記ビデオ符号化データの復号処理によって生成されたビデオデータによる映像を視覚的に表示する映像表示手段とを、
   有する請求項１に記載のマルチメディア符号化データ分離伝送装置。