JPH0787124A - データ多重化装置及び分離装置 - Google Patents
データ多重化装置及び分離装置Info
- Publication number
- JPH0787124A JPH0787124A JP17605493A JP17605493A JPH0787124A JP H0787124 A JPH0787124 A JP H0787124A JP 17605493 A JP17605493 A JP 17605493A JP 17605493 A JP17605493 A JP 17605493A JP H0787124 A JPH0787124 A JP H0787124A
- Authority
- JP
- Japan
- Prior art keywords
- data
- video
- cell
- buffer memory
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
- Use Of Switch Circuits For Exchanges And Methods Of Control Of Multiplex Exchanges (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【目的】 ＡＴＭネットワーク対応の音声・映像データ
多重化に際して、効率良く多重化を行う。 【構成】 映像信号は映像符号化部１で符号化され、バ
ッファメモリ４とＡＡＬ処理部６とによりＡＴＭセル化
される。このとき、受信側における音声・映像の同期制
御用に、メモリ４の遅延情報Ｄを遅延検出部１０で検出
し遅延情報多重部１１で予め定めたタイムスロットにこ
の情報Ｄを付加する。音声信号は符号化部２で符号化さ
れ、ＡＡＬ処理部７でＡＴＭセル化される。両ＡＴＭセ
ルはセル多重部８で音声用ＡＴＭセルを優先して多重化
され送出される。 【効果】 映像・音声の両セルが効率良く多重化され、
空きセルが生じれば、この部分は他の情報伝送に使用で
きる。また、映像データの送信側での遅延情報Ｄを基に
両データの同期制御ができる。
多重化に際して、効率良く多重化を行う。 【構成】 映像信号は映像符号化部１で符号化され、バ
ッファメモリ４とＡＡＬ処理部６とによりＡＴＭセル化
される。このとき、受信側における音声・映像の同期制
御用に、メモリ４の遅延情報Ｄを遅延検出部１０で検出
し遅延情報多重部１１で予め定めたタイムスロットにこ
の情報Ｄを付加する。音声信号は符号化部２で符号化さ
れ、ＡＡＬ処理部７でＡＴＭセル化される。両ＡＴＭセ
ルはセル多重部８で音声用ＡＴＭセルを優先して多重化
され送出される。 【効果】 映像・音声の両セルが効率良く多重化され、
空きセルが生じれば、この部分は他の情報伝送に使用で
きる。また、映像データの送信側での遅延情報Ｄを基に
両データの同期制御ができる。
Description
【０００１】
【産業上の利用分野】本発明はデータ多重化装置及び分
離装置に関し、特にＡＴＭ（Asynchronous Transfer Mo
de) 通信システムに対応したマルチメディア方式におけ
る音声・映像符号データの多重化装置及び分離装置に関
する。
離装置に関し、特にＡＴＭ（Asynchronous Transfer Mo
de) 通信システムに対応したマルチメディア方式におけ
る音声・映像符号データの多重化装置及び分離装置に関
する。
【０００２】
【従来の技術】従来のマルチメディア方式における音声
・映像符号化データの多重化装置の概略構成を図４に示
す。図において、入力された映像信号は映像符号化部１
にてディジタルデータ化され、更に必要に応じてデータ
圧縮処理されてバッファメモリ４へ導出される。
・映像符号化データの多重化装置の概略構成を図４に示
す。図において、入力された映像信号は映像符号化部１
にてディジタルデータ化され、更に必要に応じてデータ
圧縮処理されてバッファメモリ４へ導出される。
【０００３】このとき、映像符号化部１では、バッファ
メモリ４からの送信バッファ占有量ＢＯＣを基に映像符
号化制御部５が出力する符号化制御信号ＶＣＮＴに従っ
て、入力映像信号の符号化がなされる。
メモリ４からの送信バッファ占有量ＢＯＣを基に映像符
号化制御部５が出力する符号化制御信号ＶＣＮＴに従っ
て、入力映像信号の符号化がなされる。
【０００４】この符号化された映像データはバッファメ
モリ４へ入力されて一時蓄えられた後、多重化部９から
の読出し要求信号ＶＲＣＮＴに従って読出される。
モリ４へ入力されて一時蓄えられた後、多重化部９から
の読出し要求信号ＶＲＣＮＴに従って読出される。
【０００５】一方、音声符号化部２では、入力音声信号
がディジタル化されて符号化され、映像符号化データと
同様に、多重化部９から出力される読出し要求信号ＡＲ
ＣＮＴに従って出力される。
がディジタル化されて符号化され、映像符号化データと
同様に、多重化部９から出力される読出し要求信号ＡＲ
ＣＮＴに従って出力される。
【０００６】多重化部９では、読出し要求信号ＶＲＣＮ
Ｔ及びＡＲＣＮＴを基に、一定周期Ｔ内において一定の
タイムスロット（ＴＶ，ＴＡ：図５参照）に、映像，音
声の各符号化データが多重化される。
Ｔ及びＡＲＣＮＴを基に、一定周期Ｔ内において一定の
タイムスロット（ＴＶ，ＴＡ：図５参照）に、映像，音
声の各符号化データが多重化される。
【０００７】但し、映像符号化データの発生情報量は時
間と共に変化するものであるから、符号化データ損失を
なくすためには、映像符号化データに割当てられるタイ
ムスロット数を、図５のＴＶ時間内にバッファメモリ４
から出力される最大情報量に設定する必要がある。
間と共に変化するものであるから、符号化データ損失を
なくすためには、映像符号化データに割当てられるタイ
ムスロット数を、図５のＴＶ時間内にバッファメモリ４
から出力される最大情報量に設定する必要がある。
【０００８】その結果、ＴＶ間の映像符号化データの発
生情報量が少なく、割当てられたタイムスロットに満た
ない場合には、図６に示す如く、ダミーデータを多重化
部９にて挿入する様になっている。
生情報量が少なく、割当てられたタイムスロットに満た
ない場合には、図６に示す如く、ダミーデータを多重化
部９にて挿入する様になっている。
【０００９】従来のこの様なデータ多重化方式では、図
６に示す様にダミーデータを挿入する必要があり、ＡＴ
Ｍネットワークのように一定長のセル型式でデータを伝
送しようとする場合、図７に示す如くダミーデータもセ
ル化して伝送する必要がある。 従って、本来ならばこ
のダミーデーダセルの部分は、他のデータを伝送するた
めに用いることができるにもかかわらず、使用できない
ことになり、伝送効率が悪くなるという欠点がある。
６に示す様にダミーデータを挿入する必要があり、ＡＴ
Ｍネットワークのように一定長のセル型式でデータを伝
送しようとする場合、図７に示す如くダミーデータもセ
ル化して伝送する必要がある。 従って、本来ならばこ
のダミーデーダセルの部分は、他のデータを伝送するた
めに用いることができるにもかかわらず、使用できない
ことになり、伝送効率が悪くなるという欠点がある。
【００１０】また、セル化された各映像符号化データは
バッファメモリ４の作用により当然遅延を受けることに
なるが、その遅延がどの程度であるかという情報は、図
４の構成では全く生成され出力されないので、受信側に
おいて映像符号化データのバッファメモリを含めた伝搬
遅延時間を一定にする制御が実行できないことになる。
バッファメモリ４の作用により当然遅延を受けることに
なるが、その遅延がどの程度であるかという情報は、図
４の構成では全く生成され出力されないので、受信側に
おいて映像符号化データのバッファメモリを含めた伝搬
遅延時間を一定にする制御が実行できないことになる。
【００１１】従って、音声符号化データの伝搬遅延は一
定であるのに対して、映像符号化データの遅延を一定に
することができず、その結果、映像と音声との同期（リ
ップシンク）が一定に維持できないという欠点がある。
定であるのに対して、映像符号化データの遅延を一定に
することができず、その結果、映像と音声との同期（リ
ップシンク）が一定に維持できないという欠点がある。
【００１２】特に、映像の符号化方式がＣＢＲ（Consta
nt Bit Rate ）形式であれば、バッファメモリの占有量
と遅延時間との間には一対一の対応関係があるために、
これを基にバッファメモリ制御を行って映像符号化デー
タの伝搬遅延時間を一定に保つことで、音声と映像との
間の同期（リップシンク）を合わせることができる。
nt Bit Rate ）形式であれば、バッファメモリの占有量
と遅延時間との間には一対一の対応関係があるために、
これを基にバッファメモリ制御を行って映像符号化デー
タの伝搬遅延時間を一定に保つことで、音声と映像との
間の同期（リップシンク）を合わせることができる。
【００１３】しかしながら、ＶＢＲ（Variable Bit Rat
e ）形式の映像符号化データを用いる場合には、上記の
バッファメモリの占有量と遅延時間との間の対応関係が
成立しなくなり、映像符号化データの伝搬遅延時間を一
定に保つことができず、よって、上述した如く、音声と
映像との間の同期を一定に合わせることができないとい
う問題があるのである。
e ）形式の映像符号化データを用いる場合には、上記の
バッファメモリの占有量と遅延時間との間の対応関係が
成立しなくなり、映像符号化データの伝搬遅延時間を一
定に保つことができず、よって、上述した如く、音声と
映像との間の同期を一定に合わせることができないとい
う問題があるのである。
【００１４】本発明の目的は、音声データと映像データ
とを効率良く多重化してＡＴＭ通信システムに対応した
マルチメディア通信に好適なデータ多重化装置及びその
分離装置を提供することである。
とを効率良く多重化してＡＴＭ通信システムに対応した
マルチメディア通信に好適なデータ多重化装置及びその
分離装置を提供することである。
【００１５】本発明の他の目的は、音声データと映像デ
ータとをセル化して多重化する場合に受信側で両データ
の同期を一定に維持できるようにしたデータ多重化装置
及びその分離装置を提供することである。
ータとをセル化して多重化する場合に受信側で両データ
の同期を一定に維持できるようにしたデータ多重化装置
及びその分離装置を提供することである。
【００１６】
【課題を解決するための手段】本発明によるデータ多重
化装置は、映像信号を符号化する映像符号化手段と、こ
の映像符号化出力を一時格納するバッファメモリと、前
記バッファメモリの格納データを一定長の映像データ毎
に読出す読出し制御手段と、この読出された映像データ
が前記バッファメモリを介することにより遅延する遅延
時間を検出する遅延検出手段と、この検出された遅延時
間情報を前記バッファメモリの読出しデータに多重化す
る手段と、この多重化出力である映像データの各々に対
してヘッダやトレイラ等の付加情報を付加してセル化し
て導出する映像セル化手段と、音声信号を符号化する音
声符号化手段と、この音声符号化出力を前記一定長の音
声データ毎にヘッダやトレイラ等の付加情報を付加して
セル化して導出する音声セル化手段と、これ等映像セル
と音声セルとを多重化して送出するセル多重化手段とを
含むことを特徴とする。
化装置は、映像信号を符号化する映像符号化手段と、こ
の映像符号化出力を一時格納するバッファメモリと、前
記バッファメモリの格納データを一定長の映像データ毎
に読出す読出し制御手段と、この読出された映像データ
が前記バッファメモリを介することにより遅延する遅延
時間を検出する遅延検出手段と、この検出された遅延時
間情報を前記バッファメモリの読出しデータに多重化す
る手段と、この多重化出力である映像データの各々に対
してヘッダやトレイラ等の付加情報を付加してセル化し
て導出する映像セル化手段と、音声信号を符号化する音
声符号化手段と、この音声符号化出力を前記一定長の音
声データ毎にヘッダやトレイラ等の付加情報を付加して
セル化して導出する音声セル化手段と、これ等映像セル
と音声セルとを多重化して送出するセル多重化手段とを
含むことを特徴とする。
【００１７】本発明によるデータ分離装置は、前記セル
多重化手段は、前記音声セルと前記映像セルとが同時に
発生したことを検出して同時発生検出信号を生成する手
段を有し、前記バッファメモリ手段は、その格納データ
量が零になったことを検出して零検出信号を生成する手
段を有し、前記映像セル化手段は、前記セル化のための
付加情報を挿入するタイムスロット期間付加情報挿入信
号を生成する手段を有し、前記読出し制御手段は、前記
同時発生検出信号、前記零検出信号及び前記付加情報挿
入信号が少なくとも１つ発生されたときに前記バッファ
メモリからのデータ読出しを停止制御するよう構成され
ていることを特徴とする。
多重化手段は、前記音声セルと前記映像セルとが同時に
発生したことを検出して同時発生検出信号を生成する手
段を有し、前記バッファメモリ手段は、その格納データ
量が零になったことを検出して零検出信号を生成する手
段を有し、前記映像セル化手段は、前記セル化のための
付加情報を挿入するタイムスロット期間付加情報挿入信
号を生成する手段を有し、前記読出し制御手段は、前記
同時発生検出信号、前記零検出信号及び前記付加情報挿
入信号が少なくとも１つ発生されたときに前記バッファ
メモリからのデータ読出しを停止制御するよう構成され
ていることを特徴とする。
【００１８】
【実施例】以下、本発明の実施例を図面を用いて詳述す
る。
る。
【００１９】図１は本発明の実施例のデータ多重化装置
のシステムブロック図であり、図２はその動作を示すタ
イミングチャートである。
のシステムブロック図であり、図２はその動作を示すタ
イミングチャートである。
【００２０】映像符号化部１において、バッファメモリ
４からの送信バッファ占有量ＢＯＣを基に映像符号化制
御部３が出力する符号化制御信号ＶＣＮＴに従って、入
力映像信号が符号化される。この符号化はディジタル化
の他に、更に必要に応じてデータ圧縮処理も含むものと
する。
４からの送信バッファ占有量ＢＯＣを基に映像符号化制
御部３が出力する符号化制御信号ＶＣＮＴに従って、入
力映像信号が符号化される。この符号化はディジタル化
の他に、更に必要に応じてデータ圧縮処理も含むものと
する。
【００２１】符号化データは、符号化制御信号と共に、
予め定められたフレーム構造（以後映像フレームと呼
ぶ）に多重化され、バッファメモリ４に出力される。
予め定められたフレーム構造（以後映像フレームと呼
ぶ）に多重化され、バッファメモリ４に出力される。
【００２２】バッファメモリ４からは、バッファメモリ
読出し制御部５からの読出し制御信号ＶＲＣＮＴに従っ
て、映像フレームデータがセル単位にＶＢＲ（Variable
BitRate)形式で読出される（バッファメモリの読出し
制御の詳細は後に説明する）。
読出し制御部５からの読出し制御信号ＶＲＣＮＴに従っ
て、映像フレームデータがセル単位にＶＢＲ（Variable
BitRate)形式で読出される（バッファメモリの読出し
制御の詳細は後に説明する）。
【００２３】また、各映像フレームデータのバッファメ
モリ４により生じた遅延時間を遅延検出部１０により検
出し、その遅延情報Ｄを対応する画像フレーム毎に、遅
延情報多重部１１において、予め定められたタイムスロ
ットに多重する。この情報を受信側で用いることによ
り、映像符号化データのバッファメモリを含めた伝搬遅
延時間を一定にすることができる。
モリ４により生じた遅延時間を遅延検出部１０により検
出し、その遅延情報Ｄを対応する画像フレーム毎に、遅
延情報多重部１１において、予め定められたタイムスロ
ットに多重する。この情報を受信側で用いることによ
り、映像符号化データのバッファメモリを含めた伝搬遅
延時間を一定にすることができる。
【００２４】この遅延時間の検出方法としては、例えば
各フレームの先頭を示すユニークワードをバッファメモ
リ４の入出力にて検出した時間の差を遅延情報Ｄとする
ことで検出できる。
各フレームの先頭を示すユニークワードをバッファメモ
リ４の入出力にて検出した時間の差を遅延情報Ｄとする
ことで検出できる。
【００２５】ＡＡＬ（ＡＴＭ Adaptation Layer) （Ｖ
ＢＲ）処理部６では、セル単位に読出された映像フレー
ムデータに、ＡＡＬのヘッダ・トレイラ等の付加情報を
付けてセル多重部８へ出力する。尚、このＡＡＬ処理部
６はＣＣＩＴＴ勧告、Ｉ．３６２，Ｉ．３６３に準拠し
た手順でデータを一定長のセルデータとするものであ
る。更に、このＡＡＬ処理部６は上記の付加情報を挿入
するためのタイムスロットの期間を示す信号ＣＬＣＮＴ
（図２（Ａ）参照）を、バッファメモリ読出し制御部５
に出力する。
ＢＲ）処理部６では、セル単位に読出された映像フレー
ムデータに、ＡＡＬのヘッダ・トレイラ等の付加情報を
付けてセル多重部８へ出力する。尚、このＡＡＬ処理部
６はＣＣＩＴＴ勧告、Ｉ．３６２，Ｉ．３６３に準拠し
た手順でデータを一定長のセルデータとするものであ
る。更に、このＡＡＬ処理部６は上記の付加情報を挿入
するためのタイムスロットの期間を示す信号ＣＬＣＮＴ
（図２（Ａ）参照）を、バッファメモリ読出し制御部５
に出力する。
【００２６】一方、音声符号化部２では、音声信号をデ
ィジタル符号化し、その符号化データを、ＡＡＬ（ＣＢ
Ｒ）処理部９から出力されるサンプリングクロック周期
で来る読出し要求信号ＡＲＣＮＴに従って出力する。
ィジタル符号化し、その符号化データを、ＡＡＬ（ＣＢ
Ｒ）処理部９から出力されるサンプリングクロック周期
で来る読出し要求信号ＡＲＣＮＴに従って出力する。
【００２７】この音声符号化データに対して、ＡＡＬ
（ＣＢＲ）処理部７で、映像の時と同様にセル化のため
の付加情報が付けられ、セル多重部８に出力される。こ
のＡＡＬ処理部７も先のＡＡＬ処理部６と同様にＣＣＩ
ＴＴ勧告，Ｉ．３６２，Ｉ．３６３に準拠した手順でデ
ータを一定長のセルデータとする。
（ＣＢＲ）処理部７で、映像の時と同様にセル化のため
の付加情報が付けられ、セル多重部８に出力される。こ
のＡＡＬ処理部７も先のＡＡＬ処理部６と同様にＣＣＩ
ＴＴ勧告，Ｉ．３６２，Ｉ．３６３に準拠した手順でデ
ータを一定長のセルデータとする。
【００２８】ＡＡＬ（ＶＢＲ）処理部６とＡＡＬ（ＣＢ
Ｒ）処理部７から出力される映像・音声のセルＶＣＥＬ
Ｌ，ＡＣＥＬＬ（図２（Ａ）参照）がセル多重部８でセ
ル単位に多重化される。ただし、図２（Ａ）の「Ｖ−
２」と「Ａ−１」の部分のように、ＶＣＥＬＬとＡＣＥ
ＬＬが同時に発生した時には、ＣＢＲ形式であるＡＣＥ
ＬＬを優先とし、ＡＣＥＬＬのセル多重が終了するまで
ＶＣＥＬＬのセル多重を止め、その停止期間を示す信号
ＭＵＸＣＮＴをバッファメモリ読出し制御部５に出力す
る（図２（Ａ）参照）。
Ｒ）処理部７から出力される映像・音声のセルＶＣＥＬ
Ｌ，ＡＣＥＬＬ（図２（Ａ）参照）がセル多重部８でセ
ル単位に多重化される。ただし、図２（Ａ）の「Ｖ−
２」と「Ａ−１」の部分のように、ＶＣＥＬＬとＡＣＥ
ＬＬが同時に発生した時には、ＣＢＲ形式であるＡＣＥ
ＬＬを優先とし、ＡＣＥＬＬのセル多重が終了するまで
ＶＣＥＬＬのセル多重を止め、その停止期間を示す信号
ＭＵＸＣＮＴをバッファメモリ読出し制御部５に出力す
る（図２（Ａ）参照）。
【００２９】上述のバッファメモリ４の読出し制御の詳
細について述べると、バッファメモリ読出し制御部５
が、以下の〜の条件の時に、バッファメモリ４に対
して読出しを止めるようにＶＲＣＮＴ信号を用いて制御
する。
細について述べると、バッファメモリ読出し制御部５
が、以下の〜の条件の時に、バッファメモリ４に対
して読出しを止めるようにＶＲＣＮＴ信号を用いて制御
する。
【００３０】ＢＯＣ信号により送信バッファ占有量が
０になった時、（図２（Ａ）のＢＯＣの所で“０”で示
した部分）。
０になった時、（図２（Ａ）のＢＯＣの所で“０”で示
した部分）。
【００３１】セル化のための付加情報を挿入するため
のタイムスロット期間（図２（Ａ）のＣＬＣＮＴの
“Ｈ”の部分）。
のタイムスロット期間（図２（Ａ）のＣＬＣＮＴの
“Ｈ”の部分）。
【００３２】映像・音声のセルＶＣＥＬＬ・ＡＣＥＬ
Ｌが同時に発生した時（図２の（Ａ）のＶ−２とＡ−１
の期間で、ＭＵＸＣＮＴが“Ｈ”の部分）。
Ｌが同時に発生した時（図２の（Ａ）のＶ−２とＡ−１
の期間で、ＭＵＸＣＮＴが“Ｈ”の部分）。
【００３３】以上の処理を行った結果、図２（Ａ）の出
力セルで示したように、ＶＢＲの形式でセル化したもの
（Ｖ−１，Ｖ−２……）とＣＢＲ形式でセル化したもの
（Ａ−１……）とを、多重化することが可能となる。
力セルで示したように、ＶＢＲの形式でセル化したもの
（Ｖ−１，Ｖ−２……）とＣＢＲ形式でセル化したもの
（Ａ−１……）とを、多重化することが可能となる。
【００３４】また、図２（Ｂ）にセル多重化された例を
示す。この図からも判るように、従来ダミーデータセル
を伝送しなければならなかったセルを（図７参照）、空
セルとして他の情報に使用可能なセルとすることができ
ることになる。
示す。この図からも判るように、従来ダミーデータセル
を伝送しなければならなかったセルを（図７参照）、空
セルとして他の情報に使用可能なセルとすることができ
ることになる。
【００３５】図３は本発明によるセル分離装置のシステ
ムブロック図である。ＶＢＲ形式でセル化された映像符
号化データとＣＢＲ形式でセル化された音声符号化デー
タとが多重化された信号が、セル分離部３１に入力され
る。入力された信号に対して、セル分離部３１でセルヘ
ッダ内の情報を基に映像符号化データのセル（ＶＢＲ形
式）と音声符号化データのセル（ＣＢＲ形式）にセル分
離を行う。
ムブロック図である。ＶＢＲ形式でセル化された映像符
号化データとＣＢＲ形式でセル化された音声符号化デー
タとが多重化された信号が、セル分離部３１に入力され
る。入力された信号に対して、セル分離部３１でセルヘ
ッダ内の情報を基に映像符号化データのセル（ＶＢＲ形
式）と音声符号化データのセル（ＣＢＲ形式）にセル分
離を行う。
【００３６】セル分離部３１により分離された映像符号
化データのセル（ＶＣＥＬＬ）と音声符号化データのセ
ル（ＡＣＥＬＬ）とは、それぞれＡＡＬ（ＶＢＲ）処理
部３２とＡＡＬ（ＣＢＲ）処理部３３に入力される。こ
れ等ＡＡＬ処理部３２，３３は図１におけるＡＡＬ処理
部６，７と同様にＣＣＩＴＴ勧告に準拠した手順の処理
をなす。
化データのセル（ＶＣＥＬＬ）と音声符号化データのセ
ル（ＡＣＥＬＬ）とは、それぞれＡＡＬ（ＶＢＲ）処理
部３２とＡＡＬ（ＣＢＲ）処理部３３に入力される。こ
れ等ＡＡＬ処理部３２，３３は図１におけるＡＡＬ処理
部６，７と同様にＣＣＩＴＴ勧告に準拠した手順の処理
をなす。
【００３７】ＡＡＬ（ＶＢＲ）処理部３２では、入力さ
れたセル信号ＶＣＥＬＬよりＡＡＬのヘッダ・トレイラ
等の付加情報から有効データを分離し、誤配セル・セル
ロスに対する処理等を行う。また、有効データを期間を
示す信号ＶＷＣＮＴを映像バッファメモリ３５に出力す
る。
れたセル信号ＶＣＥＬＬよりＡＡＬのヘッダ・トレイラ
等の付加情報から有効データを分離し、誤配セル・セル
ロスに対する処理等を行う。また、有効データを期間を
示す信号ＶＷＣＮＴを映像バッファメモリ３５に出力す
る。
【００３８】次に、遅延情報分離部３４において、ＡＡ
Ｌ（ＶＢＲ）処理部３２より出力される映像符号化デー
タから、上記のＶＷＣＮＴ信号を基に有効データ部を検
出し（ＡＡＬ（ＶＢＲ）処理部２からの出力信号には、
セルヘッダ等の付加情報が含まれているので、これら付
加情報を除いた真のデータのみ）、さらに送信側で予め
定められたフレーム構造（以後映像フレームと呼ぶ）を
検出し、その映像フレームから、同じく送信側で多重化
された、送信側のバッファメモリにより生じ各映像フレ
ームデータの遅延の情報Ｄを分離する。
Ｌ（ＶＢＲ）処理部３２より出力される映像符号化デー
タから、上記のＶＷＣＮＴ信号を基に有効データ部を検
出し（ＡＡＬ（ＶＢＲ）処理部２からの出力信号には、
セルヘッダ等の付加情報が含まれているので、これら付
加情報を除いた真のデータのみ）、さらに送信側で予め
定められたフレーム構造（以後映像フレームと呼ぶ）を
検出し、その映像フレームから、同じく送信側で多重化
された、送信側のバッファメモリにより生じ各映像フレ
ームデータの遅延の情報Ｄを分離する。
【００３９】映像バッファメモリ３５には、ＡＡＬ（Ｖ
ＢＲ）処理部３２から出力される映像符号化データ（上
記の映像フレームデータと同じ）の内、上記のＶＷＣＮ
Ｔ信号に従って有効データ部のみが書き込まれる。
ＢＲ）処理部３２から出力される映像符号化データ（上
記の映像フレームデータと同じ）の内、上記のＶＷＣＮ
Ｔ信号に従って有効データ部のみが書き込まれる。
【００４０】映像バッファメモリ３５からの読出しにつ
いては、以下の条件を満足したかどうかを映像バッファ
メモリ読出し制御部３６により判断し、満足した時点で
読出しスタート信号ＶＲＳＴを映像バッファメモリ３５
に出力し、読出しをスタートする。
いては、以下の条件を満足したかどうかを映像バッファ
メモリ読出し制御部３６により判断し、満足した時点で
読出しスタート信号ＶＲＳＴを映像バッファメモリ３５
に出力し、読出しをスタートする。
【００４１】すなわち、この条件とは、映像バッファメ
モリ３５から出力されるバッファ占有量ＶＢＯＣが、Ａ
ＴＭネットワークのセル到着遅延が起きてもアンダーフ
ローしないだけの占有量以上有り、かつ上記の送信側の
バッファメモリによる遅延量Ｄと、その遅延量Ｄが多重
化されている映像フレームガ映像バッファメモリ３５に
書き込まれてからの遅延との和が、予め定めた遅延量Ｔ
ＨＶとなった時である。 読出しをスタートした後は、
映像復号部３９からの読出し要求信号ＶＲＲＱを受け
て、随時データを読出して行くことになる。
モリ３５から出力されるバッファ占有量ＶＢＯＣが、Ａ
ＴＭネットワークのセル到着遅延が起きてもアンダーフ
ローしないだけの占有量以上有り、かつ上記の送信側の
バッファメモリによる遅延量Ｄと、その遅延量Ｄが多重
化されている映像フレームガ映像バッファメモリ３５に
書き込まれてからの遅延との和が、予め定めた遅延量Ｔ
ＨＶとなった時である。 読出しをスタートした後は、
映像復号部３９からの読出し要求信号ＶＲＲＱを受け
て、随時データを読出して行くことになる。
【００４２】こうして読出された映像符号化データが映
像復号化部３９で復号化される。上記の処理により、映
像データの送信・受信バッファメモリによる遅延総和は
前記のＴＨＶとなる。
像復号化部３９で復号化される。上記の処理により、映
像データの送信・受信バッファメモリによる遅延総和は
前記のＴＨＶとなる。
【００４３】一方、ＡＡＬ（ＣＢＲ）処理部３３では、
入力されたセル信号ＡＣＥＬＬより、ＡＡＬのヘッダ・
トレイラ等の付加情報から同じく有効データのみを分離
し、誤配セル・セルロスに対する処理等を行う。さら
に、有効データ期間を示す信号ＡＷＣＮＴを音声バッフ
ァメモリ３７に出力する。
入力されたセル信号ＡＣＥＬＬより、ＡＡＬのヘッダ・
トレイラ等の付加情報から同じく有効データのみを分離
し、誤配セル・セルロスに対する処理等を行う。さら
に、有効データ期間を示す信号ＡＷＣＮＴを音声バッフ
ァメモリ３７に出力する。
【００４４】音声バッファメモリには、ＡＡＬ（ＣＢ
Ｒ）処理部３３から出力される音声符号化データの内、
上記のＡＷＣＮＴ信号に従って有効データ部のみが書き
込まれる（ＡＡＬ（ＣＢＲ）処理部３３からの出力信号
にはセルヘッダ等の付加情報が含まれている）。
Ｒ）処理部３３から出力される音声符号化データの内、
上記のＡＷＣＮＴ信号に従って有効データ部のみが書き
込まれる（ＡＡＬ（ＣＢＲ）処理部３３からの出力信号
にはセルヘッダ等の付加情報が含まれている）。
【００４５】音声バッファメモリ３７からの読出しにつ
いては、以下の条件を満足したかどうかを音声バッファ
メモリ読出し制御部３８により判断し、満足した時点で
読出しスタート信号ＡＲＳＴを音声バッファメモリ３７
に出力し、読出しをスタートする。
いては、以下の条件を満足したかどうかを音声バッファ
メモリ読出し制御部３８により判断し、満足した時点で
読出しスタート信号ＡＲＳＴを音声バッファメモリ３７
に出力し、読出しをスタートする。
【００４６】すなわち、その条件とは、音声バッファメ
モリ７から出力されるバッファ占有量ＡＢＯＣが、ＡＴ
Ｍネットワークのセル到着遅延が起きてもアンダーフロ
ーしないだけの占有量αとなった時である。
モリ７から出力されるバッファ占有量ＡＢＯＣが、ＡＴ
Ｍネットワークのセル到着遅延が起きてもアンダーフロ
ーしないだけの占有量αとなった時である。
【００４７】読出しをスタートした後は、音声復号化部
４０からの読出し要求信号ＡＲＲＱを受けて、随時読出
して行くことになる。
４０からの読出し要求信号ＡＲＲＱを受けて、随時読出
して行くことになる。
【００４８】こうして読出された音声符号化データが、
音声復号化部４０で復号化される。上記の処理により、
音声データ系には送信バッファメモリは存在せず、バッ
ファメモリによる遅延は上記の占有量αに対応する遅延
量ＴＨＡとなる。すなわち、バッファメモリ３７のアン
ダーフローが生じない量αだけデータが蓄えられた後に
始めてこのメモリ３７から音声データが読出されるので
あるから、このメモリ３７の遅延量はこの占有量αにな
るまでの時間ＴＨＡに等しい。
音声復号化部４０で復号化される。上記の処理により、
音声データ系には送信バッファメモリは存在せず、バッ
ファメモリによる遅延は上記の占有量αに対応する遅延
量ＴＨＡとなる。すなわち、バッファメモリ３７のアン
ダーフローが生じない量αだけデータが蓄えられた後に
始めてこのメモリ３７から音声データが読出されるので
あるから、このメモリ３７の遅延量はこの占有量αにな
るまでの時間ＴＨＡに等しい。
【００４９】以上の処理により復号された映像・音声デ
ータの遅延差は、ＡＴＭネットワーク内の各セルの到着
遅延変動を除けば、上記のＴＨＶとＴＨＡの差と、それ
ぞれの信号を符号化・復号化するときの処理時間の差の
和となり、この遅延差を復号化部等で補償すれば、映像
と音声信号との間の同期を実質上問題ない程度に合致さ
せることができる。
ータの遅延差は、ＡＴＭネットワーク内の各セルの到着
遅延変動を除けば、上記のＴＨＶとＴＨＡの差と、それ
ぞれの信号を符号化・復号化するときの処理時間の差の
和となり、この遅延差を復号化部等で補償すれば、映像
と音声信号との間の同期を実質上問題ない程度に合致さ
せることができる。
【００５０】
【発明の効果】以上述べた如く、本発明によれば、映像
符号化データのためのＶＢＲ形式セルと音声符号化デー
タのためのＣＢＲ形式セルとが効率良く多重化されるの
で、従来ダミーセルを伝送していたものが空セルとする
ことができ、他の情報の伝送に有効に利用できるという
効果がある。
符号化データのためのＶＢＲ形式セルと音声符号化デー
タのためのＣＢＲ形式セルとが効率良く多重化されるの
で、従来ダミーセルを伝送していたものが空セルとする
ことができ、他の情報の伝送に有効に利用できるという
効果がある。
【００５１】また、受信側のデータ分離部において、音
声と映像との同期合わせ用に、送信側のバッファメモリ
で生じた映像データの遅延情報をも付加して送出するよ
うにしたので、ＶＢＲ形式の映像セルデータとＣＢＲ形
式の音声セルデータとを、互いに同期（リップシンク）
を一定に保って再生することができるという効果があ
る。
声と映像との同期合わせ用に、送信側のバッファメモリ
で生じた映像データの遅延情報をも付加して送出するよ
うにしたので、ＶＢＲ形式の映像セルデータとＣＢＲ形
式の音声セルデータとを、互いに同期（リップシンク）
を一定に保って再生することができるという効果があ
る。
【図１】本発明のデータ多重化装置の実施例を示すブロ
ック図である。
ック図である。
【図２】（Ａ）は図１のブロックの動作タイムチャー
ト、（Ｂ）はＡＴＭセルの多重化例を示す図である。
ト、（Ｂ）はＡＴＭセルの多重化例を示す図である。
【図３】本発明のデータ分離装置の実施例を示すブロッ
ク図である。
ク図である。
【図４】従来のデータ多重化装置のシステムブロック図
である。
である。
【図５】図４のブロックにおけるデータ多重化形式を示
す図である。
す図である。
【図６】図４のブロックにおけるデータ多重化例を示す
図である。
図である。
【図７】従来の多重化データをＡＴＭセル化した場合の
例を示す図である。
例を示す図である。
１ 映像符号化部 ２ 音声符号化部 ３ 映像符号化部制御部 ４ バッファメモリ ５ バッファメモリ読出し制御部 ６，３２ ＡＡＬ（ＶＢＲ）処理部 ７，３３ ＡＡＬ（ＣＢＲ）処理部 ８ セル多重部 １０ 遅延検出部 １１ 遅延情報多重部 ３１ セル分離部 ３４ 遅延情報分離部 ３５ 映像バッファメモリ ３６ 映像バッファメモリ読出し制御部 ３７ 音声バッファメモリ ３８ 音声バッファメモリ読出し制御部 ３９ 映像復号化部 ４０ 音声復号化部
Claims (3)
- 【請求項１】 映像信号を符号化する映像符号化手段
と、この映像符号化出力を一時格納するバッファメモリ
と、前記バッファメモリの格納データを一定長の映像デ
ータ毎に読出す読出し制御手段と、この読出された映像
データが前記バッファメモリを介することにより遅延す
る遅延時間を検出する遅延検出手段と、この検出された
遅延時間情報を前記バッファメモリの読出しデータに多
重化する手段と、この多重化出力である映像データの各
々に対してヘッダやトレイラ等の付加情報を付加してセ
ル化して導出する映像セル化手段と、音声信号を符号化
する音声符号化手段と、この音声符号化出力を前記一定
長の音声データ毎にヘッダやトレイラ等の付加情報を付
加してセル化して導出する音声セル化手段と、これ等映
像セルと音声セルとを多重化して送出するセル多重化手
段とを含むことを特徴とするデータ多重化装置。 - 【請求項２】 前記セル多重化手段は、前記音声セルと
前記映像セルとが同時に発生したことを検出して同時発
生検出信号を生成する手段を有し、 前記バッファメモリ手段は、その格納データ量が零にな
ったことを検出して零検出信号を生成する手段を有し、 前記映像セル化手段は、前記セル化のための付加情報を
挿入するタイムスロット期間付加情報挿入信号を生成す
る手段を有し、 前記読出し制御手段は、前記同時発生検出信号、前記零
検出信号及び前記付加情報挿入信号が少なくとも１つ発
生されたときに前記バッファメモリからのデータ読出し
を停止制御するよう構成されていることを特徴とする請
求項１記載のデータ多重化装置。 - 【請求項３】 一定長のセル化された映像セルデータと
一定長のセル化された音声セルデータとが時分割多重化
され、更には前記映像セルデータの送信側での伝搬遅延
時間情報が前記映像セルデータに多重化された多重化デ
ータを分離するデータ分離装置であって、前記多重化デ
ータから前記映像セルデータ及び前記音声セルデータを
夫々分離する分離手段と、前記映像セルデータから前記
伝搬遅延時間情報を分離する分離手段と、前記映像セル
データの映像データを一時格納する映像バッファメモリ
と、前記映像バッファメモリの格納データ量及び前記伝
搬遅延時間情報に応じて前記映像バッファメモリの読出
しを制御する手段と、前記音声セルデータの音声データ
を一時格納する音声バッファメモリと、前記音声バッフ
ァメモリの格納データ量に応じて前記音声バッファメモ
リの読出しを制御する手段と、前記映像バッファメモリ
及び前記音声バッファメモリの各読出しデータを夫々復
号化する手段とを含むことを特徴とするデータ分離装
置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17605493A JP2580955B2 (ja) | 1993-06-23 | 1993-06-23 | データ多重化装置及び分離装置 |
| US08/264,349 US5561466A (en) | 1993-06-23 | 1994-06-23 | Video and audio data multiplexing into ATM cells with no dummy cell used and ATM cell demultiplexing |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17605493A JP2580955B2 (ja) | 1993-06-23 | 1993-06-23 | データ多重化装置及び分離装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0787124A true JPH0787124A (ja) | 1995-03-31 |
| JP2580955B2 JP2580955B2 (ja) | 1997-02-12 |
Family
ID=16006916
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP17605493A Expired - Fee Related JP2580955B2 (ja) | 1993-06-23 | 1993-06-23 | データ多重化装置及び分離装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2580955B2 (ja) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1997023975A1 (fr) * | 1995-12-25 | 1997-07-03 | Ntt Mobile Communications Network Inc. | Emetteur multiplex de microtrames |
| KR20000059393A (ko) * | 1999-03-03 | 2000-10-05 | 김영환 | 음성 트래픽을 위한 미래육상이동통신 기지국과 제어국간 비동기전송 모드 방식 인터페이스 방법 |
| KR20010010499A (ko) * | 1999-07-20 | 2001-02-15 | 추봉진 | 효율적인 에이에이엘-2 씨피에스 기능을 위한 셀 수신부의 구조 및 버퍼 메네지먼트 |
| WO2004052015A1 (ja) * | 2002-11-29 | 2004-06-17 | Sony Corporation | 符号化装置およびその方法 |
| US6785230B1 (en) | 1999-05-25 | 2004-08-31 | Matsushita Electric Industrial Co., Ltd. | Audio transmission apparatus |
| JP2006174419A (ja) * | 2004-12-10 | 2006-06-29 | Microsoft Corp | ストリーミングメディアデータの符号化ビットレートを制御するシステム |
| US7924891B2 (en) | 2000-11-15 | 2011-04-12 | Qualcomm, Incorporated | Method and apparatus for allocating data streams onto a single channel |
-
1993
- 1993-06-23 JP JP17605493A patent/JP2580955B2/ja not_active Expired - Fee Related
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6061354A (en) * | 1995-12-25 | 2000-05-09 | Ntt Mobile Communications Network, Inc. | Micro-frame multiplex transmitter |
| WO1997023975A1 (fr) * | 1995-12-25 | 1997-07-03 | Ntt Mobile Communications Network Inc. | Emetteur multiplex de microtrames |
| KR20000059393A (ko) * | 1999-03-03 | 2000-10-05 | 김영환 | 음성 트래픽을 위한 미래육상이동통신 기지국과 제어국간 비동기전송 모드 방식 인터페이스 방법 |
| US6785230B1 (en) | 1999-05-25 | 2004-08-31 | Matsushita Electric Industrial Co., Ltd. | Audio transmission apparatus |
| KR20010010499A (ko) * | 1999-07-20 | 2001-02-15 | 추봉진 | 효율적인 에이에이엘-2 씨피에스 기능을 위한 셀 수신부의 구조 및 버퍼 메네지먼트 |
| US7924891B2 (en) | 2000-11-15 | 2011-04-12 | Qualcomm, Incorporated | Method and apparatus for allocating data streams onto a single channel |
| KR101022743B1 (ko) * | 2002-11-29 | 2011-03-22 | 소니 주식회사 | 복호 장치 및 복호 방법 |
| KR101022744B1 (ko) * | 2002-11-29 | 2011-03-22 | 소니 주식회사 | 복호 장치 및 그 방법 |
| WO2004052015A1 (ja) * | 2002-11-29 | 2004-06-17 | Sony Corporation | 符号化装置およびその方法 |
| US8798167B2 (en) | 2002-11-29 | 2014-08-05 | Sony Corporation | Encoder and its method |
| US9516361B2 (en) | 2002-11-29 | 2016-12-06 | Sony Corporation | Encoding apparatus and the method |
| US9654812B2 (en) | 2002-11-29 | 2017-05-16 | Sony Corporation | Encoding apparatus and the method |
| JP2006174419A (ja) * | 2004-12-10 | 2006-06-29 | Microsoft Corp | ストリーミングメディアデータの符号化ビットレートを制御するシステム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2580955B2 (ja) | 1997-02-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5561466A (en) | Video and audio data multiplexing into ATM cells with no dummy cell used and ATM cell demultiplexing | |
| KR100226528B1 (ko) | 다중화 압축화상/음성데이타의 복호장치 | |
| US6456782B1 (en) | Data processing device and method for the same | |
| US6069902A (en) | Broadcast receiver, transmission control unit and recording/reproducing apparatus | |
| US20030053492A1 (en) | Multiplexer, receiver, and multiplex transmission method | |
| EP1089482A1 (en) | Communication device, communication method, and recorded medium | |
| US6064795A (en) | Method of and apparatus for data recording, method of and apparatus for data reproduction, recording medium, and method of and apparatus for data transmission | |
| JPH11340938A (ja) | データ多重化装置及び方法 | |
| US6754239B2 (en) | Multiplexing apparatus and method, transmitting apparatus and method, and recording medium | |
| JPH11317768A (ja) | 伝送システム、送信装置、記録再生装置、および記録装置 | |
| JP2580955B2 (ja) | データ多重化装置及び分離装置 | |
| US6026434A (en) | Data transmission processing system | |
| JP2001308876A (ja) | 情報伝送方式、送信装置及び受信装置 | |
| US20030147430A1 (en) | Demultiplexer | |
| US6665001B1 (en) | Multiplex and demultiplex controlling apparatus, multiplex and demultiplex controlling system, and method thereof | |
| JPH11205789A (ja) | Ｍｐｅｇ２トランスポートストリーム伝送レート変換装 置 | |
| JP3207709B2 (ja) | 多重化データ相互通信方法、多重化データ相互通信システム、ゲートウエイおよび非同期網上の端末 | |
| JP2576368B2 (ja) | データ多重化装置 | |
| JP3191855B2 (ja) | 動画像受信装置及びその廃棄パケット補償方法 | |
| JP3177825B2 (ja) | メディア符号化装置 | |
| JP2648095B2 (ja) | 画像符号化および復号化装置 | |
| JP2001111610A (ja) | 情報データ伝送システムの受信装置 | |
| KR100236309B1 (ko) | 디지탈방송 수신기에 있어서 방송신호 저장 및 재생장치 | |
| JPH08191434A (ja) | 動画／音声符号化データ多重化方法及び動画／音声符号化データ多重化装置 | |
| JP2000187940A (ja) | 記録再生装置、および記録装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| LAPS | Cancellation because of no payment of annual fees |