JPH09116863A - データ記録方法及び装置、データ再生方法及び装置、記録媒体、データ伝送方法及び装置 - Google Patents

Abstract

(57)【要約】 【課題】本発明は、一定時間分の動画像信号及びこれに
付随するオーデイオ信号をそれぞれ符号化し時分割多重
化したものを記録又は伝送する場合に、任意の個数の多
重化データを途切れなく連続再生できるようにする。 【解決手段】動画像パケツトデータＳＶＰと所定時間だ
け遅延させたオーデイオパケツトデータＳＡＰを一旦バ
ツフアメモリ２０、２１に格納し、格納を開始し始めて
から所定時間経過後に、バツフアメモリ２０、２１内の
各パケツトデータの残量をみながら動画像パケツトデー
タ及びオーデイオパケツトデータを選択的に、かつ格納
時のデータレート以上のレートで読み出すようにして動
画像パケツトデータＳＶＰ′及びオーデイオパケツトデ
ータＳＡＰ′を時分割多重化し、当該多重化データＳＭ
ＵＸ′を記録又は伝送するようにする。

Description

【発明の詳細な説明】

【０００１】

【目次】以下の順序で本発明を説明する。 発明の属する技術分野 従来の技術 発明が解決しようとする課題 課題を解決するための手段 発明の実施の形態 （１）記録装置 （１−１）構成（図１） （１−２）バツフア選択処理（図２及び図３） （１−３）動作（図４及び図５） （２）再生装置 （２−１）構成（図６） （２−２）動作（図７） （３）実施例の効果 （４）他の実施例 発明の効果

【０００２】

【発明の属する技術分野】本発明は動画像信号及びこれ
に付随するオーデイオ信号を符号化及び多重化して記録
し又は再生するデータ記録装置、データ再生装置等に関
する。また本発明は動画像信号及びこれに付随するオー
デイオ信号を符号化及び多重化して遠隔地に伝送するデ
ータ伝送装置に関する。

【０００３】

【従来の技術】一般にデイジタル動画像信号を記録再生
するシステムや遠隔地に伝送するシステムにおいては、
記録媒体の容量や伝送路を効率良く利用するため、画像
信号を圧縮符号化する方法が採用されている。この際、
フレーム内相関を利用したり、フレーム間相関を利用し
て動画像信号を圧縮符号化するのが一般的である。因に
これら圧縮符号化フオーマツトにはＭＰＥＧ１、ＭＰＥ
Ｇ２、あるいはＨ．２６１等がある。

【０００４】これらの圧縮符号化フオーマツトに基づい
て動作する圧縮符号化装置においては、ある時間内に発
生する圧縮動画像データのデータ量が一定となるように
符号化を制御している。しかし圧縮符号化装置において
は、ある時間単位で発生するデータ量が一定量に近づく
ようにしてはいるが、通常発生されるデータ量は実際に
は一定にはならない。またフレーム単位のデータ発生量
も通常は各々異なつた値となる。このように単位時間当
たりの符号化データ発生量が変化する場合、そのデータ
を記録媒体に直接記録したり、あるいは直接伝送するこ
とはきわめて困難となる。なぜなら通常、記録媒体への
記録レート、あるいはデータの伝送レートは一定だから
である。

【０００５】そこで一般には、図８に示すように、動画
像圧縮符号化処理部２と記録再生部３との間（又は動画
像符号化処理部２と伝送部（図示せず）との間）にバツ
フアメモリ４を配置し、このバツフアメモリ４が破綻し
ないように符号化データＤ１の発生量を調整する。そし
て記録再生装置１は動画像圧縮符号化処理部２から出力
される可変量の符号化データＤ１をバツフアメモリ４か
ら一定レートで取り出し、記録再生部３（伝送装置にお
いては伝送路）に出力している。

【０００６】従つて動画像圧縮符号化処理部２において
単位時間当りに発生される平均データ量は、バツフアメ
モリ４から出力される一定レートと等しくなる。一般に
これらの動作を行う装置はバツフアメモリ４を含めてエ
ンコーダ５と呼ばれている。このように従来のエンコー
ダ５ではバツフアメモリ４を設けることによつて発生情
報量が一定レートとなるようになされている。

【０００７】一方、圧縮符号化されたデータを元の動画
像信号に復号する装置側では、記録再生部３と伸長復号
化処理部６との間（又は伝送路の出力端と伸長復号化処
理部６との間）に、上述と同様のバツフアメモリ７が置
かれるようになされている。一般にこれらの動作を行う
装置はバツフアメモリ７を含めてデコーダ８と呼ばれて
いる。

【０００８】

【発明が解決しようとする課題】ところで、従来のエン
コーダにおいては、上述したように発生情報量は一定レ
ートとなるようになされているものの、ある一定時間分
の動画像信号を符号化することにより発生する総データ
量は画像に応じて目標としている値からは離れたものと
なる。

【０００９】ここで例えば時間長Ｔの動画像信号を圧縮
符号化して得た動画像符号化データを書込みレートＲで
記録媒体に記録し、その後、読出しレートＲでこの記録
データを読み出して復号することにより動画像信号を再
生する場合について考える。この場合、目標となる符号
化データ発生量Ｅｉは

【数３】 となる。ところが実際のデータ発生量Ｅｒは

【数４】 となり、一定値Ｒ×Ｔにはならない。なお（４）式にお
いてＢはエンコーダ内に設けられているバツフアメモリ
の容量を表わす。

【００１０】この理由を説明する。すなわち一般的なエ
ンコーダによつて動画像信号をエンコードした場合、発
生するデータ量の推移をバツフアメモリの状態で示すと
図９のようになる。縦軸が発生したデータ量、横軸が経
過時間を表し、直線ＥＢｅがレートＲで出力したデータ
量、直線ＥＢｅと折れ線ＥＢｆの間がバツフア容量Ｂと
なる。また曲線Ｄｅは実際のデータ発生量の推移を示
し、この曲線Ｄｅと折れ線ＥＢｆの縦軸方向の距離がバ
ツフアメモリの空き容量ＥＢｒを示す。

【００１１】エンコードされたデータは１フレームごと
にバツフアメモリに書き込まれ、書き込み開始から期間
Ｔｅ（以下、この期間Ｔｅをスタートアツプデイレイと
呼ぶ）経過後にバツフアメモリから一定レートＲで読み
出される。目標となる符号化データ発生量はＲ×Ｔで、
これは図中の点Ｐ１で示されるが、通常は時間Ｔまでエ
ンコードし終わつた時点で発生するトータルのデータ量
は、例えば点Ｐ２のようになり、この時までのデータ発
生量Ｅｊは、

【数５】 となることが分かる。ここでＢ_OTは時間Ｔにおけるバツ
フアメモリ内のデータ残量である。

【００１２】通常このデータ発生量Ｅｊは一定にはなら
ず、エンコード時のスタートアツプデイレイＴｅやデー
タ残量Ｂ_OTによつて変化する。ここでＴｅ、Ｂ_OTはそれ
ぞれ、

【数６】 となる。これらの値を考慮すると、データ発生量Ｅｊの
最小値Ｅｊ_min はＴｅ＝Ｂ／ＲかつＢ_OT＝０のとき、次
式

【数７】 となり、データ発生量Ｅｊの最大値Ｅｊ_max はＴｅ＝０
のとき、次式

【数８】 となることが分かる。従つて実際のデータ発生量Ｅｒの
変動量は（４）式の通りとなる。

【００１３】従つてこのデータをレートＲで記録媒体に
記録する場合、記録に要する時間Ｈｗは、次式

【数９】 となる。またこのようにして記録媒体に記録されたデー
タをレートＲで読み出す場合の読み出し時間Ｈｒは、次
式

【数１０】 となる。読み出されたデータはデコーダによつて元の動
画像信号へ復号されるが、復号後の動画像信号の再生時
間は符号化前の動画像信号の長さと同じく時間Ｔとな
る。このことから画像の再生時間Ｔと、それに必要なデ
ータの読み出し時間Ｈｒは異なることが分かる。

【００１４】次に、動画像符号化データと、動画像の原
信号に付随するオーデイオ信号を符号化したオーデイオ
符号化データとを時分割多重処理することにより単一の
多重化ストリームとし、この多重化ストリームを記録媒
体に記録し、読み出す場合を考える。通常、オーデイオ
信号の符号化の際には固定長符号化の手法がとられるた
め、符号化レートをｒとすると、オーデイオ符号化デー
タのデータ発生量Ａｒは、次式

【数１１】 となる。

【００１５】また動画像信号及びこれに付随するオーデ
イオ信号の符号化処理に要する時間については、単位時
間あたりの符号化処理に必要な時間がアルゴリズムやハ
ードウエアによつて異なるため、同時刻に入力された原
信号がそれぞれ符号化されて符号器から出力されるまで
の遅延時間（デイレイ）は異なる。通常は、オーデイオ
信号の符号化処理に要する時間の方が短いため、多重化
すべきオーデイオ符号化データが多重化処理部へ到着し
た時点で時分割多重処理を開始し記録媒体に記録する場
合、動画像符号化データが多重化処理部に到着するまで
の時間が遅れる分、動画像符号化データを単独で記録媒
体に記録するのに要する時間よりも多くの時間を必要と
する。

【００１６】このデイレイの差は書き込みレートに関係
なく生じる。従つて多重化ストリームを記録媒体に記録
したレートで記録媒体から記録されたデータストリーム
を読み出すのに必要な時間も、単独に記録された動画像
符号化データを読み出した場合に比べてより多くの時間
を必要とする。

【００１７】ところで例えばＡＶサーバのように、ある
一定時間分の動画像信号とそれに付随するオーデイオ信
号をそれぞれ圧縮符号化し、それらを時分割多重化した
多重化データ（以下これをクリツプと呼ぶ）を任意の個
数だけ記録媒体に書き込み、その記録媒体から任意の個
数のクリツプを連続再生する場合、以下のような問題が
生じる。

【００１８】すなわち図１０に示すように、動画像信号
ＳＶとこれに付随するオーデイオ信号ＳＡをそれぞれ符
号化することにより動画像符号化データＳＶＣ及びオー
デイオ符号化データＳＡＣを形成し、これらをそれぞれ
パケツト化することにより動画像パケツトデータＶ０、
Ｖ１、……、Ｖｎ及びオーデイオパケツトデータＡ０、
Ａ１、……、Ａｍを形成すると、動画像符号化デイレイ
ＤＬ１の方がオーデイオ符号化デイレイＤＬ２よりも大
きいので、動画像パケツトデータＶ０〜Ｖｎに対してオ
ーデイオパケツトデータＡ０〜Ａｍの方が時間的に早く
生成される。

【００１９】このように生成された動画像パケツトデー
タＶ０〜ＶｎとオーデイオパケツトデータＡ０〜Ａｍ
を、パケツトデータＶ０〜Ｖｎ、Ａ０〜Ａｍが生成され
た順に、かつどちらのパケツトデータも未だ生成されて
いない場合にはパデイングパケツトデータＰを挿入しな
がら時分割多重化すると、時間長Ｔ１の多重化データＳ
ＭＵＸが形成される。この多重化データＳＭＵＸ（すな
わちクリツプ）の時間長Ｔ１は、動画像信号ＳＶの画像
の内容や符号化デイレイの差によつて変動してしまう。

【００２０】このため、複数個の多重化データＳＭＵＸ
が記録された記録媒体から任意の個数のクリツプを連続
して読み出し、これを復号することにより元の動画像信
号とこれに付随するオーデイオ信号を連続再生する場
合、復号に必要なデータを記録媒体から読み出す時間が
各々のクリツプにおいて異なつてしまうため、データの
読み出し時間が復号時間よりも長くかかる場合には、再
生信号が途切れたものとなる問題があつた。

【００２１】例えば放送局等で用いられるＣＭ（コマー
シヤル）を送出するシステム等では、記録媒体に記録さ
れた複数のクリツプを様々な組合せで連続再生して送出
するようになされており、このような場合に各クリツプ
間で読出し時間が異なると再生したＣＭのスポツトが一
部欠けるたものとなつてしまう。このようにＣＭのスポ
ツトが一部欠落することは放送契約等の問題もからんで
大きな問題となる。

【００２２】本発明は以上の点を考慮してなされたもの
で、ある一定時間分の動画像信号及びこれに付随するオ
ーデイオ信号をそれぞれ符号化及び多重化したものを記
録又は伝送する場合に、当該多重化データを途切れなく
連続再生し得るデータ記録方法及び装置、データ再生方
法及び装置、記録媒体、データ伝送方法及び装置を提案
しようとするものである。

【００２３】

【課題を解決するための手段】かかる課題を解決するた
め本発明においては、動画像パケツトデータと所定時間
だけ遅延したオーデイオパケツトデータを一旦バツフア
メモリに格納し、格納を開始してから所定時間経過後
に、バツフアメモリ内の動画像パケツトデータ及びオー
デイオパケツトデータの残量を見ながら動画像パケツト
データ又はオーデイオパケツトデータを選択的に、かつ
格納時のデータレート以上のデータレートで読み出すよ
うにして動画像パケツトデータ及びオーデイオパケツト
データを時分割多重化するようにする。

【００２４】これにより、時間長Ｔの原動画像信号及び
これに付随するオーデイオ信号は、各々の符号化データ
発生量や符号化デイレイの差に拘わらず、常に一定サイ
ズの多重化データとされる。この結果記録又は伝送され
た当該多重化データを、記録時又は伝送時と同じレート
で読出し又は受信すれば、各クリツプの読出し及び受信
にかかる時間を等しくできる。

【００２５】

【発明の実施の形態】以下図面について、本発明の一実
施例を詳述する。

【００２６】（１）記録装置 （１−１）構成 図１において、１０は全体として本発明によるデータ記
録方法を適用した記録装置の構成を示す。記録装置１０
は大きく分けて、エンコーダ１１と多重化処理部１２と
記録再生部１３とから構成されている。エンコーダ１１
は動画像信号ＳＶ及びこれに付随するオーデイオ信号Ｓ
Ａをそれぞれ画像圧縮符号化処理部１４及びオーデイオ
符号化処理部１６に入力する。

【００２７】画像圧縮符号化処理部１４はエンコードバ
ツフア１５の残量に応じて選定された圧縮率で動画像信
号ＳＶを圧縮符号化する。エンコードバツフア１５に格
納された圧縮符号化データは一定のレートＲ１で読み出
されて出力される。このようにして目標レートＲ１（因
に、当該目標レートＲ１が画像圧縮符号化処理部１４及
びエンコードバツフア１５全体でみたときの符号化レー
トとなる）の動画像符号化データＳＶＣが形成される。
オーデイオ符号化処理部１６はオーデイオ信号ＳＡに対
して固定長符号化処理を施すことにより、符号化レート
Ｒ２のオーデイオ符号化データＳＡＣを形成する。

【００２８】パケツト処理部１７は動画像符号化データ
ＳＶＣを一定のデータ長毎に区切ると共にそのデータが
動画像データであることやその他の付加情報を表わすヘ
ツダ情報をそれらの先頭に付加することにより、動画像
パケツトデータＳＶＰを形成する。

【００２９】オーデイオ符号化データＳＡＣは動画像符
号化デイレイとオーデイオ符号化デイレイの差を低減す
るために設けられた遅延処理部１８によつて所定時間Ｔ
_DLだけ遅延され、当該遅延オーデイオ符号化データＳＡ
Ｃ_DLがパケツト処理部１９に供給される。パケツト処理
部１９は遅延オーデイオ符号化データＳＡＣ_DLを一定の
データ長毎に区切ると共にそのデータがオーデイオデー
タであることを表わすヘツダ情報をそれらの先頭に付加
することにより、オーデイオパケツトデータＳＡＰを形
成する。

【００３０】動画像パケツトデータＳＶＰ及びオーデイ
オパケツトデータＳＡＰはそれぞれ多重化バツフア２０
及び２１に送出される。多重化バツフア２０の出力はセ
レクタ２２の端子ａに与えられると共に多重化バツフア
２１の出力はセレクタ２２の端子ｂに与えられる。この
結果多重化バツフア２０及び２１には対応する端子ａ又
はｂが選択されるまでの期間、動画像パケツトデータＳ
ＶＰ及びオーデイオパケツトデータＳＡＰが格納蓄積さ
れる。

【００３１】また各多重化バツフア２０及び２１からは
格納時のデータレートよりも速いデータレートＲ′でデ
ータが読み出されるようになされている。具体的には、
各多重化バツフア２０及び２１への動画像パケツトデー
タＳＶＰ及びオーデイオパケツトデータＳＡＰのそれぞ
れの書込みレートをＲ１及びＲ２とすると、各多重化バ
ツフア２０及び２１のそれぞれの読出しレートＲ′は
Ｒ′＞Ｒ１＋Ｒ２となるように選定されている。またセ
レクタ２２の端子ｃにはパデイングパケツト発生部２３
によつて発生されたパデイングパケツトデータＰＡＤが
与えられる。このパデイングパケツトデータＰＡＤのレ
ートもＲ′となるように選定されている。

【００３２】セレクタ２２の切り換えはＣＰＵ（中央処
理ユニツト）２４からのセレクタコントロール信号ＣＮ
Ｔ１に基づいて行われる。このセレクタコントロール信
号ＣＮＴ１は、各多重化バツフア２０及び２１からＣＰ
Ｕ２４に入力される、バツフア内のパケツト残量を表わ
すバツフア情報信号Ｓ１及びＳ２に基づいて生成され
る。このようにして多重化バツフア２０、２１内のパケ
ツト残量に基づいて多重化が制御される。この結果得ら
れた多重化データＳＭＵＸ′はバイトカウンタ２５を介
して記録再生部１３に供給され、ハードデイスク等の記
録媒体に記録される。

【００３３】またＣＰＵ２４はこの多重化処理を各多重
化バツフア２０及び２１に所定量のパケツトデータＳＶ
Ｐ、ＳＡＰが蓄積されてから開始させる。このためＣＰ
Ｕ２４は多重化バツフア２０、２１にパケツトデータＳ
ＶＰ、ＳＡＰの格納が開始されてから時間Ｔｗが経過す
るまではセレクタ２２の端子として端子ｄを選択してお
き、時間Ｔｗ（以下、この時間Ｔｗを蓄積時間Ｔｗと呼
ぶ）だけ経過後に上述したように多重化バツフア２０、
２１内のパケツト残量に基づく多重化を開始させる。

【００３４】この蓄積時間Ｔｗの選定の仕方について説
明する。ここで蓄積時間Ｔｗを全くなくして多重化を開
始したり、小さくしすぎた場合には原信号ＳＶ、ＳＡの
入力時間Ｔに相当する時間分の多重化処理を行つた後
も、動画像パケツトデータＳＶＰが発生していることに
なり、多重化データＳＭＵＸ′を規定のトータルバイト
数に押さえ込むことができなくなる。また遅延処理部１
８による遅延処理時間Ｔ_DLを長くしすぎた場合も同様
に、オーデイオパケツトデータＳＡＰの発生が規定時間
内に収まらなくなり、多重化データＳＭＵＸ′を規定の
トータルバイト数に押さえ込むことができなくなる。

【００３５】これらを考慮して、蓄積時間Ｔｗ及び遅延
時間Ｔ_DLは、例えば以下に示すように選定されている。
すなわち時間Ｔの長さの動画像信号ＳＶの符号化によつ
て発生する動画像符号化データＳＶＣのデータ量の最大
値は、次式

【数１２】 となる。これが、レートＲ２のオーデイオ符号化データ
ＳＡＣと多重化されレートＲ′の多重化データＳＭＵ
Ｘ′とされるため、動画像多重に割り当てられる実効レ
ートは、次式

【数１３】 となる。

【００３６】従つて多重化に必要な時間の最大は、次式

【数１４】 となる。実効レートを上げ、多重化に必要な時間を短縮
するためには、あらかじめ多重化バツフア２０、２１に
発生データを一定量蓄積したのちに多重化を開始しなく
てはならない。多重化時間をＴにするためには、蓄積時
間Ｔｗは、次式

【数１５】 で、かつ次式

【数１６】 を満たさなければならない。これらの条件より、次式

【数１７】 において、次式

【数１８】 が成立することが分かる。すなわち蓄積時間Ｔｗは（１
８）式のように選定すれば良い。

【００３７】一例として、動画像の符号化レートＲ１が
４〔Ｍbps 〕、オーデイオの符号化レートＲ２が384
〔Ｋbps 〕、多重化データのデータレートＲ′が５〔Ｍ
bps 〕、エンコードバツフア１５の容量Ｂが４〔Ｍbit
〕の場合を考えると、（１７）式及び（１８）式よ
り、クリツプの時間長ＴをＴ＞6.49〔sec 〕とし、かつ
蓄積時間Ｔｗを１〔sec 〕とすれば良い。

【００３８】またこのときの多重化バツフア２０、２１
でのデータ蓄積量は、遅延処理部１８によつて符号化デ
イレイの差を全くなくした場合には、多重化バツフア２
０で４〔Ｍbit 〕、多重化バツフア２１で 384〔Ｋbps
〕となるので、この値以上の容量の多重化バツフア２
０、２１を持つ必要がある。

【００３９】また動画像とオーデイオの符号化デイレイ
の差が 1.5〔sec 〕あるとすると、オーデイオの遅延処
理をしなかつた場合、オーデイオの多重化バツフア２１
は、384〔kbit〕×(1＋1.5 ）＝ 576〔kbit〕の容量が
必要となる。しかし実際上、再生装置側の多重分離化処
理においては、多重化処理の際に使用した多重化バツフ
ア２０、２１と同容量以上のバツフアメモリが必要とな
るため、多重化の前処理として、1.5 〔sec 〕以上の遅
延処理を行うのが望ましい。

【００４０】ただし、遅延時間Ｔ_DLが、1.5 〔sec 〕＋
Ｔｗ＝2.5 〔sec 〕を越えた場合には、オーデイオパケ
ツトの発生が規定時間内に収まらなくなり、規定の多重
化データＳＭＵＸ′をトータルバイト数に押さえ込むこ
とができなくなるため、これを考慮した遅延時間Ｔ_DLを
選定しなければならない。

【００４１】因に、オーデイオ符号化データＳＡＣに対
して遅延処理を行わなかつた場合には、多重化バツフア
２１として、多重化バツフア２０への蓄積時間Ｔｗに加
え、符号化デイレイの差に相当する時間分のバツフア量
が必要となり、多重化バツフア２１がオーバーフローす
る可能性がある。従つて実施例の記録装置１０において
は、オーデイオ符号化データＳＡＣを遅延処理したこと
により多重化バツフア２１のオーバーフローを防止でき
る。

【００４２】次に図１に戻つて記録装置１０について説
明する。バイトカウンタ２５は通過する多重化データＳ
ＭＵＸ′のバイト数をカウントし、これを表わすカウン
ト信号Ｓ３をＣＰＵ２４に送出する。ＣＰＵ２４はカウ
ント信号Ｓ３に基づいて多重化データＳＭＵＸ′のサイ
ズを計算し、当該サイズが１クリツプ分の値に満たない
場合には、セレクタ２２を端子ｃに切換え制御すること
によりパデイングパケツトデータＰＡＤを挿入する。

【００４３】すなわち時間長Ｔの原信号の符号化によつ
て発生した全てのデータの多重化が終了した時点で、そ
れまでバイトカウンタ２５によつてカウントしたバイト
数がＣＰＵ２４へ伝えられ、パデイングパケツト発生部
２３から、次式

【数１９】 に相当するバイト数のパデイングパケツトＰＡＤを多重
化データに付加させて多重化処理を終了する。従つて１
クリツプの多重化データＳＭＵＸ′当りの総バイト数は
常に、次式

【数２０】 となる。

【００４４】ここでパデイングパケツトデータＰＡＤを
挿入するのは、上述したように１クリツプ分のサイズ合
せを行う場合か、または多重化バツフア２０、２１内の
パケツトデータＳＶＰ、ＳＡＰが存在しない場合のいず
れかの場合である。すなわち多重化処理部１２において
は、多重化バツフア２０、２１への入力レートの合計Ｒ
１＋Ｒ２よりも出力レートＲ′の方を大きくしているた
め、時間の経過と共にいずれの多重化バツフア２０、２
１にも送り出すべきパケツトデータが存在しない場合が
生じる。そこでこのような場合は、ＣＰＵ２４からの選
択によつて、パデイングパケツト発生部２３からパデイ
ングパケツトデータＰＡＤを挿入することにより多重化
データＳＭＵＸ′を形成する。なおこのパデイングパケ
ツトは、後述する再生装置の多重化分離処理によつて破
棄する。

【００４５】（１−２）バツフア選択処理 次にＣＰＵ２４による多重化制御の一例を、図２及び図
３に従つて説明する。図２及び図３では、多重化バツフ
ア２０（以下、この説明では多重化バツフア２０をビデ
オバツフア（Ｖ Buffer ）と呼ぶ）、オーデイオバツフ
ア２１（以下、この説明では多重化バツフア２１をオー
デイオバツフア（Ａ Buffer ）と呼ぶ）のバツフア残量
（ＢＯＢ）を、半分（ＨＯＢ）、１／４（ＱＯＢ）の２
段階のバツフア残量と、残パケツト数とを基準にして比
較し、当該比較結果に応じていずれかのバツフアを選択
する。すなわち、いずれかのバツフアに対応したセレク
タ端子ａ又はｂを選択して多重化データＳＭＵＸ′を形
成する。

【００４６】ＣＰＵ２４は各多重化バツフア２０、２１
にパケツトデータＳＶＰ、ＳＡＰが入力され始めてから
蓄積時間Ｔｗだけ経過後に、ステツプＳＰ０からバツフ
ア選択処理手順に入る。ＣＰＵ２４はステツプＳＰ１に
おいてバツフア情報信号Ｓ１、Ｓ２に基づいて、ビデオ
バツフアの残量が半分より多く、かつビデオパケツトが
あると判断するとステツプＳＰ２に移つてビデオバツフ
アを選択する。次にＣＰＵ２４はステツプＳＰ３におい
てオーデイオバツフアの残量が半分よりも多く、かつ残
りのオーデイオパケツトがあると判断するとステツプＳ
Ｐ４に移つてオーデイオバツフアを選択し、当該ステツ
プＳＰ４での処理後に再びステツプＳＰ１に戻る。

【００４７】一方ＣＰＵ２４はステツプＳＰ１におい
て、ビデオバツフアの残量が半分以下又はビデオパケツ
トが無いと判断すると、ステツプＳＰ５に移る。ＣＰＵ
２４はステツプＳＰ５においてオーデイオバツフアの残
量が半分より多く、かつオーデイオパケツトがあると判
断すると、ステツプＳＰ４に移つてオーデイオバツフア
を選択する。

【００４８】このようにＣＰＵ２４は、ステツプＳＰ１
〜ステツプＳＰ５において、ビデオバツフア及びオーデ
イオバツフアの半分の残量を閾値として、ビデオバツフ
アの残量及びオーデイオバツフアの残量が共に半分より
多いときには、ステツプＳＰ１−ＳＰ２−ＳＰ３−ＳＰ
４−ＳＰ１のループを繰り返してビデオバツフアとオー
デイオバツフアを交互に選択して多重化データＳＭＵ
Ｘ′を形成する。これに対してビデオバツフアの残量だ
けが半分よりも多いときには、ステツプＳＰ１−ＳＰ２
−ＳＰ３−ＳＰ４のループを繰り返すことによりビデオ
バツフアのみを繰り返し選択して多重化データＳＭＵ
Ｘ′を形成する。またビデオバツフアの残量が半分以下
でかつオーデイオバツフアの残量が半分よりも多いとき
には、ステツプＳＰ１−ＳＰ５−ＳＰ４−ＳＰ１のルー
プを繰り返すことによりオーデイオバツフアのみを選択
しながら多重化データＳＭＵＸ′を形成する。

【００４９】ＣＰＵ２４はステツプＳＰ１及びステツプ
ＳＰ２において共に否定結果を得ると、このことはビデ
オバツフア及びオーデイオバツフアの残量が共に半分以
下のことを表わすことにより、ステツプＳＰ６に移り、
以下各バツフア容量の１／４を閾値とした選択を行う。
すなわちＣＰＵ２４はステツプＳＰ６においてビデオバ
ツフアの残量が１／４よりも多くかつビデオパケツトが
あるか否か判断し、肯定結果が得られるとステツプＳＰ
７に移つてビデオバツフアを選択する。次にＣＰＵ２４
はステツプＳＰ８においてオーデイオバツフアの残量が
１／４より多くかつオーデイオパケツトがあるか否か判
断し、肯定結果が得られるとステツプＳＰ９に移つてオ
ーデイオバツフアを選択する。

【００５０】一方ＣＰＵ２４はステツプＳＰ６において
否定結果が得られると、ステツプＳＰ１０に移つてオー
デイオバツフアの残量が１／４よりも多くかつオーデイ
オパケツトがあるか否か判断し、肯定結果が得られると
ステツプＳＰ９に移つてオーデイオバツフアを選択す
る。またＣＰＵ２４はステツプＳＰ８において否定結果
が得られた場合又はステツプＳＰ９における処理を終了
後はステツプＳＰ１に戻る。

【００５１】このようにしてＣＰＵ２４はステツプＳＰ
６〜ＳＰ１０において、ビデオバツフアの残量及びオー
デイオバツフアの残量が共に１／４より多いとき、又は
何れか一方のバツフアの残量が１／４より多いときに、
ビデオバツフア又はオーデイオバツフアを適宜選択し、
再びステツプＳＰ１に戻つていずれかのバツフア残量が
半分よりも多くなつている場合には、上述のステツプＳ
Ｐ１〜ステツプＳＰ５の処理を実行する。このようにし
てＣＰＵ２４は、ステツプＳＰ１〜ステツプＳＰ１４の
処理を実行することによりビデオバツフアとオーデイオ
バツフアの残量を均等に減らしていくように多重化制御
を行うようになされている。

【００５２】これに対してＣＰＵ２４はステツプＳＰ１
０において否定結果を得ると、このことはビデオバツフ
ア及びオーデイオバツフアの残量が共に１／４以下とな
つていることを表わすことにより、ステツプＳＰ１１に
移り、以下各バツフア内のパケツト残量の有無に基づい
たバツフア選択を行う。

【００５３】すなわちＣＰＵ２４はステツプＳＰ１１に
おいてビデオバツフア内にビデオパケツトがあるか否か
判断し、ビデオパケツトがあると判断した場合にはステ
ツプＳＰ１２に移つてビデオバツフアを選択する。次に
ＣＰＵ２４はステツプＳＰ１３においてオーデイオバツ
フア内にオーデイオパケツトがあるか否か判断し、オー
デイオパケツトがあると判断した場合にはステツプＳＰ
１４に移つてオーデイオバツフアを選択する。

【００５４】一方ＣＰＵ２４はステツプＳＰ１１におい
て否定結果を得るとステツプＳＰ１５に移りオーデイオ
パケツトがあるか否か判断し、肯定結果を得た場合には
ステツプＳＰ１４に移る。またＣＰＵ２４はステツプＳ
Ｐ１３において否定結果が得られた場合又はステツプＳ
Ｐ１４における処理を終了後はステツプＳＰ６に戻る。

【００５５】このようにしてＣＰＵ２４はステツプＳＰ
１１〜ＳＰ１５において、バツフア内にビデオパケツト
又はオーデイオパケツトが存在するときにビデオパケツ
ト又はオーデイオパケツトを適宜選択し、再びステツプ
ＳＰ６に戻つていずれかのバツフア残量が１／４よりも
多くなつている場合には、上述のステツプＳＰ６〜ＳＰ
１０の処理を実行する。

【００５６】これに対してＣＰＵ２４はステツプＳＰ１
５において否定結果を得ると、このことはバツフア内に
ビデオパケツト及びオーデイオパケツトが共に存在しな
いことを表わすことにより、ステツプＳＰ１６に移つて
１クリツプ分の多重化処理が終了したか否か判断する。
ここで否定結果が得られるとステツプＳＰ１７に移り、
セレクタ２２にパデイングパケツト発生部２３を選択さ
せることにより多重化データストリームにパデイングパ
ケツトデータＰＡＤを挿入させる。この処理を終了した
後は、再びステツプＳＰ６に戻つてバツフア内にパケツ
トデータが到来すると当該パケツトデータを多重化し、
多重化データが無い場合には再びステツプＳＰ１７にお
いてパデイングパケツトデータＰＡＤを挿入させる。

【００５７】一方ＣＰＵ２４はステツプＳＰ１６におい
て肯定結果が得られると、ステツプＳＰ１８に移つて、
やはりセレクタ２２にパデイングパケツト発生部２３を
選択させることにより多重化データストリームにパデイ
ングパケツトデータＰＡＤを挿入させる。ＣＰＵ２４は
続くステツプＳＰ１９においてバイトカウンタ２５から
のカウント信号Ｓ３に基づいて総バイト数が時間Ｔ×レ
ートＲ′に等しいか否か（すなわち総バイト数が決めら
れた１クリツプのサイズに等しくなつたか否か）判断
し、否定結果を得た場合にはステツプＳＰ１８に戻る。
このようにＣＰＵ２４はステツプＳＰ１８−ＳＰ１９−
ＳＰ１８のループを繰り返すことにより、単位クリツプ
内の総ビツト数を一定にするようになされている。ＣＰ
Ｕ２４はステツプＳＰ１９において否定結果を得るとス
テツプＳＰ２０に移つて、１クリツプ分のバツフア選択
処理手順を終了する。

【００５８】ここでステツプＳＰ１７の処理は多重化す
べきビデオデータ及びオーデイオデータが未だ生成され
ていないときにビデオデータ又はオーデイオデータ間に
パデイングデータＰＡＤを挿入することに相当し、ステ
ツプＳＰ１９の処理は１クリツプ内に入れるビデオデー
タ及びオーデイオデータの多重化が終了したときにその
後ろにクリツプのサイズ合せのためのパデイングデータ
ＰＡＤを挿入することに相当する。このようにして時間
長Ｔの原信号ＳＶ、ＳＡから、常に一定サイズ（時間長
Ｔ）でなる多重化データＳＭＵＸ′が形成される。

【００５９】（１−３）動作 次に記録装置１０の全体としての動作を、図４を用いて
説明する。記録装置１０はステツプＳＰ３０において記
録処理手順を開始すると、続くステツプＳＰ３１におい
てメインＣＰＵ２６から記録再生部１３に記録制御信号
Ｓ４を送出することにより記録再生部１３による記録媒
体への書込みポインタを指定する。次に記録装置１０は
ステツプＳＰ３２においてエンコーダ１１にエンコード
制御信号Ｓ５を送出することにより動画像信号ＳＶを画
像圧縮符号化処理部１４に入力開始させ、続くステツプ
ＳＰ３３においてパケツト処理部１７によつて動画像符
号化データＳＶＣをパケツト処理し、ビデオバツフア２
０への動画像パケツトデータＳＶＰの書込みを開始させ
る。

【００６０】これに並列して記録装置１０はステツプＳ
Ｐ３１の処理の後、ステツプＳＰ３４においてオーデイ
オ信号ＳＡをオーデイオ符号化処理部１６に入力開始さ
せ、続くステツプＳＰ３５において遅延処理部１８によ
つてビデオ符号化デイレイとの差に対応した時間Ｔ_DLだ
けオーデイオ符号化データＳＡＣを遅延させる。ステツ
プＳＰ３６では、パケツト処理部１９によつて遅延オー
デイオ符号化データＳＡＣ_DLをパケツト処理させ、オー
デイオバツフア２１へのオーデイオパケツトデータＳＡ
Ｐの書込みを開始させる。

【００６１】次に記録装置１０はステツプＳＰ３７にお
いてパケツトデータＳＶＰ、ＳＡＰを多重化バツフア２
０、２１に書き込ませ始めてから蓄積時間Ｔｗが経過し
たか否か判断し、蓄積時間Ｔｗだけ待機する。そして蓄
積時間Ｔｗが経過した後多重化を開始する。すなわち記
録装置１０は蓄積時間Ｔｗが経過すると、ステツプＳＰ
３８に移り、ＣＰＵ２４がバツフア情報信号Ｓ１、Ｓ２
に基づいて各多重化バツフア２０、２１のバツフア残量
を検出し、続くステツプＳＰ３９においてＣＰＵ２４が
バツフア残量に基づくセレクタコントロール信号ＣＮＴ
１を送出することによりパケツトを送出する多重化バツ
フア２０、２１又はパデイングパケツト発生部２３を適
宜選択する。

【００６２】ステツプＳＰ４０では選択された多重化バ
ツフア２０、２１からデータレートＲ′でパケツトデー
タＳＶＰ、ＳＡＰを１つずつバイトカウンタ２５を介し
て記録再生部１３に供給し、ステツプＳＰ４１において
供給されたパケツトデータＳＶＰ、ＳＡＰを記録媒体に
記録する。ステツプＳＰ４２では各多重化バツフア２
０、２１内のパケツトデータＳＶＰ、ＳＡＰの有無を判
断し、パケツトデータＳＶＰ、ＳＡＰが有る場合にはス
テツプＳＰ３８に戻り、パケツトデータＳＶＰ、ＳＡＰ
が無い場合にはステツプＳＰ４３に移る。

【００６３】ステツプＳＰ４３では、各多重化バツフア
２０、２１への書込みが終了したか否か、すなわち１ク
リツプ分のビデオパケツトデータＳＶＰ及びオーデイオ
パケツトデータＳＡＰはこれで終わりか否か判断し、ま
だある場合にはステツプＳＰ４４に移る。ステツプＳＰ
４４では、ＣＰＵ２４がセレクタ２２にパデイングパデ
イング発生部２３を選択することを指令するセレクタコ
ントロール信号ＣＮＴ１を送出することにより、続くス
テツプＳＰ４１においてパデイングパケツトデータＰＡ
Ｄを記録させる。

【００６４】一方ステツプＳＰ４３において１クリツプ
分のビデオパケツトデータＳＶＰ及びオーデイオパケツ
トデータＳＡＰの多重化がもう終了したと判断すると、
ステツプＳＰ４５に移り、ＣＰＵ２４がバイトカウンタ
２５からのカウント信号Ｓ３に基づいて多重化データＳ
ＭＵＸ′が決められた１クリツプ分のサイズに達してい
るか否か判断する。ここで否定結果が得られるとステツ
プＳＰ４６及びステツプＳＰ４７においてパデイングパ
ケツトデータＰＡＤを送出しこれを記録媒体に記録させ
た後再びステツプＳＰ４５に戻る。

【００６５】ステツプＳＰ４５において肯定結果が得ら
れると、このことは一定サイズ（すなわち時間長Ｔ）の
多重化データＳＭＵＸ′が形成され記録されたことを意
味し、このとき記録装置１０はステツプＳＰ４８に移つ
て１クリツプ分の多重化データＳＭＵＸ′の記録を終了
する。記録装置１０はステツプＳＰ４９において、次の
動画像信号を記録するか否かを確認し、記録する場合に
はステツプＳＰ３１に戻り、記録しない場合にステツプ
ＳＰ５０に移つて当該記録処理手順を終了する。

【００６６】図５に、記録装置１０によつて原信号Ｓ
Ｖ、ＳＡから多重化データＳＭＵＸ′を形成されるまで
のタイミングチヤートを示す。記録装置１０は時間長Ｔ
の動画像信号ＳＶ及びこれに付随するオーデイオ信号Ｓ
Ａを入力すると、これらをそれぞれ符号化処理すること
により動画像符号化データＳＶＣ及びオーデイオ符号化
データＳＡＣを形成する。このとき動画像符号化データ
ＳＶＣの符号化デイレイＤＬ１の方がオーデイオ符号化
デイレイＤＬ２よりも大きくなるため、遅延処理部１８
によつてオーデイオ符号化データＳＡＣを時間Ｔ_DLだけ
遅延させることにより、符号化デイレイの差を小さくす
る。

【００６７】次に記録装置１０は動画像符号化データＳ
ＶＣ及び遅延オーデイオ符号化データＳＡＣをパケツト
化することにより、動画像パケツトデータＳＶＰ（Ｖ
０、Ｖ１、……Ｖ_n-1 、Ｖ_n ）及びオーデイオパケツト
データＳＡＰ（Ａ０、Ａ１、……、Ａ_m-1 、Ａ_m ）を形
成する。

【００６８】次に記録装置１０は多重化バツフア２０、
２１に動画像パケツトデータＶ０〜Ｖ_n 、オーデイオパ
ケツトデータＡ０〜Ａ_n が格納され始めてから蓄積時間
Ｔｗだけ経過後に各パケツトデータの多重化を開始す
る。このとき多重化バツフア２０、２１への書込み時の
データレートＲ１、Ｒ２よりも速いデータレートＲ′
（＞Ｒ１＋Ｒ２）で各パケツトデータを読み出して多重
化する。またこの際、上述したように各多重化バツフア
２、２１の残量に基づいて多重化を制御する。さらに多
重化する動画像パケツトデータＳＶＰ′やオーデイオパ
ケツトデータＳＡＰ′が無い場合には、パデイングパケ
ツトＰを挿入する。

【００６９】この結果多重化データＳＭＵＸ′を、原信
号ＳＶ、ＳＡに等しい時間Ｔ内に収めることができる。
従つて、このような多重化データＳＭＵＸ′を記録媒体
に記録すれば、時間Ｔの原信号ＳＶ、ＳＡに対応する多
重化データＳＭＵＸ′を任意の順番で読み出した場合で
も、各多重化データＳＭＵＸ′を全て等しい時間で読み
出すことができる。この結果復号に必要なデータを記録
媒体から読み出す時間が各々のクリツプにおいて同じに
なるため、復号により得られる再生信号を途切れの無い
ものとすることができる。

【００７０】（２）再生装置 （２−１）構成 記録装置１０によつて記録された多重化データＳＭＵ
Ｘ′を再生する再生装置の構成を、図６に示す。再生装
置３０は記録再生部１３（図１）によつて、記録媒体へ
の多重化データＳＭＵＸ′の記録レートＲ′にほぼ等し
いレートで記録媒体から読み出された多重化データＳＭ
ＵＸ′をセレクタ３１及びヘツダ検出回路３２に供給す
る。ここで記録再生部１３によるデータ読出しレートを
記録時のデータレートＲ′と等しい値に選定すると、１
クリツプ分の多重化データＳＭＵＸ′の読出しに必要な
時間は、書込み時間と同じＴとなる。

【００７１】ヘツダ検出回路３２は多重化データＳＭＵ
Ｘ′の各パケツトに付加されたヘツダ情報に基づいてセ
レクタ３１にセレクタコントロール信号ＣＮＴ２を送出
する。これによりセレクタ３１はパケツトの種類（すな
わち動画像パケツトデータＳＶＰか、オーデイオパケツ
トデータＳＡＰか、またはパデイングパケツトデータＰ
ＡＤか）に応じて接続が切り換えられる。この結果多重
化データＳＭＵＸ′は、動画像パケツトデータＳＶ
Ｐ′、オーデイオパケツトデータＳＡＰ′及びパデイン
グパケツトデータＰＡＤに分離される。なおパデイング
パケツトデータＰＡＤが入力されたときには端子ｃが選
択されることにより破棄される。

【００７２】分離された動画像パケツトデータＳＶＰ′
は動画像用バツフア３３に一旦格納され、符号化レート
に等しいレート（すなわち動画像符号化データＳＶＣの
データレートＲ１）で出力される。出力された動画像パ
ケツトデータはデコード処理部３４によつて復号され、
このようにして動画像信号ＳＶが再生される。同様に、
分離されたオーデイオパケツトデータＳＡＰ′はオーデ
イオ用バツフア３５に一旦格納され、符号化レートに等
しいレート（すなわちオーデイオ符号化データＳＡＣの
データレートＲ２）で出力される。出力されたオーデイ
オパケツトデータはデコード処理部３６によつて復号さ
れ、オーデイオ信号ＳＡが再生される。

【００７３】なお動画像用バツフア３３、オーデイオ用
バツフア３５の容量は、それぞれ記録装置１０に設けら
れた多重化バツフア２０、２１の容量以上とされてお
り、これにより各バツフア３３、３５がオーバーフロー
しないようになされている。

【００７４】（２−２）動作 以上の構成において、再生装置３０は、図７に示すよう
な動作手順に従つて記録データを再生する。すなわち記
録装置３０はステツプＳＰ６０において再生動作を開始
すると、続くステツプＳＰ６１においてＣＰＵ（図示せ
ず）から記録再生部１３に媒体からの読出しポインタ
（このポインタはデータ記録時のものを使用する）が指
定されると、続くステツプＳＰ６２において記録再生部
１３によつて記録媒体から記録時と同レートＲ′で読出
しを開始する。

【００７５】次に再生装置３０はステツプＳＰ６３にお
いて、ヘツダ検出回路３２によつて各パケツトの先頭に
付加されたヘツダ情報を検出し、当該検出結果に基づい
てセレクタ３１によつて多重化データＳＭＵＰ′を形成
する各パケツトデータＶ０〜Ｖ_n 、Ａ０〜Ａ_m を各デー
タストリームＳＶＰ′、ＳＡＰ′に分離する。次にステ
ツプＳＰ６４において各データストリームＳＶＰ′、Ｓ
ＡＰ′をそれぞれ動画像用バツフア３３、オーデイオ用
バツフア３５に入力格納し、続くステツプＳＰ６５にお
いて各バツフア３３、３５から各デコード処理部３４、
３６に符号化レートＲ１、Ｒ２に等しいデータレートで
データを出力する。

【００７６】次にステツプＳＰ６６においてデコード処
理部３４、３６によつて動画像信号ＳＶ、オーデイオ信
号ＳＡを復号生成すると、続くステツプＳＰ６７におい
て１クリツプ分のデータ読出しが終了したか否か判断
し、未だ終了していない場合はステツプＳＰ６３に戻
る。これに対して１クリツプ分のデータ読出しが終了し
たと判断すると、ステツプＳＰ６８に移り、次のクリツ
プを連続して再生するか否か判断し、連続して再生する
場合にはステツプＳＰ６１に戻る。

【００７７】これに対して連続して再生しない場合には
ステツプＳＰ６９に移り、ここで各デコード処理部３
４、３６に設けられたバツフア残量が有るか否か判断す
る。そしてバツフア残量が無くなるとステツプＳＰ７０
に移つて再生（すなわちデコード処理部３４、３６によ
る復号処理）を終了し、続くステツプＳＰ７１において
再生動作を終了する。

【００７８】（３）実施例の効果 以上の構成によれば、一定時間Ｔの動画像信号ＳＶ及び
これに付随するオーデイオ信号ＳＡを、常に一定時間長
Ｔの多重化データＳＭＵＸ′とすることができることに
より、記録媒体に記録された全ての多重化データＳＭＵ
Ｘ′を一定時間Ｔで読み出すことができるようになる。
この結果任意に指定した複数の多重化データＳＭＵＸ′
を連続再生した場合に、途切れの無い再生信号を得るこ
とができる。

【００７９】（４）他の実施例 なお上述の実施例においては、パデイングパケツト発生
部２３を設け、多重化バツフア２０、２１内のパケツト
データＳＶＰ、ＳＡＰが存在しないときや１クリツプの
サイズ合せを行うときに、多重化データＳＭＵＸ′をパ
デイングパケツトＰＡＤによつて充填するようにした場
合について述べたが、例えば遅延処理部１８の遅延時間
Ｔ_DLや多重化バツフア２０、２１の読出しレートを適宜
選定することによりパデイングパケツトＰＡＤの必要性
をなくすることができれば、パデイングパケツト処理部
２３を省略するようにしても良い。

【００８０】また上述の実施例においては、記録装置１
０及び当該記録装置１０によつて記録されたデータを再
生する再生装置３０について述べたが、本発明はこれに
限らず、多重化データＳＭＵＸ′が記録された記録媒体
に適用することもできる。すなわちこのような記録媒体
を用いれば、記録された全ての多重化データＳＭＵＸ′
を等しい時間長で読み出すことができるため、上述の実
施例と同様の効果を得ることができる。この場合の記録
媒体としては、ハードデイスクや光磁気デイスク、また
は相変化型デイスク等を広く用いることができる。

【００８１】さらに上述の実施例においては、本発明を
記録装置１０及び再生装置３０に適用した場合について
述べたが、本発明はこれに限らず、例えばＡＶサーバ等
の伝送装置に適用した場合にも上述の実施例と同様の効
果を得ることができる。

【００８２】

【発明の効果】上述のように本発明によれば、ある一定
時間の動画像信号とこれに付随するオーデイオ信号を符
号化及び多重化して記録する場合に、パケツト化前又は
パケツト化後のオーデイオ符号化データを所定時間だけ
遅延させる遅延手段と、動画像パケツトデータ及び遅延
オーデイオパケツトデータを格納するバツフアメモリ
と、バツフアメモリへの格納が開始されてから所定時間
経過後に、格納された動画像パケツトデータ及びオーデ
イオパケツトデータの残量に基づいて選択的に、かつ格
納時のデータレート以上のデータレートで読み出すこと
により動画像パケツトデータ及びオーデイオパケツトデ
ータを多重化する多重化手段とを設け、これにより得た
多重化データを記録媒体に記録又は伝送するようにした
ことにより、時間長Ｔの原信号に対応する多重化データ
を一定の時間で読み出し又は受信することができるよう
になる。

【００８３】この結果任意の個数の画像信号と付随する
オーデイオ信号を連続再生する場合に、必要なデータを
読み出す時間を再生時間に等しくできるため、復号処理
後の実際の画像信号と付随するオーデイオ信号を途切れ
なく連続再生することが可能となる。

【図面の簡単な説明】

【図１】実施例による記録装置の構成を示すブロツク図
である。

【図２】多重化バツフアの残量に基づくバツフア選択処
理手順の一例を示すフローチヤートである。

【図３】多重化バツフアの残量に基づくバツフア選択処
理手順の一例を示すフローチヤートである。

【図４】記録装置の動作の説明に供するフローチヤート
である。

【図５】記録装置によつて一定時間Ｔの動画像信号とこ
れに付随するオーデイオ信号から多重化データを形成す
るまでの説明に供するタイミングチヤートである。

【図６】実施例による再生装置の構成を示すブロツク図
である。

【図７】再生装置の動作の説明に供するフローチヤート
である。

【図８】従来の記録再生装置の構成を示すブロツク図で
ある。

【図９】エンコードバツフア内のデータの推移を示すグ
ラフである。

【図１０】従来のエンコーダによつて一定時間Ｔの動画
像信号とこれに付随するオーデイオ信号から多重化デー
タを形成するまでの説明に供するタイミングチヤートで
ある。

【符号の説明】

１０……記録装置、１１……エンコーダ、１２……多重
化処理部、１３……記録再生部、１４……画像圧縮処理
部、１５……エンコードバツフア、１６……オーデイオ
符号化処理部、１７、１９……パケツト処理部、１８…
…遅延処理部、２０、２１……多重化バツフア、２２、
３１……セレクタ、２３……パデイングパケツト発生
部、２４……ＣＰＵ、２５……バイトカウンタ、２６…
…メインＣＰＵ、３０……再生装置、３２……ヘツダ検
出部、３３……動画像用バツフア、３４、３６……デコ
ード処理部、３５……オーデイオ用バツフア、ＳＶ……
動画像信号、ＳＡ……オーデイオ信号、ＳＶＣ……動画
像符号化データ、ＳＡＣ……オーデイオ符号化データ、
ＳＶＰ、ＳＶＰ′……動画像パケツトデータ、ＳＡＣ_DL
……遅延オーデイオ符号化データ、ＳＡＰ、ＳＡＰ′…
…オーデイオパケツトデータ、ＰＡＤ……パデイングパ
ケツトデータ、ＳＭＵＸ′……多重化データ、Ｓ１、Ｓ
２……バツフア情報信号、Ｓ３……カウント信号、Ｓ４
……記録制御信号、Ｓ５……エンコード制御信号、ＣＮ
Ｔ１……セレクタコントロール信号。

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁶ 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｈ０４Ｎ 7/081 Ｈ０４Ｎ 7/08 Ｚ

Claims (14)

【特許請求の範囲】
1. 【請求項１】ある一定時間分の動画像信号とこれに付随
   するオーデイオ信号をそれぞれ符号化した後多重化する
   ことにより多重化データを形成し、当該多重化データを
   所定の記録媒体に記録するデータ記録方法において、 動画像符号化データをパケツト化するステツプと、 オーデイオ符号化データを、所定時間だけ遅延処理した
   後パケツト化し又はパケツト化した後所定時間だけ遅延
   処理するステツプと、 得られた動画像パケツトデータ及び遅延オーデイオパケ
   ツトデータをそれぞれバツフアメモリに格納するステツ
   プと、 格納を開始してから所定時間経過後に、格納された動画
   像パケツトデータ又はオーデイオパケツトデータを上記
   バツフアメモリ内の上記動画像パケツトデータ及びオー
   デイオパケツトデータの残量に基づいて選択的に、かつ
   格納時のデータレート以上のデータレートで読み出すこ
   とにより上記動画像パケツトデータ及びオーデイオパケ
   ツトデータを時分割多重化するステツプと、 多重化された上記動画像パケツトデータ及びオーデイオ
   パケツトデータを上記記録媒体に書き込むステツプとを
   具えることを特徴とするデータ記録方法。
2. 【請求項２】上記動画像パケツトデータ及びオーデイオ
   パケツトデータを時分割多重化するステツプでは、 上記バツフアメモリ内に上記動画像パケツトデータ及び
   オーデイオパケツトデータの残量が無い場合には、上記
   動画像パケツトデータ及びオーデイオパケツトデータに
   代えてパデイングデータを多重化するようにすることを
   特徴とする請求項１に記載のデータ記録方法。
3. 【請求項３】上記動画像パケツトデータ及びオーデイオ
   パケツトデータを時分割多重化するステツプにおける上
   記経過時間は、上記動画像パケツトデータを格納するた
   めに割り当てられたバツフアメモリの容量をＢ、当該バ
   ツフアメモリに上記動画像パケツトデータを格納する際
   のデータレートをＲ１としたとき、次式で表わされる時
   間Ｔｗに選定されている 【数１】 ことを特徴とする請求項１に記載のデータ記録方法。
4. 【請求項４】ある一定時間分の動画像信号とこれに付随
   するオーデイオ信号をそれぞれ符号化した後多重化する
   ことにより多重化データを形成し、当該多重化データを
   所定の記録媒体に記録するデータ記録装置において、 動画像符号化データをパケツト化する動画像パケツト化
   手段と、 オーデイオ符号化データをパケツト化するオーデイオパ
   ケツト化手段と、 上記オーデイオ符号化データを、上記パケツト化前又は
   上記パケツト化後に所定時間だけ遅延させる遅延手段
   と、 得られた動画像パケツトデータと遅延オーデイオパケツ
   トデータを格納するバツフアメモリと、 上記バツフアメモリへの上記動画像パケツトデータ及び
   オーデイオパケツトデータの格納が開始されてから所定
   時間経過後に、格納された動画像パケツトデータ又はオ
   ーデイオパケツトデータを上記バツフアメモリ内の動画
   像パケツトデータ及びオーデイオパケツトデータの残量
   に基づいて選択的に、かつ格納時のデータレート以上の
   データレートで読み出すことにより、上記動画像パケツ
   トデータ及びオーデイオパケツトデータを時分割多重化
   するデータ多重化手段と、 上記多重化データを上記記録媒体に記録する記録手段と
   を具えることを特徴とするデータ記録装置。
5. 【請求項５】上記データ記録装置は、さらにパデイング
   データを発生するパデイングデータ発生手段を具え、 上記データ多重化手段は、上記バツフアメモリ内に上記
   動画像パケツトデータ及びオーデイオパケツトデータの
   残量が無い場合には、上記動画像パケツトデータ及びオ
   ーデイオパケツトデータに代えて上記パデイングデータ
   を多重化するようにすることを特徴とする請求項４に記
   載のデータ記録装置。
6. 【請求項６】上記データ多重化手段における上記経過時
   間は、上記バツフアメモリのうち上記動画像パケツトデ
   ータを格納するために割り当てられた容量をＢ、当該バ
   ツフアメモリに上記動画像パケツトデータを格納する際
   のデータレートをＲ１としたとき、次式で表わされる時
   間Ｔｗに選定されている 【数２】 ことを特徴とする請求項４に記載のデータ記録装置。
7. 【請求項７】ある一定時間分の動画像信号及びこれに付
   随するオーデイオ信号を符号化し、当該動画像符号化デ
   ータをパケツト化すると共にオーデイオ符号化データを
   所定時間だけ遅延処理した後パケツト化し又はパケツト
   化した後所定時間だけ遅延処理することにより動画像パ
   ケツトデータ及び遅延オーデイオパケツトデータを形成
   し、当該動画像パケツトデータ及びオーデイオパケツト
   データをバツフアメモリに格納し、格納を開始してから
   所定時間経過後に、格納された動画像パケツトデータ又
   はオーデイオパケツトデータを上記バツフアメモリ内の
   上記動画像パケツトデータ及びオーデイオパケツトデー
   タの残量に基づいて選択的に、かつ格納時のデータレー
   ト以上のデータレートで読み出すことにより時分割多重
   化されて所定の記録媒体に記録された多重化データを再
   生するデータ再生方法において、 上記記録媒体への上記多重化データの記録レートにほぼ
   等しいレートで上記記録媒体から上記多重化データを読
   み出すステツプと、 各パケツトのヘツダ情報に基づいて、上記多重化データ
   を動画像パケツトデータとオーデイオパケツトデータと
   に分離するステツプと、 分離された各データを記録時に用いた上記バツフアメモ
   リ以上の容量を有するバツフアメモリに格納し、当該バ
   ツフアメモリに格納された上記各データを記録時の符号
   化レートにほぼ等しいレートで読み出すステツプと、 読み出された各データを復号するステツプとを具えるこ
   とを特徴とするデータ再生方法。
8. 【請求項８】ある一定時間分の動画像信号及びこれに付
   随するオーデイオ信号を符号化し、当該動画像符号化デ
   ータをパケツト化すると共にオーデイオ符号化データを
   所定時間だけ遅延処理した後パケツト化し又はパケツト
   化した後所定時間だけ遅延処理することにより動画像パ
   ケツトデータ及び遅延オーデイオパケツトデータを形成
   し、当該動画像パケツトデータ及びオーデイオパケツト
   データをバツフアメモリに格納し、格納を開始してから
   所定時間経過後に、格納された動画像パケツトデータ又
   はオーデイオパケツトデータを上記バツフアメモリ内の
   上記動画像パケツトデータ及びオーデイオパケツトデー
   タの残量に基づいて選択的に、かつ格納時のデータレー
   ト以上のデータレートで読み出されることにより時分割
   多重化されて所定の記録媒体に記録された多重化データ
   を再生するデータ再生装置において、 上記記録媒体への上記多重化データの記録レートにほぼ
   等しいレートで上記記録媒体から上記多重化データを読
   み出すデータ読出し手段と、 各パケツトのヘツダ情報に基づいて、上記多重化データ
   を動画像パケツトデータとオーデイオパケツトデータと
   に分離するデータ分離手段と、 記録時に用いた上記バツフアメモリ以上の容量を有し、
   上記分離された各データを格納し、格納した各データを
   上記記録時の符号化レートにほぼ等しいレートで出力す
   るバツフアメモリと、 出力された各データを復号する復号手段とを具えること
   を特徴とするデータ再生装置。
9. 【請求項９】ある一定時間分の動画像信号とこれに付随
   するオーデイオ信号がそれぞれ符号化及びパケツト化さ
   れることにより形成された動画像パケツトデータとオー
   デイオパケツトデータとが、一定サイズの多重化データ
   として記録されていることを特徴とする記録媒体。
10. 【請求項１０】上記多重化データには、サイズ合せのた
    めのパデイングデータが含まれていることを特徴とする
    請求項９に記載の記録媒体。
11. 【請求項１１】ある一定時間分の動画像信号とこれに付
    随するオーデイオ信号をそれぞれ符号化した後多重化す
    ることにより多重化データを形成し、当該多重化データ
    を所定の伝送路を介して伝送するデータ伝送方法におい
    て、 動画像符号化データをパケツト化するステツプと、 オーデイオ符号化データを、所定時間だけ遅延処理した
    後パケツト化し又はパケツト化した後所定時間だけ遅延
    処理するステツプと、 得られた動画像パケツトデータ及び遅延オーデイオパケ
    ツトデータをそれぞれバツフアメモリに格納するステツ
    プと、 格納を開始してから所定時間経過後に、格納された動画
    像パケツトデータ又はオーデイオパケツトデータを上記
    バツフアメモリ内の上記動画像パケツトデータ及びオー
    デイオパケツトデータの残量に基づいて選択的に、かつ
    格納時のデータレート以上のデータレートで読み出すこ
    とにより、上記動画像パケツトデータ及びオーデイオパ
    ケツトデータを時分割多重化するステツプと、 多重化された上記動画像パケツトデータ及びオーデイオ
    パケツトデータを伝送路に出力するステツプとを具える
    ことを特徴とするデータ伝送方法。
12. 【請求項１２】ある一定時間分の動画像信号とこれに付
    随するオーデイオ信号をそれぞれ符号化した後多重化す
    ることにより多重化データを形成し、当該多重化データ
    を所定の伝送路を介して伝送するデータ伝送装置におい
    て、 動画像符号化データをパケツト化する動画像パケツト化
    手段と、 オーデイオ符号化データをパケツト化するオーデイオパ
    ケツト化手段と、 上記オーデイオ符号化データを、上記パケツト化前又は
    上記パケツト化後に所定時間だけ遅延させる遅延手段
    と、 得られた動画像パケツトデータと遅延オーデイオパケツ
    トデータを格納するバツフアメモリと、 上記バツフアメモリへの上記動画像パケツトデータ及び
    オーデイオパケツトデータの格納が開始されてから所定
    時間経過後に、格納された動画像パケツトデータ又はオ
    ーデイオパケツトデータを上記バツフアメモリ内の動画
    像パケツトデータ及びオーデイオパケツトデータの残量
    に基づいて選択的に、かつ格納時のデータレート以上の
    データレートで読み出すことにより、上記動画像パケツ
    トデータ及びオーデイオパケツトデータを時分割多重化
    するデータ多重化手段と、 上記多重化データを上記伝送路に出力する出力手段とを
    具えることを特徴とするデータ伝送装置。
13. 【請求項１３】ある一定時間分の動画像信号及びこれに
    付随するオーデイオ信号を符号化し、当該動画像符号化
    データをパケツト化すると共にオーデイオ符号化データ
    を所定時間だけ遅延処理した後パケツト化し又はパケツ
    ト化した後所定時間だけ遅延処理することにより動画像
    パケツトデータ及び遅延オーデイオパケツトデータを形
    成し、当該動画像パケツトデータ及びオーデイオパケツ
    トデータをバツフアメモリに格納し、格納を開始してか
    ら所定時間経過後に、格納された動画像パケツトデータ
    又はオーデイオパケツトデータを上記バツフアメモリ内
    の上記動画像パケツトデータ及びオーデイオパケツトデ
    ータの残量に基づいて選択的に、かつ格納時のデータレ
    ート以上のデータレートで読み出されることにより時分
    割多重化されて所定の伝送路に出力された多重化データ
    を受信するデータ伝送方法において、 各パケツトのヘツダ情報に基づいて、上記多重化データ
    を動画像パケツトデータとオーデイオパケツトデータと
    に分離するステツプと、 分離された各データを送信時に用いた上記バツフアメモ
    リ以上の容量を有するバツフアメモリに格納し、当該バ
    ツフアメモリに格納した上記各データを上記符号化時の
    符号化レートにほぼ等しいレートで読み出すステツプ
    と、 読み出された各データを復号するステツプとを具えるこ
    とを特徴とするデータ伝送方法。
14. 【請求項１４】ある一定時間分の動画像信号及びこれに
    付随するオーデイオ信号を符号化し、当該動画像符号化
    データをパケツト化すると共にオーデイオ符号化データ
    を所定時間だけ遅延処理した後パケツト化し又はパケツ
    ト化した後所定時間だけ遅延処理することにより動画像
    パケツトデータ及び遅延オーデイオパケツトデータを形
    成し、当該動画像パケツトデータ及びオーデイオパケツ
    トデータをバツフアメモリに格納し、格納を開始してか
    ら所定時間経過後に、格納された動画像パケツトデータ
    又はオーデイオパケツトデータを上記バツフアメモリ内
    の上記動画像パケツトデータ及びオーデイオパケツトデ
    ータの残量に基づいて選択的に、かつ格納時のデータレ
    ート以上のデータレートで読み出されることにより時分
    割多重化されて所定の伝送路に出力された多重化データ
    を受信するデータ伝送装置において、 各パケツトのヘツダ情報に基づいて、上記多重化データ
    を動画像パケツトデータとオーデイオパケツトデータと
    に分離するデータ分離手段と、 送信時に用いた上記バツフアメモリ以上の容量を有し、
    上記分離された各データを格納し、格納した各データを
    上記符号化時の符号化レートにほぼ等しいレートで出力
    するバツフアメモリと、 出力された各データを復号する手段とを具えることを特
    徴とするデータ伝送装置。