JP2000165863A - データ符号化・復号化装置 - Google Patents

Abstract

(57)【要約】 【課題】 ビデオデータとオーディオデータを復号した
際の同期ずれを少なくする。 【解決手段】 ビデオデータをＭＰＥＧ方式で符号化
し、オーディオデータをＡＴＲＡＣ方式で符号化し、オ
ーディオ信号に復号時のための時間情報を付加する際、
オーディオフレーム毎に、このオーディオフレームの先
頭に当たる符号化前のオーディオデータの先頭が、付加
すべき時間情報の基準となる時間のどの位置に存在する
かを判定する情報を付加する符号化装置と、この情報を
元にビデオデータとオーディオデータを復号する復号装
置からなる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、データ符号化・復
号化装置及びデータ符号化・復号化方法に係り、特に映
像データと音声データとの同期ずれの少ない符号化・復
号化装置に好適に利用できるものである。

【０００２】

【従来の技術】デジタル化された映像信号は非常に情報
量が多いため、容量に制限がある記録媒体に長時間記録
しようとすると、必然的に高圧縮符号化技術が必要にな
ってくる。

【０００３】高圧縮符号化技術の１つに国際符号化標準
のＭＰＥＧ方式（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘ
ｐａｒｔ Ｇｒｏｕｐ）があり、ＭＰＥＧ方式を用いた
ＡＶ製品としてＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔ
ｉｌｅ Ｄｉｓｃ）ｐｌａｙｅｒが挙げられる。

【０００４】また、音声信号の高圧縮符号化の１つにＡ
ＴＲＡＣ（Ａｄａｐｔｉｖｅ ＴＲａｎｓｆｏｒｍ Ａ
ｃｏｕｓｔｉｃ Ｃｏｄｉｎｇ）があり、ＡＴＲＡＣ方
式を用いたＡＶ製品として、ＭＤ（Ｍｉｎｉ Ｄｉｓ
ｃ）ｐｌａｙｅｒが挙げられる。

【０００５】双方の圧縮技術を用い１つのデータストリ
ームにまとめようとする場合、映像と音声が別々に符号
化されるため、復号時に映像と音声との同期を取って再
生を行うためのタイムスタンプが必要になってくる。

【０００６】以下にＭＰＥＧのタイムスタンプについて
説明する。図２にＭＰＥＧ方式のデータストリームの１
つであるプログラムストリームの構成を示す。

【０００７】プログラムストリームとは、１つのプログ
ラムを構成するものであり、２０１は符号化データの１
単位であるパックである。また、２０３は符号化された
ビデオデータが存在するビデオパケット、２０４は符号
化されたオーディオデータが存在するオーディオパケッ
ト、２０５は復号時の基準クロックであるＳＴＣ（Ｓｙ
ｓｔｅｍ Ｔｉｍｅ Ｃｌｏｃｋ）をセットするための
ＳＣＲ（Ｓｙｓｔｅｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃ
ｅ）、２０６は復号された信号を出力する時間を示すＰ
ＴＳ（ＰｒｅｓｅｎｔａｔｉｏｎＴｉｍｅ Ｓｔａｍ
ｐ）、２０７は圧縮された信号を復号する時間を示すＤ
ＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍｐ）であ
る。ここで、ビデオパケット中のＰＴＳ、ＤＴＳはピク
チャーの種類により、必ずしも両方必要であるというわ
けではない。

【０００８】復号時の基準クロックとなるＳＴＣは３３
ビット幅を持ち、同じ３３ビット幅のＳＣＲにてセット
され、９０ｋＨｚのクロックにて動作をする。３３ビッ
トという値は２４時間という１日の時間を９０ｋＨｚで
表現できるよう配慮されている。ＰＴＳ、ＤＴＳもそれ
ぞれ３３ビット幅である。

【０００９】ここで、ＮＴＳＣの１フレームは３０Ｈｚ
（約３３ｍｓｅｃ）であり、ＰＡＬの１フレームは２５
Ｈｚ（４０ｍｓｅｃ）であるため、９０ｋＨｚはそれぞ
れのフレーム周波数の公倍数となっている。このため、
９０ｋＨｚを単位としたＰＴＳ、ＤＴＳを正確な値で示
すことができるが、ＡＴＲＡＣ方式はサンプリング周波
数が４４．１ｋＨｚであるため、この周波数で信号処理
された１オーディオフレームに９０ｋＨｚを単位とした
ＰＴＳを付加する場合、多少のずれを生じる。

【００１０】上記課題を解決するビデオ、オーディオの
同期方法の１つとして、オーディオのＰＴＳを基準とす
る方法がある。これは、音声は少しでもずれると違和感
が生じるため、音声を最良のタイミングで出力するもの
であり、そのため、ＳＣＲでセットされたＳＴＣがオー
ディオフレームのＰＴＳの値と等しくなった時に最初の
オーディオフレームを出力する。

【００１１】この場合、先に説明したように、オーディ
オ信号は４４．１ｋＨｚで信号処理されているため、２
番目以降のオーディオフレームには、前のオーディオフ
レームの再生が終了した後にずれがなく再生されるＰＴ
Ｓが付加されているとは限らない。そこで、オーディオ
フレームは順番に再生し、再生されたオーディオフレー
ムに付加されたＰＴＳによりＳＴＣをセットしていく。

【００１２】ビデオフレームは、このセットされたＳＴ
Ｃに合わせて復号及び表示をするという方法である。

【００１３】しかし、オーディオフレームに付加された
ＰＴＳによりＳＴＣをセットしていくと、セット前のＳ
ＴＣとセット後のＳＴＣとの間に誤差が生じるため、ビ
デオフレームの復号、表示の時間に影響してくる。

【００１４】これを解決するために、例えばビデオのＰ
ＴＳ＞ＳＴＣであれば同じフレームを２回出力するなど
の遅延処理を施し、ビデオのＰＴＳ＜ＳＴＣであればフ
レームを１枚飛ばして出力するなどの促進処理を行う。
ところが、遅延処理、促進処理などは１回の処理に伴う
時間的変化量（例えば、ＮＴＳＣでは約１／３０秒）が
大きいので、促進処理の後に遅延処理が発生し、この後
また促進処理が発生するような悪循環が起こりうる。こ
のような悪循環がおこらないように出力時間にマージン
を設けるなどの対策が特開平９−２１４３５１号公報に
開示されている。

【００１５】

【発明が解決しようとする課題】上記のような対策を採
っても音声と映像の同期誤差はまだ大きく、使用者に違
和感を与えてしまう場合がある。

【００１６】本発明は上記課題を鑑み、これを解決した
データ符号化、復号化装置及びデータ符号化・復号化方
法を提供することを目的とするものである。

【００１７】

【課題を解決するための手段】上記課題を解決するため
に、本発明は以下の構成をとる。

【００１８】即ち、本発明は、ビデオデータを第１の符
号化方法で符号化する第１の符号化手と、オーディオデ
ータを第２の符号化方法で符号化する第２の符号化手段
と、少なくとも符号化された前記ビデオデータ及びオー
ディオデータ及び前記それぞれのデータを識別できる符
号と復号時に必要な情報を付加し混合するマルチプレッ
クス手段と、前記オーディオ信号に復号時のための時間
情報を付加する際、付加する時間情報を判定する判定手
段と、を有することを特徴とするデータ符号化装置であ
り、ここで、前記判定手段は、時間情報を付加すべきオ
ーディオフレーム毎に、このオーディオフレームの先頭
に当たる符号化前のオーディオデータの先頭が、付加す
べき時間情報の基準となる時間のどの位置に存在するか
を判定する位置判定手段と、時間情報を付加すべきオー
ディオデータの送信時間を、付加すべき時間情報の基準
となる時間で表すための表記手段と、を有してもよく、
更に、前記判定手段は、前記位置判定手段で判定された
結果及び前記表記手段で表わされた結果を記憶しておく
ための記憶手段を有してもよい。

【００１９】また、本発明は、前記符号化装置により符
号化されたデータを復号する復号化装置において、少な
くとも前記マルチプレックス手段にて混合されたデータ
を、ビデオデータ及びオーディオデータ及びその他の付
加された情報に分離するデマルチプレックス手段と、ビ
デオデータを復号するためのビデオデータ復号化手段
と、オーディオデータを復号するためのオーディオデー
タ復号化手段と、時間情報を含んだその他の付加された
情報を復号するための付加情報復号化手段と、を有する
ことを特徴とするデータ復号化装置であり、ここで、オ
ーディオデータに付加された時間情報の統計を取り、オ
ーディオデータに付加された時間情報で基準時間をセッ
トする際、この基準時間と誤差の最も少ない時間情報で
セットしてもよく、更に、セットされる前の基準信号と
セットされた後の基準信号の誤差を、垂直同期信号の期
間で吸収してもよい。

【００２０】

【発明の実施の形態】まず、本発明の考え方を図を参照
しながら説明し、次に回路構成の実施形態を説明する。
図３は、記録開始時のＰＴＳ付加過程と、再生開始時の
再生過程を示した図である。最初に記録開始時のＰＴＳ
付加過程について説明する。尚、以下の説明では実際の
信号処理回路での処理時間や伝播遅延時間は考慮しない
ものとする。

【００２１】３０１は記録開始直後の９０ｋＨｚ単位で
の時間的経過を示し、ｔ０でビデオデータの記録が開始
される。また、３０２はＭＰＥＧエンコーダでエンコー
ドされたビデオデータ、３０３はオーディオの信号処理
に使用される４４．１ｋＨｚのクロックであり、また、
３０４はオーディオデータであり、４４．１ｋＨｚの先
の半波長がＬチャンネルの信号、後の半波長がＲチャン
ネルの信号で、それぞれ１６ビットのシリアルデータで
ある。尚、これらの１６ビットの信号は２．８２２ＭＨ
ｚ（４４．１ｋＨｚ×６４）のクロックで出力される。

【００２２】また、３０５はＡＴＲＡＣエンコーダでエ
ンコードされたオーディオフレームである。ここで、オ
ーディオフレームはＡＴＲＡＣエンコーダに入力される
オーディオデータ３０４が１オーディオフレーム分蓄積
されてからオーディオフレーム３０５として出力され
る。また、オーディオデータは４４．１ｋＨｚごとにサ
ンプリングされるため、オーディオデータの記録開始は
ビデオデータの記録開始であるｔ０と同期することはほ
とんどなく、多少ずれる場合が多い。

【００２３】更に、３０６は記録開始直後のビデオデー
タに付加するＰＴＳから始まる９０ｋＨｚの値を示す。

【００２４】データストリーム作成時は、ｔ０で記録開
始されたビデオデータ３０２の最初のビデオフレームに
ｔａのＰＴＳを付加するが、オーディオデータのＰＴＳ
としては、ｔａ＋１の方がオーディオの記録開始点に近
いため、ｔａ＋１の値をＰＴＳとして付加する。

【００２５】次に再生過程を説明する。３０７はＳＴＣ
を示す。ＳＴＣとはデコーダ側の基準クロックである。
記録過程で、初期ＰＴＳとしてｔａを付加されたビデオ
データ３０２は、ＳＴＣがｔａの時に出力される。初期
ＰＴＳとしてｔａ＋１を付加されたオーディオフレーム
３０５は、ＳＴＣがｔａ＋１の時に４４．１ｋＨｚのク
ロックの立上りが存在する可能性が低いため、ｔａ＋１
に近い方の４４．１ｋＨｚのクロックの立上りで信号処
理し出力する。

【００２６】ここで、ＡＶ同期の取り方について図５を
用いて説明する。前記のように記録時にオーディオフレ
ームにＰＴＳを付加していくと、オーディオフレームは
固定長であるため、図５のようにオーディオフレームに
付加されるＰＴＳの値は、あるＰＴＳを堺にｔａｘから
ｔ（ａｘ＋１）になる（ｘは整数）。

【００２７】さらに、ＰＴＳの値をみていくと、あるＰ
ＴＳを堺に今度はｔ（ａｘ＋１）からｔａｘになる。統
計をとると、ＰＴＳがｔａｘからｔ（ａｘ＋１）になる
までの間に付加されるＰＴＳの個数、及びＰＴＳがｔ
（ａｘ＋１）からｔａｘになるまでの間に付加されるＰ
ＴＳの個数はほぼ一定の個数になる。

【００２８】また、ｔａｘからｔ（ａｘ＋１）になった
ときのＰＴＳ、及び、ｔ（ａｘ＋１）からｔａｘになっ
たときのＰＴＳが現在のＳＴＣともっとも誤差が大き
く、また、ｔａｘからｔ（ａｘ＋１）になるまでの間に
付加されるいくつかのＰＴＳの真中のＰＴＳ、あるいは
ｔａｘ＋１からｔａｘになるまでの間に付加されるいく
つかのＰＴＳの真中のＰＴＳの値が、現在のＳＴＣと最
も誤差の少ない値である。

【００２９】したがって、この真中のＰＴＳによりＳＴ
Ｃをセットすれば映像信号の復号時間、あるいは出力時
間に対する影響が最も少なくなる。

【００３０】図５ではｔａ２、ｔ（ａ３＋１）のＰＴＳ
が最もＳＴＣとの誤差が大きく、ｔ（ａ４＋１）やｔ
（ａ５＋１）が最も誤差が少ない。図６は、前記の方法
によりオーディオフレームに付加されているＰＴＳのｔ
５でＳＴＣをセットした場合を示す。

【００３１】６０１はセット前のＳＴＣの経過を示し、
６０２はセット後のＳＴＣの経過を示す。６０３のΔｔ
は、セット前のＳＴＣ６０２とセット後のＳＴＣ６０３
に生じた誤差を示す。Δｔの誤差の吸収は垂直同期期間
にて行う。

【００３２】次に、本発明の実施形態に係る回路構成を
図１に示す。まず、符号化部について説明する。図１の
１０１は符号化器の回路ブロック図であり、１０２はＡ
／Ｄ変換器、１０３はビデオエンコーダーであり、Ａ／
Ｄ変換されたビデオ信号をＭＰＥＧエンコーダで処理し
やすいデータに変換する。１０４はＭＰＥＧエンコーダ
であり、Ａ／Ｄ変換され、信号処理された映像信号をＭ
ＰＥＧの圧縮技術を用いて信号処理する。１０５はメモ
リーであり、ＭＰＥＧエンコーダ１０４の信号処理に使
用される。１０６はＡ／Ｄ変換器、１０７はＡＴＲＡＣ
エンコーダであり、Ａ／Ｄ変換されたオーディオ信号を
ＡＴＲＡＣの圧縮技術を用いて信号処理する。１０８は
ＡＴＲＡＣエンコーダで信号処理されたデータを一時記
憶するためのメモリである。

【００３３】ここで、ビデオエンコーダー１０３により
信号処理された映像信号と、Ａ／Ｄ変換されたオーディ
オ信号は、それぞれＭＰＥＧエンコーダ１０４、ＡＴＲ
ＡＣエンコーダ１０７に入力される手前では同期がとれ
ていると仮定する。１１３はマイコンである。この後に
説明するマルチプレクサー１０９の制御及び、ストリー
ムのためのパック、パケットデータの生成を行う。１０
９はマルチプレクサーである。マイコン１１３により制
御され、ＭＰＥＧエンコーダ１０４、ＡＴＲＡＣエンコ
ーダ１０７、マイコン１１３からのデータを選択し、次
のプロセスであるチャンネルコーディングへと送る。

【００３４】１１１は判定回路である。オーディオフレ
ームの先頭のデータとなるＡ／Ｄ変換後のオーディオデ
ータの先頭が、９０ｋＨｚのクロックの１クロック中の
前半部分に存在するのか、後半部分に存在するのかを１
オーディオフレームごとに判定する。また、１オーディ
オフレーム中の９０ｋＨｚのクロック数をカウントす
る。

【００３５】判定回路の動作をもう少し詳しく説明す
る。図７（１）の７０１は９０ｋＨｚのクロックを示
す。７０２は４４。１ｋＨｚのクロックを示す。７０３
はＡ／Ｄ変換された後のオーディオデータを示す。７０
４はオーディオフレームパルスである。このオーディオ
フレームパルス１区間中のオーディオデータが、ＡＴＲ
ＡＣエンコーダ１０７での信号処理後、１オーディオフ
レームとなる。７０５は１オーディオフレームパルスの
１区間中に存在する、９０ｋＨｚのクロックの個数をカ
ウントするカウンターである。７０６はオーディオデー
タの記録開始点を示す。オーディオデータの記録開始点
７０６での、４４。１ｋＨｚの立上りが、９０ｋＨｚの
クロック周期の前半部分に存在するのか、後半部分に存
在するのかを判定する。図７（２）は４４．１ｋＨｚの
立上りが前半部分に存在するので、判定を’０’とす
る。また、オーディオデータ記録開始点Ａ（７０６）か
ら記録を開始するため、この時点での９０ｋＨｚのカウ
ンター値は０である。この、判定結果’０’と、カウン
ター値０をレジスター１１２に保持しておく。

【００３６】次のオーディオフレームパルスの開始点Ｂ
では、図７（３）から４４．１ｋＨｚの立上りは９０ｋ
Ｈｚのクロック周期の後半部分に存在するので、判定結
果は’１’とする。９０ｋＨｚのカウンター値は図７
（１）の９０ｋＨｚカウンター７０５の値よりｎであ
る。この、判定結果の’１’と、カウンター値ｎをレジ
スター１１２に保持しておく。

【００３７】図２の２０３はプログラムストリーム中の
最初のビデオパケットである。初期ＰＴＳ２０６が含ま
れる。２０４はプログラムストリーム中の最初のオーデ
ィオパケットである。オーディオパケット中のＰＴＳ
は、 （オーディオフレームのＰＴＳ）＝（ビデオフレームの初期ＰＴＳ）＋（レジ スターに保持されている９０ｋＨｚのカウンター値）＋（レジスターに保持され ている判定結果）（式１） で表される。

【００３８】オーディオパケットの初期ＰＴＳ２０８
は、式１に当てはめると、レジスターに保持されている
９０ｋＨｚのカウンター値が０であるため、 （オーディオフレームの初期ＰＴＳ）＝（ビデオフレームの初期ＰＴＳ）＋（ 最初のレジスターに保持されている判定結果）（式２） で表される。

【００３９】つまり、例として図７（１）のレジスター
内部の値を上記（式１）、（式２）に当てはめると、 （オーディオフレームの初期ＰＴＳ）＝（ビデオフレー
ムの初期ＰＴＳ２番目ののオーディオフレームのＰＴ
Ｓ）＝（ビデオフレームの初期ＰＴＳ＋ｎ＋１） となる。

【００４０】次に、復号化部について説明する。図１の
１１４は復号化器の回路ブロック図であり、１２０はデ
マルチプレクサーであり、マイコン１１３によって制御
される。チャンネルコーディングである１２１から入力
されたプログラムストリームを、そのストリーム中のＩ
Ｄを確認しながら、ビデオデータであれば、ＭＰＥＧデ
コーダである１１７へ、オーディオデータであればメモ
リである１０９へ、それ以外のデータであれば、マイコ
ン１１３へ配信する。

【００４１】ここで、マイコンへ配信されるデータに
は、ＳＣＲ、ビデオフレームのＰＴＳ、ＤＴＳ、オーデ
ィオフレームのＰＴＳが含まれる。１１７はＭＰＥＧデ
コーダである。１１６はビデオデコーダーである。ビデ
オフレームに水平、垂直同期信号等を付加する。１１
５、１１８はＤ／Ａコンバーターである。１１９はＡＴ
ＲＡＣデコーダーである。

【００４２】ここで、図８に再生初期のデータ出力状況
を示す。８０１はデコーダの基準クロックであるＳＴＣ
を示す。マイコン１１３に配信された初期ＳＣＲによ
り、マイコン内部のＳＴＣをセットする。マイコン内部
には９０ｋＨｚのカウンターを持ち、初期ＳＴＣにセッ
トされた後は、このカウンターによってＳＴＣをカウン
トアップしていく。８０２はＭＰＥＧデコーダー１１７
で復号された初期ビデオデータを示す。初期ビデオデー
タのＰＴＳである８０３はｔ３であるとする。８０４の
ΔＴｖはビデオエンコーダー１１６での処理時間とＤ／
Ａコンバーター１１５での処理時間を加えたものであ
る。つまり、初期ビデオデータのＰＴＳ（８０３）がＳ
ＴＣと一致したときよりもΔＴｖだけ早めにビデオデー
タをＭＰＥＧデコーダーから出力することにより、初期
ビデオデータのＰＴＳ（８０３）とＳＴＣが一致した時
間にはアナログビデオ信号はｖｉｄｅｏ ｏｕｔ１２５
から出力されている。同様に、オーディオフレームの初
期ＰＴＳ８０６がＳＴＣと一致した時間にはアナログオ
ーディオ信号はａｕｄｉｏ ｏｕｔ１２６から出力され
るものとする。

【００４３】図４は、再生途中でのＡＶ同期の取り方の
フローチャートである。マイコン１１３で、オーディオ
フレームのＰＴＳの不連続点から不連続点までの間のＰ
ＴＳの個数をカウントし、平均値を出す。（ステップＳ
１〜Ｓ３）。ＰＴＳの個数の平均値において、奇数個で
あれば真中のＰＴＳを、偶数であれば真中２つのＰＴＳ
のどちらかをＳＴＣをセットするためのＰＴＳとし、こ
れによりＳＴＣをセットする（ステップＳ４〜Ｓ５）。
尚、セット前のＳＴＣの値とセット後のＳＴＣの値の誤
差をビデオエンコーダー１１６へ報告し、ビデオデコー
ダー１１６において垂直ブランキング期間等でその誤差
を調整する。尚、Ｄ／Ａ変換器１１５、ビデオエンコー
ダー１１６、ＭＰＥＧデコーダー１１７が同じクロック
で動作することにより、オーディオのＰＴＳによる、Ｓ
ＴＣのセットによって生じた誤差はそのままの誤差でビ
デオエンコーダーにより吸収される。

【００４４】

【発明の効果】本発明によれば、オーディオ、ビデオの
同期ずれを極力小さく抑えることができる。

【００４５】請求項１に記載の本発明に係わるデータ符
号化装置は、首記構成を取るため復号時にオーディオ、
ビデオの同期ずれを小さく抑えることができる。

【００４６】また、請求項２に記載の本発明に係わるデ
ータ符号化装置は、復号のための時間情報を判定して付
加することにより、復号時にオーディオ、ビデオの同期
ずれを小さく抑えることができる。

【００４７】また、請求項３に記載の本発明に係わるデ
ータ符号化装置は、復号のための時間情報を付加するた
めに必要なデータを一時記憶しておくため、時間情報の
付加タイミングに合わせることができる。

【００４８】また、請求項４に記載の本発明に係わるデ
ータ復号化装置は、本構成を取るためオーディオ、ビデ
オの同期ずれを小さく抑えることができる。

【００４９】また、請求項５に記載の本発明に係わるデ
ータ復号化装置は、復号化装置の基準時間をセットする
際もっとも誤差の少ない時間情報でセットするため、ビ
デオの出力時間への影響が少なくなる。

【００５０】また、請求項６に記載の本発明に係わるデ
ータ復号化装置は、誤差を垂直同期期間で吸収させるた
め、オーディオ、ビデオの同期ずれを小さく抑えること
ができる。

【図面の簡単な説明】

【図１】本発明を実施するための回路構成の１例であ
る。

【図２】プログラムストリームの構成である。

【図３】記録開始時のＰＴＳ付加過程と、再生開始時の
再生過程である。

【図４】再生途中でのＡＶ同期の取り方のフローチャー
トである。

【図５】ＰＴＳとして付加される値の遷移状況である。

【図６】オーディオＰＴＳによる、ＳＴＣのセット前後
の誤差である。

【図７】オーディオフレームの先頭データの、９０ｋＨ
ｚクロックによる判定についての説明図である。

【図８】再生初期のデータ出力状況を示した図である。

【符号の説明】

１０１ 符号化器、１０２ Ａ／Ｄ変換器、１０３ ビ
デオエンコーダー、１０４ ＭＰＥＧエンコーダ、１０
５ メモリー、１０６ Ａ／Ｄ変換器、１０７ＡＴＲＡ
Ｃエンコーダ、１０８ ＦＩＦＯ、１０９ マルチプレ
クサー、１１０チャンネルコーディング、１１１ 判定
回路、１１２ レジスター、１１３マイコン、１１４
復号化器、１１５ Ｄ／Ａ変換器、１１６ ビデオデコ
ーダー、１１７ ＭＰＥＧデコーダ、１１８ Ｄ／Ａ変
換器、１１９ ＡＴＲＡＣデコーダ、１２０ デマルチ
プレクサー、１２１ チャンネルデコーディング、１２
２ ディスク、２０１ パック、２０２ パックヘッダ
ー、２０３ 第１ビデオパケット、２０４ 第１オーデ
ィオパケット、２０５ ＳＣＲ、２０６ ＰＴＳ（第１
ビデオパケット）、２０７ ＤＴＳ、２０８ ＰＴＳ
（第１オーディオパケット）、２０９ ＰＴＳ（第２オ
ーディオパケット）、２１０ 第２オーディオパケッ
ト、２１１ ＰＴＳ（第３オーディオパケット）、２１
２ 第３オーディオパケット、３０１ ９０ｋＨｚクロ
ック、３０２ ビデオデータ、３０３４４．１ｋＨｚク
ロック、３０４ オーディオデータ、３０５ オーディ
オフレーム、３０６ ９０ｋＨｚ値、３０７ ９０ｋＨ
ｚ値（ＳＴＣ）、６０１ セット前のＳＴＣ、６０２
セット後のＳＴＣ、６０３ 誤差、７０１ ９０ｋＨｚ
クロック、７０２ ４４．１ｋＨｚクロック、７０３
オーディオデータ、７０４ オーディオフレームパル
ス、７０５ ９０ｋＨｚカウンター、８０１、ＳＴＣ
８０２、ビデオデータ、８０３ ビデオデータの初期Ｐ
ＴＳ、８０４ ビデオ系回路処理時間、８０５ オーデ
ィオデータ、８０６ オーディオデータの初期ＰＴＳ、
８０７ オーディオ系回路処理時間

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK32 MA01 MC26 PP04 RC26 RC32 RE03 SS30 UA02 UA05 UA34 5C063 AA20 AB03 AB07 AC01 AC05 CA16 CA20 5J064 AA01 BB09 BC01 BC02 BC06 BC07 BC14 BC25 BD03

Claims (6)

【特許請求の範囲】
1. 【請求項１】 ビデオデータを第１の符号化方法で符号
   化する第１の符号化手と、 オーディオデータを第２の符号化方法で符号化する第２
   の符号化手段と、 少なくとも符号化された前記ビデオデータ及びオーディ
   オデータ及び前記それぞれのデータを識別できる符号と
   復号時に必要な情報を付加し混合するマルチプレックス
   手段と、 前記オーディオ信号に復号時のための時間情報を付加す
   る際、付加する時間情報を判定する判定手段と、 を有することを特徴とするデータ符号化装置。
2. 【請求項２】 前記判定手段は、 時間情報を付加すべきオーディオフレーム毎に、このオ
   ーディオフレームの先頭に当たる符号化前のオーディオ
   データの先頭が、付加すべき時間情報の基準となる時間
   のどの位置に存在するかを判定する位置判定手段と、 時間情報を付加すべきオーディオデータの送信時間を、
   付加すべき時間情報の基準となる時間で表すための表記
   手段と、 を有することを特徴とする請求項１に記載のデータ符号
   化装置。
3. 【請求項３】 前記判定手段は、 前記位置判定手段で判定された結果及び前記表記手段で
   表わされた結果を記憶しておくための記憶手段を有する
   ことを特徴とする請求項２に記載のデータ符号化装置。
4. 【請求項４】 前記符号化装置により符号化されたデー
   タを復号する復号化装置において、 少なくとも前記マルチプレックス手段にて混合されたデ
   ータを、ビデオデータ及びオーディオデータ及びその他
   の付加された情報に分離するデマルチプレックス手段
   と、 ビデオデータを復号するためのビデオデータ復号化手段
   と、 オーディオデータを復号するためのオーディオデータ復
   号化手段と、 時間情報を含んだその他の付加された情報を復号するた
   めの付加情報復号化手段と、 を有することを特徴とするデータ復号化装置。
5. 【請求項５】 請求項４に記載のデータ復号化装置にお
   いて、 オーディオデータに付加された時間情報の統計を取り、
   オーディオデータに付加された時間情報で基準時間をセ
   ットする際、この基準時間と誤差の最も少ない時間情報
   でセットすることを特徴とするデータ復号化装置。
6. 【請求項６】 請求項４に記載のデータ復号化装置にお
   いて、 セットされる前の基準信号とセットされた後の基準信号
   の誤差を、垂直同期信号の期間で吸収することを特徴と
   したデータ復号化装置。