JP4380930B2 - オーディオ・ビデオ復号再生装置とその同期再生方法 - Google Patents
オーディオ・ビデオ復号再生装置とその同期再生方法 Download PDFInfo
- Publication number
- JP4380930B2 JP4380930B2 JP2001078988A JP2001078988A JP4380930B2 JP 4380930 B2 JP4380930 B2 JP 4380930B2 JP 2001078988 A JP2001078988 A JP 2001078988A JP 2001078988 A JP2001078988 A JP 2001078988A JP 4380930 B2 JP4380930 B2 JP 4380930B2
- Authority
- JP
- Japan
- Prior art keywords
- audio
- pts
- video
- decoding
- encoded data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Description
【発明の属する技術分野】
本発明は、オーディオ・ビデオを含むマルチメディア情報のディジタル通信・放送システムにおいて、伝送路誤りが生じても、オーディオ復号出力とビデオ復号出力との同期をとるようになされたオーディオ・ビデオ復号再生装置とその同期再生方法に関する。
【0002】
【従来の技術】
近年、オーディオ・ビデオの多彩な表現を可能とするマルチメディア情報のディジタル通信、ディジタル放送(衛星放送、地上波放送、ケーブル放送等)の実用化が盛んに進められている。このようなシステムの送信側における信号処理過程では、オーディオ信号とビデオ信号が別々に扱われ、ディジタル処理段階で互いに独立して符号化された後、多重されて伝送される。このため、受信側においては、受信出力からオーディオ符号化データ及びビデオ符号化データを分離した後、互いに独立して復号し、復号されたオーディオ信号とビデオ信号を、互いに同期をとって再生する必要がある。
【0003】
このように受信側で復号されたオーディオ信号及びビデオ信号の同期を取るために、例えばMPEG(Moving Picture Experts Group)2またはMPEG4等の方式では、送信側において、オーディオ符号化データ、ビデオ符号化データそれぞれのパケットヘッダにプレゼンテーションタイムスタンプ(以下、PTS)を含めるようにしている。このPTSは、パケット内の情報再生タイミングを決定するタイムスタンプで、その値は、オーディオ符号化データ、ビデオ符号化データそれぞれの生成中に動作しているシステムタイムクロック(以下、STC)を基準とする。このため、受信側において、送信側と同じSTCを動作させ、オーディオ符号化データ、ビデオ符号化データそれぞれの復号時にPTSを抽出し、STCが示す時刻に基づいて各PTSによって示される時刻に各符号化データの復号を開始することで、両復号信号の同期再生が実現される。
【0004】
上記のようなシステムの中で、従来のオーディオ・ビデオ復号再生装置では、(1)STCとPTSが最初に所定の関係になった時点でオーディオ復号部及びビデオ復号部に復号許可信号を送り、以降は復号許可を維持する手法、(2)オーディオ符号化データ及びビデオ符号化データの各パケットに含まれるPTSを全てチェックして、所定の関係であれば、オーディオ復号部またはビデオ復号部にそのたびに復号許可信号を送り、所定の関係を満たさなければ、復号不許可信号を送る手法、のいずれかの手法が取られていた。
【0005】
【発明が解決しようとする課題】
しかしながら、上記のような従来のオーディオ・ビデオ同期再生手法では、伝送路誤りが生じた時の対策が十分になされておらず、伝送路誤りが発生した場合には、誤ったタイミングでオーディオとビデオを再生してしまうことがあった。また、伝送路誤りの影響が大きい場合には、オーディオ及びビデオの出力信号が頻繁に途切れて、品質が極端に劣化してしまうこともあった。
【0006】
本発明は、上記のような問題を解決するためになされたもので、オーディオ符号データとビデオ符号データをそれぞれ復号する場合に、伝送路誤りによるオーディオ復号出力とビデオ復号出力の同期ずれや再生の途切れを低減することのできるオーディオ・ビデオ復号再生装置とその同期再生方法を提供することを目的とする。
【0007】
【課題を解決するための手段】
上記の目的を達成するために、本発明に係るオーディオ・ビデオ復号再生装置とその同期再生方法は、以下のように構成される。
【0008】
(1)オーディオ符号化データ、ビデオ符号化データがそれぞれ独立してパケット化され、各パケットには互いに同期して再生するためのシステム管理時刻(以下、STC)に基づく再生時刻管理情報(以下、PTS)が付加されたオーディオ・ビデオ多重信号を受け取り、オーディオ・ビデオ復号再生を行うオーディオ・ビデオ復号再生装置とその同期再生方法において、
前記多重信号をオーディオ符号化データとビデオ符号化データに分離する分離手段と、この分離手段で分離されたオーディオ符号化データを一時的に保存するオーディオ符号化データ保存手段と、前記分離手段で分離されたビデオ符号化データを一時的に保存するビデオ符号化データ保存手段と、前記オーディオ符号化データ保存手段からオーディオ符号化データを取り出して前記PTSを読み取るオーディオPTS読み取り手段と、前記ビデオ符号化データ保存手段からビデオ符号化データを取り出して前記PTSを読み取るビデオPTS読み取り手段と、前記STCを生成するSTC生成手段と、前記オーディオ符号化データ保存手段からオーディオ符号化データを取り出して、前記STCを基準に、前記オーディオPTSに基づいて復号処理を行うオーディオ復号手段と、前記ビデオ符号化データ保存手段からビデオ符号化データを取り出して、前記STCを基準に、前記ビデオPTSに基づいて復号処理を行うビデオ復号手段と、前記オーディオPTS読み取り手段及びビデオPTS読み取り手段で得られたそれぞれのPTSと前記STC生成手段で生成されたSTCとを比較して同期・非同期を検出し、同期が取れているときは復号許可の情報を、同期が取れていないときは復号不許可の情報を前記オーディオ復号手段及びビデオ復号手段に送出する同期制御手段とを具備し、
前記同期制御手段は、前記オーディオ符号化データ、ビデオ符号化データそれぞれについて、最初のPTSを検出したとき、予め設定される第1の固定値t1に対して式(1)
0<(PTS−STC)<t1 …(1)
を満たす場合にはそのPTSを誤り無しと判断し、式(1)を満たさない場合にはそのPTSを誤り有りと判断して、次のPTSをサーチするようにし、2番目以降のPTSが検出されたとき、予め設定される前記第1の固定値t1とは異なる第2の固定値t2に対して式(3)
|STC−PTS|<t2 …(3)
を満たす場合には、前記オーディオ復号手段、ビデオ復号手段に復号許可の情報を送るようにし、前記オーディオ復号手段及びビデオ復号手段は、それぞれ前記復号許可/不許可の情報に基づいて復号処理を開始/停止するようにしたことを特徴とする。
【0009】
(2)(1)の構成において、前記同期制御手段は、前記オーディオ符号化データ、ビデオ符号化データそれぞれについて、そのフレーム周期で各PTSと前記STCとを比較することを特徴とする。
【0011】
(3)(1)の構成において、前記同期制御手段は、検出したPTSを誤り無しと判断したとき、式(2)
STC−PTS≧0 …(2)
を満たす場合には前記オーディオ復号手段、ビデオ復号手段に復号許可の情報を送り、式(2)を満たしていない場合には前記オーディオ復号手段、ビデオ復号手段に復号不許可の情報を送ることを特徴とする。
【0012】
(4)(1)の構成において、前記オーディオ復号手段は、前記復号不許可の情報が与えられたとき、無音を出力することを特徴とする。
【0014】
(5)(1)の構成において、前記同期制御手段は、2番目以降のPTSについて、前記式(3)を満たさないPTSが連続でN回以下ならば前記オーディオ復号手段、ビデオ復号手段を自走させ、前記式(3)を満たさないPTSが連続してN(Nは予め設定される固定値)回を越える場合には、前記オーディオ符号化データ保存手段、ビデオ符号化データ保存手段にそれぞれ保存されたオーディオ符号化データの先頭まで読み飛ばすことによって保存データをリセットすることを特徴とする。
【0015】
(6)(1)の構成において、前記同期制御手段は、オーディオ復号手段がM(Mは予め設定される固定値)フレーム連続でPTSを検出することなく自走した場合には、前記オーディオ符号化データ保存手段、ビデオ符号化データ保存手段に蓄えられたオーディオ符号化データ、ビデオ符号化データの先頭まで読み飛ばすことによって保存データをリセットすることを特徴とする。
【0016】
(7)(1)の構成において、2番目以降のPTSを処理する過程で、前記FIFOメモリに蓄えられたオーディオ符号化データ、またはビデオ符号化データの先頭まで読み飛ばすことによってリセットした後の処理では、最初のPTSを検出した時と同じ処理に戻ることを特徴とする。
【0017】
すなわち、本発明は、最初のPTSを検出した時に、最初のPTSに関する所定の関係を満たしていれば、そのPTSを誤り無しと判断し、所定の関係を満たしていなければ、そのPTSを誤り有りと判断して次のPTSをサーチすることにより、最初のPTSの信頼性を高める。
【0018】
また、2番目以降のPTSに関しては、2番目以降のPTSに関する所定の関係を満たしていれば、オーディオ復号装置、及びビデオ復号装置に復号許可信号を送り、満たしていなければ復号不許可信号を送ることによって、状況に応じて、オーディオ復号装置、及びビデオ復号装置に許可/不許可を与える条件を変えている。
【0019】
以上により本発明では、最初のPTSの信頼性を高め、また2番目以降のPTSが誤った時に、その影響を少なくすることにより、オーディオ出力とビデオ出力の同期を取る際の誤り耐性を強くすることができる。
【0020】
【発明の実施の形態】
以下、図面を参照して、本発明の実施の形態を詳細に説明する。
【0021】
図1は本発明に係るオーディオ・ビデオ復号再生装置の構成を示すブロック図である。図1において、図示しない受信処理部で得られたオーディオ符号化データ及びビデオ符号化データの多重ストリームは、分離部1でオーディオ符号化データ、ビデオ符号化データに分離される。
【0022】
オーディオ符号化データは、先読み先出しメモリ(以下、FIFOメモリ)2に一旦保存され、要求に応じて順次読み出されてPTS読み取り部3及びオーディオ復号部4に供給される。PTS読み取り部3は、FIFOメモリ2からオーディオ符号化データを読み出して各パケットヘッダからPTSを読み取るもので、ここで得られたPTSはオーディオ復号部4及び同期制御部5に供給される。
【0023】
同様に、ビデオ符号化データは、FIFOメモリ6に一旦保存され、要求に応じて順次読み出されてPTS読み取り部7及びビデオ復号部8に供給される。PTS読み取り部7は、FIFOメモリ6からビデオ符号化データを読み出して各パケットヘッダからPTSを読み取るもので、ここで得られたPTSはビデオ復号部8及び同期制御部5に供給される。
【0024】
一方、図示しない受信処理部で生成されるシステムタイムクロック(以下、STC)はSTC読み取り部9に供給される。このSTC読み取り部9は、STCをカウントすることでシステム内の基準時刻を設定する。この基準時刻情報は同期制御部5に供給される。この同期制御部5は、STC読み取り部9で得られた基準時刻とPTS読み取り部3、7で得られたPTSが示す再生時刻とを比較する。そして、両者が所定の関係にあれば同期状態、それ以外では非同期状態と判定し、その判定結果に基づいて復号許可/不許可情報をオーディオ復号部4、ビデオ復号部8に送出する。
【0025】
上記オーディオ復号部4は、同期制御部5から復号許可の情報が送られてきた場合には、FIFOメモリ2からオーディオ符号化データを取り込み、STCによる基準時刻に基づいてPTSが示す再生時刻にオーディオ符号化データの復号処理を開始し、復号不許可の情報が送られてきた場合には、PTSの再生時刻によらず、オーディオ符号化データの復号処理を停止する。ここで、オーディオ復号部4は、独自のクロックを持ってフレーム周期で動作し、復号許可の情報が送られてきているにもかかわらず、PTS読み取り部3からPTSが送られてこない場合には、自走して復号処理を行う。
【0026】
同様に、上記ビデオ復号部8は、独自のクロックを持ってフレーム周期で動作しており、同期制御部5から復号許可の情報が送られてきた場合には、FIFOメモリ6からビデオ符号化データを取り込み、STCによる基準時刻に基づいてPTSが示す再生時刻にビデオ符号化データの復号処理を開始し、復号不許可の情報が送られてきた場合には、PTSの再生時刻によらず、ビデオ符号化データの復号処理を停止する。ここで、ビデオ復号部8は、独自のクロックを持ってフレーム周期で動作し、復号許可の情報が送られてきているにもかかわらず、PTS読み取り部7からPTSが送られてこない場合には、自走して復号処理を行う。
【0027】
以上のように構成されたオーディオ・ビデオ復号再生装置において、図2を参照してその同期再生動作を説明する。
【0028】
図2は同期再生動作を説明するためのフローチャートである。尚、ここではオーディオ符号化データを復号する場合について説明するが、当然、同様の処理をビデオ符号化データの復号処理や、その他同期を取る必要のある制御処理に適用することも可能である。
【0029】
まず、受信された多重符号化データは分離部1でオーディオ符号化データ及びビデオ符号化データに分離され、それぞれの復号系に送られる。このうち、オーディオ符号化データはFIFOメモリ2に蓄えられる。ここで、分離部1がFIFOメモリ2に書き込んだオーディオ符号化データの最後のアドレスをライトポインタ、PTS読み取り装置3がFIFOメモリから読み込んだオーディオ符号化データの最後のアドレスをリードポインタと表現する。
【0030】
PTS読み取り装置3は、ライトポインタとリードポインタの値を見て、FIFOメモリ2に読み込み可能なオーディオ符号化データが存在する場合には読み込みを開始し、読み込み可能なオーディオ符号化データが存在しない場合には読み込みを停止する。
【0031】
また、オーディオ復号部4は、独自のクロックを持ってフレーム周期で動作しており、各フレームの先頭でPTSが存在している場合には、同期制御部5からの復号許可/不許可情報をチェックし、PTSが存在していない場合には自走する。
【0032】
ここからの動作は、図2のフローチャートを参照して、[過程1]〜[過程5]に分けて説明する。
【0033】
[過程1]
PTS読み取り部3は、FIFOメモリ2から順次オーディオ符号化データを読み込んでPTSをサーチする(S1)。PTS読み取り装置3が最初のPTSを検出すると、その値は同期制御部5に送られる。この同期制御部5では、STC読み取り部9から送られてくるSTCに対して、システムごとに決定できる固定値としてt1を設定し、次式(1)を判定する(S2)。
0<(PTS−STC)<t1 …(1)
PTS読み取り部3から送られてきたPTSが式(1)を満たす場合には、そのPTSは誤り無しと判断して[過程2]に進む。PTS読み取り部3から送られてきたPTSが式(1)を満たしていない場合には、そのPTSは誤り有りと判断して、次のPTSをサーチし、[過程1]を繰り返す。また、[過程1]中では、同期制御部5は、オーディオ復号部4に対して復号不許可の情報を送る。この結果、オーディオ復号部5は復号処理を停止し、無音を出し続ける。
【0034】
尚、上記式(1)の意味するところは以下の通りである。
【0035】
すなわち、PTSは将来の出力時間を示すものであり、PTS検出時には必ず、
0<(PTS−STC)
が成り立つ。また、PTSがあまりに大きな値である場合、FIFOメモリ量の制約などから、システムに破綻をきたす可能性がある。実際、オーディオ符号化データの中に含まれるPTSが誤りなく送られてきた場合には、上記のような破綻をきたすことはない。以上のように、システム上破綻をきたさないような(PTS−STC)の上限を求め、t1を決定する。以上から、式(1)を満たさない場合には、PTSに誤りが生じていると判断するものである。
【0036】
[過程2]
同期制御部5は、STC読み取り部9から送られてくるSTCの値が、PTS読み取り部3から送られてきたPTSの値に対して次式(2)
STC−PTS≧0 …(2)
を満たすまで待機し、式(2)を満たした時点で[過程3]に進む(S3,S4)。
【0037】
[過程3]
同期制御部5は、式(2)を満たした後に、オーディオ復号部4に復号許可の情報を与える。この結果、オーディオ復号部4は復号を開始し、復号後、オーディオ信号の出力を開始する(S5)。
【0038】
ここで、図3に示すように、1パケット内に複数のオーディオフレームが存在する場合がある。この場合には、PTS読み取り部3から送られてきたPTSは、そのパケットの先頭のフレームiに対応するものであるので、パケット内の2番目以降のフレームi+1とi+2についてはPTSが存在しない。このため、オーディオ復号部4では、2番目以降のフレームについては自走して復号処理を実行する。
【0039】
これに対し、オーディオ符号化方式が非同期の場合には、図4に示すように、必ずしもパケットの先頭とフレームの先頭が一致するわけではない。この場合には、当該PTSは、当該パケット内でヘッダが最初に現れるフレームiに対応するものである。このため、2番目以降のフレームi+1、i+2についてはPTSが存在しないので、オーディオ復号部4は自走して復号処理を実行する。
【0040】
尚、上記式(2)の意味するところは以下の通りである。
【0041】
ビデオと同期を取るためには、STC=PTSとなった瞬間に出力を開始することが必要であるが、STC読み取り部9は周期的にSTCを読み込むため、その周期によっては厳密にSTC=PTSとなるSTCをタイミングよく読み込むことは難しい。このため、同期制御部5がオーディオ復号部4に復号許可を与える条件として、式(2)を満足させることで、判断処理に冗長を持たせている。
【0042】
次のPTSに対して、システムごとまたはデータごとに決定できる固定値としてt2を設定し、次式(3)を判定する(S6,S7)。
|STC−PTS|<t2 …(3)
式(3)を満たす場合には、オーディオ復号部4に復号許可の情報を送る。
【0043】
オーディオ復号部4は、当該PTSに対応するパケット内先頭のフレームを復号し、当該パケット内の2番目以降のフレームに関しては自走して、自走したフレーム数mをカウント後、[過程3]を繰り返す(S8,S9)。尚、自走フレーム数mが、システムごとに決定できる固定値Mを越える場合には、[過程5]へ進む。当該PTSが式(3)を満たさない場合には[過程4]へ進む。
【0044】
また、上記[過程3]の意味するところは以下の通りである。
【0045】
[過程2]から[過程3]へ遷移する過程において、式(2)の条件のように冗長を持たせており、またSTC読み取り部9が周期的にSTCを読み込むため、厳密にSTC=PTSとなるタイミングでSTCを読み込むことは難しい。上記を考慮して、システムごと、またはデータごとにt2を決定して、条件式(3)のように冗長を持たせている。
【0046】
1パケット内に存在するオーディオフレーム数には限りがある。そのフレーム数をαとすると、誤りのない正常系では、自走するフレーム数がαを越えることはあり得ない。自走するフレーム数がαを越えるということは、何らかの誤りが発生していることと等価であるため、αをもとにシステムごと、またはデータごとにMを決定し、連続して自走するフレーム数mがMを越えた場合には[過程5]に進むものとしている。
【0047】
[過程4]
ここでは、式(3)を満たさないPTSの連続発生回数nをカウントし、システムごとに決定できる固定値Nを超える場合には[過程5]へ、nがNを越えない場合には[過程3]へ進む(S10,S11)。
【0048】
ここで、式(3)を満たさないPTSの連続発生回数をカウントする意味は以下の通りである。
【0049】
誤りの無い正常系のシステムにおいては、PTSが式(3)を満たさない場合には即座に、同期が取れていないと判断することができる。しかしながら、無線通信、無線放送などのように、誤りが頻繁に発生するシステムにおいては、PTSに誤りが入るたびに、実際には同期が取れているにもかかわらず、同期が取れていないと判断してリセット、またはミュートなどの手段を取ってしまうことがあり、出力音の品質が悪くなる。[過程4]のような手段であれば、同期は取れていながらPTSが誤っている場合には、後から来る誤りの無いPTSに対して、式(3)を満たすことになり、誤りのあるPTSの影響を受けずに正常系へと戻ることができる。但し、(N+1)回連続で式(3)を満たさない場合には、誤りが原因であれ、同期が取れていないことが原因であれ、[過程5]へと進むことになる。
【0050】
[過程5]
同期が取れていないと判断してリセットする(S12)。リセット後は[過程1]へ戻る。尚、リセット手段は以下の通りである。
【0051】
(リセット方法)
同期制御部5はオーディオ復号部4に復号不許可の情報を与え、オーディオ復号部4は無音を出す。同時に、図5に示すように、FIFOメモリ2のリードポインタをライトポインタまで進める。これによって、分離部1がFIFOメモリ2に書み込み済みのオーディオ符号化データを全て読み飛ばすことになる。
【0052】
リセットすることの意味は以下の通りである。
【0053】
[過程5]へ来る過程においては、実際に同期が取れていない場合と、誤りが頻繁に発生している場合が考えられる。いずれの場合であっても、現状を維持しながら再同期することは難しいため、リセットすることによりリードポインタを初期状態に戻して、[過程1]から同期を取り直す。
【0054】
以上の[過程1]〜[過程5]を繰り返すことにより、誤りから受ける影響を少なくしながら、同期を保つことができる。
【0055】
したがって、上記構成によるオーディオ・ビデオ復号再生装置によれば、最初のPTSの信頼性を高め、また2番目以降のPTSが誤った時に、その影響を少なくすることができ、これによってオーディオ出力とビデオ出力の同期を取る際の誤り耐性を強くすることができ、伝送路誤りによるオーディオ復号出力とビデオ復号出力の同期ずれや再生の途切れを低減することができる。
【0056】
【発明の効果】
以上のように本発明によれば、オーディオ符号データとビデオ符号データをそれぞれ復号する場合に、伝送路誤りによるオーディオ復号出力とビデオ復号出力の同期ずれや再生の途切れを低減することのできるオーディオ・ビデオ復号再生装置とその同期再生方法を提供することができる。
【図面の簡単な説明】
【図1】 本発明の一実施形態におけるオーディオ・ビデオ復号再生装置の構成を示すブロック図。
【図2】 同実施形態のオーディオ符号化データ復号処理の手順を示すフローチャート。
【図3】 同実施形態において、パケット内のPTSとフレームの対応を説明するための図。
【図4】 同実施形態において、非同期符号化方式の場合のパケット内のPTSとフレームの対応を説明するための図。
【図5】 同実施形態において、リセット方法を説明するための図。
【符号の説明】
1…分離部
2…FIFOメモリ
3…PTS読み取り部
4…オーディオ復号部
5…同期制御部
6…FIFOメモリ
7…PTS読み取り部
8…ビデオ復号部
9…STC読み取り部
Claims (8)
- オーディオ符号化データ、ビデオ符号化データがそれぞれ独立してパケット化され、各パケットには互いに同期して再生するためのシステム管理時刻(以下、STC)に基づく再生時刻管理情報(以下、PTS)が付加されたオーディオ・ビデオ多重信号を受け取り、オーディオ・ビデオ復号再生を行うオーディオ・ビデオ復号再生装置において、
前記多重信号をオーディオ符号化データとビデオ符号化データに分離する分離手段と、
この分離手段で分離されたオーディオ符号化データを一時的に保存するオーディオ符号化データ保存手段と、
前記分離手段で分離されたビデオ符号化データを一時的に保存するビデオ符号化データ保存手段と、
前記オーディオ符号化データ保存手段からオーディオ符号化データを取り出して前記PTSを読み取るオーディオPTS読み取り手段と、
前記ビデオ符号化データ保存手段からビデオ符号化データを取り出して前記PTSを読み取るビデオPTS読み取り手段と、
前記STCを生成するSTC生成手段と、
前記オーディオ符号化データ保存手段からオーディオ符号化データを取り出して、前記STCを基準に、前記オーディオPTSに基づいて復号処理を行うオーディオ復号手段と、
前記ビデオ符号化データ保存手段からビデオ符号化データを取り出して、前記STCを基準に、前記ビデオPTSに基づいて復号処理を行うビデオ復号手段と、
前記オーディオPTS読み取り手段及びビデオPTS読み取り手段で得られたそれぞれのPTSと前記STC生成手段で生成されたSTCとを比較して同期・非同期を検出し、同期が取れているときは復号許可の情報を、同期が取れていないときは復号不許可の情報を前記オーディオ復号手段及びビデオ復号手段に送出する同期制御手段とを具備し、
前記同期制御手段は、前記オーディオ符号化データ、ビデオ符号化データそれぞれについて、最初のPTSを検出したとき、予め設定される第1の固定値t1に対して式(1)
0<(PTS−STC)<t1 …(1)
を満たす場合にはそのPTSを誤り無しと判断し、式(1)を満たさない場合にはそのPTSを誤り有りと判断して、次のPTSをサーチするようにし、2番目以降のPTSが検出されたとき、予め設定される前記第1の固定値t1とは異なる第2の固定値t2に対して式(3)
|STC−PTS|<t2 …(3)
を満たす場合には、前記オーディオ復号手段、ビデオ復号手段に復号許可の情報を送るようにし、
前記オーディオ復号手段及びビデオ復号手段は、それぞれ前記復号許可/不許可の情報に基づいて復号処理を開始/停止するようにしたことを特徴とするオーディオ・ビデオ復号再生装置。 - 前記同期制御手段は、前記オーディオ符号化データ、ビデオ符号化データそれぞれについて、そのフレーム周期で各PTSと前記STCとを比較することを特徴とする請求項1記載のオーディオ・ビデオ復号再生装置。
- 前記同期制御手段は、検出したPTSを誤り無しと判断したとき、式(2)
STC−PTS≧0 …(2)
を満たす場合には前記オーディオ復号手段、ビデオ復号手段に復号許可の情報を送り、式(2)を満たしていない場合には前記オーディオ復号手段、ビデオ復号手段に復号不許可の情報を送ることを特徴とする請求項2記載のオーディオ・ビデオ復号再生装置。 - 前記オーディオ復号手段は、前記復号不許可の情報が与えられたとき、無音を出力することを特徴とする請求項3記載のオーディオ・ビデオ復号再生装置。
- 前記同期制御手段は、2番目以降のPTSについて、前記式(3)を満たさないPTSが連続でN回以下ならば前記オーディオ復号手段、ビデオ復号手段を自走させ、前記式(3)を満たさないPTSが連続してN(Nは予め設定される固定値)回を越える場合には、前記オーディオ符号化データ保存手段、ビデオ符号化データ保存手段にそれぞれ保存されたオーディオ符号化データの先頭まで読み飛ばすことによって保存データをリセットすることを特徴とする請求項1記載のオーディオ・ビデオ復号再生装置。
- 前記同期制御手段は、オーディオ復号手段がM(Mは予め設定される固定値)フレーム連続でPTSを検出することなく自走した場合には、前記オーディオ符号化データ保存手段、ビデオ符号化データ保存手段に蓄えられたオーディオ符号化データ、ビデオ符号化データの先頭まで読み飛ばすことによって保存データをリセットすることを特徴とする請求項1記載のオーディオ・ビデオ復号再生装置。
- 2番目以降のPTSを処理する過程で、前記FIFOメモリに蓄えられたオーディオ符号化データ、またはビデオ符号化データの先頭まで読み飛ばすことによってリセットした後の処理では、最初のPTSを検出した時と同じ処理に戻ることを特徴とする請求項6記載のオーディオ・ビデオ復号再生装置。
- オーディオ符号化データ、ビデオ符号化データがそれぞれ独立してパケット化され、各パケットには互いに同期して再生するためのシステム管理時刻(以下、STC)に基づく再生時刻管理情報(以下、PTS)が付加されたオーディオ・ビデオ多重信号を受け取り、前記多重信号をオーディオ符号化データとビデオ符号化データに分離する分離手段と、
この分離手段で分離されたオーディオ符号化データを一時的に保存するオーディオ符号化データ保存手段と、
前記分離手段で分離されたビデオ符号化データを一時的に保存するビデオ符号化データ保存手段とを備え、
前記オーディオ符号化データ保存手段及びビデオ符号化データ保存手段にそれぞれ保存されたオーディオ符号化データ及びビデオ符号化データの復号再生を行うオーディオ・ビデオ復号再生装置の同期再生方法において、
前記オーディオ符号化データ保存手段からオーディオ符号化データを取り出して前記PTSを読み取るオーディオPTS読み取り過程と、
前記ビデオ符号化データ保存手段からビデオ符号化データを取り出して前記PTSを読み取るビデオPTS読み取り過程と、
前記STCを生成するSTC生成過程と、
前記オーディオ符号化データ保存手段からオーディオ符号化データを取り出して、前記STCを基準に、前記オーディオPTSに基づいて復号処理を行うオーディオ復号過程と、
前記ビデオ符号化データ保存手段からビデオ符号化データを取り出して、前記STCを基準に、前記ビデオPTSに基づいて復号処理を行うビデオ復号過程と、
前記オーディオPTS読み取り過程及びビデオPTS読み取り過程で得られたそれぞれのPTSと前記STC生成過程で生成されたSTCとを比較して同期・非同期を検出し、同期が取れているときは復号許可の情報を、同期が取れていないときは復号不許可の情報を前記オーディオ復号過程及びビデオ復号過程に送出する同期制御過程とを具備し、
前記同期制御過程は、前記オーディオ符号化データ、ビデオ符号化データそれぞれについて、最初のPTSを検出したとき、予め設定される固定値t1に対して式(1)
0<(PTS−STC)<t1 …(1)
を満たす場合にはそのPTSを誤り無しと判断し、式(1)を満たさない場合にはそのPTSを誤り有りと判断して、そのPTSを捨てて次のPTSをサーチするようにし、2番目以降のPTSが検出されたとき、予め設定される前記第1の固定値t1とは異なる第2の固定値t2に対して式(3)
|STC−PTS|<t2 …(3)
を満たす場合には、前記オーディオ復号手段、ビデオ復号手段に復号許可の情報を送るようにし、
前記オーディオ復号過程及びビデオ復号過程は、それぞれ前記復号許可/不許可の情報に基づいて復号処理を開始/停止するようにしたことを特徴とするオーディオ・ビデオ復号再生装置の同期再生方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001078988A JP4380930B2 (ja) | 2001-03-19 | 2001-03-19 | オーディオ・ビデオ復号再生装置とその同期再生方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001078988A JP4380930B2 (ja) | 2001-03-19 | 2001-03-19 | オーディオ・ビデオ復号再生装置とその同期再生方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002281445A JP2002281445A (ja) | 2002-09-27 |
JP4380930B2 true JP4380930B2 (ja) | 2009-12-09 |
Family
ID=18935514
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001078988A Expired - Fee Related JP4380930B2 (ja) | 2001-03-19 | 2001-03-19 | オーディオ・ビデオ復号再生装置とその同期再生方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4380930B2 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100561414B1 (ko) | 2003-02-24 | 2006-03-16 | 삼성전자주식회사 | 브라우저블 슬라이드 쇼 제공을 위한 데이터 복호 장치,그 복호 방법 및 이를 위한 정보저장매체 |
CN1961522B (zh) * | 2004-05-28 | 2011-07-20 | 松下电器产业株式会社 | 传输流处理装置和传输流处理方法 |
JP4162629B2 (ja) * | 2004-06-01 | 2008-10-08 | 三洋電機株式会社 | デコーダ装置 |
JP5059301B2 (ja) * | 2005-06-02 | 2012-10-24 | ルネサスエレクトロニクス株式会社 | 同期再生装置および同期再生方法 |
JP2007013714A (ja) * | 2005-06-30 | 2007-01-18 | Toshiba Corp | 情報再生装置及び情報再生方法 |
WO2009040955A1 (ja) * | 2007-09-28 | 2009-04-02 | Fujitsu Limited | エラー判定装置およびエラー判定方法 |
CN101340591B (zh) * | 2008-08-11 | 2011-04-06 | 华为终端有限公司 | 解码系统中接收视音频数据的处理方法及装置 |
US10397633B2 (en) * | 2012-06-22 | 2019-08-27 | Saturn Licensing Llc | Receiver apparatus and synchronization processing method thereof |
-
2001
- 2001-03-19 JP JP2001078988A patent/JP4380930B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2002281445A (ja) | 2002-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP0602943B1 (en) | Apparatus for reproducing multiplexed data from a record medium | |
KR100296528B1 (ko) | 다중화데이타분리장치및방법 | |
US5396497A (en) | Synchronization of audio/video information | |
US6618396B1 (en) | Data transmitting device, data receiving device, and data recording device | |
US5621772A (en) | Hysteretic synchronization system for MPEG audio frame decoder | |
EP0618728B1 (en) | Synchronization of audio/video information | |
US6449352B1 (en) | Packet generating method, data multiplexing method using the same, and apparatus for coding and decoding of the transmission data | |
EP1143719B1 (en) | Method and apparatus for concealing disk soft errors in recorded digital television signals | |
JP3094999B2 (ja) | オーディオ・ビデオ同期再生装置 | |
JP4039417B2 (ja) | 記録再生装置 | |
US6493362B1 (en) | Data recording method and data recording system | |
US20080101478A1 (en) | Decoding device and decoding method | |
RU2229174C2 (ru) | Запись информационных сигналов в формате mpeg на носитель информации и их воспроизведение | |
JP4380930B2 (ja) | オーディオ・ビデオ復号再生装置とその同期再生方法 | |
US20100211706A1 (en) | Buffer control device, buffer control method, and program | |
JP3558983B2 (ja) | デジタル放送の記録再生装置 | |
JPH06343065A (ja) | デコーディングシステム、デマルチプレクス方法および信号処理方法 | |
JP4288549B2 (ja) | 記録装置および方法、並びに再生装置および方法 | |
JP2002290910A (ja) | マルチメディア情報記録再生装置 | |
JPH11177581A (ja) | データ送信装置,データ受信装置およびデータ記録装置 | |
JP3917346B2 (ja) | 画像復号装置及び画像復号方法 | |
JP4373654B2 (ja) | マルチメディア復号再生装置とその同期制御方法 | |
JPH10210483A (ja) | 動画像再生装置及びその方法 | |
JP2001111610A (ja) | 情報データ伝送システムの受信装置 | |
JP2000287172A (ja) | 画像データ処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071128 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090521 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090526 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090727 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090825 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090915 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121002 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121002 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131002 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |