JPH0898109A - 音声信号処理回路と画像・音声デコーダ - Google Patents
音声信号処理回路と画像・音声デコーダInfo
- Publication number
- JPH0898109A JPH0898109A JP6229892A JP22989294A JPH0898109A JP H0898109 A JPH0898109 A JP H0898109A JP 6229892 A JP6229892 A JP 6229892A JP 22989294 A JP22989294 A JP 22989294A JP H0898109 A JPH0898109 A JP H0898109A
- Authority
- JP
- Japan
- Prior art keywords
- audio
- signal
- image
- audio signal
- bit stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
- H04N5/602—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals for digital sound signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Television Receiver Circuits (AREA)
- Synchronizing For Television (AREA)
Abstract
(57)【要約】
【目的】 ＭＰＥＧ音声のデコーダ回路で画像との同期
のための遅延に要するメモリ容量を削減し、かつ正確な
遅延時間を実現する。 【構成】 シーケンス発生回路６０５は音声のビットス
トリーム３００の同期パタン時刻からアンフォーマッタ
６０２、合成フィルタ６０３の動作を開始させ、最初の
１サンプル目の音声信号３０３が出力ラッチ４に格納さ
れた時点でアンフォーマッタ６０２、合成フィルタ６０
３の動作を一旦停止させる。音声のスタート信号３０５
によりアンフォーマッタ６０２、合成フィルタ６０３の
動作を再開させることで時間誤差なく音声信号３０３を
出力する。
のための遅延に要するメモリ容量を削減し、かつ正確な
遅延時間を実現する。 【構成】 シーケンス発生回路６０５は音声のビットス
トリーム３００の同期パタン時刻からアンフォーマッタ
６０２、合成フィルタ６０３の動作を開始させ、最初の
１サンプル目の音声信号３０３が出力ラッチ４に格納さ
れた時点でアンフォーマッタ６０２、合成フィルタ６０
３の動作を一旦停止させる。音声のスタート信号３０５
によりアンフォーマッタ６０２、合成フィルタ６０３の
動作を再開させることで時間誤差なく音声信号３０３を
出力する。
Description
【０００１】
【産業上の利用分野】本発明はディジタル圧縮音声信号
を伸張するとともに、それに付帯した画像信号を同期さ
せるための音声信号処理回路に関する。
を伸張するとともに、それに付帯した画像信号を同期さ
せるための音声信号処理回路に関する。
【０００２】
【従来の技術】近年、さまざまな分野で画像や音声の情
報を扱う要求が急速に高まりつつある。画像や音声は、
数値の記号の情報などと比べると情報量が多く、これら
の情報を効率良く伝送したり蓄積したりするために圧縮
技術が発達してきた。これは画像や音声の情報量を数分
の１にするもので、代表的な方式として、国際標準規格
であるＩＳＯ／ＩＥＣ−１１１７２に定められた、いわ
ゆるＭＰＥＧ規格がある。この規格は、システム、画
像、音声、規格一致試験の４項目に分けて規定されてい
る。このうちシステム規格は、符号化された画像、音声
の重畳方法と、同期について定められている。
報を扱う要求が急速に高まりつつある。画像や音声は、
数値の記号の情報などと比べると情報量が多く、これら
の情報を効率良く伝送したり蓄積したりするために圧縮
技術が発達してきた。これは画像や音声の情報量を数分
の１にするもので、代表的な方式として、国際標準規格
であるＩＳＯ／ＩＥＣ−１１１７２に定められた、いわ
ゆるＭＰＥＧ規格がある。この規格は、システム、画
像、音声、規格一致試験の４項目に分けて規定されてい
る。このうちシステム規格は、符号化された画像、音声
の重畳方法と、同期について定められている。
【０００３】ＭＰＥＧ規格で圧縮された音声信号を伸張
するデコーダの設計は、ＭＰＥＧの音声規格に準拠して
いれば良いが、多くの場合、画像に伴う音声を取り扱う
ので、システムの規格も考慮しなければならない。すな
わち、画像との同期のために、音声出力時刻を調整でき
る構成にする必要がある。
するデコーダの設計は、ＭＰＥＧの音声規格に準拠して
いれば良いが、多くの場合、画像に伴う音声を取り扱う
ので、システムの規格も考慮しなければならない。すな
わち、画像との同期のために、音声出力時刻を調整でき
る構成にする必要がある。
【０００４】図３はＭＰＥＧシステム規格で想定され
る、画像と音声を扱うデコーダのブロック図である。Ａ
／Ｖ分離回路１はＭＰＥＧビットストリーム７を画像の
ビットストリーム８と音声のビットストリーム９に分解
する。画像デコード部２は画像デコーダを含むブロック
で、画像のビットストリーム８をデコードし、画像信号
１０を出力する。同期制御回路３は画像と音声の同期の
ためのスタート信号１２，１３を出力する。音声デコー
ド部４は音声デコーダを含むブロックで、音声のビット
ストリーム９をデコードし、音声信号１１を出力する。
る、画像と音声を扱うデコーダのブロック図である。Ａ
／Ｖ分離回路１はＭＰＥＧビットストリーム７を画像の
ビットストリーム８と音声のビットストリーム９に分解
する。画像デコード部２は画像デコーダを含むブロック
で、画像のビットストリーム８をデコードし、画像信号
１０を出力する。同期制御回路３は画像と音声の同期の
ためのスタート信号１２，１３を出力する。音声デコー
ド部４は音声デコーダを含むブロックで、音声のビット
ストリーム９をデコードし、音声信号１１を出力する。
【０００５】ＭＰＥＧビットストリーム７中に含まれる
同期情報に従って、同期制御回路３が、適切な時刻に画
像デコード部２、音声デコード部４に対してスタート信
号１２，１３を発することによって、画像と音声の同期
が実現される。
同期情報に従って、同期制御回路３が、適切な時刻に画
像デコード部２、音声デコード部４に対してスタート信
号１２，１３を発することによって、画像と音声の同期
が実現される。
【０００６】次に、音声の同期方式の詳細を説明する。
【０００７】同期方式は、音声デコード部４のスタート
時刻に関する情報をＭＰＥＧビットストリーム７のパケ
ットの冒頭部に記録しておき、これに従って音声デコー
ド部４を制御することによって実現する。ＭＰＥＧビッ
トストリーム７の概略を図４に示す。同期方式にはＤＴ
Ｓ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍｐ）とＰＴ
Ｓ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍ
ｐ）がある。まずＤＴＳを説明する。
時刻に関する情報をＭＰＥＧビットストリーム７のパケ
ットの冒頭部に記録しておき、これに従って音声デコー
ド部４を制御することによって実現する。ＭＰＥＧビッ
トストリーム７の概略を図４に示す。同期方式にはＤＴ
Ｓ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍｐ）とＰＴ
Ｓ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍ
ｐ）がある。まずＤＴＳを説明する。
【０００８】ＤＴＳは音声デコーダがデコードを開始す
る時刻を表す。ＤＴＳを用いる場合の音声デコード部４
の構成は図５のようになる。
る時刻を表す。ＤＴＳを用いる場合の音声デコード部４
の構成は図５のようになる。
【０００９】ＦＩＦＯメモリ５は音声のビットストリー
ム９を蓄える先入れ先出し方式のバッファメモリで、音
声のスタート信号１３が入力されると蓄積した内容を音
声デコーダ６に出力する。音声デコーダ６は音声のビッ
トストリーム９をデコードし、音声信号１１を出力す
る。
ム９を蓄える先入れ先出し方式のバッファメモリで、音
声のスタート信号１３が入力されると蓄積した内容を音
声デコーダ６に出力する。音声デコーダ６は音声のビッ
トストリーム９をデコードし、音声信号１１を出力す
る。
【００１０】次に、図３，図５を参照して動作を説明す
る。ＭＰＥＧビットストリーム７からＡ／Ｖ分離回路１
が音声のビットストリーム９を分離し、音声デコード部
４のＦＩＦＯメモリ５に蓄積する。一方、同期制御回路
３はＤＴＳを検出する。ＤＴＳは音声のビットストリー
ム９のデコードを開始する時刻を表しており、その時刻
になると同期制御回路３は音声のスタート信号１３を音
声デコード部４のＦＩＦＯメモリ５に出力する。従っ
て、音声のビットストリーム９が音声デコーダ６に供給
され、デコードが開始され、デコードに例えば１０ｍｓ
程度の時間を要した後、音声信号１１が出力される。Ｄ
ＴＳ方式ではデコードに要する時間があらかじめ差し引
かれており、この方法で所望の時刻に音声を出力するこ
とができる。
る。ＭＰＥＧビットストリーム７からＡ／Ｖ分離回路１
が音声のビットストリーム９を分離し、音声デコード部
４のＦＩＦＯメモリ５に蓄積する。一方、同期制御回路
３はＤＴＳを検出する。ＤＴＳは音声のビットストリー
ム９のデコードを開始する時刻を表しており、その時刻
になると同期制御回路３は音声のスタート信号１３を音
声デコード部４のＦＩＦＯメモリ５に出力する。従っ
て、音声のビットストリーム９が音声デコーダ６に供給
され、デコードが開始され、デコードに例えば１０ｍｓ
程度の時間を要した後、音声信号１１が出力される。Ｄ
ＴＳ方式ではデコードに要する時間があらかじめ差し引
かれており、この方法で所望の時刻に音声を出力するこ
とができる。
【００１１】ところが、音声のデコードに要する時間は
一定ではないため、ＤＴＳ方式では、同期の精度が悪い
という欠点がある。音声のビットストリーム９は図６の
ように定められているが、同期パタンとデータの間のサ
イドインフォメーション部が約２ｍｓ程度の幅で変化す
る。実際に音声データの演算処理が始まるのはデータ部
が読み出される時刻からであるから、演算処理時間が一
定であったとしても、音声のビットストリーム９の冒頭
時刻から音声信号１１が出力されるまでの時間、すなわ
ち音声のスタート信号１３の出力から音声信号１１が出
力されるまでの時間は２ｍｓ程度の幅で変化する。この
時間は音声のビットストリーム９の内容に依存してお
り、音声のビットストリーム９をデコードするまでは予
測できないので、ＤＴＳ方式における同期時間の誤差と
なる。
一定ではないため、ＤＴＳ方式では、同期の精度が悪い
という欠点がある。音声のビットストリーム９は図６の
ように定められているが、同期パタンとデータの間のサ
イドインフォメーション部が約２ｍｓ程度の幅で変化す
る。実際に音声データの演算処理が始まるのはデータ部
が読み出される時刻からであるから、演算処理時間が一
定であったとしても、音声のビットストリーム９の冒頭
時刻から音声信号１１が出力されるまでの時間、すなわ
ち音声のスタート信号１３の出力から音声信号１１が出
力されるまでの時間は２ｍｓ程度の幅で変化する。この
時間は音声のビットストリーム９の内容に依存してお
り、音声のビットストリーム９をデコードするまでは予
測できないので、ＤＴＳ方式における同期時間の誤差と
なる。
【００１２】時間誤差を小さくした方法にＰＴＳ方式が
ある。ＰＴＳ方式を用いる場合の音声デコード部は図７
のようになる。音声デコーダ６Ａは音声のビットストリ
ーム９をデコードして音声信号１１を出力する。ＦＩＦ
Ｏメモリ５Ａは音声信号１１を蓄える先入れ先出し方式
のメモリで、音声のスタート信号１３を入力すると音声
信号１１の出力を開始する。
ある。ＰＴＳ方式を用いる場合の音声デコード部は図７
のようになる。音声デコーダ６Ａは音声のビットストリ
ーム９をデコードして音声信号１１を出力する。ＦＩＦ
Ｏメモリ５Ａは音声信号１１を蓄える先入れ先出し方式
のメモリで、音声のスタート信号１３を入力すると音声
信号１１の出力を開始する。
【００１３】次に、図３，図７を参照して動作を説明す
る。ＭＰＥＧビットストリーム７からＡ／Ｖ分離回路１
が音声のビットストリーム９を分離し、音声デコード部
４の音声デコーダ６Ａに入力する。これにより音声デコ
ーダ６Ａはただちにデコードを開始し、デコードに約１
０ｍｓを要した後、音声信号１１をＦＩＦＯメモリ５Ａ
に出力する。一方、同期制御回路３はＰＴＳを検出す
る。ＰＴＳは音声信号１１の出力を開始する時刻を表し
ており、その時刻になると音声のスタート信号１３を音
声デコード部４のＦＩＦＯメモリ５Ａに出力する。ＦＩ
ＦＯメモリ５Ａにはデコードが完了した音声信号１１が
格納されているので、ＰＴＳで示された時刻から正確に
音声信号１１の出力を開始することができる。
る。ＭＰＥＧビットストリーム７からＡ／Ｖ分離回路１
が音声のビットストリーム９を分離し、音声デコード部
４の音声デコーダ６Ａに入力する。これにより音声デコ
ーダ６Ａはただちにデコードを開始し、デコードに約１
０ｍｓを要した後、音声信号１１をＦＩＦＯメモリ５Ａ
に出力する。一方、同期制御回路３はＰＴＳを検出す
る。ＰＴＳは音声信号１１の出力を開始する時刻を表し
ており、その時刻になると音声のスタート信号１３を音
声デコード部４のＦＩＦＯメモリ５Ａに出力する。ＦＩ
ＦＯメモリ５Ａにはデコードが完了した音声信号１１が
格納されているので、ＰＴＳで示された時刻から正確に
音声信号１１の出力を開始することができる。
【００１４】このようにＰＴＳ方式では同期時間の誤差
が小さい。しかしながら、この目的のために要するＦＩ
ＦＯメモリ５Ａの容量が大きいという欠点がある。音声
のビットストリームは、音声信号を圧縮したものである
から、ＤＴＳ方式を用いるＦＩＦＯメモリ５に比べてＰ
ＴＳ方式を用いるＦＩＦＯメモリ５Ａの方が大容量を要
する。圧縮率を８分の１とすると、８倍の容量が必要と
なる。例として、１６ビット精度のステレオ音声信号
を、周波数４８ｋＨｚでサンプリングしたＰＣＭ信号の
ビットレートは １６×２×４８＝１５３６［ｋｂｐｓ］ であり、これを８分の１の圧縮したビットストリームの
ビットレートは １５３６÷８＝１９２［ｋｂｐｓ］ となる。音声の同期のために０．１ｓ分のデータをＦＩ
ＦＯメモリに蓄えるとすると、ＤＴＳの場合は １９２×０．１＝１９．２［ｋｂ］（＝２．４キロバイ
ト） ＰＴＳの場合は、 １５３６×０．１＝ １５３６×０．１＝１５３．
６［ｋｂ］（＝１９．２キロバイト） となり、容量が大きい。したがって、ＰＴＳを用いる場
合の音声デコード部４の価格を上昇させる。また、１
９．２キロバイトのＦＩＦＯメモリは回路規模が大き
く、集積回路では数ミリ角のチップ面積を要するので、
音声デコード部４を集積化しようとする際に障害とな
る。
が小さい。しかしながら、この目的のために要するＦＩ
ＦＯメモリ５Ａの容量が大きいという欠点がある。音声
のビットストリームは、音声信号を圧縮したものである
から、ＤＴＳ方式を用いるＦＩＦＯメモリ５に比べてＰ
ＴＳ方式を用いるＦＩＦＯメモリ５Ａの方が大容量を要
する。圧縮率を８分の１とすると、８倍の容量が必要と
なる。例として、１６ビット精度のステレオ音声信号
を、周波数４８ｋＨｚでサンプリングしたＰＣＭ信号の
ビットレートは １６×２×４８＝１５３６［ｋｂｐｓ］ であり、これを８分の１の圧縮したビットストリームの
ビットレートは １５３６÷８＝１９２［ｋｂｐｓ］ となる。音声の同期のために０．１ｓ分のデータをＦＩ
ＦＯメモリに蓄えるとすると、ＤＴＳの場合は １９２×０．１＝１９．２［ｋｂ］（＝２．４キロバイ
ト） ＰＴＳの場合は、 １５３６×０．１＝ １５３６×０．１＝１５３．
６［ｋｂ］（＝１９．２キロバイト） となり、容量が大きい。したがって、ＰＴＳを用いる場
合の音声デコード部４の価格を上昇させる。また、１
９．２キロバイトのＦＩＦＯメモリは回路規模が大き
く、集積回路では数ミリ角のチップ面積を要するので、
音声デコード部４を集積化しようとする際に障害とな
る。
【００１５】
【発明が解決しようとする課題】上述した、圧縮音声を
伸張する音声信号処理回路は、画像との同期を正確に行
う構成では大容量のＦＩＦＯメモリを要し、ＦＩＦＯの
容量が少ない構成では同期時刻が不正確であるという欠
点があり、少ないＦＩＦＯメモリ容量と正確な同期時刻
を両立することはできなかった。
伸張する音声信号処理回路は、画像との同期を正確に行
う構成では大容量のＦＩＦＯメモリを要し、ＦＩＦＯの
容量が少ない構成では同期時刻が不正確であるという欠
点があり、少ないＦＩＦＯメモリ容量と正確な同期時刻
を両立することはできなかった。
【００１６】本発明の目的は、画像との同期を正確に行
い、かつ同期のために要するＦＩＦＯメモリの容量が少
ない音声信号処理回路および画像・音声デコーダを提供
することにある。
い、かつ同期のために要するＦＩＦＯメモリの容量が少
ない音声信号処理回路および画像・音声デコーダを提供
することにある。
【００１７】
【課題を解決するための手段】本発明の音声信号処理回
路は、ディジタル圧縮音声信号と、同期パタンと、前記
ディジタル圧縮音声信号の符号化形式を示すフォーマッ
ト情報とを所定の形式で整列させたビット列であるビッ
トストリームを入力し、前記同期パタンを検出する同期
パタン検出回路と、前記フォーマット情報に従って前記
圧縮音声信号を整列し、サブバンド音声信号を出力する
アンフォーマッタと、前記サブバンド音声信号を合成
し、音声信号を出力する合成フィルタと、前記音声信号
を一時的に記憶して出力する出力ラッチと、前記同期パ
タンによって同期化され、前記アンフォーマッタ、前記
合成フィルタ、前記出力ラッチの動作を制御するシーケ
ンス発生回路であって、音声信号の出力開始を指示する
スタート信号の入力を有し、前記同期パタンの検出によ
って前記アンフォーマッタ、前記合成フィルタの動作を
開始させて前記ディジタル圧縮音声信号を伸張し、最初
の音声信号を前記出力ラッチに記憶した時点で前記アン
フォーマッタ、前記合成フィルタ、前記出力ラッチの動
作を一時停止させ待機状態とし、前記スタート信号によ
って前記アンフォーマッタ、前記合成フィルタの動作を
再開させるシーケンス発生回路を有している。
路は、ディジタル圧縮音声信号と、同期パタンと、前記
ディジタル圧縮音声信号の符号化形式を示すフォーマッ
ト情報とを所定の形式で整列させたビット列であるビッ
トストリームを入力し、前記同期パタンを検出する同期
パタン検出回路と、前記フォーマット情報に従って前記
圧縮音声信号を整列し、サブバンド音声信号を出力する
アンフォーマッタと、前記サブバンド音声信号を合成
し、音声信号を出力する合成フィルタと、前記音声信号
を一時的に記憶して出力する出力ラッチと、前記同期パ
タンによって同期化され、前記アンフォーマッタ、前記
合成フィルタ、前記出力ラッチの動作を制御するシーケ
ンス発生回路であって、音声信号の出力開始を指示する
スタート信号の入力を有し、前記同期パタンの検出によ
って前記アンフォーマッタ、前記合成フィルタの動作を
開始させて前記ディジタル圧縮音声信号を伸張し、最初
の音声信号を前記出力ラッチに記憶した時点で前記アン
フォーマッタ、前記合成フィルタ、前記出力ラッチの動
作を一時停止させ待機状態とし、前記スタート信号によ
って前記アンフォーマッタ、前記合成フィルタの動作を
再開させるシーケンス発生回路を有している。
【００１８】また、本発明の画像・音声デコーダは、デ
ィジタル圧縮音声信号と、同期パタンと、前記ディジタ
ル圧縮音声信号の符号化形式を示すフォーマット情報
と、画像信号とを所定の形式で整列させたビット列であ
るビットストリーム入力し、画像のビットストリームと
音声のビットストリームに分解するＡ／Ｖ分離回路と、
前記ビットストリーム中に含まれる同期情報に従って、
画像および音声のスタート信号を出力する同期制御回路
と、前記画像のビットストリームをデコードし、前記画
像のスタート信号にしたがって、画像信号を出力する画
像デコード部と、前記音声のビットストリームをデコー
ドし、前記音声のスタート信号にしたがって、音声信号
を出力する音声デコード部とを有し、前記音声デコード
部は、請求項１記載の音声信号処理回路と、前記音声の
ビットストリームを蓄え、前記同期パターン検出回路に
出力するＦＩＦＯメモリを含む。
ィジタル圧縮音声信号と、同期パタンと、前記ディジタ
ル圧縮音声信号の符号化形式を示すフォーマット情報
と、画像信号とを所定の形式で整列させたビット列であ
るビットストリーム入力し、画像のビットストリームと
音声のビットストリームに分解するＡ／Ｖ分離回路と、
前記ビットストリーム中に含まれる同期情報に従って、
画像および音声のスタート信号を出力する同期制御回路
と、前記画像のビットストリームをデコードし、前記画
像のスタート信号にしたがって、画像信号を出力する画
像デコード部と、前記音声のビットストリームをデコー
ドし、前記音声のスタート信号にしたがって、音声信号
を出力する音声デコード部とを有し、前記音声デコード
部は、請求項１記載の音声信号処理回路と、前記音声の
ビットストリームを蓄え、前記同期パターン検出回路に
出力するＦＩＦＯメモリを含む。
【００１９】
【作用】本発明は、音声のビットストリームを圧縮した
ままでメモリに蓄えておき、同期パタンの検出によりデ
ィジタル圧縮音声信号を伸張し、音声信号の１サンプル
目をラッチした状態で動作を停止し、音声のスタート信
号により動作を開始させ、音声信号の出力を開始させる
ようにしたものである したがって、メモリは、音声のビットストリームの入力
開始から音声出力をスタートする時刻までの間、音声の
ビットストリームを蓄える容量があればよく、これはＤ
ＴＳ方式の場合と同じであり、少ない容量で済む。ま
た、停止前、再開後の処理自体は通常のデコード処理で
あるが、今まさに音声を出力しようとする時間に処理を
停止して、スタート信号の直後から音声を出力し始める
ので、音声の画像との同期をＰＴＳ方式と同様に正確に
行うことができる。
ままでメモリに蓄えておき、同期パタンの検出によりデ
ィジタル圧縮音声信号を伸張し、音声信号の１サンプル
目をラッチした状態で動作を停止し、音声のスタート信
号により動作を開始させ、音声信号の出力を開始させる
ようにしたものである したがって、メモリは、音声のビットストリームの入力
開始から音声出力をスタートする時刻までの間、音声の
ビットストリームを蓄える容量があればよく、これはＤ
ＴＳ方式の場合と同じであり、少ない容量で済む。ま
た、停止前、再開後の処理自体は通常のデコード処理で
あるが、今まさに音声を出力しようとする時間に処理を
停止して、スタート信号の直後から音声を出力し始める
ので、音声の画像との同期をＰＴＳ方式と同様に正確に
行うことができる。
【００２０】同期信号の正確さについては、従来例のＤ
ＴＳ方式が２ｍｓ程度の誤差を有するのに対して、本発
明ではほぼ０である。また、ＦＩＦＯメモリの容量につ
いては従来例のＰＴＳ方式に対して、約８分の１（圧縮
率が８分の１の場合の例）である。
ＴＳ方式が２ｍｓ程度の誤差を有するのに対して、本発
明ではほぼ０である。また、ＦＩＦＯメモリの容量につ
いては従来例のＰＴＳ方式に対して、約８分の１（圧縮
率が８分の１の場合の例）である。
【００２１】
【実施例】次に、本発明の実施例について図面を参照し
て説明する。
て説明する。
【００２２】図１は本発明の一実施例のブロック図、図
２はシーケンス発生回路６０５の制御シーケンスを示す
フローチャートである。
２はシーケンス発生回路６０５の制御シーケンスを示す
フローチャートである。
【００２３】音声デコード部４００は音声のビットスト
リーム３００をデコードして音声信号３０３を出力する
ブロックで、従来例の音声デコード部４に対応するもの
である。ここで、音声のビットストリーム３００は、デ
ィジタル圧縮音声信号と、同期パターンと、ディジタル
圧縮音声信号の符号化形式を示すフォーマット情報を所
定の形式で整列させたビット列である。ＦＩＦＯメモリ
５００は音声のビットストリーム３００を蓄える先入れ
先出し方式のメモリで、従来例のＦＩＦＯメモリ５に対
応するものである。音声デコーダ６００は本発明の音声
信号処理回路であって、従来例の音声デコーダ６，６Ａ
に対応するものである。同期パタン検出回路６０１は音
声のビットストリーム３００の冒頭部分に存在する同期
パタンを検出し、シーケンス開始信号３０１を出力す
る。アンフォーマッタ６０２は音声のビットストリーム
３００のデータ部の数値を実値に変換し、整列してサブ
バンド音声信号３０２を出力する。このときサイドイン
フォメーション部に示されたスケールファクタなどの情
報を用いてデータ部の情報を修飾するとともに、各サブ
バンド毎に整列し順次出力する。合成フィルタ６０３は
サブバンド音声信号３０２を合成して音声信号３０３を
出力する。また、１サンプルの音声信号を出力するごと
に、音声信号をラッチするためのラッチ信号３０４を出
力する。出力ラッチ６０４は１サンプル分の音声信号を
一時記憶する１６ビット幅のラッチである。ラッチ信号
３０４により音声信号３０３をラッチし、出力する。
リーム３００をデコードして音声信号３０３を出力する
ブロックで、従来例の音声デコード部４に対応するもの
である。ここで、音声のビットストリーム３００は、デ
ィジタル圧縮音声信号と、同期パターンと、ディジタル
圧縮音声信号の符号化形式を示すフォーマット情報を所
定の形式で整列させたビット列である。ＦＩＦＯメモリ
５００は音声のビットストリーム３００を蓄える先入れ
先出し方式のメモリで、従来例のＦＩＦＯメモリ５に対
応するものである。音声デコーダ６００は本発明の音声
信号処理回路であって、従来例の音声デコーダ６，６Ａ
に対応するものである。同期パタン検出回路６０１は音
声のビットストリーム３００の冒頭部分に存在する同期
パタンを検出し、シーケンス開始信号３０１を出力す
る。アンフォーマッタ６０２は音声のビットストリーム
３００のデータ部の数値を実値に変換し、整列してサブ
バンド音声信号３０２を出力する。このときサイドイン
フォメーション部に示されたスケールファクタなどの情
報を用いてデータ部の情報を修飾するとともに、各サブ
バンド毎に整列し順次出力する。合成フィルタ６０３は
サブバンド音声信号３０２を合成して音声信号３０３を
出力する。また、１サンプルの音声信号を出力するごと
に、音声信号をラッチするためのラッチ信号３０４を出
力する。出力ラッチ６０４は１サンプル分の音声信号を
一時記憶する１６ビット幅のラッチである。ラッチ信号
３０４により音声信号３０３をラッチし、出力する。
【００２４】シーケンス発生回路６０５はアンフォーマ
ッタ６０２と合成フィルタ６０３の動作を制御信号３０
６，３０７により制御する。
ッタ６０２と合成フィルタ６０３の動作を制御信号３０
６，３０７により制御する。
【００２５】なお、本実施例におけるデコーダ全体の構
成は従来例の図３と同様である。また、音声のスタート
信号３０５はＰＴＳ方式を用いる。
成は従来例の図３と同様である。また、音声のスタート
信号３０５はＰＴＳ方式を用いる。
【００２６】次に、本実施例の動作を図２により説明す
る。同期パタン検出回路６０１が同期パタンを検出する
と、シーケンス発生回路６０５がシーケンス制御を開始
する。まず、アンフォーマッタ６０２、合成フィルタ６
０３の動作を開始させる（ステップ７０１）。従って、
アンフォーマッタ６０２、合成フィルタ６０３は音声の
ビットストリーム３００の同期パタンに続くヘッダ、サ
イドインフォメーション部、データ部を順次ＦＩＦＯメ
モリ５００から取り込みながら、アンフォーマッタ処
理、合成処理を行っていく。音声のビットストリーム３
００の１フレーム内には１１５２サンプル分のデータが
含まれているが、データ部の最初の１サンプル分を取り
込み、１サンプル分の合成フィルタ処理が終了した時点
で合成フィルタ６０３は音声信号３０３を出力すると共
にラッチ信号３０４を出力する。この後アンフォーマッ
タ６０２、合成フィルタ６０３の動作を停止させる（ス
テップ７０２，７０３）。すなわち音声信号の最初の１
サンプルを出力ラッチ６０４に記憶した状態で音声デコ
ーダ６００の各部が一時停止した状態となっている。な
お、音声のビットストリーム３００の入力開始時刻から
ステップ７０３までの時間は、途中にサイドインフォメ
ーションの取り込み時間が含まれるため２ｍｓ程度の幅
があり、正確には決まらない。
る。同期パタン検出回路６０１が同期パタンを検出する
と、シーケンス発生回路６０５がシーケンス制御を開始
する。まず、アンフォーマッタ６０２、合成フィルタ６
０３の動作を開始させる（ステップ７０１）。従って、
アンフォーマッタ６０２、合成フィルタ６０３は音声の
ビットストリーム３００の同期パタンに続くヘッダ、サ
イドインフォメーション部、データ部を順次ＦＩＦＯメ
モリ５００から取り込みながら、アンフォーマッタ処
理、合成処理を行っていく。音声のビットストリーム３
００の１フレーム内には１１５２サンプル分のデータが
含まれているが、データ部の最初の１サンプル分を取り
込み、１サンプル分の合成フィルタ処理が終了した時点
で合成フィルタ６０３は音声信号３０３を出力すると共
にラッチ信号３０４を出力する。この後アンフォーマッ
タ６０２、合成フィルタ６０３の動作を停止させる（ス
テップ７０２，７０３）。すなわち音声信号の最初の１
サンプルを出力ラッチ６０４に記憶した状態で音声デコ
ーダ６００の各部が一時停止した状態となっている。な
お、音声のビットストリーム３００の入力開始時刻から
ステップ７０３までの時間は、途中にサイドインフォメ
ーションの取り込み時間が含まれるため２ｍｓ程度の幅
があり、正確には決まらない。
【００２７】この後ＰＴＳで与えられた時刻になると、
音声のスタート信号３０５がシーケンス発生回路６０５
に入力される。これにより、シーケンス発生回路６０５
はアンフォーマッタ６０２、合成フィルタ６０３の動作
を再開させる（ステップ７０４，７０５）。ここで、最
初の１サンプルの音声信号を出力した状態から引き続き
処理を再開し、２サンプル目、３サンプル目と順次出力
していくので、音声のスタート信号３０５の入力からた
だちに音声信号３０３の出力を開始することになる。す
なわち、ＰＴＳで指定された時刻から正確に音声信号３
０３を出力し始めることになる。
音声のスタート信号３０５がシーケンス発生回路６０５
に入力される。これにより、シーケンス発生回路６０５
はアンフォーマッタ６０２、合成フィルタ６０３の動作
を再開させる（ステップ７０４，７０５）。ここで、最
初の１サンプルの音声信号を出力した状態から引き続き
処理を再開し、２サンプル目、３サンプル目と順次出力
していくので、音声のスタート信号３０５の入力からた
だちに音声信号３０３の出力を開始することになる。す
なわち、ＰＴＳで指定された時刻から正確に音声信号３
０３を出力し始めることになる。
【００２８】なお、ＦＩＦＯメモリ５００は、音声のビ
ットストリーム３０３の入力開始から、音声出力をスタ
ートする時刻までの間、音声のビットストリーム３００
を蓄える容量があればよい。これは従来のＤＴＳの場合
と同じであり、容量が少なくて済む。
ットストリーム３０３の入力開始から、音声出力をスタ
ートする時刻までの間、音声のビットストリーム３００
を蓄える容量があればよい。これは従来のＤＴＳの場合
と同じであり、容量が少なくて済む。
【００２９】
【発明の効果】以上説明した要に本発明は、画像との同
期を正確に行い、かつ同期のために要するＦＩＦＯメモ
リの容量が少なくて済む効果がある。
期を正確に行い、かつ同期のために要するＦＩＦＯメモ
リの容量が少なくて済む効果がある。
【図１】本発明の一実施例の音声信号処理回路のブロッ
ク図である。
ク図である。
【図２】図１中のシーケンス発生回路６０５の動作を示
すフローチャートである。
すフローチャートである。
【図３】ＭＰＥＧシステム規格で想定されたデコーダの
例を示す図である。
例を示す図である。
【図４】ＭＰＥＧビットストリームの概略を示す図であ
る。
る。
【図５】従来例のＤＴＳ方式の場合の音声デコード部の
ブロック図である。
ブロック図である。
【図６】ＭＰＥＧ音声ビットストリームの概略を示す図
である。
である。
【図７】従来例のＰＴＳ方式の場合の音声デコード部の
ブロック図である。
ブロック図である。
１ Ａ／Ｖ分離回路 ２ 画像デコード部 ３ 同期制御回路 ４，４００ 音声デコード部 ５，５Ａ，５００ ＦＩＦＯメモリ ６，６Ａ，６００ 音声デコーダ ３００ 音声のビットストリーム ３０１ シーケンス開始信号 ３０２ サブバンド音声信号 ３０３ 音声信号 ３０４ ラッチ信号 ３０５ 音声のスタート信号 ３０６，３０７ 制御信号 ６０１ 同期パタン検出回路 ６０２ アンフォーマッタ ６０３ 合成フィルタ ６０４ 出力ラッチ ６０５ シーケンス発生回路 ７０１〜７０５ ステップ
Claims (2)
- 【請求項１】 ディジタル圧縮音声信号と、同期パタン
と、前記ディジタル圧縮音声信号の符号化形式を示すフ
ォーマット情報とを所定の形式で整列させたビット列で
あるビットストリームを入力し、前記同期パタンを検出
する同期パタン検出回路と、 前記フォーマット情報に従って前記圧縮音声信号を整列
し、サブバンド音声信号を出力するアンフォーマッタ
と、 前記サブバンド音声信号を合成し、音声信号を出力する
合成フィルタと、 前記音声信号を一時的に記憶して出力する出力ラッチ
と、 前記同期パタンによって同期化され、前記アンフォーマ
ッタ、前記合成フィルタ、前記出力ラッチの動作を制御
するシーケンス発生回路であって、前記音声信号の出力
開始を指示するスタート信号の入力を有し、前記同期パ
タンの検出によって前記アンフォーマッタ、前記合成フ
ィルタの動作を開始させて前記ディジタル圧縮音声信号
を伸張し、最初の音声信号を前記出力ラッチに記憶した
時点で前記アンフォーマッタ、前記合成フィルタ、前記
出力ラッチの動作を一時停止させ待機状態とし、前記ス
タート信号によって前記アンフォーマッタ、前記合成フ
ィルタの動作を再開させるシーケンス発生回路を有する
音声信号処理回路。 - 【請求項２】 ディジタル圧縮音声信号と、同期パタン
と、前記ディジタル圧縮音声信号の符号化形式を示すフ
ォーマット情報と、画像信号とを所定の形式で整列させ
たビット列であるビットストリーム入力し、画像のビッ
トストリームと音声のビットストリームに分解するＡ／
Ｖ分離回路と、 前記ビットストリーム中に含まれる同期情報に従って、
画像および音声のスタート信号を出力する同期制御回路
と、 前記画像のビットストリームをデコードし、前記画像の
スタート信号にしたがって、画像信号を出力する画像デ
コード部と、 前記音声のビットストリームをデコードし、前記音声の
スタート信号にしたがって、音声信号を出力する音声デ
コード部とを有し、 前記音声デコード部は、請求項１記載の音声信号処理回
路と、前記音声のビットストリームを蓄え、前記同期パ
ターン検出回路に出力するＦＩＦＯメモリを含む画像・
音声デコーダ。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP6229892A JP2910575B2 (ja) | 1994-09-26 | 1994-09-26 | 音声信号処理回路と画像・音声デコーダ |
| DE69524343T DE69524343T2 (de) | 1994-09-26 | 1995-09-15 | Schaltung zum Verarbeiten eines Audiosignals und Video-/Audiodekoder |
| EP95114568A EP0703707B1 (en) | 1994-09-26 | 1995-09-15 | Audio signal processing circuit and video/audio decoder |
| US08/530,835 US5761437A (en) | 1994-09-26 | 1995-09-20 | Audio signal, processing circuit and video/audio decoder |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP6229892A JP2910575B2 (ja) | 1994-09-26 | 1994-09-26 | 音声信号処理回路と画像・音声デコーダ |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0898109A true JPH0898109A (ja) | 1996-04-12 |
| JP2910575B2 JP2910575B2 (ja) | 1999-06-23 |
Family
ID=16899361
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP6229892A Expired - Fee Related JP2910575B2 (ja) | 1994-09-26 | 1994-09-26 | 音声信号処理回路と画像・音声デコーダ |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US5761437A (ja) |
| EP (1) | EP0703707B1 (ja) |
| JP (1) | JP2910575B2 (ja) |
| DE (1) | DE69524343T2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008252585A (ja) * | 2007-03-30 | 2008-10-16 | Ｎｅｃディスプレイソリューションズ株式会社 | 映像処理プロセッサおよび映像遅延測定方法 |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3130464B2 (ja) * | 1996-02-02 | 2001-01-31 | ローム株式会社 | データ復号装置 |
| GB9705999D0 (en) * | 1997-03-22 | 1997-05-07 | Philips Electronics Nv | Video signal analysis and storage |
| US6191822B1 (en) * | 1997-06-20 | 2001-02-20 | Sony Corporation | Method of and apparatus for separating audio and video data from a combined audio/video stream of data |
| US5961626A (en) * | 1997-10-10 | 1999-10-05 | Motorola, Inc. | Method and processing interface for transferring data between host systems and a packetized processing system |
| KR100357642B1 (ko) * | 1998-03-31 | 2002-10-25 | 마츠시타 덴끼 산교 가부시키가이샤 | 전송 장치 및 전송 방법 |
| US6718507B1 (en) * | 2000-09-12 | 2004-04-06 | At&T Corp. | System and method for representing compressed information |
| WO2003042858A1 (en) * | 2001-11-13 | 2003-05-22 | Enikia Llc | Media content and data distribution and consumption |
| US20040186709A1 (en) * | 2003-03-17 | 2004-09-23 | Chao-Wen Chi | System and method of synthesizing a plurality of voices |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4703369A (en) * | 1983-09-26 | 1987-10-27 | Pioneer Electronic Corporation | Video format signal recording and reproducing method |
| JP3185413B2 (ja) * | 1992-11-25 | 2001-07-09 | ソニー株式会社 | 直交変換演算並びに逆直交変換演算方法及びその装置、ディジタル信号符号化及び／又は復号化装置 |
| JP3255308B2 (ja) * | 1992-12-18 | 2002-02-12 | ソニー株式会社 | データ再生装置 |
| AU672070B2 (en) * | 1993-02-26 | 1996-09-19 | Sony Corporation | Synchronization of audio/video information |
| EP0654199B1 (en) * | 1993-06-10 | 1999-05-26 | Sony Corporation | Rational input buffer arrangements for auxiliary information in video and audio signal processing systems |
| US5513128A (en) * | 1993-09-14 | 1996-04-30 | Comsat Corporation | Multispectral data compression using inter-band prediction |
| US5539663A (en) * | 1993-11-24 | 1996-07-23 | Intel Corporation | Process, apparatus and system for encoding and decoding video signals using temporal filtering |
| US5598352A (en) * | 1994-09-30 | 1997-01-28 | Cirrus Logic, Inc. | Method and apparatus for audio and video synchronizing in MPEG playback systems |
-
1994
- 1994-09-26 JP JP6229892A patent/JP2910575B2/ja not_active Expired - Fee Related
-
1995
- 1995-09-15 EP EP95114568A patent/EP0703707B1/en not_active Expired - Lifetime
- 1995-09-15 DE DE69524343T patent/DE69524343T2/de not_active Expired - Lifetime
- 1995-09-20 US US08/530,835 patent/US5761437A/en not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008252585A (ja) * | 2007-03-30 | 2008-10-16 | Ｎｅｃディスプレイソリューションズ株式会社 | 映像処理プロセッサおよび映像遅延測定方法 |
| JP4669854B2 (ja) * | 2007-03-30 | 2011-04-13 | Ｎｅｃディスプレイソリューションズ株式会社 | 映像処理プロセッサおよび映像遅延測定方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| DE69524343D1 (de) | 2002-01-17 |
| EP0703707B1 (en) | 2001-12-05 |
| JP2910575B2 (ja) | 1999-06-23 |
| DE69524343T2 (de) | 2002-08-22 |
| EP0703707A3 (en) | 1998-01-07 |
| US5761437A (en) | 1998-06-02 |
| EP0703707A2 (en) | 1996-03-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2938794B2 (ja) | データ同期化装置及びその方法 | |
| JP3063824B2 (ja) | オーディオ・ビデオ同期再生装置 | |
| JPH07303240A (ja) | デジタル記録音声及びビデオの同期式可変速度再生 | |
| JP2002016918A (ja) | マルチメディア多重化伝送システムおよび時間情報生成方法 | |
| JPH08242444A (ja) | 音声・ビデオ復号装置 | |
| JP2003510626A (ja) | 字幕情報表示機能を有する字幕ｍｐ３プレーヤー、字幕ｍｐ３情報構造及び字幕ｍｐ３情報再生方法 | |
| KR980010748A (ko) | 피다중화 데이터 생성장치, 인코딩된 데이터 재생 장치, 클럭 변환 장치, 인코딩된 데이터 기록 매체, 인코딩된 데이터 전송 매체, 피다중화 데이터 생성 방법, 인코딩된 데이터 재생 방법 및 클럭 변환 방법 | |
| JP3344379B2 (ja) | オーディオ・ビデオ同期制御装置及びその同期制御方法 | |
| JP3438223B2 (ja) | 多重化装置および多重化方法、並びに伝送装置および伝送方法 | |
| US5987418A (en) | Synchronous decoding of packetized audio for different reproduction modes | |
| JP2910575B2 (ja) | 音声信号処理回路と画像・音声デコーダ | |
| JPH09161456A (ja) | データ処理装置及びデータ処理方法 | |
| US6243032B1 (en) | Decode apparatus that can accommodate dynamic change in sample data attribute during decoding process | |
| US20020082845A1 (en) | Method and apparatus for synchronously reproducing audio and video data | |
| JPH08251543A (ja) | 画像及び音声情報の再生システム | |
| JP2000078531A (ja) | オ―ディオデ―タ編集方法、編集システム | |
| EP1312076B1 (en) | Audio signal transmission | |
| US20050069289A1 (en) | Transport stream recording/editing device and recording/editing method | |
| JP2500579B2 (ja) | 映像音声同期システム | |
| EP0898422A2 (en) | Audio signal decompressing apparatus | |
| JP2000308012A (ja) | 映像音声再生装置 | |
| JPH11317021A (ja) | 同期化装置 | |
| JPH11134804A (ja) | 映像音声同期システム | |
| JPH09232966A (ja) | 音声信号処理回路 | |
| JPH10174065A (ja) | 画像音声多重化データ編集方法およびその装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080409 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090409 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |