JP2009543140A - オーディオ復号のためのクロック補償技術 - Google Patents
オーディオ復号のためのクロック補償技術 Download PDFInfo
- Publication number
- JP2009543140A JP2009543140A JP2009518647A JP2009518647A JP2009543140A JP 2009543140 A JP2009543140 A JP 2009543140A JP 2009518647 A JP2009518647 A JP 2009518647A JP 2009518647 A JP2009518647 A JP 2009518647A JP 2009543140 A JP2009543140 A JP 2009543140A
- Authority
- JP
- Japan
- Prior art keywords
- audio
- clock
- decoded
- samples
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000005516 engineering process Methods 0.000 title description 8
- 238000000034 method Methods 0.000 claims abstract description 57
- 101000885321 Homo sapiens Serine/threonine-protein kinase DCLK1 Proteins 0.000 description 17
- 102100039758 Serine/threonine-protein kinase DCLK1 Human genes 0.000 description 17
- 239000000872 buffer Substances 0.000 description 14
- 238000003780 insertion Methods 0.000 description 7
- 230000037431 insertion Effects 0.000 description 7
- 230000001360 synchronised effect Effects 0.000 description 7
- 238000012217 deletion Methods 0.000 description 6
- 230000037430 deletion Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000012937 correction Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 230000006854 communication Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 206010036618 Premenstrual syndrome Diseases 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 229920003208 poly(ethylene sulfide) Polymers 0.000 description 1
- 229920006393 polyether sulfone Polymers 0.000 description 1
- 238000003752 polymerase chain reaction Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000012146 running buffer Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/003—Changing voice quality, e.g. pitch or formants
- G10L21/007—Changing voice quality, e.g. pitch or formants characterised by the process used
- G10L21/01—Correction of time axis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/04—Time compression or expansion
- G10L21/055—Time compression or expansion for synchronising with other signals, e.g. video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04J—MULTIPLEX COMMUNICATION
- H04J3/00—Time-division multiplex systems
- H04J3/02—Details
- H04J3/06—Synchronising arrangements
- H04J3/062—Synchronisation of signals having the same nominal but fluctuating bit rates, e.g. using buffers
- H04J3/0632—Synchronisation of packets and cells, e.g. transmission of voice via a packet network, circuit emulation service [CES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2368—Multiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4396—Processing of audio elementary streams by muting the audio signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Computer Hardware Design (AREA)
- Computer Networks & Wireless Communication (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
- Error Detection And Correction (AREA)
Abstract
【解決手段】
この開示は適切に計測される必要のあるオーディオ情報を復号するためのオーディオ復号技術について記述する。この開示に従って、復号されたオーディオ出力でのオーディオサンプルの数は、復号器クロックにおいて推定誤差を補償するために調整されることができる。すなわち、符号器クロックに復号器クロックを同期させるために復号器クロックを調整するのではなく、この開示は復号されたオーディオ出力の時間が適切に測られるのを保証するために復号されたオーディオ出力からのオーディオサンプルを追加するかまたは除去することを目的とする。このように、復号装置において調整可能または制御可能なクロックの必要性をなくすことができる。それはコストを減少し、および/または調整可能または制御可能なクロックを含んでいないレガシー装置(legacy devices)に、適切に計測される必要のあるオーディオ情報を復号して出力することを許可することができる。
【選択図】図1
Description
D1(PCRi−PCRi−1)/(TTSi−TTSi−1)、i>1
D1=1、i=1
この場合、PCRiはPCRが不連続に続くi番目のPCR更新である。また、TTSiは、PCRiと関連したTSIFタイムスタンプである。D1は、PCRおよびTTSのジッタを削除するためにフィルタされる。D1=1のとき、PCRおよびTSIFは同期している。D1が1以上である場合、PCRはTSIFより進んでいる。D1が1未満である場合、PCRはTSIFより遅れている。隣接したPCR更新がお互いに一致していない場合、PCRは不連続である。PCRが連続的な場合、隣接したPCR値間の違いは、PCRタイムスタンプ(ドリフトとジッタを考慮に入れて)間の違いとほぼ等しい。PCRが不連続の場合、PCR値は、タイムスタンプクロックによって予測されたPCR値の前後に大きくジャンプする。PCR不連続は、TSパケット中のフラグを使用して識別することができる。不連続フラグを含んでいるTSパケットがちょうど欠落された場合、受信機22は、不連続があるかすべてのPCR更新をチェックしてもよい。PCR不連続を検知する際、受信機22はタイミング調整部28および復号部26に通知してもよい。
DCLKj=(Nj*27E6)/SF
そこでは、DCLKjは、オーディオ復号部26からj番目のフィードバック間隔における27MHzのインクリメント(increment)数である。また、Njは、オーディオ復号部26のj番目のフィードバック間隔の中で終了したサンプルの数である。SFはオーディオサンプル周波数で単位はHzである。
D2=1、j=1
この場合、添字jは、PCR不連続の後のオーディオ復号部26からj番めのフィードバックを示す。PCR不連続が検知される場合は常に、D1およびD2の推定の両方とも再開されてもよいことに留意する。D1と同様に、D2は、DLCKおよびTTS中のジッタを削除するためにフィルタされることができるが、必ずしもD1と同じ時定数を使用する必要はない。D2=1のとき、DCLKおよびTSIFは同期される。D2が1以上である場合、DCLKはTSIFより進んでいる。D2が1未満である場合、DCLKはTSIFより遅れている。
D3=D1−D2
したがって、D1(PCR/TSIFドリフト)からD2(DCLK/TSIFドリフト)を引くことは、共通のタイムスタンプ(TSIF)を効果的に除去する。以下ではなぜ減算が有益であるかを説明する。もしD1およびD2が、1よりも大きく、かつほぼ等しい場合、PCRとDCLKは両方ともTSIFよりも進んでいて、DCLKに対するPCRのドリフトは小さい。もしD1およびD2が、1よりも小さくかつほぼ等しい場合、PCRとDCLKは両方ともTSIFよりも遅れていて、DCLKに対するPCRのドリフトもまた小さい。D1が1よりも大きく、D2が1未満である場合、PCRはTSIFより進んでおり、DCLKはTSIFより遅れており、DCLKに対するPCRのドリフトは潜在的に大きい。
t=1/(SF(D3−1))
D3が1未満である場合、1つのサンプルはt秒ごとに削除されてもよい。
t=1/(SF(1−D3)
補正間隔は、サンプル周波数の増加するほど減少し、符号器クロックと復号器クロックとの誤差が増加するほど減少する。最悪の場合(つまり、修正間の最小の時間間隔)は1.68秒(595ミリセカンドごとに1つのサンプル)かもしれない。サンプル周波数がその最大(例えば48kHz)にある場合、これが生じ得る。符号器クロック誤差はその最大(例えば±30ppm)にあり、復号器クロック誤差は、符号器クロックに対して逆向きに最大(例えば±5ppm)にある。
Claims (44)
- 符号器クロックに関連した第1タイミング情報を含むオーディオ情報を受信し、
復号器クロックに基づいた前記オーディオ情報のために第2タイミング情報を生成し、
前記第1タイミング情報および前記第2タイミング情報間の差に基づいて、前記符号器クロックに対する前記復号器クロックでの誤差を推定し、
オーディオサンプルを生成するために前記オーディオ情報を復号し、
前記復号器クロックにおける推定誤差を補償するために、復号されたオーディオ出力での前記オーディオサンプルの数を調整することを具備することを特徴とする方法。 - オーディオサンプルの前記数を調整することは、前記復号された出力に追加的なオーディオサンプルを挿入し、前記符号器クロックより遅い前記復号器クロックを補償することを具備することを特徴とする請求項1に記載の方法。
- 前記追加的なオーディオサンプルを挿入することは、無音のオーディオサンプルを挿入することを具備することを特徴とする請求項2に記載の方法。
- 前記追加的なオーディオサンプルを挿入することは、前記復号されたオーディオ出力における実質的に無音の期間を推定し、前記実質的に無音の期間に前記無音のオーディオサンプルを挿入することを具備することを特徴とする請求項3に記載の方法。
- 前記追加的なオーディオサンプルを挿入することは、補間されたオーディオサンプルを挿入することを具備することを特徴とする請求項2に記載の方法。
- オーディオサンプルの前記数を調整することは、前記復号された出力から前記オーディオサンプルの1つ以上を除去して、前記符号器クロックより速い前記復号器クロックを補償することを具備することを特徴とする請求項1に記載の方法。
- 前記オーディオサンプルの1つ以上を除去することは、実質的に無音のオーディオサンプルを除去することを具備することを特徴とする請求項6に記載の方法。
- 前記オーディオサンプルの1つ以上を除去することは、前記復号された出力での実質的に無音の期間を推定し、前記実質的に無音の期間から前記無音のオーディオサンプルを除去することを具備することを特徴とする請求項7に記載の方法。
- 前記オーディオ情報は、オーディオ・パケット内の符号化されたオーディオ情報を具備することを特徴とする請求項1に記載の方法。
- 前記オーディオ・パケットは、motion pictures expert group 2(MPEG−2)トランスポートストリーム(TS)プロトコルに適合することを特徴とする請求項9に記載の方法。
- オーディオサンプルの前記調整された数を含む前記復号されたオーディオ出力にビデオ復号を同期することをさらに具備することを特徴とする請求項1に記載の方法。
- 符号器クロックに関連した第1タイミング情報を含むオーディオ情報を受信するレシーバと、
前記オーディオ情報のために第2タイミング情報を生成する復号器クロックと、
前記第1タイミング情報および前記第2タイミング情報間の差に基づいて、前記符号器クロックに対する前記復号器クロックでの誤差を推定するタイミング調整部と、
オーディオサンプルを生成するために前記オーディオ情報を復号する復号部と、を具備し、
前記復号部は前記復号器クロックにおける推定誤差を補償するために、復号されたオーディオ出力での前記オーディオサンプルの数を調整することを特徴とする装置。 - 前記復号部は、前記復号された出力に追加的なオーディオサンプルを挿入し、前記符号器クロックより遅い前記復号器クロックを補償することを特徴とする請求項12に記載の装置。
- 前記復号部は、前記復号された出力に無音のオーディオサンプルを挿入することを特徴とする請求項13に記載の装置。
- 前記復号部は、前記復号されたオーディオ出力における実質的に無音の期間を推定し、前記実質的に無音の期間に前記無音のオーディオサンプルを挿入することを特徴とする請求項14に記載の装置。
- 前記復号部は、前記復号された出力へ補間されたオーディオサンプルを挿入することを特徴とする請求項13に記載の装置。
- 前記復号部は、前記復号された出力から前記オーディオサンプルの1つ以上を除去して、前記符号器クロックより速い前記復号器クロックを補償することを特徴する請求項12に記載の装置。
- 前記復号部は、前記復号された出力から本質的に無音のオーディオサンプルを除去することを特徴とする請求項17に記載の装置。
- 前記復号部は、前記復号された出力での実質的に無音の期間を推定し、前記実質的に無音の期間から前記無音のオーディオサンプルを除去することを特徴とする請求項18に記載の装置。
- 前記オーディオ情報は、オーディオ・パケット内の符号化されたオーディオ情報を具備することを特徴とする請求項12に記載の装置。
- 前記オーディオ・パケットは、motion pictures expert group 2(MPEG−2)トランスポートストリーム(TS)プロトコルに適合することを特徴とする請求項20に記載の装置。
- オーディオサンプルの前記調整された数を含む前記復号されたオーディオ出力にビデオ復号を同期するビデオ復号部をさらに具備することを特徴とする請求項1に記載の装置。
- 装置での実行上、該装置に、
符号器クロックに関連した第1タイミング情報を含むオーディオ情報を受信させ、
復号器クロックに基づいて前記オーディオ情報のために第2タイミング情報を生成させ、
前記第1タイミング情報および前記第2タイミング情報間の差に基づいて、前記符号器クロックに対する前記復号器クロックでの誤差を推定させ、
オーディオサンプルを生成するために前記オーディオ情報を復号させ、
前記復号器クロックにおける推定誤差を補償するために、復号されたオーディオ出力での前記オーディオサンプルの数を調整させる複数の命令を具備することを特徴とするコンピュータ読み取り可能な媒体。 - 前記命令は、前記装置に、追加的なオーディオサンプルを前記復号された出力に挿入させ、符号器クロックより遅い前記復号器クロックを補償させることを特徴とする請求項23に記載のコンピュータ読取り可能な媒体。
- 前記命令は、前記装置に前記復号された出力に無音のオーディオサンプルを挿入させることを特徴とする請求項24に記載のコンピュータ読取り可能な媒体。
- 前記命令は、前記装置に前記復号されたオーディオ出力における実質的に無音の期間を推定させ、前記実質的に無音の期間に前記無音のオーディオサンプルを挿入させることを特徴とする請求項25に記載のコンピュータ読取り可能な媒体。
- 前記命令は、前記装置に前記復号された出力へ補間されたオーディオサンプルを挿入させることを特徴とする請求項23に記載のコンピュータ読取り可能な媒体。
- 前記命令は、前記装置に前記復号された出力から前記オーディオサンプルの1つ以上を除去させ、前記符号器クロックより速い前記復号器クロックを補償させることを特徴とする請求項23に記載のコンピュータ読み取り可能な媒体。
- 前記命令は、前記装置に前記復号された出力から本質的に無音のオーディオサンプルを除去させることを特徴とする請求項28に記載のコンピュータ読取り可能な媒体。
- 前記命令は、前記装置に前記復号された出力での実質的に無音の期間を推定させ、前記実質的に無音の期間から前記無音のオーディオサンプルを除去させることを特徴とする請求項29に記載のコンピュータ読み取り可能な媒体。
- 前記オーディオ情報は、オーディオ・パケット内の符号化されたオーディオ情報を含むことを特徴とする請求項23に記載のコンピュータ読取り可能な媒体。
- 前記オーディオ・パケットは、motion pictures expert group 2(MPEG−2)トランスポートストリーム(TS)プロトコルに適合することを特徴とする請求項31に記載のコンピュータ読み取り可能な媒体。
- 前記命令は、前記装置にオーディオサンプルの前記調整された数を含む前記復号されたオーディオ出力にビデオ復号を同期させることを特徴とする請求項23に記載のコンピュータ読み取り可能な媒体。
- 符号器クロックに関連した第1タイミング情報を含むオーディオ情報を受信する手段と、
復号器クロックに基づいた前記オーディオ情報のために第2タイミング情報を生成する手段と、
前記第1タイミング情報および前記第2タイミング情報間の差に基づいて、前記符号器クロックに対する前記復号器クロックでの誤差を推定する手段と、
オーディオサンプルを生成するために前記オーディオ情報を復号する手段と、
前記復号器クロックにおける推定誤差を補償するために、復号されたオーディオ出力での前記オーディオサンプルの数を調整する手段と、を具備することを特徴とする装置。 - オーディオサンプルの前記数を調整する手段は、前記復号された出力に追加的なオーディオサンプルを挿入し、前記符号器クロックより遅い前記復号器クロックを補償することを特徴とする請求項34に記載の装置。
- オーディオサンプルの前記数を調整する手段は、前記復号されたオーディオ出力に無音のオーディオサンプルを挿入することを特徴とする請求項35に記載の装置。
- オーディオサンプルの前記数を調整する手段は、前記復号されたオーディオ出力における実質的に無音の期間を推定し、前記実質的に無音の期間に前記無音のオーディオサンプルを挿入することを特徴とする請求項36に記載の装置。
- オーディオサンプルの前記数を調整する手段は、前記復号されたオーディオ出力へ補間されたオーディオサンプルを挿入することを特徴とする請求項35に記載の装置。
- オーディオサンプルの前記数を調整する手段は、前記復号された出力から前記オーディオサンプルの1つ以上を除去して、前記符号器クロックより前記速い復号器クロックを補償することを特徴する請求項34に記載の装置。
- オーディオサンプルの前記数を調整する手段は、前記復号されたオーディオ出力から実質的に無音のオーディオサンプルを除去することを特徴とする請求項39に記載の装置。
- オーディオサンプルの前記数を調整する手段は、前記復号された出力での実質的に無音の期間を推定し、前記実質的に無音の期間から前記無音のオーディオサンプルを除去することを特徴とする請求項40に記載の装置。
- 前記オーディオ情報は、オーディオ・パケットの中に符号化されたオーディオ情報を含むことを特徴とする請求項34に記載の装置。
- 前記オーディオ・パケットは、motion pictures expert group 2(MPEG−2)トランスポートストリーム(TS)プロトコルに適合することを特徴とする請求項42に記載の装置。
- オーディオサンプルの前記調整された数を含む前記復号されたオーディオ出力にビデオ復号を同期する手段をさらに含むことを特徴とする請求項1に記載の装置。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US81931306P | 2006-07-06 | 2006-07-06 | |
US60/819,313 | 2006-07-06 | ||
US11/691,688 US9420332B2 (en) | 2006-07-06 | 2007-03-27 | Clock compensation techniques for audio decoding |
US11/691,688 | 2007-03-27 | ||
PCT/US2007/072980 WO2008006080A2 (en) | 2006-07-06 | 2007-07-06 | Clock drift compensation techniques for audio decoding |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009543140A true JP2009543140A (ja) | 2009-12-03 |
JP5259588B2 JP5259588B2 (ja) | 2013-08-07 |
Family
ID=38893086
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009518647A Expired - Fee Related JP5259588B2 (ja) | 2006-07-06 | 2007-07-06 | オーディオ復号のためのクロック補償技術 |
Country Status (7)
Country | Link |
---|---|
US (1) | US9420332B2 (ja) |
EP (1) | EP2038886B1 (ja) |
JP (1) | JP5259588B2 (ja) |
KR (1) | KR20090018853A (ja) |
CN (1) | CN101484939B (ja) |
AT (1) | ATE553474T1 (ja) |
WO (1) | WO2008006080A2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016104462A1 (ja) * | 2014-12-22 | 2016-06-30 | アイシン・エィ・ダブリュ株式会社 | 音声情報修正システム、音声情報修正方法、及び音声情報修正プログラム |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1328682C (zh) * | 2001-03-14 | 2007-07-25 | 诺基亚有限公司 | 用于实现即时信息客户机和即时信息用户独立身份的方法及设备 |
US9083994B2 (en) * | 2006-09-26 | 2015-07-14 | Qualcomm Incorporated | Method and system for error robust audio playback time stamp reporting |
US9794605B2 (en) * | 2007-06-28 | 2017-10-17 | Apple Inc. | Using time-stamped event entries to facilitate synchronizing data streams |
US8527075B2 (en) * | 2008-07-24 | 2013-09-03 | Qualcomm Incorporated | Method and apparatus for transmit and receive clock mismatch compensation |
US20100080331A1 (en) * | 2008-09-26 | 2010-04-01 | Qualcomm Incorporated | Method and apparatus for integrated clock mismatch compensation and packet loss concealment |
AU2009324536A1 (en) * | 2008-12-11 | 2011-07-14 | Proteus Digital Health, Inc. | Evaluation of gastrointestinal function using portable electroviscerography systems and methods of using the same |
US8978077B2 (en) * | 2009-02-23 | 2015-03-10 | Qualcomm Incorporated | Video content presentation |
EP2339761B1 (en) * | 2009-12-22 | 2012-07-11 | Mitsubishi Electric R&D Centre Europe B.V. | Method for synchronizing nodes |
TW201146007A (en) * | 2010-06-01 | 2011-12-16 | Sunplus Technology Co Ltd | Multimedia playing apparatus and multimedia data converter and converting method thereof |
US8285886B1 (en) * | 2010-08-30 | 2012-10-09 | Adobe Systems Incorporated | Live media playback adaptive buffer control |
US9052991B2 (en) | 2012-11-27 | 2015-06-09 | Qualcomm Incorporated | System and method for audio sample rate conversion |
US9978395B2 (en) * | 2013-03-15 | 2018-05-22 | Vocollect, Inc. | Method and system for mitigating delay in receiving audio stream during production of sound from audio stream |
CN103237012B (zh) * | 2013-03-29 | 2017-01-18 | 苏州皓泰视频技术有限公司 | 一种基于自由组件的多媒体数据处理方法 |
TWI556656B (zh) * | 2014-04-30 | 2016-11-01 | 微晶片科技公司 | 具有藍牙功能之音訊播放裝置及音訊播放方法 |
US10097874B2 (en) * | 2014-06-27 | 2018-10-09 | Qualcomm Incorporated | System and method for monitoring media stream buffers of media output devices in order to synchronize media content output |
KR200482611Y1 (ko) | 2015-01-30 | 2017-02-13 | 대우조선해양 주식회사 | 고소 작업 안전장비 및 이를 이용한 안전관리 시스템 |
KR20160002876U (ko) | 2015-02-10 | 2016-08-18 | 대우조선해양 주식회사 | 유압장비의 선반수리장치 |
US10368174B2 (en) | 2016-06-28 | 2019-07-30 | Semiconductor Components Industries, Llc | Distributed phase locked loop in hearing instruments |
US10462269B2 (en) | 2016-08-15 | 2019-10-29 | Qualcomm Incorporated | Packetizing encoded audio frames into compressed-over-pulse code modulation (PCM) (COP) packets for transmission over PCM interfaces |
US10255032B2 (en) * | 2016-12-13 | 2019-04-09 | EVA Automation, Inc. | Wireless coordination of audio sources |
US10593368B2 (en) | 2018-01-15 | 2020-03-17 | Yamaha Corporation | Audio device which synchronizes audio data |
CN109194985B (zh) * | 2018-11-19 | 2021-03-26 | 上海高骏精视信息技术有限公司 | 一种音视频以太网传输方法及其系统 |
KR102205608B1 (ko) | 2019-08-29 | 2021-01-21 | 주식회사 유시스 | 근로자 안전을 보호하기 위한 스마트 웨어러블 시스템 |
US11514921B2 (en) * | 2019-09-26 | 2022-11-29 | Apple Inc. | Audio return channel data loopback |
CN113259725B (zh) * | 2021-04-14 | 2022-08-05 | 北京数字电视国家工程实验室有限公司 | 一种ts流时钟调整方法、系统、存储介质及电子设备 |
CN116543777A (zh) * | 2022-01-26 | 2023-08-04 | 瑞昱半导体股份有限公司 | 动态调整音频时钟的音频处理设备及音频处理方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62278600A (ja) * | 1986-05-27 | 1987-12-03 | 日本電気株式会社 | 可変長フレ−ム型符号復号化装置の同期方法 |
WO2003021830A1 (en) * | 2001-09-04 | 2003-03-13 | Nokia Corporation | Method and apparatus for reducing synchronization delay in packet-based voice terminals by resynchronizing during talk spurts |
Family Cites Families (58)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69531223T2 (de) * | 1994-02-25 | 2004-06-17 | Koninklijke Philips Electronics N.V. | Verfahren und anordnung zur datenpaketübertragung |
JPH0888561A (ja) * | 1994-09-20 | 1996-04-02 | Fujitsu Ltd | 同期回路 |
US5815634A (en) * | 1994-09-30 | 1998-09-29 | Cirrus Logic, Inc. | Stream synchronization method and apparatus for MPEG playback system |
US5594660A (en) * | 1994-09-30 | 1997-01-14 | Cirrus Logic, Inc. | Programmable audio-video synchronization method and apparatus for multimedia systems |
US5598352A (en) * | 1994-09-30 | 1997-01-28 | Cirrus Logic, Inc. | Method and apparatus for audio and video synchronizing in MPEG playback systems |
GB2294561B (en) * | 1994-10-27 | 1999-03-31 | Advanced Risc Mach Ltd | Circuit synchronization with multiple clock signals |
ATE265120T1 (de) * | 1994-12-09 | 2004-05-15 | Brent Townshend | Schnelles vermittlungssystem für analoge teilnehmeranschlüsse |
US5905768A (en) * | 1994-12-13 | 1999-05-18 | Lsi Logic Corporation | MPEG audio synchronization system using subframe skip and repeat |
US5699481A (en) | 1995-05-18 | 1997-12-16 | Rockwell International Corporation | Timing recovery scheme for packet speech in multiplexing environment of voice with data applications |
JP3698376B2 (ja) * | 1996-08-19 | 2005-09-21 | 松下電器産業株式会社 | 同期再生装置 |
US5926767A (en) * | 1996-12-26 | 1999-07-20 | Motorola, Inc. | Method and system reestablishing a temporarily interrupted dynamic communication link under intermittent fade conditions |
JP2853696B2 (ja) * | 1997-02-26 | 1999-02-03 | 日本電気株式会社 | Srts受信装置 |
US6195403B1 (en) * | 1997-09-26 | 2001-02-27 | International Business Machines Corporation | Pulse generator for a voltage controlled oscillator |
DE69811262T2 (de) * | 1997-10-10 | 2003-11-27 | Rambus Inc., Los Altos | Verfahren und vorrichtung zur ausfallsicheren resynchronisation mit minimaler latenzzeit |
US6259677B1 (en) * | 1998-09-30 | 2001-07-10 | Cisco Technology, Inc. | Clock synchronization and dynamic jitter management for voice over IP and real-time data |
US6487672B1 (en) * | 1998-12-24 | 2002-11-26 | Stmicroelectronics, N.V. | Digital timing recovery using baud rate sampling |
JP3506960B2 (ja) | 1999-08-03 | 2004-03-15 | シャープ株式会社 | パケット処理装置及びパケット処理プログラムを記録した記憶媒体 |
US6760391B1 (en) * | 1999-09-14 | 2004-07-06 | Nortel Networks Limited | Method and apparatus for line rate control in a digital communications system |
US6915263B1 (en) * | 1999-10-20 | 2005-07-05 | Sony Corporation | Digital audio decoder having error concealment using a dynamic recovery delay and frame repeating and also having fast audio muting capabilities |
US6598172B1 (en) * | 1999-10-29 | 2003-07-22 | Intel Corporation | System and method for clock skew compensation between encoder and decoder clocks by calculating drift metric, and using it to modify time-stamps of data packets |
US6429902B1 (en) * | 1999-12-07 | 2002-08-06 | Lsi Logic Corporation | Method and apparatus for audio and video end-to-end synchronization |
US6493163B1 (en) * | 2000-03-03 | 2002-12-10 | Cirrus Logic, Inc. | Increased lock range PLL for constrained data |
GB2360178B (en) | 2000-03-06 | 2004-04-14 | Mitel Corp | Sub-packet insertion for packet loss compensation in Voice Over IP networks |
US7031306B2 (en) * | 2000-04-07 | 2006-04-18 | Artel Video Systems, Inc. | Transmitting MPEG data packets received from a non-constant delay network |
DE10046920C2 (de) * | 2000-09-21 | 2003-08-14 | Siemens Ag | Verfahren zum gesteuerten Einsynchronisieren auf ein nicht stabiles Taktsystem und hiermit korrespondierende Empfangseinheit |
CA2363930C (en) * | 2000-11-29 | 2004-08-24 | Research In Motion Limited | System and method for synchronization signal detection and recovery from false triggers |
US6680753B2 (en) * | 2001-03-07 | 2004-01-20 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for skipping and repeating audio frames |
JP2002271397A (ja) | 2001-03-13 | 2002-09-20 | Nec Corp | パケット損失復旧器、及び、パケット損失復旧方法 |
EP1449365A2 (en) * | 2001-07-09 | 2004-08-25 | Visible World, Inc. | System and method for seamless switching of compressed audio streams |
US6937988B1 (en) * | 2001-08-10 | 2005-08-30 | Cirrus Logic, Inc. | Methods and systems for prefilling a buffer in streaming data applications |
GB0129386D0 (en) * | 2001-12-07 | 2002-01-30 | Nokia Corp | Transmission timing |
GB2385684A (en) * | 2002-02-22 | 2003-08-27 | Sony Uk Ltd | Frequency synchronisation of clocks |
US6795452B2 (en) * | 2002-05-31 | 2004-09-21 | Sandbridge Technologies, Inc. | Method of tracking time intervals for a communication signal |
US7020791B1 (en) * | 2002-09-19 | 2006-03-28 | Nortel Networks Limited | Clock recovery using a double-exponential smoothing process |
US20040078828A1 (en) * | 2002-10-18 | 2004-04-22 | Parchman Travis Randall | Recovering timing for television services |
US7793020B1 (en) * | 2002-11-27 | 2010-09-07 | International Business Machines Corporation | Apparatus and method to read information from an information storage medium |
US7394833B2 (en) * | 2003-02-11 | 2008-07-01 | Nokia Corporation | Method and apparatus for reducing synchronization delay in packet switched voice terminals using speech decoder modification |
US6915219B2 (en) * | 2003-08-29 | 2005-07-05 | General Electric Company | Method for canceling transient errors in unsynchronized digital current differential transmission line protection systems |
EP1665809B1 (en) | 2003-09-22 | 2007-11-14 | INOVA Semiconductors GmbH | System and method for forming a bidirectional multimedia link |
US20060164266A1 (en) * | 2003-09-22 | 2006-07-27 | Inova Semiconductors Gmbh | Synthesizing a remote controlled clock for data transmission via a digital multimedia link |
US7570304B1 (en) * | 2003-11-21 | 2009-08-04 | Sigma Designs, Inc. | Method, apparatus and computer program product for synchronizing presentation of digital video data with serving of digital video data |
US7574274B2 (en) * | 2004-04-14 | 2009-08-11 | Nvidia Corporation | Method and system for synchronizing audio processing modules |
KR100619021B1 (ko) * | 2004-05-24 | 2006-08-31 | 삼성전자주식회사 | 오디오 에러 복원 방법 및 장치 및 그를 적용한 디지털오디오 신호 처리 시스템 |
KR20070029751A (ko) * | 2004-06-22 | 2007-03-14 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 오디오 인코딩 및 디코딩 |
CN101036389B (zh) | 2004-09-02 | 2012-05-02 | 索尼株式会社 | 内容接收器、视频/音频输出定时控制方法和内容提供系统 |
US7418013B2 (en) * | 2004-09-22 | 2008-08-26 | Intel Corporation | Techniques to synchronize packet rate in voice over packet networks |
US7710965B2 (en) * | 2004-11-23 | 2010-05-04 | Broadlogic Network Technologies Inc. | Method and system for multi-program clock recovery and timestamp correction |
US7424651B2 (en) * | 2004-12-21 | 2008-09-09 | Tyco Telecommunications (Us) Inc. | Method and apparatus for decision threshold control in an optical signal receiver |
US7519845B2 (en) * | 2005-01-05 | 2009-04-14 | Microsoft Corporation | Software-based audio rendering |
KR100672056B1 (ko) * | 2005-02-15 | 2007-01-22 | 삼성전자주식회사 | 비대칭에러보정장치 및 그 방법과 이를 적용한 광디스크 재생 장치 |
US7672742B2 (en) * | 2005-02-16 | 2010-03-02 | Adaptec, Inc. | Method and system for reducing audio latency |
US20060268965A1 (en) * | 2005-05-26 | 2006-11-30 | Brima Ibrahim | Method and system for RDS decoder for single chip integrated Bluetooth and FM transceiver and baseband processor |
US7894489B2 (en) * | 2005-06-10 | 2011-02-22 | Symmetricom, Inc. | Adaptive play-out buffers and adaptive clock operation in packet networks |
US20070009071A1 (en) * | 2005-06-29 | 2007-01-11 | Ranjan Singh | Methods and apparatus to synchronize a clock in a voice over packet network |
JP2009521164A (ja) * | 2005-12-23 | 2009-05-28 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 入力フレームシーケンスから構成される入力データストリームの処理装置及び処理方法 |
US7634227B2 (en) * | 2006-03-29 | 2009-12-15 | Sony Ericsson Mobile Communications Ab | Method and system for controlling audio data playback in an accessory device |
US20080019398A1 (en) * | 2006-07-20 | 2008-01-24 | Adimos Systems Ltd. | Clock recovery in wireless media streaming |
US20080085124A1 (en) * | 2006-10-10 | 2008-04-10 | Lsi Logic Corporation | Clock generation with minimum number of crystals in a multimedia system |
-
2007
- 2007-03-27 US US11/691,688 patent/US9420332B2/en not_active Expired - Fee Related
- 2007-07-06 AT AT07799371T patent/ATE553474T1/de active
- 2007-07-06 CN CN2007800251652A patent/CN101484939B/zh not_active Expired - Fee Related
- 2007-07-06 WO PCT/US2007/072980 patent/WO2008006080A2/en active Application Filing
- 2007-07-06 KR KR1020087032187A patent/KR20090018853A/ko not_active Application Discontinuation
- 2007-07-06 JP JP2009518647A patent/JP5259588B2/ja not_active Expired - Fee Related
- 2007-07-06 EP EP07799371A patent/EP2038886B1/en not_active Not-in-force
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62278600A (ja) * | 1986-05-27 | 1987-12-03 | 日本電気株式会社 | 可変長フレ−ム型符号復号化装置の同期方法 |
WO2003021830A1 (en) * | 2001-09-04 | 2003-03-13 | Nokia Corporation | Method and apparatus for reducing synchronization delay in packet-based voice terminals by resynchronizing during talk spurts |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016104462A1 (ja) * | 2014-12-22 | 2016-06-30 | アイシン・エィ・ダブリュ株式会社 | 音声情報修正システム、音声情報修正方法、及び音声情報修正プログラム |
JP2016119588A (ja) * | 2014-12-22 | 2016-06-30 | アイシン・エィ・ダブリュ株式会社 | 音声情報修正システム、音声情報修正方法、及び音声情報修正プログラム |
Also Published As
Publication number | Publication date |
---|---|
CN101484939B (zh) | 2012-09-26 |
US9420332B2 (en) | 2016-08-16 |
WO2008006080A2 (en) | 2008-01-10 |
JP5259588B2 (ja) | 2013-08-07 |
EP2038886B1 (en) | 2012-04-11 |
US20080008281A1 (en) | 2008-01-10 |
EP2038886A2 (en) | 2009-03-25 |
KR20090018853A (ko) | 2009-02-23 |
CN101484939A (zh) | 2009-07-15 |
WO2008006080A3 (en) | 2008-03-20 |
ATE553474T1 (de) | 2012-04-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5259588B2 (ja) | オーディオ復号のためのクロック補償技術 | |
US8351514B2 (en) | Method, protocol, and apparatus for transporting advanced video coding content | |
US7668243B2 (en) | Audio and video clock synchronization in a wireless network | |
US8379151B2 (en) | Synchronization of audio and video streams | |
US7778372B2 (en) | Data delivery system and method, and receiver and transmitter | |
US8335262B2 (en) | Dynamic rate adjustment to splice compressed video streams | |
US8842218B2 (en) | Video/audio data output device and method | |
TWI455573B (zh) | 恢復系統時鐘的裝置和方法 | |
US20060233203A1 (en) | Synchronized audio/video decoding for network devices | |
US7899089B2 (en) | Constant bit rate padding of MPEG transport streams | |
CN101827271B (zh) | 音频视频同步方法、装置以及数据接收终端 | |
JP2009272945A (ja) | 同期再生装置 | |
JP4647669B2 (ja) | Ipを介してmpegストリームを伝送する方法、並びに、対応する装置、受信方法及び受信器 | |
US20100232453A1 (en) | Information processing apparatus and multiplexing method | |
KR20090125156A (ko) | 트랜스코더 미디어 시간 변환 | |
US8854964B2 (en) | Method and apparatus for determining a transport bit rate for a Multiprogram transport stream | |
US7012982B1 (en) | Method and system for de-jittering of transmitted MPEG-2 and MPEG-4 video | |
US8228999B2 (en) | Method and apparatus for reproduction of image frame in image receiving system | |
JP2004129009A (ja) | ストリーム送信装置および受信装置 | |
KR100698182B1 (ko) | 디지털 방송 시스템의 av 출력 방법 및 장치 | |
JP2022064531A (ja) | 送信装置および受信装置 | |
JP2003037574A (ja) | ストリーム送信装置および受信装置、ならびに送受信方法 | |
Chen | Examples of Video Transport Multiplexer |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111101 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20120201 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20120208 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20120229 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20120307 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120326 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120904 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130104 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20130116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130326 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130424 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160502 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5259588 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |