CN1284718A - 同步活动图像专家组解码器的方法和装置 - Google Patents
同步活动图像专家组解码器的方法和装置 Download PDFInfo
- Publication number
- CN1284718A CN1284718A CN00121268A CN00121268A CN1284718A CN 1284718 A CN1284718 A CN 1284718A CN 00121268 A CN00121268 A CN 00121268A CN 00121268 A CN00121268 A CN 00121268A CN 1284718 A CN1284718 A CN 1284718A
- Authority
- CN
- China
- Prior art keywords
- video
- data
- time
- pts
- decoder
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 230000001360 synchronised effect Effects 0.000 title claims description 28
- 238000001514 detection method Methods 0.000 claims description 6
- 239000004744 fabric Substances 0.000 claims description 5
- 238000006073 displacement reaction Methods 0.000 claims description 4
- 238000012856 packing Methods 0.000 claims description 4
- 230000008707 rearrangement Effects 0.000 claims description 4
- 230000008014 freezing Effects 0.000 claims description 2
- 238000007710 freezing Methods 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 4
- 230000005540 biological transmission Effects 0.000 description 16
- 230000000875 corresponding effect Effects 0.000 description 16
- 238000003860 storage Methods 0.000 description 7
- 238000007726 management method Methods 0.000 description 5
- 230000001934 delay Effects 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000010363 phase shift Effects 0.000 description 3
- 230000002950 deficient Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000010355 oscillation Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000029087 digestion Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012432 intermediate storage Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2368—Multiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Time-Division Multiplex Systems (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Abstract
本发明方法包括:计算一幅图象视频显示Tpres的实际时刻的步骤,这个时刻与本地时钟LSTC有关,计算已经算出的显示时刻与对应于这幅图象视频编码器期望的显示时刻PTS标记之间的偏移量STCO的步骤,以至确定一个实际的时钟VSTC=STCO+LSTC,对应于这幅在PTS图象的视频和音频的显示与实际时钟VSTC有关。本发明应用涉及到卫星解码器,涉及到利用硬盘来记录编码数据的数字电视接收机和一个MPEG解码器。
Description
本发明涉及到一种同步MPEG(活动图像专家组)解码器的方法，该解码器适合于来源记录媒介的压缩数据的解码。本发明还涉及到一个实现这种方法的MPEG解码器，涉及到一种卫星解码器或者包括这种解码器的电视接收机。
图1描绘了一种利用硬盘上MPEG数据流记录的卫星解码器结构图。
在多路复用器1的输入端接收一个MPEG节目数据流(PS)。然后以PES数据包(对于打包基本数据流的初始标准)的形式输出一个节目的数据。为了记录这些数据，这些数据被发送给一个存储器2然后再经过硬盘接口3到硬盘4。
为了数据的读取，硬盘4连接到硬盘接口5然后再连到一个存储器6。第一个存储器的输出连接到一个视频MPEG解码电路7而第二个存储器的输出连接到一个音频MPEG解码电路8。对应于视频和音频提示信号的这两个电路的输出传送给数字/模拟变换器然后再到电视接收机(这些在图中没有描绘)。
其中，存储器电路6能够多路分解存储在硬盘上的音频和视频数据。然后，这些视频PES和音频PES数据由它们各自的解码器处理。
存储在硬盘上的数据是在多路分解该数据流之后获得的数据。因此，一是没有处理的PS节目数据流的存储，这避免在读取时一个这样数据流的再生，还有避免构成这个数据流的所有节目的存储，或者避免用关键字记录加密的数据存储等。
在一种常规的结构中，根据MPEG标准的解码器工作方式，这就是说它通过给定的传输比特率直接接收该数据流，例如通过卫星或电缆传输，在下面再调出以至于强调与硬盘环境有关的特殊特征，即在解码之前利用硬盘上数据的中间存储。
在MPEG标准中，根据模拟涉及到的虚拟内存，来实现解码器缓冲存储器的管理。的确，构成一个序列的每幅图象的编码没有以不变的价值来实现，而编码器输出的缓存存储器用来以恒定平均比特率传输数据。在解码器一边，从恒定比特率的数据流中，还需要缓存存储器以便传输可变-价值的图象。解码器缓存存储器管理的实现，其中是以数据流中编码器传送的时钟以及分配给传输图象和确定从解码器退出的时刻为基础，对每幅图象编码器存储器中一幅图象存储的时刻与解码器存储器读时刻之间的时间间隙必须是相同的。
这里包括PCR时钟，对于MPEG标准中节目时钟参考是固定不变的，该时钟是一个传输的时间提示信号并且根据解码器的同步来实现。
这里还包括DTS标志，对于MPEG标准中解码时间标志是固定不变的，该标志是数据流中传输的一个字段并且它表示一幅要在解码器中解码图象的时刻。
出现在传输数据流TS中的PCR提示信号由解码器用来计算时间。因此PCR在解码器等级上传输该时序安排标志。
该DTS给出解码时序安排，这就是说该时刻的图象必须从解码器的缓存存储器中读出并且解码。
PRC和DTS提示信号是分别以传输数据流TS的188-字节的包标题和PES数据流的包标题传输的，第一个打包步骤在传输数据流TS的产生中需要。
初始的PST，代表显示时间标志，其对应于图象显示的时刻并且允许解码后的图象重新排序；该PTS存在于PES数据流的包标题中。
当MOEG解码器根据源于硬盘的数据工作时，这些数据以解码器的进展速度消化。用来显示由本地27MHz时钟来调整的解码图象(VSYNC)的音频和视频解码器的同步信号以便每秒近似地传输25幅图象。
因为该记录是在音频和视频PES级别进行的，所以与PS数据流的PCR有关的提示信号就丢失了而且可能不用在跟踪本地时钟中。这种跟踪的不存在在硬盘读写指针的级别产生一个管理问题，如同在音频和视频信号级别的同步问题一样。
至于这些指针的管理，考虑两种方式：只读方式，即不出现同时硬盘的写入(对于这个问题不是太麻烦)，和读/写方式。
只读方式，当以前记录的数据流重放时，自由振荡器的时钟精度是满足的。相对于记录标称值的变化在40ms视频图象期间找到。电视与收看者水平的容差级别是足够大地，将能做到比专业电视标准低非常多的精度。
这是因为图象同步信号(VSYNC)基于27MHz时钟来确定。其具有40ms的周期。由于本地时钟的精度，这个信号的慢漂移根本不造成麻烦，其原因是事实上电视处在发射通路的末端。
另一方面，读/写方式(读与写方式是交替进行，一般认为是时间的交替)，由于事实上该时钟是处于自由振荡中，则故障可能发生，这不可能跟踪从硬盘中读出的数据流。
当记录和读同时操作时，时间偏移重放的情况，存在一个风险即写入操作将被读取硬盘操作压过，或者将增加延时。因为偏差是较慢的，所以这第二种情况麻烦不大。另一方面，如果读出超过写入，这就是说如果读指针超过写指针并且中断去读取至今没有写的存储区域，则描绘的图象将最多记录在这个以前记录期间的区域，并且被记录的图象不再重放。这种情况可能发生在记录与读之间时是由于读取时的一个短的暂停。在这种情况下，当记录数据时如果27MHz时钟比编码器所用的时钟稍微快一点，数据的重放就比它们的记录快并且超过一个长周期，这就是说对于一定持续时间的记录节目，读指针可能超过写指针。因此在这种模式下，必须禁止写与读之间的这种滑动。
一种想法是使本地时钟跟踪易变数据流的PRC(节目时钟参考)同时被记录。然而，这将不能解决另外一种故障，该故障可能发生在由于事实上记录数据没有预先知道有效性时。因为写和读是同步的，所以在本地时钟被同步于易变数据流的PRC的情况下，读与写之间的延时将被保持除非解码器开始非常快地消化该数据。如果数据被破坏这是可能发生的。的确，在实时传输的情况下，这些错误的数据能够在读解码器缓存器上立即检测出来，当这些仅在读取后检测到错误数据能够在硬盘上记录以及在解码器的缓存器中存储时，与上面相同的操作不能保持。当被破坏的数据由解码器检测到时，后面再同步并且立即清空缓存器，使得数据丢失并且为添充缓存器而重复访问硬盘。在这种情况下，还可能发生读指针超过写指针。这可能发生在由于较差的传输条件引起的错误提示信号的传输时或者数据传输丢失时。
至于音频和视频数据的同步是相关的，不管是只读方式还是读/写方式，不能初始化和同步本地时钟于PCR标志的事实可能引起视频与音频之间同步的问题，例如在只读方式。这是因为涉及代表相对本地时钟的时刻提示信号不能利用，由于事实上这个时钟不再与编码器同步。
本发明的目的是克服前述的缺陷。
本发明的目的是提供一种用于为源于记录媒介的压缩数据解码而同步MPEG解码器的方法，这些数据包括PEC(打包的基本数据流)音频和视频数据包，其特征在于它包括：
-计算一幅图象的视频的显示Tpres的实际时刻的步骤，这个时刻与本地时钟LSTC有关，
-计算已经算出的显示时刻与对应于这幅图象视频编码器期望的显示时刻PTS标记之间的偏移量STCO的步骤，以至于确定一个实际的时钟VSTC=STCO+LSTC，
-对应于这幅在PTS图象的视频和音频的显示与实际时钟VSTC有关。
根据一个特有的特性，该视频信号经过视频解码器缓存器的过渡时间施加在一个预定值TVBV上。
根据一个变化，TVBV的确定取决于在记录媒介上PES数据记录的比特率。
根据一个变化，TVBV的确定取决于VBV-延时。
根据一个特有的特性，偏移量等于：STCO=PTS-TVBV-TVSYNC-(TimeRef×40ms)-TDEC-LSTCpic
其中：
TVSYNC-对应于一个帧周期，
TDSC-对应于图象解码持续时间，其在较高的数量的帧周期，
TimeRef-表示该图象重新排序的时间参考，
LSTCpic-与第一幅图象的检测时刻有关。
根据一种特殊的工作方式，以移位方式读取数据(时间移位)，该数据是以写指针为基础记录的，记录的数据根据读指针以移位的时间方式来读取，最小的时隙发生在读和写的指针之间，当获得这个时隙时，解码器的冻结-方式启动。
本发明另一方面是一种同步装置，该装置用于同步MPEG解码器与记录的MPEG数据流的装置，所记录的数据由PES数据包组成，其中它包括用于计算要应用于解码器的本地时钟LSTC的偏移量STCO以便确定一个实际时钟VSTC的装置，作为在LSTC标志中计算的，这个偏移量等于图象的视频的显示Tpres的时刻和源于编码器的这幅图象的显示PTS值之间的差值，以及其中当实际时钟VSTC等于PTS值时才执行音频和视频数据的解码。
本发明另一方面是卫星解码器，其中它包括一个MPEG解码器和一个如上面所述的同步装置，还有一个电视接收机，其中包括一个MPEG解码器和一个如上面所述的同步装置。
因此以PES形式的一个节目在硬盘上的本地记录要求在重放时采取防范措施：本地时钟的跟踪以及视频和音频解码器的同步。
在此所提的方法力争模仿能够以操作音频和视频解码器这样一种方法的卫星传输的部件，在这些方式中尽可能地类似它们的正常操作方式。
本发明的主要优点是提出一种能够简单实现的同步方法，不需要利用PRC而且避免了当读取硬盘数据时一般常遇到的故障。
通过下面参照附图和给出例子的描述大家将更清楚本发明的特点和优点，附图包括：
图1描绘一个带有硬盘的卫星解码器的简单方框图。
图2a描绘写音频和视频数据到硬盘上的操作。
图2b描绘从硬盘读取音频和视频数据的操作。
图3描绘与记录数据相关的读和写指针。
图4描绘根据已有技术在启动时视频解码器的工作方式。
图5描绘一幅解码图象的显示中需要的各种步骤。
指针的管理
图2a和图2b图解地描述了实现硬盘上音频和视频提示信号的存储与提取的方式。
图2a对应于写入硬盘的操作。视频和音频PES是以一体和同样的128kB数据块记录在硬盘上(256个地址编址数据块)[或者1ba，表示512字节的逻辑数据块编址的字母缩写]。视频占用112kB而音频占用剩余的16kB部分，与音频的比特率成比例。在视频的112kB缓存的同时对应于到达音频数据量数值q被写在128kB数据块的开始，因此其对应于存储的音频数据量。在记录上，视频/音频比特率的比例是根据一个数据块的。
图2b对应于读硬盘的操作，112kB视频数据被读取以至于形成视频PES数据流，同时作为音频信息(可变部分)的数据量qkB形成音频PES数据流。
图3描绘数据块的连续性，每个128kB和对于这个硬盘的读写指针的位置一样存储在硬盘上。引用的双箭头9表示写指针(右边的垂直箭头)与读指针(左边的垂直箭头)之间的延时。引用的双箭头10表示一个规定的间隙，这里是5个数据块在这些指针之间一开始就预定的，而引用的双箭头11表示一个冻结间隙，这就是说引起图象冻结的最小间隙。
这种想法是通过软件来保证一个最小的间隙，例如指针之间的一个128kB数据块。当达到这点时，解码通过暂停解码器存储器的读操作来临时延缓，从而使得屏幕上的图象冻结，直到至少一个数据块分开了写和读。事实上，一旦没有找到这点就要建立初始的间隙，因为数据在任何情况下丢失并且利用重建初始延时的唯一目标来保持图象冻结都是没有益处的。
音频/视频同步
给定音频和视频数据存储的“交错”的方式，该节目的两个元素的重放必须同时进行。作为第一近似这可以说第一个视频字节和第一个音频字节同时到达它们各自的解码器。这个并不是说它们将同时解码，原因是视频经过其解码器的过渡时间。
众所周知，为了避免使用大容量音频缓存存储器，该音频从编码的时间进行相位延时。因此重放时，在标准方式(直接发送)音频与视频同相位。这个延时在编码器确定并且取决于视频的比特率。
当该数据记录在硬盘上并且因为它们不再传送到音频解码器和用这个视频比特率传送到视频解码器时，一个相位移重新出现在该音频与视频之间。
通常情况下，视频解码器启动的工作方式用一个流程图辅助描绘在图4中。这个启动执行如下：
步骤12，解码过程接收数据流以便提取其中的字头。步骤13实现一个循环直到检测到第一个序列的字头。当是这样一种情况时，执行步骤14以及它在于读取跟随这个序列字头的图象字头。如果PTS标志是可用的，步骤15承担检查，然后在步骤16期间推断DTS标志。步骤17组成一个比较DTS与本地时钟LSTC的循环。该循环的输出对应等同于接收下一个同步信号(VSYNC)，奇偶检测在步骤18执行，在步骤19，基于正确奇偶的检测触发图象解码。
如果该PTS标志不能使用，步骤20在于填充解码器的缓存存储器。步骤21检查该缓存存储器填充的水平。当用于解码需要的最低水平达到并且接收下一个同步信号时，在步骤18进行奇偶检测。根据正确奇偶的检测在步骤19执行图象解码。
在几种条件下着手视频PES数据流的解码。首先，在步骤13，解码器不知道数据流的启始直到它遇到启动序列。因此它确定构成数据流入口点的第一序列字头(SEQ)。然后该数据以对应于传输比特率的速度在解码器的缓存器中累加。在序列字头之后，在步骤14解码器接收图象字头(画面-字头)。
与第一幅图象解码启动所需最低缓存器水平相关的提示信号是在这个标题中。一旦缓存器中达到这个水平(步骤21)，因此在相对视频比特率一定时间后，解码器检查垂直同步信号(VSYNC)的正确奇偶以便命令解码(步骤19)。
当VBV-延时在数据流中不合适的情况下，它是固定解码启动的PTS(显示时间标志)提示信号。
说到启动，直接接收(没有涉及在硬盘上存储)和来自硬盘上的数据重放之间的主要不同是：
-读比特率对于磁盘来说看上去可能没有限制。
-同步于PCR提示信号(节目时钟参考)的本地时钟(LSTC本地
系统时钟)不存在。
依靠可能在数据流启动期间自硬盘填充缓存器时的高视频比特率，第一幅图象的解码将比直接接收发生的快，而导致音频与视频之间的相位移。如本发明中实现的以及如下面描述的，与视频相关的音频的同步能够避免这样的相位移。
LSTC在数据流控制和音频与视频同步中通常担当主要角色。当数据来源于硬盘因为缓存存储器一填满传输就停止时，数据流控制不成问题。因此没有数据丢失的风险。另一方面，参考时钟还是必要的以至于使得音频与视频同步。从视频PTS提示信号再现的实际STC时钟(VSTC)的利用使其能同步。
必须通过视频过程尽快初始化STC，以至于能够使音频自身能够与该时钟同步。初始化所需的提示信号是：
本地STC计数器(LSTC)的数值。
第一幅图象的PTS。
第一幅图象(如果存在)的VBV-延时。
用于图象记录的第一幅图象的时间参考(TimeRef)。
垂直同步VSYNC的奇偶性。
给定适合读取硬盘的高比特率，采集第一幅图象字头(PIC字头)而获得的这些提示信号很快地可适用。
图5粗略地描绘了一幅解码图象再显示所需时间中的各种步骤。上端表示已经存储在硬盘上并且现在正读取的数据的连续性。这个区分割成一些帧周期。
在下文中，下面的符号将被采纳：
-Tpic表示一个时期(T后面小写字母)
-TVBV表示一个持续时间(大写字母)
在序列字头后面的第一幅图象字头的检测之后，数据块的读取和记录发生在对应于VBV-延时的TVBV时刻解码器的缓存器中。在此时刻之后，执行奇偶检测。如果同步信号与准备要解码的图象具有相反的奇偶性，图中的情况，等于TVSYNC(20ms)的持续时间被累加以便确定解码的时刻。这个时刻称为Tdec。如果解码的实际持续时间大于一个帧周期(图中这种情况持续时间由一个包含标有“解码”字样的矩形表示)，考虑解码的持续时间TDEC被选为等于一个直接地大于实际持续时间的整数持续时间TVSSYNC。如果Tpres实际是解码图象显示的时刻，Tpres和Tdec之间的间隙等于TDEC+TimeRef×TVSYNC，TimeRef用作图象重新排序中的时间参考。
在时刻Tdec，图象的解码尽快地开始于正确奇偶的第一个同步VSYNC，该正确奇偶跟随在缓存存储器已经达到对应正常比特率迟延VBV-延时水平的时刻后。还有，读硬盘的高比特率意味着解码器缓存器的填充时间少并且大大少于VBV-延时。这个比特率可以容易地大于卫星传输的20倍。对于给出的一些理想情况，与卫星传输比特率4Mbit/s比，1.8Mbit容量的解码器缓存器的填充需要0.45秒。当填充源于硬盘时这个迟延减少到0.03秒。
因此不需要等待该持续时间VBV-延时，就能够尽快地开始视频解码。然而，音频和视频必须保持同步。因为音频解码本身不能同样地提前，所以音频将迟延在视频之后。这样的状况是不希望的，因为这要求迅速忽略音频数据以便赶上。
为了减轻这个缺陷和因而要补偿硬盘提供的高比特率，称作TVBV的延时故意地强加在视频上。该延时能够模拟原始的VBV-延时。
TVBV=VBV-延时
如果VBV-延时提示信号在数据流中不适用，它可以替换，在公式中，解码器缓存器(std-buffer)的大小：
TVBV=std-buffer/BitRateSat-std-buffer/BitRateDisk
该持续时间取决于视频比特率(卫星传输比特率BitRateSat)和硬盘的比特率(BitRateDisk)。
因为硬盘的比特率远远大于卫星传输比特率，因此可以做出如下近似：
TVBV=std-buffer/BitRateSat
数值BitRateSat是在写操作同时计算的。这是因为在一个单位时间内写的字节数量是已知的。
缓存器的大小一般是1.8Mbits。
一旦这个延时已经消失解码就可以开始了。然而，在某些设备中，为了等待垂直同步的正确奇偶，20ms延时的增加可能是必须的。最好保证音频启动相对视频没有延时且不反相，允许与垂直同步(VSYNC)再定相的20ms迟延通过缺省设置引入。相对于第一幅图象检测时间(Tpic)的解码启动时间(Tdec)则是如下：
Tdec=Tpic+TVBV+TVSYNC
知道了解码(Tdec)的启动时刻，显示(Tpres)的时刻取决于图象的时间参考(TimeRef)和其解码需要的迟延(TDEC)：
Tpres=Tdec+TimeRef*40ms+TDEC
Tdec取决于解码器的执行(一般是20ms或40ms)。在该应用中，执行时间是40ms。
用上述计算值替代Tdec：
Tpres=Tpic+TVBV+TVSYNC+TimeRef×40ms+TDEC
在第一幅图象检测的准确时刻本地时钟LSTC的数值时刻Tpic不需要知道。这是因为，例如在我们的系统中，时钟LSTC的执行允许其值只在每20ms采样一次。因此用下面的公式替换是可取的，在该公式中LSTCpic表示在第一幅图象被检测时刻可用的时钟LSTC的值：
Tpic=LSTCpic以及
Tpres=LSTCpic+TVBV+TVSYNC+TimeRef×40ms+TDEC
现在对应于图象的显示的实际时刻Tpres与编码器期望显示的时刻PTS之间的间隙，计算偏移量值。这个时刻PTS仅在假如解码器已经初始化并且同步于PCR的时钟下有意义。这里，该数值PTS不是用于确定绝对的显示时间而是使得音频和视频解码的时刻同步(相同的PTS)。
因此该偏移量是要在本地时钟上做的校正STCO(系统时间时钟偏移量)以便根据本地时钟确定的图象的显示时刻Tpres对应于PTS标记：
Tpres+STCO=PTSSTCO=PTS-TVBV-TVSYNC-TimeRef×40ms)-TDEC-LSTCpic
因此我们确定了一个实际的时钟VSTC如下：
VSTC=LSTC+STCO
这个实际的时钟作为音频同步的参考。
当VSTC的数值等于PTS时，音频的显示能够执行并且将与视频显示同相。
这些计算的目的是预测关于一幅图象的视频显示的有效时刻(时间LSTC任意20ms的倍数)以至于计算相对这幅图象的视频的理论值PTS的偏移量。然后利用该偏移量来确定音频数据的显示的有效时刻。
音频PTS还可以用来初始化VSTC并且在这种情况下音频是主要的。这个解决办法不被采纳其原因是音频帧中出现的PTS频率较低。
大家可以观测到，如果在解码过程中不存在中断，该视频解码与VSTC保持同步。然后可以检验在每幅图象的显示上VSTC=PTS。
不可估计的两种类型可能会干扰视频解码过程：
-对于从硬盘读取数据流的干扰可能引起某些图象的显示中的延时，或者是向前跳跃紧跟着解码器的重新初始化以及后面数据的丢失。
-利用不再有效的LSTC持续时间由应用执行的称作“特技-方式”的执行(在标准中使用的以及对应于特殊工作方式的术语如冻结帧等)。
在所有的情况下，最好在启动时重新初始化VSTC或者保存一个退回的值(暂停的情况)。
偏移量可以有规律地再-更新(相对与PCR同步的PTS时钟LSTC的滑动)。该图象周期可以取作刷新的周期。
音频解码器的启动比视频解码器的启动更快。为了知道什么时候启动考虑VSTC就足够了。当然必须等待由视频初始化的VSTC。
在一定程度上VSTC保持合适地与视频解码同步，音频与视频的同步完全自然地通过跟踪它的VSTC来完成。然而可能发生音频解码器没有与控制视频解码器的27MHz参考时钟同步，而与一个独立的时钟同步。在这种情况下音频解码器必须跟踪VSTC。
当然，MPEG解码器和已经存在的硬盘集成在一个卫星解码器中。这些元件或者它们之一刚好能够容易地成为接收压缩数据的数字电视接收机的一部分。
输入的数据流被描述为一个节目的数据流PS。在不背离本发明的范围情况下，它还可以属于一种传输数据流TS。
Claims (13)
1．用于为源于记录媒介(4)的压缩数据解码而同步MPEG解码器的方法，这些数据包括PEC(打包的基本数据流)音频和视频数据包，其特征在于它包括：
-计算一幅图象的视频的显示Tpres的实际时刻的步骤，这个时刻与本地时钟LSTC有关，
-计算已经算出的显示的时刻与对应于这幅图象的视频的编码器期望的显示的时刻的PTS标记之间的偏移量STCO的步骤，以至于确定一个实际的时钟VSTC=STCO+LSTC，
对应于这幅图像的视频和音频的显示相对于实际时钟VSTC以PTS注明。
2．根据权利要求1所述的方法，其特征在于视频信号经过视频解码器缓存器的过渡时间加在一个预定值TVBV上。
3．根据权利要求2所述的方法，其特征在于TVBV的确定取决于记录媒介上PES数据记录的比特率。
4．根据权利要求2所述的方法，其特征在于TVBV的确定取决于VBV-延时。
5．根据权利要求1所述的方法，其特征在于所述偏移量的确定取决于图象解码持续时间(TDEC)，其在在一个较高数的帧周期。
6．根据权利要求1所述的方法，其特征在于计算的偏移量按一帧的周期(TVSYNC)来增加。
7．根据权利要求2所述的方法，其特征在于偏移量STOC等于：STCO=PTS-TVBV-TVSYNC-(TimeRef×40ms)-TDEC-LSTCpic
其中：
TVSYNC-对应于一个帧周期，
TDSC-对应于在一个较高数的帧周期的图象解码持续时间，
TimeRef-表示该图象重新排序的时间参考，
LSTCpic-与第一幅图象的检测时刻有关。
8．根据权利要求1所述的方法，其特征在于当执行“特技-方式”或者视频解码器重新初始化时，实际时钟VSTC在启动时再-更新。
9．根据权利要求1所述的方法，其特征在于实际时钟VSTC随着每幅图象再-更新。
10．根据权利要求1所述的方法，对于移位方式读取数据(时间移位)，该数据是以写指针为基础记录的，记录的数据根据读指针以移位的时间方式来读取，其特征在于最小的时隙(11)发生在读和写的指针之间，当获得这个时隙时，解码器的冻结-方式启动。
11．用于同步MPEG解码器(7，8)与记录的MPEG数据流的装置，所记录的数据由PES数据包组成，其特征在于它包括用于计算要应用于解码器的本地时钟LSTC的偏移量STCO以便确定一个实际时钟VSTC的装置，作为在LSTC标志中计算的，这个偏移量等于图象的视频的显示Tpres的时刻和源于编码器的这幅图象的显示PTS值之间的差值，以及其中当实际时钟VSTC等于PTS值时才执行音频和视频数据的解码。
12．一种卫星解码器，其特征在于它包括一个MPEG解码器(7，8)和一个根据权利要求11的同步装置。
13．一种电视接收机，其特征在于它包括一个MPEG解码器(7，8)和一个根据权利要求11的同步装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR9910466A FR2797549B1 (fr) | 1999-08-13 | 1999-08-13 | Procede et dispositif de synchronisation d'un decodeur mpeg |
| FR9910466 | 1999-08-13 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN1284718A true CN1284718A (zh) | 2001-02-21 |
| CN100354965C CN100354965C (zh) | 2007-12-12 |
Family
ID=9549124
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CNB001212680A Expired - Fee Related CN100354965C (zh) | 1999-08-13 | 2000-08-11 | 同步活动图像专家组解码器的方法和装置 |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US6948185B1 (zh) |
| EP (1) | EP1076461A1 (zh) |
| JP (1) | JP4778608B2 (zh) |
| KR (1) | KR100649656B1 (zh) |
| CN (1) | CN100354965C (zh) |
| FR (1) | FR2797549B1 (zh) |
| HU (1) | HUP0003278A3 (zh) |
| MX (1) | MXPA00007798A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101933332B (zh) * | 2008-01-18 | 2013-03-20 | 萨基姆通信公司 | 视频数据解码器和用于解码视频数据并与字幕显示同步的方法 |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7490344B2 (en) * | 2000-09-29 | 2009-02-10 | Visible World, Inc. | System and method for seamless switching |
| US6931071B2 (en) * | 2001-08-31 | 2005-08-16 | Stmicroelectronics, Inc. | Apparatus and method for synchronizing video and audio MPEG streams in a video playback device |
| US6842802B2 (en) * | 2001-11-30 | 2005-01-11 | Aftg-Tg, L.L.C. | Programmatic time-gap defect correction apparatus and method |
| DE10226030A1 (de) * | 2002-06-12 | 2003-12-24 | Bosch Gmbh Robert | Verfahren zur Generierung eines Systemaktes einer Empfangseinrichtung und Empfangseinrichtung hierzu |
| KR100981693B1 (ko) * | 2002-12-16 | 2010-09-13 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 비디오 신호의 타임-베이스를 변경하는 시스템 |
| KR20040096718A (ko) * | 2003-05-10 | 2004-11-17 | 삼성전자주식회사 | 멀티미디어 데이터 재생장치, 오디오 데이터 수신방법 및오디오 데이터 구조 |
| JP4459590B2 (ja) * | 2003-10-10 | 2010-04-28 | パナソニック株式会社 | Ｄｔｖデータ処理装置 |
| DE10355345A1 (de) * | 2003-11-25 | 2005-06-23 | Deutsche Thomson-Brandt Gmbh | Verfahren und Vorrichtung zum Speichern oder Wiederfinden von definierten Positionen in einem Datenstrom |
| US8233540B2 (en) | 2005-03-10 | 2012-07-31 | Qualcomm Incorporated | Method of time base reconstruction for discrete time labeled video |
| JP2007158461A (ja) * | 2005-11-30 | 2007-06-21 | Toshiba Corp | 情報再生装置及び情報再生方法 |
| US9679602B2 (en) | 2006-06-14 | 2017-06-13 | Seagate Technology Llc | Disc drive circuitry swap |
| JP4793247B2 (ja) | 2006-12-18 | 2011-10-12 | 株式会社日立製作所 | 記録装置、記録方法、再生装置及び再生方法 |
| US7765315B2 (en) * | 2007-01-08 | 2010-07-27 | Apple Inc. | Time synchronization of multiple time-based data streams with independent clocks |
| US9305590B2 (en) | 2007-10-16 | 2016-04-05 | Seagate Technology Llc | Prevent data storage device circuitry swap |
| CN101420622B (zh) * | 2007-10-22 | 2010-07-14 | 北京永新同方数字电视技术有限公司 | 一种描述数字电视事件状态的标签电视系统及描述方法 |
| US9819604B2 (en) * | 2013-07-31 | 2017-11-14 | Nvidia Corporation | Real time network adaptive low latency transport stream muxing of audio/video streams for miracast |
| US9998634B2 (en) | 2014-11-03 | 2018-06-12 | Google Llc | Video frame playback scheduling |
| KR20170068946A (ko) * | 2015-12-10 | 2017-06-20 | 삼성전자주식회사 | 방송 수신 장치 및 방송 수신 장치의 제어 방법 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3575100B2 (ja) * | 1994-11-14 | 2004-10-06 | ソニー株式会社 | データ送信／受信装置及び方法並びにデータ記録／再生装置及び方法 |
| JP4297518B2 (ja) * | 1995-03-06 | 2009-07-15 | 沖電気工業株式会社 | 音声・ビデオ復号装置 |
| KR100209880B1 (ko) * | 1995-10-30 | 1999-07-15 | 윤종용 | Mpeg-2 영상복호화장치의 시스템클럭 복구장치 |
| JPH09205618A (ja) * | 1996-01-29 | 1997-08-05 | Mitsubishi Electric Corp | 動画像音声伸張再生装置および動画像音声同期制御器 |
| JPH1056620A (ja) * | 1996-02-08 | 1998-02-24 | Matsushita Electric Ind Co Ltd | テレビジョン受信機，記録再生装置，データ記録方法及びデータ再生方法 |
| US6181383B1 (en) * | 1996-05-29 | 2001-01-30 | Sarnoff Corporation | Method and apparatus for preserving synchronization of audio and video presentation when splicing transport streams |
| KR100247978B1 (ko) * | 1997-08-08 | 2000-03-15 | 윤종용 | 픽쳐 디코딩 동기화 회로 및 그 방법 |
| JPH11220695A (ja) * | 1997-11-12 | 1999-08-10 | Sony Corp | 動画像データの復号装置及び復号方法 |
| US6480667B1 (en) * | 1997-12-23 | 2002-11-12 | Intel Corporation | Method of time shifting to simultaneously record and play a data stream |
| WO1999065027A2 (en) * | 1998-06-05 | 1999-12-16 | Koninklijke Philips Electronics N.V. | Recording and reproduction of an information signal in/from a track on a record carrier |
| WO1999065239A2 (en) * | 1998-06-11 | 1999-12-16 | Koninklijke Philips Electronics N.V. | Trick play signal generation for a digital video recorder |
-
1999
- 1999-08-13 FR FR9910466A patent/FR2797549B1/fr not_active Expired - Fee Related
-
2000
- 2000-07-24 EP EP00402116A patent/EP1076461A1/en not_active Withdrawn
- 2000-08-03 US US09/631,808 patent/US6948185B1/en not_active Expired - Lifetime
- 2000-08-04 JP JP2000237477A patent/JP4778608B2/ja not_active Expired - Fee Related
- 2000-08-09 MX MXPA00007798A patent/MXPA00007798A/es active IP Right Grant
- 2000-08-09 KR KR1020000046048A patent/KR100649656B1/ko not_active IP Right Cessation
- 2000-08-11 CN CNB001212680A patent/CN100354965C/zh not_active Expired - Fee Related
- 2000-08-11 HU HU0003278A patent/HUP0003278A3/hu unknown
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101933332B (zh) * | 2008-01-18 | 2013-03-20 | 萨基姆通信公司 | 视频数据解码器和用于解码视频数据并与字幕显示同步的方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| FR2797549A1 (fr) | 2001-02-16 |
| FR2797549B1 (fr) | 2001-09-21 |
| CN100354965C (zh) | 2007-12-12 |
| HUP0003278A2 (en) | 2002-06-29 |
| HU0003278D0 (en) | 2000-08-11 |
| US6948185B1 (en) | 2005-09-20 |
| JP4778608B2 (ja) | 2011-09-21 |
| KR20010021247A (ko) | 2001-03-15 |
| JP2001094943A (ja) | 2001-04-06 |
| KR100649656B1 (ko) | 2006-11-24 |
| HUP0003278A3 (en) | 2002-07-29 |
| EP1076461A1 (en) | 2001-02-14 |
| MXPA00007798A (es) | 2002-06-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN1284718A (zh) | 同步活动图像专家组解码器的方法和装置 | |
| EP2057630B1 (en) | Method and apparatus for receiving, storing, and presenting multimedia programming without indexing prior to storage | |
| CN1169358C (zh) | 多媒体时间偏移系统 | |
| CN1164109C (zh) | 传输数字电视数据流中用户信息的高效带宽方法和设备 | |
| CN1104811C (zh) | 数据复用器及方法,记录器,解复用器及方法 | |
| CN1135841C (zh) | 编码数据的特殊重现方法和装置 | |
| CN1110199C (zh) | 用于将数据插入到数字电视信号中的波形产生器及方法 | |
| CN1798318A (zh) | 再现设备和解码控制方法 | |
| CN1976448A (zh) | 用于音频和视频传输的方法和系统 | |
| CN1231054C (zh) | 重放图像传输装置 | |
| US20040146211A1 (en) | Encoder and method for encoding | |
| CN1736106A (zh) | 视听内容传输 | |
| CN1152775A (zh) | 包数据的记录装置和重放装置 | |
| CN1758722A (zh) | 一种切换频道的方法及用于显示图像的解码系统 | |
| CN1520181A (zh) | 视频数据和辅助数据的同步读取的设备和方法及相关产品 | |
| CN1698113A (zh) | 用于提供可浏览的幻灯片显示的解码数据的装置和方法以及数据存储介质 | |
| CN1607815A (zh) | Av同步系统 | |
| CN1421859A (zh) | 后期录音装置 | |
| CN1698116A (zh) | 再现设备和方法以及记录介质 | |
| US8331459B2 (en) | Method and apparatus for smooth digital media playback | |
| CN1119897C (zh) | 数字数据传送装置及其传送方法 | |
| JP2010141498A (ja) | 映像受信装置及び映像送信装置 | |
| US20040168204A1 (en) | Method of processing packet data between video server and clients | |
| JP2007201797A (ja) | 伝送システム及び映像出力方法 | |
| Waddell | Audio/Video Synchronization in Compressed Systems: A Status Report |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20071212 Termination date: 20170811 |