CN101518048B - 用于再生音视频序列的方法与设备 - Google Patents

用于再生音视频序列的方法与设备 Download PDF

Info

Publication number
CN101518048B
CN101518048B CN2007800344695A CN200780034469A CN101518048B CN 101518048 B CN101518048 B CN 101518048B CN 2007800344695 A CN2007800344695 A CN 2007800344695A CN 200780034469 A CN200780034469 A CN 200780034469A CN 101518048 B CN101518048 B CN 101518048B
Authority
CN
China
Prior art keywords
data
information data
decoder
sequence
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2007800344695A
Other languages
English (en)
Other versions
CN101518048A (zh
Inventor
A·莫雷洛
M·曼辛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
S I SV EL S P A ITALIA Soc
Rai Radiotelevisione Italiana SpA
Original Assignee
S I SV EL S P A ITALIA Soc
Rai Radiotelevisione Italiana SpA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by S I SV EL S P A ITALIA Soc, Rai Radiotelevisione Italiana SpA filed Critical S I SV EL S P A ITALIA Soc
Publication of CN101518048A publication Critical patent/CN101518048A/zh
Application granted granted Critical
Publication of CN101518048B publication Critical patent/CN101518048B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383—Accessing a communication channel
    • H04N21/4384—Accessing a communication channel involving operations to reduce the access time, e.g. fast-tuning for reducing channel switching latency
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6112—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving terrestrial transmission, e.g. DVB-T
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64315—DVB-H
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0002—Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the transmission rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17318—Direct or substantially direct transmission and handling of requests

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Error Detection And Correction (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Signal Processing Not Specific To The Method Of Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及再生音频和/或视频序列的方法以及利用该方法的再生装置和再生设备；该方法通过易于解码所述序列的解码器(Dav)和在上游连接至所述解码器(Dav)并能够储存所述序列的至少一部分的缓冲器(B)来再生音频和/或视频序列；该序列通过多个数据块来传输；所述块中每个包括音频和/或视频信息数据部分和相应的纠错数据部分；这些部分在不同的时间间隔中传输；该方法包括短时操作模式和稳态操作模式；在稳态操作模式下，将块的校正数据(FEC)应用于相应信息数据，然后将所述信息数据提供给所述解码器(Dav)，而在短时操作模式下，块的信息数据被直接提供至所述解码器(Dav)而忽视所述块的相应校正数据；在音频和/或视频序列已被选择用于再生之后且对于确定的时间间隔使用短时操作模式；结果是序列的再生在选择之后且不等待校正数据的应用就立刻进行。

Description

用于再生音视频序列的方法与设备
技术领域
本发明涉及再生音频和/或视频序列的方法以及使用该方法的再生装置与再生设备。 
背景技术
现代音频-视频数字接收机能够接收大量音频-视频服务，所述音频-视频服务基本上由音频-视频序列组成。 
用户经常进行所谓的“换台(zapping)”，即顺序地选择多个服务直到找到所期望的服务为止；用户希望非常快(例如在1或2秒内)地从一个服务切换至另一个服务(例如通过对接收机的遥控)，以能够快速地检查大量的服务；因此接收机能够满足用户的需求是重要的。正如在下文中将产生的，本发明在移动接收机的情形下特别有利。 
在噪声时变信道(其中，信噪比例如因接收机的移动而随时间变化)上获取数字数据的可靠通信的最常用方法之一是结合例如公知BCH码、Reed Solomon码和LDPC码的纠错码(FEC：前向纠错)的使用对发送数据块进行交织。 
特别地，某些类型的传输信道有时会受到脉冲噪声的影响；在其它情形下，特别在移动接收的情形下，信号可能遭受因障碍物的存在而导致的非频率选择性衰减或者因信号反射(多径传播)而导致的频率选择性衰减。在此类条件下，长连续比特序列可能会被改变(“突发”误差)，而导致损失用于恢复原始序列的纠错码的有效性。在这样的情形下，通常将数据块进行交织，从而当接收机执行交织的逆过程以便将数据以原始顺序放回(在下文中称为：去交织)时，可能的误差序列(“突发”)的影响被均匀地分布在块内(在下文中称为交织块)；这样， 降低了连续位受误差影响的可能性，而增加了应用纠错码(FEC)导致原始序列的重建的可能性。交织块的大小应该是误差突发的最大持续期的多个倍，其越大，该过程越有效。 
实现交织过程的典型方法是将码字写入预定大小的矩阵，将它们逐列垂直插入，再将它们逐行水平读取。显然，矩阵的大小越大，在传输信道中生成的连续误差就越远。 
在特别严格的传输信道中，有必要使用大型的交织块以获取低差错率的接收，从而承受接收过程的高延迟时间，例如这是由移动接收机接收卫星传输信号的情形。在这样的情形下，由于接收信号的低水平(1evel)，所以位于接收天线和卫星之间的任何障碍物(建筑物、树木、桥梁、隧道、塔等)大大降低接收信号水平或者使其无效，从而造成能够甚至持续几秒或多个秒的中断。 
为了校正这种中断，交织块应具有这样的大小：错误数据的数量只是所包含数据的“适中”(“moderate”)部分，这依赖于所采用码的校正能力。假设，例如，使用线性分组码(linear block code)，能够校正各交织块中百分比ε＝25％的错误数据。这意味着，为了在接收过程中获取可接受的误差百分比，交织块的发送持续时间将至少为最长中断的持续时间的4倍。 
例如，假设系统正在以比特率Rs＝0.15Mbit/s对单个音频-视频服务进行编码，且假设希望恢复在信道上具有最大持续时间Tburst＝2.5秒的误差突发。如果具有有效率η＝0.75的所用FEC码允许恢复ε＝25％的已擦除位，那么需要在时间T1＞(Tburst/ε)＝10秒(T1在下文中将被表示为交织时间)对信道上所传输的比特起作用的相应交织，因此最小交织块等于M＝T1Rs/η＝2Mbit。 
类似状况发生在时分复用传输系统的情形下，其中在一个单数据流中组合S个音频-视频服务(例如MPEG传送复用)，并且数据在信道上以复用比特率Rm等于∑i＝1，...，s{Rs(i)/η}传输(如果所有服务具有相同比特率Rs，并且如果忽略可能的附加信令数据，那么Rm＝SRs/η)。例 如，S＝20，Rs/η＝0.2Mbit/s，Rm＝4Mbit/s。在这样的情形下，一般将交织块和FEC应用于每一个单个服务(而不是应用于在复用之后的所有S个服务)，用于减少交织缓冲器的大小和FEC解码器的工作时钟速率(事实上，用户每次只观看单个音频-视频服务，没有必要校正所有S个服务中的误差)。 
在该情形下，校正误差突发的能力不但取决于交织块的大小M，而且取决于复用过程。图3(a)在时间比例的示意图中示出了该情形，其中复用将属于不同服务的位均匀地分配在信道上：每个划阴影的方块代表携带与给定服务对应的数据的分组，而实心方块对应于剩余的S-1个服务。在这种情形下，信道上的误差突发(具有最大持续时间Tburst，但由于增加的传输率而影响多达S倍的比特)均匀地影响若干服务，并且因此遇到了与只传输一个服务的系统的情形相同的处境：T1＝M/(Rs/η)必须大于Tburst/ε。在下文中表达“充分均匀的”时分复用是指如下的复用：在信道上误差突发的典型时段中(Tburst)，传输属于所有服务的位的分组，并且属于给定服务的分组的数量与比特率成比例。正如下文中详细描述的，这不能应用于“时间片(Time Slicing)”的情形。 
交织技术的缺点之一(除了由于去交织缓冲器而引起的接收机额外的复杂性之外)是在接收机中在开始数据接收和相应FEC解码之间引入了延迟时间：事实上，接收机将在发起FEC解码之前接收和存储全部交织块。因此每次用户选择新的音频-视频服务时，接收机将把所有交织块装填到内部存储器中(在下文中称去交织缓冲器或者简称缓冲器)，并且在开始对信息部分进行解码以生成音频-视频信号之前，通过在纠错部分(FEC)中携带的数据来校正在信息部分中携带的错误的音频-视频数据。在大型块的情形下，这对于用户可导致不可接受的延迟，而用户在浏览以及选择服务时(“换台”)，在看到屏幕上的图像或者听到音频之前不得不等待几秒钟(在示例中，M/(Rs/η)＝10秒。为简单起见，没有考虑解码音频-视频信号的延迟)。 
在换台时所需要的时间量问题的直接解决方法可以使用S个大小M的缓冲器以容纳所有服务的交织块；当然，在接收机内存储器多达S倍是必要的，但结果是成本增加(下面将讨论不适用“时间片”的情形)。 
在技术标准ETSI EN 302 304(DVB-H＝“数字视频广播-手持”)中描述了交织技术和Reed Solomon码结合应用的典型例子，它指的是技术标准ETSI EN 301 192并且用于将电视信号广播至移动接收机。在该标准中，交织块的最大大小是M＝2Mbit(兆比特)，并且可以应用于几十个服务中的的每一个，所述服务能够组成通过射频信道传输的MPEG复用(整个复用能够达到从几Mbit/s到几十Mbit/s的传输比特率Rm，并且在上面所提到的S个服务的每一个以相同的比特率Rs传输的简化情形中Rm等于[SRs/η])。图1示出了用于上述技术标准的交织和FEC的图表。 
此外，有一些利用称为“时间片(Time Slicing)”技术的传输系统，例如上述技术标准：属于给定服务(或者服务组)的数据块在根据周期循环的已知时间间隔(“时间片(Time Slice)”)以信道所允许的最大比特率(Rm)来传输，在该时间间隔期间调谐到所述服务的接收机是工作的。在剩余的时间间隔中，当传输在复用中进行传送的其它服务(或者服务组)时，接收机不工作，因而显著地减少电池消耗(例如达到90％)。在DVB-H标准中，在时间片中传输的数据对应于ReedSolomon码的交织块，如图3(b)所示，其中划阴影的块代表属于相同服务的的数据块，而实心的块代表其它S-1个服务。该配置类型暗示下面的结果： 
(a)交织块(在M＝2Mbits的最大大小的特殊情形中)在非常短的时间内以信道所允许的最大速率Rm进行传输(例如，如果Rm＝4Mbit/s，那么T1＝M/Rm＝0.5秒)，因此在接收过程中，交织对持续Tburst＜εT1＝0.125秒的误差突发进行有效分配，其中ε＝0.25(正如之前所指出，在卫星信号接收的情形中该值是不够的)。换言之，相比于不采用时间 片的情形，对于缓冲器的相同大小M，通过S的因子减少了交织时间。在DVB-H标准的情形中，该缺点在典型的参考信道(地面VHF/UHF信道，其中FEC用于抵消造成持续几十ms的中断的高多普勒频率)上不是值得考虑的。 
(b)接收机的去交织存储器以远大于单个服务的比特率Rs/η的速率Rm加载(如果所有S个服务以相同比特率Rs/η传输，那么Rm＝SRs/η)。然而，这并不能解决换台时因去交织存储器的加载时间而发生的延迟时间的上述问题。事实上在时间片的情形下，传输与其它S-1个服务周期性地发生，当用户随机地从一个服务改变至另一个服务时，因此接入服务所需要的最大时间等于周期的持续时间(在上面的例子中，周期持续Tc＝MS/Rm)加上(不相关的)缓冲器的加载时间M/Rm。例如，如果复用传送S＝20个服务，每一个服务具有0.150Mbit/s的比特率、η＝0.75、Rm＝4Mbit/s、M＝2Mbit，那么周期持续MS/Rm＝10秒，这与以“连续”速率Rx/η的交织存储器的加载时间的情形类似(在上面的例子中，M/(Rs/η)＝10秒)。在时间片的情形中，平均换台时间等于Tc/2(即在本例子中为5秒)加上等于M/Rm的加载缓冲器所需时间。正如在上面连续传输的情形中，换台时间问题的直接解决方案是使用大小M×S的缓冲器，即易于容纳所有服务的交织块；然而，将失去使用时间片而产生的优点、即降低电池消耗(接收机将总是处于工作状态)，并且显然，多达S倍的存储器的量在接收机中将是必要的，结果是成本增加。 
总之，如在时间片在上述技术标准和其它传输系统中所执行的时间片技术时间片实现降低的电池消耗，但在以长中断为特征的信道上供给交织存储器M的有限利用并且暗示高换台次数(在上面的例子中，片周期的持续时间等于Tc＝MS/Rm)。 
一般惯例是使用被称为“虚拟交织”的技术(参见上述技术标准)，从而交织过程既不更改也不混合所传输的音频-视频数据。该技术在于例如通过使用诸如Reed Solomon码的系统块编码(请注意，系统码不修改有用数据)且随后在传输之前通过去交织重建原始音频-视频流序列来应用所述交织以便计算纠错数据，同时纠错数据单独传输。如果接收条件不严格，虚拟交织使简化的接收机能够通过只忽略FEC码的纠错数据来对信息数据(音频-视频流)进行解码。在具有虚拟交织的FEC的情形下，接收机需要大小M的缓冲器，所述缓冲器执行交织过程(而不执行去交织过程)以使FEC能够对音频-视频信息码执行校正。 
文件US2005/0213668描述了系统，其中在移动画面的发送中，当用户切换视频源时(例如，切换信道或者开始再生所记录的程序)，所选择的视频源能够快速被启动以显示。紧接着传递设备使视频源通过切换而被选择之后，接收设备使选择器去选择不通过纠错器发送的视频分组并将视频分组供给至解码器，并且接收设备对解码器进行控制以从视频分组中生成静帧(frozen frame)并且将它提供至将其进行显示的显示器。对选择器进行控制以便在计算器计算视频分组在纠错器中经历的延迟时间之后产生纠错的视频数据。 
发明内容本发明的一般目的是执行使接收机能够立刻再生由用户选择的音频和/或视频服务的方法；典型地，本发明将被应用于音频和/或视频服务。通过在随附权利要求书中所描述的再生方法来获得该目的，所述权利要求书应当被认为是本说明书的构成部分。 
根据本发明的方法的基本思想在于提供两种操作模式：短时(transitory)操作模式，其中不使用纠错数据(“低保护接收”)；和稳态操作模式，其中使用纠错数据(“高保护接收”)。 
典型地，在用户已经选择序列(即服务)之后，立刻使用短时操作模式以立即再生所述序列。 
然后使用稳态操作模式(如果与此同时用户还没有选择另一个服务)。 
特别地，再生可以在交织缓冲器被完全加载之前开始(假设发射机使用FEC和虚拟交织)，并且随后切换至具有交织和FEC的“高保 护”条件，以保证音频-视频信号再生的连续性。 
在单个服务或者S个“充分均匀的”服务的复用的传输情形中(如图3(a)所示，不采用时间片)，在对传输设备不做任何改变并且对使用的无线通讯标准不做任何修改之下，该方法只能在接收装置中实现。 
通过对传输系统引入适当改进，正如将在稍后示出，本发明也能够与时间片技术结合使用，从而具有更好地利用交织存储器的附加优点以及对受长中断影响的信道(例如卫星移动接收信道)的纠错性能的作为结果的改善。 
所述方法利用虚拟交织保持音频-视频数据不变的特性，从而对接收机服务的音频-视频数据是立即可接入的。 
在以比特率Rs/η传输单个服务或者以比特率Rm传输复用的S个服务的情形下(不采用时间片)，根据本发明的方法实现：在换台时向音频-视频解码器供给没有通过FEC码校正的数据流(在下文中称“未校正流”)而不等待交织块的加载，以便立刻向用户显示视频和/或音频序列(可以忽略的换台时间)；并且在从交织缓冲器被完全加载时的时刻开始的第二适选时间切换至通过FEC码校正的流(在下文中称“已校正流”)。如果将这两种所述流(已校正和未校正)以相同速率Rs/η(等于进来的数据的速率)读取，则它们将具有等于M/(Rs/η)的时间延迟(忽略可能的FEC解码延迟)，但在任何情形下，在下面所描述的方法允许在从未校正流切换至已校正流时消除该延迟，以避免音频-视频信号的恼人的中断或重复。 
在使用时间片传输复用的几个服务的情形中，可以应用根据本发明的方法，但引入在本系统中使用的片周期(slicing cycle)的改进是有利的，例如，在如图3(b)和3(c)中示出的技术标准DVB-H中。根据所述改进，大小M的交织块不在单个时间片中传输，而是将它分成大小M/J的J个小型块(等于交织矩阵的全部列数)，其中J是整数，基于信道的特性(中断持续时间)和接收机的特性(再同步时间)选择J以便适当减少片周期时间，如下文所详细论述。S个服务的小型块周期地传输以产生周期的J个子周期Tc/J，如图3(c)所示(特定的情形J＝5，S＝20，Tc＝10s)。因此，接收机的交织缓冲器被以J个间隔加载，并且如果使用根据本发明的方法，则换台之后的延迟时间在最坏情形下等于Tc/J(在本例子中为2秒)，并且平均等于Tc/2J(在本例子中为1秒)，其中与在无误差接收的情形下的于常规接收机相比，因子J减少。 
要注意，J应当选择得尽可能大(用于减少换台时间)而同时保持信道上各服务的传输时间(M/JRm)足够长(不少于解调器/接收机断开之后的再同步时间Tsync，例如几百毫秒)，以保持高的时间片能量节省。 事实上，在持续MS/JRm的时间片子周期中，接收机必须持续Tsync+M/JRm时间并且电池寿命节省等于(Tsync+M/JRm)/(MS/JRm)。 
要注意，为了改善呈现信号的长随机中断的信道上的接收性能，将时间片周期分成J个子周期也是很合乎需要的。事实上，在图3(b)的例子中，传输2Mbit块0.5秒：如果在该间隔期间，2秒的信号中断发生，则Reed-Solomon码将不能重建传输的原始序列。在图3(c)的情形中，服务在各100ms的五个400kbit子块中传输。信道上2秒中断将只擦除各服务的20％的位，存在Reed Solomon FEC将其完全校正的可能性。 
通过以低于(例如10％或20％)在稳态操作模式下使用的平均速率Rs的平均速率Rs’(t)将储存在交织缓冲器中的未校正数据读取和发送至音频-视频解码器，获得在未校正和已校正流之间延迟的消除。向已校正流的切换发生在已经达到这两种流的对准之后(在任何情形，在交织缓冲器已经完全加载并且激活FEC之后)。从这时刻起，以正常的速率Rs从已校正流中读取音频和视频数据并对其进行解码。 
根据本领域专家已知的方法之一，音频-视频数据的解码率与储存在缓冲器中的数据的读取同步发生：在这种情形下，在切换至已校正流之前，将解码率略微减少至值Rs’(t)，而在解码之后图像和音频速率(可忽略地)减慢，从而对用户来说结果既不是可感知的也不是恼人的。为了获取已解码的视频信号的连续再生，在短时周期期间通过本领域技术人员已知的技术来修改图像速率的生成机制是有利的。 
在本发明的另一个实施例中，频率变换被应用于以减少的速率所读取和解码的音频数据，以便根据已知的方法之一对用户隐藏音频信号的音调(pitch)变化。 
根据其它方面，本发明也涉及再生序列的装置和再生序列的设备，所述装置和设备使用根据本发明的方法。 
在下面说明书中将阐明本发明的其它目的、特征和优点。 
附图说明
为了更好地理解本发明，在下文中结合附图描述了本发明的实施例的示例，这些示例应当只被视为非限制示例，其中： 
图1a和1b表示现有技术状态所公知的可能的交织方法， 
图2是根据本发明的方法的概念图， 
图3(a)是时分分组复用示例(被发射机随机插入的分组)。在MPEG传送流复用的情形下，分组大小为188字节 
图3(b)示出了在DVB-H标准中所采用的常规的时间片周期：在每一个时间片中，传输属于一个单个服务(或者服务组)的交织块的数据(例如，对于M＝2M比特，大约传输一千个MPEG分组)， 
图3(c)示出了改进的时间片周期以应用本发明，其中单个服务的交织块被分成J个小型块，备选地将其与其它服务的小型块以周期方式一起传输， 
图4(a)和图4(b)示出音频信号在其已经被减慢之后的频谱变化，而图4(c)是示出了可能校正的示图，可以应用该校正以屏蔽音调的下降，和 
图5示出了根据现有技术和根据本发明的方面的四个音频-视频序列或服务的时间片传输。 
具体实施方式
在图1a和图1b中，示出了阐述在DVB-H标准中为向移动终端传输音频-视频信号所使用的交织方法的图表。在该标准中通过增加使用Reed-Solomon类型的线性分组码而获得的纠错数据(FEC)，在MPE[多协议封装]协议层处引入保护系统；从例如IP(因特网协议)分组的信息数据开始计算此类校正数据。 
提供MPEG分组复用器将所述误差保护数据添加到各单个“音频-视频服务”的数据流(ISO/IEC 13818-parts 1 and 2-packetmultiplexer：“Information technology-Generic coding of moving pictures and associated audio information”)，所述MPEG分组复用器又将多个服务集合以供在同一射频信道上的传输多个。 
将信息分组插入到矩阵，所述矩阵具有与Reed Solomon码字长度相等的列数Nc和可变的行数NR。矩阵的各元素携带单个信息字节。 
矩阵被垂直地分成两个子矩阵，左边的子矩阵ADT具有列数NCA，而右边的子矩阵RSDT具有列数NCR。在传输侧，整数p的信息分组ID(ID1，ID2...IDp)的字被逐列插入到子矩阵ADT，而该子矩阵中可能的剩余元素用例如零的填充信息填满(在图中表示为“填充”)。 
在子矩阵RSDT中，基于各行的信息数据计算纠错数据。一旦以这种方式将矩阵填满，再一次逐列传输所有数据：这样信息数据分组ID按其顺序而保持不变，而包含纠错数据的子矩阵RSDT的NCR列RSC(RSC1...)在分离的部分(FEC部分)中传输。为此，该方法被称为“虚拟交织”方法。 
在DVB-H标准中，列数NC为255，NCA为191而同时NCR为64，因此Reed Solomon码参数是(n＝255，k＝191，n-k＝64)η＝k/n≈0.75＝3/4并且该码能校正可达64个错误字节(ε＝25％)，其中错误数据的位置是已知的(事实上误差指示码-CRC-指出哪些列包含误差)。最大行数是1024，等于M＝221比特＝2M比特。 
通过增加子矩阵ADT中填充区的大小，能够将Reed Solomon码增强(事实上，增加奇偶数据的百分比)：填充位用于计算纠错数据，但是它们没有被传输而由接收机将其重新插入以用于通过ReedSolomon码来执行校正，正如从截短码理论所公知的一样。 
另一方面，通过减少子矩阵RSDT中的列数(换言之，不传输部分纠错数据)，能够将所述码减弱，因为纠错数据的百分比被减少了，正如从“打孔”码理论所公知的一样。 
图1b示意性示例了数据在信道Ch上的传送；包含数据信息分组的MPE部分(MPE部分1、MPE部分2...)在信道上以相应于FEC部 分(FEC部分1、FEC部分2...)的分离分组来传输，所述FEC部分包括纠错数据。 
图2是根据本发明方法的概念框图。 
在以下描述中，为了清楚起见，指出了本发明的硬件示例，所述示例对位进行操作，然而要考虑到通常实施例是软件和/或对字节进行操作。从一种实施方式变换至另一实施方式对本领域技术人员来说并不困难。在S个服务以时分复用传输(不采用时间片)的情形中，通过多路输出选择器(块DE-MUX)以速率Rm从数据流中提取表示为“in”的用户所选服务。用户所选服务包括通过图1中所示的方法而获得的音频-视频数据和FEC纠错数据(例如使用Reed-Solomon码)。 
在块B-CONTROL(B-控制)的控制下，以每秒Rs/η比特的平均速度将该流逐字节、逐列储存在交织缓冲器中(该过程在图2的块B中示出并对应于图1中的方法)，所述块B-CONTROL生成存储器的写地址。当检测到新块的开始时，每次执行写操作时，写地址从位{列＝0，行＝0}开始，将列地址从1增加到8(码的字节结构)，然后将行地址增加1(以此类推)。 
在时刻t0，当用户请求新服务时，接收机不得不等待新交织块在时刻t1的开始并随后开始加载缓冲器直到时刻t2(t2-t1＝TB＝M/(Rs/η)，具有总平均延迟(TB/2)+TB和最大延迟2TB)。 
逻辑块FEC表示逐行的码校正过程，该过程在缓冲器完全加载之后(即从时刻t2)通过在最大时间2TB+TFEC之后校正错误字节对缓冲器B进行操作，其中TFEC是FEC解码延迟，正如图2中由箭头Corr从功能上所示。在这点上，块B-CONTROL从缓冲器B中逐字节、逐列读取数据(通过生成存储器的读地址并且在每次读操作时增加读地址单个单位)并且在支路c上以平均速率Rs输出音频-视频数据流(已校正的流)(不读取纠错数据)。 
另一方面，下面的支路nc载送在块B-CONTROL的控制下以平均速率R’s＝αRs从缓冲器B中逐字节、逐列所提取(纠错数据没有被提 取)的、还未由FEC过程校正的数据(未校正的流)，其中0＜α＜1是适当选择的因子。α越小，未校正的流减慢得越多，从而快速地恢复已校正流在支路c上的延迟，但以再生音频-视频信号更大失真为代价(实验性分析显示，α的合适值位于0.7和0.9之间)。 
从选择新服务的时刻开始(时刻t0)，将数据写入到缓冲器之后立刻进行数据在支路nc的提取(无需等待交织块的开始)：从时刻t0并且直到检测到交织块的开始-时刻t1-将读写地址生成器阻塞在单元{列＝0，行＝0}上，且读时钟以小延迟紧随(hooked to)写时钟以实现所写数据的稳定。不提取FEC比特。在t1(交织块开始)之后，读时钟以周期性跳过等于1-α的脉冲百分比的特征(例如，如果选择α＝0.9则10个中跳过一个脉冲，如果选择α＝0.8则10个脉冲中跳过两个脉冲)紧随写时钟，同时读写地址生成器在相应时钟的每个脉冲将其增大(在图1的缓冲器B中逐字节、逐列地)。显而易见，地址生成器以周期方式工作(以M为模)，即它每次到达最后一个单元时又从第一单元开始。这样，读地址相对于写地址被不断延迟，以Rs’＝αRs的平均速率前进。当写时钟对FEC比特进行操作时，读时钟停止并且等待下一交织块的有用数据。这样，在支路nc上最初(时刻t1)期望的数据相对于支路c上的数据被不断延迟，直到它们在时刻t3＝t1+[(TB+TFEC)/(1-α)]达到对准(如果在信道上没有误差，那么两个数据是相同的)。例如，如果α＝0.8，TFEC＝0，Rs/η＝200kbit/s，M＝2Mbit，则获得t3＝t1+50秒，其中t1＝10秒(在最坏的情形下)。 
每一次用户改变服务，音频-视频解码器Dav通过图2的开关I被立刻连接至支路nc的未校正的流。在适当选择时刻ts(如后面所述)，开关I切换至已校正流c。 
在本发明的简单实施例中，ts＝t1+[(TB+TFEC)]并且α＝1。在该情形下，缓冲器被完全加载且已校正支路开始发出(已校正)数据时，所述切换就立刻发生。该选择允许以最大速度切换至已校正支路c，但它的主要缺点是包含在缓冲器中的音频-视频数据的再生(等于在前 一个示例中的10秒的音频-视频信号)被执行了两次，效果可能使用户不满意。 
从“已校正”支路至“未校正支路”的切换也可以基于用户的确定命令而发生。例如，用户能够决定他/她是否喜欢具有减少的解码率的过渡阶段(即如果与正常情形相比，缓慢的再生)。 
在本发明的第二主要实施例中，ts＝t3从而支路nc上的信号与支路c上的信号临时对准，并且切换并没有造成音频-视频再生中的跳跃(jump)或重复(repetition)。因此，如果α＝0.7-0.9且认为TFEC可忽略，那么两条支路之间的切换会在t1+3TB和t1+10TB之间所包含的时间ts之后(即在M＝2M比特并且Rs/η＝200kbit/s的例子中，在大约40-110秒之后)以没有音频-视频序列的重复的方式发生。 
在另一个实施例中，接收机能够例如基于在技术标准DVB-H中已可得到的CRC误差检测码(循环冗余校验)区分所接收的数据是正确还是错误，以用于最大化Reed Solomon码的校正能力；该情形特别有利，因为只要数据正确接收机就能够继续支路nc上的流的再生，并直到达到支路c和nc上的流的对准为止，如上所述。如果在未校正流上，在两个流的延迟之间的对准之前检测到误差，(即在t3之前，但在TB之后)，那么切换至已校正支路c上的再生可以是合乎需要的，即使以音频-视频序列重复和/或临时缺少再生的代价(由于已校正支路只在已接收纠错数据并已将其应用于信息数据之后发出数据的事实)。 
在“未校正”和“已校正”支路之间的切换可以由于以下事实：已经检测到大于预定阈值数量的多个误差，或者根据已检测误差的数量和类型已经验证至少预定类型的误差，或者更一般地已经验证至少预定条件。 
在“未校正”和“已校正”支路之间的切换也可以由对应用户命令引起；例如，在“换台”阶段，使用了“未校正”支路，并且当该用户已经选择所期望的服务时，他/她发送向“已校正”支路切换的命令，因此再生具有纠错的服务并因而具有高质量。 
在本发明的另一个实施例中，因子α随时间变化，在时刻t1具有低值(例如0.7)并且在两个流的对准之前几个时刻被逐渐增大(例如先到值0.8然后0.9)，从而逐渐地改变音频-视频信号再生速度，因此这种改变对用户而言更不容易察觉。 
如上面所述，在用户已经选择新服务之后的相对短的时间(几秒钟或者最多几分钟)，发生从“未校正”支路至“已校正”支路的切换。 
然而，根据本发明，切换也可以发生在更长的时间之后；事实上，根据本发明的特定实施例，所述切换通常发生在依赖于在所述选择之后所检测误差的数量和/或类型而已经至少验证预定情形时；因此，在较好接收序列的条件下，所述切换可最好根本不发生。存在选择能够应用于整个数据块(即交织矩阵的数据)的条件并且对各接收数据块验证所述条件的可能性：一接收具有误差的第一数据块就如上所述进行至“已校正”支路c的切换。 
特别地，在前段所述的情形中，能够设想：如果所述预定误差条件已经被验证且在所述预定误差条件已经被验证时，只开始以减少的解码率的操作阶段(即以相应于正常情况的减少速度的再生)。 
正如已声明的，图2的示图是概念性的，并且FEC块对生成已校正数据的流“c”的缓冲器B中所包含的未校正数据起作用；因此提供开关I，所述开关I在概念上从未校正数据流“nc”切换至已校正数据流“c”。 
根据本发明的特定实施例，FEC块能够直接对储存于缓冲器中的数据执行其纠错功能。在这种情形下，FEC块读取信息数据(该信息数据可能包含误差)和包含在缓冲器B中的纠错数据、校正包含在信息数据中的可能误差并将已校正数据又写入到缓冲器B。解码器Dav总是通过相同的电线(electrical line)接收数据(而没有任何切换)；典型地，一开始它接收未校正数据(短时操作)，随后接收混合的未校正和已校正数据(中间操作)，并且最后只接收已校正数据(正常操作)。 
从前面的描述中，能够注意到对包含在缓冲器B中的数据的FEC 校正操作发生在缓冲器包含完整的数据块的时刻，并且在该时刻，在短时阶段的周期j中的支路nc的读地址生成器近似地指向单元[Mx(jα)]mod M，而同时仍读取同一块的单元M-[Mx(jα)]mod M。例如，如果M＝2M比特、α＝0.9并且j＝6，那么在FEC校正的时刻的读地址是[Mx(jα)]mod M＝0.4M，因此将所述块在支路nc上还未被提取的60％的单元进行校正(从这些单元中必须应该减去Reed-Solomon码的奇偶单元)。随着时间流逝，被发送至支路nc的更大百分比的数据由FEC来纠正，直到在两个序列nc和c对准的时刻达到100％。根据上文，显然，在以示例方式所描述的实施例中，数据流之间的切换不是必需的，但是，当延迟已被减少至零并且所有数据已经被FEC校正时，从在短时阶段期间减少的速度切换至正常操作速度，能够仅仅改变(例如切换)支路nc上的读速度。 
先前假设各数据块包括在相应交织矩阵中所包含的数据。 
然而，本发明也应用于时间片传输的情形。 
在时间片的情形下，如上所述，通过传输大小M/J的J个小型块而不是大小M的交织块来修改传输周期Tc是合适的，如图3(c)所示。在该情形下，在根据本发明的接收机中执行的流程的说明与图2中所描述的不采用时间片的传输时间片的情形相同，但在该情形中属于所选服务的分组(在DE-MUX之后)不是以连续方式而是以时间片周期(Tc＝MS/Rm)的J个时间间隔来接收，在所述时间间隔期间流以信道Rm的全速来接收(例如，如果J＝5，那么在10秒的周期内接收5个小型块，各块包含属于所选服务的大约200个MPEG分组；在接收小型块期间，写时钟将等于4Mbit/s)。该缓冲器加载间隔(在以相同比特率传输的服务的情形下持续Tc/JS，即在图3(c)的示例中为0.1秒)因与在信道上其它S-1个服务传输对应的延迟时间(在S＝20的示例中为1.9秒)而中断。参考图2，现在描述所述过程，忽视与前面情形相同的功能(没有采用时间片)，而同时突出时序的差别性及相似性。从用户请求新服务的时刻t0，支路c必须等待新交织块的开始(t1-t0＝Tc最大； t1-t0＝Tc/2平均，在本示例中等于10和5秒)，并且随后在时刻t1开始缓冲器的加载(正如在不采用时间片的情形中的大小M)，所述加载在时刻t2结束，持续时间t2-t1＝TB＝[Tc/J][S-1+(J-1)]，平均延迟(t2-t0)等于[Tc/J][(J/2)+S-1+(J-1)]+TFEC且最大延迟等于[Tc/J][J+S-1+(J-1)]+TFEC(即在本示例中13.1和18.1秒，假定TFEC＝0)。注意，对于J的大值，关系(t2-t1)＝TB≈Tc＝M/(Rs/η)仍然有效，因此总延迟与不采用时间片的情形的延迟类似。还注意，本DVB-H技术标准使用值J＝1，产生平均延迟(t2-t0)med＝Tc[(1/2)+S-1]和最大延迟(t2-t0)max＝Tc[1+S-1]，其在示例的情形中减少在已校正流上的换台延迟大约50％(5和10秒)：事实上，以速率Rm传输整个交织块，缓冲器的加载时间可忽略。逻辑块FEC对块M逐行执行码校正(解码延迟TFEC)，并且在支路c上(已校正流)以等于Rs的平均速率输出音频-视频数据流。另一方面，较低的支路nc以平均速率R’s＝αRs传送从缓冲器B所提取的未校正数据。从新服务的选择的时刻(时刻t0)开始，支路nc必须等待新小型块的开始(最大延迟Tc/J并且平均延迟Tc/2J，在本示例中等于2秒和1秒)，并且随后开始在支路nc上发出数据。正如不采用时间片的情形，在t1(交织块的开始)之后，缓冲器的读时钟紧随写时钟，跳过百分比等于1-α的脉冲，并以平均速率Rs’＝αRs继续直到在时刻t3＝t1+[(TB+TFEC)/(1-α)]达到流c和nc的再对准，其中TB＝[Tc/J][S-1+(J-1)]≈Tc＝M/(Rs/η)，该式中最后一个等式对J的大值有效。总之，在采用时间片的情形中，仅有的功能差别是支路nc上所发出的数据、等于最大延迟Tc/J和平均延迟Tc/2J的最初延迟t1-t0(对于J的大值，差别变得可忽略)：如果如在DVB-H标准中选择J＝1，那么支路nc的最大延迟将等于Tc并且非常接近于支路c的延迟，因此本发明将是有创造性的(从技术观点)，但不是有用的(从实际观点)。另一方面，采用J的大值(例如J＝5)来实现本发明，取得的换台延迟大约比未校正支路上的少J-1倍(并且如上所述，对于同样大小的缓冲器，在遭受长中断的信道之上的已校正支路上取得更好的性能)。 
正如从现有技术中已知的，块Dav表示音频-视频数据流解码过程；该块将输入数据流分离为三个流：一个流与控制数据有关，一个流与压缩音频数据有关，且一个流与压缩视频数据(例如根据MPEG-4/H264标准)有关；对音频和视频数据进行处理以获取未压缩音频和视频数据流(在图中分别为an和vn)。此外，块Dav使数据流连续(在前面过程中的这些数据流是不连续的)，正如从现有技术中已知的那样(通过使用具有合适时间常数的缓冲器e锁相环PLL)，并且此外保持音频和视频数据流之间的同步。 
在解码器的输出，将音频an和视频vn样本分别发送至数模转换器D/Aa(音频)和D/Av(视频)，所述数模转换器D/Aa(音频)和D/Av(视频)分别产生模拟信号a(t)(音频)和v(t)(视频)，所述模拟信号a(t)(音频)和v(t)(视频)分别被发送(一般通过合适的放大)至没有在图中示出的扩音器和显示构件。 
当解码器被连接到支路nc时，音频-视频数据流以低于在稳态阶段时支路c上表现的速率Rs的速率Rs’进入，因此适当减慢音频和视频数据的再生，使得将音频和视频数据无中断地呈现给用户。 
为此，根据现有技术，在时刻ts之后音频-视频数据解码过程Dav应以因α因子而导致相对于稳态阶段中所用速度更低的速度进行。根据已知技术，为了获取视频信号的连续再生，在短时阶段期间适当修改控制解码图案的频率的同步(帧速率)的参数，因此防止视频缓冲器排空。 
因此，音频-视频序列将因α因子而减慢；显然，α越接近1，用户将越少看到序列速度在切换时间ts之后的变化。 
在本发明的另一个实施例，接收机对ts之前的时间期间的音频信号的频率变化进行补偿，从而使用户不会注意到被降低的音调。 
在图4(a)和4(b)中，正如从数学变换理论中已知的那样，示出了减慢的音频信号的频谱变化的过程。 
如果a(t)是在没有减慢时钟情况下获得的数模转换器的输出模拟 音频信号，那么已减慢信号将为as(t)＝a(αt)。如果A(f)是信号a(t)的频谱，具有带宽BW和中心频率fa，那么，从而信号as(t)的频谱为As(f)＝(1/α)A(f/α)，具有带宽BWs＝αBW和中心频率fa/α。 
因此，显然，如图4(b)中所示，音频-视频序列的减慢导致音频信号的频谱变化。 
实验性测试证明，如果一方面视频序列的减慢对用户来说不是特别容易察觉或者令人讨厌，那么另一方面音频序列的减慢可因为降低的音调而对人耳来说更容易察觉。图4(c)示例了本发明的实施例，其中接收机通过执行已解码音频信号as(t)或者an的频率转变(以模拟或者数字进行)而对音频信号的降低音调进行补偿，以用于使中心频率大约恢复至原始信号的中心频率fa。这通过两次变频而获得，通过使用已知的技术，第一次变频上变频至大于音频带BW的频率，而第二次变频下变频至所期望频率fa。特别地，第一次变频通过与频率ft的载波的差拍(beat)而执行(图中块4-1)，然后通过带通滤波器F{f}(块4-2)，因而获得具有频谱A’s(f)的信号。另一方面，第二次变频通过与频率ft+{fa(α+1)/α]}的载波的差拍而执行(块4-3)，然后通过具有带宽BW的带通滤波F’{f}(块4-4)，因而获得所期望的具有频谱Ac(f)的信号。在另一个实施例中，音调下降是由直接地作用于数字信号而补偿的：正如从现有技术中所知的，这是其中使用时域谐波换算技术(Time Domain Harmonic Scaling technique)或者相位声码器技术(PhaseVocoder technique)的情形。 
值得一提的是，在解码压缩音频或者视频信号(例如根据MPEG标准)而同时保持被解码的音频和视频流同步的速度变化问题已经被考虑并且在现有技术中被部分解决。 
此外，如何改变音频信号的音调而不改变其持续时间是已知的(“音调转移”)。 
关于“相位声码器”技术，例如可以参考Portnoff写的文章“Implementation of the digital phase vocoder using the fast Fourier transform”，(源自IEEE Transactions on Acoustics，Speech，and SignalProcessing，Volume 24，Issue 3，Jun 1976，pages 243-248)。 
关于“时域谐波换算”技术，例如可以参考Malah写的文章“Time-domain algorithms for harmonic bandwidth reduction and timescaling of speech signals”，(源自IEEE Transactions on Acoustics，Speech，and Signal Processing，Volume 27，Issue 2，Apr 1979，pages 121-133)。 
此外，为了实现本发明，考虑与用于以由用户控制的可变速度获得音频-视频流的连续再生、同时确保音频和视频流同步的方法和系统有关的美国专利5,583,652是有意义的。在所述系统中，时域谐波换算技术被用于改变音频流的再生速度而不改变其音质。 
一般而言，基于上文，根据本发明的方法可用于通过能够对所述序列进行解码的解码器以及位于相对解码器的上游的、能够暂时地存储所述序列的至少一部分的缓冲器而再生音频和/或视频序列(典型地，音视频序列)；后者通过多个数据块而传输，所述块中的每一个包括音频和/或视频信息数据部分以及相应的纠错数据部分。典型地，所述部分以分隔的时间间隔传输，特别地，信息部分在相应的校正部分之前传输；然而，这并不影响本发明，只要该纠错数据与信息数据一起被复用，使所述信息数据不改变。因此，信息数据部分和相应的纠错数据部分可以以不同的顺序在两个或者两个以上的时间间隔内在信道上传输，并且也可以被分成包括例如交织矩阵的不相邻部分的若干分组。例如，能够将携带信息数据的分组(例如图1a的子矩阵ADT的列)与携带纠错数据的分组(例如图1a的子矩阵RSDT的列)交替。 
该方法包括短时操作模式和稳态操作模式；在稳态操作模式下，块的信息数据通过应用所述块的相应校正数据来校正，然后将其提供给解码器；在短时操作模式，块的信息数据被直接提供至解码器而忽视所述块的相应校正数据。 
如先前参考所述实施例所述，在稳态操作模式下信息数据优选地由解码器以额定速度(nominal speed)解码，而在短时操作模式下信息 数据由解码器以低于额定速度的速度解码。典型地，这些速度应该被认为是平均速度。然而，关于该优选特征重要的是在解码器的输出处的音频和/或视频数据流速度，而不是依赖于相应结构的解码器的内部操作速度。 
典型地，在音频和/或视频序列已经(由用户)选择之后短时模式被用于再生以及用于确定的时间间隔，而在所述时间间隔之后使用稳态模式。 
如先前所述，上文定义的方法一般也可以使用在“时间片”的情形下；在该情形下，属于同一序列的数据块可以不一定邻近；此外，信息部分和/或校正部分可以方便地被分成不同数据的块。 
上面所描述的方法一般可以方便地在用于再生音频和/或视频序列的装置内部实现；例如，该装置可以组成完全或部分集成到微芯片的电子组件。 
该装置包括能够解码音频和/或视频序列的解码器和缓冲器，所述缓冲器在上游连接至解码器、能够储存序列的至少一部分；能够实现该方法的构件也是必需的；显而易见，在装置中可以有其它元件，例如之前在图2中所示的那些元件。 
上文所述的构件可以是硬件和/或软件；特别地，所述构件可以是编程类型的构件并且包括能够实现该方法的代码部分。 
这种类型的装置可以方便地在音频和/或视频序列再生的设备、例如电视接收机之内使用。 
值得指出的是，先前对时间片的传输的改进的简述本质上与根据本专利申请且之前详细描述的再生方法无关地组成的新颖创新。 
该发明对发送方法(和相应的发射机)和接收方法(和相应的接收机)以及传输信号的结构都有影响。 
图5b示意性地示例了属于四个服务s1、s2、s3、s4和时间间隔“i”的四个数据块“B”(具有相同的结构和大小)，并且它们用Bi[s1]、Bi[s2]、Bi[s3]、Bi[s4]表示；至于时间间隔“i+1”，只能部分地看见 一个块。各块相应于交织矩阵，如图所示，所述交织矩阵包括信息数据部分(在左边)和纠错数据部分(在右边)；两部分由双垂线分隔。 
根据已知技术，以时间的分割传输提供：将这个四块作为连续“时间片”中的序列来传输(例如根据顺序s1、s2、s3、s4)，并以时段Tc定期重复该序列，如图5(a)所示。各块组成“数据片”。 
根据本文所提出的创新技术以时间片的传输提供将各块分成“小型块”(由数据集合组成)。在图5的示例中，各块被分成四个相同的部分；因此，例如块Bi[s3]被分成小型块P1[s3]、P2[s3]、P3[s3]、P4[s3](为清楚起见，参考P3[s3]在图中已经被忽略并且各部分由细垂线分隔)。正如可以在图5(b)中看见，一些小型块(P1[s3]和P2[s3])只包含信息数据，小型块(P4[s3])只包含校正数据而小型块(P3[s3])包含信息数据和校正数据；所述小型块恰好对应于交织块部分。自然地，小型块可以由以任意顺序取包含在原始块中的数据的部分而形成，而不影响本发明的方法；例如，小型块可以包含交织矩阵的不相邻的部分。 
根据本文所提出的创新技术，以时间片的传输提供在各“时间片”中具有基本与小型块对应的“数据片”，以及如图5(c)所示，与不同服务对应的小型块随时间周期性交替。 
从“换台”和“纠错”的观点，根据该创新技术的以时间片的传输是有利的。 
至于“换台”，由于小型块的使用，接收机将接收与在对应于Tc/J的最大时间上的任何服务有关的信息数据(其中J是各块的部分的数量)。如果接收机从不使用FEC或者处于省略FEC的操作模式(正如之前所述)，那么关于任何服务的序列能够或多或少立刻再生。 
至于“纠错”，在接收信号中出现长(和随机)干扰的情形下有优势。例如，参考图5，如果Tc等于8秒，并且数据块的传输(整个交织矩阵)等于8秒，并且小型块的传输(整个矩阵的四分之一)等于2秒，那么与创新传输的情形(图5(c))相比，10秒干扰在常规传输的情形下(图5(a))有非常不同的作用；在第一个情形下，干扰将很可能影响整 个数据块并且将不能被恢复；在第二个情形下，干扰将影响四个服务的每一个服务中的一个或两个小型块并且由于相应块的FEC而很可能可被恢复。 
本发明考虑数据块的传输(特别地，基本与包含在交织矩阵的数据对应)或者小型块数据的传输(特别地，基本与包含在交织矩阵中的数据的部分对应)。 
规定在块和/或小型块中不参考前面的图像对初始图像进行编码可能是有利的；该图像通常被称为“I-图”或者“I-帧”。实现该方案的详细信息例如可以参考所提及的国际专利申请WO2006/031925。 
本文已经描述的所有相关于技术创新的内容不应被以限定的意义来理解而仅是示例。 
因此，本发明的范围和广度由所附权利要求限定。 

Claims (36)

1.一种用于再生音频和/或视频序列的方法，所述方法包括下述步骤：通过解码器对所述序列进行解码、在上游侧连接到所述解码器的缓冲器中暂时储存所述序列的至少一部分、通过多个数据块来发送所述序列，所述块中的每个都包括音频和/或视频信息数据部分和相应的纠错数据部分，这些部分在不同的时间间隔中被发送，所述方法包括短时操作模式和稳态操作模式，在所述稳态操作模式下，一个块中的校正数据被应用于所述块的相应信息数据，然后将所述信息数据供给至所述解码器，所述信息数据由所述解码器以额定速度进行解码，而在所述短时操作模式下，块的信息数据被直接供给至所述解码器而忽略所述块的相应校正数据，其特征在于，在所述短时操作模式下，信息数据由所述解码器以低于所述额定速度的速度进行解码。
2.根据权利要求1所述的方法，其特征在于，在完成所述块的信息数据部分的接收之前，将块的信息数据供给至所述解码器。
3.根据权利要求1或2所述的方法，其中，所述音频和/或视频序列根据允许检测误差的方法进行发送，其特征在于，在至少所述音频和/或视频序列已经被选择用于再生之后并且直到根据在所述选择之后所检测误差的数量和/或类型来已经验证至少一个预定条件为止，启动所述短时操作模式。
4.根据权利要求1或2所述的方法，其中，所述音频和/或视频序列根据允许检测误差的方法进行发送，其特征在于，如果在短时操作间隔时间期间，检测到多个误差大于预定的阈值，那么避免或中断未校正信息数据到所述解码器的供给，并且在可用时开始已校正信息数据到所述解码器的供给。
5.根据权利要求1或2所述的方法，其中，所述音频和/或视频序列根据允许检测误差的方法进行发送，其特征在于，如果在短时操作间隔时间期间，检测到预定类型的至少一个误差，那么避免或中断未校正信息数据到所述解码器的供给，并且在可用时开始已校正信息数据到所述解码器的供给。
6.根据权利要求4所述的方法，其特征在于，在所述时间间隔期间当根据检测的误差数量和/或类型已经验证了至少一个预定条件时，避免或中断未校正信息数据到所述解码器的供给，并且在可用时开始已校正信息数据到所述解码器的供给。
7.根据权利要求3所述的方法，其特征在于，所述至少一个预定条件指的是所述序列的数据块。
8.根据权利要求3所述的方法，其特征在于，所述至少一个预定条件在连续数据块上被重复计算。
9.根据权利要求1或2所述的方法，其特征在于，在所述音频和/或视频序列已经被选择用于再生之后且在确定的时间间隔使用所述短时操作模式，并且在所述确定的时间间隔之后使用所述稳态操作模式。
10.根据权利要求9所述的方法，其特征在于，所述确定的时间间隔取决于将一个块的校正数据应用于所述块的相应信息数据所需的时间。
11.根据权利要求9所述的方法，其特征在于，所述确定的时间间隔取决于数据块的接收和/或再生的持续时间。
12.根据权利要求11所述的方法，其特征在于，所述确定的时间间隔等于t1+(TB+TFEC)，其中t1是从所述序列的所述选择至与所述序列有关的块的接收的时间间隔，TB是与所述序列有关的块的接收的持续时间，TFEC是将关于与所述序列有关的块的校正数据应用于所述块的相应信息数据所需要的时间。
13.根据权利要求9所述的方法，其特征在于，所述确定的时间间隔等于或者大于t1+(TB+TFEC)/(1-α)，其中t1是从所述序列的所述选择至与所述序列有关的块的接收的时间间隔，TB是与所述序列有关的块的接收的持续时间，TFEC是将与所述序列有关的块的校正数据应用于所述块的相应信息数据所需要的时间，α是在所述短时操作模式下的信息解码速度和在所述稳态操作模式下的信息解码速度之间的小于1的比率。
14.根据权利要求13所述的方法，其特征在于，所述确定的时间间隔供给与α的不同值相关联的多个时间子间隔。
15.根据权利要求13或14所述的方法，其特征在于，逐渐地增加α的值直到它达到值1。
16.根据权利要求1或2所述的方法，其特征在于，从所述短时操作模式至所述稳态操作模式的切换时间取决于用户命令。
17.根据权利要求1或2所述的方法，其特征在于，从所述短时操作模式至所述稳态操作模式的切换模式取决于用户命令。
18.根据权利要求1或2所述的方法，其特征在于，使用ReedSolomon类型的线性分组码来计算所述纠错数据。
19.根据权利要求1或2所述的方法，其特征在于，从其中已将所述信息数据逐列插入的矩阵的行开始计算纠错数据。
20.根据权利要求1或2所述的方法，其特征在于，在短时操作模式期间，对与由所述解码器解码的所述音频和/或视频序列有关的音频信息数据应用变频，所述变频将平均频率转移到其自然值。
21.根据权利要求1或2所述的方法，其特征在于，在所述短时操作模式期间，对来自与由所述解码器解码的与所述音频和/或视频序列有关的音频信息数据的模拟音频信号应用变频，所述变频将平均频率转移到其自然值。
22.根据权利要求1或2所述的方法，其特征在于，在所述短时操作模式期间，相位声码器技术被应用于与所述音频和/或视频序列有关并由所述解码器解码的音频信息数据。
23.根据权利要求1或2所述的方法，其特征在于，在所述短时操作模式期间，时域谐波换算技术被应用于与所述音频和/或视频序列有关并由所述解码器解码的音频信息数据。
24.根据权利要求1或2所述的方法，其特征在于，所述数据块中的每一个都包括在交织矩阵中包含的数据。
25.根据权利要求1或2所述的方法，其特征在于，在所述数据块中的每一个的开始处，与之前的图像无关地包括已编码的图像。
26.根据权利要求1或2所述的方法，其特征在于，该方法包括中间操作模式，所述中间操作模式在所述短时操作模式之后而在所述稳态操作模式之前，在所述中间操作模式中混合的已校正和未校正数据被供给给所述解码器。
27.根据权利要求1或2所述的方法，其特征在于，所述音频和/或视频序列通过时间片的发送技术与其它音频和/或视频序列一起发送。
28.根据权利要求27所述的方法，其特征在于，以时间片发送的每一个数据片包括包含在交织矩阵中的数据的一部分。
29.根据权利要求28所述的方法，其特征在于，数据的所述部分包括与音频和/或视频序列有关的信息数据。
30.根据权利要求28所述的方法，其特征在于，数据的所述部分包括与音频和/或视频序列有关的校正数据。
31.根据权利要求28所述的方法，其特征在于，数据的所述部分包括与音频和/或视频序列有关的信息和校正数据的混合。
32.根据权利要求28所述的方法，其特征在于，所述部分是所述交织矩阵的精确片断。
33.根据权利要求27所述的方法，其特征在于，在以时间片发送各数据片的开始处包括有不参考之前的图片进行编码的图像。
34.根据权利要求1或2所述的方法，其特征在于，在所述稳态操作模式下，所述信息数据被从所述缓冲器中以额定速度提取，而在所述短时操作模式下，所述信息数据被从所述缓冲器中以低于所述额定速度的速度提取。
35.根据权利要求34所述的方法，其特征在于，在所述稳态操作模式下，从所述缓冲器中的读取速度在平均上等于在所述缓冲器中的写入速度，而在所述短时操作模式下，从所述缓冲器中的读取速度低于在所述缓冲器中的写入速度。
36.根据权利要求35所述的方法，其特征在于，通过循环性地跳过时钟信号的一个或多个脉冲而获取所述读取速度和所述写入速度之间的差。
CN2007800344695A 2006-09-19 2007-09-18 用于再生音视频序列的方法与设备 Active CN101518048B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
IT000668A ITTO20060668A1 (it) 2006-09-19 2006-09-19 Metodo per riprodurre una sequenza audio e/o video, dispositivo di riproduzione ed apparecchio riproduttore che lo utilizzano
ITTO2006A000668 2006-09-19
PCT/IB2007/002689 WO2008035164A2 (en) 2006-09-19 2007-09-18 Method and apparatus for reproducing an audio video sequence

Publications (2)

Publication Number Publication Date
CN101518048A CN101518048A (zh) 2009-08-26
CN101518048B true CN101518048B (zh) 2012-04-11

Family

ID=39200886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800344695A Active CN101518048B (zh) 2006-09-19 2007-09-18 用于再生音视频序列的方法与设备

Country Status (8)

Country Link
US (1) US9338492B2 (zh)
EP (1) EP2070310A2 (zh)
JP (1) JP5166417B2 (zh)
KR (1) KR101445368B1 (zh)
CN (1) CN101518048B (zh)
HK (1) HK1136724A1 (zh)
IT (1) ITTO20060668A1 (zh)
WO (1) WO2008035164A2 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100698620B1 (ko) * 2003-06-16 2007-03-21 삼성전자주식회사 강건한 에러 정정 부호화 장치를 가지는 디지털 송/수신시스템 및 그의 에러정정부호화/정정방법
JP2010538534A (ja) * 2007-08-28 2010-12-09 トムソン ライセンシング チャネル変更遅延のないスタガーキャスティング
CN101459432B (zh) * 2007-12-14 2010-12-08 中兴通讯股份有限公司 一种rs码交织编码方法
WO2011093778A1 (en) * 2010-01-28 2011-08-04 Telefonaktiebolaget L M Ericsson (Publ) Method and arrangement in a telecommunication system
EP2529523A1 (en) * 2010-01-28 2012-12-05 Telefonaktiebolaget L M Ericsson (PUBL) Block decoding using overlapping and add
KR101611169B1 (ko) * 2011-01-18 2016-04-11 삼성전자주식회사 통신/방송 시스템에서 데이터 송수신 장치 및 방법
KR101791477B1 (ko) * 2011-10-10 2017-10-30 삼성전자주식회사 통신/방송 시스템에서 데이터 송수신 장치 및 방법
CN102331649B (zh) * 2011-10-22 2013-04-24 西北大学 一种多波长太赫兹波参量振荡器
US10158905B2 (en) * 2016-09-14 2018-12-18 Dts, Inc. Systems and methods for wirelessly transmitting audio synchronously with rendering of video
US10318578B2 (en) 2017-05-23 2019-06-11 Rovi Guides, Inc. Systems and methods for updating a priority of a media asset using a continuous listening device
WO2023044000A1 (en) * 2021-09-17 2023-03-23 Hyphy Usa Inc. Spread-spectrum video transport integration with virtual reality headset

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1578981A (zh) * 2001-08-30 2005-02-09 松下电器产业株式会社 信息记录媒体、用于同时记录和再生的方法、以及信息记录和再生设备
CN1613256A (zh) * 2001-11-29 2005-05-04 卡提纳网络公司 补偿报文分组时延变化的系统和方法
EP1533974A1 (en) * 2003-11-18 2005-05-25 Yamaha Corporation Data reproducing system and data streaming system
CN1674674A (zh) * 2004-03-24 2005-09-28 株式会社日立制作所 动画数据的传输方法和系统、信息发出和接收装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL84902A (en) * 1987-12-21 1991-12-15 D S P Group Israel Ltd Digital autocorrelation system for detecting speech in noisy audio signal
US5247363A (en) * 1992-03-02 1993-09-21 Rca Thomson Licensing Corporation Error concealment apparatus for hdtv receivers
WO1995022233A1 (en) * 1994-02-11 1995-08-17 Newbridge Networks Corporation Method of dynamically compensating for variable transmission delays in packet networks
US6081650A (en) * 1994-06-30 2000-06-27 Thomson Licensing S.A. Transport processor interface and video recorder/playback apparatus in a field structured datastream suitable for conveying television information
GB2298078B (en) * 1995-02-20 1998-09-16 Sony Uk Ltd Digital tape recorder
US20020044757A1 (en) * 1995-08-04 2002-04-18 Sony Corporation Information carrier, device for reading and device for providing the information carrier and method of transmitting picture information
KR100217745B1 (ko) * 1996-05-31 1999-09-01 윤종용 디지탈 비디오 디스크 재생장치의 시스템 디코더
US6480541B1 (en) * 1996-11-27 2002-11-12 Realnetworks, Inc. Method and apparatus for providing scalable pre-compressed digital video with reduced quantization based artifacts
JP3430193B2 (ja) * 1997-01-20 2003-07-28 株式会社日立製作所 ディジタル信号再生装置及びディジタル信号再生方法
US6490000B1 (en) * 1997-12-24 2002-12-03 Echostar Communications Corporation Method and apparatus for time shifting and controlling broadcast audio and video signals
US6385771B1 (en) * 1998-04-27 2002-05-07 Diva Systems Corporation Generating constant timecast information sub-streams using variable timecast information streams
BR9906523A (pt) 1998-06-11 2000-07-25 Koninkl Philips Electonics N V Aparelho e processo para gravar um sinal de informação de vìdeo digital em um portador de gravação, e, portador de gravação
WO2000048323A1 (fr) * 1999-02-09 2000-08-17 Sony Corporation Systeme de transmission de donnees, recepteur de donnees et procede de transmission de donnees
JP2005514849A (ja) 2001-12-24 2005-05-19 シリコン・イメージ・インク シリアルリンクを利用したビデオ及び複数のフォーマットにおけるパケット化されたオーディオデータの伝送方法及びシステム
JP4309765B2 (ja) 2001-12-24 2009-08-05 シリコン・イメージ・インク シリアルリンクを利用したビデオ及び付属データの伝送方法及びシステム
JP4337707B2 (ja) * 2004-10-27 2009-09-30 ソニー株式会社 情報再生装置、バッファ制御方法およびプログラム
US7490341B2 (en) * 2005-06-07 2009-02-10 Nokia Corporation System and associated terminal, method and computer program product for directional channel browsing of broadcast content
US7565289B2 (en) * 2005-09-30 2009-07-21 Apple Inc. Echo avoidance in audio time stretching

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1578981A (zh) * 2001-08-30 2005-02-09 松下电器产业株式会社 信息记录媒体、用于同时记录和再生的方法、以及信息记录和再生设备
CN1613256A (zh) * 2001-11-29 2005-05-04 卡提纳网络公司 补偿报文分组时延变化的系统和方法
EP1533974A1 (en) * 2003-11-18 2005-05-25 Yamaha Corporation Data reproducing system and data streaming system
CN1674674A (zh) * 2004-03-24 2005-09-28 株式会社日立制作所 动画数据的传输方法和系统、信息发出和接收装置

Also Published As

Publication number Publication date
WO2008035164A2 (en) 2008-03-27
WO2008035164A8 (en) 2009-04-16
EP2070310A2 (en) 2009-06-17
CN101518048A (zh) 2009-08-26
JP5166417B2 (ja) 2013-03-21
HK1136724A1 (en) 2010-07-02
JP2010504058A (ja) 2010-02-04
ITTO20060668A1 (it) 2008-03-20
US20100061698A1 (en) 2010-03-11
US9338492B2 (en) 2016-05-10
KR20090066305A (ko) 2009-06-23
KR101445368B1 (ko) 2014-09-29
WO2008035164A3 (en) 2008-09-12

Similar Documents

Publication Publication Date Title
CN101518048B (zh) 用于再生音视频序列的方法与设备
CN101484939B (zh) 用于音频解码的时钟补偿技术
CN102474367B (zh) 在频谱感测期间的发射器静默
RU2408980C9 (ru) Устройство перемежения и приемник для сигнала, сформированного устройством перемежения
CN101310533B (zh) 服务获取的方法和设备
CN101998159B (zh) 接收装置和方法及接收系统
CN101176263B (zh) 用于解码前向纠错码的系统和方法
JP2008501251A (ja) デジタル放送システムおよびデジタル放送送受信方法
CN101626282A (zh) 在数据电视广播中的强壮信号传输
CN101379814A (zh) 移动广播终端中接收数据的装置和方法
JP2011519210A (ja) 時間的拡張機能を用いたスタッガキャスティング
CN102347042A (zh) 一种音轨切换方法、系统及音视频文件播放设备
US8938002B2 (en) Data processing apparatus, data processing method, and program
CN103581730A (zh) 在数字机顶盒上实现音视频同步的方法
CN101076120B (zh) 维持音频/视频同步的健壮系统
CN103460690A (zh) 传输包括音频包的传输流的数字广播发送机和接收此的数字广播接收机及其方法
CN103109527A (zh) 数字广播发送器、数字广播接收器及其用于配置并处理流的方法
CN102404573B (zh) 音频视频同步处理方法及装置
WO2007060589A2 (en) Method and apparatus for error-correction in a communication system
JP2001268027A (ja) データ伝送システム、データ送信装置およびデータ受信装置
JP2004343652A (ja) 長周期インターリーブ送信装置および受信装置
JP4112428B2 (ja) インターリーブ受信装置
US7164728B1 (en) Method and device for forming transport frames from coded-signal frames and device for extracting coded signal frames
WO2011034844A2 (en) Apparatus and method for synchronization of trellis states in a network
CN103209046B (zh) Cmmb字节解交织装置及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1136724

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1136724

Country of ref document: HK