CN101536497A - 用于减少频道变化时间以及在频道变化期间同步音频/视频内容的方法 - Google Patents

用于减少频道变化时间以及在频道变化期间同步音频/视频内容的方法 Download PDF

Info

Publication number
CN101536497A
CN101536497A CNA2006800563113A CN200680056311A CN101536497A CN 101536497 A CN101536497 A CN 101536497A CN A2006800563113 A CNA2006800563113 A CN A2006800563113A CN 200680056311 A CN200680056311 A CN 200680056311A CN 101536497 A CN101536497 A CN 101536497A
Authority
CN
China
Prior art keywords
video
video flowing
stream
processing
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800563113A
Other languages
English (en)
Other versions
CN101536497B (zh
Inventor
戴季旺
艾伦·杰·施坦因
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
International Digital Madison Patent Holding SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN101536497A publication Critical patent/CN101536497A/zh
Application granted granted Critical
Publication of CN101536497B publication Critical patent/CN101536497B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383—Accessing a communication channel
    • H04N21/4384—Accessing a communication channel involving operations to reduce the access time, e.g. fast-tuning for reducing channel switching latency
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/50—Tuning indicators; Automatic tuning control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64—Addressing
    • H04N21/6405—Multicasting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种数字A/V装置(50)，提供减少的频道改变时间并且在频道改变事件期间保持音频和视频内容之间的同步。根据示例性的实施例，该数字A/V装置(50)包括：至少一个信号接收机(52、62)，用于接收第一音频流、第一视频流和第二视频流，其中第一和第二视频流表示相同的节目并且第一视频流具有至少一个不同于第二视频流的特征；第一音频信号处理器(68)，用于处理第一音频流以产生第一处理音频流；第一视频信号处理器(66)，用于处理第一视频流以产生第一处理视频流；第二视频信号处理器(56、58)，用于处理第二视频流以产生具有相对于第一处理音频流的延迟的第二处理视频流；第一缓冲器(74)，用于缓冲第一处理音频流以提供去抖动；呈现器(78、80)，用于响应于频道改变命令，呈现第一处理音频流和第二处理视频流；切换器(76)，用于在呈现器(78)开始呈现第二处理视频流后，从第二处理视频流切换到第一处理视频流，从而使呈现器(78)开始呈现第一处理视频流；并且由此，在频道改变事件期间，保持第一处理音频流和第一处理视频流之间的同步。

Description

用于减少频道变化时间以及在频道变化期间同步音频/视频内容的方法
相关专利的交叉引用
本申请要求于2006年11月7日在美国专利商标局提交的临时申请所产生的优先权和所有权益，为该临时申请分配的序号为60/857,371。
技术领域
本发明总体涉及数字音频和视频(A/V)装置，更具体地，涉及一种用于在数字A/V装置中减少频道改变时间以及在频道改变事件期间保持音频和视频内容间的同步的方法。
背景技术
在数字电视广播系统中，允许观众快速改变频道是一个重要的特征。频道改变延迟至少有两个主要来源。第一个来源来自很多视频压缩标准(如MPEG-2和H.264)所使用的图像组(group of picture，GOP)结构。在GOP中，使用帧内编码和帧间编码对图像进行编码。帧内编码(I)图像(又称为帧)使用其内部信息进行压缩，因而可以单独译码。然而，必须在相关的帧内编码图像(I图像)被译码后才能对帧间编码图像(即B或P图像)进行译码。由于与B或P图像相比，I图像所要求的比特通常是它们的3到10倍，因此为了减少总的比特率，在比特流中很少对其进行编码。在数字电视广播系统中，I帧可能每1到2秒只出现一次。当数字(A/V)装置调谐到一节目时，在可以译码或显示任何图像之前，必须进行等待直到接收到第一个I帧。这可能导致显著的延迟。
频道改变延迟的第二个来源来自于数字A/V装置中的处理组件(如机顶盒(STB))。例如，在互联网协议电视(IPTV)广播系统中，传输网络中各种有源组件向媒体流贡献抖动。在数字A/V装置处必须减少该抖动以避免向用户呈现不愉快的伪像(artifact)。典型地，在数字A/V装置处通过缓冲处理来减少这样的抖动，在频道改变事件期间，缓冲处理可能是视频内容的呈现中延迟的主要来源。由于与视频抖动相比，人类往往对音频抖动更加敏感，因此在数字A/V装置处通常需要更强地对接收到的音频内容进行去抖动。针对音频内容，更强的去抖动导致更长的缓冲、更长的频道改变时间、以及在频道改变事件期间音频和视频内容之间的同步丢失的潜在可能。
相应地，需要一种用于在数字A/V装置中减少频道改变时间和频道改变事件期间保持音频和视频内容之间的同步的方法。本发明解决了这些和/或其它问题。
发明内容
根据本发明的一方面，公开了一种用于在数字音频和视频装置中改变频道的方法。根据示例性的实施例，该方法包括以下步骤：接收第一音频流、第一视频流和第二视频流，其中第一和第二视频流表示相同的节目并且第一视频流具有至少一个不同于第二视频流的特征；处理第一音频流以产生第一处理音频流；处理第一视频流以产生第一处理视频流；处理第二视频流以产生具有相对于第一处理音频流的延迟的第二处理视频流；对第一处理音频流进行缓冲以提供去抖动；响应于频道改变命令，呈现第一处理音频流和第二处理视频流；由此，在频道改变期间，保持第一处理音频流和第二处理视频流之间的同步；随后从第二处理视频流切换到第一处理视频流并呈现第一处理视频流；以及由此，在频道改变期间，保持第一处理音频流和第一处理视频流之间的同步。例如，所述特征可以包括：较短的GOP大小、较低的分辨率和/或较低的比特率。
依照本发明另一方面，公开了一种数字音频和视频装置。根据示例性的实施例，该数字音频和视频装置包括：接收装置(例如至少一个信号接收机)，用于接收第一音频流、第一视频流和第二视频流，其中第一和第二视频流表示相同的节目并且第一视频流具有至少一个不同于第二视频流的特征；第一音频处理装置(例如第一音频信号处理器)，用于处理第一音频流以产生第一处理音频流；第一视频处理装置(例如第一视频信号处理器)，用于处理第一视频流以产生第一处理视频流；第二视频处理装置(例如第二视频信号处理器)，用于处理第二视频流以产生具有相对于第一处理音频流的延迟的第二处理视频流；缓冲装置(例如缓冲器)，用于缓冲第一处理音频流以提供去抖动；呈现装置(例如呈现器)，用于响应于频道改变命令，呈现第一处理音频流和第二处理视频流；由此，在频道改变期间，保持第一处理音频流和第二处理视频流之间的同步；切换装置(例如切换器)，用于在呈现装置开始呈现第二处理视频流后，从第二处理视频流切换到第一处理视频流，从而使呈现装置开始呈现第一处理视频流；以及由此，在频道改变期间，保持第一处理音频流和第一处理视频流之间的同步。例如，所述特征可以包括：较短的GOP大小、较低的分辨率和/或较低的比特率。
附图说明
通过参考下面结合附图对本发明实施例的描述，以上提到的和本发明的其它的特征和优势以及获得它们的方式将变得更加显而易见，并且本发明将得到更好地理解，附图中：
图1是适于实现本发明的系统的框图；
图2是提供了根据本发明的示例性实施例的图1所示的单个数字A/V装置的进一步细节的框图；
图3是根据本发明的示例性实施例的定时图。
此处阐述的范例示出了本发明的优选实施例，这样的范例不应被理解为以任何方式限制本发明的范围。
具体实施方式
现在参见附图，更具体地参见图1，图1示出了适于实现本发明的系统100的框图。如图1所示，系统100包括：规则A/V编码器10、低分辨率低比特率视频编码器20、延迟单元30、多播切换器40和多个数字A/V装置50。根据示例性实施例，系统100表示IPTV广播系统。
在系统100中，译码器10和20将广播节目同时分别编码为第一压缩音频和视频流12(在此可被称作“规则流”)以及第二压缩视频流14(在此可被称为“频道改变流”)。规则流12包括广播节目的基本音频和视频流。频道改变流14包括与规则流12中的基本视频流相对应但是具有至少一个与规则流12中的基本视频流不同的特征的基本视频流。频道改变流14还不包括任何音频内容。根据示例性实施例，与规则流12的基本视频流相比，组成信道改变流14的基本视频流具有较短的GOP大小(如，短0.5秒等)、较低的分辨率(如，通用中间格式(CIF)等)和/或较低的比特率(如，小于200kbps等)。
延迟单元30有效地将信道改变流14延迟预定的可配置时间段(如，900毫秒等)。例如，系统100的业务提供者可以自适应地控制(如，调节)该延迟。多播切换器40从编码器10接收规则流12，从延迟单元20接收经延迟的信道改变流，并将这些流12和14多播到A/V装置50。根据示例性实施例，多播切换器40可以被实施为数字用户线接入复用器(DSLAM)。
在系统100中，可使用互联网协议(IP)多播来通过IP骨干网向多播联接点(如多播切换器40)发送压缩流12和14，多播联接点选择性地将流12和14转发到终端设备(如数字A/V装置50)。根据示例性实施例，可在系统100中使用互联网组管理协议(IGMP)进行频道选择。例如，终端设备(如数字A/V装置50)可将针对期望频道的联接请求发送到多播切换器40(如，DSLAM)。当不再想要该频道时，可以向多播切换器40发送离开请求。
根据本发明的原则，由延迟单元30对较低比特率的信道改变(视频)流14进行时移，以使规则(视频和音频)流12滞后一可配置时段(如，900毫秒等)，从而减少频道改变时间。由于与视频帧相比，音频帧通常要求更多的去抖动缓冲，因此如果较低比特率(视频)的信道改变流14和规则(音频和视频)流12之间没有时移，较低比特流的信道改变流14的译码视频帧将经历与规则流12的音频帧相同的去抖动等待时间。这可能在将第一视频帧呈现给用户时导致增加的延迟。因此，由延迟单元30向信道改变流14引入的增加的时移减少了频道改变事件期间的视频缓冲等待时间。根据示例性的实施例，可在系统100中多播切换器40之前的任何地方引入由延迟单元30提供的延迟。例如，如图1所示，可在位于多播切换器40前的流或代理服务器(图1中未示出)处引入延迟。
参见图2，图2提供了根据本发明示例性实施例的图1所示的单个数字A/V装置50的进一步细节的框图。如图2所示，数字A/V装置50针对频道改变流14和规则流12提供单独的处理路径。针对频道改变流12的处理路径包括：接收缓冲器52、解复用器54、低比特率视频译码器56和上采样过滤器58。针对规则流12的处理路径包括：接收缓冲器60、解复用器62、规则视频译码器64、音频译码器66和去抖动缓冲器68。数字A/V装置50还包括：频道改变视频切换器70、去抖动缓冲器72、A/V同步块76、视频呈现器78和音频呈现器80。根据示例性的实施例，数字A/V装置50可以被实施为机顶盒或任何其它类型的数字A/V装置。
在图2中，接收缓冲器52接收并对频道改变流14进行缓冲以产生缓冲视频流，解复用器54将该缓冲视频流从其传输流中解复用为低比特率基本视频流。低比特率视频译码器56对低比特率基本视频流进行译码以产生未压缩的低分辨率视频流，上采样过滤器58对其进行上采样以产生处理后的视频流。
此外，在图2中，接收缓冲器60接收并对规则流12进行缓冲以产生缓冲音频和视频流，解复用器62从传输流中将该缓冲音频和视频流解复用为基本音频和视频流。规则视频译码器64对基本视频流进行译码以产生未压缩的处理后的视频流。音频译码器66对基本音频流进行译码以产生未压缩的处理后的音频流。
将从上采样过滤器58输出的处理后的视频流(与信道改变流14相对应)和从规则视频译码器64输出的处理后的视频流(与规则流12的视频内容相对应)都发送到频道改变视频切换器70。频道改变视频切换器70响应于来自用户的频道改变命令，将(从上采样过滤器58输出的)频道改变流14的视频内容切换到其输出，直到其接收到(从规则视频译码器64输出的)规则流的视频内容中的第一个未压缩的I帧为止。此后，频道改变视频切换器70将(从规则视频译码器64输出的)规则流12的视频内容切换到输出，并且不再使用(从上采样过滤器58输出的)频道改变流14的低分辨率视频内容。
去抖动缓冲器72对从频道改变视频切换器70输出的视频内容(即帧)进行缓冲以去除抖动。去抖动缓冲器68对从音频译码器66输出的音频内容(即帧)进行缓冲以去除抖动。根据示例性的实施例，去抖动缓冲器68和72可位于接收缓冲器52和60以及视频和音频呈现器78和80之间的任何位置。然而，为了示例和说明的目的，图2示出了恰好位于A/V同步块76之前的去抖动缓冲器68和72。
根据音频和视频呈现器的基于公共系统时钟(common systemclock)的表示时间戳，A/V同步块76确保由音频和视频呈现器80和78分别呈现从去抖动缓冲器68和72提供的音频和视频内容。换言之，A/V同步块76确保同时呈现具有相同表示时间戳的音频和视频内容(如，帧)。
现在参见图3，图3示出了根据本发明的示例性实施例的定时图。具体地，图3示出了由本发明提供的频道改变时间的减少。由参考数字300A表示的图3的上部示出了没有通过图1中的延迟单元30向频道改变流引入延迟的情况下，视频和音频帧的时间线。相反，由参考数字300B表示的图3的下部示出了依照本发明的原理，通过图1中的延迟单元30向频道改变流施加延迟的情况下，视频和音频帧的时间线。
在由参考数字300A表示的图3的上部，由编码器10和20分别同时对规则流12和低比特率频道改变流14进行编码，并进行发送。没有通过如图1所示的延迟单元30向频道改变流14施加延迟。数字A/V装置50的接收缓冲器60在时刻aa-0接收规则流12中的第一音频帧并由音频译码器66在时刻ad-0对其进行译码。在时刻ar-0被音频呈现器80呈现前，去抖动缓冲器68对规则流12中的第一音频帧进行缓冲以去除抖动。
由于只有帧内编码的视频帧(I帧)可以被独立译码，因此第一可译码和可显示视频帧是接收到的第一视频I帧。大多数时间，由于同规则流12相比I帧在频道改变流14中出现的更频繁，因此接收到的第一视频I帧来自频道改变流14。通常在第一音频帧后接收到首先接收到的视频I帧。假定数字A/V装置50的接收缓冲器52在时刻Ia-0接收频道改变流14的第一视频I帧，译码器56在时刻Id-0对该帧进行译码，然后去抖动缓冲器72在时刻Ij-0对其进行缓冲以去除抖动。在时刻Ij-0对该第一视频I帧进行去抖动后，准备将其进行呈现和显示。然而，由于音频和视频同步(即，对嘴)的要求，直到准备好呈现对应的音频帧(即，图3上部中的帧i)为止，不能呈现和显示该第一视频I帧。由于为了去除抖动音频帧需要比视频帧更长的缓冲时间(由于对音频抖动主观敏感度更高)，第一视频I帧不得不等到时刻Ir-0(即，在将音频帧i去抖动后)才能呈现。
由参考数字300A表示的图3的上部示出了数字A/V装置50中的音频帧i的时间表(chronology)。具体地，接收缓冲器52在时刻ia-0接收到音频帧i，时刻ia-0与接收缓冲器60接收到频道改变流14中的第一视频I帧的时刻相同。然后在时刻id-0对音频帧i进行译码。在去抖动后，准备好在时刻ir-0呈现音频帧i，ir-0是音频帧i和第一视频I帧的实际呈现时间。由参考数字300A表示的图3的上部演示了由音频帧i的去抖动时间引起的针对视频的增加的频道改变时间。即使准备好在时刻Ij-0呈现第一视频I帧，也必须等到准备好音频帧i的时刻Ir-0。额外等待时间是时刻Ir-0和时刻Ij-0之间的差。
由参考数字300B表示的图3的下部示出了由本发明提供的频道改变时间的改进。在图3的下部，延迟单元30有意地将较低分辨率的频道改变流14延迟预定时段(参见图1)。在时刻ia-1接收与频道改变流14中的第一视频I帧对应的音频帧i，时刻ia-1比接收到频道改变流14中的第一视频I帧的时刻Ia-1早。接收时刻的差抵消了音频去抖动缓冲器68的较长延迟。因而，准备在时刻ir-1呈现视频帧I，ir-1比由参考数字300A所表示的图3的上部中要早。具体地，针对视频呈现的等待时间的实际减少量是ir-1和ir-0之间的差。
由参考数字300B表示的图3的下部示出了本发明另一优势，也就是缩短了呈现第一音频帧和呈现第一视频帧的时刻之间的时间差。在参考数字300A表示的图3的上部中，此时间差是ir-0和ar-0之间的差。相反，在参考数字300B表示的图3的下部中，此时间差是ir-1和ar-1之间的时间差。此缩短的时间差提供了更好的用户体验。
根据本发明的一个示例性实施例，可以使用以下参数。用于频道改变流14的GOP大小是500毫秒，后者在对第一视频I帧的接收中给出了250毫秒的平均延迟。用于对频道改变流14进行去抖动的缓冲时间是50毫秒。用于对规则流12进行去抖动的缓冲时间是350毫秒。当应用本发明时，频道改变流14比规则流12滞后250毫秒。不应用本发明，呈现第一视频I帧的平均等待时间是大约250毫秒加上350毫秒(或600毫秒)。呈现第一音频帧和呈现第一视频I帧的时刻之间的延迟是大约250毫秒。相反，在应用本发明通过延迟单元30延迟频道改变流14(参见图1)后，将呈现第一视频I帧的平均等待时间减少到250毫秒加350毫秒减250毫秒(或350毫秒)。此外，将呈现第一音频帧和呈现第一视频I帧的时刻之间的延迟减少到大约0毫秒。
如此处所述，本发明提供了一种用于在数字A/V装置中减少频道改变时间和在频道改变事件期间保持音频和视频内容之间的同步的方法。本发明适用于不同的数字A/V装置，所述数字A/V装置带有或不带有集成的显示装置。相应地，此处所用的短语“数字A/V装置”或“数字音频和视频装置”可以指系统或装置，所述系统或装置包括但不限于：包括集成显示装置的电视、计算机或监视器；诸如机顶盒、盒式磁带录像机(VCR)、数字多功能盘(DVD)播放器、视频游戏盒、个人录像机(PVR)、计算机等系统或装置；或者其它可能不包括集成显示装置的系统或装置。
虽然将本发明描述为具有优选的设计，然而可以在此公开的精神和范围内对本发明做进一步修改。因此，本申请意在覆盖任何使用本发明总体原理的对本发明所做的变型、使用或改装。此外，本申请意在覆盖那些属于本发明所属领域中的已知或惯用实践范围内的以及落入所附权利要求的限制范围内的源于本公开的技术方案。

Claims (21)

1、一种用于在数字音频和视频装置中改变频道的方法，包括以下步骤：
接收第一音频流、第一视频流和第二视频流，其中，所述第一和第二视频流表示相同的节目，并且所述第一视频流具有至少一个不同于所述第二视频流的特征；
处理所述第一音频流以产生第一处理音频流；
处理所述第一视频流以产生第一处理视频流；
处理所述第二视频流以产生具有相对于所述第一处理音频流的延迟的第二处理视频流；
对所述第一处理音频流进行缓冲，以提供去抖动；
响应于频道改变命令，呈现所述第一处理音频流和所述第二处理视频流；
由此，在频道改变事件期间，保持所述第一处理音频流和所述第二处理视频流之间的同步；
随后，从所述第二处理视频流切换到所述第一处理视频流并呈现所述第一处理视频流；以及
由此，在频道改变事件期间，保持所述第一处理音频流和所述第一处理视频流之间的同步。
2、根据权利要求1所述的方法，其中，所述至少一个特征包括比特率、分辨率和图像组(GOP)大小中的至少一个。
3、根据权利要求1所述的方法，其中，通过互联网接收所述第一音频流、所述第一视频流和所述第二视频流。
4、根据权利要求1所述的方法，其中，所述处理所述第一音频流的步骤包括以下步骤：
对所述第一音频流进行缓冲以产生第一缓冲音频流；以及
对所述第一缓冲音频流进行译码以产生所述第一处理音频流。
5、根据权利要求1所述的方法，其中，所述处理所述第一视频流的步骤包括以下步骤：
对所述第一视频流进行缓冲以产生第一缓冲视频流；以及
对所述第一缓冲视频流进行译码以产生所述第一处理视频流。
6、根据权利要求5所述的方法，其中，所述处理所述第二视频流的步骤包括以下步骤：
对所述第二视频流进行缓冲以产生第二缓冲视频流；
对所述第二缓冲视频流进行译码和过滤以产生所述第二处理视频流。
7、根据权利要求6所述的方法，还包括：在所述呈现所述第一和第二处理视频流之前，对所述第一和第二处理视频流进行缓冲，以提供去抖动。
8、一种数字音频和视频装置(50)，包括：
接收装置(52、62)，用于接收第一音频流、第一视频流和第二视频流，其中，所述第一和第二视频流表示相同的节目并且所述第一视频流具有至少一个不同于所述第二视频流的特征；
第一音频处理装置(68)，用于处理所述第一音频流以产生第一处理音频流；
第一视频处理装置(66)，用于处理所述第一视频流以产生第一处理视频流；
第二视频处理装置(56、58)，用于处理所述第二视频流以产生具有相对于所述第一处理音频流的延迟的第二处理视频流；
缓冲装置(74)，用于对所述第一处理音频流进行缓冲以提供去抖动；
呈现装置(78、80)，用于响应于频道改变命令，呈现所述第一处理音频流和所述第二处理视频流；
由此，在频道改变事件期间，保持所述第一处理音频流和所述第二处理视频流之间的同步；
切换装置(76)，用于在所述呈现装置(78)开始呈现所述第二处理视频流后，从所述第二处理视频流切换到所述第一处理视频流，从而使所述呈现装置(78)开始呈现所述第一处理视频流；以及
由此，在频道改变事件期间，保持所述第一处理音频流和所述第一处理视频流之间的同步。
9、根据权利要求8所述的数字音频和视频装置(50)，其中，所述至少一个特征包括比特率、分辨率和图像组(GOP)大小中的至少一个。
10、根据权利要求8所述的数字音频和视频装置(50)，其中，通过互联网接收所述第一音频流、所述第一视频流和所述第二视频流。
11、根据权利要求8所述的数字音频和视频装置(50)，其中：
所述接收装置(52、62)包括：用于接收和缓冲所述第一音频流以产生第一缓冲音频流的装置(62)；并且
所述第一音频处理装置(68)包括：用于对所述第一缓冲音频流进行译码以产生所述第一处理音频流的装置(68)。
12、根据权利要求8所述的数字音频和视频装置(50)，其中：
所述接收装置(52、62)包括：用于接收和缓冲所述第一视频流以产生第一缓冲视频流的装置(62)；并且
所述第一视频处理装置(66)包括：用于对所述第一缓冲视频流进行译码以产生所述第一处理视频流的装置(66)。
13、根据权利要求5所述的数字音频和视频装置(50)，其中：
所述接收装置(52、62)包括：用于接收和缓冲所述第二视频流以产生第二缓冲视频流的装置(52)；并且
所述第二视频处理装置(56、58)包括：用于对所述第二缓冲视频流进行译码和过滤以产生所述第二处理视频流的装置(56、58)。
14、根据权利要求13所述的数字音频和视频装置(50)，还包括：缓冲装置(72)，用于在所述呈现所述第一和第二处理视频流之前，对所述第一和第二处理视频流进行缓冲，以提供去抖动。
15、一种数字音频和视频装置(50)，包括：
至少一个信号接收机(52、62)，用于接收第一音频流、第一视频流和第二视频流，其中，所述第一和第二视频流表示相同的节目并且所述第一视频流具有至少一个不同于所述第二视频流的特征；
第一音频信号处理器(68)，用于处理所述第一音频流以产生第一处理音频流；
第一视频信号处理器(66)，用于处理所述第一视频流以产生第一处理视频流；
第二视频信号处理器(56、58)，用于处理所述第二视频流以产生具有相对于所述第一处理音频流的延迟的第二处理视频流；
第一缓冲器(74)，用于对所述第一处理音频流进行缓冲以提供去抖动；
呈现器(78、80)，用于响应于频道改变命令，呈现所述第一处理音频流和所述第二处理视频流；
由此，在频道改变事件期间，保持所述第一处理音频流和所述第二处理视频流之间的同步；
切换器(76)，用于在所述呈现器(78)开始呈现所述第二处理视频流后，从所述第二处理视频流切换到所述第一处理视频流，从而使所述呈现器(78)开始呈现所述第一处理视频流；以及
由此，在频道改变事件期间，保持所述第一处理音频流和所述第一处理视频流之间的同步。
16、根据权利要求15所述的数字音频和视频装置(50)，其中，所述至少一个特征包括比特率、分辨率和图像组(GOP)大小中的至少一个。
17、根据权利要求15所述的数字音频和视频装置(50)，其中，通过互联网接收所述第一音频流、所述第一视频流和所述第二视频流。
18、根据权利要求15所述的数字音频和视频装置(50)，其中：
所述至少一个接收机(52、62)包括：第一信号接收机(62)，用于接收和缓冲所述第一音频流以产生第一缓冲音频流；并且
所述第一音频信号处理器(68)包括：音频译码器(68)，用于对所述第一缓冲音频流进行译码以产生所述第一处理音频流。
19、根据权利要求15所述的数字音频和视频装置(50)，其中：
所述至少一个接收机(52、62)包括：第一信号接收机(62)，用于接收和缓冲所述第一视频流以产生第一缓冲视频流；并且
所述第一视频信号处理器(66)包括：第一视频译码器(66)，用于对所述第一缓冲视频流进行译码以产生所述第一处理视频流。
20、根据权利要求19所述的数字音频和视频装置(50)，其中：
所述至少一个接收机(52、62)包括：第二信号接收机(52)，用于接收和缓冲所述第二视频流以产生第二缓冲视频流；并且
所述第二视频信号处理器(56、58)包括：第二视频译码器(56)和过滤器(58)，用于分别对所述第二缓冲视频流进行译码和过滤以产生所述第二处理视频流。
21、根据权利要求20所述的数字音频和视频装置(50)，还包括：第二缓冲器(72)，用于在所述呈现所述第一和第二处理视频流之前，缓冲所述第一和第二处理视频流以提供去抖动。
CN2006800563113A 2006-11-07 2006-12-13 用于减少频道变化时间以及在频道变化期间同步音频/视频内容的方法 Active CN101536497B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US85737106P 2006-11-07 2006-11-07
US60/857,371 2006-11-07
PCT/US2006/047633 WO2008057110A2 (en) 2006-11-07 2006-12-13 Method for reducing channel change times and synchronizing audio/video content during channel change

Publications (2)

Publication Number Publication Date
CN101536497A true CN101536497A (zh) 2009-09-16
CN101536497B CN101536497B (zh) 2011-06-15

Family

ID=38257155

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800563113A Active CN101536497B (zh) 2006-11-07 2006-12-13 用于减少频道变化时间以及在频道变化期间同步音频/视频内容的方法

Country Status (6)

Country Link
US (1) US8458744B2 (zh)
EP (1) EP2082571B1 (zh)
JP (1) JP4999018B2 (zh)
KR (1) KR101350754B1 (zh)
CN (1) CN101536497B (zh)
WO (1) WO2008057110A2 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102769737A (zh) * 2012-07-19 2012-11-07 广东威创视讯科技股份有限公司 一种视频画面切换方法和系统
CN104853240A (zh) * 2015-05-12 2015-08-19 四川金网通电子科技有限公司 通过慢放和快放机制实现机顶盒直播切台稳定播放的方法
CN105580381A (zh) * 2013-09-25 2016-05-11 三星电子株式会社 显示设备及其控制方法
CN106658065A (zh) * 2015-10-30 2017-05-10 中兴通讯股份有限公司 音视频同步方法、装置及系统
WO2020173165A1 (zh) * 2019-02-28 2020-09-03 华为技术有限公司 一种音频流和视频流同步切换方法及装置

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2004250926A1 (en) * 2003-06-16 2004-12-29 Thomson Licensing Encoding method and apparatus enabling fast channel change of compressed video
BRPI0812401B1 (pt) * 2007-06-13 2020-09-15 Interdigital Ce Patent Holdings Método para reduzir o tempo de zapeamento e para transmitir um fluxo contínuo de dados em um receptor de vídeo
KR101344485B1 (ko) * 2007-07-09 2013-12-24 삼성전자주식회사 디지털 방송 수신기의 채널 전환 방법 및 그 장치
US9426522B2 (en) * 2007-07-10 2016-08-23 Qualcomm Incorporated Early rendering for fast channel switching
JP4710887B2 (ja) * 2007-08-09 2011-06-29 ソニー株式会社 画像処理装置、及び、画像処理装置の制御方法
JP2009246712A (ja) * 2008-03-31 2009-10-22 Panasonic Corp デジタル放送受信装置
DE102008026956A1 (de) 2008-06-05 2009-12-24 Tobias Römer Verfahren und Vorrichtung zum Umschalten zwischen Digital-TV-Kanälen, insbesondere hochauflösenden Digital-TV-Kanälen
US9210354B2 (en) * 2009-12-15 2015-12-08 Electronics And Telecommunications Research Institute Method and apparatus for reception and transmission
KR101272982B1 (ko) * 2009-12-21 2013-06-10 한국전자통신연구원 아이피티비 셋탑박스 및 그의 채널 전환 방법
US9565426B2 (en) 2010-11-12 2017-02-07 At&T Intellectual Property I, L.P. Lip sync error detection and correction
TW201338528A (zh) * 2012-03-02 2013-09-16 Mstar Semiconductor Inc 數位電視資料處理方法以及使用此數位電視資料處理方法的數位電視系統
WO2014098787A1 (en) 2012-12-17 2014-06-26 Thomson Licensing Robust digital channels
MX345797B (es) 2012-12-17 2017-02-16 Thomson Licensing Canales digitales robustos.
US9426415B2 (en) * 2012-12-28 2016-08-23 Ittiam Systems (P) Ltd. System, method and architecture for in-built media enabled personal collaboration on endpoints capable of IP voice video communication
US9559860B2 (en) 2013-02-25 2017-01-31 Sony Corporation Method and apparatus for monitoring activity of an electronic device
US9985887B2 (en) * 2015-08-27 2018-05-29 Cavium Inc. Method and apparatus for providing a low latency transmission system using adaptive buffering estimation
US9826262B2 (en) 2015-09-09 2017-11-21 Ericsson Ab Fast channel change in a multicast adaptive bitrate (MABR) streaming network using multicast repeat segment bursts in a shared progressive ABR download pipe
US9826261B2 (en) 2015-09-09 2017-11-21 Ericsson Ab Fast channel change in a multicast adaptive bitrate (MABR) streaming network using multicast repeat segment bursts in a dedicated bandwidth pipe
KR102591581B1 (ko) * 2016-01-07 2023-10-20 삼성전자주식회사 촬영 디바이스 및 그 제어 방법
KR102643885B1 (ko) * 2018-12-11 2024-03-08 삼성전자주식회사 전자 장치 및 이의 제어방법
US11575959B2 (en) 2020-06-01 2023-02-07 Western Digital Technologies, Inc. Storage system and method for media-based fast-fail configuration
KR20220015135A (ko) * 2020-07-30 2022-02-08 삼성전자주식회사 입력 기반 스트리밍 제어 방법 및 이를 위한 전자 장치

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5710798A (en) 1992-03-12 1998-01-20 Ntp Incorporated System for wireless transmission and receiving of information and method of operation thereof
KR100309099B1 (ko) 1997-06-21 2001-12-15 윤종용 채널 선국방법 및 장치
EP1139665A1 (en) 2000-03-29 2001-10-04 Deutsche Thomson-Brandt Gmbh Method and apparatus for changing the output delay of audio or video data encoding
JP3631123B2 (ja) 2000-10-03 2005-03-23 三洋電機株式会社 デジタル放送受信装置
US7093277B2 (en) * 2001-05-30 2006-08-15 Digeo, Inc. System and method for improved multi-stream multimedia transmission and processing
US6927806B2 (en) 2002-02-21 2005-08-09 Scientific-Atlanta, Inc. Systems, methods and apparatuses for minimizing subscriber-perceived digital video channel tuning delay
US20030196211A1 (en) 2002-04-10 2003-10-16 Peter Chan Systems, methods and apparatuses for simulated rapid tuning of digital video channels
US20040001500A1 (en) 2002-07-01 2004-01-01 Castillo Michael J. Predictive tuning to avoid tuning delay
GB0300361D0 (en) 2003-01-07 2003-02-05 Koninkl Philips Electronics Nv Audio-visual content transmission
CN100387043C (zh) * 2003-01-28 2008-05-07 汤姆森特许公司 健壮模式交错播送的方法和设备
US7430222B2 (en) 2004-02-27 2008-09-30 Microsoft Corporation Media stream splicer
EP1743487A1 (en) 2004-05-03 2007-01-17 Thomson Research Funding Corporation Method and apparatus enabling fast channel change for dsl system
JP5281793B2 (ja) 2004-07-07 2013-09-04 トムソン ライセンシング 冗長なビデオ・ストリームを用いた、ｄｓｌを介したディジタル・ビデオ放送システムにおける高速チャンネル切替え
US20060075428A1 (en) * 2004-10-04 2006-04-06 Wave7 Optics, Inc. Minimizing channel change time for IP video
US20080196061A1 (en) 2004-11-22 2008-08-14 Boyce Jill Macdonald Method and Apparatus for Channel Change in Dsl System
EP1675399A3 (en) * 2004-12-23 2009-04-29 Bitband Technologies Ltd. Fast channel switching for digital TV
US20060230176A1 (en) * 2005-04-12 2006-10-12 Dacosta Behram M Methods and apparatus for decreasing streaming latencies for IPTV
KR101480969B1 (ko) * 2006-07-28 2015-01-09 톰슨 리서치 펀딩 코포레이션 디지털 비디오에 관한 빠른 채널 변경을 위한 방법 및 장치

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102769737A (zh) * 2012-07-19 2012-11-07 广东威创视讯科技股份有限公司 一种视频画面切换方法和系统
CN105580381A (zh) * 2013-09-25 2016-05-11 三星电子株式会社 显示设备及其控制方法
CN105580381B (zh) * 2013-09-25 2019-11-05 三星电子株式会社 显示设备及其控制方法
CN104853240A (zh) * 2015-05-12 2015-08-19 四川金网通电子科技有限公司 通过慢放和快放机制实现机顶盒直播切台稳定播放的方法
CN106658065A (zh) * 2015-10-30 2017-05-10 中兴通讯股份有限公司 音视频同步方法、装置及系统
CN106658065B (zh) * 2015-10-30 2021-10-22 中兴通讯股份有限公司 音视频同步方法、装置及系统
WO2020173165A1 (zh) * 2019-02-28 2020-09-03 华为技术有限公司 一种音频流和视频流同步切换方法及装置
CN111629158A (zh) * 2019-02-28 2020-09-04 华为技术有限公司 一种音频流和视频流同步切换方法及装置
US11368634B2 (en) 2019-02-28 2022-06-21 Huawei Technologies Co., Ltd. Audio stream and video stream synchronous switching method and apparatus

Also Published As

Publication number Publication date
WO2008057110A2 (en) 2008-05-15
EP2082571B1 (en) 2016-05-04
WO2008057110A3 (en) 2008-08-07
JP2010509802A (ja) 2010-03-25
CN101536497B (zh) 2011-06-15
US20100064316A1 (en) 2010-03-11
EP2082571A2 (en) 2009-07-29
JP4999018B2 (ja) 2012-08-15
KR20090086532A (ko) 2009-08-13
US8458744B2 (en) 2013-06-04
KR101350754B1 (ko) 2014-01-10

Similar Documents

Publication Publication Date Title
CN101536497B (zh) 用于减少频道变化时间以及在频道变化期间同步音频/视频内容的方法
CN101422037B (zh) 缩短数字视频设备频道变换时间的方法
CN101518082B (zh) 用于数字视频的快速频道转换的方法和装置
JP6317872B2 (ja) 異なるネットワークを介して受信したコンテンツのレンダリングを同期するデコーダ及びそれにおける方法
US20070174880A1 (en) Method, apparatus, and system of fast channel hopping between encoded video streams
EP1439705A2 (en) Method and apparatus for processing, transmitting and receiving dynamic image data
GB2490659A (en) Fast channel change using channel packs comprising independently decodable frame segments having differing qualities
CN101472154A (zh) 数字频道切换的方法及数字视频处理装置
CN101889451A (zh) 通过独立解码器时钟来减少媒体流延迟的系统和方法
JP2012165380A (ja) 帯域幅最適化を備えた高速チャンネル変更を伴うストリームの対策
JP5881219B2 (ja) 単一の復号器でチャンネル変更を可能にする受信機および該受信機での方法
US20060161676A1 (en) Apparatus for IP streaming capable of smoothing multimedia stream
JP2011511554A (ja) ビデオデータをストリーミングするための方法
JP4102223B2 (ja) データ処理装置及びデータ処理方法
JP3671969B2 (ja) データ多重方法及び多重データ復号方法
KR100994053B1 (ko) Ｉｐｔｖ 방송 서비스 시스템, ｉｐｔｖ 방송 서비스 시스템에 있어서의 채널 전환 방법, ｉｐｔｖ 셋톱박스
KR20080069035A (ko) 채널 전환 대기 시간 감소를 위한 ｉｐ 셋탑 박스 및 그제어 방법
JP2010213109A (ja) 映像配信制御サーバ、受信端末、映像簡略化多重化装置、映像配信方法およびプログラム
JP2011035775A (ja) 動画出力装置、動画出力方法およびプログラム
Murugan Multiplexing H. 264/AVC Video with MPEG-AAC Audio

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP02 Change in the address of a patent holder
CP02 Change in the address of a patent holder

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: French Boulogne - Bilang Kurt

Patentee before: THOMSON LICENSING

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190130

Address after: Paris France

Patentee after: International Digital Madison Patent Holding Co.

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190130

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING