CN101960726A - 用于解码增强型视频流的方法和装置 - Google Patents

用于解码增强型视频流的方法和装置 Download PDF

Info

Publication number
CN101960726A
CN101960726A CN2009801078195A CN200980107819A CN101960726A CN 101960726 A CN101960726 A CN 101960726A CN 2009801078195 A CN2009801078195 A CN 2009801078195A CN 200980107819 A CN200980107819 A CN 200980107819A CN 101960726 A CN101960726 A CN 101960726A
Authority
CN
China
Prior art keywords
layer
addressed location
syntactic structure
enhancement layer
enhancement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2009801078195A
Other languages
English (en)
Other versions
CN101960726B (zh
Inventor
曼达亚姆·A·纳拉辛汉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Iris International Intellectual Property Co ltd
Original Assignee
General Instrument Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Instrument Corp filed Critical General Instrument Corp
Priority to CN201510279266.9A priority Critical patent/CN104967869B/zh
Priority to CN201410326963.0A priority patent/CN104202600B/zh
Publication of CN101960726A publication Critical patent/CN101960726A/zh
Application granted granted Critical
Publication of CN101960726B publication Critical patent/CN101960726B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/127—Prioritisation of hardware or computational resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Abstract

一种解码包括基本层视频访问单元和增强层视频访问单元的增强型视频流的方法，每个访问单元包括多个语法结构，该方法包括：将基本层访问单元的语法结构传递到基本层缓冲器；将增强层访问单元的语法结构传递到增强层缓冲器；以预定序列输出传递到基本层缓冲器的语法结构；以预定序列输出传递到增强层缓冲器的语法结构；以及重新组合分别由基本层缓冲器和增强层缓冲器输出的语法结构的序列，以形成完整的增强型访问单元，包括预定序列的基本层语法结构和增强层语法结构。

Description

用于解码增强型视频流的方法和装置
相关申请的交叉引用
本申请基于35USC 120要求2008年3月6日提交的美国临时申请No.61/034,370的权益，其全部公开内容通过引用并入这里用于所有的目的。
技术领域
本发明涉及用于解码增强型视频流的方法和装置。
背景技术
参考附图中的图1，视频编码器10从诸如照相机的源接收通常为SMPTE 292M中定义的HD-SDI格式的原始视频数据。视频编码器利用HD-SDI数据来生成视频基础流，并且将该视频基础流提供给视频分组器(packetizer)14，该视频分组器14产生由可变长度的分组组成的视频分组化基础流(PES)。通常，视频PES的每个分组包含一个或多个视频帧。类似地，音频编码器(未示出)从例如麦克风接收原始音频数据，并且将音频基础流提供给音频分组器，该音频分组器产生由可变长度的分组组成的音频PES。
视频分组器和音频分组器将视频PES和音频PES提供到传输流复用器18，该传输流复用器18将不同的相应节目标识符(PID)指配给视频PES和音频PES，并且将视频PES和音频PES的可变长度的分组组织为固定长度的MPEG-2传输流(TS)分组，每个分组都具有包括PES的PID的报头以及包含PES视频(或音频)数据的有效负载。
可以将由传输流复用器输出的单节目传输流(SPTS)提供到节目复用器22，该节目复用器22将SPTS与传送其它节目的其它传输流进行组合，以产生多节目传输流(MPTS)。通过信道将该MPTS发射到接收机，在接收机处，节目解复用器26从MPTS中分离选定的SPTS，并且将该选定的SPTS提供给传输流解复用器30。本领域技术人员将意识到，可以将由传输流复用器输出的SPTS直接发射到传输流解复用器，而无需首先与其它传输流进行组合来创建MPTS，但是在任何一种情况下，传输流解复用器接收选定的SPTS的传输流分组，并且基于PID对它们进行分离，对传输流分组进行解分组以重建PES分组，并且将视频PES指向所谓的视频系统目标解码器(T-STD)34，并且将音频PES指向音频T-STD38。本申请的主题涉及解码视频比特流，并且因此我们将不进一步讨论音频解码器。
视频T-STD 34包括系统目标解码器缓冲器40和视频解码器42。STD缓冲器40在功能上等同于传输缓冲器Tb、复用缓冲器Mb和基础流缓冲器Eb。传输缓冲器Tb以可变比特速率接收视频PES，并且以恒定比特速率向复用缓冲器Mb输出数据，该复用缓冲器Mb对视频PES进行解分组，并且以恒定比特速率向基础流缓冲器Eb提供编码比特流。有时被称作解码器缓冲器或被称作编码图像缓冲器(CPB)的基础流缓冲器接收CBR比特流，并且保存用于解码图像的比特，直至它们在图像解码时立即由视频解码器全部移除。
对于解码器的适当操作重要的是，解码器缓冲器不应当溢出而使得丢失比特并且无法解码图像，也不应当下溢而使得解码器缺少比特并且无法在适当时解码图像。将比特提供到解码器缓冲器由压缩数据缓冲器(CDB)46来控制，该压缩数据缓冲器(CBD)46从视频编码器10接收比特流。视频编码器以取决于CDB充满程度(fullness)的速率来向CDB提供比特。CDB以恒定速率向视频分组器14提供比特，并且复用缓冲器以相同的速率向解码器缓冲器提供比特，并且因此CDB的充满程度反映了解码器缓冲器的充满程度。通过调整对CDB的比特的提供来防止CDB的溢出/下溢，避免了解码器缓冲器的下溢/溢出。
管理编码器的操作的视频压缩标准可以指定CDB应当不大于假定基准解码器(hypothetical reference decoder)的解码器缓冲器。
MPEG-2传输流被广泛用于通过差错信道进行的编码视频的递送。MPEG-2系统层还支持在无差错环境中的节目流(PS)中的编码视频的传输。图1图示了将视频PES作为节目流发射到视频P-STD 50，作为对作为传输流递送到视频T-STD 34的替代。
视频编码器10所产生的比特流可以遵循在通常被称作H.264/AVC的ISO/IEC 14496-10(MPEG-4部分10)高级视频编码(AVC)中所指定的视频压缩标准。H.264/AVC使用图像作为帧或场的统称。H.264/AVC将访问单元定义为网络抽象层(NAL)单元的集合，并且指定访问单元的解码通常产生解码图像。AVC编码器所产生的访问单元的NAL单元可以是包含图像信息的视频编码层(VCL)单元，或者是包含诸如隐蔽字幕(closed captioning)和定时的其它信息的非VCL单元。
H.264/AVC的附录G规定了被称作可分级视频编码或SVC的H.264/AVC的扩展。SVC将可分级的增强提供给AVC基本层，并且可分级性包括空间可分级性、时间可分级性、SNR可分级性以及比特深度可分级性。期望SVC编码器产生符合H.264/AVC的基本层，并且在一个或多个增强层中对该基本层增加增强。在SVC的特定实施方式中所采用的每个类型的可分级性可以利用其自己的增强层。例如，如果原始视频数据是由1920×1088像素的帧组成的称为1080HD的格式，则可以通过由能够被解码为704×480像素的图像的访问单元组成的子比特流来传送基本层，而可以通过由使得适当的解码器能够通过将基本层访问单元与增强层访问单元进行组合来呈现1920×1088像素的图像的访问单元组成的子比特流来传送增强层。
能够对基本层以及一个或多个增强层进行解码的解码器在这里被称为SVC解码器，而无法识别增强层并且仅能够对基本层访问单元进行解码并且因此不具有SVC能力的解码器在这里被称作AVC解码器。
由SVC编码器产生的访问单元不仅包括以上提到的通常称为AVCNAL单元的基本层NAL单元，而且还包括SVC VCL NAL单元和SVC非VCL NAL单元。图2示出了如SVC标准所规定的SVC访问单元中的AVCNAL单元和SVC NAL单元的序列。例如，在编码器产生两个增强层的情况下，两个增强层的非VCL NAL单元处于图2中所示的序列的相邻块中，在包含AVC非VCL NAL单元和AVC VCL NAL单元的块之间，并且两个增强层的SVC VCL NAL单元处于在包含AVC VCL NAL单元的块之后的序列的相邻块中。
从访问单元提取基本层NAL单元的SVC解码器仅选择AVC非VCLNAL单元和AVC VCL NAL单元。
H.264/AVC指定了5比特的参数nal_unit_type或NUT。基于H.264/AVC，AVC NAL单元都具有1-13范围内的NUT值。SVC添加了NUT值14、20和15。然而，紧接在具有等于5或1的NUT的NAL单元之前的具有等于14的NUT的NAL单元用信号发送基本层条带，使得作为非VCL NAL单元的这些NAL单元与AVC相兼容，并且能够由AVC解码器来进行解码。
参考图3，SVC解码器10’生成传送基本层以及例如两个增强层ENH1和ENH2的单一比特流。根据其功能，解码器可能期望仅接收和解码基本层，或者接收和解码基本层和增强层ENH1，或者接收和解码基本层以及两个增强层ENH1和增强层ENH2。基于MPEG-2系统标准和SVC的使用情况，编码器可能不提供分别传送仅基本层、基本层和增强层ENH1、以及基本层以及两个增强层ENH1和增强层ENH2的三个比特流，而允许解码器选择它能够解码的任何一个比特流。编码器必须在分离的比特流中提供基本层访问单元以及每个增强层的一部分。原则上将能够通过使用NAL分离器48基于NAL单元的NUT值来将单一比特流分成三个子比特流以符合MPEG-2系统标准。一个子比特流可以传送基本层NAL单元，而其它两个子比特流可以分别传送两个增强层的NAL单元。三个子比特流可以传递到相应的视频分组器(通常由14来指示)，该视频分组器14创建相应的视频PES。将三个视频PES提供到包括与包括在SVC T-STD中的缓冲器等同的T-STD缓冲器的传输流复用器18，用于将三个分组器的输出复用在一起。复用器18将向三个PES指配不同的PID，并且输出传送三个层的传输流。
因为没有提供重组基本层单元和增强层访问单元来产生能够由SVC解码器解码的完整SVC访问单元的功能，所以图1中示出的视频T-STD 34无法对由图3示出的传输流复用器18’产生的传输流所传送的比特流进行解码。H.264/AVC标准或MPEG-2系统标准都没有规定应当如何重组基本层单元和增强层访问单元。因此，图3中示出的架构目前仍缺乏实际的应用。
发明内容
根据公开的主题的第一方面，提供了一种解码包括基本层视频访问单元和增强层视频访问单元的增强型视频流的方法，每个访问单元包括多个语法结构，所述方法包括：将基本层访问单元的语法结构传递到基本层缓冲器；将增强层访问单元的语法结构传递到增强层缓冲器；以预定序列来输出传递到基本层缓冲器的语法结构；以预定序列来输出传递到增强层缓冲器的语法结构；以及重新组合由基本层缓冲器和增强层缓冲器相应输出的语法结构的序列，以形成完整的增强型访问单元，包括预定序列的基本层语法结构和增强层语法结构。
根据公开的主题的第二方面，提供了一种创建增强型视频信号的方法，包括：接收包括基本层访问单元和增强层访问单元的单一比特流；从所述单一比特流中分离基本层节目流和增强层节目流；以及将定界语法结构插入增强层节目流中。
根据公开的主题的第三方面，提供了一种创建增强型视频信号的方法，包括：接收包括基本层访问单元和增强层访问单元的单一比特流，其中，每个增强层访问单元包括视频层语法结构和非视频层语法结构；从所述单一比特流中分离基本层节目流和增强层节目流；以及将增强层访问单元的非视频层语法结构包括在基本层节目流中，从而所述增强型视频信号包括基本层分量和增强层分量，所述基本层分量包括增强层访问单元的非视频层语法结构，所述增强层分量包括增强层访问单元的视频层语法结构。
根据公开的主题的第四方面，提供了一种用于解码传送增强型视频流的基本层访问单元系列的基本层节目流以及传送所述增强型视频流的增强层访问单元系列的至少一个增强层节目流的解码装置，每个访问单元包括多个语法结构，所述解码装置包括：基本层缓冲器，该基本层缓冲器被连接以接收基本层节目流并且以预定序列输出每个基本层访问单元的语法结构；增强层缓冲器，该增强层缓冲器被连接以接收增强层节目流并且以预定序列输出每个增强层访问单元的语法结构；重组功能元件，该重组功能元件被连接以接收分别由基本层缓冲器和增强层缓冲器输出的语法结构，并且形成完整的增强型访问单元，包括预定序列的基本层语法结构和增强层语法结构。
根据公开的主题的第五方面，提供了一种用于创建增强型视频信号的装置，所述装置具有用于接收包括基本层访问单元和增强层访问单元的单一比特流的输入，并且包括分离器，该分离器用于从所述单一比特流中分离基本层节目流和增强层节目流；以及插入器，该插入器用于将定界语法结构插入增强层节目流中。
根据公开的主题的第六方面，提供了一种用于创建增强型视频信号的装置，所述装置具有用于接收包括基本层访问单元和增强层访问单元的单一比特流的输入，其中，每个增强层访问单元包括视频层语法结构和非视频层语法结构，并且包括分离器，该分离器用于从所述单一比特流中分离基本层节目流和增强层节目流并且将增强层访问单元的非视频层语法结构包括在基本层节目流中，从而所述增强型视频信号包括基本层分量和增强层分量，所述基本层分量包括增强层访问单元的非视频层语法结构，所述增强层分量包括增强层访问单元的视频层语法结构。
根据公开的主题的第七方面，提供了一种包含软件的计算机可读介质，当由计算机执行所述软件时，所述计算机具有用于接收传送基本层访问单元和增强层访问单元的增强型视频流的输入，每个访问单元包括多个语法结构，通过下述方法来处理所述视频流，所述方法包括：将基本层访问单元的语法结构传递到基本层缓冲器；将增强层访问单元的语法结构传递到增强层缓冲器；以预定序列输出传递到基本层缓冲器的语法结构；以预定序列输出传递到增强层缓冲器的语法结构，以及重新组合分别由基本层缓冲器和增强层缓冲器输出的语法结构的序列，以形成完整的增强型访问单元，包括预定序列的基本层语法结构和增强层语法结构。
根据公开的主题的第八方面，提供了一种包含软件的计算机可读介质，当由计算机执行该软件时，该计算机具有用于接收包括基本层访问单元和增强层访问单元的单一比特流的输入，通过下述方法来处理所述比特流，所述方法包括：从所述单一比特流中分离基本层节目流和增强层节目流，以及将定界语法结构插入增强层节目流中。
根据公开的主题的第九方面，提供了一种包含软件的计算机可读介质，当由计算机执行该软件时，该计算机具有用于接收包括基本层访问单元和增强层访问单元的单一比特流的输入，其中，每个增强层访问单元包括视频层语法结构和非视频层语法结构，通过下述方法来处理所述比特流，所述方法包括：从所述单一比特流中分离基本层节目流和增强层节目流；以及将增强层访问单元的非视频层语法结构包括在基本层节目流中，从而所述增强型视频信号包括基本层分量和增强层分量，所述基本层分量包括增强层访问单元的非视频层语法结构，所述增强层分量包括增强层访问单元的视频层语法结构。
附图说明
为了更好地理解本发明并且示出如何可以实现本发明，现在将通过示例的方式来对附图进行参考，在附图中
图1是用于提供压缩视频素材用于呈现的第一系统的架构的示意性框图，
图2图示了具有基本层和一个增强层的SVC访问单元的结构；
图3是用于传输压缩SVC视频素材用于解码和呈现的架构和使用情况的示意性框图；
图4是用于提供压缩视频素材用于呈现的第二系统的架构的示意性框图，
图5是用于提供压缩视频素材用于呈现的第三系统的架构的示意性框图，
图6A、图6B和图6C图示了在图5中示出的系统中的各个点处所生成的数据单元的结构；
图7是可以用于实现参考图4和5描述的部分过程的计算机器的示意性框图。
在附图的若干示图中，使用相同的附图标记来表示类似或等同的元素、功能或组件。
具体实施方式
图4中示出的SVC编码器10’生成传送基本层和一个增强层的比特流。NAL分离器52将该比特流划分成两个子比特流，该两个子比特流分别传送基本层NAL单元和增强层NAL单元，并且该两个子比特流传递到基本层视频分组器140和增强层视频分组器141。如参考图3描述的，两个分组器创建相应的视频PES。传输流复用器54对两个PES指配不同的PID，并且输出传送两个层的传输流。传输流复用器54包括遵循SVC T-STD模型的T-STD缓冲器。将传输流作为SPTS直接发射到传输流解复用器56，或者与其它传输流进行复用并且作为MPTS的一部分经由节目解复用器(未示出)提供到传输流解复用器56。
通常，传输流解复用器56基于PID来分离传输流分组，并且对该传输流分组进行解分组以重建PES分组。以该方式，传输流解复用器输出基本层PES和增强层PES以及一个或多个音频PES。如图4中所示，将基本层PES和增强层PES提供到视频T-STD 60，该视频T-STD60包括基本层T-STD缓冲器64和增强层T-STD缓冲器68。与图1中所示的T-STD缓冲器40类似，基本层T-STD缓冲器64包括传输缓冲器Tb0和复用缓冲器Mb0。复用缓冲器将包含基本层访问单元(AVC非VCL NAL单元和AVC VCL NAL单元)的编码比特流输出到基础流缓冲器部分ESb0。缓冲器部分ESb0的大小不可以超过H.264/AVC标准中所规定的基础流缓冲器Eb的大小。
增强层T-STD缓冲器68还包括传输缓冲器Tb1、复用缓冲器Mb1和基础流缓冲器部分ESb1。与复用缓冲器Mb0相似，缓冲器Mb1输出包含增强层访问单元(SVC非VCL NAL单元和SVC VCL NAL单元)的编码比特流，当适当地组合该增强层访问单元与基本层访问单元时，产生如H.264的附录G中所定义的SVC访问单元。
缓冲器部分ESb0和ESb1的组合大小不可以超过对于SVC解码器在H.264/AVC标准的附录G中规定的基础流缓冲器Eb的大小，该SVC解码器对具有基本层和一个增强层的节目进行解码。然而，假设缓冲器部分ESb0的大小没有超过对于AVC解码器在H.264/AVC标准中规定的基础流缓冲器Eb的大小，则可以在缓冲器部分之间分配所有被允许的缓冲器大小来优化解码器的性能。
本领域技术人员应当理解，传输流解复用器56接收到的访问单元的NAL单元可能没有按照解码访问单元所需要的顺序。接收由复用缓冲器提供的编码比特流的基础流缓冲器部分确保以用于解码的适当顺序来输出每个访问单元的NAL单元。重组功能Re-A接收由两个T-STD缓冲器分别输出的AVC和SVC NAL单元，并且以适当的序列组合NAL单元来重建图2中所示的SVC访问单元结构。重组功能将SVC访问单元提供到SVC解码器来在适当的相应解码时间进行解码。以该方式，T-STD 60能够输出包括SVC支持的增强的图像。
缓冲器管理(即，传输缓冲器的大小、复用缓冲器的大小和组合的基础流缓冲器部分的大小以及缓冲器之间的传送速率)与常规MPEG-2T-STD中的相同。数据以对从常规MPEG-2T-STD模型中的复用缓冲器输出数据所指定的速率进入基础流缓冲器部分，并且在给定SVC访问单元的基本层NAL单元和增强层NAL单元都出现在相应的基础流缓冲器部分中之后，它们被立即传送到重组功能，在重组功能处，它们被组合且被立即传送到SVC解码器。因此，基础流缓冲器部分和重组功能没有在复用缓冲器和SVC解码器之间引入任何时延。
由传输流复用器54输出的传输流还可以经由传输流解复用器30被提供到AVC T-STD 34’。传输流复用器30从传输流中分离基本层PES，并且将该基本层PES提供到T-STD 34’。由于没有将增强层PES提供到T-STD 34’，所以不会由于必须对不需要解码基本层访问单元的NAL单元进行处理而对T-STD 34’造成负担。
现在参考图5，在另一个实施例中，由SVC编码器10’产生的比特流传送基本层以及两个增强层ENH1和ENH2。NAL分离器52基于NAL单元的NUT值将比特流分成三个子比特流，但是与图4中的情况不同，该基本层比特流不仅包括AVC NAL单元，还包括SVC非VCLNAL单元(如上所述，包括与AVC兼容的NAL单元)。由NAL分离器产生的基本层比特流具有图6A中所示的结构。两个增强层子比特流的每一个都包含相应的SVC访问单元的SVC VCL NAL单元。如图6B中所示，NAL分离器还在每个增强层子比特流的每个访问单元的开始时插入SVC定界(delim)NAL单元。SVC定界NAL单元可以非常小并且具有预留的NUT值，诸如23或24。除访问单元定界符之外，该SVC定界NAL单元具有如MPEG-2系统标准所公布的等于9的NUT。
将三个子比特流分别提供给分组器140、141和142，该分组器140、141和142创建相应的PES，并且将PES提供到传输流复用器72。包括遵循SVC T-STD模型的缓冲器的传输流复用器72对三个PES指配不同的PID，并且输出传送三个层的传输流。应当意识到，基本层PES包含解码基本层访问单元所需要的所有的AVC NAL单元。
将由传输流复用器72创建的传输流提供到传输流解码功能74。该传输流解码功能包括传输流解复用器76，该传输流解复用器76基于PID来分离基本层PES和两个增强层PES，并且将它们提供到相应的T-STD缓冲器80、81和82。每个T-STD缓冲器包括传输缓冲器Tb、复用缓冲器Mb和基础流缓冲器部分ESb。缓冲器部分ESb0、ESb1和ESb2的组合大小不可以超过对于SVC解码器在H.264/AVC标准的附录G中规定的基础流缓冲器Eb的大小，该SVC解码器对具有基本层和两个增强层的节目进行解码。然而，假设缓冲器部分ESb0和ESb1的组合大小没有超过对于在SVC解码器的H.264/AVC标准的附录G中规定的基础流缓冲器Eb的大小，该SVC解码器对具有基本层和一个增强层的节目进行解码，并且缓冲器部分ESb0的大小没有超过对于AVC解码器在H.264/AVC标准的附录G中规定的基础流缓冲器Eb的大小，则可以在缓冲器部分之间分配所有被允许的缓冲器大小来优化解码器的性能。
每个T-STD缓冲器对以与参考图4描述的方式类似的方式接收到的比特流进行处理，使得缓冲器DRB0输出具有图6A中所示的结构的访问单元，并且缓冲器DRB1和DRB2的每一个都输出具有图6B中所示的结构的访问单元。缓冲器结构的输出由重组功能Re-A来连结，以创建图6C中所示的用于每个访问单元的NAL单元的序列。如参考图4所述的，重组功能的输出传递到基础流缓冲器。
图5示出了可以经由如参考图4所描述的传输流解复用器30来将由复用器54输出的传输流提供到AVC T-STD 34’。
图5还图示了通过无差错介质将三个视频PES提供给节目流解码功能90。基本层PES可以被提供到包括缓冲器和解码器的基本层AVCP-STD，而基本层PES和两个增强层PES ENH1和ENH2被提供到包括符合SVC P-STD模型的缓冲器的节目流复用器。节目流复用器将基本层PES和增强层PES ENH1提供到包括节目流解复用器的SVC解码器91，该节目流解复用器从基本层PES和增强层PES移除PES报头，并且将基本层比特流指向基础流缓冲器部分ESb0，并且将增强层ENH1比特流指向基础流缓冲器部分ESb1。缓冲器部分ESb0和ESb1的输出传递到重组功能。缓冲器部分ESb0和ESb1的大小可以以与缓冲器80和81中的基础流缓冲器部分的大小类似的方式进行变化。因此，在节目流的上下文中，SVC解码器91的操作与传输流上下文中的缓冲器80和81以及重组功能的操作相对应。
节目流复用器将基本层PES和两个增强层PES ENH1和ENH2提供到SVC解码器92，该SVC解码器92与解码器91类似，但是增加了与T-STD缓冲器82中的基础流缓冲器相对应的基础流缓冲器部分ESb2。因此，节目流解码功能90能够单独解码基本层，或者基本层和增强层ENH1，或者基本层以及两个增强层ENH1和增强层ENH2。
在图4中示出的实施例和图5中示出的实施例中，基于包括附录G的H.264/AVC标准中的限制，可用缓冲器大小可以在按照需要的基础上被动态分配给编码器产生的比特流的不同层。通过允许以该方式对不同层的缓冲器大小的动态灵活的分配，解码器可以基于例如访问单元的复杂度来减少对基本层的缓冲器大小的分配并且增加对一个或多个增强层的缓冲器大小的分配来促进适当的解码。
SVC定界NAL单元易于由传输流解复用器76来检测，并且促进了SVC VCL NAL单元的分离。SVC定界NAL单元不由解码器来识别，并且因此不影响增强层访问单元的解码。
如结合图4描述的，NAL分离器可以从SVC访问单元中分离SVC非VCL NAL单元和SVC VCL NAL单元二者，使得基本层PES仅包括图2中所示的访问单元结构的AVC NAL单元，并且增强层PES包含所有的SVC NAL单元，而在图5的情况下，NAL分离器将SVC非VCLNAL单元与AVC NAL单元分组在一起，使得基本层PES包含SVC非VCL NAL单元。该方法引起发送基本层PES所需要的带宽的轻微增加，但是从图2中示出的SVC访问单元结构的考查将意识到，通过将SVC非VCL NAL单元包括在基本层PES中，SVC访问单元的重组可以通过简单连结分别包括在基本层PES和增强层PES中的NAL单元来完成。否则，可能需要在重组缓冲器中进行数据解析，这将增加对于处理的时延和复杂度。SVC访问单元的重组的简单补偿了需要稍大的带宽来发射基本层PES的轻微缺点。
参考图6，图4或图5所示的NAL分离器和分组器，或者图4中所示的传输流解复用器56和视频T-STD 60，或者图5中所示的节目流或传输流解码功能可以使用计算机来实现，该计算机包括在一般常规架构中配置的至少一个处理器161、随机存取存储器162、只读存储器163、I/O设备164(包括用于接收和发射比特流的适当适配器)、用户接口165、CD ROM驱动器166以及硬盘驱动器167。该计算机根据存储在计算机可读介质中的程序来进行操作，该计算机可读介质诸如硬盘驱动器167或CD ROM 168，并且该程序被加载到随机存取存储器162中用于执行。程序由指令组成，使得当计算机通过输入适配器来接收传送涉及的特定输入信号的比特流时，计算机对适当的缓冲器分配存储器，并且利用其它适当的资源和功能来执行以上参考图4和图5描述的各种操作，并且通过输出适配器来发射传送特定输出信号的比特流。
虽然以上已经结合一个或两个增强层讨论了可分级的视频流，但是本领域技术人员应当意识到，H.264/AVC的附录G允许多达7个增强层。还应当意识到，虽然增强层的前述描述已经在可分级视频的上下文中，但是对AVC基本层的其它类型的增强也是可能的。
应当意识到，本发明并不局限于已经描述的特定实施例，并且如根据现行法律的原则所解释的，可以在不背离如所附权利要求限定的本发明的范围的情况下进行变化，包括扩大权利要求超出其文字范围的可实施范围的等同物或任意其它原则的声明。除非上下文另外指出，否则权利要求中对元素的实例的数目的引用，即对一个或多于一个的实例的引用，要求至少指出数目的元素的实例，但是并非意在从权利要求的范围中排除具有比所指出的该元素的更多实例的结构或方法。当在权利要求中使用时，词语“包括”或其派生词义在非排他的意义上进行使用，其并非意在排除在要求保护的结构或方法中存在其它元素或步骤。所附权利要求采用也在有关H.264/AVC的参考文献中也使用的术语(诸如语法结构)，但是这是为了本领域技术人员的方便，而并非意在将权利要求的范围局限于依赖于H.264/AVC中描述的特定视频编码的方法、装置和计算机可读介质。

Claims (25)

1.一种解码增强型视频流的方法，所述增强型视频流包括基本层视频访问单元和增强层视频访问单元，每个访问单元包括多个语法结构，所述方法包括：
将所述基本层访问单元的语法结构传递到基本层缓冲器，
将所述增强层访问单元的语法结构传递到增强层缓冲器，
以预定序列输出被传递到所述基本层缓冲器的所述语法结构，
以预定序列输出被传递到所述增强层缓冲器的所述语法结构，以及
重新组合分别由所述基本层缓冲器和所述增强层缓冲器输出的语法结构的序列，以形成完整增强型访问单元，包括按照预定序列的基本层语法结构和增强层语法结构。
2.根据权利要求1所述的方法，其中，所述增强型视频流包括增强型访问单元系列，所述增强型访问单元的每一个包括基本层访问单元和至少一个增强层访问单元，并且所述方法包括：从所述增强型访问单元系列中分离所述基本层访问单元的所述语法结构。
3.根据权利要求2所述的方法，其中，所述增强层访问单元的所述语法结构包括视频层语法结构和非视频层语法结构，并且从所述增强型访问单元系列中分离所述基本层访问单元的所述语法结构的步骤包括：从所述系列中分离所述增强层访问单元的非视频层语法结构，从而被传递到所述基本层缓冲器的所述语法结构包括增强层非视频语法结构，并且其中，所述增强层访问单元的所有所述视频层语法结构都被传递到所述增强层缓冲器。
4.根据权利要求2所述的方法，其中，所述增强型访问单元系列中的增强层访问单元的所述语法结构包括：视频层语法结构、非视频层语法结构和定界语法结构，所述定界语法结构标记所述访问单元的所述视频层语法结构的边界，并且从访问单元的单一系列中分离所述基本层访问单元的所述语法结构的步骤包括：将所述定界语法结构之前的语法结构传递到所述基本层缓冲器，并且将所述定界语法结构之后的语法结构传递到所述增强层缓冲器。
5.根据权利要求1所述的方法，包括：接收复用传输流，所述复用传输流利用不同的相应节目标识符传送所述基本层访问单元的所述语法结构和所述其余的语法结构；基于所述不同的相应节目标识符来解复用所述传输流，以创建至少两个节目流；以及，将所述两个节目流分别传递到所述基本层缓冲器和所述增强层缓冲器。
6.根据权利要求1所述的方法，其中，所述基本层缓冲器包括基础流缓冲器部分，并且所述增强层缓冲器包括基础流缓冲器部分，并且所述方法包括：动态地调整所述基础流缓冲器部分的组合大小，以在限制所述基本层缓冲器的所述基础流缓冲器部分的最大大小的同时优化所述增强型视频流的解码。
7.根据权利要求1所述的方法，包括：将所述完整增强型访问单元传递到视频解码器。
8.根据权利要求1所述的方法，其中，所述增强层访问单元包含至少第一增强层和第二增强层的语法结构，并且将其余语法结构传递到增强层缓冲器的步骤包括：将所述第一增强层和所述第二增强层的语法结构分别传递到第一增强层缓冲器和第二增强层缓冲器。
9.根据权利要求8所述的方法，其中，所述增强型视频流包括增强型访问单元系列，所述增强型访问单元的每一个包括基本层访问单元以及至少第一增强层访问单元和第二增强层访问单元，并且所述方法包括：从所述增强型访问单元系列中分离所述基本层访问单元的语法结构。
10.根据权利要求9所述的方法，其中，每个增强层访问单元的所述语法结构包括视频层语法结构和非视频层语法结构，并且从所述增强型访问单元系列中分离所述基本层访问单元的所述语法结构的步骤包括：从所述系列中分离所述第一增强层访问单元和所述第二增强层访问单元的非视频层语法结构，从而被传递到所述基本层缓冲器的所述语法结构包括增强层非视频语法结构，并且其中，所述第一增强层访问单元和所述第二增强层访问单元的所有所述视频层语法结构分别被传递到所述第一增强层缓冲器和所述第二增强层缓冲器。
11.根据权利要求9所述的方法，其中，所述增强访问单元系列中的增强层访问单元的所述语法结构包括视频层语法结构、非视频层语法结构和定界语法结构，所述定界语法结构标记所述访问单元的所述视频层语法结构的边界，并且从访问单元的单一系列中分离所述基本层访问单元的所述语法结构的步骤包括：将在所述定界语法结构之前的语法结构传递到所述基本层缓冲器，并且将所述定界语法结构之后的语法结构传递到所述增强层缓冲器。
12.根据权利要求8所述的方法，包括：接收复用传输流，所述复用传输流传送具有第一节目标识符的所述基本层访问单元的语法结构、具有第二节目标识符的所述第一增强层的语法结构以及具有第三节目标识符的所述第二增强层的语法结构；分别基于所述第一节目标识符、所述第二节目标识符和所述第三节目标识符来解复用所述传输流，以创建至少第一节目流、第二节目流和第三节目流；以及，将所述第一节目流、所述第二节目流和所述第三节目流分别传递到所述基本层缓冲器以及所述第一增强层缓冲器和所述第二增强层缓冲器。
13.根据权利要求8所述的方法，其中，所述基本层缓冲器包括：基础流缓冲器部分，并且所述第一增强层缓冲器和所述第二增强层缓冲器分别包括第一基础流缓冲器部分和第二基本流缓冲器部分，并且所述方法包括：动态地调整所述基础流缓冲器部分的组合大小，以在限制所述基本层缓冲器的所述基础流缓冲器部分的最大大小的同时优化所述增强型视频流的解码。
14.根据权利要求8所述的方法，包括：将所述完整增强型访问单元传递到视频解码器。
15.一种创建增强型视频信号的方法，包括：
接收包括基本层访问单元和增强层访问单元的单一比特流，
从所述单一比特流中分离基本层节目流和增强层节目流，以及
将定界语法结构插入到所述增强层节目流中。
16.一种创建增强型视频信号的方法，包括：
接收包括基本层访问单元和增强层访问单元的单一比特流，其中，每个增强层访问单元包括视频层语法结构和非视频层语法结构，
从所述单一比特流中分离基本层节目流和增强层节目流，以及
将所述增强层访问单元的非视频层语法结构包括在所述基本层节目流中，
从而所述增强型视频信号包括基本层分量和增强层分量，所述基本层分量包括所述增强层访问单元的非视频层语法结构，所述增强层分量包括所述增强层访问单元的视频层语法结构。
17.一种用于解码基本层节目流和至少一个增强层节目流的解码装置，所述基本层节目流传送增强型视频流的基本层访问单元系列，所述至少一个增强层节目流传送所述增强型视频流的增强层访问单元系列，每个访问单元包括多个语法结构，所述解码装置包括：
基本层缓冲器，所述基本层缓冲器被连接用于接收所述基本层节目流并且以预定序列输出每个基本层访问单元的语法结构，
增强层缓冲器，所述增强层缓冲器被连接用于接收所述增强层节目流并且以预定序列输出每个增强层访问单元的语法结构，
重组功能元件，所述重组功能元件被连接用于接收分别由所述基本层缓冲器和所述增强层缓冲器输出的所述语法结构并且形成完整的增强型访问单元，包括按照预定序列的基本层语法结构和增强层语法结构。
18.根据权利要求17所述的解码装置，进一步包括：视频解码器，所述视频解码器被连接用于接收所述完整的增强型访问单元，所述视频解码器被操作用于解码所述增强型访问单元，以形成视频呈现单元。
19.根据权利要求17所述的解码装置，其中，所述基本层节目流和所述增强层节目流被封装在传输流中，并且所述解码装置包括传输流解复用器，所述传输流解复用器用于接收所述传输流并且分离地输出所述基本层节目流和所述增强层节目流。
20.根据权利要求19所述的解码装置，其中，包括在每个增强层访问单元中的语法结构包括视频编码层增强层访问单元，封装在所述传输流中的所述增强层节目流的每个增强层访问单元传送定界语法结构，所述定界语法结构标记包括在所述增强层访问单元中的所述视频编码层访问单元的边界，并且所述传输流解复用器基于所述定界访问单元从所述传输流中提取所述增强层访问单元。
21.一种用于创建增强型视频信号的装置，所述装置具有输入，所述输入用于接收包括基本层访问单元和增强层访问单元的单一比特流，并且所述装置包括：分离器，所述分离器用于从所述单一比特流中分离基本层节目流和增强层节目流；以及，插入器，所述插入器用于将定界语法结构插入所述增强层节目流中。
22.一种用于创建增强型视频信号的装置，所述装置具有输入，所述输入用于接收包括基本层访问单元和增强层访问单元的单一比特流，其中，每个增强层访问单元包括视频层语法结构和非视频层语法结构，并且所述装置包括：分离器，所述分离器用于从所述单一比特流中分离基本层节目流和增强层节目流并且将所述增强层访问单元的非视频层语法结构包括在基本层节目流中，从而所述增强型视频信号包括基本层分量和增强层分量，所述基本层分量包括所述增强层访问单元的非视频层语法结构，所述增强层分量包括所述增强层访问单元的视频层语法结构。
23.一种包含软件的计算机可读介质，当计算机执行所述软件时，所述计算机具有用于接收增强型视频流的输入，所述增强型视频流传送基本层访问单元和增强层访问单元，每个访问单元包括多个语法结构，通过下述方法来处理所述视频流，所述方法包括：
将所述基本层访问单元的所述语法结构传递到基本层缓冲器，
将所述增强层访问单元的所述语法结构传递到增强层缓冲器，
以预定序列输出被传递到所述基本层缓冲器的所述语法结构，
以预定序列输出被传递到所述增强层缓冲器的所述语法结构，以及
重新组合分别由所述基本层缓冲器和所述增强层缓冲器输出的语法结构的序列，以形成完整增强型访问单元，包括按照预定序列的基本层语法结构和增强层语法结构。
24.一种包含软件的计算机可读介质，当计算机执行所述软件时，所述计算机具有用于接收单一比特流的输入，所述单一比特流包括基本层访问单元和增强层访问单元，通过下述方法来处理所述比特流，所述方法包括：
从所述单一比特流中分离基本层节目流和增强层节目流，以及
将定界语法结构插入所述增强层节目流中。
25.一种包含软件的计算机可读介质，当计算机执行所述软件时，所述计算机具有用于接收单一比特流的输入，所述单一比特流包括基本层访问单元和增强层访问单元，其中，每个增强层访问单元包括视频层语法结构和非视频层语法结构，通过下述方法来处理所述比特流，所述方法包括：
从所述单一比特流中分离基本层节目流和增强层节目流，以及
将所述增强层访问单元的非视频层语法结构包括在所述基本层节目流中，
从而所述增强型视频信号包括基本层分量和增强层分量，所述基本层分量包括所述增强层访问单元的非视频层语法结构，所述增强层分量包括所述增强层访问单元的视频层语法结构。
CN200980107819.5A 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置 Active CN101960726B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510279266.9A CN104967869B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置
CN201410326963.0A CN104202600B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US3437008P 2008-03-06 2008-03-06
US61/034,370 2008-03-06
US12/395,056 US8369415B2 (en) 2008-03-06 2009-02-27 Method and apparatus for decoding an enhanced video stream
US12/395,056 2009-02-27
PCT/US2009/035945 WO2009111519A1 (en) 2008-03-06 2009-03-04 Method and apparatus for decoding an enhanced video stream

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201510279266.9A Division CN104967869B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置
CN201410326963.0A Division CN104202600B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置

Publications (2)

Publication Number Publication Date
CN101960726A true CN101960726A (zh) 2011-01-26
CN101960726B CN101960726B (zh) 2015-07-01

Family

ID=41053556

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201410326963.0A Active CN104202600B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置
CN201510279266.9A Expired - Fee Related CN104967869B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置
CN200980107819.5A Active CN101960726B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201410326963.0A Active CN104202600B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置
CN201510279266.9A Expired - Fee Related CN104967869B (zh) 2008-03-06 2009-03-04 用于解码增强型视频流的方法和装置

Country Status (7)

Country Link
US (1) US8369415B2 (zh)
EP (2) EP2899972B1 (zh)
JP (3) JP5238827B2 (zh)
KR (2) KR101501333B1 (zh)
CN (3) CN104202600B (zh)
ES (1) ES2530218T3 (zh)
WO (1) WO2009111519A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533404A (zh) * 2012-07-04 2014-01-22 扬智电子科技(上海)有限公司 数字广播电视的接收方法

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9167246B2 (en) * 2008-03-06 2015-10-20 Arris Technology, Inc. Method and apparatus for decoding an enhanced video stream
EP2194717A2 (en) * 2008-12-08 2010-06-09 Electronics and Telecommunications Research Institute Method for generating and processing hierarchical PES packet for digital satellite broadcasting based on SVC video
KR101216329B1 (ko) * 2009-12-16 2012-12-27 한국전자통신연구원 복수 계층 영상의 품질 측정 방법 및 시스템
CN102860008B (zh) * 2010-01-06 2016-05-11 杜比实验室特许公司 用于多层视频系统的复杂度自适应可伸缩解码及流处理
CN102763408B (zh) * 2010-02-11 2020-01-17 上海诺基亚贝尔股份有限公司 基于svc的e-mbms流传输方法和设备
WO2011142569A2 (en) * 2010-05-10 2011-11-17 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving layered coded video
US8705616B2 (en) 2010-06-11 2014-04-22 Microsoft Corporation Parallel multiple bitrate video encoding to reduce latency and dependences between groups of pictures
JP2012095053A (ja) * 2010-10-26 2012-05-17 Toshiba Corp ストリーム伝送システム、送信装置、受信装置、ストリーム伝送方法及びプログラム
US9591318B2 (en) * 2011-09-16 2017-03-07 Microsoft Technology Licensing, Llc Multi-layer encoding and decoding
US11089343B2 (en) 2012-01-11 2021-08-10 Microsoft Technology Licensing, Llc Capability advertisement, configuration and control for video coding and decoding
KR20130085987A (ko) * 2012-01-20 2013-07-30 한국전자통신연구원 이종망 네트워크에서 미디어 프래그먼트 유닛으로 나누어진 액세스 유닛을 가지는 미디어 데이터를 전송하는 방법
EP2834970B1 (en) 2012-04-06 2017-07-05 Vidyo, Inc. Level signaling for layered video coding
JP5979949B2 (ja) 2012-04-11 2016-08-31 キヤノン株式会社 画像データ送信装置及び画像データ受信装置
JP5979948B2 (ja) * 2012-04-11 2016-08-31 キヤノン株式会社 画像データ送信装置及び画像データ受信装置
US9154785B2 (en) * 2012-10-08 2015-10-06 Qualcomm Incorporated Sub-bitstream applicability to nested SEI messages in video coding
US20140301436A1 (en) * 2013-04-05 2014-10-09 Qualcomm Incorporated Cross-layer alignment in multi-layer video coding
US10063868B2 (en) 2013-04-08 2018-08-28 Arris Enterprises Llc Signaling for addition or removal of layers in video coding
US20150016547A1 (en) * 2013-07-15 2015-01-15 Sony Corporation Layer based hrd buffer management for scalable hevc
KR102657916B1 (ko) * 2013-07-15 2024-04-15 지이 비디오 컴프레션, 엘엘씨 다계층식 비디오 코딩에서의 저지연 개념
CN103338410B (zh) * 2013-07-19 2016-05-11 西安电子科技大学 多路径并行传输下基于svc的实时流媒体重组算法
US10291922B2 (en) 2013-10-28 2019-05-14 Arris Enterprises Llc Method and apparatus for decoding an enhanced video stream
CA2949823C (en) * 2014-05-21 2020-12-08 Arris Enterprises Llc Individual buffer management in transport of scalable video
EP3146724A1 (en) 2014-05-21 2017-03-29 ARRIS Enterprises LLC Signaling and selection for the enhancement of layers in scalable video
MX2018002265A (es) 2015-08-25 2018-03-23 Sony Corp Aparato de transmision, metodo de transmision, aparato de recepcion, y metodo de recepcion.
GB2547442B (en) 2016-02-17 2022-01-12 V Nova Int Ltd Physical adapter, signal processing equipment, methods and computer programs
CA3051660A1 (en) * 2017-02-03 2018-08-09 Sony Corporation Transmission device, transmission method, reception device, and reception method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050180512A1 (en) * 2004-01-16 2005-08-18 Narasimhan Mandayam A. Method and apparatus for determining timing information from a bit stream
US20070183494A1 (en) * 2006-01-10 2007-08-09 Nokia Corporation Buffering of decoded reference pictures
US20070230564A1 (en) * 2006-03-29 2007-10-04 Qualcomm Incorporated Video processing with scalability

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5852565A (en) * 1996-01-30 1998-12-22 Demografx Temporal and resolution layering in advanced television
US7627184B2 (en) * 2003-11-21 2009-12-01 Nec Corporation Content distribution/reception device, content transmission/reception method, and content distribution/reception program
US20070201811A1 (en) * 2003-12-22 2007-08-30 Koninklijke Philips Electronics N.V. Disc Allocation/Scheduling For Layered Video
US20050201471A1 (en) * 2004-02-13 2005-09-15 Nokia Corporation Picture decoding method
US7852353B1 (en) * 2005-03-31 2010-12-14 Apple Inc. Encoding a transparency (alpha) channel in a video bitstream
US20060227871A1 (en) * 2005-03-31 2006-10-12 Madhukar Budagavi Video thumbnail method
KR100763181B1 (ko) * 2005-04-19 2007-10-05 삼성전자주식회사 기초계층과 향상계층의 데이터를 바탕으로 예측 정보를코딩하여 코딩율을 향상시키는 방법 및 장치
JP5082209B2 (ja) * 2005-06-27 2012-11-28 株式会社日立製作所 送信装置、受信装置、及び映像信号送受信システム
CN101390399B (zh) * 2006-01-11 2010-12-01 诺基亚公司 可伸缩视频编码中的图片的后向兼容聚合
JP4660408B2 (ja) * 2006-03-27 2011-03-30 三洋電機株式会社 符号化方法
US8767836B2 (en) 2006-03-27 2014-07-01 Nokia Corporation Picture delimiter in scalable video coding
US20080095228A1 (en) * 2006-10-20 2008-04-24 Nokia Corporation System and method for providing picture output indications in video coding
US8467449B2 (en) * 2007-01-08 2013-06-18 Qualcomm Incorporated CAVLC enhancements for SVC CGS enhancement layer coding
JP2009010649A (ja) * 2007-06-27 2009-01-15 Sharp Corp スケーラブルビデオストリーム復号装置およびスケーラブルビデオストリーム生成装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050180512A1 (en) * 2004-01-16 2005-08-18 Narasimhan Mandayam A. Method and apparatus for determining timing information from a bit stream
US20070183494A1 (en) * 2006-01-10 2007-08-09 Nokia Corporation Buffering of decoded reference pictures
US20070230564A1 (en) * 2006-03-29 2007-10-04 Qualcomm Incorporated Video processing with scalability

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533404A (zh) * 2012-07-04 2014-01-22 扬智电子科技(上海)有限公司 数字广播电视的接收方法
CN103533404B (zh) * 2012-07-04 2016-12-21 扬智电子科技(上海)有限公司 数字广播电视的接收方法

Also Published As

Publication number Publication date
JP5748234B2 (ja) 2015-07-15
JP2013153523A (ja) 2013-08-08
KR101303480B1 (ko) 2013-09-05
JP6040282B2 (ja) 2016-12-07
JP2011514080A (ja) 2011-04-28
JP5238827B2 (ja) 2013-07-17
EP2899972A1 (en) 2015-07-29
CN101960726B (zh) 2015-07-01
CN104967869B (zh) 2018-06-05
KR20120125655A (ko) 2012-11-16
WO2009111519A1 (en) 2009-09-11
KR20100119002A (ko) 2010-11-08
JP2015144493A (ja) 2015-08-06
US20090225870A1 (en) 2009-09-10
EP2253070B1 (en) 2015-01-21
ES2530218T3 (es) 2015-02-27
KR101501333B1 (ko) 2015-03-11
EP2253070A1 (en) 2010-11-24
US8369415B2 (en) 2013-02-05
EP2899972B1 (en) 2021-12-08
CN104967869A (zh) 2015-10-07
CN104202600B (zh) 2018-05-15
CN104202600A (zh) 2014-12-10
EP2253070A4 (en) 2011-07-27

Similar Documents

Publication Publication Date Title
CN101960726B (zh) 用于解码增强型视频流的方法和装置
US11722702B2 (en) Method and apparatus for decoding an enhanced video stream
CN101068367B (zh) 用于改变编解码器的方法和装置
CN101283566B (zh) 用于vc-1的rtp净荷格式
CN102037731B (zh) 压缩视频中属于互相关性层的图片的通知和抽取
KR20110117033A (ko) 미디어 데이터를 송수신하기 위한 인터페이스 장치 및 방법
CN107211200B (zh) 用于发送/接收媒体数据的方法和设备
CN105340277A (zh) 编码装置、编码方法、传输装置、解码装置、解码方法以及接收装置
US10291922B2 (en) Method and apparatus for decoding an enhanced video stream
KR101249613B1 (ko) 비디오 스트리밍을 위한 네트워크 적응형 가변 스트림 계층화 장치 및 방법
KR101663769B1 (ko) 실시간 부호화 되는 스케일러블 비디오를 다중 송신그룹으로 보내기 위한 소스 버퍼링을 수행하는 시스템 및 방법
CN103765907B (zh) 使用扩展描述符将媒体数据从发射机递送到接收机的方法
CN113301426A (zh) 视频直播的预览方法、装置、终端设备和存储介质
Puig Bou Physical Layer Statistical Multiplexing for the Second Generation Digital Terrestrial TV Standard DVB-T2

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Georgia, USA

Patentee after: Ai Ruishi Technology Co.

Address before: American Pennsylvania

Patentee before: GENERAL INSTRUMENT Corp.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20180413

Address after: Georgia, USA

Patentee after: ARRIS ENTERPRISES LLC

Address before: Georgia, USA

Patentee before: Ai Ruishi Technology Co.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220713

Address after: London

Patentee after: Iris International Intellectual Property Co.,Ltd.

Address before: State of Georgia, US

Patentee before: ARRIS ENTERPRISES LLC