CN107743707A - 低位率视频编解码 - Google Patents

低位率视频编解码 Download PDF

Info

Publication number
CN107743707A
CN107743707A CN201680034312.1A CN201680034312A CN107743707A CN 107743707 A CN107743707 A CN 107743707A CN 201680034312 A CN201680034312 A CN 201680034312A CN 107743707 A CN107743707 A CN 107743707A
Authority
CN
China
Prior art keywords
picture
decoding
encoding
group
skip
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680034312.1A
Other languages
English (en)
Other versions
CN107743707B (zh
Inventor
张习民
李相熙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN107743707A publication Critical patent/CN107743707A/zh
Application granted granted Critical
Publication of CN107743707B publication Critical patent/CN107743707B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/149Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

讨论了与具有低位率的视频编解码有关的技术。此类技术可以包括:当图片的估计的编解码位成本大于图片的可用编解码位限制时,跳过图片群组的图片的编解码,并且当估计的编解码位成本不大于可用编解码位限制时,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符。

Description

低位率视频编解码
优先权声明
本申请要求于2015年6月12日提交的标题为“LOW BITRATE VIDEO CODING”的美国非临时专利申请序列号14/737,795的优先权,并且其通过引用整体结合在本文中。
背景技术
在压缩/解压缩(codec)系统中,压缩效率和视频质量是重要的性能准则。例如,视觉质量是许多视频应用中的用户体验的重要方面,并且压缩效率影响存储视频文件所需的存储器存储的量和/或传送和/或流传输视频内容所需的带宽的量。例如,视频编码器压缩视频信息,以便可以在给定的带宽上发送更多的信息或者更多的信息可以存储在给定的存储空间中等等。然后压缩的信号或数据可以经由解码或解压缩该信号或数据的解码器解码以用于显示给用户。在大多数实现中,具有更大压缩的更高的视觉质量是期望的。
在一些上下文中,低位率视频编码可以是有利的,特别是对于实时视频流传输服务等等。用于提供低位率视频编码的当前技术包括增加量化参数(QP)以根据需要减少位率。然而,在一些示例中,即使具有最高QP值也不能达成所要求的低位率。此外,多次(multi-pass)编码器可以提供跳过模式以提供较低的位率编码。然而,此类多次技术可能不在单次(one-pass)硬件编码实现中提供。此外,常规的基于速率的跳过选择技术可能引起主观质量问题,例如,如果实现B-图片、隔行扫描(interlaced)场或时间可缩放性,则抖动。
具有高主观视频质量的低位率视频编码可能是有利的。正是相对于这些和其它考量,需要当前改进。随着压缩视频数据的期望变得更加普遍,此类改进可能变得关键。
附图说明
本文描述的材料在附图中作为示例而不作为限制示出。为了说明的简单性和清楚性,图中所示的元件不一定按比例绘制。例如,为了清楚性起见,一些元件的尺寸可能相对于其它元件被夸大。此外,在认为适当的情况下,附图之中重复的参考标记指示对应的或相似的元件。在图中:
图1是用于提供视频编解码的示例系统的说明图;
图2示出了具有分层B-图片的示例图片群组;
图3示出了具有I-图片、P-图片和B-图片的示例图片群组;
图4图示了具有时间可缩放性的示例图片群组;
图5示出了示例位流;
图6是示出针对具有图片等级跳过编解码的视频编解码的示例过程的流程图。
图7是针对具有图片等级跳过编解码的视频编解码的示例系统的说明图。
图8是示例系统的说明图;以及
图9示出了示例装置,所述示例装置全部根据本公开的至少一些实现布置。
具体实施方式
现在参考所附的附图来描述一个或多个实施例或实现。尽管讨论了具体配置和布置,但应该理解,这仅仅是为了说明的目的而完成。相关领域的技术人员将认识到,在不脱离描述的精神和范围的情况下,可以采用其它配置和布置。对于相关领域的技术人员显而易见的是,本文描述的技术和/或布置也可以在不同于本文所描述的系统和应用的各种其它系统和应用中采用。
例如尽管以下描述阐述了可以在例如片上系统(SoC)架构的架构中表明的各种实现,但是本文描述的技术和/或布置的实现不限于特定的架构和/或计算系统并且可以为了类似的目的而由任何架构和/或计算系统来实现。例如,采用例如多个集成电路(IC)芯片和/或封装,和/或各种计算装置和/或诸如机顶盒、智能电话等的消费电子(CE)装置的各种架构可以实现本文描述的技术和/或布置。此外,尽管以下描述可以阐述诸如逻辑实现、系统组件的类型和相互关系、逻辑划分/集成选择等的许多具体细节,但是可以在没有此类具体细节的情况下实践所要求保护的主题。在其它实例中,可以不详细示出诸如例如控制结构和完全软件指令序列的一些材料,以便不模糊本文公开的材料。
本文公开的材料可以以硬件、固件、软件或其任何组合来实现。本文公开的材料还可以被实现为存储在机器可读介质上的指令,其可以被一个或多个处理器读和执行。机器可读介质可以包括用于以通过机器(例如,计算装置)可读的形式存储或传送信息的任何介质和/或机制。例如,机器可读介质可以包括只读存储器(ROM);随机存取存储器(RAM);磁盘存储媒体;光存储媒体;闪存装置;电、光、声或其它形式的传播信号(例如载波、红外信号、数字信号等)以及其它。
在说明书中对“一个实现”、“实现”、“示例实现”等的引用指示所描述的实现可以包括特定特征、结构或特性,但是每一个实施例可能不一定包括特定特征、结构或特性。此外,此类短语不一定指相同的实现。此外,当结合实施例描述特定的特征、结构或特性时,认为在本领域技术人员的知识范围内结合其它实现(无论本文是否明确描述)产生此类特征、结构或特性。
本文描述了与视频编解码(并且具体地与提供图片等级编解码跳过判定)有关的方法、装置、设备、计算平台和物品(article)。
如上所述,提供具有高主观视频质量的低位率视频编解码可能是有利的。在本文讨论的一些实施例中,视频编解码可以包括针对图片群组的单独图片确定可用编解码位限制和估计的编解码位成本。基于针对单独图片的可用编解码位限制和估计的编解码位成本,当估计的编解码位成本大于可用编解码位限制时,可以进行图片等级跳过确定以跳过图片的编解码。例如,当估计的编解码位成本大于可用的编解码位限制时,编解码跳过指示符(例如,标志或位等等)可以被设置为跳过。当估计的编解码位成本不大于可用编解码位限制时,可以基于单独图片的图片类型和图片群组的图片结构来进行图片等级跳过确定。此类基于图片类型和图片群组的图片等级跳过确定在本文中进一步讨论。
此类技术可以提供自适应图片等级跳过判定或确定以达成目标位率(例如,低和/或极低的目标位率),而没有抖动伪影(artifact)或多次编解码的要求。例如,可以基于速率控制和内容分析(例如,可用的编解码位限制、估计的编解码位成本等等)来进行跳过判定以满足位率目标。然后可以应用基于图片类型和编解码结构的自适应跳过判定。此类基于图片类型和编解码结构的自适应跳过判定可以应用于B-图片(例如,双预测图片)、隔行扫描编解码场等等。此类技术可以满足目标位率并减少诸如抖动伪影等等的伪影。
图1是根据本公开的至少一些实现布置的用于提供视频编解码的示例系统100的说明图。如图1中所示的,系统100可以包括速率控制模块101、图片等级跳过确定模块102、图片编码模块107和熵编码器108。还如所示的,图片等级跳过确定模块102可以包括比较器模块103(例如标记的EstBits> MaxBits)、基于图片类型和图片群组(GOP)结构的跳过确定模块104、跳过图片编解码模块105和跳过评估模块106(例如,标记的跳过)。
还如所示的,速率控制模块101和图片等级跳过确定模块102可以接收视频121。系统100可以提供例如视频压缩,并且系统100可以是经由计算机或计算装置等等实现的视频编码器。例如,系统100可以生成与诸如H.264/MPEG-4高级视频编解码(AVC)标准、MPEG-2编解码标准、高效率视频编解码(HEVC)标准、VP8标准、VP9标准等等的视频压缩-解压缩(codec)标准兼容的位流125。系统100可以经由任何适合的装置来实现,例如诸如个人计算机、膝上型计算机、平板电脑、平板手机、智能电话、数码相机、游戏控制台、可穿戴装置、显示装置、一体式装置、二合一装置等等或诸如移动平台等等的平台实现。例如,如本文所使用的,系统、装置、计算机或计算装置可以包括任何此类装置或平台。
为了呈现的清楚性,系统100可以包括未示出的其它模块。例如,系统100可以包括变换模块、帧内(intra)预测模块、运动估计模块、运动补偿模块、循环中(in-loop)滤波模块、参考帧缓冲器、扫描模块等等。在一些示例中,系统100可以包括用于生成在编码过程中使用的参考帧的本地解码循环。此类模块是本领域技术人员已知的,并且在本文中为了呈现所描述的技术的清楚性而没有进一步讨论。
如所讨论的,速率控制模块101和图片等级跳过确定模块102可以接收视频121。视频121可以包括处于任何适合的分辨率的任何适合的视频帧、视频图片、视频帧序列、一个或多个图片群组、视频数据等等。例如,视频121可以是视频图形阵列(VGA)、高清晰度(HD)、全-HD(例如1080p)或4K分辨率视频等等。此外,视频121可以包括任何数量的视频帧、视频帧序列、图片、图片群组等等。为了呈现的清楚性,本文讨论的技术是针对图片和图片群组讨论。然而,此类图片和图片群组可以被表征为帧、视频帧、帧序列、视频序列等等。
如图1中所示的,速率控制模块101可以针对视频121的单独图片确定可用编解码位限制和估计的编解码位成本。例如,速率控制模块101可向图片等级跳过确定模块102提供包括可用编解码位限制(例如,MaxBits)和估计的编解码位成本(例如,EstBits)的信号122。例如,可用编解码位限制可以是用于对图片进行编解码的允许位的最大数量。可用编解码位限制可以被表征为当前图片的最大位、最大编解码位等等。此外,估计的编解码位成本可以是编码当前图片所需的位的最小数量的估计。估计的编解码位成本可以被表征为针对当前图片的最小位、最小所需位等等。
可以使用任何合适的一个或多个技术来确定当前图片的可用编解码位限制。例如,可用的编解码位限制可以基于当前缓冲器条件和/或用于对视频121的每个图片进行编解码的平均目标速率。在一些示例中,对于视频121的当前图片,可用编解码位限制可以是与紧接在前编码图片关联的假设参考解码器缓冲器充满度(例如,当前缓冲器条件)和图片群组的每个图片的平均目标速率的和。例如,可用编解码位限制可以如等式(1)中所示来确定:
其中MaxBits可以是可用编解码位限制,buffer_fullness可以是假设参考解码器的缓冲器充满度,N可以指示当前图片,N-1可以指示先前编码图片(例如,以编码顺序),并且T可以是视频121的每个图片的平均目标速率。例如,buffer_fullness [N-1]可以是在图片N-1被编码之后的假设参考解码器(HRD)缓冲器充满度,使得图片N-1可以是相对于当前图片的紧接在前编码图片。
此外,可以使用任何适合的一个或多个技术来确定当前图片的估计的编解码位成本。例如,估计的编解码位成本可以基于编解码当前图片的编解码成本(例如,以位为单位)的估计。在一些示例中,估计的编解码位成本可以基于当前图片的基于视频分析的预测失真、与当前图片相同类型的先前图片的基于视频分析的预测失真、用于编码相同类型的先前图片的实际位数、相同类型的先前图片的量化参数(QP)以及最大可用QP(例如,基于正实现的编解码标准等等)。
在一些示例中,所估计的编解码位成本可以是相对于当前的在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与所述在前图片关联的量化参数与最大量化参数的比率的乘积。在一些示例中,用于确定估计的编解码位成本的在前图片可以是与当前图片相同的类型。例如,可以如等式(2)中所示地那样确定估计的编解码位成本:
其中EstBits可以是估计的编解码位成本,Distortion可以是基于视频分析的预测失真,ActualBits可以是编解码位的实际数量,QP可以是量化参数,MaxQP可以是最大可用量化参数,N可以指示当前图片,c可以指示当前图片与相同类型的先前图片之间的图片距离,N可以指示当前图片,并且N-c可以指示与图片N相同类型的先前图片。例如,MaxQP可以是对于MPEG-2是31以及对于AVC和HEVC是51。此外,可以从视频121确定c,并且如所讨论的,可以指示当前图片与相同类型的先前图片之间的图片距离。例如,对于IPPP编解码结构中的P-图片(例如,没有B-图片的编解码结构),c可以是1。如果没有可用的相同图片类型,则针对当前图片的估计的编解码位成本可以基于相对于当前图片的紧接的在前图片(例如,以图片的编码顺序)。
如所示的,图片等级跳过确定模块102(例如,经由比较器模块103)可以经由信号122接收当前图片的可用编解码位限制和估计的编解码位成本。比较器模块103可以比较可用编解码位限制和当前图片的估计的编解码位成本。如果估计的编解码位成本大于可用编解码位限制(例如,或者大于或等于,或者不小于等等),则比较器模块103可以提供信号到当前图片的跳过图片编解码模块105。跳过图片编解码模块105可基于指示当前图片的跳过的所接收信号而生成当前图片的跳过指示符(SI)123以针对当前图片将编解码跳过指示符设置成跳过,且将跳过指示符123提供到熵编码器108用于熵编码并包括在位流125中。跳过指示符123可以是指示针对当前图片跳过编解码的图片等级跳过指示符。例如,如果估计的编解码位成本大于当前图片的可用编解码位限制,则可以跳过当前图片的编解码(例如,针对当前图片的所有块或编解码单元等等),并且当前图片的此类跳过可以经由熵编码并包括在位流125中的跳过指示符123来指示(例如,到解码器等等)。
如果比较器模块103确定估计的编解码位成本不大于可用编解码位限制(例如,或者小于,或者小于或等于等等),则比较器模块103可以向基于图片类型和GOP结构的跳过确定模块104提供信号。基于图片类型和GOP结构的跳过确定模块104可以从比较器模块103接收信号,并且基于图片类型和GOP结构的跳过确定模块104可以基于当前图片的图片类型和GOP的结构确定针对基于当前图片的图片类型和当前图片群组(例如,包括当前图片的图片群组)的图片结构的当前图片的跳过或非跳过信号(S / NS)126。
基于图片类型和GOP结构的跳过确定模块104可以提供跳过或非跳过信号126到当前图片的跳过评估模块106。当跳过或非跳过信号126指示针对当前图片跳过时,跳过评估模块106可提供信号到跳过图片编解码模块105,图片编码模块105可基于该信号生成当前图片的跳过指示符123并提供跳过指示符123到熵编码器108用于熵编码并包括在位流125中,如上所讨论的。
当跳过或非跳过信号126指示针对当前图片非跳过时,跳过评估模块106可以向图片编码模块107提供信号,图片编码模块107可以基于接收到的信号对当前图片进行编码。图片编码模块107可使用诸如帧内预测、帧间预测等等的任何适合的一个或多个技术来编码当前图片以生成图片编码数据(PED)124。如所示的,图片编码模块107可提供图片编码数据124到熵编码器108用于熵编码并包括在位流125中。
如所讨论的,基于图片类型和GOP结构的跳过确定模块104可以基于当前图片的图片类型和包括当前图片的图片群组的图片结构来生成跳过或非跳过信号126。例如,当前图片的图片类型可以包括基于正实现的视频编解码标准的任何适合的图片类型。当前图片的图片类型可以基于正实现的视频编解码标准的可用图片类型以及各种编解码分析、图片分析、位率分析等等由速率控制模块101和/或系统100的其它模块定义。例如,图片类型可以是I-图片(帧内图片;例如,不参考另一图片而预测的图片)、P-图片(预测图片;例如参考一个或多个另一图片而预测的并且可用用在预测其它图片中的图片)、B-图片(双向图片;例如,参考一个或多个另一图片而预测并且可用用在其它编解码上下文中的其它图片的预测中,但不可用用于在在其它编解码上下文中的其它图片的预测中)、包括B0-、B-、B1-和B-2图片的分层B-图片(例如,分层B-图片编解码上下文中的B-图片)、具有时间可缩放性的图片等等。
图片结构还可以包括基于正实现的视频编解码标准的任何适合的图片结构。例如,图片结构可以是图片类型的序列、图片群组的类型和顺序(例如,以编码顺序和显示顺序)等等。包括当前图片的视频序列或当前图片群组的图片结构等等可以基于正实现的视频编解码标准的可用图片类型以及各种编解码分析、图片分析、位率分析等等由速率控制模块101和/或系统100的其它模块定义。
基于图片类型和GOP结构的跳过确定模块104可以使用任何适合的一种或多种技术基于当前图片的图片类型和包括当前图片的图片群组的图片结构来生成跳过或非跳过信号126。
在一些示例中,确定跳过或非跳过信号126(例如,包括针对当前图片的编解码跳过指示符)可以包括:以图片群组的编码顺序确定在当前图片的紧接在前编码图片是相等或较高等级的图片,以及紧接在前编码图片是跳过图片。基于紧接在前编码图片是跳过图片并且是相等或较高等级的图片,当前图片也可以被确定是跳过图片(例如,当前图片的编解码跳过指示符可以基于紧接在前编码图片是跳过图片且是相等或更高等级图片经由跳过或非跳过信号126而被设置成跳过。
图2示出根据本公开的至少一些实现布置的具有分层B-图片的示例图片群组200。如图2中所示的,图片群组200可以包括图片210-218。在所示示例中,图片群组200可以是以显示顺序220的8个图片的群组(例如,GOP = 8;不计数I-图片210),其指示显示顺序220(例如,0-8)遵循以图片210、图片211、图片212、图片213、图片214、图片215、图片216、图片217和图片218的顺序。此外,图片群组200可以具有图片类型230,使得图片210是I-图片、图片211是B2-图片、图片212是Bl-图片、图片213是B2-图片、图片214是B-图片、图片215是B2-图片、图片216是Bl-图片、图片217是B2-图片,以及图片218是BO-图片。例如,图片群组200可以是在提供分层B-图片的编码上下文中的图片群组。在一些示例中,图片群组200可以是HEVC编解码上下文中的图片群组。尽管为了呈现的清楚性而使用特定细节来示出,但图片群组200可以包括以适合顺序的任何适合图片类型的任何数量的图片。
如所讨论的,图片群组200可具有显示顺序220,使得在解码时,图片210-218可被解码并以显示顺序220显示。此外,图片群组200可具有可以或可以不匹配显示顺序220编码顺序。在图2的示例中,图片群组200的分层结构可以是I-、B0-、B-、B1-、B2-,使得图片群组200以基于分层结构的顺序编码。例如,图片群组200可以具有以下编码顺序:图片210、图片218、图片214、图片212、图片211、图片213、图片216、图片215和图片217(例如,0, 8, 4, 2,1,3,6,5,7)。
如相对于图1所讨论的,基于图片类型和GOP结构的跳过确定模块104可以针对当前图片将跳过指示符设置成跳过(当以编码顺序,在单独图片的紧接在前编码图片是相等或较高等级图片且是跳过图片时)。注意到,此类处理可以在经由比较器模块103处理之后发生(例如,使得可以基于可用编解码位限制和估计的编解码位成本比较,将图片群组的一些图片指示为跳过图片)。例如,参考图2,如果当前图片是图片214,并且图片218是紧接在前编码图片,使得图片218是具有相等或较高等级图片的图片214的紧接在前编码图片,则基于图片类型和GOP结构的跳过确定模块104可以确定图片218是否是跳过,并且如果是,则为图片214提供跳过指示符。例如,图片218可以是图片214的紧接在前编码图片(例如,以编码顺序),图片218可以是相等或较高等级图片(例如,B0是比B更高的等级),并且由于图片218是跳过图片,图片214也可以被确定是跳过图片。
类似地,参考图2,如果图片214是跳过图片(例如,图片214是较高等级图片并且相对于图片212以编码顺序紧接在前),则图片212可以被提供跳过指示符;如果图片214是跳过图片(例如,图片214是较高等级图片并且相对于图片216以编码顺序在前),则图片216可以被提供跳过指示符;如果图片212是跳过图片,则图片211可以被提供跳过指示符;如果图片211是跳过图片,则图片213可以被提供跳过指示符;如果图片216是跳过图片,则图片215可以被提供跳过指示符; 如果图片215是跳过图片,则图片217可以被提供跳过指示符,等等。
例如,图2示出了具有分层B-图片结构的示例图片群组200。此类编解码上下文可以在HEVC等等中提供。在此类示例中,类型B0、B、B1和B2的B-图片可以是可用的,并且低等级图片可以包括具有紧接在前编码图片(其具有相等或较高等级(例如,B、B1或B2))的任何B-图片。
在一些上下文中,分层B-图片可能不在编解码上下文中提供或可用。在此类上下文中,当以编码顺序,在单独图片的紧接在前编码图片是相等或较高等级图片并且是跳过图片时,基于图片类型和GOP结构的跳过确定模块104可以针对当前图片将跳过指示符设置成跳过。例如,如果当前图片是B-图片并且紧接在前编码图片是B-图片或者P-图片并且是跳过图片,则当前图片可以被设置成跳过图片。此类编解码上下文(例如, 其中I-、P-和B-图片可用)可以在AVC等等中提供。
图3示出了根据本公开的至少一些实现布置的具有I-图片、P-图片和B-图片的示例图片群组300。如图3中所示的,图片群组300可以包括图片310-319。在所示的示例中,图片群组300可以是以显示顺序320的9图片的群组(例如GOP = 9;不计数I-图片310),其指示显示顺序320(例如,0-9)遵循以图片310、图片311、图片312、图片313、图片314、图片315、图片316、图片317、图片318和图片318的顺序。此外,图片群组300可以具有图片类型330,使得图片310和319是I-图片,图片313和316是P-图片,并且图片311、312、314、315、317和319是B-图片。例如,图片群组200可以是在提供I-图片、P-图片和B-图片的编码上下文中的图片群组。在一些示例中,图片群组300例如可以是AVC编解码中的图片群组。尽管为了呈现的清楚性而使用特定细节来示出,但图片群组300可包括以适合顺序的任何适合图片类型的任何适合数量的图片。
如所讨论的,图片群组300可具有显示顺序320,使得在解码时,图片310-319可以以显示顺序320解码并显示。图片群组300还可具有可以或可以不与显示顺序320匹配的编码顺序。在图3的示例中,图片群组200的分层结构可以是I-、P-、B-,使得图片群组300按以下顺序被编码:图片310、图片313、图片311、图片312、图片316、图片314、图片315、图片319、图片317和图片318,尽管顺序可以取决于图片编码相关性而变化。
如相对于图1所讨论的,当以编码顺序,在单独图片的紧接在前编码图片是相等或较高等级图片并且紧接在前编码图片是跳过图片时,基于图片类型和GOP结构的跳过确定模块104可针对当前图片将跳过指示符设置成跳过。注意到,此类处理可以在经由比较器模块103处理之后发生(例如,使得可以基于可用编解码位限制和估计的编解码位成本比较,将图片群组的一些图片指示为跳过图片)。例如,参考图3,如果当前图片是图片311并且图片313是具有相等或较高等级图片的紧接在前编码图片,则基于图片类型和GOP结构的跳过确定模块104可以确定图片313是否跳过,并且如果是,则为图片311提供跳过指示符。例如,图片313可以是图片311的紧接在前编码图片(例如,以编码顺序),图片313可以是相等或较高等级图片(例如,P-是比B-更高等级),并且由于图片313是跳过图片,所以基于图片类型和GOP结构的跳过确定模块104可以将图片311设置成跳过图片。类似地,参考图3,如果图片311是跳过图片(例如,相对于图片312,图片311是相同等级图片并且以编码顺序紧接在前),则图片312可以被提供跳过指示符,等等。
例如,图3示出了具有I-、P-、B-图片结构的示例图片群组300。此类编解码上下文可以在AVC等等中提供。在此类示例中,可以评估B-图片以确定相等或更高等级的图片的紧接在前编码图片是否是跳过图片,并且如果是,则当前图片(例如,B-图片)可以是跳过图片。
返回图1,在一些示例中,确定针对当前图片的跳过或非跳过信号126(例如,包括用于当前图片的编解码跳过指示符)可以包括确定当前图片是图片群组中的第一B-图片,并且以图片群组的编码顺序,紧接在前较高等级图片是非跳过图片。在此类示例中,可以增加估计的编解码位成本(例如,经由速率控制模块101确定的)以生成增加的估计的编解码位成本,并且当增加的估计的编解码位成本大于可用编解码位限制时,编解码跳过指示符可以被设置成跳过。此类技术可以避免当前B-图片被编码为非跳过,以及在后的B-图片被编码为跳过,这可能引起不期望的抖动或其它伪影。
例如,参考图3,基于图片类型和GOP结构的跳过确定模块104可以确定图片311是图片群组300的第一B-图片。基于图片类型和GOP结构的跳过确定模块104还可以确定图片313(例如,按照编码顺序相对于图片311的紧接在前高等级图片)是非跳过图片。基于图片311是图片群组300的第一B-图片和以及图片311是非跳过图片,基于图片类型和GOP结构的跳过确定模块104可以向速率控制模块101发送信号以增加与图片311关联的估计的编解码位成本(例如,基于等式(2)等等)以生成增加的估计的编解码位成本。增加的估计的编解码位成本可以与针对图片311的可用编解码位限制等)进行比较(例如基于等式(1)等等),并且如所讨论的,如果增加的估计的编解码位成本大于可用编解码位限制,可以针对当前图片将编解码跳过指示符设置成跳过。此类操作可以经由比较器模块103以及跳过图片编解码模块105来执行,如本文所讨论的。
增加的估计的编解码位成本可以使用任何适合的一种或多种技术来生成。在一些示例中,当前图片的增加的估计的编解码位成本可以是通过(例如,通过加法或乘法等等)编解码成本增加因子或参数等等来调整的图片的估计的编解码位成本。在一些示例中,当前图片的增加的估计的编解码位成本可以是乘以编解码成本增加因子或参数等等的图片的估计的编解码位成本。例如,如等式(3)中所示的,可以生成增加的估计的编解码位成本:
IncEstBits [N] = EstBits [N] * F (3)
其中IncEstBits [N]可以是增加的估计的编解码位成本,EstBits可以是估计的编解码位成本,N可以指示当前图片,并且F可以是编解码成本增加因子、参数等等。 F可以是诸如1.3至1.5等等的任何适合的值。
返回图1,在一些示例中,确定针对当前图片的跳过或非跳过信号126(例如,包括当前图片的编解码跳过指示符)可以包括确定图片群组的较高层等级图片是跳过图片,以图片群组的显示顺序确定所述当前图片在所述较高等级图片之前,并且在另一较高等级图片之后,并且基于包括跳过图片的较高等级图片和在较高等级图片之间的当前图片的位置确定所述当前图片是跳过图片(例如,将所述编解码跳过指示符设置成跳过)。
例如,参考图2,如果当前图片是图片213,则基于图片类型和GOP结构的跳过确定模块104可以确定图片214(例如,B-图片是比B2-图片更高等级的图片)是跳过图片。此外,基于图片类型和GOP结构的跳过确定模块104可以确定图片213以显示顺序220在图片214之前,并且图片213以显示顺序220在另一较高等级图片之后,图片212(例如, B1-图片是比B2-图片更高等级的图片)。基于图片214是跳过图片并且图片213在图片214之前并且在图片210之后,可以针对图片213将编解码跳过指示符设置成跳过。
类似地,继续图片214是跳过图片的示例,图片211-213可以基于图片214是跳过图片、图片214具有比图片211-213更高的等级以及图片211-213在图片214之前并且在图片210之后(例如,图片210也具有比图片211-213更高的等级)被设置成跳过。此外,如果图片212是跳过图片,则图片211可以被设置成跳过(例如,图片211在较高等级图片212之前并且在另一较高等级图片210之后)。类似地,如果图片218是跳过图片,则图片211-217可被确定是跳过图片。在另一个示例中,如果图片216是跳过图片,则可以将图片215确定为跳过图片。注意到,如果图片215是跳过图片,则不提供对图片214的更改,因为图片214比图片215更高等级。类似地,如果图片216是跳过图片,则不提供对图片214的更改,因为图片214比图片216更高等级。
参考图3,如果当前图片是图片312,则基于GOP结构的跳过确定模块104可以确定图片313(例如,P-图片是比B2-图片更高等级的图片)是跳过图片。此外,基于图片类型和GOP结构的跳过确定模块104可以确定图片312以显示顺序在图片313之前,并且图片312以显示顺序在另一较高等级图片图片310之后(例如,I-图片是比B-图片更高等级的图片)。基于图片313是跳过图片并且图片312在图片313之前并且在图片310之后,可以针对图片312将编解码跳过指示符设置成跳过。
类似地,继续图片313是跳过图片的示例,可以基于图片313是跳过图片、图片313具有比图片311和312更高的等级以及图片311和312在图片313之前并且在图片310之后(例如,图片310也具有比图片311和312更高的等级)将图片311和312设置成跳过。此外,如果图片316是跳过图片,则图片314和315可以被设置成跳过(例如,图片314和315在较高等级图片316之前并且在另一较高等级图片313之后)。注意到,如果图片315是跳过图片,则由于图片314具有与图片315相同的等级并且图片313是较高等级图片,可以不提供对图片314和313的更改。
返回图1,在一些示例中,系统100可以通过时间可缩放性来执行编解码。在此类示例中,经由基于GOP结构的跳过确定模块104确定跳过或非跳过信号126(例如,包括针对当前图片的编解码跳过指示符)可以包括确定当前图片是低等级时间可缩放性图片、确定所述图片群组的较高等级时间可缩放性图片是跳过图片、以所述图片群组的显示顺序确定所述当前图片在所述较高等级时间可缩放性图片之前并且在第二较高等级时间可缩放性图片之后、以及基于包括跳过图片的较高等级时间可缩放性图片将编解码跳过指示符设置成跳过。
图4示出了根据本公开的至少一些实现布置的具有时间可缩放性的示例图片群组400。如图4中所示的,图片群组400可以包括图片410-418。在所示的示例中,图片群组400可以是8个图片的群组(例如,GOP = 8;不计数I-图片410),其中图片410、412、414、416和418具有高或较高或增强时间可缩放性(例如较低QP值和较高位分配)且图片411、413、415和417具有低或较低等级或降低的时间可缩放性。例如,图片410、412、414、416和418可以相对于图片411、413、415和417具有高时间可缩放性等级的图片类型420(例如,标记的T0)以及图片411、413、415和417可以相对于图片410、412、414、416和418具有低时间可缩放性等级的图片类型420(例如,标记的T1)。例如,图片411、413、415和417可以是具有较高QP值和较低位分配的低或较低等级或降低的时间可缩放性图片。图片群组400可具有任何数量的时间可缩放性等级,例如如所示的三个等级(例如,其中图片410具有最高等级、图片412、414、416和418具有高或中等等级以及图片411、413、 415和417具有低或最低等级),两个等级、四个等级等等。尽管为了呈现的清楚性而通过特定细节示出,图片群组200可以包括以适当顺序的任何适当的图片群组类型。可以在编解码等等期间经由系统100预定义或确定跨图片群组400的此类等级和分布。
如所讨论的,在具有时间可缩放性编解码上下文中,确定针对当前图片的跳过或非跳过信号126(例如,包括针对当前图片的编解码跳过指示符)可以包括确定当前图片是低等级时间可缩放性图片,以及确定图片群组的较高等级时间可缩放性图片是跳过图片。例如,相对于图4,如果当前图片是图片413,则基于图片类型和GOP结构的跳过确定模块104可以确定图片413是低时间可缩放性图片并且图片412是跳过图片(例如,图片412可以是相对于图片413的较高等级时间可缩放性图片)。此外,基于图片类型和GOP结构的跳过确定模块104可以确定图片413以显示顺序在图片412之后。基于图片412是跳过图片并且图片413在图片412之后,可以针对图片413将编解码跳过指示符设置成跳过。
返回图1,在一些示例中,系统100可以通过隔行扫描视频执行编解码。例如,隔行扫描编解码或隔行扫描视频可以通过隔行扫描在不同时间捕获的图片的两个场来提供增加视频的感觉的帧速率。例如,隔行扫描编解码可以包括编解码两个图片或者两个场,其在组合时构成单个图片。例如,可以在隔行扫描视频上下文中提供此类编解码。在此类示例中,视频121的当前图片可以是隔行扫描编码图片的隔行扫描场(例如,具有完全图片的一半分辨率)(例如,具有完全分辨率,使得隔行扫描编码图片由两个隔行扫描图片或场组成)。在一些示例中,此类图片可以被表征为场或隔行扫描场等等。在此类示例中,如果当前图片是隔行扫描图片,则如果另一个隔行扫描图片是跳过图片,则可以将当前图片设置成跳过图片。例如,基于GOP结构的跳过确定模块104可以基于另一个隔行扫描图片是跳过图片或场针对当前隔行扫描图片将编解码跳过指示符设置成跳过。例如,跳过隔行扫描图片的一个场而不跳过另一个场可能是不期望的,因为此类编解码可能引起抖动和/或其它伪影。
本文讨论的技术可以提供具有相对高质量的低和/或极低位率编解码,并且没有不期望的伪影,例如抖动伪影等等。此外,此类技术可以以单次实现,并且可以因此适合用于硬件实现。所描述的技术可以生成编码的位流,例如通过图片等级跳过判定以及对于那些是非跳过的图片,通过图片编码数据(诸如图片编码数据124)编码的位流125。
图5示出根据本发明的至少一些实现布置的示例位流500。在一些示例中,位流500可以对应于如图1中所示的位流125。如图5中所示的,在一些示例中,位流500可以包括头部分501和数据部分502。在一些示例中,包括指示是否执行视频的特定图片的编解码(例如,解码)的指示符或标志或位等等的图片等级跳过指示符可以经由位流500来提供。例如,可以经由位流500来提供针对视频的特定图片的跳过指示符123。此外,数据部分502可以包括针对编码图片的编码的图片数据521。例如,编码的图片数据521可以包括图片编码数据124等等。此类编码的图片数据521可以包括例如编码的量化变换系数、编码的运动矢量数据、编码的图片重建数据等等。
图6是示出根据本公开的至少一些实现布置的具有图片等级跳过编解码的视频编解码的示例过程600的流程图。过程600可以包括如图6中所示的一个或多个操作601-603。过程600可以形成视频编解码过程的至少一部分。作为非限制性示例,过程600可以形成视频编解码过程的至少一部分,如由如本文讨论的任何装置或系统(诸如系统100)执行的。此外,过程600将在本文中参考图7的系统700进行描述。
图7是根据本公开的至少一些实现布置的用于具有图片等级跳过编解码的视频编解码的示例系统700的说明图。如图7中所示的,系统700可以包括中央处理器701、图形处理器702和存储器703。还如所示的,图形处理器702可以包括速率控制模块101、图片等级跳过确定模块102、图片编码模块107和熵编码器108。在系统700的示例中,存储器703可以存储视频数据或相关内容(诸如视频、视频数据、图片数据、帧数据、群组或图片数据、图片类型数据、可用编解码位限制、估计的编解码位成本、增加的估计的编解码位成本、图片等级跳过数据、跳过指示符、跳过或非跳过信号数据、图片编码数据、位流数据、控制数据和/或如本文讨论的任何其它数据。
如所示的,在一些示例中,速率控制模块101、图片等级跳过确定模块102、图片编码模块107和熵编码器108可以经由图形处理器702来实现。在其它示例中,速率控制模块101、图片等级跳过确定模块102、图片编码模块107和熵编码器108的一个或多个或部分可以经由中央处理器701或另一处理单元(诸如图像处理器、图像处理流水线等等)来实现。
图形处理器702可以包括可以提供如本文所讨论的操作的任何数量和类型的图形处理单元。此类操作可以经由软件或硬件或其组合来实现。例如,图形处理器702可以包括专用于操纵从存储器703获得的图片、图片数据等等的电路。中央处理器701可以包括可以为系统700提供控制和其它高等级功能和/或提供如本文讨论的任何操作的任何数量和类型的处理单元或模块。存储器703可以是诸如易失性存储器(例如,静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)等)或非易失性存储器(例如,闪存等)等等的任何类型的存储器。在非限制性示例中,存储器703可以由高速缓存存储器来实现。
在实施例中,速率控制模块101、图片等级跳过确定模块102、图片编码模块107和熵编码器108中的一个或多个或部分可以经由图形处理器702的执行单元(EU)来实现。EU可以包括例如,可编程逻辑或电路(诸如可提供宽的可编程逻辑功能阵列的一个或多个逻辑核)。在实施例中,速率控制模块101、图片等级跳过确定模块102、图片编码模块107和熵编码器108中的一个或多个或部分可以经由诸如固定功能电路等等的专用硬件来实现。固定功能电路可以包括专用逻辑或电路,并且可以提供固定功能入口点集合,其可以映射到专用逻辑用于固定目的或功能。
返回图6的讨论,过程600可以开始于操作601,“针对图片群组的单独图片确定可用编解码位限和估计的编解码位成本”,其中对于图片群组的单独图片,可用编解码位限制和估计的编解码位成本可以被确定。例如,如经由图形处理器702实现的速率控制模块101可确定单独图片的可用编解码位限制及估计的编解码位成本。可用编解码位限制可以使用任何适合的一种或多种技术来确定。在一些示例中,可用编解码位限制可以是与紧接在前编码图片关联的假设参考解码器缓冲器充满度和图片群组的每个图片的平均目标速率的和。此外,估计的编解码位成本可以使用任何适合的一种或多种技术来确定。在一些示例中,所估计的编解码位成本可以是在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前图片关联的量化参数与最大的量化参数的比率的乘积。例如,单独图片和在前的图片可以是相同的图片类型。
在操作602,处理可以继续, “当估计的编解码位成本大于可用编解码位限制时将编解码跳过指示符设置成跳过”,其中当估计的编解码位成本大于可用编解码位限制时,可以针对单独图片将编解码跳过指示符设置成跳过。例如,图片等级跳过确定模块102可以基于估计的编解码位成本大于可用编解码位限制来针对单独图片将编解码跳过指示符设置成跳过。
在操作603,处理可以继续,“当估计的编解码位成本不大于可用编解码位限制时,基于单独图片的图片类型和图片群组的图片结构来将编解码跳过指示符确定为跳过或非跳过”,其中,当估计的编解码位成本不大于可用编解码位限制时,可以基于单独图片的图片类型和图片群组的图片结构将编解码跳过指示符确定为跳过或非跳过。例如,图片等级跳过确定模块102可以基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符是跳过或非跳过。编解码跳过指示符可以使用任何适当的一种或多种技术基于单独图片的图片类型和图片结构来确定。
在一些示例中,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符可以包括:以图片群组的编码顺序确定在单独图片的紧接在前编码图片是相等或较高等级图片中的至少一个,并且紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片来将编解码跳过指示符设置成跳过。在一些示例中,视频编解码可以是基于高级视频编解码(AVC)的视频编解码且单独图片可以是B-图片。在一些实例中,视频编解码可以是基于高效率视频编解码(HEVC)的视频编解码,且单独图片可以是低等级B-图片。
在一些示例中,单独图片可以是以图片群组的编码顺序的第一B-图片,并且基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符可以包括以所述图片群组的所述编码顺序确定在单独图片的紧接在前较高等级图片包括非跳过图片,增加估计的编解码位成本以生成增加的估计的编解码位成本,以及在增加的估计的编解码位成本大于可用编解码位限制时将所述编解码跳过指示符设置成跳过。
在一些示例中,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符可以包括:确定图片群组的较高等级图片包括跳过图片;以图片群组的显示顺序确定单独图片在较高等级图片之前并且在第二较高等级图片之后,以及基于包括跳过图片的较高等级图片来将所述编解码跳过指示符设置成跳过。例如,视频编解码可以是基于高级视频编解码(AVC)的视频编解码或基于高效率视频编解码(HEVC)的视频编解码,并且单独图片可以是B-图片。
在一些示例中,视频编解码可以包括时间可缩放性,单独图片可以是低等级时间可缩放性图片,并且基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符可以包括确定图片群组的较高等级时间可缩放性图片是跳过图片;以所述图片群组的显示顺序确定单独图片在较高等级时间可缩放性图片之前且在第二较高等级时间可缩放性图片之后以及基于包括跳过图片的较高等级时间可缩放性图片将编解码跳过指示符设置成跳过。
在一些示例中,单独图片可以是隔行扫描编码图片的隔行扫描场,隔行扫描编码图片的第二隔行扫描场可以是跳过场,并且基于单独图片的图片类型和图片群组的图片结构确定编解码跳过指示符可以包括基于包括跳过场的第二隔行扫描场将编解码跳过指示符设置成跳过。
对于任何数量的图片或者图片群组等等,过程600可以串行或者并行地重复任何次数。如所讨论的,过程600可以提供具有图片等级跳过编解码的视频编码。例如,所讨论的用于视频编解码的技术可提供具有相对高质量和低等级伪影(例如抖动伪影)的在计算上有效的低功率视频编解码。
本文描述的系统的各种组件可以以软件、固件和/或硬件和/或其任何组合来实现。例如,系统100、系统700、系统800或装置900的各种组件可以至少部分地由计算片上系统(SoC)的硬件来提供,诸如可以在计算系统(例如诸如智能手机)中找到。本领域技术人员可以认识到,本文描述的系统可以包括在对应的附图中没有描绘的附加部件。例如,本文讨论的系统可以包括,为了清楚性而没有描绘的附加组件,例如位流复用器或解复用器模块等等。
尽管本文讨论的示例过程的实现可以包括以所示顺序示出的所有操作的实行(undertake),但是本公开在这方面不受限制,并且在各种示例中,本文的示例过程的实现可以仅包括示出的操作的子集、以与所示不同的顺序执行的操作或附加操作。
此外,可以响应于由一个或多个计算机程序产品提供的指令来实行本文讨论的任何一个或多个操作。此类程序产品可以包括提供指令的信号承载媒体,所述指令在由例如处理器执行时可以提供本文描述的功能性。计算机程序产品可以以一种或多种机器可读媒体的任何形式提供。因此,例如,包括一个或多个图形处理单元或一个或多个处理器核的处理器可以响应于由一个或多个机器可读媒体输送到处理器的程序代码和/或指令或指令集来实行本文的示例过程的一个或多个块。通常,机器可读介质可以以程序代码和/或指令或指令集的形式输送软件,这些程序代码和/或指令或指令集可以使本文描述的任何装置和/或系统实现过程600或本文讨论的任何操作的至少一部分和/或系统100、系统800、装置900或如本文讨论的任何其它模块或组件的任何部分。
如在本文描述的任何实现中所使用的,术语“模块”指配置成提供本文描述的功能的软件逻辑、固件逻辑、硬件逻辑和/或电路的任何组合。软件可以体现为软件包、代码和/或指令集或指令,并且如本文描述的任何实现中所使用的“硬件”可以例如单个或以任何组合包括硬连线电路、可编程电路、状态机电路、固定功能电路、执行单元电路和/或存储由可编程电路执行的指令的固件。模块可以共同地或单独地体现为形成较大系统的一部分的电路,例如集成电路(IC)、片上系统(SoC)等等。
图8是根据本公开的至少一些实现布置的示例系统800的说明图。在各种实现中,系统800可以是移动系统,尽管系统800不限于此上下文。例如,系统800可以结合到个人计算机(PC)、膝上型计算机、超极膝上型计算机、平板电脑、触摸板、便携式计算机、手持式计算机、掌上型计算机、个人数字助理(PDA)、蜂窝电话、组合蜂窝电话/ PDA、电视、智能装置(例如智能手机、智能平板电脑或智能电视)、移动互联网装置(MID)、消息传送装置、数据通信装置、照相机(例如傻瓜相机、超级变焦相机、数字单反(DSLR)相机)等等中。
在各种实现中,系统800包括耦合到显示器820的平台802。平台802可以从诸如一个或多个内容服务装置830或一个或多个内容递送装置840或其它类似内容源的内容装置接收内容。包括一个或多个导航特征的导航控制器850可以用于与例如平台802和/或显示器820交互。下面更详细地描述这些组件中的每个。
在各种实现中,平台802可以包括芯片组805、处理器810、存储器812、天线813、存储装置814、图形子系统815、应用816和/或无线电818的任何组合。芯片组805可以提供处理器810、存储器812 、存储装置814、图形子系统815应用816和/或无线电818之间的互通信。例如,芯片组805可以包括能够提供与存储器814的互通信的存储装置适配器(未示出)。
处理器810可以实现为复杂指令集计算机(CISC)或精简指令集计算机(RISC)处理器、x86指令集兼容处理器、多核或任何其它微处理器或中央处理单元(CPU)。在各种实现中,处理器810可以是一个或多个双核处理器、一个或多个双核移动处理器等等。
存储器812可以被实现为诸如但不限于随机存取存储器(RAM)、动态随机存取存储器(DRAM)或静态RAM(SRAM)的易失性存储器装置。
存储装置814可以被实现为非易失性存储装置,诸如但不限于磁盘驱动、光盘驱动、磁带驱动、内部存储装置、附连存储装置、闪存、电池备份SDRAM (同步DRAM)和/或网络可访问存储装置。在各种实现中,例如,存储装置814可以包括用以在包括多个硬驱动时增加对有价值的数字媒体的存储性能增强保护的技术。
图形子系统815可以执行诸如静止或用于显示的视频的图像的处理。图形子系统815例如可以是图形处理单元(GPU)或可视处理单元(VPU)。模拟或数字接口可以用于通信地耦合图形子系统815和显示器820。例如,该接口可以是高清晰度多媒体接口、显示器接口、无线HDMI和/或无线HD兼容技术的任何一种。图形子系统815可以被集成到处理器810或芯片组805中。在一些实现中,图形子系统815可以是通信地耦合到芯片组805的独立装置。
本文描述的图形和/或视频处理技术可以以各种硬件架构来实现。例如,图形和/或视频功能性可以集成在芯片组内。备选地,可以使用分立图形和/或视频处理器。作为又一实现,图形和/或视频功能可以由通用处理器(包括多核处理器)来提供。在进一步的实施例中,功能可以在消费电子装置中实现。
无线电818可以包括能够使用各种适合的无线通信技术来传送和接收信号的一个或多个无线电。此类技术可能涉及跨一个或多个无线网络的通信。示例无线网络包括(但不限于)无线局域网(WLAN)、无线个域网(WPAN)、无线城域网(WMAN)、蜂窝网络和卫星网络。在跨此类网络的通信中,无线电818可以根据任何版本中的一个或多个可适用标准进行操作。
在各种实现中,显示器820可以包括任何电视类型监视器或显示器。显示器820可以包括例如计算机显示器屏幕、触摸屏显示器、视频监视器、类电视装置和/或电视。显示器820可以是数字和/或模拟的。在各种实现中,显示器820可以是全息显示器。而且,显示器820可以是可以接收视觉投影的透明表面。此类投影可以输送各种形式的信息、图像和/或对象。例如,此类投影可以是移动增强现实(MAR)应用的视觉覆盖。在一个或多个软件应用816的控制下,平台802可以在显示器820上显示用户界面822。
在各种实现中,例如,一个或多个内容服务装置830可以由任何国家、国际和/或独立的服务托管,并且因此经由互联网可访问平台802。一个或多个内容服务装置830可以耦合到平台802和/或显示器820。平台802和/或一个或多个内容服务装置830可以耦合到网络860以将媒体信息传递(例如,发送和/或接收)到网络860和从网络860传递(例如,发送和/或接收)媒体信息。一个或多个内容递送装置840还可以耦合到平台802和/或显示器820。
在各种实现中,一个或多个内容服务装置830可以包括能够递送数字信息和/或内容的有线电视盒、个人计算机、网络、电话、互联网使能装置或装备,以及能够经由网络860或直接地在内容提供商与平台802和/显示器820之间单向或双向传递内容的任何其它类似装置。将意识到,内容可以经由网络860单向和/或双向地传递到内容提供商和系统800中的组件中的任何一个以及从内容提供商和系统800中的组件中的任何一个单向和/或双向地传递。内容的示例可以包括任何媒体信息,例如包括,视频、音乐、医疗和游戏信息等等。
一个或多个内容服务装置830可以接收诸如包括媒体信息、数字信息和/或其它内容的有线电视节目的内容。内容提供商的示例可以包括任何有线或卫星电视或无线电或互联网内容提供商。提供的示例并不意味着以任何方式限制根据本公开的实现。
在各种实现中,平台802可以从具有一个或多个导航特征的导航控制器850接收控制信号。例如,导航特征可以被用来与用户界面822交互。在各种实施例中,导航可以是定点装置,其可以是允许用户将空间(例如连续和多维)数据输入到计算机中的计算机硬件组件(具体地,人类接口装置)。诸如图形用户界面(GUI)以及电视和监视器的许多系统允许用户使用物理手势来控制和向计算机或电视提供数据。
导航特征的移动可以通过显示器上显示的指针、光标、聚焦环或其它视觉指示符的移动而在显示器(例如,显示器820)上复制。例如,在软件应用816的控制下,位于导航上的导航特征可以被映射到例如在用户界面822上显示的虚拟导航特征。在各种实施例中,可以不是独立组件,但是可以被集成到平台802和/或显示器820中。然而,本公开不限于本文示出或描述的元件或上下文中。
在各种实现中,驱动器(未示出)可以包括例如使用户能够在使能时在初始引导之后通过触摸按钮来立即打开和关闭平台802(像电视)的技术。即使当平台被“关闭”时,程序逻辑也可以允许平台802将内容流传输到媒体适配器或一个或多个其它内容服务装置830或一个或多个内容递送装置840。此外,例如,芯片组805可以包括用于5.1环绕声音频和/或高清晰度7.1环绕声音频的硬件和/或软件支持。驱动器可以包括用于集成图形平台的图形驱动器。在各种实施例中,图形驱动器可以包括外围组件互连(PCI)Express图形卡。
在各种实现中,系统800中所示的任何一个或多个组件可以被集成。例如,平台802和一个或多个内容服务装置830可以被集成,或者平台802和一个或多个内容递送装置840可以被集成,或者例如平台802、一个或多个内容服务装置830和一个或多个内容递送装置840可以被集成。在各种实施例中,平台802和显示器820可以是集成单元。例如显示器820和一个或多个内容服务装置830可以被集成,或者显示器820和一个或多个内容递送装置840可以被集成。这些示例并不意味着限制本公开。
在各种实施例中,系统800可以被实现为无线系统、有线系统或两者的组合。当被实现为无线系统时,系统800可以包括适合用于通过诸如一个或多个天线、传送器、接收机、收发机、放大器、滤波器、控制逻辑等等的无线共享媒体进行通信的组件和接口。无线共享媒体的示例可以包括无线频谱的部分,诸如RF频谱等等。当被实现为有线系统时,系统800可以包括适合用于通过有线通信媒体进行通信的组件和接口,诸如输入/输出(I/O)适配器、将I/O适配器与对应的有线通信介质连接的物理连接器、网络接口卡(NIC)、磁盘控制器、视频控制器、音频控制器等等。有线通信媒体的示例可以包括导线、电缆、金属引线、印刷电路板(PCB)、背板、交换组构、半导体材料、双绞线、同轴电缆、光纤等等。
平台802可以建立一个或多个逻辑或物理通道来传递信息。该信息可以包括媒体信息和控制信息。媒体信息可以指表示意图用于用户的内容的任何数据。内容的示例可以包括例如来自语音对话、视频会议、流传输视频、电子邮件(“电子邮件”)消息、语音邮件消息、字母数字符号、图形、图像、视频、文本等等的数据。来自语音对话的数据可以是例如讲话信息、静音时段、背景噪声、舒适噪声、音调等等。控制信息可以指表示意图用于自动化系统的命令、指令或控制字的任何数据。例如,控制信息可以用于通过系统路由媒体信息,或指令节点以预定方式处理媒体信息。然而,实施例不限于图8中所示或所描述的元件或上下文中。
如上所述,系统800可以以变化的物理风格或形式因素体现。图9示出了根据本公开的至少一些实现布置的示例小的形式因素装置900。在一些示例中,系统1000可以经由装置900来实现。在其它示例中,系统100或其部分可以经由装置900来实现。在各种实施例中,例如,装置900可以被实现为具有无线能力的移动计算装置。移动计算装置可以指例如具有处理系统和移动功率源或供应(诸如一个或多个电池)的任何装置。
移动计算装置的示例可以包括个人计算机(PC)、膝上型计算机、超极膝上型计算机、平板电脑、触摸板、便携式计算机手持式计算机、掌上型计算机、个人数字助理(PDA)、蜂窝电话、组合蜂窝电话/ PDA、智能装置(例如,智能手机、智能平板电脑或智能移动电视)、移动互联网装置(MID)、消息传送装置、数据通信装置、照相机等等。
移动计算装置的示例还可以包括被布置成由人穿戴的计算机,诸如手腕计算机、手指计算机、环形计算机、眼镜计算机、带夹计算机、臂带计算机、鞋计算机、服装计算机和其它可穿戴计算机。在各种实施例中,例如,移动计算装置可以被实现为能够执行计算机应用以及语音通信和/或数据通信的智能电话。尽管作为示例,一些实施例可以通过实现为智能电话的移动计算装置来描述,但是可以意识到,其它实施例也可以使用其它无线移动计算装置来实现。本实施例不限于此上下文中。
如图9中所示的,装置900可以包括具有前部901和后部902的外壳。装置900包括显示器904、输入/输出(I/O)装置906以及集成天线908。装置900还可以包括导航特征912。I/O装置906可以包括用于使信息进入到移动计算装置中的任何适合的I/O装置。I/O装置906的示例可以包括字母数字键盘、数字小键盘、触摸板、输入键、按钮、开关、麦克风、扬声器、语音辨别装置和软件等等。信息也可以通过麦克风(未示出)进入到装置900中,或者可以通过语音辨别装置数字化。如所示的,装置900可以包括集成到装置900的后部902(或别处)的照相机905(例如,包括镜头、光圈和成像传感器)和闪光灯910。在其它示例中,照相机905和闪光灯910可以被集成到装置900的前部901中,或者可以提供前部和后部照相机。照相机905和闪光灯910可以是照相机模块的组件,以始发处理成流传输视频的图片数据,该流传输视频被输出到显示器904和/或例如经由天线908远程地从装置900传递。
各种实施例可以使用硬件元件、软件元件或两者的组合来实现。硬件元件的示例可以包括处理器、微处理器、电路、电路元件(例如晶体管、电阻器、电容器、电感器等等)、集成电路、专用集成电路(ASIC)、可编程逻辑装置(PLD)、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、逻辑门、寄存器、半导体装置、芯片、微芯片、芯片组等等。软件示例可以包括软件组件、程序、应用、计算机程序、应用程序、系统程序、机器程序、操作系统软件、中间件、固件、软件模块、例程、子例程、功能、方法、过程、软件接口、应用程序接口(API)、指令集、计算代码、计算机代码、代码段、计算机代码段、字、值、符号或其任何组合。确定是否使用硬件元件和/或软件元件来实现实施例可以根据任何数量的因素而变化,诸如期望的计算速率、功率等级、耐热性、处理循环预算、输入数据速率、输出数据速率、存储器资源、数据总线速度和其它设计或性能限制。
至少一个实施例的一个或多个方面可以通过存储在机器可读介质上的表示性指令来实现,所述机器可读介质表示处理器内的各种逻辑,所述逻辑在由机器读时使机器制造逻辑以执行本文描述的技术。被称为IP核的此类表示可以被存储在有形的机器可读介质上,并被供应给各种客户或制造设施,以加载到实际制作逻辑或处理器的制造机器中。
尽管已经参考各种实现描述了本文阐述的某些特征,但是此描述不意在以限制性意义解释。因此,本文所描述的实现的各种修改以及对于本公开所属领域的技术人员来说显而易见的其它实现被认为位于本公开的精神和范围之内。
以下实施例涉及进一步实施例。
在一个或多个第一实施例中,用于视频编解码的计算机实现的方法包括针对图片群组的单独图片确定可用的编解码位限制和估计的编解码位成本,当所估计的编解码位成本大于可用编解码位限制时针对单独图片将编解码跳过指示符设置成跳过,以及当所估计的编解码位成本不大于可用编解码位限制时,基于单独图片的图片类型和图片群组的图片结构将编解码跳过指示符确定为跳过或非跳过。
进一步对于第一实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级的图片中的至少一个,并且所述紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧地在前编码图片来将编解码跳过指示符设置成跳过。
进一步对于第一实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级的图片中的至少一个,并且所述紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片来将所述编解码跳过指示符设置成跳过,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码,并且单独图片包括B-图片。
进一步对于第一实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个,并且所述紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片来将所述编解码跳过指示符设置成跳过,其中所述视频编解码包括基于高效率视频编解码(HEVC)的视频编解码,并且单独图片包括低等级B-图片。
进一步对于第一实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级的图片中的至少一个,并且所述紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片来将所述编解码跳过指示符设置成跳过,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码,并且单独图片包括B-图片或者视频编解码包括基于高效率视频编解码(HEVC)的视频编解码,并且单独图片包括低等级B-图片。
进一步对于第一实施例,单独图片以图片群组的编码顺序包括第一B-图片并且基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:以所述图片群组的所述编码顺序确定在单独图片的紧接在前较高等级图片包括非跳过图片;增加所述估计的编解码位成本以生成增加的估计的编解码位成本;以及在增加的估计的编解码位成本大于可用编解码位限制时将所述编解码跳过指示符设置成跳过。
进一步对于第一实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:确定图片群组的较高等级图片包括跳过图片;以图片群组的显示顺序确定所述单独图片在所述较高等级图片之前并且在第二较高等级图片之后,以及基于包括跳过图片的所述较高等级图片来将所述编解码跳过指示符设置成跳过。
进一步对于第一实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:确定图片群组的较高等级图片包括跳过图片;以图片群组的显示顺序确定所述单独图片在所述较高等级图片之前并且在第二较高等级图片之后,以及基于包括跳过图片的所述较高等级图片将所述编解码跳过指示符设置成跳过,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码中的至少一个或者包括基于高效率视频编解码(HEVC)的视频编解码,并且单独图片包括B-图片。
进一步对于第一实施例,视频编解码包括时间可缩放性,单独图片包括低等级时间可缩放性图片,并且基于单独图片的图片类型和图片群组的图片结构确定编解码跳过指示符包括:确定所述图片群组的较高等级时间可缩放性图片是跳过图片;以所述图片群组的显示顺序确定所述单独图片在所述较高等级时间可缩放性图片之前且在第二较高等级时间可缩放性图片之后,以及基于包括跳过图片的较高等级时间可缩放性图片将编解码跳过指示符设置成跳过。
进一步对于第一实施例,单独图片包括隔行扫描编码图片的隔行扫描场,隔行扫描编码图片的第二隔行扫描场包括跳过场,以及基于单独图片的图片类型和所述图片群组的图片结构确定编解码跳过指示符包括基于包括跳过场的所述第二隔行扫描场将所述编解码跳过指示符设置成跳过。
进一步对于第一实施例,可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度和图片群组的每个图片的平均目标速率的和。
进一步对于第一实施例,所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前的图片关联的量化参数与最大量化参数的比率的乘积。
进一步对于第一实施例,所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与所述在前图片关联的量化参数与最大量化参数的比率的乘积,其中所述单独图片和所述在前图片包括相同的图片类型。
进一步对于第一实施例,可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度与图片群组的每个图片的平均目标速率的和,和/或所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前图片关联的量化参数与最大量化参数的比率的乘积。
在一个或多个第二实施例中,用于视频编码的系统包括用以存储图片群组的存储器以及耦合到存储器的图形处理器,图形处理器针对图片群组的单独图片确定可用编解码位限制和估计的编解码位成本,当估计的编解码位成本大于可用编解码位限制时,针对单独图片将编解码跳过指示符设置成跳过,并且当估计的编解码位成本不大于可用编解码位限制时基于单独图片的图片类型和图片群组的图片结构将编解码跳过指示符确定为跳过或非跳过。
进一步对于第二实施例,图形处理器基于单独图片的图片类型和图片群组的图片结构确定编解码跳过指示符包括图形处理器以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个,并且紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片将编解码跳过指示符设置成跳过。
进一步对于第二实施例,图形处理器基于单独图片的图片类型和图片群组的图片结构确定编解码跳过指示符包括图形处理器以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级的图片中的至少一个,并且紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片将编解码跳过指示符设置成跳过,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码,并且所述单独图片包括B-图片。
进一步对于第二实施例,图形处理器基于单独图片的图片类型和图片群组的图片结构确定编解码跳过指示符包括图形处理器以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个,并且紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片将编解码跳过图片设置成跳过,其中所述视频编解码包括基于高效率视频编解码(HEVC)的视频编解码,并且所述单独图片包括低等级B-图片。
进一步对于第二实施例,单独图片以图片群组的编码顺序包括第一B-图片并且图形处理器基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括图形处理器以图片群组的编码顺序确定在单独图片的紧接在前较高等级图片包括非跳过图片,增加估计的编解码位成本以生成增加的估计的编解码位成本,以及当增加的估计的编解码位成本大于可用编解码位限制时,将编解码跳过指示符设置成跳过。
进一步对于第二实施例,图形处理器基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括图形处理器确定图片群组的较高等级图片包括跳过图片,以所述图片群组的显示顺序确定所述单独图片在所述较高等级图片之前并且在第二较高等级图片之后,以及基于包括跳过图片的所述较高等级图片将所述编解码跳过指示符设置成跳过。
进一步对于第二实施例,图形处理器基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括图形处理器确定图片群组的较高等级图片包括跳过图片,以所述图片群组的显示顺序确定所述单独图片在所述较高等级图片之前并且在第二较高等级图片之后,以及基于包括跳过图片的所述较高等级图片将所述编解码跳过指示符设置成跳过,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码中的至少一个或者包括基于高效率视频编解码(HEVC)的视频编解码且所述单独图片包括B-图片。
进一步对于第二实施例,视频编解码包括时间可缩放性,单独图片包括低等级时间可缩放性图片,并且图形处理器基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括图形处理器确定图片群组的较高等级时间可缩放性图片是跳过图片;以所述图片群组的显示顺序确定单独图片在较高等级时间可缩放性图片之前并且在第二较高等级时间可缩放性图片之后,以及基于包括跳过图片的较高等级时间可缩放性图片将编解码跳过指示符设置成跳过。
进一步对于第二实施例,单独图片包括隔行扫描编码图片的隔行扫描场,隔行扫描编码图片的第二隔行扫描场包括跳过场,并且图形处理器基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括图形处理器基于包括跳过场的第二隔行扫描场将编解码跳过指示符设置成跳过。
进一步对于第二实施例,可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度与图片群组的每个图片的平均目标速率的和。
进一步对于第二实施例,所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前图片关联的量化参数与最大量化参数的比率的乘积。
进一步对于第二实施例,所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前图片关联的量化参数与最大量化参数的比率的乘积,其中所述单独图片和所述在前图片包括相同的图片类型。
进一步对于第二实施例,可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度与图片群组的每个图片的平均目标速率的和,并且所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前图片关联的量化参数与最大量化参数的比率的乘积。
在一个或多个第三实施例中,一种用于视频编解码的系统包括用于针对图片群组的单独图片确定可用编解码位限制及估计的编解码位成本的部件,用于当估计的编解码位成本大于可用的编解码位限制时针对单独图片将编解码跳过指示符设置成跳过的部件,以及用于当估计的编解码位成本不大于可用编解码位限制时,基于单独图片的图片类型和图片群组的图片结构将编解码跳过指示符确定为跳过或非跳过的部件。
进一步对于第三实施例,用于基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符的部件包括用于以图片群组的编码顺序来确定在单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个并且紧接在前编码图片包括跳过图片的部件;以及用于基于包括跳过图片的紧接在前编码图片将编解码跳过指示符设置成跳过的部件。
进一步对于第三实施例,用于基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符的部件包括用于以图片群组的编码顺序来确定在单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个并且紧接在前编码图片包括跳过图片的部件,以及用于基于包括跳过图片的紧接在前编码图片将编解码跳过指示符设置成跳过的部件,其中视频编解码包括基于高级视频编解码(AVC)的视频编解码,并且单独图片包括B-图片。
进一步对于第三实施例,用于基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符的部件包括用于以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个并且紧接在前编码图片包括跳过图片的部件,以及用于基于包括跳过图片的紧接在前编码图片将编解码跳过指示符设置成跳过的部件,其中视频编解码包括基于高效率视频编解码(HEVC)的视频编解码,并且单独图片包括低等级B-图片。
进一步对于第三实施例,单独图片以图片群组的编码顺序包括第一B图片,并且用于基于单独图片的图片类型和图片群组的图片结构确定编解码跳过指示符的部件包括用于以图片群组的编码顺序确定在单独图片的紧接在前较高等级图片包括非跳过图片的部件,用于增加估计的编解码位成本以生成增加的估计编解码位的装置成本的部件,以及用于当增加的估计的编解码位成本大于可用编解码位限制时将编解码跳过指示符设置成跳过的部件。
进一步对于第三实施例,用于基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符的部件包括用于确定图片群组的较高等级图片包括跳过图片的部件,用于以所述图片群组的显示顺序确定所述单独图片在所述较高等级图片之前并且在第二较高等级图片之后的部件以及用于基于包括跳过图片的所述较高等级图片来将所述编解码跳过指示符设置成跳过的部件。
进一步对于第三实施例,用于基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符的部件包括用于确定图片群组的较高等级图片包括跳过图片的部件,用于以所述图片群组的显示顺序确定所述单独图片在所述较高等级图片之前并且在第二较高等级图片之后的部件以及用于基于包括跳过图片的所述较高等级图片来将所述编解码跳过指示符设置成跳过的部件,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码或基于高效率视频编解码(HEVC)的视频编解码中的至少一个且所述单独图片包括B-图片。
进一步对于第三实施例,视频编解码包括时间可缩放性,单独图片包括低等级时间可缩放性图片,以及用于基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符的部件包括用于确定所述图片群组的较高等级时间可缩放性图片是跳过图片的部件,用于以所述图片群组的显示顺序确定所述单独图片在所述较高等级时间可缩放图片之前且在第二较高等级时间可缩放性图片之后的部件,以及用于基于包括跳过图片的较高等级时间可缩放性图片来将所述编解码跳过指示符设置成跳过的部件。
进一步对于第三实施例,单独图片包括隔行扫描编码图片的隔行扫描场,隔行扫描编码图片的第二隔行扫描场包括跳过场,并且用于基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符的部件包括用于基于包括跳过场的第二隔行扫描场来将编解码跳过指示符设置成跳过的部件。
进一步对于第三实施例,可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度与图片群组的每个图片的平均目标速率的和。
进一步对于第三实施例,所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前图片关联的量化参数与最大量化参数的比率的乘积。
进一步对于第三实施例,所估计的编解码位成本包括在前编码图片的实际编解码位成本、单独图片的失真与在前图片的失真的比率以及与在前图片关联的量化参数与最大量化参数的比率的乘积,其中所述单独图片和所述在前图片包括相同的图片类型。
在一个或多个第四实施例中,至少一个机器可读介质包括多个指令,所述指令响应于在计算装置上执行而使所述计算装置通过以下操作来执行视频编解码:针对图片群组的单独图片确定可用编解码位限制和估计的编解码位成本;当估计的编解码位成本大于可用编解码位限制时,针对单独图片将编解码跳过指示符设置成跳过;以及当估计的编解码位成本不大于可用编解码位限制时基于所述单独图片的图片类型和所述图片群组的图片结构将所述编解码跳过指示符确定为跳过或非跳过。
进一步对于第四实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:以图片群组的编码顺序确定在单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个,并且所述紧接在前编码图片包括跳过图片,以及基于包括跳过图片的紧接在前编码图片将所述编解码跳过指示符设置成跳过。
进一步对于第四实施例,单独图片以图片群组的编码顺序包括第一B-图片,并且基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:以所述图片群组的所述编码顺序确定在单独图片的紧接在前较高等级图片包括非跳过图片;增加所述估计的编解码位成本以生成增加的估计的编解码位成本;以及在增加的估计的编解码位成本大于可用编解码位限制时将所述编解码跳过指示符设置成跳过。
进一步对于第四实施例,基于单独图片的图片类型和图片群组的图片结构来确定编解码跳过指示符包括:确定图片群组的较高等级图片包括跳过图片;以图片群组的显示顺序确定单独图片在所述较高等级图片之前并且在第二较高等级图片之后,以及基于包括跳过图片的所述较高等级图片将所述编解码跳过指示符设置成跳过。
进一步对于第四实施例,视频编解码包括时间可缩放性,单独图片包括低等级时间可缩放性图片,并且基于单独图片的图片类型和图片群组的图片结构确定编解码跳过指示符包括确定所述图片群组的较高等级时间可缩放性图片是跳过图片,以所述图片群组的显示顺序确定所述单独图片在所述较高等级时间可缩放性图片之前且在第二较高等级时间可缩放性图片之后,以及基于包括跳过图片的较高等级时间可缩放性图片来将编解码跳过指示符设置成跳过。
进一步对于第四实施例,单独图片包括隔行扫描编码图片的隔行扫描场,隔行扫描编码图片的第二隔行扫描场包括跳过场,并且基于单独图片的图片类型和所述图片群组的图片结构确定编解码跳过指示符包括基于包括跳过场的所述第二隔行扫描场将所述编解码跳过指示符设置成跳过。
在一个或多个第五实施例中,至少一个机器可读介质可以包括多个指令,所述指令响应于在计算装置上执行而使计算装置执行根据上面实施例中的任何一个的方法。
在一个或多个第六实施例中,一种设备可以包括用于执行根据上面实施例中的任何一个的方法的部件。
将认识到,实施例不限于如此描述的实施例,而是可以在不脱离所附权利要求的范围的情况下通过修改和改变来实践。例如,上面实施例可以包括特征的具体组合。然而,上面实施例在这方面不受限制,并且在各种实现中,上面实施例可以包括仅实行此类特征的子集,实行此类特征的不同顺序,实行此类特征的不同组合,和/或实行除了明确列出的那些特征的附加特征。因此,应当参考所附权利要求连同等效物(此类权利要求给予权利到其)的完全范围确定实施例的范围。

Claims (42)

1.一种用于视频编码的系统,包括:
存储图片群组的存储器;以及
耦合到所述存储器的图形处理器,所述图形处理器针对所述图片群组的单独图片确定可用编解码位限制和估计的编解码位成本;当所述估计的编解码位成本大于所述可用编解码位限制时,针对所述单独图片将编解码跳过指示符设置成跳过;以及当所述估计的编解码位成本不大于所述可用编解码位限制时,基于所述单独图片的图片类型和所述图片群组的图片结构,将所述编解码跳过指示符确定为跳过或非跳过。
2.根据权利要求1所述的系统,其中所述图形处理器基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符包括所述图形处理器以所述图片群组的编码顺序确定在所述单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个,并且所述紧接在前编码图片包括跳过图片,以及基于包括跳过图片的所述紧接在前编码图片将所述编解码跳过指示符设置成跳过。
3.根据权利要求2所述的系统,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码,并且所述单独图片包括B-图片。
4.根据权利要求2所述的系统,其中所述视频编解码包括基于高效率视频编解码(HEVC)的视频编解码,并且所述单独图片包括低等级B-图片。
5.根据权利要求1所述的系统,其中所述单独图片以所述图片群组的编码顺序包括第一B-图片并且所述图形处理器基于所述单独图片的所述图片类型和所述图片群组的所述图片结构确定所述编解码跳过指示符包括图形处理器以所述图片群组的所述编码顺序确定在所述单独图片的紧接在前的较高等级图片包括非跳过图片,增加所述估计的编解码位成本以生成增加的估计的编解码位成本,并且当所述增加的估计的编解码位成本大于所述可用编解码位限制时,将所述编解码跳过指示符设置成跳过。
6.根据权利要求1所述的系统,其中所述图形处理器基于所述单独图片的所述图片类型及所述图片群组的所述图片结构来确定所述编解码跳过指示符包括所述图形处理器确定所述图片群组的较高等级图片包括跳过图片,以所述图片群组的显示顺序确定所述单独图片在所述较高级图片之前并且在第二较高级图片之后,并且基于包括跳过图片的所述较高级图片将所述编解码跳过指示符设置成跳过。
7.根据权利要求6所述的系统,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码中的至少一个或者包括基于高效率视频编解码(HEVC)的视频编解码,并且所述单独图片包括B-图片。
8.根据权利要求1所述的系统,其中所述视频编解码包括时间可缩放性,所述单独图片包括低等级时间可缩放性图片,并且所述图形处理器基于所述单独图片的所述图片类型及所述图片群组的所述图片结构来确定所述编解码跳过指示符包括所述处理器确定所述图片群组的较高等级时间可缩放性图片是跳过图片,以所述图片群组的显示顺序确定所述单独图片在所述较高等级时间可缩放性图片之前并且在第二较高等级时间可缩放性图片之后,以及基于包括跳过图片的所述较高等级时间可缩放性图片将所述编解码跳过指示符设置成跳过。
9.根据权利要求1所述的系统,其中所述单独图片包括隔行扫描编码图片的隔行扫描场,所述隔行扫描编码图片的第二隔行扫描场包括跳过场,并且所述图形处理器基于所述单独图片的所述图片类型和所述图片群组的所述图片结构确定所述编解码跳过指示符包括所述图形处理器基于包括跳过场的所述第二隔行扫描场将所述编解码跳过指示符设置成跳过。
10.根据权利要求1所述的系统,其中所述可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度和所述图片群组的每个图片的平均目标速率的和。
11.根据权利要求1所述的系统,其中所述估计的编解码位成本包括在前解码图片的实际编解码位成本、所述单独图片的失真与所述在前图片的失真的比率以及与所述在前图片关联的量化参数与最大量化参数的比率的乘积。
12.根据权利要求11所述的系统,其中所述单独图片和所述在前图片包括相同的图片类型。
13.一种用于视频编解码的计算机实现的方法,包括:
针对图片群组的单独图片,确定可用编解码位限制和估计的编解码位成本;
当所述估计的编解码位成本大于所述可用编解码位限制时,针对所述单独图片将编解码跳过指示符设置成跳过;以及
当所述估计的编解码位成本不大于所述可用编解码位限制时,基于所述单独图片的图片类型和所述图片群组的图片结构,将所述编解码跳过指示符确定为跳过或非跳过。
14.根据权利要求13所述的方法,其中基于所述单独图片的所述图片类型及所述图片群组的所述图片结构而确定所述编解码跳过指示符包括:
以所述图片群组的编码顺序确定在所述单独图片的紧接在前的编码图片包括相等或较高等级图片的至少一个以及所述紧接在前编码图片包括跳过图片;以及
基于包括跳过图片的所述紧接在前编码图片而将编解码跳过指示符设置成跳过。
15.根据权利要求14所述的方法,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码且所述单独图片包括B-图片。
16.根据权利要求14所述的方法,其中所述视频编解码包括基于高效率视频编解码(HEVC)的视频编解码且所述单独图片包括低等级B-图片。
17.根据权利要求13所述的方法,其中所述单独图片以所述图片群组的编码顺序包括第一B-图片,并且基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符包括:
以所述图片群组的所述编码顺序,确定在所述单独图片的紧接在前的较高等级图片包括非跳过图片;
增加所述估计的编解码位成本以生成增加的估计的编解码位成本;以及
当所述增加的估计的编解码位成本大于所述可用编解码位限制时,将所述编解码跳过指示符设置成跳过。
18.根据权利要求13所述的方法,其中基于所述单独图片的所述图片类型及所述图片群组的所述图片结构来确定所述编解码跳过指示符包括:
确定所述图片群组中的较高等级图片包括跳过图片;
以所述图片群组的显示顺序确定所述单独图片在所述较高等级图片之前,并且在第二较高等级图片之后;以及
基于包括跳过图片的所述较高等级图片来将所述编解码跳过指示符设置成跳过。
19.根据权利要求18所述的方法,其中,所述视频编解码包括基于高级视频编解码(AVC)的视频编解码或基于高效率视频编解码(HEVC)的视频编解码中的至少一个,并且所述单独图片包括B-图片。
20.根据权利要求13所述的方法,其中,所述视频编解码包括时间可缩放性,所述单独图片包括低等级时间可缩放性图片,以及基于所述单独图片的图片类型和所述图片群组的图片结构来确定所述编解码跳过指示符包括:
确定所述图片群组的较高等级时间可缩放性图片是跳过图片;
以所述图片群组的显示顺序确定所述单独图片在所述较高等级时间可缩放性图片之前且在第二较高等级时间可缩放性图片之后;以及
基于包括跳过图片的所述较高等级时间可缩放性图片来将所述编解码跳过指示符设置成跳过。
21.根据权利要求13所述的方法,其中,所述单独图片包括隔行扫描编码图片的隔行扫描场,所述隔行扫描编码图片的第二隔行扫描场包括跳过场,以及基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符包括:基于包括跳过场的所述第二隔行扫描场将所述编解码跳过指示符设置成跳过。
22.根据权利要求13所述的方法,其中所述可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度与所述图片群组的每个图片的平均目标速率的和。
23.根据权利要求13所述的方法,其中所述估计的编解码位成本包括在前编码图片的实际编解码位成本、所述单独图片的失真与所述在前图片的失真的比率以及与所述在前图片关联的量化参数与最大量化参数的比率的乘积。
24.根据权利要求23所述的方法,其中所述单独图片和所述在前图片包括相同的图片类型。
25.一种用于视频编解码的系统,包括:
用于针对图片群组的单独图片确定可用编解码位限制和估计的编解码位成本的部件;
用于当所述估计的编解码位成本大于所述可用编解码位限制时,针对所述单独图片将编解码跳过指示符设置成跳过的部件;以及
用于当所述估计的编解码位成本不大于所述可用编解码位限制时,基于所述单独图片的图片类型和所述图片群组的图片结构将所述编解码跳过指示符确定为跳过或非跳过的部件。
26.根据权利要求25所述的系统,其中用于基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符的所述部件包括:
用于以所述图片群组的编码顺序确定在所述单独图片紧接在前的编码图片包括相等或较高等级图片中的至少一个且所述紧接在前编码图片包括跳过图片的部件;以及
用于基于包括跳过图片的紧接在前编码图片来将所述编解码跳过指示符设置成跳过的部件。
27.根据权利要求26所述的系统,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码且所述单独图片包括B-图片。
28.根据权利要求26所述的系统,其中所述视频编解码包括基于高效率视频编解码(HEVC)的视频编解码,且所述单独图片包括低等级B-图片。
29.根据权利要求25所述的系统,其中所述单独图片以所述图片群组的编码顺序包括第一B-图片以及用于基于所述单独图片的所述图片类型和所述图片群组的所述图片结构确定所述编解码跳过指示符的部件包括:
用于以所述图片群组的所述编码顺序确定在所述单独图片的紧接在前的较高等级图片包括非跳过图片的部件;
用于增加所述估计的编解码位成本以生成增加的估计的编解码位成本的部件;以及
用于当所述增加的估计的编解码位成本大于所述可用编解码位限制时将所述编解码跳过指示符设置成跳过的部件。
30.根据权利要求25所述的系统,其中用于基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符的所述部件包括:
用于确定所述图片群组的较高等级图片的装置包括跳过图片的部件;
用于以所述图片群组的显示顺序确定所述单独图片在所述较高等级图片之前且在第二较高等级图片之后的部件;以及
用于基于包括跳过图片的所述较高等级图片来将所述编解码跳过指示符设置成跳过的部件。
31.根据权利要求30所述的系统,其中所述视频编解码包括基于高级视频编解码(AVC)的视频编解码或基于高效率视频编解码(HEVC)的视频编解码中的至少一个且所述单独图片包含B-图片。
32.根据权利要求25所述的系统,其中所述视频编解码包括时间可缩放性,所述单独图片包括低等级时间可缩放性图片,且用于基于所述单独图片的所述图片类型及所述图片群组的所述图片结构确定所述编解码跳过指示符的部件包括:
用于确定所述图片群组的较高等级时间可缩放性图片是跳过图片的部件;
用于以所述图片群组的显示顺序确定所述单独图片在所述较高等级时间可缩放性图片之前且在第二较高等级时间可缩放性图片之后的部件;以及
用于基于包括跳过图片的所述较高等级时间可缩放性图片来将所述编解码跳过指示符设置成跳过的部件。
33.根据权利要求25所述的系统,其中,所述单独图片包括隔行扫描编码图片的隔行扫描场,所述隔行扫描编码图片的第二隔行扫描场包括跳过场,并且用于基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符的所述部件包括用于基于包括跳过场的所述第二隔行扫描场将所述编解码跳过指示符设置成跳过的部件。
34.根据权利要求25所述的系统,其中所述可用编解码位限制包括与紧接在前编码图片关联的假设参考解码器缓冲器充满度与所述图片群组的每个图片的平均目标速率的和。
35.根据权利要求25所述的系统,其中所述估计的编解码位成本包括在前编码图片的实际编解码位成本、所述单独图片的失真与所述在前图片的失真的比率以及与所述在前图片关联的量化参数与最大量化参数的比率的乘积。
36.根据权利要求35所述的系统,其中所述单独图片和所述在前图片包括相同的图片类型。
37.包括多个指令的至少一个机器可读介质,所述指令响应于在计算装置上执行而使所述计算装置通过以下操作来执行视频编解码:
针对图片群组的单独图片来确定可用的编解码位限制和估计的编解码位成本;
当所述估计的编解码位成本大于所述可用编解码位限制时,针对所述单独图片将编解码跳过指示符设置成跳过;以及
当所述估计的编解码位成本不大于所述可用编解码位限制时,基于所述单独图片的图片类型和所述图片群组的图片结构,将所述编解码跳过指示符确定为跳过或非跳过。
38.根据权利要求37所述的机器可读介质,其中基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符包括:
以所述图片群组的编码顺序,确定在所述单独图片的紧接在前编码图片包括相等或较高等级图片中的至少一个,并且所述紧接在前编码图片包括跳过图片;以及
基于包括跳过图片的所述紧接在前编码图片来将所述编解码跳过指示符设置成跳过。
39.根据权利要求37所述的机器可读介质,其中所述单独图片以所述图片群组的编码顺序包括第一B-图片以及基于所述单独图片的所述图片类型和所述图片群组的所述图片结构确定所述编解码跳过指示符包括:
以所述图片群组的所述编码顺序,确定在所述单独图片的紧接在前的较高等级图片包括非跳过图片;
增加所述估计的编解码位成本以生成增加的估计的编解码位成本;以及
当所述增加的估计的编解码位成本大于所述可用编解码位限制时,将所述编解码跳过指示符设置成跳过。
40.根据权利要求37所述的机器可读介质,其中基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符包括:
确定所述图片群组的较高等级图片包括跳过图片;
以所述图片群组的显示顺序,确定所述单独图片在所述较高等级图片之前,并且在第二较高等级图片之后;以及
基于包括跳过图片的所述较高等级图片来将所述编解码跳过指示符设置成跳过。
41.根据权利要求37所述的机器可读介质,其中所述视频编解码包括时间可缩放性,所述单独图片包括低等级时间可缩放性图片,以及基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符包括:
确定所述图片群组的较高等级时间可缩放性图片是跳过图片;
以所述图片群组的显示顺序确定所述单独图片在所述较高等级时间可缩放性图片之前且在第二较高等级时间可缩放性图片之后;以及
基于包括跳过图片的所述较高等级时间可缩放性图片来将所述编解码跳过指示符设置成跳过。
42.根据权利要求37所述的机器可读介质,其中所述单独图片包括隔行扫描编码图片的隔行扫描场,所述隔行扫描编码图片的第二隔行扫描场包括跳过场,并且基于所述单独图片的所述图片类型和所述图片群组的所述图片结构来确定所述编解码跳过指示符包括:基于包括跳过场的所述第二隔行扫描场将所述编解码跳过指示符设置成跳过。
CN201680034312.1A 2015-06-12 2016-05-04 低位率视频编解码 Active CN107743707B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/737795 2015-06-12
US14/737,795 US9942552B2 (en) 2015-06-12 2015-06-12 Low bitrate video coding
PCT/US2016/030755 WO2016200515A1 (en) 2015-06-12 2016-05-04 Low bitrate video coding

Publications (2)

Publication Number Publication Date
CN107743707A true CN107743707A (zh) 2018-02-27
CN107743707B CN107743707B (zh) 2022-01-14

Family

ID=57503554

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680034312.1A Active CN107743707B (zh) 2015-06-12 2016-05-04 低位率视频编解码

Country Status (4)

Country Link
US (1) US9942552B2 (zh)
CN (1) CN107743707B (zh)
DE (1) DE112016002638B4 (zh)
WO (1) WO2016200515A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10873752B2 (en) * 2016-05-11 2020-12-22 Intel Corporation Adaptive camera resolution for compression matching

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1398490A (zh) * 2000-11-09 2003-02-19 皇家菲利浦电子有限公司 可伸缩的mpg-2视频解码器
US20050031032A1 (en) * 2003-08-08 2005-02-10 Lite-On It Corporation Method of buffer management in video encoder
CN101150722A (zh) * 2007-11-13 2008-03-26 同济大学 视频编码中快速的模式确定方法和装置
CN102006471A (zh) * 2009-09-02 2011-04-06 索尼电脑娱乐公司 视频编码的图片级速率控制
CN102165772A (zh) * 2008-09-16 2011-08-24 杜比实验室特许公司 自适应视频编码器控制
US8774272B1 (en) * 2005-07-15 2014-07-08 Geo Semiconductor Inc. Video quality by controlling inter frame encoding according to frame position in GOP
CN104412590A (zh) * 2012-04-30 2015-03-11 晶像股份有限公司 有助于视频流的成本效率和低等待时间编码的机构

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5670993A (en) * 1995-06-07 1997-09-23 Alliance Semiconductor Corporation Display refresh system having reduced memory bandwidth
WO1997039588A1 (en) 1996-04-12 1997-10-23 Sony Corporation Image encoder, image encoding method and medium on which image encoding program is recorded
US20060093320A1 (en) * 2004-10-29 2006-05-04 Hallberg Bryan S Operation modes for a personal video recorder using dynamically generated time stamps
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
KR100790150B1 (ko) 2006-07-28 2008-01-02 삼성전자주식회사 비디오 부호화기 및 비디오 데이터 프레임 부호화 방법
TWI478584B (zh) * 2007-03-08 2015-03-21 Realtek Semiconductor Corp 一種視訊編解碼的方法及其裝置
KR101379537B1 (ko) * 2007-07-19 2014-03-28 삼성전자주식회사 무선망 채널 정보를 이용한 동영상 부호화 제어 방법
KR101431545B1 (ko) * 2008-03-17 2014-08-20 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8599934B2 (en) * 2010-09-08 2013-12-03 Cisco Technology, Inc. System and method for skip coding during video conferencing in a network environment
US9888244B2 (en) 2011-10-05 2018-02-06 Texas Instruments Incorporated Methods and systems for encoding of multimedia pictures
JP6787667B2 (ja) * 2012-09-21 2020-11-18 ノキア テクノロジーズ オサケユイチア ビデオコーディングのための方法と装置
CN104737542B (zh) * 2013-01-30 2018-09-25 英特尔公司 用于下一代视频的内容自适应熵编码
US10542288B2 (en) * 2014-06-18 2020-01-21 Telefonaktiebolaget Lm Ericsson (Publ) Random access in a video bitstream
CN104702968B (zh) 2015-02-17 2019-06-11 华为技术有限公司 一种视频帧丢帧方法及视频发送装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1398490A (zh) * 2000-11-09 2003-02-19 皇家菲利浦电子有限公司 可伸缩的mpg-2视频解码器
US20050031032A1 (en) * 2003-08-08 2005-02-10 Lite-On It Corporation Method of buffer management in video encoder
US8774272B1 (en) * 2005-07-15 2014-07-08 Geo Semiconductor Inc. Video quality by controlling inter frame encoding according to frame position in GOP
CN101150722A (zh) * 2007-11-13 2008-03-26 同济大学 视频编码中快速的模式确定方法和装置
CN102165772A (zh) * 2008-09-16 2011-08-24 杜比实验室特许公司 自适应视频编码器控制
CN102006471A (zh) * 2009-09-02 2011-04-06 索尼电脑娱乐公司 视频编码的图片级速率控制
CN104412590A (zh) * 2012-04-30 2015-03-11 晶像股份有限公司 有助于视频流的成本效率和低等待时间编码的机构

Also Published As

Publication number Publication date
US20160366414A1 (en) 2016-12-15
DE112016002638B4 (de) 2023-10-26
WO2016200515A1 (en) 2016-12-15
CN107743707B (zh) 2022-01-14
DE112016002638T5 (de) 2018-03-01
US9942552B2 (en) 2018-04-10

Similar Documents

Publication Publication Date Title
CN104219524B (zh) 使用感兴趣对象的数据对视频成码的比特率控制
CN106170979B (zh) 一种用于视频编码的计算机实现的方法、系统、机器可读介质及设备
CN112399178A (zh) 视觉质量优化的视频压缩
CN104541505B (zh) 层间内部模式预测方法、设备及装置
CN104885467B (zh) 用于下一代视频编码的内容自适应参数变换
CN104854866B (zh) 下一代视频的内容自适应、特性补偿预测
CN108432253A (zh) 长期参考图片译码
CN110214447A (zh) 用于360视频的解块滤波
US20210067785A1 (en) Video encoding rate control for intra and scene change frames using machine learning
CN109391815A (zh) 用于改进的视频编码的参考帧重投影
CN103581665B (zh) 转码视频数据
CN104782124B (zh) 利用编码器硬件对视频内容进行预处理
CN104053005B (zh) 使用分级相平面相关性和块匹配的运动估计
CN106664437A (zh) 用于无线视频的自适应比特率流传输
JP2022532302A (ja) 3DoF+/MIV及びV-PCCのための没入型ビデオコーディング技術
CN106664412B (zh) 包括目标比特率的视频编码速率控制和质量控制
CN104584552B (zh) Svc中重复使用层间sao参数的方法、设备、系统及机器可读存储介质
CN104937932B (zh) 可适性视频编码的增强参考区域利用
CN104541506A (zh) 层间像素样本预测
CN107005701A (zh) 使用减少数量的角模式来降低帧内预测复杂度及其后续改进
CN111512629A (zh) 低比特率压缩视频流上的计算机视觉的自适应阈值处理
CN109155856A (zh) 用于视频编解码的利用近邻块模式的运动估计的方法和系统
CN104169971A (zh) 使用非线性缩放和自适应源块大小的分层运动估计
CN106664409A (zh) 视频编码中的黄金帧选择
CN108432246A (zh) 用于视频编码的变换单元大小确定

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant