CN114616826A - 基于帧类型的自适应分辨率管理的隐式标识 - Google Patents

基于帧类型的自适应分辨率管理的隐式标识 Download PDF

Info

Publication number
CN114616826A
CN114616826A CN202080068707.XA CN202080068707A CN114616826A CN 114616826 A CN114616826 A CN 114616826A CN 202080068707 A CN202080068707 A CN 202080068707A CN 114616826 A CN114616826 A CN 114616826A
Authority
CN
China
Prior art keywords
current frame
frame
decoder
bitstream
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080068707.XA
Other languages
English (en)
Inventor
H·卡瓦
V·阿季奇
B·富尔赫特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OP Solutions LLC
Original Assignee
OP Solutions LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OP Solutions LLC filed Critical OP Solutions LLC
Priority claimed from PCT/US2020/045220 external-priority patent/WO2021026363A1/en
Publication of CN114616826A publication Critical patent/CN114616826A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Abstract

一种方法包括：接收比特流；使用比特流并针对当前帧确定当前帧是否可用作参考帧；响应于确定当前帧可用作参考帧，设置表征不允许自适应分辨率管理模式的变量；以及重建当前帧的像素数据，其中，自适应分辨率管理模式不被允许。还描述了相关的装置、系统、技术和物品。

Description

基于帧类型的自适应分辨率管理的隐式标识
相关申请的交叉引用
本申请要求于2019年8月6日提交的、标题为"基于帧类型的自适应分辨率管理的隐式标识(IMPLICIT SIGNALING OF ADAPTIVE RESOLUTION MANAGEMENT BASED ON FRAMETYPE)"的美国临时专利申请62/883,484号的优先权，其全部内容通过引用并入本文。
技术领域
本发明大体上涉及视频压缩领域。具体地，本发明涉及基于帧类型的自适应分辨率管理的隐式标识。
背景技术
视频编解码器可以包括对数字视频进行压缩或解压缩的电子电路或软件。其可以将未压缩视频转换为压缩格式，反之亦然。在视频压缩的上下文中，对视频进行压缩(和/或执行其某些功能)的装置备通常可以被称为编码器，对视频进行解压缩(和/或执行其某些功能)的装置可以被称为解码器。
压缩后数据的格式可以符合标准视频压缩规范。压缩可能是有损的，因为压缩后视频可能会缺少原始视频中存在的一些信息。这样的后果可能包括解压缩后视频可能具有比原始的未压缩视频更低的质量，因为没有足够的信息来准确地重建原始视频。
视频质量、用于表示视频的数据量(例如，由比特率决定)、编码算法和解码算法的复杂性、对数据丢失和错误的敏感性、编辑的容易性、随机访问、端对端延迟(例如，延迟时间)等之间可以存在复杂的关系。
运动补偿可以包括通过考虑照相机和/或视频中对象的运动来预测视频帧或者给定参考帧(例如先前帧和/或未来帧)的一部分的方法。方法可以对视频数据进行编码和解码，用于视频压缩，例如使用运动图像专家组(MPEG)的高级视频编码(AVC)标准(也称为H.264)进行编码和解码。
运动补偿可以根据参考图像到当前图像的变换来描述图像。当与当前图像进行比较时，参考图像可以是时间上先前的，和/或，当与当前图像比较时，参考图像可以是来自未来的。
发明内容
一方面，一种解码器包括电路，所述电路被配置成：接收比特流，使用所述比特流并针对当前帧，确定所述当前帧是否可用作参考帧，响应于确定所述当前帧可用作参考帧，设置表征自适应分辨率管理模式不被允许的变量，以及重建所述当前帧的像素数据，其中，所述自适应分辨率管理模式不被允许。
另一方面，一种方法包括：接收比特流，使用所述比特流并针对当前帧，确定所述当前帧是否可用作参考帧，响应于确定所述当前帧可用作参考帧，设置表征自适应分辨率管理模式不被允许的变量，以及重建所述当前帧的像素数据，其中，所述自适应分辨率管理模式不被允许。
在此描述的主题的一种或多种变型的细节在下面的附图和具体实施方式中进行阐述。根据具体实施方式和附图以及权利要求，在此描述的主题的其他特征和优点将显而易见。
附图说明
为了说明本发明，附图示出了本发明的一个或多个实施例的各个方面。然而，应当理解的是，本发明不限于附图中所示的精确布置和手段，在附图中：
图1是说明各种分辨率等级的示例参考帧和示例预测帧的图示；
图2是描绘示例参考帧、示例重缩放后考帧和示例后续块预测过程的图示；
图3是示出了根据当前主题的一些实施方式的示例过程的过程流程图；
图4是示出了根据当前主题的一些实施方式的能够解码比特流的示例解码器的系统框图；
图5是示出了根据当前主题的一些实施方式来对视频进行编码的示例过程的过程流程图；
图6是示出了根据当前主题的一些实施方式的示例视频编码器的系统框图；以及
图7是可以用于实现本文公开的任何一个或多个方法及其任何一个或多个部分的计算系统的框图。
附图不一定是按比例绘制的，并且可以用虚线、示意图和局部视图来说明。在某些情况下，可能已经省略了对于理解实施例而言不必要的细节或者使得其他细节难以理解的细节。在图中，相同的附图标记指代相同的元件。
具体实施方式
在许多当前最先进的编码器中，分辨率是通过重新编码和重新发送被称为图像组(GOP)的整个视频部分来管理的。这需要发送内部帧(I帧)，这可能导致额外的成本，因为这些帧负责GOP中的大部分比特。
本公开描述的实施例涉及自适应分辨率管理(ARM)，其是一种为视频编码器/解码器提供额外灵活性的技术，从而允许在各种使用情况下节省比特率。通常，ARM包括使用分辨率不同于当前帧的参考帧来执行预测。在当前的编码标准中，参考帧具有与预测帧相同的分辨率。在ARM中，参考帧的分辨率可能小于或大于被预测帧的分辨率。这种方法可以用于降低视频分辨率，从而降低比特率，或者提高视频分辨率，从而促进视频回放的显示特性。
出于本公开的目的，ARM可替代地或等效地被称为参考图像重采样(RPR)；RPR和ARM可以互换使用。
当前主题的一些实施方式可以包括在GOP内的任何位置对任何数量的帧使用ARM，从而消除对I帧重新编码的要求。
图1是说明各种分辨率等级的参考帧和预测帧的图示。帧1比参考帧小(分辨率较低)，帧2与参考帧大小相同(分辨率相同)，而帧3比参考帧更大(分辨率较高)。本公开中使用的“分辨率”是在视频回放、压缩等中使用的图像、帧、子帧和/或其他显示区域或其部分中的像素数量，较高的像素数量对应于较高的分辨率，而较少的像素数量对应于较低的分辨率。分辨率可以根据面积来测量，例如但不限于通过使用一个或多个长度维度，以定义面积的像素来测量。例如，圆形子帧或其他区域可以具有根据半径定义的分辨率。可替代地或附加地，分辨率可以由像素的总数来定义。
作为示例，继续参考图1，其中参考帧和/或子帧具有可以完全根据两个长度参数来定义面积的几何形式，例如但不限于三角形、平行四边形和/或矩形形式，参考帧和/或子帧可以具有分辨率W×H，其中W和H可以指示分别描述参考帧和/或子帧的宽度(或底部)和高度尺寸的像素数量。每个预测帧也可以具有分辨率，该分辨率可以类似于参考帧的分辨率来确定；举例来说，帧1可以具有较小的分辨率WS×HS，帧2可以具有与参考帧相同的分辨率W×H，且帧3可具有较大的分辨率WL×HL。较小和较大帧的宽度和高度可以通过将参考宽度和高度乘以任意的重缩放常数(Rc)来获得，该重缩放常数也被称为缩放系数和/或常数。在更小帧的情况下，Rc可以具有0和1之间的值。在更大帧的情况下，Rc可以具有大于1的值；例如，Rc可以具有1到4之间的值。其他值也是可能的。一个分辨率维度的重缩放常数可能不同于另一个分辨率维度；例如，重缩放常数Rch可以用于重缩放高度，而另一个重缩放常数Rcw可以用于重缩放宽度。
仍然参考图1，ARM可以作为一种模式来实现。在解码期间的某个点激活ARM模式的情况下，解码器可能已经接收到分辨率为W×H的参考帧，并且可以使用重缩放常数来重缩放预测帧。在一些实施方式中，编码器可以向解码器标识使用哪个重缩放常数。可以在对应于包含当前图像的GOP的序列参数集(SPS)中和/或对应于当前图像的图像参数集(PPS)中执行该标识。例如，但不限于，编码器可以使用诸如pps_pic_width_in_luma_samples、pps_pic_height_in_luma_samples、pps_scaling_win_left_offset、pps_scaling_win_right_offset，pps_scaling_win_top_offset、pps_scaling_win_bottom_offset和/或sps_num_subpics_minus1之类的字段来标识重缩放后参数。
进一步参考图1，如上所述的W和H参数可以但不限于分别使用变量CurrPicScalWinWidthL和CurrPicScalWinHeightL来表示；这些变量可以使用表示参数和变量之间的一个或多个数学关系从如上所述的标识参数中导出。例如，但不限于，CurrPicScalWinWidthL可以根据以下等式导出：
CurrPicScalWinWidthL＝pps_pic_width_in_luma_samples–
SubWidthC*(pps_scaling_win_right_offset+pps_scaling_win_left_offset)
作为另一个非限制性示例，CurrPicScalWinHeightL可以根据以下等式导出：
CurrPicScalWinWidthL＝pps_pic_width_in_luma_samples–
SubWidthC*(pps_scaling_win_right_offset+pps_scaling_win_left_offset)
本领域一般技术人员在阅读了本公开的全部内容后，将会了解可用于导出上述变量的各种替代计算。编码器可替代地或附加地直接，例如但不限于在PPS和/或SPS中标识一个或多个这样的变量Rc、Rch和/或Rcw。
可替代地或附加地，仍然参考图1，如上所述的重缩放常数和/或一组重缩放常数可以使用对所存储的一个和/或多个缩放常数和/或帧和/或块的索引的引用在比特流中标识，所述帧和/或块是使用先前标识和/或使用的一个和/或多个缩放常数来标识的。对存储的缩放常数的索引的引用可以明确地标识和/或从比特流中标识的一个或多个附加参数中确定。例如但不限于，解码器可以识别包含当前帧的参考帧和/或图像组；在先前已经标识了重缩放常数和/或在这样的图像组中使用了重缩放常数的情况下，被标识的参考帧可应用于当前帧和/或当前图像组等，解码器可以识别该重缩放常数，以便用作当前帧的重缩放常数。
在一些实施方式中，继续参考图1，ARM操作可以在编码帧的块层面上执行。例如，参考帧可以首先被重缩放，随后可以执行预测，如图2所示。图2是描绘参考帧、重缩放考帧和后续块预测过程的图示。可以对缩放后参考帧(具有缩放后分辨率)而不是原始参考帧执行块预测过程。如上所述，重缩放参考帧可以包括根据被编码器标识的任何参数进行重缩放；例如但不限于，在将与当前画面一起使用的参考帧被标识的情况下，例如通过参考与参考帧相关联的索引值等，可以在预测之前，根据上述任何重缩放方法来重缩放被标识的参考帧。经重缩放的参考帧可以存储在存储器和/或缓冲器中，其可以包括但不限于通过索引识别包含在其中的帧的缓冲器，根据该索引可以执行帧检索；缓冲器可以包括解码图片缓冲器(DCB)和/或由解码器实施的一个或多个附加缓冲器。预测过程可以包括，例如包括运动补偿的图片间预测。
基于块的ARM的一些实施方式可以实现对每个块应用最佳滤波器的灵活性，而不是对整个帧应用相同的滤波器。在一些实施方式中，skip-ARM模式是可能的，使得一些块(例如基于像素的均匀性和比特率成本)可以处于skip-ARM模式(使得重缩放不会改变比特率)。Skip-ARM模式可以是在比特流中标识；例如，但不限于，skip-ARM模式可以在PPS参数中标识。可替代地或附加地，解码器可以基于由解码器设置和/或在比特流中标识的一个或多个参数来确定skip-ARM模式是激活的。在基于块的ARM中使用的空间滤波器可以包括但不限于应用双三次插值的双三次空间滤波器、应用双线性插值的双线性空间滤波器、使用Lanczos滤波和/或使用sinc滤波器、sinc函数插值和/或信号重建技术等组合的重采样的Lanczos滤波器；本领域一般技术人员在阅读了本公开的全部内容后将会了解与本公开一致的可用于插值的各种滤波器。作为非限制性示例，内插滤波器可以包括如上所述的任何滤波器，低通滤波器，其可以通过但不限于上采样过程来使用，其中可以将缩放之前的块和/或帧的像素之间的像素初始化为零，然后用低通滤波器的输出来填充。可替代地或附加地，可以使用任何亮度样本内插滤波过程。亮度样本内插可以包括在半样本内插滤波器索引处计算内插值，该内插值落在未缩放样本阵列的两个连续样本值之间。可以通过从查找表中检索系数和/或权重来执行内插值的计算，但不限于此；查找表的选择可以作为编码单元的运动模型和/或缩放比例量的函数来执行，例如使用如上所述的缩放常数来确定。计算可以包括但不限于执行相邻像素值的加权求和，其中权重是从查找表中检索的。可替换地或附加地，计算值可以被移位；例如，但不限于，值可以移位Min(4，位深度-8)、6、Max(2，14-位深度)等。本领域一般技术人员在阅读了本公开的全部内容后，将会了解可用于内插滤波器的各种替代或附加实施方式。
仍然参考图2，自适应分辨率管理可以允许重新缩放帧和/或帧的区域，以提高压缩效率和/或质量。一个关键的挑战是解码器中重缩放方法的可再现性。取决于所使用的重缩放方法，解码器和编码器可能无法再现相同的缩放后的后帧。在这种情况下，使用重缩放后的帧作为参考帧可能导致预测失配和/或导致编码器和解码器漂移。漂移可能作为编码伪像(质量问题)变得可见。为了避免这些漂移问题，可以利用ARM的隐式和显式标识，如本公开中所述。
例如，进一步参考图2，ARM的隐式标识可以基于帧类型。例如，在一些实施方式中，解码器和/或编码器可被配置为使得可以用作参考帧的帧不能使用ARM来编码；换言之，对于可用作参考帧的帧，ARM可能是不允许的。举例来说，如果在图像头中标识的帧类型或分片(slice)类型指示帧可用作参考帧，例如在图像头中标识为I或P类型的帧，那么解码器和/或编码器可以确定无法使用ARM对所述帧进行编码，且所有ARM相关参数可能不存在于所述帧的图像头中。可以在SPS和/或PPS中标识上述参数，但不限于此。例如，SPS可以将表示为sps_res_change_in_clvs_allowed_flag的参数进行标识，该参数在等于1时，可以指示图像的空间分辨率可能改变。分辨率管理的一个方面可表示分辨率可能会在序列中改变。作为另一个非限制性示例，等于1的gci_no_ref_pic_resampling_constraint_flag可以指定OlsInScope中所有图片的sps_ref_pic_resampling_enabled_flag将等于0。gci_no_ref_pic_resampling_constraint_flag等于0时，可不施加这样的约束。在分片头中，sh_slice_type可以指定I、P和B类型之间的分片的编码类型。等于1的ph_non_ref_pic_flag可以指定当前图像从不用作参考图像。等于0的ph_non_ref_pic_flag可以指定当前图像可以或不可以被用作参考图像。
图3是示出了自适应分辨率管理的过程300的示例性实施例的过程流程图，该过程300可实现视频编码器/解码器的额外灵活性，从而允许在各种使用情况下节省比特率。
在步骤305处，继续参考图3，解码器接收比特流。当前块可以包含在解码器接收的比特流中。比特流可以例如包括当使用数据压缩时在输入到解码器的比特流中找到的数据。比特流可以包括对视频进行解码所需的信息。接收可以包括提取和/或解析比特流中的块以及相关联的标识信息。在一些实施方式中，当前块可以包括编码树单元(CTU)、编码单元(CU)和/或预测单元(PU)。
在步骤310处，仍然参考图3，可以使用所述比特流确定当前帧是否可用作参考帧。在一些实施方式中，所述确定所述当前帧是否可用作参考帧包括，确定所述当前帧的类型是否为如上所述的类型I或类型P。作为非限制性示例，在分片头中，sh_slice_type可以指定I、P和B类型之间的分片的编码类型。当前帧的类型可以在比特流中标识。在一些实施方式中，作为非限制性示例，当前帧可以包括分片，被定义为区块中的一组CTU和/或一组整数个的连续区块。
仍然参考图3，在步骤315处，响应于所述确定当前帧可用作参考帧，可以设置表征不允许自适应分辨率管理模式的变量。在一些实施方式中，与自适应分辨率管理模式相关联的参数不存在于当前帧的图像头中。作为非限制性示例，SPS可以标识sps_res_change_in_clvs_allowed_flag等于1，指定图像的空间分辨率可能改变。基于分片类型的禁用可以基于图像类型在编码器处标识。
在步骤340处，进一步参考图3，可以重建当前帧的像素数据。在重建期间，可能不允许自适应分辨率管理模式。在一个实施例中，确定当前帧不可用作参考帧可以导致确定ARM可用。例如，SPS可以标识sps_res_change_in_clvs_allowed_flag等于1，指定图像的空间分辨率可能改变，例如如上所述。
图4是示出了如本公开中所描述的能够实现基于帧类型的自适应分辨率管理的示例解码器400的系统框图。解码器400可以包括熵解码处理器404，逆量化和逆变换处理器408，解块滤波器412，帧缓冲器416，运动补偿处理器和/或帧内预测处理器424。
在操作中，仍然参考图4，比特流428可以由解码器400接收并输入到熵解码处理器404，熵解码处理器404可以将部分比特流熵解码为量化系数。量化系数可以被提供给逆量化和逆变换处理器408，逆量化和逆变换处理器408可以执行逆量化和逆变换以创建残差信号，残差信号可以根据处理模式被添加到运动补偿处理器420或帧内预测处理器424的输出。运动补偿处理器420和帧内预测处理器424的输出可以包括基于先前的解码块的块预测。预测和残差之和可以由解块滤波器412进行处理，并存储到帧缓冲器416中。
图5是示出了利用自适应分辨率管理来编码视频的示例性过程500的过程流程图，该过程500可以实现视频编码器和/或解码器的额外灵活性，从而允许在各种使用情况下节省比特率。在步骤505处，视频帧可以经历初始块分割，例如，使用树结构宏块分割方案进行分割，该方案可以包括将图像帧划分为CTU和CU。
在步骤510处，可以执行基于块的自适应分辨率管理，包括帧或其部分的分辨率缩放。
在515处，块可以被编码并包括在比特流中。例如，编码可以包括利用帧间预测和帧内预测模式。
图6是示出了如本公开中所描述的能够实现基于帧类型的自适应分辨率管理的示例视频编码器600的系统框图。示例视频编码器600可以接收输入视频604，输入视频604可以根据诸如树结构宏块分割方案(例如四叉树加二叉树)之类的处理方案进行初始分割或划分。树结构宏块分割方案的示例可以包括将图像帧划分为称为编码树单元(CTU)的大块元素。在一些实施方式中，每个CTU可以被进一步一次或多次地分割成多个称为编码单元(CU)的子块。这种分割的结果可以包括称为预测单元(PU)的一组子块。也可能使用变换单元(TU)。
仍然参考图6，示例性视频编码器600可以包括帧内预测处理器608、能够构建运动矢量候选列表，包括将全局运动矢量候选添加到运动矢量候选列表的运动估计/补偿处理器612(还称为帧间预测处理器)、变换/量化处理器616、逆量化/逆变换处理器620、环路滤波器624、解码图片缓冲器628和/或熵编码处理器632。可以将比特流参数输入到熵编码处理器632，以包括在输出比特流636中。
在操作时，继续参考图6，对于输入视频604的帧的每个块，可以确定是通过图像内预测还是使用运动估计/补偿来处理该块。可以将块提供给帧内预测处理器608或运动估计/补偿处理器612。如果要通过帧内预测来处理块，则帧内预测处理器608可以执行处理以输出预测因子(predictor)。如果要通过运动估计/补偿来处理块，则如果适用的话，运动估计/补偿处理器612可以执行包括构建运动矢量候选列表的处理，包括将全局运动矢量候选添加到运动矢量候选列表。
进一步参考图6，可以通过从输入视频中减去预测因子来形成残差。残差可以由变换/量化处理器616接收，变换/量化处理器616可以执行变换处理(例如，离散余弦变换(DCT))以产生可以被量化的系数。可以将量化系数和任何相关联的标识信息提供给熵编码处理器632，以进行熵编码并将包括在输出比特流636中。熵编码处理器632可以支持对有关编码当前块的标识信息进行编码。此外，量化系数可以被提供给逆量化/逆变换处理器620，逆量化/逆变换处理器620可以再现像素，所述像素可与预测因子组合并由环路滤波器624处理，环路滤波器624的输出可以被存储在解码图片缓冲器628中，以供运动估计/补偿处理器612使用，运动估计/补偿处理器612能够构建运动矢量候选列表，包括将全局运动矢量候选添加到运动矢量候选列表。
继续参考图6，尽管上文已经详细描述了一些变型，但是其他修改或添加也是可能的。例如，在一些实施方式中，当前块可以包括任何对称块(8×8、16×16、32×32、64×64、128×128等)以及任何非对称块(8×4、16×8等)。
在一些实施方式中，仍然参考图6，可以实施四叉树加二进制决策树(QTBT)。对于QTBT，在编码树单元层面，可以动态地推导出QTBT的分割参数以适应局部特征，而无需传输任何开销。随后，在编码单元层面，联合分类器决策树结构可以消除不必要的迭代并控制错误预测的风险。在一些实施方式中，LTR帧块更新模式可以作为在QTBT的每个叶节点上可用的附加选项。
在一些实施方式中，仍然参考图6，可以在比特流的不同层次层面标识其他语法元素。例如，可以通过在序列参数集(SPS)中包含编码的启用标志来为整个序列启用标志。此外，可以在编码树单元(CTU)层面对CTU标志进行编码。
一些实施例可以包括存储指令的非暂时性计算机程序产品(即，物理实现的计算机程序产品)，所述指令，当由一个或多个计算系统的一个或多个数据处理器执行时，使得至少一个数据处理器执行本文中的操作。
在此公开的一些实施例中，解码器可以包括电路，所述电路被配置成：接收比特流，使用所述比特流并针对当前帧确定所述当前帧是否可用作参考帧，响应于所述确定所述当前帧可用作参考帧，设置表征不允许自适应分辨率管理模式的变量，以及重建所述当前帧的像素数据，其中，所述自适应分辨率管理模式不被允许。
在一些实施例中，所述确定所述当前帧是否可用作参考帧可以包括确定所述当前帧的类型是否为类型I。所述确定所述当前帧是否可用作参考帧可以包括确定所述当前帧的类型是否为类型P。所述当前帧的类型可以在所述比特流中标识。所述当前帧可以是分片。与所述自适应分辨率管理模式相关联的参数可以不存在于当前帧的图像头中。所述解码器可以被进一步被配置成从所述比特流解码当前块。当前块可以包括编码树单元。所述当前块可以包括预测单元。所述解码器可以包括，熵解码处理器，被配置成接收比特流并将所述比特流解码为量化系数；逆量化和逆变换处理器，被配置成处理所述量化系数，所述处理所述量化系数包括执行逆离散余弦变换；解块滤波器；帧缓冲器；以及帧内预测处理器。
本文公开的一些实施例中包括一种方法，所述方法包括：接收比特流，使用所述比特流并针对当前帧确定所述当前帧是否可用作参考帧，响应于所述确定所述当前帧可用作参考帧，设置表征不允许自适应分辨率管理模式的变量，以及重建所述当前帧的像素数据，其中，所述自适应分辨率管理模式不被允许。
在一些实施例中，所述确定所述当前帧是否可用作参考帧可以包括确定所述当前帧的类型是否为类型I。所述确定所述当前帧是否可用作参考帧包括确定所述当前帧的类型是否为类型P。所述当前帧的类型可以在所述比特流中标识。所述当前帧可以是分片。与所述自适应分辨率管理模式相关联的参数可以不存在于当前帧的图像头中。所述方法还可包括从所述比特流解码当前块。所述当前块可以包括编码树单元。所述当前块可以包括预测单元。所述接收、所述确定、所述设置以及所述重建中的至少一者可以是由解码器执行，所述解码器包括，熵解码处理器，被配置成接收比特流并将所述比特流解码为量化系数；逆量化和逆变换处理器，被配置成处理所述量化系数，所述处理所述量化系数包括执行逆离散余弦变换；解块过滤器；帧缓冲器；以及帧内预测处理器。
应当注意的是，本文描述的任何一个或多个方面和实施例可以方便地使用数字电子电路、集成电路、专门设计的专用集成电路(ASIC)、现场可编程门阵列(FPGA)、计算机硬件、固件、软件和/或上述项的组合来实现，如在根据本说明书的教导编程的一个或多个机器(例如，用作电子文档的用户计算设备的一个或多个计算设备、诸如文档服务器之类的一个或多个服务器设备等)中实现和/或实施的，这对于计算机领域的普通技术人员来说是显而易见的。这些各种方面或特征可以包括在可编程系统上可执行和/或可解释的一个或多个计算机程序和/或软件中的实现，所述可编程系统包括至少一个可编程处理器，所述至少一个可编程处理器可以是专用的或通用的，其被耦接以从存储系统、至少一个输入设备和至少一个输出设备接收数据和指令，以及向存储系统、至少一个输入设备和至少一个输出设备发送数据和指令。对于软件领域的普通技术人员来说显而易见的是，熟练的程序员基于本公开的教导可以容易地准备适当的软件编码。上文讨论的采用软件和/或软件模块的方面和实施方式还可以包括用于帮助实现软件和/或软件模块的机器可执行指令的适当硬件。
这种软件可以是采用机器可读存储介质的计算机程序产品。机器可读存储介质可以是能够存储和/或编码由机器(例如，计算设备)执行的指令序列并且使得机器执行本文描述的方法和/或实施例中的任何一个的任何介质。机器可读存储介质的示例包括但不限于磁盘、光盘(例如，CD、CD-R、DVD、DVD-R等)、磁光盘、只读存储器“ROM”设备、随机存取存储器“RAM”设备、磁卡、光卡、固态存储设备、EPROM、EEPROM、可编程逻辑器件(PLD)和/或上述项的任意组合。本文使用的机器可读介质旨在包括单个介质以及物理上分离的介质的集合，例如光盘的集合，或者与计算机存储器结合的一个或多个硬盘驱动器。本文使用的机器可读存储介质不包括信号传输的暂时形式。
这种软件还可以包括在诸如载波之类的数据载体上作为数据信号而携带的信息(例如数据)。例如，机器可执行信息可以被包括作为包含在数据载体中的数据承载信号，其中，所述信号对下述项进行编码：由机器(例如，计算设备)执行的指令序列或其部分，以及使机器执行本文描述的方法和/或实施例中的任何一个的任何相关信息(例如，数据结构和数据)。
计算设备的示例包括但不限于电子书阅读设备、计算机工作站、终端计算机、服务器计算机、手持设备(例如，平板计算机、智能手机等)、网络设备、网络路由器、网络交换机、网桥、任何能够执行指定其要采取的动作的指令序列的机器，以及上述项的任意组合。在一个示例中，计算设备可以包括和/或被包括在资讯站(kiosk)中。
图7示出了计算机系统700的示例形式的计算设备的一个实施例的图解表示，可能在其中执行指令指令集，使控制系统执行本公开的任何一个或多个方面和/或方法。还可以预期的是，多个计算设备可用于实现一组专门配置的指令集，使一个或多个设备执行本公开的任何一个或多个方面和/或方法。计算机系统700包括：处理器704和存储器708，它们通过总线712彼此通信并与其他组件通信。总线712可能包括几种类型的总线结构(总线结构使用多种总线架构中的任一种)中的任一种，包括但不限于：存储器总线、存储器控制器、外围总线、本地总线及其任意组合。
存储器708可包括各种组件(例如，机器可读介质)，包括但不限于随机存取存储器组件、只读组件及其任意组合。在一个示例中，基本输入/输出系统716(basic input/output system，BIOS)包括：帮助在计算机系统700内的元件之间传输信息的基本例程，例如在启动期间；该基本例程可能存储于存储器708中。存储器708还可包括：(例如，存储于一个或多个机器可读介质的)指令(例如，软件)720；该指令实现本公开的任何一个或多个方面和/或方法。在另一示例中，存储器708还可能包括任意数量的程序模块，包括但不限于：操作系统、一个或多个应用程序、其他程序模块、程序数据及其任意组合。
计算机系统700还可能包括存储设备724。存储设备(例如，存储设备724)的示例包括但不限于：硬盘驱动器、磁盘驱动器、与光学介质组合的光盘驱动器、固态存储设备以及其任意组合。存储设备724可以通过适当的接口(未示出)连接至总线712。示例接口包括但不限于：SCSI、高级技术附件(advanced technology attachment，ATA)、串行ATA、通用串行总线(universal serial bus，USB)、IEEE 1394(FIREWIRE)及其任何组合。在一个示例中，存储设备724(或其一个或多个组件)可能与计算机系统700可移除地交互(例如，通过外部端口连接器(未示出))。特别地，存储设备724和相关联的机器可读介质728可能为计算机系统700提供机器可读指令、数据结构、程序模块和/或其他数据的非易失性和/或易失性存储。在一个示例中，软件720可能完全或部分地驻留在机器可读介质728内。在另一个示例中，软件720可能完全或部分地驻留在处理器704内。
计算机系统700还可能包括输入设备732。在一个示例中，计算机系统700的用户可以通过输入设备732，将命令和/或其他信息输入至计算机系统700。输入设备732的示例包括但不限于：字母数字输入设备(例如键盘)、定点设备、操纵杆、游戏手柄、音频输入设备(例如麦克风、语音响应系统等)、光标控制设备(例如鼠标)、触摸板、光学扫描仪、视频捕获设备(例如静态相机、摄像机)、触摸屏以及其任意组合。输入设备732可以通过多种接口(未示出)中的任一种连接至总线712，包括但不限于：串行接口、并行接口、游戏端口、USB接口、FIREWIRE接口、连接至总线712的直接接口及其任意组合。输入设备732可能包括触摸屏界面，该界面可能是显示器736的一部分或与显示器736分开，这将在下面进一步讨论。输入设备732可能用作用户选择设备，用于在如上所述的图形界面中选择一个或多个图形表示。
用户还可以经由存储设备724(例如，可移动磁盘驱动器、闪存驱动器等)和/或网络接口设备740，向计算机系统700输入命令和/或其他信息。网络接口设备，例如网络接口设备740，可以用于将计算机系统700连接至各种网络中的一个或多个(例如网络744)以及与该网络连接的一个或多个远程设备748。网络接口设备的示例包括但不限于：网络接口卡(例如，移动网络接口卡、LAN卡)、调制解调器及其任意组合。网络的示例包括但不限于：广域网(例如互联网、企业网络)、局域网(例如与办公室、建筑物、校园或其他相对较小的地理空间相关联的网络)、电话网络、与电话/语音提供商相关联的数据网络(例如，移动通信提供商数据和/或语音网络)、两个计算设备之间的直接连接及其任意组合。网络，例如网络744，可能采用有线和/或无线通信模式。通常，可以使用任何网络拓扑。可以通过网络接口设备740，将信息(例如，数据、软件720等)传送至计算机系统200和/或从计算机系统700传送出信息(例如，数据、软件720等)。
计算机系统700还可以包括：视频显示适配器752，用于将可显示图像传送到显示设备，例如显示设备736。显示装置的示例包括但不限于：液晶显示器(LCD)、阴极射线管(CRT)、等离子显示器、发光二极管(LED)显示器及其任意组合。显示适配器752和显示设备736可能与处理器704结合使用，以提供本公开的方面的图形表示。除了显示设备之外，计算机系统700可能包括一个或多个其他外围输出设备，包括但不限于音频扬声器、打印机及其任意组合。这些外围输出设备可能通过外围接口756连接至总线712。外围接口的示例包括但不限于：串行端口、USB连接、FIREWIRE连接、并行连接及其任意组合。
以上是对本发明的说明性实施例的详细描述。在不脱离本发明的精神和范围的情况下，可以进行各种修改和添加。上述各种实施例中的每一个的特征可以适当地与其他描述的实施例的特征组合，以便在相关联的新实施例中提供多种特征组合。另外，虽然前面描述了多个单独的实施例，但本文所描述的仅仅是对本发明原理的应用的说明。此外，尽管本文中的特定方法可以被图示和/或被描述为以特定顺序执行，但是在实现本文公开的实施例的普通技术范围内，排序是高度可变的。因此，该描述仅旨在作为示例，并不以其他方式限制本发明的范围。
在以上描述和权利要求中，诸如“至少一个”或“一个或多个”之类的短语可以出现在元素或特征的组合列表之后。术语“和/或”也可以出现在两个或更多元素或特征的列表中。除非与其所使用的上下文另有隐含或明确矛盾，否则这样的短语旨在表示单独列出的任何元素或特征、或任何列举的元素或特征与任何其他列举的元素或特征的组合。例如，短语“A和B中的至少一个；”、“A和B中的一个或多个；”、“A和/或B”分别表示“单独的A、单独的B、或A和B一起”。类似的解释也适用于包含三个或更多项目的列表。例如，短语“A、B和C中的至少一个；”、“A、B和C中的一个或多个；”、“A、B和/或C”分别旨在表示：“单独的A、单独的B、单独的C、A和B一起、A和C一起、B和C一起、或A和B和C一起”。此外，以上和权利要求中使用的术语“基于”旨在表示“至少部分基于”，使得未列举的特征或元素也是允许的。
取决于期望的配置，本文描述的主题可以体现在系统、设备、方法和/或物品中。前述描述中阐述的实施方式并不代表与此处描述的主题一致的所有实施方式。相反地，它们仅仅是与所描述的主题相关的方面一致的一些示例。尽管上面已经详细描述了一些变体，但其他修改或添加也是可能的。特别地，除了在此阐述的那些之外，还可以提供进一步的特征和/或变化。例如，上述实施方式可涉及所公开特征的各种组合和子组合和/或上述若干进一步特征的组合和子组合。此外，在附图中描绘的和/或本文描述的逻辑流程不一定需要以所示的特定顺序或序列顺序来实现期望的结果。其他实现可能在以下权利要求的范围内。

Claims (20)

1.一种解码器，所述解码器包括电路，所述电路被配置成：
接收比特流；
使用所述比特流并针对当前帧确定所述当前帧是否能够用作参考帧；
响应于确定所述当前帧能够用作参考帧，设置表征自适应分辨率管理模式不被允许的变量；以及
重建所述当前帧的像素数据，其中，所述自适应分辨率管理模式不被允许。
2.根据权利要求1所述的解码器，其中，所述确定所述当前帧是否能够用作参考帧包括确定所述当前帧的类型是否为类型I。
3.根据权利要求1所述的解码器，其中，所述确定所述当前帧是否能够用作参考帧包括确定所述当前帧的类型是否为类型P。
4.根据权利要求1所述的解码器，其中，所述当前帧的类型在所述比特流中标识。
5.根据权利要求1所述的解码器，其中，所述当前帧是分片。
6.根据权利要求1所述的解码器，其中，与所述自适应分辨率管理模式相关联的参数不存在于所述当前帧的图像头中。
7.根据权利要求1所述的解码器，所述解码器还被配置成从所述比特流解码出当前块。
8.根据权利要求1所述的解码器，其中，所述当前块包括编码树单元。
9.根据权利要求1所述的解码器，其中，所述当前块包括预测单元。
10.根据权利要求1所述的解码器，还包括：
熵解码处理器，被配置成接收所述比特流并将所述比特流解码为量化系数；
逆量化和逆变换处理器，被配置成处理所述量化系数，所述处理所述量化系数包括执行逆离散余弦变换；
解块滤波器；
帧缓冲器；以及
帧内预测处理器。
11.一种方法，包括：
接收比特流；
使用所述比特流并针对当前帧确定所述当前帧是否能够用作参考帧；
响应于确定所述当前帧能够用作参考帧，设置表征自适应分辨率管理模式不被允许的变量；以及
重建所述当前帧的像素数据，其中，所述自适应分辨率管理模式不被允许。
12.根据权利要求11所述的方法，其中，所述确定所述当前帧是否能够用作参考帧包括确定所述当前帧的类型是否为类型I。
13.根据权利要求11所述的方法，其中，所述确定所述当前帧是否能够用作参考帧包括确定所述当前帧的类型是否为类型P。
14.根据权利要求13所述的方法，其中，所述当前帧的类型在所述比特流中标识。
15.根据权利要求11所述的方法，其中，所述当前帧是分片。
16.根据权利要求11所述的方法，其中，与所述自适应分辨率管理模式相关联的参数不存在于所述当前帧的图像头中。
17.根据权利要求11所述的方法，还包括从所述比特流解码出当前块。
18.根据权利要求11所述的方法，其中，所述当前块包括编码树单元。
19.根据权利要求11所述的方法，其中，所述当前块包括预测单元。
20.根据权利要求11所述的方法，其中，所述接收、所述确定、所述设置和所述重建中的至少一者由解码器执行，所述解码器包括：
熵解码处理器，被配置成接收所述比特流并将所述比特流解码为量化系数；
逆量化和逆变换处理器，被配置成处理所述量化系数，所述处理所述量化系数包括执行逆离散余弦变换；
解块滤波器；
帧缓冲器；以及
帧内预测处理器。
CN202080068707.XA 2019-08-06 2020-08-06 基于帧类型的自适应分辨率管理的隐式标识 Pending CN114616826A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962883484P 2019-08-06 2019-08-06
US62/883,484 2019-08-06
PCT/US2020/045220 WO2021026363A1 (en) 2019-08-06 2020-08-06 Implicit signaling of adaptive resolution management based on frame type

Publications (1)

Publication Number Publication Date
CN114616826A true CN114616826A (zh) 2022-06-10

Family

ID=74498809

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080068707.XA Pending CN114616826A (zh) 2019-08-06 2020-08-06 基于帧类型的自适应分辨率管理的隐式标识

Country Status (7)

Country Link
US (2) US11611768B2 (zh)
EP (1) EP4011068A4 (zh)
JP (1) JP2022544164A (zh)
KR (1) KR20220088680A (zh)
CN (1) CN114616826A (zh)
BR (1) BR112022002154A2 (zh)
MX (1) MX2022001595A (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022544164A (ja) * 2019-08-06 2022-10-17 オーピー ソリューションズ， エルエルシー フレームタイプに基づく適応分解能管理の暗示的信号伝達
BR112022005293A2 (pt) 2019-09-19 2022-09-20 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeo, aparelho para processar dados de vídeo e meios de armazenamento e de gravação não transitórios legíveis por computador
EP4026336A4 (en) 2019-10-05 2022-12-07 Beijing Bytedance Network Technology Co., Ltd. LEVEL-BASED SIGNALING OF VIDEO CODING TOOLS
WO2021068956A1 (en) 2019-10-12 2021-04-15 Beijing Bytedance Network Technology Co., Ltd. Prediction type signaling in video coding
CN117376557A (zh) 2019-10-13 2024-01-09 北京字节跳动网络技术有限公司 参考图片重采样与视频编解码工具之间的相互作用
WO2021121419A1 (en) 2019-12-19 2021-06-24 Beijing Bytedance Network Technology Co., Ltd. Interaction between adaptive color transform and quantization parameters
MX2022007503A (es) 2019-12-27 2022-07-04 Beijing Bytedance Network Tech Co Ltd Se?alizacion de tipos de corte en encabezados de imagenes de video.
KR20220115965A (ko) 2020-01-05 2022-08-19 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩을 위한 일반적인 제약 정보
CN115176470A (zh) 2020-01-18 2022-10-11 抖音视界有限公司 图像/视频编解码中的自适应颜色变换

Family Cites Families (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6370276B2 (en) 1997-04-09 2002-04-09 Matsushita Electric Industrial Co., Ltd. Image predictive decoding method, image predictive decoding apparatus, image predictive coding method, image predictive coding apparatus, and data storage media
US6724948B1 (en) 1999-12-27 2004-04-20 Intel Corporation Scaling images for display
GB2362531A (en) * 2000-05-15 2001-11-21 Nokia Mobile Phones Ltd Indicating the temporal order of reference frames in a video sequence
US6934677B2 (en) 2001-12-14 2005-08-23 Microsoft Corporation Quantization matrices based on critical band pattern information for digital audio wherein quantization bands differ from critical bands
US8761252B2 (en) 2003-03-27 2014-06-24 Lg Electronics Inc. Method and apparatus for scalably encoding and decoding video signal
WO2007058470A1 (en) * 2005-11-15 2007-05-24 Electronics And Telecommunications Research Institute A method of scalable video coding for varying spatial scalability of bitstream in real time and a codec using the same
JP2009518981A (ja) 2005-12-08 2009-05-07 ヴィドヨ，インコーポレーテッド ビデオ通信システムでのエラー回復力およびランダムアクセスのためのシステムおよび方法
US7956930B2 (en) 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
US8675738B2 (en) 2008-08-06 2014-03-18 Mediatek Inc. Video decoding method without using additional buffers for storing scaled frames and system thereof
US8804821B2 (en) 2008-09-26 2014-08-12 Microsoft Corporation Adaptive video processing of an interactive environment
TWI387317B (zh) * 2008-12-11 2013-02-21 Novatek Microelectronics Corp 產生重新取樣參考畫面之裝置及其方法與影像解碼系統
US8514942B2 (en) * 2008-12-31 2013-08-20 Entropic Communications, Inc. Low-resolution video coding content extraction
US9036714B2 (en) 2009-01-26 2015-05-19 Thomson Licensing Frame packing for video coding
US9565397B2 (en) 2009-02-26 2017-02-07 Akamai Technologies, Inc. Deterministically skewing transmission of content streams
US20110013692A1 (en) 2009-03-29 2011-01-20 Cohen Robert A Adaptive Video Transcoding
AU2011308204A1 (en) 2010-09-28 2013-04-11 Samsung Electronics Co., Ltd. Video encoding method and device and decoding method and device
WO2012052968A1 (en) * 2010-10-20 2012-04-26 Nokia Corporation Method and device for video coding and decoding
KR101712156B1 (ko) 2010-12-06 2017-03-06 에스케이 텔레콤주식회사 임의의 형태의 블록을 이용한 인터예측에 의한 영상의 부호화/복호화 방법 및 장치
KR20120088488A (ko) 2011-01-31 2012-08-08 한국전자통신연구원 시간적 움직임 벡터 저장 방법 및 그 장치
KR20140085456A (ko) * 2011-09-29 2014-07-07 텔레폰악티에볼라겟엘엠에릭슨(펍) 레퍼런스 픽처 리스트 핸들링
US9451284B2 (en) 2011-10-10 2016-09-20 Qualcomm Incorporated Efficient signaling of reference picture sets
CN103200400B (zh) * 2012-01-09 2018-03-16 中兴通讯股份有限公司 一种图像层和分片层的编解码方法、编解码器和电子设备
US20130177084A1 (en) 2012-01-10 2013-07-11 Qualcomm Incorporated Motion vector scaling in video coding
US9565432B2 (en) * 2012-04-23 2017-02-07 Lg Electronics Inc. Video-encoding method, video-decoding method, and apparatus implementing same
EP2920962A4 (en) 2012-11-13 2016-07-20 Intel Corp ADAPTIVE TRANSFORMATION ENCODING OF CONTENT FOR NEXT GENERATION VIDEO
WO2014120369A1 (en) 2013-01-30 2014-08-07 Intel Corporation Content adaptive partitioning for prediction and coding for next generation video
US9635371B2 (en) 2013-05-31 2017-04-25 Qualcomm Incorporated Determining rounding offset using scaling factor in picture resampling
US10003815B2 (en) * 2013-06-03 2018-06-19 Qualcomm Incorporated Hypothetical reference decoder model and conformance for cross-layer random access skipped pictures
US9648351B2 (en) * 2013-10-24 2017-05-09 Dolby Laboratories Licensing Corporation Error control in multi-stream EDR video codec
US20150195554A1 (en) 2014-01-03 2015-07-09 Sharp Laboratories Of America, Inc. Constraints and enhancements for a scalable video coding system
US10368097B2 (en) 2014-01-07 2019-07-30 Nokia Technologies Oy Apparatus, a method and a computer program product for coding and decoding chroma components of texture pictures for sample prediction of depth pictures
EP3092806A4 (en) 2014-01-07 2017-08-23 Nokia Technologies Oy Method and apparatus for video coding and decoding
US9906804B2 (en) 2014-01-16 2018-02-27 Qualcomm Incorporated Reference layer sample position derivation for scalable video coding
US20150264404A1 (en) * 2014-03-17 2015-09-17 Nokia Technologies Oy Method and apparatus for video coding and decoding
EP3057319A1 (en) 2015-02-10 2016-08-17 Harmonic Inc. Adaptive resolution video decoder
JP6559337B2 (ja) 2015-09-23 2019-08-14 ノキア テクノロジーズ オーユー ３６０度パノラマビデオの符号化方法、符号化装置、及びコンピュータプログラム
US10362314B2 (en) 2015-11-27 2019-07-23 Mediatek Inc. Apparatus and method for video coding by intra-prediction
WO2017156669A1 (en) 2016-03-14 2017-09-21 Mediatek Singapore Pte. Ltd. Methods for motion vector storage in video coding
WO2018066988A1 (ko) 2016-10-04 2018-04-12 김기백 영상 데이터 부호화/복호화 방법 및 장치
US10979732B2 (en) 2016-10-04 2021-04-13 Qualcomm Incorporated Adaptive motion vector precision for video coding
CN113873237B (zh) 2016-12-01 2023-12-29 谷歌有限责任公司 用于恢复由重构产生的劣化帧的劣化图块的方法和装置
EP3349452A1 (en) 2017-01-11 2018-07-18 Thomson Licensing Scaling of transform coefficients for non-dyadic transform blocks
WO2019059721A1 (ko) * 2017-09-21 2019-03-28 에스케이텔레콤 주식회사 해상도 향상 기법을 이용한 영상의 부호화 및 복호화
WO2019141907A1 (en) 2018-01-22 2019-07-25 Nokia Technologies Oy An apparatus, a method and a computer program for omnidirectional video
WO2020103940A1 (en) * 2018-11-22 2020-05-28 Beijing Bytedance Network Technology Co., Ltd. Coordination method for sub-block based inter prediction
EP3861722A4 (en) 2019-03-11 2022-07-06 Tencent America LLC ADAPTIVE FRAME SIZE SIGNALING IN A VIDEO BITSTREAM
US11233988B2 (en) 2019-05-17 2022-01-25 Qualcomm Incorporated Reference picture resampling and inter-coding tools for video coding
KR20220024006A (ko) * 2019-06-22 2022-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 잔차 스케일링을 위한 신택스 요소
US11032548B2 (en) 2019-06-24 2021-06-08 Tencent America LLC Signaling for reference picture resampling
JP7460748B2 (ja) * 2019-07-07 2024-04-02 北京字節跳動網絡技術有限公司 クロマ残差スケーリングのシグナリング
US11206404B2 (en) * 2019-07-08 2021-12-21 Fastvdo Llc Adaptive resolution change in video streams
BR112022002147A2 (pt) * 2019-08-06 2022-04-19 Op Solutions Llc Gerenciamento de resolução adaptativa com base em bloco
JP2022544160A (ja) * 2019-08-06 2022-10-17 オーピー ソリューションズ， エルエルシー 適応分解能管理信号伝達
JP2022544164A (ja) * 2019-08-06 2022-10-17 オーピー ソリューションズ， エルエルシー フレームタイプに基づく適応分解能管理の暗示的信号伝達

Also Published As

Publication number Publication date
KR20220088680A (ko) 2022-06-28
US11611768B2 (en) 2023-03-21
US20210044820A1 (en) 2021-02-11
MX2022001595A (es) 2022-03-11
JP2022544164A (ja) 2022-10-17
BR112022002154A2 (pt) 2022-04-19
EP4011068A4 (en) 2023-08-09
EP4011068A1 (en) 2022-06-15
US20230209077A1 (en) 2023-06-29

Similar Documents

Publication Publication Date Title
CN114616826A (zh) 基于帧类型的自适应分辨率管理的隐式标识
US11943461B2 (en) Adaptive resolution management signaling
CN114503581A (zh) 基于块的自适应分辨率管理
CN114450956A (zh) 自适应分辨率管理中的帧缓冲
US20240114161A1 (en) Adaptive resolution management using sub-frames
WO2021026363A1 (en) Implicit signaling of adaptive resolution management based on frame type
US20220417545A1 (en) Adaptive Resolution Management Prediction Rescaling
CN113597757A (zh) 具有区域数自适应的几何划分的形状自适应离散余弦变换
CN114009042A (zh) 具有全局运动的帧中的候选
CN114902671A (zh) 用于自适应裁剪的方法和系统
WO2021026361A1 (en) Adaptive resolution management using sub-frames
US12101497B2 (en) Adaptive resolution management signaling
WO2021026334A1 (en) Adaptive resolution management signaling
WO2021026324A1 (en) Adaptive resolution management prediction rescaling
CN113615184A (zh) 扩展长期参考图片保留的显式信令

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination