CN114026871A - 用于对视频数据编码的装置和方法 - Google Patents

用于对视频数据编码的装置和方法 Download PDF

Info

Publication number
CN114026871A
CN114026871A CN202080046454.6A CN202080046454A CN114026871A CN 114026871 A CN114026871 A CN 114026871A CN 202080046454 A CN202080046454 A CN 202080046454A CN 114026871 A CN114026871 A CN 114026871A
Authority
CN
China
Prior art keywords
block
motion information
sub
list
flag
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080046454.6A
Other languages
English (en)
Inventor
邓智友
杨雨樵
林柏翰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
FG Innovation Co Ltd
Original Assignee
FG Innovation Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by FG Innovation Co Ltd filed Critical FG Innovation Co Ltd
Publication of CN114026871A publication Critical patent/CN114026871A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/537Motion estimation other than block-based
    • H04N19/543Motion estimation other than block-based using regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提供一种通过电子装置解码比特流的方法。根据从所述比特流接收的图像帧来确定块单元。从候选列表接收具有用于选择第一参考帧的第一列表标记的第一运动信息和具有用于选择第二参考帧的第二列表标记的第二运动信息以重建所述块单元。当所述第一列表标记与所述第二列表标记相同时,针对在所述块单元中确定的子块存储所述第一运动信息和所述第二运动信息中的预定义的一者,而无需检查所述第一参考帧和所述第二参考帧是否包括在由不同于所述两个列表标记的标记值指示的参考列表中。当基于所述子块来重建后续块时,基于存储的运动信息重建所述后续块。

Description

用于对视频数据编码的装置和方法
相关申请的交叉引用
本公开要求于2019年6月24日提交的标题为“Motion Storing Process forTriangle Partition Prediction and Reference Sampling Process for LinearModel”的美国临时专利申请序列号62/865443(下文称为“’443临时案”)和于2019年8月8日提交的标题为“High Level Syntax of Affine Related Mode and Sample Selection ofLinear Model”的美国临时专利申请序列号62/884335(下文称为“’335临时案”)的权益和优先权。’443临时案和’335临时案的公开内容在此以引用的方式完全并入本公开中。
技术领域
本公开总体上涉及视频编码,并且更具体地,涉及用于存储图像帧中的块单元的运动信息以预测多个后续块的技术。
背景技术
三角分区模式和几何分区模式是视频编码方法中的编码工具。在三角分区模式和几何分区模式中,编码器可选择多个合并候选中的两个来预测块单元并且将两个合并索引提供到比特流中以供解码器识别所选择的合并候选。
编码器和解码器可分割图像帧中的块单元以生成多个子块,并且在它们的缓冲器中针对子块中的每一个存储两个合并候选中的至少一个以预测多个后续块。然而,在三角分区模式和几何分区模式中,块单元中的多个块分量中的一些可仅基于两个合并候选中的一个来预测,并且其他块分量可基于两个合并候选来预测。如果针对基于两个合并候选来预测的子块中的每一个存储两个合并候选,则所存储运动候选对于后续预测可能过于复杂。
发明内容
本公开涉及一种用于通过将至少一个分量矢量与阈值进行比较来禁用对初始预测结果的调整的装置和方法。
在本公开的第一方面中,提供一种用于解码比特流的方法和一种用于执行所述方法的电子装置。所述方法包括:接收所述比特流的图像帧;从接收的图像帧确定块单元;从候选列表接收第一运动信息和第二运动信息以重建所述块单元,其中所述第一运动信息包括用于选择第一参考帧的第一列表标记并且所述第二运动信息包括用于选择第二参考帧的第二列表标记;确定所述块单元中的子块;将所述第一列表标记与所述第二列表标记进行比较;当所述第一列表标记与所述第二列表标记相同时,存储所述第一运动信息和所述第二运动信息中的预定义的一者作为用于所述子块的存储的运动信息,而无需检查所述第一参考帧和所述第二参考帧是否包括在多个参考列表中的由多个标记值中的不同于所述第一列表标记和所述第二列表标记的特定的一个标记值指示的特定的一个参考列表中;以及当基于所述子块来重建后续块时,基于存储的运动信息重建所述后续块。
在本公开的第二方面中,提供一种用于解码比特流的方法和一种用于执行所述方法的电子装置。所述方法包括:接收所述比特流的图像帧;从接收的图像帧确定块单元;确定所述块单元的分割线;从候选列表接收第一运动信息和第二运动信息以重建所述块单元,其中所述第一运动信息包括第一列表标记并且所述第二运动信息包括第二列表标记;确定所述块单元中的子块;确定所述子块是否被包括在基于所述分割线分离的多个块区域中的特定的一个块区域中,其中所述多个块区域中的所述特定的一个块区域覆盖所述分割线;当所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,仅基于所述第一列表标记与所述第二列表标记之间的比较来确定是否将所述第一运动信息和所述第二运动信息一起存储为用于所述子块的存储的运动信息;以及当基于所述子块来重建后续块时,基于存储的运动信息重建所述后续块。
附图说明
当结合附图阅读时,根据以下详细描述将最好地理解示例性公开的各方面。各种特征未按比例绘制,为了论述清楚,可任意增大或减小各种特征的尺寸。
图1示出根据本公开的示例性实施方式的被配置来编码并解码视频数据的示例性系统的框图。
图2示出根据本申请的示例性实施方式的图1中的第二电子装置的示例性解码器模块的框图。
图3示出根据本公开的示例性实施方式的用于重建块单元的示例性重建方法的流程图。
图4A至图4D是根据本申请的示例性实施方式的具有基于分割线分离的不同预测区的块单元的示意图。
图5A至图5C是根据本申请的示例性实施方式的具有分类成不同块区域的多个子块的块单元的示意图。
图6示出根据本公开的示例性实施方式的用于重建块单元的另一示例性重建方法的流程图。
图7是根据本申请的示例性实施方式的块单元和多个参考样本的示意图。
图8示出根据本申请的示例性实施方式的图1中的第一电子装置的示例性编码器模块的框图。
具体实施方式
以下描述包含与本公开中的示例性实施方式有关的具体信息。本公开中的附图及其所附详细描述仅针对示例性实施方式。然而,本公开不仅限于这些示例性实施方式。本领域技术人员将想到本公开的其他变型和实施方式。
除非另外指出,否则图中的相似或对应的元件可由相似或对应的附图标号指示。本公开中的附图和图示通常未按比例绘制,并且并不意图对应于实际的相对尺寸。
出于一致性和易于理解的目的,在示例性附图中,可由数字标识相似特征(但在一些示例中未示出)。然而,不同实施方式中的特征可在其他方面有所不同,并且不应将其狭隘地局限于图中所示的内容。
描述使用短语“在一个实施方式中”或“在一些实施方式中”,这些短语可指代相同或不同实施方式中的一个或多个。术语“耦接”被定义为连接,不论是直接连接还是通过中间部件间接连接,并且不一定限于物理连接。术语“包括”意指“包括但不一定限于”并且具体指示在如此描述的组合、组、系列和等效物中的开放式包括或成员身份。
出于解释而非限制的目的,阐述了具体细节(诸如功能实体、技术、协议和标准)以提供对所公开技术的理解。在其他示例中,省略了对众所周知的方法、技术、系统和架构的详细描述,以免不必要的细节使描述模糊。
本领域技术人员将立即认识到,本公开中描述的任何所公开的编码功能或算法可通过硬件、软件或者软件和硬件的组合来实施。所描述的功能可对应于模块,所述模块可以是软件、硬件、固件或其任何组合。
软件实施方式可包括存储在诸如存储器或其他类型的存储装置的计算机可读介质上的计算机可执行指令。例如,具有通信处理能力的一个或多个微处理器或通用计算机可编程有可执行指令并且执行所公开的功能或算法。
微处理器或通用计算机可由专用集成电路(applications specific integratedcircuitry,ASIC)、可编程逻辑阵列形成,且/或使用一个或多个数字信号处理器(digitalsignal processor,DSP)形成。尽管所公开的实施方式中的一些面向在计算机硬件上安装和执行的软件,但是实施为固件或硬件或硬件和软件的组合的替代实施方式完全在本公开的范围内。计算机可读介质包括但不限于随机存取存储器(random-access memory,RAM)、只读存储器(read-only memory,ROM)、可擦除可编程只读存储器(erasable programmableread-only memory,EPROM)、电可擦除可编程只读存储器(electrically erasableprogrammable read-only memory,EEPROM)、闪存、光盘只读存储器(compact disc read-only memory,CD-ROM)、盒式磁带、磁带、磁盘存储装置、或能够存储计算机可读指令的任何其他等效介质。
图1示出根据本公开的示例性实施方式的被配置来编码并解码视频数据的系统100的框图。系统100包括第一电子装置110、第二电子装置120和通信介质130。第一电子装置110可以是源装置,所述源装置包括被配置来编码视频数据并且将已编码的视频数据发射到通信介质130的任何装置。第二电子装置120可以是目标装置,所述目标装置包括被配置来经由通信介质130接收已编码的视频数据并且解码已编码的视频数据的任何装置。
在至少一个实施方式中,第一电子装置110可与第二电子装置120经由线材通信或经由通信介质130无线地通信。第一电子装置110可包括源模块112、编码器模块114和第一接口116。第二电子装置120可包括显示器模块122、解码器模块124和第二接口126。第一电子装置110可以是视频编码器,并且第二电子装置120可以是视频解码器。
在至少一个实施方式中,第一电子装置110和/或第二电子装置120可以是移动电话、平板电脑、台式电脑、笔记本电脑或其他电子装置。图1仅仅示出第一电子装置110和第二电子装置120的一个示例。在其他实施方式中,第一电子装置110和第二电子装置120可包括比所示出更多或更少的部件或具有各种部件的不同配置。
在至少一个实施方式中,源模块112可包括用以捕获新视频的视频捕获装置、用以存储先前所捕获视频的视频档案库和/或用以从视频内容提供商接收视频的视频进给接口。源模块112可生成基于计算机图形的数据作为源视频,或生成直播视频、存档视频和计算机生成的视频的组合作为源视频。视频捕获装置可以是电荷耦合装置(charge-coupleddevice,CCD)图像传感器、互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)图像传感器或相机。
在至少一个实施方式中,编码器模块114和解码器模块124可各自被实施为多种合适的编码器/解码器电路中的任一者,诸如一个或多个微处理器、中央处理单元(centralprocessing unit,CPU)、图形处理单元(graphic processing unit,GPU)、片上系统(system on chip,SoC)、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(field programmable gate array,FPGA)、离散逻辑、软件、硬件、固件或其任何组合。当部分地在软件中实施时,装置可将用于软件的指令存储在合适的非暂时性计算机可读介质中并且使用一个或多个处理器在硬件中执行所述指令以执行所公开的方法。在至少一个实施方式中,编码器模块114和解码器模块124中的每一者可包括在一个或多个编码器或解码器中,其中任一编码器或解码器可在装置中被集成为组合式编码器/解码器(combinedencoder/decoder,CODEC)的部分。
在至少一个实施方式中,第一接口116和第二接口126可利用定制协议或遵循现有标准或事实上的标准,包括但不限于以太网、IEEE 802.11或IEEE 802.15系列;无线USB或电信标准,包括但不限于GSM、CDMA2000、TD-SCDMA、WiMAX、3GPP-LTE或TD-LTE。在至少一个实施方式中,第一接口116和第二接口126可各自包括被配置来经由通信介质130发射和/或存储兼容视频比特流并且经由通信介质130接收兼容视频比特流的任何装置。
在至少一个实施方式中,第一接口116和第二接口126可包括使得兼容视频比特流能够存储在存储装置上或从存储装置被接收的计算机系统接口。例如,第一接口116和第二接口126可包括支持外围部件互连(Peripheral Component Interconnect,PCI)和高速外围部件互连(Peripheral Component Interconnect Express,PCIe)总线协议、专有总线协议、通用串行总线(USB)协议、I2C的芯片组,或可用于互连对等装置的任何其他逻辑和物理结构。
在至少一个实施方式中,显示器模块122可包括使用液晶显示器(liquid crystaldisplay,LCD)技术、等离子体显示器技术、有机发光二极管(organic light emittingdiode,OLED)显示器技术或发光聚合物显示器(light emitting polymer display,LPD)技术以及在其他实施方式中使用的其他显示器技术的显示器。显示器模块122可包括高清晰度显示器或超高清晰度显示器。
图2示出表示根据本申请的示例性实施方式的图1中的第二电子装置120的解码器模块124的实施方式的框图。解码器模块124包括熵解码器(例如,熵解码单元2241)、预测处理器(例如,预测处理单元2242)、逆量化/逆变换处理器(例如,逆量化/逆变换单元2243)、加法器(例如,加法器2244)、滤波器(例如,滤波单元2245)和解码图片缓冲器(例如,解码图片缓冲器2246)。预测处理单元2242还包括帧内预测处理器(例如,帧内预测单元22421)和帧间预测处理器(例如,帧间预测单元22422)。解码器模块124接收比特流并且解码比特流以输出已解码的视频。
熵解码单元2241可从图1中的第二接口126接收包括多个语法元素的比特流并且对比特流执行解析操作以从比特流中提取语法元素。作为解析操作的部分,熵解码单元2241可对比特流进行熵解码以生成量化后变换系数、量化参数、变换数据、运动矢量、帧内模式、分区信息和其他语法信息。
在至少一个实施方式中,熵解码单元2241可执行上下文自适应可变长度编码(context adaptive variable length coding,CAVLC)、上下文自适应二进制算术编码(context adaptive binary arithmetic coding,CABAC)、基于语法的上下文自适应二进制算术编码(syntax-based context-adaptive binary arithmetic coding,SBAC)、概率区间分区熵(probability interval partitioning entropy,PIPE)编码或另一熵编码技术以生成量化后变换系数。在至少一个实施方式中,熵解码单元2241可将量化后变换系数、量化参数和变换数据提供给逆量化/逆变换单元2243并且将运动矢量、帧内模式、分区信息和其他语法信息提供给预测处理单元2242。
在至少一个实施方式中,预测处理单元2242可从熵解码单元2241接收语法元素,诸如运动矢量、帧内模式、分区信息和其他语法信息。预测处理单元2242可接收包括分区信息的语法元素并且根据分区信息来划分图像帧。
在至少一个实施方式中,图像帧中的每一个可根据分区信息被划分成至少一个图像块。至少一个图像块可包括用于重建多个亮度样本的亮度块和用于重建多个色度样本的至少一个色度块。亮度块和至少一个色度块可被进一步划分以生成宏块、编码树单元(coding tree unit,CTU)、编码块(coding block,CB)、其细分和/或另一等效编码单元。
在至少一个实施方式中,在解码过程期间,预测处理单元2242接收预测数据,包括图像帧中的特定图像帧的当前图像块的帧内模式或运动矢量。当前图像块可以是特定的一个图像帧中的亮度块或色度块中的一个。
在至少一个实施方式中,帧内预测单元22421可基于与帧内模式相关的语法元素相对于与当前块单元相同的帧中的一个或多个相邻块对当前块单元执行帧内预测编码以便生成预测块。帧内模式可指定从当前帧内的相邻块中选择的参考样本的位置。在至少一个实施方式中,在色度分量由预测处理单元2242重建时,帧内预测单元22421可基于当前块单元的多个亮度分量来重建当前块单元的多个色度分量。
在至少一个实施方式中,在当前块的亮度分量由预测处理单元2242重建时,帧内预测单元22421可基于当前块单元的多个亮度分量来重建当前块单元的多个色度分量。
在至少一个实施方式中,帧间预测单元22422可基于与运动矢量相关的语法元素相对于一个或多个参考图像块中的一个或多个块对当前块单元执行帧间预测编码以便生成预测块。
在至少一个实施方式中,运动矢量可指示当前图像块内的当前块单元相对于参考图像块内的参考块单元的位移。参考块单元是被确定成紧密地匹配当前块单元的块。
在至少一个实施方式中,帧间预测单元22422接收存储在解码图片缓冲器2246中的参考图像块并且基于所接收参考图像块来重建当前块单元。
在至少一个实施方式中,逆量化/逆变换单元2243可应用逆量化和逆变换以在像素域中重建残余块。逆量化/逆变换单元2243可对残余量化后变换系数应用逆量化以生成残余变换系数,然后对残余变换系数应用逆变换以在像素域中生成残余块。
在至少一个实施方式中,逆变换可由以下变换过程反向应用,诸如:离散余弦变换(discrete cosine transform,DCT)、离散正弦变换(discrete sine transform,DST)、自适应多重变换(adaptive multiple transform,AMT)、模式相关的不可分离的二次变换(mode-dependent non-separable secondary transform,MDNSST)、超立方体吉文斯变换(hypercube-givens transform,HyGT)、信号相关的变换、Karhunen-Loéve变换(Karhunen-Loéve transform,KLT)、小波变换、整数变换、子带变换或概念上类似的变换。
在至少一个实施方式中,逆变换可将残余信息从诸如频域的变换域转换回像素域。在至少一个实施方式中,逆量化程度可通过调节量化参数来修改。求和器2244将残余块加入来自预测处理单元2242的预测块以产生重建块。
在至少一个实施方式中,求和器2244将重建的残余块加入从预测处理单元2242提供的预测块以产生重建块。
在至少一个实施方式中,滤波单元2245可包括去块滤波器、样本自适应偏移(sample adaptive offset,SAO)滤波器、双边滤波器和/或自适应环路滤波器(adaptiveloop filter,ALF)以从重建块中去除块效应。除了去块滤波器、SAO滤波器、双边滤波器和ALF之外,也可使用另外的滤波器(环路中或环路后)。此类滤波器为简洁起见未明确示出但可对求和器2244的输出进行滤波。
在滤波单元2245针对特定图像帧的重建块执行滤波过程之后,滤波单元2245可将已解码的视频输出到显示器模块122或其他视频接收单元。
在至少一个实施方式中,解码图片缓冲器2246可以是存储参考块的参考图片存储器,所述参考块由预测处理单元2242用来(以帧间编码模式)解码比特流。解码图片缓冲器2246可由以下多种存储器装置中的任一种形成,诸如:动态随机存取存储器(dynamicrandom-access memory,DRAM),包括同步DRAM(synchronous DRAM,SDRAM)、磁阻RAM(magneto-resistive RAM,MRAM)、电阻性RAM(resistive RAM,RRAM);或其他类型的存储器装置。
在至少一个实施方式中,解码图片缓冲器2246可与解码器模块124的其他部件在芯片内或相对于那些部件在芯片外。
图3示出根据本公开的示例性实施方式的用于重建块单元的示例性重建方法300的流程图。方法300仅为示例,因为存在多种方式来执行所述方法。
方法300可使用图1和图2所示出的配置来执行,并且在解释方法300时参考了这些图的各种元件。图3所示的每个框可表示所执行的一个或多个过程、方法或子例程。
此外,框的顺序仅为说明性的并且可改变。在不脱离本公开的情况下可添加另外的框或可利用更少的框。
在框310处,解码器模块124接收视频数据的图像帧并且根据所接收视频数据从图像帧确定块单元。视频数据可以是比特流。
参考图1和图2,第二电子装置120可经由第二接口126从诸如第一电子装置110的编码器或其他视频提供商接收比特流。第二接口126可将比特流提供给解码器模块124。
解码器模块124可基于比特流确定图像帧并且根据比特流中的多个分区指示来划分图像帧以确定块单元。例如,解码器模块124可划分图像帧以生成多个编码树单元并且可根据分区指示(例如,基于视频编码标准)进一步划分编码树单元中的一个以确定块单元。
在至少一个实施方式中,熵解码单元2241可解码比特流以确定块单元的多个预测指示并且解码器模块124可基于预测指示进一步重建块单元。预测指示可包括多个标记和多个索引。
在框320处,解码器模块124从候选列表确定第一运动信息和第二运动信息并且确定块单元的分割线以重建块单元。
在至少一个实施方式中,参考图2,解码器模块124可将块单元划分成多个预测区,并且基于第一运动信息和第二运动信息来重建块单元的预测区。
在至少一个实施方式中,预测指示可包括块单元的分区索引。分区索引可指示块单元的分割线。在至少一个实施方式中,当分区索引是三角分区索引时,分割线可以是对角线分割线和反对角线方向中的一者。在至少一个实施方式中,当分区索引是几何分区索引时,分区索引可指示分区角度索引和分区距离索引。分区角度索引可指示分割线的倾斜角,并且分区距离索引可指示分割线与块单元的中心点之间的线偏移。因此,解码器模块124可基于由分区索引指示的倾斜角和线偏移来确定分割线。
在至少一个实施方式中,预测指示可包括第一运动候选索引和第二运动候选索引。在至少一个实施方式中,第一运动候选索引可指示合并候选列表中的第一运动信息,并且第二运动候选索引可指示合并候选列表中的第二运动信息。在至少一个实施方式中,合并候选列表中的多个合并候选模式可选自与块单元相邻的多个相邻块的多个空间运动预测模式、多个共位块的多个时间运动预测模式、存储在先进先出(first-in-first-out,FIFO)表中的基于历史的运动预测模式、多个成对平均运动预测模式和零运动模式。在至少一个实施方式中,第一运动信息可指示第一参考帧和第一参考矢量,并且第二运动信息可指示第二参考帧和第二参考矢量。第一参考帧和第二参考帧可选自块单元的多个参考列表。在一个实施方式中,第一参考帧和第二参考帧可选自参考列表中的同一个。在其他实施方式中,第一参考帧和第二参考帧可选自不同参考列表。在至少一个实施方式中,参考列表的数量可等于2。
图4A至图4B是根据本申请的示例性实施方式的具有不同分割线的块单元的示意图。在至少一个实施方式中,块单元400的分区指示可指示分割线420、第一参考矢量V0、第二参考矢量V1、第一参考帧和第二参考帧。图4C至图4D是根据本申请的示例性实施方式的具有基于分割线分离的不同预测区的块单元的示意图。在本实施方式中,解码器模块124可基于分割线420来划分块单元400以确定预测区441-443。在至少一个实施方式中,块单元可包括多个块分量。在至少一个实施方式中,第一预测区441中的块分量可基于第一参考矢量和第一参考帧来重建,并且第二预测区442中的块分量可基于第二参考矢量和第二参考帧来重建。另外,第三预测区443中的块分量可基于第一参考矢量、第二参考矢量、第一参考帧和第二参考帧来重建。第三预测区443中的块分量可通过以下方式来重建:导出基于第一参考矢量和第一参考帧确定的多个第一参考样本和基于第二参考矢量和第二参考帧确定的多个第二参考样本;并且基于多个混合权重来合并第一参考样本和第二参考样本。在至少一个实施方式中,混合权重可基于分割线420与第三预测区443中的块分量之间的多个分量距离来导出。
在框330处,解码器模块124确定块单元中的子块。
在至少一个实施方式中,参考图2,解码器模块124可划分块单元以生成多个子块。图5A是根据本申请的示例性实施方式的具有多个子块561-576的块单元的示意图,每个子块对应于子块索引(xSbIdx,ySbInx)。在至少一个实施方式中,解码器模块124可确定子块中的特定的一个子块。在一个实施方式中,第一位置索引xSbIdx的多个第一候选索引的数量numSbX可等于四,并且第二位置索引ySbIdx的多个第二候选索引的数量numSbY可等于四。因此,第一位置索引xSbIdx可以是零与numSbX之间的数,并且第二位置索引ySbIdx可以是零与numSBY之间的数。
在框340处,解码器模块124确定子块是否被包括在多个块区域中的覆盖分割线的特定的一个块区域中。在至少一个实施方式中,当解码器模块124确定子块被包括在覆盖分割线的特定块区域中时,方法300可进行到框350。当解码器模块124确定子块不包括在特定块区域中时,方法可结束。
在至少一个实施方式中,参考图2,解码器模块124可划分块单元以生成多个块区域。图5B至图5C是根据本申请的示例性实施方式的具有基于分割线分离的不同块区域的块单元的示意图。
在至少一个实施方式中,解码器模块124可基于子块索引将子块561-576分类成块区域。在至少一个实施方式中,第三块区域583可覆盖分割线420,并且第一块区域581和第二块区域可能不覆盖分割线420。第一块区域581中的子块的大多数块分量可基于第一运动信息来重建,并且第二块区域582中的子块的大多数块分量可基于第二运动信息来重建。因此,当子块被包括在对应于第一预测区441的第一块区域581中时,解码器模块124可存储用于子块的第一运动信息。例如,解码器模块124可存储用于子块562-564、567-568和572的第一运动信息,因为子块562-564、567-568和572被包括在第一块区域581中。另外,当子块被包括在对应于第二预测区442的第二块区域582中时,解码器模块124可存储用于子块的第二运动信息。例如,解码器模块124可存储用于子块565、569-570和573-575的第二运动信息,因为子块562-564、567-568和572被包括在第二块区域582中。解码器模块124可针对包括在不同于覆盖分割线的特定块区域583的其他块区域中的子块直接存储第一运动信息和第二运动信息中的对应一者,方法300可结束而不进行其他程序。
在至少一个实施方式中,第三块区域583中的子块的大多数块分量可基于第一运动信息和第二运动信息来重建。因此,当子块被包括在对应于第三预测区443的第三块区域583中时,方法300可进行到框350以便解码器模块124确定如何存储用于子块的第一运动信息和第二运动信息中的至少一者。
在框350处,解码器模块124确定第一运动信息的第一列表标记是否与第二运动信息的第二列表标记相同。在至少一个实施方式中,当第一列表标记与第二列表标记相同时,方法300可进行到框360。当第一列表标记不同于第二列表标记时,方法300可进行到框370。
在至少一个实施方式中,参考图2和图5B,当子块被包括在特定块区域583中时,解码器模块124可将第一列表标记与第二列表标记进行比较。当子块被包括在特定块区域583中时,子块中的大多数块分量可基于第一运动信息和第二运动信息来重建。因此,当第一列表标记不同于第二列表标记时,特定块区域583中的块分量可基于两个参考列表中的参考帧来重建。另外,当第一列表标记与第二列表标记相同时,特定块区域583中的块分量可基于同一参考列表中的参考帧来重建。
在框360处,当第一列表标记与第二列表标记相同时,解码器模块124存储用于子块的第一运动信息和第二运动信息中的预定义的一者。
在至少一个实施方式中,参考图2和图5B,当块单元400的第一列表标记与块单元400的第二列表标记相同并且子块被包括在特定块区域583中时,子块中的大多数块分量可通过根据参考列表中的一个导出第一参考样本和第二参考样本来重建。
由于运动信息被存储以便基于存储的运动信息来重建多个后续块,因此存储的运动信息可能不影响基于第一参考样本和第二参考样本的混合结果生成的多个残余分量。因此,参考图1,当编码器模块114和解码器模块124执行方法300以存储第一运动信息和第二运动信息中的预定义的一者时,编码器模块114和解码器模块124可存储用于子块的同一运动信息。在至少一个实施方式中,当第一参考帧和第二参考帧包括在同一参考列表中时,解码器模块124可直接存储第一运动信息和第二运动信息中的预定义的一者以减少缓冲器的使用。因此,解码器模块124存储用于子块的第一运动信息和第二运动信息中的预定义的一者。
在至少一个实施方式中,解码器模块124可直接存储第一运动信息和第二运动信息中的预定义的一者作为用于子块的存储的运动信息,而无需进一步检查两个参考帧与其他参考列表之间的关系。当第一列表标记与第二列表标记相同时,解码器模块124可直接存储预定义运动信息,而无需检查第一参考帧和第二参考帧中的至少一者是否包括在参考列表中的由多个标记值中的不同于第一列表标记和第二列表标记的特定的一个标记值指示的特定的一个参考列表中。例如,参考列表的数量等于二,因此标记值可包括零和一。在一个实施方式中,当第一列表标记和第二列表标记等于零时,特定标记值等于一。第一列表标记和第二列表标记可指示第一参考列表L0,并且特定标记值可指示第二参考列表L1。因此,当第一列表标记和第二列表标记等于零时,解码器模块124可直接存储预定义运动信息,而无需检查第一参考帧和第二参考帧中的至少一者是否包括在由等于一的特定标记值指示的第二参考列表L1中。
在至少一个实施方式中,第一运动信息和第二运动信息中的预定义的一者可以是第二运动信息。因此,解码器模块124直接存储用于子块的第二运动信息。由于第二运动信息根据比特流中的块单元的第二候选索引导出,因此存储的运动信息可根据比特流中的第二候选索引导出。
在框370中,解码器模块124存储用于子块的第一运动信息和第二运动信息两者。
在至少一个实施方式中,参考图2和图5B,当块单元400的第一列表标记不同于块单元400的第二列表标记并且子块被包括在特定块区域583中时,子块中的大多数块分量可通过根据不同参考列表导出第一参考样本和第二参考样本来重建。
在至少一个实施方式中,当块单元400的第一列表标记不同于块单元400的第二列表标记并且子块被包括在特定块区域583中时,子块中的大多数块分量可通过根据第一参考列表导出第一参考样本以及根据第二参考列表导出第二参考样本来重建。因此,解码器模块124可直接存储用于子块的第一运动信息和第二运动信息而无需进一步确定。
在至少一个实施方式中,解码器模块124可针对具有相同参考列表的子块直接存储第一运动信息和第二运动信息中的预定义的一者并且针对具有不同参考列表的子块直接存储第一运动信息和第二运动信息两者。因此,当子块被包括在特定块区域583中时,解码器模块124可仅基于第一列表标记与第二列表标记之间的比较来确定是否将第一运动信息和第二运动信息一起存储为用于子块的所存储的运动信息。
在框380处,当后续块基于子块来预测时,解码器模块124基于所存储的运动信息重建后续块。
在至少一个实施方式中,参考图2,解码器模块124可在块单元被重建之后保持重建图像帧和多个后续帧。因此,块单元的所存储信息可用于重建图像帧和后续帧中的后续块。在至少一个实施方式中,后续帧可包括在图像帧的重建之后重建的多个未重建帧。另外,后续块可包括图像帧和后续帧中的多个未重建块。未重建块可在块单元的重建之后被重建。
图6示出根据本公开的示例性实施方式的用于重建块单元的示例性方法600的流程图。方法600仅为示例,因为存在多种方式来执行所述方法。
方法600可使用图1和图2所示出的配置来执行,并且在解释方法600时参考了这些图的各种元件。图6所示的每个框可表示所执行的一个或多个过程、方法或子例程。
此外,框的顺序仅为说明性的并且可改变。在不脱离本公开的情况下可添加另外的框或可利用更少的框。
在框610处,解码器模块124接收视频数据的图像帧并且根据所接收视频数据从图像帧确定块单元。视频数据可以是比特流。
参考图1和图2,第二电子装置120可经由第二接口126从诸如第一电子装置110的编码器或其他视频提供商接收比特流。第二接口126可将比特流提供给解码器模块124。
解码器模块124可基于比特流确定图像帧并且根据比特流中的多个分区指示来划分图像帧以确定块单元。例如,解码器模块124可划分图像帧以生成多个编码树单元并且可根据分区指示(例如,基于视频编码标准)进一步划分编码树单元中的一个以确定块单元。
在至少一个实施方式中,熵解码单元2241可解码比特流以确定块单元的多个预测指示并且解码器模块124可基于预测指示进一步重建块单元。预测指示可包括多个标记和多个索引。
在框620处,解码器模块124通过根据视频数据确定的第一预测模式来确定块单元的多个重建分量。
在至少一个实施方式中,块单元可包括多个第一块分量和多个第二块分量。在所述实施方式中,第一块分量可以是多个亮度块分量,并且第二块分量可以是多个色度块分量。在至少一个实施方式中,预测指示可包括用以指示如何重建块单元的第一块分量的至少一个第一预测标记。例如,预测指示可包括用以从帧内预测模式和帧间预测中选择第一预测模式的预测模式标记。
在至少一个实施方式中,参考图2,解码器模块124可基于比特流中的至少一个第一预测标记来确定第一预测模式,并且基于第一预测模式来重建块单元。在至少一个实施方式中,当第一预测模式是帧内预测模式时,解码器模块124可确定与块单元相邻的多个相邻块,并且基于相邻块来重建块单元的第一块分量以确定重建分量。在至少一个实施方式中,当第一预测模式是帧间预测模式时,解码器模块124可确定在重建图像帧之前重建的多个参考帧,并且基于参考帧来重建块单元的第一块分量以确定重建分量。因此,针对块单元的亮度块分量导出重建分量。
在框630处,解码器模块124基于至少一个采样参数从与块单元相邻的多个相邻块中选择多个参考样本用于第二预测模式。
在至少一个实施方式中,预测指示可包括用以指示如何重建块单元的第二块分量的至少一个第二预测标记。例如,预测指示可包括用以确定是否基于线性模型模式来预测第二块分量的线性模型标记。在至少一个实施方式中,预测指示可包括用于当线性模型标记等于一时从多个候选模型模式中选择预测模型模式的线性模型索引。
在至少一个实施方式中,至少一个采样参数可包括起始参数、区间参数和数量参数中的至少一者。图7是根据本申请的示例性实施方式的块单元和多个参考样本的示意图。在至少一个实施方式中,块单元700的起始参数可根据多个起始候选来确定,块单元700的区间参数可根据多个区间候选来确定,并且块单元700的数量参数可根据多个数量候选来确定。
在至少一个实施方式中,块单元700的起始参数可等于起始候选中的根据比特流确定的特定起始候选。在至少一个实施方式中,块单元700的至少一个起始点可基于针对块单元700确定的特定的一个起始候选来直接设定。起始候选中的每一个可以是整数候选Ci。例如,当特定整数候选Ci等于起始整数Si时,至少一个起始点可包括两个起始点(Si,-1)和(-1,Si)。参考图7,起始整数Si可等于二,因此第一参考线710和第二参考线720中的两个起始点712和722位于(2,-1)和(-1,2)处。在至少一个实施方式中,块单元700的至少一个起始点可基于块单元700的块大小W×H和特定起始候选来计算。在所述实施方式中,起始候选中的每一个可以是分数候选Cf。例如,当特定分数候选Cf等于起始分数Sf时,两个起始点可位于(Sf×W,-1)和(-1,Sf×H)处。参考图7,起始分数Sf可等于1/2。在另一实施方式中,起始候选中的每一个可包括整数候选Si和分数候选Sf。例如,当特定整数候选Ci等于起始整数Si并且特定分数候选Cf等于起始分数Sf时,两个起始点可位于(Si+Sf×W,-1)和(-1,Si+Sf×H)处。在至少一个实施方式中,块单元700的至少一个起始点可基于块单元700的起始底Sb和特定起始候选来计算。在所述实施方式中,起始候选中的每一个可以是整数候选Ci。例如,当特定整数候选Ci等于起始整数Si时,两个起始点可位于(Sb×Si,-1)和(-1,Sb×Si)处。在另一实施方式中,当特定整数候选Ci等于起始整数Si时,两个起始点可位于(Sb+Si,-1)和(-1,Sb+Si)处。在至少一个实施方式中,块单元700的至少一个起始点可基于块单元700的起始底Sb、区间底Ib和特定起始候选来计算。在所述实施方式中,起始候选中的每一个可以是整数候选Ci。例如,当特定整数候选Ci等于起始整数Si时,两个起始点可位于(Sb+Ib×Si,-1)和(-1,Sb+Ib×Si)处。在至少一个实施方式中,起始底Sb和区间底Ib可如下导出:
Sb=numSampN>>(2+numIs4N)
Ib=Max(1,numSampN>>(1+numIs4N))
numIs4N=(availT&&availL&&predModeIntra==INTRA_LT_CCLM)?0:1
其中numSampN表示上和右上numSampT上的可用相邻色度样本的数量或左和左下numSampL上的可用相邻色度样本的数量,availT和availL表示相邻块的可用性,predModeIntra表示块单元的帧内预测模式,并且INTRA_LT_CCLM是交叉分量线性模型模式候选中的一个。
在至少一个实施方式中,区间候选中的每一个可以是整数候选Ii。两个相邻参考样本之间的距离可被设定为等于选自整数候选Ii的区间参数。参考图7,区间参数可等于四,因此第一参考线710和第二参考线720中的两个第二参考样本714和724位于(6,-1)和(-1,6)处。在至少一个实施方式中,两个相邻参考样本之间的距离可基于块单元700的区间底Ib和区间参数来计算。在所述实施方式中,区间候选中的每一个可等于正整数。例如,当区间参数等于区间整数Ii时,两个相邻参考样本之间的距离可等于Ib×Ii。另外,当区间参数等于区间整数Ii时,两个相邻参考样本之间的距离可等于Ib+Ii。在至少一个实施方式中,两个相邻参考样本之间的距离可基于块单元700的区间底Ib、所导出起始底Sd和区间参数来计算。在所述实施方式中,区间候选中的每一个可等于正整数。例如,当区间参数等于区间整数Ii时,两个相邻参考样本之间的距离可等于Ib+Sd×Ii。在至少一个实施方式中,数量候选可包括多个上数量候选和多个左数量候选。在块单元700上方的参考样本的数量可等于选自上数量候选的数量参数,并且在块单元700左侧的参考样本的数量可等于选自左数量候选的数量参数。参考图7,数量参数可等于二,以用于指示在块单元700上方的参考样本的数量等于二并且在块单元700左侧的参考样本的数量等于二。因此,对于块单元700仅存在四个参考样本712、714、722和724。
在至少一个实施方式中,至少一个采样参数可以是起始参数。在一个实施方式中,起始参数在多个候选模型模式中可以是固定的。因此,当解码器模块124从候选模型模式中选择预测模型模式时,起始参数可根据预测模型模式来确定。在其他实施方式中,起始参数可基于根据比特流确定的起始索引来确定。因此,解码器模块124基于起始索引的值来确定起始参数。
在至少一个实施方式中,至少一个采样参数可包括起始参数、区间参数和数量参数。在至少一个实施方式中,起始参数、区间参数和数量参数在多个候选模型模式中可以是固定的。例如,第一候选模型模式可包括起始候选S1、第一区间候选I1和第一数量候选Q1,并且第N个候选模型模式可包括第N个起始候选Sn、第N个区间候选In和第N个数量候选Qn。在一个实施方式中,起始候选S1-Sn可彼此相等或不同,区间候选I1-In可彼此相等或不同,并且数量候选Q1-Qn可彼此相等或不同。例如,当候选模型模式的数量等于四时,起始候选S1-S2可彼此相等,起始候选S3-S4可彼此相等并且不同于起始候选S1-S2,区间候选I1-I4中的每一个可彼此相等,数量候选Q1和Q3可彼此相等,并且数量候选Q2和Q4可彼此相等并且不同于数量候选Q1和Q3。
在框640处,解码器模块124基于参考样本导出第二预测模式的多个模型参数。
在至少一个实施方式中,参考图2和图7,解码器模块124可确定参考样本中的多个第一参考分量和多个第二参考分量。在至少一个实施方式中,第一参考分量可以是多个亮度参考分量,并且第二参考分量可以是多个色度参考分量。在至少一个实施方式中,解码器模块124可对第一参考分量进行降采样以生成多个降采样的参考分量。在至少一个实施方式中,降采样的参考分量中的每一个基于第一参考分量的N来生成。在一个实施方式中,数量N可等于2×K,并且数量K可以是整数。例如,数量K可等于二并且数量N可等于四。
在至少一个实施方式中,解码器模块124可基于参考样本导出模型方程的模型参数。在一个实施方式中,解码器模块124可基于第一参考分量和第二参考分量导出模型方程。在其他实施方式中,解码器模块124可基于降采样的参考分量和第二参考分量导出模型方程。在至少一个实施方式中,块单元的模型方程可如下导出:
Predc[x,y]=α×Rec′L[x,y]+β
其中predC(i,j)表示块单元中的多个预测分量,并且recL(i,j)表示相同块单元的多个降采样的重建分量。在至少一个实施方式中,模型参数α和β基于参考样本导出。
在至少一个实施方式中,解码器模块124可选择降采样的参考分量的两个更小值Xa0和X a1以及两个更大值X b0和X b1,并且确定对应于四个所选择降采样的参考分量的四个第二参考分量Y a0、Y a1、Y b0和Y b1。接着,解码器模块124确定X a0和X a1的第一平均值XA、X b0和X b1的第二平均值XB、Y a0和Y a1的第三平均值YA以及Y b0和Y b1的第四平均值YB。模型参数α可等于(Ya-Yb)/(Xa-Xb),并且模型参数β可等于Yb–α×Xb。在至少一个实施方式中,模型参数α和β可通过任何其他导出方法基于参考样本导出。
在框650处,解码器模块124根据第二预测模式,基于重建的分量生成块单元的多个预测分量。
在至少一个实施方式中,参考图2,解码器模块124可对重建分量进行降采样以生成降采样的重建分量。在至少一个实施方式中,降采样的重建分量中的每一个基于第一参考分量的M来生成。在一个实施方式中,数量M可等于2×L,并且数量L可以是整数。例如,数量L可等于二并且数量M可等于四。在至少一个实施方式中,数量K可等于数量L,并且数量N可等于数量M。
在至少一个实施方式中,解码器模块124可将降采样的重建分量代入模型方程以生成预测分量。因此,可针对块单元的色度块分量生成预测分量。块单元的色度块分量可通过将预测分量加入块单元的根据比特流确定的多个残余分量来重建。在至少一个实施方式中,块单元的残余分量可以是多个色度残余分量。在至少一个实施方式中,解码器模块124可重建图像帧中的所有其他块单元以用于重建图像帧和视频。
图8示出图1中的编码器模块114。编码器模块114可包括预测处理器(例如,预测处理单元8141)、至少第一求和器(例如,第一求和器8142)和第二求和器(例如,第二求和器8145)、变换/量化处理器(例如,变换/量化单元8143)、逆量化/逆变换处理器(例如,逆量化/逆变换单元8144)、滤波器(例如,滤波单元8146)、解码图片缓冲器(例如,解码图片缓冲器8147)和熵编码器(例如,熵编码单元8148)。编码器模块114的预测处理单元8141还可包括分区处理器(例如,分区单元81411)、帧内预测处理器(例如,帧内预测单元81412)和帧间预测处理器(例如,帧间预测单元81413)。编码器模块114可接收源视频并且编码源视频以输出比特流。
编码器模块114可接收包括多个图像帧的源视频,然后根据编码结构来划分图像帧。图像帧中的每一个可被划分成至少一个图像块。
至少一个图像块可包括具有多个亮度样本的亮度块和具有多个色度样本的至少一个色度块。亮度块和至少一个色度块可被进一步划分以生成宏块、编码树单元(codingtree unit,CTU)、编码块(coding block,CB)、其细分和/或另一等效编码单元。
在至少一个实施方式中,编码器模块114可执行源视频的另外的细分。应注意,实施方式通常适用于视频编码,而不管源视频在编码之前和/或期间被如何分区。
在至少一个实施方式中,在编码过程期间,预测处理单元8141可在编码过程期间接收图像帧中的特定的一个图像帧的当前图像块。当前图像块可以是特定图像帧中的亮度块或色度块中的一个。
分区单元81411可将当前图像块划分成多个块单元。帧内预测单元81412可相对于与当前块单元相同的帧中的一个或多个相邻块对当前块单元执行帧内预测编码以便提供空间预测。帧间预测单元81413可相对于一个或多个参考图像块中的一个或多个块对当前块单元执行帧间预测编码以便提供时间预测。
在至少一个实施方式中,预测处理单元8141可基于诸如代价函数的模式选择方法来选择由帧内预测单元81412和帧间预测单元81413生成的编码结果中的一者。模式选择方法可以是率失真优化(rate-distortion optimization,RDO)过程。
预测处理单元8141可确定所选择编码结果并且将对应于所选择编码结果的预测块提供给第一求和器8142以用于生成残余块并且提供给第二求和器8145以用于重建已编码的块单元。预测处理单元8141可进一步将语法元素(诸如运动矢量、帧内模式指示符、分区信息和其他语法信息)提供给熵编码单元8148。
在至少一个实施方式中,帧内预测单元81412可对当前块单元进行帧内预测。帧内预测单元81412可确定针对与当前块单元相邻的重建样本的帧内预测模式以便编码当前块单元。
在至少一个实施方式中,帧内预测单元81412可使用各种帧内预测模式来编码当前块单元,并且帧内预测单元81412或预测处理单元8141可从所选择模式中选择适当的帧内预测模式。帧内预测单元81412可使用交叉分量预测模式来编码当前块单元以基于当前块单元的亮度分量来预测当前块单元的两个色度分量中的一个。帧内预测单元81412可基于当前块单元的两个色度分量中的第二色度分量来预测当前块单元的两个色度分量中的第一色度分量。
在至少一个实施方式中,作为由帧内预测单元81412执行的帧内预测的替代,帧间预测单元81413可对当前块单元进行帧间预测。帧间预测单元81413可执行运动估计以估计当前块单元的运动以用于生成运动矢量。
运动矢量可指示当前图像块内的当前块单元相对于参考图像块内的参考块单元的位移。帧间预测单元81413可接收存储在解码图片缓冲器8147中的至少一个参考图像块并且基于所接收参考图像块来估计运动以生成运动矢量。
在至少一个实施方式中,第一求和器8142可通过从原始当前块单元中减去由预测处理单元8141确定的预测块来生成残余块。第一求和器8142可表示执行此减法运算的一个或多个部件。
在至少一个实施方式中,变换/量化单元8143可对残余块应用变换以便生成残余变换系数,然后量化残余变换系数以进一步减小比特率。变换可以是DCT、DST、AMT、MDNSST、HyGT、信号相关的变换、KLT、小波变换、整数变换、子带变换或概念上类似的变换中的一种。
在至少一个实施方式中,变换可将残余信息从像素值域转换成诸如频域的变换域。量化程度可通过调节量化参数来修改。
在至少一个实施方式中,变换/量化单元8143可执行包括量化后变换系数的矩阵的扫描。替代地,熵编码单元8148可执行扫描。
在至少一个实施方式中,熵编码单元8148可从预测处理单元8141和变换/量化单元8143接收多个语法元素,包括量化参数、变换数据、运动矢量、帧内模式、分区信息和其他语法信息。熵编码单元8148可将语法元素编码成比特流。
在至少一个实施方式中,熵编码单元8148可通过CAVLC、CABAC、SBAC、PIPE编码或另一熵编码技术对量化后变换系数进行熵编码以生成已编码的比特流。已编码的比特流可被发射到另一装置(即,图1中的第二电子装置120)或存档以用于稍后发射或检索。
在至少一个实施方式中,逆量化/逆变换单元8144可应用逆量化和逆变换以在像素域中重建残余块以供稍后用作参考块。第二求和器8145可将重建的残余块加入从预测处理单元8141提供的预测块以便产生重建块以用于存储在解码图片缓冲器8147中。
在至少一个实施方式中,滤波单元8146可包括去块滤波器、SAO滤波器、双边滤波器和/或ALF以从重建块中去除块效应。除了去块滤波器、SAO滤波器、双边滤波器和ALF之外,可使用另外的滤波器(环路中或环路后)。此类滤波器为简洁起见未示出并且可对第二求和器8145的输出进行滤波。
在至少一个实施方式中,解码图片缓冲器8147可以是存储参考块的参考图片存储器,所述参考块由编码器模块114用来诸如以帧内或帧间编码模式编码视频。解码图片缓冲器8147可包括多种存储器装置,诸如:DRAM,包括SDRAM、MRAM、RRAM;或其他类型的存储器装置。解码图片缓冲器8147可与编码器模块114的其他部件在芯片内或相对于那些部件在芯片外。
在至少一个实施方式中,编码器模块114可执行如图3所示的用于重建块单元的示例性重建方法300。方法300可使用图1和图8所示出的配置来执行,并且在解释方法300时参考了这些图的各种元件。图3所示的每个框可表示所执行的一个或多个过程、方法或子例程。此外,框的顺序仅为说明性的并且可改变。在不脱离本公开的情况下可添加另外的框或可利用更少的框。
在框310处,编码器模块114接收视频数据的图像帧并且根据所接收视频数据从图像帧确定块单元。视频数据可以是视频。
在至少一个实施方式中,参考图1和图8,第一电子装置110可经由源模块112接收视频。编码器模块114可根据视频确定图像帧并且划分图像帧以确定块单元。
在至少一个实施方式中,第一电子装置110的预测处理单元8141可经由分区单元81411根据视频确定块单元,并且编码器模块114可基于分区单元81411的分区结果将多个分区指示提供到比特流中。
在框320处,编码器模块114确定来自候选列表的第一运动信息和第二运动信息并且确定块单元的分割线以重建块单元。
在至少一个实施方式中,参考图8,编码器模块114可生成由帧内预测单元81412和帧间预测单元81413生成的多个编码结果。接着,编码器模块114可基于诸如代价函数的模式选择方法来选择编码结果中的一个。模式选择方法可以是率失真优化(RDO)过程。在至少一个实施方式中,当所选择编码结果基于分割线、第一运动信息和第二运动信息来生成时,编码器模块114可将块单元划分成多个预测区,并且基于第一运动信息和第二运动信息来预测块单元的预测区。
在至少一个实施方式中,当分割线基于三角分区模式来生成时,分割线可以是对角线分割线和反对角线方向中的一者。在至少一个实施方式中,当分割线基于几何分区模式来生成时,分割线可由分割线的倾斜角和分割线与块单元的中心点之间的线偏移来确定。因此,编码器模块114可将分割线的分区索引提供到比特流中,所述分区索引指示倾斜角和线偏移。
在至少一个实施方式中,第一运动信息和第二运动信息可包括在块单元的合并候选列表中。在至少一个实施方式中,第一运动信息可指示第一参考帧和第一参考矢量,并且第二运动信息可指示第二参考帧和第二参考矢量。第一参考帧和第二参考帧可选自块单元的多个参考列表。
在至少一个实施方式中,参考图8,第一电子装置110中的编码器模块114的第一求和器8142可基于所选择编码结果生成残余块,并且将包括多个系数的比特流提供给第二电子装置120,所述多个系数对应于残余块中的多个残余分量。
在至少一个实施方式中,编码器模块114可再次基于所选择编码结果重建块单元以用于预测图像帧中的其他块单元。块单元可通过将所选择编码结果加入子块的残余块来重建。
在框330处,编码器模块114确定块单元中的子块。
在至少一个实施方式中,参考图5A和图8,编码器模块114可划分块单元400以生成多个子块561-576。
在框340处,编码器模块114确定子块是否被包括在多个块区域中的覆盖分割线的特定的一个块区域中。在至少一个实施方式中,当编码器模块114确定子块被包括在覆盖分割线的特定的一个块区域中时,方法300可进行到框350。当编码器模块114确定子块不包括在特定的一个块区域中时,方法可结束。
在至少一个实施方式中,参考图5B至图5C和图8,编码器模块114可划分块单元以生成多个块区域581-583。在至少一个实施方式中,编码器模块114可将子块561-576分类成块区域581-583。在至少一个实施方式中,第三块区域583可覆盖分割线420,并且第一块区域581和第二块区域可能不覆盖分割线420。第一块区域581中的子块的大多数块分量可仅基于第一运动信息来预测,并且第二块区域582中的子块的大多数块分量可仅基于第二运动信息来预测。因此,当子块被包括在对应于第一预测区441的第一块区域581中时,编码器模块114可存储用于子块的第一运动信息。另外,当子块被包括在对应于第二预测区442的第二块区域582中时,编码器模块114可存储用于子块的第二运动信息。
在至少一个实施方式中,第三块区域583中的子块的大多数块分量可基于第一运动信息和第二运动信息来预测。因此,当子块被包括在对应于第三预测区443的第三块区域583中时,方法300可进行到框350以便编码器模块114以确定如何存储用于子块的第一运动信息和第二运动信息中的至少一者。
在框350处,编码器模块114确定第一运动信息的第一列表标记是否与第二运动信息的第二列表标记相同。在至少一个实施方式中,当第一列表标记与第二列表标记相同时,方法300可进行到框360。当第一列表标记不同于第二列表标记时,方法300可进行到框370。
在至少一个实施方式中,参考图5B至图5C和图8,当子块被包括在特定的一个块区域583中时,编码器模块114可将第一列表标记与第二列表标记进行比较。当第一列表标记不同于第二列表标记时,特定的一个块区域583中的块分量可基于两个参考列表中的参考帧来预测。另外,当第一列表标记与第二列表标记相同时,特定的一个块区域583中的块分量可基于同一参考列表中的参考帧来预测。
在框360处,当第一列表标记与第二列表标记相同时,编码器模块114存储用于子块的第一运动信息和第二运动信息中的预定义的一者。
在至少一个实施方式中,参考图5B至图5C和图8,当块单元400的第一列表标记与块单元400的第二列表标记相同并且子块被包括在特定的一个块区域583中时,子块中的大多数块分量可通过根据参考列表中的一个导出第一参考样本和第二参考样本来预测。
由于运动信息被存储以便基于存储的运动信息来预测多个后续块,因此存储的运动信息可能不影响基于第一参考样本和第二参考样本的混合结果生成的块单元的多个残余分量。因此,参考图1,当编码器模块114和解码器模块124执行方法300以存储第一运动信息和第二运动信息中的预定义的一者时,编码器模块114和解码器模块124可存储用于子块的同一运动信息。在至少一个实施方式中,当第一参考帧和第二参考帧包括在同一参考列表中时,编码器模块114可直接存储第一运动信息和第二运动信息中的预定义的一者以减少缓冲器的使用。因此,编码器模块114存储用于子块的第一运动信息和第二运动信息中的预定义的一者。
在至少一个实施方式中,第一运动信息和第二运动信息中的预定义的一者可以是第二运动信息。因此,编码器模块114直接存储用于子块的第二运动信息。在至少一个实施方式中,比特流可包括指示第一运动信息的第一候选索引和指示第二运动信息的第二候选索引。因此,解码器模块124可根据比特流中的块单元的第二候选索引确定第一运动信息和第二运动信息中的预定义的一者。
在框370中,编码器模块114存储用于子块的第一运动信息和第二运动信息两者。
在至少一个实施方式中,参考图5B至图5C和图8,当块单元400的第一列表标记不同于块单元400的第二列表标记并且子块被包括在特定的一个块区域583中时,子块中的大多数块分量可通过根据不同参考列表导出第一参考样本和第二参考样本来预测。因此,编码器模块114直接存储用于子块的第一运动信息和第二运动信息而无需进一步确定。
在至少一个实施方式中,编码器模块114可针对具有相同参考列表的子块直接存储第一运动信息和第二运动信息中的预定义的一者并且针对具有不同参考列表的子块直接存储第一运动信息和第二运动信息两者。因此,当子块被包括在特定的一个块区域583中时,编码器模块114可仅基于第一列表标记与第二列表标记之间的比较来确定是否将第一运动信息和第二运动信息一起存储为用于子块的存储的运动信息。
在框380处,当后续块基于子块来预测时,编码器模块114基于存储的运动信息重建后续块。
在至少一个实施方式中,参考图8,编码器模块114可在块单元被重建之后保持预测图像帧和多个后续帧。因此,块单元的所存储信息可用于预测图像帧和后续帧中的后续块。在至少一个实施方式中,后续帧可包括在图像帧的重建之后预测的多个未预测帧。另外,后续块可包括图像帧和后续帧中的多个未预测块。未预测块可在块单元的重建之后被预测。
在至少一个实施方式中,编码器模块114可执行如图6所示的用于重建块单元的示例性重建方法600。方法600可使用图1和图8所示出的配置来执行,并且在解释方法600时参考了这些图的各种元件。图6所示的每个框可表示所执行的一个或多个过程、方法或子例程。此外,框的顺序仅为说明性的并且可改变。在不脱离本公开的情况下可添加另外的框或可利用更少的框。
在框610处,编码器模块114接收视频数据的图像帧并且根据所接收视频数据从图像帧确定块单元。视频数据可以是视频。
在至少一个实施方式中,参考图1和图8,第一电子装置110可经由源模块112接收视频。编码器模块114可根据视频确定图像帧并且划分图像帧以确定块单元。
在至少一个实施方式中,第一电子装置110的预测处理单元8141可经由分区单元81411根据视频确定块单元,并且编码器模块114可基于分区单元81411的分区结果将多个分区指示提供到比特流中。
在框620处,编码器模块114通过根据视频数据确定的第一预测模式来确定块单元的多个重建分量。
在至少一个实施方式中,块单元可包括多个第一块分量和多个第二块分量。第一块分量可以是多个亮度块分量,并且第二块分量可以是多个色度块分量。在至少一个实施方式中,参考图8,编码器模块114可生成由帧内预测单元81412和帧间预测单元81413生成的多个编码结果。接着,编码器模块114可基于诸如代价函数的模式选择方法来选择编码结果中的一个。模式选择方法可以是率失真优化(RDO)过程。用于所选择编码结果的亮度预测模式可被设定为第一预测模式。在至少一个实施方式中,第一求和器8142可通过从第一块分量中减去编码结果来生成残余块。在至少一个实施方式中,残余块可由变换/量化单元8143变换并量化。在至少一个实施方式中,逆量化/逆变换单元8144可应用逆量化和逆变换以在像素域中重建残余块以供稍后用作参考块。第二求和器8145可将重建的残余块加入从预测处理单元8141提供的编码结果以便产生重建分量以用于存储在解码图片缓冲器8147中。在至少一个实施方式中,针对块单元的亮度块分量导出重建分量。
在框630处,编码器模块114基于至少一个采样参数针对第二预测模式从与块单元相邻的多个相邻块中选择多个参考样本。
在至少一个实施方式中,参考图8,编码器模块114可基于用于第二块分量的模式选择方法来选择编码结果中的一个。用于所选择编码结果的色度预测模式可被设定为第二预测模式。在至少一个实施方式中,第二预测模式可选自多个候选模型模式。
在至少一个实施方式中,至少一个采样参数可包括起始参数、区间参数和数量参数中的至少一者。在至少一个实施方式中,块单元700的起始参数可根据多个起始候选来确定,块单元700的区间参数可根据多个区间候选来确定,并且块单元700的数量参数可根据多个数量候选来确定。
在至少一个实施方式中,块单元700的起始参数可等于起始候选中的根据比特流确定的特定的一个起始候选。在一个实施方式中,块单元700的至少一个起始点可基于针对块单元700确定的特定起始候选来直接设定。在所述实施方式中,起始候选中的每一个可以是整数候选Ci。在一个实施方式中,块单元700的至少一个起始点可基于块单元700的块大小W×H和特定起始候选来计算。在所述实施方式中,起始候选中的每一个可以是分数候选Cf,或包括整数候选Ci和分数候选Cf。在一个实施方式中,块单元700的至少一个起始点可基于块单元700的起始底Sb和特定起始候选通过将起始底Sb加入特定起始候选或通过将起始底Sb乘以特定起始候选来计算。在所述实施方式中,起始候选中的每一个可以是整数候选Ci。在一个实施方式中,块单元700的至少一个起始点可基于块单元700的起始底Sb、区间底Ib和特定起始候选来计算。在所述实施方式中,起始候选中的每一个可以是整数候选Ci。在至少一个实施方式中,区间候选中的每一个可以是整数候选Ii。两个相邻参考样本之间的距离可被设定为等于选自整数候选Ii的区间参数。在一个实施方式中,两个相邻参考样本之间的距离可基于块单元700的区间底Ib和区间参数通过将区间底Ib加入区间参数或通过将区间底Ib乘以区间参数来计算。在一个实施方式中,两个相邻参考样本之间的距离可基于块单元700的区间底Ib、所导出起始底Sd和区间参数来计算。在至少一个实施方式中,数量候选可包括多个上数量候选和多个左数量候选。在块单元700上方的参考样本的数量可等于选自上数量候选的数量参数,并且在块单元700左侧的参考样本的数量可等于选自左数量候选的数量参数。
在至少一个实施方式中,至少一个采样参数可以是起始参数。在一个实施方式中,起始参数在多个候选模型模式中可以是固定的。
在至少一个实施方式中,至少一个采样参数可包括起始参数、区间参数和数量参数。在至少一个实施方式中,起始参数、区间参数和数量参数在候选模型模式中的每一个中可以是固定的。
在框640处,编码器模块114基于参考样本导出第二预测模式的多个模型参数。
在至少一个实施方式中,参考图8,编码器模块114可确定参考样本中的多个第一参考分量和多个第二参考分量。在至少一个实施方式中,第一参考分量可以是多个亮度参考分量,并且第二参考分量可以是多个色度参考分量。在至少一个实施方式中,编码器模块114可对第一参考分量进行降采样以生成多个降采样的参考分量。
在至少一个实施方式中,编码器模块114可基于参考样本导出模型方程的模型参数。在至少一个实施方式中,块单元的模型方程可如下导出:
Predc[x,y]=α×Rec′L[x,y]+β
其中predC(i,j)表示块单元中的多个预测分量,并且recL(i,j)表示相同块单元的多个降采样的重建分量。在至少一个实施方式中,模型参数α和β基于参考样本导出。
在框650处,编码器模块114根据第二预测模式基于重建分量生成块单元的多个预测分量。
在至少一个实施方式中,参考图8,编码器模块114可对重建分量进行降采样以生成降采样的重建分量。在至少一个实施方式中,编码器模块114可将降采样的重建分量代入模型方程以生成预测分量。因此,可针对块单元的色度块分量生成预测分量。在至少一个实施方式中,可在第一求和器8142中通过从视频中的原始第二块分量中减去预测分量来生成色度残余块并且在第二求和器8145中将色度残余块加入回预测分量以生成多个色度重建分量。在至少一个实施方式中,编码器模块114可预测图像帧中的所有其他块单元并且重建已编码的块单元以用于预测视频。
所公开的实施方式在所有方面都被认为是说明性的而非限制性的。还应理解,本公开不限于以上所描述的特定实施方式,而是在不脱离本公开的范围的情况下,许多重新布置、修改和替换是可能的。

Claims (17)

1.一种通过电子装置解码比特流的方法,所述方法包括:
接收所述比特流的图像帧;
从接收的图像帧确定块单元;
从候选列表接收第一运动信息和第二运动信息以重建所述块单元,其中所述第一运动信息包括用于选择第一参考帧的第一列表标记,并且所述第二运动信息包括用于选择第二参考帧的第二列表标记;
确定所述块单元中的子块;
将所述第一列表标记与所述第二列表标记进行比较;
当所述第一列表标记与所述第二列表标记相同时,存储所述第一运动信息和所述第二运动信息中的预定义的一者作为用于所述子块的存储的运动信息,而无需检查所述第一参考帧和所述第二参考帧是否被包括在多个参考列表中的由多个标记值中的不同于所述第一列表标记和所述第二列表标记的特定的一个标记值指示的特定的一个参考列表中;以及
当基于所述子块来重建后续块时,基于所述存储的运动信息重建所述后续块。
2.根据权利要求1所述的方法,其还包括:
确定所述块单元的分割线;以及
确定所述子块是否被包括在基于所述分割线分离的多个块区域中的特定的一个块区域中,
其中所述多个块区域中的所述特定的一个块区域覆盖所述分割线,并且
其中当所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,将所述第一列表标记与所述第二列表标记进行比较。
3.根据权利要求2所述的方法,其特征在于,还包括:
当所述子块被包括在所述多个块区域中的对应于所述第一运动信息的第一块区域中时,存储所述第一运动信息作为用于所述子块的存储的运动信息;以及
当所述子块被包括在所述多个块区域中的对应于所述第二运动信息的第二块区域中时,存储所述第二运动信息作为用于所述子块的存储的运动信息,
其中,所述多个块区域中的所述第一块区域和所述多个块区域中的所述第二块区域中的每一者不同于所述多个块区域中的所述特定的一个块区域。
4.根据权利要求3所述的方法,其特征在于,所述第一运动信息和所述第二运动信息中的所述预定义的一者是所述第二运动信息。
5.根据权利要求2所述的方法,其特征在于,还包括:
当所述第一列表标记与所述第二列表标记相同并且所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,存储所述第一运动信息和所述第二运动信息中的所述预定义的一者作为用于所述子块的存储的运动信息,而无需检查所述两个参考帧是否被包括在所述多个参考列表中的由所述多个标记值中的不同于所述两个列表标记的所述特定的一个标记值指示的所述特定的一个参考列表中;以及
当所述第一列表标记不同于所述第二列表标记并且所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,将所述第一运动信息和所述第二运动信息一起存储为用于所述子块的存储的运动信息。
6.根据权利要求1所述的方法,其特征在于,当所述多个参考列表的数量等于二并且所述第一列表标记与所述第二列表标记相同时,所述多个参考列表中的由所述多个标记值中的所述特定的一个标记值指示的所述特定的一个参考列表不同于所述多个参考列表中的由所述第一列表标记指示的另一参考列表。
7.一种用于解码比特流的电子装置,所述电子装置包括:
至少一个处理器;以及
存储装置,所述存储装置耦接到所述至少一个处理器并且存储多个指令,所述多个指令在由所述至少一个处理器执行时使所述至少一个处理器:
接收所述比特流的图像帧;
从接收的图像帧确定块单元;
从候选列表接收第一运动信息和第二运动信息以重建所述块单元,其中所述第一运动信息包括用于选择第一参考帧的第一列表标记,并且所述第二运动信息包括用于选择第二参考帧的第二列表标记;
确定所述块单元中的子块;
将所述第一列表标记与所述第二列表标记进行比较;
当所述第一列表标记与所述第二列表标记相同时,存储所述第一运动信息和所述第二运动信息中的预定义的一者作为用于所述子块的存储的运动信息,而无需检查所述第一参考帧和所述第二参考帧是否包括在多个参考列表中的由多个标记值中的不同于所述第一列表标记和所述第二列表标记的特定的一个标记值指示的特定的一个参考列表中;并且
当基于所述子块来重建后续块时,基于所述存储的运动信息重建所述后续块。
8.根据权利要求7所述的电子装置,其特征在于,所述多个指令在由所述至少一个处理器执行时进一步使所述至少一个处理器:
确定所述块单元的分割线;并且
确定所述子块是否被包括在基于所述分割线分离的多个块区域中的特定的一个块区域中,
其中所述多个块区域中的所述特定的一个块区域覆盖所述分割线,并且
其中当所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,将所述第一列表标记与所述第二列表标记进行比较。
9.根据权利要求8所述的电子装置,其特征在于,所述多个指令在由所述至少一个处理器执行时进一步使所述至少一个处理器:
当所述子块被包括在所述多个块区域中的对应于所述第一运动信息的第一块区域中时,存储所述第一运动信息作为用于所述子块的存储的运动信息;并且
当所述子块被包括在所述多个块区域中的对应于所述第二运动信息的第二块区域中时,存储所述第二运动信息作为用于所述子块的存储的运动信息,
其中所述多个块区域中的所述第一块区域和所述多个块区域中的所述第二块区域中的每一者不同于所述多个块区域中的所述特定的一个块区域。
10.根据权利要求9所述的电子装置,其特征在于,所述第一运动信息和所述第二运动信息中的所述预定义的一者是所述第二运动信息。
11.根据权利要求8所述的电子装置,其特征在于,所述多个指令在由所述至少一个处理器执行时进一步使所述至少一个处理器:
当所述第一列表标记与所述第二列表标记相同并且所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,存储所述第一运动信息和所述第二运动信息中的所述预定义的一者作为用于所述子块的存储的运动信息,而无需检查所述两个参考帧是否被包括在所述多个参考列表中的由所述多个标记值中的不同于所述两个列表标记的所述特定的一个标记值指示的所述特定的一个参考列表中;并且
当所述第一列表标记不同于所述第二列表标记并且所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,将所述第一运动信息和所述第二运动信息一起存储为用于所述子块的存储的运动信息。
12.一种通过电子装置解码比特流的方法,所述方法包括:
接收所述比特流的图像帧;
从接收的图像帧确定块单元;
确定所述块单元的分割线;
从候选列表接收第一运动信息和第二运动信息以重建所述块单元,其中所述第一运动信息包括第一列表标记,并且所述第二运动信息包括第二列表标记;
确定所述块单元中的子块;
确定所述子块是否被包括在基于所述分割线分离的多个块区域中的特定的一个块区域中,其中所述多个块区域中的所述特定的一个块区域覆盖所述分割线;
当所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,仅基于所述第一列表标记与所述第二列表标记之间的比较来确定是否将所述第一运动信息和所述第二运动信息一起存储为用于所述子块的存储的运动信息;以及
当基于所述子块来重建后续块时,基于存储的运动信息重建所述后续块。
13.根据权利要求12所述的方法,其还包括:
当所述子块被包括在所述多个块区域中的对应于所述第一运动信息的第一块区域中时,存储所述第一运动信息作为用于所述子块的存储的运动信息;以及
当所述子块被包括在所述多个块区域中的对应于所述第二运动信息的第二块区域中时,存储所述第二运动信息作为用于所述子块的存储的运动信息,
其中所述多个块区域中的所述第一块区域和所述多个块区域中的所述第二块区域中的每一者不同于所述多个块区域中的所述特定的一个块区域。
14.根据权利要求13所述的方法,其还包括:
当所述第一列表标记等于所述第二列表标记并且所述子块被包括在所述多个块区域中的所述特定的一个块区域中时,存储所述第二运动信息作为用于所述子块的存储的运动信息。
15.根据权利要求12所述的方法,其特征在于,所述块单元在重建所述后续块之前重建。
16.根据权利要求12所述的方法,其还包括:
当所述第一列表标记不同于所述第二列表标记时,将所述第一运动信息和所述第二运动信息一起存储为用于所述子块的存储的运动信息。
17.根据权利要求12所述的方法,其特征在于,当所述第一列表标记等于所述第二列表标记时,存储所述第一运动信息和所述第二运动信息中的预定义的一者作为用于所述子块的存储的运动信息,而无需检查基于所述第一列表标记选择的第一参考帧和基于所述第二列表标记选择的第二参考帧是否包括在多个参考列表中的由多个标记值中的不同于所述第一列表标记的特定的一个标记值指示的特定的一个参考列表中。
CN202080046454.6A 2019-06-24 2020-06-19 用于对视频数据编码的装置和方法 Pending CN114026871A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962865443P 2019-06-24 2019-06-24
US62/865443 2019-06-24
US201962884335P 2019-08-08 2019-08-08
US62/884335 2019-08-08
PCT/CN2020/097121 WO2020259411A1 (en) 2019-06-24 2020-06-19 Device and method for coding video data

Publications (1)

Publication Number Publication Date
CN114026871A true CN114026871A (zh) 2022-02-08

Family

ID=74039005

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080046454.6A Pending CN114026871A (zh) 2019-06-24 2020-06-19 用于对视频数据编码的装置和方法

Country Status (6)

Country Link
US (3) US11272199B2 (zh)
EP (1) EP3987797A4 (zh)
JP (1) JP7345573B2 (zh)
KR (1) KR20220020959A (zh)
CN (1) CN114026871A (zh)
WO (1) WO2020259411A1 (zh)

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10187657B2 (en) * 2014-03-14 2019-01-22 Samsung Electronics Co., Ltd. Method and device for configuring merge candidate list for decoding and encoding of interlayer video
US11477477B2 (en) * 2015-01-26 2022-10-18 Qualcomm Incorporated Sub-prediction unit based advanced temporal motion vector prediction
US10271064B2 (en) 2015-06-11 2019-04-23 Qualcomm Incorporated Sub-prediction unit motion vector prediction using spatial and/or temporal motion information
US9883183B2 (en) * 2015-11-23 2018-01-30 Qualcomm Incorporated Determining neighborhood video attribute values for video data
US10609423B2 (en) * 2016-09-07 2020-03-31 Qualcomm Incorporated Tree-type coding for video coding
CN110169067B (zh) * 2016-12-16 2021-12-31 夏普株式会社 图像解码装置以及图像编码装置
US10778977B2 (en) * 2018-12-05 2020-09-15 Qualcomm Incorporated Triangle motion information for video coding
US11032574B2 (en) * 2018-12-31 2021-06-08 Tencent America LLC Method and apparatus for video coding
WO2020178170A1 (en) * 2019-03-01 2020-09-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Advanced independent region boundary handling

Also Published As

Publication number Publication date
US20240179334A1 (en) 2024-05-30
WO2020259411A1 (en) 2020-12-30
JP2022539704A (ja) 2022-09-13
US11272199B2 (en) 2022-03-08
US20200404304A1 (en) 2020-12-24
US20220150520A1 (en) 2022-05-12
EP3987797A4 (en) 2023-03-22
JP7345573B2 (ja) 2023-09-15
EP3987797A1 (en) 2022-04-27
KR20220020959A (ko) 2022-02-21
US11930199B2 (en) 2024-03-12

Similar Documents

Publication Publication Date Title
US11272197B2 (en) Device and method for coding video data
CN111903130B (zh) 在多参考列预测中编码视频数据的设备及方法
US20190342546A1 (en) Device and method for coding video data based on different reference sets in linear model prediction
CN111316640B (zh) 基于调整的帧内模式列表以编码视频数据的设备及方法
EP3815367B1 (en) Device and method for decoding video data based on one or more reference lines
US10924733B2 (en) Device and method for coding video data based on mode list including different mode groups
US20240089432A1 (en) Device and method for coding video data for geometric partitioning mode
CN113678446A (zh) 用于编码视频数据的装置和方法
US11051029B2 (en) Device and method for coding video data
CN114026871A (zh) 用于对视频数据编码的装置和方法
US11272179B2 (en) Device and method for coding video data

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination