CN117834909A - 对视频进行解码的方法和对视频进行编码的方法 - Google Patents

对视频进行解码的方法和对视频进行编码的方法 Download PDF

Info

Publication number
CN117834909A
CN117834909A CN202410005766.2A CN202410005766A CN117834909A CN 117834909 A CN117834909 A CN 117834909A CN 202410005766 A CN202410005766 A CN 202410005766A CN 117834909 A CN117834909 A CN 117834909A
Authority
CN
China
Prior art keywords
partition
block
current block
prediction
weight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202410005766.2A
Other languages
English (en)
Inventor
安镕照
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intellectual Discovery Co Ltd
Original Assignee
Intellectual Discovery Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intellectual Discovery Co Ltd filed Critical Intellectual Discovery Co Ltd
Publication of CN117834909A publication Critical patent/CN117834909A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Abstract

本公开涉及对视频进行解码的方法和对视频进行编码的方法。一种对视频进行解码的方法，包括：确定视频中的当前块的合并候选；基于合并候选来构造当前块的合并候选列表；基于合并候选列表来得出当前块的运动信息；以及使用运动信息来执行当前块的帧间预测。

Description

对视频进行解码的方法和对视频进行编码的方法
本申请是国家申请号为201980044560.8，国际申请日为2019年7月2日，进入国家日期为2020年12月30日，发明名称为“使用合并候选的视频编码方法和装置”的申请的分案申请。
技术领域
本发明涉及视频编码技术。特别地，本发明涉及视频编码技术之中的运动预测和补偿。
背景技术
对高分辨率视频的市场需求正在增加，因此，需要能够有效率地压缩高分辨率图像的技术。响应于这样的市场需求，ISO/IEC的运动图片专家组(MPEG)和ITU-T的VCEG(视频编码专家组)联合成立JCT-VC(视频编码联合协作组)，在2013年1月开发了高效视频编码(HEVC)视频压缩标准，并且已经在积极地进行对下一代压缩标准的研究和开发。
视频压缩主要由帧内预测、帧间预测、变换、量化、熵编码、环内滤波器组成。同时，随着对高分辨率图像的需求增加，对作为一种新图像服务的3D图像内容的需求也正在增加。正在讨论用于有效地提供高分辨率和超高分辨率的3D视频内容的视频压缩技术。
发明内容
技术问题
本公开内容的目的是提供具有改进的效率的图像编码/解码方法和设备。
另外，本发明的目的是提供一种用于将编码块划分为四边形、三角形或任意分区的方法和设备。
另外，本发明的目的是提供一种用于适应性地构造当前块的合并候选列表的方法和设备。
本发明的目的是提供一种用于对应用对角线运动划分的块的预测方向进行限制的方法和设备。
另外，本发明的目的是提供一种用于对应用对角线运动划分的块进行加权预测的方法和设备。
另外，本公开内容的目的是提供存储由图像编码方法/设备生成的比特流的计算机可读记录介质。
技术解决方案
根据本发明的视频编码/解码方法和设备可以确定当前块的合并候选，基于合并候选构造合并候选列表，从合并候选列表中得出当前块的运动信息，以及使用运动信息执行当前块的帧间预测。
在根据本发明的视频编码/解码方法和设备中，通过对角线运动划分将当前块划分为两个分区。
在根据本发明的视频编码/解码方法和设备中，基于指示是否对当前块执行对角线运动划分的标志来执行对角线运动划分。
在根据本发明的视频编码/解码方法和设备中，基于预定的编码参数来得出所述标志，并且所述编码参数包括切片类型、帧间模式的类型、块大小/形状或块的宽度与高度的比率中的至少一者。
在根据本发明的视频编码/解码方法和设备中，属于当前块的两个分区共享所构造的合并候选列表。
在根据本发明的视频编码/解码方法和设备中，合并候选列表包括空间合并候选、时间合并候选或组合的合并候选中的至少一者。
在根据本发明的视频编码/解码方法和设备中，基于当前块的合并索引来得出运动信息，并且对于两个分区中的每个分区，从编码设备用信号传送合并索引。
在根据本发明的视频编码/解码方法和设备中，使用第一分区的第一参考块或第二分区的第二参考块中的至少一者来预测当前块的像素。
在根据本发明的视频编码/解码方法和设备中，使用第一参考块中的第一像素或第二参考块中的第二像素中的仅一者来预测当前块的像素，或者通过第一参考块中的第一像素和第二参考块中的第二像素的加权平均来预测当前块的像素。
在根据本发明的视频编码/解码方法和设备中，加权平均的权重是[7:1]、[6:2]、[4:4]、[2:6]或[1:7]之一。
在根据本发明的视频编码/解码方法和设备中，根据当前块中像素的位置来选择性地施加权重。
根据本公开实施例的一种对视频进行解码的方法包括：确定所述视频中的当前块的合并候选；基于所述合并候选来构造所述当前块的合并候选列表；基于所述合并候选列表来得出所述当前块的运动信息；以及使用所述运动信息来执行所述当前块的帧间预测，其中，所述当前块基于预定的划分线被划分为包括第一分区和第二分区的多个分区，其中，所述第一分区或所述第二分区中的至少一者具有非矩形形状，其中，针对所述当前块构造的所述合并候选列表被所述第一分区和所述第二分区共享，其中，针对所述第一分区和所述第二分区中的每个分区得出所述当前块的运动信息，其中，通过第一预测块和第二预测块的加权和来生成针对所述当前块的预测块，其中，所述加权和的权重包括应用于所述第一预测块的像素的第一权重和应用于所述第二预测块的像素的第二权重，其中，基于所述第一分区的运动信息获得所述第一预测块，以及基于所述第二分区的运动信息获得所述第二预测块，其中，基于所述当前块中的当前像素的位置来确定所述加权和的所述第一权重和所述第二权重，其中，当所述当前块中的所述当前像素位于所述划分线上时，所述第一权重等于所述第二权重，以及其中，当所述当前块中的所述当前像素不位于所述划分线上时，所述第一权重不等于所述第二权重。
根据本公开实施例的一种对视频进行编码的方法包括：确定所述视频中的当前块的合并候选，所述合并候选包括空间合并候选和时间合并候选中的至少一者；基于所述合并候选来构造所述当前块的合并候选列表；以及基于来自所述合并候选列表的运动信息来执行所述当前块的帧间预测，其中，所述当前块基于预定的划分线被划分为包括第一分区和第二分区的多个分区，其中，所述第一分区或所述第二分区中的至少一者具有非矩形形状，其中，针对所述当前块构造的所述合并候选列表被所述第一分区和所述第二分区共享，其中，针对所述第一分区和所述第二分区中的每个分区确定所述当前块的运动信息，其中，通过第一预测块和第二预测块的加权和来生成针对所述当前块的预测块，其中，所述加权和的权重包括应用于所述第一预测块的像素的第一权重和应用于所述第二预测块的像素的第二权重，其中，基于所述第一分区的运动信息获得所述第一预测块，以及基于所述第二分区的运动信息获得所述第二预测块，其中，基于所述当前块中的当前像素的位置来确定所述加权和的所述第一权重和所述第二权重，其中，当所述当前块中的所述当前像素位于所述划分线上时，所述第一权重等于所述第二权重，以及其中，当所述当前块中的所述当前像素不位于所述划分线上时，所述第一权重不等于所述第二权重。
根据本公开实施例的一种用于存储通过方法生成的比特流的非暂态计算机可读存储介质，所述方法包括：确定当前块的合并候选，所述合并候选包括空间合并候选和时间合并候选中的至少一者；基于所述合并候选来构造所述当前块的合并候选列表；以及基于来自所述合并候选列表的运动信息执行所述当前块的帧间预测，其中，所述当前块基于预定的划分线被划分为包括第一分区和第二分区的多个分区，其中，所述第一分区或所述第二分区中的至少一者具有非矩形形状，其中，针对所述当前块构造的所述合并候选列表被所述第一分区和所述第二分区共享，其中，针对所述第一分区和所述第二分区中的每个分区确定所述当前块的运动信息，其中，通过第一预测块和第二预测块的加权和来生成针对所述当前块的预测块，其中，所述加权和的权重包括应用于所述第一预测块的像素的第一权重和应用于所述第二预测块的像素的第二权重，其中，基于所述第一分区的运动信息获得所述第一预测块，以及基于所述第二分区的运动信息获得所述第二预测块，其中，基于所述当前块中的当前像素的位置来确定所述加权和的所述第一权重和所述第二权重，其中，当所述当前块中的所述当前像素位于所述划分线上时，所述第一权重等于所述第二权重，以及其中，当所述当前块中的所述当前像素不位于所述划分线上时，所述第一权重不等于所述第二权重。
有益效果
根据本发明，可以通过各种类型的块划分来提高编码/解码效率。
此外，根据本发明，通过使用自适应合并候选列表，可以提高运动信息的编码/解码效率。
本发明可以通过对应用对角运动划分的块的预测方向进行限制来有效地减小存储器带宽。
另外，本发明可以通过对应用对角线运动划分的块进行加权预测来减少划分边界附近的伪影。
此外，可以提供根据本公开内容的用于存储由图像编码方法/设备生成的比特流的计算机可读记录介质。
附图说明
图1是示出了根据本公开内容的图像编码设备的框图。
图2是示出了根据本公开内容的图像解码设备的框图。
图3示出了本发明提出的使用两种对角线将正方形或矩形块划分为三角形形状的方法。
图4示出了作为应用本发明的实施方式的基于合并模式的帧间预测方法。
图5是示出当前块的合并候选列表及其配置的概念图的图。
图6是示出当前块的合并候选列表及其配置的概念图的图。
图7是示出根据对角线运动划分来分开构造合并候选列表的概念的图。
图8是示出对于图3所示的对角线运动划分执行基于掩模(mask)的运动预测和补偿的概念的图。
图9是图8中所示的所提出的基于掩模的块划分方法的另一权重被应用的实施方式。
具体实施方式
最佳模式
根据本发明的视频编码/解码方法和设备可以确定当前块的合并候选；基于合并候选构造合并候选列表；从合并候选列表得出当前块的运动信息；以及使用运动信息执行当前块的帧间预测。
在根据本发明的视频编码/解码方法和设备中，当前块通过对角线运动划分被划分为两个分区。
在根据本发明的视频编码/解码方法和设备中，基于指示是否对当前块执行对角线运动划分的标志来执行对角线运动划分。
在根据本发明的视频编码/解码方法和设备中，标志是基于预定的编码参数而得出的，并且编码参数包括切片类型、帧间模式类型、块大小/形状或块的宽度与高度的比率中的至少一种。
在根据本发明的视频编码/解码方法和设备中，属于当前块的两个分区共享构造的合并候选列表。
在根据本发明的视频编码/解码方法和设备中，合并候选列表包括空间合并候选、时间合并候选或组合合并候选中的至少一者。
在根据本发明的视频编码/解码方法和设备中，基于当前块的合并索引得出运动信息，并且针对两个分区中的每个分区，从编码设备用信号传送该合并索引。
在根据本发明的视频编码/解码方法和设备中，使用第一分区的第一参考块或第二分区的第二参考块中的至少一者来预测当前块的像素。
在根据本发明的视频编码/解码方法和设备中，使用第一参考块中的第一像素或第二参考块中的第二像素中的仅一者来预测当前块的像素，或者通过使用第一参考块中的第一像素和第二参考块中的第二像素的加权平均来预测当前块的像素。
在根据本发明的视频编码/解码方法和设备中，加权平均的权重是[7:1]、[6:2]、[4:4]、[2:6]或[1:7]。
在根据本发明的视频编码/解码方法和设备中，根据当前块中像素的位置来选择性地施加权重。
公开内容的模式
将参照本说明书中的附图来详细描述本公开内容的实施方式，使得本领域技术人员可以容易地实现本公开内容。然而，本公开内容可以以许多不同的形式实施，并且不应该被解释为限于本文所阐述的实施方式。为了清楚地说明本公开内容，贯穿说明书省略了与描述无关的部件并且用相似的附图标记表示类似的部件。
在整个说明书中，当声称一个部分“连接”到另一个部分时，不仅包括这两个部分直接连接的示例，而且包括该部分与另一部件在其间电连接的示例。
此外，贯穿说明书，在部件被称为“包括”元件时，应当理解，除非另有特别说明，否则该元件也可以包括其他元件而不是与其他元件分离。
另外，可能使用术语例如第一和第二来描述各种部件，但是部件不应受该术语限制。这些术语仅用于将一个部件与另一部件区分开的目的。
另外，在本文所述的装置和方法的实施方式中，可以省略装置的一些部件或者方法的一些步骤。另外，可以改变装置的一些部件的顺序或者方法的一些步骤的顺序。此外，可以将其他部件或者其他步骤插入装置的一些部件或者方法的一些步骤中。
另外，本公开内容的第一实施方式的一些部件或者步骤可以被添加到本公开内容的第二实施方式，或者可以替换第二实施方式的一些部件或者步骤。
另外，本公开内容的实施方式中示出的部件被独立示出以指示不同的特征功能，而不意味着每个部件都由分离的硬件或者一个软件部件单元组成。也就是说，为了便于描述，每个部件被列出为每个部件，并且每个部件的至少两个部件可以被组合以形成一个部件，或者一个部件可以被划分成多个部件以执行功能。在不脱离本公开内容的本质的情况下，这些部件中的每一个的集成和分离的实施方式也被包括在本公开内容的范围内。
首先，将如下简要描述本申请中使用的术语。
稍后将描述的解码设备(视频解码设备)可以是民用安全摄像机、民用安全系统、军用安全摄像机、军用安全系统、个人计算机(PC)、笔记本计算机、便携式多媒体播放器(PMP)、无线通信终端、智能电话、包括在诸如TV应用服务器和服务服务器的服务器终端中的设备，并且可以表示诸如各种设备的用户终端、诸如用于执行与有线/无线通信网络的通信的调制解调器的通信设备、用于存储用于对图像进行解码或者执行用于解码的帧间预测或帧内预测的各种程序和数据的存储器、配备有用于执行程序并且计算和控制程序的微处理器等的各种设备。
另外，被编码器编码为比特流的图像可以通过实时或者非实时的有线/无线通信网络例如因特网、局域无线通信网络、无线LAN网络、WiBro网络、移动通信网络，或者通过诸如线缆、通用串行总线(USB)等的各种通信接口被发送到图像解码设备，被解码、重构为图像并且被再现。替选地，由编码器生成的比特流可以存储在存储器中。存储器可以包括易失性存储器和非易失性存储器两者。在本说明书中，存储器可以被表示为存储比特流的记录介质。
通常，视频可以由一系列图片组成，并且每个图片可以被划分成诸如块的编码单元。另外，具有本实施方式所属技术领域的普通知识的人可以理解，可以通过将下文描述的术语“图片”替换为具有等同含义的另一术语如“图像”或者“帧”来使用该术语。另外，本实施方式所属领域的普通技术人员将理解，术语“编码单元”可以被具有相同含义的其他术语代替和使用，例如“单元块”和“块”。
在下文中，将参考附图详细描述本公开内容的示例性实施方式。在描述本公开内容时，将省略对相同部件的冗余描述。
图1是示出根据本公开内容的图像编码设备的框图。
参照图1，常规图像编码设备(100)包括图片划分单元(110)、预测单元(120，125)、变换单元(130)、量化单元(135)、重排单元(160)以及熵编码单元(165)、逆量化单元(140)、逆变换单元(145)、滤波器单元(150)和存储器(155)。
图片划分单元(110)可以将输入图片划分成至少一个处理单元。在这种情况下，处理单元可以是预测单元(PU)、变换单元(TU)或编码单元(CU)。在下文中，在本公开内容的实施方式中，编码单元可以用作执行编码的单位的含义，或者可以用作执行解码的单位的含义。
预测单元可以通过在一个编码单元内划分成诸如相同大小的至少一个正方形或矩形的形状来获得。在一个编码单元内划分的预测单元之一可以通过划分成具有与另一预测单元不同的形状和/或大小来获得。在生成基于编码单元执行帧内预测的预测单元时，当其不是最小编码单元时，可以在不划分成多个预测单元N×N的情况下执行帧内预测。
预测单元(120，125)可以包括执行帧间预测的帧间预测单元(120)以及执行帧内预测的帧内预测单元(125)。可以确定针对预测单元使用帧间预测还是帧内预测，并且可以确定根据每种预测方法的特定信息(例如，帧内预测模式、运动矢量、参考图片等)。所生成的预测块与原始块之间的残差值(残差块)可以被输入到变换单元(130)。另外，可以由熵编码单元(165)将用于预测的预测模式信息、运动矢量信息等连同残差值一起编码并且发送到解码器。
帧间预测单元(120)可以基于当前图片的先前图片或后续图片至少一者的信息来预测预测单元，并且在一些情况下，可以基于当前图片中已完成编码的一些区域的信息来预测预测单元。帧间预测单元(120)可以包括参考图片插值单元、运动预测单元和运动补偿单元。
参考图片插值单元可以从存储器(155)接收参考图片信息，并且生成参考图片中的整像素或更小像素的像素信息。在亮度像素的情况下，可以使用具有不同滤波器系数的基于DCT的8抽头插值滤波器(基于DCT的插值滤波器)以1/4像素为单位生成整像素或更小像素的像素信息。在色度信号的情况下，可以使用具有不同滤波器系数的基于DCT的4抽头插值滤波器(基于DCT的插值滤波器)以1/8像素为单位生成整像素或更小像素的像素信息。
运动预测单元可以基于由参考图片插值单元进行插值的参考图片来执行运动预测。可以使用各种方法作为用于计算运动矢量的方法，例如基于完全搜索的块匹配算法(FBMA)、三步搜索(TSS)和新三步搜索算法(NTS)。运动矢量可以具有基于插值像素的以1/2或1/4像素为单位的运动矢量值。运动预测单元可以通过不同地使用运动预测方法来预测当前预测单元。可以使用诸如跳跃(skip)模式、合并模式、AMVP(高级运动矢量预测)模式和帧内块复制模式以及仿射模式的各种方法作为运动预测方法。参照图3至图9，将详细描述基于合并模式的帧间预测。
帧内预测单元(125)可以基于当前块周围的参考像素信息生成预测单元，该参考像素信息是当前图片中的像素信息。当当前预测单元的邻近块是执行帧间预测的块并且参考像素是执行帧间预测的像素时，可以通过将执行帧间预测的块中包括的参考像素信息替换为该执行帧间预测的块周围的执行帧内预测的块的参考像素信息的方式使用在执行帧间预测的块中包括的参考像素。也就是说，当参考像素不可用时，可以通过用可用参考像素之中的至少一个参考像素进行替换的方式使用该不可用参考像素信息。
另外，可以生成包括残差信息的残差块，该残差信息是基于由预测单元(120，125)生成的预测单元来执行预测的预测单元与预测单元的原始块之间的差值。所生成的残差块可以被输入到变换单元(130)。
变换单元(130)可以通过使用诸如DCT(离散余弦变换)、DST(离散正弦变换)和KLT的变换方法来对包括有由预测单元(120，125)生成的预测单元与原始块之间的残差信息的残差块进行变换。可以基于用来生成残差块的预测单元的帧内预测模式信息来确定是应用DCT、DST还是KLT来对残差块进行变换。
量化单元(135)可以对由变换单元(130)变换到频域的值进行量化。量化系数可以根据图像的块或重要性而变化。由量化单元(135)计算出的值可以被提供给逆量化单元(140)和重排单元(160)。
重排单元(160)可以对量化后的残差值的系数值执行重排。
重排单元(160)可以通过系数扫描方法将二维块形式的系数改变为一维矢量形式。例如，重排单元(160)可以通过根据之字形(Zig-Zag)扫描方法从DC系数到高频区域中的系数进行扫描来改变为一维矢量形式。除了之字形扫描外，根据变换单元的大小和帧内预测模式，可以使用在列方向上扫描二维块形式的系数的竖直扫描和在行方向上扫描二维块形式的系数的水平扫描。也就是说，可以根据变换单元的大小和帧内预测模式来确定使用之字形扫描、竖直扫描和水平扫描中的哪一个。
熵编码单元(165)可以基于由重排单元(160)计算出的值来执行熵编码。可以使用各种编码方法来进行熵编码，例如指数Golomb、CAVLC(上下文自适应可变长度编码)和CABAC(上下文自适应二进制算术编码)。关于这一点，熵编码单元(165)可以对来自重排单元(160)以及预测单元(120，125)的编码单元的残差系数信息进行编码。另外，根据本公开内容，可以从编码器用信号传输指示运动信息在解码器侧被得出和使用的信息以及关于用来得出运动信息的方法的信息。
逆量化单元(140)和逆变换单元(145)对由量化单元(135)量化的值进行逆量化以及对由变换单元(130)变换的值进行逆变换。可以通过将由逆量化单元(140)和逆变换单元(145)生成的残差值与通过预测单元(120，125)中包括的运动估计单元、运动补偿单元和帧内预测单元预测的预测单元进行组合来生成重构块。
滤波器单元(150)可以包括去块滤波器、偏移修改单元和自适应环路滤波器(ALF)中的至少一者。去块滤波器可以去除由重构图片中的块之间的边界引起的块失真。偏移修改单元可以针对经去块滤波的图像以像素为单位校正相对于原始图像的偏移。为了对特定图片执行偏移修改，在将图像中包括的像素分类为一定数目的区域并且确定偏移被施加到的区域之后，可以使用对区域偏移施加偏移的方法或者使用通过考虑每个像素的边缘信息来施加偏移的方法。可以基于通过将经滤波的重构图像与原始图像进行比较而获得的值来执行ALF(自适应环路滤波)。在将图像中包括的像素分类为预定组之后，可以确定要应用于该组的一个滤波器以针对每个组不同地执行滤波。
存储器(155)可以存储从滤波器单元(150)输出的重构块或图片，并且在执行帧间预测时，所存储的重构块或图片可以被提供给预测单元(120，125)。
图2是示出根据本公开内容的图像解码设备的框图。
参照图2，图像解码器(200)可以包括熵解码单元(210)、重排单元(215)、逆量化单元(220)、逆变换单元(225)、预测单元(230、235)以及滤波器单元(240)、存储器(245)。
当从图像编码器输入图像比特流时，可以以与图像编码器的过程相反的过程对输入的比特流进行解码。
熵解码单元(210)可以以与由图像编码器的熵编码单元中的熵编码执行的过程相反的过程来执行熵解码。例如，可以应用与在图像编码器中执行的方法对应的各种方法，例如指数Golomb、上下文自适应可变长度编码(CAVLC)和上下文自适应二进制算术编码(CABAC)。
熵解码单元(210)可以对与由编码器执行的帧间预测和帧内预测有关的信息进行解码。
重排单元(215)可以基于编码单元的重排方法对由熵解码单元(210)熵解码的比特流进行重排。一维矢量形式的系数可以再次被重排为二维块形式的系数。
逆量化单元(220)可以基于由编码器提供的量化参数和重排块的系数来执行逆量化。
逆变换单元(225)可以对由图像编码器执行的量化结果执行与由变换单元执行的变换即，DCT、DST和KLT对应的逆变换，也就是说，逆DCT、逆DST和逆KLT。可以基于由图像编码器确定的传输单元来执行逆变换。在图像解码器的逆变换单元(225)中，可以根据多种信息例如预测方法、当前块的大小和预测方向来选择性地执行变换类型(例如，DCT、DST、KLT)。
预测单元(230，235)可以基于由熵解码单元(210)提供的与预测块生成相关的信息以及由存储器(245)提供的先前解码的块或图片信息来生成预测块。
如上所述，当在以与图像编码器中相同的方式执行帧内预测时预测单元的大小和变换单元的大小相同时，可以基于位于预测单元左侧、左上侧和上侧的像素来执行预测单元的帧内预测。然而，当在执行帧内预测时预测单元的大小和变换单元的大小不同时，可以使用基于变换单元的参考像素来执行帧内预测。另外，使用N×N划分的帧内预测可以仅用于最小编码单元。
预测单元(230，235)可以包括预测单元确定单元、帧间预测单元和帧内预测单元中的至少一者。预测单元确定单元可以从熵解码单元(210)接收各种信息例如预测单元信息、帧内预测方法的预测模式信息、以及帧间预测方法的运动预测相关信息，对当前编码单元中的预测单元分类，并且确定预测单元执行帧间预测还是帧内预测。另一方面，如果没有发送用于帧间预测的运动预测相关信息，而是从编码器(100)发送了指示运动信息在解码器侧被得出和使用的信息以及关于用来得出运动信息的方法的信息，则预测单元确定单元基于从编码器(100)发送的信息来确定帧间预测单元(230)的预测性能。
帧间预测单元(230)可以通过使用由图像编码器提供的当前预测单元的帧间预测所需的信息，基于包括有当前预测单元的当前图片的先前图片或后续图片中的至少一者中包括的信息，对当前预测单元执行帧间预测。为了执行帧间预测，可以确定在编码单元中包括的预测单元的运动预测方法是否是跳过模式、合并模式、AMVP模式、帧内块复制模式或仿射模式。参照图3至图9，将详细描述基于合并模式的帧间预测。
帧内预测单元(235)可以基于当前图片中的像素信息来生成预测块。当预测单元是已经执行帧内预测的预测单元时，可以基于由图像编码器提供的预测单元的帧内预测模式信息来执行帧内预测。帧内预测单元(235)可以包括自适应帧内平滑(AIS)滤波器、参考像素插值单元和DC滤波器。AIS滤波器是对当前块的参考像素执行滤波的部分，并且可以通过根据当前预测单元的预测模式确定是否应用该滤波器来应用。可以通过使用由图像编码器提供的预测单元的AIS滤波器信息和预测模式对当前块的参考像素执行AIS滤波。在当前块的预测模式是不执行AIS滤波的模式的情况下，可以不应用AIS滤波器。
当预测单元的预测模式是基于通过对参考像素进行插值而获得的像素值来执行帧内预测的预测单元时，参考像素插值单元可以对参考像素进行插值以生成整数像素或更小像素的参考像素。在当前预测单元的预测模式是无需对参考像素进行插值而生成预测块的预测模式的情况下，可以不对参考像素进行插值。在当前块的预测模式是DC模式的情况下，DC滤波器可以通过滤波来生成预测块。
重构的块或图片可以被提供给滤波器单元(240)。滤波器单元(240)可以包括去块滤波器、偏移修改单元和ALF。
可以从视频编码器提供关于是否向对应的块或图片应用去块滤波器的信息以及关于在应用去块滤波器时应用强滤波器还是弱滤波器的信息。在视频解码器的去块滤波器中，可以提供与由视频编码器提供的与去块滤波器相关的信息，并且视频解码器可以对相应块执行去块滤波。
偏移修改单元可以基于偏移修改的类型以及在编码期间应用于图像的偏移值信息对重构图像执行偏移修改。可以基于由编码器提供的关于是否应用ALF的信息、ALF系数信息等来对编码单元应用ALF。该ALF信息可以由特定参数集提供。
存储器(245)可以存储重构图片或块，使得重构图片或块可以用作参考图片或者参考块，并且还可以将重构图片提供给输出单元。
图3示出了本发明提出的使用两种对角线将正方形或矩形块划分为三角形形状的方法。
图3的(a)示出了使用连接块的左上和右下的对角线将正方形或矩形块划分为两个三角形块的示例。
图3的(b)示出了通过使用连接块的右上和左下的对角线将正方形或矩形块划分为两个三角形块的示例。
图3的(a)和(b)中划分的两个三角形块可以根据其位置被称为第一分区和第二分区。
在图3的(a)中，连接块的左上和右下的对角线可以以式1表示，其中以块的左上位置为原点。
[式1]
f(x,y)＝w*y-h*x
在式1中，w表示块的宽度，h表示块的高度。
在图3的(b)中，连接块的右上和左下的对角线可以以式2表示，其中以块的左上位置为原点。
[式2]
f(x,y)＝w*(h-y)-h*x
在式2中，w表示块的宽度，h表示块的高度。
对于上述对角线运动划分，可以使用指示对于一个编码单元(CU)是否执行对角线运动划分的标志。例如，如果标志是第一值，则可以执行对角线运动划分，否则，可以不执行对角线运动划分。
该标志可以由编码设备编码并用信号传送，或者可以由解码设备基于预定编码参数来得出。在此，编码参数可以包括切片类型、帧间模式类型、块大小/形状、块的宽度与高度之间的比率等。
例如，可以仅在当前块所属的切片类型是B切片时将标志设置为第一值。替选地，可以仅在当前块所属的切片类型不是I切片时将标志设置为第一值。替选地，可以仅在当前块的帧间模式是合并模式、跳过模式、AMVP模式或仿射模式中的至少一个时将标志设置为第一值。替选地，可以仅在当前块的宽度或高度中的至少一个大于或等于预定阈值大小时将标志设置为第一值。这里，阈值大小可以是4、8、16或更大。替选地，可以仅在属于当前块的样本的数量(W*H)大于或等于预定阈值数量时将标志设置为第一值。在此，阈值数可以是32、64或更大。替选地，可以仅在当前块的宽度与高度之比小于预定阈值时将标志设置为第一值。这里，阈值可以是4、8或更大。
当标志指示执行对角线运动划分时，可以用信号传送对角线运动划分的方向信息。如果方向信息是第一值，则可以基于连接左上和右下的对角线(在下文中称为第一对角线)来划分当前块，否则，可以基于连接右上和左下的对角线(以下称为第二对角线)来划分当前块。
可以根据当前块的模式信息而不用信号传送用于对角线运动划分的信息。在这种情况下，在当前块的模式信息是帧内预测模式时，可以不用信号传送。
另外，可以根据当前块的大小信息而不用信号传送对角线运动划分的信息。当前块的大小信息可以被定义为宽度或高度的大小、宽度与高度的比率、宽度与高度的乘积等。例如，如果当前块的宽度或高度小于8，则当前块可以不使用对角线运动划分。
替选地，作为另一实施方式，在当前块的宽度或高度小于8或者当前块的宽度与高度的比率大于或等于特定比率时，可以不使用对角运动划分。当宽高比大于1:3或3:1(例如1:4或4:1、1:8或8:1)时，当前块可以不使用对角线运动划分。在这种情况下，可以不用信号传送对角线运动划分信息。
图4示出了作为应用本发明的实施方式的基于合并模式的帧间预测方法。
参照图4，可以构造当前块的合并候选列表(S400)。
当前块可以具有正方形或非正方形形状。通过上述对角线运动划分，当前块可以被划分为两个分区。在这种情况下，两个分区中的至少一个可以是三角形分区。
可以确定当前块的合并候选，并且可以基于合并候选构建合并候选列表。当前块的两个分区可以共享一个合并候选列表，或者可以为每个分区构造不同的合并候选列表。这里，合并候选列表可以包括当前块的空间合并候选或时间合并候选中的至少一个。
可以从当前块的空间邻近块的运动信息中得出空间合并候选的运动信息。这里，空间邻近块是与当前块属于相同图片的块，并且可以表示与当前块相邻的块。空间邻近块可以包括与当前块的左、上、右上、左下或左上中至少之一相邻的块。可以仅当与左、上、右上和左下相邻的块中的至少一个不可用时使用左上邻近块。
可以从当前块的时间邻近块的运动信息中得出时间合并候选的运动信息。时间邻近块是属于与当前块不同的图片的块，并且可以被定义为与当前块位于相同位置的块。在此，位于相同位置的块可以指与当前块的右下角相邻的块(BR)、包括当前块的中心样本的位置的块(CTR)、或包括当前块的左上样本的位置的块(TL)中的至少一个。
替选地，位于相同位置的块可以指包括从当前块的左上样本的位置移位预定视差矢量的位置的块。这里，可以基于上述空间邻近块的运动矢量中的任何一个来确定视差矢量。例如，视差矢量可以被设置为左邻近块的运动矢量或上邻近块的运动矢量。替选地，可以基于上述空间邻近块的运动矢量中的至少两个的组合来确定视差矢量。该组合可以包括计算最大值、最小值、中值和加权平均值的过程。例如，视差矢量可以被设置为左邻近块的运动矢量与左下邻近块的运动矢量之间的中值或平均值。
可以分别从时间邻近块的运动矢量和参考图片索引得出时间合并候选的运动矢量和参考图片索引。替选地，根据时间邻近块的运动矢量得出时间合并候选的运动矢量，并且时间合并候选的参考图片索引被设置为预先提交给解码设备的默认值(例如，0)，无论时间邻近块如何。
合并候选列表还可以包括组合的合并候选或具有零运动矢量的合并候选中的至少一个。
可以通过将属于预生成的合并候选列表的n个合并候选组合来得出组合的合并候选。在此，n可以是2、3、4或更大的整数。待组合的合并候选的数量(n)可以是预先提交给编码/解码设备的固定值，或者可以由编码设备进行编码并用信号传送。可以以序列、图片、切片、图块、子图块(砖块)或预定块中的至少一个单元来执行用信号传送。可以基于剩余的合并候选的数量来可变地确定要被组合的合并候选的数量(n)。在此，剩余的合并候选的数量可以表示可以包括在合并候选列表中的合并候选的最大数量与合并候选列表中的合并候选的当前数量之间的差。最大数量可以是预先提交给编码/解码设备的数量，或者可以由编码设备进行编码并用信号传送。当前数量可以表示在添加组合的合并候选之前构造的合并候选的数量。例如，当剩余合并候选的数量为1时，使用两个合并候选，并且当剩余合并候选的数量大于1时，可以使用三个或更多个合并候选。
n个合并候选的位置可以是合并候选列表中的预定位置。例如，可以为属于合并候选列表的每个合并候选分配索引(0至(k-1))。在此，k可以表示合并候选列表中包括的合并候选的总数。在这种情况下，n个合并候选的位置可以对应于合并候选列表中的索引0至索引(n-1)。例如，当n＝2时，可以仅使用合并候选列表中的第一合并候选(索引＝0)和第二合并候选(索引＝1)来得出要被组合的合并候选。
替选地，可以考虑包括在合并候选列表中的每个合并候选的预测方向来确定n个合并候选。例如，在合并候选列表中包括的合并候选中，可以选择性地仅使用与双向预测对应的合并候选，或者可以选择性地仅使用与单向预测对应的合并候选。
可以使用空间合并候选和时间合并候选两者来得出组合的合并候选，或者可以仅使用空间合并候选或时间合并候选之一来得出组合的合并候选。
可以在合并候选列表中的空间/时间合并候选之后添加组合的合并候选。也就是说，组合的合并候选的索引可以大于空间/时间合并候选的索引。替选地，可以在合并候选列表中的空间合并候选与时间合并候选之间添加组合的合并候选。也就是说，组合的合并候选的索引可以大于空间合并候选的索引，并且可以小于时间合并候选的索引。替选地，可以考虑组合的合并候选的预测方向来可变地确定组合的合并候选的位置。可以根据组合的合并候选的预测方向是否是双向预测来重排合并候选列表中的组合的合并候选的位置。例如，当组合的合并候选对应于双向预测时，可以分配小于空间或时间合并候选的索引。否则，可以分配大于空间或时间合并候选的索引。
在下文中，为了便于描述，将描述基于两个合并候选得出组合的合并候选的方法。
可以通过第一合并候选和第二合并候选的运动信息的加权平均来得出组合的合并候选的运动信息。例如，可以通过第一合并候选的沿LX方向的运动信息和第二合并候选的沿LX方向的运动信息的加权平均来得出组合的合并候选的沿LX方向的运动信息(X＝0或1)。然而，组合的合并候选的沿LX方向的参考图片索引可以被得出为第一合并候选或第二合并候选的沿LX方向的参考图片索引。例如，组合的合并候选的沿LX方向的参考图片索引可以仅使用第一合并候选的沿LX方向的参考图片索引来得出。在此，第一合并候选的索引可以小于第二合并候选的索引。
加权平均的权重为[1:1]、[1:2]、[1:3]或[2:3]，但不限于此。可以在编码/解码设备中预先定义权重或者从解码设备得出权重。在这种情况下，可以通过考虑当前图片与合并候选的参考图片之间的距离或合并候选的预测方向中的至少一个来得出权重。
可替选地，可以从第一合并候选的沿L0方向的运动信息得出组合的合并候选的沿L0方向的运动信息，并且可以从第二合并候选的沿L1方向的运动信息得出组合的合并候选的沿L1方向的运动信息。相反，可以从第二合并候选的沿L0方向的运动信息得出组合的合并候选的沿L0方向的运动信息，并且可以从第一合并候选的沿L1方向的运动信息得出组合的合并候选的沿L1方向的运动信息。
在该实施方式中，上述运动信息包括预测方向标志、参考图片索引或运动矢量中的至少一个，并且可以在稍后描述的实施方式中以相同的方式进行解释。
可以基于上述合并候选来构建合并候选列表，将参照图5至图7对其进行详细描述。
参照图4，可以从合并候选列表得出当前块的运动信息(S410)。
具体地，可以用信号传送当前块的合并索引。合并索引可以是被编码以指定合并候选列表中包括的多个合并候选中的任何一个的信息。可以基于指示是否执行基于对角线运动划分的运动补偿的标志来用信号传送合并索引。例如，当标志指示可以执行基于对角线运动划分的运动补偿时(即，当标志是第一值时)，用信号传送合并索引；否则，可能不用信号传送合并索引。该标志与图3中描述的相同，并且将省略其详细描述。
可以为当前块的第一分区和第二分区中的每个分区用信号传送合并索引(实施方式1)。可以使用具有与第一分区的用信号传送的合并索引(mergeIdx1)相同的索引的合并候选的运动信息来得出第一分区的运动信息。当第二分区的用信号传送的合并索引(mergeIdx2)小于mergeIdx1时，可以使用具有与mergeIdx2相同的索引的合并候选的运动信息来得出第二分区的运动信息。另一方面，当mergeIdx2大于或等于mergeIdx1时，可以使用具有与(mergeIdx2+1)相同的索引的合并候选的运动信息来得出第二分区的运动信息。
可替选地，可以为当前块用信号传送一个合并索引(mergeIdx)(实施方式2)。也就是说，属于当前块的第一分区和第二分区可以共享用信号传送的mergeIdx。可以基于由mergeIdx指定的合并候选的运动信息来得出第一分区和第二分区的运动信息。
例如，当由mergeIdx指定的合并候选对应于双向预测时，对应的合并候选可以具有沿L0方向的运动信息和沿L1方向的运动信息。在这种情况下，可以从沿L0方向的运动信息和沿L1方向的运动信息中的一个得出第一分区的运动信息，并且可以从另一个得出第二分区的运动信息。另一方面，当由mergeIdx指定的合并候选与双向预测不对应时，第一分区的运动信息被得出为由mergeIdx指定的合并候选的运动信息，并且第二分区的运动信息可以被得出为由(mergeIdx+k)指定的合并候选的运动信息。在此，k可以是绝对值为1、2、3或更大的整数。
可替选地，本实施方式可以应用于通过将第一分区和第二分区的合并候选构建成如图7所示的一个组来构建合并候选列表的情况。
可以基于合并候选列表中的预先提交的合并候选的运动信息来得出第一分区和第二分区的运动信息(实施方式3)。在这种情况下，可以省略对合并索引的信号传送。预先提交的合并候选可以是索引为0的合并候选。如实施方式2中所描述的，可以考虑索引为0的合并候选是否对应于双向预测来得出第一分区和第二分区的运动信息。可替选地，预先提交的合并候选可以是在与双向预测对应的合并候选中具有最小索引的合并候选。与双向预测对应的合并候选可以包括空间/时间合并候选或组合的合并候选中的至少一个。如上述实施方式2中所描述的，基于与双向预测对应的合并候选的运动信息来得出第一分区和第二分区的运动信息。
可以基于上述实施方式1至3中的任意一个来得出每个分区的运动信息，或者可以基于实施方式1至3中的至少两个的组合来得出每个分区的运动信息。例如，可以基于实施方式1得出第一分区的运动信息，并且可以基于实施方式3得出第二分区的运动信息。
在对角线运动划分的情况下，为了减小存储器带宽，每个分区可以被限制为仅执行单向预测，并且下面将给出限制方法的详细描述。
通过考虑通过对角线运动划分而获得的分区的合并索引，可以将分区限制为仅执行单向预测(实施方式1)。
例如，当第一分区的合并索引(mergeIdx1)为0或偶数(例如2、4、6)时，可以使用与mergeIdx1对应的合并候选的沿L0方向的运动信息来得出第一分区的运动信息。然而，与mergeIdx1对应的合并候选可能不具有沿L0方向的运动信息。在这种情况下，可以使用对应的合并候选的沿L1方向的运动信息来得出第一分区的运动信息。
另一方面，当第一分区的合并索引(mergeIdx1)是奇数(例如1、3、5)时，可以使用与mergeIdx1对应的合并候选的沿L1方向的运动信息来得出第一分区的运动信息。然而，与mergeIdx1对应的合并候选可能不具有沿L1方向的运动信息。在这种情况下，可以使用对应的合并候选的沿L0方向的运动信息来得出第一分区的运动信息。
合并索引(mergeIdx1)可以由编码设备进行编码并用信号传送，可以基于用信号传送的合并索引来得出，或者可以预先提交给解码设备。可以以与上述第一分区相同的方式得出第二分区的运动信息，并且将省略其详细描述。
相反，如果第一分区的合并索引(mergeIdx1)为0或偶数(例如2、4、6)，则可以使用与mergeIdx1对应的合并候选的沿L1方向的运动信息来得出第一分区的运动信息。如果第一分区的合并索引(mergeIdx1)不是0或偶数，则可以使用与mergeIdx1对应的合并候选的沿L0方向的运动信息来得出第一分区的运动信息。
可替选地，根据通过对角线运动划分的分区的位置，对应的分区可以被限制为仅执行单向预测(实施方式2)。
例如，当前块的第一分区可以仅参考由合并索引(mergeIdx1)指定的合并候选的沿L0方向的运动信息，而第二分区可以仅参考由合并候选(mergeIdx2)指定的合并候选的沿L1方向的运动信息。然而，当由mergeIdx1指定的合并候选不具有沿L0方向的运动信息时(也就是，在L1预测的情况下)，可以参考对应的合并候选的沿L1方向的运动信息。类似地，当由mergeIdx2指定的合并候选不具有沿L1方向的运动信息时(也就是，在L0预测的情况下)，可以参考对应的合并候选的沿L0方向的运动信息。在此，第一分区可以意指划分当前块的对角线的顶部分区，而第二分区可以意指底部分区。
基于上述实施方式1或2中的任意一个，可以强制单向预测。可替选地，可以基于上述实施方式1和2的组合来强制单向预测。
参照图4，可以使用得出的运动信息来执行当前块的帧间预测(S420)。
可以使用由第一分区的运动矢量指定的第一参考块(PP0)或由第二分区的运动矢量指定的第二参考块(PP1)中的至少一个来预测当前块的像素。根据当前块中像素的位置，可以通过使用第一参考块的第一像素或第二参考块的第二像素中的仅一者来预测像素，或者通过第一参考块的第一像素和第二参考块的第二像素的加权平均来预测像素。在此，第一像素和第二像素可以与要预测的当前块的像素在相同的位置处。
例如，可以如下面的式3所示获得根据本发明的当前块的预测块(PCUR)。
[式3]
PCUR(x，y)＝(PP0(x，y)xMASKP0(x，y)+PP1(x，y)xMASKP1(Xy)+偏移)>>移位
PP0和PP1分别表示第一分区和第二分区的参考块，MASKP0(x,y)和MASKP1(x,y)表示在(x,y)坐标处的权重，以及MASKP0(x,y)与MASKP1(x,y)的和必须等于2移位。偏移可以为0或2(移位-1)。
同时，在对角线运动划分的情况下，可以通过第一分区中(x1,y1)位置处的像素和第二分区中(x1,y1)位置处的像素的加权平均来预测位于对角线上的像素P(x1,y1)。同样，可以通过第一分区中位置(x2,y2)处的像素和第二分区中位置(x2,y2)处的像素的加权平均来预测像素P(x1,y1)的邻近像素P(x2,y2)。可替选地，可以基于第一分区中位置(x2,y2)处的像素或第二分区中位置(x2,y2)处的像素中的任何一个来预测像素P(x1,y1)的邻近像素P(x2,y2)。在这种情况下，应用到像素P(x1,y1)的权重(w1)可以不同于应用到像素P(x2,y2)的权重(w2)。将参照图8和图9详细描述本发明的加权预测。
图5是示出当前块的合并候选列表及其构造的概念图的图。
根据本发明的实施方式，可以为当前块构造合并候选列表，并且可以使用各种类型的合并候选。
在这种情况下，各种类型的合并候选可以包括如下项中的至少一项：空间相邻的合并候选和时间相邻的合并候选；基于子块的合并候选，其将当前块划分为多个子块并在每个子块单元中使用时间上对应的运动；或者仿射变换合并候选，其通过使用块的特定位置处的运动矢量来计算块内多个子块中的每个子块的运动矢量并使用所计算出的运动矢量。
根据是否以子块为单位得出当前块的运动信息，可以不同地确定当前块的合并候选。例如，当以子块为单位得出当前块的运动信息时，合并候选列表可以包括基于子块的合并候选、仿射变换合并候选等。否则，合并候选列表可以包括空间合并候选、时间合并候选等。
在构造合并候选列表时，构造顺序不限于图5所示的顺序，以及图5中示出的合并候选列表的构造顺序是实施方式并且可以是空间相邻的合并候选、基于子块的时间合并候选、仿射变换合并候选和时间相邻的合并候选的顺序。可替选地，合并候选列表的构造顺序可以是空间相邻的合并候选、仿射变换合并候选、基于子块的时间合并候选和时间相邻的合并候选的顺序。可替选地，基于子块的时间合并候选和时间相邻的合并候选可以被布置在空间相邻的合并候选与仿射变换合并候选之间。可替选地，基于子块的时间合并候选可以被布置在空间相邻的合并候选或时间相邻的合并候选之前。可替选地，基于子块的时间合并候选可以被布置在时间相邻的合并候选之后。
图6是示出当前块的合并候选列表及其构造的概念图的图。
根据图5和图6中所示的本发明的实施方式，可以为当前块构造合并候选列表，并且可以使用各种类型的合并候选。
在这种情况下，各种类型的合并候选可以包括如下项中的至少一项：空间相邻的合并候选；时间相邻的合并候选；基于子块的合并候选，其将当前块划分为多个子块并在每个子块单元中使用时间上对应的运动；或者仿射变换合并候选，其通过使用块的特定位置处的运动矢量来计算块内多个子块中的每个子块的运动矢量并使用所计算的运动矢量。
此外，如图6中所示，一个或更多个对角线运动划分可以被用作当前块的合并候选。
当对角线运动划分被选择为当前块的合并候选时，当前块被划分成两个分区，并且使用每个分区的不同的运动矢量来执行运动预测和补偿。
在这种情况下，每个分区的不同的运动矢量是指当前块的在空间和时间上相邻的位置处的运动矢量，并且对应的运动矢量可以是以与使用现有的空间合并候选和时间合并候选构造的合并候选列表相同的顺序配置的运动矢量。
图7是示出根据对角线运动划分来分开构造合并候选列表的概念的图。
图7是示出分开构造与图5和图6不同的合并候选列表的概念的图。
根据图7，与图5和图6不同，仅用于对角线运动划分的合并候选的分开的列表可以被构造成使用对角线运动划分来执行运动预测和补偿。
在这种情况下，有必要用信号传送是使用现有的合并候选列表还是使用用于对角线运动划分的合并候选列表，这可以在以跳过模式或合并模式对当前块进行编码时以标志的形式用信号传送。
可以与现有的合并候选列表(700)分开地构造用于对角线运动划分的对角线合并候选列表(710)。
在图7中，用于对角线运动划分的合并候选列表(710)具有与现有的合并候选列表(700)相同的用于每个运动候选(702、703、704、705)的合并候选索引(701)。
然而，在本发明的实施方式中，在如图7中所示的合并候选列表(710)的情况下，对于每个分区都存在合并候选，并且将这些合并候选配置为针对每个分区的一个集合，并且使用针对每个集合的不同索引。
在这种情况下，在构造一个运动候选集合时，P0的运动和P1的运动必须始终彼此不同，并且如果P0的运动和P1的运动相同，则它们被从对角线运动合并候选列表中排除。
图8是示出对图3所示的对角线运动划分执行基于掩模的运动预测和补偿的概念的图。
图8示出了通过对角线运动划分将当前块划分为两个分区的示例。
具体地，可以通过将等于1的权重应用于第一分区的参考块中位置(x1,y1)处的像素和第二分区的参考块中位置(x1,y1)处的像素中的每一个像素来预测位于对角线上的像素P(x1,y1)(下文中称为第一区域)。可以通过将等于2的权重应用于第一分区的参考块中位置(x2,y2)处的像素并将等于0的权重应用于第二分区的参考块中位置(x2,y2)处的像素来预测第一分区中除属于第一区域的像素之外的剩余像素P(x2,y2)。也就是说，像素P(x2,y2)可以被预测为第一分区的参考块中位置(x2,y2)处的像素。
同时，可以通过将等于0的权重应用于第一分区的参考块中位置(x3,y3)处的像素并将等于8的权重应用于第二分区的参考块中位置(x3,y3)处的像素来预测第二分区中除属于第一区域的像素之外的剩余像素P(x3,y3)。也就是说，像素P(x3,y3)可以被预测为第二分区的参考块中位置(x3,y3)处的像素。
如上所述，分别获得第一分区的预测像素(predSample1)和第二分区的预测像素(predSample2)，并通过将predSample1与predSample2的和除以对predSample1和predSample2中的每一个应用的权重的和(即8)来获得最终的预测块。
根据图8中所示的实施方式，应用于第一分区的像素的权重(w1)与应用于第二分区的像素的权重(w2)的和为2，并且在重构为最终的正方形或矩形预测块的过程中，将对应位置处的像素值相加并除以2，以获得最终的预测像素值。
在本发明中，这样的方法被称为基于掩模的运动预测和补偿方法，并且还可以包括使用各种任意形状的掩模。
如果以掩模的形式来配置图8中所示的对角运动划分，则可以如式4对其进行配置。
[式4]
在式4中，MASKP0表示第一分区的权重，而MASKP1表示第二分区的权重。使用式4的权重生成最终的正方形和矩形预测块的方法如下面的式5所示。
[式5]
PDMP(x，y)＝(PP0(x，y)x MASKP0(x，y)+PP1(x，)x MASKP1(x，y))＞＞移位
在式5中，PDMP表示使用对角线运动划分(diagonal motion division，DMP)获得的最终的正方形和矩形预测块，PP0(x,y)表示第一分区中(x,y)位置处的像素值，以及PP1(x,y)表示第二分区中(x,y)位置处的像素值。移位是根据权重的最终移位值，并且由于图8所示的权重是2，所以图2中的移位值为1。
图9是图8所示的所提出的基于掩模的块划分方法的另一个权重被应用的实施方式。
图9示出了权重w1与权重w2的和为8的实施方式，并且与图8不同，图9示出的实施方式通过不仅对对角线中包括的像素使用不同的权重而且对与对角线相邻的区域中的像素使用不同的权重来起到减少在划分的边界处可能发生的边界劣化的作用。相邻区域可以包括与从位于对角线上的像素起的上侧或左侧方向相邻的i个像素和与从位于对角线上的像素起的下侧或右侧方向相邻的i个像素。在此，i可以是1、2、3、4或更大，并且可以根据当前块的宽度和高度的比率(W/H)可变地确定。例如，可以将i设置为与当前块的W/H相同的值。
[实施方式1]
可以通过将权重4应用于第一分区的参考块中(x1,y1)位置处的像素和第二分区的参考块中(x1,y1)位置处的像素中的每一个像素来预测位于对角线上的像素P(x1,y1)(下文中称为第一区域)。可以通过将权重6应用于第一分区的参考块中(x2,y2)位置处的像素并将权重2应用于第二分区的参考块中(x2,y2)位置处的像素来预测第一区域的上或左邻近像素P(x2,y2)(下文中称为第二区域)。可以通过将权重7应用于第一分区的参考块中(x3,y3)位置处的像素并且将权重1应用于第二分区的参考块中(x3,y3)位置处的像素来预测第二区域的上或左邻近像素P(x3,y3)(下文中称为第三区域)。可以通过将权重8应用于第一分区的参考块中(x4,y4)位置处的像素并将权重0应用于第二分区的参考块中(x4,y4)位置处的像素来预测第一分区中除属于第一至第三区域的像素之外的剩余像素P(x4,y4)。也就是说，像素P(x4,y4)可以被预测为第一分区的参考块中(x4,y4)位置处的像素。
同时，可以通过将权重2应用于第一分区的参考块中(x5,y5)位置处的像素并且将权重6应用于第二分区的参考块中(x5,y5)位置处的像素来预测第一区域的下或右邻近像素P(x5,y5)(下文中称为第四区域)。可以通过将权重1应用于第一分区的参考块中(x6,y6)位置处的像素并且将权重7应用于第二分区的参考块中(x6,y6)位置处的像素来预测第四区域的下或右邻近像素P(x6,y6)(下文中称为第五区域)。可以通过将权重0应用于第一分区的参考块中(x7,y7)位置处的像素并且通过将权重8应用于第二分区的参考块中(x7,y7)位置处的像素来预测第二分区中除属于第一区域、第四区域和第五区域的像素之外的剩余像素P(x7,y7)。也就是说，像素P(x7,y7)可以被预测为第二分区的参考块中(x7,y7)位置处的像素。
[实施方式2]
可以通过将权重4应用于第一分区的参考块中(x1,y1)位置处的像素和第二分区的参考块中(x1,y1)位置处的像素中的每一个像素来预测位于对角线上的像素P(x1,y1)(下文中称为第一区域)。可以通过将权重5应用于第一分区的参考块中(x2,y2)位置处的像素并且将权重3应用于第二分区的参考块中(x2,y2)位置处的像素来预测第一区域的上或左邻近像素P(x2,y2)(下文中称为第二区域)。可以通过将权重6应用于第一分区的参考块中(x3,y3)位置处的像素并且通过将权重2应用于第二分区的参考块中(x3,y3)位置处的像素来预测第二区域的上或左邻近像素P(x3,y3)(下文中称为第三区域)。可以通过将权重7应用于第一分区的参考块中(x4,y4)位置处的像素并且通过将权重1应用于第二分区的参考块中(x4,y4)位置处的像素来预测第三区域的上或左邻近像素P(x4,y4)(下文中称为第四区域)。可以通过将权重8应用于第一分区的参考块中(x5,y5)位置处的像素并且通过将权重0应用于第二分区的参考块中(x5,y5)位置处的像素来预测第一分区中除属于第一至第四区域的像素之外的剩余像素P(x5,y5)。也就是说，像素P(x5,y5)可以被预测为第一分区的参考块中(x5,y5)位置处的像素。
同时，可以通过将权重3应用于第一分区的参考块中(x6,y6)位置处的像素并且通过将权重5应用于第二分区的参考块中(x6,y6)位置处的像素来预测第一区域的下或右邻近像素P(x6,y6)(下文中称为第五区域)。可以通过将权重2应用于第一分区的参考块中(x7,y7)位置处的像素并且通过将权重6应用于第二分区的参考块中(x7,y7)位置处的像素来预测第五区域的下或右邻近像素P(x7,y7)(下文中称为第六区域)。可以通过将权重1应用于第一分区的参考块中(x8,y8)位置处的像素并且通过将权重7应用于第二分区的参考块中(x8,y8)位置处的像素来预测第六区域的下或右邻近像素P(x8,y8)(下文中称为第七区域)。可以通过将权重0应用于第一分区的参考块中(x9,y9)位置处的像素并且通过将权重8应用于第二分区的参考块中(x9,y9)位置处的像素来预测第二分区中除属于第一区域和第五至第七区域的像素之外的剩余像素P(x9,y9)。也就是说，像素P(x9,y9)可以被预测为第二分区的参考块中(x9,y9)位置处的像素。
如图8和图9中所描述的，可以将当前块划分为k个区域，并且可以根据像素所属的区域来应用不同的权重。在此，k可以为3、5、7、9或更大。
可以基于由编码设备进行编码并用信号传送的索引来确定k。索引可以指定权重集合、用于每个权重集合的权重数目或权重之和(w1+w2)中的至少一个。如上所述，权重集合可以是以下项中的至少一项：由三个权重([2:0]、[1:1]、[0:2])组成的第一权重集合；由七个权重([8:0]、[7:1]、[6:2]、[4:4]、[2:6]、[1:7]、[0:8])组成的第二权重集合；或者由九个权重([8:0]、[7:1]、[6:2]、[5:3]、[4:4]、[3:5]、[2:6]、[1:7]、[0:8])组成的第三权重集合。例如，如果索引是第一值，则可以应用第一权重集合，否则，可以应用第二或第三权重集合。可替选地，如果索引是第二值，则可以应用第二权重集合，否则，可以应用第三权重集合。
可替选地，可以基于编码参数诸如当前块的大小、形状或划分类型来确定k。例如，如果当前块的宽度或高度中的至少一个小于预定阈值大小，则可以应用实施方式1，否则，可以应用实施方式2。
如上所述，分别获得第一分区的预测像素(predSample1)和第二分区的预测像素(predSample2)，并且通过将predSample1与predSample2的和除以应用于predSample1和predSample2中的每一个的权重之和(即8)来获得最终的预测块。
此外，本发明包括根据块的大小使用不同的权重。在实施方式中，当块的大小小于预定阈值大小时，使用图8所示的掩模来执行运动预测和补偿，而当块的大小大于或等于阈值大小时，使用图9所示的一个掩模来执行运动预测和补偿。此处，块的大小可以被理解成：块的宽度或高度、宽度和高度的总和、宽度和高度的乘积、宽度和高度的最小值/最大值、宽度和高度的比率等。阈值大小可以是1、2、4、8、16、32、64、128、256或更大。
上述块的大小是一个实施方式，并且如上述实施方式中那样根据各种块的大小使用不同的掩模来执行预测和补偿是包括在本发明的范围内的。
本公开内容的各种实施方式没有以所有可能的组合列出，而是旨在描述本公开内容的代表性方面，并且可以独立地应用或者可以以两个或更多个的组合应用在各种实施方式中描述的事件。
另外，可以通过硬件、固件、软件或其组合来实现本公开内容的各种实施方式。对于硬件实现，其可以由一个或更多个ASIC(专用集成电路)、DSP(数字信号处理器)、DSPD(数字信号处理装置)、PLD(可编程逻辑器件)、FPGA(现场可编程门阵列)、通用处理器、控制器、微控制器、微处理器等实现。
本公开内容的范围包括：允许根据各种实施方式的方法的操作在装置或计算机上执行的软件或机器可执行指令(例如，操作系统、应用、固件、程序等)，以及存储这样的软件或指令并且在装置或计算机上可执行的非暂态计算机可读介质。
工业适用性
本发明可以用于对视频信号进行编码/解码。
根据上述描述可知，本发明的实施例还公开了以下技术方案，包括但不限于：
方案1.一种对视频进行解码的方法，包括：
确定当前块的合并候选；
基于所述合并候选来构造合并候选列表；
从所述合并候选列表中得出所述当前块的运动信息；以及
使用所述运动信息来执行所述当前块的帧间预测，
其中，通过对角线运动划分将所述当前块划分为两个分区。
方案2.根据方案1所述的方法，其中，基于指示是否对所述当前块执行所述对角线运动划分的标志来执行所述对角线运动划分。
方案3.根据方案2所述的方法，其中，基于预定的编码参数来得出所述标志，以及
其中，所述编码参数包括切片类型、帧间模式类型、块大小/形状、或块的宽度和高度的比率中的至少一者。
方案4.根据方案1所述的方法，其中，属于所述当前块的所述两个分区共享所构造的合并候选列表。
方案5.根据方案1所述的方法，其中，所述合并候选列表包括空间合并候选、时间合并候选或组合合并候选中的至少一者。
方案6.根据方案1所述的方法，其中，基于所述当前块的合并索引得出所述运动信息，以及
其中，对于所述两个分区中的每一个，从编码设备用信号传送所述合并索引。
方案7.根据方案1所述的方法，其中，使用第一分区的第一参考块或第二分区的第二参考块中的至少一者来预测所述当前块的像素。
方案8.根据方案7所述的方法，其中，使用所述第一参考块中的第一像素或所述第二参考块中的第二像素中仅一者来预测所述当前块的像素，或者通过所述第一参考块中的所述第一像素和所述第二参考块中的所述第二像素的加权平均来预测所述当前块的像素。
方案9.根据方案8所述的方法，其中，所述加权平均的权重是[7:1]、[6:2]、[4:4]、[2:6]、或[1:7]之一。
方案10.根据方案9所述的方法，其中，根据所述当前块中的像素的位置来选择性地施加所述权重。

Claims (9)

1.一种对视频进行解码的方法，包括：
确定所述视频中的当前块的合并候选；
基于所述合并候选来构造所述当前块的合并候选列表；
基于所述合并候选列表来得出所述当前块的运动信息；以及
使用所述运动信息来执行所述当前块的帧间预测，
其中，所述当前块基于预定的划分线被划分为包括第一分区和第二分区的多个分区，
其中，所述第一分区或所述第二分区中的至少一者具有非矩形形状，
其中，针对所述当前块构造的所述合并候选列表被所述第一分区和所述第二分区共享，
其中，针对所述第一分区和所述第二分区中的每个分区得出所述当前块的运动信息，
其中，通过第一预测块和第二预测块的加权和来生成针对所述当前块的预测块，
其中，所述加权和的权重包括应用于所述第一预测块的像素的第一权重和应用于所述第二预测块的像素的第二权重，
其中，基于所述第一分区的运动信息获得所述第一预测块，以及基于所述第二分区的运动信息获得所述第二预测块，
其中，基于所述当前块中的当前像素的位置来确定所述加权和的所述第一权重和所述第二权重，
其中，当所述当前块中的所述当前像素位于所述划分线上时，所述第一权重等于所述第二权重，以及
其中，当所述当前块中的所述当前像素不位于所述划分线上时，所述第一权重不等于所述第二权重。
2.根据权利要求1所述的方法，其中，基于指示是否将所述当前块划分为所述多个分区的标志来划分所述当前块。
3.根据权利要求2所述的方法，其中，基于预定的编码参数来得出所述标志，以及
其中，所述编码参数包括切片类型、帧间模式类型、所述当前块的大小、或所述当前块的宽度和高度的比率中的至少一者。
4.根据权利要求1所述的方法，其中，基于所述当前块的合并索引来得出所述运动信息，以及
其中，对于所述第一分区和所述第二分区中的每一个，从编码设备用信号传送所述合并索引。
5.根据权利要求1所述的方法，其中，通过使用所述第一预测块中的第一像素和所述第二预测块中的第二像素中仅一者来预测所述当前块的所述当前像素，或者通过所述第一预测块中的所述第一像素和所述第二预测块中的所述第二像素的加权和来预测所述当前块的所述当前像素。
6.根据权利要求1所述的方法，其中，所述第一权重(w1)和所述第二权重(w2)的和为8。
7.根据权利要求6所述的方法，其中，权重(w1，w2)被确定为可用于所述当前块的权重候选中的一者，以及
其中，所述权重候选包括(8，0)、(7，1)、(6，2)、(5，3)、(4，4)、(3，5)、(2，6)、(1，7)和(0，8)中的至少一者。
8.一种对视频进行编码的方法，包括：
确定所述视频中的当前块的合并候选，所述合并候选包括空间合并候选和时间合并候选中的至少一者；
基于所述合并候选来构造所述当前块的合并候选列表；以及
基于来自所述合并候选列表的运动信息来执行所述当前块的帧间预测，
其中，所述当前块基于预定的划分线被划分为包括第一分区和第二分区的多个分区，
其中，所述第一分区或所述第二分区中的至少一者具有非矩形形状，
其中，针对所述当前块构造的所述合并候选列表被所述第一分区和所述第二分区共享，
其中，针对所述第一分区和所述第二分区中的每个分区确定所述当前块的运动信息，
其中，通过第一预测块和第二预测块的加权和来生成针对所述当前块的预测块，
其中，所述加权和的权重包括应用于所述第一预测块的像素的第一权重和应用于所述第二预测块的像素的第二权重，
其中，基于所述第一分区的运动信息获得所述第一预测块，以及基于所述第二分区的运动信息获得所述第二预测块，
其中，基于所述当前块中的当前像素的位置来确定所述加权和的所述第一权重和所述第二权重，
其中，当所述当前块中的所述当前像素位于所述划分线上时，所述第一权重等于所述第二权重，以及
其中，当所述当前块中的所述当前像素不位于所述划分线上时，所述第一权重不等于所述第二权重。
9.一种用于存储通过方法生成的比特流的非暂态计算机可读存储介质，所述方法包括：
确定当前块的合并候选，所述合并候选包括空间合并候选和时间合并候选中的至少一者；
基于所述合并候选来构造所述当前块的合并候选列表；以及
基于来自所述合并候选列表的运动信息执行所述当前块的帧间预测，
其中，所述当前块基于预定的划分线被划分为包括第一分区和第二分区的多个分区，
其中，所述第一分区或所述第二分区中的至少一者具有非矩形形状，
其中，针对所述当前块构造的所述合并候选列表被所述第一分区和所述第二分区共享，
其中，针对所述第一分区和所述第二分区中的每个分区确定所述当前块的运动信息，
其中，通过第一预测块和第二预测块的加权和来生成针对所述当前块的预测块，
其中，所述加权和的权重包括应用于所述第一预测块的像素的第一权重和应用于所述第二预测块的像素的第二权重，
其中，基于所述第一分区的运动信息获得所述第一预测块，以及基于所述第二分区的运动信息获得所述第二预测块，
其中，基于所述当前块中的当前像素的位置来确定所述加权和的所述第一权重和所述第二权重，
其中，当所述当前块中的所述当前像素位于所述划分线上时，所述第一权重等于所述第二权重，以及
其中，当所述当前块中的所述当前像素不位于所述划分线上时，所述第一权重不等于所述第二权重。
CN202410005766.2A 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法 Pending CN117834909A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20180076540 2018-07-02
KR10-2018-0076540 2018-07-02
PCT/KR2019/008031 WO2020009419A1 (ko) 2018-07-02 2019-07-02 병합 후보를 사용하는 비디오 코딩 방법 및 장치
CN201980044560.8A CN112369034B (zh) 2018-07-02 2019-07-02 使用合并候选的视频编码方法和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201980044560.8A Division CN112369034B (zh) 2018-07-02 2019-07-02 使用合并候选的视频编码方法和装置

Publications (1)

Publication Number Publication Date
CN117834909A true CN117834909A (zh) 2024-04-05

Family

ID=69060131

Family Applications (5)

Application Number Title Priority Date Filing Date
CN202410005340.7A Pending CN117834908A (zh) 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法
CN201980044560.8A Active CN112369034B (zh) 2018-07-02 2019-07-02 使用合并候选的视频编码方法和装置
CN202410005335.6A Pending CN117834907A (zh) 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法
CN202410009902.5A Pending CN117834910A (zh) 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法
CN202410005766.2A Pending CN117834909A (zh) 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法

Family Applications Before (4)

Application Number Title Priority Date Filing Date
CN202410005340.7A Pending CN117834908A (zh) 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法
CN201980044560.8A Active CN112369034B (zh) 2018-07-02 2019-07-02 使用合并候选的视频编码方法和装置
CN202410005335.6A Pending CN117834907A (zh) 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法
CN202410009902.5A Pending CN117834910A (zh) 2018-07-02 2019-07-02 对视频进行解码的方法和对视频进行编码的方法

Country Status (4)

Country Link
US (2) US11671619B2 (zh)
KR (1) KR20200003734A (zh)
CN (5) CN117834908A (zh)
WO (1) WO2020009419A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11695967B2 (en) * 2018-06-22 2023-07-04 Op Solutions, Llc Block level geometric partitioning
CN110944181B (zh) 2018-09-23 2023-03-10 北京字节跳动网络技术有限公司 仿射模型的多个假设
WO2020084470A1 (en) * 2018-10-22 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Storage of motion parameters with clipping for affine mode
CN112913247B (zh) 2018-10-23 2023-04-28 北京字节跳动网络技术有限公司 使用局部照明补偿的视频处理
CN113287317B (zh) 2018-10-23 2023-04-28 北京字节跳动网络技术有限公司 并置的局部照明补偿和修改的帧间编解码工具
KR20210087450A (ko) 2018-11-06 2021-07-12 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 기하학적 파티션을 이용한 인터 예측을 위한 사이드 정보 시그널링
WO2020140862A1 (en) 2018-12-30 2020-07-09 Beijing Bytedance Network Technology Co., Ltd. Conditional application of inter prediction with geometric partitioning in video processing
CN113302918A (zh) 2019-01-15 2021-08-24 北京字节跳动网络技术有限公司 视频编解码中的加权预测
CN113302919A (zh) 2019-01-17 2021-08-24 北京字节跳动网络技术有限公司 在视频处理中使用虚拟候选预测和加权预测
CN113574878A (zh) * 2019-03-11 2021-10-29 株式会社 Xris 用于对视频信号进行编码/解码的方法及其设备

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8879632B2 (en) * 2010-02-18 2014-11-04 Qualcomm Incorporated Fixed point implementation for geometric motion partitioning
KR102158700B1 (ko) * 2010-05-04 2020-09-22 엘지전자 주식회사 비디오 신호의 처리 방법 및 장치
KR101484281B1 (ko) * 2010-07-09 2015-01-21 삼성전자주식회사 블록 병합을 이용한 비디오 부호화 방법 및 그 장치, 블록 병합을 이용한 비디오 복호화 방법 및 그 장치
JP2012023597A (ja) * 2010-07-15 2012-02-02 Sony Corp 画像処理装置及び画像処理方法
CA3011221C (en) * 2010-07-20 2019-09-03 Ntt Docomo, Inc. Video prediction encoding and decoding for partitioned regions while determining whether or not to use motion information from neighboring regions
KR101712156B1 (ko) * 2010-12-06 2017-03-06 에스케이 텔레콤주식회사 임의의 형태의 블록을 이용한 인터예측에 의한 영상의 부호화/복호화 방법 및 장치
KR20120090740A (ko) * 2011-02-07 2012-08-17 (주)휴맥스 정밀한 단위의 필터 선택을 적용한 영상 부호화/복호화 장치 및 방법
KR102379457B1 (ko) 2011-09-09 2022-03-28 엘지전자 주식회사 인터 예측 방법 및 그 장치
KR102329126B1 (ko) * 2014-03-14 2021-11-19 삼성전자주식회사 인터 레이어 비디오의 복호화 및 부호화를 위한 머지 후보 리스트 구성 방법 및 장치
WO2015190839A1 (ko) * 2014-06-11 2015-12-17 엘지전자(주) 임베디드 블록 파티셔닝을 이용하여 비디오 신호를 인코딩, 디코딩하는 방법 및 장치
CA3039155A1 (en) * 2016-10-04 2018-04-12 Kt Corporation Method and apparatus for processing video signal
KR20230124092A (ko) * 2017-03-31 2023-08-24 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 화상 부호화 장치, 화상 복호 장치, 화상 부호화 방법및 화상 복호 방법
WO2019151279A1 (ja) * 2018-01-30 2019-08-08 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
MX2020012042A (es) * 2018-05-17 2021-01-29 Panasonic Ip Corp America Dispositivo de codificacion, dispositivo de decodificacion, metodo de codificacion y metodo de decodificacion.
CN116471409A (zh) * 2018-06-25 2023-07-21 Oppo广东移动通信有限公司 帧内预测方法和装置
MX2020012663A (es) * 2018-06-29 2021-02-09 Kt Corp Método y aparato para procesar una señal de video.

Also Published As

Publication number Publication date
CN112369034B (zh) 2024-01-26
US20210168398A1 (en) 2021-06-03
US11671619B2 (en) 2023-06-06
KR20200003734A (ko) 2020-01-10
CN112369034A (zh) 2021-02-12
WO2020009419A1 (ko) 2020-01-09
CN117834910A (zh) 2024-04-05
CN117834908A (zh) 2024-04-05
CN117834907A (zh) 2024-04-05
US20230308678A1 (en) 2023-09-28

Similar Documents

Publication Publication Date Title
CN112369034B (zh) 使用合并候选的视频编码方法和装置
US11265543B2 (en) Method, device, and recording medium storing bit stream, for encoding/decoding image
US11490077B2 (en) Image encoding/decoding method and apparatus involving merge candidate list and triangular shape partitions
US11509932B2 (en) Intra-frame prediction-based video coding method and device
KR20210008105A (ko) 영상 부호화/복호화 방법 및 장치
CN117336506A (zh) 图像解码方法、图像编码方法和存储比特流的记录介质
US20230283795A1 (en) Video coding method and device using motion compensation of decoder side
KR101782155B1 (ko) 움직임 벡터 정밀성을 이용하는 영상 부호화 및 복호화 방법과 영상 복호화 장치
KR20230144426A (ko) 영상 부호화/복호화 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination