CN110169061A - 多重假设的合并模式 - Google Patents

多重假设的合并模式 Download PDF

Info

Publication number
CN110169061A
CN110169061A CN201880005862.XA CN201880005862A CN110169061A CN 110169061 A CN110169061 A CN 110169061A CN 201880005862 A CN201880005862 A CN 201880005862A CN 110169061 A CN110169061 A CN 110169061A
Authority
CN
China
Prior art keywords
prediction
motion prediction
motion
candidate
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880005862.XA
Other languages
English (en)
Other versions
CN110169061B (zh
Inventor
徐志玮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN110169061A publication Critical patent/CN110169061A/zh
Application granted granted Critical
Publication of CN110169061B publication Critical patent/CN110169061B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供了用于视频编解码的多重假设运动预测模式。基于用于运动补偿的多个预测(假设)的选择，其是使用自候选运动预测子列表选择的运动预测子或者运动向量预测子而被分别获得，多重假设运动预测传达用于运动补偿的预测。当编解码像素区块时，实现多重假设运动预测的视频编解程序自像素区块的候选运动预测子列表选择第一运动预测子和第二运动预测子。视频编解程序对辨识第一运动预测子和第二运动预测子的运动预测码字进行编码或解码。视频编解程序基于分别使用所选的第一运动预测子和第二运动预测子而获得的第一像素集和第二像素集计算用于运动补偿的组合预测。视频编解程序通过使用用于运动补偿的组合预测编码或解码像素区块。

Description

多重假设的合并模式
交叉引用
本发明主张在2017年01月06日提出的申请号为62/443,008的美国临时专利申请的优先权，其内容以引用方式整体并入本文中。
技术领域
本发明涉及视频处理领域，具体地，本发明涉及一种传送运动预测子的方法。
背景技术
除非此处另有说明外，本部分所描述的方法相对于权利要求而言不是现有技术，并且通过本部分的引入不被承认是现有技术。
高效率视频编码(High-Efficiency Video Coding，HEVC)是由视频编码联合协作小组(Joint Collaborative Team on Video Coding，JCT-VC)开发的国际视频编码标准。HEVC为基于混合区块的运动补偿之类DCT(Discrete Cosine Transform，离散余弦变换)变换编解码架构。称为编码单元(coding unit，CU)的压缩的基本单元是2N×2N的正方形区块，并且每个编码单元可以被递归分割分成四个更小的编码单元，直到预定的最小尺寸被实现。每个编码单元包含一个或多个预测单元(prediction unit，PU)。
为了实现混合编解码体系架构的最佳编解码效率，HEVC采用帧内预测模式和/或帧间预测模式以用于每个预测单元。对于帧内预测模式而言，空间相邻重构像素可用于生成35个方向上的方向预测。对于帧间预测模式而言，时间重构参考帧可以用于生成运动补偿预测子。存在三种类型的帧间预测模式：跳过模式、合并模式和高级运动向量预测(advanced motion vector prediction，AMVP)模式。
在高级运动向量预测模式下，根据MV＝MVP+MVD，用于预测单元的运动补偿预测的运动向量(motion vector，MV)自运动向量预测子(motion vector predictor，MVP)和运动向量差(motion vector difference，MVD)(或残差运动数据)。对于高级运动向量预测预测的预测单元，运动向量预测子自包括两个空间候选和一个时间候选的运动向量预测子候选集被选择。辨识运动向量预测子选择的索引与相应的运动向量差一起被编码并传送。自参考帧列表L0和/或参考帧列表L1选择参考帧(或用于选择参考帧的参考索引)以用于双向预测或者单向预测也被编码和传送。
当预测单元以跳过模式或合并模式被编解码时，除了所选候选的合并索引之外，不传送运动信息。这是因为跳过模式和合并模式利用运动推理方法(MV＝MVP+MVD，其中MVD为零)，以自自参考帧列表L0或者参考帧列表L1(由片段头中所示)选择的时间相邻图像(即时间候选)中的空间相邻块(即空间候选)或者同位块获得运动信息。在跳过预测单元的情况下，正被编码的区块的残差信号也被省略。
发明内容
以下发明内容仅是说明性的，不打算以任何方式加以限制。也就是说，以下发明内容被提供以介绍此处所描述的新且非明显的技术的概念、重点、好处和优势。选择而不是所有的实施方式在下面的详细说明中进行进一步描述。因此，以下发明内容不用于确定所要求主题的本质特征，也不用于确定所要求主题的范围。
本发明的一些实施例提供了用于多重假设运动预测或多重假设跳过/合并模式的方法和系统。基于用于运动不到的多个预测(假设)的选择，其是使用自候选运动预测子列表选择的运动预测子或者运动向量预测子而被获得，多重假设运动预测传达用于运动补偿的预测。当编解码像素区块时，实现多重假设运动预测的视频编解程序(编码器或者解码器)自像素区块的候选运动预测子列表选择第一运动预测子和第二运动预测子。视频编解程序编码或者解码辨识第一运动预测子和第二运动预测子的运动预测码字。视频编解程序基于分别使用第一运动预测子和第二运动预测子而获得的第一像素集和第二像素集，计算用于运动补偿的组合预测(也称为组合运动补偿预测子)。视频编解程序通过使用用于运动补偿的组合预测对像素区块进行编码或者解码。
在一些实施例中，码字包括辨识第一运动预测子的特定索引。根据特定索引的映像，第二运动预测子被辨识。在一些实施例中，仅一个索引被使用且被编码为原始合并模式以选择第一候选，而第二候选通过使用预设方式而被选择，例如将固定偏移应用到此索引。在一些实施例中，辨识第一运动预测子和第二运动预测子的码字包括辨识第一运动预测子的索引，而第二运动预测子根据默认搜索流程而被辨识。在一些实施例中，当视频编码器或解码器接收运动预测子的多个假设的选择时，第一运动预测子和第二运动预测子的预测像素(即由第一运动预测子和第二运动预测子参考或者获得的像素集)的简单平均或者加权之和用于生成用于运动补偿的组合预测(或者组合运动补偿预测子)，作为用于运动补偿的最终预测。在一些实施例中，此平均是两个假设被不同加权的加权平均。
附图说明
下列附图用以提供本发明的进一步理解，并被纳入且构成本发明的一部分。这些附图说明了本发明的实施方式，并与说明书一起用以解释本发明的原理。为了清楚地说明本发明的概念，与实际实施方式中的尺寸相比，一些元件可以不按照比例被示出，这些附图无需按照比例绘制。
图1标出了在HEVC中用于合并模式/跳过模式/高级运动向量预测模式的运动向量预测子候选集。
图2标出了包括组合双向预测合并候选的合并候选列表。
图3示出了包括已缩放合并候选的合并候选列表。
图4示出了将零向量候选添加到合并候选列表或高级运动向量预测候选列表的示例。
图5示出了使用码字中的一个索引发信一个假设或两个假设。
图6概念性地示出了编解码用于像素区块的运动预测码字的示例流程。
图7示出了实现多重假设运动预测的示例视频编码器。
图8标出了视频编码器中实现多重假设运动预测的运动补偿模块。
图9概念性地示出了通过使用多重假设运动预测编码像素区块的流程。
图10示出了实现多重假设运动预测的示例视频解码器。
图11标出了视频解码器中实现多重假设运动预测的运动补偿模块。
图12概念性地示出了通过使用多重假设运动预测解码像素区块的流程。
图13概念性地示出了实现本发明的一些实施例的电子系统。
具体实施方式
在下面详细的说明书中，为了透彻理解相关教示内容，通过举例的方式进行说明大量具体的细节。基于本文所描述的教示内容的任何改变、推导和/或拓展均在本发明的保护范围内。在一些例子中，为了避免不必要地混淆本发明的教示内容的方面，在相对较高的级别而无细节上描述已知的方法、程序、元件和/或关于此处所公开的一个或者多个示例性实施方式的电路。
候选列表
为了通过使用高级运动向量预测、合并模式或跳过模式在HEVC下传送像素区块的运动信息，一索引被使用以自候选运动预测列表选择运动向量预测子(或运动预测子)。在合并模式/跳过模式中，合并索引用于从包括四个空间候选和一个时间候选的候选运动预测子列表中选择运动向量预测子。合并索引被传送，但运动预测不被传送。
图1标出了在HEVC中用于合并模式/跳过模式/高级运动向量预测模式的运动向量预测子候选集。本图标出了正在被编码或解码的视频图像或帧的当前区块100(编码单元或预测单元)。当前区块100(其可以是预测单元或编码单元)是指相邻预测单元以推导出空间运动向量预测子和时间运动向量预测子以用于高级运动向量预测、合并模式或跳过模式。
对于高级运动向量预测来说，左侧运动向量预测子是来自A0、A1的第一可用的运动向量预测子，顶部运动向量预测子是来自B0、B1、B2的第一可用的运动向量预测子，而时间运动向量预测子是来自TBR或TCTR的第一可用的运动向量预测子(TBR先被使用，如果TBR不可用，则TCTR被使用)。如果左侧运动向量预测子不可用且顶部运动向量预测子不是已缩放运动向量预测子，则如果在B0，B1和B2中存在已缩放运动向量预测子，则可以推导出第二顶部运动向量预测子。在HEVC中，高级运动向量预测的运动向量预测子列表大小是2。因此，在两个空间运动向量预测子和一个时间运动向量预测子的推导流程之后，只有前两个运动向量预测子可以被包括在运动向量预测子列表中。如果移除冗余之后，可用运动向量预测子的数量少于2，则将0个向量候选添加到候选列表中。
对于跳过模式和合并模式来说，从A0，A1，B0和B1推导出最多四个空间合并索引，并且从TBR或TCTR推导出一个时间合并索引(先使用TBR，如果TBR不可用，则使用TCTR)。如果四个空间合并索引中的任何一个不可用，则位置B2用于推导出合并索引作为替代。在推导出四个空间合并索引和一个时间合并索引之后，冗余合并索引被移除。如果非冗余合并索引的数量少于5，则额外的候选可以自原始候选推导出，并被添加到候选列表。存在三种类型的推导候选：
1.组合双向预测合并候选(推导候选类型1)。
2.已缩放双向预测合并候选(推导候选类型2)。
3.零向量合并/高级运动向量预测候选(推导候选类型3)。
对于推导候选类型1而言，通过组合原始合并候选创建组合双向预测合并候选。具体而言，如果当前片段是B片段，则通过组合来自于列表0和列表1的候选，另一合并候选被生成。图2标出了包括组合双向预测合并候选的合并候选列表。如图所示，具有mvL0(即列表0中的运动向量)与refIdxL0(即列表0中的参考图像索引)或mvL1(即列表1中的运动向量)与refIdxL1(即列表1中的参考图像索引)的两个原始候选用于创建双向预测合并候选。
对于推导候选类型2而言，通过缩放原始合并候选创建已缩放合并候选。图3示出了包括已缩放合并候选的合并候选列表。如图所示，原始合并候选具有mvLX(列表X中的运动向量，X可以是0或1)和refIdxLX(列表X中的参考图像索引，X可以是0或1)。例如，原始候选A是具有mvL0_A和参考图像索引ref0的列表0的单向预测运动向量。候选A最初被复制到列表L1作为具有参考图像索引ref0'。通过基于ref0和ref0'缩放mvL0_A，已缩放运动向量mvL0'_A被计算出。在列表L0中具有mvL0_A和ref0且在列表L1中具有mvL0'_A和ref0'的已缩放双向预测合并候选被创建并被添加到合并候选列表中。类似地，列表0中具有mvL1'_A和ref1'以及列表1中具有mvL1_A和ref1的已缩放双向预测合并候选被创建并被添加到合并候选列表。
对于推导的候选类型3而言，通过组合零向量和参考索引创建零向量候选。如果创建的零向量候选不是重复的，则其被添加到合并候选列表/高级运动向量预测候选列表中。图4示出了将零向量候选添加到合并候选列表或高级运动向量预测候选列表的示例。
II.多重假设运动预测
在跳过模式/合并模式中，一个合并索引用于从候选列表中选择一个运动预测子候选，其可以包括单向预测或双向预测运动预测子。如上述部分I中所述，候选列表还可以包括从其他候选导出的推导候选，例如，组合双向预测合并候选，已缩放双向预测合并候选和零向量合并候选。
自候选运动预测子列表选择的运动预测子或运动向量预测子用于获得由所选择的运动预测子参考的像素集。然后，这像素集用作运动补偿的预测像素。因此，预测像素可以称为运动补偿的预测、一运动补偿预测子或一假设。因此，一个合并索引用于传达一个所选择的运动预测子的跳过模式/合并模式方案是单假设合并模式。
本发明的一些实施例提供了用于多重假设运动预测或多重假设跳过/合并模式的方法和系统。多重假设运动预测基于用于运动补偿的多个预测(假设)的选择传达用于运动补偿的预测，其是使用从候选运动预测子列表中选择的运动预测子或运动向量预测子而分别被获得。当对像素区块进行编解码时，实现多重假设运动预测的视频编解程序(编码器或解码器)从像素区块的候选运动预测子列表中选择第一运动预测子和第二运动预测子。视频编解程序对辨识第一运动预测子和第二运动预测子的运动预测码字进行编码或解码。视频编解程序基于分别使用所选择的第一运动预测子和第二运动预测子所获得的第一像素集和第二像素集计算用于运动补偿的组合预测(也称为组合运动补偿预测子)。视频编解程序通过使用用于运动补偿的组合预测编码或解码像素区块。在下面的部分III中描述了实现多重假设运动预测的视频编码器示例。在下面的部分IV中描述了实现多重假设运动预测的视频解码器示例。
在一些实施例中，两个或以上运动预测子的选择由比特流中的运动预测码字传达。运动预测码字可以包括来自于候选运动预测子列表且辨识第一运动预测子的第一索引和辨识第二运动预测子的第二索引。第二索引可以被编解码为与码字中的第一索引不同。通常，第二索引可以由除了第一索引(即，原始合并索引)之外的编解码参数显性发信或者隐性推导出。
在一些实施例中，一个索引映像用于指示一个假设选择和两个假设选择。也就是说，用于辨识候选运动预测子的选择的码字具有辨识(i)从候选运动预测子列表中选择的任何一个候选运动预测子，或(ii)从候选运动预测子列表中选择的任何两个候选运动预测子的任意组合。
图5示出了使用码字中的一个索引以发信一个假设或两个假设。本图标出了将一个索引映像成一个假设或两个假设的三种示例性映射，即501-503。在本示例中，一个索引被使用以从候选的HEVC合并模式列表的五个候选选择一个候选(即一个假设)或两个候选(即两个假设)。
如果在候选列表中有N个候选，则索引映像可以包含N+N(N-1)/2个条目，其中前N个条目仅包含用于一个候选的索引，而另外N(N-1)/2个条目包含用于N个候选的任意两个组合的索引。例如，根据一些测试序列的统计，索引的顺序可以以预定方式排列。
例如，在映像501中，索引0-索引4用于发信一个假设，索引5-索引14用于发信两个假设。索引0-索引4分别映像到候选0、候选1、候选2、候选3或候选4。索引5映像到候选0和候选1，索引6映像到候选1和候选2，索引7映像到候选0和候选2，索引8映像到候选2和候选3，索引9映像到候选1和候选3，索引10映像到候选0和候选3，索引11映像到候选2和候选4，索引12映像到候选2和候选4，索引13映像到候选1和候选4，索引14映像到候选0和候选4。映像502和映像503将这些索引中的一些映像到候选列表中的不同候选(例如，在映像502中，索引4映像到候选0和候选1，而不是候选4)。
在一些实施例中，码字包括辨识第一运动预测子的特定索引。根据特定索引的映像，第二运动预测子被辨识。在一些实施例中，仅一个索引被使用且编码成原始合并模式以选择第一候选，而第二候选通过使用预定方式进行选择，例如，将固定偏移应用到此索引。固定偏移可以是+1，使得视频编码器或解码器总是从列表中选择两个连续候选以用于多重假设运动预测。
在一些实施例中，辨识第一运动预测子和第二运动预测子的码字包括辨识第一运动预测子的索引，而第二运动预测子根据默认搜索流程被辨识。在一些实施例中，使用率失真优化，第一运动预测子候选被选择，即考虑预测失真和编解码比特率以决定最佳候选。因此，第一选择候选(例如，第一运动预测子)是来自于候选列表的最具成本效益的候选。为了选择第二选择候选(例如，第二运动预测子)，候选列表的搜索被执行以将具有与第一选择候选的最小差的候选辨识为第二选择候选。在一些实施例中，第一候选和第二候选之间的差被定义为由第一运动预测子候选参考或获得的第一像素集与由第二运动预测子候选参考或获得的第二像素集之间的平方差之和(Sum of Squared Differences，SSD)或绝对差之和(Sum of Absolute Differences，SAD)。在一些实施例中，由运动预测子参考或获得的像素集由预定模板定义，其可以定义像素区块、边缘像素集或由运动预测子参考或作为目标的任何其他像素集。
在一些实施例中，当视频编码器或解码器接收多个运动预测子的选择时，多个运动预测子的预测像素(即，由多个运动预测子参考或获得的多个像素集)的简单平均或加权之和用于生成补偿的组合预测(或组合运动补偿预测子)作为运动补偿的最终预测。在一些实施例中，平均是两个假设被不同加权的加权平均。例如，由第一选择候选(第一假设)获得的像素集可以被分配比由第二选择候选(第二假设)获得的像素集更多的权重。如果第一选择候选和第二选择候选从当前区块(例如，100)的空间相邻区块(例，A0区块和A1区块)中推导出，则权重根据空间相邻区块和当前区块之间的各自像素距离分配，更高权重被给予具有更小距离的候选。在又一个示例中，分配给每个假设的权重基于由假设的运动预测子所参考或获得的像素集与正被编解码的当前区块的内容之间的绝对差之和/平方差之和被确定，其中更高权重被给予具有更小绝对差之和/平方差之和的候选。
在一些实施例中，这两个假设可以被应用于区块内的两个不同的空间区域。例如，如果第一假设是从左侧相邻区块(例，A1)中推导出的候选并且第二假设是从右上相邻区块(例，B0)中导出的，则待预测区块可以被分割成两个区域(两个区域可能有或没有相同的区域)。使用第一假设(来自于左侧相邻区块A1)，左侧区域被预测，使用第二假设(来自于右上相邻区块B0)，右侧区域被预测。如果在两个区域之间存在重迭，则可以由使用两个选择候选运动预测子获得的像素集的加权平均计算用于重迭区域的运动补偿的组合预测。
在一些实施例中，只有候选列表的子集合用于多重假设运动预测。例如，当双向预测候选不被使用时，编码器可以仅从用于多重假设的候选列表中的单向预测候选中选择。
图6概念性地示出了用于编解码(编码或解码)像素区块(编码单元或预测单元)的运动预测码字的示例流程600。码字辨识或传达区块是否由一个假设跳过/合并模式、多个假设跳过/合并模式或者高级运动向量预测(具有残差运动数据)编码。在一些实施例中，流程600描述了通过使用多重假设跳过/合并模式对像素区块进行编码的比特流的语法示例。
在一些实施例中，当根据像素区块是否将由跳过模式、合并模式或高级运动向量预测进行编码的模式选择决策将当前像素区块编码成比特流中时，视频编码器(例，如下面的部分III中描述的视频编码器700)执行流程600。此决策可以由视频编码器的速率/失真控制流程基于像素区块是否可以被适当编码而没有残差运动数据(即运动向量差)和/或没有残差信号而做出。在一些实施例中，当根据比特流的内容解码当前像素区块时(例如，当解码比特流中已编码的运动预测码字时)，视频解码器(例如，如下面的部分IV中描述的视频解码器1000)执行流程600。在一些实施例中，通过执行存储在计算机可读介质中的指令，实现视频编码器或解码器的计算设备的一个或多个处理单元(例如，处理器)执行流程600。
流程600开始于当视频编码器或解码器接收通过使用帧间预测而编解码的像素区块。视频编码器或解码器确认区块是否以单假设跳过模式被编解码(在610中)。如果该区块用单假设跳过模式编解码，则视频编解程序对一个合并索引进行编码(在步骤615中)，以用于选择单一假设(single-hypothesis)跳过模式的一个运动预测子(编码进运动预测码字中，或从运动预测码字解码)。如果区块不是以单一假设跳过模式编解码，则本流程继续到620。
在步骤620中，视频编码器或解码器确定该区块是否以多重假设(multi-hypotheses)跳过模式被编解码。如果区块用多重假设跳过模式被编解码，则视频编码器或解码器对多个索引进行编解码(在步骤625中)，以用于选择用于多重假设跳过模式的多个运动预测子(编码进运动预测码字中或从运动预测码字解码)。如果该区块没有以单一假设或多重假设跳过模式被编解码，则本流程继续到630。
在步骤630中，视频编码器或解码器确定区块是否以单假设合并模式被编解码。如果区块用单假设合并模式被编解码，则视频编解程序对一个合并索引进行编解码(在步骤635中)，以用于选择单一假设合并模式的一个运动预测子(编码进运动预测码字中或从运动预测码字中解码)。如果区块不是以单一假设合并模式被编解码，则本流程继续到640。
在步骤640中，视频编码器或解码器在确定区块是否以多重假设的合并模式被编解码。如果区块用多重假设合并模式被编解码，则视频编码器或解码器对多个索引进行编码(在步骤645中)，以用于选择用于多重假设的合并模式的多个运动预测子(编码进运动预测码字中或从运动预测码字中解码)。如果区块不是以单一假设或多重假设合并模式被编解码，则本流程继续到650。
在步骤650中，视频编解程序处理残差运动数据或运动信息。在流程600的此步骤中，视频编解程序已经确定区块既不以跳过模式也不以合并模式被编解码，并且可能具有残差运动数据(例如，运动向量差)。然后，通过将残差运动数据编码成比特流，或者自比特流检索出残差运动数据，视频编解程序继续以另一帧间预测模式(例如，高级运动向量预测)处理此区块。然后，本流程结束于650。
III.多重假设视频编码器
本发明的一些实施例提供了实现多重假设运动预测(跳过/合并模式)的视频编码器，其允许编码器基于从候选运动预测子列表中多个运动预测子的选择传达运动预测。视频编码器从候选运动预测子列表中选择第一运动预测子和第二运动。视频编码器基于分别使用第一运动预测子和第二运动预测子而获得的第一像素集和第二像素集计算组合预测。视频编码器通过使用用于运动补偿的组合预测编码像素区块。视频编码器将运动预测码字和已编码像素区块存储在比特流中。
图7示出了实现多重假设运动预测的示例视频编码器700。如图所示，视频编码器700从视频源705接收输入视频信号并将该信号编码成比特流795。视频编码器700具有用于编码视频信号705的若干元件或模块，包括变换模块710、量化模块711、逆量化模块714、逆变换模块715、帧内图像估计模块720、帧内图像预测模块725、运动补偿模块730、运动估计模块735、环路滤波器745、已重构图像缓存器750、运动向量缓存器765、运动向量预测模块775以及熵编码器790。
在一些实施例中，模块710-790是由计算设备或电子装置的一个或多个处理单元(例如，处理器)执行的软件指令的模块。在一些实施例中，模块710-790是由电子装置的一个或多个集成电路(integrated circuit，IC)实现的硬件电路的模块。虽然模块710-790被示出为分离的模块，但是一些模块可以被组合成单个模块。
视频源705提供原始视频信号，其呈现没有压缩的每个视频帧的像素数据。减法器708计算视频源705的原始视频像素数据与来自于运动补偿730或者帧内图像预测725的已预测像素数据713之间的差。变换710将此差(或残差像素数据)转换为变换系数(例如，通过执行离散余弦变换(Discrete Cosine Transform，DCT))。量化器711将变换系数量化为已量化资料(或已量化系数)，其由熵编码器790编码进比特流795中。
逆量化模块714去量化已量化资料(或已量化系数)712，以获得变换系数，逆变换模块715对变换系数执行逆变换以产生已重构像素数据717(在添加已预测像素资料713之后)。在一些实施例中，已重构像素数据717被暂时存储在线缓存器(未示出)中以用于帧内图像预测和空间运动向量预测。已重构像素由环路滤波器745进行滤波并被存储在已重构图像缓存器750中。在一些实施例中，已重构图像缓存器750是视频编码器700的外部的内存。在一些实施例中，已重构图像缓存器750是视频编码器700的内部的内存。
帧内图像估计模块720基于已重构像素数据717执行帧内预测，以产生帧内预测数据。帧内预测数据被提供给熵编码器790以被编码进比特流795中。帧内预测数据还由帧内图像预测模块725使用，以产生已预测像素数据713。
运动估计模块735通过产生对存储在已重构图像缓存器750中的先前已解码帧的像素数据的运动向量，执行帧间预测。这些运动向量被提供给运动补偿模块730以产生已预测像素数据。运动补偿模块730还将结合下面图8与关于多重假设运动预测进行描述。不是将完整实际运动向量编码进比特流中，视频编码器700使用运动向量预测产生已预测运动向量，并且用于运动补偿的运动向量与已预测运动向量之间的差被编码为残差运动数据并被存储在比特流795中。
基于生成以用于编码先前视频帧的参考运动向量，即，用于执行运动补偿的运动补偿运动向量，运动向量预测模块775生成已预测运动向量。运动向量预测模块775从来自于运动向量缓存器765的先前视频帧中检索出参考运动向量。视频编码器700将生成以用于当前视频帧的运动向量存储在运动向量缓存器765中作为用于生成已预测运动向量的参考运动向量。
运动向量预测模块775使用参考运动向量创建已预测运动向量。已预测运动向量可以由空间运动向量预测或时间运动向量预测计算。当前帧(残差运动数据)的已预测运动向量与运动补偿运动向量(motion compensation MV，MC MV)之间的差由熵编码器790编码进比特流795中。
熵编码器790通过使用例如上下文适应性二进制算术编码(Context-basedAdaptive Binary Arithmetic Coding，CABAC)或霍夫曼编码(Huffman encoding)的熵编码技术将各种参数和数据编码进比特流795中。熵编码器790将例如已量化变换数据和残差运动数据的参数编码进比特流中。
环路滤波器745对已重构像素数据717进行滤波运算或平滑操作运算以减少编码的失真，特别是在像素区块的边界处。在一些实施例中，所执行的滤波操作包括采样自适应偏移(Sample Adaptive Offset，SAO)。在一些实施例中，滤波操作包括自适应环路滤波器(Adaptive Loop Filter，ALF)。
图8标出了视频编码器700中实现多重假设运动预测的运动补偿模块730。如图所示，运动补偿模块730从运动向量缓存器765接收先前存储的运动向量作为候选运动预测子810。运动补偿模块730还自已重构图像缓存器750接收图像缓存器数据812，其提供由运动运动预测子参考的像素集。运动补偿模块反过来产生已预测像素数据713和运动预测码字815。熵编码器790将码字815编码进比特流795中。
运动补偿器模块730包括候选选择器模块850、预测组合器模块860和选择编码器模块870。
候选选择器模块850接收候选运动预测子810(即，从运动向量缓存器765检索的存储的运动向量)并且生成用于一个或多个运动候选的选择。所选择的候选运动预测子用于获得用于运动补偿的预测814；预测1对应于使用第一选择运动预测子所获得的第一像素集；预测2对应于使用第二选择运动预测子所获得的第二像素集。用于运动补偿的预测814被转发到预测组合器860，将所获得的预测814组合成用于运动补偿的组合预测，其用作已预测像素资料713。选择运动候选的识别(例如，合并索引)被转发到选择编码器模块870，其生成识别选择运动候选的运动预测码字815。
候选选择器模块850确定哪些存储的运动向量将被包括在运动候选列表中，并且基于视频编码标准(例如，HEVC)将一索引分配给候选列表中的每个运动预测子。在一些实施例中，候选选择器850辨识候选列表中的候选子集(例如，仅单向预测)，并且将其候选的选择仅限制于子集合中的这些。
候选选择器模块850可基于模式选择流程805从候选集810中选择一个或两个候选运动预测子。基于像素区块是否被适当编解码而无残差运动资料(即运动向量差)和/或残差信号，模式选择流程可以是视频编码器700的速率/失真控制流程的一部分。
在一些实施例中，候选选择器模块850基于图像缓存器数据812进行其选择。图像缓存器数据812提供附加信息以用于候选运动预测子810。对每一个候选运动预测子810来说，图像缓存器数据812提供允许候选选择器850确定：候选运动预测子被采用的相邻区块的空间位置；由候选运动预测子作为目标或参考的像素(例如，根据预定模板)；运动向量类型(例如，双向预测，单向预测)；以及其他类型的信息的信息。基于此信息，候选选择器850从运动预测列表中选择第一候选，并可选地选择第二候选。候选选择器850可以基于来自于第一选择候选的索引偏移选择第二候选。候选选择器850还可以通过基于图像缓存器数据812搜索列表选择第二候选。第一运动候选和第二运动候选的选择如上面的部分II中描述。
预测组合器模块860将两个预测814(其是基于两个选运动预测子而获得的像素数据)组合成组合预测713。组合可以是预测814的简单平均或加权之和。预测组合器860还可以使用从图像缓存器数据812中推导出的信息，以将权重分配给每个预测814。在计算用于运动补偿的组合预测713时，将权重分配给每个预测如部分II中描述。
在一些实施例中，两个预测814(即预测1和预测2)被分别应用到当前区块内的不同的第一空间区域和第二空间区域。在这种情况下，预测组合器模块860在当前区块的第一区域正在被编码时将使用第一预测(即从第一选择运动预测子推导出的预测1)，并在当前区块的第二区域正被编码时使用第二预测(从第二选择运动预测子推导出的预测2)。如果两个区域重迭，则预测组合器860计算组合预测作为两个预测814的加权平均。分配给每个预测的权重是基于从图像缓存器数据812中推导出的信息，例如，当前区块和两个选择运动候选的空间相邻区块之间的像素距离。
选择编码器模块870基于由候选选择器850提供的一个或多个索引生成辨识选择运动候选的运动预测码字815。在上面的部分II中描述了码字815的编码。上面结合图5描述了码字815的示例性编码方案以辨识一个或两个运动候选。
图9概念性地示出了通过使用多重假设运动预测编码像素区块的流程900。在一些实施例中，视频编码器700在对视频图像或帧中的像素区块进行编码时，执行流程900。在一些实施例中，通过执行存储在计算机可读介质中的指令，实现视频编码器700的计算设备的一个或多个处理单元(例如，处理器)执行流程900。
当视频编码器接收当前区块的像素并且决定通过使用多重假设跳过或合并模式编码当前区块时，视频编码器开始流程900。
视频编码器从像素区块的候选运动预测子列表中选择第一运动预测子和第二运动预测子(在步骤910中)。在一些实施例中，视频编码器选择第一候选。然后，视频编码器通过将偏移应用到第一候选的索引，或通过基于与第一候选的差搜索候选列表，选择第二候选。上面部份II描述了第一运动预测子和第二运动预测子的选择。
视频编码器基于分别通过选择的第一运动预测子和第二运动预测子而获得的第一像素集和第二像素集(第一预测和第二预测)，计算用于运动补偿的组合预测(在步骤920中)。当将其组合为加权平均以产生用于运动补偿的组合预测时，视频编码器可将权重分配给每一像素集。在上面的部份II中描述了在计算运动补偿的组合预测时为每像素集(预测)分配权重。
视频编码器通过使用组合预测编码像素区块以执行运动补偿(在步骤930中)。
视频编码器对辨识所选择的第一运动预测子和第二运动预测子的运动预测码字进行编码(在步骤940中)。运动预测码字可以显性地编码多个候选选择。运动预测码字还可显性地仅对第一候选的选择进行编码，同时让第二候选的选择被隐性地传达(根据相应的解码器执行相同的候选选择流程)。
在步骤950中，视频编码器将已编码的码字和已编码的像素区块存储在比特流中。然后，流程900结束。
IV.多重假设视频解码器
本发明的一些实施例提供了实现多重假设运动预测(跳过模式/合并模式)的视频解码器，其允许解码器基于从候选运动预测子列表中多个运动预测子的选择接收运动预测。视频解码器接收包括已编码的像素区块和用于已编码的像素区块的运动预测码字的比特流。视频解码器基于运动预测码字从候选运动预测子列表中选择第一运动预测子和第二运动预测子。视频解码器基于分别使用第一运动预测子和第二运动预测子而获得的第一像素集和第二像素集计算组合预测。视频解码器通过使用用于运动补偿的组合预测解码像素区块。视频解码器可输出已解码的像素区块。
图10示出了实现多重假设运动预测的示例视频解码器1000。如图所示，视频解码器1000是图像解码或视频解码电路，其接收比特流1095并将比特流的内容解码为视频帧的像素数据以用于显示。视频解码器1000具有用于解码比特流1095的若干元件或模块，包括逆量化模块1005，逆变换模块1015，帧内图像预测模块1025，运动补偿模块1035，环路滤波器1045，已解码图像缓存器1050，运动向量缓存器1065，运动向量预测模块1075和比特流解析器1090。
在一些实施例中，模块1010-1090是由计算设备的一个或多个处理单元(例如，处理器)执行的软件指令的模块。在一些实施例中，模块1010-1090是由电子设备的一个或多个集成电路实现的硬件电路的模块。虽然模块1010-1090被表示为分离的模块，但是一些模块可以被组合成单个模块。
解析器1090(或熵解码器)接收比特流1095，并且根据由视频编码或图像编码标准定义的语法执行原始解析。所解析的语法元素包括各种头元素，旗标以及已量化数据(或已量化系数)1012。解析器1090通过使用例如上下文适应性二进制算术编码或霍夫曼编码的熵编码技术来解析出各种语法元素。
逆量化模块1005对已量化数据(或已量化系数)1012进行逆量化以获得变换系数，并且逆变换模块1015对变换系数1016执行逆变换运算以产生已解码像素数据1017(在添加来自于帧内预测模块1025或运动补偿模块1035的已预测像素资料1013之后)。已解码像素数据由环路滤波器1045滤波并被存储在已解码图像缓存器1050中。在一些实施例中，已解码图像缓存器1050是视频解码器1000的外部内存。在一些实施例中，已解码图像缓存器1050是视频解码器1000的内部存储器。
帧内图像预测模块1025从比特流1095接收帧内预测资料，并且根据其产生来自于存储在已解码画面缓存器1050中的已解码像素数据1017的已预测像素资料1013。在一些实施例中，已解码像素数据1017也被存储在用于帧内图像预测和空间运动向量预测的线缓存器(未示出)中。
在一些实施例中，已解码图像缓存器1050的内容被用于显示。显示设备1055直接检索出已解码图像缓存器1050的内容以进行显示，或将已解码图像缓存器的内容检索到显示缓存器。在一些实施例中，显示设备通过像素传输从已解码图像缓存器1050接收像素值。
运动补偿模块1035根据运动补偿运动向量，产生来自于存储在已解码图像缓存器1050中的已解码像素数据1017的已预测像素资料1013。运动补偿模块1035将结合下面图11关于多重假设运动预测而被进一步描述。这些运动补偿运动向量通过将添加自比特流1095接收的残差运动数据与自运动向量预测模块1075接收的预测运动向量被解码。
基于生成以用于先前视频帧的参考运动向量，例如，用于执行运动补偿的运动补偿运动向量，运动向量预测模块1075产生预测运动向量。运动向量预测模块1075从运动向量缓存器1065中检索先前视频帧的参考运动向量。视频解码器1000将生成以用于当前视频帧的运动补偿运动向量存储在运动向量缓存器1065中作为用于产生预测运动向量的参考运动向量。
环路滤波器1045对已解码像素数据1017执行滤波操作或平滑操作，以减少编解码伪影，特别是在像素区块的分界线处。在一些实施例中，所执行的滤波操作包括采样适应性偏移。在一些实施例中，滤波操作包括适应性环路滤波器。
图11出了视频解码器1000中实现多重假设运动预测的运动补偿模块1035。如图所示，运动补偿模块1035自运动向量缓存器1065接收先前存储的运动向量作为候选运动预测子1110。运动补偿模块1035还从比特流1095接收运动预测码字1115(由解析器1090解析出)。基于接收到的运动预测码字1115和接收到的候选运动预测子1110，运动补偿器模块1035生成已预测像素资料1013。
运动补偿器模块1035包括候选选择器模块1150、预测组合器模块1160和选择解码器模块1170。
选择解码器模块1170对运动预测码字1115进行解码，运动预测码字1115提供被选择并用于编码当前区块的一个或两个运动候选的辨识(或索引)。运动预测码字可以显式地编码多个运动预测子的选择。运动预测码字也可以显性地仅对第一运动候选的选择进行编码，同时让第二运动候选的选择被隐性地传达(例如，通过将偏移添加到于第一运动候选的索引或基于与第一运动候选的差搜索运动候选列表)。在上面的部份II中描述了码字1115的编码。
在一些实施例中，选择解码器模块1170基于图像缓存器数据1112确定第二选择运动候选的隐性辨识。对于每个候选的运动预测子1110而言，图像缓存器数据1112提供允许选择解码器模块1170确定：采用候选运动预测子的相邻区块的空间位置；由候选运动预测子作为目标或参考(例如，根据预定模板)的像素；运动向量类型(例，双向预测，单向预测)；以及其他类型的信息的信息。
基于此信息，选择解码器模块1170可以从运动候选列表中选择第二候选。选择解码器1170可以基于候选信息1112搜索第二运动候选的候选列表。选择解码器1170还可以基于来自于第一选择运动候选的索引偏移选择第二运动候选。上面部份II描述了第一候选和第二候选的选择。
所选择的运动候选的辨识被提供给候选选择器模块1150，其接收候选运动预测子1110(即，从运动向量缓存器1065中检索的存储的运动向量)，并且使用所选择的运动候选的辨识以从候选运动预测子1110中选择一个或两个候选运动预测子1114。所选择的候选运动预测子用于获得运动补偿的预测1114：预测1对应于使用第一选择运动预测子所获得的第一像素集，以及预测2对应于使用第二选择运动预测子所获得的第二像素集。用于运动补偿的预测1114被转发到预测组合器1160，其将所获得的预测1114组合成用于运动补偿的组合预测，其被用作已预测像素资料1013。
预测组合器模块1160将两个预测1114(其是基于两个所选择的运动预测子获得的像素数据)组合到组合预测1013中。此组合可以是预测1114的简单平均或加权平均。预测组合器1160还可以使用从图像缓存器数据1112推导出的信息，以将权重分配给每个预测1114。在部分II中描述了在计算用于运动补偿的组合预测1013时对每个预测的权重分配。
在一些实施例中，两个预测1114(即预测1和预测2)被分别应用到当前区块内的不同的第一空间区域和第二空间区域。在这种情况下，预测组合器模块1160在当前区块的第一区域正在被解码时将使用第一预测(从第一选择运动预测子推导出的预测1)，并在当前区块的第二区域正被解码时使用第二预测(从第二选择运动预测子推导出的预测2)。如果两个区域重迭，则预测组合器1160将组合预测计算为两个预测1114的加权平均。分配给每个预测的权重是基于从图像缓冲数据1112推导出的信息，例如，当前区块与两个所选择的运动候选的空间相邻区块之间的像素距离。
图12概念性地示出了通过使用多重假设运动预测解码像素区块的流程1200。在一些实施例中，视频解码器1000在解码视频图像或帧中的像素区块时执行流程1200。在一些实施例中，通过执行存储在计算机可读介质中的指令，实现视频解码器1000的计算设备的一个或多个处理单元(例如，处理器)执行流程1200。
视频解码器接收像素区块的已编码数据(在步骤1210中)。已编码数据报括用于已编码的像素区块的运动预测码字。已编码数据还可以包括像素区块的残差信号的变换数据。
视频解码器通过对运动预测码字进行解码从候选运动预测子列表中选择第一运动预测子和第二运动预测子(在步骤1220中)。运动预测码字可以仅显性地编码第一运动候选的选择，同时让第二运动候选的选择被隐性地传达(例如，通过将偏移应用到第一运动候选的索引或基于第一运动候选搜索运动候选列表)。
视频解码器基于分别由选择的第一运动预测子和第二运动预测子获得的第一像素集和第二像素集(第一预测和第二预测)计算用于运动补偿的组合预测(在步骤1230中)。当将其组合为加权平均以产生用于运动补偿的组合预测时，视频解码器可将权重分配给每一像素集。在上面的部份II中描述了在计算运动补偿的组合预测时为每像素集合分配权重(预测)。
在步骤1250中，视频解码器通过基于组合预测执行运动补偿解码或重构像素区块。然后，流程1200结束。
V.电子系统示例
很多上述的特征和应用可以被实现为软件处理，其被指定为记录在计算机可读存储介质(computer readable storage medium)(也被称为计算机可读介质)上的指令集。当这些指令由一个或者多个计算单元或者处理单元(例如，一个或者多个处理器、处理器核或者其他处理单元)来执行时，则这些指令使得该处理单元执行这些指令所表示的动作。计算机可读介质的示例包括但不限于CD-ROM、闪存驱动器(flash drive)、随机存取内存(random access memory，RAM)芯片、硬盘、可擦写可程序设计只读存储器(erasableprogrammable read only memory，EPROM)，电可擦除可程序设计只读存储器(electrically erasable programmable read-only memory，EEPROM)等。该计算机可读介质不包括通过无线或有线连接的载波和电信号。
在本说明书中，术语“软件”意味着包括只读存储器中的韧体或者存储在磁存储设备中的应用程序，该应用程序可以被读入到内存中以用于处理器进行处理。同时，在一些实施例中，多个软件发明可以作为更大程序的子部分来实现，而保留不同的软件发明。在一些实施例中，多个软件发明可以作为独立的程序来实现。最后，一起实现此处所描述的软件发明的独立的程序的任何结合是在本发明的范围内。在一些实施例中，当被安装以在一个或者多个电子系统上进行操作时，软件程序定义了一个或者多个特定的机器实现方式，该机器实现方式执行和实施该软件程序的操作。
图13概念性示出了在本发明一些实施例中实现的电子系统1300。电子系统1300可以是计算机(例如，台式计算机、个人计算机、平板计算机等)、电话、PDA或者其他种类的电子设备。这个电子系统包括各种类型的计算机可读媒质和用于各种其他类型的计算机可读媒质的接口。电子系统1300包括总线1305、处理单元1310、图像处理单元(graphics-processing unit，GPU)1315、系统内存1320、网络1325、只读存储器(read-only memory，ROM)1330、永久存储设备1335、输入设备1340和输出设备1345。
总线1305集体表示与大量的电子系统1300通信连接的内部设备的所有系统总线、外设总线和芯片组总线。例如，总线1305通过图像处理单元1315、只读存储器1330、系统内存1320和永久存储设备1335，与处理单元1310通信连接。
对于这些各种内存单元，处理单元1310检索执行的指令和处理的数据，以为了执行本发明的处理。在不同实施例中，该处理单元可以是单个处理器或者多核处理器。某些指令被传输图像处理单元1315和并被其执行。该图像处理单元1315可以卸除各种计算或补充由处理单元1310提供的图像处理。
只读存储器1330存储处理单元1310或者电子系统的其他模块所需要的静态数据和指令。另一方面，永久存储设备1335是一种读写内存设备(read-and-write memory)。这个设备是一种非易失性(non-volatile)内存单元，其即使在电子系统1300关闭时也存储指令和数据。本发明的一些实施例使用大容量存储设备(例如磁盘或光盘及其相应的磁盘驱动器)作为永久存储设备1335。
其他实施例使用可移动存储设备(如软盘、闪存设备等，以及其相应的磁盘驱动器)作为该永久存储设备。与永久存储设备1335一样，系统内存1320是一种读写内存设备。但是，与存储设备1335不一样的是，该系统内存1320是一种易失性(volatile)读写内存，例如随机读取内存。系统内存1320存储一些处理器在运行时需要的指令和数据。在一些实施例中，根据本发明的处理被存储在该系统内存1320、永久存储设备1335和/或只读存储器1330中。例如，各种内存单元包括用于根据一些实施例的处理多媒体剪辑的指令。对于这些各种内存单元，处理单元1310检索执行的指令和处理的数据，以为了执行某些实施例的处理。
总线1305也连接到输入设备1340和输出设备1345。该输入设备1340使得用户沟通信息并选择指令到该电子系统上。该输入设备1340包括字母数字键盘和指点设备(也被称为“光标控制设备”)，摄像机(如网络摄像机(webcam))，用于接收语音命令的麦克风或类似的设备等。输出设备1345显示由电子系统生成的图像或以其他方式输出的数据。输出设备1345包括打印机和显示设备，例如阴极射线管(cathode ray tube，CRT)或液晶显示器(liquid crystal display，LCD)，以及扬声器或类似的音讯输出设备。一些实施例包括例如同时用作输入设备和输出设备的触摸屏等设备。
最后，如图13所示，总线1305也通过网络适配器(未示出)将电子系统1300耦接到网络1325。在这个方式中，计算机可以是计算机网络(例如，局域网(local area network，LAN)、广域网(wide area network，WAN)或者内部网络)或者网络的网络(例如互联网)的一部分。电子系统1300的任一或者所有元件可以与本发明结合使用。
一些实施例包括电子元件，例如，微处理器、存储设备和内存，其将计算机程序指令存储到机器可读介质或者计算机可读介质(可选地被称为计算机可读存储介质、机器可读介质或者机器可读存储介质)。计算机可读介质的一些实例包括RAM、ROM、只读光盘(read-only compact disc，CD-ROM)，可录制光盘(recordable compact disc，CD-R)、可擦写光盘(rewritable compact disc，CD-RW)、只读数字通用光盘(read-only digitalversatile disc)(例如，DVD-ROM，双层DVD-ROM)、各种可记录/可擦写DVD(例如DVD RAM、DVD-RW、DVD+RW等)、闪存(如SD卡、迷你SD卡，微SD卡等)、磁性和/或固态硬盘、只读和可刻录盘、超高密度光盘和其他任何光学介质或磁介质，以及软盘。计算机可读介质可以存储由至少一个处理单元执行的计算机程序，并且包括用于执行各种操作的指令集。计算机程序或计算机代码的示例包括机器代码，例如编解程序产生的机器代码，以及包含由计算机、电子元件或微处理器使用注释器(interpreter)而执行的高级代码的档。
当以上讨论主要是指执行软件的微处理器或多核处理器时，很多上述的功能和应用程序由一个或多个集成电路执行，如特定应用的集成电路(application specificintegrated circuit，ASIC)或现场可程序设计门阵列(field programmable gate array，FPGA)。在一些实施例中，这种集成电路执行存储在该电路本身上的指令。此外，一些实施例执行存储在可程序设计逻辑器件(programmable logic device，PLD)，ROM或RAM设备中的软件。
如本发明的说明书和任一权利要求中所使用，术语“计算机”、“服务器”、“处理器”和“内存”均指电子设备或其他技术设备。这些术语不包括人或群体。为了本说明书的目的，术语显示或显示设备指在电子设备上进行显示。如本发明的说明书和任一权利要求中所使用，术语“计算机可读介质”、“计算机可读媒质”和“机器可读介质”完全局限于有形的、物理的物体，其以计算机可读的形式存储信息。这些术语不包括任何无线信号、有线下载信号和其他任何短暂信号。
在结合许多具体细节的情况下描述了本发明时，本领域技术人员将认识到，本发明可以以其他具体形式而被实施，而不脱离本发明的精神。此外，大量的图(包括图6、图9和图12)概念性示出了处理。这些处理的具体操作可以不以所示以及所描述的确切顺序来被执行。这些具体操作可用不在一个连续的操作系列中被执行，并且不同的具体操作可以在不同的实施例中被执行。另外，该处理通过使用几个子处理而被实现，或者作为更大宏处理的部分。因此，本领域技术人员将能理解的是，本发明不受前述说明性细节的限制，而是由权利要求加以界定。
附加的说明
本文所描述的主题有时表示不同的元件，其包含在或者连接到其他不同的元件。可以理解的是，所描述的结构仅是示例，实际上可以由许多其他结构来实施，以实现相同的功能。从概念上讲，任何实现相同功能的元件的排列实际上是“相关联的”，以便实现所需的功能。因此，不论结构或中间部件，为实现特定的功能而组合的任何两个元件被视为“相互关联”，以实现所需的功能。同样，任何两个相关联的元件被看作是相互“可操作连接”或“可操作耦接”，以实现特定功能。能相互关联的任何两个元件也被视为相互“可操作地耦合”以实现特定功能。可操作连接的具体例子包括但不限于物理可配对和/或物理上相互作用的元件，和/或无线可交互和/或无线上相互作用的元件，和/或逻辑上相互作用和/或逻辑上可交互的元件。
此外，关于基本上任何复数和/或单数术语的使用，本领域的技术人员可以根据上下文和/或应用从复数转换为单数和/或从单数到复数。为清楚起见，本文明确规定了不同的单数/复数排列。
此外，本领域的技术人员可以理解，通常，本发明所使用的术语特别是权利要求中的，如权利要求的主题，通常用作“开放”术语，例如，“包括”应解释为“包括但不限于，“有”应理解为“至少有”“包括”应解释为“包括但不限于”等。本领域的技术人员可以进一步理解，若计划介绍特定数量的权利要求内容，将在权利要求内明确表示，并且，在没有这类内容时将不显示。例如，为帮助理解，下面权利要求可能包含短语“至少一个”和“一个或多个”，以介绍权利要求内容。然而，这些短语的使用不应理解为暗示使用不定冠词“a”或“an”介绍权利要求内容，而限制了任何特定的权利要求。甚至当相同的权利要求包括介绍性短语“一个或多个”或“至少有一个”，不定冠词，例如“a”或“an”，则应被解释为表示至少一个或者更多，对于用于介绍权利要求的明确描述的使用而言，同样成立。此外，即使明确引用特定数量的介绍性内容，本领域技术人员可以认识到，这样的内容应被解释为表示所引用的数量，例如，没有其他修改的“两个引用”，意味着至少两个引用，或两个或两个以上的引用。此外，在使用类似于“A、B和C中的至少一个”的表述的情况下，通常如此表述是为了本领域技术人员可以理解该表述，例如，“系统包括A、B和C中的至少一个”将包括但不限于单独具有A的系统，单独具有B的系统，单独具有C的系统，具有A和B的系统，具有A和C的系统，具有B和C的系统，和/或具有A、B和C的系统，等。本领域技术人员进一步可理解，无论在说明书中、权利要求中或者附图中，由两个或两个以上的替代术语所表现的任何分隔的单词和/或短语应理解为，包括这些术语中的一个，其中一个，或者这两个术语的可能性。例如，“A或B”应理解为，“A”，或者“B”，或者“A和B”的可能性。
从前述可知，为了说明目的，此处已描述了各种实施方案，并且在不偏离本发明的范围和精神的情况下，可以进行各种变形。因此，此处所公开的各种实施方式不用于限制，权利要求表示真实的范围和精神。

Claims (14)

1.一种方法，其特征在于，包括：
自用于像素区块的候选运动预测子列表选择第一运动预测子和第二运动预测子；
对辨识该第一运动预测子和该第二运动预测子的运动预测码字进行编解码；
基于使用该第一运动预测子和该第二运动预测子而获得的第一像素集和该第二像素集，计算一个组合预测；以及
通过使用用于运动补偿的该组合预测，对该像素区块进行编解码。
2.如权利要求1所述的方法，其特征在于，该候选运动预测子列表是用于合并模式的合并候选集。
3.如权利要求1所述的方法，其特征在于，用于辨识该第一运动预测子和该第二运动预测子的该码字包括来自于该候选运动预测子列表且辨识该第一运动预测子的第一索引和辨识该第二运动预测子的第二索引。
4.如权利要求3所述的方法，其特征在于，该第二索引被编解码为与该码字中的该第一索引不同。
5.如权利要求1所述的方法，其特征在于，用于辨识该第一运动预测子和该第二运动预测子的该码字包括辨识(i)来自于该候选运动预测子列表的任何一个候选运动预测子，或者(ii)来自于该候选运动向量的任何两个候选运动预测子的组合的特定索引。
6.如权利要求1所述的方法，其特征在于，用于辨识该第一运动预测子和该第二运动预测子的该码字包括辨识该第一运动预测子的特定索引，其中该第二运动预测子是根据该特定索引的偏移而被辨识。
7.如权利要求1所述的方法，其特征在于，用于辨识该第一运动预测子和该第二运动预测子的该码字包括辨识该第一运动预测子的特定索引，其中该第二运动预测子是根据预定的搜索流程而被辨识。
8.如权利要求7所述的方法，其特征在于，该第二运动预测子是基于该第二运动预测子的模板与该第一运动预测子的模板之间的差而被辨识。
9.如权利要求1所述的方法，其特征在于，该组合预测是使用该第一运动预测子和该第二运动预测子而获得的该第一像素集和该第二像素集的平均。
10.如权利要求9所述的方法，其特征在于，该平均是倾向于具有正在被编码的该像素区块与由一个运动预测子获得的像素集之间的更小差的该运动预测子的加权平均。
11.如权利要求1所述的方法，其特征在于，自该候选运动预测子列表选择该第一运动预测子和该第二运动预测子，包括：
自该候选运动预测子列表的子集选择该第一运动预测子和该第二运动预测子。
12.一种电子装置，其特征在于，包括：
视频解码器电路，用于：
接收包括已编码的像素区块和用于已编码的像素区块的运动预测码字的比特流；
基于该运动预测码字自候选运动预测子列表选择第一运动预测子和第二运动预测子；
基于分别使用该第一运动预测子和该第二运动预测子而获得的第一像素集和第二像素集，计算一个组合预测；以及
通过使用用于运动补偿的该组合预测，对该像素区块进行解码；以及
输出，用于输出已解码的该像素区块。
13.如权利要求12所述的电子装置，其特征在于，对该像素区块进行解码包括：
使用该第一运动预测子以执行用于该像素区块的第一区域的运动补偿预测；以及
使用该第二运动预测量以执行该像素区块的第二区域的运动补偿预测。
14.一种电子装置，其特征在于，包括：
视频编码器电路，用于：
自用于像素区块的候选运动预测子列表选择第一运动预测子和第二运动预测子；
对辨识该第一运动预测子和该第二运动预测子的运动预测码字进行编码；
基于分别使用该第一运动预测子和该第二运动预测子而获得的第一像素集和第二像素集，计算一个组合预测；
使用用于运动补偿的该组合预测，对该像素区块进行编码；以及
将该运动预测码字和已编码的该像素区块存储在比特流中。
CN201880005862.XA 2017-01-06 2018-01-08 编解码电子装置与方法 Active CN110169061B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762443008P 2017-01-06 2017-01-06
US62/443,008 2017-01-06
US15/863,410 US10715827B2 (en) 2017-01-06 2018-01-05 Multi-hypotheses merge mode
US15/863,410 2018-01-05
PCT/CN2018/071809 WO2018127188A1 (en) 2017-01-06 2018-01-08 Multi-hypotheses merge mode

Publications (2)

Publication Number Publication Date
CN110169061A true CN110169061A (zh) 2019-08-23
CN110169061B CN110169061B (zh) 2022-05-10

Family

ID=62783748

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880005862.XA Active CN110169061B (zh) 2017-01-06 2018-01-08 编解码电子装置与方法

Country Status (6)

Country Link
US (1) US10715827B2 (zh)
EP (1) EP3549340A4 (zh)
CN (1) CN110169061B (zh)
SG (2) SG10202108418TA (zh)
TW (1) TWI669951B (zh)
WO (1) WO2018127188A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021073488A1 (en) * 2019-10-13 2021-04-22 Beijing Bytedance Network Technology Co., Ltd. Interplay between reference picture resampling and video coding tools
US11611780B2 (en) 2019-10-05 2023-03-21 Beijing Bytedance Network Technology Co., Ltd. Level-based signaling of video coding tools
US11641464B2 (en) 2019-09-19 2023-05-02 Beijing Bytedance Network Technology Co., Ltd. Scaling window in video coding
US11711547B2 (en) 2019-10-12 2023-07-25 Beijing Bytedance Network Technology Co., Ltd. Use and signaling of refining video coding tools
US11743454B2 (en) 2019-09-19 2023-08-29 Beijing Bytedance Network Technology Co., Ltd Deriving reference sample positions in video coding
WO2023198105A1 (en) * 2022-04-14 2023-10-19 Mediatek Inc. Region-based implicit intra mode derivation and prediction
US12015795B2 (en) 2019-12-27 2024-06-18 Beijing Bytedance Network Technology Co., Ltd Signaling of slice types in video pictures headers

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109963155B (zh) * 2017-12-23 2023-06-06 华为技术有限公司 图像块的运动信息的预测方法、装置及编解码器
US10869060B2 (en) * 2018-01-30 2020-12-15 Google Llc Efficient context model computation design in transform coefficient coding
US10506242B2 (en) * 2018-01-30 2019-12-10 Google Llc Efficient context model computation design in transform coefficient coding
CN118200549A (zh) * 2018-03-19 2024-06-14 株式会社Kt 对图像进行解码或编码的方法以及非暂态计算机可读介质
WO2020003274A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Checking order of motion candidates in lut
EP3791586A1 (en) 2018-06-29 2021-03-17 Beijing Bytedance Network Technology Co. Ltd. Concept of using one or multiple look up tables to store motion information of previously coded in order and use them to code following blocks
US11218721B2 (en) 2018-07-18 2022-01-04 Mediatek Inc. Method and apparatus of motion compensation bandwidth reduction for video coding system utilizing multi-hypothesis
WO2020057504A1 (en) * 2018-09-17 2020-03-26 Mediatek Inc. Methods and apparatuses of combining multiple predictors for block prediction in video coding systems
CN116527889A (zh) * 2018-09-25 2023-08-01 华为技术有限公司 一种图像预测方法和设备
US11544300B2 (en) * 2018-10-23 2023-01-03 EMC IP Holding Company LLC Reducing storage required for an indexing structure through index merging
SG11202104046TA (en) * 2018-10-27 2021-05-28 Huawei Tech Co Ltd Separate merge list and intra-inter techniques harmonization for video coding
WO2020094079A1 (en) * 2018-11-06 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Block size dependent storage of motion information
JP7416781B2 (ja) * 2018-11-08 2024-01-17 オッポ広東移動通信有限公司 ビデオ信号符号化／復号方法及びその機器
CN116248870A (zh) * 2018-11-08 2023-06-09 Oppo广东移动通信有限公司 视频信号编码/解码方法以及用于所述方法的设备
US11539940B2 (en) 2018-11-12 2022-12-27 Hfi Innovation Inc. Method and apparatus of multi-hypothesis in video coding
CN118590651A (zh) * 2018-11-13 2024-09-03 北京字节跳动网络技术有限公司 用于子块预测块的多假设
CN113170110B (zh) * 2018-12-03 2024-05-14 北京字节跳动网络技术有限公司 候选的最大数量的指示方法
CN112806002B (zh) * 2018-12-13 2024-05-31 腾讯美国有限责任公司 视频解码的方法和视频解码器
GB2579824B (en) 2018-12-14 2022-05-18 British Broadcasting Corp Video encoding and video decoding
CN113196758A (zh) * 2018-12-18 2021-07-30 韩国电子通信研究院 图像编码/解码方法和设备以及存储比特流的记录介质
CN118632016A (zh) * 2018-12-21 2024-09-10 株式会社 Xris 视频信号编码/解码方法及其装置
WO2020132168A1 (en) * 2018-12-21 2020-06-25 Interdigital Vc Holdings, Inc. Syntax for motion information signaling in video coding
GB2580326A (en) 2018-12-28 2020-07-22 British Broadcasting Corp Video encoding and video decoding
WO2020142279A1 (en) * 2018-12-31 2020-07-09 Vid Scale, Inc. Combined inter and intra prediction
CN113330739A (zh) 2019-01-16 2021-08-31 北京字节跳动网络技术有限公司 Lut中的运动候选的插入顺序
CN114128271A (zh) * 2019-06-12 2022-03-01 交互数字Vc控股公司 用于视频编码和解码的照明补偿
JP2021052241A (ja) * 2019-09-20 2021-04-01 Kddi株式会社 画像復号装置、画像復号方法及びプログラム
US11195251B1 (en) * 2020-11-19 2021-12-07 Himax Technologies Limited Image processing apparatus and method capable of rapidly determining bounding box for motion objects without iteration
WO2023085704A1 (ko) * 2021-11-09 2023-05-19 삼성전자 주식회사 비디오 복호화 방법, 비디오 복호화 장치, 비디오 부호화 방법, 및 비디오 부호화 장치
EP4436167A1 (en) * 2021-12-23 2024-09-25 Hyundai Motor Company Method and device for video coding using adaptive multi-reference lines

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130163669A1 (en) * 2010-05-26 2013-06-27 Lg Electronics Inc. Method and apparatus for processing a video signal
US20140086329A1 (en) * 2012-09-27 2014-03-27 Qualcomm Incorporated Base layer merge and amvp modes for video coding
CN104168480A (zh) * 2014-09-09 2014-11-26 西安电子科技大学 基于hevc标准的帧内预测编码模式快速选择方法
US20140362904A1 (en) * 2012-01-18 2014-12-11 Lg Electronics Inc. Method and device for entropy coding/decoding
WO2016072775A1 (ko) * 2014-11-06 2016-05-12 삼성전자 주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8879632B2 (en) * 2010-02-18 2014-11-04 Qualcomm Incorporated Fixed point implementation for geometric motion partitioning
CN102316317B (zh) * 2010-07-10 2013-04-24 华为技术有限公司 一种生成图像预测值的方法和装置
FI3962088T3 (fi) * 2010-11-04 2023-09-20 Ge Video Compression Llc Kuvankoodaus, joka tukee lohkojen yhdistämistä ja ohittavaa toimintamuotoa
JP2012244353A (ja) 2011-05-18 2012-12-10 Sony Corp 画像処理装置および方法
KR102257542B1 (ko) * 2012-10-01 2021-05-31 지이 비디오 컴프레션, 엘엘씨 향상 레이어에서 변환 계수 블록들의 서브블록-기반 코딩을 이용한 스케일러블 비디오 코딩
CN105657420B (zh) 2015-12-30 2018-03-20 邦彦技术股份有限公司 一种面向hevc的快速帧内预测模式判决方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130163669A1 (en) * 2010-05-26 2013-06-27 Lg Electronics Inc. Method and apparatus for processing a video signal
US20140362904A1 (en) * 2012-01-18 2014-12-11 Lg Electronics Inc. Method and device for entropy coding/decoding
US20140086329A1 (en) * 2012-09-27 2014-03-27 Qualcomm Incorporated Base layer merge and amvp modes for video coding
CN104168480A (zh) * 2014-09-09 2014-11-26 西安电子科技大学 基于hevc标准的帧内预测编码模式快速选择方法
WO2016072775A1 (ko) * 2014-11-06 2016-05-12 삼성전자 주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11641464B2 (en) 2019-09-19 2023-05-02 Beijing Bytedance Network Technology Co., Ltd. Scaling window in video coding
US11743454B2 (en) 2019-09-19 2023-08-29 Beijing Bytedance Network Technology Co., Ltd Deriving reference sample positions in video coding
US11611780B2 (en) 2019-10-05 2023-03-21 Beijing Bytedance Network Technology Co., Ltd. Level-based signaling of video coding tools
US11758196B2 (en) 2019-10-05 2023-09-12 Beijing Bytedance Network Technology Co., Ltd Downsampling filter type for chroma blending mask generation
US11711547B2 (en) 2019-10-12 2023-07-25 Beijing Bytedance Network Technology Co., Ltd. Use and signaling of refining video coding tools
US11743504B2 (en) 2019-10-12 2023-08-29 Beijing Bytedance Network Technology Co., Ltd Prediction type signaling in video coding
WO2021073488A1 (en) * 2019-10-13 2021-04-22 Beijing Bytedance Network Technology Co., Ltd. Interplay between reference picture resampling and video coding tools
US11722660B2 (en) 2019-10-13 2023-08-08 Beijing Bytedance Network Technology Co., Ltd Interplay between reference picture resampling and video coding tools
US12015795B2 (en) 2019-12-27 2024-06-18 Beijing Bytedance Network Technology Co., Ltd Signaling of slice types in video pictures headers
WO2023198105A1 (en) * 2022-04-14 2023-10-19 Mediatek Inc. Region-based implicit intra mode derivation and prediction

Also Published As

Publication number Publication date
EP3549340A4 (en) 2020-11-11
CN110169061B (zh) 2022-05-10
SG11201906176VA (en) 2019-08-27
SG10202108418TA (en) 2021-09-29
TW201832556A (zh) 2018-09-01
US10715827B2 (en) 2020-07-14
WO2018127188A1 (en) 2018-07-12
EP3549340A1 (en) 2019-10-09
US20180199054A1 (en) 2018-07-12
TWI669951B (zh) 2019-08-21

Similar Documents

Publication Publication Date Title
CN110169061A (zh) 多重假设的合并模式
JP7231727B2 (ja) 精緻化を伴うインター予測のための補間
CN110754086B (zh) 运动向量预测
US10659804B2 (en) Method and apparatus for encoding/decoding images using adaptive motion vector resolution
CN109565590A (zh) 用于视频编解码的基于模型的运动向量推导
CN108605137A (zh) 利用仿射运动补偿的视频编码方法与装置
CN103444174B (zh) 视频编码和解码
CN104243982B (zh) 一种视频编解码处理方法及装置
CN109314785A (zh) 用于导出运动预测信息的方法和装置
CN109076218A (zh) 在视频译码中自适应环路滤波中的多个滤波器的混淆
CN110169073A (zh) 用于视频编解码的解码器侧运动向量恢复
CN107431820A (zh) 视频译码中运动向量推导
US11641481B2 (en) Method and apparatus for encoding/decoding images using adaptive motion vector resolution
CN103748880A (zh) 图像序列的编码方法和装置及图像序列的解码方法和装置
CN108293113A (zh) 图像编码系统中的基于建模的图像解码方法和设备
CN102223542A (zh) 译码单元的局部运动向量推导的方法与相应装置
CN102714736A (zh) 基于减少的运动矢量预测候选对运动矢量进行编码和解码的方法和设备
CN102474610A (zh) 用于对运动矢量进行编码/解码的方法和设备
CN110326296A (zh) 用于对运动信息进行编码和解码的方法和装置
JP6574976B2 (ja) 動画像符号化装置および動画像符号化方法
CN102860006A (zh) 管理预测运动向量候选
JP2022008349A (ja) 低減されたメモリアクセスを用いてｆｒｕｃモードでビデオデータを符号化又は復号する方法及び装置
US11805259B2 (en) Non-affine blocks predicted from affine motion
TWI749297B (zh) 合成式預測及限制性合併技術
CN110475116A (zh) 一种运动矢量导出方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220524

Address after: Chinese Taiwan jhubei City, Hsinchu County Taiwan Yuan Street No. five 3 floor 7

Patentee after: MEDIATEK Inc.

Address before: Hsinchu Science Park Road Taiwan Hsinchu city China Dusing No. 1

Patentee before: MEDIATEK Inc.

TR01 Transfer of patent right