CN111316649A - 重叠块运动补偿 - Google Patents

重叠块运动补偿 Download PDF

Info

Publication number
CN111316649A
CN111316649A CN201880070542.2A CN201880070542A CN111316649A CN 111316649 A CN111316649 A CN 111316649A CN 201880070542 A CN201880070542 A CN 201880070542A CN 111316649 A CN111316649 A CN 111316649A
Authority
CN
China
Prior art keywords
sub
current
blocks
block
obmc
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880070542.2A
Other languages
English (en)
Other versions
CN111316649B (zh
Inventor
修晓宇
贺玉文
叶艳
张焱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vid Scale Inc
Original Assignee
Vid Scale Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid Scale Inc filed Critical Vid Scale Inc
Publication of CN111316649A publication Critical patent/CN111316649A/zh
Application granted granted Critical
Publication of CN111316649B publication Critical patent/CN111316649B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/583Motion compensation with overlapping blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/55Motion estimation with spatial constraints, e.g. at image or region borders

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

外部重叠块运动补偿(OBMC)可针对编码单元(CU)的位于沿该CU的CU间边界的样本而被执行,而内部OBMC可单独针对CU内的位于沿着子块间边界的样本而被执行。可基于与邻近于所述CU的多个外部块相关联的实质上类似的运动信息来应用外部OBMC。所述外部块可以作为一群组来处理,以在外部OBMC操作中一起为多个边界样本提供OBMC。可以使用与用于子块级运动导出的相同的子块大小来应用内部OBMC。可针对所述CU停用内部OBMC,举例来说,如果该CU在空间‑时间运动向量预测(STMVP)模式中被编码,那么可针对该CU停用内部OBMC。

Description

重叠块运动补偿
相关申请的交叉引用
本申请要求提交于2017年11月1日递交的的临时美国专利申请No.62/580,104的权益,其公开内容通过引用而被整体并入本文。
背景技术
数字视频压缩技术可以实现高效的数字视频通信、分发和消费。标准化视频压缩技术的一些示例包括H.261、MPEG-1、MPEG-2、H.263、MPEG-4部分2和H.264/MPEG-4部分10AVC。诸如高效视频编码(HEVC)的高级视频压缩技术可以使压缩率加倍(例如,节省50%的比特率),同时仍然保持与H.264/AVC相似的视频质量。
发明内容
公开了用于将重叠块运动补偿(OBMC)应用于视频编码单元的系统、方法和手段。所述编码单元可在视频比特流中被接收且可与沿着所述编码单元的边界的多个外部子块相邻。可以确定这些外部子块共享实质上类似的运动信息,该运动信息可以用于对所述编码单元的多个边界样本执行合并的OBMC。所述边界样本可属于所述编码单元的位于从所述外部子块跨越所述边界的位置的不同子块。在所述合并的OBMC操作中,所述外部子块可以作为一群组来处理,并且由所述外部子块共享的所述实质上类似的运动信息可以用于在外部OBMC操作中为所述边界样本一起提供OBMC。
可以对位于编码单元内部的一个或多个子块间边界附近的样本执行内部OBMC。该内部OBMC的执行可以与上述外部OBMC的操作分开。该内部OBMC可以基于用于子块级运动导出的相同子块大小。所述内部OBMC可被停用,举例来说,如果所述CU以例如空间-时间运动向量预测(STMVP)模式等某些子块模式而被编码,那么可针对该CU停用所述内部OBMC。
附图说明
图1示出了基于块的混合视频编码器的示例。
图2示出了基于块的视频解码器的示例。
图3示出了高级时间运动向量预测的示例。
图4示出了时空运动向量预测(STMVP)的示例。
图5A-B示出了帧速率上变换(FRUC)的示例。
图6A-B示出了仿射模型的示例。
图7示出了用于在无子块运动补偿的情况下编码的编码单元(CU)的OBMC过程的示例。
图8示出了用于通过子块模式编码的CU的OBMC过程的示例。
图9示出了将基于外部OBMC的运动补偿与基于内部OBMC的运动补偿进行比较的示例。
图10示出了分别执行外部OBMC和内部OBMC的示例。
图11A和11B示出了基于外部OBMC的运动补偿的示例。
图12A和12B示出了基于内部OBMC的运动补偿的示例。
图13示出了针对以STMVP模式编码的CU停用基于内部OBMC的运动补偿的示例。
图14A是示出了其中可以实施一个或多个公开的实施例的示例通信系统的系统图。
图14B是示出了根据实施例的可在图14A中所示的通信系统内使用的示例无线发射/接收单元(WTRU)的系统图。
图14C是示出了根据实施例的可在图14A中所示的通信系统内使用的示例无线电接入网络(RAN)和示例核心网络(CN)的系统图。
图14D是示出了根据实施例的可在图14A中所示的通信系统内使用的另一示例RAN和另一示例CN的系统图。
具体实施方式
现在将参考各个附图来描述说明性实施例的详细描述。尽管本说明书提供了可能实施方式的详细示例,但是应当注意,这些细节旨在是示例性的,而不以任何方式限制本申请的范围。
视频编码系统可以压缩数字视频信号,例如,以减少存储和/或节省传输带宽。存在不同类型的视频编码系统,例如基于块的系统、基于小波的系统和基于对象的系统。基于块的视频编码系统可以包括多种国际视频编码标准,例如运动图片专家组(MPEG)1/2/4第2部分、H.264/MPEG-4第10部分高级视频编码(AVC)、VC-1和高效视频编码(HEVC)。
与一些较早代的视频编码技术(例如,H.264/MPEGAVC)相比,HEVC可以提供大约50%的比特率节省,并且仍然保持相同的感知质量。甚至更高的编码效率可以用高级编码工具来实现。这些工具可包括集成到联合探索模型(JEM)代码库中并在JVET公共测试条件(CTC)下测试的那些工具。该工具可以基于HEVC模型(HM)和/或基于块的混合视频编码框架。
图1示出了基于块的混合视频编码系统(例如,编码器1000)的示例。该编码器可以被配置为逐块地处理输入视频信号1002。这些视频块在本文中还可被称作编码单元(CU)或宏块(MB),且可具有不同块大小(包含64×64像素的扩展大小)。高分辨率(例如1080p及以上)视频内容可使用基于块的编码技术(例如,具有64×64像素的块大小)来有效地压缩。CU可被分割成多个预测单元(PU)。可使用相同预测技术或使用不同预测技术来编码不同CU或PU。这些预测技术可包含(例如)空间预测1004(其也可被称作帧内预测)及时间预测1006(其也可被称作帧间预测、运动预测或运动补偿预测)。空间预测可使用来自同一图片或切片的一个或一个以上先前经编码的相邻块的样本(例如,参考样本)来预测当前视频块。空间预测可以减少视频信号中固有的空间冗余。时间预测可使用来自一个或一个以上先前经编码图片的样本(例如,经重构像素)来预测当前视频块。时间预测可减少视频信号中可能固有的时间冗余。当前块的(一个或多个)时间预测块可经由一个或多个运动向量(MV)来用信号通知,所述运动向量可指示所述当前块与所述预测块之间的运动的量和方向。举例来说,当支持多个参考图片时(例如,在H.264/AVC和HEVC中),可用信号表示视频块(例如,针对每一视频块)的参考图片索引。所述参考图片索引可以用于标识可以从中导出时间预测信号(例如,参考样本)的(例如,在参考图片存储库1008中的)参考图片。
所述编码器100的模式决策和控制逻辑单元1010可被配置以(例如,在已执行空间和/或时间预测之后)例如基于速率失真优化程序来选择CU或PU的合适预测模式。在1012处,可从当前视频块减去预测块,且可例如经由变换单元1014和/或量化单元1016对所得到的预测残差进行去相关和/或量化,以获得经量化的残差系数。该经量化的残差系数可以在1018处经过逆量化并且在1020处经过逆变换,例如以产生重构的残差。可以通过将重构的残差加回到所述预测块来形成重构的视频块。环内滤波1022(例如,解块滤波器和/或自适应环路滤波器)可应用于所述重构的视频块,例如,在其被放入参考图片存储库1008中且用于编码未来视频块之前应用。熵编码单元1024可用于例如通过将编码模式(例如,帧间或帧内)信息、预测模式信息、运动信息和/或经量化的残差系数压缩和打包到视频比特流1030中来产生输出视频比特流1030。
图2示出了基于块的视频解码器2000的示例。该视频解码器2000可被配置以例如在熵解码单元2004处解包及熵解码所接收的视频比特流2002。从视频比特流2002获得的编码模式和预测信息可被发送到空间预测单元2006(例如,当视频内容被帧内编码时)或时间预测单元2008(例如,当视频内容被帧间编码时)。预测块可以在空间预测单元2006或时间预测单元2008处被形成。可将残差变换系数提供到逆量化单元2010和逆变换单元2012,例如以重构残差块。可(例如)在2016处将所述预测块与残差块加在一起以产生重构块。例如,在该重构块被存储在参考图片存储库2020中之前,可以对该重构块应用环内滤波2018。来自参考图片存储库2020的重构视频内容2022可以用于驱动显示设备2024和/或预测未来的视频块。
可以使用包括空间预测、时间预测、变换、量化、熵编码和/或环路滤波的功能模块。重叠块运动补偿(OBMC)可以用于例如在运动补偿阶段减轻可能存在于相邻预测块之间的块效应。可使用子块或子CU运动补偿来执行编码,其中可在子块或子CU层级处导出运动参数。在示例中,可组合OBMC与子块级运动补偿以增加编码增益。
可将编码单元分成多个子块,且可(例如,单独地)导出所述子块的运动信息(例如,而不是仅允许一个运动向量用于一预测方向)。子块运动信息可用于例如在运动补偿阶段产生用于编码单元(例如,用于该编码单元的每一子块且最终用于该编码单元)的预测样本。子块级运动补偿技术可包含高级时间运动向量预测(ATMVP)、空间-时间运动向量预测(STMVP)、帧速率上转换(FRUC)模式、仿射模式等。
利用ATMVP,可使用时间运动向量预测来导出当前块的多个运动信息(例如,包含多个运动向量和/或多个参考索引)。举例来说,可基于邻近当前图片的时间图片的一或多个小块,导出当前块的(例如,每一)子块的运动信息。可在时间参考图片中识别出对应于所述当前块的块(例如,“同位(collocated)块”)。所述时间参考图片可被称为同位图片。所述当前块可被划分为多个子块,并且该多个子块中的每个子块的运动信息可使用所述同位图片的同位块中的相应的小块来导出。
图3示出了ATMVP的示例。可基于当前块的一个或多个空间相邻块的运动信息来识别与所述当前块相关联的同位块和/或同位图片。举例来说,可考虑来自所述当前块的合并候选列表的第一可用候选块A。块A的运动向量(例如,MVA)和/或其参考索引可用于识别同位块A′和同位图片。例如,可通过将运动向量MVA与当前块的坐标相加来确定所述同位图片内的所述同位块A′的位置。
当前块内部的(例如,每一)子块的运动信息可从同位块的(一个或多个)对应子块(例如,图3中由短箭头指示的那些子块)的运动信息导出。所述同位块中的所述(一个或多个)子块的运动信息可以被转换为当前块中的对应子块的运动向量和参考索引。举例来说,以类似于时间运动向量预测(TMVP)的方式,可应用时间运动向量缩放(例如,基于两个图片或两个块之间的时间距离而应用于一个或一个以上运动向量)。
利用STMVP,可以递归方式导出当前块内部的子块的运动信息。图4示出了STMVP的示例。不失一般性地,可假设当前块包含4个子块(例如,A、B、C和D)。相邻块(例如,当前块的空间相邻者)可被标记为a、b、c和d。运动导出可以针对子块A而被执行,并且可以包括识别子块A的空间相邻者。例如,可以识别出子块A的两个空间相邻者,这其中包括上相邻者c和左相邻者d。如果上相邻者c不可用或者被帧内编码,则可以以特定顺序(例如,从左到右)检查当前块上方的其它相邻块的运动信息。如果左相邻者b不可用或者被帧内编码,则可以以特定顺序(例如,从顶部到底部)检查当前块的左边其它相邻块的运动信息和/或可用性。所述空间相邻者的运动信息(例如,第一可用的空间相邻者的运动信息)可以被取回。子块A的时间相邻者的运动信息可以被取回,如通过按照类似于TMVP过程的程序而被取回。所述可用空间相邻者和时间相邻者(例如,多达3个)的运动信息可被平均并用作子块A的运动信息。可重复上述动作(例如,基于光栅扫描次序)以导出当前视频块的一个或一个以上其它(例如,所有其它)子块的运动信息。
至少可针对帧间编码块,支持FRUC。当启用FRUC时,可不用信号发送所述当前块的运动信息(例如,运动向量和/或参考索引)。相反,所述运动信息可以在解码器侧例如通过模板匹配和/或双边匹配等来导出。(例如,在解码器处的运动导出期间)可检查所述当前块的合并候选列表及从所述当前块的一或多个时间同位块的运动向量产生的一组初步运动向量。可以选择可能导致最小绝对差和(SAD)的候选运动向量作为起始点。可执行围绕该起始点的局部搜索(例如,基于模板匹配或双边匹配),并且可将导致最小SAD的运动向量作为整个块的运动向量。可在子块级上细化运动信息,例如,以实现较好的运动补偿效率。
图5A-B示出了FRUC的示例,其中图5A中的示例示出了模板匹配的示例,而图5B中的示例示出了双边匹配的示例。模板匹配可用于通过找到当前图片中的模板(例如,当前块的顶部和/或左侧相邻块)与参考图片中的块(例如,其可具有与所述模板相同的大小)之间的匹配(例如,最佳匹配)来导出当前块的运动信息。双边匹配可以用于通过在多个(例如,两个)不同的参考图片中沿着当前块的运动轨迹找到两个块之间的匹配(例如,最佳匹配)来导出当前块的运动信息。在双边匹配期间的运动搜索操作可以基于运动轨迹。例如,如图5B所示,指向当前块的两个参考块的运动向量MV0和MV1可以与当前图片和两个相应的参考图片L0和L1之间的时间距离(例如,T0和T1)成比例。
对编码单元的FRUC运动搜索(例如,用于模板匹配和/或双边匹配)可包括以下操作。可以执行CU级运动搜索,并且可以导出用于CU的初始运动向量。可例如使用所导出的CU级运动向量作为起始点而在子块级处细化所述CU的运动信息。在示例中,当前CU可被划分成MxM子块。M的值可以例如根据等式(1)而被计算:
Figure BDA0002471878130000081
其中w和h可分别为所述当前CU的宽度和高度。D可以是预定义的划分深度,其例如可以被设置为3并且在序列参数集(SPS)中被用信号通知。
仿射模型可应用于运动补偿预测,例如,除平移运动模型之外或代替平移运动模型。所述仿射模型可与许多类型的运动一起使用,例如放大/缩小、旋转、透视运动和/或其它不规则运动。图6A和6B示出了仿射模型的示例。图6A中示出了简化仿射模型,且图6B中示出了仿射块的子块级运动导出。
块的仿射运动场可以由一个或多个(例如,两个)控制点运动向量来描述。仿射块的运动场可例如根据等式(2)基于控制点运动来描述:
Figure BDA0002471878130000082
其中(v0x,v0y)可以是左上角控制点的运动向量,且(v1x,v1y)可以是右上角控制点的运动向量(例如,如图6A所示)。可基于对应于MxN子块(例如,具有MxN像素的子块)的粒度,导出使用仿射模型编码的视频块的运动场。(例如,每个)MxN子块的运动向量可以如下被导出。例如,可以根据等式(2)来计算一个或多个(例如,每个)子块(例如,如图6B所示)的相应中心样本的运动向量。该计算可以被舍入到例如1/16像素的精度。所导出的运动向量可在运动补偿阶段使用,例如,以产生所述子块的预测信号。可应用于仿射运动补偿的子块大小(例如,M和N的值)可(例如)根据等式(3)来计算:
Figure BDA0002471878130000091
其中(v2x,v2y)可以是左下控制点的运动向量(例如,根据等式(2)计算)。M和N可以分别是所导出子块大小的宽度和高度。
OBMC可以在运动补偿阶段去除或减少块效应。在OBMC中,当前块的一个或一个以上相邻块的运动信息(例如,运动向量)可用于执行对所述当前块的运动补偿。可以组合使用这些相邻运动向量导出的多个预测信号,以生成针对所述当前块的最终预测信号。如果CU在没有子块分区的情况下被编码(例如,该CU在每一预测方向上具有单个MV),那么可例如使用与所述CU的左相邻者和上邻近者相关联的MV来针对顶部和左侧边界处的样本(例如,仅针对顶部和左侧边界,而不针对右侧和底部边界)执行OBMC。如果所述CU以子块模式(例如,ATMVP、STMVP、FRUC或仿射模式)被编码,那么可针对子块的所有边界(例如,顶部边界、左侧边界、底部边界和右侧边界)处的样本执行OBMC。
图7示出了将OBMC应用于未在子块模式中被编码的CU的示例。B1到B7可为沿着所述CU的顶部边界和左侧边界的子块。N1到N8可为所述CU的上方和左侧的相邻子块。图8示出了将OBMC应用于以子块模式编码的CU的示例。如图所示,OBMC可使用子CU块A的相邻块(例如,a、b、c、d)中的一个或一个以上(例如,所有四个)的MV而被应用于子CU块A。预测信号可基于相邻子块(例如,子块A的左侧、上方、右侧和下方的相邻子块)的MV而导出。可对所述预测信号求平均(例如,利用相应权重)以产生子块A的最终预测信号。OBMC可被应用于子块A的亮度分量和/或色度分量。在示例中,子块A的OBMC可在与子块A相关联的运动参数(例如,MV和/或参考图片索引)与所述子块的相邻者实质上不同的条件下包含所述相邻者。
加权平均可以应用于OBMC以生成子块的预测信号。将使用相邻子块的运动向量导出的预测信号表示为PN,并且将使用当前子块的运动向量导出的预测信号表示为PC,可以将PN的前和/或后n(例如,n=4)行和/或列中的样本与PC的对应位置处的样本进行加权平均。可以基于相邻子块的位置来确定可以应用加权平均的样本。举例来说,当相邻子块为顶部相邻者(例如,图8中的子块b)时,可调整当前子块的前四行中的样本,当相邻子块为底部相邻者(例如,图8中的子块d)时,可调整当前子块的后四行中的样本,当相邻子块为左侧相邻者(例如,图8中的子块a)时,可调整当前子块的前四列中的样本,且当相邻子块为右侧相邻者时,可调整当前子块的后四列中的样本。
例如,基于当前CU的预测模式,可在OBMC中应用不同的加权因子。举例来说,当所述当前CU未在子块模式中被编码时,加权因子1/4、1/8、1/161/32可用于PN的前四行和/或列,且加权因子3/4、7/8、15/16、31/32可用于PC的前四行和/或列。当所述当前CU在子块模式中被编码时,可对PN和PC的前两个(例如,仅前两个)行和/或列进行平均,其中将加权因子1/4、1/8应用于PN且将加权因子3/4、7/8应用于PC。
OBMC可被重复多次(例如,针对CU的每一子块)以便调整那些子块的预测信号。举例来说,可执行OBMC以产生用于CU的沿着该CU的顶部边界和左侧边界的边界子块以及用于所述CU的一或多个内部子块(例如,远离边界的子块)的预测信号。对于这些子块中的每一个,可以以特定顺序检查该子块的空间相邻者。举例来说,可按上方相邻者、左侧相邻者、下方相邻者和右侧相邻者的次序检查所述相邻者(例如,可在所述CU是使用子块模式而被编码时,仅考虑下方相邻者和右侧相邻者)。当基于相邻子块与和当前块相同或实质上类似的运动信息相关联时,可以跳过基于该相邻子块的OBMC。当应用OBMC时(例如,当相邻子块的运动信息与当前子块的运动信息实质上不同时),可将使用所述相邻子块的运动信息导出的预测信号与使用所述当前子块的运动信息导出的预测信号组合。
位于沿着所述当前CU的边界的相邻子块的所述运动参数可具有不同于位于所述当前CU内的相邻子块的运动参数的特性。此外,多个相邻子块可具有相同或高度相关的运动信息。在示例中,所述当前CU的相邻块可不以子块模式编码(例如,该相邻块可用常规帧间预测模式和/或常规合并模式编码),且此相邻块的子块(例如,所有子块)可共享相同或实质上类似的运动参数。这些子块可被组合(例如,出于OBMC目的而被视为一群组或较大块),且可基于该较大块来执行(例如,仅一次)基于OBMC的运动补偿。
OBMC可以基于4×4单元(例如,包括4×4像素的单元)来执行,而不管帧间编码模式。可以对当前CU内的所有4×4单元重复相同的OBMC过程(例如,其中包括MV检查、运动补偿和预测信号组合)。然而,如本文所描述,可使用不同粒度(例如,不同子块大小)来导出用于不同基于子块的运动补偿操作的运动参数。举例来说,对于ATMVP和STMVP,可基于固定粒度(例如,其可在SPS中被用信号表示)执行运动导出。对于FRUC,可基于预定义的划分深度(例如,如等式(1)中所示)将CU划分成多个子块,且可在SPS中用信号发送所述划分深度。对于仿射模式,可适用于仿射运动补偿的子块大小可被计算(例如,根据等式(3)),且可取决于一个或一个以上控制点(例如,当前CU的左上角及右上角)的MV。鉴于这些变化的运动粒度,OBMC可以以用于运动导出的相同或相似的子块粒度而被应用。
基于OBMC的运动补偿可以包括基于外部OBMC的运动补偿和基于内部OBMC的运动补偿。基于外部OBMC的运动补偿可指代使用一个或一个以上外部子块(例如,位于当前CU外部的子块)的MV对当前CU的一个或一个以上边界样本的运动补偿。基于内部OBMC的运动补偿可指代对当前CU的位于当前CU内沿着子块间边界位置的一或多个样本的运动补偿。可基于也为当前CU的一部分的相邻子块来执行此基于内部OBMC的运动补偿。
可针对以某些子块模式编码的CU,启用基于内部OBMC的运动补偿,且针对以其它子块模式编码的CU,停用基于内部OBMC的运动补偿。例如,当通过子块模式导出的运动参数一致或彼此偏差很小时,通过内部OBMC实现的性能改进可能受到限制。因此,在至少一些情况下,通过停用当前CU的内部OBMC,可以实现性能和复杂度之间的折衷。
使用当前CU外侧的边界子块的基于OBMC的运动补偿(例如,基于外部OBMC的运动补偿)可与使用CU内侧的子块的基于OBMC的运动补偿(例如,基于内部OBMC的运动补偿)分开执行(例如,不与其交错)。例如,基于外部OBMC的运动补偿可以在一个步骤中执行,而基于内部OBMC的运动补偿可以在另一个步骤中执行。
对于基于外部OBMC的运动补偿,可使用基于行或列的子块合并方案来将共享类似运动信息的邻接边界子块合并成子块组(SBG)。基于OBMC的运动补偿(例如,单个OBMC操作或单组OBMC操作)可基于所述SBG而被执行。
对于基于内部OBMC的运动补偿,可以基于可变的子块大小(例如,代替诸如4×4单元的固定处理单元大小)来执行MC操作。在示例中,基于内部OBMC的运动补偿可使用与用于子块运动导出的子块大小相同(或实质上类似)的子块大小。
对于CU,可选择性地停用基于内部OBMC的运动补偿。举例来说,可针对以STMVP模式编码的CU,停用基于内部OBMC的运动补偿。
基于外部OBMC的运动补偿和基于内部OBMC的运动补偿可以被区分和/或分别执行。举例来说,如果CU是使用子块模式(例如,ATMVP、STMVP、FRUC、仿射模式等)来编码的,那么位于该CU的边界外部的相邻子块的MV和位于该CU内部的子块的MV可拥有特性。举例来说,所述CU的边界外部的多个子块可属于具有相同或实质上类似运动的相同编码块。另一方面,所述CU内的子块的MV可从时间相邻者(例如,在ATMVP和STMVP中)、从局部模板样本(例如,在FRUC中)或从固定运动模型(例如,在仿射模式中)导出。因此,外部子块(例如,来自一或多个相邻CU)的MV可能比(例如,CU内的)内部子块的MV更可能彼此一致。
图9示出了说明基于外部OBMC的运动补偿和基于内部OBMC的运动补偿之间的差异的示意图。在所述示例中,子块A可为可应用OBMC的当前CU的当前子块。当运动补偿操作使用属于当前CU上方的相邻CU的相邻子块(例如,上方相邻者b)时,可将所述操作视为基于外部OBMC的运动补偿操作。当运动补偿操作使用也属于当前CU的相邻子块(例如,子块a、c或d,其可分别为左、右或下方相邻者)时,可将所述操作视为基于内部OBMC的运动补偿操作。可(例如,仅)针对通过子块模式编码的帧间CU,启用基于内部OBMC的运动补偿,而可针对帧间CU(例如,所有帧间CU),启用基于外部OBMC的运动补偿,例如,不管那些CU是在具有子块分区的情况下被编码还是在不具有子块分区的情况下被编码。
如本文所述,外部和内部OBMC可以分别被执行。例如,在执行当前CU的内部样本(例如,位于远离边界的样本)的OBMC之前,可以首先执行位于当前CU的边界的样本的OBMC(例如,外部OBMC)。该顺序可以颠倒。例如,内部OBMC可以在外部OBMC之前被执行。基于外部OBMC的运动补偿可使用当前CU的空间相邻块(例如,上方或左侧的那些)的MV来减轻当前CU的一个或一个以上边界(例如,CU的顶部和左侧边界)上的块效应。举例来说,可应用基于外部OBMC的运动补偿以沿着当前CU的边界调整前两行或四行和/或前两列或四列样本中的样本,此取决于当前CU是否是使用子块模式而被编码的。举例来说,如果使用子块模式对当前CU进行编码,那么可调整前两行和/或列的样本。如果不使用子块模式对当前CU进行编码,那么可调整样本的前四行和/或列。当当前CU在子块模式中被编码时,可启用基于内部OBMC的运动补偿(例如,使用也在当前CU内的相邻子块)以进一步减少可能存在于当前CU内的一个或一个以上子块边界上的块效应。
图10示出了基于外部和内部OBMC的运动补偿的示例。图中所示的当前CU可或可不通过子块模式被编码。粗箭头可以表示可以用于基于OBMC的运动补偿的MV。阴影区域可表示当前CU的可通过基于OBMC的运动补偿来调整的样本。在这些示例中,假定当前CU的四个角子块的MV相同,且因此基于内部OBMC的运动补偿可应用于位于当前CU中间的内部样本(例如,仅那些内部样本)。如图所示,基于外部和内部OBMC的运动补偿操作可以被分开执行(例如,与交错边界样本和内部样本的OBMC操作相反,在内部样本被运动补偿之前,边界样本首先被运动补偿,或反之亦然)。该技术可以与这里描述的其它OBMC简化措施一起使用。
可以基于合并的行或列的相邻块(例如,4×4子块)来执行基于外部OBMC的运动补偿。举例来说,可将位于沿着当前CU的边界且共享相同或实质上类似的运动信息的邻近4×4相邻块合并为一群组。基于OBMC的外部运动补偿(例如,单个OBMC操作)可基于所述群组而被执行(例如,使用与邻近块的所述群组相关联的共同运动向量,基于作为整体的所述群组来执行OBMC操作等)。
图11A和11B示出了用于当前CU的基于外部OBMC的运动补偿的示例。图11A示出了不具有基于行和/或列的子块合并的基于外部OBMC的运动补偿的示例。图11B示出了使用基于行和/或列的子块合并的基于外部OBMC的运动补偿的示例。在图11A中,可通过基于当前CU的每一4×4相邻块来执行运动补偿,以产生外部OBMC预测信号。这可能导致总共八个运动补偿调用。在图11B中,可以使用子块合并来执行基于外部OBMC的运动补偿。如图所所示,可确定邻近于当前CU的多个外部块具有实质上类似(例如,相同)的运动信息(例如,可基于所述群组执行运动补偿MC2)。这些块可以被合并或分组在一起(例如,分组为群组1102、1104和/或1106),并且在合并OBMC操作中被用于多个边界样本(例如,位于合并的相邻块旁边的样本)。例如,一旦确定群组1102中的相邻子块共享基本类似的运动信息,可以识别位于该群组旁边的多个边界样本,并且可以基于群组1102共享的实质上类似的运动信息对这些样本一起执行合并的OBMC操作(例如,在单个OBMC操作中)。所述多个边界样本可包括当前CU的多个边界子块(例如,图11B中所示的子块1120、1122、1124和1126)的左侧的一列或一列以上样本。这些边界子块中的每一者可位于跨越当前CU的边界而与群组1102中的相邻子块中的一者相对的位置。
同样如图11B所示,群组1104中的相邻子块可以共享实质上类似的运动信息(例如,可以基于该群组而执行运动补偿MC0),并且可以识别位于该群组旁边的多个边界样本,并且可以基于群组1104共享的实质上类似的运动信息对这些样本一起执行合并的OBMC操作(例如,通过单个OBMC操作)。所述多个边界样本可包括当前CU的多个边界子块(例如,图11B中所示的子块1120及1128)的顶部一行或一行以上样本。这些边界子块中的每一者可位于跨越当前CU的边界而与群组1104中的相邻子块中的一者相对的位置。
同样如图11B所示,群组1106中的相邻子块可以共享实质上类似的运动信息(例如,可以基于群组而执行运动补偿MC1),并且可以识别位于该群组旁边的多个边界样本,并且可以基于群组1106共享的实质上类似的运动信息对这些样本一起执行合并的OBMC操作(例如,通过单个OBMC操作)。所述多个边界样本可包含当前CU的多个边界子块(例如,图11B中所示的子块1130及1132)的顶部一行或一行以上样本。这些边界子块中的每一者可以位于跨越当前CU的边界而与群组1106中的相邻子块中的一者相对的位置。
通过使用图11B中所示的子块合并技术,可将边界样本(例如,沿着当前CU的左侧边界及顶部边界)的运动补偿调用的总数从八减少到三。如图所示,子块合并可以在水平方向和/或垂直方向上执行。举例来说,可在水平方向上(例如,如由MC0和MC1所示)或在垂直方向上(例如,如由MC2所示)组合基于相邻4×4块的运动补偿。
合并方向的选择可以取决于沿其应用基于外部OBMC的运动补偿的边界。基于行的合并可被应用以组合在水平方向上具有实质上类似(例如,相同)的运动的相邻块(例如,4×4子块)。举例来说,当将基于外部OBMC的运动补偿应用于沿着当前CU的顶部边界的相邻块时,可应用基于行的合并。基于列的合并可被应用以组合在垂直方向上具有实质上类似(例如,相同)运动的相邻块(例如,4×4子块)。举例来说,当将基于外部OBMC的运动补偿应用于沿着当前CU的左侧边界的相邻块时,可应用基于列的合并。
应用相邻块合并的条件可以基于那些相邻块的运动相似度。例如,如果一些相邻块具有相同或实质上类似的运动,则可以合并这些相邻块。例如,可以通过计算运动向量差并确定所计算的差是否等于、小于和/或大于阈值(例如,预定阈值)来确定运动相似度。例如,可以合并共享实质上类似的运动的两个或更多个相邻块(例如,4×4相邻块)。在合并的OBMC操作中使用的运动(例如,多个相邻块的共同或共享运动)可以从所述块中任意块中获得,或者可以被计算为例如这些相邻块的平均运动。
可以基于4×4处理单元执行基于内部OBMC的运动补偿,而不管所应用的(一个或多个)帧间编码模式。可以对当前CU的每个处理单元(例如,4×4处理单元)执行类似的操作,这其中包括检查当前MV和相邻MV是否相同以及基于OBMC的内部运动补偿。可基于应用于当前CU的子块编码模式(例如,预测模式)来确定用于计算子块级运动参数(例如,运动导出)的粒度(例如,子块大小或处理单元大小)。
多个4×4单元(例如属于用于运动导出的相同子块的那些单元)可具有相同或类似运动。当在具有类似运动的这些4×4处理单元的每一个上执行基于内部OBMC的运动补偿时,计算复杂度和/或存储器带宽可能会增加而不提供额外的编码益处。
基于内部OBMC的运动补偿可使用子块大小对准(例如,使用相同子块大小或处理单元大小进行子块级运动导出及基于内部OBMC的运动补偿)。这可以减少运动补偿操作的数量和/或重复运动检查的需要。图12A和12B示出了基于内部OBMC的运动补偿的示例,其中以8×8子块的粒度执行子块级运动导出(例如,用于运动导出的子块或处理单元具有8×8像素的大小)。图12A示出了不具有子块大小对准的基于内部OBMC的运动补偿的示例。图12B示出了具有子块大小对准的基于内部OBMC的运动补偿的示例。
在图12A中,可针对CU的每一4×4子块,执行基于内部OBMC的运动补偿(例如,无子块大小对准),从而导致执行总共16个运动补偿操作以便沿着CU的子块间边界更新样本。在图12B中,执行具有子块大小对准的基于内部OBMC的运动补偿。举例来说,如果基于8×8子块(例如,所述子块中的每一者包括一个以上4×4单元)执行当前CU的运动导出,那么所述相同子块大小也可用于基于OBMC的运动补偿(例如,将用于子块级运动导出的子块或处理单元的大小与用于基于内部OBMC的运动补偿的子块或处理单元的大小对准)。使用此技术,可减少针对图12A中所示的相同数目的样本执行的运动补偿操作的数目(例如,通过避免在相同处理单元或子块内的4×4个单元之间的不必要运动检查)。如图12B中所示,可通过使用本文中所描述的子块大小对准技术,可执行总共八个运动补偿操作。
可以跳过(例如,停用)基于内部OBMC的运动补偿。例如,对于某些子块编码模式(例如STMVP),可跳过(例如,停用)基于内部OBMC的运动补偿。STMVP所导出的运动场与一个或多个其它子块编码模式所导出的运动场相比可具有不同的特性。举例来说,可通过对CU内的子块的一个或一个以上空间和/或时间相邻者的运动信息求平均(例如,基于光栅扫描次序)来递归地导出用STMVP编码的子块的运动参数。其它子块模式中的运动参数可基于时间相邻者(例如,如在ATMVP中)、基于空间和/或时间模板样本(例如,如在FRUC中)和/或基于由一个或一个以上关键点控制的固定运动模型(例如,如在仿射模式中)而被导出。STMVP可为STMVP编码的CU内的子块产生更稳定的运动或相对一致的运动参数,且因此,对于此类STMVP编码的CU,由基于内部OBMC的运动补偿提供的额外性能增强可能是有限的。
图13示出了可以为STMVP编码的CU跳过(例如,停用)基于内部OBMC的运动补偿的示例OBMC操作。
图14A是示出了可以实施一个或多个所公开的实施例的示例通信系统100的示图。该通信系统100可以是为多个无线用户提供语音、数据、视频、消息传递、广播等内容的多址接入系统。该通信系统100可以通过共享包括无线带宽在内的系统资源而使多个无线用户能够接入此类内容。举例来说,通信系统100可以使用一种或多种信道接入方法,例如码分多址(CDMA)、时分多址(TDMA)、频分多址(FDMA)、正交FDMA(OFDMA)、单载波FDMA(SC-FDMA)、零尾唯一字DFT-扩展OFDM(ZT UW DTS-s OFDM)、唯一字OFDM(UW-OFDM)、资源块过滤OFDM以及滤波器组多载波(FBMC)等等。
如图14A所示,通信系统100可以包括无线发射/接收单元(WTRU)102a、102b、102c、102d、RAN 104/113、CN106/115、公共交换电话网络(PSTN)108、因特网110以及其他网络112,然而应该了解,所公开的实施例设想了任意数量的WTRU、基站、网络和/或网络部件。每一个WTRU 102a、102b、102c、102d可以是被配置成在无线环境中工作和/或通信的任何类型的设备。举例来说,任一WTRU102a、102b、102c、102d都可被称为“站”和/或“STA”,其可以被配置成发射和/或接收无线信号,并且可以包括用户设备(UE)、移动站、固定或移动订户单元、基于签约的单元、寻呼机、蜂窝电话、个人数字助理(PDA)、智能电话、膝上型计算机、上网本、个人计算机、无线传感器、热点或Mi-Fi设备、物联网(IoT)设备、手表或其他可穿戴设备、头戴显示器(HMD)、车辆、无人机、医疗设备和应用(例如远程手术)、工业设备和应用(例如机器人和/或在工业和/或自动处理链环境中工作的其他无线设备)、消费类电子设备、以及在商业和/或工业无线网络上工作的设备等等。WTRU102a、102b、102c、102d中的任意者可被可交换地称为UE。
通信系统100还可以包括基站114a和/或基站114b。每一个基站114a、114b可以是被配置成通过以无线方式与WTRU102a、102b、102c、102d中的至少一个无线对接来促使其接入一个或多个通信网络(例如CN106/115、因特网110、和/或其他网络112)的任何类型的设备。举例来说,基站114a、114b可以是基地收发信台(BTS)、节点B、e节点B、家庭节点B、家庭e节点B、gNB、NR节点B、站点控制器、接入点(AP)、以及无线路由器等等。虽然每一个基站114a、114b都被描述成了单个部件,然而应该了解。基站114a、114b可以包括任何数量的互连基站和/或网络部件。
基站114a可以是RAN 104/113的一部分,并且所述RAN还可以包括其他基站和/或网络部件(未显示),例如基站控制器(BSC)、无线电网络控制器(RNC)、中继节点等等。基站114a和/或基站114b可被配置成在名为小区(未显示)的一个或多个载波频率上发射和/或接收无线信号。这些频率可以处于授权频谱、无授权频谱或是授权与无授权频谱的组合之中。小区可以为相对固定或者有可能随时间变化的特定地理区域提供无线服务覆盖。小区可被进一步分成小区扇区。例如,与基站114a相关联的小区可被分为三个扇区。由此,在一个实施例中,基站114a可以包括三个收发信机,也就是说,每一个收发信机都对应于小区的一个扇区。在实施例中,基站114a可以使用多输入多输出(MIMO)技术,并且可以为小区的每一个扇区使用多个收发信机。举例来说,通过使用波束成形,可以在期望的空间方向上发射和/或接收信号。
基站114a、114b可以通过空中接口116来与WTRU 102a、102b、102c、102d中的一者或多者进行通信,其中所述空中接口可以是任何适当的无线通信链路(例如射频(RF)、微波、厘米波、微米波、红外线(IR)、紫外线(UV)、可见光等等)。空中接口116可以使用任何适当的无线电接入技术(RAT)来建立。
更具体地说,如上所述,通信系统100可以是多址接入系统,并且可以使用一种或多种信道接入方案,例如CDMA、TDMA、FDMA、OFDMA以及SC-FDMA等等。例如,RAN104/113中的基站114a与WTRU102a、102b、102c可以实施某种无线电技术,例如通用移动电信系统(UMTS)陆地无线电接入(UTRA),其中所述技术可以使用宽带CDMA(WCDMA)来建立空中接口115/116/117。WCDMA可以包括如高速分组接入(HSPA)和/或演进型HSPA(HSPA+)之类的通信协议。HSPA可以包括高速下行链路(DL)分组接入(HSDPA)和/或高速UL分组接入(HSUPA)。
在实施例中,基站114a和WTRU102a、102b、102c可以实施某种无线电技术,例如演进型UMTS陆地无线电接入(E-UTRA),其中所述技术可以使用长期演进(LTE)和/或先进LTE(LTE-A)和/或先进LTA Pro(LTE-A Pro)来建立空中接口116。
在实施例中,基站114a和WTRU102a、102b、102c可以实施某种无线电技术,例如NR无线电接入,其中所述无线电技术可以使用新型无线电(NR)来建立空中接口116。
在实施例中,基站114a和WTRU102a、102b、102c可以实施多种无线电接入技术。举例来说,基站114a和WTRU 102a、102b、102c可以共同实施LTE无线电接入和NR无线电接入(例如使用双连接(DC)原理)。由此,WTRU 102a、102b、102c使用的空中接口可以通过多种类型的无线电接入技术和/或向/从多种类型的基站(例如eNB和gNB)发送的传输来表征。
在其他实施例中,基站114a和WTRU 102a、102b、102c可以实施以下的无线电技术,例如IEEE 802.11(即无线高保真(WiFi))、IEEE 802.16(全球微波接入互操作性(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、临时标准2000(IS-2000)、临时标准95(IS-95)、临时标准856(IS-856)、全球移动通信系统(GSM)、用于GSM演进的增强数据速率(EDGE)以及GSM EDGE(GERAN)等等。
图14A中的基站114b可以是无线路由器、家庭节点B、家庭e节点B或接入点,并且可以使用任何适当的RAT来促成局部区域中的无线连接,例如营业场所、住宅、车辆、校园、工业设施、空中走廊(例如供无人机使用)以及道路等等。在一个实施例中,基站114b与WTRU102c、102d可以通过实施IEEE 802.11之类的无线电技术来建立无线局域网(WLAN)。在实施例中,基站114b与WTRU 102c、102d可以通过实施IEEE 802.15之类的无线电技术来建立无线个人局域网(WPAN)。在再一实施例中,基站114b和WTRU 102c、102d可通过使用基于蜂窝的RAT(例如WCDMA、CDMA2000、GSM、LTE、LTE-A、LTE-APro、NR等等)来建立微微小区或毫微微小区。如图14A所示,基站114b可以直连到因特网110。由此,基站114b不需要经由CN 106/115来接入因特网110。
RAN 104/113可以与CN 106/115进行通信,其中所述CN可以是被配置成向一个或多个WTRU 102a、102b、102c、102d提供语音、数据、应用和/或借助网际协议语音(VoIP)服务的任何类型的网络。该数据可以具有不同的服务质量(QoS)需求,例如不同的吞吐量需求、延时需求、容错需求、可靠性需求、数据吞吐量需求、以及移动性需求等等。CN 106/115可以提供呼叫控制、记账服务、基于移动位置的服务、预付费呼叫、因特网连接、视频分发等等,和/或可以执行用户验证之类的高级安全功能。虽然在图14A中没有显示,然而应该了解,RAN 104/113和/或CN 106/115可以直接或间接地和其他那些与RAN 104/113使用相同RAT或不同RAT的RAN进行通信。例如,除了与使用NR无线电技术的RAN 104/113相连之外,CN106/115还可以与使用GSM、UMTS、CDMA 2000、WiMAX、E-UTRA或WiFi无线电技术的别的RAN(未显示)通信。
CN 106/115还可以充当供WTRU 102a、102b、102c、102d接入PSTN 108、因特网110和/或其他网络112的网关。PSTN 108可以包括提供简易老式电话服务(POTS)的电路交换电话网络。因特网110可以包括使用了公共通信协议(例如TCP/IP网际协议族中的传输控制协议(TCP)、用户数据报协议(UDP)和/或网际协议(IP))的全球性互联计算机网络设备系统。所述网络112可以包括由其他服务供应商拥有和/或运营的有线和/或无线通信网络。例如,所述其他网络112可以包括与一个或多个RAN相连的另一个CN,其中所述一个或多个RAN可以与RAN 104/113使用相同RAT或不同RAT。
通信系统100中一些或所有WTRU 102a、102b、102c、102d可以包括多模能力(例如,WTRU 102a、102b、102c、102d可以包括在不同无线链路上与不同无线网络通信的多个收发信机)。例如,图14A所示的WTRU 102c可被配置成与可以使用基于蜂窝的无线电技术的基站114a通信,以及与可以使用IEEE 802无线电技术的基站114b通信。
图14B是示出了例示WTRU 102的系统图示。如图14B所示,WTRU 102可以包括处理器118、收发信机120、发射/接收部件122、扬声器/麦克风124、键盘126、显示器/触摸板128、不可移除存储器130、可移除存储器132、电源134、全球定位系统(GPS)芯片组136以及其他周边设备138。应该了解的是,在保持符合实施例的同时,WTRU 102还可以包括前述部件的任何子组合。
处理器118可以是通用处理器、专用处理器、常规处理器、数字信号处理器(DSP)、多个微处理器、与DSP核心关联的一个或多个微处理器、控制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、其他任何类型的集成电路(IC)以及状态机等等。处理器118可以执行信号编码、数据处理、功率控制、输入/输出处理、和/或其他任何能使WTRU102在无线环境中工作的功能。处理器118可以耦合至收发信机120,收发信机120可以耦合至发射/接收部件122。虽然图14B将处理器118和收发信机120描述成单独组件,然而应该了解,处理器118和收发信机120也可以集成在一个电子组件或芯片中。
发射/接收部件122可被配置成经由空中接口116来发射或接收去往或来自基站(例如基站114a)的信号。举个例子,在一个实施例中,发射/接收部件122可以是被配置成发射和/或接收RF信号的天线。作为示例,在实施例中,发射/接收部件122可以是被配置成发射和/或接收IR、UV或可见光信号的放射器/检测器。在实施例中,发射/接收部件122可被配置成发射和/或接收RF和光信号。应该了解的是,发射/接收部件122可以被配置成发射和/或接收无线信号的任何组合。
虽然在图14B中将发射/接收部件122描述成是单个部件,但是WTRU 102可以包括任何数量的发射/接收部件122。更具体地说,WTRU 102可以使用MIMO技术。由此,在实施例中,WTRU 102可以包括两个或多个通过空中接口116来发射和接收无线电信号的发射/接收部件122(例如多个天线)。
收发信机120可被配置成对发射/接收部件122所要传送的信号进行调制,以及对发射/接收部件122接收的信号进行解调。如上所述,WTRU 102可以具有多模能力。因此,收发信机120可以包括允许WTRU 102借助多种RAT(例如NR和IEEE 802.11)来进行通信的多个收发信机。
WTRU 102的处理器118可以耦合到扬声器/麦克风124、键盘126和/或显示器/触摸板128(例如液晶显示器(LCD)显示单元或有机发光二极管(OLED)显示单元),并且可以接收来自这些部件的用户输入数据。处理器118还可以向扬声器/麦克风124、键盘126和/或显示器/触摸板128输出用户数据。此外,处理器118可以从诸如不可移除存储器130和/或可移除存储器132之类的任何适当的存储器中存取信息,以及将信息存入这些存储器。不可移除存储器130可以包括随机存取存储器(RAM)、只读存储器(ROM)、硬盘或是其他任何类型的记忆存储设备。可移除存储器132可以包括订户标识模块(SIM)卡、记忆棒、安全数字(SD)记忆卡等等。在其他实施例中,处理器118可以从那些并非实际位于WTRU 102的存储器存取信息,以及将数据存入这些存储器,作为示例,此类存储器可以位于服务器或家庭计算机(未显示)。
处理器118可以接收来自电源134的电力,并且可被配置分发和/或控制用于WTRU102中的其他组件的电力。电源134可以是为WTRU 102供电的任何适当设备。例如,电源134可以包括一个或多个干电池组(如镍镉(Ni-Cd)、镍锌(Ni-Zn)、镍氢(NiMH)、锂离子(Li-ion)等等)、太阳能电池以及燃料电池等等。
处理器118还可以耦合到GPS芯片组136,该芯片组可被配置成提供与WTRU 102的当前位置相关的位置信息(例如经度和纬度)。作为来自GPS芯片组136的信息的补充或替换,WTRU 102可以经由空中接口116接收来自基站(例如基站114a、114b)的位置信息,和/或根据从两个或更多个附近基站接收的信号定时来确定其位置。应该了解的是,在保持符合实施例的同时,WTRU 102可以借助任何适当的定位方法来获取位置信息。
处理器118还可以耦合到其他周边设备138,其中所述周边设备可以包括提供附加特征、功能和/或有线或无线连接的一个或多个软件和/或硬件模块。例如,周边设备138可以包括加速度计、电子指南针、卫星收发信机、数码相机(用于照片和/或视频)、通用串行总线(USB)端口、振动设备、电视收发信机、免提耳机、
Figure BDA0002471878130000251
模块、调频(FM)无线电单元、数字音乐播放器、媒体播放器、视频游戏机模块、因特网浏览器、虚拟现实和/或增强现实(VR/AR)设备、以及活动跟踪器等等。周边设备138可以包括一个或多个传感器,所述传感器可以是以下的一个或多个:陀螺仪、加速度计、霍尔效应传感器、磁力计、方位传感器、邻近传感器、温度传感器、时间传感器、地理位置传感器、高度计、光传感器、触摸传感器、磁力计、气压计、手势传感器、生物测定传感器和/或湿度传感器。
WTRU 102可以包括全双工无线电设备,其中对于该无线电设备来说,一些或所有信号(例如与用于UL(例如对传输而言)和下行链路(例如对接收而言)的特定子帧相关联)的接收或传输可以是并发和/或同时的。全双工无线电设备可以包括借助于硬件(例如扼流线圈)或是凭借处理器(例如单独的处理器(未显示)或是凭借处理器118)的信号处理来减少和/或基本消除自干扰的干扰管理单元。在实施例中,WTRU 102可以包括传送和接收一些或所有信号(例如与用于UL(例如对传输而言)或下行链路(例如对接收而言)的特定子帧相关联)的半双工无线电设备。
图14C是示出了根据实施例的RAN 104和CN 106的系统图示。如上所述,RAN 104可以在空中接口116上使用E-UTRA无线电技术来与WTRU 102a、102b、102c进行通信。所述RAN104还可以与CN 106进行通信。
RAN 104可以包括e节点B 160a、160b、160c,然而应该了解,在保持符合实施例的同时,RAN 104可以包括任何数量的e节点B。每一个e节点B 160a、160b、160c都可以包括在空中接口116上与WTRU 102a、102b、102c通信的一个或多个收发信机。在一个实施例中,e节点B 160a、160b、160c可以实施MIMO技术。由此,举例来说,e节点B 160a可以使用多个天线来向WTRU 102a发射无线信号,和/或接收来自WTRU 102a的无线信号。
每一个e节点B 160a、160b、160c都可以关联于一个特定小区(未显示),并且可被配置成处理无线电资源管理决策、切换决策、UL和/或DL中的用户调度等等。如图14C所示,e节点B 160a、160b、160c彼此可以通过X2接口进行通信。
图14C所示的CN 106可以包括移动性管理实体(MME)162、服务网关(SGW)164以及分组数据网络(PDN)网关(或PGW)166。虽然前述的每一个部件都被描述成是CN 106的一部分,然而应该了解,这其中的任一部件都可以由CN运营商之外的实体拥有和/或运营。
MME 162可以经由S1接口连接到RAN 104中的每一个e节点B 162a、162b、162c,并且可以充当控制节点。例如,MME 142可以负责验证WTRU 102a、102b、102c的用户,执行承载激活/去激活处理,以及在WTRU 102a、102b、102c的初始附着过程中选择特定的服务网关等等。MME 162还可以提供一个用于在RAN 104与使用其他无线电技术(例如GSM和/或WCDMA)的其他RAN(未显示)之间进行切换的控制平面功能。
SGW 164可以经由S1接口连接到RAN 104中的每一个e节点B 160a、160b、160c。SGW164通常可以路由和转发去往/来自WTRU 102a、102b、102c的用户数据分组。并且,SGW 164还可以执行其他功能,例如在eNB间的切换过程中锚用户平面,在DL数据可供WTRU 102a、102b、102c使用时触发寻呼处理,以及管理并存储WTRU 102a、102b、102c的上下文等等。
SGW 164可以连接到PGW 166,所述PGW可以为WTRU 102a、102b、102c提供分组交换网络(例如因特网110)接入,以便促成WTRU 102a、102b、102c与启用IP的设备之间的通信。
CN 106可以促成与其他网络的通信。例如,CN 106可以为WTRU 102a、102b、102c提供电路交换网络(例如PSTN 108)接入,以便促成WTRU 102a、102b、102c与传统的陆线通信设备之间的通信。例如,CN 106可以包括一个IP网关(例如IP多媒体子系统(IMS)服务器)或与之进行通信,并且该IP网关可以充当CN 106与PSTN 108之间的接口。此外,CN 106可以为WTRU 102a、102b、102c提供针对其他网络112的接入,其中该网络可以包括其他服务供应商拥有和/或运营的其他有线和/或无线网络。
虽然在图14A-14D中将WTRU描述成了无线终端,然而应该想到的是,在某些典型实施例中,此类终端与通信网络可以使用(例如临时或永久性)有线通信接口。
在典型实施例中,所述其他网络112可以是WLAN。
采用基础架构基本服务集(BSS)模式的WLAN可以具有用于所述BSS的接入点(AP)以及与所述AP相关联的一个或多个站(STA)。所述AP可以接入或是对接到分布式系统(DS)或是将业务送入和/或送出BSS的别的类型的有线/无线网络。源于BSS外部且去往STA的业务可以通过AP到达并被递送至STA。源自STA且去往BSS外部的目的地的业务可被发送至AP,以便递送到相应的目的地。处于BSS内部的STA之间的业务可以通过AP来发送,例如源STA可以向AP发送业务并且AP可以将业务递送至目的地STA。处于BSS内部的STA之间的业务可被认为和/或称为点到点业务。所述点到点业务可以在源与目的地STA之间(例如在其间直接)用直接链路建立(DLS)来发送。在某些典型实施例中,DLS可以使用802.11e DLS或802.11z通道化DLS(TDLS)。使用独立BSS(IBSS)模式的WLAN可不具有AP,并且处于所述IBSS内部或是使用所述IBSS的STA(例如所有STA)彼此可以直接通信。在这里,IBSS通信模式有时可被称为“自组织”通信模式。
在使用802.11ac基础设施工作模式或类似的工作模式时,AP可以在固定信道(例如主信道)上传送信标。所述主信道可以具有固定宽度(例如20MHz的带宽)或是借助信令动态设置的宽度。主信道可以是BSS的工作信道,并且可被STA用来与AP建立连接。在某些典型实施例中,所实施的可以是具有冲突避免的载波感测多址接入(CSMA/CA)(例如在802.11系统中)。对于CSMA/CA来说,包括AP在内的STA(例如每一个STA)可以感测主信道。如果特定STA感测到/检测到和/或确定主信道繁忙,那么所述特定STA可以回退。在指定的BSS中,在任何指定时间可有一个STA(例如只有一个站)进行传输。
高吞吐量(HT)STA可以使用宽度为40MHz的信道来进行通信(例如借助于将宽度为20MHz的主信道与宽度为20MHz的相邻或不相邻信道相结合来形成宽度为40MHz的信道)。
甚高吞吐量(VHT)STA可以支持宽度为20MHz、40MHz、80MHz和/或160MHz的信道。40MHz和/或80MHz信道可以通过组合连续的20MHz信道来形成。160MHz信道可以通过组合8个连续的20MHz信道或者通过组合两个不连续的80MHz信道(这种组合可被称为80+80配置)来形成。对于80+80配置来说,在信道编码之后,数据可被传递并经过一个分段解析器,所述分段解析器可以将数据非成两个流。在每一个流上可以单独执行反向快速傅里叶变换(IFFT)处理和时域处理。所述流可被映射在两个80MHz信道上,并且数据可以由执行传输的STA来传送。在执行接收的STA的接收机上,用于80+80配置的上述操作可以是相反的,并且组合数据可被发送至介质接入控制(MAC)。
802.11af和802.11ah支持1GHz以下的工作模式。与802.11n和802.11ac相比,在802.11af和802.11ah中使用信道工作带宽和载波有所缩减。802.11af在TV白空间(TVWS)频谱中支持5MHz、10MHz和20MHz带宽,并且802.11ah支持使用非TVWS频谱的1MHz、2MHz、4MHz、8MHz和16MHz带宽。根据某些典型实施例,802.11ah可以支持仪表类型控制/机器类型通信,例如宏覆盖区域中的MTC设备。MTC可以具有某种能力,例如包含了支持(例如只支持)某些和/或有限带宽在内的受限能力。MTC设备可以包括电池,并且该电池的电池寿命高于阈值(例如用于保持很长的电池寿命)。
对于可以支持多个信道和信道带宽的WLAN系统(例如,802.11n、802.11ac、802.11af以及802.11ah)来说,所述WLAN系统包括一个可被指定成主信道的信道。所述主信道的带宽可以等于BSS中的所有STA所支持的最大公共工作带宽。主信道的带宽可以由某一个STA设置和/或限制,其中所述STA源自在支持最小带宽工作模式的BSS中工作的所有STA。在关于802.11ah的示例中,即使BSS中的AP和其他STA支持2MHz、4MHz、8MHz、16MHz和/或其他信道带宽工作模式,但对支持(例如只支持)1MHz模式的STA(例如MTC类型的设备)来说,主信道的宽度可以是1MHz。载波感测和/或网络分配向量(NAV)设置可以取决于主信道的状态。如果主信道繁忙(例如,因为STA(其仅支持1MHz工作模式)正在对AP进行传输),那么即使大多数的频带保持空闲并且可供使用,也可以认为整个可用频带繁忙。
在美国,可供802.11ah使用的可用频带是902MHz到928MHz。在韩国,可用频带是917.5MHz到923.5MHz。在日本,可用频带是916.5MHz到927.5MHz。依照国家码,可用于802.11ah的总带宽是6MHz到26MHz。
图14D是示出了根据实施例的RAN 113和CN 115的系统图示。如上所述,RAN 113可以在空中接口116上使用NR无线电技术来与WTRU 102a、102b、102c进行通信。RAN 113还可以与CN 115进行通信。
RAN 113可以包括gNB 180a、180b、180c,但是应该了解,在保持符合实施例的同时,RAN 113可以包括任何数量的gNB。每一个gNB 180a、180b、180c都可以包括一个或多个收发信机,以便通过空中接口116来与WTRU 102a、102b、102c通信。在一个实施例中,gNB180a、180b、180c可以实施MIMO技术。例如,gNB 180a、180b可以使用波束成形处理来向和/或从gNB 180a、180b、180c发射和/或接收信号。由此,举例来说,gNB 180a可以使用多个天线来向WTRU 102a发射无线信号,和/或接收来自WTRU 102a的无线信号。在实施例中,gNB180a、180b、180c可以实施载波聚合技术。例如,gNB 180a可以向WTRU 102a传送多个分量载波(未显示)。这些分量载波的一个子集可以处于无授权频谱上,而剩余分量载波则可以处于授权频谱上。在实施例中,gNB 180a、180b、180c可以实施协作多点(CoMP)技术。例如,WTRU 102a可以接收来自gNB 180a和gNB 180b(和/或gNB180c)的协作传输。
WTRU 102a、102b、102c可以使用与可扩缩数字配置(numerology)相关联的传输来与gNB 180a、180b、180c进行通信。例如,对于不同的传输、不同的小区和/或不同的无线传输频谱部分来说,OFDM符号间隔和/或OFDM子载波间隔可以是不同的。WTRU 102a、102b、102c可以使用具有不同或可扩缩长度的子帧或传输时间间隔(TTI)(例如包含了不同数量的OFDM符号和/或持续变化的绝对时间长度)来与gNB 180a、180b、180c进行通信。
gNB 180a、180b、180c可被配置成与采用独立配置和/或非独立配置的WTRU 102a、102b、102c进行通信。在独立配置中,WTRU 102a、102b、102c可以在不接入其他RAN(例如e节点B160a、160b、160c)的情况下与gNB 180a、180b、180c进行通信。在独立配置中,WTRU102a、102b、102c可以使用gNB 180a、180b、180c中的一者或多者作为移动锚点。在独立配置中,WTRU 102a、102b、102c可以使用无授权频带中的信号来与gNB 180a、180b、180c进行通信。在非独立配置中,WTRU 102a、102b、102c会在与别的RAN(例如e节点B160a、160b、160c)进行通信/相连的同时与gNB 180a、180b、180c进行通信/相连。举例来说,WTRU 102a、102b、102c可以通过实施DC原理而以基本同时的方式与一个或多个gNB 180a、180b、180c以及一个或多个e节点B 160a、160b、160c进行通信。在非独立配置中,e节点B 160a、160b、160c可以充当WTRU 102a、102b、102c的移动锚点,并且gNB 180a、180b、180c可以提供附加的覆盖和/或吞吐量,以便为WTRU 102a、102b、102c提供服务。
每一个gNB 180a、180b、180c都可以关联于特定小区(未显示),并且可以被配置成处理无线电资源管理决策、切换决策、UL和/或DL中的用户调度、支持网络切片、实施双连接性、实施NR与E-UTRA之间的互通处理、路由去往用户平面功能(UPF)184a、184b的用户平面数据、以及路由去往接入和移动性管理功能(AMF)182a、182b的控制平面信息等等。如图14D所示,gNB180a、180b、180c彼此可以通过Xn接口通信。
图14D所示的CN 115可以包括至少一个AMF 182a、182b,至少一个UPF 184a、184b,至少一个会话管理功能(SMF)183a、183b,并且有可能包括数据网络(DN)185a、185b。虽然每一个前述部件都被描述了CN 115的一部分,但是应该了解,这其中的任一部件都可以被CN运营商之外的其他实体拥有和/或运营。
AMF 182a、182b可以经由N2接口连接到RAN 113中的一者或多者gNB 180a、180b、180c,并且可以充当控制节点。例如,AMF 182a、182b可以负责验证WTRU 102a、102b、102c的用户,支持网络切片(例如处理具有不同需求的不同PDU会话),选择特定的SMF 183a、183b,管理注册区域,终止NAS信令,以及移动性管理等等。AMF 182a、182b可以使用网络切片处理,以便基于WTRU 102a、102b、102c使用的服务类型来定制为WTRU 102a、102b、102c提供的CN支持。举例来说,针对不同的使用情况,可以建立不同的网络切片,所述使用情况例如为依赖于超可靠低延时(URLLC)接入的服务、依赖于增强型大规模移动宽带(eMBB)接入的服务、和/或用于机器类型通信(MTC)接入的服务等等。AMF 162可以提供用于在RAN 113与使用其他无线电技术(例如LTE、LTE-A、LTE-A Pro和/或诸如WiFi之类的非3GPP接入技术)的其他RAN(未显示)之间切换的控制平面功能。
SMF 183a、183b可以经由N11接口连接到CN 115中的AMF 182a、182b。SMF 183a、183b还可以经由N4接口连接到CN 115中的UPF 184a、184b。SMF 183a、183b可以选择和控制UPF 184a、184b,并且可以通过UPF 184a、184b来配置业务路由。SMF 183a、183b可以执行其他功能,例如管理和分配WTRU/UE IP地址,管理PDU会话,控制策略实施和QoS,以及提供下行链路数据通知等等。PDU会话类型可以是基于IP的,不基于IP的,以及基于以太网的等等。
UPF 184a、184b可以经由N3接口连接到RAN 113中的一者或多者gNB 180a、180b、180c,这样可以为WTRU 102a、102b、102c提供对分组交换网络(例如因特网110)的接入,以便促成WTRU 102a、102b、102c与启用IP的设备之间的通信,UPF 184、184b可以执行其他功能,例如路由和转发分组、实施用户平面策略、支持多宿主PDU会话、处理用户平面QoS、缓冲下行链路分组、以及提供移动性锚处理等等。
CN 115可以促成与其他网络的通信。例如,CN 115可以包括或者可以与充当CN115与PSTN 108之间的接口的IP网关(例如IP多媒体子系统(IMS)服务器)进行通信。此外,CN 115可以为WTRU 102a、102b、102c提供针对其他网络112的接入,这其中可以包括其他服务供应商拥有和/或运营的其他有线和/或无线网络。在一个实施例中,WTRU 102a、102b、102c可以经由对接到UPF 184a、184b的N3接口以及介于UPF 184a、184b与数据网络(DN)185a、185b之间的N6接口并通过UPF 184a、184b连接到本地DN 185a、185b。
有鉴于图14A-14D以及关于图14A-14D的相应描述,在这里对照以下的一项或多项描述的一个或多个或所有功能可以由一个或多个仿真设备(未显示)来执行:WTRU 102a-d、基站114a-b、e节点B 160a-c、MME 162、SGW 164、PGW 166、gNB 180a-c、AMF 182a-b、UPF184a-b、SMF 183a-b、DN 185a-b和/或这里描述的其他任何设备(一个或多个)。这些仿真设备可以是被配置成模拟这里一个或多个或所有功能的一个或多个设备。举例来说,这些仿真设备可用于测试其他设备和/或模拟网络和/或WTRU功能。
所述仿真设备可被设计成在实验室环境和/或运营商网络环境中实施关于其他设备的一项或多项测试。例如,所述一个或多个仿真设备可以在被完全或部分作为有线和/或无线通信网络一部分实施和/或部署的同时执行一个或多个或所有功能,以便测试通信网络内部的其他设备。所述一个或多个仿真设备可以在被临时作为有线和/或无线通信网络的一部分实施/部署的同时执行一个或多个或所有功能。所述仿真设备可以直接耦合到别的设备以执行测试,和/或可以使用空中无线通信来执行测试。
所述一个或多个仿真设备可以在未被作为有线和/或无线通信网络一部分实施/部署的同时执行包括所有功能在内的一个或多个功能。例如,所述仿真设备可以在测试实验室和/或未被部署(例如测试)的有线和/或无线通信网络的测试场景中使用,以便实施关于一个或多个组件的测试。所述一个或多个仿真设备可以是测试设备。所述仿真设备可以使用直接的RF耦合和/或借助了RF电路(作为示例,该电路可以包括一个或多个天线)的无线通信来发射和/或接收数据。
已经公开了用于OBMC的系统、方法和手段。基于外部OBMC的运动补偿可以与基于内部OBMC的运动补偿区分和分离。基于外部OBMC的运动补偿可以在子块和子块组上实现,例如,通过以下实现:将具有相同或相似运动的连续边界子块合并到一子块组中,并对该子块组执行基于OBMC的运动补偿。基于内部OBMC的运动补偿可以在可变子块大小上实现。在一示例中,基于内部OBMC的运动补偿可使用可用于子块级运动导出的相同子块大小。基于内部OBMC的运动补偿可被停用,例如,可对于可能通过空间-时间运动向量预测(STMVP)模式编码的CU而被停用。
尽管以上以特定的组合描述了特征和元素,但是本领域的普通技术人员将理解,每个特征或元素可以单独使用或与其它特征和元素以任何组合使用。另外,本文描述的方法可以在结合在计算机可读介质中的计算机程序、软件或固件中实现,以由计算机或处理器执行。计算机可读媒体的示例包括但不限于电子信号(通过有线或无线连接传输)和计算机可读存储媒体。计算机可读存储媒体的示例包括但不限于只读存储器(ROM)、随机存取存储器(RAM)、寄存器、缓冲存储器、半导体存储器设备、磁媒体(例如内部硬盘和可移除磁盘)、磁光媒体和光学媒体(例如CD-ROM盘和数字通用盘(DVD))。与软件相关联的处理器可用于实施用于WTRU、UE、终端、基站、RNC或任何主计算机的射频收发信机。

Claims (18)

1.一种处理视频数据的方法,所述方法包括:
接收视频比特流中的当前编码单元CU,所述当前CU与沿着所述当前CU的边界邻近所述当前CU的多个外部子块相关联;
确定所述外部子块共享实质上类似的运动信息;
识别所述当前CU内的多个边界样本,其中所述边界样本属于所述当前CU的不同子块且该不同子块中的每一者位于从所述外部子块中的一者跨越所述边界的位置;以及
使用所述外部子块的所述实质上类似的运动信息,对作为群组的所述边界样本执行合并重叠块运动补偿OBMC操作。
2.根据权利要求1所述的方法,其中所述边界样本位于沿着所述当前CU的垂直边界的位置。
3.根据权利要求1所述的方法,其中所述边界样本位于沿着所述当前CU的水平边界的位置。
4.根据权利要求1所述的方法,其中所述当前CU的所述不同子块中的每一者具有4×4像素的子块大小。
5.根据权利要求1所述的方法,其中所述外部子块中的每一者具有4×4像素的子块大小。
6.根据权利要求1所述的方法,其中确定所述外部子块共享实质上类似的运动信息包括:比较与所述外部子块相关联的相应运动向量,并确定所述相应运动向量之间的差小于阈值。
7.根据权利要求1所述的方法,其中所述当前CU是使用子块编码模式而被编码的。
8.根据权利要求1所述的方法,其中所述当前CU是在子块编码模式中被编码的,所述当前CU进一步包括多个内部样本,且所述方法进一步包括:
基于所述当前CU是否是以空间-时间运动向量预测STMVP模式而被编码,确定是否应用OBMC;
基于所述当前CU未以所述STMVP模式而被编码的确定,使用与所述当前CU的一或多个子块相关联的运动信息将OBMC应用于所述内部样本;以及
基于所述当前CU是以所述STMVP模式而被编码的确定,跳过用于所述内部样本的OBMC。
9.根据权利要求8所述的方法,还包括:
基于一个以上4×4单元的子块大小,导出所述当前CU的运动信息;以及
从具有相同子块大小的子块中选择所述内部样本,其中所述内部样本属于所述子块的不同4×4单元;以及
使用与所述当前CU的一或多个子块相关联的运动信息,将OBMC应用于作为群组的所述内部样本。
10.一种视频编码设备,其包括:
处理器,其被配置为:
接收视频比特流中的当前编码单元CU,所述当前CU与沿着所述当前CU的边界邻近所述当前CU的多个外部子块相关联;
确定所述外部子块共享实质上类似的运动信息;
识别所述当前CU内的多个边界样本,其中所述边界样本属于所述当前CU的不同子块且该不同子块中的每一者位于从所述外部子块中的一者跨越所述边界的位置;以及
使用所述外部子块的所述实质上类似的运动信息,对作为群组的所述边界样本执行合并重叠块运动补偿OBMC操作。
11.根据权利要求10所述的视频编码设备,其中所述边界样本位于沿着所述当前CU的垂直边界的位置。
12.根据权利要求10所述的视频编码设备,其中所述边界样本位于沿着所述当前CU的水平边界的位置。
13.根据权利要求10所述的视频编码设备,其中所述当前CU的所述不同子块中的每一者具有4×4像素的子块大小。
14.根据权利要求10所述的视频编码设备,其中所述外部子块中的每一者具有4×4像素的子块大小。
15.根据权利要求10所述的视频编码设备,其中所述处理器被配置以确定所述外部子块共享实质上类似的运动信息包括:所述处理器被配置以比较与所述外部子块相关联的相应运动向量,并确定所述相应运动向量之间的差小于阈值。
16.根据权利要求10所述的视频编码设备,其中所述当前CU是使用子块编码模式而被编码的。
17.根据权利要求10所述的视频编码设备,其中所述当前CU是在子块编码模式中被编码的,所述当前CU进一步包括多个内部样本,且所述处理器进一步被配置以:
基于所述当前CU是否是以空间-时间运动向量预测STMVP模式而被编码,确定是否应用OBMC;
基于所述当前CU未以所述STMVP模式而被编码的确定,使用与所述当前CU的一或多个子块相关联的运动信息而将OBMC应用于所述内部样本:以及
基于所述当前CU是以所述STMVP模式而被编码的确定,跳过所述内部样本的OBMC。
18.根据权利要求17所述的视频编码设备,其中所述处理器进一步被配置以:
基于一个以上4×4单元的子块大小,导出所述当前CU的运动信息;以及
从具有相同子块大小的子块选择所述内部样本,其中所述内部样本属于所述子块的不同4×4单元;以及
使用与所述当前CU的一或多个子块相关联的运动信息,将OBMC应用于作为群组的所述内部样本。
CN201880070542.2A 2017-11-01 2018-11-01 重叠块运动补偿 Active CN111316649B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762580104P 2017-11-01 2017-11-01
US62/580,104 2017-11-01
PCT/US2018/058605 WO2019089864A1 (en) 2017-11-01 2018-11-01 Overlapped block motion compensation

Publications (2)

Publication Number Publication Date
CN111316649A true CN111316649A (zh) 2020-06-19
CN111316649B CN111316649B (zh) 2024-06-11

Family

ID=64557130

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880070542.2A Active CN111316649B (zh) 2017-11-01 2018-11-01 重叠块运动补偿

Country Status (4)

Country Link
US (1) US11425418B2 (zh)
EP (1) EP3704857A1 (zh)
CN (1) CN111316649B (zh)
WO (1) WO2019089864A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020084556A1 (en) 2018-10-24 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Sub-block motion candidate list in video coding
JP2022028089A (ja) * 2018-12-17 2022-02-15 ソニーグループ株式会社 画像符号化装置、画像符号化方法、画像復号装置、および画像復号方法
CN112565787B (zh) * 2018-12-28 2022-05-31 杭州海康威视数字技术股份有限公司 一种编解码方法及其设备
MX2021010368A (es) * 2019-02-28 2021-10-01 Samsung Electronics Co Ltd Aparatos para codificar y decodificar imagenes, y metodos para codificar y decodificar imagenes mediante los mismos.
CN114424539A (zh) 2019-06-14 2022-04-29 北京字节跳动网络技术有限公司 处理视频单元边界和虚拟边界
CN113994671B (zh) 2019-06-14 2024-05-10 北京字节跳动网络技术有限公司 基于颜色格式处理视频单元边界和虚拟边界
KR20220058899A (ko) 2019-09-18 2022-05-10 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩에서 적응형 루프 필터의 2-파트 시그널링
KR20220061980A (ko) 2019-09-22 2022-05-13 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 루프 필터링에서의 패딩 프로세스
KR20220063177A (ko) 2019-09-27 2022-05-17 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 상이한 비디오 유닛들 간의 적응적 루프 필터링
JP7454042B2 (ja) 2019-10-10 2024-03-21 北京字節跳動網絡技術有限公司 適応ループ・フィルタリングにおける利用可能でないサンプル位置でのパディング・プロセス
WO2021083259A1 (en) 2019-10-29 2021-05-06 Beijing Bytedance Network Technology Co., Ltd. Signaling of cross-component adaptive loop filter
JP7393550B2 (ja) 2019-12-11 2023-12-06 北京字節跳動網絡技術有限公司 クロス成分適応ループフィルタリングのためのサンプルパディング
CN115136597A (zh) * 2019-12-23 2022-09-30 抖音视界有限公司 空域-时域运动矢量预测
WO2022002007A1 (en) 2020-06-30 2022-01-06 Beijing Bytedance Network Technology Co., Ltd. Boundary location for adaptive loop filtering
CN117397241A (zh) * 2021-04-12 2024-01-12 交互数字Ce专利控股有限公司 重叠块运动补偿
WO2023283244A1 (en) * 2021-07-06 2023-01-12 Beijing Dajia Internet Information Technology Co., Ltd. Improvements on temporal motion vector prediction

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160219302A1 (en) * 2015-01-26 2016-07-28 Qualcomm Incorporated Overlapped motion compensation for video coding
CN106464863A (zh) * 2014-04-01 2017-02-22 联发科技股份有限公司 视频编码中自适应内插滤波的方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101611437B1 (ko) * 2009-10-28 2016-04-26 삼성전자주식회사 복수의 프레임을 참조하여 영상을 부호화, 복호화하는 방법 및 장치
US9560372B2 (en) * 2010-12-27 2017-01-31 Stmicroelectronics, Inc. Directional motion vector filtering
US9807424B2 (en) * 2011-01-10 2017-10-31 Qualcomm Incorporated Adaptive selection of region size for identification of samples in a transition zone for overlapped block motion compensation
US9883203B2 (en) * 2011-11-18 2018-01-30 Qualcomm Incorporated Adaptive overlapped block motion compensation
US9819965B2 (en) * 2012-11-13 2017-11-14 Intel Corporation Content adaptive transform coding for next generation video
EP3078196B1 (en) * 2013-12-06 2023-04-05 MediaTek Inc. Method and apparatus for motion boundary processing
KR20170116043A (ko) * 2015-02-12 2017-10-18 엘지전자 주식회사 그래프 기반 변환을 이용하여 비디오 신호를 처리하는 방법 및 장치
US10271064B2 (en) * 2015-06-11 2019-04-23 Qualcomm Incorporated Sub-prediction unit motion vector prediction using spatial and/or temporal motion information
US10477238B2 (en) * 2016-09-07 2019-11-12 Qualcomm Incorporated Sub-PU based bi-directional motion compensation in video coding
US10798404B2 (en) * 2016-10-05 2020-10-06 Qualcomm Incorporated Systems and methods of performing improved local illumination compensation
CN109804630A (zh) * 2016-10-10 2019-05-24 夏普株式会社 对视频数据编码执行运动补偿的系统以及方法
US20190387251A1 (en) * 2018-06-19 2019-12-19 Mediatek Inc. Methods and Apparatuses of Video Processing with Overlapped Block Motion Compensation in Video Coding Systems

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106464863A (zh) * 2014-04-01 2017-02-22 联发科技股份有限公司 视频编码中自适应内插滤波的方法
US20160219302A1 (en) * 2015-01-26 2016-07-28 Qualcomm Incorporated Overlapped motion compensation for video coding
CN107211157A (zh) * 2015-01-26 2017-09-26 高通股份有限公司 用于视频译码的重叠运动补偿

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
BYEONG-DOO CHOI, ET AL: "Motion-Compensated Frame Interpolation Using Bilateral Motion Estimation and Adaptive Overlapped Block Motion Compensation", IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY, vol. 17 *
C-C CHEN, ET AL: "CE2:Report of OBMC with Motion Merging", 97.MPEG MEETING *

Also Published As

Publication number Publication date
US11425418B2 (en) 2022-08-23
WO2019089864A1 (en) 2019-05-09
US20210185353A1 (en) 2021-06-17
EP3704857A1 (en) 2020-09-09
CN111316649B (zh) 2024-06-11

Similar Documents

Publication Publication Date Title
CN111316649B (zh) 重叠块运动补偿
JP7448600B2 (ja) 局所照明補償に基づいた動き補償双予測
CN111512632B (zh) 用于简化视频译码中的自适应环路滤波器的方法
JP7168593B2 (ja) 双方向オプティカルフローに基づいた動き補償予測
CN111345041B (zh) 解码、编码视频数据的方法和设备
CN112806005B (zh) 用于视频译码的双向预测
CN110199523B (zh) 用于帧内平面编码的预测方法
CN113615186B (zh) 对称运动矢量差译码
CN112166608A (zh) 采用简化梯度推导的双向光流方法
CN111480341A (zh) 用于合并模式的解码器侧运动矢量细化和子块运动导出
CN113396591A (zh) 针对用于基于模板的视频译码的改进的线性模型估计的方法、架构、装置和系统
US20220070441A1 (en) Combined inter and intra prediction
CN113383551A (zh) 用于利用光流的帧间预测细化的系统、装置和方法
CN112335247A (zh) 用于基于仿射运动模型的视频译码的自适应控制点选择
CN111316651A (zh) 多类型树编码
CN113728643A (zh) 对称合并模式运动向量编码
CN113826400A (zh) 用于利用光流的解码器侧运动向量细化的预测细化的方法和装置
CN115152228A (zh) 合并模式、自适应运动向量精度和变换跳过语法
CN115104304A (zh) 用于帧间预测的视频数据的变换编码
CN113383542A (zh) 使用合并模式运动向量候选对象的改善的帧内平面预测
CN114026869A (zh) 块边界光流预测修正
CN111630855B (zh) 基于局部照明补偿的运动补偿双向预测
WO2024133579A1 (en) Gpm combination with inter tools
WO2023118309A1 (en) Gdr interaction with template based tools in inter slice
JP2024513939A (ja) 重複ブロック動き補償

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant