CN110199523B - 用于帧内平面编码的预测方法 - Google Patents

用于帧内平面编码的预测方法 Download PDF

Info

Publication number
CN110199523B
CN110199523B CN201880006992.5A CN201880006992A CN110199523B CN 110199523 B CN110199523 B CN 110199523B CN 201880006992 A CN201880006992 A CN 201880006992A CN 110199523 B CN110199523 B CN 110199523B
Authority
CN
China
Prior art keywords
reference line
pixels
current block
reconstructed
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880006992.5A
Other languages
English (en)
Other versions
CN110199523A (zh
Inventor
拉胡尔·瓦纳姆
贺玉文
叶艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vid Scale Inc
Original Assignee
Vid Scale Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid Scale Inc filed Critical Vid Scale Inc
Publication of CN110199523A publication Critical patent/CN110199523A/zh
Application granted granted Critical
Publication of CN110199523B publication Critical patent/CN110199523B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Abstract

一种或多种帧内平面方法可用于预测当前块中的一个或多个像素。该当前块可以与重构左侧参考线、重构顶部参考线和待预测的非重构参考线相关联。所述重构参考线可能已经被解码并且可以是可用的。所述待预测的非重构参考线可包括非重构右侧和/或非重构底部参考线。轴心参考像素可被识别,并且该轴心参考像素可以位于所述重构左侧和/或顶部参考线的延伸部分上。参考像素可被确定,并且该参考像素可以位于所述重构顶部和/或左侧参考线上。可以基于所述轴心参考像素和所述参考像素来预测一个或多个所述非重构参考线上的像素。可以使用所预测的所述右侧和底部参考线上的预测像素来预测所述当前块的像素。

Description

用于帧内平面编码的预测方法
相关申请的交叉引用
本申请要求2017年1月13日提交的美国临时申请序列号62/446,354的权益,其内容通过引用结合在此。
背景技术
视频编码系统可以压缩数字视频信号。例如,视频编码系统可以压缩数字视频信号以减少这种信号的存储和/或传输带宽。视频编码系统可以包括但不限于基于块的、基于小波的、基于对象的系统和/或基于块的混合视频编码系统。基于块的视频编码系统的示例可以包括H.261(例如,运动图像专家组)、MPEG-1、MPEG-2、H.263、H.264/高级视频编码(AVC)和/或H.265/高效视频编码(HEVC)。
发明内容
可以在块中的一个或多个像素中预测帧内平面(Intra planar)编码。例如,解码器可以接收具有当前块的比特流。该当前块可以包括第一重构(reconstructed)参考线、第二重构参考线和待预测的第三非重构参考线(例如,第三未重构参考线)。所述第一重构参考线可以包括所述当前块的重构左侧参考线,并且所述第二重构参考线可以包括所述当前块的重构顶部参考线,反之亦然。所述第一和第二重构参考线可能已经被编码并且可以对解码器可用。所述待预测的第三非重构参考线可包括待预测的非重构右侧参考线和/或待预测的非重构底部参考线。所述待预测的第三非重构参考线可能尚未被编码并且可能不可用。
可以使用非重构参考线上的一个或多个预测像素来预测所述当前块中的像素。可以使用插值来预测所述当前块内的一个或多个像素。本文描述的所述当前块内的一个或多个像素可包括所述当前块内的一个或多个样本。所述当前块可以包括预测单元(PU)。可以预测所述非重构参考线(例如,所述非重构右侧参考线和/或所述非重构底部参考线)。例如,可以通过在来自所述重构左侧和/或顶部重构参考线的一个或多个参考像素之间进行插值来预测所述第三非重构参考线。
解码器可基于信令来检测和/或确定一个或多个帧内平面方法。在示例中,编码器可以在比特流中用信号通知与一个或多个帧内平面方法的使用相关联的信息。在示例中,所述解码器可以基于相邻的重构像素(例如,相邻的重构样本)导出与使用一个或多个帧内平面方法相关联的信息。所述插值预测方法可以相对于预测像素以一定角度执行垂直预测和水平预测。可以实施帧内平面方法和/或插值预测方法中的一者或多者的组合。
解码器可以接收比特流。例如,所述解码器可以接收比特流以预测当前块中的像素。所述当前块可以与一个或多个参考线相关联。例如,所述当前块可以与第一重构参考线和/或第二重构参考线相关联。在示例中,所述第一重构参考线可以是所述当前块的重构左侧参考线,并且所述第二重构参考线可以是所述当前块的重构顶部参考线。所述当前块可以与待预测的第三非重构参考线相关联。例如,该待预测的第三非重构参考线可以包括待预测的非重构底部参考线和/或待预测的非重构右侧参考线。
所述解码器可识别轴心(pivot)参考像素。该轴心参考像素可以位于所述当前块的所述第一和/或第二重构参考线的延伸上。在示例中,所述轴心参考像素可以位于所述当前块的重构左侧参考线的延伸上。在示例中,所述轴心参考像素可以位于所述当前块的重构顶部参考行的延伸上。
所述解码器可预测所述第三非重构参考线上的多个像素。在示例中,所述解码器可以预测所述非重构右侧参考线上的多个像素。在示例中,所述解码器可以预测所述非重构底部参考线上的多个像素。所述解码器可以基于位于所述重构左侧和/或顶部参考线上的多个对应像素和所识别的轴心参考像素来预测所述第三非重构参考线上的多个像素。
所述解码器可使用与所述当前块相关联的右侧和/或底部参考线上的多个预测像素来预测所述当前块的像素。
附图说明
图1示出了示例性基于块的混合视频编码器。
图2示出了示例性基于块的混合视频解码器。
图3示出了参考样本Rx,y的示例,其用于预测以获得用于NxN样本的块大小的预测样本Px,y。
图4示出了用于帧内编码单元的分区模式的示例。
图5示出了角度帧内预测模式的示例。
图6A示出了等式(1)中的示例性预测Pvx,y和PHx,y。
图6B示出了等式(2)中的示例性预测Pvx,y和PHx,y。
图7示出了示例性帧内边界滤波器。
图8示出了帧内模式预测方向的示例。
图9示出了用于预测上三角区域(阴影区域)的示例性帧内平面方法。
图10示出了用于预测顶部区域(阴影区域)的示例性帧内平面方法。
图11A示出了通过在参考像素‘A’和沿参考段BC的参考像素之间进行插值来预测非重构底部参考线的一部分的示例性帧内平面方法。
图11B示出了通过在参考像素‘B’和沿参考段AD的参考像素之间进行插值来预测非重构右侧参考线的一部分的示例性帧内平面方法。
图12A示出了通过在轴心参考像素‘C’和沿着区段OD的参考像素之间进行插值来获得非重构底部参考线的示例。
图12B示出了通过在轴心参考像素‘D’和沿着区段OC的参考像素之间进行插值来获得非重构右侧参考线的示例。
图13A示出了使用图11A中所示的示例对所述非重构底部参考线的一部分进行插值的示例。
图13B示出了使用图12A中所示的示例对所述非重构底部参考线的剩余部分进行插值的示例。
图13C示出了使用图11B中所示的示例对所述非重构右侧参考线的一部分进行插值的示例。
图13D示出了使用图12B中所示的示例对所述非重构右侧参考线的剩余部分进行插值的示例。
图14示出了用于对非重构右侧参考线和非重构底部参考线进行插值的示例性组合方法。可以使用图9中所示的示例来预测阴影区域中的像素。可以使用图11A和11B中所示的示例来预测剩余当前块(例如,无阴影区域)中的像素。
图15示出了用于对非重构右侧参考线和非重构底部参考线进行插值的示例性组合方法。可以使用图10中所示的示例来预测阴影区域中的像素。可以使用图11A和11B中所示的示例来预测剩余当前块(例如,无阴影区域)中的像素。
图16示出了用于对非重构右侧参考线和非重构底部参考线的示例性组合方法。可以通过对来自图9和图11A和11B中所示的示例的预测样本求平均来获得上三角区域中的像素。可以使用图11A和11B中所示的示例来预测底部三角区域中的像素。
图17示出了在解码器侧帧内模式导出(DIMD)中使用的目标像素、模板像素和模板的参考像素的示例。
图18示出了使用图11A和11B中所示的示例来应用插值到目标块(例如,目标PU)上方的模板的示例。
图19示出了应用图12A和12B中所示的示例来应用插值到目标块(例如,目标PU)上方的模板的示例。
图20A是示出了其中可以实施一个或多个公开的实施例的示例性通信系统的系统图。
图20B是示出了根据实施例的可在图20A中所示的通信系统内使用的示例性无线发射/接收单元(WTRU)的系统图。
图20C是示出了根据实施例的可在图20A中所示的通信系统内使用的示例性无线电接入网络(RAN)和示例性核心网络(CN)的系统图。
图20D是示出了根据实施例的可在图20A中所示的通信系统内使用的另一示例性RAN和另一示例性CN的系统图。
具体实施方式
现在将参考各个附图来描述说明性实施例的详细描述。尽管该描述提供了可能的实施的详细示例,但是应该注意,该细节旨在是示例性的,并且决不限制本申请的范围。
图1示出了示例性基于块的混合视频编码系统600的框图。可以逐块处理输入视频信号602。可以(例如,在HEVC中)使用扩展块大小(例如,被称为编码单元或CU)来压缩高分辨率(例如,1080p和/或更高)的视频信号。CU可具有高达64×64像素(例如,在HEVC中)。可以将CU划分为可以对其应用单独的预测的多个预测单元或PU。对于输入视频块(例如,宏块(MB)或CU),可执行空间预测660或时间预测662。空间预测(例如,帧内预测)可以使用来自相同视频图片和/或切片中的已编码相邻块的像素来预测当前视频块。空间预测可以减少所述视频信号中固有的空间冗余。时间预测(例如,被称为帧间预测或运动补偿预测)可以使用来自已编码视频图片的像素来预测当前视频块。时间预测可以减少所述视频信号中固有的时间冗余。给定视频块的时间预测信号可以通过指示当前块与其参考块之间的运动的量和/或方向的运动矢量而被用信号通知。如果支持多个参考图片(例如,在H.264/AVC或HEVC中),则可以将视频块的参考图片索引用信号通知给解码器。该参考索引可以用于标识时间预测信号可能来自参考图片存储库664中的哪个参考图片。
在空间和/或时间预测之后,编码器中的模式决策680可以例如基于速率-失真优化来选择预测模式。在616处,可以从当前视频块中减去预测块。可以使用变换模块604和量化模块606对预测残差进行解相关以实现目标比特率。该量化的残差系数可以在610处被逆量化并且在612处被逆变换以形成重构残差。可以在626处将该重构残差添加回所述预测块以形成重构视频块。诸如去块化滤波器和/或自适应环路滤波器的环路滤波器可以在重构视频块被放入参考图片存储库664之前在666处被应用于所述重构视频块。参考图片存储库664中的参考图片可以用于编码未来的视频块。可以形成输出视频比特流620。可以将编码模式(例如,帧间或帧内)、预测模式信息、运动信息和/或量化的残差系数发送到熵编码单元608以进行压缩和打包以形成比特流620。
图2示出了示例性基于块的混合视频解码器。图2中的解码器可以对应于图1中的编码器。可以在熵解码单元208处接收、解包和/或熵解码视频比特流202。可以将编码模式和/或预测信息发送到空间预测单元260(例如,如果被帧内编码)和/或时间预测单元262(例如,如果被帧间编码)。预测块可以由空间预测单元260和/或时间预测单元262形成。可以将残差变换系数发送到逆量化单元210和逆变换单元212以重构残差块。可以在226处将预测块和残差块加到一起。重构块可以经历环路滤波266并且可以存储在参考图片存储库264中。该参考图片存储库264中的重构视频可以用于驱动显示设备和/或预测未来的视频块。
帧内编码可以用在图像和/或视频编码技术中,例如联合图像专家组(JPEG)、H.261、MPEG-1、MPEG-2、H.263、H.264/AVC和/或H.265/HEVC。例如,帧内编码可用于减少图像和/或视频技术中的空间相关性。例如,可以在H.264/AVC和H.265/HEVC中使用定向帧内预测。例如,可以在H.264/AVC和H.265/HEVC中使用定向帧内预测以提高编码效率。帧内预测模式可以利用一组参考样本。举例来说,帧内预测模式可使用来自待预测的当前块的上方(例如,或顶部)且左侧的一组参考像素(例如,参考样本)。参考像素(例如,参考样本)可以被表示为Rx,y。在示例中,(x,y)的原点可以是块的左上角上方和左侧的一个像素。位置(x,y)处的预测像素(例如,预测样本)值可以被表示为Px,y
图3示出了参考像素Rx,y的示例,其用于预测以获得针对N×N像素的块大小的预测像素Px,y。在示例中,像素(例如,参考像素Rx,y和预测像素Px,y)可以是所述块内的样本(例如,分别为参考样本和/或预测样本)。
图4示出了用于帧内预测单元(PU)的分区模式的示例。HEVC帧内编码可以支持一种或多种(例如,多种)类型的PU划分。例如,HEVC帧内编码可以支持PART_2Nx2N(部分_2Nx2N)和PART_NxN(部分_NxN)。PART_2Nx2N和PART_NxN可以将编码单元(CU)分别分成一个或四个相等大小的PU。当CU大小是所配置的最小CU大小时,PART_NxN可用。例如,所配置的最小CU大小可以是8x8。
可以拆分8x8CU。例如,8x8CU可以被分为四个4x4PU,并且可以具有四个亮度预测块(PB),例如,以用于4:2:0色度格式。对于帧内编码块,可以存在每个色度通道一个4×4PB。例如,对于帧内编码块,可以存在每个色度通道一个4×4PB,以避免由2×2色度帧内PB引起的高吞吐量。
CU可以被分成多个变换单元(TU)。帧内预测可以被应用于TU。例如,帧内预测可以被顺序地应用于TU。当CU被分成一个或多个(例如,多个)TU时,可以以四叉树Z扫描顺序对TU应用(例如,顺序地应用)帧内预测。例如,相对于在PU级应用帧内预测,所述帧内预测可以以四叉树Z扫描顺序而被顺序地应用于TU。顺序帧内预测可以允许来自更接近当前TU样本的先前重构TU的相邻参考样本被编码。
图5示出了角度帧内预测模式的示例。HEVC可以支持一个或多个(例如,35个)帧内预测模式。例如,HEVC可以支持DC模式、平面模式和33个定向(例如,或角度)帧内预测模式。
角度帧内预测可以被配置为对视频和/或图像内容中的不同定向结构进行建模(例如,有效建模)。可以选择预测方向的数量和角度以在视频材料的编码复杂度和编码效率之间提供折衷。
预测样本Px,y可以通过以下中的一者或多者获得:将其位置投影到像素的参考线(例如,行或列);应用所选择的预测方向;和/或以1/32像素精度对样本的预测值进行插值。可以利用两个最接近的参考样本线性地执行插值,例如,用于垂直预测的Ri,0和Ri+1,0(例如,如图5中所示的模式18~34)和用于水平预测的R0,i和R0,i+1(例如,如图5所示的模式2~17)。
对于一个或多个(例如,所有)PU尺寸的亮度帧内预测,HEVC可以支持一个或多个(例如,33个)角度预测模式、平面预测模式和/或DC预测模式。HEVC可以为PU定义多个(例如,三个)最可能模式(MPM)。例如,HEVC可以基于顶部和左侧相邻PU的模式而为PU定义三个MPM。标志可以指示当前块的预测模式是否在MPM集中。如果当前帧内预测模式等于一组MPM中的一个元素,则可以将该组中的索引发送到解码器。如果当前预测模式与该组MPM中的一个元素不匹配,则可以使用代码(例如,5比特固定长度代码)来指示该组MPM之外的所选模式。
平面模式可以是一阶示例性预测。一阶预测可以使用从顶部和左侧参考样本导出的双线性模型来对块进行预测。平面模式操作可以包括计算两个线性预测。所述平面模式操作可以通过使用这里描述的等式(1)~(3)中的一者或多者(例如,所有)来平均所述两个线性预测。
Figure BDA0002130163960000091
Figure BDA0002130163960000092
Figure BDA0002130163960000093
图6A示出了等式(1)的示例性预测操作。在示例中,可以通过复制左下样本R0,N+1来获得底部参考线。在示例中,可以对顶部和底部参考线进行插值以利用等式(1)生成预测样本
Figure BDA0002130163960000094
图6B示出了等式(2)的示例性预测操作。例如,可以通过复制右上像素RN+1,0来生成右侧参考线。等式(2)中的预测操作可以涉及对左右侧参考线的线性插值以生成预测
Figure BDA0002130163960000095
诸如/>
Figure BDA0002130163960000096
和/>
Figure BDA0002130163960000097
的两个预测可以如等式(3)那样被平均,以产生最终预测块。
可以使用滤波器来对参考样本进行平滑处理。在示例中,当intra_smoothing_disabled_flag(帧内_平滑_禁用_标志)参数被设置为0时,可以将3抽头平滑滤波器应用于一个或多个(例如,所有)参考样本。例如,可以通过给定帧内预测模式和/或变换块大小来控制滤波。在示例中,对于32×32块,除了水平和垂直角度模式,一个或多个(例如,所有)角度模式可以使用滤波后的参考样本。在示例中,对于16×16块,不使用滤波后的参考样本的模式可以被扩展到最接近水平和垂直的四种模式(例如,9、11、25或27),如图5所示。在示例中,对于8×8块,对角线模式(2、18或34)可以使用滤波后的参考样本。
帧内预测可以应用于色度分量。在示例中,可以指定帧内预测模式,例如,指定平面、DC、水平、垂直和/或DM_CHROMA(DM_色度)模式。表1示出了用于色度的帧内预测模式和帧内预测方向之间的示例性映射。例如,表1可以提供一规则,其指定在给定对应的亮度PB帧内预测模式和intra_chroma_pred_mode(帧内_色度_预测_模式)语法元素的情况下的色度分量帧内预测模式。可以将色度分量的帧内预测方向映射到对角线模式(34)。
表1
Figure BDA0002130163960000101
表2示出了用于4:2:2色度格式的帧内预测模式的示例性规范。当选择DM_CHROMA模式并且使用4:2:2色度格式时,可以例如从表2中指定的对应亮度PB的帧内预测模式导出用于色度PB的帧内预测模式。
表2
Figure BDA0002130163960000102
图7示出了示例性帧内边界滤波器。当对帧内预测变换块(TB)进行预测时,可以使用帧内边界滤波器。例如,当对帧内预测TB进行重构时,可以使用帧内边界滤波器来对沿着TB的左侧边缘和/或顶部边缘的预测亮度样本进行滤波,以用于使用水平、垂直和/或DC帧内预测模式的PB,例如如图7所示。可以将帧内边界滤波器应用于当前TB内的边界样本(例如,与这里描述的参考样本平滑滤波器不同)。
帧内边界滤波器可被定义,例如,可以关于作为输入的预测样本p和作为输出的predSamples(预测样本)的阵列而被定义。
对于应用于大小(nTbS)小于32×32的亮度变换块并且启用边界滤波(例如,disableIntraBoundaryFilter(禁用帧内边界滤波器)可以等于0)的水平帧内预测,可以应用以下滤波,其中x=1...nTbS,y=1:
predSamplesx,y=Clip1Y(P0,y+((Px,0-P0,0)>>1)) (4)
对于应用于大小(nTbS)小于32×32的亮度变换块并且disableIntraBoundaryFilter等于0的垂直帧内预测,可以应用以下滤波,其中x=1...nTbS,y=1:
predSamplesx,y=Clip1Y(Px,0+((P0,y-P0,0)>>1)) (5)
对于应用于大小(nTbS)小于32×32的亮度变换块的DC帧内预测,可以应用以下滤波,其中x=1...nTbS且y=1且DC预测器被表示为dcVal:
predSamples1,1=(P0,1+2*dcVal+P1,0+2)>>2 (6)
predSamplesx,1=(Px,0+3*dcVal+2)>>2,其中x=2…nTbS (7)
predSamples1,y=(P0,y+3*dcVal+2)>>2,其中y=2…nTbS (8)
可以通过边界平滑来提供改进,例如,0.4%的平均改进。在对色度分量的预测趋于平滑时,可以在亮度分量上应用帧内边界滤波器。
帧内模式残差编码可利用帧内模式相关变换和/或系数扫描来编码残差信息。可以为4×4亮度块选择离散正弦变换(DST)。可以选择/使用离散余弦变换(DCT)用于其他类型的块。
可以使用基于线性模型(LM)的色度帧内预测模式,例如以使用根据例如等式(9)的线性模型(LM)来从并置的重构亮度样本预测色度样本:
PredC[x,y]=α·RecL[x,y]+β (9)
其中PredC可以指示块中的预测色度样本,并且RecL可以指示块中的对应的重构亮度样本。参数α和β可以从当前块周围的因果重构亮度和色度样本导出。
图8示出了帧内模式预测方向的示例。箭头线可以对应于帧内模式方向。箭头线可以是模式的子集。数字可能代表模式编号。
在帧内平面模式中,可使用参考像素来预测(例如,插值)当前块内的像素。当前块内的像素可包括该当前块内的样本。该当前块可以包括PU。所述参考像素可以位于所述当前块的重构参考线上。例如,所述重构参考线可以包括重构左侧参考线(例如,当前块上的垂直线)和/或重构顶部参考线(例如,当前块上的水平线)并且可以被称为分别是第一和第二参考线。所述参考像素可以位于当前块的邻接块上。例如,所述参考像素可以位于左侧和右侧以及顶部和底部边界。右侧和底部相邻块可能尚未被编码且可能不可用。相关联的右侧参考线和底部参考线可能不可用。在示例中,可以通过分别复制左下和右上像素上的样本来预测所述相关联的底部参考线和右侧参考线,如图6A和6B所示。
插值预测方法可用于生成当前块内的一个或多个像素。例如,可以执行垂直和/或水平预测。垂直和/或水平预测可以使用等式(1)和(2)来执行,并且可以分别如图6A和6B所示。垂直和/或水平预测可以在当前块内生成一个或多个像素。所述垂直和水平预测可以处理沿着基本方向的参考像素。在示例中,可以使用像素‘A’和‘B’来执行垂直预测,如图6A所示。在示例中,可以使用像素‘C’和‘D’来执行水平预测,如图6B所示。参考像素的位置可以相对于预测像素沿着一个角度朝向。
帧内平面预测方法可用于预测非重构右侧参考线和/或非重构底部参考线。例如,待预测的非重构右侧和/或底部参考线可以被称为待预测的第三参考线。该待预测的第三参考线可以包括待预测的右侧参考线和/或待预测的底部参考线。例如,可以通过分别复制右上和左下参考像素来预测所述非重构右侧参考线和非重构底部参考线,如图6B和6A所示。可以基于来自重构左侧参考线和重构顶部参考线的插值像素来预测所述非重构右侧参考线和非重构底部参考线。
可基于本文所述的插值预测方法和帧内平面预测方法的组合来预测当前块内的一个或一个以上像素以及所述非重构右侧和/或底部参考线(一个或多个)。
关于帧内平面预测方法(一个或多个)的指示可被用来编码所述当前块并且可以被用信号通知。举例来说,本文中所描述的插值预测方法和/或帧内平面预测方法可由编码器明确地用信号通知和/或用信号发送到解码器。关于本文描述的插值预测方法和/或帧内平面预测方法的信息可以由编码器和/或解码器导出。
一个或多个帧内平面预测方法可以执行垂直和/或水平预测。例如,块(例如,当前块)可以具有N×N大小。该当前块可以与来自邻接顶部和左侧参考线的参考像素相关联。所述邻接顶部和左侧参考线可以从邻接块导出,如图9所示。所述邻接左侧和顶部参考线可以是当前块的延伸。在示例中,所述邻接左侧参考线可以是当前块的重构左侧参考线的延伸。在示例中,所述邻接顶部参考线可以是当前块的重构顶部参考线的延伸。
可以预测块(例如,当前块)中的一个或多个像素。例如,可以使用等式(1)~(3)中的一者或多者(例如,全部)基于来自非重构右侧和/或底部参考线上的预测像素的像素来预测(例如,插值)当前块中的一个或多个像素。该预测方法可以被称为方法0。例如,所述帧内平面方法可以基于等式(1)和(2)执行垂直和/或水平预测,分别如图6A和6B所示。所述垂直和水平预测可以处理沿着基本方向的参考像素(例如,用于垂直预测的像素‘A’和‘B’以及用于水平预测的像素‘C’和‘D’)。
图9示出了用于预测上三角区域(例如,在阴影区域中被示出)的帧内平面方法(例如,方法1)的示例。参考像素可以相对于预测像素沿着一个角度朝向。例如,所述当前块可以被分成两个区域:上三角区域和下三角区域,如图9所示。可以使用这里描述的预测方法(例如,方法1)来预测属于上三角区域的像素。位于下三角区域上的一个或多个像素可以例如使用方法0(其使用等式(1)~(3)中的一者或多者(例如,所有))而被预测(例如,被插值)。
可以基于轴心参考像素(一个或多个)和位于重构左侧和/或顶部参考线上的参考像素(一个或多个)来预测(例如,线性插值)所述当前块的上三角区域中的像素‘X’。例如,参考像素‘A’和‘B’可以被认为是轴心,并且可以被称为轴心参考像素。在示例中,该轴心参考像素‘A’和‘B’可以位于所述当前块的右上角和左下角像素处。例如,所述轴心参考像素‘A’和‘B’可以位于所述当前块的两个相对的角落中。给定像素‘X’和‘A’的位置,可以绘制一条通过像素‘A’和‘X’的直线,以在重构左侧参考线上找到对应的参考像素(例如,截断点(intercept)‘E’)。所述重构左侧参考线和/或重构顶部参考线上的对应参考像素(一个或多个)可以被称为截断点参考像素(一个或多个)。例如,截断点‘E’可以是截断点参考像素。可以确定该截断点参考像素‘E’的像素值。在示例中,‘E’处的像素值可以通过相邻像素的加权平均来确定。在示例中,可以通过线性插值来确定截断点参考像素‘E’的像素值。可以基于轴心参考像素和截断点参考像素来预测‘X’处的像素值。在示例中,可以基于像素‘A’和‘E’的相应距离来估计‘X’处的像素值。在示例中,可以通过像素‘A’和‘E’的加权平均来估计‘X’处的像素值。在示例中,‘X’处的像素值可以通过线性插值来估计。像素‘A’和‘E’的加权平均值可以是X1
类似地,可以通过像素‘B’和‘X’绘制直线以在重构顶部参考线上找到截断点参考像素‘F’。可以确定‘F’的截断点参考像素值。在示例中,该截断点参考像素‘F’的像素值可以通过相邻像素的加权平均来确定。在示例中,可以通过线性插值来确定截断点参考像素‘F’的像素值。可以基于轴心参考像素和截断点参考像素来估计‘X’处的像素值。在示例中,可以基于像素‘B’和‘F’的相应距离来估计‘X’处的像素值。在示例中,可以通过像素‘B’和‘F’的加权平均来估计‘X’处的像素值。在示例中,‘X’处的像素值可以通过线性插值来估计。像素“B”和‘F’的加权平均值可以是X2。可以计算‘X’处的像素值。例如,可以基于X1和X2的平均值来计算‘X’处的像素值。对这里描述的上三角区域执行垂直和水平预测的帧内平面方法可以被称为方法1。
图10示出了用于预测顶部区域(例如,阴影区域)的帧内平面方法的示例。这里描述的用于预测图10中所示的顶部阴影区域的帧内平面方法可被称为方法2。可以将图10中所示的顶部阴影区域分成一个或多个(例如,两个)部分:左上角三角区域OAB和三角区域ABG。在示例中,图10中示出了的左上三角区域OAB中的像素可以例如使用本文描述的方法1而被预测。三角区域ABG中的像素可以例如使用方法1的扩展方法来预测。
所述方法1的扩展方法可以允许位于重构顶部参考线和该重构顶部参考线的延伸之间的截断点。例如,可以通过使用一个或多个轴心参考像素和一个或多个截断点参考像素来预测三角区域ABG中的像素X’(图10中未示出)。所述轴心参考像素可以是右上和左下参考像素(例如,分别是像素‘A’和‘B’)。给定像素X’和‘A’的位置,可以通过像素X’和‘A’绘制直线,以在重构左侧参考线上找到截断点参考像素E‘(图10中未示出)。该截断点参考像素E’可以位于所述重构左侧参考线和该重构左侧参考线的延伸(例如,图10中所示的区段OC)内。在示例中,截断点参考像素E’处的像素值可以通过相邻像素的加权平均来确定。在示例中,截断点参考像素E’处的像素值可以通过线性插值来确定。X’处的像素值可以通过像素‘A’和E’的加权平均来估计。例如,可以通过线性插值来估计X’处的像素值。像素‘A’和E’的加权平均值可以是X’1。可以通过‘B’和X’(图10中未示出)绘制直线,以找到与重构顶部参考线的截断点参考像素F’(图10中未示出)。该截断点参考像素F’可以位于重构顶部参考线和该重构顶部参考线的延伸部分内(例如,图10中所示的区段OD)。在示例中,截断点参考像素F’处的像素值可以通过相邻像素的加权平均来确定。在示例中,截断点参考像素F’处的像素值可以通过线性插值来确定。可以通过像素‘B’和F’的加权平均来估计X’处的像素值。例如,可以通过线性插值来估计X’处的像素值。像素‘B’和F’的加权平均值可以是X’2。可以基于X’1和X’2的平均值来计算X’处的像素值。
当前块中的剩余像素(由图10中的无阴影区域表示)可被预测。例如,可以使用本文描述的方法0来预测所述当前块的无阴影区域中的剩余像素。所述帧内平面预测可以预测三角区域AGH和BGI的像素。例如,所述帧内平面预测可以使用等式(1)中的
Figure BDA0002130163960000161
和等式(2)中的/>
Figure BDA0002130163960000162
来预测三角区域AGH和BGI的像素。所述帧内平面预测可以例如使用等式(3)对/>
Figure BDA0002130163960000163
和/>
Figure BDA0002130163960000164
求平均。在图10中所示的三角区域AGH中,可以使用这里描述的方法2来预测水平预测部分。例如,AGH的水平预测部分可以被预测为从轴心参考像素‘B’开始的线通过位于区段AD内的交叉而被截取。区段AD可以是所述重构顶部参考线的延伸。例如,可以使用本文描述的方法0来预测AGH的垂直预测部分。例如,可以通过使用等式3对水平预测部分和垂直预测部分求平均来预测三角区域AGH中的像素。
通过将使用如本文所述的方法0和/或方法2的水平预测与使用方法0和/或方法2的垂直预测相组合的预测可被称为混合方法或方法2A。
如图10所示的三角区域BGI中的像素可以使用本文描述的混合方法或方法2A而被预测。例如,可以例如使用方法2来预测垂直预测部分。例如,可以使用方法0来预测水平预测部分。例如,可以使用方法2A来将方法0的水平预测与方法2的垂直预测进行组合,从而预测三角区域BGI中的像素。
位于图10中所示的无阴影区域上的剩余区域(未被三角区域AGH或BGI覆盖的剩余无阴影区域)中的像素可以使用方法0预测(例如,插值)。
可以基于非重构右侧和/或底部参考线(一个或多个)上的预测像素来预测所述当前块中的一个或多个像素。例如,插值方法可以使用以下等式中的一者或多者(例如,所有)。
Figure BDA0002130163960000171
Figure BDA0002130163960000172
Figure BDA0002130163960000173
等式(10)~(12)可以在插值处理中使用所述非重构右侧和/或底部参考线(一个或多个)(例如,Rx,N+1和/或RN+1,y)来预测当前块中的一个或多个像素。
图11A和11B示出了用于预测沿着非重构底部参考线和非重构右侧参考线的区段的像素的示例。例如,图11A中的像素‘E’可以是连接参考像素‘A’(例如,RN+1,0)和‘C’(例如,R0,2N)的直线与待预测的非重构底部参考线的截断点处的像素。像素‘X’可以是例如区段GE中的像素位置。该区段GE可以是待预测的非重构底部参考线的一部分。可以基于位于重构顶部参考线上的轴心参考像素‘A’和位于重构左侧参考线的延伸上的截断点参考像素‘P’来预测沿着区段GE的像素。可以绘制像素‘A’和‘X’之间的直线以截取位于重构左侧参考线的延伸上的截断点参考像素‘P’。该截断点参考像素‘P’可以是穿过像素‘A’和‘X’的直线与所述重构左侧参考线的延伸的截断点。‘P’处的像素值可以通过相邻像素的加权平均来确定。例如,‘P’处的像素值可以通过线性插值来确定。‘X’处的像素值可以通过对‘A’和‘P’处的像素进行加权平均来计算。在示例中,‘X’处的像素值可以通过使用线性插值对‘A’和‘P’处的像素进行加权平均来计算。在示例中,可以通过使用距像素‘X’的欧几里德距离对‘A’和‘P’处的像素进行加权平均来计算‘X’处的像素值。一旦预测了(例如,插值了)区段GE中的像素,就可以通过复制所述像素‘E’来获得非重构底部参考线中的剩余像素。
图11B示出了用于对非重构右侧参考线进行插值的示例。截断点参考像素‘F’可以是连接参考像素‘B’(例如,R0,N+1)和‘D’(例如,R2N,0)的直线与非重构右侧参考线的截断点。像素‘X’可以是例如区段HF中的像素位置。该区段HF可以是所述非重构右侧参考线的一部分。可以基于位于重构左侧参考线上的轴心参考像素‘B’和位于重构顶部参考线的延伸上的截断点参考像素‘Q’来预测沿着区段HF的像素。可以绘制像素‘B’和‘X’之间的直线以截取位于重构顶部参考线的延伸上的截断点参考像素‘Q’。像素‘Q’可以是穿过像素‘B’和‘X’的直线与重构顶部参考线的截断点。‘Q’处的像素值可以通过相邻像素的加权平均来确定。例如,‘Q’处的像素值可以通过线性插值来确定。‘X’处的像素值可以通过‘B’和‘Q’处的加权平均像素来计算。在示例中,‘X’处的像素值可以通过使用线性插值在′B′和‘Q’处的加权平均像素来计算。在示例中,‘X’处的像素值可以通过使用距像素‘X’的欧几里德距离的‘B’和‘Q’处的加权平均像素来计算。对于插值区段HF,沿着所述非重构右侧参考线的剩余像素可以通过复制像素‘F’来获得。
图12A和12B示出了分别基于重构顶部参考线的延伸(例如,区段AD)和重构左侧参考线的延伸(例如,区段BC)上的像素来预测非重构右侧参考线和非重构底部参考线的示例。本文描述的非重构右侧和底部参考线的预测方法可以称为方法4。例如,可以基于重构参考线的延伸上的轴心参考像素和另一个重构参考线以及该另一个重构参考线的延伸上的对应截断点参考像素来预测非重构右侧和底部参考线上的一个或多个像素。
如图12A所示,可以基于轴心参考像素‘C’和沿着重构顶部参考线及该重构顶部参考线的延伸的截断点参考像素‘P’来预测非重构底部参考线上的一个或多个像素。可以识别轴心参考像素。例如,轴心参考像素可以被识别为位于当前块的R0,2N中的像素‘C’。轴心参考像素‘C’可以位于重构左侧参考线的延伸上。可以从轴心参考像素‘C’穿过像素‘X’来投射直线。该从轴心参考像素‘C’穿过像素‘X’的直线可以在位于重构顶部参考线和该重构顶部参考线的延伸处上的截断点参考像素‘P’截断。‘P’处的像素值可以通过相邻像素的加权平均来获得。例如,‘P’处的像素值可以通过使用整数位置处的两个最近相邻像素的相邻像素的加权平均来获得。可以使用基于距像素‘X’的欧几里德距离的像素‘C’和‘P’的加权平均来预测‘X’处的像素值。
类似的,如图12B所示,可以基于轴心参考像素‘D’(例如,R2N,0)和重构左侧参考线及该重构左侧参考线的延伸上的截断点参考像素‘Q’来类似地预测非重构右侧参考线上的一个或多个像素。轴心参考像素‘D’可以位于重构顶部参考线的延伸部分上。
可以通过组合本文描述的一种或多种方法来预测非重构底部参考线和非重构右侧参考线,并且可以将其称为方法5。例如,非重构底部和顶部参考线可以被分成一个或多个部分。
图13A和13B示出了通过组合本文描述的一种或多种方法(例如,方法3和方法4)来预测非重构底部参考线的示例。图13C和13D示出了通过组合本文描述的一种或多种方法(例如,方法3和方法4)来预测非重构右侧参考线的示例。
可以分部分地预测非重构底部参考线。例如,可以分两个部分预测非重构底部参考线:分别如图13A和图13B所示的底部参考线的前半部分和剩余半部分。可以例如使用如图11A所示的方法3来预测非重构底部参考线的所选部分(例如,非重构底部参考线的前半部分)。可以例如使用如图12A所示的方法4来预测非重构底部参考线的剩余部分(例如,非重构底部参考线的剩余一半)。
类似地,可以分部分地预测非重构右侧参考线。例如,可以分两个部分中预测非重构右侧参考线:分别如图13C和图13D所示的非重构右侧参考线的前半部分和剩余半部分。可以例如使用如图11B所示的方法3来预测非重构右侧参考线的所选部分(例如,非重构右侧参考线的前半部分)。可以例如使用如图12B所示的方法4来预测非重构右侧参考线的剩余部分(例如,非重构右侧参考线的剩余一半)。可以预测当前块中的像素。例如,可以使用方法0和/或与本文描述的一个或多个(例如,所有)方法(例如,方法1、方法2、方法3、方法4和/或方法5)组合来预测当前块中的像素。
本文描述的插值方法可以与一种或多种方法组合以预测非重构底部和非重构右侧参考线。
图14示出了组合方法的示例(例如,方法1和方法3)并且可以被称为方法6。可以将当前块划分为上三角区域和下三角区域,如图14所示。例如,可以使用这里描述的方法1来预测上三角区域中的像素。可以例如使用本文描述的方法3来预测非重构底部和非重构右侧参考线。所预测的底部和右侧参考线可以用于预测下三角区域中的一个或多个像素。例如,可以通过基于等式(10)~(12)中的一者或多者(例如,所有)的方法来预测所述下三角区域。
图15示出了组合方法的示例(例如,方法2和方法3)并且可以被称为方法7。当前块可以被划分为上区域和下区域(例如,阴影区域或上区域和无阴影区域或下区域),如图15所示。可以使用本文描述的方法2来预测上区域中的像素。可以预测剩余下区域中的像素。在示例中,可以使用本文描述的方法3来预测剩余下区域中的像素。在示例中,可以使用本文描述的方法2A和方法3的组合来预测所述剩余下区域中的像素。
图16示出了组合方法的示例(例如,方法1和方法3),并且可以被称为方法8。例如,可以将当前块划分为上三角区域和下三角区域,如图16所示。例如,可以使用这里描述的方法1来预测上三角区域中的像素。可以例如使用本文描述的方法3来预测上三角区域中的像素。从方法1和方法3收集的两组预测像素(例如,样本)可以被平均。平均像素值可以是上三角区域中的最终像素。可以例如使用本文描述的方法3来预测下三角区域中的像素。
解码器可以检测并使用已经用于编码视频内容的这里描述的一个或多个平面模式方法(例如,方法0~方法8)。在示例中,解码器可以从编码器检测一个或多个平面模式方法。例如,编码器可以通过在比特流中用信号通知的信息来指示关于平面模式方法的使用的信息。编码器可以明确地用信号通知所述指示。在示例中,所述解码器可以导出关于平面模式方法的使用的信息。例如,解码器可以基于相邻的重构样本导出关于所述平面模式方法信息的使用。可以在编码器和/或解码器处执行导出关于平面模式方法的使用的信息。
可以在比特流中以CU和/或PU级别用信号通知指示符。例如,可以在比特流中用信号通知标志。所述比特流中的信号可以具有值(例如,0或1)以指示所述帧内平面方法。该值可以基于本文描述的一种或多种可用方法的使用的信息(例如,方法0~方法8)。例如,当使用本文描述的一个或多个帧内平面方法(例如,方法1~方法8)时,所述比特流中的信号可以具有值“1”。当使用方法0时,所述比特流中的信号可以具有值“0”。这里可以描述了用于信令的伪代码的示例:
Figure BDA0002130163960000211
Figure BDA0002130163960000221
用于色度帧内编码的直接模式可以对平面模式方法施加规则。例如,该规则可以基于亮度是否选择所述平面模式方法来限制所述平面模式方法用于色度。
四叉树二叉树(QTBT)结构可在帧内编码期间为亮度和色度PU使用独立的分区树。在示例中,色度和亮度PU可以不具有相同的分区结构。在示例中,所述色度和亮度PU可以使用相同的分区结构。当在QTBT框架中使用直接模式用于色度PU时,可以考虑色度PU的左上2×2单元的位置。相关联的亮度的帧内模式可以使用4×4单元来预测色度PU。当在QTBT框架中使用直接模式用于色度PU时,可以应用类似的规则来使用平面模式方法来从相关联的亮度预测色度。
可以使用65个帧内角度模式(如图8所示)以及DC和平面模式。可以用平面模式方法代替一个或多个帧内角度模式。
可以使用编码器离线编码不同的训练视频。可以确定帧内角度模式的平均出现频率。最不常用的帧内角度模式可以由平面模式方法代替。在帧内编码中,可以创建最可能模式(MPM)列表以包括最频繁使用的帧内模式。发信号通知MPM列表的相关联的索引可以由帧内模式利用。例如,可以将较频繁出现的帧内模式放置在更靠近MPM列表的开头的位置。可以修改所述MPM列表以包括将所述帧内平面模式方法包括作为所述列表的一部分。在示例中,所述平面模式方法(例如,方法1~方法8)可以是MPM列表中的第一条目。在示例中,所述平面模式方法可以位于所述MPM列表中的平面模式方法0之后。
编码器可以跳过可以指示正被使用的平面模式方法的信令。如果正被使用的一个或多个平面模式方法存在于可用方法之内,则编码器和/或解码器进行推导。例如,在帧内模式选择期间,编码器可以测试一个或多个(例如,所有)帧内模式方法。对于平面模式选择,编码器可以使用导出方法在本文描述的一个或多个平面方法(例如,方法1~方法8)和方法0之间进行选择以用于预测所述块(例如,当前块)。如果平面模式相比于一个或多个(例如,所有)其他帧内模式产生了最小速率失真(RD)成本,则编码器可以用信号通知该平面模式索引。例如,编码器可以发信号通知所述平面模式索引(例如,如HEVC标准中所定义的)。接收所述平面模式索引的解码器可以以与如本文所述的编码器类似的方式执行推导。该解码器可以在本文描述的一个或多个可用平面方法(例如,方法1~方法8)和方法0之间进行选择,以预测所述当前块。
图17示出了用于确定关于平面模式方法的使用的信息的推导过程的示例。图17中的目标例如可表示要使用平面模式编码的N×N CU。模板可以是当前块的顶部和左侧的区域,其包括重构参考像素(例如,具有NxL和LxN大小)。在示例中,模板大小‘L’可以基于当前块大小。例如,对于4x4和8x8块,模板大小可以是L=2。对于16x16块和/或更大的块,模板大小可以是L=4。在示例中,模板大小可以是固定的并且可以独立于当前块大小。模板的参考(例如,由图17中的虚线区域指示)可以指代所述模板上方和左侧的一组相邻像素。模板像素可以来自重构区域。当编码和/或解码目标块时,可以不重构所述模板的参考像素。可利用现有参考像素替换过程来用可用参考像素替换不可用参考像素。对于一个或多个(例如,所有)平面模式方法,所述推导过程可用于计算重构模板像素与从所述模板的参考像素获得的预测像素之间的绝对差之和(SAD)。可以选择产生最小SAD的平面模式作为用于预测所述目标块的平面模式。可以在编码器和解码器处以类似的方式应用如本文所述的选择平面模式。
当被应用于模板时,可以修改这里描述的平面模式方法(例如,方法1~方法8)。例如,在方法3~方法8中,当预测模板的非重构底部和非重构右侧参考线时,可以重新定位轴心参考像素。
图18示出了将在此描述的方法3应用于与当前块相关联的目标上方的模板的示例。对于当前块左侧的模板,可以进行修改。例如,当对非重构右侧参考线进行插值时,相关联的左下像素B’可以用作轴心参考像素,而不是像素B。类似地,像素A可以用于预测(例如,插值)非重构底部参考线。
图19示出了将模板的方法4应用于与当前块相关联的目标上方的模板和/或类似模板的示例。重构左侧参考线上的轴心参考像素可以位于模板高度的两倍(例如,2*L)的像素C’处。像素C’可以用于预测(例如,插值)非重构底部参考线。轴心参考像素D可以用于对非重构右侧参考线进行插值。
图20A是示出了可以实施一个或多个所公开的实施例的例示通信系统100的示图。该通信系统100可以是为多个无线用户提供语音、数据、视频、消息传递、广播等内容的多址接入系统。该通信系统100可以通过共享包括无线带宽在内的系统资源而使多个无线用户能够接入此类内容。举例来说,通信系统100可以使用一种或多种信道接入方法,例如码分多址(CDMA)、时分多址(TDMA)、频分多址(FDMA)、正交FDMA(OFDMA)、单载波FDMA(SC-FDMA)、零尾唯一字DFT扩展OFDM(ZT UW DTS-s OFDM)、唯一字OFDM(UW-OFDM)、资源块过滤OFDM以及滤波器组多载波(FBMC)等等。
如图20A所示,通信系统100可以包括无线发射/接收单元(WTRU)102a、102b、102c、102d、RAN 104/113、CN106/115、公共交换电话网络(PSTN)108、因特网110以及其他网络112,然而应该了解,所公开的实施例设想了任意数量的WTRU、基站、网络和/或网络部件。每一个WTRU 102a、102b、102c、102d可以是被配置成在无线环境中工作和/或通信的任何类型的设备。举例来说,任一WTRU 102a、102b、102c、102d都可被称为“站”和/或“STA”,其可以被配置成发射和/或接收无线信号,并且可以包括用户设备(UE)、移动站、固定或移动订户单元、基于签约的单元、寻呼机、蜂窝电话、个人数字助理(PDA)、智能电话、膝上型计算机、上网本、个人计算机、无线传感器、热点或Mi-Fi设备、物联网(IoT)设备、手表或其他可穿戴设备、头戴显示器(HMD)、车辆、无人机、医疗设备和应用(例如远程手术)、工业设备和应用(例如机器人和/或在工业和/或自动处理链环境中工作的其他无线设备)、消费类电子设备、以及在商业和/或工业无线网络上工作的设备等等。WTRU 102a、102b、102c、102d中的任意者可被可交换地称为UE。
通信系统100还可以包括基站114a和/或基站114b。每一个基站114a、114b可以是被配置成通过以无线方式与WTRU 102a、102b、102c、102d中的至少一个无线对接来促使其接入一个或多个通信网络(例如CN 106/115、因特网110、和/或其他网络112)的任何类型的设备。举例来说,基站114a、114b可以是基地收发信台(BTS)、节点B、e节点B、家庭节点B、家庭e节点B、gNB、NR节点B、站点控制器、接入点(AP)、以及无线路由器等等。虽然每一个基站114a、114b都被描述成了单个部件,然而应该了解。基站114a、114b可以包括任何数量的互连基站和/或网络部件。
基站114a可以是RAN 104/113的一部分,并且所述RAN还可以包括其他基站和/或网络部件(未显示),例如基站控制器(BSC)、无线电网络控制器(RNC)、中继节点等等。基站114a和/或基站114b可被配置成在名为小区(未显示)的一个或多个载波频率上发射和/或接收无线信号。这些频率可以处于授权频谱、无授权频谱或是授权与无授权频谱的组合之中。小区可以为相对固定或者有可能随时间变化的特定地理区域提供无线服务覆盖。小区可被进一步分成小区扇区。例如,与基站114a相关联的小区可被分为三个扇区。由此,在一个实施例中,基站114a可以包括三个收发信机,也就是说,每一个收发信机都对应于小区的一个扇区。在实施例中,基站114a可以使用多输入多输出(MIMO)技术,并且可以为小区的每一个扇区使用多个收发信机。举例来说,通过使用波束成形,可以在期望的空间方向上发射和/或接收信号。
基站114a、114b可以通过空中接口116来与WTRU 102a、102b、102c、102d中的一者或多者进行通信,其中所述空中接口可以是任何适当的无线通信链路(例如射频(RF)、微波、厘米波、微米波、红外线(IR)、紫外线(UV)、可见光等等)。空中接口116可以使用任何适当的无线电接入技术(RAT)来建立。
更具体地说,如上所述,所述通信系统100可以是多址接入系统,并且可以使用一种或多种信道接入方案,例如CDMA、TDMA、FDMA、OFDMA以及SC-FDMA等等。例如,RAN 104/113中的基站114a与WTRU 102a、102b、102c可以实施某种无线电技术,例如通用移动电信系统(UMTS)陆地无线电接入(UTRA),其中所述技术可以使用宽带CDMA(WCDMA)来建立空中接口115/116/117。WCDMA可以包括如高速分组接入(HSPA)和/或演进型HSPA(HSPA+)之类的通信协议。HSPA可以包括高速下行链路(DL)分组接入(HSDPA)和/或高速UL分组接入(HSUPA)。
在实施例中,基站114a和WTRU 102a、102b、102c可以实施某种无线电技术,例如演进型UMTS陆地无线电接入(E-UTRA),其中所述技术可以使用长期演进(LTE)和/或先进LTE(LTE-A)和/或先进LTA Pro(LTE-APro)来建立空中接口116。
在实施例中,基站114a和WTRU 102a、102b、102c可以实施某种无线电技术,例如NR无线电接入,其中所述无线电技术可以使用新型无线电(NR)来建立空中接口116。
在实施例中,基站114a和WTRU 102a、102b、102c可以实施多种无线电接入技术。举例来说,基站114a和WTRU 102a、102b、102c可以共同实施LTE无线电接入和NR无线电接入(例如使用双连接(DC)原理)。由此,WTRU 102a、102b、102c使用的空中接口可以通过多种类型的无线电接入技术和/或向/从多种类型的基站(例如eNB和gNB)发送的传输来表征。
在其他实施例中,基站114a和WTRU 102a、102b、102c可以实施以下的无线电技术,例如IEEE 802.11(即无线高保真(WiFi))、IEEE 802.16(全球微波接入互操作性(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000EV-DO、临时标准2000(IS-2000)、临时标准95(IS-95)、临时标准856(IS-856)、全球移动通信系统(GSM)、用于GSM演进的增强数据速率(EDGE)以及GSM EDGE(GERAN)等等。
图20A中的基站114b可以是无线路由器、家庭节点B、家庭e节点B或接入点,并且可以使用任何适当的RAT来促成局部区域中的无线连接,例如营业场所、住宅、车辆、校园、工业设施、空中走廊(例如供无人机使用)以及道路等等。在一个实施例中,基站114b与WTRU102c、102d可以通过实施IEEE 802.11之类的无线电技术来建立无线局域网(WLAN)。在实施例中,基站114b与WTRU 102c、102d可以通过实施IEEE 802.15之类的无线电技术来建立无线个人局域网(WPAN)。在再一实施例中,基站114b和WTRU 102c、102d可通过使用基于蜂窝的RAT(例如WCDMA、CDMA2000、GSM、LTE、LTE-A、LTE-A Pro、NR等等)来建立微微小区或毫微微小区。如图20A所示,基站114b可以直连到因特网110。由此,基站114b不需要经由CN 106/115来接入因特网110。
RAN 104/113可以与CN 106/115进行通信,其中所述CN可以是被配置成向一个或多个WTRU 102a、102b、102c、102d提供语音、数据、应用和/或借助网际协议语音(VoIP)服务的任何类型的网络。该数据可以具有不同的服务质量(QoS)需求,例如不同的吞吐量需求、延时需求、容错需求、可靠性需求、数据吞吐量需求、以及移动性需求等等。CN 106/115可以提供呼叫控制、记账服务、基于移动位置的服务、预付费呼叫、因特网连接、视频分发等等,和/或可以执行用户验证之类的高级安全功能。虽然在图20A中没有显示,然而应该了解,RAN 104/113和/或CN 106/115可以直接或间接地和其他那些与RAN 104/113使用相同RAT或不同RAT的RAN进行通信。例如,除了与使用NR无线电技术的RAN 104/113相连之外,CN106/115还可以与使用GSM、UMTS、CDMA 2000、WiMAX、E-UTRA或WiFi无线电技术的别的RAN(未显示)通信。
CN 106/115还可以充当供WTRU 102a、102b、102c、102d接入PSTN 108、因特网110和/或其他网络112的网关。PSTN 108可以包括提供简易老式电话服务(POTS)的电路交换电话网络。因特网110可以包括使用了公共通信协议(例如TCP/IP网际协议族中的传输控制协议(TCP)、用户数据报协议(UDP)和/或网际协议(IP))的全球性互联计算机网络设备系统。网络112可以包括由其他服务供应商拥有和/或运营的有线和/或无线通信网络。例如,网络112可以包括与一个或多个RAN相连的另一个CN,其中所述一个或多个RAN可以与RAN 104/113使用相同RAT或不同RAT。
通信系统100中一些或所有WTRU 102a、102b、102c、102d可以包括多模能力(例如,WTRU 102a、102b、102c、102d可以包括在不同无线链路上与不同无线网络通信的多个收发信机)。例如,图20A所示的WTRU 102c可被配置成与可以使用基于蜂窝的无线电技术的基站114a通信,以及与可以使用IEEE 802无线电技术的基站114b通信。
图20B是示出了例示WTRU 102的系统图示。如图20B所示,WTRU 102可以包括处理器118、收发信机120、发射/接收部件122、扬声器/麦克风124、键盘126、显示器/触摸板128、不可移除存储器130、可移除存储器132、电源134、全球定位系统(GPS)芯片组136和/或其他周边设备138。应该了解的是,在保持符合实施例的同时,WTRU 102还可以包括前述部件的任何子组合。
处理器118可以是通用处理器、专用处理器、常规处理器、数字信号处理器(DSP)、多个微处理器、与DSP核心关联的一个或多个微处理器、控制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、其他任何类型的集成电路(IC)以及状态机等等。处理器118可以执行信号编码、数据处理、功率控制、输入/输出处理、和/或其他任何能使WTRU102在无线环境中工作的功能。处理器118可以耦合至收发信机120,收发信机120可以耦合至发射/接收部件122。虽然图20B将处理器118和收发信机120描述成单独组件,然而应该了解,处理器118和收发信机120也可以集成在一个电子组件或芯片中。
发射/接收部件122可被配置成经由空中接口116来发射或接收去往或来自基站(例如基站114a)的信号。举个例子,在一个实施例中,发射/接收部件122可以是被配置成发射和/或接收RF信号的天线。作为示例,在实施例中,发射/接收部件122可以是被配置成发射和/或接收IR、UV或可见光信号的放射器/检测器。在实施例中,发射/接收部件122可被配置成发射和/或接收RF和光信号。应该了解的是,发射/接收部件122可以被配置成发射和/或接收无线信号的任何组合。
虽然在图20B中将发射/接收部件122描述成是单个部件,但是WTRU 102可以包括任何数量的发射/接收部件122。更具体地说,WTRU 102可以使用MIMO技术。由此,在实施例中,WTRU 102可以包括两个或多个通过空中接口116来发射和接收无线电信号的发射/接收部件122(例如多个天线)。
收发信机120可被配置成对发射/接收部件122所要传送的信号进行调制,以及对发射/接收部件122接收的信号进行解调。如上所述,WTRU 102可以具有多模能力。因此,收发信机120可以包括允许WTRU 102借助多种RAT(例如NR和IEEE 802.11)来进行通信的多个收发信机。
WTRU 102的处理器118可以耦合到扬声器/麦克风124、键盘126和/或显示器/触摸板128(例如液晶显示器(LCD)显示单元或有机发光二极管(OLED)显示单元),并且可以接收来自这些部件的用户输入数据。处理器118还可以向扬声器/麦克风124、键盘126和/或显示器/触摸板128输出用户数据。此外,处理器118可以从诸如不可移除存储器130和/或可移除存储器132之类的任何适当的存储器中存取信息,以及将信息存入这些存储器。不可移除存储器130可以包括随机存取存储器(RAM)、只读存储器(ROM)、硬盘或是其他任何类型的记忆存储设备。可移除存储器132可以包括订户身份模块(SIM)卡、记忆棒、安全数字(SD)记忆卡等等。在其他实施例中,处理器118可以从那些并非实际位于WTRU 102的存储器存取信息,以及将数据存入这些存储器,作为示例,此类存储器可以位于服务器或家庭计算机(未显示)。
处理器118可以接收来自电源134的电力,并且可被配置分发和/或控制用于WTRU102中的其他组件的电力。电源134可以是为WTRU 102供电的任何适当设备。例如,电源134可以包括一个或多个干电池组(如镍镉(Ni-Cd)、镍锌(Ni-Zn)、镍氢(NiMH)、锂离子(Li-ion)等等)、太阳能电池以及燃料电池等等。
处理器118还可以耦合到GPS芯片组136,该芯片组可被配置成提供与WTRU 102的当前位置相关的位置信息(例如经度和纬度)。作为来自GPS芯片组136的信息的补充或替换,WTRU 102可以经由空中接口116接收来自基站(例如基站114a、114b)的位置信息,和/或根据从两个或更多个附近基站接收的信号定时来确定其位置。应该了解的是,在保持符合实施例的同时,WTRU 102可以借助任何适当的定位方法来获取位置信息。
处理器118还可以耦合到其他周边设备138,其中所述周边设备可以包括提供附加特征、功能和/或有线或无线连接的一个或多个软件和/或硬件模块。例如,周边设备138可以包括加速度计、电子指南针、卫星收发信机、数码相机(用于照片和/或视频)、通用串行总线(USB)端口、振动设备、电视收发信机、免提耳机、
Figure BDA0002130163960000311
模块、调频(FM)无线电单元、数字音乐播放器、媒体播放器、视频游戏机模块、因特网浏览器、虚拟现实和/或增强现实(VR/AR)设备、以及活动跟踪器等等。周边设备138可以包括一个或多个传感器,所述传感器可以是以下的一个或多个:陀螺仪、加速度计、霍尔效应传感器、磁强计、方位传感器、邻近传感器、温度传感器、时间传感器、地理位置传感器、高度计、光传感器、触摸传感器、磁力计、气压计、手势传感器、生物测定传感器和/或湿度传感器。
WTRU 102可以包括全双工无线电设备,其中对于该无线电设备来说,一些或所有信号(例如与用于UL(例如对传输而言)和下行链路(例如对接收而言)的特定子帧相关联)的接收或传输可以是并发和/或同时的。全双工无线电设备可以包括借助于硬件(例如扼流线圈)或是凭借处理器(例如单独的处理器(未显示)或是凭借处理器118)的信号处理来减小和/或基本消除自干扰的干扰管理单元。在实施例中,WTRU 102可以包括传送和接收一些或所有信号(例如与用于UL(例如对传输而言)或下行链路(例如对接收而言)的特定子帧相关联)的半双工无线电设备。
图20C是示出了根据实施例的RAN 104和CN 106的系统图示。如上所述,RAN 104可以在空中接口116上使用E-UTRA无线电技术来与WTRU 102a、102b、102c进行通信。所述RAN104还可以与CN 106进行通信。
RAN 104可以包括e节点B 160a、160b、160c,然而应该了解,在保持符合实施例的同时,RAN 104可以包括任何数量的e节点B。每一个e节点B 160a、160b、160c都可以包括在空中接口116上与WTRU 102a、102b、102c通信的一个或多个收发信机。在一个实施例中,e节点B 160a、160b、160c可以实施MIMO技术。由此,举例来说,e节点B 160a可以使用多个天线来向WTRU 102a发射无线信号,和/或接收来自WTRU 102a的无线信号。
每一个e节点B 160a、160b、160c都可以关联于一个特定小区(未显示),并且可被配置成处理无线电资源管理决策、切换决策、UL和/或DL中的用户调度等等。如图20C所示,e节点B 160a、160b、160c彼此可以通过X2接口进行通信。
图20C所示的CN 106可以包括移动性管理实体(MME)162、服务网关(SGW)164以及分组数据网络(PDN)网关(或PGW)166。虽然前述的每一个部件都被描述成是CN 106的一部分,然而应该了解,这其中的任一部件都可以由CN运营商之外的实体拥有和/或运营。
MME 162可以经由S1接口连接到RAN 104中的每一个e节点B 162a、162b、162c,并且可以充当控制节点。例如,MME 142可以负责验证WTRU 102a、102b、102c的用户,执行承载激活/去激活处理,以及在WTRU 102a、102b、102c的初始附着过程中选择特定的服务网关等等。MME 162还可以提供一个用于在RAN 104与使用其他无线电技术(例如GSM和/或WCDMA)的其他RAN(未显示)之间进行切换的控制平面功能。
SGW 164可以经由S1接口连接到RAN 104中的每一个e节点B 160a、160b、160c。SGW164通常可以路由和转发去往/来自WTRU 102a、102b、102c的用户数据分组。并且,SGW 164还可以执行其他功能,例如在eNB间的切换过程中锚定用户平面,在DL数据可供WTRU 102a、102b、102c使用时触发寻呼处理,以及管理并存储WTRU 102a、102b、102c的上下文等等。
SGW 164可以连接到PGW 166,所述PGW可以为WTRU 102a、102b、102c提供分组交换网络(例如因特网110)接入,以便促成WTRU 102a、102b、102c与启用IP的设备之间的通信。
CN 106可以促成与其他网络的通信。例如,CN 106可以为WTRU 102a、102b、102c提供电路交换网络(例如PSTN 108)接入,以便促成WTRU 102a、102b、102c与传统的陆线通信设备之间的通信。例如,CN 106可以包括一个IP网关(例如IP多媒体子系统(IMS)服务器)或与之进行通信,并且该IP网关可以充当CN 106与PSTN 108之间的接口。此外,CN 106可以为WTRU 102a、102b、102c提供针对其他网络112的接入,其中该网络可以包括其他服务供应商拥有和/或运营的其他有线和/或无线网络。
虽然在图20A-20D中将WTRU描述成了无线终端,然而应该想到的是,在某些典型实施例中,此类终端与通信网络可以使用(例如临时或永久性)有线通信接口。
在典型实施例中,所述其他网络112可以是WLAN。
采用基础架构基本服务集(BSS)模式的WLAN可以具有用于所述BSS的接入点(AP)以及与所述AP相关联的一个或多个站(STA)。所述AP可以接入或是对接到分布式系统(DS)或是将业务量送入和/或送出BSS的别的类型的有线/无线网络。源于BSS外部且去往STA的业务量可以通过AP到达并被递送至STA。源自STA且去往BSS外部的目的地的业务量可被发送至AP,以便递送到相应的目的地。处于BSS内部的STA之间的业务量可以通过AP来发送,例如源STA可以向AP发送业务量并且AP可以将业务量递送至目的地STA。处于BSS内部的STA之间的业务量可被认为和/或称为点到点业务量。所述点到点业务量可以在源与目的地STA之间(例如在其间直接)用直接链路建立(DLS)来发送。在某些典型实施例中,DLS可以使用802.11e DLS或802.11z通道化DLS(TDLS)。使用独立BSS(IBSS)模式的WLAN可不具有AP,并且处于所述IBSS内部或是使用所述IBSS的STA(例如所有STA)彼此可以直接通信。在这里,IBSS通信模式有时可被称为“自组织(ad-hoc)”通信模式。
在使用802.11ac基础设施工作模式或类似的工作模式时,AP可以在固定信道(例如主信道)上传送信标。所述主信道可以具有固定宽度(例如20MHz的带宽)或是借助信令动态设置的宽度。主信道可以是BSS的工作信道,并且可被STA用来与AP建立连接。在某些典型实施例中,所实施的可以是具有冲突避免的载波感测多址接入(CSMA/CA)(例如在802.11系统中)。对于CSMA/CA来说,包括AP在内的STA(例如每一个STA)可以感测主信道。如果特定STA感测到/检测到和/或确定主信道繁忙,那么所述特定STA可以回退。在指定的BSS中,在任何指定时间可有一个STA(例如只有一个站)进行传输。
高吞吐量(HT)STA可以使用宽度为40MHz的信道来进行通信(例如借助于将宽度为20MHz的主信道与宽度为20MHz的相邻或不相邻信道相结合来形成宽度为40MHz的信道)。
甚高吞吐量(VHT)STA可以支持宽度为20MHz、40MHz、80MHz和/或160MHz的信道。40MHz和/或80MHz信道可以通过组合连续的20MHz信道来形成。160MHz信道可以通过组合8个连续的20MHz信道或者通过组合两个不连续的80MHz信道(这种组合可被称为80+80配置)来形成。对于80+80配置来说,在信道编码之后,数据可被传递并经过一个分段解析器,所述分段解析器可以将数据非成两个流。在每一个流上可以单独执行反向快速傅里叶变换(IFFT)处理以及时域处理。所述流可被映射在两个80MHz信道上,并且数据可以由执行传输的STA来传送。在执行接收的STA的接收机上,用于80+80配置的上述操作可以是相反的,并且组合数据可被发送至介质接入控制(MAC)。
802.11af和802.11ah支持1GHz以下的工作模式。与802.11n和802.11ac相比,在802.11af和802.11ah中使用信道工作带宽和载波有所缩减。802.11af在TV白空间(TVWS)频谱中支持5MHz、10MHz和20MHz带宽,并且802.11ah支持使用非TVWS频谱的1MHz、2MHz、4MHz、8MHz和16MHz带宽。根据某些典型实施例,802.11ah可以支持仪表类型控制/机器类型通信(例如宏覆盖区域中的MTC设备)。MTC可以具有某种能力,例如包含了支持(例如只支持)某些和/或有限带宽在内的受限能力。MTC设备可以包括电池,并且该电池的电池寿命高于阈值(例如用于保持很长的电池寿命)。
对于可以支持多个信道和信道带宽的WLAN系统(例如,802.11n、802.11ac、802.11af以及802.11ah)来说,所述WLAN系统包括一个可被指定成主信道的信道。所述主信道的带宽可以等于BSS中的所有STA所支持的最大公共工作带宽。主信道的带宽可以由某一个STA设置和/或限制,其中所述STA源自在支持最小带宽工作模式的BSS中工作的所有STA。在关于802.11ah的示例中,即使BSS中的AP和其他STA支持2MHz、4MHz、8MHz、16MHz和/或其他信道带宽工作模式,但对支持(例如只支持)1MHz模式的STA(例如MTC类型的设备)来说,主信道的宽度可以是1MHz。载波感测和/或网络分配矢量(NAV)设置可以取决于主信道的状态。如果主信道繁忙(例如因为STA(其只支持1MHz工作模式)对AP进行传输),那么即使大多数的频带保持空闲并且可供使用,也可以认为整个可用频带繁忙。
在美国,可供802.11ah使用的可用频带是902MHz到928MHz。在韩国,可用频带是917.5MHz到923.5MHz。在日本,可用频带是916.5MHz到927.5MHz。依照国家码,可用于802.11ah的总带宽是6MHz到26MHz。
图20D是示出了根据实施例的RAN 113和CN 115的系统图示。如上所述,RAN 113可以在空中接口116上使用NR无线电技术来与WTRU 102a、102b、102c进行通信。RAN 113还可以与CN 115进行通信。
RAN 113可以包括gNB 180a、180b、180c,但是应该了解,在保持符合实施例的同时,RAN 113可以包括任何数量的gNB。每一个gNB 180a、180b、180c都可以包括一个或多个收发信机,以便通过空中接口116来与WTRU 102a、102b、102c通信。在一个实施例中,gNB180a、180b、180c可以实施MIMO技术。例如,gNB 180a、180b可以使用波束成形处理来向和/或从gNB 180a、180b、180c发射和/或接收信号。由此,举例来说,gNB 180a可以使用多个天线来向WTRU 102a发射无线信号,和/或接收来自WTRU 102a的无线信号。在实施例中,gNB180a、180b、180c可以实施载波聚合技术。例如,gNB 180a可以向WTRU 102a传送多个分量载波(未显示)。这些分量载波的一个子集可以处于无授权频谱上,而剩余分量载波则可以处于授权频谱上。在实施例中,gNB 180a、180b、180c可以实施协作多点(CoMP)技术。例如,WTRU 102a可以接收来自gNB 180a和gNB 180b(和/或gNB 180c)的协作传输。
WTRU 102a、102b、102c可以使用与可扩缩数字配置相关联的传输来与gNB 180a、180b、180c进行通信。例如,对于不同的传输、不同的小区和/或不同的无线传输频谱部分来说,OFDM符号间隔和/或OFDM子载波间隔可以是不同的。WTRU 102a、102b、102c可以使用具有不同或可扩缩长度的子帧或传输时间间隔(TTI)(例如包含了不同数量的OFDM符号和/或持续变化的绝对时间长度)来与gNB 180a、180b、180c进行通信。
gNB 180a、180b、180c可被配置成与采用独立配置和/或非独立配置的WTRU 102a、102b、102c进行通信。在独立配置中,WTRU 102a、102b、102c可以在不接入其他RAN(例如e节点B 160a、160b、160c)的情况下与gNB 180a、180b、180c进行通信。在独立配置中,WTRU102a、102b、102c可以使用gNB 180a、180b、180c中的一者或多者作为移动锚点。在独立配置中,WTRU 102a、102b、102c可以使用无授权频带中的信号来与gNB 180a、180b、180c进行通信。在非独立配置中,WTRU 102a、102b、102c会在与别的RAN(例如e节点B 160a、160b、160c)进行通信/相连的同时与gNB 180a、180b、180c进行通信/相连。举例来说,WTRU 102a、102b、102c可以通过实施DC原理而以基本同时的方式与一个或多个gNB 180a、180b、180c以及一个或多个e节点B 160a、160b、160c进行通信。在非独立配置中,e节点B 160a、160b、160c可以充当WTRU 102a、102b、102c的移动锚点,并且gNB 180a、180b、180c可以提供附加的覆盖和/或吞吐量,以便为WTRU 102a、102b、102c提供服务。
每一个gNB 180a、180b、180c都可以关联于特定小区(未显示),并且可以被配置成处理无线电资源管理决策、切换决策、UL和/或DL中的用户调度、支持网络切片、实施双连接性、实施NR与E-UTRA之间的互通处理、路由去往用户平面功能(UPF)184a、184b的用户平面数据、以及路由去往接入和移动性管理功能(AMF)182a、182b的控制平面信息等等。如图20D所示,gNB 180a、180b、180c彼此可以通过Xn接口通信。
图20D所示的CN 115可以包括至少一个AMF 182a、182b,至少一个UPF 184a、184b,至少一个会话管理功能(SMF)183a、183b,并且有可能包括数据网络(DN)185a、185b。虽然每一个前述部件都被描述了CN 115的一部分,但是应该了解,这其中的任一部件都可以被CN运营商之外的其他实体拥有和/或运营。
AMF 182a、182b可以经由N2接口连接到RAN 113中的一者或多者gNB 180a、180b、180c,并且可以充当控制节点。例如,AMF 182a、182b可以负责验证WTRU 102a、102b、102c的用户,支持网络切片(例如处理具有不同需求的不同PDU会话),选择特定的SMF 183a、183b,管理注册区域,终止NAS信令,以及移动性管理等等。AMF 182a、1823b可以使用网络切片处理,以便基于WTRU 102a、102b、102c使用的服务类型来定制为WTRU 102a、102b、102c提供的CN支持。举例来说,针对不同的使用情况,可以建立不同的网络切片,所述使用情况例如为依赖于超可靠低延时(URLLC)接入的服务、依赖于增强型大规模移动宽带(eMBB)接入的服务、和/或用于机器类型通信(MTC)接入的服务等等。AMF 162可以提供用于在RAN 113与使用其他无线电技术(例如LTE、LTE-A、LTE-A Pro和/或诸如WiFi之类的非3GPP接入技术)的其他RAN(未显示)之间切换的控制平面功能。
SMF 183a、183b可以经由N11接口连接到CN 115中的AMF 182a、182b。SMF 183a、183b还可以经由N4接口连接到CN 115中的UPF 184a、184b。SMF 183a、183b可以选择和控制UPF 184a、184b,并且可以通过UPF 184a、184b来配置业务量路由。SMF 183a、183b可以执行其他功能,例如管理和分配UE IP地址,管理PDU会话,控制策略实施和QoS,以及提供下行链路数据通知等等。PDU会话类型可以是基于IP的、不基于IP的、以及基于以太网的等等。
UPF 184a、184b可以经由N3接口连接到RAN 113中的一者或多者gNB 180a、180b、180c,这样可以为WTRU 102a、102b、102c提供对分组交换网络(例如因特网110)的接入,以便促成WTRU 102a、102b、102c与启用IP的设备之间的通信,UPF 184、184b可以执行其他功能,例如路由和转发分组、实施用户平面策略、支持多宿主PDU会话、处理用户平面QoS、缓冲下行链路分组、以及提供移动性锚定处理等等。
CN 115可以促成与其他网络的通信。例如,CN 115可以包括或者可以与充当CN115与PSTN 108之间的接口的IP网关(例如IP多媒体子系统(IMS)服务器)进行通信。此外,CN 115可以为WTRU 102a、102b、102c提供针对其他网络112的接入,这其中可以包括其他服务供应商拥有和/或运营的其他有线和/或无线网络。在一个实施例中,WTRU 102a、102b、102c可以经由对接到UPF 184a、184b的N3接口以及介于UPF 184a、184b与本地数据网络(DN)185a、185b之间的N6接口并通过UPF 184a、184b连接到DN 185a、185b。
有鉴于图20A-20D以及关于图20A-20D的相应描述,在这里对照以下的一项或多项描述的一个或多个或所有功能可以由一个或多个仿真设备(未显示)来执行:WTRU 102a-d、基站114a-b、e节点B 160a-c、MME 162、SGW 164、PGW 166、gNB 180a-c、AMF 182a-b、UPF184a-b、SMF 183a-b、DN 185a-b和/或这里描述的其他任何设备(一个或多个)。这些仿真设备可以是被配置成模拟这里一个或多个或所有功能的一个或多个设备。举例来说,这些仿真设备可用于测试其他设备和/或模拟网络和/或WTRU功能。
仿真设备可被设计成在实验室环境和/或运营商网络环境中实施关于其他设备的一项或多项测试。例如,所述一个或多个仿真设备可以在被完全或部分作为有线和/或无线通信网络一部分实施和/或部署的同时执行一个或多个或所有功能,以便测试通信网络内部的其他设备。所述一个或多个仿真设备可以在被临时作为有线和/或无线通信网络的一部分实施/部署的同时执行一个或多个或所有功能。所述仿真设备可以直接耦合到别的设备以执行测试,和/或可以使用空中无线通信来执行测试。
所述一个或多个仿真设备可以在未被作为有线和/或无线通信网络一部分实施/部署的同时执行包括所有功能在内的一个或多个功能。例如,所述仿真设备可以在测试实验室和/或未被部署(例如测试)的有线和/或无线通信网络的测试场景中使用,以便实施关于一个或多个组件的测试。所述一个或多个仿真设备可以是测试设备。所述仿真设备可以使用直接的RF耦合和/或借助了RF电路(作为示例,该电路可以包括一个或多个天线)的无线通信来发射和/或接收数据。

Claims (22)

1.一种解码方法,包括:
获取当前块,所述当前块与第一重构参考线、第二重构参考线和待预测的第三参考线接界;
识别与所述当前块接界的所述第一重构参考线的延伸上的轴心参考像素,所述延伸包括延伸超出所述当前块的多个重构像素;
通过基于位于所述第二重构参考线上的多个对应参考像素和位于与所述当前块接界的所述第一重构参考线的所述延伸上的所识别出的轴心参考像素而进行插值,预测所述第三参考线上的多个像素,其中所述多个对应参考像素与所述当前块接界;以及
基于与所述当前块接界的所述第三参考线上的所述多个预测像素,解码所述当前块的像素。
2.一种编码方法,包括:
获取当前块,所述当前块与第一重构参考线、第二重构参考线和待预测的第三参考线接界;
识别与所述当前块接界的所述第一重构参考线的延伸上的轴心参考像素,所述延伸包括延伸超出所述当前块的多个重构像素;
通过基于位于所述第二重构参考线上的多个对应参考像素和位于与所述当前块接界的所述第一重构参考线的所述延伸上的所识别出的轴心参考像素而进行插值,预测所述第三参考线上的多个像素,其中所述多个对应参考像素与所述当前块接界;以及
通过使用与所述当前块接界的所述第三参考线上的所述多个预测像素,编码所述当前块的像素。
3.根据权利要求1或2所述的方法,其中预测所述第三参考线上的所述多个像素还包括:
对于所述第三参考线上的像素,识别所述第二重构参考线上的对应参考像素;以及
基于所述第二重构参考线上的所述对应参考像素的值和所述轴心参考像素的值,对所述第三参考线上的所述像素的预测值进行插值。
4.根据权利要求1或2所述的方法,其中所述第三参考线位于所述当前块的所述第二重构参考线的相对侧。
5.根据权利要求1或2所述的方法,其中所述当前块包括预测单元。
6.根据权利要求1或2所述的方法,还包括使用以下至少一者预测所述当前块的第二像素:与所述当前块相关联的所述第三参考线上的所述多个预测像素、所述第一重构参考线上的多个像素、或者所述第二重构参考线上的多个像素。
7.根据权利要求1或2所述的方法,其中所述轴心参考像素是基于确定所述当前块的预测模式是平面参考线延伸预测模式而被识别的。
8.根据权利要求1所述的方法,其中所述轴心参考像素是基于确定所述当前块的预测模式是平面参考线延伸预测模式而被识别的,所述当前块的所述预测模式基于视频数据中的指示而被确定。
9.根据权利要求7所述的方法,其中所述当前块的所述预测模式通过导出所述预测模式而被确定。
10.根据权利要求1或2所述的方法,其中延伸超出所述当前块的所述多个重构像素属于相邻块。
11.根据权利要求1或2所述的方法,进一步包括:
通过复制所述第三参考线上的所述多个预测像素之一,预测所述第三参考线上的第二多个像素;以及
基于与所述当前块接界的所述第三参考线上的所述第二多个像素,解码所述当前块的第二像素。
12.一种用于视频解码的设备,包括:
处理器,被配置为:
获取当前块,所述当前块与第一重构参考线、第二重构参考线和待预测的第三参考线接界;
识别位于与所述当前块接界的所述第一重构参考线的延伸上的轴心参考像素,所述延伸包括延伸超出所述当前块的多个重构像素;
通过基于位于所述第二重构参考线上的多个对应参考像素和位于与所述当前块接界的所述第一重构参考线的所述延伸上的所识别出的轴心参考像素而进行插值,预测所述第三参考线上的多个像素,其中所述多个对应参考像素与所述当前块接界;以及
基于与所述当前块接界的所述第三参考线上的所述多个预测像素,解码所述当前块的像素。
13.一种用于视频编码的设备,包括:
处理器,被配置为:
获取当前块,所述当前块与第一重构参考线、第二重构参考线和待预测的第三参考线接界;
识别位于与所述当前块接界的所述第一重构参考线的延伸上的轴心参考像素,所述延伸包括延伸超出所述当前块的多个重构像素;
通过基于位于所述第二重构参考线上的多个对应参考像素和位于与所述当前块接界的所述第一重构参考线的所述延伸上的所识别出的轴心参考像素而进行插值,预测所述第三参考线上的多个像素,其中所述多个对应参考像素与所述当前块接界;以及
通过使用与所述当前块接界的所述第三参考线上的所述多个预测像素,编码所述当前块的像素。
14.根据权利要求12或13所述的设备,其中用于预测所述第三参考线上的所述多个像素的处理器还被配置为:
对于所述第三参考线上的像素,识别所述第二重构参考线上的对应参考像素;以及
基于所述第二重构参考线上的所述对应参考像素的值和所述轴心参考像素的值,对所述第三参考线上的所述像素的预测值进行插值。
15.根据权利要求12或13所述的设备,其中所述第三参考线位于所述当前块的所述第二重构参考线的相对侧。
16.根据权利要求12或13所述的设备,其中所述当前块包括预测单元。
17.根据权利要求12或13所述的设备,还包括使用以下至少一者预测所述当前块的第二像素:与所述当前块相关联的所述第三参考线上的所述多个预测像素、所述第一重构参考线上的多个像素、或者所述第二重构参考线上的多个像素。
18.根据权利要求12或13所述的设备,其中所述轴心参考像素基于所述处理器被配置为确定所述当前块的预测模式而被识别,其中所述预测模式是平面参考线延伸预测模式。
19.根据权利要求12所述的设备,其中所述轴心参考像素是基于确定所述当前块的预测模式是平面参考线延伸预测模式而被识别的,所述当前块的所述预测模式基于视频数据中的指示而被确定。
20.根据权利要求18所述的设备,其中所述当前块的所述预测模式通过导出所述预测模式而被确定。
21.根据权利要求12或13所述的设备,其中延伸超出所述当前块的所述多个重构像素属于相邻块。
22.根据权利要求12或13所述的设备,其中所述处理器进一步被配置为:
通过复制所述第三参考线上的所述多个预测像素之一,预测所述第三参考线上的第二多个像素;以及
通过使用与所述当前块接界的所述第三参考线上的所述第二多个像素,预测所述当前块的第二像素。
CN201880006992.5A 2017-01-13 2018-01-09 用于帧内平面编码的预测方法 Active CN110199523B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762446354P 2017-01-13 2017-01-13
US62/446,354 2017-01-13
PCT/US2018/012966 WO2018132380A1 (en) 2017-01-13 2018-01-09 Prediction approaches for intra planar coding

Publications (2)

Publication Number Publication Date
CN110199523A CN110199523A (zh) 2019-09-03
CN110199523B true CN110199523B (zh) 2023-06-13

Family

ID=61258586

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880006992.5A Active CN110199523B (zh) 2017-01-13 2018-01-09 用于帧内平面编码的预测方法

Country Status (3)

Country Link
US (1) US10917660B2 (zh)
CN (1) CN110199523B (zh)
WO (1) WO2018132380A1 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11611757B2 (en) * 2018-04-02 2023-03-21 Qualcomm Incorproated Position dependent intra prediction combination extended with angular modes
CN112703739B (zh) * 2018-09-19 2022-11-25 华为技术有限公司 用于预测最可能帧内模式的方法和装置
CN112740694A (zh) 2018-09-21 2021-04-30 韩国电子通信研究院 用于对图像进行编码/解码的方法和设备以及用于存储比特流的记录介质
CN110944205A (zh) 2018-09-23 2020-03-31 北京字节跳动网络技术有限公司 8参数仿射模式
EP3629579A1 (en) * 2018-09-27 2020-04-01 Ateme Method for image processing and apparatus for implementing the same
US11095885B2 (en) * 2018-10-05 2021-08-17 Tencent America LLC Mode list generation for multi-line intra prediction
EP3864847A4 (en) 2018-11-14 2021-12-15 Huawei Technologies Co., Ltd. INTRA PREDICTION PROCESS AND APPARATUS
GB2579824B (en) 2018-12-14 2022-05-18 British Broadcasting Corp Video encoding and video decoding
MX2021007510A (es) * 2018-12-21 2021-08-05 Hfi Innovation Inc Metodo y aparato de derivacion de lista de candidatos del modo de fusion de triangulo simplificado.
GB2580326A (en) 2018-12-28 2020-07-22 British Broadcasting Corp Video encoding and video decoding
CN116647678A (zh) 2018-12-29 2023-08-25 浙江大华技术股份有限公司 帧内预测方法、编码器及存储装置
WO2020146697A1 (en) * 2019-01-11 2020-07-16 Vid Scale, Inc Improved intra planar prediction using merge mode motion vector candidates
CN110290383B (zh) * 2019-06-25 2021-07-13 浙江大华技术股份有限公司 帧内预测模式选择方法、编码器及存储装置
CA3145479A1 (en) * 2019-08-01 2021-02-04 Biao Wang An encoder, a decoder and corresponding methods of chroma intra mode derivation
WO2021032113A1 (en) 2019-08-19 2021-02-25 Beijing Bytedance Network Technology Co., Ltd. Updating for counter-based intra prediction mode
CN111447440B (zh) * 2020-03-13 2021-11-16 浙江大华技术股份有限公司 帧内像素预测值的计算方法、电子设备及装置
CN111447441B (zh) * 2020-03-13 2021-11-16 浙江大华技术股份有限公司 帧内像素预测值的计算方法、电子设备及装置
CN117581536A (zh) * 2021-05-19 2024-02-20 抖音视界有限公司 用于视频处理的方法、设备和介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102845063A (zh) * 2010-02-08 2012-12-26 诺基亚公司 用于视频编码的设备、方法和计算机程序
CN103703773A (zh) * 2011-05-20 2014-04-02 株式会社Kt 在显示屏内进行帧内预测的方法和装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL3457689T3 (pl) * 2010-05-25 2020-12-28 Lg Electronics Inc. Nowy tryb predykcji planarnej
CN107071437B (zh) * 2010-07-02 2019-10-25 数码士有限公司 用于帧内预测的解码图像的方法
PL3373579T3 (pl) 2010-12-21 2019-12-31 Ntt Docomo, Inc. Rozszerzone kodowanie z predykcją wewnątrzramkową wykorzystujące reprezentacje planarne
WO2012115420A2 (ko) 2011-02-23 2012-08-30 엘지전자 주식회사 필터링을 이용한 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
US9467692B2 (en) * 2012-08-31 2016-10-11 Qualcomm Incorporated Intra prediction improvements for scalable video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102845063A (zh) * 2010-02-08 2012-12-26 诺基亚公司 用于视频编码的设备、方法和计算机程序
CN103703773A (zh) * 2011-05-20 2014-04-02 株式会社Kt 在显示屏内进行帧内预测的方法和装置

Also Published As

Publication number Publication date
WO2018132380A1 (en) 2018-07-19
US20190373285A1 (en) 2019-12-05
US10917660B2 (en) 2021-02-09
CN110199523A (zh) 2019-09-03

Similar Documents

Publication Publication Date Title
CN110199523B (zh) 用于帧内平面编码的预测方法
JP7390300B2 (ja) ビデオコーディングにおける適応ループフィルタを簡略化する方法
CN111345041B (zh) 解码、编码视频数据的方法和设备
JP7168593B2 (ja) 双方向オプティカルフローに基づいた動き補償予測
JP7406378B2 (ja) 360度ビデオ符号化のための適応的量子化
JP7398442B2 (ja) ビデオコーディングのための双予測
JP2021520710A (ja) 簡易化された勾配導出による双方向オプティカルフロー方法
CN111316649A (zh) 重叠块运动补偿
JP7432505B2 (ja) マルチタイプツリーコーディング
JP2022516094A (ja) 組みあわせたインターおよびイントラ予測
JP2021529462A (ja) アフィン動きモデルを基にしたビデオコーディングのためのアダプティブ制御点の選択
CN114556920A (zh) 用于通用视频编码的系统和方法
TW202143732A (zh) 合併模式、適應性運動向量精密度及轉換跨越語法
CN115552906A (zh) 量化参数编码
CN114556928A (zh) 帧内子分区相关的帧内编码
JP2022518382A (ja) マージモード動きベクトル候補を用いる改良されたイントラプラナー予測
RU2817790C2 (ru) Улучшенное внутрипланарное прогнозирование с применением кандидатов векторов движения в режиме объединения
TW202416715A (zh) 非幀內預測編碼區塊的等效幀內模式
WO2024079187A1 (en) Video coding combining intra-sub partition and template-based intra-mode derivation techniques
TW202404367A (zh) 空間幾何分割模式
WO2024079185A1 (en) Equivalent intra mode for non-intra predicted coding blocks
JP2024513939A (ja) 重複ブロック動き補償
WO2023198535A1 (en) Residual coefficient sign prediction with adaptive cost function for intra prediction modes
WO2023057501A1 (en) Cross-component depth-luma coding
WO2023118339A1 (en) Gdr adapted filtering

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant