CN111527753A - 使用参考值提供视频编码和/或解码的方法及相关设备 - Google Patents

使用参考值提供视频编码和/或解码的方法及相关设备 Download PDF

Info

Publication number
CN111527753A
CN111527753A CN201880083972.8A CN201880083972A CN111527753A CN 111527753 A CN111527753 A CN 111527753A CN 201880083972 A CN201880083972 A CN 201880083972A CN 111527753 A CN111527753 A CN 111527753A
Authority
CN
China
Prior art keywords
pixel
pixels
block
reference value
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880083972.8A
Other languages
English (en)
Other versions
CN111527753B (zh
Inventor
肯尼思·安德森
杰克·恩霍恩
理卡尔德·肖伯格
雅各布·斯特罗姆
玻尔·温纳斯滕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Telefonaktiebolaget LM Ericsson AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Telefonaktiebolaget LM Ericsson AB filed Critical Telefonaktiebolaget LM Ericsson AB
Publication of CN111527753A publication Critical patent/CN111527753A/zh
Application granted granted Critical
Publication of CN111527753B publication Critical patent/CN111527753B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

可以对包括多个图像的编码视频序列进行解码。可以提供编码视频序列的图像的第一相邻块和第二相邻块。可以定义包括所述第一块和第二块的像素的像素线,其跨所述第一块和第二块之间的边界延伸。可以基于来自所述第一块的像素中的第一像素来计算第一参考值。可以基于来自所述第二块的像素中的第二像素来计算第二参考值。可以基于所述第一参考值和/或第二参考值,使用内插来计算针对所述第一像素与第二像素之间的像素线中的每个像素的滤波后的像素值。可以使用所述滤波后的像素值来生成滤波后的块,并且可以基于所述滤波后的块来生成解码视频序列。

Description

使用参考值提供视频编码和/或解码的方法及相关设备
技术领域
本公开总体上涉及视频处理,并且更具体地,涉及视频编码和/或解码以及相关的方法和设备。
背景技术
视频序列是一系列图像(也被称为图片),其中,每个图像都包括一个或多个分量。每个分量都可以被描述为样本值的二维矩形数组。视频序列中的图像可以包括三个分量;一个亮度分量Y(其中,采样值是亮度值)和两个色度分量Cb和Cr(其中,采样值是色度值)。色度分量的维度可以在每个维度上是亮度分量的1/2。例如,高清晰度HD图像的亮度分量的大小可以是1920x1080,并且每个色度分量可以具有960x540的维度。分量有时也被称为颜色分量。
块是样本的一个二维数组(也被称为像素)。在视频编码中,每个分量都被分成块,并且编码的视频比特流是一系列块。在视频编码中,图像可以被分成覆盖图像的特定区域的单元。每个单元包括组成该特定区域的所有块,并且每个块完全属于一个单元。H.264中的宏块和高效视频编码HEVC中的编码单元(CU)是单元的示例。
块可以被定义为将应用编码中使用的变换的二维数组。这些块可以被称为“变换块”。备选地,块可以被定义为将应用单个预测模式的二维数组。这些块可以被称为“预测块”。在本公开中,单词“块”不限于这些定义中的一个,但是本文的描述可以应用于任何一个定义。此外,在预测块边界和变换块边界两者处都可能出现块效应(blockingartifacts)。
预测有两种类型:帧内预测和帧间预测。帧间预测使用来自先前解码的图片的块来预测当前图片的块。用于预测的、先前解码的图片被称为参考图片。使用运动矢量(MV)来指示参考块在参考图片内的位置。图1示出了MV的示例。如图1的示例所示,运动矢量MV=(3,1),当前预测块为C,并且其在参考图片中的最佳匹配块为D。
MV可以指向分数样本位置,以更好地捕捉位移。那些分数样本可以是使用内插从附近的整数样本生成的。在HM中,MV可以指向第1/4个样本,并且在JEM(联合探索模型)中,MV可以指向第1/16个样本。
当对帧间块进行编码时,编码器可以从参考图片中搜索最佳匹配块。所得的MV是在当前图片和参考图片之间移动的块的运动假设。
为了减少发送MV的开销,存在两种MV预测工具,即,合并和高级MV预测(AMVP)。两种工具都使用这样的事实:图片内的MV可以被看作为随机过程,并且MV之间存在相关性。当当前块处于合并模式时,则其相邻块的MV之一将被完全重用。当当前块处于AMVP模式时,则其相邻块的MV之一被视为预测变量,并且明确地发送信号通知产生的MV差异。解码器遵循同一MV预测过程以重构MV。在MV被重构之后,运动补偿过程被调用以推导出预测块。
在JEM中,尽管没有发送信号通知例如FRUC(帧速率上转换)、AFFINE、替代时间运动矢量预测(ATMVP)或时空运动矢量预测器(STMVP)之类的分区参数,仍然存在可以具有不同运动信息的块的4×4子块。
残差块包括代表原始源块和预测块的样本之间的样本值差异的样本。残差块是使用空间变换来处理的。然后根据控制量化系数精度的量化参数(QP)来量化变换系数。量化系数可以被称为残差系数。高QP会导致系数的精度降低,从而导致残差块的保真度降低。然后解码器接收残差系数,并且应用逆量化和逆变换以推导出残差块。
在已经重构块之后,应用去块(deblocking)以减少编码块之间的边界。
在HEVC和JEM中,首先在垂直边界上应用去块,然后在水平边界上应用去块。边界是变换块边界或预测块边界。为了启用并行友好去块,可以在8x8样本网格上执行去块。
针对每个边界设置去块滤波器强度参数(bs)。如果bs的值大于0,则可以应用去块。边界强度越大,滤波效果越强。首先检查,如果在块之间的边界处的任何块是帧内编码块,则(bs被设置为=2),或者如果两个块都使用帧间预测但它们使用不同的参考帧或具有显著不同的运动矢量,或者如果残差被编码,则(bs被设置为=1)。该首次检查将边界强度(bs)设置为大于0,以指示应该应用去块。边界强度越大,滤波效果越强。为了减少/避免在去块时删除自然结构,因此对亮度进行边界的各个边没有任何自然结构的检查。在HEVC中,使用以下不等式在边界的各个边上使用梯度计算:abs(p0-2*p1+p2)+abs(q0-2*q1+q2)<beta,其中,beta是基于针对块的量化参数的参数,并且p0、p1到p2是块边界一侧的样本,而q0、q1到q2是块边界另一侧的样本。在沿着边界的两个位置处检查条件,并且如果两个条件都满足,则针对边界的那四个样本部分,对亮度样本进行去块。如果相邻块中的任何一个被帧内编码,则可能总是对色度边界进行滤波。
有关针对亮度的HEVC去块滤波器的更多详细信息,如下所述。在HEVC中,可以按以下方式确定强或弱滤波器决策:
如果dpq小于(β>>2),Abs(p3-p0)+Abs(q0-q3)小于(β>>3)并且Abs(p0-q0)小于(5*tC+1)>>1,则应用强滤波器。否则,应用弱滤波器。HEVC强滤波可以如下执行:
p0′=Clip3(p0-2*tC,p0+2*tC,(p2+2*p1+2*p0+2*q0+q1+4)>>3)
p1′=Clip3(p1-2*tC,p1+2*tC,(p2+p1+p0+q0+2)>>2)
p2′=Clip3(p2-2*tC,p2+2*tC,(2*p3+3*p2+p1+p0+q0+4)>>3)
q0′=Clip3(q0-2*tC,q0+2*tC,(p1+2*p0+2*q0+2*q1+q2+4)>>3)
q1′=Clip3(q1-2*tC,q1+2*tC,(p0+q0+q1+q2+2)>>2)
q2′=Clip3(q2-2*tC,q2+2*tC,(p0+q0+q1+3*q2+2*q3+4)>>3)
在以上讨论的强滤波中,p*像素属于块P,其中,像素p0是最接近块Q的块边界的像素,并且q*像素属于块Q,其中,q0是最接近块P的块边界的像素,如下所示:
p3 p2 p1 p0|q0 q1 q2 q3
HEVC弱滤波可以如下执行:
Δ=(9*(q0-p0)-3*(q1-p1)+8)>>4
-当Abs(Δ)小于tC*10时,应用以下有序步骤:
-滤波后的样本值p0'和q0’被指定如下:
Δ=Clip3(-tC,tC,Δ)
p0′=Clip1Y(p0+Δ)
q0′=Clip1Y(q0-Δ)
当dp小于(β+(β>>1))>>3时,变量dEp被设置为等于1。
当dq小于(β+(β>>1))>>3时,变量dEq被设置为等于1。
–当dEp等于1时,滤波后的样本值p1’被指定如下:
Δp=Clip3(-(tC>>1),tC>>1,(((p2+p0+1)>>1)-p1+Δ)>>1)
p1′=Clip1Y(p1+Δp)
–当dEq等于1时,滤波后的样本值q1’被指定如下:
Δq=Clip3(-(tC>>1),tC>>1,(((q2+q0+1)>>1)-q1-Δ)>>1)
q1′=Clip1Y(q1+Δq)
JCTVC-F198定义了一个长去块滤波器,其根据QP在块边界的每一侧对4个样本或8个样本进行滤波。通过对4个相应的8样本滤波取8个或16个样本的平均值来执行滤波。该滤波器用于变换大于16x16的块,并且其中,相邻变换块的大小大于8。受滤波影响的子块的方差应小于阈值(在贡献中使用2)。在块边界的一侧最多使用12个样本,以减少/避免用于在相邻16x16块上进行滤波的4个样本之间的重叠。
然而,从H.264和/或HEVC进行去块可能无法充分减少/消除强块效应。JCTVC-F198中的强去块滤波器的一个问题是,对于所有已滤波的样本,可能具有非常强的低通滤波器效果。此外,使用滤波器的决策可能需要计算16x16块上的方差,这可能很复杂。
发明内容
根据本发明构思的一些实施例,可以对包括多个图像的编码视频序列进行解码,其中,该多个图像中的每个图像包括多个块。可以提供编码视频序列的图像的第一块和第二块,其中,第一块和第二块是图像的相邻块。可以定义跨第一块和第二块之间的边界延伸的像素线,其中,该像素线包括第一块的第一多个像素和第二块的第二多个像素。可以基于来自第一多个像素中的距边界最远的第一像素来计算第一参考值,并且可以基于来自第二多个像素中的距边界最远的第二像素来计算第二参考值。可以基于第一参考值和第二参考值中的至少一个,使用内插来计算针对第一像素和第二像素之间的像素线中的每个像素的滤波后的像素值。可以使用滤波后的像素值来生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块。可以基于第一滤波后的块和第二滤波后的块来生成包括解码图像的解码视频序列。
根据本发明构思的一些其他实施例,可以对包括多个图像的视频序列进行编码,其中,该多个图像中的每个图像包括多个块。可以提供包括多个图像的视频序列,并且可以提供视频序列的图像的第一块和第二块,其中,第一块和第二块是图像的相邻块。可以定义跨第一块和第二块之间的边界延伸的像素线,其中,该像素线包括第一块的第一多个像素和第二块的第二多个像素。可以基于来自第一多个像素中的距边界最远的第一像素来计算第一参考值,并且可以基于来自第二多个像素中的距边界最远的第二像素来计算第二参考值。可以基于第一参考值和第二参考值中的至少一个,使用内插来计算针对第一像素和第二像素之间的像素线中的每个像素的滤波后的像素值。可以使用滤波后的像素值来生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块,并且可以基于第一滤波后的块和第二滤波后的块中的至少一个来生成包括编码图像的编码视频序列。
根据本文公开的一些实施例,可以提供改进的去块滤波以减少/消除伪像,同时保持良好的图像质量。
附图说明
附图示出了发明构思的某些非限制性实施例,该附图被包括以提供对本公开的进一步理解,且被并入并构成本申请的一部分。在附图中:
图1是示出了用于预测块的参考图片、当前图片和运动矢量MV的示意图;
图2是示出了根据发明构思的一些实施例的去块滤波的示意图;
图3和图4是示出了根据发明构思的一些实施例的用于去块滤波的样本/像素的正45度和负45度取向的图;
图5是示出了根据发明构思的一些实施例的电子设备的框图;
图6是示出了根据发明构思的一些实施例的编码器操作的框图;
图7是示出了根据发明构思的一些实施例的解码器操作的框图;
图8和图9是示出了根据发明构思的一些实施例的图5的电子设备的操作的流程图;
图QQ1是根据一些实施例的无线网络的框图;
图QQ2是根据一些实施例的用户设备的框图;
图QQ3是根据一些实施例的虚拟化环境的框图;
图QQ4是根据一些实施例的经由中间网络与主机计算机连接的电信网络的框图;
图QQ5是根据一些实施例的通过部分无线连接经由基站与用户设备通信的主机计算机的框图;
图QQ6是根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法的框图;
图QQ7是根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法的框图;
图QQ8是根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法的框图;
图QQ9是根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法的框图;
图W是示出了根据一些实施例的方法的图;
图WW是根据一些实施例的装置的示意性框图;
图X是示出了根据一些实施例的方法的图;以及
图XX是根据一些实施例的装置的示意性框图。
具体实施方式
在下文中,将参考附图更全面地描述本发明构思,在附图中示出了本发明构思的实施例的示例。然而,本发明构思可以用多种不同形式来体现,并且不应当被解释为限于本文中所阐述的实施例。相反,提供这些实施例使得本公开将全面和完整,并且将本发明构思的范围充分传达给本领域技术人员。还应注意,这些实施例并不互相排斥。来自一个实施例的组成部分可以被默认假设为存在于/用于另一实施例中。
图5是示出了根据本文公开的一些实施例的电子设备500(其可以是无线设备、3GPP用户设备或UE设备等)的框图。如图所示,电子设备500可以包括与通信接口501、存储器505、相机507和屏幕509耦合的处理器503。通信接口501可以包括有线网络接口(例如,以太网接口)、WiFi接口、蜂窝无线电接入网络(RAN)接口(也被称为RAN收发机)和/或其他有线/无线网络通信接口中的一个或多个。因此,电子设备500可以通过远程存储系统的一个或多个有线/无线电链路提供有线/无线通信,以发送和/或接收编码视频序列。处理器503(也称作处理器电路或处理电路)可以包括一个或多个数据处理电路,例如通用和/或专用处理器(例如,微处理器和/或数字信号处理器)。处理器503可以被配置为执行来自存储器505(也称为存储器电路或存储电路)(下面描述为计算机可读介质)中的功能模块的计算机程序指令,以执行本文中针对一个或多个实施例描述的操作和方法中的一些或全部。此外,处理器503可以被定义为包括存储器,使得可以不需要单独的存储器505。因此,包括通信接口501、处理器503和/或相机507的电子设备500可以执行例如下面参照附图和/或示例实施例所讨论的操作。
根据一些实施例,电子设备500(例如,智能电话)可以生成编码视频序列,该编码视频序列存储在存储器505中和/或通过通信接口501在有线网络和/或无线网络上向远程设备发送。在这样的实施例中,处理器503可以从相机509接收视频序列,并且处理器可以对视频序列进行编码以提供可以存储在存储器505中和/或通过通信接口501向远程设备发送的编码视频序列。
根据一些其他实施例,电子设备500可以对编码视频序列进行解码以提供呈现在显示器509上的解码视频序列以供用户观看。编码视频序列可以在由处理器503进行解码和渲染之前通过通信接口501从远程通信设备接收并存储在存储器505中,或者编码视频序列可以由处理器503响应于如下视频序列生成:该视频序列是从相机507接收的并在由处理器503进行解码和渲染之前存储在存储器505中。因此,同一设备可以因此对视频序列进行编码,然后对该视频序列进行解码。
现在将参考图6和图7讨论由处理器503执行的编码和解码的操作。
图6是根据发明构思的一些实施例的编码器640的示意性框图,该编码器640可以由处理器503实现以对视频序列的视频图像(也被称为帧)中的像素块进行编码。
通过使用运动估计器650执行运动估计来从同一帧或前一帧中已经提供的像素块预测当前像素块。在帧间预测的情况下,运动估计的结果是与参考块相关联的运动矢量或位移矢量。运动补偿器650可以使用运动矢量来输出像素块的帧间预测。
帧内预测器649计算当前像素块的帧内预测。来自运动估计器/补偿器650和帧内预测器649的输出被输入到选择器651中,该选择器651针对当前像素块选择帧内预测或帧间预测。选择器651的输出以加法器641的形式输入到误差计算器,该加法器641还接收当前像素块的像素值。加法器641计算并输出残差作为像素块与其预测之间的像素值差异。
该误差在变换器642中(例如通过离散余弦变换)进行变换,并由量化器643量化,然后在编码器644中(例如通过熵编码器)进行编码。在帧间编码中,估计的运动矢量也被带到编码器644,以生成当前像素块的编码表示。
当前像素块的经变换和量化的残差也被提供给逆量化器645和逆变换器646以检索原始残差。该误差由加法器647添加到从运动补偿器650或帧内预测器649输出的块预测,以创建可以用于下一像素块的预测和编码的参考像素块。根据下面讨论的示例/实施例,该新参考块首先由去块滤波器600处理,以执行去块滤波以减少/打击块效应。然后,将处理后的新参考块临时存储在帧缓冲器648中,其中,该新参考块可用于帧内预测器649和运动估计器/补偿器650。
图7是根据本发明构思的一些实施例的包括去块滤波器600的解码器760的相应示意性框图,该去块滤波器600可以由处理器503来实现。解码器760包括解码器761(例如,熵解码器),以对像素块的编码表示进行解码以获得量化后和变换后的残差集合。这些残差由逆量化器762进行去量化,并由逆变换器763进行逆变换,以提供残差集合。
这些残差由加法器764添加到参考像素块的像素值上。参考块由运动估计器/补偿器767或帧内预测器766确定,这取决于是执行帧间还是帧内预测。因此,选择器768互连到加法器764以及运动估计器/补偿器767和帧内预测器766。根据本发明构思的一些实施例,从加法器764输出的所得的解码后的像素块被输入到去块滤波器600,以提供对块效应的去块滤波。滤波后的像素块从解码器760输出,并且还可以被暂时提供给帧缓冲器765,以用作要解码的后续像素块的参考像素块。因此,帧缓冲器765连接到运动估计器/补偿器767,以使存储的像素块可用于运动估计器/补偿器767。
来自加法器764的输出也可以输入到帧内预测器766,以用作未滤波的参考像素块。
在图6和图7的实施例中,去块滤波器600可以执行去块滤波,如所谓的环路滤波。在解码器760的备选实施例中,去块滤波器600可以被布置为执行所谓的后处理滤波。在这种情况下,去块滤波器600在由加法器764、帧缓冲器765、帧内预测器766、运动估计器/补偿器767和选择器768形成的循环之外的输出帧上操作。在这样的实施例中,通常在编码器处不进行去块滤波。去块滤波器600的操作将在下面更详细地讨论。
根据本发明构思的一些实施例,去块滤波器可以通过从块边界的第一侧到块边界的第二侧内插边界样本来减少块效应,而无需对信号中的低频分量(例如,坡道)进行显著修改。
对于块边界的两侧,可以使用在距块边界比要滤波的距块边界最远的样本更远的位置处的确定样本值到在要滤波的所有样本的中间的位置处或在边界样本之间的位置处的确定样本值来执行内插。
对于块边界的每一侧,可以通过在第一样本值集合的加权平均值和第二样本值集合的加权平均值之间进行内插来执行样本内插,其中第一样本值集合的中心位于要滤波的总样本的中间,或者中心位于边界样本之间的位置处,第二样本值集合在比要滤波的样本中距离最远的样本更远的位置处确定。
图2示出了根据本发明构思的一些实施例,从块边界的第一侧上的确定样本向块边界上的确定样本以及从块边界上的确定样本向块边界的第二侧的确定样本值使用线性内插进行去块。
根据本发明构思的一些实施例,可以在保持良好图像质量的同时通过去块滤波来减少严重的伪像。这种去块滤波的一些实施例可能非常适合于从大块中对伪像进行去块,而不会显著增加复杂度。
对于在边界的每侧对8个样本进行滤波的情况,JCTVC-F198可能需要每个滤波的样本进行一次位移和16次加法。根据针对在每一侧上的7个样本滤波的发明构思的一些实施例,如下面关于示例6所讨论的,去块滤波可以针对refMiddle使用14次加法、一次乘法和一次位移,然后针对refP和refQ使用四次加法和两次位移以共同用于14个样本滤波,然后对每个滤波后的样本进行两次乘法和一次加法以及一次位移。因此,总的来说,示例6可以对每个样本使用2+1/14次乘法、1+18/14次加法、1+3/14次位移。与JCTVC-F198相比,示例6可以少使用14次加法,但是多使用两次乘法。因此,相对于JCTVC-F198,示例6的提出的滤波器可能需要相似数量的操作。与JCTVC-F198相比,示例6的滤波器的一个好处是,滤波器响应越远离边界滤波,提供的低通量越少。由于示例6的滤波器可能需要访问总共16个样本以对14个样本进行滤波,而JCTVC-F198可能需要访问32个样本以对16个样本进行滤波,因此存储带宽也可能较小。
根据发明构思的一些实施例的去块滤波可以用于编码器和解码器两者。
确定使用长滤波器的附加决定不是本公开的范围,但是可以建议检查与块边界相邻的平滑度,并且仅当要进行滤波的相应样本在边界的相应侧平滑时才应用长滤波器。也可以建议对大型块之间的边界使用长滤波器。
根据本发明构思的一些实施例,去块滤波可以使用线性内插,但是根据本发明构思的附加实施例,可以使用更高阶的内插。下面讨论发明构思的实施例的各种示例。
根据第一示例,样本值(也被称为像素值)从在要进行滤波的样本(也称为像素)的中间位置处所确定的样本值向远离块边界的确定样本值进行内插。
如果要进行滤波的样本数是偶数,则确定样本值在要进行滤波的样本中间的位置在两个样本值之间的中间确定,并且如果要进行滤波的样本数是奇数,则确定样本值的位置在中间样本中确定,并且使用该位置各侧的N个样本计算该所确定的值。
通常,要进行滤波的样本可以沿着垂直于块边界的线放置,但是本发明构思的实施例也可以用于块边界上的对角线,以减少/避免删除对角线结构。
考虑沿着垂直于块边界的线的块P(包括样本/像素p)和块Q(包括样本/像素q)中的样本,如下所示:
p5 p4 p3 p2 p1 p0|q0 q1 q2 q3 q4 q5
其中,p5至p0属于一个块P,并且q0至q5属于另一个块Q,并且其中,p0和q0最接近块边界。
如果在块P和块Q两者中对相同数量的样本进行滤波,则在这种情况下,要进行滤波的样本的中间位置将在p0和q0之间(因为要进行滤波的样本数是偶数)。在该位置处的确定样本值是所计算的垂直于块边界的样本的平均值,其中,从块边界的各侧获取至少一个样本,例如,至少p0和q0。确定样本值的一个示例是(p0+q0)/2(即,p0和q0的平均值)。另一示例是(p1+p0+q0+q1)/4(即,p1、p0、q0和q1的平均值)。代替未加权平均值,可以对样本使用具有不同加权因子的加权平均值,但是对于距边界附近的位置相同距离的样本使用具有相同加权(例如,对称加权)的加权平均值。
p1和q1是垂直于远离块边界的块边界的确定样本值的示例。那些确定样本值分别在块P和块Q内,并且它们可以被表示为refP和refQ。代替仅选择样本值p1和q1作为确定的样本值,可以替代地取p1和p0的平均值,并且将q1和q0的平均值作为远离块边界的确定样本值。代替未加权平均值,可以对样本使用具有不同加权因子的加权平均值。通过对样本值取平均,可以获得更可靠的确定样本值。
作为去块之后的内插样本的示例,可以基于在边界附近的确定样本和块内远离边界的确定样本将至少p0或q0进行内插。内插可以是线性的,使得内插样本从要进行滤波的样本中间的确定样本值向相应块内远离边界的确定样本值线性地减小或增加。
作为数值示例,考虑对P侧(p0至p4)上的5个样本和Q侧(q0至q4)上的5个样本进行去块:
refMiddle=(p0+q0)/2
refP=(p5+p4)/2
refQ=(q5+q4)/2
然后可以通过计算refP和refMiddle的位置之间的距离来定义在refP和refMiddle之间(类似地在refQ和refMiddle之间)进行线性内插的滤波器。如果将refP定义为样本p5和p4之间的平均值,则refP和p4之间的距离为0.5,refP和p3之间的距离为1.5,refP和p2之间的距离为2.5,refP和p1之间的距离为3.5,refP和p0之间的距离是4.5,最后refMiddle和p0之间的距离是0.5。因此,在这种情况下,refP和refMiddle之间的距离为5个样本。
可以定义要应用于refMiddle的滤波器系数f以及要应用于refP的1减去那些系数,以通过线性内插产生滤波后的值p0'至p4'(在此表示为p(x))。
f=[4.5 3.5 2.5 1.5 0.5]/5
p(x)’=f(x)*refMiddle+(1-f(x))*refP
其中,x为0到4,并且p(x)’是p(x)的滤波后的版本。因此,f(0)为4.5/5,并且f(1)为3.5/5,等等。类似地,对于Q侧(q0至q4,此处表示为q(x)):
q(x)’=f(x)*refMiddle+(1-f(x))*refQ
其中,x为0到4,q(x)’是q(x)的滤波后的版本。因此,f(0)为4.5/5,并且f(1)为3.5/5,等等。
根据第一示例的这种方法,当从边界的一侧到边界的另一侧突然过渡时,可以提供从块边界一侧到块边界另一侧的平滑过渡,同时对垂直于块边界的低频信号(例如,线性坡道(1 2 3 4…))的影响相对较小。
根据第二示例,可以通过将滤波器系数与归一化因子相乘并将结果舍入为具有整数滤波器系数,使用定点算法而不是浮点算法来实现第一示例的去块。
例如,第一个示例的滤波器可以写为:
fInt=round(f*64)=[58 45 32 19 6]
例如,可以通过以下方式获得refMiddle、refP和refQ:
refMiddle=(p4+p3+2*(p2+p1+p0+q0+q1+q2)+q3+q4)+8)>>4
refP=(p5+p4+1)>>1
refQ=(q5+q4+1)>>1
并且滤波可以被描述为:
p(x)=(fInt(x)*refMiddle+(64-fInt(x))*refP+32)>>6
q(x)=(fInt(x)*refMiddle+(64-fInt(x))*refQ+32)>>6
在上面的等式中,>>是二进制移位函数,其等效于除以所指示的2的乘方(例如,>>4是除以16,>>1是除以2,>>6是除以64,等等)。
根据第三示例,可以通过将滤波器函数的顺序部分组合到滤波器系数的一个矢量中来将同一方法应用于单步滤波中,该滤波器系数的一个矢量将直接应用于相应重构样本值以产生滤波后的输出。
refMiddle=[0 1 1 1 1 1 1 1 1 1 1 0]/10
refQ=[0 0 0 0 0 0 0 0 0 0 1 1]/2
refP=[1 1 0 0 0 0 0 0 0 0 0 0]/2
fP(x)=f(x)*refMiddle+(1-f(x))*refP
fP(0)=4.5/5*[0 1 1 1 1 1 1 1 1 1 1 0]/10+(1-4.5/5)*[1 1 0 0 0 0 0 00 0 0 0]/2=
[0.0500 0.1400 0.0900 0.0900 0.0900 0.0900 0.0900 0.0900 0.09000.0900 0.0900 0]
fP(1)=3.5/5*[0 1 1 1 1 1 1 1 1 1 1 0]/10+(1-3.5/5)*[1 1 0 0 0 0 0 00 0 0 0]/2=
[0.1500 0.2200 0.0700 0.0700 0.0700 0.0700 0.0700 0.0700 0.07000.0700 0.0700 0]
fP(2)=2.5/5*[0 1 1 1 1 1 1 1 1 1 1 0]/10+(1-2.5/5)*[1 1 0 0 0 0 0 00 0 0 0]/2=
[0.2500 0.3000 0.0500 0.0500 0.0500 0.0500 0.0500 0.0500 0.05000.0500 0.0500 0]
fP(3)=1.5/5*[0 1 1 1 1 1 1 1 1 1 1 0]/10+(1-1.5/5)*[1 1 0 0 0 0 0 00 0 0 0]/2=
[0.3500 0.3800 0.0300 0.0300 0.0300 0.0300 0.0300 0.0300 0.03000.0300 0.0300 0]
fP(4)=0.5/5*[0 1 1 1 1 1 1 1 1 1 1 0]/10+(1-0.5/5)*[1 1 0 0 0 0 0 00 0 0 0]/2=
[0.4500 0.4600 0.0100 0.0100 0.0100 0.0100 0.0100 0.0100 0.01000.0100 0.0100 0]
p(0)’=in*fP(0)’其中,in=[p5 p4 p3 p2 p1 p0 q0 q1 q2 q3 q4 q5]
p(1)’=in*fP(1)’
p(2)’=in*fP(2)’
p(3)’=in*fP(3)’
p(4)’=in*fP(4)’
p(5)’=in*fP(5)’
类似地,对于q0’到q5’:
fQ(x)=f(x)*refMiddle+(1-f(x))*refQ
q(0)’=in*fQ(0)’其中in=[p5 p4 p3 p2 p1 p0 q0 q1 q2 q3 q4 q5]
q(1)’=in*fQ(1)’
q(2)’=in*fQ(2)’
q(3)’=in*fQ(3)’
q(4)’=in*fQ(4)’
q(5)’=in*fQ(5)’
如其他实施例/示例中所描述的,这也可以通过以2的倍数的缩放因子缩放浮点数并将其舍入为整数来转换为定点滤波器。然后,在滤波时,以与该缩放因子对应的因子右移。
根据第四示例,可以基于先前的实施例通过在一个块中比在另一块中内插更多的样本来定义非对称去块。可以使用与以上讨论的算法相同或相似的算法。下面讨论非对称去块的示例,其中,在跨块P和块Q之间的边界的线上提供块P的样本p0至p7和块Q的样本q0至q3。
p7 p6 p5 p4 p3 p2 p1 p0|q0 q1 q2 q3
在该示例中,对样本p6至p0和q0至q2进行滤波。
在该示例中,refMiddle在p2和p1之间,因为进行滤波的样本总数为10,而中间在p2和p1之间。
refMiddle=(p6+p5+p4+p3+p2+p1+p0+q0+q1+q2)/10
P侧远离块边界的样本值可以在p6和p7之间。因此,确定样本值可以是:
refP=(p7+p6)/2
Q侧远离块边界的样本值可以在q2和q3之间。因此,确定样本值可以是:
refQ=(q2+q3)/2
refP和refMiddle之间的距离为5,这也是refQ和refMiddle之间的距离。因此,在refP和refMiddle之间内插样本的滤波器可以被定义为:
f=[4.5 3.5 2.5 1.5 0.5]/5
可以注意到,这是与第一示例中描述的滤波器相同的滤波器,因为在所确定的中间样本的每一侧上对5个样本进行滤波。不同之处在于,中间样本现在位于块P内部,而不是在块P和块Q之间。
在这种情况下,可以将指向要修改的refMiddle左侧第一个样本的指针定义为p*,然后可以用p*(x)描述refMiddle左侧的每个样本:
p*(x)’=f(x)*refMiddle+(1-f(x))*refP
其中,x为0到4,并且p*(x)’是p*(x)的滤波后的版本。因此,f(0)为4.5/5,f(1)为3.5/5,等等。
然后,可以将指向要修改的refMiddle右侧第一个样本的指针定义为q*,这样,refMiddle右侧的通过q*(x)进行的每个滤波后的样本:
q*(x)’=f(x)*refMiddle+(1-f(x))*refP
其中,x为0到4,q*(x)’是q*(x)的滤波后的版本。因此,f(0)为4.5/5,f(1)为3.5/5,等等。
应用去块滤波器的情况可以在垂直于块边界的垂直或水平方向上。根据第五示例,如先前示例中所描述的发明构思的实施例也可以用于沿着块边界的0度的基准方向与块边界相比以+/-45度布置的样本线。与先前的示例相比,差异在于用于去块滤波的样本的位置。
参照块边界每一侧的5个样本滤波,如图3所示,与边界相比,用于去块滤波的样本可以逆时针旋转+45度。参照块边界每一侧的5个样本滤波,如图4所示,与边界相比,用于去块滤波的样本可以逆时针旋转-45度。
根据第六示例,可以通过使用在块边界的相应侧的3个、5个或7个样本进行内插来提供伪码,以进行对称去块滤波:
Figure BDA0002555576370000161
Figure BDA0002555576370000171
Figure BDA0002555576370000181
其中,样本n0到n7是块P上的重构样本,并且样本n8到n15是块Q上的重构样本,如下所示:
n0 n1 n2 n3 n4 n5 n6 n7|n8 n9 n10 n11 n12 n13 n14 n15
重构样本来自piSrc,其中n7=piSrc[-iOffset],n6=piSrc[-2*iOffset],n5=piSrc[-3*iOffset],n4=piSrc[-4*iOffset],n3=piSrc[-5*iOffset],n2=piSrc[-6*iOffset],n1=piSrc[-7*iOffset],n0=piSrc[-8*iOffset],n8=piSrc[0],n9=piSrc[iOffset],n10=piSrc[2*iOffset],n11=piSrc[3*iOffset],n12=piSrc[4*iOffset],n13=piSrc[5*iOffset],n14=piSrc[6*iOffset],n15=piSrc[7*iOffset]
滤波后,将piSrc更新为滤波后的输出。
根据第七示例,操作可以类似于上面所讨论的示例,但是其中,在与滤波方向相反的方向上对refMiddle、refP和refQ进行平均,以实现更准确的估计,从而实现更强大的去块。
考虑refMiddle(x)、refP(x)和refQ(x),其中,x从0到N-1,并且其中,N为要进行滤波的边界的长度。基于refMiddle、refP和refQ的相邻计算,确定加权平均值。
例如,相邻的线的估计权重为1,并且块边界当前线的估计权重为2。
refMiddleAvg(x)=(refMiddle(x-1)+refMiddle(x)*2+refMiddle(x+1)+2)>>2
refPAvg(x)=(refP(x-1)+refP(x)*2+refP(x+1)+2)>>2
refQAvg(x)=(refQ(x-1)+refQ(x)*2+refQ(x+1)+2)>>2
其中,在先前的实施例中,使用refMiddleAvg(x)、refPAvg(x)和refQAvg(x)代替refMiddle、refP和refQ。
根据第八示例,操作可以类似于上面所讨论的示例,但是其中,非对称去块滤波是通过以块的中间为中心而不是以所有要进行滤波的样本为中心取平均来执行的。举例来说,可以跨块边界提供以下样本:
p7 p6 p5 p4 p3 p2 p1 p0|q0 q1 q2 q3
并且将对p6至p0和q0至q2进行滤波。
在这种情况下,refMiddle在p0和q0之间,因为平均值位于块边界的中心。
refMiddle=(p2+p1+p0+q0+q1+q2)/6
P侧远离块边界的样本值可以在p6和p7之间。则所确定的样本值refP可以变为:
refP=(p7+p6)/2
Q侧远离块边界的样本值可以在q2和q3之间。则所确定的样本值refQ变为:
refQ=(q2+q3)/2
refP和refMiddle之间的距离为7。因此,在refP和refMiddle之间内插样本的滤波器可以被定义为:
fP=[6.5 5.5 4.5 3.5 2.5 1.5 0.5]/7
refQ和refMiddle之间的距离为3。因此,在refP和refMiddle之间内插样本的滤波器可以被定义为:
fQ=[2.5 1.5 0.5]/3
p(x)’=fP(x)*refMiddle+(1-fP(x))*refP
其中,x为0到6,而p(x)’是p(x)的滤波后的版本。因此,fP(0)为6.5/7,f(1)为5.5/7,等等。
类似地,对于Q侧:
q(x)’=fQ(x)*refMiddle+(1-fQ(x))*refQ
其中,x为0到4,而q(x)’是q(x)的滤波后的版本。因此,fQ(0)为2.5/3,f(1)为1.5/3,等等。
在第八示例中,当从边界的一侧到边界的另一侧突然过渡时,可以产生从块边界一侧到块边界另一侧的平滑过渡,同时还减小了对垂直于块边界的低频信号上(例如,线性坡道(1 2 3 4…))的影响。
根据第九示例,操作可以类似于以上所讨论的示例,但是其中,省略了refMiddle以实现甚至更强的去块效果。作为数值示例,考虑对P侧的7个样本和Q侧的7个样本进行去块滤波:
p7 p6 p5 p4 p3 p2 p1 p0|q0 q1 q2 q3 q4 q5 q6 q7
refP=(p7+p6)/2
refQ=(q7+q6)/2
然后可以通过计算refP和refQ位置之间的距离来定义在refP和refQ之间进行线性内插的滤波器。如果将refP定义为样本p7和p6之间的平均值,并且将refQ定义为q7和q6之间的平均值,则refP和p6之间的距离为0.5,refP和p5之间的距离为1.5,refP和p4之间的距离为2.5,refP和p3之间是3.5,等等,最后refP和refQ之间的距离是14。因此,在这种情况下,refP和refQ之间的距离为14个样本。
然后,我们可以定义要应用于refQ的滤波器系数和1减去要应用于refP的那些系数,以通过线性内插产生滤波后的值pq0至pq13(在此表示为pq(x)),其中,pq0=q7,并且pq1=q6,以此类推,并且因此,pq13=p7。
f=[13.5 12.5 11.5 10.5 9.5 8.5 7.5 6.5 5.5 4.5 3.5 2.5 1.5 0.5]/14
p(x)’=f(x)*refQ+(1-f(x))*refP
其中,x为0到13,p(x)’是p(x)的滤波后的版本。因此,f(0)为13.5/14,f(1)为12.5/14,等等。
如其他示例中所描述的,这也可以通过以2的倍数的缩放因子缩放浮点数并将其舍入为整数来转换为定点滤波器。然后,在滤波时,以与该缩放因子对应的因子右移。
根据第十示例,操作可以类似于上面所讨论的示例,但是为了减少/避免删除自然结构,可以将内插值与内插之前的值进行比较,并且可以将阈值和内插值裁剪为最大值以变为分别等于或在p(x)-thresholdP(x)至p(x)+thresholdP(x)以及q(x)-thresholdQ(x)至q(x)+thresholdQ(x)的范围内。
pC(x)=p(x)-clip3(-threshold(x),threshold(x),(p(x)-p(x)’))
其中,pC(x)是p(x)’的裁剪后版本,并且threshold(x)基于QP,使得当QP较高时,允许对样本进行更多修改(变换系数的粗量化)。
qC(x)=q(x)-clip3(-thresholdQ(x),thresholdQ(x),(q(x)-q(x)’))
其中,qC(x)是q(x)’的裁剪后版本,并且thresholdQ(x)基于QP,使得当QP较高时,允许对样本进行更多修改(变换系数的粗量化)。
对于远离边界的样本,例如随着x的增加,thresholdP(x)和thresholdQ(x)可以全部相同或减小。
在一些情况下,例如,如果量化参数在一侧比另一侧低,则允许在一侧进行比另一侧更多的滤波。
根据本发明构思的一些实施例,可以提供长去块滤波器,其不会显著地改变坡道,但是可以有效地减少/消除两个块之间的不连续性。此外,可以以相对低的复杂度来实现这种去块滤波器。根据本发明构思的一些实施例,可以提供去块滤波,其相对于要进行滤波的多个样本相对灵活,并且允许非对称去块,其中,在边界一侧比另一侧对更多的样本进行滤波。
现在将参考根据发明构思的一些实施例的图8的流程图来讨论电子设备500的操作。例如,模块(也被称为单元)可以存储在图5的存储器505中,并且这些模块可以提供指令,使得当处理器503执行模块的指令时,处理器503执行图8的流程图的相应操作。
根据本发明构思的一些实施例,电子设备500可以对包括多个图像的编码视频序列进行解码,其中,多个图像中的每个图像包括多个块。在框801处,处理器503可以例如通过经由通信接口501通过网络从远程源接收编码视频序列和/或通过从存储器505检索编码视频序列来获得编码视频序列。根据一些实施例,处理器503可以首先接收编码视频序列,然后将该编码视频序列保存到存储器505,以用于以后从存储器中检索。
在框803处,处理器503可以提供编码视频序列的图像的第一块和第二块,其中,第一块和第二块是图像的相邻块。此外,可以基于在框801处获得的编码视频序列来提供第一块和第二块。
在框805处,处理器503可以定义跨第一块和第二块之间的边界延伸的像素线,其中,该像素线包括第一块的第一多个像素和第二块的第二多个像素。第一多个像素和第二多个像素可以包括相等数量的像素,或者第一多个像素和第二多个像素可以包括不同数量的像素。此外,像素线可以相对于边界垂直,或者像素线可以相对于边界成对角线。
在框807处,处理器503可以基于来自第一多个像素中的距边界最远的第一像素来计算第一参考值,并且在框809处,处理器503可以基于来自第二多个像素中的距边界最远的第二像素来计算第二参考值。在框807处,处理器503可以基于第一像素的值和所述线中与第一像素相邻的像素的值,将第一参考值计算为平均值,并且在框809处,处理器503可以基于第二像素的值和所述线中与第二像素相邻的像素的值,将第二参考值计算为平均值。
在框811处,处理器503可以基于来自像素线的第三像素和第四像素计算第三参考值,其中,第三像素在第一像素和第四像素之间的线中,并且其中,第四像素在第三像素和第二像素之间的线中。
在框813处,处理器503可以基于第一参考值和第二参考值中的至少一个,使用内插来计算针对第一像素和第二像素之间的像素线的每个像素的滤波后的像素值。假设使用第三参考值,则计算滤波后的像素值可以包括:针对第一像素和第三像素之间的线中的像素,基于第一参考值和第三参考值,使用内插计算滤波后的像素值,并且针对第二像素和第四像素之间的线中的像素,基于第二参考值和第三参考值,使用内插计算滤波后的像素值。根据一些实施例,在框813处使用内插来计算滤波后的像素值还可包括:基于相应像素的未滤波值和阈值来裁剪滤波后的像素值中的至少一个。
在框815处,处理器503可以使用滤波后的像素值来生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块。
在框817处,处理器503可以基于第一滤波后的块和第二滤波后的块生成包括解码图像的解码视频序列。
在框819处,处理器502可以渲染解码视频序列以在屏幕509上显示,其中,渲染可以包括:基于解码视频序列,在屏幕上呈现视频。
如果使用框811的第三参考值,则计算第三参考值可以包括:基于第三像素的值和第四像素的值,将第三参考值计算为平均值。第三像素可以被包括在第一块的第一多个像素中,而第四像素可以被包括在第二块的第二多个像素中,或者第三像素和第四像素可以被包括在第一块的第一多个像素中。根据一些实施例,处理器503可以基于第三像素和第四像素,基于与第三像素相邻并且在像素线之外的另一像素,以及基于与第四像素相邻并且在像素线之外的另一像素来计算第三参考值。
根据一些其他实施例,在框813处,计算滤波后的像素值可以包括:针对第一像素和第二像素之间的线中的像素,基于第一参考值和第二参考值,使用内插计算滤波后的像素值。根据这样的实施例,可以省略在框811处的第三参考值的计算,并且可以在框813处在没有第三参考值的情况下计算滤波后的像素值。
根据一些实施例,处理器503可以在框807处基于第一像素以及基于在第一块中与第一像素相邻并且在像素线之外的另一像素来计算第一参考值,并且处理器503可以基于第二像素以及基于在第二块中与第二像素相邻并且在像素线之外的另一像素来计算第二参考值。
关于一些实施例,图8的各种操作可以是可选的。关于示例实施例1(下面阐述)的方法,例如,图8的框801、框811和框819的操作可以是可选的。
现在将参考根据发明构思的一些实施例的图9的流程图来讨论电子设备500的操作。例如,模块(也被称为单元)可以存储在图5的存储器505中,并且这些模块可以提供指令,使得当处理器503执行模块的指令时,处理器503执行图9的流程图的相应操作。
根据本发明构思的一些实施例,电子设备500可以对包括多个图像的视频序列进行编码,其中,多个图像中的每个图像包括多个块。在框901处,处理器503可以接收包括多个图像的视频序列。例如,处理器503可以从诸如相机507(其可以与图5所示的电子设备500集成或者被设置在电子设备500外部)的视频图像捕捉设备接收视频序列。
在框903处,处理器503可以提供视频序列的图像的第一和第二块,其中,第一和第二块是图像的相邻块。
在框905处,处理器503可以定义跨第一块和第二块之间的边界延伸的像素线,其中,该像素线包括第一块的第一多个像素和第二块的第二多个像素。第一多个像素和第二多个像素可以包括相等数量的像素,或者第一多个像素和第二多个像素包括不同数量的像素。此外,像素线可以相对于边界垂直,或者像素线可以相对于边界成对角线。
在框907处,处理器503可以基于来自第一多个像素中的距边界最远的第一像素来计算第一参考值,并且在框909处,处理器503可以基于来自第二多个像素中的距边界最远的第二像素来计算第二参考值。
在框911处,处理器503可以基于来自像素线的第三像素和第四像素计算第三参考值,其中,第三像素在第一像素和第四像素之间的线中,并且其中,第四像素在第三像素和第二像素之间的线中。
在框913处,处理器503可以基于第一参考值和第二参考值中的至少一个,使用内插来计算针对第一像素和第二像素之间的像素线的每个像素的滤波后的像素值。假设使用第三参考值,则计算滤波后的像素值可以包括:针对第一像素和第三像素之间的线中的像素,基于第一参考值和第三参考值,使用内插计算滤波后的像素值,并且针对第二像素和第四像素之间的线中的像素,基于第二参考值和第三参考值,使用内插计算滤波后的像素值。
在框915处,处理器503可以使用滤波后的像素值来生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块。
在框917处,处理器503可以基于第一滤波后的块和第二滤波后的块中的至少一个来生成包括编码图像的编码视频序列。
在框919处,处理器503可以将编码视频序列保存到存储器505,和/或在框921处,处理器503可以通过网络向远程设备发送编码视频序列。另外,处理器503可以将编码视频序列保存到存储器505,如以上关于图8所讨论的,从存储器中对编码视频序列进行解码,然后渲染解码视频序列以在屏幕509上显示。
如果使用第三参考值,则处理器503可以在框911处基于第三像素(p0)的值和第四像素(q0)的值,将第三参考值计算为平均值。第三像素可以被包括在第一块的第一多个像素中,而第四像素可以被包括在第二块的第二多个像素中,或者第三像素和第四像素可以被包括在第一块的第一多个像素中。根据一些实施例,处理器503可以基于第三像素和第四像素,基于与第三像素相邻并且在像素线之外的另一像素,以及基于与第四像素相邻并且在像素线之外的另一像素来计算第三参考值。
根据一些其他实施例,处理器503可以在框913处针对第一像素和第二像素之间的线中的像素,基于第一参考值和第二参考值,使用内插计算滤波后的像素值。根据这样的实施例,可以省略在框911处的第三参考值的计算,并且可以在框913处在没有第三参考值的情况下计算滤波后的像素值。
在框907处,处理器503可以基于第一像素的值和所述线中与第一像素相邻的像素的值,将第一参考值计算为平均值,并且在框909处,处理器503可以基于第二像素的值和所述线中与第二像素相邻的像素的值,将第二参考值计算为平均值。
在框907处,处理器503可以基于第一像素以及基于在第一块中与第一像素相邻并且在像素线之外的另一像素来计算第一参考值,并且在框909处,处理器503可以基于第二像素以及基于在第二块中与第二像素相邻并且在像素线之外的另一像素来计算第二参考值。
在框913处,处理器503可以基于相应像素的未滤波的值和阈值,使用内插和裁剪滤波后的像素值中的至少一个来计算滤波后的像素值。
关于一些实施例,图9的各种操作可以是可选的。关于示例实施例19(下面阐述)的方法,例如,图9的框911、框919和框921的操作可以是可选的。
下面讨论示例实施例。通过示例/说明的方式在括号中提供了参考数字/字母,而不将示例实施例限制为由参考数字/字母指示的特定元件。
1、一种对包括多个图像的编码视频序列进行解码的方法,其中,所述多个图像中的每个图像包括多个块,所述方法包括:提供(803)所述编码视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;定义(805)跨所述第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算(807)第一参考值(refP);基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算(809)第二参考值(refQ);基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算(813)针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成(815)与所述第一块和第二块相对应的第一滤波后的块和第二滤波后的块;以及基于所述第一滤波后的块和第二滤波后的块生成(817)包括解码图像的解码视频序列。
2、根据实施例1所述的方法,还包括:渲染(819)所述解码视频序列以在屏幕(509)上显示。
3、根据实施例1-2中任一项所述的方法,还包括:基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0)计算(811)第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;其中,计算滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
4、根据实施例3所述的方法,其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
5、根据实施例3-4中任一项所述的方法,其中,所述第三像素被包括在所述第一块的所述第一多个像素中,并且其中,所述第四像素被包括在所述第二块的所述第二多个像素中。
6、根据实施例3-4中任一项所述的方法,其中,所述第三像素和第四像素被包括在所述第一块的第一多个像素中。
7、根据实施例1-2中任一项所述的方法,其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第二像素(q7)之间的线中的像素,基于所述第一参考值(refP)和所述第二参考值(refQ),使用内插计算滤波后的像素值。
8、根据实施例1-7中任一项所述的方法,其中,所述第一多个像素和第二多个像素包括相等数量的像素。
9、根据实施例1-7中任一项所述的方法,其中,所述第一多个像素和第二多个像素包括不同数量的像素。
10、根据实施例1-9中任一项所述的方法,其中,所述像素线相对于所述边界垂直,或者其中,所述像素线相对于所述边界成对角线。
11、根据实施例1-10中任一项所述的方法,其中,计算所述第一参考值包括:基于所述第一像素(p7)的值和所述线中与所述第一像素(p7)相邻的像素(p6)的值,将所述第一参考值(refP)计算为平均值,并且其中,计算所述第二参考值(refQ)包括:基于所述第二像素(q7)的值和所述线中与所述第二像素(q7)相邻的像素(q6)的值,将所述第二参考值计算为平均值。
12、根据实施例1-11中任一项所述的方法,还包括:通过网络从远程源接收(801)所述编码视频序列,其中,提供所述第一块和第二块包括:基于从所述远程源接收到的编码视频序列来提供所述第一块和第二块。
13、根据实施例1-11中任一项所述的方法,还包括:从存储器中检索(801)编码视频序列,其中,提供所述第一块和第二块包括:基于从存储器(505)中检索到的编码视频序列来提供所述第一块和第二块。
14、根据实施例3-6中任一项所述的方法,其中,计算所述第三参考值包括:基于所述第三像素和第四像素,基于与所述第三像素相邻并且在所述像素线之外的另一像素,以及基于与所述第四像素相邻并且在所述像素线之外的另一像素来计算所述第三参考值。
15、根据实施例1-14中任一项所述的方法,其中,计算所述第一参考值包括:基于所述第一像素以及基于在所述第一块中与所述第一像素相邻并且在所述像素线之外的另一像素,计算所述第一参考值,并且其中,计算所述第二参考值包括:基于所述第二像素以及基于在所述第二块中与所述第二像素相邻并且在所述像素线之外的另一像素,计算所述第二参考值。
16、根据实施例1-15中任一项所述的方法,其中,使用内插计算所述滤波后的像素值包括:基于所述相应像素的未滤波的值和阈值来裁剪所述滤波后的像素值中的至少一个。
17、一种电子设备(500),适于执行根据实施例1-16中任一项所述的操作。
18、一种电子设备(500),包括:处理器(503),被配置为执行根据实施例1-16中任一项所述的操作。
19、一种对包括多个图像的视频序列进行编码的方法,其中,所述多个图像中的每个图像包括多个块,所述方法包括:接收(901)包括所述多个图像的视频序列;提供(903)所述视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;定义(905)跨所述第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算(907)第一参考值(refP);基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算(909)第二参考值(refQ);基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算(913)针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成(915)与所述第一块和第二块相对应的第一滤波后的块和第二滤波后的块;以及基于所述第一滤波后的块和第二滤波后的块中的至少一个生成(917)包括编码图像的编码视频序列。
20、根据实施例19所述的方法,还包括:基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0)计算(911)第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;其中,计算滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
21、根据实施例20所述的方法,其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
22、根据实施例20-21中任一项所述的方法,其中,所述第三像素被包括在所述第一块的所述第一多个像素中,并且其中,所述第四像素被包括在所述第二块的所述第二多个像素中。
23、根据实施例20-21中任一项所述的方法,其中,所述第三像素和第四像素被包括在所述第一块的第一多个像素中。
24、根据实施例19所述的方法,其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第二像素(q7)之间的线中的像素,基于所述第一参考值(refP)和所述第二参考值(refQ),使用内插计算滤波后的像素值。
25、根据实施例19-24中任一项所述的方法,其中,所述第一多个像素和第二多个像素包括相等数量的像素。
26、根据实施例19-24中任一项所述的方法,其中,所述第一多个像素和第二多个像素包括不同数量的像素。
27、根据实施例19-26中任一项所述的方法,其中,所述像素线相对于所述边界垂直,或者其中,所述像素线相对于所述边界成对角线。
28、根据实施例19-27中任一项所述的方法,其中,计算所述第一参考值包括:基于所述第一像素(p7)的值和所述线中与所述第一像素(p7)相邻的像素(p6)的值,将所述第一参考值(refP)计算为平均值,并且其中,计算所述第二参考值(refQ)包括:基于所述第二像素(q7)的值和所述线中与所述第二像素(q7)相邻的像素(q6)的值,将所述第二参考值计算为平均值。
29、根据实施例19-28中任一项所述的方法,还包括:将所述编码视频序列保存(919)到存储器(505)。
30、根据实施例19-29中任一项所述的方法,还包括:通过网络向远程设备发送(921)编码视频序列。
31、根据实施例19-30中任一项所述的方法,其中,接收所述视频序列包括:从视频图像捕捉设备接收所述视频序列。
32、根据实施例20-23中任一项所述的方法,其中,计算所述第三参考值包括:基于所述第三像素和第四像素,基于与所述第三像素相邻并且在所述像素线之外的另一像素,以及基于与所述第四像素相邻并且在所述像素线之外的另一像素来计算所述第三参考值。
33、根据实施例19-32中任一项所述的方法,其中,计算所述第一参考值包括:基于所述第一像素以及基于在所述第一块中与所述第一像素相邻并且在所述像素线之外的另一像素,计算所述第一参考值,并且其中,计算所述第二参考值包括:基于所述第二像素以及基于在所述第二块中与所述第二像素相邻并且在所述像素线之外的另一像素,计算所述第二参考值。
34、根据实施例19-33中任一项所述的方法,其中,使用内插计算所述滤波后的像素值包括:基于所述相应像素的未滤波的值和阈值来裁剪所述滤波后的像素值中的至少一个。
35、一种电子设备(500),适于执行根据实施例19-34中任一项所述的操作。
36、一种电子设备(500),包括:处理器(503),被配置为执行根据实施例19-34中任一项所述的操作。
下面提供了附加说明。
通常,除非明确给出和/或从上下文中暗示不同的含义,否则本文中使用的所有术语将根据其在相关技术领域中的普通含义来解释。除非另有明确说明,否则对“一/一个/元件、设备、组件、装置、步骤等”的所有引用应被开放地解释为指代元件、设备、组件、装置、步骤等中的至少一个实例。除非必须明确地将一个步骤描述为在另一个步骤之后或之前和/或隐含地一个步骤必须在另一个步骤之后或之前,否则本文所公开的任何方法的步骤不必以所公开的确切顺序执行。在适当的情况下,本文公开的任何实施例的任何特征可以应用于任何其他实施例。同样地,任何实施例的任何优点可以适用于任何其他实施例,反之亦然。通过下文的描述,所附实施例的其他目的、特征和优点将显而易见。
现在将参考附图更全面地描述本文中设想的一些实施例。然而,其他实施例包含在本文所公开的主题的范围内,所公开的主题不应被解释为仅限于本文所阐述的实施例;相反,这些实施例是通过示例方式提供的,以向本领域技术人员传达该主题的范围。
图QQ1:根据一些实施例的无线网络
虽然本文所述的主题可以使用任何合适的组件在任何适合类型的系统中实现,但是本文公开的实施例是关于无线网络(例如,图QQ1中所示的示例无线网络)描述的。为简单起见,图QQ1的无线网络仅描绘了网络QQ106、网络节点QQ160和QQ160b、以及WD QQ110、QQ110b和QQ110c(也被称为移动终端)。实际上,无线网络还可以包括适于支持无线设备之间或无线设备与另一通信设备(例如,陆线电话、服务提供商或任何其他网络节点或终端设备)之间的通信的任何附加元件。在所示组件中,以附加细节描绘网络节点QQ160和无线设备(WD)QQ110。无线网络可以向一个或多个无线设备提供通信和其他类型的服务,以便于无线设备接入和/或使用由无线网络提供或经由无线网络提供的服务。
无线网络可以包括任何类型的通信、电信、数据、蜂窝和/或无线电网络或其他类似类型的系统,和/或与任何类型的通信、电信、数据、蜂窝和/或无线电网络或其他类似类型的系统接口连接。在一些实施例中,无线网络可以被配置为根据特定标准或其他类型的预定义规则或过程来操作。因此,无线通信网络的特定实施例可以实现诸如全球移动通信系统(GSM)、通用移动电信系统(UMTS)、长期演进(LTE)和/或其他合适的2G、3G、4G或5G标准之类的通信标准;诸如IEEE802.11标准之类的无线局域网(WLAN)标准;和/或诸如全球微波接入互操作性(WiMax)、蓝牙、Z-Wave和/或ZigBee标准之类的任何其他适合的无线通信标准。
网络QQ106可以包括一个或多个回程网络、核心网络、IP网络、公共交换电话网络(PSTN)、分组数据网络、光网络、广域网(WAN)、局域网(LAN)、无线局域网(WLAN)、有线网络、无线网络、城域网和其他网络,以实现设备之间的通信。
网络节点QQ160和WD QQ110包括下面更详细描述的各种组件。这些组件一起工作以提供网络节点和/或无线设备功能,例如在无线网络中提供无线连接。在不同的实施例中,无线网络可以包括任何数量的有线或无线网络、网络节点、基站、控制器、无线设备、中继站和/或可以促进或参与数据和/或信号的通信(无论是经由有线连接还是经由无线连接)的任何其他组件或系统。
如本文所使用的,网络节点指的是能够、被配置、被布置和/或可操作以直接或间接地与无线设备和/或与无线网络中的其他网络节点或设备通信,以实现和/或提供向无线设备的无线接入和/或执行无线网络中的其他功能(例如,管理)的设备。网络节点的示例包括但不限于接入点(AP)(例如,无线电接入点)、基站(BS)(例如,无线电基站、NodeB、演进型NodeB(eNB)和NR NodeB(gNB))。基站可以基于它们提供的覆盖的量(或者换言之,基于它们的发射功率水平)来分类,于是它们还可以被称为毫微微基站、微微基站、微基站或宏基站。基站可以是中继节点或控制中继的中继宿主节点。网络节点还可以包括分布式无线电基站的一个或多个(或所有)部分,例如集中式数字单元和/或远程无线电单元(RRU)(有时被称为远程无线电头端(RRH))。这种远程无线电单元可以与或可以不与天线集成为天线集成无线电。分布式无线电基站的部分也可以称为分布式天线系统(DAS)中的节点。网络节点的又一些示例包括多标准无线电(MSR)设备(如MSR BS)、网络控制器(如无线电网络控制器(RNC)或基站控制器(BSC))、基站收发机站(BTS)、传输点、传输节点、多小区/多播协调实体(MCE)、核心网络节点(例如,MSC、MME)、O&M节点、OSS节点、SON节点、定位节点(例如,E-SMLC)和/或MDT。作为另一示例,网络节点可以是虚拟网络节点,如下面更详细描述的。然而,更一般地,网络节点可以表示如下的任何合适的设备(或设备组):该设备(或设备组)能够、被配置、被布置和/或可操作以实现和/或向无线设备提供对无线网络的接入,或向已接入无线网络的无线设备提供某种服务。
在图QQ1中,网络节点QQ160包括处理电路QQ170、设备可读介质QQ180、接口QQ190、辅助设备QQ184、电源QQ186、电源电路QQ187和天线QQ162。尽管图QQ1的示例无线网络中示出的网络节点QQ160可以表示包括所示硬件组件的组合的设备,但是其他实施例可以包括具有不同组件组合的网络节点。应当理解,网络节点包括执行本文公开的任务、特征、功能和方法所需的硬件和/或软件的任何适合组合。此外,虽然网络节点QQ160的组件被描绘为位于较大框内或嵌套在多个框内的单个框,但实际上,网络节点可包括构成单个图示组件的多个不同物理组件(例如,设备可读介质QQ180可以包括多个单独的硬盘驱动器以及多个RAM模块)。
类似地,网络节点QQ160可以由多个物理上分离的组件(例如,NodeB组件和RNC组件、或BTS组件和BSC组件等)组成,每个这些组件可以具有其各自的相应组件。在网络节点QQ160包括多个分离的组件(例如,BTS和BSC组件)的某些场景中,可以在若干网络节点之间共享这些分离的组件中的一个或多个。例如,单个RNC可以控制多个NodeB。在这种场景中,每个唯一的NodeB和RNC对在一些实例中可以被认为是单个单独的网络节点。在一些实施例中,网络节点QQ160可被配置为支持多种无线电接入技术(RAT)。在这种实施例中,一些组件可被复制(例如,用于不同RAT的单独的设备可读介质QQ180),并且一些组件可被重用(例如,可以由RAT共享相同的天线QQ162)。网络节点QQ160还可以包括用于集成到网络节点QQ160中的不同无线技术(例如,GSM、WCDMA、LTE、NR、WiFi或蓝牙无线技术)的多组各种所示组件。这些无线技术可以被集成到网络节点QQ160内的相同或不同芯片或芯片组和其他组件中。
处理电路QQ170被配置为执行本文描述为由网络节点提供的任何确定、计算或类似操作(例如,某些获得操作)。由处理电路QQ170执行的这些操作可以包括通过以下操作对由处理电路QQ170获得的信息进行处理:例如,将获得的信息转换为其他信息,将获得的信息或转换后的信息与存储在网络节点中的信息进行比较,和/或基于获得的信息或转换后的信息执行一个或多个操作,并根据所述处理的结果做出确定。
处理电路QQ170可以包括下述中的一个或多个的组合:微处理器、控制器、微控制器、中央处理单元、数字信号处理器、专用集成电路、现场可编程门阵列、或者任何其它合适的计算设备、资源、或硬件、软件和/或编码逻辑的组合,其可操作为单独地或与其他网络节点QQ160组件(例如,设备可读介质QQ180)相结合来提供网络节点QQ160功能。例如,处理电路QQ170可以执行存储在设备可读介质QQ180中或存储在处理电路QQ170内的存储器中的指令。这样的功能可以包括提供本文讨论的各种无线特征、功能或益处中的任何一个。在一些实施例中,处理电路QQ170可以包括片上系统(SOC)。
在一些实施例中,处理电路QQ170可以包括射频(RF)收发机电路QQ172和基带处理电路QQ174中的一个或多个。在一些实施例中,射频(RF)收发机电路QQ172和基带处理电路QQ174可以位于单独的芯片(或芯片组)、板或单元(例如无线电单元和数字单元)上。在备选实施例中,RF收发机电路QQ172和基带处理电路QQ174的部分或全部可以在同一芯片或芯片组、板或单元上。
在某些实施例中,本文描述为由网络节点、基站、eNB或其他这样的网络设备提供的一些或所有功能可由处理电路QQ170执行,处理电路QQ170执行存储在设备可读介质QQ180或处理电路QQ170内的存储器上的指令。在备选实施例中,功能中的一些或全部可以例如以硬连线方式由处理电路QQ170提供,而无需执行存储在单独的或分立的设备可读介质上的指令。在任何这些实施例中,无论是否执行存储在设备可读存储介质上的指令,处理电路QQ170都可以被配置为执行所描述的功能。由这种功能提供的益处不仅限于处理电路QQ170本身或不仅限于网络节点QQ160的其他组件,而是作为整体由网络节点QQ160和/或总体上由终端用户和无线网络享有。
设备可读介质QQ180可以包括任何形式的易失性或非易失性计算机可读存储器,包括但不限于永久存储设备、固态存储器、远程安装存储器、磁介质、光学介质、随机存取存储器(RAM)、只读存储器(ROM)、大容量存储介质(例如,硬盘)、可移除存储介质(例如,闪存驱动器、致密盘(CD)或数字视频盘(DVD))和/或任何其他易失性或非易失性、非暂时性设备可读和/或计算机可执行存储器设备,其存储可由处理电路QQ170使用的信息、数据和/或指令。设备可读介质QQ180可以存储任何合适的指令、数据或信息,包括计算机程序、软件、包括逻辑、规则、代码、表等中的一个或多个的应用、和/或能够由处理电路QQ170执行并由网络节点QQ160使用的其他指令。设备可读介质QQ180可以用于存储由处理电路QQ170做出的任何计算和/或经由接口QQ190接收的任何数据。在一些实施例中,可以认为处理电路QQ170和设备可读介质QQ180是集成的。
接口QQ190用于网络节点QQ160、网络QQ106和/或WD QQ110之间的信令和/或数据的有线或无线通信。如图所示,接口QQ190包括端口/端子QQ194,用于例如通过有线连接向网络QQ106发送数据和从网络QQ106接收数据。接口QQ190还包括无线电前端电路QQ192,其可以耦合到天线QQ162,或者在某些实施例中是天线QQ162的一部分。无线电前端电路QQ192包括滤波器QQ198和放大器QQ196。无线电前端电路QQ192可以连接到天线QQ162和处理电路QQ170。无线电前端电路可以被配置为调节天线QQ162和处理电路QQ170之间通信的信号。无线电前端电路QQ192可以接收数字数据,该数字数据将通过无线连接向外发送给其他网络节点或WD。无线电前端电路QQ192可以使用滤波器QQ198和/或放大器QQ196的组合将数字数据转换为具有适合信道和带宽参数的无线电信号。然后可以通过天线QQ162发送无线电信号。类似地,当接收数据时,天线QQ162可以收集无线电信号,然后由无线电前端电路QQ192将其转换为数字数据。数字数据可以被传递给处理电路QQ170。在其他实施例中,接口可包括不同组件和/或组件的不同组合。
在某些备选实施例中,网络节点QQ160可以不包括单独的无线电前端电路QQ192,作为替代,处理电路QQ170可以包括无线电前端电路并且可以连接到天线QQ162,而无需单独的无线电前端电路QQ192。类似地,在一些实施例中,RF收发机电路QQ172的全部或一些可以被认为是接口QQ190的一部分。在其他实施例中,接口QQ190可以包括一个或多个端口或端子QQ194、无线电前端电路QQ192和RF收发机电路QQ172(作为无线电单元(未示出)的一部分),并且接口QQ190可以与基带处理电路QQ174(是数字单元(未示出)的一部分)通信。
天线QQ162可以包括被配置为发送和/或接收无线信号的一个或多个天线或天线阵列。天线QQ162可以耦合到无线电前端电路QQ190,并且可以是能够无线地发送和接收数据和/或信号的任何类型的天线。在一些实施例中,天线QQ162可以包括一个或多个全向、扇形或面板天线,其可操作用于发送/接收在例如2GHz和66GHz之间的无线电信号。全向天线可以用于在任何方向上发送/接收无线电信号,扇形天线可以用于向/从在特定区域内的设备发送/接收无线电信号,以及平板天线可以是用于以相对直线的方式发送/接收无线电信号的视线天线。在一些情况下,使用多于一个天线可以称为MIMO。在某些实施例中,天线QQ162可以与网络节点QQ160分离,并且可以通过接口或端口连接到网络节点QQ160。
天线QQ162、接口QQ190和/或处理电路QQ170可以被配置为执行本文描述为由网络节点执行的任何接收操作和/或某些获得操作。可以从无线设备、另一网络节点和/或任何其他网络设备接收任何信息、数据和/或信号。类似地,天线QQ162、接口QQ190和/或处理电路QQ170可以被配置为执行本文描述的由网络节点执行的任何发送操作。可以将任何信息、数据和/或信号发送给无线设备、另一网络节点和/或任何其他网络设备。
电源电路QQ187可以包括电源管理电路或耦合到电源管理电路,并且被配置为向网络节点QQ160的组件提供电力以执行本文描述的功能。电源电路QQ187可以从电源QQ186接收电力。电源QQ186和/或电源电路QQ187可以被配置为以适合于各个组件的形式(例如,每个相应组件所需的电压和电流水平)向网络节点QQ160的各种组件提供电力。电源QQ186可以被包括在电源电路QQ187和/或网络节点QQ160中或在电源电路QQ187和/或网络节点QQ160外部。例如,网络节点QQ160可以经由输入电路或诸如电缆的接口连接到外部电源(例如,电源插座),由此外部电源向电源电路QQ187供电。作为另一个示例,电源QQ186可以包括电池或电池组形式的电源,其连接到或集成在电源电路QQ187中。如果外部电源发生故障,电池可以提供备用电力。也可以使用其他类型的电源,例如光伏器件。
网络节点QQ160的备选实施例可以包括超出图QQ1中所示的组件的附加组件,所述附加组件可以负责提供网络节点的功能(包括本文描述的功能中的任一者和/或支持本文描述的主题所需的任何功能)的某些方面。例如,网络节点QQ160可以包括用户接口设备,以允许将信息输入到网络节点QQ160中并允许从网络节点QQ160输出信息。这可以允许用户针对网络节点QQ160执行诊断、维护、修复和其他管理功能。
如本文所使用的,无线设备(WD)指的是能够、被配置为、被布置为和/或可操作以与网络节点和/或其他无线设备无线通信的设备。除非另有说明,否则术语WD在本文中可与用户设备(UE)互换使用。无线传送可以包括使用电磁波、无线电波、红外波和/或适于通过空气传送信息的其他类型的信号来发送和/或接收无线信号。在一些实施例中,WD可以被配置为在没有直接人类交互的情况下发送和/或接收信息。例如,WD可以被设计为当由内部或外部事件触发时,或者响应于来自网络的请求,以预定的调度向网络发送信息。WD的示例包括但不限于智能电话、移动电话、蜂窝电话、IP语音(VoIP)电话、无线本地环路电话、台式计算机、个人数字助理(PDA)、无线摄像头、游戏控制台或设备、音乐存储设备、回放设备、可穿戴终端设备、无线端点、移动台、平板计算机、便携式计算机、便携式嵌入式设备(LEE)、便携式安装设备(LME)、智能设备、无线客户驻地设备(CPE)、车载无线终端设备等。WD可以例如通过实现用于副链路通信的3GPP标准来支持设备到设备(D2D)通信、车辆到车辆(V2V)通信,车辆到基础设施(V2I)通信,车辆到任何事物(V2X)通信,并且在这种情况下可以被称为D2D通信设备。作为又一特定示例,在物联网(IoT)场景中,WD可以表示执行监视和/或测量并将这种监测和/或测量的结果发送给另一WD和/或网络节点的机器或其他设备。在这种情况下,WD可以是机器到机器(M2M)设备,在3GPP上下文中它可以被称为MTC设备。作为一个具体示例,WD可以是实现3GPP窄带物联网(NB-IoT)标准的UE。这种机器或设备的具体示例是传感器、计量设备(例如,电表)、工业机器、或者家用或个人设备(例如,冰箱、电视等)、个人可穿戴设备(例如,手表、健身追踪器等)。在其他场景中,WD可以表示能够监视和/或报告其操作状态或与其操作相关联的其他功能的车辆或其他设备。如上所述的WD可以表示无线连接的端点,在这种情况下,该设备可以被称为无线终端。此外,如上所述的WD可以是移动的,在这种情况下,它也可以称为移动设备或移动终端。
如图所示,无线设备QQ110包括天线QQ111、接口QQ114、处理电路QQ120、设备可读介质QQ130、用户接口设备QQ132、辅助设备QQ134、电源QQ136和电源电路QQ137。WD QQ110可以包括用于WD QQ110支持的不同无线技术(例如,GSM、WCDMA、LTE、NR、WiFi、WiMAX或蓝牙无线技术,仅提及一些)的多组一个或多个所示组件。这些无线技术可以集成到与WD QQ110内的其他组件相同或不同的芯片或芯片组中。
天线QQ111可以包括被配置为发送和/或接收无线信号的一个或多个天线或天线阵列,并且连接到接口QQ114。在某些备选实施例中,天线QQ111可以与WD QQ110分开并且可以通过接口或端口连接到WD QQ110。天线QQ111、接口QQ114和/或处理电路QQ120可以被配置为执行本文描述为由WD执行的任何接收或发送操作。可以从网络节点和/或另一个WD接收任何信息、数据和/或信号。在一些实施例中,无线电前端电路和/或天线QQ111可以被认为是接口。
如图所示,接口QQ114包括无线电前端电路QQ112和天线QQ111。无线电前端电路QQ112包括一个或多个滤波器QQ118和放大器QQ116。无线电前端电路QQ114连接到天线QQ111和处理电路QQ120,并且被配置为调节在天线QQ111和处理电路QQ120之间传送的信号。无线电前端电路QQ112可以耦合到天线QQ111或者是天线QQ111的一部分。在某些备选实施例中,WD QQ110可以不包括单独的无线电前端电路QQ112;而是,处理电路QQ120可以包括无线电前端电路,并且可以连接到天线QQ111。类似地,在一些实施例中,RF收发机电路QQ122中的一些或全部可以被认为是接口QQ114的一部分。无线电前端电路QQ112可以接收数字数据,该数字数据将通过无线连接向外发送给其他网络节点或WD。无线电前端电路QQ112可以使用滤波器QQ118和/或放大器QQ116的组合将数字数据转换为具有适合信道和带宽参数的无线电信号。然后可以通过天线QQ111发送无线电信号。类似地,当接收数据时,天线QQ111可以收集无线电信号,然后由无线电前端电路QQ112将其转换为数字数据。数字数据可以被传递给处理电路QQ120。在其他实施例中,接口可包括不同组件和/或组件的不同组合。
处理器电路QQ120可以包括下述中的一个或多个的组合:微处理器、控制器、微控制器、中央处理单元、数字信号处理器、专用集成电路、现场可编程门阵列、或者任何其它合适的计算设备、资源、或硬件、软件和/或编码逻辑的组合,其可操作为单独地或与其他WDQQ110组件(例如设备可读介质QQ130)相结合来提供WD QQ110功能。这样的功能可以包括提供本文讨论的各种无线特征或益处中的任何一个。例如,处理电路QQ120可以执行存储在设备可读介质QQ130中或处理电路QQ120内的存储器中的指令,以提供本文公开的功能。
如图所示,处理电路QQ120包括RF收发机电路QQ122、基带处理电路QQ124和应用处理电路QQ126中的一个或多个。在其他实施例中,处理电路可以包括不同的组件和/或组件的不同组合。在某些实施例中,WD QQ110的处理电路QQ120可以包括SOC。在一些实施例中,RF收发机电路QQ122、基带处理电路QQ124和应用处理电路QQ126可以在单独的芯片或芯片组上。在备选实施例中,基带处理电路QQ124和应用处理电路QQ126的一部分或全部可以组合成一个芯片或芯片组,并且RF收发机电路QQ122可以在单独的芯片或芯片组上。在另外的备选实施例中,RF收发机电路QQ122和基带处理电路QQ124的一部分或全部可以在同一芯片或芯片组上,并且应用处理电路QQ126可以在单独的芯片或芯片组上。在其他备选实施例中,RF收发机电路QQ122、基带处理电路QQ124和应用处理电路QQ126的一部分或全部可以组合在同一芯片或芯片组中。在一些实施例中,RF收发机电路QQ122可以是接口QQ114的一部分。RF收发机电路QQ122可以调节RF信号以用于处理电路QQ120。
在某些实施例中,本文描述为由WD执行的一些或所有功能可以由处理电路QQ120提供,处理电路QQ120执行存储在设备可读介质QQ130上的指令,在某些实施例中,设备可读介质QQ130可以是计算机可读存储介质。在备选实施例中,功能中的一些或全部可以例如以硬连线方式由处理电路QQ120提供,而无需执行存储在单独的或分立的设备可读存储介质上的指令。在任何这些特定实施例中,无论是否执行存储在设备可读存储介质上的指令,处理电路QQ120都可以被配置为执行所描述的功能。由这种功能提供的益处不仅限于处理电路QQ120本身或者不仅限于WD QQ110的其他组件,而是作为整体由WD QQ110和/或总体上由终端用户和无线网络享有。
处理电路QQ120可以被配置为执行本文描述为由WD执行的任何确定、计算或类似操作(例如,某些获得操作)。由处理电路QQ120执行的这些操作可以包括通过以下操作对由处理电路QQ120获得的信息进行处理:例如,将获得的信息转换为其他信息,将获得的信息或转换后的信息与由WD QQ110存储的信息进行比较,和/或基于获得的信息或转换后的信息执行一个或多个操作,并根据所述处理的结果做出确定。
设备可读介质QQ130可操作以存储计算机程序、软件、包括逻辑、规则、代码、表等中的一个或多个的应用、和/或能够由处理电路QQ120执行的其他指令。设备可读介质QQ130可以包括计算机存储器(例如,随机存取存储器(RAM)或只读存储器(ROM))、大容量存储介质(例如,硬盘)、可移除存储介质(例如,致密盘(CD)或数字视频盘(DVD))、和/或任何其他易失性或非易失性、非暂时性设备可读和/或计算机可执行存储器设备,其存储可由处理电路QQ120使用的信息、数据和/或指令。在一些实施例中,可以认为处理电路QQ120和设备可读介质QQ130是集成的。
用户接口设备QQ132可以提供允许人类用户与WD QQ110交互的组件。这种交互可以具有多种形式,例如视觉、听觉、触觉等。用户接口设备QQ132可操作以向用户产生输出,并允许用户向WD QQ110提供输入。交互的类型可以根据安装在WD QQ110中的用户接口设备QQ132的类型而变化。例如,如果WD QQ110是智能电话,则交互可以经由触摸屏进行;如果WDQQ110是智能仪表,则交互可以通过提供用量的屏幕(例如,使用的加仑数)或提供可听警报的扬声器(例如,如果检测到烟雾)进行。用户接口设备QQ132可以包括输入接口、设备和电路、以及输出接口、设备和电路。用户接口设备QQ132被配置为允许将信息输入到WD QQ110中,并且连接到处理电路QQ120以允许处理电路QQ120处理输入信息。用户接口设备QQ132可以包括例如麦克风、接近或其他传感器、按键/按钮、触摸显示器、一个或多个相机、USB端口或其他输入电路。用户接口设备QQ132还被配置为允许从WD QQ110输出信息,并允许处理电路QQ120从WD QQ110输出信息。用户接口设备QQ132可以包括例如扬声器、显示器、振动电路、USB端口、耳机接口或其他输出电路。通过使用用户接口设备QQ132的一个或多个输入和输出接口、设备和电路,WD QQ110可以与终端用户和/或无线网络通信,并允许它们受益于本文描述的功能。
辅助设备QQ134可操作以提供可能通常不由WD执行的更具体的功能。这可以包括用于针对各种目的进行测量的专用传感器,用于诸如有线通信等之类的其他类型通信的接口等。辅助设备QQ134的组件的包括和类型可以根据实施例和/或场景而变化。
在一些实施例中,电源QQ136可以是电池或电池组的形式。也可以使用其他类型的电源,例如外部电源(例如电源插座)、光伏器件或电池单元。WD QQ110还可以包括用于从电源QQ136向WD QQ110的各个部分输送电力的电源电路QQ137,WD QQ110的各个部分需要来自电源QQ136的电力以执行本文描述或指示的任何功能。在某些实施例中,电源电路QQ137可以包括电源管理电路。电源电路QQ137可以附加地或备选地可操作以从外部电源接收电力;在这种情况下,WD QQ110可以通过输入电路或诸如电力线缆的接口连接到外部电源(例如电源插座)。在某些实施例中,电源电路QQ137还可操作以将电力从外部电源输送到电源QQ136。例如,这可以用于电源QQ136的充电。电源电路QQ137可以对来自电源QQ136的电力执行任何格式化、转换或其他修改,以使电力适合于被供电的WD QQ110的各个组件。
图QQ2:根据一些实施例的用户设备
图QQ2示出了根据本文描述的各个方面的UE的一个实施例。如本文中所使用的,“用户设备”或“UE”可能不一定具有在拥有和/或操作相关设备的人类用户的意义上的“用户”。作为替代,UE可以表示意在向人类用户销售或由人类用户操作但可能不或最初可能不与特定的人类用户相关联的设备(例如,智能喷水控制器)。备选地,UE可以表示不意在向终端用户销售或由终端用户操作但可以与用户的利益相关联或针对用户的利益操作的设备(例如,智能电表)。UE QQ2200可以是由第三代合作伙伴计划(3GPP)识别的任何UE,包括NB-IoT UE、机器类型通信(MTC)UE和/或增强型MTC(eMTC)UE。如图QQ2所示,UE QQ200是根据第三代合作伙伴计划(3GPP)发布的一个或多个通信标准(例如3GPP的GSM、UMTS、LTE和/或5G标准)被配置用于通信的WD的一个示例。如前所述,术语WD和UE可以互换使用。因此,尽管图QQ2是UE,但是本文讨论的组件同样适用于WD,反之亦然。
在图QQ2中,UE QQ200包括处理电路QQ201,其可操作地耦合到输入/输出接口QQ205、射频(RF)接口QQ209、网络连接接口QQ211、包括随机存取存储器(RAM)QQ217、只读存储器(ROM)QQ219和存储介质QQ221等的存储器QQ215、通信子系统QQ231、电源QQ233和/或任何其他组件,或其任意组合。存储介质QQ221包括操作系统QQ223、应用程序QQ225和数据QQ227。在其他实施例中,存储介质QQ221可以包括其他类似类型的信息。某些UE可以使用图QQ2中所示的所有组件,或者仅使用这些组件的子集。组件之间的集成水平可以从一个UE到另一个UE而变化。此外,某些UE可以包含组件的多个实例,例如多个处理器、存储器、收发机、发射机、接收机等。
在图QQ2中,处理电路QQ201可以被配置为处理计算机指令和数据。处理电路QQ201可以被配置为实现任何顺序状态机,其可操作为执行存储为存储器中的机器可读计算机程序的机器指令,所述状态机例如是:一个或多个硬件实现的状态机(例如,以离散逻辑、FPGA、ASIC等来实现);可编程逻辑连同适当的固件;一个或多个存储的程序、通用处理器(例如,微处理器或数字信号处理器(DSP))连同适合的软件;或以上的任何组合。例如,处理电路QQ201可以包括两个中央处理单元(CPU)。数据可以是适合于由计算机使用的形式的信息。
在所描绘的实施例中,输入/输出接口QQ205可以被配置为向输入设备、输出设备或输入和输出设备提供通信接口。UE QQ200可以被配置为经由输入/输出接口QQ205使用输出设备。输出设备可以使用与输入设备相同类型的接口端口。例如,USB端口可用于提供向UE QQ200的输入和从UE QQ200的输出。输出设备可以是扬声器、声卡、视频卡、显示器、监视器、打印机、致动器、发射机、智能卡、另一输出设备或其任意组合。UE QQ200可以被配置为经由输入/输出接口QQ205使用输入设备以允许用户将信息捕获到UE QQ200中。输入设备可以包括触摸敏感或存在敏感显示器、相机(例如,数字相机、数字摄像机、网络相机等)、麦克风、传感器、鼠标、轨迹球、方向板、触控板、滚轮、智能卡等。存在敏感显示器可以包括电容式或电阻式触摸传感器以感测来自用户的输入。传感器可以是例如加速度计、陀螺仪、倾斜传感器、力传感器、磁力计、光学传感器、接近传感器、另一类似传感器或其任意组合。例如,输入设备可以是加速度计、磁力计、数字相机、麦克风和光学传感器。
在图QQ2中,RF接口QQ209可以被配置为向诸如发射机、接收机和天线之类的RF组件提供通信接口。网络连接接口QQ211可以被配置为提供向网络QQ243a的通信接口。网络QQ243a可以包括有线和/或无线网络,诸如局域网(LAN)、广域网(WAN)、计算机网络、无线网络、电信网络、另一类似网络或其任意组合。例如,网络QQ243a可以包括Wi-Fi网络。网络连接接口QQ211可以被配置为包括接收机和发射机接口,接收机和发射机接口用于根据一个或多个通信协议(例如,以太网、TCP/IP、SONET、ATM等)通过通信网络与一个或多个其他设备通信。网络连接接口QQ211可以实现适合于通信网络链路(例如,光学的、电气的等)的接收机和发射机功能。发射机和接收机功能可以共享电路组件、软件或固件,或者备选地可以分离地实现。
RAM QQ217可以被配置为经由总线QQ202与处理电路QQ201接口连接,以在诸如操作系统、应用程序和设备驱动之类的软件程序的执行期间提供数据或计算机指令的存储或高速缓存。ROM QQ219可以被配置为向处理电路QQ201提供计算机指令或数据。例如,ROMQQ219可以被配置为存储用于存储在非易失性存储器中的基本系统功能的不变低层系统代码或数据,基本系统功能例如基本输入和输出(I/O)、启动或来自键盘的击键的接收。存储介质QQ221可以被配置为包括存储器,诸如RAM、ROM、可编程只读存储器(PROM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、磁盘、光盘、软盘、硬盘、可移除磁带盒或闪存驱动器。在一个示例中,存储介质QQ221可以被配置为包括操作系统QQ223、诸如web浏览器应用的应用程序QQ225、小部件或小工具引擎或另一应用以及数据文件QQ227。存储介质QQ221可以存储供UE QQ200使用的各种操作系统中的任何一种或操作系统的组合。
存储介质QQ221可以被配置为包括多个物理驱动单元,如独立磁盘冗余阵列(RAID)、软盘驱动器、闪存、USB闪存驱动器、外部硬盘驱动器、拇指盘驱动器、笔式随身盘驱动器、钥匙盘驱动器、高密度数字多功能盘(HD-DVD)光盘驱动器、内置硬盘驱动器、蓝光光盘驱动器、全息数字数据存储(HDDS)光盘驱动器,外置迷你双列直插式存储器模块(DIMM),同步动态随机存取存储器(SDRAM),外部微DIMM SDRAM,诸如用户身份模块或可移除用户身份(SIM/RUIM)模块的智能卡存储器,其他存储器或其任意组合。存储介质QQ221可以允许UEQQ200访问存储在暂时性或非暂时性存储器介质上的计算机可执行指令、应用程序等,以卸载数据或上载数据。诸如利用通信系统的制品之类的制品可以有形地体现在存储介质QQ221中,存储介质QQ221可以包括设备可读介质。
在图QQ2中,处理电路QQ201可以被配置为使用通信子系统QQ231与网络QQ243b通信。网络QQ243a和网络QQ243b可以是一个或多个相同的网络或一个或多个不同的网络。通信子系统QQ231可以被配置为包括用于与网络QQ243b通信的一个或多个收发机。例如,通信子系统QQ231可以被配置为包括用于根据一个或多个通信协议(例如IEEE 802.QQ2、CDMA、WCDMA、GSM、LTE、UTRAN、WiMax等)与能够进行无线通信的另一设备(例如,另一WD、UE)或无线电接入网络(RAN)的基站的一个或多个远程收发机通信的一个或多个收发机。每个收发机可以包括发射机QQ233和/或接收机QQ235,以分别实现适合于RAN链路的发射机或接收机功能(例如,频率分配等)。此外,每个收发机的发射机QQ233和接收机QQ235可以共享电路组件、软件或固件,或者替代地可以分离地实现。
在所示实施例中,通信子系统QQ231的通信功能可以包括数据通信、语音通信、多媒体通信、诸如蓝牙的短程通信、近场通信、基于位置的通信(诸如用于确定位置的全球定位系统(GPS)的使用)、另一个类似通信功能,或其任意组合。例如,通信子系统QQ231可以包括蜂窝通信、Wi-Fi通信、蓝牙通信和GPS通信。网络QQ243b可以包括有线和/或无线网络,诸如局域网(LAN)、广域网(WAN)、计算机网络、无线网络、电信网络、另一类似网络或其任意组合。例如,网络QQ243b可以是蜂窝网络、Wi-Fi网络和/或近场网络。电源QQ213可以被配置为向UE QQ200的组件提供交流(AC)或直流(DC)电力。
本文描述的特征、益处和/或功能可以在UE QQ200的组件之一中实现,或者在UEQQ200的多个组件之间划分。此外,本文描述的特征、益处和/或功能可以以硬件、软件或固件的任何组合来实现。在一个示例中,通信子系统QQ231可以被配置为包括本文描述的任何组件。此外,处理电路QQ201可以被配置为通过总线QQ202与任何这样的组件通信。在另一个示例中,任何这样的组件可以由存储在存储器中的程序指令表示,当由处理电路QQ201执行时,程序指令执行本文描述的对应功能。在另一示例中,任何这样的组件的功能可以在处理电路QQ201和通信子系统QQ231之间划分。在另一示例中,任何这样的组件的非计算密集型功能可以用软件或固件实现,并且计算密集型功能可以用硬件实现。
图QQ3:根据一些实施例的虚拟化环境
图QQ3是示出虚拟化环境QQ300的示意性框图,其中可以虚拟化由一些实施例实现的功能。在本上下文中,虚拟化意味着创建装置或设备的虚拟版本,这可以包括虚拟化硬件平台、存储设备和网络资源。如本文所使用的,虚拟化可以应用于节点(例如,虚拟化基站或虚拟化无线电接入节点)或设备(例如,UE、无线设备或任何其他类型的通信设备)或其组件,并且涉及一种实现,其中至少一部分功能被实现为一个或多个虚拟组件(例如,通过在一个或多个网络中的一个或多个物理处理节点上执行的一个或多个应用、组件、功能、虚拟机或容器)。
在一些实施例中,本文描述的一些或所有功能可以被实现为由在一个或多个硬件节点QQ330托管的一个或多个虚拟环境QQ300中实现的一个或多个虚拟机执行的虚拟组件。此外,在虚拟节点不是无线电接入节点或不需要无线电连接的实施例(例如,核心网络节点)中,网络节点此时可以完全虚拟化。
这些功能可以由一个或多个应用QQ320(其可以替代地被称为软件实例、虚拟设备、网络功能、虚拟节点、虚拟网络功能等)来实现,一个或多个应用QQ320可操作以实现本文公开的一些实施例的一些特征、功能和/或益处。应用QQ320在虚拟化环境QQ300中运行,虚拟化环境QQ300提供包括处理电路QQ360和存储器QQ390的硬件QQ330。存储器QQ390包含可由处理电路QQ360执行的指令QQ395,由此应用QQ320可操作以提供本文公开的一个或多个特征、益处和/或功能。
虚拟化环境QQ300包括通用或专用网络硬件设备QQ330,其包括一组一个或多个处理器或处理电路QQ360,其可以是商用现货(COTS)处理器、专用集成电路(ASIC)或包括数字或模拟硬件组件或专用处理器的任何其他类型的处理电路。每个硬件设备可以包括存储器QQ390-1,其可以是用于临时存储由处理电路QQ360执行的指令QQ395或软件的非永久存储器。每个硬件设备可以包括一个或多个网络接口控制器(NIC)QQ370,也被称为网络接口卡,其包括物理网络接口QQ380。每个硬件设备还可以包括其中存储有可由处理电路QQ360执行的软件QQ395和/或指令的非暂时性、永久性机器可读存储介质QQ390-2。软件QQ395可以包括任何类型的软件,包括用于实例化一个或多个虚拟化层QQ350的软件(也被称为管理程序)、用于执行虚拟机QQ340的软件以及允许其执行与本文描述的一些实施例相关地描述的功能、特征和/或益处的软件。
虚拟机QQ340包括虚拟处理、虚拟存储器、虚拟联网或接口和虚拟存储、并且可以由对应的虚拟化层QQ350或管理程序运行。可以在虚拟机QQ340中的一个或多个上实现虚拟设备QQ320的实例的不同实施例,并且可以以不同方式做出所述实现。
在操作期间,处理电路QQ360执行软件QQ395以实例化管理程序或虚拟化层QQ350,其有时可被称为虚拟机监视器(VMM)。虚拟化层QQ350可以呈现虚拟操作平台,其在虚拟机QQ340看来像是联网硬件。
如图QQ3所示,硬件QQ330可以是具有通用或特定组件的独立网络节点。硬件QQ330可以包括天线QQ3225并且可以通过虚拟化实现一些功能。备选地,硬件QQ330可以是更大的硬件集群的一部分(例如,在数据中心或客户驻地设备(CPE)中),其中许多硬件节点一起工作并且通过管理和协调(MANO)QQ3100来管理,MANO QQ3100监督应用QQ320的生命周期管理等等。
在一些上下文中,硬件的虚拟化被称为网络功能虚拟化(NFV)。NFV可以用于将众多网络设备类型统一到可以位于数据中心和客户驻地设备中的工业标准高容量服务器硬件、物理交换机和物理存储上。
在NFV的上下文中,虚拟机QQ340可以是物理机器的软件实现,其运行程序如同它们在物理的非虚拟化机器上执行一样。每个虚拟机QQ340以及硬件QQ330中执行该虚拟机的部分(其可以是专用于该虚拟机的硬件和/或由该虚拟机与虚拟机QQ340中的其它虚拟机共享的硬件)形成了单独的虚拟网元(VNE)。
仍然在NFV的上下文中,虚拟网络功能(VNF)负责处理在硬件网络基础设施QQ330之上的一个或多个虚拟机QQ340中运行的特定网络功能,并且对应于图QQ3中的应用QQ320。
在一些实施例中,每个包括一个或多个发射机QQ3220和一个或多个接收机QQ3210的一个或多个无线电单元QQ3200可以耦合到一个或多个天线QQ3225。无线电单元QQ3200可以经由一个或多个适合的网络接口直接与硬件节点QQ330通信,并且可以与虚拟组件结合使用以提供具有无线电能力的虚拟节点,例如无线电接入节点或基站。
在一些实施例中,可以使用控制系统QQ3230来实现一些信令,控制系统QQ3230可以替代地用于硬件节点QQ330和无线电单元QQ3200之间的通信。
图QQ4:根据一些实施例的经由中间网络与主机计算机连接的电信网络
参照图QQ4,根据实施例,通信系统包括电信网络QQ410(例如,3GPP类型的蜂窝网络),电信网络QQ410包括接入网QQ411(例如,无线电接入网)和核心网络QQ414。接入网QQ411包括多个基站QQ412a、QQ412b、QQ412c(例如,NB、eNB、gNB或其他类型的无线接入点),每个基站定义对应覆盖区域QQ413a、QQ413b、QQ413c。每个基站QQ412a、QQ412b、QQ412c通过有线或无线连接QQ415可连接到核心网络QQ414。位于覆盖区域QQ413c中的第一UE QQ491被配置为以无线方式连接到对应基站QQ412c或被对应基站QQ412c寻呼。覆盖区域QQ413a中的第二UE QQ492以无线方式可连接到对应基站QQ412a。虽然在该示例中示出了多个UEQQ491、QQ492,但所公开的实施例同等地适用于唯一的UE处于覆盖区域中或者唯一的UE正连接到对应基站QQ412的情形。
电信网络QQ410自身连接到主机计算机QQ430,主机计算机QQ430可以以独立服务器、云实现的服务器、分布式服务器的硬件和/或软件来实现,或者被实现为服务器集群中的处理资源。主机计算机QQ430可以处于服务提供商的所有或控制之下,或者可以由服务提供商或代表服务提供商来操作。电信网络QQ410与主机计算机QQ430之间的连接QQ421和QQ422可以直接从核心网络QQ414延伸到主机计算机QQ430,或者可以经由可选的中间网络QQ420进行。中间网络QQ420可以是公共、私有或托管网络中的一个或多于一个的组合;中间网络QQ420(若存在)可以是骨干网或互联网;具体地,中间网络QQ420可以包括两个或更多个子网络(未示出)。
图QQ4的通信系统作为整体实现了所连接的UE QQ491、QQ492与主机计算机QQ430之间的连接。该连接可被描述为过顶(over-the-top,OTT)连接QQ450。主机计算机QQ430和所连接的UE QQ491、QQ492被配置为使用接入网QQ411、核心网络QQ414、任何中间网络QQ420和可能的其他基础设施(未示出)作为中介,经由OTT连接QQ450来传送数据和/或信令。在OTT连接QQ450所经过的参与通信设备未意识到上行链路和下行链路通信的路由的意义上,OTT连接QQ450可以是透明的。例如,可以不向基站QQ412通知或者可以无需向基站QQ412通知具有源自主机计算机QQ430的要向所连接的UE QQ491转发(例如,移交)的数据的输入下行链路通信的过去的路由。类似地,基站QQ412无需意识到源自UE QQ491向主机计算机QQ430的输出上行链路通信的未来的路由。
图QQ5:根据一些实施例的通过部分无线连接经由基站与用户设备通信的主机计算机
现将参照图QQ5来描述根据实施例的在先前段落中所讨论的UE、基站和主机计算机的示例实现方式。在通信系统QQ500中,主机计算机QQ510包括硬件QQ515,硬件QQ515包括通信接口QQ516,通信接口QQ516被配置为建立和维护与通信系统QQ500的不同通信设备的接口的有线或无线连接。主机计算机QQ510还包括处理电路QQ518,其可以具有存储和/或处理能力。具体地,处理电路QQ518可以包括适用于执行指令的一个或多个可编程处理器、专用集成电路、现场可编程门阵列或它们的组合(未示出)。主机计算机QQ510还包括软件QQ511,其被存储在主机计算机QQ510中或可由主机计算机QQ510访问并且可由处理电路QQ518来执行。软件QQ511包括主机应用QQ512。主机应用QQ512可操作为向远程用户(例如,UE QQ530)提供服务,UE QQ530经由在UE QQ530和主机计算机QQ510处端接的OTT连接QQ550来连接。在向远程用户提供服务时,主机应用QQ512可以提供使用OTT连接QQ550来发送的用户数据。
通信系统QQ500还包括在电信系统中提供的基站QQ520,基站QQ520包括使其能够与主机计算机QQ510和与UE QQ530进行通信的硬件QQ525。硬件QQ525可以包括:通信接口QQ526,其用于建立和维护与通信系统QQ500的不同通信设备的接口的有线或无线连接;以及无线电接口QQ527,其用于至少建立和维护与位于基站QQ520所服务的覆盖区域(图QQ5中未示出)中的UE QQ530的无线连接QQ570。通信接口QQ526可以被配置为促进到主机计算机QQ510的连接QQ560。连接QQ560可以是直接的,或者它可以经过电信系统的核心网络(图QQ5中未示出)和/或经过电信系统外部的一个或多个中间网络。在所示实施例中,基站QQ520的硬件QQ525还包括处理电路QQ528,处理电路QQ528可以包括适用于执行指令的一个或多个可编程处理器、专用集成电路、现场可编程门阵列或它们的组合(未示出)。基站QQ520还具有内部存储的或经由外部连接可访问的软件QQ521。
通信系统QQ500还包括已经提及的UE QQ530。其硬件QQ535可以包括无线电接口QQ537,其被配置为建立和维护与服务于UE QQ530当前所在的覆盖区域的基站的无线连接QQ570。UE QQ530的硬件QQ535还包括处理电路QQ538,其可以包括适用于执行指令的一个或多个可编程处理器、专用集成电路、现场可编程门阵列或它们的组合(未示出)。UE QQ530还包括软件QQ531,其被存储在UE QQ530中或可由UE QQ530访问并可由处理电路QQ538执行。软件QQ531包括客户端应用QQ532。客户端应用QQ532可操作为在主机计算机QQ510的支持下经由UE QQ530向人类或非人类用户提供服务。在主机计算机QQ510中,执行的主机应用QQ512可以经由端接在UE QQ530和主机计算机QQ510处的OTT连接QQ550与执行客户端应用QQ532进行通信。在向用户提供服务时,客户端应用QQ532可以从主机应用QQ512接收请求数据,并响应于请求数据来提供用户数据。OTT连接QQ550可以传送请求数据和用户数据二者。客户端应用QQ532可以与用户进行交互,以生成其提供的用户数据。
注意,图QQ5所示的主机计算机QQ510、基站QQ520和UE QQ530可以分别与图QQ4的主机计算机QQ430、基站QQ412a、QQ412b、QQ412c之一和UE QQ491、QQ492之一相似或相同。也就是说,这些实体的内部工作可以如图QQ5所示,并且独立地,周围网络拓扑可以是图QQ4的网络拓扑。
在图QQ5中,已经抽象地绘制OTT连接QQ550,以示出经由基站QQ520在主机计算机QQ510与UE QQ530之间的通信,而没有明确地提到任何中间设备以及经由这些设备的消息的精确路由。网络基础设施可以确定该路由,该路由可以被配置为向UE QQ530隐藏或向操作主机计算机QQ510的服务提供商隐藏或向这二者隐藏。在OTT连接QQ550活动时,网络基础设施还可以(例如,基于负载均衡考虑或网络的重新配置)做出其动态地改变路由的决策。
UE QQ530与基站QQ520之间的无线连接QQ570根据贯穿本公开所描述的实施例的教导。各种实施例中的一个或多个实施例可以改进使用OTT连接QQ550向UE QQ530提供的OTT服务的性能,其中无线连接QQ570形成OTT连接QQ550中的最后一段。更精确地,这些实施例的教导可以改进用于视频处理的去块滤波,从而提供诸如改进的视频编码和/或解码的益处。
出于监控一个或多个实施例改进的数据速率、时延和其他因素的目的,可以提供测量过程。还可以存在用于响应于测量结果的变化而重新配置主机计算机QQ510与UEQQ530之间的OTT连接QQ550的可选网络功能。用于重新配置OTT连接QQ550的测量过程和/或网络功能可以以主机计算机QQ510的软件QQ511和硬件QQ515或以UE QQ530的软件QQ531和硬件QQ535或以这二者来实现。在实施例中,传感器(未示出)可被部署在OTT连接QQ550经过的通信设备中或与OTT连接QQ550经过的通信设备相关联地来部署;传感器可以通过提供以上例示的监控量的值或提供软件QQ511、QQ531可以用来计算或估计监控量的其他物理量的值来参与测量过程。对OTT连接QQ550的重新配置可以包括消息格式、重传设置、优选路由等;该重新配置不需要影响基站QQ520,并且其对于基站QQ520来说可以是未知的或不可感知的。这种过程和功能在本领域中可以是已知的和已被实践的。在特定实施例中,测量可以涉及促进主机计算机QQ510对吞吐量、传播时间、时延等的测量的专有UE信令。该测量可以如下实现:软件QQ511和QQ531在其监控传播时间、差错等的同时使得能够使用OTT连接QQ550来发送消息(具体地,空消息或“假”消息)。
图QQ6:根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法
图QQ6是示出了根据一个实施例的在通信系统中实现的方法的流程图。该通信系统包括主机计算机、基站和UE,其可以是参照图QQ4和图QQ5描述的主机计算机、基站和UE。为了本公开的简明,在本部分中将仅包括对图QQ6的图引用。在步骤QQ610中,主机计算机提供用户数据。在步骤QQ610的子步骤QQ611(其可以是可选的)中,主机计算机通过执行主机应用来提供用户数据。在步骤QQ620中,主机计算机发起向UE的携带用户数据的传输。在步骤QQ630(其可以是可选的)中,根据贯穿本公开所描述的实施例的教导,基站向UE发送在主机计算机发起的传输中所携带的用户数据。在步骤QQ640(其也可以是可选的)中,UE执行与主机计算机所执行的主机应用相关联的客户端应用。
图QQ7:根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法
图QQ7是示出了根据一个实施例的在通信系统中实现的方法的流程图。该通信系统包括主机计算机、基站和UE,其可以是参照图QQ4和图QQ5描述的主机计算机、基站和UE。为了本公开的简明,在本部分中将仅包括对图QQ7的图引用。在方法的步骤QQ710中,主机计算机提供用户数据。在可选子步骤(未示出)中,主机计算机通过执行主机应用来提供用户数据。在步骤QQ720中,主机计算机发起向UE的携带用户数据的传输。根据贯穿本公开描述的实施例的教导,该传输可以经由基站。在步骤QQ730(其可以是可选的)中,UE接收传输中所携带的用户数据。
图QQ8:根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法
图QQ8是示出了根据一个实施例的在通信系统中实现的方法的流程图。该通信系统包括主机计算机、基站和UE,其可以是参照图QQ4和图QQ5描述的主机计算机、基站和UE。为了本公开的简明,在本部分中将仅包括对图QQ8的图引用。在步骤QQ810(其可以是可选的)中,UE接收由主机计算机所提供的输入数据。附加地或备选地,在步骤QQ820中,UE提供用户数据。在步骤QQ820的子步骤QQ821(其可以是可选的)中,UE通过执行客户端应用来提供用户数据。在步骤QQ810的子步骤QQ811(其可以是可选的)中,UE执行客户端应用,该客户端应用回应于接收到的主机计算机提供的输入数据来提供用户数据。在提供用户数据时,所执行的客户端应用还可以考虑从用户接收的用户输入。无论提供用户数据的具体方式如何,UE在子步骤QQ830(其可以是可选的)中都发起用户数据向主机计算机的传输。在方法的步骤QQ840中,根据贯穿本公开描述的实施例的教导,主机计算机接收从UE发送的用户数据。
图QQ9:根据一些实施例的在包括主机计算机、基站和用户设备的通信系统中实现的方法
图QQ9是示出了根据一个实施例的在通信系统中实现的方法的流程图。该通信系统包括主机计算机、基站和UE,其可以是参照图QQ4和图QQ5描述的主机计算机、基站和UE。为了本公开的简明,在本部分中将仅包括对图QQ9的图引用。在步骤QQ910(其可以是可选的)中,根据贯穿本公开描述的实施例的教导,基站从UE接收用户数据。在步骤QQ920(其可以是可选的)中,基站发起接收到的用户数据向主机计算机的传输。在步骤QQ930(其可以是可选的)中,主机计算机接收由基站所发起的传输中所携带的用户数据。
可以通过一个或多个虚拟装置的一个或多个功能单元或模块来执行本文公开的任何适合的步骤、方法、特征、功能或益处。每个虚拟装置可以包括多个这些功能单元。这些功能单元可以通过处理电路实现,处理电路可以包括一个或多个微处理器或微控制器以及其他数字硬件(可以包括数字信号处理器(DSP)、专用数字逻辑等)。处理电路可以被配置为执行存储在存储器中的程序代码,该存储器可以包括一种或几种类型的存储器,例如,只读存储器(ROM)、随机存取存储器(RAM)、高速缓冲存储器、闪存设备、光学存储设备等。存储在存储器中的程序代码包括用于执行一种或多种电信和/或数据通信协议的程序指令,以及用于执行本文所述的一种或多种技术的指令。在一些实现中,处理电路可用于使相应功能单元根据本公开的一个或一个实施例执行对应功能。
图W描绘了根据一些实施例的操作电子设备(例如,UE)以对包括多个图像的编码视频序列进行解码的方法,其中,每个图像包括多个块。该方法包括提供编码视频序列的图像的第一块和第二块的操作WO2,其中,第一块和第二块是图像的相邻块。该方法包括定义跨第一块和第二块之间的边界延伸的像素线的操作WO4,其中,该像素线包括第一块的第一多个像素和第二块的第二多个像素。该方法包括基于来自第一多个像素中的距边界最远的第一像素计算第一参考值的操作WO6,以及基于来自第二多个像素中的距边界最远的第二像素计算第二参考值的操作WO8。该方法包括基于第一参考值和第二参考值中的至少一个,使用内插来计算针对第一像素和第二像素之间的像素线的每个像素的滤波后的像素值的操作WO10。该方法包括使用滤波后的像素值来生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块的操作W012。该方法还包括基于第一滤波后的块和第二滤波后的块生成包括解码图像的解码视频序列的操作WO14。
图WW示出了无线网络(例如,图QQ1所示的无线网络)中的装置WW00的示意性框图。该装置可以在无线设备或网络节点(例如,图QQ1所示的无线设备QQ110或网络节点QQ160)中实现。装置WW00可操作以执行参考图W描述的示例方法以及本文公开的可能的任何其他过程或方法。还应理解,图W的方法不一定由装置WW00单独执行。该方法的至少一些操作可以由一个或多个其他实体执行。
虚拟装置WW00可以包括处理电路,其可以包括一个或多个微处理器或微控制器以及其他数字硬件(可以包括数字信号处理器(DSP)、专用数字逻辑等)。处理电路可以被配置为执行存储在存储器中的程序代码,该存储器可以包括一种或几种类型的存储器,例如,只读存储器(ROM)、随机存取存储器、高速缓冲存储器、闪存设备、光学存储设备等。在一些实施例中,存储在存储器中的程序代码包括用于执行一种或多种电信和/或数据通信协议的程序指令,以及用于执行本文所述的一种或多种技术的指令。在一些实施方式中,处理电路可以用于使提供单元WW02、定义单元WW04、第一计算单元WW06、第二计算单元WW08、第三计算单元WW010、第一生成单元WW012和第二生成单元WW014以及装置WW00的任何其他合适的单元执行根据本公开的一个或多个实施例的相应功能。
如图WW中所示,提供单元WWO2被配置为提供编码视频序列的图像的第一块和第二块,其中,第一块和第二块是图像的相邻块。定义单元WW04被配置为定义跨第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,像素线包括第一块的第一多个像素(p0-p7)和第二块的第二多个像素(q0-q7)。第一计算单元WW06被配置为基于来自第一多个像素中的距边界最远的第一像素(p7)计算第一参考值(refP);第二计算单元WW08被配置为基于来自第二多个像素中的距边界最远的第二像素(q7)计算第二参考值(refQ);以及第三计算单元WW010被配置为基于第一参考值(refP)和第二参考值(refQ)中的至少一个,使用内插计算第一像素(p7)和第二像素(q7)之间的像素线的每个像素的滤波后的像素值(p0'至p6'、q0'至q6')。第一生成单元WW012被配置为使用滤波后的像素值(p0’至p6’、q0’至q6’)生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块;以及第二生成单元WW014被配置为基于第一滤波后的块和第二滤波后的块生成包括解码图像的解码视频序列。
图X描绘了根据一些实施例的操作电子设备(例如,UE)以对包括多个图像的视频序列进行编码的方法,其中,每个图像包括多个块。该方法包括:接收包括多个图像的视频序列的操作X02,以及提供视频序列的图像的第一块和第二块的操作X04,其中,第一块和第二块是图像的相邻块。该方法包括定义跨第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7)的操作X06,其中,像素线包括第一块的第一多个像素(p0-p7)和第二块的第二多个像素(q0-q7)。该方法包括基于来自第一多个像素中的距边界最远的第一像素(p7)计算第一参考值(refP)的操作X08;以及基于来自第二多个像素中的距边界最远的第二像素(q7)计算第二参考值(refQ)的操作X010;以及基于第一参考值(refP)和第二参考值(refQ)中的至少一个,使用内插计算第一像素和第二像素之间的像素线的每个像素的滤波后的像素值(p0'至p6'、q0'至q6')的操作X012。该方法还包括使用滤波后的像素值(p0’至p6’、q0’至q6’)生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块的操作X014;基于第一滤波后的块和第二滤波后的块中的至少一个生成包括编码图像的编码视频序列的操作X016。
图XX示出了无线网络(例如,图QQ1所示的无线网络)中的装置XX00的示意性框图。该装置可以在无线设备或网络节点(例如,图QQ1所示的无线设备QQ110或网络节点QQ160)中实现。装置XX00可操作以执行参考图X描述的示例方法以及本文公开的可能的任何其他过程或方法。还应理解,图X的方法不一定由装置XX00单独执行。该方法的至少一些操作可以由一个或多个其他实体执行。
虚拟装置XX00可以包括处理电路,其可以包括一个或多个微处理器或微控制器以及其他数字硬件(可以包括数字信号处理器(DSP)、专用数字逻辑等)。处理电路可以被配置为执行存储在存储器中的程序代码,该存储器可以包括一种或几种类型的存储器,例如,只读存储器(ROM)、随机存取存储器、高速缓冲存储器、闪存设备、光学存储设备等。在一些实施例中,存储在存储器中的程序代码包括用于执行一种或多种电信和/或数据通信协议的程序指令,以及用于执行本文所述的一种或多种技术的指令。在一些实施方式中,处理电路可以用于使接收单元XX02、提供单元XX04、定义单元XX06、第一计算单元XX08、第二计算单元XX010、第三计算单元XX012、第一生成单元XX014和第二生成单元XX016以及装置XX00的任何其他合适的单元执行根据本公开的一个或多个实施例的相应功能。
如图XX所示,装置XX00包括:接收单元XX02,其被配置为接收包括多个图像的视频序列,以及提供单元XX04,其被配置为提供视频序列的图像的第一块和第二块,其中,第一和第二块为图像的相邻块。定义单元XX06被配置为定义跨第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,像素线包括第一块的第一多个像素(p0-p7)和第二块的第二多个像素(q0-q7)。第一计算单元XX08被配置为基于来自第一多个像素中的距边界最远的第一像素(p7)计算第一参考值(refP);第二计算单元XX010被配置为基于来自第二多个像素中的距边界最远的第二像素(q7)计算第二参考值(refQ);以及第三计算单元XX012被配置为基于第一参考值(refP)和第二参考值(refQ)中的至少一个,使用内插计算第一像素和第二像素之间的像素线的每个像素的滤波后的像素值(p0'至p6'、q0'至q6')。第一生成单元XX014被配置为使用滤波后的像素值(p0’至p6’、q0’至q6’)生成与第一块和第二块相对应的第一滤波后的块和第二滤波后的块;以及第二生成单元XX016被配置为基于第一滤波后的块和第二滤波后的块中的至少一个生成包括编码图像的编码视频序列。
术语单元可以在电子、电气设备和/或电子设备领域中具有常规含义,并且可以包括例如电气和/或电子电路、设备、模块、处理器、存储器、逻辑固态和/或分立设备、计算机程序或用于执行相应任务、过程、计算、输出和/或显示功能等的指令,例如本文所述的那些。
在本公开中可以使用以下缩写中的至少一些。如果缩略语之间存在不一致,则应优先考虑上面如何使用它。如果在下面多次列出,则首次列出应优先于任何后续列出。
1xRTT CDMA2000 1x 无线电传输技术
3GPP 第三代伙伴计划
5G 第五代
ABS 几乎空白子帧
ARQ 自动重传请求
AWGN 加性高斯白噪声
BCCH 广播控制信道
BCH 广播信道
CA 载波聚合
CC 载波组件
CCCH SDU 公共控制信道SDU
CDMA 码分多址
CGI 小区全局标识符
CIR 信道脉冲响应
CP 循环前缀
CPICH 公共导频信道
CPICH Ec/No CPICH 每个芯片接收的能量
除以频段内的功率密度
CQI 信道质量信息
C-RNTI 小区RNTI
CSI 信道状态信息
DCCH 专用控制信道
DL 下行链路
DM 解调
DMRS 解调参考信号
DRX 不连续接收
DTX 不连续传输
DTCH 专用业务信道
DUT 被测设备
E-CID 增强型小区ID(定位方法)
E-SMLC 演进服务移动位置中心
ECGI演进的CGI
eNB E-UTRAN 节点B
EPDCCH 增强物理下行链路控制信道
E-SMLC 演进服务移动位置中心
E-UTRA 演进的UTRA
E-UTRAN 演进的UTRAN
FDD 频分双工
FFS 有待进一步研究
GERN GSM EDGE 无线电接入网
gNB NR 中的基站
GNSS 全球导航卫星系统
GSM 全球移动通信系统
HARQ 混合自动重传请求
HO 切换
HSPA 高速分组接入
HRPD 高速分组数据
LOS 视距
LPP LTE定位协议
LTE 长期演进
MAC 媒体访问控制
MBMS 多媒体广播多播服务
MBSFN 多媒体广播多播服务单频网络
MBSFN ABS MBSFN几乎空白子帧
MDT 最小化路测
MIB 主信息块
MME 移动性管理实体
MSC 移动交换中心
NPDCCH 窄带物理下行链路控制信道
NR 新无线电
OCNG OFDMA信道噪声发生器
OFDM 正交频分复用
OFDMA 正交频分多址
OSS 操作支持系统
OTDOA 观测到达时间差
O&M 运营和维护
PBCH 物理广播频道
P-CCPCH 主要公共控制物理信道
Pcell 主小区
PCFICH 物理控制格式指示符信道
PDCCH 物理下行链路控制信道
PDP 分布延迟分布
PDSCH 物理下行链路共享信道
PGW 分组网关
PHICH 物理混合ARQ指示符信道
PLMN 公共陆地移动网络
PMI 预编码矩阵指示符
PRACH 物理随机接入信道
PRS 定位参考信号
PSS 主同步信号
PUCCH 物理上行链路控制信道
PUSCH 物理上行链路共享信道
RACH 随机接入信道
QAM 正交幅度调制
RAN 无线电接入网
RAT 无线电接入技术
RLM 无线电链路管理
RNC 无线电网络控制器
RNTI 无线电网络临时标识符
RRC 无线电资源控制
RRM 无线电资源管理
RS 参考信号
RSCP 接收信号码功率
RSRP 参考符号接收功率或
参考信号接收功率
RSRQ 参考信号接收质量或
参考符号接收质量
RSSI 接收信号强度指示符
RSTD 参考信号时间差
SCH 同步信道
SCell 辅小区
SDU 服务数据单元
SFN 系统帧号
SGW 服务网关
SI 系统信息
SIB 系统信息块
SNR 信噪比
SON 自优化网络
SS 同步信号
SSS 辅同步信号
TDD 时分双工
TDOA 到达时间差
TOA 到达时间
TSS 三级同步信号
TTI 传输时间间隔
UE 用户设备
UL 上行链路
UMTS 通用移动电信系统
USIM 通用订户身份模块
UTDOA 上行链路到达时间差
UTRA 通用陆地无线电接入
UTRAN 演进通用陆地无线电接入网
WCDMA 宽带CDMA
WLAN 广域局域网
下文提供了进一步的定义。
在对发明构思的各种实施例的以上描述中,要理解的是,本文使用的术语仅用于描述具体的实施例的目的,而不意图限制发明构思。除非另外定义,否则本文使用的所有术语(包括技术和科学术语)具有发明构思所属领域的普通技术人员通常所理解的相同意义。还应理解,诸如在通用词典中定义的那些术语之类的术语应被解释为具有与它们在本说明书的上下文和相关技术中的意义相一致的意义,而不被解释为理想或过于表面的意义,除非本文如此明确地定义。
当元件被称为相对于另一元件进行“连接”、“耦接”、“响应”或其变化时,它可以直接连接、耦接到或者响应于其它元件,或者可以存在中间元件。相反,当元件被称作相对于另一元件进行“直接连接”、“直接耦接”、“直接响应”或其变化时,不存在中间元件。贯穿全文,类似附图标记表示类似的元件。此外,本文使用的“耦接”、“连接”、“响应”或其变型可以包括无线耦接、连接或响应。如本文使用的,单数形式“一”,“一个”和“所述”意在还包括复数形式,除非上下文明确地给出相反的指示。为了简洁和/或清楚,可能没对公知的功能或结构进行详细描述。术语“和/或”包括关联列出的一个或多个项目的任意和所有组合。
将理解,虽然本文中可以使用术语第一、第二、第三等来描述各元件/操作,但是这些元件/操作不应被这些术语限制。这些术语仅用于将一个元素/操作与另一个元素/操作相区分。因此,在一些实施例中的第一元件/操作可以在其他实施例中被称作第二元件/操作,而不会脱离本发明构思的教导。贯穿说明书,相同的附图标记或相同的参考符号表示相同或类似的元素。
本文使用的术语“包括”、“包含”、“含有”、“涵盖”、“由......构成”、“计入”、“有”、“拥有”、“具有”或其变型是开放式的,并且包括一个或多个所记载的特征、整数、元素、步骤、组件、或功能,但是不排除存在或添加一个或多个其他特征、整数、元素、步骤、组件、功能或其组合。此外,如本文的使用,常用缩写“例如(e.g.)”源于拉丁短语“exempligratia”,其可以用于介绍或指定之前提到的项目的一个或多个一般示例,而不意在作为该项目的限制。常用缩写“即(i.e.)”源于拉丁短语“id est”,可以用于指定更广义的引述的具体项目。
本文参考计算机实现的方法、装置(系统和/或设备)和/或计算机程序产品的框图和/或流程图图示描述了示例实施例。应理解,可以通过由一个或多个计算机电路执行的计算机程序指令来实现框图和/或流程图图示的框以及框图和/或流程图图示中的框的组合。可以将这些计算机程序指令提供给通用计算机电路、专用计算机电路和/或其它可编程数据处理电路的处理器电路来产生机器,使得经由计算机和/或其它可编程数据处理装置的处理器执行的指令转换和控制晶体管、存储器位置中存储的值、以及这种电路内的其它硬件组件,以实现框图和/或流程图框中指定的功能/动作,并由此创建用于实现框图和/或流程图框中指定的功能/动作的装置(功能体)和/或结构。
这些计算机程序指令也可以存储在有形计算机可读介质中,所述有形计算机可读介质能够指导计算机或其它可编程数据处理装置按照具体的方式作用,使得在计算机可读介质中存储的指令产生制品,所述制品包括实现在所述框图和/或流程图的框中指定的功能/动作的指令。因此,发明构思的实施例可以在硬件和/或在诸如数字信号处理器之类的处理器上运行的软件(包括固件、贮存软件、微代码等)上实现,所述吹起可以统称为"电路"、"模块"或其变体。
还应注意,在一些备选实现中,在框中标记的功能/动作可以不以流程图中标记的顺序发生。例如,依赖于所涉及的功能/动作,连续示出的两个框实际上可以实质上同时执行,或者框有时候可以按照相反的顺序执行。此外,可以将流程图和/或框图的给定框的功能分成多个框和/或流程图和/或框图的两个或更多个框的功能可以至少部分地被集成。最后,在不脱离发明构思的范围的情况下,可以在所示出的框之间添加/插入其他框,和/或可以省略框/操作。此外,尽管一些框包括用于指示通信的主要方向的关于通信路径的箭头,但是应理解,通信可以以与所表示的箭头相反的方向发生。
在基本上不脱离本发明构思原理的前提下,可以对实施例做出许多改变和修改。所有这些改变和修改旨在在本文中被包括在发明构思的范围内。因此,上述主题应理解为示例性的而非限制性的,并且实施例的示例旨在覆盖落入本发明构思的精神和范围之内的所有这些修改、改进和其他实施例。因此,在法律允许的最大范围内,本发明构思的范围应由包括实施例的示例及其等同物的本公开的最宽允许解释来确定,并且不应受限于或限制于之前的具体实施方式。

Claims (40)

1.一种对包括多个图像的编码视频序列进行解码的方法,其中,所述多个图像中的每个图像包括多个块,所述方法包括:
提供(803)所述编码视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;
定义(805)跨所述第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);
基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算(807)第一参考值(refP);
基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算(809)第二参考值(refQ);
基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算(813)针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');
使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成(815)与所述第一块和所述第二块相对应的第一滤波后的块和第二滤波后的块;以及
基于所述第一滤波后的块和第二滤波后的块生成(817)包括解码图像的解码视频序列。
2.根据权利要求1所述的方法,还包括:
渲染(819)所述解码视频序列以便在屏幕(509)上显示。
3.根据权利要求1-2中任一项所述的方法,还包括:
基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0)计算(811)第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;
其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
4.根据权利要求3所述的方法,其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
5.根据权利要求3-4中任一项所述的方法,其中,所述第三像素被包括在所述第一块的所述第一多个像素中,并且其中,所述第四像素被包括在所述第二块的所述第二多个像素中。
6.根据权利要求1-2中任一项所述的方法,其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第二像素(q7)之间的线中的像素,基于所述第一参考值(refP)和所述第二参考值(refQ),使用内插计算滤波后的像素值。
7.根据权利要求1-6中任一项所述的方法,其中,所述第一多个像素和所述第二多个像素包括数量相等的像素。
8.根据权利要求1-6中任一项所述的方法,其中,所述第一多个像素和所述第二多个像素包括数量不同的像素。
9.根据权利要求1-8中任一项所述的方法,其中,计算所述第一参考值包括:基于所述第一像素(p7)的值和所述线中与所述第一像素(p7)相邻的像素(p6)的值,将所述第一参考值(refP)计算为平均值,并且其中,计算所述第二参考值(refQ)包括:基于所述第二像素(q7)的值和所述线中与所述第二像素(q7)相邻的像素(q6)的值,将所述第二参考值计算为平均值。
10.根据权利要求1-9中任一项所述的方法,其中,使用内插计算所述滤波后的像素值包括:基于相应像素的未滤波的值和阈值来裁剪所述滤波后的像素值中的至少一个。
11.一种对包括多个图像的视频序列进行编码的方法,其中,所述多个图像中的每个图像包括多个块,所述方法包括:
接收(901)包括所述多个图像的视频序列;
提供(903)所述视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;
定义(905)跨所述第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);
基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算(907)第一参考值(refP);
基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算(909)第二参考值(refQ);
基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算(913)针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');
使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成(915)与所述第一块和第二块相对应的第一滤波后的块和第二滤波后的块;以及
基于所述第一滤波后的块和第二滤波后的块中的至少一个,生成(917)包括编码图像的编码视频序列。
12.根据权利要求11所述的方法,还包括:
基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0)计算(911)第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;
其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
13.根据权利要求12所述的方法,其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
14.根据权利要求12-13中任一项所述的方法,其中,所述第三像素被包括在所述第一块的第一多个像素中,并且其中,所述第四像素被包括在所述第二块的第二多个像素中。
15.根据权利要求11所述的方法,其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第二像素(q7)之间的线中的像素,基于所述第一参考值(refP)和所述第二参考值(refQ),使用内插计算滤波后的像素值。
16.根据权利要求11-15中任一项所述的方法,其中,所述第一多个像素和所述第二多个像素包括数量相等的像素。
17.根据权利要求11-15中任一项所述的方法,其中,所述第一多个像素和所述第二多个像素包括数量不同的像素。
18.根据权利要求11-17中任一项所述的方法,其中,计算所述第一参考值包括:基于所述第一像素(p7)的值和所述线中与第一像素(p7)相邻的像素(p6)的值,将所述第一参考值(refP)计算为平均值,并且其中,计算所述第二参考值(refQ)包括:基于所述第二像素(q7)的值和所述线中与所述第二像素(q7)相邻的像素(q6)的值,将所述第二参考值计算为平均值。
19.根据权利要求11-18中任一项所述的方法,其中,计算所述第一参考值包括:基于所述第一像素以及基于所述第一块中与所述第一像素相邻并且在所述像素线之外的另一像素,计算所述第一参考值,并且其中,计算所述第二参考值包括:基于所述第二像素以及基于在所述第二块中与所述第二像素相邻并且在所述像素线之外的另一像素,计算所述第二参考值。
20.根据权利要求11-19中任一项所述的方法,其中,使用内插计算所述滤波后的像素值包括:基于相应像素的未滤波的值和阈值来裁剪所述滤波后的像素值中的至少一个。
21.一种电子设备(500),适于对包括多个图像的编码视频序列进行解码,其中,所述多个图像中的每个图像包括多个块,其中,所述电子设备适于:
提供所述编码视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;
定义跨所述第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);
基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算第一参考值(refP);
基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算第二参考值(refQ);
基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');
使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成与所述第一块和第二块相对应的第一滤波后的块和第二滤波后的块;以及
基于所述第一滤波后的块和所述第二滤波后的块生成包括解码图像的解码视频序列。
22.根据权利要求21所述的电子设备(500),其中,所述电子设备还适于:
渲染所述解码视频序列以便在屏幕(509)上显示。
23.根据权利要求21-22中任一项所述的电子设备(500),其中,所述电子设备还适于:
基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0),计算第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;
其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
24.根据权利要求23所述的电子设备(500),其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
25.根据权利要求23-24中任一项所述的电子设备(500),其中,所述第三像素被包括在所述第一块的第一多个像素中,并且其中,所述第四像素被包括在所述第二块的第二多个像素中。
26.一种电子设备(500),被配置为对包括多个图像的编码视频序列进行解码,其中,所述多个图像中的每个图像包括多个块,所述电子设备包括:
处理器(503);以及
与所述处理器耦合的存储器(505),其中,所述存储器包括指令,使得当所述指令由所述处理器执行时,所述处理器被配置为:
提供所述编码视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;
定义跨所述第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);
基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算第一参考值(refP);
基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算第二参考值(refQ);
基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');
使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成与所述第一块和所述第二块相对应的第一滤波后的块和第二滤波后的块;以及
基于所述第一滤波后的块和所述第二滤波后的块生成包括解码图像的解码视频序列。
27.根据权利要求26所述的电子设备(500),其中,所述处理器还被配置为:
渲染所述解码视频序列以便在屏幕(509)上显示。
28.根据权利要求26-27中任一项所述的电子设备(500),其中,所述处理器还被配置为:
基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0),计算第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;
其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
29.根据权利要求28所述的电子设备(500),其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
30.根据权利要求28-29中任一项所述的电子设备(500),其中,所述第三像素被包括在所述第一块的第一多个像素中,并且其中,所述第四像素被包括在所述第二块的第二多个像素中。
31.一种电子设备(500),适于对包括多个图像的视频序列进行编码,其中,所述多个图像中的每个图像包括多个块,其中,所述电子设备适于:
接收包括所述多个图像的视频序列;
提供所述视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;
定义跨所述第一块和所述第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);
基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算第一参考值(refP);
基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算第二参考值(refQ);
基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');
使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成与所述第一块和所述第二块相对应的第一滤波后的块和第二滤波后的块;以及
基于所述第一滤波后的块和所述第二滤波后的块中的至少一个,生成包括编码图像的编码视频序列。
32.根据权利要求31所述的电子设备,其中,所述电子设备还适于:
基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0)计算第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;
其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
33.根据权利要求32所述的电子设备,其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
34.根据权利要求32-33中任一项所述的电子设备,其中,所述第三像素被包括在所述第一块的第一多个像素中,并且其中,所述第四像素被包括在所述第二块的第二多个像素中。
35.根据权利要求31所述的电子设备,其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第二像素(q7)之间的线中的像素,基于所述第一参考值(refP)和所述第二参考值(refQ),使用内插计算滤波后的像素值。
36.一种电子设备(500),被配置为对包括多个图像的视频序列进行编码,其中,所述多个图像中的每个图像包括多个块,所述电子设备包括:
处理器(503);以及
与所述处理器耦合的存储器(505),其中,所述存储器包括指令,使得当所述指令由所述处理器执行时,所述处理器被配置为:
接收包括所述多个图像的视频序列;
提供所述视频序列的图像的第一块和第二块,其中,所述第一块和第二块是所述图像的相邻块;
定义跨所述第一块和第二块之间的边界延伸的像素线(p0至p7、q0至q7),其中,所述像素线包括所述第一块的第一多个像素(p0-p7)和所述第二块的第二多个像素(q0-q7);
基于来自所述第一多个像素中的距所述边界最远的第一像素(p7)计算第一参考值(refP);
基于来自所述第二多个像素中的距所述边界最远的第二像素(q7)计算第二参考值(refQ);
基于所述第一参考值(refP)和所述第二参考值(refQ)中的至少一个,使用内插来计算针对所述第一像素(p7)和所述第二像素(q7)之间的像素线中的每个像素的滤波后的像素值(p0'至p6'、q0'至q6');
使用所述滤波后的像素值(p0’至p6’、q0’至q6’)生成与所述第一块和所述第二块相对应的第一滤波后的块和第二滤波后的块;以及
基于所述第一滤波后的块和所述第二滤波后的块中的至少一个,生成包括编码图像的编码视频序列。
37.根据权利要求36所述的电子设备,其中,所述处理器还被配置为:
基于来自所述像素线(p0至p7、q0至q7)的第三像素(p0)和第四像素(q0),计算第三参考值(refMiddle),其中,所述第三像素(p0)在所述第一像素(p7)和所述第四像素(q0)之间的线中,并且其中,所述第四像素(q0)在所述第三像素(p0)和所述第二像素(q7)之间的线中;
其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第三像素(p0)之间的线中的像素,基于所述第一参考值(refP)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值,并且针对所述第二像素(q7)和所述第四像素(q0)之间的线中的像素,基于所述第二参考值(refQ)和所述第三参考值(refMiddle),使用内插计算滤波后的像素值。
38.根据权利要求37所述的电子设备,其中,计算所述第三参考值(refMiddle)包括:基于所述第三像素(p0)的值和所述第四像素(q0)的值,将所述第三参考值计算为平均值。
39.根据权利要求37-38中任一项所述的电子设备,其中,所述第三像素被包括在所述第一块的第一多个像素中,并且其中,所述第四像素被包括在所述第二块的第二多个像素中。
40.根据权利要求36所述的电子设备,其中,计算所述滤波后的像素值包括:针对所述第一像素(p7)和所述第二像素(q7)之间的线中的像素,基于所述第一参考值(refP)和所述第二参考值(refQ),使用内插计算滤波后的像素值。
CN201880083972.8A 2017-12-29 2018-12-14 使用参考值提供视频编码和/或解码的方法及相关设备 Active CN111527753B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762611852P 2017-12-29 2017-12-29
US62/611,852 2017-12-29
PCT/EP2018/084990 WO2019129509A1 (en) 2017-12-29 2018-12-14 Methods providing encoding and/or decoding of video using reference values and related devices

Publications (2)

Publication Number Publication Date
CN111527753A true CN111527753A (zh) 2020-08-11
CN111527753B CN111527753B (zh) 2022-03-08

Family

ID=64755546

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880083972.8A Active CN111527753B (zh) 2017-12-29 2018-12-14 使用参考值提供视频编码和/或解码的方法及相关设备

Country Status (7)

Country Link
US (2) US11889054B2 (zh)
EP (1) EP3732886A1 (zh)
JP (1) JP6964780B2 (zh)
CN (1) CN111527753B (zh)
MA (1) MA50209B1 (zh)
MX (1) MX2020006500A (zh)
WO (1) WO2019129509A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2019242247B2 (en) * 2018-03-30 2022-12-22 FG Innovation Company Limited Systems and methods for applying deblocking filters to reconstructed video data
US11722269B2 (en) * 2018-10-03 2023-08-08 Telefonaktiebolaget Lm Ericsson (Publ) Compressing user data transmitted between a lower layer split central unit and a radio unit using bitmap representations
AU2020341422B2 (en) * 2019-09-06 2024-02-29 Telefonaktiebolaget Lm Ericsson (Publ) Deblocking filter selection in video or image coding

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009131508A2 (en) * 2008-04-23 2009-10-29 Telefonaktiebolaget Lm Ericsson (Publ) Template-based pixel block processing
US20110038415A1 (en) * 2009-08-17 2011-02-17 Samsung Electronics Co., Ltd. Method and apparatus for encoding video, and method and apparatus for decoding video
US20110170609A1 (en) * 2010-01-08 2011-07-14 Nokia Corporation Apparatus, a method and a computer program for video processing
CN102265618A (zh) * 2008-12-25 2011-11-30 夏普株式会社 图像解码设备和图像编码设备
CN107295353A (zh) * 2017-08-15 2017-10-24 电子科技大学 视频编码参考块滤波方法

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6496605B1 (en) * 1996-08-02 2002-12-17 United Module Corporation Block deformation removing filter, image processing apparatus using the same, method of filtering image signal, and storage medium for storing software therefor
FI103003B (fi) 1997-06-13 1999-03-31 Nokia Corp Suodatusmenetelmä, suodatin ja kannettava päätelaite
KR100269125B1 (ko) * 1997-10-25 2000-10-16 윤덕용 양자화효과감소를위한영상데이터후처리방법및장치
US6975777B1 (en) * 1999-03-26 2005-12-13 Victor Company Of Japan, Ltd. Apparatus and method of block noise detection and reduction
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
JP3698158B2 (ja) * 2003-06-27 2005-09-21 三菱電機株式会社 ポストフィルタ及びポストフィルタ処理方法並びに映像信号復号化装置
KR101000926B1 (ko) * 2004-03-11 2010-12-13 삼성전자주식회사 영상의 불연속성을 제거하기 위한 필터 및 필터링 방법
US7539248B2 (en) * 2004-04-29 2009-05-26 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7460596B2 (en) * 2004-04-29 2008-12-02 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US20060013315A1 (en) * 2004-07-19 2006-01-19 Samsung Electronics Co., Ltd. Filtering method, apparatus, and medium used in audio-video codec
JP2006115078A (ja) * 2004-10-13 2006-04-27 Matsushita Electric Ind Co Ltd 画像データの信号処理装置及びその方法
JP4649355B2 (ja) * 2006-03-27 2011-03-09 富士通株式会社 ブロックノイズ検出方法及び装置並びにブロックノイズ低減方法及び装置
EP1848219B1 (en) * 2006-04-18 2008-11-05 Pioneer Corporation Block noise removal device
JP2009004920A (ja) * 2007-06-19 2009-01-08 Panasonic Corp 画像符号化装置および画像符号化方法
WO2009044549A1 (ja) * 2007-10-03 2009-04-09 Panasonic Corporation ブロック歪みを減少させる方法および装置
US8971412B2 (en) * 2008-04-10 2015-03-03 Qualcomm Incorporated Advanced interpolation techniques for motion compensation in video coding
US20110110603A1 (en) * 2008-07-03 2011-05-12 Tomohiro Ikai Filter device
KR101590500B1 (ko) * 2008-10-23 2016-02-01 에스케이텔레콤 주식회사 동영상 부호화/복호화 장치, 이를 위한 인트라 예측 방향에기반한 디블록킹 필터링 장치 및 필터링 방법, 및 기록 매체
KR101910502B1 (ko) * 2011-01-10 2018-10-22 삼성전자주식회사 변환계수를 이용한 영상 블록현상 제거 방법 및 그 장치
JP6037179B2 (ja) * 2011-02-25 2016-12-07 サン パテント トラスト デブロッキング処理方法およびデブロッキング処理装置
US8983218B2 (en) * 2012-04-11 2015-03-17 Texas Instruments Incorporated Virtual boundary processing simplification for adaptive loop filtering (ALF) in video coding
WO2014007735A1 (en) * 2012-07-03 2014-01-09 Telefonaktiebolaget L M Ericsson (Publ) Controlling deblocking filtering
CN106303550B (zh) * 2015-06-11 2019-06-21 华为技术有限公司 去块效应滤波方法和去块效应滤波器
JP7173961B2 (ja) * 2016-08-21 2022-11-16 エルジー エレクトロニクス インコーポレイティド 映像符号化/復号化方法及びそのための装置
US10735725B2 (en) * 2016-09-14 2020-08-04 Microsoft Technology Licensing, Llc Boundary-intersection-based deblock filtering
KR20230085949A (ko) * 2016-12-27 2023-06-14 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 부호화 장치, 복호 장치, 부호화 방법 및 복호 방법
WO2018123423A1 (ja) * 2016-12-28 2018-07-05 ソニー株式会社 画像処理装置及び画像処理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009131508A2 (en) * 2008-04-23 2009-10-29 Telefonaktiebolaget Lm Ericsson (Publ) Template-based pixel block processing
CN102265618A (zh) * 2008-12-25 2011-11-30 夏普株式会社 图像解码设备和图像编码设备
US20110038415A1 (en) * 2009-08-17 2011-02-17 Samsung Electronics Co., Ltd. Method and apparatus for encoding video, and method and apparatus for decoding video
US20110170609A1 (en) * 2010-01-08 2011-07-14 Nokia Corporation Apparatus, a method and a computer program for video processing
CN107295353A (zh) * 2017-08-15 2017-10-24 电子科技大学 视频编码参考块滤波方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
ANDREY NORKIN ET AL: "HEVC Deblocking Filter", 《IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY》 *
IOAN TABUS; IONUT SCHIOPU; JAAKKO ASTOLA: "Context Coding of Depth Map Images Under the Piecewise-Constant Image Model Representation", 《 IEEE TRANSACTIONS ON IMAGE PROCESSING》 *
JANI LAINEMA ET AL: "Intra picture coding with planar representations", 《28TH PICTURE CODING SYMPOSIUM》 *
隋玉萍;何昕;魏仲慧: "高帧频数字图像序列实时压缩算法", 《大连理工大学学报》 *

Also Published As

Publication number Publication date
EP3732886A1 (en) 2020-11-04
US20240098256A1 (en) 2024-03-21
MX2020006500A (es) 2020-09-17
CN111527753B (zh) 2022-03-08
JP2021508966A (ja) 2021-03-11
MA50209A1 (fr) 2020-10-28
US20210067770A1 (en) 2021-03-04
JP6964780B2 (ja) 2021-11-10
US11889054B2 (en) 2024-01-30
WO2019129509A1 (en) 2019-07-04
MA50209B1 (fr) 2021-06-30

Similar Documents

Publication Publication Date Title
US20210352291A1 (en) Determining filter length for deblocking during encoding and/or decoding of video
US11310769B2 (en) Method, apparatus, and computer-readable medium for enhanced decoding of narrowband master information blocks (MIB-NB)
US20240098256A1 (en) Methods providing encoding and/or decoding of video using reference values and related devices
US20150146545A1 (en) Handling signal quality measurements in a wireless communication network
WO2020076203A1 (en) Methods and apparatuses for cell-free massive mimo communication
US11233553B2 (en) Method and devices for estimation of MIMO channel state information
KR102339059B1 (ko) 5g에 대한 효율적인 plmn 인코딩
EP4133670A1 (en) Carrier aggregation limit for rel-16 physical downlink control channel monitoring capabilities
WO2019073070A1 (en) IMPROVING A N2 NOTIFICATION PROCEDURE
US20240163471A1 (en) Generating a motion vector predictor list
WO2019102373A1 (en) Placement of known information bits for polar coding with mixed criteria
US20230284131A1 (en) Cell Selection with Coverage Recovery for Reduced Capability User Equipment
WO2020141123A1 (en) History-based intra most probable mode derivation
WO2021066729A1 (en) Method and device for providing resource status information
WO2019068753A1 (en) IMPROVED MOTION VECTOR PROTECTION
WO2021046761A1 (en) Ul dmrs configuration for mu mimo
EP4055760A1 (en) Capability handling related to per-bwp mimo layer indication

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40031776

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant