CN112514390B - 视频编码的方法和装置 - Google Patents

视频编码的方法和装置 Download PDF

Info

Publication number
CN112514390B
CN112514390B CN202080004071.2A CN202080004071A CN112514390B CN 112514390 B CN112514390 B CN 112514390B CN 202080004071 A CN202080004071 A CN 202080004071A CN 112514390 B CN112514390 B CN 112514390B
Authority
CN
China
Prior art keywords
image
processor
boundary
filtering
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080004071.2A
Other languages
English (en)
Other versions
CN112514390A (zh
Inventor
周焰
郑萧桢
王亚强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of CN112514390A publication Critical patent/CN112514390A/zh
Application granted granted Critical
Publication of CN112514390B publication Critical patent/CN112514390B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Abstract

一种视频编码的方法和装置,包括:利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,该第一边界图像块由第二处理器进行编码;利用该第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,该第二边界图像块由第三处理器进行编码,该待编码图像包括相邻的第一图像和第二图像,该第一边界图像块为所述第一图像中的边界图像块,该第二边界图像块为所述第二图像中的边界图像块,所述第二边界图像块与所述第一边界图像块相邻;利用该第一处理器,基于该第一编码参数信息、该第二编码参数信息、该第一重建像素和该第二重建像素,对该第一图像该第二图像之间的相邻边界进行滤波。

Description

视频编码的方法和装置
版权申明
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在的该专利文件或者该专利披露。
技术领域
本申请涉及图像处理领域,并且更为具体地,涉及一种视频编码的方法和装置。
背景技术
目前,在实际应用中,由于对于视频分辨率和帧率的需求不断上升,单核的硬件编码器已经不能满足需求,多核的硬件编码器可以提供更高的编码性能,从而可以满足更高的分辨率和帧率的需求。多核的硬件编码器通常会将图像或视频分为多个瓦片(tile),每个核负责其中一个或多个tile的编码。
由于图像被划分到多个核中进行编码,在图像被划分的边界处会出现较为明显的边界块效应,从而导致图像显示质量较差,用户观看视频的体验降低。
因此,如何消除由于不同核编码同一图像的不同区域而导致的边界块效应是一项亟待解决的问题。
发明内容
本申请实施例提供一种视频编码的方法和装置,能够消除由于不同核编码同一帧图像中的不同区域而导致的边界块效应,提升图像显示质量,进一步地,可以提高用户观看视频的体验。
第一方面,提供一种视频编码的方法,包括:利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,所述第一边界图像块由第二处理器进行编码;利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,所述第二边界图像块由第三处理器进行编码,所述待编码图像包括相邻的第一图像和第二图像,所述第一边界图像块为所述第一图像中的边界图像块,所述第二边界图像块为所述第二图像中的边界图像块,所述第二边界图像块与所述第一边界图像块相邻;利用所述第一处理器,基于所述第一编码参数信息、所述第二编码参数信息、所述第一重建像素和所述第二重建像素,对所述第一图像和所述第二图像之间的相邻边界进行滤波。
第二方面,提供一种视频编码的装置,包括第一处理器、第二处理器和第三处理器;所述第一处理器,用于接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,所述第一边界图像块由第二处理器进行编码;接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,所述第二边界图像块由第三处理器进行编码,所述待编码图像包括相邻的第一图像和第二图像,所述第一边界图像块为所述第一图像中的边界图像块,所述第二边界图像块为所述第二图像中的边界图像块,所述第二边界图像块与所述第一边界图像块相邻;基于所述第一编码参数信息、所述第二编码参数信息、所述第一重建像素和所述第二重建像素,对所述第一图像和所述第二图像之间的相邻边界进行滤波。
第三方面,提供了一种视频编码装置,包括处理器和存储器。该存储器用于存储计算机程序,该处理器用于调用并运行该存储器中存储的计算机程序,执行上述第一方面或其各实现方式中的方法。
第四方面,提供一种芯片,用于实现上述第一方面或其各实现方式中的方法。
具体地,该芯片包括:处理器,用于从存储器中调用并运行计算机程序,使得安装有该芯片的设备执行如上述第一方面或其各实现方式中的方法。
第五方面,提供了一种计算机可读存储介质,用于存储计算机程序,该计算机程序包括用于执行第一方面或第一方面的任意可能的实现方式中的方法的指令。
第六方面,提供了一种计算机程序产品,包括计算机程序指令,该计算机程序指令使得计算机执行上述第一方面或第一方面的各实现方式中的方法。
本申请实施例提供的视频编码的方法,在对待编码图像进行划分得到第一图像和第二图像且该两个图像分别由第二处理器和第三处理器进行处理的情况下,由于在对第一图像和第二图像之间的相邻边界进行滤波的时候,利用第一处理器接收第二处理器和第三处理器发送的与划分边界线相邻的边界图像块的编码参数信息和重建像素,基于接收到信息和重建像素,利用第一处理器可以消除由于不同编码器编码导致的边界,同时也可以保证tile边界处的编码质量,减小对重建图像的主观质量的影响,进一步地,可以提高用户的观看体验。此外,本申请实施例提供的方法,可以简化处理tile所在的处理器的设计复杂度,在硬件实现上较为简单。
附图说明
下面将对实施例使用的附图作简单地介绍。
图1是应用本申请实施例的技术方案的架构图;
图2是根据本申请实施例的视频编码框架2示意图;
图3是本申请实施例提供的去块滤波示意图;
图4是本申请一实施例提供的视频编码方法的示意性图;
图5a是本申请一实施例提供的对待编码视频划分的示意性图;
图5b是本申请另一实施例提供的对待编码视频划分的示意性图;
图5c是本申请又一实施例提供的对待编码视频划分的示意性图;
图6是本申请再一实施例提供的对待编码视频划分的示意性图;
图7是本申请实施例提供的对边界进行滤波所影响的像素的示意图;
图8是本申请再一实施例提供的对待编码视频划分的示意性图;
图9a是本申请一实施例提供的对第一图像错位滤波的示意图;
图9b是本申请一实施例提供的对第二图像错位滤波的示意图;
图10是本申请一实施例提供的对待编码图像进行错位滤波的示意图;
图11a是本申请另一实施例提供的对第一图像错位滤波的示意图;
图11b是本申请另一实施例提供的对第二图像错位滤波的示意图;
图12是本申请另一实施例提供的对待编码图像进行错位滤波的示意图;
图13是本申请一实施例提供的视频编码装置的示意性结构图;
图14是本申请实施例提供的芯片的示意性结构图。
具体实施方式
下面对本申请实施例中的技术方案进行描述。
除非另有说明,本申请实施例所使用的所有技术和科学术语与本申请的技术领域的技术人员通常理解的含义相同。本申请中所使用的术语只是为了描述具体的实施例的目的,不是旨在限制本申请的范围。
图1是应用本申请实施例的技术方案的架构图。
如图1所示,系统100可以接收待处理数据102,对待处理数据102进行处理,产生处理后的数据108。例如,系统100可以接收待编码数据,对待编码数据进行编码以产生编码后的数据,或者,系统100可以接收待解码数据,对待解码数据进行解码以产生解码后的数据。在一些实施例中,系统100中的部件可以由一个或多个处理器实现,该处理器可以是计算设备中的处理器,也可以是移动设备(例如无人机)中的处理器。该处理器可以为任意种类的处理器,本发明实施例对此不做限定。在一些可能的设计中,该处理器可以包括编码器、解码器或编解码器等。系统100中还可以包括一个或多个存储器。该存储器可用于存储指令和数据,例如,实现本发明实施例的技术方案的计算机可执行指令、待处理数据102、处理后的数据108等。该存储器可以为任意种类的存储器,本发明实施例对此也不做限定。
待编码数据可以包括文本、图像、图形对象、动画序列、音频、视频、或者任何需要编码的其他数据。在一些情况下,待编码数据可以包括来自传感器的传感数据,该传感器可以为视觉传感器(例如,相机、红外传感器),麦克风、近场传感器(例如,超声波传感器、雷达)、位置传感器、温度传感器、触摸传感器等。在一些情况下,待编码数据可以包括来自用户的信息,例如,生物信息,该生物信息可以包括面部特征、指纹扫描、视网膜扫描、嗓音记录、DNA采样等。
图2是根据本申请实施例的视频编码框架2示意图。如图2所示,在接收待编码视频后,从待编码视频的第一帧开始,依次对待编码视频中的每一帧进行编码。其中,当前编码帧主要经过:预测(Prediction)、变换(Transform)、量化(Quantization)和熵编码(Entropy Coding)等处理,最终输出当前编码帧的码流。对应的,解码过程通常是按照上述过程的逆过程对接收到的码流进行解码,以恢复出解码前的视频帧信息。
具体地,如图2所示,所述视频编码框架2中包括一个编码控制模块201,用于进行编码过程中的决策控制动作,以及参数的选择。例如,如图2所示,编码控制模块201控制变换、量化、反量化、反变换的中用到的参数,控制进行帧内或者帧间模式的选择,以及运动估计和滤波的参数控制,且编码控制模块201的控制参数也将输入至熵编码模块中,进行编码形成编码码流中的一部分。
对当前编码帧开始编码时,对编码帧进行划分202处理,具体地,首先对其进行slice划分,再进行块划分。可选地,在一个示例中,编码帧划分为多个互不重叠的最大的编码树单元(Coding Tree Unit,CTU),各CTU还可以分别按四叉树、或二叉树、或三叉树的方式迭代划分为一系列更小的编码单元(Coding Unit,CU),一些示例中,CU还可以包含与之相关联的预测单元(Prediction Unit,PU)和变换单元(Transform Unit,TU),其中PU为预测的基本单元,TU为变换和量化的基本单元。一些示例中,PU和TU分别是在CU的基础上划分成一个或多个块得到的,其中一个PU包含多个预测块(Prediction Block,PB)以及相关语法元素。一些示例中,PU和TU可以是相同的,或者,是由CU通过不同的划分方法得到的。一些示例中,CU、PU和TU中的至少两种是相同的,例如,不区分CU、PU和TU,全部是以CU为单位进行预测、量化和变换。为方便描述,下文中将CTU、CU或者其它形成的数据单元均称为编码块。
应理解,在本申请实施例中,视频编码针对的数据单元可以为帧,条带,编码树单元,编码单元,编码块或以上任一种的组。在不同的实施例中,数据单元的大小可以变化。
具体地,如图2所示,编码帧划分为多个编码块后,进行预测过程,用于去除当前编码帧的空域和时域冗余信息。当前比较常用的预测方法包括帧内预测和帧间预测两种方法。帧内预测仅利用本帧图像中己重建的信息对当前编码块进行预测,而帧间预测会利用到之前已经重建过的其它帧图像(也被称作参考帧)中的信息对当前编码块进行预测。具体地,在本申请实施例中,编码控制模块201用于决策选择帧内预测或者帧间预测。
当选择帧内预测模式时,帧内预测203的过程包括获取当前编码块周围已编码相邻块的重建块作为参考块,基于该参考块的像素值,采用预测模式方法计算预测值生成预测块,将当前编码块与预测块的相应像素值相减得到当前编码块的残差,当前编码块的残差经过变换204、量化205以及熵编码210后形成当前编码块的码流。进一步的,当前编码帧的全部编码块经过上述编码过程后,形成编码帧的编码码流中的一部分。此外,帧内预测203中产生的控制和参考数据也经过熵编码210编码,形成编码码流中的一部分。
具体地,变换204用于去除图像块的残差的相关性,以便提高编码效率。对于当前编码块残差数据的变换通常采用二维离散余弦变换(Discrete Cosine Transform,DCT)变换和二维离散正弦变换(Discrete Sine Transform,DST)变换,例如在编码端将编码块的残差信息分别与一个N×M的变换矩阵及其转置矩阵相乘,相乘之后得到当前编码块的变换系数。
在产生变换系数之后用量化205进一步提高压缩效率,变换系数经量化可以得到量化后的系数,然后将量化后的系数进行熵编码210得到当前编码块的残差码流,其中,熵编码方法包括但不限于内容自适应二进制算术编码(Context Adaptive BinaryArithmetic Coding,CABAC)熵编码。最后将熵编码得到的比特流及进行编码后的编码模式信息进行存储或发送到解码端。在编码端,还会对量化的结果进行反量化206,对反量化结果进行反变换207。在反变换207之后,利用反变换结果以及运动补偿结果,得到重建像素。之后,对重建像素进行滤波(即环路滤波)211。在211之后,输出滤波后的重建图像(属于重建视频帧)。后续,重建图像可以作为其他帧图像的参考帧图像进行帧间预测。本申请实施例中,重建图像又可称为重建后的图像或重构图像。
具体地,帧内预测203过程中的已编码相邻块为:当前编码块编码之前,已进行编码的相邻块,该相邻块的编码过程中产生的残差经过变换204、量化205、反量化206、和反变换207后,与该相邻块的预测块相加得到的重建块。对应的,反量化206和反变换207为量化206和变换204的逆过程,用于恢复量化和变换前的残差数据。
其中,帧内预测模式可以包括直流(DC)预测模式、平坦(Planar)预测模式和不同的角度预测模式(例如可以包括33种角度预测模式)。
如图2所示,当选择帧间预测模式时,帧间预测过程包括运动估计(MotionEstimation,ME)208和运动补偿(Motion Compensation,MC)209。具体地,根据重建视频帧中的参考帧图像进行运动估计208,在一张或多张参考帧图像中根据一定的匹配准则搜索到与当前编码块最相似的图像块为匹配块,该匹配块与当前编码块的相对位移即为当前编码块的运动矢量(Motion Vector,MV)。然后基于该运动矢量和参考帧对当前编码块进行运动补偿209,获得当前编码块的预测块。并将该编码块像素的原始值与对应的预测块像素值相减得到编码块的残差。当前编码块的残差经过变换204、量化205以及熵编码210后形成编码帧的编码码流中的一部分。此外,运动补偿209中产生的控制和参考数据也经过熵编码210编码,形成编码码流中的一部分。
其中,如图2所示,重建视频帧为经过滤波211之后得到视频帧。重建视频帧包括一个或多个重建后的图像。滤波211用于减少编码过程中产生的块效应和振铃效应等压缩失真,重建视频帧在编码过程中用于为帧间预测提供参考帧,在解码过程中,重建视频帧经过后处理后输出为最终的解码视频。
具体地,帧间预测模式可以包括高级运动矢量预测(Advanced Motion VectorPrediction,AMVP)模式、合并(Merge)模式或跳过(skip)模式。
对于AMVP模式而言,可以先确定运动矢量预测(Motion Vector Prediction,MVP),在得到MVP之后,可以根据MVP确定运动估计的起始点,在起始点附近,进行运动搜索,搜索完毕之后得到最优的MV,由MV确定参考块在参考图像中的位置,参考块减去当前块得到残差块,MV减去MVP得到运动矢量差值(Motion Vector Difference,MVD),并将该MVD和MVP的索引通过码流传输给解码端。
对于Merge模式而言,可以先确定MVP,并直接将MVP确定为当前块的MV。其中,为了得到MVP,可以先构建一个MVP候选列表(merge candidate list),在MVP候选列表中,可以包括至少一个候选MVP,每个候选MVP可以对应有一个索引,编码端在从MVP候选列表中选择MVP之后,可以将该MVP索引写入到码流中,则解码端可以按照该索引从MVP候选列表中找到该索引对应的MVP,以实现对图像块的解码。
应理解,以上过程只是Merge模式的一种具体实现方式。Merge模式还可以具有其他的实现方式。
例如,Skip模式是Merge模式的一种特例。按照Merge模式得到MV之后,如果编码端确定当前块和参考块基本一样,那么不需要传输残差数据,只需要传递MVP的索引,以及进一步地可以传递一个标志,该标志可以表明当前块可以直接从参考块得到。
也就是说,Merge模式特点为:MV=MVP(MVD=0);而Skip模式还多一个特点,即:重构值rec=预测值pred(残差值resi=0)。
Merge模式可以应用于三角形预测技术中。在三角形预测技术中,可以将待编码的图像块划分为两个形状为三角形的子图像块,可以从运动信息候选列表中,分别为每个子图像块确定运动矢量,并基于每个子图像块的运动矢量,确定每个子图像块对应的预测子块,基于每个子图像块对应的预测子块,构造当前图像块的预测块,从而实现对当前图像块的编码。
由于分块进行预测和变换量化,相邻块之间由于编码参数的不同可能导致编码重建图像出现方块效应(Blocking Artifacts),为了去除编码重建图像的方块效应需要用到去方块滤波技术(Deblocking Filter)。去方块滤波技术的作用是通过修正重建编码块的像素值,尤其是编码块边界附近的像素值,从而达到消除编解码算法带来的方块效应的目的。去方块滤波主要有两个步骤,即对块边界滤波强度的判定和对块边界像素的滤波。
比如在高效率视频编码(High Efficiency Video Coding,HEVC)标准中就引入了去方块滤波技术,HEVC的去方块滤波通常用于PU和TU边界,无论是亮度分量还是色度分量,滤波器均可以以8x8块为单位进行滤波,并且互相不重叠。
如图3所示,途中黑线实线表示待滤波的8x8大小的块边界,较粗黑色虚线框部分表示进行滤波操作的8x8大小的处理块,每个处理块都跨越4个8x8待滤波块,包含一个“+”字形的边缘。这样一来,每个处理块的目标就是对“+”字形的边界进行滤波,并且包含了自身所需要的所有滤波数据,这就使得滤波操作可以对每个8x8处理块进行单独操作,有利于HEVC实现并行滤波操作。
对于解码端,则可以进行与编码端相对应的操作。首先利用熵解码以及反量化和反变换得到残差信息,并根据解码码流确定当前图像块使用帧内预测还是帧间预测。如果是帧内预测,则利用当前帧中已重建图像块按照帧内预测方法构建预测信息;如果是帧间预测,则需要解析出运动信息,并使用所解析出的运动信息在已重建的图像中确定参考块,得到预测信息;接下来,再将预测信息与残差信息进行叠加,并经过滤波操作便可以得到重建信息。
在实际应用中,由于对于视频分辨率和帧率的需求不断上升,单核的硬件编码器已经不能满足需求,多核的硬件编码器可以提供更高的编码性能,从而可以满足更高的分辨率和帧率的需求。多核的硬件编码器通常会将图像或视频分为多个tile,每个核负责其中一个或多个tile的编码。
应理解,本申请实施例中,通过对图像或视频划分得到的多个tile也可以称为图像块,本申请对此不作具体限定。
由于图像被划分到多个核中进行编码,因此在图像被划分的边界处会出现较为明显的边界,从而导致用户的观看体验降低。
在一种实现方式下,可以选择关闭跨tile滤波,这样可以避免处理器(可以为上文提到的核)之间的数据交换,但是tile边界处会出现边界效应,导致重建图像的主观质量较差,影响观感;在另一种实现方式下,可以对每一个tile在边界处多编码一行或一列CTU数据,并且保证这多编码一行或一列的CTU数据使用相同的编码参数,这样可以对tile边界进行滤波,但是这种方式需要多消耗一些资源对tile边界处的部分图像数据进行重复编码,并且在划分多个tile的情况下需要考虑的特殊情况较多,硬件实现较为复杂;在又一种实现方式下,可以选择将tile边界处附近的CTU强制为特定的编码模式,从而可以实现跨tile的滤波,但是这种方式会导致tile边界处的CTU编码效果相比于其它区域的CTU编码效果较差,影响重建图像的主观质量以及整体的编码质量。
本申请实施例提供一种视频编码的方法,可以消除由于不同编码器编码导致的边界,同时也可以保证tile边界处的编码质量,减小对重建图像的主观质量的影响,进一步地,可以提高用户的观看体验。此外,本申请实施例提供的方法,可以简化处理tile所在的处理器的设计复杂度,在硬件实现上较为简单。
下面将结合图4详细描述本申请实施例提供的视频编码的方法400。
如图4所示为本申请一实施例提供的视频编码的方法400,该方法400可以包括步骤410-430。
410,利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,所述第一边界图像块由第二处理器进行编码。
本申请实施例中的第一边界图像块可以是指对待编码图像进行划分后与划分边界线相邻的图像块。可以理解的是,由于本申请旨在解决消除由于跨Tile编码而导致的边界问题,因此,本申请实施例中的第一边界图像块可以是指与划分边界线全部相邻的图像块。
420,利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,所述第二边界图像块由第三处理器进行编码,所述待编码图像包括相邻的第一图像和第二图像,所述第一边界图像块为所述第一图像中的边界图像块,所述第二边界图像块为所述第二图像中的边界图像块,所述第二边界图像块与所述第一边界图像块相邻。
类似地,本申请实施例中的第二边界图像块可以是指对待编码图像进行划分后与划分边界线相邻的图像块。可以理解的是,由于本申请旨在解决消除由于跨Tile编码而导致的边界问题,因此,本申请实施例中的第二边界图像块是与划分边界线的全部相邻的图像块。
本申请实施例中,第一图像和第二图像是可以待编码图像中的图像,在具体编码过程中,可以先对待编码图像进行划分,将其划分为至少两个图像,然后利用不同的处理器对划分后的图像进行编码。
本申请实施例中的第一图像和第二图像可以为相同大小的图像,即在对待编码图像进行划分的时候,可以从待编码图像的中心进行垂直或水平划分;第一图像和第二图像也可以为不同大小的图像,即在对待编码图像进行划分的时候,可以不从待编码图像的中心进行垂直或水平划分。
例如,如图5a所示,为本申请一实施例提供的一种对待编码图像划分的示意性图。可以从待编码图像的中心通过对待编码图像进行垂直划分得到两个瓦片(tile),分别为瓦片1(即5a-1)和瓦片2(即5a-2),即为本申请实施例中的第一图像和第二图像。图中的5a-3可以为本申请实施例中的第一边界图像块,图中的5a-4可以为本申请实施例中的第二边界图像块。
其中,图中的第一图像5a-1可以为以黑色较粗实线显示的包括图像块A的图像,第二图像5a-2可以为以黑色较粗实线显示的包括图像块B的图像,第一边界图像块5a-3可以为与划分边界线相邻的仅包括图像块A的图像块,第二边界图像块5a-4可以为与划分边界线相邻的仅包括图像块B的图像块。在编码时,可以利用第二处理器对瓦片1进行编码,利用第三处理器对瓦片2进行编码。
如图5b所示,为本申请另一种实施例提供的一种对待编码图像划分的示意性图。可以通过对待编码图像进行水平划分得到两个瓦片,分别为瓦片1(即5b-1)和瓦片2(即5b-2),即为本申请实施例中的第一图像和第二图像。图中的5b-3可以为本申请实施例中的第一边界图像块,图中的5b-4可以为本申请实施例中的第二边界图像块。
其中,图中的第一图像5b-1可以为以黑色较粗实线显示的包括图像块A的图像,第二图像5b-2可以为以黑色较粗实线显示的包括图像块B的图像,第一边界图像块5b-3可以为与划分边界线相邻的仅包括图像块A的图像块,第二边界图像块5b-4可以为与划分边界线相邻的仅包括图像块B的图像块。在编码时,可以利用第二处理器对瓦片1进行编码,利用第三处理器对瓦片2进行编码。
应理解,本申请实施例中的水平划分可以是指从水平方向对待编码图像进行的划分,垂直划分可以是指从垂直方向对待编码图像进行的划分。
本申请实施例中,若对待编码图像进行多次垂直划分或多次水平划分得到多个图像,可以由多个处理器对划分得到的多个图像进行编码。例如,如图5c所示,若划分后的图像数量包括3个图像,分别为瓦片1、瓦片2和瓦片3,即第一图像、第二图像和第三图像,则处理器的数量也可以为3个,分别为第二处理器、第三处理和第四处理器,分别对这3个图像进行编码,本申请对此不作具体限定。
430,利用所述第一处理器,基于所述第一编码参数信息、所述第二编码参数信息、所述第一重建像素和所述第二重建像素,对所述第一图像和所述第二图像之间的相邻边界进行滤波。
本申请实施例中,在第一处理器接收到第二处理器发送的第一边界图像块的第一编码参数信息和第一重建像素后,以及第三处理器发送的第二边界图像块的第二编码参数信息和第二重建像素后,可以利用第一处理器对第一图像和第二图像之间的相邻边界进行滤波。
本申请实施例中,若对待编码图像进行多次垂直划分或多次水平划分得到多个图像,此时,待编码图像中可能包括多个划分边界线,则对于这多个划分边界线的边界可以统一由一个处理器进行处理,也可以由多个不同的处理器进行处理。
例如,如图5c所示,若对待编码图像进行2次垂直划分,划分后的图像数量包括3个图像,分别为瓦片1、瓦片2和瓦片3,即第一图像、第二图像和第三图像,则处理器的数量也可以为3个,分别为第二处理器、第三处理器和第四处理器,可以分别对这3个图像进行编码。第一处理器可以接收第二处理器、第三处理器以及第四处理器发送的与划分边界线相邻的加以标记的边界图像块,再由第一处理器统一对由于对待编码图像的划分而导致的边界进行滤波。
或者,假设第一图像与第二图像之间的边界线为第一划分边界线,第二图像与第三图像之间的划分边界线为第二划分边界线,第一处理器可以接收第二处理器发送的第一图像中与第一划分边界线相邻的边界图像块,同时可以接收第三处理器发送的第二图像中与第一划分边界线相邻的边界图像块,再由第一处理器对第一图像和第二图像之间的相邻边界进行滤波;第五处理器可以接收第三处理器发送的第二图像与第二划分边界线相邻的边界图像块,同时可以接收第四处理器发送的第三图像中与第二划分边界线相邻的图像块,再由第五处理器对第二图像和第三图像之间的相邻边界进行滤波。
本申请实施例提供的视频编码的方法,在对待编码图像进行划分得到第一图像和第二图像且该两个图像分别由第二处理器和第三处理器进行处理的情况下,由于在对第一图像和第二图像之间的相邻边界进行滤波的时候,利用第一处理器接收第二处理器和第三处理器发送的与划分边界线相邻的边界图像块的编码参数信息和重建像素,基于接收到信息和重建像素,利用第一处理器可以消除由于不同编码器编码导致的边界,同时也可以保证tile边界处的编码质量,减小对重建图像的主观质量的影响,进一步地,可以提高用户的观看体验。此外,本申请实施例提供的方法,可以简化处理tile所在的处理器的设计复杂度,在硬件实现上较为简单。
上述过程可以参见图6,如图6所示,为本申请实施例提供的视频编码方法的示意性图。
参见图6,可以通过对待编码图像进行垂直划分得到两个瓦片,分别为瓦片1(即6-1)和瓦片2(即6-2),即为本申请实施例中的第一图像和第二图像。图中的6-3可以为本申请实施例中的第一边界图像块(与划分边界线相邻的仅包括图像块A的图像块),图中的6-4可以为本申请实施例中的第二边界图像块(与划分边界线相邻的仅包括图像块B的图像块)。
第二处理器可以对瓦片1进行处理,第三处理器可以对瓦片2进行处理,第一处理器可以为进行跨tile滤波操作的处理器。在第二处理器编码到瓦片1的右边界处时,可以将瓦片1与划分边界线相邻的图像块A的编码模式信息和重建像素发送给第一处理器。在第二处理器编码瓦片2的左边界时,可以将瓦片2与划分边界线相邻的图像块B的编码模式信息与重建像素发送给第一处理器。第一处理器在接收到瓦片边界左相邻块和右相邻块的编码模式信息和重建像素后,可以进行瓦片边界进行滤波过程,在做完瓦片边界的滤波过程后,可以将滤波后的重建像素输出。
上文指出,第一处理器可以接收第二处理器发送的第一编码参数信息,也可以接收第三处理器发送的第二编码参数信息,下文将对编码参数信息进行详细介绍。
可选地,在一些实施例中,所述第一编码参数信息和所述第二编码参数信息均包括以下信息中的至少一种:编码模式、划分方式、运动矢量、变换系数和量化参数。
本申请实施例中的编码模式可以包括帧内预测模式、帧间预测模式和无损编码模式,划分方式可以包括垂直划分和水平划分。其中,若边界图像块的编码模式为帧间预测模式,编码参数信息还可以包括运动矢量。
本申请实施例中,以第一编码参数信息为例,第一编码参数信息可以包括第一边界图像块的编码模式、划分方式、运动矢量、变换系数和量化参数。如图5a所示,图中的5a-3为本申请实施例中的第一边界图像块,即图中与划分边界线相邻的仅包括图像块A的图像块。因此,第一处理器接收的第一编码参数信息包括:图像块A的编码模式、划分方式、运动矢量、变换系数和量化参数。
类似地,第二编码参数信息可以包括第二边界图像块的编码模式、划分方式、运动矢量、变换系数和量化参数。如图5a所示,图中的5a-4为本申请实施例中的第二边界图像块,即图中与划分边界线相邻的仅包括图像块B的图像块。因此,第一处理器接收的第二编码参数信息包括:图像块B的编码模式、划分方式、运动矢量、变换系数和量化参数。
可选地,在一些实施例中,所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:利用所述第一处理器接收所述第二处理器包括的第一去块滤波模块发送的所述第一编码参数信息,所述第一去块滤波模块用于对所述第一图像中包括的除所述第一边界图像块之外的图像块进行去块滤波;所述利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:利用所述第一处理器接收所述第三处理器包括的第二去块滤波模块发送的所述第二编码参数信息,所述第二去块滤波模块用于对所述第二图像中包括的除所述第二边界图像块之外的图像块进行去块滤波。
本申请实施例中,如图6所示,第二处理器中可以包括第一去块滤波模块,第三处理器中可以包括第二去块滤波模块。第一去块滤波模块可以将第一边界图像块(与划分边界线相邻仅包括图像块A的图像块)的第一编码参数信息发送至第一处理器,第一处理器可以接收来自第一去块滤波模块发送的第一编码参数信息;第二去块滤波模块可以将第二边界图像块(与划分边界线相邻仅包括图像块B的图像块)的第二编码参数信息发送至第一处理器,第一处理器可以接收来自第二去块滤波模块发送的第二编码参数信息。
以图像的CTU大小为32*32为例,假设CTU划分为16个8*8大小的CU,则本申请实施例中的第一边界图像块可以是瓦片1右边界一列8*8大小的CU的图像块,在其他实现方式中,若CTU划分成的CU的最小单位为4*4,则本申请实施例中的第一边界图像块也可以是瓦片1右边界一列4*4的图像块;类似地,第二边界图像块可以是瓦片2左边界一列8*8的图像块,也可以是瓦片2左边界一列4*4的图像块,本申请对此不过具体限定,可以基于最小存储单元存储的图像块确定。
本申请实施例以边界图像块为8*8的图像块为例,若第一图像中包括多个CTU,假设图中的6-5和6-6分别为第一图像和第二图像中与划分边界线相邻的CTU,其中,6-5和6-6中的CTU的一个边界可以是本申请实施例中的划分边界线,另一个边界可以是图中所示出的虚线。每个CTU的大小可以为32*32,边界图像块的大小可以为8*8,即图中每一个图像块A为一个CTU中的右边界一列8*8的图像块。
可以理解的是,在上述过程中,第二处理器中的第一去块滤波模块可以对瓦片1中包括的非第一边界图像块的图像块进行去块滤波过程,第三处理器中的第二去块滤波模块可以对瓦片2中包括的非第二边界图像块的图像块进行去块滤波过程。
如图6所示,第一去块滤波模块可以对6-1中包括的除6-3之外的图像块进行去块滤波,第二去块模块可以对6-3中包括的除6-4之外的图像块进行去块滤波。
本申请实施例中,在对图像块进行去块滤波时,可以先计算滤波边界的滤波强度。不管是亮度分量还是色度分量均可以按照8x8边界进行滤波,只有PU或TU的边界与8x8边界重合时该边界才会进行滤波,且图像边界不滤波。通过滤波边界的两个相邻块的量化参数、编码模式、运动矢量、是否存在非零变换系数等编码信息以及像素值计算滤波强度,然后根据滤波强度对滤波边界附近的像素进行去块滤波操作。
其中,每一个去块滤波操作最多可以影响图像块之间的边界两边的3个像素,如图7所示,图a和图b分别表示了相邻块垂直或水平边界两侧用于滤波的4个像素值p(p0,p1,p2,p3)和q(q0,q1,q2,q3)。
若对亮度分量的图像块进行滤波,可以基于滤波边界的滤波强度确定需要修改的像素。具体地,最少没有像素可以被修改,即p0~p3和q0~q3均可以不被修改;最多p0,p1,p2和q0,q1,q2可以被修改,即边界两边的p0~p2和q0~q2可以被修改。若对色度分量的图像块进行滤波,则可以根据p0,p1和q0,q1的值更改p0和q0的值,即边界两边的p0和q0可以被修改。
应理解,对于瓦片1中包括的非第一边界图像块,第二处理器中的第一去块滤波模块可以对其进行上述去块滤波操作;对于瓦片2中的包括的非第二边界图像块,第二处理器中的第二去块滤波模块也可以对其进行上述去块滤波操作;对于瓦片1和瓦片2之间的边界图像块,第一处理器中的去块滤波模块也可以对其进行上述去块滤波操作。
可选地,在一些实施例中,所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:利用所述第一处理器接收所述第二处理器包括的第一样点自适应补偿(Sample Adaptive Offset,SAO)模块发送的所述第一重建像素,所述第一SAO模块用于对所述第一图像中包括的除第一图像块之外的图像块进行SAO滤波,所述第一图像块为与所述第一图像和所述第二图像之间的边界相邻的编码树单元CTU包括的图像块;利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:利用所述第一处理器接收所述第三处理器包括的第二SAO模块发送的所述第二重建像素,所述第二SAO模块用于对所述第二图像中包括的除所述第二图像块之外的图像块进行SAO滤波,所述第二图像块为与所述第一图像和所述第二图像之间的边界相邻的CTU包括的图像块。
本申请实施例中,如图6所示,第二处理器中也可以包括第一SAO模块,第三处理器中可以包括第二SAO模块。第一SAO模块可以将第一重建像素发送至第一处理器,第一处理器可以接收来自第一SAO模块发送的第一重建像素;第二SAO模块可以将第二重建像素发送至第一处理器,第一处理器可以接收来自第二SAO模块发送的第二重建像素。
应理解,本申请实施例中的第一重建像素可以是第一边界图像块对应的重建像素,第二重建像素可以是第二边界图像块对应的重建像素。
还应理解,本申请实施例中的SAO模块可以对一些图像进行SAO滤波。例如,第一SAO模块可以对第一图像块进行SAO滤波,第二SAO模块可以对第二图像块进行SAO滤波。其中,第一图像块可以为与第一图像和第二图像之间的边界相邻的编码树单元CTU包括的图像块,即图6中所示出的图像块6-5;第二图像块可以为与第一图像和第二图像之间的边界相邻的CTU包括的图像块,即图6中所示出的图像块6-6。
本申请实施例中,利用SAO模块将重建像素发送至第一处理器,为了节省硬件开销,可以设置不对第一图像块和第二图像块进行SAO滤波,因此,在第一处理器完成对第一边界图像块和第二边界图像块后,即可以输出滤波后的图像,在硬件实现上较为简单。第一处理器输出滤波后的图像的方式可以是第一处理器直接将滤波后的像素进行对齐并通过总线Bus输出至存储区,或者第一处理器将滤波后的像素发送给第二处理器或第三处理器,由第二处理器或第三处理器通过总线输出至存储区。
或者,若不考虑硬件开销,为提升图像处理性能,可以在第一处理器中增加SAO模块,以在第一处理器完成第一边界图像块和第二边界图像块的去块滤波后,对第一图像块和第二图像块进行SAO滤波。之后,第一处理器将处理后的像素输出至存储区。
可以理解的是,若上述重建像素是利用去块滤波模块发送至第一处理器的,由于去块滤波模块并不具有SAO滤波功能,因此,在第一处理器对第一图像和第二图像之间的边界进行去块滤波后,可以对第一图像和第二图像整体进行SAO,在硬件实现上较为复杂。
因此,本申请实施例提供的方案,通过第二处理器和第三处理器中的SAO模块将第一重建像素和第二重建像素分别发送至第一处理器,可以进一步简化硬件实现的复杂度。
上文指出,第一SAO模块和第二SAO模块可以分别将第一重建像素和第二重建像素发送至第一处理器中,其中,第一重建像素和第二重建像素的列数可以是第一边界图像块和第二边界图像块的列数,除此之外,若后续需要进行帧缓冲压缩(Frame BufferCompression,FBC)处理,若第一图像和第二图像是对待编码图像进行垂直划分得到的,第二处理器和第三处理器中的SAO模块向第一处理器发送的重建像素的列数还可以满足一定的条件,下文将进行详细说明。
可选地,在一些实施例中,若所述第一图像和所述第二图像是经过垂直划分得到的,所述方法还包括:利用所述第一处理器接收所述第二处理器发送的第三重建像素,所述第三重建像素与所述第一重建像素列相邻;利用所述第一处理器接收所述第三处理器发送的第四重建像素,所述第四重建像素与所述第二重建像素列相邻;其中,所述第一重建像素的列数、所述第二重建像素的列数、所述第三重建像素的列数与所述第四重建像素的列数之和为FBC模块所包括的单位像素列数的整数倍。
本申请实施例中,由于重建图像作为参考帧时需要经过FBC模块压缩,因此,第二处理器传送到第一处理器的重建像素列数和第三处理器传送到第一处理器的重建像素列数可以保证第一处理器最终要输出的重建像素列数是FBC tile的整数倍。
例如,如图8所示,可以通过对待编码图像进行垂直划分得到两个瓦片,分别为瓦片1(即8-1)和瓦片2(即8-2),即为本申请实施例中的第一图像和第二图像。图中的8-3可以为本申请实施例中的第一边界图像块,图中的8-4可以为本申请实施例中的第二边界图像块。图8中的8-5可以是本申请实施例中的第三重建像素所对应的图像块,8-6可以是第四重建像所对应的图像块。
其中,图像块8-3可以是图中示出的与划分边界线相邻的仅包括图像块A的图像块,图像块8-4可以是图中示出的与划分边界线相邻的仅包括图像块B的图像块。图像块8-5的一个边界线可以是图中所示出的双点划线,另一个边界可以是与图像块A相邻的线;图像块8-6的一个边界线可以是图中所示出的双点划线,另一个边界可以是与图像块B相邻的线。
本申请实施例中的第一重建像素可以是指图像块8-3对应的重建像素,第二重建像素可以是图像块8-4对应的重建像素,第三重建像素可以是指图像块8-5对应的重建像素,第四重建像素可以是指图像块8-6对应的重建像素。
可选地,在一些实施例中,所述FBC模块所包括的所述单位像素列数与所述待编码图像的像素的位宽负相关。
本申请实施例中,FBC模块所包括的单位像素列数与待编码图像的像素的位宽负相关。换句话说,待编码图像的像素的位宽越小,FBC模块所包括的单位像素列数越大,待编码图像的像素的位宽越大,FBC模块所包括的单位像素列数越小。
例如,假设待编码图像的像素位宽为8比特,则FBC tile的单位像素可以为64*4,即FBC tile的单位像素列数可以为64列;若待编码图像的像素位宽为10比特,则FBC tile的单位像素可以为48*4,即FBC tile的单位像素列数可以为48列。
本申请实施例中的位宽与待编码图像的像素值有关,若待编码图像的像素值的范围在0~255,则待编码图像的像素的位宽可以为8;若若待编码图像的像素值的范围在0~1023,则待编码图像的像素的位宽可以为10。
可选地,在一些实施例中,所述第一重建像素与所述第三重建像素的列数之和与所述第一图像的宽度和/或所述待编码图像的像素的位宽有关,所述第一图像的宽度为所述第一图像包括的像素的列数与所述第一图像中的编码树单元CTU包括的像素的列数的比值;所述第二重建像素与所述第四重建像素的列数之和与所述第二图像的宽度和/或所述待编码图像的像素的位宽有关,所述第二图像的宽度为所述第二图像包括的像素的列数与所述第二图像中的CTU包括的像素的列数的比值。
本申请实施例中,为了保证第一处理器最终输出的重建像素的列数是FBC tile的像素列数的整数倍,第一处理器接收第二处理器和第三处理器发送的重建像素列数之和可以是FBC tile的像素列数的整数倍。
换句话说,第二处理器和第三处理器向第一处理器发送的重建像素的列数之和可以满足上述条件,即第二处理器和第三处理器向第一处理器发送的重建像素的列数之和可以是FBC tile的像素列数的整数倍,同时第二处理器和第三处理器向第一处理器发送重建像素的时候本身也可以与一些参数相关。
例如,第二处理器向第一处理器发送的第一重建像素与第三重建像素的列数之和可以与第一图像的宽度和/或待编码图像的像素的位宽有关;第三处理器向第一处理器发送的第二重建像素与第四重建像素的列数之和可以与第二图像的宽度和/或待编码图像的像素的位宽有关。
本申请实施例中的图像的宽度可以是指该图像在水平方向包括多少个CTU。例如,假设待编码图像的分辨率为1920x1080,即待编码图像在水平方向包括1920个像素,在垂直方向包括1080个像素,若待编码图像中包括的CTU的大小为32*32,且第一图像和第二图像是经过待编码图像中心对待编码图像进行垂直划分得到的,则待编码图像的宽度可以为1920/32=60。
若对待编码图像从图像中心进行垂直划分得到本申请的第一图像和第二图像,则第一图像和第二图像的宽度可以均为30。若对待编码图像未从图像中心进行垂直划分得到本申请的第一图像和第二图像,则第一图像和第二图像的宽度不同,具体地主要根据划分边界线的位置的不同而不同;例如,若从待编码图像的1/3处进行划分,即第一图像包含的像素为640*1080,第二图像包含的像素为1280*1080,则第一图像和第二图像的宽度可以分别为20和40。
应理解,上述数值仅为举例说明,还可以为其它数值,不应对本申请造成特别限定。
可选地,在一些实施例中,所述第一重建像素与所述第三重建像素的列数之和是基于所述第一图像的宽度与预设值取余后得到的余数与参数决定的;所述第二重建像素与所述第四重建像素的列数之和是基于所述第二图像的宽度与预设值取余后得到的余数与参数决定的;所述参数包括以下参数中的至少一种参数:所述待编码图像的像素的位宽、所述FBC模块所包括的所述单位像素列数、所述待编码图像包括的CTU的大小。
本申请实施例中的预设值可以与待编码图像的像素的位宽有关,例如,若待编码图像的像素的位宽为8,则预设值可以为2;若待编码图像的像素的位宽为10,则预设值可以为48。
假设第一图像的宽度为w1,第二图像的宽度为w2,若待编码图像的分辨率为1920x1080,待编码图像所包括的CTU的大小为32*32,且待编码图像是从图像中心进行垂直划分的,则w1和w2的值可以均为30,表示第一图像和第二图像中在水平方向上各有30个CTU。
可以按照如下公式计算第二处理器和第三处理器传送给第一处理器的像素列数,分别用pixel_w1和pixel_w2表示。
若待编码图像的像素的位宽为8比特:
tile1:pixel_w1=w1%2?32:64
tile2:pixel_w2=w2%2?32:64
上述公式的含义可以表示为:第一图像的宽度对2取余,若该余数为0,则第二处理器向第一处理器发送的重建像素的列数可以为64,即上述第一重建像素和第三重建像素的列数之和为64;若该余数不为0,则第二处理器向第一处理器发送的重建像素的列数可以为32,即上述第一重建像素和第三重建像素的列数之和为32。例如,在一种实现方式下,若第一图像的宽度为上文提到的30,对2取余后的余数为0,则第二处理器向第一处理器发送的重建像素的列数可以为64。
类似地,第二图像的宽度对2取余,若该余数为0,则第三处理器向第一处理器发送的重建像素的列数可以为64,即上述第二重建像素和第四重建像素的列数之和为64;若该余数不为0,则第三处理器向第一处理器发送的重建像素的列数可以为32,即上述第二重建像素和第四重建像素的列数之和为32。例如,若第二图像的宽度为上文提到的30,对2取余后的余数为0,则第三处理器向第一处理器发送的重建像素的列数可以为64。
值得注意的是,在待编码图像的像素的位宽为8比特的情况下,第二处理器和第三处理器向第一处理器发送的重建像素的列数可以均为64,第二处理器和第三处理器向第一处理器发送的重建像素的列数之和为128,由于在待编码图像的像素的位宽为8比特的情况下的FBC Tile的单位像素列数为64,因此第二处理器和第三处理器向第一处理器发送的重建像素的列数之和为FBC Tile的单位像素列数的整数倍。
在另一种实现方式下,若第一图像和第二图像是未经过待编码图像的中心进行划分得到的,假设划分后的第一图像和第二图像的宽度分别为35和25,第一图像的宽度对2取余后的余数为1,则第二处理器向第一处理器发送的重建像素的列数可以为32。
类似地,若第二图像的宽度为25,对2取余后的余数为1,则第三处理器向第一处理器发送的重建像素的列数可以为32。
在这种实现方式下,在待编码图像的像素的位宽为8比特的情况下,第二处理器和第三处理器向第一处理器发送的重建像素的列数均为32,第二处理器和第三处理器向第一处理器发送的重建像素的列数之和为64,由于在待编码图像的像素的位宽为8比特的情况下的FBC Tile的单位像素列数为64,因此第二处理器和第三处理器向第一处理器发送的重建像素的列数之和仍然为FBC Tile的单位像素列数的整数倍,满足第二处理器传送到第一处理器的重建像素列数和第三处理器传送到第一处理器的重建像素列数之和是第一处理器最终要输出的重建像素列数FBC tile的整数倍。
若待编码图像的像素的位宽为10比特:
tile1:pixel_w1=w1*32%48?w1*32%48:48
tile2:pixel_w2=w2*32%48?48-w1*32%48:48
上述公式的含义可以表示为:第一图像的宽度乘以32对48取余,若该余数为0,则第二处理器向第一处理器发送的重建像素的列数可以为48;若该余数不为0,则第二处理器向第一处理器发送的重建像素的列数可以为第一图像的宽度乘以32对48取余后的余数。例如,若第一图像的宽度为上文提到的30,其宽度乘以32后对48取余后的余数为0,则第二处理器向第一处理器发送的重建像素的列数可以为48。
类似地,第二图像的宽度乘以32对48取余,若该余数为0,则第三处理器向第一处理器发送的重建像素的列数可以为48;若该余数不为0,则第三处理器向第一处理器发送的重建像素的列数可以为48-w1*32%48。例如,若第二图像的宽度为上文提到的30,其宽度乘以32对48取余后的余数为0,则第三处理器向第一处理器发送的重建像素的列数可以为48。
值得注意的是,在待编码图像的像素的位宽为10比特的情况下,第二处理器和第三处理器向第一处理器发送的重建像素的列数均为48,第二处理器和第三处理器向第一处理器发送的重建像素的列数之和为96,由于待编码图像的像素的位宽为10比特的情况下的FBC Tile的单位像素列数为48,因此第二处理器和第三处理器向第一处理器发送的重建像素的列数之和为FBC Tile的单位像素列数的整数倍。
在另一种实现方式下,若第一图像和第二图像是未经过待编码图像的中心进行划分得到的,假设划分后的第一图像和第二图像的宽度分别为35和25,第一图像的宽度为35,其宽度乘以32后对48取余后的余数为12,不为0,则第二处理器向第一处理器发送的重建像素的列数可以为12。
类似地,若第二图像的宽度为25,其宽度乘以32后对48取余后的余数为32,不为0,则第三处理器向第一处理器发送的重建像素的列数可以为48-12=36。
在这种实现方式下,在待编码图像的像素的位宽为10比特的情况下,第二处理器向第一处理器发送的重建像素的列数为12,第三处理器向第一处理器发送的重建像素的列数为36,第二处理器和第三处理器向第一处理器发送的重建像素的列数之和为48,由于在待编码图像的像素的位宽为10比特的情况下的滤FBC Tile的单位像素列数48,因此第二处理器和第三处理器向第一处理器发送的重建像素的列数之和仍然为FBC Tile的单位像素列数的整数倍,满足第二处理器传送到第一处理器的重建像素列数和第三处理器传送到第一处理器的重建像素列数之和是第一处理器最终要输出的重建像素列数FBC tile的整数倍。
上文说明了第二处理器和第三处理器向第一处理器发送的编码参数信息和重建像素满足的一些条件,在硬件实现上,由于CTU左上边界的滤波需要用到相邻CTU的编码模式信息以及重建像素,一般会进行错位滤波,在对去方块滤波后的重建像素做SAO滤波时也可以错位滤波。下文将进行详细说明。
可选地,在一些实施例中,若所述第一图像和所述第二图像是对所述待编码图像经过垂直划分得到的,所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:利用所述第一处理器接收所述第二处理器对所述待编码图像包括的所述第一图像错位n行进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;所述利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:利用所述第一处理器接收所述第三处理器对所述待编码图像包括的所述第二图像进错位n行进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;其中,所述n的取值与所述第二处理器和/或所述第三处理器包括的滤波模块进行滤波时的滤波单元有关。
本申请实施例中,由于第二处理器在对第一图像中包括的图像块进行滤波的时候,会进行错位滤波,因此,若第一图像和第二图像是对待编码图像经过垂直划分得到的,第二处理器向第一处理器发送的第一边界图像块是相对于第一图像是错位n行的图像块;类似地,由于第三处理器在对第二图像中包括的图像块进行滤波的时候,也可以进行错位滤波,因此,第三处理器向第一处理器发送的第二边界图像块相对于第二图像是错位n行的图像块。
例如,如图9a所示,图中的9a-1可以表示待编码图像中的第一图像,9a-2与9a-1之间的交集区域可以表示第二处理器中的第一去块滤波模块错位n1行后的处理区域,9a-3与9a-1之间的交集区域可以表示第二处理器中的第一SAO模块错位n2行后的处理区域,其中,n1与n2的值的和为本申请中的n值。
如图9b所示,图中的9b-1可以表示待编码图像中的第二图像,9b-2与9b-1之间的交集区域可以表示第三处理器中的第二去块滤波模块错位n1行后的处理区域,9b-3与9b-1之间的交集区域可以表示第三处理器中的第二SAO模块错位n2行后的处理区域,其中,n1与n2的值的和为本申请中的n值。
本申请实施例中,n1与n2的取值可以与第二处理器和/或第三处理器中的去块滤波模块和SAO模块所包括的滤波单元有关。若滤波单元的最小单元为8*8,则本申请实施例中的n1可以为4,n2也可以为4,即第二处理器向第一处理器发送的边界图像块相对于第一图像可以错位8行,第三处理器向第一处理器发送的边界图像块相对于第二图像也可以错位8行。
应理解,上述数值仅为举例说明,还可以为其它数值,例如,n2可以为2或3等,不应对本申请造成特别限定。
可选地,在一些实施例中,所述对所述第一图像和所述第二图像之间的相邻边界进行滤波,包括:利用所述第一处理器对所述第一边界图像块和所述第二边界图像块在水平方向错位m行进行错位滤波,所述m的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
本申请实施例中,m的取值可以与第一处理器中的去块滤波模块所包括的滤波单元有关。若滤波单元的最小单元为8*8,则本申请实施例中的m可以为4。
本申请实施例中,由于第二处理器和第三处理器向第一处理器发送的边界图像块本身已错位n行,因此,第一处理器接收到的每一行CTU的重建像素是错位了n行的像素。
如图10所示,若上述n值为8,则第一处理器接收到的重建像素是错位了8行的像素。以第一图像在垂直方向上包括3行32*32大小的CTU为例,第一处理器接收到的第一行CTU包括的像素行数为24行,即第一行CTU错位了8行后的像素,第一处理器接收到的第二行,即中间行的CTU包括的像素行数为32行,该32行像素包括了第一行CTU中错位的8行以及第二行CTU中的前面24行,第一处理器接收到的最后一行CTU包括的像素行数为40行,该40行包括了第二行CTU中错位的8行以及第三行CTU中的全部像素。
本申请实施例中,第二处理器和第三处理器向第一处理器传送的重建像素的列数如图所示,其中,第二处理器向第一处理器传送的重建像素的列数的一个边界线可以是瓦片1中的双点划线,另一个边界可以是划分边界线;第三处理器向第一处理器传送的重建像素列数的一个边界线可以是瓦片2中的双点划线,另一个边界可以是划分边界线。
应理解,图10中所示出的中间行的像素行数仅为示例,在实际中,可能包括多个中间行的像素,主要与待编码图像包括的像素的行数有关。
还应理解,若待编码图像包括的像素行数为32的整数倍,则最后一行的像素可以包括40行像素;若待编码图像包括的像素行数不是32的整数倍,则最后一行的像素包括的像素行数可以为16、32或40中的任一个。
本申请实施例中,第二处理器和第三处理器将重建像素传送至第一处理器后,第一处理器可以先将重建像素拼凑起来,然后再由第一处理器中的去方块滤波模块进行去方块滤波过程。如图10所示,若第二处理器和第三处理器传送至第一处理器中的第一行CTU的像素行数为24行,由于下边界正好可能是去方块滤波的边界,即8*8边界,因此,最下面4行的像素不能做去方块滤波,可以将这4行像素缓存起来,拼凑到第二行(即图中的中间行)CTU的上方进行中间8列像素的去方块滤波(Tile边界左右各4列像素,即图10中的图像块A和图像块B),因此,第一处理器中的去方块滤波模块相对于待编码图像错位12行进行滤波。
对于中间行的CTU来说,可以先将第一行CTU缓存的4行像素拼凑到上方,然后进行中间8列像素的去方块滤波(Tile边界左右各4列像素),然后再将最下面的4行像素缓存,拼凑到下一行CTU的上方进行滤波。
对于最后一行CTU来说,可以先将上一行CTU缓存的4行像素拼凑到上方,然后进行中间8列像素的去方块滤波(Tile边界左右各4列像素)。
在第一处理器中的去方块滤波模块进行去块滤波后,可以将滤波后的重建像素输出至存储区中。具体地,第一处理器输出的第一行CTU所包括的像素的行数为20行;中间行的CTU所包括的像素的行数为32行;最后一行CTU所包括的像素的行数为剩余的所有像素的行数,可能为16、32或40中的任一个。
在一些实施例中,在第一处理器对中间8列的像素进行去块滤波后,即完成了跨Tile滤波后,由于跨Tile滤波后的重建像素的像素值发生了变化,还可以对边界图像块在水平方向进行去块滤波。
例如,第一处理器中可以对瓦片1中的多个图像块A之间进行去块滤波,以及对瓦片2中的多个图像块B之间进行去块滤波。
上文说明了在对待编码图像经过垂直划分的情况下进行的滤波过程,同时上文还指出了可以对待编码图像进行水平划分,下文将详细描述在这种划分情况下的滤波过程。
可选地,在一些实施例中,若所述第一图像和所述第二图像是对所述待编码图像经过水平划分得到的,所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:利用所述第一处理器接收所述第二处理器对所述待编码图像包括的所述第一图像错位p列进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;所述利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:利用所述第一处理器接收所述第三处理器对所述待编码图像包括的所述第二图像错位p列进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;其中,所述p的取值与所述第二处理器和/或所述第三处理器包括的滤波模块进行滤波时的滤波单元有关。
本申请实施例中,由于第二处理器在对第一图像中包括的图像块进行滤波的时候,会进行错位滤波,因此,若第一图像和第二图像是对待编码图像经过水平划分得到的,第二处理器向第一处理器发送的第一边界图像块是相对于第一图像是错位p列的图像块;类似地,由于第三处理器在对第二图像中包括的图像块进行滤波的时候,也可以进行错位滤波,因此,第三处理器向第一处理器发送的第二边界图像块相对于第二图像是错位p列的图像块。
例如,如图11a所示,图中的11a-1可以表示待编码图像中的第一图像,11a-2与11a-1之间的交集区域可以表示第二处理器中的第一去块滤波模块错位p1列后的处理区域,11a-3与11a-1之间的交集区域可以表示第二处理器中的第一SAO模块错位p2列后的处理区域,其中,p1与p2的值的和为本申请中的p值。
如图11b所示,图中的11b-1可以表示待编码图像中的第二图像,11b-2与11b-1之间的交集区域可以表示第三处理器中的第二去块滤波模块错位p1列后的处理区域,11b-3与11b-1之间的交集区域可以表示第三处理器中的第二SAO模块错位p2列后的处理区域,其中,p1与p2的值的和为本申请中的p值。
本申请实施例中,p1与p2的取值可以与第二处理器和/或第三处理器中的去块滤波模块和SAO模块所包括的滤波单元有关。若滤波单元的最小单元为8*8,则本申请实施例中的p1可以为4,p2也可以为4,即第二处理器向第一处理器发送的边界图像块相对于第一图像可以错位8列,第三处理器向第一处理器发送的边界图像块相对于第二图像也可以错位8列。
应理解,上述数值仅为举例说明,还可以为其它数值,例如,p2可以为2或3等,不应对本申请造成特别限定。
可选地,在一些实施例中,所述对所述第一图像和所述第二图像之间的相邻边界进行滤波,包括:利用所述第一处理器对所述第一边界图像块和所述第二边界图像块在垂直方向错位q列进行错位滤波,所述q的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
本申请实施例中,q的取值可以与第一处理器中的去块滤波模块所包括的滤波单元有关。若滤波单元的最小单元为8*8,则本申请实施例中的q的值可以为4。
本申请实施例中,由于第二处理器和第三处理器向第一处理器发送的边界图像块本身已错位p列,因此,第一处理器接收到的每一列CTU的重建像素是错位了p列的像素。
如图12所示,若上述p值为8,则第一处理器接收到的重建像素是错位了8列的像素。以第一图像在水平方向上包括3列32*32大小的CTU为例,第一处理器接收到的第一列CTU包括的像素行数为24列,即第一列CTU错位了8列后的像素,第一处理器接收到的第二列,即中间列的CTU包括的像素行数为32列,该32列像素包括了第一列CTU中错位的8列以及第二列CTU中的前面24列,第一处理器接收到的最后一列CTU包括的像素列数为40列,该40列包括了第二列CTU中错位的8列以及第三列CTU中的全部像素。
应理解,图12中所示出的中间列的像素列数仅为示例,在实际中,可能包括多个中间列的像素,主要与待编码图像包括的像素的列数有关。
还应理解,若待编码图像包括的像素列数为32的整数倍,则最后一列的像素可以包括40列像素;若待编码图像包括的像素列数不是32的整数倍,则最后一列的像素包括的像素列数可以为16、32或40中的任一个。
本申请实施例中,第二处理器和第三处理器将重建像素传送至第一处理器后,第一处理器可以先将重建像素拼凑起来,然后再由第一处理器中的去方块滤波模块进行去方块滤波过程。如图12所示,若第二处理器和第三处理器传送至第一处理器中的第一列CTU的重建像素的像素列数为24列,由于右边界正好可能是去方块滤波的边界,即8*8边界,因此,最右边4列的像素不能做去方块滤波,可以将这4列像素缓存起来,拼凑到第二列(即图中的中间列)CTU的左边进行中间8行像素的去方块滤波(Tile边界上下各4行像素,即图12中的图像块A和图像块B),因此,第一处理器中的去方块滤波模块相对于待编码图像错位12列进行滤波。
对于中间列的CTU来说,可以先将第一列CTU缓存的4列像素拼凑到左边,然后进行中间8行像素的去方块滤波(Tile边界上下各4行像素),然后再将最右边的4列像素缓存,拼凑到下一列CTU的左边进行滤波。
对于最后一列CTU来说,可以先将上一列CTU缓存的4列像素拼凑到左边,然后进行中间8行像素的去方块滤波(Tile边界上下各4行像素)。
在第一处理器中的去方块滤波模块进行去块滤波后,可以将滤波后的重建像素输出至存储区中。具体地,第一处理器输出的第一列CTU所包括的像素的列数为20列;中间列的CTU所包括的像素的列数为32列;最后一列CTU所包括的像素的列数为剩余的所有像素的列数,可能为16、32或40中的任一个。
在一些实施例中,在第一处理器对Tile边界进行滤波之前,可以对边界图像块在垂直方向进行去块滤波。
可选地,在一些实施例中,所述第一处理器、所述第二处理器和所述第三处理器属于同一编码器。
本申请实施例中,第一处理器、第二处理器和第三处理器可以属于同一编码器。在第一处理器、第二处理器和第三处理器属于同一编码器的情况下,第一处理器、第二处理器和第三处理器可以为该编码器中的不同处理核。可选的,第一处理器、第二处理器和第三处理器也可以属于多个不同的编码器。
上文结合图1-图12,详细描述了本申请的方法实施例,下面结合图13-图14,描述本申请的装置实施例,装置实施例与方法实施例相互对应,因此未详细描述的部分可参见前面各部分方法实施例。
图13为本申请一实施例提供一种编码装置1300,该编码装置1300可以包括第一处理器1310、第二处理器1320和第三处理器1330。
所述第一处理器1310,用于接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,所述第一边界图像块由第二处理器1320进行编码;接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,所述第二边界图像块由第三处理器1330进行编码,所述待编码图像包括相邻的第一图像和第二图像,所述第一边界图像块为所述第一图像中的边界图像块,所述第二边界图像块为所述第二图像中的边界图像块,所述第二边界图像块与所述第一边界图像块相邻;基于所述第一编码参数信息、所述第二编码参数信息、所述第一重建像素和所述第二重建像素,对所述第一图像和所述第二图像之间的相邻边界进行滤波。
可选地,在一些实施例中,所述第一编码参数信息和所述第二编码参数信息均包括以下信息中的至少一种:编码模式、划分方式、运动矢量、变换系数和量化参数。
可选地,在一些实施例中,所述第一处理器1310进一步用于:接收所述第二处理器1320包括的第一去块滤波模块发送的所述第一编码参数信息,所述第一去块滤波模块用于对所述第一图像中包括的除所述第一边界图像块之外的图像块进行去块滤波;接收所述第三处理器1330包括的第二去块滤波模块发送的所述第二编码参数信息,所述第二去块滤波模块用于对所述第二图像中包括的除所述第二边界图像块之外的图像块进行去块滤波。
可选地,在一些实施例中,所述第一处理器1310进一步用于:接收所述第二处理器1320包括的第一样点自适应补偿SAO模块发送的所述第一重建像素,所述第一SAO模块用于对所述第一图像中包括的除第一图像块之外的图像块进行SAO滤波,所述第一图像块为与所述第一图像和所述第二图像之间的边界相邻的编码树单元CTU包括的图像块;接收所述第三处理器1330包括的第二SAO模块发送的所述第二重建像素,所述第二SAO模块用于对所述第二图像中包括的除所述第二图像块之外的图像块进行SAO滤波,所述第二图像块为与所述第一图像和所述第二图像之间的边界相邻的CTU包括的图像块。
可选地,在一些实施例中,若所述第一图像和所述第二图像是经过垂直划分得到的,所述第一处理器1310还用于:接收所述第二处理器1320发送的第三重建像素,所述第三重建像素与所述第一重建像素列相邻;接收所述第三处理器1330发送的第四重建像素,所述第四重建像素与所述第二重建像素列相邻;其中,所述第一重建像素的列数、所述第二重建像素的列数、所述第三重建像素的列数与所述第四重建像素的列数之和为帧缓冲压缩FBC模块所包括的单位像素列数的整数倍。
可选地,在一些实施例中,所述FBC模块所包括的所述单位像素列数与所述待编码图像的像素的位宽负相关。
可选地,在一些实施例中,所述第一重建像素与所述第三重建像素的列数之和与所述第一图像的宽度和/或所述待编码图像的像素的位宽有关,所述第一图像的宽度为所述第一图像包括的像素的列数与所述第一图像中的编码树单元CTU包括的像素的列数的比值;所述第二重建像素与所述第四重建像素的列数之和与所述第二图像的宽度和/或所述待编码图像的像素的位宽有关,所述第二图像的宽度为所述第二图像包括的像素的列数与所述第二图像中的CTU包括的像素的列数的比值。
可选地,在一些实施例中,所述第一重建像素与所述第三重建像素的列数之和是基于所述第一图像的宽度与预设值取余后得到的余数与参数决定的;所述第二重建像素与所述第四重建像素的列数之和是基于所述第二图像的宽度与预设值取余后得到的余数与参数决定的;所述参数包括以下参数中的至少一种参数:所述待编码图像的像素的位宽、所述FBC模块所包括的所述单位像素列数、所述待编码图像包括的CTU的大小。
可选地,在一些实施例中,若所述第一图像和所述第二图像是经过垂直划分得到的,所述第一处理器1310进一步用于:接收所述第二处理器1320对所述待编码图像包括的所述第一图像错位n行进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;接收所述第三处理器1330对所述待编码图像包括的所述第二图像进错位n行进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;其中,所述n的取值与所述第二处理器和/或所述第三处理器包括的滤波模块和/或SAO模块进行滤波时的滤波单元有关。
可选地,在一些实施例中,所述第一处理器1310进一步用于:对所述第一边界图像块和所述第二边界图像块在水平方向错位m行进行错位滤波,所述m的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
可选地,在一些实施例中,若所述第一图像和所述第二图像是经过水平划分得到的,所述第一处理器1310进一步用于:接收所述第二处理器1320对所述待编码图像包括的所述第一图像错位p列进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;接收所述第三处理器1330对所述待编码图像包括的所述第二图像错位p列进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;其中,所述p的取值与所述第二处理器和/或所述第三处理器包括的滤波模块和/或SAO模块进行滤波时的滤波单元有关。
可选地,在一些实施例中,所述第一处理器1310进一步用于:对所述第一边界图像块和所述第二边界图像块在垂直方向错位q列进行错位滤波,所述q的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
可选地,在一些实施例中,所述第一处理器、所述第二处理器以及所述第三处理器属于同一编码器。
可选地,编码装置1300还可以包括存储器1340。其中,第一处理器1310、第二处理器1320和第三处理器1330可以从存储器1340中调用并运行计算机程序,以实现本申请实施例中的方法。
其中,存储器1340可以是独立于第一处理器1310、第二处理器1320和第三处理器1330中的至少一个的单独的器件,也可以集成在第一处理器1310、第二处理器1320和第三处理器1330中的至少一个处理器中。
可选地,该编码装置例如可以是编码器、终端(包括但不限于手机、相机、无人机等),并且该编码装置可以实现本申请实施例的各个方法中的相应流程,为了简洁,在此不再赘述。
图14是本申请实施例的芯片的示意性结构图。图14所示的芯片1400包括第一处理器1410、第二处理器1420以及第三处理器1430,第一处理器1410、第二处理器1420以及第三处理器1430可以从存储器中调用并运行计算机程序,以实现本申请实施例中的方法。
可选地,如图14所示,芯片1400还可以包括存储器1440。其中,第一处理器1410、第二处理器1420和第三处理器1430中的任一个处理器可以从存储器1440中调用并运行计算机程序,以实现本申请实施例中的方法。
其中,存储器1440可以是独立于第一处理器1410、第二处理器1420和第三处理器1430中的至少一个的单独的器件的一个单独的器件,也可以集成在第一处理器1410、第二处理器1420中和第三处理器1430中的至少一个处理器中。
可选地,该芯片1400还可以包括输入接口1450。其中,第一处理器1410、第二处理器1420和第三处理器1430中的任一个处理器可以控制该输入接口1450与其他装置或芯片进行通信,具体地,可以获取其他装置或芯片发送的信息或数据。
可选地,该芯片1400还可以包括输出接口1460。其中,第一处理器1410第二处理器1420和第三处理器1430中的任一个处理器可以控制该输出接口1460与其他装置或芯片进行通信,具体地,可以向其他装置或芯片输出信息或数据。
应理解,本申请实施例提到的芯片还可以称为系统级芯片,系统芯片,芯片系统或片上系统芯片等。
应理解,本申请实施例的处理器可能是一种集成电路图像处理系统,具有信号的处理能力。在实现过程中,上述方法实施例的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific IntegratedCircuit,ASIC)、现成可编程门阵列(Field Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
可以理解,本申请实施例中的存储器可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM,DDR SDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM,DR RAM)。应注意,本文描述的系统和方法的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
应理解,上述存储器为示例性但不是限制性说明,例如,本申请实施例中的存储器还可以是静态随机存取存储器(static RAM,SRAM)、动态随机存取存储器(dynamic RAM,DRAM)、同步动态随机存取存储器(synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(double data rate SDRAM,DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(synch link DRAM,SLDRAM)以及直接内存总线随机存取存储器(Direct Rambus RAM,DR RAM)等等。也就是说,本申请实施例中的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
本申请实施例中的存储器可以向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。该处理器可以用于执行存储器中存储的指令,并且该处理器执行该指令时,该处理器可以执行上述方法实施例中与终端设备对应的各个步骤。
在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器执行存储器中的指令,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
还应理解,在本申请实施例中,图像中的像素点可以位于不同的行和/或列,其中,A的长度可以对应于A包括的位于同一行的像素点个数,A的高度可以对应于A包括的位于同一列的像素点个数。此外,A的长度和高度也可以分别称为A的宽度和深度,本申请实施例对此不做限定。
还应理解,在本申请实施例中,“与A的边界间隔分布”可以指与A的边界间隔至少一个像素点,也可以称为“不与A的边界相邻”或者“不位于A的边界”,本申请实施例对此不做限定,其中,A可以是图像、矩形区域或子图像,等等。
还应理解,上文对本申请实施例的描述着重于强调各个实施例之间的不同之处,未提到的相同或相似之处可以互相参考,为了简洁,这里不再赘述。
本申请实施例还提供了一种计算机可读存储介质,用于存储计算机程序。
可选的,该计算机可读存储介质可应用于本申请实施例中的编码装置,并且该计算机程序使得计算机执行本申请实施例的各个方法中由编码装置实现的相应流程,为了简洁,在此不再赘述。
本申请实施例还提供了一种计算机程序产品,包括计算机程序指令。
可选的,该计算机程序产品可应用于本申请实施例中的编码装置,并且该计算机程序指令使得计算机执行本申请实施例的各个方法中由编码装置实现的相应流程,为了简洁,在此不再赘述。
本申请实施例还提供了一种计算机程序。
可选的,该计算机程序可应用于本申请实施例中的编码装置,当该计算机程序在计算机上运行时,使得计算机执行本申请实施例的各个方法中由编码装置实现的相应流程,为了简洁,在此不再赘述。
应理解,在本申请实施例中,术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系。例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本申请实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (25)

1.一种视频编码的方法,其特征在于,包括:
利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,所述第一边界图像块由第二处理器进行编码;
利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,所述第二边界图像块由第三处理器进行编码,所述待编码图像包括相邻的第一图像和第二图像,所述第一边界图像块为所述第一图像中的边界图像块,所述第二边界图像块为所述第二图像中的边界图像块,所述第二边界图像块与所述第一边界图像块相邻;
利用所述第一处理器,基于所述第一编码参数信息、所述第二编码参数信息、所述第一重建像素和所述第二重建像素,对所述第一图像和所述第二图像之间的相邻边界进行滤波;
所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:
利用所述第一处理器接收所述第二处理器包括的第一去块滤波模块发送的所述第一编码参数信息,所述第一去块滤波模块用于对所述第一图像中包括的除所述第一边界图像块之外的图像块进行去块滤波;
所述利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:
利用所述第一处理器接收所述第三处理器包括的第二去块滤波模块发送的所述第二编码参数信息,所述第二去块滤波模块用于对所述第二图像中包括的除所述第二边界图像块之外的图像块进行去块滤波。
2.根据权利要求1所述的方法,其特征在于,所述第一编码参数信息和所述第二编码参数信息均包括以下信息中的至少一种:
编码模式、划分方式、运动矢量、变换系数和量化参数。
3.根据权利要求1所述的方法,其特征在于,所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:
利用所述第一处理器接收所述第二处理器包括的第一样点自适应补偿SAO模块发送的所述第一重建像素,所述第一SAO模块用于对所述第一图像中包括的除第一图像块之外的图像块进行SAO滤波,所述第一图像块为与所述第一图像和所述第二图像之间的边界相邻的编码树单元CTU包括的图像块;
利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:
利用所述第一处理器接收所述第三处理器包括的第二SAO模块发送的所述第二重建像素,所述第二SAO模块用于对所述第二图像中包括的除所述第二图像块之外的图像块进行SAO滤波,所述第二图像块为与所述第一图像和所述第二图像之间的边界相邻的CTU包括的图像块。
4.根据权利要求1所述的方法,其特征在于,若所述第一图像和所述第二图像是经过垂直划分得到的,所述方法还包括:
利用所述第一处理器接收所述第二处理器发送的第三重建像素,所述第三重建像素与所述第一重建像素列相邻;
利用所述第一处理器接收所述第三处理器发送的第四重建像素,所述第四重建像素与所述第二重建像素列相邻;
其中,所述第一重建像素的列数、所述第二重建像素的列数、所述第三重建像素的列数与所述第四重建像素的列数之和为帧缓冲压缩FBC模块所包括的单位像素列数的整数倍。
5.根据权利要求4所述的方法,其特征在于,所述FBC模块所包括的所述单位像素列数与所述待编码图像的像素的位宽负相关。
6.根据权利要求5所述的方法,其特征在于,所述第一重建像素与所述第三重建像素的列数之和与所述第一图像的宽度和/或所述待编码图像的像素的位宽有关,所述第一图像的宽度为所述第一图像包括的像素的列数与所述第一图像中的编码树单元CTU包括的像素的列数的比值;
所述第二重建像素与所述第四重建像素的列数之和与所述第二图像的宽度和/或所述待编码图像的像素的位宽有关,所述第二图像的宽度为所述第二图像包括的像素的列数与所述第二图像中的CTU包括的像素的列数的比值。
7.根据权利要求6所述的方法,其特征在于,所述第一重建像素与所述第三重建像素的列数之和是基于所述第一图像的宽度与预设值取余后得到的余数与参数决定的;
所述第二重建像素与所述第四重建像素的列数之和是基于所述第二图像的宽度与预设值取余后得到的余数与参数决定的;
所述参数包括以下参数中的至少一种参数:
所述待编码图像的像素的位宽、所述FBC模块所包括的所述单位像素列数、所述待编码图像包括的CTU的大小。
8.根据权利要求1所述的方法,其特征在于,若所述第一图像和所述第二图像是对所述待编码图像经过垂直划分得到的,所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:
利用所述第一处理器接收所述第二处理器对所述待编码图像包括的所述第一图像错位n行进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;
所述利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:
利用所述第一处理器接收所述第三处理器对所述待编码图像包括的所述第二图像进错位n行进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;
其中,所述n的取值与所述第二处理器和/或所述第三处理器包括的滤波模块和/或SAO模块进行滤波时的滤波单元有关。
9.根据权利要求8所述的方法,其特征在于,所述对所述第一图像和所述第二图像之间的相邻边界进行滤波,包括:
利用所述第一处理器对所述第一边界图像块和所述第二边界图像块在水平方向错位m行进行错位滤波,所述m的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
10.根据权利要求1所述的方法,其特征在于,若所述第一图像和所述第二图像是对所述待编码图像经过水平划分得到的,所述利用第一处理器接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,包括:
利用所述第一处理器接收所述第二处理器对所述待编码图像包括的所述第一图像错位p列进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;
所述利用所述第一处理器接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,包括:
利用所述第一处理器接收所述第三处理器对所述待编码图像包括的所述第二图像错位p列进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;
其中,所述p的取值与所述第二处理器和/或所述第三处理器包括的滤波模块和/或SAO模块进行滤波时的滤波单元有关。
11.根据权利要求10所述的方法,其特征在于,所述对所述第一图像和所述第二图像之间的相邻边界进行滤波,包括:
利用所述第一处理器对所述第一边界图像块和所述第二边界图像块在垂直方向错位q列进行错位滤波,所述q的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
12.根据权利要求1所述的方法,其特征在于,所述第一处理器、所述第二处理器以及所述第三处理器属于同一编码器。
13.一种视频编码的装置,其特征在于,包括第一处理器、第二处理器和第三处理器;
所述第一处理器,用于接收待编码图像中的第一边界图像块的第一编码参数信息和第一重建像素,所述第一边界图像块由第二处理器进行编码;
接收所述待编码图像中的第二边界图像块的第二编码参数信息和第二重建像素,所述第二边界图像块由第三处理器进行编码,所述待编码图像包括相邻的第一图像和第二图像,所述第一边界图像块为所述第一图像中的边界图像块,所述第二边界图像块为所述第二图像中的边界图像块,所述第二边界图像块与所述第一边界图像块相邻;
基于所述第一编码参数信息、所述第二编码参数信息、所述第一重建像素和所述第二重建像素,对所述第一图像和所述第二图像之间的相邻边界进行滤波;
所述第一处理器进一步用于:
接收所述第二处理器包括的第一去块滤波模块发送的所述第一编码参数信息,所述第一去块滤波模块用于对所述第一图像中包括的除所述第一边界图像块之外的图像块进行去块滤波;
接收所述第三处理器包括的第二去块滤波模块发送的所述第二编码参数信息,所述第二去块滤波模块用于对所述第二图像中包括的除所述第二边界图像块之外的图像块进行去块滤波。
14.根据权利要求13所述的装置,其特征在于,所述第一编码参数信息和所述第二编码参数信息均包括以下信息中的至少一种:
编码模式、划分方式、运动矢量、变换系数和量化参数。
15.根据权利要求13所述的装置,其特征在于,所述第一处理器进一步用于:
接收所述第二处理器包括的第一样点自适应补偿SAO模块发送的所述第一重建像素,所述第一SAO模块用于对所述第一图像中包括的除第一图像块之外的图像块进行SAO滤波,所述第一图像块为与所述第一图像和所述第二图像之间的边界相邻的编码树单元CTU包括的图像块;
接收所述第三处理器包括的第二SAO模块发送的所述第二重建像素,所述第二SAO模块用于对所述第二图像中包括的除所述第二图像块之外的图像块进行SAO滤波,所述第二图像块为与所述第一图像和所述第二图像之间的边界相邻的CTU包括的图像块。
16.根据权利要求13所述的装置,其特征在于,若所述第一图像和所述第二图像是经过垂直划分得到的,所述第一处理器还用于:
接收所述第二处理器发送的第三重建像素,所述第三重建像素与所述第一重建像素列相邻;
接收所述第三处理器发送的第四重建像素,所述第四重建像素与所述第二重建像素列相邻;
其中,所述第一重建像素的列数、所述第二重建像素的列数、所述第三重建像素的列数与所述第四重建像素的列数之和为帧缓冲压缩FBC模块所包括的单位像素列数的整数倍。
17.根据权利要求16所述的装置,其特征在于,所述FBC模块所包括的所述单位像素列数与所述待编码图像的像素的位宽负相关。
18.根据权利要求16所述的装置,其特征在于,所述第一重建像素与所述第三重建像素的列数之和与所述第一图像的宽度和/或所述待编码图像的像素的位宽有关,所述第一图像的宽度为所述第一图像包括的像素的列数与所述第一图像中的编码树单元CTU包括的像素的列数的比值;
所述第二重建像素与所述第四重建像素的列数之和与所述第二图像的宽度和/或所述待编码图像的像素的位宽有关,所述第二图像的宽度为所述第二图像包括的像素的列数与所述第二图像中的CTU包括的像素的列数的比值。
19.根据权利要求18所述的装置,其特征在于,所述第一重建像素与所述第三重建像素的列数之和是基于所述第一图像的宽度与预设值取余后得到的余数与参数决定的;
所述第二重建像素与所述第四重建像素的列数之和是基于所述第二图像的宽度与预设值取余后得到的余数与参数决定的;
所述参数包括以下参数中的至少一种参数:
所述待编码图像的像素的位宽、所述FBC模块所包括的所述单位像素列数、所述待编码图像包括的CTU的大小。
20.根据权利要求13所述的装置,其特征在于,若所述第一图像和所述第二图像是是所述待编码图像经过垂直划分得到的,所述第一处理器进一步用于:
接收所述第二处理器对所述待编码图像包括的所述第一图像错位n行进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;
接收所述第三处理器对所述待编码图像包括的所述第二图像进错位n行进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;
其中,所述n的取值与所述第二处理器和/或所述第三处理器包括的滤波模块和/或SAO模块进行滤波时的滤波单元有关。
21.根据权利要求20所述的装置,其特征在于,所述第一处理器进一步用于:
对所述第一边界图像块和所述第二边界图像块在水平方向错位m行进行错位滤波,所述m的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
22.根据权利要求13所述的装置,其特征在于,若所述第一图像和所述第二图像是对所述待编码图像经过水平划分得到的,所述第一处理器进一步用于:
接收所述第二处理器对所述待编码图像包括的所述第一图像错位p列进行错位滤波后发送的所述第一边界图像块的所述第一编码参数信息和所述第一重建像素;
接收所述第三处理器对所述待编码图像包括的所述第二图像错位p列进行错位滤波后发送的所述第二边界图像块的所述第二编码参数信息和所述第二重建像素;
其中,所述p的取值与所述第二处理器和/或所述第三处理器包括的滤波模块和/或SAO模块进行滤波时的滤波单元有关。
23.根据权利要求22所述的装置,其特征在于,所述第一处理器进一步用于:
对所述第一边界图像块和所述第二边界图像块在垂直方向错位q列进行错位滤波,所述q的取值与所述第一处理器包括的滤波模块进行滤波时的滤波单元有关。
24.根据权利要求13所述的装置,其特征在于,所述第一处理器、所述第二处理器以及所述第三处理器属于同一编码器。
25.一种计算机可读存储介质,其特征在于,包括程序指令,所述程序指令被计算机运行时,所述计算机执行如权利要求1至12中任一项所述的方法。
CN202080004071.2A 2020-03-31 2020-03-31 视频编码的方法和装置 Active CN112514390B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2020/082605 WO2021196035A1 (zh) 2020-03-31 2020-03-31 视频编码的方法和装置

Publications (2)

Publication Number Publication Date
CN112514390A CN112514390A (zh) 2021-03-16
CN112514390B true CN112514390B (zh) 2023-06-20

Family

ID=74953063

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080004071.2A Active CN112514390B (zh) 2020-03-31 2020-03-31 视频编码的方法和装置

Country Status (2)

Country Link
CN (1) CN112514390B (zh)
WO (1) WO2021196035A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114501035B (zh) * 2022-01-26 2024-02-13 百果园技术(新加坡)有限公司 视频编解码滤波处理方法、系统、设备及存储介质
CN114938453B (zh) * 2022-07-19 2022-09-30 深流微智能科技(深圳)有限公司 视频编码方法、芯片、存储介质及计算机设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103636227A (zh) * 2012-02-03 2014-03-12 联发科技股份有限公司 贯穿图块或条带边界的环路滤波方法及其装置
CN103947213A (zh) * 2011-10-28 2014-07-23 高通股份有限公司 瓦片边界上的环路滤波控制
CN105554505A (zh) * 2014-10-22 2016-05-04 三星电子株式会社 应用处理器及其方法以及包括该应用处理器的系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9313523B2 (en) * 2010-07-16 2016-04-12 Sharp Laboratories Of America, Inc. System for low resolution power reduction using deblocking
CN103916676B (zh) * 2012-12-31 2017-09-29 华为技术有限公司 一种边界强度确定方法、去块效应滤波方法、及装置
US9762906B2 (en) * 2013-02-18 2017-09-12 Mediatek Inc. Method and apparatus for video decoding using multi-core processor
US20150215631A1 (en) * 2014-01-23 2015-07-30 Broadcom Corporation Parallel Coding with Overlapped Tiles
CN109996069B (zh) * 2018-01-03 2021-12-10 华为技术有限公司 视频图像编解码方法及设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103947213A (zh) * 2011-10-28 2014-07-23 高通股份有限公司 瓦片边界上的环路滤波控制
CN103636227A (zh) * 2012-02-03 2014-03-12 联发科技股份有限公司 贯穿图块或条带边界的环路滤波方法及其装置
CN105554505A (zh) * 2014-10-22 2016-05-04 三星电子株式会社 应用处理器及其方法以及包括该应用处理器的系统

Also Published As

Publication number Publication date
CN112514390A (zh) 2021-03-16
WO2021196035A1 (zh) 2021-10-07

Similar Documents

Publication Publication Date Title
EP3459245B1 (en) Confusion of multiple filters in adaptive loop filtering in video coding
CN112243587B (zh) 基于块的自适应环路滤波器(alf)设计和信令通知
EP3304908A1 (en) Slice level intra block copy and other video coding improvements
WO2013067435A1 (en) Differential pulse code modulation intra prediction for high efficiency video coding
WO2020125795A1 (en) Indication of two step cross-component prediction mode
CN110800295B (zh) 基于无除法双边滤波器解码方法、装置、存储介质
US11611769B2 (en) Video coding with triangular shape prediction units
CN112956194A (zh) 图像信号编码/解码方法及其设备
CN112514390B (zh) 视频编码的方法和装置
CN113196783A (zh) 去块效应滤波自适应的编码器、解码器及对应方法
CN113728632A (zh) 视频编码、解码方法及系统
CN112534824B (zh) 视频编码的方法和装置
CN114598873B (zh) 量化参数的解码方法和装置
CN115280770B (zh) 用于对视频进行编码或解码的方法和装置
US20230403392A1 (en) Intra prediction method and decoder
WO2023154574A1 (en) Methods and devices for geometric partitioning mode with adaptive blending
WO2023141338A1 (en) Methods and devices for geometric partitioning mode with split modes reordering
CN117956168A (zh) 图像编解码方法和装置
WO2023250047A1 (en) Methods and devices for motion storage in geometric partitioning mode
WO2023200907A1 (en) Methods and devices for geometric partitioning mode with adaptive blending
CN112136329A (zh) 视频编解码的方法和装置
CN116830577A (zh) 跨分量自适应环路滤波器
WO2023158765A1 (en) Methods and devices for geometric partitioning mode split modes reordering with pre-defined modes order
CN117730531A (zh) 用于解码器侧帧内模式推导的方法和设备
CN116868571A (zh) 对于帧间预测的改进的局部光照补偿

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant