CN118119974A - 编解码方法、编码器、解码器以及存储介质 - Google Patents

编解码方法、编码器、解码器以及存储介质 Download PDF

Info

Publication number
CN118119974A
CN118119974A CN202180102871.2A CN202180102871A CN118119974A CN 118119974 A CN118119974 A CN 118119974A CN 202180102871 A CN202180102871 A CN 202180102871A CN 118119974 A CN118119974 A CN 118119974A
Authority
CN
China
Prior art keywords
sub
block image
image unit
information
indication parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180102871.2A
Other languages
English (en)
Inventor
虞露
李思成
王楚楚
戴震宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Zhejiang University ZJU
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU, Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Zhejiang University ZJU
Publication of CN118119974A publication Critical patent/CN118119974A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/04Texture mapping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Image Generation (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请实施例提供了一种编解码方法、编码器、解码器以及存储介质,解码器解码码流,确定第一指示参数;当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数;当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理。

Description

编解码方法、编码器、解码器以及存储介质 技术领域
本申请实施例涉及图像处理技术领域,尤其涉及一种编解码方法、编码器、解码器以及存储介质。
背景技术
在视频编解码领域,在使用基于图像的渲染方法实现非漫反射表面的渲染过程中,首先需要通过相机捕获该表面在不同观测方向下所呈现出的颜色,后续在渲染时根据渲染视窗的位置与观测方向,对不同观测方向的相机所捕获的该表面的颜色进行加权融合,形成该表面在渲染视窗的位姿下所呈现出的颜色。
目前,允许对于三维空间中的同一区域使用多个纹理子块图像单元进行表达并放置进纹理拼接图像中,但与此同时,这些纹理子块图像单元图像所对应的几何子块图像单元图像也必须同时放置进几何拼接图像中进行编码、传输。
由此可见,目前所支持的对三维空间中的非漫反射表面的表达方式,无法兼顾非漫反射特性的表达和压缩性能,因此,在满足表面非漫反射特性的充分表达的基础上,如何实现编解码效率和压缩性能的提升,成为亟待解决的关键问题。
发明内容
本申请实施例提供一种编解码方法、编码器、解码器以及存储介质,能够在提高解码的准确性的基础上降低复杂度,实现简单高效的编解码方法,从而提升压缩性能。
本申请实施例的技术方案可以如下实现:
第一方面,本申请实施例提供了一种解码方法,应用于解码器,所述方法包括:
解码码流,确定第一指示参数;
当所述第一指示参数指示存在子块图像单元不包含几何信息时,确定所述子块图像单元对应的第二指示参数;
当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理。
第二方面,本申请实施例提供了一种编码方法,应用于编码器,所述方法包括:
当子块图像单元不包含几何信息时,编码所述子块图像单元,生成码流,同时确定第一指示参数和所述子块图像单元的第二指示参数;其中,所述第一指示参数用于确定是否存在子块图像单元不包含几何信息;所述第二指示参数用于确定所述子块图像单元是否包含几何信息;
将所述第一指示参数和所述第二指示参数写入所述码流。
第三方面,本申请实施例提供了一种解码器,所述解码器包括:解码部分,第一确定部分,重建部分;
所述解码部分,配置为解码码流;
所述第一确定部分,配置为确定第一指示参数;当所述第一指示参数指示存在子块图像单元不包含几何信息时,确定所述子块图像单元对应的第二指示参数;
所述重建部分,配置为当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理。
第四方面,本申请实施例提供了一种解码器,所述解码器包括第一处理器、存储有所述第一处理器可执行指令的第一存储器,当所述指令被执行时,所述第一处理器执行时实现如上所述的解码方法。
第五方面,本申请实施例提供了一种编码器,所述编码器包括:编码部分,
所述编码部分,配置为当子块图像单元不包含几何信息时,编码所述子块图像单元,生成码流,同时确定第一指示参数和所述子块图像单元的第二指示参数;其中,所述第一指示参数用于确定是否存在子块图像单元不包含几何信息;所述第二指示参数用于确定所述子块图像单元是否包含几何信息;将所述第一指示参数和所述第二指示参数写入所述码流。
第六方面,本申请实施例提供了一种编码器,所述编码器包括第二处理器、存储有所述第二处理器可执行指令的第二存储器,当所述指令被执行时,所述第二处理器执行时实现如上所述的解码方法。
第七方面,本申请实施例提供了一种计算机存储介质,所述计算机存储介质存储有计算机程序,所述计算机程序被第一处理器执行时实现如第一方面所述的解码方法,或者,被第二处理器执行时 实现如第二方面所述的解码方法。
本申请实施例提供了一种编解码方法、编码器、解码器以及存储介质,解码器解码码流,确定第一指示参数;当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数;当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理。当子块图像单元不包含几何信息时,编码子块图像单元,生成码流,同时确定第一指示参数和子块图像单元的第二指示参数;其中,第一指示参数用于确定是否存在子块图像单元不包含几何信息;第二指示参数用于确定子块图像单元是否包含几何信息;将第一指示参数和第二指示参数写入码流。也就是说,在本申请的实施例中,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。
附图说明
图1为解码方法的实现流程示意图一;
图2为解码方法的实现流程示意图二;
图3为解码方法的实现流程示意图三;
图4为编码方法的实现流程示意图;
图5为本申请实施例提出的解码器的组成结构示意图一;
图6为本申请实施例提出的解码器的组成结构示意图二;
图7为本申请实施例提出的编码器的组成结构示意图一;
图8为本申请实施例提出的编码器的组成结构示意图二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。可以理解的是,此处所描述的具体实施例仅仅用于解释相关申请,而非对该申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关申请相关的部分。
在现实生活中,受物体材质的影响,在不同角度观察同一物体的同一表面上的同一点时,往往会呈现出不同颜色。这种物体表面颜色随着观察角度的变化而变化的现象,被称为物体表面的非漫反射现象,这种表面也被称为非漫反射表面。
在运动图像专家组沉浸式视频(MPEG Immersive Video,MIV)中,为降低传输像素率、提升压缩效率,其会对输入该系统的多视点加深度视频逐帧进行视点间去冗余操作,最终在单个时间片上对于三维空间中的一个区域仅使用描述该区域几何信息的一个几何子块图像单元图像(Patch)以及与该几何子块图像单元图像对应的一个纹理子块图像单元图像进行表达。这些子块图像单元图像会被放置到一张名为子块图像单元拼接图像(Atlas)的画布上,不同类型的子块图像单元图像会被放置到不同的Atlas上,放置几何子块图像单元图像的Atlas被称为几何Atlas,即几何拼接图像,放置纹理子块图像单元图像的Atlas被称为纹理Atlas,即纹理拼接图像。这些Atlas在时间上堆叠形成Atlas序列后,会使用视频编解码器对Atlas序列进行编码形成码流再传输。
在MIV现有的实现方法运动图像专家组沉浸式视频参考软件平台(Test model of MPEG Immersive Video,TMIV)中,在消除视点间冗余的过程中,对于三维空间中的一个区域仅使用一个几何子块图像单元图像和一个纹理子块图像单元图像来表达。这种表示方法在表达漫反射表面时,是可行且高效的,因为漫反射表面在各个观测方向上呈现出的颜色是十分接近的,甚至是几乎一致的。但这种表达方式在表达非漫反射表面时,受制于一个区域仅传输一份纹理子块图像单元图像,因此无法实现在不同的观测方向上呈现出不同颜色的非漫反射特性。
在使用基于图像的渲染方法实现非漫反射表面的渲染过程中,首先需要通过相机捕获该表面在不同观测方向下所呈现出的颜色,后续在渲染时根据渲染视窗的位置与观测方向,对不同观测方向的相机所捕获的该表面的颜色进行加权融合,形成该表面在渲染视窗的位姿下所呈现出的颜色。简而言之,若要实现非漫反射表面的表达,需要使用该表面在不同观测方向上的多份观测纹理图像。因此,非漫反射表面的高效表达方式是使用一份几何子块图像单元图像以及多份在不同方向上观测的纹理子块图像单元图像进行表达。
现有的MIV标准允许对于三维空间中的同一区域使用多个纹理子块图像单元图像进行表达并放置进纹理Atlas中,但与此同时,目前的MIV标准要求这些纹理子块图像单元图像所对应的几何子块图像单元图像也必须同时放置进几何Atlas中进行编码、传输。
也就是说,目前MIV标准所支持的对三维空间中的非漫反射表面的表达方式,主要包括使用1个几何子块图像单元图像和1个纹理子块图像单元图像进行表达,或者,使用多个几何子块图像单元图像和相同数量的多个纹理子块图像单元图像进行表达。
然而,仅使用1个几何子块图像单元图像和1个纹理子块图像单元图像的表达方式,无法充分表达该表面的非漫反射特性,进而会影响后续渲染质量;使用个几何子块图像单元图像和多个纹理子块图像单元图像的表达方式虽然能够充分表达该表面非漫反射特性,但多个几何子块图像单元图像对同一表面重复表达,几何信息表达效率低,进而会降低编码效率。
由此可见,目前MIV标准所支持的对三维空间中的非漫反射表面的表达方式,无法兼顾非漫反射特性的表达和压缩性能,因此,在满足表面非漫反射特性的充分表达的基础上,如何实现编解码效率和压缩性能的提升,成为亟待解决的关键问题。
为例解决上述问题,在本申请的实施例中,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。
进一步地,本申请提出的编解码方法,不必使用多块几何子块图像对三维空间中的同一区域进行重复表达,最少可只使用一个几何子块图像对三维空间一个区域表达。因此,为实现非漫反射物体的高效编码与渲染,对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T)。这样,在对同一区域提供多份不同视角下的纹理信息的同时,可以传输少量且足够表达该区域几何信息。相比于MIV标准中支持的现有方案,该方案能够支持非漫反射表面的充分且高效的表达,在有效提升对该表面的渲染质量的同时,降低几何数据的信息冗余程度,从而实现该系统在压缩非漫反射表面时的编码效率。
本申请实施例中的编解码方法,既可以应用于视频编码系统,也可以应用于视频解码系统,甚至还可以同时应用于视频编码系统和视频解码系统,但是本申请实施例不作具体限定。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
本申请的一实施例提出了一种解码方法,应用于解码器,图1为解码方法的实现流程示意图一,如图1所示,解码器进行解码的方法可以包括以下步骤:
步骤101、解码码流,确定第一指示参数。
在本申请的实施例中,解码器可以通过解码码流,确定第一指示参数。
进一步地,在本申请的实施例中,第一指示参数可以为序列级的指示参数,也可以为图像级的指示参数。
需要说明的是,在本申请的实施中,第一指示参数可以指示当前拼接图像序列对应的全部子块图像单元中是否存在至少一个子块图像单元不包含几何信息。
需要说明的是,在本申请的实施中,第一指示参数可以指示当前拼接图像对应的全部子块图像单元中是否存在至少一个子块图像单元不包含几何信息。
可以理解的是,在本申请的实施例中,可以将第一指示参数理解为一个表明是否存在子块图像单元仅包含纹理信息而不包含几何信息的标志位。具体地,解码器解码码流,可以确定作为第一指示参数的一个变量,从而可以通过该变量的取值来实现第一指示参数的确定。其中,第一指示参数的取值可以为第一值或第二值。
需要说明的是,在本申请的实施例中,如果第一指示参数的取值为第一值,那么可以确定存在子块图像单元不包含几何信息;如果第一指示参数的取值为第二值,那么可以确定不存在子块图像单元不包含几何信息,即确定全部子块图像单元均包含几何信息。
可以理解的是,在本申请的实施例中,可以设置第一值为1,第二值为0;也可以设置第一值为true,第二值为false。本申请不作具体限定。
进一步地,在本申请的实施例中,可以使用标志asme_patch_geometry_absent_flag来表示第一指示参数。例如,在本申请中,如果asme_patch_geometry_absent_flag的取值为1,那么可以表示存在不包含几何子块图像的子块图像单元,即存在仅包含纹理信息不包含几何信息的至少一个子块图像单元;如果asme_patch_geometry_absent_flag的取值为0,那么可以表示不存在不包含几何子块图像的子块图像单元,即全部子块图像单元均包含纹理信息和几何信息。
进一步地,在本申请的实施例中,当前拼接图像序列可以为当前待解码的、拼接图像(Atlas)序列。具体地,Atlas序列可以包括有一个或多个子块图像单元对应的几何信息或纹理信息,即可 以包括有一个或多个子块图像单元对应的几何子块图像单元图像或纹理子块图像单元图像。
可以理解的是,在本申请的实施例中,对于当前拼接图像序列的任意一个子块图像单元,该子块图像单元可以同时包含几何信息和纹理信息,也可以仅包含纹理信息而不包含几何信息。
可以理解的是,在本申请的实施例中,对于当前拼接图像的任意一个子块图像单元,该子块图像单元可以同时包含几何信息和纹理信息,也可以仅包含纹理信息而不包含几何信息。
进一步地,在本申请的实施例中,对于一个子块图像单元包含几何信息或者不包含几何信息的不同情况,可以选择不同的方式重建该子块图像单元,因此可以先确定用于在指示是否存在子块图像单元不包含几何信息的第一指示参数。
步骤102、当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数。
在本申请的实施例中,解码器在确定第一指示参数之后,如果第一指示参数指示存在子块图像单元不包含几何信息时,那么便可以进一步确定每一个子块图像单元对应的第二指示参数,以基于第二指示参数确定出不包含几何信息的子块图像单元。
进一步地,在本申请的实施例中,由于第一指示参数既可以为序列级的指示参数,也可以为图像级的指示参数,因此,当第一指示参数指示当前拼接图像序列存在子块图像单元不包含几何信息时,确定当前拼接图像序列的子块图像单元对应的第二指示参数。或者,当第一指示参数指示当前拼接图像存在子块图像单元不包含几何信息时,确定当前拼接图像的子块图像单元对应的第二指示参数。
需要说明的是,在本申请的实施中,第二指示参数可以指示对应的子块图像单元是否不包含几何信息。
可以理解的是,在本申请的实施例中,可以将第二指示参数理解为一个表明是否仅包含纹理信息而不包含几何信息的标志位。具体地,解码器解码码流,可以确定作为第二指示参数的一个变量,从而可以通过该变量的取值来实现第二指示参数的确定。其中,第二指示参数的取值可以为第一值或第二值。
需要说明的是,在本申请的实施例中,如果第二指示参数的取值为第一值,那么可以确定对应的子块图像单元不包含几何信息;如果第二指示参数的取值为第二值,那么可以确定对应的子块图像单元包含几何信息。
可以理解的是,在本申请的实施例中,可以设置第一值为1,第二值为0;也可以设置第一值为true,第二值为false。本申请不作具体限定。
进一步地,在本申请的实施例中,可以使用标志pdu_geometry_absent_flag来表示第二指示参数。例如,在本申请中,如果pdu_geometry_absent_flag的取值为1,那么可以表示对应的子块图像单元不包含几何子块图像,即对应的子块图像单元仅包含纹理信息不包含几何信息;如果pdu_geometry_absent_flag的取值为0,那么可以表示对应的子块图像单元包含几何子块图像,即对应的子块图像单元包含纹理信息和几何信息。
需要说明的是,在本申请的实施例中,当前拼接图像序列可以包括至少一个子拼接图像,其中,每一个子拼接图像包括有至少一个子块图像单元。相应地,可以使用标志pdu_geometry_absent_flag[tileID][p]来表示第二指示参数,其中,tileID和p可以为一个子块图像单元的标识。例如,在本申请中,如果pdu_geometry_absent_flag[tileID][p]的取值为1,那么可以表示tileID的子拼接图像中的第p个子块图像单元不包含几何子块图像,即tileID的子拼接图像中的第p个子块图像单元仅包含纹理信息不包含几何信息;如果pdu_geometry_absent_flag[tileID][p]的取值为0,那么可以表示tileID的子拼接图像中的第p个子块图像单元包含几何子块图像,即tileID的子拼接图像中的第p个子块图像单元包含纹理信息和几何信息。
步骤103、当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理。
在本申请的实施例中,如果第一指示参数指示存在子块图像单元不包含几何信息,那么在确定子块图像单元对应的第二指示参数之后,如果确定第二指示参数指示子块图像单元不包含几何信息,那么可以进一步根据子块图像单元对应的纹理信息进行重建处理。
需要说明的是,在本申请的实施例中,如果通过第二指示参数确定对应的子块图像单元仅包括纹理信息而不包括几何信息,那么可以选择先确定该子块图像单元对应的纹理信息,然后再利用该纹理信息对该子块图像单元进行重建,最终便可以确定该子块图像单元对应的重建子块图像单元。
进一步地,在本申请的实施例中,基于子块图像单元对应的纹理信息确定子块图像单元对应的 重建子块图像单元时,既可以选择仅使用纹理信息完成重建处理,也可以选择先使用参考子块图像单元的几何信息对该子块图像单元的几何信息进行重建,然后再结合该子块图像单元的纹理信息完成图像重建处理。
可以理解的是,在本申请中,一种实施方式为:当第二指示参数指示子块图像单元不包含几何信息时,可以先确定子块图像单元对应的纹理信息;然后根据纹理信息对子块图像单元进行重建处理。其中,重建后的子块图像单元仅包含纹理信息,而不包含几何信息。
需要说明的是,在本申请的实施例中,如果第二指示参数表明对应的子块图像单元仅包含纹理子块图像(纹理信息)而并不包含几何子块图像(几何信息),即通过第二指示参数可以确定对应的子块图像单元不包含几何信息,那么便不需要进行几何信息的解码处理,而是仅解码获取对应的纹理信息。相应地,在后续的图像重建处理中也无需考虑该子块图像单元的几何信息,而是仅根据对应的纹理信息确定对应的重建子块图像单元。
也就是说,本申请提出的解码方法,在解码过程中,每遇到一个Atlas序列(当前拼接图像序列),都可以先确定该Atlas序列对应的asme_patch_geometry_absent_flag(第一指示参数),然后可以根据asme_patch_geometry_absent_flag判断该Atlas序列是否存在子块图像单元不包含几何子块图像(几何信息)。
需要说明的是,如果asme_patch_geometry_absent_flag的取值为1,则可以确定该Atlas序列中存在不包含几何子块图像的子块图像单元,此时为了确定出具体是哪些子块图像单元不包含几何子块图像,需要进一步确定每一个子块图像单元对应的pdu_geometry_absent_flag(第二指示参数)。如果asme_patch_geometry_absent_flag的取值为0,则可以确定该Atlas序列中没有不包含几何子块图像的子块图像单元,此时则不需要进行pdu_geometry_absent_flag的确定,而是直接解码获得每一个子块图像单元的几何子块图像(第一几何信息)和纹理子块图像(纹理信息),以根据几何子块图像和纹理子块图像进行重建处理。
进一步地,在本申请的实施例中,如果确定该Atlas序列中存在不包含几何子块图像的子块图像单元,那么在对该Atlas序列中的所有子块图像单元逐个进行解码的过程中,均可以根据pdu_geometry_absent_flag来进一步判断对应的子块图像单元是否包含几何子块图像。具体地,如果pdu_geometry_absent_flag的取值为1,则可以确定对应的子块图像单元是不包含几何子块图像的,此时,在解码时便不会再从几何Atlas中获取对应的子块图像单元中的几何子块图像,而是仅从纹理Atlas中获取对应的子块图像单元中的纹理子块图像,最终便可以根据该纹理子块图像确定对应的重建子块图像单元。如果pdu_geometry_absent_flag的取值为0,则可以确定对应的子块图像单元是包含几何子块图像的,此时,在解码时仍然需要再从几何Atlas中获取对应的子块图像单元中的几何子块图像,同时从纹理Atlas中获取对应的子块图像单元中的纹理子块图像,最终便可以结合该几何子块图像和该纹理子块图像确定对应的重建子块图像单元。
可以理解的是,在本申请中,一种实施方式为:当第二指示参数指示子块图像单元不包含几何信息时,可以先确定子块图像单元对应的纹理信息和参考子块图像单元的标识信息;然后根据标识信息确定子块图像单元对应的第一几何信息;最终便可以根据纹理信息和第一几何信息对子块图像单元进行重建处理。其中,重建后的子块图像既包含纹理信息,也包含几何信息。
需要说明的是,在本申请的实施例中,如果第二指示参数表明对应的子块图像单元仅包含纹理子块图像(纹理信息)而并不包含几何子块图像(几何信息),即通过第二指示参数可以确定对应的子块图像单元不包含几何信息,那么便需要先进行几何信息的重建处理,同时解码获取对应的纹理信息。相应地,在后续的图像重建处理中,可以选择结合该子块图像单元的纹理信息和重建后的几何信息(第一几何信息)确定对应的重建子块图像单元。
进一步地,在本申请的实施例中,可以先确定子块图像单元对应的参考子块图像单元的标识信息,然后根据标识信息确定子块图像单元对应的第一几何信息。其中,该标识信息可以用于对参考子块图像单元进行确定。例如,可以使用pdu_geometry_reference_patch_id[tileID][p]表示标识信息,其中,tileID和p可以为参考子块图像单元的索引,通过标识信息pdu_geometry_absent_flag[tileID][p]可以将参考子块图像单元指向tileID的子拼接图像中的第p个子块图像单元。
可以理解的是,在本申请的实施例中,在根据标识信息确定对应的参考子块图像单元之后,便可以进一步确定参考子块图像单元对应的第二几何信息,进而可以利用第二几何信息完成子块图像单元的几何信息的重建,确定子块图像单元对应的第一几何信息。
也就是说,在本申请的实施例中,如果基于第二指示参数确定对应的子块图像单元不包含几何信息,那么可以选择使用参考子块图像单元的第二几何信息重建该子块图像单元的第一几何信息, 从而可以基于该子块图像单元的纹理信息和第一几何信息确定对应的重建子块图像单元。
也就是说,本申请提出的解码方法,在解码过程中,每遇到一个Atlas序列(当前拼接图像序列),都可以先确定该Atlas序列对应的asme_patch_geometry_absent_flag(第一指示参数),然后可以根据asme_patch_geometry_absent_flag判断该Atlas序列是否存在子块图像单元不包含几何子块图像(几何信息)。
需要说明的是,如果asme_patch_geometry_absent_flag的取值为1,则可以确定该Atlas序列中存在不包含几何子块图像的子块图像单元,此时为了确定出具体是哪些子块图像单元不包含几何子块图像,需要进一步确定每一个子块图像单元对应的pdu_geometry_absent_flag(第二指示参数)。如果asme_patch_geometry_absent_flag的取值为0,则可以确定该Atlas序列中没有不包含几何子块图像的子块图像单元,此时则不需要进行pdu_geometry_absent_flag的确定,而是直接解码获得每一个子块图像单元的几何子块图像(第一几何信息)和纹理子块图像(纹理信息),以根据几何子块图像和纹理子块图像进行重建处理。
进一步地,在本申请的实施例中,如果确定该Atlas序列中存在不包含几何子块图像的子块图像单元,那么在对该Atlas序列中的所有子块图像单元逐个进行解码的过程中,均可以根据pdu_geometry_absent_flag来进一步判断对应的子块图像单元是否包含几何子块图像。具体地,如果pdu_geometry_absent_flag的取值为1,则可以确定对应的子块图像单元是不包含几何子块图像的,此时,在解码时便不会再从几何Atlas中获取对应的子块图像单元中的几何子块图像,而是需要进一步确定对应的子块图像单元的几何重建参考子块图像单元(参考子块图像单元)的索引号pdu_geometry_reference_patch_id(标识信息),进而可以根据pdu_geometry_reference_patch_id获取到其指向的参考子块图像单元的几何子块图像(第二几何信息),然后利用参考子块图像单元的几何子块图像重建子块图像单元的何子块图像,最终便可以结合从纹理Atlas中获取到的纹理子块图像(纹理信息)完成重建处理,确定对应的重建子块图像单元。如果pdu_geometry_absent_flag的取值为0,则可以确定对应的子块图像单元是包含几何子块图像的,此时,在解码时仍然需要再从几何Atlas中获取对应的子块图像单元中的几何子块图像,同时从纹理Atlas中获取对应的子块图像单元中的纹理子块图像,最终便可以结合该几何子块图像和该纹理子块图像确定对应的重建子块图像单元。
进一步地,在本申请的实施例中,图2为解码方法的实现流程示意图二,如图2所示,在解码码流,确定第一指示参数之后,即步骤101之后,解码器进行解码的方法还可以包括以下步骤:
步骤104、当第一指示参数指示子块图像单元均包含几何信息时,确定子块图像单元对应的纹理信息和第一几何信息。
在本申请的实施例中,解码器在确定第一指示参数之后,如果第一指示参数指示子块图像单元均包含几何信息时,那么便可以进一步确定每一个子块图像单元对应的纹理信息和第一几何信息。
可以理解的是,在本申请的实施例中,如果基于第一指示参数确定每一个子块图像单元都包含几何子块图像(几何信息)和纹理子块图像(纹理信息),那么便可以直接解码获得子块图像单元对应的纹理信息和第一几何信息。
也就是说,在本申请的实施例中,如果第一指示参数指示子块图像单元均包含几何信息,那么便无需再进行第二指示参数的确定,而是可以直接进行子块图像单元的纹理信息和第一几何信息的获取。
步骤105、根据纹理信息和第一几何信息对子块图像单元进行重建处理。
在本申请的实施例中,在确定子块图像单元对应的纹理信息和第一几何信息之后,便可以根据纹理信息和第一几何信息对子块图像单元进行重建处理,最终便可以获得对应的重建子块图像单元。
需要说明的是,在本申请的实施例中,对于同时包含纹理信息和第一几何信息的子块图像单元,可以选择直接利用对应的纹理信息和第一几何信息完成重建子块图像单元的确定。
进一步地,在本申请的实施例中,图3为解码方法的实现流程示意图三,如图3所示,当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数之后,即步骤102之后,解码器进行解码的方法还可以包括以下步骤:
步骤106、当第二指示参数指示子块图像单元包含几何信息时,确定子块图像单元对应的纹理信息和第一几何信息。
在本申请的实施例中,如果第一指示参数指示存在子块图像单元不包含几何信息,那么在确定子块图像单元对应的第二指示参数之后,如果确定第二指示参数指示子块图像单元包含几何信息,那么便可以进一步确定子块图像单元对应的纹理信息和第一几何信息。
可以理解的是,在本申请的实施例中,如果基于第二指示参数确定对应的子块图像单元同时包含几何子块图像(几何信息)和纹理子块图像(纹理信息),那么便可以直接解码获得该子块图像单元对应的纹理信息和第一几何信息。
也就是说,在本申请的实施例中,如果第一指示参数指示存在不包含几何信息的子块图像单元,可以进一步根据确定的第二指示参数确定出每一个子块图像单元是否包含几何信息的具体情况。其中,如果第二指示参数指示对应的子块图像单元包含几何信息,即对于同时包含几何信息和纹理信息的子块图像单元,可以直接进行子块图像单元的纹理信息和第一几何信息的获取。
步骤105、根据纹理信息和第一几何信息对子块图像单元进行重建处理。
在本申请的实施例中,在确定子块图像单元对应的纹理信息和第一几何信息之后,便可以根据纹理信息和第一几何信息对子块图像单元进行重建处理,最终便可以获得对应的重建子块图像单元。
进一步地,在本申请的实施例中,当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理之后,即步骤103之后,解码器进行渲染处理的方法可以包括以下步骤:
步骤107、基于包含几何信息的子块图像单元构建目标视窗。
步骤108、基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染后的图像。
在本申请的实施例中,对于不包含几何信息的子块图像单元,如果选择仅使用纹理信息完成重建处理,那么可以进一步基于包含几何信息的子块图像单元构建目标视窗;然后再基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染后的图像。
进一步地,在本申请的实施例中,在完成解码处理之后,可以进一步利用解码后获得的图像信息进行渲染处理。其中,渲染处理可以包括视点视图恢复和目标视窗几何重构与像素着色这两个过程。
需要说明的是,对于视点视图恢复的过程,常见的方式为对于所有子块图像单元,依次将子块图像单元中的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,也会依次将子块图像单元中的几何子块图像恢复到其所属原视点的几何视图的原始位置上。而在本申请中,在遍历所有子块图像单元进行视图恢复的过程中,如果第一指示参数指示子块图像单元均同时包含几何信息和纹理信息,或者,如果第二指示参数指示对应的子块图像单元同时包含几何信息和纹理信息,那么可以按照上述常见方式对子块图像单元进行视点视图恢复处理。而对于第二指示参数指示不包含几何信息、仅包含纹理信息的子块图像单元,即对于pdu_geometry_absent_flag取值为1的子块图像单元,可以选择仅仅将该子块图像单元的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,而不会涉及任何的几何子块图像恢复操作。
进一步地,在本申请的实施例中,在进行目标视窗几何重构与像素着色处理时,可以先利用视点视图恢复处理所恢复出的已有的多视点几何图像重构出目标视窗的几何图像,再遍历目标视窗中的每一个像素点,根据目标视窗中像素点在三维空间中的位置去恢复多视点纹理图像中获取每个像素的候选像素,根据各候选像素与目标视窗的相对位置、姿态关系对各个候选像素值进行加权融合得到目标视窗中各个像素点的像素值。
也就是说,在本申请的实施例中,对于全部子块图像单元,如果存在一部分子块图像单元同时包含几何信息和纹理信息,而其余一部分子块图像单元仅包含纹理信息的情况,在目标视窗渲染时,可以选择仅使用全部子块图像单元中的、包含几何信息的一部分子块图像单元来重构目标视窗几何图像,并使用所有可用的子块图像单元的纹理信息来为目标视窗着色。
进一步地,在本申请的实施例中,当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理之后,即步骤103之后,解码器进行渲染处理的方法可以包括以下步骤:
步骤109、基于参考子块图像单元对不包含几何信息的子块图像单元进行缺失几何子块图像重建处理。
步骤110、基于子块图像单元的几何信息构建目标视窗。
步骤108、基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染后的图像。
在本申请的实施例中,对于不包含几何信息的子块图像单元,如果选择先使用参考子块图像单元的几何信息对该子块图像单元的几何信息进行重建,再结合该子块图像单元的纹理信息完成图像重建处理,那么可以先基于参考子块图像单元对不包含几何信息的子块图像单元进行缺失几何子块图像重建处理,使得全部子块图像单元均同时包含几何信息和纹理信息,进而可以基于子块图像单元的几何信息构建目标视窗;再基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染 后的图像。
进一步地,在本申请的实施例中,在完成解码处理之后,可以进一步利用解码后获得的图像信息进行渲染处理。其中,渲染处理可以包括缺失几何子块图像重建、视点视图恢复以及目标视窗几何重构与像素着色这几个过程。
需要说明的是,对于缺失几何子块图像重建的过程,可以遍历全部子块图像单元,如果一个子块图像单元的pdu_geometry_absent_flag的取值为1,那么可以确定该子块图像单元缺少几何子块图像(几何信息),则开始进行缺失几何子块图像重建。具体地,可以利用索引号为pdu_geometry_reference_patch_id的参考子块图像单元中的几何子块图像和视点参数信息,重建出该子块图像单元的几何子块图像。在经过上述处理过程之后,所有的子块图像单元均含有纹理子块图像和几何子块图像。
进一步地,在本申请的实施例中,在完成缺失几何子块图像重建之后,对于所有子块图像单元,可以依次将子块图像单元中的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,也可以依次将子块图像单元中的几何子块图像恢复到其所属原视点的几何视图的原始位置上。
进一步地,在本申请的实施例中,在进行目标视窗几何重构与像素着色处理时,可以先利用视点视图恢复处理所恢复出的已有的多视点几何图像重构出目标视窗的几何图像,再遍历目标视窗中的每一个像素点,根据目标视窗中像素点在三维空间中的位置去恢复多视点纹理图像中获取每个像素的候选像素,根据各候选像素与目标视窗的相对位置、姿态关系对各个候选像素值进行加权融合得到目标视窗中各个像素点的像素值。
也就是说,在本申请的实施例中,对于全部子块图像单元,如果存在一部分子块图像单元同时包含几何信息和纹理信息,而其余一部分子块图像单元仅包含纹理信息的情况,在目标视窗渲染时,可以选择先进行缺失几何子块图像重建处理,从而可以使得经过缺失几何子块图像重构处理之后的全部子块图像单元均含有几何子块图像和纹理子块图像,最终便可以使用全部子块图像单元的几何信息来重构目标视窗几何图像,并使用全部子块图像单元的纹理信息来为目标视窗着色。
综上所述,通过上述步骤101至步骤110所提出的解码方法,能够支持对不包含几信息仅包含纹理信息的子块图像单元的解码,从而可以实现对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T),即在对同一区域提供多份不同视角下的纹理信息的同时,可以传输少量且足够表达该区域几何信息,进而能够支持非漫反射表面的充分且高效的表达,在有效提升对该表面的渲染质量的同时,降低几何数据的信息冗余程度,从而实现在压缩非漫反射表面时的编码效率。
需要说明的是,本申请提出的解码方法,为使得MIV标准支持非漫反射内容的高效编码,引入子块图像单元中可以不含几何子块的机制。
相应地,本申请提出的解码方法,在现有MIV标准语法结构的基础上,在拼接图像序列层级与子块图像单元层级设置支持子块图像单元不含几何子块的语法元素,使得不含几何子块图像的子块图像单元也可以正确解码。其中,不含几何子块图像的子块图像单元的几何信息,可由某个包含几何子块图像的子块图像单元重建得到。
本申请实施例提供一种解码方法,解码器解码码流,确定第一指示参数;当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数;当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理。也就是说,在本申请的实施例中,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。
基于上述实施例,本申请的再一实施例提出的解码方法,用于实现非漫反射物体的高效编码与渲染。具体地,对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T)。从而在对同一区域提供多份不同视角下的纹理信息的同时,可以传输少量且足够表达该区域的几何信息。
进一步地,在本申请的实施例中,在解码侧,解码器能够允许对不包含几何子块图像的子块图像单元进行正确解码。具体地,在目前的MIV标准的基础上对相关的语法结构进行了修改,使得修改后的MIV标准支持对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T)。
需要说明的是,在本申请的实施例中,可以选择通过语法的修改来声明当前子块图像单元中无 几何子块图像。
可以理解的是,在本申请的实施例中,在MIV标准中的语法结构“拼接图像序列参数集的MIV扩展语法”(“Atlas sequence parameter set MIV extension syntax”)中,增加一个语法元素
asme_patch_geometry_absent_flag,指明当前拼接图像序列中存在子块图像单元只包含纹理子块图像而不包含几何子块图像。其中,表1为目前的语法结构一,表2为修改后的语法结构一,基于表1,在表2中增加了用于指示当前拼接图像序列中是否存在子块图像单元只包含纹理子块图像而不包含几何子块图像的语法元素asme_patch_geometry_absent_flag。
表1
表2
需要说明的是,在本申请的实施例中,基于上述表2,解码码流之后,如果确定asme_patch_geometry_absent_flag等于1,则可以指示patch_data_unit()语法结构中存在pdu_geometry_absent_flag语法元素,即可以表征当前拼接图像序列存在仅包含纹理信息而不包含几何信息的子块图像单元。如果确定asme_patch_geometry_absent_flag等于0,则可以指示patch_data_unit()语法结构中不存在pdu_geometry_absent_flag语法元素,即可以表征当前拼接图像序列的全部子块图像单元均包含纹理信息和几何信息。
进一步地,在本申请的实施例中,如果确定当前拼接图像序列存在仅包含纹理信息而不包含几何信息的子块图像单元,那么可以进一步解码确定每一个子块图像单元对应的pdu_geometry_absent_flag语法元素。
可以理解的是,在本申请的实施例中,在MIV标准中的语法结构“子块图像数据单元的MIV扩展语法”(“Patch data unit MIV extension syntax”)中,增加一个语法元素pdu_geometry_absent_flag[tileID][p],表明当前子块图像单元在包含纹理子块图像的同时是否也包含几何子块图像,这使得解码器能够辨识没有包含几何子块图像的子块图像单元,进而可以在后续的操作中无需考虑该子块图像单元的几何信息。其中,表3为目前的语法结构二,表4为修改后的语法结构二,基于表3,在表4中增加了用于指示当前子块图像单元是否只包含纹理子块图像而不包含几何子块图像的语法元素pdu_geometry_absent_flag[tileID][p]。
表3
表4
需要说明的是,在本申请的实施例中,基于上述表4,如果确定pdu_geometry_absent_flag[tileID][p]等于1,则可以指示几何子块图像(Patch)没有有效的几何信息,即可以表征子块图像单元不包含几何信息。如果确定pdu_geometry_absent_flag[tileID][p]等于0,则可以指示几何子块图像(Patch)存在有效的几何信息,即可以表征子块图像单元包含几何信息。
进一步地,在本申请的实施例中,如果确定当前拼接图像序列存在仅包含纹理信息而不包含几何信息的子块图像单元,那么可以进一步解码确定每一个子块图像单元对应的pdu_geometry_absent_flag语法元素。
由此可见,在本申请的实施例中,在解码过程中,每遇到一个Atlas序列,都会根据asme_patch_geometry_absent_flag判断该Atlas序列是否存在子块图像单元不含几何子块图像。若asme_patch_geometry_absent_flag为1,则意味着该Atlas序列中存在不含几何子块图像的子块图像单元。若asme_patch_geometry_absent_flag为0,则意味着该Atlas序列中没有不含几何子块图像的子块图像单元。接下来,在对该Atlas序列中的所有子块图像单元逐个进行解码的过程中,均根据pdu_geometry_absent_flag判断当前的子块图像单元是否包含几何子块图像。若pdu_geometry_absent_flag为1,则意味着当前的子块图像单元是不含几何子块图像的。这时,在解码时不会再从几何Atlas中去获取当前子块图像单元中的几何子块图像。若pdu_geometry_absent_flag为0,则意味着当前的子块图像单元是含几何子块图像的。
需要说明的是,在本申请的实施例中,在目前的渲染过程中,对于所有子块图像单元,将逐个 将子块图像单元中的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,也会将子块图像单元中的几何子块图像恢复到其所属原视点的几何视图的原始位置上。而在本申请中,在遍历所有子块图像单元进行视图恢复的过程中,如果遇到子块图像单元的pdu_geometry_absent_flag为1的情况,那么就只会将子块图像单元的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,而不会涉及任何的几何子块图像恢复操作。
进一步地,在本申请的实施例中,在进行目标视窗几何重构与像素着色处理时,可以先利用上一步恢复出的已有的多视点几何图像重构出目标视窗的几何图像,再遍历目标视窗中的每一个像素点,根据目标视窗中像素点在三维空间中的位置去恢复的多视点纹理图像中获取每个像素的候选像素,根据各候选像素与目标视窗的相对位置、姿态关系对各个候选像素值进行加权融合得到目标视窗中各个像素点的像素值。
也就是说,在本申请的实施例中,子块图像单元列表中只有部分子块图像单元同时包含几何信息与纹理信息,其余子块图像单元仅包含纹理信息。在目标视窗渲染时,只会用到子块图像单元列表中部分包含几何信息的子块图像单元用以重构目标视窗几何图像,使用所有可用的子块图像单元中的纹理信息来为目标视窗着色。
本申请实施例提供一种解码方法,解码器解码码流,确定第一指示参数;当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数;当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理。也就是说,在本申请的实施例中,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。
基于上述实施例,本申请的再一实施例提出的解码方法,用于实现非漫反射物体的高效编码与渲染。具体地,对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T)。从而在对同一区域提供多份不同视角下的纹理信息的同时,可以传输少量且足够表达该区域的几何信息。
进一步地,在本申请的实施例中,在解码侧,解码器能够允许对不包含几何子块图像的子块图像单元进行正确解码。具体地,在目前的MIV标准的基础上对相关的语法结构进行了修改,使得修改后的MIV标准支持对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T)。
需要说明的是,在本申请的实施例中,可以选择通过语法的修改来声明当前子块图像单元中无几何子块图像,同时指示当前子块图像单元的几何信息可由某个包含几何子块图像的子块图像单元重建得到,并给出提供几何重建信息的子块图像单元的索引。
可以理解的是,在本申请的实施例中,在MIV标准中的语法结构“拼接图像序列参数集的MIV扩展语法”(“Atlas sequence parameter set MIV extension syntax”)中,增加一个语法元素asme_patch_geometry_absent_flag,指明当前拼接图像序列中存在子块图像单元只包含纹理子块图像而不包含几何子块图像。如上述表2所示,增加了用于指示当前拼接图像序列中是否存在子块图像单元只包含纹理子块图像而不包含几何子块图像的语法元素asme_patch_geometry_absent_flag。
需要说明的是,在本申请的实施例中,基于上述表2,解码码流之后,如果确定asme_patch_geometry_absent_flag等于1,则可以指示patch_data_unit()语法结构中存在pdu_geometry_absent_flag语法元素,即可以表征当前拼接图像序列存在仅包含纹理信息而不包含几何信息的子块图像单元。如果确定asme_patch_geometry_absent_flag等于0,则可以指示patch_data_unit()语法结构中不存在pdu_geometry_absent_flag语法元素,即可以表征全部子块图像单元均包含纹理信息和几何信息。
进一步地,在本申请的实施例中,如果确定当前拼接图像序列存在仅包含纹理信息而不包含几何信息的子块图像单元,那么可以进一步解码确定每一个子块图像单元对应的pdu_geometry_absent_flag语法元素。
可以理解的是,在本申请的实施例中,在MIV标准中的语法结构“子块图像数据单元的MIV扩展语法”(“Patch data unit MIV extension syntax”)中,增加一个语法元素pdu_geometry_absent_flag[tileID][p],表明当前子块图像单元在包含纹理子块图像的同时是否也包含几何子块图像,这使得解码器能够辨识没有包含几何子块图像的子块图像单元,进而可以在后续的操作中无需考虑该子块图像单元的几何信息。其中,表5为修改后的语法结构三,基于表3,在 表5中增加了用于指示当前子块图像单元是否只包含纹理子块图像而不包含几何子块图像的语法元素pdu_geometry_absent_flag[tileID][p]。
表5
需要说明的是,在本申请的实施例中,基于上述表5,如果确定pdu_geometry_absent_flag[tileID][p]等于1,则可以指示几何子块图像(Patch)没有有效的几何信息,即可以表征子块图像单元不包含几何信息。如果确定pdu_geometry_absent_flag[tileID][p]等于0,则可以指示几何子块图像(Patch)存在有效的几何信息,即可以表征子块图像单元包含几何信息。
可以理解的是,在本申请的实施例中,在MIV标准中的语法结构“子块图像数据单元的MIV扩展语法”(“Patch data unit MIV extension syntax”)中,在明确当前子块图像单元不含几何子块图像后,即确定pdu_geometry_absent_flag[tileID][p]等于1时,还增加一个语法元素pdu_geometry_reference_patch_id[tileID][p],给出几何重建参考子块图像单元的索引号。利用该索引号指向的子块图像单元中的几何子块图像,能重建出当前子块图像单元所缺失的几何信息。
由此可见,在本申请的实施例中,在解码过程中,每遇到一个Atlas序列,都会根据asme_patch_geometry_absent_flag判断该Atlas序列是否存在子块图像单元不含几何子块图像。若asme_patch_geometry_absent_flag为1,则意味着该Atlas序列中存在不含几何子块图像的子块图像单元。若asme_patch_geometry_absent_flag为0,则意味着该Atlas序列中没有不含几何子块图像的子块图像单元。接下来,在对该Atlas序列中的所有子块图像单元逐个进行解码的过程中,均根据pdu_geometry_absent_flag判断当前的子块图像单元是否包含几何子块图像。若pdu_geometry_absent_flag为1,则意味着当前的子块图像单元是不含几何子块图像的。这时,在解码时不会再从几何Atlas中去获取当前子块图像单元中的几何子块图像,而是会选择确定当前子块图像单元的几何重建参考子块图像单元的索引号pdu_geometry_reference_patch_id,此时会根据索引号获取到其指向的参考子块图像单元的几何子块图像。若pdu_geometry_absent_flag为0,则意味着当前的子块图像单元是含几何子块图像的。
需要说明的是,在本申请的实施例中,遍历所有子块图像单元,若当前子块图像单元的pdu_geometry_absent_flag为1,意味着当前子块图像单元缺少几何子块图像,则开始缺失几何子块图像重建,即利用索引号为pdu_geometry_reference_patch_id的子块图像单元中的几何子块图像和视点参数信息,重建出当前子块图像单元的几何子块图像。经此处理过程后,所有的子块图像单元均含有纹理子块图像和几何子块图像。
进一步地,在本申请的实施例中,经缺失几何子块图像重建后,对于所有子块图像单元,将逐个将子块图像单元中的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,也会将子块图像单元中的几何子块图像恢复到其所属原视点的几何视图的原始位置上。
进一步地,在本申请的实施例中,在进行目标视窗几何重构与像素着色处理时,可以先利用上一步恢复出的已有的多视点几何图像重构出目标视窗的几何图像,再遍历目标视窗中的每一个像素点,根据目标视窗中像素点在三维空间中的位置去恢复的多视点纹理图像中获取每个像素的候选像素,根据各候选像素与目标视窗的相对位置、姿态关系对各个候选像素值进行加权融合得到目标视窗中各个像素点的像素值。
也就是说,在本申请的实施例中,经过缺失几何子块图像重构之后的子块图像单元列表中的所有子块图像单元均含有几何子块图像和纹理子块图像,在目标视窗渲染时,可以使用所有可用的子块图像单元中的几何信息重构目标视窗几何图像,使用所有可用的子块图像单元中的纹理信息来为目标视窗着色。
本申请实施例提供一种解码方法,解码器解码码流,确定第一指示参数;当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数;当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理。也就是说,在本申请的实施例中,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。
基于上述实施例,本申请提出的编码方法,在编码时对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T),这意味着在编码时会存在子块图像单元是不包含几何子块图像的。
本申请的一实施例提出了一种编码方法,应用于编码器,图4为编码方法的实现流程示意图,如图4所示,编码器进行编码的方法可以包括以下步骤:
步骤201、当子块图像单元不包含几何信息时,编码子块图像单元,生成码流,同时确定第一指示参数和子块图像单元的第二指示参数;其中,第一指示参数用于确定是否存在子块图像单元不包含几何信息;第二指示参数用于确定子块图像单元是否包含几何信息。
步骤202、将第一指示参数和第二指示参数写入码流。
在本申请的实施例中,如果存在子块图像单元不包含几何信息,那么编码器编码子块图像单元,以生成码流,同时,编码器可以确定第一指示参数和每一个子块图像单元的第二指示参数,然后可以将第一指示参数和第二指示参数写入码流中。
进一步地,在本申请的实施例中,第一指示参数可以为序列级的指示参数,也可以为图像级的指示参数。
需要说明的是,在本申请的实施中,第一指示参数可以指示当前拼接图像序列对应的全部子块图像单元中是否存在至少一个子块图像单元不包含几何信息。即第一指示参数可以用于确定当前拼接图像序列是否存在子块图像单元不包含几何信息。
需要说明的是,在本申请的实施中,第一指示参数可以指示当前拼接图像对应的全部子块图像单元中是否存在至少一个子块图像单元不包含几何信息。即第一指示参数可以用于确定当前拼接图像是否存在子块图像单元不包含几何信息。
可以理解的是,在本申请的实施例中,可以将第一指示参数理解为一个表明是否存在子块图像单元仅包含纹理信息而不包含几何信息的标志位。具体地,编码器可以确定作为第一指示参数的一个变量,从而可以通过该变量的取值来实现第一指示参数的确定。其中,第一指示参数的取值可以为第一值或第二值。
需要说明的是,在本申请的实施例中,如果确定当前拼接图像序列存在子块图像单元不包含几何信息,那么可以确定第一指示参数的取值为第一值;如果确定当前拼接图像序列不存在子块图像单元不包含几何信息,即确定当前拼接图像序列的全部子块图像单元均包含几何信息,那么可以确定第一指示参数的取值为第二值。
需要说明的是,在本申请的实施例中,如果确定当前拼接图像存在子块图像单元不包含几何信息,那么可以确定第一指示参数的取值为第一值;如果确定当前拼接图像不存在子块图像单元不包含几何信息,即确定当前拼接图像的全部子块图像单元均包含几何信息,那么可以确定第一指示参数的取值为第二值。
可以理解的是,在本申请的实施例中,可以设置第一值为1,第二值为0;也可以设置第一值为true,第二值为false。本申请不作具体限定。
进一步地,在本申请的实施例中,可以使用标志asme_patch_geometry_absent_flag来表示第一指 示参数。例如,在本申请中,如果存在不包含几何子块图像的子块图像单元,即存在仅包含纹理信息不包含几何信息的至少一个子块图像单元,那么可以设置asme_patch_geometry_absent_flag的取值为1;如果不存在不包含几何子块图像的子块图像单元,即全部子块图像单元均包含纹理信息和几何信息,那么可以设置asme_patch_geometry_absent_flag的取值为0。
进一步地,在本申请的实施例中,当前拼接图像序列可以为当前待编码的、拼接图像(Atlas)序列。具体地,Atlas序列可以包括有一个或多个子块图像单元对应的几何信息或纹理信息,即可以包括有一个或多个子块图像单元对应的几何子块图像单元图像或纹理子块图像单元图像。
可以理解的是,在本申请的实施例中,对于当前拼接图像序列的任意一个子块图像单元,该子块图像单元可以同时包含几何信息和纹理信息,也可以仅包含纹理信息而不包含几何信息。
可以理解的是,在本申请的实施例中,对于当前拼接图像的任意一个子块图像单元,该子块图像单元可以同时包含几何信息和纹理信息,也可以仅包含纹理信息而不包含几何信息。
进一步地,在本申请的实施例中,对于一个子块图像单元包含几何信息或者不包含几何信息的不同情况,可以选择不同的方式编码该子块图像单元,因此需要确定用于在指示是否存在子块图像单元不包含几何信息的第一指示参数。
需要说明的是,在本申请的实施中,第二指示参数可以指示对应的子块图像单元是否不包含几何信息。即第二指示参数可以用于确定子块图像单元是否包含几何信息。其中,每一个子块图像单元均对应有一个第二指示参数。
可以理解的是,在本申请的实施例中,可以将第二指示参数理解为一个表明子块图像单元是否仅包含纹理信息而不包含几何信息的标志位。具体地,编码器可以确定作为第二指示参数的一个变量,从而可以通过该变量的取值来实现第二指示参数的确定。其中,第二指示参数的取值可以为第一值或第二值。
需要说明的是,在本申请的实施例中,如果确定对应的子块图像单元不包含几何信息,那么可以确定第二指示参数的取值为第一值;如果确定对应的子块图像单元包含几何信息,那么可以确定第二指示参数的取值为第二值。
可以理解的是,在本申请的实施例中,可以设置第一值为1,第二值为0;也可以设置第一值为true,第二值为false。本申请不作具体限定。
进一步地,在本申请的实施例中,可以使用标志pdu_geometry_absent_flag来表示第二指示参数。例如,在本申请中,如果对应的子块图像单元不包含几何子块图像,即对应的子块图像单元仅包含纹理信息不包含几何信息,那么可以设置pdu_geometry_absent_flag的取值为1;如果对应的子块图像单元包含几何子块图像,即对应的子块图像单元包含纹理信息和几何信息,那么可以设置pdu_geometry_absent_flag的取值为0。
需要说明的是,在本申请的实施例中,当前拼接图像序列可以包括至少一个子拼接图像,其中,每一个子拼接图像包括有至少一个子块图像单元。相应地,可以使用标志pdu_geometry_absent_flag[tileID][p]来表示第二指示参数,其中,tileID和p可以为一个子块图像单元的标识。例如,在本申请中,如果pdu_geometry_absent_flag[tileID][p]的取值为1,那么可以表示tileID的子拼接图像中的第p个子块图像单元不包含几何子块图像,即tileID的子拼接图像中的第p个子块图像单元仅包含纹理信息不包含几何信息;如果pdu_geometry_absent_flag[tileID][p]的取值为0,那么可以表示tileID的子拼接图像中的第p个子块图像单元包含几何子块图像,即tileID的子拼接图像中的第p个子块图像单元包含纹理信息和几何信息。
进一步地,在本申请的实施例中,如果存在子块图像单元不包含几何信息,那么可以进一步根据子块图像单元对应的纹理信息进行编码处理,生成码流。
需要说明的是,在本申请的实施例中,如果确定子块图像单元仅包括纹理信息而不包括几何信息,那么可以选择先确定该子块图像单元对应的纹理信息,然后再利用该纹理信息对该子块图像单元进行编码处理,生成码流。
进一步地,在本申请的实施例中,基于子块图像单元对应的纹理信息确定子块图像单元对应的编码子块图像单元时,既可以选择仅使用纹理信息完成编码处理,也可以选择先使用参考子块图像单元的几何信息对该子块图像单元的几何信息进行确定,然后再结合该子块图像单元的纹理信息完成图像编码处理。
可以理解的是,在本申请中,一种实施方式为:当子块图像单元不包含几何信息时,可以先确定子块图像单元对应的纹理信息;然后根据纹理信息对子块图像单元进行编码处理,生成码流。其中,编码处理时仅对子块图像单元包含纹理信息进行编码处理。
需要说明的是,在本申请的实施例中,如果子块图像单元仅包含纹理子块图像(纹理信息)而并不包含几何子块图像(几何信息),即确定子块图像单元不包含几何信息,那么便不需要进行几何信息的获取,而是仅获取对应的纹理信息。相应地,在后续的图像编码处理中也无需考虑该子块图像单元的几何信息,而是仅根据对应的纹理信息进行编码处理。
可以理解的是,在本申请中,一种实施方式为:当子块图像单元不包含几何信息时,可以先确定子块图像单元对应的纹理信息和参考子块图像;然后根据参考子块图像确定子块图像单元对应的第一几何信息;最终便可以根据纹理信息和第一几何信息对子块图像单元进行编码处理,生成码流。其中,编码处理时对子块图像单元包含纹理信息和几何信息进行编码处理。
需要说明的是,在本申请的实施例中,如果子块图像单元仅包含纹理子块图像(纹理信息)而并不包含几何子块图像(几何信息),即确定子块图像单元不包含几何信息,那么便需要先根据参考子块图像单元进行几何信息的确定,同时确定对应的纹理信息。相应地,在后续的图像编码处理中,可以选择结合该子块图像单元的纹理信息和确定的几何信息(第一几何信息)进行编码处理。
进一步地,在本申请的实施例中,可以先确定子块图像单元对应的参考子块图像单元,然后根据参考子块图像单元确定子块图像单元对应的第一几何信息。
需要说明的是,在本申请的实施例中,编码器还可以确定参考子块图像单元的标识信息,并将该标识信息写入码流。其中,该标识信息可以表征参考子块图像单元的索引号。例如,可以使用pdu_geometry_reference_patch_id[tileID][p]表示标识信息,其中,tileID和p可以为参考子块图像单元的索引,通过标识信息pdu_geometry_absent_flag[tileID][p]可以将参考子块图像单元指向tileID的子拼接图像中的第p个子块图像单元。
可以理解的是,在本申请的实施例中,在确定对应的参考子块图像单元之后,便可以进一步确定参考子块图像单元对应的第二几何信息,进而可以利用第二几何信息完成子块图像单元的几何信息的确定,即确定子块图像单元对应的第一几何信息。
也就是说,在本申请的实施例中,如果确定子块图像单元不包含几何信息,那么可以选择使用参考子块图像单元的第二几何信息确定该子块图像单元的第一几何信息,从而可以基于该子块图像单元的纹理信息和第一几何信息进行编码处理,生成码流。
可以理解的是,在本申请的实施例中,编码器可以将第一指示参数写入码流;当第一指示参数指示存在子块图像单元不包含几何信息时,编码器还可以将第二指示参数写入码流;当第二指示参数指示子块图像单元不包含几何信息时,编码器还可以将标识信息写入码流。
进一步地,在本申请的实施例中,编码器进行编码的方法还可以包括以下步骤:
步骤204、当子块图像单元均包含几何信息时,确定子块图像单元对应的纹理信息和第一几何信息。
在本申请的实施例中,如果子块图像单元均包含几何信息,那么便可以进一步确定每一个子块图像单元对应的纹理信息和第一几何信息。
可以理解的是,在本申请的实施例中,如果确定每一个子块图像单元都包含几何子块图像(几何信息)和纹理子块图像(纹理信息),那么便可以直接确定子块图像单元对应的纹理信息和第一几何信息。
也就是说,在本申请的实施例中,如果子块图像单元均包含几何信息,那么便可以直接进行子块图像单元的纹理信息和第一几何信息的获取。
步骤205、根据纹理信息和第一几何信息对子块图像单元进行编码处理,生成码流。
在本申请的实施例中,在确定子块图像单元对应的纹理信息和第一几何信息之后,便可以根据纹理信息和第一几何信息对子块图像单元进行编码处理,生成码流。
需要说明的是,在本申请的实施例中,对于同时包含纹理信息和第一几何信息的子块图像单元,可以选择直接利用对应的纹理信息和第一几何信息完成编码处理。
进一步地,在本申请的实施例中,编码器进行编码的方法还可以包括以下步骤:
步骤206、当子块图像单元包含几何信息时,确定子块图像单元对应的纹理信息和第一几何信息。
在本申请的实施例中,如果确定子块图像单元包含几何信息,那么便可以进一步确定子块图像单元对应的纹理信息和第一几何信息。
可以理解的是,在本申请的实施例中,如果确定子块图像单元同时包含几何子块图像(几何信息)和纹理子块图像(纹理信息),那么便可以直接确定该子块图像单元对应的纹理信息和第一几何信息。
也就是说,在本申请的实施例中,如果存在不包含几何信息的子块图像单元,可以进一步确定出每一个子块图像单元是否包含几何信息的具体情况。其中,如果子块图像单元包含几何信息,即对于同时包含几何信息和纹理信息的子块图像单元,可以直接进行子块图像单元的纹理信息和第一几何信息的获取。
步骤205、根据纹理信息和第一几何信息对子块图像单元进行编码处理,生成码流。
在本申请的实施例中,在确定子块图像单元对应的纹理信息和第一几何信息之后,便可以根据纹理信息和第一几何信息对子块图像单元进行编码处理,生成码流。
进一步地,在本申请的实施例中,编码器进行渲染处理的方法可以包括以下步骤:
步骤207、基于包含几何信息的子块图像单元构建目标视窗。
步骤208、基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染后的图像。
在本申请的实施例中,对于不包含几何信息的子块图像单元,如果选择仅使用纹理信息完成编码处理,那么可以进一步基于包含几何信息的子块图像单元构建目标视窗;然后再基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染后的图像。
进一步地,在本申请的实施例中,在完成编码处理之后,可以进一步利用编码后获得的图像信息进行渲染处理。其中,渲染处理可以包括视点视图恢复和目标视窗几何重构与像素着色这两个过程。
需要说明的是,对于视点视图恢复的过程,常见的方式为对于所有子块图像单元,依次将子块图像单元中的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,也会依次将子块图像单元中的几何子块图像恢复到其所属原视点的几何视图的原始位置上。而在本申请中,在遍历所有子块图像单元进行视图恢复的过程中,如果第一指示参数指示子块图像单元均同时包含几何信息和纹理信息,或者,如果第二指示参数指示对应的子块图像单元同时包含几何信息和纹理信息,那么可以按照上述常见方式对子块图像单元进行视点视图恢复处理。而对于第二指示参数指示不包含几何信息、仅包含纹理信息的子块图像单元,即对于pdu_geometry_absent_flag取值为1的子块图像单元,可以选择仅仅将该子块图像单元的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,而不会涉及任何的几何子块图像恢复操作。
进一步地,在本申请的实施例中,在进行目标视窗几何重构与像素着色处理时,可以先利用视点视图恢复处理所恢复出的已有的多视点几何图像重构出目标视窗的几何图像,再遍历目标视窗中的每一个像素点,根据目标视窗中像素点在三维空间中的位置去恢复多视点纹理图像中获取每个像素的候选像素,根据各候选像素与目标视窗的相对位置、姿态关系对各个候选像素值进行加权融合得到目标视窗中各个像素点的像素值。
也就是说,在本申请的实施例中,对于全部子块图像单元,如果存在一部分子块图像单元同时包含几何信息和纹理信息,而其余一部分子块图像单元仅包含纹理信息的情况,在目标视窗渲染时,可以选择仅使用全部子块图像单元中的、包含几何信息的一部分子块图像单元来重构目标视窗几何图像,并使用所有可用的子块图像单元的纹理信息来为目标视窗着色。
进一步地,在本申请的实施例中,编码器进行渲染处理的方法可以包括以下步骤:
步骤209、基于参考子块图像单元对不包含几何信息的子块图像单元进行缺失几何子块图像重建处理。
步骤210、基于子块图像单元的几何信息构建目标视窗。
步骤208、基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染后的图像。
在本申请的实施例中,对于不包含几何信息的子块图像单元,如果选择先使用参考子块图像单元的几何信息对该子块图像单元的几何信息进行恢复,再结合该子块图像单元的纹理信息完成图像编码处理,那么可以先基于参考子块图像单元对不包含几何信息的子块图像单元进行缺失几何子块图像的恢复处理,使得全部子块图像单元均同时包含几何信息和纹理信息,进而可以基于子块图像单元的几何信息构建目标视窗;再基于子块图像单元的纹理信息对目标视窗进行着色处理,获得渲染后的图像。
进一步地,在本申请的实施例中,在完成编码处理之后,可以进一步利用编码后获得的图像信息进行渲染处理。其中,渲染处理可以包括缺失几何子块图像重建、视点视图恢复以及目标视窗几何重构与像素着色这几个过程。
需要说明的是,对于缺失几何子块图像重建的过程,可以遍历全部子块图像单元,如果确定子块图像单元缺少几何子块图像(几何信息),则开始进行缺失几何子块图像的恢复。具体地,可以利用参考子块图像单元中的几何子块图像和视点参数信息,恢复出该子块图像单元的几何子块图像。 在经过上述处理过程之后,所有的子块图像单元均含有纹理子块图像和几何子块图像。
进一步地,在本申请的实施例中,在完成缺失几何子块图像确定之后,对于所有子块图像单元,可以依次将子块图像单元中的纹理子块图像恢复到其所属原视点的纹理视图的原始位置上,也可以依次将子块图像单元中的几何子块图像恢复到其所属原视点的几何视图的原始位置上。
进一步地,在本申请的实施例中,在进行目标视窗几何重构与像素着色处理时,可以先利用视点视图恢复处理所恢复出的已有的多视点几何图像重构出目标视窗的几何图像,再遍历目标视窗中的每一个像素点,根据目标视窗中像素点在三维空间中的位置去恢复多视点纹理图像中获取每个像素的候选像素,根据各候选像素与目标视窗的相对位置、姿态关系对各个候选像素值进行加权融合得到目标视窗中各个像素点的像素值。
也就是说,在本申请的实施例中,对于全部子块图像单元,如果存在一部分子块图像单元同时包含几何信息和纹理信息,而其余一部分子块图像单元仅包含纹理信息的情况,在目标视窗渲染时,可以选择先进行缺失几何子块图像重建处理,从而可以使得经过缺失几何子块图像重构处理之后的全部子块图像单元均含有几何子块图像和纹理子块图像,最终便可以使用全部子块图像单元的几何信息来重构目标视窗几何图像,并使用全部子块图像单元的纹理信息来为目标视窗着色。
综上所述,通过上述步骤201至步骤210所提出的编码方法,在编码时对于一个非漫反射表面选择使用G个几何子块图像与T个纹理子块图像进行表达与传输(G、T均为整数,且1≤G<T),这意味着在编码时会存在子块图像单元是不包含几何子块图像的即在对同一区域提供多份不同视角下的纹理信息的同时,可以传输少量且足够表达该区域几何信息,进而能够支持非漫反射表面的充分且高效的表达,在有效提升对该表面的渲染质量的同时,降低几何数据的信息冗余程度,从而实现在压缩非漫反射表面时的编码效率。
需要说明的是,本申请提出的编码方法,为使得MIV标准支持非漫反射内容的高效编码,引入子块图像单元中可以不含几何子块的机制。
相应地,本申请提出的编码方法,在现有MIV标准语法结构的基础上,在拼接图像序列层级与子块图像单元层级设置支持子块图像单元不含几何子块的语法元素,使得不含几何子块图像的子块图像单元也可以正确解码。
本申请实施例提供一种编码方法,当子块图像单元不包含几何信息时,编码子块图像单元,生成码流,同时确定第一指示参数和子块图像单元的第二指示参数;其中,第一指示参数用于确定是否存在子块图像单元不包含几何信息;第二指示参数用于确定子块图像单元是否包含几何信息;将第一指示参数和第二指示参数写入码流。也就是说,在本申请的实施例中,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。
基于上述实施例,在本申请的再一实施例中,图5为本申请实施例提出的解码器的组成结构示意图一,如图5所示,本申请实施例提出的解码器300可以包括解码部分301,第一确定部分302以及重建部分303,
所述解码部分301,配置为解码码流;
所述第一确定部分302,配置为确定第一指示参数;当所述第一指示参数指示存在子块图像单元不包含几何信息时,确定所述子块图像单元对应的第二指示参数;
所述重建部分303,配置为当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理。
图6为本申请实施例提出的编码器的组成结构示意图二,如图6所示,本申请实施例提出的解码器300还可以包括第一处理器305、存储有第一处理器305可执行指令的第一存储器305、第一通信接口306,和用于连接第一处理器305、第一存储器305以及第一通信接口306的第一总线307。
进一步地,在本申请的实施例中,上述第一处理器305,用于解码码流,确定第一指示参数;当所述第一指示参数指示存在子块图像单元不包含几何信息时,确定所述子块图像单元对应的第二指示参数;当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理。
图7为本申请实施例提出的解码器的组成结构示意图一,如图7所示,本申请实施例提出的编码器400可以包括编码部分401,
所述编码部分401,配置为当子块图像单元不包含几何信息时,编码所述子块图像单元,生成 码流,同时确定第一指示参数和所述子块图像单元的第二指示参数;其中,所述第一指示参数用于确定是否存在子块图像单元不包含几何信息;所述第二指示参数用于确定所述子块图像单元是否包含几何信息;将所述第一指示参数和所述第二指示参数写入所述码流。
图8为本申请实施例提出的解码器的组成结构示意图二,如图8所示,本申请实施例提出的编码器400还可以包括第二处理器402、存储有第二处理器402可执行指令的第二存储器403、第二通信接口404,和用于连接第二处理器402、第二存储器403以及第二通信接口404的第二总线405。
进一步地,在本申请的实施例中,上述第二处理器402,用于当子块图像单元不包含几何信息时,编码所述子块图像单元,生成码流,同时确定第一指示参数和所述子块图像单元的第二指示参数;其中,所述第一指示参数用于确定是否存在子块图像单元不包含几何信息;所述第二指示参数用于确定所述子块图像单元是否包含几何信息;将所述第一指示参数和所述第二指示参数写入所述码流。
另外,在本实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
集成的单元如果以软件功能模块的形式实现并非作为独立的产品进行销售或使用时,可以存储在一个计算机可读取存储介质中,基于这样的理解,本实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或processor(处理器)执行本实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本申请实施例提供了一种编码器和解码器,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。
本申请实施例提供计算机可读存储介质和计算机可读存储介质,其上存储有程序,该程序被处理器执行时实现如上述实施例所述的方法。
具体来讲,本实施例中的一种解码方法对应的程序指令可以被存储在光盘,硬盘,U盘等存储介质上,当存储介质中的与一种解码方法对应的程序指令被一电子设备读取或被执行时,包括如下步骤:
解码码流,确定第一指示参数;
当所述第一指示参数指示存在子块图像单元不包含几何信息时,确定所述子块图像单元对应的第二指示参数;
当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理。
当存储介质中的与一种编码方法对应的程序指令被一电子设备读取或被执行时,还包括如下步骤:
当子块图像单元不包含几何信息时,编码所述子块图像单元,生成码流,同时确定第一指示参数和所述子块图像单元的第二指示参数;其中,所述第一指示参数用于确定是否存在子块图像单元不包含几何信息;所述第二指示参数用于确定所述子块图像单元是否包含几何信息;
将所述第一指示参数和所述第二指示参数写入所述码流。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的实现流程示意图和/或方框图来描述的。应理解可由计算机程序指令实现流程示意图和/或方框图中的每一流程和/或方框、以及实现流程示意图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在实现流程示意图一个流程 或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。
工业实用性
本申请实施例提供了一种编解码方法、编码器、解码器以及存储介质,解码器解码码流,确定第一指示参数;当第一指示参数指示存在子块图像单元不包含几何信息时,确定子块图像单元对应的第二指示参数;当第二指示参数指示子块图像单元不包含几何信息时,根据子块图像单元对应的纹理信息进行重建处理。当子块图像单元不包含几何信息时,编码子块图像单元,生成码流,同时确定第一指示参数和子块图像单元的第二指示参数;其中,第一指示参数用于确定是否存在子块图像单元不包含几何信息;第二指示参数用于确定子块图像单元是否包含几何信息;将第一指示参数和第二指示参数写入所述码流。也就是说,在本申请的实施例中,通过第一指示参数可以确定是否存在不包含几何信息的子块图像单元,通过第二指示参数可以确定子块图像单元是否不包含几何信息,进而可以支持传输不同数量的纹理信息和几何信息,在通过充足的纹理信息有效提升渲染质量的同时,能够降低几何数据的信息冗余程度,从而在满足表面非漫反射特性的充分表达的基础上,实现了编解码效率和压缩性能的提升。

Claims (31)

  1. 一种解码方法,应用于解码器,所述方法包括:
    解码码流,确定第一指示参数;
    当所述第一指示参数指示存在子块图像单元不包含几何信息时,确定所述子块图像单元对应的第二指示参数;
    当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理。
  2. 根据权利要求1所述的方法,其中,
    当所述第一指示参数指示当前拼接图像序列存在子块图像单元不包含几何信息时,确定所述当前拼接图像序列的子块图像单元对应的第二指示参数。
  3. 根据权利要求1所述的方法,其中,
    当所述第一指示参数指示当前拼接图像存在子块图像单元不包含几何信息时,确定所述当前拼接图像的子块图像单元对应的第二指示参数。
  4. 根据权利要求2或3所述的方法,其中,所述当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理,包括:
    当所述第二指示参数指示所述子块图像单元不包含几何信息时,确定所述子块图像单元对应的所述纹理信息;
    根据所述纹理信息对所述子块图像单元进行重建处理。
  5. 根据权利要求2或3所述的方法,其中,所述当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理,包括:
    当所述第二指示参数指示所述子块图像单元不包含几何信息时,确定所述子块图像单元对应的所述纹理信息和参考子块图像单元的标识信息;
    根据所述标识信息确定所述子块图像单元对应的第一几何信息;
    根据所述纹理信息和所述第一几何信息对所述子块图像单元进行重建处理。
  6. 根据权利要求5所述的方法,其中,所述根据所述标识信息确定所述子块图像单元对应的第一几何信息,包括:
    根据所述标识信息确定所述参考子块图像单元的第二几何信息;
    利用所述第二几何信息重建所述第一几何信息。
  7. 根据权利要求2或3任一项所述的方法,其中,所述方法还包括:
    当所述第一指示参数指示子块图像单元均包含几何信息时,确定所述子块图像单元对应的所述纹理信息和第一几何信息;
    根据所述纹理信息和所述第一几何信息对所述子块图像单元进行重建处理。
  8. 根据权利要求2或3任一项所述的方法,其中,所述方法还包括:
    当所述第二指示参数指示所述子块图像单元包含几何信息时,确定所述子块图像单元对应的所述纹理信息和第一几何信息;
    根据所述纹理信息和所述第一几何信息对所述子块图像单元进行重建处理。
  9. 根据权利要求4所述的方法,其中,所述方法还包括:
    基于所述包含几何信息的子块图像单元构建目标视窗;
    基于所述子块图像单元的纹理信息对所述目标视窗进行着色处理,获得渲染后的图像。
  10. 根据权利要求5所述的方法,其中,所述方法还包括:
    基于所述参考子块图像单元对不包含几何信息的子块图像单元进行缺失几何子块图像重建处理;
    基于所述子块图像单元的几何信息构建目标视窗;
    基于所述子块图像单元的纹理信息对所述目标视窗进行着色处理,获得渲染后的图像。
  11. 根据权利要求1所述的方法,其中,
    当所述第一指示参数的取值为第一值时,所述第一指示参数指示存在子块图像单元不包含几何信息;
    当所述第一指示参数的取值为第二值时,所述第一指示参数指示的子块图像单元均包含几何信息。
  12. 根据权利要求1所述的方法,其中,
    当所述第二指示参数的取值为第一值时,所述第二指示参数指示所述子块图像单元不包含几何信息;
    当所述第二指示参数的取值为第二值时,所述第二指示参数指示所述子块图像单元包含几何信息。
  13. 根据权利要求11或12所述的方法,其中,
    所述第一值为1,所述第二值为0;或者,
    所述第一值设置为true,所述第二值设置为false。
  14. 一种编码方法,应用于编码器,所述方法包括:
    当子块图像单元不包含几何信息时,编码所述子块图像单元,生成码流,同时确定第一指示参数和所述子块图像单元的第二指示参数;其中,所述第一指示参数用于确定是否存在子块图像单元不包含几何信息;所述第二指示参数用于确定所述子块图像单元是否包含几何信息;
    将所述第一指示参数和所述第二指示参数写入所述码流。
  15. 根据权利要求14所述的方法,其中,所述方法还包括:
    当所述子块图像单元不包含几何信息时,确定所述子块图像单元对应的所述纹理信息;
    根据所述纹理信息对所述子块图像单元进行编码处理,生成所述码流。
  16. 根据权利要求14所述的方法,其中,所述方法还包括:
    当所述子块图像单元不包含几何信息时,确定所述子块图像单元对应的所述纹理信息和参考子块图像单元;
    根据所述参考子块图像单元确定所述子块图像单元对应的第一几何信息;
    根据所述纹理信息和所述第一几何信息对所述子块图像单元进行编码处理,生成所述码流;
    将所述参考子块图像单元的标识信息写入所述码流。
  17. 根据权利要求16所述的方法,其中,所述根据所述参考子块图像单元确定所述子块图像单元对应的第一几何信息,包括:
    确定所述参考子块图像单元的第二几何信息;
    利用所述第二几何信息确定所述第一几何信息。
  18. 根据权利要求14-17任一项所述的方法,其中,所述方法还包括:
    当所述子块图像单元均包含几何信息时,确定所述子块图像单元对应的所述纹理信息和第一几何信息;
    根据所述纹理信息和所述第一几何信息对所述子块图像单元进行编码处理,生成所述码流。
  19. 根据权利要求14-17任一项所述的方法,其中,所述方法还包括:
    当所述子块图像单元包含几何信息时,确定所述子块图像单元对应的所述纹理信息和第一几何信息;
    根据所述纹理信息和所述第一几何信息对所述子块图像单元进行编码处理,生成所述码流。
  20. 根据权利要求15所述的方法,其中,所述方法还包括:
    基于所述包含几何信息的子块图像单元构建目标视窗;
    基于所述子块图像单元的纹理信息对所述目标视窗进行着色处理,获得渲染后的图像。
  21. 根据权利要求16所述的方法,其中,所述方法还包括:
    基于所述参考子块图像单元对不包含几何信息的子块图像单元进行缺失几何子块图像重建处理;
    基于所述子块图像单元的几何信息构建目标视窗;
    基于所述子块图像单元的纹理信息对所述目标视窗进行着色处理,获得渲染后的图像。
  22. 根据权利要求14所述的方法,其中,
    当当前拼接图像序列存在子块图像单元不包含几何信息时,确定所述第一指示参数的取值为第一值;
    当当前拼接图像序列的子块图像单元均包含几何信息时,确定所述第一指示参数的取值为第二值。
  23. 根据权利要求14所述的方法,其中,
    当当前拼接图像存在子块图像单元不包含几何信息时,确定所述第一指示参数的取值为第一值;
    当当前拼接图像的子块图像单元均包含几何信息时,确定所述第一指示参数的取值为第二值。
  24. 根据权利要求14所述的方法,其中,
    当所述子块图像单元不包含几何信息时,确定所述第二指示参数的取值为第一值;
    当所述子块图像单元包含几何信息时,确定所述第二指示参数的取值为第二值。
  25. 根据权利要求22-24任一项所述的方法,其中,
    所述第一值为1,所述第二值为0;或者,
    所述第一值设置为true,所述第二值设置为false。
  26. 根据权利要求16所述的方法,其中,所述方法还包括:
    将所述第一指示参数写入所述码流;以及
    当存在子块图像单元不包含几何信息时,将所述第二指示参数写入所述码流;以及
    当所述子块图像单元不包含几何信息时,将所述标识信息写入所述码流。
  27. 一种解码器,所述解码器包括:解码部分,第一确定部分,重建部分;
    所述解码部分,配置为解码码流;
    所述第一确定部分,配置为确定第一指示参数;当所述第一指示参数指示存在子块图像单元不包含几何信息时,确定所述子块图像单元对应的第二指示参数;
    所述重建部分,配置为当所述第二指示参数指示所述子块图像单元不包含几何信息时,根据所述子块图像单元对应的纹理信息进行重建处理。
  28. 一种解码器,所述编码器包括第一处理器、存储有所述第一处理器可执行指令的第一存储器,当所述指令被执行时,所述第一处理器执行时实现如权利要求1-13任一项所述的方法。
  29. 一种编码器,所述编码器包括:编码部分,
    所述编码部分,配置为当子块图像单元不包含几何信息时,编码所述子块图像单元,生成码流,同时确定第一指示参数和所述子块图像单元的第二指示参数;其中,所述第一指示参数用于确定是否存在子块图像单元不包含几何信息;所述第二指示参数用于确定所述子块图像单元是否包含几何信息;将所述第一指示参数和所述第二指示参数写入所述码流。
  30. 一种编码器,所述解码器包括第二处理器、存储有所述第二处理器可执行指令的第二存储器,当所述指令被执行时,所述第二处理器执行时实现如权利要求14-26任一项所述的方法。
  31. 一种计算机存储介质,其中,所述计算机存储介质存储有计算机程序,所述计算机程序被第一处理器执行时实现如权利要求1-13任一项所述的方法,或者,被第二处理器执行时实现如权利要求14-26任一项所述的方法。
CN202180102871.2A 2021-09-30 2021-09-30 编解码方法、编码器、解码器以及存储介质 Pending CN118119974A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2021/122472 WO2023050432A1 (zh) 2021-09-30 2021-09-30 编解码方法、编码器、解码器以及存储介质

Publications (1)

Publication Number Publication Date
CN118119974A true CN118119974A (zh) 2024-05-31

Family

ID=85781222

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180102871.2A Pending CN118119974A (zh) 2021-09-30 2021-09-30 编解码方法、编码器、解码器以及存储介质

Country Status (6)

Country Link
US (1) US20240244248A1 (zh)
EP (1) EP4411643A1 (zh)
JP (1) JP2024533801A (zh)
KR (1) KR20240089176A (zh)
CN (1) CN118119974A (zh)
WO (1) WO2023050432A1 (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200140824A (ko) * 2018-04-11 2020-12-16 인터디지털 브이씨 홀딩스 인코포레이티드 3d 객체를 나타내는 포인트 클라우드를 인코딩/디코딩하기 위한 방법 및 장치
JP7287745B2 (ja) * 2018-06-26 2023-06-06 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 点群符号化用の高レベルな構文設計
US10887574B2 (en) * 2018-07-31 2021-01-05 Intel Corporation Selective packing of patches for immersive video
WO2021002657A1 (ko) * 2019-07-04 2021-01-07 엘지전자 주식회사 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법
CN112598572B (zh) * 2019-10-01 2022-04-15 浙江大学 一种筛选子块图像与处理单元的方法及装置
US11798196B2 (en) * 2020-01-08 2023-10-24 Apple Inc. Video-based point cloud compression with predicted patches
WO2021170906A1 (en) * 2020-02-28 2021-09-02 Nokia Technologies Oy An apparatus, a method and a computer program for volumetric video

Also Published As

Publication number Publication date
US20240244248A1 (en) 2024-07-18
WO2023050432A1 (zh) 2023-04-06
JP2024533801A (ja) 2024-09-12
EP4411643A1 (en) 2024-08-07
KR20240089176A (ko) 2024-06-20

Similar Documents

Publication Publication Date Title
US20200260117A1 (en) Methods and Apparatuses for Coding and Decoding Depth Map
EP3591975A1 (en) Method and apparatus for processing patches of a point cloud
RU2769944C1 (ru) Способ и устройство для конфигурирования преобразования для сжатия видео
CN111433821B (zh) 用于重建表示3d对象的点云的方法和装置
US8724915B2 (en) Image encoding and decoding method and apparatus using texture synthesis
KR102114641B1 (ko) 현재 블록의 분할을 예측하여 비디오를 코딩하는 방법, 디코딩 방법 및 이에 상응하는 코딩 및 디코딩 장치 및 컴퓨터 프로그램
CN104333760B (zh) 三维图像编码方法和三维图像解码方法及相关装置
CA2950964A1 (en) Method and apparatus of candidate generation for single sample mode in video coding
KR20140116114A (ko) 3차원 (3d) 모델들의 텍스처 정보를 압축하는 방법 및 장치
TW200917851A (en) Enhanced compression in representing non-frame-edge blocks of image frames
EP3061246A1 (fr) Procédé de codage et de décodage d&#39;images, dispositif de codage et de décodage d&#39;images et programmes d&#39;ordinateur correspondants
WO2015055937A1 (fr) Procédé de codage et de décodage d&#39;images, dispositif de codage et de décodage d&#39;images et programmes d&#39;ordinateur correspondants
Dziembowski et al. Immersive video postprocessing for efficient video coding
US11973981B2 (en) Coding and decoding of an omnidirectional video
KR102272660B1 (ko) 전방위 몰입형 비디오에 대한 적응적 디블로킹 필터 적용 방법 및 디코딩 장치
US20230308682A1 (en) Methods and devices for coding and decoding a multi-view video sequence
CN118119974A (zh) 编解码方法、编码器、解码器以及存储介质
US20230164352A1 (en) Methods and devices for coding and decoding a multi-view video sequence
CN111630862A (zh) 用于对表示全向视频的多视图视频序列进行编码和解码的方法和设备
CN112801919B (zh) 图像去雾模型训练方法、去雾处理方法、装置及存储介质
WO2024007144A1 (zh) 编解码方法、码流、编码器、解码器以及存储介质
WO2024119419A1 (zh) 编解码方法、码流、编码器、解码器以及存储介质
CN107197288B (zh) 视频全局视差向量编码方法、解码方法和装置
KR20230047930A (ko) 몰입형 입체 영상을 위한 영상 부호화/복호화를 위한 방법, 장치 및 기록 매체
CN115412727A (zh) 编码方法、解码方法及其装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination