CN113923459A - 视频的编码、解码的方法及装置、存储介质 - Google Patents

视频的编码、解码的方法及装置、存储介质 Download PDF

Info

Publication number
CN113923459A
CN113923459A CN202111136232.6A CN202111136232A CN113923459A CN 113923459 A CN113923459 A CN 113923459A CN 202111136232 A CN202111136232 A CN 202111136232A CN 113923459 A CN113923459 A CN 113923459A
Authority
CN
China
Prior art keywords
frame
dependent
rwp
parameters
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111136232.6A
Other languages
English (en)
Other versions
CN113923459B (zh
Inventor
玛丽-卢克·乔治斯·亨瑞·坎姆佩尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202111136232.6A priority Critical patent/CN113923459B/zh
Publication of CN113923459A publication Critical patent/CN113923459A/zh
Application granted granted Critical
Publication of CN113923459B publication Critical patent/CN113923459B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本公开提供一种视频的编码、解码方法及装置、存储介质。该编码方法包括：将视频的帧分为独立帧和从属帧；所述从属帧包括第一类从属帧；通过编码所述独立帧的参数，生成每一个所述独立帧的RWP编码配置；其中，所述独立帧的RWP编码配置包括：用于解码还原所述视频的所述参数；基于所述从属帧的参数与被所述从属帧所参考独立帧的参数之间的差异及从属关系，通过编码所述第一类从属帧的参数，生成每一个所述第一类从属帧的RWP编码配置。

Description

视频的编码、解码的方法及装置、存储介质
本申请是2017年11月16日递交、申请号为：201980001391.X且名称为视频的编码、解码的方法及装置、处理装置、存储介质的中国申请的分案申请。
技术领域
本公开涉及视频技术领域但不限于视频技术领域，尤其涉及一种视频的编码、解码的方法及装置、存储介质。
背景技术
OMAF(Omnidirectional Media Format，全景媒体格式)是属于MPEG-I(MovingPicture Experts Group，动态图像专家组)的一种视频格式，可以看作是VR(VirtualReality，虚拟现实)的第一个行业标准。OMAF起源于MPEG的VR标准化的发展规划。其中，OMAF定义了一种媒体格式，支持全景媒体应用，并专用于360°视频、图像以及音频等，并对360°视频的编码，提出了一种投影和矩形区域的RWP(Region-Wise-Packing，智能区域打包)的方法，但是该方法会消耗较大的信令开销。
发明内容
本公开提供一种视频的编码、解码的方法及装置、存储介质。
根据本公开实施例的第一方面，提供一种视频的编码方法，该方法包括：
将视频的帧分为独立帧和从属帧；
通过编码所述独立帧的参数，生成每一个所述独立帧的RWP编码配置；其中，所述独立帧的RWP编码配置包括：用于解码还原所述视频的参数；
通过基于所述从属帧与被从属帧之间的差异、及从属关系编码的所述从属帧的参数，生成每一个所述从属帧的RWP编码配置；其中，所述被从属帧至少包括所述独立帧。
根据本公开实施例的第二方面，提供一种视频的解码方法，该方法包括：
通过解包被从属帧的RWP编码配置，获取所述被从属帧的参数；其中，所述被从属帧至少包括：独立帧；
通过基于与从属帧对应的所述被从属帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中，具有从属关系的所述从属帧与所述被从属帧存在部分相同参数；
至少基于所述被从属帧的参数和所述从属帧的参数，解包所述视频的帧。
根据本公开实施例的第三方面，提供一种视频的编码装置，该装置包括：
分类模块，配置为将视频的帧分为独立帧和从属帧；
第一编码模块，配置为编码所述独立帧的参数，生成每一个所述独立帧的RWP编码配置；其中，所述独立帧的RWP编码配置包括：用于解码还原所述视频的所述参数；
第二编码模块，配置为基于所述第一类从属帧的参数与被从属帧的参数之间的差异及从属关系，通过编码所述从属帧的参数，生成每一个所述从属帧的RWP编码配置。
根据本公开实施例的第四方面，提供一种视频的解码装置，该装置包括：
第一获取模块，配置为通过解包被从属帧的RWP编码配置，获取所述被从属帧的参数；
第二获取模块，配置为通过基于与从属帧对应的所述被从属帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中，具有所述从属关系的所述从属帧与对应的所述被从属帧存在部分相同参数；
解包模块，配置为至少基于所述被从属帧的参数和所述从属帧的参数，解包所述视频的帧；其中，所述参数至少包括：帧参数和区域参数。
根据本公开的第五方面，提供一种处理装置，该装置至少包括：处理器和存储器；所述存储器用于存储能够运行在所述处理上的可执行指令；其中，当执行所述可执行指令时，所述处理器执行上述任一项所述的方法。
根据本公开的第六方面，提供一种非临时性计算机存储介质，存储有计算机可执行指令，用于执行上述任一项所述的方法。
基于本公开实施例的技术方案，如果从属帧的参数与第一类独立帧的参数相同，则至少基于第一类独立帧与从属帧之间的差异和从属关系对视频的帧的参数进行编码。与被从属帧中相同的参数则不需要再次编码到从属帧的RWP编码配置中。因此，相比于对从属帧的所有参数进行编码，减少了信令的开销，进而降低了整个视频的信令开销。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本发明的原理。
图1是本公开实施例提供的一种视频的编码方法的流程图；
图2是本公开实施例提供的RWP在ERP(Equirectangular Projection，球形投影)图像中的应用示意图；
图3是本公开实施例提供的另一种视频的编码方法的流程图；
图4是本公开实施例提供的一种视频的解码方法的流程图；
图5是本公开实施例提供的另一种视频的解码方法的流程图；
图6是本公开实施例提供的一种视频的编码装置的结构图；
图7是本公开实施例提供的一种视频的解码装置的结构图；
图8是本公开实施例提供的一种编码或解码设备的硬件实体示意图。
具体实施方式
本公开实施例提供了一种视频的编码方法，如图1所示，该方法包括：
步骤101、将视频的帧分为独立帧和从属帧；所述从属帧包括第一类从属帧；
步骤102、通过编码所述独立帧的参数，生成每一个所述独立帧的RWP编码配置；其中，所述独立帧的RWP编码配置包括：用于解码还原所述视频的参数；
步骤103、通过基于所述从属帧与被所述从属帧所参考独立帧之间的差异及从属关系编码的所述第一类从属帧的参数，生成每一个所述第一类从属帧的RWP编码配置。
上述步骤提供了一种对视频进行编码的方法，该视频包括至少两帧。在本公开中，视频可以是OMAF格式的360°视频。典型的OMAF格式的360°视频为立体视频，并支持3DOF(3Degrees of Freedom，三个自由度)导航，其中，3DOF导航包括偏航、滚动和俯仰运动。
OMAF格式的360°视频可以用于VR技术和/或AR(Augmented reality，增强现实)技术，并且OMAF格式规定了的360°视频的以下几个方面：
1)坐标系：
坐标系由单位球体和三个坐标轴构成，即x(前后方向)轴，y(横向，左右方向)轴和z(垂直，上下方向)轴。从用户的角度来看，是从球体的中心向外看向球体的内表面。
2)投影和矩形的RWP方法：
投影方法是一种应用于内容制作侧的几何操作过程，用于通过球体信号产生2D(two Dimensional，二维)视频图像，这些2D视频图像是由多个摄像机捕获的视频信号拼接得到。RWP方法允许根据投影图像生成压缩图像，其中，在压缩图像的一些区域相对于投影图像的区域设置更多的像素，从而可以改善这些区域的视觉质量。
3)使用ISOBMFF(ISO Base Media File Format，ISO基础媒体文件格式)存储全景媒体和相关的数据；
4)采用DASH(Dynamic Adaptive Streaming over HTTP，基于超文本传输协议的动态自适应流传输)，或MMT(MPEG Media Transport，基于MPEG的媒体传输)的传输方式；
5)媒体文件和演示文稿文件。
RWP方法用于将由全景视频投影格式制定的表示格式的投影图像，划分为矩形区域，并进行变形，例如，这些变形包括区域尺寸变换、区域镜像或区域旋转。通过在投影图像上应用RWP能够生成压缩图像。但是，在OMAF标准的第一版中，只定义了静态的RWP。静态的RWP仅允许定义一次压缩图像和投影图像中的区域，并且在OMAF应用的整个持续时间内保持不变。OMAF是由MPEG开发的系统标准。
视频的帧至少涉及图像，例如，投影图像或压缩图像，有时，视频的帧还可以包括音频的帧。在本公开中，帧至少包括图像，但是对于帧是否包括音频这里不做限定。
所述投影图像是全景视频的图像，并且该视频可以由OMAF制定的格式定义，其可以被视为球面图像。有时，投影图像的视角是小于360°的3D视频的图像，因此，投影图像根据实际需求也可以为半球图像或扇形图像。
在对视频的投影图像执行RWP处理之后，获得包含分区后的压缩图像。参数可以用于描述视频的帧和/或区域，并且所述参数可以根据描述对象被分为帧参数和区域参数。
本公开实施例在OMAF应用中定义了一种动态RWP，并提出了优化这种动态RWP的信令的机制。
第一版OMAF标准引入了一种RWP工具，该RWP工具用于将投影图像分成矩形区域，然后对这些区域进行包括调整大小、镜像或旋转的变换，再将这些区域打包到压缩图像。具体地在生成压缩图像时，可以为对应于投影图像中个的重要区域的压缩图像区域分配更多的像素。
图2示出了矩形的压缩图像，其被分成了若干区域，并且这些区域对应于投影图像中的不同区域或位置，在图2给出的示例中，RWP用于为360°视频的前部区域分配更多的像素(从而提高该区域的图像质量)，同时适度地降低左、右和后部区域的质量，并且显著降低顶部和底部区域的质量。
帧参数是描述关于整个帧的属性或情况的参数，例如，投影图像的尺寸，压缩图像的尺寸等。
区域参数是描述包括在帧中区域的参数，例如，区域的尺寸、在球体中区域的投影位置等。
RWP编码配置至少是通过编码上述两种参数所获得的，然后将RWP编码配置传输到解码器，解码器可以通过解码RWP编码配置来恢复原始视频。上述图像的尺寸可以包括图像宽度和/或图像高度。
视频的压缩帧至少被分为独立帧和第一类从属帧。需要对独立帧的参数进行编码以生成独立帧的RWP编码配置。这里，对独立帧的编码可以是完全编码，即，对解码独立帧所需的所有参数进行编码，并且，独立帧的RWP编码配置可以称为完整RWP编码配置。
从属帧与独立帧可具有一些相同参数，然后这些相同参数可以从独立帧被继承，这种继承关系被称为从属关系。
并且，从属帧还可以具有与独立帧不同的一些参数，这些不同的参数就是上述步骤中所描述的差异。
因此，如果从属帧的RWP编码配置根据独立帧和从属帧之间的差异和从属关系进行编码，则意味着从属帧中反映差异而没有继承的参数可以被编码到从属帧的RWP编码配置中。在从属帧的RWP编码配置中可以省略从独立帧继承的参数的编码，因此可以减少从属帧的信令开销，并通过较少的比特数携带更多的信息。
在一些实施例中，上述独立帧包括：
第一类独立帧；所述第一类独立帧，能够与所述视频中所述第一类独立帧后的各所述从属帧建立从属关系；
第二类独立帧；所述第二类独立帧，能够与所述视频中的所述第二类独立帧下一个所述从属帧建立从属关系。
第一类独立帧可以与任意被处理的帧建立从属关系，在实际应用中，可以存在一个或多个第一类独立帧。当处理从属帧时，可以选择一个第一类独立帧作为参考，并用来建立从属关系。
第二类独立帧指的是另一种独立帧，其RWP编码配置也携带解码所需的所有参数。第二类独立帧与第一类独立帧的差别在于，第二类独立帧只能与紧邻的下一个帧建立从属关系，并且下一个帧为从属帧。第二类独立帧可以设置在在帧的参数短时间内发生显著变化的场景下。
通过将独立帧分为上述两种类型，能够满足不同视频需求并能够灵活设置编码模式。
在一些实施例中，每一所述独立帧的RWP编码配置中携带有帧类型标志位；
所述第一类独立帧的帧类型标志位具有第一数值；
所述第二类独立帧的帧类型标志位具有第二数值。
上述第二数值不同于第一数值。
帧类型标志位通过不同的数值，可以用于区分具有不同类型的帧，也就是说，帧类型标志位的不同数值，对应于不同类型的被指示帧。
在本公开实施例中，帧类型标志位至少可以区分独立帧的类型。
在一些实施例中，所述第一类独立帧的RWP编码配置中包括：所述第一类独立帧的帧ID。
当设置有第一类独立帧的帧ID时，被选择的用于作为后续从属帧参考的独立帧的帧ID将被编码，以用于简便指示帧之间的从属关系。帧ID可以是视频中的第一类独立帧的帧编号，或视频中每个帧的帧编号，用于表示一个第一类独立帧在多个第一类独立帧中的位置。
在一些实施例中，所述第一类从属帧的RWP编码配置中包括：被所述第一类从属帧依赖且用于指示从属关系的所述第一类独立帧的帧ID。
当一个第一类独立帧用于一个第一类从属帧参考时，需要将第一类独立帧的帧ID添加到这个第一类从属帧的RWP编码配置中以指示其编码参考是哪一个独立帧。
在一些实施例中，如图3所示，所述从属帧还包括：第二类从属帧，所述第二类从属帧仅与紧邻的前一个帧建立从属关系，所述方法还包括：
步骤104、通过基于所述第二类从属帧与所述第二类从属帧的前一个帧的参数之间的差异及从属关系，编码的所述第二类从属帧的参数，生成每一个所述第二类从属帧的RWP编码配置；其中，所述前一个帧为与所述第二类从属帧建立有从属关系的帧。
第一类从属帧和第二类从属帧都是从属帧，并且他们的RWP编码配置都可以根据他们与被从属帧之间的差异和从属关系来编码。
然而，第一类从属帧和第二类从属帧之间的差异在于，第二类从属帧仅与紧邻的前一个帧建立从属关系，并且不限定前一个帧的类型。前一个帧的类型不限于第一类独立帧或者是第二类独立帧。
例如，紧邻的前一个帧是从属帧，则当前的第二类从属帧也可以参考前一个帧。也就是说，上述第二类从属帧可以使用任意类型的前一个帧作为编码参考。此外，因为相邻的帧的参数通常非常相似，因此，对第二类从属帧的编码处理也可以尽可能地减少信令开销。
在一些实施例中，所述前一个帧的类型为：所述第一类独立帧、第二类独立帧、第一类从属帧和第二类从属帧中的任一种。
第二类从属帧的前一个帧可以是独立帧或从属帧，在编码过程中前一个帧的类型不需要进行限制。当第二类从属帧的前一个帧是独立帧时，独立帧可以是第一类的也可以是第二类的。
在一些实施例中，所述从属帧的RWP编码配置中包括帧类型标志位；
当所述帧类型标志位具有第三数值时，所述第三数值指示从属帧为第一类从属帧；
当所述帧类型标志位具有第四数值时，所述第四数值指示从属帧为第二类从属帧。
用于区分所述从属帧的帧类型标志位与用于区分独立帧的帧类型标志位相同。第三数值用于指示第一类从属帧，而第四数值用于指示第二类从属帧。
第四数值与第三数值不同。实际上第四数值与第一数值和第二数值都不相同；第三数值也与第一数值和第二数值也都不相同。
帧类型标志位也可以用于区分从属帧的类型，也就是说，帧类型标志可以用于指示独立帧和从属帧的类型。
上述帧类型标志位的四种数值可以由表1来表示：
Figure BDA0003282514150000071
表1
根据表1可以看出，具有两个比特的帧类型标志位可以清楚且容易地区分视频中的四种类型的帧。
在一些实施例中，当一个从属帧继承被从属帧的帧参数时，所述从属帧的RWP编码配置包括：
至少一个帧继承标志位，用于指示所述被从属帧的帧参数被继承；或者，
当一个从属帧不继承被从属帧的帧参数时，所述从属帧的RWP编码配置包括：
至少一个帧继承标志位，用于指示所述被从属帧中没有帧参数被继承；
被依赖帧包括：独立帧或从属帧。
当从属帧具有与对应的被从属帧具有相帧参数时，从属帧的RWP编码配置可以继承被从属帧的帧参数。因此，可以在RWP编码配置中引入帧继承标志位以指示是否继承帧参数。帧参数实际上是视频中一帧的整个图像的参数，例如，图像的尺寸，图像的尺寸可以包括图像的宽度和/或图像的高度。
在一些实施例中，所述帧继承标志位包括：
第一类的帧继承标志位，用于指示所述被从属帧的投影图像高度和投影图像宽度是否被继承；
第二类的帧继承标志位，用于指示所述被从属帧的压缩图像高度度和压缩图像宽度是否被继承。
帧继承标志位包括两种类型，用于指示是否分别继承投影图像和压缩图像的宽度和高度参数。
在一些实施例中，该方法还包括：
当所述从属帧不继承所述被从属帧的帧参数时，将所述从属帧的帧参数编码至所述从属帧的RWP编码配置。
如果从属帧的帧参数与被从属帧的帧参数不相同，则可以直接对从属帧的帧参数进行编码，而不继承被依赖帧的帧参数。
在一些实施例中，所述从属帧的RWP编码配置包括：区域继承标志位，用于指示对应被从属帧的至少部分区域是否被继承。
通过RWP的使用，视频的帧可以被划分为多个区域，每个区域可以由一个或多个区域参数来描述。在编码独立帧的区域参数时，解码所需的参数将被编码到独立帧的RWP编码配置中。然而，在编码从属帧的区域参数时，与被从属帧的区域参数不同的区域参数将被编码到从属帧的RWP编码配置中。
这里，在RWP编码配置中设置区域继承标志位，该区域继承标志位用来指示被从属帧的至少一个区域是否被从属帧所继承。当从属帧的区域参数与被从属帧的区域参数均不同时，被从属帧的区域参数则不能被继承。此时，区域继承标志位被设置为指示该区域的区域参数不被继承的数值。当从属帧的区域与被从属帧的区域，具有的至少一个相同区域参数时，被继承帧的至少一个区域参数可以被继承，此时，可以将区域继承标志位设置为指示至少一个区域被继承的数值。
在一些实施例中，当所述区域继承标志位指示对应被从属帧没有区域被继承时，所述从属帧的RWP编码配置包括：解码所述从属帧所需的区域参数。
当从属帧的区域参数与被从属帧的区域参数均不同时，区域继承标志位被设置为具有指示区域不被继承的值，并且对应于区域继承标志位的区域参数需要在从属帧的RWP编码配置中进行编码。
在一些实施例中，一个所述被从属帧包括N个区域，一个所述从属帧包括M个区域，N和M均为正整数；
当所述被从属帧的第i个区域与所述从属帧的第j个区域具有至少一个相同的区域参数时，所述从属帧的RWP编码配置包括：
所述被从属帧的第i个区域的区域ID，用于指示所述从属帧与所述被从属帧之间的区域从属关系；
参数继承标志位，用于指示所述被从属帧的第i个区域中的至少一个相同的区域参数被继承；
其中，所述i是大于或等于0且小于N的整数，所述j是大于或等于0且小于M的整数。
在上述情况下，由于区域ID至少被分配给第一类独立帧，i和j都可以是相应帧中区域的编号，因为i可以等于或不等于j，那么区域从属关系的设定可以更加灵活，并且区域从属关系可以根据固定的模式来设定。如果区域从属关系灵活设定，则可以在来自独立帧和从属帧的两个最相似的区域之间形成区域从属关系，从而减少更多的信令开销。
在一些实施例中，所述被从属帧具有N个区域，所述从属帧具有M个区域，所述N和M为正整数；
当所述被从属帧的第i个区域中与对应的从属帧的第i个区域中具有至少一个相同的区域参数时，所述从属帧的RWP编码配置中的参数继承标志位，用于指示所述被从属帧的第i个分区中的区域参数被继承；其中，所述i为大于0小于N且小于M的整数。
在这种情况下，可以省略用于标记继承了哪个区域的区域ID。也就是说，即使没有指示区域从属关系的区域ID，上述解决方案也可以执行，因为区域之间的从属关系可以根据区域次序来确定。
当被从属帧的第i个区域与从属帧的第i个区域具有从属关系时，从属帧的RWP编码配置的参数继承标志位，用于指示第i个区域的区域参数中的哪些区域参数被继承。其中，i是大于等于0小于N且小于M的整数。
从属帧的第i个区域与被从属帧的第i个区域具有从属关系时，参数继承标志位用于指示哪些参数要被继承。
当N等于M时，从属帧的每个区域与被从属帧的每个区域相对应，因此，可以对应地处理从属帧的区域。
上述区域参数包括但不限于以下区域参数中的至少一个：
区域的尺寸，包括区域的宽度和/或区域的高度；
区域的压缩类型；
区域的位置，用于指示区域在投影图像或压缩图像中的位置；
变换类型，包括旋转和/或镜像等。
在一些实施例中，当M小于N时，所述从属帧的RWP编码配置包括：区域丢弃标志位，所述区域丢弃标志位，用于指示丢弃所述被从属帧中不被所述从属帧所从属的区域；
当M大于N时，所述从属帧的RWP编码配置中包括：至少解码M减N个区域所需的区域参数。
当N大于M时，被从属帧中存在冗余区域，区域丢弃标志位被设置到每个冗余区域。这些冗余区域既没有需要编码的参数，也没有可以继承的参数。因此，每个冗余区域的RWP编码配置可以仅包括区域丢弃标志位，用于指示不存在区域与指示的区域具有从属关系。
当N小于M时，从属帧具有更多区域，在处理第(N+1)个区域到第M个区域时，没有可以参考的被从属帧的区域，因此，无法比较第(N+1)个区域到第M个区域。从属帧没有能够继承的参数，因此，可以直接对这些多出的区域对应的区域参数进行编码。
在一些实施例中，所述将视频的帧分为独立帧和从属帧，包括：
将所述视频的帧的第一帧设定为独立帧；
在所述第一帧之后，每间隔指定数量的所述从属帧后设定一个独立帧；或，
在所述第一帧之后，根据流切换点确定所述独立帧，并将所述独立帧以外的帧设定为所述从属帧。
在编码的过程中，需要处理多个视频帧，因为第一帧不可能从属其他帧，因此，第一帧需要被完全编码。也就是说，第一帧需要被设置为独立帧。
为了确保从属帧的编码精度，可以在指定数量的间隔或者指定时间间隔内(例如预设秒数或预设帧数)中设置多个独立帧，并且可以对每个独立帧进行完全编码。或者，也可以通过流切换/接入点确定独立帧的位置，以确保当数据流发生明显改变时，存在至少一个完全编码的独立帧，并且避免被从属帧与从属帧之间的差异过大。
本公开实施例还提供一种视频的解码方法，如图4所示，该方法包括：
步骤201、通过解包独立帧的RWP编码配置，获取所述独立帧的参数；
步骤202、通过基于与从属帧对应的独立帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中所述从属帧至少包括：第一类从属帧；
步骤203、至少基于所述独立帧的参数和所述第一类从属帧的参数，解包所述视频的帧。
在解码的过程中，需要对获得的RWP编码配置进行解包，从而获取独立帧的参数。
由于从属帧的RWP编码配置是根据其自身与被从属帧之间的差异和从属关系来进行编码的，也就是说，有一些从属帧的参数是编码在被从属帧的RWP编码配置中的，那么，被从属帧的参数，是需要结合被从属帧的RWP编码配置和从属帧的RWP编码配置的解码得到的。
基于独立帧的参数和从属帧的参数对视频进行解包，进而可以恢复原始视频中的图像。
由于从属帧的RWP编码配置是基于独立帧的参数进行编码的，因此可以节省了大量的信令开销，并减少端解码端所接收的信令数量，从而降低传输压力及存储空间的使用，且实现RWP编码配置的动态解码。
在一些实施例中，所述通过基于与从属帧对应的所述独立帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数，包括：
当所述从属帧的RWP编码配置中的帧继承标志位指示所述被从属帧的至少一个帧参数被继承时，根据所述被从属帧的RWP编码配置，获取所述从属帧的至少一个帧参数；或者，
当所述从属帧的RWP编码配置中的帧继承标志位指示没有被从属帧的帧参数被继承时，根据所述从属帧的RWP编码配置，获取所述从属帧的帧参数。
帧继承标志位，可以被配置为确定当前帧是否有继承帧参数。
当确定从属帧继承了被从属帧的参数时，则至少需要基于被从属帧的帧参数对从属帧进行解码。如果从属帧没有继承被从属帧的帧参数时，则从属帧的帧参数需要从从属帧自身的RWP编码配置中直接进行解码获得。
这样，就可以通过帧继承标志位识别一个从属帧是否具有与被从属帧相同的至少一个帧参数。因此，解码操作是可以是基于没有大量信令及重复解码的帧参数进行的。
上述帧参数包括但不限于投影图像宽度、投影图像高度、压缩图像宽度以及压缩图像高度等。
在一些实施例中，所述解包所述视频的帧，包括：
根据获取的所述帧参数解包所述视频的帧。
上述帧参数指的是视频中描述帧的参数。当视频被解包时，需要通过解包上述帧参数来获得对每一帧相对应的描述。例如，视频帧的图像尺寸可以由帧参数来决定。然后，继续对帧进行解码来获得图像的相关参数，包括区域的尺寸，如区域宽度和/或区域高度等。
在一些实施例中，所述根据所述被从属帧的RWP编码配置，获取所述从属帧的至少一个帧参数，包括：
当所述从属帧的RWP编码配置中的第一类的帧继承标志位指示所述被从属帧的投影图像高度和投影图像宽度被继承时，根据所述被从属帧的RWP编码配置，获取继承的所述投影图像高度和投影图像宽度；和/或，
当所述从属帧的RWP编码配置中的第二类的帧继承标志位指示所述被从属帧的压缩图像高度和压缩图像宽度被继承时，根据所述被从属帧的RWP编码配置，获取继承的所述压缩图像高度和压缩图像宽度。
上述帧参数可以包括投影图像的宽度参数和高度参数，也可以包括压缩图像的宽度参数和高度参数。在解码过程中，可以通过帧继承标志位的值或类型，来识别从属帧对应的被从属帧，以及识别被从属帧的哪些帧参数被继承。
在一些实施例中，所述方法还包括：
当一个独立帧的帧类型标志位具有第一数值时，存储所述第一类独立帧的RWP编码配置；并存储前一个帧的RWP编码配置；其中，存储的所述RWP编码配置用于提供所述从属帧的参数。
由于第一类从属帧可以从属任一个第一类独立帧，并且第二类从属帧从属于前一个帧，因此，解码器可以保存第一类独立帧以及前一帧的数据。
对于第一类独立帧，帧类型标志位具有第一数值，因此可以通过帧类型标志位清楚且容易地识别出第一类独立帧。而前一帧是当前要解码的所述从属帧紧邻的前一个帧，因此，解码器可以直接识别对应的前一个帧。
如果当前从属帧所从属的是前一个帧，则可以基于该前一个帧的RWP编码配置和正在被解码的从属帧的RWP编码配置来对从属帧进行解码。如果从属帧所从属的是第一类独立帧，则可以基于已经存储的独立帧的RWP编码配置和当前从属帧的RWP编码配置来对该从属帧进行解码。
在一些实施例中，如图5所示，所述通过基于与从属帧对应的所述独立帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数，包括：
步骤302、通过基于前一个帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中，所述前一个帧是当前解码的所述从属帧紧邻的前一个帧，并且所述前一个帧与所述第二类从属帧具有从属关系；
所述解包所述视频的帧，包括：
步骤303、基于所述第二类从属帧的参数，解包所述视频的帧。
上述从属帧也可以是第二类从属帧，即仅引用前一个帧的从属帧；第一类从属帧可以从属任何类型的独立帧。
因此，在解码过程中，还需要基于第二类从属帧的RWP编码配置和前一个帧的RWP编码配置对第二类从属帧进行解码。
在一些实施例中，所述前一个帧包括以下任一种：第一类独立帧，第二类独立帧，第一类从属帧和第二类从属帧。
第一类从属帧的前一个帧可以是上述任一种类型的帧，第一类独立帧也可以与任意帧具有从属关系，因此，也可以与下一帧即第二类从属帧具有从属关系。而第二类独立帧只能与下一帧具有从属关系，也就是说第二类独立帧可以作为第二类从属帧的编码参考。并且第一类从属帧也可以与第二类从属帧具有从属关系。
在一些实施例中，所述方法还包括：
当所述从属帧的RWP编码配置的帧类型标志位具有第三数值时，通过匹配所述第一类独立帧的RWP编码配置中保存的帧ID，与所述从属帧的RWP编码配置中保存的用于指示被从属帧的帧ID，确定被从属的所述第一类独立帧；和/或
当所述从属帧的RWP编码配置的帧类型标志位具有第四数值时，确定被从属帧为所述从属帧的前一个帧。
第一类从属帧的帧类型标志位具有第三数值，当正在解码的从属帧具有第三数值的帧类型标志位时，则需要通过RWP编码配置中的帧ID，确定当前的从属帧所从属的是在当前帧之前已经解码并存储的哪一个第一类独立帧。第一类独立帧由帧ID来进行区分，因此，从属帧的RWP编码配置中的帧ID可以对应于相应的第一类独立帧的帧ID。
第二类从属帧具有第四数值的帧类型标志位，在当前解码的从属帧具有第四数值的帧类型标志位时，可以基于当前从属帧的RWP编码配置和前一个帧的RWP编码配置对该从属帧进行解码，从而获取从属帧的参数，并最终恢复视频的图像。
在一些实施例中，所述通过基于与从属帧对应的所述独立帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数，包括：
当所述从属帧的RWP编码配置中的区域继承标志位指示继承被从属帧的至少一个区域时，基于所述从属帧的RWP编码配置和所述被从属帧的RWP编码配置，获取所述继承区域的区域参数。
在完成对每一帧的帧参数的解码后，再继续对区域参数进行解码。当解码从属帧时，可以通过区域继承标志位来确定被从属帧的区域是否被继承。如果确定被从属帧的区域被继承，则说明当前从属帧的RWP编码配置中继承了被从属帧的至少一个区域参数。
具体地，当区域继承标志位指示区域不具有继承的区域参数时，可以直接解码该区域。然而，当区域继承标志位指示区域具有继承的区域参数时，则需要基于被从属帧的RWP编码配置和当前的从属帧的RWP编码配置来解码该区域，从而获取该区域的区域参数。
当正在解码的从属帧具有继承被从属帧的区域参数的区域时，可以通过确定被从属帧的区域参数来确定，进而提高解码的效率。
在一些实施例中，所述基于所述从属帧的RWP编码配置和所述被从属帧的RWP编码配置，获取所述继承区域的区域参数，包括：
当所述从属帧的RWP编码配置中的参数继承标志位指示被从属帧的至少一个区域参数被继承时，基于所述被从属帧的RWP编码配置，获取所述继承区域的区域参数；和/或，
当所述从属帧的RWP编码配置中的参数继承标志位指示所述被从属帧没有区域参数被继承时，基于所述从属帧的RWP编码配置，获取所述区域参数。
对于从属帧，包括两种区域从属关系，一种是通过被从属帧继承了上述继承区域的一部分区域参数，并且继承区域的另一部分区域参数可以与被从属帧的区域参数不同，而通过直接解码从属帧的RWP编码配置来获取。另一种是继承区域的所有区域参数都继承于被从属帧。
因此，对于从属帧的继承区域，还需要通过参数继承标志位来识别每个区域参数是否继承了被从属帧的区域参数。如果继承了被从属帧的区域参数，则需要根据被从属帧的区域参数进行解码，否则，基于当前解码的从属帧的RWP编码配置直接解码区域参数。
在一些实施例中，所述获取区域参数之前，所述方法还包括：
根据所述从属帧的RWP编码配置中，用于指示区域从属关系的区域ID，确定继承的所述被依赖帧的区域；或，
如果所述从属帧的RWP编码配置中没有指示区域从属关系的区域ID，则当第m个区域的区域继承标志位指示具有区域从属关系时，确定所述被从属帧的第m个区域被继承，其中，m时大于或等于0的整数，且m小于或等于M减1，所述M为所述从属帧或所述被从属帧中最小的总区域数。
上述从属帧与被从属帧的区域之间的区域从属关系可以通过两种方式来确定。如果一个区域通过携带区域ID来指示哪两个区域具有从属关系，则当前区域继承标志位指示当前区域具有区域从属关系，并且区域从属关系可以直接由区域ID确定。
或者，如果不存在用于指示区域之间的从属关系的区域ID，那么当区域继承标志位指示当前第p个区域具有区域从属关系时，则根据当前区域的数量来确定区域从属关系。例如，如果当前区域是从属帧的第p个区域，则该第p个区域具有指示区域从属关系的区域继承标志位，也就是说，当前从属帧的第p个区域与被从属帧的第p个区域具有区域从属关系。
在一些实施例中，该方法还包括：
当所述从属帧的RWP编码配置包括区域丢弃标志位时，跳过比较所述区域丢弃标志位所指示的从属帧的区域。
从属帧的区域数量可能与被从属帧的区域数量不同，在编码过程中，如果被从属帧的区域数量大于从属帧的区域数量时，冗余区域会被添加到从属帧的RWP编码配置中，但是，这些区域没有任何区域参数被继承，也不需要对任何参数进行编码，而是通过添加的区域丢弃标志位来标记这些被添加的区域。因此，在解码过程中，当解码处理到带有区域丢弃标志位的区域时，跳过对该区域的解码，并对下一区域进行处理。
这样，可以快速排除不必要的区域比较，从而提高解码效率。
本公开实施例提供一种视频的编码装置，如图6所示，该编码装置600包括：
分类模块601，配置为将视频的帧分为独立帧和从属帧；所述从属帧包括第一类从属帧；
第一编码模块602，配置为通过编码所述独立帧的参数，生成每一个所述独立帧的RWP编码配置；其中，所述独立帧的RWP编码配置包括：用于解码还原所述视频的参数；
第二编码模块603，配置为通过基于所述从属帧与被所述从属帧所参考独立帧之间的差异及从属关系编码的所述第一类从属帧的参数，生成每一个所述第一类从属帧的RWP编码配置。
在一些实施例中，所述独立帧包括：
第一类独立帧；所述第一类独立帧，能够与所述视频中所述第一类独立帧后的各所述从属帧建立从属关系；
第二类独立帧；所述第二类独立帧，能够与所述视频中的所述第二类独立帧下一个所述从属帧建立从属关系。在一些实施例中，每一所述独立帧的RWP编码配置中携带有帧类型标志位；
所述第一类独立帧的帧类型标志位具有第一数值；
所述第二类独立帧的帧类型标志位具有第二数值。在一些实施例中，所述第一类独立帧的RWP编码配置中包括：所述第一类独立帧的帧ID。在一些实施例中，所述第一类从属帧的RWP编码配置中包括：被所述第一类从属帧从属且用于指示从属关系的所述第一类独立帧的帧ID。
在一些实施例中，所述从属帧还包括：第二类从属帧，所述第二类从属帧仅与紧邻的前一个帧建立从属关系，所述装置还包括：
第三编码模块，配置为通过基于所述第二类从属帧与所述从属帧的前一个帧的参数之间的差异及从属关系，编码的所述第二类从属帧的参数，生成每一个所述第二类从属帧的RWP编码配置；其中，所述前一个帧为与所述第二类从属帧建立有从属关系的帧。
在一些实施例中，所述前一个帧的类型为：所述第一类独立帧、第二类独立帧、第一类从属帧和第二类从属帧中的任一种。
在一些实施例中，所述从属帧的RWP编码配置中包括帧类型标志位；
当所述帧类型标志位具有第三数值时，所述第三数值指示所述从属帧为第一类从属帧；
当所述帧类型标志位具有第四数值时，所述第四数值指示所述从属帧为第二类从属帧。
在一些实施例中，当一个从属帧继承了被从属帧的帧参数时，所述从属帧的RWP编码配置包括：
至少一个帧继承标志位，用于指示所述被依赖帧的帧参数被继承；
或者，
当一个从属帧不继承被从属帧的帧参数时，所述从属帧的RWP编码配置包括：
至少一个帧继承标志位，用于指示所述被从属帧中没有帧参数被继承；
所述被依赖帧包括：独立帧和从属帧。
在一些实施例中，所述帧继承标志位包括：
第一类帧继承标志位，用于指示所述被从属帧的投影图像高度和投影图像宽度是否被继承；
第二类帧继承标志位，用于指示所述被从属帧的压缩图像高度和压缩图像宽度是否被继承。
在一些实施例中，所述装置还包括：
第四编码模块，配置为当所述从属帧不继承所述被从属帧的帧参数时，将所述从属帧的帧参数编码到所述从属帧的RWP编码配置中。
在一些实施例中，所述从属帧的RWP编码配置包括：
区域继承标志位，用于指示被从属帧的至少部分区域是否被继承。
在一些实施例中，一个所述被从属帧包括N个区域，一个所述从属帧包括M个区域，N和M均为正整数；
当所述被从属帧的第i个区域与所述从属帧的第j个区域具有至少一个相同的区域参数时，所述从属帧的RWP编码配置包括：
所述被从属帧的第i个区域的区域ID，用于指示所述从属帧与所述被从属帧之间的区域从属关系；
参数继承标志位，用于指示所述被从属帧的第i个区域中的至少一个相同的区域参数被继承；
4.其中，所述i是大于或等于0且小于N的整数，所述j是大于或等于0且小于M的整数。在一些实施例中，所述被从属帧具有N个区域，所述从属帧具有M个区域，所述N和M为正整数；
当所述被从属帧的第i个区域中与对应的从属帧的第i个区域中具有至少一个相同的区域参数时，所述从属帧的RWP编码配置中的参数继承标志位，用于指示所述被从属帧的第i个分区中的区域参数被继承；其中，所述i为大于0小于N且小于M的整数。
在一些实施例中，当M小于N时，所述从属帧的RWP编码配置包括：区域丢弃标志位，所述区域丢弃标志位用于指示丢弃所述被从属帧中不被所述从属帧所从属的区域；
当M大于N时，所述从属帧的RWP编码配置中包括：至少解码M减N个区域所需的区域参数。
在一些实施例中，所述分类模块包括：
第一设定子模块，配置为将所述视频的帧的第一帧设定为独立帧；
第二设定子模块，配置为在所述第一帧之后，每间隔指定数量的所述从属帧后设定一个独立帧；或，
第三设定子模块，配置为在所述第一帧之后，根据流切换点确定所述独立帧，并将所述独立帧以外的帧设定为所述从属帧。
本公开实施例还提供一种视频的解码装置，如图7所示，该解码装置700，包括：
第一获取模块701，配置为通过解包独立帧的RWP编码配置，获取所述独立帧的参数；
第二获取模块702，配置为通过基于与从属帧对应的所述独立帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中所述从属帧至少包括：第一类从属帧；
解包模块703，至少基于所述独立帧的参数和所述第一类从属帧的参数，解包所述视频的帧。
在一些实施例中，所述第二获取模块，包括：
第一获取子模块，配置为当所述从属帧的RWP编码配置中的帧继承标志位指示所述被从属帧的至少一个帧参数被继承时，根据所述被从属帧的RWP编码配置，获取所述从属帧的至少一个帧参数；或者，
第二获取子模块，配置为当所述从属帧的RWP编码配置中的帧继承标志位指示所述被从属帧的帧参数没有被继承时，根据所述从属帧的RWP编码配置，获取所述从属帧的帧参数。
在一些实施例中，所述解包模块，还配置为根据获取的所述帧参数解包所述视频的帧。
在一些实施例中，所述第一获取模块，还配置为：
当所述从属帧的RWP编码配置中的第一类的帧继承标志位指示所述被从属帧的投影图像高度和投影图像宽度被继承时，根据所述被从属帧的RWP编码配置，获取继承的所述投影图像高度和投影图像宽度；和/或，
当所述从属帧的RWP编码配置中的第二类的帧继承标志位指示所述被从属帧的压缩图像高度和压缩图像宽度被继承时，根据所述被从属帧的RWP编码配置，获取继承的所述压缩图像高度和压缩图像宽度。
在一些实施例中，所述装置还包括：
第一保存模块，配置为当一个独立帧的帧类型标志位具有第一数值时，存储所述第一类独立帧的RWP编码配置；
第二保存模块，配置为存储前一个帧的RWP编码配置；其中，存储的所述RWP编码配置用于提供所述从属帧的参数。
在一些实施例中，所述第二获取模块，包括：
第三获取子模块，配置为通过基于前一个帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中，所述前一个帧是当前解码的所述从属帧紧邻的前一个帧，并且所述前一个帧与所述第二类从属帧具有从属关系；
所述解包模块，配置为基于所述第二类从属帧的参数，解包所述视频的帧。
在一些实施例中，所述前一个帧包括以下任一种：第一类独立帧，第二类独立帧，第一类从属帧和第二类从属帧。
在一些实施例中，所述装置还包括：
第一确定模块，配置为当所述从属帧的RWP编码配置的帧类型标志位具有第三数值时，通过匹配所述第一类独立帧的RWP编码配置中保存的帧ID，与所述从属帧的RWP编码配置中保存的用于指示所述被从属帧的帧ID，确定被从属的所述第一类独立帧；和/或
第二确定模块，配置为当所述从属帧的RWP编码配置的帧类型标志位具有第四数值时，确定被从属帧为所述从属帧的前一个帧。
在一些实施例中，所述第二获取模块，包括：
第四获取子模块，配置为当所述从属帧的RWP编码配置中的区域继承标志位指示所述被从属帧的至少一个区域被继承时，基于所述从属帧的RWP编码配置和所述被从属帧的RWP编码配置，获取所述继承区域的区域参数。
在一些实施例中，所述第四获取子模块，还配置为：
当所述从属帧的RWP编码配置中的参数继承标志位指示所述被从属帧的至少一个区域参数被继承时，基于所述被从属帧的RWP编码配置，获取所述继承区域的区域参数；和/或，
当所述从属帧的RWP编码配置中的参数继承标志位指示所述被从属帧没有被继承的区域参数时，基于所述从属帧的RWP编码配置，获取所述继承区域的区域参数。
在一些实施例中，所述装置还包括：
第三确定模块，配置为根据所述从属帧的RWP编码配置中，用于指示区域从属关系的区域ID，确定继承的所述被从属帧的区域；或，
第四确定模块，配置为如果所述从属帧的RWP编码配置中没有指示区域从属关系的区域ID，则当第m个区域的区域继承标志位指示具有区域从属关系时，确定所述被从属帧的第m个区域被继承，其中，m时大于或等于0的整数，且m小于或等于M减1，所述M为所述从属帧或所述被从属帧中最小的总区域数。
在一些实施例中，所述装置还包括：
停止模块，配置为当所述从属帧的RWP编码配置包括区域丢弃标志位时，跳过比较所述区域丢弃标志位所指示的从属帧的区域。
上述装置实施例的描述与上述方法实施例的描述类似，并且具有与方法实施例类似的优点。对于本发明的装置实施例中未公开的技术细节，请参见本发明方法实施例的描述。
需要说明的是，在本发明实施例中，如果上述方法以软件功能模块的形式实现并作为独立产品出售或使用，也可以存储在计算机存储介质中。基于这样的理解，本公开的实施例的技术方案实质上可以以软件产品的形式体现，或者以存储在存储介质中的软件产品的形式体现，包括多个指令。编码或解码设备执行本公开的各种实施例的全部或部分方法。上述存储介质包括可以存储程序代码的各种介质，例如USB闪存驱动器，移动硬盘，只读存储器(ROM)，磁盘或光盘。因此，本发明的实施例不限于硬件和软件的任何特定组合。
相应地，本发明实施例提供一种终端，包括存储器和处理器，所述存储器存储可在处理器上执行的计算机程序，当所述处理器执行所述程序时，执行上述实施例提供的编码或解码方法中的步骤。
相应地，本发明实施例提供了一种计算机可读存储介质，存储计算机程序，当处理器执行计算机程序时，实现上述实施例提供的方法步骤。
这里要注意的是，上述存储介质和设备实施例的描述与上述方法实施例的描述类似，并且具有与方法实施例类似的优点。对于本公开的存储介质和设备实施例中未公开的技术细节，请参考本公开的方法实施例的描述。
图8是根据本公开实施例的编码或解码设备的硬件实体的示意图。如图8所示，设备800的硬件实体包括：处理器801，I/O接口802和存储器803。
处理器801通常控制编码或解码设备800的整体操作。
I/O接口802可以使编码或解码设备能够通过网络与其他终端或服务器通信。
存储器803被配置为存储可由处理器801执行的指令和应用，并且还可以缓存要由处理器801处理或处理的数据以及编码或解码设备800中的各种模块(例如，图像数据，音频数据，语音)。通信数据和视频通信数据可以通过闪存(FLASH)或随机存取存储器(RAM)来实现。
应当理解，在整个说明书中使用的短语“一个实施例”或“实施例”意味着与实施例有关的特定特征，结构或特性包括在本公开的至少一个实施例中。因此，在整个说明书中使用的“在一个实施例中”或“在实施例中”不一定意味着相同的实施例。另外，这些特定特征，结构或特性可以在一个或多个实施例中以任何合适的方式组合。应当理解，在本公开的各种实施例中，上述过程的序列号的大小并不意味着执行的顺序，并且每个过程的执行顺序应该由其功能和内部逻辑来确定。并且不应该限于本公开的实施例。本公开的实施例的序列号仅用于描述，并不代表实施例的优点和缺点。
应理解，术语“包括”、“包含”或其任何其他变体旨在涵盖非排他性包含，使得包括一系列元件的过程，方法，物品或装置包括那些元素。还包括未明确列出的其他元素，或此类流程，方法，文章或设备固有的元素。由短语“包括”定义的元素不排除在包含该元素的过程、方法、项目或设备中存在其他等效元素。
在本公开提供的若干实施例中，应理解，所公开的装置和方法可以以其他方式实现。上述装置实施例仅是示意性的。例如，模块的划分仅是逻辑功能划分。在实际实现中，可以存在其他划分方式，例如，可以组合多个模块或组件，或者可以集成到另一个系统中，或者可以忽略或不执行某些特征。另外，所示或讨论的组件的耦合或直接耦合或通信连接可以是通过一些接口，设备或模块的间接耦合或通信连接，并且可以是电，机械或其他形式。
上面描述为单独组件的模块可以或可以不是物理上分开的，并且显示为模块的组件可以是或可以不是物理模块；它们可能位于一个地方或分布在多个网络模块中；可以根据实际需要选择部分或全部模块，以达到实施例方案的目的。
另外，本发明各个实施例中的各功能模块可以集成在一个处理模块中，也可以将每个模块单独作为一个模块使用，也可以将两个或两个以上的模块集成在一个模块中；模块可以以硬件的形式或以硬件加软件功能模块的形式实现。
本领域技术人员将理解，实现前述方法实施例的全部或部分步骤可以由与程序指令相关的硬件执行。上述程序可以存储在计算机存储介质中，当执行时，该程序包括方法实施例的上述步骤；上述存储介质包括：可移动存储设备，只读存储器(ROM)，磁盘或光盘等，可以存储程序代码。
或者，如果本公开的上述集成单元以软件功能模块的形式实现并作为独立产品出售或使用，则其可以存储在计算机存储介质中。基于这样的理解，本公开的实施例的技术方案实质上可以以软件产品的形式体现，或者以存储在存储介质中的软件产品的形式体现，包括多个指令。使编码或解码设备执行本公开的各种实施例的全部或部分方法。上述存储介质包括可以存储程序代码的各种介质，例如移动存储设备，ROM，磁盘或光盘。
以上仅为本发明的实施例，但本发明的范围不限于此，本领域技术人员可以容易地想到本发明所公开的技术范围内的变化或替换。它旨在被本公开的范围所涵盖。因此，本公开的范围应由所附权利要求的范围确定。

Claims (34)

1.一种视频的编码方法，其特征在于，包括：
将视频的帧分为独立帧和从属帧；
通过编码所述独立帧的参数，生成每一个所述独立帧的RWP编码配置；其中，所述独立帧的RWP编码配置包括：用于解码还原所述视频的参数；
通过基于所述从属帧与被从属帧之间的差异、及从属关系编码的所述从属帧的参数，生成每一个所述从属帧的RWP编码配置；其中，所述被从属帧至少包括所述独立帧。
2.根据权利要求1所述的方法，其特征在于，所述从属帧包括：第一类从属帧和/或第二类从属帧；
其中，所述第一类从属帧从属于所述独立帧；
所述第二类从属帧从属于紧邻的前一个帧，所述紧邻的前一个帧为所述从属帧。
3.根据权利要求2所述的方法，其特征在于，所述独立帧包括：
第一类独立帧：能够与所述视频中所述第一类独立帧后的各所述第一类从属帧建立从属关系；
和/或，
第二类独立帧：能够与所述视频中的所述第二类独立帧下一个所述第一类从属帧建立从属关系。
4.根据权利要求2至3任一项所述的方法，其特征在于，每一所述独立帧的RWP编码配置中携带有帧类型标志位；
所述第一类独立帧的帧类型标志位具有第一数值；
所述第二类独立帧的帧类型标志位具有第二数值；其中，所述第二数值不同于所述第一数值。
5.根据权利要求4所述的方法，其特征在于，所述第一类独立帧的RWP编码配置中包括：所述第一类独立帧的帧ID。
6.根据权利要求5所述的方法，其特征在于，所述第一类从属帧的RWP编码配置中包括：被所述第一类从属帧从属且用于指示从属关系的所述第一类独立帧的帧ID。
7.根据权利要求2所述的方法，其特征在于，所述方法还包括：
通过基于所述第二类从属帧与所述第二类从属帧的紧邻的前一个帧的参数之间的差异及从属关系编码的所述第二类从属帧的参数，生成每一个所述第二类从属帧的RWP编码配置；其中，所述紧邻的前一个帧为与所述第二类从属帧建立有从属关系的帧。
8.根据权利要求7所述的方法，其特征在于，所述紧邻的前一个帧的类型为：所述第一类独立帧、第二类独立帧、第一类从属帧和第二类从属帧中的任一种。
9.根据权利要求7所述的方法，其特征在于，所述从属帧的RWP编码配置中包括帧类型标志位；
当所述帧类型标志位具有第三数值时，所述第三数值指示所述从属帧为第一类从属帧；
当所述帧类型标志位具有第四数值时，所述第四数值指示所述从属帧为第二类从属帧。
10.根据权利要求7所述的方法，其特征在于，
当一个从属帧继承了被从属帧的帧参数时，所述从属帧的RWP编码配置包括：至少一个帧继承标志位，用于指示所述被从属帧的帧参数被继承；
或者，
当一个从属帧不继承被从属帧的帧参数时，所述从属帧的RWP编码配置包括：至少一个帧继承标志位，用于指示所述被从属帧中没有帧参数被继承；所述被从属帧还包括：独立帧。
11.根据权利要求10所述的方法，其特征在于，所述帧继承标志位包括：
第一类帧继承标志位，用于指示所述被从属帧的投影图像高度和投影图像宽度是否被继承；
第二类帧继承标志位，用于指示所述被从属帧的压缩图像高度和压缩图像宽度是否被继承。
12.根据权利要求10所述的方法，其特征在于，所述方法还包括：
当所述从属帧不继承所述被从属帧的帧参数时，将所述从属帧的帧参数编码到所述从属帧的RWP编码配置中。
13.根据权利要求7所述的方法，其特征在于，所述从属帧的RWP编码配置包括：
区域继承标志位，用于指示对应被从属帧的至少部分区域是否被继承。
14.根据权利要求13所述的方法，其特征在于，当所述区域继承标志位指示对应被从属帧没有区域被继承时，所述从属帧的RWP编码配置包括：解码所述从属帧所需的区域参数。
15.根据权利要求14所述的方法，其特征在于，一个所述被从属帧包括N个区域，一个所述从属帧包括M个区域，N和M均为正整数；
当所述被从属帧的第i个区域与所述从属帧的第j个区域具有至少一个相同的区域参数时，所述从属帧的RWP编码配置包括：
所述被从属帧的第i个区域的区域ID，用于指示所述从属帧与所述被从属帧之间的区域从属关系；
参数继承标志位，用于指示所述被从属帧的第i个区域中的至少一个相同的区域参数被继承；
其中，所述i是大于或等于0且小于N的整数，所述j是大于或等于0且小于M的整数。
16.根据权利要求14所述的方法，其特征在于，所述被从属帧具有N个区域，所述从属帧具有M个区域，所述N和M为正整数；
当所述被从属帧的第i个区域中与对应的从属帧的第i个区域中具有至少一个相同的区域参数时，所述从属帧的RWP编码配置中的参数继承标志位，用于指示所述被从属帧的第i个分区中的区域参数被继承；其中，所述i为大于0小于N且小于M的整数。
17.根据权利要求16所述的方法，其特征在于，当M小于N时，所述从属帧的RWP编码配置包括：区域丢弃标志位，所述区域丢弃标志位，用于指示丢弃所述被从属帧中不被所述从属帧所从属的区域；
当M大于N时，所述从属帧的RWP编码配置中包括：至少解码M减N个区域所需的区域参数。
18.根据权利要求1所述的方法，其特征在于，所述将视频的帧分为独立帧和从属帧，包括：
将所述视频的帧的第一帧设定为独立帧；
在所述第一帧之后，每间隔指定数量的所述从属帧后设定一个独立帧；或，
在所述第一帧之后，根据流切换点确定所述独立帧，并将所述独立帧以外的帧设定为所述从属帧。
19.一种视频的解码方法，其特征在于，包括：
通过解包被从属帧的RWP编码配置，获取所述被从属帧的参数；其中，所述被从属帧至少包括：独立帧；
通过基于与从属帧对应的所述被从属帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中，具有从属关系的所述从属帧与所述被从属帧存在部分相同参数；
至少基于所述被从属帧的参数和所述从属帧的参数，解包所述视频的帧。
20.根据权利要求19所述的方法，其特征在于，所述通过基于与从属帧对应的被从属帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数，包括：
当所述从属帧的RWP编码配置中的帧继承标志位指示被从属帧的至少一个帧参数被继承时，根据所述被从属帧的RWP编码配置，获取所述从属帧的至少一个帧参数；
或者，当所述从属帧的RWP编码配置中的帧继承标志位指示所述被从属帧的帧参数没有被继承时，根据所述从属帧的RWP编码配置，获取所述从属帧的帧参数。
21.根据权利要求20所述的方法，其特征在于，所述解包所述视频的帧，包括：根据获取的所述帧参数解包所述视频的帧。
22.根据权利要求20所述的方法，其特征在于，所述根据所述被从属帧的RWP编码配置，获取所述从属帧的至少一个帧参数，包括：
当所述从属帧的RWP编码配置中的第一类的帧继承标志位指示所述被从属帧的投影图像高度和投影图像宽度被继承时，根据所述被从属帧的RWP编码配置，获取被继承的所述投影图像高度和投影图像宽度；和/或，
当所述从属帧的RWP编码配置中的第二类的帧继承标志位指示所述被从属帧的压缩图像高度和压缩图像宽度被继承时，根据所述被从属帧的RWP编码配置，获取继承的所述压缩图像高度和压缩图像宽度。
23.根据权利要求19至22任一所述的方法，其特征在于，所述方法还包括：
当一个独立帧的帧类型标志位具有第一数值时，存储第一类独立帧的RWP编码配置；
存储当前从属帧的前一个帧的RWP编码配置；其中，存储的所述RWP编码配置用于提供所述从属帧的参数。
24.根据权利要求23所述的方法，其特征在于，所述通过基于与从属帧对应的所述被从属帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数，包括：
通过基于前一个帧的参数解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中，所述前一个帧是当前解码的所述从属帧紧邻的前一个帧，并且所述前一个帧与第二类从属帧具有从属关系；
所述解包所述视频的帧，包括：
基于所述第二类从属帧的参数，解包所述视频的帧。
25.根据权利要求23所述的方法，其特征在于，所述前一个帧包括以下任一种：第一类独立帧，第二类独立帧，第一类从属帧和第二类从属帧。
26.根据权利要求23所述的方法，其特征在于，所述方法还包括：
当所述从属帧的RWP编码配置的帧类型标志位具有第三数值时，通过匹配所述第一类独立帧的RWP编码配置中保存的帧ID，与所述从属帧的RWP编码配置中保存的用于指示被从属帧的帧ID，确定被从属的所述第一类独立帧；和/或
当所述从属帧的RWP编码配置的帧类型标志位具有第四数值时，确定被从属帧为所述从属帧的前一个帧。
27.根据权利要求19所述的方法，其特征在于，所述通过基于与从属帧对应的所述被从属帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数，包括：
当所述从属帧的RWP编码配置中的区域继承标志位指示被从属帧的至少一个区域被继承时，基于所述从属帧的RWP编码配置和所述被从属帧的RWP编码配置，获取所述继承区域的区域参数。
28.根据权利要求27所述的方法，其特征在于，所述基于所述从属帧的RWP编码配置和所述被从属帧的RWP编码配置，获取所述继承区域的区域参数，包括：
当所述从属帧的RWP编码配置中的参数继承标志位指示所述被从属帧的至少一个区域参数被继承时，基于所述被从属帧的RWP编码配置，获取所述继承区域的区域参数；和/或，
当所述从属帧的RWP编码配置中的参数继承标志位指示所述被从属帧没有被继承的区域参数时，基于所述从属帧的RWP编码配置，获取所述继承区域的区域参数。
29.根据权利要求27所述的方法，其特征在于，所述获取区域参数之前，所述方法还包括：
根据所述从属帧的RWP编码配置中，用于指示区域从属关系的区域ID，确定继承的所述被从属帧的区域；或，
如果所述从属帧的RWP编码配置中没有指示区域从属关系的区域ID，则当第m个区域的区域继承标志位指示具有区域从属关系时，确定所述被从属帧的第m个区域被继承，其中，m时大于或等于0的整数，且m小于或等于M减1，所述M为所述从属帧或所述被从属帧中最小的总区域数。
30.根据权利要求19所述的方法，其特征在于，所述方法还包括：
当所述从属帧的RWP编码配置包括区域丢弃标志位时，跳过比较所述区域丢弃标志位所指示的从属帧的区域。
31.一种视频的编码装置，其特征在于，包括：
分类模块，配置为将视频的帧分为独立帧和从属帧；
第一编码模块，配置为编码所述独立帧的参数，生成每一个所述独立帧的RWP编码配置；其中，所述独立帧的RWP编码配置包括：用于解码还原所述视频的所述参数；
第二编码模块，配置为基于所述第一类从属帧的参数与被从属帧的参数之间的差异及从属关系，通过编码所述从属帧的参数，生成每一个所述从属帧的RWP编码配置。
32.一种视频的解码装置，其特征在于，包括：
第一获取模块，配置为通过解包被从属帧的RWP编码配置，获取所述被从属帧的参数；
第二获取模块，配置为通过基于与从属帧对应的所述被从属帧的参数，解码得到的所述从属帧的RWP编码配置，获取所述从属帧的参数；其中，具有所述从属关系的所述从属帧与对应的所述被从属帧存在部分相同参数；
解包模块，配置为至少基于所述被从属帧的参数和所述从属帧的参数，解包所述视频的帧；其中，所述参数至少包括：帧参数和区域参数。
33.一种处理装置，其特征在于，至少包括：处理器和存储器；所述存储器用于存储能够运行在所述处理器上的可执行指令；其中，当执行所述可执行指令时，所述处理器执行上述权利要求1至18或19至30中任一项所述的方法。
34.一种非临时性计算机存储介质，其特征在于，存储有计算机可执行指令，用于执行上述权利要求1至18或19至30中任一项所述的方法。
CN202111136232.6A 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、存储介质 Active CN113923459B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111136232.6A CN113923459B (zh) 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、存储介质

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202111136232.6A CN113923459B (zh) 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、存储介质
PCT/CN2019/094476 WO2021000277A1 (en) 2019-07-03 2019-07-03 Method and device for coding, decoding and storage medium
CN201980001391.XA CN110959292B (zh) 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、处理装置、存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201980001391.XA Division CN110959292B (zh) 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、处理装置、存储介质

Publications (2)

Publication Number Publication Date
CN113923459A true CN113923459A (zh) 2022-01-11
CN113923459B CN113923459B (zh) 2024-07-30

Family

ID=69985765

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201980001391.XA Active CN110959292B (zh) 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、处理装置、存储介质
CN202111136232.6A Active CN113923459B (zh) 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、存储介质

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201980001391.XA Active CN110959292B (zh) 2019-07-03 2019-07-03 视频的编码、解码的方法及装置、处理装置、存储介质

Country Status (4)

Country Link
US (1) US11968374B2 (zh)
EP (1) EP3782366A4 (zh)
CN (2) CN110959292B (zh)
WO (1) WO2021000277A1 (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102460065A (zh) * 2009-06-25 2012-05-16 佳能株式会社 信息处理设备、信息处理方法和程序
KR20150096353A (ko) * 2015-06-22 2015-08-24 주식회사 큐램 이미지 인코딩 시스템, 디코딩 시스템 및 그 제공방법
CN105981385A (zh) * 2014-01-02 2016-09-28 寰发股份有限公司 具有边界滤波控制的帧内预测编码方法及其装置
WO2018066982A1 (ko) * 2016-10-04 2018-04-12 김기백 영상 데이터 부호화/복호화 방법 및 장치
EP3425915A1 (en) * 2017-07-07 2019-01-09 Nokia Technologies Oy A method and an apparatus and a computer program product for video encoding and decoding
TW201909624A (zh) * 2017-07-10 2019-03-01 美商高通公司 使用全向媒體格式處理媒體資料
TW201909647A (zh) * 2017-07-10 2019-03-01 美商高通公司 增強區域取向包封及視埠獨立高效視頻寫碼媒體資料檔
CN109587478A (zh) * 2017-09-29 2019-04-05 华为技术有限公司 一种媒体信息的处理方法及装置
CN109891889A (zh) * 2016-11-01 2019-06-14 三星电子株式会社 处理装置及其控制方法

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE512550T1 (de) * 2005-01-17 2011-06-15 Koninkl Philips Electronics Nv System, sender, empfänger, verfahren und software zum senden und empfangen geordneter mengen von videorahmen
US9451284B2 (en) * 2011-10-10 2016-09-20 Qualcomm Incorporated Efficient signaling of reference picture sets
CN103179394B (zh) * 2013-01-21 2016-02-17 北京航空航天大学 一种基于区域视频质量平稳的i帧码率控制方法
US11082713B2 (en) * 2015-11-20 2021-08-03 Mediatek Inc. Method and apparatus for global motion compensation in video coding system
WO2017188714A1 (ko) * 2016-04-26 2017-11-02 엘지전자 주식회사 360도 비디오를 전송하는 방법, 360도 비디오를 수신하는 방법, 360도 비디오 전송 장치, 360도 비디오 수신 장치
CN109691094B (zh) * 2016-08-25 2021-10-22 Lg电子株式会社 发送全向视频的方法、接收全向视频的方法、发送全向视频的装置和接收全向视频的装置
CN118474340A (zh) 2016-10-04 2024-08-09 有限公司B1影像技术研究所 图像数据编码/解码方法、介质和传输数据的方法
GB2554686A (en) 2016-10-04 2018-04-11 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
EP4447452A2 (en) * 2016-10-04 2024-10-16 B1 Institute of Image Technology, Inc. Image data encoding/decoding method and apparatus
US20190238888A1 (en) * 2017-07-17 2019-08-01 Ki Baek Kim Image data encoding/decoding method and apparatus
KR102531386B1 (ko) * 2016-10-04 2023-05-12 주식회사 비원영상기술연구소 영상 데이터 부호화/복호화 방법 및 장치
KR102503342B1 (ko) * 2017-01-10 2023-02-28 삼성전자주식회사 스테레오 스코픽 비디오 콘텐츠를 전송하기 위한 방법 및 장치
US10567734B2 (en) 2017-08-29 2020-02-18 Qualcomm Incorporated Processing omnidirectional media with dynamic region-wise packing
CN109547786B (zh) * 2017-09-22 2023-05-09 阿里巴巴集团控股有限公司 视频编码、以及视频解码的方法、装置
EP3692722A1 (en) 2017-10-02 2020-08-12 Fraunhofer Gesellschaft zur Förderung der Angewand Efficient immersive streaming
WO2019073113A1 (en) * 2017-10-09 2019-04-18 Nokia Technologies Oy APPARATUS, METHOD AND COMPUTER PROGRAM FOR VIDEO ENCODING AND DECODING
GB2567624B (en) * 2017-10-12 2021-05-26 Canon Kk Method, device and computer program for transmitting media content
US10869016B2 (en) * 2018-04-12 2020-12-15 Mediatek Singapore Pte. Ltd. Methods and apparatus for encoding and decoding virtual reality content
GB2585760B (en) * 2018-06-06 2022-04-20 Canon Kk Method, device, and computer program for transmitting media content
KR102138536B1 (ko) * 2018-06-08 2020-07-28 엘지전자 주식회사 360 비디오 시스템에서 오버레이 처리 방법 및 그 장치
US10432970B1 (en) * 2018-06-14 2019-10-01 Telefonaktiebolaget Lm Ericsson (Publ) System and method for encoding 360° immersive video
GB2575074B (en) * 2018-06-27 2022-09-28 Canon Kk Encapsulating video content with an indication of whether a group of tracks collectively represents a full frame or a part of a frame
EP3804332A1 (en) * 2018-06-29 2021-04-14 Huawei Technologies Co., Ltd. Apparatuses and methods for encoding and decoding a video signal
US11528509B2 (en) * 2018-09-07 2022-12-13 Lg Electronics Inc. Video transmission method, video transmission device, video receiving method and video receiving device
KR102201763B1 (ko) * 2018-10-02 2021-01-12 엘지전자 주식회사 360 비디오 시스템에서 오버레이 처리 방법 및 그 장치
WO2020070379A1 (en) * 2018-10-03 2020-04-09 Nokia Technologies Oy Method and apparatus for storage and signaling of compressed point clouds
US11394946B2 (en) * 2018-10-30 2022-07-19 Lg Electronics Inc. Video transmitting method, video transmitting apparatus, video receiving method, and video receiving apparatus
EP4072139A3 (en) * 2019-01-02 2022-11-09 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
WO2020183055A1 (en) * 2019-03-14 2020-09-17 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
WO2020242023A1 (ko) * 2019-05-24 2020-12-03 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치
WO2020242027A1 (ko) * 2019-05-24 2020-12-03 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치
CN114009053B (zh) * 2019-06-20 2024-10-15 诺基亚技术有限公司 用于视频编码和解码的装置、方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102460065A (zh) * 2009-06-25 2012-05-16 佳能株式会社 信息处理设备、信息处理方法和程序
CN105981385A (zh) * 2014-01-02 2016-09-28 寰发股份有限公司 具有边界滤波控制的帧内预测编码方法及其装置
KR20150096353A (ko) * 2015-06-22 2015-08-24 주식회사 큐램 이미지 인코딩 시스템, 디코딩 시스템 및 그 제공방법
WO2018066982A1 (ko) * 2016-10-04 2018-04-12 김기백 영상 데이터 부호화/복호화 방법 및 장치
CN109891889A (zh) * 2016-11-01 2019-06-14 三星电子株式会社 处理装置及其控制方法
EP3425915A1 (en) * 2017-07-07 2019-01-09 Nokia Technologies Oy A method and an apparatus and a computer program product for video encoding and decoding
TW201909624A (zh) * 2017-07-10 2019-03-01 美商高通公司 使用全向媒體格式處理媒體資料
TW201909647A (zh) * 2017-07-10 2019-03-01 美商高通公司 增強區域取向包封及視埠獨立高效視頻寫碼媒體資料檔
CN109587478A (zh) * 2017-09-29 2019-04-05 华为技术有限公司 一种媒体信息的处理方法及装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ROBERT SKUPIN: "Standardization status of 360 degree video coding and delivery", 《2017 IEEE VISUAL COMMUNICATIONS AND IMAGE PROCESSING (VCIP)》, 1 March 2018 (2018-03-01) *
张义: "无线局域网中增强3D视频传输的队列管理机制", 《中国电子科学研究院学报》, 20 June 2017 (2017-06-20) *
贺人龙;蒋刚毅;符冉迪;郁梅;: "基于自适应参考帧模式选择的多视点视频编码方法", 计算机辅助设计与图形学学报, no. 09, 15 September 2007 (2007-09-15), pages 1 - 34 *

Also Published As

Publication number Publication date
CN110959292A (zh) 2020-04-03
WO2021000277A1 (en) 2021-01-07
CN113923459B (zh) 2024-07-30
US11968374B2 (en) 2024-04-23
US20220360795A1 (en) 2022-11-10
EP3782366A1 (en) 2021-02-24
EP3782366A4 (en) 2021-10-20
CN110959292B (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
CN111433821B (zh) 用于重建表示3d对象的点云的方法和装置
WO2017190710A1 (en) Method and apparatus for mapping omnidirectional image to a layout output format
CN111742549A (zh) 在数据流中编码及解码来自数据流的三维场景的方法和装置
US8923640B1 (en) Coherence groups: region descriptors for low bit rate encoding
EP3301933A1 (en) Methods, devices and stream to provide indication of mapping of omnidirectional images
KR20190089115A (ko) 포인트 클라우드 압축 방법 및 장치
CN111727461A (zh) 信息处理装置和方法
CN117121487A (zh) 点云数据发送设备、点云数据发送方法、点云数据接收设备和点云数据接收方法
CN117178553A (zh) 点云数据发送设备、点云数据发送方法、点云数据接收设备和点云数据接收方法
US11790602B2 (en) Information processing device and method
CN110959292B (zh) 视频的编码、解码的方法及装置、处理装置、存储介质
CN114503579A (zh) 使用中间样品的贴片对点云进行编码和解码
US20240185467A1 (en) Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method
US20240013475A1 (en) Transparency range for volumetric video
JP7541024B2 (ja) ポイントクラウドの処理
KR20230079184A (ko) 몰입형 비디오의 인코딩 및 디코딩
US20170048532A1 (en) Processing encoded bitstreams to improve memory utilization
US11064218B2 (en) Method and apparatus for encoding/decoding image for virtual view synthesis
US20230370636A1 (en) Image processing device and method
US20210150788A1 (en) Media vectorization
US20230334716A1 (en) Apparatus and method for providing 3-dimensional spatial data based on spatial random access
JP4404556B2 (ja) 動画像符号化方法とシステム及び動画像復号方法とシステム
CN118843885A (zh) 编码/解码在长方体体积中包含的点云的点的位置
KR20220015741A (ko) 다중 코덱 기반의 전방위 몰입형 비디오에 대한 디코딩 방법 및 디코딩 장치
KR20240090261A (ko) 적어도 하나의 센서에 의해 감지된 포인트 클라우드 지오메트리 데이터에 대해 인코딩/디코딩하는 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant