CN110675401A - 一种全景图像像素块滤波方法及装置 - Google Patents

一种全景图像像素块滤波方法及装置 Download PDF

Info

Publication number
CN110675401A
CN110675401A CN201811111379.8A CN201811111379A CN110675401A CN 110675401 A CN110675401 A CN 110675401A CN 201811111379 A CN201811111379 A CN 201811111379A CN 110675401 A CN110675401 A CN 110675401A
Authority
CN
China
Prior art keywords
pixel block
filtered
pixel
filtering
nominal point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811111379.8A
Other languages
English (en)
Other versions
CN110675401B (zh
Inventor
虞露
皇甫旭昶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Publication of CN110675401A publication Critical patent/CN110675401A/zh
Application granted granted Critical
Publication of CN110675401B publication Critical patent/CN110675401B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20024Filtering details

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种全景图像像素块滤波方法及装置。根据待滤波像素块所在图像的格式信息,确定待滤波像素块在全景图像中的对应像素块的位置,对所述待滤波像素以及其对应像素块滤波。本发明可以减少编码图像的编码伪像和边界的不连续性,提高了编码图像的主观质量。本发明在设计全景图像像素块滤波方法的同时,还设计了相应的装置。

Description

一种全景图像像素块滤波方法及装置
技术领域
本发明涉及全景图像处理领域,特别涉及全景图像像素块滤波方法及装置。
背景技术
全景图像指空间中一个观察点四周所有的场景,由这个观察点所能接收到的所有光线构成,球面可以描述观察点四周的所有场景。由于球面图像难以存储以及目前的图像编解码器是针对普通的非全景图像设计的,所以可以将球面图像展开为平面图像,在将球面图像展开成平面图像时会将球面图像切割开,球面图像切割线两侧相邻的像素在展开的平面图像上不相邻,不同的展开方法对应不同的格式信息。
经纬图是最为常见的将球面图像按照经纬度展成矩形,长宽比为2:1。如图1所示,经纬图的左右两侧即为全景图像的球面分割线,待滤波像素块及其对应像素块在球面相邻在投影格式上变得不相邻。也可以将球面图像通过透视投影到一个正多面体上,然后将该正多面体展开并紧凑排布后生成对应的平面图像,如图2所示,利用中心投影将球面投影到立方体的六个面上,然后将立方体展开并将6个面排布成图2的3x2图像。
对全景图像展开并进行压缩编码时,压缩编码存在失真,在编解码图像中的不同位置的失真不同。通过解码图像生成球面图像时,由于编解码上不同位置的失真不同,球面分割线两个的像素在编解码图像上的失真不同,所以在通过解码图像生成球面图像时会出现伪像,可以通过对编解码图像中球面分割线处进行滤波来减弱甚至消除伪像现象。
目前图像编解码器中的滤波技术都是对在编解码图像中相邻的像素块进行滤波操作的,对于全景图像球面分割线两侧的像素块不进行滤波。为了去除全景图像观看图像中的伪像,需要对全景视频球面分割线两侧的像素块设计特殊的滤波方法,由于全景视频球面分割线两侧的像素块在解码图像上存在不对齐情况,针对这一现象需要设计相应的对齐方法。
发明内容
本发明针对现有技术的不足,提出了一种新的全景图像像素块滤波方法及装置。
本发明的主要思想是根据全景图像的编解码图像的格式信息以及待滤波像素块的位置信息,对待滤波像素块中的标称点沿全景图像球面分割线方向的位置进行伸缩变换后确定滤波像素块在紧邻球面分割线另一侧的对应标称点的位置;通过对应标称点的位置确定对应像素块的位置;对待滤波像素块及其对应像素块滤波,从而减弱编码带来的伪像现象。
附图说明
结合附图,可从下面举出的实施例来对本发明的原理进行解释。
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的各实施例仅用来解释本发明,只是其中的一些特例,本发明的适用范围并不仅限于这些实施例。在附图中:
图1将全景图像展开成经纬图格式图像及待滤波像素块及其对应像素块的位置;
图2将球面通过透视投影映射到六面体上;
图3将六面体六个面展开并紧凑排布后的位置关系示意图;
图4为本发明一个实施例中待滤波像素块及其对应像素块在全景图像展开图像中的位置示意图;
图5为本发明一个实施例中待滤波像素块中的一个标称点的位置示意图;
图6为本发明一个实施例中对应标称点在对应像素块中的位置示意图;
图7为本发明一个实施例中对应标称点在对应像素块中的位置示意图;
图8为本发明一个实施例中待滤波像素块中的一个标称点的位置示意图;
图9为本发明一个实施例中对应标称点在对应像素块中的位置以及对应块所述编码单元示意图;
图10为本发明一个实施例中待滤波像素块及其对应像素块在全景图像展开为六面体图像中的位置示意图;
图11为本发明一个实施例中待滤波像素块及其对应像素块在全景图像展开为经纬图中的位置示意图;
图12为本发明一个实施例中全景图像像素块滤波装置示意图;
图13为本发明一个实施例中全景图像像素块滤波装置示意图;
图14为本发明一个实施例中对应标称点位置导出模块中子模块示意图;
图15为本发明一个实施例中对应像素块位置导出模块中子模块示意图;
图16为本发明一个实施例中像素滤波模块中子模块示意图;
图17为编码导致的全景图像viewport中的伪像示意图;
图18为经过滤波后的全景图像viewport;
图19为本发明一个实施例中边界强度的判决流程;
图20为HEVC去块滤波中边界强度的判决流程。
具体实施方式
实施例1
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
x′=f(x)
y′=g(y)
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图5所示所述标称点为待滤波像素块B中最靠近面边界一行像素的几何中点b,对该点的横坐标进行伸缩变换后得到像素块B’中对应标称点b’的纵坐标。伸缩变换方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数,在求y′对应公式中的y为±1。
图6给出了对应像素块B’中的对应标称点b’,滤波所需的编码信息如量化步长、预测模式(帧内预测或帧间预测)等信息来自标称点b’所在的编码单元,同时将b’的纵坐标取有限精度得到整像素精度,非对应标称点的像素以标称点b’位置为基准按照整像素间隔获取像素,根据获取待滤波像素块及其对应像素块的编码信息和像素特性确定滤波方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例2
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
x′=f(x)
y′=g(y)
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图5所示所述标称点为待滤波像素块B中最靠近面边界一行像素的几何中点b,对该点的横坐标进行伸缩变换后得到像素块B’中对应标称点b’的纵坐标。伸缩变换方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数。
图7给出了对应像素块B’中的对应标称点b’,滤波所需的编码信息如量化步长、预测模式(帧内预测或帧间预测)等信息来自标称点b’所在的编码单元,对B’中的对应标称点b’的纵坐标取有限精度得到分像素精度,例如1/2像素精度、1/4像素精度、1/8像素精度、1/16像素精度等。其余非对应标称点所在位置的像素以b’为基准按照整像素间隔获取,非整像素位置的像素由周围整像素位置的像素插值得到,根据获取待滤波像素块及其对应像素块的编码信息和像素特性确定滤波方法。本实施例中所述滤波特指去块滤波,确定滤波方法指确定去块滤波时的滤波系数。根据确定的滤波系数对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例3
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
x′=f(x)
y′=g(y)
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图8所示所述标称点为待滤波像素块B中最靠近面边界一行像素左侧像素点b,对该点的横坐标进行伸缩变换后得到像素块B’中对应标称点b’的纵坐标。伸缩变换方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数。
图9给出了对应像素块B’中的对应标称点b’,,由于编码单元C包含B’中的像素数目最多,所以滤波所需的编码信息如量化步长、预测模式(帧内预测或帧间预测)等信息来编码单元C,同时将标称点b’的纵坐标取有限精度得到整像素精度,非对应标称点的像素以标称点b’位置为基准按照整像素间隔获取像素,根据获取待滤波像素块及其对应像素块的编码信息和像素特性确定滤波方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例4
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
x′=f(x)
y′=g(y)
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图8所示所述标称点为待滤波像素块B中最靠近面边界一行像素左侧像素点b,对该点的横坐标进行伸缩变换后得到像素块B’中对应标称点b’的纵坐标。伸缩变换方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数。
图9给出了待滤波像素块B在全景图像上的对应像素B’中的对应标称点b’,由于编码单元C包含B’中的像素数目最多,所以滤波所需的编码信息如量化步长、预测模式(帧内预测或帧间预测)等信息来编码单元C,同时将标称点b’的纵坐标取有限精度得到分像素精度,例如1/2像素精度、1/4像素精度、1/8像素精度、1/16像素精度等。非对应标称点的像素以标称点b’位置为基准按照整像素间隔获取像素,根据获取待滤波像素块及其对应像素块的编码信息和像素特性确定滤波方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块及其对应像素块滤波后的像素。
实施例5
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
x′=f(x)
y′=g(y)
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图4所示所述标称点为待滤波像素块B中最靠近面边界一行像素的几何中点b,根据该点横坐标计算出像素块B’中对应标称点b’的纵坐标。计算方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数。
图7给出了对应像素块B’中的对应标称点b’,对B’中的对应标称点b’的纵坐标取有限精度得到分像素精度,例如1/2像素精度、1/4像素精度、1/8像素精度、1/16像素精度等。其余非对应标称点所在位置的像素以b’为基准按照整像素间隔获取,非整像素位置的像素由周围整像素位置的像素插值得到。对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例6
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
Figure BDA0001809216270000081
Figure BDA0001809216270000082
β=tan-1x
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图4所示所述标称点为待滤波像素块B中最靠近面边界一行像素的几何中点b,根据该点横坐标计算出像素块B’中对应标称点b’的纵坐标。计算方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数。
图7给出了对应像素块B’中的对应标称点b’,对B’中的对应标称点b’的纵坐标取有限精度得到分像素精度,例如1/2像素精度、1/4像素精度、1/8像素精度、1/16像素精度等。其余非对应标称点所在位置的像素以b’为基准按照整像素间隔获取,非整像素位置的像素由周围整像素位置的像素插值得到。对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例7
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
Figure BDA0001809216270000091
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图4所示所述标称点为待滤波像素块B中最靠近面边界一行像素的几何中点b,根据该点横坐标计算出像素块B’中对应标称点b’的纵坐标。计算方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数。
图7给出了对应像素块B’中的对应标称点b’,对B’中的对应标称点b’的纵坐标取有限精度得到整像素精度。其余非对应标称点所在位置的像素以b’为基准按照整像素间隔获取。对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例8
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述待滤波像素块所在的图像为3x2的六面体格式,如图3所示。图4给出了一个待滤波像素块B及其在全景图像球面分割线另一侧的对应像素块B’。假设图像在X-Y坐标系下采样率相同,由所述格式信息可以得到图像在图4中的X’-Y’坐标系下采样率不同,且有以下关系:
Figure BDA0001809216270000101
其中x∈(-1,1),y∈(-1,1),x′∈(-1,1),y′∈(-1,1)。
如图4所示所述标称点为待滤波像素块B中最靠近面边界一行像素的几何中点b,根据该点横坐标计算出像素块B’中对应标称点b’的纵坐标。计算方法如下:
x=f-1(x′)
y′=g(x)
其中f-1(x′)表示f(x)的反函数。
图7给出了对应像素块B’中的对应标称点b’,对B’中的对应标称点b’的纵坐标取有限精度得到分像素精度,例如1/2像素精度、1/4像素精度、1/8像素精度、1/16像素精度等。其余非对应标称点所在位置的像素以b’为基准按照整像素间隔获取,非整像素位置的像素由周围整像素位置的像素插值得到。对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例9
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
对紧邻全景图像球面分割线一侧的待滤波像素块,根据所述待滤波像素块所在图像对应的投影格式信息,确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块的位置;根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法;其中所述待滤波像素块及其对应像素块中的编码信息中的运动信息始终认为相同;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
图10给出了一个待滤波像素块B及其在全景图像上的对应像素块B’。在图10中像素块B的横坐标和像素块B’的横坐标是对齐的,因此不需要对像素块B的横坐标进行伸缩变换。根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,其中待滤波像素块及其对应像素块的编码信息中的运动信息不需要获取,认为待滤波像素块及其对应像素块的运动信息始终相等。对所述待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例10
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
对紧邻全景图像球面分割线一侧的待滤波像素块,根据所述待滤波像素块所在图像对应的投影格式信息,确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块的位置;根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法;其中所述待滤波像素块及其对应像素块中的编码信息中的运动信息始终认为相同;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
图11给出了一个经纬图格式上的待滤波像素块B及其对应像素块B’。在图11中像素块B的纵坐标和像素块B’的纵坐标是对齐的,因此不需要对像素块B的横坐标进行伸缩变换。根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,认为待滤波像素块及其对应像素块的编码信息中的运动信息始终相等。对所述待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例11
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
本实施例中所述滤波指去块滤波。在对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,将待滤波像素块及其对应像素块的边界强度设为1,确定滤波方法不需要获取待滤波像素块及其对应像素块的编码信息,而是使用待滤波像素块所在图像的量化步长作为待滤波像素块的量化步长,对应像素块所在图像的量化步长作为对应像素块的量化步长。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例12
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,将待滤波像素块及其对应像素块的边界强度设为2,确定滤波方法不需要获取待滤波像素块及其对应像素块的编码信息。使用待滤波像素块所在图像的量化步长作为待滤波像素块的量化步长,对应像素块所在图像的量化步长作为对应像素块的量化步长。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例13
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,待滤波像素块及其对应像素块的边界强度根据两像素块的编码信息决定,若两个像素块中至少有一个块的编码信息中的预测模式为帧内预测,则边界强度为2,否则边界强度为1。使用待滤波像素块所在图像的量化步长作为待滤波像素块的量化步长,对应像素块所在图像的量化步长作为对应像素块的量化步长。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例14
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,待滤波像素块及其对应像素块的边界强度根据两像素块的编码信息决定,若两个像素块中至少有一个块的编码信息中的预测模式为帧内预测,则边界强度为2,否则边界强度为1。确定滤波像素所需的量化步长从待滤波像素块及其对应像素块的编码信息中取出。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例15
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,待滤波像素块及其对应像素块的边界强度根据两像素块的编码信息决定,若两个像素块中至少有一个块的编码信息中的预测模式为帧内预测,则边界强度为2,否则边界强度为1。确定滤波方法所需的量化步长不是从待滤波像素块及其对应像素块中直接取出,而是使用待滤波像素块所在编码区域的量化步长和待滤波像素块的量化步长的较大值作为待滤波像素块的量化步长;对应像素块所在编码区域的量化步长和对应像素块的量化步长作为对应像素块的量化步长。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例16
本发明实施例提供了一种全景图像像素块滤波装置。
本实施例提供的全景图像像素块滤波装置,包括以下模块:
对应标称点位置导出模块:该模块的输入为紧邻全景图像球面分割线一侧的待滤波像素块中标称点的位置信息以及所述待滤波像素块所在图像对应的投影格式信息;输出为所述标称点在全景图像中对应标称点的位置;根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;
图12给出了本实施例提供的全景图像像素块滤波装置示意图。在该模块中对对应标称点位置取有限精度得到整像素位置。
对应像素块位置导出模块:该模块输入为对应标称点的位置,输出为待滤波像素块在全景图像中对应像素块的位置;该模块用于根据对应标称点的位置确定对应像素块中其余非对应标称点的位置;
该模块中对非标称点位置的确定方法为:以对应像素块中对应标称点为基准,按整像素间隔确定所述非对应标称点的位置。
像素滤波模块:该模块输入为待滤波像素块位置及其对应像素块的位置,输出为待滤波像素块滤波后的像素,该模块用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
该模块需要获取待滤波像素块及其对应像素块的编码信息,根据待滤波像素块及其对应像素块的编码信息和像素确定滤波方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的结果。
实施例17
本发明实施例提供了一种全景图像像素块滤波装置。
本实施例提供的全景图像像素块滤波装置,包括以下模块:
对应像素块位置导出模块:该模块输入为紧邻全景图像球面分割线一侧的待滤波像素块的位置信息以及所述待滤波像素块所在图像对应的投影格式信息,输出为待滤波像素块的对应像素块位置;
滤波方法确定模块,用于确定滤波方法,输入为待滤波像素块及其对应像素块的位置信息,根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,确定滤波方法为以下之一种:认为所述待滤波像素块及其对应像素块的编码信息中的运动信息相同,或者不使用所述待滤波像素块及其对应像素块的编码信息中的运动信息,输出为该模块确定的滤波方法;
像素滤波模块,用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
图13给出了本实施例提供的全景图像像素块滤波装置示意图。所述对应像素块位置导出模块在获得对应像素块位置后,将该位置传递给滤波方法确定模块,滤波方法确定模块确定滤波方法并将确定的滤波方法传递给待滤波像素块,像素滤波模块根据输入的滤波方法对输入的像素块滤波,获得待滤波像素块滤波后的结果。
实施例18
本发明实施例提供了一种全景图像像素块滤波装置。
本实施例提供的全景图像像素块滤波装置,包括以下模块:
对应标称点位置导出模块:该模块的输入为紧邻全景图像球面分割线一侧的待滤波像素块中标称点的位置信息以及所述待滤波像素块所在图像对应的投影格式信息;输出为所述标称点在全景图像中对应标称点的位置;根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;
对应像素块位置导出模块:该模块输入为对应标称点的位置,输出为待滤波像素块在全景图像中对应像素块的位置;该模块用于根据对应标称点的位置确定对应像素块中其余非对应标称点的位置;
像素滤波模块:该模块输入为待滤波像素块位置及其对应像素块的位置,输出为待滤波像素块滤波后的像素,该模块用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
如图14所示,所述对应标称点位置导出模块中包含对应标称点位置取整模块,该模块对对应标称点坐标取有限精度得到分像素精度,例如1/2像素精度、1/4像素精度、1/8像素精度、1/16像素精度等。
对应像素块位置导出模块中还包括非对应标称点位置导出模块,如图15所示。非对应标称点位置导出模块对非标称点位置的确定方法为:以对应像素块中对应标称点为基准,按整像素间隔确定所述非对应标称点的位置。
像素滤波模块中还包括编码信息获取模块以及滤波方法确定模块,如图16所示。编码信息获取模块根据输入的待滤波像素块及其对应像素块的位置获取所述待滤波像素块及其对应像素块的编码信息;滤波方法确定模块根据待滤波像素块及其对应像素块的编码信息和像素特性确定滤波方法。根据确定好的滤波方法对待滤波像素块及其对应块滤波,得到待滤波像素滤波后的结果。
实施例19
本发明实施例提供了一种全景图像像素块滤波装置。
本实施例提供的全景图像像素块滤波装置,包括以下模块:
对应标称点位置导出模块:该模块的输入为紧邻全景图像球面分割线一侧的待滤波像素块中标称点的位置信息以及所述待滤波像素块所在图像对应的投影格式信息;输出为所述标称点在全景图像中对应标称点的位置;根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;
对应像素块位置导出模块:该模块输入为对应标称点的位置,输出为待滤波像素块在全景图像中对应像素块的位置;该模块用于根据对应标称点的位置确定对应像素块中其余非对应标称点的位置;
像素滤波模块:该模块输入为待滤波像素块位置及其对应像素块的位置,输出为待滤波像素块滤波后的像素,该模块用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在像素滤波模块中,对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,将待滤波像素块及其对应像素块的边界强度设为2,确定滤波方法不需要获取待滤波像素块及其对应像素块的编码信息。使用待滤波像素块所在图像的量化步长作为待滤波像素块的量化步长,对应像素块所在图像的量化步长作为对应像素块的量化步长。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例20
本发明实施例提供了一种全景图像像素块滤波装置。
本实施例提供的全景图像像素块滤波装置,包括以下模块:
对应标称点位置导出模块:该模块的输入为紧邻全景图像球面分割线一侧的待滤波像素块中标称点的位置信息以及所述待滤波像素块所在图像对应的投影格式信息;输出为所述标称点在全景图像中对应标称点的位置;根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;
对应像素块位置导出模块:该模块输入为对应标称点的位置,输出为待滤波像素块在全景图像中对应像素块的位置;该模块用于根据对应标称点的位置确定对应像素块中其余非对应标称点的位置;
像素滤波模块:该模块输入为待滤波像素块位置及其对应像素块的位置,输出为待滤波像素块滤波后的像素,该模块用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在像素滤波模块中,对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,将待滤波像素块及其对应像素块的边界强度设为1,确定滤波方法不需要获取待滤波像素块及其对应像素块的编码信息。使用待滤波像素块所在图像的量化步长作为待滤波像素块的量化步长,对应像素块所在图像的量化步长作为对应像素块的量化步长。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例21
本发明实施例提供了一种全景图像像素块滤波装置。
本实施例提供的全景图像像素块滤波装置,包括以下模块:
对应像素块位置导出模块:该模块输入为紧邻全景图像球面分割线一侧的待滤波像素块的位置信息以及所述待滤波像素块所在图像对应的投影格式信息,输出为待滤波像素块的对应像素块位置;
编码信息获取模块,用于获取所述待滤波像素块及其对应像素块的编码信息,其中所述待滤波像素块及其对应像素块的编码信息中的运动信息始终认为相同;
像素滤波模块,用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在编码信息获取模块中,待滤波像素块及其对应像素块的编码信息中的运动信息不需要获取,认为待滤波像素块及其对应像素块的运动信息始终相等。
实施例22
本发明实施例提供了一种全景图像像素块滤波装置。
本实施例提供的全景图像像素块滤波装置,包括以下模块:
对应标称点位置导出模块:该模块的输入为紧邻全景图像球面分割线一侧的待滤波像素块中标称点的位置信息以及所述待滤波像素块所在图像对应的投影格式信息;输出为所述标称点在全景图像中对应标称点的位置;根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;
对应像素块位置导出模块:该模块输入为对应标称点的位置,输出为待滤波像素块在全景图像中对应像素块的位置;该模块用于根据对应标称点的位置确定对应像素块中其余非对应标称点的位置;
像素滤波模块:该模块输入为待滤波像素块位置及其对应像素块的位置,输出为待滤波像素块滤波后的像素,该模块用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在对应标称点位置导出模块中,对对应标称点的坐标取整获得整像素位置;在对应像素块位置导出模块中,对应像素块中的其余非标称点的位置以对应标称点为基准,按整像素间隔获取。
在像素滤波模块中,对待滤波像素块及其对应像素块滤波前,需要确定对应的滤波方法,在确定滤波方法时,将待滤波像素块及其对应像素块的边界强度设为1,确定滤波方法不需要获取待滤波像素块及其对应像素块的编码信息。使用待滤波像素块所在图像的量化步长作为待滤波像素块的量化步长,对应像素块所在图像的量化步长作为对应像素块的量化步长。根据边界强度、量化步长以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
图17给出了未滤波前全景图像的一个观看区域中的伪像现象,通过使用本实施例的全景图像像素块滤波装置对全景图像待滤波像素块滤波后生成的观看区域如图18所示,可以看出编码造成的伪像大大减弱。
实施例23
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
对紧邻全景图像球面分割线一侧的待滤波像素块,根据所述待滤波像素块所在图像对应的投影格式信息,确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块的位置;根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,确定滤波方法为以下之一种:认为所述待滤波像素块及其对应像素块的编码信息中的运动信息相同,或者不使用所述待滤波像素块及其对应像素块的编码信息中的运动信息;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在本实施例中,对上述根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法这一过程进行了更加详细的描述。在确定滤波方法时,需要确定待滤波像素块及其对应像素块的边界强度,在确定边界强度时不使用编码信息中的运动信息或者认为编码信息中的运动信息相等,若两个像素块中至少有一个块的编码信息中的预测模式为帧内预测,则边界强度为2,否则边界强度为1。使用编码信息中的QP来确定滤波方法的判决门限。根据边界强度、判决门限以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例24
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
对紧邻全景图像球面分割线一侧的待滤波像素块,根据所述待滤波像素块所在图像对应的投影格式信息,确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块的位置;根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,确定滤波方法为以下之一种:认为所述待滤波像素块及其对应像素块的编码信息中的运动信息相同,或者不使用所述待滤波像素块及其对应像素块的编码信息中的运动信息;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在本实施例中,对上述根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法这一过程进行了更加详细的描述。在确定滤波方法时,需要确定待滤波像素块及其对应像素块的边界强度,在确定边界强度时不使用编码信息中的运动信息或者认为编码信息中的运动信息相等,将边界强度设为固定值1或者设为固定值2,使用编码信息中的QP来确定滤波方法的判决门限。根据边界强度、判决门限以及待滤波像素块及其对应像素块中的像素特性确定编码方法,对待滤波像素块及其对应像素块滤波,得到待滤波像素块滤波后的像素。
实施例25
本发明实施例提供了一种全景图像像素块滤波方法。
本实施例提供的全景图像像素块滤波方法包括:
对紧邻全景图像球面分割线一侧的待滤波像素块,根据所述待滤波像素块所在图像对应的投影格式信息,确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块的位置;根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,确定滤波方法为以下之一种:认为所述待滤波像素块及其对应像素块的编码信息中的运动信息相同,或者不使用所述待滤波像素块及其对应像素块的编码信息中的运动信息;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
在本实施例中,对上述根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法这一过程进行了更加详细的描述。在确定滤波方法时,需要确定待滤波像素块及其对应像素块的边界强度,本实施例中在确定待滤波像素块及其对应像素块的边界强度时仅仅使用了帧内/帧间预测模式这一判决条件或者直接将边界强度设为固定大小的值,图19(a)展示了判断边界强度时使用帧内/帧间预测模式这一判决条件的流程图,若为帧内预测则边界强度为2,否则为1;图19(b)展示了边界强度判决的另一种方法,即边界强度固定为2或固定为1。确定边界强度之后还需要根据待滤波像素块及其对应块的编码信息中的QP来确定各滤波方法的判决门限值,针对不同的量化情况确定不同的门限值能够更好的提升滤波效果。
传统的滤波技术在判决边界强度时的流程较为复杂同时需要存储大量的编码信息,例如图20展示了HEVC中的去块滤波技术中边界强度的判决流程,在判断中需要的比特数分别为:帧内/帧间预测flag,1bit;非零变换系数flag,1bit;运动信息:运动矢量(MVx,MVy)其中MVx和MVy各需要16bit,参考帧的index:4bit,因此在双假设预测时共需要72bit的运动信息。而本实施例中仅仅使用了1bit(帧内/帧间预测flag)甚至不使用任何编码信息。
在现有的编解码技术中,编码信息是按照块来存储的,例如以4*4大小的块来存储编码信息。本发明相对于HEVC中的去块滤波技术对每个4*4块节省了73bit或74bit。每个4*4块中的像素数占用的大小为16*bitdepth bit,其中bitdepth表示每个像素使用的比特数,如8bit或10bit.当为8bit时一个4*4大小的像素块的像素使用的总比特数为128bit,加上编码信息共202bit,因此HEVC中的去块滤波技术对于每个4*4块使用了202bit,而本发明实施例中的方法仅使用128bit或129bit,和HEVC中的去块滤波技术相比节省了36%的行缓存。
本发明所有实施例中提出的全景图像像素块滤波方法及装置既可以用在预测环路内也可以用在预测环路外。此外在本发明实施例提出的全景图像像素块滤波方法之后也可以接着使用其他滤波方法,比如HEVC或AVS中的SAO滤波,AVS2中的ALF滤波等等。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (12)

1.一种全景图像像素块滤波方法,其特征在于,包括:
根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;由所述对应标称点确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
2.根据权利1中的全景图像像素块滤波方法,其特征还在于,所述待滤波像素块的对应像素块中对应标称点位置的确定方法为以下情况之一:
1)对所述对应像素块中对应标称点的位置取有限精度得到整像素位置;
2)对所述对应像素块中对应标称点的位置取有限精度得到分像素位置。
3.根据权利1中的全景图像像素块滤波方法,其特征还在于,所述待滤波像素块的对应像素块中其余非对应标称点的位置的确定方法为:以所述对应像素块中对应标称点为基准,按整像素间隔确定所述对应像素块中非对应标称点的位置。
4.根据权利1中的全景图像像素块滤波方法,其特征还在于,包括:
获取所述待滤波像素块及其对应像素块的编码信息,根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法。
5.根据权利4中的全景图像像素块滤波方法,其特征还在于,包括:
所述待滤波像素块对应像素块的编码信息的获取方法为以下情况之一:
1)所述编码信息来自所述对应像素块中对应标称点所在的编码单元;
2)所述编码信息来自包含所述对应像素块中像素数目最多的编码单元。
6.一种全景图像像素块滤波方法,其特征在于,包括:
对紧邻全景图像球面分割线一侧的待滤波像素块,根据所述待滤波像素块所在图像对应的投影格式信息,确定所述待滤波像素块在紧邻所述球面分割线另一侧的对应像素块的位置;根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,确定滤波方法为以下之一种:认为所述待滤波像素块及其对应像素块的编码信息中的运动信息相同,或者不使用所述待滤波像素块及其对应像素块的编码信息中的运动信息;对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
7.一种全景图像像素块滤波装置,其特征在于,包括以下模块:
对应标称点位置导出模块:该模块的输入为紧邻全景图像球面分割线一侧的待滤波像素块中标称点的位置信息以及所述待滤波像素块所在图像对应的投影格式信息;输出为所述标称点在全景图像中对应标称点的位置;根据紧邻全景图像球面分割线一侧的待滤波像素块所在图像对应的投影格式信息,对所述待滤波像素块中的标称点沿所述球面分割线方向的位置进行伸缩变换,确定所述标称点在紧邻所述球面分割线另一侧的对应标称点的位置;
对应像素块位置导出模块:该模块输入为对应标称点的位置,输出为待滤波像素块在全景图像中对应像素块的位置;该模块用于根据对应标称点的位置确定对应像素块中其余非对应标称点的位置;
像素滤波模块:该模块输入为待滤波像素块位置及其对应像素块的位置,输出为待滤波像素块滤波后的像素,该模块用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
8.根据权利要求7中的全景图像像素块滤波装置,其特征还在于,所述对应标称点位置导出模块中还包括对应标称点位置取整模块,所述对应标称点位置取整模块中对应标称点位置的取整方法为以下情况之一:
1)对所述对应像素块中对应标称点的位置取有限精度得到整像素位置;
2)对所述对应像素块中对应标称点的位置取有限精度得到分像素位置。
9.根据权利要求7中的全景图像像素块滤波装置,其特征还在于,所述对应像素块位置导出模块中还包括非对应标称点位置导出模块,所述非对应标称点位置导出模块中非标称点位置的确定方法为:以对应像素块中对应标称点为基准,按整像素间隔确定所述非对应标称点的位置。
10.根据权利要求7中的全景图像像素块滤波装置,其特征还在于,所述像素滤波模块中还包括以下子模块:
编码信息获取模块,用于获取所述待滤波像素块及其对应像素块的编码信息;
滤波方法确定模块,用于根据所述待滤波像素块及其对应像素块的编码信息和像素特性确定滤波方法。
11.根据权利要求10中的编码信息获取模块,其特征还在于,所述待滤波像素块对应像素块的编码信息的获取方法为以下情况之一:
1)所述编码信息来自所述对应像素块中对应标称点所在的编码单元;
2)所述编码信息来自包含所述对应像素块中像素数目最多的编码单元。
12.一种全景图像像素块滤波装置,其特征在于,包括以下模块:
对应像素块位置导出模块:该模块输入为紧邻全景图像球面分割线一侧的待滤波像素块的位置信息以及所述待滤波像素块所在图像对应的投影格式信息,输出为待滤波像素块的对应像素块位置;
滤波方法确定模块,用于确定滤波方法,输入为待滤波像素块及其对应像素块的位置信息,根据所述待滤波像素块及其对应像素块的编码信息确定滤波方法,确定滤波方法为以下之一种:认为所述待滤波像素块及其对应像素块的编码信息中的运动信息相同,或者不使用所述待滤波像素块及其对应像素块的编码信息中的运动信息,输出为该模块确定的滤波方法;
像素滤波模块,用于对所述待滤波像素块及其对应像素块滤波,得到所述待滤波像素块滤波后的结果。
CN201811111379.8A 2018-07-02 2018-09-23 一种全景图像像素块滤波方法及装置 Active CN110675401B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201810709252X 2018-07-02
CN201810709252 2018-07-02

Publications (2)

Publication Number Publication Date
CN110675401A true CN110675401A (zh) 2020-01-10
CN110675401B CN110675401B (zh) 2023-07-11

Family

ID=69065632

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811111379.8A Active CN110675401B (zh) 2018-07-02 2018-09-23 一种全景图像像素块滤波方法及装置

Country Status (1)

Country Link
CN (1) CN110675401B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111461125A (zh) * 2020-03-19 2020-07-28 杭州凌像科技有限公司 一种全景图像的连续性分割方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101233756A (zh) * 2005-07-29 2008-07-30 三星电子株式会社 考虑bl内模式的去块滤波方法和使用该方法的多层视频编码器/解码器
US20110274166A1 (en) * 2009-01-29 2011-11-10 Lg Electronics Inc. Method And Apparatus For Processing Video Signals Using Boundary Intra Coding
CN103947203A (zh) * 2011-09-20 2014-07-23 Lg电子株式会社 用于编码/解码图像信息的方法和装置
US20140233649A1 (en) * 2013-02-18 2014-08-21 Mediatek Inc. Method and apparatus for video decoding using multi-core processor
CN105681805A (zh) * 2016-01-19 2016-06-15 北京大学深圳研究生院 视频编码、解码方法及其帧间预测方法和装置
CN107135397A (zh) * 2017-04-28 2017-09-05 中国科学技术大学 一种全景视频编码方法和装置
WO2017158236A2 (en) * 2016-03-15 2017-09-21 Nokia Technologies Oy A method, an apparatus and a computer program product for coding a 360-degree panoramic images and video
TW201813380A (zh) * 2016-07-15 2018-04-01 聯發科技股份有限公司 一種濾波360度視訊邊界的方法及裝置
CN107948547A (zh) * 2017-12-29 2018-04-20 北京奇艺世纪科技有限公司 全景视频拼接的处理方法、装置及电子设备
CN107979712A (zh) * 2016-10-20 2018-05-01 上海富瀚微电子股份有限公司 一种视频降噪方法及装置
CN108111851A (zh) * 2016-11-25 2018-06-01 华为技术有限公司 一种去块滤波方法及终端

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101233756A (zh) * 2005-07-29 2008-07-30 三星电子株式会社 考虑bl内模式的去块滤波方法和使用该方法的多层视频编码器/解码器
US20110274166A1 (en) * 2009-01-29 2011-11-10 Lg Electronics Inc. Method And Apparatus For Processing Video Signals Using Boundary Intra Coding
CN103947203A (zh) * 2011-09-20 2014-07-23 Lg电子株式会社 用于编码/解码图像信息的方法和装置
US20140233649A1 (en) * 2013-02-18 2014-08-21 Mediatek Inc. Method and apparatus for video decoding using multi-core processor
CN105681805A (zh) * 2016-01-19 2016-06-15 北京大学深圳研究生院 视频编码、解码方法及其帧间预测方法和装置
WO2017158236A2 (en) * 2016-03-15 2017-09-21 Nokia Technologies Oy A method, an apparatus and a computer program product for coding a 360-degree panoramic images and video
TW201813380A (zh) * 2016-07-15 2018-04-01 聯發科技股份有限公司 一種濾波360度視訊邊界的方法及裝置
CN107979712A (zh) * 2016-10-20 2018-05-01 上海富瀚微电子股份有限公司 一种视频降噪方法及装置
CN108111851A (zh) * 2016-11-25 2018-06-01 华为技术有限公司 一种去块滤波方法及终端
CN107135397A (zh) * 2017-04-28 2017-09-05 中国科学技术大学 一种全景视频编码方法和装置
CN107948547A (zh) * 2017-12-29 2018-04-20 北京奇艺世纪科技有限公司 全景视频拼接的处理方法、装置及电子设备

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
ALAA F. ET AL.: "An Adaptive Deblocking Filter to improve the Quality of the HEVC Standard", 《INTERNATIONAL JOURNAL OF IMAGE,GRAPHICS AND SIGNAL PROCESSING》, pages 9 - 15 *
JIANLIANG LIN ET AL.: "Description of 360°video coding technology proposal by MediaTek", 《JVET》 *
JIANLIANG LIN ET AL.: "Description of 360°video coding technology proposal by MediaTek", 《JVET》, 13 April 2018 (2018-04-13), pages 1 - 31 *
周芦明;刘春生;罗亮;周先国;: "基于纹理方向自适应的H.264去块滤波算法", 数据采集与处理, no. 04, pages 107 - 110 *
陈智贤;王国中;赵海武;李国平;滕国伟;: "改进的基于AVS2的去块效应滤波算法", 电视技术, no. 3, pages 11 - 18 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111461125A (zh) * 2020-03-19 2020-07-28 杭州凌像科技有限公司 一种全景图像的连续性分割方法

Also Published As

Publication number Publication date
CN110675401B (zh) 2023-07-11

Similar Documents

Publication Publication Date Title
JP7228639B2 (ja) 省略符号化を用いた映像符号化及び復号化装置及びその方法
US11553185B2 (en) Method and apparatus for processing a video signal
CN114208197A (zh) 用于视频编解码的块划分方法
US11889102B2 (en) Filtering method for removing blocking artifact and apparatus
US11375199B2 (en) Interpolation filter for an inter prediction apparatus and method for video coding
KR20190052097A (ko) 영상 처리 방법 및 이를 위한 장치
CN111837389A (zh) 适用于多符号位隐藏的块检测方法及装置
US10819980B2 (en) Moving image coding device, moving image decoding device, and program
CN110675401B (zh) 一种全景图像像素块滤波方法及装置
US11202082B2 (en) Image processing apparatus and method
KR20050099256A (ko) 디블록킹을 이용한 영상처리 장치와 영상처리 방법
US20210185314A1 (en) Image decoding device, image coding device, image processing system, and program
TWI755653B (zh) 圖像編碼裝置、圖像編碼方法、圖像解碼裝置、圖像解碼方法
CN116325727A (zh) 一种帧内预测方法、编码器、解码器及存储介质
WO2020007094A1 (zh) 一种全景图像滤波方法及装置
JP7109961B2 (ja) 画像復号装置、画像符号化装置、画像処理システム、画像復号方法及びプログラム
WO2022213122A1 (en) State transition for trellis quantization in video coding
JP2022087335A (ja) 画像復号装置、画像復号方法及びプログラム
JP2022079469A (ja) 画像復号装置、画像復号方法及びプログラム
CN117979031A (zh) 图像滤波方法、存储介质、电子设备及产品
KR101906831B1 (ko) 영상 부호화 방법 및 장치
CN114079782A (zh) 视频图像重建方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant