CN108337513B - 一种帧内预测像素生成方法和装置 - Google Patents

一种帧内预测像素生成方法和装置 Download PDF

Info

Publication number
CN108337513B
CN108337513B CN201710918918.8A CN201710918918A CN108337513B CN 108337513 B CN108337513 B CN 108337513B CN 201710918918 A CN201710918918 A CN 201710918918A CN 108337513 B CN108337513 B CN 108337513B
Authority
CN
China
Prior art keywords
pixel
predicted
reconstructed
offset
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710918918.8A
Other languages
English (en)
Other versions
CN108337513A (zh
Inventor
虞露
陈佳伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Publication of CN108337513A publication Critical patent/CN108337513A/zh
Application granted granted Critical
Publication of CN108337513B publication Critical patent/CN108337513B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Abstract

本发明提供一种帧内预测像素生成方法和装置。首先根据当前块采用的帧内预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所得到的该被预测像素所对应的重建像素的位置；然后结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量；重建像素位置加上重建像素偏移量作为该被预测像素的参考重建像素位置；或者，对重建像素偏移量进行指定亚像素精度的精度控制得到满足指定亚像素精度要求的近似偏移量；重建像素位置加上近似偏移量作为被预测像素的参考重建像素位置；最后拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。本发明提出的方法和装置解决了跨投影面纹理偏转的问题。

Description

一种帧内预测像素生成方法和装置
相关申请的交叉引用
本申请要求于2017年1月20日提交的，申请号为201710041539.5的中国专利申请的利益和优先权，将所述申请的全部内容通过引用并入到此。
技术领域
本发明涉及视频编解码的帧内预测机制，且更具体地涉及利用几何投影关系来生成帧内预测像素的方法和装置。
背景技术
虚拟现实采用的是360度全景视频，使得用户有较强的沉浸感。360度全景视频往往投影成2D平面来进行编解码，其中投影方式包括经纬图(equirectangular,ERP)，立方体图(cubemap,CMP)和八面体图(octahedron,OHP)等。不同的投影方式具有的投影面数量不同；多个投影面在组成图像进行编码时会具有不同的排列方式。如立方体图的投影方式包含6个投影面，具有4x3，6x1和3x2等不同的排列方式。当采用的投影方式含有多个投影面时，由于每个投影面具有不同的投影角度，跨投影面的纹理存在偏转问题。
视频编码标准HEVC包含除DC和Planar模式之外的33种方向性预测模式。帧内预测时采用的重建整像素来自当前块左下侧N个重建整像素、正左侧N个重建整像素、1个左上角重建整像素、正上侧N个重建整像素和右上侧N个重建整像素，其中块的大小为NxN。根据当前被预测像素的位置和当前被预测像素所在块的帧内预测模式，按照方向性预测方式得到该被预测像素所对应的重建像素的位置，具体过程如下：
以块最左上角重建整像素为原点，原点的正右侧为X轴的正方向，原点的正下侧为Y轴的正方向，建立坐标系。当前预测像素P在块中的位置为(x,y)，并由以下方式之一生成：
(1)如图1a所示，当前预测像素采用左侧重建像素进行拷贝生成，且预测方向向上偏离水平方向A角度，则被拷贝的参考像素位置为(0，yr)，其中yr为
yr＝y-x*tanA
(2)如图1b所示，当前预测像素采用左侧重建像素进行拷贝生成，且预测方向向下偏离水平方向A角度，则被拷贝的重建像素位置为(0，yr)，其中yr为
yr＝y+x*tanA
(3)如图1c所示，当前预测像素采用上侧重建像素进行拷贝生成，且预测方向向左偏离垂直方向A角度，则被拷贝的重建像素位置为(xr，0)，其中xr为
xr＝x-y*tanA
(4)如图1d所示，当前预测像素采用上侧重建像素进行拷贝生成，且预测方向向右偏离垂直方向A角度，则被拷贝的重建像素位置为(xr，0)，其中xr为
xr＝x+y*tanA
有研究者对3x2的立方体投影方式进行了帧内编码的优化，解决了投影面在编码图像中不相邻却在立方体空间中相邻的问题。其具体方法为：直接拷贝在编码图像中不相邻但在立方体空间中相邻的重建整像素，来生成投影面边界块的参考整像素。
发明内容
为此，本发明提出一种帧内预测像素生成方法，其解决了跨投影面纹理偏转的问题。该方法包括：
根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所采用的该被预测像素所对应的重建像素的位置；结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T；所述重建像素位置加上所述重建像素偏移量T作为该被预测像素的参考重建像素位置；拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
本发明的第二目的在于提出一种帧内预测像素生成方法，包括：
根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所采用的该被预测像素所对应的重建像素的位置；结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T；对所述的重建像素偏移量T进行指定亚像素精度的精度控制得到满足指定亚像素精度要求的近似偏移量Ta；所述重建像素位置加上所述近似偏移量Ta作为所述被预测像素的参考重建像素位置；拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
进一步地，上述两种方法还包括，所述当前块中存在同一列中A个连续的被预测像素所对应的重建像素偏移量统一为T1、在该列中还存在B个连续的被预测像素所对应的重建像素偏移量统一为T2，而且T1不等于T2，所述A和B均为大于1的自然数。
进一步地，上述两种方法还包括，所述当前块中存在同一行中C个连续的被预测像素所对应的重建像素偏移量统一为T3、在该行中还存在D个连续的被预测像素所对应的重建像素偏移量统一为T4，而且T3不等于T4，所述C和D均为大于1的自然数。
本发明的第三目的在于提出一种帧内预测像素生成装置，其包括：
第一计算单元，用于根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所采用的该被预测像素所对应的重建像素的位置；
第二计算单元，位于第一计算单元之后，用于结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T’；
偏移单元，位于第二计算单元之后，用于所述重建像素位置加上所述重建像素偏移量T’作为该被预测像素的参考重建像素位置；
拷贝单元，位于偏移单元之后，用于拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
本发明的第四目的在于提出一种帧内预测像素生成装置，其包括：
第一计算单元，用于根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所采用的该被预测像素所对应的重建像素的位置；
第二计算单元，位于第一计算单元之后，用于结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T’；
近似单元，位于第二计算单元之后，用于对所述的重建像素偏移量T’进行指定亚像素精度的精度控制得到满足指定亚像素精度要求的近似偏移量Ta’；
偏移单元，位于近似单元之后，用于所述重建像素位置加上所述近似偏移量Ta’作为所述被预测像素的参考重建像素位置；
拷贝单元，位于偏移单元之后，用于拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
进一步地，上述两种装置还包括列等间隔偏移单元，位于偏移单元之内，用于所述当前块中存在同一列中E个连续的被预测像素所对应的重建像素偏移量统一为T1’、在该列中还存在F个连续的被预测像素所对应的重建像素偏移量统一为T2’，而且T1’不等于T2’，所述E和F均为大于1的自然数。
进一步地，上述两种装置还包括行等间隔偏移单元，位于偏移单元之内，用于所述当前块中存在同一行中G个连续的被预测像素所对应的重建像素偏移量统一为T3’、在该行中还存在H个连续的被预测像素所对应的重建像素偏移量统一为T4’，而且T3’不等于T4’，所述G和H均为大于1的自然数。
附图说明
图1a为一种帧内方向性预测模式的预测方式。
图1b为一种帧内方向性预测模式的预测方式。
图1c为一种帧内方向性预测模式的预测方式。
图1d为一种帧内方向性预测模式的预测方式。
图2a为一种两个投影面的相对位置。
图2b为一种两个投影面的相对位置。
图2c为一种两个投影面的相对位置。
图2d为一种两个投影面的相对位置。
图2e为一种两个投影面的相对位置。
图3为一种帧内预测像素生成装置。
图4为一种帧内预测像素生成装置。
图5为一种帧内预测像素生成装置。
图6为一种帧内预测像素生成装置。
图7为一种帧内预测像素生成装置。
图8为一种帧内预测像素生成装置。
具体实施方式
立方体空间中两个相邻的投影面在编码图像中的相对位置具有多种情况，如图2a，图2b，图2c、图2d和图2e等所示。上述图示的两个投影面中带斜线的边界在立方体空间中相邻。接下来以图2c和图2e为例来对帧内预测像素的生成方法和装置进行具体地说明，其中帧内预测采用的预测模式为方向性预测模式中的一种。以投影面1和投影面2的公共边(带斜线的边界)的一端端点为原点，并以投影面1和投影面2的公共边为x轴，建立平面右手坐标系。如图2c中投影面1的原点O1和投影面2的原点O2为同一点，投影面1的x1轴和投影面2的x2轴所在的边均为投影面1和投影面2的公共边。投影面1最靠近公共边的一列像素点的y坐标值为0.5，投影面2最靠近公共边的一行像素点的y坐标值为-0.5。
实施例1
本实施例结合图2c并以当前被预测像素位于投影面1、参考像素位于投影面2为例来具体地说明帧内预测像素生成方法。
第一步，根据当前被预测像素在投影面1中的位置(x1,y1)和当前被预测像素所在块的帧内预测模式，按照方向性预测方式得到该被预测像素所对应的重建像素的位置(x2,-0.5)。
第二步，由于当前被预测像素在投影面1中而参考像素在投影面2中，所以x2尚不能作为参考像素的坐标位置，而需要进行偏移。由第一步中得到的x2，根据相邻面像素的投影关系计算重建像素偏移量T：
T＝(2×((FaceWidth+1)/2-x2))/(FaceWidth+1)
其中FaceWidth为投影面2上沿投影面2和投影面1公共边界方向的采样点数目。由于能够获取的参考像素的位置存在有限精度的限制，偏移量T也按照指定的亚像素精度进行精度控制得到满足亚像素精度要求的近似的重建像素偏移量Ta，即Ta＝round(T,指定的亚像素精度)。比如指定的亚像素精度为1/32像素，偏移量T可以按照如下两种方式之一进行1/32精度的近似：
(1)Ta＝floor(T×32)/32；其中floor函数为向下取整函数；
(2)Ta＝ceil(T×32)/32；其中ceil函数为向上取整函数；
又比如指定的亚像素精度为1/64像素，偏移量T可以按照如下两种方式之一进行1/64精度的近似：
(1)Ta＝floor(T×64)/64；其中floor函数为向下取整函数；
(2)Ta＝ceil(T×64)/64；其中ceil函数为向上取整函数。
偏移量T还可以按照其他的近似方法进行上述亚像素精度的近似，也可以根据其它的亚像素精度要求进行相应的近似。
另外，为了简化计算过程，对于一种特定的FaceWidth，Ta还可以通过查表的方式获得：以x2为索引变量，查索引表得到Ta。其中索引表中x2对应项的值为round((2×((FaceWidth+1)/2-x2))/(FaceWidth+1),指定的亚像素精度)是事先计算好的。
第三步，由第一步得到的x2和第二步得到的Ta，计算当前被预测像素对应的参考像素在投影面2中的位置的x分量：
xn＝x2+Ta
第四步，将投影面2中位置为(xn，-0.5)的像素的值拷贝作为当前被预测像素的预测值。上述被拷贝像素位于最靠近投影面2的公共边的一行像素中。
实施例2
本实施例结合图2c并以当前预测像素位于投影面1、参考像素位于投影面2为例来具体地说明帧内预测像素生成方法。
第一步，在投影面1中存在同一列A个连续的被预测像素，此为第一组被预测像素，其位置为(x1,i，y1)(i＝0,1,…,A-1)。根据第一组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第一组被预测像素所对应的重建像素位置(x′1，i，-0.5)。A的取值应为大于1的自然数，例如A为4、或8、或16等。在投影面1中的同一列中还存在不同于上述被预测像素的另外B个连续的被预测像素，此为第二组被预测像素，其位置为(x2,j，y1)(j＝0,1,…,B-1)，按照第二组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第二组被预测像素所对应的重建像素位置(x′2，j，-0.5)。B的取值应为大于1的自然数，例如B为4、或8、或16等。
第二步，确定第一组被预测像素的统一偏移量T1和第二组被预测像素的统一偏移量T2，T1的取值应在[T1，min，T1，max]范围内、T2的取值应在[T2，min，T2，max]范围内，并且T1与T2不相等，其中：
Figure BDA0001426208560000071
Figure BDA0001426208560000072
Figure BDA0001426208560000073
Figure BDA0001426208560000074
举例而言，T1的计算方法：
T1＝(2×((FaceWidth+1)/2-x′1，A/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000075
其中，TAi＝(2×((FaceWidth+1)/2-x′1，i))/(FaceWidth+1)，但也不限上述两种方法。
举例而言，T2的计算方法：
T2＝(2×((FaceWidth+1)/2-x′2，B/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000076
TBj＝(2×((FaceWidth+1)/2-x′2，j))/(FaceWidth+1)，
但也不限上述两种方法。
考虑到能够获取的参考像素的位置存在有限精度的限制，T1与T2均可按照指定的亚像素精度进行近似得到近似的重建像素偏移量T1a和T2a,具体的近似方法与实施例1中一样，不再赘述。两组被预测像素在组内均使用统一的偏移量，提高了预测像素生成的可并行度；两组被预测像素之间使用的是不同的偏移量，又保证了帧内预测的准确度。
第三步，计算上述第一组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pi＝x′1，i+T1，a，i＝0，1，…，A-1；
计算上述第二组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pj＝x′2，j+T2，a，j＝0，1，…，B-1。
第四步，将投影面2中位置为(Pi，-0.5)(i＝0,1,…,A-1)的像素的值拷贝作为上述第一组被预测像素的预测值；将投影面2中位置为(Pj，-0.5)(j＝0,1,…,B-1)的像素的值拷贝作为上述第二组被预测像素的预测值。上述被拷贝像素均位于最靠近投影面1和投影面2的公共边的一行像素中。
实施例3
本实施例结合图2e并以当前预测像素位于投影面1、参考像素位于投影面2为例来具体地说明帧内预测像素生成方法。
第一步，在投影面1中存在同一行A个连续的被预测像素，此为第一组被预测像素，其位置为(x1,i，y1)(i＝0,1,…,A-1)。根据第一组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第一组被预测像素所对应的重建像素位置(x′1，i，-0.5)。A的取值应为大于1的自然数，例如A为4、或8、或16等。在投影面1中的同一行中还存在不同于上述被预测像素的另外B个连续的被预测像素，此为第二组被预测像素，其位置为(x2,j，y1)(j＝0,1,…,B-1)，按照第二组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第二组被预测像素所对应的重建像素位置(x′2，j，-0.5)。B的取值应为大于1的自然数，例如B为4、或8、或16等。
第二步，确定第一组被预测像素的统一偏移量T1和第二组被预测像素的统一偏移量T2，T1的取值应在[T1，min，T1，max]范围内、T2的取值应在[T2，min，T2，max]范围内，并且T1与T2不相等，其中：
Figure BDA0001426208560000081
Figure BDA0001426208560000091
Figure BDA0001426208560000092
Figure BDA0001426208560000093
举例而言，T1的计算方法：
T1＝(2×((FaceWidth+1)/2-x′1，A/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000094
其中，TAi＝(2×((FaceWidth+1)/2-x′1，i))/(FaceWidth+1)，
但也不限上述两种方法。
举例而言，T2的计算方法：
T2＝(2×((FaceWidth+1)/2-x′2，B/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000095
TBj＝(2×((FaceWidth+1)/2-x′2，j))/(FaceWidth+1)，
但也不限上述两种方法。
考虑到能够获取的参考像素的位置存在有限精度的限制，T1与T2均可按照指定的亚像素精度进行近似得到近似的重建像素偏移量T1a和T2a,具体的近似方法与实施例1中一样，不再赘述。两组被预测像素在组内均使用统一的偏移量，提高了预测像素生成的可并行度；两组被预测像素之间使用的是不同的偏移量，又保证了帧内预测的准确度。
第三步，计算上述第一组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pi＝x′1，i+T1，a，i＝0，1，…，A-1；
计算上述第二组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pj＝x′2，j+T2，a，j＝0，1，…，B-1。
第四步，将投影面2中位置为(Pi，-0.5)(i＝0,1,…,A-1)的像素的值拷贝作为上述第一组被预测像素的预测值；将投影面2中位置为(Pj，-0.5)(j＝0,1,…,B-1)的像素的值拷贝作为上述第二组被预测像素的预测值。上述被拷贝像素均位于最靠近投影面1和投影面2的公共边的一行像素中。
实施例4
本实施例结合图3、图4和图2c，并以当前预测像素位于投影面1、参考像素位于投影面2为例来进行具体地说明帧内预测像素生成装置。
第一计算单元，根据当前被预测像素在投影面1中的位置(x1,y1)和当前被预测像素所在块的帧内预测模式，按照方向性预测方式得到该被预测像素所对应的重建像素的位置(x2,-0.5)。
第二计算单元，由于当前被预测像素在投影面1中而参考像素在投影面2中，所以x2尚不能作为参考像素的坐标位置，而需要进行偏移。由第一步中得到的x2，根据相邻面像素的投影关系计算重建像素偏移量T：
T＝(2×((FaceWidth+1)/2-x2))/(FaceWidth+1)
其中FaceWidth为投影面2上沿投影面2和投影面1公共边界方向的采样点数目。
在第二计算单元之后，可以增加近似单元对偏移量T按照指定精度进行近似。由于能够获取的参考像素的位置存在有限精度的限制，偏移量T也按照指定的亚像素精度进行精度控制得到满足亚像素精度要求的近似的重建像素偏移量Ta，即Ta＝round(T,指定的亚像素精度)。比如指定的亚像素精度为1/32像素，偏移量T可以按照如下两种方式之一进行1/32精度的近似：
(1)Ta＝floor(T×32)/32；其中floor函数为向下取整函数；
(2)Ta＝ceil(T×32)/32；其中ceil函数为向上取整函数；
又比如指定的亚像素精度为1/64像素，偏移量T可以按照如下两种方式之一进行1/64精度的近似：
(1)Ta＝floor(T×64)/64；其中floor函数为向下取整函数；
(2)Ta＝ceil(T×64)/64；其中ceil函数为向上取整函数。
偏移量T还可以按照其他的近似方法进行上述亚像素精度的近似，也可以根据其它的亚像素精度要求进行相应的近似。
另外，为了简化计算过程，对于一种特定的FaceWidth，Ta还可以通过查表的方式获得：以x2为索引变量，查索引表得到Ta。其中索引表中x2对应项的值为round((2×((FaceWidth+1)/2-x2))/(FaceWidth+1),指定的亚像素精度)是事先计算好的。
偏移单元，由第一计算单元得到的x2和近似单元得到的Ta，计算当前被预测像素对应的参考像素在投影面2中的位置的x分量：
xn＝x2+Ta
拷贝单元，紧接于偏移单元之后。将投影面2中位置为(xn，-0.5)的像素的值拷贝作为当前被预测像素的预测值。上述被拷贝像素位于最靠近投影面2的公共边的一行像素中。
实施例5
本实施例结合图6、图8和图2c并以当前预测像素位于投影面1、参考像素位于投影面2为例来进行具体地说明帧内预测像素生成装置。
第一计算单元，在投影面1中存在同一列A个连续的被预测像素，此为第一组被预测像素，其位置为(x1,i，y1)(i＝0,1,…,A-1)。根据第一组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第一组被预测像素所对应的重建像素位置(x′1，i，-0.5)。A的取值应为大于1的自然数，例如A为4、或8、或16等。在投影面1中的同一列中还存在不同于上述被预测像素的另外B个连续的被预测像素，此为第二组被预测像素，其位置为(x2,j，y1)(j＝0,1,…,B-1)，按照第二组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第二组被预测像素所对应的重建像素位置(x′2，j，-0.5)。B的取值应为大于1的自然数，例如B为4、或8、或16等。
第二计算单元，确定第一组被预测像素的统一偏移量T1和第二组被预测像素的统一偏移量T2，T1的取值应在[T1，min，T1，max]范围内、T2的取值应在[T2，min，T2，max]范围内，并且T1与T2不相等，其中：
Figure BDA0001426208560000111
Figure BDA0001426208560000121
Figure BDA0001426208560000122
Figure BDA0001426208560000123
举例而言，T1的计算方法：
T1＝(2×((FaceWidth+1)/2-x′1，A/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000124
其中，TAi＝(2×((FaceWidth+1)/2-x′1，i))/(FaceWidth+1)，
但也不限上述两种方法。
举例而言，T2的计算方法：
T2＝(2×((FaceWidth+1)/2-x′2，B/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000125
TBj＝(2×((FaceWidth+1)/2-x′2，j))/(FaceWidth+1)，
但也不限上述两种方法。
在第二计算单元之后，可以增加近似单元对偏移量T1和T2按照指定精度进行近似。考虑到能够获取的参考像素的位置存在有限精度的限制，T1与T2均可按照指定的亚像素精度进行近似得到近似的重建像素偏移量T1a和T2a,具体的近似方法与实施例1中一样，不再赘述。两组被预测像素在组内均使用统一的偏移量，提高了预测像素生成的可并行度；两组被预测像素之间使用的是不同的偏移量，又保证了帧内预测的准确度。
紧接于第二计算单元之后的是包含列等间隔偏移单元的偏移单元，用于计算上述第一组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pi＝x′1，i+T1，a，i＝0，1，…，A-1；
计算上述第二组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pj＝x′2，j+T2，a，j＝0，1，…，B-1。
拷贝单元，紧接于偏移单元之后。将投影面2中位置为(Pi，-0.5)(i＝0,1,…,A-1)的像素的值拷贝作为上述第一组被预测像素的预测值；将投影面2中位置为(Pj，-0.5)(j＝0,1,…,B-1)的像素的值拷贝作为上述第二组被预测像素的预测值。上述被拷贝像素均位于最靠近投影面1和投影面2的公共边的一行像素中。
实施例6
本实施例结合图5、图7和图2e并以当前预测像素位于投影面1、参考像素位于投影面2为例来进行具体地说明帧内预测像素生成装置。
第一计算单元，在投影面1中存在同一行A个连续的被预测像素，此为第一组被预测像素，其位置为(x1,i，y1)(i＝0,1,…,A-1)。根据第一组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第一组被预测像素所对应的重建像素位置(x′1，i，-0.5)。A的取值应为大于1的自然数，例如A为4、或8、或16等。在投影面1中的同一行中还存在不同于上述被预测像素的另外B个连续的被预测像素，此为第二组被预测像素，其位置为(x2,j，y1)(j＝0,1,…,B-1)，按照第二组被预测像素在投影面1中的位置和被预测像素所在块的帧内预测模式，按照方向性预测方式得到第二组被预测像素所对应的重建像素位置(x′2，j，-0.5)。B的取值应为大于1的自然数，例如B为4、或8、或16等。
第二计算单元，确定第一组被预测像素的统一偏移量T1和第二组被预测像素的统一偏移量T2，T1的取值应在[T1，min，T1，max]范围内、T2的取值应在[T2，min，T2，max]范围内，并且T1与T2不相等，其中：
Figure BDA0001426208560000131
Figure BDA0001426208560000132
Figure BDA0001426208560000133
Figure BDA0001426208560000134
举例而言，T1的计算方法：
T1＝(2×((FaceWidth+1)/2-x′1，A/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000141
其中，TAi＝(2×((FaceWidth+1)/2-x′1，i))/(FaceWidth+1)，
但也不限上述两种方法。
举例而言，T2的计算方法：
T2＝(2×((FaceWidth+1)/2-x′2，B/2))/(FaceWidth+1)；
或者，
Figure BDA0001426208560000142
TBj＝(2×((FaceWidth+1)/2-x′2，j))/(FaceWidth+1)，
但也不限上述两种方法。
在第二计算单元之后，可以增加近似单元对偏移量T1和T2按照指定精度进行近似。考虑到能够获取的参考像素的位置存在有限精度的限制，T1与T2均可按照指定的亚像素精度进行近似得到近似的重建像素偏移量T1a和T2a,具体的近似方法与实施例1中一样，不再赘述。两组被预测像素在组内均使用统一的偏移量，提高了预测像素生成的可并行度；两组被预测像素之间使用的是不同的偏移量，又保证了帧内预测的准确度。
紧接于第二计算单元之后的是包含行等间隔偏移单元的偏移单元，，计算上述第一组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pi＝x′1，i+T1，a，i＝0，1，…，A-1；
计算上述第二组被预测像素对应的参考像素在投影面2中的位置的x分量：
Pj＝x′2，j+T2，a，j＝0，1，…，B-1。
拷贝单元，紧接于偏移单元之后。将投影面2中位置为(Pi，-0.5)(i＝0,1,…,A-1)的像素的值拷贝作为上述第一组被预测像素的预测值；将投影面2中位置为(Pj，-0.5)(j＝0,1,…,B-1)的像素的值拷贝作为上述第二组被预测像素的预测值。上述被拷贝像素均位于最靠近投影面1和投影面2的公共边的一行像素中。

Claims (8)

1.一种帧内预测像素生成方法，其特征在于，
根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所得到的该被预测像素所对应的重建像素的位置；结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T，其中，偏移量T与FaceWidth和x2有关，其中FaceWidth为投影面2上沿投影面2和投影面1公共边界方向的采样点数目，x2为投影面1和投影面2的公共边上的坐标位置，其中待预测像素位于投影面1，参考像素位于投影面2；所述重建像素位置加上所述重建像素偏移量T作为该被预测像素的参考重建像素位置；拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
2.一种帧内预测像素生成方法，其特征在于，
根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所得到的该被预测像素所对应的重建像素的位置；结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T，其中，偏移量T与FaceWidth和x2有关，其中FaceWidth为投影面2上沿投影面2和投影面1公共边界方向的采样点数目，x2为投影面1和投影面2的公共边上的坐标位置，其中待预测像素位于投影面1，参考像素位于投影面2；对所述的重建像素偏移量T进行指定亚像素精度的精度控制得到满足指定亚像素精度要求的近似偏移量Ta；所述重建像素位置加上所述近似偏移量Ta作为所述被预测像素的参考重建像素位置；拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
3.根据权利要求1或2所述的帧内预测像素生成方法，其特征在于，所述当前块中存在同一列中A个连续的被预测像素所对应的重建像素偏移量统一为T1、在该列中还存在B个连续的被预测像素所对应的重建像素偏移量统一为T2，而且T1不等于T2，所述A和B均为大于1的自然数。
4.根据权利要求1或2所述的帧内预测像素生成方法，其特征在于，所述当前块中存在同一行中C个连续的被预测像素所对应的重建像素偏移量统一为T3、在该行中还存在D个连续的被预测像素所对应的重建像素偏移量统一为T4，而且T3不等于T4，所述C和D均为大于1的自然数。
5.一种帧内预测像素生成装置，其特征在于，包括：
第一计算单元，用于根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所得到的该被预测像素所对应的重建像素的位置；
第二计算单元，位于第一计算单元之后，用于结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T’，其中，偏移量T’与FaceWidth和x2有关，其中FaceWidth为投影面2上沿投影面2和投影面1公共边界方向的采样点数目，x2为投影面1和投影面2的公共边上的坐标位置，其中待预测像素位于投影面1，参考像素位于投影面2；
偏移单元，位于第二计算单元之后，用于所述重建像素位置加上所述重建像素偏移量T’作为该被预测像素的参考重建像素位置；
拷贝单元，位于偏移单元之后，用于拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
6.一种帧内预测像素生成装置，其特征在于，包括：
第一计算单元，用于根据当前块采用的帧内方向性预测模式和该块中当前被预测像素的位置，确定该被预测像素按照方向性预测方式所得到的该被预测像素所对应的重建像素的位置；
第二计算单元，位于第一计算单元之后，用于结合上述重建像素位置，再计算得到该被预测像素所对应的重建像素偏移量T’，其中，偏移量T’与FaceWidth和x2有关，其中FaceWidth为投影面2上沿投影面2和投影面1公共边界方向的采样点数目，x2为投影面1和投影面2的公共边上的坐标位置，其中待预测像素位于投影面1，参考像素位于投影面2；
近似单元，位于第二计算单元之后，用于对所述的重建像素偏移量T’进行指定亚像素精度的精度控制得到满足指定亚像素精度要求的近似偏移量Ta’；
偏移单元，位于近似单元之后，用于所述重建像素位置加上所述近似偏移量Ta’作为所述被预测像素的参考重建像素位置；
拷贝单元，位于偏移单元之后，用于拷贝上述参考重建像素位置的像素值作为所述被预测像素的预测值。
7.根据权利要求5或6所述的帧内预测像素生成装置，其特征在于包括列等间隔偏移单元，位于偏移单元之内，用于所述当前块中存在同一列中E个连续的被预测像素所对应的重建像素偏移量统一为T1’、在该列中还存在F个连续的预测像素所对应的重建像素偏移量统一为T2’，而且T1’不等于T2’，所述E和F均为大于1的自然数。
8.根据权利要求5或6所述的帧内预测像素生成装置，其特征在于包括行等间隔偏移单元，位于偏移单元之内，用于所述当前块中存在同一行中G个连续的被预测像素所对应的重建像素偏移量统一为T3’、在该行中还存在H个连续的预测像素所对应的重建像素偏移量统一为T4’，而且T3’不等于T4’，所述G和H均为大于1的自然数。
CN201710918918.8A 2017-01-20 2017-09-30 一种帧内预测像素生成方法和装置 Active CN108337513B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2017100415395 2017-01-20
CN201710041539 2017-01-20

Publications (2)

Publication Number Publication Date
CN108337513A CN108337513A (zh) 2018-07-27
CN108337513B true CN108337513B (zh) 2021-07-23

Family

ID=62922405

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710918918.8A Active CN108337513B (zh) 2017-01-20 2017-09-30 一种帧内预测像素生成方法和装置

Country Status (1)

Country Link
CN (1) CN108337513B (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100568978C (zh) * 2006-12-04 2009-12-09 中兴通讯股份有限公司 一种帧间与帧内编码模式的选择方法
KR101117000B1 (ko) * 2009-04-08 2012-03-16 한국전자통신연구원 화면 내 예측 오프셋을 이용한 부호화/복호화 방법 및 그 장치
JP5321426B2 (ja) * 2009-11-26 2013-10-23 株式会社Ｊｖｃケンウッド 画像符号化装置、画像復号化装置、画像符号化方法、及び画像復号化方法
CN101827270B (zh) * 2009-12-16 2011-12-14 香港应用科技研究院有限公司 一种帧内预测中获取像素预测值的方法
CN105681809B (zh) * 2016-02-18 2019-05-21 北京大学 针对双前向预测单元的运动补偿方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Efficient Multiple Line-Based Intra Prediction for HEVC;Jiahao Li,etc;《IEEE》;20161129;第III部分第A节，图5 *

Also Published As

Publication number Publication date
CN108337513A (zh) 2018-07-27

Similar Documents

Publication Publication Date Title
TWI650996B (zh) 視頻編碼或解碼方法及裝置
CN114143550B (zh) 图像数据编码/解码方法和计算机可读记录介质
KR102334151B1 (ko) 이미지 예측 방법 및 관련 장치
CN114245123B (zh) 图像数据编码/解码方法、介质和发送比特流的方法
CN101068353B (zh) 图形处理单元与计算巨图块的绝对差值加总值的方法
CN116248875A (zh) 球面投影运动估计/补偿和模式决策
CN108476322A (zh) 用于球面图像和立方体图像的帧间预测的装置
WO2018035721A1 (en) System and method for improving efficiency in encoding/decoding a curved view video
CN115802059A (zh) 图像编码/解码方法和计算机可读记录介质
JP2019534600A (ja) 適応型イントラ最確モードを用いた全方位映像符号化のための方法および装置
JP2002506585A (ja) マスクおよび丸め平均値を使用したオブジェクトベースの符号化システムのためのスプライト生成に関する方法
JP7457861B2 (ja) 画像データ符号化／復号化方法及び装置
KR102243215B1 (ko) 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
CN108449599A (zh) 一种基于面透射变换的视频编码与解码方法
CN108337513B (zh) 一种帧内预测像素生成方法和装置
Sanchez et al. DPCM-based edge prediction for lossless screen content coding in HEVC
EP2729917A1 (en) Multi-mode processing of texture blocks
US11240512B2 (en) Intra-prediction for video coding using perspective information
JP6487671B2 (ja) 画像処理装置、画像処理方法。およびプログラム
US20090051679A1 (en) Local motion estimation using four-corner transforms
CN115004703A (zh) 图像和视频压缩的帧内预测
Petňík et al. Improvements of MPEG-4 standard FAMC for efficient 3D animation compression
KR102589867B1 (ko) 플랜옵틱 포인트 클라우드 생성 방법 및 장치
US20240161380A1 (en) Mpi layer geometry generation method using pixel ray crossing
CN107592539B (zh) 一种视频编码方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant