CN112565754B - 基于ibc模式变换、编码方法、装置、电子设备及存储介质 - Google Patents

基于ibc模式变换、编码方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112565754B
CN112565754B CN202011419551.3A CN202011419551A CN112565754B CN 112565754 B CN112565754 B CN 112565754B CN 202011419551 A CN202011419551 A CN 202011419551A CN 112565754 B CN112565754 B CN 112565754B
Authority
CN
China
Prior art keywords
transformation
current block
transform
block
discrete cosine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011419551.3A
Other languages
English (en)
Other versions
CN112565754A (zh
Inventor
江东
洪珠
陈秀丽
林聚财
殷俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202211275942.1A priority Critical patent/CN115633172A/zh
Priority to CN202011419551.3A priority patent/CN112565754B/zh
Publication of CN112565754A publication Critical patent/CN112565754A/zh
Priority to PCT/CN2021/135868 priority patent/WO2022117114A1/en
Priority to EP21900136.9A priority patent/EP4205391A4/en
Application granted granted Critical
Publication of CN112565754B publication Critical patent/CN112565754B/zh
Priority to US18/320,167 priority patent/US20230291901A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本发明提供一种基于IBC模式的变换、编码方法、装置、电子设备以及存储介质，方法包括：采用多种变换方法对当前块进行变换，当前块采用帧内块复制，变换方法包括一次变换和/或二次变换和/或子块变换；选择代价最小的变换方法作为当前块的最终变换方法。以此提高IBC模式下的压缩率。

Description

基于IBC模式变换、编码方法、装置、电子设备及存储介质
技术领域
本发明涉及视频编码技术领域，特别是涉及一种基于IBC模式变换、编码方法、装置、电子设备及存储介质。
背景技术
现有的IBC(Intra Block Copy，帧内块复制)模式下的变换方法为：判断当前块是否满足隐式跳过变换的条件，若满足，则遍历行列均做离散余弦变换的情况和隐式跳过变换的情况，选择代价最小的变换类型；若不满足隐式跳过变换的条件，则只对当前块进行行列均做离散余弦变换的情况。
其只考虑了离散余弦变换的情况和隐式跳过变换的情况，影响了IBC模式下的编码的压缩率。
发明内容
本发明提供一种基于IBC模式变换、编码方法、装置、电子设备及存储介质，其能够提高IBC模式下的编码的压缩率。
为解决上述技术问题，本发明提供的第一个技术方案为：提供一种基于IBC模式的变换方法，包括：采用多种变换方法对当前块进行变换，当前块采用帧内块复制，变换方法包括一次变换和/或二次变换和/或子块变换；选择代价最小的变换方法作为当前块的最终变换方法。
其中，采用多种变换方法对当前块进行变换包括：判断当前块是否满足二次变换的条件；若满足，则对当前块离散余弦变换；对离散余弦变换后的系数进行第二次变换。
其中，对所述离散余弦变换后的系数进行第二次变换包括：判断所述当前块在水平方向的块矢量是否为0；若否，则对所述当前块进行水平方向的所述离散余弦变换后的系数进行所述第二次变换；和/或判断所述当前块在垂直方向的块矢量是否为0；若否，则对所述当前块垂直方向的所述离散余弦变换后的系数进行所述第二次变换。
其中，选择代价最小的变换方法作为当前块的最终变换方法之前还包括：比较离散余弦变换的代价以及第二次变换的代价。
其中，所述采用多种变换方法对当前块进行变换包括：判断所述当前块是否满足隐式跳过变换的条件；若满足，则对所述当前块进行所述隐式跳过变换，以及对所述当前块进行离散余弦变换。
其中，选择代价最小的变换方法作为当前块的最终变换方法之前还包括：比较所述隐式跳过变换的代价以及所述离散余弦变换的代价。
其中，采用多种变换方法对当前块进行变换包括：判断所述当前块是否满足隐式跳过变换的条件；若满足，则对所述当前块采用隐式变换跳过，以及对所述当前块进行离散余弦变换；判断所述当前块是否满足子块变换的条件；若满足，则对所述当前块采用所述子块变换。
其中，选择代价最小的变换方法作为当前块的最终变换方法之前还包括：比较所述隐式跳过变换、所述离散余弦变换以及所述子块变换的代价。
其中，选择代价最小的变换方法作为当前块的最终变换方法之后还包括：将最终变换后的系数量化编码，最终变换方法对应的句法元素也编码进码流。
为解决上述技术问题，本发明提供的第二个技术方案为：提供一种基于IBC模式的变换装置，包括：变换模块，用于采用多种变换方法对当前块进行变换，当前块采用帧内块复制，变换方法包括一次变换和/或二次变换和/或子块变换；选择模块，用于选择代价最小的变换方法作为当前块的最终变换方法。
为解决上述技术问题，本发明提供的第三个技术方案为：提供一种基于IBC模式的编码方法，包括：计算当前块的残差；对残差进行编码，以得到当前块的码流。
其中，码流包括句法元素，句法元素中包括跳过残差模式的标记；标记用于表示当前块是否采用跳过残差模式。
为解决上述技术问题，本发明提供的第四个技术方案为：提供一种基于IBC模式的编码装置，包括：残差计算模块，用于计算当前块的残差；编码模块，用于对残差进行编码，以得到当前块的码流。
为解决上述技术问题，本发明提供的第五个技术方案为：提供一种电子设备，电子设备包括处理器、与处理器连接的存储器，其中，存储器存储有程序指令；处理器用于执行存储器存储的程序指令以实现上述任一项的方法。
为解决上述技术问题，本发明提供的第六个技术方案为：提供一种计算机可读存储介质，存储介质存储有程序指令，程序指令被执行时实现上述任一项的方法。
本发明的有益效果，区别于现有技术，本发明通过利用多种变换方法对当前块进行变换，变换方法包括一次变换和/或二次变换和/或子块变换；选择代价最小的变换方法作为当前块的最终变换方法。以此能够提高IBC模式下的编码的压缩率。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图，其中：
图1为本发明基于IBC模式的变换方法的第一实施例的流程示意图；
图2为本发明基于IBC模式的变换方法的第二实施例的流程示意图；
图3为本发明基于IBC模式的变换方法的第三实施例的流程示意图；
图4为本发明基于IBC模式的变换方法的第四实施例的流程示意图；
图5为本发明基于IBC模式的变换装置的第一实施例的结构示意图；
图6为本发明基于IBC模式的编码方法的一实施例的流程示意图；
图7为本发明基于IBC模式的编码装置的一实施例的流程示意图；
图8是本发明电子设备的一实施例的结构示意图；
图9是本发明计算机可读存储介质的结构示意图。
具体实施方法
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请的一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
下面结合附图和实施例对本发明进行详细的说明。
请参见图1，为本发明基于IBC模式的变换方法的第一实施例的流程示意图，包括：
步骤S11：采用多种变换方法对当前块进行变换，当前块采用帧内块复制，变换方法包括一次变换和/或二次变换和/或子块变换。
具体的，现有技术中，IBC(Intra Block Copy，帧内块复制)只考虑到离散余弦变换和隐式跳过变换，从中选择代价最小的变换类型，再进行编码。其考虑范围较小，变换核较少，一定程度上影响了IBC模式下的编码压缩率。
本申请在IBC模式的编码技术中，引入二次变换和/或子块变换，引入更多的变换核，丰富IBC模式的变换类型，以进一步提高IBC模式下的编码压缩率。
步骤S12：选择代价最小的变换方法作为当前块的最终变换方法。
具体的，从现有的变换类型以及引入的变换类型中，选择代价最小的变换方法最为当前块的最终变换方法。本申请引入了更多的变换核，丰富IBC模式的变换类型，以进一步提高IBC模式下的编码压缩率。
请参见图2，为本发明提供的一种基于IBC模式的变换方法的第二实施例的流程示意图，其采用了二次变换的方法进行变换，具体的，包括：
步骤S21：判断当前块是否满足二次变换的条件。
具体地，二次变换是帧内预测模式下，针对亮度块的变换方法，主要内容是在对残差进行一次变换后，并且一次变换类型不是隐式变换方法。再对一次变换后的左上角4*4变换块进行第二次变换。
步骤S22：对当前块采用离散余弦变换。
具体的，当前块满足二次变换的条件时，对当前块采用离散余弦变换。在一实施例中，离散余弦变换需要对当前块的水平方向以及垂直方向均进行变换。
离散余弦变换(Discrete Cosine Transform，DCT)包括DCT1～DCT8。在一具体实施例中，第一次离散余弦变换为DCT2，即对当前块的水平方向以及垂直方向进行DCT2变换。
步骤S23：对离散余弦变换后的系数进行第二次变换。
具体的，以离散余弦变换为DCT2为例，对DCT2变换后的系数进行第二次变换，其中第二次变换的矩阵可通过第一次离散余弦变换推到得出。即本实施例的二次变换中的第一次变换是采用DCT2对当前块进行第一次变换；然后采用二次变换矩阵对第一次变换后的系数进行第二次变换。
具体的，在进行第二次变换时，进一步判断当前块在水平方向的块矢量BV[x]是否为0；若不为0，则对当前块进行水平方向二次变换。判断当前块在垂直方向的块矢量BV[y]是否为0；若不为0，则对当前块进行垂直方向二次变换。其中，若当前块在水平方向的块矢量BV[x]不为0，并且当前块在垂直方向的块矢量BV[y]也不为0，则当前块水平方向和垂直方向的二次变换均做。其中，二次变换矩阵通过一次变化矩阵推导而来。
步骤S24：比较离散余弦变换的代价以及第二次变换的代价。
具体的，比较离散余弦变换例如采用DCT2对当前块进行第一次变换的代价，和采用二次变换矩阵对第一次变换后的系数进行第二次变换的代价。从中选择代价最小的变换方法作为当前块的最终变换方法。
步骤S25：选择代价最小的变换方法作为当前块的最终变换方法。
具体的，若采用离散余弦变换方法，例如DCT2对当前块进行第一次变换的代价，小于采用二次变换矩阵对第一次变换后的系数进行第二次变换的代价，则离散余弦变换方法，例如DCT2对当前块进行一次变换即为当前块的最终变换方法。
若采用二次变换矩阵对第一次变换后的系数进行第二次变换的代价，小于采用离散余弦变换对当前块进行第一次变换的代价，则二次变换方法作为当前块的最终变换方法。
步骤S26：仅对当前块进行一次离散余弦变换。
具体的，若当前块不符合二次变换的条件时，则仅对当前块的水平方向以及垂直方向进行一次离散余弦变换。其中离散余弦变换可以为DCT2。在另一实施例中，若当前块不符合二次变换的条件时还可以进一步判断当前块是否符合隐式跳过变换的条件，具体请参见图3。图3为本发明提供的一种基于IBC模式的变换方法的第三实施例的流程示意图，具体包括：
步骤S31：判断当前块是否满足隐式跳过变换的条件。
具体的，当残差执行隐式跳过变换(Implicit selection of transform skip，ISTS)时，不对残差进行变换，直接将残差进行移位缩放，再进行量化熵编码等操作。判断当前块是否满足隐式变换条件。
步骤S32：若满足，则对当前块进行隐式跳过变换，以及对当前块进行离散余弦变换。
具体的，本实施例中，若当前块满足隐式跳过变换的条件，则对当前块进行隐式跳过变换，以及对进行离散余弦变换。
步骤S33：比较隐式跳过变换的代价以及离散余弦变换的代价具体的，将ISTS的代价与DCT2的代价进行比较。
步骤S34：选择代价最小的变换方法作为当前块的最终变换方法。
具体的，若利用ISTS的代价小于利用DCT2对当前块的水平方向以及垂直方向进行变换的代价，则ISTS为当前块的最终变换方法。若利用DCT2对当前块的水平方向以及垂直方向进行变换的代价，小于用ISTS的代价，则DCT2为当前块的最终变换方法。
步骤S35：仅对当前进行一次离散余弦变换。
具体的，若当前块不满足隐式跳过变换的条件时，则仅对当前块的水平方向以及垂直方向进行一次DCT2变换。
本申请提供的基于IBC模式的变换方法，其引入了二次变换，在当前块符合二次变换的条件时，则对当前块进行二次变换，比较一次变换以及二次变换的代价，其引入了更多地变换核，由于不同的变换核对不同内容的能量聚集能力的不同，更多地变换核的引入，能够得到代价更低的变换方法，能进一步提升IBC编码的压缩率。
请参见图4，为本发明提供的一种基于IBC模式的变换方法的第四实施例的流程示意图，本申请的方法引入了子块变换，具体包括：
步骤S41：判断当前块是否满足隐式跳过变换的条件。
步骤S42：对所述当前块采用隐式变换跳过，以及对所述当前块进行离散余弦变换。
若当前块满足隐式跳过变换的条件，则对当前块进行离散余弦变换，以及对当前块进行隐式跳过变换。
步骤S43：判断当前块是否满足子块变换的条件。
进一步判断当前块是否满足子块变换的条件。子块变换(Sub-BlockTransform，SBT)是帧间预测模式下的一种变换类型，其主要内容是将残差划分为两个子块，其中一个子块的残差默认为0，另一个子块的残差默认不为0，只对含有残差的这个子块进行变换操作。其中，非0残差子块的大小和位置总共有8种选择(在码流中传输这些信息)，非0残差子块的变换按照子块的位置自适应选择DCT8或者DST7变换作为水平变换和垂直变换。
步骤S44：对当前块进行子块变换。
具体的，利用子块变换的方法对当前块的子块进行变换。
步骤S45：比较隐式跳过变换、离散余弦变换以及子块变换的代价。
具体的，比较隐式跳过变换、离散余弦变换以及子块变换的代价，选择其中代价最小的变换方法作为当前块的最终变换方法。
步骤S46：选择代价最小的变换方法作为当前块的最终变换方法。
具体的，若隐式跳过变换的代价，小于离散余弦变换的代价以及子块变换的代价，则隐式跳过变换作为当前块的最终变换方法。若离散余弦变换的代价，小于隐式跳过变换的代价以及子块变换的代价，则离散余弦变换作为当前块的最终变换方法。若子块变换的代价，小于离散余弦变换的代价以及隐式跳过变换的代价，则子块变换作为当前块的最终变换方法。
步骤S47：仅对当前块进行一次离散余弦变换。
具体的，若当前块不满足隐式跳过变换的条件，则仅对当前块的水平方向以及垂直方向进行一次离散余弦变换，然后将其变换的代价与子块变换的代价进行比较。
本实施所示的变换方法，将存在于帧间预测模式的SBT引入到IBC模式中，能进一步提升IBC模式下编码的压缩率。
在本申请的变换方法中，在选取了代价最低的变换方法作为最终变换方法后，基于最终变换方法对当前块进行编码，以得到当前块的码流，码流中包括句法元素，句法元素包括最终变换方法。具体的，句法元素中表明本次编码时所用的各种信息，具体包括本次编码时所用的变换方法，以便于解码端对码流进行解码。具体的，若最终变换方法为子块变换，则将子块变换对应的句法元素编码到码流中。若最终变换方法为二次变换，则将二次变换对应的句法元素编码到码流中。
请参见图5，为本发明提供的一种基于IBC模式的变换装置，包括：变换模块51以及选择模块52。
其中，变换模块51用于采用多种变换方法对当前块进行变换，当前块采用帧内块复制，变换方法包括一次变换和/或二次变换和/或子块变换。选择模块52用于选择代价最小的变换方法作为当前块的最终变换方法。
在一实施例中，变换模块51用于判断当前块是否满足二次变换的条件；若满足，则对当前块进行离散余弦变换；对离散余弦变换后的系数进行第二次变换。若不满足，则仅对当前块进行一次离散余弦变换。比较模块52用于比较离散余弦变换的代价以及第二次变换的代价，选择代价最小的变换方法作为当前块的最终变换方法。
在另一实施例中，变换模块51用于判断当前块是否满足隐式跳过变换的条件，若满足，则对当前块进行隐式跳过变换，以及对当前块进行离散余弦变换。若不满足，则仅对当前块进行一次离散余弦变换。选择模块52用于比较隐式跳过变换后的代价以及离散余弦变换后的代价，选择代价最小的变换方法作为当前块的最终变换方法。
在另一实施例中，变换模块51用于判断当前块是否满足隐式跳过变换的条件，若满足，则对当前块进行隐式跳过变换，以及对当前块进行离散余弦变换。若不满足，则仅对当前块进行一次离散余弦变换。变换模块51还用于判断当前块是否满足子块变换的条件，若满足，则当前块进行子块变换，若不满足，则仅对当前块进行一次离散余弦变换。选择模块52用于比较隐式跳过变换、离散余弦变换以及子块变换的代价。选择代价最小的变换方法作为当前块的最终变换方法。
请参见图6，为本发明提供的一种基于IBC模式的编码方法的流程示意图，具体的，包括：
步骤S61：计算当前块的残差。
具体的，计算当前块的残差，IBC是一种帧内预测模式，通过帧内预测得到预测值，实际值减去预测值得到残差。
步骤S62：对残差进行编码，以得到当前块的码流。
对当前块的残差进行编码，以得到当前块的码流。具体的，本实施例的方法，其引入跳过残差的模式，对残差不进行变换、量化和熵编码，重建值即为预测值。预测值的获取可以采用差值的方式来获取，也可以直接为当前块的运动信息指向的重建块。
具体的，在本实施例所示的方法中，码流包括句法元素，句法元素中包括跳过残差模式的标记，标记用于表示当前块在解码端不进行滤波。具体的，用ism_flag作为句法元素，若ism_flag为0表示采用IBC模式现有的变换方式；如果ism_flag为1表示采用跳过残差模式，并且该块不进行环路滤波。
本实施例所示的方法，引入了残差跳过模式，对一些屏幕序列有较大的好处，同时能够降低解码器的复杂度，并且一定程度上提升IBC模式编码的压缩率。
请参见图7，为本发明提供的一种基于IBC模式的编码装置，其特征在于，包括：残差计算模块71以及编码模块72。其中，残差计算模块71用于计算当前块的残差。编码模块72用于对残差进行编码，以得到当前块的码流。
本实施例所示的装置，引入了残差跳过模式，对一些屏幕序列有较大的好处，同时能够降低解码器的复杂度，并且一定程度上提升IBC模式编码的压缩率。
本申请的方法应用于屏幕内容，例如计算机产生的图像，也可以应用于自然图像和混合图像。
请参见图8，为本发明电子设备的一实施例的结构示意图。电子设备包括相互连接的存储器82和处理器81。
存储器82用于存储实现上述任意一项的方法的程序指令。
处理器81用于执行存储器82存储的程序指令。
其中，处理器81还可以称为CPU(Central Processing Unit，中央处理单元)。处理器81可能是一种集成电路芯片，具有信号的处理能力。处理器81还可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器82可以为内存条、TF卡等，可以存储电子设备中全部信息，包括输入的原始数据、计算机程序、中间运行结果和最终运行结果都保存在存储器中。它根据控制器指定的位置存入和取出信息。有了存储器，电子设备才有记忆功能，才能保证正常工作。电子设备的存储器按用途存储器可分为主存储器(内存)和辅助存储器(外存)，也有分为外部存储器和内部存储器的分类方法。外存通常是磁性介质或光盘等，能长期保存信息。内存指主板上的存储部件，用来存放当前正在执行的数据和程序，但仅用于暂时存放程序和数据，关闭电源或断电，数据会丢失。
在本申请所提供的几个实施例中，应该理解到，所揭露的方法和装置，可以通过其它的方法实现。例如，以上所描述的装置实施方法仅仅是示意性的，例如，模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方法，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施方法方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，系统服务器，或者网络设备等)或处理器(processor)执行本申请各个实施方法的全部或部分步骤。
请参阅图9，为本发明计算机可读存储介质的结构示意图。本申请的存储介质存储有能够实现上述所有方法的程序文件91，其中，该程序文件91可以以软件产品的形式存储在上述存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施方法的全部或部分步骤。而前述的存储装置包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质，或者是计算机、服务器、手机、平板等终端设备。
以上仅为本发明的实施方法，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于IBC模式的变换方法，其特征在于，包括：
采用多种变换方法对当前块进行变换，所述当前块采用帧内块复制，所述变换方法包括一次变换和/或二次变换和／或子块变换；
选择代价最小的变换方法作为所述当前块的最终变换方法；
其中，所述采用多种变换方法对当前块进行变换包括：
判断所述当前块是否满足二次变换的条件；
若满足，则对所述当前块采用离散余弦变换；
对所述离散余弦变换后的系数进行第二次变换；
其中，所述对所述离散余弦变换后的系数进行第二次变换包括：
判断所述当前块在水平方向的块矢量是否为0；
若否，则对所述当前块进行水平方向的所述离散余弦变换后的系数进行所述第二次变换；和/或
判断所述当前块在垂直方向的块矢量是否为0；
若否，则对所述当前块垂直方向的所述离散余弦变换后的系数进行所述第二次变换。
2.根据权利要求1所述的方法，其特征在于，所述选择代价最小的变换方法作为所述当前块的最终变换方法之前还包括：
比较所述离散余弦变换的代价以及所述第二次变换的代价。
3.根据权利要求1所述的方法，其特征在于，所述采用多种变换方法对当前块进行变换包括：
判断所述当前块是否满足隐式跳过变换的条件；
若满足，则对所述当前块进行所述隐式跳过变换，以及对所述当前块进行离散余弦变换。
4.根据权利要求3所述的方法，其特征在于，所述选择代价最小的变换方法作为所述当前块的最终变换方法之前还包括：
比较所述隐式跳过变换的代价以及所述离散余弦变换的代价。
5.根据权利要求1或4所述的方法，其特征在于，所述采用多种变换方法对当前块进行变换包括：
判断所述当前块是否满足隐式跳过变换的条件；
若满足，则对所述当前块采用隐式变换跳过，以及对所述当前块进行离散余弦变换；
判断所述当前块是否满足子块变换的条件；
若满足，则对所述当前块采用所述子块变换。
6.根据权利要求5所述的方法，其特征在于，所述选择代价最小的变换方法作为所述当前块的最终变换方法之前还包括：
比较所述隐式跳过变换、所述离散余弦变换以及所述子块变换的代价。
7.根据权利要求1所述的方法，其特征在于，所述选择代价最小的变换方法作为所述当前块的最终变换方法之后还包括：
将最终变换后的系数量化编码，最终变换方法对应的句法元素也编码进码流。
8.一种基于IBC模式的变换装置，其特征在于，包括：
变换模块，用于采用多种变换方法对当前块进行变换，所述当前块采用帧内块复制，所述变换方法包括一次变换和/或二次变换和／或子块变换；
选择模块，用于选择代价最小的变换方法作为所述当前块的最终变换方法；
所述变换模块还用于判断所述当前块是否满足二次变换的条件；
若满足，则对所述当前块采用离散余弦变换；
对所述离散余弦变换后的系数进行第二次变换；
其中，所述对所述离散余弦变换后的系数进行第二次变换包括：
判断所述当前块在水平方向的块矢量是否为0；
若否，则对所述当前块进行水平方向的所述离散余弦变换后的系数进行所述第二次变换；和/或
判断所述当前块在垂直方向的块矢量是否为0；
若否，则对所述当前块垂直方向的所述离散余弦变换后的系数进行所述第二次变换。
9.一种电子设备，其特征在于，所述电子设备包括处理器、与所述处理器连接的存储器，其中，
所述存储器存储有程序指令；
所述处理器用于执行所述存储器存储的程序指令以实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述存储介质存储有程序指令，所述程序指令被执行时实现如权利要求1-7中任一项所述的方法。
CN202011419551.3A 2020-12-06 2020-12-06 基于ibc模式变换、编码方法、装置、电子设备及存储介质 Active CN112565754B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN202211275942.1A CN115633172A (zh) 2020-12-06 2020-12-06 基于ibc模式编码方法、电子设备及存储介质
CN202011419551.3A CN112565754B (zh) 2020-12-06 2020-12-06 基于ibc模式变换、编码方法、装置、电子设备及存储介质
PCT/CN2021/135868 WO2022117114A1 (en) 2020-12-06 2021-12-06 Systems and methods for transformation based on an intra block copy (ibc) mode
EP21900136.9A EP4205391A4 (en) 2020-12-06 2021-12-06 SYSTEMS AND METHODS FOR TRANSFORMATION BASED ON AN INTRABLOCK COPY MODE
US18/320,167 US20230291901A1 (en) 2020-12-06 2023-05-18 Systems and methods for transformation based on an intra block copy (ibc) mode

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011419551.3A CN112565754B (zh) 2020-12-06 2020-12-06 基于ibc模式变换、编码方法、装置、电子设备及存储介质

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202211275942.1A Division CN115633172A (zh) 2020-12-06 2020-12-06 基于ibc模式编码方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112565754A CN112565754A (zh) 2021-03-26
CN112565754B true CN112565754B (zh) 2022-11-11

Family

ID=75059313

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202011419551.3A Active CN112565754B (zh) 2020-12-06 2020-12-06 基于ibc模式变换、编码方法、装置、电子设备及存储介质
CN202211275942.1A Pending CN115633172A (zh) 2020-12-06 2020-12-06 基于ibc模式编码方法、电子设备及存储介质

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202211275942.1A Pending CN115633172A (zh) 2020-12-06 2020-12-06 基于ibc模式编码方法、电子设备及存储介质

Country Status (4)

Country Link
US (1) US20230291901A1 (zh)
EP (1) EP4205391A4 (zh)
CN (2) CN112565754B (zh)
WO (1) WO2022117114A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112565754B (zh) * 2020-12-06 2022-11-11 浙江大华技术股份有限公司 基于ibc模式变换、编码方法、装置、电子设备及存储介质
WO2024174979A1 (en) * 2023-02-20 2024-08-29 Douyin Vision Co., Ltd. Transform for intra block copy
CN118646866A (zh) * 2023-03-13 2024-09-13 华为技术有限公司 编解码方法及电子设备
CN117880532B (zh) * 2024-01-15 2024-10-11 重庆邮电大学 一种基于vvc的屏幕内容快速模式决策方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109417636A (zh) * 2016-06-24 2019-03-01 韩国电子通信研究院 用于基于变换的图像编码/解码的方法和设备
CN110636313A (zh) * 2019-09-18 2019-12-31 浙江大华技术股份有限公司 变换、二次变换矩阵训练方法、编码器及相关装置
CN111699694A (zh) * 2019-01-15 2020-09-22 Lg电子株式会社 使用变换跳变标志的图像编码方法和装置
WO2020223612A1 (en) * 2019-05-02 2020-11-05 Bytedance Inc. Signaling in transform skip mode
TW202044839A (zh) * 2019-04-19 2020-12-01 美商高通公司 用於視訊寫碼之區塊內複製合併資料語法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MX361228B (es) * 2014-03-04 2018-11-29 Microsoft Technology Licensing Llc Inversión de bloque y modo de omisión en predicción de intracopia de bloque.
US10972733B2 (en) * 2016-07-15 2021-04-06 Qualcomm Incorporated Look-up table for enhanced multiple transform
MX2020006313A (es) * 2017-12-15 2020-09-18 Lg Electronics Inc Metodo de codificacion de imagenes basado en transformacion secundaria no separable y dispositivo para el mismo.
US10904559B2 (en) * 2018-07-13 2021-01-26 Tencent America LLC Block vector prediction in intra block copy mode
WO2020046091A1 (ko) * 2018-09-02 2020-03-05 엘지전자 주식회사 다중 변환 선택에 기반한 영상 코딩 방법 및 그 장치
US20210352326A1 (en) * 2018-09-19 2021-11-11 Electronics And Telecommunications Research Institute Method and device for encoding/decoding images, and recording medium for storing bitstream
CN109819250B (zh) * 2019-01-15 2020-09-25 北京大学 一种多核全组合方式的变换方法和系统
US11616966B2 (en) * 2019-04-03 2023-03-28 Mediatek Inc. Interaction between core transform and secondary transform
WO2020216288A1 (en) * 2019-04-23 2020-10-29 Beijing Bytedance Network Technology Co., Ltd. Conditional use of multiple transform matrices in video coding
CN112565754B (zh) * 2020-12-06 2022-11-11 浙江大华技术股份有限公司 基于ibc模式变换、编码方法、装置、电子设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109417636A (zh) * 2016-06-24 2019-03-01 韩国电子通信研究院 用于基于变换的图像编码/解码的方法和设备
CN111699694A (zh) * 2019-01-15 2020-09-22 Lg电子株式会社 使用变换跳变标志的图像编码方法和装置
TW202044839A (zh) * 2019-04-19 2020-12-01 美商高通公司 用於視訊寫碼之區塊內複製合併資料語法
WO2020223612A1 (en) * 2019-05-02 2020-11-05 Bytedance Inc. Signaling in transform skip mode
CN110636313A (zh) * 2019-09-18 2019-12-31 浙江大华技术股份有限公司 变换、二次变换矩阵训练方法、编码器及相关装置

Also Published As

Publication number Publication date
EP4205391A4 (en) 2024-02-21
US20230291901A1 (en) 2023-09-14
WO2022117114A1 (en) 2022-06-09
EP4205391A1 (en) 2023-07-05
CN115633172A (zh) 2023-01-20
CN112565754A (zh) 2021-03-26

Similar Documents

Publication Publication Date Title
CN112565754B (zh) 基于ibc模式变换、编码方法、装置、电子设备及存储介质
CN101939993B (zh) 对滤波器系数进行编码
CN105556963B (zh) 用于hevc范围扩展的残差差分脉冲编码调制方法
KR101730639B1 (ko) 계수들의 블럭에서 유효 계수들의 위치들의 코딩을 갖는 비디오 코딩
KR102683408B1 (ko) 적응적 트리 선택을 사용한 이진 집합의 비디오 인코딩 및 디코딩을 위한 방법 및 장치
CN112533000B (zh) 视频解码方法、装置、计算机可读介质及电子设备
CN103430537A (zh) 去块滤波控制
CN101160971A (zh) 用于储存中间环路过滤数据之暂存存储器
CN103270700A (zh) 使用平面表达的增强帧内预测编码
CN112543337B (zh) 视频解码方法、装置、计算机可读介质及电子设备
CN112565751B (zh) 视频解码方法、装置、计算机可读介质及电子设备
CN112995671B (zh) 视频编解码方法、装置、计算机可读介质及电子设备
CN112073719B (zh) 一种串匹配预测方法、装置、系统及计算机可读存储介质
TW201637444A (zh) 包括用於影像處理的編碼器之方法、系統及裝置
KR100827093B1 (ko) 영상 부호화 방법 및 장치
WO2021134635A1 (zh) 变换方法、编码器、解码器以及存储介质
US20230056211A1 (en) Video encoding method and apparatus, video decoding method and apparatus, computer program product, computer-readable storage medium, and electronic device
TWI738167B (zh) 圖像編碼及解碼技術
CN115988223A (zh) 帧内预测模式的确定、图像编码以及图像解码方法
US11736694B2 (en) Image decoding method, encoding method, devices, terminal equipment and computer programs therefor
CN101790096B (zh) 基于二重预测的编解码方法及装置
CN101742323A (zh) 无再损视频编码和解码的方法和装置
CN112543324B (zh) 视频解码方法、编码方法、编解码器及存储介质
CN104159106A (zh) 视频编码方法和视频解码方法及其装置
CN114079772B (zh) 视频解码方法、装置、计算机可读介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant