CN117354529B - 基于视频编码系统的图像处理方法、电子设备及介质 - Google Patents

基于视频编码系统的图像处理方法、电子设备及介质 Download PDF

Info

Publication number
CN117354529B
CN117354529B CN202311603328.8A CN202311603328A CN117354529B CN 117354529 B CN117354529 B CN 117354529B CN 202311603328 A CN202311603328 A CN 202311603328A CN 117354529 B CN117354529 B CN 117354529B
Authority
CN
China
Prior art keywords
data
sub
ipcm
block
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202311603328.8A
Other languages
English (en)
Other versions
CN117354529A (zh
Inventor
潘远星
徐艺萍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Jiangxin Chuang Technology Co ltd
Original Assignee
Guangdong Jiangxin Chuang Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Jiangxin Chuang Technology Co ltd filed Critical Guangdong Jiangxin Chuang Technology Co ltd
Priority to CN202311603328.8A priority Critical patent/CN117354529B/zh
Publication of CN117354529A publication Critical patent/CN117354529A/zh
Application granted granted Critical
Publication of CN117354529B publication Critical patent/CN117354529B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了基于视频编码系统的图像处理方法、电子设备及介质，方法包括：接收解码请求，并确定与解码请求对应的解码格式；对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块；将IPCM数据块输入IPCM模块进行数据排序，得到第一数据，并将非IPCM数据块输入预处理模块进行差异化处理，得到第一标识信息、第二标识信息以及第二数据；将第一数据、第一标识信息、第二标识信息以及第二数据输入输出控制模块，以使输出控制模块按照解码格式进行信息拼接，得到残差数据；基于残差数据对待处理图像进行解码，得到解码图像。本发明实施例中，能够对不同类型的子宏块数据块进行差异处理，提高TQ处理效率。

Description

基于视频编码系统的图像处理方法、电子设备及介质
技术领域
本发明属于图像处理技术领域，尤其涉及一种基于视频编码系统的图像处理方法、电子设备及介质。
背景技术
视频编转码技术是数字视频处理的关键技术，针对未压缩或已压缩视频文件，通过高性能、快速的编转码算法，可以将较大的视频文件压缩为占用空间更小的二进制文件。视频编转码技术在实际中都有着广泛的应用。例如视频会议，视频录制，数字视频在复杂带宽下传输，各种终端设备上自适应播放视频以及不同视频格式之间相互转换等。众多实际应用更加凸显了视频编转码技术的重要性，同时视频的应用要求编转码技术的快速、实时、多路超实时编转码。因而，快速高效的视频编转码技术成为越来越急需的实用技术。
H264/AVC(Advanced Video Coding，高级视频编码)压缩数据流程可以简述如下：将当前图像系数值与参考图像中的系数值进行对比，通过当前图像系数值减去参考图像中的系数值得到残差数据；对残差数据进行变换处理和量化处理，得到残差系数；最后将残差系数和参考图像信息进行压缩得到压缩码流。解码时的变换（Transformation）和量化（Quantization）处理，这里统称为TQ处理。然而，在现有技术方案中，哈德玛处理对同尺寸的直流系数数据块进行无差别化处理，而反量化处理和IDCT（Inverse Discrete CosineTransform，逆离散余弦变换）对同尺寸的子宏块数据块进行无差别化处理，导致增加反量化和反变换环节缓存，并且使得TQ处理效率偏低。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一，提供一种基于视频编码系统的图像处理方法、电子设备及介质，能够对不同类型的子宏块数据块进行差异处理，提高TQ处理效率。
第一方面，本发明提供一种基于视频编码系统的图像处理方法，所述视频编码系统包括IPCM（Intra Prediction Copy Mode，帧内预测复制模式）模块、预处理模块以及输出控制模块，所述方法包括：
接收解码请求，并确定与所述解码请求对应的解码格式；
对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块，其中，所述待处理数据块由对待处理图像压缩得到；
将所述IPCM数据块输入所述IPCM模块进行数据排序，得到第一数据，并将所述非IPCM数据块输入所述预处理模块进行差异化处理，得到第一标识信息、第二标识信息以及第二数据，其中，所述第一标识信息用于表征子宏块的系数值均为0的数据的数据标识，所述第二标识信息用于表征子宏块的直流系数值非0、交流系数值全0的数据的数据标识，所述第二数据用于表征子宏块的交流系数值非0的数据；
将所述第一数据、所述第一标识信息、所述第二标识信息以及所述第二数据输入所述输出控制模块，以使所述输出控制模块按照所述解码格式进行信息拼接，得到残差数据；
基于所述残差数据对所述待处理图像进行解码，得到解码图像。
根据本发明实施例提供的图像处理方法，至少有如下有益效果：首先，接收解码请求，并确定与解码请求对应的解码格式，再对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块，其中，IPCM数据块不需要进行TQ处理，再将IPCM数据块输入IPCM模块进行数据排序，以实现对IPCM数据的简单排列，得到第一数据，并将非IPCM数据块输入预处理模块进行差异化处理，提高了反量化和反变换环节的处理效率，减少数据块处理过程所消耗的时间，能够针对不同类别的数据进行相应处理，得到第一标识信息、第二标识信息以及第二数据，最后，将第一数据、第一标识信息、第二标识信息以及第二数据输入输出控制模块，以使输出控制模块按照解码格式进行信息拼接，拼接成后续模块处理所需要的数据格式，得到残差数据，基于残差数据对待处理图像进行解码，得到解码图像，能够在降低解码成本的同时提高对图像的解码效率。
根据本发明的一些实施例，所述将所述非IPCM数据块输入所述预处理模块进行差异化处理，得到第一标识信息、第二标识信息以及第二数据，包括：
将所述非IPCM数据块输入所述预处理模块进行数据分类，得到直流系数数据块、交流系数数据块以及固有子宏块；
对所述直流系数数据块以及所述交流系数数据块进行系数拼接，得到拼接子宏块；
对所述固有子宏块以及所述拼接子宏块进行系数分布检测，得到第一子宏块、第二子宏块以及第三子宏块，其中，所述第一子宏块为系数值均为0的子宏块，所述第二子宏块为直流系数值非0、交流系数值全0的子宏块，所述第三子宏块为交流系数值非0的子宏块；
对所述第一子宏块信息进行标记，得到第一标识信息，并对所述第二子宏块信息以及所述第三子宏块信息进行数据重建，生成第二标识信息以及第二数据。
根据本发明的一些实施例，所述视频编码系统包括直流系数缓存模块；所述对所述直流系数数据块以及所述交流系数数据块进行系数拼接，得到拼接子宏块，包括：
对所述直流系数数据块进行系数分布检测；
当存在系数值均为0的第一直流系数数据块，将直流系数缓存模块中与所述第一直流系数数据块对应的地址的直流系数设置为0；
当存在非0的系数值的第二直流系数数据块，对所述第二直流系数数据块进行哈德玛反变换操作，得到目标直流系数；
将所述目标直流系数存储至所述直流系数缓存模块；
基于所述直流系数缓存模块对所述交流系数数据块进行拼接，得到拼接子宏块。
根据本发明的一些实施例，所述视频编码系统包括临时缓存模块；所述对所述第二直流系数数据块进行哈德玛反变换操作，得到目标直流系数，包括：
对所述第二直流系数数据块进行行变换处理，得到变换结果；
将所述变换结果存储至所述临时缓存模块；
从所述临时缓存模块读取第一临时数据，并对所述第一临时数据进行列变换，得到目标直流系数。
根据本发明的一些实施例，所述视频编码系统包括IDCT变换模块；所述对所述第二子宏块以及所述第三子宏块进行数据重建，生成第二标识信息以及第二数据，包括：
基于预设的比例系数对所述第二子宏块以及所述第三子宏块进行反量化处理；
将反量化处理后的第二子宏块以及第三子宏块输入所述IDCT变换模块，以对所述第二子宏块进行快速变换处理，得到第二标识信息，并对所述第三子宏块进行逆离散余弦变换，得到第二数据。
根据本发明的一些实施例，所述视频编码系统包括后缓存模块；所述将所述IPCM数据块输入所述IPCM模块进行数据排序，得到第一数据，包括：
对所述IPCM数据块的Y分量矩阵进行划分，得到第一IPCM数据块和第二IPCM数据块；
根据所述IPCM数据块的Cb分量矩阵以及Cr分量矩阵生成第三IPCM数据块；
基于所述后缓存模块对所述第一IPCM数据块、所述第二IPCM数据块以及所述第三IPCM数据块的块序号和数据块内部系数的系数序号进行绑定，得到输入序号索引序列；
根据所述输入序号确定所述第一IPCM数据块、所述第二IPCM数据块以及所述第三IPCM数据块在后缓存模块的存储地址索引序号；
根据所述存储地址索引序号确定残差数据在所述后缓存模块中的存储地址信息；
将所述IPCM数据块作为第一数据，并根据所述存储地址信息以及所述存储地址索引序号存储第一数据。
根据本发明的一些实施例，所述将所述第一数据、所述第一标识信息、所述第二标识信息以及所述第二数据输入所述输出控制模块，以使所述输出控制模块按照所述解码格式进行信息拼接，得到残差数据，包括：
将所述第一数据、所述第一标识信息、所述第二标识信息以及所述第二数据输入所述输出控制模块进行缓存，以使所述输出控制模块对所述第一标识信息以及所述第二标识信息进行扩展，并按照所述解码格式对扩展后的数据、所述第一数据以及所述第二数据进行信息拼接，得到拼接结果；
根据所述拼接结果更新所述后缓存模块；
根据所述解码请求在更新后的后缓存模块中确定残差数据。
根据本发明的一些实施例，在所述对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块之前，还包括：
对多个待处理数据块进行标注，生成与所述待处理数据块对应的类型标记；
所述在对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块，包括：
将所述IPCM数据块作为第一数据，并对所述待处理数据块的类型标记进行识别，得到IPCM数据块以及非IPCM数据块。
第二方面，本发明提供了一种电子设备，所述电子设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现如第一方面所述的图像处理方法。
第三方面，本发明提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于执行第一方面所述的基于视频编码系统的图像处理方法。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本发明技术方案的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明的技术方案，并不构成对本发明技术方案的限制。
图1是本发明实施例提供的视频编码系统的结构示意图；
图2是本发明一个实施例提供的图像处理方法的流程图；
图3是图2中的步骤S103的具体方法流程图；
图4是图3中的步骤S202的具体方法流程图；
图5是图4中的步骤S303的具体方法流程图；
图6是图3中的步骤S204的具体方法流程图；
图7是图2中的步骤S103的具体方法另一流程图；
图8是图2中的步骤S104的具体方法流程图；
图9是本发明另一个实施例提供的图像处理方法的流程图；
图10是本发明另一个实施例提供的图像处理方法的流程图；
图11是本申请实施例提供的电子设备的硬件结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
需要说明的是，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于流程图中的顺序执行所示出或描述的步骤。说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
视频编转码技术是数字视频处理的关键技术，针对未压缩或已压缩视频文件，通过高性能、快速的编转码算法，可以将较大的视频文件压缩为占用空间更小的二进制文件。视频编转码技术在实际中都有着广泛的应用。例如视频会议，视频录制，数字视频在复杂带宽下传输，各种终端设备上自适应播放视频以及不同视频格式之间相互转换等。众多实际应用更加凸显了视频编转码技术的重要性，同时视频的应用要求编转码技术的快速、实时、多路超实时编转码。因而，快速高效的视频编转码技术成为越来越急需的实用技术。
H264/AVC(Advanced Video Coding，高级视频编码)压缩数据流程可以简述如下：将当前图像系数值与参考图像中的系数值进行对比，通过当前图像系数值减去参考图像中的系数值得到残差数据；对残差数据进行变换处理和量化处理，得到残差系数；最后将残差系数和参考图像信息进行压缩得到压缩码流。解码时的变换（Transformation）和量化（Quantization）处理，这里统称为TQ处理。然而，在现有技术方案中，哈德玛处理对同尺寸的直流系数数据块进行无差别化处理，而反量化处理和IDCT（Inverse Discrete CosineTransform，逆离散余弦变换）对同尺寸的子宏块数据块进行无差别化处理，导致增加反量化和反变换环节缓存，并且使得TQ处理效率偏低。
为解决了上述问题，本实施例提供了一种基于视频编码系统的图像处理方法、电子设备及介质，根据本发明实施例提供的图像处理方法，至少有如下有益效果：首先，接收解码请求，并确定与解码请求对应的解码格式，再对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块，其中，IPCM数据块不需要进行TQ处理，再将IPCM数据块输入IPCM模块进行数据排序，以实现对IPCM数据的简单排列，得到第一数据，并将非IPCM数据块输入预处理模块进行差异化处理，提高了反量化和反变换环节的处理效率，减少数据块处理过程所消耗的时间，能够针对不同类别的数据进行相应处理，得到第一标识信息、第二标识信息以及第二数据，最后，将第一数据、第一标识信息、第二标识信息以及第二数据输入输出控制模块，以使输出控制模块按照解码格式进行信息拼接，拼接成后续模块处理所需要的数据格式，得到残差数据，基于残差数据对待处理图像进行解码，得到解码图像，能够在降低解码成本的同时提高对图像的解码效率。
下面结合附图，对本发明实施例作进一步阐述。
参考图1，图1为本发明实施例提供的视频编码系统的结构示意图；
在一些实施例中，视频编码系统包括但不限于有前缓存模块100、输入控制模块110、IPCM模块120、预处理模块130、直流系数缓存模块140、哈德玛反变换模块150、反量化模块170、IDCT变换模块180、临时缓存模块190、快速信息缓存模块200、后缓存模块220以及输出控制模块210。
需要说明的是，前缓存模块100用于存储待处理数据块以及数据块信息，其中，数据块信息包括但不限于有宏块类别信息、颜色分量信息、数据块标识、数据块系数等等；
IPCM模块120用于将输入的IPCM数据块按照输出格式进行排序；
预处理模块130用于根据接收到的非IPCM数据块类型以及数据块的系数分布情况对数据块进行差异化处理；
直流系数缓存模块140用于存储子宏块的直流系数；
哈德玛反变换模块150用于对输入的数据块进行哈德玛反变换处理，先进行行变换并将计算结果缓存至临时缓存模块190，再将临时缓存模块190中的临时数据读出进行列变换，最后，将计算结果存储至直流系数缓存模块140；
反量化模块170用于进行反量化处理，其中，在进行反量化处理的过程中需要获取比例系数参与缩放计算，并将计算结果送入IDCT变换模块180；
可以理解的是，比例系数从比例系数缓存模块160中读取得到，其中，比例系数可以是默认的也可以是解码得到的，本实施例不做具体限制。
IDCT变换模块180用于对第二子宏块系数进行快速变换，并将变换结果输出到快速信息缓存模块200，IDCT变换模块180还用于对第三子宏块系数进行IDCT变换，并将变换结果输出到输出控制模块210；
快速信息缓存模块200用于缓存经过TQ处理的子宏块的信息，其中，每个子宏块的信息包括但不限于有颜色分量信息、块系数信息、数据块标志信息、块索引值信息等等；
输出控制模块210用于缓存残差数据以及IPCM数据块，并按照后续模块处理所需要的数据格式对残差数据以及IPCM数据块拼接；
后缓存模块220用于缓存经过输出控制模块210拼接的数据块。
本领域技术人员可以理解的是，图1中示出的示意图并不构成对本发明实施例的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，下面对本实施例中的图像处理方法进行具体说明。
参考图2，图2是本发明一个实施例提供的图像处理方法的流程图，应用但不限于图1中的视频编码系统，图像处理方法包括但不限于步骤S101至S105。
步骤S101：接收解码请求，并确定与解码请求对应的解码格式；
在一些实施例中，接收解码请求，并确定与解码请求对应的解码格式，以便于后续对数据块的拼接，能够将数据块拼接为与解码格式对应的图像。
步骤S102：对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块；
需要说明的是，待处理数据块由对待处理图像压缩得到。
在一些实施例中，对多个待处理数据块进行分类，得到不需要进行TQ处理的IPCM数据块以及需要进行TQ处理的非IPCM数据块，从而提高对待处理数据块的处理效率，缩短对非IPCM数据块的处理时间。
步骤S103：将IPCM数据块输入IPCM模块进行数据排序，得到第一数据，并将非IPCM数据块输入预处理模块进行差异化处理，得到第一标识信息、第二标识信息以及第二数据；
需要说明的是，第一标识信息用于表征子宏块的系数值均为0的数据的数据标识，第二标识信息用于表征子宏块的直流系数值非0、交流系数值全0的数据的数据标识，第二数据用于表征子宏块的交流系数值非0的数据。
在一些实施例中，直接将IPCM数据块输入IPCM模块120，使得IPCM模块120只需按照解码请求对应的输出格式进行简单排列输出即可，得到第一数据，从而提高解码效率，并将非IPCM数据块输入预处理模块130进行差异化处理，能够通过识别不同的数据块特征实现对数据块的差异化处理，提高图像的解压缩精度，进一步提高对数据块的解码效率。
可以理解的是，本实施例中根据数据块中的系数分布情况对非IPCM数据块进行分类，其中，系数分布情况包括但不限于有子宏块的系数值均为0、子宏块的直流系数值非0、交流系数值全0、子宏块的交流系数值非0等等，其中，第一标识信息以及第二标识信息所标识的数据均为子宏块经过TQ处理后的数据，第二数据中的数据为交流系数值非0的子宏块经过TQ处理后的数据，本实施例不做具体限制。
步骤S104：将第一数据、第一标识信息、第二标识信息以及第二数据输入输出控制模块210，以使输出控制模块210按照解码格式进行信息拼接，得到残差数据；
在一些实施例中，将第一数据、第一标识信息、第二标识信息以及第二数据输入输出控制模块210，以使输出控制模块210对第一标识信息以及第二标识信息进行扩展，得到与第一标识信息和第二标识信息对应的扩展数据，再按照解码格式进行信息拼接，从而能够将子宏块放置在正确的位置上，从而能够将子宏块信息还原成残差数据矩阵，得到残差数据，便于后续输出经过解压缩的解码图像。
步骤S105：基于残差数据对待处理图像进行解码，得到解码图像。
在一些实施例中，基于残差数据对待处理图像进行差分处理，得到解码图像，从而将经过压缩的图像数据解码为与原始图像相似的图像。
参照图3，图3是图2中的步骤S103的具体方法流程图，步骤S103包括但不限于包括步骤S201至S204。
步骤S201：将非IPCM数据块输入预处理模块130进行数据分类，得到直流系数数据块、交流系数数据块以及固有子宏块；
可以理解的是，固有子宏块为系数拼接好的子宏块，不需要进行后续的系数拼接。
步骤S202：对直流系数数据块以及交流系数数据块进行系数拼接，得到拼接子宏块；
步骤S203：对固有子宏块以及拼接子宏块进行系数分布检测，得到第一子宏块、第二子宏块以及第三子宏块；
需要说明的是，第一子宏块为系数值均为0的子宏块，第二子宏块为直流系数值非0、交流系数值全0的子宏块，第三子宏块为交流系数值非0的子宏块。
步骤S204：对第一子宏块信息进行标记，得到第一标识信息，并对第二子宏块信息以及第三子宏块信息进行数据重建，生成第二标识信息以及第二数据。
在一些实施例的步骤S201至步骤S204中，在将非IPCM数据块输入预处理模块130进行差异化处理的过程中，首先，将非IPCM数据块输入预处理模块130进行数据分类，得到直流系数数据块、交流系数数据块以及固有子宏块，实现对非IPCM数据块的初步分类，再对直流系数数据块以及交流系数数据块进行系数拼接，得到拼接子宏块，实现差异化处理子宏块，加快对子宏块的处理效率，由于新得到的拼接子宏块中可能存在系数值全0的子宏块，因此，还需要对固有子宏块以及拼接子宏块进行系数分布检测，查看子宏块是否为系数值全0的数据块，得到第一子宏块、第二子宏块和第三子宏块，实现对子宏块的差异化处理，便于后续将系数值全0的子宏块与系数值非0的子宏块分开处理，最后，对第一子宏块信息进行标记，得到第一标识信息，并对第二子宏块信息以及第三子宏块信息进行数据重建，得到第二标识信息以及第二数据，能够通过识别不同的数据块特征实现对数据块的差异化处理，提高图像的解压缩精度，进一步提高对数据块的解码效率。
需要说明的是，在对固有子宏块以及拼接子宏块进行系数分布检测之后，会得到系数值全0的子宏块与系数值非0的子宏块，具体地，本实施例中将系数分布检测结果分为三种，即系数值均为0的第一子宏块、直流系数值非0、交流系数值全0的第二子宏块以及交流系数值非0的第三子宏块，提高对子宏块的分类精度，便于后续根据不同的子宏块类型进行处理。
参照图4，图4是图3中的步骤S202的具体方法流程图，步骤S202包括但不限于包括步骤S301至S305。
步骤S301：对直流系数数据块进行系数分布检测；
步骤S302：当存在系数值均为0的第一直流系数数据块，将直流系数缓存模块140中与第一直流系数数据块对应的地址的直流系数设置为0；
步骤S303：当存在非0的系数值的第二直流系数数据块，对第二直流系数数据块进行哈德玛反变换操作，得到目标直流系数；
步骤S304：将目标直流系数存储至直流系数缓存模块140；
步骤S305：基于直流系数缓存模块140对交流系数数据块进行拼接，得到拼接子宏块。
在一些实施例的步骤S301至步骤S305中，在对直流系数数据块以及交流系数数据块进行系数拼接的过程中，首先，对直流系数数据块进行系数分布检测，确定直流系数数据块中是否存在系数值全0的数据块，以提高对直流系数数据块的处理效率，当存在系数值均为0的第一直流系数数据块，则不需要对全0的直流系数数据块进行哈德玛反变换处理，直接将直流系数缓存模块140中与第一直流系数数据块对应的直流系数缓存设置为0，减少对第一直流系数数据块的处理时间，当存在非0的系数值的第二直流系数数据块，则需要对第二直流系数数据块进行哈德玛反变换操作，得到目标直流系数，从而能够将直流系数数据块转换为频域标识，保留了直流系数数据块的局部性信息，减少压缩过程中误差的传播效应，更好地恢复图像的细节信息，之后，将目标直流系数存储至直流系数缓存模块140，便于后续对直流系数的调用，提高对图像解压缩的处理效率，最后，基于直流系数缓存模块140对交流系数数据块进行拼接，拼接生成新的拼接子宏块，从而保证图像的频域信息完整，提高图像的解压缩效率。
需要说明的是，对直流系数数据块进行系数分布检测的过程为判断直流系数数据块是否为全0数据块的过程，其中，可以通过对直流系数数据块的标识进行识别来检测，或者通过对直流系数数据块的系数值进行逐个分析来检测，本实施例不做具体限制。
值得注意的是，在视频编码系统的前缓存模块100会对系数值全0的数据块进行标识，并且如果数据块为全0块，则不需要缓存具体系数，从而减少缓存压力，提高缓存利用率。
在一些实施例中，本实施例对于系数值全0的直流系数数据块不需要进行哈德玛反变换操作，即，不需要对第一直流系数数据块进行哈德玛反变换操作，只需要将对应地址的直流系数缓存置为0，这样只消耗一个时钟周期，只有非全0的直流系数数据块才需要进行哈德玛反变换操作，从而节约对第一直流系数数据块的消耗时间，提高对直流系数数据块的处理效率。
参照图5，图5是图4中的步骤S303的具体方法流程图，步骤S303包括但不限于包括步骤S401至S403。
步骤S401：对第二直流系数数据块进行行变换处理，得到变换结果；
在一些实施例中，在对第二直流系数数据块进行哈德玛反变换操作的过程中，首先，对第二直流系数数据块进行行变换，得到变换结果。
步骤S402：将变换结果存储至临时缓存模块190；
在一些实施例中，将变换结果存储至临时缓存模块190，其中，临时缓存模块190中存储逐行生成的矩阵，在进行列变换之前，需要等矩阵的当前列的所有数据都已经凑齐才能进行，因此，需要临时缓存空间的大小大于等于原矩阵的大小，从而便于后续进行列变换。
步骤S403：从临时缓存模块190读取第一临时数据，并对第一临时数据进行列变换，得到目标直流系数。
在一些实施例中，从临时缓存模块190读取第一临时数据，并基于预设的哈德玛矩阵的规则对第一临时数据进行列变换，得到目标直流系数，从而保留了直流系数数据块的局部性信息，进一步减小了误差的传播效应，便于后续恢复图像的细节信息。
参照图6，图6是图3中的步骤S204的具体方法流程图，步骤S204包括但不限于包括步骤S501至S502。
步骤S501：基于预设的比例系数对第二子宏块以及第三子宏块进行反量化处理；
步骤S502：将反量化处理后的第二子宏块以及第三子宏块输入IDCT变换模块180，以对第二子宏块进行快速变换处理，得到第二标识信息，并对第三子宏块进行逆离散余弦变换，得到第二数据。
在一些实施例的步骤S501至步骤S502中，基于预设的比例系数对第二子宏块以及第三子宏块进行反量化处理，再将反量化处理后的第二子宏块以及第三子宏块输入IDCT变换模块180，其中，第二子宏块在IDCT变换模块180中不需要做常规的IDCT变换，直接对第二子宏块进行快速变换处理，节省对第二子宏块的处理时间，从而能够在一个时钟周期内得到第二子宏块的处理结果，得到第二标识信息，并对第三子宏块进行逆离散余弦变换，得到第二数据，从而能够提高图像解压缩过程中的图像质量，实现对图像的亮度和色彩的调节，提高图像的色彩深度和细节表现力。
需要说明的是，比例系数表示子宏块中系数值的变化范围。通过乘以比例系数，可以将系数值按比例缩放，以便适应特定的显示设备。
在一些实施例中，在对第三子宏块进行逆离散余弦变换的过程中，首先，对第三子宏块进行行变换，得到第二临时数据，将第二临时数据存储至临时缓存模块190，再从临时缓存模块190中读取第二临时数据，并基于第二临时数据对第三子宏块进行列变换，得到第二数据，通过逆离散余弦变换能够还原图像的原始系数值，减少压缩带来的伪影和失真。
值得注意的是，本实施例在IDCT变换模块分别对第二子宏块以及第三子宏块进行不同的操作流程，由于第二子宏块为直流系数值非0、交流系数值全0的子宏块，因此不需要进行复杂的逆离散余弦变换，从而节省对第二子宏块的处理时间，由于第三子宏块为交流系数值非0的子宏块，因此需要经过反量化以及逆离散余弦变换，实现对不同系数类型的数据块的差异处理，从而节省对数据块的处理时间，提高对图像的解压缩效率。
参照图7，图7是图2中的步骤S103的具体方法另一流程图，步骤S103包括但不限于包括步骤S601至S606。
步骤S601：对IPCM数据块的Y分量矩阵进行划分，得到第一IPCM数据块和第二IPCM数据块；
步骤S602：根据IPCM数据块的Cb分量矩阵以及Cr分量矩阵生成第三IPCM数据块；
步骤S603：基于后缓存模块220对第一IPCM数据块、第二IPCM数据块以及第三IPCM数据块的块序号和数据块内部系数的系数序号进行绑定，得到输入序号；
步骤S604：根据输入序号确定第一IPCM数据块、第二IPCM数据块以及第三IPCM数据块在后缓存模块的存储地址索引序号；
步骤S605：根据存储地址索引序号确定残差数据在后缓存模块220中的存储地址信息；
步骤S606：将IPCM数据块作为第一数据，并根据存储地址信息以及存储地址索引序号存储第一数据。
在一些实施例的步骤S601至步骤S606中，在将IPCM数据块输入IPCM模块120进行数据排序的过程中，首先，对IPCM数据块的Y分量矩阵进行划分，得到第一IPCM数据块和第二IPCM数据块，根据IPCM数据块的Cb分量矩阵以及Cr分量矩阵生成第三IPCM数据块，之后，基于后缓存模块220对第一IPCM数据块、第二IPCM数据块以及第三IPCM数据块的块序号和数据块内部系数的系数序号进行绑定，得到输入序号，再根据输入序号推导第一IPCM数据块、第二IPCM数据块以及第三IPCM数据块系数在后缓存模块220的存储地址索引序号，最后，根据后缓存模块220中的存储地址索引序号在后缓存模块220确定残差数据的存储地址信息，以确定与存储地址索引序号对应的偏移地址，进一步地，将IPCM数据块作为第一数据，并根据存储地址信息以及存储地址索引序号存储第一数据，以实现对IPCM数据块的排序，使得IPCM模块120只需按照解码请求对应的输出格式进行简单排列输出即可，从而提高解码效率。
需要说明的是，第一IPCM数据块和第二IPCM数据块的数据块大小可以根据IPCM数据块的大小自行调节，本实施例不做具体限制。
可以理解的是，在根据后缓存模块220中的存储地址索引序号在后缓存模块220确定残差数据的存储地址信息的过程中，将每4个相邻的存储地址索引序号的系数存在同个地址，即相邻的四个系数（如索引序号0~3的对应系数）存在同一地址。
参照图8，图8是图2中的步骤S104的具体方法流程图，步骤S104包括但不限于包括步骤S701至S703。
步骤S701：将第一数据、第一标识信息、第二标识信息以及第二数据输入输出控制模块210进行缓存，以使输出控制模块210对第一标识信息以及第二标识信息进行扩展，并按照解码格式对扩展后的数据、第一数据以及第二数据进行信息拼接，得到拼接结果；
步骤S702：根据拼接结果更新后缓存模块220；
步骤S703：根据解码请求在更新后的后缓存模块220中确定残差数据。
在一些实施例的步骤S701至步骤S703中，在输出控制模块210按照解码格式进行信息拼接，得到残差数据的过程中，首先，将第一数据、第一标识信息、第二标识信息以及第二数据输入输出控制模块210进行缓存，以使输出控制模块210对第一标识信息以及第二标识信息进行扩展，得到与第一标识信息对应的数据，以及与第二标识信息对应的数据，并按照解码格式对扩展后的数据、第一数据以及第二数据进行信息拼接，得到拼接结果，再将拼接结果输入至后缓存模块220以根据拼接结果更新后缓存模块220，最后，根据解码请求在更新后的后缓存模块220中确定残差数据，便于后续将读取到的子宏块残差数据矩阵还原成图像，输出经过解压缩的解码图像。
需要说明的是，在输出控制模块210按照解码格式进行信息拼接的过程中，将第一数据、与第一标识信息对应的扩展数据、与第二标识信息对应的扩展数据以及第二数据拼接到一起，并根据子宏块的位置信息，将子宏块放置在正确的位置上，得到拼接结果。
参照图9，图9是本发明另一个实施例提供的图像处理方法的流程图，数据处理方法包括但不限于步骤S801。
需要说明的是，步骤S801发生在对多个待处理数据块进行分类之前。
步骤S801：对多个待处理数据块进行标注，生成与待处理数据块对应的类型标记。
在一些实施例中，在对多个待处理数据块进行分类之前，对多个待处理数据块进行标注，便于后续对需要使用的块标记进行识别，生成与待处理数据块对应的类型标记，提高后续对数据块的识别效率，并且本实施例中只需存储数据块的类型标记即可，因此可以提高视频编码系统的缓存利用率，节省缓存消耗。
可以理解的是，在对待处理数据块进行标注的过程中，可以对宏块类别、颜色分量，例如Y分量、Cb分量、Cr分量进行标注，也可以对系数值全0的数据块进行标注等等，本实施例不做具体限制。
参照图10，图10是本发明另一个实施例提供的图像处理方法的流程图，图像处理方法包括但不限于步骤S901。
步骤S901：对待处理数据块的类型标记进行识别，得到IPCM数据块以及非IPCM数据块。
在一些实施例中，在对多个待处理数据块进行分类的过程中，对待处理数据块的类型标记进行识别，得到不需要进行TQ处理的IPCM数据块以及需要进行TQ处理的非IPCM数据块，从而提高对待处理数据块的处理效率，缩短对IPCM数据块的处理时间。
为了进一步地解释说明本申请的基于视频编码系统的图像处理方法，下面以具体示例进行说明。
示例一：
示例一以图1中的视频编码系统的架构为基础，对图像处理方法进行说明。
对图像或者视频流的压缩数据流程可以简述为将当前图像系数值与参考图像中的系数值进行对比，通过当前图像系数值减去参考图像中的系数值得到残差数据；对残差数据进行如哈德玛变换、离散余弦变换处理和量化处理，得到残差系数；最后将残差系数和参考图像信息进行压缩得到压缩码流。
以对16x16的宏块进行编码，并且以4：2：0采样格式为例，1个16x16的YUV图像宏块，Y分量进行1：1采样后得到1个16x16Y矩阵，Cb分量分别在水平和垂直方向上进行2：1采样得到1个8x8Cb矩阵,Cr分量分别在水平和垂直方向上进行2：1采样得到1个8x8Cr矩阵。
在H264/AVC解码的TQ处理时，这些16x16和8x8矩阵可以继续划分成子宏块。每个子宏块的（0，0）位置（即第1行第1列的位置）的系数称之为直流（DC）系数，其余位置系数称之为交流（AC）系数。
某些子宏块的直流系数和交流系数是分开进行处理的，需要进行哈德玛反变换才能得到直流系数，再将之与交流系数拼接得到完整的子宏块。因此进入TQ环节的数据块如下表1所示，该表中第1-3类属于IPCM宏块的子宏块，第4-11属于非IPCM宏块的子宏块或者数据块。直流系数矩阵经过哈德玛反变换后与交流系数矩阵拼接后（已经完整的块不需要进行哈德玛反变换处理），得到的子宏块如表2所示。
表1 进入TQ环节的数据块
表2 TQ环节交流直流拼接后的子宏块
本实施例中的前缓存模块100用来储存表1的数据块。该模块存储信息包括宏块类别，颜色分量Y/Cb/Cr，全0块标志，数据块的系数（若是全0块，则不需要缓存具体系数）；
输入控制模块110将不需要TQ处理的IPCM数据块（表1的第1-3类数据块，该类数据块构成IPCM宏块）分流到IPCM处理模块，其余数据块（表1的第4-11类数据块）送进数据块预处理模块130；
IPCM处理模块只需要按照输出格式进行简单排列即可，其中，具体的排列过程为将Y分量矩阵划分成2个16x8的IPCM_1（第一IPCM数据块）和IPCM_2数据块（第二IPCM数据块），数据块的数据逐行输入，矩阵中的0~255为输入序号；16x8的IPCM_1和IPCM_2数据块的序号是后缓存模块220的存储地址索引序号,并且每相邻的四个系数（如索引序号0-3的对应系数）存在同一地址。16x8大小的IPCM_3数据块（第三IPCM数据块）由Cb和Cr矩阵组成，数据块的数据逐行输入，矩阵中的256-383为输入序号；16x8的IPCM_3数据块的序号是后缓存模块220的存储地址索引序号,并且每相邻的四个存储地址索引序号的系数（如索引序号256-259的对应系数）存在同一地址。即，IPCM处理模块需要根据输入序号得到其在后缓存模块220中的索引序号，进而得到其后缓存中的偏移地址；
需要说明的是，此处采用9比特参数来表征索引序号，高7比特即其在后缓存模块220中的宏块残差数据的偏移地址。
预处理模块130根据接收到的数据块类型和系数分布情况选择差异化的处理方式。当数据块属于表1中第5、8、10类数据块并且是非全0的数据块时，将其送入哈德玛反变换模块150处理；当数据块属于表1中第5、8、10类数据块并且是全0的数据块，则不需要送入哈德玛反变换模块150处理，直接将对应地址的直流系数缓存置0。当数据块属于表1中第6、9、11类数据块，则从直流系数缓存读取对应的直流系数，并与之拼接成如表2的第1-4类子宏块；当数据块属于表1中第4、7类数据块，则其本身即是表2的第1-4类子宏块（固有子宏块）。数据块预处理模块130将表2中非全0的第1-4类子宏块送进反量化模块170，将表2中全0的完整块信息写入快速块信息缓存模块；
哈德玛反变换模块150负责进行哈德玛反变换处理。先进行行变换，将计算结果缓存到临时缓存模块190，再将临时数据读取出来做列变换，然后将计算结果存储到直流系数缓存模块140；
直流系数缓存模块140负责存储子宏块的直流系数；
反量化模块170负责反量化处理，需要从比例系数缓存模块160读取比例系数参与缩放计算，计算结果送入IDCT变换模块180；
IDCT变换模块180负责对子宏块系数进行IDCT变换，并将变换结果输出到快速块信息缓存模块200或者输出控制模块210。该模块对DC系数非0，AC系数全0的子宏块进行快速处理，在1个时钟周期内即可得到其变换结果，将该子宏块信息打包成第二子宏块信息，输出到快速块信息缓存模块200；对其他块进行常规的IDCT变换，先做行变换，将计算结果缓存到临时缓存模块190，再将临时数据读取出来做列变换，得到残差数据然后输出控制模块210，该路径消耗较多的时钟周期；
快速块信息缓存模块，缓存了TQ快速处理子宏块的信息。每个子宏块的信息包括颜色分量Y/Cb/Cr标记,全0块或者DC非0但AC全0块标志，块系数（整个块系数只会有1个系数值），块的索引值（从索引值可推测其该块在后缓存模块220模块的存储位置）；
输出控制模块210负责将残差数据或者IPCM数据块缓存，拼接成后续模块处理所需要的数据格式，最后写到后缓存模块220模块中。当处理IPCM宏块时，只会存在IPCM类数据块。当处理非IPCM宏块时，因为来自IDCT变换模块180的残差数据需要缓存拼接后才能输出，因此输出控制模块210对后缓存模块220的写接口存在写空闲，此时可以从快速块信息缓存模块读取子宏块信息，然后还原成子宏块残差数据矩阵后对后缓存模块220执行插入写操作即可。
本示例能够差异化处理直流系数数据块，加快直流系数数据块的处理效率。针对表1的第5、8、10类数据块，全0的DC直流数据块不需要进行哈德玛变换（因为其变换结果一定是个全0矩阵），直接将对应地址的直流系数缓存置0，这样只消耗1个时钟周期；非全0的DC直流数据块才需要送入哈德玛反变换模块150，这条路径需要进行繁琐计算，消耗较多的时钟周期。
并且本示例还能够差异化处理子宏块数据块，加快子宏块数据块的处理效率。针对表2的1-4类子宏块，全0的数据块不需要进行反量化和IDCT变换（变换结果一定是全0矩阵），直接将该子宏块的信息存储到快速块信息缓存模块；DC非0但AC全0的数据块只需要对DC值进行反量化，不需要复杂的IDCT变换，可以进行快速的IDCT变换处理（其变换结果是矩阵的所有系数一定等于反量化后的DC系数），这样只消耗1个时钟周期，然后将该块信息（包括反量化后的DC系数值）存储到快速块信息缓存模块；其余子宏块，所有的系数都需要经过反量化和常规IDCT变换。当TQ控制模块对后缓存模块220的写接口空闲时，将快速块信息缓存模块的信息进行扩展即可还原得到整个子宏块的系数，然后插入写到后缓存模块220模块。
值得注意的是，在将快速块信息缓存模块的信息进行扩展，得到子宏块的系数的过程中，例如，快速块信息缓存模块的缓存深度24，宽度为16，每个地址可以存储1个快速处理块的信息。这个16 bit的快速处理块的信息，bit 15存储4x4/8x8子宏块标记，bit11-14存储同类子宏块的索引值（因为同类型有多个子宏块），bit 9-10存储颜色分量Y/Cb/Cr，bit 0-8 存储子宏块的系数值（因为全0子宏块变换值一定是全0子宏块，DC非0但AC全0子宏块变换得到1个每个系数都等于DC值的新矩阵。因此只需要记下用9 bit记下DC值即可）。快速块信息缓存模块中，通过颜色分量Y/Cb/Cr、4x4/8x8子宏块标记、子宏块的索引值可以推断出该子宏块的残差数据应该存在TQ后缓存的地址。举例说明，Y/Cb/Cr按顺序排放，同类子宏块按索引值顺序排放，假设4:2:0采样的16x16宏块残差数据偏移地址值为0，则Y分量残差数据的偏移地址值为0，Cb分量残差数据的偏移地址值为16x16=256，Cr分量残差数据的偏移地址值为256+8x8=320，而Cb分量的第4个4x4子宏块的残差数据偏移地址值为256+(4-1)x4x4=304。快速块信息缓存模块中，通过子宏块的DC系数值可以知道整个子宏块的残差数据。
除此之外，因为后续处理需要使用块标记进行识别，前缓存模块100可以对全0块进行标记，即只需要存储标记信息即可，不需要记录完整的数据块系数，因此可以提高该缓存利用率，节省该缓存消耗。
请参阅图11，图11示意了一实施例的电子设备的硬件结构，电子设备包括：
处理器1001，可以采用通用的CPU(Central Processing Unit，中央处理器)、微处理器、应用专用集成电路(Application SpecificIntegrated Circuit，ASIC)、或者一个或多个集成电路等方式实现，用于执行相关程序，以实现本申请实施例所提供的技术方案；
存储器1002，可以采用只读存储器（Read Only Memory，ROM）、静态存储设备、动态存储设备或者随机存取存储器(Random Access Memory，RAM)等形式实现。存储器1002可以存储操作系统和其他应用程序，在通过软件或者固件来实现本说明书实施例所提供的技术方案时，相关的程序代码保存在存储器1002中，并由处理器1001来调用执行本申请实施例的图像处理方法；
输入/输出接口1003，用于实现信息输入及输出；
通信接口1004，用于实现本设备与其他设备的通信交互，可以通过有线方式（例如USB、网线等）实现通信，也可以通过无线方式（例如移动网络、WIFI、蓝牙等）实现通信；
总线1005，在设备的各个组件（例如处理器1001、存储器1002、输入/输出接口1003和通信接口1004）之间传输信息；
其中处理器1001、存储器1002、输入/输出接口1003和通信接口1004通过总线1005实现彼此之间在设备内部的通信连接。
此外，本发明的一个实施例还提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个处理器或控制器执行，例如，被上述系统实施例中的一个处理器执行，可使得上述处理器执行上述实施例中的图像处理方法。
本申请实施例描述的实施例是为了更加清楚的说明本申请实施例的技术方案，并不构成对于本申请实施例提供的技术方案的限定，本领域技术人员可知，随着技术的演变和新应用场景的出现，本申请实施例提供的技术方案对于类似的技术问题，同样适用。
本领域技术人员可以理解的是，图1-10中示出的技术方案并不构成对本申请实施例的限定，可以包括比图示更多或更少的步骤，或者组合某些步骤，或者不同的步骤。
以上所描述的装置实施例仅仅是示意性的，其中作为分离部件说明的单元可以是或者也可以不是物理上分开的，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
本领域普通技术人员可以理解，上文中所公开方法中的全部或某些步骤、系统、设备中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。
本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应当理解，在本申请中，“至少一个(项)”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，用于描述关联对象的关联关系，表示可以存在三种关系，例如，“A和/或B”可以表示：只存在A，只存在B以及同时存在A和B三种情况，其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a，b或c中的至少一项(个)，可以表示：a，b，c，“a和b”，“a和c”，“b和c”，或“a和b和c”，其中a，b，c可以是单个，也可以是多个。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括多指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例的方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等各种可以存储程序的介质。
以上参照附图说明了本申请实施例的优选实施例，并非因此局限本申请实施例的权利范围。本领域技术人员不脱离本申请实施例的范围和实质内所作的任何修改、等同替换和改进，均应在本申请实施例的权利范围之内。

Claims (10)

1.一种基于视频编码系统的图像处理方法，其特征在于，所述视频编码系统包括IPCM模块、预处理模块以及输出控制模块，所述方法包括：
接收解码请求，并确定与所述解码请求对应的解码格式；
对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块，其中，所述待处理数据块由对待处理图像压缩得到；
将所述IPCM数据块输入所述IPCM模块进行数据排序，得到第一数据，并将所述非IPCM数据块输入所述预处理模块进行差异化处理，得到第一标识信息、第二标识信息以及第二数据，其中，所述第一标识信息是用于表征子宏块的系数值均为0的数据的数据标识，所述第二标识信息是用于表征子宏块的直流系数值非0并且交流系数值全0的数据的数据标识，所述第二数据是用于表征子宏块的交流系数值非0的数据；
将所述第一数据、所述第一标识信息、所述第二标识信息以及所述第二数据输入所述输出控制模块，以使所述输出控制模块按照所述解码格式进行信息拼接，得到残差数据；
基于所述残差数据对所述待处理图像进行解码，得到解码图像。
2.根据权利要求1所述的基于视频编码系统的图像处理方法，其特征在于，所述将所述非IPCM数据块输入所述预处理模块进行差异化处理，得到第一标识信息、第二标识信息以及第二数据，包括：
将所述非IPCM数据块输入所述预处理模块进行数据分类，得到直流系数数据块、交流系数数据块以及固有子宏块；
对所述直流系数数据块以及所述交流系数数据块进行系数拼接，得到拼接子宏块；
对所述固有子宏块以及所述拼接子宏块进行系数分布检测，得到第一子宏块、第二子宏块以及第三子宏块，其中，所述第一子宏块为系数值均为0的子宏块，所述第二子宏块为直流系数值非0并且交流系数值全0的子宏块，所述第三子宏块为交流系数值非0的子宏块；
对所述第一子宏块进行标记，得到第一标识信息，并对所述第二子宏块以及所述第三子宏块进行数据重建，生成第二标识信息以及第二数据。
3.根据权利要求2所述的基于视频编码系统的图像处理方法，其特征在于，所述视频编码系统包括直流系数缓存模块；所述对所述直流系数数据块以及所述交流系数数据块进行系数拼接，得到拼接子宏块，包括：
对所述直流系数数据块进行系数分布检测；
当存在系数值均为0的第一直流系数数据块，将直流系数缓存模块中与所述第一直流系数数据块对应的地址的直流系数设置为0；
当存在非0的系数值的第二直流系数数据块，对所述第二直流系数数据块进行哈德玛反变换操作，得到目标直流系数；
将所述目标直流系数存储至所述直流系数缓存模块；
基于所述直流系数缓存模块对所述交流系数数据块进行拼接，得到拼接子宏块。
4.根据权利要求3所述的基于视频编码系统的图像处理方法，其特征在于，所述视频编码系统包括临时缓存模块；所述对所述第二直流系数数据块进行哈德玛反变换操作，得到目标直流系数，包括：
对所述第二直流系数数据块进行行变换处理，得到变换结果；
将所述变换结果存储至所述临时缓存模块；
从所述临时缓存模块读取第一临时数据，并对所述第一临时数据进行列变换，得到目标直流系数。
5.根据权利要求2所述的基于视频编码系统的图像处理方法，其特征在于，所述视频编码系统包括IDCT变换模块；所述对所述第二子宏块以及所述第三子宏块进行数据重建，生成第二标识信息以及第二数据，包括：
基于预设的比例系数对所述第二子宏块以及所述第三子宏块进行反量化处理；
将反量化处理后的第二子宏块以及第三子宏块输入所述IDCT变换模块，以对所述第二子宏块进行快速逆变换处理，得到第二标识信息，并对所述第三子宏块进行逆离散余弦变换，得到第二数据。
6.根据权利要求1所述的基于视频编码系统的图像处理方法，其特征在于，所述视频编码系统包括后缓存模块；所述将所述IPCM数据块输入所述IPCM模块进行数据排序，得到第一数据，包括：
对所述IPCM数据块的Y分量矩阵进行划分，得到第一IPCM数据块和第二IPCM数据块；
根据所述IPCM数据块的Cb分量矩阵以及Cr分量矩阵生成第三IPCM数据块；
基于所述后缓存模块对所述第一IPCM数据块、所述第二IPCM数据块以及所述第三IPCM数据块的块序号和数据块内部系数的系数序号进行绑定，得到输入序号；
根据所述输入序号确定所述第一IPCM数据块、所述第二IPCM数据块以及所述第三IPCM数据块在后缓存模块的存储地址索引序号；
根据所述存储地址索引序号确定残差数据在所述后缓存模块中的存储地址信息；
将所述IPCM数据块作为第一数据，并根据所述存储地址信息以及所述存储地址索引序号存储第一数据。
7.根据权利要求6所述的基于视频编码系统的图像处理方法，其特征在于，所述将所述第一数据、所述第一标识信息、所述第二标识信息以及所述第二数据输入所述输出控制模块，以使所述输出控制模块按照所述解码格式进行信息拼接，得到残差数据，包括：
将所述第一数据、所述第一标识信息、所述第二标识信息以及所述第二数据输入所述输出控制模块进行缓存，以使所述输出控制模块对所述第一标识信息以及所述第二标识信息进行扩展，并按照所述解码格式对扩展后的数据、所述第一数据以及所述第二数据进行信息拼接，得到拼接结果；
根据所述拼接结果更新所述后缓存模块；
根据所述解码请求在更新后的后缓存模块中确定残差数据。
8.根据权利要求1所述的基于视频编码系统的图像处理方法，其特征在于，在所述对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块之前，还包括：
对多个待处理数据块进行标注，生成与所述待处理数据块对应的类型标记；
所述对多个待处理数据块进行分类，得到IPCM数据块以及非IPCM数据块，包括：
对所述待处理数据块的类型标记进行识别，得到IPCM数据块以及非IPCM数据块。
9.一种电子设备，其特征在于，所述电子设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现权利要求1至8任一项所述的基于视频编码系统的图像处理方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于执行权利要求1至8任意一项所述的基于视频编码系统的图像处理方法。
CN202311603328.8A 2023-11-28 2023-11-28 基于视频编码系统的图像处理方法、电子设备及介质 Active CN117354529B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311603328.8A CN117354529B (zh) 2023-11-28 2023-11-28 基于视频编码系统的图像处理方法、电子设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311603328.8A CN117354529B (zh) 2023-11-28 2023-11-28 基于视频编码系统的图像处理方法、电子设备及介质

Publications (2)

Publication Number Publication Date
CN117354529A CN117354529A (zh) 2024-01-05
CN117354529B true CN117354529B (zh) 2024-03-12

Family

ID=89363448

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311603328.8A Active CN117354529B (zh) 2023-11-28 2023-11-28 基于视频编码系统的图像处理方法、电子设备及介质

Country Status (1)

Country Link
CN (1) CN117354529B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000236547A (ja) * 1998-12-15 2000-08-29 Sony Corp 画像情報変換装置及び画像情報変換方法
KR20110127456A (ko) * 2010-05-19 2011-11-25 삼성전자주식회사 영상 압축 장치 및 방법
CN102811349A (zh) * 2012-07-20 2012-12-05 西安电子科技大学 可自动调节冗余的无反馈多描述分布式视频编解码器
CN106034235A (zh) * 2015-03-11 2016-10-19 杭州海康威视数字技术股份有限公司 计算编码失真度和编码模式控制的方法及其系统
CN109361926A (zh) * 2018-11-27 2019-02-19 华南理工大学 H.264/avc视频视觉质量无损可逆信息隐藏方法
CN112533000A (zh) * 2020-10-16 2021-03-19 腾讯科技（深圳）有限公司 视频解码方法、装置、计算机可读介质及电子设备
WO2022111233A1 (zh) * 2020-11-30 2022-06-02 华为技术有限公司 帧内预测模式的译码方法和装置
CN116527895A (zh) * 2023-04-10 2023-08-01 中国科学院国家空间科学中心 一种星载异构h.264视频压缩编码系统及编码方法
CN116563771A (zh) * 2022-01-28 2023-08-08 腾讯科技（深圳）有限公司 图像识别方法、装置、电子设备及可读存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8355447B2 (en) * 2007-12-19 2013-01-15 Vixs Systems, Inc. Video encoder with ring buffering of run-level pairs and methods for use therewith

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000236547A (ja) * 1998-12-15 2000-08-29 Sony Corp 画像情報変換装置及び画像情報変換方法
KR20110127456A (ko) * 2010-05-19 2011-11-25 삼성전자주식회사 영상 압축 장치 및 방법
CN102811349A (zh) * 2012-07-20 2012-12-05 西安电子科技大学 可自动调节冗余的无反馈多描述分布式视频编解码器
CN106034235A (zh) * 2015-03-11 2016-10-19 杭州海康威视数字技术股份有限公司 计算编码失真度和编码模式控制的方法及其系统
CN109361926A (zh) * 2018-11-27 2019-02-19 华南理工大学 H.264/avc视频视觉质量无损可逆信息隐藏方法
CN112533000A (zh) * 2020-10-16 2021-03-19 腾讯科技（深圳）有限公司 视频解码方法、装置、计算机可读介质及电子设备
WO2022111233A1 (zh) * 2020-11-30 2022-06-02 华为技术有限公司 帧内预测模式的译码方法和装置
CN116563771A (zh) * 2022-01-28 2023-08-08 腾讯科技（深圳）有限公司 图像识别方法、装置、电子设备及可读存储介质
CN116527895A (zh) * 2023-04-10 2023-08-01 中国科学院国家空间科学中心 一种星载异构h.264视频压缩编码系统及编码方法

Also Published As

Publication number Publication date
CN117354529A (zh) 2024-01-05

Similar Documents

Publication Publication Date Title
US11394970B2 (en) Image encoding and decoding method and device
AU2013359365B2 (en) Lossless image compression using differential transfer
CN110691250B (zh) 结合块匹配和串匹配的图像压缩装置
WO2016138779A1 (zh) 帧内编解码方法、编码器和解码器
WO2022252488A1 (zh) 一种图像压缩方法、装置、电子设备及可读存储介质
CN104754361A (zh) 图像编码、解码方法及装置
WO2020103800A1 (zh) 视频解码方法和视频解码器
WO2008052007A2 (en) Signalling of maximum dynamic range of inverse discrete cosine transform
US20180199058A1 (en) Video encoding and decoding method and device
WO2023040600A1 (zh) 图像编码方法、图像解码方法、装置、电子设备及介质
CN113873252A (zh) 图像处理方法及装置、电子设备和存储介质
US20170223381A1 (en) Image coding and decoding methods and apparatuses
CN117354529B (zh) 基于视频编码系统的图像处理方法、电子设备及介质
CN113557727B (zh) 一种视频解码方法和相关装置
JP2012147290A (ja) 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
CN114727116A (zh) 编码方法及装置
CN107172425B (zh) 缩略图生成方法、装置及终端设备
US11750800B1 (en) Encoder and associated signal processing method
CN101516030B (zh) 具有多格式影像编解码功能的数据处理电路及处理方法
CN111787320B (zh) 一种变换编码系统和方法
CN113556542B (zh) 帧内块复制单元及方法
CN109803147B (zh) 基于视频纹理特征的变换处理方法及装置
WO2023160717A1 (en) Method, apparatus, and medium for video processing
CN115988224A (zh) 一种视频编码和解码方法、装置、电子设备及存储介质
CN118264806A (zh) 图像处理方法、装置及计算机设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant