CN116668707A - 图像编码方法、装置及图像解码方法、装置 - Google Patents

图像编码方法、装置及图像解码方法、装置 Download PDF

Info

Publication number
CN116668707A
CN116668707A CN202310232136.4A CN202310232136A CN116668707A CN 116668707 A CN116668707 A CN 116668707A CN 202310232136 A CN202310232136 A CN 202310232136A CN 116668707 A CN116668707 A CN 116668707A
Authority
CN
China
Prior art keywords
image
coding sequence
target
image block
code stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310232136.4A
Other languages
English (en)
Inventor
刘建伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Aixin Yuanzhi Technology Co ltd
Original Assignee
Shenzhen Aixin Yuanzhi Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Aixin Yuanzhi Technology Co ltd filed Critical Shenzhen Aixin Yuanzhi Technology Co ltd
Priority to CN202310232136.4A priority Critical patent/CN116668707A/zh
Publication of CN116668707A publication Critical patent/CN116668707A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请提供一种图像编码方法、装置及图像解码方法、装置，涉及图像处理技术领域。该方法包括：获取待编码图像，并对待编码图像进行频域转换和图像切块处理，获取待编码图像的N个图像块，N为正整数；针对N个图像块中的任一个图像块，根据图像块的M个图像特征，获取图像块中各比特位的目标编码顺序，M为正整数；根据目标编码顺序对图像块各比特位的第一数据进行编码，以获取图像块的第一码流；将每个图像块的目标编码顺序和第一码流发送给解码器。本申请可以高质量的对图像数据进行压缩，使得解码后的整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像编码的准确性。

Description

图像编码方法、装置及图像解码方法、装置
技术领域
本申请涉及图像处理技术领域，尤其涉及一种图像编码方法、装置及图像解码方法、装置。
背景技术
内存总线所能提供的数据传输能力是有限的，在芯片系统中，尤其是高分辨率的图像信号处理器(Image Signal Processor，ISP)系统中，内存带宽是一种重要的资源。相关技术中，可以通过压缩解压算法实现有限的带宽条件下，传输尽量多的数据，但是在压缩解压过程中有可能会出现阶梯状图像缺陷(artifacts)以及噪声，因此，如何高质量的对图像数据进行压缩，使得解码后的图像更好的保留原始图像中的信息，已经成为重要的研究方向之一。
发明内容
本申请的目的旨在至少在一定程度上解决上述技术中的技术问题之一。
本申请第一方面提供了一种图像编码方法，包括：
获取待编码图像，并对所述待编码图像进行频域转换和图像切块处理，获取所述待编码图像的N个图像块，所述N为正整数；
针对所述N个图像块中的任一个图像块，根据所述图像块的M个图像特征，获取所述图像块中各比特位的目标编码顺序，所述M为正整数；
根据所述目标编码顺序对所述图像块各比特位的第一数据进行编码，以获取所述图像块的第一码流；
将每个图像块的所述目标编码顺序和所述第一码流发送给解码器。
本申请第二方面提供了一种图像解码方法，包括：
接收所述编码器发送的N个图像块的第一码流，所述N个图像块为待解码图像的图像块；
从所述第一码流中，获取所述图像块中各比特位的目标编码顺序；
根据所述目标编码顺序继续对所述第一码流进行解码及空域变换，获取所述图像块的解码图像块；
对所述N个图像块的解码图像块进行拼接，获取所述待解码图像对应的解码图像。
本申请第三方面提供的一种图像编码装置，包括：
第一获取模块，用于获取待编码图像，并对所述待编码图像进行频域转换和图像切块处理，获取所述待编码图像的N个图像块，所述N为正整数；
第二获取模块，用于针对所述N个图像块中的任一个图像块，根据所述图像块的M个图像特征，获取所述图像块中各比特位的目标编码顺序，所述M为正整数；
第三获取模块，用于根据所述目标编码顺序对所述图像块各比特位的第一数据进行编码，以获取所述图像块的第一码流；
发送模块，用于将每个图像块的所述目标编码顺序和所述第一码流发送给解码器。
本申请第四方面提供的一种图像解码装置，包括：
接收模块，用于接收所述编码器发送的N个图像块的第一码流，所述N个图像块为待解码图像的图像块；
第一获取模块，用于从所述第一码流中，获取所述图像块中各比特位的目标编码顺序；
第二获取模块，用于根据所述目标编码顺序继续对所述第一码流进行解码及空域变换，获取所述图像块的解码图像块；
第三获取模块，用于对所述N个图像块的解码图像块进行拼接，获取所述待解码图像对应的解码图像。
本申请第五方面实施例提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行本申请第一方面提供的图像编码方法或本申请第二方面提供的图像解码方法。
本申请第六方面实施例提供了一种存储有计算机指令的计算机可读存储介质，计算机指令用于使计算机执行本申请第一方面提供的图像编码方法或本申请第二方面提供的图像解码方法。
本申请第七方面实施例提供了一种计算机程序产品，当计算机程序产品中的指令处理器执行时，执行本申请第一方面提供的图像编码方法或本申请第二方面提供的图像解码方法。
本申请附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。
本申请可以高质量的对图像数据进行压缩，使得解码后的整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像编码的准确性。
本申请可以从压缩后的码流，恢复出高质量的图像数据，缓解芯片系统中的带宽限制，对非重要的有损信号部分在频域进行自适应生成，使得整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像解码的准确性。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本申请一实施例的图像编码方法的流程图；
图2为本申请一实施例的图像编码方法的示意图；
图3为本申请一实施例的图像编码方法的流程图；
图4为本申请一实施例的图像编码方法的示意图；
图5为本申请一实施例的图像编码方法的流程图；
图6为本申请一实施例的图像编码方法的流程图；
图7为本申请一实施例的图像编码方法的示意图；
图8为本申请一实施例的图像编码方法的示意图；
图9为本申请一实施例的图像解码方法的流程图；
图10为本申请一实施例的图像编码装置的结构示意图；
图11为本申请一实施例的图像解码装置的结构示意图；
图12是本申请一实施例的电子设备的框图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。
下面参考附图描述本申请实施例的图像编码方法、装置及图像解码方法、装置。
图1为本申请一实施例的图像编码方法的流程图，如图1所示，该方法由编码器执行，包括：
S101，获取待编码图像，并对待编码图像进行频域转换和图像切块处理，获取待编码图像的N个图像块，N为正整数。
本申请实施例中，编码器获取待编码图像后，根据频域转换算法对待编码图像进行频域转换，进而对频域转换后的图像进行图像切块处理，获取待编码图像的N个图像块。
可选地，频域转换算法可以是LeGall 5/3频域转换算法、Daubechies9/7频域转换算法、离散余弦变换(Discrete Cosine Transform，DCT)等，本申请对此不做限制。
在一些实现中，针对N个图像块中的任一个图像块，去除图像块中的直流信号分量，以对该图像块进行更新。
在一些实现中，将图像块的当前颜色空间转换至预设的目标颜色空间，以对该图像块进行更新。例如，若当前颜色空间为YUV颜色空间(“Y”表示明亮度，也就是灰阶值，“U”和“V”表示的则是色度，作用是描述影像色彩及饱和度，用于指定像素的颜色)，目标颜色空间为红绿蓝RGB颜色空间，可以将图像块从YUV颜色空间转换到RGB颜色空间。
S102，针对N个图像块中的任一个图像块，根据图像块的M个图像特征，获取图像块中各比特位的目标编码顺序，M为正整数。
可选地，本申请实施例中，图像特征可以包括亮度、纹理强度等，也就是说，可以根据图像块的亮度、纹理强度等图像特征确定该图像块的编码顺序。
在一些实现中，可以对图像块的图像特征进行量化，量化后的特征值与编码顺序之间具有映射关系，可以根据映射关系获取图像特征对应的目标编码顺序。
S103，根据目标编码顺序对图像块各比特位的第一数据进行编码，以获取图像块的第一码流。
以图像块的尺寸为h*w个像素点为例进行说明，本申请实施例中的目标编码顺序可以如图2所示，对图像坐标系中(0,0)像素点的最高bit编码，再对(0,1)像素点的最高bit编码，再对(0,0)像素点的次高bit编码，最后对(h-1，w-1)像素点的最低bit编码。其中每个bit的数字，表示编码顺序，数字越小编码顺序排在越前。由此，按编码顺序，对图像块进行编码，可以将图像块中的所有像素变成一个有顺序的bit码流，即图像块的第一码流。其中，h、w、n为正整数。
在一些实现中，根据设定的码流需求确定需要的bit数，对生成的第一码流进行截断。可选地，本申请实施例中，越靠前的码流相对于画质越重要，编码器可以截取前n个bit码流。
S104，将每个图像块的目标编码顺序和第一码流发送给解码器。
在一些实现中，根据每个图像块的目标编码顺序生成编码顺序指示信息，将编码顺序指示信息嵌入第一码流，并发送给解码器。
在一些实现中，可以分别将嵌入编码顺序指示信息的第一码流发送给解码器。在一些实现中，可以分别将待编码图像的所有第一码流进行拼接，进而发送给解码器。
本申请实施例中，对待编码图像进行频域转换和图像切块处理，获取待编码图像的N个图像块，针对N个图像块中的任一个图像块，根据图像块的M个图像特征，获取图像块中各比特位的目标编码顺序，根据目标编码顺序对图像块各比特位的第一数据进行编码，以获取图像块的第一码流；将每个图像块的目标编码顺序和第一码流发送给解码器。本申请可以高质量的对图像数据进行压缩，使得解码后的整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像编码的准确性。
图3为本申请一实施例的图像编码方法的流程图，如图1所示，该方法由编码器执行，包括：
S301，获取待编码图像，并对待编码图像进行频域转换和图像切块处理，获取待编码图像的N个图像块，N为正整数。
关于步骤S301的介绍可以参见上述实施例中的内容，此处不再赘述。
S302，获取所述M个图像特征下的目标特征值。
以M值取2，图像特征包括图像亮度、图像纹理强度为例进行说明，获取图像块的亮度作为第一目标特征值，获取图像块的图像纹理强度作为第二目标特征值。
S303，根据特征值与编码顺序的第一映射关系确定目标特征值对应的目标编码顺序。
在一些实现中，第一映射关系为编码顺序与M个维度的图像特征之间的映射关系，以图像特征包括图像亮度、图像纹理强度为例进行说明，可以根据图像亮度(即第一目标特征值)作为第一索引，以图像纹理强度(即第二目标特征值)作为第二索引，获取图像块的目标特征值对应的目标编码顺序。
在一些实现中，第一映射关系的获取过程，包括：获取与图像块尺寸相同的第一样本频域图像，以及第一样本频域图像在M个图像特征下的候选特征值，获取第一样本频域图像中每个比特位的第二数据，并确定每个比特位的第二数据的优先级，根据每个比特位的第二数据的优先级确定第一样本频域图像中各比特位的候选编码顺序，建立候选编码顺序与候选特征值之间的第一映射关系。
在一些实现中，针对第一样本频域图像中任一比特位的第二数据，将第二数据取第一预设值后进行空域转换，获取第一空域图像，将第二数据取第二预设值后进行空域转换，获取第二空域图像。举例说明，如图4所示，针对(0,1)像素点的最高bit的第二数据，将第二数据取0后进行空域转换，获取第一空域图像，将第二数据取1后进行空域转换，获取第二空域图像。进而获取第一空域图像与第二空域图像的相似度，并根据相似度确定任一比特位的第二数据的优先级。
S304，根据目标编码顺序对图像块各比特位的第一数据进行编码，以获取图像块的第一码流。
S305，将每个图像块的目标编码顺序和第一码流发送给解码器。
关于步骤S304～步骤S305的介绍可以参见上述实施例中的内容，此处不再赘述。
本申请实施例中，获取所述M个图像特征下的目标特征值，根据特征值与编码顺序的第一映射关系确定目标特征值对应的目标编码顺序。本申请可以高质量的对图像数据进行压缩，使得解码后的整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像编码的准确性，能够依据图像的内容进行自适应的编码顺序选择，从而达到更好的压缩效果。
图5为本申请一实施例的图像编码方法的流程图，如图5所示，该方法由编码器执行，包括：
S501，获取待编码图像，并对待编码图像进行频域转换和图像切块处理，获取待编码图像的N个图像块，N为正整数。
关于步骤S501的介绍可以参见上述实施例中的内容，此处不再赘述。
S502，将图像块输入目标分类模型，由目标分类模型根据图像块在M个维度下的图像特征获取图像块的目标图像类型。
目标分类模型的训练过程包括：获取多个第二样本频域图像，以及任一第二样本频域图像的基准图像类型，第二样本频域图像与图像块尺寸相同。将任一第二样本频域图像输入预设的初始分类模型，由初始分类模型根据任一第二样本频域图像在M个维度下的图像特征获取任一第二样本频域图像的候选图像类型。根据任一第二样本频域图像的候选图像类型和基准图像类型获取损失函数对初始分类模型进行训练，直至完成训练得到目标分类模型。
可选地第二样本频域图像的基准图像类型为预设的图像类型。
可选地，若达到预设的训练次数或损失函数收敛至预设阈值，可以确定完成初始分类模型的训练，获取目标分类模型。
S503，根据预设的图像类型与编码顺序的第二映射关系确定目标图像类型对应的目标编码顺序。
可选地，本申请实施例中的第二映射关系为预设的映射关系。
S504，根据目标编码顺序对图像块各比特位的第一数据进行编码，以获取图像块的第一码流。
S505，将每个图像块的目标编码顺序和第一码流发送给解码器。
关于步骤S504～步骤S505的介绍可以参见上述实施例中的内容，此处不再赘述。
本申请实施例中，将图像块输入目标分类模型，由目标分类模型根据图像块在M个维度下的图像特征获取图像块的目标图像类型，根据预设的图像类型与编码顺序的第二映射关系确定目标图像类型对应的目标编码顺序。本申请可以高质量的对图像数据进行压缩，使得解码后的整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像编码的准确性，能够依据图像的内容进行自适应的编码顺序选择，从而达到更好的压缩效果。
图6为本申请一实施例的图像编码方法的流程图，如图1所示，该方法由编码器执行，包括：
S601，获取待编码图像，并对待编码图像进行频域转换和图像切块处理，获取待编码图像的N个图像块，N为正整数。
S602，针对N个图像块中的任一个图像块，根据图像块的M个图像特征，获取图像块中各比特位的目标编码顺序，M为正整数。
S603，根据目标编码顺序对图像块各比特位的第一数据进行编码，以获取图像块的第一码流。
关于步骤S601～步骤S603的介绍可以参见上述实施例中的内容，此处不再赘述。
S604，根据每个图像块的目标编码顺序生成编码顺序指示信息。
对每个图像块的目标编码顺序进行合并，去除相同的目标编码顺序，生成编码顺序表，获取任一图像块的目标编码顺序的标识，标识用于指示目标编码顺序，例如，若编码顺序表中一共16种目标编码顺序，可以用4bit信息来描述目标编码顺序的标识，0000指示第1个目标编码顺序，0001指示第2个目标编码顺序，以此类推，1111指示第16个目标编码顺序。根据编码顺序表和任一图像块的目标编码顺序的标识确定编码顺序指示信息。
S605，对每个图像块的第一码流进行拼接，生成第二码流。
S606，将编码顺序指示信息嵌入第二码流中，并将第二码流发送给解码器。
如图7所示，在一些实现中，将编码顺序指示信息嵌入第二码流的头信息中，编码顺序指示信息包括对待编码图像进行编码时所用到的目标编码顺序(即编码顺序表)，以及任一图像块的目标编码顺序的标识。如图8所示，在一些实现中，将编码顺序表嵌入第二码流的头信息中，将任一图像块的目标编码顺序的标识嵌入第二码流中任一图像块的第一码流中。
本申请实施例中，根据每个图像块的目标编码顺序生成编码顺序指示信息，对每个图像块的第一码流进行拼接，生成第二码流，将编码顺序指示信息嵌入第二码流中，并将第二码流发送给解码器。本申请可以高质量的对图像数据进行压缩，使得解码后的整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像编码的准确性，能够依据图像的内容进行自适应的编码顺序选择，从而达到更好的压缩效果。
图9为本申请一实施例的图像解码方法的流程图，如图1所示，该方法由解码器执行，包括：
S901，接收编码器发送的N个图像块的第一码流，N个图像块为待解码图像的图像块。
在一些实现中，接收编码器发送的第一码流，第一码流中包括每个图像块的码流数据以及目标编码顺序。
S902，从第一码流中，获取图像块中各比特位的目标编码顺序。
在一些实现中，从第一码流的头信息中获取编码顺序指示信息，编码顺序指示信息包括对待编码图像进行编码时所用到的目标编码顺序(即编码顺序表)，以及任一图像块的目标编码顺序的标识，进而根据标识查找编码顺序表，由此可以获取到图像块中各比特位的目标编码顺序。
在一些实现中，从第一码流的头信息中获取编码顺序表，从第一码流中获取图像块的目标编码顺序的标识，进而根据标识查找编码顺序表，由此可以获取到图像块中各比特位的目标编码顺序。
S903，根据目标编码顺序继续对第一码流进行解码及空域变换，获取图像块的解码图像块。
在一些实现中，根据目标编码顺序继续对第一码流进行解码，由于码流限制，解码后获取的频率响应数据可能存在缺失的位置，对缺失的位置进行设定值配置，或者进行随机填充，并通过空域变换，获取图像块的解码图像块。
在一些实现中，针对任一解码图像块，对解码图像块添加直流信号分量。
在一些实现中，若获取待解码图像的压缩过程存在颜色空间转换，解压的过程中对解码图像块执行反向的颜色空间转换，将解码图像块的当前颜色空间转换至预设的目标颜色空间。例如获取待解码图像的压缩过程存在YUV颜色空间转换到RGB颜色空间的转换，本申请实施例中，将解码图像块的当前颜色空间转换至预设的目标颜色空间，即为将解码图像块的当前RGB颜色空间转换至YUV颜色空间。
S904，对N个图像块的解码图像块进行拼接，获取待解码图像对应的解码图像。
本申请实施例中，从第一码流中，获取图像块中各比特位的目标编码顺序；根据目标编码顺序继续对第一码流进行解码及空域变换，获取图像块的解码图像块；对N个图像块的解码图像块进行拼接，获取待解码图像对应的解码图像。本申请可以从压缩后的码流，恢复出高质量的图像数据，缓解芯片系统中的带宽限制，对非重要的有损信号部分在频域进行自适应生成，使得整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像解码的准确性。
图10为本申请一实施例的图像编码装置的结构示意图，如图10所示，图像编码装置1000，包括：
第一获取模块1010，用于获取待编码图像，并对待编码图像进行频域转换和图像切块处理，获取待编码图像的N个图像块，N为正整数；
第二获取模块1020，用于针对N个图像块中的任一个图像块，根据图像块的M个图像特征，获取图像块中各比特位的目标编码顺序，M为正整数；
第三获取模块1030，用于根据目标编码顺序对图像块各比特位的第一数据进行编码，以获取图像块的第一码流；
发送模块1040，用于将每个图像块的目标编码顺序和第一码流发送给解码器。
根据本申请一实施例，第二获取模块1020，还用于：
获取M个图像特征下的目标特征值；
根据特征值与编码顺序的第一映射关系确定目标特征值对应的目标编码顺序。
根据本申请一实施例，第二获取模块1020，还用于：
获取与图像块尺寸相同的第一样本频域图像，以及第一样本频域图像在M个图像特征下的候选特征值；
获取第一样本频域图像中每个比特位的第二数据，并确定每个比特位的第二数据的优先级；
根据每个比特位的第二数据的优先级确定第一样本频域图像中各比特位的候选编码顺序；
建立候选编码顺序与候选特征值之间的第一映射关系。
根据本申请一实施例，第二获取模块1020，还用于：
针对第一样本频域图像中任一比特位的第二数据，将第二数据分别取第一预设值和第二预设值后进行空域转换，获取第一空域图像和第二空域图像；
获取第一空域图像与第二空域图像的相似度，并根据相似度确定任一比特位的第二数据的优先级。
根据本申请一实施例，第二获取模块1020，还用于：
将图像块输入目标分类模型，由目标分类模型根据图像块在M个维度下的图像特征获取图像块的目标图像类型；
根据预设的图像类型与编码顺序的第二映射关系确定目标图像类型对应的目标编码顺序。
根据本申请一实施例，目标分类模型的训练过程包括：
获取多个第二样本频域图像，以及任一第二样本频域图像的基准图像类型，第二样本频域图像与图像块尺寸相同；
将任一第二样本频域图像输入预设的初始分类模型，由初始分类模型根据任一第二样本频域图像在M个维度下的图像特征获取任一第二样本频域图像的候选图像类型；
根据任一第二样本频域图像的候选图像类型和基准图像类型获取损失函数对初始分类模型进行训练，直至完成训练得到目标分类模型。
根据本申请一实施例，第三获取模块1030，还用于：
针对N个图像块中的任一个图像块，去除图像块中的直流信号分量；和/或
将图像块的当前颜色空间转换至预设的目标颜色空间。
根据本申请一实施例，发送模块1040，还用于：
根据每个图像块的目标编码顺序生成编码顺序指示信息；
对每个图像块的第一码流进行拼接，生成第二码流；
将编码顺序指示信息嵌入第二码流中，并将第二码流发送给解码器。
根据本申请一实施例，发送模块1040，还用于：
对每个图像块的目标编码顺序进行合并，去除相同的目标编码顺序，生成编码顺序表；
获取任一图像块的目标编码顺序的标识，标识用于指示目标编码顺序；
根据编码顺序表和任一图像块的目标编码顺序的标识确定编码顺序指示信息。
根据本申请一实施例，发送模块1040，还用于：
将编码顺序指示信息嵌入第二码流的头信息中；或，
将编码顺序表嵌入第二码流的头信息中，将任一图像块的目标编码顺序的标识嵌入第二码流中任一图像块的第一码流中。
本申请可以高质量的对图像数据进行压缩，使得解码后的整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像编码的准确性，能够依据图像的内容进行自适应的编码顺序选择，从而达到更好的压缩效果。
图11为本申请一实施例的图像解码装置的结构示意图，如图11所示，图像编码装置1100，包括：
接收模块1110，用于接收编码器发送的N个图像块的第一码流，N个图像块为待解码图像的图像块；
第一获取模块1120，用于从第一码流中，获取图像块中各比特位的目标编码顺序；
第二获取模块1130，用于根据目标编码顺序继续对第一码流进行解码及空域变换，获取图像块的解码图像块；
第三获取模块1140，用于对N个图像块的解码图像块进行拼接，获取待解码图像对应的解码图像。
根据本申请一实施例，第三获取模块1140，还用于：
针对任一解码图像块，对解码图像块添加直流信号分量；和/或，
将解码图像块的当前颜色空间转换至预设的目标颜色空间。
本申请可以从压缩后的码流，恢复出高质量的图像数据，缓解芯片系统中的带宽限制，对非重要的有损信号部分在频域进行自适应生成，使得整体图像效果尽可能与原始图像相近，更好的保留原始图像中的信息，提高图像解码的准确性。
为达到上述实施例，本申请还提供了一种电子设备、一种计算机可读存储介质和一种计算机程序产品。
图12为本申请一实施例的电子设备的框图，根据如图12所示的电子设备可以实现执行本申请的图像编码方法或图像解码方法。
如图12所示，上述电子设备1200包括：存储器1210及处理器1220，连接不同组件(包括存储器1210和处理器1220)的总线1230，存储器1210存储有计算机程序，当处理器1220执行所述程序时实现本公开实施例所述的本申请的图像编码方法或图像解码方法。
总线1230表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
电子设备1200典型地包括多种电子设备可读介质。这些介质可以是任何能够被电子设备1200访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
存储器1210还可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)1240和/或高速缓存存储器1250。电子设备1200可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统1260可以用于读写不可移动的、非易失性磁介质(图12未显示，通常称为“硬盘驱动器”)。尽管图12中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线1230相连。存储器1210可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本公开各实施例的功能。
具有一组(至少一个)程序模块1270的程序/实用工具1280，可以存储在例如存储器1210中，这样的程序模块1270包括——但不限于——操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块1270通常执行本公开所描述的实施例中的功能和/或方法。
电子设备1200也可以与一个或多个外部设备1290(例如键盘、指向设备、显示器1291等)通信，还可与一个或者多个使得用户能与该电子设备1200交互的设备通信，和/或与使得该电子设备1200能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口1292进行。并且，电子设备1200还可以通过网络适配器1293与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图12所示，网络适配器1293通过总线1230与电子设备1200的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备1200使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理器1220通过运行存储在存储器1210中的程序，从而执行各种功能应用以及数据处理。
为了实现上述实施例，本申请还提供一种存储有计算机指令的计算机可读存储介质，计算机指令用于使计算机执行本申请的图像编码方法或图像解码方法。
为了实现上述实施例，本申请还提供一种计算机程序产品，当计算机程序产品中的指令处理器执行时，执行本申请的图像编码方法或图像解码方法。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如，如果用硬件来实现和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (26)

1.一种图像编码方法，其特征在于，由编码器执行，包括：
获取待编码图像，并对所述待编码图像进行频域转换和图像切块处理，获取所述待编码图像的N个图像块，所述N为正整数；
针对所述N个图像块中的任一个图像块，根据所述图像块的M个图像特征，获取所述图像块中各比特位的目标编码顺序，所述M为正整数；
根据所述目标编码顺序对所述图像块各比特位的第一数据进行编码，以获取所述图像块的第一码流；
将每个图像块的所述目标编码顺序和所述第一码流发送给解码器。
2.根据权利要求1所述的方法，其特征在于，所述根据所述图像块的M个图像特征获取所述图像块中各比特位的目标编码顺序，包括：
获取所述M个图像特征下的目标特征值；
根据特征值与编码顺序的第一映射关系确定所述目标特征值对应的所述目标编码顺序。
3.根据权利要求2所述的方法，其特征在于，所述第一映射关系的获取过程，包括：
获取与所述图像块尺寸相同的第一样本频域图像，以及所述第一样本频域图像在所述M个图像特征下的候选特征值；
获取所述第一样本频域图像中每个比特位的第二数据，并确定每个比特位的第二数据的优先级；
根据每个比特位的所述第二数据的优先级确定所述第一样本频域图像中各比特位的候选编码顺序；
建立所述候选编码顺序与所述候选特征值之间的第一映射关系。
4.根据权利要求3所述的方法，其特征在于，所述确定每个比特位的第二数据的优先级，包括：
针对所述第一样本频域图像中任一比特位的第二数据，将所述第二数据分别取第一预设值和第二预设值后进行空域转换，获取第一空域图像和第二空域图像；
获取所述第一空域图像与所述第二空域图像的相似度，并根据所述相似度确定所述任一比特位的第二数据的优先级。
5.根据权利要求1所述的方法，其特征在于，所述根据所述图像块的M个图像特征获取所述图像块中各比特位的目标编码顺序，包括：
将所述图像块输入目标分类模型，由所述目标分类模型根据所述图像块在M个维度下的图像特征获取所述图像块的目标图像类型；
根据预设的图像类型与编码顺序的第二映射关系确定所述目标图像类型对应的所述目标编码顺序。
6.根据权利要求5所述的方法，其特征在于，所述目标分类模型的训练过程包括：
获取多个第二样本频域图像，以及任一第二样本频域图像的基准图像类型，所述第二样本频域图像与所述图像块尺寸相同；
将所述任一第二样本频域图像输入预设的初始分类模型，由所述初始分类模型根据所述任一第二样本频域图像在M个维度下的图像特征获取所述任一第二样本频域图像的候选图像类型；
根据所述任一第二样本频域图像的候选图像类型和基准图像类型获取损失函数对所述初始分类模型进行训练，直至完成训练得到目标分类模型。
7.根据权利要求1-6任一项所述的方法，其特征在于，所述获取所述初始图像的N个图像块之后，还包括：
针对所述N个图像块中的任一个图像块，去除所述图像块中的直流信号分量；和/或
将所述图像块的当前颜色空间转换至预设的目标颜色空间。
8.根据权利要求1-6任一项所述的方法，其特征在于，所述将每个图像块的所述目标编码顺序和所述第一码流发送给解码器，包括：
根据所述每个图像块的所述目标编码顺序生成编码顺序指示信息；
对所述每个图像块的第一码流进行拼接，生成第二码流；
将所述编码顺序指示信息嵌入所述第二码流中，并将所述第二码流发送给所述解码器。
9.根据权利要求8所述的方法，其特征在于，所述根据所述每个图像块的所述目标编码顺序生成编码顺序指示信息，包括：
对所述每个图像块的所述目标编码顺序进行合并，去除相同的目标编码顺序，生成编码顺序表；
获取任一图像块的所述目标编码顺序的标识，所述标识用于指示所述目标编码顺序；
根据所述编码顺序表和所述任一图像块的所述目标编码顺序的标识确定所述编码顺序指示信息。
10.根据权利要求9所述的方法，其特征在于，所述将所述编码顺序指示信息嵌入所述第二码流中，包括：
将所述编码顺序指示信息嵌入所述第二码流的头信息中；或，
将所述编码顺序表嵌入所述第二码流的头信息中，将所述任一图像块的所述目标编码顺序的标识嵌入所述第二码流中所述任一图像块的第一码流中。
11.一种图像解码方法，其特征在于，由解码器执行，包括：
接收所述编码器发送的N个图像块的第一码流，所述N个图像块为待解码图像的图像块；
从所述第一码流中，获取所述图像块中各比特位的目标编码顺序；
根据所述目标编码顺序继续对所述第一码流进行解码及空域变换，获取所述图像块的解码图像块；
对所述N个图像块的解码图像块进行拼接，获取所述待解码图像对应的解码图像。
12.根据权利要求11所述的方法，其特征在于，所述对所述N个图像块的解码图像块进行拼接之前，还包括：
针对任一解码图像块，对所述解码图像块添加直流信号分量；和/或，将所述解码图像块的当前颜色空间转换至预设的目标颜色空间。
13.一种图像编码装置，其特征在于，包括：
第一获取模块，用于获取待编码图像，并对所述待编码图像进行频域转换和图像切块处理，获取所述待编码图像的N个图像块，所述N为正整数；
第二获取模块，用于针对所述N个图像块中的任一个图像块，根据所述图像块的M个图像特征，获取所述图像块中各比特位的目标编码顺序，所述M为正整数；
第三获取模块，用于根据所述目标编码顺序对所述图像块各比特位的第一数据进行编码，以获取所述图像块的第一码流；
发送模块，用于将每个图像块的所述目标编码顺序和所述第一码流发送给解码器。
14.根据权利要求13所述的装置，其特征在于，所述第二获取模块，还用于：
获取所述M个图像特征下的目标特征值；
根据特征值与编码顺序的第一映射关系确定所述目标特征值对应的所述目标编码顺序。
15.根据权利要求14所述的装置，其特征在于，所述第二获取模块，还用于：
获取与所述图像块尺寸相同的第一样本频域图像，以及所述第一样本频域图像在所述M个图像特征下的候选特征值；
获取所述第一样本频域图像中每个比特位的第二数据，并确定每个比特位的第二数据的优先级；
根据每个比特位的所述第二数据的优先级确定所述第一样本频域图像中各比特位的候选编码顺序；
建立所述候选编码顺序与所述候选特征值之间的第一映射关系。
16.根据权利要求15所述的装置，其特征在于，所述第二获取模块，还用于：
针对所述第一样本频域图像中任一比特位的第二数据，将所述第二数据分别取第一预设值和第二预设值后进行空域转换，获取第一空域图像和第二空域图像；
获取所述第一空域图像与所述第二空域图像的相似度，并根据所述相似度确定所述任一比特位的第二数据的优先级。
17.根据权利要求13所述的装置，其特征在于，所述第二获取模块，还用于：
将所述图像块输入目标分类模型，由所述目标分类模型根据所述图像块在M个维度下的图像特征获取所述图像块的目标图像类型；
根据预设的图像类型与编码顺序的第二映射关系确定所述目标图像类型对应的所述目标编码顺序。
18.根据权利要求17所述的装置，其特征在于，所述目标分类模型的训练过程包括：
获取多个第二样本频域图像，以及任一第二样本频域图像的基准图像类型，所述第二样本频域图像与所述图像块尺寸相同；
将所述任一第二样本频域图像输入预设的初始分类模型，由所述初始分类模型根据所述任一第二样本频域图像在M个维度下的图像特征获取所述任一第二样本频域图像的候选图像类型；
根据所述任一第二样本频域图像的候选图像类型和基准图像类型获取损失函数对所述初始分类模型进行训练，直至完成训练得到目标分类模型。
19.根据权利要求13-18任一项所述的装置，其特征在于，所述第三获取模块，还用于：
针对所述N个图像块中的任一个图像块，去除所述图像块中的直流信号分量；和/或
将所述图像块的当前颜色空间转换至预设的目标颜色空间。
20.根据权利要求13-18任一项所述的装置，其特征在于，所述发送模块，还用于：
根据所述每个图像块的所述目标编码顺序生成编码顺序指示信息；
对所述每个图像块的第一码流进行拼接，生成第二码流；
将所述编码顺序指示信息嵌入所述第二码流中，并将所述第二码流发送给所述解码器。
21.根据权利要求20所述的装置，其特征在于，所述发送模块，还用于：
对所述每个图像块的所述目标编码顺序进行合并，去除相同的目标编码顺序，生成编码顺序表；
获取任一图像块的所述目标编码顺序的标识，所述标识用于指示所述目标编码顺序；
根据所述编码顺序表和所述任一图像块的所述目标编码顺序的标识确定所述编码顺序指示信息。
22.根据权利要求21所述的装置，其特征在于，所述发送模块，还用于：
将所述编码顺序指示信息嵌入所述第二码流的头信息中；或，
将所述编码顺序表嵌入所述第二码流的头信息中，将所述任一图像块的所述目标编码顺序的标识嵌入所述第二码流中所述任一图像块的第一码流中。
23.一种图像解码装置，其特征在于，包括：
接收模块，用于接收所述编码器发送的N个图像块的第一码流，所述N个图像块为待解码图像的图像块；
第一获取模块，用于从所述第一码流中，获取所述图像块中各比特位的目标编码顺序；
第二获取模块，用于根据所述目标编码顺序继续对所述第一码流进行解码及空域变换，获取所述图像块的解码图像块；
第三获取模块，用于对所述N个图像块的解码图像块进行拼接，获取所述待解码图像对应的解码图像。
24.根据权利要求23所述的装置，其特征在于，所述第三获取模块，还用于：
针对任一解码图像块，对所述解码图像块添加直流信号分量；和/或，将所述解码图像块的当前颜色空间转换至预设的目标颜色空间。
25.一种电子设备，其特征在于，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-10中任一项所述的方法或执行权利要求11-12中任一项所述的方法。
26.一种存储有计算机指令的计算机可读存储介质，其特征在于，所述计算机指令用于使所述计算机执行权利要求1-10中任一项所述的方法或执行权利要求11-12中任一项所述的方法。
CN202310232136.4A 2023-03-01 2023-03-01 图像编码方法、装置及图像解码方法、装置 Pending CN116668707A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310232136.4A CN116668707A (zh) 2023-03-01 2023-03-01 图像编码方法、装置及图像解码方法、装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310232136.4A CN116668707A (zh) 2023-03-01 2023-03-01 图像编码方法、装置及图像解码方法、装置

Publications (1)

Publication Number Publication Date
CN116668707A true CN116668707A (zh) 2023-08-29

Family

ID=87716012

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310232136.4A Pending CN116668707A (zh) 2023-03-01 2023-03-01 图像编码方法、装置及图像解码方法、装置

Country Status (1)

Country Link
CN (1) CN116668707A (zh)

Similar Documents

Publication Publication Date Title
US10805644B2 (en) Device and method for entropy encoding and decoding
KR102071764B1 (ko) 영상 부호화, 복호화 방법 및 장치
JP4365957B2 (ja) 画像処理方法及びその装置及び記憶媒体
JP6245888B2 (ja) エンコーダおよび符号化方法
US8213727B2 (en) Image encoding apparatus and image decoding apparatus, and control method thereof
US10785493B2 (en) Method of compressing and decompressing image data
JP2016226001A (ja) デコーダおよび復号方法
US8929674B2 (en) Compression of high bit-depth images
CN102308582B (zh) 用于对图像进行分割编码的方法
TWI626841B (zh) 具有減少色彩解析度的視訊流之自適應處理
KR101346942B1 (ko) 벡터 임베디드 그래픽 코딩
US20070064275A1 (en) Apparatus and method for compressing images
KR20130089461A (ko) 영역별 특성에 기초한 영상 부호화 방법 및 그 장치, 그리고 영상 복호화 방법 및 그 장치
CN105144726A (zh) 指示媒体内容的样本的标称范围的定制数据
JP2010098352A (ja) 画像情報符号化装置
USRE48740E1 (en) Adaptive processing of video streams with reduced color resolution
CN116668707A (zh) 图像编码方法、装置及图像解码方法、装置
CN112672164B (zh) 视频压缩系统及方法、视频解压缩系统及方法
US10531128B2 (en) Compression and decompression of video data
CN116489371A (zh) 基于频域位宽增强的图像解码方法、装置及电子设备
WO2024007144A1 (zh) 编解码方法、码流、编码器、解码器以及存储介质
JP4743884B2 (ja) 画像符号化装置及びその制御方法
CN115412727A (zh) 编码方法、解码方法及其装置
JP2005277758A (ja) 画像復号装置
JP4743883B2 (ja) 画像符号化装置およびその制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination