CN104602025B - 处理图像的方法和装置 - Google Patents

处理图像的方法和装置 Download PDF

Info

Publication number
CN104602025B
CN104602025B CN201510012142.4A CN201510012142A CN104602025B CN 104602025 B CN104602025 B CN 104602025B CN 201510012142 A CN201510012142 A CN 201510012142A CN 104602025 B CN104602025 B CN 104602025B
Authority
CN
China
Prior art keywords
image
coefficient
transformation
transformation coefficient
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510012142.4A
Other languages
English (en)
Other versions
CN104602025A (zh
Inventor
赵寅
杨海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201510012142.4A priority Critical patent/CN104602025B/zh
Publication of CN104602025A publication Critical patent/CN104602025A/zh
Priority to EP16734909.1A priority patent/EP3236658B1/en
Priority to PCT/CN2016/070228 priority patent/WO2016110249A1/zh
Priority to US15/645,052 priority patent/US10291935B2/en
Application granted granted Critical
Publication of CN104602025B publication Critical patent/CN104602025B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种处理图像的方法和装置，该方法包括：对第一图像进行变换，得到第一变换系数集；对第二图像进行变换，或者对第一图像和第二图像的差值图像进行变换，得到第二变换系数集；根据第一变换系数集中的变换系数的幅度，从第一变换系数集中选取第一组变换系数，其中，第一组变换系数中的变换系数的幅度满足预设的阈值条件；根据第一组变换系数和第二变换系数集，确定第一图像和第二图像之间的图像差异值；根据图像差异值，对第一图像和第二图像进行处理。本发明实施例确定的图像差异值能够较好地反映两个图像的差异程度，使得基于该图像差异值的后续图像处理更加准确。

Description

处理图像的方法和装置
技术领域
本发明涉及领域图像处理领域，并且更具体地，涉及处理图像的方法和装置。
背景技术
视频编码，例如H.264/AVC、H.265/HEVC、AVS等视频编码标准，通常采用混合编码框架，主要包括预测(prediction)、变换(transform)、量化(quantization)、熵编码(entropy coding)等环节。视频解码是将码流转换为视频图像的过程，它包括熵解码(entropy decoding)、预测、反量化(dequantization)、反变换(inverse transform)等几个主要环节。首先，将码流通过熵解码处理解析出编码模式信息和量化后的变换系数。然后，一方面由编码模式信息和已经解码的重建像素得出预测像素；另一方面将量化后的变换系数通过反量化得到重建的变换系数，再对重建的变换系数进行反变换，得到重建的残差信息。之后，将重建的残差信息和预测像素相加，得到重建像素，从而恢复出视频图像。
对于有损编码，重建像素(reconstructed pixel)与原始像素(original pixel)可能是不相同的，两者之间的数值差异称为失真(distortion)。一般来说，失真由量化引起，量化参数(Quantization parameter,QP)越大则失真越强，图像变得模糊，总得来说像素质量越差。
基于知识库的编码是H.264/AVC、H.265/HEVC的一种扩展。解码端包含一个知识库，其中存储了一些图像(image)或/和图像区域(image region)，称之为图样(patch)。知识库中的图像或图样可以来自当前解码视频中已经解码的重建图像，例如从已解码的重建图像中提取一些代表性的图像加入知识库；知识库中的图像或图样也可以来自当前解码视频的重建图像之外，例如由解码其它视频得到的重建图像或图样，又例如解码系统预先存储的包含多个图像或图样，这些预先存储的图像或图样可以是没有经过编码压缩的原始图像。解码当前视频时，可以利用知识库中的像素信息。例如，解码时利用到的预测像素信息可以来自于知识库中的像素信息。
预测环节利用已编码区域的重建像素产生当前编码块对应的原始像素的预测像素(predicted pixel)。预测方式主要包括帧内预测(intra prediction)和帧间预测(inter prediction)两大类。其中，帧内编码中的模版匹配(template matching)和帧间编码中的解码端运动矢量导出(decoder side motion vector derivation)技术需要利用当前解码预测块周围的重建图像模版区域(template)，在当前帧中已重建区域或其它已重建帧中搜索与当前解码块模版区域差异最小的一个或多个最近邻(nearest neighbor)图像，称为匹配图像。对于这两类技术，怎样评价模版区域图像和匹配过程中的某个候选模版区域图像的图像差异值(difference)或者在值域空间的距离(distance)是一个关键问题，直接决定了最终的搜索结果。传统的两个图像之间的图像差异值计算方法例如两图像像素域的平方误差和(Sum of Squared Errors,SSE)、绝对误差和(Sum of AbsoluteDifference,SAD)、均方误差(Mean Squared Error,MSE)、平均绝对差(Mean AbsoluteDifference,MAD)，又例如两图像经过Hadamard变换后的变换系数域的平均绝对差(Sum ofAbsolute Transformed Difference，SATD)。图像差异值的计算问题也在其它图像搜索和图像融合处理中也起到了关键作用。传统的图像差异值计算方法会将高质量图像相对于低质量图像的信号质量提升错误地认为是两个图像之间的差异，利用两个图像像素域的平方误差和等传统差异计算方法得到的差异较小的图像很可能在视觉上并不相似，导致后续的图像处理结果不准确。
发明内容
本发明实施例提供了一种处理图像的方法和装置，以提高图像处理的准确性。
第一方面，提供一种处理图像的方法，包括：对第一图像进行变换，得到第一变换系数集；对第二图像进行所述变换，或者对第一图像和第二图像的差值图像进行所述变换，得到第二变换系数集；根据所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；根据所述图像差异值，对所述第一图像和所述第二图像进行处理。
结合第一方面，在第一方面的一种实现方式中，所述第二变换系数集是对所述第二图像进行所述变换得到的变换系数集，所述根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值，包括：根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值，包括：确定所述第一组变换系数和所述第二组变换系数中各对应变换系数的差值；将所述各对应变换系数的差值之和确定为所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述第一组变换系数和所述第二组变换系数均按照相同方式划分为N个子组，所述根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值，包括：确定N个目标值，其中，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应变换系数的差值之和；根据所述N个子组的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值，包括：确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述第一变换系数集中除所述第一组变换系数外的剩余变换系数与所述第二变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述第二变换系数集是对所述第一图像和所述第二图像的差值图像进行所述变换得到的变换系数集，所述根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值，包括：根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第二组变换系数，确定所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述第二组变换系数，确定所述图像差异值，包括：将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述第二组变换系数包括N个子组，所述根据所述第二组变换系数，确定所述图像差异值，包括：确定N个目标值，其中，第i目标值为第i子组中的变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述第二组变换系数，确定所述图像差异值，包括：确定第一目标值，所述第一目标值为所述第二组变换系数中各变换系数之和；确定第二目标值，所述第二目标值为所述第二变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，所述根据所述图像差异值，对所述第一图像和所述第二图像进行处理，包括：根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数，包括：根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数，包括：根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像对应的加权系数，包括：根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
结合第一方面或其上述实现方式的任一种，在第一方面的另一种实现方式中，所述根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像，包括：根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
第二方面，提供一种处理图像的装置，包括：第一变换单元，用于对第一图像进行变换，得到第一变换系数集；第二变换单元，用于对第二图像进行所述变换，或者对第一图像和第二图像的差值图像进行所述变换，得到第二变换系数集；选取单元，用于根据所述第一变换单元得到的所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；确定单元，用于根据所述选取单元选取的所述第一组变换系数和所述第二变换单元得到的所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；处理单元，用于根据所述确定单元确定的所述图像差异值，对所述第一图像和所述第二图像进行处理。
结合第二方面，在第二方面的一种实现方式中，所述第二变换系数集是对所述第二图像进行所述变换得到的变换系数集，所述确定单元具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述确定单元具体用于确定所述第一组变换系数和所述第二组变换系数中各对应变换系数的差值；将所述各对应变换系数的差值之和确定为所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述第一组变换系数和所述第二组变换系数均按照相同方式划分为N个子组，所述确定单元具体用于确定N个目标值，其中，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应变换系数的差值之和；根据所述N个子组的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述确定单元具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述第一变换系数集中除所述第一组变换系数外的剩余变换系数与所述第二变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述第二变换系数集是对所述第一图像和所述第二图像的差值图像进行所述变换得到的变换系数集，所述确定单元具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第二组变换系数，确定所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述确定单元具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述第二组变换系数包括N个子组，所述确定单元具体用于确定N个目标值，其中，第i目标值为第i子组中的变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述确定单元具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各变换系数之和；确定第二目标值，所述第二目标值为所述第二变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，所述处理单元具体用于根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述确定单元具体用于根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述确定单元具体用于根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述确定单元具体用于根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
结合第二方面或其上述实现方式的任一种，在第二方面的另一种实现方式中，所述处理单元具体用于根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
第三方面，提供一种解码方法，包括：从知识库中选取N个候选图像，其中，所述N个候选图像用于确定待解码图像的像素预测值，且每个候选图像与所述待解码图像的形状和大小均相同，所述待解码图像包括至少一个待解码的图像块；对所述待解码图像和N个目标图像中每个目标图像进行相同的变换，得到待解码图像的变换系数集和所述每个目标图像的变换系数集，所述N个目标图像为所述N个候选图像，或者所述N个目标图像为所述N个候选图像分别与所述待解码图像在对应像素点求差得到的图像，所述待解码图像的变换系数集与所述每个目标图像的变换系数集中的变换系数一一对应；从所述待解码图像的变换系数集中选取幅度满足预设阈值的变换系数，得到第一组变换系数；根据所述第一组变换系数，从所述每个目标图像的变换系数集中选出与所述第一组变换系数对应的第二组变换系数；根据所述N个目标图像对应的第二组变换系数，确定所述待解码图像与所述N个候选图像的图像差异值；根据所述待解码图像与所述N个候选图像的图像差异值，确定所述待解码图像的像素预测值；根据所述像素预测值对所述待解码图像进行解码。
结合第三方面，在第三方面的一种实现方式中，所述N个目标图像为所述N个候选图像，所述根据所述N个目标图像对应的第二组变换系数，确定所述待解码图像与所述N个候选图像的图像差异值，包括：根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待解码图像与所述每个候选图像的图像差异值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待解码图像与所述每个候选图像的图像差异值，包括：确定所述第一组变换系数和所述第二组变换系数中的各对应变换系数的差值；将所述各对应变换系数的差值求和，得到所述图像差异值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待解码图像与所述每个候选图像的图像差异值，包括：确定N个目标值，其中，所述第一组变换系数和所述第二组变换系数按照相同方式划分成N个子组，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应的变换系数的差值之和；根据所述N个目标值各自的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待解码图像与所述每个候选图像的图像差异值，包括：确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述待解码图像的变换系数集中除所述第一组变换系数外的剩余变换系数与所述每个候选图像的变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述N个目标图像为所述N个候选图像分别与所述待解码图像在对应像素点求差得到的图像，所述根据所述N个目标图像对应的第二组变换系数，确定所述待解码图像与所述N个候选图像的图像差异值，包括：根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待解码图像与所述每个目标图像对应的候选图像的图像差异值，其中，所述每个目标图像对应的候选图像与所述待解码图像在对应像素点求差得到所述每个目标图像。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待解码图像与所述每个目标图像对应的候选图像的图像差异值，包括：将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待解码图像与所述每个目标图像对应的候选图像的图像差异值，包括：确定N个目标值，其中，所述第二组变换系数被划分成N个子组，所述N个目标值中的第i目标值为第i子组中的各变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待解码图像与所述每个目标图像对应的候选图像的图像差异值，包括：确定第一目标值，所述第一目标值为所述第二组变换系数中各显著变换系数之和；确定第二目标值，所述第二目标值为所述每个图像的变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述待解码图像与所述多个候选图像的图像差异值，确定所述待解码图像的像素预测值，包括：根据所述待解码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的一个候选图像；将所述差异值最小的候选图像的像素值确定为所述待解码图像的像素预测值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述根据所述待解码图像与所述多个候选图像的图像差异值，确定所述待解码图像的像素预测值，包括：根据所述待解码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的E个候选图像，E≥2；根据所述待解码图像与所述E个候选图像中每个候选图像的图像差异值，确定所述每个候选图像的权重；根据所述E个候选图像的权重，对所述E候选图像的像素值进行加权平均，得到所述待解码图像的像素预测值。
结合第三方面或其上述实现方式的任一种，在第三方面的另一种实现方式中，所述从知识库中选取N个候选图像，包括：从码流中获取所述N个候选图像在所述知识库中的索引；根据所述索引，从所述知识库中选出所述N个候选图像。
第四方面，提供一种编码方法，包括：从知识库中选取N个候选图像，其中，所述N个候选图像用于确定待编码图像的像素预测值，且每个候选图像与所述待编码图像的形状和大小均相同，所述待编码图像包括至少一个待编码的图像块；对所述待编码图像和N个目标图像中每个目标图像进行相同的变换，得到待编码图像的变换系数集和所述每个目标图像的变换系数集，所述N个目标图像为所述N个候选图像，或者所述N个目标图像为所述N个候选图像分别与所述待编码图像在对应像素点求差得到的图像，所述待编码图像的变换系数集与所述每个目标图像的变换系数集中的变换系数一一对应；从所述待编码图像的变换系数集中选取幅度满足预设阈值的变换系数，得到第一组变换系数；根据所述第一组变换系数，从所述每个目标图像的变换系数集中选出与所述第一组变换系数对应的第二组变换系数；根据所述N个目标图像对应的第二组变换系数，确定所述待编码图像与所述N个候选图像的图像差异值；根据所述待编码图像与所述N个候选图像的图像差异值，确定所述待编码图像的像素预测值；根据所述像素预测值对所述待编码图像进行编码。
结合第四方面，在第四方面的一种实现方式中，所述N个目标图像为所述N个候选图像，所述根据所述N个目标图像对应的第二组变换系数，确定所述待编码图像与所述N个候选图像的图像差异值，包括：根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待编码图像与所述每个候选图像的图像差异值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待编码图像与所述每个候选图像的图像差异值，包括：确定所述第一组变换系数和所述第二组变换系数中的各对应变换系数的差值；将所述各对应变换系数的差值求和，得到所述图像差异值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待编码图像与所述每个候选图像的图像差异值，包括：确定N个目标值，其中，所述第一组变换系数和所述第二组变换系数按照相同方式划分成N个子组，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应的变换系数的差值之和；根据所述N个目标值各自的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待编码图像与所述每个候选图像的图像差异值，包括：确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述待编码图像的变换系数集中除所述第一组变换系数外的剩余变换系数与所述每个候选图像的变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述N个目标图像为所述N个候选图像分别与所述待编码图像在对应像素点求差得到的图像，所述根据所述N个目标图像对应的第二组变换系数，确定所述待编码图像与所述N个候选图像的图像差异值，包括：根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待编码图像与所述每个目标图像对应的候选图像的图像差异值，其中，所述每个目标图像对应的候选图像与所述待编码图像在对应像素点求差得到所述每个目标图像。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待编码图像与所述每个目标图像对应的候选图像的图像差异值，包括：将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待编码图像与所述每个目标图像对应的候选图像的图像差异值，包括：确定N个目标值，其中，所述第二组变换系数被划分成N个子组，所述N个目标值中的第i目标值为第i子组中的各变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待编码图像与所述每个目标图像对应的候选图像的图像差异值，包括：确定第一目标值，所述第一目标值为所述第二组变换系数中各显著变换系数之和；确定第二目标值，所述第二目标值为所述每个图像的变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述待编码图像与所述多个候选图像的图像差异值，确定所述待编码图像的像素预测值，包括：根据所述待编码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的一个候选图像；将所述差异值最小的候选图像的像素值确定为所述待编码图像的像素预测值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述根据所述待编码图像与所述多个候选图像的图像差异值，确定所述待编码图像的像素预测值，包括：根据所述待编码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的E个候选图像，E≥2；根据所述待编码图像与所述E个候选图像中每个候选图像的图像差异值，确定所述每个候选图像的权重；根据所述E个候选图像的权重，对所述E候选图像的像素值进行加权平均，得到所述待编码图像的像素预测值。
结合第四方面或其上述实现方式的任一种，在第四方面的另一种实现方式中，所述方法还包括：将所述N个候选图像在所述知识库中的索引写入码流。
第五方面，提供一种解码器，包括：
第一选取单元，用于从知识库中选取N个候选图像，其中，所述N个候选图像用于确定待解码图像的像素预测值，且每个候选图像与所述待解码图像的形状和大小均相同，所述待解码图像包括至少一个待解码的图像块；
变换单元，用于对所述待解码图像和N个目标图像中每个目标图像进行相同的变换，得到待解码图像的变换系数集和所述每个目标图像的变换系数集，所述N个目标图像为所述N个候选图像，或者所述N个目标图像为所述N个候选图像分别与所述待解码图像在对应像素点求差得到的图像，所述待解码图像的变换系数集与所述每个目标图像的变换系数集中的变换系数一一对应；
第二选取单元，用于从所述待解码图像的变换系数集中选取幅度满足预设阈值的变换系数，得到第一组变换系数；
第三选取单元，用于根据所述第一组变换系数，从所述每个目标图像的变换系数集中选出与所述第一组变换系数对应的第二组变换系数；
第一确定单元，用于根据所述N个目标图像对应的第二组变换系数，确定所述待解码图像与所述N个候选图像的图像差异值；
第二确定单元，用于根据所述待解码图像与所述N个候选图像的图像差异值，确定所述待解码图像的像素预测值；
解码单元，用于根据所述像素预测值对所述待解码图像进行解码。
结合第五方面，在第五方面的一种实现方式中，所述N个目标图像为所述N个候选图像，所述第一确定单元具体用于根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待解码图像与所述每个候选图像的图像差异值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第一确定单元具体用于确定所述第一组变换系数和所述第二组变换系数中的各对应变换系数的差值；将所述各对应变换系数的差值求和，得到所述图像差异值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第一确定单元具体用于确定N个目标值，其中，所述第一组变换系数和所述第二组变换系数按照相同方式划分成N个子组，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应的变换系数的差值之和；根据所述N个目标值各自的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第一确定单元具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述待解码图像的变换系数集中除所述第一组变换系数外的剩余变换系数与所述每个候选图像的变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述N个目标图像为所述N个候选图像分别与所述待解码图像在对应像素点求差得到的图像，所述第一确定单元具体用于根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待解码图像与所述每个目标图像对应的候选图像的图像差异值，其中，所述每个目标图像对应的候选图像与所述待解码图像在对应像素点求差得到所述每个目标图像。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第一确定单元具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第一确定单元具体用于确定N个目标值，其中，所述第二组变换系数被划分成N个子组，所述N个目标值中的第i目标值为第i子组中的各变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第一确定单元具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各显著变换系数之和；确定第二目标值，所述第二目标值为所述每个图像的变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第二确定单元具体用于根据所述待解码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的一个候选图像；将所述差异值最小的候选图像的像素值确定为所述待解码图像的像素预测值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第二确定单元具体用于根据所述待解码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的E个候选图像，E≥2；根据所述待解码图像与所述E个候选图像中每个候选图像的图像差异值，确定所述每个候选图像的权重；根据所述E个候选图像的权重，对所述E候选图像的像素值进行加权平均，得到所述待解码图像的像素预测值。
结合第五方面或其上述实现方式的任一种，在第五方面的另一种实现方式中，所述第一选取单元具体用于从码流中获取所述N个候选图像在所述知识库中的索引；根据所述索引，从所述知识库中选出所述N个候选图像。
第六方面，提供一种编码器，包括：
第一选取单元，用于从知识库中选取N个候选图像，其中，所述N个候选图像用于确定待编码图像的像素预测值，且每个候选图像与所述待编码图像的形状和大小均相同，所述待编码图像包括至少一个待编码的图像块；
变换单元，用于对所述待编码图像和N个目标图像中每个目标图像进行相同的变换，得到待编码图像的变换系数集和所述每个目标图像的变换系数集，所述N个目标图像为所述N个候选图像，或者所述N个目标图像为所述N个候选图像分别与所述待编码图像在对应像素点求差得到的图像，所述待编码图像的变换系数集与所述每个目标图像的变换系数集中的变换系数一一对应；
第二选取单元，用于从所述待编码图像的变换系数集中选取幅度满足预设阈值的变换系数，得到第一组变换系数；
第三选取单元，用于根据所述第一组变换系数，从所述每个目标图像的变换系数集中选出与所述第一组变换系数对应的第二组变换系数；
第一确定单元，用于根据所述N个目标图像对应的第二组变换系数，确定所述待编码图像与所述N个候选图像的图像差异值；
第二确定单元，用于根据所述待编码图像与所述N个候选图像的图像差异值，确定所述待编码图像的像素预测值；
编码单元，用于根据所述像素预测值对所述待编码图像进行编码。
结合第六方面，在第六方面的一种实现方式中，所述N个目标图像为所述N个候选图像，所述第一确定单元具体用于根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待编码图像与所述每个候选图像的图像差异值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第一确定单元具体用于确定所述第一组变换系数和所述第二组变换系数中的各对应变换系数的差值；将所述各对应变换系数的差值求和，得到所述图像差异值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第一确定单元具体用于确定N个目标值，其中，所述第一组变换系数和所述第二组变换系数按照相同方式划分成N个子组，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应的变换系数的差值之和；根据所述N个目标值各自的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第一确定单元具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述待编码图像的变换系数集中除所述第一组变换系数外的剩余变换系数与所述每个候选图像的变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述N个目标图像为所述N个候选图像分别与所述待编码图像在对应像素点求差得到的图像，所述第一确定单元具体用于根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待编码图像与所述每个目标图像对应的候选图像的图像差异值，其中，所述每个目标图像对应的候选图像与所述待编码图像在对应像素点求差得到所述每个目标图像。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第一确定单元具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第一确定单元具体用于确定N个目标值，其中，所述第二组变换系数被划分成N个子组，所述N个目标值中的第i目标值为第i子组中的各变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第一确定单元具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各显著变换系数之和；确定第二目标值，所述第二目标值为所述每个图像的变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第二确定单元具体用于根据所述待编码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的一个候选图像；将所述差异值最小的候选图像的像素值确定为所述待编码图像的像素预测值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述第二确定单元具体用于根据所述待编码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的E个候选图像，E≥2；根据所述待编码图像与所述E个候选图像中每个候选图像的图像差异值，确定所述每个候选图像的权重；根据所述E个候选图像的权重，对所述E候选图像的像素值进行加权平均，得到所述待编码图像的像素预测值。
结合第六方面或其上述实现方式的任一种，在第六方面的另一种实现方式中，所述编码器还包括：写入单元，用于将所述N个候选图像在所述知识库中的索引写入码流。
第七方面，提供一种解码器，用于从知识库中选取N个候选图像，其中，所述N个候选图像用于确定待解码图像的像素预测值，且每个候选图像与所述待解码图像的形状和大小均相同，所述待解码图像包括至少一个待解码的图像块；对所述待解码图像和N个目标图像中每个目标图像进行相同的变换，得到待解码图像的变换系数集和所述每个目标图像的变换系数集，所述N个目标图像为所述N个候选图像，或者所述N个目标图像为所述N个候选图像分别与所述待解码图像在对应像素点求差得到的图像，所述待解码图像的变换系数集与所述每个目标图像的变换系数集中的变换系数一一对应；从所述待解码图像的变换系数集中选取幅度满足预设阈值的变换系数，得到第一组变换系数；根据所述第一组变换系数，从所述每个目标图像的变换系数集中选出与所述第一组变换系数对应的第二组变换系数；根据所述N个目标图像对应的第二组变换系数，确定所述待解码图像与所述N个候选图像的图像差异值；根据所述待解码图像与所述N个候选图像的图像差异值，确定所述待解码图像的像素预测值；根据所述像素预测值对所述待解码图像进行解码。
结合第七方面，在第七方面的一种实现方式中，所述N个目标图像为所述N个候选图像，所述编码器具体用于根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待解码图像与所述每个候选图像的图像差异值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于确定所述第一组变换系数和所述第二组变换系数中的各对应变换系数的差值；将所述各对应变换系数的差值求和，得到所述图像差异值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于确定N个目标值，其中，所述第一组变换系数和所述第二组变换系数按照相同方式划分成N个子组，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应的变换系数的差值之和；根据所述N个目标值各自的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述待解码图像的变换系数集中除所述第一组变换系数外的剩余变换系数与所述每个候选图像的变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述N个目标图像为所述N个候选图像分别与所述待解码图像在对应像素点求差得到的图像，所述编码器具体用于根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待解码图像与所述每个目标图像对应的候选图像的图像差异值，其中，所述每个目标图像对应的候选图像与所述待解码图像在对应像素点求差得到所述每个目标图像。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于确定N个目标值，其中，所述第二组变换系数被划分成N个子组，所述N个目标值中的第i目标值为第i子组中的各变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各显著变换系数之和；确定第二目标值，所述第二目标值为所述每个图像的变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于根据所述待解码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的一个候选图像；将所述差异值最小的候选图像的像素值确定为所述待解码图像的像素预测值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于根据所述待解码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的E个候选图像，E≥2；根据所述待解码图像与所述E个候选图像中每个候选图像的图像差异值，确定所述每个候选图像的权重；根据所述E个候选图像的权重，对所述E候选图像的像素值进行加权平均，得到所述待解码图像的像素预测值。
结合第七方面或其上述实现方式的任一种，在第七方面的另一种实现方式中，所述编码器具体用于从码流中获取所述N个候选图像在所述知识库中的索引；根据所述索引，从所述知识库中选出所述N个候选图像。
第八方面，提供一种编码器，用于从知识库中选取N个候选图像，其中，所述N个候选图像用于确定待编码图像的像素预测值，且每个候选图像与所述待编码图像的形状和大小均相同，所述待编码图像包括至少一个待编码的图像块；对所述待编码图像和N个目标图像中每个目标图像进行相同的变换，得到待编码图像的变换系数集和所述每个目标图像的变换系数集，所述N个目标图像为所述N个候选图像，或者所述N个目标图像为所述N个候选图像分别与所述待编码图像在对应像素点求差得到的图像，所述待编码图像的变换系数集与所述每个目标图像的变换系数集中的变换系数一一对应；从所述待编码图像的变换系数集中选取幅度满足预设阈值的变换系数，得到第一组变换系数；根据所述第一组变换系数，从所述每个目标图像的变换系数集中选出与所述第一组变换系数对应的第二组变换系数；根据所述N个目标图像对应的第二组变换系数，确定所述待编码图像与所述N个候选图像的图像差异值；根据所述待编码图像与所述N个候选图像的图像差异值，确定所述待编码图像的像素预测值；根据所述像素预测值对所述待编码图像进行编码。
结合第八方面，在第八方面的一种实现方式中，所述N个目标图像为所述N个候选图像，所述编码器具体用于根据所述第一组变换系数和每个候选图像对应的第二组变换系数，确定所述待编码图像与所述每个候选图像的图像差异值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于确定所述第一组变换系数和所述第二组变换系数中的各对应变换系数的差值；将所述各对应变换系数的差值求和，得到所述图像差异值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于确定N个目标值，其中，所述第一组变换系数和所述第二组变换系数按照相同方式划分成N个子组，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应的变换系数的差值之和；根据所述N个目标值各自的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述待编码图像的变换系数集中除所述第一组变换系数外的剩余变换系数与所述每个候选图像的变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述N个目标图像为所述N个候选图像分别与所述待编码图像在对应像素点求差得到的图像，所述编码器具体用于根据所述N个目标图像中每个目标图像对应的第二组变换系数，确定所述待编码图像与所述每个目标图像对应的候选图像的图像差异值，其中，所述每个目标图像对应的候选图像与所述待编码图像在对应像素点求差得到所述每个目标图像。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于确定N个目标值，其中，所述第二组变换系数被划分成N个子组，所述N个目标值中的第i目标值为第i子组中的各变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各显著变换系数之和；确定第二目标值，所述第二目标值为所述每个图像的变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于根据所述待编码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的一个候选图像；将所述差异值最小的候选图像的像素值确定为所述待编码图像的像素预测值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器具体用于根据所述待编码图像与所述多个候选图像的图像差异值，从所述多个候选图像中选出图像差异值最小的E个候选图像，E≥2；根据所述待编码图像与所述E个候选图像中每个候选图像的图像差异值，确定所述每个候选图像的权重；根据所述E个候选图像的权重，对所述E候选图像的像素值进行加权平均，得到所述待编码图像的像素预测值。
结合第八方面或其上述实现方式的任一种，在第八方面的另一种实现方式中，所述编码器还用于将所述N个候选图像在所述知识库中的索引写入码流。
本发明实施例中，幅度满足预设的阈值条件的变换系数能够更好地反应图像的主要结构信息，利用幅度满足预设的阈值条件的变换系数确定出的图像差异值能够较好地反映图像间的差异程度，使得基于该图像差异值的后续图像处理更加准确。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例的处理图像的方法的示意性流程图。
图2是预测块的目标模版图像位置关系的示例图。
图3是本发明实施例的处理图像的装置的示意性框图。
图4是本发明实施例的处理图像的装置的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都应属于本发明保护的范围。
图1是本发明实施例的图像处理方法的示意性流程图。图1的方法包括：
110、对第一图像进行变换，得到第一变换系数集。
120、对第二图像进行变换，或者对第一图像和第二图像的差值图像进行变换，得到第二变换系数集。
应理解，本发明实施例中的图像也可以称为图样(patch)。第一图像和第二图像的差值图像具体可指第一图像和第二图像在对应像素点求差后得到的图像。
应理解，第一图像和第二图像可以是相同形状、相同大小的图像区域，包括相同数量的像素，其形状例如可以是矩形、L形、三角形、菱形、梯形、六边形等。
此外，第一图像可以是一个解码预测单元的预测图像，或者是解码预测单元对应的模版区域的重建图像，又或者是解码图像中一个预设形状的重建图像。第二图像可以是一个解码端知识库中的高质量图像，例如预先存储在知识库中的原始图像；第二图像也可以是一个已解码图像中的局部区域。
此外，对第一图像和第二图像分别进行相同的变换，得到第一变换系数集和第二变换系数集。其中，此处的变换可以采用多种常用的变换方式，例如采用离散余弦变换(Discrete Cosine Transform,DCT)、离散正弦变换(Discrete Sine Transform,DST)、哈达玛变换(Hadamard Transform)、小波变换(Wavelet Transform)、尺寸不变特征变换(Scale-invariant Feature Transform,SIFT)变换等。以DCT变换为例，图像为矩形图像时，可以用二维DCT变换将图像变换为一个二维变换矩阵，也可以将图像中的像素排列成一维矢量，用一维DCT变换将图像变换成一维矢量；又例如，当图像为三角形图像时，可以将图像中的像素排列成一维矢量，进行一维DCT变换，也可以将图像重新排列成矩形，进行二维DCT变换。
此外，变换系数集为图像经过变换得到的变换系数构成的集合，它可以包含图像经过变换得到的全部变换系数，也可以包含全部变换系数中的一部分系数，例如若干个预设系数位置的变换系数。例如，一个变换系数集可包含N个变换系数Ci(i＝1,2,...,N)，每个变换系数可对应一个编号(index)i，N为正整数。上述第一变换系数集和第二变换系数集可使用相同的变换系数编号方式。编号方式可以为多种形式，例如当使用二维DCT变换得到变换系数矩阵时，可以按照ZigZag扫描顺序对变换系数进行编号，或者也可以按照从左到右、从上到下的顺序对变换系数进行编号。
在变换时，可以针对像素的一个或多个色彩空间分量(color space component)进行变换。例如，可以只对其中的一个色彩空间分量(例如亮度分量)进行变换，后续会得到一个图像差异值；也可以对多个色彩空间分量分别进行变换，后续会得到多个图像差异值，再将每个色彩空间分量下的图像差异值求平均值，得到一个最终的图像差异值；当然，还可以将所有色彩空间分量组合在一起，统一进行变换，后续会得到一个图像差异值。
130、根据第一变换系数集中的变换系数的幅度，从第一变换系数集中选取第一组变换系数，其中，第一组变换系数中的变换系数的幅度满足预设的阈值条件。
上述预设的阈值条件可以指：第一组变换系数中的各变换系数的幅度不小于所述第一变换系数集中除所述第一组变换系数之外的剩余变换系数的幅度或者所述第一组变换系数中任一变换系数的幅度不小于该变换系数对应的阈值；
举例说明，可以采用如下两种处理方式中的任一种从第一变换系数集中获取第一组变换系数：
处理方式一：判断第一变换系数集中每个变换系数Ci的幅度是否超过一个阈值THi；如果该系数的幅度越过该阈值，将该系数加入上述第一组变换系数中。每个变换系数对比的阈值THi可以相同，也可以不同。该阈值可以为预设的常数，也可以为第一图像对应量化步长的x倍(x为正实数)；当第一图像为解码图像中的图像时，上述阈值还可以从该解码图像对应的码流中提取得到。
处理方式二：选取第一变换系数集中幅度最大的M个系数作为显著变换系数。其中，M为正整数，例如M为4、8、15、16、20或32。
需要说明的是，上述第一组变换系数为第一变换系数集中的哪些变换系数可以通过变换系数信息的方式进行指示。该变换系数信息可以有多种形式，例如变换系数信息可以为第一组变换系数在第一变换系数集中的编号；又如，变换系数信息可以为一个数组，该数组的维数与第一变换系数集中变换系数的个数相同，且数组中每一个元素指示第一变换系数集中的一个变换系数是否属于该第一组变换系数。
140、根据第一组变换系数和第二变换系数集，确定第一图像和第二图像之间的图像差异值。
具体而言，当第二变换系数是对第二图像进行变换得到的变换系数集时，步骤140可包括：根据第一组变换系数，以及第一变换系数集与第二变换系数集中变换系数的一一对应关系，从第二变换系数集中选出第二组变换系数；根据第一组变换系数和第二组变换系数的差值，确定第一图像和第二图像之间的图像差异值。当第二变换系数是对第一图像和第二图像的差值图像进行变换后得到的变换系数集时，步骤140可包括：根据第一组变换系数，以及第一变换系数集与第二变换系数集中变换系数的一一对应关系，从第二变换系数集中选出第二组变换系数；根据第二组变换系数，确定第一图像和第二图像之间的差异值。
150、根据图像差异值，对第一图像和第二图像进行处理。
上述处理可以包括以下处理中的至少一种：
1)分别确定第一图像和K个第二图像中每一个图像之间的图像差异值；根据K个图像差异值，确定加权系数，加权系数为关于图像差异值的减函数；根据加权系数，对第一图像和K个第二图像进行滤波处理，得到滤波图像；
2)分别确定第一图像和K个第二图像中每一个图像之间的图像差异值；将K个图像差异值中最小的G个第二图像，作为第一图像的最近邻图像；
3)分别确定第一图像和K个第二图像中每一个图像之间的图像差异值；根据K个图像差异值，确定加权系数，加权系数为关于图像差异值的减函数；根据加权系数，对K个第二图像的相邻图像进行加权平均，得到第一图像的相邻图像的预测图像；(对应实施例5)
4)分别确定第一图像和K个第二图像中每一个图像之间的图像差异值；根据K个图像差异值，确定加权系数，加权系数为关于图像差异值的减函数；根据加权系数，对第一图像和K个第二图像进行滤波处理，得到滤波图像，将滤波图像作为第一图像所在图像区域的解码重建图像；
5)分别确定第一图像和S个第二图像中每一个图像之间的图像差异值；将S个图像差异值中最小的E个第二图像，作为第一图像的最近邻图像；对E个第二图像计算加权平均或者选择第二图像中图像差异值最小的图像，得到第一图像的预测图像；根据预测图像对第一图像进行编码处理。
本发明实施例中，幅度满足预设的阈值条件的变换系数能够更好地反应图像的主要结构信息，利用幅度满足预设的阈值条件的变换系数确定出的图像差异值能够较好地反映图像间的差异程度，使得基于该图像差异值的后续图像处理更加准确。
可选地，作为一个实施例，第二变换系数集是对第二图像进行变换得到的变换系数集，步骤140可包括：根据第一变换系数集与第二变换系数集中变换系数的一一对应关系，从第二变换系数集中选取与第一组变换系数对应的第二组变换系数；根据第一组变换系数和第二组变换系数，确定图像差异值。
可选地，作为一个实施例，上述根据第一组变换系数和第二组变换系数，确定图像差异值可包括：确定第一组变换系数和第二组变换系数中各对应变换系数的差值；将各对应变换系数的差值之和确定为图像差异值。
可选地，作为一个实施例，第一组变换系数和第二组变换系数均按照相同方式划分为N个子组，上述根据第一组变换系数和第二组变换系数，确定图像差异值可包括：确定N个目标值，其中，N个目标值中的第i目标值为第一组变换系数中的第i子组与第二组变换系数中的第i子组中各对应变换系数的差值之和；根据N个子组的加权系数，对N个目标值进行加权求和，得到图像差异值。
应理解，上述加权系数(weight)为实数，通常为正实数，子组的加权系数可以由子组中的变换系数在变换系数集中的位置决定。例如，当第一图像的变换为DCT或DST变换时，将所有变换系数按照常用的ZigZag扫描顺序进行编号，第一变换系数集中的编号值小于总编号值1/2的显著变换系数(即变换系数的幅度满足预设的阈值条件的变换系数)划分为子组1，其加权系数为0.75；第一变换系数集中的其余显著变换系数划分子组2，其加权系数为0.25。又例如，当变换为DCT或DST变换且第一图像为矩形时，第一变换系数集中的位于变换系数矩阵左上角1/4区域中的显著变换系数划分为子组1，其加权系数为1.2；将第一变换系数集中的位于变换系数矩阵中右上角1/4区域和左下角1/4区域中的显著变换系数划分为子组2，其加权系数为0.8；将第一变换系数集中的位于变换系数矩阵中右下角1/4区域的显著变换系数划分为子组3，其加权系数为0.25。
可选地，作为一个实施例，上述根据第一组变换系数和第二组变换系数，确定图像差异值可包括：确定第一目标值，其中，第一目标值为第一组变换系数与第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，第二目标值为第一变换系数集中除第一组变换系数外的剩余变换系数与第二变换系数集中除第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据第一目标值和第二目标值的加权系数，对第一目标值和第二目标值进行加权求和，得到图像差异值。
具体地，第一目标值的加权系数可以为正实数，例如可以选取1、0.5或2等，第二目标值的加权系数可以为非零实数，例如可以选取-0.2、0.5或0.8等；第一目标值的加权系数和第二目标值的加权系数可以不相等，通常第一目标值的加权系数大于第二目标值的加权系数。
应理解，上文提到的差值之和可以是均方误差(MSE)、平均绝对差(MAD)、平方误差和(SSE)、绝对误差和(SAD)其中之一，也可以使用其它的求和计算方法。更具体的，例如当差值之和使用平方误差和时，将两组变换系数中对应的变换系数两两相减得到一组差值，将每个差值的平方相加得到平方误差和；又例如当差值之和使用平均绝对差时，将两组变换系数中对应的变换系数相减得到一组差值，将每个差值的绝对值相加得到绝对误差和，再将绝对误差和除以差值的个数进行归一化，得到平均绝对差。
可选地，作为一个实施例，第二变换系数集是对第一图像和第二图像的差值图像进行变换得到的变换系数集，步骤140可包括：根据第一变换系数集与第二变换系数集中变换系数的一一对应关系，从第二变换系数集中选取与第一组变换系数对应的第二组变换系数；根据第二组变换系数，确定图像差异值。
可选地，作为一个实施例，上述根据第二组变换系数，确定图像差异值，包括：将第二组变换系数中各变换系数之和确定为图像差异值。
可选地，作为一个实施例，第二组变换系数包括N个子组，上述根据第二组变换系数，确定图像差异值可包括：确定N个目标值，其中，第i目标值为第i子组中的变换系数之和；根据N个目标值的加权系数，对N个目标值进行加权求和，得到图像差异值。
可选地，作为一个实施例，上述根据第二组变换系数，确定图像差异值可包括：确定第一目标值，第一目标值为第二组变换系数中各变换系数之和；确定第二目标值，第二目标值为第二变换系数集中除第二组变换系数外的剩余变换系数之和；根据第一目标值和第二目标值的加权系数，对第一目标值和第二目标值进行加权求和，得到图像差异值。
具体地，第一数值总和的加权系数可以为正实数，例如1、0.5或2等，第二数值总和的加权系数可以为非零实数，例如-0.2、0.5、0.8或0.9等；第一数值总和的加权系数和第二数值总和的加权系数可以不相等，通常第一数值总和的加权系数大于第二数值总和的加权系数。
需要说明的是，上述变换系数之和可以是绝对值之和、平方值之和、平方值的均值、绝对值的均值、均方根(Root Mean Squared Error,RMSE)其中之一，也可以使用其它的计算形式。更具体的，例如当变换系数之和使用绝对值之和时，将每个系数的绝对值相加得到绝对值之和；又例如当变换系数之和使用平方值的均值时，将变换系数的平方值相加得到平方值之和，再将平方值之和除以这些变换系数的个数进行归一化，得到平方值的均值。
下面结合具体的实施例，详细描述利用上述图像差异值进行后续处理的多种方式。
可选地，作为一个实施例，第一图像为目标图像，第二图像为K个候选图像中的任意候选图像，步骤140可包括：根据目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；根据K个候选图像的像素值，以及K个候选图像的加权系数，确定目标图像的滤波图像。
上述滤波图像的视觉质量高于目标图像，将滤波图像替换目标图像，可以增强目标图像所在图像的视觉质量。
具体地，上述K个候选图像中任意一个候选图像与目标图像可具有相同形状和大小。目标图像可以是一幅图像中一个区域，例如解码图像中一个预设形状的图像，预设形状例如为矩形或三角形。此外，目标图像与K个候选图像中每个候选图像具有一个图像差异值，且目标图像与每个候选图像之间图像差异值的确定方式均可采用上述实施例描述的方式。
上述像素值可以为像素的色彩空间分量之一，此时像素值为一个标量；像素值也可以是像素的色彩空间分量中多个分量组成的多维矢量。像素的色彩空间例如RGB、YCbCr、YUV、HSV、CIE Lab等常用色彩空间。
上述根据目标图像和每个候选图像之间的图像差异值，确定每个候选图像的加权系数的方式可以有多种实现方式，下面介绍几种实现方式。
例如，根据确定每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示目标图像和第k个候选图像的图像差异值，Wk表示第k候选图像的加权系数。
又如，根据Wk＝b2-(Dk)a2/h2确定每个候选图像对应的加权系数，其中，b2、a2和h2均表示正实数，Dk表示目标图像和第k个候选图像的图像差异值，Wk表示第k候选图像的加权系数。
又如，根据确定每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示目标图像和第k个候选图像的图像差异值，Wk表示第k候选图像的加权系数。
此外，上述根据K个候选图像的像素值，以及K个候选图像的加权系数，确定目标图像的滤波图像的方式也有多种，例如可以根据确定目标图像的滤波图像，其中，Pfj表示滤波图像在第j像素点的像素值，W0表示目标图像的加权系数，Wk表示第k候选图像的加权系数，P0j表示目标图像在第j像素点的像素值，Pkj表示第k候选图像在第j像素点的像素值。
可选地，作为一个实施例，第一图像为目标图像，第二图像为K个候选图像中的任意候选图像，根据图像差异值，对第一图像和第二图像进行后续图像处理，包括：根据目标图像与K个候选图像的图像差异值，从K个候选图像中选取与目标图像的图像差异值最小的G个候选图像，作为目标图像的最近邻图像，其中，G小于等于K。
本实施例可以看成是一种图像最近邻(nearest neighbor)搜索方法。目标图像可以是一幅图像中某个图像区域，例如解码图像中一个预设形状的图像，目标图像也可以是一个解码预测单元的预测图像，例如通过H.265中基于运动矢量的帧间预测得到的预测图像；预设形状例如为矩形或三角形。K个候选图像可以是当前解码图像已重建区域中的图像或者其它已解码图像中的图像，也可以是解码端知识库中的图像。
应理解，目标图像与K个候选图像中每个候选图像具有图像差异值，且目标图像与每个候选图像的图像差异值的确定方式可以采用上述任意实施例中的图像差异值确定方式。
应理解，找到图像差异值最小的G个图像，作为目标图像的最近邻图像，其中，G为正整数，例如G＝1、2、4、6、8等。
需要说明的是，最近邻图像可以用于增强目标图像，例如将图像差异值最小的最近邻图像替换目标图像；又例如采用最近邻图像对目标图像进行滤波，将上述G个最近邻图像与目标图像一起合成一个滤波图像，来替换目标图像P0。最近邻图像还可以用于指示迭代搜索的起始位置，例如先在起始搜索点周围的若干个图像中找到最近邻图像，再以最近邻图像为新的搜索起始点，进行下一次迭代搜索。
可选地，作为一个实施例，第一图像为预测块对应的目标模板图像，其中，预测块对应K个候选块，K个候选块分别对应K个候选模板图像，第二图像为K个候选模板图像分别与目标模板图像在对应像素点求差得到的K个残差模板图像中的任意残差模板图像，根据图像差异值，对第一图像和第二图像进行后续图像处理，包括：根据目标模板图像与K个残差模板图像的图像差异值，从K个残差模板图像中选取与目标模板图像的图像差异值最小的G个残差模板图像，其中，G小于等于K；从K个候选块中选取G个残差模板图像对应的G个候选块；根据G个候选块的像素值，确定预测块的像素预测值。需要说明的是，也可以是第一图像为预测块对应的目标模板图像，第三图像为K个候选模板图像分别与目标模板图像在对应像素点求差得到的K个残差模板图像中的任意残差模板图像。
本实施例可以看成一种模版匹配预测方法。预测块通常为一个矩形区域，它和任意一个候选块可具有相同形状和大小；目标模版图像和任意一个候选模版图像可具有相同形状和大小；预测块和目标模版图像构成的区域与任意一对候选块和候选模版图像构成的区域可具有相同形状和大小。目标模版图像可与预测块邻接，通常为矩形区域或者L形区域，也可以是其它的形状，图2给出了预测块B0的目标模版图像T0的几种示例。
此外，候选模版图像可以是解码端知识库中的图像，也可以是当前解码图像已重建区域中的图像或者其它已解码图像中的图像。
找到图像差异值最小的G个候选模版图像对应的候选块Bg(g＝1,2,..,G)，作为预测块B0的最近邻图像；其中，G为正整数，且G≤Q，例如G＝1、2、4、6、8等。
上述根据G个候选块的像素值，确定预测块的像素预测值可包括：根据确定预测块的像素预测值，其中，B0j表示预测块在第j像素点的像素值，Bgj表示第g候选块在第j像素点的像素值，Wg表示第g候选块对应的加权系数。
候选块对应的加权系数Wg可以根据该候选块的候选模版图像与目标模版图像的图像差异值Dg决定。例如，加权系数Wg随着Dg增大而减小，具体地，可以根据确定G个候选块对应的加权系数，其中，b1、a1和h1均表示正实数，Dg表示目标图像和第g个候选图像之间的图像差异值，Wg表示第g候选块对应的加权系数。
又如，根据Wg＝b2-(Dg)a2/h2确定G个候选图像中每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dg表示目标图像和第g个候选图像的图像差异值，Wg表示第g候选图像的加权系数。
又如，根据确定G个候选图像中每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dg表示目标图像和第g个候选图像的图像差异值，Wg表示第g候选图像的加权系数。
上文中结合图1至图2，详细描述了根据本发明实施例的处理图像的方法，下面将结合图3至图4，描述根据本发明实施例的处理图像的装置。
应理解，图3和图4描述的处理图像的装置能够实现图1中描述的处理图像的方法的各个步骤，为了简洁，适当省略重复的描述。
图3是本发明实施例的处理图像的装置的示意性框图。图3的装置300包括：
第一变换单元310，用于对第一图像进行变换，得到第一变换系数集；
第二变换单元320，用于对第二图像进行所述变换，或者对第一图像和第二图像的差值图像进行所述变换，得到第二变换系数集；
选取单元330，用于根据所述第一变换单元310得到的所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；
确定单元340，用于根据所述选取单元330选取的所述第一组变换系数和所述第二变换单元320得到的所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；
处理单元350，用于根据所述确定单元340确定的所述图像差异值，对所述第一图像和所述第二图像进行处理。
本发明实施例中，幅度满足预设的阈值条件的变换系数能够更好地反应图像的主要结构信息，利用幅度满足预设的阈值条件的变换系数确定出的图像差异值能够较好地反映图像间的差异程度，使得基于该图像差异值的后续图像处理更加准确。
可选地，作为一个实施例，所述第二变换系数集是对所述第二图像进行所述变换得到的变换系数集，所述确定单元340具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值。
可选地，作为一个实施例，所述确定单元340具体用于确定所述第一组变换系数和所述第二组变换系数中各对应变换系数的差值；将所述各对应变换系数的差值之和确定为所述图像差异值。
可选地，作为一个实施例，所述第一组变换系数和所述第二组变换系数均按照相同方式划分为N个子组，所述确定单元340具体用于确定N个目标值，其中，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应变换系数的差值之和；根据所述N个子组的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述确定单元340具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述第一变换系数集中除所述第一组变换系数外的剩余变换系数与所述第二变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述第二变换系数集是对所述第一图像和所述第二图像的差值图像进行所述变换得到的变换系数集，所述确定单元340具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第二组变换系数，确定所述图像差异值。
可选地，作为一个实施例，所述确定单元340具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
可选地，作为一个实施例，所述第二组变换系数包括N个子组，所述确定单元340具体用于确定N个目标值，其中，第i目标值为第i子组中的变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述确定单元340具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各变换系数之和；确定第二目标值，所述第二目标值为所述第二变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，所述处理单元350具体用于根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
可选地，作为一个实施例，所述确定单元340具体用于根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
可选地，作为一个实施例，所述确定单元340具体用于根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
可选地，作为一个实施例，所述确定单元340具体用于根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
可选地，作为一个实施例，所述处理单元350具体用于根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
图4是本发明实施例的处理图像的装置的示意性框图。图4的装置400包括：
存储器410，用于存储程序；
处理器420，用于执行程序，当所述程序被执行时，所述处理器420具体用于：对第一图像进行变换，得到第一变换系数集；对第二图像进行所述变换，或者对第一图像和第二图像的差值图像进行所述变换，得到第二变换系数集；根据所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；根据所述图像差异值，对所述第一图像和所述第二图像进行处理。
本发明实施例中，幅度满足预设的阈值条件的变换系数能够更好地反应图像的主要结构信息，利用幅度满足预设的阈值条件的变换系数确定出的图像差异值能够较好地反映图像间的差异程度，使得基于该图像差异值的后续图像处理更加准确。
可选地，作为一个实施例，所述第二变换系数集是对所述第二图像进行所述变换得到的变换系数集，所述处理器420具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值。
可选地，作为一个实施例，所述处理器420具体用于确定所述第一组变换系数和所述第二组变换系数中各对应变换系数的差值；将所述各对应变换系数的差值之和确定为所述图像差异值。
可选地，作为一个实施例，所述第一组变换系数和所述第二组变换系数均按照相同方式划分为N个子组，所述处理器420具体用于确定N个目标值，其中，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应变换系数的差值之和；根据所述N个子组的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述处理器420具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述第一变换系数集中除所述第一组变换系数外的剩余变换系数与所述第二变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述第二变换系数集是对所述第一图像和所述第二图像的差值图像进行所述变换得到的变换系数集，所述处理器420具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第二组变换系数，确定所述图像差异值。
可选地，作为一个实施例，所述处理器420具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
可选地，作为一个实施例，所述第二组变换系数包括N个子组，所述处理器420具体用于确定N个目标值，其中，第i目标值为第i子组中的变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述处理器420具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各变换系数之和；确定第二目标值，所述第二目标值为所述第二变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
可选地，作为一个实施例，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，所述处理器420具体用于根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
可选地，作为一个实施例，所述处理器420具体用于根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
可选地，作为一个实施例，所述处理器420具体用于根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
可选地，作为一个实施例，所述处理器420具体用于根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
可选地，作为一个实施例，所述处理器420具体用于根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
应理解，在本发明实施例中，术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系。例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (32)

1.一种处理图像的方法，其特征在于，包括：
对第一图像进行变换，得到第一变换系数集；
对第二图像进行所述变换，得到第二变换系数集；
根据所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；
根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；其中，所述第二变换系数集是对所述第二图像进行所述变换得到的变换系数集，
所述根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值，包括：
根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；
根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值；
根据所述图像差异值，对所述第一图像和所述第二图像进行处理；其中，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，
所述根据所述图像差异值，对所述第一图像和所述第二图像进行处理，包括：
根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；
根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
2.如权利要求1所述的方法，其特征在于，所述根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值，包括：
确定所述第一组变换系数和所述第二组变换系数中各对应变换系数的差值；
将所述各对应变换系数的差值之和确定为所述图像差异值。
3.如权利要求1所述的方法，其特征在于，所述第一组变换系数和所述第二组变换系数均按照相同方式划分为N个子组，
所述根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值，包括：
确定N个目标值，其中，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应变换系数的差值之和；
根据所述N个子组的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
4.如权利要求1所述的方法，其特征在于，所述根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值，包括：
确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；
确定第二目标值，其中，所述第二目标值为所述第一变换系数集中除所述第一组变换系数外的剩余变换系数与所述第二变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；
根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
5.如权利要求1至4中任一项所述的方法，其特征在于，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数，包括：
根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
6.如权利要求1至4中任一项所述的方法，其特征在于，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数，包括：
根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
7.如权利要求1至4中任一项所述的方法，其特征在于，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像对应的加权系数，包括：
根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
8.如权利要求1至4中任一项所述的方法，其特征在于，所述根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像，包括：
根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
9.一种处理图像的方法，其特征在于，包括：
对第一图像进行变换，得到第一变换系数集；
对第一图像和第二图像的差值图像进行所述变换，得到第二变换系数集；
根据所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；
根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；其中，所述第二变换系数集是对所述第一图像和所述第二图像的差值图像进行所述变换得到的变换系数集，
所述根据所述第一组变换系数和所述第二变换系数集，确定第一图像和第二图像之间的图像差异值，包括：
根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；
根据所述第二组变换系数，确定所述图像差异值；
根据所述图像差异值，对所述第一图像和所述第二图像进行处理；其中，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，
所述根据所述图像差异值，对所述第一图像和所述第二图像进行处理，包括：
根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；
根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
10.如权利要求9所述的方法，其特征在于，所述根据所述第二组变换系数，确定所述图像差异值，包括：
将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
11.如权利要求9所述的方法，其特征在于，所述第二组变换系数包括N个子组，
所述根据所述第二组变换系数，确定所述图像差异值，包括：
确定N个目标值，其中，第i目标值为第i子组中的变换系数之和；
根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
12.如权利要求9所述的方法，其特征在于，所述根据所述第二组变换系数，确定所述图像差异值，包括：
确定第一目标值，所述第一目标值为所述第二组变换系数中各变换系数之和；
确定第二目标值，所述第二目标值为所述第二变换系数集中除所述第二组变换系数外的剩余变换系数之和；
根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
13.如权利要求9至12中任一项所述的方法，其特征在于，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数，包括：
根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
14.如权利要求9至12中任一项所述的方法，其特征在于，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数，包括：
根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
15.如权利要求9至12中任一项所述的方法，其特征在于，所述根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像对应的加权系数，包括：
根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
16.如权利要求9至12中任一项所述的方法，其特征在于，所述根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像，包括：
根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
17.一种处理图像的装置，其特征在于，包括：
第一变换单元，用于对第一图像进行变换，得到第一变换系数集；
第二变换单元，用于对第二图像进行所述变换，得到第二变换系数集；
选取单元，用于根据所述第一变换单元得到的所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；
确定单元，用于根据所述选取单元选取的所述第一组变换系数和所述第二变换单元得到的所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；其中，所述第二变换系数集是对所述第二图像进行所述变换得到的变换系数集，所述确定单元具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第一组变换系数和所述第二组变换系数，确定所述图像差异值；
处理单元，用于根据所述确定单元确定的所述图像差异值，对所述第一图像和所述第二图像进行处理；其中，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，所述处理单元具体用于根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
18.如权利要求17所述的装置，其特征在于，所述确定单元具体用于确定所述第一组变换系数和所述第二组变换系数中各对应变换系数的差值；将所述各对应变换系数的差值之和确定为所述图像差异值。
19.如权利要求17所述的装置，其特征在于，所述第一组变换系数和所述第二组变换系数均按照相同方式划分为N个子组，所述确定单元具体用于确定N个目标值，其中，所述N个目标值中的第i目标值为所述第一组变换系数中的第i子组与所述第二组变换系数中的第i子组中各对应变换系数的差值之和；根据所述N个子组的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
20.如权利要求17所述的装置，其特征在于，所述确定单元具体用于确定第一目标值，其中，所述第一目标值为所述第一组变换系数与所述第二组变换系数中各对应变换系数的差值之和；确定第二目标值，其中，所述第二目标值为所述第一变换系数集中除所述第一组变换系数外的剩余变换系数与所述第二变换系数集中除所述第二组变换系数外的剩余变换系数中各对应变换系数的差值之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
21.如权利要求17至20中任一项所述的装置，其特征在于，所述确定单元具体用于根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
22.如权利要求17至20中任一项所述的装置，其特征在于，所述确定单元具体用于根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
23.如权利要求17至20中任一项所述的装置，其特征在于，所述确定单元具体用于根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
24.如权利要求17至20中任一项所述的装置，其特征在于，所述处理单元具体用于根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
25.一种处理图像的装置，其特征在于，包括：
第一变换单元，用于对第一图像进行变换，得到第一变换系数集；
第二变换单元，用于对第一图像和第二图像的差值图像进行所述变换，得到第二变换系数集；
选取单元，用于根据所述第一变换单元得到的所述第一变换系数集中的变换系数的幅度，从所述第一变换系数集中选取第一组变换系数，其中，所述第一组变换系数中的变换系数的幅度满足预设的阈值条件；
确定单元，用于根据所述选取单元选取的所述第一组变换系数和所述第二变换单元得到的所述第二变换系数集，确定第一图像和第二图像之间的图像差异值；其中，所述第二变换系数集是对所述第一图像和所述第二图像的差值图像进行所述变换得到的变换系数集，所述确定单元具体用于根据所述第一变换系数集与所述第二变换系数集中变换系数的一一对应关系，从所述第二变换系数集中选取与所述第一组变换系数对应的第二组变换系数；根据所述第二组变换系数，确定所述图像差异值；
处理单元，用于根据所述确定单元确定的所述图像差异值，对所述第一图像和所述第二图像进行处理；其中，所述第一图像为目标图像，所述第二图像为K个候选图像中的任意候选图像，所述处理单元具体用于根据所述目标图像和每个候选图像的图像差异值，确定所述每个候选图像的加权系数；根据所述K个候选图像的像素值，以及所述K个候选图像的加权系数，确定所述目标图像的滤波图像。
26.如权利要求25所述的装置，其特征在于，所述确定单元具体用于将所述第二组变换系数中各变换系数之和确定为所述图像差异值。
27.如权利要求25所述的装置，其特征在于，所述第二组变换系数包括N个子组，所述确定单元具体用于确定N个目标值，其中，第i目标值为第i子组中的变换系数之和；根据所述N个目标值的加权系数，对所述N个目标值进行加权求和，得到所述图像差异值。
28.如权利要求25所述的装置，其特征在于，所述确定单元具体用于确定第一目标值，所述第一目标值为所述第二组变换系数中各变换系数之和；确定第二目标值，所述第二目标值为所述第二变换系数集中除所述第二组变换系数外的剩余变换系数之和；根据所述第一目标值和所述第二目标值的加权系数，对所述第一目标值和所述第二目标值进行加权求和，得到所述图像差异值。
29.如权利要求25至28中任一项所述的装置，其特征在于，所述确定单元具体用于根据确定所述每个候选图像的加权系数，其中，b1、a1和h1均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
30.如权利要求25至28中任一项所述的装置，其特征在于，所述确定单元具体用于根据Wk＝b2-(Dk)a2/h2确定所述每个候选图像的加权系数，其中，b2、a2和h2均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
31.如权利要求25至28中任一项所述的装置，其特征在于，所述确定单元具体用于根据确定所述每个候选图像的加权系数，其中，b3、a3和h3均表示正实数，Dk表示所述第一图像和第k个候选图像的图像差异值，Wk表示所述第k个候选图像的加权系数。
32.如权利要求25至28中任一项所述的装置，其特征在于，所述处理单元具体用于根据确定所述滤波图像，其中，Pfj表示所述滤波图像在第j像素点的像素值，W0表示所述第一图像的加权系数，Wk表示第k个候选图像的加权系数，P0j表示所述第一图像在第j像素点的像素值，Pkj表示所述第k个候选图像在第j像素点的像素值。
CN201510012142.4A 2015-01-09 2015-01-09 处理图像的方法和装置 Active CN104602025B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201510012142.4A CN104602025B (zh) 2015-01-09 2015-01-09 处理图像的方法和装置
EP16734909.1A EP3236658B1 (en) 2015-01-09 2016-01-06 Image processing method and device determining an image difference using transform coefficients
PCT/CN2016/070228 WO2016110249A1 (zh) 2015-01-09 2016-01-06 处理图像的方法和装置
US15/645,052 US10291935B2 (en) 2015-01-09 2017-07-10 Image processing method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510012142.4A CN104602025B (zh) 2015-01-09 2015-01-09 处理图像的方法和装置

Publications (2)

Publication Number Publication Date
CN104602025A CN104602025A (zh) 2015-05-06
CN104602025B true CN104602025B (zh) 2018-11-20

Family

ID=53127461

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510012142.4A Active CN104602025B (zh) 2015-01-09 2015-01-09 处理图像的方法和装置

Country Status (4)

Country Link
US (1) US10291935B2 (zh)
EP (1) EP3236658B1 (zh)
CN (1) CN104602025B (zh)
WO (1) WO2016110249A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104602025B (zh) 2015-01-09 2018-11-20 华为技术有限公司 处理图像的方法和装置
US10869060B2 (en) * 2018-01-30 2020-12-15 Google Llc Efficient context model computation design in transform coefficient coding
CN109242011A (zh) * 2018-08-27 2019-01-18 深圳开立生物医疗科技股份有限公司 一种识别图像差异的方法及装置
CN111416977B (zh) * 2019-01-07 2024-02-09 浙江大学 视频编码器、视频解码器及相应方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2894067B2 (ja) * 1992-02-26 1999-05-24 日本電気株式会社 動画像符号化制御方法および動画像符号化装置
CN1062701C (zh) * 1995-09-12 2001-02-28 大宇电子株式会社 用于编码目标轮廓的装置
US20040086152A1 (en) * 2002-10-30 2004-05-06 Ramakrishna Kakarala Event detection for video surveillance systems using transform coefficients of compressed images
US20060285590A1 (en) * 2005-06-21 2006-12-21 Docomo Communications Laboratories Usa, Inc. Nonlinear, prediction filter for hybrid video compression
JP4555257B2 (ja) * 2006-06-06 2010-09-29 パナソニック株式会社 画像符号化装置
CN101409845B (zh) * 2008-10-31 2010-10-06 北京大学软件与微电子学院 一种avs视频编码中的视频失真度估计方法及其装置
US8396325B1 (en) * 2009-04-27 2013-03-12 Google Inc. Image enhancement through discrete patch optimization
CN102783151A (zh) * 2010-01-08 2012-11-14 诺基亚公司 用于视频编码的装置、方法和计算机程序
CN101783954B (zh) * 2010-03-12 2012-08-08 厦门大学 一种视频图像编解码方法
US9451271B2 (en) * 2011-07-21 2016-09-20 Blackberry Limited Adaptive filtering based on pattern information
CN103108177B (zh) * 2011-11-09 2016-11-23 华为技术有限公司 图像编码方法及图像编码装置
WO2013131851A2 (en) * 2012-03-05 2013-09-12 Thomson Licensing Method and apparatus for performing hierarchical super-resolution of an input image
CN104350746A (zh) * 2012-05-31 2015-02-11 汤姆逊许可公司 基于局部幅度和相位谱的图像质量测量
US9344742B2 (en) * 2012-08-10 2016-05-17 Google Inc. Transform-domain intra prediction
US9171226B2 (en) * 2012-09-26 2015-10-27 Carnegie Mellon University Image matching using subspace-based discrete transform encoded local binary patterns
CN104685884B (zh) * 2012-10-05 2017-10-24 华为技术有限公司 用于视频编码的方法及设备、用于视频解码的方法
CN103442235B (zh) * 2013-09-06 2017-01-25 融创天下（上海）科技发展有限公司 一种图像处理方法以及装置
CN103974076B (zh) 2014-05-19 2018-01-12 华为技术有限公司 图像编解码方法和设备、系统
CN104602025B (zh) * 2015-01-09 2018-11-20 华为技术有限公司 处理图像的方法和装置

Also Published As

Publication number Publication date
EP3236658A4 (en) 2018-01-03
WO2016110249A1 (zh) 2016-07-14
CN104602025A (zh) 2015-05-06
US20170310998A1 (en) 2017-10-26
US10291935B2 (en) 2019-05-14
EP3236658A1 (en) 2017-10-25
EP3236658B1 (en) 2019-08-14

Similar Documents

Publication Publication Date Title
RU2665237C1 (ru) Устройство кодирования движущихся изображений, устройство декодирования движущихся изображений, способ кодирования движущихся изображений и способ декодирования движущихся изображений
CN105959706B (zh) 图像编码装置和方法、以及图像译码装置和方法
CN103797800B (zh) 推导参考模式值以及编码和解码表示预测模式的信息
CN103081474B (zh) 用于对运动图片进行解码的装置
CN104702962B (zh) 帧内编解码方法、编码器和解码器
CN103141105B (zh) 用于分割块的方法和解码设备
CN107071456B (zh) 解码视频信号的方法
JP2020527001A (ja) 点群エンコーダ
CN108605128A (zh) 合并用于视频译码的用于多类别块的滤波器
CN107925763A (zh) 等级分割中的块级别变换选择和隐式信令的编码变换方法和设备
JP5490404B2 (ja) 画像復号装置
CN105284112B (zh) 用于确定量化参数的值的方法和装置
KR20180019688A (ko) 픽처 예측 방법 및 픽처 예측 장치
JP2017523668A (ja) ビデオ符号化用の高コンテンツ適応型品質回復フィルタ処理のためのシステムおよび方法
CN107046645A (zh) 图像编解码方法及装置
JP2017509279A (ja) 画像符号化／復号化方法及び装置
CN104602025B (zh) 处理图像的方法和装置
CN106170093B (zh) 一种帧内预测性能提升编码方法
CN109845252A (zh) 用于视频编码的设备和方法
CN109845263A (zh) 用于视频编码的设备和方法
CN104754362B (zh) 使用精细划分块匹配的图像压缩方法
CN104704826B (zh) 两步量化和编码方法和装置
CN110226327A (zh) 影像编码方法/装置、影像解码方法/装置以及保存有比特流的记录介质
CN107211133A (zh) 反量化变换系数的方法、装置及解码设备
CN103139563A (zh) 编码和重构像素块的方法以及相应设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant