WO2014044027A1

WO2014044027A1 - 一种放大图像的方法

Info

Publication number: WO2014044027A1
Application number: PCT/CN2013/071098
Authority: WO
Inventors: 干宗良; 朱秀昌; 夏青; 张园园; 石腾
Original assignee: 华为技术有限公司
Priority date: 2012-09-18
Filing date: 2013-01-30
Publication date: 2014-03-27
Also published as: CN103679631A; CN103679631B

Abstract

本发明为解决因非局部滤波器参数构造过程计算复杂度高影响了图像放大速度问题，提供了一种放大图像的方法，包括：将所述低分辨率hr图像的像素点按像素特性分为低分辨率lr像素类和hr像素类；依据所述边缘的像素点确定既是边缘的像素点且归属于hr像素类的像素点，分别计算所述确定的各hr像素类的像素点与所述lr像素类中的像素点的相似距离，并获取lr像素类中相似距离满足相似性的像素点；构造非局部nl滤波器的参数；其中，仅通过计算高分辨率像素类与高分辨率像素类的像素点的相似距离来生成nl滤波器的参数，简化了nl滤波器参数的计算复杂度。

Description

一种放大图像的方法

本申请要求于 2012 年 09 月 18 日提交中国专利局、申请号为 201210346575.X, 发明名称为 "一种放大图像的方法" 的中国专利申请的优先权，其全部内容通过引用结合在本申请中。

技术领域

本发明属于计算机领域，涉及一种放大图像方法及其装置。

背景技术

随着多媒体技术和计算机网络技术的发展，图像信息在人们工作、学习和生活中发挥越来越重要的作用。图像分辨率是成像系统对输出图像细节分辨能力的一种度量，分辨率越高意味着像素密度越高，细节越精细，提供的信息也越丰富。然而由于成像仪器本身物理属性的限制以及外界环境条件的干扰，图像分辨率往往不能满足某些应用场景的要求，比如 3D视频编码中，受传输带宽限制，通常将深度图在服务端进行缩小，在终端进行放大，这其中用到了图像放大技术来提高图像的分辨率。另外一些使用场景还对实时的要求很高，例如视频会议、视频通话的图像放大，如果不能满足实时的要求会影响用户体验，因此需要快速的图像放大技术在保证效果的同时提高速度。

早期的图像放大方法大都不能较好的还原图像中人眼较为敏感的边缘和紋理。比如上述 3D视频编码中，可以把图像看做一种信号，并且把放大后的图像与原来深度图在服务端进行缩小前的源图之间的误差视为一种噪声，因此可以在图像放大过程中加入滤波过程来去除噪声。

非局部（non-local, nl )滤波器是目前公认的去噪效果最好的滤波器。目前已经有一些图像放大中使用非局部滤波器来去噪，其中又以基于插值算法的非局部滤波器应用最为广泛，但是非局部滤波器参数构造过程中却存在计算量高的问题。

发明内容

本发明为解决因非局部滤波器参数构造过程计算复杂度高影响了图像放大速度问题：

第一方面，本发明实施例提供了一种图像放大方法，该方法包括：将低分辨率 (lr)图像通过图像插值算法生成高分辨率 (hr)图像，对所述 hr图像进行边缘检测获取图像中边缘的像素点；将所述 hr图像的像素点按像素特性分为 lr像素类和 hr像素类，所述 lr像素类包含来自于 lr图像上的像素点，所述 hr像素类包含经过插值算法计算生成的像素点；依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点，分别计算所述确定的各 hr像素类的像素点与所述 lr像素类中的像素点的相似距离，并获取 lr像素类中相似距离满足相似性的像素点；依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数；利用所述 nl滤波器过滤经过放大算法初始放大的图像从而得到最终的放大图像。

结合第一方面的第一种可能的实现方式中，在所述插值算法的放大倍数为 N时，其中， N为大于 1的自然数，则所述将所述 hr图像按像素特性分为 lr 像素类和 hr像素类，具体包括：将经过插值算法计算生成的 hr图像中来自于 lr图像上的像素点归为第一组 lr像素类，并生成第一组 lr像素类图像；以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 N x N的像素块，并将各 N x N的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -l组 hr像素类，生成 N² -1组 hr像素类图像；所述第一组 lr像素类图像和 N² -1组 hr像素类图像中的各像素点分别拥有在各自所属的像素类图像中的坐标以及在 hr图像中的坐标。

结合第一方面的第一种可能的实现方式，在第二种可能的实现方式中，所述依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点，其中，当具体确定出坐标为（A 的边缘的像素点满足归属于 hr像素类时，则计算所述确定的 hr像素类的像素点（A )与所述 lr像素类中的像素点的相似距离的过程，具体包括：依据所述边缘的像素点坐标 ( ,Γ) , 在判断 ( )属于 hr像素类中的像素点后，确定所述像素点具体归属于第组的 hr像素类图像，并且在所述第组的 hr像素类图像中的坐标为（x_fr, ) ,其中 [2, N² ] ; 分别计算第一组 lr像素类图像中各像素点与所述第组的 hr像素类图像中坐标为 (x_k, y_k)的像素点的相似距离。

结合第一方面的第二种可能的实现方式，在第三种可能的实现方式中，当具体计算到第一组 lr像素类图像中坐标为 ' )像素点与第组 hr像素类图像中坐标为（χ^_Λ)的像素点的相似距离时，具体为：获取 hr图像中以（ , )为中心的第一像素块与 (^Λ)为中心的第二像素块，其中 ( Α)是第一组 lr像素类图像中坐标为（χ, )的像素点对应在 hr图像中的坐标；其中 ^^，4)是第 k组 hr 像素类图像中坐标为（ '^Λ)的像素点对应在 hr图像中的坐标；在第一组 lr像素类图像中获取所述第一像素块中所有归属于第一组 lr像素类的像素点，并归为第三像素块；在第组 hr像素类图像中获取所述第二像素块中所有归属于第 k组 hr像素类的像素点，并归为第四像素块；在第一组 lr像素类图像中获取所述第二像素块中所有归属于第一组 lr像素类的像素点，并归为第五像素块；在第组 hr像素类图像中获取所述第一像素块中所有归属于第组 hr像素类的像素点，并归为第六像素块；计算第三像素块和第四像素块的绝对误差和得到第一绝对误差和，并计算第五像素块和第六像素块的绝对误差和得到第二绝对误差和，将第一绝对误差和与第二绝对误差和相加，得到第一组 lr像素类图像中坐标为 ' ）的像素点与第组 hr像素类图像中坐标为 ' )像素点间的相似距离。

结合第一方面的第一种实现方式、第二种实现方式或第三种实现方式，在第四种可能的实现方式中，在所述放大倍数 Ν为 2时，所述以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 Ν χ Ν的像素块，并将各 Ν χ Ν的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -l组 hr像素类，并生成 N² -l组 hr像素类图像，具体包括：以第一组 lr像素类中各像素点为参考点，按顺时针方向将所述 hr图像划分为各 2 X 2的像素块；在基于所述参考点划分出来的各 2 X 2像素块中，以所述参考点作参考按顺时针方向依次将所述各 2 X 2像素块中除所述参考点外的其余三个 hr像素类的像素点分别归属于第二组 hr像素类、第三组 hr像素类和第四组 hr像素类；分别根据所述第一组 lr像素类、第二组 hr像素类、第三组 hr像素类和第四组 hr像素类所包含的像素点生成对应的第一组 lr像素类图像、第二组 hr像素类图像、第三组 hr像素类图像和第四组 hr像素类图像。

结合第一方面的第三种实现方式或第四种实现方式，在第五种实现方式中，所述第三像素块和第四像素块大小都为 M x M,则所述计算第三像素块和第四像素块的绝对误差和，具体包括：获取第三像素块中各像素点的像素值为 v„v₂, v₃, ...... , v_n ( M x M=n )和第四像素块中对应像素点的像素值为

并通过公式 >S4Z)= |w₁ _v₁|+|?_½ _v₂|+ _v₃|+ ...... +|w„_v„|计算得到第三像素块和第四像素块的绝对误差和。

结合第一方面或者结合上述任意一种可能的实现方式，在第六种可能的实现方式中，所述对应所述计算确定的各 hr像素类的像素点，获取 lr像素类中相似距离满足相似性的像素点，具体包括：对应所述计算确定的各 hr像素类的像素点，获取 lr像素类中相似距离最小的 P个像素点作为满足相似性的像素点，其中 P为大于 1的自然数。

结合上述任意一种可能的实现方式，在第七种可能的实现方式中，所述依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数，具体包括：根据所述确定的 hr像素类中的第一个像素点和对应所述第一个像素点满足相似性的 P个 lr像素类中的像素点作为参数，计算得到所述 P个 lr像素类的像素点的权值；保存所述第一个像素点对应在 hr图像中的坐标、所述 P个 lr像素类的像素点对应在 hr图像中的坐标和所述 P个 lr像素类的像素点的权值；按照所述 hr像素类中第一个像素点的方法，处理完所述确定的各 hr像素类中其余的像素点。

结合第一方面的第七种可能的实现方式，在第八种可能的实现方式中，所述利用 nl滤波器过滤经过放大算法初始放大图像从而得到最终的放大图像，具体包括：获取 nl滤波器的参数中保存的所述第一个像素点的坐标、所述 P 个 lr像素类的像素点对应在 hr图像中的坐标和所述 P个 lr像素类的像素点的权值；基于所述 P个 lr像素类的像素点对应在 hr图像中的坐标获取初始放大图像中对应的 P个像素值，并依据所述 P个 lr像素类的像素点的权值得到加权计算结果；将所述加权计算结果替换初始放大图像中对应所述第一个像素点的像素值；按照所述第一个像素点方法依次基于所述 nl滤波器的参数中保存的其他 hr像素类的像素点处理初始放大图像。

结合第一方面的第八种可能的实现方式，在第九种可能的实现方式中，所述基于所述 P个 lr像素类的像素点对应在 hr图像中的坐标获取初始放大图像中对应的 P个像素值，并依据所述 P个 lr像素类的像素点的权值得到加权计算结果，具体包括：根据 nl滤波器的参数中保存的 P个与所述第一个像素点满足相似性的像素点的坐标，获取放大后图像中在所述 P个坐标上的像素值

H(i),i = \ 2, ...,P , 并利用公式 = ： ^计算得到加权计算结果，其中 oii) + ω 表示当前高分辨率位置像素参与加权求和使用的权值，是取前面 Ρ个权值中的最大值；其中是 P个 lr像素类的像素点的权值，通过模拟噪声衰减程度的参数 t和 hr图像中像素块的大小 n,依据公式 ) ^{= e} "^¾"²，其中 / = 1Α ..., Ρ 计算获得。

本发明的第二方面，提供一种放大图像装置，包括：像素分类模块，用于将所述 hr图像的像素点按像素特性分为 lr像素类和 hr像素类，所述 lr像素类包含来自于 lr图像上的像素点，所述 hr像素类包含经过插值算法计算生成的像素点；相似距离计算模块，用于依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点，分别计算确定的各 hr像素类的像素点与所述 lr像素类中的像素点的相似距离；相似点获取模块，用于获取 lr像素类中相似距离满足相似性的像素点；非局部 nl滤波器的参数生成模块，用于依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数；过滤模块，用于利用 nl滤波器过滤经过放大算法初始放大图像从而得到最终的放大图像。

结合第二方面的第一种可能的实现方式中，所述像素分类模块，还包括：像素类图像生成子模块，用于将经过插值算法计算生成的 hr图像中来自于 lr 图像上的像素点归为第一组 lr像素类，并生成第一组 lr像素类图像；以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 N x N的像素块，并将各 N x N的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -l组 hr像素类，并生成 N² -l组 hr像素类图像；其中， Ν为所述插值算法的放大倍数， Ν为大于 1 的自然数；所述第一组 lr像素类图像和 N² - 1组 hr像素类图像中的各像素点都分别拥有在各自像素类图像中的坐标以及在 hr图像中的坐标。

结合第二方面的第二种可能的实现方式中，所述相似距离计算模块还包括映射生成模块，用于当具体计算到第一组 lr像素类图像中坐标为 ' ^ )像素点与第组 hr像素类图像中坐标为 ' )的像素点的相似距离时，具体为：获取 hr 图像中以 (^' 1)为中心的第一像素块与（A' 为中心的第二像素块，其中 ^i^i)是第一组 lr像素类图像中坐标为 ' )的像素点对应在 hr图像中的坐标; 其中（A' 是第 k组 hr像素类图像中坐标为 ' )的像素点对应在 hr图像中的坐标；在第一组 lr像素类图像中获取所述第一像素块中所有归属于第一组 lr像素类的像素点，并归为第三像素块；在第组 hr像素类图像中获取所述第二像素块中所有归属于第组 hr像素类的像素点，并归为第四像素块；在第一组 lr像素类图像中获取所述第二像素块中所有归属于第一组 lr像素类的像素点，并归为第五像素块；在第组 hr像素类图像中获取所述第一像素块中所有归属于第组 hr像素类的像素点，并归为第六像素块；所述相似距离计算模块，还用于计算第三像素块和第四像素块的绝对误差和得到第一绝对误差和，并计算第五像素块和第六像素块的绝对误差和得到第二绝对误差和，将第一绝对误差和与第二绝对误差和相加，得到第一组 lr像素类图像中坐标为（^χι' )的像素点与第组 hr像素类图像中坐标为 ' )像素点间的相似距离。

本发明通过上述一种放大图像的方法和装置，根据插值算法放大后图像中的像素特性分为高分辨率像素类图像和低分辨率像素类图像，仅通过计算高分辨率像素类与高分辨率像素类的像素点的相似距离来生成 nl滤波器的参数，简化了 nl滤波器参数的计算复杂度。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例中所需要使用的附图作简单地介绍，显而易见地，下面所描述的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图 1是本发明实施例的一种放大图像的方法的流程示意图；图 2是本发明实施例的 lr像素类和 hr像素类划分的流程示意图；图 3是本发明实施例的在放大倍数为 2时的 nl滤波器参数的构造流程示意图；

图 4是本发明实施例的一种放大图像的方法的流程示意图；

图 5是本发明实施例的一种放大图像装置的结构示意图；

图 6是本发明实施例的一种放大图像装置的结构示意图；

图 7是本发明中按顺时针方向将 hr图像划分成多个 2 X 2的像素块的示意图；

图 8是本发明中在 hr图像中计算像素点相似性示意图；

图 9是本发明中在 hr图像中计算像素点相似性对应表现在各像素类图像中的关系示意图；

图 10是本发明中 hr图像中计算相似性的像素点对应在像素类图像中的关系示意图；

图 11是本发明实施例的一种 nl滤波器参数的关系结构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都应属于本发明保护的范围。

本发明中低分辨率图像就是原始图像，而高分辨率图像则是相比原始图像经过插值算法放大后的图像，其中低分辨率和高分辨率仅仅作为两者区别的限定，并非对于图像的分辨率大小的特殊要求。

本发明提供的一种放大图像方法实施例 100, 本实施例方法是基于将低分辨率（ low resolution, lr )图像通过图像插值算法生成高分辨率（ high resolution, hr ) 图像，对所述 hr 图像进行边缘检测获取图像中边缘的像素点的基础上完成，如图 1所示，过程如下：

S101、将所述 hr图像的像素点按像素特性分为 lr像素类和 hr像素类，所述 lr像素类包含来自于 lr图像上的像素点，所述 hr像素类包含经过插值算法计算生成的像素点。所述像素特性具体为：所述在经过插值算法生成的 hr图像中包含的像素点是来自于 lr图像上的像素点，还是通过插值算法计算生成的插值像素点。因此所述 lr像素类可以描述为由 lr图像中像素点构成。

在所述插值算法的放大倍数为 N时，其中， N为大于 1的自然数；优选的，所述将所述 hr图像按像素特性分为 lr像素类和 hr像素类，具体可以实现为：

将经过插值算法计算生成的 hr图像中来自于 lr图像上的像素点归为第一组 lr像素类，并生成第一组 lr像素类图像；以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 N x N的像素块，并将各 N x N 的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -l组 hr像素类，生成 N² -l组 hr像素类图像；其中，优选的是所述生成的第一组 lr像素类图像和生成 N² -1组 hr像素类图像都的是按照相同的分辨率、按照相同的排列顺序生成（即不同像素类图像中相同坐标上的像素点同属于上述 Ν X Ν的像素块中的某一个像素块；)。

所述第一组 lr像素类图像和 N² - 1组 hr像素类图像中的各像素点都分别拥有在各自所属的像素类图像中的坐标以及在 hr图像中的坐标。

在所述插值算法的放大倍数为 Ν时，优选的，所述预定划分规则具体为：以第一组 lr像素类中各像素点为参考点或者起始点，按顺时针方向并按 Ν X Ν 作为大小将 hr图像划分出各像素块，并将各像素块按照从外到内的顺时针螺旋顺序将上述除参考点外的 N² -l像素点依次划分并生成 N² -l组 hr像素类图像（由于 lr像素类和 lr图像的关系，可以直接釆用 lr图像作为 lr像素类图像）。

所述插值算法的放大倍数为 Ν时，可选的，所述预定划分规则为：以第一组 lr像素类中各像素点为参考点或者起始点，按逆时针方向并按 Ν X Ν作为大小将 hr图像划分出各像素块，并将各像素块按照从外到内的逆时针螺旋顺序将上述除参考点外的 N² -1像素点依次划分并生成 N² -1组 hr像素类图像。实际中的所述预定划分规则不仅仅局限于上述方式 ,还可以是其他依据插值放大倍数 Ν, 按照 Ν χ Ν作为大小将 hr图像划分出像素块，如：可以釆用从外向内螺旋顺序或者从内向外螺旋顺序，如图 7所示。

本实施例不局限于上面两种方式，其中描述的 "以第一组 lr像素类中各像素点为参考点" 是因为从 hr划分出的各像素块中归属于各组 hr像素类的像素点与所述 lr像素类的像素点具有相同的位置关系，具体还可以是以其他具有相同特性的点作为参考，此处描述不对参考点的选取做特殊限定。

5102、依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点，分别计算确定的各 hr像素类的像素点与所述 lr像素类中的像素点的相似距离。

本发明的相似距离的计算方法优选的是：对于计算 hr图像中像素点

和像素点 ^XkJ 的相似距离的方法是以所述两个像素点为中心分别取第一像素块和第二像素块首先将 hr图像按照放大倍数 N划分为第一组 lr像素类图像和第 2至 N²组 hr像素类图像，判定所述 (；^ 和 (^Λ)两个像素点分别属于第一组 lr像素类图像和第 k组 hr像素类图像， [2, N²] ; 在第一组 lr像素类图像中获取所述第一像素块中所有归属于第一组 lr像素类的像素点，并归为第三像素块；

所述获取所述第一像素块中所有归属于第一组 lr像素类的像素点具体为：由于 hr像素类图像中的各像素点分别拥有在各自所属的像素类图像中的坐标以及在 hr图像中的坐标，可以根据所述对应关系获取到所述第一像素块中所有归属于第一组 lr像素类的像素点；

在第组 hr像素类图像中获取所述第二像素块中所有归属于第组 hr像素类的像素点，并归为第四像素块；

在第一组 lr像素类图像中获取所述第二像素块中所有归属于第一组 lr像素类的像素点，并归为第五像素块；

在第组 hr像素类图像中获取所述第一像素块中所有归属于第组 hr像素类的像素点，并归为第六像素块；

计算第三像素块和第四像素块的绝对误差和得到第一绝对误差和，并计算第五像素块和第六像素块的绝对误差和得到第二绝对误差和，将第一绝对误差和与第二绝对误差和相加，得到第一组 lr像素类图像中坐标为（χ_{ΐ 5} )的像素点与第组 hr像素类图像中坐标为像素点间的相似距离。其中第三像素块、第四像素块、第五像素块和第六像素块的名称仅为了方便相互间区别。

5103、获取 lr像素类中相似距离满足相似性的像素点；优选的， lr像素类中各像素点到所述确定的 hr像素类的某个像素点的相似距离最小的 P个像素点为满足相似性的像素点。

所述 P优选的根据经验值来确定，如：优选的，在放大倍数为 2时所述 P 优选的值为 5;

可选的，在放大倍数不为 2时，还可以通过与放大倍数建立函数关系来计算获得，如 P=2*放大倍数 +1。

5104、依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数；

优选的依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数，具体包括：

根据所述确定的 hr像素类中的第一个像素点和对应所述第一个像素点满足相似性的 P个 lr像素类中的像素点作为参数，计算得到所述 P个 lr像素类的像素点的权值；

保存所述第一个像素点对应在 hr图像中的坐标、所述 P个 lr像素类的像素点对应在 hr图像中的坐标和所述 P个 lr像素类的像素点的权值；

按照所述 hr像素类中第一个像素点的方法，处理完所述确定的各 hr像素类中其余的像素点，得到依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点各自对应的满足相似性的 P个 lr像素类的像素点对应在 hr图像中的坐标和相应的权值，并按照所述确定的各 hr像素类中像素点对应在 hr图像中的坐标、与所述确定的各 hr像素类中像素点满足相似性的 lr像素类的像素点对应在 hr图像中的坐标、还有对应所述 lr像素类的像素点的权值，三者之间的对应关系保存，于是就完成了所述 nl滤波器的参数构造。

5105、利用配置了所述 nl滤波器参数的 nl滤波器过滤经过放大算法初始放大图像从而得到最终的放大图像。

优选的，所述利用所述 nl滤波器过滤经过放大算法初始放大图像从而得到最终的放大图像，具体为：

获取 nl滤波器的参数中保存的所述第一个像素点的坐标、所述 P个 lr像素类的像素点对应在 hr图像中的坐标和所述 P个 lr像素类的像素点的权值；基于所述 P个 lr像素类的像素点对应在 hr图像中的坐标获取初始放大图像中对应的 P个像素值，并依据所述 P个 lr像素类的像素点的权值得到加权计算结果；

将所述加权计算结果替换初始放大图像中对应所述第一个像素点的像素值；

按照所述第一个像素点方法依次处理完所述 nl滤波器的参数中保存的其他 hr像素类的像素点，于是就完成了对所述初始放大图像的 nl滤波。

本实施例 100通过将插值算法生成的 hr图像，根据像素特性分为 lr像素类和 hr像素类，并通过避免计算现有算法中对最后求解相似距离没有关键性影响的 hr像素类的像素点之间的绝对误差和的计算，在保证计算精确度的基础上改进了现有算法的效率。

下面的实施例 200是对本发明中的 lr像素类和 hr像素类划分的详细描述，其中以放大倍数为 2倍的插值图像算法生成的 hr图像为操作对象，如图 2所示，具体包括：

S201、以第一组 lr像素类中各像素点为参考点，按顺时针方向将 hr图像划分成多个 2 x 2的像素块，如图 7所示。其中，将经过插值算法计算生成的 hr图像中来自于 lr图像上的像素点归为第一组 lr像素类，并生成第一组 lr像素类图像。对各 2 x 2像素块以像素类中的各像素点为参考点，按顺时针螺旋顺序将除参考点外的像素点一次归为像素类 2、像素类 3和像素类 4。

图 7中所有标有数字 1的像素点统称为像素类 1即 lr像素类，其对应位置上的像素点的像素值和 lr图像中对应位置的像素点的像素值相同，而所有标有数字 2、数字 3和数字 4的像素点分别称为像素类 2、像素类 3和像素类 4 , 它们均归属于 hr像素类，其像素点的像素值是通过 lr图像中像素点的插值算法计算得到。

对于未能按照所述规定划分成 2 x 2的像素块的剩余像素点，可选的，按照该剩余像素点在预定划分规则中的位置划分为像素类 1、像素类 2、像素类 3或像素类 4 ; 可选的，还可以做省略处理，因为所述剩余像素点都是些图像中的边框上的点，而 nl过滤处理主要是为了增加图像边缘效果。造成对于未能按照所述规定划分成 2 x 2的像素块的剩余像素点，这种情况可能是划分规则规定时，图像边框上像素点未能完整的分成 2 x 2的像素块造成。 5202、提取像素类 1的像素点生成第一组 lr像素类图像 LI , 提取像素类 2的像素点生成第二组 hr像素类图像 L2, 提取像素类 3的像素点生成第三组 hr像素类图像 L3 , 提取像素类 4的像素点生成第四组 hr像素类图像 L4; 生成后的 lr像素类图像和 hr像素类图像如图 9所示。其中生成各像素类图像的方式为，每组像素类中像素点根据其所归属的像素块按照图 7所示 49个素块的排列顺序，从左到右，从上到下的顺序生成，生成后的 4个像素类图像如图 9所示。

其中，像素类图像 Ll、像素类图像 L2、像素类图像 L3和像素类图像 L4 分辨率大小相同，各像素类图像中的像素点都有各自在所属的像素类图像中的坐标以及在 hr图像中的对应坐标。

5203、保存第一组 lr像素类图像、第二组 hr像素类图像、第三组 hr像素类图像和第四组 hr像素类图像中各像素点坐标与在 hr图像中对应像素点的坐标映射关系。

优选的，保存各像素类图像的坐标原点在 hr图像中的坐标，从而结合划分规则和放大倍数，就能完成各像素类图像中像素点坐标与 hr图像中相同像素点坐标的转换。

例如：第一组 lr像素类图像中坐标为（1 , 1 ) 的像素点，转换为 hr图像中像素点坐标具体为：首先根据以像素类 1各像素点作为参考点，并顺时针的划分规则得出，像素类 1 图像的原点和 hr 图像的原点偏移量 off— original— x=off— original— y=0 ,且放大倍数是 2；则第一组 lr像素类图像中坐标为（ 1 , 1 ) 的像素点在 hr 图像中对应相同的像素点的坐标为 ( off— original— x+ 1 *2 , off— original— y+ 1 *2 ) =(2, 2)。

可选的，还可以通过 hr图像以及各组像素类图像为区分，对应保存各组

其中符号 "\" 代表不存在对应的坐标点，其中按照 hr图像中的边缘的像素点个数作为脚标，而 ι Άι )则是依次以该边缘 hr像素点所归属的像素类图像是第几组和在表中对应 hr像素类图像列中出现顺序作为脚标。

通过实施例 200完成了各像素类图像的生成，该像素类图像的生成是根据插值算法特性，将 hr图像中与 lr像素类的像素点拥有相同的偏移关系的 hr像素类的像素点规划到同一组 hr像素类图像中。虽然该实施例^ ^于放大倍数 2 实现，但是本领域技术人员能够根据本实施例已经揭示的技术内容，将该方法衍生到其他放大倍数中使用，在此不再赘述。接着的实施例 300将在此基础上将现有的相似距离计算做进一步的简化。

本发明提供的一种放大图像方法实施例 300, 本实施例是基于方法实施例

200, 对于方法实施例 100的具体运用。本实施例涉及在实施例 200中未涉及到的像素块，在实施例 200中的像素块是用来划分像素类使用，而本实施例中涉及用来计算像素点间的相似距离的像素块，两者间的像素块的本质区别在于其划分的规则及用途不相同。本实施例中的放大倍数为 2倍，现以放大算法中的非局部 nl滤波器的参数的构造方法来说明本实施例在速度上的改进，其流程图如图 3所示，其过程具体为：

如图 8所示，为现有技术中计算坐标为 B— Ll((cx-1)*2+1 , (cy-l)*2+l)的像素点和坐标为 B— L2((x-1)*2, (y-l)*2+l)的像素点的相似性示意图。首先构造以坐标 B— Ll((cx-1)*2+1 , (cy-l)*2+l)为中心以 7个像素点为边长构成的第一像素块 B_L1 , 接着构造以坐标 B_L2((x-l)*2, (y-l)*2+l)为中心以 7个像素点为边长构成的第二像素块 B— L2,然后将像素块 B— L1和像素块 B— L2中对应位置像素点，即 49个像素点分别求绝对误差和，则所述绝对误差和的值即为坐标为 B_Ll((cx-l)*2+l , (cy-l)*2+l)像素点和坐标为 B_L2((x-l)*2, (y-l)*2+l) 像素点的之间的相似距离。

本发明通过分析上述现有技术中相似距离的计算过程发现，在计算像素点

1和像素点 2的相似距离的过程中真正有效的实际是 B—L1中像素点 1和像素点 2构成的矩阵与 B— L2中像素点 2和像素点 1构成的矩阵的绝对误差和；像素点 3和像素点 4是通过插值算法（在放大图像中还可以釆用其他放大算法）计算获得，像素点 3和像素点 4的绝对误差和的计算过程在增加了整体计算量的情况下，却并不能带来相似距离的精确性的提高），根据所述分析进一步得到本发明方法。

5301、基于各参考点，按顺时针方向划分出各 2 x 2像素块，所述参考点在本实施例中为原本属于 lr图像的像素点；在基于所述参考点构成的各 2 x 2 像素块中，记录各参考点为第一组 lr像素类，并按顺时针方向记录所述各 2 X 2像素块的其余三个 hr像素点为第二组 hr像素类、第三组 hr像素类和第四组 hr像素类；

5302、分别针对所述第一组 lr像素类、第二组 hr像素类、第三组 hr像素类和第四组 hr像素类所包含的像素点生成对应的第一组 lr像素类图像 L1、第二组 hr像素类图像 L2、第三组 hr像素类图像 L3和第四组 hr像素类图像 L4 , 如图 9所示。保存像素类图像 Ll、 L2、 L3和 L4中各像素点与 hr图像中各像素点的映射关系。

5303、依据边缘的像素点确定 hr图像中既是边缘的像素点且归属于 hr像素类的像素点，分别计算确定的各 hr像素类的像素点与所述 lr像素类中的像素点的相似距离，并获取 lr像素类中相似距离满足相似性的像素点；

当求解边缘的像素点坐标为 B— L2((x-1)*2, (y-l)*2+l)和属于 lr像素类的坐标为 B_Ll((cx-l)*2+l , (cy-l)*2+l)像素点像素点相似距离时；

B L1像素块（即 S102中第一像素块）和 B— L2像素块（即 S102中第二像素块）都包含了像素点 1和像素点 2 (即 B— L1像素块中的所有像素点 1和 B L2像素块中的所有像素点 2进行了第一次绝对误差和运算， B L1像素块中的所有像素点 2和 B— L2像素块中的所有像素点 1进行了第二次绝对误差和运算），而生成的第一组 lr像素类图像 L1和第二组 hr像素类图像 L2均只包含了同一类的像素点 1和像素点 2, 因此在完成了 LI ( cx, xy )为中心的像素块 (即 S102中第三像素块）和 L2 ( X, y )为中心的像素块（即 S102中第四像素块 ) 的绝对误差和计算后（即 B— L1像素块中的所有像素点 1到 B— L2像素块中的所有像素点 2的绝对误差和），还要计算 Ll(x, y) 为中心的像素块（即 S102中第五像素块）和 L2(cx-l , cy) 为中心的像素块（即 S102中第六像素块）的绝对误差和（即 B— L2像素块中的所有像素点 1到 B— L1像素块中的所有像素点 2的绝对误差和 ), 并将上述得到的 2个绝对误差和结果相加后取均值，所述相加后取均值的结果就是图 8中坐标为 B— Ll((cx-1)*2+1 , (cy-l)*2+l)像素点和坐标为 B— L2((x-1)*2, (y-l)*2+l)像素点的之间的相似距离，上述像素类图像 1 中的 LI ( cx, xy )和 Ll(x, y)与像素类图像 2中的 L2 ( x, y )和 L2(cx-1 , cy)坐标的确认，可以由 B— L1像素块和 B— L2像素块到第一组 lr像素类图像 L1和第二组 hr像素类图像 L2的映射关系获得，所述映射关系可以釆用 S203中任意一种。

S304、构造 nl滤波器的参数。

构造 nl滤波器的参数方法具体包括：

根据所述确定的 hr像素类中的 B— L2((x-1)*2, (y-l)*2+l)像素点和对应所述 B— L2((x-1)*2, (y-l)*2+l)像素点满足相似性的 P个 lr像素类中的像素点作为参数，计算得到所述 P个 lr像素类的像素点的权值；

保存所述 B_L2((x-l)*2, (y-l)*2+l)像素点对应在 hr图像中的坐标、所述 P个 lr像素类的像素点对应在 hr图像中的坐标和所述 P个 lr像素类的像素点的权值；

其中 B_L2((x-l)*2, (y-l)*2+l)像素点计算权值的方法具体为：

对应 B— L2((x-1)*2, (y-l)*2+l)像素点记录与之对应的 P个满足相似性的

L1的像素点坐标，并依据公式 = ，其中 / = ΙΑ.,.,/Η十算得到 Ρ个 lr像素点的权值，其中， >Χ Ζ /)是 B_L2((x-l)*2, (y-l)*2+l)像素点与第 i个满足相似性的像素点的相似距离， t是模拟噪声衰减程度的参数， n是 hr图像中像素块的大小。按照所述 hr像素类中 B— L2((x-1)*2, (y-l)*2+l)像素点的方法，依据 S303 遍历完所述确定的各 hr像素类中其余的像素点。便完成了 nl滤波器的参数的构造，该滤波器的参数可以是以图 11的形式存在；其中第一列是 hr图像中既是边缘的像素点又是 hr像素类的像素点坐标，第二列是满足相似性的 P个 lr 像素类点在 hr图像中的坐标，第三类是满足相似性的 P个 lr像素类点的权值。本实施例中在放大倍数为 2时，所述 P优选的值为 5。

本发明提供的一种放大图像方法实施例 400, 本实施例通过一个具体方法流程展示上述 nl滤波器的参数实施例在放大图像算法中的应用，并在提取出边缘的像素点之后进行了边缘扩散处理，使得 nl滤波器的滤波效果进一步得到提高。本实施例釆用 2倍放大插值算法作为描述对象，如图 4所示，其流程具体为：

S401、将低分辨率 lr图像通过图像插值算法生成高分辨率 hr图像。

所述图像插值算法可以是最临近点插值算法、双线性插值算法、双立方插值算法或自适应样条插值算法。

5402、对所述 hr图像进行边缘检测获取图像中边缘的像素点。

所述边缘检测方法可以是但不局限于 Roberts, Sobel、 Prewitt, LOG或 Canny算子中的任意一种。

5403、对图像中由边缘的像素点构成的边缘轮廓进行边缘扩散处理。在具体实施中边缘扩散可以釆用多种方式，比如以每个边缘的像素点作为中心点，按照特定的形状进行扩散，这个形状中的所有的点都属于扩散后的边缘，所述特定的形状可以是菱形、正方形等。所述特定的形状的大小优选的取大于等于放大倍数的最小奇数，如釆用正方形并且放大倍数为 2倍时，该正方形的边长为 3个像素点；如釆用正方形并且放大倍数为 3倍时，该正方形的边长为 3个像素点；如釆用正方形并且放大倍数为 4倍时，该正方形的边长为 5。

5404、通过方法实施例 300中的步骤 S301-S304构造 nl滤波器的参数。本发明中除釆用 S303的映射关系获取对应坐标关系外，还可以釆用根据以第一组 lr像素类的像素点与其他各组 hr像素类的像素点的相似距离计算得到的模型，来作为后续的计算方法，（χ^)为第一组 lr像素类中坐标，（ ,Λ)为第组 hr像素类中坐标；对照图 8和图 9其模型获取方法为：

根据 hr 图像中以（ Α)为中心的第二像素块与（；^ Λ)为中心的第一像素块的相似距离，其中（；^ ^)和(；^, 1 )分别是坐标 (X, ）和 , )在 hr图像中的对应坐标；

在第一组 lr像素类图像中获取所述第一像素块（图 8中所述第一像素块表现为 B— L1 ) 中所有属于第一组 lr像素类的像素点，并归为第三像素块；在第组 hr像素类图像中获取所述第二像素块中所有归属于第组 hr像素类的像素点，并归为第四像素块；在第一组 lr像素类图像中获取所述第二像素块中所有属于第一组 lr像素类的像素点，并归为第五像素块；在第组 hr像素类图像中获取所述第一像素块中所有归属于第组 hr像素类的像素点，并归为第六像素块

计算第三像素块和第四像素块的绝对误差和，并计算第五像素块和第六像素块的绝对误差和，然后将两个绝对误差和求和便能得到第一组 lr像素类中坐标为（χ, , )与第组 hr像素类中坐标为（x ^)间的相似距离。依据上述过程将第三像素块、第四像素块、第五像素块和第六像素块生成对应模型。

本实施例的放大倍数为 2, 对于上述形成的第三像素块、第四像素块、第五像素块和第六像素块生成对应模型，具体描述如下：

依据所述边缘的像素点获取像素类图像 Ll、像素类图像 L2、像素类图像

L3或像素类图像 L4中对应的像素点，记录下获取到的该像素点坐标为（X, ；遍历第一组 lr像素类中像素点，并计算与所述遍历到的（X, 与第一组 lr像素类的像素点的相似距离，其过程具体为：

当（X, 像素点在 L2中时，依次遍历 L1 中各像素点与（X, 的相似性。假设当前遍历到 Ll ^)时，则要计算 L1中以点 ( ^)为中心的第三像素块模型和 L2中以点（^x，为中心的第四像素块模型的 SAD再加上 L1中以点（^x，为中心的第五像素块模型和 L2中以点 (^—^ 为中心的第六像素块模型的 SAD, 取两个 SAD的和作为最终的 SAD值。

当（X, 像素点在 L3中时，依次遍历 L1 中各像素点与（X, 的相似性。假设当前遍历到 Li (^cx， °y)时，则要计算 Li中以点 (^cx， °y)为中心的第三像素块模型和 L3中以点（^x，为中心的第四像素块模型的 SAD再加上 L1中以点（^x，为中心的第五像素块模型和 L3中以点 (^，^―¹)为中心的第六像素块模型的 SAD, 取两个 SAD的和作为最终的 SAD值。

当（X, 像素点在 L4中时，依次遍历 L1 中各像素点与（X, 的相似性。假设当前遍历到 Li (^cx， °y)时，则要计算 Li中以点 (^cx， °y)为中心的第三像素块模型和 L4中以点（^x，为中心的第四像素块模型的 SAD再加上 L1中以点（^x，为中心的第五像素块模型和 L4 中以点（^CX_^ -¹)为中心的第六像素块模型的 SAD, 取两个 SAD的和作为最终的 SAD值。

所述第三像素块和第四像素块大小都为 Μ χ Μ时，则所述计算第三像素块和第四像素块的绝对误差和，具体包括：获取第三像素块中各像素点的像素值为 v₂, v₃, ...... , v_n ( M M=n ) 和第四像素块中对应像素点的像素值为 „u₂,u₃,…… ,u_n；

+…… + 计算得到第三像素块和第四像素块的绝对误差和。

lr像素类中各像素点到 hr像素类的某个像素点的相似距离最小的 P个像素点为满足相似性的像素点。在放大倍数为 2倍时，所述 P值优选的为 5。

记录各 hr像素点和对应的 P个满足相似性的 lr像素点对应在 hr图像中的坐标，计算得到 P个 lr像素点的权值。

5405、利用放大算法放大 lr图像。

所述放大算法可以是最临近点插值算法、双线性插值算法、双立方插值算法或自适应样条插值算法。

5406、利用 nl滤波器过滤所述经过放大算法放大后的图像。

获取 nl滤波器的参数中保存的所述第一个像素点的坐标、所述 P个 lr像素类的像素点对应在 hr图像中的坐标和所述 P个 lr像素类的像素点的权值；基于所述 P个 lr像素类的像素点对应在 hr图像中的坐标获取初始放大图像中对应的 P个像素值，并依据所述 P个 lr像素类的像素点的权值得到加权计算结果；将所述加权计算结果替换初始放大图像中对应所述第一个像素点的像素值；按照所述第一个像素点方法依次基于所述 nl滤波器的参数中保存的其他 hr像素类的像素点处理初始放大图像。

其中并依据所述 P个 lr像素类的像素点的权值得到加权计算结果，具体方法为：

获取模拟噪声衰减程度的参数 t和像素块的大小 n, 在放大图像方法实施例 300 中得出，在放大倍数为 2 倍时 n 的优选值为 7 ; 依据公式 ( _{) = β}- ^, _{= 1},₂, 计算对于 ρ个 ir像素类的像素点的权值；其中， SAD(i) 为 P个 lr像素类的像素点中第 i点与对应 hr像素类的像素点的绝对误差和；获取 P 个 lr 像素了的像素点的像素值 H^ z^ lA...,/⁵ , 并利用公式 H = _{k :} ^计算得到像素值替换 hr像素点的像素值，其中 w表示当前 a i) + ω 高分辨率位置像素参与加权求和使用的权值，它是取前面 P个权值中的最大值; 其中是 p个 l_r像素类的像素点的权值，通过模拟噪声衰减程度的参数 t和 hr图像中像素块的大小 n, 依据公式 ) ^{= e ίχ2χ}"² , 其中 / = 计算获付。

本实施例通过结合具体的计算算法，对之前的方法实施例 300得到的滤波器的参数如何具体使用做了细化描述，利用本方法实施例便能完整的实现本方法所要实现的放大图像方法。通过避免计算现有算法中对最后求解相似距离没有关键性影响的 hr像素类的像素点之间的绝对误差和的计算，在保证计算精确度的基础上改进了现有算法的效率。

本发明提供的一种放大图像装置实施例 500 , 其结构示意图如图 5所示，具体包括：

像素分类模块 101 , 用于将所述 hr图像的像素点按像素特性分为 lr像素类和 hr像素类，所述 lr像素类包含来自于 lr图像上的像素点，所述 hr像素类包含经过插值算法计算生成的像素点；

相似距离计算模块 102 , 用于依据所述边缘图像确定既是边缘的像素点且归属于 hr像素类的像素点，分别计算确定的各 hr像素类的像素点与所述 lr像素类中的像素点的相似距离；

相似点获取模块 103 ,用于获取 lr像素类中相似距离满足相似性的像素点；非局部 nl滤波器的参数生成模块 104 , 用于依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数；

过滤模块 105 ,用于利用所述 nl滤波器的参数过滤经过放大算法初始放大图像从而得到最终的放大图像。

优选的，所述像素分类模块 101 , 还包括：像素类图像生成子模块 201 ,用于将经过插值算法计算生成的 hr图像中来自于 lr图像上的像素点归为第一组 lr像素类，并生成第一组 lr像素类图像；以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 N x N的像素块，其中 N为插值算法的放大倍数， N为大于 1的自然数；并将各 N x N的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -l组 hr像素类，并生成 N² -l组 hr像素类图像；所述第一组 lr像素类图像和 N² -1组 hr像素类图像中的各像素点都分别拥有在各自像素类图像中的坐标以及在 hr图像中的坐标。

优选的，所述相似距离计算模块 102还包括映射生成模块 202, 用于获取 hr 图像中以（ , )为中心的第一像素块与（；^ Λ)为中心的第二像素块，其中 ( Α)是第一组 lr像素类图像中坐标为（χ,, )的像素点对应在 hr图像中的坐标; 其中（；^ Λ)是第 k组 hr像素类图像中坐标为（x_fr, )的像素点对应在 hr图像中的坐标；

在第一组 lr像素类图像中获取所述第一像素块中所有归属于第一组 lr像素类的像素点，并归为第三像素块；

在第组 hr像素类图像中获取所述第一像素块中所有归属于第组 hr像素类的像素点，并归为第六像素块。

此时，所述相似距离计算模块 102 , 还用于计算第三像素块和第四像素块的绝对误差和得到第一绝对误差和，并计算第五像素块和第六像素块的绝对误差和得到第二绝对误差和，将第一绝对误差和与第二绝对误差和相加，得到第一组 lr像素类图像中坐标为 ' ）的像素点与第组 hr像素类图像中坐标为像素点间的相似距离。

本发明提供的一种放大图像装置实施例 600, 如图 6所示。包括至少一个处理器（301 ), 例如 CPU, 至少一个网络接口 304或者其他通信接口 303 , 存储器 305 , 和至少一个通信总线 302。通信总线 302用于实现这些装置之间的连接通信。可选的用户接口 903 可以是显示器，键盘或者点击设备。存储器 305可能包含高速 Ram存储器，也可能还包括非不稳定的存储器（ non-volatile memory ), 例如至少一个磁盘存储器。存储器 305可选的可以包含至少一个位于远离前述 CPU302的存储装置。在一些实施方式中，存储器 305存储了如下的元素，模块或者数据结构，或者他们的子集，或者他们的扩展集：

操作系统 306, 包含各种程序，用于实现各种基础业务以及处理基于硬件的任务；

应用模块 307, 包含如下模块组合：像素分类模块 101 , 相似距离计算模块 102, 相似点获取模块 103 , 非局部 nl滤波器的参数生成模块 104, 过滤模块 105, 上述模块的功能可以参考图 3或者图 4的工作原理图的说明部分，也可以参考图 5的说明部分；此处不再赘述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例中描述的各方法步骤和单元，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各实施例的步骤及组成。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。本领域普通技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

结合本文中所公开的实施例描述的方法或步骤可以用硬件、处理器执行的软件程序，或者二者的结合来实施。软件程序可以置于随机存储器（RAM )、内存、只读存储器（ROM )、电可编程 ROM、电可擦除可编程 ROM、寄存器、硬盘、可移动磁盘、 CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。本发明并不限于此。在不脱离本发明的精神和实质的前提下，本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换，而这些修改或替换都应在本发明的涵盖范围内。

Claims

权利要求

1、一种放大图像的方法，将低分辨率 (lr)图像通过图像插值算法生成高分辨率 (hr)图像，对所述 hr图像进行边缘检测获取图像中边缘的像素点，其特征在于，包括：

将所述 hr图像的像素点按像素特性分为 lr像素类和 hr像素类，所述 lr像素类包含来自于 lr图像上的像素点，所述 hr像素类包含经过插值算法计算生成的像素点；

依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点，分别计算所述确定的各 hr像素类的像素点与所述 lr像素类中的像素点的相似距离，并获取 lr像素类中相似距离满足相似性的像素点；

依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数；

利用所述 nl滤波器过滤经过放大算法初始放大的图像从而得到最终的放大图像。

2、根据权利要求 1所述方法，其特征在于，在所述插值算法的放大倍数为 N 时，其中， N为大于 1的自然数，则所述将所述 hr图像按像素特性分为 lr像素类和 hr像素类，具体包括：

将经过插值算法计算生成的 hr图像中来自于 lr图像上的像素点归为第一组 lr像素类，并生成第一组 lr像素类图像；

以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 N X N的像素块，并将各 N X N的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -1组 hr像素类，生成 N² -l组 hr像素类图像；

所述第一组 lr像素类图像和 N² - 1组 hr像素类图像中的各像素点分别拥有在各自所属的像素类图像中的坐标以及在 hr图像中的坐标。

3、根据权利要求 2所述的方法，其特征在于，所述依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点，其中，当具体确定出坐标为 ( ，Ό的边缘的像素点满足归属于 hr像素类时，则计算所述确定的 hr像素类的像素点 (A )与所述 lr像素类中的像素点的相似距离的过程，具体包括：依据所述边缘的像素点坐标 ( ,Γ) , 在判断 (A )属于 hr像素类中的像素点后，确定所述像素点具体归属于第组的 hr像素类图像，并且在所述第组的 hr像素类图像中的坐标为（χ^_Λ)，其中)^ [2,N²]；分别计算第一组 lr像素类图像中各像素点与所述第组的 hr像素类图像中坐标为（x_fr, )的像素点的相似距离。

4、根据权利要求 3所述的方法，其特征在于，当具体计算到第一组 lr像素类图像中坐标为 ' ）像素点与第组 hr像素类图像中坐标为（_¾,_Λ)的像素点的相似距离时，具体为：

获取 hr 图像中以（ Α)为中心的第一像素块与（；^ Λ)为中心的第二像素块，其中（ , )是第一组 lr像素类图像中坐标为（x,^)的像素点对应在 hr图像中的坐标；其中（^Λ)是第 k组 hr像素类图像中坐标为的像素点对应在 hr图像中的坐标；

计算第三像素块和第四像素块的绝对误差和得到第一绝对误差和，并计算第五像素块和第六像素块的绝对误差和得到第二绝对误差和，将第一绝对误差和与第二绝对误差和相加，得到第一组 lr像素类图像中坐标为（^χι' )的像素点与第组 hr像素类图像中坐标为 ' )像素点间的相似距离。

5、根据权利要求 2-4任一所述的方法，其特征在于，在所述放大倍数 Ν为 2 时，所述以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 N X N的像素块，并将各 N X N的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -l组 hr像素类，并生成 N² -l组 hr像素类图像，具体包括：

以第一组 lr像素类中各像素点为参考点，按顺时针方向将所述 hr图像划分为各 2 x 2的像素块；

在基于所述参考点划分出来的各 2 x 2像素块中，以所述参考点作参考按顺时针方向依次将所述各 2 X 2像素块中除所述参考点外的其余三个 hr像素类的像素点分别归属于第二组 hr像素类、第三组 hr像素类和第四组 hr像素类；分别根据所述第一组 lr像素类、第二组 hr像素类、第三组 hr像素类和第四组 hr像素类所包含的像素点生成对应的第一组 lr像素类图像、第二组 hr像素类图像、第三组 hr像素类图像和第四组 hr像素类图像。

6、根据权利要求 4或 5所述的方法，其特征在于，所述第三像素块和第四像素块大小都为 Μ χ Μ, 则所述计算第三像素块和第四像素块的绝对误差和，具体包括：

获取第三像素块中各像素点的像素值为 _Vl,_V2,v₃, ...... , _Vn ( M M=n ) 和第四像素块中对应像素点的像素值为 t^₂ , M₃ , ...... , u_n ；并通过公式 &4D = |_Ml -v₁| + |_M2 -v₂| + |_M3 - ₃| + ...... + |w„_v„|计算得到第三像素块和第四像素块的绝对误差和。

7、根据权利要求 1-6任一所述的方法，其特征在于，所述对应所述计算确定的各 hr像素类的像素点，获取 lr像素类中相似距离满足相似性的像素点，具体包括：

对应所述计算确定的各 hr像素类的像素点，获取 lr像素类中相似距离最小的 P个像素点作为满足相似性的像素点，其中 P为大于 1的自然数。

8、根据权利要求 2-7任一所述的方法，其特征在于，所述依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl 滤波器的参数，具体包括：

保存所述第一个像素点对应在 hr图像中的坐标、所述 P个 lr像素类的像素点对应在 hr图像中的坐标和所述 P个 lr像素类的像素点的权值；按照所述 hr像素类中第一个像素点的方法，处理完所述确定的各 hr像素类中其余的像素点。

9、根据权利要求 8所述方法，其特征在于，所述利用 nl滤波器过滤经过放大算法初始放大图像从而得到最终的放大图像，具体包括：

按照所述第一个像素点方法依次基于所述 nl滤波器的参数中保存的其他 hr像素类的像素点处理初始放大图像。

10、根据权利要求 9所述的方法，其特征在于，所述基于所述 P个 lr像素类的像素点对应在 hr图像中的坐标获取初始放大图像中对应的 P个像素值，并依据所述 P个 lr像素类的像素点的权值得到加权计算结果，具体包括：

根据 nl滤波器的参数中保存的 P个与所述第一个像素点满足相似性的像素点的坐标，获取放大后图像中在所述 P个坐标上的像素值 H ^ IA ...,/⁵ , 〜〜并利用公式 =^ ： ^计算得到加权计算结果，其中 w表示当前高分

^ o i) + ω 辨率位置像素参与加权求和使用的权值，是取前面 Ρ个权值中的最大值；其中是 ρ个 lr像素类的像素点的权值，通过模拟噪声衰减程度的参数 t和 hr图像中像素块的大小 n, 依据公式 = 其中 / = 1Α ..., /Η十算获付。

11、一种放大图像装置，其特征在于，包括：

像素分类模块，用于将所述 hr图像的像素点按像素特性分为 lr像素类和 hr像素类，所述 lr像素类包含来自于 lr图像上的像素点，所述 hr像素类包含经过插值算法计算生成的像素点；

相似距离计算模块，用于依据所述边缘的像素点确定既是边缘的像素点且归属于 hr像素类的像素点，分别计算确定的各 hr像素类的像素点与所述 lr像素类中的像素点的相似距离；

相似点获取模块，用于获取 lr像素类中相似距离满足相似性的像素点；非局部 nl滤波器的参数生成模块，用于依据所述确定的各 hr像素类中的像素点和对应满足相似性的 lr像素类中的像素点构造非局部 nl滤波器的参数；过滤模块，用于利用 nl滤波器过滤经过放大算法初始放大图像从而得到最终的放大图像。

12、根据权利要求 11所述的装置，其特征在于，所述像素分类模块，还包括：像素类图像生成子模块，用于将经过插值算法计算生成的 hr图像中来自于 lr图像上的像素点归为第一组 lr像素类，并生成第一组 lr像素类图像；以第一组 lr像素类中各像素点为参考点，按预定划分规则将 hr图像划分成多个 N x N的像素块，并将各 Ν χ N的像素块相对于所述参考点具有相同的位置关系的像素点分到同一组 hr像素类中，所述 hr图像中共有 N² -1组 hr像素类，并生成 N² -l组 hr像素类图像；其中， Ν为所述插值算法的放大倍数， Ν为大于 1的自然数；

所述第一组 lr像素类图像和 N² - 1组 hr像素类图像中的各像素点都分别拥有在各自像素类图像中的坐标以及在 hr图像中的坐标。

13、根据权利要求 11所述的装置，其特征在于，所述相似距离计算模块还包括映射生成模块，用于当具体计算到第一组 lr像素类图像中坐标为 ' )像素点与第组 hr像素类图像中坐标为 ' )的像素点的相似距离时，具体为：获取 hr 图像中以 (^' 1)为中心的第一像素块与 (A' 为中心的第二像素块，其中 ^i^)是第一组 lr像素类图像中坐标为 ' )的像素点对应在 hr图像中的坐标；其中（^Λ)是第 k组 hr像素类图像中坐标为的像素点对应在 hr图像中的坐标；

在第一组 lr像素类图像中获取所述第一像素块中所有归属于第一组 lr像素类的像素点，并归为第三像素块；在第组 hr像素类图像中获取所述第二像素块中所有归属于第组 hr像素类的像素点，并归为第四像素块；

所述相似距离计算模块，还用于计算第三像素块和第四像素块的绝对误差和得到第一绝对误差和，并计算第五像素块和第六像素块的绝对误差和得到第二绝对误差和，将第一绝对误差和与第二绝对误差和相加，得到第一组 lr像素类图像中坐标为 ' ）的像素点与第组 hr像素类图像中坐标为 ' )像素点间的相似距离。