CN101854491A - 一种样条放大与自适应模版结合的图像下采样的方法 - Google Patents

一种样条放大与自适应模版结合的图像下采样的方法 Download PDF

Info

Publication number
CN101854491A
CN101854491A CN200910106504A CN200910106504A CN101854491A CN 101854491 A CN101854491 A CN 101854491A CN 200910106504 A CN200910106504 A CN 200910106504A CN 200910106504 A CN200910106504 A CN 200910106504A CN 101854491 A CN101854491 A CN 101854491A
Authority
CN
China
Prior art keywords
sampling
image
masterplate
new
resolution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200910106504A
Other languages
English (en)
Other versions
CN101854491B (zh
Inventor
张智雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
World (Shanghai) Technology Development Co., Ltd.
Original Assignee
SHENZHEN RONGCHUANG TIANXIA TECHNOLOGY DEVELOPMENT Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN RONGCHUANG TIANXIA TECHNOLOGY DEVELOPMENT Co Ltd filed Critical SHENZHEN RONGCHUANG TIANXIA TECHNOLOGY DEVELOPMENT Co Ltd
Priority to CN2009101065040A priority Critical patent/CN101854491B/zh
Priority to PCT/CN2009/073594 priority patent/WO2010111856A1/zh
Publication of CN101854491A publication Critical patent/CN101854491A/zh
Application granted granted Critical
Publication of CN101854491B publication Critical patent/CN101854491B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4007Interpolation-based scaling, e.g. bilinear interpolation

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

本发明提供一种样条放大与自适应模版结合的图像下采样的方法,其特征在于,包括下列步骤:S10:根据原图像的分辨率与目标下采样的图像分辨率,确定对原图像的上采样比例系数,上采样比例系数为整数,根据上采样比例系数对原图像进行上采样运算,得到新的上采样图像,新的上采样图像分辨率为目标下采样的图像分辨率的整数倍;S20:对新的上采样图像上的像素按照自适应下采样模版进行下采样运算,得到目标下采样图像。

Description

一种样条放大与自适应模版结合的图像下采样的方法
技术领域
本发明涉及视频处理方法,更具体地说,涉及一种图像视频下采样方法。
背景技术
随着信息化时代的到来,数字化成为其中的主角,可以说信息化的实现是以信息化为前提的。从计算机,互联网,数码相机,到数字电视无一例外的在演绎着这场数字化风暴。但不管是数字电视,还是计算机都在利用数字化的视频声音与图像等多媒体因素来冲击人们的感官神经。数字图像的处理便成了其中的不可或缺的技术,数字电视接收各种图像信号,包括标清信号,高清信号等,最终把这些不同分辨率的视频信号转化为适合播放器分辨率的视频信号进行播放。因此,数字图像分辨率放大和缩小技术是所有数字显示设备的关键技术之一。
目前在视频图像下采样的主流算法,大多是采用一个固定的模板将原图像上的若干个像素加权求出对应下采样后图像的一个像素。但是存在以下两种问题:
一、原图像中多少个像素对应缩小后的图像中的一个像素呢?按照已有的算法,下采样模板的大小决定原图像上多少个像素对应下采样原图像上一个像素。例如采用3x3模板,相当于原图像上9个像素对应下采样图像上1个像素。这种算法的存在以下缺陷:设想256x256——>255x255的下采样运算,若采用3x3的模板,会使图像变得模糊;同理,在2048x2048——>256x256的下采样运算中,无论模板选取多好的3x3模板,也无法将模拟8x8区域内的信息情况。
二、原图像中的某一些像素,在下采样过程中很可能处于某两个像素“中间”的区域,即原图像上某些像素同时属于下采样图像中的几个像素点。举个一围数字信号的简单的例子:设有数据信号[x1,x2,x3,x4],要求对该数字信号作4->3的下采样,取得新的信号[y1,y2,y3],以空间上的划分来说,y1包含了x1的全部和x2的一部分信息,y2包含了x2和x3的大部分信息,y3包含了x3的少量信息和x4的全部信息。在这个例子里,x2同时存在于下采样信号y1、y2中,x3同时存在于y2、y3中。在传统的算法里,下采样信号按照原有信号的空间分布被这样划分:
y 1 = ( x 1 + x 2 × 1 3 )
y 2 = ( x 2 × 2 3 + x 3 × 2 3 )
y 3 = ( x 3 × 1 3 + x 4 )
但这种划分方法是存在缺陷的,y1包含了x1的全部和x2左边小部分信号,包含在y1的小x2部分信号更接近于x1,而包含在y2中的右半部分x2应该更接近于x3。原始算法这种将每个数字信号“平均化”的思路,一定程度上不利于原始信号的保持。
以上的两种不足,是使得图像的下采样效果变得模糊的主要因素。
发明内容
本发明要解决的技术问题在于,利用像素的变化规律,来有效提高图像下采样的效果。
本发明提供一种样条放大与自适应模版结合的图像下采样的方法:包括下列步骤:
S10:根据原图像的分辨率与目标下采样的图像分辨率,确定对原图像的上采样比例系数,上采样比例系数为整数,根据上采样比例系数对图像进行上采样运算,得到新的上采样图像,新的上采样图像分辨率为目标下采样的图像分辨率的整数倍;
S20:对新的上采样图像上的像素按照自适应下采样模版进行下采样运算,得到目标下采样图像。
进一步地,所述步骤S10具体如下:设原始图像A的大小的分辨率为MxN,目标下采样图像A2大小的分辨率为mxn,上采样比例系数k、l计算方法为:
k=int(M/m)+i,l=int(N/n)+j,其中i,j=1,2,3,...
对原图做MxN进行上采样运算,得到新的上采样图像A1,新的上采样图像大小的分辨率为(k*m)x(l*n),
其中:k、l分别为长与宽的上采样比例系数,int()为取整函数。
所述步骤S20具体如下:根据k、l的取值,从杨辉三角上面选择系数Ck、Cl,得到自适应下采样模版ClT*Ck。
实施本发明的视频压缩方法,具有以下有益效果:提出的样条放大与自适应模版结合的图像下采样算法,首先通过精确度较高的上采样样条插值模拟原图像中每个像素按照周围变化规律的划分,然后根据这些划分好的区域,采用自适应的模板对图像进行整数倍的下采样运算。这种算法比传统的下采样算法更科学的利用了像素的变化规律,能有效提高图像下采样的效果。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明方法的流程示意图;
图2是(a)-(d)示出了对一段模拟信号进行量化、样条插值以及上采样的示意图。
具体实施方式
如图1所示为本发明方法的流程示意图,本发明提供一种样条放大与自适应模版结合的图像下采样的方法:包括下列步骤:
S101:根据原图像的分辨率与目标下采样的图像分辨率,确定对原图像的上采样比例系数,上采样比例系数为整数,根据上采样比例系数对图像进行上采样运算,得到新的上采样图像,新的上采样图像分辨率为目标下采样的图像分辨率的整数倍;设原始图像A的大小的分辨率为MxN,目标下采样图像A2大小的分辨率为mxn,上采样比例系数k、l计算方法为:
k=int(M/m)+i,l=int(N/n)+j,其中i,j=1,2,3,...    (1)
对原图做MxN进行上采样运算,得到新的上采样图像A1,新的上采样图像大小的分辨率为(k*m)x(l*n),
其中:k、l分别为长与宽的上采样比例系数,int()为取整函数。
S102:根据k、l的取值,从杨辉三角上面选择系数Ck、Cl,得到自适应下采样模版ClT*Ck,对新的上采样图像A1上的像素(k*m)x(l*n)按照自适应下采样模版进行下采样运算,得到目标下采样图像A2的图像大小为mxn,即上采样图像A1中kxl个像素对应下采样图像A2中1个像素,通过下采样模版ClT*Ck来计算从上采样图像A1中kxl个像素的像素值对应下采样图像A2中1个像素的像素值。
以下举例说明,经过上述对原图像进行目标分辨率kxl的整数倍的上采样运算后,新的上采样图像A1上kxl个像素正好对应下采样图像A2上l个像素,如何将这kxl个像素值整合成1个像素值的,首先根据k、l的取值,从杨辉三角(如公式2所示)上面选择系数Ck、Cl,然后ClT*Ck得到下采样模版。
C1                    1
C2                1      1
C3             1      2      1
C4          1     3      3      1            (2)
C5       1     4      6      4     1
C6    1     5     10     10     5     1
...               ............
例如,当k=5,1=3时,根据杨辉三角系数(如公式2所示),得到Ck=C5=[14641],C1=[121],则自适应的5x3下采样模版为:
C 3 T * C 5 = 1 2 1 1 4 6 4 1 = 1 4 6 4 1 2 8 12 8 2 1 4 6 4 1 - - - ( 3 )
k=5,1=3说明上采样后3x5个点对应下采样目标图像上1个点。对于下采样图A2中的某个点a(x,y)的值,由上采样图像A1中对应15个点通过模版ClT*Ck得到:
a(x,y)=(A(X-2,Y-1)×1+A(X-1,Y-1)×4+A(X,Y-1)×6+A(X+1,Y-1)×4+A(X+2,Y-1)×1
+A(X-2,Y)×2+A(X-1,Y)×8+A(X,Y)×12+A(X+1,Y)×8+A(X+2,Y)×2
+A(X-2,Y+1)×1+A(X-1,Y+1)×4+A(X,Y+1)×6+A(X+1,Y+1)×4+A(X+2,Y+1)×1)/64
,其中A(X,Y)为点a(x,y)在上采样图像A1中对应的中心坐标。
在下采样处理之中加入上采样运算的原因有是:通过上采样运算,根据图像中的像素与相邻像素之间的关系,重新划分原始图像中的像素,使得新图像的分辨率正好为下采样目标图像的整数倍,有利于图像的下采样。
通过大量实例证明图像整数倍下采样的优势,在对比实验情况下,两个不同分辨率下同一张的图像缩小到相同的分辨率效果比较,例如,(a)240x180->176x144;(b)352x288->176x144其中是整数倍的缩小,(a)为非整数倍的缩小,(b)为非整数倍的缩小,的效果更为清晰,整数倍的图像下采样,不存在原图像中某个像素同时属于下采样图像中的几个像素的情况,下采样图像更为清晰,效果更好。
由于整数倍的图像下采样实验结果较好,对于非整数倍的图像下采样,可以通过图像的上采样插值,将原始图像调整至目标分辨率的整数倍,图2(a)-(d)示出了对一段模拟信号进行量化、样条插值以及上采样的示意图,图2(a)展示了一段模拟信号,而图2(b)则是描述这段信号被采样量化成离散信号的过程,根据图2(b)中离散信号的变化规律,我们可以采用样条插值函数,对信号进行上采样运算,结果如图2(d)所示。以信号作4至3的下采样为例,先对图2(b)先进行上采样运算得到图2(d),再对图2(d)做下采样运算,就如同先对图2(b)的信号按照规律划分,如公式4所示,然后再对划分好的信号作12至3的下采样运算,如公式5所示。
x1->[x11,x12,x13]
x2->[x21,x22,x23]                                          (4)
x3->[x31,x32,x33]
x4->[x41,x42,x43],
[x11,x12,x13,x21,x22,x23,x31,x32,x33,x41,x42,x43]  (5)
->[(x11+x12+x13+x21)/4,(x22+x23+x31+x32)/4,(x33+x41+x42+x43)/4]
这样处理优势在于,该处理将x2、x3根据附近像素的变化规律,划分成不等的三个信号,然后将他们加入到下采样之中,提高了图像下采样的精确度。
由此可见,在对图像做下采样之前,先将图像进行上采样运算,使得图像放大到下采样目标分辨率的整数倍,有利于提高图像下采样的质量。其中上采样运算的样条插值函数的精确度越高,图像下采样质量就越好。
本发明方法的样条放大与自适应模版结合的图像下采样算法,首先通过精确度较高的上采样样条插值模拟原图像中每个像素按照周围变化规律的划分,然后根据这些划分好的区域,采用自适应的模板对图像进行整数倍的下采样运算。这种算法比传统的下采样算法更科学的利用了像素的变化规律,能有效提高图像下采样的效果。
以上所述仅为本发明的优选实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (5)

1.一种样条放大与自适应模版结合的图像下采样的方法,其特征在于,包括下列步骤:
S10:根据原图像的分辨率与目标下采样的图像分辨率,确定对原图像的上采样比例系数,上采样比例系数为整数,根据上采样比例系数对原图像进行上采样运算,得到新的上采样图像,新的上采样图像分辨率为目标下采样的图像分辨率的整数倍;
S20:对新的上采样图像上的像素按照自适应下采样模版进行下采样运算,得到目标下采样图像。
2.根据权利要求1所述的样条放大与自适应模版结合的图像下采样的方法,其特征在于,所述步骤S10具体如下:设原始图像A的大小的分辨率为MxN,目标下采样图像A2大小的分辨率为mxn,上采样比例系数k、l计算方法为:
k=int(M/m)+i,l=int(N/n)+j,其中i,j=1,2,3,...
对原图做MxN进行上采样运算,得到新的上采样图像A1,新的上采样图像大小的分辨率为(k*m)x(l*n),
其中:k、l分别为长与宽的上采样比例系数,int()为取整函数。
3.根据权利要求2所述的样条放大与自适应模版结合的图像下采样的方法方法,其特征在于,所述步骤S20具体如下:根据k、l的取值,从杨辉三角上面选择系数Ck、Cl,得到自适应下采样模版ClT*Ck。
4.根据权利要求3所述的样条放大与自适应模版结合的图像下采样的方法,其特征在于,所述k=5,l=3时,根据杨辉三角,得到Ck=C5=[14641],Cl=[121],则自适应的5x3下采样模版为:
C 3 T * C 5 = 1 2 1 1 4 6 4 1 = 1 4 6 4 1 2 8 12 8 2 1 4 6 4 1
对于下采样图像A2中的某个点a(x,y)的值,由新的上采样图像A1中对应15个点通过模版ClT*Ck得到:
a(x,y)=(A(X-2,Y-1)×1+A(X-1,Y-1)×4+A(X,Y-1)×6+A(X+1,Y-1)×4+A(X+2,Y-1)×1
+A(X-2,Y)×2+A(X-1,Y)×8+A(X,Y)×12+A(X+1,Y)×8+A(X+2,Y)×2
+A(X-2,Y+1)×1+A(X-1,Y+1)×4+A(X,Y+1)×6+A(X+1,Y+1)×4+A(X+2,Y+1)×1)/64
其中A(X,Y)为点a(x,y)在新的上采样图像A1对应的中心坐标。
5.根据权利要求3所述的样条放大与自适应模版结合的图像下采样的方法,其特征在于,杨辉三角如下:
C1                    1
C2                1      1
C3             1      2      1
C4          1     3      3      1
C5       1     4      6      4     1
C6    1     5     10     10     5     1
...               ............
CN2009101065040A 2009-04-03 2009-04-03 一种样条放大与自适应模版结合的图像下采样的方法 Expired - Fee Related CN101854491B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2009101065040A CN101854491B (zh) 2009-04-03 2009-04-03 一种样条放大与自适应模版结合的图像下采样的方法
PCT/CN2009/073594 WO2010111856A1 (zh) 2009-04-03 2009-08-28 一种样条放大与自适应模版结合的图像下采样的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009101065040A CN101854491B (zh) 2009-04-03 2009-04-03 一种样条放大与自适应模版结合的图像下采样的方法

Publications (2)

Publication Number Publication Date
CN101854491A true CN101854491A (zh) 2010-10-06
CN101854491B CN101854491B (zh) 2011-11-23

Family

ID=42805728

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101065040A Expired - Fee Related CN101854491B (zh) 2009-04-03 2009-04-03 一种样条放大与自适应模版结合的图像下采样的方法

Country Status (2)

Country Link
CN (1) CN101854491B (zh)
WO (1) WO2010111856A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016029511A1 (zh) * 2014-08-27 2016-03-03 深圳市华星光电技术有限公司 基于像素的获得降解析度图像的方法及装置
WO2019128726A1 (zh) * 2017-12-29 2019-07-04 华为技术有限公司 图像处理方法和装置
CN113096011A (zh) * 2021-03-25 2021-07-09 北京达佳互联信息技术有限公司 图像处理方法、装置及电子设备
CN116388769A (zh) * 2023-06-06 2023-07-04 莱芜职业技术学院 一种环境检测数据的计算机存储优化方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112532871B (zh) * 2020-11-11 2022-07-15 浙江大华技术股份有限公司 图像下采样方法、电子设备及存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100486700B1 (ko) * 1999-09-04 2005-05-03 삼성전자주식회사 선형 다운/업 샘플링 장치 및 그를 이용한 일반화된 격주사선 처리 부호화/복호화 방법 및 장치
US6522275B2 (en) * 2001-02-08 2003-02-18 Sigmatel, Inc. Method and apparatus for sample rate conversion for use in an analog to digital converter
WO2006091041A1 (en) * 2005-02-24 2006-08-31 Lg Electronics Inc. Method for up-sampling/down-sampling data of a video block
US7542053B2 (en) * 2005-03-30 2009-06-02 Intel Corporation Methods and apparatus for re-scaling image by variable re-scaling factor
JP5092580B2 (ja) * 2007-06-26 2012-12-05 ソニー株式会社 デジタル信号処理装置、デジタル信号処理方法及びデジタル信号処理プログラム

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016029511A1 (zh) * 2014-08-27 2016-03-03 深圳市华星光电技术有限公司 基于像素的获得降解析度图像的方法及装置
WO2019128726A1 (zh) * 2017-12-29 2019-07-04 华为技术有限公司 图像处理方法和装置
CN109996023A (zh) * 2017-12-29 2019-07-09 华为技术有限公司 图像处理方法和装置
CN109996023B (zh) * 2017-12-29 2021-06-29 华为技术有限公司 图像处理方法和装置
CN113096011A (zh) * 2021-03-25 2021-07-09 北京达佳互联信息技术有限公司 图像处理方法、装置及电子设备
CN113096011B (zh) * 2021-03-25 2024-02-09 北京达佳互联信息技术有限公司 图像处理方法、装置及电子设备
CN116388769A (zh) * 2023-06-06 2023-07-04 莱芜职业技术学院 一种环境检测数据的计算机存储优化方法
CN116388769B (zh) * 2023-06-06 2023-12-29 莱芜职业技术学院 一种环境检测数据的计算机存储优化方法

Also Published As

Publication number Publication date
CN101854491B (zh) 2011-11-23
WO2010111856A1 (zh) 2010-10-07

Similar Documents

Publication Publication Date Title
Qin et al. Multi-scale feature fusion residual network for single image super-resolution
KR100306250B1 (ko) 비디오신호프로세서용 에러은폐장치
US10019642B1 (en) Image upsampling system, training method thereof and image upsampling method
CN101854491B (zh) 一种样条放大与自适应模版结合的图像下采样的方法
US7397944B2 (en) Processing pipeline of pixel data of a color image acquired by a digital sensor
CN101706953B (zh) 基于直方图均衡的图像增强方法和装置
US7876378B1 (en) Method and apparatus for filtering video data using a programmable graphics processor
US20030179935A1 (en) Image processing apparatus, image processing method, image processing program, and computer-readable record medium storing image processing program
US20040061710A1 (en) System for improving display resolution
KR102221225B1 (ko) 영상 화질 개선방법 및 그 장치
CN110211057B (zh) 一种基于全卷积网络的图像处理方法、装置和计算机设备
CN102722875A (zh) 一种基于视觉注意和质量可变的图像超分辨率重建方法
WO2020238123A1 (en) Method, system, and computer-readable medium for improving color quality of images
CN106851399B (zh) 视频分辨率提升方法及装置
CN101183521A (zh) 一种图像缩放装置、方法及图像显示设备
CN102158714B (zh) 基于拜尔域三基色格式的图像边缘增强方法及装置
WO1999038120A1 (en) Method and apparatus for scaling an image using fractal transform
CN110555877B (zh) 一种图像处理方法、装置及设备、可读介质
JP4456003B2 (ja) 低コスト・スーパーサンプリング・ラスタライゼーション
CN112200719B (zh) 图像处理方法、电子设备及可读存储介质
TW521260B (en) Pixel number converting circuit and picture display device using the same
US9401005B2 (en) Image processing circuit, image processing method, and display device using the same
CN113689333A (zh) 一种图像增强的方法及装置
CN104657937B (zh) 一种基于edma的图像放大的方法及装置
CN110942425A (zh) 一种超分辨率图像的重构方法、重构系统和电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee

Owner name: SHENZHEN RONGCHANG TIANXIA TECHNOLOGY CO., LTD.

Free format text: FORMER NAME: SHENZHEN TEMOBI SCIENCE + TECHNOLOGY CO., LTD.

CP01 Change in the name or title of a patent holder

Address after: 19, building 18, Changhong technology building, 518057 South twelve Road, South tech Zone, Nanshan District hi tech Zone, Guangdong, Shenzhen

Patentee after: SHENZHEN TEMOBI TECHNOLOGY CO., LTD.

Address before: 19, building 18, Changhong technology building, 518057 South twelve Road, South tech Zone, Nanshan District hi tech Zone, Guangdong, Shenzhen

Patentee before: Shenzhen Temobi Science & Tech Development Co.,Ltd.

ASS Succession or assignment of patent right

Owner name: RONGCHUANG TIANXIA (SHANGHAI) TECHNOLOGY DEVELOPME

Free format text: FORMER OWNER: SHENZHEN RONGCHANG TIANXIA TECHNOLOGY CO., LTD.

Effective date: 20150624

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150624

Address after: 200433 Shanghai City, Yangpu District Wei Road No. 6 room 502-8

Patentee after: World (Shanghai) Technology Development Co., Ltd.

Address before: 19, building 18, Changhong technology building, 518057 South twelve Road, South tech Zone, Nanshan District hi tech Zone, Guangdong, Shenzhen

Patentee before: SHENZHEN TEMOBI TECHNOLOGY CO., LTD.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20111123

Termination date: 20160403

CF01 Termination of patent right due to non-payment of annual fee