CN105069748B - 一种基于微小卫星物方扫描技术获取高分辨率图像的方法 - Google Patents

一种基于微小卫星物方扫描技术获取高分辨率图像的方法 Download PDF

Info

Publication number
CN105069748B
CN105069748B CN201510417573.9A CN201510417573A CN105069748B CN 105069748 B CN105069748 B CN 105069748B CN 201510417573 A CN201510417573 A CN 201510417573A CN 105069748 B CN105069748 B CN 105069748B
Authority
CN
China
Prior art keywords
image
registration
microsatellite
object space
space scanning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510417573.9A
Other languages
English (en)
Other versions
CN105069748A (zh
Inventor
孙婷婷
周程灏
王治乐
牟宗高
徐君
朱瑶
庄雯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Xinzhida Automation Complete Equipment Co ltd
Original Assignee
Harbin Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Institute of Technology filed Critical Harbin Institute of Technology
Priority to CN201510417573.9A priority Critical patent/CN105069748B/zh
Publication of CN105069748A publication Critical patent/CN105069748A/zh
Application granted granted Critical
Publication of CN105069748B publication Critical patent/CN105069748B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4053Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
    • G06T3/4069Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution by subpixel displacements

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于微小卫星物方扫描技术获取高分辨率图像的方法,具体步骤如下:步骤一:构建基于微小卫星平台的物方扫描成像系统;步骤二:亚像素位移序列图像的采集;步骤三:针对采集到的多帧图像,利用基于变换域配准的傅里叶变换方法将其进行配准;步骤四:运用基于小波变换的序列图像融合方法将配准后的图像融合重建出一幅高分辨率图像。本发明基于微小卫星平台利用物方扫描亚像元技术,运用基于变换域配准的傅里叶变换方法和基于小波变换的序列图像融合方法,将多帧互有亚像素位移的低分辨率图像序列重建成一帧高分辨率图像,从而提高Nyquist频率来有效地减少成像系统的频谱混叠,进而提升整个光学系统的成像质量,以获得更加丰富的目标信息。

Description

一种基于微小卫星物方扫描技术获取高分辨率图像的方法
技术领域
本发明属于航天遥感领域,涉及一种基于微小卫星平台利用物方扫描亚像元技术获取高分辨率图像的方法。
背景技术
二十一世纪以来,随着军事侦察、国土资源勘查等军民应用领域对高分辨率遥感图像需求的不断增加,如何低成本获取高分辨率遥感图像成为当前航天遥感领域的研究热点。
目前,获取高分辨率遥感图像的常用途径主要有增大星载相机光学焦距、降低卫星轨道高度和减小探测器单个像元尺寸。虽然这些提高星载相机分辨率的常规方法非常有效,但还是存在许多问题,如:
1、研制长焦距相机会使遥感卫星体积变大;
2、光学零件的加工难度也会增大;
3、降低卫星轨道高度,导致星载相机的幅宽也会随之减小;
4、采用小像元尺寸的探测器可以充分发挥光学系统的成像潜力,但是目前的工艺水平已经使像元尺寸达到了它的极小值。
发明内容
为了解决上述问题,本发明提出了一种基于微小卫星物方扫描技术获取高分辨率图像的方法,这种方法不需要改变硬件的主系统、仅仅通过改变探测器的采样模式就可以实现提高星载相机地面像元分辨率的目的。
本发明解决其技术问题所采用的技术方案如下:
一种基于微小卫星物方扫描技术获取高分辨率图像的方法,利用微扫描装置将光学系统所成的图像在x,y方向进行1/N(N为整数)像素距的位移,得到N×N帧的欠采样图像,并运用数字图像处理器将经过亚像元错位得到的多帧图像按照获得图像的方式和顺序进行融合重建成一帧图像,从而达到实现提高分辨率的目的。具体步骤如下:
步骤一:构建基于微小卫星平台的物方扫描成像系统
本发明基于微小卫星平台的物方扫描成像系统的空间分布由微小卫星、子望远镜系统、光束合成系统、图像采集系统、图像处理系统以及计算机控制系统组成,整个成像系统承载在微小卫星上由计算机控制系统进行控制。其中,子望远镜系统由三个或更多个完全相同的无焦系统构成,图像采集系统由微扫描装置、CCD探测器和图像采集卡构成。这样,观测场景的光路经过子望远镜系统由光束合成系统会聚后进入图像采集系统,在这里经过微扫描装置将光束合成系统所成的图像在x和y方向实行1/N (N为整数)像元间距的错位移动成像得到N×N幅欠采样图像,最后经过图像处理系统将这多帧图像重建成一幅图像,得到该观测场景的高分辨率图像,从而提高系统的空间分辨力。
步骤二:亚像素位移序列图像的采集
通过计算机软件对物方扫描装置进行程序控制,实现矩形双向扫描模式成像,得到多幅具有亚像素位移的欠采样图像,完成亚像素位移序列图像的采集工作。
步骤三:针对采集到的多帧图像,利用基于变换域配准的傅里叶变换方法将其进行配准
该频域图像配准算法主要步骤如下:
(1)加窗处理:对待配准的图像进行加Tukey窗处理,去除边缘噪声影响;
(2)频域变换:对加窗后的低分辨率图像进行傅立叶变换;
(3)平滑滤波:采用R滤波器对变换后的图像低通滤波,从而减少频谱混叠;
(4)位移计算:计算图像之间的相位差,并利用最小二乘法求出配准图像之间的微位移量。
步骤四:运用基于小波变换的序列图像融合方法将配准后的图像融合重建出一幅高分辨率图像
首先,以前后相邻两帧图像A、B融合为例,设融合后图像为C。基于小波变换的序列图像融合的步骤为:
(1)采用二维小波变换的Mallat算法,对图像A、B进行小波分解。
(2)在变换域内的某一分辨率级上,在相应位置比较图像A与B各自的高频小波系数,保留大的系数,作为融合后图像C的高频小波系数,融合后图像C的低频小波系数为图像A与图像B的低频系数平均加权求和。
(3)对新的组合系数应用 Mallet 算法进行小波逆变换,即可获得融合的图像C。
而对于多帧序列图像的融合,可以先将第一帧图像与第二帧图融合,将融合后的图像与第三帧图像融合,以此类推,完成整个序列图像的融合。
本发明基于微小卫星平台利用物方扫描亚像元技术获得多帧具有亚像素位移的欠采样图像,然后运用基于变换域配准的傅里叶变换方法和基于小波变换的序列图像融合方法将多帧图像重建,获得一幅高分辨率图像。与现有技术相比,具有以下优点:
第一,本发明的物方扫描成像系统建立在微小卫星平台上,每个微小卫星都有其自己的一套控制系统,分工明确,操作方便。
第二、本发明中的微扫描装置由计算机控制,通过软件程序可对其扫描模式进行控制。
第三,本发明中图像配准时运用的傅里叶变换方法是基于变换域配准中最主要的方法。它可以同时体现出配准图像之间的旋转、平移、仿射等变换信息,还能在一定程度上提高图像的抗噪性和鲁棒性。
第四,本发明中利用傅里叶变换处理图像的算法发展相对比较成熟,不仅速度快而且易于在硬件系统上实现。
第五,本发明中图像融合时运用的小波变换方法是多尺度、多分辨率的分解重构方法,由于它通过伸缩平移运算对图像信号逐步进行多尺度细化,因此可以聚焦到分析对象的任意细节,最终达到在图像的高频部分时间细分,低频部分频率细分。
第六,本发明方法基于微小卫星平台利用物方扫描亚像元技术,运用基于变换域配准的傅里叶变换方法和基于小波变换的序列图像融合方法,将多帧互有亚像素位移的低分辨率图像序列重建成一帧高分辨率图像,从而提高Nyquist频率来有效地减少成像系统的频谱混叠,进而提升整个光学系统的成像质量,以获得更加丰富的目标信息。
附图说明
图1为基于微小卫星物方扫描技术获取高分辨率图像方法的流程图;
图2为基于微小卫星平台的物方扫描成像系统的分布结构图。
具体实施方式
下面结合附图对本发明的技术方案作进一步的说明,但并不局限于此,凡是对本发明技术方案进行修改或者等同替换,而不脱离本发明技术方案的精神和范围,均应涵盖在本发明的保护范围中。
本发明提供了一种基于微小卫星物方扫描技术获取高分辨率图像方法,如图1所示,包括以下步骤:
S1、构建基于微小卫星平台的物方扫描成像系统。
如图2所示,本发明基于微小卫星平台的物方扫描成像系统的空间分布由微小卫星1、子望远镜系统2、光束合成系统3、图像采集系统4、图像处理系统5以及计算机控制系统6组成。整个成像系统承载在微小卫星1上由计算机控制系统6进行控制,其中子望远镜系统2由三个或更多个完全相同的无焦系统构成,图像采集系统4由微扫描装置、CCD探测器和图像采集卡构成。这样,观测场景的光路经过子望远镜系统2由光束合成系统3会聚后进入图像采集系统4,在这里经过微扫描装置将光束合成系统所成的图像在x和y方向实行1/N (N为整数)像元间距的错位移动成像得到N×N幅欠采样图像,最后经过图像处理系统5将这多帧图像重建成一幅图像,得到该观测场景的高分辨率图像。
S2、采集亚像素位移序列图像。
本部分通过计算机软件对物方扫描装置进行程序控制,实现矩形双向扫描模式成像,得到多幅具有亚像素位移的欠采样图像,完成亚像素位移序列图像的采集工作。
S3、针对采集到的多帧图像,利用基于变换域配准的傅里叶变换方法将其进行配准。
S31、加窗处理:对待配准的图像进行加Tukey窗处理,去除边缘噪声影响;
S32、频域变换:对加窗后的低分辨率图像进行傅立叶变换;
S33、平滑滤波:采用R滤波器对变换后的图像低通滤波,从而减少频谱混叠;
S34、位移计算:计算图像之间的相位差,并利用最小二乘法求出配准图像之间的微位移量。
S4、运用基于小波变换的序列图像融合方法将配准后的图像融合重建出一幅高分辨率图像。
首先将前两帧图像A、B进行融合,设融合后图像为C。
S41、采用二维小波变换的Mallat算法,对图像A、B进行小波分解。
S42、在变换域内的某一分辨率级上,在相应位置比较图像A与B各自的高频小波系数,保留大的系数,作为融合后图像C的高频小波系数,融合后图像C的低频小波系数为图像A与图像B的低频系数平均加权求和。
S43、对新的组合系数应用 Mallet 算法进行小波逆变换,即可获得融合的图像C。
S44、将融合后的图像与第三帧图像融合,以此类推,完成整个序列图像的融合。

Claims (3)

1.一种基于微小卫星物方扫描技术获取高分辨率图像的方法,其特征在于所述方法步骤如下:
步骤一:构建基于微小卫星平台的物方扫描成像系统
基于微小卫星平台的物方扫描成像系统的空间分布由微小卫星、子望远镜系统、光束合成系统、图像采集系统、图像处理系统以及计算机控制系统组成,整个成像系统承载在微小卫星上由计算机控制系统进行控制;其中,子望远镜系统由三个或更多个完全相同的无焦系统构成;图像采集系统由微扫描装置、CCD探测器和图像采集卡构成;观测场景的光路经过子望远镜系统由光束合成系统会聚后进入图像采集系统,在这里经过微扫描装置将光束合成系统所成的图像在x和y方向实行1/N像元间距的错位移动成像得到N×N幅欠采样图像,N为整数,最后经过图像处理系统将这N×N幅图像重建成一幅图像,得到该观测场景的高分辨率图像;
步骤二:亚像素位移序列图像的采集
通过计算机软件对物方扫描成像系统进行程序控制,实现矩形双向扫描模式成像,得到N×N幅具有亚像素位移的欠采样图像,完成亚像素位移序列图像的采集工作;
步骤三:针对采集到的N×N幅图像,利用基于变换域配准的傅里叶变换方法将其进行配准;
步骤四:运用基于小波变换的序列图像融合方法将配准后的图像融合重建出一幅高分辨率图像。
2.根据权利要求1所述的基于微小卫星物方扫描技术获取高分辨率图像的方法,其特征在于所述步骤三中,配准算法步骤如下:
(1)加窗处理:对待配准的图像进行加Tukey窗处理,去除边缘噪声影响;
(2)频域变换:对加窗后的低分辨率图像进行傅立叶变换;
(3)平滑滤波:采用R滤波器对变换后的图像低通滤波,从而减少频谱混叠;
(4)位移计算:计算图像之间的相位差,并利用最小二乘法求出配准图像之间的微位移量。
3.根据权利要求1所述的基于微小卫星物方扫描技术获取高分辨率图像的方法,其特征在于所述步骤四中,融合的具体步骤如下:
(1)采用二维小波变换的Mallat算法,对前后相邻两帧图像A、B进行小波分解;
(2)在变换域内的某一分辨率级上,在相应位置比较图像A与B各自的高频小波系数,保留大的系数,作为融合后图像C的高频小波系数,融合后图像C的低频小波系数为图像A与图像B的低频系数平均加权求和;
(3)对新的组合系数应用 Mallet 算法进行小波逆变换,即可获得融合的图像C;
(4)将融合后的图像与第三帧图像融合,以此类推,完成整个序列图像的融合。
CN201510417573.9A 2015-07-16 2015-07-16 一种基于微小卫星物方扫描技术获取高分辨率图像的方法 Active CN105069748B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510417573.9A CN105069748B (zh) 2015-07-16 2015-07-16 一种基于微小卫星物方扫描技术获取高分辨率图像的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510417573.9A CN105069748B (zh) 2015-07-16 2015-07-16 一种基于微小卫星物方扫描技术获取高分辨率图像的方法

Publications (2)

Publication Number Publication Date
CN105069748A CN105069748A (zh) 2015-11-18
CN105069748B true CN105069748B (zh) 2017-11-10

Family

ID=54499106

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510417573.9A Active CN105069748B (zh) 2015-07-16 2015-07-16 一种基于微小卫星物方扫描技术获取高分辨率图像的方法

Country Status (1)

Country Link
CN (1) CN105069748B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105391945B (zh) * 2015-12-23 2019-02-12 北京奇虎科技有限公司 摄像头自动聚焦控制方法及装置
CN106251288B (zh) * 2016-07-21 2019-04-09 北京理工大学 基于多分辨力分析的双线阵成像器件亚像元图像合成方法
CN106558036B (zh) * 2016-10-27 2019-08-02 中国科学院光电研究院 一种星载超分辨成像系统设计方法
CN107194874B (zh) * 2017-05-26 2020-10-02 上海微小卫星工程中心 基于偏置稳像的超分辨成像系统及方法
CN109242893B (zh) * 2018-08-23 2020-09-04 深圳市斯尔顿科技有限公司 成像方法、图像配准方法及装置
CN109886872B (zh) * 2019-01-10 2023-05-16 深圳市重投华讯太赫兹科技有限公司 安检设备及其图像检测方法
CN109934768B (zh) * 2019-03-21 2022-10-04 大连海事大学 一种基于配准方式的亚像素位移图像获取方法
CN110471431B (zh) * 2019-07-30 2022-08-12 北京天问空间科技有限公司 一种对地观测系统空间分辨率控制的方法
CN112927177A (zh) * 2021-03-10 2021-06-08 中国空间技术研究院 微小卫星平台上的多帧图像快速重建方法
CN117544863A (zh) * 2024-01-10 2024-02-09 深圳市索智科技股份有限公司 一种基于记录仪的信息采集方法、系统及记录仪

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1169847B1 (en) * 1999-03-30 2010-01-13 Tessera Technologies Hungary Kft. A method and system for super resolution image capture using a mask
CN101980291A (zh) * 2010-11-03 2011-02-23 天津大学 基于随机微位移的超分辨率图像重建方法
CN103236045A (zh) * 2013-05-02 2013-08-07 北京理工大学 基于焦平面探测器mtf的微扫描图像重构方法
CN103236044A (zh) * 2013-05-02 2013-08-07 北京理工大学 基于泰勒展开积分退化模型的微扫描图像重构方法
CN104394309A (zh) * 2014-12-16 2015-03-04 中国科学院国家天文台 一种图像稳定的超分辨率成像系统及方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6867753B2 (en) * 2002-10-28 2005-03-15 University Of Washington Virtual image registration in augmented display field

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1169847B1 (en) * 1999-03-30 2010-01-13 Tessera Technologies Hungary Kft. A method and system for super resolution image capture using a mask
CN101980291A (zh) * 2010-11-03 2011-02-23 天津大学 基于随机微位移的超分辨率图像重建方法
CN103236045A (zh) * 2013-05-02 2013-08-07 北京理工大学 基于焦平面探测器mtf的微扫描图像重构方法
CN103236044A (zh) * 2013-05-02 2013-08-07 北京理工大学 基于泰勒展开积分退化模型的微扫描图像重构方法
CN104394309A (zh) * 2014-12-16 2015-03-04 中国科学院国家天文台 一种图像稳定的超分辨率成像系统及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于不可控微扫描的高分辨力图像重构方法;陈艳 等;《光子学报》;20090831;第38卷(第8期);第2155-2158页 *
提高线阵采样式光学遥感器图像空间分辨率的新方法研究;周峰 等;《宇航学报》;20060331;第27卷(第2期);第227-232页 *

Also Published As

Publication number Publication date
CN105069748A (zh) 2015-11-18

Similar Documents

Publication Publication Date Title
CN105069748B (zh) 一种基于微小卫星物方扫描技术获取高分辨率图像的方法
Hardie et al. High-resolution image reconstruction from a sequence of rotated and translated frames and its application to an infrared imaging system
CN101276465B (zh) 广角图像自动拼接方法
CN104394309B (zh) 一种图像稳定的超分辨率成像系统及方法
CN107959805A (zh) 基于混合相机阵列的光场视频成像系统及视频处理方法
US20170171525A1 (en) Electronic system including image processing unit for reconstructing 3d surfaces and iterative triangulation method
US11656722B1 (en) Method and apparatus for creating an adaptive bayer pattern
JP2005318548A (ja) 撮像システム、画像データ列作成装置、画像生成装置、画像データ列生成装置、画像データ列生成システム、及び画像伝送システム
WO2012018282A1 (ru) Способ суперразрешения изображений и нелинейный цифровой фильтр для его осуществления
US8995793B1 (en) Moving object super-resolution systems and methods
CN108961163A (zh) 一种高分辨率卫星影像超分辨重建方法
CN112424821B (zh) 基于由旋转成像器捕获的图像的全景图像构建
US11210766B2 (en) Method of jitter detection and image restoration for high-resolution TDI CCD satellite images
Rasti et al. Wavelet transform based new interpolation technique for satellite image resolution enhancement
CN104217412B (zh) 一种机载超分辨率图像重建装置及重建方法
CN104574338A (zh) 基于多角度线阵ccd传感器的遥感图像超分辨率重建方法
CN108257090B (zh) 一种面向机载行扫相机的高动态图像拼接方法
CN100382567C (zh) 从因隔行采样引起降质的图像中重建超分辨率图像的方法
CN110853145B (zh) 高空间分辨率便携式抗抖动高光谱成像方法及装置
US20080002909A1 (en) Reconstructing Blurred High Resolution Images
Sharma et al. Formation of super-resolution image: a review
Tuinstra et al. High-resolution image reconstruction from digital video by exploitation of nonglobal motion
Sreedhar et al. Image fusion-the pioneering technique for real-time image processing applications
Malviya et al. Wavelet based multi-focus image fusion
Murugan et al. Performance of super resolution algorithms in generating high resolution images

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190111

Address after: 236800 Rose Road, Bozhou Bowu Modern Industrial Park, Bozhou City, Anhui Province

Patentee after: Anhui Tiannuo Mechanical and Electrical Technology Co.,Ltd.

Address before: 150000 No. 92, West Da Zhi street, Nangang District, Harbin, Heilongjiang.

Patentee before: Harbin Institute of Technology

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200117

Address after: Room 1001, 289, Chengxin Dajian Road, xihanggang street, Shuangliu District, Chengdu City, Sichuan Province

Patentee after: Chengdu Weihan technology partnership (L.P.)

Address before: 236800 Rose Road, Bozhou Bowu Modern Industrial Park, Bozhou City, Anhui Province

Patentee before: Anhui Tiannuo Mechanical and Electrical Technology Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20240109

Address after: 150090 At the intersection of Dalian North Road and Xingkai Road in the concentrated area of Haping Road, Economic Development Zone, Harbin City, Heilongjiang Province

Patentee after: HARBIN XINZHIDA AUTOMATION COMPLETE EQUIPMENT Co.,Ltd.

Address before: Room 1001, 289 Chengxin Dajian Road, xihanggang street, Shuangliu District, Chengdu, Sichuan 610225

Patentee before: Chengdu Weihan technology partnership (L.P.)