CN108596852A - 面阵相机大姿态角成像镜像几何畸变的物像映射还原方法 - Google Patents

面阵相机大姿态角成像镜像几何畸变的物像映射还原方法 Download PDF

Info

Publication number
CN108596852A
CN108596852A CN201810397119.5A CN201810397119A CN108596852A CN 108596852 A CN108596852 A CN 108596852A CN 201810397119 A CN201810397119 A CN 201810397119A CN 108596852 A CN108596852 A CN 108596852A
Authority
CN
China
Prior art keywords
area array
array cameras
image
pixel
angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810397119.5A
Other languages
English (en)
Other versions
CN108596852B (zh
Inventor
杨秀彬
朱琳
王家骐
金光
王旻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CN201810397119.5A priority Critical patent/CN108596852B/zh
Publication of CN108596852A publication Critical patent/CN108596852A/zh
Application granted granted Critical
Publication of CN108596852B publication Critical patent/CN108596852B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4007Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10032Satellite or aerial image; Remote sensing

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

面阵相机大姿态角成像镜像几何畸变的物像映射还原方法,涉及航天面阵相机成像领域,主要解决现有面阵相机大姿态角成像条件下地物分辨率不一致导致像面图像镜像几何畸变的技术问题。本发明从面阵相机成像的原理出发,综合考虑面阵相机的工作原理、大姿态角成像时的投影映射关系及视场角不变原理,提出了面阵相机成像的还原过程,并给出了最佳矫正图像几何畸变的物像尺寸还原公式,方法简单易行,依据成像的逆过程即可实现对面阵相机大姿态角成像几何畸变的矫正。

Description

面阵相机大姿态角成像镜像几何畸变的物像映射还原方法
技术领域
本发明涉及航天面阵相机成像领域,具体涉及一种面阵相机大姿态角下成像物像映射的还原方法。
背景技术
在航天光学成像领域中,具备高帧频和高信噪比的面阵CMOS器件业已广泛应用于区域目标获取,由于观测区域目标分布具有不确定性,因此需要卫星敏捷机动完成待观测区域的精确成像。然而随着卫星姿态角度的变化,面阵相机成像物距和对应的地面分辨率也在实时变化,因此在卫星大侧摆角度成像条件下,存在像面上对应的地物分辨率不一致的情况,不同分辨率的物点压缩到相同几何尺寸的像面上则会出现图像的镜像几何畸变。本文依据面阵相机大姿态角条件下的成像对应关系,根据视场角一致性原理提出了成像镜像几何畸变的物像映射还原方法,可最大程度地矫正面阵相机像面对应的地面物点分辨率不一致问题。
发明内容
本发明为了解决面阵相机大姿态角成像条件下像面地物分辨率不一致的技术问题,提供一种面阵相机大姿态角成像镜像几何畸变的物像映射还原方法。
面阵相机大姿态角成像镜像几何畸变的物像映射还原方法,该方法由以下步骤实现:
步骤一、读取面阵相机的横滚姿态角为时,设定面阵相机成像像面图像长宽方向的像素点的个数为I(m,n),即长度方向有m列像素,宽度方向有n行像素;
步骤二、计算所述面阵相机像面的不同列像素点对应的半视场角;
设定像面上的x方向为卫星飞行方向,y方向为垂直卫星飞行方向,o′为像面中心点,第i列像素边缘为c′(xi,yi),面阵相机焦距为f;
将像面上每列像素从左至右依次编号,获得所述第i列像素边缘位置对应的半视场角ηi,E′为第i列像素中心点,i的范围为0<i<m+1,所述半视场角ηi用公式表示为:
式中:a为像面上单位像元尺寸;
步骤三、计算面阵相机像面的不同列像素点对应的物距及地面像元分辨率;
根据几何关系,求出第i列像素中心点E′与像面中心点o′相对于面阵相机镜头光心夹角βi,卫星飞行高度H0,地球赤道半径R,A为地心,E′对应的地面拍摄区域的物点为E,物点E对应的物距为Lβi,面阵相机星下点成像像面不同列像素点对应的地面像元分辨率为GSDβi
过面阵相机镜头光心点D作线段E’D的延长线至点B,使线段AB垂直于DB交于B点构造直角三角形ABE和直角三角形ABD;o为星下点,所述面阵相机镜头光心夹角βi、Lβi以及GSDβi的公式为:
H=H0+R
步骤四、计算不同侧摆角对应的地面实际拍摄梯形区域内像素点个数及地面像元分辨率;
计算面阵相机侧摆成像所拍摄区域的宽度,半视场角ηi所对应的面阵相机地面覆盖宽度di及其对应的像素点个数不同侧摆角时像面各列像素点对应的地面像元分辨率以及地面拍摄区域的物点所对应的物距用公式表示为:
步骤五、对像面宽度方向像素点插值还原面阵相机实际拍摄区域;
对图像的每列像依次迭代插值,即0:n,实现将像面图像还原成面阵相机大姿态角拍摄时所覆盖的实际地面区域。
本发明的有益效果:本发明所述的面阵相机为了实现在轨成像区域的大视场、宽覆盖,需要面阵相机在卫星大姿态角条件下进行成像,而在其侧摆成像过程中由于物距的变化导致地面分辨率发生变化,进而导致面阵相机大姿态角拍摄时地面区域近似为梯形,投影至像面则出现图像镜像几何畸变。本发明为一种面阵相机大姿态角下成像镜像几何畸变的物像映射还原方法,综合考虑面阵相机的工作原理、大姿态角成像时的投影映射关系及视场角不变原理,提出了面阵相机成像的还原过程,方法简单易行,依据成像的逆过程即可实现对面阵相机大姿态角成像几何畸变的矫正。
附图说明
图1为成像镜像几何畸变的物像映射还原对比图;
图2为本发明所述的面阵相机大姿态角成像镜像几何畸变的物像映射还原方法中面阵相机大姿态角物像对应关系图;
图3为本发明所述的面阵相机大姿态角成像镜像几何畸变的物像映射还原方法中面阵相机像面像素点对应的半视场角示意图;
图4为本发明所述的面阵相机大姿态角成像镜像几何畸变的物像映射还原方法中面阵相机像面像素点对应的夹角示意图;
图5为本发明所述的面阵相机大姿态角成像镜像几何畸变的物像映射还原方法中面阵相机星下点对应的物距计算示意图;
图6为本发明所述的面阵相机大姿态角成像镜像几何畸变的物像映射还原方法中面阵相机大姿态角拍摄区域示意图。
具体实施方式
具体实施方式一、结合图1至图6说明本实施方式,面阵相机大姿态角成像镜像几何畸变的物像映射还原方法,星下点成像与侧摆角成像地面景物与像面的对应关系如图1所示。该方法主要是根据大视场角成像的物像映射关系确定梯形图像的扩大范围,还原面阵相机大视场角成像的几何畸变过程,如图2所示,o为星下点,为姿态角。其具体方法为:
1.读取横滚姿态角为时,面阵相机成像像面图像长宽方向的像素点的个数I(m,n),即长度方向有m列像素,宽度方向有n行像素。
2.计算面阵相机像面不同列像素点对应的半视场角大小。
规定像面上的x方向为卫星飞行方向,y方向为垂直飞行方向,o’为像面中心点,C’(xi,yi)为第i列像素边缘点,f为面阵相机焦距。将像面上每列像素从左至右依次编号,根据几何关系可以求出C’位置对应的半视场角ηi(0<i<m+1),E’为第i列像素中心点。如图3所示。推导公式如下:
其中:a为像面上单位像元尺寸。
3.计算面阵相机星下点成像像面不同列像素点对应的物距大小及地面像元分辨率。
根据几何关系,可以求出第i列像素中心点E’与像面中心点o’相对于面阵相机镜头光心夹角βi。卫星飞行高度H0,地球赤道半径R,A为地心,E为E’对应的地面拍摄区域的物点,物点E对应的物距为Lβi,面阵相机星下点成像像面不同列像素点对应的地面像元分辨率为GSDβi。过面阵相机镜头光心点D作线段E’D的延长线至点B,使AB垂直于DB交于B点构造直角三角形ABE和直角三角形ABD。示意图如图4和图5所示,o为星下点。推导公式如下:
H=H0+R
4.计算不同侧摆角对应的地面实际拍摄梯形区域内像素点个数及地面像元分辨率。
规定面阵相机像面上单位像元尺寸为a,由面阵相机的物像对应关系可知,面阵相机星下点成像的地面像元分辨率一致,但面阵相机物距随侧摆姿态角变大而实时变大,面阵相机所拍摄的地面范围拓宽近似呈梯形,地面像元分辨率随之变低。根据视场角一致原理,可计算出面阵相机侧摆成像所拍摄区域的宽度,不同的视场角ηi所对应的面阵相机地面覆盖宽度di及其对应的像素点个数与不同侧摆角时像面各列像素点对应的地面像元分辨率参照3中算法可得地面拍摄区域的物点所对应物距示意图如图6所示,o为星下点。推导公式如下:
5.对像面宽度方向像素点插值还原面阵相机实际拍摄区域。
图像宽度大小为n个像素,对图像的每列像素做相应的插值处理为0:n,即将像面各列像素的宽度拓宽成面阵相机实际侧摆成像所得梯形区域各列的宽度为个像素。依次迭代处理即可还原面阵相机大姿态角侧摆成像时所覆盖的实际地面区域,矫正几何畸变。
具体实施方式二、本实施方式为具体实施方式一所述的面阵相机大姿态角成像镜像几何畸变的物像映射还原方法的具体实施例:
1.读取姿态角为时,面阵相机像面图像长宽方向的像素点个数I(4000,3000)。
2.计算面阵相机像面不同列像素点对应的半视场角大小。
假设面阵相机像面上第1列像素边缘点C’(-0.028,-0.0105),相机焦距f=7m,像元尺寸7um。示意图如图3所示。
将已知条件代入以下公式:
可以计算出η1=0.086°,对ηi迭代计算即可得到面阵相机像面每列像素对应的半视场角值。
3.计算面阵相机星下点成像像面不同列像素点对应的物距大小及地面像元分辨率。
假设卫星飞行高度H0=500km,地球赤道半径R=6378.137km,E’(-0.028,0)为第1列像素的中心点。示意图如图4和图5所示,o为星下点。
H=H0+R=6878.137km
4.计算不同侧摆角对应的地面实际拍摄梯形区域内像素点个数及地面像元分辨率。
根据视场角一致原理,可计算出面阵相机侧摆成像所拍摄区域的宽度,第1列像素的视场角2·η1所对应的面阵相机地面覆盖宽度d1及其对应的像素点个数N1,与对应的地面像元分辨率GSD1,地面拍摄区域的物点所对应物距示意图如图6所示,o为星下点。推导公式如下:
可以计算出d1=1758.71m,N1=3517,对Ni迭代计算即可得到面阵相机像面不同列像素点对应的像素点个数。
5.对像面宽度方向像素点插值还原面阵相机实际拍摄区域
面阵相机像面图像宽度大小为3000个像素点,对图像的第1列像素插值处理0:3000/3517:3000,按照此方式对图像每列像素点依次进行迭代插值处理即可将像面图像还原成面阵相机大姿态角拍摄时所覆盖的实际地面区域,矫正几何畸变。
本实施方式从面阵相机侧摆成像工作的原理出发,综合考虑面阵相机的工作原理、大姿态角成像时的投影映射关系及视场角不变原理,提出了面阵相机物像映射还原方法,并给出了最佳物像尺寸还原公式。本方法既还原了面阵相机大姿态角成像的物像对应关系,其逆过程又可实现对面阵相机大姿态角成像几何畸变的矫正。

Claims (1)

1.面阵相机大姿态角成像镜像几何畸变的物像映射还原方法,其特征是,该方法由以下步骤实现:
步骤一、读取面阵相机的横滚姿态角为时,设定面阵相机成像像面图像长宽方向的像素点的个数为I(m,n),即长度方向有m列像素,宽度方向有n行像素;
步骤二、计算所述面阵相机像面的不同列像素点对应的半视场角;
设定像面上的x方向为卫星飞行方向,y方向为垂直卫星飞行方向,o′为像面中心点,第i列像素边缘为c′(xi,yi),面阵相机焦距为f;
将像面上每列像素从左至右依次编号,获得所述第i列像素边缘位置对应的半视场角ηi,E′为第i列像素中心点,i的范围为0<i<m+1,所述半视场角ηi用公式表示为:
式中:a为像面上单位像元尺寸;
步骤三、计算面阵相机像面的不同列像素点对应的物距及地面像元分辨率;
根据几何关系,求出第i列像素中心点E′与像面中心点o′相对于面阵相机镜头光心夹角βi,卫星飞行高度H0,地球赤道半径R,A为地心,E′对应的地面拍摄区域的物点为E,物点E对应的物距为面阵相机星下点成像像面不同列像素点对应的地面像元分辨率为GSDβi
过面阵相机镜头光心点D作线段E’D的延长线至点B,使线段AB垂直于DB交于B点构造直角三角形ABE和直角三角形ABD;o为星下点,所述面阵相机镜头光心夹角βi以及GSDβi的公式为:
H=H0+R
步骤四、计算不同侧摆角对应的地面实际拍摄梯形区域内像素点个数及地面像元分辨率;
计算面阵相机侧摆成像所拍摄区域的宽度,半视场角ηi所对应的面阵相机地面覆盖宽度di及其对应的像素点个数不同侧摆角时像面各列像素点对应的地面像元分辨率以及地面拍摄区域的物点所对应的物距用公式表示为:
步骤五、对像面宽度方向像素点插值还原面阵相机实际拍摄区域;
对图像的每列像依次迭代插值,即0:n,实现将像面图像还原成面阵相机大姿态角拍摄时所覆盖的实际地面区域。
CN201810397119.5A 2018-04-28 2018-04-28 面阵相机大姿态角成像镜像几何畸变的物像映射还原方法 Active CN108596852B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810397119.5A CN108596852B (zh) 2018-04-28 2018-04-28 面阵相机大姿态角成像镜像几何畸变的物像映射还原方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810397119.5A CN108596852B (zh) 2018-04-28 2018-04-28 面阵相机大姿态角成像镜像几何畸变的物像映射还原方法

Publications (2)

Publication Number Publication Date
CN108596852A true CN108596852A (zh) 2018-09-28
CN108596852B CN108596852B (zh) 2021-10-22

Family

ID=63610572

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810397119.5A Active CN108596852B (zh) 2018-04-28 2018-04-28 面阵相机大姿态角成像镜像几何畸变的物像映射还原方法

Country Status (1)

Country Link
CN (1) CN108596852B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109981952A (zh) * 2019-04-02 2019-07-05 哈尔滨工业大学 一种图像补偿的方法、装置及计算机存储介质
CN111060077A (zh) * 2019-12-20 2020-04-24 彭耿 基于稀疏控制点的遥感卫星图像定位方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080310680A1 (en) * 2007-06-18 2008-12-18 Honda Elesys Co., Ltd. Frontal View Imaging and Control Device Installed on Movable Object
CN102778745A (zh) * 2012-08-24 2012-11-14 江西联创电子有限公司 高像素鱼眼镜头的透镜成像系统
JP2016134636A (ja) * 2015-01-15 2016-07-25 株式会社日立国際電気 画角ずれ補正装置
CN107221010A (zh) * 2017-07-12 2017-09-29 中国科学院上海技术物理研究所 基于三面阵相机的机载高光谱图像几何校正方法与装置
CN107426466A (zh) * 2017-07-25 2017-12-01 中国科学院长春光学精密机械与物理研究所 一种tdiccd成像系统非均匀噪声快速校正装置及校正方法
CN107481289A (zh) * 2017-07-13 2017-12-15 西安应用光学研究所 大视场相机远场标校的精密靶标系统及方法
CN107564057A (zh) * 2017-08-08 2018-01-09 武汉大学 顾及大气折光校正的高轨面阵光学卫星在轨几何标定方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080310680A1 (en) * 2007-06-18 2008-12-18 Honda Elesys Co., Ltd. Frontal View Imaging and Control Device Installed on Movable Object
CN102778745A (zh) * 2012-08-24 2012-11-14 江西联创电子有限公司 高像素鱼眼镜头的透镜成像系统
JP2016134636A (ja) * 2015-01-15 2016-07-25 株式会社日立国際電気 画角ずれ補正装置
CN107221010A (zh) * 2017-07-12 2017-09-29 中国科学院上海技术物理研究所 基于三面阵相机的机载高光谱图像几何校正方法与装置
CN107481289A (zh) * 2017-07-13 2017-12-15 西安应用光学研究所 大视场相机远场标校的精密靶标系统及方法
CN107426466A (zh) * 2017-07-25 2017-12-01 中国科学院长春光学精密机械与物理研究所 一种tdiccd成像系统非均匀噪声快速校正装置及校正方法
CN107564057A (zh) * 2017-08-08 2018-01-09 武汉大学 顾及大气折光校正的高轨面阵光学卫星在轨几何标定方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
MI WANG等: "On-orbit geometric calibration and geometric quality assessment for the high-resolution geostationary optical satellite GaoFen4", 《ISPRS JOURNAL OF PHOTOGRAMMETRY AND REMOTE SENSING》 *
YE FENG等: "Camera nonlinear distortion correction based on coplanar points", 《OPTICS AND PRECISION ENGINEERING》 *
任航: "高分辨率大面阵CCD相机高帧频设计及其非均匀性的校正", 《红外与激光工程》 *
李伟雄等: "高分辨率空间相机俯仰成像的像移补偿方法", 《红外与激光工程》 *
杨飞等: "航天时间延迟积分CCD相机摆扫成像快速几何校正设计与分析", 《光学学报》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109981952A (zh) * 2019-04-02 2019-07-05 哈尔滨工业大学 一种图像补偿的方法、装置及计算机存储介质
CN109981952B (zh) * 2019-04-02 2021-07-20 哈尔滨工业大学 一种图像补偿的方法、装置及计算机存储介质
CN111060077A (zh) * 2019-12-20 2020-04-24 彭耿 基于稀疏控制点的遥感卫星图像定位方法

Also Published As

Publication number Publication date
CN108596852B (zh) 2021-10-22

Similar Documents

Publication Publication Date Title
CN110211043B (zh) 一种用于全景图像拼接的基于网格优化的配准方法
US10871258B2 (en) Method and system for controlling gimbal
JP7291244B2 (ja) プロジェクタの台形補正方法、装置、システム及び読み取り可能な記憶媒体
CN110648398B (zh) 基于无人机航摄数据的正射影像实时生成方法及系统
US9900505B2 (en) Panoramic video from unstructured camera arrays with globally consistent parallax removal
US10165258B2 (en) Efficient determination of optical flow between images
US9094672B2 (en) Stereo picture generating device, and stereo picture generating method
JP5437311B2 (ja) 画像補正方法、画像補正システム、角度推定方法、および角度推定装置
CN107665483B (zh) 免定标便捷的单目镜头鱼眼图像畸变矫正方法
WO2020014909A1 (zh) 拍摄方法、装置和无人机
JP5596972B2 (ja) 撮像装置の制御装置および制御方法
CN107492069B (zh) 基于多镜头传感器的图像融合方法
US20060291744A1 (en) System and method for two-dimensional keystone correction for aerial imaging
CN109934772B (zh) 一种图像融合方法、装置及便携式终端
WO2015085956A1 (zh) 一种基于投影图像的处理方法及装置
CN103971352A (zh) 一种基于广角镜头的快速图像拼接方法
CN103914808A (zh) 一种资源三号卫星三线阵影像和多光谱影像的拼接方法
US10628967B2 (en) Calibration for multi-camera systems
CN107492080B (zh) 免定标便捷的单目镜头图像径向畸变矫正方法
KR101694651B1 (ko) 3차원 위치 추정을 이용한 광각 렌즈 영상의 왜곡 보정 장치 및 그 방법
CN105005964A (zh) 基于视频序列影像的地理场景全景图快速生成方法
US20230025058A1 (en) Image rectification method and device, and electronic system
CN112862683B (zh) 一种基于弹性配准和网格优化的邻接图像拼接方法
CN111292413A (zh) 图像模型的处理方法及装置、存储介质、电子装置
WO2019023914A1 (zh) 一种图像处理方法、无人机、地面控制台及其图像处理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant