CN101078622A - 航空全帧转移型面阵ccd相机像移补偿方法 - Google Patents
航空全帧转移型面阵ccd相机像移补偿方法 Download PDFInfo
- Publication number
- CN101078622A CN101078622A CN 200710117666 CN200710117666A CN101078622A CN 101078622 A CN101078622 A CN 101078622A CN 200710117666 CN200710117666 CN 200710117666 CN 200710117666 A CN200710117666 A CN 200710117666A CN 101078622 A CN101078622 A CN 101078622A
- Authority
- CN
- China
- Prior art keywords
- image
- aviation
- ccd
- total
- transfer type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Abstract
本发明公开一种航空全帧转移型面阵CCD相机像移补偿方法，采用机械快门与电子快门相结合，并根据飞机速高比改变CCD行频驱动的纯电学像移补偿方法，完成航空摄影中的像移补偿。与常规机械式补偿技术相比，极大地降低了面阵航空相机研制成本和复杂程度。在像移补偿中，充分考虑了飞行姿态和曝光抖动，及凝视模态等影响，以增强补偿效果。补偿电路采用多相驱动方式，可以使电子补偿精度达到亚像素级，进一步提高图像清晰度。
Description
技术领域
本发明属于摄影测量技术领域，涉及全帧转移型面阵CCD相机在航空摄影测量中的应用，具体涉及一种航空全帧转移型面阵CCD相机运动像移的补偿方法。
背景技术
航空摄影的一个主要特点是要求在相机与景物间存在运动时拍摄成像。对于航空面阵相机，如果不对像移进行补偿，将造成拍摄图像的模糊。目前，面阵相机航空摄影的像移补偿主要采用机械式补偿方式，如采用摆镜的光学补偿、采用在曝光时间内移动像面的机电补偿、整个相机点头式补偿等等。这种机械式补偿方式需要在航空相机上设计一套复杂的机电控制系统，以跟踪飞机运动模态。由于飞机在空中运动不易精确控制，机械式补偿一直存在结构复杂，成本高，补偿精度低等缺点。
发明内容
本发明的目的在于克服航空摄影中机械式像移补偿的缺点，针对全帧转移型面阵CCD相机提出一种新的纯电学像移补偿方法，不仅能获得清晰的航拍图像，而且还可降低面阵航空相机研制成本和复杂程度。
本发明解决其技术问题所采用的技术方案是：本发明航空全帧转移型面阵CCD相机像移补偿方法，包括以下步骤：
通过成像单元的相机镜头和快门获取地表景物信息，采集到全帧转移型CCD芯片中，形成图像，输入到FPGA模块；
同时从飞控系统中获得相机曝光时的飞行状态参数，输入到FPGA模块；
由FPGA模块对采集到的上述数据进行处理，处理步骤包括：计算出CCD图像的像移动量，并通过全帧图像转移保持在曝光时间内景物与CCD图像间相对静止，得到最终图像；
由FPGA控制CCD通过接口将最终图像按数字图像方式输出清晰图像，实现像移补偿。
本发明是通过对相机像元移动来完成像移补偿，其航空摄影电子像移原理为：地面景物经过相机镜头成像在相机的CCD焦面上，在曝光时间内，飞机一直在保持飞行状态，不同景物就会在CCD焦面上产生混叠，导致图像模糊。只有在飞行过程中，CCD焦面上的图像也随着飞行方向同步运动，才能保证同一个景物在CCD上的像的位置是固定的。这就是面阵相机电子像移的基本思想，利用电子像移技术可以补偿运动的不同步导致的图像模糊。
本发明的有益效果是，本发明航空全帧转移型面阵CCD相机像移补偿方法是由FPGA模块实现的全电子补偿，结构简单，可极大地降低面阵航空相机研制成本，提高可靠性；另外，采用FPGA作为控制模块，可以方便地实现曝光补偿、边缘处理和凝视补偿等功能。采用多相驱动方式，可以使本发明的电子补偿精度达到亚像素级，在飞机运动中得到高清晰图像。
附图说明
图1为根据本发明针对全帧转移型面阵CCD相机的电子像移补偿示例性方法的原理框图。
图2为多相驱动原理框图。
图3为“丢失”像元曝光补偿原理示意图。
具体实施方式
下面参照附图并结合实施例对本发明作进一步说明。
参见图1，本发明的成像单元由镜头、快门和CCD芯片组成。其中镜头采用航空专业镜头，可以适应飞行高度和振动冲击等恶劣环境变化。CCD芯片采用全帧转移型大面阵CCD芯片，可以满足大幅面高分辨率的航空摄影要求。快门由机械快门和电子快门组合构成，机械快门可以保证一帧图像拍摄结束后，继续进行转移操作不会影响本帧图像的质量，电子快门可以提供高精度的曝光量控制，同时实现自动光照条件适应。成像单元通过镜头和快门将地面景物映射到CCD靶面上，形成图像，输入到FPGA模块。
从飞机上的飞控系统提供飞机的速高比和姿态信息，也同时输入到FPGA模块。
由FPGA处理模块对采集到的上述数据进行综合计算，确定像移参数，然后分步驱动CCD芯片实现像移补偿，得到最终图像。最终图像由FPGA控制CCD通过接口按数字图像方式输出。
FPGA模块的处理步骤还包括：
飞行参数输入：从飞控系统中获得相机曝光时飞机的准确飞行速高比和飞行姿态，以保证FPGA控制模块可以根据飞机速高比确定在曝光时间内像元电荷包移动速度、CCD行频、需移动的行数等参数。进一步控制全帧转移型CCD的像元电荷包移动速度等于实际的像移速度，达到像元电荷包在相邻两次运动间的曝光时间(积分时间或行周期)同步的效果。
像移参数计算和多相驱动：根据输入的速高比参数实时计算CCD像元移动速度、方向，并改变行频的码频转换单元，控制行同步驱动电路，实现变频驱动的功能。像移采用多相驱动模式，可以达到亚像素的补偿精度，提高同步精度，以得到高清晰图像。
参见图2，为了使像元电荷包移动速度等于实际的像移速度，必须实时从飞机的导航仪引入飞行速度和高度数据，实时进行速高比V/H计算，并根据V/H确定在曝光时间内像元电荷包移动速度、CCD行频、需移动的行数。像移补偿公式为：
FΦ＝Fm/Cmc Cmc＝K*V/H*Fm
式中：FΦ为驱动单元给出的像移补偿信号频率；Fm为CCD驱动单元内部采用的主时钟；Cmc为对Fm的计数值；K为常量，只与镜头焦距和多相驱动模式有关，不需要改变；V/H为飞机的飞行速高比。
在系统中，CCD驱动逻辑由FPGA产生，与飞机导航系统接口以及Cmc的计算都由MCU完成。MCU通过接口将计算得到的Cmc写入FPGA，FPGA根据Cmc计数给出像移补偿时钟。
曝光补偿：由快门开关测量和补偿算法组成。由于相机的曝光时间是由机械快门和电子快门共同决定的，而机械快门的稳定性和准确性比较差，需要在相机的成像单元中增加快门开关信号的测量单元。同时补偿非行周期的整数倍曝光导致的残余像移量，进一步提高成像质量。
“丢失”像元处理：即边沿处理，用于处理曝光时间内电菏包移动中丢失的图像行，根据补偿曝光的精度和图像对比度信息，确定需要舍去的图像行数。如果不允许数据舍去，采取灰度平衡和曝光控制方法进行补偿。
参见图3，“丢失”像元曝光补偿是对不能丢弃像移补偿的边缘像素而进行的曝光量补偿。在CCD曝光时间之内，图像前端和后端的曝光量与图像中间是不一样的，由于在曝光时间内不断进行像移计算，图像中间曝光量最大，边缘两端线形减少。整个图像的曝光量曲线如图3所示。如果前后边沿的以外的图像不能丢弃，必须将它们的亮度线性增加一个倍数，才能与中间图像的亮度拼合到一起。这个过程由FPGA在数字域中自动完成。补偿后两端曝光时间曲线如图中虚线所示，达到曝光补偿的目的。
凝视处理：针对特定的航空测量中需要长时间瞄准地面固定点的情况，设计了凝视补偿算法，在相对较长的时间内，可以进行多次曝光，并进行连续像移补偿。
经过上述诸处理步骤后，实现了多相高精度像移控制，保证飞行中的航拍图像质量。
本发明的特定实施例已给出了航空全帧转移型面阵CCD相机像移补偿方法的附图及其详细说明，对本领域一般技术人员而言，在不背离本发明的工作原理和应用前提下对它所做的任何显而易见的改动，都不会超出本申请说明书描述和所附权利要求限定的保护范围。
Claims (7)
1、一种航空全帧转移型面阵CCD相机像移补偿方法，其特征在于，包括以下步骤：
通过成像单元的相机镜头和快门获取地表景物信息，采集到全帧转移型CCD芯片中，形成图像，输入到FPGA模块；
同时从飞控系统中获得相机曝光时的飞行状态参数，输入到FPGA模块；
由FPGA模块对采集到的上述数据进行处理，处理步骤包括：计算出CCD图像的像移动量，并通过全帧图像转移保持在曝光时间内景物与CCD图像间相对静止，得到最终图像；
由FPGA控制CCD通过接口将最终图像按数字图像方式输出清晰图像，实现像移补偿。
2、根据权利要求1所述的航空全帧转移型面阵CCD相机像移补偿方法，其特征在于，所述的FPGA模块的处理步骤还包括：从飞控系统中获得相机曝光时飞机的准确飞行速高比和飞行姿态，根据飞机速高比确定在曝光时间内像元电荷包移动速度、CCD行频、需移动的行数，进一步控制全帧转移型CCD的像元电荷包移动速度等于实际的像移速度，达到像元电荷包在相邻两次运动间的曝光时间，如积分时间或行周期，同步的效果。
3、根据权利要求2所述的航空全帧转移型面阵CCD相机像移补偿方法，其特征在于，还包括步骤：根据输入的速高比参数实时计算CCD像元移动速度、方向，并改变行频的码频转换单元，控制行同步驱动电路，实现变频驱动的功能，像移采用多相驱动模式。
4、根据权利要求3所述的航空全帧转移型面阵CCD相机像移补偿方法，其特征在于，像移补偿公式为：
FΦ＝Fm/Cmc Cmc＝K*V/H*Fm
式中：FΦ为驱动单元给出的像移补偿信号频率；Fm为CCD驱动单元内部采用的主时钟；Cmc为对Fm的计数值；K为常量，只与镜头焦距和多相驱动模式有关，不需要改变；V/H为飞机的飞行速高比。
5、根据权利要求3所述的航空全帧转移型面阵CCD相机像移补偿方法，其特征在于，还包括步骤：在相机的成像单元中增加快门开关信号的测量单元，同时补偿非行周期的整数倍曝光导致的残余像移量。
6、根据权利要求5所述的航空全帧转移型面阵CCD相机像移补偿方法，其特征在于，还包括边沿处理步骤：针对在曝光时间内电菏包移动中丢失的图像行，根据补偿曝光的精度和图像对比度信息，确定需要舍去的图像行数，如果不允许数据舍去，采取灰度平衡和曝光控制方法进行补偿。
7、根据权利要求6所述的航空全帧转移型面阵CCD相机像移补偿方法，其特征在于，还包括步骤：针对特定的航空测量中需要长时间瞄准地面固定点的情况，设计了凝视补偿算法，在相对较长的时间内，可以进行多次曝光，并进行连续像移补偿。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200710117666 CN101078622A (zh) | 2007-06-21 | 2007-06-21 | 航空全帧转移型面阵ccd相机像移补偿方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200710117666 CN101078622A (zh) | 2007-06-21 | 2007-06-21 | 航空全帧转移型面阵ccd相机像移补偿方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101078622A true CN101078622A (zh) | 2007-11-28 |
Family
ID=38906219
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 200710117666 Pending CN101078622A (zh) | 2007-06-21 | 2007-06-21 | 航空全帧转移型面阵ccd相机像移补偿方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101078622A (zh) |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100580704C (zh) * | 2008-03-28 | 2010-01-13 | 中国科学院上海技术物理研究所 | 一种消像移成像的实时自适应处理方法 |
| CN101742050B (zh) * | 2009-12-03 | 2011-09-07 | 浙江大学 | 针对运动模糊核空间移变的tdiccd图像复原方法 |
| CN102209198A (zh) * | 2011-06-13 | 2011-10-05 | 中国科学院长春光学精密机械与物理研究所 | 基于航空航天应用积分时间可调节的线阵ccd相机系统 |
| CN102497516A (zh) * | 2011-12-02 | 2012-06-13 | 大连海事大学 | 一种高分辨率ccd成像系统测光的加速方法 |
| CN102564401A (zh) * | 2011-11-23 | 2012-07-11 | 武汉大学 | 机载航空影像实时摄影测量处理系统 |
| CN102607531A (zh) * | 2012-03-19 | 2012-07-25 | 中国科学院上海技术物理研究所 | 空间低速高精度二维像移补偿指向控制系统 |
| CN101309359B (zh) * | 2008-06-20 | 2013-02-06 | 埃派克森微电子(上海)股份有限公司 | 使用哑像素消除固定模式噪声的系统及方法 |
| CN103115631A (zh) * | 2013-01-25 | 2013-05-22 | 西安电子科技大学 | 遥感相机成像参数误差校正系统及方法 |
| CN104486535A (zh) * | 2014-12-29 | 2015-04-01 | 中国科学院长春光学精密机械与物理研究所 | 帧转移型ccd航空相机扫描像移补偿方法 |
| CN104181805B (zh) * | 2014-07-07 | 2016-10-19 | 中国科学院长春光学精密机械与物理研究所 | 一种中心式快门闭合时间的检测方法 |
| CN107168356A (zh) * | 2017-06-28 | 2017-09-15 | 广东电网有限责任公司电力科学研究院 | 一种航空摄像位移量获取方法以及航空摄像移动控制方法 |
| CN107478218A (zh) * | 2017-08-29 | 2017-12-15 | 上海航天控制技术研究所 | 一种星敏感器可变更新率图像采集处理单元及方法 |
| CN108449528A (zh) * | 2018-05-09 | 2018-08-24 | 中国科学院长春光学精密机械与物理研究所 | 像移补偿电路、航空异速像移恢复装置及方法 |
| CN110149488A (zh) * | 2019-04-26 | 2019-08-20 | 中国科学院长春光学精密机械与物理研究所 | 航空异速像移补偿电路、ccd驱动电路及驱动方法 |
| CN110493516A (zh) * | 2019-08-08 | 2019-11-22 | 中国科学院长春光学精密机械与物理研究所 | 一种异速像移补偿装置及系统 |
| CN110765991A (zh) * | 2019-09-18 | 2020-02-07 | 南京航空航天大学 | 一种基于视觉的高速旋转电机熔断器实时检测系统 |
| CN111416943A (zh) * | 2020-04-28 | 2020-07-14 | 成都纵横自动化技术股份有限公司 | 相机防抖方法、装置、航测相机和计算机可读存储介质 |
| CN113784063A (zh) * | 2021-09-15 | 2021-12-10 | 中国科学院长春光学精密机械与物理研究所 | 一种航空异速像移补偿电路、系统及方法 |
| CN115297270A (zh) * | 2022-10-10 | 2022-11-04 | 长春长光睿视光电技术有限责任公司 | 一种航空光学面阵相机自动调光控制系统及其控制方法 |
-
2007
- 2007-06-21 CN CN 200710117666 patent/CN101078622A/zh active Pending
Cited By (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100580704C (zh) * | 2008-03-28 | 2010-01-13 | 中国科学院上海技术物理研究所 | 一种消像移成像的实时自适应处理方法 |
| CN101309359B (zh) * | 2008-06-20 | 2013-02-06 | 埃派克森微电子(上海)股份有限公司 | 使用哑像素消除固定模式噪声的系统及方法 |
| CN101742050B (zh) * | 2009-12-03 | 2011-09-07 | 浙江大学 | 针对运动模糊核空间移变的tdiccd图像复原方法 |
| CN102209198A (zh) * | 2011-06-13 | 2011-10-05 | 中国科学院长春光学精密机械与物理研究所 | 基于航空航天应用积分时间可调节的线阵ccd相机系统 |
| CN102564401A (zh) * | 2011-11-23 | 2012-07-11 | 武汉大学 | 机载航空影像实时摄影测量处理系统 |
| CN102564401B (zh) * | 2011-11-23 | 2013-09-11 | 武汉大学 | 机载航空影像实时摄影测量处理系统 |
| CN102497516A (zh) * | 2011-12-02 | 2012-06-13 | 大连海事大学 | 一种高分辨率ccd成像系统测光的加速方法 |
| CN102607531A (zh) * | 2012-03-19 | 2012-07-25 | 中国科学院上海技术物理研究所 | 空间低速高精度二维像移补偿指向控制系统 |
| CN103115631A (zh) * | 2013-01-25 | 2013-05-22 | 西安电子科技大学 | 遥感相机成像参数误差校正系统及方法 |
| CN103115631B (zh) * | 2013-01-25 | 2015-04-08 | 西安电子科技大学 | 遥感相机成像参数误差校正系统及方法 |
| CN104181805B (zh) * | 2014-07-07 | 2016-10-19 | 中国科学院长春光学精密机械与物理研究所 | 一种中心式快门闭合时间的检测方法 |
| CN104486535A (zh) * | 2014-12-29 | 2015-04-01 | 中国科学院长春光学精密机械与物理研究所 | 帧转移型ccd航空相机扫描像移补偿方法 |
| CN104486535B (zh) * | 2014-12-29 | 2017-07-14 | 中国科学院长春光学精密机械与物理研究所 | 帧转移型ccd航空相机扫描像移补偿方法 |
| CN107168356A (zh) * | 2017-06-28 | 2017-09-15 | 广东电网有限责任公司电力科学研究院 | 一种航空摄像位移量获取方法以及航空摄像移动控制方法 |
| CN107478218A (zh) * | 2017-08-29 | 2017-12-15 | 上海航天控制技术研究所 | 一种星敏感器可变更新率图像采集处理单元及方法 |
| CN107478218B (zh) * | 2017-08-29 | 2019-08-09 | 上海航天控制技术研究所 | 一种星敏感器可变更新率图像采集处理单元及方法 |
| CN108449528B (zh) * | 2018-05-09 | 2021-03-19 | 中国科学院长春光学精密机械与物理研究所 | 像移补偿电路、航空异速像移恢复装置及方法 |
| CN108449528A (zh) * | 2018-05-09 | 2018-08-24 | 中国科学院长春光学精密机械与物理研究所 | 像移补偿电路、航空异速像移恢复装置及方法 |
| CN110149488A (zh) * | 2019-04-26 | 2019-08-20 | 中国科学院长春光学精密机械与物理研究所 | 航空异速像移补偿电路、ccd驱动电路及驱动方法 |
| CN110493516A (zh) * | 2019-08-08 | 2019-11-22 | 中国科学院长春光学精密机械与物理研究所 | 一种异速像移补偿装置及系统 |
| CN110493516B (zh) * | 2019-08-08 | 2021-05-18 | 中国科学院长春光学精密机械与物理研究所 | 一种异速像移补偿装置及系统 |
| CN110765991A (zh) * | 2019-09-18 | 2020-02-07 | 南京航空航天大学 | 一种基于视觉的高速旋转电机熔断器实时检测系统 |
| CN110765991B (zh) * | 2019-09-18 | 2022-08-05 | 南京航空航天大学 | 一种基于视觉的高速旋转电机熔断器实时检测系统 |
| CN111416943A (zh) * | 2020-04-28 | 2020-07-14 | 成都纵横自动化技术股份有限公司 | 相机防抖方法、装置、航测相机和计算机可读存储介质 |
| CN111416943B (zh) * | 2020-04-28 | 2021-12-28 | 成都纵横自动化技术股份有限公司 | 相机防抖方法、装置、航测相机和计算机可读存储介质 |
| CN113784063A (zh) * | 2021-09-15 | 2021-12-10 | 中国科学院长春光学精密机械与物理研究所 | 一种航空异速像移补偿电路、系统及方法 |
| CN115297270A (zh) * | 2022-10-10 | 2022-11-04 | 长春长光睿视光电技术有限责任公司 | 一种航空光学面阵相机自动调光控制系统及其控制方法 |
| CN115297270B (zh) * | 2022-10-10 | 2023-04-18 | 长春长光睿视光电技术有限责任公司 | 一种航空光学面阵相机自动调光控制系统及其控制方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101078622A (zh) | 航空全帧转移型面阵ccd相机像移补偿方法 | |
| KR101514087B1 (ko) | 가시선의 연속스캐닝에 의한 디지털 매핑장치 | |
| CN101359147B (zh) | 图像模糊补偿装置和图像拾取设备 | |
| CN101911671A (zh) | 摄像装置和光轴控制方法 | |
| CN103345059A (zh) | 反射式变形镜变焦方法及系统 | |
| KR102425865B1 (ko) | 카메라 패닝 또는 모션에서 배경 블러링을 생성하는 시스템 및 방법 | |
| CN106911889A (zh) | 图像模糊校正设备和倾斜校正设备及其控制方法 | |
| CN105187723A (zh) | 一种无人飞行器的摄像处理方法 | |
| CN108449528B (zh) | 像移补偿电路、航空异速像移恢复装置及方法 | |
| CN110942477A (zh) | 一种利用双目相机和激光雷达深度图融合的方法 | |
| CN112204946A (zh) | 数据处理方法、装置、可移动平台及计算机可读存储介质 | |
| CN111614876A (zh) | 一种基于振镜相机阵列的实时远距离高速智能跟拍方法 | |
| CN115714855A (zh) | 一种基于立体视觉与tof融合的三维视觉感知方法及系统 | |
| CN109765747A (zh) | 一种航空图像检焦方法、检焦系统及相机 | |
| CN110149488B (zh) | 航空异速像移补偿电路、ccd驱动电路及驱动方法 | |
| CN101634555B (zh) | 一种面阵ccd相机像移补偿方法 | |
| CN110086973B (zh) | 一种基于光流相机的云台稳像系统 | |
| CN115942126A (zh) | 一种支持异速像移补偿功能相机、异速像移成像补偿方法 | |
| US20220286611A1 (en) | Electrical image stabilization (eis)-assisted digital image stabilization (dis) | |
| CN115065765A (zh) | 一种支持异速像移补偿功能的航空侦察相机电子系统及异速像移补偿方法 | |
| CN103760745A (zh) | 一种用于定格拍摄的单机双机位立体影像拍摄装置及其拍摄方法 | |
| CN107239077B (zh) | 一种无人机移动距离计算系统及方法 | |
| CN201828766U (zh) | 一种变形数码立体照相器 | |
| CN102254308B (zh) | 一种真实感场景插值的计算方法及系统 | |
| CN117519256B (zh) | 一种无人机平台单目轨迹重构方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20071128 |