CN111654650A - 基于深空探测的高动态范围tdicmos成像系统 - Google Patents

基于深空探测的高动态范围tdicmos成像系统 Download PDF

Info

Publication number
CN111654650A
CN111654650A CN202010577880.4A CN202010577880A CN111654650A CN 111654650 A CN111654650 A CN 111654650A CN 202010577880 A CN202010577880 A CN 202010577880A CN 111654650 A CN111654650 A CN 111654650A
Authority
CN
China
Prior art keywords
gain
tdi
imaging
pga
pix
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010577880.4A
Other languages
English (en)
Other versions
CN111654650B (zh
Inventor
余达
刘金国
司国良
石俊霞
张雨
周影
孙铭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CN202010577880.4A priority Critical patent/CN111654650B/zh
Publication of CN111654650A publication Critical patent/CN111654650A/zh
Application granted granted Critical
Publication of CN111654650B publication Critical patent/CN111654650B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/768—Addressed sensors, e.g. MOS or CMOS sensors for time delay and integration [TDI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

基于深空探测的高动态范围TDI CMOS成像系统，现有对深空探测相机的图像特性进行动态范围优化过程中，存在统计的区域段过多，耗费的资源过多；若统计的区段过少，又存在统计的精度太差等问题，包括TDI CMOS图像传感器和成像控制器；所述成像控制器产生TDI CMOS图像传感器的相关控制信号，并通过SPI接口对TDI CMOS图像传感器的成像参数进行控制，所述TDICMOS图像传感器返回SPI读出数据的反馈信号，输出串行图像数据到成像控制器内部进行处理；本发明基于探测器可用的积分级数、像素增益和PGA增益范围来设置使用的成像工作参数组，同时设置统计图像的灰度直方图的区域段数，实现与成像参数的最佳匹配。

Description

基于深空探测的高动态范围TDICMOS成像系统
技术领域
本发明涉及深空探测的高动态范围相机成像技术领域，具体涉及一种与成像参数匹配的深空探测的高动态范围相机系统。
背景技术
航天相机特别是深空探测相机，针对星球的两极和赤道成像，所经历的太阳高度角变化范围接近89.5度，太阳高度角引起的入射光能量变化超过了114倍，地面反射率的变化会导致所需的动态范围进一步加大。TDICMOS探测器可调节积分级数、像素增益和PGA增益来改变输出的灰度值，但不同调节方式获得的信噪比是不同的。基于图像的灰度直方图统计图像的特性进行动态范围的优化，若统计的区域段过多，耗费的资源过多；若统计的区段过少，又存在统计的精度太差等问题。
发明内容
本发明为解决现有对深空探测相机的图像特性进行动态范围优化过程中，存在统计的区域段过多，耗费的资源过多；若统计的区段过少，又存在统计的精度太差等问题，提供一种基于深空探测的高动态范围TDICMOS成像系统。
基于深空探测的高动态范围TDICMOS成像系统，包括TDICMOS图像传感器和成像控制器；所述成像控制器产生TDICMOS图像传感器的相关控制信号，并通过SPI接口对TDICMOS图像传感器的成像参数进行控制，所述TDICMOS图像传感器返回SPI读出数据的反馈信号，输出串行图像数据到成像控制器内部进行处理；
所述成像控制器按照最小的像素增益、PGA增益和m个TDI积分级数，制作出m组成像参数，每组成像参数为：kpix_gain_min,kpga_gain_min,ktdi_i，kpix_gain_min为像素增益最小值，kpga_gain_min为PGA增益最小值，ktdi_i为第i个TDI积分级数，i的取值为0～m-1；
若
Figure BDA0002551923190000011
kpix_gain_max为像素增益最大值，kpga_gain_max为PGA增益最大值，ktdi_i+1为第i+1个TDI积分级数，ni的取值大于2，则需要在参数(kpix_gain_min,kpga_gain_min,ktdi_i)与(kpix_gain_min,kpga_gain_min,ktdi_i+1)之间插入ni-1组参数；
或若
Figure BDA0002551923190000021
且
Figure BDA0002551923190000022
则需要在参数(kpix_gain_min,kpga_gain_min,ktdi_i)与(kpix_gain_min,kpga_gain_min,ktdi_i+1)之间插入ni-1组参数；
当
Figure BDA0002551923190000023
时，则对应的ni-1值设置为1。
插入ni-1组参数可以表示为：
(kpix_gain_p,kpga_gain_q,ktdi_i)，要求
Figure BDA0002551923190000024
式中kpix_gain_p为中间积分级数下插入的像素增益，kpga_gain_q为中间积分级数下插入的PGA增益。
本发明的有益效果：
1、本发明所述的成像系统，根据接收到的图像灰度和发出的成像参数的延迟，进行新参数所对应的入射光能量的类推，避免成像参数的延迟，可适应延迟时间长的应用，进行快速的响应；
2、本发明根据可设置成像参数的个数进行判断区域的分区，减小不必要的过多分区，节约资源；
3、本发明通过合理的成像参数组合，实现在可达到相同的DN值情况下，实现更高的成像信噪比。
附图说明
图1为本发明所述的基于深空探测的高动态范围TDICMOS成像系统的原理框图；
图2为m个TDI积分级数的结构示意图；
图3为插入ni-1组参数后的结构示意图；
图4为插入r组参数后的结构示意图。
具体实施方式
结合图1至图4说明本实施方式，基于深空探测的高动态范围TDICMOS成像系统，主要包含TDICMOS图像传感器和成像控制器两部分组成。成像控制器产生TDICMOS图像传感器的相关控制信号，通过SPI接口对TDICMOS图像传感器的成像参数进行控制，TDICMOS图像传感器返回SPI读出数据等反馈信号，输出串行图像数据到成像控制器内部进行调理。
所述成像控制器按照最小的像素增益、PGA增益和m个TDI积分级数，制作出m组成像参数(kpix_gain_min,kpga_gain_min,ktdi_i)，i的取值为0～m-1。如图2所示。
若
Figure BDA0002551923190000031
ni的取值大于2，则需要在参数(kpix_gain_min,kpga_gain_min,ktdi_i)与(kpix_gain_min,kpga_gain_min,ktdi_i+1)之间插入ni-1组参数；
或若
Figure BDA0002551923190000032
且
Figure BDA0002551923190000033
则需要在参数(kpix_gain_min,kpga_gain_min,ktdi_i)与(kpix_gain_min,kpga_gain_min,ktdi_i+1)之间插入ni-1组参数；式中i的取值为0～m-1。
当
Figure BDA0002551923190000034
时，则对应的ni-1值设置为1。
插入ni-1组参数可以表示为：
(kpix_gain_p,kpga_gain_q,ktdi_i)，要求
Figure BDA0002551923190000035
式中kpix_gain_p为中间积分级数下插入的像素增益，kpga_gain_q为中间积分级数下插入的PGA增益。如果图3所示。
本实施方式中，在最大TDI级数的条件下，额外增加r组成像参数，r要求满足：
Figure BDA0002551923190000036
插入r组参数可以表示为：
(kpix_gain_α,kpga_gain_β,ktdi_max)，要求
Figure BDA0002551923190000037
式中kpix_gain_α为最大积分级数下插入的像素增益，kpga_gain_β为最大积分级数下插入的PGA增益。如图4所示。
本实施方式中，区段数的设置方法为：
Figure BDA0002551923190000041
区段数＝成像参数的组数，同时按照相同的方式对成像参数的地址进行编码。也就是编码地址0对应的成像参数为(kpix_gain_min,kpga_gain_min,ktdi_min)，最大的编码地址对应的成像参数为(kpix_gain_max,kpga_gain_max,ktdi_max)。
本实施方式中，在轨分区段成像动态范围的调整方法为：将w(δ)定义为灰度值小于DN(δ)的像素比率；w(δ-1)＜50％，且w(δ)≥50％，则w(δ)所对应的灰度值则为当前的中值DN(δ)；
基于外推法，计算出预计的成像参数开始执行时的灰度值DN(ε)
Figure BDA0002551923190000042
当DN(ε)小于或等于
Figure BDA0002551923190000043
值时，则成像参数值对应的编码地址加1；若大于
Figure BDA0002551923190000044
则成像参数值对应的编码地址减1；式中nline_delay为从发出新成像参数到接收到新参数作用下的首行图像的延迟行数。
本实施方式中，实时调整成像参数过程的处理措施，spi寄存器的写操作安排在数据的消隐期，也就是不输出有效图像数据的阶段。
本实施方式所述的成像控制器采用virtex 6器件及其内部资源；TDI CMOS图像传感器采用长光辰芯公司的定制产品。

Claims (5)

1.基于深空探测的高动态范围TDICMOS成像系统，包括TDICMOS图像传感器和成像控制器；所述成像控制器产生TDICMOS图像传感器的相关控制信号，并通过SPI接口对TDICMOS图像传感器的成像参数进行控制，所述TDICMOS图像传感器返回SPI读出数据的反馈信号，输出串行图像数据到成像控制器内部进行处理；
所述成像控制器按照最小的像素增益、PGA增益和m个TDI积分级数，制作出m组成像参数，每组成像参数为：kpix_gain_min,kpga_gain_min,ktdi_i，kpix_gain_min为像素增益最小值，kpga_gain_min为PGA增益最小值，ktdi_i为第i个TDI积分级数，i的取值为0～m-1；
若
Figure FDA0002551923180000011
kpix_gain_max为像素增益最大值，kpga_gain_max为PGA增益最大值，ktdi_i+1为第i+1个TDI积分级数，ni的取值大于2，则需要在参数(kpix_gain_min,kpga_gain_min,ktdi_i)与(kpix_gain_min,kpga_gain_min,ktdi_i+1)之间插入ni-1组参数；
或若
Figure FDA0002551923180000012
且
Figure FDA0002551923180000013
则需要在参数(kpix_gain_min,kpga_gain_min,ktdi_i)与(kpix_gain_min,kpga_gain_min,ktdi_i+1)之间插入ni-1组参数；
当
Figure FDA0002551923180000014
时，则对应的ni-1值设置为1。
插入ni-1组参数可以表示为：
(kpix_gain_p,kpga_gain_q,ktdi_i)，要求
Figure FDA0002551923180000015
式中kpix_gain_p为中间积分级数下插入的像素增益，kpga_gain_q为中间积分级数下插入的PGA增益。
2.根据权利要求1所述的基于深空探测的高动态范围TDICMOS成像系统，其特征在于：在最大TDI积分级数的条件下，增加r组成像参数，r要求满足
Figure FDA0002551923180000021
所述r组参数表示为：
(kpix_gain_α,kpga_gain_β,ktdi_max)，要求
Figure FDA0002551923180000022
式中kpix_gain_α为最大积分级数下插入的像素增益，kpga_gain_β为最大积分级数下插入的PGA增益。
3.根据权利要求1所述的基于深空探测的高动态范围TDICMOS成像系统，其特征在于：设置区段数与成像参数的组数相同，
Figure FDA0002551923180000027
Figure FDA0002551923180000023
所述区段数＝成像参数的组数，同时按照相同的方式对成像参数的地址进行编码，即：编码地址0对应的成像参数为kpix_gain_min,kpga_gain_min和ktdi_min，最大的编码地址对应的成像参数为kpix_gain_max,kpga_gain_max和ktdi_max；ktdi_min为最小TDI积分级数，ktdi_max为最大TDI积分级数。
4.根据权利要求1所述的基于深空探测的高动态范围TDICMOS成像系统，其特征在于：在轨分区段成像动态范围的调整方法为：
将w(δ)定义为灰度值小于DN(δ)的像素比率；w(δ-1)＜50％，且w(δ)≥50％，则w(δ)所对应的灰度值则为当前的中值DN(δ)；
基于外推法，计算出预计的成像参数开始执行时的灰度值DN(ε)
Figure FDA0002551923180000024
当DN(ε)小于或等于
Figure FDA0002551923180000025
值时，则成像参数值对应的编码地址加1；若大于
Figure FDA0002551923180000026
则成像参数值对应的编码地址减1；式中nline_delay为从发出新成像参数到接收到新参数作用下的首行图像的延迟行数。
5.根据权利要求1所述的基于深空探测的高动态范围TDICMOS成像系统，其特征在于：SPI寄存器的写操作安排在数据的消隐期，即：在不输出有效图像数据的阶段进行写操作。
CN202010577880.4A 2020-06-23 2020-06-23 基于深空探测的高动态范围tdicmos成像系统 Active CN111654650B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010577880.4A CN111654650B (zh) 2020-06-23 2020-06-23 基于深空探测的高动态范围tdicmos成像系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010577880.4A CN111654650B (zh) 2020-06-23 2020-06-23 基于深空探测的高动态范围tdicmos成像系统

Publications (2)

Publication Number Publication Date
CN111654650A true CN111654650A (zh) 2020-09-11
CN111654650B CN111654650B (zh) 2021-02-26

Family

ID=72348981

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010577880.4A Active CN111654650B (zh) 2020-06-23 2020-06-23 基于深空探测的高动态范围tdicmos成像系统

Country Status (1)

Country Link
CN (1) CN111654650B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112702542A (zh) * 2020-12-15 2021-04-23 北京空间机电研究所 一种动中成像电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4280141A (en) * 1978-09-22 1981-07-21 Mccann David H Time delay and integration detectors using charge transfer devices
US20010040930A1 (en) * 1997-12-19 2001-11-15 Duane L. Abbey Multi-band direct sampling receiver
CN104869332A (zh) * 2015-05-19 2015-08-26 北京空间机电研究所 一种自适应多斜率积分调节方法
US20170310918A1 (en) * 2014-11-25 2017-10-26 Raytheon Company Time delay and integration (tdi) imaging sensor and method
CN110971845A (zh) * 2019-12-12 2020-04-07 中国科学院长春光学精密机械与物理研究所 一种高动态范围的推扫成像系统
US10638064B2 (en) * 2015-10-21 2020-04-28 Massachusetts Institute Of Technology Methods and apparatus for true high dynamic range (THDR) time-delay-and-integrate (TDI) imaging
CN111294529A (zh) * 2020-03-11 2020-06-16 长春长光辰芯光电技术有限公司 高动态范围tdi图像传感器及其成像方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4280141A (en) * 1978-09-22 1981-07-21 Mccann David H Time delay and integration detectors using charge transfer devices
US20010040930A1 (en) * 1997-12-19 2001-11-15 Duane L. Abbey Multi-band direct sampling receiver
US20170310918A1 (en) * 2014-11-25 2017-10-26 Raytheon Company Time delay and integration (tdi) imaging sensor and method
CN104869332A (zh) * 2015-05-19 2015-08-26 北京空间机电研究所 一种自适应多斜率积分调节方法
US10638064B2 (en) * 2015-10-21 2020-04-28 Massachusetts Institute Of Technology Methods and apparatus for true high dynamic range (THDR) time-delay-and-integrate (TDI) imaging
CN110971845A (zh) * 2019-12-12 2020-04-07 中国科学院长春光学精密机械与物理研究所 一种高动态范围的推扫成像系统
CN111294529A (zh) * 2020-03-11 2020-06-16 长春长光辰芯光电技术有限公司 高动态范围tdi图像传感器及其成像方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
YU XIA, KAIMING NIE，JIANGTAO XU,SUYING YAO: "A Two-Step Analog Accumulator for CMOS TDIImage Sensor With Temporal Undersampling Exposure Method", 《IEEE TRANSACTIONS ON VERY LARGE SCALE INTEGRATION (VLSI) SYSTEMS》 *
宁永慧，郭汉洲，余达，赵庆磊: "基于ＬＭ９８６４０的ＴＤＩ－ＣＣＤ暗场扣除方法", 《液晶与显示》 *
李豫东，汪波，郭旗，玛丽娅，任建伟: "ＣＣＤ与ＣＭＯＳ图像传感器辐射效应测试系统", 《光学精密工程》 *
薛旭成，石俊霞，吕恒毅，马天波，郭永飞: "空间遥感相机ＴＤＩ ＣＣＤ积分级数和增益的优化设置", 《光学精密工程》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112702542A (zh) * 2020-12-15 2021-04-23 北京空间机电研究所 一种动中成像电子设备
CN112702542B (zh) * 2020-12-15 2022-09-27 北京空间机电研究所 一种动中成像电子设备

Also Published As

Publication number Publication date
CN111654650B (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
CN101917551B (zh) 一种多次曝光的高动态范围图像获取方法
CN1081870C (zh) 采用量化的均值匹配直方图均衡的图像增强方法和电路
US8711255B2 (en) Visual processing apparatus and visual processing method
US20050271379A1 (en) Method and apparatus for controlling automatic exposure in a camera
CN106791508B (zh) 一种数字域tdi相机成像质量的调整方法及调整系统
CN110971845B (zh) 一种高动态范围的推扫成像系统
KR100776134B1 (ko) 이미지 센서 및 이미지 밝기 분포 조절방법
CN111292282B (zh) 低比特位宽hdr图像的生成方法及装置、存储介质、终端
US7889274B2 (en) Image input apparatus
CN110113510B (zh) 一种实时视频图像增强方法和高速相机系统
WO2007074659A1 (ja) 映像信号処理方法および映像信号処理装置
CN111654650B (zh) 基于深空探测的高动态范围tdicmos成像系统
US7440012B2 (en) Method and apparatus for optimizing image sensor noise and dynamic range
CN110782403A (zh) 一种红外图像非均匀性校正方法
JP6600216B2 (ja) 画像処理装置及び画像処理方法、プログラム、記憶媒体
CN102769723B (zh) 快速高精度电子倍增ccd自动增益系统及方法
CN101957986A (zh) 一种通过长短积分控制实现红外图像增强的方法
CN114143482A (zh) Tdicmos探测器的暗信号扣除方法
CN104796637A (zh) 图像传感器的读出系统和读出方法
CN115334294B (zh) 一种本地自适应力度的视频降噪方法
JP2017135554A (ja) 画像処理装置、画像処理方法、及びプログラム
CN112637510A (zh) 场景自适应的图像增益调节方法、系统、装置及电子设备
CN109889694B (zh) 一种基于场景红外图像非线性校正SoC并行优化系统和方法
KR100929457B1 (ko) 영상 자동교정방법 및 시스템
CN109274907B (zh) 一种cmos图像传感器上的信号处理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant