CN106803900A - 一种基于单片fpga的小型非制冷红外机芯 - Google Patents

一种基于单片fpga的小型非制冷红外机芯 Download PDF

Info

Publication number
CN106803900A
CN106803900A CN201710212440.7A CN201710212440A CN106803900A CN 106803900 A CN106803900 A CN 106803900A CN 201710212440 A CN201710212440 A CN 201710212440A CN 106803900 A CN106803900 A CN 106803900A
Authority
CN
China
Prior art keywords
fpga
module
ddr3
uncooled
sized
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710212440.7A
Other languages
English (en)
Inventor
顾鑫
高志强
王世允
朱家乙
王洪涛
韩瑞
黄晓江
唐骏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JIANGSU HUGON PHOTOELECTRICITY CO Ltd
Original Assignee
JIANGSU HUGON PHOTOELECTRICITY CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JIANGSU HUGON PHOTOELECTRICITY CO Ltd filed Critical JIANGSU HUGON PHOTOELECTRICITY CO Ltd
Priority to CN201710212440.7A priority Critical patent/CN106803900A/zh
Publication of CN106803900A publication Critical patent/CN106803900A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region

Abstract

本发明采用FPGA内部集成的NIOS II软核作为中央控制器,提出了一种基于控制寄存器组的软硬交互的控制方式,将众多功能控制集成于一组寄存器,通过编址实现控制,具有较高的集成度和可控性。实现方案包括探测器模块、驱动模块、FPGA控制模块和电源模块,外部的红外信号及辐射信号与所述的探测器模块连接,同时所述的探测器模块另外一端与所述的驱动模块相连接;所述的驱动模块分别与所述的探测器模块及FPGA控制模块相连接,同时与所述的电源模块连接;所述的FPGA控制模块分别与所述的驱动模块及所述的电源模块相连接;所述的电源模块分别与所述的FPGA控制模块及所述的驱动模块相连接。

Description

一种基于单片FPGA的小型非制冷红外机芯
技术领域
本发明涉及红外成像领域、具体涉及为一种小型化非制冷机芯。
背景技术
非制冷红外机芯在军民领域都有着广阔的应用前景,但由于长期受西方国家封锁我国在此领域与国际先进水平还存在较大差距。国内许多单位在非制冷机芯开发的时候往往采用基于FPGA+DSP的处理架构。这种机芯由于采用了双处理系统的架构存在体积和功耗过大的问题,同时由于DSP采用多帧缓存处理的方式,这无疑会导致系统延时过长实时性较差,DSP系统还存在算法可移植性差等问题。
传统的DSP+FPGA设计往往常用SRAM或者是SDRAM,SRAM的读写速度最高为100MHZ而SDRAM最高位167MHZ,较低的运行速度直接导致了红外系统需要采用4片或更多存储器芯片,增加了系统体积和功耗。
这些弊端决定了该处理架构不适用于一些特别的定制领域如手持便携设备、高速图像采集设备等。
发明内容
本发明图像处理部分采用硬件逻辑语言设计,同时系统采用FPGA内部集成的NIOSII软核作为中央控制器,提出了一种基于控制寄存器组的软硬交互的控制方式,将众多功能控制集成于一组寄存器,通过编址实现控制,具有较高的集成度和可控性。
本发明采用DDR3的设计,DDR3有较高的运行速度可达1600MHZ,而红外图像处理的像素时钟频率较低为6MHZ,通过采用DDR3仲裁模块设计可以协调各个图像处理算法的读写需求,只需要一片就能满足系统运行,有效地减小了系统体积和功耗。
本发明的技术方案如下:
一种基于单片FPGA的小型非制冷红外机芯,其特征在于包括探测器模块(01)、驱动模块(02)、FPGA控制模块(03)和电源模块(04),
红外信号及辐射信号与所述的探测器模块(01)连接,同时所述的探测器模块(01)另外一端与所述的驱动模块(02)相连接;
所述的驱动模块(02)分别与所述的探测器模块(01)及FPGA控制模块(03)相连接,同时与所述的电源模块(04)连接;
所述的FPGA控制模块(03)分别与所述的驱动模块(02)及所述的电源模块(04)相连接;
所述的电源模块(04)分别与所述的FPGA控制模块(03)及所述的驱动模块(02)相连接。
进一步的,所述的驱动模块(02)包括一探测器配置及校正数据器(021),
进一步的,所述FPGA控制模块(03)包括NIOS 中央控制器(032)、控制寄存器组(033)和FPGA功能模块组(031)。所述NIOS中央控制器(032)与所述FPGA功能模块组(031)之间通过总线与所述控制寄存器组(033)相连。
所述FPGA功能模块组(031)上包探测器驱动时序生成器(0311)、DDR3控制器(0312)、FLASH控制器(0313)、红外图像处理器(0314)。
进一步的,所述FPGA功能模块组(031)采用硬件逻辑语言。
进一步的,所述控制寄存器组(033)被设定为一独立外设IP核。
进一步的,所述的DDR3控制器(0312)包括两片DDR3,作为NIOSⅡ中央控制器运行外部存储器的第一DDR3片,包括DDR3仲裁控制器、用来存储图像及校正数据的第二DDR3片。
进一步的,所述DDR3仲裁控制器采用异步时钟缓冲技术。
本发明以单片FPGA为核心的电路设计,在功耗体积上以及实时性上相对传统红外机芯有较大优势,该系统充分利用FPGA在设计方面的灵活优势,基于大规模FPGA的片上可编程技,在FPGA芯片上实现嵌入式系统的C语言编程和逻辑程序编程。
同时NIOS II中央控制器将驱动程序、图像处理算法以及应用程序与硬件接口有效结合。方便整个系统的裁剪、定制、升级和小型化。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1基于单片FPGA的小型非制冷红外机芯总体结构;
图2 FPGA控制模块结构;
图3探测器时序驱动模块设计;
图4 DDR3控制器仲裁模块控制流程图;
图5控制寄存器组串口IP核端口示意图;
图6 NIOS II中央控制器程序流程图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
如图1所示,基于单片FPGA的小型非制冷红外机芯由探测器模块(01)、驱动模块(02)、FPGA控制模块(03)和电源模块(04)四部分组成,其中探测器模块(01)采用国产25µm氧化钒探测器。
红外信号及辐射信号与探测器模块(01)连接,同时探测器模块(01)另外一端与驱动模块(02)相连接;驱动模块(02)分别与探测器模块(01)及FPGA控制模块(03)相连接,同时与电源模块(04)连接;FPGA控制模块(03)分别与驱动模块(02)及电源模块(04)相连接;电源模块(04)分别与FPGA控制模块(03)及驱动模块(02)相连接;FPGA控制模块(03)包括NIOS 中央控制器(032)、控制寄存器组(033)和FPGA功能模块组(031)。NIOS 中央控制器(032)与FPGA功能模块组(031)之间通过总线与控制寄存器组(033)相连;FPGA功能模块组(031)上包探测器驱动时序生成器(0311)、DDR3控制器(0312)、FLASH控制器(0313)、红外图像处理器(0314)。
FPGA控制模块(03)上的FLASH存储器(0313)用来存储一些非均匀性参数以及其它需要掉电存储的信息供开机后调用,硬件上FPGA芯片选用 Cyclone 5系列的5CEFA7F31C7NES,DDR3选用MT41J18M16JT-125,FLASH芯片选用M25P64。整个系统中FPGA首先对探测器发送工作时钟、积分时间、TEC参数、OCC参数等配置及校正信号,为探测器正常工作提供正确的时序,在保证探测器能正常工作的情况下对探测器送来的14bit量化图像信号进行红外图像算法处理,这些处理包括单点校正算法、两点校正算法、盲元补偿、直方图均衡图像增强、非均匀性校正等。在完成各项时序控制和实时图像处理后,红外视频信号将在PAL制模拟监视器上显示。
如图2所示,FPGA控制模块(03)包括NIOS 中央控制器(032)、控制寄存器组(033)和FPGA功能模块组(031)。所述NIOS 中央控制器(032)与所述FPGA功能模块组(031)之间通过总线与所述控制寄存器组(033)相连。
NIOS II中央控制器(032)为整个系统的控制核心部分主管机芯系统的流程控制。FPGA功能模块组采用硬件逻辑语言(VHDL),满足高实时性的设计要求。控制寄存器组(033)被设定为一独立外设IP核,用来存储各个逻辑模块的数据和控制指令。NIOS II中央控制器(032)与FPGA功能模块组之间通过Avalon总线与控制寄存器组相连进行数据传递和指令下达。
如图3所示,探测器模块(01)由FPGA控制模块(03)的探测器驱动时序控制及采集器(0311)提供正确的时序,时序信号包括输入时钟 (SCL)、 帧使能信号(FS)、上电复位信号(Res_N)、配置信号(SDL、SDH)。像素时钟6MHZ,探测器时钟频率(SCL)为像素时钟频率的6倍。帧使能信号(FS)为高电平期间,配置信号(SDL、SDH)配置图像的行周期、积分时间。帧使能信号(FS)的下降沿表示一帧图像的开始,此时图像校正数据通过配置信号(SDL、SDH)输入到探测器,每行输入一次。
上电后驱动模块(02)首先从FPGA控制模块(03)中获得探测器模块(01)配置参数,然后实时对探测器模块进行配置。
上电后FPGA模块中的NIOS II控制器从Flash存储器中获取配置参数后将数据传送至驱动模块中的“探测器控制及矫正数据器” (021)进行探测器配制和图像数据矫正,并将矫正后的图像数据传回至FPGA控制模块的“探测器驱动时序控制及采集器” (0311)部件,这里主要指的是图像采集功能,进一步处理主要指的是图像数据交给红外图像处理部分,进行直方图拉升、非均匀性校正、图像增强、视频制式转换、菜单叠加等图像处理。
驱动模块(02)的“探测器配制及校正数据器” (021)正常工作前需要为每个像素点寻找最优OCC片上非均匀性校正数据(后面简称OCC数据),调整OCC数据有两种实现方法。一是,本发明通过红外图像处理器进行算法处理,包括基于温区的自动非均匀性校正算法、直方图拉伸算法、图像增强算法、OCC寻优算法,盲元补偿算法。分析红外数据“videodata”的均匀性,不断调整OCC片上非均匀性校正数据输出直至“videodata”达到设定的均匀性指标。二是,通过Avalon总线NIOS II中央控制器相连, NIOS II中央控制器读取实时配置的OCC数据和所对应的图像数据,通过串口传至上位机,利用上位机软件图像处理软件,通过对采集到的多帧不同温度下图像进行像素灰度统计计算寻找单个像素的最佳线性工作区,并根据相关公式求出每个像素点的OCC对应配制值,最后将该配制字加载到探测器上。
如图4所示, FPGA功能模块组(031)上的DDR3控制器(0312),共有两片DDR3,其中一片作为NIOS II运行的外部存储器,另一片则用来存储图像及校正数据。DDR3控制器的第二DDR3片,通过总线与DDR3仲裁模块连接,协调各个图像处理算法的读写需求。仲裁模块采用异步时钟缓冲技术,各图像处理模块只需要对仲裁模块提出访问申请并给出数据、地址、时钟等信号就能在周期内完成操作而不影响其他模块的读写。DDR3仲裁模块一端对外提供6组数据、地址与控制总线,供外部模块的数据读写要求,另一端通过中断请求的方式将6组数据总线合并为一组对外输出总线并连接NIOS II中央控制器的Avalon总线,对外传输数据。仲裁模块内部通过数据缓冲FIFO和时间片划分的方式实现6组数据总线的实时读写操作。
如图5所示,控制寄存器组(033)串口IP核端口,设计独立的串口IP核,通过硬件加速解决多串口通讯问题。IP核采用Avalon总线架构,内部开设多组读写缓冲寄存器。NIOSII通过Avalon总线对这些寄存器进行读写操作。多组串口IP核,定义不同基地址就可以完成多串口与NIOS II之间的通信。不同于常规设计中的单串口模式,本发明的非制冷机芯需要将多个外部传感器所获得的信息实时加载至图像中显示,这些数据往往规模都较大有的还需要进行复杂校正。传统的基于时间片轮换的串口中断处理机制已不可避免的导致数据丢帧或降级系统响应。
如图6所示,NIOS II中央控制器程序流程,红外机芯的NIOS II配置通过软件生成,本实施例中使用的是Qsys软件, Qsys是ALTERA最新一代的可视化SOPC工具。NIOS II程序通过不同地址设定读取各个控制器和外部IP核的数据,并发送指令给他们。NIOS II在上电初始化时负责把探测器参数从Flash中写入SDRAM;初始化完成以后NIOS II等待上位机指令并根据指令调用各个功能逻辑模块更新图像及图像界面中的参数。
实验结果显示该红外机芯有着较高的图像均匀性和成像质量,各种功能能够满足正常使用要求。该系统成像质量较高、系统功耗小于2瓦、系统延时小于0.5毫秒,系统具有较强的可拓展性。具体结果见表1
表1 DM642 DSP机芯与FPGA机芯性能对比
系统 功耗/w 实时性/ms
DM642 100×100×60 4.5W~5.5W 80ms
FPGA 40×40×50 1.4W~2W 0.5ms

Claims (7)

1.一种基于单片FPGA的小型非制冷红外机芯,其特征在于包括探测器模块(01)、驱动模块(02)、FPGA控制模块(03)和电源模块(04),
外部的红外信号及辐射信号与所述的探测器模块(01)连接,同时所述的探测器模块(01)另外一端与所述的驱动模块(02)相连接;
所述的驱动模块(02)分别与所述的探测器模块(01)及FPGA控制模块(03)相连接,同时与所述的电源模块(04)连接;
所述的FPGA控制模块(03)分别与所述的驱动模块(02)及所述的电源模块(04)相连接;
所述的电源模块(04)分别与所述的FPGA控制模块(03)及所述的驱动模块(02)相连接。
2.根据权利要求1所述的一种基于单片FPGA的小型非制冷红外机芯,其特征在于所述的驱动模块(02)包括一探测器配置及校正数据器(021)。
3.根据权利要求1所述的一种基于单片FPGA的小型非制冷红外机芯,其特征在于所述FPGA控制模块(03)包括NIOS 中央控制器(032)、控制寄存器组(033)和FPGA功能模块组(031);所述NIOS 中央控制器(032)与所述FPGA功能模块组(031)之间通过总线与所述控制寄存器组(033)相连;所述FPGA模块(031)上包括探测器驱动时序控制及采集器(0311)、DDR3控制器(0312)、FLASH控制器(0313)、红外图像处理器(0314)。
4.根据权利要求2所述的一种基于单片FPGA的小型非制冷红外机芯,其特征在于所述FPGA功能模块组(031)各功能采用硬件逻辑语言。
5.根据权利要求2所述的一种基于单片FPGA的小型非制冷红外机芯,其特征在于所述控制寄存器组(033)被设定为一独立外设IP核。
6.根据权利要求2所述的一种基于单片FPGA的小型非制冷红外机芯,其特征在于所述的DDR3控制器(0312)包括两片DDR3,作为NIOS中央控制器(032)运行外部存储器的第一DDR3片,包括DDR3仲裁控制器、用来存储图像及校正数据的第二DDR3片。
7.根据权利要求4所述的一种基于单片FPGA的小型非制冷红外机芯,其特征在于所述DDR3仲裁控制器采用异步时钟缓冲技术。
CN201710212440.7A 2017-04-01 2017-04-01 一种基于单片fpga的小型非制冷红外机芯 Pending CN106803900A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710212440.7A CN106803900A (zh) 2017-04-01 2017-04-01 一种基于单片fpga的小型非制冷红外机芯

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710212440.7A CN106803900A (zh) 2017-04-01 2017-04-01 一种基于单片fpga的小型非制冷红外机芯

Publications (1)

Publication Number Publication Date
CN106803900A true CN106803900A (zh) 2017-06-06

Family

ID=58981787

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710212440.7A Pending CN106803900A (zh) 2017-04-01 2017-04-01 一种基于单片fpga的小型非制冷红外机芯

Country Status (1)

Country Link
CN (1) CN106803900A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108871317A (zh) * 2018-09-10 2018-11-23 上海航天控制技术研究所 一种高精度星敏感器信息处理系统
CN109587380A (zh) * 2018-12-06 2019-04-05 天津津航技术物理研究所 小型化高温工作多接口制冷型红外成像器
CN111998958A (zh) * 2020-10-29 2020-11-27 南京智谱科技有限公司 一种探测器非均匀校正方法和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957982A (zh) * 2010-10-11 2011-01-26 华中科技大学 适用于高帧率大面阵红外探测器的实时红外图像处理系统
CN102663758A (zh) * 2012-04-20 2012-09-12 北京工业大学 一种基于fpga控制核心的图像采集及处理方法
CN105847711A (zh) * 2016-04-08 2016-08-10 北京航天计量测试技术研究所 一种基于高性能fpga+ddr3的高集成化红外成像系统
CN206807625U (zh) * 2017-04-01 2017-12-26 江苏北方湖光光电有限公司 一种基于单片fpga的小型非制冷红外机芯

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957982A (zh) * 2010-10-11 2011-01-26 华中科技大学 适用于高帧率大面阵红外探测器的实时红外图像处理系统
CN102663758A (zh) * 2012-04-20 2012-09-12 北京工业大学 一种基于fpga控制核心的图像采集及处理方法
CN105847711A (zh) * 2016-04-08 2016-08-10 北京航天计量测试技术研究所 一种基于高性能fpga+ddr3的高集成化红外成像系统
CN206807625U (zh) * 2017-04-01 2017-12-26 江苏北方湖光光电有限公司 一种基于单片fpga的小型非制冷红外机芯

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108871317A (zh) * 2018-09-10 2018-11-23 上海航天控制技术研究所 一种高精度星敏感器信息处理系统
CN108871317B (zh) * 2018-09-10 2020-10-27 上海航天控制技术研究所 一种高精度星敏感器信息处理系统
CN109587380A (zh) * 2018-12-06 2019-04-05 天津津航技术物理研究所 小型化高温工作多接口制冷型红外成像器
CN111998958A (zh) * 2020-10-29 2020-11-27 南京智谱科技有限公司 一种探测器非均匀校正方法和系统

Similar Documents

Publication Publication Date Title
JP2631275B2 (ja) コプロセッサアーキテクチャ
CN102884489B (zh) 针对通信端口采用可变时钟选通滞后的设备和方法
CN106803900A (zh) 一种基于单片fpga的小型非制冷红外机芯
US20050193358A1 (en) Reconfiguration of a programmable logic device using internal control
US20160227160A1 (en) Image signal processor and devices including the same
WO2016188344A1 (zh) 一种基于软处理器的图像信号源及其处理图像信号的方法
EP0150910A2 (en) Digital image frame processor
CN103049879A (zh) 一种基于fpga的红外图像预处理方法
CN206807625U (zh) 一种基于单片fpga的小型非制冷红外机芯
CN104599227A (zh) 用于高速ccd数据存储的ddr3仲裁控制器及方法
US20140223090A1 (en) Accessing control registers over a data bus
CN104243781A (zh) 一种基于sopc的全方位视觉系统
CN107277373A (zh) 一种高速实时图像处理系统的硬件电路
CN104065937A (zh) 用于cmos图像传感器的实时高速图像预处理方法
JP2015126297A (ja) 画像処理装置及びその制御方法、並びに撮像装置
CN117036164A (zh) 光电扫描图像通用拼接显示方法及系统
JP2007037112A (ja) 撮像シリアルインタフェースrom集積回路
US8386687B2 (en) Method and apparatus for data transfer
CN205430429U (zh) 一种基于dsp的图像采集处理装置
US7502075B1 (en) Video processing subsystem architecture
US10649938B2 (en) Information processing apparatus and method of transferring data
CN108196911A (zh) 一种对图像显示扩展盒进行参数配置的方法及装置
US11315209B2 (en) In-line and offline staggered bandwidth efficient image signal processing
US7603487B2 (en) Hardware configurable hub interface unit
CN1318939C (zh) 改变系统模式之请求的处理方法与装置及计算机系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination