CN101510953A - 高性能cmos一体化数字摄相机 - Google Patents

高性能cmos一体化数字摄相机 Download PDF

Info

Publication number
CN101510953A
CN101510953A CNA200910066595XA CN200910066595A CN101510953A CN 101510953 A CN101510953 A CN 101510953A CN A200910066595X A CNA200910066595X A CN A200910066595XA CN 200910066595 A CN200910066595 A CN 200910066595A CN 101510953 A CN101510953 A CN 101510953A
Authority
CN
China
Prior art keywords
module
flash memory
image
optical fiber
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA200910066595XA
Other languages
English (en)
Inventor
何昕
余辉龙
魏仲慧
何家维
刘岩俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CNA200910066595XA priority Critical patent/CN101510953A/zh
Publication of CN101510953A publication Critical patent/CN101510953A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

本发明涉及空间摄相机,特别是一种高性能CMOS一体化数字摄相机,包括CMOS成像模块、闪存存储模块、光纤和千兆网卡高速数据传输,还包括实时图像压缩模块、图像数据融合模块、图像纠错编码器、闪存控制器、图像纠错译码器、千兆网卡控制和光纤控制。本摄相机通过GPS高精度定位/时间便于对拍摄图像数据分析,通过数据压缩节省闪存存储空间,通过图像数据纠错编译码保证存储图像的正确性,利用闪存作为存储介质存储数据提高系统的抗冲击能力,为便于该装置与上位机通讯,提供千兆网卡和光纤两种数据回放传输方式。该装置可实现持续高帧频图像实时记录,并实现纠错编码。

Description

高性能CMOS一体化数字摄相机
技术领域
本发明涉及空间摄像机,特别是一种基于高帧频CMOS图像传感器的数字摄相机。
背景技术
随着光电测量试验,瞬态现象科学观测与测量技术的发展,高帧频CMOS图像传感器被广泛应用于空间摄像机中。由于帧频和分辨率高,大量的数字信息需要实时无损记录到存储设备中,这就要求图像存储设备有很高的持续存储速度,才能避免数据丢失,为节省存储空间,对图像进行压缩,为充分了解图像拍摄情况,在图像中添加时间和编码器信息,为防止图像存储错误,对图像数据进行纠错编码译码,为方便存储图像读取,利用千兆网卡和光纤读取。
目前美国Vision Research公司研究的v系列相机,包括CMOS成像模块,数字图像存储模块,数字图像传输模块。CMOS成像模块将图像经数字图像存储模块存储后,经数字图像传输模块将图像传输出去。
该CMOS一体化相机存在的主要问题是:高帧频时,存储时间短,不能持续记录图像数据。未进行实时图像压缩,不能提供时间码信息和相机方位信息,未进行纠错编译码,不能保证存储数据的完整性。
发明内容
本发明的目的是为克服现有技术存在的上述缺陷,提出一种高性能CMOS一体化数字摄像机,以实现瞬态现象的高帧频数字图像实时记录,保证存储数字图像的完整性,并提供时间码和方位信息。
本发明高性能CMOS一体化数字摄像机,包括CMOS成像模块、闪存存储模块、光纤和千兆网卡高速数据传输,其特点是还包括GPS、实时图像压缩模块、图像数据融合模块、图像纠错编码器、闪存控制器、图像纠错译码器、千兆网卡控制和光纤控制;所述的实时图像压缩模块的输入端与CMOS成像模块的输出端相连接,输出端与图像数据融合模块的输入端相连接;图像数据融合模块的输出端与图像纠错编码器的输入端相连接;图像纠错编码器的输出端通过闪存控制器分别与闪存存储模块和图像纠错译码器的输入端相连接;图像纠错译码器的输出端分别通过千兆网卡控制器、光纤控制与千兆网和光纤相连接;GPS与图像数据融合模块的输入端相连接。
所述的闪存存储模块是由分别连接在数据选择模块上的10级闪存流水线组成,每级闪存流水线包括四片闪存和四片SRAM。
本机的工作原理是:
在拍摄工作模式下,数字图像数据从CMOS成像模块传送到实时图像压缩模块中,图像数据融合模块将压缩完成的图像数据与GPS定位和时间信息融合,然后经过图像纠错编码器,在闪存控制器的控制下将图像数据写入到闪存存储阵列中。
在回放工作模式下,在闪存控制器的控制下将图像数据从闪存存储阵列中读取到图像纠错译码器中,将纠错译码完成的图像传输给光纤控制器或千兆网控制器,将图像通过光纤或千兆网卡输出。
数据擦除工作模式,在闪存控制器的控制下将闪存存储阵列擦除。
本发明高性能CMOS一体化数字摄像机的优点是,通过GPS高精度定位/时间便于对拍摄图像数据分析,通过数据压缩节省闪存存储空间,通过图像数据纠错编译码保证存储图像的正确性,利用闪存作为存储介质存储数据提高系统的抗冲击能力,为便于该装置与上位机通讯,提供千兆网卡和光纤两种数据回放传输方式。该装置可实现持续高帧频图像实时记录,并实现纠错编码
附图说明
图1是本发明摄像机的组成示意框图;
图2是本发明摄像机中所述的闪存存储模块结构示意框图。
具体实施方式
以下结合附图给出的实施例对本发明摄像机的构成作进一步详细描述。
参照图1,一种高性能CMOS一体化数字摄相机,包括CMOS成像模块1、闪存存储模块6、光纤11和千兆网卡9高速数据传输,还包括GPS12、实时图像压缩模块2、图像数据融合模块3、图像纠错编码器4、闪存控制器5、图像纠错译码器7、千兆网卡控制8和光纤控制10;所述的实时图像压缩模块2的输入端与CMOS成像模块1的输出端相连接,输出端与图像数据融合模块3的输入端相连接;图像数据融合模块3的输出端与图像纠错编码器4的输入端相连接;图像纠错编码器4的输出端通过闪存控制器5分别与闪存存储模块6和图像纠错译码器7的输入端相连接;图像纠错译码器7的输出端分别通过千兆网卡控制器8、光纤控制10与千兆网9和光纤11相连接;GPS12与图像数据融合模块3的输入端相连接。
参照图2,所述的闪存存储模块6是由分别连接在数据选择模块13上的10级闪存流水线14至23组成,每级闪存流水线包括四片闪存和四片SRAM。
其中:
所述的CMOS成像模块1采用LUPA300高帧频CMOS图像传感器;
实时图像压缩模块2、图像数据融合模块3、图像纠错编码器4、闪存控制器5、千兆网卡控制器8和图像纠错译码器7均采用XILINX XC4VFX60T,配置芯片采用XCF16P;
闪存存储模块6,采用三星公司NAND闪存K9K8G08U0A;
千兆网卡9采用千兆网络物理层芯片;
GPS12采用GPS高精度定位/时间信息,采用RS232串口接口;
光纤控制器10采用TLK2711A。
本发明所涉及的实时图像压缩模块,对图像数据无损压缩。无损压缩技术可以保证在不引入任何失真的情况下完全恢复原始数据。由美国空间数据系统咨询委员会提出的无损压缩算法LDC。具有较低的算法复杂度,适合实时无损压缩,包括预处理和熵编码器,预处理器的作用是去相关,然后将其映射为适合熵编码的数据。预处理器的输入数据为X,数据的块大小为J:
X=X1,X2,...XJ
X经过预处理器后变为δ:
δ=δ1,δ2,...,δJ
自适应熵编码器将对δ进行编码,最后输出。实现图像数据的实时无损压缩。
本发明所涉及的图像融合模块,是将实时压缩的图像数据与GPS采集的时间信息和定位信息进行像素级融合,首先将GPS接收机数据进行预处理,得出时间和定位信息的报文数据,从中提取出与图像信息数据相一致的数据格式,将其与压缩后的图像数据按像素运算叠加到图像中,并在图像上标记图像文件。
本发明所涉及的RS实时纠错编译码器,RS码用于纠多字节差错是十分有效的。通过差错定位多项式的概念提供了解决译码问题的基本工具。通过无求逆BM迭代方程方法计算,位置多项式和差错估值多项式。通过钱搜索确定差错位置,通过Forney算法确定差错值估算。通过无求逆的BM算法,采用脉动序列对图像数据添加纠错码,读取数据时,通过译码算法对图像数据纠错译码。通过采用RS双编码结构,增加编码速度。
本发明涉及的闪存阵列的闪存存储模块,每一个闪存流水线级包括四片闪存和四片SRAM。通过10级流水线提高了闪存的存储容量,通过4片闪存并行,提高了闪存的存储速度,降低了对相机像素时钟需求。由于闪存存在无效块,遇到写入无效块时,图像数据存储错误,因此在写入闪存数据时对图像数据备份,采用SRAM阵列对数据进行备份,每一个闪存流水线级采用相对应的SRAM,形成与闪存阵列相同的SRAM阵列,在图像数据写入闪存的同时,将数据写入SRAM,覆盖SRAM中原有数据,若遇到无效块,将SRAM中备份数据回写到闪存中。

Claims (2)

1.一种高性能CMOS一体化数字摄相机,包括CMOS成像模块(1)、闪存存储模块(6)、光纤(11)和千兆网卡(9)高速数据传输,其特征在于还包括GPS(12)、实时图像压缩模块(2)、图像数据融合模块(3)、图像纠错编码器(4)、闪存控制器(5)、图像纠错译码器(7)、千兆网卡控制(8)和光纤控制(10);所述的实时图像压缩模块(2)的输入端与CMOS成像模块(1)的输出端相连接,输出端与图像数据融合模块(3)的输入端相连接;图像数据融合模块(3)的输出端与图像纠错编码器(4)的输入端相连接;图像纠错编码器(4)的输出端通过闪存控制器(5)分别与闪存存储模块(6)和图像纠错译码器(7)的输入端相连接;图像纠错译码器(7)的输出端分别通过千兆网卡控制器(8)、光纤控制(10)与千兆网(9)和光纤(11)相连接;GPS(12)与图像数据融合模块(3)的输入端相连接。
2.根据权利要求1所述的高性能CMOS一体化数字摄相机,其特征在于所述的闪存存储模块(6)是由分别连接在数据选择模块(13)上的10级闪存流水线(14至23)组成,每级闪存流水线包括四片闪存和四片SRAM。
CNA200910066595XA 2009-03-04 2009-03-04 高性能cmos一体化数字摄相机 Pending CN101510953A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNA200910066595XA CN101510953A (zh) 2009-03-04 2009-03-04 高性能cmos一体化数字摄相机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA200910066595XA CN101510953A (zh) 2009-03-04 2009-03-04 高性能cmos一体化数字摄相机

Publications (1)

Publication Number Publication Date
CN101510953A true CN101510953A (zh) 2009-08-19

Family

ID=41003200

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA200910066595XA Pending CN101510953A (zh) 2009-03-04 2009-03-04 高性能cmos一体化数字摄相机

Country Status (1)

Country Link
CN (1) CN101510953A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102118555A (zh) * 2010-01-06 2011-07-06 索尼公司 电子装置、定位设备、信息处理方法和程序
CN103019620A (zh) * 2012-11-30 2013-04-03 中国科学院上海技术物理研究所 基于闪存-sram流水线的存储电路系统
CN108833767A (zh) * 2018-03-28 2018-11-16 深圳市语图科技有限公司 一种应用于记录运动轨迹的定位系统及方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102118555A (zh) * 2010-01-06 2011-07-06 索尼公司 电子装置、定位设备、信息处理方法和程序
CN103019620A (zh) * 2012-11-30 2013-04-03 中国科学院上海技术物理研究所 基于闪存-sram流水线的存储电路系统
CN108833767A (zh) * 2018-03-28 2018-11-16 深圳市语图科技有限公司 一种应用于记录运动轨迹的定位系统及方法

Similar Documents

Publication Publication Date Title
US20090135256A1 (en) Sata camera system
CN103841415A (zh) 数据处理装置及数据处理方法
CN101478643A (zh) 数据采集的方法及系统
CN111064906A (zh) 国产处理器和国产fpga多路4k高清视频综合显示方法
CN105187753A (zh) 一种录制全景视频的系统
CN103402068A (zh) 非压缩式视频播放系统及播放方法
CN102075758A (zh) 基于soc的mjpeg视频编解码系统及其方法
CN101510953A (zh) 高性能cmos一体化数字摄相机
CN105874774B (zh) 用于在帧的处理过程中保持计数表的计数表保持装置以及相关的保持方法
CN1753492A (zh) 机载电荷耦合相机图像数据的光纤传输和整理方法
CN104243886B (zh) 一种基于插件技术的高速图像解析及视频生成方法
CN105120235A (zh) 基于usb3.0接口的工业图像采集系统及其图像采集处理方法
TWI308459B (en) Context-aware frame memory scheme for motion compensation in video decoding
CN103514645A (zh) 车用影像记录系统及方法
CN101247475B (zh) 进行图像采集和摄像的装置和方法
CN201044473Y (zh) 进行图像采集和摄像的装置
CN201577163U (zh) 一种通过1394实现高低码流音视频文件的处理装置
CN103975583A (zh) 捕获多个视频通道用于视频分析和编码
CN100551067C (zh) Jpeg图像压缩时非标准图像尺寸的图像数据处理装置及方法
CN106954029A (zh) 一种全景视频拼接方法及系统
CN100386717C (zh) 用于远程显示的计算机图像采集方法及装置
CN103369193B (zh) 图像处理装置及图像形成装置
CN100481913C (zh) 实时图像异步采集接口装置
CN102576301B (zh) 包括fifo存储器的接口连接电路
US8178847B2 (en) Data processing using reduced onboard memory

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20090819