CN108616686A - 一种全哈达玛矩阵编码成像方法 - Google Patents

一种全哈达玛矩阵编码成像方法 Download PDF

Info

Publication number
CN108616686A
CN108616686A CN201611136193.9A CN201611136193A CN108616686A CN 108616686 A CN108616686 A CN 108616686A CN 201611136193 A CN201611136193 A CN 201611136193A CN 108616686 A CN108616686 A CN 108616686A
Authority
CN
China
Prior art keywords
matrix
hadamard
negative
positive matrices
measured value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611136193.9A
Other languages
English (en)
Other versions
CN108616686B (zh
Inventor
韩静
吴传奇
岳江
张毅
柏连发
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Science and Technology
Original Assignee
Nanjing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Science and Technology filed Critical Nanjing University of Science and Technology
Priority to CN201611136193.9A priority Critical patent/CN108616686B/zh
Publication of CN108616686A publication Critical patent/CN108616686A/zh
Application granted granted Critical
Publication of CN108616686B publication Critical patent/CN108616686B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)

Abstract

本发明提出一种全哈达玛矩阵编码成像方法。通过矩阵运算分别提取出哈达玛矩阵中的+1和‑1两种元素,使哈达玛矩阵拆分为可在光路中实现的哈达玛正矩阵和哈达玛负矩阵,使用哈达玛正矩阵和哈达玛负矩阵对图像信号进行编码;解码时,把哈达玛正矩阵编码得到的测量值与哈达玛负矩阵编码得到的测量值相减,再经过矩阵运算重建出图像。本发明方法在光路调制中实现了哈达玛矩阵,大大提高了成像的灵敏度和信噪比。

Description

一种全哈达玛矩阵编码成像方法
技术领域
本发明属于微弱信号探测与成像技术领域,具体涉及一种编码成像的编码方法。
背景技术
编码成像解决的是微光信号的探测与成像问题。编码成像利用数字微镜器件DMD在光路系统中对图像信号进行像素级的组合测量,控制数字微镜器件DMD翻转的编码矩阵决定了组合测量方式。
目前,广泛使用的编码矩阵为循环矩阵,循环矩阵由哈达玛矩阵变形而来。但是理论最优编码矩阵为哈达玛矩阵,哈达玛矩阵由+1和-1两种元素组成,实际光路中无法实现,而循环矩阵由+1和0两种元素组成,实际光路容易实现,因此目前广泛使用循环矩阵作为编码成像的编码矩阵。但是循环矩阵的信噪比提升能力比哈达玛矩阵的信噪比提升能力低的多。
高玲肖等在《红外与激光工程[J]》.2013,42(11)发表的“互补S矩阵在DMD光谱仪中噪声改善的研究”一文中,对现有的循环矩阵编码方法进行改进,通过建立两个互补的循环矩阵来进行编码,该方法虽然相比于循环矩阵编码能够进一步提升信噪比,但仍然以循环矩阵编码为基础,而不是从理论最优编码矩阵哈达玛矩阵为出发点,因此提升的信噪比有限,还有很大的信噪比提升空间。
哈达玛矩阵编码具有高信噪比特性,但是不能直接在实际光路中实现,而循环矩阵编码在光路中容易实现,但是信噪比提升不够理想。这些事实成为编码成像选择编码矩阵时的一对矛盾。如何化解上述矛盾,找到一个能在实际光路中实现并且能够逼近或者达到理论最优的信噪比提升比例已成为当今编码成像领域亟待解决的关键难题之一。
发明内容
本发明针对现有的循环矩阵编码方法对信噪比的提升幅度不够大的问题,提出一种全哈达玛矩阵编码成像方法,该方法间接实现了理论最优编码矩阵编码,进一步提升了信噪比。
为了解决上述技术问题,本发明提供一种全哈达玛矩阵编码成像方法,编码时,成像系统光路中的数字微镜器件按照哈达玛正矩阵H+和哈达玛负矩阵H-的编码方式对光路进行调制;解码时,根据哈达玛正矩阵H+编码得到的测量值与哈达玛负矩阵H-编码得到的测量值重建出图像;
所述哈达玛正矩阵H+和哈达玛负矩阵H-通过下式获得,
其中,ones为全1矩阵,H为哈达玛矩阵;
所述根据哈达玛正矩阵H+编码得到的测量值与哈达玛负矩阵H-编码得到的测量值重建出图像的方法如下式所示,
X=H-1·Y
其中,向量X为重建图像的真实灰度值,向量Y为哈达玛正矩阵H+编码得到的测量值与哈达玛负矩阵H-编码得到的测量值之差,矩阵H-1为哈达玛矩阵H的逆矩阵。
进一步,在数字微镜器件对光路进行调制前,先把哈达玛正矩阵H+和哈达玛负矩阵H-的每一行数据建成n×n的矩阵;然后把n×n的矩阵放大n倍;数字微镜器件按照放大后的矩阵控制其微镜进行翻转,以实现对图像的编码。
进一步,将向量X重建为n×n的矩阵并进行线性插值放大处理,以完成图像重建。
本发明与现有技术相比,其显著优点在于,本发明方法通过对理论最优矩阵哈达玛矩阵进行矩阵运算,将其拆分为两个可实现的矩阵,解决了哈达玛矩阵编码在实际光路中的不可实现性;同时,本发明使用哈达玛矩阵进行编码成像,调高了信噪比。
附图说明
图1是本发明方法流程示意图。
图2是使用本发明方法编码出的编码图案中的某一个图案样本。
图3是使用本发明方法对目标场景进行重建后的图像。
图4是使用传统的循环矩阵编码方法对目标场景进行重建后的图像。
具体实施方式
容易理解,依据本发明的技术方案,在不变更本发明的实质精神的情况下,本领域的一般技术人员可以想象出本发明全哈达玛矩阵编码成像方法的多种实施方式。因此,以下具体实施方式和附图仅是对本发明的技术方案的示例性说明,而不应当视为本发明的全部或者视为对本发明技术方案的限制或限定。
为了在光路中实现哈达玛矩阵,本发明首先通过矩阵运算分别提取出哈达玛矩阵中的+1和-1两种元素,使哈达玛矩阵拆分为两个可实现的矩阵,本发明把这两个可实现的矩阵命名为哈达玛正矩阵和哈达玛负矩阵。然后利用哈达玛正矩阵和哈达玛负矩阵对图像信号实行编码。最后解码时把哈达玛正矩阵编码得到的测量值与哈达玛负矩阵编码得到的测量值相减,再经过矩阵运算、图像重建得到高灵敏高信噪比的图像。
哈达玛正矩阵和哈达玛负矩阵是通过哈达玛矩阵与全1矩阵(元素全为1的矩阵)之间的矩阵运算来得到的。以8阶哈达玛矩阵为例进行介绍说明,标准的8阶哈达玛矩阵H8为:
本发明将8阶哈达玛矩阵H8矩阵拆分为8阶哈达玛正矩阵和8阶哈达玛负矩阵简单地说就是将哈达玛矩阵中的+1和-1分别提取到两个矩阵中,提取过程可用以下数学公式实现:
其中,ones8为8阶全1矩阵,将8阶哈达玛矩阵H8代入以上两个公式即可以获得如下所示的8阶哈达玛正矩阵和8阶哈达玛负矩阵
都是在实际光路中可以实现的矩阵,矩阵中的元素1所在的矩阵位置分别对应哈达玛矩阵中元素1和元素-1所在的矩阵位置。
假设要获得一幅8像素图像,令向量X=(x1,x2,x3,x4,x5,x6,x7,x8)T为该图像的真实灰度值,向量Y=(y1,y2,y3,y4,y5,y6,y7,y8)T为8阶哈达玛正矩阵对该图形进行编码得到的测量值与8阶哈达玛负矩阵对该图形进行编码得到的测量值之差,向量ε=(ε12345678)T为噪声,则具有下式所示的关系,
Y=H8·X+ε
都是在实际光路中可以实现的矩阵,都为8阶矩阵,每一行数据可以用来进行一次编码,需要进行八次编码。以第二次编码(用矩阵的第二行数据编码)为例,令y2为哈达玛矩阵H8编码得到的测量值,为哈达玛正矩阵编码得到的测量值,为哈达玛负矩阵编码得到的测量值,则有以下关系式:
y2=x1-x2+x3-x4+x5-x6+x7-x8
其它的七次编码也类似,也就是说可以通过哈达玛正矩阵编码和哈达玛负矩阵编码来模拟出哈达玛矩阵“编码”,所得结果一样。用数学公式表示为:
实施例
步骤一:搭建成像系统光路。该成像系统光路为常见的光路,光线从物镜进入光路,再经透镜聚焦照射到数字微镜器件DMD上,数字微镜器件DMD按照哈达玛正矩阵和哈达玛负矩阵的编码方式对光路进行调制,经聚焦透镜聚焦到单点探测器上,单点探测器的信号经信号处理器后传到PC机进行计算,重建出图像。
步骤二:光路搭建完成后,利用matlab计算并生成哈达玛正矩阵和哈达玛负矩阵。哈达玛正矩阵和哈达玛负矩阵可根据情况选择不同的矩阵阶数。本实施例利用256阶矩阵进行编码,256阶哈达玛矩阵H256如下所示:
利用以下两个公式计算出256阶哈达玛正矩阵和256阶哈达玛负矩阵
计算得到的256阶哈达玛正矩阵和256阶哈达玛负矩阵分别如下所示,
步骤三:数字微镜器件DMD按照256阶哈达玛正矩阵和256阶哈达玛负矩阵的编码方式对图像信号进行编码。首先把256阶哈达玛正矩阵和256阶哈达玛负矩阵的每一行数据重建成16×16的矩阵;然后把得到的16×16的矩阵放大16倍,放大的目的是为了使编码的区域足够大,因此也可根据情况选择不同的放大倍数;最后DMD按照放大后的矩阵控制DMD上面的微镜进行翻转,从而实现对图像信号的编码。其中一个编码图案如图2所示。
步骤四:解码计算并重建图像。令向量X=(x1,x2,x3,…,x255,x256)T为重建图像的真实灰度值,向量Y=(y1,y2,y3,…,y255,y256)T为哈达玛正矩阵编码得到的测量值与哈达玛负矩阵编码得到的测量值之差,向量ε=(ε123,…,ε255256)T为噪声,它们之间的关系为:
解码计算公式为其中矩阵为矩阵H256的逆矩阵。将X重建为16×16的矩阵并进行线性插值放大处理,完成图像的重建。
本申请在相同的光照条件下,将本发明方法与传统的循环矩阵编码成像方法进行比较,图3和图4是本实验在微弱光照条件下重建获得的目标图像。可以看出,本发明方法信噪比提升的幅度比传统的循环矩阵编码方法要大的多,获得的重建图像结果比较理想。
本发明方法经多次实验验证,得到的实验结果很理想。使用本发明方法能够在微弱光照条件下获得理想的成像效果,可广泛应用于军事探测、生物医学等弱光场景,具有很好的应用前景。

Claims (3)

1.一种全哈达玛矩阵编码成像方法,其特征在于,编码时,成像系统光路中的数字微镜器件按照哈达玛正矩阵H+和哈达玛负矩阵H-的编码方式对光路进行调制;解码时,根据哈达玛正矩阵H+编码得到的测量值与哈达玛负矩阵H-编码得到的测量值重建出图像;
所述哈达玛正矩阵H+和哈达玛负矩阵H-通过下式获得,
其中,ones为全1矩阵,H为哈达玛矩阵;
所述根据哈达玛正矩阵H+编码得到的测量值与哈达玛负矩阵H-编码得到的测量值重建出图像的方法如下式所示,
X=H-1·Y
其中,向量X为重建图像的真实灰度值,向量Y为哈达玛正矩阵H+编码得到的测量值与哈达玛负矩阵H-编码得到的测量值之差,矩阵H-1为哈达玛矩阵H的逆矩阵。
2.如权利要求1所述全哈达玛矩阵编码成像方法,其特征在于,先把哈达玛正矩阵H+和哈达玛负矩阵H-的每一行数据建成n×n的矩阵;然后把n×n的矩阵放大n倍;数字微镜器件按照放大后的矩阵控制其微镜进行翻转,以实现对图像的编码。
3.如权利要求2所述全哈达玛矩阵编码成像方法,其特征在于,将向量X重建为n×n的矩阵并进行线性插值放大处理,以完成图像重建。
CN201611136193.9A 2016-12-12 2016-12-12 一种全哈达玛矩阵编码成像方法 Active CN108616686B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611136193.9A CN108616686B (zh) 2016-12-12 2016-12-12 一种全哈达玛矩阵编码成像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611136193.9A CN108616686B (zh) 2016-12-12 2016-12-12 一种全哈达玛矩阵编码成像方法

Publications (2)

Publication Number Publication Date
CN108616686A true CN108616686A (zh) 2018-10-02
CN108616686B CN108616686B (zh) 2020-09-11

Family

ID=63643661

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611136193.9A Active CN108616686B (zh) 2016-12-12 2016-12-12 一种全哈达玛矩阵编码成像方法

Country Status (1)

Country Link
CN (1) CN108616686B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112543026A (zh) * 2020-12-10 2021-03-23 杭州万高科技股份有限公司 一种多路信号同步采样系统、方法、装置及介质
CN112904349A (zh) * 2021-01-28 2021-06-04 清华大学 一种超声弹性成像方法
CN113392965A (zh) * 2021-08-18 2021-09-14 苏州浪潮智能科技有限公司 一种哈达玛积的实现方法、设备及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001204031A (ja) * 1999-12-02 2001-07-27 Lucent Technol Inc ブロック変換ベースの符号化システムで用いられる方法
EP2300982A1 (en) * 2008-06-17 2011-03-30 NTT DoCoMo, Inc. Image/video quality enhancement and super-resolution using sparse transformations
CN103063298A (zh) * 2012-11-30 2013-04-24 重庆大学 对微镜阵列光谱仪进行互补s矩阵编码调制的方法
CN103686173A (zh) * 2014-01-09 2014-03-26 开曼群岛威睿电通股份有限公司 变换与反变换电路
US8970544B1 (en) * 2012-05-24 2015-03-03 Maxim Integrated Products, Inc. Digital filtering and spread spectrum based interference mitigation for mutual and self capacitance panel
US9081731B2 (en) * 2013-01-31 2015-07-14 Inview Technology Corporation Efficient transforms and efficient row generation for Kronecker products of Hadamard matrices
CN104796609A (zh) * 2015-04-17 2015-07-22 南京理工大学 基于最优哈达玛编码的大视场高分辨率显微成像方法
CN105223582A (zh) * 2015-09-01 2016-01-06 西安交通大学 一种基于压缩感知的激光雷达成像装置及成像方法
US9235280B1 (en) * 2012-05-24 2016-01-12 Qualcomm Technologies, Inc. Mutual capacitance large panel phase shift mitigation
CN105681233A (zh) * 2010-04-30 2016-06-15 洛桑联邦理工学院 正交差分向量信令

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001204031A (ja) * 1999-12-02 2001-07-27 Lucent Technol Inc ブロック変換ベースの符号化システムで用いられる方法
EP2300982A1 (en) * 2008-06-17 2011-03-30 NTT DoCoMo, Inc. Image/video quality enhancement and super-resolution using sparse transformations
CN105681233A (zh) * 2010-04-30 2016-06-15 洛桑联邦理工学院 正交差分向量信令
US8970544B1 (en) * 2012-05-24 2015-03-03 Maxim Integrated Products, Inc. Digital filtering and spread spectrum based interference mitigation for mutual and self capacitance panel
US9235280B1 (en) * 2012-05-24 2016-01-12 Qualcomm Technologies, Inc. Mutual capacitance large panel phase shift mitigation
CN103063298A (zh) * 2012-11-30 2013-04-24 重庆大学 对微镜阵列光谱仪进行互补s矩阵编码调制的方法
US9081731B2 (en) * 2013-01-31 2015-07-14 Inview Technology Corporation Efficient transforms and efficient row generation for Kronecker products of Hadamard matrices
CN103686173A (zh) * 2014-01-09 2014-03-26 开曼群岛威睿电通股份有限公司 变换与反变换电路
CN104796609A (zh) * 2015-04-17 2015-07-22 南京理工大学 基于最优哈达玛编码的大视场高分辨率显微成像方法
CN105223582A (zh) * 2015-09-01 2016-01-06 西安交通大学 一种基于压缩感知的激光雷达成像装置及成像方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
L. STREETER等: ""Optical full Hadamard matrix multiplexing and noise effects"", 《APPLIED OPTICS》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112543026A (zh) * 2020-12-10 2021-03-23 杭州万高科技股份有限公司 一种多路信号同步采样系统、方法、装置及介质
CN112543026B (zh) * 2020-12-10 2021-09-03 杭州万高科技股份有限公司 一种多路信号同步采样系统、方法、装置及介质
CN112904349A (zh) * 2021-01-28 2021-06-04 清华大学 一种超声弹性成像方法
CN113392965A (zh) * 2021-08-18 2021-09-14 苏州浪潮智能科技有限公司 一种哈达玛积的实现方法、设备及存储介质
CN113392965B (zh) * 2021-08-18 2021-11-19 苏州浪潮智能科技有限公司 一种哈达玛积的实现方法、设备及存储介质
WO2023019799A1 (zh) * 2021-08-18 2023-02-23 苏州浪潮智能科技有限公司 一种哈达玛积的实现方法、设备及存储介质
US11893479B1 (en) 2021-08-18 2024-02-06 Inspur Suzhou Intelligent Technology Co., Ltd. Hadamard product implementation method and device, and storage medium

Also Published As

Publication number Publication date
CN108616686B (zh) 2020-09-11

Similar Documents

Publication Publication Date Title
Xiong et al. Snapshot hyperspectral light field imaging
CN108616686A (zh) 一种全哈达玛矩阵编码成像方法
KR20170106931A (ko) 광 필드 데이터 처리 방법 및 디바이스
KR20140023935A (ko) 광 검출 시스템 및 방법
CN107205103B (zh) 基于压缩感知和条纹相机原理的超高速压缩摄影装置
Gnanasambandam et al. Megapixel photon-counting color imaging using quanta image sensor
CN105116542B (zh) 一种双视场计算关联成像系统及方法
Tambe et al. Towards motion aware light field video for dynamic scenes
US9398273B2 (en) Imaging system, imaging apparatus, and imaging method
KR20190137260A (ko) 이미지 부호화 장치 및 이미지 복호화 장치
US9883121B2 (en) Machine vision system for forming a one dimensional digital representation of a low information content scene
Miandji et al. Multi-shot single sensor light field camera using a color coded mask
CN108833919B (zh) 基于随机循环矩阵的彩色单像素成像方法及系统
Schwartz et al. Saliency-guided compressive sensing approach to efficient laser range measurement
Liu et al. Modified grey world method to detect and restore colour cast images
Huang et al. Macro‐pixel‐wise CNN‐based filtering for quality enhancement of light field images
KR102418000B1 (ko) 컬러 이미지와 모노크롬 이미지를 이용하여 스테레오 매칭을 수행하는 방법 및 이를 이용한 장치
CN111854945B (zh) 一种单像素紫外偏振成像方法及系统
CN113393379B (zh) 基于像素编码的大f数衍射实时校正的高分辨成像方法
CN116228899A (zh) 一种监督与无监督学习联合的单像素成像方法和装置
Shin et al. Programmable single-pixel imaging
CN113554083A (zh) 多曝光度图像样本的生成方法及装置、计算机设备及介质
Yang et al. Image reconstruction in the gigavision camera
CN105761212A (zh) 基于dmd编码的哈达码变换高灵敏成像的方法
KR20220096328A (ko) 이벤트 기반 영상 센싱 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant