CN106813777A - 基于相邻孔径交叉传递的极大视场复眼多光谱相机 - Google Patents

基于相邻孔径交叉传递的极大视场复眼多光谱相机 Download PDF

Info

Publication number
CN106813777A
CN106813777A CN201611250237.0A CN201611250237A CN106813777A CN 106813777 A CN106813777 A CN 106813777A CN 201611250237 A CN201611250237 A CN 201611250237A CN 106813777 A CN106813777 A CN 106813777A
Authority
CN
China
Prior art keywords
compound eye
visual field
multispectral camera
multispectral
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611250237.0A
Other languages
English (en)
Other versions
CN106813777B (zh
Inventor
鱼卫星
史成勇
王元元
胡炳樑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
XiAn Institute of Optics and Precision Mechanics of CAS
Original Assignee
XiAn Institute of Optics and Precision Mechanics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by XiAn Institute of Optics and Precision Mechanics of CAS filed Critical XiAn Institute of Optics and Precision Mechanics of CAS
Priority to CN201611250237.0A priority Critical patent/CN106813777B/zh
Publication of CN106813777A publication Critical patent/CN106813777A/zh
Application granted granted Critical
Publication of CN106813777B publication Critical patent/CN106813777B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2823Imaging spectrometer
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2823Imaging spectrometer
    • G01J2003/2826Multispectral imaging, e.g. filter imaging

Landscapes

  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

为了解决现有多光谱相机存在的视场小的问题,实现极大视场上的多光谱成像,本发明提出一种切实可行的基于曲面仿生复眼的极大视场多光谱相机设计方案。该大视场多光谱相机,包括三个子系统:带有不同滤光片的曲面微透镜阵列、光学变换子系统、带有图像传感器的数据处理单元。本发明基于相邻孔径交叉传递的大视场复眼多光谱相机能够实现极大视场上物体的多光谱成像,视场角可达120度以上。除了输出多光谱图像,该相机还可以实现大视场图像超分辨率重构、景深扩展以及3D成像等功能。

Description

基于相邻孔径交叉传递的极大视场复眼多光谱相机
技术领域
本发明属于光谱成像及光学元件的机械加工领域,尤其涉及一种基于相邻孔径交叉传递的极大视场复眼多光谱相机的设计。
背景技术
多光谱相机是在可见光的基础上向红外光和紫外光两个方向扩展,并通过各种滤光片或分光器与多种感光器的组合,使其同时分别接受同一目标在不同窄光谱带上所辐射或反射的信息,以此得到目标的不同光谱带图像。多光谱相机主要分为三类:一种是多镜头多光谱相机,这种相机具有多个镜头,每个镜头各有一个滤光片对应一种窄光谱带,多个镜头同时拍摄同一场景,用同一接收器记录几种不同光谱带的图像;另一种是多相机组成的多光谱系统,是由多台带有不同滤光片的相机,同时拍摄同一场景,分别接受不同光谱带的成像信息;还有一种是光束分离型多光谱相机,这种多光谱相机只有一个镜头拍摄,采用分光器或者滤光片把采集到的场景光线分离为若干波段,并记录下不同波段的图像信息。由于第三种光束分离型多光谱相机结构简单,应用最为广泛,常见光谱仪也多为这种类型。但一般多光谱相机和普通相机一样,成像范围较小,很难做到大视场拍摄。
发明内容
本发明所要解决的技术问题是提出一种基于仿生复眼的极大视场多光谱相机,该多光谱相机模仿自然界昆虫类眼睛-即复眼结构,采用多孔径镜头配合滤光片,以一种相邻孔径交叉传递的方式可实现对超过120度视场上的目标场景进行多光谱成像。
本发明的发明思想为:
本发明基于相邻孔径交叉传递的大视场复眼多光谱相机受启于自然界中的生物复眼结构,采用多孔径排列成曲面以获取大视场场景信息。而为了获取大视场范围内的多光谱信息,采用相邻孔径交叉排列的方式扩散至整个孔径阵列,配合适当的算法就可提取出大视场场景的多光谱图像。该多光谱相机主要由三个子系统组成:带有不同滤光片的球面透镜阵列、光学变换系统、带有图像传感器的数据处理单元。
一、带有不同滤光片的球面透镜阵列:该子系统也包含三个组成部分,分别为支撑球壳、微透镜和滤光片。支撑球壳是一个带有六边形排列阶梯孔的树脂或金属半球壳,该半球壳通过3D打印或5轴数控机床制作。支撑球壳除了起到支撑微透镜的作用外还可以防止相邻孔径间的串扰,起到孔径光阑的作用。微透镜安装在半球壳的阶梯孔内。在每个透镜下方各放置一片透过波长不同的滤光片。球壳上每个包含微透镜和滤光片的孔都称为一个子通道,即一个成像孔径,整个系统共包含一百多个成像孔径。各成像孔径间成六边形排列,每个孔径周边都有六个相邻的对不同波段透过的子通道,称为一个光谱成像单元。每个单元中的7个成像孔径都可以对场景中的同一个物体成像,从而获得其多光谱图像信息。
二、光学变换子系统:光学变换子系统主要负责把曲面复眼所成的像变换到图像传感器上进行接收。本发明系统采用远心视光路设计,共包含7个镜片,物面在不同视场的出射光线与像平面垂直,能够最大限度消除探测器离焦对不同视场角的影响差别。利用第四透镜的前表面作为一个控制面,对镜头的象散进行有效的控制。其中只有ZF6和H-ZK9B两种玻璃,且均为价格便宜、经常使用、易于加工的材料。另外,采用一片曲面非均匀厚度的或者渐变折射率的透镜也可以实现相同的图像变换作用。
三、带有图像传感器的数据处理单元:数据处理单元子系统包含图像传感器可以把光学连续图像采样为离散数字图像。除此之外,该大视场复眼多光谱相机系统是一种计算成像系统,最终图像需要通过重构算法计算得出。计算成像中最终图像的重构是相机系统成像的逆过程,必须根据相机结构或图像特性设计合适的算法才能得出较好的最终图像。
本发明的技术解决方案是提供一种基于相邻孔径交叉传递的极大视场复眼多光谱相机,包括依次设置的透镜阵列、光学变换系统及带有图像传感器的数据处理单元;其特殊之处在于:
上述透镜阵列为带有不同滤光片的曲面透镜阵列;
上述带有不同滤光片的曲面透镜阵列包括支撑球壳、微透镜和透过波长不同的滤光片;
上述支撑球壳为半球壳,上述半球壳壳体上设置有阶梯孔阵列;
上述微透镜安装在所述阶梯孔内,上述微透镜下方各放置一片透过波长不同的滤光片;包含微透镜和滤光片的阶梯孔视为一个成像孔径,每个成像孔径周边有六个相邻的对不同波段透过的成像孔径;
上述光学变换系统将曲面透镜所成的像变换至带有图像传感器的数据处理单元进行接收处理。
优选的,上述阶梯孔阵列为蜂窝状六边形排列;每七个阶梯孔以一个阶梯孔为中心成六边形排列,再以其余周边的六个阶梯孔为中心,每个阶梯孔周围都排列六个阶梯孔成六边形排列;
上述系统中的带有不同滤光片的球面透镜阵列子系统主要负责采集大视场场景内物体反射(或发射)的光线。该子系统是整个多光谱相机系统的核心,也是该多光谱系统与传统多光谱相机最主要的区别。球面透镜阵列子系统采用仿生复眼方式设计,模仿生物复眼中子眼排列成曲面来对大范围场景成像。
上述球面透镜阵列中各透镜的排列按照蜂窝状六边形紧密排列,以尽可能提高整个光学系统的光通量。
上述支撑球壳通过3D打印或五轴数控机床制作。
优选的,上述光学变换系统包括七个透镜,上述七个透镜采用远心视光路设计。
上述光学变换系统还可以是一片曲面非均匀厚度的或者渐变折射率的透镜。
上述光学变换系统把球面透镜阵列所成的像变换到平面基的图像传感器上并进行接收,以此解决了成像焦曲面和平面图像传感器不匹配的问题。
优选的,上述光学变换系统的焦距为3mm,最大视场为120度,相对孔径约为1/3,最大口径小于22mm,光学总长为48.6mm。
本发明具有以下有益效果:
本发明基于相邻孔径交叉传递的极大视场复眼多光谱相机能够实现大视场上物体的多光谱成像,视场可达到120度以上。除了输出多光谱图像,该相机还可以实现图像超分辨率重构、扩展景深以及3D成像。
附图说明
图1是滤光片排布模式图。
图2是基于相邻孔径交叉传递的大视场复眼多光谱相机结构示意图。
图3是基于相邻孔径交叉传递的大视场复眼多光谱相机系统各部分组成详图。
图4是基于相邻孔径交叉传递的大视场复眼多光谱相机功能图。
图中附图标记为:1-第一子系统,11-支撑球壳,12-阶梯孔,13-微透镜,14-滤光片,2-第二子系统,21-第一透镜,22-第二透镜,23-第三透镜,24-第四透镜,25-第五透镜,26-第六透镜,27-第七透镜,3-第三子系统,31-图像传感器。
具体实施方式
以下结合附图及实施例对本发明做进一步的描述。
本发明基于相邻孔径交叉传递的大视场复眼多光谱相机系统设计主要涉及两个问题:一是通过模仿自然界中生物复眼结构进行大视场成像;一是通过相邻孔径交叉传递的工作模式对大视场上的目标进行多光谱成像。这两个问题通过两种方式解决却又相互联系,组成一套能够进行大视场成像的多光谱相机系统。
图1是该大视场多光谱相机相邻孔径交叉传递模式的示意图。图中每个小圆代表一个孔径,每种图示代表一种波段的滤光片,共λ06七个波段。七个波段孔径以其中一个为中心成六边形排列,组成一个单元,再以其余周边六个为中心,每个四周都排列有六个不同波段的孔径,依次按这种方式分布开来。这个分布满足无论以哪个孔径为中心,其周边都有六个不同波段的孔径与其组成一个单元,每个单元相互交叉分布。如图1中是以λ0为中心的一个单元,周边λ1、λ2、λ3、λ4、λ5、λ6以六边形排列。若以周边的λ1为中心,图中所标示出单元的中心λ0以及λ6、λ2成为新单元的周边,和另外的λ3、λ4、λ5共同组成新单元。
图2为本发明大视场多光谱相机系统结构示意图。该相机系统包含三个子系统:第一子系统1为带有不同滤光片的球面微透镜阵列、第二子系统2为光学变换子系统、第三子系统3为带有图像传感器的数据处理单元。该大视场多光谱相机的结构和果蝇复眼结构类似,果蝇复眼也包含三个部分:一个小的镜头、一个晶锥和一个带有感光细胞的导波杆。从而该相机可以具有果蝇复眼的一些优点,比如可以获取较大的视场。该大视场多光谱相机中的球面透镜阵列按照图1中相邻孔径交叉传递模式分布,每个单元中的七个孔径可以同时捕获同一场景中的同一物体的图像和光谱信息。配合适当的算法即可提取出大视场范围内的多光谱图像。
图3给出了基于相邻孔径交叉传递的大视场复眼多光谱相机的详细组成。第一子系统1由三个部分组成,带有六边形排列孔径的支撑球壳11,微透镜阵列,滤光片阵列。支撑球壳11是一个带有六边形排列阶梯孔的树脂或金属半球壳,可以通过3D打印或者机械加工制作。支撑球壳11除了起到支撑透镜的作用外还可以起到孔径光阑的作用以相邻孔径间的串扰。微透镜阵列中的每个透镜13安装在支撑球壳11的阶梯孔12内。在每个透镜下方各放置一片透过波段不同的滤光片14,形成滤光片阵列。第二子系统2为光学变换子系统包含7块镜片分别为第一透镜21,第二透镜22,第三透镜23,第四透镜24,第五透镜25,第六透镜26,第七透镜27,第二子系统2是一个中间转换系统,把透镜阵列所成的焦曲面转换为焦平面。典型第二子系统2的焦距为3mm,最大视场为120度,相对孔径约为1/3,最大口径小于22mm,光学总长为48.6mm。第三子系统3包括图像传感器31与数字电路驱动,图像传感器31可以为CMOS或CCD,数字处理电路驱动CMOS或CCD完成图像采集并进行前期图像处理。图4给出了该大视场复眼多光谱相机所能提供的功能图,较之普通多光谱相机,该大视场复眼多光谱相机不仅扩大了视场、增加了景深,而且还获得了提取深度信息和三维成像的新功能。
显然,上述实施例仅仅是为清楚地说明所作的举例,而并非对实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引伸出的显而易见的变化或变动仍处于本发明创造的保护范围之中。

Claims (6)

1.一种基于相邻孔径交叉传递的极大视场复眼多光谱相机,包括依次设置的透镜阵列、光学变换系统及带有图像传感器的数据处理单元;其特征在于:
所述透镜阵列为带有不同滤光片的曲面透镜阵列;
所述曲面透镜阵列包括支撑球壳、微透镜和可透过不同波长的滤光片;
所述支撑球壳为半球壳,所述半球壳壳体上设置有阶梯孔阵列;
所述微透镜安装在所述阶梯孔内,所述微透镜下方各放置一片可透过不同波长的滤光片;
每个阶梯孔内的微透镜和滤光片构成一个成像孔径,任一成像孔径的滤光片与其周边相邻的所有成像孔径的滤光片的波长均不相同;
所述光学变换系统将曲面透镜所成的像变换至带有图像传感器的数据处理单元进行接收处理。
2.根据权利要求1所述的基于相邻孔径交叉传递的极大视场复眼多光谱相机,其特征在于:所述阶梯孔阵列为蜂窝状六边形排列。
3.根据权利要求1所述的基于相邻孔径交叉传递的极大视场复眼多光谱相机,其特征在于:所述支撑球壳通过3D打印或五轴数控机床制作。
4.根据权利要求1所述的基于相邻孔径交叉传递的极大视场复眼多光谱相机,其特征在于:所述光学变换系统包括基于远心视光路设计的七个透镜光学结构。
5.根据权利要求1所述的基于相邻孔径交叉传递的极大视场复眼多光谱相机,其特征在于:所述光学变换系统采用一片曲面非均匀厚度的或者渐变折射率的透镜。
6.根据权利要求4或5所述的基于相邻孔径交叉传递的极大视场复眼多光谱相机,其特征在于:所述光学变换系统的焦距为3mm,最大视场为120度,相对孔径约为1/3,最大口径小于22mm,光学总长为48.6mm。
CN201611250237.0A 2016-12-29 2016-12-29 基于相邻孔径交叉传递的极大视场复眼多光谱相机 Active CN106813777B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611250237.0A CN106813777B (zh) 2016-12-29 2016-12-29 基于相邻孔径交叉传递的极大视场复眼多光谱相机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611250237.0A CN106813777B (zh) 2016-12-29 2016-12-29 基于相邻孔径交叉传递的极大视场复眼多光谱相机

Publications (2)

Publication Number Publication Date
CN106813777A true CN106813777A (zh) 2017-06-09
CN106813777B CN106813777B (zh) 2018-11-02

Family

ID=59109264

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611250237.0A Active CN106813777B (zh) 2016-12-29 2016-12-29 基于相邻孔径交叉传递的极大视场复眼多光谱相机

Country Status (1)

Country Link
CN (1) CN106813777B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110595625A (zh) * 2019-09-17 2019-12-20 北京理工大学 一种“十”字型五孔径视场部分重叠仿生热成像系统
CN110595624A (zh) * 2019-09-17 2019-12-20 北京理工大学 一种“十”字型四孔径视场部分重叠仿生热成像系统
CN111076828A (zh) * 2018-10-18 2020-04-28 中国科学院长春光学精密机械与物理研究所 一种基于仿生光学的大视场凝视型红外成像系统
CN112433328A (zh) * 2020-11-09 2021-03-02 中国科学院西安光学精密机械研究所 一种基于仿生复眼的大视场星敏感器
CN112595418A (zh) * 2020-12-16 2021-04-02 中国科学院西安光学精密机械研究所 一种基于仿生曲面复眼的超大视场偏振相机
CN116698189A (zh) * 2023-06-06 2023-09-05 北京理工大学长三角研究院(嘉兴) 一种感算一体仿生复眼传感器及构建方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005024975A (ja) * 2003-07-03 2005-01-27 Toshiba Corp Idカード取扱システムと移動体とidカード
CN1619295A (zh) * 2004-12-10 2005-05-25 南京农业大学 猪肉颜色分级仪
CN103747231A (zh) * 2013-12-20 2014-04-23 中国科学院西安光学精密机械研究所 一种大视场曲面复眼立体摄像装置
CN106067841A (zh) * 2016-07-28 2016-11-02 中南民族大学 基于复眼结构的自适应可见光接收系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005024975A (ja) * 2003-07-03 2005-01-27 Toshiba Corp Idカード取扱システムと移動体とidカード
CN1619295A (zh) * 2004-12-10 2005-05-25 南京农业大学 猪肉颜色分级仪
CN103747231A (zh) * 2013-12-20 2014-04-23 中国科学院西安光学精密机械研究所 一种大视场曲面复眼立体摄像装置
CN106067841A (zh) * 2016-07-28 2016-11-02 中南民族大学 基于复眼结构的自适应可见光接收系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
金建等: "基于人造复眼的多谱成像系统", 《光学精密工程》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111076828A (zh) * 2018-10-18 2020-04-28 中国科学院长春光学精密机械与物理研究所 一种基于仿生光学的大视场凝视型红外成像系统
CN110595625A (zh) * 2019-09-17 2019-12-20 北京理工大学 一种“十”字型五孔径视场部分重叠仿生热成像系统
CN110595624A (zh) * 2019-09-17 2019-12-20 北京理工大学 一种“十”字型四孔径视场部分重叠仿生热成像系统
CN112433328A (zh) * 2020-11-09 2021-03-02 中国科学院西安光学精密机械研究所 一种基于仿生复眼的大视场星敏感器
CN112433328B (zh) * 2020-11-09 2022-02-11 中国科学院西安光学精密机械研究所 一种基于仿生复眼的大视场星敏感器
CN112595418A (zh) * 2020-12-16 2021-04-02 中国科学院西安光学精密机械研究所 一种基于仿生曲面复眼的超大视场偏振相机
CN112595418B (zh) * 2020-12-16 2022-05-06 中国科学院西安光学精密机械研究所 一种基于仿生曲面复眼的超大视场偏振相机
CN116698189A (zh) * 2023-06-06 2023-09-05 北京理工大学长三角研究院(嘉兴) 一种感算一体仿生复眼传感器及构建方法
CN116698189B (zh) * 2023-06-06 2024-03-29 北京理工大学长三角研究院(嘉兴) 一种感算一体仿生复眼传感器及构建方法

Also Published As

Publication number Publication date
CN106813777B (zh) 2018-11-02

Similar Documents

Publication Publication Date Title
CN106813777A (zh) 基于相邻孔径交叉传递的极大视场复眼多光谱相机
EP3001867B1 (en) Smartphone configured to perform biometric recognition of an iris pattern and corresponding facial features of a subject
CN103460024B (zh) 摄像装置和摄像系统
CN105210361B (zh) 全光成像设备
US9860443B2 (en) Monocentric lens designs and associated imaging systems having wide field of view and high resolution
CN105574483B (zh) 一种移动终端前置和人脸/虹膜识别一体化光电成像系统
KR100914011B1 (ko) 고품질 화상을 양호하게 재생할 수 있는 화상 입력 장치,화상 입력 방법 및 이 화상 입력 장치를 구비한 전자 기기
US9432591B2 (en) Multiscale optical system having dynamic camera settings
CN111182191B (zh) 基于计算像差补偿的宽视场高分辨率摄像设备及方法
DE102009049387B4 (de) Vorrichtung, Bildverarbeitungsvorrichtung und Verfahren zur optischen Abbildung
JP4994556B2 (ja) 高明瞭度レンズシステム
CN102685377B (zh) 摄像装置
CN107957621A (zh) 光学取像系统组、取像装置及电子装置
CN105609516B (zh) 图像传感器及输出方法、相位对焦方法、成像装置和终端
CN102244791A (zh) 图像处理设备、图像处理方法和程序
CN105651384A (zh) 一种全光信息采集系统
CN102244789A (zh) 成像设备
CN101960861A (zh) 具有多视角图像捕捉的传感器
CN108200324B (zh) 一种基于可变焦距镜头的成像系统及成像方法
CN109477962A (zh) 虹膜图像获取系统
CN107991838A (zh) 自适应三维立体成像系统
CN106569323B (zh) 摄像装置用光学系统
CN111182238B (zh) 基于扫描光场的高分辨率移动电子设备的成像装置及方法
CN105988215A (zh) 一种多光谱模组成像系统及其制造方法和应用
CN105258796A (zh) 一种共光路小型化多光谱成像系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant