CN106303174B - 一种光场相机中微透镜阵列倾斜的数字化调整方法 - Google Patents

一种光场相机中微透镜阵列倾斜的数字化调整方法 Download PDF

Info

Publication number
CN106303174B
CN106303174B CN201610663202.3A CN201610663202A CN106303174B CN 106303174 B CN106303174 B CN 106303174B CN 201610663202 A CN201610663202 A CN 201610663202A CN 106303174 B CN106303174 B CN 106303174B
Authority
CN
China
Prior art keywords
microlens array
light
field camera
size
different zones
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610663202.3A
Other languages
English (en)
Other versions
CN106303174A (zh
Inventor
栾银森
汤国茂
许冰
杨平
何星
王帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Optics and Electronics of CAS
Original Assignee
Institute of Optics and Electronics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Optics and Electronics of CAS filed Critical Institute of Optics and Electronics of CAS
Priority to CN201610663202.3A priority Critical patent/CN106303174B/zh
Publication of CN106303174A publication Critical patent/CN106303174A/zh
Application granted granted Critical
Publication of CN106303174B publication Critical patent/CN106303174B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种光场相机中微透镜阵列倾斜的数字化调整方法，该方法首先使用光场相机对均匀白色面光源成像，生成白图像，然后利用图像形态学中连通区域的搜索和计量方法，对白图像中不同区域的光斑进行处理并计算光斑的平均大小，根据不同区域光斑尺寸的大小关系判断微透镜阵列是否相对成像芯片靶面发生倾斜，为微透镜阵列的倾斜误差提供一个数字化指标，然后根据这个指标对微透镜阵列进行调整，减小甚至消除光场相机中微透镜阵列的倾斜误差，降低光场相机装配难度，提高光场相机的成像质量。

Description

一种光场相机中微透镜阵列倾斜的数字化调整方法
技术领域
本发明涉及光场相机微透镜阵列的调整，尤其涉及一种光场相机中微透镜阵列倾斜的数字化调整方法。
背景技术
目前，光场相机因其独特性广受科研工作者和消费者的青睐。相比传统相机，光场相机同时记录了光线的方向信息和强度信息，因而得名光场相机。从成像的角度说光场相机记录了光场，那么在事后处理中光场相机就可以实现事后对焦、多视角提取和深度估计等功能。
光场相机主要包括三个部分：主镜、微透镜阵列和感光芯片。其中微透镜阵是光场相机的核心部件，微透镜阵列上一般排布着数万个微透，每个微透镜阵列的尺寸为几十微米。微透镜阵列上的微透镜小而密，其与感光芯片之间距离的均匀性直接严重影响着光场相机性能。所以在光场相机的装配中，微透镜阵列与感光芯片的耦合是光场相机的关键技术之一。另外，随着光场相机技术的发展和对高分辨率光场成像的追求，大靶面感光芯片不断引入光场相机，微透镜阵列的尺寸也相应的不断增大。因此，减小或者消除微透镜阵列与感光芯片之间倾斜误差也成为了在光场相机装配的一个难点。值得一提的是，微透镜阵列的倾斜误差会直接造成原始图像采样分辨率的下降，采用图像处理的方法很难对微透镜阵列倾斜误差带来的影响进行校正，所以只有在装配光场相机时，采用一定措施来确保微透镜阵列与感光芯片之间距离的均匀性。
目前，在光场相机中装配微透镜阵列时，一般采用人工目视的方式来观察感光芯片采集到的光斑大小是否一致来判断微透镜阵列与感光芯片之间的距离是否均匀。随着微透镜阵列整体尺寸的不断增大，人工目视的方式来确定透镜阵列与感光芯片之间的距离是否均匀的难度越来越大，并且人工目视的方式难以估量倾斜误差，对倾斜误差没有定量的描述。此外，人工目视的方式不仅耗时耗力，更阻碍着微透镜阵列自动化装调的实现。
为数字化微透镜阵列的倾斜误差，为微透镜阵列的自动化装调扫除障碍，可以利用图像形态学中连通区域的搜索和计量方法，将微透镜的子图像视为相互独立的连通区域，通过搜索白图像中不同区域的连通区域来定位微透镜的子图像，然后计算其像素个数来表示光斑尺寸，根据不同区域光斑尺寸的大小关系判断微透镜阵列相对感光芯片靶面是否发生倾斜，最后根据倾斜量对微透镜阵列进行调整，不同区域光斑尺寸的大小相等或者相近到可容忍范围。
本发明涉及的方法，在量化微透镜阵列倾斜误差基础上，提出了微透镜阵列倾斜的数字化调整方法，降低了光场相机装配的难度。
发明内容
本发明要解决的技术问题是：目前，在光场相机中装配微透镜阵列时，一般采用人工目视的方式来观察感光芯片采集到的光斑大小是否一致来判断微透镜阵列与感光芯片之间的距离是否均匀。随着微透镜阵列整体尺寸的不断增大，人工目视的方式来确定透镜阵列与感光芯片之间的距离是否均匀的难度越来越大，并且人工目视的方式难以估量倾斜误差具体值，对倾斜误差没有定量的描述。此外，人工目视的方式不仅耗时耗力，更阻碍着微透镜阵列自动化装调的实现。所以，在光场相机的装配中，迫切需要一种数字化的调整方法，为微透镜阵列的自动化装调提供有利条件。
本发明解决其技术问题所采用的技术方案是：一种光场相机中微透镜阵列倾斜的数字化调整方法，包括以下步骤：
步骤(1)、使用光场相机对均匀白色光源成像，生成白图像；
步骤(2)、利用图像形态学中连通区域的搜索和计量算法，对白图像中不同区域的光斑尺寸进行计量；
步骤(3)、根据不同区域光斑平均尺寸的大小是否相等或者相近，判断微透镜阵列相对感光芯片靶面是否发生倾斜；
步骤(4)、调整微透镜阵列直到不同区域的光斑尺寸的大小相等或相近。
更进一步的，所述步骤(1)中所述光场相机的微透镜阵列需要满足所有微透镜焦距相等，或者微透镜焦距不相等但是微透镜是均匀排布的。
更进一步的，所述步骤(2)中所述对白图像连通区域的搜索和计量是指分别计算白图像中不同区域内光斑的平均尺寸，这里的不同区域是指分布在白图像上位置不同。
更进一步的，所述步骤(3)中所述判断微透镜阵列相对感光芯片靶面是否发生倾斜的依据是，当微透镜阵列相对感光芯片靶面发生倾斜时，会导致微透镜阵列上不同区域微透镜的离焦量不同，从而白图像中不同区域的光斑大小不同。
本发明的原理是：一种光场相机中微透镜阵列倾斜的数字化调整方法，将光场相机的图像阵列视为一个个单独的微透镜子图像，利用图像形态学中连通区域的搜索和计量方法，自动搜素和计量微透镜的子图像，然后计算子图像内其像素个数，得到光斑大小，从而判断微透镜阵列是否存在倾斜误差，如果存在调整微透镜阵列直到消除误差或者减小误差到可容忍的范围内。
本发明有如下优点：本发明涉及的方法利用图像形态学的相关算法，自动搜素和计量微透镜的子图像，从而获取微透镜阵列倾斜误差的数字化指标，进而得到微透镜阵列倾斜的数字化调整方法，摆脱了人工目视装调微透镜阵列时对操作人员经验的依赖，有利于实现微透镜阵列自动化装调，为光场相机整体的自动化装配打下基础。
附图说明
图1为本发明的基本流程图。
图2为光场相机白图像原始图。
图3为从白图像随机切割出的三块面积相等的区域A、B和C。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白，结合本发明中涉及的方法，采用简化模型，对基于数码形态学的光场相机自动标定方法的原理进行介绍，以此对本发明进一步详细说明。
本发明是一种光场相机中微透镜阵列倾斜的数字化调整方法，将光场相机的图像阵列视为一个个单独的微透镜子图像，利用图像形态学中连通区域的搜索和计量方法，自动搜素和计量微透镜的子图像，然后计算子图像内其像素个数，得到光斑大小，获取微透镜阵列倾斜误差的数字化指标，从而判断微透镜阵列是否存在倾斜误差，如果存在调整微透镜阵列直到消除误差或者减小误差到可容忍的范围内。最终得到微透镜阵列倾斜的数字化调整方法，降低了光场相机装配的难度。
下面对一幅装配过程中采集的光场相机白图像进行微透镜阵列倾斜的数字化调整方法的验证。
如图1所示，一种光场相机中微透镜阵列倾斜的数字化调整方法，具体包括如下步骤：
(1)使用光场相机对均匀白色面光源成像，得到如图2所示的原始白图像。在图2中光场相机的白图像由数万个单独的微透镜子图像构成，人工判断微透镜阵列是否发生倾斜难度很大，难以为微透镜阵列的调整提供有效依据。
(2)在白图像中随机切割出几个区域，同时要避免所选区域关于白图像中心点对称，造成微透镜倾斜误差存在对称特例时无法检测的情况。如图2所示，在白图像上选取三个距离较远且在白图像上分布均匀的三个区域(A、B和C)作为待计量区域。利用图像形态学中连通区域的搜索和计量算法，分别自动搜索A、B和C区域中的连通区域并计量每个连通区域的面积，然后去除不完整的光斑，最后计算A、B和C区域中连通区域(光斑)的平均面积大小SA、SB和SC；
(3)判断微透镜阵列相对感光芯片靶面是否发生倾斜，具体为首先计算A、B和C区域连通区域(光斑)的面积的平均值S0：
S0＝(SA+SB+SC)/3 (1)
然后计算方差V：
V＝(SA–S0)2+(SB–S0)2+(SC–S0)2 (2)
当不同区域光斑平均尺寸的大小相等或者相近，即V≤V0时，认为微透镜阵列与感光芯片之间的距离是均匀的，不存在倾斜误差，其中V0为光场相机可容忍的倾斜误差阈值；
(4)当不同区域光斑平均尺寸的大小不相等或者不相近，即V＞V0时，认为微透镜阵列与感光芯片之间的距离是不均匀的，存在倾斜误差。此时，需要调整微透镜阵列直到不同区域的光斑尺寸的大小相等或相近，即V≤V0。
实验表明，A、B和C区域中连通区域(光斑)的平均面积的方差可以作为微透镜阵列倾斜的数字化指标，摆脱对人工目视的依赖，为微透镜阵列倾斜误差的自动化调整提供条件。该实验表明，本发明了得到微透镜阵列倾斜的数字化调整方法，降低了光场相机装配的难度。
以上所述，仅为本发明中的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉该技术的人在本发明所揭露的技术范围内，可理解想到的变换或替换，都应涵盖在本发明的权利要求书的保护范围之内。

Claims (1)

1.一种光场相机中微透镜阵列倾斜的数字化调整方法，其特征在于，将光场相机的图像阵列视为一个个单独的微透镜子图像，利用图像形态学中连通区域的搜索和计量方法，自动搜素和计量微透镜的子图像，然后计算子图像内其像素个数，得到光斑大小，从而判断微透镜阵列是否存在倾斜误差，如果存在调整微透镜阵列直到消除误差或者减小误差到可容忍的范围内，包括以下步骤：
步骤(1)、使用光场相机对均匀白色光源成像，生成白图像；
步骤(2)、利用图像形态学中连通区域的搜索和计量算法，对白图像中不同区域的光斑尺寸进行计量；
步骤(3)、根据不同区域光斑平均尺寸的大小是否相等或者相近，判断微透镜阵列相对感光芯片靶面是否发生倾斜；
步骤(4)、调整微透镜阵列直到不同区域的光斑尺寸的大小相等或相近；
其中，步骤(1)中所述光场相机的微透镜阵列需要满足所有微透镜焦距相等，或者微透镜焦距不相等但是微透镜是均匀排布的；
步骤(2)中所述对白图像连通区域的搜索和计量是指分别计算白图像中不同区域内光斑的平均尺寸，这里的不同区域是指分布在白图像上位置不同；
步骤(3)中所述判断微透镜阵列相对感光芯片靶面是否发生倾斜的依据是，当微透镜阵列相对感光芯片靶面发生倾斜时，会导致微透镜阵列上不同区域微透镜的离焦量不同，从而白图像中不同区域的光斑大小不同；
判断微透镜阵列相对感光芯片靶面是否发生倾斜，具体为首先计算A、B和C区域连通区域光斑的面积的平均值S0：
S0＝(SA+SB+SC)/3 (1)
然后计算方差V：
V＝(SA–S0)2+(SB–S0)2+(SC–S0)2 (2)
当不同区域光斑平均尺寸的大小相等或者相近，即V≤V0时，认为微透镜阵列与感光芯片之间的距离是均匀的，不存在倾斜误差，其中V0为光场相机可容忍的倾斜误差阈值；
步骤(4)中，当不同区域光斑平均尺寸的大小不相等或者不相近，即V＞V0时，认为微透镜阵列与感光芯片之间的距离是不均匀的，存在倾斜误差；此时，需要调整微透镜阵列直到不同区域的光斑尺寸的大小相等或相近，即V≤V0。
CN201610663202.3A 2016-08-12 2016-08-12 一种光场相机中微透镜阵列倾斜的数字化调整方法 Active CN106303174B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610663202.3A CN106303174B (zh) 2016-08-12 2016-08-12 一种光场相机中微透镜阵列倾斜的数字化调整方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610663202.3A CN106303174B (zh) 2016-08-12 2016-08-12 一种光场相机中微透镜阵列倾斜的数字化调整方法

Publications (2)

Publication Number Publication Date
CN106303174A CN106303174A (zh) 2017-01-04
CN106303174B true CN106303174B (zh) 2019-08-13

Family

ID=57669912

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610663202.3A Active CN106303174B (zh) 2016-08-12 2016-08-12 一种光场相机中微透镜阵列倾斜的数字化调整方法

Country Status (1)

Country Link
CN (1) CN106303174B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108234874B (zh) * 2018-01-10 2020-07-21 南京华捷艾米软件科技有限公司 体感摄像头的成像精度的调节方法及调节装置
CN108681988B (zh) * 2018-04-17 2022-03-29 中国科学院光电技术研究所 一种基于多幅图像的鲁棒的图像分辨率增强方法
CN111147760B (zh) * 2019-12-23 2021-08-24 兴科迪智能科技(北京)有限公司 一种光场相机及其光度调整方法、装置及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050662A (zh) * 2014-05-30 2014-09-17 清华大学深圳研究生院 一种用光场相机一次成像直接获取深度图的方法
CN104613871A (zh) * 2015-02-09 2015-05-13 北京航空航天大学 一种微透镜阵列和探测器耦合位置关系的标定方法
CN105488810A (zh) * 2016-01-20 2016-04-13 东南大学 一种聚焦光场相机内外参数标定方法
CN106303175A (zh) * 2016-08-17 2017-01-04 李思嘉 一种基于单光场相机多重视角的虚拟现实三维数据采集方法
CN106296811A (zh) * 2016-08-17 2017-01-04 李思嘉 一种基于单光场相机的目标物三维重构方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050662A (zh) * 2014-05-30 2014-09-17 清华大学深圳研究生院 一种用光场相机一次成像直接获取深度图的方法
CN104613871A (zh) * 2015-02-09 2015-05-13 北京航空航天大学 一种微透镜阵列和探测器耦合位置关系的标定方法
CN105488810A (zh) * 2016-01-20 2016-04-13 东南大学 一种聚焦光场相机内外参数标定方法
CN106303175A (zh) * 2016-08-17 2017-01-04 李思嘉 一种基于单光场相机多重视角的虚拟现实三维数据采集方法
CN106296811A (zh) * 2016-08-17 2017-01-04 李思嘉 一种基于单光场相机的目标物三维重构方法

Also Published As

Publication number Publication date
CN106303174A (zh) 2017-01-04

Similar Documents

Publication Publication Date Title
JP4915859B2 (ja) 物体の距離導出装置
CN106303174B (zh) 一种光场相机中微透镜阵列倾斜的数字化调整方法
JP2014063142A (ja) 距離検出装置、撮像装置、プログラム、記録媒体および距離検出方法
US8064761B2 (en) Method to determine auto focus of a digital camera
WO2018209969A1 (zh) 深度图创建方法与系统及图像虚化方法与系统
JP5776771B2 (ja) 対応点探索装置、および距離測定装置
WO2016037562A1 (zh) 一种具有调焦及倾斜校正设计的标记及对准方法
CN108051183B (zh) 基于高斯光学的聚焦型光场相机参数标定方法
JP5369564B2 (ja) 形状測定装置
CN105573016B (zh) 一种自动对焦窗口调整方法及系统
CN107727616A (zh) 一种辅助对焦方法及装置
JP2016024052A (ja) ３次元計測システム、３次元計測方法及びプログラム
CN106888344B (zh) 摄像模组及其像面倾斜的获取方法和调整方法
CN106973199B (zh) 利用对焦距离扫描提高深度精确度的多光圈相机系统
CN105701776B (zh) 一种用于自动光学检测的镜头畸变矫正方法及系统
JP5369563B2 (ja) 形状測定装置
JP6141497B2 (ja) 測定対象物の寸法特性を特定する方法及び測定機器
CN110653016B (zh) 移液系统及其校准方法
CN110966953A (zh) 物体表面轮廓的检测方法
JP2016051167A (ja) 画像取得装置およびその制御方法
CN105093480A (zh) 一种提高光学镜头对焦精确度的方法
TWI604221B (zh) 影像景深測量方法以及應用該方法的影像擷取裝置
TW201520669A (zh) 斜軸式顯微自動對焦系統及方法
CN108431660B (zh) 范围优化的全光变焦
KR101020921B1 (ko) 회전형 카메라 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant