CN106651962A - 一种基于投影仪‑相机系统的自适应光补偿方法 - Google Patents

一种基于投影仪‑相机系统的自适应光补偿方法 Download PDF

Info

Publication number
CN106651962A
CN106651962A CN201611147980.3A CN201611147980A CN106651962A CN 106651962 A CN106651962 A CN 106651962A CN 201611147980 A CN201611147980 A CN 201611147980A CN 106651962 A CN106651962 A CN 106651962A
Authority
CN
China
Prior art keywords
camera
grating
depth
stripe
projector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611147980.3A
Other languages
English (en)
Inventor
吕辰刚
高爽
方干
鲍志强
张帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN201611147980.3A priority Critical patent/CN106651962A/zh
Publication of CN106651962A publication Critical patent/CN106651962A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Input (AREA)

Abstract

本发明提供一种基于投影仪‑相机系统的自适应光补偿方法,包括:)将投影仪和相机放置在幕布的同侧,并且为非同轴配置,幕布即作为参考平面;生成正弦光栅条纹作为参考条纹通过投影仪投射在三维物体表面,参考条纹受到深度的调制会发生条纹畸变,通过CCD相机获取参考光栅条纹和畸变光栅条纹;推导出物体深度和条纹相位变化的关系;利用傅里叶变换在频域中提取畸变光栅和参考光栅的基频分量,再利用傅里叶逆变换将提取的基频分量转换回时域,得到折叠在‑π到π区间的相位,通过相位解压算法将不连续分布的折叠相位变成在空间中连续分布的解压相位;将解压相位代入相位和深度的转换公式中,得到每一个像素点的深度;将相机采集的图像进行处理。

Description

一种基于投影仪-相机系统的自适应光补偿方法
技术领域
本发明涉及一种基于投影仪-相机系统的自适应光补偿方法,属于自适应光学领域;
背景技术
机器视觉在质量检测,过程控制,三维重构等方面,扮演着越来越重要的角色。一个典型的机器视觉系统包括图像捕捉、光源系统、图像数字化模块、数字图像处理模块、智能判断决策模块和机械控制执行模块,其中的关键技术是对获取的图像进行相应的分析和处理,所以图像的质量直接决定着机器视觉决策的准确性,而获取图像的质量又取决于图像采集设备和照明设备。
但是,由于电荷耦合器件和数模转换的限制,大部分相机都有一个有限的8-bit采集范围。当被测的场景有高反射率和低反射率的不同部分时,采集得到的图像只有8-bit的像素信息,如果增加曝光使得低反射率的部分清晰,而高反射率的部分则变得饱和;反之,如果减少曝光使得高反射率的部分清晰,而低反射率的部分则变得黑暗,因此对于高反射率或者低反射率的部分会出现极亮或极暗的区域,造成细节信息的丢失,对后续的决策和执行造成极其不利的影响。基于此,自适应光补偿技术在机器视觉的应用中显得尤为重要。
发明内容
本发明旨在解决在机器视觉中对于高对比度的场景采集出现极亮或极暗区域,而造成细节信息丢失的情况,提出一种基于投影仪-相机系统的自适应光补偿方法。本发明的技术方案如下:
一种基于投影仪-相机系统的自适应光补偿方法,包括下列步骤:
(1)将投影仪和相机放置在幕布的同侧,并且为非同轴配置,幕布即作为参考平面;
(2)计算机生成的正弦光栅条纹作为参考条纹通过投影仪投射在三维物体表面,参考条纹受到深度的调制会发生条纹畸变,通过CCD相机获取参考光栅条纹和畸变光栅条纹;
(3)结合傅里叶轮廓法,利用三角形相似原理推导出物体深度和条纹相位变化的关系;
(4)利用傅里叶变换在频域中提取畸变光栅和参考光栅的基频分量,再利用傅里叶逆变换将提取的基频分量转换回时域,得到折叠在-π到π区间的相位,通过相位解压算法将不连续分布的折叠相位变成在空间中连续分布的解压相位;
(5)将解压相位代入相位和深度的转换公式中,得到每一个像素点的深度,即建立投影仪和相机之间的通信,作为后续迭代算法的参数;
(6)将相机采集的图像作为处理前的图像,通过迭代算法将处理后的图像用投影仪投射以覆盖在三维物体表面,以突出需要的部分,遮蔽不需要的部分;
(7)将步骤(6)重复执行多次,直到CCD相机获取的图像消除饱和部分,补偿黑暗部分,恢复丢失的细节信息。
本发明与现有技术相比的有益效果是:
1>解决了采集高对比度场景时细节信息丢失的弊端,避免了外界光源对机器视觉决策和分析造成的不利影响;
2>本发明强调了投影仪在投影仪-相机系统中的补偿作用,突出需要的部分,遮盖不需要的部分,比现有的软件补偿处理速度快,在解决相机范围限制的前提下更适用于工业生产;
4>光源的自适应补偿装置只是在机器视觉的器件中添加数字投影仪,可满足低成本系统构建的要求。
附图说明
图1(a)和(b)分别为参考光栅图形和畸变光栅图形。
图2(a)和(b)分别为不连续分布的折叠相位和连续分布的解压相位。
图3本发明中利用傅里叶轮廓法得到的深度轮廓图。
图4(a)和(b)为本发明在强照明下的饱和图像和利用自适应光补偿方法的补偿结果图。
具体实施方式
下面结合附图和具体实例对本发明做进一步说明;
本发明的自适应光补偿中,投影仪和相机采用非同轴配置,并且为了后续计算的方便,将投影仪和相机放置在同一水平线上。投影仪和相机之间的距离为d,投影仪到参考平面的距离为L,观测点O的深度为h。利用三角形相似原理,有
代表相位的变化,有
将式(2)代入式(1)中,得到
图1所示为本发明中的参考光栅图形和畸变光栅图形。将计算机生成的正弦光栅条纹,如图1(a)所示,通过投影仪投射在三维物体表面,参考条纹受到物体深度的调制会发生条纹畸变,如图1(b)所示,通过CCD相机获取参考光栅条纹和畸变光栅条纹。
图2所示为本发明中不连续分布的折叠相位和连续分布的解压相位。参考光栅经过傅里叶变换在频域中提取出基频分量,再经过傅里叶逆变换将基频转换回时域,得到对畸变光栅进行同样的操作,得到则折叠相位为
其中,的共轭。由于反正切运算,相位被折叠在[-π,π]区间,折叠相位分布不连续,如图2(a)所示。利用相位解压算法,得到连续分布的解压相位,如图2(b)所示。
图3所示为本发明中利用傅里叶轮廓法得到的深度轮廓图,即投影仪像素和相机像素建立通信的过程。由于投影仪和相机建立的通信意味着投影仪上的每一点都映射到相机的对应点,因此通信是建立在三维物体深度的基础上。
图4所示为本发明在强照明下的饱和图像和利用自适应光补偿方法的补偿结果图。在强照明条件下,高反射率区域超过相机的采集范围而呈现出高亮状态,丢失细节信息,如图4(a)所示。利用迭代算法
In+1(x,y)=In(x,y)+h(x,y)(Ln(x,y)-pn(x,y)) (5)
其中,I(x,y)为CCD相机采集物体表面的图像,L(x,y)为投影仪投射在物体表面的图像,h(x,y)为在坐标(x,y)处的物体深度。经过连续的迭代,直到相机获取的图像达到要求,如图4(b)所示。

Claims (1)

1.一种基于投影仪-相机系统的自适应光补偿方法,包括下列步骤:
(1)将投影仪和相机放置在幕布的同侧,并且为非同轴配置,幕布即作为参考平面。
(2)计算机生成的正弦光栅条纹作为参考条纹通过投影仪投射在三维物体表面,参考条纹受到深度的调制会发生条纹畸变,通过CCD相机获取参考光栅条纹和畸变光栅条纹;
(3)结合傅里叶轮廓法,利用三角形相似原理推导出物体深度和条纹相位变化的关系;
(4)利用傅里叶变换在频域中提取畸变光栅和参考光栅的基频分量,再利用傅里叶逆变换将提取的基频分量转换回时域,得到折叠在-π到π区间的相位,通过相位解压算法将不连续分布的折叠相位变成在空间中连续分布的解压相位;
(5)将解压相位代入相位和深度的转换公式中,得到每一个像素点的深度,即建立投影仪和相机之间的通信,作为后续迭代算法的参数;
(6)将相机采集的图像作为处理前的图像,通过迭代算法将处理后的图像用投影仪投射以覆盖在三维物体表面,以突出需要的部分,遮蔽不需要的部分;
(7)将步骤(6)重复执行多次,直到CCD相机获取的图像消除饱和部分,补偿黑暗部分,恢复丢失的细节信息。
CN201611147980.3A 2016-12-13 2016-12-13 一种基于投影仪‑相机系统的自适应光补偿方法 Pending CN106651962A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611147980.3A CN106651962A (zh) 2016-12-13 2016-12-13 一种基于投影仪‑相机系统的自适应光补偿方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611147980.3A CN106651962A (zh) 2016-12-13 2016-12-13 一种基于投影仪‑相机系统的自适应光补偿方法

Publications (1)

Publication Number Publication Date
CN106651962A true CN106651962A (zh) 2017-05-10

Family

ID=58825226

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611147980.3A Pending CN106651962A (zh) 2016-12-13 2016-12-13 一种基于投影仪‑相机系统的自适应光补偿方法

Country Status (1)

Country Link
CN (1) CN106651962A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107300413A (zh) * 2017-07-13 2017-10-27 天津大学 基于条纹投影的远程低频振动测量方法
CN107764389A (zh) * 2017-09-08 2018-03-06 天津大学 基于条纹投影法的一种低速摄像机测量较高频振动的方法
CN107786816A (zh) * 2017-09-14 2018-03-09 天津大学 基于曝光补偿的自适应投影方法
CN109540038A (zh) * 2018-09-12 2019-03-29 天津大学 基于彩色多通道双频相移的机器视觉自适应补光测量方法
CN115388808A (zh) * 2022-08-29 2022-11-25 易思维(杭州)科技有限公司 一种用于结构光传感器标定的dlp投影仪参数自调节方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105066906A (zh) * 2015-07-24 2015-11-18 南京理工大学 一种快速高动态范围三维测量方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105066906A (zh) * 2015-07-24 2015-11-18 南京理工大学 一种快速高动态范围三维测量方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
VARUN AV ET AL: "Adaptive lighting for machine vision applications", 《2011 CANADIAN CONFERENCE ON COMPUTER AND ROBOT VISION》 *
朱欢敏: "三维指纹重建影响因素分析及其特征提取方法研究", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107300413A (zh) * 2017-07-13 2017-10-27 天津大学 基于条纹投影的远程低频振动测量方法
CN107764389A (zh) * 2017-09-08 2018-03-06 天津大学 基于条纹投影法的一种低速摄像机测量较高频振动的方法
CN107786816A (zh) * 2017-09-14 2018-03-09 天津大学 基于曝光补偿的自适应投影方法
CN109540038A (zh) * 2018-09-12 2019-03-29 天津大学 基于彩色多通道双频相移的机器视觉自适应补光测量方法
CN115388808A (zh) * 2022-08-29 2022-11-25 易思维(杭州)科技有限公司 一种用于结构光传感器标定的dlp投影仪参数自调节方法
CN115388808B (zh) * 2022-08-29 2024-04-09 易思维(杭州)科技股份有限公司 一种用于结构光传感器标定的dlp投影仪参数自调节方法

Similar Documents

Publication Publication Date Title
CN106651962A (zh) 一种基于投影仪‑相机系统的自适应光补偿方法
CN110310237B (zh) 去除图像摩尔纹、显示面板子像素点亮度测量、Mura缺陷修复的方法及系统
RU2716843C1 (ru) Цифровая коррекция аберраций оптической системы
US10194138B2 (en) Structured light encoding-based vertical depth perception apparatus
CN101742123B (zh) 图像处理设备和方法
KR102563750B1 (ko) 영상 블러링 제거 방법 및 장치
CN111080724A (zh) 一种红外和可见光的融合方法
CN110675346A (zh) 适用于Kinect的图像采集与深度图增强方法及装置
CN103974011B (zh) 一种投影图像模糊消除方法
CN102369722B (zh) 摄像装置以及摄像方法、和用于所述摄像装置的图像处理方法
JP6233869B2 (ja) 画像処理装置、画像処理装置の制御方法およびプログラム
CN104580937B (zh) 一种红外成像系统条纹噪声去除方法
Joze et al. Imagepairs: Realistic super resolution dataset via beam splitter camera rig
CN113160339A (zh) 一种基于沙姆定律的投影仪标定方法
Wu et al. A robust and fast anti-ghosting algorithm for high dynamic range imaging
Koninckx et al. Scene-adapted structured light
CN104111038A (zh) 利用相位融合算法修复饱和产生的相位误差的方法
CN108564540A (zh) 去除图像中镜片反光的图像处理方法、装置和终端设备
CN106996754A (zh) 一种基于正弦光栅投影的自适应照明优化方法
CN105791636A (zh) 一种视频处理系统
CN105701809A (zh) 一种基于线阵相机扫描的平场校正方法
CN109598736A (zh) 深度图像与彩色图像的配准方法及装置
CN104749801B (zh) 高精度自动光学检测方法和系统
CN107339953B (zh) 一种适用于多反射场景的自适应照明优化方法
US9204130B2 (en) Method and system for creating a three dimensional representation of an object

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170510