CN207515743U - 基于数字微镜器件的主动式高速三维视觉装置 - Google Patents

Abstract

本实用新型公开了一种基于数字微镜器件的主动式高速三维视觉装置，该装置包括PC机、雷达、控制电路、数据处理模块、电机、数字微镜模块、摄像头。PC机向控制电路下达指令，使雷达在探测到待测物体时，根据待测物体距离驱动电机，使数字微镜模块和摄像头聚焦至待测物体，数字微镜模块产生不同光栅图案，照射待测物体，经摄像头采集由不同光栅图案照射的图像，交由数据处理模块处理，恢复成三维图像，存储至本地，或在PC机显示，重复上述过程，可达成跟踪动态显示效果。较于传统三维采集装置，本实用新型利用数字微镜的高速开关特性可以高速投射光栅图案，利用雷达和电机，可以快速精准定位物体，采集速度快、范围大，图像处理速度快，灵活性高。

Description

基于数字微镜器件的主动式高速三维视觉装置

技术领域

本实用新型涉及雷达探测三维重建领域及电子技术领域，尤其涉及数字微镜器件在三维信息采集方面应用和雷达在探测方面应用的一种基于数字微镜器件的主动式高速三维视觉装置，该装置可用于大范围的主动高速三维信息数据获取,其中，使用数字微镜，无需其他光源，主动投射图案到待测物体上；使用雷达，可以主动探测物体所在，并旋转设备，进行采集。

背景技术

人们生活在三维世界中，为了能更好的表达客观世界，三维视觉技术变的很重要。在需要跟踪捕获大范围内的动态物体的三维信息时，需要能自动定位待测物体的装置跟踪待测物体，以及很高的光栅图案投射速度、图像捕获和处理速度。

传统的三维视觉装置是通过固定的LCD投影仪投射一系列的光栅图案到待测物体表面，然后通过摄像头拍摄图片，上传至PC机进行处理和显示。而传统的LCD投影仪刷新速率只有30-60fps，投影和采集速度很慢，且设备固定，只能进行一个固定距离的扫描，采集范围小。此外，摄像头采集图片需要使用PC机进行处理和显示，设备笨重，不便携。

实用新型内容

本实用新型的目的是针对现有技术的不足而提供的一种基于数字微镜器件的主动式高速三维视觉装置，首先通过雷达定位和电机驱动可以大大扩展三维视觉系统的采集范围，再通过数字微镜实现对空间光的快速调制，能够快速产生一系列的光栅图案，同时通过摄像头快速采集下来，交由嵌入式微处理器进行三维信息恢复提取，最后上传至上位机进行显示。具有操作简单、采集范围大、采集处理速度快、设备小巧易携，显示存储方便等特点。

实现本实用新型目的的具体技术方案是：

一种基于数字微镜器件的主动式高速三维视觉装置，其特征在于该装置包括：PC机、控制电路、数据处理模块、雷达、电机、数字微镜模块、摄像头，所述PC机与控制电路连接；控制电路分别与雷达、电机、数字微镜模块、摄像头连接；电机分别与数字微镜模块、摄像头连接；数字微镜模块与摄像头连接；摄像头与数据处理模块连接；其中：

所述控制电路包括FPGA、第一4核Cortex-A9处理器、AS接口、第一USB接口、LED、按键及UART接口,所述FPGA分别与AS接口、第一4核Cortex-A9处理器连接；第一4核Cortex-A9处理器分别与第一USB接口、LED、按键及UART接口连接；

所述数据处理模块包括第二4核Cortex-A9处理器、第二USB接口、DDR3、MIPI接口及eMMC,所述第二4核Cortex-A9处理器分别与第二USB接口、DDR3、MIPI接口及eMMC连接；

所述数字微镜模块包括光源、匀光光棒、棱镜透镜组、数字微镜器件、透镜阵列，所述光源与匀光光棒连接；匀光光棒与棱镜透镜组连接；棱镜透镜组与数字微镜器件连接；数字微镜器件与透镜阵列连接。

本实用新型装置实现主动式高速三维视觉功能包括以下具体步骤：

步骤1：PC机控制雷达探测物体

ⅰ）PC机通过控制电路使雷达开始工作；

ⅱ）雷达将探测到的待测物体距离信息返回控制电路

步骤2：控制电路驱动电机转动数字微镜模块和摄像头

ⅰ）控制电路驱动电机调整数字微镜模块和摄像头焦距，使其聚焦到待测物体；

步骤3：控制光源照射到数字微镜器件上

ⅰ）控制电路打开光源开关；

ⅱ）照射光通过匀光光棒，使点光源展宽为面光源；

ⅲ）照射光通过棱镜透镜组，使照射光面符合数字微镜器件大小；

步骤4：控制电路控制数字微镜器件对空间光进行调制并照射到待测物体上

ⅰ）控制电路控制数字微镜器件每个镜子的旋转角度，使其呈现出“打开”或者“关断”状态，控制空间光的形状、区域，完成对空间光的调制，连续高速产生一系列光栅图案；

ⅱ）调制后的空间光经过透镜阵列，均匀准确地照射在待测物体表面上；

步骤5：控制电路控制摄像头采集待测物体的图像数据并在数据处理模块中进行处理

ⅰ）控制电路控制摄像头，在每次数字微镜器件产生的光栅图案照射待测物体上后，立即采集待测物体的图像数据并存储在eMMC存储器中；

ⅱ）在一系列光栅图案照射下的待测物体图片采集完毕后，4核Cortex-A9处理器对图片进行二值化、结构光解码、畸变量提取等操作；

步骤6：控制电路控制4核Cortex-A9处理器将处理结果存储至eMMC存储器或发送至PC机进行显示

ⅰ）在4核Cortex-A9处理器完成对图像的处理后，控制电路控制4核Cortex-A9处理器将结果存储在eMMC存储器或通过USB口上传处理结果至PC机，通过上位机程序显示恢复提取得到的待测物体的三维图像。

本实用新型解决了目前传统的三维视觉装置采集范围小、处理速度慢、设备笨重等问题，使用了先进的雷达和电机驱动扩大三维视觉装置的采集范围，同时利用数字微镜器件对照射光进行调制，可以高速产生三维信息采集所需的光栅图案，用摄像头采集后使用4核Cortex-A9处理器进行三维信息恢复提取，方便地将结果存储在eMMC存储器或显示在PC机上，并实现了跟踪动态显示待测物体三维信息的功能。

附图说明

图1为本实用新型结构示意图；

图2为本实用新型控制电路结构示意图；

图3为本实用新型数据处理模块结构示意图；

图4为本实用新型数字微镜模块结构示意图；

图5为本实用新型控制电路工作流程图；

图6为为本实用新型数据处理模块工作流程图；

图7为本实用新型PC机显示界面示意图。

具体实施方式

下面结合附图及实施例对本实用新型进行详细描述。

参阅图1，本实用新型包括PC机1、控制电路2、数据处理模块3、雷达4、电机5、数字微镜模块6、摄像头7，所述PC机1与控制电路2连接；控制电路2分别与雷达4、电机5、数字微镜模块6、摄像头7连接；电机5分别与数字微镜模块6、摄像头7连接；数字微镜模块6与摄像头7连接；摄像头7与数据处理模块3连接。PC机1通过控制电路2使雷达4开始工作，雷达4将探测到的待测物体距离信息返回控制电路2，控制电路2驱动电机5调整数字微镜模块6和摄像头7的焦距，当数字微镜模块6和摄像头7焦距到雷达4探测到的待测物体距离时，控制电路2停止驱动电机5；控制电路2控制数字微镜模块6对空间光进行调制并照射到待测物体上,控制电路2控制摄像头7，在每次数字微镜器件模块6产生的光栅图案照射在待测物体上后，立即采集待测物体的图像数据并存储在数据处理模块3中,在一系列光栅图案照射下的待测物体图片采集完毕后，数据处理模块3对图片进行二值化、结构光解码、畸变量提取等操作,控制电路2控制数据处理模块3将处理结果存储至数据处理模块3或发送至PC机1进行显示。

参阅图2，为本实用新型控制电路2结构示意图。所述控制电路包括FPGA21、4核Cortex-A9处理器22、AS接口23、USB接口24、LED25、按键26及UART接口27,所述FPGA21分别与AS接口23、4核Cortex-A922连接；4核Cortex-A9处理器22分别与USB接口24、LED25、按键26及UART接口27连接。AS接口23用来烧写FPGA21代码，USB接口24用来接收PC机命令，4核Cortex-A9处理器22通过USB接口24接收到，将命令解析后发送相应参数至FPGA21或通过UART接口27将工作参数发送至雷达，UART接口27也用来接收来自雷达的待测物体距离信息到4核Cortex-A9处理器22，并根据此距离驱动电机工作。如果控制电路工作异常，则控制LED25进行提示，也可以使用按键26重启设备。

参阅图3，为本实用新型数据处理模块3结构示意图。所述数据处理模块3包括4核Cortex-A9处理器31、USB接口32、DDR333、MIPI接口34、eMMC35,所述4核Cortex-A9处理器31分别与USB接口32、DDR333、MIPI接口34及eMMC 35连接。USB接口32用来烧写Cortex-A9处理器31代码并接收命令，DDR333用来暂存4核Cortex-A9处理器31运行过程中产生的临时数据，4核Cortex-A9处理器31通过MIPI接口34控制摄像头采集图片，存储至eMMC35。在所有图片采集完成后，4核Cortex-A9处理器31从eMMC35中取出图片，经过二值化、结构光解码、畸变量提取等操作后，将三维信息恢复提取结果存储在eMMC35中，或者通过USB接口32发送至PC机。

参阅图4，为本实用新型数字微镜模块6结构示意图。所述数字微镜模块6包括光源61、匀光光棒62、棱镜透镜组63、数字微镜器件64、透镜阵列65，所述光源61与匀光光棒62连接，匀光光棒62与棱镜透镜组63连接，棱镜透镜组63与数字微镜器件64连接，数字微镜器件64与透镜阵列65连接。PC机通过控制电路打开光源61开关，照射光通过匀光光棒62，使点光源展宽为面光源，照射光通过棱镜透镜组63，使照射光面符合数字微镜器件64大小，控制电路控制数字微镜器件64使其连续高速产生一系列光栅图案，调制后的空间光经过透镜阵列65，均匀准确地照射在待测物体表面上。

参阅图5，为本实用新型控制电路工作流程图。用户在PC机1下达开始采集三维信息的指令后，指令通过USB接口发送至控制电路2的4核Cortex-A9处理器；4核Cortex-A9处理器通过UART接口设置雷达4参数并使其工作；雷达4将探测到的待测物体距离通过UART接口发送至4核Cortex-A9处理器，4核Cortex-A9处理器驱动电机5，电机带动数字微镜模块6和摄像头7聚焦至正对待测物体的距离；4核Cortex-A9处理器设置需要投射到待测物体表面的光栅图案，发送至FPGA，FPGA根据参数驱动数字微镜模块6，使光栅图案投射至待测物体表面，同时控制电路2控制摄像头7采集图片，并存储在数据处理模块3，若此时未采集完毕所有不同光栅图案照射下的图片，则设置下一个需要投射的光栅图案，驱动数字微镜模块6和摄像头7循环上述工作，若已采集完毕，则数据处理模块3开始对图片进行处理，将恢复提取出的三维信息保存在本地，或上传至PC机1进行显示。当模式为跟踪采集模式时，则继续重复上述过程，可达成动态跟踪显示提取的待测物体三维信息的效果。

参阅图6，为本实用新型数据处理模块工作流程图。首先数据处理模块3载入提前拍摄的环境图像，进行图像二值化、结构光解码、提取畸变量等过程。之后载入待测物体图像，同样进行图像二值化、结构光解码、畸变量提取的过程，而后将提取到的畸变量减去环境图像，去除环境带来的影响。将最终恢复提取的待测物体的畸变量存储在本地或上传至PC机1进行显示。

参阅图7，为本实用新型的PC机显示界面示意图，在点击单次扫描或跟踪扫描后，整个系统会提取出待测物体的三维信息，并显示在三维坐标系中方便查看和保存。

实施例

人们生活在三维世界中，为了能更好的表达客观世界，三维视觉技术变的很重要。以跟踪获取动态物体的三维信息为例，需要定位待测物体、可调焦的光栅图案投射和图像捕获设备以便对准待测物体、高速的光栅图案投射速度、图像捕获速度以及图像处理速度。用户在PC机1显示的界面中点击跟踪扫描，控制电路2控制雷达4检测待测物体距离，并驱动电机5带动数字微镜模块6和摄像头7聚焦至对应距离，控制电路2中的FPGA21控制数字微镜模块6产生一系列的光栅图案，同时4核Cortex-A9处理器22控制摄像头7拍摄图片。拍摄完毕后，数据处理模块3将图片进行处理，处理结果发送至PC机1进行显示，并重复上述过程，达到动态跟踪显示三维信息的效果。

这种装置相比于传统的三维视觉装置采集范围大、可跟踪显示、处理速度快、设备小巧便携，方便显示存储，灵活性高。

Claims (1)

1.一种基于数字微镜器件的主动式高速三维视觉装置，其特征在于该装置包括：PC机（1）、控制电路（2）、数据处理模块（3）、雷达（4）、电机（5）、数字微镜模块（6）、摄像头（7），所述PC机（1）与控制电路（2）连接；控制电路（2）分别与雷达（4）、电机（5）、数字微镜模块（6）、摄像头（7）连接；电机（5）分别与数字微镜模块（6）、摄像头（7）连接；数字微镜模块（6）与摄像头（7）连接；摄像头（7）与数据处理模块（3）连接；其中：

所述控制电路（2）包括FPGA（21）、第一4核Cortex-A9处理器（22）、AS接口（23）、第一USB接口（24）、LED（25）、按键（26）及UART接口（27）,所述FPGA（21）分别与AS接口（23）、第一4核Cortex-A9处理器（22）连接；第一4核Cortex-A9处理器（22）分别与第一USB接口（24）、LED（25）、按键（26）及UART接口（27）连接；

所述数据处理模块（3）包括第二4核Cortex-A9处理器（31）、第二USB接口（32）、DDR3（33）、MIPI接口（34）及eMMC（35）,所述第二4核Cortex-A9处理器（31）分别与第二USB接口（32）、DDR3（33）、MIPI接口（34）及eMMC（35）连接；

所述数字微镜模块（6）包括光源（61）、匀光光棒（62）、棱镜透镜组（63）、数字微镜器件（64）、透镜阵列（65），所述光源（61）与匀光光棒（62）连接；匀光光棒（62）与棱镜透镜组（63）连接；棱镜透镜组（63）与数字微镜器件（64）连接；数字微镜器件（64）与透镜阵列（65）连接。