CN112066907A - 深度成像装置 - Google Patents

深度成像装置 Download PDF

Info

Publication number
CN112066907A
CN112066907A CN201910500338.6A CN201910500338A CN112066907A CN 112066907 A CN112066907 A CN 112066907A CN 201910500338 A CN201910500338 A CN 201910500338A CN 112066907 A CN112066907 A CN 112066907A
Authority
CN
China
Prior art keywords
light
target object
projector
discrete
depth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910500338.6A
Other languages
English (en)
Other versions
CN112066907B (zh
Inventor
朱力
吕方璐
汪博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Guangjian Technology Co Ltd
Original Assignee
Shenzhen Guangjian Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Guangjian Technology Co Ltd filed Critical Shenzhen Guangjian Technology Co Ltd
Priority to CN201910500338.6A priority Critical patent/CN112066907B/zh
Publication of CN112066907A publication Critical patent/CN112066907A/zh
Application granted granted Critical
Publication of CN112066907B publication Critical patent/CN112066907B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/22Measuring arrangements characterised by the use of optical techniques for measuring depth
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/4205Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect having a diffractive optical element [DOE] contributing to image formation, e.g. whereby modulation transfer function MTF or optical aberrations are relevant

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Measurement Of Optical Distance (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明提供了一种深度成像装置,包括光投射器、第一成像模块以及第二成像模块;光投射器包括离散光束投射器;离散光束投射器,用于向目标物体投射多束离散准直光束;第一成像模块,用于当光投射器与目标物体之间的距离小于等于预设定的距离阈值根据接收到的目标物体反射的散准直光束形成的光斑图案,获得目标物体表面的深度图像;第二成像模块,用于当光投射器与目标物体之间的距离大于预设定的距离阈值根据接收到的目标物体反射的多束散准直光束的传播时间,获得目标物体表面的深度图像。本发明在照度较大时和距离较远时扩大离散光束的投射时间比例,反之扩大泛光的投射时间比例,提高了装载有深度成像装置的3D摄像头应用场景。

Description

深度成像装置
技术领域
本发明涉及3D成像领域,具体地,涉及一种深度成像装置。
背景技术
近年来,随着消费电子产业的不断发展,具有深度传感功能的3D摄像头日渐受到消费电子界的重视。目前比较成熟的深度测量方法是结构光方案,即将特定的结构光图案投影在物体上,然后通过图案的形变或位移计算物体不同位置的深度。
ToF(time of flight)技术是一种从投射器发射测量光,并使测量光经过目标物体反射回到接收器,从而能够根据测量光在此传播路程中的传播时间来获取物体到传感器的空间距离的3D成像技术。常用的ToF技术包括单点扫描投射方法和面光投射方法。
单点扫描投射的ToF方法采用一个单点投射器,投射出单束的准直光,该单束的准直光的投射方向受到扫描器件的控制从而能够投射到不同的目标位置。光束单束的准直光经过目标物反射后,部分光被单点的光探测器接收,从而获取当前投射方向的深度测量数据。此种方法能够将所有的光功率集中在一个目标点上,从而在单个目标点实现的高信噪比,进而实现高精度的深度测量。整个目标物体的扫描依赖于扫描器件,比如机械马达、MEMS、光相控雷达等。将扫描获得的深度数据点拼接即可获取3D成像所需的离散点云数据。此种方法有利于实现远距离的3D成像,但需要使用复杂的投射扫描系统,成本较高。
面光投射的ToF方法则是投射出一个能量连续分布的面光束。投射光连续覆盖目标物体表面。光探测器为一个能够获取光束传播时间的光探测器阵列。目标物体反射的光信号经过光学成像系统在光探测器上成像时,每个探测器像点获得的深度即为其物象关系对应物体位置的深度信息。这种方法能够摆脱复杂的扫描系统。然而,由于面光投射的光功率密度远低于单数的准直光,信噪比相对于单点扫描投射的方法大大下降,使得这种方法仅能够适用于距离减小,精度较低的场景。
结构光三维视觉是基于光学三角法测量原理。光学投射器将一定模式的结构光投射于物体表面,在表面上形成由被测物体表面形状所调制的光条三维图像。该三维图像被另一位置的摄像机探测,从而获得光条二维畸变图像。光条的畸变程度取决于光学投射器与摄像机之间的相对位置和物体表面形廓(高度)。直观上,沿光条显示出的位移(或偏移)与物体表面高度成比例,扭结表示了平面的变化,不连续显示了表面的物理间隙。当光学投射器与摄像机之间的相对位置一定时,由畸变的二维光条图像坐标便可重现物体表面三维形廓.由光学投射器、摄像机和计算机系统即构成了结构光三维视觉系统。结构光在室外容易受到强自然光影响,导致投射的编码光被淹没。增加投射光源的功率可以一定程度上缓解该问题,但是效果并不能让人满意。结构光测量距离较近。物体距离相机越远,物体上的投影图案越大,精度也越差,相对应的测量精度也越差。所以基于结构光的深度相机测量精度随着距离的增大而大幅降低。因而,往往在近距离场景中应用较多。
发明内容
针对现有技术中的缺陷,本发明的目的是提供一种深度成像装置,能够综合利用结构光和tof成像的特点,实现对目标物体深度图像的准确采集。
本发明提供的深度成像装置,包括光投射器、第一成像模块以及第二成像模块;
所述光投射器包括离散光束投射器;
所述离散光束投射器,用于向所述目标物体投射多束离散准直光束;
所述第一成像模块,用于当所述光投射器与所述目标物体之间的距离小于等于预设定的距离阈值根据接收到的所述目标物体反射的所述散准直光束形成的光斑图案,获得所述目标物体表面的深度图像;
所述第二成像模块,用于当所述光投射器与所述目标物体之间的距离大于预设定的距离阈值根据接收到的所述目标物体反射的多束所述散准直光束的传播时间,获得所述目标物体表面的深度图像。
优选地,所述光投射器还包括面光源投射器;
所述面光源投射器,用于当所述光投射器与所述目标物体之间的距离大于预设定的距离阈值时向所述目标物体投射泛光;
所述第二成像模块,用于接收所述目标物体反射后的离散准直光束,并根据所述反射后的离散准直光束获得所述目标物体表面的第一深度数据,接收所述目标物体反射后的泛光,并根据所述反射后的泛光获得所述目标物体表面的第二深度数据,进而根据所述第一深度数据和所述第二深度数据生成目标深度图像。
优选地,所述第二成像模块包括光学成像镜头、光探测器阵列、驱动电路以及处理器;所述光探测器阵列包括多个呈阵列分布的光探测器;
所述光学成像镜头,用于使得透过所述光学成像镜头进入光探测器阵列的所述准直光束的方向向量与光探测器呈一一对应关系;
所述光探测器,用于接收经所述目标物体反射的离散准直光束和泛光;
所述驱动电路,用于测量出多束所述离散准直光束的传播时间并进而生成所述目标物体表面的第一深度数据,测量出所述泛光的传播时间并进而生成所述目标物体表面的第二深度数据;
所述处理器,用于根据所述第一深度数据和所述第二深度数据生成目标深度图像。
优选地,所述离散光束投射器包括设置在一光路上的边发射激光器和光束投射器;
所述边发射激光器,用于向所述光束投射器投射激光;
所述光束投射器,用于将入射的所述激光投射出多束所述离散准直光束。
优选地,所述离散光束投射器包括设置在一光路上的激光器阵列、准直镜头和分束器件;
所述激光器阵列,用于向所述准直镜头投射第一数量级的激光;
所述准直镜头,用于将入射的所述多束激光准直后出射第一数量级的准直光束;
所述分束器件,用于将入射的第一数量级的准直光束分束后出射第二数量级的准直光束;
所述第二数量级大于所述第一数量级。
优选地,所述面光源投射器采用LED光源。
优选地,还包括控制器;
所述控制器,用于根据预设置的控制规则控制所述离散光束投射器和所述面光源投射器开闭,所述控制规则至少包括第一控制状态和第二控制状态,在所述第一控制状态,所述控制器控制所述离散光束投射器打开且关闭所述面光源投射器,以向所述目标物体投射多束离散准直光束,在所述第二控制状态,所述控制器控制所述离散光束投射器关闭且打开所述面光源投射器,以向所述目标物体投射泛光。
优选地,当照度大于预设置的照度阈值时,增大所述第二控制状态与所述第一控制状态的延续时间比,以扩大所述离散光束的投射时间比例;
当照度小于预设置的照度阈值时,减小大所述第二控制状态与所述第一控制状态的延续时间比,以扩大所述泛光的投射时间比例。
优选地,所述控制规则还包括在一图像采集阶段控制所述第一控制状态和所述第二控制状态之间切换两次或更多次,以实现泛光投射与离散准直光投射束的时间至第一预定比率。
优选地,所述第一预定比率包括如下任一种比率:
-所述泛光和所述离散准直光束投射的时间比率为1:1;
-所述泛光和所述离散准直光束投射的时间比率为10:1;
-所述泛光和所述离散准直光束投射的时间比率为1:1至10:1之间的任意值。
与现有技术相比,本发明具有如下的有益效果:
本发明中当所述光投射器与所述目标物体表面之间的距离小于等于预设的距离阈值时,第一成像模块根据标物体反射的所述散准直光束形成的光斑图案生成深度图像,当所述光投射器与所述目标物体表面之间的距离小于等于预设的距离阈值时第二成像模块根据所述目标物体反射的多束所述散准直光束的传播时间,获得所述目标物体表面的深度图像,从而能够综合利用结构光和tof成像的特点,实现对目标物体深度图像的准确采集。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明中深度成像装置的结构示意图。
图2为本发明中光投射器的结构示意图;
图3为本发明中离散光束投射器的一种结构示意图;
图4为本发明中离散光束投射器的另一种结构示意图;
图5(a)、(b)、(c)为本发明中多束离散准直光束周期性排布的示意图;
图6(a)、(b)、(c)为本发明中多束离散准直光束非周期性排布的示意图;以及
图7为本发明中第二成像模块的结构示意图;
图中:
1为光投射器;
2为成像模块;
3为目标物体;
101为离散光束投射器;
102为面光源投射器;
1011为边发射激光器;
1012为光束投射器;
1013为激光器阵列;
1014为准直镜头;
1015为分束器件;
201为光探测器阵列;
202为光学成像镜头。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进。这些都属于本发明的保护范围。
需要说明的是,当元件被称为“固定于”或“设置于”另一个元件,它可以直接在另一个元件上或者间接在该另一个元件上。当一个元件被称为是“连接于”另一个元件,它可以是直接连接到另一个元件或间接连接至该另一个元件上。另外,连接即可以是用于固定作用也可以是用于电路连通作用。
需要理解的是,术语“长度”、“宽度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明实施例和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多该特征。在本发明实施例的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
图1为本发明中深度成像装置的结构示意图,如图1所示,本发明提供的深度成像装置1,包括光投射器1和成像模块2,所述成像模块2包括第一成像模块和第二成像模块;
所述光投射器1包括离散光束投射器101;
所述离散光束投射器101,用于向所述目标物体3投射多束离散准直光束;
所述第一成像模块,用于当所述光投射器1与所述目标物体3之间的距离小于等于预设定的距离阈值根据接收到的所述目标物体3反射的所述散准直光束形成的光斑图案,获得所述目标物体3表面的深度图像;
所述第二成像模块,用于当所述光投射器1与所述目标物体3之间的距离大于预设定的距离阈值根据接收到的所述目标物体3反射的多束所述散准直光束的传播时间,获得所述目标物体3表面的深度图像。
本发明中当所述光投射器1与所述目标物体3表面之间的距离小于等于预设的距离阈值时,第一成像模块根据标物体反射的所述散准直光束形成的光斑图案生成深度图像,当所述光投射器1与所述目标物体3表面之间的距离小于等于预设的距离阈值时第二成像模块根据所述目标物体3反射的多束所述散准直光束的传播时间,获得所述目标物体3表面的深度图像,从而能够综合利用结构光和tof成像的特点,实现对目标物体3深度图像的准确采集。
以上是本发明的核心思想,为使本发明的上述目的、特征和优点能够更加明显易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图2为本发明中光投射器的结构示意图,如图2所示,所述光投射器1还包括面光源投射器102;
所述面光源投射器102,用于当所述光投射器1与所述目标物体3之间的距离大于预设定的距离阈值时向所述目标物体3投射泛光;
所述第二成像模块,用于接收所述目标物体3反射后的离散准直光束,并根据所述反射后的离散准直光束获得所述目标物体3表面的第一深度数据,接收所述目标物体3反射后的泛光,并根据所述反射后的泛光获得所述目标物体3表面的第二深度数据,进而根据所述第一深度数据和所述第二深度数据生成目标深度图像。
本发明能够根据反射后的离散准直光束获得所述目标物体3表面的第一深度数据,根据目标物体3反射后的泛光获得所述目标物体3表面的第二深度数据,进而根据所述第一深度数据和所述第二深度数据生成目标深度图像,从而能够提高深度图像的精度。
当通过离散准直光束获取的第一深度数据中,由于光束数量的限制,存在第一深度数据中每个点精度较高而点的数量较少的问题,当通过泛光获取的第二深度数据中,由于面光源的投射存在第二深度数据中点的数量多而全面但每个点精度不高而的问题。本发明通过所述离散光束投射器101和所述面光源投射器102的交替投射,生成第一深度数据和所述第二深度数据,进而通过第一深度数据和所述第二深度数据互补的特征生成目标深度图像,从而能够提高深度图像的精度。
图7为本发明中第二成像模块的结构示意图,如图7所示,所述第二成像模块2包括光学成像镜头202、光探测器阵列201以及驱动电路;所述光探测器阵列201包括多个呈阵列分布的光探测器;
所述光学成像镜头202,用于使得透过所述光学成像镜头202进入光探测器阵列201的所述准直光束的方向向量与光探测器呈一一对应关系;
所述光探测器,用于接收经所述目标物体3反射的准直光束;
所述驱动电路,用于测量出多束所述离散准直光束的传播时间并进而生成所述目标物体3表面的第一深度数据,测量出所述泛光的传播时间并进而生成所述目标物体3表面的第二深度数据;
所述处理器,用于根据所述第一深度数据和所述第二深度数据生成目标深度图像。
在本发明一实施例中,所述驱动电路还用于控制离散光束投射器101和第二成像模块2同时开启或关闭。
所述驱动电路可以是独立的专用电路,比如专用SOC芯片、FPGA芯片、ASIC芯片等等,也可以包含通用处理器,比如当该深度相机被集成到如手机、电视、电脑等智能终端中去,终端中的处理器可以作为该处理电路的至少一部分。
为了过滤背景噪声,所述光学成像镜头202内通常还装有窄带滤光片,使得所述光探测器阵列201仅能通过预设的波长的入射准直光束。所述预设的波长可以为入射准直光束的波长,也可以为小于入射准直光束50纳米和大于入射准直光束50纳米之间。所述光探测器阵列201可以呈周期或者非周期性排列。每个光探测器与辅助电路配合可以实现对准直光束的飞行时间进行测量。根据离散准直光束数量的需求,光探测器阵列201可以是多个单点光探测器的组合或者是一个集成了多个光探测器的传感器芯片。为了进一步优化光探测器的灵敏度,一个离散准直光束在目标物体3上的照射光斑可以对应一个或者多个光探测器。在多个光探测器对应同一个照射光斑时,每个探测器的信号可以通过电路连通,从而在能够合并为一个探测面积更大的光探测器。
在本发明一实施例中,所述光探测器阵列成像器2保证了投射的多束离散准直光束和光探测器阵列201的空间位置对应关系。使得光探测器阵列201中的每个光探测器均可以采用在时间连续调制光束或者脉冲的ToF方式来测量光的传播时间,进而借助光速来计算光传播的距离。
在本发明一实施例中,第一成像模块采用红外摄像头,当光束投射器1012会将边缘发射激光器11发射的激光分成多束所述离散准直光束,多束所述离散准直光束照射在平面上时,会形成一光斑图像,当多束所述离散准直光束照射到目标物体3表面上时,光斑图案会有形变或位移,第一成像模块拍摄得到目标物体3表面的光斑图案后,会根据光斑图案的形变或位移,得到目标物体3表面的深度图像,即得到目标物体3表面的凹凸不平的深度信息。
在本发明一实施例中,当照度大于预设置的照度阈值或距离大于预设值的距离阈值时,增大所述第二控制状态与所述第一控制状态的延续时间比,以扩大所述离散光束的投射时间比例;当照度小于预设置的照度阈值或距离小于预设值的距离阈值时,减小大所述第二控制状态与所述第一控制状态的延续时间比,以扩大所述泛光的投射时间比例。
即通过本发明中设置有离散光束投射器101和面光源投射器102,能够在控制器的控制下向目标物体3投射离散光束或泛光,能够在照度较大时和距离较远时扩大离散光束的投射时间比例,在照度较小时和距离较近时扩大泛光的投射时间比例,提高了装载有发明中深度成像装置的3D摄像头的应用场景。
如在当距离大于1米时,所述泛光和所述离散准直光束投射的时间比率为1:2,当距离小于1米时,所述泛光和所述离散准直光束投射的时间比率为2:1。如在当照度大于50lux时,所述泛光和所述离散准直光束投射的时间比率为1:2,当距离小于50lux时,所述泛光和所述离散准直光束投射的时间比率为2:1。
在本发明一实施例中,所述照度阈值为10lux至50lux的任意值,所述距离阈值为1米至5米的任意值。
在本发明一实施例中,所述离散光束投射器101投射的呈离散形的多束离散准直光束经过目标物体3反射,部分反射后的准直光束被光探测器阵列201接收,每个光探测器都能够获得对应光束的从发射到接收的飞行时间t,从而通过光速c来获得准直光束的飞行距离s=ct,从而能够测量出每个被离散光束照射的目标物体3表面位置的深度信息。这些离散位置的深度数据点构建了可以复现物体3D形态的点云数据,从而实现对于目标物体3的3D成像。所述多束所述离散准直光束呈锥形。
在本发明一实施例中,所述面光源投射器102采用LED光源。在变形例中,还可以采用其他光源,如红外光源。
在本发明一实施例中,所述控制规则还包括在一图像采集阶段控制所述第一控制状态和所述第二控制状态之间切换两次或更多次,以实现泛光投射与离散准直光投射束的时间至第一预定比率。
所述第一控制状态的延续时间与所述第二控制状态的延续时间可以相同,如1:1,也可呈一定比例,如1:2,也可以根据照度,对所述第一控制状态的延续时间与所述第二控制状态的延续时间进行控制。
所述图像采集阶段为至少一张图像的采集时间,如0.1S,或其他任意秒数。
第一预定比率包括如下任一种比率:
-所述泛光和所述离散准直光束投射的时间比率为1:1;
-所述泛光和所述离散准直光束投射的时间比率为10:1;
-所述泛光和所述离散准直光束投射的时间比率为1:1至10:1之间的任意值。
在本发明一实施例中,所述控制规则还包括在一图像采集阶段控制所述第一控制状态和所述第二控制状态进行振荡以实现投射的泛光与离散准直光束时间至第二预定比率。所述第二预定比率可以与所述第一预定比率相同,也可以与所述第一预定比率不同。
图3为本发明中离散光束投射器的一种结构示意图,如图3所示,所述离散光束投射器101包括设置在一光路上的边发射激光器1011和光束投射器1012;
所述边发射激光器1011,用于向所述光束投射器1012投射激光;
所述光束投射器1012,用于将入射的所述激光投射出多束离散准直光束。
在本发明一实施例中,由于所述光束投射器1012的内表面加工了微纳结构的光芯片并配合光学透镜组成。所述分束投射器能够实现将来自于边发射激光器1011的入射光分成任意多束准直光束的功能。所述边发射激光器1011的发射方向和所述分束投射器的投射方向即可以相同,也可以成90度或者为光学系统设计所需的任意角度。
在本发明一实施例中,所述光束投射器1012采用分束器。
在本发明一实施例中,所述多束离散准直光束的数量在两束和几万束之间,如2束至10万束。
图4为本发明中离散光束投射器的另一种结构示意图,如图4所示,所述离散光束投射器101包括设置在一光路上的激光器阵列1013、准直镜头1014和分束器件1015;
所述激光器阵列1013,用于向所述准直镜头1014投射第一数量级的激光;
所述准直镜头1014,用于将入射的所述多束激光准直后出射第一数量级的准直光束;
所述分束器件1015,用于将入射的第一数量级的准直光束分束后出射第二数量级的准直光束;
所述第二数量级大于所述第一数量级。
在本发明一实施例中,所述第二数量级是所述第一数量级的一至两倍。
在本发明实施例中,所述激光器阵列1013可以采用多个垂直腔面发射激光器(Vertical Cavity Surface Emitting Laser,VCSEL)或者多个边发光激光器(EdgeEmitting Laser,EEL)组成。多束激光经过准直镜头1014后可以成为高度平行的准直光束。根据实际应用中可以根据离散光束数量的需求,可以采用分束器件1015实现更多的准直光束。所述分束器件1015可以采用衍射光栅(DOE)和空间光调制器(SLM)等。
在本发明的一实施例中,所述多束离散准直光束周期性排布呈一预设定的形状,即呈几何规律分布。
图5(a)、(b)、(c)为本发明中多束离散准直光束周期性排布的示意图,如图5所示,在本发明的一实施例中,所述预设定的形状包括如下任一形状或能够相互切换的任多个形状:
-直线形
-三角形;
-四边形;
-矩形;
-圆形;
-六边形;
-五边形。
其中,所述多束离散准直光束周期性排布的形状并不限于上述形状,也可排布呈其他形状。如图6(a)所示,当预设定的形状为矩形时,即在一个周期内的准直光束单位排布形状为矩形,在并且在空间中周期性重复。如图6(b)所示,当预设定的形状为三角形时,即在一个周期内的准直光束的单位排布形状为三角形,并且在空间中周期性重复。如图6(c)所示,当预设定的形状为六边形时,即在一个周期内的准直光束单位排布形状为六边,并且在空间中周期性重复。由于本发明在实现时受限于光学系统,实际准直光束在截面的排布可能存在畸变,比如发生拉伸、扭曲等。而每个准直光束在截面中的能量分布可以是圆形、圆环或椭圆形等者其他形状。在如5所示的这种排布方式,将有利于简化多束离散准直光束和光探测器阵列201的空间对应关系。
在本发明的一实施例中,所述多束离散准直光束非周期性排布呈另一预设定的形状。
在本发明的一实施例中,所述非周期性排布包括如下任一排布方式或能够相互切换的任多个排布方式:
-随机排布;
-空间编码排布;
-准晶格排布。
其中,所述多束离散准直光束非周期性排布的形状并不限于上述形状,也可排布呈其他形状。如图6(a)所示,所述空间编码排布,具体为在在周期性排布中,缺省一部分的光束,从而实现排布位置的空间编码,在实际可以采用的编码不受限于图6(a)中示例;如图6(b)所示,所述随机排布,具体为准直光束的排布随机分布,使得不同位置的排布方式的相似性很小或者接近于零,如图6(c)所示,所述准晶格排布,具体为准直光束在近距离相邻位置非周期性排布,在远距离周期性排布。由于本发明在实现时受限于光学系统,实际准直光束在截面的排布可能存在畸变,比如发生拉伸、扭曲等。而每个准直光束在截面中的能量分布可以是圆形、圆环或椭圆形等者其他形状。在如6所示的这种排布方式,这种排布有利于对非确定目标的均匀采样,优化最终3D深度图的效果。
在本发明的一实施例中,所述光探测器采用如下任一种光传感器:
-CMOS光传感器;
-CCD光传感器;
-SPAD光传感器。
其中,所述光探测器的型号选择并不限于上述光传感器,也可包括其他类型的光传感器。
在本实施例中,本发明中当所述光投射器1与所述目标物体3表面之间的距离小于等于预设的距离阈值时,第一成像模块根据标物体反射的所述散准直光束形成的光斑图案生成深度图像,当所述光投射器1与所述目标物体3表面之间的距离小于等于预设的距离阈值时第二成像模块根据所述目标物体3表面反射的多束所述散准直光束的传播时间,获得所述目标物体3表面的深度图像,从而能够综合利用结构光和tof成像的特点,实现对目标物体3深度图像的准确采集。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变形或修改,这并不影响本发明的实质内容。

Claims (10)

1.一种深度成像装置,其特征在于,包括光投射器、第一成像模块以及第二成像模块;
所述光投射器包括离散光束投射器;
所述离散光束投射器,用于向目标物体投射多束离散准直光束;
所述第一成像模块,用于当所述光投射器与所述目标物体之间的距离小于等于预设定的距离阈值根据接收到的所述目标物体反射的所述散准直光束形成的光斑图案,获得所述目标物体表面的深度图像;
所述第二成像模块,用于当所述光投射器与所述目标物体之间的距离大于预设定的距离阈值根据接收到的所述目标物体反射的多束所述散准直光束的传播时间,获得所述目标物体表面的深度图像。
2.根据权利要求1所述的深度成像装置,其特征在于,所述光投射器还包括面光源投射器;
所述面光源投射器,用于当所述光投射器与所述目标物体之间的距离大于预设定的距离阈值时向所述目标物体投射泛光;
所述第二成像模块,用于接收所述目标物体反射后的离散准直光束,并根据所述反射后的离散准直光束获得所述目标物体表面的第一深度数据,接收所述目标物体反射后的泛光,并根据所述反射后的泛光获得所述目标物体表面的第二深度数据,进而根据所述第一深度数据和所述第二深度数据生成目标深度图像。
3.根据权利要求2所述的深度成像装置,其特征在于,所述第二成像模块包括光学成像镜头、光探测器阵列、驱动电路以及处理器;所述光探测器阵列包括多个呈阵列分布的光探测器;
所述光学成像镜头,用于使得透过所述光学成像镜头进入光探测器阵列的所述准直光束的方向向量与光探测器呈一一对应关系;
所述光探测器,用于接收经所述目标物体反射的离散准直光束和泛光;
所述驱动电路,用于测量出多束所述离散准直光束的传播时间并进而生成所述目标物体表面的第一深度数据,测量出所述泛光的传播时间并进而生成所述目标物体表面的第二深度数据;
所述处理器,用于根据所述第一深度数据和所述第二深度数据生成目标深度图像。
4.根据权利要求1所述的深度成像装置,其特征在于,所述离散光束投射器包括设置在一光路上的边发射激光器和光束投射器;
所述边发射激光器,用于向所述光束投射器投射激光;
所述光束投射器,用于将入射的所述激光投射出多束所述离散准直光束。
5.根据权利要求1所述的深度成像装置,其特征在于,所述离散光束投射器包括设置在一光路上的激光器阵列、准直镜头和分束器件;
所述激光器阵列,用于向所述准直镜头投射第一数量级的激光;
所述准直镜头,用于将入射的所述多束激光准直后出射第一数量级的准直光束;
所述分束器件,用于将入射的第一数量级的准直光束分束后出射第二数量级的准直光束;
所述第二数量级大于所述第一数量级。
6.根据权利要求2所述的深度成像装置,其特征在于,所述面光源投射器采用LED光源。
7.根据权利要求2所述的深度成像装置,其特征在于,还包括控制器;
所述控制器,用于根据预设置的控制规则控制所述离散光束投射器和所述面光源投射器开闭,所述控制规则至少包括第一控制状态和第二控制状态,在所述第一控制状态,所述控制器控制所述离散光束投射器打开且关闭所述面光源投射器,以向所述目标物体投射多束离散准直光束,在所述第二控制状态,所述控制器控制所述离散光束投射器关闭且打开所述面光源投射器,以向所述目标物体投射泛光。
8.根据权利要求7所述的深度成像装置,其特征在于,当照度大于预设置的照度阈值时,增大所述第二控制状态与所述第一控制状态的延续时间比,以扩大所述离散光束的投射时间比例;
当照度小于预设置的照度阈值时,减小大所述第二控制状态与所述第一控制状态的延续时间比,以扩大所述泛光的投射时间比例。
9.根据权利要求7所述的深度成像装置,其特征在于,所述控制规则还包括在一图像采集阶段控制所述第一控制状态和所述第二控制状态之间切换两次或更多次,以实现泛光投射与离散准直光投射束的时间至第一预定比率。
10.根据权利要求9所述的深度成像装置,其特征在于,所述第一预定比率包括如下任一种比率:
-所述泛光和所述离散准直光束投射的时间比率为1:1;
-所述泛光和所述离散准直光束投射的时间比率为10:1;
-所述泛光和所述离散准直光束投射的时间比率为1:1至10:1之间的任意值。
CN201910500338.6A 2019-06-11 2019-06-11 深度成像装置 Active CN112066907B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910500338.6A CN112066907B (zh) 2019-06-11 2019-06-11 深度成像装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910500338.6A CN112066907B (zh) 2019-06-11 2019-06-11 深度成像装置

Publications (2)

Publication Number Publication Date
CN112066907A true CN112066907A (zh) 2020-12-11
CN112066907B CN112066907B (zh) 2022-12-23

Family

ID=73658002

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910500338.6A Active CN112066907B (zh) 2019-06-11 2019-06-11 深度成像装置

Country Status (1)

Country Link
CN (1) CN112066907B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112987021A (zh) * 2021-02-08 2021-06-18 革点科技(深圳)有限公司 一种飞行时间法和结构光法相融合的结构光三维成像系统及方法
CN116067305A (zh) * 2023-02-09 2023-05-05 深圳市安思疆科技有限公司 一种结构光测量系统和测量方法

Citations (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1123573A (zh) * 1993-05-15 1996-05-29 莱卡公开股份有限公司 测距设备
JP2004045266A (ja) * 2002-07-12 2004-02-12 Nippon Hoso Kyokai <Nhk> 3次元情報検出方法及び装置
JP2004188604A (ja) * 2002-12-06 2004-07-08 Ts Corporation 光学的立体造形装置
CN2779424Y (zh) * 2005-03-24 2006-05-10 南京德朔实业有限公司 测距装置
CN103322937A (zh) * 2012-03-19 2013-09-25 联想(北京)有限公司 一种结构光法测量物体深度的方法及装置
US20160146927A1 (en) * 2014-11-21 2016-05-26 Microsoft Corporation Multiple pattern illumination optics for time of flight system
CN106576159A (zh) * 2015-06-23 2017-04-19 华为技术有限公司 一种获取深度信息的拍照设备和方法
CN107105217A (zh) * 2017-04-17 2017-08-29 深圳奥比中光科技有限公司 多模式深度计算处理器以及3d图像设备
CN107167996A (zh) * 2017-06-05 2017-09-15 深圳奥比中光科技有限公司 自适应调整的激光投影模组及深度相机
CN107167997A (zh) * 2017-06-05 2017-09-15 深圳奥比中光科技有限公司 激光投影模组及深度相机
CN108052878A (zh) * 2017-11-29 2018-05-18 上海图漾信息科技有限公司 人脸识别设备和方法
CN108169981A (zh) * 2018-01-15 2018-06-15 深圳奥比中光科技有限公司 多功能照明模组
CN108540717A (zh) * 2018-03-31 2018-09-14 深圳奥比中光科技有限公司 目标图像获取系统与方法
CN108646425A (zh) * 2018-04-03 2018-10-12 Oppo广东移动通信有限公司 激光投射器、图像获取装置及电子设备
CN108769649A (zh) * 2018-06-28 2018-11-06 Oppo广东移动通信有限公司 深度处理器和三维图像设备
CN109118581A (zh) * 2018-08-22 2019-01-01 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN109194856A (zh) * 2018-09-30 2019-01-11 Oppo广东移动通信有限公司 电子装置的控制方法和电子装置
CN109325394A (zh) * 2017-08-01 2019-02-12 苹果公司 确定稀疏图案照明与密集图案照明
CN109709742A (zh) * 2019-01-09 2019-05-03 深圳市光鉴科技有限公司 一种结构光投影仪及3d摄像头
CN208874676U (zh) * 2018-07-30 2019-05-17 深圳阜时科技有限公司 一种图像获取装置、身份识别装置及电子设备
CN109798838A (zh) * 2018-12-19 2019-05-24 西安交通大学 一种基于激光散斑投射的ToF深度传感器及其测距方法
CN109831660A (zh) * 2019-02-18 2019-05-31 Oppo广东移动通信有限公司 深度图像获取方法、深度图像获取模组及电子设备
CN109862275A (zh) * 2019-03-28 2019-06-07 Oppo广东移动通信有限公司 电子设备和移动平台

Patent Citations (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1123573A (zh) * 1993-05-15 1996-05-29 莱卡公开股份有限公司 测距设备
JP2004045266A (ja) * 2002-07-12 2004-02-12 Nippon Hoso Kyokai <Nhk> 3次元情報検出方法及び装置
JP2004188604A (ja) * 2002-12-06 2004-07-08 Ts Corporation 光学的立体造形装置
CN2779424Y (zh) * 2005-03-24 2006-05-10 南京德朔实业有限公司 测距装置
CN103322937A (zh) * 2012-03-19 2013-09-25 联想(北京)有限公司 一种结构光法测量物体深度的方法及装置
US20160146927A1 (en) * 2014-11-21 2016-05-26 Microsoft Corporation Multiple pattern illumination optics for time of flight system
CN106576159A (zh) * 2015-06-23 2017-04-19 华为技术有限公司 一种获取深度信息的拍照设备和方法
CN107105217A (zh) * 2017-04-17 2017-08-29 深圳奥比中光科技有限公司 多模式深度计算处理器以及3d图像设备
CN107167996A (zh) * 2017-06-05 2017-09-15 深圳奥比中光科技有限公司 自适应调整的激光投影模组及深度相机
CN107167997A (zh) * 2017-06-05 2017-09-15 深圳奥比中光科技有限公司 激光投影模组及深度相机
CN109325394A (zh) * 2017-08-01 2019-02-12 苹果公司 确定稀疏图案照明与密集图案照明
CN108052878A (zh) * 2017-11-29 2018-05-18 上海图漾信息科技有限公司 人脸识别设备和方法
CN108169981A (zh) * 2018-01-15 2018-06-15 深圳奥比中光科技有限公司 多功能照明模组
CN108540717A (zh) * 2018-03-31 2018-09-14 深圳奥比中光科技有限公司 目标图像获取系统与方法
CN108646425A (zh) * 2018-04-03 2018-10-12 Oppo广东移动通信有限公司 激光投射器、图像获取装置及电子设备
CN108769649A (zh) * 2018-06-28 2018-11-06 Oppo广东移动通信有限公司 深度处理器和三维图像设备
CN208874676U (zh) * 2018-07-30 2019-05-17 深圳阜时科技有限公司 一种图像获取装置、身份识别装置及电子设备
CN109118581A (zh) * 2018-08-22 2019-01-01 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN109194856A (zh) * 2018-09-30 2019-01-11 Oppo广东移动通信有限公司 电子装置的控制方法和电子装置
CN109798838A (zh) * 2018-12-19 2019-05-24 西安交通大学 一种基于激光散斑投射的ToF深度传感器及其测距方法
CN109709742A (zh) * 2019-01-09 2019-05-03 深圳市光鉴科技有限公司 一种结构光投影仪及3d摄像头
CN109831660A (zh) * 2019-02-18 2019-05-31 Oppo广东移动通信有限公司 深度图像获取方法、深度图像获取模组及电子设备
CN109862275A (zh) * 2019-03-28 2019-06-07 Oppo广东移动通信有限公司 电子设备和移动平台

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112987021A (zh) * 2021-02-08 2021-06-18 革点科技(深圳)有限公司 一种飞行时间法和结构光法相融合的结构光三维成像系统及方法
CN116067305A (zh) * 2023-02-09 2023-05-05 深圳市安思疆科技有限公司 一种结构光测量系统和测量方法

Also Published As

Publication number Publication date
CN112066907B (zh) 2022-12-23

Similar Documents

Publication Publication Date Title
CA3012691C (en) Lidar based 3-d imaging with far-field illumination overlap
US10330780B2 (en) LIDAR based 3-D imaging with structured light and integrated illumination and detection
US9927522B2 (en) Determining positional information of an object in space
CA3017817C (en) Lidar based 3-d imaging with varying illumination field density
CN110244318B (zh) 基于异步ToF离散点云的3D成像方法
CN112066906A (zh) 深度成像装置
CN111830530B (zh) 一种距离测量方法、系统及计算机可读存储介质
CN109557522A (zh) 多射束激光扫描仪
US20230168348A1 (en) Lidar signal acquisition
CN110221309B (zh) 基于异步ToF离散点云的3D成像装置及电子设备
KR20200103832A (ko) 계층형 전력 제어를 이용한 lidar 기반의 거리 측정
CN111796295B (zh) 一种采集器、采集器的制造方法及距离测量系统
WO2020221188A1 (zh) 基于同步ToF离散点云的3D成像装置及电子设备
CN111025321A (zh) 一种可变焦的深度测量装置及测量方法
CN112066907B (zh) 深度成像装置
CN210128694U (zh) 深度成像装置
US20210270969A1 (en) Enhanced depth mapping using visual inertial odometry
CN210835244U (zh) 基于同步ToF离散点云的3D成像装置及电子设备
CN112068144B (zh) 光投射系统及3d成像装置
CN211785087U (zh) 4d摄像装置及电子设备
CN111947565A (zh) 基于同步ToF离散点云的3D成像方法
CN112834435A (zh) 4d摄像装置及电子设备
CN114217290A (zh) 基于时间飞行的深度相机
CN210109475U (zh) 3d成像装置
CN213956735U (zh) 散斑投射器的投射光斑测试装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant