CN118056111A - 用于对准投影仪的光学部件的方法 - Google Patents

用于对准投影仪的光学部件的方法 Download PDF

Info

Publication number
CN118056111A
CN118056111A CN202280066862.7A CN202280066862A CN118056111A CN 118056111 A CN118056111 A CN 118056111A CN 202280066862 A CN202280066862 A CN 202280066862A CN 118056111 A CN118056111 A CN 118056111A
Authority
CN
China
Prior art keywords
laser
illumination
light
camera
projector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280066862.7A
Other languages
English (en)
Inventor
C·邦西诺
P·费耶斯
J·D·A·科洛切克
B·莱因
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TrinamiX GmbH
Original Assignee
TrinamiX GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TrinamiX GmbH filed Critical TrinamiX GmbH
Publication of CN118056111A publication Critical patent/CN118056111A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2504Calibration devices
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/09Beam shaping, e.g. changing the cross-sectional area, not otherwise provided for
    • G02B27/0927Systems for changing the beam intensity distribution, e.g. Gaussian to top-hat

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

一种用于对准投影仪(110)的光学部件的方法,该投影仪用于利用包括多个照射特征的至少一个照射图案(114)来照射至少一个对象(112)。投影仪(110)包括至少一个发射器阵列(116)。这些发射器中的每一个被配置用于产生至少一个光束。投影仪(110)包括至少一个传递装置(118),其被配置用于从照射在传递装置(118)上的光束产生照射特征。

Description

用于对准投影仪的光学部件的方法
技术领域
本发明涉及一种用于对准用于利用至少一个照射图案来照射至少一个对象的投影仪的光学部件的方法、检测器、移动装置以及多种用途。根据本发明的装置、方法和用途具体地可以用于各个领域,例如日常生活、游戏、交通技术、生产技术、安保技术、摄影(比如用于艺术、文档或技术目的的数字摄影或视频摄影)、医疗技术、家庭护理、智能生活或用于科学。进一步地,本发明具体可以用于例如在建筑学、计量学、考古学、艺术、医学、工程或制造领域中扫描一个或多个对象和/或扫描风景,比如用于生成对象或风景的深度剖面。然而,其他应用也是可能的。
背景技术
本发明涉及使用射束剖面分析(beam profile analysis,BPA)的深度测量,也称为光子比率深度(depth-from-photon-ratio,DPR)技术。关于BPA,请参考以下文献:WO2018/091649 A1;WO 2018/091638 A1;WO 2018/091640A1;以及C.Lennartz、F.Schick、S.Metz的“Whitepaper-Beam Profile Analysis for 3D imaging and materialdetection[白皮书-用于3D成像和材料检测的射束剖面分析]”,2021年4月28日,德国路德维希港,这些文献的完整内容通过引用包括在本文中。BPA可以与结构光技术相结合,例如如WO 2019/042956中所述的。通常,在这些装置和方法中,投射点图案,并记录和评估反射的图案。例如,通过使用至少一个发射器(比如,垂直腔面发射激光器(VCSEL))阵列来生成该图案。
光学3D成像系统可以包括相机和投影仪、特别是激光投影仪。在结构光类型系统(也常见于基于主动立体的系统)的情况下,激光投影仪在环境中投射点图案。尤其是对于基于VCSEL阵列的激光投影仪,它们通常由两个主要部件组成:VCSEL阵列和折射光学透镜模组。这两个部件的对准对于投影仪的性能至关重要。如果对准不正确,投射的点图案可能会出现不同的像差,如畸变的点图案、畸变的点或不均匀的点强度分布。
VCSEL阵列和折射光学透镜模组的对准通常是在辅助相机和透明目标板的帮助下在主动对准过程中完成的。在这种主动对准过程中,VCSEL阵列与目标和相机机械对准,因此VCSEL阵列的光学中心点仅以间接方式确定。这可能会导致点图案畸变。对于基于结构光的系统来说,这不是问题,因为图案具有固有的畸变,并且只有重复结构内较小规模的畸变才是重要的。然而,这些畸变会对依赖已知规则网格结构的3D技术的性能产生负面影响。
具有折射光学透镜模组的基于VCSEL阵列的激光点投影仪可能会出现图案畸变和光学传播偏差,这是由于透镜模组与VCSEL阵列的不完美对准造成的。除了整体图案形状的畸变之外,还可能导致投射点的大小和功率密度分布不均匀。所有这些像差对于依赖非随机网格结构光点图案的3D传感解决方案来说可能都是有问题的,因此应该被最小化。
两个部件之间的这种未对准的自由度可以包括垂直于光轴的平移和远离光轴(垂直于VCSEL阵列)的任何角度倾斜。在观察投射图案时,这两个误差源之间存在相互依赖性,例如,可以通过故意倾斜折射光学透镜模组来补偿由平移误差引入的光学传播倾斜。然而,这会导致更明显的(例如,梯形)图案畸变。因此应当避免这种方法。
US2015/124225 A1描述了一种光源装置,包括沿第一方向布置的多个光源、来自多个光源的光束进入的第一圆柱形透镜、以及来自第一圆柱形透镜的光束进入的透镜单元。第一圆柱形透镜的母线平行于第一方向。透镜单元设置有被布置为使得分别对应于多个光源的多个圆柱形透镜,并且多个圆柱形透镜中的每一个的母线与第一方向相交。多个圆柱形透镜中所包括的第二圆柱形透镜的布置是独立于相邻的圆柱形透镜而确定的。
Jayakrishnan Chandrappan等人,“Performance Characterization Methodsfor Optoelectronic Circuit Boards[光电电路板的性能表征方法]”,IEEE部件封装和制造技术汇刊,IEEE,美国,第1卷,第3期,2011-03-01,第318至326页,XP011352439,ISSN:2156-3950,DOI:10.1109/TCPMT.2010.2100654描述了以10Gb/s运行的双向光电电路板(OECB)的性能评估方法。典型的OECB由倒装芯片表面贴装光学收发器模块和聚合物光学互连件组成。评估技术包括单个部件、子系统和互连件的直流和高速光学表征。描述了一种验证光波导、垂直腔面发射激光器、光电二极管、发射器、接收器和光链路的高速光学表征的系统程序。
WO 2021/069400 A1描述了一种用于利用至少一个照射图案来照射至少一个对象的投影仪。该投影仪包括至少一个垂直腔面发射激光器(VCSEL)阵列。VCSEL中的每一个被配置用于产生至少一个光束。该投影仪包括至少一个光学系统,该光学系统被配置用于为由该阵列的VCSEL产生的每个光束生成特性射束剖面。阵列的相邻VCSEL的射束剖面在横向和/或轴向方向上不同,使得阵列的VCSEL的光束可分配给三维空间中的对应VCSEL。
本发明解决的问题
因此,本发明的目的是提供面对已知装置和方法的上述技术挑战的装置和方法。具体地,本发明的目的是提供允许最小化两个指定误差源以获得具有最小畸变的投射图案的装置和方法,该投射图案从发射器阵列垂直传播,并且具有投射光点的最佳可能均匀性。
发明内容
该问题通过具有专利独立权利要求的特征的本发明来解决。可以单独或组合地实现的本发明的有利发展在从属权利要求和/或以下说明书和详细实施例中呈现。
在本发明的第一方面中,披露了一种用于对准投影仪的光学部件的方法,该投影仪用于利用包括多个照射特征的至少一个照射图案来照射至少一个对象。投影仪包括至少一个发射器阵列。这些发射器中的每一个被配置用于产生至少一个光束。投影仪包括至少一个传递装置,其被配置用于从照射在传递装置上的光束产生照射特征。
这些方法步骤可以以给定的顺序执行或者可以以不同的顺序执行。进一步地,可以存在未列出的一个或多个额外的方法步骤。进一步地,可以重复执行其中一个、多于一个或者甚至所有方法步骤。
该方法包括以下步骤:
a)至少一个发射器阵列对准步骤,包括
由每个发射器产生光束并在不使用发射器阵列与对象之间的传递装置的情况下用光束照射对象的表面,从而在对象上生成光点,
通过使用至少一个相机成像出光点的至少一个图像,
使用至少一个评估装置,通过评估光点的图像来确定光点的至少一种强度分布并将所确定的强度分布与至少一个预定义和/或预先已知的强度分布进行比较,
在所确定的强度分布与预定义和/或预先已知的强度分布的偏差超过至少一个公差范围的情况下,适配发射器阵列的取向,使得发射器阵列的中心轴线垂直于对象的表面;
b)至少一个传递装置对准步骤,包括
b1)标记对象上的光点的中心位置,
将传递装置布置在发射器阵列与对象之间,使得传递装置的光轴垂直于对象的表面,
由每个发射器产生光束,使用发射器阵列与对象之间的传递装置用光束照射对象的表面,从而在对象上生成照射图案,
通过使用相机成像出由照射图案照射的对象的至少一个图像,
使用评估装置评估对象的图像,从而确定对象上的照射图案的中心,
将所确定的中心与所标记的中心位置进行比较,
在该中心和所标记的中心位置的偏差超过至少一个公差范围的情况下,通过相对于传递装置平移发射器阵列来使该中心的位置适配于所标记的中心位置,
和/或
b2)将传递装置布置在发射器阵列与对象之间,
由每个发射器产生光束,使用发射器阵列与对象之间的传递装置用光束照射对象的表面,从而在对象上生成照射图案,
通过使用相机成像出由照射图案照射的对象的至少一个图像,
通过使用评估装置评估对象的图像,从而确定照射图案的边界框,
将所确定的边界框的至少一种特性与目标边界框的至少一种预定义和/或预先已知的特性进行比较,以及
在所确定的边界框的特性与该预定义和/或预先已知的特性的偏差超过至少一个公差范围的情况下,适配传递装置的位置和/或取向。
根据本发明的方法不仅考虑光传播轴,还考虑图案畸变。这可以允许最小化误差源。
如本文所使用的,术语“对准”可以是指调整投影仪的光学部件(特别是发射器阵列和传递装置)的相对位置和/或取向的过程。对准可以包括最小化照射图案的畸变。
如本文所使用的,术语“投影仪”也被表示为光投影仪,它可以是指被配置用于生成至少一个照射图案并将其投射到对象上、具体地投射到对象的表面上的光学装置。投影仪包括作为光学部件的发射器阵列和传递装置。投影仪可以包括附加的光学部件。如本文所使用的,术语“光学部件”可以是指投影仪的任何任意光学元件,比如光发射器、至少一个透镜、至少一个反射镜等。
如本文所使用的,术语“图案”可以是指包括多个任意形状的特征(比如,符号)的任意已知的或预定的布置。图案可以包括多个特征。图案可以包括周期性或非周期性特征的布置。如本文所使用的,术语“至少一个照射图案”可以是指包括适于照射对象的至少一部分的照射特征的至少一个任意图案。
如本文所使用的,术语“照射特征”是指图案的至少一个至少部分延伸的特征。照射图案包括多个照射特征。照射图案可以选自由以下各项组成的组:至少一个点图案;至少一个线图案;至少一个条纹图案;至少一个棋盘图案;包括周期性或非周期性特征的布置的至少一个图案。照射图案可以包括规则的和/或恒定的和/或周期性的图案,比如三角形图案、矩形图案、六边形图案或包括进一步的凸镶嵌的图案。照射图案可以表现出选自由以下各项组成的组中的至少一个照射特征:至少一个点;至少一条线;至少两条线,比如平行线或交叉线;至少一个点和一条线;周期性或非周期性特征的至少一种布置;至少一个任意形状的特征。照射图案可以包括选自由以下各项组成的组中的至少一个图案:至少一个点图案,特别是伪随机点图案;随机点图案或准随机图案;至少一个Sobol图案;至少一个准周期性图案;包括至少一个预先知道的特征的至少一个图案、至少一个规则图案;至少一个三角形图案;至少一个六边形图案;至少一个矩形图案、包括凸均匀镶嵌的至少一个图案;包括至少一条线的至少一个线图案;包括如平行线或交叉线等至少两条线的至少一个线图案。例如,投影仪可以被配置用于生成和/或投射点云或非点状特征。例如,投影仪可以被配置用于生成点云或非点状特征,使得照射图案可以包括多个点特征或非点状特征。照射图案可以包括规则的和/或恒定的和/或周期性的图案,比如三角形图案、矩形图案、六边形图案或包括进一步的凸镶嵌的图案。照射图案可以在每个区域包括尽可能多的特征,使得六边形图案可以是优选的。相应照射图案的两个特征之间的距离和/或至少一个照射特征的面积可以取决于由至少一个检测器确定的图像中的弥散圆。例如,照射图案可以包括周期性点图案。
如本文进一步使用的,术语“利用至少一个照射图案来照射”是指提供至少一个照射图案用于照射至少一个对象。如本文所使用的,术语“射线”通常是指垂直于光的波前、指向能量流方向的线。如本文所使用的,术语“射束”通常是指射线的集合。在下文中,术语“射线”和“射束”将作为同义词使用。如本文进一步使用的,术语“光束”通常是指一定量的光,具体地是指基本上沿相同方向行进的一定量的光,包括光束具有扩展角或加宽角的可能性。光束可以具有空间延伸。具体地,光束可以具有非高斯射束剖面。射束剖面可以选自由以下各项组成的组:梯形射束剖面;三角形射束剖面;锥形射束剖面。梯形射束剖面可以具有高台区和至少一个边缘区。光束具体可以是高斯光束或高斯光束的线性组合,如下面将进一步详细概述的。然而,其他实施例也是可行的。
如本文所使用的,术语“发射器”可以是指被配置用于提供至少一个光束以照射对象的至少一个任意装置。这些发射器中的每一个可以是和/或可以包括选自由至少一个激光源和至少一个非激光光源组成的组中的至少一个元件,该至少一个激光源比如为至少一个半导体激光器、至少一个双异质结构激光器、至少一个外腔激光器、至少一个分离约束异质结构激光器、至少一个量子级联激光器、至少一个分布式布拉格反射激光器、至少一个极化激元激光器、至少一个混合硅激光器、至少一个扩展腔二极管激光器、至少一个量子点激光器、至少一个体布拉格光栅激光器、至少一个砷化铟激光器、至少一个砷化镓激光器、至少一个晶体管激光器、至少一个二极管泵浦激光器、至少一个分布式反馈激光器、至少一个量子阱激光器、至少一个带间级联激光器、至少一个半导体环形激光器、至少一个垂直腔面发射激光器(VCSEL)、特别是至少一个VCSEL阵列;该至少一个非激光光源比如为至少一个LED或至少一个灯泡。
该发射器阵列可以是二维或一维阵列。阵列可以包括布置成矩阵的多个发射器。如本文进一步使用的,术语“矩阵”通常可以是指多个要素按照预定几何顺序的布置。具体地,矩阵可以是或者可以包括具有一行或多行和一列或多列的矩形矩阵。具体地,行和列可以以矩形方式布置。然而,其他布置也是可行的,比如非矩形布置。作为示例,圆形布置也是可行的,其中,元件围绕中心点布置成同心圆或椭圆形。
例如,发射器可以是VCSEL阵列。如本文所使用的,术语“垂直腔面发射激光器”是指被配置用于相对于顶表面垂直地发射激光束的半导体激光二极管。VCSEL的示例可以例如在en.wikipedia.org/wiki/Vertical-cavity_surface-emitting_laser中找到。VCSEL通常是技术人员已知的,比如从WO 2017/222618 A中可知。VCSEL中的每一个被配置用于产生至少一个光束。VCSEL可以布置在公共的衬底上或不同的衬底上。阵列可以包括最多2500个VCSEL。例如,阵列可以包括38x 25个VCSEL,比如具有3.5W的高功率阵列。例如,阵列可以包括10x 27个VCSEL,具有2.5W。例如,阵列可以包括96个VCSEL,具有0.9W。例如具有2500个元件的阵列的尺寸可以最多为2mm x 2mm。
由相应的发射器所发射的光束可以具有的波长为300至1100nm,优选地为500至1100nm。例如,光束可以具有的波长为940nm。例如,可以使用红外光谱范围内的光,比如780nm至3.0μm范围内的光。具体地,可以使用硅光电二极管适用的近红外区的部分中(具体地是在700nm至1100nm的范围内)的光。发射器可以被配置用于在红外区、特别是在近红外区内生成至少一个照射图案。使用近红外区内的光可以允许光不被人眼检测到或仅微弱地被人眼检测到,并且仍然可由硅传感器、特别是标准硅传感器检测到。例如,发射器可以是VCSEL阵列。VCSEL可以被配置用于发射波长范围为800至1000nm的光束。例如,VCSEL可以被配置用于发射808nm、850nm、940nm或980nm的光束。优选地,VCSEL发射940nm的光,因为地面太阳辐射在该波长处具有辐照度的局部最小值,例如如CIE 085-1989“Solar spectralIrradiance[太阳光谱辐照度]”中所述。
投影仪包括传递装置,其被配置用于从照射在传递装置上的光束产生照射特征。术语“传递装置”(也表示为“传递系统”)通常可以是指适于改变光束(比如通过改变光束的射束参数、光束的宽度或光束的方向中的一个或多个)的一个或多个光学元件。传递装置可以包括至少一个成像光学装置。传递装置具体地可以包括以下各项中的一项或多项:至少一个透镜,例如选自由至少一个可调焦透镜、至少一个非球面透镜、至少一个球面透镜、至少一个菲涅耳透镜组成的组中的至少一个透镜;至少一个衍射光学元件;至少一个凹面镜;至少一个射束偏转元件,优选为至少一个反射镜;至少一个分束元件,优选为分束立方体或分束镜中的至少一者;至少一个多透镜系统;至少一个全息光学元件;至少一个超构光学元件。具体地,传递装置包括至少一个折射光学透镜模组。因此,传递装置可以包括具有折射特性的多透镜系统。
发射器阵列对准步骤可以包括:在第一步骤中,使用发射器阵列而不使用传递装置。步骤a)可以包括从投影仪移除传递装置。在这种配置中,发射器阵列可以仅产生由至少一个相机成像的一个大光点。如本文所使用的,术语“光点(spot)”也被表示为“光斑(lightspot)”,通常是指至少一个光束对对象的可见或可检测的圆形或非圆形照射。
根据本发明的方法可以是主动对准过程。因此,在步骤a)和b)中使用至少一个相机,例如,用于在对准过程期间成像出照射图案。如本文所使用的,术语“相机”可以是指具有至少一个成像元件的装置,该至少一个成像元件被配置用于记录或捕获空间解析的一维、二维或甚至三维光学数据或信息。作为示例,相机可以包括至少一个相机芯片,比如被配置用于记录图像的至少一个CCD芯片和/或至少一个CMOS芯片。如本文所使用的,非限制性地,术语“图像”具体地可以涉及通过使用相机记录的数据,比如来自成像装置的多个电子读数,比如相机芯片的像素。
用于该方法的对象可以是至少一个目标屏幕。如本文所使用的,术语“目标屏幕”可以是指具有被配置用于显示投射光束的平面表面的投影屏幕。例如,目标屏幕是至少一个半透明目标屏幕。半透明目标屏幕可以允许照射到目标屏幕上的光(特别是特定波长范围的光)至少部分地通过。例如,半透明目标屏幕可以允许通过至少30%的光。投影仪可以布置在目标屏幕的一侧,并且相机布置在目标屏幕的相反侧。在该示例中,光学设置可以包括两个相机。第一相机可以是根据本发明的用于3D传感的检测器的相机。第二相机(也被表示为辅助相机)可以用于对准方法。辅助相机可以与半透明屏幕组合,并且投影仪位于屏幕的相反侧。可替代地,可以使用3D成像系统的不透明屏幕和相机。对象可以是不透明的目标屏幕。投影仪和相机可以布置在目标屏幕的同一侧。
发射器阵列可以包括发射器阵列的所谓的中心轴线,即垂直于发射器的表面并穿过阵列中心的轴线。在发射器阵列正确对准的情况下,发射器阵列的中心轴线可以与垂直于目标屏幕的表面的轴线平行、特别地是与其重合。“正确对准”可以是指发射器阵列的中心轴线至少在公差内与垂直于目标屏幕的表面的轴线平行、特别地是与其重合。否则,由发射器产生的光束可以相对于垂直于目标屏幕的表面的轴线倾斜(例如,包括与该轴线成一角度)传播。作为示例,在发射器阵列正确对准的情况下,光束和垂直于目标屏幕的表面的轴线可以成小于10°的角度、优选地小于5°或者甚至小于2°。然而,其他实施例也是可行的。
光点可以用于将发射器阵列的中心轴线对准为垂直于目标屏幕。在发射器阵列的中心轴线不垂直于目标屏幕的情况下,光点会发生畸变。光点可以包括目标屏幕的平面表面中的强度分布。该平面也可以表示为xy平面。垂直于该平面的方向可以表示为z方向。强度分布可以具有质心。在发射器阵列正确对准的情况下,质心可以位于其目标位置处。目标位置可以与光点的中心点重合。然而,在发射器阵列倾斜的情况下,光点的质心偏离其目标位置。评估装置被配置用于通过评估光点的图像来确定光点的强度分布。如本文所使用的,术语“强度分布”可以是指一维强度分布或二维强度分布。
术语“评估装置”通常可以是指适于优选地通过使用至少一个数据处理装置、更优选地通过使用至少一个处理器和/或至少一个专用集成电路执行指定操作的任意装置。因此,作为示例,该至少一个评估装置可以包括至少一个数据处理装置,该至少一个数据处理装置上存储有软件代码,该软件代码包括多个计算机命令。评估装置可以提供用于执行指定操作中的一个或多个指定操作的一个或多个硬件元件和/或可以提供一个或多个在其上运行软件以执行指定操作中的一个或多个指定操作的处理器。操作包括对图像进行评估。因此,作为示例,一个或多个指令可以以软件和/或硬件来实施。因此,作为示例,评估装置可以包括一个或多个可编程装置,比如被配置为执行上述评估的一个或多个计算机、专用集成电路(ASIC)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)。然而,附加地或可替代地,评估装置还可以完全或部分地由硬件实施。
评估装置可以是或可以包括一个或多个集成电路(比如一个或多个专用集成电路(ASIC))、和/或一个或多个数据处理装置(比如一个或多个计算机,优选地一个或多个微型计算机和/或微控制器)、现场可编程阵列或数字信号处理器。可以包括附加部件,比如一个或多个预处理装置和/或数据采集装置,比如用于接收和/或预处理传感器信号的一个或多个装置,比如一个或多个AD转换器和/或一个或多个滤波器。进一步地,评估装置可以包括一个或多个测量装置,比如用于测量电流和/或电压的一个或多个测量装置。进一步地,评估装置可以包括一个或多个数据存储装置。进一步地,评估装置可以包括一个或多个接口,比如一个或多个无线接口和/或一个或多个有线接口。
评估装置可以连接到或可以包括至少一个另外的数据处理装置,该数据处理装置可以用于显示、可视化、分析、分发、传送或进一步处理信息(比如光学传感器和/或评估装置获得的信息)中的一项或多项。作为示例,数据处理装置可以连接或合并有显示器、投影仪、监视器、LCD、TFT、扬声器、多通道音响系统、LED图案、或另一可视化装置中的至少一个。数据处理装置可以进一步连接或合并有通信装置或通信接口、连接器或端口中的至少一个,能够使用电子邮件、文本消息、电话、蓝牙、Wi-Fi、红外或互联网接口、端口或连接件中的一种或多种来发送加密或未加密的信息。数据处理装置可以进一步连接到或合并有以下各项中的至少一个:处理器、图形处理器、CPU、开放多媒体应用平台(OMAPTM)、集成电路、片上系统(比如来自Apple A系列或三星S3C2系列的产品)、微控制器或微处理器,一个或多个存储器块(比如ROM、RAM、EEPROM或闪存)、比如振荡器或锁相环等定时源、计数器-定时器、实时定时器、或上电复位发生器、电压调节器、电源管理电路、或DMA控制器。各个单元可以进一步通过总线(比如AMBA总线)连接,或者集成到物联网或工业4.0类型的网络中。
评估装置和/或数据处理装置可以通过另外的外部接口或端口连接或具有另外的外部接口或端口,比如以下中的一个或多个:串行或并行接口或端口、USB、Centronics端口、火线、HDMI、以太网、蓝牙、RFID、Wi-Fi、USART或SPI、或者模拟接口或端口,比如ADC或DAC中的一个或多个,或者到其他装置(比如使用RGB接口(比如CameraLink)的2D相机装置)的标准化接口或端口。评估装置和/或数据处理装置可以进一步通过处理器间接口或端口、FPGA-FPGA接口、或者串行或并行接口端口中的一个或多个来连接。评估装置和数据处理装置可以进一步连接到光盘驱动器、CD-RW驱动器、DVD+RW驱动器、闪存驱动器、存储卡、磁盘驱动器、硬盘驱动器、固态盘或固态硬盘中的一个或多个。
评估装置和/或数据处理装置可以通过一个或多个另外的外部连接器连接或具有一个或多个另外的外部连接器,比如电话连接器、RCA连接器、VGA连接器、雌雄同体连接器、USB连接器、HDMI连接器、8P8C连接器、BCN连接器、IEC 60320 C14连接器、光纤连接器、D-超小型连接器、RF连接器、同轴连接器、SCART连接器、XLR连接器中的一个或多个,和/或可以合并有用于这些连接器中的一个或多个连接器的至少一个合适的插座。
评估装置可以被配置用于执行至少一种图像分析和/或图像处理以便识别光点。图像分析和/或图像处理可以使用至少一种特征检测算法、特别是光点检测算法。
评估装置可以被配置用于从光点的图像确定一维或二维强度分布,特别是通过评估相机像素的强度值。评估装置可以被配置用于确定强度分布的质心。
该方法包括通过使用评估装置将所确定的强度分布与至少一种预定义和/或预先已知的强度分布进行比较。术语“预定义和/或预先已知的强度分布”可以是指完整的强度分布,比如作为x和y中至少一个的函数的强度,和/或是指表征强度分布的至少一种特性,比如质心的目标位置。预定义和/或预先已知的强度分布可以是正确对准的发射器阵列的强度分布和/或强度分布的质心的目标位置。预定义和/或预先已知的强度分布可以存储在评估装置的至少一个数据库中。例如,将正确对准的发射器阵列的强度分布的质心的目标位置与成像的强度分布的质心进行比较。在所确定的强度分布与预定义和/或预先已知的强度分布的偏差超过至少一个公差范围的情况下,该方法包括比如通过改变倾斜角度(特别是倾斜发射器阵列)来机械地适配发射器阵列的取向。否则,即,在所确定的强度分布与预定义和/或预先已知的强度分布的偏差在至少一个公差范围内的情况下,该方法可以继续进行步骤b)。公差范围可以是±10%、优选地±5%、更优选地±2%。
在步骤b1)中,在正确对准发射器阵列之后,标记光点的中心位置。标记可以包括对中心位置施加至少一个标记,比如至少一个突出显示、至少一个十字等。标记可以手动或自动执行。
传递装置布置在发射器阵列与对象之间。传递装置可以放置在发射器阵列的顶部,使得照射图案变得可见。传递装置的光轴可以是预先已知的并且可以例如机械地对准为垂直于目标屏幕。
在下一步骤中,照射图案的中心(也被表示为0阶)可以与步骤a)的光点的中心位置对准。每个发射器产生光束,并且使用发射器阵列与对象之间的传递装置用光束照射对象的表面,从而在对象上生成照射图案。相机(例如,关于步骤a)描述的至少一个辅助相机或检测器的相机)成像出由照射图案照射的对象的至少一个图像。评估装置被配置用于评估对象的图像,从而确定照射图案的中心。评估装置被配置用于将所确定的中心与所标记的中心位置进行比较。在该中心和所标记的中心位置的偏差超过至少一个公差范围的情况下,通过相对于传递装置平移发射器阵列来使该中心的位置适配于所标记的中心位置。公差范围可以是±10%、优选地±5%、更优选地±2%。在不超过公差范围的情况下,可以维持该中心的位置。
附加地或可替代地,传递装置对准步骤包括步骤b2)。b1)和b2)的组合可以允许获得最佳可能的对准。然而,例如为了节省时间,该方法可以仅包括b1)或b2)之一。
步骤b2)可以开始于将传递装置布置在发射器阵列与对象之间。步骤b2)包括:由每个发射器产生光束;使用发射器阵列与对象之间的传递装置用光束照射对象的表面,从而在对象上生成照射图案;以及通过使用相机(例如,关于步骤a)描述的至少一个辅助相机或检测器的相机)成像出由照射图案照射的对象的至少一个图像。
例如,发射器阵列前面的传递装置可以在目标屏幕上产生照射图案的投影,例如规则的光点图案。对应轴线的未对准(即,传递装置在发射器阵列的前面移动和/或倾斜)可能导致图案变形。因此,这些点以及它们彼此之间的相应位置可以用于确定对准质量。
方法步骤b2)包括评估对象的图像。评估装置可以被配置用于识别由照射图案照射的对象的图像上的照射特征,并且被配置用于确定这些照射特征的相应光点位置和/或网格位置。该评估可以包括确定照射特征的位置及其在相机的图像中相应的网格位置。网格位置可以是照射特征在图案内的位置。评估装置可以包括用于确定光点位置及其网格位置的软件工具,例如,用于光点检测的软件和/或用于将检测到的光点与网格匹配的软件。
照射特征的位置及其相应的网格位置可以用于确定(特别是计算)照射图案的边界框。如本文所使用的,术语“边界框”可以是指区分照射图案的内部和外部的界限。外部可以是周围环境。可以通过使用朝向图案的边缘的一些照射特征来创建边界框。边界框可以具有选自由矩形、圆形、三角形等组成的组中的形状。可以使用具有任何已知形状的边界框,并且可以根据该边界框计算变形。如果变形被消除和/或最小化,则传递装置可以被正确地对准。
步骤b2)包括将所确定的边界框的至少一种特性与目标边界框的至少一种预定义和/或预先已知的特性进行比较。边界框的特性可以与至少一种几何关系相关。目标边界框的预定义和/或预先已知的特性可以存储在评估装置的至少一个数据库中。如本文所使用的,术语“目标边界框”可以是指在传递装置正确对准的情况下的边界框。例如,边界框是矩形的,并且目标边界框满足以下规则:
-矩形的对边相等;
-对角线的中心坐标等于对应边的点坐标的一半。
方法步骤b2)包括在所确定的边界框的特性与预定义和/或预先已知的特性的偏差超过至少一个公差范围的情况下,适配传递装置的位置和/或取向。公差范围可以是±10%、优选地±5%、更优选地±2%。在不超过公差范围的情况下,可以维持传递装置的位置和/或取向。
通过提高投影仪产量并且由于在系统生产期间也无需将相机与投影仪进行主动对准,根据本发明的方法可以实现降低成本。这可以节省大量的时间和金钱。另外,我们的3D传感系统还可以具有更高的性能和更稳健的校准。
在另一方面中,披露了一种用于确定至少一个对象的位置的检测器。
如本文所使用的,术语“检测器”通常可以是指被配置用于确定和/或检测和/或感测至少一个对象的任意传感器装置。检测器可以是固定装置或移动装置。进一步地,检测器可以是独立的装置,也可以形成另一装置(比如,计算机、车辆或任何其他装置)的一部分。进一步地,检测器可以是手持式装置。检测器的其他实施例也是可行的。检测器可以是附接到或集成在移动装置(比如,移动电话或智能电话)中的一种。检测器可以集成在移动装置中,例如在移动装置的外壳内。附加地或可替代地,检测器或检测器的至少一个部件可以比如通过使用如USB等连接器或如耳机插孔等电话连接器来附接到移动装置。
对象可以是被配置为至少部分地反射照射到该对象上的至少一个光束的任意对象,特别是表面或区。光束可以源自投影仪,该投影仪照射对象,其中,光束被对象反射或散射。为了执行根据本发明的方法,对象可以是目标屏幕。然而,在对准之后,对象可以是任何任意对象。
如本文所使用的,术语“位置”可以是指关于对象和/或对象的至少一部分在空间中的位置的至少一项信息。因此,该至少一项信息可以暗示对象的至少一个点与至少一个检测器之间的至少一个距离。该距离可以是对象的点的纵坐标,或者可以有助于确定其纵坐标。附加地或可替代地,可以确定关于对象和/或对象的至少一部分的位置的一项或多项其他信息。作为示例,附加地,可以确定对象和/或对象的至少一部分的至少一个横坐标。因此,对象的位置可以暗示对象和/或对象的至少一部分的至少一个纵坐标。附加地或可替代地,对象的位置可以暗示对象和/或对象的至少一部分的至少一个横坐标。此外,位置可以暗示关于对象在空间中的取向的信息。如本文所使用的,术语“取向”是指对象在空间中的角位置。取向可以由三个空间角度给出。
该检测器包括
-至少一个投影仪,该至少一个投影仪用于利用包括多个照射特征的至少一个照射图案来照射至少一个对象,其中,该投影仪包括至少一个发射器阵列,其中,这些发射器中的每一个被配置用于产生至少一个光束,其中,该投影仪包括至少一个传递装置,该传递装置被配置用于从照射在该传递装置上的光束产生这些照射特征;
-至少一个相机,该至少一个相机具有至少一个传感器元件,该至少一个传感器元件具有光学传感器矩阵,这些光学传感器各自具有光敏区域,其中,每个光学传感器被设计为响应于由响应于该照射图案的照射而产生的从该对象传播到该相机的反射光束对该光学传感器的相应光敏区域的照射而生成至少一个传感器信号,其中,该相机被配置用于成像出至少一个反射图像,该至少一个反射图像包括由该对象响应于由这些照射特征的照射而产生的多个反射特征,其中,这些反射特征中的每一个反射特征包括至少一个射束剖面;
-至少一个评估装置,该至少一个评估装置被配置用于通过对这些反射特征中的每一个反射特征的相应射束剖面的分析来确定该每一个反射特征的至少一个纵坐标。
检测器被配置用于执行根据本发明(比如根据上文披露的一个或多个实施例或根据下文进一步详细披露的一个或多个实施例)的用于对准投影仪的光学部件的方法。细节、选项和定义可以参考上文讨论的方法。
如本文所使用的,术语“传感器元件”通常可以是指被配置用于感测至少一个参数的装置、或多个装置的组合。在这种情况下,参数具体地可以为光学参数,并且传感器元件具体地可以为光学传感器元件。传感器元件可以形成为整体的单个装置或者形成为若干装置的组合。具体地,矩阵可以是或者可以包括具有一行或多行和一列或多列的矩形矩阵。具体地,行和列可以以矩形方式布置。然而,其他布置也是可行的,比如非矩形布置。作为示例,圆形布置也是可行的,其中,元件围绕中心点布置成同心圆或椭圆形。例如,矩阵可以是单行像素。其他布置也是可行的。
如本文所使用的,“光学传感器”通常可以是指用于检测光束(比如用于检测由至少一个光束生成的照射和/或光斑)的光敏装置。如本文进一步使用的,“光敏区域”通常是指光学传感器的可以由至少一个光束从外部照射的区域,响应于该照射,生成该至少一个传感器信号。光敏区域具体地可以位于相应光学传感器的表面上。然而,其他实施例也是可行的。具体地,矩阵的光学传感器在尺寸、敏感性和其他光学特性、电特性和机械特性中的一个或多个方面可以相同。具体地,矩阵的所有光学传感器的光敏区域可以位于公共平面内,该公共平面优选面向对象,使得从对象传播到检测器的光束可以在该公共平面上产生光斑。
如本文所使用的,术语“各自具有至少一个光敏区域的光学传感器”是指各自具有一个光敏区域的多个单一光学传感器的配置以及具有多个光敏区域的一个组合光学传感器的配置。因此,术语“光学传感器”还是指被配置为生成一个输出信号的光敏装置,而在本文中,被配置为生成两个或更多个输出信号的光敏装置(例如至少一个CCD和/或CMOS器件)被称为两个或更多个光学传感器。每个光学传感器可以被实施为使得在相应光学传感器中存在恰好一个光敏区域,比如通过提供恰好一个可以被照射的光敏区域,响应于该照射,为整个光学传感器生成恰好一个统一的传感器信号。因此,每个光学传感器可以是单区域光学传感器。然而,单区域光学传感器的使用使得检测器的设置具体地变得特别简单和高效。因此,作为示例,可以在设置中使用各自仅具有一个敏感区域的可商购的光电传感器,比如可商购的硅光电二极管。然而,其他实施例也是可行的。因此,作为示例,可以使用包括两个、三个、四个或多于四个的光敏区域的光学装置,该光学装置在本发明的上下文中被视为两个、三个、四个或多于四个的光学传感器。如上所述,传感器元件包括光学传感器的矩阵。因此,作为示例,光学传感器可以是像素化光学装置的一部分或构成像素化光学装置。作为示例,光学传感器可以是至少一个具有像素矩阵的CCD和/或CMOS器件的一部分或构成至少一个CCD和/或CMOS器件,每个像素形成一个光敏区域。
具体地,光学传感器可以是或可以包括光电检测器,优选为无机光电检测器,更优选为无机半导体光电检测器,最优选为硅光电检测器。具体地,光学传感器可以在红外光谱范围内是敏感的。具体地,矩阵的所有光学传感器或者矩阵的至少一组光学传感器可以是相同的。具体地,可以针对不同的光谱范围提供矩阵中的多组相同的光学传感器,或者所有光学传感器在光谱敏感度方面可以是相同的。进一步地,光学传感器在尺寸上和/或在它们的电子或光电特性方面可以是相同的。
具体地,光学传感器可以是或者可以包括在红外光谱范围内、优选地在780nm至3.0微米的范围内具有敏感性的无机光电二极管。具体地,光学传感器可以在硅光电二极管适用的近红外区的部分中(具体地是在700nm至1000nm的范围内)是敏感的。可以用于光学传感器的红外光学传感器可以是可商购的红外光学传感器,比如可从德国莱茵河畔路德维希港(D-67056)的trinamiX GmbH公司以商品名HertzstueckTM商购的红外光学传感器。因此,作为示例,光学传感器可以包括至少一个本征光伏型的光学传感器,更优选地选自由以下各项组成的组中的至少一个半导体光电二极管:Ge光电二极管、InGaAs光电二极管、扩展型InGaAs光电二极管、InAs光电二极管、InSb光电二极管、HgCdTe光电二极管。附加地或可替代地,光学传感器可以包括至少一个非本征光伏型的光学传感器,更优选地选自由以下各项组成的组中的至少一个半导体光电二极管:Ge:Au光电二极管、Ge:Hg光电二极管、Ge:Cu光电二极管、Ge:Zn光电二极管、Si:Ga光电二极管、Si:As光电二极管。附加地或可替代地,光学传感器可以包括至少一个辐射热计,优选地选自由VO辐射热计和非晶Si辐射热计组成的组中的辐射热计。
矩阵可以由独立的光学传感器组成。因此,矩阵可以由无机光电二极管组成。然而,可替代地,可以使用可商购矩阵,比如CCD检测器(比如CCD检测器芯片)和/或CMOS检测器(比如CMOS检测器芯片)中的一者或多者。
因此,一般来说,检测器的光学传感器可以形成传感器阵列,或者可以是传感器阵列(比如上述矩阵)的一部分。因此,作为示例,检测器可以包括光学传感器的阵列,比如具有m行和n列的矩形阵列,其中,m、n分别为正整数。优选地多于一列和多于一行,即,n>1,m>1。因此,作为示例,n可以是2至16或更高,并且m可以是2至16或更高。优选地,行数与列数之比接近1。作为示例,可以将n和m选择成使得0.3≤m/n≤3,比如通过选择m/n=1:1、4:3、16:9等等。作为示例,阵列可以是具有相同数量的行和列的正方形阵列,比如通过选择m=2、n=2或m=3、n=3等。
具体地,矩阵可以为具有至少一行(优选地多行)和多列的矩形矩阵。作为示例,行和列可以基本上垂直地定向,其中,关于术语“基本上垂直”,可以参考上文给出的定义。因此,作为示例,小于20°、具体地小于10°或者甚至小于5°的公差可以是可接受的。为了提供宽范围的视野,矩阵具体地可以具有至少10行,优选地至少50行,更优选地至少100行。类似地,矩阵可以具有至少10列,优选地至少50列,更优选地至少100列。矩阵可以包括至少50个光学传感器,优选地至少100个光学传感器,更优选地至少500个光学传感器。矩阵可以包括数百万像素范围内的像素数量。然而,其他实施例也是可行的。因此,在预期具有轴向旋转对称的设置中,矩阵的光学传感器(也可以称为像素)的圆形布置或同心布置可能是优选的。
优选地,传感器元件可以基本上垂直于检测器的光轴定向。再次,关于术语“基本上垂直”,可以参考上文给出的定义和公差。光轴可以是笔直的光轴,或可以是弯曲的或甚至是分离的(比如通过使用一个或多个偏转元件和/或通过使用一个或多个分束器),其中,在后一种情况下,基本上垂直的取向可以是指光学设置的相应分支或射束路径中的局部光轴。
反射光束可以从对象向相机传播。反射光束可以源自对象。投影仪可以利用至少一个照射图案来照射对象,并且光被对象再发射、反射和/或散射,并且由此至少部分地作为反射光束被引导至相机。
具体地,反射光束可以完全照射传感器元件,使得传感器元件完全位于光束内,其中,光束的宽度大于矩阵。反之,优选地,反射光束具体地可以在整个矩阵上产生小于矩阵的光斑,使得光斑完全位于矩阵内。这种情况可以由光学领域的技术人员通过选择对光束具有聚焦或散焦效果的一个或多个合适的透镜或元件(比如通过使用合适的另外的传递装置)来容易地调整。
具体地,光敏区域可以定向为朝向对象。如本文所使用的,术语“定向为朝向对象”通常是指从对象上完全或部分可见光敏区域的相应表面的情况。具体地,对象的至少一点与相应的光敏区域的至少一点之间的至少一条互连线可以与光敏区域的表面元件形成不为0°的角度,比如角度在20°至90°范围内,优选地80°至90°,比如90°。因此,当对象位于光轴上或接近光轴时,从对象向检测器传播的光束可以基本上平行于光轴。如本文所使用的,术语“基本上垂直”是指垂直取向的状况,公差为例如±20°或更小,优选地公差为±10°或更小,更优选公差为±5°或更小。类似地,术语“基本上平行”是指平行取向的条件,公差例如为±20°或更小,优选地公差为±10°或更小,更优选地公差为±5°或更小。
光学传感器可以在紫外光谱范围、可见光谱范围或红外光谱范围中的一个或多个光谱范围中是敏感的。具体地,光学传感器可以在500nm至780nm的可见光谱范围内、最优选地在650nm至750nm或在690nm至700nm是敏感的。具体地,光学传感器可以在近红外区中是敏感的。具体地,光学传感器可以在硅光电二极管适用的近红外区的部分中(具体地是在700nm至1000nm的范围内)是敏感的。具体地,光学传感器可以在红外光谱范围内、具体地在780nm至3.0微米的范围内是敏感的。例如,光学传感器均独立地可以是或者可以包括选自由光电二极管、光电池、光电导体、光电晶体管或以上各项的任意组合组成的组中的至少一个元件。例如,光学传感器可以是或者可以包括选自由CCD传感器元件、CMOS传感器元件、光电二极管、光电池、光电导体、光电晶体管或以上各项的任意组合组成的组中的至少一个元件。可以使用任何其他类型的光敏元件。如下面将进一步详细概述的,光敏元件通常可以完全或部分地由无机材料制成和/或可以完全或部分地由有机材料制成。最常见的是,可以使用一个或多个光电二极管,比如可商购的光电二极管,例如无机半导体光电二极管。
如本文进一步使用的,“传感器信号”通常是指由光学传感器响应于光束的照射而生成的信号。具体地,传感器信号可以是或者可以包括至少一个电信号,比如至少一个模拟电信号和/或至少一个数字电信号。更具体地,传感器信号可以是或者可以包括至少一个电压信号和/或至少一个电流信号。更具体地,传感器信号可以包括至少一个光电流。进一步地,可以使用原始传感器信号,或者检测器、光学传感器或任何其他元件可以被配置用于处理或预处理传感器信号(比如通过滤波等进行预处理),从而生成次级传感器信号,这些次级传感器信号也可以用作传感器信号。
检测器可以包括至少一个辅助相机。投影仪可以布置在对象的一侧,并且辅助相机布置在对象的相反侧。
如本文所使用的,术语“反射图像”通常可以是指由光学传感器确定的包括多个反射特征的图像。如本文所使用的,术语“反射特征”通常可以是指由对象响应于利用至少一个照射特征进行照射而产生的图像平面中的特征。反射图像可以包括包含反射特征的至少一个反射图案。如本文所使用的,术语“成像出至少一个反射图像”是指捕获、记录以及生成反射图像中的一项或多项。
这些反射特征中的每一个反射特征包括至少一个射束剖面。如本文所使用的,术语“射束剖面”通常可以是指光束强度的空间分布,特别是在垂直于光束传播的至少一个平面中的空间分布。射束剖面可以是光束的横向强度剖面。射束剖面可以是光束的截面。射束剖面可以选自由以下各项组成的组:梯形射束剖面;三角形射束剖面;圆锥形射束剖面、以及高斯射束剖面的线性组合。然而,其他实施例也是可行的。
评估装置可以被配置用于选择相应的第一和第二反射图像的反射特征。如本文所使用的,术语“选择至少一个反射特征”通常可以是指识别、确定以及选择反射图像的至少一个反射特征中的一项或多项。评估装置可以被配置用于执行至少一种图像分析和/或图像处理以便识别反射特征。图像分析和/或图像处理可以使用至少一种特征检测算法。图像分析和/或图像处理可以包括以下一项或多项:滤波;选择至少一个关注区;形成由传感器信号创建的图像与至少一个偏移之间的差分图像;通过反转由传感器信号创建的图像来反转传感器信号;形成由传感器信号在不同时间创建的图像之间的差分图像;背景校正;分解为颜色通道;分解为色调;饱和度;以及亮度通道;频率分解;奇异值分解;应用Canny边缘检测器;应用高斯拉普拉斯滤波器;应用高斯差分滤波器;应用Sobel算子;应用拉普拉斯算子;应用Scharr算子;应用Prewitt算子;应用罗伯茨算子;应用Kirsch算子;应用高通滤波器;应用低通滤波器;应用傅里叶变换;应用Radon变换;应用霍夫变换;应用小波变换;阈值化;创建二值图像。关注区可以是由用户手动确定的或可以是比如通过识别由光学传感器生成的图像内的对象来自动确定的。
评估装置可以被配置用于执行至少一种图像校正。图像校正可以包括至少一种背景减除。评估装置可以适于例如通过在没有另外的照射的情况下成像来从射束剖面中去除背景光的影响。
检测器可以包括至少一个另外的传递装置,其被配置用于将光束引导到光学传感器上并且用于在传感器元件上形成反射图像。检测器可以进一步包括一个或多个附加元件,比如一个或多个附加光学元件。另外的传递装置可以适于改变光束,比如通过改变光束的射束参数、光束的宽度或光束的方向中的一个或多个。另外的传递装置可以适于将光束引导到光学传感器上。另外的传递装置具体地可以包括以下各项中的一项或多项:至少一个透镜,例如选自由至少一个可调焦透镜、至少一个非球面透镜、至少一个球面透镜、至少一个菲涅耳透镜组成的组中的至少一个透镜;至少一个衍射光学元件;至少一个凹面镜;至少一个射束偏转元件,优选为至少一个反射镜;至少一个分束元件,优选为分束立方体或分束镜中的至少一者;至少一个多透镜系统;至少一个全息光学元件;至少一个超构光学元件。另外的传递装置可以具有焦距。如本文所使用的,另外的传递装置的术语“焦距”是指可以照射在传递装置上的入射准直射线“聚焦”(也可以表示为“焦点”)的距离。因此,焦距构成另外的传递装置使照射光束会聚的能力的量度。因此,另外的传递装置可以包括一个或多个成像元件,成像元件可以具有会聚透镜的作用。例如,另外的传递装置可以具有一个或多个透镜,特别是一个或多个折射透镜、和/或一个或多个凸面镜。在这个示例中,焦距可以被定义为从薄折射透镜的中心到薄透镜的主焦点的距离。对于会聚薄折射透镜(比如凸或双凸薄透镜),焦距可以被认为是正的并且可以提供当照射在作为传递装置的薄透镜上的准直光束可以聚焦成单个光斑的距离。附加地,另外的传递装置可以包括至少一个波长选择元件,例如至少一个光学滤波器。附加地,另外的传递装置可以被设计为例如在传感器区、特别是传感器区域的位置处对电磁辐射施加预定义的射束剖面。原则上,另外的传递装置的上述可选实施例可以单独地或以任何期望的组合来实现。
另外的传递装置可以具有光轴。特别地,检测器和另外的传递装置具有公共光轴。如本文所使用的,术语“另外的传递装置的光轴”通常是指透镜或透镜系统的镜面对称轴线或旋转对称轴线。检测器的光轴可以是检测器的光学设置的对称线。例如,该检测器包括至少一个另外的传递装置,优选地具有至少一个透镜的至少一个传递系统。作为示例,另外的传递系统可以包括至少一个射束路径,该射束路径中的传递系统元件相对于光轴以旋转对称的方式定位。然而,位于射束路径内的一个或多个光学元件也可以相对于光轴偏心或倾斜。然而,在这种情况下,可以顺序地限定光轴,比如通过将射束路径中的光学元件的中心互连,例如通过将透镜的中心互连,其中,在本上下文中,光学传感器不被算作光学元件。光轴通常可以表示射束路径。其中,检测器可以具有单个射束路径,光束可以沿着该单个射束路径从对象行进到光学传感器,也可以具有多个射束路径。作为示例,可以给出单个射束路径,也可以将射束路径分离成两个或更多个部分射束路径。在后一种情况下,每个部分射束路径可以具有其自己的光轴。光学传感器可以位于同一个射束路径或部分射束路径中。然而,可替代地,光学传感器也可以位于不同的部分射束路径中。
另外的传递装置可以构成坐标系,其中,纵坐标是沿光轴的坐标。坐标系可以是极坐标系,其中传递装置的光轴形成z轴,并且其中,距Z轴的距离、以及极角可以用作附加坐标。例如,传递装置可以构成坐标系,其中,检测器的光轴形成z轴,并且其中,附加地,可以设置垂直于z轴且彼此垂直的x轴和y轴。作为示例,检测器可以停留在该坐标系中的特定点处,比如该坐标系的原点处。平行于或反平行于z轴的方向可以被认为是纵向方向,并且沿着z轴的坐标可以被认为是纵坐标。垂直于z轴的任何方向可以被认为是横向方向,并且极坐标和/或极角可以被认为是横坐标。可替代地,可以使用其他类型的坐标系。因此,作为示例,可以使用极坐标系,其中,光轴形成z轴,并且其中,距z轴的距离、以及极角可以用作附加坐标。同样,平行于或反平行于z轴的方向可以被认为是纵向方向,并且沿着z轴的坐标可以被认为是纵坐标。垂直于z轴的任何方向可以被认为是横向方向,并且极坐标和/或极角可以被认为是横坐标。
评估装置可以被配置用于通过使用光子比率深度技术(也被表示为射束剖面分析)来确定这些反射特征中的每一个反射特征的纵坐标。关于光子比率深度(DPR)技术,请参考以下文献:WO 2018/091649 A1;WO 2018/091638A1;WO 2018/091640A1;以及C.Lennartz、F.Schick、S.Metz的“Whitepaper-Beam Profile Analysis for 3D imagingand material detection[白皮书-用于3D成像和材料检测的射束剖面分析]”,2021年4月28日,德国路德维希港,这些文献的完整内容通过引用包括在本文中。
评估装置被配置用于通过对这些反射特征的射束剖面的分析确定其中每一个反射特征的至少一个纵坐标,也表示为zDPR。如本文所使用的,术语“射束剖面的分析”通常可以是指射束剖面的评估,并且可以包括至少一个数学运算和/或至少一个比较和/或至少一个对称化和/或至少一个滤波和/或至少一个归一化。例如,射束剖面的分析可以包括直方图分析步骤、差异量度的计算、神经网络的应用、机器学习算法的应用中的至少一个。评估装置可以被配置用于将射束剖面对称化和/或归一化和/或滤波,特别是去除来自在较大角度的、记录边缘等下的记录的噪声或不对称性。评估装置可以通过去除高空间频率(比如通过空间频率分析和/或中值滤波等)来对射束剖面滤波。可以通过光斑的强度中心并对距中心相同距离处的所有强度进行平均来执行汇总。评估装置可以被配置用于将射束剖面归一化至最大强度,特别是考虑由于所记录的距离而导致的强度差异。评估装置可以被配置用于例如通过在没有照射的情况下成像来从射束剖面中去除背景光的影响。
反射特征可以覆盖图像的至少一个像素或者可以延伸于其上。例如,反射特征可以覆盖多个像素或者可以延伸于其上。评估装置可以被配置用于确定和/或选择连接到和/或属于反射特征(例如光斑)的所有像素。评估装置可以被配置用于通过下式确定强度中心:
其中,Rcoi是强度中心的位置,rpixel是像素位置,并且l=∑jItotal,其中,j是连接到和/或属于反射特征的像素的数量j,并且Itotal是总强度。
评估装置可以被配置用于确定这些反射特征中的每一个反射特征的射束剖面。如本文所使用的,术语“确定射束剖面”是指识别由光学传感器提供的至少一个反射特征和/或选择由光学传感器提供的至少一个反射特征,并评估该反射特征的至少一个强度分布。作为示例,可以使用和评估矩阵区来确定强度分布,比如三维强度分布或二维强度分布,比如沿穿过矩阵的轴线或线。作为示例,可以比如通过确定具有最高照射度的至少一个像素来确定光束的照射中心,并且可以通过照射中心选择截面轴线。强度分布可以是随着沿穿过照射中心的该截面轴线的坐标而变化的强度分布。其他评估算法也是可行的。
这些反射特征之一的射束剖面的分析可以包括确定射束剖面的至少一个第一区域和至少一个第二区域。射束剖面的第一区域可以是区域A1并且射束剖面的第二区域可以是区域A2。评估装置可以被配置用于对第一区域和第二区域积分。评估装置可以被配置为通过以下各项中的一项或多项得出组合信号Q(也表示为商Q):经积分的第一区域和经积分的第二区域相除,经积分的第一区域和经积分的第二区域的倍数相除,经积分的第一区域和经积分的第二区域的线性组合相除。
评估装置可以被配置用于确定射束剖面的至少两个区域和/或将射束剖面分段成包括射束剖面的不同区域的至少两个部段,其中,只要这些区域不全等,这些区域的重叠就可以是可能的。例如,评估装置可以被配置用于确定多个区域,比如两个、三个、四个、五个或最多十个区域。评估装置可以被配置用于将光斑分段成射束剖面的至少两个区域和/或将射束剖面分段成包括射束剖面的不同区域的至少两个部段。评估装置可以被配置用于针对区域中的至少两个确定射束剖面在相应区域上的积分。评估装置可以被配置用于比较所确定的积分中的至少两个。具体地,评估装置可以被配置用于确定射束剖面的至少一个第一区域和至少一个第二区域。如本文所使用的,术语“射束剖面的区域”通常是指用于确定组合信号的光学传感器的位置处的射束剖面的任意区。射束剖面的第一区域和射束剖面的第二区域可以是相邻或重叠区中的一者或两者。射束剖面的第一区域和射束剖面的第二区域可以在面积上不全等。例如,评估装置可以被配置用于将传感器元件的传感器区划分为至少两个子区,其中,评估装置可以被配置用于将传感器元件的传感器区划分为至少一个左侧部分和至少一个右侧部分和/或至少一个上部部分和至少一个下部部分和/或至少一个内部部分和至少一个外部部分。附加地或可替代地,检测器可以包括至少两个光学传感器,其中,第一光学传感器的光敏区域和第二光学传感器的光敏区域可以被布置为使得第一光学传感器适于确定反射特征的射束剖面的第一区域,并且第二光学传感器适于确定反射特征的射束剖面的第二区域。评估装置可以适于对第一区域和第二区域积分。
射束剖面的第一区域可以包括射束剖面的基本上边缘信息,并且射束剖面的第二区域包括射束剖面的基本上中心信息,和/或射束剖面的第一区域可以包括基本上关于射束剖面的左侧部分的信息,并且射束剖面的第二区域包括基本上关于射束剖面的右侧部分的信息。射束剖面可以具有中心(即射束剖面的最大值和/或射束剖面的高台的中心点和/或光斑的几何中心)、以及从中心延伸的下降边缘。第二区可以包括截面的内部区并且第一区可以包括截面的外部区。如本文所使用的,术语“基本上中心信息”通常是指与中心信息的比例(即,对应于中心的强度分布的比例)相比,边缘信息的比例(即,对应于边缘的强度分布的比例)低。优选地,中心信息具有不到10%、更优选地不到5%的边缘信息比例,最优选地中心信息不包括边缘内容。如本文所使用的,术语“基本上边缘信息”通常是指与边缘信息的比例相比,中心信息的比例低。边缘信息可以包括整个射束剖面的信息,特别是来自中心和边缘区的信息。边缘信息可以具有不到10%、优选地不到5%的中心信息比例,更优选地边缘信息不包括中心内容。如果射束剖面的至少一个区域靠近或围绕中心并且包括基本上中心信息,则可以将该区域确定和/或选择为射束剖面的第二区域。如果射束剖面的至少一个区域包括截面的下降边缘的至少多个部分,则可以将该区域确定和/或选择为射束剖面的第一区域。例如,可以将截面的整个区域确定为第一区。
第一区域A1和第二区域A2的其他选择也可以是可行的。例如,第一区域可以包括射束剖面的基本上外部区,并且第二区域可以包括射束剖面的基本上内部区。例如,在二维射束剖面的情况下,射束剖面可以划分为左侧部分和右侧部分,其中,第一区域可以包括基本上射束剖面的左侧部分的区域,并且第二区域可以包括基本上射束剖面的右侧部分的区域。
边缘信息可以包括与射束剖面的第一区域中的光子数量有关的信息,并且中心信息可以包括与射束剖面的第二区域中的光子数量有关的信息。评估装置可以被配置用于确定射束剖面的面积积分。评估装置可以被配置用于通过对第一区域进行积分和/或求和来确定边缘信息。评估装置可以被配置用于通过对第二区域进行积分和/或求和来确定中心信息。例如,射束剖面可以是梯形射束剖面,并且评估装置可以被配置用于确定梯形的积分。进一步地,当可以假设梯形射束剖面时,对边缘信号和中心信号的确定可以被替换为利用对梯形射束剖面的特性进行的等效评估,比如确定边缘的斜率和位置以及中心高台的高度并通过几何考虑得出边缘信号和中心信号。
在一个实施例中,A1可以对应于特征点在光学传感器上的全部或完整区域。A2可以是特征点在光学传感器上的中心区域。中心区域可以是恒定值。与特征点的整个区域相比,中心区域可以更小。例如,在圆形特征点的情况下,中心区域的半径可以为特征点全半径的0.1至0.9,优选地为全半径的0.4至0.6。
在一个实施例中,照射图案可以至少包括点图案。A1可以对应于点图案在光学传感器上的点的全半径的区域。A2可以是点图案中在光学传感器上的点的中心区域。中心区域可以是恒定值。中心区域可以具有与全半径相比的半径。例如,中心区域的半径可以为全半径的0.1至0.9,优选地为全半径的0.4至0.6。
评估装置可以被配置为通过以下各项中的一项或多项得出商Q:第一区域和第二区域相除,第一区域和第二区域的倍数相除,第一区域和第二区域的线性组合相除。评估装置可以被配置用于通过下式得出商Q:
其中,x和y是横坐标,A1和A2分别是射束剖面的第一区域和第二区域,E(x,y)表示射束剖面。
附加地或可替代地,评估装置可以适于根据光斑的至少一个切片或切割确定中心信息或边缘信息中的一者或两者。这可以例如通过用沿切片或切割的线积分代替商Q中的面积积分来实现。为了提高准确性,可以使用光斑的若干个切片或切割并对其进行平均。在椭圆形光斑剖面的情况下,对若干个切片或切割进行平均可以得到改进的距离信息。
例如,在光学传感器具有像素矩阵的情况下,评估装置可以被配置用于通过以下方式评估射束剖面:
-确定具有最高传感器信号的像素并形成至少一个中心信号;
-评估矩阵的传感器信号并形成至少一个总和信号;
-通过将中心信号与总和信号相组合来确定商Q;以及
-通过评估商Q来确定对象的至少一个纵坐标z。
传感器信号可以是由光学传感器和/或光学传感器的至少一个像素响应于照射而生成的信号。具体地,传感器信号可以是或者可以包括至少一个电信号,比如至少一个模拟电信号和/或至少一个数字电信号。更具体地,传感器信号可以是或者可以包括至少一个电压信号和/或至少一个电流信号。更具体地,传感器信号可以包括至少一个光电流。进一步地,可以使用原始传感器信号,或者检测器、光学传感器或任何其他元件可以适于处理或预处理传感器信号(比如通过滤波等进行预处理),从而生成次级传感器信号,这些次级传感器信号也可以用作传感器信号。术语“中心信号”通常是指包括射束剖面的基本上中心信息的至少一个传感器信号。如本文所使用的,术语“最高传感器信号”是指局部最大值或关注区中的最大值中的一者或两者。例如,中心信号可以是在整个矩阵中或矩阵内关注区中的像素生成的多个传感器信号中具有最高传感器信号的像素的信号,其中,该关注区可以是预定的或可在由矩阵的像素生成的图像内确定。中心信号可以源自单一像素或一组光学传感器,其中,在后一种情况下,作为示例,该组像素的传感器信号可以被相加、积分或平均,以便确定中心信号。产生中心信号的该组像素可以是一组相邻的像素,比如与具有最高传感器信号的实际像素相距小于预定距离的像素,也可以是生成的传感器信号在最高传感器信号的预定范围内的一组像素。可以以尽可能大的方式来选择产生中心信号的该组像素,以便允许最大动态范围。评估装置可以适于通过对多个传感器信号(例如具有最高传感器信号的像素周围的多个像素)进行积分来确定中心信号。例如,射束剖面可以是梯形射束剖面,并且评估装置可以适于确定梯形的积分,特别是梯形的高台的积分。
如上所述,中心信号通常可以是单个传感器信号,比如来自光斑中心的像素的传感器信号,也可以是多个传感器信号的组合,比如,由光斑中心的像素产生的传感器信号的组合,还可以是通过处理由一种或多种上述可能性得出的传感器信号而得出的次级传感器信号。由于常规电子设备能相当简单地实施传感器信号的比较,因此中心信号的确定可以以电子方式执行,或者可以完全或部分地通过软件执行。具体地,中心信号可以选自由以下各项组成的组:最高传感器信号;处于与最高传感器信号的预定公差范围内的一组传感器信号的平均值;来自一组像素(其包含具有最高传感器信号的像素和一组预定的相邻像素)的传感器信号的平均值;来自一组像素(其包含具有最高传感器信号的像素和一组预定的相邻像素)的传感器信号的总和;处于与最高传感器信号的预定公差范围内的一组传感器信号的总和;高于预定阈值的一组传感器信号的平均值;高于预定阈值的一组传感器信号的总和;来自一组光学传感器(其包含具有最高传感器信号的光学传感器和一组预定的相邻像素)的传感器信号的积分;处于与最高传感器信号的预定公差范围内的一组传感器信号的积分;高于预定阈值的一组传感器信号的积分。
类似地,术语“总和信号”通常是指包括射束剖面的基本上边缘信息的信号。例如,可以通过将传感器信号相加、对传感器信号进行积分或者对整个矩阵中或矩阵内的关注区中的传感器信号求平均来得出总和信号,其中,该关注区可以是预定的或可在由矩阵的光学传感器生成的图像内确定。当对传感器信号进行相加、积分或平均时,生成传感器信号的实际光学传感器可以被排除在相加、积分或平均之外,可替代地,其也可以被包括在相加、积分或平均中。评估装置可以适于通过对整个矩阵中或矩阵内的关注区中的信号进行积分来确定总和信号。例如,射束剖面可以是梯形射束剖面,并且评估装置可以适于确定整个梯形的积分。进一步地,当可以假设梯形射束剖面时,对边缘信号和中心信号的确定可以被替换为利用对梯形射束剖面的特性进行的等效评估,比如确定边缘的斜率和位置以及中心高台的高度并通过几何考虑得出边缘信号和中心信号。
类似地,也可以通过使用射束剖面的部段(比如射束剖面的圆形部段)来确定中心信号和边缘信号。例如,可以通过不经过射束剖面的中心的割线或弦将射束剖面划分为两个部段。因此,一个部段将基本上包含边缘信息,而另一部段将包含基本上中心信息。例如,为了进一步减少中心信号中的边缘信息量,可以进一步从中心信号中减去边缘信号。
商Q可以是通过组合中心信号与总和信号而生成的信号。具体地,该确定可以包括以下各项中的一项或多项:形成中心信号与总和信号的商,反之亦然;形成中心信号的倍数与总和信号的倍数的商,反之亦然;形成中心信号的线性组合与总和信号的线性组合的商,反之亦然。附加地或可替代地,商Q可以包括包含关于中心信号与总和信号之间的比较的至少一项信息的任意信号或信号组合。
如本文所使用的,术语“对象的纵坐标”是指光学传感器与对象之间的距离。评估装置可以被配置用于使用组合信号与纵坐标之间的至少一个预定关系来确定纵坐标。该预定关系可以是经验关系、半经验关系和分析得出的关系中的一个或多个。评估装置可以包括至少一个数据存储装置,用于存储预定关系,比如查找列表或查找表。
评估装置可以被配置用于执行至少一种光子比率深度算法,该算法计算具有零阶和更高阶的所有反射特征的距离。
评估装置可以被配置用于将所述反射特征指派给对应的发射器。如本文所使用的,术语“将所述反射特征指派给阵列的对应的发射器”通常可以是指特别是明确地确定阵列中已发射引起所选反射特征的照射特征的一个发射器。在已知的3D感测装置(比如使用三角测量或结构光技术的装置)中,解决该对应关系问题是复杂且耗时的。评估装置可以被配置用于通过使用纵坐标zDPR来明确地匹配反射特征与对应的发射器。利用光子比率深度技术确定的纵坐标可以用于解决对应关系问题。这样,可以将每个反射特征的距离信息用于找到已知发射器阵列的对应关系。如本文所使用的,术语“匹配”可以是指识别和/或确定和/或评估对应的发射器和反射特征。如本文所使用的,术语“对应的发射器和反射特征”可以是指这样的事实:照射图案的这些照射特征中的每一个照射特征由发射器之一生成、被投射到对象并由相机成像为反射特征,其中,所成像的反射特征被指派给已生成所述反射特征的照射特征。如本文所使用的,术语“明确地匹配”可以是指只有一个反射特征被指派给一个照射特征(并且因此,发射器),和/或没有其他反射特征可以被指派给相同的匹配照射特征。
可以使用对极几何来确定与反射特征相对应的照射特征(并且因此,发射器)。对于对极几何的描述,请参考例如编者为X.Jiang和H.Bunke的“三维计算机视觉[Dreidimensionales Computersehen]”中第2章,施普林格,柏林海德堡,1997年。对极几何可以假设照射图像(即,未畸变的照射图案的图像)和反射图像可以是在具有固定距离的不同空间位置和/或空间取向处确定的图像。该距离可以是相对距离,也表示为基线。照射图像也可以被表示为参考图像。评估装置可以适于确定参考图像中的对极线。参考图像和反射图像的相对位置可以是已知的。例如,参考图像和反射图像的相对位置可以存储在评估装置的至少一个存储单元内。评估装置可以适于确定从反射图像的所选反射特征延伸到该反射特征所源自的真实世界特征的直线。因此,该直线可以包括与所选反射特征相对应的可能对象特征。该直线和基线张成对极平面。由于参考图像是在与反射图像不同的相对星座处确定的,因此对应的可能对象特征可能被成像在参考图像中的一条直线上,这条直线被称为对极线。对极线可以是对极平面与参考图像的相交。因此,与反射图像的所选特征相对应的参考图像的特征位于对极线上。
取决于距已反射照射特征的对象的距离,与照射特征相对应的反射特征可以在反射图像内位移。参考图像可以包括至少一个位移区,与所选反射特征相对应的照射特征将被成像在该区中。位移区可以仅包括一个照射特征。位移区还可以包括多于一个照射特征。位移区可以包括对极线或对极线的一部分。位移区可以包括多于一条对极线或多于一条对极线的多个部分。位移区可以沿着对极线延伸、正交于对极线延伸或以这两种方式延伸。评估装置可以适于确定沿着对极线的照射特征。评估装置可以适于根据组合信号Q确定反射特征的纵坐标z以及误差间隔±ε,以便确定沿着对极线的与z±ε相对应的位移区或者与对极线正交的位移区。使用组合信号Q进行距离测量的测量不确定度可能导致第二图像中非圆形的位移区,因为测量不确定度在不同方向上可能不同。具体地,沿着一条或多条对极线的测量不确定度可能大于在相对于一条或多条对极线的正交方向上的测量不确定度。位移区可以包括在相对于一条或多条对极线的正交方向上的延伸。评估装置可以适于将所选反射特征与位移区内的至少一个照射特征进行匹配。评估装置可以适于在考虑所确定的纵坐标zDPR的情况下通过使用至少一种评估算法来将反射图像的所选特征与位移区内的照射特征进行匹配。评估算法可以是线性缩放算法。评估装置可以适于确定与位移区最接近和/或在位移区内的对极线。评估装置可以适于确定与反射特征的图像位置最接近的对极线。沿着对极线的位移区的范围可以大于与对极线正交的位移区的范围。评估装置可以适于在确定对应的照射特征之前确定对极线。评估装置可以确定每个反射特征的图像位置周围的位移区。评估装置可以适于向反射特征的每个图像位置的每个位移区指派对极线,比如通过指派与位移区最接近和/或在位移区内和/或与沿正交于对极线的方向的位移区最接近的对极线。评估装置可以适于通过确定与指派位移区最接近和/或在指派位移区内和/或与沿指派对极线的指派位移区最接近和/或在沿指派对极线的指派位移区内的照射特征,来确定与反射特征相对应的照射特征。
附加地或可替代地,评估装置可以被配置为执行以下步骤:
-确定每个反射特征的图像位置的位移区;
-向每个反射特征的位移区指派对极线,比如通过指派与位移区最接近和/或在位移区内和/或与沿正交于对极线的方向的位移区最接近的对极线;
-为每个反射特征指派和/或确定至少一个照射特征,比如通过指派与指派位移区最接近和/或在指派位移区内和/或与沿指派对极线的指派位移区最接近和/或在沿指派对极线的指派位移区内的照射特征。
附加地或可替代地,评估装置可以适于在要指派给一个反射特征的多于一条/个对极线和/或照射特征之间进行判定,比如通过比较照射图像内的反射特征和/或对极线的距离,和/或通过比较照射图像内照射特征和/或对极线的误差加权距离(比如ε加权距离),并将距离和/或ε加权距离较短的对极线和/或照射特征指派给照射特征和/或反射特征。
评估装置可以被配置用于通过使用至少一种三角测量方法来确定至少一个纵坐标ztriang。评估装置可以适于确定照射特征和反射特征的位移。评估装置可以适于确定匹配的照射特征和所选反射特征的位移。评估装置(例如评估装置的至少一个数据处理装置)可以被配置为确定照射特征和反射特征的位移,特别是通过比较照射图像和反射图像的相应图像位置。如本文所使用的,术语“位移”可以是指照射图像中的图像位置与反射图像中的图像位置之间的差异。评估装置可以适于使用第二纵坐标与位移之间的预定关系来确定相匹配特征的第二纵坐标。评估装置可以适于通过使用三角测量方法来确定预定关系。用于确定至少一个纵坐标的其他方法(比如离焦深度和/或结构光技术)也是可能的。
在另一方面中,披露了一种被配置用于确定至少一个对象的位置的移动装置。该移动装置包括至少一个根据本发明(比如根据上文披露的一个或多个实施例或根据下文进一步详细披露的一个或多个实施例)的检测器。细节、选项和定义可以参考上文讨论的检测器。
该移动装置是移动通信装置(比如蜂窝电话或智能电话)、平板计算机、便携式计算机中的一个或多个。
在另一方面中,一种计算机程序,其包括用于当在计算机上或计算机网络上执行该程序时执行根据本发明的方法的计算机可执行指令。
在本发明的另一方面中,提出了根据本发明(比如根据上文给出的或下文进一步详细给出的一个或多个实施例)的检测器的用于选自由以下各项组成的组的使用目的的用途:交通技术中的位置测量;娱乐应用;安保应用;监视应用;安全应用;人机界面应用;物流应用;跟踪应用;户外应用;移动应用;通信应用;摄影应用;机器视觉应用;机器人应用;质量控制应用;制造应用;步态监测应用;人体监测应用;家庭护理;智能生活、汽车应用。
关于本发明的检测器和装置的另外用途,请参考以下文献:WO 2018/091649A1;WO2018/091638 A1;WO 2018/091640 A1;以及C.Lennartz、F.Schick、S.Metz,“Whitepaper-Beam Profile Analysis for 3Dimaging and material detection[白皮书-用于3D成像和材料检测的射束剖面分析]”,2021年4月28日,德国路德维希港,这些文献的内容通过引用包括在本文中。
如本文所使用的,术语“具有”、“包括”或“包含”或其任何任意语法变型以非排他性方式使用。因此,这些术语既可以指的是除了这些术语引入的特征之外,在该上下文中描述的实体中不存在另外特征的情况,又可以指的是存在一个或多个另外特征的情况。作为示例,表述“A具有B”、“A包括B”和“A包含B”既可以指的是除B之外,A中不存在另外要素的情况(即,A仅且单独地由B组成的情况),又可以指的是除了B之外,实体A中还存在一个或多个另外要素(比如要素C、要素C和D或者甚至另外要素)。
进一步地,应当注意,术语“至少一个”、“一个或多个”、或指示特征或要素可能出现一次或不止一次的类似表达典型地仅在引入相应的特征或要素时使用一次。本文中,在大多数情况下,当提及相应特征或要素时,表述“至少一个”或“一个或多个”不被重复,但是相应特征或要素可以出现一次或多于一次。
进一步地,如本文所使用的,术语“优选地”、“更优选地”、“特别地”、“更特别地”、“具体地”、“更具体地”或类似术语与可选特征结合使用,而不限制替代性的可能性。因此,这些术语引入的特征是可选特征并且不旨在以任何方式限制权利要求的范围。正如技术人员认识到的,本发明可以通过使用替代性特征来执行。类似地,由“在本发明的实施例中”或类似表述引入的特征旨在是可选特征,而不对本发明的替代性实施例有任何限制,不对本发明的范围有任何限制,并且不对以这种方式引入的特征与本发明的其他可选或非可选特征组合的可能性有任何限制。
总体上,在本发明的上下文中,以下实施例被认为是优选的:
实施例1.一种用于对准投影仪的光学部件的方法,该投影仪用于利用包括多个照射特征的至少一个照射图案来照射至少一个对象,其中,该投影仪包括至少一个发射器阵列,其中,这些发射器中的每一个被配置用于产生至少一个光束,其中,该投影仪包括至少一个传递装置,该传递装置被配置用于从照射在该传递装置上的光束产生这些照射特征,其中,该方法包括以下步骤:
a)至少一个发射器阵列对准步骤,包括
由每个发射器产生光束并在不使用该发射器阵列与该对象之间的该传递装置的情况下用这些光束照射该对象的表面,从而在该对象上生成光点,
通过使用至少一个相机成像出该光点的至少一个图像,
使用至少一个评估装置,通过评估该光点的图像来确定该光点的至少一种强度分布并将所确定的强度分布与至少一个预定义和/或预先已知的强度分布进行比较,
以及在所确定的强度分布与该预定义和/或预先已知的强度分布的偏差超过至少一个公差范围的情况下,适配该发射器阵列的取向,使得该发射器阵列的中心轴线垂直于该对象的表面;
b)至少一个传递装置对准步骤,包括
b1)标记该对象上的光点的中心位置,
将该传递装置布置在该发射器阵列与该对象之间,使得该传递装置的光轴垂直于该对象的表面,
由每个发射器产生光束,使用该发射器阵列与该对象之间的传递装置用这些光束照射该对象的表面,从而在该对象上生成该照射图案,
通过使用该相机成像出由该照射图案照射的该对象的至少一个图像,
使用该评估装置评估该对象的图像,从而确定该对象上的照射图案的中心,
将所确定的中心与所标记的中心位置进行比较,
在该中心和所标记的中心位置的偏差超过至少一个公差范围的情况下,通过相对于该传递装置平移该发射器阵列来使该中心的位置适配于所标记的中心位置,
和/或
b2)将该传递装置布置在该发射器阵列与该对象之间,
由每个发射器产生光束,使用该发射器阵列与该对象之间的传递装置用这些光束照射该对象的表面,从而在该对象上生成该照射图案,
通过使用该相机成像出由该照射图案照射的该对象的至少一个图像,
通过使用该评估装置评估该对象的图像,从而确定该照射图案的边界框,
将所确定的边界框的至少一种特性与目标边界框的至少一种预定义和/或预先已知的特性进行比较,以及
在所确定的边界框的特性与该预定义和/或预先已知的特性的偏差超过至少一个公差范围的情况下,适配该传递装置的位置和/或取向。
实施例2.根据前一实施例所述的方法,其中,该发射器中的每一个是和/或包括选自由至少一个激光源和至少一个非激光光源组成的组中的至少一个元件,该至少一个激光源比如为至少一个半导体激光器、至少一个双异质结构激光器、至少一个外腔激光器、至少一个分离约束异质结构激光器、至少一个量子级联激光器、至少一个分布式布拉格反射激光器、至少一个极化激元激光器、至少一个混合硅激光器、至少一个扩展腔二极管激光器、至少一个量子点激光器、至少一个体布拉格光栅激光器、至少一个砷化铟激光器、至少一个砷化镓激光器、至少一个晶体管激光器、至少一个二极管泵浦激光器、至少一个分布式反馈激光器、至少一个量子阱激光器、至少一个带间级联激光器、至少一个半导体环形激光器、至少一个垂直腔面发射激光器(VCSEL);该至少一个非激光光源比如为至少一个LED或至少一个灯泡。
实施例3.根据前述实施例中任一项所述的方法,其中,该相机包括至少一个CCD相机或至少一个CMOS相机。
实施例4.根据前述实施例中任一项所述的方法,其中,该传递装置包括至少一个成像光学装置。
实施例5.根据前述实施例中任一项所述的方法,其中,该对象是至少一个目标屏幕。
实施例6.根据前一实施例所述的方法,其中,该对象是至少一个半透明目标屏幕,其中,该投影仪布置在该目标屏幕的一侧,并且该相机布置在该目标屏幕的相反侧。
实施例7.根据前一实施例所述的方法,其中,该对象是不透明的目标屏幕,其中,该投影仪和该相机布置在该目标屏幕的同一侧。
实施例8.根据前述实施例中任一项所述的方法,其中,步骤a)包括从该投影仪中移除该传递装置。
实施例9.根据前述实施例中任一项所述的方法,其中,使用朝向该照射图案的至少一个边缘的至少一些照射特征来确定该边界框。
实施例10.根据前述实施例中任一项所述的方法,其中,该边界框具有选自由矩形、圆形、三角形等组成的组中的形状。
实施例11.根据前述实施例中任一项所述的方法,其中,该评估装置被配置用于识别由该照射图案照射的该对象的图像上的照射特征,并且被配置用于确定这些照射特征的相应光点位置和/或网格位置。
实施例12.根据前述实施例中任一项所述的方法,其中,该边界框的特性与至少一种几何关系相关。
实施例13.根据前一实施例所述的方法,其中,该边界框是矩形的,并且该目标边界框满足以下规则:
-矩形的对边相等;
-对角线的中心坐标等于对应边的点坐标的一半。
实施例14.一种用于确定至少一个对象的位置的检测器,该检测器包括
-至少一个投影仪,该至少一个投影仪用于利用包括多个照射特征的至少一个照射图案来照射至少一个对象,其中,该投影仪包括至少一个发射器阵列,其中,这些发射器中的每一个被配置用于产生至少一个光束,其中,该投影仪包括至少一个传递装置,该传递装置被配置用于从照射在该传递装置上的光束产生这些照射特征;
-至少一个相机,该至少一个相机具有至少一个传感器元件,该至少一个传感器元件具有光学传感器矩阵,这些光学传感器各自具有光敏区域,其中,每个光学传感器被设计为响应于由响应于该照射图案的照射而产生的从该对象传播到该相机的反射光束对该光学传感器的相应光敏区域的照射而生成至少一个传感器信号,其中,该相机被配置用于成像出至少一个反射图像,该至少一个反射图像包括由该对象响应于由这些照射特征的照射而产生的多个反射特征,其中,这些反射特征中的每一个反射特征包括至少一个射束剖面;
-至少一个评估装置,该至少一个评估装置被配置用于通过对这些反射特征中的每一个反射特征的相应射束剖面的分析来确定该每一个反射特征的至少一个纵坐标,
其中,该检测器被配置用于执行根据前述实施例中任一项所述的用于对准投影仪的光学部件的方法。
实施例15.根据前一实施例所述的检测器,其中,该检测器包括至少一个辅助相机,其中,该投影仪布置在该对象的一侧,并且该辅助相机布置在该对象的相反侧。
实施例16.根据前述实施例中任一项所述的检测器,其中,该评估装置被配置用于通过使用光子比率深度技术来确定这些反射特征中的每一个反射特征的纵坐标。
实施例17.根据前一实施例所述的检测器,其中,该射束剖面的分析包括确定该射束剖面的至少一个第一区域和至少一个第二区域,其中,该评估装置被配置用于通过以下各项中的一项或多项来得出组合信号Q:该第一区域和该第二区域相除,该第一区域和该第二区域的倍数相除,该第一区域和该第二区域的线性组合相除,其中,该评估装置被配置用于使用该组合信号Q与该纵坐标之间的至少一个预定关系来确定纵坐标。
实施例18.根据前述实施例中任一项所述的检测器,其中,该检测器包括至少一个另外的传递装置,其被配置用于将该光束引导到这些光学传感器上并且用于在该传感器元件上形成该反射图像。
实施例19.一种被配置用于确定至少一个对象的位置的移动装置,其中,该移动装置包括至少一个根据前述实施例中任一项所述的检测器,其中,该移动装置是移动通信装置、平板计算机、便携式计算机中的一个或多个。
实施例20.根据前述涉及检测器的实施例中任一项所述的检测器的用于选自由以下各项组成的组的使用目的的用途:交通技术中的位置测量;娱乐应用;安保应用;监视应用;安全应用;人机界面应用;物流应用;跟踪应用;户外应用;移动应用;通信应用;摄影应用;机器视觉应用;机器人应用;质量控制应用;制造应用;步态监测应用;人体监测应用;家庭护理;智能生活、汽车应用。
实施例21.一种用于对准投影仪的光学部件的方法,该投影仪用于利用包括多个照射特征的至少一个照射图案来照射至少一个对象,其中,该投影仪包括至少一个发射器阵列,其中,这些发射器中的每一个被配置用于产生至少一个光束,其中,该投影仪包括至少一个传递装置,该传递装置被配置用于从照射在该传递装置上的光束产生这些照射特征,其中,该方法包括以下步骤中的至少一个:
a)至少一个发射器阵列对准步骤,包括
由每个发射器产生光束并在不使用该发射器阵列与该对象之间的该传递装置的情况下用这些光束照射该对象的表面,从而在该对象上生成光点,
通过使用至少一个相机成像出该光点的至少一个图像,
使用至少一个评估装置,通过评估该光点的图像来确定该光点的至少一种强度分布并将所确定的强度分布与至少一个预定义和/或预先已知的强度分布进行比较,
以及在所确定的强度分布与该预定义和/或预先已知的强度分布的偏差超过至少一个公差范围的情况下,适配该发射器阵列的取向,使得该发射器阵列的中心轴线垂直于该对象的表面;
b)至少一个传递装置对准步骤,包括
b1)标记该对象上的光点的中心位置,
将该传递装置布置在该发射器阵列与该对象之间,使得该传递装置的光轴垂直于该对象的表面,
由每个发射器产生光束,使用该发射器阵列与该对象之间的传递装置用这些光束照射该对象的表面,从而在该对象上生成该照射图案,
通过使用该相机成像出由该照射图案照射的该对象的至少一个图像,
使用该评估装置评估该对象的图像,从而确定该对象上的照射图案的中心,
将所确定的中心与所标记的中心位置进行比较,
在该中心和所标记的中心位置的偏差超过至少一个公差范围的情况下,通过相对于该传递装置平移该发射器阵列来使该中心的位置适配于所标记的中心位置,
和/或
b2)将该传递装置布置在该发射器阵列与该对象之间,
由每个发射器产生光束,使用该发射器阵列与该对象之间的传递装置用这些光束照射该对象的表面,从而在该对象上生成该照射图案,
通过使用该相机成像出由该照射图案照射的该对象的至少一个图像,
通过使用该评估装置评估该对象的图像,从而确定该照射图案的边界框,
将所确定的边界框的至少一种特性与目标边界框的至少一种预定义和/或预先已知的特性进行比较,以及
在所确定的边界框的特性与该预定义和/或预先已知的特性的偏差超过至少一个公差范围的情况下,适配该传递装置的位置和/或取向。
附图说明
根据下面结合从属权利要求对优选示例性实施例的描述,本发明的另外可选的细节和特征是明显的。在本上下文中,特定特征可以以单独的方式或与其他特征组合来实现。本发明不限于示例性实施例。示例性实施例在附图中示意性地示出。各个附图中相同的附图标记指的是相同的元件或具有相同功能的元件,或者在其功能方面彼此对应的元件。
具体地,在附图中:
图1示出了根据本发明的用于对准投影仪的光学部件的方法的实施例,该投影仪用于利用至少一个照射图案来照射至少一个对象;
图2示出了对准的发射器阵列与目标屏幕和辅助相机;
图3示出了在执行步骤a)之前未对准的发射器阵列与目标屏幕和辅助相机;
图4示出了步骤b)的设置,在该设置内发射器阵列是对准的;
图5和图6示出传递装置和发射器阵列的未对准的设置;以及
图7A和图7B示出了畸变照射图案和在正确对准的情况下的照射图案。
具体实施方式
图1示出了用于对准投影仪110的光学部件的方法的流程图,该投影仪用于利用包括多个照射特征的至少一个照射图案114来照射至少一个对象112。
投影仪110包括至少一个发射器阵列116。这些发射器中的每一个被配置用于产生至少一个光束。投影仪110包括至少一个传递装置118,其被配置用于从照射在传递装置118上的光束产生照射特征。
这些方法步骤可以以给定的顺序执行或者可以以不同的顺序执行。进一步地,可以存在未列出的一个或多个额外的方法步骤。进一步地,可以重复执行其中一个、多于一个或者甚至所有方法步骤。
该方法包括以下步骤:
a)(用附图标记120表示)至少一个发射器阵列对准步骤,包括由每个发射器产生光束并在不使用发射器阵列116与对象112之间的传递装置118的情况下用光束照射对象的表面,从而在对象112上生成光点122,通过使用至少一个相机124成像出光点122的至少一个图像,使用至少一个评估装置128,通过评估光点122的图像来确定光点122的至少一种强度分布126并将所确定的强度分布126与至少一个预定义和/或预先已知的强度分布进行比较,
在所确定的强度分布126与预定义和/或预先已知的强度分布的偏差超过至少一个公差范围的情况下,适配发射器阵列116的取向,使得发射器阵列116的中心轴线130垂直于对象112的表面;
b)至少一个传递装置对准步骤,包括
b1)(用附图标记132表示)标记对象112上的光点122的中心位置,
将传递装置118布置在发射器阵列116与对象112之间,使得传递装置118的光轴134垂直于对象112的表面,
由每个发射器产生光束,使用发射器阵列116与对象112之间的传递装置118用光束照射对象112的表面,从而在对象112上生成照射图案114,
通过使用相机124成像出由照射图案114照射的对象112的至少一个图像,
使用评估装置128评估对象112的图像,从而确定对象112上的照射图案114的中心136,
将所确定的中心136与所标记的中心位置进行比较,
在中心136和所标记的中心位置的偏差超过至少一个公差范围的情况下,通过相对于传递装置118平移发射器阵列116来使中心136的位置适配于所标记的中心位置,
和/或
b2)(用附图标记138表示)将传递装置118布置在发射器阵列116与对象112之间,
由每个发射器产生光束,使用发射器阵列116与对象112之间的传递装置118用光束照射对象112的表面,从而在对象112上生成照射图案114,
通过使用相机124成像出由照射图案114照射的对象112的至少一个图像,
通过使用评估装置128评估对象112的图像,从而确定照射图案114的边界框140,
将所确定的边界框140的至少一种特性与目标边界框142的至少一种预定义和/或预先已知的特性进行比较,以及
在所确定的边界框140的特性与预定义和/或预先已知的特性的偏差超过至少一个公差范围的情况下,适配传递装置118的位置和/或取向。
投影仪110可以被配置用于生成至少一个照射图案114并将其投射到对象112上,具体地投射到对象112的表面上。投影仪110包括作为光学部件的发射器阵列116和传递装置118。投影仪110可以包括附加的光学部件。
至少一个照射图案114可以包括至少一个任意图案,该图案包括适于照射对象112的至少一部分的照射特征。照射图案114包括多个照射特征。照射图案114可以选自由以下各项组成的组:至少一个点图案;至少一个线图案;至少一个条纹图案;至少一个棋盘图案;包括周期性或非周期性特征的布置的至少一个图案。照射图案114可以包括规则的和/或恒定的和/或周期性的图案,例如三角形图案、矩形图案、六边形图案或包括其他凸镶嵌的图案。照射图案114可以表现出选自由以下各项组成的组中的至少一个照射特征:至少一个点;至少一条线;至少两条线,比如平行线或交叉线;至少一个点和一条线;周期性或非周期性特征的至少一种布置;至少一个任意形状的特征。照射图案114可以包括选自由以下各项组成的组中的至少一个图案:至少一个点图案,特别是伪随机点图案;随机点图案或准随机图案;至少一个Sobol图案;至少一个准周期性图案;包括至少一个预先知道的特征的至少一个图案、至少一个规则图案;至少一个三角形图案;至少一个六边形图案;至少一个矩形图案、包括凸均匀镶嵌的至少一个图案;包括至少一条线的至少一个线图案;包括如平行线或交叉线等至少两条线的至少一个线图案。例如,投影仪110可以被配置用于生成和/或投射点云或非点状特征。例如,投影仪110可以被配置用于生成点云或非点状特征,使得照射图案114可以包括多个点特征或非点状特征。照射图案114可以包括规则的和/或恒定的和/或周期性的图案,例如三角形图案、矩形图案、六边形图案或包括其他凸镶嵌的图案。照射图案114可以在每个区域包括尽可能多的特征,使得六边形图案可以是优选的。相应照射图案114的两个特征之间的距离和/或至少一个照射特征的面积可以取决于由至少一个检测器确定的图像中的弥散圆。例如,照射图案114可以包括周期性点图案。
这些发射器中的每一个可以是和/或可以包括选自由至少一个激光源和至少一个非激光光源组成的组中的至少一个元件,该至少一个激光源比如为至少一个半导体激光器、至少一个双异质结构激光器、至少一个外腔激光器、至少一个分离约束异质结构激光器、至少一个量子级联激光器、至少一个分布式布拉格反射激光器、至少一个极化激元激光器、至少一个混合硅激光器、至少一个扩展腔二极管激光器、至少一个量子点激光器、至少一个体布拉格光栅激光器、至少一个砷化铟激光器、至少一个砷化镓激光器、至少一个晶体管激光器、至少一个二极管泵浦激光器、至少一个分布式反馈激光器、至少一个量子阱激光器、至少一个带间级联激光器、至少一个半导体环形激光器、至少一个垂直腔面发射激光器(VCSEL)、特别是至少一个VCSEL阵列;该至少一个非激光光源比如为至少一个LED或至少一个灯泡。
发射器阵列116可以是二维或一维阵列。阵列116可以包括布置成矩阵的多个发射器。具体地,矩阵可以是或者可以包括具有一行或多行和一列或多列的矩形矩阵。具体地,行和列可以以矩形方式布置。然而,其他布置也是可行的,比如非矩形布置。作为示例,圆形布置也是可行的,其中,元件围绕中心点布置成同心圆或椭圆形。
例如,发射器可以是VCSEL阵列。垂直腔面发射激光器可以是被配置用于相对于顶表面垂直地发射激光束的半导体激光二极管。VCSEL的示例可以例如在en.wikipedia.org/wiki/Vertical-cavity_surface-emitting_laser中找到。VCSEL通常是技术人员已知的,比如从WO 2017/222618 A中可知。VCSEL中的每一个被配置用于产生至少一个光束。VCSEL可以布置在公共的衬底上或不同的衬底上。阵列116可以包括最多2500个VCSEL。例如,阵列116可以包括38x 25个VCSEL,比如具有3.5W的高功率阵列。例如,阵列116可以包括10×27个VCSEL,具有2.5W。例如,阵列116可以包括96个VCSEL,具有0.9W。例如具有2500个元件的阵列的尺寸可以最多为2mm x 2mm。
由相应的发射器所发射的光束可以具有的波长为300至1100nm,优选地为500至1100nm。例如,光束可以具有的波长为940nm。例如,可以使用红外光谱范围内的光,比如780nm至3.0μm范围内的光。具体地,可以使用硅光电二极管适用的近红外区的部分中(具体地是在700nm至1100nm的范围内)的光。发射器可以被配置用于在红外区、特别是在近红外区内生成至少一个照射图案。使用近红外区内的光可以允许光不被人眼检测到或仅微弱地被人眼检测到,并且仍然可由硅传感器、特别是标准硅传感器检测到。例如,发射器可以是VCSEL阵列。VCSEL可以被配置用于发射波长范围为800至1000nm的光束。例如,VCSEL可以被配置用于发射808nm、850nm、940nm或980nm的光束。优选地,VCSEL发射940nm的光,因为地面太阳辐射在该波长处具有辐照度的局部最小值,例如如CIE 085-1989“Solar spectralIrradiance[太阳光谱辐照度]”中所述。
投影仪110包括传递装置118,其被配置用于从照射在传递装置118上的光束产生照射特征。传递装置118具体地可以包括以下各项中的一项或多项:至少一个透镜,例如选自由至少一个可调焦透镜、至少一个非球面透镜、至少一个球面透镜、至少一个菲涅耳透镜组成的组中的至少一个透镜;至少一个衍射光学元件;至少一个凹面镜;至少一个射束偏转元件,优选为至少一个反射镜;至少一个分束元件,优选为分束立方体或分束镜中的至少一者;至少一个多透镜系统;至少一个全息光学元件;至少一个超构光学元件。具体地,传递装置118包括至少一个折射光学透镜模组。因此,传递装置118可以包括具有折射特性的多透镜系统。
发射器阵列对准步骤120可以包括:在第一步骤中,使用发射器阵列116而不使用传递装置118。步骤a)120可以包括从投影仪110移除传递装置118。在这种配置中,如图2所示,发射器阵列116可以仅产生由至少一个相机124成像的一个大光点122。
根据本发明的方法可以是主动对准过程。因此,在步骤a)和b)中使用至少一个相机124,例如,用于在对准过程期间成像出照射图案114。相机124可以是指具有至少一个成像元件的装置,该至少一个成像元件被配置用于记录或捕获空间解析的一维、二维或甚至三维光学数据或信息。作为示例,相机124可以包括至少一个相机芯片,比如被配置用于记录图像的至少一个CCD芯片和/或至少一个CMOS芯片。
用于该方法的对象112可以是至少一个目标屏幕144。目标屏幕144可以包括具有被配置用于显示投射光束的平面表面的投影屏幕。例如,目标屏幕144是至少一个半透明目标屏幕144。半透明目标屏幕144可以允许照射到目标屏幕144上的光(特别是特定波长范围的光)至少部分地通过。例如,半透明目标屏幕144可以允许通过至少30%的光。投影仪110可以布置在目标屏幕144的一侧,并且相机124布置在目标屏幕144的相反侧。在该示例中,光学设置可以包括两个相机124。第一相机146可以是根据本发明的用于3D传感的检测器的相机。第二相机148(也被表示为辅助相机)可以用于对准方法。辅助相机148可以与半透明屏幕144组合,并且投影仪110位于屏幕的相反侧。可替代地,可以使用3D成像系统的不透明屏幕144和相机146。对象112可以是不透明的目标屏幕。投影仪110和相机124可以布置在目标屏幕144的同一侧。
发射器阵列116可以包括发射器阵列116的所谓的中心轴线130,即垂直于发射器的表面并穿过阵列116中心的轴线。在发射器阵列116正确对准的情况下,中心轴线130可以与垂直于目标屏幕144的表面的轴线平行、特别地是与其重合。“正确对准”可以是指发射器阵列116的中心轴线130至少在公差内与垂直于目标屏幕144的表面的轴线平行、特别地是与其重合。否则,由发射器产生的光束可以相对于垂直于目标屏幕144的表面的轴线倾斜(例如,包括与该轴线成一角度)传播。作为示例,在发射器阵列116的中心轴线130和垂直于目标屏幕144的表面的轴线正确对准的情况下,可以成小于10°的角度、优选地小于5°或者甚至小于2°。然而,其他实施例也是可行的。图2示出了对准的发射器阵列116与目标屏幕144和辅助相机148。
光点122可以用于将发射器阵列116的中心轴线130对准为垂直于目标屏幕114。在发射器阵列116的中心轴线130不垂直于目标屏幕144的情况下,光点122会发生畸变。光点122可以包括目标屏幕144的平面表面中的强度分布126。该平面也可以表示为xy平面。垂直于该平面的方向可以表示为z方向。强度分布126可以具有质心。在发射器阵列116正确对准的情况下,质心可以位于其目标位置处。目标位置可以与光点122的中心点重合。然而,在发射器阵列116倾斜的情况下,光点122的质心偏离其目标位置。图3描绘了倾斜的发射器阵列116与目标屏幕144和辅助相机148。由于倾斜,可见光点122的质心偏离期望位置。在发射器阵列116的中心轴线130不垂直于目标的情况下,光点122会发生畸变(参见图3)。评估装置128被配置用于通过评估光点122的图像来确定光点122的强度分布126。
评估装置128可以适于优选地通过使用至少一个数据处理装置、更优选地通过使用至少一个处理器和/或至少一个专用集成电路来执行所指定的操作。因此,作为示例,至少一个评估装置128可以包括至少一个数据处理装置,该数据处理装置存储有软件代码,该软件代码包括多个计算机命令。评估装置128可以提供用于执行指定操作中的一个或多个的一个或多个硬件元件和/或可以提供一个或多个在其上运行软件以执行指定操作中的一个或多个的处理器。操作包括对图像进行评估。因此,作为示例,一个或多个指令可以以软件和/或硬件来实施。因此,作为示例,评估装置128可以包括一个或多个可编程装置,比如被配置为执行上述评估的一个或多个计算机、专用集成电路(ASIC)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)。然而,附加地或可替代地,评估装置128还可以完全或部分地由硬件实现。
评估装置128可以被配置用于执行至少一种图像分析和/或图像处理以便识别光点122。图像分析和/或图像处理可以使用至少一种特征检测算法、特别是光点检测算法。
评估装置128可以被配置用于从光点122的图像确定一维或二维强度分布126,特别是通过评估相机124像素的强度值。评估装置128可以被配置用于确定强度分布126的质心。
该方法包括通过使用评估装置128将所确定的强度分布126与至少一种预定义和/或预先已知的强度分布进行比较。预定义和/或预先已知的强度分布可以包括完整的强度分布,比如作为x和y中至少一个的函数的强度,和/或是指表征强度分布的至少一种特性,比如质心的目标位置。预定义和/或预先已知的强度分布可以是正确对准的发射器阵列116的强度分布和/或强度分布的质心的目标位置。预定义和/或预先已知的强度分布可以存储在评估装置128的至少一个数据库中。例如,将正确对准的发射器阵列116的强度分布的质心的目标位置与成像的强度分布126的质心进行比较。在所确定的强度分布与预定义和/或预先已知的强度分布的偏差超过至少一个公差范围的情况下,该方法包括比如通过改变倾斜角度(特别是倾斜发射器阵列)来机械地适配发射器阵列116的取向。否则,即,在所确定的强度分布与预定义和/或预先已知的强度分布的偏差在至少一个公差范围内的情况下,该方法可以继续进行步骤b)。公差范围可以是±10%、优选地±5%、更优选地±2%。
在步骤b1)中,在正确对准发射器阵列116之后,标记光点122的中心位置。标记可以包括对中心位置施加至少一个标记,比如至少一个突出显示、至少一个十字等。标记可以手动或自动执行。
传递装置118布置在发射器阵列116与对象112之间。传递装置118可以放置在发射器阵列116的顶部,使得照射图案114变得可见。传递装置118的光轴134可以是预先已知的并且可以例如机械地对准为垂直于目标屏幕144。
现在,照射图案114的中心136(称为0阶)与大光点122的所标记的中心位置对准。图4示出了对准中心136和所标记的中心位置。每个发射器产生光束,并且使用发射器阵列116与对象112之间的传递装置118用光束照射对象112的表面,从而在对象112上生成照射图案114。相机124(例如,关于步骤a)描述的至少一个辅助相机148(如图4所示)或检测器的相机146)成像出由照射图案114照射的对象112的至少一个图像。评估装置128被配置用于评估对象112的图像,从而确定照射图案114的中心136。评估装置128被配置用于将所确定的中心136与所标记的中心位置进行比较。在中心136和所标记的中心位置的偏差超过至少一个公差范围的情况下,通过相对于传递装置118平移发射器阵列116来使中心136的位置适配于所标记的中心位置。公差范围可以是±10%、优选地±5%、更优选地±2%。图5示出了未对准的设置。用箭头指示中心136相对于传递装置118的位置的适配。在不超过公差范围的情况下,可以维持中心136的位置。
附加地或可替代地,传递装置对准步骤包括步骤b2)138。b1)132和b2)138的组合可以允许获得最佳可能的对准。然而,例如为了节省时间,该方法可以仅包括b1)132或b2)138之一。
参照图6和图7描述步骤b2)。步骤b2)138可以开始于将传递装置118布置在发射器阵列116与对象112之间。步骤b2)138包括:由每个发射器产生光束;使用发射器阵列116与对象112之间的传递装置118用光束照射对象112的表面,从而在对象112上生成照射图案114;以及通过使用相机124(例如,关于步骤a)描述的至少一个辅助相机148或如图6所示的检测器150的相机146)成像出由照射图案114照射的对象112的至少一个图像。图6高度示意性地示出了检测器150和包括检测器150的移动装置154。检测器150包括至少一个另外的传递装置152,其被配置用于将光束引导到光学传感器上并且用于在传感器元件上形成反射图像。
例如,发射器阵列116前面的传递装置118可以在目标屏幕144上产生照射图案114的投影,例如规则的光点图案。对应轴线的未对准(即,传递装置118在发射器阵列116的前面移动和/或倾斜)可能导致图案114变形。因此,这些点以及它们彼此之间的相应位置可以用于确定对准质量。
方法步骤b2)138包括评估对象112的图像。评估装置128可以被配置用于识别由照射图案114照射的对象112的图像上的照射特征,并且被配置用于确定这些照射特征的相应光点位置和/或网格位置。该评估可以包括确定照射特征的位置及其在相机124的图像中相应的网格位置。网格位置可以是照射特征在图案114内的位置。评估装置128可以包括用于确定光点位置及其网格位置的软件工具,例如,用于光点检测的软件和/或用于将检测到的光点与网格匹配的软件。
照射特征的位置及其相应的网格位置可以用于确定(特别是计算)照射图案114的边界框140。边界框140可以是区分照射图案114的内部和外部的界限。外部可以是周围环境。可以通过使用朝向图案114的边缘的一些照射特征来创建边界框140。边界框140可以具有选自由矩形、圆形、三角形等组成的组中的形状。可以使用具有任何已知形状的边界框140,并且可以根据该边界框计算变形。如果变形被消除和/或最小化,则传递装置118可以被正确地对准。
步骤b2)138包括将所确定的边界框140的至少一种特性与目标边界框142的至少一种预定义和/或预先已知的特性进行比较。边界框140的特性可以与至少一种几何关系相关。目标边界框142的预定义和/或预先已知的特性可以存储在评估装置128的至少一个数据库中。目标边界框142可以是在传递装置118正确对准的情况下的边界框。
图6描绘了不满足对准要求的情况。在这种情况下,传递装置118可以相对于发射器阵列116倾斜,特别是相对于中心轴线130倾斜,这也导致了0阶偏移。然而,这可以通过移动传递装置118来补偿,用图6中的箭头表示。图7A示出了未对准情况下的边界框140的示例,以及正确对准情况下的边界框,即对应的目标边界框。例如,可以使用四个角点来绘制边界矩形,如图7A和图7B所示。如果轴线很好地对准,则边界框140遵循如下定义的规则:
-矩形的对边相等;
-对角线的中心坐标等于对应边的点坐标的一半。
对于图7B,以下等式成立:a-b=c-d,a-c=b-d,z=0.5(c-d),其中a、b、c和d是用于边界框的四个角点的位置,并且z是矩形边界框的中心。对于图7A,不满足最后两个条件。
方法步骤b2)138包括在所确定的边界框140的特性与预定义和/或预先已知的特性的偏差超过至少一个公差范围的情况下,适配传递装置118的位置和/或取向。公差范围可以是±10%、优选地±5%、更优选地±2%。在不超过公差范围的情况下,可以维持传递装置118的位置和/或取向。
通过提高投影仪产量并且由于在系统生产期间也无需将相机124与投影仪110进行主动对准,根据本发明的方法可以实现降低成本。这可以节省大量的时间和金钱。另外,我们的3D传感系统还可以具有更高的性能和更稳健的校准。
附图标记清单
110 投影仪
112 对象
114 照射图案
116 发射器阵列
118 传递装置
120 步骤a)
122 光点
124 相机
126 强度分布
128 评估装置
130 中心轴线
132 步骤b1)
134 光轴
136 中心
138 步骤b2)
140 边界框
142 目标边界框
144 目标屏幕
146 第一相机
148 第二相机
150 检测器
152 另外的传递装置
154 移动装置

Claims (15)

1.一种用于对准投影仪(110)的光学部件的方法,该投影仪用于利用包括多个照射特征的至少一个照射图案(114)来照射至少一个对象(112),其中,该投影仪(110)包括至少一个发射器阵列(116),其中,这些发射器中的每一个被配置用于产生至少一个光束,其中,该投影仪(110)包括至少一个传递装置(118),该传递装置被配置用于从照射在该传递装置(118)上的光束产生这些照射特征,其中,该方法包括以下步骤:
a)(120)至少一个发射器阵列对准步骤,包括
由每个发射器产生光束并在不使用该发射器阵列(116)与该对象(112)之间的传递装置(118)的情况下用这些光束照射该对象(112)的表面,从而在该对象(112)上生成光点(122),
通过使用至少一个相机(124)成像出该光点(122)的至少一个图像,使用至少一个评估装置(128),通过评估该光点(122)的图像来确定该光点(122)的至少一种强度分布(126)并将所确定的强度分布(126)与至少一个预定义和/或预先已知的强度分布进行比较,
以及在所确定的强度分布(126)与该预定义和/或预先已知的强度分布的偏差超过至少一个公差范围的情况下,适配该发射器阵列(116)的取向,使得该发射器阵列(116)的中心轴线(130)垂直于该对象(112)的表面;
b)至少一个传递装置对准步骤,包括
b1)(132)标记该对象(112)上的光点(122)的中心位置,
将该传递装置(118)布置在该发射器阵列(116)与该对象(112)之间,使得该传递装置(118)的光轴(134)垂直于该对象(112)的表面,
由每个发射器产生光束,使用该发射器阵列(116)与该对象(112)之间的该传递装置(118)用这些光束照射该对象(112)的表面,从而在该对象(112)上生成该照射图案(114),
通过使用该相机(124)成像出由该照射图案(114)照射的该对象(112)的至少一个图像,
使用该评估装置(128)评估该对象(112)的图像,从而确定该对象(112)上的照射图案(114)的中心(136),
将所确定的中心(136)与所标记的中心位置进行比较,
在该中心(136)和所标记的中心位置的偏差超过至少一个公差范围的情况下,通过相对于该传递装置(118)平移该发射器阵列(116)来使该中心(136)的位置适配于所标记的中心位置,
和/或
b2)(138)将该传递装置(118)布置在该发射器阵列(116)与该对象(112)之间,
由每个发射器产生光束,使用该发射器阵列(116)与该对象(112)之间的该传递装置(118)用这些光束照射该对象(112)的表面,从而在该对象(112)上生成该照射图案(114),
通过使用该相机(124)成像出由该照射图案(114)照射的该对象(112)的至少一个图像,
通过使用该评估装置(128)评估该对象(112)的图像,从而确定该照射图案(114)的边界框(140),
将所确定的边界框(140)的至少一种特性与目标边界框(142)的至少一种预定义和/或预先已知的特性进行比较,以及
在所确定的边界框(140)的特性与该预定义和/或预先已知的特性的偏差超过至少一个公差范围的情况下,适配该传递装置(118)的位置和/或取向。
2.根据前一项权利要求所述的方法,其中,该发射器中的每一个是和/或包括选自由至少一个激光源和至少一个非激光光源组成的组中的至少一个元件,该至少一个激光源比如为至少一个半导体激光器、至少一个双异质结构激光器、至少一个外腔激光器、至少一个分离约束异质结构激光器、至少一个量子级联激光器、至少一个分布式布拉格反射激光器、至少一个极化激元激光器、至少一个混合硅激光器、至少一个扩展腔二极管激光器、至少一个量子点激光器、至少一个体布拉格光栅激光器、至少一个砷化铟激光器、至少一个砷化镓激光器、至少一个晶体管激光器、至少一个二极管泵浦激光器、至少一个分布式反馈激光器、至少一个量子阱激光器、至少一个带间级联激光器、至少一个半导体环形激光器、至少一个垂直腔面发射激光器(VCSEL);该至少一个非激光光源比如为至少一个LED或至少一个灯泡。
3.根据前述权利要求中任一项所述的方法,其中,该相机(124)包括至少一个CCD相机或至少一个CMOS相机。
4.根据前述权利要求中任一项所述的方法,其中,该传递装置(118)包括至少一个成像光学装置。
5.根据前述权利要求中任一项所述的方法,其中,该对象(112)是至少一个目标屏幕(144),其中,该对象(112)是至少一个半透明目标屏幕,其中,该投影仪(110)布置在该目标屏幕(144)的一侧,并且该相机(124)布置在该目标屏幕(144)的相反侧,或者其中,该对象(112)是不透明的目标屏幕(144),其中,该投影仪(110)和该相机(124)布置在该目标屏幕(144)的同一侧。
6.根据前述权利要求中任一项所述的方法,其中,步骤a)(120)包括从该投影仪(110)移除该传递装置(118)。
7.根据前述权利要求中任一项所述的方法,其中,该评估装置(128)被配置用于识别由该照射图案(114)照射的该对象(112)的图像上的照射特征,并且被配置用于确定这些照射特征的相应光点位置和/或网格位置。
8.根据前述权利要求中任一项所述的方法,其中,该边界框(140)的特性与至少一种几何关系相关。
9.一种用于确定至少一个对象(112)的位置的检测器(150),该检测器(150)包括
-至少一个投影仪(110),该至少一个投影仪用于利用包括多个照射特征的至少一个照射图案(114)来照射至少一个对象(112),其中,该投影仪(110)包括至少一个发射器阵列(116),其中,这些发射器中的每一个被配置用于产生至少一个光束,其中,该投影仪(110)包括至少一个传递装置(118),该传递装置被配置用于从照射在该传递装置(118)上的光束产生这些照射特征;
-至少一个相机(124),该至少一个相机具有至少一个传感器元件,该至少一个传感器元件具有光学传感器矩阵,这些光学传感器各自具有光敏区域,其中,每个光学传感器被设计为响应于由响应于该照射图案(114)的照射而产生的从该对象(112)传播到该相机(124)的反射光束对该光学传感器的相应光敏区域的照射而生成至少一个传感器信号,其中,该相机(124)被配置用于成像出至少一个反射图像,该至少一个反射图像包括由该对象(112)响应于由这些照射特征(114)的照射而产生的多个反射特征,其中,这些反射特征中的每一个反射特征包括至少一个射束剖面;
-至少一个评估装置(128),该至少一个评估装置被配置用于通过对这些反射特征中的每一个反射特征的相应射束剖面的分析来确定该每一个反射特征的至少一个纵坐标,
其中,该检测器(150)被配置用于执行根据前述权利要求中任一项所述的用于对准投影仪(110)的光学部件的方法。
10.根据前一项权利要求所述的检测器(150),其中,该检测器(150)包括至少一个辅助相机(148),其中,该投影仪(110)布置在该对象的一侧,并且该辅助相机(148)布置在该对象(112)的相反侧。
11.根据前述权利要求中任一项所述的检测器(150),其中,该评估装置(128)被配置用于通过使用光子比率深度技术来确定这些反射特征中的每一个反射特征的纵坐标。
12.根据前一项权利要求所述的检测器(150),其中,该射束剖面的分析包括确定该射束剖面的至少一个第一区域和至少一个第二区域,其中,该评估装置(128)被配置用于通过以下各项中的一项或多项来得出组合信号Q:该第一区域和该第二区域相除,该第一区域和该第二区域的倍数相除,该第一区域和该第二区域的线性组合相除,其中,该评估装置(128)被配置用于使用该组合信号Q与该纵坐标之间的至少一个预定关系来确定该纵坐标。
13.根据前述权利要求中任一项所述的检测器(150),其中,该检测器(150)包括至少一个另外的传递装置(152),其被配置用于将该光束引导到这些光学传感器上并且用于在该传感器元件上形成该反射图像。
14.一种被配置用于确定至少一个对象(112)的位置的移动装置(154),其中,该移动装置(154)包括至少一个根据前述权利要求中任一项所述的检测器(150),其中,该移动装置(154)是移动通信装置、平板计算机、便携式计算机中的一个或多个。
15.根据前述涉及检测器(150)的权利要求中任一项所述的检测器的用于选自由以下各项组成的组的使用目的的用途:交通技术中的位置测量;娱乐应用;安保应用;监视应用;安全应用;人机界面应用;物流应用;跟踪应用;户外应用;移动应用;通信应用;摄影应用;机器视觉应用;机器人应用;质量控制应用;制造应用;步态监测应用;人体监测应用;家庭护理;智能生活、汽车应用。
CN202280066862.7A 2021-10-06 2022-10-05 用于对准投影仪的光学部件的方法 Pending CN118056111A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP21201291.8 2021-10-06
EP21201291 2021-10-06
PCT/EP2022/077663 WO2023057495A1 (en) 2021-10-06 2022-10-05 Method for alignment of optical components of a projector

Publications (1)

Publication Number Publication Date
CN118056111A true CN118056111A (zh) 2024-05-17

Family

ID=78080234

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280066862.7A Pending CN118056111A (zh) 2021-10-06 2022-10-05 用于对准投影仪的光学部件的方法

Country Status (2)

Country Link
CN (1) CN118056111A (zh)
WO (1) WO2023057495A1 (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150124225A1 (en) 2013-11-07 2015-05-07 Seiko Epson Corporation Light source device and projector
US10072815B2 (en) 2016-06-23 2018-09-11 Apple Inc. Top-emission VCSEL-array with integrated diffuser
JP7215996B2 (ja) 2016-11-17 2023-01-31 トリナミクス ゲゼルシャフト ミット ベシュレンクテル ハフツング 少なくとも1つの物体を光学的に検出するための検出器
KR20200040780A (ko) 2017-08-28 2020-04-20 트리나미엑스 게엠베하 적어도 하나의 대상체의 위치를 결정하는 검출기
US20220350156A1 (en) 2019-10-07 2022-11-03 Trinamix Gmbh Projector for Illuminating at Least One Object

Also Published As

Publication number Publication date
WO2023057495A1 (en) 2023-04-13

Similar Documents

Publication Publication Date Title
US11989896B2 (en) Depth measurement through display
US20230078604A1 (en) Detector for object recognition
US20240133679A1 (en) Projector for diffuse illumination and structured light
CN114556155A (zh) 用于照射至少一个对象的投射器
EP3596425B1 (en) Optoelectronic devices for collecting three-dimensional data
JP2023522755A (ja) 物体深度測定用照射パターン
CN118056111A (zh) 用于对准投影仪的光学部件的方法
JP2024520598A (ja) 投影パターン内のエピポーラ線距離からの自動較正
US11920918B2 (en) One shot calibration
CN116438467A (zh) 通过显示器的深度测量
CN117957419A (zh) 具有两个或更多个独立驱动的区域的发射器阵列
WO2023083784A1 (en) Recalibration of a 3d detector based on structured light
WO2023078986A1 (en) Eye safety for projectors
US11995857B2 (en) Shape-from-shading
US11906421B2 (en) Enhanced material detection by stereo beam profile analysis
CN118159870A (zh) 涉及多波长投影仪的扩展材料检测
WO2023078903A1 (en) Structured light pattern combined with projection of markers
WO2023072905A1 (en) Extended material detection involving a multi wavelength projector

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication