CN112513565A - 使用高密度投影图案的距离测量 - Google Patents

使用高密度投影图案的距离测量 Download PDF

Info

Publication number
CN112513565A
CN112513565A CN201980052241.1A CN201980052241A CN112513565A CN 112513565 A CN112513565 A CN 112513565A CN 201980052241 A CN201980052241 A CN 201980052241A CN 112513565 A CN112513565 A CN 112513565A
Authority
CN
China
Prior art keywords
projection
window
processing system
light intensity
trajectory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980052241.1A
Other languages
English (en)
Other versions
CN112513565B (zh
Inventor
木村昭辉
J·赫勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Magik Eye Inc
Original Assignee
Magik Eye Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Magik Eye Inc filed Critical Magik Eye Inc
Publication of CN112513565A publication Critical patent/CN112513565A/zh
Application granted granted Critical
Publication of CN112513565B publication Critical patent/CN112513565B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/46Indirect determination of position data
    • G01S17/48Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/02Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • G01B11/026Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring distance between sensor and object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B9/00Measuring instruments characterised by the use of optical techniques
    • G01B9/02Interferometers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/32Systems determining position data of a target for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging

Landscapes

  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Measurement Of Optical Distance (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

在一个示例中,一种方法包括:由距离传感器的处理系统指示距离传感器的图案投影仪将光的图案投影到对象上,其中所述图案包括多个投影伪影;由处理系统在包括光的图案的所述对象的图像中检测所述多个伪影中的第一投影伪影的位置,其中所述检测包括标识对应于第一投影伪影的轨迹的窗口内的峰值光强区域,其中所述轨迹表示第一投影伪影在距离传感器的成像传感器上的潜在移动范围;以及由处理系统部分地基于第一投影伪影的位置来计算从距离传感器到所述对象的距离。

Description

使用高密度投影图案的距离测量
相关申请的交叉引用
本申请要求于2018年6月6日提交的序列号为62/681,236的美国临时专利申请的优先权,该申请通过引用整体地并入本文中。
背景技术
序列号为14/920,246、15/149,323和15/149,429的美国专利申请描述了距离传感器的各种配置。这种距离传感器可以用于各种各样的应用中,包括安全、游戏、无人驾驶车辆的控制以及其他应用。
在这些应用中描述的距离传感器包括:投影系统(例如,包括激光器、衍射光学元件和/或其他协作组件),其将对于人眼基本上不可见的波长下的光束(例如,红外线)投影到视场中。该光束会散开以创建可以由适当的光接收系统(例如,透镜、图像捕获设备和/或其他组件)检测到的图案(点、虚线或其他伪影的图案)。当图案入射到视场中的对象上时,从传感器到对象的距离可以基于视场的一个或多个图像中的图案的外观(例如,点、虚线或其他伪影的位置关系)来计算,该图案的外观可以由传感器的光接收系统捕获。还可以确定对象的形状和尺寸。
例如,图案的外观可以随着距对象的距离而改变。作为示例,如果图案包括点的图案,则当对象更靠近传感器时,点可能看起来彼此更靠近,并且当对象更远离传感器时,点可能看起来彼此更远离。
发明内容
在一个示例中,一种方法包括:由距离传感器的处理系统指示距离传感器的图案投影仪将光的图案投影到对象上,其中该图案包括多个投影伪影,其中该多个投影伪影中的每个投影伪影与表示每个投影伪影在距离传感器的成像传感器上的潜在移动范围的轨迹相关联,其中在平行于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第一阈值距离,并且其中在垂直于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第二阈值距离;由处理系统在包括光的图案的对象的图像中检测该多个伪影中的第一投影伪影的位置,其中该检测包括标识第一窗口内的峰值光强(peak light intensity)区域,第一窗口对应于与第一投影伪影相关联的第一轨迹;以及由处理系统部分地基于第一投影伪影的位置来计算从距离传感器到对象的距离。
在另一个示例中,一种非暂时性机器可读存储介质利用可由处理器执行的指令来编码。该指令在被执行时使处理器实行如下操作,该操作包括,在一个示例中,一种方法包括:指示距离传感器的图案投影仪将光的图案投影到对象上,其中该图案包括多个投影伪影,其中该多个投影伪影中的每个投影伪影与表示每个投影伪影在距离传感器的成像传感器上的潜在移动范围的轨迹相关联,其中在平行于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第一阈值距离,并且其中在垂直于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第二阈值距离;在包括光的图案的对象的图像中检测该多个伪影中的第一投影伪影的位置,其中该检测包括标识第一窗口内的峰值光强区域,第一窗口对应于与第一投影伪影相关联的第一轨迹;以及部分地基于第一投影伪影的位置来计算从距离传感器到对象的距离。
在另一个示例中,一种方法包括:由距离传感器的处理系统指示距离传感器的图案投影仪将光的图案投影到对象上,其中该图案包括多个投影伪影;由处理系统在包括光的图案的对象的图像中检测该多个伪影中的第一投影伪影的位置,其中该检测包括标识对应于第一投影伪影的轨迹的窗口内的峰值光强区域,其中该轨迹表示第一投影伪影在距离传感器的成像传感器上的潜在移动范围;以及由处理系统部分地基于第一投影伪影的位置来计算从距离传感器到对象的距离。
附图说明
图1概念性地图示了根据本公开的示例的对窗口的使用,该窗口用以检测由距离传感器的投影系统生成的投影图案中的投影伪影的位置;
图2图示了根据本公开的示例的多个投影伪影的轨迹的特写视图;
图3图示了根据本公开的针对单个投影伪影的窗口和相关联的几何形状;
图4图示了示例投影图案,其中对象如此靠近距离传感器以至于图案的区域中的投影伪影如此大/亮,以至于投影伪影彼此重叠,从而使得难以在个体投影伪影之间进行区分;
图5图示了示例投影图案,其中光学噪声使得难以在投影图案的区域中的个体投影伪影之间进行区分;
图6图示了当在图3的窗口中存在光学噪声时的情况;
图7是图示了根据本公开的用于使用高密度投影图案进行距离测量的方法的一个示例的流程图;以及
图8描绘了用于计算从传感器到对象的距离的示例电子设备的高级框图。
具体实施方式
本公开广泛描述了一种用于使用高密度投影图案进行距离测量的装置、方法和非暂时性计算机可读介质。如上面讨论的,距离传感器(诸如,序列号为14/920,246、15/149,323和15/149,429的美国专利申请中描述的那些)通过对光束进行投影来确定距对象的距离(以及潜在地确定对象的形状和尺寸),该光束会散开以在包括该对象的视场中创建图案(例如,点、虚线或其他伪影的图案)。可以从一个或多个激光源来投影光束,这些激光源发射如下光:该光具有对于人眼基本上不可见、但是对于适当的检测器(例如,光接收系统的检测器)可见的波长。然后,可以使用三角测量技术、基于图案对于检测器的外观来计算距对象的三维距离。
高密度图案(即,其中投影伪影之间的距离较小的图案)通常是合期望的,这是由于它们允许进行更高分辨率的距离测量。然而,这种图案的高密度也可能使距离计算更加复杂。举例来说,投影伪影彼此越靠近,个体投影伪影的轨迹(移动区域或潜在移动的范围)的移动就越有可能将会重叠。这种重叠使得传感器更加难以区分个体投影伪影及其移动。由于投影伪影的移动影响投影伪影的外观,并且由于距离是基于投影伪影的外观来计算的,因此这使距离测量变得复杂,并且导致更长的计算时间。
另外,当对象更靠近传感器时,即使较低密度的图案也可能看起来是更密集的。具体地,投影伪影的大小、强度和间距随着距对象的距离而改变。当传感器更远离对象时,投影图案将看起来不那么密集;投影伪影将随着它们之间具有更大的间距而看起来更小并且不那么亮。当传感器更靠近对象时,投影图案将看起来更密集;投影伪影将随着它们之间具有更小的间距而看起来更大并且更亮。投影伪影的大小、强度和形状也可以基于对象的形状、反射和反射分布而改变。
更复杂的是,检测器所捕获的图像除了投影图案之外还可能包括视觉噪声。这种视觉噪声可能是由于对象的特性(例如,反射)和/或环境照明条件而出现的。视觉噪声可能使得更加难以用有效的方式来准确地识别投影伪影,尤其是当投影图案非常密集时。
本公开的示例提供了一种用以可靠地标识高密度投影图案的图像中的个体投影伪影的方法,其中该图像除了投影图案之外还可能包括视觉噪声。特别地,本公开的示例将常规上是二维问题的检测投影伪影位置的问题简化成一维问题。在一个示例中,每个投影伪影的轨迹被指派有窗口,例如固定的物理位置范围,投影伪影被预期在该物理位置范围内出现在投影图案中(根据三角测量原理)。本公开的示例假设距离传感器已经被校准以确定这些窗口。然后,在给定投影伪影的对应轨迹窗口内,标识峰值光强区域;假设该峰值光强区域对应于投影伪影的位置。可以以这种方式来快速标识投影伪影的位置,从而允许对象距离的快速三角测量和计算。在进一步的示例中,可以将阈值应用于窗口的远端,使得当峰值光强位于这些阈值之外时(例如,过于靠近窗口边缘之一),从距离计算中消除该投影伪影。这补偿了视觉噪声和过于靠近传感器的对象,从而允许准确的距离计算。
图1概念性地图示了根据本公开的示例的对窗口的使用,该窗口用以检测由距离传感器的投影系统生成的投影图案中的投影伪影的位置。在图1的示例中,投影伪影被图示为点;然而,投影伪影可以采取其他形式,诸如虚线、x形式等等。因此,举例来说,图1采用了点。投影伪影可以沿着网格的x轴和y轴而布置,使得形成多个行和多个列。这种布置可以关于与y轴平行(例如,与行正交)的中心线(未示出)而对称。投影伪影的轨迹1021-102n(在下文中被单独称为“轨迹102”或被统称为“轨迹102”)平行于x轴(例如,沿着x轴移动)。
在一个示例中,每个轨迹102与对应窗口1041-104n(在下文中被单独称为“窗口104”或被统称为“窗口104”)相关联。如上面讨论的,轨迹102的窗口104表示固定的物理位置范围,当投影图案被投影到要计算其距离的对象上时,对应的投影伪影被预期在该物理位置范围内出现在投影图案中。在一个示例中,每个窗口104可以具有基本为圆锥的形状或逐渐变细的形状。例如,在图1中,每个窗口104的左侧被图示为比每个窗口的右侧更窄。该形状计及了由于对象距离所致的投影伪影大小的改变。具体地,距离传感器离对象越远,对象上将出现的投影伪影就越小。相反地,距离传感器距对象越近,对象上将出现的投影伪影就越大。因此,每个窗口104的较窄端106表示用于检测对应投影伪影的远极限距离,而窗口的较宽端108表示用于检测对应投影伪影的近极限距离。
应当注意的是,在所图示的示例中,共线的相邻轨迹102之间不存在重叠。也就是说,出现在投影图案的同一行中的两个相邻投影伪影的轨迹102(诸如,轨迹1021和1022)不重叠。这在图2中被概念性地图示,图2图示了根据本公开的示例的多个投影伪影的轨迹2001-200m(在下文中被单独称为“轨迹200”或被统称为“轨迹200”)的特写视图。如所图示的,给定轨迹的近极限距离(例如,对应窗口的宽端)与同一行中的相邻轨迹的远极限距离(例如,窗口的窄端)之间存在至少阈值距离d1(d1>0)。此外,给定轨迹200的轨迹中心(例如,贯穿轨迹200的平行于x轴的假想线2021-202m)与沿着y轴移动的相邻轨迹200的轨迹中心之间存在至少阈值距离d2(d2>0)。因此,没有任何两个投影伪影可以共享相同的轨迹中心202。此外,没有任何两个窗口会重叠。应当注意的是,图2的图案已经被简化。例如,相邻行之间(例如,沿着x轴)或相邻列之间(例如,沿着y轴)可能存在偏移。
图3图示了根据本公开的针对单个投影伪影302的窗口300和相关联的几何形状。图3还示出了跨窗口300的光强(或“像素值”)的分布的标绘图304。在这里,“像素值”指代指示了图像中的光强的值,如在距离传感器的成像传感器310的特定像素处测量的那样。如所图示的,峰值光强(由标绘图304的峰306表示)与窗口300中的投影伪影302的位置相一致。
在一个示例中,为了减少窗口300中的光强的不均匀性的影响,可以针对窗口300的子窗口(例如,极小的区域)xk来计算y方向上的光强
Figure DEST_PATH_IMAGE002A
的平均值 。该子窗口可以横跨窗口300中的整个y方向,但是横跨窗口300中的x方向(例如,投影伪影的移动方向)的极小或有限的部分(例如,百分之五或更少)。
附加地,可以确定x方向上的光强
Figure DEST_PATH_IMAGE004AA
的分布、以及超过阈值范围或阈值s(在图3中由线308表示)的光强在x方向上的分布。在一个示例中,光强分布阈值范围的极限Rxmin和Rxmax相对于投影伪影在x方向上的位置x1具有恒定或不同的值(即,Rx1min,Rx1max)。在进一步的示例中,阈值s相对于x方向上的位置xk可以具有恒定值或不同的值。
因此,为了确定由距离传感器的图像传感器获取的图像是否对应于投影伪影302,可以实行以下步骤。首先,将光强
Figure DEST_PATH_IMAGE004AAA
在x方向上的像素x1(Rx1)处的光强分布范围与光强分布阈值范围(Rx1min,Rx1max)进行比较。光强分布阈值范围(Rx1min,Rx1max)可以通过根据考虑来消除窗口300的远极限距离和近极限距离从而缩短窗口300。
当光强
Figure DEST_PATH_IMAGE004AAAA
在x方向上的x1(Rx1)处的光强分布范围落在光强分布阈值范围(Rx1min,Rx1max)之外时,可以忽略投影伪影302(例如,从距离测量计算中排除)。例如,当Rx1大于Rx1max时,这可能指示对象过于靠近距离传感器,以至于距离传感器无法可靠地观察投影伪影302。这种情形的示例在图4中示出,图4图示了示例投影图案400,其中对象如此靠近距离传感器,以至于图案400的区域402中的投影伪影如此大/亮,以至于投影伪影彼此重叠,从而使得难以在个体投影伪影之间进行区分。
类似地,当Rx1小于Rx1min时,检测到的光很可能是噪声而不是投影伪影302的结果。这种情形的示例在图5中示出,图5图示了示例投影图案500,其中光学噪声502使得难以在投影图案500的区域中的个体投影伪影之间进行区分。图6还图示了当图3的窗口300中存在光学噪声时的情况。如图6中所示,光学噪声的存在导致Rx1落在光强分布阈值范围(Rx1min,Rx1max)之外。
然而,如果光强
Figure DEST_PATH_IMAGE004AAAAA
在x方向上的x1(Rx1)处的光强分布范围落在光强分布阈值范围(Rx1min,Rx1max)内,则可以利用进一步操作来检测投影伪影302的位置。在一个示例中,针对落在光强分布阈值范围(Rx1min,Rx1max)内的每个像素值,根据预定算法(例如,取中心值、中值等等)来计算X0(投影伪影)的值。然而,应当注意的是,光强分布与投影伪影位置之间的关系可能会由于透镜特性、射束投影特性以及其他因素而变化。
图7是图示了根据本公开的用于使用高密度投影图案进行距离测量的方法700的一个示例的流程图。方法700可以例如由处理器来实行,该处理器诸如距离传感器的处理器或图8中图示的处理器802。举例来说,方法700被描述为由处理系统来实行。
方法700可以在步骤702中开始。在步骤704中,处理系统可以使光的图案投影到对象上。光的图案可以由距离传感器的投影系统的多个射束来创建。该多个射束可能将多个投影伪影投影到对象上,其中投影伪影共同地形成光的图案或“投影图案”。投影图案的几何约束可以由上面的图2来定义。如上面讨论的,光可以具有对于人眼基本上不可见、但是可由距离传感器的成像传感器检测到的波长(例如,红外光)。
在步骤706中,处理系统可以标识被指派给该多个射束中的第一射束的窗口。在一个示例中,假设该多个射束中的至少一些射束被指派有相应的检测区域或“窗口”,该相应的检测区域或“窗口”针对的是这些射束在对象上创建的相应投影伪影,如上面讨论的。窗口在x方向上的长度可以是预定的并且不重叠。在一个示例中,被指派给第一射束的窗口在投影图案的y方向上具有的宽度小于或等于第一射束在距离传感器的图像传感器上的投影伪影的图像的直径。
在步骤708中,处理系统可以计算在窗口的y方向上(例如,在垂直于投影伪影的轨迹的方向上)的光强(例如,距离传感器的成像传感器接收到的光)的量(例如,总和或平均值)。可以在子窗口上计算y方向上的光强的量,该子窗口在y方向上横跨整个窗口,但是在x方向上横跨窗口的极小部分(例如,百分之五或更少)。
在步骤710中,处理系统可以标识窗口的如下区域:在该区域中,跨窗口的x方向(例如,在平行于投影伪影的轨迹的方向上)的光强分布超过第一预定义阈值。在一个示例中,根据沿着x方向的位置来设置第一预定义阈值的值。窗口的该区域可以被表示为x1。
接下来,处理系统可以确定在步骤708中标识的窗口的区域x1中的光强分布是否落在光强分布阈值范围(Rx1min,Rx1max)之外。在一个示例中,根据沿着x方向的位置,光强分布阈值范围的最小值和最大值具有不同的值。
在步骤712中,处理系统可以确定光强分布是否超过光强分布阈值范围的最大值(Rx1max)。如果处理系统在步骤712确定光强分布超过光强分布阈值范围的最大值,则处理系统可以进行到步骤714。在步骤714,处理系统可以从距离计算中排除与第一射束相关联的投影伪影。
在这种情况下,处理系统可以假设:其距离正在被检测的对象可能过于靠近距离传感器,以至于不允许使用与第一射束相关联的投影伪影进行准确的距离测量。在一个示例中,处理系统可以将该假设存储在存储器中。随后,如果至少阈值数量的相邻窗口被确定为包含超过光强分布阈值范围的最大值的光强分布,则处理系统可以断定该对象过于靠近距离传感器。处理系统可以生成信号来警告用户以调整该对象与距离传感器之间的距离。替代地,如果小于阈值数量的相邻窗口被确定为包含超过光强分布阈值范围的最大值的光强分布,则处理系统可以断定存在光学/光噪声。在这种情况下,处理系统可以调整距离传感器的图像捕获部件的设置(例如,曝光时间),或者可以生成信号来警告用户以做出调整。
参考回到步骤712,如果处理系统在步骤712确定光强分布没有超过光强分布阈值范围的最大值,则处理系统可以进行到步骤716。在步骤716中,处理系统可以确定光强分布是否落在光强分布阈值范围的最小值(Rx1min)以下。
如果处理系统在步骤716确定光强分布落在光强分布阈值范围的最小值以下,则处理系统可以进行到步骤718。在步骤718中,处理系统可以从距离计算中排除与第一射束相关联的投影伪影。在这种情况下,处理系统可以假设窗口中的检测到的光是光学/光噪声,而不是投影伪影。
替代地,如果处理系统在步骤716中确定光强分布没有落在光强分布阈值范围的最小值以下,则方法700可以进行到步骤720。在步骤720中,处理系统可以根据在步骤708中标识的区域x1中的光强的量来确定成像传感器上的投影伪影的位置。在一个示例中,该量可以包括光强的中心值和/或中值(其可以指示投影伪影的中心)。
一旦根据步骤714或步骤718从距离计算中排除了投影伪影,或者在步骤720确定了投影伪影的位置,方法700就进行到步骤722。在步骤722中,处理系统可以根据已经基于光强所标识的多个投影伪影的位置(例如,根据方法700)来计算从对象到距离传感器的距离。因此,可以针对与该多个射束相关联的多个窗口来实行方法700,使得可以标识多个投影伪影的位置。
方法700可以在步骤724中结束。
因此,方法700通过找出固定窗口内的峰值光强区域,从而将确定投影伪影位置的常规上的二维问题变换成一维问题。如果这些峰值光强区域满足一定的阈值标准,则可以假设它们表示投影伪影的位置。
应当注意的是,在一些情况下,窗口内的多个区域可以满足阈值标准(例如,多个区域可以具有落在光强分布阈值范围内的峰值光强)。在这种情况下,可以从距离计算中排除与这些窗口相关联的射束所生成的投影伪影。
应当注意的是,尽管没有明确指定,但是上述方法700的一些框、功能或操作可以包括针对特定应用的存储、显示和/或输出。换句话说,取决于该特定应用,方法700中讨论的任何数据、记录、字段和/或中间结果可以被存储、显示和/或输出到另一个设备。此外,图7中的记载了确定操作、或涉及决策的框、功能或操作并不意味着确定操作的两个分支都被实践。换句话说,取决于确定操作的结果,确定操作的分支之一可以不被实行。
图8描绘了用于计算从传感器到对象的距离的示例电子设备800的高级框图。由此,电子设备800可以被实现为电子设备或系统的处理器,诸如距离传感器。
如图8中描绘的,电子设备800包括:硬件处理器元件802,例如中央处理单元(CPU)、微处理器、或多核处理器;存储器804,例如随机存取存储器(RAM)和/或只读存储器(ROM);模块805,其用于计算从传感器到对象的距离;以及各种输入/输出设备806,例如存储设备(包括但不限于磁带驱动器、软盘驱动器、硬盘驱动器或致密盘驱动器)、接收器、发射器、显示器、输出端口、输入端口、以及用户输入设备(诸如,键盘、小键盘、鼠标、麦克风、相机、激光光源、LED光源等等)。
尽管示出了一个处理器元件,但是应当注意的是,电子设备800可以采用多个处理器元件。此外,尽管在该图中示出了一个电子设备800,但是如果针对特定的说明性示例以分布式或并行方式来实现如上讨论的(一个或多个)方法(即,跨多个或并行电子设备来实现(一个或多个)上述方法或(一个或多个)整个方法的框),则该图的电子设备800意图表示这些多个电子设备中的每一个。
应当注意的是,本公开可以通过机器可读指令和/或以机器可读指令和硬件的组合来实现,例如使用专用集成电路(ASIC)、包括现场可编程门阵列(FPGA)的可编程逻辑阵列(PLA)、或部署在硬件设备、通用计算机或任何其他硬件等同物上的状态机,例如与上面讨论的(一个或多个)方法有关的计算机可读指令可以被用来配置硬件处理器以实行上面公开的(一个或多个)方法的框、功能和/或操作。
在一个示例中,针对用于计算从传感器到对象的距离的本模块或过程805的指令和数据(例如,机器可读指令)可以被加载到存储器804中,并且由硬件处理器元件802执行,以实现上面结合方法700所讨论的框、功能或操作。此外,当硬件处理器执行指令以实行“操作”时,这可以包括硬件处理器直接实行操作,和/或促进、指导另一硬件设备或组件(例如,协处理器等等)或者与另一硬件设备或组件协作以实行操作。
执行与上面描述的(一个或多个)方法有关的机器可读指令的处理器可以被视为经编程的处理器或专用处理器。由此,用于计算从传感器到本公开的对象的距离的本模块805可以被存储在有形的或物理的(广义上非暂时性的)计算机可读存储设备或介质上,例如易失性存储器、非易失性存储器、ROM存储器、RAM存储器、磁性或光学驱动器、设备或磁盘等等。更具体地,计算机可读存储设备可以包括提供存储信息的能力的任何物理设备,该信息诸如将由处理器或电子设备(诸如,安全传感器系统的计算机或控制器)访问的数据和/或指令。
将领会到的是,上面公开的变型以及其他特征和功能、或其替代方案可以被组合到许多其他不同的系统或应用中。可以随后在其中做出各种目前未预见到或未预料到的替代方案、修改或变型,它们也意图被所附权利要求涵盖。

Claims (20)

1.一种方法,其包括:
由距离传感器的处理系统指示距离传感器的图案投影仪将光的图案投影到对象上,其中所述图案包括多个投影伪影,其中所述多个投影伪影中的每个投影伪影与表示每个投影伪影在距离传感器的成像传感器上的潜在移动范围的轨迹相关联,其中在平行于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第一阈值距离,并且其中在垂直于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第二阈值距离;
由处理系统在包括光的图案的所述对象的图像中检测所述多个伪影中的第一投影伪影的位置,其中所述检测包括标识第一窗口内的峰值光强区域,第一窗口对应于与第一投影伪影相关联的第一轨迹;以及
由处理系统部分地基于第一投影伪影的位置来计算从距离传感器到所述对象的距离。
2.根据权利要求1所述的方法,进一步包括:
当对应于与第二投影伪影相关联的第二轨迹的第二窗口内的峰值光强区域落在预定义阈值范围之外时,由处理系统从所述计算中排除所述多个投影伪影中的第二投影伪影的位置。
3.根据权利要求2所述的方法,进一步包括:
当第二窗口内的峰值光强区域大于所述阈值范围的最大值时,并且当与第二窗口相邻的至少阈值数量的窗口也展现出大于所述最大值的峰值光强时,由处理系统假设所述对象过于靠近距离传感器,以至于不允许对第二投影伪影进行可靠的观察。
4.根据权利要求3所述的方法,进一步包括:
由处理系统生成信号来警告用户以调整所述对象与距离传感器之间的距离。
5.根据权利要求2所述的方法,进一步包括:
当第二窗口内的峰值光强区域大于所述阈值范围的最大值时,并且当与第二窗口相邻的小于阈值数量的窗口也展现出大于所述最大值的峰值光强时,由处理系统假设存在过多光学噪声,以至于不允许对第二投影伪影进行可靠的观察。
6.根据权利要求5所述的方法,进一步包括:
由处理系统生成信号来警告用户以调整距离传感器的图像捕获部件的设置。
7.根据权利要求2所述的方法,进一步包括:
当第二窗口内的峰值光强区域小于所述阈值范围的最小值时,由处理系统假设存在过多光学噪声,以至于不允许对第二投影伪影进行可靠的观察。
8.根据权利要求1所述的方法,其中第一窗口在垂直于轨迹的移动方向的方向上的宽度不大于第一投影伪影的直径。
9.根据权利要求8所述的方法,进一步包括,在所述检测之前:
由处理系统计算第一窗口的子窗口上的光强的量,其中所述子窗口在垂直于轨迹的移动方向的方向上横跨整个第一窗口,但是在平行于轨迹的移动方向的方向上横跨少于整个第一窗口。
10.根据权利要求9所述的方法,其中所述量是光强的总和。
11.根据权利要求9所述的方法,其中所述量是光强的平均值。
12.根据权利要求1所述的方法,其中峰值光强包括第一窗口内的光强的中心值。
13.根据权利要求1所述的方法,其中峰值光强包括第一窗口内的光强的中值。
14.根据权利要求1所述的方法,进一步包括:
当在对应于与第二投影伪影相关联的第二轨迹的第二窗口内检测到至少两个峰值光强区域时,由处理系统从所述计算中排除所述多个投影伪影中的第二投影伪影的位置。
15.一种利用可由距离传感器的处理器执行的指令来编码的非暂时性机器可读存储介质,其中所述指令在被执行时使处理器实行如下操作,所述操作包括:
指示距离传感器的图案投影仪将光的图案投影到对象上,其中所述图案包括多个投影伪影,其中所述多个投影伪影中的每个投影伪影与表示每个投影伪影在距离传感器的成像传感器上的潜在移动范围的轨迹相关联,其中在平行于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第一阈值距离,并且其中在垂直于轨迹的移动方向的方向上相邻的两个轨迹之间存在至少第二阈值距离;
在包括光的图案的所述对象的图像中检测所述多个伪影中的第一投影伪影的位置,其中所述检测包括标识对应于第一投影伪影的轨迹的窗口内的峰值光强区域;以及
部分地基于第一投影伪影的位置来计算从距离传感器到所述对象的距离。
16.一种方法,其包括:
由距离传感器的处理系统指示距离传感器的图案投影仪将光的图案投影到对象上,其中所述图案包括多个投影伪影;
由处理系统在包括光的图案的所述对象的图像中检测所述多个伪影中的第一投影伪影的位置,其中所述检测包括标识对应于第一投影伪影的轨迹的窗口内的峰值光强区域,其中所述轨迹表示第一投影伪影在距离传感器的成像传感器上的潜在移动范围;以及
由处理系统部分地基于第一投影伪影的位置来计算从距离传感器到所述对象的距离。
17.根据权利要求16所述的方法,进一步包括:
当对应于与第二投影伪影相关联的第二轨迹的第二窗口内的峰值光强区域落在预定义阈值范围之外时,由处理系统从所述计算中排除所述多个投影伪影中的第二投影伪影的位置。
18.根据权利要求16所述的方法,其中第一窗口在垂直于轨迹的移动方向的方向上的宽度不大于第一投影伪影的直径。
19.根据权利要求18所述的方法,进一步包括,在所述检测之前:
由处理系统计算第一窗口的子窗口上的光强的量,其中所述子窗口在垂直于轨迹的移动方向的方向上横跨整个第一窗口,但是在平行于轨迹的移动方向的方向上横跨少于整个第一窗口。
20.根据权利要求16所述的方法,进一步包括:
当在对应于与第二投影伪影相关联的第二轨迹的第二窗口内检测到至少两个峰值光强区域时,由处理系统从所述计算中排除所述多个投影伪影中的第二投影伪影的位置。
CN201980052241.1A 2018-06-06 2019-06-04 使用高密度投影图案的距离测量 Active CN112513565B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862681236P 2018-06-06 2018-06-06
US62/681236 2018-06-06
PCT/US2019/035368 WO2019236563A1 (en) 2018-06-06 2019-06-04 Distance measurement using high density projection patterns

Publications (2)

Publication Number Publication Date
CN112513565A true CN112513565A (zh) 2021-03-16
CN112513565B CN112513565B (zh) 2023-02-10

Family

ID=68764079

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980052241.1A Active CN112513565B (zh) 2018-06-06 2019-06-04 使用高密度投影图案的距离测量

Country Status (7)

Country Link
US (1) US11474245B2 (zh)
EP (1) EP3803266A4 (zh)
JP (1) JP7292315B2 (zh)
KR (1) KR20210008025A (zh)
CN (1) CN112513565B (zh)
TW (1) TWI808189B (zh)
WO (1) WO2019236563A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10337860B2 (en) 2016-12-07 2019-07-02 Magik Eye Inc. Distance sensor including adjustable focus imaging sensor
US10885761B2 (en) 2017-10-08 2021-01-05 Magik Eye Inc. Calibrating a sensor system including multiple movable sensors
US11199397B2 (en) 2017-10-08 2021-12-14 Magik Eye Inc. Distance measurement using a longitudinal grid pattern
CN112119628B (zh) 2018-03-20 2022-06-03 魔眼公司 调整相机曝光以用于三维深度感测和二维成像
JP2021518535A (ja) 2018-03-20 2021-08-02 マジック アイ インコーポレイテッド 様々な密度の投影パターンを使用する距離測定
WO2019236563A1 (en) * 2018-06-06 2019-12-12 Magik Eye Inc. Distance measurement using high density projection patterns
WO2020033169A1 (en) 2018-08-07 2020-02-13 Magik Eye Inc. Baffles for three-dimensional sensors having spherical fields of view
US11483503B2 (en) 2019-01-20 2022-10-25 Magik Eye Inc. Three-dimensional sensor including bandpass filter having multiple passbands
WO2020197813A1 (en) 2019-03-25 2020-10-01 Magik Eye Inc. Distance measurement using high density projection patterns
US11019249B2 (en) 2019-05-12 2021-05-25 Magik Eye Inc. Mapping three-dimensional depth map data onto two-dimensional images
US11320537B2 (en) 2019-12-01 2022-05-03 Magik Eye Inc. Enhancing triangulation-based three-dimensional distance measurements with time of flight information
US11580662B2 (en) 2019-12-29 2023-02-14 Magik Eye Inc. Associating three-dimensional coordinates with two-dimensional feature points
JP2023510738A (ja) 2020-01-05 2023-03-15 マジック アイ インコーポレイテッド 3次元カメラの座標系を2次元カメラの入射位置に移動させる方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102193295A (zh) * 2010-02-02 2011-09-21 普莱姆森斯有限公司 用于光学投影的集成光子学模块
US20130242090A1 (en) * 2010-12-15 2013-09-19 Canon Kabushiki Kaisha Distance measurement apparatus, distance measurement method, and non-transitory computer-readable storage medium
CN106067968A (zh) * 2015-04-20 2016-11-02 三星电子株式会社 图像传感器单元和系统
CN106338244A (zh) * 2015-07-10 2017-01-18 赫克斯冈技术中心 3d测量机
US20170135617A1 (en) * 2014-07-14 2017-05-18 Heptagon Micro Optics Pte. Ltd. Optoelectronic modules operable to distinguish between signals indicative of reflections from an object of interest and signals indicative of a spurious reflection
US20180143018A1 (en) * 2015-05-10 2018-05-24 Magik Eye Inc. Distance sensor projecting parallel patterns

Family Cites Families (188)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4914460A (en) 1987-05-29 1990-04-03 Harbor Branch Oceanographic Institution Inc. Apparatus and methods of determining distance and orientation
US4954962A (en) 1988-09-06 1990-09-04 Transitions Research Corporation Visual navigation and obstacle avoidance structured light system
JPH045112A (ja) 1990-04-23 1992-01-09 Sumitomo Rubber Ind Ltd 低転がり抵抗タイヤ
US5061062A (en) 1990-07-02 1991-10-29 General Electric Company Focus spot size controller for a variable depth range camera
CA2180853A1 (en) 1994-01-11 1995-07-13 Nicolaas Cornelis Maria Beers Cleaner composition
JPH08555A (ja) 1994-06-16 1996-01-09 Fuji Photo Optical Co Ltd 内視鏡の照明装置
US5699444A (en) 1995-03-31 1997-12-16 Synthonics Incorporated Methods and apparatus for using image data to determine camera location and orientation
JP3328111B2 (ja) 1995-08-23 2002-09-24 日本電気株式会社 空間距離測定方法及び空間距離測定装置
US6038415A (en) 1997-07-18 2000-03-14 Minolta Co., Ltd. Image forming apparatus and image-carrier cartridge device which is employed in the same
DE69823116D1 (de) 1997-08-05 2004-05-19 Canon Kk Bildverarbeitungsverfahren und -gerät
US5980454A (en) 1997-12-01 1999-11-09 Endonetics, Inc. Endoscopic imaging system employing diffractive optical elements
US5870136A (en) 1997-12-05 1999-02-09 The University Of North Carolina At Chapel Hill Dynamic generation of imperceptible structured light for tracking and acquisition of three dimensional scene geometry and surface characteristics in interactive three dimensional computer graphics applications
AUPP299498A0 (en) 1998-04-15 1998-05-07 Commonwealth Scientific And Industrial Research Organisation Method of tracking and sensing position of objects
US6122039A (en) 1998-10-28 2000-09-19 Banner Engineering Corp. Method and apparatus to detect and report object displacement utilizing optical triangulation principles
US7193645B1 (en) 2000-07-27 2007-03-20 Pvi Virtual Media Services, Llc Video system and method of operating a video system
JP2002056348A (ja) 2000-08-07 2002-02-20 Tohken Co Ltd オートフォーカス機能を有する手持ち式読取装置及びオートフォーカス方法、並び距離計測方法
JP3922694B2 (ja) * 2001-06-15 2007-05-30 住友大阪セメント株式会社 監視装置
US6937350B2 (en) * 2001-06-29 2005-08-30 Massachusetts Institute Of Technology Apparatus and methods for optically monitoring thickness
US7940299B2 (en) 2001-08-09 2011-05-10 Technest Holdings, Inc. Method and apparatus for an omni-directional video surveillance system
JP2002341238A (ja) * 2002-03-18 2002-11-27 Olympus Optical Co Ltd 測距装置のための調整装置
US20040041996A1 (en) * 2002-08-28 2004-03-04 Fuji Xerox Co., Ltd. Range finder and method
GB2395261A (en) 2002-11-11 2004-05-19 Qinetiq Ltd Ranging apparatus
TWI247104B (en) 2003-02-26 2006-01-11 Hon Hai Prec Ind Co Ltd A measuring method for pattern of light guide plate
DE10308383A1 (de) 2003-02-27 2004-09-16 Storz Endoskop Produktions Gmbh Verfahren und optisches System zur Vermessung der Topographie eines Meßobjekts
US7460250B2 (en) * 2003-10-24 2008-12-02 3Dm Devices Inc. Laser triangulation system
KR100764419B1 (ko) 2004-02-09 2007-10-05 강철권 불규칙패턴을 이용한 3차원형상 측정장치 및 측정방법
US20050288956A1 (en) 2004-06-16 2005-12-29 Ewald Speicher Systems and methods for integrating business process documentation with work environments
US7191056B2 (en) 2005-01-04 2007-03-13 The Boeing Company Precision landmark-aided navigation
JP2006313116A (ja) 2005-05-09 2006-11-16 Nec Viewtechnology Ltd 距離傾斜角度検出装置および該検出装置を備えたプロジェクタ
JP4644540B2 (ja) 2005-06-28 2011-03-02 富士通株式会社 撮像装置
US20070091174A1 (en) 2005-09-30 2007-04-26 Topcon Corporation Projection device for three-dimensional measurement, and three-dimensional measurement system
JP4760391B2 (ja) 2006-01-13 2011-08-31 カシオ計算機株式会社 測距装置及び測距方法
JP4799216B2 (ja) 2006-03-03 2011-10-26 富士通株式会社 距離測定機能を有する撮像装置
US7375803B1 (en) 2006-05-18 2008-05-20 Canesta, Inc. RGBZ (red, green, blue, z-depth) filter system usable with sensor systems, including sensor systems with synthetic mirror enhanced three-dimensional imaging
JP4889373B2 (ja) 2006-05-24 2012-03-07 ローランドディー.ジー.株式会社 3次元形状測定方法およびその装置
WO2008066742A1 (en) 2006-11-22 2008-06-05 Geng Z Jason Wide field-of-view reflector and method of designing and making same
TWI320480B (en) 2007-04-23 2010-02-11 Univ Nat Formosa One diffraction 6 degree of freedom optoelectronic measurement system
WO2008133957A1 (en) 2007-04-23 2008-11-06 California Institute Of Technology Single-lens, single-sensor 3-d imaging device with a central aperture for obtaining camera position
DE102007054906B4 (de) 2007-11-15 2011-07-28 Sirona Dental Systems GmbH, 64625 Verfahren zur optischen Vermessung der dreidimensionalen Geometrie von Objekten
US8285025B2 (en) 2008-03-25 2012-10-09 Electro Scientific Industries, Inc. Method and apparatus for detecting defects using structured light
US9170097B2 (en) 2008-04-01 2015-10-27 Perceptron, Inc. Hybrid system
CN102027388B (zh) 2008-04-11 2013-08-28 瑞士联邦理工大学,洛桑(Epfl) 采用显示器作为照明源的基于飞行时间的成像系统
US8282485B1 (en) 2008-06-04 2012-10-09 Zhang Evan Y W Constant and shadowless light source
DE102008031942A1 (de) 2008-07-07 2010-01-14 Steinbichler Optotechnik Gmbh Verfahren und Vorrichtung zur 3D-Digitalisierung eines Objekts
WO2010006081A1 (en) 2008-07-08 2010-01-14 Chiaro Technologies, Inc. Multiple channel locating
US8334900B2 (en) 2008-07-21 2012-12-18 The Hong Kong University Of Science And Technology Apparatus and method of optical imaging for medical diagnosis
JP2010091855A (ja) 2008-10-09 2010-04-22 Denso Corp レーザビーム照射装置
JP5251419B2 (ja) 2008-10-22 2013-07-31 日産自動車株式会社 距離計測装置および距離計測方法
CN101794065A (zh) 2009-02-02 2010-08-04 中强光电股份有限公司 投影显示系统
US20100223706A1 (en) 2009-03-03 2010-09-09 Illinois Tool Works Inc. Welding helmet audio communication systems and methods with bone conduction transducers
JP5484098B2 (ja) 2009-03-18 2014-05-07 三菱電機株式会社 投写光学系及び画像表示装置
JP4991787B2 (ja) 2009-04-24 2012-08-01 パナソニック株式会社 反射型光電センサ
CA2957077C (en) 2009-06-01 2019-07-02 Gerd Hausler Method and device for three-dimensional surface detection with a dynamic reference frame
GB0921461D0 (en) * 2009-12-08 2010-01-20 Qinetiq Ltd Range based sensing
US8320621B2 (en) 2009-12-21 2012-11-27 Microsoft Corporation Depth projector system with integrated VCSEL array
US20110188054A1 (en) 2010-02-02 2011-08-04 Primesense Ltd Integrated photonics module for optical projection
JP2011169701A (ja) 2010-02-17 2011-09-01 Sanyo Electric Co Ltd 物体検出装置および情報取得装置
US9151607B2 (en) * 2010-05-31 2015-10-06 University Of North Carolina At Charlotte Dimensional measurement through a combination of photogrammetry and optical scattering
JP5612916B2 (ja) 2010-06-18 2014-10-22 キヤノン株式会社 位置姿勢計測装置、その処理方法、プログラム、ロボットシステム
JP5499985B2 (ja) 2010-08-09 2014-05-21 ソニー株式会社 表示装置組立体
CN103069250B (zh) 2010-08-19 2016-02-24 佳能株式会社 三维测量设备、三维测量方法
JP5163713B2 (ja) 2010-08-24 2013-03-13 カシオ計算機株式会社 距離画像センサ及び距離画像生成装置並びに距離画像データ取得方法及び距離画像生成方法
US8830637B2 (en) 2010-08-31 2014-09-09 Texas Instruments Incorporated Methods and apparatus to clamp overvoltages for alternating current systems
US20120056982A1 (en) 2010-09-08 2012-03-08 Microsoft Corporation Depth camera based on structured light and stereo vision
US8593535B2 (en) 2010-09-10 2013-11-26 Apple Inc. Relative positioning of devices based on captured images of tags
JP2012068762A (ja) 2010-09-21 2012-04-05 Sony Corp 検出装置、検出方法、プログラム、及び電子機器
EP2433716A1 (en) 2010-09-22 2012-03-28 Hexagon Technology Center GmbH Surface spraying device with a nozzle control mechanism and a corresponding method
WO2012057008A1 (en) * 2010-10-27 2012-05-03 Nikon Corporation Profile measuring apparatus, method for manufacturing structure, and structure manufacturing system
TWI428558B (zh) 2010-11-10 2014-03-01 Pixart Imaging Inc 測距方法、測距系統與其處理軟體
CN103477644B (zh) 2011-02-04 2017-04-12 皇家飞利浦电子股份有限公司 记录图像和从图像获得3d信息的方法、相机系统
JP5746529B2 (ja) * 2011-03-16 2015-07-08 キヤノン株式会社 三次元距離計測装置、三次元距離計測方法、およびプログラム
JP2014122789A (ja) 2011-04-08 2014-07-03 Sanyo Electric Co Ltd 情報取得装置、投射装置および物体検出装置
WO2012147496A1 (ja) * 2011-04-25 2012-11-01 三洋電機株式会社 物体検出装置および情報取得装置
JP5830270B2 (ja) 2011-05-24 2015-12-09 オリンパス株式会社 内視鏡装置および計測方法
CN103649680B (zh) 2011-06-07 2016-11-09 形创有限公司 用于3d扫描的传感器定位
KR101974651B1 (ko) 2011-06-22 2019-05-02 성균관대학교산학협력단 경계선 상속을 통하여 계층적으로 직교화된 구조광을 디코딩하는 방법 및 이를 이용하는 3차원 거리 영상 측정 시스템
US10054430B2 (en) 2011-08-09 2018-08-21 Apple Inc. Overlapping pattern projector
JP2014238259A (ja) 2011-09-28 2014-12-18 三洋電機株式会社 情報取得装置および物体検出装置
US9142025B2 (en) 2011-10-05 2015-09-22 Electronics And Telecommunications Research Institute Method and apparatus for obtaining depth information using optical pattern
KR101605224B1 (ko) 2011-10-05 2016-03-22 한국전자통신연구원 패턴 광을 이용한 깊이 정보 획득 장치 및 방법
TW201329509A (zh) 2012-01-10 2013-07-16 Walsin Lihwa Corp 立體掃瞄裝置及其立體掃瞄方法
US9986208B2 (en) 2012-01-27 2018-05-29 Qualcomm Incorporated System and method for determining location of a device using opposing cameras
CN104254768A (zh) 2012-01-31 2014-12-31 3M创新有限公司 用于测量表面的三维结构的方法和设备
US9186470B2 (en) * 2012-02-08 2015-11-17 Apple Inc. Shape reflector and surface contour mapping
US10436902B2 (en) 2012-03-01 2019-10-08 Nissan Motor Co., Ltd. Range finding device and range finding method
JP6079772B2 (ja) 2012-03-28 2017-02-15 富士通株式会社 撮像装置
CN104284626B (zh) 2012-05-18 2017-12-05 西门子医疗保健诊断公司 鱼眼透镜分析器
US8699005B2 (en) 2012-05-27 2014-04-15 Planitar Inc Indoor surveying apparatus
DE102012013159B4 (de) 2012-07-02 2014-11-27 Mirek Göbel Strömungsmaschine zum Fördern großer Fluidmengen
CA2868425C (en) 2012-07-10 2017-08-29 Wavelight Gmbh Process and apparatus for determining optical aberrations of an eye
US20140016113A1 (en) 2012-07-13 2014-01-16 Microsoft Corporation Distance sensor using structured light
JP2014020978A (ja) 2012-07-20 2014-02-03 Fujitsu Ltd 照射装置、距離測定装置、照射装置のキャリブレーションプログラム及びキャリブレーション方法
EP2696590B1 (en) 2012-08-06 2014-09-24 Axis AB Image sensor positioning apparatus and method
JP2014044113A (ja) 2012-08-27 2014-03-13 Sanyo Electric Co Ltd 情報取得装置および物体検出装置
US9275459B2 (en) 2012-10-05 2016-03-01 Qualcomm Incorporated Method and apparatus for calibrating an imaging device
US9741184B2 (en) 2012-10-14 2017-08-22 Neonode Inc. Door handle with optical proximity sensors
CN110749951B (zh) 2012-10-24 2022-12-30 视瑞尔技术公司 照明设备
US9285893B2 (en) 2012-11-08 2016-03-15 Leap Motion, Inc. Object detection and tracking with variable-field illumination devices
DE102012022039B4 (de) 2012-11-09 2020-03-26 Mbda Deutschland Gmbh Modulare Laserbestrahlungseinheit
JP6119232B2 (ja) * 2012-12-19 2017-04-26 株式会社ソシオネクスト 距離測定装置、距離測定方法
WO2014097539A1 (ja) 2012-12-20 2014-06-26 パナソニック株式会社 3次元測定装置および3次元測定方法
WO2014106843A2 (en) 2013-01-01 2014-07-10 Inuitive Ltd. Method and system for light patterning and imaging
US9691163B2 (en) 2013-01-07 2017-06-27 Wexenergy Innovations Llc System and method of measuring distances related to an object utilizing ancillary objects
US8768559B1 (en) 2013-01-22 2014-07-01 Qunomic Virtual Technology, LLC Line projection system
US9142019B2 (en) 2013-02-28 2015-09-22 Google Technology Holdings LLC System for 2D/3D spatial feature processing
US10105149B2 (en) 2013-03-15 2018-10-23 Board Of Regents Of The University Of Nebraska On-board tool tracking system and methods of computer assisted surgery
US9364167B2 (en) 2013-03-15 2016-06-14 Lx Medical Corporation Tissue imaging and image guidance in luminal anatomic structures and body cavities
JP6170714B2 (ja) * 2013-04-15 2017-07-26 シャープ株式会社 測距装置
US20140320605A1 (en) 2013-04-25 2014-10-30 Philip Martin Johnson Compound structured light projection system for 3-D surface profiling
US9536339B1 (en) 2013-06-13 2017-01-03 Amazon Technologies, Inc. Processing unordered point cloud
US10061028B2 (en) 2013-09-05 2018-08-28 Texas Instruments Incorporated Time-of-flight (TOF) assisted structured light imaging
JP6211876B2 (ja) 2013-10-01 2017-10-11 株式会社トプコン 測定方法及び測定装置
EP2869263A1 (en) * 2013-10-29 2015-05-06 Thomson Licensing Method and apparatus for generating depth map of a scene
CN103559735B (zh) 2013-11-05 2017-03-01 重庆安钻理科技股份有限公司 一种三维重建方法及系统
CN105981047A (zh) 2014-01-06 2016-09-28 眼锁有限责任公司 用于重复虹膜识别的方法和设备
GB2522248A (en) 2014-01-20 2015-07-22 Promethean Ltd Interactive system
KR102166691B1 (ko) 2014-02-27 2020-10-16 엘지전자 주식회사 객체의 3차원 형상을 산출하는 장치 및 방법
US9526427B2 (en) 2014-03-21 2016-12-27 Hypermed Imaging, Inc. Compact light sensors with symmetrical lighting
US9307231B2 (en) 2014-04-08 2016-04-05 Lucasfilm Entertainment Company Ltd. Calibration target for video processing
JP6002275B2 (ja) 2014-04-30 2016-10-05 シナノケンシ株式会社 計測装置
JP5829306B2 (ja) 2014-05-12 2015-12-09 ファナック株式会社 レンジセンサの配置位置評価装置
US10207193B2 (en) 2014-05-21 2019-02-19 Universal City Studios Llc Optical tracking system for automation of amusement park elements
US20150347833A1 (en) 2014-06-03 2015-12-03 Mark Ries Robinson Noncontact Biometrics with Small Footprint
US9699393B2 (en) 2014-06-26 2017-07-04 Semiconductor Components Industries, Llc Imaging systems for infrared and visible imaging with patterned infrared cutoff filters
WO2016018260A1 (en) * 2014-07-29 2016-02-04 Apple Inc. Distortion quantifier
US9377533B2 (en) 2014-08-11 2016-06-28 Gerard Dirk Smits Three-dimensional triangulation and time-of-flight based tracking systems and methods
WO2016024200A2 (en) * 2014-08-12 2016-02-18 Mantisvision Ltd. Structured light projection and imaging
KR20160020323A (ko) 2014-08-13 2016-02-23 옥은호 평행 적외선 투사기와 카메라 모듈로 구성되는 거리 측정 센서
JP6370177B2 (ja) 2014-09-05 2018-08-08 株式会社Screenホールディングス 検査装置および検査方法
EP3209523A4 (en) 2014-10-24 2018-04-25 Magik Eye Inc. Distance sensor
CN105981074B (zh) 2014-11-04 2018-02-02 深圳市大疆创新科技有限公司 用于标定成像装置的系统、方法和装置
US20160128553A1 (en) 2014-11-07 2016-05-12 Zheng Jason Geng Intra- Abdominal Lightfield 3D Endoscope and Method of Making the Same
EP3229668A4 (en) 2014-12-08 2018-07-11 Luis Daniel Munoz Device, system and methods for assessing tissue structures, pathology, and healing
KR102369792B1 (ko) 2015-03-05 2022-03-03 한화테크윈 주식회사 촬영 장치 및 촬영 방법
JP6152395B2 (ja) 2015-03-09 2017-06-21 テスト リサーチ, インク. 光学検出システム
JP6484072B2 (ja) 2015-03-10 2019-03-13 アルプスアルパイン株式会社 物体検出装置
CN107637074B (zh) 2015-03-22 2020-09-18 脸谱科技有限责任公司 使用立体摄像机与结构化光的头戴显示器的深度绘制
CN107407728B (zh) * 2015-03-26 2020-05-22 富士胶片株式会社 距离图像获取装置以及距离图像获取方法
WO2016157593A1 (ja) 2015-03-27 2016-10-06 富士フイルム株式会社 距離画像取得装置及び距離画像取得方法
WO2016157600A1 (ja) 2015-03-30 2016-10-06 富士フイルム株式会社 距離画像取得装置及び距離画像取得方法
US9694498B2 (en) 2015-03-30 2017-07-04 X Development Llc Imager for detecting visual light and projected patterns
DE112015006245B4 (de) * 2015-03-30 2019-05-23 Fujifilm Corporation Abstandsbild-Erfassungsvorrichtung und Abstandsbild-Erfassungsverfahren
CN107896506A (zh) * 2015-05-10 2018-04-10 魔眼公司 距离传感器
DE102015209143B4 (de) 2015-05-19 2020-02-27 Esaote S.P.A. Verfahren zur Bestimmung einer Abbildungsvorschrift und bildgestützten Navigation sowie Vorrichtung zur bildgestützten Navigation
CN107613842B (zh) 2015-05-29 2019-09-24 奥林巴斯株式会社 照明装置和计测装置
US10533846B2 (en) * 2015-06-09 2020-01-14 Mitsubishi Electric Corporation Image generation device, image generating method, and pattern light generation device
US20160377414A1 (en) * 2015-06-23 2016-12-29 Hand Held Products, Inc. Optical pattern projector
KR20170005649A (ko) 2015-07-06 2017-01-16 엘지전자 주식회사 3차원 깊이 카메라 모듈 및 이를 구비하는 이동 단말기
US10223793B1 (en) 2015-08-05 2019-03-05 Al Incorporated Laser distance measuring method and system
DE102015115011A1 (de) 2015-09-08 2017-03-09 Valeo Schalter Und Sensoren Gmbh Laserscanner für Kraftfahrzeuge
US9989357B2 (en) 2015-09-09 2018-06-05 Faro Technologies, Inc. Aerial device that cooperates with an external projector to measure three-dimensional coordinates
JP2018538107A (ja) * 2015-09-23 2018-12-27 イースト カロライナ ユニバーシティ 発光体を使用して物体距離及びターゲット寸法を測定する方法、システム、及びコンピュータプログラム製品
US20170094251A1 (en) 2015-09-30 2017-03-30 Faro Technologies, Inc. Three-dimensional imager that includes a dichroic camera
US10176554B2 (en) 2015-10-05 2019-01-08 Google Llc Camera calibration using synthetic images
JP6597150B2 (ja) 2015-10-09 2019-10-30 富士通株式会社 距離測定装置、距離測定方法、距離測定プログラムおよびテーブルの作成方法
FR3042610B1 (fr) 2015-10-14 2018-09-07 Quantificare Dispositif et procede pour reconstruire en trois dimensions la tete et le corps
US10942261B2 (en) 2015-10-21 2021-03-09 Samsung Electronics Co., Ltd Apparatus for and method of range sensor based on direct time-of-flight and triangulation
US10225544B2 (en) 2015-11-19 2019-03-05 Hand Held Products, Inc. High resolution dot pattern
DE112015007146T5 (de) 2015-11-25 2018-08-02 Mitsubishi Electric Corporation Vorrichtung und verfahren zur dreidimensionalen bildmessung
KR20170094968A (ko) 2016-02-12 2017-08-22 엘지이노텍 주식회사 피사체 거리 측정 부재, 이를 갖는 카메라 모듈
US11030775B2 (en) 2016-03-17 2021-06-08 Flir Systems, Inc. Minimal user input video analytics systems and methods
CN113727000A (zh) 2016-05-27 2021-11-30 松下知识产权经营株式会社 摄像系统
US9686539B1 (en) 2016-06-12 2017-06-20 Apple Inc. Camera pair calibration using non-standard calibration objects
US10337860B2 (en) 2016-12-07 2019-07-02 Magik Eye Inc. Distance sensor including adjustable focus imaging sensor
US20180227566A1 (en) 2017-02-06 2018-08-09 Microsoft Technology Licensing, Llc Variable field of view and directional sensors for mobile machine vision applications
KR102201627B1 (ko) 2017-02-21 2021-01-12 가부시키가이샤 나노룩스 고체 촬상 소자 및 촬상 장치
US11025887B2 (en) 2017-02-27 2021-06-01 Sony Corporation Field calibration of stereo cameras with a projector
US10810753B2 (en) 2017-02-27 2020-10-20 Microsoft Technology Licensing, Llc Single-frequency time-of-flight depth computation using stereoscopic disambiguation
WO2018211588A1 (ja) 2017-05-16 2018-11-22 オリンパス株式会社 撮像装置、撮像方法及びプログラム
US10769914B2 (en) 2017-06-07 2020-09-08 Amazon Technologies, Inc. Informative image data generation using audio/video recording and communication devices
EP3477251B1 (en) 2017-08-29 2020-05-13 Shenzhen Goodix Technology Co., Ltd. Optical ranging method and optical ranging apparatus
US10885761B2 (en) * 2017-10-08 2021-01-05 Magik Eye Inc. Calibrating a sensor system including multiple movable sensors
US11199397B2 (en) * 2017-10-08 2021-12-14 Magik Eye Inc. Distance measurement using a longitudinal grid pattern
US10679076B2 (en) * 2017-10-22 2020-06-09 Magik Eye Inc. Adjusting the projection system of a distance sensor to optimize a beam layout
CN111263899B (zh) * 2017-11-28 2023-11-24 索尼半导体解决方案公司 照明装置、飞行时间系统和方法
JP2021518535A (ja) * 2018-03-20 2021-08-02 マジック アイ インコーポレイテッド 様々な密度の投影パターンを使用する距離測定
CN112119628B (zh) 2018-03-20 2022-06-03 魔眼公司 调整相机曝光以用于三维深度感测和二维成像
JP7039388B2 (ja) 2018-05-24 2022-03-22 株式会社トプコン 測量装置
WO2019236563A1 (en) * 2018-06-06 2019-12-12 Magik Eye Inc. Distance measurement using high density projection patterns
WO2020033169A1 (en) 2018-08-07 2020-02-13 Magik Eye Inc. Baffles for three-dimensional sensors having spherical fields of view
US10916023B2 (en) 2018-09-14 2021-02-09 Facebook Technologies, Llc Depth measurement assembly with a structured light source and a time of flight camera
US10638104B2 (en) 2018-09-14 2020-04-28 Christie Digital Systems Usa, Inc. Device, system and method for generating updated camera-projector correspondences from a reduced set of test patterns
US11158074B1 (en) * 2018-10-02 2021-10-26 Facebook Technologies, Llc Depth sensing using temporal coding
US20200182974A1 (en) * 2018-12-08 2020-06-11 Magik Eye Inc. Vertical cavity surface emitting laser-based projector
US11483503B2 (en) 2019-01-20 2022-10-25 Magik Eye Inc. Three-dimensional sensor including bandpass filter having multiple passbands
JP2020139869A (ja) 2019-02-28 2020-09-03 キヤノン株式会社 計測装置、算出方法、システム及びプログラム
WO2020197813A1 (en) * 2019-03-25 2020-10-01 Magik Eye Inc. Distance measurement using high density projection patterns
US11019249B2 (en) * 2019-05-12 2021-05-25 Magik Eye Inc. Mapping three-dimensional depth map data onto two-dimensional images

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102193295A (zh) * 2010-02-02 2011-09-21 普莱姆森斯有限公司 用于光学投影的集成光子学模块
US20130242090A1 (en) * 2010-12-15 2013-09-19 Canon Kabushiki Kaisha Distance measurement apparatus, distance measurement method, and non-transitory computer-readable storage medium
US20170135617A1 (en) * 2014-07-14 2017-05-18 Heptagon Micro Optics Pte. Ltd. Optoelectronic modules operable to distinguish between signals indicative of reflections from an object of interest and signals indicative of a spurious reflection
CN106067968A (zh) * 2015-04-20 2016-11-02 三星电子株式会社 图像传感器单元和系统
US20180143018A1 (en) * 2015-05-10 2018-05-24 Magik Eye Inc. Distance sensor projecting parallel patterns
CN106338244A (zh) * 2015-07-10 2017-01-18 赫克斯冈技术中心 3d测量机

Also Published As

Publication number Publication date
US20190377088A1 (en) 2019-12-12
EP3803266A4 (en) 2022-03-09
TW202012873A (zh) 2020-04-01
CN112513565B (zh) 2023-02-10
KR20210008025A (ko) 2021-01-20
TWI808189B (zh) 2023-07-11
EP3803266A1 (en) 2021-04-14
JP7292315B2 (ja) 2023-06-16
US11474245B2 (en) 2022-10-18
JP2021527205A (ja) 2021-10-11
WO2019236563A1 (en) 2019-12-12

Similar Documents

Publication Publication Date Title
CN112513565B (zh) 使用高密度投影图案的距离测量
CN110178156B (zh) 包括可调节焦距成像传感器的距离传感器
US20160156899A1 (en) Three-dimensional measurement apparatus and control method for the same
US20200051268A1 (en) Baffles for three-dimensional sensors having spherical fields of view
US11474209B2 (en) Distance measurement using high density projection patterns
US8947505B2 (en) Method and apparatus for generating texture in a three-dimensional scene
JP7064404B2 (ja) 光学式変位計
US11019249B2 (en) Mapping three-dimensional depth map data onto two-dimensional images
US11320537B2 (en) Enhancing triangulation-based three-dimensional distance measurements with time of flight information
US10753726B2 (en) System and method for 3D profile determination using model-based peak selection
KR20130082053A (ko) 깊이 영상을 처리하는 방법 및 장치
CN114730010B (zh) 利用飞行时间信息增强基于三角测量的三维距离测量
CN115298514A (zh) 包括补充准确度数据的距离测量
WO2023200727A1 (en) Calibrating a three-dimensional sensor using detection windows

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant