CN109791207B - 用于确定到对象的距离的系统和方法 - Google Patents
用于确定到对象的距离的系统和方法 Download PDFInfo
- Publication number
- CN109791207B CN109791207B CN201780060874.8A CN201780060874A CN109791207B CN 109791207 B CN109791207 B CN 109791207B CN 201780060874 A CN201780060874 A CN 201780060874A CN 109791207 B CN109791207 B CN 109791207B
- Authority
- CN
- China
- Prior art keywords
- light
- amount
- pulse
- time window
- predetermined time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4865—Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
- G01S17/10—Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
- G01S7/4815—Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4816—Constructional features, e.g. arrangements of optical elements of receivers alone
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4861—Circuits for detection, sampling, integration or read-out
- G01S7/4863—Detector arrays, e.g. charge-transfer gates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Electromagnetism (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
本发明涉及一种用于确定距离的系统,包括:光源,用于以脉冲序列朝向对象投射激光的离散光斑的图案;检测器,包括图像元件,用于检测表示对象所反射的图案的光,与脉冲序列同步;以及处理装置,以根据所述图像元件产生的曝光值计算到对象的距离。图像元件通过累积表示在第一时间窗期间反射的第一光量的第一电荷量和表示在第二时间窗期间反射的第二光量的第二电荷来产生曝光值。系统对至少两个连续的脉冲序列投射并检测,每个脉冲序列以不同持续时间的所述第一时间窗和所述第二时间窗被操作。
Description
技术领域
本发明涉及用于确定到对象的距离的系统的领域,尤其涉及用于表征场景或场景的一部分的基于飞行时间的传感系统。
背景技术
在遥感技术领域中,主要在制作周围环境的高分辨率地图以用于许多控制和导航应用(诸如但不限于汽车和工业环境、游戏应用和测绘应用)的用途中,已知使用基于飞行时间的感测来确定对象距传感器的距离。基于飞行时间的技术包括使用RF调制源、距离选通成像器和直接飞行时间(direct time-of-flight,DToF)成像器。对于RF调制源和距离选通成像器的使用,必须用调制源或脉冲源照射感兴趣的整个场景。直接飞行时间系统,诸如大多数激光雷达(LIDAR),使用脉冲束机械地扫描感兴趣的区域,脉冲束的反射用脉冲检测器感测。
为了能够将发射的RF调制信号与检测到的反射信号相关联,所发射的信号必须满足许多约束。实际上,这些约束使得RF调制系统对于在交通工具系统中的使用变得非常不实用:对于在常规安全限制内并且在常规交通工具的功率预算内的信号强度,可达到的检测范围(射程,距离)非常有限。
如在大多数激光雷达系统中使用的直接TOF(DToF)成像器包括强大的脉冲激光器(以纳秒脉冲状态操作)、用于从1D点测量获取3D地图的机械扫描系统以及脉冲检测器。这种类型的系统目前可从包括VelodyneLidar of Morgan Hill,California(加利福尼亚州摩根山的维洛丁激光雷达)的供应商处获得。Velodyne HDL-64E作为最先进系统的实例,在每秒5到15转的机械旋转结构中使用64个高功率激光器和64个检测器(雪崩二极管)。这些DToF激光雷达系统所需的光功率太高而无法用半导体激光器获得,半导体激光器的功率在低五到六个数量级的范围内。另外,用于扫描目的的机械旋转元件的使用限制了这种类型系统的小型化、可靠性和成本降低的前景。
以Trilumina名义的美国专利申请公开号2015/0063387公开了VCSEL(垂直腔面发射激光器),其以脉冲宽度为20ns的脉冲传递50mW的总能量。市售的Optek OPV310VCSEL在以持续时间为10ns的脉冲传递60mW的总能量,并且可通过外推法估算出最大光输出功率为100mW。该值仅在非常严格的操作条件下实现,这意味着最佳占空比和短脉冲宽度,以避免由于热问题导致的不稳定性。Trilumina公开和Optek系统都表明,由于与VCSEL设计固有相关的热约束,连续波VCSEL系统在光峰值功率输出方面达到了其物理极限。在这些脉冲能量水平下,并且使用如目前在DToF应用中使用的ns脉冲,可以预期在120m距离处的对象有效反射的光子数量非常低,使得其无法借助于常规半导体传感器,诸如CMOS或CCD或SPAD阵列检测。因此,因此,将VCSEL功率输出增加5或6个数量级,如将需要的那样将已知的DToF系统的范围扩展,在物理上是不可能的。
甚至使用理论上对捕获少量返回光子足够敏感的雪崩二极管(AD或SPAD)也不能有效地部署在已知的激光雷达系统架构中。必须串行读出SPAD阵列的固态实现。需要大量的SPAD来达到所需的精确度。固态实现的串行读出约束限制了系统的带宽,使其不适合所需的精确度。对于诸如Velodyne系统的精确度(0.02m至0.04m,与距离无关),所需的读出数据速率超过了当今IC实现情况下实际可获得的带宽。对于120m处的操作,需要500x500像素的SPAD阵列,在基于IC的实现中,必须串行读出。对于与前述Velodyne系统相同的精度,将需要每毫秒1000个脉冲,并且因此需要每毫秒1000帧,转换为每秒250千兆像素的读出速率。在当前的SPAD IC技术的背景下,这被认为在技术上是不可行的。
Neil E.Newman等人的论文“High Peak Power VCSELs in Short Range LIDARApplications”,Journal of Undergraduate Research in Physics,2013,http://www.jurp.org/2013/12017EXR.pdf,描述了基于VCSEL的激光雷达应用。该论文指出,所描述的原型系统的最大输出功率不足以在大于0.75m的范围实现宽场激光雷达。通过相对聚焦的光束(在1m距离处0.02m的光斑大小),作者能够在至多1m的距离处对感兴趣的对象进行测距。
上述实例清楚地表明,现有半导体激光器发射的光功率不能满足将在汽车应用中实际使用的已知的激光雷达系统中的操作所需的功率要求(例如,对于至多120m的范围)。
以Avago Technologies General IP(Singapore)Pte.Ltd.(阿瓦戈科技(新加坡)有限公司)名义的美国专利号7,544,945公开了使用多个激光器的基于交通工具的激光雷达系统和方法,以提供更紧凑和成本效益好的激光雷达功能。可以依次激活激光器阵列中的每个激光器,使得相对于激光器阵列安装的相应光学元件在基本上不同的方向上产生相应的询问光束。来自这些光束的光被交通工具环境中的对象反射,并被检测以便向交通工具操作者和/或乘客提供关于该对象的信息。该专利提供了固态投射仪,其中连续激活各个激光器,以便替代已知DToF激光雷达系统中的已知的机械扫描。
从以本申请人的名义的国际专利申请公开WO 2015/004213A1中已知用于不使用飞行时间检测的交通工具的高精确度中程环境传感系统。在该公开中,对象的定位基于脉冲辐射光斑的投射和参考预定参考光斑位置的所检测的光斑的位移的分析。更具体地,所引用的公开的系统使用三角测量。然而,可以达到的精确度与三角测量基线相关,这限制了可以实现的进一步小型化。
美国专利申请公开号US2012/0038903A1公开了用于自适应地控制场景的照射的方法和系统。特别地,照射场景,并且检测从场景反射的光。由多个像素检测器的不同像素接收的关于光强度水平的信息,对应于场景内的不同区域,和/或接收关于场景内的区域的范围的信息。然后将该信息用作反馈信号以控制场景内的照射水平。更具体地,响应于反馈信号,可以为场景的不同区域提供不同的照射水平。
欧洲专利申请公开号EP 2 322 953A1公开了距离图像传感器,所述距离图像传感器能够在不降低距离分辨率的情况下扩大距离测量范围。辐射源提供第一脉冲至第五脉冲序列,这些脉冲序列作为在时间轴上按顺序排列的第一帧至第五帧中的辐射脉冲照射到对象。在这些帧中的每个帧中,在从每帧的起始点开始的预定时间点处规定成像时间,脉冲还分别从第一帧的起始点开始至第五帧相应地偏移彼此不同的偏移量。像素阵列使用五帧中的每帧中的成像窗A和窗B来生成元素图像信号,所述元素图像信号中的每个具有在彼此不同的距离范围内的对象的距离信息。处理单元通过组合元素图像信号生成图像信号。由于使用五次飞行时间测量,因此不必增加辐射脉冲的宽度来获得在宽距离范围内的对象的距离信息,并且不降低距离分辨率。
欧洲专利申请公开号EP 2 290 402A1公开了范围图像传感器,所述范围图像传感器设置在半导体基板上,具有由多个二维排列的单元组成的成像区域,从而基于从单元输出的电荷量获得范围图像。单元中的一个设置有电荷产生区域(转移电极外的区域),在所述区域响应于入射光而产生电荷,至少两个在空间上分开布置的半导体区域从电荷产生区域收集电荷,以及转移电极安装在半导体区域的每个边缘处并围绕半导体区域,给出相位不同的电荷转移信号。
Shoji Kawahito等人的文章“A CMOS Time-of-Flight Range Image SensorWith Gates-on-Field-Oxide Structure”,IEEE Sensors Journal,Vol.7,no.12,p.1578–1586公开了一种类型的CMOS飞行时间(TOS)范围图像传感器,所述范围图像传感器使用场氧化物结构上的单层栅(门)进行光转化和电荷转移。该结构允许在标准CMOS工艺中实现具有15x15像素的密集TOF范围成像阵列。在制造工艺中仅增加了另外的工艺步骤以产生高速电荷转移所需的n型掩埋层。基于由来自有源照射光源的背反射红外光脉冲引起的光电荷的时间延迟相关的调制来操作传感器。为了减少背景光的影响,使用小占空比光脉冲并且在像素中包括电荷排放结构。所制造的TOF传感器芯片测量的距离分辨率在每秒30帧下为2.35cm,在每秒三帧下改进为0.74cm,具有的脉冲宽度为100ns。
以本申请人的名义的欧洲专利申请号EP15191288.8,其在本申请的申请日时未公布,描述了用于确定到对象的距离的系统和方法的一些方面。
对于在复杂的交通工具环境传感应用诸如ADAS(autonomous drivingassistance system,自动驾驶辅助系统)应用和自动驾驶应用中获得极端小型化和/或更长程存在持续的需要,并且需要有合理的成本和紧凑的半导体集成的物理尺寸。
发明内容
本发明的实施方式的目的是为基于位移的交通工具(车辆)环境传感系统提供进一步小型化和更长程的替代方案。此外,本发明的实施方式的目的是为已知的激光雷达系统提供完整的固态替代方案。
根据本发明的方面,提供了一种用于确定到对象的距离的系统,所述系统包括:固态光源,被布置用于以脉冲序列朝向对象投射激光的离散光斑的图案;检测器,包括多个图像元件,所述检测器被配置用于检测表示对象所反射的离散光斑的图案的光,与脉冲序列同步;以及处理装置,被配置为根据由图像元件响应于检测到的光所产生的曝光值来计算到对象的距离;其中,图像元件被配置为通过对于序列的所有脉冲累积表示在第一预定时间窗期间由对象反射的第一光量的第一电荷量和表示在第二预定时间窗期间由对象反射的第二光量的第二电荷来产生曝光值,第二预定时间窗在第一预定时间窗之后发生;并且其中固态辐射源发射基本上具有小于±20nm的波长扩展的单色光,并且检测器配备有相应的窄带通滤波器;其中,所述系统被配置为执行至少两个连续脉冲序列的投射和检测,序列中的每一个以不同持续时间第一预定时间窗和第二预定时间窗被操作。
本发明依赖于与直接基于飞行时间的测距系统相同的物理原理,即,事实上,光总是需要一定量的时间来行进给定距离。然而,本发明使用距离选通来确定已经发射并随后由目标对象反射的光脉冲行进的距离。本发明尤其基于发明人的见解,即通过结合距离选通,至少部分同时的光斑图案投射(基于新的照射方案)和低功率半导体光源,可以获得基本上小型化的、全固态并且节能的长程距离检测方法。如本文使用的术语“图案”是指同时投射的光斑的空间分布。为了确定检测到的光斑反射在三维空间中的位置,需要将从测距步骤获得的距离信息与角度信息组合以固定剩下的两个空间坐标。通过识别检测到反射的像素,可以使用包括像素阵列和适当布置的光学器件的相机来提供附加的角度信息。
本发明的实施方式基于发明人的进一步见解,即为了能够在激光雷达系统中在期望范围内使用由固态光源产生的光斑图案,需要避免光功率限制的方法。发明人已经发现,通过延长脉冲持续时间并通过将多个VCSEL产生的光脉冲的反射能量整合在至少两个半导体传感器阱内或至少两个像素内,然后单个读出集成电荷,可以获得比目前用固态执行可行的显著更大的工作范围的固态激光雷达系统。在下文中,术语“存储”将用于指定响应于光子的检测而累积电荷的阱或像素。
本发明的优点在于固态光源和固态传感器(诸如CMOS传感器、CCD传感器、SPAD阵列等)可以集成在同一半导体基板上。固态光源可以包括VCSEL阵列或具有适于产生所需图案的光栅的激光器。
此外,通过评估在两个连续时间窗中检测到的反射光能量,并对两个连续窗中的总累积电荷归一化,在距离计算算法中,可以充分考虑到所研究的对象的不同反射率的影响和环境光的贡献。
本发明进一步基于发明人的见解,通过在多个帧(即,多个脉冲序列)上分割全范围的感测,可以改善系统的范围,该多个帧中的每个帧通过以不同的时序参数(第一预定时间窗和第二预定时间窗)操作来“看到”不同的范围。
明智地选择这些操作参数可以确保在每个帧中,期望针对所需范围的最大距离检测到的反射光子的数量对应于可以从电荷存储阱可靠地读出的电荷量。另一方面,可以进行精确测量的最近点由光子数决定,这些光子将使像素的容量饱和。最小可检测光子数与在没有饱和的情况下可以接收的最大光子数之间的比率确定了可以在单个帧中跨越的距离范围。
在根据本发明的系统的实施方式中,多个图像元件中的每个图像元件包括至少两个电荷存储阱组,检测在至少两个电荷存储阱组中的相应一个电荷存储阱组处发生的所述第一光量和检测第二光量;并且电荷存储阱组中的每个电荷存储阱组被构造为级联。
术语“电荷存储阱”表示在半导体基板中提供的存储,例如,存储由射入在像素上的光子转换产生的电荷的电容器。
在图像元件中,表示射入光的电荷在阱水平累积。在阱水平电荷累积的优点是读出噪声最小化,导致更好的信噪比。
基于级联的布置的优点在于,要累积的总电荷量分布在多个阱上,这允许更大的总电荷存储容量,同时保持总电荷水平的准确读数。
总电荷存储容量的增加在系统接收大量光子—并且因此大量电荷--的操作范围的末端处特别重要;这是短程的情况(因为关于距离的光强度遵循平方反比定律)或者当传感器的视场中存在具有异常高反射率的表面时。在单个阱将倾向于饱和的情况下,基于级联的布置允许过量电荷被存储在随后的存储阱中,而不会失去准确确定总电荷量的可能性。
级联中的容量的总量可以根据以下被选择:期望的操作范围和精确度,以及保持泊松噪声尽可能低的一般要求。后一种情况固有地与距离选通的应用相关联,其中泊松噪声对距离确定的精确度是有害的。无论电荷是否存储在级联的一个或多个容量中,低水平的泊松噪声都允许连续的光子电荷响应。
在根据本发明的系统的一个实施方式中,这些电荷存储阱组中的每个电荷存储阱组被构造成串联布置的级联。在根据本发明的系统的另一实施方式中,这些电荷存储阱组中的每个电荷存储阱组被构造成并行布置的级联。
这些实施方式的优点在于它们提供易于实施的布置以获得存储阱的期望的级联效应。
在根据本发明的系统的实施方式中,对于所述至少两个连续的脉冲序列中的每个脉冲序列,所述第一预定时间窗和所述第二预定时间窗具有基本相等的持续时间并且紧接(连续,背对背,back-to-back)地发生,并且被配置为检测所述第一光量的所述图像元件的总存储容量大于被配置为检测所述第二光量的所述图像元件的总存储容量。
该实施方式的优点是它有助于避免由于反射光子的过载而导致的电荷存储元件的饱和。这个问题在近距离处最为突出。在短范围内,由于平方反比定律,反射光子的总数将更高,而大部分反射信号将在第一时间窗内到达,因此存储在相应的电荷存储阱组中。因此,设定对应于第一时间窗的电荷存储阱组的尺寸是有用的,以便能够处理更大量的电荷。
根据本发明的方面,提供了一种交通工具,包括:如上所述的系统,所述系统布置成可操作地覆盖围绕所述交通工具的区域的至少一部分。
根据本发明的系统在具有ADAS或自动驾驶控制单元的交通工具中特别有利,诸如但不限于ECU(electrical control unit,电控单元)。该交通工具还可以包括交通工具控制单元,适于从系统接收测量信息并且适于使用信息以用于ADAS控制或采取自动驾驶决策。交通工具周围区域的一部分可包括交通工具前方、旁边或后方的路面。因此,该系统可以提供车前方地面的道路轮廓信息,以用于主动悬架或半主动悬架。
根据本发明的方面,提供了一种相机,所述相机包括如上所述的系统,由此该系统适于基于从系统获得的信息将3D信息添加到相机图像,使得可以创建3D图像。
根据本发明的方面,提供了一种用于确定到对象的距离的方法,所述方法包括:使用固态光源以脉冲序列朝向对象投射激光的光斑图案;使用包括多个图像元件的检测器检测表示由对象反射的光斑图案的光,与脉冲序列同步;以及根据由像素响应于检测到的光产生的曝光值来计算到对象的距离;其中,图像元件通过对于序列的每个脉冲累积表示在第一预定时间窗期间由对象反射的第一光量的第一电荷量与表示在第二预定时间窗期间由对象反射的第二光量的第二电荷来产生曝光值,第二预定时间窗在第一预定时间窗之后发生;并且其中,对于至少两个连续的脉冲序列,重复该投射和检测,这些序列中的每个序列以不同持续时间第一预定时间窗和第二预定时间窗被操作。
在根据本发明的方法的实施方式中,对于至少两个连续的脉冲序列中的每个脉冲序列,第一预定时间窗和第二预定时间窗具有基本相等的持续时间并且紧接地发生。
在根据本发明的方法的实施方式中,多个图像元件中的每个图像元件包括至少两个电荷存储阱,并且第一光亮的检测和第二光量的检测发生在至少两个电荷存储阱中的相应一个电荷存储阱处。
根据本发明的方面,提供了一种计算机程序产品,所述计算机程序产品包括代码装置,所述代码装置被配置为使处理器执行如上所述的方法。
根据本发明的相机、交通工具、方法和计算机程序产品的实施方式的技术效果和优点,加以必要的变通,对应于根据本发明的系统的相应实施方式的技术效果和优点。
附图说明
现在将参考附图更详细地描述本发明的这些和其他方面和优点,在附图中:
图1表示根据本发明的方法的实施方式的流程图;
图2示意性地表示根据本发明的系统的实施方式;
图3表示本发明实施方式中的光投射和检测的时序图;
图4提供了依据通过对数色调映射(顶部)和多线性色调映射(底部)所获得的入射光功率的示例性像素输出的示图;
图5提供了依据由高动态范围多输出像素所获得的入射光功率的示例性像素输出的示图;
图6示意性地示出了用于本发明实施方式的高动态范围像素的结构;
图7示意性地示出了用于本发明实施方式的具有两个电荷阱(仓)的像素架构的实施方式,其中每个电荷阱具有单独转移栅;
图8示意性地示出了用于本发明实施方式的第一示例性光学布置;
图9示意性地示出了用于本发明实施方式的第二示例性光学布置;
图10示意性地示出了用于本发明实施方式的第三示例性光学布置;
图11示意性地示出了用于本发明实施方式的第四示例性光学布置;
图12示意性地示出了用于本发明实施方式的第五示例性光学布置;以及
图13示意性地示出了第六示例性光学布置。
具体实施方式
以本申请人的名义在国际专利申请公开WO 2015/004213A1中公开的类型的周围环境传感系统具有以下优点:观察广阔场景;同时仅以一些离散和限定良好的光斑,特别是预限定的光斑图案,同时地或部分同时地照射该场景。通过使用具有出色的束质量和非常窄的输出光谱的VCSEL激光器,即使在存在日光的情况下,也可以获得具有有限量输出功率的检测范围。在WO 2015/004213 A1的系统中执行的实际测距依赖于位移检测,特别是三角测量,其被理解为鉴于功率预算所需的长(准静止)脉冲持续时间的背景下实际可用的唯一方法。迄今为止,还不可能用紧凑的、基于半导体的、基于飞行时间的系统来达到同样的功率/性能特性。
本发明通过从根本上改变基于飞行时间的系统操作的方式克服了这种限制。本发明通过增加单个脉冲的持续时间并通过产生虚拟“复合脉冲”(由一系列大量单个脉冲组成),来增加针对每次飞行时间测量所发射的光能总量(以及因此,针对每次飞行时间测量在检测器处可用于检测的光子的数量)。这种扩展脉冲的集束允许发明人利用低功率VCSEL获得所需量的光能(光子)以用于所需的操作范围。
在预先存在的激光雷达系统的单个脉冲可以具有1ns的持续时间的情况下,根据本发明的系统受益于显著更长的脉冲持续时间,以部分地补偿诸如VCSEL之类的半导体激光器的相对低的功率水平;在本发明的实施方式中,序列内的各个脉冲可以具有1μs的示例性持续时间(这是一个可能的值,在此选择以使描述清楚并简单;更一般地,在本发明的实施方式中,脉冲持续时间例如可以是500ns或更长,优选750ns或更长,最优选900ns或更长)。在根据本发明的示例性系统中,序列可以包括1000个脉冲周期,因此累加到1ms的持续时间。鉴于光需要大约0.66μs以行进至距离为100m处的目标并返回检测器的事实,可以使用该持续时间的复合脉冲用于距离为该幅度级别的测距;技术人员将能够依据所选择的脉冲宽度和期望的范围调节所需的脉冲周期数。序列的检测优选地包括检测与基于VCSEL的光源同步的各个脉冲,并且在读出之前针对整个序列累积响应于像素阱水平处的入射光子产生的电荷。术语“曝光值”在下文中用于表示代表对于(整个)序列整合(积累,integrate)的电荷(并因此代表在像素处接收的光量)的值。可以周期性地重复序列发射和检测。
本发明通过使用距离选通来运行。距离选通成像器在脉冲持续时间内对检测到的发射脉冲的反射功率进行整合。脉冲发射窗与反射脉冲到达之间的时间重叠量取决于光脉冲的返回时间,并因此取决于脉冲行进的距离。因此,整合功率与脉冲行进的距离相关。本发明使用距离选通原理,如应用于上文所述的脉冲序列。在下面的描述中,隐含地理解了在图像元件的水平上对序列的各个脉冲整合以获得整个序列的测量。
图1表示根据本发明的方法的实施方式的流程图。在不失一般性的情况下,参考距离选通算法描述测距方法。在第一时间窗10中,该方法包括将来自包括固态光源210的光源的激光光斑图案(例如,光斑的规则或不规则空间图案)投射110到场景的目标区域中的任何对象上。空间图案以脉冲序列重复投射。
如上所述,固态光源可以包括VCSEL阵列或具有适于产生所需图案的光栅的激光器。为了使系统最佳地运行,即使在长程和高水平的环境光下(例如,在日光中),用于本发明实施方式的VCSEL优选地布置成每单位面积每光斑发射最大光功率。因此,具有良好光束质量(低M2因子)的激光器是优选的。更优选地,激光器应具有最小的波长扩展;利用单模激光器可以实现特别低的波长扩展。因此,以必要的空间和时间精确度,可以可再现地产生基本上相同的脉冲。
在发射脉冲的同一时间窗期间,或在基本上重叠的时间窗中,在检测器处检测120表示由感兴趣的对象反射的光斑图案的第一光量,所述检测器优选地布置为尽可能接近光源。光斑图案的投射110与所述光斑图案的反射的第一检测120之间的同步性或近似同步性,在流程图中通过这些步骤的并排布置示出。在随后的第二预定时间窗20中,在检测器处检测130表示反射光斑的第二光量。在该第二窗20期间,固态光源不工作。然后可以根据第一反射光量和第二反射光量计算140到对象的距离。
第一预定时间窗10和第二预定时间窗20优选地是具有基本相等持续时间的紧接窗,以通过将检测到的量中的一个从另一个中减去来帮助噪声和环境光的消除。下面将结合图3更详细地描述示例性时序方案。
检测器包括多个图像元件,即它由具有适当光学器件的图像元件阵列组成,所述该光学器件被布置成将场景(包括照射光斑)的图像投射到图像元件上。如本文使用的术语“图像元件”可以指单个光敏区域或像素的阱,或者指整个像素(其可以包括多个阱,见下文)。对于每个给定的投射光斑,第一光量的检测120和第二光量的检测130发生在多个图像元件的同一个或相同的组中。
不失一般性,每个图像元件可以是包括至少两个电荷存储阱221、222的像素,使得第一光量的检测120和第二光量的检测130可以发生在同一像素或像素组的相应电荷存储阱221、222处。
图2示意性地表示根据本发明的系统的实施方式,涉及感兴趣的场景中的对象99。系统200包括固态光源210,用于将可以周期性重复的光斑序列图案投射到对象99上。检测器220布置在光源附近并配置成检测由对象反射的光。
从对象99反射的光束用虚线箭头表示,从光源210行进到对象99并返回到检测器220。应该注意,该表示是严格示意性的,并不旨在指示任何实际的相对距离或角度。
可以包括常规时钟电路或振荡器的同步装置230被配置为:运行固态光源210,以便在第一预定时间窗10期间将光斑图案投射到对象上;和运行检测器220,以便在基本上同一时间检测表示由对象99反射的光斑的第一光量。所述同步装置进一步运行检测器220以在相应的后续第二预定时间窗20期间,检测表示由对象99反射的光斑的第二光量。适当的处理装置240被配置为根据第一反射光量和第二反射光量计算到对象的距离。
图3表示本发明实施方式中的用于光投射和光检测的时序图。为清楚起见,仅示出了图1的单个脉冲序列的单个脉冲,其由第一时间窗10和第二时间窗20组成。根据本发明,连续地传输至少两个序列,在第一序列中使用与第二序列不同持续时间的第一时间窗10和第二时间窗20。
如从图3a中可以看出,在第一时间窗10期间,固态光源210处于其“开启(通)”状态,将光光斑图案发射到场景上。在第二时间窗20期间,固态光源210处于其“关闭(断)”状态。
反射光到达检测器220处相对于投射的开始延迟了与行进距离成比例的时间量(在自由空间中约为3.3ns/m)。由于该延迟,仅反射光的一部分会在以下处被检测到:检测器220的第一阱或级联的阱组221,其仅在第一时间窗10期间被激活。因此,在该第一阱被激活期间(第一时间窗10),在该第一阱中累积的电荷由以下组成:仅表示在反射脉冲到达之前照射在像素上的环境光和噪声的一部分;以及表示反射脉冲的前沿、噪声和环境光的一部分。
反射脉冲的后面部分在以下处被检测到:检测器220的第二阱或级联的阱组222,其仅在第二时间窗20期间被激活,所述第二时间窗优选地紧跟在第一时间窗10之后。因此,在第二阱激活期间(第二时间窗20),在该第二阱中累积的电荷由以下组成:表示反射脉冲的后沿、噪声和环境光的一部分;以及仅表示在反射脉冲到达之后射入在像素上的环境光和噪声的一部分。
反射对象99与系统200之间的距离越大,在第一阱或级联的阱组221中检测到的脉冲的比例越小,并且在第二阱或级联的阱组222中检测到的脉冲的比例越大。
如果反射脉冲的前沿在第一阱或级联的阱组221关闭之后(即,在第一时间窗10结束之后)到达,则可以在第二阱或者级联的阱组222中检测到的反射脉冲的比例将随着飞行时间延迟的增加而再次减小。
图3b中示出,对于对象99的不同距离,在每个相应的阱或级联的阱组221、222中所得到的电荷量A、B。为了简化表示,在示图中没有考虑根据平方反比定律的光随距离衰减的影响。很明显,对于飞行时间延迟达到第一时间窗10和第二时间窗20的组合持续时间,飞行时间延迟原则上可以明确地从A和B的值导出:
-对于达到第一时间窗10的持续时间的飞行时间延迟,B与对象99的距离成比例。为了容易地实现绝对距离的确定,可以使用归一化值B/(B+A),消除平方反比定律和被检测的对象的非完美反射率的任何影响。
-对于超过第一时间窗10的持续时间的飞行时间延迟,A仅包括日光和噪声贡献(未示出),并且C-B基本上与对象99的距离成比例(在校正平方反比定律之后),其中C是偏移值。
虽然图3a和图3b示出了与在时间窗10中发射的单个脉冲有关的本发明的原理,但是应该理解,所示的脉冲是如上定义的脉冲序列的一部分。图3c示意性地示出了单个序列的示例性时序特性。如图所示,照明方案40包括重复发射各个脉冲10的序列30。各个脉冲10的宽度由最大操作范围确定。整个序列可以以例如60Hz的频率重复。
图3d示意性地示出了图3c的序列中的单个帧如何可以分解为具有不同时序参数的序列,图3c的序列中的单个帧可能由于Nmax(在不使像素充满(饱和)的情况下可以存储的最大电子数量)和Nmin(精确读出所需的最小像素数)施加的约束而无法覆盖整个目标距离范围[Zmin,Zmax],每个具有时序参数的序列覆盖目标范围的一部分[zmin(i),zmax(i)],该部分可以更容易地在光子数量的相同约束内覆盖。
参考上面引入并在图3d中使用的符号,子范围的相应电子量nmin(i)和nmax(i)由下式定义:
-最大可允许电子数(对于全像素容量使用“FPC”,其对应于没有额
外容量的情况下的全阱容量):
-最低要求的精确度水平:nmin=min
-zmax(i)=zmin(i-1)
另外,脉冲特性可以如下确定:
度水平所施加的限制。
通过以下非限制性数值示例可以进一步阐明上述原理。
在150m距离处具有10%反射率的朗伯反射表面必须提供1000个电子以获得1.6%的精确度。在相同距离处,100%反射表面将产生10000个电子。在20万电子的全阱容量的情况下,提出了以下多帧解决方案:
子范围 | 脉冲宽度 | 总“开启”时间 | |
帧1 | 150m-33m | 1μs | 1ms |
帧2 | 7.4m-33m | 22ns | 50μs |
帧3 | 1.65m-7.4m | 4.9ns | 2.5μs |
帧4 | 0.37m-1.65m | 1.1ns | 0.125μs |
应当注意,出于鲁棒性原因,在子范围中提供重叠可能是有利的。
为了确保相同的3D分辨率,使用更快的相机可能是有利的:例如,3帧交错在180Hz下操作的相机提供与单帧操作60Hz的相机相同的数据速度。
如上文所示,电荷存储元件221、222每个都可以由级联的电荷存储阱组成。明智的级联设计确保了容量之间的平滑过渡,以确保极高的精确度水平。存储容量优选地围绕每个像素设计,以确保有足够的空间用于级联,同时优化从射入光子被转换成电荷的区域的电荷转移。对于适用于每个脉冲序列的特定子范围和相应的时序参数,优选地确定容量的尺寸以便提供必须可检测的最低的光水平(例如1000个光子)的准确读出。
短距离处对象对光的反射更可能导致像素饱和,因为这种反射的衰减将远远小于来自更远对象的反射的衰减(由于光衰减随距离的平方反比定律)。由于某些应用(诸如汽车应用)需要达到相对长距离的精确的系统运行,因此必须在最近的操作距离和最远的操作距离之间覆盖大的光子跨度。在这些约束下,短程处的像素饱和是非常真实的风险,特别是在第一组阱处(其接收段程处的大部分反射)。发明人已经发现,对于给定的总像素空间,可以通过使用不对称阱布置来减轻饱和问题,其中由第一组阱表示的光子容量增加,而由第二组阱表示的光子容量减少。如果增加和减少是平衡的,则可以在没有额外的像素表面成本的情况下获得动态范围的增加。
晕光(blooming)是当像素中的电荷超过该特定像素的饱和水平时发生的现象。因此,电荷开始溢出并在相邻像素导致干扰。这会在相邻像素中创建不精确的数据。优选地,根据本发明的系统的像素设置有抗晕光电子器件,以在电荷饱和相关组阱并溢出到相邻像素的阱之前排出多余的电荷。特别是当来自相邻光斑的信息用于消除背景光时,具有对从相邻像素独立地(并且没有污染)获得的背景光的精确估计是非常重要的。
本发明的实施方式可以采用相关双采样来校正与阱容量相关的热噪声(也表示为“kTC噪声”)的样本。为此,像素的电子器件可以被设计为在复位电压(Vreset)和信号电压(Vsignal)之间执行差分测量,例如通过测量帧开始处的Vreset以及测量帧结束处的Vsignal。作为电子器件(像素内)实现的替代方案,也可以通过在处理器中数字地减去读出信号(Vsignal-Vreset)来实现相关双采样。
为了增加到达像素结构中的光敏元件(特别是二极管)的光量,本发明的实施方式可以使用背面照射;在那种情况下,像素电路位于光敏层后面,因此减少了射入光子读取光敏元件必须穿过的层数。
根据本发明的测距系统可以与根据WO 2015/004213 A1的基于三角测量的系统集成。如果目的在于小型化,基于三角测量的系统将最终在其投射仪和其检测器之间具有相对小的距离,从而使其具有减小的操作范围。然而,正是在短程下,组合呈现其益处,因为基于三角测量的系统可以覆盖基于飞行时间的系统不能足够精确地操作的距离。
可以迭代地重复整个测距过程,以便随时间监测到被检测的一个或多个对象的距离。因此,该方法的结果可以用于一些过程,所述过程在连续的基础上需要关于到被检测的对象的距离的信息,诸如高级驾驶员辅助系统,具有主动悬架的交通工具或自动交通工具。
为了使所述系统的所有元件最佳地运行,系统必须是热稳定的。除了其他方面,热稳定性避免了光学元件的不期望的波长偏移(热漂移),否则这会损害光学链的光学滤波器和其他元件的正常工作。根据本发明的系统的实施方式通过其设计或通过借助于具有PID型控制器的温度控制回路的主动调节来实现热稳定性。
WO 2015/004213 A1公开了各种技术,以最小化在检测间隔期间到达像素的环境光的量,从而提高图案化激光光斑的检测精确度。虽然这些技术尚未在激光雷达系统的背景下公开,但本发明的发明人已经发现,当与本发明的实施方式结合时,若干这样的技术产生了优异的结果。对于在检测器处使用窄带通滤波器以及使用适当的光学布置来确保反射光几乎垂直入射到滤波器上来说尤其如此。这些布置的细节如它们在WO 2015/004213 A1中所示,在此通过引用并入。在下文中提供其他的特征和细节。
虽然从WO 2015/004213 A1已知的各种技术可以应用于本发明的实施方式,以最小化在检测间隔期间到达像素的环境光的量,但是仍不能避免一定量的环境光。在多像素系统中,仅有一些像素将被反射光斑照射,而其他像素将仅被残留的环境光照射。后一组像素的信号水平可用于估计环境光对感兴趣的像素中的信号的贡献,并相应地减去该贡献。附加地或替代地,可以在像素水平下从检测到的信号中减去背景光或环境光。这需要两次曝光,一次在激光脉冲到达期间,以及一次在没有脉冲的情况下。
在一些实施方式中,检测器可以是高动态范围检测器,即具有至少90dB,优选至少120dB的动态范围的检测器。高动态范围传感器的存在,即能够获得大量不饱和的同时保持对场景最暗部分中的强度水平的充分辨别的光子的传感器,是使用这种传感器的优点;它允许传感器具有超长程,而仍然能够在短距离(在反射光相对强烈的情况下)检测对象,而不承受饱和。发明人已经发现使用真正的高动态范围传感器比使用应用色调映射的传感器更有利。在色调映射中,传感器线性范围被压缩到更高的分辨率。在文献中,记录了几种压缩方法,诸如对数压缩或多线性压缩(见图4)。然而,这种非线性压缩需要在对捕获的场景执行逻辑或算术运算之前重新线性化信号,以提取起伏(地形)信息。因此,根据本发明的解决方案提高了检测精确度而不增加计算需求。一些实施方式的另一优点是如图5所示使用完全线性高动态范围传感器。能够提供所需动态范围特性的像素架构和光学检测器公开在美国专利申请公开号US 2014/353472 A1中,特别是段落65-73和88,其内容通过引用并入,为了允许技术人员实施本发明的这个方面的目的。
本发明的实施方式使用高动态范围像素。这可以通过以下方式获得:通过电荷库的相当大的满阱容量;或通过限制每像素的电子噪声的设计;或通过使用不会在电荷转移时增加噪声的CCD栅;或通过具有大的量子检测效率(detection quantum efficiency,DQE)的设计(例如,对于正面照射在50%范围内或在背面照射的情况下为90%,也称为背面减薄(薄化));或通过诸如图6所示之类的特殊设计(见下文);或通过所列改进的任何组合。此外,通过将溢出容量添加到覆盖层中的像素的前侧,可以进一步扩大动态范围(该实现需要背面减薄)。优选地,像素设计实现抗晕光机制。
图6呈现了说明具有高动态范围的像素的有利的实现方式的示意图。该图中的实例利用连接到浮动扩散区的两个存储栅7、8。在曝光之后,由场景和激光脉冲产生的电子使用传输栅11在浮动扩散区上传输。Vgate1和Vgate2两个栅电压都设置为较高。然后电荷分布在两个电容器上,实现显著的满阱(Full Well)。一旦通过与放大器的连接读取该高满阱数据,电压Vgate1就被设置为较低。电子朝向电容器7回流,增加了总像素增益。数据可以通过放大器读取。通过稍后在Vgate1上施加低电压,还可以实现更高的增益。电子朝向浮动扩散区2回流。
图7表示在CMOS技术中使用的设想像素的可能的双阱或双仓的实现。射入信号分布在两个电荷存储器上。每个库具有由外部脉冲控制的单独传输栅,该外部脉冲与激光源的脉冲同步。
可以复制图6和图7的设计中所示的电荷存储元件,以在本发明的实施方式中获得级联的电荷存储。
图8-图10示出了可以在本发明的实施方式中使用的相机,其中光辐射源发射单色光,并且至少一个检测器配备有相应的窄带通滤波器和光学器件,所述光学器件被布置成使得调整到所述窄带通滤波器上的入射角度,以将所述入射角度限制在所述窄带通滤波器的主表面法线周围的预定范围内,所述光学器件包括图像空间远心透镜。术语“相机”在本文中用作传感器和相关光学器件(透镜、透镜阵列、滤波器)的组合。特别地,在图9中,光学器件还包括布置在图像空间远心透镜和至少一个检测器之间的小型透镜阵列,使得小型透镜阵列的各个小型透镜将入射光聚焦在该至少一个检测器的各个像素的相应光敏区域上。这种每像素一个小型透镜布置的优点在于,通过将所有入射光光学地引导到像素的光敏部分,可以减少由于下置传感器的填充因子造成的损失。
这些实例都导致辐射通过滤波器媒介行进基本相等的长度,或者换句话说,导致入射辐射基本正交于滤波器表面,即它被限于在滤波器表面的法线周围的预定范围内的入射角度,从而允许在窄带宽内进行精确滤波,以例如过滤日光、太阳光,并且以便使光斑超越日光。
在本发明的实施方式中,入射角度的校正是特别重要的,其中用有限数量的传感器(例如8个传感器)监测交通工具周围的整个空间,使得入射线可以在例如1x1rad(拉德)的立体角上延伸。图8示意性地示出了这种类型的第一光学布置。它包括以图像空间远心配置的具有大致相同焦距f的第一透镜1030和第二透镜1040。这意味着所有主光线(穿过孔径光阑中心的光线)正交于图像平面。0.16的示例性数值孔径对应于9.3°的锥角(半锥角)。因此,布置在透镜系统1030-1040和传感器102之间的窄带通滤波器1060上的最大入射角将是9.3°。
如图9所示,优选的设计由以图像空间远心配置(该配置也可选地是对象空间远心的)的具有大致相同焦距f的前后排列(纵列,串联)的两个透镜1130、1140、小型透镜阵列1150的平面堆叠、分光滤波器1160和CMOS检测器102组成。由于第一透镜1130的中心O在第二透镜1140的焦点内,所以穿过O的每条光线将在平行于光轴的方向上被第二透镜1140折射。现在考虑与第一透镜1130的焦距相比位于非常大距离处的特定激光光斑S1110。因此,由第一透镜1130成像的该光斑1110(的图像)是位于该透镜的焦平面附近的点P,因此恰好在第二透镜1140的中间平面中。从光斑S1110发射并由第一透镜1130捕获的光线形成在第二透镜1140中朝向点P会聚的光锥。该光锥的中心轴穿过点O并且平行于光轴折射并因此垂直于分光滤波器1160,以便实现最佳光谱灵敏度。因此,第二透镜1140用作用于入射光束的角度的校正透镜。通过在第二透镜1140后面使用小且凸的小型透镜1150,光锥的其他光线也可以弯曲成平行于光轴的光线束,如此使得点P位于小型透镜1150的焦点处。以这种方式,光斑S 1110的所有成像光线弯曲到几乎垂直于分光滤波器的方向上。现在,通过使用位于每个像素前面的小型透镜阵列,这可以分别在CMOS检测器的每个像素前面完成。在这种配置中,小型透镜具有图像-远心功能。主要优点在于:可以放大第一透镜1030的光瞳,或者可以消除光圈,同时补偿球面像差的增加(通过小型透镜1150中的局部校正光学器件)。以这种方式,可以提高传感器组件的灵敏度。可以在分光滤波器1160和CMOS像素102之间添加第二小型透镜阵列(图11中未示出),以将平行光线聚焦回像素的光电二极管,从而最大化填充因子。
对于第一透镜1130和第二透镜1140,可以使用市售透镜。技术人员将理解,也可以使用通常用于具有相当质量的网络摄像头或其他智能电话相机的透镜。上述iSight相机具有6x3mm CMOS传感器,具有8百万像素、1.5μm像素大小、f/2.2的非常大的光圈、约f=7mm的目标焦距,以及约3.2mm的光瞳直径。视角约为1radx1rad。如果我们假设相机的分辨率大致是像素大小(1.5微米),我们可以得出结论(根据阿贝定律),对于由光圈选择的视角的所有光线校正透镜的像差。
图10示出了图11的布置的变型,其针对单个光刻工艺的制造进行了优化。第一透镜1230类似于前述实施方式的第一透镜1130,但是角度校正第二透镜1140由具有相同焦距f的菲涅耳透镜1240代替,并且小型透镜阵列1150由菲涅耳透镜阵列1250代替。优点在于它们是完全平坦的并且可以通过纳米电子技术(具有离散的相区)来生产。可以在分光滤波器1260和CMOS像素102之间添加第二小型透镜阵列1270,以将平行光线聚焦回像素的光电二极管,从而最大化填充因子。因此,相机基本上是如iSight的标准相机,但其中,CMOS传感器由专门设计的多层传感器代替,其中所有组件都在同一光刻工艺中的一个集成块中生产。这种多层传感器在大量生产中便宜、紧凑、坚固并且其无需校准。这五个层1240、1250、1260、1270、102中的每一个都具有其自身的功能以满足本发明所施加的要求。
由于直径为d的透镜产生的光锥的最小角度约为λ/d,其中λ为光的波长,对于小型透镜直径d=8.5μm并且λ=850nm来说,最小锥角为1/10弧度。具有高质量的光谱干涉滤波器,这对应于约3nm的光谱窗。
在图8-图10的布置中,光学器件的特性将导致非平面焦平面。为了补偿这种效应,检测器的图像元件可以布置在具有遵循光学器件的焦平面的曲率的基板上。结果,无论它们到达检测器的何处,反射和过滤的光斑都将聚焦。检测器的基板的期望的曲率可以通过使用柔性芯片技术或通过组合不同取向的瓦片组成基板来获得。该解决方案在图11中示意性地示出,其示出远心光学器件1330、接着是窄带通滤波器1360以及弯曲像素层102,所述弯曲像素层的曲率适于遵循远心光学器件1330的焦平面的形状。
当不可能(或不希望)以这样的方式布置光学器件来确保沿不同路径的光线都在相同(垂直)角度下通过窄带通滤波器时,可以在源处解决随不同的入射角度具有不同滤波器特性的问题。特别地,VCSEL阵列可以配置成使得不同的光斑具有不同的相应波长。可以通过使用瓦片式激光器阵列或通过提供用于调制VCSEL阵列中的各个VCSEL的波长的装置来获得该配置。该解决方案在图12中示意性地示出,所述图示出了布置在光学器件1430和传感器阵列102之前的窄带通滤波器1460。为了清楚起见并且不失一般性,在图中示出了具有不同相应波长(λ1、λ2)的两个不同的入射角度。选择光源的不同波长(λ1、λ2)以在它们各自的入射角度下对应于窄带通滤波器通带的最大值。
图13示出了替代性光学布置,包括圆顶1510(例如,弯曲的玻璃板),其中窄带通滤波器1520设置在所述圆顶内侧(如所示)或外侧(未示出)。将滤波器1520布置在圆顶1510的内侧上的优点在于圆顶1510保护滤波器1520免受外部力影响。圆顶1510和滤波器1520光学地配合以确保入射光沿着基本垂直于圆顶的表面的方向穿过滤波器1520。鱼眼光学器件1530设置在圆顶滤波器组件和传感器102之间,所述传感器可以是CMOS传感器或CCD传感器或SPAD阵列。鱼眼光学器件1530布置成将已经穿过圆顶滤波器组件的光引导朝向传感器的敏感区域。
可选地,在投射仪处提供另外的鱼眼光学器件。在特定实施方式中,多个VCSEL以1×n或m×n构造安装,由此激光束的出射角度可以在高度为m×1rad并且宽度为n×1rad的空间角上实现。
在本发明的一些实施方式中,通过在检测器处应用阶梯式或可变衰减滤波器,可以在整个深度范围内保持光斑的强度基本恒定。替代地或另外地,还可以提供非对称的透镜光瞳以减弱更靠近检测器的光斑的强度,同时以完整的强度接收更远离检测器的光斑的强度。以这种方式,避免了检测器的削波,并且可以使所有光斑的平均强度基本相同。
在一些实施方式中,辐射源可以是可以在不同区域中分离的VCSEL,由此针对不同区域控制激光器开启时间。因此可以控制光斑的图像以具有恒定的强度,例如,A/D范围的2/3rd。或者,驱动电压可以在光斑阵列上依据高度被驱动,以再次获得恒定的强度。这种控制可以称为饱和避免伺服回路。可以针对强度单独控制阵列内的不同VCSEL,同时在投射时改变图案中的各个VCSEL的强度。
在本发明的一些其他实施方式中,可以在窄带宽滤波器的前面使用微棱镜矩阵,使得辐射在+9°和-9°之间的入射角度内入射在滤波器上。这允许获得窄带宽滤波。棱镜矩阵可以例如通过塑料模制制成。
在本发明的实施方式中,例如,在设想主动悬架交通工具应用的情况下,光斑图案的投射有利地向下指向,即朝向道路。
根据本发明的系统可以包括在专用硬件(例如,ASIC)、可配置硬件(例如,FPGA)、可编程部件(例如,具有适当软件的DSP或通用处理器)、或其任何组合中执行上述方法的步骤。相同的组件还可以包括其他功能。本发明还涉及,所述计算机程序产品包括执行上述方法的步骤的代码装置,其产品可以在诸如光学、磁性或固态载体之类的计算机可读介质上提供。
本发明还涉及包括上述系统的交通工具。
本发明的实施方式可以有利地用于多种多样的应用中,包括但不限于汽车应用、工业应用、游戏应用等,并且这包括室内和室外、短程或长程。在一些应用中,可以组合(例如,菊花链式)根据本发明实施方式的不同传感器以产生全景覆盖,优选地在整个圆(360°视场)上。
虽然在上文中已参考单独的系统和方法实施方式描述了本发明,但这仅出于澄清目的而进行。技术人员将理解,单独结合系统或方法描述的特征也可以相应地应用于方法或系统,具有相同的技术效果和优点。此外,本发明的范围不限于这些实施方式,而是由所附权利要求限定。
Claims (11)
1.一种用于确定到对象的距离的系统(200),所述系统包括:
-固态光源(210),被布置用于以脉冲序列朝向所述对象投射激光的离散光斑的图案;
-检测器(220),包括多个图像元件,所述检测器(220)被配置用于检测表示所述对象所反射的所述离散光斑的图案的光,与所述脉冲序列同步;以及
-处理装置(240),被配置为通过对所述脉冲序列应用距离选通,基于脉冲发射窗与所反射的脉冲的到达之间的时间重叠的量,根据由所述图像元件响应于所检测到的光所产生的曝光值来计算到所述对象的所述距离;
其中,所述图像元件被配置为通过对于所述序列的所有脉冲,累积表示在与所述脉冲发射时间窗重叠的第一预定时间窗(10)期间由所述对象反射的第一光量的第一电荷量和表示在第二预定时间窗(20)期间由所述对象反射的第二光量的第二电荷来产生所述曝光值,所述第二预定时间窗(20)在所述第一预定时间窗(10)之后发生;
其中所述系统被配置为对至少两个连续的脉冲序列执行所述投射和所述检测,所述序列中的每个序列以不同持续时间的所述第一预定时间窗和所述第二预定时间窗被操作。
2.根据权利要求1所述的系统,其中,所述多个图像元件中的每个图像元件包括至少两个电荷存储阱组,所述第一光量的所述检测和所述第二光量的所述检测在所述至少两个电荷存储阱组中的相应的一个电荷存储阱组处发生;以及
其中所述电荷存储阱组中的每个电荷存储阱组构造成级联。
3.根据权利要求2所述的系统,其中,所述电荷存储阱组中的每个电荷存储阱组构造成串联布置的级联。
4.根据权利要求2所述的系统,其中,所述多个电荷存储阱组中的每个电荷存储阱组构造成并行布置的级联。
5.根据前述权利要求中任一项所述的系统,其中,对于所述至少两个连续的脉冲序列中的每个脉冲序列,所述第一预定时间窗和所述第二预定时间窗具有基本相等的持续时间并且紧接地发生,并且其中被配置为检测所述第一光量的所述图像元件的总存储容量大于被配置为检测所述第二光量的所述图像元件的总存储容量。
6.一种交通工具,包括根据前述权利要求中任一项所述的系统(200),所述系统布置成可操作地覆盖所述交通工具周围的区域的至少一部分。
7.一种相机,所述相机包括根据权利要求1至5中任一项所述的系统(200),其中,所述系统(200)适于基于从所述系统获得的信息将3D信息添加到相机图像,使得能够创建3D图像。
8.一种用于确定到对象的距离的方法,所述方法包括:
-使用固态光源(210)以脉冲序列向所述对象投射(110)激光的光斑图案;
-使用包括多个图像元件的检测器(220)来检测(120;130)表示由所述对象反射的所述光斑图案的光,与所述脉冲序列同步;以及
-通过对所述脉冲序列应用距离选通,基于脉冲发射窗与所反射的脉冲的到达之间的时间重叠的量,根据像素响应于所检测的光所产生的曝光值来计算(140)到所述对象的所述距离;
其中,所述图像元件通过针对所述序列的每个脉冲,对表示在与所述脉冲发射时间窗重叠的第一预定时间窗(10)期间由所述对象反射的第一光量的第一电荷量和表示在第二预定时间窗(20)期间由所述对象反射的第二光量的第二电荷量进行累积来产生所述曝光值,所述第二预定时间窗(20)在所述第一预定时间窗(10)之后发生;以及
其中对于至少两个连续的脉冲序列,重复所述投射(110)和所述检测(120;130),所述序列中的每个序列以不同持续时间的所述第一预定时间窗和所述第二预定时间窗被操作。
9.根据权利要求8所述的方法,其中,对于所述至少两个连续的脉冲序列中的每个脉冲序列,所述第一预定时间窗和所述第二预定时间窗具有基本相等的持续时间并且紧接地发生。
10.根据权利要求8或9所述的方法,其中,所述多个图像元件中的每个图像元件包括至少两个电荷存储阱,并且其中所述第一光量的所述检测和所述第二光量的所述检测在所述至少两个电荷存储阱中的相应的一个电荷存储阱处发生。
11.一种计算机程序产品,所述计算机程序产品包括代码装置,所述代码装置配置为使处理器执行根据权利要求8-10中任一项所述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP16192103.6 | 2016-10-03 | ||
EP16192103.6A EP3301480A1 (en) | 2016-10-03 | 2016-10-03 | System and method for determining a distance to an object |
PCT/EP2017/075096 WO2018065429A1 (en) | 2016-10-03 | 2017-10-03 | System and method for determining a distance to an object |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109791207A CN109791207A (zh) | 2019-05-21 |
CN109791207B true CN109791207B (zh) | 2023-03-31 |
Family
ID=57047094
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780060874.8A Active CN109791207B (zh) | 2016-10-03 | 2017-10-03 | 用于确定到对象的距离的系统和方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11513199B2 (zh) |
EP (2) | EP3301480A1 (zh) |
JP (1) | JP6977045B2 (zh) |
KR (1) | KR102494430B1 (zh) |
CN (1) | CN109791207B (zh) |
WO (1) | WO2018065429A1 (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9992477B2 (en) | 2015-09-24 | 2018-06-05 | Ouster, Inc. | Optical system for collecting distance information within a field |
US10948572B2 (en) | 2016-08-24 | 2021-03-16 | Ouster, Inc. | Optical system for collecting distance information within a field |
EP3392674A1 (en) * | 2017-04-23 | 2018-10-24 | Xenomatix NV | A pixel structure |
KR102657365B1 (ko) | 2017-05-15 | 2024-04-17 | 아우스터, 인크. | 휘도 향상된 광학 이미징 송신기 |
AU2018297291B2 (en) | 2017-07-05 | 2024-03-07 | Ouster, Inc. | Light ranging device with electronically scanned emitter array and synchronized sensor array |
US10732032B2 (en) | 2018-08-09 | 2020-08-04 | Ouster, Inc. | Scanning sensor array with overlapping pass bands |
US10739189B2 (en) | 2018-08-09 | 2020-08-11 | Ouster, Inc. | Multispectral ranging/imaging sensor arrays and systems |
US20210349193A1 (en) * | 2018-10-08 | 2021-11-11 | Sony Semiconductor Solutions Corporation | Time of flight apparatus and method |
US11585906B2 (en) | 2018-12-26 | 2023-02-21 | Ouster, Inc. | Solid-state electronic scanning laser array with high-side and low-side switches for increased channels |
JP7234171B2 (ja) * | 2019-04-25 | 2023-03-07 | キヤノン株式会社 | 撮像装置及びその制御方法 |
US11147436B2 (en) | 2019-06-20 | 2021-10-19 | Cilag Gmbh International | Image rotation in an endoscopic fluorescence imaging system |
US11671691B2 (en) * | 2019-06-20 | 2023-06-06 | Cilag Gmbh International | Image rotation in an endoscopic laser mapping imaging system |
US20220268902A1 (en) * | 2019-08-29 | 2022-08-25 | National Research Council Of Canada | Lidar system and method for determining distances of targets |
CN110940396B (zh) * | 2019-11-02 | 2020-12-18 | 复旦大学 | 一种推进剂液位高精度激光测量装置 |
JP2021131285A (ja) * | 2020-02-19 | 2021-09-09 | ソニーセミコンダクタソリューションズ株式会社 | センサ装置、測距装置、センシング方法 |
EP4128748A1 (en) * | 2020-03-23 | 2023-02-08 | Ricoh Company, Ltd. | Information processing apparatus and method of processing information |
CN111366941A (zh) * | 2020-04-20 | 2020-07-03 | 深圳奥比中光科技有限公司 | 一种tof深度测量装置及方法 |
WO2022099594A1 (zh) * | 2020-11-13 | 2022-05-19 | 深圳市汇顶科技股份有限公司 | 飞行时间量测电路及相关系统、电子装置及方法 |
CN113009455B (zh) * | 2021-04-14 | 2022-06-03 | 吉林大学 | 一种提高脉冲激光测距精度的方法与系统 |
EP4390446A1 (en) * | 2022-12-21 | 2024-06-26 | Hexagon Technology Center GmbH | Wide-angle range imaging module and reality capture device comprising a wide-angle range imaging module |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010013779A1 (ja) * | 2008-07-30 | 2010-02-04 | 国立大学法人静岡大学 | 距離画像センサ、及び撮像信号を飛行時間法により生成する方法 |
CN103533636A (zh) * | 2012-06-29 | 2014-01-22 | 三星电子株式会社 | 测量到对象的距离的方法和装置 |
CN103998949A (zh) * | 2012-01-10 | 2014-08-20 | 索弗特凯耐提克传感器股份有限公司 | 对飞行时间信号处理的改进或与之相关的改进 |
WO2014181619A1 (ja) * | 2013-05-10 | 2014-11-13 | 国立大学法人静岡大学 | 距離計測装置 |
Family Cites Families (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1152261A1 (en) | 2000-04-28 | 2001-11-07 | CSEM Centre Suisse d'Electronique et de Microtechnique SA | Device and method for spatially resolved photodetection and demodulation of modulated electromagnetic waves |
JP3832441B2 (ja) | 2002-04-08 | 2006-10-11 | 松下電工株式会社 | 強度変調光を用いた空間情報の検出装置 |
US6906302B2 (en) | 2002-07-30 | 2005-06-14 | Freescale Semiconductor, Inc. | Photodetector circuit device and method thereof |
US6888122B2 (en) | 2002-08-29 | 2005-05-03 | Micron Technology, Inc. | High dynamic range cascaded integration pixel cell and method of operation |
JP4235729B2 (ja) | 2003-02-03 | 2009-03-11 | 国立大学法人静岡大学 | 距離画像センサ |
JP4280822B2 (ja) | 2004-02-18 | 2009-06-17 | 国立大学法人静岡大学 | 光飛行時間型距離センサ |
GB0405014D0 (en) | 2004-03-05 | 2004-04-07 | Qinetiq Ltd | Movement control system |
ATE481653T1 (de) | 2006-01-29 | 2010-10-15 | Rafael Armament Dev Authority | Ladar mit passivem faser-optischem scanner |
US7544945B2 (en) | 2006-02-06 | 2009-06-09 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Vertical cavity surface emitting laser (VCSEL) array laser scanner |
JP5204963B2 (ja) * | 2006-10-12 | 2013-06-05 | スタンレー電気株式会社 | 固体撮像素子 |
JP5171158B2 (ja) * | 2007-08-22 | 2013-03-27 | 浜松ホトニクス株式会社 | 固体撮像装置及び距離画像測定装置 |
JP5356726B2 (ja) | 2008-05-15 | 2013-12-04 | 浜松ホトニクス株式会社 | 距離センサ及び距離画像センサ |
US8995485B2 (en) | 2009-02-17 | 2015-03-31 | Trilumina Corp. | High brightness pulsed VCSEL sources |
JP5760167B2 (ja) * | 2009-07-17 | 2015-08-05 | パナソニックIpマネジメント株式会社 | 空間情報検出装置 |
DE102009037596B4 (de) * | 2009-08-14 | 2014-07-24 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Pixelstruktur, System und Verfahren zur optischen Abstandsmessung sowie Steuerschaltung für die Pixelstruktur |
JP5211007B2 (ja) | 2009-10-07 | 2013-06-12 | 本田技研工業株式会社 | 光電変換素子、受光装置、受光システム及び測距装置 |
JP2011128024A (ja) * | 2009-12-17 | 2011-06-30 | Sharp Corp | 3次元撮像装置 |
US8736818B2 (en) | 2010-08-16 | 2014-05-27 | Ball Aerospace & Technologies Corp. | Electronically steered flash LIDAR |
JP2012159330A (ja) * | 2011-01-31 | 2012-08-23 | Sanyo Electric Co Ltd | レーザレーダ |
US9329035B2 (en) * | 2011-12-12 | 2016-05-03 | Heptagon Micro Optics Pte. Ltd. | Method to compensate for errors in time-of-flight range cameras caused by multiple reflections |
US8686367B2 (en) | 2012-03-01 | 2014-04-01 | Omnivision Technologies, Inc. | Circuit configuration and method for time of flight sensor |
JP2013195344A (ja) | 2012-03-22 | 2013-09-30 | Toshiba Corp | 飛行時間型距離センサ |
US9723233B2 (en) * | 2012-04-18 | 2017-08-01 | Brightway Vision Ltd. | Controllable gated sensor |
JP6384762B2 (ja) * | 2013-01-31 | 2018-09-05 | パナソニックIpマネジメント株式会社 | 測距方法および測距システム |
JP6145826B2 (ja) | 2013-02-07 | 2017-06-14 | パナソニックIpマネジメント株式会社 | 撮像装置及びその駆動方法 |
US8908063B2 (en) | 2013-03-11 | 2014-12-09 | Texas Instruments Incorporated | Method and apparatus for a time-of-flight sensor with charge storage |
US10497737B2 (en) | 2013-05-30 | 2019-12-03 | Caeleste Cvba | Enhanced dynamic range imaging |
EP3019824B1 (en) | 2013-07-09 | 2018-01-10 | Xenomatix NV | Surround sensing system |
US20150260830A1 (en) | 2013-07-12 | 2015-09-17 | Princeton Optronics Inc. | 2-D Planar VCSEL Source for 3-D Imaging |
US9182490B2 (en) | 2013-11-27 | 2015-11-10 | Semiconductor Components Industries, Llc | Video and 3D time-of-flight image sensors |
US9874638B2 (en) | 2014-03-06 | 2018-01-23 | University Of Waikato | Time of flight camera system which resolves direct and multi-path radiation components |
GB201407267D0 (en) | 2014-04-24 | 2014-06-11 | Cathx Res Ltd | Underwater surveys |
US9753140B2 (en) | 2014-05-05 | 2017-09-05 | Raytheon Company | Methods and apparatus for imaging in scattering environments |
CN106461378B (zh) | 2014-08-08 | 2019-10-25 | 塞姆布有限公司 | 具有用于非接触式测量的扫描系统的车辆装备 |
WO2016076796A1 (en) | 2014-11-12 | 2016-05-19 | Heptagon Micro Optics Pte. Ltd. | Optoelectronic modules for distance measurements and/or multi-dimensional imaging |
DE102014117097B3 (de) * | 2014-11-21 | 2016-01-21 | Odos Imaging Ltd. | Abstandsmessvorrichtung und Verfahren zum Bestimmen eines Abstands |
EP3064898B1 (de) * | 2015-03-04 | 2019-12-18 | Leica Geosystems AG | Vermessungsgerät mit Feinanzielungs- bzw. Zielverfolgungsfunktionalität |
JP6478725B2 (ja) | 2015-03-09 | 2019-03-06 | キヤノン株式会社 | 計測装置及びロボット |
JP6531326B2 (ja) * | 2015-03-10 | 2019-06-19 | アルプスアルパイン株式会社 | 光学式検知装置 |
US20160295133A1 (en) | 2015-04-06 | 2016-10-06 | Heptagon Micro Optics Pte. Ltd. | Cameras having a rgb-ir channel |
CN107615093B (zh) | 2015-05-28 | 2021-07-06 | 新唐科技日本株式会社 | 测距摄像装置、其测距方法以及固体摄像装置 |
WO2016208214A1 (ja) | 2015-06-24 | 2016-12-29 | 株式会社村田製作所 | 距離センサ |
JP6413960B2 (ja) * | 2015-07-08 | 2018-10-31 | 株式会社デンソー | 距離測定装置 |
EP3159711A1 (en) | 2015-10-23 | 2017-04-26 | Xenomatix NV | System and method for determining a distance to an object |
JPWO2017085916A1 (ja) | 2015-11-16 | 2018-09-06 | パナソニックIpマネジメント株式会社 | 撮像装置、及びそれに用いられる固体撮像素子 |
US10234561B2 (en) * | 2016-05-09 | 2019-03-19 | Microsoft Technology Licensing, Llc | Specular reflection removal in time-of-flight camera apparatus |
-
2016
- 2016-10-03 EP EP16192103.6A patent/EP3301480A1/en not_active Withdrawn
-
2017
- 2017-10-03 EP EP17788125.7A patent/EP3519860B1/en active Active
- 2017-10-03 US US16/337,321 patent/US11513199B2/en active Active
- 2017-10-03 JP JP2019538732A patent/JP6977045B2/ja active Active
- 2017-10-03 WO PCT/EP2017/075096 patent/WO2018065429A1/en active Application Filing
- 2017-10-03 KR KR1020197012600A patent/KR102494430B1/ko active IP Right Grant
- 2017-10-03 CN CN201780060874.8A patent/CN109791207B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010013779A1 (ja) * | 2008-07-30 | 2010-02-04 | 国立大学法人静岡大学 | 距離画像センサ、及び撮像信号を飛行時間法により生成する方法 |
CN103998949A (zh) * | 2012-01-10 | 2014-08-20 | 索弗特凯耐提克传感器股份有限公司 | 对飞行时间信号处理的改进或与之相关的改进 |
CN103533636A (zh) * | 2012-06-29 | 2014-01-22 | 三星电子株式会社 | 测量到对象的距离的方法和装置 |
WO2014181619A1 (ja) * | 2013-05-10 | 2014-11-13 | 国立大学法人静岡大学 | 距離計測装置 |
Also Published As
Publication number | Publication date |
---|---|
KR102494430B1 (ko) | 2023-02-01 |
KR20190055238A (ko) | 2019-05-22 |
US20200033478A1 (en) | 2020-01-30 |
WO2018065429A1 (en) | 2018-04-12 |
JP6977045B2 (ja) | 2021-12-08 |
US11513199B2 (en) | 2022-11-29 |
EP3301480A1 (en) | 2018-04-04 |
JP2019529958A (ja) | 2019-10-17 |
EP3519860A1 (en) | 2019-08-07 |
EP3519860B1 (en) | 2020-09-09 |
CN109791207A (zh) | 2019-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109791207B (zh) | 用于确定到对象的距离的系统和方法 | |
CN108139483B (zh) | 用于确定到对象的距离的系统和方法 | |
CN109791204B (zh) | 用于确定到对象的距离的系统 | |
EP3625589B1 (en) | System and method for determining a distance to an object | |
EP3519855B1 (en) | System for determining a distance to an object | |
JP2018531374A6 (ja) | 物体までの距離を測定するためのシステムおよび方法 | |
EP3550329A1 (en) | System and method for determining a distance to an object |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |