CN109490902B - 光检测和测距装置及其操作方法 - Google Patents

光检测和测距装置及其操作方法 Download PDF

Info

Publication number
CN109490902B
CN109490902B CN201810608552.9A CN201810608552A CN109490902B CN 109490902 B CN109490902 B CN 109490902B CN 201810608552 A CN201810608552 A CN 201810608552A CN 109490902 B CN109490902 B CN 109490902B
Authority
CN
China
Prior art keywords
light
tof
different directions
light incident
reflected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810608552.9A
Other languages
English (en)
Other versions
CN109490902A (zh
Inventor
金桢祐
大塚达宏
尹熙善
黄仁吾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN109490902A publication Critical patent/CN109490902A/zh
Application granted granted Critical
Publication of CN109490902B publication Critical patent/CN109490902B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/487Extracting wanted echo signals, e.g. pulse detection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/10Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4861Circuits for detection, sampling, integration or read-out
    • G01S7/4863Detector arrays, e.g. charge-transfer gates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/02Details
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R19/00Arrangements for measuring currents or voltages or for indicating presence or sign thereof
    • G01R19/04Measuring peak values or amplitude or envelope of ac or of pulses
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4816Constructional features, e.g. arrangements of optical elements of receivers alone
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4865Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/491Details of non-pulse systems
    • G01S7/4912Receivers
    • G01S7/4915Time delay measurement, e.g. operational details for pixel components; Phase measurement
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/491Details of non-pulse systems
    • G01S7/493Extracting wanted echo signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Power Engineering (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

提供了基于关于由光源照射的光的照射角度的信息而在从多个不同方向入射的光之中识别从物体反射的光的方法、以及用于该方法的光检测和测距(LiDAR)装置。

Description

光检测和测距装置及其操作方法
相关申请的交叉引用
本申请要求于2017年9月13日在韩国知识产权局提交的韩国专利申请第10-2017-0117227号的优先权,其公开内容通过引用整体并入本文。
技术领域
与示例性实施例一致的装置和方法涉及光检测和测距(LiDAR)装置及其操作方法。
背景技术
光飞行时间(TOF)测量方法是用于通过使用三维(3D)相机或光检测和测距(LiDAR)来测量到物体的距离的多种方法之一。TOF测量方法基本上涉及下述过程:将具有特定波形的光投射到物体上,通过使用光电二极管(PD)或相机对从物体反射的具有相同波长的光进行测量或成像,并提取深度图像。
发明内容
一个或多个示例性实施例提供了光检测和测距(LiDAR)装置及其操作方法。
附加的示例性方面和优点将部分地在下面的描述中被阐述,并且部分地从描述中将是明白的,或者可以通过实践所呈现的示例性实施例来了解。
根据示例性实施例的一个方面,LiDAR装置包括:光源,被配置为将光照射到物体上;光检测器,被配置为检测从多个不同方向入射的光;光识别器,被配置为基于关于照射的光的照射角度的信息,在从多个不同方向入射的光之中识别从物体反射的光;以及处理器,被配置为通过使用所识别的光来确定到物体的距离。
光检测器可以包括被配置为单独地检测从多个不同方向入射的光的多个光检测元件,并且光识别器还可以被配置为从多个光检测元件中识别与照射的光的照射角度相对应的光检测元件,并将由所确定的光检测元件检测到的光识别为从物体反射的光。
光源照射光的照射角度可以被预设为与多个光检测元件之一相对应。
多个光检测元件中的每一个可以包括雪崩光电二极管(APD)和单光子雪崩二极管(SPAD)中的至少一个。
光识别器可以包括:多个时间计数器,被配置为测量从多个不同方向中的每一个入射的光的飞行时间(TOF);以及选择器,被配置为基于关于照射的光的照射角度的信息,在从多个不同方向中的每一个入射的光的TOF之中选择从物体反射的光的TOF,并且处理器还可以被配置为基于从物体反射的光的TOF来确定到物体的距离。
多个时间计数器中的每一个可以是时间-数字转换器(TDC),并且选择器可以是复用器。
光识别器可以包括:多个模数转换器(ADC),被配置为测量从多个不同方向中的每一个入射的光的飞行时间(TOF)和强度;以及选择器,被配置为基于关于照射的光的照射角度的信息,在从多个不同方向中的每一个入射的光的TOF和强度之中选择从物体反射的光的TOF和强度,并且处理器还可以被配置为执行用于基于从物体反射的光的TOF和强度来获取关于物体的信息的数据处理。
光检测器可以包括:透镜,被配置为收集从多个不同方向中的每一个入射的光;多个光检测元件,每个光检测元件被配置为单独地检测从多个不同方向中的一个方向入射的光并输出电流信号;多个电流-电压转换电路,每个电流-电压转换电路被配置为将从多个光检测元件之一输出的电流信号转换成电压信号;多个放大器,每个放大器被配置为放大从多个电流-电压转换电路之一输出的电压信号;以及多个峰值检测器,每个峰值检测器被配置为从由多个放大器之一放大的电压信号中检测峰值。
根据另一示例性实施例的一个方面,一种操作LiDAR装置的方法包括:将光照射到物体上;检测从多个不同方向入射的光;基于关于照射的光的照射角度的信息,在从多个不同方向入射的光之中识别从物体反射的光;以及通过使用所识别的光来确定到物体的距离。
根据另一示例性实施例的一个方面,提供了一种非暂时性计算机可读记录介质,其上记录有用于在计算机上执行操作LiDAR装置的方法的程序。
附图说明
从以下结合附图进行的示例性实施例的描述中,这些和/或其它示例性方面和优点将变得明显且更容易理解,在附图中:
图1是示出根据示例性实施例的光检测和测距(LiDAR)装置的操作的图;
图2是根据示例性实施例的LiDAR装置的图;
图3是示出根据示例性实施例的光的照射角度与多个检测元件之间的对应的图;
图4是根据示例性实施例的光检测器和光识别器的图;
图5是根据具体实施例的光识别器的图;
图6是根据另一示例性实施例的光检测器和光识别器的图;以及
图7是用于描述根据示例性实施例的操作LiDAR装置的方法的图。
具体实施方式
现在将详细提及在附图中示出的示例性实施例,在附图中相似的附图标记始终指代相似的元件。就这一点而言,本示例性实施例可以具有不同的形式,并且不应被解释为限于在此阐述的描述。因此,下面通过参考附图仅描述了示例性实施例以说明各方面。如本文所使用的,术语“和/或”包括相关所列项目中的一个或多个的任何和所有组合。诸如“…中的至少一个”的表达当在元素列表后面时修饰整个元素列表,而不是修饰列表的个体的元素。
在下文中,将参考附图详细描述本公开的示例性实施例。以下实施例的描述不应被解释为限制本公开的范围,并且可由本领域的普通技术人员容易地推断的事物将被解释为落入本公开的范围内。
将理解,诸如“包括(comprise)”、“包含(include)”和“具有”的术语在本文中使用时指定阐述的元素的存在,但不排除存在或添加一个或多个其他元素。而且,如本文所使用的术语“单元”和“模块”表示用于处理至少一个功能或操作的单元,其可以通过硬件、软件或其组合来实现。
将理解,虽然术语“第一”、“第二”等可以在本文中用于描述各种元件,但是这些术语仅用于区分一个元素和另一个元素。
图1是示出根据示例性实施例的光检测和测距(LiDAR)装置的操作的图。
LiDAR装置100可以被用作传感器,该传感器被配置为实时获取诸如关于设置在装置的前方的物体的距离信息的三维(3D)信息。例如,LiDAR装置100可以被应用于无人驾驶车辆、自主车辆、机器人或无人机。
LiDAR装置100可以向物体OB照射光L1。所照射的光L1可以从物体OB被反射,并且LiDAR装置100可以检测从物体OB反射的光L1。而且,LiDAR装置100可以检测从环境入射的光L2和L3以及从物体OB反射的光L1。换句话说,LiDAR装置100可以检测从不同方向入射的光L1、L2和L3。例如,从环境入射的光L2和L3可以是从不同的外部LiDAR装置入射的光。而且,LiDAR装置100可以检测不期望的光L2和L3以及从进行距离测量的物体OB反射的光L1。也就是说,可能发生串扰现象。
LiDAR装置100可以基于关于光L1的照射角度的信息来从检测到的光L1、L2和L3中识别从物体OB反射的光L1。具体地,LiDAR装置100可以包括被配置为单独地检测从不同方向入射的光L1、L2和L3的多个光检测元件。LiDAR装置100可以从光检测元件中选择与光L1的照射角度相对应的光检测元件,并将由所选择的光检测元件检测到的光识别为从物体OB反射的光L1。LiDAR装置100可以通过使用所识别的光L1来计算到物体OB的距离。
以这种方式,LiDAR装置100可以从检测到的光中识别从物体OB反射的光,从而防止发生串扰。
图2是根据示例性实施例的LiDAR装置100的图。
LiDAR装置100可以包括光源110、光检测器120、光识别器130和处理器140。在图2中仅示出了与根据本示例性实施例的LiDAR装置100相关联的元件。因此,本领域普通技术人员将理解,除了图2中具体示出的元件之外,LiDAR装置100还可以包括其他通用元件。
光源110可以向物体OB照射光L1。例如,光源110可以发射红外波长波段的光。使用红外光可以防止所照射的光与可见光波长波段的自然光(如阳光)的混合。然而,光源110不一定限于红外光,并且光源110可以发射各种波长波段中的任一种的光。在这种情况下,可能需要校正以去除混合的自然光的信息。例如,光源110可以是激光光源,并且不限于具体示例。光源110可以是边发射激光器、垂直腔面发射激光器(VCSEL)和分布反馈激光器中的任一种。例如,光源110可以是激光二极管。根据示例性实施例,光源110可以被包括在另一装置中,并且不一定需要由包括在LiDAR装置100中的硬件来配置。
光源110可以照射被用于分析物体OB的位置和形状的光。光源110可以包括诸如激光二极管(LD)、发光二极管(LED)或超发光二极管(SLD)的光源,其被配置为生成并照射适合于分析物体的位置和形状的预定波长波段的光,例如,红外波长波段的光。光源110可以被配置为生成并照射多个不同波长波段的光。光源110可以被配置为生成并照射脉冲光或连续光。光源110可以在处理器140的控制下向物体OB照射光。具体地,处理器140可以设置光的照射方向或光的照射角度,并且可以控制光源110根据设置的照射角度或方向照射光。
光检测器120可以包括透镜121和多个光检测元件122。透镜121可以收集从不同方向入射到其上的光。例如,透镜121可以是凸透镜。
光检测元件122可以单独地检测由透镜121收集的光。具体地,可以由透镜121在不同位置处收集从不同方向入射的光,并且光检测元件122可以单独地检测在不同位置处收集的光。光检测元件122可以在平行于透镜121的纵向方向的方向上被布置,并且可以以1xn或nxn(其中n是自然数)的形式的二维(2D)阵列被布置。
光检测元件122中的每一个可以是光接收元件。光检测元件可以是被配置为在其上施加有偏置电压的状态下操作的光接收元件。例如,光检测元件可以包括雪崩光电二极管(APD)或单光子雪崩二极管(SPAD)。根据包括APD和SPAD中的哪一个,光检测器120可以具有不同的特定电路配置,诸如模拟前端(AFE)或时间-数字转换器(TDC)。本文省略了特定电路配置的详细描述,本领域技术人员会理解可以使用多种常规技术中的任一种。
光识别器130可以基于关于由光源110照射的光的照射角度或照射方向的信息,从由光检测元件122检测到的光之中识别从物体OB反射的光。
从物体反射或散射的光的方向可根据由光源110照射的光的照射角度而改变。结果,光检测元件122之中的检测从物体反射或散射的光的光检测元件也可以改变。因此,由光源110照射的光的不同的照射角度可以是预设的,并可以分别对应于多个光检测元件122,并且光识别器130可以基于关于光的照射角度与光检测元件122之间的对应的信息来识别从物体OB反射的光。
光识别器130可以从处理器140获取关于的光的照射角度或照射方向的信息。光识别器130可以从光检测元件122中确定与由光源110照射的光的照射角度相对应的光检测元件。由于与光检测元件122中的每一个相对应的光的照射角度值可以是预设的,所以光识别器130可以确定与由光源110照射的光的照射角度值相对应的光检测元件。例如,当光源110以从基准方向开始沿顺时针有30度的照射角度照射光时,光识别器130可以确定对应于30度的照射角度的光检测元件是以1xn阵列的形式布置的光检测元件122之中的左侧第四光检测元件。然后,光识别器130可以将由所确定的光检测元件检测到的光识别为从物体OB反射的光。
处理器140可以控制LiDAR装置100的各个元件的操作。另外,LiDAR装置100可以包括存储器,该存储器被配置为存储处理器140的操作所需的一个或多个程序和数据。
处理器140可以通过使用从所识别的物体OB反射的光来确定到物体OB的距离。换句话说,处理器140可以通过使用从物体OB反射的光来确定从LiDAR装置100到物体OB的距离。处理器140可以通过测量从物体OB反射的光的飞行时间(TOF)来确定到物体OB的距离。具体而言,处理器140可以通过测量在光源110照射光的时间点与检测到从物体反射的光的时间点之间的时间来确定到物体OB的距离。由于用于通过使用所测量的光的TOF来确定到物体的距离的技术是常规技术,因此将省略其详细描述。
图3是示出根据示例性实施例的光的照射角度与多个检测元件之间的对应的图。
由光源110照射的光的照射角度可以被分别设置为对应于光检测元件122。参考图3,当光源110以角度范围(1)照射光时,光检测元件122中的光检测元件①可以检测从物体反射的光。类似地,当光源110以角度范围(2)照射光时,光检测元件122中的光检测元件②可以检测从物体反射的光。因此,与光检测元件122中的光检测元件①相对应的光的照射角度范围可以被设置为(1),并且与光检测元件122中的光检测元件②相对应的光的照射角度范围可以被设置为(2)。
因此,光识别器130可以通过使用由光源110照射的光的照射角度来从光检测元件122中识别检测从物体反射的照射光的光检测元件。
图4是根据示例性实施例的光检测器120和光识别器130的图。
光检测器120可以包括透镜121、多个光检测元件122、多个电流-电压转换电路123、多个放大器124、以及多个峰值检测器125。
透镜121可以收集从多个不同方向入射的光。
光检测元件122可以单独地检测由透镜121收集的光并由此输出电流信号。
电流-电压转换电路123可以将从光检测元件122输出的电流信号转换为电压信号。
放大器124可以放大从电流-电压转换电路123输出的电压信号。
峰值检测器125可以从由放大器124放大的电压信号中检测峰值。根据示例性实施例,峰值检测器125可以通过检测电信号的上升沿和下降沿来检测峰值。替选地,峰值检测器125可以通过使用恒比鉴别器(CFD)方法来检测峰值。峰值检测器125还可以包括比较器并可以以脉冲信号的形式输出检测到的峰值。
光识别器130可以包括多个时间计数器131和选择器132。
时间计数器131可以测量由光检测元件122中的每一个检测到的光的TOF。具体地,当输入从峰值检测器125中的每一个输出的脉冲信号时,时间计数器131中的每一个可以通过计算从由光源110照射光的时间点开始生成的时钟信号的周期数来测量光的TOF。而且,时间计数器131中的每一个可以将关于所测量的光的TOF中的每一个的信息存储在寄存器中。根据示例性实施例,时间计数器131中的每一个可以由时间-数字转换器(TDC)实现。
选择器132可以基于关于由光源110照射的光的照射角度的信息,从由时间计数器131测量的多个TOF中选择由光源110照射并从物体反射的光的TOF。具体地,如上所述,正如将光源110照射光的角度设置为与光检测元件122中的每一个相对应一样,也可以将光源110照射光的角度设置为与时间计数器131中的每一个相对应。因此,选择器132可以从时间计数器131中选择与照射光的照射角度值相对应的时间计数器,并选择由所选择的时间计数器测量的光的TOF作为从物体反射的光的TOF。例如,选择器132可以由诸如复用器(MUX)的逻辑电路来实现。
处理器140可以通过使用由选择器132选择的光的TOF来确定到物体的距离。
图5是根据示例性实施例的光识别器130的图。
光识别器130可以包括多个TDC和MUX。
TDC可以测量由光检测元件122检测到的光的TOF。具体地,TDC中的每一个可以接收从峰值检测器125中的一个相应的峰值检测器输出的峰值检测信号,并且可以计算从光源110照射光的时间点开始生成的时钟信号的周期数。换句话说,TDC中的每一个可以通过计算从光源110照射光的时间点到接收峰值检测信号的时间点生成的时钟信号的周期数来测量由光检测元件122中的一个相应的光检测元件检测到的光的TOF。
MUX可以从TDC接收光的TOF。而且,MUX可以从处理器140接收关于由光源110照射的光的照射角度的信息。MUX可以基于关于由光源110照射的光的照射角度的信息来选择检测到的光的TOF中的一个。具体地,由于分别与TDC相对应的照射角度可以是预设的,所以MUX可以从光的TOF中选择与光的输入照射角度相对应的光的TOF。
TDC可以将所测量的光的TOF各自存储在寄存器中,并且MUX可以在每个设置的时段内从存储在寄存器中的光的TOF中选择与光的输入照射角度相对应的光的TOF。例如,MUX可以每两微秒选择与光的输入照射角度相对应的光的TOF。
MUX可以将关于预选的光的TOF的信息发送到处理器140。处理器140可以通过使用所选择的光的TOF来确定到物体的距离。
图6是根据另一示例性实施例的光检测器120和光识别器130的图。
根据示例性实施例,光检测器120可以包括透镜121、多个光检测元件122、多个电流-电压转换电路123、以及多个放大器124。
由于透镜121、光检测元件122、电流-电压转换电路123和放大器124基本上与参照图4描述的那些相同,所以将省略其冗余描述。
根据示例性实施例,光识别器130可以包括多个模数转换器(ADC)133和选择器134。
ADC 133可以测量由光检测元件122检测到的光的TOF和强度。具体地,ADC 133可以通过测量从放大器124输出的电信号的幅度来测量由光检测元件122检测到的光的强度。另外,当从放大器124输出的电信号被输入时,ADC 133可以通过计算从光源110照射光的时间点开始生成的时钟信号的周期数来测量光的TOF。
选择器134可以基于关于由光源110照射的光的照射角度的信息,从由ADC 133测量到的光的多个TOF和强度中选择由光源110照射并从物体反射的光的TOF和强度。
处理器140可以执行用于通过使用由选择器134选择的光的TOF和强度来获取关于物体的信息的数据处理。
图7是根据示例性实施例的操作LiDAR装置的方法的流程图。
图7的方法可以由图1至图6的LiDAR装置100的相应元件执行,并且将省略其冗余描述。
在操作S710中,LiDAR装置100可以向物体照射光。LiDAR装置100可以通过使用光源照射被用于分析物体的位置和形状的光。LiDAR装置100可以生成并照射不同波长波段的光,并且可以生成并照射脉冲光或连续光。
LiDAR装置100可以设置光的照射方向或照射角度,并且可以根据所设置的照射角度或照射方向照射光。
在操作S720中,LiDAR装置100可以检测从多个不同方向入射的光。具体地,LiDAR装置100可以通过使用透镜收集从多个不同方向入射的光,并且可以通过使用光检测元件单独地检测收集的光。
LiDAR装置100可以通过使用电流-电压转换电路将从光检测元件中的每一个输出的电流信号转换为电压信号。而且,LiDAR装置100可以通过使用放大器来放大从电流-电压转换电路123输出的电压信号。而且,LiDAR装置100可以从由放大器124放大的电压信号中检测峰值。
在操作S730中,基于关于在操作S710中照射的光的照射角度的信息,LiDAR装置100可以从在操作S720中检测到的光之中识别从物体反射的光。可以将由光源照射的光的多个照射角度中的每一个预设为与光检测元件之一对应,并且LiDAR装置100可以基于关于光的照射角度与光检测元件之间的对应的信息来识别从物体反射的光。
LiDAR装置100可以从光检测元件中选择与由光源照射的光的照射角度相对应的光检测元件。由于与光检测元件中的每一个相对应的光的照射角度值可以是预设的,所以LiDAR装置100可以确定与由光源照射的光的照射角度值相对应的光检测元件。然后,LiDAR装置100可以将由所确定的光检测元件检测到的光识别为从物体反射的光。
LiDAR装置100可以通过使用时间计数器来测量由光检测元件中的每一个检测到的光的TOF。具体地,当输入从每个峰值检测器输出的脉冲信号时,LiDAR装置100可以通过计算从光源照射光的时间点开始生成的时钟信号的周期数,通过使用时间计数器来测量光的TOF。
LiDAR装置100可以使用选择器基于关于由光源照射的光的照射角度的信息而从由时间计数器测量的多个TOF中选择由光源照射并从物体反射的光的TOF。具体地,LiDAR装置100可以从时间计数器中确定与照射光的照射角度值对应的时间计数器,并将由所确定的时间计数器测量的光的TOF选择为从物体反射的光的TOF。
根据另一示例性实施例,LiDAR装置100可以通过使用ADC来测量由光检测元件中的每一个检测到的光的TOF和强度。具体地,LiDAR装置100可以使用ADC以通过测量从放大器输出的电信号的幅度来测量由光检测元件检测到的光的强度。另外,当从放大器输出的电信号被输入时,LiDAR装置100可以通过计算从光源照射光的时间点开始生成的时钟信号的周期数,通过使用ADC来测量光的TOF。
基于关于由光源照射的光的照射角度的信息,LiDAR装置100可以从由ADC测量的光的多个TOF和强度中选择由光源照射并从物体反射的光的TOF和强度。
在操作S740中,LiDAR装置100可以通过使用在操作S730中识别的光来确定到物体的距离。换句话说,LiDAR装置100可以通过使用从物体反射的光来确定到物体的距离。
另外,LiDAR装置100可以执行用于通过使用由选择器选择的光的TOF和强度来获取关于物体的信息的数据处理。
根据本公开的示例性实施例,LiDAR装置能够从由光检测元件检测到的光中识别从进行距离测量的物体反射的光,从而防止发生串扰。
本文描述的装置可以包括:处理器;被配置为存储和运行程序数据的存储器,诸如磁盘驱动器的永久存储器;被配置为处理与外部设备的通信的通信端口;以及包括触摸板、键、按钮等的用户界面设备。由软件模块或算法实现的方法可以被存储为可在处理器或非暂时性计算机可读介质上运行的程序指令或计算机可读代码。非暂时性计算机可读介质的示例可以包括磁存储介质(例如,只读存储器(ROM)、随机存取存储器(RAM)、软盘、硬盘等)以及光学可读介质(例如,CD-ROM、数字多功能盘(DVD)等)。非暂时性计算机可读记录介质还可以被分布在网络耦合的计算机系统上,使得非暂时性计算机可读代码以分布式被存储和运行。该介质可以由计算机读取、被存储在存储器中并由处理器运行。
可以就功能块组件和各种处理步骤的方面来描述本公开。这种功能块可以通过被配置为执行指定功能的任何数量的硬件和/或软件组件来实现。例如,本公开可以采用各种集成电路组件,例如存储器元件、处理元件、逻辑元件、查找表等,其可以在一个或多个微处理器或其他控制设备的控制下执行各种功能。类似地,在使用软件编程或软件元素来实现本公开的元件的情况下,本公开可以利用诸如C、C++、Java、汇编程序等的任何编程或脚本语言来实现,其中以数据结构、对象、进程、例程或其他编程元素的任何组合来实现各种算法。可以在一个或多个处理器上执行的算法中实现功能方面。此外,本公开可以采用任何数量的用于电子配置、信号处理和/或控制、数据处理等的常规技术。词“机制”和“元件”被广泛地使用并且不限于机械或物理实施例,而是可以包括与处理器等结合的软件例程。
这里示出和描述的具体实现方式是本公开的说明性示例,并且不意图以其他方式限制本公开的范围。为了简洁起见,可能不会详细描述常规电子装置、控制系统、软件开发和系统的其他功能方面(以及系统的各个操作组件的组件)。此外,所呈现的各个附图中示出的连接线或连接器旨在表示各种元件之间的示例性功能关系和/或物理或逻辑耦合。应注意,在实际设备中可能存在许多替代或附加的功能关系、物理连接或逻辑连接。
在本文档中(特别是在权利要求书中)使用术语“该(the)”或类似的明确术语应被解释为涵盖单数和复数。另外,当在实施例中公开了范围时,可以包括应用了属于该范围的各个值的实施例(除非在此另外指出),并且这与在实施例的详细描述中公开落入该范围的各个值中的每一个是相同的。对于根据本公开的方法的步骤,如果没有清楚地公开顺序,则可以以适当的顺序执行这些步骤。在实施例中使用所有图示或说明性术语(例如,等、等等)仅仅是为了详细描述本公开,并且本公开的范围并不由于图示或说明性术语而受限制,除非他们受到权利要求的限制。另外,本领域普通技术人员将理解,在所附权利要求或等同物的范围内,可以根据设计条件和因素进行各种修改、组合和变化。
应理解,在此描述的示例性实施例应被认为仅是描述性的而不是为了限制的目的。在每个实施例中的特征或方面的描述通常应被认为可用于其他示例性实施例中的其它类似特征或方面。
虽然参考附图描述了一个或多个示例性实施例,但本领域普通技术人员将理解,在不脱离所附权利要求所限定的精神和范围的情况下,可以在其中进行形式和细节上的各种改变。

Claims (11)

1.一种光检测和测距(LiDAR)装置,包括:
光源,被配置为将光照射到物体上;
光检测器,包括多个光检测元件,每个光检测元件被配置为单独地检测从多个不同方向中的一个方向入射的光;
光识别器,被配置为基于关于照射的光的照射角度的信息,在从所述多个不同方向入射的光之中识别从物体反射的光;以及
处理器,被配置为通过使用所识别的光来确定到物体的距离,
其中,所述光识别器包括:
多个时间计数器,被配置为测量从所述多个不同方向入射的光的飞行时间(TOF);以及
选择器,被配置为基于关于照射的光的照射角度的信息,在从所述多个不同方向入射的光的TOF之中识别从物体反射的光的TOF,
其中,所述处理器还被配置为基于从物体反射的光的TOF来确定到物体的距离,
其中,所述选择器连接到多个时间计数器的后端。
2.如权利要求1所述的LiDAR装置,其中,所述光源被配置为以下述照射角度照射光:该照射角度被预设为与所述多个光检测元件之一相对应。
3.如权利要求1所述的LiDAR装置,其中,所述多个光检测元件中的每一个包括雪崩光电二极管(APD)和单光子雪崩二极管(SPAD)中的至少一个。
4.如权利要求1所述的LiDAR装置,其中,所述多个时间计数器中的每一个是时间-数字转换器(TDC),并且
所述选择器是复用器。
5.如权利要求1所述的LiDAR装置,其中,所述光检测元件每个都进一步被配置为输出电流信号,并且
其中,所述光检测器包括:
透镜,被配置为收集从所述多个不同方向中的每一个入射的光;
多个电流-电压转换电路,每个电流-电压转换电路被配置为将从所述多个光检测元件之一输出的电流信号转换成电压信号;
多个放大器,每个放大器被配置为放大从所述多个电流-电压转换电路之一输出的电压信号;以及
多个峰值检测器,每个峰值检测器被配置为从由所述多个放大器之一放大的电压信号中检测峰值。
6.一种操作光检测和测距(LiDAR)装置的方法,所述方法包括:
将光照射到物体上;
收集从多个不同方向入射的光,并通过使用多个光检测元件单独地检测从所述多个不同方向中的一个入射的光;
基于关于照射的光的照射角度的信息,在从所述多个不同方向入射的光之中识别从物体反射的光;以及
通过使用所识别的光来确定到物体的距离,
其中,所述识别包括:
测量从所述多个不同方向入射的光的飞行时间(TOF);以及
基于关于照射的光的照射角度的信息,在从所述多个不同方向入射的光的TOF之中识别从物体反射的光的TOF,
其中,所述确定包括基于从物体反射的光的TOF来确定到物体的距离。
7.如权利要求6所述的方法,其中,将光照射到物体上包括以下述照射角度照射光:该照射角度被预设为与所述多个光检测元件之一相对应。
8.如权利要求6所述的方法,其中,所述多个光检测元件中的每一个包括雪崩光电二极管(APD)和单光子雪崩二极管(SPAD)中的至少一个。
9.如权利要求6所述的方法,其中,测量TOF包括通过使用多个时间-数字转换器(TDC)测量从所述多个不同方向中的每一个入射的光的TOF,并且
所述识别包括:通过使用复用器,基于关于照射的光的照射角度的信息,在从所述多个不同方向中的每一个入射的光的TOF之中识别从物体反射的光的TOF。
10.如权利要求6所述的方法,其中,所述检测包括:
输出各自对应的多个电流信号;
将所述多个电流信号转换成各自对应的多个电压信号;
放大所述多个电压信号;以及
从放大后的多个电压信号中的每一个中检测峰值。
11.一种非暂时性计算机可读记录介质,其上记录有用于执行一种方法的程序,所述方法包括:
将光照射到物体上;
收集从多个不同方向入射的光,并通过使用多个光检测元件单独地检测从所述多个不同方向中的一个入射的光;
基于关于照射的光的照射角度的信息,在从所述多个不同方向入射的光之中识别从物体反射的光;以及
通过使用所识别的光来确定到物体的距离,
其中,所述识别包括:
测量从所述多个不同方向入射的光的飞行时间(TOF);以及
基于关于照射的光的照射角度的信息,在从所述多个不同方向入射的光的TOF之中识别从物体反射的光的TOF,
其中,所述确定包括基于从物体反射的光的TOF来确定到物体的距离。
CN201810608552.9A 2017-09-13 2018-06-13 光检测和测距装置及其操作方法 Active CN109490902B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2017-0117227 2017-09-13
KR1020170117227A KR102429879B1 (ko) 2017-09-13 2017-09-13 라이다 장치 및 이의 동작 방법

Publications (2)

Publication Number Publication Date
CN109490902A CN109490902A (zh) 2019-03-19
CN109490902B true CN109490902B (zh) 2023-11-03

Family

ID=63079852

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810608552.9A Active CN109490902B (zh) 2017-09-13 2018-06-13 光检测和测距装置及其操作方法

Country Status (5)

Country Link
US (1) US11340340B2 (zh)
EP (1) EP3457179B1 (zh)
JP (1) JP7140601B2 (zh)
KR (1) KR102429879B1 (zh)
CN (1) CN109490902B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10009036B2 (en) * 2016-09-09 2018-06-26 Samsung Electronics Co., Ltd System and method of calibrating input signal to successive approximation register (SAR) analog-to-digital converter (ADC) in ADC-assisted time-to-digital converter (TDC)
US11269065B2 (en) * 2018-11-19 2022-03-08 Infineon Technologies Ag Muilti-detector with interleaved photodetector arrays and analog readout circuits for lidar receiver
US11372090B2 (en) * 2018-12-10 2022-06-28 Baidu Usa Llc Light detection and range (LIDAR) device with SPAD and APD sensors for autonomous driving vehicles
WO2020190920A1 (en) * 2019-03-18 2020-09-24 Sense Photonics, Inc. Dynamic range improvements in lidar applications
KR102266456B1 (ko) 2019-07-24 2021-07-14 현대모비스 주식회사 라이다 시스템 및 이의 신호 처리 방법
CN112363181B (zh) * 2019-07-26 2024-04-05 现代摩比斯株式会社 车辆的激光雷达装置、激光雷达传感器控制装置及方法
KR102308786B1 (ko) * 2019-07-31 2021-10-05 현대모비스 주식회사 차량용 라이다 시스템 및 그것의 신호 처리 방법
KR20210036200A (ko) 2019-09-25 2021-04-02 삼성전자주식회사 라이다 장치 및 그 동작 방법
KR102207549B1 (ko) * 2020-07-13 2021-01-26 (주)카네비컴 감지 영역 설정이 가능한 라이다 시스템
WO2022093126A1 (en) * 2020-10-28 2022-05-05 National University Of Singapore Optical range finding
KR102507274B1 (ko) * 2020-12-16 2023-03-07 현대모비스 주식회사 라이다 장치 및 그 거리 측정 방법
DE102021209906A1 (de) 2021-09-08 2023-03-09 Robert Bosch Gesellschaft mit beschränkter Haftung LiDAR-Sensor und Verfahren zur Reduktion von Übersprechen in einem LiDAR-Sensor

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6247508A (ja) * 1985-08-27 1987-03-02 Fuji Photo Film Co Ltd 測距用光学装置
JPH04158293A (ja) * 1990-10-22 1992-06-01 Nissan Motor Co Ltd 車両用光レーダ装置
US6301003B1 (en) * 1998-08-05 2001-10-09 Denso Corporation Optical distance measuring apparatus selectively activating a matrix of light sensitive cells
CN1503914A (zh) * 2001-04-25 2004-06-09 ������������ʽ���� 测距装置、测距方法及光电转换电路
JP2005274413A (ja) * 2004-03-25 2005-10-06 Denso Corp 車両用レーダ装置
DE102009046124A1 (de) * 2009-10-28 2011-05-05 Ifm Electronic Gmbh Verfahren und Vorrichtung zur Kalibrierung eines 3D-TOF-Kamerasystems

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0798381A (ja) 1993-08-06 1995-04-11 Omron Corp 走査式距離測定装置,走査式距離測定装置を搭載した車両および光の検出装置
US5760886A (en) 1994-07-29 1998-06-02 Miyazaki; Hidenori Scanning-type distance measurement device responsive to selected signals
US6731236B1 (en) 2003-06-11 2004-05-04 Honeywell International Inc. Methods and apparatus for optimizing interferometric radar altimeter cross track accuracy
US7312320B2 (en) 2003-12-10 2007-12-25 Novimmune Sa Neutralizing antibodies and methods of use thereof
US7236235B2 (en) * 2004-07-06 2007-06-26 Dimsdale Engineering, Llc System and method for determining range in 3D imaging systems
EP1901093B1 (de) * 2006-09-15 2018-11-14 Triple-IN Holding AG Aufnahme von Entfernungsbildern
EP2708914A1 (de) 2012-09-18 2014-03-19 Sick Ag Optoelektronischer Sensor und Verfahren zur Erfassung einer Tiefenkarte
JP6136216B2 (ja) 2012-11-29 2017-05-31 株式会社デンソー レーザレーダ装置,検査システム,及びターゲット板
JP6241793B2 (ja) * 2012-12-20 2017-12-06 パナソニックIpマネジメント株式会社 3次元測定装置および3次元測定方法
JP6045963B2 (ja) * 2013-04-05 2016-12-14 日立マクセル株式会社 光測距装置
KR101558660B1 (ko) 2013-10-10 2015-10-07 현대자동차주식회사 멀티 계층 라이더의 빔 각도 보정 장치 및 그 방법
JP6314418B2 (ja) 2013-10-18 2018-04-25 株式会社デンソー レーダ装置
US9250714B2 (en) * 2013-11-27 2016-02-02 Intersil Americas LLC Optical proximity detectors
US9952323B2 (en) * 2014-04-07 2018-04-24 Samsung Electronics Co., Ltd. High resolution, high frame rate, low power image sensor
US10036801B2 (en) 2015-03-05 2018-07-31 Big Sky Financial Corporation Methods and apparatus for increased precision and improved range in a multiple detector LiDAR array
FR3043797A1 (zh) * 2015-11-16 2017-05-19 Stmicroelectronics (Grenoble 2) Sas
US20170168162A1 (en) * 2015-12-09 2017-06-15 The Boeing Company Light detection and ranging (lidar) imaging systems and methods
US10890649B2 (en) * 2016-08-11 2021-01-12 Qualcomm Incorporated System and method for measuring reference and returned light beams in an optical system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6247508A (ja) * 1985-08-27 1987-03-02 Fuji Photo Film Co Ltd 測距用光学装置
JPH04158293A (ja) * 1990-10-22 1992-06-01 Nissan Motor Co Ltd 車両用光レーダ装置
US6301003B1 (en) * 1998-08-05 2001-10-09 Denso Corporation Optical distance measuring apparatus selectively activating a matrix of light sensitive cells
CN1503914A (zh) * 2001-04-25 2004-06-09 ������������ʽ���� 测距装置、测距方法及光电转换电路
JP2005274413A (ja) * 2004-03-25 2005-10-06 Denso Corp 車両用レーダ装置
DE102009046124A1 (de) * 2009-10-28 2011-05-05 Ifm Electronic Gmbh Verfahren und Vorrichtung zur Kalibrierung eines 3D-TOF-Kamerasystems

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Analysis on the characteristics of mutual interference between pulsed terrestrial LIDAR scanners;Gunzung Kim;《2015 IEEE International Geoscience and Remote Sensing Symposium (IGARSS)》;第2151-2154页 *
基于飞行时间法的红外相机研究综述;郭宁博;《兵器装备工程学报》;第38卷(第3期);第152-159页 *

Also Published As

Publication number Publication date
US11340340B2 (en) 2022-05-24
US20190079166A1 (en) 2019-03-14
JP2019053051A (ja) 2019-04-04
JP7140601B2 (ja) 2022-09-21
CN109490902A (zh) 2019-03-19
KR102429879B1 (ko) 2022-08-05
KR20190030027A (ko) 2019-03-21
EP3457179B1 (en) 2022-04-27
EP3457179A1 (en) 2019-03-20

Similar Documents

Publication Publication Date Title
CN109490902B (zh) 光检测和测距装置及其操作方法
JP7191921B2 (ja) Tofカメラシステムおよび該システムにより距離を測定するための方法
CN108291968B (zh) 具有目标视场的三维lidar系统
CA3017811C (en) Lidar based 3-d imaging with varying pulse repetition
EP3182156B1 (en) Ranging apparatus
JP6246131B2 (ja) タイムオブフライト信号の処理における又はこれに関する改良
US11656342B2 (en) Histogram-based signal detection with sub-regions corresponding to adaptive bin widths
JP6020547B2 (ja) 画像取得装置及び方法
US20190063915A1 (en) Distance meter comprising spad arrangement for consideration of multiple targets
JP6261681B2 (ja) タイムオブフライト信号の処理における又はこれに関する改良
EP3848722A1 (en) Lidar device and method of operating the same
CN110501713A (zh) 距离测量设备和方法
JP2013137324A (ja) 画像取得装置及び方法
CN210835244U (zh) 基于同步ToF离散点云的3D成像装置及电子设备
KR102645092B1 (ko) 거리 측정 장치 및 그 방법
CN112558090A (zh) 距离测量设备和通过使用距离测量设备测量距离的方法
JP6864599B2 (ja) レーザー距離計測装置
US11493613B2 (en) Method of generating a time domain echo waveform and electromagnetic radiation echo waveform generation system
KR20190073988A (ko) 거리 측정 장치 및 그 방법
JP6760319B2 (ja) 光検出装置、光検出方法および光学式測距センサ
KR102060352B1 (ko) 영상 처리 장치 및 방법
CN114236505A (zh) 一种基于DToF的测量系统及方法
CN111947565A (zh) 基于同步ToF离散点云的3D成像方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant