KR20200085297A - 방출기들의 어드레스가능 어레이를 사용하는 비행 시간 감지 - Google Patents

방출기들의 어드레스가능 어레이를 사용하는 비행 시간 감지 Download PDF

Info

Publication number
KR20200085297A
KR20200085297A KR1020207015906A KR20207015906A KR20200085297A KR 20200085297 A KR20200085297 A KR 20200085297A KR 1020207015906 A KR1020207015906 A KR 1020207015906A KR 20207015906 A KR20207015906 A KR 20207015906A KR 20200085297 A KR20200085297 A KR 20200085297A
Authority
KR
South Korea
Prior art keywords
emitters
pulses
space
time sequence
array
Prior art date
Application number
KR1020207015906A
Other languages
English (en)
Other versions
KR102403544B1 (ko
Inventor
아르나우드 라플라쿠이에르
마르크 드라더
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20200085297A publication Critical patent/KR20200085297A/ko
Application granted granted Critical
Publication of KR102403544B1 publication Critical patent/KR102403544B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/10Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4814Constructional features, e.g. arrangements of optical elements of transmitters alone
    • G01S7/4815Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/484Transmitters
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4865Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

광학 감지 장치(20)는 방출기들(50)의 어레이(28)를 포함하고, 방출기들(50)의 어레이(28)는 어레이에 인가되는 제어 입력에 응답하여 상이한 각자의 시간들에 광학 방사의 펄스들을 방출한다. 수신기(26)는 복수의 검출기들(40)을 포함하며, 복수의 검출기들(40)은 검출기들에서 광자들의 도달 횟수들을 나타내는 신호들을 출력한다. 광학체(30, 32)는 방출기들로부터의 광학 방사를 장면 내의 각자의 위치들 상으로 투사하고, 각자의 위치들을 수신기의 대응하는 픽셀들 상에 이미징한다. 제어기(44)는 미리 정의된 공간-시간 시퀀스에서 출력 펄스들을 방출하도록 방출기들을 제어하고 장면 내의 각자의 위치들로의 그리고 각자의 위치들로부터의 펄스들의 각자의 비행 시간들을 측정하기 위해 공간-시간 시퀀스와 동기화하여 대응하는 픽셀들에 의해 출력된 신호들을 수집 및 프로세싱한다.

Description

방출기들의 어드레스가능 어레이를 사용하는 비행 시간 감지
본 발명은 일반적으로 범위 감지에 관한 것이며, 특히 비행 시간 측정에 기초한 깊이 맵핑을 위한 디바이스들 및 방법들에 관한 것이다.
비행 시간(ToF) 이미징 기술들이 많은 깊이 맵핑 시스템들(또한 3D 맵핑 또는 3D 이미징으로 지칭됨)에서 사용된다. 직접 ToF 기술들에서, 펄스형 레이저와 같은 광원이 맵핑될 장면을 향해 광 방사의 펄스들을 지향시키고, 고속 검출기가 장면으로부터 반사된 방사의 도달 시간을 감지한다. 깊이 맵 내의 각각의 픽셀에서의 깊이 값은 발신 펄스의 방출 시간과 장면 내의 대응하는 포인트로부터의 반사된 방사의 도달 시간 사이의 차이로부터 도출되며, 이는 광학 펄스들의 "비행 시간"으로 지칭된다. 다시 반사되고 검출기에 의해 수신되는 방사 펄스들은 또한 "에코(echo)들"로 지칭된다.
GAPD(Geiger-mode avalanche photodiode)들로도 알려진 SPAD(Single-photon avalanche diode)들은 개별 광자들을 매우 높은 도달 시간 해상도(time-of-arrival resolution)으로 수십 피코초 정도 캡처할 수 있는 검출기들이다. 그들은 전용 반도체 프로세스들 또는 표준 CMOS 기술들로 제조될 수 있다. 단일 칩 상에 제조된 SPAD 센서들의 어레이들은 3D 이미징 카메라들에서 실험적으로 사용되어 왔다. 샤르본(Charbon) 등은 TOF(time-of-flight) 범위 이미징 카메라들(TOF Range-Imaging Cameras) (Springer-Verlag, 2013)에 게시된 "SPAD 기반 센서들(SPAD-Based Sensors)"에서 SPAD 기술들의 유용한 검토를 제공한다.
이하에 기술되는 본 발명의 일부 실시예는 직접 ToF 감지를 위한 개선된 장치 및 방법을 제공한다.
따라서, 본 발명의 일 실시예에 따르면, 어레이에 인가되는 제어 입력에 응답하여 상이한 각자의 시간들에 광학 방사의 펄스들을 방출하도록 구성되는 방출기들의 어레이를 포함하는 광학 감지 장치가 제공된다. 수신기는 복수의 검출기들을 포함하고, 복수의 검출기들은 검출기들에서의 광자들의 도달 시간들을 나타내는 신호들을 출력하도록 구성된다. 광학체는 방출기들로부터의 광학 방사를 장면 내의 각자의 위치들 상으로 투사하고 각자의 위치들을 수신기의 대응하는 픽셀들 상에 이미징하도록 구성되고, 각각의 픽셀은 검출기들 중 하나 이상을 포함한다. 제어기는 미리 정의된 공간-시간 시퀀스에서 출력 펄스들을 방출하도록 방출기들을 제어하고 장면 내의 각자의 위치들로의 그리고 각자의 위치들로부터의 펄스들의 각자의 비행 시간들을 측정하기 위해 공간-시간 시퀀스와 동기화하여 대응하는 픽셀들에 의해 출력된 신호들을 수집 및 프로세싱하도록 결합된다.
개시된 실시예에서, 방출기들은 수직-공동 표면-방출 레이저(VCSEL)를 포함한다.
추가적으로 또는 대안적으로 검출기들은 단일 광자 센서들을 포함하고, 수신기는 적어도 하나의 시간-디지털 변환기(TDC)를 포함하고, 시간-디지털 변환기는 방출기들 중 하나에 의해 방출된 펄스와 수신기의 대응하는 픽셀에서의 광자의 수신 사이의 지연을 나타내는 디지털 값을 출력한다. 일부 실시예들에서, 방출기들 각각은 미리 정의된 공간-시간 시퀀스에 따라 일련의 펄스를 방출하도록 구동되고, 제어기는, 각각의 픽셀에 대해, 일련의 펄스들에 응답하여 적어도 하나의 TDC에 의해 출력된 디지털 값들의 각자의 히스토그램을 축적하고 히스토그램으로부터 각자의 비행 시간을 도출하도록 구성된다. 일 실시예에서, 제어기는 방출기들 각각에 의해 방출되는 일련의 펄스들 내의 펄스들의 수를 변화시킴으로써 공간-시간 시퀀스를 수정하도록 구성된다.
또한 추가적으로 또는 대안적으로, 방출기들 및 단일 광자 센서들 둘 모두는 다수의 행들 및 다수의 열들을 포함하는 각자의 매트릭스들 내에 배열되고, 적어도 하나의 TDC는 다수의 TDC들을 포함하고, 각각의 TDC는 단일 광자 센서들의 상이한 각자의 행에 결합되고, 공간-시간 시퀀스는, 어레이의 상이한 각자의 행들 내의 적어도 제1 및 제2 방출기들이 펄스들을 동시에 방출하는 반면, 행들 각각 내의 단일 방출기 이외에는 임의의 주어진 시간에 동작하지 않도록 정의된다.
추가적 실시예들에서, 공간-시간 시퀀스는, 적어도 제1 및 제2 방출기들이 장면 내의 각자의 위치들로의 그리고 각자의 위치들로부터의 펄스들의 평균 비행 시간들의 절반보다 작은, 펄스들 사이의 간격을 갖는 각자의 제1 및 제2 펄스들을 방출하도록 정의된다. 개시된 실시예에서, 적어도 제1 및 제2 방출기들은 방출기들의 제1 및 제2 그룹들에 각각 속하여, 그룹들 각각의 방출기들이 어레이 위에 이격되고 펄스들을 동시에 방출한다.
일부 실시예들에서, 제어기는, 초기 공간-시간 시퀀스에 따라 제1 비행 시간을 측정한 후에, 공간-시간 시퀀스를 수정하고 수정된 공간-시간 시퀀스에 따라 제2 비행 시간들을 측정하도록 구성된다. 일 실시예에서, 공간-시간 시퀀스는 제1 비행 시간들의 해상도보다 더 미세한 해상도로 제2 비행 시간들을 측정하도록 수정된다.
또한, 본 발명의 일 실시예에 따르면, 광학 감지를 위한 방법이 제공되며, 이는 미리 정의된 공간-시간 시퀀스에서 상이한 각자의 시간들에 방출기들의 어레이로부터 광학 방사의 펄스들을 방출하는 단계를 포함한다. 광학 방사는 방출기들로부터 장면 내의 각자의 위치들 상으로 투사된다. 각자의 위치들은 수신기의 대응하는 픽셀들 상에 이미징되며, 이는 대응하는 픽셀들에서 광자들의 도달 횟수를 나타내는 신호들을 출력한다. 대응하는 픽셀들에 의해 출력된 신호들은, 장면 내의 각자의 위치들로의 그리고 각자의 위치들로부터의 펄스들의 각자의 비행 시간들을 측정하기 위해 공간-시간 시퀀스와 동기화하여 수집 및 프로세싱된다.
본 발명은 다음의 도면들과 함께 취해진 본 발명의 실시예들의 아래의 상세한 설명으로부터 보다 완전히 이해될 것이다.
도 1은 본 발명의 일 실시예에 따른 깊이 맵핑 디바이스의 개략적 측면도이다.
도 2는 본 발명의 일 실시예에 따른 통합 방출기 어레이를 개략적으로 예시하는 블록도이다.
도 3a 내지 도 3c는 본 발명의 일 실시예에 따른 방출 시퀀스 내의 연속적인 스테이지들을 도시하는, 방출기 어레이의 개략적 정면도들이다.
도 4는 본 발명의 일 실시예에 따른 도 3a 내지 도 3c의 방출 시퀀스 내의 펄스들의 타이밍을 개략적으로 예시하는 플롯이다.
도 5a 및 도 5b는 본 발명의 일 실시예에 따른 디바이스 내의 방출기 어레이의 상이한 각자의 동작 모드들을 예시하는, 깊이 맵핑 디바이스에 의해 맵핑되는 장면의 개략도이다.
당업계에 알려진 직접 ToF 깊이 맵핑 시스템에서, 데이터 획득 레이트는 맵핑될 타겟까지의 거리에 의해 제한되며: 광원은 밝은 방사 펄스를 방출하고, 이어서, 시스템은 다음 펄스가 발사될 수 있기 전에 타겟까지 그리고 다시 수신기까지의 광자들의 비행 시간 이상의 시간을 대기한다. 다시 말하면, 시스템은 최대 작동 거리, 즉 시스템에 의해 측정될 수 있는 타겟 물체까지의 최대 거리에 대응하는 고정된 시간량을 대기한다. (펄스 반복 기간이 비행 시간보다 작다면, 수신기는 연속적인 펄스들의 에코들 사이를 구별할 수 없어서, ToF 측정들에서의 알리어싱(aliasing) 문제들을 초래할 수 있다.) 그러한 시스템들에 사용되는 레이저 소스들이 전형적으로 1 ns 미만의 펄스 폭들을 갖는 반면, (공기 중의) 비행 시간은 타겟까지의 거리의 미터 당 6 ns로 성장하는 것을 고려하면, 펄스 레이트에 대한 제한은 광원이 매우 낮은 듀티 사이클에서 동작한다는 것을 의미한다. 따라서, 광원은 허용가능한 측정 처리량으로 양호한 해상도 및 신호/잡음비를 달성하기 위해 매우 강한 펄스들을 방출해야 할 수 있다.
본 명세서에 기술된 본 발명의 실시예들은 어레이에 인가되는 제어 입력에 응답하여 상이한 각자의 시간들에 광학 방사의 펄스들을 방출하도록 구동될 수 있는 방출기들의 어레이를 사용함으로써 이러한 제한들을 처리한다. 이러한 종류의 어레이들은 예를 들어 단일 칩 내의 제어 회로들과 방출기들을 통합함으로써 생성될 수 있다. 하나의 그러한 실시예에서, 방출기들이 그 상에 제조되는 III-V 족 반도체 기판이, 방출기들을 위한 제어 회로들이 그 상에 제조되는 실리콘 기판에 접합된다. 이러한 구조는 실질적으로 임의의 원하는 공간-시간 시퀀스로 어레이 내의 방출기들을 개별적으로 어드레스 및 발사하는 것을 가능하게 한다.
개시된 실시예들에서, 광학체는 방출기들로부터의 광학 방사를 장면 내의 각자의 위치들 상으로 투사하고, 이들 위치들을 수신기의 대응하는 픽셀들 상에 이미징한다. 수신기는 검출기들의 어레이를 포함하며, 검출기들의 어레이는 검출기들에서 광자들의 도달 횟수들을 나타내는 신호들을 출력한다. 각각의 픽셀은 검출기들 중 하나 이상을 포함한다(즉, 방출기 빔이 투사되는 장면 내의 각각의 위치는 단일 검출기 상으로 또는 이웃 검출기들의 그룹 상으로 다시 이미징될 수 있으며, 이어서, 그의 출력 신호들은 하나의 픽셀로 풀링된다). 따라서, 각각의 픽셀은 어레이 내의 특정 대응하는 방출기로부터 송신된 광자들의 도달 시간을 검출한다.
이러한 배열은 제어기가 미리 정의된 공간-시간 시퀀스에서 자신들의 출력 펄스들을 방출하도록 방출기들을 제어하고 장면 내의 각자의 위치들로의 그리고 각자의 위치들로부터의 펄스들의 각자의 비행 시간들을 측정하기 위해 공간-시간 시퀀스와 동기화하여 대응하는 픽셀들에 의해 출력된 신호들을 수집 및 프로세싱하는 것을 가능하게 한다. 용어 "공간-시간 시퀀스"는, 동일한 또는 상이한 방출기들에 의해 발사될 수 있는, 특정 방출기들이 그들의 펄스들을 발사하는 공간 순서 및 연속적인 펄스들 사이의 간격들을 지칭한다.
성능을 최적화하고 처리량 및 해상도 요건들을 충족시키기 위해 다양한 공간-시간 시퀀스들이 정의될 수 있다. 예를 들어, 공간-시간 시퀀스는 어레이 내의 상이한 위치들에서 다수의 방출기들이 그들의 펄스들을 동시에 방출하도록 정의될 수 있다. 추가적으로 또는 대안적으로, 시퀀스는 상이한 위치들에 있는 상이한 방출기들이 측정들이 이루어질 작동 거리들의 범위에 기초하여 예상 비행 시간보다 실질적으로 작은 펄스들 사이의 간격을 갖는 그들 각자의 펄스들을 방출하도록 정의될 수 있다. 예를 들어, 펄스들 사이의 간격은 전형적으로 장면 내의 각자의 위치들로의 그리고 각자의 위치들로부터의 펄스들의 평균 비행 시간들의 절반보다 작다. 두 경우들 모두에서, 얻어진 에코들이 수신기의 상이한 각자의 픽셀들에 의해 동시에 캡처될 것이기 때문에, 알리어싱의 위험이 거의 없다. 이러한 배열은 ToF 데이터의 획득 처리량을 증가시키는 것 및 방출기 어레이의 전체 듀티 사이클을 증가시키는 것 둘 모두에서 유리하며, 따라서 높은 피크 전력을 갖는 매우 밝은 펄스들의 방출로 인해 달리 발생하는 문제들을 경감시킨다.
또한, 공간-시간 시퀀스는 ToF 데이터 획득을 최적화하기 위해 시스템 동작 과정에서 수정될 수 있다. 예를 들어, 시퀀스는 ToF 데이터를 대략적인 해상도에서 신속하게 획득하도록 원래 선택되고, 이어서 시스템의 전체 시야에 걸쳐 또는 단지 소정의 감소된 관심 영역 내에 있는 더 미세한 해상도에서 ToF 데이터를 획득하도록 수정될 수 있다. 이와 관련하여, "해상도"는 결과적인 깊이 맵 내의 픽셀들의 밀도에 대응하는 횡방향 해상도, 및 측정된 ToF 값들의 정밀도에 대응하는 깊이 해상도 중 어느 하나 또는 둘 모두를 의미할 수 있다. (깊이 해상도는 주어진 방출기에 의해 방출된 펄스들의 수의 함수로서 통계적으로 변하고, 장면 내의 각자의 위치에 대한 ToF 측정을 생성하기 위해 대응하는 픽셀에서 감지된다). 대안적으로 또는 추가적으로, 공간-시간 시퀀스는 부근의 다른 방사 소스들로 인한 가능한 간섭을 방지하기 위해 시간 경과에 따라 스위칭될 수 있다.
도 1은 본 발명의 일 실시예에 따른 깊이 맵핑 디바이스(20)의 개략적 측면도이다. 도시된 실시예에서, 디바이스(20)는 본 예에서 디바이스의 사용자의 신체의 일부인 물체(22)를 포함하는 장면의 깊이 맵들을 생성하는 데 사용된다. 깊이 맵을 생성하기 위해, 조명 조립체(24)가 광의 펄스들을 물체(22)를 향해 지향시키고, 수신기(26)가 물체로부터 반사된 광자들의 ToF를 측정한다. (본 명세서 및 특허청구범위에서 사용되는 바와 같은 용어 "광"은 임의의 가시광선, 적외선 및 자외선 범위들 내에 있을 수 있는 광학 방사를 지칭한다.)
조명 조립체(24)는 전형적으로 펄스형 레이저 어레이(28)와 같은 방출기들의 어레이를 포함한다. 레이저들은, 나노초 또는 서브-나노초 범위의 펄스 지속시간을 갖고 개별 레이저들이 서브-나노초 정밀도로 원하는 공간-시간 시퀀스로 발사될 수 있게 하는 온-보드 제어를 갖는 짧은 펄스들의 광을 방출한다. 어레이(28)는 예를 들어 어드레스가능 VCSEL 어레이를 포함할 수 있다. 수집 광학체(30)는 광을 물체(22)를 향해 지향시킨다. 대안적으로, 다른 펄스 지속시간들 및 반복 주파수들이 애플리케이션 요건들에 따라 사용될 수 있다.
수신기(26)는 물체(22)를 감지 어레이(34) 상에 이미징하여, 조명 조립체(24)에 의해 방출되고 물체(22)로부터 반사된 광자들이 감지 어레이에 입사하도록 하는 대물 광학체(32)를 포함한다. 도시된 실시예에서, 감지 어레이(34)는 센서 칩(36) 및 프로세싱 칩(38)을 포함하며, 이들은 예를 들어 당업계에 알려진 칩 적층 기술들을 사용하여 함께 결합된다. 센서 칩(36)은 행들 및 열들의 매트릭스 내에 배열된 고속 단일 광자 검출기들의 어레이를 포함한다.
일부 실시예들에서, 센서 칩(36) 내의 광검출기들은 SPAD들(40)의 어레이를 포함하며, 이들 각각은 조명 조립체(24)에 의한 펄스들의 방출 후에 SPAD 상의 광자들의 입사 시간들을 나타내는 신호를 출력한다. 프로세싱 칩(38)은 감지 요소들에 각각 결합되는 프로세싱 회로들(42)의 어레이를 포함한다. 칩들(36, 38) 둘 모두는, 수반되는 구동 회로들, 로직 및 메모리와 함께, 본 기술 분야에 공지되어 있는 SPAD 센서 설계들에 기초하여 주지의 CMOS 제조 프로세스들을 이용하여 실리콘 웨이퍼들로부터 제조될 수 있다.
대안으로, 본 명세서에서 기술되는 검출의 설계들 및 원리들은 다른 회로들, 재료들 및 프로세스들을 이용하여 필요한 부분만 약간 수정하여 구현될 수 있다. 예를 들어, 감지 어레이(34)는 당업계에 알려진 바와 같이, 적합한 지지 및 프로세싱 회로들을 갖는 애벌런치 포토다이오드들의 어레이를 포함할 수 있다. 모든 그러한 대안의 구현예들은 본 발명의 범주 내에 있는 것으로 간주된다.
수신기(26)는 (SPAD(40) 또는 이웃 SPAD들의 그룹에 대응하는) 각각의 픽셀에서 또는 동등하게, 맵핑되고 있는 장면 내의 각각의 위치로부터 수신된 광자들의 각자의 도달 시간을 나타내는 신호들을 출력한다. 이들 출력 신호들은 전형적으로 프로세싱 회로들(42)에 의해 생성되는 도달 시간들의 각자의 디지털 값들의 형태이지만, 디지털 및 아날로그 둘 모두의 다른 신호 포맷들이 또한 가능하다. 예를 들어, 일부 실시예들에서, 프로세싱 회로들(42)은 하나 이상의 시간-디지털 변환기(TDC)들을 포함하며, 이는 어레이(28)내의 각자의 방출기들에 의해 방출된 펄스들과 수신기(26)의 대응하는 픽셀에서의 광자의 수신 사이의 지연들을 나타내는 디지털 값들을 출력한다. 회로들(42)은 각각의 픽셀에 대한 각자의 전용 TDC를 포함할 수 있다. 대안적으로, 펄스 방출의 공간-시간 패턴의 적절한 선택들에 대해, TDC들은 다수의 픽셀들에 의해, 예를 들어, 검출기 어레이의 행 당 (또는 동등하게, 열 당) 단일 TDC와 공유될 수 있다.
제어기(44)는 장면 내의 각자의 위치들로의 그리고 각자의 위치들부터의 각각의 픽셀에서 측정된 ToF 또는 동등하게 측정된 깊이 값을 포함하는 출력 깊이 맵을 생성하기 위해, 대응하는 방출기들에 의한 방출의 공간-시간 방출 시퀀스와 동기화하여 개별 픽셀 값들을 판독하고 도달 시간들을 프로세싱한다. 일부 실시예들에서, 공간-시간 시퀀스는 어레이(28) 내의 방출기들 각각이 일련의 펄스들을 방출하도록 구동되고, 감지 어레이(34)가 각각의 방출된 펄스에 응답하여 적절한 픽셀로부터 디지털 도달 시간 값을 출력하도록 정의된다. 제어기(44)는, 각각의 픽셀에 대해, 일련의 펄스들에 응답하여 픽셀로부터 출력된 디지털 값들의 각자의 히스토그램을 축적하고, 예를 들어 히스토그램의 모드를 취함으로써 히스토그램으로부터의 각자의 비행 시간을 도출한다. 이러한 히스토그램 기반 접근법은 광자 도달 시간에서의 통계적 변동들 및 잡음을 평활화하는 데 유용하고, 깊이 해상도는 전형적으로 각각의 픽셀에서 캡처된 펄스들의 수에 따라 증가한다. 제어기(44)는 깊이 맵을 디스플레이 또는 컴퓨터 또는 다른 프로세서와 같은 수신 디바이스(46)에 전달하고, 이는 깊이 맵으로부터 고레벨 정보를 세그먼트화하고 추출하지만 이들 특징부들은 본 개시의 범위를 넘어선다.
본 설명은 제어기와 프로세싱 칩 사이의 기능들의 소정 분할로, 별개의 엔티티들로서 제어기(44) 및 프로세싱 칩(38)과 관련되지만, 실제로 이들 엔티티들 및 그들의 기능들은 동일한 집적 회로 상에서 모놀리식 방식으로 조합 및 구현될 수 있다. 대안적으로, 이들 엔티티들 사이의 기능성의 다른 분할들이 또한 당업자에게 명백할 것이고, 본 발명의 범주 내에 있는 것으로 간주된다. 따라서, 본 설명 및 특허청구범위에서, 용어 "제어기"는 하드웨어 로직에서 수행되든 또는 소프트웨어에서 수행되든, 제어기(44) 및 프로세싱 칩(38)에 기인되는 기능성들의 모든 구현들을 포함하는 것으로 이해되어야 한다.
도 2는 본 발명의 일 실시예에 따른 통합 방출기 어레이(28)를 개략적으로 예시하는 블록도이다. 어레이(28) 내의 VCSEL들(50)은 GaAs 기판과 같은 적합한 III-V 족 반도체 기판(52) 상의 에피택셜 성장에 의해 생성된다. 별도의 단계에서, VCSEL들을 위한 제어 회로들이, 예를 들어, CMOS 공정을 사용하여, 실리콘 기판(54) 상에 형성된다. 이어서, III-V 족 기판(52)이 실리콘 기판(54)에 접합되며, 이때 각각의 VCSEL(50)은 그의 각자의 제어 회로들과 정렬된다. 도시된 실시예에서, 기판(54) 상의 구동 회로들(58)은 VCSEL의 독립적인 제어를 가능하게 하기 위해 별개의 애노드 및/또는 캐소드 접속부를 갖는 각각의 VCSEL(50)에 대한 구동기를 포함한다. 어드레싱 회로(56)는 예를 들어 제어기(44)에 의해 어드레싱 회로(56)에 입력되는 미리 정의된 공간-시간 시퀀스에 따라 VCSEL들을 발사하도록 구동 회로들(58)을 트리거링한다.
이제, 본 발명의 일 실시예에 따른 어레이(28)로부터의 방출의 공간-시간 시퀀스의 특징부들을 개략적으로 예시하는 도 3a 내지 도 3c 및 도 4를 참조한다. 도 3a 내지 도 3c는 방출 시퀀스 내의 연속적인 스테이지들을 도시하는, 방출기 어레이(28)의 정면도들인 반면, 도 4는 방출 시퀀스 내의 펄스들의 타이밍을 도시하는 플롯이다.
도시된 시퀀스에서, 방출기들(50)은 50a, 50b, …, 50j, …로 라벨링된 그룹들로 분할된다. 각각의 그룹 내의 방출기들은 어레이의 상이한 각자의 행들에 속하고, 주어진 열을 따라 이격되어 있다. 각각의 그룹 내의 방출기들은 그들 각자의 펄스들을 동시에 방출하며, 이때 열들 각각 내의 단일 방출기는 임의의 주어진 시간에 동작한다. 도 3a 내지 도 3c 각각에 도시된 3개의 그룹들(예를 들어, 도 3a의 방출기들(50a), 방출기들(50b) 및 방출기들(50c))은 또한 어레이(28) 위에 이격되어 있다. 도시된 시퀀스에서, 예를 들어, 이들 그룹들 각각의 방출기들은 넓게 분리된 상이한 행들 및 열들로 위치된다. 따라서, 이들 방출기들로부터 반사된 광자들을 수용할 감지 어레이(34)의 각자의 픽셀들은 또한 각각의 그룹 내에서 그리고 상이한 그룹들 사이에서 넓게 이격된다.
이러한 공간 분포의 결과로서, 방출기들(50a, 50b, 및 50c)(및 유사하게, 도 3b 및 도 3c의 방출기 그룹들)은 디바이스(20)에 의해 맵핑되고 있는 장면 내의 각자의 위치들로의 그리고 각자의 위치들부터의 펄스들의 비행 시간들보다 실질적으로 짧은 펄스들 사이의 간격을 갖는 그들 각자의 펄스들을 방출하도록 구동될 수 있다. 그룹들 내에 그리고 그들 사이의 방출기들의 넓은 간격은 픽셀들 사이에 상당한 크로스토크가 없을 것이고, 따라서 이 때문에 어떠한 상당한 알리어싱도 없을 것을 보장한다. 예를 들어, 상이한 그룹들로부터 방출된 펄스들 사이의 간격은 도 4에 도시된 바와 같이 평균 비행 시간의 절반 미만, 또는 심지어 실질적으로 더 작을 수 있다. 방출기들의 넓은 간격은 또한 임의의 주어진 시간에 단일 위치에 초점을 맞추기보다는, 어레이(28)로부터 방출되는 전력을 맵핑되고 있는 장면에 걸쳐 넓게 확산시키는 데 유용하다.
도 4는 각각 방출기들(50a, 50b, 및 50c)의 그룹들에 의해 주기적으로 방출되는 광학 펄스들(60a, 60b, 및 60c)의 트레인(62)을 갖는 이러한 종류의 시간 방식의 예를 도시한다. 펄스들(60a, 60b, 60c)은 전형적으로 1 ns 이하의 각자의 펄스 폭을 가지며, 각각의 트레인(62) 내의 펄스들 사이의 간격은 마찬가지로 1 ns 정도이다. 펄스 트레인(62)은 맵핑되고 있는 장면 내의 위치들로의 그리고 그로부터의 예상되는 비행 시간보다 크도록 선택되는 기간 T로, 예를 들어, 인근 타겟들에 대해 10 ns로 반복된다. 방출기들의 상이한 그룹들에 의해 방출되는 펄스들의 엄격한 간격은 듀티 사이클을 증가시키고 어레이(28)의 피크 방출 전력을 감소시키는 데 뿐만 아니라, 디바이스(20)의 측정 처리량을 증가시키는 데 유용하다. 대안적으로, 컴포넌트들의 적용 요건들 및 선택에 따라, 다른 펄스 폭들 및 반복 기간들이 사용될 수 있다.
펄스 트레인(62)은 전형적으로, 제어기(44)가 이들 그룹들 내의 각각의 픽셀에서 광자 도달 시간들의 적합한 히스토그램을 구축할 수 있게 하기 위해, 방출기들(50a, 50b, 및 50c)에 대해 다수 회 반복된다. 각각의 그룹이 레이저 어레이(28)의 행들의 별개의 세트로부터 도시되는 이들 그룹들에서의 방출기들의 선택에 의해, 히스토그램들은 센서 어레이(34)의 각각의 행을 서빙하는 단일의 각자의 TDC를 사용하여 축적될 수 있다. 먼 물체들로 인한 가능한 알리어싱을 식별하기 위해, 반복 기간 T는 디더링될(dithered) 수 있으며, 이 경우에 (이전의 펄스 트레인으로부터의 먼 반사들로 인한) 알리어싱된 히스토그램 피크들이 또한 디더링될 것이고, 이에 기초하여 깊이 맵으로부터 제거될 수 있다.
원하는 일련의 펄스 트레인들(62)을 방출기들(50a, 50b, 및 50c)의 그룹들에 적용한 후에, 유사한 일련의 펄스 트레인들이 전체 어레이(28)가 커버될 때까지 방출기들(50d, 50e, 및 50f)에, 그리고 이어서 방출기(50g, 50h, 및 50j) 등에 적용된다. 대안적으로, 일부 실시예들에서 (예를 들어, 아래의 도 5a/도 5b에 예시된 바와 같이), 공간-시간 시퀀스는 어레이(28) 내의 방출기들(50)의 서브세트만을 사용할 수 있다. 또한 대안적으로, 공간 및 시간에서의 그룹들 사이의 분리가 상이한 픽셀들 사이의 상당한 크로스토크를 회피하기에 충분하기만 하다면, 다른 공간 그룹화들 및 시간 시퀀스들이 적용될 수 있다.
비록 도 3a 내지 도 3c가 방출 그룹들의 순서화된 롤링 시퀀스를 도시하지만, 공간 및/또는 시간 분포에서 불규칙한 패턴들을 포함하는 다른 종류의 공간 패턴들이 어레이(28)에 적용될 수 있다. 그러한 불규칙적인 패턴들(가능하게는 의사 랜덤 패턴들을 포함함)은 디바이스(20) 부근의 다른 깊이 맵핑 디바이스들 및 다른 방사 소스들로 인한 크로스토크 및 간섭을 회피하는 데 유용하다.
일부 실시예들에서, 감지 어레이(34) 내의 SPAD들(40)은 어레이(28) 내의 방출기들(50)을 발사하는 공간-시간 시퀀스와 동기화하여 작동된다. 다시 말하면, 각각의 SPAD는 대응하는 방출기가 동작할 때에만 작동되고, 그렇지 않으면 효과적으로 휴면(dormant)된다. 이러한 동작 모드는 ToF 측정치들에서의 잡음을 감소시키는 데 유용하다. 도 3a 내지 도 3c에 예시된 종류의 공간-시간 시퀀스와 함께 적용될 때, 활성 픽셀들의 영역들 및 그들의 획득 트리거들은 감지 어레이(34)를 가로질러 매끄럽게 롤링할 것이며, 따라서 ToF 값들의 효율적인 저소음 획득을 용이하게 한다.
도 5a 및 도 5b는 본 발명의 일 실시예에 따른 디바이스의 상이한 각자의 동작 모드들을 예시하는, 디바이스(20)에 의해 맵핑되는 장면(70)의 개략도이다. 도 5a는 방출기들(50)의 서브세트(예를 들어, 방출기들에 의해 조명되는 장면(70) 내의 각자의 위치들(72)에 의해 예시된 바와 같은 방출기들의 절반)만이 작동되는 초기 공간-시간 시퀀스를 예시한다. 이러한 공간-시간 시퀀스를 사용하여, 제어기(44)는 대략적인 횡방향 해상도를 갖는 장면의 초기 깊이 맵을 획득하지만, 모든 방출기들이 사용될 경우 달성될 것보다 더 빠른 처리량을 갖는다. 추가적으로 또는 대안적으로, 초기 공간-시간 시퀀스는 방출기들 각각에 의해 방출되는 비교적 적은 수의 펄스들만을 포함할 수 있어서, 초기 깊이 맵의 깊이 해상도는 또한 비교적 대략적이다.
초기 공간-시간 시퀀스에 따라 비행 시간들을 측정한 후에, 제어기(44)는 도 5b 예시된 바와 같이 수정된 공간-시간 시퀀스에 따라 비행 시간을 재측정하도록 진행한다. 여기서, 예를 들어, 초기 깊이 맵을 분석하는 프로세서는 장면(70)에서 관심 물체를 인식했을 수 있고, 따라서 제어기(44)에게 관심 물체를 포함하는 장면 내의 제한된 영역(74)에 걸쳐 더 미세한 해상도로 비행 시간들을 획득하도록 지시할 수 있다. 따라서, 영역(74) 내에서 빔들을 방출하는 모든 방출기들(50)이 작동되어, 디바이스(20)가 각자의 조밀하게 이격된 위치들(76)에서 ToF 값들을 획득할 수 있게 하는 반면, 이 영역 밖의 방출기들은 사용되지 않는다. 추가적으로 또는 대안적으로, 수정된 공간-시간 시퀀스는 방출기 조명 영역(74) 각각에 의해 더 많은 수의 펄스들을 포함할 수 있다. 영역(74)에 대한 유효 시야를 감소시킴으로써, 디바이스(20)는 높은 처리량을 유지하면서 횡방향 및/또는 깊이 치수에서 더 미세한 해상도를 갖는 로컬 깊이 맵을 생성할 수 있다.
도 5b에 예시된 수정된 공간-시간 시퀀스에서, 영역(74) 밖의 방출기들(50)은 관심 대상이 아닌 장면(70)의 영역들 상의 디바이스(20)의 자원들(예컨대 어레이(28)로부터의 출력 전력)을 낭비하는 것을 피하기 위해 작동되지 않는다. 이러한 종류의 자원들의 보존은 사용가능한 ToF 값들을 제공할 수 없다면 영역(74) 내에서도 방출기들(50)을 비활성화시킴으로써 더 향상될 수 있다. 예를 들어, 제어기(74)는, 감지 어레이(34)가 포화로 인해 이러한 영역에서 사용가능한 ToF 값들을 제공할 수 없다고 결정할 때, 장면(70) 내의 밝은 스팟(78)을 조사하는 방출기(또는 방출기들)를 비활성화시킬 수 있다.
따라서, 일반적으로 말하면, 각각의 방출기에 의해 적용되는 펄스들의 수 및 방출기들의 선택을 포함하는 공간-시간 시퀀스의 파라미터들은 시야, 해상도 및 처리량 사이의 최적의 트레이드오프(tradeoff)를 제공하도록 선택되고 수정될 수 있다. 전술된 실시예들은, 구체성 및 명료함을 위해, 이러한 접근법을 구현할 수 있는 특정 종류의 디바이스 아키텍처를 참조하지만, 본 발명의 원리들은, 상기 개시를 읽은 후에 당업자에게 명백할 바와 같이 다른 제어가능한 방출기 및 센서 어레이들을 사용하여 유사하게 적용될 수 있다. 모든 그러한 대안의 구현예들은 본 발명의 범주 내에 있는 것으로 간주된다.
따라서, 전술된 실시예들은 예로서 인용되어 있고 본 고안은 이상의 본 명세서에서 특히 도시되고 설명된 것으로 제한되지 않는다는 것이 이해될 것이다. 오히려, 본 발명의 범주는 위에서 기술된 다양한 특징들의 조합들 및 하위조합들 양측 모두를 포함할 뿐만 아니라, 전술된 설명을 읽을 때 당업자에게 생각이 떠오를 것이고 종래 기술에서 개시되지 않은 변형들 및 변경들도 포함한다.

Claims (20)

  1. 광학 감지 장치로서,
    방출기들의 어레이 - 상기 방출기들의 어레이는 상기 어레이에 인가되는 제어 입력에 응답하여 상이한 각자의 시간들에 광학 방사의 펄스들을 방출하도록 구성됨 -;
    복수의 검출기들을 포함하는 수신기 - 상기 복수의 검출기들은 상기 검출기들에서의 광자들의 도달 시간들을 나타내는 신호들을 출력하도록 구성됨 -;
    상기 방출기들로부터의 상기 광학 방사를 장면 내의 각자의 위치들 상으로 투사하고 상기 각자의 위치들을 상기 수신기의 대응하는 픽셀들 상에 이미징하도록 구성되는 광학체 - 각각의 픽셀은 상기 검출기들 중 하나 이상을 포함함 -; 및
    미리 정의된 공간-시간 시퀀스에서 상기 출력 펄스들을 방출하도록 상기 방출기들을 제어하고 상기 장면 내의 상기 각자의 위치들로의 그리고 상기 각자의 위치들로부터의 펄스들의 각자의 비행 시간들을 측정하기 위해 상기 공간-시간 시퀀스와 동기화하여 대응하는 픽셀들에 의해 출력된 신호들을 수집 및 프로세싱하도록 결합되는 제어기를 포함하는, 광학 감지 장치.
  2. 제1항에 있어서, 상기 방출기들은 수직-공동 표면-방출 레이저(VCSEL)들을 포함하는, 광학 감지 장치.
  3. 제1항에 있어서, 상기 검출기들은 단일 광자 센서들을 포함하고, 상기 수신기는 적어도 하나의 시간-디지털 변환기(TDC)를 포함하고, 상기 시간-디지털 변환기는 상기 방출기들 중 하나에 의해 방출된 펄스와 상기 수신기의 대응하는 픽셀에서의 광자의 수신 사이의 지연을 나타내는 디지털 값을 출력하는, 광학 감지 장치.
  4. 제3항에 있어서, 상기 미리 정의된 공간-시간 시퀀스에 따라, 상기 방출기들 각각은 일련의 펄스들을 방출하도록 구동되고, 상기 제어기는, 각각의 픽셀에 대해, 상기 일련의 펄스들에 응답하여 상기 적어도 하나의 TDC에 의해 출력된 디지털 값들의 각자의 히스토그램을 축적하고 상기 히스토그램으로부터 각자의 비행 시간을 도출하도록 구성되는, 광학 감지 장치.
  5. 제4항에 있어서, 상기 제어기는 상기 방출기들 각각에 의해 방출되는 상기 일련의 펄스들 내의 펄스들의 수를 변화시킴으로써 상기 공간-시간 시퀀스를 수정하도록 구성되는, 광학 감지 장치.
  6. 제3항에 있어서, 상기 방출기들 및 상기 단일 광자 센서들 둘 모두는 다수의 행들 및 다수의 열들을 포함하는 각자의 매트릭스들 내에 배열되고, 상기 적어도 하나의 TDC는 다수의 TDC들을 포함하고, 각각의 TDC는 상기 단일 광자 센서들의 상이한 각자의 행에 결합되고,
    상기 공간-시간 시퀀스는, 상기 어레이의 상이한 각자의 행들 내의 적어도 제1 및 제2 방출기들이 상기 펄스들을 동시에 방출하는 반면, 상기 행들 각각 내의 단일 방출기 이외에는 임의의 주어진 시간에 동작하지 않도록 정의되는, 광학 감지 장치.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서, 상기 공간-시간 시퀀스는, 적어도 제1 및 제2 방출기들이 상기 장면 내의 상기 각자의 위치들로의 그리고 상기 각자의 위치들로부터의 상기 펄스들의 평균 비행 시간들의 절반보다 작은, 상기 펄스들 사이의 간격을 갖는 각자의 제1 및 제2 펄스들을 방출하도록 정의되는, 광학 감지 장치.
  8. 제7항에 있어서, 상기 적어도 제1 및 제2 방출기들은 상기 방출기들의 제1 및 제2 그룹들에 각각 속하여, 상기 그룹들 각각의 상기 방출기들이 상기 어레이 위에 이격되고 상기 펄스들을 동시에 방출하는, 광학 감지 장치.
  9. 제1항 내지 제6항 중 어느 한 항에 있어서, 상기 제어기는, 초기 공간-시간 시퀀스에 따라 제1 비행 시간을 측정한 후에, 상기 공간-시간 시퀀스를 수정하고 상기 수정된 공간-시간 시퀀스에 따라 제2 비행 시간들을 측정하도록 구성되는, 광학 감지 장치.
  10. 제9항에 있어서, 상기 공간-시간 시퀀스는 상기 제1 비행 시간들의 해상도보다 더 미세한 해상도로 상기 제2 비행 시간들을 측정하도록 수정되는, 광학 감지 장치.
  11. 광학 감지 방법으로서,
    미리 정의된 공간-시간 시퀀스에서 상이한 각자의 시간들에 방출기들의 어레이로부터 광학 방사의 펄스들을 방출하는 단계;
    상기 방출기들로부터 장면 내의 각자의 위치들로 상기 광학 방사를 투사하는 단계;
    상기 각자의 위치들을 수신기의 대응하는 픽셀들 상에 이미징하는 단계;
    상기 대응하는 픽셀들에서 광자들의 도달 횟수를 나타내는 신호들을 상기 수신기로부터 출력하는 단계; 및
    상기 장면 내의 상기 각자의 위치들로의 그리고 상기 각자의 위치들로부터의 펄스들의 각자의 비행 시간들을 측정하기 위해 상기 공간-시간 시퀀스와 동기화하여 대응하는 픽셀들에 의해 출력된 신호들을 수집 및 프로세싱하는 단계를 포함하는, 방법.
  12. 제11항에 있어서, 상기 방출기들은 수직-공동 표면-방출 레이저(VCSEL)들을 포함하고, 상기 펄스들은 1 ns 미만인 지속 시간을 갖는, 방법.
  13. 제11항에 있어서, 상기 수신기는 단일 광자 센서들의 매트릭스를 포함하고, 상기 신호들을 출력하는 단계는 상기 방출기들 중 하나에 의해 방출된 펄스와 상기 수신기의 대응하는 픽셀에서의 광자의 수신 사이의 지연을 나타내는 디지털 값을 출력하는 단계를 포함하는, 방법.
  14. 제13항에 있어서,
    상기 미리 정의된 공간-시간 시퀀스에 따라, 상기 방출기들 각각은 일련의 펄스들을 방출하도록 구동되고, 상기 신호들을 수집 및 프로세싱하는 단계는 각각의 픽셀에 대해, 상기 일련의 펄스들에 응답하여 상기 지연을 나타내는 디지털 값들의 각자의 히스토그램을 축적하는 단계 및 상기 히스토그램으로부터 각자의 비행 시간을 도출하는 단계를 포함하는, 방법.
  15. 제14항에 있어서, 상기 방출기들 각각에 의해 방출되는 상기 일련의 펄스들 내의 펄스들의 수를 변화시킴으로써 상기 공간-시간 시퀀스를 수정하는 단계를 포함하는, 방법.
  16. 제13항에 있어서, 상기 방출기들 및 상기 단일 광자 센서들 둘 모두는 다수의 행들 및 다수의 열들을 포함하는 각자의 매트릭스들 내에 배열되고, 상기 디지털 값을 출력하는 단계는 상기 단일 광자 센서들의 각각의 행으로부터의 상기 디지털 값을 판독하기 위해 각자의 시간-디지털 변환기(TDC)를 결합하는 단계를 포함하고,
    상기 공간-시간 시퀀스는, 상기 어레이의 상이한 각자의 행들 내의 적어도 제1 및 제2 방출기들이 상기 펄스들을 동시에 방출하는 반면, 상기 행들 각각 내의 단일 방출기 이외에는 임의의 주어진 시간에 동작하지 않도록 정의되는, 방법.
  17. 제11항 내지 제16항 중 어느 한 항에 있어서, 상기 공간-시간 시퀀스는, 적어도 제1 및 제2 방출기들이 상기 장면 내의 상기 각자의 위치들로의 그리고 상기 각자의 위치들로부터의 상기 펄스들의 평균 비행 시간들의 절반보다 작은, 상기 펄스들 사이의 간격을 갖는 각자의 제1 및 제2 펄스들을 방출하도록 정의되는, 방법.
  18. 제17항에 있어서, 상기 적어도 제1 및 제2 방출기들은 상기 방출기들의 제1 및 제2 그룹들에 각각 속하여, 상기 그룹들 각각의 상기 방출기들이 상기 어레이 위에 이격되고 상기 펄스들을 동시에 방출하는, 방법.
  19. 제11항 내지 제16항 중 어느 한 항에 있어서, 초기 공간-시간 시퀀스에 따라 제1 비행 시간을 측정한 후에, 상기 공간-시간 시퀀스를 수정하고 상기 수정된 공간-시간 시퀀스에 따라 제2 비행 시간들을 측정하는 단계를 포함하는, 방법.
  20. 제19항에 있어서, 상기 공간-시간 시퀀스는 상기 제1 비행 시간들의 해상도보다 더 미세한 해상도로 상기 제2 비행 시간들을 측정하도록 수정되는, 방법.
KR1020207015906A 2017-12-18 2017-12-18 방출기들의 어드레스가능 어레이를 사용하는 비행 시간 감지 KR102403544B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2017/066919 WO2019125349A1 (en) 2017-12-18 2017-12-18 Time-of-flight sensing using an addressable array of emitters

Publications (2)

Publication Number Publication Date
KR20200085297A true KR20200085297A (ko) 2020-07-14
KR102403544B1 KR102403544B1 (ko) 2022-05-30

Family

ID=60957452

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207015906A KR102403544B1 (ko) 2017-12-18 2017-12-18 방출기들의 어드레스가능 어레이를 사용하는 비행 시간 감지

Country Status (5)

Country Link
US (1) US11852727B2 (ko)
EP (1) EP3704510B1 (ko)
KR (1) KR102403544B1 (ko)
CN (1) CN111465870B (ko)
WO (1) WO2019125349A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220037090A (ko) * 2020-09-17 2022-03-24 국방과학연구소 거리 측정 장치 및 방법

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110187878A1 (en) 2010-02-02 2011-08-04 Primesense Ltd. Synchronization of projected illumination with rolling shutter of image sensor
US11228758B2 (en) 2016-01-22 2022-01-18 Peking University Imaging method and device
CN109803096B (zh) * 2019-01-11 2020-08-25 北京大学 一种基于脉冲信号的显示方法和系统
WO2019200831A1 (zh) * 2018-04-16 2019-10-24 西安飞芯电子科技有限公司 一种信号分离方法、像素单元、像素阵列
CA3152664C (en) * 2019-08-29 2023-02-07 National Research Council Of Canada Lidar system and method for determining distances of targets
DE102019124144A1 (de) * 2019-09-09 2021-03-11 pmdtechnologies ag Entfernungsmesssystem
CN110780312B (zh) * 2019-10-15 2022-10-21 深圳奥锐达科技有限公司 一种可调距离测量系统及方法
GB2588827B (en) * 2019-11-11 2022-10-12 Advanced Risc Mach Ltd Depth processing
US11733359B2 (en) 2019-12-03 2023-08-22 Apple Inc. Configurable array of single-photon detectors
EP4042203A4 (en) 2020-02-10 2023-05-31 Hesai Technology Co., Ltd. ADAPTIVE TRANSMITTER AND RECEIVER FOR LIDAR SYSTEMS
DE102020110052A1 (de) 2020-04-09 2021-10-14 Hybrid Lidar Systems Ag Vorrichtung zur erfassung von bilddaten
WO2022111501A1 (zh) * 2020-11-27 2022-06-02 宁波飞芯电子科技有限公司 一种距离信息获取系统
CN112764048B (zh) * 2020-12-30 2022-03-18 深圳市灵明光子科技有限公司 基于飞行时间的寻址和测距方法及测距系统
CN112799097B (zh) * 2021-04-14 2023-11-28 深圳阜时科技有限公司 深度图和灰度图的获取方法、深度相机、以及电子设备
US20220404475A1 (en) * 2021-06-16 2022-12-22 Apple Inc. Single-chip optical transceiver
US11681028B2 (en) 2021-07-18 2023-06-20 Apple Inc. Close-range measurement of time of flight using parallax shift
CN115902835B (zh) * 2021-09-30 2024-02-27 深圳市速腾聚创科技有限公司 一种雷达数据收发装置、测距方法及激光雷达
CN116338631B (zh) 2021-12-23 2023-12-12 深圳市速腾聚创科技有限公司 控制激光雷达的方法、装置、电子设备及存储介质
EP4202499A1 (en) * 2021-12-23 2023-06-28 Suteng Innovation Technology Co., Ltd Lidar anti-interference method and apparatus, storage medium, and lidar
US20240071093A1 (en) * 2022-08-23 2024-02-29 Waymo Llc Time-Division Multiple Access Scanning for Crosstalk Mitigation in Light Detection and Ranging (Lidar) Devices

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1990008946A1 (en) * 1989-01-31 1990-08-09 York Limited Optical detection apparatus for counting optical photons
KR101318951B1 (ko) * 2011-02-28 2013-10-17 한국과학기술원 듀얼 가이거 모드 어밸런치 광다이오드를 운용하는 스캐닝 3차원 영상화 펄스 레이저 레이더 시스템 및 방법
EP2827175A2 (en) * 2013-07-12 2015-01-21 Princeton Optronics, Inc. 2-D planar VCSEL source for 3-D imaging
US20150131080A1 (en) * 2013-11-12 2015-05-14 Facet Technology Corp. Methods and Apparatus for Array Based Lidar Systems with Reduced Interference
US20170219695A1 (en) * 2016-01-31 2017-08-03 Velodyne Lidar, Inc. Multiple Pulse, LIDAR Based 3-D Imaging

Family Cites Families (231)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6384903B1 (en) 1977-02-28 2002-05-07 Bae Systems Information And Electronic Systems Integration, Inc. Range gated remote measurement utilizing two-photon absorption
US4623237A (en) 1984-07-07 1986-11-18 Canon Kabushiki Kaisha Automatic focusing device
US4757200A (en) 1986-07-28 1988-07-12 Visidyne, Inc. Pulsed radiation detection system
JPH02287113A (ja) 1989-04-27 1990-11-27 Asahi Optical Co Ltd 測距装置
US5373148A (en) 1989-10-30 1994-12-13 Symbol Technologies, Inc. Optical scanners with scan motion damping and orientation of astigmantic laser generator to optimize reading of two-dimensionally coded indicia
US5164823A (en) 1990-12-21 1992-11-17 Kaman Aerospace Corporation Imaging lidar system employing multipulse single and multiple gating for single and stacked frames
JPH0567195A (ja) 1991-09-05 1993-03-19 Matsushita Electric Ind Co Ltd 形状測定装置
US5270780A (en) 1991-09-13 1993-12-14 Science Applications International Corporation Dual detector lidar system and method
CA2605339C (en) 1993-04-12 2008-09-30 The Regents Of The University Of California Ultra-wideband radar motion sensor
JP3240835B2 (ja) 1994-06-09 2001-12-25 株式会社日立製作所 車両用距離計測装置
JPH09197045A (ja) 1996-01-24 1997-07-31 Nissan Motor Co Ltd 車両用レーダ装置
JPH10170637A (ja) 1996-12-16 1998-06-26 Omron Corp 光走査装置
JPH1163920A (ja) 1997-08-26 1999-03-05 Matsushita Electric Works Ltd 光走査式変位測定装置
JP3832101B2 (ja) 1998-08-05 2006-10-11 株式会社デンソー 距離測定装置
IT1316793B1 (it) 2000-03-09 2003-05-12 Milano Politecnico Circuito monolitico di spegnimento attivo e ripristino attivo perfotodiodi a valanga
JP4595197B2 (ja) 2000-12-12 2010-12-08 株式会社デンソー 距離測定装置
US6771103B2 (en) 2001-03-14 2004-08-03 Denso Corporation Time measurement apparatus, distance measurement apparatus, and clock signal generating apparatus usable therein
US6486827B2 (en) 2001-04-18 2002-11-26 Raytheon Company Sparse frequency waveform radar system and method
JP4457525B2 (ja) 2001-06-11 2010-04-28 株式会社デンソー 距離測定装置
US7187445B2 (en) 2001-07-19 2007-03-06 Automotive Distance Control Systems Gmbh Method and apparatus for optically scanning a scene
US7126218B1 (en) 2001-08-07 2006-10-24 Amkor Technology, Inc. Embedded heat spreader ball grid array
US7899339B2 (en) 2002-07-30 2011-03-01 Amplification Technologies Inc. High-sensitivity, high-resolution detector devices and arrays
US7312856B2 (en) 2002-09-12 2007-12-25 Lockheed Martin Corporation Programmable pulse capture device with automatic gain control
WO2004023991A1 (en) 2002-09-16 2004-03-25 Joule Microsystems Canada Inc. Optical system and use thereof for detecting patterns in biological tissue
GB2395261A (en) 2002-11-11 2004-05-19 Qinetiq Ltd Ranging apparatus
AU2003295944A1 (en) 2002-11-26 2005-02-04 James F. Munro An apparatus for high accuracy distance and velocity measurement and methods thereof
US7428997B2 (en) 2003-07-29 2008-09-30 Microvision, Inc. Method and apparatus for illuminating a field-of-view and capturing an image
DE10361870B4 (de) 2003-12-29 2006-05-04 Faro Technologies Inc., Lake Mary Laserscanner und Verfahren zum optischen Abtasten und Vermessen einer Umgebung des Laserscanners
US7843379B2 (en) 2004-11-15 2010-11-30 Nanotron Technologies Gmbh Symmetrical multi-path method for determining the distance between two transmitter-receivers
DE102005027208B4 (de) 2004-11-16 2011-11-10 Zoller & Fröhlich GmbH Verfahren zur Ansteuerung eines Laserscanners
EP1842082A2 (en) 2005-01-20 2007-10-10 Elbit Systems Electro-Optics Elop Ltd. Laser obstacle detection and display
US7283213B2 (en) 2005-02-08 2007-10-16 Canesta, Inc. Method and system to correct motion blur and reduce signal transients in time-of-flight sensor systems
US9002511B1 (en) 2005-10-21 2015-04-07 Irobot Corporation Methods and systems for obstacle detection using structured light
US7812301B2 (en) 2005-10-28 2010-10-12 Sony Corporation Solid-state imaging device, method of driving solid-state imaging device and imaging apparatus
US7303005B2 (en) 2005-11-04 2007-12-04 Graftech International Holdings Inc. Heat spreaders with vias
US8355117B2 (en) 2005-12-21 2013-01-15 Ecole Polytechnique Federale De Lausanne Method and arrangement for measuring the distance to an object
DE102006013290A1 (de) 2006-03-23 2007-09-27 Robert Bosch Gmbh Vorrichtung zur optischen Distanzmessung sowie Verfahren zum Betrieb einer solchen Vorrichtung
US7405812B1 (en) 2006-05-18 2008-07-29 Canesta, Inc. Method and system to avoid inter-system interference for phase-based time-of-flight systems
EP1860462A1 (de) 2006-05-23 2007-11-28 Leica Geosystems AG Distanzmessverfahren und Distanzmesser zur Erfassung der räumlichen Abmessung eines Zieles
GB2439962B (en) 2006-06-14 2008-09-24 Exitech Ltd Process and apparatus for laser scribing
CN101688774A (zh) 2006-07-13 2010-03-31 威力登音响公司 高精确度激光雷达系统
WO2008113067A2 (en) 2007-03-15 2008-09-18 Johns Hopkins University Deep submicron and nano cmos single photon photodetector pixel with event based circuits for readout data-rate reduction
CN201054040Y (zh) 2007-05-21 2008-04-30 一品光学工业股份有限公司 微机电摆动激光扫描装置
US7652252B1 (en) 2007-10-08 2010-01-26 Hrl Laboratories, Llc Electronically tunable and reconfigurable hyperspectral photon detector
US8332134B2 (en) 2008-04-24 2012-12-11 GM Global Technology Operations LLC Three-dimensional LIDAR-based clear path detection
WO2010042253A2 (en) 2008-04-30 2010-04-15 Board Of Regents, The University Of Texas System An apparatus and method for noninvasive evalution of a target versus a non- target
US20090273770A1 (en) 2008-04-30 2009-11-05 Honeywell International Inc. Systems and methods for safe laser imaging, detection and ranging (lidar) operation
DE102008031681A1 (de) 2008-07-04 2010-01-14 Eads Deutschland Gmbh LIDAR-Verfahren zur Messung von Geschwindigkeiten und LIDAR-Vorrichtung mit zeitgesteuerter Detektion
US8026471B2 (en) 2008-07-23 2011-09-27 Princeton Lightwave, Inc. Single-photon avalanche detector-based focal plane array
JP5585903B2 (ja) 2008-07-30 2014-09-10 国立大学法人静岡大学 距離画像センサ、及び撮像信号を飛行時間法により生成する方法
IL200332A0 (en) 2008-08-19 2010-04-29 Rosemount Aerospace Inc Lidar system using a pseudo-random pulse sequence
US9554770B2 (en) 2008-09-29 2017-01-31 Siemens Medical Solutions Usa, Inc. High pulse repetition frequency for detection of tissue mechanical property with ultrasound
US20100096459A1 (en) 2008-10-16 2010-04-22 Vladimir Gurevich Electro-optical reader with extended working range
IT1392366B1 (it) 2008-12-17 2012-02-28 St Microelectronics Rousset Fotodiodo operante in modalita' geiger con resistore di soppressione integrato e controllabile, schiera di fotodiodi e relativo procedimento di fabbricazione
CN104111446A (zh) 2009-01-27 2014-10-22 Xyz互动技术公司 用于单个和/或多个设备的测距、定向和/或定位的方法和装置
US8786682B2 (en) 2009-03-05 2014-07-22 Primesense Ltd. Reference image techniques for three-dimensional sensing
US8447563B2 (en) 2009-03-31 2013-05-21 The United States Of America As Represented By The Secretary Of The Navy Method and system for determination of detection probability or a target object based on a range
KR101640463B1 (ko) 2009-05-19 2016-07-18 삼성전자 주식회사 휴대 단말기의 운용 방법 및 이를 지원하는 휴대 단말기
US8743176B2 (en) * 2009-05-20 2014-06-03 Advanced Scientific Concepts, Inc. 3-dimensional hybrid camera and production system
US8675181B2 (en) 2009-06-02 2014-03-18 Velodyne Acoustics, Inc. Color LiDAR scanner
US8766808B2 (en) 2010-03-09 2014-07-01 Flir Systems, Inc. Imager with multiple sensor arrays
CN101923173B (zh) 2009-06-10 2014-10-01 圣戈本陶瓷及塑料股份有限公司 闪烁体以及检测器组件
US9417326B2 (en) 2009-06-22 2016-08-16 Toyota Motor Europe Nv/Sa Pulsed light optical rangefinder
US8319170B2 (en) 2009-07-10 2012-11-27 Motorola Mobility Llc Method for adapting a pulse power mode of a proximity sensor
DE102009029372A1 (de) 2009-09-11 2011-03-24 Robert Bosch Gmbh Messvorrichtung zur Messung einer Entfernung zwischen der Messvorrichtung und einem Zielobjekt mit Hilfe optischer Messstrahlung
US8502926B2 (en) 2009-09-30 2013-08-06 Apple Inc. Display system having coherent and incoherent light sources
DE102009045323A1 (de) 2009-10-05 2011-04-07 Robert Bosch Gmbh Optisches Entfernungsmessgerät mit Kalibrierungseinrichtung
JP2011089874A (ja) 2009-10-22 2011-05-06 Toyota Central R&D Labs Inc 距離画像データ取得装置
US8390791B2 (en) 2009-11-30 2013-03-05 General Electric Company Light detection and ranging system
US20110187878A1 (en) 2010-02-02 2011-08-04 Primesense Ltd. Synchronization of projected illumination with rolling shutter of image sensor
US8279418B2 (en) 2010-03-17 2012-10-02 Microsoft Corporation Raster scanning for depth detection
DE102010003843A1 (de) 2010-04-12 2011-10-13 Robert Bosch Gmbh Entfernungsmessgerät mit homogenisierender Messauswertung
JP5633181B2 (ja) 2010-05-07 2014-12-03 株式会社ニコン デプスマップ出力装置
LU91688B1 (en) 2010-05-17 2011-11-18 Iee Sarl Scanning 3D imager
US8594425B2 (en) 2010-05-31 2013-11-26 Primesense Ltd. Analysis of three-dimensional scenes
DE102011079589A1 (de) 2010-08-11 2012-02-16 Samsung Electronics Co., Ltd. Einheitspixel für ein Photodetektionsbauelement
US8736818B2 (en) 2010-08-16 2014-05-27 Ball Aerospace & Technologies Corp. Electronically steered flash LIDAR
US8836250B2 (en) 2010-10-01 2014-09-16 Accuray Incorporated Systems and methods for cargo scanning and radiotherapy using a traveling wave linear accelerator based x-ray source using current to modulate pulse-to-pulse dosage
GB2485995B (en) 2010-11-30 2014-01-01 St Microelectronics Res & Dev Improved proximity sensor and associated method, computer readable medium and firmware
GB2486165A (en) 2010-11-30 2012-06-13 St Microelectronics Res & Dev Oven using a Single Photon Avalanche Diode (SPAD) array
US8803952B2 (en) 2010-12-20 2014-08-12 Microsoft Corporation Plural detector time-of-flight depth mapping
AT510296B1 (de) 2010-12-21 2012-03-15 Riegl Laser Measurement Sys Verfahren zur entfernungsmessung mittels laserimpulsen
EP2469301A1 (en) * 2010-12-23 2012-06-27 André Borowski Methods and devices for generating a representation of a 3D scene at very high speed
EP2477043A1 (en) 2011-01-12 2012-07-18 Sony Corporation 3D time-of-flight camera and method
JP5834416B2 (ja) 2011-02-01 2015-12-24 セイコーエプソン株式会社 画像形成装置
DE102011005740A1 (de) 2011-03-17 2012-09-20 Robert Bosch Gmbh Messvorrichtung zur Messung einer Entfernung zwischen der Messvorrichtung und einem Zielobjekt mit Hilfe optischer Messstrahlung
DE102011005746A1 (de) 2011-03-18 2012-09-20 Robert Bosch Gmbh Messvorrichtung zur mehrdimensionalen Vermessung eines Zielobjekts
JP6034364B2 (ja) 2011-04-05 2016-11-30 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 向上された時間精度を有する時間−デジタル変換を用いる検出器アレイ
CN103649673A (zh) 2011-04-15 2014-03-19 法罗技术股份有限公司 激光跟踪器中的增强的位置检测器
WO2012147082A1 (en) 2011-04-25 2012-11-01 Generic Imaging Ltd. System and method for linearization of multi-camera flat panel x-ray detectors
US9137463B2 (en) 2011-05-12 2015-09-15 Microsoft Technology Licensing, Llc Adaptive high dynamic range camera
EP2535755A1 (en) 2011-06-14 2012-12-19 Ecole Polytechnique Fédérale de Lausanne (EPFL) Cumulant microscopy
US11231502B2 (en) 2011-06-30 2022-01-25 The Regents Of The University Of Colorado Remote measurement of shallow depths in semi-transparent media
DE102011107645A1 (de) 2011-07-12 2013-01-17 Leica Microsystems Cms Gmbh Vorrichtung und Verfahren zum Detektieren von Licht
DE102011081561B4 (de) 2011-08-25 2024-06-13 pmdtechnologies ag Lichtlaufzeitkamerasystem mit Signalpfadüberwachung
WO2013028691A1 (en) 2011-08-25 2013-02-28 Georgia Tech Research Corporation Gas sensors and methods of preparation thereof
US9538987B2 (en) 2011-09-28 2017-01-10 General Electric Company System and method for ultrasound imaging
WO2013058978A1 (en) 2011-10-17 2013-04-25 Kimmel Zebadiah M Method and apparatus for sizing and fitting an individual for apparel, accessories, or prosthetics
WO2013059490A2 (en) 2011-10-18 2013-04-25 Uwm Research Foundation, Inc. Fiber-optic sensors for real-time monitoring
JP2013113669A (ja) 2011-11-28 2013-06-10 Mitsubishi Electric Corp レーザレーダ装置
US9024246B2 (en) 2011-12-19 2015-05-05 Princeton Lightwave, Inc. Two-state negative feedback avalanche diode having a control element for determining load state
FR2984522B1 (fr) 2011-12-20 2014-02-14 St Microelectronics Grenoble 2 Dispositif de detection de la proximite d'un objet, comprenant des photodiodes spad
US9052356B2 (en) 2012-02-15 2015-06-09 International Business Machines Corporation Embedded photon emission calibration (EPEC)
US8989596B2 (en) 2012-03-06 2015-03-24 Northrop Grumman Systems Corporation Multiple sensor optical communication systems and methods
US9109888B2 (en) 2012-03-21 2015-08-18 Honda Motor Co., Ltd. Distance measuring system
US9335220B2 (en) 2012-03-22 2016-05-10 Apple Inc. Calibration of time-of-flight measurement using stray reflections
US20130258099A1 (en) 2012-03-29 2013-10-03 Samsung Electronics Co., Ltd. Depth Estimation Device And Operating Method Using The Depth Estimation Device
US9723233B2 (en) 2012-04-18 2017-08-01 Brightway Vision Ltd. Controllable gated sensor
KR102038533B1 (ko) 2012-06-14 2019-10-31 한국전자통신연구원 레이저 레이더 시스템 및 목표물 영상 획득 방법
US20130342835A1 (en) 2012-06-25 2013-12-26 California Institute Of Technology Time resolved laser raman spectroscopy using a single photon avalanche diode array
GB2504291A (en) 2012-07-24 2014-01-29 St Microelectronics Ltd A proximity and gesture detection module
EP2708914A1 (de) 2012-09-18 2014-03-19 Sick Ag Optoelektronischer Sensor und Verfahren zur Erfassung einer Tiefenkarte
KR102117734B1 (ko) 2012-10-23 2020-06-01 애플 인크. 분광기를 이용하여 특수 설계된 패턴 폐루프 보정에 의한 고 정확도의 영상 색도계
KR102010807B1 (ko) 2012-12-06 2019-08-14 삼성전자 주식회사 단말 대 단말 통신에서 정보를 교환하는 방법 및 장치
GB201300334D0 (en) 2013-01-09 2013-02-20 St Microelectronics Ltd Sensor circuit
GB2510890A (en) 2013-02-18 2014-08-20 St Microelectronics Res & Dev Method and apparatus
KR102048361B1 (ko) 2013-02-28 2019-11-25 엘지전자 주식회사 거리 검출 장치, 및 이를 구비하는 영상처리장치
DE202013101039U1 (de) 2013-03-11 2014-03-12 Sick Ag Optoelektronischer Sensor zur Entfernungsmessung
US9182278B2 (en) 2013-03-14 2015-11-10 Sciaps, Inc. Wide spectral range spectrometer
US9516248B2 (en) 2013-03-15 2016-12-06 Microsoft Technology Licensing, Llc Photosensor having enhanced sensitivity
WO2014141115A2 (en) 2013-03-15 2014-09-18 Primesense Ltd. Depth scanning with multiple emitters
JP6383516B2 (ja) 2013-04-19 2018-08-29 ライトスピン テクノロジーズ、インク. 集積アバランシェ・フォトダイオード・アレイ
GB2513408B (en) 2013-04-26 2017-12-13 Toshiba Res Europe Limited A photon detector and a photon detection method
US10269104B2 (en) 2013-04-29 2019-04-23 Nokia Technologies Oy Method and apparatus for fusing distance data from a distance sensing camera with an image
GB2514576A (en) 2013-05-29 2014-12-03 St Microelectronics Res & Dev Methods and apparatus
US9268012B2 (en) 2013-07-12 2016-02-23 Princeton Optronics Inc. 2-D planar VCSEL source for 3-D imaging
GB2520232A (en) 2013-08-06 2015-05-20 Univ Edinburgh Multiple Event Time to Digital Converter
US10061028B2 (en) 2013-09-05 2018-08-28 Texas Instruments Incorporated Time-of-flight (TOF) assisted structured light imaging
US9443310B2 (en) 2013-10-09 2016-09-13 Microsoft Technology Licensing, Llc Illumination modules that emit structured light
US8925814B1 (en) 2013-10-09 2015-01-06 Symbol Technologies, Inc. Apparatus for and method of monitoring output power of a laser beam during reading of targets
US10063844B2 (en) 2013-10-17 2018-08-28 Microsoft Technology Licensing, Llc. Determining distances by probabilistic time of flight imaging
WO2015075926A1 (ja) 2013-11-20 2015-05-28 パナソニックIpマネジメント株式会社 測距撮像システム
US9210350B2 (en) 2013-12-09 2015-12-08 Omnivision Technologies, Inc. Low power imaging system with single photon avalanche diode photon counters and ghost image reduction
US9625580B2 (en) 2014-01-03 2017-04-18 Princeton Lightwave, Inc. LiDAR system comprising a single-photon detector
US9312401B2 (en) 2014-01-15 2016-04-12 Omnivision Technologies, Inc. Single photon avalanche diode imaging sensor for complementary metal oxide semiconductor stacked chip applications
US9331116B2 (en) 2014-01-15 2016-05-03 Omnivision Technologies, Inc. Back side illuminated single photon avalanche diode imaging sensor with high short wavelength detection efficiency
JP6207407B2 (ja) 2014-01-17 2017-10-04 オムロンオートモーティブエレクトロニクス株式会社 レーザレーダ装置、物体検出方法、及び、プログラム
DE102014100696B3 (de) * 2014-01-22 2014-12-31 Sick Ag Entfernungsmessender Sensor und Verfahren zur Erfassung und Abstandsbestimmung von Objekten
US9456201B2 (en) 2014-02-10 2016-09-27 Microsoft Technology Licensing, Llc VCSEL array for a depth camera
CN103763485A (zh) 2014-02-17 2014-04-30 苏州超锐微电子有限公司 一种用于智能图像传感器的单光子级分辨率图像采集芯片前端电路模块
WO2015136100A2 (en) 2014-03-14 2015-09-17 Mesa Imaging Ag Optoelectronic modules operable to recognize spurious reflections and to compensate for errors caused by spurious reflections
US9761049B2 (en) 2014-03-28 2017-09-12 Intel Corporation Determination of mobile display position and orientation using micropower impulse radar
JP6483725B2 (ja) * 2014-04-07 2019-03-13 サムスン エレクトロニクス カンパニー リミテッド 光学的イベントを感知する方法とそのための光学的イベントセンサ、及び距離測定モバイル装置
CN103983979B (zh) 2014-05-27 2016-05-11 中国科学院上海光学精密机械研究所 基于m序列相位编码和正交偏振复用的合成孔径激光成像雷达
US10419703B2 (en) 2014-06-20 2019-09-17 Qualcomm Incorporated Automatic multiple depth cameras synchronization using time sharing
CN106662433B (zh) 2014-06-27 2019-09-06 新加坡恒立私人有限公司 结构化光成像系统及方法
DE202014005508U1 (de) 2014-07-02 2014-10-09 Robert Bosch Gmbh Entfernungsmessvorrichtung
CN106687877A (zh) 2014-07-16 2017-05-17 株式会社理光 系统,机械,控制方法和程序
US9377533B2 (en) 2014-08-11 2016-06-28 Gerard Dirk Smits Three-dimensional triangulation and time-of-flight based tracking systems and methods
US9810777B2 (en) 2014-08-22 2017-11-07 Voxtel, Inc. Asynchronous LADAR and imaging array
DE102014013099B4 (de) 2014-09-03 2019-11-14 Basler Aktiengesellschaft Verfahren und Vorrichtung zur vereinfachten Erfassung eines Tiefenbildes
US20160072258A1 (en) 2014-09-10 2016-03-10 Princeton Optronics Inc. High Resolution Structured Light Source
US9596440B2 (en) 2014-09-11 2017-03-14 Microvision, Inc. Scanning laser planarity detection
US10295658B2 (en) 2014-10-02 2019-05-21 The Johns Hopkins University Optical detection system
CN107430187B (zh) 2014-12-02 2021-06-18 新加坡恒立私人有限公司 深度传感器模块和深度感测方法
DE102014119071A1 (de) 2014-12-18 2016-06-23 Intel IP Corporation Eine Vorrichtung und ein Verfahren zum Erzeugen eines Sendesignals
US10036801B2 (en) 2015-03-05 2018-07-31 Big Sky Financial Corporation Methods and apparatus for increased precision and improved range in a multiple detector LiDAR array
US10088557B2 (en) 2015-03-20 2018-10-02 MSOTEK Co., Ltd LIDAR apparatus
CN104730535A (zh) 2015-03-20 2015-06-24 武汉科技大学 一种车载多普勒激光雷达距离测量方法
FR3034204A1 (ko) 2015-03-23 2016-09-30 Stmicroelectronics (Grenoble 2) Sas
US10145678B2 (en) 2015-04-20 2018-12-04 Samsung Electronics Co., Ltd. CMOS image sensor for depth measurement using triangulation with point scan
US9864048B2 (en) 2015-05-17 2018-01-09 Microsoft Technology Licensing, Llc. Gated time of flight camera
WO2016187344A1 (en) 2015-05-18 2016-11-24 Lasermotive, Inc. Multi-layered safety system
CN104914446B (zh) 2015-06-19 2017-06-27 南京理工大学 基于光子计数的三维距离图像时域实时去噪方法
EP3113478A1 (en) 2015-06-30 2017-01-04 Thomson Licensing Plenoptic foveated camera
US10620300B2 (en) * 2015-08-20 2020-04-14 Apple Inc. SPAD array with gated histogram construction
US9880267B2 (en) * 2015-09-04 2018-01-30 Microvision, Inc. Hybrid data acquisition in scanned beam display
US9989357B2 (en) 2015-09-09 2018-06-05 Faro Technologies, Inc. Aerial device that cooperates with an external projector to measure three-dimensional coordinates
US10063849B2 (en) 2015-09-24 2018-08-28 Ouster, Inc. Optical system for collecting distance information within a field
EP3365729A4 (en) 2015-10-21 2019-10-23 Princeton Optronics, Inc. PROJECTOR WITH CODED PATTERN
US10067224B2 (en) 2015-10-22 2018-09-04 Stmicroelectronics (Research & Development) Limited Time to digital converter (TDC) with synchronous output and related methods
DE102015013710A1 (de) * 2015-10-23 2017-04-27 Wabco Gmbh Sensoreinrichtung zur Erfassung von Umgebungsinformationen
EP3159711A1 (en) 2015-10-23 2017-04-26 Xenomatix NV System and method for determining a distance to an object
US9841495B2 (en) 2015-11-05 2017-12-12 Luminar Technologies, Inc. Lidar system with improved scanning speed for high-resolution depth mapping
FR3043797A1 (ko) 2015-11-16 2017-05-19 Stmicroelectronics (Grenoble 2) Sas
US10520602B2 (en) 2015-11-30 2019-12-31 Luminar Technologies, Inc. Pulsed laser for lidar system
WO2017106875A1 (en) 2015-12-18 2017-06-22 Gerard Dirk Smits Real time position sensing of objects
EP3182156B1 (en) 2015-12-18 2021-01-27 STMicroelectronics (Research & Development) Limited Ranging apparatus
US9997551B2 (en) 2015-12-20 2018-06-12 Apple Inc. Spad array with pixel-level bias control
US10324171B2 (en) 2015-12-20 2019-06-18 Apple Inc. Light detection and ranging sensor
EP3185037B1 (en) 2015-12-23 2020-07-08 STMicroelectronics (Research & Development) Limited Depth imaging system
EP3185038B1 (de) 2015-12-23 2018-02-14 Sick Ag Optoelektronischer sensor und verfahren zur messung einer entfernung
US9823118B2 (en) 2015-12-26 2017-11-21 Intel Corporation Low power, high resolution solid state LIDAR circuit
US10386487B1 (en) 2015-12-30 2019-08-20 Argo AI, LLC Geiger-mode LiDAR system having improved signal-to-noise ratio
US9933513B2 (en) 2016-02-18 2018-04-03 Aeye, Inc. Method and apparatus for an adaptive ladar receiver
US10754015B2 (en) 2016-02-18 2020-08-25 Aeye, Inc. Adaptive ladar receiver
US9866816B2 (en) 2016-03-03 2018-01-09 4D Intellectual Properties, Llc Methods and apparatus for an active pulsed 4D camera for image acquisition and analysis
US10048374B2 (en) 2016-03-21 2018-08-14 Velodyne Lidar, Inc. LIDAR based 3-D imaging with varying pulse repetition
US9739881B1 (en) 2016-03-24 2017-08-22 RFNAV, Inc. Low cost 3D radar imaging and 3D association method from low count linear arrays for all weather autonomous vehicle navigation
JP2017195573A (ja) 2016-04-22 2017-10-26 ソニー株式会社 撮像装置および電子機器
CA3022417C (en) 2016-04-26 2022-10-18 Illinois Institute Of Technology Apparatus and method for enhanced early photon detection in optical projection tomography
US10690756B2 (en) 2016-05-10 2020-06-23 Texas Instruments Incorporated Methods and apparatus for LIDAR operation with pulse position modulation
JP6780308B2 (ja) 2016-06-10 2020-11-04 株式会社リコー 物体検出装置、センシング装置及び移動体装置
US10823826B2 (en) 2016-06-14 2020-11-03 Stmicroelectronics, Inc. Adaptive laser power and ranging limit for time of flight sensor
US20180341009A1 (en) 2016-06-23 2018-11-29 Apple Inc. Multi-range time of flight sensing
US10890649B2 (en) 2016-08-11 2021-01-12 Qualcomm Incorporated System and method for measuring reference and returned light beams in an optical system
WO2018028795A1 (en) 2016-08-12 2018-02-15 Fastree3D Sa Method and device for measuring a distance to a target in a multi-user environment by means of at least one detector
EP3285087A1 (en) 2016-08-19 2018-02-21 ams AG Sensor arrangement and method for determining time-of-flight
US20180059220A1 (en) 2016-08-30 2018-03-01 Qualcomm Incorporated Laser ranging device with beam signature and signature recognition
US10305247B2 (en) 2016-08-30 2019-05-28 Apple Inc. Radiation source with a small-angle scanning array
US20180081041A1 (en) 2016-09-22 2018-03-22 Apple Inc. LiDAR with irregular pulse sequence
US10291895B2 (en) 2016-10-25 2019-05-14 Omnivision Technologies, Inc. Time of flight photosensor
DE102016221049A1 (de) 2016-10-26 2018-04-26 Robert Bosch Gmbh Vorrichtung und Verfahren zum Empfangen eines reflektierten Lichtpulses in einem Lidar-System
CN106405572B (zh) 2016-11-10 2019-02-26 西安交通大学 基于空间编码的远距离高分辨率激光主动成像装置及方法
GB201622429D0 (en) 2016-12-30 2017-02-15 Univ Court Of The Univ Of Edinburgh The Photon sensor apparatus
US10154254B2 (en) 2017-01-17 2018-12-11 Facebook Technologies, Llc Time-of-flight depth sensing for eye tracking
EP3355133B1 (en) 2017-01-25 2019-10-30 ams AG Method for calibrating a time-to-digital converter system and time-to-digital converter system
US10801886B2 (en) 2017-01-25 2020-10-13 Apple Inc. SPAD detector having modulated sensitivity
JP7134988B2 (ja) 2017-03-01 2022-09-12 アウスター インコーポレイテッド ライダーのための正確な光検出器測定
US11105925B2 (en) 2017-03-01 2021-08-31 Ouster, Inc. Accurate photo detector measurements for LIDAR
US10830879B2 (en) 2017-06-29 2020-11-10 Apple Inc. Time-of-flight depth mapping with parallax compensation
SG11201913642VA (en) 2017-07-05 2020-01-30 Ouster Inc Light ranging device with electronically scanned emitter array and synchronized sensor array
EP3428574A1 (en) 2017-07-11 2019-01-16 Fondazione Bruno Kessler Device for measuring a distance and method for measuring said distance
EP3428683B1 (en) 2017-07-11 2019-08-28 Sick Ag Optoelectronic sensor and method for measuring a distance
WO2019014494A1 (en) 2017-07-13 2019-01-17 Apple Inc. EARLY-DELAYED PULSE COUNTING FOR DEPTH SENSORS EMITTING LIGHT
US10955552B2 (en) 2017-09-27 2021-03-23 Apple Inc. Waveform design for a LiDAR system with closely-spaced pulses
TWI661211B (zh) 2017-12-08 2019-06-01 財團法人工業技術研究院 距離感測裝置及其方法
EP3521856B1 (en) 2018-01-31 2023-09-13 ams AG Time-of-flight arrangement and method for a time-of-flight measurement
US10996323B2 (en) 2018-02-22 2021-05-04 Stmicroelectronics (Research & Development) Limited Time-of-flight imaging device, system and method
DE102018203534A1 (de) 2018-03-08 2019-09-12 Ibeo Automotive Systems GmbH Empfängeranordnung zum Empfang von Lichtimpulsen, LiDAR-Modul und Verfahren zum Empfangen von Lichtimpulsen
US10158038B1 (en) 2018-05-17 2018-12-18 Hi Llc Fast-gated photodetector architectures comprising dual voltage sources with a switch configuration
US11543495B2 (en) 2018-11-01 2023-01-03 Waymo Llc Shot reordering in LIDAR systems
CN113039457A (zh) 2018-11-16 2021-06-25 ams传感器新加坡私人有限公司 通过透射盖使用光学飞行时间技术进行深度感测
DE102018220688A1 (de) 2018-11-30 2020-06-04 Ibeo Automotive Systems GmbH Analog-Digital-Wandler
US11639990B2 (en) 2019-01-18 2023-05-02 The University Court Of The University Of Edinburgh Digital pixels and operating methods thereof
KR102604902B1 (ko) 2019-02-11 2023-11-21 애플 인크. 펄스형 빔들의 희소 어레이를 사용하는 깊이 감지
EP3715907B1 (en) 2019-03-27 2024-02-28 Infineon Technologies AG Methods and apparatuses for compensating light reflections from a cover of a time-of-flight camera
WO2020201452A1 (en) 2019-04-02 2020-10-08 Ams International Ag Method of measuring optical crosstalk in a time of flight sensor and corresponding time of flight sensor
US11500094B2 (en) 2019-06-10 2022-11-15 Apple Inc. Selection of pulse repetition intervals for sensing time of flight
US10613203B1 (en) 2019-07-01 2020-04-07 Velodyne Lidar, Inc. Interference mitigation for light detection and ranging
CN110609293B (zh) 2019-09-19 2022-05-27 深圳奥锐达科技有限公司 一种基于飞行时间的距离探测系统和方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1990008946A1 (en) * 1989-01-31 1990-08-09 York Limited Optical detection apparatus for counting optical photons
KR101318951B1 (ko) * 2011-02-28 2013-10-17 한국과학기술원 듀얼 가이거 모드 어밸런치 광다이오드를 운용하는 스캐닝 3차원 영상화 펄스 레이저 레이더 시스템 및 방법
EP2827175A2 (en) * 2013-07-12 2015-01-21 Princeton Optronics, Inc. 2-D planar VCSEL source for 3-D imaging
US20150131080A1 (en) * 2013-11-12 2015-05-14 Facet Technology Corp. Methods and Apparatus for Array Based Lidar Systems with Reduced Interference
US20170219695A1 (en) * 2016-01-31 2017-08-03 Velodyne Lidar, Inc. Multiple Pulse, LIDAR Based 3-D Imaging

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220037090A (ko) * 2020-09-17 2022-03-24 국방과학연구소 거리 측정 장치 및 방법

Also Published As

Publication number Publication date
US11852727B2 (en) 2023-12-26
CN111465870B (zh) 2023-08-29
WO2019125349A1 (en) 2019-06-27
KR102403544B1 (ko) 2022-05-30
EP3704510A1 (en) 2020-09-09
US20200309955A1 (en) 2020-10-01
EP3704510B1 (en) 2022-10-05
CN111465870A (zh) 2020-07-28

Similar Documents

Publication Publication Date Title
KR102403544B1 (ko) 방출기들의 어드레스가능 어레이를 사용하는 비행 시간 감지
US11371833B2 (en) Calibration of depth sensing using a sparse array of pulsed beams
US11644551B2 (en) Lidar systems with improved time-to-digital conversion circuitry
US20190018119A1 (en) Early-late pulse counting for light emitting depth sensors
KR20200110451A (ko) 고분해능 장거리 플래시 lidar를 위한 방법들 및 시스템들
CN110927734B (zh) 一种激光雷达系统及其抗干扰方法
CA3112491A1 (en) Multi-channel lidar illumination driver
JP2017520134A (ja) 光学的イベントを感知する方法とそのための光学的イベントセンサ、及び距離測定モバイル装置
US20210109224A1 (en) Strobing flash lidar with full frame utilization
US20220221562A1 (en) Methods and systems for spad optimizaiton
US20210109196A1 (en) Method for controlling sensor elements of a lidar measuring system
US20210215807A1 (en) Pipelined histogram pixel
US11626446B2 (en) Pixel circuit and method of operating the same in an always-on mode
US20220334253A1 (en) Strobe based configurable 3d field of view lidar system
US20220099814A1 (en) Power-efficient direct time of flight lidar
US11971505B2 (en) Methods and devices for peak signal detection
Kostamovaara et al. Solid-state pulsed time-of-flight 3-D range imaging using CMOS SPAD focal plane array receiver and block-based illumination techniques
US20230243928A1 (en) Overlapping sub-ranges with power stepping
US11681028B2 (en) Close-range measurement of time of flight using parallax shift
US20230395741A1 (en) High Dynamic-Range Spad Devices
US20230243975A1 (en) Logic For Controlling Histogramming Of Measurements Of Lidar Sensors
US12032095B2 (en) Dynamic range improvements in LIDAR applications
US20200300978A1 (en) Dynamic range improvements in lidar applications
US20230221439A1 (en) Addressing redundant memory for lidar pixels
US20240210526A1 (en) Optical system for full frame flash solid state lidar system

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant