JP2023548740A - 垂直共振器面発光レーザ(vcsel)エミッタを有する光検出及び測距(lidar)デバイス - Google Patents
垂直共振器面発光レーザ(vcsel)エミッタを有する光検出及び測距(lidar)デバイス Download PDFInfo
- Publication number
- JP2023548740A JP2023548740A JP2023519432A JP2023519432A JP2023548740A JP 2023548740 A JP2023548740 A JP 2023548740A JP 2023519432 A JP2023519432 A JP 2023519432A JP 2023519432 A JP2023519432 A JP 2023519432A JP 2023548740 A JP2023548740 A JP 2023548740A
- Authority
- JP
- Japan
- Prior art keywords
- vcsels
- lidar device
- individually addressable
- array
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 31
- 238000010304 firing Methods 0.000 claims abstract description 114
- 239000003990 capacitor Substances 0.000 claims description 81
- 239000000758 substrate Substances 0.000 claims description 37
- 238000000034 method Methods 0.000 claims description 30
- 230000003287 optical effect Effects 0.000 claims description 22
- 230000005540 biological transmission Effects 0.000 claims description 10
- 239000004593 Epoxy Substances 0.000 claims description 9
- 230000005669 field effect Effects 0.000 claims description 3
- 229910002601 GaN Inorganic materials 0.000 claims description 2
- JMASRVWKEDWRBT-UHFFFAOYSA-N Gallium nitride Chemical compound [Ga]#N JMASRVWKEDWRBT-UHFFFAOYSA-N 0.000 claims description 2
- 239000004642 Polyimide Substances 0.000 claims description 2
- 238000007599 discharging Methods 0.000 claims description 2
- 229920001721 polyimide Polymers 0.000 claims description 2
- 238000004806 packaging method and process Methods 0.000 claims 2
- 238000010586 diagram Methods 0.000 abstract description 30
- 230000007613 environmental effect Effects 0.000 description 31
- 238000004891 communication Methods 0.000 description 30
- 238000012545 processing Methods 0.000 description 19
- 238000004519 manufacturing process Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 12
- 238000003491 array Methods 0.000 description 9
- 230000004044 response Effects 0.000 description 9
- 238000013500 data storage Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 239000000463 material Substances 0.000 description 7
- 238000005259 measurement Methods 0.000 description 7
- 238000000926 separation method Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 230000004438 eyesight Effects 0.000 description 6
- 229910052751 metal Inorganic materials 0.000 description 6
- 239000002184 metal Substances 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 6
- 101100175317 Danio rerio gdf6a gene Proteins 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 5
- 238000010276 construction Methods 0.000 description 5
- 238000011217 control strategy Methods 0.000 description 5
- 239000000446 fuel Substances 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000004927 fusion Effects 0.000 description 4
- 238000002955 isolation Methods 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000006399 behavior Effects 0.000 description 3
- 238000001816 cooling Methods 0.000 description 3
- 230000005670 electromagnetic radiation Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000010438 heat treatment Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 description 2
- 229910001218 Gallium arsenide Inorganic materials 0.000 description 2
- ATUOYWHBWRKTHZ-UHFFFAOYSA-N Propane Chemical compound CCC ATUOYWHBWRKTHZ-UHFFFAOYSA-N 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 2
- 230000010267 cellular communication Effects 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 239000003502 gasoline Substances 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000004297 night vision Effects 0.000 description 2
- 229920002120 photoresistant polymer Polymers 0.000 description 2
- 229910052710 silicon Inorganic materials 0.000 description 2
- 239000010703 silicon Substances 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 238000001931 thermography Methods 0.000 description 2
- 229910000980 Aluminium gallium arsenide Inorganic materials 0.000 description 1
- 229910000530 Gallium indium arsenide Inorganic materials 0.000 description 1
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 241000269400 Sirenidae Species 0.000 description 1
- 239000002253 acid Substances 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 239000000919 ceramic Substances 0.000 description 1
- 238000003486 chemical etching Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 230000008021 deposition Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000000407 epitaxy Methods 0.000 description 1
- 238000005530 etching Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000002828 fuel tank Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000005468 ion implantation Methods 0.000 description 1
- 238000003698 laser cutting Methods 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000001465 metallisation Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 239000010705 motor oil Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 239000003208 petroleum Substances 0.000 description 1
- 238000000206 photolithography Methods 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 239000001294 propane Substances 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
- G01S7/4815—Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/484—Transmitters
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01S—DEVICES USING THE PROCESS OF LIGHT AMPLIFICATION BY STIMULATED EMISSION OF RADIATION [LASER] TO AMPLIFY OR GENERATE LIGHT; DEVICES USING STIMULATED EMISSION OF ELECTROMAGNETIC RADIATION IN WAVE RANGES OTHER THAN OPTICAL
- H01S5/00—Semiconductor lasers
- H01S5/10—Construction or shape of the optical resonator, e.g. extended or external cavity, coupled cavities, bent-guide, varying width, thickness or composition of the active region
- H01S5/18—Surface-emitting [SE] lasers, e.g. having both horizontal and vertical cavities
- H01S5/183—Surface-emitting [SE] lasers, e.g. having both horizontal and vertical cavities having only vertical cavities, e.g. vertical cavity surface-emitting lasers [VCSEL]
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01S—DEVICES USING THE PROCESS OF LIGHT AMPLIFICATION BY STIMULATED EMISSION OF RADIATION [LASER] TO AMPLIFY OR GENERATE LIGHT; DEVICES USING STIMULATED EMISSION OF ELECTROMAGNETIC RADIATION IN WAVE RANGES OTHER THAN OPTICAL
- H01S5/00—Semiconductor lasers
- H01S5/04—Processes or apparatus for excitation, e.g. pumping, e.g. by electron beams
- H01S5/042—Electrical excitation ; Circuits therefor
- H01S5/0428—Electrical excitation ; Circuits therefor for applying pulses to the laser
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01S—DEVICES USING THE PROCESS OF LIGHT AMPLIFICATION BY STIMULATED EMISSION OF RADIATION [LASER] TO AMPLIFY OR GENERATE LIGHT; DEVICES USING STIMULATED EMISSION OF ELECTROMAGNETIC RADIATION IN WAVE RANGES OTHER THAN OPTICAL
- H01S5/00—Semiconductor lasers
- H01S5/40—Arrangement of two or more semiconductor lasers, not provided for in groups H01S5/02 - H01S5/30
- H01S5/42—Arrays of surface emitting lasers
- H01S5/423—Arrays of surface emitting lasers having a vertical cavity
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- Optics & Photonics (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Traffic Control Systems (AREA)
Abstract
例示的な実施形態は、垂直共振器面発光レーザ(VCSEL)エミッタを有する光検出及び測距(LIDAR)デバイスに関する。例示的なLIDARデバイスは、LIDARデバイスを取り囲む環境中に、光パルスを放出するように構成された、個々にアドレス指定可能なVCSELのアレイを含む。LIDARデバイスはまた、アレイ内で個々にアドレス指定可能なVCSELを選択的に発射するように構成された発射回路を含む。加えて、LIDARデバイスは、制御信号を使用して発射回路を制御するように構成されたコントローラを含む。更に、LIDARデバイスは、複数の検出器を含む。複数の検出器の各検出器は、アレイ内の1つ以上の個々にアドレス指定可能なVCSELによって放出され、LIDARデバイスを取り囲む環境内の1つ以上の物体によって反射される、光パルスの反射を検出するように構成されている。【選択図】図5A
Description
関連出願の相互参照
本出願は、2020年10月30日に米国特許商標庁に出願された米国仮特許出願第63/107,929号の優先権を主張し、その内容は参照により本明細書に組み入れられる。
本出願は、2020年10月30日に米国特許商標庁に出願された米国仮特許出願第63/107,929号の優先権を主張し、その内容は参照により本明細書に組み入れられる。
本明細書に別段の記載がない限り、この章に記載されている資料は、本出願の特許請求の範囲の先行技術ではなく、この章に含めることにより先行技術であると認められるべきではない。
自律車両又は自律モードで動作する車両は、様々なセンサを使用してそれらの周囲を検出し得る。例えば、光検出及び測距(LIDAR)デバイス、無線検出及び測距(RADAR)デバイス、並びに/又はカメラを使用して、自律車両の周囲の環境で物体を識別し得る。このようなセンサは、例えば、物体の検出及び回避、並びに/又はナビゲーションに使用され得る。
LIDARデバイスは、シーンを走査しながら環境特徴までの距離を判定することで、環境内の反射面を示す「点群」に組み合わせることができる、データを収集することができる。点群の個々の点は、例えば、レーザパルスを送信し、環境における物体から反射された戻りパルスがあればそれを検出し、その後、パルスの送信とその反射パルスの受信との間の時間遅延に従って物体までの距離を測定することによって判定することができる。その結果、例えば、環境における反射性特徴の位置を示す点の三次元マップを生成することができる。
本開示は、垂直共振器面発光レーザ(VCSEL)エミッタを有する光検出及び測距(LIDAR)デバイスに関する。VCSELエミッタは、周囲環境内の1つ以上の物体までの距離を判定するために、LIDARデバイスの対応する検出器によって後で検出される信号を送信するために使用されるVCSELのアレイを含み得る。アレイ内のVCSELは、個々にアドレス指定可能であり得る。更に、LIDARコントローラは、制御信号を使用して、VCSELのうちの1つ以上を選択的に発射するために使用される発射回路を制御し得る。アレイ内の個々のアドレス指定可能性及びVCSELの選択的な発射は、複数の発射パターンの実装を可能にし得る。そのような発射パターンは、例えば、隣接するチャネルにおけるクロストークを軽減するために(例えば、周囲環境内の再帰反射体からの反射に基づいて)、周囲環境を観察するために消費される電力を低減するために、及び/又はLIDARデバイスによって生成された点群の解像度を増強するために、使用され得る。
一態様では、光検出及び測距(LIDAR)デバイスが提供される。LIDARデバイスは、LIDARデバイスを取り囲む環境中に光パルスを放出するように構成された、個々にアドレス指定可能な垂直共振器面発光レーザ(VCSEL)のアレイを含む。LIDARデバイスはまた、アレイ内で個々にアドレス指定可能なVCSELを選択的に発射するように構成された発射回路を含む。加えて、LIDARデバイスは、制御信号を使用して発射回路を制御するように構成されたコントローラを含む。更に、LIDARデバイスは、複数の検出器を含む。複数の検出器の各検出器は、アレイ内の1つ以上の個々にアドレス指定可能なVCSELによって放出され、LIDARデバイスを取り囲む環境内の1つ以上の物体によって反射される光パルスの反射を検出するように構成されている。
別の態様において、方法が提供される。方法は、光検出及び測距(LIDAR)デバイスのコントローラから、制御信号をLIDARデバイスの発射回路に送信することを含む。方法はまた、制御信号に基づく発射回路によって、個々にアドレス指定可能な垂直共振器面発光レーザ(VCSEL)に、LIDARデバイスの周囲環境中に光パルスを放出させることを含む。個々にアドレス指定可能なVCSELは、アレイ内の複数の個々にアドレス指定可能なVCSELのうちの1つである。加えて、方法は、LIDARデバイスの検出器によって、LIDARデバイスを取り囲む環境からの光パルスの反射を検出することを含む。検出器は、LIDARデバイスの複数の検出器のうちの1つである。
これらの並びに他の態様、利点、及び代替物は、当業者には、以下の詳細な説明を添付の図面を適宜参照して読み取ることにより明らかになるであろう。
例示的な方法及びシステムが本明細書で企図されている。本明細書において説明される任意の実施形態又は特徴の例は、必ずしも他の実施形態又は特徴よりも好ましいか、又は有利であると解釈されるべきではない。本明細書において説明される例示的な実施形態は、限定的であることを意味するものではない。開示されるシステム及び方法の特定の態様は、多種多様な異なる構成で配置し、組み合わせることができ、これらの構成の全てが、本明細書において企図されることは容易に理解されよう。
更に、図に示されている特定の配置は、限定的であるとみなされるべきではない。他の実施形態は、所定の図に示されるそれぞれの要素をより多く、又はより少なく含む可能性があることが理解されるべきである。更に、例解された要素のうちのいくつかは、組み合わされ得るか、又は省略され得る。なお更に、例示的な実施形態は、図に例解されていない要素を含み得る。
LIDARデバイスは、1つ以上の光エミッタと、1つ以上の光エミッタによって放出され、LIDARデバイスを取り囲む環境内の1つ以上の物体によって反射される光を検出するために使用される1つ以上の検出器と、を含み得る。例として、周囲環境は、建物の内側又は建物の外側などの、内部又は外部環境を含み得る。追加的又は代替的に、周囲環境は、車両の内部環境を含み得る。追加的又は代替的に、周囲環境は、道路の周り及び/又は道路上の周辺を含み得る。周囲環境にある物体の例としては、限定されるものではないが、他の車両、交通標識、歩行者、道路表面、建物、地形などが挙げられる。追加的に、1つ以上の光エミッタは、LIDARシステム自体の局所環境中に光を放出し得る。例えば、1つ以上の光エミッタから放出された光は、LIDARシステムのハウジング及び/又はLIDARシステムに結合された表面若しくは構造と相互作用し得る。場合によっては、LIDARシステムが車両に取り付けられ得る。そのようなシナリオでは、1つ以上の光エミッタは、車両の周辺内の物体と相互作用する光を放出するように構成され得る。光エミッタは、光ファイバ増幅器、レーザダイオード、発光ダイオード(LED)などを含み得る。本明細書では、光エミッタとしてVCSELのアレイを含むLIDARデバイスが説明される。VCSELは、LIDARデバイス(例えば、自動車のLIDAR用途におけるような)に採用されたとき、他の発光技術に勝る複数の利点を提案し得る。しかしながら、VCSELが本開示全体を通して説明されるが、本明細書に説明される技術の多くは、少なくともある程度は、他の光エミッタ(例えば、LED、レーザダイオードなど)にも採用され得ることに留意されたい。
VCSELのアレイは、LIDARデバイスを取り囲む環境中に光パルスを放出し得る(例えば、周囲環境の異なる部分を標的化する各VCSELを用いて)。これらの放出は、例えば、VCSELを横切るLIDARデバイスの発射回路内のコンデンサの充電及び放電によって引き起こされ得る。更に、いくつかの実施形態では、発射回路は、LIDARデバイスのコントローラから発射回路に送信される1つ以上の制御信号によって制御され得る。次に、放出された光パルスは、周囲環境内の1つ以上の物体によって反射され得る。次に、それらの反射は、LIDARデバイスに戻り、LIDARデバイスの検出器(例えば、シリコン光電子増倍管(SiPM)、単光子アバランシェダイオード(SPAD)、アバランシェフォトダイオード(APD)、電荷結合素子(CCD)など)のうちの1つ以上によって検出され得る。VCSELによる光パルスの放出の時間を、検出器による反射の検出の時間と比較することによって、周囲環境内の1つ以上の物体までの距離が判定され得る。いくつかの実施形態では、距離測定値は、周囲環境の点群(例えば、三次元点群)表現に組み合わせられ得る(例えば、LIDARデバイス又はLIDARデバイスに接続された関連付けられたコンピューティングデバイスによって)。
他の光エミッタと比較したとき、VCSELは、様々な態様では、増強された性能を示し得る。一例として、VCSELは、他のタイプの光エミッタよりも、温度に対するより小さい波長変動を有し得る。レーザダイオードは、例えば、約0.3nm/℃の波長温度係数を有し得るが、それに対して、VCSELは、約0.07nm/℃以下の波長温度係数を有し得る。これは、部分的に、VCSELが、他のレーザよりもVCSEL内のより大きいモード間隔を結果的にもたらす、より短いレーザ共振器を含むという事実に起因する。VCSELは、より低い温度依存性を有し得るため、VCSELが、LIDARデバイス内の問題を引き起こすことなく(例えば、LIDARデバイス内のノイズをフィルタ除去するために使用される1つ以上の光学フィルタによって可能にされる波長の範囲の外側にある光を放出することなく、及び/又はエミッタの温度を維持するために追加の構成要素を使用することなく)動作し得る、より広い温度の範囲が存在する。
VCSELの別の利点は、他のタイプの光エミッタに対して、VCSELアレイ内のVCSELをより密に又はより疎に配置する能力である(例えば、端面発光レーザダイオードとは異なる放出方向を有するVCSELに起因して)。
更に、VCSELアレイを製造するとき、例えば、端面発光レーザダイオード又はファイバレーザで同じ目標を達成する試みと比較したときに、VCSELアレイが製造される基板に対して法線のVCSELの放出表面を配向することがより簡単であり得る。同様に、他の発光技術に関するよりも、同じ水平平面内に位置するVCSELの放出表面の各々を有することもより簡単であり得る。放出表面が、製造中に基板及び/又は同一平面に対して法線であり得るため、中間較正及び/又は試験(例えば、光学的位置合わせ又は製造欠陥に対する)は、製造中に実施され得(例えば、多くのVCSELアレイを含むウエハを単一のアレイに切断する前に)、製造中の誤差の補正を可能にする。これは、有意義な試験が実施され得る前に、結合及び/又は集束光学素子(例えば、光エミッタに隣接して位置付けられた追加のレンズ又はミラー)との光エミッタの完全なアセンブリが必要であり得る、代替的な光エミッタとは異なる。これは、無駄な時間/製造労力につながり得る(例えば、エミッタに欠陥があるが、その欠陥が、アセンブリのずっと後の段階で試験が行われるまで検出されなかったとき)。
なお更に、VCSELからの光放出は、対称的な発散を有し得るが、一方で、他のタイプの光エミッタ(例えば、端面発光レーザダイオード)からの光放出は、非対称的な発散(例えば、関連付けられたファスト軸の発散及びスロー軸の発散)を呈し得る。対称的な発散は、他のタイプの光エミッタが採用されている場合に、別様に使用され得る、LIDARデバイス内のコリメート光学素子の一部又は全部の排除を可能にし得る。
追加的に、VCSELに給電するために必要な電流の量は、他のタイプの光エミッタに対して低い場合がある。例えば、VCSELのアレイに給電するために使用される駆動電流は、レーザダイオードの等価サイズのアレイに給電するために使用される駆動電流の量よりも約20倍低い場合がある(例えば、約20.0A/エミッタと比較して、約1.0A/エミッタ)。これは、部分的に、VCSELが、他のタイプのレーザ(例えば、LIDARデバイス内の光エミッタとして使用され得る他のタイプのレーザ)に対して、比較的小さい活性領域を有するためである。この低電流要件は、発射回路からVCSELを使用して達成され得る潜在的な発射速度まで、LIDARデバイスのいくつかの態様に利益をもたらし得る(例えば、使用されるより低い閾値電流は、VCSELに対する増強された変調帯域幅に対応し得る)。
上記に説明された全てに加えて、アレイ内のVCSELを、VCSELが個々にアドレス指定可能であることを可能にする(すなわち、アレイ内の単一のVCSELが発射され得るか、又は残りのVCSELが順次発射される間に、アレイ内の単一のVCSELが停止され得るように)様々な配置に電気的に接続することが可能である(本明細書に説明されるように)。これは、様々な点で有益であり得るLIDARデバイス内の選択的な発射スキーム/パターンを可能にし得る(例えば、VCSELの各々のタイミングに対して個々に軽微な調整が行われ得るため)。例えば、LIDARデバイスを取り囲む環境内の再帰反射体の存在が検出される場合(例えば、LIDARデバイスによって、又はカメラなどのLIDARデバイスと関連付けられた補助検出器によって)、再帰反射体に向けられたアレイ内のVCSELは、チャネル間のクロストークを引き起こすか、又はLIDAR内の検出問題を別様に引き起こし得る、大きい戻り信号の生成を防止するために、停止され得る。同様に、アレイ内のVCSELのどのサブセットが発射されるかを選別する能力は、LIDARデバイスを取り囲む環境の特定の領域(例えば、関心対象の領域)の精密な調査を可能にし得る。
本明細書に説明される実施形態は、光エミッタとしてVCSELの1つ以上のアレイを含むLIDARデバイスを提供することによって、上記の利益を利用する。本明細書に説明されるVCSELは、様々な実施形態では、トップエミッション型又はボトムエミッション型のVCSELであり得る。言い換えると、本明細書に説明されるVCSELは、VCSELから直接(すなわち、トップエミッション型)、又は周囲環境に光を導く前に、VCSELが実装されている基板を通して(すなわち、ボトムエミッション型)、光を外向きに周囲環境に放出し得る。更に、アレイ内のVCSELの配置は、異なる実施形態間で異なり得る(例えば、配置は、LIDARデバイスの他の構成要素に起因して存在する収差又は不整合を考慮するように設計され得る)。加えて、本明細書に説明されるように、例示的なLIDARデバイスは、追加の光学素子(例えば、レンズ、ミラー、導波路など)、発射回路(例えば、ダイオード、スイッチ、コンデンサ、コイル、信号発生器、電源など)、コントローラ、検出器などを含み得る。
以下の説明及び添付図面は、様々な例示的な実施形態の特徴を明らかにする。提供される実施形態は、例としてのものであり、限定することを意図するものではない。したがって、図面の寸法は、必ずしも縮尺どおりではない。
ここで、本開示の範囲内の例示的なシステムをより詳細に説明する。例示的なシステムは、自動車に実装され得るか、又は自動車の形態を採り得る。追加的に、例示的なシステムはまた、車、トラック、オートバイ、バス、飛行機、ヘリコプタ、ドローン、芝刈り機、ブルドーザ、ボート、潜水艦、全地形対応車両、スノーモービル、航空機、レクリエーション車両、遊園地車両、農機具又は農業用車両、建設機械又は建設車両、倉庫設備又は倉庫車両、工場設備又は工場車両、トラム、ゴルフカート、電車、トロリー、歩道運搬車両、ロボットデバイスなどの、様々な車両において実装され得るか、又は様々な車両の形態を採り得る。他の車両も同じく可能である。更に、いくつかの実施形態では、例示的なシステムは、車両を含まない場合がある。
ここで図を参照すると、図1は、自律モードで完全に又は部分的に動作するように構成され得る、例示的な車両100を例解する機能ブロック図である。より具体的には、車両100は、コンピューティングシステムから制御命令を受信することを通して、人間の相互作用なしに自律モードで動作し得る。自律モードにおける動作の一部として、車両100は、センサを使用して、周囲環境の物体を検出し、場合によっては識別して、安全なナビゲーションを可能にし得る。追加的に、例示的な車両100は、車両100のいくつかの機能が車両100の人間の運転手によって制御され、車両100のいくつかの機能がコンピューティングシステムによって制御される、部分的に自律(すなわち、半自律)モードで動作し得る。例えば、車両100はまた、運転手がステアリング、加速、及びブレーキなどの車両100の動作を制御することを可能にするサブシステムを含み得るが、一方で、コンピューティングシステムは、周囲環境内の他の物体(例えば、車両)に基づいて、車線逸脱警告/車線維持支援又はアダプティブクルーズコントロールなどの支援機能を実施する。
図1に示されるように、車両100は、推進システム102、センサシステム104、制御システム106、1つ以上の周辺機器108、電源110、コンピュータシステム112(コンピューティングシステムとも称され得る)、データストレージ114、及びユーザインターフェース116などの様々なサブシステムを含み得る。他の例では、車両100は、各々複数の要素を含み得る、より多いか又はより少ないサブシステムを含み得る。車両100のサブシステム及び構成要素は、様々な方法で相互接続され得る。加えて、本明細書で説明される車両100の機能は、追加の機能的又は物理的構成要素に分割されるか、又は実施形態内でより少ない機能的若しくは物理的構成要素に組み合わせられ得る。例えば、制御システム106及びコンピュータシステム112は、様々な動作に従って車両100を動作させる単一のシステムに組み合わせられ得る。
推進システム102は、車両100に対して動力付き運動を提供するように動作可能な1つ以上の構成要素を含み得、他の可能な構成要素の中でも、エンジン/モータ118、エネルギー源119、トランスミッション120、及び車輪/タイヤ121を含み得る。例えば、エンジン/モータ118は、エネルギー源119を機械的エネルギーに変換するように構成され得、他の可能な選択肢の中でも、内燃エンジン、電気モータ、蒸気エンジン、又はスターリングエンジンのうちの1つ又は組み合わせに対応し得る。例えば、いくつかの実施形態では、推進システム102は、ガソリンエンジン及び電気モータなどの多数のタイプのエンジン及び/又はモータを含み得る。
エネルギー源119は、完全に又は部分的に、車両100の1つ以上のシステム(例えば、エンジン/モータ118)に動力を供給し得るエネルギー源を表す。例えば、エネルギー源119は、ガソリン、ディーゼル、他の石油ベースの燃料、プロパン、他の圧縮ガスベースの燃料、エタノール、ソーラパネル、電池、及び/又は他の電力源に対応することができる。いくつかの実施形態では、エネルギー源119は、燃料タンク、電池、コンデンサ、及び/又はフライホイールの組み合わせを含み得る。
トランスミッション120は、エンジン/モータ118からの機械動力を、車輪/タイヤ121及び/又は車両100の他の可能なシステムに伝達し得る。したがって、トランスミッション120は、他の可能な構成要素の中でもとりわけ、ギアボックス、クラッチ、ディファレンシャル、及び駆動シャフトを含み得る。駆動シャフトは、1つ以上の車輪/タイヤ121に接続する車軸を含み得る。
車両100の車輪/タイヤ121は、例示的な実施形態内で様々な構成を有し得る。例えば、車両100は、他の可能な構成の中でも、一輪車、自転車/オートバイ、三輪車、又は自動車/トラックの四輪の形態で存在し得る。したがって、車輪/タイヤ121は、様々な方法で車両100に接続し得、金属及びゴムなどの異なる材料で存在することができる。
センサシステム104は、他の可能なセンサの中でも特に、全地球測位システム(GPS)122、慣性測定ユニット(IMU)124、RADAR126、レーザ距離計/LIDAR128、カメラ130、ステアリングセンサ123、及びスロットル/ブレーキセンサ125などの様々なタイプのセンサを含むことができる。いくつかの実施形態では、センサシステム104は、車両100の内部システムを監視するように構成されたセンサ(例えば、O2モニタ、燃料計、エンジンオイル温度、ブレーキ摩耗)も含み得る。
GPS122は、地球に対する車両100の位置に関する情報を提供するように動作可能なトランシーバを含み得る。IMU124は、1つ以上の加速度計及び/又はジャイロスコープを使用する構成を有し得、慣性加速度に基づいて車両100の位置及び配向の変化を感知し得る。例えば、IMU124は、車両100が静止しているか、又は動いている間に車両100のピッチ及びヨーを検出し得る。
RADAR126は、物体の速さ及び方位を含めて、無線信号を使用して、車両100のローカル環境内の物体を感知するように構成された1つ以上のシステムを表し得る。したがって、RADAR126は、無線信号を送信及び受信するように構成されたアンテナを含み得る。いくつかの実施形態では、RADAR126は、車両100の周囲環境の測定値を得るように構成された取り付け可能なRADARシステムに対応し得る。
レーザ距離計/LIDAR128は、他のシステム構成要素の中でも特に、1つ以上のレーザ源、レーザスキャナ、及び1つ以上の検出器を含み得、コヒーレントモード(例えば、ヘテロダイン検出を使用)又はインコヒーレント検出モード(すなわち、飛行時間モード)で動作し得る。いくつかの実施形態では、レーザ距離計/LIDAR128の1つ以上の検出器は、1つ以上の光検出器を含み得る。このような光検出器は、特に高感度検出器であり得る。いくつかの例では、そのような光検出器は、単一光子を検出することが可能であり得る(例えば、SPAD)。更に、そのような光検出器は、アレイ内に配置され得る(例えば、SiPMのように)(例えば、直列の電気接続を通して)。いくつかの例では、1つ以上の光検出器は、ガイガーモードで動作するデバイスであり、LIDARは、そのようなガイガーモード動作のために設計されたサブ構成要素を含む。
カメラ130は、車両100の周囲環境の画像を捕捉するように構成された、1つ以上のデバイス(例えば、静止カメラ、ビデオカメラ、熱画像カメラ、ステレオカメラ、ナイトビジョンカメラなど)を含み得る。
ステアリングセンサ123は、車両100のステアリング角度を感知し得、これは、ステアリングホイールの角度を測定すること、又はステアリングホイールの角度を表す電気信号を測定することを含み得る。いくつかの実施形態では、ステアリングセンサ123は、車両100の前方軸に対する車輪の角度を検出するなど、車両100の車輪の角度を測定し得る。ステアリングセンサ123はまた、ステアリングホイールの角度、ステアリングホイールの角度を表す電気信号、及び車両100の車輪の角度の組み合わせ(又はサブセット)を測定するように構成され得る。
スロットル/ブレーキセンサ125は、車両100のスロットル位置又はブレーキ位置のいずれかの位置を検出し得る。例えば、スロットル/ブレーキセンサ125は、アクセルペダル(スロットル)及びブレーキペダルの両方の角度を測定し得るか、又は、例えば、アクセルペダル(スロットル)の角度及び/若しくはブレーキペダルの角度を表し得る電気信号を測定し得る。スロットル/ブレーキセンサ125はまた、エンジン/モータ118(例えば、バタフライバルブ又はキャブレタ)にエネルギー源119のモジュレーションを提供する物理的機構の一部を含み得る、車両100のスロットルボディの角度を測定し得る。追加的に、スロットル/ブレーキセンサ125は、車両100のロータ上の1つ以上のブレーキパッドの圧力、又はアクセルペダル(スロットル)及びブレーキペダルの角度の組み合わせ(又はサブセット)、アクセルペダル(スロットル)及びブレーキペダルの角度を表す電気信号、スロットルボディの角度、並びに少なくとも1つのブレーキパッドが車両100のロータに加える圧力、を測定し得る。他の実施形態では、スロットル/ブレーキセンサ125は、スロットル又はブレーキペダルなどの車両のペダルに加えられた圧力を測定するように構成され得る。
制御システム106は、ステアリングユニット132、スロットル134、ブレーキユニット136、センサ融合アルゴリズム138、コンピュータビジョンシステム140、ナビゲーション/経路探索システム142、及び障害物回避システム144など、車両100をナビゲートすることを支援するように構成された構成要素を含み得る。より具体的には、ステアリングユニット132は、車両100の方位を調整するように動作可能であり得、スロットル134は、エンジン/モータ118の動作スピードを制御して、車両100の加速を制御し得る。ブレーキユニット136は、車両100を減速し得、これは、摩擦を使用して車輪/タイヤ121を減速することを伴い得る。いくつかの実施形態では、ブレーキユニット136は、車両100の1つ以上のシステムによるその後の使用のために、車輪/タイヤ121の運動エネルギーを電流に変換し得る。
センサ融合アルゴリズム138は、カルマンフィルタ、ベイジアンネットワーク、又はセンサシステム104からのデータを処理することができる他のアルゴリズムを含み得る。いくつかの実施形態では、センサ融合アルゴリズム138は、個々の物体及び/若しくは特徴の評価、特定の状況の評価、並びに/又は所与の状況内の可能性のある影響の評価など、着信センサデータに基づくアセスメントを提供し得る。
コンピュータビジョンシステム140は、物体、環境物体(例えば、交通信号、車道境界など)、及び障害物を判定しようとする際に画像を処理し、分析するように動作可能なハードウェア及びソフトウェアを含み得る。したがって、コンピュータビジョンシステム140は、物体認識、ストラクチャフロムモーション(SFM)、ビデオ追跡、及び、例えば、物体を認識し、環境をマッピングし、物体を追跡し、物体のスピードを推定するためなどにコンピュータビジョンで使用される他のアルゴリズムを使用し得る。
ナビゲーション/経路探索システム142は、車両100の運転経路を判定し得、これは、動作中にナビゲーションを動的に調整することを伴い得る。したがって、ナビゲーション/経路探索システム142は、数ある情報源の中でも特に、センサ融合アルゴリズム138、GPS122、及びマップからのデータを使用して、車両100をナビゲートし得る。障害物回避システム144は、センサデータに基づいて潜在的な障害物を評価し、車両100のシステムに潜在的な障害物を回避させるか、又は別様に切り抜けさせ得る。
図1に示されるように、車両100はまた、無線通信システム146、タッチスクリーン148、マイクロフォン150、及び/又はスピーカ152などの周辺機器108を含み得る。周辺機器108は、ユーザがユーザインターフェース116と相互作用するための制御又は他の要素を提供し得る。例えば、タッチスクリーン148は、車両100のユーザに情報を提供し得る。ユーザインターフェース116はまた、タッチスクリーン148を介してユーザからの入力を受け入れ得る。周辺機器108はまた、車両100が、他の車両のデバイスなどのデバイスと通信することを可能にし得る。
無線通信システム146は、1つ以上のデバイスと直接又は通信ネットワークを介して無線で通信し得る。例えば、無線通信システム146は、符号分割多重アクセス(CDMA)、エボリューションデータ最適化(EVDO)、モバイル通信用グローバルシステム(GSM)/汎用パケット無線サービス(GPRS)などの3Gセルラー通信、又は4Gワールドワイドインターオペラビリティフォーマイクロウェーブアクセス(WiMAX)若しくはロングタームエボリューション(LTE)などのセルラー通信、又は5Gを使用し得る。代替的に、無線通信システム146は、WIFI(登録商標)又は他の可能な接続を使用して無線ローカルエリアネットワーク(WLAN)と通信し得る。無線通信システム146はまた、例えば、赤外線リンク、Bluetooth、又はZigBeeを使用してデバイスと直接通信し得る。様々な車両通信システムなどの他の無線プロトコルが、本開示の文脈内で可能である。例えば、無線通信システム146は、車両及び/又は路側給油所間の公共及び/又は私的データ通信を含み得る1つ以上の専用狭域通信(DSRC)デバイスを含み得る。
車両100は、構成要素に電力を供給するための電源110を含み得る。電源110は、いくつかの実施形態では、再充電可能なリチウムイオン又は鉛蓄電池を含み得る。例えば、電源110は、電力を提供するように構成された1つ以上の電池を含み得る。車両100はまた、他のタイプの電源を使用し得る。例示的な実施形態では、電源110とエネルギー源119とが、統合されて単一のエネルギー源になり得る。
車両100はまた、そこに説明されている動作などの動作を行うためのコンピュータシステム112を含み得る。したがって、コンピュータシステム112は、データストレージ114などの非一時的なコンピュータ可読媒体に記憶された命令115を実行するように動作可能な少なくとも1つのプロセッサ113(少なくとも1つのマイクロプロセッサを含み得る)を含み得る。いくつかの実施形態では、コンピュータシステム112は、車両100の個々の構成要素又はサブシステムを分散方式で制御するように機能し得る複数のコンピューティングデバイスを表し得る。
いくつかの実施形態では、データストレージ114は、図1に関連して上述したものを含めて、車両100の様々な機能を実行するための、プロセッサ113によって実行可能な命令115(例えば、プログラム論理)を含み得る。データストレージ114は、推進システム102、センサシステム104、制御システム106、及び周辺機器108のうちの1つ以上にデータを送信する、データを受信する、相互作用する、及び/又は制御する命令を含む追加の命令も含み得る。
命令115に加えて、データストレージ114は、情報の中でもとりわけ、道路地図、経路情報などのデータを記憶し得る。そのような情報は、自律モード、半自律モード、及び/又は手動モードにおける車両100の動作中に、車両100及びコンピュータシステム112によって使用され得る。
車両100は、車両100のユーザに情報を提供するか、又は車両100のユーザから入力を受信するためのユーザインターフェース116を含み得る。ユーザインターフェース116は、タッチスクリーン148上に表示され得るコンテンツ及び/又はインタラクティブ画像のレイアウトを制御する又は制御を可能にし得る。更に、ユーザインターフェース116は、無線通信システム146、タッチスクリーン148、マイクロフォン150、及びスピーカ152などの周辺機器108のセット内の1つ以上の入力/出力デバイスを含み得る。
コンピュータシステム112は、様々なサブシステム(例えば、推進システム102、センサシステム104、及び制御システム106)から、並びにユーザインターフェース116から受信した入力に基づいて、車両100の機能を制御し得る。例えば、コンピュータシステム112は、推進システム102及び制御システム106によって生成された出力を推定するために、センサシステム104からの入力を利用し得る。実施形態に応じて、コンピュータシステム112は、車両100及びそのサブシステムの多くの態様を監視するように動作可能であり得る。いくつかの実施形態では、コンピュータシステム112は、センサシステム104から受信した信号に基づいて、車両100の一部又は全ての機能を無効にし得る。
車両100の構成要素は、それらのそれぞれのシステム内又は外部の他の構成要素と相互接続された方式で機能するように構成され得る。例えば、例示的な実施形態では、カメラ130は、自律モードで動作している車両100の周囲環境の状態に関する情報を表し得る複数の画像を捕捉し得る。周囲環境の状態は、車両が動作している道路のパラメータを含み得る。例えば、コンピュータビジョンシステム140は、道路の複数の画像に基づいて、傾斜(勾配)又は他の特徴を認識することが可能であり得る。追加的に、GPS122とコンピュータビジョンシステム140によって認識された特徴との組み合わせは、具体的な道路パラメータを判定するために、データストレージ114に記憶された地図データとともに使用され得る。更に、RADAR126及び/若しくはレーザ距離計/LIDAR128、並びに/又はいくつかの他の環境マッピング、範囲、及び/若しくは測位センサシステムもまた、車両の周囲についての情報を提供し得る。
言い換えると、様々なセンサ(入力指標センサ及び出力指標センサと呼ばれ得る)とコンピュータシステム112との組み合わせが相互作用して、車両を制御するために提供される入力の指標又は車両の周囲の指標を提供し得る。
いくつかの実施形態では、コンピュータシステム112は、無線システム以外のシステムによって提供されるデータに基づいて、様々な物体に関する判定を行い得る。例えば、車両100は、車両の視野内の物体を感知するように構成されたレーザ又は他の光学センサを有し得る。コンピュータシステム112は、様々なセンサからの出力を使用して、車両の視野内の物体に関する情報を判定し得、様々な物体までの距離及び方向情報を判定し得る。コンピュータシステム112はまた、様々なセンサからの出力に基づいて、物体が望ましいか、又は望ましくないかを判定し得る。
図1は、車両100の様々な構成要素(すなわち、無線通信システム146、コンピュータシステム112、データストレージ114、及びユーザインターフェース116)を車両100に統合されているものとして示しているが、これらの構成要素のうちの1つ以上は、車両100とは別個に取り付けられるか又は関連付けられ得る。例えば、データストレージ114は、部分的又は完全に、車両100とは別個に存在し得る。したがって、車両100は、別個に又は一緒に位置し得るデバイス要素の形態で提供され得る。車両100を構成するデバイス要素は、有線及び/又は無線方式で一緒に通信可能に結合され得る。
図2A~2Eは、図1を参照して車両100に関連して説明された機能の一部又は全てを含み得る例示的な車両200(例えば、完全自律車両又は半自律車両)を示す。車両200は、例解目的で、側面ミラー216を有するバンとして図2A~2Eに例解されているが、本開示は、そのように限定されるものではない。例えば、車両200は、トラック、乗用車、セミトレーラートラック、オートバイ、ゴルフカート、オフロード車両、農業用車両、又は本明細書の他の箇所で説明される任意の他の車両(例えば、バス、ボート、飛行機、ヘリコプタ、ドローン、芝刈り機、ブルドーザ、潜水艦、全地形対応車両、スノーモービル、航空機、レクリエーション車両、遊園地車両、農機具、建設機械又は建設車両、倉庫設備又は倉庫車両、工場設備又は工場車両、トラム、電車、トロリー、歩道運搬車両、及びロボットデバイスなど)を表し得る。
例示的な車両200は、1つ以上のセンサシステム202、204、206、208、210、212、214、及び218を含み得る。いくつかの実施形態では、センサシステム202、204、206、208、210、212、214、及び/又は218は、1つ以上の光学システム(例えば、カメラなど)、1つ以上のLIDAR、1つ以上のRADAR、1つ以上の距離計、1つ以上の慣性センサ、1つ以上の湿度センサ、1つ以上の音響センサ(例えば、マイクロフォン、ソナーデバイスなど)、又は車両200を取り囲む環境についての情報を感知するように構成された1つ以上の他のセンサを表し得る。言い換えると、本明細書の他の箇所で説明される任意のセンサシステムは、車両200に結合され得、及び/又は車両200の様々な動作と併せて利用され得る。一例として、LIDARシステムは、自動運転、又は車両200の他のタイプのナビゲーション、計画、知覚、及び/若しくはマッピング動作に利用され得る。加えて、センサシステム202、204、206、208、210、212、214、及び/又は218は、本明細書に説明されるセンサ(例えば、1つ以上のLIDAR及びRADAR、1つ以上のLIDAR及びカメラ、1つ以上のカメラ及びRADARなど)の組み合わせを表し得る。
いくつかの例では、センサシステムは、車両200上の様々な他の場所に配設され得、車両200の内部及び/又は周囲環境に対応する視野を有し得る。1つ以上のセンサシステム202、204、206、208、210、212、214、及び/又は218が車両200上の特定の場所に例解されているが、より多いか又はより少ないセンサシステムが車両200で利用され得ることが理解されよう。更に、そのようなセンサシステムの場所は、図2A~2Eに例解されたセンサシステムの場所と比較して、調整、修正、又は別様に変更され得る。
1つ以上のセンサシステム202、204、206、208、210、212、214、及び/又は218は、1つ以上のLIDARセンサを含み得る。例えば、LIDARシステムは、所与の平面(例えば、x-y平面)に対してある角度範囲にわたって配設された複数の光エミッタデバイスを含み得る。例えば、センサシステム202、204、206、208、210、212、214、及び/又は218のうちの1つ以上は、車両200を取り囲む環境を光パルスで照明するように、所与の平面に垂直な軸(例えば、z軸)の周りを回転又は枢動するように構成され得る。反射光パルスの様々な態様(例えば、経過した飛行時間、偏光、強度など)の検出に基づいて、周囲環境についての情報が判定され得る。
例示的な実施形態では、センサシステム202、204、206、208、210、212、214、及び/又は218は、車両200の周囲環境内の物理的物体に関連し得るそれぞれの点群情報を提供するように構成され得る。車両200、並びにセンサシステム202、204、206、208、210、212、214、及び218は、特定の特徴を含むものとして例解されているが、他のタイプのセンサシステムが本開示の範囲内で企図されることが理解されよう。更に、例示的な車両200は、図1の車両100に関連して説明された構成要素のいずれかを含むことができる。
図2A~Eに図示されるセンサユニット(例えば、202、204など)の数、場所、及びタイプが、自律又は半自律車両のそのようなセンサユニットの場所、数、及びタイプの非限定的な例として意図されていることに留意されたい。そのようなセンサの代替的な数、場所、タイプ、及び構成が可能である(例えば、車両サイズ、形状、空気力学、燃料経済、美観、又はコストを低減するか、特殊な環境若しくは適用状況に適合するための他の条件などと適合するために)。
センサシステム202は、車両200の上部に取り付けられ、車両200を取り囲む環境についての情報を検出し、情報の指標を出力するように構成された1つ以上のセンサを含み得る。例えば、センサシステム202は、カメラ、RADAR、LIDAR、距離計、慣性センサ、湿度センサ、及び音響センサ(例えば、マイクロフォン、ソナーデバイスなど)の任意の組み合わせを含み得る。センサシステム202は、センサシステム202内の1つ以上のセンサの向きを調整するように動作可能であり得る1つ以上の可動マウントを含み得る。一実施形態では、可動マウントは、車両200の周囲の各方向から情報を得るようにセンサを走査し得る回転プラットフォームを含み得る。別の実施形態では、センサシステム202の可動マウントは、特定の角度及び/又は方位角及び/又は仰角の範囲内で走査するように移動可能であり得る。センサシステム202は、他の取り付け場所も考えられ得るが、車の屋根上に取り付けられ得る。
追加的に、センサシステム202のセンサは、様々な場所に分散され得、単一の場所に併置される必要はない。更に、センサシステム202の各センサは、センサシステム202の他のセンサとは独立して移動又は走査されるように構成され得る。追加的又は代替的に、複数のセンサは、センサ場所202、204、206、208、210、212、214、及び/又は218のうちの1つ以上に取り付けられ得る。例えば、センサ場所に取り付けられた2つのLIDARデバイスが存在し得、並びに/又はセンサ場所に取り付けられた1つのLIDARデバイス及び1つのRADARが存在し得る。
例示的な構成では、1つ以上のRADARが車両200上に位置し得る。例えば、1つ以上のセンサシステム202、204、206、208、210、212、214、及び/又は218は、1つ以上のRADARを含み得る。いくつかの例では、1つ以上のRADARが、車両200の後部付近に位置して(例えば、センサシステム208、210など)、電波反射物体の存在に関して、車両200の背面付近の環境を能動的に走査し得る。同様に、1つ以上のRADARが、車両200の前方付近に位置して(例えば、センサシステム212、214など)、車両200の前方付近の環境を能動的に走査し得る。RADARは、例えば、車両200の他の特徴によって塞がれることなく、車両200の前進路を含む領域を照明するのに好適な場所に位置付けられ得る。例えば、RADARは、フロントバンパー、フロントヘッドライト、カウル、及び/若しくはフードなどに埋め込まれる、並びに/又はそれらに若しくはそれらの近くに取り付けられ得る。更に、1つ以上の追加のRADARは、リアバンパー、サイドパネル、ロッカーパネル、及び/又は車台などに、又はそれらの近くにそのようなデバイスを含めることなどによって、電波反射物体の存在に関して、車両200の側面及び/又は後方を能動的に走査するように位置し得る。
車両200は、1つ以上のカメラを含み得る。例えば、1つ以上のセンサシステム202、204、206、208、210、212、214、及び/又は218は、1つ以上のカメラを含み得る。カメラは、車両200の周囲環境の複数の画像を捕捉するように構成されている、静止カメラ、ビデオカメラ、熱画像カメラ、ステレオカメラ、ナイトビジョンカメラなどの感光性機器であり得る。この目的のために、カメラは、可視光を検出するように構成され得、追加的又は代替的に、赤外光又は紫外光などのスペクトルの他の部分からの光を検出するように構成され得る。カメラは、二次元検出器であり得、任意選択的に、三次元空間の感度範囲を有し得る。いくつかの実施形態では、カメラは、例えば、カメラから周囲環境内のいくつかの点までの距離を示す二次元画像を生成するように構成された範囲検出器を含み得る。この目的のために、カメラは、1つ以上の範囲検出技法を使用し得る。例えば、カメラは、構造化光技法を使用することによって範囲情報を提供することができ、この構造化光技法では、車両200が、格子又はチェッカーボードパターンなどの所定の光パターンで周囲環境内の物体を照明し、カメラを使用して、環境周囲からの所定の光パターンの反射を検出する。反射光パターンの歪みに基づいて、車両200は、物体上の点までの距離を判定し得る。所定の光パターンは、赤外光、又はそのような測定に好適な他の波長の放射線で構成され得る。いくつかの例では、カメラは、車両200のフロントガラスの内側に取り付けられ得る。具体的には、カメラは、車両200の向きに対して前方視から画像を捕捉するように位置付けられ得る。カメラの他の取り付け場所及び視野角も使用され得、車両200の内部又は外部のいずれでもあり得る。また、カメラは、調整可能な視野を提供するように動作可能な関連する光学素子を有し得る。更にまた、カメラは、パン/チルト機構などを介して、カメラの指向角を変えるように、可動マウントを用いて車両200に取り付けられ得る。
図2A~2Eには示されていないが、車両200は、無線通信システムを含み得る。無線通信システムは、車両200の外部又は内部のデバイスと通信するように構成され得る無線送信機及び無線受信機を含み得る。具体的には、無線通信システムは、例えば、車両通信システム又は道路給油所において、他の車両及び/又はコンピューティングデバイスと通信するように構成されたトランシーバを含み得る。このような車両通信システムの例には、DSRC、無線周波数識別(RFID)、及びインテリジェントトランスポートシステム向けに提案された他の通信規格が含まれる。
車両200は、これら示されたものに加えて、又はその代わりに1つ以上の他の構成要素を含み得る。追加の構成要素は、電気的又は機械的機能を含み得る。
車両200の制御システムは、複数の可能な制御戦略の中から制御戦略に従って車両200を制御するように構成され得る。制御システムは、車両200に結合されたセンサ(車両200上又は車両外)から情報を受信し、その情報に基づいて制御戦略(及び関連する運転挙動)を修正し、修正された制御戦略に従って車両200を制御するように構成され得る。制御システムは、センサから受信した情報を監視し、運転状態を継続的に評価するように更に構成され得、また、運転状態の変化に基づいて、制御戦略及び運転挙動を修正するように構成され得る。
図3は、例示的な実施形態による、自律車両に関連する様々なコンピューティングシステム間の無線通信の概念例解図である。特に、無線通信は、ネットワーク304を介して、リモートコンピューティングシステム302と車両200との間で発生し得る。無線通信はまた、サーバコンピューティングシステム306とリモートコンピューティングシステム302との間、及びサーバコンピューティングシステム306と車両200との間でも発生し得る。
車両200は、場所間で乗客又は物体を輸送することができる様々なタイプの車両に対応することができ、上で考察される車両のうちの任意の1つ以上の形態を採り得る。場合によっては、車両200は、制御システムがセンサ測定値を使用して目的地間で車両200を安全にナビゲートすることを可能にする自律モードで動作し得る。自律モードで動作しているとき、車両200は、乗客の有無にかかわらずナビゲートし得る。その結果、車両200は、所望の目的地間で乗客を拾い、降ろし得る。
リモートコンピューティングシステム302は、本明細書で説明されるものを含むが、これに限定されない、リモートアシスタンス技術に関連する任意のタイプのデバイスを表し得る。例の中で、リモートコンピューティングシステム302は、(i)車両200に関係する情報を受信し、(ii)インターフェースを提供し、それを通して、次に人間のオペレータが情報に気付き、情報に関係する応答を入力することができ、(iii)応答を車両200に、又は他のデバイスに送信するように構成された任意のタイプのデバイスを表し得る。リモートコンピューティングシステム302は、ワークステーション、デスクトップコンピュータ、ラップトップ、タブレット、携帯電話(例えば、スマートフォン)、及び/又はサーバなどの、様々な形態を採り得る。いくつかの例では、リモートコンピューティングシステム302は、ネットワーク構成で一緒に動作する複数のコンピューティングデバイスを含み得る。
リモートコンピューティングシステム302は、車両200のサブシステム及び構成要素と同様又は同一の1つ以上のサブシステム及び構成要素を含み得る。少なくとも、リモートコンピューティングシステム302は、本明細書で説明する様々な動作を実行するように構成されたプロセッサを含み得る。いくつかの実施形態では、リモートコンピューティングシステム302は、タッチスクリーン及びスピーカなどの入力/出力デバイスを含むユーザインターフェースも含み得る。他の例も同じく可能である。
ネットワーク304は、リモートコンピューティングシステム302と車両200との間の無線通信を可能にするインフラストラクチャを表す。ネットワーク304はまた、サーバコンピューティングシステム306とリモートコンピューティングシステム302との間、及びサーバコンピューティングシステム306と車両200との間の無線通信を可能にする。
リモートコンピューティングシステム302の位置は、例の範囲内で変わることができる。例えば、リモートコンピューティングシステム302は、ネットワーク304を介した無線通信を有する車両200からリモート位置にあり得る。別の例では、リモートコンピューティングシステム302は、車両200とは別個であるが、人間のオペレータが車両200の乗客又は運転手と相互作用することができる、車両200内のコンピューティングデバイスに対応し得る。いくつかの例では、リモートコンピューティングシステム302は、車両200の乗客によって操作可能なタッチスクリーンを備えたコンピューティングデバイスであり得る。
いくつかの実施形態では、リモートコンピューティングシステム302によって行われる本明細書で説明される動作は、追加的又は代替的に、車両200によって(すなわち、車両200の任意のシステム又はサブシステムによって)行われ得る。言い換えると、車両200は、車両の運転手又は乗客が相互作用することができるリモートアシスタンス機構を提供するように構成され得る。
サーバコンピューティングシステム306は、ネットワーク304を介してリモートコンピューティングシステム302及び車両200と(又は、場合によっては、リモートコンピューティングシステム302及び/若しくは車両200と直接)無線通信するように構成され得る。サーバコンピューティングシステム306は、車両200及びそのリモートアシスタンスに関する情報を受信し、記憶し、判定し、かつ/又は送信するように構成された任意のコンピューティングデバイスを表し得る。このように、サーバコンピューティングシステム306は、リモートコンピューティングシステム302及び/又は車両200によって行われるものとして本明細書で説明される任意の動作又はそのような動作の部分を行うように構成され得る。リモートアシスタンスに関連する無線通信のいくつかの実施形態は、サーバコンピューティングシステム306を利用する場合があるが、他の実施形態は利用しない場合がある。
サーバコンピューティングシステム306は、本明細書に説明される様々な動作を行うように構成されたプロセッサ、並びにリモートコンピューティングシステム302及び車両200から情報を受信し、それらに情報を提供するための無線通信インターフェースなどの、リモートコンピューティングシステム302及び/又は車両200のサブシステム及び構成要素と同様又は同一の1つ以上のサブシステム及び構成要素を含み得る。
上記の様々なシステムは、様々な動作を行い得る。ここで、これらの動作及び関連する特徴について説明する。
上の考察に沿えば、コンピューティングシステム(例えば、リモートコンピューティングシステム302、サーバコンピューティングシステム306、又は車両200にローカルなコンピューティングシステム)は、カメラを使用して自律車両の周囲環境の画像を捕捉するように動作し得る。概して、少なくとも1つのコンピューティングシステムが画像を分析して、可能であれば自律車両を制御することができる。
いくつかの実施形態では、自律動作を容易にするために、車両(例えば、車両200)は、車両を取り囲む環境内の物体を表すデータ(本明細書では「環境データ」とも称される)を様々な方法で受信し得る。車両のセンサシステムは、周囲環境の物体を表す環境データを提供し得る。例えば、車両は、カメラ、RADARユニット、レーザ距離計、マイクロフォン、無線ユニット、及び他のセンサを含む様々なセンサを有し得る。これらのセンサの各々は、各それぞれのセンサが受信する情報について、環境データを車両内のプロセッサに通信し得る。
一例では、カメラが、静止画像及び/又はビデオを捕捉するように構成され得る。いくつかの実施形態では、車両は、異なる向きに位置付けられた2つ以上のカメラを有する場合がある。また、いくつかの実施形態では、カメラは、異なる方向で画像及び/又はビデオを捕捉するために移動することが可能であり得る。カメラは、車両の処理システムによる後の処理のために、捕捉された画像及びビデオをメモリに記憶するように構成され得る。捕捉された画像及び/又はビデオは、環境データである場合がある。更に、カメラは、本明細書で説明されるような画像センサを含み得る。
別の例では、RADARユニットが、車両の近くの様々な物体によって反射される電磁信号を送信し、次いで物体から反射する電磁信号を捕捉するように構成され得る。捕捉された反射電磁信号は、RADARシステム(又は処理システム)が電磁信号を反射した物体について様々な判定を行うことを可能にし得る。例えば、様々な反射物体までの距離及び位置が判定され得る。いくつかの実施形態では、車両は、異なる向きに2つ以上のRADARを有し得る。RADARシステムは、車両の処理システムによる後の処理のために、捕捉された情報をメモリに記憶するように構成され得る。RADARシステムによって捕捉された情報は、環境データである場合がある。
別の例では、レーザ距離計が、車両近くの対象物体によって反射される電磁信号(例えば、気体若しくはダイオードレーザ、又は他の可能な光源からのものなどの赤外光)を送信するように構成され得る。レーザ距離計は、反射された電磁(例えば、レーザ)信号を捕捉することが可能であり得る。捕捉された反射電磁信号は、測距システム(又は処理システム)が様々な物体までの距離を判定することを可能にし得る。レーザ距離計はまた、対象物体の速度又はスピードを判定し、かつそれを環境データとして記憶することが可能であり得る。
追加的に、一例では、マイクロフォンが、車両の周囲の環境のオーディオを捕捉するように構成され得る。マイクロフォンで捕捉された音は、緊急車両のサイレン及び他の車両の音を含み得る。例えば、マイクロフォンは、救急車、消防自動車、警察車両のサイレンの音を捕捉し得る。処理システムは、捕捉されたオーディオ信号が緊急車両を示していることを識別することが可能であり得る。別の例では、マイクロフォンは、オートバイからの排気など、別の車両の排気の音を捕捉し得る。処理システムは、捕捉されたオーディオ信号がオートバイを示していることを識別することが可能であり得る。マイクロフォンによって捕捉されたデータは、環境データの一部を形成し得る。
更に別の例では、ラジオユニットが、Bluetooth信号、802.11信号、及び/又は他の無線技術信号の形態を採り得る電磁信号を送信するように構成され得る。第1の電磁放射信号は、無線ユニットに位置する1つ以上のアンテナを介して送信され得る。更に、第1の電磁放射信号は、多くの異なる無線信号モードのうちの1つで送信され得る。しかしながら、いくつかの実施形態では、自律車両の近くに位置するデバイスからの応答を要求する信号モードで第1の電磁放射信号を送信することが望ましい。処理システムは、ラジオユニットに返信された応答に基づいて近くのデバイスを検出し、この通信された情報を環境データの一部として使用し得る。
いくつかの実施形態では、処理システムは、車両の周囲環境を更に判定するために、様々なセンサからの情報を組み合わせることが可能であり得る。例えば、処理システムは、RADAR情報及び捕捉された画像の両方からのデータを組み合わせて、別の車両又は歩行者が自律車両の前にいるかどうかを判定し得る。他の実施形態では、センサデータの他の組み合わせを処理システムが使用して、周囲環境についての判定を行い得る。
自律モード(又は半自律モード)で動作している間、車両はほとんど又はまったく人間の入力なしでその動作を制御し得る。例えば、人間のオペレータが住所を車両に入力した場合、車両は、人間からの更なる入力なしに(例えば、人間がブレーキ/アクセルペダルを操縦したり触れたりする必要がなく)、指定された目的地まで運転することが可能であり得る。更に、車両が自律的に動作している間、センサシステムは環境データを受信している場合がある。車両の処理システムは、様々なセンサから受信した環境データに基づいて車両の制御を変更し得る。いくつかの例では、車両は、様々なセンサからの環境データに応答して、車両の速度を変え得る。車両は、障害物を回避し、交通法に従うなどのために速度を変え得る。車両での処理システムが車両の近くの物体を識別すると、車両は速度を変更するか、又は別の方法で動きを変えることが可能であり得る。
車両が物体を検出したが物体の検出に十分自信がない場合、車両は、人間のオペレータ(又はより強力なコンピュータ)に、(i)物体が実際に周囲環境内に存在するかどうかを確認する(例えば、実際に一時停止標識があるか、又は実際に一時停止標識がないか)、(ii)車両の物体の識別が正しいかどうかを確認する、(iii)識別が正しくなかった場合、識別を修正する、及び/又は(iv)自律車両に対して補足的な命令を提供する(又は現在の命令を修正する)などの、1つ以上のリモートアシスタンスタスクを行うように要求することができる。リモートアシスタンスタスクにはまた、人間のオペレータが車両の動作を制御するための命令を提供する(例えば、人間のオペレータが、物体は一時停止標識であると判定した場合、一時停止標識で停止するよう車両に命令する)ことが含まれるが、いくつかのシナリオでは、物体の識別に関連する人間のオペレータのフィードバックに基づいて、車両自体が自身の動作を制御する場合がある。
これを容易にするために、車両は、周囲環境の物体を表す環境データを分析して、閾値未満の検出信頼度を有する少なくとも1つの物体を判定し得る。車両のプロセッサは、様々なセンサからの環境データに基づいて周囲環境の様々な物体を検出するように構成され得る。例えば、一実施形態では、プロセッサは、車両が認識するのに重要であり得る物体を検出するように構成され得る。このような物体には、歩行者、街路標識、他の車両、他の車両のインジケータ信号、及び捕捉された環境データで検出された他の様々な物体が含まれ得る。
検出信頼度は、判定された物体が周囲環境内で正しく識別されている、又は周囲環境内に存在している可能性を示し得る。例えば、プロセッサは、受信した環境データにおける画像データ内の物体の物体検出を行い、少なくとも1つの物体が、閾値を超える検出信頼度を有すると識別することができないことに基づいて、その物体が閾値を下回る検出信頼度を有すると判定し得る。物体の物体検出又は物体認識の結果が決定的でない場合、検出信頼度が低いか、又は設定閾値を下回っていることがある。
車両は、環境データのソースに応じて、様々な方法で周囲環境の物体を検出し得る。いくつかの実施形態では、環境データは、カメラから来る、画像又はビデオデータであり得る。他の実施形態では、環境データは、LIDARユニットから来る場合がある。車両は、捕捉された画像又はビデオデータを分析して、画像又はビデオデータ内の物体を識別し得る。方法及び装置は、周囲環境の物体の存在について、画像及び/又はビデオデータを監視するように構成され得る。他の実施形態では、環境データは、RADAR、オーディオ、又は他のデータであり得る。車両は、RADAR、オーディオ、又は他のデータに基づいて周囲環境の物体を識別するように構成され得る。
いくつかの実施形態では、物体を検出するために車両が使用する技術は、既知のデータのセットに基づき得る。例えば、環境物体に関連するデータは、車両に位置するメモリに記憶され得る。車両は、受信したデータを記憶されたデータと比較して、物体を判定し得る。他の実施形態では、車両は、データの文脈に基づいて物体を判定するように構成され得る。例えば、工事に関連する街路標識は、概してオレンジ色を有し得る。したがって、車両は、道路脇近くに位置するオレンジ色の物体を、工事関連の街路標識として検出するように構成され得る。追加的に、車両の処理システムは、捕捉されたデータ内の物体を検出すると、それはまた各物体の信頼度を計算し得る。
更に、車両はまた、信頼度閾値を有し得る。信頼度閾値は、検出される物体のタイプに応じて異なり得る。例えば、別の車両のブレーキライトなど、車両からの迅速な応答アクションを要求し得る物体については、信頼度閾値が低くなり得る。しかしながら、他の実施形態では、検出された全ての物体について、信頼度閾値が同じであり得る。検出された物体に関連付けられた信頼度が信頼度閾値より高い場合、車両は、物体が正しく認識されたと想定し、その想定に基づいて車両の制御を応答的に調整し得る。
検出された物体に関連付けられた信頼度が信頼度閾値より低い場合、車両が講じるアクションは変わり得る。いくつかの実施形態では、車両は、低い信頼度レベルにもかかわらず、検出された物体が存在するかのように反応し得る。他の実施形態では、車両は、検出された物体が存在しないかのように反応し得る。
車両は、周囲環境の物体を検出すると、特定の検出された物体と関連付けられた信頼度も計算し得る。信頼度は、実施形態に応じて様々な方法で計算され得る。一例では、周囲環境の物体を検出すると、車両は、環境データを既知の物体に関連する所定のデータと比較し得る。環境データと所定のデータとの一致が近いほど、信頼度はより高くなる。他の実施形態では、車両は、環境データの数学的分析を使用して、物体と関連付けられた信頼度を判定し得る。
物体が閾値を下回る検出信頼度を有するとの判定に応答して、車両は、リモートコンピューティングシステムに、物体の識別とともにリモートアシスタンスの要求を送信し得る。上で考察されるように、リモートコンピューティングシステムは、様々な形態を採り得る。例えば、リモートコンピューティングシステムは、車両とは別個の車両内のコンピューティングデバイスであるが、それによって人間のオペレータが車両の乗客又は運転手と相互作用することができる、リモートアシスタンス情報を表示するためのタッチスクリーンインターフェースなどであり得る。追加的又は代替的に、別の例として、リモートコンピューティングシステムは、車両の近くではない場所に位置するリモートコンピュータ端末又は他のデバイスであり得る。
リモートアシスタンスの要求は、画像データ、オーディオデータなどの、物体を含む環境データを含み得る。車両は、ネットワーク(例えば、ネットワーク304)上で、いくつかの実施形態では、サーバ(例えば、サーバコンピューティングシステム306)を介してリモートコンピューティングシステムに環境データを送信し得る。リモートコンピューティングシステムの人間のオペレータは、次に、要求に応答するための基礎として環境データを使用し得る。
いくつかの実施形態では、物体が信頼度閾値を下回る信頼度を有するとして検出された場合、物体には予備識別が与えられ得、車両は、予備識別に応答して車両の動作を調整するように構成され得る。そのような動作の調整は、他の可能な調整の中でも特に、車両を停止する、車両を人間制御モードに切り替える、車両の速度(例えば、スピード及び/又は方向)を変更するという形態を採り得る。
他の実施形態では、車両が閾値を満たす、又は超える信頼度を有する物体を検出した場合でも、車両は検出された物体に従って動作し得る(例えば、物体が一時停止標識として高い信頼度で識別された場合に停止する)が、車両が検出された物体に従って動作するのと同時に(又は後で)リモートアシスタンスを要求するように構成され得る。
図4Aは、例示的な実施形態による、システムのブロック図である。特に、図4Aは、システムコントローラ402、LIDARデバイス410、複数のセンサ412、及び複数の制御可能な構成要素414を含むシステム400を示す。システムコントローラ402は、プロセッサ404、メモリ406、及びメモリ406上に記憶され、機能を実施するためにプロセッサ404によって実行可能な命令408を含む。
プロセッサ404は、1つ以上の汎用マイクロプロセッサ及び/又は1つ以上の専用マイクロプロセッサなどの1つ以上のプロセッサを含み得る。1つ以上のプロセッサは、例えば、特定用途向け集積回路(ASIC)又はフィールドプログラマブルゲートアレイ(FPGA)を含み得る。ソフトウェア命令を実行するように構成される他のタイプのプロセッサ、コンピュータ、又はデバイスが本明細書において企図される。
メモリ406は、限定なしで、リードオンリーメモリ(ROM)、プログラマブルリードオンリーメモリ(PROM)、消去可能なプログラマブルリードオンリーメモリ(EPROM)、電気的に消去可能なプログラマブルリードオンリーメモリ(EEPROM)、不揮発性ランダムアクセスメモリ(例えば、フラッシュメモリ)、固体ドライブ(SSD)、ハードディスクドライブ(HDD)、コンパクトディスク(CD)、デジタルビデオディスク(DVD)、デジタルテープ、リード/ライト(R/W)CD、R/W DVDなどを含み得る、非一時的なコンピュータ可読媒体などのコンピュータ可読媒体を含み得る。
以下で更に説明されるLIDARデバイス410は、光を放出する(例えば、光パルスで)ように構成された複数の光エミッタ、及び光(例えば、光パルスの反射部分)を検出するように構成された1つ以上の光検出器を含む。LIDARデバイス410は、光検出器の出力から三次元(3D)点群データを生成し、3D点群データをシステムコントローラ402に提供し得る。システムコントローラ402は、次に、3D点群データ上で動作を実施して、周囲環境(例えば、周囲環境内の物体の相対位置、エッジ検出、物体検出、近接感知など)の特性を判定し得る。
同様に、システムコントローラ402は、複数のセンサ412からの出力を使用して、システム400の特性及び/又は周囲環境の特性を判定し得る。例えば、センサ412は、GPS、慣性測定ユニット(IMU)、画像捕捉デバイス(例えば、カメラ)、光センサ、熱センサ、並びにシステム400及び/又は周囲環境に関連するパラメータを示す他のセンサのうちの1つ以上を含み得る)。LIDARデバイス410は、例として、センサ412とは別個のものとして図示されており、いくつかの例では、センサ412の一部として、又はセンサ412として考慮され得る。
システム400並びに/又はLIDARデバイス410及びセンサ412からの出力に基づいてシステムコントローラ402によって判定された周囲環境の特性に基づいて、システムコントローラ402は、制御可能な構成要素414を制御して、1つ以上のアクションを実施し得る。例えば、システム400は、車両に対応し得、その場合、制御可能な構成要素414は、車両のブレーキシステム、転回システム、及び/又は加速システムを含み得、システムコントローラ414は、LIDARデバイス410及び/又はセンサ412から判定された特性(例えば、システムコントローラ402が車両を自律モードで制御するときに)に基づいて、これらの制御可能な構成要素の態様を変更し得る。例の中で、LIDARデバイス410及びセンサ412はまた、システムコントローラ402によって制御可能である。
図4Bは、例示的な実施形態による、LIDARデバイスのブロック図である。特に、図4Bは、複数の光エミッタ424及び1つ以上の光検出器、例えば、複数の光検出器426を制御するように構成されたコントローラ416を有する、LIDARデバイス410を示す。LIDARデバイス410は、複数の光エミッタ424のそれぞれの光エミッタへの電力を選択及び提供するように構成された発射回路428を更に含み、複数の光検出器426のそれぞれの光検出器を選択するように構成されたセレクタ回路430を含み得る。コントローラ416は、プロセッサ418、メモリ420、及びメモリ420上に記憶された命令422を含む。
プロセッサ404と同様に、プロセッサ418は、1つ以上の汎用マイクロプロセッサ及び/又は1つ以上の専用マイクロプロセッサなどの1つ以上のプロセッサを含み得る。1つ以上のプロセッサは、例えば、特定用途向け集積回路(ASIC)又はフィールドプログラマブルゲートアレイ(FPGA)を含み得る。ソフトウェア命令を実行するように構成された他のタイプのプロセッサ、コンピュータ、又はデバイスが本明細書において企図される。
メモリ406と同様に、メモリ420は、限定されるものではないが、リードオンリーメモリ(ROM)、プログラマブルリードオンリーメモリ(PROM)、消去可能なプログラマブルリードオンリーメモリ(EPROM)、電気的に消去可能なプログラマブルリードオンリーメモリ(EEPROM)、不揮発性ランダムアクセスメモリ(例えば、フラッシュメモリ)、固体ドライブ(SSD)、ハードディスクドライブ(HDD)、コンパクトディスク(CD)、デジタルビデオディスク(DVD)、デジタルテープ、リード/ライト(R/W)CD、R/W DVDなどの、非一時的なコンピュータ可読媒体などのコンピュータ可読媒体を含み得る。
命令422は、メモリ420上に記憶され、プロセッサ418によって実行可能であり、3D点群データを生成するために、及び3D点群データを処理するために(又はシステムコントローラ402などの別のコンピューティングデバイスによって3D点群データを処理することをおそらく容易にするために)、発射回路428及びセレクタ回路430を制御することに関連する機能を実施する。
コントローラ416は、光のパルスを放出するために、光エミッタ424を使用することによって、3D点群データを判定し得る。放出時間は、各光エミッタに対して確立され、放出時間の相対場所も追跡される。様々な物体などのLIDARデバイス410の周囲環境の態様は、光のパルスを反射する。例えば、LIDARデバイス410が道路を含む周囲環境にある場合、そのような物体は、車両、標識、歩行者、路面、建設用コーンなどを含み得る。いくつかの物体は、反射光の強度が光パルスを反射する物体のタイプを示し得るように、他のものよりもより反射性が高い場合がある。更に、物体の表面は、LIDARデバイス410に対して異なる位置にあり、したがって、光パルスの一部分を反射して、LIDARデバイス410に戻すのに多少の時間がかかり得る。したがって、コントローラ416は、反射光パルスが光検出器によって検出される検出時間、及び検出時間における光検出器の相対位置を追跡し得る。放出時間と検出時間との間の時間差を測定することによって、コントローラ416は、光パルスが受信される前にどの程度の距離を移動するか、したがって、対応する物体の相対距離を判定し得る。放出時間及び検出時間における相対位置を追跡することによって、コントローラ416は、LIDARデバイス410に対する光パルス及び反射光パルスの配向、したがって、物体の相対的な配向を判定し得る。受信された光パルスの強度を追跡することによって、コントローラ416は、物体がどの程度反射するかを判定し得る。この情報に基づいて判定される3D点群データは、したがって、検出された反射光パルス(例えば、デカルト座標系などの座標系内の)の相対位置及び各反射光パルスの強度を示し得る。
以下で更に説明されるように、発射回路428は、光パルスを放出するための光エミッタを選択するために使用される。同様に、セレクタ回路430は、光検出器からの出力をサンプリングするために使用される。
図5Aは、例示的な実施形態による、VCSEL500のアレイの上面例解図である。VCSEL500のアレイは、例えば、LIDARデバイス(例えば、図1に例解されたLIDARユニット128、図2A~3に例解された第1のLIDARユニット204、図2A~2Eに例解された第2のLIDARユニット206、又は図4A及び4Bに例解されたLIDARデバイス410)の光エミッタを表し得る。いくつかの実施形態では、VCSEL500のアレイは、発射回路(例えば、図5C及び5Dに例解されるように)に接続され得る。更に、VCSEL500のアレイが構成要素であるLIDARデバイスは、様々な実施形態において、1つ以上のコントローラ(例えば、VCSEL500のアレイに対する制御信号を発射回路に送信するための)、及び/又は検出器(例えば、光パルスがLIDARデバイスを取り囲む環境で物体によって反射される際に、VCSEL500のアレイによって放出される光パルスを検出するように構成された検出器)を含み得る。例解されるように、VCSEL500のアレイは、VCSEL512自体、共有基板502、分離層503、カソード504、アノード506、及び関連付けられたコンデンサ514を含み得る。
図5Aに例解される共有基板502は、VCSEL512の各々が製造される基板であり得る。更に、共有基板502は、カソード504の各々、アノード506の各々、及び関連付けられたコンデンサ514の各々が画定される基板であり得る。共有基板502は、例えば、厚さ100μm~150μm(例えば、120μm)であり得る。他の厚さも可能である。いくつかの実施形態では、共有基板502は、製造後に薄化され得る。これは、場合によっては、VCSEL512からの異なる放出波長を可能にし得る。
図5Aに例解された分離層503は、カソード504/アノード506と共有基板502との間の分離を提供し得る。このように、異なるカソード504は、互いに電気的に分離され得る(例えば、カソード504の列が個々に選択され得るように)。
VCSEL512、カソード504、アノード506、及び/又はコンデンサ514は、成長層内に位置し得る(図5Bの参照符号508を使用して例解されるように)。しかしながら、例解目的のみのために、図5Aの構成要素の遮蔽を防止するために、成長層508は、図には図示されていない。そのような成長層508は、存在するとき、共有基板502の上方に位置付けられ得る(例えば、x-y平面に平行に配向され得、共有基板502の上面よりも大きいz値を有し得る)。
図5Aに例解されるカソード504は、選択されたVCSEL512を通してコンデンサ514を放電して、それらのVCSEL512が光パルスを放出することを可能にするために使用され得る。例解されるように、カソード504の各々は、VCSEL512の列に対応し得る。更に、カソード504の各々は、VCSEL512の単一の列に対応し、これは、所与の列のVCSEL512の各々が、その列の全ての他のVCSEL512と共通のカソード504を共有することを意味する。
図5Aに例解されるアノード506は、選択されたVCSEL512を通してコンデンサ514を放電して、それらのVCSEL512が光パルスを放出することを可能にするために使用され得る。例解されるように、アノード506の各々は、VCSEL512の行に対応し得る。更に、アノード506の各々は、VCSEL512の単一の行に対応し、これは、所与の行のVCSEL512の各々が、その行の全ての他のVCSEL512と共通のアノード506を共有することを意味する。
アノーソ506がVCSEL512の行に対応し、カソード504が図5AのVCSEL512の列に対応するが、これは、単に例として提供されることが理解される。他の実施形態では、アレイ500のカソード504及びアノード506が切り替えられ得る(すなわち、カソードは代わりにVCSELの行に対応し得、アノードはVCSELの列に対応し得る)。
図5Aに例解されたVCSEL512は、図5Aに例解されるx-y平面で直径20μm~40μm(例えば、30μm)であり得る。そのような直径は、いくつかの実施形態では、VCSEL512の放出表面の直径及び/又はVCSEL512全体の直径を表し得る。更に、いくつかの実施形態では、VCSEL512の放出表面の直径は、VCSEL512全体の直径と同じであり得る。
例解されるように、VCSEL512は、共有基板502上に配設され得る。更に、VCSEL512の光共振器は、共有基板502の表面に対して法線方向に配向され得る(例えば、図5Aに例解されるように、+z方向)。加えて、VCSEL512は、VCSEL512の上面(例えば、最大z値を有する側面)から光パルスを放出し得る。VCSEL512のこれらの上面は、共有基板502の表面上にあるVCSEL512の側面の反対側であり得る。したがって、VCSEL512によって放出される光パルスは、LIDARデバイスを取り囲む環境に送信される前に共有基板を通過しない場合がある。言い換えると、図5Aに例解されるVCSEL512は、「トップエミッション型」VCSELと称され得る。
いくつかの実施形態では、VCSEL512は、850nm~940nm(例えば、905nm)の波長を有する光パルスを放出し得る。放出波長は、例えば、共振器の設計及びVCSEL512のゲイン媒体に基づいて調整され得る。いくつかの実施形態では、VCSEL512は、GaAs VCSELであり得る。
図5Aに例解されるVCSEL512は、各々、x-y平面で同じ直径を有する。これは、単に一例として提供され、他の変形が可能であり、本明細書で企図されていることが理解される。いくつかの実施形態では、アレイ内のVCSEL512は、少なくとも2つの異なるフォームファクタを有し得る。例えば、アレイ500内の異なるVCSEL512は、互いに異なる直径を有し得る。アレイ500中のVCSEL512の第1のセットは、アレイ500内のVCSEL512の第2のセットの第2の直径(例えば、第2のフォームファクタに基づく)よりも大きい第1の直径(例えば、第1のフォームファクタに基づく)を有し得る。このように、VCSELの第1のセットのうちのVCSEL512は、VCSEL512の第2のセットのうちのVCSEL512によって放出される光パルスよりも高い電力を有する光パルスを放出するように構成され得る。フォームファクタにおける他の変形も可能である。
図5Aにも例解されるように、アレイ500内のVCSEL512は、VCSEL512の行及び列のセットに配置され得る。同じ行内のVCSEL512は、例解されるように、わずかに異なるy位置を有し得ることに留意されたい。これは、例えば、アレイ500を使用して発射して光パルスを生成して周囲環境にある物体までの距離を識別するときに、より多様な仰角を可能にし得る。例解されるように、5行のVCSEL512及び4列のVCSEL512が存在し得る。これは、例示としてのみ提供され、他の数の行及び列が可能であり、本明細書で企図されている(例えば、数十、数百、若しくは数千の行、及び/又は数十、数百、若しくは数千の列)。
更に、隣接する行と隣接する列との間の間隔は、アレイ500にわたって一貫であり得る。例えば、VCSEL512の隣接する列の間の間隔は、110μm~130μm(例えば、120μm)であり得、VCSEL512の隣接する行の間の間隔は、90μm~110μm(例えば、100μm)であり得る。しかしながら、図5Aは、単に例示的な実施形態として提供される。他の実施形態では、間隔は、不均等、不均一、又は不規則であり得る。例えば、不均一なパターンは、アレイ500が構成要素(例えば、関連付けられたLIDARデバイスのレンズ又はミラー)である、LIDARデバイスの他の構成要素における光学歪みを考慮するために使用され得る。そのような不均等な間隔は、いくつかの実施形態では、以前の歪み測定値及び/又はLIDARデバイスの他の構成要素から作製された光学特性に基づいて設計され得る。更に他の実施形態では、VCSEL512は、行/列(すなわち、長方形)の方式で配置され得る。例えば、VCSEL512は、六角形パターンで配置され得る。更に、いくつかの実施形態では、六角形パターンは、VCSEL512の放出表面のサイズと比較して疎であり得る(例えば、隣接するVCSEL512間の間隔は、VCSEL512の直径よりも少なくとも10倍大きくあり得る)。
図5Aに例解されるコンデンサ514は、VCSEL512が光パルスを放出するように、VCSEL512を通して放電され得る電気エネルギーを蓄え得る。スイッチ(例えば、図5C及び5Dの発射回路に例解されるように)を使用して、コンデンサ514は、選択的に充電及び放電される、並びに/又は図5Aに例解されるアノード506及び/若しくはカソード504に選択的に接続され得る。これは、LIDARデバイスのコントローラが、アレイ500内のVCSEL512のうちの1つ以上を選択的に発射することを可能にし得る。そのような選択的発射は、コントローラから発射回路によって受信される1つ以上の制御信号に基づき得る。例えば、VCSEL512の単一の行及びVCSEL512の単一の列を選択することによって、コントローラは、アレイ500内の単一のVCSEL512に個々にアドレス指定し得る。
図5Bは、例示的な実施形態による、VCSELのアレイ(例えば、図5Aに例解されるVCSEL500のアレイ)の断面側面例解図である。アレイ500のいくつかの部分は、他の特徴を遮蔽しないように図で除去され得る。例えば、例解されるように、共有基板502の上に成長層508が存在する。VCSEL512は、成長層508内に配設される。VCSEL512の可視性を遮蔽しないために、成長層508は、VCSEL512を明らかにするために破断されている。これは、破線を使用して成長層508の縁を例解することによって図面に例解される。図5Aを参照して説明され、図5Bにここで例解されるように、VCSEL512は、共有基板502の反対側の方向に上向きに光を放出するように構成されている。言い換えると、ここで例解されるVCSEL512は、トップエミッション型VCSELである。
図5Bに例解されるように、分離層503は、様々なVCSEL512の様々なカソード504間の分離を提供し得る。更に、例解されるように、分離層503及び共有基板502は、その中に画定される1つ以上のビア505を有し得る。ビアは、アノード506及び/又はカソード504への電気接続が、共有基板502の表面(例えば、底面、すなわち、最小のz位置を有する表面)でなされることを可能にし得る。したがって、ビア505は、VCSEL512間で分離される様式でVCSEL512の電気制御を可能にし、個々のアドレス指定可能性を可能にし得る。
1行のVCSEL512のみが図5Bに例解されているが、他の行もまた、図5Bの実施形態内に存在し得ることが理解される(例えば、図5Aに例解されるように、5行のVCSEL512及び4列のVCSEL512が存在し得る)。また、図5Bに例解される実施形態は、例として提供され、他の実施形態が可能であることも理解される。例えば、いくつかの実施形態では、成長層508が存在しない場合がある(例えば、成長層は、エッチバック又は別様に除去され得る)。更に、成長層508(例えば、VCSEL512、カソード504、アノード506など)内にあるように例解された構成要素は、代わりに、成長層に部分的又は完全に隣接して位置付けられ得る。同様に、コンデンサ514は、成長層508の上方に配設されているように例解されているが、いくつかの実施形態では、コンデンサ514は、代わりに、成長層の内側で、又はx-y平面で成長層508に隣接して、部分的又は全体的に配設され得る。更に他の実施形態では、いくつかの構成要素(例えば、コンデンサ514)は、VCSELのアレイ500から完全に分離され、離れた場所から(例えば、プリント回路基板(PCB)上のワイヤトレースを使用して)アレイ500に電気接続され得る。
図5Cは、例示的な実施形態による、発射回路の概略例解図である。図5Cに例解された発射回路は、VCSELのアレイ(例えば、図5A及び5Bに例解されたVCSEL500のアレイ)を発射するために使用され得る。したがって、図5Cに例解されるように、図5A及び5Bに例解されるVCSEL500のアレイの構成要素は、図5Cの発射回路に取り付けられている。これは、例解目的のみであり、図5Cの発射回路は、同様に、VCSELの他のアレイ又は他のタイプの光エミッタと等しく使用され得ることが理解される。発射回路は、カソード504と、アノード506と、VCSEL512と、コンデンサ514と、VCSEL531、532、533、534、535の行と関連付けられた行スイッチ516と、VCSEL521、522、523、524の列と関連付けられた列スイッチ518と、コンデンサ514を充電するためのコイル542と、コンデンサ514を充電するための電圧源ノード544と、充電ダイオード546と、を含む。VCSEL521、522、523、524の列は、例えば、VCSEL512の列(例えば、図5Aに例解される列)の物理的配置に対応し得る。同様に、VCSEL531、532、533、534、535の行は、VCSEL512の行(例えば、図5Aに例解される行)の物理的配置に対応し得る。
いくつかの実施形態では、VCSEL512の発射計画は、1つ以上の充電段階(コンデンサ514を充電するために使用される)、続いて、1つ以上の発射段階(VCSEL512から光パルスを放出するために使用される)を含み得る。更に、いくつかの実施形態では、VCSEL512の列521、522、523、524は、発射段階の間に順次発射され得る。例えば、VCSEL512の第1の列521は、VCSEL512の第2の列522の前に発射され得、これは、VCSEL512の第3の列523の前に発射され、これは、VCSEL512の第4の列524の前に発射される。これは、例解された行-アノード/列-カソード配置を使用して、個々のVCSEL512のより大きい選択性を可能にし得る(例えば、これは、アレイ500内の各VCSEL512の個々のアドレス指定可能性を提供し得る)。
電圧源ノード544は、発射回路の1つ以上の充電段階の間、ダイオード546及びコイル542を通してコンデンサ514に電気エネルギーを提供し得る。例えば、電圧源ノード544は、LIDARデバイス(例えば、電池などの直流(DC)電源)の電源に接続され得る。行スイッチ516は、コンデンサ514のうちのどれが充電されるかを選択するために使用され得る。例えば、充電段階の間、列スイッチ516は、コンデンサ514の各々が、電圧源ノード544によって、コイル542及びそれぞれのダイオード546を通して充電され得るように、開放され得る。次に、任意の発射段階の前に、それぞれのコンデンサ514が接地に放電されるように、行スイッチ516のいずれかが閉鎖され得る。これは、これらのコンデンサ514に対応するVCSEL512の行が、次の充電段階が発生するまで(コンデンサ514が別の充電機会を有するとき)、次の発射段階中に光パルスを放出するために任意のエネルギーを有することを防止することになる。同様に、任意の発射段階の前に閉鎖されていない任意の行スイッチ516に対応するコンデンサ514は、発射するように選択されているVCSEL512のそれらの行531、532、533、534、535を表し得る。
その後、列スイッチ518のうちの1つ以上は、1つ以上の発射段階中に閉鎖されて、どの列521、522、523、524が発射するように選択されるかを判定し得る。同様に、列スイッチ518は、それぞれの列スイッチ518と関連付けられた所与の列521、522、523、524に対応する発射段階中に開放したままであり得る。これは、開放回路を残し、それによって、その列内の関連付けられたVCSEL512が発射することを防止し得る。
行スイッチ516及び列スイッチ518は、いくつかの実施形態で、関連付けられたLIDARデバイスのコントローラに電気的に結合される、及び/又は制御され得る。例えば、行スイッチ516及び列スイッチ518は、コントローラから発射回路に送信される1つ以上の制御信号によって制御され得る。更に、いくつかの実施形態では、行スイッチ516及び/又は列スイッチ518は、コントローラからの1つ以上の制御信号に基づいて、異なる時間に各スイッチに対して異なるビットを読み込まれるシフトレジスタによって制御され得る。
いくつかの実施形態では、行スイッチ516及び列スイッチ518は、トランジスタ(例えば、電界効果トランジスタ(FETS)又はバイポーラ接合トランジスタ(BJT))であり得る。例えば、行スイッチ516及び列スイッチ518は、窒化ガリウム電界効果トランジスタ(GaNFET)であり得る。他のタイプの行スイッチ516及び/又は列スイッチ518もまた、使用され得、本明細書で企図される。
図5Cに例解されるように、VCSEL512の各行531、532、533、534、535と関連付けられた1つのコンデンサ514が存在する。他の実施形態では、異なる数のコンデンサ514が存在し得る。例えば、アレイ500内の各VCSEL512に給電するために使用される単一のコンデンサ(又はコンデンサの単一のバンク)が存在し得る。そのような実施形態は、図5Dを参照して示され、説明されている。
図5Dは、例示的な実施形態による、発射回路の概略例解図である。図5Dに例解された発射回路は、VCSELのアレイ(例えば、図5A及び5Bに例解されたVCSEL500のアレイ)を発射するために使用され得る。したがって、図5Dに例解されるように、図5A及び5Bに例解されるVCSEL500のアレイの構成要素のいくつかは、図5Dの発射回路に取り付けられている。しかしながら、図5Aに例解されたアレイ500とは異なり、図5Dで発射されるアレイは、アレイ全体に対して1つのコンデンサ554のみを含む。図5Aに例解されたアレイ500からの構成要素のうちの多くの含有は、例解目的のみのために提供され、図5Dの発射回路は、同様に、VCSELの他のアレイ又は他のタイプの光エミッタと等しく使用され得ることが理解される。発射回路は、カソード504と、アノード506と、VCSEL512と、VCSEL531、532、533、534の行と関連付けられた行スイッチ516と、VCSEL521、522、523、524の列と関連付けられた列スイッチ518と、VCSEL512を発射するためのコンデンサ554と、コンデンサ554を充電するためのコイル542と、コンデンサ554を充電するための電圧源ノード544と、充電ダイオード546と、を含む。
図5Dの発射回路は、図5Cの発射回路と同様に機能する。しかしながら、図5Cとは異なり、アレイは、単一のコンデンサ554のみを含む。このように、コンデンサ554の静電容量は、図5Cに例解される個々のコンデンサ514の静電容量の何倍にもなる場合がある。しかしながら、図5Cのように、各列の発射を制御する行スイッチ516が存在する。しかしながら、図5Dでは、行スイッチ516は、VCSEL531、532、533、534、535の行を、発射段階中にコンデンサ554に接続することによって発射を制御する(図5Cのように充電段階中にコンデンサを短絡するのとは対照的に)。図5Dに例解される発射回路の充電段階中、コンデンサ554は、電圧源ノード544によって、コイル542及び充電ダイオード546を通して充電されることになる。次に、VCSEL512のうちのどれが光パルスを放出するかを判定する発射段階中に、行スイッチ516及び列スイッチ518のうちのどれが、閉鎖されるかが問題である。上記のように、行スイッチ516及び列スイッチ518は、トランジスタ(例えば、GaNFET)であり得、及び/又は制御信号を使用してLIDARデバイスのコントローラによって制御され得る。
図5Eは、例示的な実施形態による、VCSEL550のアレイの上面例解図である。VCSEL550のアレイは、図5Aに例解されたVCSEL500のアレイと同一であり得る。例えば、VCSEL550のアレイは、VCSEL512自体、共有基板502、分離層503、カソード504、及びアノード506を含み得る。例解の目的のために、分離層503、カソード504、及びアノード506は、図5Eから除去されている。しかしながら、図5Aに例解されたVCSEL500のアレイとは異なり、図5Eに例解されたVCSEL550のアレイは、共有された共有基板502(図5Aに例解された別個の構成要素ではなく)に隣接するか、又はそれと組み込まれる平面層に対応する、関連付けられたコンデンサ515を有し得る。図5Eに例解されるように、複数の関連付けられたコンデンサ515(例えば、各アノード506に対して1つの関連付けられたコンデンサ515)が存在し得る。
図5Fは、側面視からの図5EのVCSEL550のアレイを例解する。図5Eとは異なり、分離層503、カソード504、及びアノード506が図5Fに例解される。いくつかの実施形態では、VCSEL550のアレイを発射するために使用される発射回路は、図5Cに例解されたのと同じ発射回路であり得るか、又は図5Dに例解された発射回路と同じであり得る。しかしながら、いくつかの実施形態では、代替的な発射回路が使用され得る(例えば、VCSEL500のアレイに対するVCSEL550のアレイの幾何学的形状の差に適応するために)。
図5E及び5Fに例解されたVCSEL550のアレイは、図5A及び5Bに例解されたVCSEL500のアレイに対して低減された全体体積を有し得る、及び/又は作製するためにより少ない製造ステップを必要とし得る。図5E及び5Fに例解されたVCSEL550のアレイは、トップエミッション型VCSELのアレイに対応するが、一方、ボトムエミッション型VCSEL(例えば、図6Aを参照して示され、説明される)もまた、図5E及び5Fの代替的な関連コンデンサ515とともに使用され得ることが理解される。
図6Aは、例示的な実施形態による、VCSEL600のアレイの断面側面例解図である。VCSEL600のアレイは、例えば、LIDARデバイス(例えば、図1に例解されたLIDARユニット128、図2A~3に例解された第1のLIDARユニット204、図2A~2Eに例解された第2のLIDARユニット206、又は図4A及び4Bに例解されたLIDARデバイス410)の光エミッタを表し得る。いくつかの実施形態では、VCSEL600のアレイは、発射回路(例えば、図6Bに例解されるように)に接続され得る。更に、VCSEL600のアレイが構成要素であるLIDARデバイスは、様々な実施形態において、1つ以上のコントローラ(例えば、VCSEL600のアレイに対する制御信号を発射回路に送信するための)、及び/又は検出器(例えば、光パルスがLIDARデバイスを取り囲む環境で物体によって反射される際に、VCSEL600のアレイによって放出される光パルスを検出するように構成された検出器)を含み得る。例解されるように、VCSEL600のアレイは、VCSEL620、630、640、650自体、共有基板602、分離層603、成長層608、カソード624、634、644、654、アノード622、632、642、652、ビア623、633、643、653、及び関連付けられたコンデンサ626、636、646、656を含み得る。図5Bに例解された成長層508と同様に、図6Aの成長層608は、図の残りの部分を遮蔽しないように破断されている。成長層608の縁の破線は、成長層608が部分的に除去されたことを示すことを意味する。
図5Bのアレイ500と同様に、図6Aに例解されるアレイ600は、4つのVCSEL620、630、650、650のみを含む。これは、アレイ600の多くの行のうちの1つを表し得る。例えば、アレイ600は、図5Aに例解されたアレイ500のように、5行の各々4つのVCSELを含み得る。更に、図6Aに提供される実施形態は、単に例として提供される。VCSELの他の数及び配置も可能であることが理解される。例えば、各行は、異なる数のVCSELを有し得、各列は、異なる数のVCSELを有し得、異なる数の行及び/若しくは列が存在し得、かつ/又はVCSELは、行列配置に全く編成されない場合がある。
しかしながら、図5A及び5Bに例解されたアレイ500とは異なり、図6Aのアレイ600は、VCSEL620、630、640、650の上方の共有基板602を用いて配置される(すなわち、共有基板602は、例解されるように、VCSEL620、630、640、650よりも大きいz位置にある)。図5A及び5BのVCSEL512と同様に、図6BのVCSEL620、630、640、650は、共有基板602の表面に対して法線の方向に配向された光共振器を有する。しかしながら、図5A及び5Bに例解されるVCSEL512とは異なり、図6Aに例解されるVCSEL620、630、640、650は、光パルスがLIDARデバイスを取り囲む環境に送信される前に共有基板602を通過するように、VCSEL620、630、640、650の底面から光パルスを放出する。言い換えると、図6Aに例解されるVCSEL620、630、640、650は、「ボトムエミッション型」VCSELである。更に、VCSEL620、630、640、650は、様々な実施形態では、940nm以上の波長(例えば、940nm)で光を放出し得る。
更に、図5A及び5Bに例解されたアレイ500とは異なり、図6Aのアレイ600のVCSEL620、630、640、650は、各々、互いに、別個のアノード622、632、642、652と、別個のカソード624、634、644、654と、別個のコンデンサ626、636、646、656と、を有する。これは、VCSEL620、630、640、650が個々にアドレス指定可能であることを可能にする。更に、VCSEL620、630、640、650は、いくつかの実施形態では、LIDARデバイスのコントローラからの独立した制御信号で制御され得る。
図6Bは、例示的な実施形態による、発射回路の概略例解図である。図6Bに例解された発射回路は、VCSELのアレイ(例えば、図6Aに例解されたボトムエミッション型VCSELのアレイ600)を発射するために使用され得る。したがって、図6Bに例解されるように、図6Aに例解されるアレイ600の構成要素は、図6Bの発射回路に取り付けられている。これは、例解目的のみであり、図6Bの発射回路は、同様に、VCSELの他のアレイ又は他のタイプの光エミッタと等しく使用され得ることが理解される。発射回路は、VCSEL620、630、640、650と、アノード622、632、642、652と、カソード624、634、644、654と、充電ダイオード621、631、641、651と、アノードスイッチ628、638、648、658と、コンデンサ626、636、646、656と、カソードスイッチ629、639、649、659と、コンデンサ626、636、646、656を充電するためのコイル612と、コンデンサ626、636、646、656を充電するための電圧源ノード614と、を含む。上記と同様に、電圧源ノード614は、LIDARデバイスの電源(例えば、電池などのDC電源)を表し得る。
上記のように、4つのVCSEL620、630、640、650のみが図6A及び6Bに例解されているが、アレイ内の他の数のVCSEL620、630、640、650もまた、可能である。他の数のVCSEL620、630、640、650が存在した場合、発射回路は、これに適応するために調整され得る(例えば、より多くのカソード、アノード、カソードスイッチ、アノードスイッチなどを含むことによって)。
図5C及び5Dの発射回路とは異なり、図6Bの発射回路内のスイッチは、単一のVCSELのみに対応する。例えば、第1のVCSEL620と関連付けられた第1のアノードスイッチ628は、第1のコンデンサ626(他のコンデンサ636、646、656とともに)が、充電段階中に充電することを可能にするように開放され得る(他のアノードスイッチ638、648、658とともに)。第1のコンデンサ626は、充電段階中に、コイル612及び第1の充電ダイオード621を通して電圧源ノード614から充電され得る。その後、任意の発射段階の前に、第1のアノードスイッチ628が閉鎖されて、第1のコンデンサ626を接地に放電し得る。このようにして、第1のコンデンサ626は、発射のために選択解除され得る(すなわち、第1のVCSEL620は、後続の発射段階中に第1のコンデンサ626を使用して発射されないことになる)。第1のアノードスイッチ628が、発射段階前に係合されていない場合、第1のコンデンサ626/第1のVCSEL620は、代わりに、発射のために選択されている場合がある。更に、第1のカソードスイッチ629は、第1のVCSEL620が光パルスを放出することを可能にするように、充電段階後に閉鎖され得る(例えば、第1のコンデンサ626が充電段階後に放電されなかった場合)。第1のカソードスイッチ629の閉鎖は、例えば、発射段階中に発生し得る。
他のVCSEL630、640、650と関連付けられた充電及び発射もまた、上記に説明された、充電/発射に関連付けられた第1のVCSEL620と同様の方式で実施され得る。図5A~5Dの例示的な実施形態と同様に、VCSEL620、630、640、650は、順次発射され得る。また上記と同様に、アノードスイッチ628、638、648、658、及び/又はカソードスイッチ629、639、649、659は、トランジスタ(例えば、GaNFETなどのFET、又はBJT)、微小電気機械システム(MEMS)スイッチ、真空管などに対応し得る。
図5A~6Bのアレイ配置及び発射回路配置のどれが使用されるかにかかわらず、アレイのVCSELによって放出される光パルスは、LIDARデバイスを取り囲む環境内の1つ以上の物体によって反射され、LIDARデバイスに向かって方向転換され得る。次に、これらの反射は、LIDARデバイス内の複数の検出器(例えば、検出器アレイ内)によって検出され得る。例えば、反射は、図4Bを参照して例解及び説明される光検出器426によって検出され得る。いくつかの実施形態では、複数の検出器は、デジタルレイアウト集積回路を有するSPADアレイ(例えば、SiPM)であり得る。追加的又は代替的に、いくつかの実施形態では、複数の検出器が、VCSELから物理的に分離され得る(例えば、LIDARデバイス内のVCSELに同軸又は隣接するのではなく、それらがLIDARデバイスの完全に異なる部分に位置し得る)。この分離は、LIDARデバイス内の検出器によって使用される撮像面が、LIDARデバイス内のVCSELによって使用される放出面とは異なることを可能にし得る。これは、バイセントリックシステムに対応し得る。このため、1つの光学素子(例えば、送信レンズ)又は光学素子の1つの部分(例えば、共有レンズの第1の部分)は、VCSELによって放出される光パルスを光学的に修正するために使用され得、異なる光学素子(例えば、受信レンズ)又は同じ光学素子の異なる部分(例えば、共有レンズの第2の部分)は、反射が複数の検出器に到達する前に、反射光パルスを光学的に修正するために使用され得る。このようにして、光を送信し、光を受信することは、異なって修正され得る。
上述のように、複数の検出器は、VCSELによって放出される光信号の反射を検出するために使用され得る。そのような配置では、VCSELと検出器との間に一対一の対応が存在し得る(すなわち、各検出器は、特定のVCSELによって放出される光信号の反射を受信するように配置される)。あるいは、検出器の各々は、複数のVCSELによって放出される光信号の反射を検出するように配置され得るか、又は複数の検出器は、特定のVCSELによって放出される光信号の反射を検出するように配置され得る。例えば、異なるVCSELからの光信号の反射を検出するために使用される単一の検出器上に複数の検出領域が存在し得る。追加的又は代替的に、検出器が異なるVCSELからの光信号の反射を異なる時点で検出し得るように、単一の検出器がVCSELに対して移動し得る。
図7は、例示的な実施形態による、LIDARデバイスのエミッタサブシステム700の断面側面例解図である。エミッタサブシステム700は、VCSELのアレイを製造し、VCSELのアレイがLIDARデバイスと統合され、それによって使用され得るように、VCSELに構成要素(例えば、コントローラ)を取り付ける方法の結果物であり得る。エミッタサブシステム700は、実装構造702と、ボンディング材706を使用して実装構造702に固定されたドライバ704と、アノードファンアウト714と、カソードファンアウト716と、VCSEL730のアレイ(構造内に画定される個々のVCSEL732を含む)と、金属トレース744を使用してカソードファンアウト716に接続されたコンデンサ742と、リフローパッド752と、封止エポキシ構造760と、を含む。
図7のアレイ730に例解されるVCSEL732は、ボトムエミッション型VCSELである(例えば、アノードファンアウト714及びカソードファンアウト716の場所に基づく)。言い換えると、図7に例解されたVCSEL732は、正のz方向に光パルスを放出し得る。
実装構造702は、エミッタサブシステム700の製造中に使用され得る(例えば、他の構成要素のための取り付け点を提供し得る)。いくつかの実施形態では、実装構造702は、ポリイミドPCB基板又は他のPCB基板(例えば、硬質PCB、セラミックPCB、又はガラスPCB)であり得る。更に、いくつかの実施形態では、実装構造702の部分(例えば、実装構造702の全体)は、エミッタサブシステム700から除去され得る。
ドライバ704は、様々な実施形態では、コントローラ及び/又は発射回路の部分を含み得る。例えば、ドライバ704は、発射回路(例えば、アノードスイッチ628、638、648、658及び/又はカソードスイッチ629、639、649、659)の一部として図6Bに例解されたスイッチのいくつかを含み得る。ドライバ704は、例えば、特定用途向け集積回路(ASIC)を含むシリコン(Si)ドライバであり得る。更に、ドライバ704は、アノードファンアウト714及び/又はカソードファンアウト716に接続されて、アレイ730内でVCSEL732を発射することを可能にし得る。
例解されるように、ドライバ704は、ボンディング材706を使用して実装構造702に接着され得る。いくつかの実施形態では、ボンディング材706は、エポキシダイボンディングを使用して形成されている場合がある。
図7に例解されたコンデンサ742は、VCSEL732を発射するために使用される多くのコンデンサ(例えば、コンデンサ742の後ろのy軸に沿って配向された他のコンデンサを有する)のうちの1つを表し得る。例えば、図6A及び6Bに例解されたアレイ600と同様の、アレイ730のVCSEL732の各々と関連付けられた別個のコンデンサが存在し得る。あるいは、いくつかの実施形態では、全てのVCSEL732を発射するために使用される単一のコンデンサ又はコンデンサバンク(例えば、図5Dに例解された発射回路の実施形態と同様)が存在し得る。
図7に例解されたコンデンサ742は、表面実装デバイス(SMD)として実装され得る。また例解されるように、コンデンサ742は、金属トレース744を使用してカソードファンアウト716に接続される。金属トレース744は、メッキされた金属を含み得る。更に、この金属トレース744は、表面トレース(例えば、封止エポキシ構造760を通る)及び/又は1つ以上のビア(例えば、封止エポキシ構造760を通るレーザ切断ビア)を通るトレースを含み得る。追加的又は代替的に、使用される発射回路構造に応じて、コンデンサがアノードファンアウト714に接続され得る。また例解されるように、封止エポキシ構造760は、アレイ730、ドライバ704(例えば、発射回路及び/若しくはコントローラを含む)、並びに/又は実装構造702に接着されたコンデンサ742を維持するのを支援し得る。
図7には例解されていないが、1つ以上の加熱又は冷却要素がエミッタサブシステム700に存在し得ることが理解される。そのような加熱又は冷却要素は、VCSEL732を所定の及び/又は安定した温度(例えば、VSCEL732の放出特性を制御するために)に維持することを支援し得る。加熱又は冷却要素は、周囲環境(例えば、温度センサによって測定される)の周囲温度に基づいて制御され得る(例えば、コントローラによって)。
更に、別個のVCSELのアレイが本開示全体を通して説明されているが、代替的な配置も可能であり、本明細書で企図されていることが理解される。例えば、図示された1つ以上のVCSEL(例えば、図5A、6A、7など)が、代わりに、VCSELのアレイで置換され得る。言い換えると、本明細書に説明されるエミッタサブシステムは、VCSELの小さいアレイからなるアレイを含み得る。そのような配置は、様々な実施形態では、解像度を増強するために、及び/又は輝度を増強するために、冗長性を提供するために使用され得る(例えば、1つ以上の個々のVCSELの故障の場合に)。
他の発射回路も可能であり、本明細書で企図されていることが理解される。図8A~8Gは、LIDARデバイスの1つ以上のVCSELに光を放出させるように使用され得る、可能な代替的な発射回路の概略例解図である。
図8Aは、VCSELの列に沿って配向されたアノード、及びVCSELの行に沿って配向されたカソードを有する発射回路を例解する。この配置は、所与の列の全てのVCSELが同時に発射されることを可能にし得る。異なる列のVCSELに給電するために使用される電圧は、様々な実施形態では、互いに同一であり得るか、又は互いに異なり得る。限定された数のVCSELの行及び列が例解されているが、他の数の行、他の数の列、及び/又は他の数のVCSELが実装され得、そのような実施形態が本明細書で企図されていることが理解される。
図8Bは、VCSELの列に沿って配向されたアノード、及びVCSELの行に沿って配向されたカソードを有する発射回路を例解する。この配置は、所与の行の全てのVCSELが同時に発射されることを可能にし得る。限定された数のVCSELの行及び列が例解されているが、他の数の行、他の数の列、及び/又は他の数のVCSELが実装され得、そのような実施形態が本明細書で企図されていることが理解される。
図8Cは、VCSELの列に沿って配向されたアノード、及びVCSELの行に沿って配向されたカソードを有する発射回路を例解する。この配置は、アレイ内のVCSELのいずれかが個々に発射されることを可能にし得る。限定された数のVCSELの行及び列が例解されているが、他の数の行、他の数の列、及び/又は他の数のVCSELが実装され得、そのような実施形態が本明細書で企図されていることが理解される。
図8Dは、任意の所与の列のVCSELが互いに直列に接続されているVCSELのアレイを例解する。また、図8DのVCSELの各々は、所与のVCSELを短絡し、そのVCSELが発射することを防止するように作動され得る(例えば、発射段階中)、VCSELと並列に接続されたシャントスイッチを含む。この配置は、アレイ内のVCSELのいずれかが個々に発射されることを可能にし得る。
図8A~8Dは、供給電圧(VSUPPLY)及び1つ以上の関連付けられた充電器回路(CHARGER)を示す。図8A~8Dに例解されるように、供給電圧は、アレイの列の各々の全てのVCSELのアノード間で共有され得る。同様に、図8B及び8Dに例解されるいくつかの実施形態では、充電器回路のうちの1つは、アレイの列の各々の全てのVCSELのアノード間で共有され得る。しかしながら、他の配置もまた、本明細書で可能であり、企図されることが理解されよう。例えば、各列は、対応する供給電圧及び/又は対応する関連付けられた充電器回路を有し得る。いくつかの実施形態では、供給電圧及び/又は関連付けられた充電器回路は、1つの列から次まで異なり得る。
更に、図8A~8Dは、供給電圧(VSUPPLY)が、VCSELの列に対するコンデンサの端子の電圧を制御するために使用され得ることを示す。例えば、供給電圧(VSUPPLY)は、VDD1、VDD2、及びVDD3を設定するために使用され得る。供給電圧(VSUPPLY)並びにVDD1、VDD2、及びVDD3を分離する各列のそれぞれの充電器によって例解されるように、それぞれのコンデンサ電圧(VDD1、VDD2、及びVDD3)の各々は、別々に制御され得る(例えば、充電器によって表される電圧ステップアップ又はステップダウンを使用して)。したがって、いくつかの実施形態では、それぞれのコンデンサ電圧(VDD1、VDD2、及びVDD3)の各々は、互いに異なり得る。これは、異なるタイプのVCSELが異なる列で使用されることを可能にするか、又は異なる列のVCSELに対して異なる放出強度を可能にし得る。しかしながら、これは単に例として提供され、他の実施形態も可能であることが理解される。例えば、いくつかの実施形態では、供給電圧(例えば、VSUPPLY=VDD1=VDD2=VDD3)に対するコンデンサ電圧の一部又は全部に対する電圧制御が存在しない場合がある。VSUPPLY、VDD1、VDD2、及びVDD3の間の他の相対電圧も可能であり、本明細書で企図されている。
図8Eは、VCSELの行に沿って配向されたアノード、及びVCSELの列に沿って配向されたカソードを有する発射回路を例解する。この配置は、所与の列の全てのVCSELが同時に発射されることを可能にし得る。例解されるように、VCSELの列は、上半分と下半分とに分割され得、上半分及び下半分は、異なるスイッチ/ドライバによって制御される。そのような配置は、放電経路に沿った最大インダクタンスを制限し得る(例えば、それによって、回路内の電力損失を制限する)。限定された数のVCSELの行及び列が例解されているが、他の数の行、他の数の列、及び/又は他の数のVCSELが実装され得、そのような実施形態が本明細書で企図されていることが理解される。
図8Fは、アレイ内の各VCSELが別個のコンデンサ及び関連付けられたスイッチを有する発射回路を例解する。この配置は、アレイ内のVCSELのいずれかが個々に発射されることを可能にし得る。限定された数のVCSELの行及び列が例解されているが、他の数の行、他の数の列、及び/又は他の数のVCSELが実装され得、そのような実施形態が本明細書で企図されていることが理解される。
図8Gは、アレイ内のVCSELの各列の各カソードが互いに短絡される発射回路を例解する。そのような実施形態では、VCSELは、互いに並列に充電され得、及び/又は互いに並列に光を放出させられ得る。更に、図8Gに例解されるように、ショットキーダイオードが、各行内のコンデンサを結合解除するように含められ得る。限定された数のVCSELの行及び列が例解されているが、他の数の行、他の数の列、及び/又は他の数のVCSELが実装され得、そのような実施形態が本明細書で企図されていることが理解される。
図8Hは、互いに接続される所与の行内のVCSELのアノードと、互いに接続されるVCSELの所与の列内のカソードと、を有する発射回路を例解する。例解されるように、別個のパルス電流源が各カラムに接続され得る。代替的な実施形態では、パルス電流源は、図の底部に接続され得る(例えば、アノードではなく、各VCSELのカソードに接続される。限定された数のVCSELの行及び列が例解されているが、他の数の行、他の数の列、及び/又は他の数のVCSELが実装され得、そのような実施形態が本明細書で企図されていることが理解される。
図9は、例示的な実施形態による、方法900のフローチャート図である。方法900は、LIDARデバイス(例えば、図1に例解されたLIDARユニット128、図2A~3に例解された第1のLIDARユニット204、図2A~2Eに例解された第2のLIDARユニット206、又は図4A及び4Bに例解されたLIDARデバイス410)によって実施され得る。そのようなLIDARデバイスは、例えば、VCSELのアレイ(例えば、図5A及び5Bに例解されたVCSEL500のアレイ)を含み得る。
ブロック902では、方法900は、光検出及び測距(LIDAR)デバイスのコントローラから、制御信号をLIDARデバイスの発射回路に送信することを含み得る。制御信号は、発射回路の1つ以上のコンデンサを充電するために使用される充電時間及び/又は充電電流を提供し得る。追加的に、制御信号は、周囲シーンの1つ以上の測定値に応答して(例えば、判定された関心領域に基づいて)、コントローラによって、規則的な間隔(例えば、1ms毎、5ms毎、10ms毎など)又は不規則な間隔で送信され得る。
ブロック904では、方法900はまた、制御信号に基づく発射回路によって、個々にアドレス指定可能な垂直共振器面発光レーザ(VCSEL)に、LIDARデバイスの周囲環境中に光パルスを放出させることを含み得る。個々にアドレス指定可能なVCSELは、アレイ内の複数の個々にアドレス指定可能なVCSELのうちの1つである。
ブロック906では、方法900は、LIDARデバイスの検出器によって、LIDARデバイスを取り囲む環境からの光パルスの反射を検出することを含み得る。検出器は、LIDARデバイスの複数の検出器のうちの1つである。
本明細書全体を通して説明されるVCSELは、様々な製造技術によって製造され得、それらの各々が本明細書で企図されている。例えば、1つ以上のフォトリソグラフィステップ(例えば、スピンコートフォトレジストを塗布すること、フォトレジストを紫外線に曝露することなど)、切断/エッチングステップ(例えば、化学エッチ又はレーザ切断)、ドーピングステップ(例えば、イオン注入ステップ)、堆積ステップ(例えば、金属堆積ステップ又はエピタキシステップ)、及び/又は接着ステップ(例えば、1つ以上の構成要素を、エポキシを使用してPCBに接着する)が、VSCELのうちの1つ以上を容易にするように用いられ得る。更に、VCSELは、様々な材料(例えば、Si、GaAs、AlGaAs、InGaAsなど)から製造され得る。製造のための材料の選択は、VCSELの所望の波長出力及び/又は所望の電力出力に基づき(例えば、関連付けられたLIDARデバイスのランタイム環境内の標的範囲に基づき)得る。他の製造技術も可能である。
本開示は、本出願に説明される特定の実施形態に関して限定されるものではなく、特定の実施形態は、様々な態様の例解として意図されるものである。当業者には明らかであるように、多くの修正及び変形を本開示の趣旨及び範囲から逸脱することなく行うことができる。本開示の範囲内の機能的に同等の方法及び装置は、本明細書において列挙されるものに加えて、当業者には、これまでの説明から明らかであろう。このような修正及び変形は、添付の特許請求の範囲内にあることが意図されている。
上記の詳細な説明は、添付の図面を参照して、開示されたシステム、デバイス、及び方法の様々な特徴及び機能を説明している。図では、文脈が別の方法で指示しない限り、同様の記号は、典型的には、同様の構成部品を識別する。本明細書及び図に説明される例示的な実施形態は、限定することを意図しているものではない。本明細書において提示される主題の範囲から逸脱することなく、他の実施形態を利用することができ、他の変更を行うことができる。本明細書で概して説明され、かつ図に例解されている、本開示の態様は、多種多様な異なる構成で配置、置換、結合、分離、及び設計することができ、その全てが明示的に企図されることは容易に理解されよう。
図における、また本明細書において考察されるメッセージフロー図、シナリオ、及びフローチャートのいずれか又は全てに関して、各ステップ、ブロック、動作、及び/又は通信は、実施形態例に従った情報の処理及び/又は情報の送信を表し得る。代替的な実施形態は、これらの例示的な実施形態の範囲内に含まれる。これらの代替の実施形態では、例えば、ステップ、ブロック、送信、通信、要求、応答、及び/又はメッセージとして説明される動作は、関わる機能性に応じて、図示又は考察されるものとは異なる順序で、実質的に同時に、又は逆の順序で実行することができる。更に、それより多いか又は少ないブロック及び/又は動作を、本明細書において考察されるメッセージフロー図、シナリオ、及びフローチャートのいずれかで使用することができ、これらのメッセージフロー図、シナリオ、及びフローチャートは、部分的に又は全体として互いに組み合わせることができる。
情報の処理に相当するステップ、ブロック、又は動作は、本明細書に説明される方法又は技法の特定の論理機能を果たすように構成され得る回路網に対応することができる。代替的に又は追加的に、情報の処理に相当するステップ又はブロックは、モジュール、セグメント、又はプログラムコード(関連データを含む)の一部分に対応することができる。プログラムコードは、特定の論理演算又は動作を方法又は技法において実施するためのプロセッサにより実行可能な1つ以上の命令を含むことができる。プログラムコード及び/又は関連データは、RAM、ディスクドライブ、ソリッドステートドライブ、又は別の記憶媒体を含む記憶デバイスなど、いずれのタイプのコンピュータ可読媒体にも記憶することができる。
更に、1つ以上の情報送信に相当するステップ、ブロック、又は動作は、同じ物理デバイスにおけるソフトウェアモジュール及び/又はハードウェアモジュール間の情報送信に対応することができる。しかしながら、他の情報送信は、様々な物理デバイスにおけるソフトウェアモジュール及び/又はハードウェアモジュール間の情報送信であり得る。
図に示される特定の配置は、限定としてみなされるべきではない。他の実施形態が、所与の図に示される各要素をそれより多く、又はそれより少なく含み得ることを理解されたい。更に、例解された要素のうちのいくつかは、組み合わせることができるか、又は省略することができる。更に、例示的な実施形態は、図に例解されていない要素を含むことができる。
様々な態様及び実施形態が本明細書に開示されているが、他の態様及び実施形態が、当業者には明らかであろう。本明細書に開示される様々な態様及び実施形態は、例解を目的とするものであり、限定することを意図するものではなく、真の範囲は、以下の特許請求の範囲によって示される。
Claims (20)
- 光検出及び測距(LIDAR)デバイスであって、
前記LIDARデバイスを取り囲む環境中に光パルスを放出するように構成された、個々にアドレス指定可能な垂直共振器面発光レーザ(VCSEL)のアレイと、
前記アレイ内で前記個々にアドレス指定可能なVCSELを選択的に発射するように構成された発射回路と、
制御信号を使用して前記発射回路を制御するように構成されたコントローラと、
複数の検出器であって、前記複数の検出器の各検出器が、前記アレイ内の1つ以上の個々にアドレス指定可能なVCSELによって放出され、前記LIDARデバイスを取り囲む前記環境内の1つ以上の物体によって反射される、前記光パルスの反射を検出するように構成されている、複数の検出器と、を備える、LIDARデバイス。 - 前記個々にアドレス指定可能なVCSELが、共有基板上に配設され、前記個々にアドレス指定可能なVCSELの光共振器が、前記共有基板の表面に対して法線方向に配向され、前記アレイ内の前記個々にアドレス指定可能なVCSELは、前記光パルスが、前記LIDARデバイスを取り囲む前記環境に送信される前に前記共有基板を通過しないように、前記共有基板の反対側にある前記個々にアドレス指定可能なVCSELの上面から前記光パルスを各々放出する、請求項1に記載のLIDARデバイス。
- 前記個々にアドレス指定可能なVCSELが、複数の行及び複数の列に配置され、単一の行の全ての個々にアドレス指定可能なVCSELが、共通のアノードを共有し、単一の列の全ての個々にアドレス指定可能なVCSELが、共通のカソードを共有する、請求項2に記載のLIDARデバイス。
- 複数のコンデンサを更に備え、各コンデンサが、個々にアドレス指定可能なVCSELのそれぞれの行に電気的に結合され、前記コンデンサの各々は、前記それぞれの行の前記個々にアドレス指定可能なVCSELに前記光パルスを放出させるように、前記それぞれの行の前記個々にアドレス指定可能なVCSELを通して放電されるように構成されている、請求項3に記載のLIDARデバイス。
- 単一のコンデンサバンク内の1つ以上のコンデンサと、
複数のスイッチと、を更に備え、各スイッチが、(i)前記単一のコンデンサバンク、及び(ii)個々にアドレス指定可能なVCSELのそれぞれの行に電気的に結合され、前記スイッチの各々が、前記それぞれの行の前記個々にアドレス指定可能なVCSELに前記光パルスを放出させるように、前記単一のコンデンサバンク内の前記コンデンサが、前記それぞれの行の前記個々にアドレス指定可能なVCSELを通して放電することを可能にするように構成されている、請求項3に記載のLIDARデバイス。 - 前記個々にアドレス指定可能なVCSELの前記アレイが、共有基板上に配設され、前記個々にアドレス指定可能なVCSELの光共振器が、前記共有基板の表面に対して法線方向に配向され、前記アレイ内の前記個々にアドレス指定可能なVCSELは、前記光パルスが、前記LIDARデバイスを取り囲む前記環境に送信される前に前記共有基板を通過するように、前記共有基板に面する前記個々にアドレス指定可能なVCSELの底面から前記光パルスを各々放出する、請求項1に記載のLIDARデバイス。
- 前記アレイ内の前記個々にアドレス指定可能なVCSELの各々が、前記アレイ内の全ての他の個々にアドレス指定可能なVCSELのカソードとは別個であるカソードを有し、前記アレイ内の前記個々にアドレス指定可能なVCSELの各々が、前記アレイ内の全ての他の個々にアドレス指定可能なVCSELのアノードとは別個であるアノードを有する、請求項6に記載のLIDARデバイス。
- 前記発射回路及び個々にアドレス指定可能なVCSELの前記アレイが、実装構造上に配設され、前記実装構造が、ポリイミドプリント回路基板を備える、請求項1に記載のLIDARデバイス。
- 前記発射回路が、エポキシダイボンディングを使用して前記実装構造に固定され、個々にアドレス指定可能なVCSELの前記アレイが、追加のエポキシを使用して前記実装構造に固定されている、請求項8に記載のLIDARデバイス。
- 前記追加のエポキシが、前記発射回路を取り囲み、封止する、請求項9に記載のLIDARデバイス。
- 前記アレイ内の前記個々にアドレス指定可能なVCSELの各々が、共有基板上に配設され、前記共有基板が、100μm~150μmの厚さを有する、請求項1に記載のLIDARデバイス。
- 前記アレイ内の前記個々にアドレス指定可能なVCSELが、少なくとも2つの異なるフォームファクタを有する、請求項1に記載のLIDARデバイス。
- 前記アレイ内の個々にアドレス指定可能なVCSELの第1のセットが、第1のフォームファクタを有し、
前記アレイ内の個々にアドレス指定可能なVCSELの第2のセットが、第2のフォームファクタを有し、
前記第1のフォームファクタが、第1のVCSEL直径を含み、
前記第2のフォームファクタが、第2のVCSEL直径を含み、
前記第1のVCSEL直径が、前記第2のVCSEL直径よりも大きく、
個々にアドレス指定可能なVCSELの前記第1のセット内の前記個々にアドレス指定可能なVCSELが、個々にアドレス指定可能なVCSELの前記第2のセット内の前記個々にアドレス指定可能なVCSELによって放出された光パルスよりも高い電力を有する光パルスを放出するように構成されている、請求項12に記載のLIDARデバイス。 - 前記アレイ内の前記個々にアドレス指定可能なVCSELが、直径20μm~40μmである、請求項1に記載のLIDARデバイス。
- 前記アレイ内の前記個々にアドレス指定可能なVCSELが、六角形パターンで配置され、前記六角形パターンが、前記個々にアドレス指定可能なVCSELの放出表面のサイズと比較して疎である、請求項1に記載のLIDARデバイス。
- 前記アレイ内の前記個々にアドレス指定可能なVCSELが、不均一なパターンで配置され、前記不均一なパターンが、前記LIDARデバイス内の光学歪みを補償するように設計されている、請求項1に記載のLIDARデバイス。
- 前記発射回路が、1つ以上の窒化ガリウム電界効果トランジスタ(GaNFET)を備える、請求項1に記載のLIDARデバイス。
- 前記光パルスが前記LIDARデバイスを取り囲む前記環境に送信される前に、前記光パルスを光学的に修正するように構成された送信レンズを更に備える、請求項1に記載のLIDARデバイス。
- 前記反射が前記複数の検出器によって検出される前に、前記LIDARデバイスを取り囲む前記環境から戻る前記光パルスの前記反射を光学的に修正するように構成された受信レンズを更に備える、請求項1に記載のLIDARデバイス。
- 方法であって、
光検出及び測距(LIDAR)デバイスのコントローラから、制御信号を前記LIDARデバイスの発射回路に送信することと、
前記制御信号に基づく前記発射回路によって、個々にアドレス指定可能な垂直共振器面発光レーザ(VCSEL)に、前記LIDARデバイスを取り囲む環境中に光パルスを放出させることであって、前記個々にアドレス指定可能なVCSELが、アレイ内の複数の個々にアドレス指定可能なVCSELのうちの1つであることと、
前記LIDARデバイスの検出器によって、前記LIDARデバイスを取り囲む前記環境からの前記光パルスの反射を検出することであって、前記検出器が、前記LIDARデバイスの複数の検出器のうちの1つであることと、を含む、方法。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063107929P | 2020-10-30 | 2020-10-30 | |
US63/107,929 | 2020-10-30 | ||
US17/513,973 | 2021-10-29 | ||
PCT/US2021/057317 WO2022094254A1 (en) | 2020-10-30 | 2021-10-29 | Light detection and ranging (lidar) devices having vertical-cavity surface-emitting laser (vcsel) emitters |
US17/513,973 US12072422B2 (en) | 2020-10-30 | 2021-10-29 | Light detection and ranging (lidar) devices having vertical-cavity surface-emitting laser (VCSEL) emitters |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023548740A true JP2023548740A (ja) | 2023-11-21 |
Family
ID=81379894
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023519432A Pending JP2023548740A (ja) | 2020-10-30 | 2021-10-29 | 垂直共振器面発光レーザ(vcsel)エミッタを有する光検出及び測距(lidar)デバイス |
Country Status (5)
Country | Link |
---|---|
US (1) | US12072422B2 (ja) |
EP (1) | EP4204848A1 (ja) |
JP (1) | JP2023548740A (ja) |
CN (1) | CN116507936A (ja) |
WO (1) | WO2022094254A1 (ja) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07503104A (ja) * | 1992-01-21 | 1995-03-30 | フオトニクス リサーチ インコーポレーテツド | トランジスタと垂直キャビティ面発光レーザの集積 |
JPH1187843A (ja) * | 1997-09-02 | 1999-03-30 | Sumitomo Electric Ind Ltd | 面発光型半導体発光素子 |
JPH11340572A (ja) * | 1998-05-26 | 1999-12-10 | Fuji Xerox Co Ltd | 半導体デバイス及び画像形成装置 |
US8761594B1 (en) * | 2013-02-28 | 2014-06-24 | Apple Inc. | Spatially dynamic illumination for camera systems |
US20150260830A1 (en) * | 2013-07-12 | 2015-09-17 | Princeton Optronics Inc. | 2-D Planar VCSEL Source for 3-D Imaging |
JP2016188808A (ja) * | 2015-03-30 | 2016-11-04 | 竹前 義博 | レンジセンサとその部品 |
JP2018511785A (ja) * | 2015-02-19 | 2018-04-26 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 赤外線レーザ照明装置 |
US20180301875A1 (en) * | 2017-04-12 | 2018-10-18 | Sense Photonics, Inc. | Devices with ultra-small vertical cavity surface emitting laser emitters incorporating beam steering |
JP2019191109A (ja) * | 2018-04-27 | 2019-10-31 | シャープ株式会社 | 光センサおよび電子機器 |
JP2020064059A (ja) * | 2018-10-09 | 2020-04-23 | ジック アーゲー | 光電センサ及び物体検出方法 |
WO2020210176A1 (en) * | 2019-04-09 | 2020-10-15 | OPSYS Tech Ltd. | Solid-state lidar transmitter with laser control |
Family Cites Families (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6195485B1 (en) * | 1998-10-26 | 2001-02-27 | The Regents Of The University Of California | Direct-coupled multimode WDM optical data links with monolithically-integrated multiple-channel VCSEL and photodetector |
US20030031218A1 (en) * | 2001-08-13 | 2003-02-13 | Jang-Hun Yeh | VCSEL structure and method of making same |
JP3897115B2 (ja) * | 2003-07-09 | 2007-03-22 | 信越化学工業株式会社 | 半導体素子の封止方法 |
JP2008244101A (ja) * | 2007-03-27 | 2008-10-09 | Canon Inc | モニタリング方法およびモニタリング機能を有するvcselアレイ |
US9618712B2 (en) * | 2012-02-23 | 2017-04-11 | Taiwan Semiconductor Manufacturing Company, Ltd. | Optical bench on substrate and method of making the same |
WO2013142708A1 (en) * | 2012-03-21 | 2013-09-26 | Tria Beauty, Inc. | Dermatological treatment device with one or more vertical cavity surface emitting laser (vcsel) |
US9831630B2 (en) | 2014-02-06 | 2017-11-28 | GM Global Technology Operations LLC | Low cost small size LiDAR for automotive |
DE102014211073A1 (de) | 2014-06-11 | 2015-12-17 | Robert Bosch Gmbh | Fahrzeug-Lidar-System |
US20160072258A1 (en) * | 2014-09-10 | 2016-03-10 | Princeton Optronics Inc. | High Resolution Structured Light Source |
US10126411B2 (en) | 2015-03-13 | 2018-11-13 | Continental Advanced Lidar Solutions Us, Llc. | Beam steering LADAR sensor |
US9865983B2 (en) * | 2015-08-31 | 2018-01-09 | Avago Technologies General Ip (Singapore) Pte. Ltd. | VCSEL incorporating a substrate having an aperture |
US10761195B2 (en) * | 2016-04-22 | 2020-09-01 | OPSYS Tech Ltd. | Multi-wavelength LIDAR system |
US10290993B2 (en) | 2016-06-03 | 2019-05-14 | Princeton Optronics, Inc. | VCSEL illuminator package |
US10027091B2 (en) | 2016-06-15 | 2018-07-17 | GM Global Technology Operations LLC | Monolithic two-dimensional VCSEL array |
KR102235227B1 (ko) | 2017-02-17 | 2021-04-02 | 호쿠요덴키 가부시키가이샤 | 물체 포착 장치, 포착 대상물, 및 물체 포착 시스템 |
US10116115B2 (en) | 2017-02-22 | 2018-10-30 | Geoff W. Taylor | Integrated circuit implementing a VCSEL array or VCSEL device |
JP7134988B2 (ja) | 2017-03-01 | 2022-09-12 | アウスター インコーポレイテッド | ライダーのための正確な光検出器測定 |
EP3382828A1 (en) | 2017-03-31 | 2018-10-03 | Koninklijke Philips N.V. | Inherently safe laser arrangement comprising a vertical cavity surface emitting laser |
DE102017208052A1 (de) | 2017-05-12 | 2018-11-15 | Robert Bosch Gmbh | Senderoptik für ein LiDAR-System, optische Anordnung für ein LiDAR-System, LiDAR-System und Arbeitsvorrichtung |
AU2018297291B2 (en) | 2017-07-05 | 2024-03-07 | Ouster, Inc. | Light ranging device with electronically scanned emitter array and synchronized sensor array |
TWI734922B (zh) | 2017-07-25 | 2021-08-01 | 盧曼頓運作有限公司 | 單晶片串聯連接的vcsel 陣列 |
KR102435970B1 (ko) | 2017-07-28 | 2022-08-25 | 옵시스 테크 엘티디 | 작은 각도 발산을 갖는 vcsel 어레이 lidar 송신기 |
CA3072760A1 (en) | 2017-08-14 | 2019-02-21 | Trilumina Corp. | A surface-mount compatible vcsel array |
CN207571298U (zh) | 2017-11-15 | 2018-07-03 | 深圳市杰普特光电股份有限公司 | 激光雷达阵元和激光雷达 |
DE102018206790A1 (de) | 2018-05-03 | 2019-11-07 | Robert Bosch Gmbh | Baugruppe für einen LIDAR-Sensor, LIDAR-Sensor und Fortbewegungsmittel |
KR102050599B1 (ko) | 2018-05-14 | 2019-12-02 | 주식회사 에스오에스랩 | 라이다 장치 |
EP3804053B1 (en) | 2018-06-04 | 2024-04-03 | AMS Sensors Asia Pte. Ltd. | Vertical cavity surface emitting laser devices |
US10910791B2 (en) | 2018-06-27 | 2021-02-02 | Xiamen Sanan Integrated Circuit Co., Ltd. | Low speckle laser array and image display thereof |
US20210296852A1 (en) | 2018-08-22 | 2021-09-23 | Shenzhen Raysees Technology Co., Ltd. | Vertical cavity surface emitting laser (vcsel) array package and manufacturing method |
DE112019004773T5 (de) | 2018-09-24 | 2021-08-12 | Ams Sensors Asia Pte. Ltd. | Erzeugung von beleuchtungsstrahlen mit mikrolinsen-arrays |
CN109856644B (zh) | 2019-01-25 | 2022-09-06 | 太原理工大学 | 用于无人驾驶汽车的高探测效率vcsel阵列混沌激光雷达装置 |
US12007504B2 (en) | 2019-03-01 | 2024-06-11 | Vixar, Inc. | 3D and LiDAR sensing modules |
EP3963355A1 (en) | 2019-03-08 | 2022-03-09 | OSRAM GmbH | Component for a lidar sensor system, lidar sensor system, lidar sensor device, method for a lidar sensor system and method for a lidar sensor device |
DE102019107957A1 (de) | 2019-03-27 | 2020-10-01 | OSRAM Opto Semiconductors Gesellschaft mit beschränkter Haftung | Optoelektronische vorrichtung und lidar-system |
KR102164841B1 (ko) | 2019-04-01 | 2020-10-13 | 하나옵트로닉스 주식회사 | 아웃가스 통로를 갖는 수직 공진형 표면 발광 레이저 패키지 및 그의 제조방법 |
US11581705B2 (en) | 2019-04-08 | 2023-02-14 | Lumentum Operations Llc | Vertical-cavity surface-emitting laser with dense epi-side contacts |
CN110596720A (zh) | 2019-08-19 | 2019-12-20 | 深圳奥锐达科技有限公司 | 距离测量系统 |
CN110412544A (zh) | 2019-08-23 | 2019-11-05 | 上海禾赛光电科技有限公司 | 激光发射系统以及包括所述激光发射系统的激光雷达 |
CN111224320A (zh) | 2020-04-21 | 2020-06-02 | 常州纵慧芯光半导体科技有限公司 | 一种激光器芯片及其制造方法与应用 |
-
2021
- 2021-10-29 EP EP21887627.4A patent/EP4204848A1/en active Pending
- 2021-10-29 JP JP2023519432A patent/JP2023548740A/ja active Pending
- 2021-10-29 WO PCT/US2021/057317 patent/WO2022094254A1/en active Application Filing
- 2021-10-29 CN CN202180073598.5A patent/CN116507936A/zh active Pending
- 2021-10-29 US US17/513,973 patent/US12072422B2/en active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07503104A (ja) * | 1992-01-21 | 1995-03-30 | フオトニクス リサーチ インコーポレーテツド | トランジスタと垂直キャビティ面発光レーザの集積 |
JPH1187843A (ja) * | 1997-09-02 | 1999-03-30 | Sumitomo Electric Ind Ltd | 面発光型半導体発光素子 |
JPH11340572A (ja) * | 1998-05-26 | 1999-12-10 | Fuji Xerox Co Ltd | 半導体デバイス及び画像形成装置 |
US8761594B1 (en) * | 2013-02-28 | 2014-06-24 | Apple Inc. | Spatially dynamic illumination for camera systems |
US20150260830A1 (en) * | 2013-07-12 | 2015-09-17 | Princeton Optronics Inc. | 2-D Planar VCSEL Source for 3-D Imaging |
JP2018511785A (ja) * | 2015-02-19 | 2018-04-26 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 赤外線レーザ照明装置 |
JP2016188808A (ja) * | 2015-03-30 | 2016-11-04 | 竹前 義博 | レンジセンサとその部品 |
US20180301875A1 (en) * | 2017-04-12 | 2018-10-18 | Sense Photonics, Inc. | Devices with ultra-small vertical cavity surface emitting laser emitters incorporating beam steering |
JP2019191109A (ja) * | 2018-04-27 | 2019-10-31 | シャープ株式会社 | 光センサおよび電子機器 |
JP2020064059A (ja) * | 2018-10-09 | 2020-04-23 | ジック アーゲー | 光電センサ及び物体検出方法 |
WO2020210176A1 (en) * | 2019-04-09 | 2020-10-15 | OPSYS Tech Ltd. | Solid-state lidar transmitter with laser control |
Also Published As
Publication number | Publication date |
---|---|
US12072422B2 (en) | 2024-08-27 |
CN116507936A (zh) | 2023-07-28 |
EP4204848A1 (en) | 2023-07-05 |
WO2022094254A1 (en) | 2022-05-05 |
US20220137230A1 (en) | 2022-05-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11923658B1 (en) | Laser diode firing system | |
JP7369873B2 (ja) | 光検出及び測距(lidar)デバイスにおける干渉軽減のための発光器の選択的非アクティブ化 | |
JP7386899B2 (ja) | 光検出および測距(lidar)デバイスに関連付けられたドロッププロセスの戦略を決定するための方法およびシステム | |
US20220082660A1 (en) | Light Detection and Ranging (Lidar) Device having a Light-Guide Manifold | |
US20220137185A1 (en) | Three Terminal Broad Area Laser | |
US20220163675A1 (en) | Methods of Using Background Images from a Light Detection and Ranging (LIDAR) Device | |
US12072422B2 (en) | Light detection and ranging (lidar) devices having vertical-cavity surface-emitting laser (VCSEL) emitters | |
US20240319378A1 (en) | Light detection and ranging (lidar) devices having vertical-cavity surface-emitting laser (vcsel) emitters | |
US20240071093A1 (en) | Time-Division Multiple Access Scanning for Crosstalk Mitigation in Light Detection and Ranging (Lidar) Devices | |
US20230358868A1 (en) | Mitigating Crosstalk from High-Intensity Returns in a Light Detection and Ranging (Lidar) Device | |
US20240215169A1 (en) | Transmitter Charging Module for Light Detection and Ranging (Lidar) Device | |
US20230408651A1 (en) | Spinning Lidar With One or More Secondary Mirrors | |
US11781549B1 (en) | Air cooling system for electronic spinning assembly | |
US11822377B2 (en) | Timebase synchronization using pulsed signal injection | |
US20240201391A1 (en) | Differential Methods for Environment Estimation, Lidar Impairment Detection, and Filtering | |
US20230194676A1 (en) | Two-Step Return Calibration for Lidar Cross-Talk Mitigation | |
US20240184017A1 (en) | Anti-Reflection Coated Lens for Fast Axis Collimation | |
US20230194677A1 (en) | Multi-Chip Daisychain for Output Aggregation | |
JP2023504361A (ja) | 関心領域およびサーマルバジェットに基づく光検出および測距(lidar)デバイスのためのパルスエネルギー計画 | |
CN118369590A (zh) | 具有光导歧管的光检测和测距(lidar)设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230509 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240528 |