JP2023511134A - 周波数変調連続波LiDARのためのオンチップモニタリングおよびキャリブレーション回路 - Google Patents

周波数変調連続波LiDARのためのオンチップモニタリングおよびキャリブレーション回路 Download PDF

Info

Publication number
JP2023511134A
JP2023511134A JP2022544169A JP2022544169A JP2023511134A JP 2023511134 A JP2023511134 A JP 2023511134A JP 2022544169 A JP2022544169 A JP 2022544169A JP 2022544169 A JP2022544169 A JP 2022544169A JP 2023511134 A JP2023511134 A JP 2023511134A
Authority
JP
Japan
Prior art keywords
lidar
lidar chip
output
coherent light
optical switch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022544169A
Other languages
English (en)
Inventor
サンドボーン・フィリップ
リン・セン
Original Assignee
アワーズ テクノロジー リミテッド ライアビリティー カンパニー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アワーズ テクノロジー リミテッド ライアビリティー カンパニー filed Critical アワーズ テクノロジー リミテッド ライアビリティー カンパニー
Publication of JP2023511134A publication Critical patent/JP2023511134A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/32Systems determining position data of a target for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated
    • G01S17/34Systems determining position data of a target for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated using transmission of continuous, frequency-modulated waves while heterodyning the received signal, or a signal derived therefrom, with a locally-generated signal related to the contemporaneously transmitted signal
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/50Systems of measurement based on relative movement of target
    • G01S17/58Velocity or trajectory determination systems; Sense-of-movement determination systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4817Constructional features, e.g. arrangements of optical elements relating to scanning
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/497Means for monitoring or calibrating

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Optical Modulation, Optical Deflection, Nonlinear Optics, Optical Demodulation, Optical Logic Elements (AREA)

Abstract

ソリッドステート(Solid State)周波数変調連続波(FMCW、Frequency Modulated Continuous Wave)LiDAR(Light Detection and Ranging)システムのLiDARチップとして、LiDARチップは、光スイッチネットワーク(Optical Switch Network)、スイッチ可能なコヒーレントピクセルアレイ(SCPA、Switchable Coherent Pixel Array)を含む。光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光(Coherent Light)を選択的に提供するように構成される。SCPAは、コヒーレントピクセル(CPs、Coherent Pixels)を含み、各CPsは、複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される。LiDARチップは、また、光スイッチネットワークのキャリブレーション(Calibration)のためのモニタリングアセンブリ(Monitoring Assembly)および/またはコヒーレント光を生成するために用いられる波形の形状のキャリブレーションのための干渉計(Interferometer)を含む。

Description

関連出願についての相互参照
本出願は、全体の開示内容が本明細書に参照として含まれる2020年1月23日付に出願された米国仮特許出願第62/965、094号および2020年1月28日付に出願された米国仮特許出願第62/966、983号についての35U.S.C§119(e)下の優先権を主張する。
本開示の内容は、一般的に、周波数変調連続波(FMCW、Frequency Modulated Continuous Wave)LiDAR(Light Detection and Ranging)に関するものであって、より具体的には、ソリッドステート(Solid State)FMCW LiDARシステムに関する。
基準干渉計(Reference Interferometer)は、レーザーチャープ(Laser Chirp)の非線形性を特性化と補正を支援するために、従来のFMCW LiDARによって用いられる。従来のLiDARまたは光コヒーレンス断層撮影(OCT、Optical Coherence Tomography)システムは、バランスフォトダイオード(Balanced Photodiode)を有する基準干渉計に依存してレーザー周波数を間接的に推定し、測定データをキャリブレート(Calibrate)する。基準干渉計およびバランスフォトダイオードからの位相抽出の精度を保証するために、基準干渉計は、一般的に長い遅延ライン(Delay Line)を有するか、または短い遅延ラインと慎重なバイアス(Bias)制御を必要とする(すなわち、チップから外れることができる)。さらに、小さな導波管で発生する高い損失により、長い遅延ラインは、一般的に集積フォトニクス(Integrated Photonics)にとって困難な問題である。また、FMCWレーザーの性能は、温度または他の環境条件を用いたいくつかの測定過程、またはFMCWセンサの寿命期間で様々な時間尺度でドリフト(Drift)することができる。
従来のLiDARシステムは、レーザービームをステアリングするために機械的可動部品およびバルク光学レンズ要素(すなわち、屈折レンズシステム)を使用する。そして、多数の応用(例えば、自動車)の場合、かさばりすぎ、高価で信頼性が低くなる。
ソリッドステートFMCW LiDARシステムのLiDARチップ(LiDAR Chip)は、光スイッチネットワーク(Optical Switch Network)、スイッチ可能なコヒーレントピクセルアレイ(SCPA、Switchable Coherent Pixel Array)、およびモニタリングアセンブリ(Monitoring Assembly)を含む。光スイッチネットワークは、LiDARチップ上にある。光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光(Coherent Light)を選択的に提供するように構成される。SCPAは、LiDARチップ上にある。SCPAは、それぞれのコヒーレントピクセル(CPs、Coherent Pixels)を含み、各CPsは、複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される。モニタリングアセンブリは、LiDARチップ上にある。モニタリングアセンブリは、複数の光検出器(Photodetector)を含み、複数の光検出器のそれぞれは、複数の出力導波管のうち、対応する出力導波管から検出された光のレベルに応答して出力信号を生成するように構成される。光スイッチネットワークは、モニタリングアセンブリからの出力信号に基づいて光スイッチネットワークについてのスイッチドライバの駆動強度(Drive Strength)を調整することによって、(例えば、コントローラによって)キャリブレートされる。
一部の実施形態において、LiDARチップは、スプリッタ(Splitter)、干渉計(Interferometer)、光スイッチネットワーク、およびSCPAを含む。スプリッタは、LiDARチップ上にある。スプリッタは、コヒーレント光を第1部分と第2部分に分離するように構成される。コヒーレント光は、波形に基づいてチャープ(Chirp)される。干渉計は、LiDARチップ上にある。干渉計は、コヒーレント光の第1部分を用いてI(In-phase)信号およびQ(Quadrature)信号を生成するように構成される。光スイッチネットワークは、LiDARチップ上にある。光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光の第2部分を選択的に提供するように構成される。SCPAは、LiDARチップ上にある。SCPAは、CPsを含み、各CPsは、複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される。コントローラは、IおよびQ信号に部分的に基づいてコヒーレント光の周波数偏差を識別し、識別された偏差を補償するためのものに部分的に基づいて波形の形状を制御するように構成される。一部の実施形態において、LiDARチップは、また、以前の段落で説明したように、モニタリングアセンブリを含み得る。
一部の実施形態において、LiDARチップは、ソリッドステートFMCW LiDARシステムの焦点平面アレイ(FPA、Focal Plane Array)システムの一部である。FPAシステムは、スプリッタ、干渉計、光スイッチネットワーク、SCPA、モニタリングアセンブリ、およびレンズシステムを含む。スプリッタは、LiDARチップ上にある。スプリッタは、コヒーレント光を第1部分および第2部分に分離するように構成され、コヒーレント光は、波形に応じてチャープされる。干渉計は、LiDARチップ上にある。干渉計は、コヒーレント光の第1部分を用いてI信号およびQ信号を生成するように構成される。光スイッチネットワークは、LiDARチップ上にある。光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光の第2部分を選択的に提供するように構成される。SCPAは、LiDARチップ上にある。SCPAは、CPsを含み、各CPsは、複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される。モニタリングアセンブリは、LiDARチップ上にある。モニタリングアセンブリは、複数の光検出器を含み、複数の光検出器は、それぞれ複数の出力導波管のうち、対応する出力導波管から検出された光のレベルに応答して出力信号を生成するように構成される。レンズシステムは、SCPAから放出されるコヒーレント光を1つ以上の光ビーム(Light Beam)として環境(Environment)内に指向させるように配置され、1つ以上の光ビームのそれぞれは、特定の角度で放出され、特定の角度は、1つ以上の光ビームを形成するコヒーレント光を生成したLiDARチップ上のCPsの位置に部分的に基づく。コントローラは、IおよびQ信号に部分的に基づいて前記コヒーレント光の周波数偏差を識別し、識別された偏差を補償するためのものに部分的に基づいて波形の形状を制御する。コントローラは、また、モニタリングアセンブリの出力信号に基づいて光スイッチネットワークをキャリブレートするように構成される。
本開示の実施形態の他の利点および特徴は、添付の図面の例に関連する以下の詳細な説明および添付の特許請求の範囲からより確実に明らかになるであろう。
1つ以上の実施形態によるLiDARチップ上のスイッチ可能なコヒーレントピクセルアレイチップを用いたソリッドステートスキャニングを示す。
1つ以上の実施形態によるオンチップモニタリングアセンブリ(On-chip Monitoring Assembly)の基本構造および信号フローを示す。
1つ以上の実施形態による減少した数の入出力(I/O)を有するマルチチャンネルスイッチ可能なコヒーレントピクセルアレイにおけるモニタリング光検出器の線形アレイについてのクロスバー(Crossbar)読み取り方式の図である。
1つ以上の実施形態による減少した数のI/Oを有する単一チャンネルスイッチ可能なコヒーレントピクセルアレイのモニタリング光検出器ついての階層的読み取り方式の図である。
1つ以上の実施形態による減少した数のI/Oを有するマルチチャンネルスイッチ可能なコヒーレントピクセルアレイのモニタリング光検出器ついての階層的読み取り方式の図である。
1つ以上の実施形態によるダイレクトレーザードライバ(Direct Laser Drive)についての後処理フィードバックを有するハイブリッド結合干渉計(Hybrid-coupled Interferometer)の図である。
1つ以上の実施形態による変調器ドライバについての後処理フィードバックを有するハイブリッド結合干渉計の図である。
1つ以上の実施形態によるレーザー波形生成およびFMCWキャリブレーションのためのプロセスを示す。
1つ以上の実施形態によるFPAシステムを含むソリッドステートLiDARシステムを示す。
ソリッドステートFMCW LiDARシステムは、システムの視野(Field of View)についての深さ情報(例えば、1つ以上のオブジェクトに対する距離、速度、加速度)を決定する。ソリッドステートFMCW LiDARは、周波数変調されたコリメート(Collimated)された光ビーム(Light Beam)をローカル(Local)領域に指向させ、オブジェクトの距離と速度を直接測定する。ローカル領域内のオブジェクトから反射された光である信号は、局部発振器(LO、Local Oscillator)と呼ばれるビームのタップした(Tapped)バージョンと混合(Mix)される。追加測定を必要とするドップラーシフト(Doppler Shift)について補正されると、結果の無線周波数(RF、Radiofrequency)ビート(Beat)信号の周波数は、LiDARシステムからのオブジェクトの距離に比例する。同時に行われることも、同時に行われないこともある2つの測定は、ターゲットの距離および速度の情報を提供する。
ソリッドステートFMCW LiDARシステムは、高性能ソリッドステートビームステアリング(Beam Steering)およびレーザーチャーピング(Laser Chirping)を達成するためにオンチップ(On-chip)モニタリングおよびキャリブレーション回路を用いる。ソリッドステートFMCW LiDARシステムは、焦点平面アレイ(FPA)システムを含む。FPAは、1つ以上のスイッチ可能なコヒーレントピクセルアレイ(SCPA)を含む。1つ以上のSCPAは、FPAシステムが単一次元および/または2つの次元についてソリッドステートビームステアリングを実行できるように、レンズシステムの焦点平面に配置され得る。入射するビームの方向は、集束スポットの個別位置にマッピングされ、その逆も同様である。SCPAの課題の1つは、いつでも低い挿入損失(Insertion Loss)、高い消光比(Extinction Ratio)、および低いクロストーク(Crosstalk)を達成できるようにスイッチネットワークについての最適なキャリブレーション設定を維持することである。ソリッドステートFMCW LiDARシステムは、オンチップフィードバックメカニズムを用いて高性能ソリッドステートビームステアリングの現場(In Situ)キャリブレーションまたはリアルタイム閉ループ(Closed-Loop)制御を可能にする。
オンチップフィードバックメカニズムは、ローカル経路およびターゲット経路の光信号の間の干渉を測定して距離を感知するソリッドステートFMCW LiDARによって高品質のレーザーチャープを維持することを容易にする。レーザーの周波数をスイープ(Sweep)することによって、干渉信号は、ターゲット距離に比例する周波数を有する振動(Oscillation)となる。FMCWレーザーは、三角形の方式でより低い周波数からより高い周波数へ、そして、より高い周波数からより低い周波数へ線形周波数スイープを有するように変調される。多くの場合、このような方法で調整(Tuned)されたレーザーは、特定の駆動信号で調整する必要があり、そうでなければ、周波数スイープが線形から著しくずれる可能性がある。線形性偏差は、FMCW LiDARを用いて導出された距離および速度測定において重大な不正確さを引き起こす。
一部の実施形態において、ソリッドステートFMCW LiDARシステムは、1つ以上の統合された(Integrated)SCPAによって実現されるソリッドステートビームステアリングのためにオンチップモニタリングおよびキャリブレーション回路を用いる。ソリッドステートFMCW LiDARシステムは、オンチップ光パワー(Optical Power)モニタリング回路を用いて光スイッチネットワークの現場キャリブレーションまたはリアルタイム閉ループ制御を可能にする。例えば、LiDARチップは、光スイッチネットワーク、SCPA、およびモニタリングアセンブリ(Monitoring Assembly)を含む(すなわち、オンチップ)。光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光を選択的に提供するように構成される。SCPAは、コヒーレントピクセル(CPs)を含み、各CPsは、複数の出力導波管のうち、対応する出力導波管によって提供されたコヒーレント光を放出するように構成される。モニタリングアセンブリは、複数の光検出器(PD、Photodetector)を含み、複数の光検出器のそれぞれは、複数の出力導波管のうち、対応する出力導波管から検出された光のレベルに応答して出力信号を生成するように構成される。光スイッチネットワークは、モニタリングアセンブリの出力信号に基づいて光スイッチネットワークについてのスイッチドライバの駆動強度を調整することによって(例えば、コントローラによって)、キャリブレートされる。
1つ以上のSCPAは、迅速なソリッドステートビームステアリングと同軸(Co-axial)FMCW LiDAR動作のためにレンズシステムの焦点平面(Focal Plane)に配置される。光カプラー(Optical Coupler)およびモニタリングPDを有するオンチップ光モニタリング回路は、光スイッチネットワークの出力ポートで光パワーをモニタリングする。この設計により、CPsに影響を与えたり、LiDARの正常動作を妨げることなく、現場キャリブレーションおよびリアルタイム閉ループ制御を行い得る。大規模またはマルチチャンネルSCPAについて、クロスバー(Crossbar)タイプまたは階層的(例えば、二分木(Binary Tree))連結方式を用いてモニタリング回路についての入出力(I/O)および受信機の数が大幅に減少した任意のモニタリングPDから信号を読み取ることができる。
一部の実施形態において、ソリッドステートFMCW LiDARシステムは、高品質のレーザーチャープ信号を生成するためにオンチップモニタリングおよびキャリブレーション回路を用いる。例えば、LiDARチャープは、スプリッタ、干渉計、光スイッチネットワーク、およびSCPAを含み得る(すなわち、オンチップ)。スプリッタは、コヒーレント光を第1部分および第2部分に分離するように構成される。コヒーレント光は、波形に応じてチャープされる。干渉計は、コヒーレント光の第1部分を用いてI(In-phase)信号およびQ(Quadrature)信号を生成するように構成される。光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光の第2部分を選択的に提供するように構成される。SCPAは、CPsを含み、各CPsは、複数の出力導波管のうち、対応する出力導波管によって提供されたコヒーレント光を放出するように構成される。コントローラは、IおよびQ信号に部分的に基づいてコヒーレント光の周波数偏差を識別し、識別された偏差を補償するために波形の形状を制御するように構成される。一部の実施形態において、LiDARチャープは、以前の段落で説明したように、モニタリングアセンブリを含み得る。
ソリッドステートFMCW LiDARシステムは、レーザードライバのキャリブレーションのために光ハイブリッド(Optical Hybrid)を有する周波数判別干渉計(Frequency Discrimination Interferometer)およびスイープしたソースレーザー(Swept-Source Laser)を用いる。一部の実施形態において、プログラマブルレーザードライバ(電流または電圧源)は、正と負の周波数スイープを交互に生成するためにチューニング(Tuning)レーザーソースを直接駆動する。他の実施形態において、プログラマブル変調器ドライバは、シードレーザービーム(Seed Laser Beam)で正と負の周波数スイープを誘導するために変調器を直接駆動する。これは、光を2つの経路(1つの「ローカル」経路および1つの「基準」経路)に送るスプリッタ、「90度光ハイブリッド」として知られている光結合器(Optical Combiner)、複数の光検出器を有する光受信機(Photoreceiver)および信号処理のためのコントローラを含む干渉計につながる。コントローラは、光ハイブリッドの出力を用いて瞬時(Instantaneous)信号位相およびレーザー周波数を計算する。結果的な瞬時レーザー周波数は、線形からのレーザー周波数偏差を補償するために駆動信号発生器にフィードバックされる。また、干渉計および光ハイブリッドは、予歪みプロセス(Predistortion Process)の残留エラー(Residual Error)またはレーザー/環境ドリフトによる非線形性(Non-linearity)をキャリブレートするために用いられ得る。したがって、ソリッドステートFMCW LiDARシステムは、レーザードライバ信号の現場生成と残留非線形性およびレーザー性能ドリフトの現場キャリブレーションを実行する。
一部の実施形態において、光スイッチネットワークのキャリブレーションのためのモニタリングアセンブリおよびレーザードライバキャリブレーションのための光ハイブリッドを有する干渉計は、すべて同じLiDARチップ上に実装されることができることに留意されたい。このように、LiDARチップは、光スイッチネットワークをキャリブレートできるだけでなく、レーザードライバもキャリブレートできる。
前述のように、レーザーチャープの非線形性についての特性化および補正を助けるために干渉計を用いる従来のLiDARシステムは、長い遅延ラインまたは短い遅延ラインと慎重なバイアス制御を有する。長い遅延ラインは、小さな導波管で発生する高い損失のために集積フォトニクス(Integrated Photonics)に問題があり、オフチップである可能性がある。同様に、慎重なバイアス制御は、一般的に制御回路の複雑さの増加に関連している。一方、ソリッドステートFMCW LiDARシステムは、複雑なバイアス制御なしにオンチップの短い遅延ラインを用いてレーザー周波数測定を実行する。また、ソリッドステートFMCW LiDARシステムは、時間または環境条件によるレーザー特性の変化を考慮するためにレーザー周波数を測定し、レーザーの駆動波形を動的に調整するように構成される。
LiDARチップは、ソリッドステートLiDARシステムから放出される光を少なくとも第1角度次元(Angular Dimension)(例えば、高度)でステアリングできることに留意されたい。そして、ソリッドステートFMCW LiDARシステムは、異なる角度次元(例えば、方位角)で光をステアリングするために、例えば、スキャンミラー(Scanning Mirror)(例えば、可動ミラー(Moving Mirror)、ポリゴンミラー(Polygon Mirror)など)を含み得る。そして、一部の実施形態において、LiDARチップが光ビームを2次元(例えば、方位角および高度)にステアリングできるように、1つ以上のSCPA内に光アンテナが2次元に配置される。可動部品なしでビームをステアリングすることができれば、多くの従来の機械的駆動LiDARシステムで見られるフォームファクタ(Form Factor)、コスト、および信頼性の問題を軽減できる。
図1は、1つ以上の実施形態によるLiDARチップ106上のスイッチ可能なコヒーレントピクセルアレイチップを用いたソリッドステートスキャニングを示す。LiDARチップ106は、ローカル領域をスキャンするように構成されたFPAシステムの一部である。LiDARチップ106は、フォトニック集積回路(Photonic Integrated Circuit)(例えば、シリコンフォトニクス(Silicon Photonics))に基づく。LiDARチップ106は、1つ以上のFMCW LiDARトランシーバ(Transceiver)チャンネル101を含む。FMCW LiDARトランシーバチャンネル101は、FMCW光源102、光スイッチネットワーク103、モニタリングアセンブリ110、およびSCPA115を含む。図示のように、FMCW光源102は、LiDARチップ106上に直接統合される。他の実施形態において、FMCW光源102は、LiDARチップ106の一部ではなく、代わりにFMCW光源102からの光が外部ソースからLiDARチップ106に結合される。FMCW光源102は、LiDARチップ106または異なるLiDARチップ上にある異なるFMCW LiDARトランシーバチャンネルの間の分離光(Split Light)であり得る。光はまた、光ファイバ増幅器(Fiber Amplifier)または半導体増幅器チップによって増幅できる。光スイッチネットワーク103は、出力ポートの間で誘導光(Guided Light)をスイッチングし、選択されたポートに関連するコヒーレントピクセルを活性化する。光スイッチネットワーク103は、SCPA115の様々なコヒーレントピクセルに結合する複数の出力導波管のうち、1つ以上にコヒーレント光を選択的に提供するように構成される。モニタリングアセンブリ110は、光スイッチネットワーク103の後にチップ上の任意の場所に、または光スイッチネットワーク103の一体化した部分として配置され得る。一例として、図示のように、モニタリングアセンブリ110は、光スイッチネットワーク103とSCPA104との間に配置され得る。モニタリングアセンブリ110は、複数の光検出器を含む。複数の光検出器のそれぞれは、複数の出力導波管のうち、対応する出力導波管から検出された光のレベルに応答して出力信号を生成するように構成される。光スイッチネットワーク130は、モニタリングアセンブリ110の出力信号に基づいて光スイッチネットワーク103についてのスイッチドライバの駆動強度を調整することによってキャリブレートされる。モニタリングアセンブリ110の実施形態は、図2、図3、図4aおよび図4bに関連して以下に説明される。
SCPA115は、コヒーレントピクセルを含み、コヒーレントピクセルのそれぞれは、複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される。各コヒーレントピクセルは、光信号を放出および受信するための光アンテナ105および導波管、カプラー、ハイブリッド、格子(Grating)および光検出器などのRF信号を生成するための他の受動および能動光学コンポーネントを含む。SCPA115は、レンズシステム107の焦点平面に配置される。レンズシステム107は、各コヒーレントピクセルの物理的位置を特定の方向にマッピングする1つ以上の光学素子(例えば、正の(Positive)レンズ、フリーフォーム(Freeform)レンズ、フレネル(Fresnel)レンズなど)を含む。一部の実施形態において、レンズシステム107は、複数の光アンテナ105を介して放出される送信信号をコリメートするように配置される。レンズシステム107は、複数のアンテナのうち、光アンテナから放出される送信信号をFPAシステムの視野の対応する部分に投影(Project)し、送信信号の反射を光アンテナに提供するように構成される。各光アンテナは、異なる角度で光を送受信する。したがって、異なるアンテナへのスイッチングによって離散光ビームスキャニング(Discrete Optical Beam Scanning)が達成される。FPAシステムは、FPAシステムの視野内のターゲットにわたってレーザービーム108をスキャンし、FPAシステム内のコヒーレントピクセルは、後にLiDARポイントクラウド(Point Cloud)を生成するためにデジタル方式で処理される電気信号を生成する。レンズシステム107は、1つ以上の角度次元に沿ってトランシーバの視野をスキャンする(例えば、ローカル領域の2Dスキャンを行う)コリメートされた送信信号を生成する。光を異なるコヒーレントピクセルにスイッチングすることによって、LiDARチップ106は、コリメートされたレーザービーム108を異なる角度で放出または受信し、単一チャンネルまたは複数チャンネルについての離散ソリッドステートスキャニングおよび同軸光学センシング(Co-axial Optical Sensing)を並列に可能にすることに留意されたい。
図2は、1つ以上の実施形態によるオンチップモニタリングアセンブリ110の基本構造および信号フローを示す。オンチップモニタリングアセンブリ110は、光スイッチネットワーク103の出力から放出されるコヒーレント光をモニタリングする。オンチップモニタリングアセンブリ110は、1つ以上のモニタリング回路200を含む。モニタリング回路200は、例えば、光カプラー202、モニタリング光検出器(PD)203、および出力導波管204a、204bを含み得る。光スイッチネットワークは、複数の出力ポートを有する。光スイッチネットワーク103は、出力ポートの間でFMCWソースからの光をスイッチングするように構成される。そして、各出力ポートは、それぞれの出力導波管(例えば、出力導波管201)に結合される。さらに、出力導波管201のうち、一部は、光スイッチ内の内部ルーティング導波管(Internal Routing Waveguide)であり得る。モニタリングアセンブリ110は、複数の出力導波管に提供されるコヒーレント光の一部をタップ(Tap)し、当該光の一部を複数の光検出器に提供するように構成される複数の光カプラーを含む。一部の実施形態において、各光カプラーは、複数の光検出器のうち、光カプラーがコヒーレント光のタップした部分を提供する異なる対応する光検出器を有する。例えば、光カプラー202は、光スイッチネットワーク103の出力ポートにある出力導波管201からの光パワー(すなわち、コヒーレント光)をタップし、タップした光パワー(すなわち、出力ポートから出力されたコヒーレント光の一部)を出力導波管204aを介してモニタリングPD203に提供する。光パワーは、モニタリングPD203を介して電気信号に変換される。光カプラー202は、出力導波管204bを介して残りの光パワーを出力する。出力導波管204bは、FMCW LiDARトランシーバチャンネル101内の次のステージ(例えば、コヒーレントピクセル)に光を提供する。
1つ以上のモニタリング回路200からの電気信号は、その後、受信機206を介して処理される。受信機は、例えば、増幅器、積分器(Integrator)、スイッチなどを含み得る。受信機206から出力されるデータは、アナログ-デジタル変換器(ADC、Analog to Digital Converter)207によって量子化される。ADC207の出力は、その後、コントローラ208で処理される。コントローラ207は、例えば、制御回路、コンピュータプロセッサ、FPGA(Field-Programmable Gate Array)、デジタル信号プロセッサ、マイクロコントローラ、ASIC(Application Specific Integrated Circuit)、またはこれらの一部の組み合わせを含み得る。図示のように、受信機206、ADC207、コントローラ208、およびスイッチドライバ209は、LiDARチップ106から分離されている。他の実施形態において、受信機206、ADC207、コントローラ208、およびスイッチドライバ209の一部または全部は、LiDARチップ106に統合され得る。さらに、単一の受信機206および単一のADC207が示されているが、一部の実施形態において、複数の受信機206および対応する複数のADCが存在し得る。例えば、各モニタリング回路について別の受信機206および別の対応するADC207が存在し得る。
閉ループキャリブレーションおよび/または制御は、モニタリング回路の出力に基づいて光スイッチネットワーク103についてのスイッチドライバ209の駆動強度を調整することによって行われる。光スイッチネットワーク103のキャリブレーションは、最小パワーを用いて光が1つ以上のターゲットCPsに伝達されることを保証し、非ターゲット(Non-Target)CPsに伝達される光を軽減させる。光スイッチネットワーク103のキャリブレーションは、ソリッドステートFMCW LiDARシステム内で発生し、外部機器は、必要ではないことに留意されたい。大規模またはマルチチャンネルスイッチ可能なコヒーレントピクセルアレイの場合、数百個のコヒーレントピクセル、数百個のスイッチポート、したがって、数百個のモニタリングPDが存在する可能性がある。したがって、場合によっては、電気的I/O制約により、個々の電気的I/Oパッド(Pad)/トレース(Trace)をそれぞれのモニタリングPDに割り当てることが非現実的であり得る。
図3は、1つ以上の実施形態による減少した数の入出力(I/O)を有するマルチチャンネルスイッチ可能なコヒーレントピクセルアレイにおけるモニタリング光検出器の線形アレイのついてのクロスバー読み取り方式の図である。クロスバータイプの連結方式は、任意のモニタリングPD203の信号を読み取るとともに、モニタリング回路に必要な電気的I/Oの数を大幅に減らすことができる。図3において、FPAシステムは、LiDARチップ106を含み、LiDARチップ106は、多重のLiDARトランシーバチャンネル101を含む。LiDARトランシーバチャンネル101は、また、より大きなスイッチネットワーク内のサブブロックであり得る。LiDARチップは、n個のチャンネルとN個の行(Row)のモニタリング回路(および対応するコヒーレントピクセル)を含む(このとき、nおよびNは、整数)。したがって、各モニタリングPDは、チャンネルおよび行を用いて識別されることができる。このように、それぞれのモニタリングアセンブリの各光検出器は、1からNまでの範囲の対応する行値および1からnまでの範囲の対応するチャンネル値を有する。例えば、チャンネル「k」および行「j」についてのモニタリングPDは、「PD_k_j」のようにラベル付けされる。
クロスバータイプの連結方式は、モニタリングPDの極性に独立的である。この例において、同じ行番号を有するモニタリングPDの陰極(Cathode)は、対応する信号グループ(ノードとも呼ばれる)を形成するために連結され、同じチャンネル値を有するモニタリングPDの陽極(Anode)は、対応するバイアスグループを形成するために連結される。例えば、図示のように、n個のチャンネルが存在し、行Nに関連する陰極は、対応する信号グループ303を形成するために連結される。したがって、N個の信号グループが存在する。同様に、同じチャンネル値を有するモニタリングPDの陽極は、対応する信号グループ(ノードとも呼ばれる)を形成するために連結され、これに応じてn個の信号グループが存在する。例えば、図示のように、チャンネル1のモニタリングPDの陽極は、対応する信号グループ302を形成するために連結される。
1つまたは2つのアナログマルチプレクサ(MUX)(例えば、MUX304またはMUX306)で対応するピクセルおよび行番号を選択することによって、任意のモニタリングPDが読み取りのために選択され得る。MUX304および/またはMUX306は、コントローラ208によって制御できる。例えば、コントローラ208は、1つ以上のモニタリングPDを読み取るようにMUX304および/またはMUX306を構成し得る。MUX304、306(例えば、スイッチ)は、同じLiDARチップ106上またはLiDARチップ106の外部に実装できる。例えば、MUX306の出力は、モニタリングPDに対する逆バイアス(Reverse Bias)を提供するために一定のバイアス電圧307に連結され得、信号グループ(例えば、信号グループ302)は、電流信号を出力するために用いられ得る。PD_k_jからの電流を読み出すために、FPAシステムは、スイッチ「j」を除くすべてのスイッチを開放し、k番目のモニタリングPD出力の信号を処理できる。この例において、MUX306のスイッチ3がオンであり、残りのスイッチがオフである場合、各チャンネルで3番目のモニタリングPDのみが活性化される。モニタリングPD出力は、受信チャンネルの数を減らすためにMUX304を用いて追加的に多重化できる。この方式は、個々の電気的I/Oトレース/パッドを各モニタリングPDに割り当てることなく、全体スイッチネットワークのすべてのポートで独立した光パワーモニタリングを可能にする。他の活性化チャンネルから選択されていないモニタリングPDからの漏れ電流を避けるために、モニタリングおよびキャリブレーションプロセス中に1つのチャンネルを活性化状態に維持することが好ましく、これは、どんなモニタリングPDも選択されていない他のチャンネルについてのレーザーソースまたはレーザー増幅器をオフにすることによって達成することができる。このような方式のためのモニタリングおよびキャリブレーションプロセスは、パワーオン(Power On)またはフレーム転換中に発生し得る。
図4aおよび図4bは、クロスバー読み取り方式の限界を克服するモニタリング光検出器についての階層的読み取り方式を示す。図4aは、1つ以上の実施形態による減少した数のI/Oを有する単一チャンネルスイッチ可能なコヒーレントピクセルアレイのモニタリング光検出器ついての階層的読み取り方式の図である。図4aにおいて、光スイッチネットワークは、二分木の形である。図4aにおいて、複数のレベルを有する二分木を形成するために複数の光スイッチセル(Optical Switch Cell)、複数の光カプラーおよび複数の光検出器が配置される。この例において、1-to-8スイッチツリーは、単一の入力を取り、これを1×2光スイッチセル402の3つのステージを介して8つのコヒーレントピクセルP0~P7のうち、1つにルーティングする。各光スイッチセルは、光パワーを入力導波管から2つの出力導波管のうち、1つにステアリングすることができる。この方式においては、各スイッチセルの両方の出力ポートに光カプラー403およびモニタリングPD404があり、パワーの流れをモニタリングし、階層的方式にスイッチツリーをキャリブレートする。1-to-8スイッチの場合、合計14個のモニタリングPDがある。
電気的I/Oの数を減らすために、PDバイアス406およびPD出力信号は、一緒に連結できる。二分木内の各レベルについて、奇数インデックスを有するモニタリングPDの出力は、第1信号を形成するために一緒に連結され、偶数インデックスを有するモニタリングPDの出力は、第2信号を形成するために一緒に連結できる。14個の階層的モニタリングPDを有する1-to-8スイッチの場合、光パワーモニタリングのための電気的I/Oおよび対応する受信機405の総個数が14個から6つに減少される。より一般的には、1-to-2スイッチの場合、モニタリングI/Oおよび受信機の数が2N+1個から2個に減少し、これは、Nが増加するにつれてより顕著になる。
一例として、すべての光がコヒーレントピクセルP2に向けられるようにスイッチ設定をキャリブレートするために、コントローラ208は、受信機L0およびH0からモニタリング信号を読み取り、L0読み取りを最大化し、H0読み取りを最小化するSW0についての制御信号を最適化することから始める。その後、コントローラ(例えば、コントローラ208)は、次のステージに移動し、H1を最大化し、L1を最小化するSW1_0についての制御信号を最適化する。最後のステージSW2_1について、コントローラは、L2を最大化し、H2を最小化しようとする。この階層的キャリブレーションプロセスは、選択されていない光検出器からの漏れおよびクロストークを最小化する。また、FMCW LiDARのために低雑音および高速動作を必要とする敏感なコヒーレントピクセルセルから電気的に分離される。これは、コヒーレントピクセルに影響を与えたり、LiDARの正常動作を妨げることなく、現場キャリブレーションおよびリアルタイム閉ループ制御を可能にする。
図4bは、1つ以上の実施形態による減少した数のI/Oを有するマルチチャンネルスイッチ可能なコヒーレントピクセルアレイのモニタリング光検出器ついての階層的読み取り方式の図である。図4bは、図4aの方式を単一チャンネルからマルチチャンネルに拡張する方法を示す。図4bにおいて、LiDARチップは、n個のチャンネル(この場合は、n=4であるが、他の実施形態では他の値を有し得る)を含み、各チャンネルは、それぞれの光スイッチネットワーク、それぞれのSCPAおよびそれぞれのモニタリングアセンブリを含む。各チャンネルは、複数のレベルを有する二分木を形成するために配置された複数の光スイッチセル、複数の光カプラーおよび複数の光検出器を含む。図4bにおいて、各レベルにおける偶数または奇数モニタリングPDの出力信号は、異なるチャンネルにわたってLiDARチップ106でともに結合される。任意の瞬間に同じピクセルが活性化される限り、すべてのチャンネルについて同じキャリブレーションおよび閉ループ制御がコントローラ(例えば、コントローラ208)によって同時に行われ得る。
図5aは、1つ以上の実施形態によるダイレクトレーザードライバ(Direct Laser Driver)についての後処理フィードバックを有するハイブリッド結合干渉計の図である。レーザードライバ512の周期波(Periodic Wave)(電圧または電流)の波形は、レーザー506を駆動するために用いられる。一般的に、レーザー506の出力は、それぞれ上向き(Up)および下向き(Down)チャープ(Chirp)と呼ばれるレーザー周波数の上向きおよび下向きスイープのシーケンスである。これらのレーザーチャープのシーケンスは、FMCWプロービング(Probing)および後述する周波数決定プロセスの両方に用いられる。スプリッタ500は、一部のレーザーパワーをLiDARトランシーバ505に転換させ、チャープされたレーザーがFMCWセンサでプロービングフィールド(Probing Field)として用いられるようにする。LiDARトランシーバ505は、各モニタリングアセンブリ110を含む1つ以上のFMCW LiDARトランシーバチャンネル101を含み得る。このように、本明細書に示されるダイレクトレーザードライバについての後処理フィードバックを有するハイブリッド結合干渉計は、また、図1、図2、図3、図4a、図4bに示される特徴またはこれらの一部の組み合わせと結合され得る。一部の実施形態において、LiDARトランシーバ505は、モニタリングアセンブリ110を含まないことがある。スプリッタ500は、波形に応じてチャープされたコヒーレント光を第1部分および第2部分に分離するように構成される。干渉計550は、コヒーレント光の第1部分を用いてI信号およびQ信号を生成するように構成される。スプリッタ500は、また、干渉計550の他のスプリッタ501に一部パワーを転換させる。スプリッタ501は、一方が遅延アーム(Delay Arm)502である2つのアームの間にパワーを分配することができる。2つのアームが光ハイブリッド結合器503で結合されるときにビート(Beat)信号が生成されるように、遅延アーム502は、他のアームに対して遅延される。光ハイブリッド結合器503は、0度シフトされた光信号、90度シフトされた光信号、180度シフトされた光信号、および270度シフトされた光信号を生成するために互いについて光学的に位相シフトされるように構成される4つの出力を有する。0度シフトされた信号および180度シフトされた信号は、「I-チャンネル」信号を生成する平衡光検出器(Balanced Photodetector)504で測定され、90度シフトされた信号および270度シフトされた信号は、「Q-チャンネル」信号を生成する他の平衡光検出器で測定される。IチャンネルおよびQチャンネル信号は、互いに90度位相シフトされる。各チャンネルは、受信機回路509によってバッファ(Buffer)および増幅され、ADC510によってサンプリングされる。サンプリングされたIおよびQ信号は、コントローラ511によって用いられる。コントローラ511は、コントローラ208の一実施形態であり得る。結果として測定されたレーザー周波数は、レーザー周波数の線形偏差を補償するための新しい波形を生成するためにコントローラ511によって用いられる。波形は、コントローラ511によって生成され、レーザードライバ510を駆動するために用いられる。干渉計温度偏差は、遅延アーム502の実効屈折率(Effective Index)偏差を引き起こす可能性があるため、コントローラ511によって行われる計算でこの偏差を補償するために温度センサ507が用いられ得る。
図5bは、1つ以上の実施形態による変調器ドライバについての後処理フィードバックを有するハイブリッド結合干渉計の図である。図5bは、レーザーチャープがシードレーザー(Seed Laser)506およびレーザー変調器514を用いて生成されるということを除いて、図5bと実質的に同様である。レーザー変調器514は、I/Q変調のためのデュアルマッハツェンダ変調器(Dual Mach Zehnder Modulator)のような位相変調器または強度変調器(Intensity Modulator)であり得る。レーザー変調器514は、変調器ドライバ513からの電圧または電流信号によって駆動される。レーザー変調器514の出力から生成されたチャープは、スプリッタ500を介して送信される。点線515の内部のコンポーネントは、図5aの515の内部のコンポーネントと同じブロックであり得る。図5aと同じ方法でコントローラ511は、レーザー変調器514の出力における線形レーザー周波数チャープからの偏差を補償する変調器ドライバ513への入力として用いられる制御信号を生成する。
図6は、1つ以上の実施形態によるレーザー波形生成およびFMCWキャリブレーションのためのプロセスを示す。キャリブレーションプロセスは、レーザーの上向きおよび下向きチャープから非線形性を低減および除去できる。図6に示されるプロセスは、ソリッドステートFMCW LiDARシステムのコントローラによって行われ得る。他の実施形態において、他の個体(Entity)が図6のステップの一部または全部を行われ得る。実施形態は、異なるおよび/または追加のステップを含むか、または異なる順序でステップを行われ得る。
ソリッドステートFMCW LiDARシステムは、駆動波形をロードする605。例えば、ソリッドステートFMCW LiDARシステムのLiDARプロセッシングエンジンのマイクロコンピュータは、駆動波形をロードすることができる。駆動波形は、一般的な駆動波形であってもよく、以前に記憶された駆動波形であってもよい。
ソリッドステートFMCW LiDARシステムは、ロードされた駆動波形を用いてレーザーソースを周波数変調する610。変調された光は、1つ以上のレーザーチャープを形成する。周波数変調は、LiDARプロセッシングエンジンの指示に従ってK-チャンネルレーザーアレイを変調するレーザーコントローラによって行われ得る。
ソリッドステートFMCW LiDARシステムは、IおよびQ信号を形成するために1つ以上のレーザーチャープを測定する615。例えば、ソリッドステートFMCW LiDARシステムは、例えば、図5aおよび図5bに関連して示され、前述のように、I/Q信号を生成するために光ハイブリッド光検出器を用いて1つ以上のレーザーチャープを測定できる。
ソリッドステートFMCW LiDARシステムは、IおよびQ信号を処理する620。例えば、ソリッドステートFMCW LiDARシステムは、IおよびQ信号をフィルタリングおよび/またはサンプリングすることができる。ソリッドステートFMCW LiDARシステムは、LiDARプロセッシングエンジンを用いてIおよびQ信号を処理することができる。
ソリッドステートFMCW LiDARシステムは、処理されたIおよびQ信号の位相を決定する625。ソリッドステートFMCW LiDARシステムは、処理されたIおよびQ信号の位相をLiDARプロセッシングエンジンを用いて決定し得る。位相は、例えば、処理されたIおよびQ信号の商のアークタンジェント(Arc-Tangent)を計算することによって決定され得る。これは、Qチャンネルに虚数iを掛けて修正されたQチャンネルにIチャンネルを加えることによって生成された信号の位相角を測定することと同じである。
ソリッドステートFMCW LiDARシステムは、位相を用いてレーザーの瞬時周波数を決定する630。レーザーの瞬時周波数は、例えば、以前のステップで計算された位相を遅延アーム(例えば、遅延アーム502)の光路時間遅延で割ることによって決定され得る。
ソリッドステートFMCW LiDARシステムは、修正された出力ビームを生成するために瞬時周波数に部分的に基づいてレーザーソースの駆動波形を制御する635。ソリッドステートFMCW LiDARシステムは、異なる時間インスタンス(Time Instance)でレーザーの瞬時周波数内の偏差の強度をモニタリングする。ソリッドステートFMCW LiDARシステムは、より遅いか、またはより速いチャープ率(Chirp Rate)を補償するために、偏差の強度に基づいて駆動波形を調整する(例えば、駆動波形の形状を調整する)。このような調整は、予めロードされたレーザーモデルをアップデートし、分析ソリューションを通じて駆動波形を調整することによって一度に行われるか、または勾配降下最適化(Gradient Descent Optimization)アルゴリズムを通じてパラメータ化(Parameterized)された駆動波形を調整することによって繰り返し行われ得る。制御された駆動波形は、その後、修正された出力ビームを生成するためにレーザーソースに再び適用される。ステップ615~635は、反復的であり得、キャリブレーションの実行において1回以上ループ(Loop)されることができることに留意されたい。
ソリッドステートFMCW LiDARシステムは、修正された出力ビームを用いてFMCW測定を収集する640。ソリッドステートFMCW LiDARシステムは、修正された出力ビームを(例えば、FPAシステムを介して)ローカル領域にわたってスキャンし、FMCW測定を生成するためにローカル領域内の1つ以上のオブジェクトからの修正された出力ビームの反射を測定する。
ソリッドステートFMCW LiDARシステムは、FMCW測定を用いて距離および/または速度データを決定する645。ソリッドステートFMCW LiDARシステムは、レーザーの予想チャープ率に基づくFMCW測定を用いて距離および速度データを推定する。線形からの残留偏差(Residual Deviation)が依然として存在する場合、これらは、同じプロセス605~630によって測定され、距離および/または速度データ計算を調整するために用いられる。このプロセスは、より正確なポイントクラウドに帰結する。
図7は、1つ以上の実施形態によるFPAシステム705を含むソリッドステートLiDARシステムを示す。FPAシステム705は、相互型システム(Reciprocal System)であり得る。FPAシステム705は、レンズシステム702およびLiDARチップ106を含む。LiDARチップ106およびFPAシステム705は、図1~図6に関連して前述したコンポーネントの一部または全部および/または機能の一部または全部を含む。LiDARチップ106内のCPsは、FPAドライバ710によって制御される(例えば、FMCWトランシーバチャンネル101の)1つ以上のSCPA101の一部である。LiDARチップ106内の1つ以上の個々のCPsは、光を放出および受信するように活性化できる。LiDARチップ106によって放出される光は、K-チャンネルレーザーアレイ715によって生成される。K-チャンネルレーザーアレイ715は、K個(Kは、整数)の並列チャンネルを有するレーザーアレイである。K-チャンネルレーザーアレイ715は、LiDARチップ106と直接統合されるか、またはLiDARチップ106とともにパッケージ化された別のモジュールであり得る。K-チャンネルレーザーアレイ715は、レーザーコントローラ720によって制御される。一部の実施形態において、K-チャンネルレーザーアレイ715は、波長の範囲にわたって調整可能である。
レーザーコントローラ720は、デジタル-アナログコンバータ730を介してLiDARプロセッシングエンジン725から制御信号を受信する。また、処理は、FPAドライバ710を制御し、LiDARチップ106からデータを送受信する。
LiDARプロセッシングエンジン725は、マイクロコンピュータ735を含む。マイクロコンピュータ735は、FPAシステムからのデータを処理し、FPAドライバ710およびレーザーコントローラ720を介してFPAシステムに制御信号を送信する。マイクロコンピュータ735は、コントローラ208および/またはコントローラ511を含み得ることに留意されたい。LiDARプロセッシングエンジン725は、また、Nチャンネル受信機740を含む。信号は、Nチャンネル受信機740によって受信され、信号は、MチャンネルADC745のセットを用いてデジタル化される。
LiDARチップ106は、ソリッドステートLiDARシステムから放出される光を1つ以上の角度次元でステアリングできることに留意されたい。一部の実施形態において、LiDARチップ106は、第1角度次元(例えば、高度)についてのみビームをステアリングするように構成される。FPAシステム705は、光ビームを(例えば、第1角度次元に直交する)第2次元(例えば、方位角)でステアリングできる1つ以上のスキャンミラー(図示せず)を含み得る。スキャンミラーは、レンズシステム705から光を受信し、受信した光を(LiDARチップ106によって制御される)第1角度次元および(1つ以上のスキャンミラーによって制御される)第2角度次元によって決定された特定の角度視野に沿ってターゲット領域に指向させる。1つ以上のスキャンミラーを用いる前述の例は、第1角度次元についてのみスキャンするように構成されたLiDARチップ106に関連することに留意されたい。しかし、一部の実施形態において、1つ以上のスキャンミラーは、複数の角度次元(例えば、方位角および高度)でスキャンするように構成されたLiDARチップ106とともに用いられ得る。例えば、光アンテナの2次元配列(例えば、四角形格子)を用いて複数の光アンテナからの信号を1つ以上のスキャンミラーの視野内の2つの次元でスキャンすることができる。
追加構成情報
図面および前述の説明は、単に例示として好ましい実施形態に関する。前述のように、本明細書に開示された構造および方法の代替的な実施形態は、請求項の原理から逸脱することなく採用できる実行可能な代替案として容易に認識されることに留意されたい。
詳細な説明は、多数の詳細を含むが、これらは本発明の範囲を限定するものと解釈されるべきではなく、単に異なる例を例示するものと解釈されるべきである。本開示内容の範囲は、前記で詳細に説明していない他の実施形態を含むことを理解するべきである。本明細書に開示された方法および装置の配列、動作および詳細について、添付の特許請求の範囲で定義された思想および範囲から逸脱することなく、通常の技術を有する者に自明である様々な他の変形、変化および変更が行われ得る。したがって、本発明の範囲は、添付の特許請求の範囲およびその法的均等物によって決定されるべきである。
代替実施形態は、コンピュータハードウェア、ファームウェア、ソフトウェアおよび/またはこれらの組み合わせで実装される。実装例は、プログラマブルプロセッサによる実行のために機械読み取り可能な格納装置に実質的に具体化されたコンピュータプログラム製品として実装でき、方法ステップは、入力データについて動作して出力を生成することにより機能を行うために命令語プログラムを実行するプログラマブルプロセッサによって行われ得る。実施形態は、有利には、データ格納システム、少なくとも1つの入力装置および少なくとも1つの出力装置からデータおよび命令語を受信し、これからデータおよび命令語を送信するように結合された少なくとも1つのプログラマブルプロセッサを含むプログラマブルシステムで実行可能な1つ以上のコンピュータプログラムで実装できる。それぞれのコンピュータプログラムは、高度な手続き的またはオブジェクト指向のプログラミング言語または必要に応じてアセンブリまたは機械語で実装でき、任意の場合、言語は、コンパイルまたはインタープリトされた言語であり得る。適切なプロセッサは、例として、汎用および特殊目的のマイクロプロセッサを含む。一般的に、プロセッサは、リードオンリーメモリ(ROM)および/またはランダムアクセスメモリ(RAM)から命令語およびデータを受信する。一般的に、コンピュータは、データファイルを格納するための1つ以上の大容量の格納装置を含み、このような装置は、内部ハードディスクおよびリムーバブルディスクなどの磁気ディスク、光磁気ディスク、および光ディスクを含む。コンピュータプログラム命令語およびデータを実質的に実装するのに適切な格納装置は、例として、EPROM、EEPROMおよびフラッシュメモリ装置などの半導体メモリ装置、内部ハードディスクおよびリムーバブルディスクなどの磁気ディスク、光磁気ディスク、およびCD-ROMディスクを含むあらゆる形態の不揮発性メモリを含む。前述のすべては、特定用途向け集積回路(ASIC、Application-Specific Integrated Circuit)および他の形態のハードウェアによって補完されるか、またはこれに統合され得る。

Claims (20)

  1. ソリッドステート(Solid State)周波数変調連続波(FMCW、Frequency Modulated Continuous Wave)LiDAR(Light Detection and Ranging)システムのLiDARチップとして、
    前記LiDARチップ上の光スイッチネットワーク(Optical Switch Network)-前記光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光(Coherent Light)を選択的に提供するように構成される-と、
    前記LiDARチップ上のスイッチ可能なコヒーレントピクセルアレイ(SCPA、Switchable Coherent Pixel Array)-前記SCPAは、コヒーレントピクセル(CPs、Coherent Pixels)を含み、前記各CPsは、前記複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される-と、
    前記LiDARチップ上のモニタリングアセンブリ(Monitoring Assembly)-前記モニタリングアセンブリは、複数の光検出器(Photodetector)を含み、前記複数の光検出器のそれぞれは、前記複数の出力導波管のうち、対応する出力導波管から検出された光のレベルに応答して出力信号を生成するように構成される-と、を含み、
    前記光スイッチネットワークは、前記モニタリングアセンブリの出力信号に基づいて前記光スイッチネットワークについてのスイッチドライバの駆動強度(Drive Strength)を調整することによってキャリブレート(Calibrate)されるLiDARチップ。
  2. 前記モニタリングアセンブリは、前記複数の出力導波管に提供される前記コヒーレント光の一部をタップし、前記光の一部を前記複数の光検出器に提供するように構成された複数の光カプラーを含む請求項1に記載のLiDARチップ。
  3. 前記光カプラーのそれぞれは、前記光カプラーが前記コヒーレント光のタップした部分を提供する前記複数の光検出器のうち、異なる対応する光検出器を有する請求項2に記載のLiDARチップ。
  4. 前記LiDARチップは、n個のチャンネルを含み、各チャンネルは、それぞれの光スイッチネットワーク、N個のCPsを含むそれぞれのSCPA、およびそれぞれのモニタリングアセンブリを含み、
    前記光スイッチネットワーク、前記SCPA、前記モニタリングアセンブリは、第1チャンネルの一部であり、nおよびNは、整数であり、
    前記各モニタリングアセンブリの各光検出器は、1からNまでの範囲の対応する行(Row)値および1からnまでの範囲の対応するチャンネル値を有する請求項1に記載のLiDARチップ。
  5. n個の第1ノードが存在するように、同じチャンネル値を有する光検出器の第1電極がそれぞれの第1ノードを形成するために一緒に結合される請求項4に記載のLiDARチップ。
  6. N個の第2ノードが存在するように、同じ行値および異なるチャンネル値を有する光検出器の第2電極がそれぞれの第2ノードを形成するために一緒に結合される請求項5に記載のLiDARチップ。
  7. 前記第1電極は、陽極(Anode)であり、前記第2電極は、陰極(Cathode)である請求項6に記載のLiDARチップ。
  8. 前記n個の第1ノードは、第1スイッチに電気的に結合され、前記N個の第2ノードは、第2スイッチに電気的に結合され、前記第1スイッチおよび前記第2スイッチは、任意のモニタリングアセンブリの任意の光検出器を選択的に読み取るように構成される請求項6に記載のLiDARチップ。
  9. 複数の光スイッチセル(Optical Switch Cell)をさらに含み、前記複数の光スイッチセル、前記複数の光カプラーおよび前記複数の光検出器は、複数のレベルを有する二分木(Binary Tree)を形成するように配置される請求項3に記載のLiDARチップ。
  10. 前記複数のレベルのうち、第1レベルについて、
    奇数インデックスを有する光検出器の出力は、第1受信機に結合された第1ノードを形成するために一緒に連結され、
    偶数インデックスを有する光検出器の出力は、第2受信機に結合された第2ノードを形成するために一緒に連結され、
    前記複数のレベルのうち、第2レベルについて、
    奇数インデックスを有する光検出器の出力は、第3受信機に結合された第3ノードを形成するために一緒に連結され、
    偶数インデックスを有する光検出器の出力は、第4受信機に結合された第4ノードを形成するために一緒に連結される請求項9に記載のLiDARチップ。
  11. 前記LiDARチップは、n個のチャンネルを含み、各チャンネルは、それぞれの光スイッチネットワーク、それぞれのSCPA、およびそれぞれのモニタリングアセンブリを含み、
    前記光スイッチネットワーク、前記SCPA、前記モニタリングアセンブリは、第1チャンネルの一部であり、nは、整数であり、
    各チャンネルは、複数のレベルを有する二分木を形成するように配置される複数の光スイッチセル、複数の光カプラー、および複数の光検出器を含み、
    前記n個のチャンネルのそれぞれについて、
    前記複数のレベルのうち、同じレベルにおいて、奇数インデックスを有する光検出器の出力は、前記第1受信機に連結され、偶数インデックスを有する光検出器の出力は、前記第2受信機に連結される請求項10に記載のLiDARチップ。
  12. 前記LiDARチップ上の第1スプリッタ(Splitter)-前記第1スプリッタは、コヒーレント光を第1部分と第2部分に分離するように構成され、前記コヒーレント光は、波形に応じてチャープ(Chirp)され、前記コヒーレント光の第2部分は、前記光スイッチネットワークが前記複数の出力導波管のうち、1つ以上に選択的に提供するコヒーレント光である-と、
    前記LiDARチップ上の干渉計(Interferometer)-前記干渉計は、前記コヒーレント光の第1部分を用いて信号を生成するように構成される-と、をさらに含み、
    前記波形の形状は、レーザー周波数偏差を補償するためにIおよびQ信号に部分的に基づいて制御される請求項1に記載のLiDARチップ。
  13. ソリッドステート(Solid State)周波数変調連続波(FMCW、Frequency Modulated Continuous Wave)LiDAR(Light Detection and Ranging)システムのLiDARチップとして、
    前記LiDARチップ上の第1スプリッタ(Splitter)-前記第1スプリッタは、コヒーレント光(Coherent Light)を第1部分および第2部分に分離するように構成され、前記コヒーレント光は、波形に応じてチャープされる-と、
    前記LiDARチップ上の干渉計(Interferometer)-前記干渉計は、前記コヒーレント光の第1部分を用いてI(In-Phase)信号およびQ(Quadrature)信号を生成するように構成される-と、
    前記LiDARチップ上の光スイッチネットワーク(Optical Switch Network)-前記光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光の第2部分を選択的に提供するように構成される-と、
    前記LiDARチップ上のスイッチ可能なコヒーレントピクセルアレイ(SCPA、Switchable Coherent Pixel Array)-前記SCPAは、コヒーレントピクセル(CPs、Coherent Pixels)を含み、前記各CPsは、前記複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される-と、
    前記IおよびQ信号に部分的に基づいて前記コヒーレント光の周波数偏差を識別し、前記識別された偏差を補償するためのものに部分的に基づいて前記波形の形状を制御するように構成されるコントローラと、を含むLiDARチップ。
  14. 前記干渉計の遅延アーム(Delay Arm)の温度をモニタリングするように構成された温度センサをさらに含み、
    前記コントローラは、前記モニタリングされた温度を用いて前記遅延アームの屈折率(Refractive Index)で温度誘導偏差(Temperature Induced Deviation)を補償する請求項13に記載のLiDARチップ。
  15. 前記干渉計は、
    前記コヒーレント光の第1部分を第1アームおよび第2アームに分離するように構成される第2スプリッタ-第2アームは、遅延を引き起こす-と、
    前記第1アームおよび前記第2アームから出力される光を受信し、第1出力、第2出力、第3出力、および第4出力にわたって互いについて光学的に位相シフトされた光を出力するように構成される光ハイブリッド結合器(Optical Hybrid Combiner)と、
    前記第1出力および前記第3出力を用いて前記I信号を生成するように構成される第1平衡光検出器(Balanced Photodetector)と、
    前記第2出力および前記第4出力を用いて前記Q信号を生成するように構成される第2平衡光検出器と、を含む請求項13に記載のLiDARチップ。
  16. 前記コヒーレント光は、シードレーザー(Seed Laser)およびレーザー変調器(Laser Modulator)を用いて生成され、前記レーザー変調器は、変調器ドライバによって駆動され、前記コントローラは、前記変調器ドライバを制御して波形の形状を制御する請求項13に記載のLiDARチップ。
  17. 前記IおよびQ信号が処理され、前記コントローラは、
    前記処理されたIおよびQ信号の位相を決定し、
    前記IおよびQ信号の位相を用いて前記コヒーレント光の瞬時周波数(Instantaneous Frequency)を決定し、
    前記決定された瞬時周波数を用いて前記コヒーレント光の周波数偏差を識別するように構成される請求項13に記載のLiDARチップ。
  18. 前記I信号は、前記処理されたI信号の生成のために第1受信機を用いてバッファ(Buffer)および増幅された後に、第1アナログ-デジタル変換器(ADC、Analog to Digital Converter)を用いてサンプリングされ、前記Q信号は、前記処理されたQ信号の生成のために第2受信機を用いてバッファおよび増幅された後に、第2ADCを用いてサンプリングされる請求項17に記載のLiDARチップ。
  19. 前記LiDARチップ上のモニタリングアセンブリ(Monitoring Assembly)-前記モニタリングアセンブリは、それぞれ前記複数の出力導波管のうち、対応する出力導波管から検出された光のレベルに応答して出力信号を生成するように構成される複数の光検出器を含む-をさらに含み、
    前記光スイッチネットワークは、前記モニタリングアセンブリの出力信号に基づいて前記光スイッチネットワークについてのスイッチドライバの駆動強度(Drive Strength)を調整することによってキャリブレート(Calibrate)される請求項13に記載のLiDARチップ。
  20. ソリッドステート(Solid State)周波数変調連続波(FMCW、Frequency Modulated Continuous Wave)LiDAR(Light Detection and Ranging)システムの焦点平面アレイ(FPA、Focal Plane Array)システムとして、
    前記LiDARチップ上の第1スプリッタ(Splitter)-前記第1スプリッタは、コヒーレント光(Coherent Light)を第1部分および第2部分に分離するように構成され、前記コヒーレント光は、波形に応じてチャープされる-と、
    前記LiDARチップ上の干渉計(Interferometer)-前記干渉計は、前記コヒーレント光の第1部分を用いてI(In-Phase)信号およびQ(Quadrature)信号を生成するように構成される-と、
    前記LiDARチップ上の光スイッチネットワーク(Optical Switch Network)-前記光スイッチネットワークは、複数の出力導波管のうち、1つ以上にコヒーレント光の第2部分を選択的に提供するように構成される-と、
    前記LiDARチップ上のスイッチ可能なコヒーレントピクセルアレイ(SCPA、Switchable Coherent Pixel Array)-前記SCPAは、コヒーレントピクセル(CPs、Coherent Pixels)を含み、前記各CPsは、前記複数の出力導波管のうち、対応する出力導波管によって提供されるコヒーレント光を放出するように構成される-と、
    前記LiDARチップ上のモニタリングアセンブリ(Monitoring Assembly)-前記モニタリングアセンブリは、複数の光検出器(Photodetector)を含み、前記複数の光検出器は、それぞれ前記複数の出力導波管のうち、対応する出力導波管から検出された光のレベルに応答して出力信号を生成するように構成される-と、
    前記SCPAから放出されるコヒーレント光を1つ以上の光ビーム(Light Beam)として環境(Environment)内に指向させるように配置されるレンズシステム-前記1つ以上の光ビームのそれぞれは、特定の角度で放出され、前記特定の角度は、前記1つ以上の光ビームを形成する前記コヒーレント光を生成した前記LiDARチップ上の前記CPsの位置に部分的に基づく-と、
    前記IおよびQ信号に部分的に基づいて前記コヒーレント光の周波数偏差を識別し、前記識別された偏差を補償するためのものに部分的に基づいて前記波形の形状を制御し、前記モニタリングアセンブリの出力信号に基づいて前記光スイッチネットワークをキャリブレート(Calibrate)するように構成されるコントローラと、を含むLiDARチップ。
JP2022544169A 2020-01-23 2021-01-22 周波数変調連続波LiDARのためのオンチップモニタリングおよびキャリブレーション回路 Pending JP2023511134A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202062965094P 2020-01-23 2020-01-23
US62/965,094 2020-01-23
US202062966983P 2020-01-28 2020-01-28
US62/966,983 2020-01-28
PCT/US2021/014519 WO2021150826A1 (en) 2020-01-23 2021-01-22 On-chip monitoring and calibration circuits for frequency modulated continous wave lidar

Publications (1)

Publication Number Publication Date
JP2023511134A true JP2023511134A (ja) 2023-03-16

Family

ID=76993085

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022544169A Pending JP2023511134A (ja) 2020-01-23 2021-01-22 周波数変調連続波LiDARのためのオンチップモニタリングおよびキャリブレーション回路

Country Status (7)

Country Link
US (1) US20220365214A1 (ja)
EP (1) EP4094097A4 (ja)
JP (1) JP2023511134A (ja)
KR (1) KR20220124191A (ja)
CN (1) CN115023628A (ja)
CA (1) CA3163597A1 (ja)
WO (1) WO2021150826A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12066535B2 (en) * 2020-05-16 2024-08-20 Silc Technologies, Inc. Monitoring signal chirp in LIDAR output signals
US11740354B2 (en) * 2020-09-30 2023-08-29 Pony Ai Inc. Methods of linearizing non-linear chirp signals
WO2023049423A1 (en) * 2021-09-26 2023-03-30 Hrl Laboratories, Llc SWITCHED PIXEL ARRAY LiDAR SENSOR AND PHOTONIC INTEGRATED CIRCUIT
US11662444B1 (en) * 2022-07-27 2023-05-30 Aeva, Inc. Techniques for improving SNR in a FMCW LiDAR system using a coherent receiver
WO2024076194A1 (ko) * 2022-10-06 2024-04-11 엘지이노텍 주식회사 광 출력 장치 및 이를 포함하는 3차원 센싱 장치
WO2024142073A1 (en) * 2022-12-27 2024-07-04 Lidwave Ltd. System and method for optical range doppler detection
US20240255618A1 (en) * 2023-02-01 2024-08-01 Silc Technologies, Inc. Scanning multiple lidar system output signals
CN116736265B (zh) * 2023-08-15 2023-11-28 深圳市速腾聚创科技有限公司 光芯片、fmcw激光雷达及可移动设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9823118B2 (en) 2015-12-26 2017-11-21 Intel Corporation Low power, high resolution solid state LIDAR circuit
US10261389B2 (en) * 2016-06-22 2019-04-16 Massachusetts Institute Of Technology Methods and systems for optical beam steering
US11422258B2 (en) * 2017-03-16 2022-08-23 Bridger Photonics, Inc. FMCW LiDAR methods and apparatuses including examples having feedback loops
US12099120B2 (en) * 2018-05-10 2024-09-24 Aurora Operations, Inc. LIDAR system based on complementary modulation of multiple lasers and coherent receiver for simultaneous range and velocity measurement
US11536805B2 (en) * 2018-06-25 2022-12-27 Silc Technologies, Inc. Optical switching for tuning direction of LIDAR output signals

Also Published As

Publication number Publication date
CN115023628A (zh) 2022-09-06
EP4094097A4 (en) 2024-02-14
WO2021150826A1 (en) 2021-07-29
CA3163597A1 (en) 2021-07-29
KR20220124191A (ko) 2022-09-13
US20220365214A1 (en) 2022-11-17
EP4094097A1 (en) 2022-11-30

Similar Documents

Publication Publication Date Title
JP2023511134A (ja) 周波数変調連続波LiDARのためのオンチップモニタリングおよびキャリブレーション回路
JP7284808B2 (ja) 標的環境の同時のビーム走査のための多チャネルレーザモジュールに基づくlidarシステム
US11555923B2 (en) LIDAR system with speckle mitigation
US20220268891A1 (en) Lidar system
CN111492263B (zh) 用于可调谐激光器的混合信号频率控制环路
KR102618374B1 (ko) 리턴 경로의 광학 증폭기를 갖는 lidar 장치
CN111886514B (zh) 激光雷达装置
JP2000323774A (ja) 高速並列波面センサを有する改良高速平均パワー・ファイバ・レーザ・システム
JPWO2007108330A1 (ja) 距離測定システム
US20210325210A1 (en) Optical fiber characteristics measurement apparatus and optical fiber characteristics measurement method
CN104122542A (zh) 一种激光测距的校准方法、校准装置及测量仪器
US20200081126A1 (en) Laser radar device
CN111025320A (zh) 一种相位式激光测距系统及测距方法
KR20220003573A (ko) Lidar 시스템 내에서 다수의 애퍼쳐로부터의 가간섭성 검출을 관리하기 위한 장치 및 방법
CN111007533B (zh) 激光雷达光谱分析仪
CN103983962B (zh) 一种相位测量的校准方法、装置及测量装置
JP2006329797A (ja) 光波距離計
US20230046152A1 (en) Frequency shifter for heterodyne interferometry measurements and device for heterodyne interferometry measurements having such a frequency shifter
CN116209916A (zh) 具有移相器的外腔激光器
KR20220110016A (ko) 전기 광학 주사방식을 이용한 주파수 변조 연속파 라이다
CN102403575B (zh) 重构光子tr信标的方法和装置
US20240004072A1 (en) Distance measuring device, distance measuring method, and program
CN118786591A (zh) 激光发射机组件、光检测和测距系统以及计算机可读介质
JP4707142B2 (ja) 光波距離計
CN104515997A (zh) 基于单个液晶光阀相位测量的校准方法及其测距装置

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20231205

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240119

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20240119

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20240202

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20240214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240326

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240626

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240723

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241007