JP2016095298A - 飛行時間カメラの位相整列誤差の能動的補償 - Google Patents
飛行時間カメラの位相整列誤差の能動的補償 Download PDFInfo
- Publication number
- JP2016095298A JP2016095298A JP2015209329A JP2015209329A JP2016095298A JP 2016095298 A JP2016095298 A JP 2016095298A JP 2015209329 A JP2015209329 A JP 2015209329A JP 2015209329 A JP2015209329 A JP 2015209329A JP 2016095298 A JP2016095298 A JP 2016095298A
- Authority
- JP
- Japan
- Prior art keywords
- electrical pulse
- phase error
- actual
- illuminator
- phase
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
- G01S11/12—Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4865—Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
- G01S17/10—Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/484—Transmitters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/497—Means for monitoring or calibrating
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/214—Image signal generators using stereoscopic image cameras using a single 2D image sensor using spectral multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
Abstract
【課題】照明およびシャッタパルスを電気的に検知または監視し、それらを能動的に調整して、パルス間の所望の位相関係/差を維持するよう、能動的フィードバックを実装するための方法、装置、およびシステムの提供。
【解決手段】所望の位相差を維持する位相調整回路214及び216により、飛行時間カメラ202の状態が変化しても(例えば、温度、経年など)、距離の計算はより正確になり得る。能動的補償により、「オンザフライ」で誤差を補正することができ、操作中の詳細な特性化および手動での調整が不要になる。
【選択図】図2
【解決手段】所望の位相差を維持する位相調整回路214及び216により、飛行時間カメラ202の状態が変化しても(例えば、温度、経年など)、距離の計算はより正確になり得る。能動的補償により、「オンザフライ」で誤差を補正することができ、操作中の詳細な特性化および手動での調整が不要になる。
【選択図】図2
Description
優先権のデータ
本出願は、2014年10月24日出願の米国仮特許出願第62/068,137号の非仮出願であり、その全体が参照により本明細書に組み込まれる。
本出願は、2014年10月24日出願の米国仮特許出願第62/068,137号の非仮出願であり、その全体が参照により本明細書に組み込まれる。
本発明は、集積回路の分野に関し、具体的には、飛行時間カメラの位相整列誤差の能動的補償を提供するように構成された回路に関する。
飛行時間カメラは、物体の距離情報を測定するために使用される光学系である。具体的には、飛行時間カメラは、光の既知の速度および信号がカメラと物体との間を移動するのにかかる時間に基づいて、距離を解像する。このような飛行時間カメラの1つの例が、LIDARで、これは、物体の距離を測定するための光源としてレーザーを用いる。飛行時間カメラは、レンジファインダーでよく見られる。深度、距離、および/または速度を決定するよう設計された光学系も、スポーツ用電子機器、家庭用電化製品、医療機器、航空宇宙装置/軍装備品、自動車エレクトロニクス、セキュリティーシステムなどその他多くのシステムで見られ得る。
本開示およびその特徴ならびに利点のより完全な理解を提供するために、添付の図面を用いた以下の説明を参照する。以下の添付の図面では、同種の表記番号は、同種の部品を示す。
飛行時間カメラの理解
図1は、例示的な飛行時間カメラの図である。飛行時間カメラは、一般的に、照明器104(能動照明パルスまたは光パルスを放つ)、および電子シャッタを備えた画像センサ102を含む。図示しないが、飛行時間カメラは、カメラの視野にある物体(例えば、野球選手、野球のバットなど)の距離を計算できる部品を含む。典型的には、飛行時間カメラは、情景内の物体に反射する照明器104を用いて能動照明パルスを発生することによって、かつ画像センサ102の反射光を捕捉することによって情景深度を測定する。例えば、照明器104は、情景内の物体に赤外光を発し得る発光ダイオードまたはレーザーダイオードを含み得、反射光は、例えば、電荷結合素子(CCD)画像センサアレイまたは他の種類のセンサアレイなどの画像センサ102によって捕捉され得る。照明器104は、照明器104を発光させる電気パルスによって駆動される。画像センサ102のシャッタドライバは、画像が捕捉され、かつ/または画像信号が発生されるようにシャッタを開かせる電気パルスによって駆動される。
照明器104から物体に、および物体から画像センサ102に移動する光の往復時間は、飛行時間カメラからの物体の距離に基づいて変わるということに留意されたい。また、光の速度は既知である。それゆえ、物体と飛行時間カメラとの間の距離に応じて、画像センサ102に当たる反射光は、照明器104が光を発生させた時間に対して遅延を有する。この情報に基づいて、反射光を捕捉するよう、照明器104の位相および画像センサ102のシャッタドライバを連動させることが可能である。複数のタイミング位相差を有する照明器104および画像センサ102をトリガすることによって、それらのパルス差および画像センサ102から捕捉された画像信号を直接用いて、カメラからの物体の距離を計算することができる。当業者は、飛行時間カメラが距離を決定するために用いられ得るいくつかの適切な手法/アルゴリズムがあることを理解しよう(例えば、照明とシャッタパルスとの間の既知の位相差を利用する手法)。
飛行時間カメラの位相/タイミング誤差
照明器104に提供されるパルスおよび画像センサ102に提供されるパルス間の所定の位相差は、飛行時間カメラからの物体の距離の決定において、直接用いられる。その理由のため、距離決定の精度は、2つのパルスのタイミング誤差(例えば、オフセット、歪んだ分散)によって劣化する可能性がある。2つのパルス間の実位相差は、所定の/所望の位相差よりも大きいか、または所定の/所望の位相差よりも小さくなる場合がある。2つのパルス間の位相差が不正確な場合、距離の計算も不正確になる。換言すれば、2つのパルス間の位相差が既知か、高精度で提供されるようにすることが望ましい。
換言すれば、深度計算の精度は、例えば、パルスが所望の位相差と整列されない場合に発生し得る歪み(図1に示す)を低減させることによって、照明およびシャッタパルスの位相整列が正確なようにすることに直接基づく。照明およびシャッタパルスのいずれかまたはその両方は、深度計算の誤差の一因となり得る歪みを示し得る。例えば、位相整列の誤差のピコ秒は、深度計算のミリメートルまたはセンチメートル(あるいはそれ以上)の誤差に直接つながる場合がある。
誤差の複数の原因は、位相配列に誤差を生じさせる、単一の連鎖、静的および動的の両方において存在する。一部の解決法では、照明およびシャッタパルスのタイミング整列を特性化および調整するための強引な手法によってこの問題を解決しようとしてきた。しかしながら、これらの手法の多くが動的源に簡単に対処できないため、誤差のこれらの解決法は最適ではない。例えば、一般的に、強引な手法では、温度変化(例えば、電圧源の変化につながる)またはパルスを発生させる回路の経年によって生じる誤差に対処することはできない。
飛行時間カメラの位相整列誤差の能動的補償手法
これらの問題の一部を緩和するために、照明およびシャッタパルスを電気的に検知または監視し、それらを能動的に調整して、パルス間の所望の位相関係/差を維持するよう、能動的フィードバックを実装するための改良された方法、装置、およびシステムが提供され得る。所望の位相差を維持することによって、飛行時間カメラの状態が変化しても(例えば、温度、経年など)、距離の計算はより正確になり得る。有利なことに、能動的補償は、「オンザフライ」で誤差を修正することができ、操作中の詳細な特性化および手動での調整が不要になり得る。
図2は、本開示の一部の実施形態による、飛行時間カメラの位相整列誤差の能動的補償を提供する例示的なシステムの図である。図示されたシステムは、電子シャッタドライバ204がそこに連結されてもよい画像センサ202(図1の画像センサ102に類似した)を含む。典型的には、シャッタドライバ204は、画像センサ202の電子シャッタを制御する。このシステムはまた、照明器206(図1の照明器104に類似する)を含む。この照明器は、光源およびこの光源を駆動するためのドライバを含んでもよい。この光源は、発光ダイオードなどでもよく、用途に応じて、異なる種類の光源を用いてもよい。さらに、このシステムは、照明器206(OUT1)およびシャッタドライバ204(OUT2)に高速パルス出力を発生させる(精度)タイミング発生器208を含む。これらの2つのパルスは、理想的には、相互間に所望の/既知の/所定の位相差を有する。画像センサ202から捕捉された画像信号および出力電気パルス間の所望の/既知の/所定の位相差は、飛行時間システムから物体の距離を計算するために用いられる。デジタルシグナルプロセッサまたはマイクロプロセッサなどのプロセッサは、この計算を行う飛行時間カメラに含まれていてもよい。
前述の通り、実位相差は、所望の/既知の/所定の位相差から静的にも動的にもドリフトし得るため、距離の計算の精度が下がる。本開示の1つの様態は、「実」電気パルスが、パルス出力OUT1およびOUT2を調整するためのフィードバック情報として使用され得るように、シャッタドライバ204および照明器206からの能動的フィードバックを提供することに関する。シャッタドライバ204および照明器206の「実」電気パルスを取得するために、特殊な回路が、照明器206(ACT1)およびシャッタドライバ204(ACT2)で実電気パルスを検知するために提供され得る。特殊な回路は、照明器206の光源を駆動するドライバで、第1の実電気パルス(ACT1)を検知する第1の検知回路と、電気シャッタドライバ204で、第2の実電気パルス(ACT2)を検知する第2の検知回路とを含んでいてもよい。特殊な回路は、一部の実施形態ではシステムが高圧および高速の状態があるので、その意味は小さくはない。さらに、シャッタドライバ204および照明器206がそれぞれ相互に全く異なる独自の回路を有しているため、特殊な回路の持つ意味は、小さくはない。
本発明は、能動的フィードバックをどのように用いて、照明器とシャッタパルスとの間の位相誤差、または理想/必要/予想位相差からの偏差を低減させるかに関する。「実」電気パルス(例えば、ACT1およびACT2)は、所定の基準パルス(例えば、REF1およびREF2それぞれ)で実パルスの位相差を測定するために、特殊な回路(例えば、位相検出210および位相検出212)への入力として提供される。例えば、REF1およびREF2などの基準パルスは、既知の/所定の位相差を有する理想/必要/予想位相差を示してもよい。換言すれば、第1の基準電気パルスREF1および第2の基準電気パルスREF2が、所定の位相差を有する所望の電気パルスを示してもよい。
(基準パルスの)位相差/誤差が測定されると、特殊な回路(例えば、位相調整214および位相調整216)は、位相補正アルゴリズムを実装して、実パルスと基準パルスとの間の位相差/誤差をゼロにするよう、タイミング発生器208によって生成されるパルス出力OUT1およびOUT2を調整し得る。
一部の実施形態では、この特殊な回路は、第1の実電気パルス(例えば、ACT1)および第1の基準電気パルス(例えば、REF1)に基づいて光源を駆動するドライバに提供される第1の出力電気パルス(例えば、OUT1)を調整する第1の補償回路と、第2の実電気パルス(例えば、ACT2)および第2の基準電気パルス(例えば、REF2)に基づいて電気シャッタドライバに提供される第2の出力電気パルス(例えば、OUT2)を調整する第2の補償回路とを含んでいてもよい。第1の補償回路は、照明器206に提供される第1の出力電気パルス(例えば、OUT1)を調整し、第1の基準電気パルス(例えば、REF1)により近い第1の実電気パルス(例えば、ACT1)を駆動する第1の位相補正アルゴリズムを実装してもよい。第2の補償回路は、シャッタドライバ204に提供される第2の出力電気パルス(例えば、OUT2)を調整し、第2の基準電気パルス(例えば、REF2)により近い第2の実電気パルス(例えば、ACT2)を駆動する第2の位相補正アルゴリズムを実装してもよい。
当業者は、パルスの位相誤差(距離の決定における誤差の原因となり得る誤差)を測定する異なる手法を実装する他の適切なシステムも本開示によって想定されることを理解するであろう。このシステムの異なる変形形態を図3および4に示す。
パルス出力の位相を調整する制御ループ
図2に示すように、能動的補償スキームは、実電気パルスを検知し、検知されたパルスを能動的フィードバックとして用いて、出力パルスを制御する。したがって、能動的補償スキームは、出力パルスを制御して、飛行時間システムの位相整列誤差を低減させる制御ループ、具体的には、閉制御ループとして見てもよい。出力パルスは、位相検出器によって検出された個々の誤差に基づいて、動的に調整される。システムの安定性を確保するために、この閉制御ループは、能動的補償スキームが位相検出器によって検出された誤差を補正する速度を制御できるフィルタを実装してもよい。
図3は、本開示の一部の実施形態による、飛行時間カメラの位相整列誤差の能動的補償を提供する別の例示的なシステムの図である。この例では、第1のフィルタ302は、位相検出210と位相検出214との間に追加され、第2のフィルタ304は、位相検出212と位相検出216との間に追加される。第1のフィルタ302は、第1の時定数TC1を受け取り、第2のフィルタ302は、第2の時定数TC2を受け取ってもよい。第1および第2の時定数は、事前にプログラムされてもよい(例えば、起動時または工場で)。一部の例では、第1および第2の時定数は、ユーザによって指定されるか、または、飛行時間カメラの他の回路によって指定されてもよい。
これらのフィルタは、閉制御ループの応答時間が制御し得るように、個々の時定数に基づいて、位相検出誤差出力(例えば、位相誤差)を平均化および/または平等化してもよい。例えば、これらのフィルタは、時定数に基づいて、位相誤差が更新されるたびに、位相調整パラメーター(出力パルスのタイミングを調整するために、位相調整214および216によって使用される)が更新される速度を制御してもよい。これらのフィルタおよび時定数は、有利には、出力パルスの位相調整が過剰に急激にまたは急速に発生しないようにし(つまり、制御ループを振動させる)、出力パルスの位相調整が過剰に遅く発生しないようにする。単一のパルス間隔が出力パルスの大体100ナノ秒であるシステムの場合、時定数と関連付けられた応答時間は、数100分のナノ秒からマイクロ秒、ミリ秒の範囲になってもよい。
パルス出力を発生させる一般化制御ループ
図4は、本開示の一部の実施形態による、飛行時間カメラの位相整列誤差の能動的補償を提供するさらに別の例示的なシステムの図である。この図は、例えば、OUT1およびOUT2などのパルス出力を発生させるのに使用される制御ループの1つのモデルを示す。このシステムは、照明器206とシャッタドライバ204を備える飛行時間カメラの位相整列誤差の能動的補償の電子回路を備える。この回路は、照明器206に対する制御ループのフィードバック経路内の第1の能動的補償回路402を含む。第1の能動的補償回路402は、第1のコンパレータ回路410および第1のアクチュエータ回路412を含む。この回路はまた、シャッタドライバ204に対する制御ループのフィードバック経路内の第2の能動的補償回路404も含む。第2の能動的補償回路404は、第2のコンパレータ回路420および第2のアクチュエータ回路422を含む。
第1のコンパレータ回路410は、照明器206で第1の実電気パルスACT1を検知し、第1の実電気パルスACT1と第1の基準電気パルスREF1との間の第1の位相誤差を決定する。第1の位相誤差は、第1の実電気パルスACT1と第1の基準電気パルスREF1との間の第1の位相差またはタイミング差を含んでいてもよい。第2のコンパレータ回路420は、シャッタドライバ204で第2の実電気パルスACT1を検知し、第2の実電気パルスACT2と第2の基準電気パルスREF2との間の第2の位相誤差を決定する。第2の位相誤差は、第2の実電気パルスACT2と第2の基準電気パルスREF2との間の第2の位相差またはタイミング差を含む。第1の基準電気パルスREF1および第2の基準電気パルスREFが所望の/既知の/所定の位相差を有する2つのパルスを示す場合、これらのコンパレータ回路は、位相誤差を決定するため、実パルスの位相が基準パルスに一致するかを決定する。
第1の位相誤差に基づいて、第1のアクチュエータ回路412は、第1の位相誤差に基づいて、照明器206に提供される第1の出力電気パルスOUT1を発生させ、第2の位相誤差に基づいて、第2のアクチュエータ回路422は、第2の位相誤差に基づいて、シャッタドライバ204に提供される第2の出力電気パルスOUT2を発生させる。アクチュエータ回路は、位相誤差をゼロにするか、または低減され得るように、位相誤差に基づいて(ある場合)、正確なタイミングパルスを発生し、位相誤差に基づいて、正確なタイミングパルスの位相を動的に調整してもよい。具体的には、第1のアクチュエータ回路412は、照明器206に提供される第1の出力電気パルスOUT1を適応的に調整して、第1の位相誤差をゼロにし、第2のアクチュエータ回路422は、シャッタドライバ204に提供される第2の出力電気パルスOUT2を適応的に調整して、第2の位相誤差をゼロにしてもよい。
制御ループの安定性と望ましい動作を確保するために、第1のアクチュエータ回路412は、第1の位相誤差を用いて、第1の出力電気パルスを調整する前に、第1の位相誤差をフィルタリングする第1のプログラム可能な時定数TC1を含んでいてもよく、第2のアクチュエータ回路は、第2の位相誤差を用いて、第2の出力電気パルスを調整する前に、第2の位相誤差をフィルタリングする第2のプログラム可能な時定数TC2を含んでいてもよい。このフィルタリングは、タイミング定数に基づいて、平均化および/または平等化を含んでいてもよい。
一部の実施形態では、図4に示す電子回路は、照明器206によって照明された物体に関する距離情報を決定するための所定のタイミングまたは位相差で、第1の基準電気パルスREF1および第2の基準電気パルスREF2を発生させるように構成されたパルス発生器480をさらに含む。
例示的な能動補償
図5は、本開示の一部の実施形態による、照明器およびシャッタドライバを備える飛行時間カメラの位相整列誤差の能動的補償のための方法を示すフロー図である。以下の信号の参照記号は、図2〜4で説明/図示する参照記号に対応している。この方法は、照明器(タスク502)で、第1の実電気パルス(ACT1)を検知することと、シャッタドライバ(タスク504)で、第2の実電気パルス(ACT2)を検知することを含む。この方法は、第1の実電気パルスACT1および第1の基準電気パルスREF1に基づいて、照明器に提供される第1の出力電気パルスOUT1および第2の実電気パルスACT2および第2の基準電気パルスREF2に基づいて、シャッタドライバ4に提供される第2の出力電気パルスOUT2のうちの1つ以上(タスク506)を調整することをさらに含む。
第1の出力電気パルスOUT1を調整することは、位相検出器を用いて、第1の実電気パルスACT1と第1の基準電気パルスREF1を比較して、第1の位相誤差を決定することと、第1の位相誤差に基づいて、第1の出力電気パルスOUT1を調整することとを含む。第2の出力電気パルスOUT2を調整することは、位相検出器を用いて、第2の実電気パルスACT2と第2の基準電気パルスREF2を比較して、第2の位相誤差を決定することと、第2の位相誤差に基づいて、第2の出力電気パルスOUT2を調整することとを含む。
能動的補償スキームでは、第1の出力電気パルスOUT1を調整することが、第1の出力電気パルスOUT1を調整して、第1の実電気パルスACT1と第1の基準電気パルスREF1との間の第1の位相誤差をゼロにするか、または第1の位相誤差を低減させることを含む。一部の実施形態では、第1の出力電気パルスOUT1を調整することは、第1の実電気パルスACT1と第1の基準電気パルスREF1との間の第1の位相誤差を決定することと、第1の位相誤差を用いる前に第1の実電気パルスACT1を有する第1のフィードバックループの第1の時定数TC1に従って第1の位相誤差をフィルタリングして、第1の出力電気パルスOUT1を調整することとを含む。
同様に、第2の出力電気パルスOUT2を調整することが、第2の出力電気パルスOUT2を調整して、第2の実電気パルスACT2と第2の基準電気パルスREF2との間の第2の位相誤差をゼロにするか、または第2の位相誤差を低減させることを含む。一部の実施形態では、第2の出力電気パルスOUT2を調整することは、第2の実電気パルスACT2と第2の基準電気パルスREF2との間の第2の位相誤差を決定することと、第2の位相誤差を用いる前に第2の実電気パルスACT2を有する第2のフィードバックループの第2の時定数TC2に従って第2の位相誤差をフィルタリングして、第2の出力電気パルスOUT2を調整することとを含む。
照明パルスを検知する例示的な回路
図6は、本開示の一部の実施形態による、フィードバックのための、電気パルス出力を含む例示的な照明器設計の図である。この設計は、例えば、そのゲートが、図2〜4のOUT2などの、(タイミング発生器から)照明器に提供されるパルス出力によって駆動されるトランジスタ素子M1を含む。この照明器設計は、ダイオードD1がオンになると、飛行時間カメラに対して光を放ち得るダイオードD1を含む。トランジスタ素子M1がオフになると、貯留電圧がコンデンサーC1の正極に蓄積するため、コンデンサーC1が帯電される。ノードN1の電圧も「高」となる。パルス(例えば、OUT2)が到達し、トランジスタ素子M1(例えば、パワー電界効果トランジスタ)がオンになると、ダイオードD1は短絡状態(低抵抗)になり、相当の電荷量がコンデンサーC1から放電され、ダイオードD1を流れる電流として放出され、D1によって光が放たれる。
照明器にある実電気パルスを検知するために、例えば、図2〜4のACT1などの、照明器における「実」電気パルスとして使用されるノードN1での電圧を抽出できる。タイミング発生器によって提供されたパルスの結果、ダイオードD1がオンになると、抵抗素子R2およびコンデンサーC1の放電によって、ノードN1での電圧が接地にまで下げられる。その結果、ノードN1での電圧は、入ってくる正のパルス(OUT1)に応答して、負のパルス(ACT1)を持つ。負のパルス(ACT1)は、位相誤差を補償するための能動的フィードバックとして効果的に用いることができる。
図6に示すように、第1の実電気パルス(ACT1)は、照明器(例えば、ノードN1)内の回路ノードで電気パルスを検知することを含み、第1の実電気パルス(ACT1)は、照明器の光源(例えば、ダイオードD1)をオンにするパルスを表す。本開示によって、照明器設計に他の回路アーキテクチャを用いてもよいことが想定される。回路アーキテクチャに応じて、能動的フィードバックに対して、照明器で「実」電気パルスを提供するのに、他の適切なノードを用いてもよい。その精度がダイオードがオンになった時に、実際の時間に対する「実」または検知された電気パルスのタイミングの近さによって決定される、照明器で「実」電気パルスを提供することにおいて、一部のノードがより正確であり得ることに留意されたい。したがって、ノードの選択は、所定のシステムに「実」電気パルスを提供する特定のノードの使いやすさまたは連結しやすさの他、「実」電気パルスの精度により得る。
一部の実施形態では、第2の実電気パルス(ACT1)を検出することが、照明器の感光素子(例えば、フォトダイオードまたは光源および光源を駆動するドライバと共同設置された同様の感光センサ)を用いて、照明器の光源によって放出された光を検知することを含む。この感光素子は、光源によって放出された光を検知したことに応答して、第1の実電気パルス(ACT1)として、実電気パルスを発生させ得る。この感光素子は、画像センサに付属したものとして提供しないのが好ましい。非常に正確な実電気パルスを発生させ得るように、感光素子は、照明器の光源に非常に近いところに配置するのが望ましい。
サンプルの特性
例1は、照明器とシャッタドライバを備える飛行時間カメラの位相整列誤差の能動的補償のための方法である。この方法は、照明器で第1の実電気パルスを検出すること、シャッタドライバで第2の実電気パルスを検出すること、第1の実電気パルスおよび第1の基準電気パルスに基づいて、照明器に提供される第1の出力電気パルスを調整すること、および第2の実電気パルスおよび第2の基準電気パルスに基づいて、シャッタドライバに提供される第2の出力電気パルスを調整することとを含む。
例2は、例1の方法で、第1の出力電気パルスを調整することが、位相検出器を用いて第1の実電気パルスを第1の基準電気パルスと比較して、第1の位相誤差を決定することと、第1の位相誤差に基づいて、照明器の第1の出力電気パルスを調整することとを含む。
例3は、例1の方法で、第2の出力電気パルスを調整することが、位相検出器を用いて第2の実電気パルスを第2の基準電気パルスと比較して、第2の位相誤差を決定することと、第2の位相誤差に基づいて、シャッタドライバの第2の出力電気パルスを調整することとを含む。
例4は、例1による方法で、第1の実電気パルスを検出することが、図6に示す設計を用いて実行される。
例5は、例1による方法で、位相検出器が、2つの入力信号パルス間の位相差またはタイミング差、または2つの入力信号パルス間のタイミング差を決定するように構成される。
例6は、例1による方法で、第1の実電気パルスを検出することが、第1の実電気パルスと第1の基準電気パルスとの間の第1の位相誤差を低減させることを含む。
例7は、例1による方法で、第2の実電気パルスを検出することが、第2の実電気パルスと第2の基準電気パルスとの間の第2の位相誤差を低減させることを含む。
例8は、照明器とシャッタドライバを備える飛行時間カメラの位相整列誤差の能動的補償の装置である。この装置は、照明器で第1の実電気パルスを検出する手段と、シャッタドライバで第2の実電気パルスを検出する手段と、第1の実電気パルスおよび第1の基準電気パルスに基づいて、照明器に提供される第1の出力電気パルスを調整する手段と、第2の実電気パルスおよび第2の基準電気パルスに基づいて、シャッタドライバに提供される第2の出力電気パルスを調整する手段とを含む。
例9は、例8による装置で、例1〜7のうちいずれか1つを実装する手段を含む。
例10は、照明器とシャッタドライバを備える飛行時間カメラの位相整列誤差の能動的補償の装置である。この装置は、照明器で第1の実電気パルスを検出する第1の検知回路と、シャッタドライバで第2の実電気パルスを検出する第2の検知回路と、第1の実電気パルスおよび第1の基準電気パルスに基づいて、照明器に提供される第1の出力電気パルスを調整する第1の補償回路と、第2の実電気パルスおよび第2の基準電気パルスに基づいて、シャッタドライバに提供される第2の出力電気パルスを調整する第2の補償回路とを含む。
例11は、例1〜7のうちいずれか1つを実装する回路をさらに含み得る装置である。
変形形態および実装形態
(図2〜3の他)図4に示すシステムは、動的および能動的補償スキームを示すが、これは、工場での較正または強引な解決法とは混同されない。工場での較正または強引な解決法は、電流位相誤差を測定すること、および該誤差を能動的に補償することを伴わない。
能動的補償スキームは、定期的に実行されてもよい(制御ループが各期間ごとに1回繰り返される)。一部の場合、能動的補償スキームは、ユーザからの信号に応答してオンになってもよい。一部の場合、能動的補償スキームは、繰り返し、かつ連続で実行される(バックグラウンドでの動作中)。
本明細書に記載の一部の実施形態は、電気的解決法に基づいて、照明器でパルスを検出すること(つまり、照明器の回路ノード内の電気信号を検知すること)を伴うが、これは、光学的解決法(つまり、実電気パルスを発生させる感光素子を使用すること)とは区別される。一部の場合、電気的解決法によって、このような基準センサまたは画像センサを伴うピクセルを有する必要性がなくなり得るため、電気的解決法が好ましい。
また、本明細書に記載の一部の実施形態は、(1)照明器に提供される第1の出力電気パルスおよび(2)シャッタドライバに提供される第2の出力電気パルスの両方を調整することに関する、ということに留意することが重要である。しかしながら、一部の実施形態では、(1)および(2)のうちいずれか1つのみが調整されることが、当業者には理解されよう。一部の場合、(1)および(2)のうちいずれか1つは、大きな歪みを見せない(または比較的精度が高いことが予想される)ため、位相は調整されない可能性がある。このような実施形態も、本開示によって想定される。
本開示は、単一のシャッタドライバ/画像センサおよび単一の照明器を有する飛行時間システムに限定されない。飛行時間システムは、複数のシャッタドライバ/画像センサおよび/または複数の照明器を含んでいてもよい。これらのシステムは、それにもかかわらず、本明細書に記載の位相整列誤差を被るだろう。したがって、対応する回路は、位相整列誤差を低減させ、かつ能動的に補償するために、複数のシャッタドライバ/画像センサおよび/または複数の照明器に提供され得る。
位相検出器および/またはコンパレータ回路の実装形態は、些末なことがらとはいえない場合がある。シャッタドライバおよび照明器が全く異なるサブシステム(例えば、異なる電圧、信号の形状、プロセス技術など)であるため、シャッタドライバおよび照明器の回路および実電気パルスは、全く異なる場合がある。実電気パルスは、必ずしも基準電気パルスと同じ種類の信号になるとは限らない場合がある。電気的に、これらの差によって、実電気パルスと基準電気パルスを比較して、2種類の信号間の位相誤差を抽出することが難しくなる。実電気パルスが基準電気パルスと比較される前に、ゲインの差に対して、実電気パルスが形成、測定、調整などされ得る。一部の場合、全く異なる2種類の入力信号からエッジ情報を抽出して、位相誤差を決定するために、位相検出器および/またはコンパレータ回路が実装される。例えば、位相検出器および/またはコンパレータ回路は、エッジ情報を抽出するために、閾値検出器および論理回路を含んでいてもよい。
一部の実施形態では、所望の位相差を有する基準電気パルスは、パルス発生器またはタイミング発生器によって発生されてもよい。一部の他の実施形態では、パルスの絶対タイミングが飛行時間システムの精度にとって重要ではなく、かつ飛行時間システムの精度に影響するのが相対タイミング(位相差)であるため、飛行時間システム内の1つの経路の実電気パルスは、その飛行時間システムの別の経路の基準電気パルスとして機能し得る。したがって、位相検出器および/またはコンパレータ回路は、2つの信号を比較して、2つの信号間の位相差が正しいか、または、オフか、または、一部の位相誤差による理想的な位相差から離れているかを決定する。例えば、シャッタドライバでの第2の実電気パルスを使用できる、または、該照明器での第1の実電気パルスと比較される第1の基準電気パルスとして機能し得る。別の例では、シャッタドライバでの第1の実電気パルスを使用できる、または、該シャッタドライバでの第2の実電気パルスと比較される第2の基準電気パルスとして機能し得る。
ある文脈では、本明細書に記載の特性は、物体の距離を決定することが望ましい多くのシステムに適用可能である。例示的なシステムは、スポーツ用電子機器、軍装備品、自動車システム、医療システム、科学計器、レーダー、産業用プロセス制御、および正確な飛行時間カメラを利用し得る任意の適切なシステムを含む。さらに、医療画像、患者監視、医療機器、および在宅医療において、前述の特定の実施形態が提供し得る。他の用途は、安全装置向けの自動車技術(例えば、安定性制御システム、ドライバ支援システム、ブレーキングシステム、任意の種類のインフォテインメントおよび内装用途)を伴い得る。例えば、ドライバ支援システムは、飛行時間を用いて、道路上の他の人々、車、または物体を決定する。数センチで衝突に至る可能性があるため、距離決定の精度が非常に重要な場合がある。さらに別のシナリオでは、本開示の教示は、生産性、エネルギー効率、および信頼性の向上を支援する産業用プロセス制御を含む、産業市場に適用可能である。消費者用途では、前述の信号処理回路の教示は、マンマシンインターフェース、ゲーム、画像処理、オートフォーカスなどに使用し得る。説明した手法は、容易にスマートフォン、タブレット、セキュリティーシステム、PC、ゲーム技術、バーチャルリアリティー、シミュレーショントレーニングなどの一部になり得る。
前述の実施形態の説明において、特定の回路の需要に応えるため、コンデンサー、クロック、DEF、分割器、誘導子、抵抗器、増幅器、スイッチ、デジタルコア、トランジスタ、および/または他の構成要素は、容易に置換、代替、あるいは他の方法で修正されてもよい。さらに、補助的な電子素子、ハードウェア、ソフトウェアなどの使用が、本開示の教示を実装するために同様に実行可能な選択肢を提供することに留意されたい。
本開示/特許請求の範囲は、NMOSトランジスタ素子を用いた実装形態を説明しているが、開示された電圧バッファーを提供するために、PMOSトランジスタ(P型金属酸化膜半導体トランジスタ)または同等のバイポーラ接合トランジスタ(BJT)を使用した補助的な構成も1つ以上のNMOSトランジスタ(またはトランジスタ素子)と置換し得ることが想定される。トランジスタ素子は、3つの(主)端子を有する素子として一般化され得ることが当業者には理解されよう。さらに、動作中、トランジスタ素子がNMOS、PMOS、NPN、BJT素子(およびその他任意の同等のトランジスタ素子)に対応するトランジスタの特徴的挙動を有し得ることが当業者には理解されよう。例えば、本開示/特許請求の範囲は、全てのNMOS素子がPMOS素子に置換される実装形態を包含する。PMOS素子を使用する回路は、NMOS素子を用いた本明細書に記載の回路と比較して、「逆さまの」方法で構成される(V+およびアースが置き換えられる)。種々の実装形態が、実質的に同じ結果を生む実質的に同じ方法で実質的に同じ機能を実行するため、種々の実装形態は、NMOSトランジスタ素子を用いた開示された実装形態と同等である。
当業者には、補助的なまたは同等の構成(NMOSトランジスタの代わりにBJTを用いた)が、NMOSトランジスタを用いた本明細書に記載の実施形態と互換性があることが考慮されよう。例えば、本開示/特許請求の範囲は、金属酸化膜半導体電界効果トランジスタ(MOSFET)素子について言及する場合、本開示/特許請求の範囲もBJTの「ドレイン」が「コレクタ」に対応する同等の実装形態を想定している。BJTの「エミッタ」に対応するMOSFETの「ソース」、およびBJTの「ベース」に対応するMOSFETの「ゲート」も同様である。「ソースフォロワ」素子は、「エミッタフォロワ」素子などに対応し得る。
飛行時間カメラの位相整列誤差の能動的補償の種々の装置の部品は、本明細書に記載の機能を実行する特殊な電子回路を含み得る。一部の場合、この装置の1つ以上の部品は、本明細書に記載の機能を実行するよう、特別に構成されたプロセッサによって提供され得る。例えば、このプロセッサは、1つ以上の用途固有の構成要素を含んでいてもよく、または、本明細書に記載の機能を実行するように構成されたプログラマブルロジックゲートを含んでいてもよい。この回路は、アナログ領域、デジタル領域、または混合の単一領域で動作し得る。一部の場合、このプロセッサは、非一時性のコンピュータ媒体に格納された1つ以上の命令を実行することによって、本明細書に記載の機能を実行するように構成されてもよい。
1つの例示的な実施形態では、任意の数の図の電気回路は、関連電子素子の基板上に実装されてもよい。この基板は、飛行時間システム向けに作成された回路基板であってもよく、この回路基板は、電子素子の内部電子システムの種々の構成要素を保持し、さらに、他の周辺機器のためのコネクターを提供してもよい。より具体的には、この基板は、システムの他の構成要素が電気的に通信できるようになる、電気的接続部を提供してもよい。任意の適切なプロセッサ(デジタル信号プロセッサ、マイクロプロセッサ、支持チップセットなど)、非一時的なコンピュータ可読メモリー要素などは、特定の構成需要、処理需要、コンピュータ設計などに基づいて、基板に適切に連結されてもよい。外部記憶装置、追加のセンサ、音声/映像表示のためのコントローラー、および周辺機器などの他の構成要素をケーブルを介して、プラグインカードとして基板に取り付けてもよく、または基板自体に統合してもよい。種々の実施形態では、本明細書に記載の機能は、これらの機能を支持する構造内に配置された1つ以上の構成可能な(例えば、プログラム可能な)要素内で実行されるソフトウェアまたはファームウェアとして、模倣の形式で実装されてもよい。模倣を提供するこのソフトウェアまたはファームウェアは、これらの機能を実行できるようにする命令を含む、非一時的なコンピュータ可読記憶媒体で提供されてもよい。
別の例示的な実施形態では、図の電気回路は、スタンドアロンモジュール(例えば、固有の用途または機能を実行するように構成された構成要素または回路と関連付けられた素子)に実装されてもよく、または、プラグインモジュールとして、電子素子の用途固有のハードウェアに実装されてもよい。本開示の特定の実施形態は、その一部または全部がシステムオンチップ(SOC)パッケージに容易に含まれ得ることに留意されたい。SOCは、コンピュータまたは他の電子システムを1つのチップに集積するICを表す。これは、デジタル、アナログ、混合信号、および、多くの場合、無線周波数機能を含んでいてもよく、これらの全ては、単一チップ基板上に提供されてもよい。他の実施形態は、単一の電子パッケージ内に配置され、電子パッケージを通じて相互に密接に作用するように構成された複数の個別のICマルチチップモジュール(MCM)を含んでいてもよい。その他種々の実施形態では、能動的補償機能は、1つ以上の特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、および他の半導体チップに実装されてもよい。
本明細書に記載の全ての仕様、寸法、および関係性(例えば、プロセッサ、論理演算などの数)が例示および教示目的のためだけに提供されたことに留意することも必要である。このような情報は、本開示の精神または特許請求の範囲(ある場合)の範囲から逸脱することなく大幅に変わり得る。仕様は、1つの比限定的な例にのみ適用されるため、したがって、そのようなものとして解釈されるべきである。前述の説明において、例示的な実施形態は、特定のプロセッサおよび/または構成要素の配列を参照して説明されてきた。種々の修正および変更は、本開示の精神または特許請求の範囲(ある場合)の範囲から逸脱することなくこのような実施形態になされ得る。したがって、説明および図面は、限定的な意味ではなく、例示的な意味で考慮される。
本明細書で提供された多くの例は、2個、3個、4個、またはそれ以上の電気的構成要素の点で説明されてもよいことに留意されたい。しかしながら、これは、簡潔性および例示のためだけになされてきた。このシステムが任意の適切な方法で確立されることが理解されよう。類似の代替設計に沿って、図に図示した構成要素、モジュール、および要素のいずれかは、種々の可能な構成で結合されてもよく、その全てが明確に本明細書の広範な範囲内にある。特定の場合、限られた数の電気素子を参照するだけで、所定のフローの流れの機能のうちの1つ以上を説明することがより簡単な場合がある。図の電気回路およびその教示は容易に拡張可能で、より複雑/高度な配列および構成の他、多くの構成要素を収容でき得ることが理解されよう。したがって、提供される例は、その他多くのアーキテクチャに潜在的に適用されるように、その範囲を制限、または電気回路の広範な教示を抑制すべきではない。
本明細書において、「1つの実施形態」、「例示的な実施形態」、「1つの実施形態」、「別の実施形態」、「一部の実施形態」、「種々の実施形態」、「他の実施形態」、「代替実施形態」などに含まれる種々の特性(例えば、要素、構造、モジュール、構成要素、手順、操作、特徴など)は、任意のこのような特性が本開示の1つ以上の実施形態に含まれるが、同じ実施形態で必ずしも結合されない場合があることを意味するものであることに留意されたい。
位相誤差の能動的補償に関連する機能または方法手順が図に示すシステムによって、またはそのシステム内で実行され得る可能な機能の一部のみを示すことにも留意することが重要である。これらの操作の一部は、必要に応じて削除または除去されてもよく、またはこれらの操作は、本開示の範囲から逸脱することなく、大幅に修正または変更されてもよい。さらに、これらの操作のタイミングは、大幅に変更されてもよい。前述の操作の流れは、例示および議論のためだけに提供されてきた。本開示の教示から逸脱することなく、任意の適切な配置、出来事の順序、およびタイミング機構が提供されるという点で、大幅な柔軟性が本明細書に記載の実施形態によって提供される。
その他多くの変更、代替、変形形態、改変、および修正が当業者に解明され得、本開示または添付の特許請求の範囲(あれば)の範囲内に含まれるように、本開示がこのような全ての変更、代替、変形形態、改変、および修正を包含することが意図される。前述の装置の全ての任意の特性も本明細書に記載の方法またはプロセスに関して実装されてもよく、例における詳細は、1つ以上の実施形態の任意の場所で用いられてもよい。
Claims (20)
- 照明器およびシャッタドライバを備える飛行時間カメラの位相整列誤差の能動的補償のための方法であって、
前記照明器で第1の実電気パルスを検知することと、
前記シャッタドライバで第2の実電気パルスを検知することと、
前記第1の実電気パルスおよび第1の基準電気パルスに基づいて、前記照明器に提供される第1の出力電気パルス、ならびに
前記第2の実電気パルスおよび第2の基準電気パルスに基づいて、前記シャッタドライバに提供される第2の出力電気パルスのうちの、1つ以上を調整することと、を含む、方法。 - 前記第1の出力電気パルスを調整することが、
位相検出器を用いて前記第1の実電気パルスを前記第1の基準電気パルスと比較して、第1の位相誤差を決定することと、
前記第1の位相誤差に基づいて、前記照明器の前記第1の出力電気パルスを調整することと、を含む、請求項1に記載の方法。 - 前記第2の出力電気パルスを調整することが、
前記位相検出器を用いて前記第2の実電気パルスを前記第2の基準電気パルスと比較して、第2の位相誤差を決定することと、
前記第2の位相誤差に基づいて、前記シャッタドライバの前記第2の出力電気パルスを調整することと、を含む、請求項1に記載の方法。 - 前記第1の実電気パルスを検知することが、前記照明器の回路ノードで電気パルスを検知することを含み、前記第1の実電気パルスが、前記照明器の光源をオンにするパルスを表す、請求項1に記載の方法。
- 前記第1の実電気パルスを検知することが、
前記照明器の感光素子を用いて、前記照明器の光源によって放出された光を検知することと、
前記光源によって放出された前記光を検知したことに応答して、前記感光素子によって、電気パルスを前記第1の実電気パルスとして発生させることと、を含む、請求項1に記載の方法。 - 前記第1の出力電気パルスを調整することが、前記第1の出力電気パルスを調整して、前記第1の実電気パルスと前記第1の基準電気パルスとの間の第1の位相誤差をゼロにするか、または前記第2の位相誤差を低減させることを含む、請求項1に記載の方法。
- 前記第1の出力電気パルスを調整することが、
前記第1の実電気パルスと第1の基準電気パルスとの間の第1の位相誤差を決定することと、
前記第1の位相誤差を用いる前に前記第1の実電気パルスをフィードバック信号として有する第1のフィードバックループの第1の時定数に従って前記第1の位相誤差をフィルタリングして、前記第1の出力電気パルスを調整することと、を含む、請求項1に記載の方法。 - 前記第2の出力電気パルスを調整することが、前記第2の出力電気パルスを調整して、前記第2の実電気パルスと前記第2の基準電気パルスとの間の第2の位相誤差をゼロにするか、または前記第2の位相誤差を低減させることを含む、請求項1に記載の方法。
- 前記第2の出力電気パルスを調整することが、
前記第2の実電気パルスと第2の基準電気パルスとの間の第2の位相誤差を決定することと、
前記第2の位相誤差を用いる前に前記第2の実電気パルスを有する第2のフィードバックループの第2の時定数に従って前記第2の位相誤差をフィルタリングして、前記第2の出力電気パルスを調整することと、を含む、請求項1に記載の方法。 - 照明器およびシャッタドライバを備える飛行時間カメラの位相整列誤差の能動的補償のための回路であって、
前記照明器で第1の実電気パルスを検知し、前記第1の実電気パルスと第1の基準電気パルスとの間の第1の位相誤差を決定するための第1のコンパレータ回路と、
前記照明器で第2の実電気パルスを検知し、前記第2の実電気パルスと第2の基準電気パルスとの間の第2の位相誤差を決定するための第2のコンパレータ回路と、
前記第1の位相誤差に基づいて、前記照明器に提供される第1の出力電気パルスを発生させるための第1のアクチュエータ回路と、
前記第2の位相誤差に基づいて、前記シャッタドライバに提供される第2の出力電気パルスを発生させるための第2のアクチュエータ回路と、を含む、回路。 - 前記第1の位相誤差が、前記第1の実電気パルスと前記第1の基準電気パルスとの間の第1の位相またはタイミング差を含む、請求項10に記載の回路。
- 前記第2の位相誤差が、前記第2の実電気パルスと前記第2の基準電気パルスとの間の第2の位相またはタイミング差を含む、請求項10に記載の回路。
- 前記第1のアクチュエータ回路が、前記第1の位相誤差を用いる前に前記第1の位相誤差をフィルタリングして、前記第1の出力電気パルスを調整するための第1のプログラム可能な時定数を含む、請求項10に記載の回路。
- 前記第2のアクチュエータ回路が、前記第2の位相誤差を用いる前に前記第2の位相誤差をフィルタリングして、前記第2の出力電気パルスを調整するための第2のプログラム可能な時定数を含む、請求項10に記載の回路。
- 前記第1のアクチュエータ回路が、前記照明器に提供される第1の出力電気パルスを適応的に調整して、前記第1の位相誤差をゼロにし、
前記第2のアクチュエータ回路が、前記シャッタドライバに提供される第2の出力電気パルスを適応的に調整して、前記第2の位相誤差をゼロにする、請求項10に記載の回路。 - 前記照明器によって照明された物体に関する距離情報を決定するために、所定のタイミングで前記第1の基準電気パルスおよび前記第2の基準電気パルスを発生させるように構成されたパルス発生器をさらに含む、請求項10に記載の回路。
- 位相整列誤差の能動的補償を備えた飛行時間システムであって、
光源を駆動するドライバと、
画像センサに連結された電子シャッタドライバと、
前記光源を駆動する前記ドライバで第1の実電気パルスを検知するための第1の検知回路と、
前記電子シャッタドライバで第2の実電気パルスを検知するための第2の検知回路と、
前記第1の実電気パルスおよび第1の基準電気パルスに基づいて、前記光源を駆動する前記ドライバに提供される第1の出力電気パルスを調整するための第1の補償回路と、
前記第2の実電気パルスおよび第2の基準電気パルスに基づいて、前記電子シャッタドライバに提供される第2の出力電気パルスを調整するための第2の補償回路と、を含み、
前記画像センサから捕捉された画像信号および前記第1および第2の出力電気パルスと関連付けられた所定の位相差が、飛行時間システムから物体の距離を計算するために使用される、前記飛行時間システム。 - 前記第2の実電気パルスが、前記第1の基準電気パルスとして機能する、請求項17に記載の飛行時間システム。
- 前記第1の実電気パルスが、前記第2の基準電気パルスとして機能する、請求項17に記載の飛行時間システム。
- 前記第1の基準電気パルスおよび前記第2の基準電気パルスが、所定の位相差を有する所望の電気パルスを表し、
前記第1の補償回路が、前記照明器に提供される第1の出力電気パルスを調整し、前記第1の基準電気パルスにより近い前記第1の実電気パルスを駆動し、
前記第2の補償回路が、前記シャッタドライバに提供される第2の出力電気パルスを調整し、前記第2の基準電気パルスにより近い前記第1の実電気パルスを駆動する、請求項17に記載の飛行時間システム。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462068137P | 2014-10-24 | 2014-10-24 | |
US62/068,137 | 2014-10-24 | ||
US14/876,392 US10054675B2 (en) | 2014-10-24 | 2015-10-06 | Active compensation for phase alignment errors in time-of-flight cameras |
US14/876,392 | 2015-10-06 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2016095298A true JP2016095298A (ja) | 2016-05-26 |
Family
ID=54359961
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015209329A Pending JP2016095298A (ja) | 2014-10-24 | 2015-10-23 | 飛行時間カメラの位相整列誤差の能動的補償 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10054675B2 (ja) |
EP (1) | EP3012664A1 (ja) |
JP (1) | JP2016095298A (ja) |
CN (1) | CN105548997A (ja) |
DE (1) | DE202015009250U1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020138754A1 (ko) * | 2018-12-26 | 2020-07-02 | ㈜미래컴퍼니 | 펄스 위상 이동을 이용한 3차원 거리측정 카메라의 비선형 거리 오차 보정 방법 |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USRE46672E1 (en) | 2006-07-13 | 2018-01-16 | Velodyne Lidar, Inc. | High definition LiDAR system |
US10627490B2 (en) | 2016-01-31 | 2020-04-21 | Velodyne Lidar, Inc. | Multiple pulse, LIDAR based 3-D imaging |
CN109154661A (zh) | 2016-03-19 | 2019-01-04 | 威力登激光雷达有限公司 | 用于基于lidar的3-d成像的集成照射和检测 |
JP6774192B2 (ja) * | 2016-03-24 | 2020-10-21 | 株式会社トプコン | 距離測定装置および距離測定方法 |
JP6693783B2 (ja) * | 2016-03-24 | 2020-05-13 | 株式会社トプコン | 距離測定装置およびその校正方法 |
CA3024510C (en) | 2016-06-01 | 2022-10-04 | Velodyne Lidar, Inc. | Multiple pixel scanning lidar |
US10445893B2 (en) | 2017-03-10 | 2019-10-15 | Microsoft Technology Licensing, Llc | Dot-based time of flight |
US10386465B2 (en) | 2017-03-31 | 2019-08-20 | Velodyne Lidar, Inc. | Integrated LIDAR illumination power control |
JP2020519881A (ja) | 2017-05-08 | 2020-07-02 | ベロダイン ライダー, インク. | Lidarデータ収集及び制御 |
US10914824B2 (en) * | 2017-11-21 | 2021-02-09 | Analog Devices International Unlimited Company | Systems and methods for measuring a time of flight in a lidar system |
US11294041B2 (en) | 2017-12-08 | 2022-04-05 | Velodyne Lidar Usa, Inc. | Systems and methods for improving detection of a return signal in a light ranging and detection system |
EP3612007B1 (en) * | 2018-08-16 | 2020-10-07 | Visteon Global Technologies, Inc. | Vehicle occupant monitoring system and method |
US10712434B2 (en) | 2018-09-18 | 2020-07-14 | Velodyne Lidar, Inc. | Multi-channel LIDAR illumination driver |
US11082010B2 (en) | 2018-11-06 | 2021-08-03 | Velodyne Lidar Usa, Inc. | Systems and methods for TIA base current detection and compensation |
DE102019134142A1 (de) * | 2018-12-12 | 2020-06-18 | Analog Devices, Inc. | Eingebaute kalibrierung von laufzeittiefenbildgebungssystemen |
US11423572B2 (en) * | 2018-12-12 | 2022-08-23 | Analog Devices, Inc. | Built-in calibration of time-of-flight depth imaging systems |
US11885958B2 (en) | 2019-01-07 | 2024-01-30 | Velodyne Lidar Usa, Inc. | Systems and methods for a dual axis resonant scanning mirror |
JP7151519B2 (ja) * | 2019-02-01 | 2022-10-12 | 株式会社デンソーウェーブ | 距離画像測定装置 |
DE102019121686A1 (de) * | 2019-08-12 | 2021-02-18 | Basler Ag | Messung und Kompensation von Phasenfehlern bei Time-of-Flight Kameras |
US11556000B1 (en) | 2019-08-22 | 2023-01-17 | Red Creamery Llc | Distally-actuated scanning mirror |
US11177815B2 (en) | 2020-03-13 | 2021-11-16 | Analog Devices International Unlimited Company | Timing alignment systems with gap detection and compensation |
WO2021180928A1 (en) | 2020-03-13 | 2021-09-16 | Analog Devices International Unlimited Company | Detecting temperature of a time of flight (tof) system laser |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008102000A (ja) * | 2006-10-18 | 2008-05-01 | Matsushita Electric Works Ltd | 強度変調光を用いた空間情報検出装置 |
JP2009236650A (ja) * | 2008-03-27 | 2009-10-15 | Panasonic Electric Works Co Ltd | 発光装置およびそれを用いる空間情報検出装置 |
JP2009236657A (ja) * | 2008-03-27 | 2009-10-15 | Panasonic Electric Works Co Ltd | 距離測定装置 |
JP2013195306A (ja) * | 2012-03-21 | 2013-09-30 | Honda Motor Co Ltd | 測距システム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100957084B1 (ko) | 2006-10-18 | 2010-05-13 | 파나소닉 전공 주식회사 | 공간 정보 검출 장치 |
US7586077B2 (en) * | 2007-07-18 | 2009-09-08 | Mesa Imaging Ag | Reference pixel array with varying sensitivities for time of flight (TOF) sensor |
FI20085665A0 (fi) * | 2008-06-27 | 2008-06-27 | Oulun Yliopisto | Menetelmä ja laite etäisyyden mittaamiseen |
US9109888B2 (en) * | 2012-03-21 | 2015-08-18 | Honda Motor Co., Ltd. | Distance measuring system |
US8997550B2 (en) | 2012-06-19 | 2015-04-07 | General Electric Company | Method and system for correcting for temperature variations in ultrasonic testing systems |
DE102012223295A1 (de) | 2012-12-14 | 2014-06-18 | Pmdtechnologies Gmbh | PMD-Kamera mit einer Phasenregelung der Beleuchtung |
-
2015
- 2015-10-06 US US14/876,392 patent/US10054675B2/en active Active
- 2015-10-21 DE DE202015009250.0U patent/DE202015009250U1/de active Active
- 2015-10-21 EP EP15190754.0A patent/EP3012664A1/en not_active Withdrawn
- 2015-10-23 JP JP2015209329A patent/JP2016095298A/ja active Pending
- 2015-10-23 CN CN201510695828.8A patent/CN105548997A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008102000A (ja) * | 2006-10-18 | 2008-05-01 | Matsushita Electric Works Ltd | 強度変調光を用いた空間情報検出装置 |
JP2009236650A (ja) * | 2008-03-27 | 2009-10-15 | Panasonic Electric Works Co Ltd | 発光装置およびそれを用いる空間情報検出装置 |
JP2009236657A (ja) * | 2008-03-27 | 2009-10-15 | Panasonic Electric Works Co Ltd | 距離測定装置 |
JP2013195306A (ja) * | 2012-03-21 | 2013-09-30 | Honda Motor Co Ltd | 測距システム |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020138754A1 (ko) * | 2018-12-26 | 2020-07-02 | ㈜미래컴퍼니 | 펄스 위상 이동을 이용한 3차원 거리측정 카메라의 비선형 거리 오차 보정 방법 |
CN113227828A (zh) * | 2018-12-26 | 2021-08-06 | 韩商未来股份有限公司 | 利用脉冲相移的三维距离测量照相机的非线性距离误差校正方法 |
CN113227828B (zh) * | 2018-12-26 | 2024-04-16 | 韩商未来股份有限公司 | 利用脉冲相移的三维距离测量照相机的非线性距离误差校正方法 |
Also Published As
Publication number | Publication date |
---|---|
DE202015009250U1 (de) | 2017-01-16 |
US10054675B2 (en) | 2018-08-21 |
EP3012664A1 (en) | 2016-04-27 |
CN105548997A (zh) | 2016-05-04 |
US20160116576A1 (en) | 2016-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2016095298A (ja) | 飛行時間カメラの位相整列誤差の能動的補償 | |
KR102525828B1 (ko) | 디지털 픽셀 이미지 센서 | |
JP6633197B2 (ja) | 光検出装置、及び電子機器 | |
US11595602B2 (en) | Image sensor post processing | |
US10555387B2 (en) | Light-emitting element drive circuit and portable electronic instrument | |
EP3940423A2 (en) | Image sensor and light source driver integrated in a same semiconductor package | |
US9973189B2 (en) | Insulated gate device discharging | |
WO2012170946A3 (en) | Low power and small form factor infrared imaging | |
TWI776971B (zh) | 具有雷射測距(lrf)能力之多模讀出積體電路(roic)像素,及相關之焦面陣列及多模lrf設備 | |
JP2017053769A (ja) | 距離センサ | |
EP3021138A1 (en) | Depth sensing method, 3d image generation method, 3d image sensor, and apparatus including the same | |
TWI793334B (zh) | 影像感測器後處理 | |
JP2009236650A (ja) | 発光装置およびそれを用いる空間情報検出装置 | |
KR101774779B1 (ko) | 거리 측정 장치 및 거리 측정 장치의 동작 방법 | |
TW201506362A (zh) | 用於具有電流鏡之緩衝直接注入讀出之影像滯後緩解的系統及方法 | |
JP2018019354A (ja) | 撮像装置 | |
US9269835B2 (en) | Method and device for control of avalanche photo-diode characteristics for high speed and high gain applications | |
WO2017176448A1 (en) | Package with integrated infrared and flash leds | |
CN108204859B (zh) | 光电检测电路和光电检测装置 | |
US20190094340A1 (en) | High Speed Illumination Driver for TOF Applications | |
US20130099842A1 (en) | Temperature sensitive device | |
US20220200237A1 (en) | Light-emission driving device and light-emitting device | |
TWI432023B (zh) | 2D / 3D (2D / 3D) dual mode image sensing circuit | |
US9897483B2 (en) | Photoelectric conversion apparatus, focus detection apparatus, and image capturing system | |
TW202337197A (zh) | 偵測裝置及偵測裝置的驅動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161125 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161130 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170629 |