JP2020148682A - 距離測定装置及びスキュー補正方法 - Google Patents
距離測定装置及びスキュー補正方法 Download PDFInfo
- Publication number
- JP2020148682A JP2020148682A JP2019047654A JP2019047654A JP2020148682A JP 2020148682 A JP2020148682 A JP 2020148682A JP 2019047654 A JP2019047654 A JP 2019047654A JP 2019047654 A JP2019047654 A JP 2019047654A JP 2020148682 A JP2020148682 A JP 2020148682A
- Authority
- JP
- Japan
- Prior art keywords
- value
- unit
- distance measuring
- correction
- measuring device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/02—Details
- G01C3/06—Use of electric means to obtain final indication
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/497—Means for monitoring or calibrating
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Measurement Of Optical Distance (AREA)
Abstract
【課題】距離測定装置における回路配線上の信号間のスキューに依存するTOF測定精度の低下を抑制すること。【解決手段】 本技術は、複数の画素を有する受光部と、前記複数の画素のうちの特定の画素に接続された基準信号線に接続され、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測する基準時間計測部と、前記特定の画素に接続された信号本線に接続され、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する時間計測部と、前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶する補正処理部とを備え、記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正するように構成された距離測定装置である。【選択図】図2
Description
本技術は、距離測定装置及びスキュー補正方法に関する。
物体(対象物)までの距離をToF(Time of Flight)に基づいて計測する距離測定装置(測距センサと称されることもある。)が知られている。TOFには、一般に、直接TOF(dTOF)と間接TOF(iTOF)とがある。直接ToFは、発光素子からパルス光を発射し、単一のパルス光が照射された物体からの反射光をSPAD(Single Photon Avalanche Diode)と呼ばれる受光素子で受けてフォトンを検出し、これにより発生したキャリアを、アバランシェ増倍を用いて電気信号パルスに変換し、これをTDC(Time to Digital Converter)に入力することで反射光の到来時刻を計測し、物体までの距離を算出する技術である。一方、間接ToFは、発光素子からパルス光を発射し、物体からの反射光により発生した電荷の検出及びその蓄積量が光の到来タイミングに依存して変化する半導体素子構造を利用して、光の飛行時間を計測する。
SPADを用いた距離測定装置は、単一のパルス光に対して、画素を構成する幾つかのSPADによる反応をサンプリング周波数に従って分割された時間ごとに加算したヒストグラムを作成し、そこからピーク値に対応する時刻を採用することにより、距離を算出している。このような距離測定装置は、ライン状に配置された画素列ごとにフォトンを読み出すことにより、画素ごとに距離情報を持った撮像フレーム(距離画像)をリアルタイムに得ることができる。
一般に、距離測定装置においては、回路内部での信号伝搬の遅延時間により、測距精度が十分ではないという問題があることから、例えば、特許文献1に記載されるように、画素が光を受光したタイミングから時間計測部が受光信号を入力したタイミングまでの時間差を受光側の遅延時間として測定することができるようにした光飛行時間測定装置及び光学的測距装置が提案されている。
しかしながら、上述した特許文献1の技術は、画素が光を受光したタイミングから時間計測部が受光信号を入力したタイミングまでの時間差を受光側の遅延時間として測定することができるものの、半導体装置の製造ばらつきや回路設計上の信号線の長短等の問題により発生する、信号間のスキュー(遅速)までも考慮するものではなかったため、TOF測距精度に誤差が含まれ得るという問題があった。
そこで、上記事情に鑑み、本開示では、回路配線上の信号間のスキューに依存するTOF測定精度の低下を抑制し得る距離測定装置及びスキュー補正方法が提供される。
上記事情に鑑み、本開示に係る技術は、以下に示す発明特定事項乃至は技術的特徴を含んで構成され得る。
すなわち、ある観点に従う本開示に係る技術は、複数の画素を有する受光部と、前記複数の画素のうちの特定の画素に接続された基準信号線に接続され、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測する基準時間計測部と、前記特定の画素に接続された信号本線に接続され、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する時間計測部と、前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶する補正処理部と、を備える距離測定装置である。そして、前記距離測定装置は、記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正するように構成される。
また、ある観点に従う本開示に係る技術は、距離測定装置における信号線間のスキューを補正するスキュー補正方法である。前記方法は、受光部における複数の画素のうちの特定の画素に接続された基準信号線を介して、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測することと、前記特定の画素に接続された信号本線を介して、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測することと、前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶することと、記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正することと、を含む。
なお、本開示において、手段とは、単に物理的手段を意味するものではなく、その手段が有する機能をソフトウェアによって実現する場合も含む。また、1つの手段が有する機能が2つ以上の物理的手段により実現されても、2つ以上の手段の機能が1つの物理的手段により実現されてもよい。
また、システムとは、複数の装置(又は特定の機能を実現する機能モジュール)が論理的に集合又は結合した物のことをいい、各装置や機能モジュールが単一の物により構成されるか、複数の物により構成されるかは問わない。
本開示に係る技術によれば、距離測定装置における配線上の信号間のスキューに依存するTOF測定精度の低下を抑制することができるようになる。
本技術の他の技術的特徴、目的、及び作用効果乃至は利点は、添付した図面を参照して説明される以下の実施形態により明らかにされる。また、本明細書に記載された作用効果等はあくまでも例示であって限定されるものではない。
以下、図面を参照して本開示に係る技術の実施の形態を説明する。ただし、以下に説明する実施形態は、あくまでも例示であり、以下に明示しない種々の変形や技術の適用を排除する意図はない。本技術は、その趣旨を逸脱しない範囲で種々変形(例えば各実施形態を組み合わせる等)して実施することができる。また、以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付して表している。図面は模式的なものであり、必ずしも実際の寸法や比率等とは一致しない。図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることがある。
[第1の実施形態]
図1は、本技術の一実施形態における距離測定装置の構成の一例を示すブロックダイアグラムである。距離測定装置1は、発光素子からパルス光を発射し、パルス光が照射された物体OBJからの反射光をSPAD(Single Photon Avalanche Diode)と呼ばれる受光素子で受けることにより得られる電気信号パルスに基づいて、物体OBJ(対象物ないしは被写体)までの距離を測定するいわゆる直接TOF型測距センサである。本技術は、直接TOF型測距センサを例にして説明されるが、間接TOF型測距センサに対しても同様に適用され得る。
図1は、本技術の一実施形態における距離測定装置の構成の一例を示すブロックダイアグラムである。距離測定装置1は、発光素子からパルス光を発射し、パルス光が照射された物体OBJからの反射光をSPAD(Single Photon Avalanche Diode)と呼ばれる受光素子で受けることにより得られる電気信号パルスに基づいて、物体OBJ(対象物ないしは被写体)までの距離を測定するいわゆる直接TOF型測距センサである。本技術は、直接TOF型測距センサを例にして説明されるが、間接TOF型測距センサに対しても同様に適用され得る。
同図に示すように、距離測定装置1は、例えば、制御部10と、ドライバ部20と、発光部30と、受光部40と、測距処理部50といったコンポーネントを備える。これらのコンポーネントは、例えば、CMOS LSIのようなシステム・オン・チップ(SoC)として一体的に構成され得るが、例えば、発光部30や受光部40といった幾つかのコンポーネントが別体のLSIとして構成されても良い。距離測定装置1はまた、測距処理部50により算出された距離に係るデータ(測距データ)を外部に出力するための通信インタフェース部(通信IF部)60を含む。図示されていないが、距離測定装置1は、通信インタフェース部60を介して、外部に配置されたホストICとの通信可能に構成されている。また、図示されていないが、距離測定装置1は、動作環境、例えば温度等の変化を検出するための温度センサが設けられても良い。
制御部10は、距離測定装置1の動作を統括的に制御するコンポーネントである。制御部10は、例えば、クロック生成部12と、制御信号生成部14と、補正処理部16とを含み構成される。
クロック生成部12は、距離測定装置1の動作を司るクロックを生成する。クロック生成部12は、図示されていないが、例えばクロック発振器とPLL回路とを含み構成され得る。クロック生成部12は、生成したクロックを例えば制御信号生成部14と測距処理部50とに出力する。
制御信号生成部14は、ドライバ部20及び受光部40のそれぞれに対する制御信号を生成し、出力する。具体的には、制御信号生成部14は、所定のタイミングで、発光部30を発光させるための制御信号をドライバ部20に出力するとともに、該発光のタイミングで、受光部40からのラインごとの読み出しタイミングを同期させるための制御信号を受光部40に出力する。
補正処理部16は、受光部40と測距処理部50との間の配線上の信号間のスキュー(遅速)に基づいて補正値を算出する。補正処理部16は、算出した補正値を、例えば図3に示すような、メモリ上の補正テーブル300に格納する。また、補正処理部16は、測距中、補正テーブル300から補正値を読み出して、これを後述する距離演算部56に出力する。補正処理部16の詳細については、後述する。
ドライバ部20は、発光部30の発光素子を駆動する。例えば、ドライバ部20は、所定のトリガパルスを出力し、これにより、発光部30の発光素子を駆動する。パルス光は、典型的には、数〜数十nsのパルス幅を有し得るが、これに限られない。
発光部30は、対象エリアに対して、TOF測距のためのレーザパルス光(以下「パルス光」という。)を発光ないしは出射する光源を含み構成される。このような測距に用いるためのパルス光は、アクティブ光と称されることもある。光源は、例えば、端面発光型半導体レーザであっても良いし、面発光型半導体レーザであっても良い。典型的には、発光部30の光源は、対象エリアに向けて光を空間的に発光し得る。本例では、発光部30は、LSIチップの外に設けられているが、これに限られるものではなく、onチップにより構成されても良い。
受光部40は、対象エリアから入射する光に反応して、電気信号パルスを出力するセンサである。入射光(観測光)は、測距に対して外乱光として作用する環境光及び発光部30により出射されたパルス光が照射した物体OBJからの反射光を含み得る。図示されていないが、典型的には、受光部40の受光面の前方には、光を効率よく受光することができるように、レンズ等の光学素子が設けられる。
本開示において、受光部40は、2次元アレイ状に配置された複数の受光素子(SPAD)を含み構成されたCMOSイメージセンサである。すなわち、各SPADは、飛来した光(フォトン)を検出し、これにより発生したキャリアを、アバランシェ増倍を用いて電気信号パルスに変換する。なお、隣接する幾つかのSPADの集合体(SPAD群)を画素と称し得る。例えば、画素は、隣接する3×3や、6×6、9×9といった任意の数の配列(アレイパターン)からなるSPADの集合体により構成され、これらの数に限定されない。また、SPAD群の数は、制御部10の制御の下、可変であり得る。さらに、特定のSPAD群(例えば撮像フレームにおける1ライン方向のSPAD群)は、制御信号生成部14の制御信号に従って有効化され、これによって、電気信号パルスが読み出される。したがって、1フレーム時間において順次に各ラインのSPAD群が有効化され、有効化されたSPAD群のそれぞれから出力される電気信号パルスによって、対象エリアに対する1撮像フレームが形成される。受光部40から読み出された電気信号パルスは、例えば所定段数の遅延バッファBUF_DELAYを含む信号線を介して(図2参照)、測距処理部50に出力される。なお、図1には明示されていないが、受光部40の出力端には、選択された画素から電気信号パルスを読み出すための画素選択スイッチ43が設けられている。
測距処理部50は、発光部30により出射したパルス光と受光部40により受光した観測光とに基づいて、物体OBJまでの距離を算出する(測距する)コンポーネントである。測距処理部50は、典型的には、信号処理プロセッサにより構成される。本開示では、測距処理部50は、時間−デジタルコンバータ(Time-to-Digital Converter:TDC)部52と、ヒストグラム作成部54と、距離演算部56とを含み構成されている。
TDC部52は、パルス光が出射された時刻から特定のSPADにより光を受光した時刻までの時間(すなわち、光の到来時間)をデジタル値に変換するコンポーネントである。本開示において、TDC部52は、時間計測部の一例である。TDC部52は、例えば、画素を構成する特定のSPAD群ごとに設けられたTDC回路522群から構成され、また、本開示では、TDC部52は、基準TDC回路521を更に含む(図2参照)。基準TDC回路521は、後述するように、信号間のスキューを算出するための基準値を算出するために用いられる。TDC部52の各TDC回路522は、図示されていないが、例えば、RSフリップフロップと、コースカウンタと、ファインカウンタとを含み構成される。概略的には、制御信号生成部14の制御信号に従って生成されたトリガパルスは、発光部30を駆動すると同時にRSフリップフロップをセットし、発光部30から出射されたパルス光が照射した物体OBJからの反射光を受光したSPADにより生成された電気信号パルスによりRSフリップフロップはリセットされ、これにより、TOFに応じたパルス幅を持った信号が生成される。生成された信号は、所定の時間分解能をそれぞれ有するコースカウンタとファインカウンタとによりカウントされて、デジタルコードとして出力される。コースカウンタ及びファインカウンタは、それぞれ、例えば、インバーターチェーンを含み構成される。
ヒストグラム作成部54は、TDC部52により出力される、サンプリング時間(ビン)ごとのサンプリング値の合計値(すなわち、画素に対応するSPAD群から出力されるフォトンの合計値)に基づいてヒストグラムを作成するコンポーネントである。ヒストグラム作成部54は、TDC回路522群に対応するヒストグラム作成回路542群を含み構成され得る。本開示では、ヒストグラム作成部54は、基準ヒストグラム作成回路541を更に含む(図2参照)。ヒストグラムは、例えば、図示しないメモリ上に、ある種のデータ構造ないしはテーブルとして保持される。ヒストグラムは、撮像フレームにおける読み出しラインごとに発光されるパルス光に基づいて、画素の数に対応する数だけ作成される。ヒストグラム作成部54は、作成したヒストグラムに基づくサンプル値を、動作モードに従って、補正処理部16及び距離演算部56のいずれかに出力する。或いは、ヒストグラム作成部54により作成されたヒストグラムは、補正処理部16及び距離演算部56により参照される。
距離演算部56は、作成された画素ごとのヒストグラムに基づいて、該ヒストグラム中のピーク値を検出し、ピーク値に対応する時間(すなわち、到来時間)から距離を算出するコンポーネントである。すなわち、発光部30の所定の発光タイミングで出射されたパルス光が物体OBJに照射したときの反射光が受光されたとすれば、該発光タイミングから受光タイミングまでの時間は、物体OBJまでの光の往復時間であるから、これにc/2(cは光速)を乗算することにより、画素ごとに物体OBJまでの距離を算出することができる。したがって、撮像フレームを構成する全ての画素に対して算出された距離により、距離画像を得ることができる。距離演算部56は、各撮像フレームにおける画素ごとに算出した距離に係るデータ(測距データ)を通信インタフェース部60に順次に出力する。本開示では、距離演算部56は、距離の算出に先立ち、作成されたヒストグラムの値に、補正処理部16により算出された補正値を重畳することにより、ヒストグラムを補正する。これにより、回路設計等に起因する、画素から読み出される電気信号パルスの遅速が補正されることになる。
通信インタフェース部60は、算出された測距データを外部のホストICに出力するためのインタフェース回路である。例えば、通信インタフェース部60は、MIPI(Mobile Industry Processor Interface)に準拠したインタフェース回路であるが、これに限られない。例えば、SPI(Serial Peripheral Interface)やLVDS、SLVS−EC等であっても良いし、これらのインタフェース回路のうちの幾つかを実装していても良い。
図2は、本技術の一実施形態における距離測定装置におけるスキュー補正処理を説明するためのブロックダイアグラムである。すなわち、同図は、図1に示した各種のコンポーネントのうち、本技術に特に関連するコンポーネントを中心にした構成を示している。
同図に示すように、画素を構成する個々の受光素子42は、典型的には、フォトンを検出するアバランシェフォトダイオード421と、電流源422と、インバータ423とを含み構成される。電流源422は、例えばP型MOSFETにより構成され、また、インバータ423は、例えばCMOSインバータにより構成される。図中、受光素子42は、1つのSPADからなるものとして示されているが、例えば、複数のSPAD群を、ここでいう受光素子42とみなしても良い。各受光素子42は、画素選択スイッチ43に接続される。
このような受光素子42において、制御部10の制御の下、アバランシェフォトダイオード422のアノード側にはアバランシェ増倍が発生する程度の負電圧Vbdが印加される。アバランシェフォトダイオード421へ1フォトンの入射があると、これにより発生した電子がアバランシェ増倍を起こして、大きな電流が流れる。これにより、アバランシェフォトダイオード421のカソードの電圧が一旦負側に向かって大きく振れて、カソード電圧と負電圧Vbd間の電圧がブレイクダウン電圧に達するところでアバランシェ増倍が停止する。このとき、低い電圧になっているアバランシェフォトダイオード421のカソードの電圧は、電流源422によって充電され、再び初期電圧に戻る。このような電圧波形は、インバータ423により整形され、1フォトンの到来時刻を基準点とするパルス状の電気信号パルスが生成される。そして、画素選択スイッチ43が閉(ON)状態にあると、電気信号パルスは信号本線SLを介して読み出される。
第1のマルチプレクサMUX1は、制御部10の制御の下、補正値の算出処理の間、複数の受光素子42のうちのいずれかと基準TDC回路521とを選択的に接続する。選択された受光素子42と基準TDC回路521とを接続する信号線は、基準信号線SL_REFとなる。第1のマルチプレクサMUX1は、補正値の算出処理後は、いずれも開状態となる。
第2のマルチプレクサMUX2は、第1のマルチプレクサと対となって動作する。すなわち、第2のマルチプレクサMUX2は、制御部10の制御の下、補正値の算出処理の間、複数の受光素子42のうちのいずれかの信号線に対応するヒストグラム作成回路542と補正処理部16とを選択的に接続する。第2のマルチプレクサMUX2は、補正値の算出処理後は、いずれも開(OFF)状態となる。
上述したように、TDC部52は、基準TDC回路521と、画素(すなわち、受光素子42)ごとに対応して設けられたTDC回路522とを含み構成される。各受光素子42と各TDC回路522とは、所定段数の遅延バッファBUF_DELAYを含む信号本線SLを介して接続される。本実施形態では、基準TDC回路521は、信号間のスキューの発生による測距精度の誤差を抑制するために用いられる。なお、図中、基準TDC回路521及びTDC回路522のそれぞれの信号本線SLの接続端をnREF、n1、及びn2と表記するものとする。
ヒストグラム作成部54もまた、基準ヒストグラム作成回路541と、画素ごとに対応して設けられたヒストグラム作成回路542とを含み構成される。各ヒストグラム作成回路542は、第2のマルチプレクサMUX2を介して、補正処理部16又は距離演算部56のいずれかに選択的に接続される。
補正処理部16は、基準ヒストグラム作成回路541により作成された基準ヒストグラムと、各ヒストグラム作成回路542により作成されたヒストグラムとに基づいてスキュー補正に関するデータを算出し、これを例えば図3に示すような補正テーブル300として保持する。具体的には、補正処理部16は、基準ヒストグラム作成回路541により作成された基準ヒストグラムに基づいて基準値を算出するとともに、各ヒストグラム作成回路542により作成されたヒストグラムに基づいてサンプル値を算出する。典型的には、基準値及びサンプル値は、各ヒストグラムのピーク値であり得る。続いて、補正処理部16は、算出した基準値と各サンプル値とに基づいて、画素の信号本線SLごとの補正値を算出する。補正処理部16は、測距中、補正テーブル300に保持している補正値を距離演算部56に出力する。測距中、距離演算部56は、補正処理部16から出力される各補正値を、対応する信号本線SLのヒストグラムの値に重畳する。これにより、信号SL間のスキューは補正され、したがって、距離演算部56での測距精度の低下を防止することができるようになる。なお、本開示では、距離演算部56が、対応する信号本線SLのヒストグラムの値に補正値を重畳する構成が説明されているが、これに限られず、補正処理部16が、補正値を重畳し、これを距離演算部56に出力する構成であっても構わない。また、本開示では、補正処理部16は、制御部10の一部として説明されているが、これに限られず、例えば測距処理部50の一部として構成されても良い。
図4は、本技術の一実施形態における距離測定装置における補正値算出処理を説明するためのフローチャートである。かかる処理は、所定のタイミングで、例えば、距離測定装置1の動作開始時に、実際の測距処理に先立って又は実際の測距処理において実行され得る。或いは、かかる処理は、例えば、距離測定装置1の動作中、1フレーム又は数フレームごとにその測距開始前や動作環境の変化(例えば温度等の変化)を検出した場合に、実行されても良い。
同図に示すように、距離測定装置1の制御部10は、まず、スキュー補正対象となる信号本線SLに対応する画素(すなわち、受光素子42)を1つ選択する(S401)。すなわち、制御部10は、選択された画素に対応する画素選択スイッチ43を閉状態にするとともに、第1のマルチプレクサMUX1及び第2のマルチプレクサMUX2を制御する。続いて、制御部10は、発光部30及び受光部40を駆動して、スキューに対する補正値の算出のための測距処理を開始する(S402)。
発光部30による光の出射に応答して受光部40の選択された画素から読み出された電気信号パルスは、基準TDC回路521及び対応するTDC回路522に入力され、それぞれ、デジタルコードに変換されて、変換されたデジタルコードのそれぞれは、基準ヒストグラム作成回路541及び対応するヒストグラム作成回路542に入力される。基準ヒストグラム作成回路541及び対応するヒストグラム作成回路542は、それぞれ、入力されたデジタルコードに基づいて、ヒストグラムを作成する(S403)。基準ヒストグラム作成回路541及び対応するヒストグラム作成回路542によって作成された各ヒストグラムは、補正処理部16に入力される。
補正処理部16は、入力された各ヒストグラムに基づいて、基準値及びサンプル値をそれぞれ算出する(S404)。すなわち、補正処理部16は、基準ヒストグラム作成回路541により作成された基準ヒストグラムに基づいて、基準値を算出するとともに、対応するヒストグラム作成回路542により作成されたヒストグラムに基づいて、サンプル値を算出する。補正処理部16は、算出した基準値及びサンプル値を補正テーブル300に記憶する。
続いて、補正処理部16は、算出した基準値とサンプル値とに基づいて、補正値を算出する(S405)。すなわち、補正処理部16は、基準値とサンプル値との差を算出し、これを補正値として決定する。補正処理部16は、算出した補正値を補正テーブル300に記憶する。
制御部10は、上記の一連の処理により、全ての画素の信号本線SLに対する補正値を算出したか否かを判断し(S406)、まだ補正値を算出していない画素の信号本線SLがあると判断する場合には(S406のNo)、S401の処理に戻る。
以上のようにして、各画素の信号本線SLに対して算出された補正値は、補正テーブル300に格納される。距離演算部56は、実際の測距処理時、各ヒストグラム作成回路542から出力されるヒストグラムに基づいてピーク値を算出し、該ピーク値に基づく距離情報に、補正処理部16により算出した補正値を重畳することにより、スキューが補正されることになる。
なお、距離測定装置1は、補正値の算出処理を、実際の測距処理に先立つ擬似的な測距処理において行っても良いし、或いは実際の測距処理において行って良い。実際の測距処理において補正値の算出処理を行う場合、距離測定装置1は、補正値が算出された後は、直ちに算出された補正値をヒストグラムに重畳することにより、誤差の影響を最小限に抑えることができる。
図5は、本技術の一実施形態における距離測定装置内の補正値算出処理の具体例を説明するためのタイミングチャートである。なお、図中、理解容易のため、右側には、対応するデジタルコードに基づくヒストグラムが示されている。
同図に示すように、制御部10の制御の下、駆動された発光部30は、所定のタイミングでパルス光を出射する。選択され有効化された受光素子42は、上述したように、フォトンを検出すると、これを電気信号パルスに変換して、信号本線SLを介して、TDC部52に出力する。
まず、受光素子42(1)に対する信号本線SL(1)の補正値を算出する場合を考える。制御部10は、受光素子42(1)からの出力が補正処理部16に入力されるように、第1のマルチプレクサMUX1及び第2のマルチプレクサMUX2を制御する。この状態で、パルス光の出射に応じて受光素子42(1)は電気信号パルスを生成し、生成された電気信号パルスは、基準信号線SLを介して、基準TDC回路521に入力されるとともに、信号本線SL(1)を介して、TDC回路522(1)に入力される。
基準TDC回路521は、入力された電気信号パルスを所定の時間分解能を持つカウンタによりカウントしていき、所定の時間範囲内でカウントした値に基づいて、所定ビット数のデジタルコードを生成する。一例として、基準TDC回路521は、デジタルコードとして、「10」、「10」、「10」及び「11」を出力したものとする(理解を容易にするため、ここでは十進数に換算した値を示している。)。基準TDC回路521は、生成したデジタルコードを基準ヒストグラム作成回路541に出力する。
基準ヒストグラム作成回路541は、基準TDC回路521から出力されるデジタルコードに基づいて、基準ヒストグラムを作成する。上述の例によれば、デジタルコード「10」が3回(75%)で、「11」が1回(25%)であるため、基準ヒストグラム作成回路541は、図示のような基準ヒストグラムを作成する。基準ヒストグラム作成回路541は、作成した基準ヒストグラムを補正処理部16に出力する。
補正処理部16は、基準ヒストグラム作成回路541により作成された基準ヒストグラムに基づいて、基準値を算出する。上述の例によれば、補正処理部16は、基準値として、「10.25」(=10×0.75+11×0.25)を算出し、これをメモリ上の補正テーブル300に格納する。
一方、TDC回路522(1)は、入力された電気信号パルスを所定の時間分解能を持つカウンタによりカウントしていき、所定の時間範囲内でカウントした値に基づいて、所定ビット数のデジタルコードを生成する。ここでは、例えば、TDC回路522(1)は、デジタルコードとして、「10」、「11」、「10」及び「11」を出力したものとする。TDC回路522(1)は、生成したデジタルコードをヒストグラム作成回路542(1)に出力する。
ヒストグラム作成回路542(1)は、TDC回路522(1)から出力されるデジタルコードに基づいて、ヒストグラムを作成する。上述の例によれば、デジタルコード「10」が2回(50%)で、「11」が2回(50%)であるため、ヒストグラム作成回路542(1)は、図示のようなヒストグラムを作成する。ヒストグラム作成回路542(1)は、作成したヒストグラムを補正処理部16に出力する。
補正処理部16は、ヒストグラム作成回路542(1)により作成されたヒストグラムに基づいて、信号本線SL(1)のサンプル値を算出する。上述の例によれば、補正処理部16は、信号本線SL(1)のサンプル値として、「10.5」(=10×0.5+11×0.5)を算出し、これをメモリ上の補正テーブル300に格納する。
さらに、補正処理部16は、基準値と受光素子42(1)に対する信号本線SL(1)のサンプル値とに基づいてスキューを算出することにより、補正値を決定する。スキューは、基準値と受光素子42(1)に対するサンプル値との差として現れ、したがって、補正値は、スキューを相殺するために、そのものの値が用いられる。上述の例によれば、補正処理部16は、スキューとして「0.25」(=10.5−10.25)を算出し、これを補正値として補正テーブル300に格納する。
次に、制御部10は、受光素子42(2)からの出力が補正処理部16に供給されるように、第1のマルチプレクサMUX1及び第2のマルチプレクサMUX2を制御する。この状態で、パルス光の出射に応じて受光素子42(2)において電気信号パルスが生成され、生成された電気信号パルスは、基準信号線SLを介して、基準TDC回路521入力されるとともに、信号本線SL(2)を介して、TDC回路522(2)に入力される。
同様にして、基準TDC回路521は、所定ビット数のデジタルコードを生成し、これを補正処理部16に出力する。一例として、基準TDC回路521は、デジタルコードとして、「10」、「10」、「10」及び「11」を出力したものとする。基準TDC回路521は、生成したデジタルコードを基準ヒストグラム作成回路541に出力する。基準ヒストグラム作成回路541は、基準TDC回路521から出力されるデジタルコードに基づいて、基準ヒストグラムを作成する。基準ヒストグラム作成回路541は、作成したヒストグラムを補正処理部16に出力する。
補正処理部16は、基準ヒストグラム作成回路541により作成されたヒストグラムに基づいて、基準値を算出する。上述の例によれば、補正処理部16は、基準値として、「10.25」(=10×0.75+11×0.25)を算出し、これをメモリ上の補正テーブル300に記憶する。
また、同様にして、TDC回路522(2)は、所定ビット数のデジタルコードとして「11」、「11」、「11」及び「10」を生成し、ヒストグラム作成回路542(2)は、生成されたデジタルコードに基づいてヒストグラムを作成し、これを補正処理部16に出力する。上述の例によれば、補正処理部16は、信号本線SL(2)に対するデジタルコードとして、「10.75」(=10×0.25+11×0.75)を算出し、これをメモリ上の補正テーブル300に格納する。これにより、補正処理部16は、スキューとして0.5(=10.75−10.25)を算出し、これを補正値として補正テーブル300に記憶する。
以上のようにして、距離測定装置1は、各画素の信号本線SLに対する補正値を格納した補正テーブル300を作成する。したがって、距離演算部56は、実際の測距中、各ヒストグラム作成部54から出力されるヒストグラムの値に対して、補正テーブル300から読み出される補正値を重畳した後、所定の距離演算を施す。これにより、画素の信号間のスキューが互いに相殺され、スキューに起因する測距精度の低下を抑制することができるようになる。
[第2の実施形態]
本実施形態では、TDCデジタルコードに基づいて基準ヒストグラムを作成することに代えて、平均値を算出し、算出した平均値に基づいて補正値を算出する距離測定装置及びスキュー補正方法が開示される。
本実施形態では、TDCデジタルコードに基づいて基準ヒストグラムを作成することに代えて、平均値を算出し、算出した平均値に基づいて補正値を算出する距離測定装置及びスキュー補正方法が開示される。
図6は、本技術の一実施形態における距離測定装置の構成の一例を示すブロックダイアグラムである。すなわち、同図に示す距離測定装置1は、基準ヒストグラム作成回路541に代えて、平均値算出部551を含み構成されている点で、図2に示した距離測定装置1と異なっている。
同図に示すように、本実施形態では、第2のマルチプレクサMUX2は、TDC部52とヒストグラム作成部54との間に設けられている。平均値算出部551は、基準TDC回路521からの出力と、第2のマルチプレクサMUX2を介した各TDC回路522からの出力とを受け取るように設けられている。平均値算出部551は、所定の時間範囲内にTDC部52から入力されたデジタルコードに基づいて、その平均値をそれぞれ算出し、これを補正処理部16に出力する。
より具体的には、平均値算出部551は、所定の時間範囲内に基準TDC回路521から順次に出力されるデジタルコードを累積的に加算した値をデジタルコードの累積総数で割ることによりその平均値を算出し、これを基準値として補正処理部16に出力する。同様に、平均値算出部551は、所定の時間範囲内に選択された画素に対応するTDC回路522から順次に出力されるデジタルコードを累積的に加算した値を累積したデジタルコードの累積総数で割ることによりその平均値を算出し、これをサンプル値として補正処理部16に出力する。補正処理部16については、上記の実施形態と同様であるため、説明を省略する。
以上のように、本実施形態によれば、第1の実施形態と同様の作用乃至は利点をそうし得る。すなわち、本実施形態によれば、実際の測距中、各ヒストグラム作成部54により作成されるヒストグラムの値に対して、補正値が重畳されるので、画素の信号間のスキューが互いに相殺され、スキューに起因する測距精度の低下を抑制することができるようになる。
[第3の実施形態]
本実施形態では、各受光素子42から基準TDC回路521への配線距離の長短を考慮して、複数の基準TDC回路521を設けた距離測定装置及びスキュー補正方法が開示される。かかる距離測定装置及びスキュー補正方法では、特定のTDC回路522に対する信号線を共通にして、異なる基準TDC回路521間のスキュー差を利用することにより、各信号線のスキューが補正される。
本実施形態では、各受光素子42から基準TDC回路521への配線距離の長短を考慮して、複数の基準TDC回路521を設けた距離測定装置及びスキュー補正方法が開示される。かかる距離測定装置及びスキュー補正方法では、特定のTDC回路522に対する信号線を共通にして、異なる基準TDC回路521間のスキュー差を利用することにより、各信号線のスキューが補正される。
図7及び8は、本技術の一実施形態における距離測定装置の構成の一例を示すブロックダイアグラムである。これらの図に示す距離測定装置1では、例えば、隣接する所定数の受光素子42群ごと(本例では4つの受光素子42ごと)に1つの基準TDC回路が設けられている。なお、図中、受光素子42に接続された画素選択スイッチ43は、簡略化のため、省略されている。また、各コンポーネントの機能ないしは構成は、上述した実施形態のものと同様であるので、その説明を省略する。
図7を参照して、まず、制御部10は、基準TDC回路521(1)を基準に、受光素子42(1)〜(4)のそれぞれが順次に選択されるように、第1のマルチプレクサMUX1及び第2のマルチプレクサMUX2を制御する。これにより、補正処理部16は、上記実施形態と同様に、基準TDC回路521(1)による基準値(1)及びTDC回路522(1)〜(4)のそれぞれによるサンプル値を取得し、TDC回路522(1)〜(4)のそれぞれへの信号線に対する補正値を算出する。
次に、図8を参照して、制御部10は、基準TDC回路521(2)を基準に、受光素子42(4)〜(8)のそれぞれが順次に選択されるように、第1のマルチプレクサMUX1及び第2のマルチプレクサMUX2を制御する。ここで、受光素子42(4)は、基準TDC回路521(2)に隣接しているため、その信号本線SLが、再度、選択されることに留意されたい。これにより、補正処理部16は、同様に、基準TDC回路521(2)による基準値(2)及びTDC回路522(4)〜(8)のそれぞれによるサンプル値を取得する。
次に、補正処理部16は、TDC回路522(5)〜(8)のそれぞれへの信号本線SL(5)〜(8)に対する補正値を、基準TDC回路521(1)の基準値と基準TDC回路521(2)との基準値の間の差分を用いて、算出する。すなわち、基準TDC回路521(1)を基準にしたTDC回路522(1)〜(4)のスキュー差SkewREFTDC1は、
SkewREFTDC1=サンプル値−基準値(1) …式(1)
であり、基準TDC回路521(2)を基準にしたTDC回路522(4)〜(8)のスキュー差SkewREFTDC2は、
SkewREFTDC2=サンプル値−基準値(2) …式(2)
である。ここで、受光素子42(4)の信号線を共通にした場合、基準値間の差分δは、
δ=−SkewREFTDC2+SkewREFTDC1
=基準値(2)−基準値(1) …式(3)
となる。したがって、TDC回路522(5)〜(8)のそれぞれへの信号本線SL(5)〜(8)に対する補正値は、TDC回路522(4)への信号本線SL(4)を共通にして、サンプル値から基準値間の差分δを差し引くことで、算出される。
SkewREFTDC1=サンプル値−基準値(1) …式(1)
であり、基準TDC回路521(2)を基準にしたTDC回路522(4)〜(8)のスキュー差SkewREFTDC2は、
SkewREFTDC2=サンプル値−基準値(2) …式(2)
である。ここで、受光素子42(4)の信号線を共通にした場合、基準値間の差分δは、
δ=−SkewREFTDC2+SkewREFTDC1
=基準値(2)−基準値(1) …式(3)
となる。したがって、TDC回路522(5)〜(8)のそれぞれへの信号本線SL(5)〜(8)に対する補正値は、TDC回路522(4)への信号本線SL(4)を共通にして、サンプル値から基準値間の差分δを差し引くことで、算出される。
例えば、図9に示されるように、基準TDC回路521(1)を基準にして、基準値(1)及びTDC回路522(1)〜(4)のそれぞれによるサンプル値が取得され、また、基準TDC回路521(2)を基準にして、基準値(2)及びTDC回路522(4)〜(8)のそれぞれによるサンプル値が取得されたものとする。
したがって、TDC回路522(1)〜(4)のそれぞれの信号線に対する補正値は、基準値(1)とサンプル値とのスキュー差として算出される。
一方、TDC回路522(5)〜(8)のそれぞれの信号線に対する補正値は、基準値(1)と基準値(2)との間の差分「0.20」が算出され、したがって、基準値(2)とサンプル値とのスキュー差に、該基準値間の差分「0.20」を足し合わせた値となる。
以上のように、本実施形態によれば、上記の実施形態と同様の作用効果乃至は利点をそうし得る。また、本実施形態によれば各受光素子42から基準TDC回路521への配線距離の長短によるスキュー差を考慮しつつ、各補正値を算出することができる。とりわけ、特定のTDC回路に対する信号線を共通にして、異なる基準TDC回路間のスキュー差を利用することにより、1つの基準TDC回路による基準値に基づいて補正値を算出することができるようになる。
[第4の実施形態]
本実施形態では、基準TDC回路521を設けずに、特定のTDC回路522と他のTDC回路522との間のスキュー差に基づいて、補正値を算出する距離測定装置及びスキュー補正方法が開示される。かかる距離測定装置及びスキュー補正方法では、テスト制御信号により、各受光素子(画素)がフォトンを受光した状態を擬似的に作り出して、TDC回路522の信号線ごとのスキュー差を取得していき、該スキュー差から補正値が算出される。
本実施形態では、基準TDC回路521を設けずに、特定のTDC回路522と他のTDC回路522との間のスキュー差に基づいて、補正値を算出する距離測定装置及びスキュー補正方法が開示される。かかる距離測定装置及びスキュー補正方法では、テスト制御信号により、各受光素子(画素)がフォトンを受光した状態を擬似的に作り出して、TDC回路522の信号線ごとのスキュー差を取得していき、該スキュー差から補正値が算出される。
図10は、本技術の一実施形態における距離測定装置の構成の一例を示すブロックダイアグラムである。同図に示す距離測定装置1には、受光素子42とTDC回路522との間の信号本線SLに、上記した第1のマルチプレクサMUX1に代えて、テスト用スイッチ70が設けられている。テスト用スイッチ70は、制御部10の制御の下、開閉される。したがって、各受光素子42のアバランシェフォトダイオード421のアノード側に負電圧Vbdが印加された状態において、各テスト用スイッチ70が同時に開状態から閉状態に切り替えられると、スイッチ70に接続されている電位がGNDに急降下するため、アバランシェフォトダイオード421にフォトンが入射した状態がシミュレートされる。つまり、テスト用スイッチ70は、その閉動作によって、各TDC回路522に同一のタイミングで信号を入力するために用いられる。制御部10は、ヒストグラム作成回路542によりヒストグラムが作成されるよう、このような制御を所定回数繰り返す。
上述したように、各TDC回路522は、入力された電気信号パルスに従ってデジタルコードを生成し、これを対応するヒストグラム作成回路542に出力する。各ヒストグラム作成回路542は、入力されたデジタルコードに従ってヒストグラムを作成し、これを補正処理部16に出力する。補正処理部16は、各ヒストグラム作成回路542から受け取ったヒストグラムに基づいて、上述したように、補正値を算出し、補正テーブル300に記憶する。したがって、上記実施形態と同様に、距離演算部56は、実際の測距中、各ヒストグラム作成部54から出力されるヒストグラムの値から算出された距離情報に対して、補正テーブル300から読み出される補正値を重畳した後、所定の距離演算を施す。これにより、画素の信号間のスキューが互いに相殺され、スキューに起因する測距精度の低下を抑制することができるようになる。
上記各実施形態は、本技術を説明するための例示であり、本技術をこれらの実施形態にのみ限定する趣旨ではない。本技術は、その要旨を逸脱しない限り、さまざまな形態で実施することができる。
例えば、本明細書に開示される方法においては、その結果に矛盾が生じない限り、ステップ、動作又は機能を並行して又は異なる順に実施しても良い。説明されたステップ、動作及び機能は、単なる例として提供されており、ステップ、動作及び機能のうちのいくつかは、技術の要旨を逸脱しない範囲で、省略でき、また、互いに結合させることで一つのものとしてもよく、また、他のステップ、動作又は機能を追加してもよい。
また、上記実施形態では、本技術を直接TOF型測距センサに適用した例が説明されたが、間接TOF型センサにも同様に適用し得る。すなわち、間接TOF型センサでは、各受光素子から電気信号パルスを読み出すために用いられるクロック信号の信号線の長短により信号間のスキュー(クロックのずれ)が生じるおそれがあるところ、本技術を適用することにより、スキュー差を補正することができるようになる。とりわけ、間接TOF型センサにおいては、従前、上記スキューの解消のために、高精度なDAC回路が必要となり、回路面積及び消費電力が増大するという問題があったが、本技術を適用することにより、そのようなDAC回路が不要となり、したがって、回路面積及び消費電力を抑制することができるようになる。
また、本明細書では、さまざまな実施形態が開示されているが、一の実施形態における特定のフィーチャ(技術的事項)を、適宜改良しながら、他の実施形態に追加し、又は該他の実施形態における特定のフィーチャと置換することができ、そのような形態も本技術の要旨に含まれる。
なお、本技術は、以下のような構成も採用することができる。
(1)
複数の画素を有する受光部と、
前記複数の画素のうちの特定の画素に接続された基準信号線に接続され、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測する基準時間計測部と、
前記特定の画素に接続された信号本線に接続され、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する時間計測部と、
前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶する補正処理部と、を備え、
記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正するように構成された、
距離測定装置。
(2)
前記基準時間計測部により計測された複数の前記基準時間値に基づいて基準ヒストグラムを作成する基準ヒストグラム作成回路と、
前記時間計測部により計測された複数の前記所定の時間値に基づいてヒストグラムを作成するヒストグラム作成回路と、を更に備え、
前記補正処理部は、作成された前記基準ヒストグラムと前記ヒストグラムとに基づいて、前記補正値を算出する、
前記(1)に記載の距離測定装置。
(3)
前記補正処理部は、前記基準ヒストグラムに基づく基準値と前記ヒストグラムに基づく所定のサンプル値との差に基づいて前記補正値を決定する、前記(1)又は(2)に記載の距離測定装置。
(4)
前記距離測定装置は、前記補正値を、前記第2の発光制御に応答して作成されるヒストグラムの値に重畳することにより前記信号の遅速を補正するように構成される、前記(1)乃至(3)のいずれかに記載の距離測定装置。
(5)
入力される複数の時間値に基づく平均値を算出する平均値算出部を更に備え、
前記平均値算出部は、
前記基準時間計測部により計測された複数の前記基準時間値に基づいて算出される平均値を基準値として出力し、
前記時間計測部により計測された複数の前記所定の時間値に基づいて算出される平均値をサンプル値として出力する。
前記(1)乃至(3)のいずれかに記載の距離測定装置。
(6)
前記複数の画素のいずれかを前記特定の画素として前記基準時間計測部に選択的に接続するマルチプレクサを更に備える、前記(1)乃至(5)のいずれかに記載の距離測定装置。
(7)
複数の画素を有する受光部と、
前記複数の画素にそれぞれ接続された基準信号線に接続され、前記複数の画素のそれぞれについて、発光部に対する第1の発光制御による第1の発光タイミングから前記画素における受光タイミングまでの基準時間値を計測する複数の基準時間計測部と、
前記複数の画素にそれぞれ接続された信号本線に接続され、前記複数の画素のそれぞれについて、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する、複数の時間計測部と、
前記基準時間値と各前記所定の時間値とに基づいて、前記信号本線に対する補正値をそれぞれ算出し記憶する補正処理部と、を備え、
記憶された前記各補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記複数の画素から前記信号本線を介して出力される信号の遅速をそれぞれ補正するように構成された、
距離測定装置。
(8)
前記複数の基準時間計測部のそれぞれは、隣接する所定の画素群ごとに関連付けられて設けられる、前記(7)に記載の距離測定装置。
(9)
前記補正処理部は、前記所定の画素群ごとに関連付けられた前記基準時間計測部により計測された前記基準時間値に基づいて、前記所定の画素群のそれぞれについて、前記補正値を算出する、前記(7)又は(8)に記載の距離測定装置。
(10)
前記補正処理部は、前記複数の基準時間計測部のうちの第1の基準時間計測部により計測された第1の基準時間値と前記複数の基準時間計測部のうちの第2の基準時間計測部により計測された第2の基準時間値との差分値を算出し、前記差分値に基づいて、前記補正値を算出する、前記(7)乃至(9)のいずれかに記載の距離測定装置。
(11)
前記補正処理部は、前記第2の基準時間値と前記所定の時間値との差に、前記差分値を加算することにより、前記補正値を算出する、前記(10)に記載の距離測定装置。
(12)
前記補正値の算出は、測距中の1又は2以上のフレームごとに行われるように構成された、前記(1)乃至(11)のいずれかに記載の距離測定装置。
(13)
距離測定装置における信号線間のスキューを補正するスキュー補正方法であって、
受光部における複数の画素のうちの特定の画素に接続された基準信号線を介して、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測することと、
前記特定の画素に接続された信号本線を介して、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測することと、
前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶することと、
記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正することと、を含む、
スキュー補正方法。
(1)
複数の画素を有する受光部と、
前記複数の画素のうちの特定の画素に接続された基準信号線に接続され、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測する基準時間計測部と、
前記特定の画素に接続された信号本線に接続され、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する時間計測部と、
前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶する補正処理部と、を備え、
記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正するように構成された、
距離測定装置。
(2)
前記基準時間計測部により計測された複数の前記基準時間値に基づいて基準ヒストグラムを作成する基準ヒストグラム作成回路と、
前記時間計測部により計測された複数の前記所定の時間値に基づいてヒストグラムを作成するヒストグラム作成回路と、を更に備え、
前記補正処理部は、作成された前記基準ヒストグラムと前記ヒストグラムとに基づいて、前記補正値を算出する、
前記(1)に記載の距離測定装置。
(3)
前記補正処理部は、前記基準ヒストグラムに基づく基準値と前記ヒストグラムに基づく所定のサンプル値との差に基づいて前記補正値を決定する、前記(1)又は(2)に記載の距離測定装置。
(4)
前記距離測定装置は、前記補正値を、前記第2の発光制御に応答して作成されるヒストグラムの値に重畳することにより前記信号の遅速を補正するように構成される、前記(1)乃至(3)のいずれかに記載の距離測定装置。
(5)
入力される複数の時間値に基づく平均値を算出する平均値算出部を更に備え、
前記平均値算出部は、
前記基準時間計測部により計測された複数の前記基準時間値に基づいて算出される平均値を基準値として出力し、
前記時間計測部により計測された複数の前記所定の時間値に基づいて算出される平均値をサンプル値として出力する。
前記(1)乃至(3)のいずれかに記載の距離測定装置。
(6)
前記複数の画素のいずれかを前記特定の画素として前記基準時間計測部に選択的に接続するマルチプレクサを更に備える、前記(1)乃至(5)のいずれかに記載の距離測定装置。
(7)
複数の画素を有する受光部と、
前記複数の画素にそれぞれ接続された基準信号線に接続され、前記複数の画素のそれぞれについて、発光部に対する第1の発光制御による第1の発光タイミングから前記画素における受光タイミングまでの基準時間値を計測する複数の基準時間計測部と、
前記複数の画素にそれぞれ接続された信号本線に接続され、前記複数の画素のそれぞれについて、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する、複数の時間計測部と、
前記基準時間値と各前記所定の時間値とに基づいて、前記信号本線に対する補正値をそれぞれ算出し記憶する補正処理部と、を備え、
記憶された前記各補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記複数の画素から前記信号本線を介して出力される信号の遅速をそれぞれ補正するように構成された、
距離測定装置。
(8)
前記複数の基準時間計測部のそれぞれは、隣接する所定の画素群ごとに関連付けられて設けられる、前記(7)に記載の距離測定装置。
(9)
前記補正処理部は、前記所定の画素群ごとに関連付けられた前記基準時間計測部により計測された前記基準時間値に基づいて、前記所定の画素群のそれぞれについて、前記補正値を算出する、前記(7)又は(8)に記載の距離測定装置。
(10)
前記補正処理部は、前記複数の基準時間計測部のうちの第1の基準時間計測部により計測された第1の基準時間値と前記複数の基準時間計測部のうちの第2の基準時間計測部により計測された第2の基準時間値との差分値を算出し、前記差分値に基づいて、前記補正値を算出する、前記(7)乃至(9)のいずれかに記載の距離測定装置。
(11)
前記補正処理部は、前記第2の基準時間値と前記所定の時間値との差に、前記差分値を加算することにより、前記補正値を算出する、前記(10)に記載の距離測定装置。
(12)
前記補正値の算出は、測距中の1又は2以上のフレームごとに行われるように構成された、前記(1)乃至(11)のいずれかに記載の距離測定装置。
(13)
距離測定装置における信号線間のスキューを補正するスキュー補正方法であって、
受光部における複数の画素のうちの特定の画素に接続された基準信号線を介して、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測することと、
前記特定の画素に接続された信号本線を介して、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測することと、
前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶することと、
記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正することと、を含む、
スキュー補正方法。
1…距離測定装置
10…制御部
12…クロック生成部
14…制御信号生成部
16…補正処理部
20…ドライバ部
30…発光部
40…受光部
42…受光素子(SPAD)
421…アバランシェフォトダイオード
422…電流源
423…インバータ
43…画素選択スイッチ
50…測距処理部
52…時間−デジタルコンバータ(TDC)部
521…基準TDC回路
522…TDC回路
54…ヒストグラム作成部
541…基準ヒストグラム作成回路
542…ヒストグラム作成回路
56…距離演算部
MUX1,MUX2…マルチプレクサ
SL…信号線
BUF_DELAY…遅延バッファ
60…通信インタフェース部
70…テスト用スイッチ
10…制御部
12…クロック生成部
14…制御信号生成部
16…補正処理部
20…ドライバ部
30…発光部
40…受光部
42…受光素子(SPAD)
421…アバランシェフォトダイオード
422…電流源
423…インバータ
43…画素選択スイッチ
50…測距処理部
52…時間−デジタルコンバータ(TDC)部
521…基準TDC回路
522…TDC回路
54…ヒストグラム作成部
541…基準ヒストグラム作成回路
542…ヒストグラム作成回路
56…距離演算部
MUX1,MUX2…マルチプレクサ
SL…信号線
BUF_DELAY…遅延バッファ
60…通信インタフェース部
70…テスト用スイッチ
Claims (13)
- 複数の画素を有する受光部と、
前記複数の画素のうちの特定の画素に接続された基準信号線に接続され、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測する基準時間計測部と、
前記特定の画素に接続された信号本線に接続され、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する時間計測部と、
前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶する補正処理部と、を備え、
記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正するように構成された、
距離測定装置。 - 前記基準時間計測部により計測された複数の前記基準時間値に基づいて基準ヒストグラムを作成する基準ヒストグラム作成回路と、
前記時間計測部により計測された複数の前記所定の時間値に基づいてヒストグラムを作成するヒストグラム作成回路と、を更に備え、
前記補正処理部は、作成された前記基準ヒストグラムと前記ヒストグラムとに基づいて、前記補正値を算出する、
請求項1に記載の距離測定装置。 - 前記補正処理部は、前記基準ヒストグラムに基づく基準値と前記ヒストグラムに基づく所定のサンプル値との差に基づいて前記補正値を決定する、請求項2に記載の距離測定装置。
- 前記距離測定装置は、前記補正値を、前記第2の発光制御に応答して作成されるヒストグラムの値に重畳することにより前記信号の遅速を補正するように構成される、請求項3に記載の距離測定装置。
- 入力される複数の時間値に基づく平均値を算出する平均値算出部を更に備え、
前記平均値算出部は、
前記基準時間計測部により計測された複数の前記基準時間値に基づいて算出される平均値を基準値として出力し、
前記時間計測部により計測された複数の前記所定の時間値に基づいて算出される平均値をサンプル値として出力する。
請求項3に記載の距離測定装置。 - 前記複数の画素のいずれかを前記特定の画素として前記基準時間計測部に選択的に接続するマルチプレクサを更に備える、請求項1記載の距離測定装置。
- 前記補正値の算出は、測距中の1又は2以上のフレームごとに行われるように構成された、請求項1に記載の距離測定装置。
- 複数の画素を有する受光部と、
前記複数の画素にそれぞれ接続された基準信号線に接続され、前記複数の画素のそれぞれについて、発光部に対する第1の発光制御による第1の発光タイミングから前記画素における受光タイミングまでの基準時間値を計測する複数の基準時間計測部と、
前記複数の画素にそれぞれ接続された信号本線に接続され、前記複数の画素のそれぞれについて、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測する、複数の時間計測部と、
前記基準時間値と各前記所定の時間値とに基づいて、前記信号本線に対する補正値をそれぞれ算出し記憶する補正処理部と、を備え、
記憶された前記各補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記複数の画素から前記信号本線を介して出力される信号の遅速をそれぞれ補正するように構成された、
距離測定装置。 - 前記複数の基準時間計測部のそれぞれは、隣接する所定の画素群ごとに関連付けられて設けられる、請求項8に記載の距離測定装置。
- 前記補正処理部は、前記所定の画素群ごとに関連付けられた前記基準時間計測部により計測された前記基準時間値に基づいて、前記所定の画素群のそれぞれについて、前記補正値を算出する、請求項9に記載の距離測定装置。
- 前記補正処理部は、前記複数の基準時間計測部のうちの第1の基準時間計測部により計測された第1の基準時間値と前記複数の基準時間計測部のうちの第2の基準時間計測部により計測された第2の基準時間値との差分値を算出し、前記差分値に基づいて、前記補正値を算出する、請求項10に記載の距離測定装置。
- 前記補正処理部は、前記第2の基準時間値と前記所定の時間値との差に、前記差分値を加算することにより、前記補正値を算出する、請求項11に記載の距離測定装置。
- 距離測定装置における信号線間のスキューを補正するスキュー補正方法であって、
受光部における複数の画素のうちの特定の画素に接続された基準信号線を介して、発光部に対する第1の発光制御による第1の発光タイミングから前記特定の画素における受光タイミングまでの基準時間値を計測することと、
前記特定の画素に接続された信号本線を介して、前記第1の発光タイミングから前記受光タイミングまでの所定の時間値を計測することと、
前記基準時間値と前記所定の時間値とに基づいて、前記信号本線に対する補正値を算出し記憶することと、
記憶された前記補正値に基づいて、前記発光部に対する第2の発光制御に応答して前記特定の画素から前記信号本線を介して出力される信号の遅速を補正することと、を含む、
スキュー補正方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019047654A JP2020148682A (ja) | 2019-03-14 | 2019-03-14 | 距離測定装置及びスキュー補正方法 |
PCT/JP2020/008368 WO2020184224A1 (ja) | 2019-03-14 | 2020-02-28 | 距離測定装置及びスキュー補正方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019047654A JP2020148682A (ja) | 2019-03-14 | 2019-03-14 | 距離測定装置及びスキュー補正方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020148682A true JP2020148682A (ja) | 2020-09-17 |
Family
ID=72427880
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019047654A Pending JP2020148682A (ja) | 2019-03-14 | 2019-03-14 | 距離測定装置及びスキュー補正方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2020148682A (ja) |
WO (1) | WO2020184224A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022097522A1 (ja) * | 2020-11-05 | 2022-05-12 | ソニーセミコンダクタソリューションズ株式会社 | 測距センサ、および、測距システム |
WO2022176419A1 (ja) * | 2021-02-18 | 2022-08-25 | ソニーセミコンダクタソリューションズ株式会社 | 信号処理装置および信号処理方法、並びにプログラム |
WO2022181081A1 (ja) * | 2021-02-25 | 2022-09-01 | ソニーセミコンダクタソリューションズ株式会社 | 光検出装置および光検出システム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000137077A (ja) * | 1998-11-02 | 2000-05-16 | Nec Corp | パルスレーザ測距装置 |
JP6501403B2 (ja) * | 2014-02-07 | 2019-04-17 | 国立大学法人静岡大学 | イメージセンサ |
JP6477083B2 (ja) * | 2015-03-19 | 2019-03-06 | 株式会社豊田中央研究所 | 光学的測距装置 |
JP6609980B2 (ja) * | 2015-04-30 | 2019-11-27 | 株式会社デンソー | 光飛行時間測定装置及び光学的測距装置 |
JP2017224879A (ja) * | 2016-06-13 | 2017-12-21 | 株式会社リコー | 回路装置、距離測定装置、移動体装置及び距離測定方法 |
TWI828695B (zh) * | 2018-07-27 | 2024-01-11 | 日商索尼半導體解決方案公司 | 受光裝置及測距裝置 |
-
2019
- 2019-03-14 JP JP2019047654A patent/JP2020148682A/ja active Pending
-
2020
- 2020-02-28 WO PCT/JP2020/008368 patent/WO2020184224A1/ja active Application Filing
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022097522A1 (ja) * | 2020-11-05 | 2022-05-12 | ソニーセミコンダクタソリューションズ株式会社 | 測距センサ、および、測距システム |
WO2022176419A1 (ja) * | 2021-02-18 | 2022-08-25 | ソニーセミコンダクタソリューションズ株式会社 | 信号処理装置および信号処理方法、並びにプログラム |
DE112022001111T5 (de) | 2021-02-18 | 2024-02-22 | Sony Semiconductor Solutions Corporation | Signalverarbeitungseinrichtung, signalverarbeitungsverfahren und programm |
WO2022181081A1 (ja) * | 2021-02-25 | 2022-09-01 | ソニーセミコンダクタソリューションズ株式会社 | 光検出装置および光検出システム |
Also Published As
Publication number | Publication date |
---|---|
WO2020184224A1 (ja) | 2020-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6443132B2 (ja) | 演算装置 | |
Niclass et al. | A 0.18-$\mu $ m CMOS SoC for a 100-m-Range 10-Frame/s 200$\,\times\, $96-Pixel Time-of-Flight Depth Sensor | |
JP6609980B2 (ja) | 光飛行時間測定装置及び光学的測距装置 | |
JP2020148682A (ja) | 距離測定装置及びスキュー補正方法 | |
EP3370078B1 (en) | Range and parameter extraction using processed histograms generated from a time of flight sensor - crosstalk correction | |
EP3370079B1 (en) | Range and parameter extraction using processed histograms generated from a time of flight sensor - pulse detection | |
JP6481405B2 (ja) | 演算装置 | |
WO2018211762A1 (ja) | 光センサ、電子機器、演算装置、及び光センサと検知対象物との距離を測定する方法 | |
WO2020145035A1 (ja) | 距離測定装置及び距離測定方法 | |
US11828850B2 (en) | 3D image sensor and related 3D image sensing module and hand-held device | |
KR20130029229A (ko) | 3차원 이미지 센서의 단위 픽셀 | |
EP3370080A1 (en) | Range and parameter extraction using processed histograms generated from a time of flight sensor - parameter extraction | |
CN112114323A (zh) | 飞时测距装置以及飞时测距方法 | |
WO2022085555A1 (ja) | 光電変換装置、光電変換システム | |
US20220003876A1 (en) | Distance image obtaining method and distance detection device | |
EP3993407A1 (en) | Distance image measuring device | |
JP6735515B2 (ja) | 固体撮像装置 | |
WO2019050024A1 (ja) | 距離測定方法および距離測定装置 | |
JP7427417B2 (ja) | 光電変換装置、光電変換システム、移動体、光電変換装置の検査方法 | |
EP3370086A1 (en) | Range and parameter extraction using processed histograms generated from a time of flight sensor - pile up correction | |
JP2021139836A (ja) | 測距センサ及び距離測定方法 | |
US20220011437A1 (en) | Distance measuring device, distance measuring system, distance measuring method, and non-transitory storage medium | |
JP2021197284A (ja) | 光源駆動装置、光源装置および測距装置 | |
CN111726548B (zh) | 图像传感器的像素和图像传感器 | |
CN110611755B (zh) | 图像感测系统及其多功能图像传感器 |