JP2021124307A - 位相差算出装置、位相差算出方法およびプログラム - Google Patents

位相差算出装置、位相差算出方法およびプログラム Download PDF

Info

Publication number
JP2021124307A
JP2021124307A JP2020016075A JP2020016075A JP2021124307A JP 2021124307 A JP2021124307 A JP 2021124307A JP 2020016075 A JP2020016075 A JP 2020016075A JP 2020016075 A JP2020016075 A JP 2020016075A JP 2021124307 A JP2021124307 A JP 2021124307A
Authority
JP
Japan
Prior art keywords
light
amount
time window
time
received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020016075A
Other languages
English (en)
Other versions
JP7241710B2 (ja
Inventor
和幸 鹿間
Kazuyuki Shikama
和幸 鹿間
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment LLC
Original Assignee
Sony Interactive Entertainment LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment LLC filed Critical Sony Interactive Entertainment LLC
Priority to JP2020016075A priority Critical patent/JP7241710B2/ja
Priority to PCT/JP2021/002744 priority patent/WO2021157439A1/ja
Priority to EP21750149.3A priority patent/EP4102250A4/en
Priority to US17/794,058 priority patent/US20230049793A1/en
Priority to CN202180010881.3A priority patent/CN115038987A/zh
Publication of JP2021124307A publication Critical patent/JP2021124307A/ja
Application granted granted Critical
Publication of JP7241710B2 publication Critical patent/JP7241710B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/497Means for monitoring or calibrating
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4865Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/10Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/487Extracting wanted echo signals, e.g. pulse detection
    • G01S7/4876Extracting wanted echo signals, e.g. pulse detection by removing unwanted signals
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/491Details of non-pulse systems
    • G01S7/4912Receivers
    • G01S7/4915Time delay measurement, e.g. operational details for pixel components; Phase measurement

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

【課題】マルチパス反射光の影響を除去または低減してToFセンサーの測定精度を向上させる。
【解決手段】第1の時間窓で照射された光の反射光が第1の時間窓で受光された第1の光量、および反射光が第2の時間窓で受光された第2の光量を取得する第1の光量取得部と、第1、第2および第3の時間窓を時間軸負方向にシフトさせて第4、第5および第6の時間窓を設定する時間窓シフト制御部であって、第4の時間窓で反射光が受光されなくなるまで第4、第5および第6の時間窓を時間軸負方向にシフトさせる時間窓シフト制御部と、反射光が第6の時間窓で受光された第3の光量を取得する第2の光量取得部と、第1の光量に第3の光量を加えた第1の修正光量、および第2の光量から第3の光量を差し引いた第2の修正光量に基づいて、光と反射光との位相差を算出する位相差算出部とを備える、位相差算出装置が提供される。
【選択図】図5

Description

本発明は、位相差算出装置、位相差算出方法およびプログラムに関する。
光の飛行時間に基づいて距離を測定するToF(Time of Flight)センサーは、例えば被写体の三次元情報を取得するために利用される。ToFセンサーに関する技術は、例えば特許文献1に記載されている。特許文献1に記載された技術において、デプス画像取得装置は、検出領域に向かって変調された光を照射する発光ダイオードと、検出領域にある物体で反射して入射する光を受光してデプス画像を生成するための信号を出力するToFセンサーと、入射する光のうち所定の波長帯域の光を相対的に多く通過させるフィルタとを備え、発光ダイオードまたはToFセンサーの温度に従って、発光ダイオード、ToFセンサー、またはフィルタの配置の少なくともいずれかが制御される。
特開2019−078748号公報
しかしながら、例えば室内のような物体の周りに他の物体が存在する環境でToFセンサーを使用した場合、同じ物体で反射した光が複数の反射経路を経て入射することによって測定精度が低下する可能性がある。このような所謂マルチパス反射光に対処するための技術は、例えば上記の特許文献1には記載されていない。
そこで、本発明は、マルチパス反射光の影響を低減してToFセンサーの測定精度を向上させることが可能な、位相差算出装置、位相差算出方法およびプログラムを提供することを目的とする。
本発明のある観点によれば、連続する同じ長さの第1、第2および第3の時間窓のうち、第1の時間窓で照射された光の反射光が第1の時間窓で受光された第1の光量、および反射光が第2の時間窓で受光された第2の光量を取得する第1の光量取得部と、第1、第2および第3の時間窓を時間軸負方向にシフトさせて第4、第5および第6の時間窓を設定する時間窓シフト制御部であって、第4の時間窓で反射光が受光されなくなるまで第4、第5および第6の時間窓を時間軸負方向にシフトさせる時間窓シフト制御部と、反射光が第6の時間窓で受光された第3の光量を取得する第2の光量取得部と、第1の光量に第3の光量を加えた第1の修正光量、および第2の光量から第3の光量を差し引いた第2の修正光量に基づいて、光と反射光との位相差を算出する位相差算出部とを備える、位相差算出装置が提供される。
本発明の別の観点によれば、連続する同じ長さの第1、第2および第3の時間窓のうち、第1の時間窓で照射された光の反射光が第1の時間窓で受光された第1の光量、および反射光が第2の時間窓で受光された第2の光量を取得するステップと、第1、第2および第3の時間窓を時間軸負方向にシフトさせて第4、第5および第6の時間窓を設定するステップであって、第4の時間窓で反射光が受光されなくなるまで第4、第5および第6の時間窓を時間軸負方向にシフトさせるステップと、反射光が第6の時間窓で受光された第3の光量を取得するステップと、第1の光量に第3の光量を加えた第1の修正光量、および第2の光量から第3の光量を差し引いた第2の修正光量に基づいて、光と反射光との位相差を算出するステップとを含む、位相差算出方法が提供される。
本発明のさらに別の観点によれば、連続する同じ長さの第1、第2および第3の時間窓のうち、第1の時間窓で照射された光の反射光が第1の時間窓で受光された第1の光量、および反射光が第2の時間窓で受光された第2の光量を取得する機能と、第1、第2および第3の時間窓を時間軸負方向にシフトさせて第4、第5および第6の時間窓を設定する時間窓シフト制御部であって、第4の時間窓で反射光が受光されなくなるまで第4、第5および第6の時間窓を時間軸負方向にシフトさせる機能と、反射光が第6の時間窓で受光された第3の光量を取得する機能と、第1の光量に第3の光量を加えた第1の修正光量、および第2の光量から第3の光量を差し引いた第2の修正光量に基づいて、光と反射光との位相差を算出する機能とをコンピュータに実現させるためのプログラムが提供される。
本発明の一実施形態に係るToFセンサーによる測定の概要について説明するための図である。 本発明の一実施形態に係るToFセンサーの動作の例を示す第1のタイミングチャートである。 本発明の一実施形態に係るToFセンサーの動作の例を示す第2のタイミングチャートである。 本発明の一実施形態においてマルチパス反射光の影響を除去または低減する原理について説明するための図である。 本発明の一実施形態に係るToFセンサーの概略的な構成を示す図である。 図5に示したToFセンサーに適用可能な受光部の回路構成例を示す図である。 本発明の一実施形態にかかる位相差算出方法の概略的なステップを示すフローチャートである。
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
図1は、本発明の一実施形態に係るToFセンサーによる測定の概要について説明するための図である。ToFセンサー100は、光源からパルス光PLを照射する。パルス光PLが物体objで反射した反射光が、ToFセンサー100の受光部において受光される。パルス光PLと反射光との位相差に基づいて、ToFセンサー100から物体objまでの距離dを算出することができる。しかしながら、ToFセンサー100において受光される反射光は、パルス光PLが物体objのみで反射した反射光RL以外にも、例えばパルス光PLが天井もしくは床、またはその両方と物体objとで反射したマルチパス反射光MRL1〜MRL3を含む。反射光RLとマルチパス反射光MRL1〜MRL3との間ではパルス光PLとの位相差が異なるため、反射光RLにマルチパス反射光MRL1〜MRL3が混入すると正確な距離dの算出が困難になる。
図2は、本発明の一実施形態に係るToFセンサーの動作の例を示す第1のタイミングチャートである。図示された例において、ToFセンサー100では、光源によるパルス光PLの照射時間rと同期して開くシャッターS1、パルス光PLの照射終了時から照射時間rと同じ長さだけ開くシャッターS2、およびシャッターS2が閉じる時から照射時間rと同じ長さだけ開くシャッターS3を用いて、連続する同じ長さの時間窓TW1〜TW3でそれぞれ光が受光される。パルス光PLは時間窓TW1で照射され、照射時間rの初期に照射されたパルス光PLの反射光は時間窓TW1のうちに受光される。時間窓TW1で受光される反射光の光量を光量Q1として示す。一方、照射時間rの後期に照射されたパルス光PLの反射光は時間窓TW2で受光される。時間窓TW2で受光される反射光の光量を光量Q2として示す。なお、受光される光量にはバックグラウンド光BGの光量も含まれるが、例えば反射光が受光されない時間窓TW3で受光される光量をバックグラウンド光BGの光量として時間窓TW1,TW2の光量から差し引くことによって、バックグラウンド光BGの影響を除いた反射光の光量Q1,Q2を算出することができる。
上記で図1を参照して説明した物体objまでの距離dが大きいほど、パルス光PLに対する反射光の位相遅延が大きくなることによって、光量Q1の割合が小さく、光量Q2の割合が大きくなる。これを利用して、ToFセンサー100では、光量Q1と光量Q2との割合からパルス光PLと反射光との位相差を算出し、さらに位相差から距離dを算出する。しかしながら、反射光RLよりも遅れて受光されるマルチパス反射光MRL1〜MRL3が混入すると、算出される位相差および距離dの精度が低下する。具体的には、マルチパス反射光MRL1〜MRL3が含まれることによって、距離dを正しく反映した反射光RLにおける時間窓TW1,TW2ごとの光量の割合と、実際に観測される反射光の光量Q1,Q2の割合との間にずれが生じる。そこで、本実施形態では、以下で説明するような手順を追加で実行することによって、それぞれの時間窓で受光される反射光の光量におけるマルチパス反射光の影響を低減する。
図3は、本発明の一実施形態に係るToFセンサーの動作の例を示す第2のタイミングチャートである。図示された例では、図2に示した時間窓TW1におけるパルス光PLの照射を維持しながら、シャッターS1〜S3のタイミングを繰り上げる。これによって、元の時間窓TW1〜TW3は時間軸負方向にシフトされ、時間窓TW4〜TW6になる。時間窓TW4〜TW6のシフトは、図示されているように時間窓TW4で反射光が受光されなくなるまで実行される。この場合、物体objのみで反射した反射光RLの受光が始まるタイミングが、時間窓TW4の終点、すなわち時間窓TW5の始点に一致する。反射光RLはパルス光PLの照射時間rと同じ長さだけ受光されるため、反射光RLの受光が終わるタイミングは時間窓TW5の終点に一致する。
一方、マルチパス反射光MRL1〜MRL3は、上述のように反射光RLよりも遅れて受光されるため、マルチパス反射光MRL1〜MRL3の受光が始まるタイミングは時間窓TW5の始点に一致せず、また受光が終わるタイミングは時間窓TW5の終点に一致しない。結果として、マルチパス反射光MRL1〜MRL3は、時間窓TW5の終点よりも後、すなわち時間窓TW6でも受光される。つまり、時間窓TW6で受光される反射光の光量Q3は、反射光RLの光量を含まず、マルチパス反射光MRL1〜MRL3の光量のみを含む。
図4は、本発明の一実施形態においてマルチパス反射光の影響を除去または低減する原理について説明するための図である。上述のように、時間窓TW4で受光される反射光の光量が実質的に0になるまで時間窓TW4〜TW6をシフトした場合、時間窓TW6で受光される反射光の光量Q3は反射光RLの光量を含まず、マルチパス反射光MRL1〜MRL3の光量のみを含む。それゆえ、図示されているように、時間窓TW1における反射光の光量Q1に光量Q3を加えて修正光量Qm1とし、時間窓TW2における反射光の光量Q2から光量Q3を差し引いて修正光量Qm2とすると、修正光量Qm1,Qm2の割合はマルチパス反射光を含まない反射光RLにおける時間窓TW1,TW2ごとの光量の割合と同じになる。このような修正光量Qm1,Qm2に基づいて位相差および距離dを算出することによって、マルチパス反射光の影響を低減してToFセンサー100の測定精度を向上させることができる。
図5は、本発明の一実施形態に係るToFセンサーの概略的な構成を示す図である。図示された例において、ToFセンサー100は、光源部110と、受光部120と、制御部130とを含む。光源部110は、例えば赤外線レーザー光源を含み、上述したパルス光PLを照射する。受光部120は、例えばフォトダイオードなどの受光素子と、受光素子の画素ごとに配置されて受光素子に入射する光を所定の時間間隔で遮断するシャッターS1〜S3とを含み、パルス光PLの反射光を所定の時間窓で受光する。
制御部130は、例えば通信インターフェース、プロセッサ、およびメモリを有するコンピュータによって実装される。プロセッサがメモリに格納された、または通信インターフェースを介して受信されたプログラムに従って動作することによって、光源制御部131、シャッタータイミング制御部132、第1の光量取得部133、時間窓シフト制御部134、第2の光量取得部135、位相差算出部136、および距離算出部137の機能がソフトウェア的に実現される。以下、各部の機能について説明する。
光源制御部131は、光源部110におけるパルス光PLの照射タイミングを制御する。具体的には、光源制御部131は、パルス光PLが所定の周期で照射時間rだけ照射されるように制御する。図示された例において、シャッタータイミング制御部132は、パルス光PLの照射時間が図2に示した時間窓TW1に一致するように、光源部110を制御する。
シャッタータイミング制御部132は、受光部120におけるシャッターS1〜S3開閉のタイミングを制御する。図2および図3に示した時間窓TW1〜TW3の時間窓TW4〜TW6へのシフトは、時間窓シフト制御部134がシャッタータイミング制御部132にシャッタータイミングの変更量を入力することによって実行される。
第1の光量取得部133は、時間窓TW1で照射されたパルス光PLの反射光が時間窓TW1,TW2でそれぞれ受光された光量Q1,Q2を取得する。ここで、上記で図2を参照して説明したバックグラウンド光BGの影響を除くための演算は、第1の光量取得部133で実行されてもよいし、後述する位相差算出部136で実行されてもよい。図2を参照して説明したように、光量Q1,Q2には、物体objのみで反射した反射光RL、およびマルチパス反射光MRL1〜MRL3の光量が含まれる。
時間窓シフト制御部134は、図2および図3に示した時間窓TW1〜TW3の時間窓TW4〜TW6へのシフトを制御する。具体的には、時間窓シフト制御部134は、第1の光量取得部133が光量Q1,Q2を取得した後に、時間窓TW1〜TW3の時間軸負方向へのシフト量に対応する時間だけシャッターS1,S2,S3の動作タイミングが繰り上がるように、シャッタータイミング制御部132にシャッタータイミングの変更量を入力する。
本実施形態において、時間窓シフト制御部134は、シャッタータイミングの変更後に照射されたパルス光PLの反射光が時間窓TW4〜TW6で受光された光量、または後述するような光量の比較結果を受光部120から取得する。取得した光量、または比較結果に基づいて時間窓TW4で反射光が受光されなくなったと判定された場合、時間窓シフト制御部134は時間窓のシフトを終了して時間窓TW4〜TW6を決定する。
第2の光量取得部135は、時間窓TW1で照射されたパルス光PLの反射光が時間窓TW6で受光された光量Q3を取得する。上述のように、シャッタータイミングが時間窓TW4〜TW6に合わせてシフトされても、パルス光PLの照射は時間窓TW1に保持されている。図4を参照して説明したように、光量Q3は、マルチパス反射光MRL1〜MRL3の少なくともいずれかが反射光RLよりも遅れて受光された分の光量に対応する。
位相差算出部136は、第1の光量取得部133が取得した光量Q1に第2の光量取得部135が取得した光量Q3を加えた修正光量Qm1、および同様に光量Q2から光量Q3を差し引いた修正光量Qm2に基づいて、パルス光PLと反射光との位相差を算出する。距離算出部137は、位相差に基づいて距離dを算出する。なお、光量の修正後の位相差の算出、および位相差に基づく距離の算出については、公知の技術を利用することが可能であるため詳細な説明は省略する。
上述したような構成のToFセンサー100によれば、位相差の算出においてマルチパス反射光の影響を低減することによって、距離dの測定精度を向上させることができる。なお、ToFセンサー100は、上記で図5に示したような構成を含む一体的な装置として実装されてもよいし、分散した装置として実装されてもよい。この場合、光源部110と受光部120とが近接して配置されていれば、制御部130は必ずしも光源部110および受光部120と同じ装置内で実装されなくてもよい。また、制御部130の構成要素は必ずしも単一の装置内で実装されなくてもよく、例えば光源制御部131が光源部110を含む光源装置に組み込まれ、シャッタータイミング制御部132が受光部120を含む受光装置に組み込まれ、第1の光量取得部133、時間窓シフト制御部134、第2の光量取得部135、および位相差算出部136がこれらとは別の位相差算出装置として実装されてもよい。距離算出部137は、例えば、位相差算出装置が出力した位相差に基づいて距離dを算出する別の装置として実装されてもよい。上述したToFセンサー100も、位相差を算出する構成を含む位相差算出装置の一例である。
図6は、図5に示したToFセンサーに適用可能な受光部の回路構成例を示す図である。図示された例において、回路構成は、フォトダイオードPDと、キャパシタC1,C2と、リセットスイッチRSWと、増幅器AMPと、切替スイッチSSWと、比較器CMPと、スイッチSWとを含み、画素信号SIGおよび比較器出力CMP−OUTを出力する。フォトダイオードPDは、受光部120でシャッターS1が配置された画素に対応して配置され、当該画素に入射した光量を検出する。時間窓シフト制御部134からシャッタータイミングの変更量を入力されたシャッタータイミング制御部132がシャッタータイミングを変更する前に、切替スイッチSSWがキャパシタC2側に接続され、シフト前の時間窓TW1または時間窓TW4で受光される光量に対応する電荷がキャパシタC2にチャージされる。
その後、シャッタータイミング制御部132がシャッタータイミングを変更した後、リセットスイッチRSWでキャパシタC1の電荷をリセットした上で、切替スイッチSSWが比較器CMP側に接続され、シフト後の時間窓TW4で受光される光量に対応する電荷がキャパシタC2にチャージされているシフト前の光量に対応する電荷と比較される。比較器CMPの出力が、シフト前の電荷よりもシフト後の電荷の方が小さいことを示す場合、時間窓シフト制御部134は時間窓TW4〜TW6をさらに時間軸負方向にシフトする。比較器CMPの出力が、シフト前の電荷とシフト後の電荷とが同じであることを示す場合、時間窓シフト制御部134は時間窓のシフトを終了して時間窓TW4〜TW6を決定する。時間窓シフト制御部134は、シフト前の電荷よりもシフト後の電荷の方が小さいことが示された最後のシフト量を、時間窓TW4〜TW6のシフト量にしてもよい。
このように、受光部120の画素ごとに時間窓のシフト前後で受光された光量を比較することが可能な回路構成を設け、制御部130では時間窓シフト制御部134が光量の比較結果(比較器出力CMP−OUT)に基づいてシャッタータイミングの変更による時間窓のシフトの終了を判定してもよい。あるいは、受光部120では上記のような回路構成を設けず、制御部130で時間窓シフト制御部134がシフト前後の時間窓TW1または時間窓TW4の光量を比較することによって時間窓のシフトの終了を判定してもよい。上記の例ではシフト前後の時間窓TW1または時間窓TW4の光量の比較結果に基づいてシフトの終了が判定されたが、他の例では時間窓TW4で受光された光量が時間窓TW3で受光された光量(バックグラウンド光BGの光量)と同じになった場合に時間窓のシフトが終了されてもよい。
図7は、本発明の一実施形態にかかる位相差算出方法の概略的なステップを示すフローチャートである。図示された例において、各ステップはToFセンサー100の制御部130において実行される。光源制御部131の制御によってパルス光PLが照射され、シャッタータイミング制御部132が時間窓TW1〜TW3で反射光が受光されるようにシャッターS1〜S3を制御しているときに、第1の光量取得部133は、時間窓TW1,TW2の光量Q1,Q2を取得する(ステップS101)。上述のように、ここで取得される光量Q1,Q2には、反射光RLとマルチパス反射光MRL1〜MRL3との光量が含まれる。次に、時間窓シフト制御部134が時間窓TW1,TW2,TW3を時間軸負方向にシフトさせる(ステップS102)。例えば、時間窓シフト制御部134は、所定量の時間窓のシフトを、時間窓TW4で反射光が受光されなくなるまで繰り返す(ステップS103)。
時間窓のシフトが終了した後で、第2の光量取得部135が時間窓TW6の光量Q3を取得する(ステップS104)。位相差算出部136は、光量Q1に光量Q3を加えた修正光量Qm1、および光量Q2から光量Q3を差し引いた修正光量Qm2に基づいて、パルス光PLと反射光との位相差を算出する(ステップS105)。算出された位相差は、距離算出部137における距離dの算出に用いられてもよいし、位相差として保存または出力されて事後的に、または別の装置で距離dの算出などに用いられてもよい。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
100…ToFセンサー、110…光源部、120…受光部、130…制御部、131…光源制御部、132…シャッタータイミング制御部、133…第1の光量取得部、134…時間窓シフト制御部、135…第2の光量取得部、136…位相差算出部、137…距離算出部、PL…パルス光、RL…反射光、MRL1〜MRL3…マルチパス反射光、Q1〜Q3…光量、Qm1,Qm2…修正光量、S1〜S3…シャッター、TW1〜TW6…時間窓。

Claims (5)

  1. 連続する同じ長さの第1、第2および第3の時間窓のうち、前記第1の時間窓で照射された光の反射光が前記第1の時間窓で受光された第1の光量、および前記反射光が第2の時間窓で受光された第2の光量を取得する第1の光量取得部と、
    前記第1、第2および第3の時間窓を時間軸負方向にシフトさせて第4、第5および第6の時間窓を設定する時間窓シフト制御部であって、前記第4の時間窓で前記反射光が受光されなくなるまで前記第4、第5および第6の時間窓を時間軸負方向にシフトさせる時間窓シフト制御部と、
    前記反射光が前記第6の時間窓で受光された第3の光量を取得する第2の光量取得部と、
    前記第1の光量に前記第3の光量を加えた第1の修正光量、および前記第2の光量から前記第3の光量を差し引いた第2の修正光量に基づいて、前記光と前記反射光との位相差を算出する位相差算出部と
    を備える、位相差算出装置。
  2. 前記反射光を受光する受光素子と、前記受光素子に入射する光を所定の時間間隔で遮断するシャッターとを含む受光部をさらに備え、
    前記時間窓シフト制御部は、前記シャッターの動作タイミングを繰り上げることによって前記第4、第5および第6の時間窓を時間軸負方向にシフトさせる、請求項1に記載の位相差算出装置。
  3. 前記受光部は、前記シャッターの動作タイミングが繰り上げられる前後で前記第4の時間窓で受光された光量を比較することが可能な回路構成をさらに含む、請求項2に記載の位相差算出装置。
  4. 連続する同じ長さの第1、第2および第3の時間窓のうち、前記第1の時間窓で照射された光の反射光が前記第1の時間窓で受光された第1の光量、および前記反射光が第2の時間窓で受光された第2の光量を取得するステップと、
    前記第1、第2および第3の時間窓を時間軸負方向にシフトさせて第4、第5および第6の時間窓を設定するステップであって、前記第4の時間窓で前記反射光が受光されなくなるまで前記第4、第5および第6の時間窓を時間軸負方向にシフトさせるステップと、
    前記反射光が前記第6の時間窓で受光された第3の光量を取得するステップと、
    前記第1の光量に前記第3の光量を加えた第1の修正光量、および前記第2の光量から前記第3の光量を差し引いた第2の修正光量に基づいて、前記光と前記反射光との位相差を算出するステップと
    を含む、位相差算出方法。
  5. 連続する同じ長さの第1、第2および第3の時間窓のうち、前記第1の時間窓で照射された光の反射光が前記第1の時間窓で受光された第1の光量、および前記反射光が第2の時間窓で受光された第2の光量を取得する機能と、
    前記第1、第2および第3の時間窓を時間軸負方向にシフトさせて第4、第5および第6の時間窓を設定する時間窓シフト制御部であって、前記第4の時間窓で前記反射光が受光されなくなるまで前記第4、第5および第6の時間窓を時間軸負方向にシフトさせる機能と、
    前記反射光が前記第6の時間窓で受光された第3の光量を取得する機能と、
    前記第1の光量に前記第3の光量を加えた第1の修正光量、および前記第2の光量から前記第3の光量を差し引いた第2の修正光量に基づいて、前記光と前記反射光との位相差を算出する機能と
    をコンピュータに実現させるためのプログラム。
JP2020016075A 2020-02-03 2020-02-03 位相差算出装置、位相差算出方法およびプログラム Active JP7241710B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2020016075A JP7241710B2 (ja) 2020-02-03 2020-02-03 位相差算出装置、位相差算出方法およびプログラム
PCT/JP2021/002744 WO2021157439A1 (ja) 2020-02-03 2021-01-27 位相差算出装置、位相差算出方法およびプログラム
EP21750149.3A EP4102250A4 (en) 2020-02-03 2021-01-27 PHASE SHIFT CALCULATION DEVICE, PHASE SHIFT CALCULATION METHOD, AND PROGRAM
US17/794,058 US20230049793A1 (en) 2020-02-03 2021-01-27 Phase difference calculation device, phase difference calculation method, and program
CN202180010881.3A CN115038987A (zh) 2020-02-03 2021-01-27 相位差计算装置、相位差计算方法以及程序

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020016075A JP7241710B2 (ja) 2020-02-03 2020-02-03 位相差算出装置、位相差算出方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2021124307A true JP2021124307A (ja) 2021-08-30
JP7241710B2 JP7241710B2 (ja) 2023-03-17

Family

ID=77199502

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020016075A Active JP7241710B2 (ja) 2020-02-03 2020-02-03 位相差算出装置、位相差算出方法およびプログラム

Country Status (5)

Country Link
US (1) US20230049793A1 (ja)
EP (1) EP4102250A4 (ja)
JP (1) JP7241710B2 (ja)
CN (1) CN115038987A (ja)
WO (1) WO2021157439A1 (ja)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010098454A1 (ja) * 2009-02-27 2010-09-02 パナソニック電工株式会社 距離測定装置
WO2017138032A1 (en) * 2016-02-08 2017-08-17 Denso Corporation Time-of-flight distance measuring device and method for detecting multipath error
US10215856B1 (en) * 2017-11-27 2019-02-26 Microsoft Technology Licensing, Llc Time of flight camera
WO2019188348A1 (ja) * 2018-03-29 2019-10-03 パナソニックIpマネジメント株式会社 距離情報取得装置、マルチパス検出装置およびマルチパス検出方法
CN110456369A (zh) * 2019-07-30 2019-11-15 炬佑智能科技(苏州)有限公司 飞行时间传感系统及其测距方法
WO2019230306A1 (ja) * 2018-05-30 2019-12-05 パナソニックIpマネジメント株式会社 識別装置および識別方法
CN110673152A (zh) * 2019-10-29 2020-01-10 炬佑智能科技(苏州)有限公司 飞行时间传感器及其测距方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7271119B2 (ja) 2017-10-20 2023-05-11 ソニーセミコンダクタソリューションズ株式会社 デプス画像取得装置、制御方法、およびデプス画像取得システム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010098454A1 (ja) * 2009-02-27 2010-09-02 パナソニック電工株式会社 距離測定装置
WO2017138032A1 (en) * 2016-02-08 2017-08-17 Denso Corporation Time-of-flight distance measuring device and method for detecting multipath error
US10215856B1 (en) * 2017-11-27 2019-02-26 Microsoft Technology Licensing, Llc Time of flight camera
WO2019188348A1 (ja) * 2018-03-29 2019-10-03 パナソニックIpマネジメント株式会社 距離情報取得装置、マルチパス検出装置およびマルチパス検出方法
WO2019230306A1 (ja) * 2018-05-30 2019-12-05 パナソニックIpマネジメント株式会社 識別装置および識別方法
CN110456369A (zh) * 2019-07-30 2019-11-15 炬佑智能科技(苏州)有限公司 飞行时间传感系统及其测距方法
CN110673152A (zh) * 2019-10-29 2020-01-10 炬佑智能科技(苏州)有限公司 飞行时间传感器及其测距方法

Also Published As

Publication number Publication date
EP4102250A1 (en) 2022-12-14
WO2021157439A1 (ja) 2021-08-12
EP4102250A4 (en) 2024-02-28
JP7241710B2 (ja) 2023-03-17
CN115038987A (zh) 2022-09-09
US20230049793A1 (en) 2023-02-16

Similar Documents

Publication Publication Date Title
US10686994B2 (en) Imaging device, and solid-state imaging element used for same
US9578313B2 (en) Method of enhanced depth image acquisition
JP7448246B2 (ja) 深度感知コンピュータビジョンシステム
US10419703B2 (en) Automatic multiple depth cameras synchronization using time sharing
CN107850669B (zh) 测距摄像装置及固体摄像装置
JP6805504B2 (ja) 距離測定装置、移動体装置及び距離測定方法
WO2014097539A1 (ja) 3次元測定装置および3次元測定方法
CN112739980B (zh) 多阶段有源光深度系统
CN107852475A (zh) 投影系统
KR101904720B1 (ko) 영상 처리 장치 및 방법
CN107836112B (zh) 投影系统
JP2017201760A (ja) 撮像装置および測距装置
WO2021157439A1 (ja) 位相差算出装置、位相差算出方法およびプログラム
US20200003893A1 (en) Electromagnetic wave detection apparatus, program, and information acquisition system
JP5978866B2 (ja) 撮影装置及び撮影装置の画像処理方法
WO2015145599A1 (ja) 映像投影装置
US20210201519A1 (en) Alternating light distributions for active depth sensing
US20200200908A1 (en) Object monitoring system including distance measuring device
WO2023153451A1 (ja) 測定装置
JP2012122893A (ja) 形状測定システム及び形状測定方法
JP2017032391A (ja) 距離測定装置
WO2022080014A1 (ja) センサ制御システム及びセンサ
US20230078063A1 (en) Distance measurement device and distance measurement system
US11438486B2 (en) 3D active depth sensing with laser pulse train bursts and a gated sensor
US20230370730A1 (en) Interference fringe correction method and under-screen system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220302

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230207

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230307

R150 Certificate of patent or registration of utility model

Ref document number: 7241710

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150