JP7388141B2 - distance measuring device - Google Patents

distance measuring device Download PDF

Info

Publication number
JP7388141B2
JP7388141B2 JP2019204613A JP2019204613A JP7388141B2 JP 7388141 B2 JP7388141 B2 JP 7388141B2 JP 2019204613 A JP2019204613 A JP 2019204613A JP 2019204613 A JP2019204613 A JP 2019204613A JP 7388141 B2 JP7388141 B2 JP 7388141B2
Authority
JP
Japan
Prior art keywords
light
unit
histogram
noise floor
bgnd
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019204613A
Other languages
Japanese (ja)
Other versions
JP2021076517A (en
Inventor
善英 立野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2019204613A priority Critical patent/JP7388141B2/en
Priority to PCT/JP2020/041197 priority patent/WO2021095601A1/en
Publication of JP2021076517A publication Critical patent/JP2021076517A/en
Application granted granted Critical
Publication of JP7388141B2 publication Critical patent/JP7388141B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/10Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/487Extracting wanted echo signals, e.g. pulse detection

Description

本開示は、光を照射して、光を反射した物体までの距離を測定する距離測定装置に関する。 The present disclosure relates to a distance measuring device that irradiates light and measures the distance to an object that reflects the light.

特許文献1には、光を照射し、物体からの反射光を受光することで、照射から受光までの時間を計測し、この時間に基づいて、光を反射した物体までの距離を測定する距離測定装置において、光を検出するために、ガイガーモードで動作する複数のアバランシェフォトダイオードを用いることが記載されている。 Patent Document 1 describes a distance method in which the time from irradiation to reception of light is measured by irradiating light and receiving reflected light from an object, and based on this time, the distance to the object that reflected the light is measured. It is described that in a measuring device, a plurality of avalanche photodiodes operating in Geiger mode are used to detect light.

特許第5644294号公報Patent No. 5644294

太陽光などの背景光が距離測定装置内に入射する場合において、背景光の光量が多くなると、背景光と、物体からの反射光とを分離し難くなり、背景光を物体からの反射光であると誤検出してしまったり、物体からの反射光を検出できなかったりして、距離測定精度が低下してしまう恐れがあった。 When background light such as sunlight enters the distance measuring device, if the amount of background light increases, it becomes difficult to separate the background light from the light reflected from the object, and the background light becomes the light reflected from the object. If there is, there is a risk of false detection or failure to detect light reflected from the object, resulting in a decrease in distance measurement accuracy.

本開示は、距離測定精度を向上させることを目的とする。 The present disclosure aims to improve distance measurement accuracy.

本開示の一態様は、照射部(2)と、受光アレイ部(3)と、ヒストグラム作成部(4,S20,S30,S210~S250)と、ノイズフロア算出部(S40,S280)と、ばらつき算出部(S50,S290)と、閾値算出部(S60,S300,S305)と、距離算出部(S70,S310)とを備える距離測定装置(1)である。 One aspect of the present disclosure includes an irradiation unit (2), a light receiving array unit (3), a histogram creation unit (4, S20, S30, S210 to S250), a noise floor calculation unit (S40, S280), and a A distance measuring device (1) includes a calculation section (S50, S290), a threshold calculation section (S60, S300, S305), and a distance calculation section (S70, S310).

照射部は、パルス状のパルス光を照射するように構成される。受光アレイ部は、フォトンの入射によってパルス信号を出力する複数の光検知器(31)を備える。
ヒストグラム作成部は、受光アレイ部から出力される複数のパルス信号に従い、受光アレイ部で受光された光量の時間変化を示すヒストグラムを作成するように構成される。
The irradiation unit is configured to irradiate pulsed light. The light receiving array section includes a plurality of photodetectors (31) that output pulse signals upon incidence of photons.
The histogram creation section is configured to create a histogram showing a temporal change in the amount of light received by the light receiving array section in accordance with the plurality of pulse signals output from the light receiving array section.

ノイズフロア算出部は、ヒストグラム作成部により作成されたヒストグラムに基づいて、受光アレイ部により検出される背景光の受光レベルを示す背景光ノイズフロアを算出するように構成される。 The noise floor calculation unit is configured to calculate a background light noise floor indicating a level of background light detected by the light receiving array unit based on the histogram created by the histogram creation unit.

ばらつき算出部は、ヒストグラム作成部により作成されたヒストグラムに基づいて、背景光ノイズフロアのばらつきの度合いを示すばらつきパラメータを算出するように構成される。閾値算出部は、ノイズフロア算出部により算出された背景光ノイズフロアと、ばらつき算出部により算出されたばらつきパラメータとに基づいて、ヒストグラムにおいて照射部により照射されたパルス光を受光アレイ部で検出したか否かを判断するための閾値を算出するように構成される。 The variation calculation unit is configured to calculate a variation parameter indicating the degree of variation in the background light noise floor based on the histogram created by the histogram creation unit. The threshold calculation unit detects the pulsed light irradiated by the irradiation unit in the histogram by the light receiving array unit based on the background light noise floor calculated by the noise floor calculation unit and the variation parameter calculated by the variation calculation unit. The configuration is configured to calculate a threshold value for determining whether or not.

距離算出部は、閾値算出部により算出された閾値に基づいて、パルス光を反射した物体までの距離を算出するように構成される。
このように構成された本開示の距離測定装置は、背景光ノイズフロアと、背景光ノイズフロアのばらつきパラメータとに基づいて、閾値を算出する。このため、本開示の距離測定装置は、背景光ノイズフロアのばらつきの大きさ(すなわち、背景光ノイズフロアの標準偏差の大きさ)に応じて、閾値を変化させることができる。これにより、本開示の距離測定装置は、背景光を物体で反射したパルス光(以下、反射光)であると誤検出してしまったり、物体からの反射光を検出できなかったりする事態の発生を抑制し、距離測定精度を向上させることができる。
The distance calculation section is configured to calculate the distance to the object that reflected the pulsed light based on the threshold calculated by the threshold calculation section.
The distance measuring device of the present disclosure configured as described above calculates a threshold value based on the background light noise floor and the variation parameter of the background light noise floor. Therefore, the distance measuring device of the present disclosure can change the threshold value depending on the magnitude of the variation in the background light noise floor (that is, the magnitude of the standard deviation of the background light noise floor). As a result, the distance measuring device of the present disclosure may erroneously detect background light as pulsed light reflected by an object (hereinafter referred to as reflected light), or may fail to detect reflected light from an object. can be suppressed and distance measurement accuracy can be improved.

距離測定装置の構成を示すブロック図である。FIG. 2 is a block diagram showing the configuration of a distance measuring device. 受光アレイ部および光検知器の構成を示す図である。FIG. 3 is a diagram showing the configuration of a light receiving array section and a photodetector. 第1実施形態のヒストグラムの具体例を示す図である。It is a figure showing a specific example of the histogram of a 1st embodiment. 第1実施形態の距離測定処理を示すフローチャートである。It is a flowchart which shows distance measurement processing of a 1st embodiment. 第2実施形態の距離測定処理を示すフローチャートである。It is a flow chart which shows distance measurement processing of a 2nd embodiment. 第2実施形態のヒストグラムの具体例を示す図である。It is a figure which shows the specific example of the histogram of 2nd Embodiment. 第3実施形態の距離測定処理を示すフローチャートである。It is a flow chart which shows distance measurement processing of a 3rd embodiment. 第3実施形態の閾値テーブルの構成を示す図である。It is a figure showing the composition of the threshold value table of a 3rd embodiment. 別の実施形態の閾値テーブルの構成を示す図である。It is a figure which shows the structure of the threshold value table of another embodiment.

[第1実施形態]
以下に本開示の第1実施形態を図面とともに説明する。
本実施形態の距離測定装置1は、車両に搭載され、車両の周辺に存在する各種物体までの距離を測定する。
[First embodiment]
A first embodiment of the present disclosure will be described below with reference to the drawings.
The distance measuring device 1 of this embodiment is mounted on a vehicle and measures distances to various objects present around the vehicle.

距離測定装置1は、図1に示すように、照射部2と、受光アレイ部3と、計数部4と、信号処理部5とを備える。
照射部2は、パルス状のレーザ光を、予め設定された間隔で繰り返し照射するとともに、その照射タイミングを計数部4および信号処理部5に通知する。以下、レーザ光を照射する周期を、計測周期という。
As shown in FIG. 1, the distance measuring device 1 includes an irradiating section 2, a light receiving array section 3, a counting section 4, and a signal processing section 5.
The irradiation section 2 repeatedly irradiates pulsed laser light at preset intervals, and notifies the counting section 4 and the signal processing section 5 of the irradiation timing. Hereinafter, the period of laser light irradiation will be referred to as the measurement period.

受光アレイ部3は、複数の画素ユニットP1,P2,・・・,Pkを有する。kは2以上の整数である。各画素ユニットPiは、それぞれN個の光検知器31を備える。Nは2以上の整数である。光検知器31は、フォトンが入射すると、予め設定されたパルス幅を有するパルス信号を出力する。 The light receiving array section 3 includes a plurality of pixel units P1, P2, . . . , Pk. k is an integer of 2 or more. Each pixel unit Pi includes N photodetectors 31. N is an integer of 2 or more. When a photon is incident, the photodetector 31 outputs a pulse signal having a preset pulse width.

計数部4は、複数の加算器A1,A2,・・・,Akと、複数のヒストグラムメモリM1,M2,・・・,Mkとを備える。
加算器A1,A2,・・・,Akはそれぞれ、画素ユニットP1,P2,・・・,Pkに接続される。加算器Aiは、画素ユニットPiを構成するN個の光検知器31から入力しているパルス信号の合計値(以下、パルス入力個数)を示す加算信号を出力する。iは1からkまでの整数である。
The counting section 4 includes a plurality of adders A1, A2, . . . , Ak and a plurality of histogram memories M1, M2, . . . , Mk.
Adders A1, A2, . . . , Ak are connected to pixel units P1, P2, . . . , Pk, respectively. The adder Ai outputs an addition signal indicating the total value (hereinafter referred to as the number of input pulses) of the pulse signals input from the N photodetectors 31 constituting the pixel unit Pi. i is an integer from 1 to k.

ヒストグラムメモリM1,M2,・・・,Mkはそれぞれ、加算器A1,A2,・・・,Akに接続される。そしてヒストグラムメモリMiは、照射部2から通知された直近の照射タイミングを起点として予め設定された取得周期が経過する毎に、加算器Aiから入力している加算信号が示すパルス入力個数を、直近の照射タイミングから取得周期が到来した回数に対応付けて記憶する。またヒストグラムメモリM1,M2,・・・,Mkは、信号処理部5に接続される。 Histogram memories M1, M2, . . . , Mk are connected to adders A1, A2, . . . , Ak, respectively. Then, the histogram memory Mi calculates the number of pulse inputs indicated by the addition signal input from the adder Ai every time a preset acquisition period elapses starting from the most recent irradiation timing notified from the irradiation unit 2. The information is stored in association with the number of times the acquisition period has arrived since the irradiation timing. Further, the histogram memories M1, M2, . . . , Mk are connected to the signal processing section 5.

信号処理部5は、CPU51、ROM52およびRAM53等を備えたマイクロコンピュータを中心に構成された電子制御装置である。マイクロコンピュータの各種機能は、CPU51が非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、ROM52が、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムの実行により、プログラムに対応する方法が実行される。なお、CPU51が実行する機能の一部または全部を、一つあるいは複数のIC等によりハードウェア的に構成してもよい。また、信号処理部5を構成するマイクロコンピュータの数は1つでも複数でもよい。 The signal processing unit 5 is an electronic control device mainly composed of a microcomputer including a CPU 51, a ROM 52, a RAM 53, and the like. Various functions of the microcomputer are realized by the CPU 51 executing programs stored in a non-transitive physical recording medium. In this example, the ROM 52 corresponds to a non-transitional physical recording medium that stores a program. Furthermore, by executing this program, a method corresponding to the program is executed. Note that some or all of the functions executed by the CPU 51 may be configured in hardware using one or more ICs. Furthermore, the number of microcomputers constituting the signal processing section 5 may be one or more.

図2に示すように、受光アレイ部3は、複数の画素ユニットP1,P2,・・・,Pkを2次元行列状に配列すること形成された受光面3aを備える。
光検知器31は、SPAD61と、クエンチ抵抗62と、反転回路63と、Dフリップフロップ回路(以下、DFF回路)64と、遅延回路65とを備える。SPADは、Single Photon Avalanche Diodeの略である。
As shown in FIG. 2, the light receiving array section 3 includes a light receiving surface 3a formed by arranging a plurality of pixel units P1, P2, . . . , Pk in a two-dimensional matrix.
The photodetector 31 includes a SPAD 61, a quench resistor 62, an inversion circuit 63, a D flip-flop circuit (hereinafter referred to as a DFF circuit) 64, and a delay circuit 65. SPAD is an abbreviation for Single Photon Avalanche Diode.

SPAD61は、ガイガーモードで動作し、単一フォトンの入射を検出することができるアバランシェフォトダイオードである。SPAD61は、アノードが負電源に接続され、カソードがクエンチ抵抗62を介して正電源に接続される。クエンチ抵抗62は、SPAD61に逆バイアス電圧を印加する。またクエンチ抵抗62は、SPAD61にフォトンが入射してSPAD61がブレイクダウンしたときに、SPAD61に流れる電流により発生する電圧降下によって、SPAD61のガイガー放電を停止させる。なお、クエンチ抵抗62には、所定の抵抗値を有する抵抗素子、或いは、ゲート電圧によってオン抵抗を設定可能なMOSFET等が用いられる。 SPAD 61 is an avalanche photodiode that operates in Geiger mode and can detect the incidence of a single photon. The SPAD 61 has an anode connected to a negative power source and a cathode connected to a positive power source via a quench resistor 62. The quench resistor 62 applies a reverse bias voltage to the SPAD 61. Furthermore, the quench resistor 62 stops the Geiger discharge of the SPAD 61 due to the voltage drop generated by the current flowing through the SPAD 61 when a photon is incident on the SPAD 61 and the SPAD 61 breaks down. Note that for the quench resistor 62, a resistor element having a predetermined resistance value, a MOSFET whose on-resistance can be set by a gate voltage, or the like is used.

SPAD61のカソードには反転回路63が接続される。SPAD61がブレイクダウンしていない状態では、反転回路63の入力はハイレベルである。SPAD61がブレイクダウンした状態では、クエンチ抵抗62に電流が流れることで、反転回路63の入力はロウレベルに変化する。DFF回路64は、反転回路63の出力がロウレベルからハイレベルに変化する立上がりエッジで出力がハイレベルに変化する。DFF回路64の出力は、遅延回路65を介してDFF回路64のリセット端子に接続される。遅延回路65は、DFF回路64の出力を、信号レベルを反転させ、かつ、予め設定された遅延時間だけ遅延させてリセット端子に入力させる。これにより、DFF回路64の出力は、ハイレベルに変化してから遅延時間が経過すると、DFF回路64がリセットされることにより、ロウレベルに変化する。 An inversion circuit 63 is connected to the cathode of the SPAD 61. When the SPAD 61 is not broken down, the input of the inversion circuit 63 is at a high level. When the SPAD 61 is in a broken down state, current flows through the quench resistor 62, causing the input of the inversion circuit 63 to change to a low level. The output of the DFF circuit 64 changes to high level at the rising edge when the output of the inverting circuit 63 changes from low level to high level. The output of the DFF circuit 64 is connected to a reset terminal of the DFF circuit 64 via a delay circuit 65. The delay circuit 65 inverts the signal level of the output of the DFF circuit 64, delays it by a preset delay time, and inputs the signal to the reset terminal. As a result, when the delay time elapses after the output of the DFF circuit 64 changes to high level, the DFF circuit 64 is reset and changes to low level.

ヒストグラムメモリMiに記憶される記憶データにより作成される画素ヒストグラムは、図3に示すように、直近の照射タイミングを起点とした時間を横軸とし、パルス入力個数を縦軸として、パルス入力個数の時間変化を示すヒストグラムである。縦軸の最大値は、Nである。 The pixel histogram created from the stored data stored in the histogram memory Mi is, as shown in FIG. It is a histogram showing changes over time. The maximum value on the vertical axis is N.

画素ヒストグラムは、パルス入力個数を時間ビンTbin毎に示す。時間ビンTbinは、画素ヒストグラムの単位目盛りとなる時間範囲である。時間ビンTbinの長さは、上記の取得周期に等しい。 The pixel histogram shows the number of pulse inputs for each time bin Tbin. The time bin Tbin is a time range that is a unit scale of the pixel histogram. The length of the time bin Tbin is equal to the acquisition period described above.

時間ビンTbinは、直近の照射タイミングから近い順に、1,2,3,・・・・・と識別番号が付されている。そして、識別番号が1からmまでの時間ビンTbinは、背景光ノイズフロア算出期間Tbに対応する。識別番号が(m+1)以降の時間ビンTbinは、距離算出期間Trに対応する。mは2以上の整数である。 The time bins Tbin are assigned identification numbers 1, 2, 3, . . . in order from the most recent irradiation timing. The time bins Tbin with identification numbers from 1 to m correspond to the background light noise floor calculation period Tb. The time bin Tbin whose identification number is after (m+1) corresponds to the distance calculation period Tr. m is an integer of 2 or more.

図3に示す画素ヒストグラムにおけるバーB1,B2,B3の高さは、物体で反射した光と背景光とによるパルス入力個数を示す。一方、バーB1,B2,B3以外のバーの高さは、背景光によるパルス入力個数を示す。 The heights of bars B1, B2, and B3 in the pixel histogram shown in FIG. 3 indicate the number of input pulses due to the light reflected by the object and the background light. On the other hand, the heights of bars other than bars B1, B2, and B3 indicate the number of input pulses due to background light.

次に、信号処理部5のCPU51が実行する距離測定処理の手順を説明する。距離測定処理は、照射部2がレーザ光を照射しているときにおいて計測周期が経過する毎に繰り返し実行される処理である。 Next, the procedure of distance measurement processing executed by the CPU 51 of the signal processing section 5 will be explained. The distance measurement process is a process that is repeatedly executed every time a measurement period elapses while the irradiation unit 2 is emitting laser light.

距離測定処理が実行されると、CPU51は、図4に示すように、S10にて、RAM53に設けられた画素指示値iに1を格納する。
CPU51は、S20にて、ヒストグラムメモリMiから記憶データを取得する。
When the distance measurement process is executed, the CPU 51 stores 1 in the pixel instruction value i provided in the RAM 53 in S10, as shown in FIG.
In S20, the CPU 51 acquires stored data from the histogram memory Mi.

CPU51は、S30にて、S20で取得した記憶データを用いて、i番目の画素ユニットPiの画素ヒストグラムを作成する。
CPU51は、S40にて、背景光ノイズフロアBGNDを算出する。背景光ノイズフロアは、照射部2から照射されたレーザ光が受光アレイ部3により受光されていないときにおいて受光アレイ部3により検出される光(すなわち、背景光)の受光レベルである。具体的には、CPU51は、識別番号がjの時間ビンTbinに対応するパルス入力個数をBGND_jとして、下式(1)により、背景光ノイズフロアBGNDを算出する。
In S30, the CPU 51 creates a pixel histogram of the i-th pixel unit Pi using the stored data acquired in S20.
The CPU 51 calculates the background light noise floor BGND in S40. The background light noise floor is the light reception level of light (that is, background light) detected by the light receiving array section 3 when the laser light emitted from the irradiating section 2 is not received by the light receiving array section 3. Specifically, the CPU 51 calculates the background light noise floor BGND using the following equation (1), with the number of pulse inputs corresponding to the time bin Tbin of identification number j being BGND_j.

CPU51は、S50にて、背景光標準偏差σ_BGNDを下式(2)により算出する。 In S50, the CPU 51 calculates the background light standard deviation σ_BGND using the following equation (2).

ここで、背景光標準偏差σ_BGNDを式(2)により算出することができる理由を説明する。
背景光標準偏差σ_BGNDで用いる光検知器31のパラメータは理論的には二項分布の定義式に基づいている。
Here, the reason why the background light standard deviation σ_BGND can be calculated using equation (2) will be explained.
The parameters of the photodetector 31 used in the background light standard deviation σ_BGND are theoretically based on the defining equation of the binomial distribution.

2つのパラメータn,pで定まる二項分布の確率密度関数は下式(3)で表される。下式(3)は、成功確率pの独立なベルヌーイ試行をn回試行したときにk回成功する確率を示す。 The probability density function of the binomial distribution determined by two parameters n and p is expressed by the following equation (3). Equation (3) below indicates the probability of success k times when independent Bernoulli trials with success probability p are attempted n times.

この二項分布における期待値E[X]、分散V[X]および標準偏差σ[X]はそれぞれ、下式(4)、下式(5)および下式(6)で表される。 The expected value E[X], variance V[X], and standard deviation σ[X] in this binomial distribution are expressed by the following equations (4), (5), and (6), respectively.

成功確率pを、SPAD61が光で反応する確率とすると、1個のSPAD61の応答確率pは下式(7)で表される。また、試行回数nは下式(8)で表される。下式(7)または式(8)において、rは理想カウントレート、τP,τNPはSPAD61のデッドタイム、Aは応答したSPAD数(すなわち、背景光の期待値)、Nは1画素あたりのSPAD数である。 When the success probability p is the probability that the SPAD 61 reacts with light, the response probability p of one SPAD 61 is expressed by the following equation (7). Further, the number of trials n is expressed by the following formula (8). In equation (7) or equation (8) below, r is the ideal count rate, τP, τ NP is the dead time of SPAD61, A is the number of SPADs that responded (i.e., the expected value of background light), and N is the number of SPADs per pixel. SPAD number.

下式(7)で示すように、1個のSPAD61の応答確率pは、「N個のSPAD61のうちA個のSPAD61が応答する確率」と置き換えることが可能である。 As shown in equation (7) below, the response probability p of one SPAD 61 can be replaced with "probability that A SPADs 61 respond among N SPADs 61".

式(4)、式(7)および式(8)より、期待値E[X]は下式(9)で表される。式(1)は、識別番号が1からmまでの時間ビンTbinにおけるパルス入力個数の平均値を示しており、式(1)は下式(9)に相当する。 From equations (4), (7), and (8), the expected value E[X] is expressed by the following equation (9). Equation (1) indicates the average value of the number of pulse inputs in time bins Tbin with identification numbers from 1 to m, and Equation (1) corresponds to Equation (9) below.

式(6)、式(7)および式(8)より、標準偏差σ[X]は下式(10)で表される。下式(10)で示す標準偏差σ[X]は、式(2)で示す背景光標準偏差σ_BGNDに相当する。 From equations (6), (7), and (8), the standard deviation σ[X] is expressed by the following equation (10). The standard deviation σ[X] shown in equation (10) below corresponds to the background light standard deviation σ_BGND shown in equation (2).

次にCPU51は、S60にて、閾値Thを下式(11)により算出する。下式(11)におけるaは、予め設定される誤検出許容係数である。誤検出許容係数aが大きくなるほど、背景光の検出を、物体で反射した光の検出であると誤検出してしまう頻度が減少する。 Next, in S60, the CPU 51 calculates the threshold Th using the following equation (11). In the following formula (11), a is a preset false detection tolerance coefficient. As the erroneous detection tolerance coefficient a becomes larger, the frequency of erroneously detecting that background light is detected as light reflected by an object decreases.

なお、図3に示す曲線D1は、平均値が背景光ノイズフロアBGNDであり、標準偏差が背景光標準偏差σ_BGNDである正規分布を示す。 Note that the curve D1 shown in FIG. 3 shows a normal distribution in which the average value is the background light noise floor BGND and the standard deviation is the background light standard deviation σ_BGND.

CPU51は、S70にて、S30で作成した画素ヒストグラムと、S60で算出した閾値Thとを用いて、光を反射した物体までの距離(以下、物体距離)を算出する。
具体的には、CPU51は、図3に示すように、まず、距離算出期間Trにおいて、パルス入力個数が閾値Th未満である状態から、パルス入力個数が閾値Th以上である状態へ遷移したときの時間ビンTbinを立ち上り時間ビンとして特定する。図3に示す画素ヒストグラムでは、バーB1に対応する時間ビンTbinが立ち上り時間ビンである。
In S70, the CPU 51 calculates the distance to the object that reflected the light (hereinafter referred to as object distance) using the pixel histogram created in S30 and the threshold Th calculated in S60.
Specifically, as shown in FIG. 3, the CPU 51 first performs a transition from a state in which the number of pulse inputs is less than the threshold Th to a state in which the number of pulse inputs is equal to or greater than the threshold Th during the distance calculation period Tr. Identify time bin Tbin as a rise time bin. In the pixel histogram shown in FIG. 3, the time bin Tbin corresponding to bar B1 is the rise time bin.

さらにCPU51は、距離算出期間Trにおいて、パルス入力個数が閾値Th以上である状態から、パルス入力個数が閾値Th未満である状態へ遷移したときの時間ビンTbinを立ち下り時間ビンとして特定する。図3に示す画素ヒストグラムでは、バーB4に対応する時間ビンTbinが立ち下り時間ビンである。 Furthermore, the CPU 51 specifies, as a falling time bin, a time bin Tbin when the number of pulse inputs changes from a state where the number of pulse inputs is equal to or greater than the threshold value Th to a state where the number of pulse inputs is less than the threshold value Th during the distance calculation period Tr. In the pixel histogram shown in FIG. 3, the time bin Tbin corresponding to bar B4 is the falling time bin.

さらにCPU51は、立ち上り時間ビンに対応する立ち上り時間と、立ち下り時間ビンに対応する立ち下り時間との中間の時間を信号検出時間として算出する。図3に示す画素ヒストグラムでは、照射タイミングからバーB1に対応する時間ビンTbinまでの時間Tuが立ち上り時間であり、照射タイミングからバーB4に対応する時間ビンTbinまでの時間Tdが立ち下り時間である。 Further, the CPU 51 calculates the intermediate time between the rise time corresponding to the rise time bin and the fall time corresponding to the fall time bin as the signal detection time. In the pixel histogram shown in FIG. 3, the time Tu from the irradiation timing to the time bin Tbin corresponding to bar B1 is the rise time, and the time Td from the irradiation timing to the time bin Tbin corresponding to bar B4 is the fall time. .

そしてCPU51は、算出した信号検出時間に基づいて、物体距離を算出する。
S70の処理が終了すると、図4に示すように、CPU51は、S80にて、画素指示値iに格納されている値が全画素数k以上であるか否かを判断する。ここで、画素指示値iに格納されている値が全画素数k未満である場合には、CPU51は、S90にて、画素指示値iに格納されている値に1を加算した加算値を画素指示値iに格納して、S20に移行する。
Then, the CPU 51 calculates the object distance based on the calculated signal detection time.
When the process of S70 is completed, as shown in FIG. 4, the CPU 51 determines in S80 whether the value stored in the pixel instruction value i is greater than or equal to the total number of pixels k. Here, if the value stored in the pixel instruction value i is less than the total number of pixels k, the CPU 51 in S90 adds an additional value of 1 to the value stored in the pixel instruction value i. The pixel instruction value i is stored and the process moves to S20.

一方、画素指示値iに格納されている値が全画素数k以上である場合には、CPU51は、距離測定処理を終了する。
このように構成された距離測定装置1は、照射部2と、受光アレイ部3と、計数部4および信号処理部5とを備える。
On the other hand, if the value stored in the pixel instruction value i is greater than or equal to the total number of pixels k, the CPU 51 ends the distance measurement process.
The distance measuring device 1 configured in this manner includes an irradiating section 2, a light receiving array section 3, a counting section 4, and a signal processing section 5.

照射部2は、パルス状のパルス光を照射する。受光アレイ部3は、フォトンの入射によってパルス信号を出力する複数の光検知器31を備える。
計数部4および信号処理部5は、受光アレイ部3から出力される複数のパルス信号に従い、受光アレイ部3で受光された光量の時間変化を示す画素ヒストグラムを作成する。
The irradiation unit 2 irradiates pulsed light. The light receiving array section 3 includes a plurality of photodetectors 31 that output pulse signals upon incidence of photons.
The counting section 4 and the signal processing section 5 create a pixel histogram showing a temporal change in the amount of light received by the light receiving array section 3 in accordance with the plurality of pulse signals output from the light receiving array section 3.

信号処理部5は、作成された画素ヒストグラムに基づいて、受光アレイ部3により検出される背景光の受光レベルを示す背景光ノイズフロアBGNDを算出する。なお、信号処理部5は、照射部2により照射されたパルス光が受光アレイ部3により受光されていないときにおいて受光アレイ部3により検出される光の受光レベルを背景光ノイズフロアBGNDとして算出する。 The signal processing unit 5 calculates a background light noise floor BGND indicating the level of background light detected by the light receiving array unit 3 based on the created pixel histogram. Note that the signal processing unit 5 calculates the light reception level of light detected by the light receiving array unit 3 as the background light noise floor BGND when the pulsed light irradiated by the irradiating unit 2 is not received by the light receiving array unit 3. .

信号処理部5は、作成された画素ヒストグラムに基づいて、背景光標準偏差σ_BGNDを算出する。信号処理部5は、算出された背景光ノイズフロアBGNDと、算出された背景光標準偏差σ_BGNDとに基づいて、画素ヒストグラムにおいて照射部2により照射されたパルス光を受光アレイ部3で検出したか否かを判断するための閾値Thを算出する。 The signal processing unit 5 calculates the background light standard deviation σ_BGND based on the created pixel histogram. Based on the calculated background light noise floor BGND and the calculated background light standard deviation σ_BGND, the signal processing unit 5 determines whether the light receiving array unit 3 has detected the pulsed light irradiated by the irradiation unit 2 in the pixel histogram. A threshold value Th for determining whether or not the

信号処理部5は、算出された閾値Thに基づいて、パルス光を反射した物体までの距離を算出する。
このように距離測定装置1は、背景光ノイズフロアBGNDと、背景光標準偏差σ_BGNDとに基づいて、閾値Thを算出する。このため、距離測定装置1は、背景光ノイズフロアBGNDのばらつきの大きさ(すなわち、背景光標準偏差σ_BGNDの大きさ)に応じて、閾値Thを変化させることができる。これにより、距離測定装置1は、背景光を物体で反射したパルス光(以下、反射光)であると誤検出してしまったり、物体からの反射光を検出できなかったりする事態の発生を抑制し、距離測定精度を向上させることができる。
The signal processing unit 5 calculates the distance to the object that reflected the pulsed light based on the calculated threshold Th.
In this way, the distance measuring device 1 calculates the threshold Th based on the background light noise floor BGND and the background light standard deviation σ_BGND. Therefore, the distance measuring device 1 can change the threshold Th depending on the magnitude of the variation in the background light noise floor BGND (that is, the magnitude of the background light standard deviation σ_BGND). This prevents the distance measuring device 1 from erroneously detecting background light as pulsed light reflected by an object (hereinafter referred to as reflected light) or from failing to detect reflected light from an object. However, distance measurement accuracy can be improved.

また受光アレイ部3は、複数の光検知器31が一つの画素を形成するように構成され、画素をk個備える。信号処理部5は、算出された背景光ノイズフロアBGNDと、一つの画素を構成する光検知器31の数Nとに基づいて、背景光標準偏差σ_BGNDを算出する。これにより、距離測定装置1は、背景光標準偏差σ_BGNDを簡便に算出することができ、信号処理部5の処理負荷を低減することができる。 Further, the light receiving array section 3 is configured such that a plurality of photodetectors 31 form one pixel, and includes k pixels. The signal processing unit 5 calculates the background light standard deviation σ_BGND based on the calculated background light noise floor BGND and the number N of photodetectors 31 forming one pixel. Thereby, the distance measuring device 1 can easily calculate the background light standard deviation σ_BGND, and can reduce the processing load on the signal processing unit 5.

以上説明した実施形態において、計数部4およびS20,S30はヒストグラム作成部としての処理に相当し、画素ヒストグラムはヒストグラムに相当し、S40はノイズフロア算出部としての処理に相当し、S50はばらつき算出部としての処理に相当し、背景光標準偏差σ_BGNDはばらつきパラメータに相当する。 In the embodiment described above, the counting section 4, S20, and S30 correspond to processing as a histogram creation section, the pixel histogram corresponds to a histogram, S40 corresponds to processing as a noise floor calculation section, and S50 corresponds to processing as a variation calculation section. The background light standard deviation σ_BGND corresponds to a variation parameter.

また、S60は閾値算出部としての処理に相当し、S70は距離算出部としての処理に相当し、画素ユニットPiは画素に相当する。
[第2実施形態]
以下に本開示の第2実施形態を図面とともに説明する。なお第2実施形態では、第1実施形態と異なる部分を説明する。共通する構成については同一の符号を付す。
Further, S60 corresponds to processing as a threshold calculation section, S70 corresponds to processing as a distance calculation section, and the pixel unit Pi corresponds to a pixel.
[Second embodiment]
A second embodiment of the present disclosure will be described below with reference to the drawings. Note that in the second embodiment, different parts from the first embodiment will be explained. Common configurations are given the same reference numerals.

第2実施形態の距離測定装置1は、距離測定処理が変更された点が第1実施形態と異なる。
次に、第2実施形態の距離測定処理の手順を説明する。
The distance measuring device 1 of the second embodiment differs from the first embodiment in that the distance measuring process is changed.
Next, the procedure of distance measurement processing according to the second embodiment will be explained.

第2実施形態の距離測定処理が実行されると、CPU51は、図5に示すように、S210にて、RAM53に設けられた加算回数Countに格納されている値に1を加算した加算値を加算回数Countに格納する。 When the distance measurement process of the second embodiment is executed, the CPU 51 adds 1 to the value stored in the addition count provided in the RAM 53 in S210, as shown in FIG. Store in the addition number Count.

CPU51は、S220にて、全てのヒストグラムメモリM1,M2,・・・,Mkから記憶データを取得する。
CPU51は、S230にて、S220で取得した記憶データを用いて、全ての画素ユニットP1,P2,・・・,Pkのそれぞれの積算画素ヒストグラムを作成する。
In S220, the CPU 51 acquires stored data from all histogram memories M1, M2, . . . , Mk.
In S230, the CPU 51 creates integrated pixel histograms for all pixel units P1, P2, . . . , Pk using the stored data acquired in S220.

具体的には、まず、S220で取得したヒストグラムメモリM1の記憶データを用いて、画素ユニットP1の画素ヒストグラムを作成する。そして、作成した画素ユニットP1の画素ヒストグラムを、RAM53に記憶されている画素ユニットP1の積算画素ヒストグラムに加算する。すなわち、画素ユニットP1の画素ヒストグラムと、画素ユニットP1の積算画素ヒストグラムとについて、識別番号が同じ時間ビンTbinのパルス入力個数を加算して、この加算値を、新たな積算画素ヒストグラムのパルス入力個数とする。そして、画素ユニットP1について作成された新たな積算画素ヒストグラムをRAM53に記憶する。なお、画素ユニットP1の積算画素ヒストグラムがRAM53に記憶されていない場合には、作成した画素ユニットP1の画素ヒストグラムを新たな積算画素ヒストグラムとしてRAM53に記憶する。 Specifically, first, a pixel histogram of the pixel unit P1 is created using the data stored in the histogram memory M1 acquired in S220. Then, the created pixel histogram of the pixel unit P1 is added to the integrated pixel histogram of the pixel unit P1 stored in the RAM 53. That is, for the pixel histogram of pixel unit P1 and the integrated pixel histogram of pixel unit P1, the number of pulse inputs of the time bin Tbin with the same identification number is added, and this added value is used as the number of pulse inputs of the new integrated pixel histogram. shall be. Then, the new integrated pixel histogram created for the pixel unit P1 is stored in the RAM 53. Note that if the integrated pixel histogram of the pixel unit P1 is not stored in the RAM 53, the created pixel histogram of the pixel unit P1 is stored in the RAM 53 as a new integrated pixel histogram.

CPU51は、画素ユニットP2,・・・,Pkについても、画素ユニットP1と同様にして、積算画素ヒストグラムを作成し、RAM53に記憶する。
CPU51は、S240にて、加算回数Countに格納されている値が上限回数n以上であるか否かを判断する。ここで、加算回数Countに格納されている値が上限回数n未満である場合には、CPU51は、距離測定処理を終了する。
The CPU 51 also creates integrated pixel histograms for the pixel units P2, . . . , Pk in the same manner as the pixel unit P1, and stores them in the RAM 53.
In S240, the CPU 51 determines whether the value stored in the number of additions Count is equal to or greater than the upper limit number n. Here, if the value stored in the number of additions Count is less than the upper limit number n, the CPU 51 ends the distance measurement process.

一方、加算回数Countに格納されている値が上限回数n以上である場合には、CPU51は、S250にて、加算回数Countに0を格納する。
これにより、上限回数nだけ繰り返して画素ヒストグラムを加算した積算画素ヒストグラムが作成される。
On the other hand, if the value stored in the number of additions Count is greater than or equal to the upper limit number of times n, the CPU 51 stores 0 in the number of additions Count in S250.
As a result, an integrated pixel histogram is created by adding the pixel histograms repeatedly for the upper limit number of times n.

全ての画素ユニットP1,P2,・・・,Pkのそれぞれの積算画素ヒストグラムは、図6に示すように、照射タイミングを起点とした時間を横軸とし、パルス入力個数を縦軸として、パルス入力個数の時間変化を示すヒストグラムである。縦軸の最大値は、N×nである。 As shown in FIG. 6, the integrated pixel histogram of all the pixel units P1, P2, ..., Pk has the time starting from the irradiation timing on the horizontal axis and the number of pulse inputs on the vertical axis. It is a histogram showing a change in the number of objects over time. The maximum value on the vertical axis is N×n.

積算画素ヒストグラムは、パルス入力個数を時間ビンTbin毎に示す。時間ビンTbinは、直近の照射タイミングから近い順に、1,2,3,・・・・・と識別番号が付されている。そして、識別番号が1からmまでの時間ビンTbinは、背景光ノイズフロア算出期間Tbに対応する。識別番号が(m+1)以降の時間ビンTbinは、距離算出期間Trに対応する。mは2以上の整数である。 The integrated pixel histogram shows the number of pulse inputs for each time bin Tbin. The time bins Tbin are assigned identification numbers 1, 2, 3, . . . in order from the most recent irradiation timing. The time bins Tbin with identification numbers from 1 to m correspond to the background light noise floor calculation period Tb. The time bin Tbin whose identification number is after (m+1) corresponds to the distance calculation period Tr. m is an integer of 2 or more.

図6に示す画素ヒストグラムにおけるバーB11,B12,B13の高さは、物体で反射した光と背景光とによるパルス入力個数を示す。一方、バーB11,B12,B13以外のバーの高さは、背景光によるパルス入力個数を示す。 The heights of bars B11, B12, and B13 in the pixel histogram shown in FIG. 6 indicate the number of pulse inputs due to the light reflected by the object and the background light. On the other hand, the heights of bars other than bars B11, B12, and B13 indicate the number of input pulses due to background light.

S250の処理が終了すると、CPU51は、図5に示すように、S260にて、RAM53に設けられた画素指示値iに1を格納する。
CPU51は、S270にて、RAM53から画素ユニットPiの積算画素ヒストグラムを取得する。
When the process of S250 is completed, the CPU 51 stores 1 in the pixel instruction value i provided in the RAM 53 in S260, as shown in FIG.
In S270, the CPU 51 acquires the integrated pixel histogram of the pixel unit Pi from the RAM 53.

CPU51は、S280にて、画素ユニットPiの積算画素ヒストグラムの背景光ノイズフロアBGND_nを算出する。具体的には、CPU51は、識別番号がjの時間ビンTbinに対応するパルス入力個数をBGND_n_jとして、下式(12)により、背景光ノイズフロアBGND_nを算出する。 In S280, the CPU 51 calculates the background light noise floor BGND_n of the integrated pixel histogram of the pixel unit Pi. Specifically, the CPU 51 calculates the background light noise floor BGND_n using the following equation (12), setting the number of pulse inputs corresponding to the time bin Tbin with the identification number j as BGND_n_j.

CPU51は、S290にて、背景光標準偏差σ_BGND_nを下式(13)により算出する。 In S290, the CPU 51 calculates the background light standard deviation σ_BGND_n using the following equation (13).

ここで、背景光標準偏差σ_BGND_nを下式(13)により算出することができる理由を説明する。
第2実施形態では、パルス入力個数を複数回繰り返して積算した積算画素ヒストグラムが作成されるため、試行回数nは下式(14)で表される。式(14)におけるCountは上記の加算回数である。
Here, the reason why the background light standard deviation σ_BGND_n can be calculated by the following equation (13) will be explained.
In the second embodiment, since an integrated pixel histogram is created by repeating and integrating the number of pulse inputs a plurality of times, the number of trials n is expressed by the following equation (14). Count in equation (14) is the number of additions described above.

式(4)、式(7)および式(14)より、期待値E[X]は下式(15)で表される。式(12)は、識別番号が1からmまでの時間ビンTbinにおけるパルス入力個数の平均値を示しており、式(12)は下式(15)に相当する。 From equations (4), (7), and (14), the expected value E[X] is expressed by the following equation (15). Equation (12) indicates the average value of the number of pulse inputs in time bins Tbin with identification numbers from 1 to m, and Equation (12) corresponds to Equation (15) below.

式(6)、式(7)および式(14)より、標準偏差σ[X]は下式(16)で表される。下式(16)で示す標準偏差σ[X]は、式(13)で示す背景光標準偏差σ_BGND_nに相当する。 From formulas (6), (7), and (14), the standard deviation σ[X] is expressed by the following formula (16). The standard deviation σ[X] shown in equation (16) below corresponds to the background light standard deviation σ_BGND_n shown in equation (13).

次にCPU51は、S300にて、閾値Th_nを下式(17)により算出する。なお、図6に示す曲線D2は、平均値が背景光ノイズフロアBGND_nであり、標準偏差が背景光標準偏差σ_BGND_nである正規分布を示す。 Next, in S300, the CPU 51 calculates the threshold Th_n using the following equation (17). Note that the curve D2 shown in FIG. 6 shows a normal distribution in which the average value is the background light noise floor BGND_n and the standard deviation is the background light standard deviation σ_BGND_n.

CPU51は、S310にて、S270で取得した画素ユニットPiの積算画素ヒストグラムと、S300で算出した閾値Th_nとを用いて、物体距離を算出する。
具体的には、CPU51は、図6に示すように、まず、距離算出期間Trにおいて、パルス入力個数が閾値Th_n未満である状態から、パルス入力個数が閾値Th_n以上である状態へ遷移したときの時間ビンTbinを立ち上り時間ビンとして特定する。図6に示す積算画素ヒストグラムでは、バーB11に対応する時間ビンTbinが立ち上り時間ビンである。
In S310, the CPU 51 calculates the object distance using the integrated pixel histogram of the pixel unit Pi acquired in S270 and the threshold Th_n calculated in S300.
Specifically, as shown in FIG. 6, the CPU 51 first performs a transition from a state in which the number of pulse inputs is less than the threshold value Th_n to a state in which the number of pulse inputs is equal to or greater than the threshold value Th_n during the distance calculation period Tr. Identify time bin Tbin as a rise time bin. In the integrated pixel histogram shown in FIG. 6, the time bin Tbin corresponding to bar B11 is the rise time bin.

さらにCPU51は、距離算出期間Trにおいて、パルス入力個数が閾値Th_n以上である状態から、パルス入力個数が閾値Th_n未満である状態へ遷移したときの時間ビンTbinを立ち下り時間ビンとして特定する。図6に示す積算画素ヒストグラムでは、バーB14に対応する時間ビンTbinが立ち下り時間ビンである。 Further, the CPU 51 specifies, as a falling time bin, a time bin Tbin when the number of pulse inputs changes from a state where the number of pulse inputs is equal to or greater than the threshold value Th_n to a state where the number of pulse inputs is less than the threshold value Th_n during the distance calculation period Tr. In the integrated pixel histogram shown in FIG. 6, the time bin Tbin corresponding to bar B14 is the falling time bin.

さらにCPU51は、立ち上り時間ビンに対応する立ち上り時間と、立ち下り時間ビンに対応する立ち下り時間との中間の時間を信号検出時間として算出する。図6に示す積算画素ヒストグラムでは、照射タイミングからバーB11に対応する時間ビンTbinまでの時間Tuが立ち上り時間であり、照射タイミングからバーB14に対応する時間ビンTbinまでの時間Tdが立ち下り時間である。 Further, the CPU 51 calculates the intermediate time between the rise time corresponding to the rise time bin and the fall time corresponding to the fall time bin as the signal detection time. In the integrated pixel histogram shown in FIG. 6, the time Tu from the irradiation timing to the time bin Tbin corresponding to bar B11 is the rise time, and the time Td from the irradiation timing to the time bin Tbin corresponding to the bar B14 is the fall time. be.

そしてCPU51は、算出した信号検出時間に基づいて、物体距離を算出する。
S310の処理が終了すると、図5に示すように、CPU51は、S320にて、画素指示値iに格納されている値が全画素数k以上であるか否かを判断する。ここで、画素指示値iに格納されている値が全画素数k未満である場合には、CPU51は、S330にて、画素指示値iに格納されている値に1を加算した加算値を画素指示値iに格納して、S270に移行する。
Then, the CPU 51 calculates the object distance based on the calculated signal detection time.
When the process of S310 is completed, as shown in FIG. 5, the CPU 51 determines in S320 whether the value stored in the pixel instruction value i is greater than or equal to the total number of pixels k. Here, if the value stored in the pixel instruction value i is less than the total number of pixels k, the CPU 51 in S330 adds an additional value of 1 to the value stored in the pixel instruction value i. The pixel instruction value i is stored, and the process moves to S270.

一方、画素指示値iに格納されている値が全画素数k以上である場合には、CPU51は、S340にて、RAM53に記憶されている全ての画素ユニットP1,P2,・・・,Pkの積算画素ヒストグラムをRAM53から消去して、距離測定処理を終了する。 On the other hand, if the value stored in the pixel instruction value i is greater than or equal to the total number of pixels k, the CPU 51 in S340 selects all pixel units P1, P2, ..., Pk stored in the RAM 53. The accumulated pixel histogram is deleted from the RAM 53, and the distance measurement process is ended.

このように構成された距離測定装置1は、照射部2と、受光アレイ部3と、計数部4および信号処理部5とを備える。
照射部2は、パルス状のパルス光を照射する。受光アレイ部3は、フォトンの入射によってパルス信号を出力する複数の光検知器31を備える。
The distance measuring device 1 configured in this manner includes an irradiating section 2, a light receiving array section 3, a counting section 4, and a signal processing section 5.
The irradiation unit 2 irradiates pulsed light. The light receiving array section 3 includes a plurality of photodetectors 31 that output pulse signals upon incidence of photons.

計数部4および信号処理部5は、受光アレイ部3から出力される複数のパルス信号に従い、受光アレイ部3で受光された光量の時間変化を示す積算画素ヒストグラムを作成する。 The counting section 4 and the signal processing section 5 create an integrated pixel histogram showing a temporal change in the amount of light received by the light receiving array section 3 according to the plurality of pulse signals output from the light receiving array section 3.

計数部4および信号処理部5は、照射部2がパルス光を照射してから受光アレイ部3がパルス光を検出するまでの光検出動作をn回実行することにより得られたn回の検出結果を積算することによって、積算画素ヒストグラムを作成する。 The counting unit 4 and the signal processing unit 5 detect n times obtained by performing a photodetection operation n times from when the irradiation unit 2 irradiates the pulsed light until the light receiving array unit 3 detects the pulsed light. By integrating the results, an integrated pixel histogram is created.

信号処理部5は、作成された積算画素ヒストグラムに基づいて、受光アレイ部3により検出される背景光の受光レベルを示す背景光ノイズフロアBGND_nを算出する。
信号処理部5は、作成された積算画素ヒストグラムに基づいて、背景光標準偏差σ_BGND_nを算出する。信号処理部5は、算出された背景光ノイズフロアBGND_nと、算出された背景光標準偏差σ_BGND_nとに基づいて、積算画素ヒストグラムにおいて照射部2により照射されたパルス光を受光アレイ部3で検出したか否かを判断するための閾値Th_nを算出する。
The signal processing unit 5 calculates a background light noise floor BGND_n indicating the level of background light detected by the light receiving array unit 3 based on the created integrated pixel histogram.
The signal processing unit 5 calculates the background light standard deviation σ_BGND_n based on the created integrated pixel histogram. Based on the calculated background light noise floor BGND_n and the calculated background light standard deviation σ_BGND_n, the signal processing unit 5 detected the pulsed light irradiated by the irradiation unit 2 in the integrated pixel histogram using the light receiving array unit 3. A threshold value Th_n for determining whether or not is calculated.

信号処理部5は、算出された閾値Th_nに基づいて、パルス光を反射した物体までの距離を算出する。
このように距離測定装置1は、背景光ノイズフロアBGND_nと、背景光標準偏差σ_BGND_nとに基づいて、閾値Th_nを算出する。このため、距離測定装置1は、背景光ノイズフロアBGND_nのばらつきの大きさ(すなわち、背景光標準偏差σ_BGND_nの大きさ)に応じて、閾値Th_nを変化させることができる。これにより、距離測定装置1は、背景光を反射光であると誤検出してしまったり、物体からの反射光を検出できなかったりする事態の発生を抑制し、距離測定精度を向上させることができる。
The signal processing unit 5 calculates the distance to the object that reflected the pulsed light based on the calculated threshold Th_n.
In this way, the distance measuring device 1 calculates the threshold Th_n based on the background light noise floor BGND_n and the background light standard deviation σ_BGND_n. Therefore, the distance measuring device 1 can change the threshold Th_n depending on the magnitude of the variation in the background light noise floor BGND_n (that is, the magnitude of the background light standard deviation σ_BGND_n). As a result, the distance measuring device 1 can suppress the occurrence of situations in which background light is mistakenly detected as reflected light or cannot detect reflected light from an object, and can improve distance measurement accuracy. can.

また受光アレイ部3は、複数の光検知器31が一つの画素を形成するように構成され、画素をk個備える。信号処理部5は、算出された背景光ノイズフロアBGND_nと、一つの画素を構成する光検知器31の数Nと、光検出動作をn回実行することにより得られたn回の検出結果を積算することにより作成された積算画素ヒストグラムの積算回数nとに基づいて、背景光標準偏差σ_BGND_nを算出する。これにより、距離測定装置1は、背景光標準偏差σ_BGND_nを簡便に算出することができ、信号処理部5の処理負荷を低減することができる。 Further, the light receiving array section 3 is configured such that a plurality of photodetectors 31 form one pixel, and includes k pixels. The signal processing unit 5 calculates the calculated background light noise floor BGND_n, the number N of photodetectors 31 constituting one pixel, and the n detection results obtained by performing the photodetection operation n times. The background light standard deviation σ_BGND_n is calculated based on the number of integrations n of the integrated pixel histogram created by the integration. Thereby, the distance measuring device 1 can easily calculate the background light standard deviation σ_BGND_n, and can reduce the processing load on the signal processing unit 5.

また距離測定装置1は、n個の画素ヒストグラムを積算することによって、積算画素ヒストグラムを作成する。このようにして、1回の距離測定で用いるパルス光の数を増加させることにより、積算画素ヒストグラムにおけるSN比を向上させることができ、距離測定精度を更に向上させることができる。 Further, the distance measuring device 1 creates an integrated pixel histogram by integrating n pixel histograms. In this way, by increasing the number of pulsed lights used in one distance measurement, the SN ratio in the integrated pixel histogram can be improved, and the distance measurement accuracy can be further improved.

以上説明した実施形態において、計数部4およびS210~S250はヒストグラム作成部としての処理に相当し、積算画素ヒストグラムはヒストグラムに相当し、S280はノイズフロア算出部としての処理に相当し、S290はばらつき算出部としての処理に相当し、背景光標準偏差σ_BGND_nはばらつきパラメータに相当する。 In the embodiment described above, the counting unit 4 and S210 to S250 correspond to processing as a histogram creation unit, the integrated pixel histogram corresponds to a histogram, S280 corresponds to processing as a noise floor calculation unit, and S290 corresponds to processing as a noise floor calculation unit. This corresponds to processing as a calculation unit, and the background light standard deviation σ_BGND_n corresponds to a variation parameter.

また、S300は閾値算出部としての処理に相当し、S310は距離算出部としての処理に相当する。
[第3実施形態]
以下に本開示の第3実施形態を図面とともに説明する。なお第3実施形態では、第2実施形態と異なる部分を説明する。共通する構成については同一の符号を付す。
Further, S300 corresponds to processing as a threshold value calculation section, and S310 corresponds to processing as a distance calculation section.
[Third embodiment]
A third embodiment of the present disclosure will be described below with reference to the drawings. Note that in the third embodiment, parts different from the second embodiment will be explained. Common configurations are given the same reference numerals.

第3実施形態の距離測定装置1は、距離測定処理が変更された点が第2実施形態と異なる。
第3実施形態の距離測定処理は、図7に示すように、S300の代わりにS305の処理を実行する点が第2実施形態と異なる。
The distance measuring device 1 of the third embodiment differs from the second embodiment in that the distance measuring process is changed.
The distance measurement process of the third embodiment differs from the second embodiment in that, as shown in FIG. 7, the process of S305 is executed instead of S300.

すなわち、S290の処理が終了すると、CPU51は、S305にて、ROM52に記憶されている閾値テーブルTB1を参照して、閾値Th_nを算出し、S310に移行する。 That is, when the process of S290 is completed, the CPU 51 refers to the threshold value table TB1 stored in the ROM 52 in S305, calculates the threshold value Th_n, and proceeds to S310.

閾値テーブルTB1は、図8に示すように、背景光ノイズフロアBGND_nと閾値Th_nとの対応関係を設定する。具体的には、閾値テーブルTB1は、背景光ノイズフロアBGND_nが0,1,・・・,N×nであるときの閾値Th_nをそれぞれ、閾値th_BGND_0,th_BGND_1,・・・,th_BGND_N×nとして記憶する。閾値th_BGND_xは、下式(18)で算出される値である。xは、0からN×nまでの整数である。 As shown in FIG. 8, the threshold table TB1 sets the correspondence between the background light noise floor BGND_n and the threshold Th_n. Specifically, the threshold table TB1 stores thresholds Th_n when the background light noise floor BGND_n is 0, 1, ..., N×n as thresholds th_BGND_0, th_BGND_1, ..., th_BGND_N×n, respectively. do. The threshold value th_BGND_x is a value calculated by the following formula (18). x is an integer from 0 to N×n.

以上説明した実施形態において、S305は閾値算出部としての処理に相当する。
以上、本開示の一実施形態について説明したが、本開示は上記実施形態に限定されるものではなく、種々変形して実施することができる。
In the embodiment described above, S305 corresponds to processing as a threshold value calculation unit.
Although one embodiment of the present disclosure has been described above, the present disclosure is not limited to the above embodiment, and can be implemented with various modifications.

[変形例1]
例えば上記実施形態では、背景光ノイズフロアBGND,BGND_nを、背景光ノイズフロア算出期間Tbにおけるパルス入力個数の平均値として算出する形態を示した。しかし、背景光ノイズフロアBGND,BGND_nを、背景光ノイズフロア算出期間Tbにおけるパルス入力個数の中央値として算出するようにしてもよい。
[Modification 1]
For example, in the above embodiment, the background light noise floor BGND, BGND_n is calculated as the average value of the number of input pulses in the background light noise floor calculation period Tb. However, the background light noise floors BGND and BGND_n may be calculated as the median value of the number of input pulses during the background light noise floor calculation period Tb.

[変形例2]
上記第3実施形態では、閾値テーブルTB1を参照して閾値Th_nを算出する形態を示した。しかし、第1実施形態の閾値Thを、図9に示す閾値テーブルTB2を参照することにより算出するようにしてもよい。閾値テーブルTB2は、図9に示すように、背景光ノイズフロアBGNDと閾値Thとの対応関係を設定する。具体的には、閾値テーブルTB1は、背景光ノイズフロアBGNDが0,1,・・・,Nであるときの閾値Thをそれぞれ、閾値th_BGND_0,th_BGND_1,・・・,th_BGND_Nとして記憶する。閾値th_BGND_yは、下式(19)で算出される値である。yは、0からNまでの整数である。
[Modification 2]
In the third embodiment, the threshold Th_n is calculated by referring to the threshold table TB1. However, the threshold Th in the first embodiment may be calculated by referring to the threshold table TB2 shown in FIG. As shown in FIG. 9, the threshold table TB2 sets the correspondence between the background light noise floor BGND and the threshold Th. Specifically, the threshold table TB1 stores thresholds Th when the background light noise floor BGND is 0, 1, . . . , N as thresholds th_BGND_0, th_BGND_1, . . . , th_BGND_N. The threshold value th_BGND_y is a value calculated by the following formula (19). y is an integer from 0 to N.

[変形例3]
上記実施形態では、背景光ノイズフロア算出期間Tbにおけるパルス入力個数に基づいて背景光ノイズフロアBGND,BGND_nを算出する形態を示した。しかし、距離算出期間Trにおけるパルス入力個数も用いて背景光ノイズフロアBGND,BGND_nを算出するようにしてもよい。
[Modification 3]
In the embodiment described above, the background light noise floors BGND and BGND_n are calculated based on the number of input pulses in the background light noise floor calculation period Tb. However, the background light noise floors BGND and BGND_n may also be calculated using the number of pulse inputs during the distance calculation period Tr.

本開示に記載の信号処理部5およびその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサおよびメモリを構成することによって提供された専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の信号処理部5およびその手法は、一つ以上の専用ハードウェア論理回路によってプロセッサを構成することによって提供された専用コンピュータにより、実現されてもよい。もしくは、本開示に記載の信号処理部5およびその手法は、一つ乃至は複数の機能を実行するようにプログラムされたプロセッサおよびメモリと一つ以上のハードウェア論理回路によって構成されたプロセッサとの組み合わせにより構成された一つ以上の専用コンピュータにより、実現されてもよい。また、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されてもよい。信号処理部5に含まれる各部の機能を実現する手法には、必ずしもソフトウェアが含まれている必要はなく、その全部の機能が、一つあるいは複数のハードウェアを用いて実現されてもよい。 The signal processing unit 5 and its method described in the present disclosure are implemented by a dedicated computer provided by configuring a processor and memory programmed to perform one or more functions embodied by a computer program. , may be realized. Alternatively, the signal processing unit 5 and its techniques described in this disclosure may be implemented by a dedicated computer provided by a processor configured with one or more dedicated hardware logic circuits. Alternatively, the signal processing unit 5 and its method described in the present disclosure may include a processor configured to execute one or more functions, a memory, and one or more hardware logic circuits. It may also be realized by one or more dedicated computers configured in combination. The computer program may also be stored as instructions executed by a computer on a computer-readable non-transitory tangible storage medium. The method for realizing the functions of each section included in the signal processing section 5 does not necessarily need to include software, and all the functions may be realized using one or more pieces of hardware.

上記実施形態における1つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、1つの構成要素が有する1つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、1つの構成要素によって実現したり、複数の構成要素によって実現される1つの機能を、1つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加または置換してもよい。 A plurality of functions of one component in the above embodiment may be realized by a plurality of components, and a function of one component may be realized by a plurality of components. Further, a plurality of functions possessed by a plurality of constituent elements may be realized by one constituent element, or one function realized by a plurality of constituent elements may be realized by one constituent element. Further, a part of the configuration of the above embodiment may be omitted. Further, at least a part of the configuration of the above embodiment may be added to or replaced with the configuration of other embodiments.

上述した距離測定装置1の他、当該距離測定装置1を構成要素とするシステム、当該距離測定装置1としてコンピュータを機能させるためのプログラム、このプログラムを記録した半導体メモリ等の非遷移的実体的記録媒体、距離測定方法など、種々の形態で本開示を実現することもできる。 In addition to the distance measuring device 1 described above, a system including the distance measuring device 1 as a component, a program for making a computer function as the distance measuring device 1, and a non-transitional physical record such as a semiconductor memory in which this program is recorded. The present disclosure can also be implemented in various forms such as media, distance measurement methods, etc.

1…距離測定装置、2…照射部、3…受光アレイ部、4…計数部、5…信号処理部、31…光検知器 DESCRIPTION OF SYMBOLS 1... Distance measuring device, 2... Irradiation part, 3... Light receiving array part, 4... Counting part, 5... Signal processing part, 31... Photodetector

Claims (3)

パルス状のパルス光を照射するように構成された照射部(2)と、
フォトンの入射によってパルス信号を出力する複数の光検知器(31)を備える受光アレイ部(3)と、
前記受光アレイ部から出力される複数の前記パルス信号に従い、前記受光アレイ部で受光された光量の時間変化を示すヒストグラムを作成するように構成されたヒストグラム作成部(4,S20,S30,S210~S250)と、
前記ヒストグラム作成部により作成された前記ヒストグラムに基づいて、前記受光アレイ部により検出される背景光の受光レベルを示す背景光ノイズフロアを算出するように構成されたノイズフロア算出部(S40,S280)と、
前記ヒストグラム作成部により作成された前記ヒストグラムに基づいて、前記背景光ノイズフロアのばらつきの度合いを示すばらつきパラメータを算出するように構成されたばらつき算出部(S50,S290)と、
前記ノイズフロア算出部により算出された前記背景光ノイズフロアと、前記ばらつき算出部により算出された前記ばらつきパラメータとに基づいて、前記ヒストグラムにおいて前記照射部により照射された前記パルス光を前記受光アレイ部で検出したか否かを判断するための閾値を算出するように構成された閾値算出部(S60,S300,S305)と、
前記閾値算出部により算出された前記閾値に基づいて、前記パルス光を反射した物体までの距離を算出するように構成された距離算出部(S70,S310)と
を備え、
前記受光アレイ部は、複数の前記光検知器が一つの画素を形成するように構成され、前記画素を1つ以上備え、
前記ばらつき算出部は、前記ノイズフロア算出部により算出された前記背景光ノイズフロアをBGND_nとし、一つの前記画素を構成する前記光検知器の数をNとし、前記照射部が前記パルス光を照射してから前記受光アレイ部が前記パルス光を検出するまでの光検出動作を1回または複数回実行することにより得られた検出結果を積算することにより作成された前記ヒストグラムの積算回数をnとし、前記ばらつきパラメータをσ_BGND_nとして、前記ばらつきパラメータを下式(13)により算出する距離測定装置(1)。
Figure 0007388141000017
an irradiation unit (2) configured to irradiate pulsed light;
a light receiving array section (3) comprising a plurality of photodetectors (31) that output pulse signals upon incidence of photons;
a histogram creation unit (4, S20, S30, S210 to S250) and
a noise floor calculation unit (S40, S280) configured to calculate a background light noise floor indicating a reception level of background light detected by the light receiving array unit based on the histogram created by the histogram creation unit; and,
a variation calculation unit (S50, S290) configured to calculate a variation parameter indicating a degree of variation in the background light noise floor based on the histogram created by the histogram creation unit;
Based on the background light noise floor calculated by the noise floor calculation unit and the variation parameter calculated by the variation calculation unit, the pulsed light irradiated by the irradiation unit is applied to the light receiving array unit in the histogram. a threshold value calculation unit (S60, S300, S305) configured to calculate a threshold value for determining whether or not it has been detected;
a distance calculation unit (S70, S310) configured to calculate a distance to an object that reflects the pulsed light based on the threshold calculated by the threshold calculation unit ;
The light receiving array section is configured such that a plurality of the photodetectors form one pixel, and includes one or more of the pixels,
The variation calculation unit sets the background light noise floor calculated by the noise floor calculation unit as BGND_n, the number of the photodetectors forming one pixel as N, and the irradiation unit irradiates the pulsed light. Let n be the number of times the histogram is integrated, which is created by integrating the detection results obtained by performing the light detection operation once or multiple times until the light receiving array section detects the pulsed light. , a distance measuring device (1) that calculates the variation parameter by the following equation (13), where the variation parameter is σ_BGND_n.
Figure 0007388141000017
請求項1に記載の距離測定装置であって、
前記ノイズフロア算出部は、前記照射部により照射された前記パルス光が前記受光アレイ部により受光されていないときにおいて前記受光アレイ部により検出される光の受光レベルを前記背景光ノイズフロアとして算出する距離測定装置。
The distance measuring device according to claim 1,
The noise floor calculation unit calculates, as the background light noise floor, a light reception level of light detected by the light reception array unit when the pulsed light irradiated by the irradiation unit is not received by the light reception array unit. Distance measuring device.
請求項1または請求項2に記載の距離測定装置であって、
前記ヒストグラム作成部(4,S210~S250)は、前記照射部が前記パルス光を照射してから前記受光アレイ部が前記パルス光を検出するまでの光検出動作を複数回実行することにより得られた前記複数回の検出結果を積算することによって、前記ヒストグラムを作成する距離測定装置。
The distance measuring device according to claim 1 or 2 ,
The histogram creation unit (4, S210 to S250) is configured to obtain a histogram by performing a photodetection operation multiple times from when the irradiation unit irradiates the pulsed light to when the light receiving array unit detects the pulsed light. A distance measuring device that creates the histogram by integrating the detection results of the plurality of times.
JP2019204613A 2019-11-12 2019-11-12 distance measuring device Active JP7388141B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019204613A JP7388141B2 (en) 2019-11-12 2019-11-12 distance measuring device
PCT/JP2020/041197 WO2021095601A1 (en) 2019-11-12 2020-11-04 Distance measurement device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019204613A JP7388141B2 (en) 2019-11-12 2019-11-12 distance measuring device

Publications (2)

Publication Number Publication Date
JP2021076517A JP2021076517A (en) 2021-05-20
JP7388141B2 true JP7388141B2 (en) 2023-11-29

Family

ID=75897569

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019204613A Active JP7388141B2 (en) 2019-11-12 2019-11-12 distance measuring device

Country Status (2)

Country Link
JP (1) JP7388141B2 (en)
WO (1) WO2021095601A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114114300B (en) * 2022-01-25 2022-05-24 深圳市灵明光子科技有限公司 Scattered point redistribution distance measuring device and laser detection system

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010091377A (en) 2008-10-07 2010-04-22 Toyota Motor Corp Apparatus and method for optical distance measurement
JP2012037267A (en) 2010-08-04 2012-02-23 Hitachi High-Technologies Corp Method for detecting quantity of light and apparatus therefor
JP2016161438A (en) 2015-03-03 2016-09-05 株式会社デンソー Arithmetic unit
US20170176578A1 (en) 2015-12-18 2017-06-22 Stmicroelectronics (Research & Development) Limited Ranging apparatus
CN107015234A (en) 2017-05-19 2017-08-04 中国科学院国家天文台长春人造卫星观测站 Embedded satellite laser ranging control system
JP2018091760A (en) 2016-12-05 2018-06-14 株式会社豊田中央研究所 Optical measurement device, optical measurement method, and optical measurement program
JP2019100919A (en) 2017-12-05 2019-06-24 シャープ株式会社 Light reception element, time-of-flight measurement device, and optical radar device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010091377A (en) 2008-10-07 2010-04-22 Toyota Motor Corp Apparatus and method for optical distance measurement
JP2012037267A (en) 2010-08-04 2012-02-23 Hitachi High-Technologies Corp Method for detecting quantity of light and apparatus therefor
JP2016161438A (en) 2015-03-03 2016-09-05 株式会社デンソー Arithmetic unit
US20170176578A1 (en) 2015-12-18 2017-06-22 Stmicroelectronics (Research & Development) Limited Ranging apparatus
JP2018091760A (en) 2016-12-05 2018-06-14 株式会社豊田中央研究所 Optical measurement device, optical measurement method, and optical measurement program
CN107015234A (en) 2017-05-19 2017-08-04 中国科学院国家天文台长春人造卫星观测站 Embedded satellite laser ranging control system
JP2019100919A (en) 2017-12-05 2019-06-24 シャープ株式会社 Light reception element, time-of-flight measurement device, and optical radar device

Also Published As

Publication number Publication date
WO2021095601A1 (en) 2021-05-20
JP2021076517A (en) 2021-05-20

Similar Documents

Publication Publication Date Title
CN109100702B (en) Photoelectric sensor and method for measuring distance to object
US11668826B2 (en) Photodetector
CN109115334B (en) Optical detection device
JP6443132B2 (en) Arithmetic unit
JP6863342B2 (en) Optical ranging device
JP6761001B2 (en) A device for measuring a distance and a method for measuring the distance
US20160284743A1 (en) Circuit and method for controlling a spad array
JP6849125B2 (en) Optical measuring device
JP6709335B2 (en) Optical sensor, electronic device, arithmetic unit, and method for measuring distance between optical sensor and detection target
JP6641006B2 (en) Optical sensors and electronic devices
WO2021095657A1 (en) Distance measuring device
JP7388141B2 (en) distance measuring device
WO2018190276A1 (en) Optical measuring device
WO2018235944A1 (en) Optical distance measurement device
JP6728369B2 (en) Optical sensor and electronic equipment
KR102198941B1 (en) Apparatus and Method for measuring distance using SPAD(Single Photon Avalanche Diode) using TOF(Time of Flight)
JPWO2019050024A1 (en) Distance measurement method and distance measurement device
JPWO2020021914A1 (en) Distance measuring device and reliability judgment method
US20220003864A1 (en) Distance measuring method, distance measuring device, and recording medium
CN110799854B (en) Optical distance measuring device
US20240125933A1 (en) Ranging device
US20240036198A1 (en) Optical Ranging Device
US20240022831A1 (en) Ranging device
Ma et al. Modeling and Analysis of Noise Reduction Method in SPAD-Based LiDAR System

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221013

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230627

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230810

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231017

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231030

R151 Written notification of patent or utility model registration

Ref document number: 7388141

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151