WO2023145261A1 - 測距装置および測距装置の制御方法 - Google Patents

測距装置および測距装置の制御方法 Download PDF

Info

Publication number
WO2023145261A1
WO2023145261A1 PCT/JP2022/044859 JP2022044859W WO2023145261A1 WO 2023145261 A1 WO2023145261 A1 WO 2023145261A1 JP 2022044859 W JP2022044859 W JP 2022044859W WO 2023145261 A1 WO2023145261 A1 WO 2023145261A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
sampling
histogram
unit
pulsed light
Prior art date
Application number
PCT/JP2022/044859
Other languages
English (en)
French (fr)
Inventor
玉清 劉
昌宏 細谷
Original Assignee
ソニーセミコンダクタソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーセミコンダクタソリューションズ株式会社 filed Critical ソニーセミコンダクタソリューションズ株式会社
Publication of WO2023145261A1 publication Critical patent/WO2023145261A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/10Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/484Transmitters
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4865Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak

Definitions

  • This technology relates to rangefinders. Specifically, the present invention relates to a ToF (Time of Flight) rangefinder and a control method for the rangefinder.
  • ToF Time of Flight
  • the object As a device for measuring the distance to an object (subject), the object is irradiated with light from the light source, and the irradiated light is reflected by the object and returns to the light detection unit.
  • a ToF rangefinder that measures the distance to an object by measuring the time of flight of light to the object.
  • a pulsed light (pulse light) is emitted from a light source to an object to be measured, and a histogram is generated for the reflected pulsed light from the object to be measured based on the irradiated pulsed light. , the distance to the target object is measured based on the histogram (see, for example, Patent Document 1).
  • the histogram is a graph showing the intensity of the reflected pulsed light for each time until the photodetector receives the reflected pulsed light from the object for distance measurement based on the irradiated pulsed light.
  • the median value between the maximum value and the minimum value of the histogram may be used as the threshold for the intensity of the reflected pulsed light in the distance calculation.
  • the distance calculation is performed at the half-value position of the histogram of the reflected pulsed light returning from the object for distance measurement.
  • the histogram saturates, the slope of the histogram becomes steeper and the histogram height may only be 0 and the maximum value.
  • distance calculation cannot be performed with a finer resolution than the sampling rate of the sampling circuit section in the previous stage.
  • This technology was created in view of this situation, and aims to enable distance calculation with a finer resolution than the sampling rate of the sampling circuit unit.
  • a photodetector that receives the reflected pulsed light from the object for distance measurement based on the pulsed light on a pixel-by-pixel basis, and an output signal of the photodetector that is based on the reflected pulsed light, sampled at a predetermined sampling frequency, a sampling circuit section for outputting a sampling value; a histogram generating section for generating a histogram indicating intensity of the reflected pulsed light for each time based on the sampling value output from the sampling circuit section; and the sampling circuit section. and a control section for controlling the input timing of the sampling values input from the histogram generation section to the histogram generation section.
  • the control unit when the light source unit continuously irradiates the object for distance measurement with the pulsed light a plurality of times, the control unit is configured such that the light source unit continuously irradiates the object a plurality of times.
  • the input timing of the sampling value may be controlled by controlling the emission timing of the pulsed light. This has the effect of generating a histogram with smooth rising and falling edges.
  • control unit may control the emission timing of the second and subsequent light irradiations when the histogram based on the first light irradiation is equal to or greater than a predetermined threshold value. This brings about an effect that it is not necessary to constantly control the emission timing of the pulsed light.
  • the control section may correspond to the sampling circuit section for the one macro pixel.
  • the input timing of the sampling values may be controlled by controlling the output signals of the plurality of light receiving elements in (1) to be sampled at different timings. This has the effect of generating a histogram with smooth rising and falling edges.
  • control unit controls the sampling circuit unit to sample the output signals of the plurality of light receiving elements at different timings when the histogram is equal to or greater than a predetermined threshold. You may do so. This provides an effect that it is not always necessary to perform control for sampling the output signals of the plurality of light receiving elements at different timings.
  • the control section controls the plurality of light receiving elements in the one macro pixel.
  • the input timing of the sampling values may be controlled by controlling to give different delays to the respective output signals of . This has the effect of generating a histogram with smooth rising and falling edges.
  • control unit may perform control to give different delays to the output signals of the plurality of light receiving elements when the histogram is equal to or greater than a predetermined threshold. This brings about an effect that it is not always necessary to perform control to give different delays to the output signals of the plurality of light receiving elements.
  • the light receiving element forming the pixel of the photodetector may be an avalanche diode, such as a single-photon avalanche diode. This brings about the effect that a signal can be generated according to the reception of photons.
  • a second aspect of the present technology is a light source unit that irradiates a distance measurement object with pulsed light, and reflected pulsed light from the distance measurement object based on the irradiation pulse light from the light source unit.
  • a photodetector for receiving the light in units of pixels; a sampling circuit for sampling the output signal of the photodetector based on the reflected pulsed light at a predetermined sampling frequency and outputting a sampled value; and a histogram generating section for generating a histogram indicating the intensity of the reflected pulsed light for each time based on the output sampling values, wherein the histogram is generated from the sampling circuit section.
  • a control method of a distance measuring device for controlling the input timing of the sampling values input to the generator. This brings about an effect that the distance calculation can be performed with finer resolution than the sampling rate of the sampling circuit section.
  • FIG. 1 is a conceptual diagram showing a system configuration example of a ToF distance measuring system
  • FIG. 1 is a block diagram showing an example of a basic configuration of a ToF rangefinder
  • FIG. 1 is a circuit diagram showing an example of a basic pixel circuit using SPAD elements
  • FIG. 3 is a diagram illustrating current-voltage characteristics of a PN junction of a SPAD element and circuit operation of a pixel circuit using the SPAD element
  • FIG. 4 is a block diagram showing an example of a basic configuration of a signal processing section in a photodetector using SPAD elements
  • FIG. 10 is an explanatory diagram of an example of distance calculation
  • It is a block diagram showing an example of composition of a ranging device in a 1st embodiment of this art.
  • FIG. 4 is a timing chart for explaining the operation of the distance measuring device according to the first embodiment of the present technology; It is a block diagram showing an example of composition of a ranging device in a 2nd embodiment of this art. 9 is a timing chart for explaining the operation of the distance measuring device according to the second embodiment of the present technology; It is a block diagram showing an example of composition of a ranging device in a 3rd embodiment of this art. It is a timing chart for explaining the operation of the distance measuring device according to the third embodiment of the present technology. It is a block diagram showing an example of composition of a ranging device in a 4th embodiment of this art. It is a block diagram showing an example of composition of a ranging device in a 5th embodiment of this art.
  • FIG. 1 is a block diagram showing a schematic configuration example of a vehicle control system
  • FIG. 4 is an explanatory diagram showing an example of an installation position of an imaging unit
  • ToF type ranging system 2 First embodiment (example of controlling emission timing of irradiation laser pulse light when emitted continuously a plurality of times) 3. Second Embodiment (Example of Sampling Output Signals of Four SPAD Elements in One Macro Pixel at Different Timings) 4. Third Embodiment (Example of Giving Different Delays to Each Output Signal of Three SPAD Elements in One Macro Pixel) 5. Fourth Embodiment (Modification of First Embodiment: Example of Changing Control Depending on Whether Histogram Is Saturated) 6.
  • FIG. 1 is a conceptual diagram showing a system configuration example of a ToF distance measuring system.
  • the distance measurement device 1 employs the ToF method as a measurement method for measuring the distance to the subject 10 that is the distance measurement object.
  • the ToF method is a method of measuring the time it takes for the light emitted toward the subject 10 to return after being reflected by the subject 10 .
  • the distance measuring device 1 includes a light source unit 20 that emits light (for example, laser light having a peak wavelength in the infrared wavelength region) to irradiate the subject 10, and A light detection unit 30 having a plurality of pixels and detecting reflected light returning after being reflected by the subject 10 in units of pixels is provided.
  • a light source unit 20 that emits light (for example, laser light having a peak wavelength in the infrared wavelength region) to irradiate the subject 10
  • a light detection unit 30 having a plurality of pixels and detecting reflected light returning after being reflected by the subject 10 in units of pixels is provided.
  • FIG. 2 shows an example of the basic configuration of the ToF rangefinder 1 . 2 shows the overall configuration of the distance measuring device 1, and b in FIG.
  • the light source unit 20 has, for example, a laser driving unit 21, a laser light source 22, and a diffusion lens 23, and irradiates laser light onto the subject 10, which is the target for distance measurement.
  • the laser driver 21 drives the laser light source 22 under the control of the controller 40 .
  • the laser light source 22 uses, for example, a semiconductor laser as a light source, and emits pulsed laser light (hereinafter sometimes referred to as laser pulse light) while being driven by the laser drive unit 21 .
  • the diffusion lens 23 diffuses the laser pulse light emitted from the laser light source 22 and irradiates the subject 10 with the laser pulse light.
  • the light detection unit 30 includes a light receiving lens 31, an optical sensor 32, and a signal processing unit 33, and detects reflected laser pulse light that is emitted from the light source unit 20 and is reflected by the object 10 and returns. receive light.
  • the light receiving lens 31 collects the reflected laser pulse light from the subject 10 onto the light receiving surface of the optical sensor 32 .
  • the optical sensor 32 has a plurality of pixels, receives the reflected laser pulse light from the subject 10 through the light receiving lens 31 in units of pixels, and photoelectrically converts the light.
  • a two-dimensional array sensor in which pixels including light receiving elements are two-dimensionally arranged in a matrix (array) can be used.
  • the output signal of the optical sensor 32 is supplied to the control section 40 via the signal processing section 33 .
  • the control unit 40 is, for example, an application processor configured by a CPU (Central Processing Unit) or the like, controls the light source unit 20 and the light detection unit 30, and irradiates the subject 10 from the light source unit 20. The time it takes for the emitted pulsed laser light to return after being reflected by the subject 10 is measured. Based on this measured time, the distance to the subject 10 can be obtained.
  • a CPU Central Processing Unit
  • the light receiving element of the pixel as the optical sensor 32 is an element capable of generating a signal in response to receiving a photon, for example, a SPAD (Single Photon Avalanche Diode). Sensors consisting of elements can be used. That is, the photodetector section 30 of the distance measuring device 1 in this example has a configuration using a SPAD element as a light receiving element of a pixel. SPAD devices operate in Geiger mode, which allows the device to operate at reverse voltages above its breakdown voltage.
  • the light-receiving element of the pixel is not limited to the SPAD element, and a light-receiving element such as SiPM (silicon photomultiplier) can be used.
  • FIG. 3 is a circuit diagram showing an example of the configuration of a basic pixel circuit in the photodetector 30 using SPAD elements.
  • the basic configuration for one pixel is illustrated.
  • FIG. 4a is a characteristic diagram showing the current-voltage characteristics of the PN junction of the SPAD element
  • b in FIG. 4 is a waveform diagram for explaining the circuit operation of the pixel circuit using the SPAD element.
  • the cathode electrode of the SPAD element 51 is connected to the terminal 52 to which the power supply voltage V DD is applied through the load 54 consisting of, for example, a P-type MOS transistor QL . ing.
  • An anode electrode of the SPAD element 51 is connected to a terminal 53 to which an anode voltage Vano is applied.
  • a large negative voltage at which avalanche multiplication occurs is applied to terminal 53 as anode voltage Vano .
  • a bias voltage V bias for operating the MOS transistor Q L as a desired current source is applied to the gate electrode of the P-type MOS transistor Q L .
  • a cathode voltage V CA of the SPAD element 51 is derived as a SPAD output (pixel output) via a CMOS inverter 55 consisting of a P-type MOS transistor Qp and an N-type MOS transistor Qn .
  • the CMOS inverter 55 can also be called a comparison circuit (comparator) using the threshold voltage Vth as a comparison reference, and the waveform for shaping the cathode voltage VCA , which is the output of the SPAD element 51, using the threshold voltage Vth as a reference . It can also be called a shaping circuit.
  • a voltage higher than the breakdown voltage V BD is applied to the SPAD element 51 .
  • the excess voltage above breakdown voltage V BD is called excess bias voltage V EX .
  • the characteristics of the SPAD element 51 change depending on how large the excess bias voltage VEX is applied with respect to the voltage value of the breakdown voltage VBD .
  • the cathode voltage VCA drops and the voltage across the terminals of the SPAD element 51 reaches the breakdown voltage VBD of the PN junction diode, the avalanche current stops. Then, the accumulated electrons generated by avalanche multiplication are discharged through the load 54 (for example, P-type MOS transistor Q L ). This discharge causes the cathode voltage V CA to rise. Then, the cathode voltage V CA of the SPAD element 51 recovers to the power supply voltage V DD and returns to the initial state.
  • the load 54 for example, P-type MOS transistor Q L
  • the cathode voltage V CA of the SPAD element 51 is waveform-shaped by the CMOS inverter 55, and a pulse signal with a pulse width T starting from the arrival time of one photon is the SPAD output (pixel output). Become.
  • one SPAD element 51 works as one pixel
  • a SPAD array consisting of a set of a plurality of SPAD elements 51 may work as one pixel.
  • One pixel composed of the plurality of SPAD elements 51 is sometimes called a so-called one macro pixel.
  • FIG. 5 is a block diagram showing an example of the basic configuration of the signal processor 33 in the photodetector 30 using SPAD elements.
  • FIG. 5 also shows the optical sensor 32 in the preceding stage of the signal processing section 33.
  • one pixel in the optical sensor 32 is composed of four SPAD elements 51_0 to 51_3, and when this is regarded as one macro pixel, one macro pixel is illustrated.
  • the signal processing section 33 in this configuration example has a sampling circuit section 331 and a histogram generation section 332 .
  • the sampling circuit unit 331 converts the analog quantity of the time of flight (ToF) of light into a digital code by sampling the output signals OUT0 to OUT3 of the SPAD elements 51_0 to 51_3 output from the optical sensor 32 at a predetermined sampling frequency. Sampling is performed, and sampling values POST_OUT0 to POST_OUT3 of SPAD elements 51_0 to 51_3 are output.
  • ToF time of flight
  • the histogram generating section 332 generates a histogram indicating the intensity of the reflected laser pulse light for each time in units of macro pixels based on the sampling values POST_OUT0 to POST_OUT3 of the SPAD elements 51_0 to 51_3 output from the sampling circuit section 331. do.
  • the histogram is a graph showing the detection frequency as a frequency for each detection timing indicated by the digital signal.
  • the histogram generated by the histogram generation unit 332 in this way is supplied to the control unit 40 shown in a in FIG. 2 in macropixel units.
  • the control unit 40 Based on the histogram supplied from the signal processing unit 33 in units of macro pixels, the control unit 40 causes the pulsed laser light emitted from the light source unit 20 toward the subject 10 to be reflected by the subject 10 and return. Measure the time until In this way, by generating a histogram showing the intensity of the reflected laser pulse light for each time and measuring the time of flight (ToF) of light based on the histogram, there is no influence of disturbance light and the like. The flight time of light can be accurately measured.
  • ToF time of flight
  • FIG. 6a is an explanatory diagram of distance calculation when the histogram is not saturated
  • b in FIG. 6 is an explanatory diagram of distance calculation when the histogram is saturated.
  • the histogram is not saturated, find the two bin locations where the half-maximum value of the histogram occurs and compute the interpolation of the two bins, as shown in FIG. Calculate the sub-bin position in units smaller than the bin. By performing distance calculation at the sub-bin position in this way, it is possible to perform distance calculation with a finer resolution than the sampling rate of the sampling circuit section 331 .
  • the slope of the histogram becomes steep, and the height of the histogram may be only 0 and the maximum value.
  • distance calculation cannot be performed with a finer resolution than the sampling rate of the sampling circuit section 331 .
  • the input timing of the sampling value corresponding to the reflected laser pulse light which is input from the sampling circuit section 331 to the histogram generating section 332 under the control of the control section 40, is set to to control.
  • control distance calculation can be performed with finer resolution than the sampling rate of the sampling circuit section 331 .
  • a specific embodiment for controlling the input timing of the sampling values corresponding to the reflected laser pulse light multiple times to be input to the histogram generator 332 will be described below.
  • the first embodiment of the present technology is an example of controlling the emission timing of the laser pulsed light when the light source unit 20 emits the laser pulsed light toward the subject 10 continuously a plurality of times.
  • FIG. 7 is a block diagram showing an example of the configuration of the distance measuring device according to the first embodiment of the present technology.
  • FIG. 8 is a timing chart for explaining the operation of the distance measuring device according to the first embodiment.
  • FIG. 8 shows the laser pulse light emitted from the light source unit 20, the output signal OUT of the SPAD element 51, the ideal histogram, the sampling clock CLK, the sampling value POST_OUT of the sampling circuit unit 331, and the histogram generated by the histogram generation unit 332.
  • Fig. 4 shows the timing relationship of the histograms;
  • the emission timing of the irradiation laser pulse light emitted from the light source unit 20 in succession a plurality of times is controlled.
  • the delay time ⁇ a delay of (N ⁇ 1) ⁇ is added to the emission timing of the N-th irradiation laser pulse light.
  • the predetermined delay time ⁇ is an arbitrary time shorter than the pulse width T of the sampling clock CLK.
  • a delay of a predetermined delay time ⁇ is added to the second laser pulse light emission timing, and a delay time of 2 ⁇ is added to the third laser pulse light emission timing.
  • a delay of 3 ⁇ is added to the emission timing of the fourth laser pulse light.
  • 1 slot is a unit for distance calculation (distance measurement).
  • the reaction timing of the SPAD elements 51_0 to 51_3 of the optical sensor 32 can be changed each time. can be shifted for each reflected laser pulse light corresponding to the irradiated laser pulse light.
  • the outputs OUT0 to OUT3 of the SPAD elements 51_0 to 51_3 based on the reflected laser pulse light corresponding to each irradiation laser pulse light can be prevented from being sampled by the sampling circuit section 331 every time with the same sampling clock CLK. can.
  • the timing of inputting the sampling values corresponding to the reflected laser pulse light corresponding to the irradiation laser pulse light to the histogram generation unit 332 is shifted. The fall becomes gentle.
  • sampling values to the histogram generating section 332 can be obtained by controlling the emission timing of the laser pulse light without changing the sampling rate of the sampling circuit section 331. Since the input timing can be controlled, a histogram with gentle rising and falling edges can be generated. This enables distance calculation at sub-bin positions in units smaller than the bin, so distance calculation, that is, distance measurement, can be performed with a finer resolution than the sampling rate.
  • a second embodiment of the present technology is an example of sampling output signals OUT0 to OUT3 of, for example, four SPAD elements 51_0 to 51_3 in one macro pixel of the optical sensor 32 at different timings.
  • FIG. 9 is a block diagram showing an example of the configuration of a distance measuring device according to the second embodiment of the present technology.
  • the sampling circuit section 331 includes a sampling clock generation section 3311, four D-type flip-flops (hereinafter referred to as D-FFs) corresponding to the four SPAD elements 51_0 to 51_3. ) 3312_0 to 3312_3 and four D-FFs 3313_0 to 3313_3.
  • the sampling clock generator 3311 generates a sampling clock CLK for sampling the output signals OUT0-OUT3 of the four SPAD elements 51_0-51_3.
  • Four D-FFs 3312_0 to 3312_3 constitute a sampling circuit in the previous stage.
  • Four D-FFs 3313_0 to 3313_3 constitute a sampling circuit in the latter stage.
  • FIG. 10 is a timing chart for explaining the operation of the distance measuring device according to the second embodiment.
  • FIG. 10 shows laser pulse light emitted from the light source unit 20, sampling clocks CLK0 to CLK3 given to the four D-FFs 3312_0 to 3312_3 in the previous stage, sampling values PRE_OUT0 to PRE_OUT0 to It shows the timing relationship between PRE_OUT3 and the sampling values POST_OUT0 to POST_OUT3 of the four D-FFs 3313_0 to 3313_3 in the latter stage.
  • FIG. 10 also shows the timing relationship between the ideal histogram and the histogram generated by the histogram generator 332. In FIG.
  • each output of the four SPAD elements 51_0 to 51_3 in one macro pixel is Signals OUT0 to OUT3 are sampled at different timings, and sampling values PRE_OUT0 to PRE_OUT3 with shifted timings are output.
  • the control unit 40 has three delay circuits 41_1 to 41_3 having a predetermined delay time ⁇ in order to sample the output signals OUT0 to OUT3 of the four SPAD elements 51_0 to 51_3 at different timings. It has become.
  • the first delay circuit 41_1 is connected between the clock input terminal of D-FF 3312_0 and the clock input terminal of D-FF 3312_1.
  • a second delay circuit 41_2 is connected between the clock input terminal of the D-FF 3312_1 and the clock input terminal of the D-FF 3312_2.
  • a third delay circuit 41_3 is connected between the clock input end of the D-FF 3312_2 and the clock input end of the D-FF 3312_3.
  • a sampling clock CLK0 is given from the sampling clock generator 3311 to the clock input terminal of the D-FF 3312_0.
  • the sampling clock CLK1 is applied to the clock input terminal of the D-FF 3312_1 at a timing delayed by a predetermined delay time ⁇ with respect to the sampling clock CLK0.
  • a sampling clock CLK2 is applied to the clock input terminal of the D-FF 3312_2 at a timing delayed by a delay time 2 ⁇ with respect to the sampling clock CLK0.
  • a sampling clock CLK3 is applied to the clock input terminal of the D-FF 3312_3 at a timing delayed by a delay time 3 ⁇ with respect to the sampling clock CLK0.
  • the sampling values PRE_OUT0 to PRE_OUT3 obtained by sampling at different timings in the four D-FFs 3312_0 to 3312_3 in the previous stage are re-sampled and synchronized with the non-delayed sampling clock CLK0, and the sampling values POST_OUT0 to Output as POST_OUT3.
  • the output signals OUT0 to OUT3 of the four SPAD elements 51_0 to 51_3 in one macro pixel are output at different timings.
  • the histogram generator 332 By sampling and synchronizing the sampled values PRE_OUT0 to PRE_OUT3 and then inputting them to the histogram generator 332, a histogram with smooth rising and falling edges can be generated.
  • distance calculation can be performed at sub-bin positions, and distance calculation (distance measurement) can be performed with a finer resolution than the sampling rate.
  • the third embodiment of the present technology is an example of giving different delays to each of the output signals OUT1 to OUT3 of, for example, three SPAD elements 51_1 to 51_3 in one macro pixel of the optical sensor 32.
  • FIG. 11 is a block diagram showing an example of the configuration of a distance measuring device according to the third embodiment of the present technology.
  • output signals OUT1 to OUT3 of, for example, three SPAD elements 51_1 to 51_3 in one macro pixel of the photosensor 32 are Give different delays.
  • the control section 40 is configured to have three delay circuits 42_1 to 42_3.
  • the delay circuit 42_1 has a predetermined delay time ⁇ , delays the output signal OUT1 of the SPAD element 51_1, and outputs it as a delayed output signal D_OUT1.
  • the delay circuit 42_2 has a delay time of 2 ⁇ , delays the output signal OUT2 of the SPAD element 51_2, and outputs it as a delayed output signal D_OUT2.
  • the delay circuit 42_3 has a delay time of 3 ⁇ , delays the output signal OUT3 of the SPAD element 51_3, and outputs it as a delayed output signal D_OUT3.
  • the sampling circuit section 331 has a sampling clock generation section 3311 and four D-FFs 3313_0 to 3313_3.
  • the four D-FFs 3313_0 to 3313_3 receive the same timing sampling clock CLK generated by the sampling clock generator 3311 as clock input.
  • FIG. 12 is a timing chart for explaining the operation of the distance measuring device according to the third embodiment.
  • FIG. 12 shows the laser pulse light, the output OUT0 of the SPAD element 51_0, the delayed output signals D_OUT1 to D_OUT3 of the SPAD elements 51_1 to 51_3, the ideal histogram, the sampling clock CLK, and the timing of the histogram generated by the histogram generator 332. showing relationships.
  • the output signal OUT0 of the SPAD element 51_0 directly becomes the D input of the D-FF 3313_0.
  • the output signal OUT1 of the SPAD element 51_1 is delayed by the delay time ⁇ in the delay circuit 42_1 and becomes the D input of the D-FF 3313_1 as the SPAD delayed output signal D_OUT1.
  • the output signal OUT2 of the SPAD element 51_2 is delayed by the delay time 2 ⁇ in the delay circuit 42_2 and becomes the D input of the D-FF 3313_2 as the SPAD delayed output signal D_OUT2.
  • the output signal OUT3 of the SPAD element 51_3 is delayed by the delay time 3 ⁇ in the delay circuit 42_3 and becomes the D input of the D-FF 3313_3 as the SPAD delayed output signal D_OUT3.
  • the distance measuring device in the third embodiment described above under the control of the control unit 40, different output signals OUT1 to OUT3 of the three SPAD elements 51_1 to 51_3 in one macro pixel are By providing a delay and then synchronizing and inputting to the histogram generation unit 332, a histogram with gentle rising and falling edges can be generated.
  • distance calculation can be performed at sub-bin positions, and distance calculation (distance measurement) can be performed with a finer resolution than the sampling rate.
  • a fourth embodiment of the present technology is a modification of the first embodiment in which laser pulse light is continuously irradiated a plurality of times, and depending on whether the histogram of the first irradiation (shot) is saturated This is an example of changing control.
  • the emission timing of the laser pulsed light for each irradiation is controlled.
  • the height of the histogram for the first irradiation is compared with a threshold (predetermined threshold) for distance calculation with respect to the intensity of the reflected laser pulse light.
  • a threshold predetermined threshold
  • the histogram is saturated.
  • the histogram is not saturated, so the laser pulse light that irradiates the object 10 is not delayed.
  • FIG. 13 is a block diagram showing an example of the configuration of a distance measuring device according to the fourth embodiment of the present technology.
  • control section 40 is configured to have a comparison section 401 and a light source control section 402 .
  • the comparison unit 401 compares the height of the histogram for the first irradiation with a threshold for distance calculation with respect to the intensity of the reflected laser pulse light, and determines if the maximum value of the histogram for the first time is equal to or greater than the threshold (maximum value ⁇ threshold). If there is, output the comparison result to that effect.
  • the light source control unit 402 controls the emission timing of the laser pulse light emitted from the light source unit 20, that is, controls whether the laser pulse light is delayed or not.
  • the light source control unit 402 causes the laser pulse light to have a different delay for each irradiation from the laser pulse light emitted for the second time. Control to give light is performed, and when the comparison result is not output, control to give delay to the laser pulse light is not performed.
  • the laser pulse light irradiated to the subject 10 is determined depending on whether the histogram of the first irradiation is saturated. By switching between delaying and non-delaying (delayed/not delayed), it is not necessary to always control the laser pulse light to be delayed.
  • a fifth embodiment of the present technology is a modification of the second embodiment, and is an example of changing control depending on whether the histogram is saturated.
  • output signals OUT0 to OUT3 of, for example, four SPAD elements 51_0 to 51_3 in one macropixel of the photosensor 32 are output at different timings. I am trying to sample.
  • the output signals OUT0 to OUT3 of the four SPAD elements 51_0 to 51_3 are sampled at different timings so that the histogram is saturated. If not, the output signals OUT0 to OUT3 of the four SPAD elements 51_0 to 51_3 are sampled at the same timing.
  • FIG. 14 is a block diagram showing an example of the configuration of a distance measuring device according to the fifth embodiment of the present technology.
  • control section 40 is configured to have a comparison section 401 and a delay control section 403 in addition to the delay section 40A corresponding to the control section 40 of FIG.
  • a delay section 40A corresponding to the control section 40 in FIG. 9 has three switches SW1 to SW3 in addition to three delay circuits 41_1 to 41_3 each having a predetermined delay time ⁇ .
  • the switch SW1 receives the sampling clock CLK0 generated by the sampling clock generator 3311 and the sampling clock CLK1 delayed by the delay time ⁇ in the delay circuit 41_1.
  • the switch SW2 receives the sampling clock CLK0 generated by the sampling clock generator 3311 and the sampling clock CLK2 delayed by the delay time 2 ⁇ in the delay circuits 41_1 and 41_2. It is used as the clock input for FF3312_2.
  • the switch SW3 receives the sampling clock CLK0 generated by the sampling clock generator 3311 and the sampling clock CLK3 delayed by the delay time 3 ⁇ in the delay circuits 41_1, 41_2, and 41_3. is selected as the clock input for the D-FF 3312_3.
  • the comparison unit 401 compares the height of the histogram with a threshold value for distance calculation with respect to the intensity of the reflected laser pulse light, and if the maximum value of the histogram is equal to or greater than the threshold value (maximum value ⁇ threshold value), indicates that fact. Output the comparison result.
  • the delay control unit 403 receives the comparison result of the comparison unit 401 and controls whether the sampling clock CLK0 in the delay unit 40A is delayed or not.
  • the delay controller 403 delays the delay circuits 41_1 to 41_3 by switching the three switches SW1 to SW3. selected sampling clocks CLK1 to CLK3 are selected and used as clock inputs for D-FFs 3312_1 to 3312_3.
  • the delay control unit 403 switches the three switches SW1 to SW3 so that the sampling clock output from the sampling clock generation unit 3311 is CLK0 is selected to be the clock input for D-FFs 3312_1 to 3312_3.
  • the sampling clock CLK0 output from the sampling clock generator 3311 depends on whether the histogram is saturated or not. By switching between delaying and not delaying (delaying/not delaying), it is not necessary to always control the delay of the sampling clock CLK0.
  • a sixth embodiment of the present technology is a modification of the third embodiment, and is an example of changing control depending on whether the histogram is saturated.
  • FIG. 15 is a block diagram showing an example of the configuration of a distance measuring device according to the sixth embodiment of the present technology.
  • control section 40 is configured to have a comparison section 401 and a delay control section 403 in addition to the delay section 40A corresponding to the control section 40 of FIG.
  • the delay unit 40A corresponding to the control unit 40 in FIG. of switches SW11 to SW13.
  • the switch SW11 receives the output signal OUT1 of the SPAD element 51_1 and the delayed output signal D_OUT1 of the delay circuit 42_1 having a predetermined delay time ⁇ , and selects one of them as the D input of the D-FF 3313_1.
  • the switch SW12 receives the output signal OUT2 of the SPAD element 51_2 and the delayed output signal D_OUT2 of the delay circuit 42_2 having a delay time of 2 ⁇ , and selects one of them as the D input of the D-FF 3313_2.
  • the switch SW13 receives the output signal OUT3 of the SPAD element 51_3 and the delayed output signal D_OUT3 of the delay circuit 42_3 having a delay time of 3 ⁇ , and selects one of them as the D input of the D-FF 3313_3.
  • the comparison unit 401 compares the height of the histogram with a threshold value for distance calculation with respect to the intensity of the reflected laser pulse light, and if the maximum value of the histogram is equal to or greater than the threshold value (maximum value ⁇ threshold value), indicates that fact. Output the comparison result.
  • the delay control unit 403 receives the comparison result of the comparison unit 401 and controls whether or not the output signals OUT1 to OUT3 of the SPAD elements 51_1 to 51_3 are delayed in the delay unit 40A.
  • the delay controller 403 switches the three switches SW11 to SW13 to switch the delay circuits 42_1 to 42_3. Delayed output signals D_OUT1 to D_OUT3 are selected and used as D inputs of D-FFs 3313_1 to 3313_3.
  • the delay control unit 403 switches the three switches SW1 to SW3 to output the output signals OUT1 to OUT1 to Select OUT3 to be the D input of D-FFs 3313_1 to 3313_3.
  • three SPAD elements 51_1 in one macropixel . . 51_3 are switched between giving/not giving different delays (delayed/no) to give different delays to the output signals OUT1 to OUT3 of the SPAD elements 51_1 to 51_3. This eliminates the need for constant control.
  • the technology (the present technology) according to the present disclosure can be applied to various products.
  • the technology according to the present disclosure can be realized as a device mounted on any type of moving body such as automobiles, electric vehicles, hybrid electric vehicles, motorcycles, bicycles, personal mobility, airplanes, drones, ships, and robots. may
  • FIG. 16 is a block diagram showing a schematic configuration example of a vehicle control system, which is an example of a mobile control system to which the technology according to the present disclosure can be applied.
  • a vehicle control system 12000 includes a plurality of electronic control units connected via a communication network 12001.
  • the vehicle control system 12000 includes a drive train control unit 12010, a body system control unit 12020, an outside information detection unit 12030, an inside information detection unit 12040, and an integrated control unit 12050.
  • a microcomputer 12051, an audio/image output unit 12052, and an in-vehicle network I/F (interface) 12053 are illustrated.
  • the drive system control unit 12010 controls the operation of devices related to the drive system of the vehicle according to various programs.
  • the driving system control unit 12010 includes a driving force generator for generating driving force of the vehicle such as an internal combustion engine or a driving motor, a driving force transmission mechanism for transmitting the driving force to the wheels, and a steering angle of the vehicle. It functions as a control device such as a steering mechanism to adjust and a brake device to generate braking force of the vehicle.
  • the body system control unit 12020 controls the operation of various devices equipped on the vehicle body according to various programs.
  • the body system control unit 12020 functions as a keyless entry system, a smart key system, a power window device, or a control device for various lamps such as headlamps, back lamps, brake lamps, winkers or fog lamps.
  • body system control unit 12020 can receive radio waves transmitted from a portable device that substitutes for a key or signals from various switches.
  • the body system control unit 12020 receives the input of these radio waves or signals and controls the door lock device, power window device, lamps, etc. of the vehicle.
  • the vehicle exterior information detection unit 12030 detects information outside the vehicle in which the vehicle control system 12000 is installed.
  • the vehicle exterior information detection unit 12030 is connected with an imaging section 12031 .
  • the vehicle exterior information detection unit 12030 causes the imaging unit 12031 to capture an image of the exterior of the vehicle, and receives the captured image.
  • the vehicle exterior information detection unit 12030 may perform object detection processing or distance detection processing such as people, vehicles, obstacles, signs, or characters on the road surface based on the received image.
  • the imaging unit 12031 is an optical sensor that receives light and outputs an electrical signal according to the amount of received light.
  • the imaging unit 12031 can output the electric signal as an image, and can also output it as distance measurement information.
  • the light received by the imaging unit 12031 may be visible light or non-visible light such as infrared rays.
  • the in-vehicle information detection unit 12040 detects in-vehicle information.
  • the in-vehicle information detection unit 12040 is connected to, for example, a driver state detection section 12041 that detects the state of the driver.
  • the driver state detection unit 12041 includes, for example, a camera that captures an image of the driver, and the in-vehicle information detection unit 12040 detects the degree of fatigue or concentration of the driver based on the detection information input from the driver state detection unit 12041. It may be calculated, or it may be determined whether the driver is dozing off.
  • the microcomputer 12051 calculates control target values for the driving force generator, the steering mechanism, or the braking device based on the information inside and outside the vehicle acquired by the vehicle exterior information detection unit 12030 or the vehicle interior information detection unit 12040, and controls the drive system control unit.
  • a control command can be output to 12010 .
  • the microcomputer 12051 realizes the functions of ADAS (Advanced Driver Assistance System) including collision avoidance or shock mitigation, follow-up driving based on inter-vehicle distance, vehicle speed maintenance driving, vehicle collision warning, or vehicle lane deviation warning. Cooperative control can be performed for the purpose of ADAS (Advanced Driver Assistance System) including collision avoidance or shock mitigation, follow-up driving based on inter-vehicle distance, vehicle speed maintenance driving, vehicle collision warning, or vehicle lane deviation warning. Cooperative control can be performed for the purpose of ADAS (Advanced Driver Assistance System) including collision avoidance or shock mitigation, follow-up driving based on inter-vehicle distance, vehicle speed maintenance driving, vehicle collision warning, or vehicle
  • the microcomputer 12051 controls the driving force generator, the steering mechanism, the braking device, etc. based on the information about the vehicle surroundings acquired by the vehicle exterior information detection unit 12030 or the vehicle interior information detection unit 12040, so that the driver's Cooperative control can be performed for the purpose of autonomous driving, etc., in which vehicles autonomously travel without depending on operation.
  • the microcomputer 12051 can output a control command to the body system control unit 12020 based on the information outside the vehicle acquired by the information detection unit 12030 outside the vehicle.
  • the microcomputer 12051 controls the headlamps according to the position of the preceding vehicle or the oncoming vehicle detected by the vehicle exterior information detection unit 12030, and performs coordinated control aimed at anti-glare such as switching from high beam to low beam. It can be carried out.
  • the audio/image output unit 12052 transmits at least one of audio and/or image output signals to an output device capable of visually or audibly notifying the passengers of the vehicle or the outside of the vehicle.
  • an audio speaker 12061, a display unit 12062, and an instrument panel 12063 are illustrated as output devices.
  • the display unit 12062 may include at least one of an on-board display and a head-up display, for example.
  • FIG. 17 is a diagram showing an example of the installation position of the imaging unit 12031.
  • the imaging unit 12031 has imaging units 12101, 12102, 12103, 12104, and 12105.
  • the imaging units 12101, 12102, 12103, 12104, and 12105 are provided at positions such as the front nose of the vehicle 12100, the side mirrors, the rear bumper, the back door, and the upper part of the windshield in the vehicle interior, for example.
  • An image pickup unit 12101 provided in the front nose and an image pickup unit 12105 provided above the windshield in the passenger compartment mainly acquire images in front of the vehicle 12100 .
  • Imaging units 12102 and 12103 provided in the side mirrors mainly acquire side images of the vehicle 12100 .
  • An imaging unit 12104 provided in the rear bumper or back door mainly acquires an image behind the vehicle 12100 .
  • the imaging unit 12105 provided above the windshield in the passenger compartment is mainly used for detecting preceding vehicles, pedestrians, obstacles, traffic lights, traffic signs, lanes, and the like.
  • FIG. 17 shows an example of the imaging range of the imaging units 12101 to 12104.
  • the imaging range 12111 indicates the imaging range of the imaging unit 12101 provided in the front nose
  • the imaging ranges 12112 and 12113 indicate the imaging ranges of the imaging units 12102 and 12103 provided in the side mirrors, respectively
  • the imaging range 12114 The imaging range of an imaging unit 12104 provided in the rear bumper or back door is shown. For example, by superimposing the image data captured by the imaging units 12101 to 12104, a bird's-eye view image of the vehicle 12100 viewed from above can be obtained.
  • At least one of the imaging units 12101 to 12104 may have a function of acquiring distance information.
  • at least one of the imaging units 12101 to 12104 may be a stereo camera composed of a plurality of imaging elements, or may be an imaging element having pixels for phase difference detection.
  • the microcomputer 12051 determines the distance to each three-dimensional object within the imaging ranges 12111 to 12114 and changes in this distance over time (relative velocity with respect to the vehicle 12100). , it is possible to extract, as the preceding vehicle, the closest three-dimensional object on the course of the vehicle 12100, which runs at a predetermined speed (for example, 0 km/h or more) in substantially the same direction as the vehicle 12100. can. Furthermore, the microcomputer 12051 can set the inter-vehicle distance to be secured in advance in front of the preceding vehicle, and perform automatic brake control (including following stop control) and automatic acceleration control (including following start control). In this way, cooperative control can be performed for the purpose of automatic driving in which the vehicle runs autonomously without relying on the operation of the driver.
  • automatic brake control including following stop control
  • automatic acceleration control including following start control
  • the microcomputer 12051 converts three-dimensional object data related to three-dimensional objects to other three-dimensional objects such as motorcycles, ordinary vehicles, large vehicles, pedestrians, and utility poles. It can be classified and extracted and used for automatic avoidance of obstacles. For example, the microcomputer 12051 distinguishes obstacles around the vehicle 12100 into those that are visible to the driver of the vehicle 12100 and those that are difficult to see. Then, the microcomputer 12051 judges the collision risk indicating the degree of danger of collision with each obstacle, and when the collision risk is equal to or higher than the set value and there is a possibility of collision, an audio speaker 12061 and a display unit 12062 are displayed. By outputting an alarm to the driver via the drive system control unit 12010 and performing forced deceleration and avoidance steering via the drive system control unit 12010, driving support for collision avoidance can be performed.
  • At least one of the imaging units 12101 to 12104 may be an infrared camera that detects infrared rays.
  • the microcomputer 12051 can recognize a pedestrian by determining whether or not the pedestrian exists in the captured images of the imaging units 12101 to 12104 .
  • recognition of a pedestrian is performed by, for example, a procedure for extracting feature points in images captured by the imaging units 12101 to 12104 as infrared cameras, and performing pattern matching processing on a series of feature points indicating the outline of an object to determine whether or not the pedestrian is a pedestrian.
  • the audio image output unit 12052 outputs a rectangular outline for emphasis to the recognized pedestrian. is superimposed on the display unit 12062 . Also, the audio/image output unit 12052 may control the display unit 12062 to display an icon or the like indicating a pedestrian at a desired position.
  • a distance measuring device can be applied to the imaging unit 12031 .
  • distance calculation can be performed with finer resolution than the sampling rate of the sampling circuit unit. becomes possible.
  • the present technology can also have the following configurations. (1) a light source unit that irradiates a pulsed light onto an object for distance measurement; a light detection unit that receives reflected pulsed light from the range-finding object on a pixel-by-pixel basis, based on the irradiation pulsed light from the light source unit; a sampling circuit section for sampling the output signal of the photodetector based on the reflected pulsed light at a predetermined sampling frequency and outputting a sampled value; a histogram generation unit that generates a histogram indicating the intensity of the reflected pulsed light for each time based on the sampling values output from the sampling circuit unit; and a control section for controlling input timing of the sampling values input from the sampling circuit section to the histogram generating section.
  • the control unit controls the input timing of the sampling values by controlling the sampling circuit unit to sample the output signals of the plurality of light receiving elements in the one macro pixel at different timings.
  • the distance measuring device according to (1) above.
  • the control section controls the sampling circuit section to sample the output signals of the plurality of light receiving elements at different timings. rangefinder.
  • the distance measuring device wherein the light receiving element is a single-photon avalanche diode.
  • a light source unit that irradiates a pulsed light onto the distance measurement object; a light detection unit that receives reflected pulsed light from the distance measurement target in units of pixels based on the irradiation pulsed light from the light source unit; a sampling circuit section for sampling the output signal of the photodetector based on the reflected pulsed light at a predetermined sampling frequency and outputting a sampled value;
  • a control method for a distance measuring device comprising: a histogram generation section that generates a histogram indicating the intensity of the reflected pulsed light for each time based on the sampling values output from the sampling circuit section, A control method of a distance measuring device for controlling input timing of the sampling values input from the sampling circuit section to the histogram generating section.
  • distance measuring device 10 subject (object for distance measurement) 20 light source unit 21 laser driving unit 22 laser light source 23 diffusion lens 30 light detection unit 31 light receiving lens 32 light sensor 33 signal processing unit 40 control unit 40A delay unit 41_1 to 41_3, 42_1 to 42_3 delay circuit 50 pixel 51 (51_0 to 51_3) SPAD element 331 sampling circuit section 332 histogram generation section 401 comparison section 402 light source control section 403 delay control section

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

本技術の測距装置は、測距対象物に対してパルス状の光を照射する光源部と、光源部からの照射パルス光に基づく、測距対象物からの反射パルス光を画素単位で受光する光検出部と、反射パルス光に基づく光検出部の出力信号を、所定のサンプリング周波数でサンプリングして、サンプリング値を出力するサンプリング回路部と、サンプリング回路部から出力されるサンプリング値に基づいて、時間ごとの反射パルス光の強さを示すヒストグラムを生成するヒストグラム生成部と、サンプリング回路部からヒストグラム生成部に入力されるサンプリング値の入力タイミングを制御する制御部とを具備する。

Description

測距装置および測距装置の制御方法
 本技術は、測距装置に関する。詳しくは、ToF(Time of Flight:飛行時間)方式の測距装置、および、当該測距装置の制御方法に関する。
 測距対象物(被写体)までの距離を測定する装置として、測距対象物に対して光源部から光を照射し、その照射光が測距対象物で反射されて光検出部に戻ってくるまでの光の飛行時間を計測することで、被写体までの距離を測定するToF方式の測距装置がある。
 ToF方式の測距装置では、光源部から測距対象物に対してパルス状の光(パルス光)を照射し、この照射パルス光に基づく測距対象物からの反射パルス光についてヒストグラムを生成し、当該ヒストグラムに基づいて、測距対象物までの距離の測定が行われる(例えば、特許文献1参照。)。ヒストグラムは、照射パルス光に基づく測距対象物からの反射パルス光を、光検出部で受光するまでの時間ごとの反射パルス光の強さを示すグラフである。
特開2021-110697号公報
 上述の従来技術では、距離計算において、反射パルス光の強さに対する閾値として、ヒストグラムの最大値と最小値との中央値を用いてもよいとしている。この場合、測距対象物から戻ってくる反射パルス光のヒストグラムの半値位置で距離計算が行われることになる。しかし、ヒストグラムが飽和すると、ヒストグラムの傾斜が急峻になり、ヒストグラムの高さは0と最大値のみになる場合がある。この場合、ヒストグラムの半値位置を閾値として距離計算を行うと、前段のサンプリング回路部のサンプリングレートよりも細かい分解能で距離計算を行うことができないことになる。
 本技術は、このような状況に鑑みて生み出されたものであり、サンプリング回路部のサンプリングレートよりも細かい分解能で距離計算を行うことができるようにすることを目的とする。
 本技術は、上述の問題点を解消するためになされたものであり、その第1の側面は、測距対象物に対してパルス状の光を照射する光源部と、上記光源部からの照射パルス光に基づく、上記測距対象物からの反射パルス光を画素単位で受光する光検出部と、上記反射パルス光に基づく上記光検出部の出力信号を、所定のサンプリング周波数でサンプリングして、サンプリング値を出力するサンプリング回路部と、上記サンプリング回路部から出力される上記サンプリング値に基づいて、時間ごとの上記反射パルス光の強さを示すヒストグラムを生成するヒストグラム生成部と、上記サンプリング回路部から上記ヒストグラム生成部に入力される上記サンプリング値の入力タイミングを制御する制御部とを具備する測距装置である。これにより、サンプリング回路部のサンプリングレートよりも細かい分解能で距離計算を行うことができるという作用をもたらす。
 また、この第1の側面において、上記光源部が測距対象物に対してパルス状の光を複数回連続して照射するとき、上記制御部について、上記光源部から複数回連続して照射されるパルス状の光の出射タイミングを制御することにより、上記サンプリング値の入力タイミングを制御するようにしてもよい。これにより、立ち上がりおよび立ち下がりがなだらかなヒストグラムを生成することができるという作用をもたらす。
 また、この第1の側面において、上記制御部について、1回目の光照射に基づく上記ヒストグラムが所定の閾値以上のとき、2回目以降に照射される上記出射タイミングを制御するようにしてもよい。これにより、パルス状の光の出射タイミングの制御を常時行わなくて済むという作用をもたらす。
 また、この第1の側面において、上記光検出部における一つの画素が複数の受光素子で構成され、1マクロピクセルとするとき、上記制御部について、上記サンプリング回路部に対して、上記1マクロピクセルの中の上記複数の受光素子の各出力信号を異なるタイミングでサンプリングさせる制御を行うことにより、上記サンプリング値の入力タイミングを制御するようにしてもよい。これにより、立ち上がりおよび立ち下がりがなだらかなヒストグラムを生成することができるという作用をもたらす。
 また、この第1の側面において、上記制御部について、上記ヒストグラムが所定の閾値以上のとき、上記サンプリング回路部に対して、上記複数の受光素子の各出力信号を異なるタイミングでサンプリングさせる制御を行うようにしてもよい。これにより、複数の受光素子の各出力信号を異なるタイミングでサンプリングさせる制御を常時行わなくて済むという作用をもたらす。
 また、この第1の側面において、上記光検出部における一つの画素が複数の受光素子で構成され、1マクロピクセルとするとき、上記制御部について、上記1マクロピクセルの中の上記複数の受光素子の各出力信号に対して異なる遅延を与える制御を行うことにより、上記サンプリング値の入力タイミングを制御するようにしてもよい。これにより、立ち上がりおよび立ち下がりがなだらかなヒストグラムを生成することができるという作用をもたらす。
 また、この第1の側面において、上記制御部について、上記ヒストグラムが所定の閾値以上のとき、上記複数の受光素子の各出力信号に異なる遅延を与える制御を行うようにしてもよい。これにより、複数の受光素子の各出力信号に異なる遅延を与える制御を常時行わなくて済むという作用をもたらす。
 また、この第1の側面において、上記光検出部の画素を構成する受光素子について、アバランシェダイオード、例えば、単一光子アバランシェダイオードであるとしてもよい。これにより、光子の受光に応じて信号を発生し得るという作用をもたらす。
 また、本技術の第2の側面は、測距対象物に対してパルス状の光を照射する光源部と、上記光源部からの照射パルス光に基づく、上記測距対象物からの反射パルス光を画素単位で受光する光検出部と、上記反射パルス光に基づく上記光検出部の出力信号を、所定のサンプリング周波数でサンプリングして、サンプリング値を出力するサンプリング回路部と、上記サンプリング回路部から出力される上記サンプリング値に基づいて、時間ごとの上記反射パルス光の強さを示すヒストグラムを生成するヒストグラム生成部と
を具備する測距装置の制御方法であって、上記サンプリング回路部から上記ヒストグラム生成部に入力される上記サンプリング値の入力タイミングを制御する測距装置の制御方法である。これにより、サンプリング回路部のサンプリングレートよりも細かい分解能で距離計算を行うことができるという作用をもたらす。
ToF方式の測距システムのシステム構成例を示す概念図である。 ToF方式の測距装置の基本構成の一例を示すブロック図である。 SPAD素子を用いた基本的な画素回路の一例を示す回路図である。 SPAD素子のPN接合の電流-電圧特性、および、SPAD素子を用いた画素回路の回路動作について説明する図である。 SPAD素子を用いた光検出部における信号処理部の基本構成の一例を示すブロック図である。 距離計算の一例についての説明図である。 本技術の第1の実施の形態における測距装置の構成の一例を示すブロック図である。 本技術の第1の実施の形態における測距装置の動作説明に供するタイミングチャートである。 本技術の第2の実施の形態における測距装置の構成の一例を示すブロック図である。 本技術の第2の実施の形態における測距装置の動作説明に供するタイミングチャートである。 本技術の第3の実施の形態における測距装置の構成の一例を示すブロック図である。 本技術の第3の実施の形態における測距装置の動作説明に供するタイミングチャートである。 本技術の第4の実施の形態における測距装置の構成の一例を示すブロック図である。 本技術の第5の実施の形態における測距装置の構成の一例を示すブロック図である。 本技術の第6の実施の形態における測距装置の構成の一例を示すブロック図である。 車両制御システムの概略的な構成例を示すブロック図である。 撮像部の設置位置の一例を示す説明図である。
 以下、本技術を実施するための形態(以下、実施の形態と称する)について説明する。説明は以下の順序により行う。
 1.ToF方式の測距システム
 2.第1の実施の形態(複数回連続して出射される場合において、照射レーザパルス光の出射タイミングを制御する例)
 3.第2の実施の形態(1マクロピクセルの中の4個のSPAD素子の各出力信号を異なるタイミングでサンプリングする例)
 4.第3の実施の形態(1マクロピクセルの中の3個のSPAD素子の各出力信号に対して異なる遅延を与える例)
 5.第4の実施の形態(第1の実施の形態の変形例:ヒストグラムが飽和しているか否かによって制御を変える例)
 6.第5の実施の形態(第2の実施の形態の変形例:ヒストグラムが飽和しているか否かによって制御を変える例)
 7.第6の実施の形態(第3の実施の形態の変形例:ヒストグラムが飽和しているか否かによって制御を変える例)
 8.変形例
 9.移動体への応用例
 10.本技術がとることができる構成
<1. ToF方式の測距システム>
[システム構成例]
 図1は、ToF方式の測距システムのシステム構成例を示す概念図である。本システム構成例に係る測距システムにおいて、測距装置1では、測距対象物である被写体10までの距離を測定する測定方式として、ToF方式が採用されている。ToF方式は、被写体10に向けて照射した光が、当該被写体10で反射されて戻ってくるまでの時間を計測する方式である。ToF方式による距離測定を実現するために、測距装置1は、被写体10に向けて照射する光(例えば、赤外の波長領域にピーク波長を有するレーザ光)を出射する光源部20、および、複数の画素を有し、被写体10で反射されて戻ってくる反射光を画素単位で検出する光検出部30を備えている。
[測距装置の基本構成例]
 ToF方式の測距装置1の基本構成例を図2に示す。図2におけるaは、測距装置1の全体構成を示し、同図におけるbは、光検出部30側の構成例を示している。
 光源部20は、例えば、レーザ駆動部21、レーザ光源22、および、拡散レンズ23を有し、測距対象物である被写体10に対してレーザ光を照射する。レーザ駆動部21は、制御部40による制御の下に、レーザ光源22を駆動する。レーザ光源22は、例えば半導体レーザを光源として用い、レーザ駆動部21による駆動の下に、パルス状のレーザ光(以下、レーザパルス光と記述する場合がある)を出射する。拡散レンズ23は、レーザ光源22から出射されたレーザパルス光を拡散し、被写体10に対して照射する。
 光検出部30は、受光レンズ31、光センサ32、および、信号処理部33を有し、光源部20から出射された照射レーザパルス光が被写体10で反射されて戻ってくる反射レーザパルス光を受光する。受光レンズ31は、被写体10からの反射レーザパルス光を光センサ32の受光面上に集光する。光センサ32は、複数の画素を有し、受光レンズ31を経た被写体10からの反射レーザパルス光を画素単位で受光し、光電変換する。光センサ32としては、例えば、受光素子を含む画素が行列状(アレイ状)に2次元配置された2次元アレイセンサを用いることができる。
 光センサ32の出力信号は、信号処理部33を経由して制御部40へ供給される。制御部40は、例えば、CPU(Central Processing Unit:中央処理ユニット)等によって構成されるアプリケーションプロセッサであり、光源部20および光検出部30を制御するとともに、光源部20から被写体10に向けて照射したパルス状のレーザ光が、当該被写体10で反射されて戻ってくるまでの時間の計測を行う。この計測した時間に基づいて、被写体10までの距離を求めることができる。
 そして、本例における測距装置1では、光センサ32として、画素の受光素子が、光子の受光に応じて信号を発生し得る素子、例えば、SPAD(Single Photon Avalanche Diode:単一光子アバランシェダイオード)素子からなるセンサを用いることができる。すなわち、本例における測距装置1の光検出部30は、画素の受光素子としてSPAD素子を用いた構成となっている。SPAD素子は、ブレイクダウン電圧(降伏電圧)を超えた逆電圧で素子を動作させるガイガーモードで動作する。なお、画素の受光素子としては、SPAD素子に限定されるものではなく、SiPM(シリコンフォトマルチプライヤ)等の受光素子を用いることができる。
[SPAD素子を用いた基本的な画素回路例]
 ここで、SPAD素子を用いた光検出部30における基本的な画素回路について、図3および図4を用いて説明する。
 図3は、SPAD素子を用いた光検出部30における基本的な画素回路の構成の一例を示す回路図である。ここでは、1画素分の基本構成を図示している。図4におけるaは、SPAD素子のPN接合の電流-電圧特性を示す特性図であり、同図におけるbは、SPAD素子を用いた画素回路の回路動作の説明に供する波形図である。
 SPAD素子を用いた画素50の基本的な画素回路において、SPAD素子51のカソード電極は、例えばP型MOSトランジスタQLからなる負荷54を介して、電源電圧VDDが与えられる端子52に接続されている。また、SPAD素子51のアノード電極は、アノード電圧Vanoが与えられる端子53に接続されている。端子53には、アバランシェ増倍が発生する大きな負電圧がアノード電圧Vanoとして与えられる。P型MOSトランジスタQLのゲート電極には、当該MOSトランジスタQLを所望の電流源として動作させるためのバイアス電圧Vbiasが印加される。
 そして、SPAD素子51のカソード電圧VCAが、P型MOSトランジスタQpおよびN型MOSトランジスタQnからなるCMOSインバータ55を介してSPAD出力(画素出力)として導出される。CMOSインバータ55は、閾値電圧Vthを比較基準とする比較回路(比較器)ということもできるし、閾値電圧Vthを基準としてSPAD素子51の出力であるカソード電圧VCAの波形整形を行う波形整形回路ということもできる。
 SPAD素子51には、ブレイクダウン電圧VBD以上の電圧が印加される。ブレイクダウン電圧VBD以上の過剰電圧は、エクセスバイアス電圧VEXと呼ばれる。ブレイクダウン電圧VBDの電圧値に対して、どの程度大きな電圧値のエクセスバイアス電圧VEXを印加するかによってSPAD素子51の特性が変わる。
 ガイガーモードで動作するSPAD素子51のPN接合の電流-電圧特性を示す図4におけるaには、ブレイクダウン電圧VBD、エクセスバイアス電圧VEX、および、SPAD素子51の動作点の関係を図示している。
[SPAD素子を用いた画素回路の回路動作例]
 続いて、上記の構成の画素回路の回路動作の一例について、図4におけるbの波形図を用いて説明する。
 SPAD素子51に電流が流れていない状態においては、SPAD素子51には(VDD-Vano)の値の電圧が印加されている。この電圧値(VDD-Vano)は、(VBD+VEX)である。そして、SPAD素子51のPN接合部で暗電子の発生レートDCR(Dark Count Rate)や光照射によって発生した電子がアバランシェ増倍を生じ、アバランシェ電流が発生する。
 カソード電圧VCAが低下し、SPAD素子51の端子間の電圧がPN接合ダイオードのブレイクダウン電圧VBDになると、アバランシェ電流が停止する。そして、アバランシェ増倍で発生し、蓄積された電子が、負荷54(例えば、P型MOSトランジスタQL)を通して放電する。この放電により、カソード電圧VCAが上昇する。そして、SPAD素子51のカソード電圧VCAが電源電圧VDDまで回復し、再び初期状態に戻る。
 SPAD素子51に光が入射して1個でも電子-正孔対が発生すると、それが種となってアバランシェ電流が発生するので、光子1個の入射でも、ある検知効率PDE(Photon Detection Efficiency)で検出することができる。
 以上の動作が繰り返される。そして、この一連の動作において、SPAD素子51のカソード電圧VCAが、CMOSインバータ55で波形整形され、1フォトンの到来時刻を開始点とするパルス幅Tのパルス信号がSPAD出力(画素出力)となる。
 なお、以上では、一つのSPAD素子51が一つの画素として働く場合を例に挙げて説明したが、複数のSPAD素子51の集合からなるSPADアレイが一つの画素として働く場合もある。この複数のSPAD素子51で構成される一つの画素は、所謂、1マクロピクセルと呼称されることがある。
[信号処理部の基本構成例]
 続いて、SPAD素子を用いた光検出部30における信号処理部33の基本構成の一例について、図5を用いて説明する。図5は、SPAD素子を用いた光検出部30における信号処理部33の基本構成の一例を示すブロック図である。
 図5には、信号処理部33の前段の光センサ32についても図示している。ここでは、例えば、光センサ32における一つの画素が4個のSPAD素子51_0~51_3で構成され、これを1マクロピクセルとする場合において、1マクロピクセル分について図示している。
 図5に示すように、本構成例における信号処理部33は、サンプリング回路部331およびヒストグラム生成部332を有している。
 サンプリング回路部331は、光の飛行時間(ToF)のアナログ量をデジタルコードに変換するために、光センサ32から出力されるSPAD素子51_0~51_3の各出力信号OUT0~OUT3を所定のサンプリング周波数でサンプリングし、SPAD素子51_0~51_3の各サンプリング値POST_OUT0~POST_OUT3を出力する。
 ヒストグラム生成部332は、サンプリング回路部331から出力される、SPAD素子51_0~51_3の各サンプリング値POST_OUT0~POST_OUT3に基づいて、時間ごとの反射レーザパルス光の強さを示すヒストグラムをマクロピクセル単位で生成する。ここで、ヒストグラムは、デジタル信号の示す検出タイミングごとに、検出頻度を度数として示すグラフである。
 このようにして、ヒストグラム生成部332で生成されたヒストグラムは、マクロピクセル単位で、図2におけるaに示す制御部40に供給される。制御部40は、信号処理部33からマクロピクセル単位で供給されるヒストグラムに基づいて、光源部20から被写体10に向けて照射したパルス状のレーザ光が、当該被写体10で反射されて戻ってくるまでの時間の計測を行う。このように、時間ごとの反射レーザパルス光の強さを示すヒストグラムを生成し、当該ヒストグラムに基づいて光の飛行時間(ToF)の計測を行うことにより、外乱光などの影響を受けることなく、光の飛行時間を精度よく計測することができる。
[距離計算例]
 ここで、反射レーザパルス光の強さに対する距離計算のための閾値を、ヒストグラムの最大値と最小値との半値位置とする場合の距離計算の一例について、図6を参照して説明する。図6におけるaは、ヒストグラムが飽和していない場合の距離計算についての説明図であり、同図におけるbは、ヒストグラムが飽和している場合の距離計算についての説明図である。
 ヒストグラムが飽和していない場合には、図6におけるaに示すように、ヒストグラムの最大値の半値が発生する二つのビン(bin)位置を見つけ、二つのビンの内挿を計算することにより、ビンよりも小さい単位のサブビン位置を計算する。このように、サブビン位置で距離計算を行うことにより、サンプリング回路部331のサンプリングレートよりも細かい分解能で距離計算を行うことができる。
 これに対して、ヒストグラムが飽和している場合には、図6におけるbに示すように、ヒストグラムの傾斜が急峻になり、ヒストグラムの高さは0と最大値のみになる場合がある。この場合、ヒストグラムの半値位置を閾値として距離計算を行うと、サンプリング回路部331のサンプリングレートよりも細かい分解能で距離計算を行うことができないことになる。
 そこで、本技術の測距装置およびその制御方法では、制御部40による制御の下に、サンプリング回路部331からヒストグラム生成部332に入力される、反射レーザパルス光に対応するサンプリング値の入力タイミングを制御するようにする。この制御により、サンプリング回路部331のサンプリングレートよりも細かい分解能で距離計算を行うことができる。以下に、ヒストグラム生成部332に入力される、複数回の反射レーザパルス光に対応するサンプリング値の入力タイミングを制御する具体的な実施の形態について説明する。
<2.第1の実施の形態>
 本技術の第1の実施の形態は、光源部20から被写体10に向けて複数回連続してレーザパルス光が出射される場合において、レーザパルス光の出射タイミングを制御する例である。
 図7は、本技術の第1の実施の形態における測距装置の構成の一例を示すブロック図である。図8は、第1の実施の形態における測距装置の動作説明に供するタイミングチャートである。図8には、光源部20から出射されるレーザパルス光、SPAD素子51の出力信号OUT、理想ヒストグラム、サンプリングクロックCLK、サンプリング回路部331のサンプリング値POST_OUT、および、ヒストグラム生成部332で生成されるヒストグラムのタイミング関係を示している。
 第1の実施の形態における測距装置では、制御部40による制御の下に、光源部20から複数回連続して出射される照射レーザパルス光の出射タイミングを制御する、具体的には、所定の遅延時間をτとするとき、N回目の照射レーザパルス光の出射タイミングに対して、(N-1)×τの時間だけ遅延を加えるようにする。ここで、所定の遅延時間τは、サンプリングクロックCLKのパルス幅Tよりも短い任意の時間である。本例では、レーザパルス光の出射回数が4回であることに対応して、遅延時間τは、τ=T/4に設定されている。この点については、後述する実施の形態においても同様である。
 これにより、図8のタイミングチャートに示すように、2回目のレーザパルス光の出射タイミングには所定の遅延時間τの遅延が加えられ、3回目のレーザパルス光の出射タイミングには遅延時間2τの遅延が加えられ、4回目のレーザパルス光の出射タイミングには遅延時間3τの遅延が加えられることになる。図8のタイミングチャートにおいて、1slotは、距離計算(測距)を行う単位である。
 このように、N回目の照射レーザパルス光の出射タイミングに対して、(N-1)×τの時間だけ遅延を加えることにより、光センサ32のSPAD素子51_0~51_3が反応するタイミングを、各回の照射レーザパルス光に対応する反射レーザパルス光ごとにずらすことができる。これにより、各回の照射レーザパルス光に対応する反射レーザパルス光に基づくSPAD素子51_0~51_3の各出力OUT0~OUT3が、サンプリング回路部331で毎回同じサンプリングクロックCLKでサンプリングされるのを避けることができる。その結果、各回の照射レーザパルス光に対応する反射レーザパルス光に対応するサンプリング値について、ヒストグラム生成部332に入力するタイミングがずれることになるため、ヒストグラム生成部332で生成されるヒストグラムの立ち上がりおよび立ち下がりがなだらかになる。
 上述の第1の実施の形態における測距装置によれば、サンプリング回路部331のサンプリングレートを変更することなく、レーザパルス光の出射タイミングを制御することにより、ヒストグラム生成部332へのサンプリング値の入力タイミングを制御することができるため、立ち上がりおよび立ち下がりがなだらかなヒストグラムを生成することができる。これにより、ビンよりも小さい単位のサブビン位置での距離計算が可能となるために、サンプリングレートよりも細かい分解能で距離計算、即ち、測距を行うことができる。
<3.第2の実施の形態>
 本技術の第2の実施の形態は、光センサ32の1マクロピクセルの中の例えば4個のSPAD素子51_0~51_3の各出力信号OUT0~OUT3を異なるタイミングでサンプリングする例である。
 図9は、本技術の第2の実施の形態における測距装置の構成の一例を示すブロック図である。第2の実施の形態における測距装置において、サンプリング回路部331は、サンプリングクロック生成部3311、4個のSPAD素子51_0~51_3に対応する4個のD型フリップフロップ(以下、D-FFと記述する)3312_0~3312_3、および、4個のD-FF3313_0~3313_3を有している。
 サンプリングクロック生成部3311は、4個のSPAD素子51_0~51_3の出力信号OUT0~OUT3をサンプリングするためのサンプリングクロックCLKを生成する。4個のD-FF3312_0~3312_3は、前段のサンプリング回路を構成している。4個のD-FF3313_0~3313_3は、後段のサンプリング回路を構成している。
 図10は、第2の実施の形態における測距装置の動作説明に供するタイミングチャートである。図10には、光源部20から出射されるレーザパルス光、前段の4個のD-FF3312_0~3312_3に与えられるサンプリングクロックCLK0~CLK3、前段の4個のD-FF3312_0~3312_3のサンプリング値PRE_OUT0~PRE_OUT3、および、後段の4個のD-FF3313_0~3313_3のサンプリング値POST_OUT0~POST_OUT3のタイミング関係を示している。図10には、さらに、理想ヒストグラム、および、ヒストグラム生成部332で生成されるヒストグラムのタイミング関係を示している。
 第2の実施の形態における測距装置では、制御部40による制御の下に、前段の4個のD-FF3312_0~3312_3において、1マクロピクセルの中の4個のSPAD素子51_0~51_3の各出力信号OUT0~OUT3を異なるタイミングでサンプリングし、タイミングをずらしたサンプリング値PRE_OUT0~PRE_OUT3を出力する。
 制御部40は、4個のSPAD素子51_0~51_3の各出力信号OUT0~OUT3を異なるタイミングでのサンプリングを実現するために、所定の遅延時間τを有する3個の遅延回路41_1~41_3を有する構成となっている。
 1つ目の遅延回路41_1は、D-FF3312_0のクロック入力端とD-FF3312_1のクロック入力端との間に接続されている。2つ目の遅延回路41_2は、D-FF3312_1のクロック入力端とD-FF3312_2のクロック入力端との間に接続されている。3つ目の遅延回路41_3は、D-FF3312_2のクロック入力端とD-FF3312_3のクロック入力端との間に接続されている。
 D-FF3312_0のクロック入力端には、サンプリングクロック生成部3311からサンプリングクロックCLK0が与えられる。これにより、D-FF3312_1のクロック入力端には、サンプリングクロックCLK0に対して所定の遅延時間τだけ遅れたタイミングでサンプリングクロックCLK1が与えられる。D-FF3312_2のクロック入力端には、サンプリングクロックCLK0に対して遅延時間2τだけ遅れたタイミングでサンプリングクロックCLK2が与えられる。D-FF3312_3のクロック入力端には、サンプリングクロックCLK0に対して遅延時間3τだけ遅れたタイミングでサンプリングクロックCLK3が与えられる。
 サンプリング回路部331では、前段の4個のD-FF3312_0~3312_3において異なるタイミングでサンプリングして得たサンプリング値PRE_OUT0~PRE_OUT3を、遅延なしのサンプリングクロックCLK0で再度サンプリングして同期させ、サンプリング値POST_OUT0~POST_OUT3として出力する。
 上述の第2の実施の形態における測距装置によれば、制御部40による制御の下に、1マクロピクセルの中の4個のSPAD素子51_0~51_3の各出力信号OUT0~OUT3を異なるタイミングでサンプリングし、そのサンプリング値PRE_OUT0~PRE_OUT3を同期させた後ヒストグラム生成部332に入力することで、立ち上がりおよび立ち下がりがなだらかなヒストグラムを生成することができる。これにより、第1の実施の形態の場合と同様に、サブビン位置での距離計算が可能となり、サンプリングレートよりも細かい分解能で距離計算(測距)を行うことができる。
 特に、第2の実施の形態の場合、レーザパルス光を複数回照射する第1の実施の形態の場合と違って、1回のレーザパルス光の照射でも、第1の実施の形態の場合と同様の効果を得ることができる。この点については、後述する第3の実施の形態の場合においても同様である。
<4.第3の実施の形態>
 本技術の第3の実施の形態は、光センサ32の1マクロピクセルの中の例えば3個のSPAD素子51_1~51_3の各出力信号OUT1~OUT3に対して異なる遅延を与える例である。
 図11は、本技術の第3の実施の形態における測距装置の構成の一例を示すブロック図である。第3の実施の形態における測距装置では、制御部40による制御の下に、光センサ32の1マクロピクセルの中の例えば3個のSPAD素子51_1~51_3の各出力信号OUT1~OUT3に対して異なる遅延を与えるようにする。
 これを実現するために、制御部40は、3個の遅延回路42_1~42_3を有する構成となっている。遅延回路42_1は、所定の遅延時間τを有し、SPAD素子51_1の出力信号OUT1を遅延し、遅延出力信号D_OUT1として出力する。遅延回路42_2は、遅延時間2τを有し、SPAD素子51_2の出力信号OUT2を遅延し、遅延出力信号D_OUT2として出力する。遅延回路42_3は、遅延時間3τを有し、SPAD素子51_3の出力信号OUT3を遅延し、遅延出力信号D_OUT3として出力する。
 サンプリング回路部331は、サンプリングクロック生成部3311および4個のD-FF3313_0~3313_3を有している。4個のD-FF3313_0~3313_3は、サンプリングクロック生成部3311で生成された同じタイミングのサンプリングクロックCLKをクロック入力としている。
 図12は、第3の実施の形態における測距装置の動作説明に供するタイミングチャートである。図12には、レーザパルス光、SPAD素子51_0の出力OUT0、SPAD素子51_1~51_3の各遅延出力信号D_OUT1~D_OUT3、理想ヒストグラム、サンプリングクロックCLK、および、ヒストグラム生成部332で生成されるヒストグラムのタイミング関係を示している。
 SPAD素子51_0の出力信号OUT0は、直接、D-FF3313_0のD入力となる。SPAD素子51_1の出力信号OUT1は、遅延回路42_1で遅延時間τだけ遅延され、SPAD遅延出力信号D_OUT1としてD-FF3313_1のD入力となる。SPAD素子51_2の出力信号OUT2は、遅延回路42_2で遅延時間2τだけ遅延され、SPAD遅延出力信号D_OUT2としてD-FF3313_2のD入力となる。SPAD素子51_3の出力信号OUT3は、遅延回路42_3で遅延時間3τだけ遅延され、SPAD遅延出力信号D_OUT3としてD-FF3313_3のD入力となる。
 上述の第3の実施の形態における測距装置によれば、制御部40による制御の下に、1マクロピクセルの中の3個のSPAD素子51_1~51_3の各出力信号OUT1~OUT3に対して異なる遅延を与え、その後同期させてヒストグラム生成部332に入力することで、立ち上がりおよび立ち下がりがなだらかなヒストグラムを生成することができる。これにより、第1の実施の形態の場合と同様に、サブビン位置での距離計算が可能となり、サンプリングレートよりも細かい分解能で距離計算(測距)を行うことができる。
<5.第4の実施の形態>
 本技術の第4の実施の形態は、レーザパルス光を複数回連続して照射する第1の実施の形態の変形例であり、照射(ショット)1回目のヒストグラムが飽和しているか否かによって制御を変える例である。
 第1の実施の形態では、光源部20から被写体10に向けて複数回連続してレーザパルス光が照射される場合において、各照射回のレーザパルス光の出射タイミングを制御するようにしている。
 これに対して、第4の実施の形態では、照射1回目のヒストグラムの高さと、反射レーザパルス光の強さに対する距離計算のための閾値(所定の閾値)とを比較する。そして、照射1回目のヒストグラムの高さが、閾値以上である場合には、ヒストグラムが飽和しているものとして、次に照射するレーザパルス光から、照射ごとに異なる遅延をレーザパルス光に与えるようにする。一方、1回目のヒストグラムの高さが閾値を下回る場合には、ヒストグラムは飽和していないため、被写体10に照射するレーザパルス光に遅延を与えないようにする。
 図13は、本技術の第4の実施の形態における測距装置の構成の一例を示すブロック図である。
 第4の実施の形態における上述の制御は、制御部40による制御の下に実行される。その実行のために、制御部40は、比較部401および光源制御部402を有する構成となっている。
 比較部401は、照射1回目のヒストグラムの高さと、反射レーザパルス光の強さに対する距離計算のための閾値とを比較し、1回目のヒストグラムの最大値が閾値以上(最大値≧閾値)である場合に、その旨の比較結果を出力する。
 光源制御部402は、比較部401の比較結果を受けて、光源部20から照射されるレーザパルス光の出射タイミングの制御、即ち、レーザパルス光に対する遅延あり/なしの制御を行う。
 具体的には、光源制御部402は、比較部401から最大値≧閾値の旨の比較結果が出力された場合には、2回目に照射するレーザパルス光から、照射ごとに異なる遅延をレーザパルス光に与える制御を行い、当該比較結果が出力されない場合には、レーザパルス光に遅延を与える制御を行わない。
 上述したように、第4の実施の形態における測距装置によれば、制御部40による制御の下に、照射1回目のヒストグラムが飽和しているか否かによって、被写体10に照射するレーザパルス光に対して、遅延を与える/与えない(遅延あり/なし)の切り替えを行うことで、レーザパルス光に遅延を与える制御を常時行わなくて済むことになる。
<6.第5の実施の形態>
 本技術の第5の実施の形態は、第2の実施の形態の変形例であり、ヒストグラムが飽和しているか否かによって制御を変える例である。
 第2の実施の形態では、ヒストグラムが飽和しているか否かに拘わらず、光センサ32の1マクロピクセルの中の例えば4個のSPAD素子51_0~51_3の各出力信号OUT0~OUT3を異なるタイミングでサンプリングするようにしている。
 これに対して、第5の実施の形態では、ヒストグラムが飽和している場合には、4個のSPAD素子51_0~51_3の各出力信号OUT0~OUT3を異なるタイミングでサンプリングするようにし、ヒストグラムが飽和していない場合には、4個のSPAD素子51_0~51_3の各出力信号OUT0~OUT3を同じタイミングでサンプリングするようにする。
 図14は、本技術の第5の実施の形態における測距装置の構成の一例を示すブロック図である。
 第5の実施の形態における上述の制御は、制御部40による制御の下に実行される。その実行のために、制御部40は、図9の制御部40に相当する遅延部40Aの他に、比較部401および遅延制御部403を有する構成となっている。
 図9の制御部40に相当する遅延部40Aは、所定の遅延時間τを有する3個の遅延回路41_1~41_3の他に、3個のスイッチSW1~SW3を有している。
 スイッチSW1は、サンプリングクロック生成部3311で生成されたサンプリングクロックCLK0と、遅延回路41_1で遅延時間τだけ遅延されたサンプリングクロックCLK1とを入力とし、いずれか一方を選択してD-FF3312_1のクロック入力とする。
 スイッチSW2は、サンプリングクロック生成部3311で生成されたサンプリングクロックCLK0と、遅延回路41_1および遅延回路41_2で遅延時間2τだけ遅延されたサンプリングクロックCLK2とを入力とし、いずれか一方を選択してD-FF3312_2のクロック入力とする。
 スイッチSW3は、サンプリングクロック生成部3311で生成されたサンプリングクロックCLK0と、遅延回路41_1、遅延回路41_2、および、遅延回路41_3で遅延時間3τだけ遅延されたサンプリングクロックCLK3とを入力とし、いずれか一方を選択してD-FF3312_3のクロック入力とする。
 比較部401は、ヒストグラムの高さと、反射レーザパルス光の強さに対する距離計算のための閾値とを比較し、ヒストグラムの最大値が閾値以上(最大値≧閾値)である場合に、その旨の比較結果を出力する。
 遅延制御部403は、比較部401の比較結果を受けて、遅延部40AにおけるサンプリングクロックCLK0に対する遅延あり/なしの制御を行う。
 具体的には、遅延制御部403は、比較部401から最大値≧閾値の旨の比較結果が出力された場合には、3個のスイッチSW1~SW3の切替えによって、遅延回路41_1~41_3で遅延されたサンプリングクロックCLK1~CLK3を選択し、D-FF3312_1~3312_3のクロック入力とする。
 また、比較部401から最大値≧閾値の旨の比較結果が出力されない場合には、遅延制御部403は、3個のスイッチSW1~SW3の切替えによって、サンプリングクロック生成部3311から出力されるサンプリングクロックCLK0を選択し、D-FF3312_1~3312_3のクロック入力とする。
 上述したように、第5の実施の形態における測距装置によれば、制御部40による制御の下に、ヒストグラムが飽和しているか否かによって、サンプリングクロック生成部3311から出力されるサンプリングクロックCLK0に対して、遅延を与える/与えない(遅延あり/なし)の切替えを行うことで、サンプリングクロックCLK0に遅延を与える制御を常時行わなくて済むことになる。
<7.第6の実施の形態>
 本技術の第6の実施の形態は、第3の実施の形態の変形例であり、ヒストグラムが飽和しているか否かによって制御を変える例である。
 第3の実施の形態では、ヒストグラムが飽和しているか否かに拘わらず、1マクロピクセルの中の3個のSPAD素子51_1~51_3の各出力信号OUT1~OUT3に対して異なる遅延を与えるようにしている。
 これに対して、第5の実施の形態では、ヒストグラムが飽和している場合には、SPAD素子51_1~51_3の各出力信号OUT1~OUT3に対して異なる遅延を与えるようにし、ヒストグラムが飽和していない場合には、SPAD素子51_1~51_3の各出力信号OUT1~OUT3に対して遅延を与えないようにする。
 図15は、本技術の第6の実施の形態における測距装置の構成の一例を示すブロック図である。
 第6の実施の形態における上述の制御は、制御部40による制御の下に実行される。その実行のために、制御部40は、図11の制御部40に相当する遅延部40Aの他に、比較部401および遅延制御部403を有する構成となっている。
 図11の制御部40に相当する遅延部40Aは、所定の遅延時間τを有する遅延回路42_1、遅延時間2τを有する遅延回路42_2、および、遅延時間3τを有する遅延回路42_3の他に、3個のスイッチSW11~SW13を有している。
 スイッチSW11は、SPAD素子51_1の出力信号OUT1と、所定の遅延時間τを有する遅延回路42_1の遅延出力信号D_OUT1とを入力とし、いずれか一方を選択してD-FF3313_1のD入力とする。
 スイッチSW12は、SPAD素子51_2の出力信号OUT2と、遅延時間2τを有する遅延回路42_2の遅延出力信号D_OUT2とを入力とし、いずれか一方を選択してD-FF3313_2のD入力とする。
 スイッチSW13は、SPAD素子51_3の出力信号OUT3と、遅延時間3τを有する遅延回路42_3の遅延出力信号D_OUT3とを入力とし、いずれか一方を選択してD-FF3313_3のD入力とする。
 比較部401は、ヒストグラムの高さと、反射レーザパルス光の強さに対する距離計算のための閾値とを比較し、ヒストグラムの最大値が閾値以上(最大値≧閾値)である場合に、その旨の比較結果を出力する。
 遅延制御部403は、比較部401の比較結果を受けて、遅延部40Aにおいて、SPAD素子51_1~51_3の各出力信号OUT1~OUT3に対する遅延あり/なしの制御を行う。
 具体的には、遅延制御部403は、比較部401から最大値≧閾値の旨の比較結果が出力された場合には、3個のスイッチSW11~SW13の切替えによって、遅延回路42_1~42_3の各遅延出力信号D_OUT1~D_OUT3を選択し、D-FF3313_1~3313_3のD入力とする。
 また、比較部401から最大値≧閾値の旨の比較結果が出力されない場合には、遅延制御部403は、3個のスイッチSW1~SW3の切替えによって、SPAD素子51_1~51_3の各出力信号OUT1~OUT3を選択し、D-FF3313_1~3313_3のD入力とする。
 上述したように、第6の実施の形態における測距装置によれば、制御部40による制御の下に、ヒストグラムが飽和しているか否かによって、1マクロピクセルの中の3個のSPAD素子51_1~51_3の各出力信号OUT1~OUT3に対して、異なる遅延を与える/与えない(遅延あり/なし)の切替えを行うことで、SPAD素子51_1~51_3の各出力信号OUT1~OUT3に異なる遅延を与える制御を常時行わなくて済むことになる。
<8.変形例>
 なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
 <9.移動体への応用例>
 本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
 図16は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
 車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図16に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、及び統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、及び車載ネットワークI/F(interface)12053が図示されている。
 駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
 ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
 車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
 撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
 車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
 マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
 音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図16の例では、出力装置として、オーディオスピーカ12061、表示部12062及びインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
 図17は、撮像部12031の設置位置の例を示す図である。
 図17では、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
 撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101及び車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部12105は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
 なお、図17には、撮像部12101ないし12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101ないし12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
 撮像部12101ないし12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101ないし12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
 例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を基に、撮像範囲12111ないし12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を元に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
 撮像部12101ないし12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101ないし12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101ないし12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101ないし12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
 以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、例えば、撮像部12031に適用され得る。具体的には、上述の第1の実施の形態、第2実施の形態、第3の実施の形態、第4の実施の形態、第5の実施の形態、あるいは、第6の実施の形態における測距装置について、撮像部12031に適用することができる。撮像部12031に本開示に係る技術を適用することにより、サンプリング回路部のサンプリングレートよりも細かい分解能で距離計算を行うことができるため、走行する車両からの測距をより高精度に実行することが可能となる。
 なお、本明細書に記載された効果はあくまで例示であって、限定されるものではなく、また、他の効果があってもよい。
<10.本技術がとることができる構成>
 本技術は、以下のような構成もとることができる。
(1)測距対象物に対してパルス状の光を照射する光源部と、
 前記光源部からの照射パルス光に基づく、前記測距対象物からの反射パルス光を画素単位で受光する光検出部と、
 前記反射パルス光に基づく前記光検出部の出力信号を、所定のサンプリング周波数でサンプリングして、サンプリング値を出力するサンプリング回路部と、
 前記サンプリング回路部から出力される前記サンプリング値に基づいて、時間ごとの前記反射パルス光の強さを示すヒストグラムを生成するヒストグラム生成部と、
 前記サンプリング回路部から前記ヒストグラム生成部に入力される前記サンプリング値の入力タイミングを制御する制御部と
を具備する測距装置。
(2)前記光源部が測距対象物に対してパルス状の光を複数回連続して照射するとき、
 前記制御部は、前記光源部から複数回連続して照射されるパルス状の光の出射タイミングを制御することにより、前記サンプリング値の入力タイミングを制御する
前記(1)に記載の測距装置。
(3)前記制御部は、1回目の光照射に基づく前記ヒストグラムが所定の閾値以上のとき、2回目以降に照射される前記パルス状の光の出射タイミングを制御する
前記(2)に記載の測距装置。
(4)前記光検出部における一つの画素が複数の受光素子で構成され、1マクロピクセルとするとき、
 前記制御部は、前記サンプリング回路部に対して、前記1マクロピクセルの中の前記複数の受光素子の各出力信号を異なるタイミングでサンプリングさせる制御を行うことにより、前記サンプリング値の入力タイミングを制御する
前記(1)に記載の測距装置。
(5)前記制御部は、前記ヒストグラムが所定の閾値以上のとき、前記サンプリング回路部に対して、前記複数の受光素子の各出力信号を異なるタイミングでサンプリングさせる制御を行う
前記(4)に記載の測距装置。
(6)前記光検出部における一つの画素が複数の受光素子で構成され、1マクロピクセルとするとき、
 前記制御部は、前記1マクロピクセルの中の前記複数の受光素子の各出力信号に対して異なる遅延を与える制御を行うことにより、前記サンプリング値の入力タイミングを制御する
前記(1)に記載の測距装置。
(7)前記制御部は、前記ヒストグラムが所定の閾値以上のとき、前記複数の受光素子の各出力信号に異なる遅延を与える制御を行う
前記(6)に記載の測距装置。
(8)前記光検出部の画素を構成する受光素子は、アバランシェダイオードである
前記(1)に記載の測距装置。
(9)前記受光素子は、単一光子アバランシェダイオードである
前記(8)に記載の測距装置。
(10)測距対象物に対してパルス状の光を照射する光源部と、
 前記光源部からの照射パルス光に基づく、前記測距対象物からの反射パルス光を画素単位で受光する光検出部と、
 前記反射パルス光に基づく前記光検出部の出力信号を、所定のサンプリング周波数でサンプリングして、サンプリング値を出力するサンプリング回路部と、
 前記サンプリング回路部から出力される前記サンプリング値に基づいて、時間ごとの前記反射パルス光の強さを示すヒストグラムを生成するヒストグラム生成部と
を具備する測距装置の制御方法であって、
 前記サンプリング回路部から前記ヒストグラム生成部に入力される前記サンプリング値の入力タイミングを制御する
測距装置の制御方法。
 1 測距装置
 10 被写体(測距対象物)
 20 光源部
 21 レーザ駆動部
 22 レーザ光源
 23 拡散レンズ
 30 光検出部
 31 受光レンズ
 32 光センサ
 33 信号処理部
 40 制御部
 40A 遅延部
 41_1~41_3,42_1~42_3 遅延回路
 50 画素
 51(51_0~51_3) SPAD素子
 331 サンプリング回路部
 332 ヒストグラム生成部
 401 比較部
 402 光源制御部
 403 遅延制御部

Claims (10)

  1.  測距対象物に対してパルス状の光を照射する光源部と、
     前記光源部からの照射パルス光に基づく、前記測距対象物からの反射パルス光を画素単位で受光する光検出部と、
     前記反射パルス光に基づく前記光検出部の出力信号を、所定のサンプリング周波数でサンプリングして、サンプリング値を出力するサンプリング回路部と、
     前記サンプリング回路部から出力される前記サンプリング値に基づいて、時間ごとの前記反射パルス光の強さを示すヒストグラムを生成するヒストグラム生成部と、
     前記サンプリング回路部から前記ヒストグラム生成部に入力される前記サンプリング値の入力タイミングを制御する制御部と
    を具備する測距装置。
  2.  前記光源部が測距対象物に対してパルス状の光を複数回連続して照射するとき、
     前記制御部は、前記光源部から複数回連続して照射されるパルス状の光の出射タイミングを制御することにより、前記サンプリング値の入力タイミングを制御する
    請求項1記載の測距装置。
  3.  前記制御部は、1回目の光照射に基づく前記ヒストグラムが所定の閾値以上のとき、2回目以降に照射される前記パルス状の光の出射タイミングを制御する
    請求項2記載の測距装置。
  4.  前記光検出部における一つの画素が複数の受光素子で構成され、1マクロピクセルとするとき、
     前記制御部は、前記サンプリング回路部に対して、前記1マクロピクセルの中の前記複数の受光素子の各出力信号を異なるタイミングでサンプリングさせる制御を行うことにより、前記サンプリング値の入力タイミングを制御する
    請求項1記載の測距装置。
  5.  前記制御部は、前記ヒストグラムが所定の閾値以上のとき、前記サンプリング回路部に対して、前記複数の受光素子の各出力信号を異なるタイミングでサンプリングさせる制御を行う
    請求項4記載の測距装置。
  6.  前記光検出部における一つの画素が複数の受光素子で構成され、1マクロピクセルとするとき、
     前記制御部は、前記1マクロピクセルの中の前記複数の受光素子の各出力信号に対して異なる遅延を与える制御を行うことにより、前記サンプリング値の入力タイミングを制御する
    請求項1記載の測距装置。
  7.  前記制御部は、前記ヒストグラムが所定の閾値以上のとき、前記複数の受光素子の各出力信号に異なる遅延を与える制御を行う
    請求項6記載の測距装置。
  8.  前記光検出部の画素を構成する受光素子は、アバランシェダイオードである
    請求項1記載の測距装置。
  9.  前記受光素子は、単一光子アバランシェダイオードである
    請求項8記載の測距装置。
  10.  測距対象物に対してパルス状の光を照射する光源部と、
     前記光源部からの照射パルス光に基づく、前記測距対象物からの反射パルス光を画素単位で受光する光検出部と、
     前記反射パルス光に基づく前記光検出部の出力信号を、所定のサンプリング周波数でサンプリングして、サンプリング値を出力するサンプリング回路部と、
     前記サンプリング回路部から出力される前記サンプリング値に基づいて、時間ごとの前記反射パルス光の強さを示すヒストグラムを生成するヒストグラム生成部と
    を具備する測距装置の制御方法であって、
     前記サンプリング回路部から前記ヒストグラム生成部に入力される前記サンプリング値の入力タイミングを制御する
    測距装置の制御方法。
PCT/JP2022/044859 2022-01-26 2022-12-06 測距装置および測距装置の制御方法 WO2023145261A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022010262A JP2023108937A (ja) 2022-01-26 2022-01-26 測距装置および測距装置の制御方法
JP2022-010262 2022-01-26

Publications (1)

Publication Number Publication Date
WO2023145261A1 true WO2023145261A1 (ja) 2023-08-03

Family

ID=87471570

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/044859 WO2023145261A1 (ja) 2022-01-26 2022-12-06 測距装置および測距装置の制御方法

Country Status (2)

Country Link
JP (1) JP2023108937A (ja)
WO (1) WO2023145261A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011089986A (ja) * 2009-10-22 2011-05-06 Sick Ag 距離又は距離変化を測定するためのセンサ及び方法
WO2018181013A1 (ja) * 2017-03-29 2018-10-04 株式会社デンソー 光検出器
WO2021026241A1 (en) * 2019-08-05 2021-02-11 Ouster, Inc. Processing system for lidar measurements
US20210247502A1 (en) * 2020-02-07 2021-08-12 Samsung Electronics Co., Ltd. LiDAR DEVICE
WO2021181868A1 (ja) * 2020-03-09 2021-09-16 ソニーセミコンダクタソリューションズ株式会社 測距センサ及び距離測定方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011089986A (ja) * 2009-10-22 2011-05-06 Sick Ag 距離又は距離変化を測定するためのセンサ及び方法
WO2018181013A1 (ja) * 2017-03-29 2018-10-04 株式会社デンソー 光検出器
WO2021026241A1 (en) * 2019-08-05 2021-02-11 Ouster, Inc. Processing system for lidar measurements
US20210247502A1 (en) * 2020-02-07 2021-08-12 Samsung Electronics Co., Ltd. LiDAR DEVICE
WO2021181868A1 (ja) * 2020-03-09 2021-09-16 ソニーセミコンダクタソリューションズ株式会社 測距センサ及び距離測定方法

Also Published As

Publication number Publication date
JP2023108937A (ja) 2023-08-07

Similar Documents

Publication Publication Date Title
CN212321848U (zh) 光检测设备以及距离测量传感器
WO2019150785A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US20230408692A1 (en) Distance measuring sensor and distance measuring system
EP4057621A1 (en) Sensing device and ranging apparatus
US20210293958A1 (en) Time measurement device and time measurement apparatus
US20220344521A1 (en) Light detecting device and system
WO2020184224A1 (ja) 距離測定装置及びスキュー補正方法
WO2021085123A1 (ja) 受光装置、測距装置および受光回路
US20220373659A1 (en) Solid-state imaging element, electronic device, and method for controlling solid-state imaging element
US20220345652A1 (en) Solid-state imaging element and electronic device
US20220011411A1 (en) Time measurement device
US20240111033A1 (en) Photodetection device and photodetection system
WO2023145261A1 (ja) 測距装置および測距装置の制御方法
WO2022059397A1 (ja) 測距システムおよび光検出装置
JP2020153909A (ja) 受光装置および測距装置
EP3933359A1 (en) Measurement device, rangefinding device, electronic apparatus, and measurement method
US20230228875A1 (en) Solid-state imaging element, sensing system, and control method of solid-state imaging element
WO2021256276A1 (ja) 測距装置および測距システム
WO2024084792A1 (ja) 光検出装置、測距装置、および、光検出装置の制御方法
WO2022239459A1 (ja) 測距装置及び測距システム
WO2023286403A1 (ja) 光検出装置および測距システム
EP4123708A1 (en) Solid-state imaging element and electronic device
US20240085177A1 (en) Photodetection device and photodetection system
US20230417921A1 (en) Photodetection device and photodetection system
WO2022074939A1 (ja) 受光素子、測距モジュール、測距システム、および、受光素子の制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22924113

Country of ref document: EP

Kind code of ref document: A1