WO2026014223A1 - 測距装置及び測距方法 - Google Patents
測距装置及び測距方法Info
- Publication number
- WO2026014223A1 WO2026014223A1 PCT/JP2025/022661 JP2025022661W WO2026014223A1 WO 2026014223 A1 WO2026014223 A1 WO 2026014223A1 JP 2025022661 W JP2025022661 W JP 2025022661W WO 2026014223 A1 WO2026014223 A1 WO 2026014223A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- light
- unit
- histogram
- pulse
- receiving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
- G01S17/10—Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/484—Transmitters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4865—Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
Definitions
- This disclosure relates to a distance measuring device and a distance measuring method.
- LiDAR Light Detection and Ranging
- dToF Direct Time of Flight
- a method has been proposed in which multiple time-of-flight histograms are shifted by one class and added together to form a single time-of-flight histogram, and the time of flight is detected using this single time-of-flight histogram, thereby achieving high resolution in a short ranging time (see Patent Document 1).
- the light receiving section of a distance measuring device uses, for example, a SPAD (Single Photon Avalanche Diode) that detects photons.
- SPAD Single Photon Avalanche Diode
- a characteristic of a SPAD is that after detecting a photon, a dead time occurs during which no photons can be detected for a certain period of time.
- the aforementioned dead time prevents the SPADs from reacting to photons in the second half of the pulse width, which can result in saturation, where the light reception frequency of the histogram bins located in the second half of the pulse width drops significantly.
- the center of gravity of the histogram shifts significantly, posing a problem of significantly deteriorating distance measurement accuracy.
- the light intensity of the reflected light pulse signal is likely to be high, making the above-mentioned saturation more likely to occur.
- Patent Document 1 does not disclose anything about the pileup and saturation phenomena mentioned above, or how to deal with them.
- This disclosure therefore provides a distance measuring device and distance measuring method that can improve distance measurement accuracy.
- a light receiving unit that repeatedly receives a reflected light pulse signal that is a light pulse signal reflected by an object; a histogram generating unit that generates a histogram in which the light reception frequency of the reflected light pulse signal is classified for each unit light reception period; a light-emitting unit that repeatedly emits the optical pulse signal with a pulse width that is shorter than twice the unit light-receiving period;
- a distance measuring device comprising:
- the light-emitting unit may repeatedly emit the optical pulse signal with a pulse width shorter than the unit light-receiving period.
- a light receiving unit that repeatedly receives a reflected light pulse signal that is a light pulse signal reflected by an object; a histogram generating unit that generates a histogram in which the light reception frequency of the reflected light pulse signal is classified for each unit light reception period; a control unit that controls the light emitting unit to select in turn one of a plurality of pulse widths having different phases and emit the light pulse signal, or that selects in turn one of a plurality of different correspondences between the light receiving times of the reflected light pulse signal received by the light receiving unit and a plurality of unit light receiving periods included in the histogram, or that selects the plurality of correspondences in parallel.
- a ranging device is provided.
- the light-emitting unit may be configured to emit the optical pulse signal by selecting in turn a number of pulse widths each having a different phase, or to intermittently emit the optical pulse signal with a pulse width of the same phase.
- the light emitting section may emit the light pulse signal with the pulse width selected by the light emission timing control section.
- the light emission timing control unit selects each of the plurality of pulse widths in turn two or more predetermined times
- the light-emitting unit repeats the operation of emitting the optical pulse signal having the pulse width selected by the light-emission timing control unit the predetermined number of times
- the light receiving unit repeats the operation of receiving the reflected light pulse signal corresponding to the light pulse signal emitted for each of the plurality of pulse widths the predetermined number of times
- the histogram generating section may generate the histogram based on the reflected light pulse signals corresponding to the light pulse signals emitted by selecting each of the plurality of pulse widths the predetermined number of times.
- the light emission timing control unit may switch between the selected pulse widths in sequence for each light emission operation of the light emitting unit.
- the light emission timing control unit may shift the phases of the multiple pulse widths at equal intervals.
- the light emission timing control unit may shift the phases of the multiple pulse widths by the same phase amount that is shorter than the unit light reception period.
- the multiple pulse widths may have the same time width.
- the plurality of pulse widths may include n (n is an integer greater than or equal to 1) pulse widths whose phases are earlier than a reference pulse width, and the n pulse widths whose phases are later than the reference pulse width.
- the multiple pulse widths may include two or more pulse widths with different time widths.
- the plurality of pulse widths include n (n is an integer of 1 or more) pulse widths that are shorter than a reference pulse width, and the n pulse widths that are longer than the reference pulse width,
- the n pulse widths shorter than the reference pulse width and the n pulse widths longer than the reference pulse width may have the same center of gravity.
- the light emitting device may further include a delay circuit that delays the synchronization signal output by the synchronization control unit by a period shorter than the unit light receiving period for each light emitting operation of the light emitting unit and transmits the delayed synchronization signal to the light emitting unit.
- the histogram generating unit may generate the histogram based on the association selected by the light-receiving time allocating unit.
- the histogram generating section may generate the histogram by allocating the light-receiving time to a plurality of unit light-receiving periods for each of the plurality of associations selected in turn the predetermined number of times.
- the multiple associations may be such that the unit light-receiving periods corresponding to the light-receiving times are shifted at equal intervals.
- the multiple correspondences may include n (n is an integer greater than or equal to 1) correspondences in which the unit light-reception period corresponding to the light-reception time is earlier than a reference correspondence between the light-reception time and the multiple unit light-reception periods in the histogram, and the n correspondences in which the unit light-reception period corresponding to the light-reception time is later than the reference correspondence.
- the light-reception time allocation unit may generate the multiple associations between the light-reception times and the multiple unit light-reception periods by varying the associations by a time width shorter than the unit light-reception period.
- a light pulse signal is reflected by an object, and a reflected light pulse signal is repeatedly received; generating a histogram in which the light reception frequency of the reflected light pulse signal is classified for each unit light reception period; Selecting one of a plurality of pulse widths having different phases in turn to emit the light pulse signal, selecting one of a plurality of different correspondences between the light receiving times of the reflected light pulse signal and the plurality of unit light receiving periods in the histogram in turn, or selecting the plurality of correspondences in parallel.
- a ranging method is provided.
- FIG. 1 is a block diagram showing the configuration of a distance measuring device according to a first embodiment of the present disclosure.
- 3A and 3B are diagrams illustrating a distance measurement method of a distance measurement device.
- Figure 3A shows the case where the centroid of the RX waveform is on the bin boundary
- Figure 3B shows the case where the RX waveform extends only to the right of two bins
- Figure 3C shows the case where the centroid of the RX waveform is in the bin center
- Figure 3D shows the case where the RX waveform extends only to the left of two bins.
- 4A is an image showing depth representing distance from a plane
- FIG. 4B is a diagram showing the depth error of FIG. 4A.
- Figure 5A shows the case where the center of gravity position of an RX waveform whose pulse width is a constant multiple of the bin width is the same as Figure 4A.
- Figure 5B shows the case where the center of gravity position of an RX waveform whose pulse width is a constant multiple of the bin width is the same as Figure 4B.
- Figure 5C shows the case where the center of gravity position of an RX waveform whose pulse width is a constant multiple of the bin width is the same as Figure 4C.
- Figure 5D shows the case where the center of gravity position of an RX waveform whose pulse width is a constant multiple of the bin width is the same as Figure 4D.
- 6A shows an ideal RX waveform and histogram when there is no dead time
- FIG. 6B shows an RX waveform and histogram when the received light intensity is low
- FIG. 6C shows an RX waveform and histogram when the received light intensity is medium
- FIG. 6D shows an RX waveform and histogram when the received light intensity is high.
- FIG. 2 is a diagram showing a first distance measurement method according to the first embodiment of the present disclosure.
- 10A and 10B are diagrams showing switching of TX waveforms by a light emitting unit; 8 illustrates multiple RX waveforms based on the multiple TX waveforms of FIG. 7.
- 4 is a flowchart illustrating the operation of the distance measuring device according to the first embodiment of the present disclosure.
- FIG. 10 is a diagram showing a delay time list.
- FIG. 10A and 10B are diagrams for explaining the influence of cyclic errors in the first ranging technique.
- Fig. 13A is an image showing true depth in the first simulation.
- Fig. 13B is a diagram showing distance measurement results when the number of divisions is 1.
- Fig. 13C is a diagram showing distance measurement results when the number of divisions is 4.
- Fig. 13D is a diagram showing distance measurement results when the number of divisions is 8.
- Fig. 13E is a diagram showing distance measurement results when the number of divisions is 16.
- Fig. 13F is a diagram showing depth values and depth error values of Figs. 13B to 13E.
- Fig. 14A is an image showing true depth in the second simulation.
- Fig. 14B is a diagram showing distance measurement results when the number of divisions is 1.
- FIG. 14C is a diagram showing distance measurement results when the number of divisions is 4.
- Fig. 14D is a diagram showing distance measurement results when the number of divisions is 8.
- Fig. 14E is a diagram showing distance measurement results when the number of divisions is 16.
- Fig. 14F is a diagram showing depth values and depth error values of Figs. 14B to 14E.
- Fig. 15A is an image showing true depth in the third simulation.
- Fig. 15B is a diagram showing distance measurement results when the number of divisions is 1.
- Fig. 15C is a diagram showing distance measurement results when the number of divisions is 4.
- Fig. 15D is a diagram showing distance measurement results when the number of divisions is 8.
- Fig. 15E is a diagram showing distance measurement results when the number of divisions is 16.
- Fig. 15A is an image showing true depth in the third simulation.
- Fig. 15B is a diagram showing distance measurement results when the number of divisions is 1.
- Fig. 15C is
- FIG. 15F is a diagram showing depth values and depth error values of Figs. 15B to 15E.
- Fig. 16A is an image showing true depth in the fourth simulation.
- Fig. 16B is a diagram showing distance measurement results when the number of divisions is 1.
- Fig. 16C is a diagram showing distance measurement results when the number of divisions is 4.
- Fig. 16D is a diagram showing distance measurement results when the number of divisions is 8.
- Fig. 16E is a diagram showing distance measurement results when the number of divisions is 16.
- Fig. 16F is a diagram showing depth values and depth error values of Figs. 16B to 16E.
- 10A and 10B are diagrams illustrating the influence of the pileup phenomenon in the first ranging method.
- Figures 18A, 18B, and 18C show cases where the pulse width of the RX waveform is three times the bin width, less than two times the bin width, and less than the bin width, respectively.
- 19A and 19B are diagrams showing first and second distance measurement results obtained by a distance measurement technique according to a comparative example;
- FIG. 10 is a diagram showing a second ranging technique according to the first embodiment of the present disclosure.
- 21A, 21B, and 21C are diagrams showing the relationship between the RX waveform and histogram for a long pulse width, a medium pulse width, and a short pulse width, respectively.
- FIG. 10 is a diagram showing a distance measurement method according to a modified example of the first embodiment of the present disclosure.
- FIG. 10 is a block diagram showing the configuration of a distance measuring device according to a second embodiment of the present disclosure.
- FIG. 10 is a block diagram showing a detailed configuration of a distance measuring unit according to a second embodiment of the present disclosure.
- FIG. 1 is a block diagram showing an example of a schematic configuration of a vehicle control system.
- FIG. 4 is an explanatory diagram showing an example of the installation positions of an outside-vehicle information detection unit and an imaging unit.
- Fig. 1 is a block diagram showing the configuration of a distance measuring device 1 according to a first embodiment of the present disclosure.
- the distance measuring device 1 in Fig. 1 is capable of measuring the distance to an object 10.
- the distance measuring device 1 includes a light emitting unit 2, a light receiving unit 3, a time-of-flight detecting unit 4, a histogram generating unit 5, a distance detecting unit 6, a light emission timing control unit 11, a clock signal generating unit (synchronization control unit) 12, a delay circuit 13, and a control unit 14.
- the light-emitting unit 2 intermittently emits a light pulse (TX: Transmitter exchange) signal toward the object 10.
- the light-receiving unit 3 repeatedly receives a reflected light pulse (RX: Received exchange) signal that is the TX signal reflected by the object 10.
- the light-emitting unit 2 has, for example, multiple light-emitting elements arranged in a two-dimensional direction. Furthermore, under the control of the light-emitting timing control unit 11, the light-emitting unit 2 can adjust the pulse width and phase of each TX signal emitted by the multiple light-emitting elements.
- the light receiving unit 3 has, for example, multiple SPADs.
- the multiple SPADs are arranged, for example, two-dimensionally.
- the smallest unit on the light receiving surface of the light receiving unit 3 is sometimes referred to as a pixel.
- One or more SPADs are arranged in one pixel.
- a high bias voltage, for example, is applied to the SPADs.
- the SPADs have sensitivity that allows them to respond to a single incident photon. When a SPAD responds to a photon, it generates an electric charge.
- the reaction of a SPAD to a photon is sometimes referred to as firing. When a SPAD fires, it generates an electric charge.
- the electric charge is amplified by avalanche multiplication, generating a large current. This causes a sudden drop in the voltage between the cathode and anode of the SPAD (hereinafter referred to as the output voltage).
- the light receiving unit 3 detects the reception of an RX signal by detecting a drop in the output voltage of each SPAD.
- the higher the intensity of the incident light the higher the proportion of SPADs that fire among the multiple SPADs in the light receiving unit 3.
- the lower the light intensity of the incident light the lower the proportion of SPADs that ignite among the multiple SPADs in the light receiving unit 3.
- the SPAD's output voltage drops.
- a recharge operation is required to raise the SPAD's output voltage to the bias voltage.
- the period from when the SPAD detects a photon until the SPAD's recharge operation is complete is a dead time during which the SPAD cannot detect photons.
- the time-of-flight detection unit 4 detects the time of flight from when the light-emitting unit 2 emits a TX signal until the light-receiving unit 3 receives an RX signal.
- the histogram generation unit 5 generates a histogram that classifies the frequency of receiving the RX signal for each predetermined unit light-receiving period based on the time of flight repeatedly detected by the time-of-flight detection unit 4.
- the distance detection unit 6 detects the distance to the object 10 based on the generated histogram.
- the time-of-flight detection unit 4, histogram generation unit 5, and distance detection unit 6 are collectively referred to as the distance measurement unit 7.
- Each bin of the histogram records, for example, the total number of SPADs that detected photons per unit light-reception period (hereinafter also referred to as the light-reception frequency) for each of multiple light-emitting periods.
- the light emission timing control unit 11 controls the light emission timing of the light emitting unit 2.
- the light emission timing control unit 11 may also control the end timing of light emission of the light emitting unit 2. By adjusting the light emission timing and end timing of light emission of the light emitting unit 2, the length of the pulse width of the TX signal can be adjusted. By adjusting the light emission timing of the light emitting unit 2, the phase of the pulse width can be adjusted.
- the clock signal generation unit 12 generates a clock signal (synchronization signal) that synchronizes the light emission operation of the light emission unit 2 and the light reception operation of the light reception unit 3.
- the delay circuit 13 delays the timing of transmitting the clock signal to the light emission timing control unit 11.
- the control unit 14 controls the amount of delay caused by the delay circuit 13. By controlling the amount of delay, the control unit 14 controls the delay in the light emission timing of the light emitting unit 2, and can generate multiple TX signals with different phases. Details of the control method used by the control unit 14 will be described later.
- Figure 2 is a diagram explaining the ranging method of the ranging device 1.
- Figure 2 illustrates the waveform of the TX signal (TX waveform), the waveform of the RX signal (RX waveform), and a histogram formed based on the RX waveform.
- the distance measuring device 1 can detect the distance to the object 10 by detecting the time of flight from the timing of the light pulse signal emitted by the light emitting unit 2 and the timing and interval of the reflected light pulse signal received by the light receiving unit 3.
- the phase and length of the emission period of the TX signal emitted by the light-emitting unit 2 may fluctuate.
- the sensitivity of each SPAD in the light-receiving unit 3 to the light intensity of the RX signal may also fluctuate.
- noise light such as sunlight may be incident on the light-receiving unit 3. Therefore, the distance measuring device 1 emits the TX signal multiple times and repeatedly receives the RX signal for each distance measurement.
- the histogram generating unit 5 generates a histogram based on the frequency of reception of the RX signal.
- the histogram generating unit 5 generates a histogram whose center of gravity coincides with the center of gravity of the pulse widths T of the multiple RX signals that are repeatedly received.
- the distance detecting unit 6 detects the time of flight of the light pulse signal and the reflected light pulse signal from the distance between the center of gravity of the pulse widths T of the multiple TX signals that are repeatedly emitted and the center of gravity of the histogram. In this way, by measuring the time of flight based on the distance between the center of gravity of multiple TX signals and the center of gravity of a histogram generated based on multiple RX signals, the distance to an object can be measured with high accuracy.
- multiple SPADs may detect photons at multiple different light receiving times.
- Figure 3 is a diagram illustrating the first problem with the ranging method of Figure 2.
- Figure 3 illustrates an RX waveform and a histogram generated by the histogram generation unit 5 based on the RX waveform.
- the horizontal axis of the RX waveform and the histogram represents time.
- the vertical axis of the RX waveform represents the received light intensity.
- the vertical axis of the histogram represents the frequency of light reception.
- Figure 3 also illustrates multiple bins that make up the histogram.
- Each of the multiple bins has a bin width b corresponding to the unit light reception period.
- the unit light reception period may be referred to as the bin width b.
- the time-of-flight detection unit 4 classifies the timing of light reception by the light receiving unit 3 into one of the bins of the histogram. As a result, the histogram measures the frequency of light reception in the corresponding bin for each flight distance of the RX signal (i.e., for each distance of the measured object 10).
- the time-of-flight detection unit 4 uses one bin to measure the frequency of light reception for the RX signal with a flight distance of, for example, 100 cm to 110 cm.
- the time-of-flight detection unit 4 also uses the bin immediately following this one bin to measure the frequency of light reception for the RX signal with a flight distance of 110 cm to 120 cm.
- the time-of-flight detection unit 4 classifies an RX signal with a flight distance of 101 cm and an RX signal with a flight distance of 109 cm into the same bin. These two RX signals are treated as an RX signal with a flight distance of 105 cm, for example. For this reason, if a large number of RX signals with a flight distance of 101 cm are received, an error (hereinafter also referred to as a positive error) occurs in which the calculated flight distance is longer than the actual flight distance. Furthermore, if a large number of RX signals with a flight distance of 109 cm are received, an error (hereinafter also referred to as a negative error) occurs in which the calculated flight distance is shorter than the actual flight distance.
- Figure 3A shows a case where the center of gravity of the RX waveform is on the boundary between the bins of the histogram.
- the RX waveform in Figure 3A extends evenly to the right and left of the two bins.
- the positive error described above occurs based on the portion of the RX waveform that extends to the right.
- a negative error occurs based on the portion of the RX waveform that extends to the left.
- the light reception frequency of the two bins of the histogram corresponding to the extended portions becomes the same (i.e., the positive and negative errors cancel each other out), and the center of gravity of the histogram and the center of gravity of the RX waveform coincide.
- FIG 3A As the time of flight increases, the center of gravity of the RX waveform moves to the right relative to the bin boundary.
- Figure 3B shows the case where the RX waveform extends beyond two bins to the right only. From Figure 3A to Figure 3B, as the time of flight increases, the light reception frequency of the bin corresponding to the portion extending to the right increases, and it no longer extends to the left, so the light reception frequency of the corresponding bin becomes zero. As a result, the RX waveform extends beyond the two bins to the right only, and the center of gravity of the histogram shifts to the right of the center of gravity of the RX waveform.
- Figure 3B shows the deviation (Error) between the center of gravity of the RX waveform and the histogram. This deviation in center of gravity deteriorates ranging accuracy.
- Figure 3C shows the case where the center of gravity of the RX waveform is in the center of the bin.
- Figure 3C shows the case where the flight time has increased further from Figure 3B.
- the amount of light that protrudes to the right and the amount that protrudes to the left of one bin become equal.
- the light reception frequency of the two bins in the histogram corresponding to the protruding portions becomes the same, and the center of gravity of the histogram and the center of gravity of the RX waveform coincide.
- Figure 3D shows the case where the RX waveform extends beyond the two bins to the left only.
- Figure 3D shows the case where the flight time has increased from Figure 3C.
- the RX waveform extends beyond the two bins to the left only, and the center of gravity of the histogram shifts to the left of the center of gravity of the RX waveform.
- the error between the center of gravity of the RX waveform and the center of gravity of the histogram shown in Figures 3A to 3D changes periodically as the flight time increases or decreases, and is therefore also called a periodic error (cyclic error).
- Figure 4A is an image displaying depth, which represents the distance from the plane to the dToF sensor.
- the dToF sensor emits a TX signal toward the center of the plane (i.e., the center of Figure 4A).
- the center of Figure 4A is the shortest flight distance. Furthermore, the flight distance increases as you move away from the center of Figure 4A.
- Figure 4B shows the depth error on the plane in Figure 4A when the plane is photographed using a dToF sensor or similar. As shown in Figure 4B, a cyclic error occurs as the flight distance increases. In this case, the cyclic error can be seen as a periodic concentric stripe pattern.
- Figure 5 shows one solution to the first problem in Figure 3. Cyclic errors can be suppressed by making the pulse width T of the RX waveform a constant multiple (more precisely, a natural number multiple) of the bin width b.
- the center of gravity positions of the RX waveforms in Figures 5A to 5D are the same as the center of gravity positions of the RX waveforms in Figures 3A to 3D, respectively.
- the RX waveforms shown in Figures 5A to 5D can be made to roughly match the center of gravity of the histogram and the center of gravity of the RX waveform, even if the center of gravity of the RX waveform is not at the boundary of a bin or at the center of gravity of a bin, thereby preventing the occurrence of cyclic errors.
- one possible method for solving the first problem is to suppress the occurrence of cyclic errors by making the light-emitting pulse width T of the light-emitting unit 2 a constant multiple of the bin width b.
- the pulse width T of the RX waveform varies with temperature. For this reason, depending on the environment, the pulse width T of the RX waveform may not be a constant multiple of the bin width b, despite control of the light-emitting unit 2, and the cyclic error shown in Figure 3 may occur.
- FIG 6 is a diagram illustrating the second problem with the ranging method in Figure 2.
- SPAD has a dead time after detecting a photon, during which it is no longer possible to detect the photon.
- the dead time is usually longer than the bin width b, and can be several times or more the bin width b.
- Figure 6A shows an ideal RX waveform and histogram when there is no dead time.
- the RX waveform in Figure 6A has a substantially uniform received light intensity over the entire range of pulse width T.
- the SPAD receives light at a uniform frequency over pulse width T, resulting in a flat histogram like the histogram in Figure 6A.
- the RX waveform in Figure 6A spans three unit light reception periods. Accordingly, three bins are generated in the histogram. In the example of Figure 6A, the period during which the RX signal is incident is the same for all three unit light reception periods, so the three bins have the same light reception frequency. Note that, depending on the phase of the RX waveform, there may be differences in the period during which the RX signal is incident among the three unit light reception periods, in which case there may also be differences in the light reception frequency for the three bins.
- Figure 6B shows the RX waveform and histogram when dead time is present.
- the RX waveform in Figure 6B has a roughly uniform light reception intensity, similar to Figure 6A.
- the SPAD that receives photons is unable to receive photons during the dead time, so the light reception frequency decreases in the latter half of the RX waveform pulse width T compared to the first half. This can cause the histogram to slope downward to the right. In this case, an error occurs between the center of gravity of the histogram and the center of gravity of the RX waveform, deteriorating ranging accuracy.
- the phenomenon in which dead time causes a difference in the light reception frequency between the first and second half of the pulse width T, as shown in Figure 6B is also known as a pile-up phenomenon.
- Figure 6B shows an example in which a histogram with a downward sloping shape is generated due to the pileup phenomenon, but depending on the phase of the RX waveform, the pileup phenomenon may generate a mountain-shaped histogram.
- Figure 6C shows an example where the received light intensity of the RX waveform is greater than that of Figure 6B.
- the received light intensity of the RX waveform is greater, more SPADs receive photons in the first half of the pulse width T.
- the number of SPADs that cannot receive light increases in the second half of the pulse width T.
- the histogram in Figure 6C has a stronger downward trend compared to the histogram in Figure 6B, and the deviation between the center of gravity of the histogram and the center of gravity of the RX waveform becomes larger.
- the higher the received light intensity of the RX waveform the worse the distance measurement accuracy.
- the received light intensity of the RX waveform becomes higher when the object 10 is a highly reflective object, when the object 10 is close, etc.
- Figure 6D shows an example where the received light intensity of the RX waveform is higher than in Figure 6C. While Figures 6A to 6C generate three bins in the histogram, Figure 6D differs in that only two bins are generated.
- the situation shown in Figure 6D occurs, for example, when all of the multiple SPADs in the light receiving unit 3 receive light in the first half of the pulse width T (the first and second unit light receiving periods). In this case, there are no SPADs that can receive light in the third unit light receiving period, so the light receiving frequency becomes 0 and no bins are generated.
- the phenomenon in which the number of bins in the histogram decreases due to almost all SPADs receiving light in the first half of the pulse width T is also known as saturation. When saturation occurs, ranging accuracy deteriorates significantly.
- the ranging device 1 is characterized by its ability to solve the first problem of deterioration in ranging accuracy due to cyclic errors, and the second problem of deterioration in ranging accuracy due to pile-up and saturation phenomena.
- the ranging device 1 has at least one of the following two features.
- the first feature is that the light-emitting unit 2 emits a TX signal having a TX waveform whose pulse width T is shorter than twice the bin width b (i.e., the unit light-receiving period).
- the second feature is that the light-emitting unit 2 emits multiple TX signals in sequence, each having a TX waveform with a different phase.
- the distance measuring device 1 has both the first and second features described above.
- the distance measuring device 1 may also be configured not to have either the first or second feature. That is, the light emitting unit 2 may set the pulse width T of the TX waveform to at least twice the bin width b. Furthermore, the light emitting unit 2 may repeatedly emit a TX signal having a TX waveform with the same phase.
- FIG. 7 is a diagram illustrating a first ranging method according to the first embodiment of the present disclosure.
- the light emitting unit 2 for example, emits four TX signals in sequence, each having a first to fourth TX waveform shown in FIG. 7.
- the first to fourth TX waveforms are TX waveforms with different phases from one another.
- the first TX waveform has a phase shifted by A in the forward direction of the time axis from the bin boundary (i.e., a phase difference of "-A").
- the second TX waveform has a phase shifted by A/3 in the forward direction of the time axis from the bin boundary (i.e., a phase difference of "-A/3").
- the third TX waveform has a phase shifted by A/3 in the backward direction of the time axis from the bin boundary (i.e., a phase difference of "+A/3").
- the fourth TX waveform has a phase shifted by A in the backward direction of the time axis from the bin boundary (i.e., a phase difference of "+A").
- phase differences absolute values "A" and "A/3" in Figure 7 are smaller than the bin width b.
- the phase difference relative to the bin boundary is also referred to as the offset.
- FIG 7 also illustrates a reference TX waveform.
- the reference TX waveform is a TX waveform that has no phase difference with the bin boundaries, and corresponds to the TX waveform in Figure 2.
- the light-emitting unit 2 does not emit a TX signal that has a TX waveform that has no phase difference with the bin boundaries (same phase as the reference TX waveform).
- the multiple TX waveforms in the TX signal emitted by the light-emitting unit 2 may include a TX waveform that has no phase difference with the bin boundaries.
- the first to fourth TX waveforms and the reference TX waveform all have the same pulse width T.
- the offset in Figure 7 can be generated, for example, by the delay circuit 13 in Figure 1.
- the time-of-flight detection unit 4 classifies the RX signal received by the light receiving unit 3 into one of multiple bins based on the clock signal obtained from the clock signal generation unit 12.
- the bin boundary is, for example, the timing at which the time-of-flight detection unit 4 obtains the clock signal.
- the bin boundary may be a timing that is shifted by a predetermined delay amount from the timing at which the clock signal is obtained.
- the delay circuit 13 obtains a clock signal from the clock signal generation unit 12.
- the delay circuit 13 delays the clock signal and inputs the delayed clock signal to the light emission timing control unit 11. This causes the light emission unit 2 to emit a TX signal having a TX waveform that corresponds to the delayed clock signal.
- the delay circuit 13 can generate an offset for the TX waveform (i.e., a phase difference relative to the bin boundary).
- the light-emitting unit 2 can emit a TX signal having the reference TX waveform shown in Figure 7.
- the light-emitting unit 2 switches the phase of the TX waveform for each light emission, for example.
- Figure 8 is a diagram showing the switching of the TX waveform by the light-emitting unit 2.
- the interval between each light emission by the light-emitting unit 2 is also referred to as the pulse repetition interval (PRI).
- PRI pulse repetition interval
- the light-emitting unit 2 emits the first to fourth TX waveforms in turn, for example, in that order.
- the control unit 14 in Figure 1 controls the delay amount of the delay circuit 13 so that the light emitting unit 2 emits a TX signal that selects one of multiple TX waveforms (first to fourth TX waveforms in the example of Figure 8) with different phases in turn.
- Figure 9 is a diagram showing multiple RX waveforms based on the multiple TX waveforms of Figure 7.
- Figure 9 illustrates first to fourth RX waveforms based on the first to fourth TX waveforms, a reference RX waveform based on a reference TX waveform, and a histogram generated based on the first to fourth RX waveforms.
- the reference RX waveform in Figure 9 corresponds to the RX waveform in Figure 2, etc.
- the first to fourth RX waveforms have the same offset from the reference RX waveform as the first to fourth TX waveforms.
- the histogram generator 5 generates the histogram shown in Figure 9 by accumulating the light reception frequency of the RX signal having each of the first to fourth RX waveforms.
- the histogram in Figure 9 has a number of bins corresponding to the pulse width T of the first to fourth RX waveforms and the offsets "-A" to "+A" of the first to fourth RX waveforms.
- the histogram may have four bins: two bins Ba corresponding to the pulse width T, one bin (the bin for the first unit light-reception period) Bb corresponding to the forward offset "-A" on the time axis, and one bin (the bin for the second unit light-reception period) Bc corresponding to the backward offset "+A" on the time axis.
- the bin Bb for the first unit light-reception period is formed based on the first RX waveform, etc.
- the bin Bc for the second unit light-reception period is formed based on the fourth RX waveform, etc.
- the sum of the offsets of the first to fourth RX waveforms corresponding to the first to fourth TX waveforms, respectively, is also 0. This allows the center of gravity of the histogram in Figure 9 to be approximately aligned with the center of gravity of the reference RX waveform.
- the time of flight can be detected from the center of gravity of the histogram and the center of gravity of the TX waveform (reference TX waveform).
- the phases of the first to fourth TX waveforms in Figure 7 are shifted at equal intervals by the same phase amount. More specifically, the phase difference between the first and second TX waveforms, the phase difference between the second and third TX waveforms, and the phase difference between the third and fourth TX waveforms are all 2/3A. This allows the first to fourth RX waveforms to be evenly distributed on the time axis. Furthermore, when accumulating the light reception frequencies of the first to fourth RX waveforms, it is possible to prevent the light reception frequencies from concentrating in a specific bin on the histogram.
- the n TX waveforms that are earlier in phase than the reference TX waveform and the n TX waveforms that are later in phase than the reference TX waveform include n pairs of TX waveforms that have the same absolute value of the phase difference from the reference TX waveform.
- FIG. 10 is a flowchart illustrating the operation of the distance measuring device 1 according to the first embodiment of the present disclosure.
- the control unit 14 sets the division number N and generates a delay time list based on this (step S1).
- the division number N is the number of TX waveform types.
- the light emitting unit 2 divides the number of emissions for one distance measurement according to the TX waveform type.
- the division number N is 4 for the first to fourth TX waveforms. If the light-emitting unit 2 emits light 1000 times in one distance measurement, the light-emitting unit 2 will emit TX signals having the first to fourth TX waveforms 250 times each.
- FIG. 11 shows a delay time list.
- the delay time list in FIG. 11 stores the relationship between i%N, which calculates the remainder when the light emission period counter i described below is divided by N, and the offset (delay time) that represents the amount by which the phase of the TX waveform is shifted.
- the delay time list is stored, for example, in a specified memory unit within the distance measuring device 1.
- control unit 14 initializes the light emission period counter i (step S2). For example, the control unit 14 sets the light emission period counter i to 0.
- the light emission period counter i is a count value that counts PRIs.
- the distance measuring device 1 performs light emission and light reception operations (step S4).
- the control unit 14 transmits the acquired offset to the delay circuit 13.
- the delay circuit 13 delays the light emission of the light emitting unit 2 based on the offset transmitted from the control unit 14.
- the light emitting unit 2 emits a TX signal, for example, with a first TX waveform.
- the light receiving unit 3 receives an RX signal, for example, with a first RX waveform. Based on this, the time-of-flight detection unit 4 classifies the light reception timing into one of multiple bins.
- the control unit 14 determines whether the light emitting unit 2 has emitted light the number of times required for one distance measurement (e.g., 1,000 times) (step S5). The control unit 14 determines, for example, whether the light emission period counter i is equal to or greater than the required number of times.
- control unit 14 increments the light-emitting period counter i (i ⁇ i+1) (step S6).
- control unit 14 can select multiple TX waveforms with different phases in rotation for each light emission based on the delay time list in FIG. 11. Furthermore, after the light emitter 2 emits a TX signal selecting the first through fourth TX waveforms once each in steps S3 through S6, it again emits a TX signal selecting the first through fourth TX waveforms once each. In other words, the control unit 14 selects the first through fourth TX waveforms in rotation two or more predetermined times (for example, 250 times).
- the light-emitting unit 2 If the light-emitting unit 2 has emitted light the required number of times (for example, i ⁇ 1000), the light-emitting unit 2 stops emitting light.
- the histogram generation unit 5 generates a histogram.
- the distance detection unit 6 detects the distance to the object 10 based on a calculation of the center of gravity of the histogram (step S7). This allows the distance measuring device 1 to measure the distance to the object 10.
- FIG. 12 is a diagram illustrating the effect of cyclic error in the ranging method according to the first embodiment of the present disclosure. Even in the ranging method according to the present disclosure, the pulse width T of the first to fourth RX waveforms may not be a constant multiple of the bin width b.
- Figure 12 shows the case where the reference RX waveform extends beyond the bin boundary to the right. In this case, a positive error occurs in the histogram.
- errors are accumulated in the bins corresponding to the portions of the RX waveform that extend off to the right. For example, the number of times an RX signal is received with a flight distance of approximately 101 cm is accumulated in the bin indicating a flight distance of 105 cm. In this example, a positive error of approximately +4 cm is repeatedly accumulated according to the number of times the RX signal is received.
- the phase of the RX signal does not change, so if an RX signal with a flight distance of approximately 101 cm is received 1000 times, an error of approximately +4 cm for 1000 times will be accumulated in the bin indicating a flight distance of 105 cm, and the error between the center of gravity of the RX signal and the center of gravity of the histogram will become larger.
- the multiple RX waveforms disclosed herein include RX waveforms with an earlier phase than the reference RX waveform and RX waveforms with a later phase. This makes it possible to change the error between the centroid position of the RX signal and the centroid position of the histogram for each RX waveform with a different phase. Therefore, by repeating reception multiple times while changing the phase of the RX waveform in turn, the histogram bin corresponding to the centroid of the RX waveform is distributed among multiple bins, and overall, the error between the centroid position of the RX signal and the centroid position of the histogram can be reduced, reducing cyclic errors.
- Figures 13 to 16 illustrate a true depth (GT_depth: Ground Truth depth) image, a depth image of the distance measurement results (measured depth), an image showing the distance measurement error, and a waveform diagram of the distance measurement error.
- GT_depth Ground Truth depth
- the distance to the subject i.e., object 10
- the field of view (FOV) of the distance measuring device 1 is 70 degrees.
- a pin-hole camera with no lens distortion was used for the distance measuring device 1.
- the maximum phase difference between the multiple TX waveforms is +3/4b, and the minimum phase difference is -3/4b.
- the pulse width T of the TX waveforms is different in Figures 13 to 16.
- the phase differences between the multiple TX waveforms are set to be equally spaced based on the number of divisions N and the above maximum and minimum phase differences.
- the distance measuring device 1 repeatedly emits a TX signal having the reference TX waveform shown in Figure 7, etc.
- Figure 13A shows a true depth (GT depth [m]) image.
- Figure 13A illustrates the depth as a function of the true distance from the plane measured in the simulation to the dToF sensor.
- Figs. 13B to 13E show the simulation results when the number of divisions N is 1, 4, 8, and 16, respectively. That is, Fig. 13B shows the simulation results of general-purpose ranging processing.
- the first row of Figs. 13B to 13E shows images of the depth (measured depth [m]) of the ranging results.
- the second row of Figs. 13B to 13E shows images of the ranging error (depth error [m]).
- the third row of Figures 13B to 13E shows the waveform of the depth error (depth error [m]).
- the waveforms on the third row of Figures 13B to 13E include the depth error in the dotted line portions on the first and second rows of Figures 13B to 13E.
- the horizontal axis of the waveform diagrams on the third row of Figures 13B to 13E indicates the position (index) of the dotted line portions on the first and second rows of Figures 13B to 13E, and the vertical axis indicates the depth error.
- the simulation in Figure 13 is a simulation in which the pulse width T of the TX waveform is a constant multiple of the bin width b.
- the pulse width T of the TX waveform is a constant multiple of the bin width b.
- cyclic errors are suppressed.
- almost no errors occur in any of Figures 13B to 13E.
- FIG 14B concentric cyclic errors are observed in the distance measurement results.
- Figure 14C when the distance measurement method disclosed herein is applied, the cyclic errors are reduced.
- Figures 14D and 14E the larger the division number N, the greater the effect of reducing cyclic errors.
- Figures 15 and 16 also confirm a reduction in cyclic error.
- the distance measuring device 1 can suppress cyclic errors, which are the first problem described above.
- FIG. 17 is a diagram illustrating the effect of the pile-up phenomenon in the ranging method according to the first embodiment of the present disclosure. As shown in FIG. 17, with the ranging method according to the present disclosure, the portions of the first to fourth RX waveforms where the SPAD light reception frequency is concentrated due to the pile-up phenomenon can be distributed across multiple bins in the histogram. This reduces errors due to the pile-up phenomenon.
- Range measurement errors due to pile-up and saturation phenomena can also be reduced by reducing the pulse width T of the TX waveform.
- Figure 18 is a diagram illustrating the reduction of range measurement errors due to pile-up and saturation phenomena in the range measurement method according to the first embodiment of the present disclosure.
- the RX signal is incident during three unit light reception periods.
- the RX signal cannot be received due to saturation, and no bin is generated.
- Figure 18B shows a case where the pulse width T of the RX waveform is less than twice the bin width b (T ⁇ 2b). Compared to Figure 18A, Figure 18B is characterized by a reduced number of unit light reception periods in which the RX waveform is incident. Figure 18B does not have a third unit light reception period that would be affected by saturation. This prevents the occurrence of the saturation phenomenon.
- Figure 18C shows a case where the pulse width T of the RX waveform is less than the bin width b (T ⁇ b).
- the pulse width T of the RX waveform is less than the bin width b (T ⁇ b).
- Figure 19 is a diagram showing a ranging method according to a first comparative example.
- the pulse width T of the TX waveform is set to be less than the bin width b, as in Figure 18.
- the ranging method of Figure 19 does not emit a TX signal having multiple TX waveforms with different phases, as shown in Figure 7. In other words, the ranging method of Figure 19 repeatedly emits a TX signal having a TX waveform with a single phase.
- the pulse width T of the RX waveform may become less than the bin width b. In this case, too, ranging accuracy will deteriorate, as in Figure 19.
- the pulse width T of the TX waveform is made larger than the bin width b.
- the pulse width T is made a constant multiple (for example, two or three times) the bin width b.
- FIG. 20 is a diagram showing a second ranging method according to the first embodiment of the present disclosure.
- the light-emitting unit 2 emits TX signals having first to fourth TX waveforms whose pulse width T is less than the bin width b.
- the light-receiving unit 3 receives RX signals having first to fourth RX waveforms whose pulse width T is less than the bin width b.
- the first to fourth RX waveforms in FIG. 20 have the same phase difference with respect to the reference RX waveform as in FIG. 7.
- the histogram in Figure 20 has a number of bins corresponding to the pulse width T of the first to fourth RX waveforms and the offset of the first to fourth RX waveforms. This results in two or more bins in the histogram, preventing the error shown in Figure 19 from occurring.
- the ranging method of Figure 20, like Figure 18C can reduce ranging errors due to saturation and pile-up phenomena. While Figure 20 illustrates an example in which the pulse width T is less than the bin width b, ranging errors due to saturation and pile-up phenomena can also be reduced when the pulse width T is less than twice the bin width b, like Figure 18B.
- the ranging method of Figure 20 can suppress cyclic errors, similar to the example of Figure 12. This eliminates the need to set the pulse width T to a constant multiple of the bin width b, allowing the pulse width T to be less than the bin width b.
- the ranging device 1 may suppress the ranging error in FIG. 19 using a method other than the ranging method in FIG. 20.
- the ranging device 1 may measure the temperature of the imaging environment and, based on the measured temperature, control the light emission of the light-emitting unit 2 so that the pulse width T of the RX waveform is approximately the same as the bin width b or greater than the bin width b (for example, twice the bin width b).
- the light-emitting unit 2 may intermittently emit a TX signal with a TX waveform of the same phase (for example, the reference TX waveform in FIG. 7).
- Figure 21 shows the relationship between the pulse width T of the RX waveform and the histogram.
- the pulse width T1 of the RX waveform in Figure 21A is, for example, 2.3 times the bin width b.
- the pulse width T2 of the RX waveform in Figure 21B is, for example, 1.15 times the bin width b.
- the pulse width T3 of the RX waveform in Figure 21C is, for example, 0.46 times the bin width b.
- the light emitting unit 2 is controlled to emit a TX signal having a TX waveform with a pulse width T twice the bin width b.
- the light emitting unit 2 is controlled to emit a TX signal having a TX waveform with a pulse width T that is approximately the same as the bin width b.
- RX signals having RX waveforms with the above-mentioned pulse widths T1 , T2 , and T3 are received in Fig. 21A to Fig. 21C, respectively.
- FIG. 22 is a diagram illustrating a ranging method according to a modified example of the first embodiment of the present disclosure.
- the ranging method of FIG. 22 differs from the ranging method of FIG. 7 in that the pulse widths of the first to fourth TX waveforms are different from each other.
- the pulse width of the reference TX waveform is T 0.
- the pulse width of the first TX waveform is T 0 -A.
- the pulse width of the second TX waveform is T 0 -A/3.
- the pulse width of the third TX waveform is T 0 +A/3.
- the pulse width of the fourth TX waveform is T 0 +A.
- the phase difference A is, for example, 1/2 of the bin width b.
- the centers of gravity of the first to fourth TX waveforms are approximately the same as the center of gravity of the reference TX waveform.
- the histogram generator 5 can generate a histogram having a center of gravity that is approximately the same as the center of gravity of the reference RX waveform.
- the ranging method of Figure 22 can also reduce ranging errors due to cyclic errors, saturation phenomena, and pile-up phenomena.
- the ranging device 1 has a first characteristic of emitting a TX signal having a TX waveform whose pulse width T is shorter than twice the unit light-reception period, and a second characteristic of emitting a TX signal by switching in sequence between multiple TX waveforms each having a different phase. This allows the ranging device 1 to solve both the first and second problems described above, thereby improving ranging accuracy.
- the first feature can reduce the number of bins where saturation and pile-up can occur, preventing a deterioration in ranging accuracy. Furthermore, by making the pulse width T of the TX waveform shorter than the unit light-receiving period, it is possible, in principle, to prevent saturation and pile-up from occurring, greatly improving ranging accuracy.
- the second feature allows the number of bins in the histogram to be two or more, even when the pulse width T of the RX waveform is shorter than the unit light-receiving period, thereby preventing a deterioration in ranging accuracy.
- the second feature is that even if a pile-up phenomenon occurs, the period during which SPAD light reception is concentrated can be distributed among multiple bins, thereby preventing deterioration in ranging accuracy due to the pile-up phenomenon.
- the second feature makes it possible to offset errors caused by cyclic errors, which is the first issue.
- errors caused by cyclic errors can be more effectively offset, improving ranging accuracy.
- Second Embodiment 7 errors due to cyclic error, pile-up phenomenon, and saturation phenomenon are dispersed to each bin of the histogram by controlling the light-emitting unit 2. This dispersion of the distance measurement errors can also be achieved by controlling the distance measurement unit 7.
- the second embodiment of the present disclosure is characterized in that the distance measurement errors are dispersed by controlling the distance measurement unit 7.
- FIG. 23 is a block diagram showing the configuration of a distance measuring device 1a according to a second embodiment of the present disclosure.
- FIG. 24 is a block diagram showing the detailed configuration of a distance measuring unit 7a according to a second embodiment of the present disclosure.
- the distance measuring device 1a in FIG. 23 differs from the distance measuring device 1 in FIG. 1 in that it does not have the delay circuit 13 in FIG. 1.
- the time-of-flight detection unit (light-reception time allocation unit) 4a in FIG. 24 is configured using, for example, a TDC (Time to Digital Converter), but its processing operation differs from that of the time-of-flight detection unit 4 in FIG. 1.
- TDC Time to Digital Converter
- the light-emitting unit 2a in Figure 23 intermittently emits a TX signal with the same phase and pulse width (for example, a TX signal having the reference TX waveform in Figure 7).
- step S4 in FIG. 10 differs for the distance measuring device 1a in FIG. 23 from that of the distance measuring device 1 in FIG. 1.
- the control unit 14a in FIG. 24 transmits the offset (delay time) acquired in step S3 in FIG. 10 to the time-of-flight detection unit 4a.
- the time-of-flight detection unit 4a may acquire the offset from the delay time list in FIG. 11 based on the light emission period counter i.
- the time-of-flight detection unit 4a obtains the time from when the light-emitting unit 2a emits the TX signal to when the light-receiving unit 3 receives the RX signal (hereinafter also referred to as the light-receiving time) based on the clock signal obtained from the clock signal generation unit 12 and the pixel signal obtained from the light-receiving unit 3.
- the time-of-flight detection unit 4a adds an offset (for example, the offset in Figure 11) to the light-reception time to calculate a phase-shifted light-reception time.
- the time-of-flight detection unit 4a assigns the phase-shifted light-reception time to one of multiple bins in the histogram and transmits the assignment number (bin_index) to the histogram generation unit 5.
- the histogram generation unit 5 increments the number of times light is received for the bin specified by the assignment number. In this way, the time-of-flight detection unit 4a associates the light-reception time with one of multiple bins in the histogram.
- the time-of-flight detection unit 4a acquires the same light-reception time from the light-receiving unit 3, it may assign it to a bin with a different assigned number depending on the offset value.
- the offset is selected in rotation, as in Figure 8.
- the time-of-flight detection unit 4a selects in rotation one of multiple different correspondences between the light-reception time of the RX waveform repeatedly received by the light-receiving unit 3 and multiple unit light-reception periods contained in the histogram.
- the histogram generation unit 5 generates a histogram based on the above assigned numbers. This allows a histogram similar to that shown in Figure 9 to be generated.
- the delay time list can be set with offsets similar to those shown in Figure 11.
- the time-of-flight detection unit 4a can use a delay time list in which the sum of the offsets is adjusted to 0 and the number of positive and negative offsets is equal.
- the time-of-flight detection unit 4a can also use offsets that are shorter than the unit light-receiving period and are shifted at equal intervals by the same phase amount.
- the distance measuring device 1a In the distance measuring device 1a according to the second embodiment, at least part of the light emitting unit 2a, light receiving unit 3, light emission timing control unit 11, or clock signal generation unit 12 may be provided external to the distance measuring device 1a.
- the distance measuring unit 7a may generate a histogram and calculate the center of gravity based on pixel signals transferred from the externally provided light receiving unit 3, etc.
- the time-of-flight detection unit 4a may be controlled by, for example, an information processing device downstream of the distance measuring device 1a. This allows the configuration of the distance measuring device 1a to be simplified.
- the light-emitting unit 2 according to the first embodiment may also be applied to the distance measuring device 1a. That is, the light-emitting unit 2a may be configured to emit TX signals having the first to fourth waveforms in FIG. 7 in sequence. The light-emitting unit 2a may also emit a TX signal having a TX waveform in which the pulse width T is less than twice the bin width b or less than the bin width b.
- the ranging error is dispersed by controlling the ranging unit 7.
- the ranging device 1a according to the second embodiment does not require complex light emission control.
- the configuration of the ranging device 1a can be simplified by implementing control of the time-of-flight detection unit 4a in a downstream information processing device or the like.
- At least a portion of the distance measuring device 1 or 1a described in the above-mentioned embodiments may be configured as hardware or software. If configured as software, a program that realizes at least a portion of the functions of the information processing device may be stored on a recording medium such as a flexible disk or CD-ROM, and loaded and executed by a computer.
- the recording medium is not limited to removable recording media such as magnetic disks or optical disks, but may also be fixed recording media such as hard disk drives or memory.
- a program that realizes at least some of the functions of the distance measuring device 1 or 1a may be distributed via a communication line (including wireless communication) such as the Internet.
- the program may be encrypted, modulated, or compressed and distributed via a wired or wireless line such as the Internet, or stored on a recording medium.
- the technology according to the present disclosure can be applied to various products.
- the technology according to the present disclosure may be realized as a device mounted on any type of moving body, such as an automobile, an electric vehicle, a hybrid electric vehicle, a motorcycle, a bicycle, personal mobility, an airplane, a drone, a ship, a robot, construction machinery, or agricultural machinery (tractor).
- FIG. 25 is a block diagram showing a schematic configuration example of a vehicle control system 7000, which is an example of a mobile object control system to which the technology disclosed herein can be applied.
- the vehicle control system 7000 includes multiple electronic control units connected via a communication network 7010.
- the vehicle control system 7000 includes a drive system control unit 7100, a body system control unit 7200, a battery control unit 7300, an outside-vehicle information detection unit 7400, an inside-vehicle information detection unit 7500, and an integrated control unit 7600.
- the communication network 7010 connecting these multiple control units may be an in-vehicle communication network conforming to any standard, such as CAN (Controller Area Network), LIN (Local Interconnect Network), LAN (Local Area Network), or FlexRay (registered trademark).
- CAN Controller Area Network
- LIN Local Interconnect Network
- LAN Local Area Network
- FlexRay registered trademark
- Each control unit includes a microcomputer that performs arithmetic processing in accordance with various programs, a memory unit that stores the programs executed by the microcomputer or parameters used in various calculations, and a drive circuit that drives various controlled devices.
- Each control unit includes a network I/F for communicating with other control units via the communication network 7010, as well as a communication I/F for communicating with devices or sensors inside and outside the vehicle via wired or wireless communication.
- Figure 25 illustrates the functional configuration of the integrated control unit 7600, including a microcomputer 7610, a general-purpose communication I/F 7620, a dedicated communication I/F 7630, a positioning unit 7640, a beacon receiving unit 7650, an in-vehicle device I/F 7660, an audio/video output unit 7670, an in-vehicle network I/F 7680, and a memory unit 7690.
- Other control units similarly include microcomputers, communication I/Fs, memory units, etc.
- the drivetrain control unit 7100 controls the operation of devices related to the vehicle's drivetrain in accordance with various programs.
- the drivetrain control unit 7100 functions as a control device for a driveforce generating device for generating vehicle driveforce, such as an internal combustion engine or drive motor, a driveforce transmission mechanism for transmitting driveforce to the wheels, a steering mechanism for adjusting the steering angle of the vehicle, and a braking device for generating vehicle braking force.
- the drivetrain control unit 7100 may also function as a control device for an ABS (Antilock Brake System) or ESC (Electronic Stability Control), etc.
- a vehicle state detection unit 7110 is connected to the drivetrain control unit 7100.
- the vehicle state detection unit 7110 includes at least one of the following: a gyro sensor that detects the angular velocity of the axial rotational movement of the vehicle body; an acceleration sensor that detects the acceleration of the vehicle; or a sensor for detecting the amount of accelerator pedal operation, the amount of brake pedal operation, the steering angle of the steering wheel, engine rotation speed, or wheel rotation speed.
- the drivetrain control unit 7100 performs arithmetic processing using signals input from the vehicle state detection unit 7110, and controls the internal combustion engine, drive motor, electric power steering device, brake device, etc.
- the body system control unit 7200 controls the operation of various devices installed in the vehicle body according to various programs.
- the body system control unit 7200 functions as a control device for a keyless entry system, a smart key system, a power window device, or various lamps such as headlamps, backup lamps, brake lamps, turn signals, and fog lamps.
- radio waves transmitted from a portable device that serves as a key or signals from various switches can be input to the body system control unit 7200.
- the body system control unit 7200 accepts these radio waves or signal inputs and controls the vehicle's door lock device, power window device, lamps, etc.
- the battery control unit 7300 controls the secondary battery 7310, which is the power supply source for the drive motor, in accordance with various programs. For example, information such as battery temperature, battery output voltage, or remaining battery capacity is input to the battery control unit 7300 from a battery device equipped with the secondary battery 7310. The battery control unit 7300 performs calculations using these signals, and controls the temperature regulation of the secondary battery 7310 or the cooling device or other components equipped in the battery device.
- the outside vehicle information detection unit 7400 detects information outside the vehicle equipped with the vehicle control system 7000.
- an imaging unit 7410 and an outside vehicle information detection unit 7420 is connected to the outside vehicle information detection unit 7400.
- the imaging unit 7410 includes at least one of a ToF (Time Of Flight) camera, a stereo camera, a monocular camera, an infrared camera, and other cameras.
- the outside vehicle information detection unit 7420 includes at least one of, for example, an environmental sensor for detecting the current weather or climate, or a surrounding information detection sensor for detecting other vehicles, obstacles, pedestrians, etc. around the vehicle equipped with the vehicle control system 7000.
- the environmental sensor may be, for example, at least one of a raindrop sensor that detects rain, a fog sensor that detects fog, a sunshine sensor that detects the level of sunlight, and a snow sensor that detects snowfall.
- the surrounding information detection sensor may be at least one of an ultrasonic sensor, a radar device, and a LIDAR (Light Detection and Ranging, Laser Imaging Detection and Ranging) device.
- the imaging unit 7410 and the outside vehicle information detection unit 7420 may each be provided as an independent sensor or device, or may be provided as a device that integrates multiple sensors or devices.
- Figure 26 shows an example of the installation locations of the imaging unit 7410 and the vehicle exterior information detection unit 7420.
- the imaging units 7910, 7912, 7914, 7916, and 7918 are installed, for example, at least one of the front nose, side mirrors, rear bumper, back door, and the top of the windshield inside the vehicle cabin of the vehicle 7900.
- the imaging unit 7910 installed on the front nose and the imaging unit 7918 installed on the top of the windshield inside the vehicle cabin mainly capture images of the front of the vehicle 7900.
- the imaging units 7912 and 7914 installed on the side mirrors mainly capture images of the sides of the vehicle 7900.
- the imaging unit 7916 installed on the rear bumper or back door mainly captures images of the rear of the vehicle 7900.
- the imaging unit 7918 which is mounted above the windshield inside the vehicle, is primarily used to detect preceding vehicles, pedestrians, obstacles, traffic lights, traffic signs, lane marks, etc.
- Imaging range a indicates the imaging range of the imaging unit 7910 provided on the front nose
- imaging ranges b and c indicate the imaging ranges of the imaging units 7912 and 7914 provided on the side mirrors, respectively
- imaging range d indicates the imaging range of the imaging unit 7916 provided on the rear bumper or back door.
- External vehicle information detection units 7920, 7922, 7924, 7926, 7928, and 7930 installed on the front, rear, sides, corners, and above the windshield inside the vehicle cabin of vehicle 7900 may be, for example, ultrasonic sensors or radar devices.
- External vehicle information detection units 7920, 7926, and 7930 installed on the front nose, rear bumper, back door, and above the windshield inside the vehicle cabin of vehicle 7900 may be, for example, LIDAR devices.
- These external vehicle information detection units 7920 to 7930 are primarily used to detect preceding vehicles, pedestrians, obstacles, etc.
- the outside vehicle information detection unit 7400 causes the imaging unit 7410 to capture images outside the vehicle and receives the captured image data.
- the outside vehicle information detection unit 7400 also receives detection information from the connected outside vehicle information detection unit 7420. If the outside vehicle information detection unit 7420 is an ultrasonic sensor, radar device, or LIDAR device, the outside vehicle information detection unit 7400 emits ultrasonic waves or electromagnetic waves, and receives information on the received reflected waves. Based on the received information, the outside vehicle information detection unit 7400 may perform object detection processing or distance detection processing for people, vehicles, obstacles, signs, text on the road, etc. Based on the received information, the outside vehicle information detection unit 7400 may also perform environmental recognition processing to recognize rainfall, fog, road conditions, etc. Based on the received information, the outside vehicle information detection unit 7400 may also calculate the distance to objects outside the vehicle.
- the outside vehicle information detection unit 7400 may also perform image recognition processing or distance detection processing to recognize people, cars, obstacles, signs, or text on the road surface based on the received image data.
- the outside vehicle information detection unit 7400 may also perform processing such as distortion correction or alignment on the received image data, and may also generate an overhead image or panoramic image by combining image data captured by different image capture units 7410.
- the outside vehicle information detection unit 7400 may also perform viewpoint conversion processing using image data captured by different image capture units 7410.
- the in-vehicle information detection unit 7500 detects information inside the vehicle.
- a driver state detection unit 7510 that detects the driver's state.
- the driver state detection unit 7510 may include a camera that captures an image of the driver, a biosensor that detects the driver's biometric information, or a microphone that collects audio from within the vehicle cabin.
- the biosensor is provided, for example, on the seat or steering wheel, and detects the biometric information of a passenger sitting in the seat or the driver gripping the steering wheel.
- the in-vehicle information detection unit 7500 may calculate the driver's level of fatigue or concentration based on the detection information input from the driver state detection unit 7510, or may determine whether the driver is dozing off.
- the in-vehicle information detection unit 7500 may perform processing such as noise canceling on the collected audio signal.
- the integrated control unit 7600 controls the overall operation of the vehicle control system 7000 in accordance with various programs.
- An input unit 7800 is connected to the integrated control unit 7600.
- the input unit 7800 is realized by a device that can be operated by the occupant for input, such as a touch panel, button, microphone, switch, or lever. Data obtained by voice recognition of voice input through a microphone may be input to the integrated control unit 7600.
- the input unit 7800 may be, for example, a remote control device that uses infrared or other radio waves, or an externally connected device such as a mobile phone or PDA (Personal Digital Assistant) that is compatible with the operation of the vehicle control system 7000.
- the input unit 7800 may be, for example, a camera, in which case the occupant can input information using gestures.
- the input unit 7800 may include, for example, an input control circuit that generates an input signal based on information input by a passenger or the like using the input unit 7800 and outputs the signal to the integrated control unit 7600.
- the passenger or the like inputs various data to the vehicle control system 7000 and instructs it to perform processing operations.
- the memory unit 7690 may include a ROM (Read Only Memory) that stores various programs executed by the microcomputer, and a RAM (Random Access Memory) that stores various parameters, calculation results, sensor values, etc.
- the memory unit 7690 may also be realized by a magnetic memory device such as an HDD (Hard Disc Drive), a semiconductor memory device, an optical memory device, or a magneto-optical memory device.
- the general-purpose communication I/F 7620 is a general-purpose communication I/F that mediates communication between various devices present in the external environment 7750.
- the general-purpose communication I/F 7620 may implement cellular communication protocols such as GSM (registered trademark) (Global System of Mobile communications), WiMAX (registered trademark), LTE (registered trademark) (Long Term Evolution) or LTE-Advanced (LTE-A), or other wireless communication protocols such as wireless LAN (also known as Wi-Fi (registered trademark)) and Bluetooth (registered trademark).
- GSM Global System of Mobile communications
- WiMAX registered trademark
- LTE registered trademark
- LTE-Advanced LTE-Advanced
- wireless LAN also known as Wi-Fi (registered trademark)
- Bluetooth registered trademark
- the general-purpose communication I/F 7620 may connect to devices (e.g., application servers or control servers) present on an external network (e.g., the Internet, a cloud network, or an operator-specific network) via, for example, a base station or access point. Additionally, the general-purpose communication I/F 7620 may connect to a terminal located near the vehicle (for example, a terminal of a driver, pedestrian, or store, or an MTC (Machine Type Communication) terminal) using, for example, P2P (Peer To Peer) technology.
- P2P Peer To Peer
- the dedicated communication I/F 7630 is a communication I/F that supports communication protocols designed for use in vehicles.
- the dedicated communication I/F 7630 may implement standard protocols such as WAVE (Wireless Access in Vehicle Environment), which is a combination of the lower layer IEEE 802.11p and the upper layer IEEE 1609, DSRC (Dedicated Short Range Communications), or a cellular communication protocol.
- WAVE Wireless Access in Vehicle Environment
- DSRC Dedicated Short Range Communications
- the dedicated communication I/F 7630 typically performs V2X communication, a concept that includes one or more of vehicle-to-vehicle communication, vehicle-to-infrastructure communication, vehicle-to-home communication, and vehicle-to-pedestrian communication.
- the positioning unit 7640 performs positioning by receiving, for example, GNSS signals from GNSS (Global Navigation Satellite System) satellites (e.g., GPS signals from GPS (Global Positioning System) satellites), and generates location information including the vehicle's latitude, longitude, and altitude.
- GNSS Global Navigation Satellite System
- GPS Global Positioning System
- the positioning unit 7640 may determine the current location by exchanging signals with a wireless access point, or may obtain location information from a terminal with positioning capabilities, such as a mobile phone, PHS, or smartphone.
- the beacon receiver 7650 receives, for example, radio waves or electromagnetic waves transmitted from radio stations installed on the road, and acquires information such as the current location, congestion, road closures, and travel time.
- the functions of the beacon receiver 7650 may be included in the dedicated communication I/F 7630 described above.
- the in-vehicle device I/F 7660 is a communication interface that mediates connections between the microcomputer 7610 and various in-vehicle devices 7760 present in the vehicle.
- the in-vehicle device I/F 7660 may establish wireless connections using wireless communication protocols such as wireless LAN, Bluetooth (registered trademark), NFC (Near Field Communication), or WUSB (Wireless USB).
- the in-vehicle device I/F 7660 may also establish a wired connection such as USB (Universal Serial Bus), HDMI (High-Definition Multimedia Interface), or MHL (Mobile High-Definition Link) via a connection terminal (and a cable, if necessary) not shown.
- USB Universal Serial Bus
- HDMI High-Definition Multimedia Interface
- MHL Mobile High-Definition Link
- the in-vehicle device 7760 may include, for example, at least one of a mobile device or wearable device owned by the passenger, or an information device carried into or attached to the vehicle.
- the in-vehicle device 7760 may also include a navigation device that searches for a route to an arbitrary destination.
- the in-vehicle device I/F 7660 exchanges control signals or data signals with these in-vehicle devices 7760.
- the in-vehicle network I/F 7680 is an interface that mediates communication between the microcomputer 7610 and the communication network 7010.
- the in-vehicle network I/F 7680 sends and receives signals in accordance with a specific protocol supported by the communication network 7010.
- the microcomputer 7610 of the integrated control unit 7600 controls the vehicle control system 7000 in accordance with various programs based on information acquired via at least one of the general-purpose communication I/F 7620, dedicated communication I/F 7630, positioning unit 7640, beacon receiving unit 7650, in-vehicle device I/F 7660, and in-vehicle network I/F 7680.
- the microcomputer 7610 may calculate control target values for the driving force generating device, steering mechanism, or braking device based on acquired information from inside and outside the vehicle, and output control commands to the drivetrain control unit 7100.
- the microcomputer 7610 may perform cooperative control aimed at realizing the functions of an Advanced Driver Assistance System (ADAS), including vehicle collision avoidance or impact mitigation, following driving based on inter-vehicle distance, vehicle speed maintenance driving, vehicle collision warning, and vehicle lane departure warning.
- ADAS Advanced Driver Assistance System
- the microcomputer 7610 may perform cooperative control for the purpose of autonomous driving, which allows the vehicle to travel autonomously without relying on driver operation, by controlling the driving force generation device, steering mechanism, braking device, etc. based on the acquired information about the vehicle's surroundings.
- the microcomputer 7610 may generate three-dimensional distance information between the vehicle and surrounding objects such as structures and people based on information acquired via at least one of the general-purpose communication I/F 7620, dedicated communication I/F 7630, positioning unit 7640, beacon receiving unit 7650, in-vehicle equipment I/F 7660, and in-vehicle network I/F 7680, and may create local map information including information about the area around the vehicle's current location. Furthermore, the microcomputer 7610 may predict dangers such as a vehicle collision, approaching pedestrians, or entering a closed road based on the acquired information, and generate a warning signal.
- the warning signal may be, for example, a signal to generate a warning sound or turn on a warning lamp.
- the audio/video output unit 7670 transmits at least one audio and/or image output signal to an output device capable of visually or audibly notifying vehicle occupants or the outside of the vehicle of information.
- an audio speaker 7710, a display unit 7720, and an instrument panel 7730 are exemplified as output devices.
- the display unit 7720 may include, for example, at least one of an on-board display and a head-up display.
- the display unit 7720 may have an AR (Augmented Reality) display function.
- the output device may also be other devices such as headphones, wearable devices such as eyeglass-type displays worn by the occupants, projectors, or lamps.
- the output device When the output device is a display device, the display device visually displays the results obtained by various processes performed by the microcomputer 7610 or information received from other control units in various formats such as text, images, tables, and graphs.
- the output device is an audio output device, the audio output device converts audio signals consisting of reproduced audio data or acoustic data into analog signals and outputs them audibly.
- At least two control units connected via the communication network 7010 may be integrated into a single control unit.
- each control unit may be made up of multiple control units.
- the vehicle control system 7000 may include another control unit not shown.
- some or all of the functions performed by one of the control units may be carried out by another control unit. In other words, as long as information is sent and received via the communication network 7010, predetermined calculation processing may be performed by one of the control units.
- a sensor or device connected to one of the control units may be connected to another control unit, and multiple control units may send and receive detection information to each other via the communication network 7010.
- a computer program for realizing each function of the distance measuring device 1 according to this embodiment described with reference to FIG. 1 can be implemented in any control unit, etc.
- a computer-readable recording medium on which such a computer program is stored can be provided. Examples of recording media include magnetic disks, optical disks, magneto-optical disks, and flash memory.
- the above computer program may also be distributed, for example, via a network, without using a recording medium.
- the distance measuring device 1 in the vehicle control system 7000 described above, the distance measuring device 1 according to this embodiment, which was explained using Figure 1, can be applied to the imaging unit 7410 of the application example shown in Figure 25. This enables highly accurate distance measurement even when the subject is at a close distance or when the subject is highly reflective.
- the components of the distance measuring device 1 described using FIG. 1 may be implemented in a module (e.g., an integrated circuit module configured on a single die) for the integrated control unit 7600 shown in FIG. 25.
- the distance measuring device 1 described using FIG. 1 may be implemented by multiple control units of the vehicle control system 7000 shown in FIG. 25.
- the present technology can be configured as follows: (1) a light receiving unit that repeatedly receives a reflected light pulse signal that is a light pulse signal reflected by an object; and a histogram generating unit that generates a histogram in which the reception frequency of the reflected light pulse signal is classified for each unit light receiving period. a light-emitting unit that repeatedly emits the optical pulse signal with a pulse width that is shorter than twice the unit light-receiving period; A distance measuring device comprising: (2) The light emitting unit repeatedly emits the optical pulse signal with a pulse width shorter than the unit light receiving period. A distance measuring device according to (1).
- a light receiving unit that repeatedly receives a reflected light pulse signal that is a light pulse signal reflected by an object; and a histogram generating unit that generates a histogram in which the reception frequency of the reflected light pulse signal is classified for each unit light receiving period.
- a control unit that controls the light emitting unit to select in turn one of a plurality of pulse widths having different phases and emit the light pulse signal, or that selects in turn one of a plurality of different correspondences between the light receiving times of the reflected light pulse signal received by the light receiving unit and a plurality of unit light receiving periods included in the histogram, or that selects the plurality of correspondences in parallel.
- Ranging device that controls the light emitting unit to select in turn one of a plurality of pulse widths having different phases and emit the light pulse signal, or that selects in turn one of a plurality of different correspondences between the light receiving times of the reflected light pulse signal received by the light receiving unit and a plurality of unit light receiving periods included in the histogram
- the light emitting unit is configured to select a plurality of pulse widths having different phases in turn and emit the optical pulse signal, or to intermittently emit the optical pulse signal having pulse widths having the same phase.
- a distance measuring device according to any one of (1) to (3).
- a light emission timing control unit is provided which selects one of the plurality of pulse widths having different phases in turn, the light emitting unit emits the optical pulse signal with the pulse width selected by the light emission timing control unit; A distance measuring device according to (4).
- the light emission timing control unit selects each of the plurality of pulse widths in turn two or more predetermined times, the light-emitting unit repeats the operation of emitting the optical pulse signal having the pulse width selected by the light-emission timing control unit the predetermined number of times, the light receiving unit repeats the operation of receiving the reflected light pulse signal corresponding to the light pulse signal emitted for each of the plurality of pulse widths the predetermined number of times, the histogram generation unit generates the histogram based on the reflected light pulse signals corresponding to the light pulse signals emitted by selecting each of the plurality of pulse widths the predetermined number of times.
- the light emission timing control unit switches the selection of the plurality of pulse widths in turn for each light emission operation of the light emitting unit.
- a distance measuring device according to (5) or (6).
- the light emission timing control unit shifts the phases of the plurality of pulse widths at equal intervals.
- a distance measuring device according to any one of (5) to (7).
- the light emission timing control unit shifts the phases of the plurality of pulse widths by the same phase amount that is shorter than the unit light receiving period.
- the plurality of pulse widths have the same time width.
- a distance measuring device according to any one of (3) to (9).
- the plurality of pulse widths include n (n is an integer of 1 or more) pulse widths whose phases are earlier than a reference pulse width, and the n pulse widths whose phases are later than the reference pulse width.
- the plurality of pulse widths include two or more pulse widths having different time widths.
- the plurality of pulse widths include n (n is an integer of 1 or more) pulse widths that are shorter than a reference pulse width, and the n pulse widths that are longer than the reference pulse width, The n pulse widths shorter than the reference pulse width and the n pulse widths longer than the reference pulse width have the same center of gravity.
- a synchronization control unit that synchronizes the light receiving unit and the light emitting unit; a delay circuit that delays the synchronization signal output from the synchronization control unit by a period shorter than the unit light-receiving period for each light-emitting operation of the light-emitting unit and transmits the delayed synchronization signal to the light-emitting unit,
- a distance measuring device according to any one of (1) to (13).
- a light-receiving time allocation unit which selects one of a plurality of different correspondences between the light-receiving times of the reflected light pulse signals repeatedly received by the light-receiving unit and the plurality of unit light-receiving periods included in the histogram in turn, the histogram generation unit generates the histogram based on the association selected by the light-receiving time allocation unit.
- a distance measuring device according to (3) or (4).
- the light-receiving time allocation unit selects each of the plurality of associations in turn two or more predetermined times
- the histogram generation unit generates the histogram by allocating the light-receiving time to a plurality of unit light-receiving periods for each of the plurality of associations selected in turn the predetermined number of times.
- a distance measuring device according to (15).
- the unit light-receiving periods corresponding to the light-receiving times are shifted at equal intervals.
- a distance measuring device according to (15) or (16).
- the plurality of correspondences include n (n is an integer of 1 or more) correspondences in which the unit light-receiving periods corresponding to the light-receiving times are earlier than a reference correspondence between the light-receiving times and the plurality of unit light-receiving periods included in the histogram, and the n correspondences in which the unit light-receiving periods corresponding to the light-receiving times are later than the reference correspondence.
- a distance measuring device according to any one of (15) to (17).
- the light-receiving time allocation unit generates the plurality of associations between the light-receiving times and the plurality of unit light-receiving periods by changing the associations by a time width shorter than the unit light-receiving period.
- a distance measuring device according to any one of (15) to (18). (20) Repeatedly receiving a reflected light pulse signal that is reflected by an object; generating a histogram in which the light reception frequency of the reflected light pulse signal is classified for each unit light reception period; Selecting one of a plurality of pulse widths having different phases in turn to emit the light pulse signal, selecting one of a plurality of different correspondences between the light receiving times of the reflected light pulse signal and the plurality of unit light receiving periods in the histogram in turn, or selecting the plurality of correspondences in parallel. Distance measurement method.
- 1, 1a Distance measuring device, 2, 2a: Light emitter, 3: Light receiver, 4, 4a: Time-of-flight detector, 5: Histogram generator, 6: Distance detector, 7, 7a: Distance measuring unit, 10: Object, 11: Light emission timing controller, 12: Clock signal generator, 13: Delay circuit, 14, 14a: Controller
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Electromagnetism (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
[課題]測距精度を向上できる。 [解決手段]測距装置は、光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、前記光パルス信号を、前記単位受光期間の2倍よりも短いパルス幅で繰り返し発光する発光部と、を備える。
Description
本開示は、測距装置及び測距方法に関する。
自動運転技術などでは、物体に光を照射する発光タイミング、及び物体からの反射光を受光する受光タイミングに基づいて、物体の距離を測定するdToF(direct Time of Flight)方式のLiDAR(Light Detection And Ranging)が広く採用されている。例えば、複数の飛行時間ヒストグラムを1階級ずつずらして加算することにより、1つの飛行時間ヒストグラムを形成し、形成された1つの飛行時間ヒストグラムを用いて飛行時間を検出することによって、短い測距時間で高い分解能を得る手法が提案されている(特許文献1参照)。
測距装置の受光部には、例えば、光子を検出するSPAD(Single Photon Avalanche Diode)が用いられる。SPADには、光子を検出した後、一定期間、光子を検出できないデッドタイムが発生するという特徴がある。
このデッドタイムにより、所定のパルス幅を有する反射光パルス信号を受光したときに、パルス幅の前半に比べて、パルス幅の後半ではSPADの反応確率が低下する。これにより、ヒストグラムが右肩下がりの形状になり、ヒストグラムの重心がずれて測距精度が悪化するパイルアップ(pileup)現象が発生することがある。
特に、反射光パルス信号の光強度が高い場合は、パルス幅の前半で殆どのSPADが反応し、上述したデッドタイムにより、パルス幅の後半でSPADが光子に反応できなくなり、パルス幅の後半に位置するヒストグラムのビンの受光頻度が著しく低下する飽和(saturation)が発生する場合がある。この場合、ヒストグラムの重心位置が大きくずれて、測距精度が著しく悪化するという課題がある。このように、物体が近距離に位置する場合、物体の反射率が高い場合、又は発光素子の発光強度が高い場合には、反射光パルス信号の光強度が高くなりやすいため、上述した飽和が発生しやすくなる。
特許文献1には、上記のパイルアップ現象及び飽和現象と、その対策について何ら開示されていない。
そこで、本開示では、測距精度を向上できる測距装置及び測距方法を提供するものである。
上記の課題を解決するために、本開示によれば、光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
前記光パルス信号を、前記単位受光期間の2倍よりも短いパルス幅で繰り返し発光する発光部と、
を備える、測距装置が提供される。
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
前記光パルス信号を、前記単位受光期間の2倍よりも短いパルス幅で繰り返し発光する発光部と、
を備える、測距装置が提供される。
前記発光部は、前記光パルス信号を、前記単位受光期間よりも短いパルス幅で繰り返し発光してもよい。
また、本開示によれば、光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
発光部に位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光させる制御を行うか、前記受光部で受光された前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択する制御部と、を備える、
測距装置が提供される。
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
発光部に位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光させる制御を行うか、前記受光部で受光された前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択する制御部と、を備える、
測距装置が提供される。
それぞれ異なる位相の複数のパルス幅を順繰りに選択して前記光パルス信号を発光するか、又は、同一の位相のパルス幅の前記光パルス信号を断続的に発光する、前記発光部を備えてもよい。
位相がそれぞれ異なる複数の前記パルス幅のうち一つを順繰りに選択する発光タイミング制御部を備え、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅で前記光パルス信号を発光してもよい。
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅で前記光パルス信号を発光してもよい。
前記発光タイミング制御部は、前記複数のパルス幅のそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅の前記光パルス信号を発光する動作を前記所定回数ずつ繰り返し、
前記受光部は、前記複数のパルス幅のそれぞれごとに発光された前記光パルス信号に対応する前記反射光パルス信号を受光する動作を前記所定回数ずつ繰り返し、
前記ヒストグラム生成部は、前記複数のパルス幅のそれぞれを前記所定回数ずつ選択して発光された前記光パルス信号に対応する前記反射光パルス信号に基づいて、前記ヒストグラムを生成してもよい。
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅の前記光パルス信号を発光する動作を前記所定回数ずつ繰り返し、
前記受光部は、前記複数のパルス幅のそれぞれごとに発光された前記光パルス信号に対応する前記反射光パルス信号を受光する動作を前記所定回数ずつ繰り返し、
前記ヒストグラム生成部は、前記複数のパルス幅のそれぞれを前記所定回数ずつ選択して発光された前記光パルス信号に対応する前記反射光パルス信号に基づいて、前記ヒストグラムを生成してもよい。
前記発光タイミング制御部は、前記発光部の1回の発光動作ごとに、前記複数のパルス幅の選択を順繰りに切り替えてもよい。
前記発光タイミング制御部は、前記複数のパルス幅の位相を等間隔でずらしてもよい。
前記発光タイミング制御部は、前記複数のパルス幅の位相を、前記単位受光期間よりも短い同一の位相量ずつずらしてもよい。
前記複数のパルス幅は、同じ時間幅を有してもよい。
前記複数のパルス幅は、基準となるパルス幅よりも位相が早いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも位相が遅い前記n個のパルス幅と、を含んでもよい。
前記複数のパルス幅は、互いに異なる時間幅の2以上のパルス幅を含んでもよい。
前記複数のパルス幅は、基準となるパルス幅よりも短いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも長い前記n個のパルス幅と、を含み、
前記基準となるパルス幅よりも短いn個のパルス幅と、前記基準となるパルス幅よりも長いn個のパルス幅と、は同一の重心位置を有してもよい。
前記基準となるパルス幅よりも短いn個のパルス幅と、前記基準となるパルス幅よりも長いn個のパルス幅と、は同一の重心位置を有してもよい。
前記受光部と前記発光部とを同期させる同期制御部と、
前記同期制御部の出力する同期信号を、前記発光部の1回の発光動作ごとに、前記単位受光期間よりも短い期間の遅延をさせて、前記発光部に伝達する遅延回路と、をさらに備えてもよい。
前記同期制御部の出力する同期信号を、前記発光部の1回の発光動作ごとに、前記単位受光期間よりも短い期間の遅延をさせて、前記発光部に伝達する遅延回路と、をさらに備えてもよい。
前記受光部で繰り返し受光された前記反射光パルス信号の受光時刻と、前記ヒストグラムが有する複数の前記単位受光期間と、のそれぞれ異なる複数の対応づけのうち一つを順繰りに選択する受光時刻割当部を備え、
前記ヒストグラム生成部は、前記受光時刻割当部で選択された前記対応づけに基づいて、前記ヒストグラムを生成してもよい。
前記ヒストグラム生成部は、前記受光時刻割当部で選択された前記対応づけに基づいて、前記ヒストグラムを生成してもよい。
前記受光時刻割当部は、前記複数の対応づけのそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記ヒストグラム生成部は、前記所定回数ずつ順繰りに選択される前記複数の対応づけのそれぞれごとに、前記受光時刻を複数の前記単位受光期間に割り当てて前記ヒストグラムを生成してもよい。
前記ヒストグラム生成部は、前記所定回数ずつ順繰りに選択される前記複数の対応づけのそれぞれごとに、前記受光時刻を複数の前記単位受光期間に割り当てて前記ヒストグラムを生成してもよい。
前記複数の対応づけは、前記受光時刻に対応する前記単位受光期間が等間隔でずれていてもよい。
前記複数の対応づけは、前記受光時刻と前記ヒストグラムが有する複数の前記単位受光期間との基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を早めたn(nは1以上の整数)個の対応づけと、前記基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を遅くした前記n個の対応づけと、を含んでもよい。
前記受光時刻割当部は、前記受光時刻と複数の前記単位受光期間との対応づけを前記単位受光期間よりも短い時間幅で変化させて、前記複数の対応づけを生成してもよい。
また、本開示によれば、光パルス信号が物体で反射された反射光パルス信号を繰り返し受光し、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成し、
位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光するか、前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択するか、のいずれかを行う、
測距方法が提供される。
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成し、
位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光するか、前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択するか、のいずれかを行う、
測距方法が提供される。
以下、図面を参照して、測距装置及び測距方法の実施形態について説明する。以下では、測距装置及び測距方法の主要な構成部分を中心に説明するが、測距装置及び測距方法には、図示又は説明されていない構成部分や機能が存在しうる。以下の説明は、図示又は説明されていない構成部分や機能を除外するものではない。
(第1の実施形態)
図1は、本開示の第1の実施形態に係る測距装置1の構成を示すブロック図である。図1の測距装置1は、物体10の距離を測定することができる。測距装置1は、発光部2、受光部3、飛行時間検出部4、ヒストグラム生成部5、距離検出部6、発光タイミング制御部11、クロック信号生成部(同期制御部)12、遅延回路13、及び制御部14を備える。
図1は、本開示の第1の実施形態に係る測距装置1の構成を示すブロック図である。図1の測距装置1は、物体10の距離を測定することができる。測距装置1は、発光部2、受光部3、飛行時間検出部4、ヒストグラム生成部5、距離検出部6、発光タイミング制御部11、クロック信号生成部(同期制御部)12、遅延回路13、及び制御部14を備える。
発光部2は、光パルス(TX:Transmitter exchange)信号を物体10に向けて断続的に発光する。受光部3は、TX信号が物体10で反射された反射光パルス(RX:Received exchange)信号を繰り返し受光する。
発光部2は、例えば、2次元方向に配列される複数の発光素子を有する。また、発光部2は、発光タイミング制御部11の制御により、複数の発光素子が発光する個々のTX信号のパルス幅とその位相を調整できる。
受光部3は、例えば、複数のSPADを有する。複数のSPADは、例えば、2次元方向に配列される。本明細書では、受光部3の受光面上の最小単位を画素と呼ぶことがある。1つの画素には、1以上のSPADが配置される。SPADには、例えば、高電圧のバイアス電圧が印加される。SPADは、入射された1つの光子に反応する感度を有する。SPADが光子に反応すると、電荷を生成する。本明細書では、SPADが光子に反応することを発火と呼ぶことがある。SPADは、発火すると、電荷が生成される。電荷は、アバランシェ増倍によって増幅され、大電流が生成される。これにより、SPADのカソード-アノード間の電圧(以下、出力電圧)が急激に低下する。受光部3は、各SPADの出力電圧の低下を検出することで、RX信号の受光を検出する。入射光の光強度が高いほど、受光部3における複数のSPADのうち、発火するSPADの割合がより高くなる。一方、入射光の光強度が低いほど、受光部3における複数のSPADのうち、発火するSPADの割合がより低くなる。
SPADは、光子を検出した直後は、出力電圧が低下した状態である。SPADが再度光子を検出できるようにするためには、SPADの出力電圧をバイアス電圧に引き上げるリチャージ動作が必要になる。SPADが光子を検出してから、SPADのリチャージ動作が完了するまでの期間は、SPADが光子を検出することができないデッドタイムになる。
飛行時間検出部4は、発光部2がTX信号を発光してから、受光部3がRX信号を受光するまでの飛行時間(Time of Flight)を検出する。ヒストグラム生成部5は、飛行時間検出部4が繰り返し検出した飛行時間に基づいて、RX信号の受光頻度を所定の単位受光期間ごとに分類したヒストグラムを生成する。距離検出部6は、生成されたヒストグラムに基づいて、物体10の距離を検出する。
本明細書では、飛行時間検出部4、ヒストグラム生成部5、及び距離検出部6を合わせて、測距部7とも呼ぶ。
ヒストグラムの各ビンには、例えば、複数の発光期間のそれぞれにて、単位受光期間ごとに光子を検出したSPADの総数(以下、受光頻度とも呼ぶ)が記録される。
発光タイミング制御部11は、発光部2の発光タイミングを制御する。また、発光タイミング制御部11は、発光部2の発光の終了タイミングを制御してもよい。発光部2の発光タイミング及び発光の終了タイミングを調整することにより、TX信号のパルス幅の長さを調整できる。発光部2の発光タイミングを調整することにより、パルス幅の位相を調整できる。
クロック信号生成部12は、発光部2の発光動作と、受光部3の受光動作と、を同期させるクロック信号(同期信号)を生成する。遅延回路13は、発光タイミング制御部11に、クロック信号を伝達するタイミングを遅延させる。
制御部14は、遅延回路13による遅延量を制御する。制御部14は、遅延量を制御することにより、発光部2の発光タイミングの遅延を制御し、位相の異なる複数のTX信号を生成できる。制御部14の制御手法の詳細については、後述する。
図2は、測距装置1の測距手法を説明する図である。図2には、TX信号の波形(TX波形)と、RX信号の波形(RX波形)と、RX波形に基づいて形成されるヒストグラムと、を図示する。
測距装置1は、原理的には、発光部2が発光する光パルス信号の発光タイミングと、受光部3が受光する反射光パルス信号の受光タイミングと間隔から、飛行時間を検出することで、物体10の距離を検出できる。
しかし、飛行時間には様々な誤差が発生することが想定される。例えば、発光部2が発光するTX信号の発光期間の位相と長さは変動するおそれがある。また、受光部3が有する各SPADのRX信号の光強度に対する感度も変動するおそれがある。さらに、受光部3には、RX信号だけでなく、太陽光などのノイズ光が入射されるおそれがある。そこで、測距装置1は、1回の測距につき、TX信号を複数回発光し、RX信号を繰り返し受光する。ヒストグラム生成部5は、RX信号の受光頻度に基づくヒストグラムを生成する。ヒストグラム生成部5は、繰り返し受光される複数のRX信号のパルス幅Tの重心に一致する重心位置を持つヒストグラムを生成する。距離検出部6は、繰り返し発光される複数のTX信号のパルス幅Tの重心と、ヒストグラムの重心との間隔から、光パルス信号と反射光パルス信号の飛行時間を検出する。このように、複数のTX信号の重心と、複数のRX信号に基づいて生成されるヒストグラムの重心との間隔に基づいて飛行時間を計測することで、物体の距離を精度よく計測できる。
なお、1つのRX信号に対して、複数のSPADが、複数の異なる受光タイミングで、光子を検出することがある。
図3は、図2の測距手法の第1の課題を説明する図である。図3には、RX波形と、RX波形に基づいてヒストグラム生成部5が生成するヒストグラムを図示する。RX波形及びヒストグラムの横軸は時間である。RX波形の縦軸は受光強度である。ヒストグラムの縦軸は受光頻度である。また、図3には、ヒストグラムを構成する複数のビンが図示される。複数のビンは、それぞれ単位受光期間に応じたビン幅bを有する。以下では、単位受光期間のことをビン幅bと呼ぶことがある。
飛行時間検出部4は、受光部3の受光タイミングを、ヒストグラムの各ビンのいずれかに分類する。これにより、ヒストグラムには、RX信号の飛行距離ごと(すなわち、計測された物体10の距離ごと)に、対応するビンに受光頻度が計測される。
例えば、単位受光期間がRX信号の飛行距離10cmに応じた期間だとすれば、飛行時間検出部4は、1つのビンを用いて、例えば、飛行距離が100cm~110cmのRX信号の受光頻度を計測する。また、飛行時間検出部4は、この1つのビンの1つ後のビンを用いて、飛行距離が110cm~120cmのRX信号の受光頻度を計測する。
ここで、飛行時間検出部4は、飛行距離が101cmのRX信号と、109cmのRX信号とを、同じ1つのビンに分類してしまう。これらの2つのRX信号は、例えば、飛行距離が105cmのRX信号として扱われる。このため、飛行距離が101cmのRX信号が多数受光された場合は、計算上の飛行距離が実際の飛行距離よりも長くなる誤差(以下、正の誤差とも呼ぶ)が生じる。また、飛行距離が109cmのRX信号が多数受光された場合、計算上の飛行距離が実際の飛行距離よりも短くなる誤差(以下、負の誤差とも呼ぶ)が生じる。
一方、飛行距離が101cmのRX信号と、飛行距離が109cmのRX信号が、同数ずつ受光された場合は、正の誤差と負の誤差が相殺され、誤差なくヒストグラムの重心を計算できる。
正の誤差、負の誤差、または誤差の相殺のいずれが生じるかは、飛行時間に依存して変化する。
図3Aは、RX波形の重心が、ヒストグラムのビンの境界にある場合を示す図である。図3AのRX波形は、2つのビンの右側と左側に均等にはみ出している。RX波形の右側にはみ出した部分に基づいて、上記の正の誤差が生じる。また、RX波形の左側にはみ出した部分に基づいて、負の誤差が生じる。この場合は、はみ出した部分に対応するヒストグラムの2つのビンの受光頻度は同じになり(すなわち、正負の誤差が相殺され)、ヒストグラムの重心とRX波形の重心が一致する。
図3Aから、飛行時間が増加すると、RX波形の重心はビンの境界に対して右方向に移動する。図3Bは、RX波形が2つのビンから右側のみにはみ出した場合を示す図である。図3Aから図3Bまでの間は、飛行時間の増加により、右側にはみ出した部分に対応するビンの受光頻度が増加し、左側にははみ出さなくなって、対応するビンの受光頻度はゼロになる。これにより、2つのビンの右側のみにRX波形がはみ出すことで、ヒストグラムの重心は、RX波形の重心よりも右側にずれる。図3Bには、RX波形とヒストグラムの重心のずれ(Error)を表示している。この重心のずれにより、測距精度が悪化する。
図3Cは、RX波形の重心がビンの中央にある場合を示す図である。図3Cは、図3Bからさらに飛行時間が増加したときの図である。図3Bから図3Cに移行することで、1つのビンの右側にはみ出す量と左側にはみ出す量が等しくなる。この場合は、はみ出した部分に対応するヒストグラムの2つのビンの受光頻度は同じになり、ヒストグラムの重心とRX波形の重心が一致する。
図3Dは、RX波形が2つのビンから左側のみにはみ出した場合を示す図である。図3Dは、図3Cからさらに飛行時間が増加したときの図である。図3Cから図4Dに移行することで、2つのビンの左側のみにRX波形がはみ出すことで、ヒストグラムの重心は、RX波形の重心よりも左側にずれる。
図3Dから、さらに飛行時間が増加すると、図3Aに示す状態となる。
図3A~図3Dに示すRX波形の重心とヒストグラムの重心との誤差は、飛行時間の増減によって、周期的に変化するため、周期的エラー(サイクリックエラー)とも呼ばれる。
図4Aは、平面からdToFセンサまでの距離を表すデプス(depth)を表示した画像である。dToFセンサは、平面の中心(すなわち、図4Aの中心)に向けてTX信号を発光する。図4Aの中心が、最短の飛行距離となる。また、図4Aの中心から離れるに従って、飛行距離が増加する。
図4Bは、図4Aの平面をdToFセンサ等で撮影した場合の、平面上のデプス誤差(depth error)を示す図である。図4Bに示すように、飛行距離の増高に応じたサイクリックエラーが生じる。この場合のサイクリックエラーは、同心円状の周期的な縞模様として視認できる。
図5は、図3の第1の課題の1つの解決手法を示す図である。サイクリックエラーは、RX波形のパルス幅Tをビン幅bの定数倍(より正確には、自然数倍)にすることにより、抑制することができる。図5では、RX波形のパルス幅Tをビン幅bの2倍(すなわち、T=2b)にした例を示す。図5A~図5DにおけるRX波形の重心位置は、それぞれ図3A~図3DのRX波形の重心位置と同じである。
図5A~図5Dに示すRX波形は、RX波形の重心がビンの境界、又はビンの重心位置にない場合でも、ヒストグラムの重心とRX波形の重心を略一致させることができ、サイクリックエラーの発生を防止できる。
このため、第1の課題を解決する手法として、発光部2の発光パルス幅Tを、ビン幅bの定数倍にすることにより、サイクリックエラーの発生を抑制することが考えられる。しかし、RX波形のパルス幅Tは温度によって変動する。このため、環境によっては、発光部2の制御にも関わらず、RX波形のパルス幅Tがビン幅bの定数倍にならないことがあり、図3に示すサイクリックエラーが発生することがある。
図6は、図2の測距手法の第2の課題を説明する図である。上述したように、SPADには、光子の検出後に、光子を検出できなくなるデッドタイムが存在する。デッドタイムは、通常はビン幅bよりも長く、ビン幅bの数倍以上になる場合がある。
図6Aは、デッドタイムがない場合の、理想的なRX波形とヒストグラムを示す図である。図6AにおけるRX波形は、パルス幅Tの全域において、略均一な受光強度を有する。この場合、SPADはパルス幅Tにおいて、均一な頻度で受光するため、図6Aのヒストグラムのように、平坦なヒストグラムが形成される。
より具体的には、図6AのRX波形は3つの単位受光期間にまたがっている。これに応じて、ヒストグラムには3つのビンが生成される。図6Aの例では、3つの単位受光期間のいずれも、RX信号が入射する期間が同一であるため、3つのビンは同一の受光頻度を有する。なお、RX波形の位相によっては、3つの単位受光期間の間でRX信号が入射される期間に差が生じる場合があり、この場合、3つのビンの受光頻度にも差が生じることがある。
図6Bは、デッドタイムが存在する場合のRX波形とヒストグラムを示す図である。図6BのRX波形は、図6Aと同様に略均一な受光強度を有する。しかし、光子を受光したSPADは、デッドタイム中には光子を受光できなくなるため、RX波形のパルス幅Tの前半に比べて後半は受光頻度が低下する。これにより、ヒストグラムは右肩下がりの形状になりうる。この場合、ヒストグラムの重心と、RX波形の重心との間でズレ(Error)が生じ、測距精度が悪化する。図6Bに示すように、デッドタイムによってパルス幅Tの前半と後半とで受光頻度に差が生じる現象を、パイルアップ現象とも呼ぶ。
図6Bでは、パイルアップ現象により、右肩下がり形状のヒストグラムが生成される例を示すが、RX波形の位相によっては、パイルアップ現象によって、山なりのヒストグラムが生成される場合がある。
図6Cは、図6BよりもRX波形の受光強度を大きくした場合の例である。RX波形の受光強度が大きくなった場合、パルス幅Tの前半で、より多くのSPADが光子を受光する。これにより、パルス幅Tの後半では、受光できないSPADが増加することになる。これにより、図6Cのヒストグラムは、図6Bのヒストグラムに比べて、右肩下がりの傾向がより強まるとともに、ヒストグラムの重心とRX波形の重心とのズレがより大きくなる。
すなわち、図6Cに示すように、RX波形の受光強度が高いほど、測距精度が悪化する。RX波形は、物体10が高反射率物体である場合、物体10の距離が近い場合等に、受光強度が高くなる。
受光強度が高い場合は、さらに、飽和(saturation)現象が発生する場合がある。図6Dは、図6CよりもRX波形の受光強度を大きくした場合の例である。図6A~図6Cでは、ヒストグラムに3つのビンが生成されるが、図6Dでは、2つのビンしか生成されていない点で異なる。
図6Dのような状況は、例えば、パルス幅Tの前半(1~2つ目の単位受光期間)で、受光部3内の複数のSPADが全て受光してしまった場合等に発生する。この場合、3つ目の単位受光期間では、受光できるSPADがなくなるため、受光頻度が0になり、ビンが生成されなくなる。パルス幅Tの前半等で、SPADの略全てが受光することにより、ヒストグラムのビン数が減少する現象を、飽和現象とも呼ぶ。飽和現象が発生すると、測距精度が著しく悪化する。
本開示の第1の実施形態に係る測距装置1は、第1の課題であるサイクリックエラーによる測距精度の悪化、及び第2の課題であるパイルアップ現象及び飽和現象による測距精度の悪化を、解決できることを特徴とする。
本開示の第1の実施形態に係る測距装置1は、以下の2つの特徴のうち、少なくとも1つの特徴を有する。第1の特徴は、発光部2は、パルス幅Tが、ビン幅b(すなわち、単位受光期間)の2倍よりも短いTX波形を持つTX信号を発光するという点である。第2の特徴は、発光部2は、位相がそれぞれ異なるTX波形をそれぞれ持つ複数のTX信号を順繰りに発光するという点である。
以下では、測距装置1が上記第1及び第2の特徴をともに備える例を説明する。なお、測距装置1は、第1又は第2の特徴のうち、いずれかを持たない構成であってもよい。すなわち、発光部2はTX波形のパルス幅Tをビン幅bの2倍以上としてもよい。また、発光部2は、同一の位相のTX波形を持つTX信号を繰り返し発光してもよい。
図7は、本開示の第1の実施形態に係る第1測距手法を示す図である。発光部2は、例えば、図7に示す第1~第4TX波形を持つ4つのTX信号を順繰りに発光する。第1~第4TX波形は、互いに位相の異なるTX波形である。
第1TX波形は、ビンの境界から時間軸の前方方向にAずれた位相(すなわち、位相差「-A」)を有する。第2TX波形は、ビンの境界から時間軸の前方方向にA/3ずれた位相(すなわち、位相差「-A/3」)を有する。第3TX波形は、ビンの境界から時間軸の後方方向にA/3ずれた位相(すなわち、位相差「+A/3」)を有する。第4TX波形は、ビンの境界から時間軸の後方方向にAずれた位相(すなわち、位相差「+A」)を有する。
図7の位相差(の絶対値)「A」及び「A/3」は、ビン幅bよりも小さい。本明細書では、ビンの境界に対する位相差を、オフセット(offset)とも呼ぶ。
また、図7には、基準TX波形を図示する。基準TX波形は、ビンの境界との位相差がないTX波形であり、図2のTX波形に相当する。本明細書では、発光部2は、ビンの境界との位相差がないTX波形(基準TX波形と同じ位相)を持つTX信号を発光しない例を説明する。なお、発光部2が発光するTX信号における複数のTX波形には、ビンの境界との位相差がないTX波形が含まれてもよい。
第1~第4TX波形、及び基準TX波形は、いずれも同一のパルス幅Tを有する。
図7のオフセットは、例えば、図1の遅延回路13により生成できる。飛行時間検出部4は、クロック信号生成部12から取得したクロック信号に基づいて、受光部3が受光したRX信号を複数のビンのいずれかに分類する。ビンの境界は、例えば、飛行時間検出部4のクロック信号の取得タイミングである。又は、ビンの境界は、クロック信号の取得タイミングから所定の遅延量だけずれたタイミングであってもよい。
遅延回路13は、クロック信号生成部12からクロック信号を取得する。遅延回路13は、クロック信号を遅延させた遅延クロック信号を、発光タイミング制御部11に入力する。これにより、発光部2は、遅延クロック信号に応じたTX波形を持つTX信号を発光する。遅延回路13は、クロック信号を遅延させることで、TX波形のオフセット(すなわち、ビンの境界に対する位相差)を生成できる。
なお、遅延回路13がクロック信号を遅延させない場合、又はクロック信号の遅延量をビン幅bに応じた遅延量とした場合は、発光部2は、図7の基準TX波形を持つTX信号を発光できる。
発光部2は、例えば、1回の発光ごとにTX波形の位相を切り替える。図8は、発光部2によるTX波形の切り替えを示す図である。本明細書では、発光部2の1回の発光間隔を、パルス繰り返し間隔(PRI: Pulse Repetition Interval)とも呼ぶ。図8で示すように、発光部2は、第1~第4TX波形を、例えば、この順で順繰りに発光する。
図1の制御部14は、発光部2が位相のそれぞれ異なる複数のTX波形(図8の例では、第1~第4TX波形)の1つを順繰りに選択したTX信号を発光するように、遅延回路13の遅延量を制御する。
図8では、発光部2は、1つのPRIごとにTX波形の位相を切り替えている例を示す。これに限定されず、発光部2は複数のPRIごとにTX波形の位相を切り替えてもよい。
図9は、図7の複数のTX波形に基づく複数のRX波形を示す図である。図9には、第1~第4TX波形に基づく第1~第4RX波形と、基準TX波形に基づく基準RX波形と、第1~第4RX波形に基づいて生成されるヒストグラムと、を図示する。図9の基準RX波形は、図2等のRX波形に相当する。第1~第4RX波形は、基準RX波形に対して、第1~第4TX波形と同様のオフセットを有する。
ヒストグラム生成部5は、第1~第4RX波形のそれぞれを持つRX信号の受光頻度を積算して、図9のヒストグラムを生成する。図9のヒストグラムは、第1~第4RX波形のパルス幅Tと、第1~第4RX波形のオフセット「-A」~「+A」に応じた数のビンを有する。
例えば、パルス幅Tがビン幅bの2倍であった場合(すなわち、T=2b)、ヒストグラムはパルス幅Tに応じた2つのビンBaと、時間軸の前方方向のオフセット「-A」に応じた1つのビン(第1単位受光期間のビン)Bbと、時間軸の後方方向のオフセット「+A」に応じた1つのビン(第2単位受光期間のビン)Bcと、の4つのビンを有する場合がある。第1単位受光期間のビンBbは、図7の例では、第1RX波形等に基づいて形成される。第2単位受光期間のビンBcは、図7の例では、第4RX波形等に基づいて形成される。
図7の第1~第4TX波形は、0になるよう調整される(すなわち、(-A)+(-1/3A)+1/3A+A=0)。第1~第4TX波形のそれぞれに対応する第1~第4RX波形のオフセットの総和も0になる。これにより、図9のヒストグラムの重心を、基準RX波形の重心と略一致させることができる。すなわち、図2と同様に、ヒストグラムの重心と、TX波形(基準TX波形)の重心と、から飛行時間を検出できる。
図7の第1~第4TX波形の位相は、互いに同一の位相量ずつ、等間隔にずらされている。より具体的には、第1TX波形と第2TX波形の位相差、第2TX波形と第3TX波形の位相差、及び第3TX波形と第4TX波形の位相差は、いずれも2/3Aである。これにより、第1~第4RX波形は、時間軸上に均等に散らされて配置される。また、第1~第4RX波形の受光頻度を積算した場合に、ヒストグラムの特定のビンに受光頻度が集中して積算されることを防ぐことができる。
すなわち、TX信号が持つ複数のTX波形には、基準TX波形よりも位相が早いn個のTX波形(図7の例では、n=2)と、基準TX波形よりも位相が遅いn個のTX波形が含まれる。また、基準TX波形よりも位相が早いn個のTX波形と、基準TX波形よりも位相が遅いn個のTX波形とには、基準TX波形に対する位相差の絶対値が同じn対のTX波形が含まれる。
図10は、本開示の第1の実施形態に係る測距装置1の動作を説明するフローチャートである。まず、制御部14は、分割数Nを設定し、これに基づいて遅延時間リストを生成する(ステップS1)。分割数Nとは、TX波形の種類の数である。発光部2は、1回の測距の発光回数を、TX波形の種類ごとに分割する。
例えば、図7の例では、第1~第4TX波形で分割数N=4となる。1回の測距で、発光部2が1000回発光する場合は、発光部2は第1~第4TX波形を持つTX信号をそれぞれ250回ずつ発光する。
図11は、遅延時間リストを示す図である。図11の遅延時間リストは、後述の発光期間カウンタiをNで割った余りを計算するi%Nと、TX波形の位相をずらす量を表すオフセット(遅延時間)と、の関係を記憶する。遅延時間リストは、例えば、測距装置1内の所定のメモリ部等に記憶される。
続いて、制御部14は、発光期間カウンタiを初期化する(ステップS2)。制御部14は、例えば、発光期間カウンタiに0をセットする。発光期間カウンタiは、PRIをカウントするカウント値である。
制御部14は、遅延時間リストから、オフセットを取得する(ステップS3)。上記のように、制御部14は、発光期間カウンタiを分割数Nで割った余りを計算し、得られた値に基づいて、オフセットを取得する。例えば、i=0ならば、図11の遅延時間リストにおけるオフセット「-A」が取得される。
続いて、測距装置1は発光及び受光動作を行う(ステップS4)。制御部14は、取得したオフセットを、遅延回路13に伝達する。遅延回路13は、制御部14から伝達されたオフセットに基づいて、発光部2の発光を遅延させる。発光部2からは、例えば第1TX波形のTX信号が発光される。受光部3は、例えば、第1RX波形のRX信号を受光する。これに基づいて、飛行時間検出部4が、受光タイミングを複数のビンのいずれかに分類する。
制御部14は、発光部2が、1回の測距に必要な回数(例えば、1000回)を発光したか否かを判定する(ステップS5)。制御部14は、例えば、発光期間カウンタiが、上記必要な回数以上か否かを判定する。
発光部2の発光回数が必要な回数に達していない場合(例えば、i<1000)は、制御部14は、発光期間カウンタiをインクリメント(i→i+1)する(ステップS6)。
続いて、制御部14は、ステップS3において、インクリメントされた発光期間カウンタiに基づいてオフセットを取得する。例えば、i=1ならば、図11の遅延時間リストにおけるオフセット「-A/3」が取得される。これにより、発光部2は第2TX波形のTX信号を発光し、受光部3は第2RX波形のRX信号を受光する。
すなわち、制御部14は、図11の遅延時間リストに基づいて、1回の発光ごとに、位相がそれぞれ異なる複数のTX波形を順繰りに選択できる。また、発光部2は、ステップS3~S6で第1~4TX波形を1回ずつ選択したTX信号を発光した後は、再び第1TX波形から第4TX波形までを、1回ずつ選択したTX信号を発光する。すなわち、制御部14は、第1~第4TX波形を、2以上の所定回数(例えば、250回)ずつ順繰りに選択する。
発光部2の発光回数が必要な回数に達している場合(例えば、i≧1000)、発光部2は発光を停止する。また、ヒストグラム生成部5はヒストグラムを生成する。距離検出部6は、ヒストグラムの重心計算に基づいて、物体10の距離を検出する(ステップS7)。これにより、測距装置1は物体10の距離を測定できる。
図12は、本開示の第1の実施形態に係る測距手法におけるサイクリックエラーの影響を説明する図である。本開示の測距手法においても、第1~第4RX波形のパルス幅Tが、ビン幅bの定数倍にならないことがある。
図12は、図3Bと同様に、基準RX波形がビンの境界から右にはみ出した場合を示す。この場合、ヒストグラムには正の誤差が発生する。
図3Bの例では、RX波形の右側にはみ出した部分に対応するビンに、誤差が蓄積される。例えば、飛行距離が略101cmのRX信号の受光回数が、105cmの飛行距離を示すビンに蓄積される。この例では、略+4cmの正の誤差が、RX信号の受光回数に応じて繰り返し蓄積されることになる。図3Bの例では、RX信号の位相は変化しないため、飛行距離が略101cmのRX信号を1000回受光した場合は、1000回分の略+4cmの誤差が、105cmの飛行距離を示すビンに蓄積され、RX信号の重心位置とヒストグラムの重心位置との誤差が大きくなる。
これに対し、本開示の複数のRX波形は、基準RX波形よりも、位相が早いRX波形と、位相が遅いRX波形とを含む。これにより、位相が異なるRX波形ごとにRX信号の重心位置とヒストグラムの重心位置との誤差を変えることができる。よって、RX波形の位相を順繰りに変えながら複数回の受信を繰り返すことで、RX波形の重心に対応するヒストグラムのビンが複数のビンに分散され、全体的には、RX信号の重心位置とヒストグラムの重心位置との誤差を小さくすることができ、サイクリックエラーが軽減される。
分割数Nを大きくするほど、サイクリックエラーの軽減効果を高めることができる。
発明者は、本開示の測距装置1を用いたシミュレーションにより、サイクリックエラーの低減効果を確認した。図13~図16には、真のデプス(GT_depth:Ground Truth depth)画像と、測距結果のデプス(measured depth)画像と、測距誤差を示す画像と、測距誤差の波形図と、を図示する。
シミュレーションでは、被写体(すなわち、物体10)の距離は1[m]である。また、測距装置1の視野角(FOV:field of view)は70[deg]である。測距装置1には、レンズ歪みのないpin-holeカメラが用いられた。ビン幅bに対し、複数のTX波形の最大位相差は+3/4b、最小位相差は-3/4bである。TX波形のパルス幅Tは、図13~図16でそれぞれ異なる。また、図13~図16には、分割数N=1,4,8,16のときのシミュレーション結果を図示する。複数のTX波形の位相差は、分割数Nと、上記の最大及び最小位相差に基づいて、等間隔になるように設定される。
分割数N=1のシミュレーションは、汎用的な(Conventional)シミュレーションである。測距装置1は、分割数N=1の場合は、図7等に示す基準TX波形を持つTX信号を繰り返し発光する。
図13は、パルス幅T=2bとした場合のシミュレーション結果を示す図である。
図13Aは、真のデプス(GT depth[m])画像を示す図である。図13Aは、シミュレーションで測定する平面からdToFセンサまでの真の距離に応じたデプスを図示する。
図13B~図13Eは、それぞれ分割数N=1、4、8及び16のときのシミュレーション結果を示す図である。すなわち、図13Bは汎用的な測距処理のシミュレーション結果を示す。図13B~図13Eの1行目は、測距結果のデプス(measured depth[m])画像を示す図である。図13B~図13Eの2行目は、測距誤差(depth error[m])の画像を示す図である。
図13B~図13Eの3行目は、測距誤差(depth error[m])の波形を示す図である。図13B~図13Eの3行目の波形には、図13B~図13Eの1~2行目の点線部分の測距誤差が含まれる。図13B~図13Eの3行目の波形図の横軸は、図13B~図13Eの1行目及び2行目の点線部分の位置(index)を示し、縦軸は測距誤差を示す。
上記のように、図13のシミュレーションは、TX波形のパルス幅Tをビン幅bの定数倍としたシミュレーションである。この場合、図5に示すように、サイクリックエラーが抑制される。このため、図13B~図13Eのいずれでも、誤差が殆ど発生しない。
図14は、パルス幅T=2.25bとした場合のシミュレーション結果を示す図である。図14Bに示すように、測距結果には、同心円状のサイクリックエラーが観測される。また、図14Cに示すように、本開示の測距手法が適用された場合は、サイクリックエラーが低減される。また、図14D及び図14Eに示すように、分割数Nが大きいほど、サイクリックエラーの低減効果が大きい。
図15は、パルス幅T=2.5bとした場合のシミュレーション結果を示す図である。図16は、パルス幅T=2.75bとした場合のシミュレーション結果を示す図である。図15及び図16においても、図14と同様に、サイクリックエラーの低減が確認できる。
図13~図16に示すように、本開示の第1の実施形態に係る測距装置1は、上述した第1の課題であるサイクリックエラーを抑制できる。
図17は、本開示の第1の実施形態に係る測距手法におけるパイルアップ現象の影響を説明する図である。図17に示すように、本開示の測距手法では、第1~第4RX波形のうち、パイルアップ現象によってSPADの受光頻度が集中する部分を、ヒストグラム内の複数のビンに分散できる。これにより、パイルアップ現象による誤差を低減できる。
パイルアップ現象及び飽和現象による測距誤差は、TX波形のパルス幅Tを小さくすることでも低減できる。図18は、本開示の第1の実施形態に係る測距手法における、パイルアップ現象及び飽和現象による測距誤差の低減を説明する図である。
図18Aは、RX波形のパルス幅Tが、ビン幅bの3倍(T=3b)である場合を示す図である。図18Aの例では、3つの単位受光期間に、RX信号が入射する。図18Aでは、時間軸の前方から3つ目の単位受光期間においては、飽和現象によりRX信号を受光できず、ビンが生成されない。
図18Bは、RX波形のパルス幅Tが、ビン幅bの2倍未満(T<2b)である場合を示す図である。図18Bでは、図18Aに比べて、RX波形が入射する単位受光期間の数が減少しているという特徴がある。図18Bには、飽和の影響を受ける3つ目の単位受光期間が存在しない。このため、飽和現象の発生を防ぐことができる。
図18Bに示すように、RX波形のパルス幅Tがビン幅bの2倍未満である場合(すなわち、TX波形のパルス幅Tをビン幅bの2倍未満とした場合)は、飽和現象の発生確率を大きく低減できる。また、パイルアップ現象による測距誤差の影響を低減できる。
図18Cは、RX波形のパルス幅Tが、ビン幅b未満(T<b)である場合を示す図である。図18Cでは、RX信号が入射する単位受光期間が1つである。図18Cのような場合では、原理上、飽和現象及びパイルアップ現象が発生しない。
図18Cに示すように、TX波形のパルス幅Tをビン幅b未満とした場合、飽和現象及びパイルアップ現象による測距誤差の影響を大きく低減することができる。
図19は、第1比較例に係る測距手法を示す図である。第1比較例に係る測距手法では、図18と同様に、TX波形のパルス幅Tをビン幅b未満にする。一方、図19の測距手法では、図7に示すような、互いに位相の異なる複数のTX波形を持つTX信号を発光しない。すなわち、図19の測距手法では、単一位相のTX波形を持つTX信号を繰り返し発光する。
図19A及び図19Bに示すように、RX波形のパルス幅Tがビン幅b未満である場合、ヒストグラムに生成されるビンが1つとなる場合がある。この場合、RX波形の重心位置にかかわらず、1つのビンの重心位置が、ヒストグラムの重心位置となってしまう。図19A及び図19Bは、RX波形の重心位置が互いに異なるが、ヒストグラムの重心位置は同じである。これにより、図19の測距手法では、測距精度が悪化する場合がある。
また、発光部2がビン幅b以上のTX波形を持つTX信号を発光するように制御したとしても、温度によってはRX波形のパルス幅Tがビン幅b未満になってしまう場合がある。この場合も、図19と同様に測距精度が悪化する。
第2比較例として、TX波形のパルス幅Tをビン幅bより大きくする例が考えられる。また、サイクリックエラーを防ぐ場合には、パルス幅Tをビン幅bの定数倍(例えば、2倍又は3倍等)にする例が考えられる。しかし、第2比較例では、図18に示す、飽和現象及びパイルアップ現象による測距誤差の低減ができない。
図20は、本開示の第1の実施形態に係る第2測距手法を示す図である。図20の測距手法では、発光部2は、パルス幅Tがビン幅b未満である第1~第4TX波形を持つTX信号を発光する。これにより、受光部3は、パルス幅Tがビン幅b未満である第1~第4RX波形を持つRX信号を受光する。図20の第1~第4RX波形は、基準RX波形に対して、図7と同様の位相差を有する。
図20のヒストグラムは、第1~第4RX波形のパルス幅Tと、第1~第4RX波形のオフセットとに応じた数のビンを有する。これにより、ヒストグラムのビンが2以上となるため、図19に示す誤差の発生を防ぐことができる。
また、図20の測距手法では、図18Cと同様に、飽和現象及びパイルアップ現象による測距誤差の低減ができる。図20では、パルス幅Tがビン幅b未満である例を説明したが、パルス幅Tがビン幅bの2倍未満である場合にも、図18Bと同様に、飽和現象及びパイルアップ現象による測距誤差の低減ができる。
さらに、図20の測距手法では、図12の例と同様に、サイクリックエラーを抑制できる。これにより、パルス幅Tをビン幅bの定数倍にする必要がなくなるため、パルス幅Tをビン幅b未満にすることができる。
なお、本開示の第1の実施形態に係る測距装置1は、図20の測距手法以外の手法で、図19の測距誤差を抑制してもよい。例えば、測距装置1は、撮像環境の温度を測定するとともに、測定した温度に基づいて、RX波形のパルス幅Tがビン幅bと略同一、もしくはビン幅b以上(例えば、ビン幅bの2倍)になるように、発光部2の発光を制御してもよい。この場合、発光部2は、同一の位相のTX波形(例えば、図7の基準TX波形)のTX信号を断続的に発光してもよい。
図21は、RX波形のパルス幅Tとヒストグラムとの関係を示す図である。図21AのRX波形のパルス幅T1は、例えば、ビン幅bの2.3倍である。図21BのRX波形のパルス幅T2は、例えば、ビン幅bの1.15倍である。図21CのRX波形のパルス幅T3は、例えば、ビン幅bの0.46倍である。
図21Aでは、例えば、発光部2がビン幅bの2倍のパルス幅TのTX波形を持つTX信号を発光するよう制御される。図21B及び図21Cでは、例えば、発光部2がビン幅bと略同一のパルス幅TのTX波形を持つTX信号を発光するよう制御される。しかし、温度変化により、図21A~図21Cでは、それぞれ上記のパルス幅T1、T2、及びT3のRX波形を持つRX信号を受光することを想定する。
図21A及び図21Bでは、基準RX波形に対する第1~第4RX波形の最大及び最小位相差は、±0.5bである。図21Cでは、基準RX波形に対する第1~第4RX波形の最大及び最小位相差は、±bである。
図21A~図21Cに示すように、RX波形のパルス幅Tが小さくなるほど、ヒストグラムの幅を狭めることができ、重心位置を特定しやすくなることから、飽和現象及びパイルアップ現象による測距誤差の低減ができる。また、図21Cに示すように、ヒストグラムを平坦化できれば、さらに飽和現象及びパイルアップ減少による測距誤差を低減できる。
図22は、本開示の第1の実施形態の一変形例に係る測距手法を示す図である。図22の測距手法では、第1~第4TX波形のパルス幅が、互いに異なるという点で、図7の測距手法とは異なる。
例えば、基準TX波形のパルス幅はT0である。第1TX波形のパルス幅は、T0-Aである。第2TX波形のパルス幅は、T0-A/3である。第3TX波形のパルス幅は、T0+A/3である。第4TX波形のパルス幅は、T0+Aである。位相差Aは、例えば、ビン幅bの1/2である。
第1~第4TX波形の重心は、基準TX波形の重心と略同一である。また、発光部2が発光する複数のTX波形には、基準TX波形よりもパルス幅の短いn個のTX波形(図7の例では、n=2)と、基準TX波形よりもパルス幅の長いn個のTX波形が含まれる。
これにより、図9と同様に、ヒストグラム生成部5は、基準RX波形の重心位置と略同一の重心位置を有するヒストグラムを生成できる。図22の測距手法でも、図7の測距手法と同様に、サイクリックエラー、飽和現象及びパイルアップ現象による測距誤差の低減ができる。
このように、本開示の第1の実施形態に係る測距装置1は、パルス幅Tが単位受光期間の2倍よりも短いTX波形を持つTX信号を発光するという第1の特徴と、位相がそれぞれ異なる複数のTX波形を順繰りに切り替えてTX信号を発光するという第2の特徴と、を有する。これにより、測距装置1は、上述した第1の課題と第2の課題をともに解決でき、測距精度を向上できる。
具体的には、受光した光の光強度が高い場合、飽和現象及びパイルアップ現象が発生するという第2の課題が生じる場合がある。これに対し、第1の特徴により、飽和現象及びパイルアップ現象が発生しうるビンを削減し、測距精度の悪化を抑制できる。また、TX波形のパルス幅Tを単位受光期間よりも短くすると、飽和現象及びパイルアップ現象の発生を原理的に防ぐことができ、測距精度を大きく向上できる。
第2の特徴により、RX波形のパルス幅Tが単位受光期間より短くなった場合でも、ヒストグラムのビン数を2以上にすることができ、測距精度の悪化を抑制できる。
また、第2の特徴は、パイルアップ現象が発生した場合でも、SPADの受光が集中する期間を複数のビンに振り分けることができ、パイルアップ現象による測距精度悪化を抑制できる。
さらに、第2の特徴では、第1の課題であるサイクリックエラーによる誤差を相殺できる。TX波形の位相の種類を多くすることで、サイクリックエラーによる誤差をより相殺でき、測距精度を向上できる。
(第2の実施形態)
図7の測距方法では、発光部2の制御によって、サイクリックエラー、パイルアップ現象及び飽和現象による誤差を、ヒストグラムの各ビンに分散させる。この測距誤差の分散は、測距部7の制御によっても実現できる。本開示の第2の実施形態では、測距部7の制御により、測距誤差を分散させることを特徴とする。
図7の測距方法では、発光部2の制御によって、サイクリックエラー、パイルアップ現象及び飽和現象による誤差を、ヒストグラムの各ビンに分散させる。この測距誤差の分散は、測距部7の制御によっても実現できる。本開示の第2の実施形態では、測距部7の制御により、測距誤差を分散させることを特徴とする。
図23は、本開示の第2の実施形態に係る測距装置1aの構成を示すブロック図である。図24は、本開示の第2の実施形態に係る測距部7aの詳細な構成を示すブロック図である。図23の測距装置1aは、図1の遅延回路13を持たない点で、図1の測距装置1とは異なる。図24の飛行時間検出部(受光時刻割当部)4aは、例えば、TDC(Time to Digital Converter)を用いて構成されるが、図1の飛行時間検出部4とは処理動作が異なる。
図23の発光部2aは、同一の位相のパルス幅のTX信号(例えば、図7の基準TX波形を持つTX信号)を断続的に発光する。
図23の測距装置1aの動作は、図10のフローチャートと同様である。一方、図23の測距装置1aは、図10のステップS4の動作が、図1の測距装置1とは異なる。
図24の制御部14aは、図10のステップS3で取得したオフセット(遅延時間)を、飛行時間検出部4aに伝達する。なお、飛行時間検出部4aが、発光期間カウンタiに基づいて、図11の遅延時間リストからオフセットを取得してもよい。
飛行時間検出部4aは、クロック信号生成部12から取得されたクロック信号と、受光部3から取得された画素信号と、に基づいて、発光部2aがTX信号を発光した後に受光部3がRX信号を受光するまでの時間(以下、受光時刻とも呼ぶ)を取得する。
飛行時間検出部4aは受光時刻に、オフセット(例えば、図11のオフセット)を加算して、位相をずらした受光時刻を算出する。飛行時間検出部4aは、位相をずらした受光時刻を、ヒストグラムの複数のビンのいずれかに割り当て、割当番号(bin_index)をヒストグラム生成部5に伝達する。ヒストグラム生成部5は、割当番号で指定されたビンの受光回数をインクリメントする。このように、飛行時間検出部4aは、受光時刻をヒストグラムの複数のビンのいずれかに対応づける。
飛行時間検出部4aは、受光部3から同一の受光時刻を取得したとしても、オフセットの値によって、異なる割当番号のビンに割り当てる場合がある。オフセットは、図8と同様に、順繰りに選択される。すなわち、飛行時間検出部4aは、受光部3で繰り返し受光されたRX波形の受光時刻と、ヒストグラムが有する複数の単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択する。
ヒストグラム生成部5は、上記の割当番号に基づいて、ヒストグラムを生成する。これにより、図9と同様のヒストグラムが生成できる。
遅延時間リストには、図11と同様のオフセットを設定することができる。すなわち、飛行時間検出部4aは、オフセットの総和が0になるように調整され、正負のオフセットが同数の遅延時間リストを用いることができる。また、飛行時間検出部4aは、互いに同一の位相量ずつ、等間隔にずらされた、単位受光期間よりも短いオフセットを用いることができる。
第2の実施形態に係る測距装置1aでは、発光部2a、受光部3、発光タイミング制御部11、又はクロック信号生成部12の少なくとも一部が、測距装置1aの外部に設けられてもよい。この場合、測距部7aは、外部に設けられた受光部3等から転送された画素信号等に基づいて、ヒストグラムの生成及び重心計算を行ってもよい。または、飛行時間検出部4aの制御は、例えば、測距装置1aの後段の情報処理装置等で行われてもよい。これにより、測距装置1aの構成を単純化できる。
なお、測距装置1aに、第1の実施形態に係る発光部2等が適用されてもよい。すなわち、発光部2aは、図7の第1~第4波形を持つTX信号を順繰りに発光する構成であってもよい。また、発光部2aは、パルス幅Tがビン幅bの2倍未満、又はビン幅b未満であるTX波形を持つTX信号を発光してもよい。
このように、本開示の第2の実施形態に係る測距装置1aでは、測距部7の制御によって、測距誤差の分散を実現する。これにより、第1の実施形態に係る測距装置1と同様に、サイクリックエラー、パイルアップ現象及び飽和現象による測距誤差を抑制できる。また、第2の実施形態に係る測距装置1aは、第1の実施形態に係る測距装置1と比較して、複雑な発光制御を必要としない。例えば、飛行時間検出部4aの制御を、後段の情報処理装置等で実現すること等により、測距装置1aの構成を単純化できる。
上述した実施形態で説明した測距装置1又は1aの少なくとも一部は、ハードウェアで構成してもよいし、ソフトウェアで構成してもよい。ソフトウェアで構成する場合には、情報処理装置の少なくとも一部の機能を実現するプログラムをフレキシブルディスクやCD-ROM等の記録媒体に収納し、コンピュータに読み込ませて実行させてもよい。記録媒体は、磁気ディスクや光ディスク等の着脱可能なものに限定されず、ハードディスク装置やメモリなどの固定型の記録媒体でもよい。
また、測距装置1又は1aの少なくとも一部の機能を実現するプログラムを、インターネット等の通信回線(無線通信も含む)を介して頒布してもよい。さらに、同プログラムを暗号化したり、変調をかけたり、圧縮した状態で、インターネット等の有線回線や無線回線を介して、あるいは記録媒体に収納して頒布してもよい。
(応用例)
本開示に係る技術は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット、建設機械、農業機械(トラクター)などのいずれかの種類の移動体に搭載される装置として実現されてもよい。
本開示に係る技術は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット、建設機械、農業機械(トラクター)などのいずれかの種類の移動体に搭載される装置として実現されてもよい。
図25は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システム7000の概略的な構成例を示すブロック図である。車両制御システム7000は、通信ネットワーク7010を介して接続された複数の電子制御ユニットを備える。図25に示した例では、車両制御システム7000は、駆動系制御ユニット7100、ボディ系制御ユニット7200、バッテリ制御ユニット7300、車外情報検出ユニット7400、車内情報検出ユニット7500、及び統合制御ユニット7600を備える。これらの複数の制御ユニットを接続する通信ネットワーク7010は、例えば、CAN(Controller Area Network)、LIN(Local Interconnect Network)、LAN(Local Area Network)又はFlexRay(登録商標)等の任意の規格に準拠した車載通信ネットワークであってよい。
各制御ユニットは、各種プログラムにしたがって演算処理を行うマイクロコンピュータと、マイクロコンピュータにより実行されるプログラム又は各種演算に用いられるパラメータ等を記憶する記憶部と、各種制御対象の装置を駆動する駆動回路とを備える。各制御ユニットは、通信ネットワーク7010を介して他の制御ユニットとの間で通信を行うためのネットワークI/Fを備えるとともに、車内外の装置又はセンサ等との間で、有線通信又は無線通信により通信を行うための通信I/Fを備える。図25では、統合制御ユニット7600の機能構成として、マイクロコンピュータ7610、汎用通信I/F7620、専用通信I/F7630、測位部7640、ビーコン受信部7650、車内機器I/F7660、音声画像出力部7670、車載ネットワークI/F7680及び記憶部7690が図示されている。他の制御ユニットも同様に、マイクロコンピュータ、通信I/F及び記憶部等を備える。
駆動系制御ユニット7100は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット7100は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。駆動系制御ユニット7100は、ABS(Antilock Brake System)又はESC(Electronic Stability Control)等の制御装置としての機能を有してもよい。
駆動系制御ユニット7100には、車両状態検出部7110が接続される。車両状態検出部7110には、例えば、車体の軸回転運動の角速度を検出するジャイロセンサ、車両の加速度を検出する加速度センサ、あるいは、アクセルペダルの操作量、ブレーキペダルの操作量、ステアリングホイールの操舵角、エンジン回転数又は車輪の回転速度等を検出するためのセンサのうちの少なくとも一つが含まれる。駆動系制御ユニット7100は、車両状態検出部7110から入力される信号を用いて演算処理を行い、内燃機関、駆動用モータ、電動パワーステアリング装置又はブレーキ装置等を制御する。
ボディ系制御ユニット7200は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット7200は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット7200には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット7200は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
バッテリ制御ユニット7300は、各種プログラムにしたがって駆動用モータの電力供給源である二次電池7310を制御する。例えば、バッテリ制御ユニット7300には、二次電池7310を備えたバッテリ装置から、バッテリ温度、バッテリ出力電圧又はバッテリの残存容量等の情報が入力される。バッテリ制御ユニット7300は、これらの信号を用いて演算処理を行い、二次電池7310の温度調節制御又はバッテリ装置に備えられた冷却装置等の制御を行う。
車外情報検出ユニット7400は、車両制御システム7000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット7400には、撮像部7410及び車外情報検出部7420のうちの少なくとも一方が接続される。撮像部7410には、ToF(Time Of Flight)カメラ、ステレオカメラ、単眼カメラ、赤外線カメラ及びその他のカメラのうちの少なくとも一つが含まれる。車外情報検出部7420には、例えば、現在の天候又は気象を検出するための環境センサ、あるいは、車両制御システム7000を搭載した車両の周囲の他の車両、障害物又は歩行者等を検出するための周囲情報検出センサのうちの少なくとも一つが含まれる。
環境センサは、例えば、雨天を検出する雨滴センサ、霧を検出する霧センサ、日照度合いを検出する日照センサ、及び降雪を検出する雪センサのうちの少なくとも一つであってよい。周囲情報検出センサは、超音波センサ、レーダ装置及びLIDAR(Light Detection and Ranging、Laser Imaging Detection and Ranging)装置のうちの少なくとも一つであってよい。これらの撮像部7410及び車外情報検出部7420は、それぞれ独立したセンサないし装置として備えられてもよいし、複数のセンサないし装置が統合された装置として備えられてもよい。
ここで、図26は、撮像部7410及び車外情報検出部7420の設置位置の例を示す。撮像部7910,7912,7914,7916,7918は、例えば、車両7900のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部のうちの少なくとも一つの位置に設けられる。フロントノーズに備えられる撮像部7910及び車室内のフロントガラスの上部に備えられる撮像部7918は、主として車両7900の前方の画像を取得する。サイドミラーに備えられる撮像部7912,7914は、主として車両7900の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部7916は、主として車両7900の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部7918は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
なお、図26には、それぞれの撮像部7910,7912,7914,7916の撮影範囲の一例が示されている。撮像範囲aは、フロントノーズに設けられた撮像部7910の撮像範囲を示し、撮像範囲b,cは、それぞれサイドミラーに設けられた撮像部7912,7914の撮像範囲を示し、撮像範囲dは、リアバンパ又はバックドアに設けられた撮像部7916の撮像範囲を示す。例えば、撮像部7910,7912,7914,7916で撮像された画像データが重ね合わせられることにより、車両7900を上方から見た俯瞰画像が得られる。
車両7900のフロント、リア、サイド、コーナ及び車室内のフロントガラスの上部に設けられる車外情報検出部7920,7922,7924,7926,7928,7930は、例えば超音波センサ又はレーダ装置であってよい。車両7900のフロントノーズ、リアバンパ、バックドア及び車室内のフロントガラスの上部に設けられる車外情報検出部7920,7926,7930は、例えばLIDAR装置であってよい。これらの車外情報検出部7920~7930は、主として先行車両、歩行者又は障害物等の検出に用いられる。
図25に戻って説明を続ける。車外情報検出ユニット7400は、撮像部7410に車外の画像を撮像させるとともに、撮像された画像データを受信する。また、車外情報検出ユニット7400は、接続されている車外情報検出部7420から検出情報を受信する。車外情報検出部7420が超音波センサ、レーダ装置又はLIDAR装置である場合には、車外情報検出ユニット7400は、超音波又は電磁波等を発信させるとともに、受信された反射波の情報を受信する。車外情報検出ユニット7400は、受信した情報に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。車外情報検出ユニット7400は、受信した情報に基づいて、降雨、霧又は路面状況等を認識する環境認識処理を行ってもよい。車外情報検出ユニット7400は、受信した情報に基づいて、車外の物体までの距離を算出してもよい。
また、車外情報検出ユニット7400は、受信した画像データに基づいて、人、車、障害物、標識又は路面上の文字等を認識する画像認識処理又は距離検出処理を行ってもよい。車外情報検出ユニット7400は、受信した画像データに対して歪補正又は位置合わせ等の処理を行うとともに、異なる撮像部7410により撮像された画像データを合成して、俯瞰画像又はパノラマ画像を生成してもよい。車外情報検出ユニット7400は、異なる撮像部7410により撮像された画像データを用いて、視点変換処理を行ってもよい。
車内情報検出ユニット7500は、車内の情報を検出する。車内情報検出ユニット7500には、例えば、運転者の状態を検出する運転者状態検出部7510が接続される。運転者状態検出部7510は、運転者を撮像するカメラ、運転者の生体情報を検出する生体センサ又は車室内の音声を集音するマイク等を含んでもよい。生体センサは、例えば、座面又はステアリングホイール等に設けられ、座席に座った搭乗者又はステアリングホイールを握る運転者の生体情報を検出する。車内情報検出ユニット7500は、運転者状態検出部7510から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。車内情報検出ユニット7500は、集音された音声信号に対してノイズキャンセリング処理等の処理を行ってもよい。
統合制御ユニット7600は、各種プログラムにしたがって車両制御システム7000内の動作全般を制御する。統合制御ユニット7600には、入力部7800が接続されている。入力部7800は、例えば、タッチパネル、ボタン、マイクロフォン、スイッチ又はレバー等、搭乗者によって入力操作され得る装置によって実現される。統合制御ユニット7600には、マイクロフォンにより入力される音声を音声認識することにより得たデータが入力されてもよい。入力部7800は、例えば、赤外線又はその他の電波を利用したリモートコントロール装置であってもよいし、車両制御システム7000の操作に対応した携帯電話又はPDA(Personal Digital Assistant)等の外部接続機器であってもよい。入力部7800は、例えばカメラであってもよく、その場合搭乗者はジェスチャにより情報を入力することができる。あるいは、搭乗者が装着したウェアラブル装置の動きを検出することで得られたデータが入力されてもよい。さらに、入力部7800は、例えば、上記の入力部7800を用いて搭乗者等により入力された情報に基づいて入力信号を生成し、統合制御ユニット7600に出力する入力制御回路などを含んでもよい。搭乗者等は、この入力部7800を操作することにより、車両制御システム7000に対して各種のデータを入力したり処理動作を指示したりする。
記憶部7690は、マイクロコンピュータにより実行される各種プログラムを記憶するROM(Read Only Memory)、及び各種パラメータ、演算結果又はセンサ値等を記憶するRAM(Random Access Memory)を含んでいてもよい。また、記憶部7690は、HDD(Hard Disc Drive)等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス又は光磁気記憶デバイス等によって実現してもよい。
汎用通信I/F7620は、外部環境7750に存在する様々な機器との間の通信を仲介する汎用的な通信I/Fである。汎用通信I/F7620は、GSM(登録商標)(Global System of Mobile communications)、WiMAX(登録商標)、LTE(登録商標)(Long Term Evolution)若しくはLTE-A(LTE-Advanced)などのセルラー通信プロトコル、又は無線LAN(Wi-Fi(登録商標)ともいう)、Bluetooth(登録商標)などのその他の無線通信プロトコルを実装してよい。汎用通信I/F7620は、例えば、基地局又はアクセスポイントを介して、外部ネットワーク(例えば、インターネット、クラウドネットワーク又は事業者固有のネットワーク)上に存在する機器(例えば、アプリケーションサーバ又は制御サーバ)へ接続してもよい。また、汎用通信I/F7620は、例えばP2P(Peer To Peer)技術を用いて、車両の近傍に存在する端末(例えば、運転者、歩行者若しくは店舗の端末、又はMTC(Machine Type Communication)端末)と接続してもよい。
専用通信I/F7630は、車両における使用を目的として策定された通信プロトコルをサポートする通信I/Fである。専用通信I/F7630は、例えば、下位レイヤのIEEE802.11pと上位レイヤのIEEE1609との組合せであるWAVE(Wireless Access in Vehicle Environment)、DSRC(Dedicated Short Range Communications)、又はセルラー通信プロトコルといった標準プロトコルを実装してよい。専用通信I/F7630は、典型的には、車車間(Vehicle to Vehicle)通信、路車間(Vehicle to Infrastructure)通信、車両と家との間(Vehicle to Home)の通信及び歩車間(Vehicle to Pedestrian)通信のうちの1つ以上を含む概念であるV2X通信を遂行する。
測位部7640は、例えば、GNSS(Global Navigation Satellite System)衛星からのGNSS信号(例えば、GPS(Global Positioning System)衛星からのGPS信号)を受信して測位を実行し、車両の緯度、経度及び高度を含む位置情報を生成する。なお、測位部7640は、無線アクセスポイントとの信号の交換により現在位置を特定してもよく、又は測位機能を有する携帯電話、PHS若しくはスマートフォンといった端末から位置情報を取得してもよい。
ビーコン受信部7650は、例えば、道路上に設置された無線局等から発信される電波あるいは電磁波を受信し、現在位置、渋滞、通行止め又は所要時間等の情報を取得する。なお、ビーコン受信部7650の機能は、上述した専用通信I/F7630に含まれてもよい。
車内機器I/F7660は、マイクロコンピュータ7610と車内に存在する様々な車内機器7760との間の接続を仲介する通信インタフェースである。車内機器I/F7660は、無線LAN、Bluetooth(登録商標)、NFC(Near Field Communication)又はWUSB(Wireless USB)といった無線通信プロトコルを用いて無線接続を確立してもよい。また、車内機器I/F7660は、図示しない接続端子(及び、必要であればケーブル)を介して、USB(Universal Serial Bus)、HDMI(登録商標)(High-Definition Multimedia Interface、又はMHL(Mobile High-definition Link)等の有線接続を確立してもよい。車内機器7760は、例えば、搭乗者が有するモバイル機器若しくはウェアラブル機器、又は車両に搬入され若しくは取り付けられる情報機器のうちの少なくとも1つを含んでいてもよい。また、車内機器7760は、任意の目的地までの経路探索を行うナビゲーション装置を含んでいてもよい。車内機器I/F7660は、これらの車内機器7760との間で、制御信号又はデータ信号を交換する。
車載ネットワークI/F7680は、マイクロコンピュータ7610と通信ネットワーク7010との間の通信を仲介するインタフェースである。車載ネットワークI/F7680は、通信ネットワーク7010によりサポートされる所定のプロトコルに則して、信号等を送受信する。
統合制御ユニット7600のマイクロコンピュータ7610は、汎用通信I/F7620、専用通信I/F7630、測位部7640、ビーコン受信部7650、車内機器I/F7660及び車載ネットワークI/F7680のうちの少なくとも一つを介して取得される情報に基づき、各種プログラムにしたがって、車両制御システム7000を制御する。例えば、マイクロコンピュータ7610は、取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット7100に対して制御指令を出力してもよい。例えば、マイクロコンピュータ7610は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行ってもよい。また、マイクロコンピュータ7610は、取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行ってもよい。
マイクロコンピュータ7610は、汎用通信I/F7620、専用通信I/F7630、測位部7640、ビーコン受信部7650、車内機器I/F7660及び車載ネットワークI/F7680のうちの少なくとも一つを介して取得される情報に基づき、車両と周辺の構造物や人物等の物体との間の3次元距離情報を生成し、車両の現在位置の周辺情報を含むローカル地図情報を作成してもよい。また、マイクロコンピュータ7610は、取得される情報に基づき、車両の衝突、歩行者等の近接又は通行止めの道路への進入等の危険を予測し、警告用信号を生成してもよい。警告用信号は、例えば、警告音を発生させたり、警告ランプを点灯させたりするための信号であってよい。
音声画像出力部7670は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図25の例では、出力装置として、オーディオスピーカ7710、表示部7720及びインストルメントパネル7730が例示されている。表示部7720は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。表示部7720は、AR(Augmented Reality)表示機能を有していてもよい。出力装置は、これらの装置以外の、ヘッドホン、搭乗者が装着する眼鏡型ディスプレイ等のウェアラブルデバイス、プロジェクタ又はランプ等の他の装置であってもよい。出力装置が表示装置の場合、表示装置は、マイクロコンピュータ7610が行った各種処理により得られた結果又は他の制御ユニットから受信された情報を、テキスト、イメージ、表、グラフ等、様々な形式で視覚的に表示する。また、出力装置が音声出力装置の場合、音声出力装置は、再生された音声データ又は音響データ等からなるオーディオ信号をアナログ信号に変換して聴覚的に出力する。
なお、図25に示した例において、通信ネットワーク7010を介して接続された少なくとも二つの制御ユニットが一つの制御ユニットとして一体化されてもよい。あるいは、個々の制御ユニットが、複数の制御ユニットにより構成されてもよい。さらに、車両制御システム7000が、図示されていない別の制御ユニットを備えてもよい。また、上記の説明において、いずれかの制御ユニットが担う機能の一部又は全部を、他の制御ユニットに持たせてもよい。つまり、通信ネットワーク7010を介して情報の送受信がされるようになっていれば、所定の演算処理が、いずれかの制御ユニットで行われるようになってもよい。同様に、いずれかの制御ユニットに接続されているセンサ又は装置が、他の制御ユニットに接続されるとともに、複数の制御ユニットが、通信ネットワーク7010を介して相互に検出情報を送受信してもよい。
なお、図1を用いて説明した本実施形態に係る測距装置1の各機能を実現するためのコンピュータプログラムを、いずれかの制御ユニット等に実装することができる。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体を提供することもできる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信されてもよい。
以上説明した車両制御システム7000において、図1を用いて説明した本実施形態に係る測距装置1は、図25に示した応用例の撮像部7410に適用することができる。これにより、被写体が近距離にある場合、又は高反射の被写体に対しても高精度の測距ができる。
また、図1を用いて説明した測距装置1の少なくとも一部の構成要素は、図25に示した統合制御ユニット7600のためのモジュール(例えば、一つのダイで構成される集積回路モジュール)において実現されてもよい。あるいは、図1を用いて説明した測距装置1が、図25に示した車両制御システム7000の複数の制御ユニットによって実現されてもよい。
なお、本技術は以下のような構成を取ることができる。
(1)光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、 前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
前記光パルス信号を、前記単位受光期間の2倍よりも短いパルス幅で繰り返し発光する発光部と、
を備える、測距装置。
(2)前記発光部は、前記光パルス信号を、前記単位受光期間よりも短いパルス幅で繰り返し発光する、
(1)に記載の測距装置。
(3)光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、 前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
発光部に位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光させる制御を行うか、前記受光部で受光された前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択する制御部と、を備える、
測距装置。
(4)それぞれ異なる位相の複数のパルス幅を順繰りに選択して前記光パルス信号を発光するか、又は、同一の位相のパルス幅の前記光パルス信号を断続的に発光する、前記発光部を備える、
(1)乃至(3)のいずれか一項に記載の測距装置。
(5)位相がそれぞれ異なる複数の前記パルス幅のうち一つを順繰りに選択する発光タイミング制御部を備え、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅で前記光パルス信号を発光する、
(4)に記載の測距装置。
(6)前記発光タイミング制御部は、前記複数のパルス幅のそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅の前記光パルス信号を発光する動作を前記所定回数ずつ繰り返し、
前記受光部は、前記複数のパルス幅のそれぞれごとに発光された前記光パルス信号に対応する前記反射光パルス信号を受光する動作を前記所定回数ずつ繰り返し、
前記ヒストグラム生成部は、前記複数のパルス幅のそれぞれを前記所定回数ずつ選択して発光された前記光パルス信号に対応する前記反射光パルス信号に基づいて、前記ヒストグラムを生成する、
(5)に記載の測距装置。
(7)前記発光タイミング制御部は、前記発光部の1回の発光動作ごとに、前記複数のパルス幅の選択を順繰りに切り替える、
(5)又は(6)に記載の測距装置。
(8)前記発光タイミング制御部は、前記複数のパルス幅の位相を等間隔でずらす、
(5)乃至(7)のいずれか一項に記載の測距装置。
(9)前記発光タイミング制御部は、前記複数のパルス幅の位相を、前記単位受光期間よりも短い同一の位相量ずつずらす、
(8)に記載の測距装置。
(10)前記複数のパルス幅は、同じ時間幅を有する、
(3)乃至(9)のいずれか一項に記載の測距装置。
(11)前記複数のパルス幅は、基準となるパルス幅よりも位相が早いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも位相が遅い前記n個のパルス幅と、を含む、
(10)に記載の測距装置。
(12)前記複数のパルス幅は、互いに異なる時間幅の2以上のパルス幅を含む、
(3)乃至(9)のいずれか一項に記載の測距装置。
(13)前記複数のパルス幅は、基準となるパルス幅よりも短いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも長い前記n個のパルス幅と、を含み、
前記基準となるパルス幅よりも短いn個のパルス幅と、前記基準となるパルス幅よりも長いn個のパルス幅と、は同一の重心位置を有する、
(12)に記載の測距装置。
(14)前記受光部と前記発光部とを同期させる同期制御部と、
前記同期制御部の出力する同期信号を、前記発光部の1回の発光動作ごとに、前記単位受光期間よりも短い期間の遅延をさせて、前記発光部に伝達する遅延回路と、をさらに備える、
(1)乃至(13)のいずれか一項に記載の測距装置。
(15)前記受光部で繰り返し受光された前記反射光パルス信号の受光時刻と、前記ヒストグラムが有する複数の前記単位受光期間と、のそれぞれ異なる複数の対応づけのうち一つを順繰りに選択する受光時刻割当部を備え、
前記ヒストグラム生成部は、前記受光時刻割当部で選択された前記対応づけに基づいて、前記ヒストグラムを生成する、
(3)又は(4)に記載の測距装置。
(16)前記受光時刻割当部は、前記複数の対応づけのそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記ヒストグラム生成部は、前記所定回数ずつ順繰りに選択される前記複数の対応づけのそれぞれごとに、前記受光時刻を複数の前記単位受光期間に割り当てて前記ヒストグラムを生成する、
(15)に記載の測距装置。
(17)前記複数の対応づけは、前記受光時刻に対応する前記単位受光期間が等間隔でずれている、
(15)又は(16)に記載の測距装置。
(18)前記複数の対応づけは、前記受光時刻と前記ヒストグラムが有する複数の前記単位受光期間との基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を早めたn(nは1以上の整数)個の対応づけと、前記基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を遅くした前記n個の対応づけと、を含む、
(15)乃至(17)のいずれか一項に記載の測距装置。
(19)前記受光時刻割当部は、前記受光時刻と複数の前記単位受光期間との対応づけを前記単位受光期間よりも短い時間幅で変化させて、前記複数の対応づけを生成する、
(15)乃至(18)のいずれか一項に記載の測距装置。
(20)光パルス信号が物体で反射された反射光パルス信号を繰り返し受光し、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成し、
位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光するか、前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択するか、のいずれかを行う、
測距方法。
(1)光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、 前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
前記光パルス信号を、前記単位受光期間の2倍よりも短いパルス幅で繰り返し発光する発光部と、
を備える、測距装置。
(2)前記発光部は、前記光パルス信号を、前記単位受光期間よりも短いパルス幅で繰り返し発光する、
(1)に記載の測距装置。
(3)光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、 前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
発光部に位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光させる制御を行うか、前記受光部で受光された前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択する制御部と、を備える、
測距装置。
(4)それぞれ異なる位相の複数のパルス幅を順繰りに選択して前記光パルス信号を発光するか、又は、同一の位相のパルス幅の前記光パルス信号を断続的に発光する、前記発光部を備える、
(1)乃至(3)のいずれか一項に記載の測距装置。
(5)位相がそれぞれ異なる複数の前記パルス幅のうち一つを順繰りに選択する発光タイミング制御部を備え、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅で前記光パルス信号を発光する、
(4)に記載の測距装置。
(6)前記発光タイミング制御部は、前記複数のパルス幅のそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅の前記光パルス信号を発光する動作を前記所定回数ずつ繰り返し、
前記受光部は、前記複数のパルス幅のそれぞれごとに発光された前記光パルス信号に対応する前記反射光パルス信号を受光する動作を前記所定回数ずつ繰り返し、
前記ヒストグラム生成部は、前記複数のパルス幅のそれぞれを前記所定回数ずつ選択して発光された前記光パルス信号に対応する前記反射光パルス信号に基づいて、前記ヒストグラムを生成する、
(5)に記載の測距装置。
(7)前記発光タイミング制御部は、前記発光部の1回の発光動作ごとに、前記複数のパルス幅の選択を順繰りに切り替える、
(5)又は(6)に記載の測距装置。
(8)前記発光タイミング制御部は、前記複数のパルス幅の位相を等間隔でずらす、
(5)乃至(7)のいずれか一項に記載の測距装置。
(9)前記発光タイミング制御部は、前記複数のパルス幅の位相を、前記単位受光期間よりも短い同一の位相量ずつずらす、
(8)に記載の測距装置。
(10)前記複数のパルス幅は、同じ時間幅を有する、
(3)乃至(9)のいずれか一項に記載の測距装置。
(11)前記複数のパルス幅は、基準となるパルス幅よりも位相が早いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも位相が遅い前記n個のパルス幅と、を含む、
(10)に記載の測距装置。
(12)前記複数のパルス幅は、互いに異なる時間幅の2以上のパルス幅を含む、
(3)乃至(9)のいずれか一項に記載の測距装置。
(13)前記複数のパルス幅は、基準となるパルス幅よりも短いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも長い前記n個のパルス幅と、を含み、
前記基準となるパルス幅よりも短いn個のパルス幅と、前記基準となるパルス幅よりも長いn個のパルス幅と、は同一の重心位置を有する、
(12)に記載の測距装置。
(14)前記受光部と前記発光部とを同期させる同期制御部と、
前記同期制御部の出力する同期信号を、前記発光部の1回の発光動作ごとに、前記単位受光期間よりも短い期間の遅延をさせて、前記発光部に伝達する遅延回路と、をさらに備える、
(1)乃至(13)のいずれか一項に記載の測距装置。
(15)前記受光部で繰り返し受光された前記反射光パルス信号の受光時刻と、前記ヒストグラムが有する複数の前記単位受光期間と、のそれぞれ異なる複数の対応づけのうち一つを順繰りに選択する受光時刻割当部を備え、
前記ヒストグラム生成部は、前記受光時刻割当部で選択された前記対応づけに基づいて、前記ヒストグラムを生成する、
(3)又は(4)に記載の測距装置。
(16)前記受光時刻割当部は、前記複数の対応づけのそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記ヒストグラム生成部は、前記所定回数ずつ順繰りに選択される前記複数の対応づけのそれぞれごとに、前記受光時刻を複数の前記単位受光期間に割り当てて前記ヒストグラムを生成する、
(15)に記載の測距装置。
(17)前記複数の対応づけは、前記受光時刻に対応する前記単位受光期間が等間隔でずれている、
(15)又は(16)に記載の測距装置。
(18)前記複数の対応づけは、前記受光時刻と前記ヒストグラムが有する複数の前記単位受光期間との基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を早めたn(nは1以上の整数)個の対応づけと、前記基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を遅くした前記n個の対応づけと、を含む、
(15)乃至(17)のいずれか一項に記載の測距装置。
(19)前記受光時刻割当部は、前記受光時刻と複数の前記単位受光期間との対応づけを前記単位受光期間よりも短い時間幅で変化させて、前記複数の対応づけを生成する、
(15)乃至(18)のいずれか一項に記載の測距装置。
(20)光パルス信号が物体で反射された反射光パルス信号を繰り返し受光し、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成し、
位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光するか、前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択するか、のいずれかを行う、
測距方法。
本開示の態様は、上述した個々の実施形態に限定されるものではなく、当業者が想到しうる種々の変形も含むものであり、本開示の効果も上述した内容に限定されない。すなわち、特許請求の範囲に規定された内容およびその均等物から導き出される本開示の概念的な思想と趣旨を逸脱しない範囲で種々の追加、変更および部分的削除が可能である。
1、1a 測距装置、2、2a 発光部、3 受光部、4、4a 飛行時間検出部、5 ヒストグラム生成部、6 距離検出部、7、7a 測距部、10 物体、11 発光タイミング制御部、12 クロック信号生成部、13 遅延回路、14、14a 制御部
Claims (20)
- 光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
前記光パルス信号を、前記単位受光期間の2倍よりも短いパルス幅で繰り返し発光する発光部と、を備える、
測距装置。 - 前記発光部は、前記光パルス信号を、前記単位受光期間よりも短いパルス幅で繰り返し発光する、
請求項1に記載の測距装置。 - 光パルス信号が物体で反射された反射光パルス信号を繰り返し受光する受光部と、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成するヒストグラム生成部と、
発光部に位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光させる制御を行うか、前記受光部で受光された前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択する制御部と、を備える、
測距装置。 - それぞれ異なる位相の複数のパルス幅を順繰りに選択して前記光パルス信号を発光するか、又は、同一の位相のパルス幅の前記光パルス信号を断続的に発光する、前記発光部を備える、
請求項3に記載の測距装置。 - 位相がそれぞれ異なる複数の前記パルス幅のうち一つを順繰りに選択する発光タイミング制御部を備え、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅で前記光パルス信号を発光する、
請求項4に記載の測距装置。 - 前記発光タイミング制御部は、前記複数のパルス幅のそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記発光部は、前記発光タイミング制御部で選択された前記パルス幅の前記光パルス信号を発光する動作を前記所定回数ずつ繰り返し、
前記受光部は、前記複数のパルス幅のそれぞれごとに発光された前記光パルス信号に対応する前記反射光パルス信号を受光する動作を前記所定回数ずつ繰り返し、
前記ヒストグラム生成部は、前記複数のパルス幅のそれぞれを前記所定回数ずつ選択して発光された前記光パルス信号に対応する前記反射光パルス信号に基づいて、前記ヒストグラムを生成する、
請求項5に記載の測距装置。 - 前記発光タイミング制御部は、前記発光部の1回の発光動作ごとに、前記複数のパルス幅の選択を順繰りに切り替える、
請求項5に記載の測距装置。 - 前記発光タイミング制御部は、前記複数のパルス幅の位相を等間隔でずらす、
請求項5に記載の測距装置。 - 前記発光タイミング制御部は、前記複数のパルス幅の位相を、前記単位受光期間よりも短い同一の位相量ずつずらす、
請求項8に記載の測距装置。 - 前記複数のパルス幅は、同じ時間幅を有する、
請求項3に記載の測距装置。 - 前記複数のパルス幅は、基準となるパルス幅よりも位相が早いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも位相が遅い前記n個のパルス幅と、を含む、
請求項10に記載の測距装置。 - 前記複数のパルス幅は、互いに異なる時間幅の2以上のパルス幅を含む、
請求項3に記載の測距装置。 - 前記複数のパルス幅は、基準となるパルス幅よりも短いn(nは1以上の整数)個のパルス幅と、前記基準となるパルス幅よりも長い前記n個のパルス幅と、を含み、
前記基準となるパルス幅よりも短いn個のパルス幅と、前記基準となるパルス幅よりも長いn個のパルス幅と、は同一の重心位置を有する、
請求項12に記載の測距装置。 - 前記受光部と前記発光部とを同期させる同期制御部と、
前記同期制御部の出力する同期信号を、前記発光部の1回の発光動作ごとに、前記単位受光期間よりも短い期間の遅延をさせて、前記発光部に伝達する遅延回路と、をさらに備える、
請求項1に記載の測距装置。 - 前記受光部で繰り返し受光された前記反射光パルス信号の受光時刻と、前記ヒストグラムが有する複数の前記単位受光期間と、のそれぞれ異なる複数の対応づけのうち一つを順繰りに選択する受光時刻割当部を備え、
前記ヒストグラム生成部は、前記受光時刻割当部で選択された前記対応づけに基づいて、前記ヒストグラムを生成する、
請求項3に記載の測距装置。 - 前記受光時刻割当部は、前記複数の対応づけのそれぞれを、2以上の所定回数ずつ順繰りに選択し、
前記ヒストグラム生成部は、前記所定回数ずつ順繰りに選択される前記複数の対応づけのそれぞれごとに、前記受光時刻を複数の前記単位受光期間に割り当てて前記ヒストグラムを生成する、
請求項15に記載の測距装置。 - 前記複数の対応づけは、前記受光時刻に対応する前記単位受光期間が等間隔でずれている、
請求項15に記載の測距装置。 - 前記複数の対応づけは、前記受光時刻と前記ヒストグラムが有する複数の前記単位受光期間との基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を早めたn(nは1以上の整数)個の対応づけと、前記基準となる対応づけよりも前記受光時刻に対応する前記単位受光期間を遅くした前記n個の対応づけと、を含む、
請求項15に記載の測距装置。 - 前記受光時刻割当部は、前記受光時刻と複数の前記単位受光期間との対応づけを前記単位受光期間よりも短い時間幅で変化させて、前記複数の対応づけを生成する、
請求項15に記載の測距装置。 - 光パルス信号が物体で反射された反射光パルス信号を繰り返し受光し、
前記反射光パルス信号の受光頻度を、単位受光期間ごとに分類したヒストグラムを生成し、
位相がそれぞれ異なる複数のパルス幅のうち一つを順繰りに選択して前記光パルス信号を発光するか、前記反射光パルス信号の受光時刻と前記ヒストグラムが有する複数の前記単位受光期間とのそれぞれ異なる複数の対応づけのうち一つを順繰りに選択するか、又は、前記複数の対応づけを並行して選択するか、のいずれかを行う、
測距方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2024-112481 | 2024-07-12 | ||
| JP2024112481 | 2024-07-12 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2026014223A1 true WO2026014223A1 (ja) | 2026-01-15 |
Family
ID=98386580
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2025/022661 Pending WO2026014223A1 (ja) | 2024-07-12 | 2025-06-24 | 測距装置及び測距方法 |
Country Status (1)
| Country | Link |
|---|---|
| WO (1) | WO2026014223A1 (ja) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20200233068A1 (en) * | 2019-01-18 | 2020-07-23 | The University Court Of The University Of Edinburgh | Digital pixels and operating methods thereof |
| WO2020255855A1 (ja) * | 2019-06-20 | 2020-12-24 | ソニーセミコンダクタソリューションズ株式会社 | 測距装置および測距方法 |
| WO2021010176A1 (ja) * | 2019-07-16 | 2021-01-21 | ソニーセミコンダクタソリューションズ株式会社 | 測定装置および測定方法、並びにプログラム |
| JP2023051777A (ja) * | 2021-09-30 | 2023-04-11 | 深セン市速騰聚創科技有限公司 | レーダーデータ送受信装置、測距方法およびレーザーレーダー |
| WO2023112715A1 (ja) * | 2021-12-13 | 2023-06-22 | 北陽電機株式会社 | ヒストグラム生成回路、光測距装置、ヒストグラム生成方法および光測距方法 |
| WO2023145261A1 (ja) * | 2022-01-26 | 2023-08-03 | ソニーセミコンダクタソリューションズ株式会社 | 測距装置および測距装置の制御方法 |
| WO2023162733A1 (ja) * | 2022-02-22 | 2023-08-31 | ソニーセミコンダクタソリューションズ株式会社 | 測距装置及び測距方法 |
-
2025
- 2025-06-24 WO PCT/JP2025/022661 patent/WO2026014223A1/ja active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20200233068A1 (en) * | 2019-01-18 | 2020-07-23 | The University Court Of The University Of Edinburgh | Digital pixels and operating methods thereof |
| WO2020255855A1 (ja) * | 2019-06-20 | 2020-12-24 | ソニーセミコンダクタソリューションズ株式会社 | 測距装置および測距方法 |
| WO2021010176A1 (ja) * | 2019-07-16 | 2021-01-21 | ソニーセミコンダクタソリューションズ株式会社 | 測定装置および測定方法、並びにプログラム |
| JP2023051777A (ja) * | 2021-09-30 | 2023-04-11 | 深セン市速騰聚創科技有限公司 | レーダーデータ送受信装置、測距方法およびレーザーレーダー |
| WO2023112715A1 (ja) * | 2021-12-13 | 2023-06-22 | 北陽電機株式会社 | ヒストグラム生成回路、光測距装置、ヒストグラム生成方法および光測距方法 |
| WO2023145261A1 (ja) * | 2022-01-26 | 2023-08-03 | ソニーセミコンダクタソリューションズ株式会社 | 測距装置および測距装置の制御方法 |
| WO2023162733A1 (ja) * | 2022-02-22 | 2023-08-31 | ソニーセミコンダクタソリューションズ株式会社 | 測距装置及び測距方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2020022137A1 (ja) | 受光装置及び測距装置 | |
| US20190259633A1 (en) | Electronic substrate and electronic apparatus | |
| WO2023089884A1 (ja) | 光検出装置、撮像装置および測距装置 | |
| WO2021124762A1 (ja) | 受光装置及び受光装置の制御方法、並びに、測距装置 | |
| JP7172603B2 (ja) | 信号処理装置、信号処理方法、およびプログラム | |
| US20250164615A1 (en) | Distance measuring device | |
| WO2023162734A1 (ja) | 測距装置 | |
| US20250199129A1 (en) | Light-receiving element and electronic apparatus | |
| WO2023190278A1 (ja) | 光検出装置 | |
| WO2024162109A1 (ja) | 光検出装置及び測距システム | |
| WO2023162733A1 (ja) | 測距装置及び測距方法 | |
| WO2024195531A1 (ja) | 光検出装置、及び測距システム | |
| WO2026014223A1 (ja) | 測距装置及び測距方法 | |
| WO2026042648A1 (ja) | 測距装置、測距システム、及び処理装置 | |
| US20250208268A1 (en) | Distance measurement device | |
| US20250199136A1 (en) | Distance measuring instrument and distance measuring method | |
| WO2026053862A1 (ja) | 光検出装置及び測距システム | |
| WO2026053710A1 (ja) | 光検出装置、及び制御方法 | |
| WO2025243786A1 (ja) | 測距装置および測距方法 | |
| WO2024095625A1 (ja) | 測距装置および測距方法 | |
| WO2024071173A1 (ja) | 光検出装置及び測距システム | |
| WO2024185307A1 (ja) | 光検出装置、測定方法、及び距離測定システム | |
| WO2024095626A1 (ja) | 測距装置 | |
| WO2025225386A1 (ja) | 情報処理装置、情報処理方法、および測距システム | |
| WO2024009739A1 (ja) | 光学式測距センサ、及び光学式測距システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 25836785 Country of ref document: EP Kind code of ref document: A1 |