WO2020170932A1 - 形状計測システム、及び形状計測方法 - Google Patents

形状計測システム、及び形状計測方法 Download PDF

Info

Publication number
WO2020170932A1
WO2020170932A1 PCT/JP2020/005548 JP2020005548W WO2020170932A1 WO 2020170932 A1 WO2020170932 A1 WO 2020170932A1 JP 2020005548 W JP2020005548 W JP 2020005548W WO 2020170932 A1 WO2020170932 A1 WO 2020170932A1
Authority
WO
WIPO (PCT)
Prior art keywords
distance
shape measuring
measuring system
detection waveform
reliability
Prior art date
Application number
PCT/JP2020/005548
Other languages
English (en)
French (fr)
Inventor
達雄 針山
渡辺 正浩
敦史 谷口
兼治 丸野
矢崎 秋夫
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Priority to CA3127579A priority Critical patent/CA3127579C/en
Priority to JP2021501908A priority patent/JP7194260B2/ja
Priority to US17/426,203 priority patent/US11635295B2/en
Publication of WO2020170932A1 publication Critical patent/WO2020170932A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/2441Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures using interferometry
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/02Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • G01B11/026Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring distance between sensor and object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/14Measuring arrangements characterised by the use of optical techniques for measuring distance or clearance between spaced objects or spaced apertures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B9/00Measuring instruments characterised by the use of optical techniques
    • G01B9/02Interferometers
    • G01B9/0209Low-coherence interferometers
    • G01B9/02091Tomographic interferometers, e.g. based on optical coherence

Definitions

  • the present invention relates to a shape measuring system and a shape measuring method.
  • the present invention claims the priority of Japanese Patent Application No. 2019-026172 filed on February 18, 2019, and for the designated countries in which weaving by reference to documents is allowed, the contents described in the application are This application is incorporated by reference.
  • the measurement accuracy may deteriorate due to the noise caused by the positional relationship between the measuring device and the object and the measurement environment.
  • Patent Document 1 As a countermeasure against this, for example, in Patent Document 1, the same location is measured a plurality of times, locations with high measurement reproducibility are weighted as having high reliability, locations with low measurement reproducibility are weighted as having low reliability, and measurement is performed. A technique for improving the accuracy of measurement data by correcting data based on reliability weighting is disclosed.
  • Speckle occurs when irradiating a rough surface with laser light.
  • Speckle is a light interference phenomenon that occurs when a coherent light such as a laser light is emitted, and has a characteristic that it occurs at random timing in a statistically determinable place. As described above, the speckles are randomly generated, but the reflection intensity is often strong, and the repeatability is often high. Then, when the rough surface is inclined, a measurement error occurs depending on the beam diameter of the laser light and the inclination angle. Since the measurement error often has high reproducibility, it is difficult to improve the accuracy of the measurement data even if the measurement error is weighted based on the measurement reproducibility as in the technique described in Patent Document 1.
  • the present invention has been made in view of such a situation, and an object thereof is to enable the shape of an object to be measured with high accuracy.
  • the present application includes a plurality of means for solving at least a part of the above problems, and the examples are as follows.
  • a shape measuring system provides a distance measuring head that irradiates an object with light and receives reflected light from the object, and distance detection based on the reflected light.
  • a distance measuring device that generates a waveform, and a control device that analyzes the distance detection waveform to calculate a measured distance value to the object, the control device calculating a feature amount of the distance detection waveform.
  • One of the features is that one is performed.
  • FIG. 1 is a diagram showing a configuration example of a shape measuring system according to an embodiment of the present invention.
  • FIG. 2 is a diagram for explaining the principle of the FMCW (Frequency Modulated Continuous Wave) system.
  • FIG. 3 is a diagram showing an example of a distance detection waveform of the FMCW method.
  • FIG. 4 is a diagram showing a configuration example of the distance measuring head.
  • FIG. 5 is a diagram showing a configuration example of the scanning mechanism.
  • FIG. 6 is a diagram showing an example of a distance measurement result with respect to a smooth inclined surface.
  • FIG. 7 is a figure which shows an example of the distance measurement result with respect to a rough inclined surface.
  • FIG. 1 is a diagram showing a configuration example of a shape measuring system according to an embodiment of the present invention.
  • FIG. 2 is a diagram for explaining the principle of the FMCW (Frequency Modulated Continuous Wave) system.
  • FIG. 3 is a diagram showing an example of a distance detection waveform of
  • FIG. 8 is a diagram showing an example of a distance measurement result obtained when a beam is scanned on a rough inclined surface for measurement.
  • FIG. 9 is a diagram for explaining a method of coping with an error in the measured distance value due to speckle 1.
  • FIG. 10 is a diagram for explaining an example of a method of calculating a feature amount from a distance detection waveform based on a statistic.
  • FIG. 11 is a diagram for explaining an example of a method of calculating a feature amount by waveform fitting.
  • FIG. 12 is a diagram showing an example of a distance measurement result for a smooth curved surface.
  • FIG. 13 is a figure which shows an example of the distance measurement result with respect to a rough curved surface.
  • FIG. 14 is a flowchart illustrating an example of the first process performed by the control device.
  • FIG. 15 is a diagram illustrating a hardware configuration example of the distance measuring device.
  • FIG. 16 is a diagram showing a display example of a GUI (Graphical User Interface) screen corresponding to the first processing.
  • FIG. 17 is a flowchart illustrating a modified example of the first process.
  • FIG. 18 is a diagram for explaining step S11 of FIG.
  • FIG. 19 is a diagram showing a display example of a GUI screen corresponding to the modification of FIG.
  • FIG. 20 is a flowchart illustrating an example of the second process performed by the control device.
  • FIG. 21 is a diagram for explaining an example of a method of calculating the feature amount from the distance detection waveform when the inclination angle of the object is known.
  • FIG. 22 is a diagram for explaining an example of a method of obtaining the tilt angle, curvature, and roughness of the object based on the CAD data.
  • FIG. 23 is a diagram showing a display example of a GUI screen corresponding to the second processing.
  • FIG. 24 is a flowchart for explaining the third processing by the control device.
  • FIG. 25 is a diagram for explaining an example of a method of calculating the step position.
  • FIG. 26 is a diagram for explaining the relationship between the speckle position and the distance detection waveform when measuring the rough surface/slope surface.
  • FIG. 27 is a diagram showing the concept of extracting highly reliable points using the continuity of detected waveform peak intensities.
  • FIG. 28 is a diagram for explaining an optical disconnection method that can replace the FMCW method.
  • FIG. 1 shows a configuration example of a shape measuring system 1 according to an embodiment of the present invention.
  • the shape measuring system 1 adopts an FMCW (Frequency Modulated Continuous Wave) method as a distance measuring method.
  • the shape measuring system 1 includes a distance measuring device 100, a distance measuring head 117, a control device 119, a display device 120, and a scanning mechanism 500 (FIG. 5).
  • the distance measurement control unit 116 transmits a sweep waveform signal to the oscillator 102.
  • the oscillator 102 injects a triangular wave current into the laser light source 101 to modulate a drive current.
  • the laser light source 101 generates FM (Frequency Modulated) light whose frequency is swept with time at a constant modulation speed.
  • the laser light source 101 may be configured by a semiconductor laser device with an external resonator, and the resonance wavelength of the laser light source 101 may be changed by a triangular wave control signal from the oscillator 102. In this case, the laser light source 101 generates FM light whose frequency is swept in time.
  • FM light (hereinafter, simply referred to as light) generated by the laser light source 101 is guided to the optical fiber coupler 103.
  • the optical fiber coupler 103 splits the guided light into two.
  • the optical fiber couplers 103, 104, 106, 111 may be beam splitters.
  • the optical fiber coupler 104 further divides the light into two.
  • One of the light beams split by the optical fiber coupler 104 is provided with a constant optical path difference by the optical fiber 105, and then the other of the light beams split by the optical fiber coupler 104 by the optical fiber coupler 106.
  • the light is multiplexed and guided to the light receiver 107.
  • the light receiver 107 is composed of a Mach-Zehnder interferometer.
  • the light receiver 107 detects a constant reference beat signal proportional to the optical path difference of the combined light, and outputs it to the distance measurement control unit 116.
  • the other half of the light split by the optical fiber coupler 103 passes through the circulator 108 and is branched by the optical fiber coupler 111.
  • One of the lights branched by the optical fiber coupler 111 is reflected by the reference mirror 112 and becomes reference light.
  • One of the lights branched by the optical fiber coupler 111 passes through the connection cable 118 as measurement light, is guided to the distance measuring head 117, is emitted into space by the optical fiber collimator 113, and is beam-scanned by the beam scanning mechanism 114. , The object 115 is irradiated.
  • the reflected light reflected by the object 115 passes through the beam scanning mechanism 114 and the optical fiber collimator 113 again, is combined with the reference light reflected by the reference mirror 112 by the optical fiber coupler 111, and is received by the circulator 108 as a light receiver. The light is guided to 109.
  • the light receiver 109 is composed of a Mach-Zehnder interferometer.
  • the light receiver 109 detects the measurement beat signal generated by the interference between the reference light and the reflected light, and outputs it to the distance measurement control unit 116.
  • the distance measurement control unit 116 A/D converts the measurement beat signal from the light receiver 109 using the reference beat signal from the light receiver 107 as a sampling clock.
  • the distance measurement control unit 116 samples the reference beat signal and the measurement beat signal with a constant sampling clock. That is, the reference beat signal can be generated as a signal with a 90-degree phase shift by performing the Hilbert transform, and the local phase of the signal can be obtained from the reference signals before and after the Hilbert transform. By interpolating the phase, the timing when the reference signal has a constant phase can be obtained. By interpolating and sampling the measurement beat signal at this timing, the measurement signal can be resampled with the reference signal as a reference.
  • the distance measurement control unit 116 has the same effect even when the AD/DA converter incorporated therein samples the measurement signal by using the reference beat signal as a sampling clock and performs A/D conversion.
  • the distance measurement control unit 116 analyzes the beat signal using the FMCW method as the distance measurement method, and transmits the distance measurement data obtained as a result to the control device 119.
  • the distance measuring head 117 may include the distance measuring device 100 and the control device 119. Further, the control device 119 may be included in the distance measuring device 100.
  • FIG. 2 is a diagram for explaining the principle of the FMCW method.
  • the photodetector 109 detects a beat signal having a beat frequency fb equal to this frequency difference. If the frequency sweep width is ⁇ and the time required to modulate by ⁇ is T, the following equation (1) holds.
  • the distance L to the object 115 is half the distance that light travels during the time difference ⁇ t. Therefore, the distance L can be calculated by the following equation (2) using the light velocity c in the atmosphere.
  • the distance L and the beat frequency fb have a linear relationship. Therefore, if the FFT (First Fourier Transform) is performed on the measurement signal obtained by the light receiver 109 and the peak position and the magnitude are obtained, the reflection position and the amount of reflected light of the object 115 can be obtained.
  • FFT First Fourier Transform
  • FIG. 3 is a diagram for explaining a method for obtaining the reflection position on the surface of the object 115 from the reflection intensity profile, and shows an example of the distance detection waveform of the FMCW method.
  • the horizontal axis represents the FFT frequency axis and the vertical axis represents the reflection intensity.
  • the vicinity of the peak point of the distance detection waveform 301 is discrete data.
  • the peak width w is calculated by the distance resolution c/2 ⁇ .
  • a function such as a quadratic function or a Gaussian function is applied using data of three or more points near the peak point, and when the peak of the applied function is used, the position of the measurement target can be determined with accuracy higher than the distance resolution. It is possible to ask.
  • FFT is given as an example of the beat frequency analysis
  • the maximum entropy method may be used for the beat frequency analysis, for example.
  • the peak position can be detected with higher resolution than FFT.
  • the distance measurement control unit 116 uses the FMCW method as the distance measurement method, but adopts other light propagation time measurement methods such as OCT (Optical Coherence Tomography) and TOF (Time OF Flight). May be.
  • OCT Optical Coherence Tomography
  • TOF Time OF Flight
  • FIG. 4 shows a configuration example of the distance measuring head 117.
  • the distance measuring head 117 emits the measurement light supplied from the distance measuring device 100 via the connection cable 118 to the space by the optical fiber collimator 113, and deflects the emitted light by the optical path switching element 407 corresponding to the beam scanning mechanism 114. Then, the target object 115 is irradiated.
  • the optical path switching element 407 is held by the probe tip portion 406, and the probe tip portion 406 is held by the rotating mechanism 405.
  • the rotating mechanism 405 rotates
  • the optical path switching element 407 rotates and the object 115. It becomes possible to measure the cross-sectional shape of the.
  • the distance measurement data and the rotation angle information of the rotary motor are used.
  • the beam scanning mechanism 114 may scan a beam using a galvanometer mirror.
  • the measurement light can be scanned one-dimensionally
  • two galvanometer mirrors are used, the measurement light can be scanned two-dimensionally.
  • the beam scanning mechanism 114 another mechanism capable of deflecting light such as a MEMS mirror or a polygon mirror and capable of scanning may be used for scanning.
  • Information such as the length of the probe tip 406, the deflection angle of the beam, and the beam scanning angle is input to the distance measurement control unit 116 of the distance measurement device 100 from the distance measurement head 117. These pieces of information are used when the distance measurement control unit 116 generates the three-dimensional shape point cloud of the object 115.
  • FIG. 5 shows a configuration example of a scanning mechanism 500 for three-dimensionally scanning the distance measuring head 117.
  • the scanning mechanism 500 is for moving the distance measuring head 117 on a gantry stage to measure the shape of the object 115.
  • the gate-type scanning mechanism 500 has an X-axis moving mechanism 502 that moves in the X-axis direction mounted on a Y-axis moving mechanism 501 that moves in the Y-axis direction.
  • a Z-axis moving mechanism 503 that moves to is mounted. Accordingly, the scanning mechanism 500 can move the distance measuring head 117 three-dimensionally around the object 115.
  • the Y-axis moving mechanism 501, the X-axis moving mechanism 502, and the Z-axis moving mechanism 503 are driven under the control of the control device 119 to scan the distance measuring head 117 in three dimensions.
  • the distance measuring head 117 by scanning the distance measuring head 117 with the scanning mechanism 500, it is possible to realize highly functional non-contact shape measurement.
  • the object 115 is small and the shape can be measured only by moving in the Z-axis direction, the object 115 is positioned by a jig so that the position is uniquely determined, and only the Z-axis moving mechanism 503 is moved to perform measurement. You may.
  • the distance measuring head 117 may be scanned using a general 3-axis processing machine without using the scanning mechanism 500.
  • the Z-axis is often provided on the tool side and the X-axis and the Y-axis are provided on the object side in the three-axis processing machine. It becomes possible to realize on-machine measurement. Further, the multi-degree-of-freedom robot may hold and move the distance measuring head 117.
  • FIG. 6 shows an example of distance measurement results when the surface of the object 115 is a smooth inclined surface.
  • the intensity distribution of the laser 601 that irradiates the object 115 is a Gaussian distribution
  • the beam diameter at the object 115 is D.
  • the laser 601 is applied to the inclined surface 604 (inclination angle ⁇ ) of the object 115, a distance difference of D ⁇ sin ⁇ is generated in the beam irradiation region.
  • the detected distance detection waveform 602 has a Gaussian distribution shape with a foot width of D ⁇ sin ⁇ .
  • the distance detection waveform 602 obtained by convolving the distance resolution and the Gaussian distribution shown in FIG. 3 is obtained.
  • the peak point 603 of the distance detection waveform 602 becomes the center of the Gaussian distribution, and the value on the distance axis of the detected peak point 603 becomes the distance measurement value.
  • FIG. 7 shows an example of distance measurement results when the surface of the object 115 is a rough inclined surface.
  • speckle is a light interference phenomenon that occurs when irradiating coherent light such as a laser. The location where it occurs is statistically determined and occurs at random timing, with the characteristic that the reflection intensity is partially strong. Have.
  • the laser 601 strongly detects the speckle intensity 705 at the left end of the rough inclined surface 704 of the object 115.
  • the distance detection waveform 702 is detected and has a different shape from the distance detection waveform 602 of the Gaussian distribution shown in FIG.
  • the peak point 703 is the end of the width of the foot of the distance detection waveform 702 and deviates from the peak point 603 shown in FIG. 6, so that an error occurs in the distance measurement value.
  • FIG. 8 shows an example of the distance measurement result when the laser 601 scans the rough inclined surface 704 of the object 115.
  • the laser 601 irradiates the inclined surface 704 and the intensity of the reflected light due to speckles at a certain position is high, that position is detected as a peak point, and the peak point becomes the distance measurement value.
  • the laser 601 is scanned to measure the distance at the next position of the inclined surface 704. Since the laser 601 has the beam diameter D, the speckle detected earlier may be irradiated with the laser 601. , In that case, the reflected light intensity due to the speckle becomes strong again, and the point is detected again as the peak point, and the position at the peak point becomes the distance measurement value corresponding to the beam position after scanning. End up.
  • the distance measurement value of the previous time and the distance measurement value of this time should be different from each other, but a certain speckle is irradiated with the laser 601. During this period, a phenomenon occurs in which the distance measurement value does not change. Then, when the laser 601 deviates from the speckle, a peak point is detected for the next dominant speckle, and as a result, as shown in FIG. The distance measurement value of is obtained. However, since speckles are statistically generated, the distance measurement value is not always stepwise.
  • Fig. 9 shows the concept of how to deal with the error in the measured distance value due to speckle.
  • the error in the measured distance value due to the speckle occurs because the distance detection waveform is distorted depending on the position where the speckle occurs.
  • the error of the measured distance value increases as the distortion of the distance detection waveform increases. Therefore, the feature amount of the shape of the distance detection waveform is calculated, and based on the calculated feature amount, at least one of the correction process of the measured distance value and the reliability weighting process is performed.
  • FIG. 10 is a diagram for explaining the process of calculating the feature amount from the distance detection waveform.
  • a method of using the skewness as the feature amount of the distance detection waveform will be described.
  • the number of points constituting the distance detection waveform is n
  • the distance between the points is x i
  • the detection intensity is p i
  • the average distance is x a
  • the standard deviation is ⁇
  • the skewness S can be obtained by the following equation (3) (feature amount calculation equation).
  • the correction amount C can be obtained by multiplying the obtained cube root of the skewness S by the coefficient ⁇ .
  • the coefficient ⁇ may be determined based on experiments, or based on an optical simulation that models speckle generation.
  • Formula (4) is an example of a correction formula for obtaining the correction amount C, and a formula other than formula (4) may be used as the correction formula.
  • the reliability weighting amount w can be obtained by multiplying the obtained skewness S by the coefficient ⁇ .
  • the coefficient ⁇ may be determined based on an experiment, or may be determined based on an optical simulation that models speckle generation.
  • the expression (5) is an example of the reliability weighting expression, and a mathematical expression other than the expression (5) may be used as the reliability weighting expression.
  • the skewness S is calculated as the feature quantity of the distance detection waveform, but the feature quantity is not limited to the skewness S.
  • a statistical amount such as variance or kurtosis may be calculated as the feature amount.
  • waveform fitting may be used as another method of calculating the feature amount.
  • the reflection intensity at a certain position becomes strong, so that the distance detection waveform is distorted.
  • the shape of the detected waveform has a distribution in which reflected lights from a plurality of places are superposed. Therefore, by fitting using a plurality of waveforms, a waveform most similar to the distance detection waveform can be calculated.
  • FIG. 11 is a diagram for explaining a feature amount calculation method using waveform fitting.
  • two waveforms 1101 and 1102 represented by broken lines are fitted to the distance detection waveform 702 represented by a solid line, but the number of waveforms used for fitting is not limited to two, but two or more. Good.
  • the fitting parameters are the center coordinates of the waveforms 1101 and 1102, the peak value, the variance, and the phase.
  • the values of the parameters of the waveforms 1101 and 1102 are determined so as to best fit the distance detection waveform 702.
  • the determined parameter is used as a feature amount, and the correction amount or the reliability weighting amount is determined using this feature amount.
  • the coordinate x3 which is an intermediate value thereof may be used as the correction value.
  • the difference x3-x between the coordinate x3 and the coordinate x of the peak point 1103 of the distance detection waveform 702 may be used as the reliability weighting amount.
  • FIG. 12 shows an example of distance measurement results when the surface of the object 115 is a smooth curved surface.
  • the intensity of reflected light from the curved surface 1203 of the object 115 is uniform and the curved surface 1203 is irradiated with a laser 601 having a predetermined beam diameter.
  • the normal vector of the curved surface 1203 differs depending on the irradiation position of the laser 601
  • the normal vector 1201 of the curved surface on the left side of the laser 601 faces the beam irradiation direction
  • the normal vector 1202 of the curved surface on the right side of the laser 601. Has an inclination to the right with respect to the beam irradiation direction.
  • the distance detection waveform 1205 has a shape in which the Gaussian distribution is distorted, and the peak point 1206 is detected closer to the beam center position. Furthermore, when the laser 601 is scanned on the curved surface 1203 to measure the distance, a peak point is detected at each measurement position on the short distance side with respect to the beam center position. As a result, a curve (distance measurement value) 1204 having a larger radius of curvature than the actual curved surface 1203 will be measured.
  • FIG. 13 shows an example of distance measurement results when the surface of the object 115 is a rough curved surface.
  • a stepwise error due to speckle occurs as in the case shown in FIG. 7.
  • a curve (distance measurement value) 1302 having a larger radius of curvature than the actual curved surface 1301 and having a stepwise error is measured.
  • the distance error that occurs when the curved surface of the object 115 is measured is also due to the distortion of the shape of the distance detection waveform, similar to the distance error that occurs when measuring the inclined surface described above. Therefore, also for the correction or the reliability weighting for the curved surface, the parameter obtained by the correction or the reliability weighting using the skewness as the feature amount described with reference to FIG. 10 or the waveform fitting described with reference to FIG. It is possible to apply the correction or the reliability weighting with the feature amount as.
  • FIG. 14 shows an example of a first process performed by the control device 119 for coping with a distance measurement error caused by speckle.
  • the first process is to perform at least one of a correction process and a process of weighting the measurement point group with reliability as a measure against a distance measurement error caused by speckle.
  • the input information 1400 includes distance measurement information 1403, distance measurement head scanning mechanism information 1404, correction parameters 1405, and reliability weighting parameters 1406.
  • the distance measurement information 1403 is distance measurement data (distance detection waveform) measured by the distance measurement device 100 described with reference to FIG. 1, rotation angle data of the rotation mechanism 405 (FIG. 4), and the like.
  • the distance measurement data may be all the data of the FFT result with respect to the beat frequency, or when the data amount is large, the peak detected point and the data for n points before and after the point.
  • n is the number of points required to characterize the distance detection waveform, and is determined in advance by experiment or by optical simulation. n may be a fixed value or may be changeable as a parameter.
  • the correction parameter 1405 and the reliability weighting parameter 1406 are parameters necessary for performing the correction or reliability weighting described below.
  • the control device 119 acquires a distance detection waveform from the distance measurement device 100 (step S1), and then calculates a feature amount from the distance detection waveform (step S2).
  • the control device 119 performs at least one of a process of inputting and correcting the characteristic amount in the correction formula and a process of inputting the characteristic amount in the reliability weighting formula and weighting the reliability (step S3). At this time, it is possible to adjust the correction amount and the reliability weighting amount by using the correction parameter 1405 or the reliability weighting parameter 1406.
  • control device 119 causes the reliability weighted distance obtained in step S3, the scanning coordinates of the distance measuring head 117 as the distance measuring head scanning mechanism information 1404, and the rotation angle of the rotating mechanism 405 as the distance measuring information 1403. Reliability-weighted three-dimensional point group coordinates are calculated based on the data and the like (step S4). Then, the control device 119 outputs the reliability-weighted point group 1411 as the output information 1402.
  • FIG. 15 shows an example of the hardware configuration of the control device 119.
  • the control device 119 includes, for example, a general computer, and includes a CPU (Central Processing Unit) 1501, a memory 1502, and a storage device 1503.
  • the CPU 1501 executes the predetermined program loaded in the memory 1502 to execute the first process shown in FIG.
  • the memory 1502 holds the above-mentioned programs and data in the process of processing.
  • the storage device 1503 stores a feature amount calculation formula, a correction formula, a reliability weighting formula, and the like in the storage device 1503.
  • FIG. 16 shows a display example of the GUI screen 1600 displayed on the display device 120 by the first processing.
  • the GUI screen 1600 is provided with a distance measurement information display field 1601, a distance measurement head scanning mechanism information display field 1602, a correction parameter display field 1603, a reliability weighting parameter display field 1604, and a reliability weighted point group display field 1605. ing.
  • the identification information of the distance measuring head 117 is displayed in the distance measurement information display field 1601.
  • Identification information of the scanning mechanism 500 is displayed in the distance measurement head scanning mechanism information display field 1602.
  • the correction parameter display field 1603 allows the user to input and set correction parameters.
  • the reliability weighting parameter display field 1604 allows the user to input and set reliability weighting parameters.
  • the reliability weighted point group display field 1605 displays the reliability weighted point group.
  • the user can change the correction parameter or the reliability weighting parameter by looking at the reliability weighted point cloud displayed in the reliability weighted point cloud display field 1605.
  • FIG. 17 is a flowchart showing a modification of the first processing.
  • point cloud processing steps S11 and S12
  • FIG. 14 is added to the first processing (FIG. 14).
  • the noise removal parameter 1703 and the fitting parameter 1704 are input as the input information 1700 in addition to the reliability weighted point group 1411 which is the result of the first processing, and the control device 119 sets the reliability weighted Noise removal and fitting are performed on the point group 1411 (step S11).
  • the control device 119 outputs the three-dimensional shape data 1707 obtained as a result of step S11 as output information 1702 (step S12).
  • FIG. 18 illustrates a process of calculating the shape of the reliability weighted point group 1411 by noise removal and fitting in step S11.
  • step S11 points with low reliability in the reliability-weighted point group 1411 measured by the distance measuring head 117 are likely to be out of the true shape, and thus are determined to be noise and are removed. .. Then, the remaining points that have not been removed are fitted based on the reliability weighting amount.
  • fitting it is possible to use polygons to form a surface. By forming polygons according to the weight of reliability, the three-dimensional shape 1800 can be calculated accurately.
  • the polygon may be a triangle or a quadrangle, but may be a polygon having more than that.
  • FIG. 19 shows a display example of a GUI screen 1900 displayed on the display device 120 according to a modification of the first processing.
  • the GUI screen 1900 has a noise removal parameter setting field 1901, a fitting parameter setting field 1902, and a three-dimensional shape data display field 1903 added to the GUI screen 1600 (FIG. 16).
  • the user can input and set the noise removal parameter in the noise removal parameter setting field 1901.
  • the fitting parameter setting field 1902 allows the user to input and set fitting parameters.
  • the user can change the noise removal parameter or the fitting parameter by viewing the 3D shape data displayed in the 3D shape data display field 1903.
  • the distance is calculated from the interference beat frequency of the reference light and the measurement light.
  • the phase of the reference light and the measurement light is phase-adjusted due to the surface roughness. If the deviation occurs, the beat frequency may change, which may cause an error in the measurement distance. However, even if an error occurs, the continuity of the measurement points may reduce the error due to the roughness.
  • the irradiation angle and the radius of curvature of the target object 115 can be obtained from the position and orientation of the distance measuring head 117 with respect to the target object 115. Do at least one of the.
  • the irradiation angle and the radius of curvature of the object 115 are known, there is a possibility that the accuracy can be further improved and correction or reliability weighting can be performed. Further, by adding the roughness information of the surface of the object 115, it may be possible to perform the correction or the reliability weighting with higher accuracy. If the roughness information is attached to the CAD data, the information is used. If it is not attached to the CAD data, the user may input the roughness information on the GUI screen.
  • FIG. 20 is a flowchart illustrating an example of the second process performed by the control device 119.
  • the input information 2000 for the second processing is obtained by adding the object CAD information 2001, the object roughness information 2002, and the distance measurement head position/orientation information 2003 to the input information 1400 (FIG. 14).
  • the control device 119 determines the relative position between the object 115 and the distance measuring head 117 (step S21). Next, the control device 119 obtains the tilt angle, the radius of curvature, and the roughness of the object 115 with respect to the irradiation light from the object CAD information 2001 and the position/orientation information 2003 of the distance measuring head (step S22). Next, the control device 119 acquires the distance detection waveform from the distance measuring device 100 (step S23). Next, the control device 119 calculates a feature amount from the distance measurement waveform based on the tilt angle, the radius of curvature, and the roughness of the target object 115 obtained in step S22 (step S24).
  • control device 119 executes at least one of a process of inputting and correcting the characteristic amount in the correction formula and a process of inputting the characteristic amount in the reliability weighting formula and weighting the reliability (step S25).
  • control device 119 determines the reliability based on the distance measurement head scanning mechanism information 1404, the rotation angle of the rotation mechanism 405 as the distance measurement information 1403, and the reliability weighted distance obtained in step S25.
  • a weighted three-dimensional point group is calculated (step S26).
  • control device 119 outputs, as the output information 2004, the CAD information 2010 to which the information on the inclination angle, the radius of curvature, and the roughness of the object 115 with respect to the irradiation light is added, and the reliability-weighted point group 2011.
  • noise removal or fitting is performed by using the output point group 2011 with weighted reliability, and the shape is calculated with high accuracy. It can be modified as possible.
  • FIG. 21 is a diagram for explaining an example of a correction or reliability weighting method when the inclination angle of the slope of the object 115 is known in advance based on the CAD data.
  • the distance difference D ⁇ sin ⁇ can be calculated from the beam diameter D.
  • the base width 2101 of the peak of the distance detection waveform 702 can be known, and the base width 2101 of the peak can be used as the feature amount, and for example, the central position 2100 can be corrected as the peak point.
  • the difference xc ⁇ x between the coordinate xc of the peak point and the peak coordinate x of the distance detection waveform 702 may be used as the reliability weighting amount.
  • the correction method or the reliability weighting method shown in FIG. 21 is an example, and another method may be used.
  • FIG. 22 is a diagram for explaining a method for obtaining the inclination angle, the radius of curvature, and the roughness of the object 115 based on the CAD data and the relative position of the object 115 and the distance measuring head 117. is there.
  • the incident angle of the beam emitted from the distance measuring head 117 to the object 115 should be geometrically calculated by the control device 119 based on the CAD data of the object 115 and the position/orientation of the distance measuring head 117. It is possible to obtain the tilt angle and the radius of curvature of the measurement target with respect to the irradiation light.
  • the control device 119 adds the calculation results of the tilt angle, the radius of curvature, and the roughness to the object CAD information 2001.
  • FIG. 23 shows a display example of the GUI screen 2300 displayed on the display device 120 by the second processing.
  • the GUI screen 2300 is different from the GUI screen 1600 (FIG. 16) in the object CAD information display field 2301, the object roughness information display field 2302, the distance measurement head position/orientation display field 2303, and the object inclination angle.
  • a curvature radius and roughness display column 2304 is added.
  • the acquisition destination (file path) of the target CAD information is displayed.
  • the acquisition destination (file path) of the object roughness information is displayed.
  • the acquisition destination (file path) of the position/orientation information of the distance measuring head is displayed.
  • CAD data to which the tilt angle, the curvature radius, and the roughness of the target object 115 are added is displayed in the target object tilt angle, the curvature radius, and the roughness display field 2304.
  • the inclination angle, the curvature, and the roughness of the measurement area of the object 115 are obtained based on the continuity of the distance measurement data, and the accuracy is improved based on these. At least one of correction and reliability weighting is performed.
  • FIG. 24 is a flowchart illustrating an example of the third processing by the control device 119.
  • the input information 1400 for the third process is the same as the input information 1400 for the first process (FIG. 14).
  • the control device 119 acquires a distance detection waveform from the distance measurement information 1403 (step S31), and then calculates a feature amount from the distance detection waveform (step S32).
  • the control device 119 performs at least one of a process of inputting and correcting the characteristic amount in the correction formula and a process of inputting the characteristic amount in the reliability weighting formula and weighting the reliability (step S33). At this time, it is possible to adjust the correction amount and the reliability weighting amount by using the correction parameter 1405 or the reliability weighting parameter 1406.
  • control device 119 causes the scanning coordinates of the distance measuring head 117 as the distance measuring head scanning mechanism information 1404, the rotation angle data of the rotating mechanism 405 as the distance measuring information 1403, and the reliability weight obtained in step S33. Reliability-weighted three-dimensional point group coordinates are calculated based on the attached distance (step S34).
  • control device 119 calculates the tilt angle, the radius of curvature, and the roughness of the measurement target region from the continuity of the measurement point group (step S35).
  • control device 119 again calculates the feature amount from the distance detection waveform based on the information on the tilt angle, the radius of curvature, and the roughness calculated in step S35 (step S36).
  • control device 119 performs at least one of a process of inputting and correcting the feature amount in the correction formula and a process of inputting the feature amount in the reliability weighting formula and weighting the reliability (step S37). At this time, it is possible to adjust the correction amount and the reliability weighting amount by using the correction parameter 1405 or the reliability weighting parameter 1406.
  • control device 119 weights the reliability based on the scanning coordinates of the distance measuring head 117, the rotation angle data of the rotating mechanism 405 as the distance measurement information 1403, and the reliability-weighted distance obtained in step S37.
  • the calculated three-dimensional point group coordinates are calculated (step S38).
  • the control device 119 outputs the reliability-weighted point group 1411 as the output information 1402.
  • noise removal or fitting is performed by using the output point group 2011 with weighted reliability, and the shape is calculated with high accuracy. It can be modified as possible.
  • FIG. 25 is a diagram for explaining a method of accurately obtaining the step 2501 of the object 115.
  • the reflected light from the upper surface and the reflected light from the lower surface of the step 2501 are detected at the same time, so that two detection peaks are detected.
  • the edge of the step is obtained from the distance detection waveform obtained when the laser 601 is scanned.
  • the laser 601 is scanned to the right, and when the center of the laser 601 is at a step, the reflected light intensities 2502 and 2503 from the upper surface and the lower surface become equal.
  • the laser 601 is scanned rightward and the center of the laser 601 exceeds the step 2501, the reflected light intensity 2502 from the upper surface becomes weaker and the reflected light intensity 2503 from the lower surface becomes stronger.
  • the position of the step 2501 can be calculated with high accuracy.
  • the positions where the intensity ratios are equal to each other may be obtained by interpolation from the results of front and rear scanning.
  • the point where the reflected light intensity from the upper surface and the lower surface are equal does not become the step position.
  • the strength of the reflected light intensity of the upper surface is obtained from the reflected light intensity 2502 from the upper surface obtained when the entire laser 601 is in front of the step 2501, and obtained when the entire laser 601 exceeds the step 2501.
  • the intensity of the reflected light intensity of the lower surface is calculated from the reflected light intensity 2503 from the lower surface, the difference in reflectance is calculated from the ratio, and then the position of the step 2501 may be determined.
  • the height of the step 2501 is increased, a part of the reflected light from the lower surface is blocked by the step 2501, so that the amount of reflected light may be reduced.
  • the attenuation amount is geometrically determined by the incident angle of the laser 601 and the step distance. Therefore, the height of the step is calculated from the measured distance difference between the upper surface and the lower surface, and the attenuation value is calculated.
  • the position of the step 2501 may be calculated from the reflected light amount ratio of the upper surface and the lower surface in consideration.
  • the peak intensity information of the distance detection waveform may be used as the feature amount of the distance detection waveform.
  • FIG. 26 is a diagram for explaining the relationship between the speckle position and the distance detection waveform when measuring a rough surface/slope surface.
  • the irradiation beam 601 has a Gaussian distribution, and if speckle occurs at the end of the beam, the detected waveform is distorted as shown by 2701 and the detection intensity becomes weak.
  • the distortion is reduced and the detection intensity is increased as indicated by the detection waveform 2702.
  • the detected waveform is distorted again as shown by 2703 and the detected intensity is weakened. Therefore, by using the continuity of the detected waveform peak intensity, points with high reliability are extracted.
  • FIG. 27 shows the concept of extracting highly reliable points by using the continuity of the detected waveform peak intensities.
  • the distance measurement result obtained by scanning the beam on the rough surface / inclined surface is stepwise.
  • the staircase period depends on the beam spot size.
  • the detected waveform peak intensities obtained at this time are plotted, it has a distribution corresponding to the period of the stairs.
  • the speckle is at the edge of the beam, the intensity becomes weak, when the spec is located at the beam center, the intensity becomes a maximum value, and when the speckle deviates from the beam center, the intensity becomes weak. Therefore, by extracting the point where the intensity has the maximum value, it is possible to reduce the measurement error and obtain the actual shape with high accuracy.
  • the peak may be accurately obtained by Gaussian fitting.
  • the reliability may be weighted using intensity information.
  • the intensity maximum value and the intensity minimum value are obtained from the continuity of the peak intensity, the weight of the point corresponding to the maximum value is set to be the highest, and the weight of the point corresponding to the minimum value is set to the highest.
  • the weight is lightened, and the points in between are weighted between the maximum value and the minimum value by interpolation based on the peak intensity.
  • interpolation for example, linear interpolation is used.
  • the weighted point group can perform noise removal or fitting by using the output reliability weighted point group to calculate the shape with high accuracy, as in the modified example of the first processing (FIG. 17). it can.
  • the error can be further reduced. It is possible.
  • the feature amount of the distance detection waveform is detected using skewness, kurtosis, and fitting, but it may be detected using the center of gravity.
  • FIG. 28 is a diagram for explaining an optical disconnection method that can replace the FMCW method.
  • the object 115 is irradiated with the linear beam 2601 from the light source 2600.
  • a light-section line 2604 along the shape of the target object 115 is formed in the obtained image.
  • the shape of the object 115 can be calculated from the light section line 2604.
  • the intensity profile of the line-shaped beam 2601 has a Gaussian distribution 2605, and normally, the intensity of the light cutting line 2604 also has a Gaussian distribution.
  • the distance detection waveform 2606 is distorted, and the peak point may be erroneously detected, causing an error in the measured distance.
  • the shape of the target object 115 is accurately calculated. It becomes possible to do.
  • the present invention is not limited to the examples of the above-described embodiments, and various modifications are included.
  • the above-described example of the embodiment is described in detail for making the present invention easy to understand, and the present invention is not limited to one including all the configurations described herein.
  • a part of the configuration of the example of each embodiment may be added, deleted, or replaced with another configuration.
  • control lines and information lines in the figure show those which are considered necessary for explanation, and not all of them are shown. It may be considered that almost all configurations are connected to each other.
  • the configuration of the above distance measurement system can be classified into more components according to the processing content. Also, one component can be classified so as to perform more processing.
  • Shape measuring system 100... Distance measuring device, 101... Laser light source, 102... Oscillator, 103... Optical fiber coupler, 104... Optical fiber coupler, 105... Optical Fiber, 106... Optical fiber coupler, 107... Optical receiver, 108... Circulator, 109... Optical receiver, 111... Optical fiber coupler, 112... Reference mirror, 113... Optical Fiber collimator, 114... Beam scanning mechanism, 115... Object, 116... Distance measurement control unit, 117... Distance measurement head, 118... Connection cable, 119... Control device, 120 ... Display device, 201... Reference light, 202... Measurement signal, 301... Distance detection waveform, 405...
  • Input information 1402... Output information, 1403... Distance measurement information, 1404...
  • Distance measurement head scanning mechanism information 1405... Correction parameter 1406... Reliability weighting parameter, 1411... Reliability weighted point group, 1501... CPU, 1502... Memory, 1503... Storage device, 1600... GUI screen, 1601... Distance measurement information display field, 1602... Distance measurement head scanning mechanism information display field, 1603... Correction parameter display field, 1604... Reliability weighting parameter display field, 1605... Reliability weighted point cloud Display column, 1700... Input information, 1702... Output information, 1703... Noise removal parameter, 1704... Fitting parameter, 1900... GUI screen, 1901... Noise removal parameter setting column, 1902 ... Fitting parameter setting field, 2000...
  • Input information 200 1... Target CAD information, 2002... Target roughness information, 2003... Distance measuring head position/posture information, 2004... Output information, 2010... CAD information, 2011... Reliability Degree-weighted point group, 2100... central position, 2101... foot width, 2300... GUI screen, 2301... object CAD information display column, 2302... object roughness information display column, 2303... Distance measurement head position/posture display field, 2304... Roughness display field, 2501... Step, 2502... Reflected light intensity, 2503... Reflected light intensity, 2600... Light source , 2601... Line beam, 2603... Camera, 2604... Light section line, 2605... Gaussian distribution, 2606... Distance detection waveform, c... Distance resolution

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

対象物の形状を高精度で計測する。 形状計測システムは、光を対象物に照射し、前記対象物からの反射光を受光する距離計測ヘッドと、前記反射光に基づいて距離検出波形を生成する距離計測装置と、前記距離検出波形を解析して前記対象物までの計測距離値を算出する制御装置と、を備え、前記制御装置は、前記距離検出波形の特徴量を算出し、補正式に前記特徴量を入力して前記計測距離値の誤差を補正する処理、及び信頼度重み付け式に前記特徴量を入力して前記計測距離値の誤差の信頼度重み付けを行う処理の少なくとも一方を行うことを特徴とする。

Description

形状計測システム、及び形状計測方法
 本発明は、形状計測システム、及び形状計測方法に関する。本発明は2019年2月18日に出願された日本国特許の出願番号2019-026172の優先権を主張し、文献の参照による織り込みが認められる指定国については、その出願に記載された内容は参照により本出願に織り込まれる。
 光を用いて非接触で対象物の形状を計測する従来手法では、計測装置と対象物との位置関係や計測環境に起因するノイズによって計測精度が劣化してしまうことがある。
 この対策として、例えば特許文献1には、同一箇所を複数回計測し、計測再現性が高い箇所は信頼度が高いと重み付けし、計測再現性が低い箇所は信頼度が低いと重み付けし、計測データに対して信頼度重み付けに基づき補正を行うことにより計測データの精度を高める技術が開示されている。
特開2018-31604号公報
 粗い面に対してレーザ光を照射した場合、スペックルが生じる。スペックルはレーザ光等のコヒーレント光を照射した場合に生じる光の干渉現象であり、統計的に求めることができる箇所において、ランダムなタイミングで発生する特徴を有する。上述したように、スペックルの発生はランダムであるが、その反射強度は強い場合が多く、繰り返し再現性は高い場合が多い。そして、粗面が傾斜している場合、レーザ光のビーム径と傾斜角度に依存した計測誤差が生じる。計測誤差は繰り返し再現性が高い場合が多いため、特許文献1に記載の技術のように、計測再現性に基づいて重み付けしたとしても計測データの精度を高めることが困難である。
 本発明は、このような状況に鑑みてなされたものであり、対象物の形状を高精度で計測できるようにすることを目的とする。
 本願は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下の通りである。
 上記課題を解決するため、本発明の一態様に係る形状計測システムは、光を対象物に照射し、前記対象物からの反射光を受光する距離計測ヘッドと、前記反射光に基づいて距離検出波形を生成する距離計測装置と、前記距離検出波形を解析して前記対象物までの計測距離値を算出する制御装置と、を備え、前記制御装置は、前記距離検出波形の特徴量を算出し、補正式に前記特徴量を入力して前記計測距離値の誤差を補正する処理、及び信頼度重み付け式に前記特徴量を入力して前記計測距離値の誤差の信頼度重み付けを行う処理の少なくとも一方を行うことを特徴とする。
 本発明の一態様によれば、対象物の形状を高精度で計測することが可能となる。
 上記した以外の課題、構成、及び効果は、以下の実施形態の説明により明らかにされる。
図1は、本発明の一実施形態に係る形状計測システムの構成例を示す図である。 図2は、FMCW(Frequency Modulated Continuous Wave)方式の原理を説明するための図である。 図3は、FMCW方式の距離検出波形の一例を示す図である。 図4は、距離計測ヘッドの構成例を示す図である。 図5は、走査機構の構成例を示す図である。 図6は、滑らかな傾斜面に対する距離計測結果の一例を示す図である。 図7は、粗い傾斜面に対する距離計測結果の一例を示す図である。 図8は、粗い傾斜面にビームを走査して計測した場合に得られる距離計測結果の一例を示す図である。 図9は、スペックル起因の計測距離値の誤差への対処方法を説明するための図である1。 図10は、距離検出波形から統計量に基づいて特徴量を算出する方法の一例を説明するための図である。 図11は、波形フィッティングにより特徴量を算出する方法の一例を説明するための図である。 図12は、滑らかな曲面に対する距離計測結果の一例を示す図である。 図13は、粗い曲面に対する距離計測結果の一例を示す図である。 図14は、制御装置による第1の処理の一例を説明するフローチャートである。 図15は、距離計測装置のハードウェアの構成例を示す図である。 図16は、第1の処理に対応するGUI(Graphical User Interface)画面の表示例を示す図である。 図17は、第1の処理の変形例を説明するフローチャートである。 図18は、図17のステップS11を説明するための図である。 図19は、図17の変形例に対応するGUI画面の表示例を示す図である。 図20は、制御装置による第2の処理の一例を説明するフローチャートである。 図21は、対象物の傾斜角度が分かっている場合に距離検出波形から特徴量を算出する方法の一例を説明するための図である。 図22は、CADデータに基づいて対象物の傾斜角度、曲率、及び粗さを求める方法の一例を説明するための図である。 図23は、第2の処理に対応するGUI画面の表示例を示す図である。 図24は、制御装置による第3の処理を説明するためのフローチャートである。 図25は、段差位置を算出する方法の一例を説明するための図である。 図26は、粗面・傾斜面測定時のスペックル位置と距離検出波形との関係を説明するための図である。 図27は、検出波形ピーク強度の連続性を用いて信頼度の高い点を抽出する概念を示す図である。 図28は、FMCW方式に代えることができる光切断方式について説明するための図である。
 以下、本発明の一実施の形態を図面に基づいて説明する。なお、本実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。また、以下の実施の形態において、その構成要素(要素ステップ等も含む)は、特に明示した場合及び原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。また、「Aからなる」、「Aより成る」、「Aを有する」、「Aを含む」と言うときは、特にその要素のみである旨明示した場合等を除き、それ以外の要素を排除するものでないことは言うまでもない。同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合及び原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似又は類似するもの等を含むものとする。
 <本発明の一実施の形態に係る形状計測システム1の構成例>
 図1は、本発明の一実施の形態に係る形状計測システム1の構成例を示している。該形状計測システム1は、距離計測方式としてFMCW(Frequency Modulated Continuous Wave)方式を採用する。形状計測システム1は、距離計測装置100、距離計測ヘッド117、制御装置119、表示装置120、及び走査機構500(図5)を備える。
 距離計測装置100において、距離計測制御部116は、発振器102に対して掃引波形信号を送信する。発振器102は、レーザ光源101に対して三角波電流を注入し、駆動電流を変調する。これにより、レーザ光源101は、一定の変調速度で時間的に周波数掃引されたFM(Frequency Modulated)光を発生する。
 なお、レーザ光源101を外部共振器付き半導体レーザ装置によって構成し、レーザ光源101の共振波長を発振器102からの三角波状の制御信号により変化させてもよい。この場合、レーザ光源101からは時間的に周波数掃引されたFM光が発生する。
 レーザ光源101が発生したFM光(以下、単に光と称する)は、光ファイバカプラ103に導光される。光ファイバカプラ103は、導光された光を2分割する。なお、光ファイバカプラ103,104,106,111は、ビームスプリッタであってもよい。
 光ファイバカプラ103によって2分割された光の一方は参照光学系の光ファイバカプラ104に導光される。光ファイバカプラ104は、さらに光を2分割する。光ファイバカプラ104にて2分割された光の一方は、光ファイバ105にて一定の光路差を設けた後、光ファイバカプラ106にて、光ファイバカプラ104にて2分割された光の他方と合波されて受光器107に導光される。受光器107は、マッハツェンダ干渉計からなる。受光器107は、合波された光の光路差に比例した一定の参照ビート信号を検出し、距離計測制御部116に出力する。
 光ファイバカプラ103よって2分割された光の他方はサーキュレータ108を通過し、光ファイバカプラ111によって分岐される。光ファイバカプラ111によって分岐された光の一方は参照ミラー112に反射して参照光となる。光ファイバカプラ111によって分岐された光の一方は、計測光として接続ケーブル118を通過して距離計測ヘッド117に導光され、光ファイバコリメータ113によって空間に出射し、ビーム走査機構114によってビーム走査され、対象物115に照射される。
 対象物115で反射した反射光は、再びビーム走査機構114、及び光ファイバコリメータ113を通過し、参照ミラー112に反射された参照光と光ファイバカプラ111にて合波され、サーキュレータ108により受光器109に導光される。
 受光器109は、受光器107と同様、マッハツェンダ干渉計からなる。受光器109は、参照光と反射光との干渉によって発生する計測ビート信号を検出し、距離計測制御部116に出力する。
 距離計測制御部116は、受光器107からの参照ビート信号をサンプリングクロックとして、受光器109からの計測ビート信号をA/D変換する。
 または、距離計測制御部116は、参照ビート信号と計測ビート信号とを一定のサンプリングクロックでサンプリングする。すなわち、参照ビート信号は、ヒルベルト変換を行うことにより、90度位相のずれた信号を作り出すことができ、ヒルベルト変換の前後の参照信号から、信号の局所位相を求めることが可能であるため、この位相を補間することで、参照信号が一定の位相となるタイミングを求めることができる。このタイミングに合わせて、計測ビート信号を補間サンプリングすることで、参照信号を基準として計測信号をリサンプリングすることが可能となる。
 または、距離計測制御部116は、内蔵するAD/DA変換機により参照ビート信号をサンプリングクロックとして計測信号をサンプリングしてA/D変換しても、同様の効果を奏する。
 さらに、距離計測制御部116は、距離計測方式にFMCW方式を用いてビート信号を解析し、その結果得られる距離計測データを制御装置119に送信する。
 なお、図1に示された構成例において、距離計測ヘッド117の内部に距離計測装置100、及び制御装置119が含まれてもよい。また、距離計測装置100の内部に制御装置119が含まれてもよい。
 次に、距離計測制御部116における、FMCW方式を用いてビート信号を解析して距離計測データを算出する方法について、図2及び図3を参照して説明する。
 図2は、FMCW方式の原理を説明するための図である。受光器109に対する参照光201と計測信号202とそれぞれの到達時間には時間差Δtがあるが、この間にレーザ光源101からのFM光の周波数は変化している。よって、受光器109では、この周波数差に等しいビート周波数fbのビート信号が検出される。周波数掃引幅をΔνとし、Δνだけ変調するのに要する時間をTとすると、次式(1)の関係がある。
Figure JPOXMLDOC01-appb-M000001
 対象物115までの距離Lは、時間差Δtの間に光が進む距離の半分である。よって、距離Lは、大気中の光速度cを用い、次式(2)によって算出できる。
Figure JPOXMLDOC01-appb-M000002
 距離Lとビート周波数fbは線形な関係にある。よって受光器109で得られた計測信号にFFT(First Fourier Transform:高速フーリエ変換)を行い、ピーク位置と大きさを求めれば、対象物115の反射位置と反射光量を求めることができる。
 次に、図3は、反射強度プロファイルから対象物115の表面における反射位置を求める方法を説明するための図であり、FMCW方式の距離検出波形の一例を示している。同図において、横軸はFFTの周波数軸、縦軸は反射強度である。
 同図に示すように、距離検出波形301のピーク点付近は離散的なデータとなる。ここでピーク幅wは、距離分解能c/2Δνによって計算される。具体的には、ピーク点付近の3点以上のデータを用いて、2次関数またはガウス関数といった関数を当てはめ、当てはめられた関数のピークを用いると、距離分解能以上の精度で計測対象の位置を求めることが可能となる。
 なお、ビート周波数の解析の一例としてFFTを挙げたが、ビート周波数の解析には例えば最大エントロピー法を用いてもよい。この場合、FFTよりも高分解能にピーク位置を検出することができる。
 また、距離計測制御部116は、距離計測方式にFMCW方式を用いるようにしたが、OCT(Optical Coherence Tomography)、TOF(Time OF Flight)のような他の光の伝搬時間の計測方式を採用してもよい。
 次に、図4は、距離計測ヘッド117の構成例を示している。距離計測ヘッド117は、距離計測装置100から接続ケーブル118を介して供給される計測光を光ファイバコリメータ113によって空間に出射し、出射した光をビーム走査機構114に相当する光路切り替え素子407によって偏向して、対象物115に照射する。
 光路切り替え素子407は、プローブ先端部406によって保持されており、プローブ先端部406は回転機構405に保持されており、回転機構405が回転することで、光路切り替え素子407が回転し、対象物115の断面形状を計測することが可能となる。対象物115の断面形状を計測するためには距離計測データと回転モータの回転角度の情報が用いられる。
 なお、図4に示された構成例は一例であって、ビーム走査機構114として、ガルバノミラーを用いてビームを走査してもよい。ガルバノミラーを1つ用いた場合、測定光を1次元的に走査することが可能であり、2つ用いた場合、測定光を2元的に走査することができる。またビーム走査機構114として、MEMSミラーやポリゴンミラー等のように光を偏向し、走査可能な他の機構を用いて走査してもよい。
 なお、距離計測装置100の距離計測制御部116には、距離計測ヘッド117から、プローブ先端部406の長さ、ビームの偏向角度、ビーム走査角度等の情報が入力される。これらの情報は距離計測制御部116にて対象物115の3次元形状点群を生成する際に用いられる。
 次に、図5は、距離計測ヘッド117を3次元に走査するための走査機構500の構成例を示している。走査機構500は、距離計測ヘッド117をガントリーステージで移動させて対象物115の形状を計測するためのものである。
 門型の走査機構500は、Y軸方向に移動するY軸移動機構501の上に、X軸方向に移動するX軸移動機構502が搭載されており、さらにX軸移動機構502にZ軸方向に移動するZ軸移動機構503が搭載されている。これにより、走査機構500は、距離計測ヘッド117を対象物115の周囲で3次元的に移動させることができる。
 なお、Y軸移動機構501、X軸移動機構502、及びZ軸移動機構503は、制御装置119からの制御に従って駆動し、距離計測ヘッド117を3次元に走査する。
 同図に示されるように、走査機構500により距離計測ヘッド117を走査することにより、高機能な非接触形状計測を実現することが可能となる。なお、対象物115が小さく、Z軸方向に対する移動のみで形状が計測できる場合は、対象物115の位置が一意に定まるように冶具で位置決めし、Z軸移動機構503のみを移動させて、計測してもよい。
 なお、走査機構500を用いずに、一般的な3軸加工機を用いて距離計測ヘッド117を走査させてもよい。その場合、3軸加工機では、Z軸は工具側、X軸及びY軸は対象物側に設けることが多いので、工具の代わりに距離計測ヘッド117を把持させることで、3軸加工機によるオンマシン計測を実現することが可能となる。また、多自由度ロボットに距離計測ヘッド117を把持、移動させるようにしてもよい。
 <対象物115の表面が傾斜面である場合の距離計測結果について>
 次に、対象物115の表面が傾斜面である場合の距離計測結果について、図6~図8を参照して説明する。
 図6は、対象物115の表面が滑らかな傾斜面である場合の距離計測結果の一例を示している。同図に示されるように、対象物115に照射するレーザ601の強度分布はガウシアン分布であり、対象物115におけるビーム径をDとする。ここでレーザ601が対象物115の傾斜面604(傾斜角度θ)に照射された場合、ビーム照射領域ではD・sinθの距離差が生じる。傾斜面604からの反射光強度が均一な場合、検出される距離検出波形602は、麓幅がD・sinθとなるガウシアン分布をした形状となる。FMCW方式に基づく距離計測の場合、図3に示された、距離分解能とガウシアン分布との畳み込みをした距離検出波形602が得られる。距離検出波形602のピーク点603は、ガウシアン分布の中心となり、検出されたピーク点603の距離軸の値が距離計測値となる。
 図7は、対象物115の表面が粗い傾斜面である場合の距離計測結果の一例を示している。粗い傾斜面704に対してレーザ601を照射した場合、スペックルが生じる。スペックルはレーザ等のようなコヒーレント光を照射した場合に生じる光の干渉現象であり、その発生箇所は統計的に求められ、ランダムなタイミングで発生し、部分的に反射強度が強くなる特徴を有する。
 例えば同図に示されるように、レーザ601が対象物115の粗い傾斜面704の左端でスペックル強度705が強く検出されたとする。この場合、距離検出波形702が検出されて、図6に示されたガウシアン分布の距離検出波形602とは異なる形状となる。この場合、ピーク点703は距離検出波形702の麓幅の端であって、図6に示されたピーク点603とずれるため、距離計測値に誤差を生じることになる。
 図8は、対象物115の粗い傾斜面704に対してレーザ601を走査した場合の距離計測結果の一例を示している。レーザ601が傾斜面704を照射している場合、ある位置のスペックル起因の反射光強度が強いときには、その位置をピーク点として検出するため、そのピーク点が距離計測値となる。次に、レーザ601を走査して、傾斜面704の次の位置の距離を計測するが、レーザ601はビーム径Dを有するので、先ほど検出されたスペックルにレーザ601が照射されることがあり、その場合、再び、そのスペックル起因の反射光強度が強くなり、その点をピーク点として再び検出してしまい、ピーク点での位置が走査後のビーム位置に対応する距離計測値になってしまう。
 いまの場合、傾斜面を走査して距離を計測しているので、本来であれば前回と今回の距離計測値は異なる値であるはずだが、あるスペックルに対してレーザ601が照射されている間は、距離計測値が変化しない現象が生じる。そして、そのスペックルからレーザ601が外れると、次に支配的なスペックルに対してピーク点が検出されるため、結果として、図8に示されたように、段差幅D・sinθの階段状の距離計測値が得られることになる。ただし、スペックルは統計的に発生するため、距離計測値は必ずしも階段状になるとは限らない。
 <スペックル起因の計測距離値の誤差への対処方法>
 次に、対象物115の粗い傾斜面にて発生し得るスペックル起因の計測距離値の誤差への対処方法について説明する。本実施形態では、該対処方法としては、測定距離値の補正処理、及び信頼性重み付け処理の少なくとも一方を行う。
 図9は、スペックル起因の計測距離値の誤差への対処方法の概念を示している。図7を参照して上述したように、スペックル起因の計測距離値の誤差は、スペックルの発生位置によって、距離検出波形が歪むために発生する。計測距離値の誤差は距離検出波形の歪みが大きいほど大きくなる。そこで、距離検出波形の形状の特徴量を算出し、算出した特徴量に基づき、測定距離値の補正処理及び信頼度重み付け処理の少なくとも一方を行う。
 図10は、距離検出波形から特徴量を算出する処理を説明するための図である。以下、距離検出波形の特徴量として、例えば、歪度を用いる方法について説明する。同図に示されるように、距離検出波形を構成する点の数をn個、各点間の距離をx、検出強度をp、平均距離をx、標準偏差をσとした場合、歪度Sは次式(3)(特徴量算出式)によって求めることができる。
Figure JPOXMLDOC01-appb-M000003
 さらに、次式(4)(補正式)に示すように、求めた歪度Sの三乗根に対して係数αを乗算すれば、補正量Cを求めることができる。
Figure JPOXMLDOC01-appb-M000004
 係数αは、実験に基づいて決めてもよいし、スペックル発生をモデル化した光学シミュレーションに基づいて決めてもよい。なお、式(4)は、補正量Cを求めるための補正式の一例であり、補正式は式(4)以外の数式を用いてもよい。
 また、次式(5)(信頼度重み付け式)に示すように、求めた歪度Sに対して係数βを掛けることで、信頼度重み付け量wを求めることができる。
Figure JPOXMLDOC01-appb-M000005
 係数βは、実験に基づいて決めてもよいし、スペックル発生をモデル化した光学シミュレーションに基づいて決めてもよい。なお、式(5)は、信頼度重み付け式の一例であり、信頼度重み付け式は式(5)以外の数式を用いてもよい。
 なお、式(3)では、距離検出波形の特徴量として歪度Sを算出したが、特徴量は歪度Sに限られない。例えば、分散、尖度等の統計量を特徴量として算出してもよい。
 また、他の特徴量の算出方法として、波形フィッティングを用いてもよい。図7を参照して説明したように、スペックルによっては、ある位置での反射強度が強くなるため、距離検出波形に歪みが生じる。その検出波形の形状は、複数個所からの反射光を重ね合わせた分布となる。そこで、複数個の波形を用いてフィッティングすることで、距離検出波形に最も類似した波形を算出することができる。
 次に、図11は、波形フィッティングを用いた特徴量算出方法について説明するための図である。同図の場合、実線で表す距離検出波形702に対して、破線で表す2本の波形1101,1102をフィッティングしているが、フィッティングに用いる波形は2本に限らず、2本以上であってもよい。
 フィッティングパラメータは、波形1101,1102の中心座標、ピーク値、分散、及び位相である。フィッティングにおいては、距離検出波形702に最も当てはまるように、波形1101,1102の各パラメータの値を決定する。決定したパラメータを特徴量とし、この特徴量を用いて補正量又は信頼度重み付け量を決定する。
 例えば、波形1101の中心座標としてx1、波形1102の中心座標としてx2が決定した場合、その中間値である座標x3を補正値として用いてもよい。又は、座標x3と距離検出波形702のピーク点1103の座標xとの差分x3-xを信頼性重み付け量として用いてもよい。
 なお、図11を参照して説明した波形フィッティングの方法と、それを利用した補正方法及び信頼度重み付け方法は一例であって、他の方法を用いてもよい。
 <対象物115の表面が曲面である場合の距離計測結果について>
 次に、対象物115の表面が曲面である場合の距離計測結果について、図12及び図13を参照して説明する。
 図12は、対象物115の表面が滑らかな曲面である場合の距離計測結果の一例を示している。同図において対象物115の曲面1203からの反射光強度は均一であり、所定のビーム径を有するレーザ601が曲面1203に照射された場合を考える。この場合、レーザ601の照射位置によって、曲面1203の法線方向ベクトルが異なるので、レーザ601の左側における曲面の法線ベクトル1201はビーム照射方向を向き、レーザ601の右側における曲面の法線ベクトル1202はビーム照射方向に対して右側に傾きを持つ。
 この場合、ビーム照射方に向かう法線ベクトル1201の方向に反射する反射光の方が、法線ベクトル1202の方向に反射する反射光よりも反射光強度に比べて強くなる。よって、距離検出波形1205は、ガウシアン分布に歪みが生じた形状となり、ビーム中心位置に対してより近距離側にピーク点1206が検出される。さらに、この曲面1203に対してレーザ601を走査して距離計測を行った場合、各計測位置においてビーム中心位置に対して近距離側にピーク点が検出される。この結果、実際の曲面1203よりも曲率半径が大きい曲線(距離計測値)1204が計測されてしまうことになる。
 図13は、対象物115の表面が粗い曲面である場合の距離計測結果の一例を示している。同図に示されるように、粗い曲面1301に対してレーザ601を照射した場合、図7に示された場合と同様、スペックル起因の階段状の誤差が生じる。この結果、実際の曲面1301よりも曲率半径が大きく、かつ、階段状の誤差が発生した曲線(距離計測値)1302が計測されてしまうことになる。
 対象物115の曲面を計測した場合に生じる距離誤差についても、上述した傾斜面を計測した場合に生じる距離誤差と同様、距離検出波形の形状の歪みが原因である。そこで、曲面に対する補正又は信頼性重み付けに対しても、図10を参照して説明した歪度を特徴量として用いた補正又は信頼性重み付けや、図11を参照して説明した波形フィッティングによって求まるパラメータを特徴量とする補正又は信頼性重み付けを適用することが可能である。
 <制御装置119による第1の処理>
 次に、図14は、スペックル起因の距離計測誤差に対処するための制御装置119による第1の処理の一例を示している。該第1の処理は、スペックル起因の距離計測誤差への対処として、補正処理、及び計測点群に対して信頼度重み付けをする処理の少なくとも一方を行うものである。
 はじめに、第1の処理に対する入力情報1400について説明する。入力情報1400には、距離計測情報1403、距離計測ヘッド走査機構情報1404、補正パラメータ1405、及び信頼度重み付けパラメータ1406を含む。
 距離計測情報1403は、図1を参照して説明した距離計測装置100によって計測された距離計測データ(距離検出波形)や回転機構405(図4)の回転角度データ等である。
 距離計測データは、ビート周波数に対するFFT結果の全データでもよいし、データ量が多い場合はピーク検出された点とその前後のn点分のデータであってもよい。ここで、nは距離検出波形を特徴付けるために必要な点数であって、事前に実験にて決定するか、光学シミュレーションによって決定する。nは固定値としてもよいし、パラメータとして変更できるようにしてもよい。
 距離計測ヘッド走査機構情報1404では、距離計測ヘッド117の走査機構500(図5)の3軸の走査座標である。
 補正パラメータ1405及び信頼度重み付けパラメータ1406は、以下に説明する補正又は信頼度重み付けを行う際に必要なパラメータである。
 第1の処理では、はじめに、制御装置119が、距離計測装置100から距離検出波形を取得し(ステップS1)、次に、距離検出波形から特徴量を算出する(ステップS2)。次に、制御装置119が、補正式に特徴量を入力して補正する処理、及び信頼度重み付け式に特徴量を入力して信頼度重み付けを行う処理の少なくとも一方を行う(ステップS3)。このときに補正パラメータ1405又は信頼度重み付けパラメータ1406を用いて、補正量や信頼度重み付け量を調整することが可能である。次に、制御装置119が、ステップS3で求めた信頼度重み付き距離と、距離計測ヘッド走査機構情報1404としての距離計測ヘッド117の走査座標と、距離計測情報1403としての回転機構405の回転角度データ等とに基づいて、信頼度重み付けされた3次元点群座標を算出する(ステップS4)。そして、制御装置119が、出力情報1402として、信頼度重み付き点群1411を出力する。
 次に、図15は、制御装置119のハードウェアの構成例を示している。制御装置119は、例えば、一般的なコンピュータからなり、CPU(Central Processing Unit)1501、メモリ1502、及び記憶デバイス1503を備える。CPU1501は、メモリ1502にロードされた所定のプログラムを実行することにより、図14に示された第1の処理等を実行する。メモリ1502は、上述したプログラムや処理途中のデータを保持する。記憶デバイス1503は、記憶デバイス1503には特徴量算出式、補正式、信頼度重み付け式等を保存する。
 次に、図16は、第1の処理によって表示装置120に表示されるGUI画面1600の表示例を示している。
 GUI画面1600には、距離計測情報表示欄1601、距離計測ヘッド走査機構情報表示欄1602、補正パラメータ表示欄1603、信頼度重み付けパラメータ表示欄1604、及び信頼度重み付き点群表示欄1605が設けられている。
 距離計測情報表示欄1601には、距離計測ヘッド117の識別情報が表示される。距離計測ヘッド走査機構情報表示欄1602には、走査機構500の識別情報が表示される。補正パラメータ表示欄1603には、ユーザが補正パラメータを入力、設定することができる。信頼度重み付けパラメータ表示欄1604には、ユーザが信頼度重み付けパラメータを入力、設定することができる。信頼度重み付き点群表示欄1605には、信頼度重み付き点群が表示される。
 例えばユーザは、信頼度重み付き点群表示欄1605に表示された信頼度重み付き点群を見て、補正パラメータや信頼度重み付けパラメータを変更することが可能である。
 <第1の処理の変形例>
 次に、図17は、第1の処理の変形例を示すフローチャートである。該変形例は、第1の処理(図14)に対して点群処理(ステップS11,S12)を追加したものである。
 点群処理では、第1の処理の結果である信頼度重み付き点群1411の他、入力情報1700として、ノイズ除去パラメータ1703、及びフィッティングパラメータ1704が入力され、制御装置119が、信頼度重み付き点群1411に対してノイズ除去、及びフィッティングを行う(ステップS11)。次に、制御装置119が、ステップS11の結果得られる3次元形状データ1707を出力情報1702として出力する(ステップS12)。
 図18は、ステップS11における、信頼性重み付き点群1411に対して、ノイズ除去及びフィッティングによって形状を算出する処理について説明する。
 ステップS11では、距離計測ヘッド117によって計測された信頼度重み付き点群1411のうち、信頼度が低い点については、真の形状から外れている可能性が高いため、ノイズと判断して除去する。そして、除去せずに残った点群に対して、信頼度重み付け量に基づきフィッティングを行う。フィッティングの一例として、ポリゴンを用いて面を形成する場合が考えられる。信頼度の重みに応じてポリゴンを形成することで、精度良く3次元形状1800を算出することが可能となる。ポリゴンとしては三角形や四角形が考えられるが、それ以上の多角形であってもよい。
 次に、図19は、第1の処理の変形例によって表示装置120に表示されるGUI画面1900の表示例を示している。GUI画面1900は、GUI画面1600(図16)に対して、ノイズ除去パラメータ設定欄1901、フィッティングパラメータ設定欄1902、及び3次元形状データ表示欄1903を追加したものである。
 ノイズ除去パラメータ設定欄1901には、ユーザがノイズ除去パラメータを入力、設定することができる。フィッティングパラメータ設定欄1902には、ユーザがフィッティングパラメータを入力、設定することができる。
 例えば、ユーザは3次元形状データ表示欄1903に表示された3次元形状データを見て、ノイズ除去パラメータやフィッティングパラメータを変更することが可能である。
 以上の説明では、対象物115の傾斜面や曲面が粗い場合に生じ得る計測距離の誤差について説明した。しかしながら、FMCW方式においては、対象物115の表面が傾斜面や曲面でなくても粗い場合には計測距離の誤差が発生し得る。
 FMCW方式は、参照光と計測光との干渉ビート周波数から距離を算出するが、光の干渉を用いているため、面の粗さの影響で参照光と計測光との光の波長オーダで位相がずれるとビート周波数がずれてしまい計測距離に誤差を生じる可能性がある。ただし、誤差が生じた場合でも計測点の連続性から粗さ起因の誤差を低減できる可能性がある。
 <制御装置119による第2の処理>
 次に、対象物115のCAD(Computer Aided Design)データを制御装置119が取得できる場合に実行可能な第2の処理について説明する。
 対象物115のCADデータが取得できる場合、対象物115に対する距離計測ヘッド117の位置と姿勢から、対象物115の照射角度や曲率半径が求まるので、それを特徴量に用いて補正及び信頼度重み付けの少なくとも一方を行う。
 対象物115の照射角度や曲率半径が分かれば、さらに精度を高めて補正又は信頼度重み付けを行うことができる可能性がある。また、対象物115の表面の粗さ情報も追加することで、さらに精度よく補正又は信頼度重み付けを行うことができる可能性がある。粗さ情報は、CADデータに付属している場合は、その情報を用い、CADデータに付属していない場合は、GUI画面にてユーザが粗さ情報を入力すればよい。
 図20は、制御装置119による第2の処理の一例を説明するフローチャートである。第2の処理に対する入力情報2000は、入力情報1400(図14)に対象物CAD情報2001、対象物粗さ情報2002、及び距離計測ヘッド位置/姿勢情報2003を追加したものである。
 第2の処理では、はじめに、制御装置119が、対象物115と距離計測ヘッド117との相対位置を決定する(ステップS21)。次に、制御装置119が、対象物CAD情報2001と距離計測ヘッドの位置/姿勢情報2003から照射光に対する対象物115の傾斜角度、曲率半径、及び粗さを求める(ステップS22)。次に、制御装置119が、距離計測装置100から距離検出波形を取得する(ステップS23)。次に、制御装置119が、ステップS22で求めた対象物115の傾斜角度、曲率半径、及び粗さに基づき距離計測波形から特徴量を算出する(ステップS24)。
 次に、制御装置119が、補正式に特徴量を入力して補正する処理、及び信頼度重み付け式に特徴量を入力して信頼度重み付けを行う処理の少なくとも一方を実行する(ステップS25)。次に、制御装置119が、距離計測ヘッド走査機構情報1404と、距離計測情報1403としての回転機構405の回転角度等と、ステップS25で求めた信頼度重み付き距離とに基づいて、信頼度が重み付けされた3次元点群を算出する(ステップS26)。そして、制御装置119が、出力情報2004として、照射光に対する対象物115の傾斜角度、曲率半径、及び粗さの情報を付加したCAD情報2010と、信頼度重み付き点群2011を出力する。
 なお、第2の処理については、第1の処理の変形例(図17)と同様、出力された信頼度重み付き点群2011を利用してノイズ除去やフィッティングを行い、高精度に形状を算出できるように変形することができる。
 次に、図21は、CADデータに基づき対象物115の斜面の傾斜角度が事前に分かっている場合の補正又は信頼度重み付け方法の一例を説明するための図である。
 事前に傾斜角度θが分かっている場合、ビーム径Dから距離差D・sinθを算出できる。この場合、距離検出波形702のピークの麓幅2101がわかり、ピークの麓幅2101を特徴量として、例えば、その中央位置2100をピーク点として補正することが可能となる。又はピーク点の座標xcと距離検出波形702のピーク座標xとの差分xc-xを信頼性重み付け量として用いてもよい。ただし、図21で示した補正方法又は信頼度重み付け方法は一例であって、他の方法を用いてもよい。
 次に、図22は、CADデータ、及び対象物115と距離計測ヘッド117との相対位置に基づいて、対象物115の傾斜角度、曲率半径、及び粗さを求める方法を説明するための図である。
 対象物115に対して距離計測ヘッド117から照射されるビームの入射角度は、対象物115のCADデータと、距離計測ヘッド117の位置/姿勢に基づき、幾何学的に制御装置119が算出することが可能であり、照射光に対する計測対象の傾斜角度、曲率半径を求めることができる。粗さ情報はCADデータに付加されている場合はレーザが照射される場所の粗さ情報を用い、付加されていない場合はGUI画面を用いてユーザが入力、設定した値を用いる。そして、制御装置119が傾斜角度、曲率半径、及び粗さの算出結果を対象物CAD情報2001に付加させる。
 次に、図23は、第2の処理によって表示装置120に表示されるGUI画面2300の表示例を示している。GUI画面2300は、GUI画面1600(図16)に対して、対象物CAD情報表示欄2301、対象物粗さ情報表示欄2302、距離計測ヘッドの位置/姿勢表示欄2303、及び対象物傾斜角度、曲率半径、及び粗さ表示欄2304を追加したものである。
 対象物CAD情報表示欄2301には、対象物CAD情報の取得先(ファイルパス)が表示される。対象物粗さ情報表示欄2302には、対象物粗さ情報の取得先(ファイルパス)が表示される。距離計測ヘッドの位置/姿勢表示欄2303には、距離計測ヘッドの位置/姿勢情報の取得先(ファイルパス)が表示される。対象物傾斜角度、曲率半径、及び粗さ表示欄2304には、対象物115の傾斜角度、曲率半径、及び粗さを付加したCADデータが表示される。
 <制御装置119による第3の処理>
 次に、制御装置119による第3の処理について説明する。
 第3の処理では、対象物115のCADデータの代わりに、距離計測データの連続性に基づき、対象物115の計測領域の傾斜角度、曲率、及び粗さを求め、これらに基づき、精度を高めて補正及び信頼度重み付けの少なくとも一方を行う。
 図24は、制御装置119による第3の処理の一例を説明するフローチャートである。第3の処理に対する入力情報1400は、第1の処理(図14)に対する入力情報1400と同様である。
 第3の処理では、はじめに、制御装置119が、距離計測情報1403から距離検出波形を取得し(ステップS31)、次に、距離検出波形から特徴量を算出する(ステップS32)。次に、制御装置119が、補正式に特徴量を入力して補正する処理、及び信頼度重み付け式に特徴量を入力して信頼度重み付けを行う処理の少なくとも一方を行う(ステップS33)。このときに補正パラメータ1405又は信頼度重み付けパラメータ1406を用いて、補正量や信頼度重み付け量を調整することが可能である。次に、制御装置119が、距離計測ヘッド走査機構情報1404としての距離計測ヘッド117の走査座標と、距離計測情報1403としての回転機構405の回転角度データ等と、ステップS33で求めた信頼度重み付き距離とに基づき、信頼度重み付けされた3次元点群座標を算出する(ステップS34)。
 次に、制御装置119が、計測点群の連続性から計測対象領域の傾斜角度、曲率半径、及び粗さを算出する(ステップS35)。次に、制御装置119が、ステップS35で算出した傾斜角度、曲率半径、及び粗さの情報に基づいて、再び距離検出波形から特徴量を算出する(ステップS36)。次に、制御装置119が、補正式に特徴量を入力して補正する処理、及び信頼度重み付け式に特徴量を入力して信頼度重み付けを行う処理の少なくとも一方を行う(ステップS37)。このときに補正パラメータ1405又は信頼度重み付けパラメータ1406を用いて、補正量や信頼度重み付け量を調整することが可能である。次に、制御装置119が、距離計測ヘッド117の走査座標と、距離計測情報1403としての回転機構405の回転角度データ等と、ステップS37で求めた信頼度重み付き距離とに基づき、信頼度重み付けされた3次元点群座標を算出する(ステップS38)。そして、制御装置119が、出力情報1402として、信頼度重み付き点群1411を出力する。
 なお、第3の処理については、第1の処理の変形例(図17)と同様、出力された信頼度重み付き点群2011を利用してノイズ除去やフィッティングを行い、高精度に形状を算出できるように変形することができる。
 <段差を有する対象物115の計測について>
 次に、図25は、対象物115が有する段差2501を精度良く求める方法について説明するための図である。対象物115の段差2501を計測する場合、段差2501の上面からの反射光と下面からの反射光とが同時に検出されるため、検出ピークが2箇所検出される。
 そこで、レーザ601を走査した際に得られる距離検出波形から段差のエッジを求める。同図の上段に示すように、レーザ601の中心が段差2501の手前にある場合は上面への照射面積が大きいため、上面からの反射光強度2502が強くなり、下面からの反射光強度2503は弱くなる。次に、レーザ601を右方向に走査し、レーザ601の中心が段差にある場合、上面と下面からの反射光強度2502,2503が等しくなる。さらに、レーザ601を右方向に走査し、レーザ601の中心が段差2501を超えると、上面からの反射光強度2502は弱くなり、下面からの反射光強度2503が強くなる。
 よって、上面と下面の反射光強度2502,2503が等しくなったときの距離計測ヘッド117の位置を段差2501の位置とみなせば、精度良く、段差2501の位置を求めることができる。なお、レーザ601の走査が離散的で上面と下面の強度が等しくならない場合は、前後の走査結果から補間によって、強度比が等しくなる位置を求めればよい。
 ただし、上面と下面との光の反射率が異なる場合は、上面と下面からの反射光強度が等しくなる点が段差の位置にはならない。その場合、レーザ601の全体が段差2501の手前にある場合に得られる上面からの反射光強度2502から上面の反射光強度の強さを求め、レーザ601の全体が段差2501を超えた場合に得られる下面からの反射光強度2503から下面の反射光強度の強さを求め、その比から反射率の違いを求めてから、段差2501の位置を求めればよい。
 また、段差2501の高さが大きくなると下面からの反射光の一部が段差2501に遮られるために反射光量が減少する可能性がある。減衰量はレーザ601の入射角度と段差距離によって幾何学的に決まるので、計測された上面と下面の距離差から段差の高さを求めて、さらに減衰量を算出して、求まった減衰量を考慮した上面と下面の反射光量比から段差2501の位置を求めればよい。
 <変形例>
 距離検出波形の特徴量として、距離検出波形のピーク強度情報を用いてもよい。
 図26は、粗面・傾斜面測定時のスペックル位置と距離検出波形との関係を説明するための図である。
 照射ビーム601は、ガウシアン分布をしており、スペックルがビームの端で発生した場合、検出波形は2701に示すように歪むとともに検出強度が弱くなる。次にビーム走査し、スペックルがビーム中央で発生した場合、検出波形2702に示すように歪みが少なくなるとともに検出強度が強くなる。さらにビーム走査し、スペックルがビームの端で発生した場合、検出波形は2703に示すにように再び歪むとともに検出強度が弱くなる。そこで検出波形ピーク強度の連続性を用いることで、信頼度の高い点を抽出する。
 図27は、検出波形ピーク強度の連続性を用いて信頼度の高い点を抽出する概念を示している。
 粗面・傾斜面に対してビーム走査して得られる距離計測結果は階段状になる。階段の周期はビームスポットサイズに依存する。このときに得られる検出波形ピーク強度をプロットすると、階段の周期に対応した分布を有する。スペックルがビームの端にあるときに強度は弱くなり、スペックがビーム中心に位置するときに強度が極大値となり、スペックルがビーム中心から外れると強度は弱くなる。よって強度が極大値となる点を抽出することで、計測誤差を低減して精度よく実形状を求めることが可能となる。
 極大値の算出方法としてはピーク点抽出後に、前後の点を用いて3点によるピーク補間により、精度を上げることが可能である。またはビームはガウシアン分布をしているので、ガウシアンフィッティングにより、ピークを精度良く求めてもよい。
 ここまで強度極大値のみを抽出することを述べたが、強度情報を用いて信頼度重み付けをしてもよい。具体的には、前記の方法で、ピーク強度の連続性から、強度極大値と強度極小値を求め、極大値に対応する点の重みを最も重くし、極小値に対応する点の重みを最も軽くし、その間の点はピーク強度に基づいて補間により、極大値と極小値の間の重み付けを行う。補間は例えば、線形補間を用いる。重み付けされた点群は、第1の処理の変形例(図17)と同様、出力された信頼度重み付き点群を利用してノイズ除去やフィッティングを行い、高精度に形状を算出することができる。
 また、第1の処理にて説明した歪度や尖度などの特徴量を用いて誤差を補正して減少させた上で、ピーク強度に基づく重み付けを行うことで、さらに誤差を低減することが可能である。
 なお、上述した実施の形態では、距離検出波形の特徴量を、歪度、尖度、フィッティングを用いて検出したが、重心を用いて検出するようにしてもよい。
 <FMCW方式に代えることができる光切断方式について>
 次に、図28は、FMCW方式に代えることができる光切断方式について説明するための図である。
 光切断方式は、光源2600からライン状ビーム2601を対象物115に照射する。対象物115に照射されたライン状ビーム2601をカメラ2603で撮像すると、得られる画像には、対象物115の形状に沿った光切断線2604が形成される。光切断線2604から対象物115の形状を算出することが可能となる。ライン状ビーム2601の強度プロファイルは、ガウシアン分布2605をしており、通常、光切断線2604の強度もガウシアン分布となる。しかしながら、対象物115の表面が粗い場合、スペックルが生じ、距離検出波形2606に歪みが生じてしまい、ピーク点を誤って検出し、計測距離に誤差を生じ得る。そこで、図10、11を参照して説明した方式と同様、対象物115の形状の特徴量から計測距離の補正、及び信頼度重み付けの少なくとも一方を行えば、精度良く対象物115の形状を算出することが可能となる。
 以上、本発明に係る実施形態及び変形例の説明を行ってきたが、本発明は、上記した実施形態の一例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施形態の一例は、本発明を分かり易くするために詳細に説明したものであり、本発明は、ここで説明した全ての構成を備えるものに限定されない。また、ある実施形態の一例の構成の一部を他の一例の構成に置き換えることが可能である。また、ある実施形態の一例の構成に他の一例の構成を加えることも可能である。また、各実施形態の一例の構成の一部について、他の構成の追加、削除、置換をすることもできる。また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、図中の制御線や情報線は、説明上必要と考えられるものを示しており、全てを示しているとは限らない。ほとんど全ての構成が相互に接続されていると考えてもよい。
 また、上記の距離計測システムの構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、1つの構成要素がさらに多くの処理を実行するように分類することもできる。
1・・・形状計測システム、100・・・距離計測装置、101・・・レーザ光源、102・・・発振器、103・・・光ファイバカプラ、104・・・光ファイバカプラ、105・・・光ファイバ、106・・・光ファイバカプラ、107・・・受光器、108・・・サーキュレータ、109・・・受光器、111・・・光ファイバカプラ、112・・・参照ミラー、113・・・光ファイバコリメータ、114・・・ビーム走査機構、115・・・対象物、116・・・距離計測制御部、117・・・距離計測ヘッド、118・・・接続ケーブル、119・・・制御装置、120・・・表示装置、201・・・参照光、202・・・計測信号、301・・・距離検出波形、405・・・回転機構、406・・・プローブ先端部、407・・・光路切り替え素子、500・・・走査機構、501・・・Y軸移動機構、502・・・X軸移動機構、503・・・Z軸移動機構、601・・・レーザ、602・・・距離検出波形、603・・・ピーク点、604・・・傾斜面、702・・・距離検出波形、703・・・ピーク点、704・・・傾斜面、705・・・スペックル強度、1101,1102・・・波形、1103・・・ピーク点、1201,1202・・・法線ベクトル、1203・・・曲面、1204・・・距離計測値、1205・・・距離検出波形、1206・・・ピーク点、1301・・・曲面、1302・・・距離計測値、1400・・・入力情報、1402・・・出力情報、1403・・・距離計測情報、1404・・・距離計測ヘッド走査機構情報、1405・・・補正パラメータ、1406・・・信頼度重み付けパラメータ、1411・・・信頼度重み付き点群、1501・・・CPU、1502・・・メモリ、1503・・・記憶デバイス、1600・・・GUI画面、1601・・・距離計測情報表示欄、1602・・・距離計測ヘッド走査機構情報表示欄、1603・・・補正パラメータ表示欄、1604・・・信頼度重み付けパラメータ表示欄、1605・・・信頼度重み付き点群表示欄、1700・・・入力情報、1702・・・出力情報、1703・・・ノイズ除去パラメータ、1704・・・フィッティングパラメータ、1900・・・GUI画面、1901・・・ノイズ除去パラメータ設定欄、1902・・・フィッティングパラメータ設定欄、2000・・・入力情報、2001・・・対象物CAD情報、2002・・・対象物粗さ情報、2003・・・距離計測ヘッド位置/姿勢情報、2004・・・出力情報、2010・・・CAD情報、2011・・・信頼度重み付き点群、2100・・・中央位置、2101・・・麓幅、2300・・・GUI画面、2301・・・対象物CAD情報表示欄、2302・・・対象物粗さ情報表示欄、2303・・・距離計測ヘッドの位置/姿勢表示欄、2304・・・粗さ表示欄、2501・・・段差、2502・・・反射光強度、2503・・・反射光強度、2600・・・光源、2601・・・ライン状ビーム、2603・・・カメラ、2604・・・光切断線、2605・・・ガウシアン分布、2606・・・距離検出波形、c・・・距離分解能

Claims (12)

  1.  光を対象物に照射し、前記対象物からの反射光を受光する距離計測ヘッドと、
     前記反射光に基づいて距離検出波形を生成する距離計測装置と、
     前記距離検出波形を解析して前記対象物までの計測距離値を算出する制御装置と、
     を備え、
     前記制御装置は、前記距離検出波形の特徴量を算出し、補正式に前記特徴量を入力して前記計測距離値の誤差を補正する処理、及び信頼度重み付け式に前記特徴量を入力して前記計測距離値の誤差の信頼度重み付けを行う処理の少なくとも一方を行う
     ことを特徴とする形状計測システム。
  2.  請求項1に記載の形状計測システムであって、
     前記距離計測装置は、FMCW方式、OCT方式、TOF方式、または光切断方式を用いて前記反射光に基づいて前記距離検出波形を生成する
    の伝搬時間の測定による
     ことを特徴とする形状計測システム。
  3.  請求項1に記載の形状計測システムであって、
     前記制御装置は、前記距離検出波形の前記特徴量として、分散、歪度、尖度、または重心を算出する
     ことを特徴とする形状計測システム。
  4.  請求項1に記載の形状計測システムであって、
     前記制御装置は、波形フィッティングに基づいて前記距離検出波形の前記特徴量を算出する
     ことを特徴とする形状計測システム。
  5.  請求項1に記載の形状計測システムであって、
     前記制御装置は、前記距離検出波形のピーク強度と周囲の検出波形のピーク強度との相対値に基づいて前記距離検出波形の前記特徴量を算出する
     ことを特徴とする形状計測システム。
  6.  請求項1に記載の形状計測システムであって、
     前記補正式、及び前記信頼度重み付け式の少なくとも一方のパラメータは、ユーザが変更可能である
     ことを特徴とする形状計測システム。
  7.  請求項1に記載の形状計測システムであって、
     前記制御装置は、信頼度重み付けされた測定点群を出力する
     ことを特徴とする形状計測システム。
  8.  請求項7に記載の形状計測システムであって、
     前記制御装置は、前記信頼度重み付けされた点群に対して、重み付け量に応じてノイズ除去し、フィッティングにより形状を算出する
     ことを特徴とする形状計測システム。
  9.  請求項1に記載の形状計測システムであって、
     前記制御装置は、段差を有する前記対象物を計測する場合、複数のピーク点を有する前記距離検出波形の特徴量に基づき、前記段差の位置を算出する
     ことを特徴とする形状計測システム。
  10.  請求項1に記載の形状計測システムであって、
     前記制御装置は、前記対象物のCADデータ、及び前記光の照射方向に基づいて前記対象物の傾斜角度、曲率半径、及び粗さを取得し、前記傾斜角度、前記曲率半径、及び前記粗さに基づいて、前記距離検出波形の前記特徴量を算出する
     ことを特徴とする形状計測システム。
  11.  請求項10に記載の形状計測システムであって、
     前記対象物の前記粗さを表す情報が前記CADデータに付加されていない場合、ユーザが前記粗さを表す情報を入力可能である
     ことを特徴とする形状計測システム。
  12.  形状計測システムによる形状計測方法であって、
     光を対象物に照射し、前記対象物からの反射光を受光するステップと、
     前記反射光に基づいて距離検出波形を生成するステップと、
     前記距離検出波形を解析して前記対象物までの計測距離値を算出するステップと、
     前記距離検出波形の特徴量を算出し、補正式に前記特徴量を入力して前記計測距離値の誤差を補正する処理、及び信頼度重み付け式に前記特徴量を入力して前記計測距離値の誤差の信頼度重み付けを行う処理の少なくとも一方を行うステップと、
     を含むことを特徴とする形状計測方法。
PCT/JP2020/005548 2019-02-18 2020-02-13 形状計測システム、及び形状計測方法 WO2020170932A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CA3127579A CA3127579C (en) 2019-02-18 2020-02-13 Shape measuring system and shape measuring method
JP2021501908A JP7194260B2 (ja) 2019-02-18 2020-02-13 形状計測システム、及び形状計測方法
US17/426,203 US11635295B2 (en) 2019-02-18 2020-02-13 Shape measuring system and shape measuring method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-026172 2019-02-18
JP2019026172 2019-02-18

Publications (1)

Publication Number Publication Date
WO2020170932A1 true WO2020170932A1 (ja) 2020-08-27

Family

ID=72143673

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/005548 WO2020170932A1 (ja) 2019-02-18 2020-02-13 形状計測システム、及び形状計測方法

Country Status (4)

Country Link
US (1) US11635295B2 (ja)
JP (1) JP7194260B2 (ja)
CA (1) CA3127579C (ja)
WO (1) WO2020170932A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023112628A1 (ja) * 2021-12-16 2023-06-22 株式会社デンソー レーザレーダ装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114775382B (zh) * 2022-06-21 2022-09-06 源利腾达(西安)科技有限公司 基于超声波的公路交通工程路面质量检测方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001013244A (ja) * 1999-06-30 2001-01-19 Minolta Co Ltd 測距装置
JP2009198460A (ja) * 2008-02-25 2009-09-03 Omron Corp 膜厚計測方法および膜厚計測装置
US20150022658A1 (en) * 2013-07-16 2015-01-22 University Of North Carolina At Charlotte Noise reduction techniques, fractional bi-spectrum and fractional cross-correlation, and applications

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8860931B2 (en) * 2012-02-24 2014-10-14 Mitutoyo Corporation Chromatic range sensor including measurement reliability characterization
JP6304567B2 (ja) * 2014-02-28 2018-04-04 パナソニックIpマネジメント株式会社 測距装置及び測距方法
JP6872324B2 (ja) 2016-08-22 2021-05-19 株式会社小松製作所 計測システム、計測方法および計測プログラム
US11041715B2 (en) * 2017-08-31 2021-06-22 Pioneer Corporation Optical measurement apparatus, measurement method, program, and recording medium

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001013244A (ja) * 1999-06-30 2001-01-19 Minolta Co Ltd 測距装置
JP2009198460A (ja) * 2008-02-25 2009-09-03 Omron Corp 膜厚計測方法および膜厚計測装置
US20150022658A1 (en) * 2013-07-16 2015-01-22 University Of North Carolina At Charlotte Noise reduction techniques, fractional bi-spectrum and fractional cross-correlation, and applications

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023112628A1 (ja) * 2021-12-16 2023-06-22 株式会社デンソー レーザレーダ装置

Also Published As

Publication number Publication date
JP7194260B2 (ja) 2022-12-21
CA3127579C (en) 2023-08-01
CA3127579A1 (en) 2020-08-27
US11635295B2 (en) 2023-04-25
US20220178680A1 (en) 2022-06-09
JPWO2020170932A1 (ja) 2021-11-04

Similar Documents

Publication Publication Date Title
KR100919166B1 (ko) 스테레오 모아레를 이용한 3차원 형상 측정장치 및 그 방법
US7903261B2 (en) Controlling a projected pattern
WO2018103693A1 (zh) 一种三维轮廓的光学混合检测方法
US7023536B2 (en) Apparatus and method for determining orientation parameters of an elongate object
US6268923B1 (en) Optical method and system for measuring three-dimensional surface topography of an object having a surface contour
WO2020170932A1 (ja) 形状計測システム、及び形状計測方法
US10012831B2 (en) Optical monitoring of scan parameters
CN111257282B (zh) Oct成像系统、电子设备和机器可读存储介质
US9581437B2 (en) Interferometric non-contact optical probe and measurement
JP6576542B2 (ja) 立体形状計測装置、立体形状計測プローブ
EP2420796A1 (en) Shape measuring method and shape measuring apparatus using white light interferometry
US7130058B2 (en) System and method for determining coordinates on three-dimensional space using beam phase interference
WO2021245809A1 (ja) 距離測定装置、ミラー制御方法、及びプログラム
JP6388722B2 (ja) 干渉非接触光プローブおよび測定
JP7353644B2 (ja) 光学スキャナ装置の校正方法、光学スキャナ装置及び光学式三次元形状測定装置
JP7288667B2 (ja) 変形解析方法及び変形解析装置
US11092427B2 (en) Metrology and profilometry using light field generator
US10684115B2 (en) Encoder for optical coherence tomography scanner
EP3572766B1 (en) Oct system, method of generating oct image and storage medium
JP2014132252A (ja) 測定方法、測定装置および物品の製造方法
JP2008180646A (ja) 形状測定装置および形状測定方法
JP2023131005A (ja) 形状測定装置及び形状測定方法。
JP3998844B2 (ja) フリンジスキャンを用いた干渉計装置
CN114521227A (zh) 激光干涉测量系统及方法
CN114467035A (zh) 激光传感器、反射镜控制方法以及程序

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20758675

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021501908

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 3127579

Country of ref document: CA

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20758675

Country of ref document: EP

Kind code of ref document: A1