WO2012026180A1 - 情報取得装置および物体検出装置 - Google Patents

情報取得装置および物体検出装置 Download PDF

Info

Publication number
WO2012026180A1
WO2012026180A1 PCT/JP2011/062663 JP2011062663W WO2012026180A1 WO 2012026180 A1 WO2012026180 A1 WO 2012026180A1 JP 2011062663 W JP2011062663 W JP 2011062663W WO 2012026180 A1 WO2012026180 A1 WO 2012026180A1
Authority
WO
WIPO (PCT)
Prior art keywords
area
pattern
update
segment
information acquisition
Prior art date
Application number
PCT/JP2011/062663
Other languages
English (en)
French (fr)
Inventor
高明 森本
楳田 勝美
Original Assignee
三洋電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三洋電機株式会社 filed Critical 三洋電機株式会社
Priority to JP2012530563A priority Critical patent/JP5143314B2/ja
Priority to CN2011800051332A priority patent/CN102686975A/zh
Publication of WO2012026180A1 publication Critical patent/WO2012026180A1/ja
Priority to US13/596,991 priority patent/US20120327310A1/en

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C3/00Measuring distances in line of sight; Optical rangefinders
    • G01C3/02Details
    • G01C3/06Use of electric means to obtain final indication
    • G01C3/08Use of electric radiation detectors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/46Indirect determination of position data
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/497Means for monitoring or calibrating

Definitions

  • the present invention relates to an object detection apparatus that detects an object in a target area based on the state of reflected light when light is projected onto the target area, and an information acquisition apparatus suitable for use in the object detection apparatus.
  • An object detection device using light has been developed in various fields.
  • An object detection apparatus using a so-called distance image sensor can detect not only a planar image on a two-dimensional plane but also the shape and movement of the detection target object in the depth direction.
  • light in a predetermined wavelength band is projected from a laser light source or LED (Light Emitting Device) onto a target area, and the reflected light is received by a light receiving element such as a CMOS image sensor.
  • CMOS image sensor Light Emitting Device
  • a distance image sensor of a type that irradiates a target area with laser light having a predetermined dot pattern the dot pattern reflected from the target area is received by the image sensor, and the triangle is based on the light receiving position of the dot pattern on the image sensor.
  • the distance to each part of the detection target object is detected using a surveying method (for example, Non-Patent Document 1).
  • laser light having a dot pattern is emitted in a state where a reflection plane is arranged at a predetermined distance from the laser light irradiation unit, and the laser light irradiated on the image sensor at that time is emitted.
  • a dot pattern is held as a template.
  • the dot pattern of the laser beam irradiated on the image sensor at the time of actual measurement is compared with the dot pattern held on the template, and the segment area of the dot pattern on the template has moved to any position on the dot pattern at the time of actual measurement. Is detected. Based on the amount of movement, the distance to each part of the target area corresponding to each segment area is calculated.
  • a diffractive optical element is used to generate a dot pattern laser beam.
  • the dot pattern of the laser light depends on the shape and position of the diffractive optical element, the wavelength of the laser light, and the like. However, these factors are likely to change with temperature and may change over time.
  • the diffractive optical element is formed of a resin material, the characteristics of the diffractive optical element are likely to change depending on the temperature, and the dot pattern is likely to change accordingly.
  • the dot pattern held as a template is not appropriate, and the dot pattern at the time of actual measurement and the dot pattern held in the template are not properly matched. As a result, there is a possibility that the accuracy of detecting the distance to the detection target object is lowered.
  • An object of the present invention is to provide an information acquisition device capable of appropriately detecting a distance and an object detection device equipped with the information acquisition device.
  • the 1st aspect of this invention is related with the information acquisition apparatus which acquires the information of a target area
  • the information acquisition apparatus includes a light source that emits light of a predetermined wavelength band, a projection optical system that projects the light emitted from the light source toward the target area with a predetermined dot pattern, A light receiving element that receives reflected light reflected from the target area and outputs a signal; a storage unit that holds a reference template in which a plurality of reference segment areas are set in a reference pattern of the light received by the light receiving element; An update unit that updates the reference template. The update unit updates the reference template based on a displacement at the time of actual measurement of the reference segment region set in the reference template.
  • the second aspect of the present invention relates to an object detection apparatus.
  • the object detection apparatus according to this aspect includes the information acquisition apparatus according to the first aspect.
  • an information acquisition device capable of appropriately detecting the distance to the detection target object and It is possible to provide an object detection device equipped with this.
  • the present invention is applied to an information acquisition apparatus of a type that irradiates a target area with laser light having a predetermined dot pattern.
  • FIG. 1 shows a schematic configuration of the object detection apparatus according to the present embodiment.
  • the object detection device includes an information acquisition device 1 and an information processing device 2.
  • the television 3 is controlled by a signal from the information processing device 2.
  • the information acquisition device 1 projects infrared light over the entire target area and receives the reflected light with a CMOS image sensor, whereby the distance between each part of the object in the target area (hereinafter referred to as “three-dimensional distance information”). To get.
  • the acquired three-dimensional distance information is sent to the information processing apparatus 2 via the cable 4.
  • the information processing apparatus 2 is, for example, a controller for TV control, a game machine, a personal computer, or the like.
  • the information processing device 2 detects an object in the target area based on the three-dimensional distance information received from the information acquisition device 1, and controls the television 3 based on the detection result.
  • the information processing apparatus 2 detects a person based on the received three-dimensional distance information and detects the movement of the person from the change in the three-dimensional distance information.
  • the information processing device 2 is a television control controller
  • the information processing device 2 detects the person's gesture from the received three-dimensional distance information, and outputs a control signal to the television 3 in accordance with the gesture.
  • the application program to be installed is installed.
  • the user can cause the television 3 to execute a predetermined function such as channel switching or volume up / down by making a predetermined gesture while watching the television 3.
  • the information processing device 2 when the information processing device 2 is a game machine, the information processing device 2 detects the person's movement from the received three-dimensional distance information, and displays a character on the television screen according to the detected movement.
  • An application program that operates and changes the game battle situation is installed. In this case, the user can experience a sense of realism in which he / she plays a game as a character on the television screen by making a predetermined movement while watching the television 3.
  • FIG. 2 is a diagram showing the configuration of the information acquisition device 1 and the information processing device 2.
  • the information acquisition apparatus 1 includes a projection optical system 11 and a light receiving optical system 12 as optical systems.
  • the projection optical system 11 and the light receiving optical system 12 are arranged in the information acquisition device 1 so as to be aligned in the X-axis direction.
  • the projection optical system 11 includes a laser light source 111, a collimator lens 112, an aperture 113, a diffractive optical element (DOE: Diffractive Optical Element) 114, and a temperature sensor 115.
  • the light receiving optical system 12 includes an aperture 121, an imaging lens 122, a filter 123, and a CMOS image sensor 124.
  • the information acquisition device 1 includes a CPU (Central Processing Unit) 21, a laser driving circuit 22, an imaging signal processing circuit 23, an input / output circuit 24, and a memory 25 as a circuit unit.
  • CPU Central Processing Unit
  • the laser light source 111 outputs laser light in a narrow wavelength band with a wavelength of about 830 nm.
  • the collimator lens 112 converts the laser light emitted from the laser light source 111 into parallel light.
  • the aperture 113 adjusts the beam cross section of the laser light to a predetermined shape.
  • the DOE 114 has a diffraction pattern on the incident surface. Due to the diffraction effect of this diffraction pattern, the laser light that has entered the DOE 114 from the aperture 113 is converted into a laser light having a dot pattern and irradiated onto the target area.
  • the temperature sensor 115 detects the temperature around the laser light source 111.
  • the laser light reflected from the target area is incident on the imaging lens 122 via the aperture 121.
  • the aperture 121 stops the light from the outside so as to match the F number of the imaging lens 122.
  • the imaging lens 122 condenses the light incident through the aperture 121 on the CMOS image sensor 124.
  • the filter 123 is a band-pass filter that transmits light in a wavelength band including the emission wavelength (about 830 nm) of the laser light source 111 and cuts the visible light wavelength band.
  • the CMOS image sensor 124 receives the light collected by the imaging lens 122 and outputs a signal (charge) corresponding to the amount of received light to the imaging signal processing circuit 23 for each pixel.
  • the output speed of the signal is increased so that the signal (charge) of the pixel can be output to the imaging signal processing circuit 23 with high response from light reception in each pixel.
  • the CPU 21 controls each unit according to a control program stored in the memory 25.
  • the CPU 21 is provided with the functions of a laser control unit 21a for controlling the laser light source 111, an update unit 21b described later, and a three-dimensional distance calculation unit 21c for generating three-dimensional distance information.
  • the laser drive circuit 22 drives the laser light source 111 according to a control signal from the CPU 21.
  • the imaging signal processing circuit 23 controls the CMOS image sensor 124 and sequentially takes in the signal (charge) of each pixel generated by the CMOS image sensor 124 for each line. Then, the captured signals are sequentially output to the CPU 21. Based on the signal (imaging signal) supplied from the imaging signal processing circuit 23, the CPU 21 calculates the distance from the information acquisition device 1 to each part of the detection target by processing by the three-dimensional distance calculation unit 21c.
  • the input / output circuit 24 controls data communication with the information processing apparatus 2.
  • the information processing apparatus 2 includes a CPU 31, an input / output circuit 32, and a memory 33.
  • the information processing apparatus 2 has a configuration for performing communication with the television 3 and for reading information stored in an external memory such as a CD-ROM and installing it in the memory 33.
  • an external memory such as a CD-ROM
  • the configuration of these peripheral circuits is not shown for the sake of convenience.
  • the CPU 31 controls each unit according to a control program (application program) stored in the memory 33.
  • a control program application program
  • the CPU 31 is provided with the function of the object detection unit 31a for detecting an object in the image.
  • a control program is read from a CD-ROM by a drive device (not shown) and installed in the memory 33, for example.
  • the object detection unit 31a detects a person in the image and its movement from the three-dimensional distance information supplied from the information acquisition device 1. Then, a process for operating the character on the television screen according to the detected movement is executed by the control program.
  • the object detection unit 31 a detects a person in the image and its movement (gesture) from the three-dimensional distance information supplied from the information acquisition device 1. To do. Then, processing for controlling functions (channel switching, volume adjustment, etc.) of the television 3 is executed by the control program in accordance with the detected movement (gesture).
  • the input / output circuit 32 controls data communication with the information acquisition device 1.
  • FIG. 3A is a diagram schematically showing the irradiation state of the laser light on the target region
  • FIG. 3B is a diagram schematically showing the light receiving state of the laser light in the CMOS image sensor 124.
  • FIG. 6B shows a light receiving state when a flat surface (screen) exists in the target area.
  • laser light having a dot pattern (hereinafter, the whole laser light having this pattern is referred to as “DP light”) is irradiated onto the target area.
  • DP light laser light having a dot pattern
  • the light flux region of DP light is indicated by a solid line frame.
  • dot regions (hereinafter simply referred to as “dots”) in which the intensity of the laser light is increased by the diffraction action by the DOE 114 are scattered according to the dot pattern by the diffraction action by the DOE 114.
  • the light beam of DP light is divided into a plurality of segment regions arranged in a matrix.
  • dots are scattered in a unique pattern.
  • the dot dot pattern in one segment area is different from the dot dot pattern in all other segment areas.
  • each segment area can be distinguished from all other segment areas with a dot dot pattern.
  • the segment areas of DP light reflected thereby are distributed in a matrix on the CMOS image sensor 124 as shown in FIG.
  • the light in the segment area S0 on the target area shown in FIG. 5A enters the segment area Sp shown in FIG.
  • the light flux region of DP light is indicated by a solid frame, and for convenience, the light beam of DP light is divided into a plurality of segment regions arranged in a matrix.
  • the three-dimensional distance calculation unit 21c detects the position of each segment area on the CMOS image sensor 124, and corresponds to each segment area of the detection target object from the detected position of each segment area based on the triangulation method. The distance to the position to be detected is detected. Details of such a detection technique are described in, for example, Non-Patent Document 1 (The 19th Annual Conference of the Robotics Society of Japan (September 18-20, 2001), Proceedings, P1279-1280).
  • FIG. 4 is a diagram schematically showing a method of generating a reference template used for the distance detection.
  • a flat reflection plane RS perpendicular to the Z-axis direction is arranged at a predetermined distance Ls from the projection optical system 11.
  • DP light is emitted from the projection optical system 11 for a predetermined time Te.
  • the emitted DP light is reflected by the reflection plane RS and enters the CMOS image sensor 124 of the light receiving optical system 12.
  • an electrical signal for each pixel is output from the CMOS image sensor 124.
  • the output electric signal value (pixel value) for each pixel is developed on the memory 25 of FIG.
  • a reference pattern area that defines the DP light irradiation area on the CMOS image sensor 124 is set as shown in FIG. 4B. Further, the reference pattern area is divided vertically and horizontally to set a segment area. As described above, each segment area is dotted with dots in a unique pattern. Therefore, the pixel value pattern of the segment area is different for each segment area. Each segment area has the same size as all other segment areas.
  • the reference template is configured by associating each segment area set on the CMOS image sensor 124 with the pixel value of each pixel included in the segment area.
  • the reference template includes information on the position of the reference pattern area on the CMOS image sensor 124, pixel values of all pixels included in the reference pattern area, and information for dividing the reference pattern area into segment areas. Contains.
  • the pixel values of all the pixels included in the reference pattern area correspond to the DP light dot pattern included in the reference pattern area.
  • the mapping area of the pixel values of all the pixels included in the reference pattern area into segment areas the pixel values of the pixels included in each segment area are acquired.
  • the reference template may further hold pixel values of pixels included in each segment area for each segment area.
  • the configured reference template is held in the memory 25 of FIG. 2 in an unerasable state.
  • the reference template stored in the memory 25 is referred to when calculating the distance from the projection optical system 11 to each part of the detection target object.
  • DP light corresponding to a predetermined segment area Sn on the reference pattern is reflected by the object, and the segment area Sn. It is incident on a different region Sn ′. Since the projection optical system 11 and the light receiving optical system 12 are adjacent to each other in the X-axis direction, the displacement direction of the region Sn ′ with respect to the segment region Sn is parallel to the X-axis. In the case shown in the figure, since the object is located at a position closer than the distance Ls, the region Sn 'is displaced in the X-axis positive direction with respect to the segment region Sn. If the object is at a position farther than the distance Ls, the region Sn ′ is displaced in the negative X-axis direction with respect to the segment region Sn.
  • the distance Lr from the projection optical system 11 to the portion of the object irradiated with DP light (DPn) is triangulated using the distance Ls. Calculated based on Similarly, the distance from the projection optical system 11 is calculated for the part of the object corresponding to another segment area.
  • FIG. 5 is a diagram for explaining such a detection technique.
  • FIG. 6A is a diagram showing the setting state of the reference pattern region and the segment region on the CMOS image sensor 124
  • FIG. 5B is a diagram showing a method for searching for the segment region during actual measurement
  • FIG. These are figures which show the collation method with the dot pattern of measured DP light, and the dot pattern contained in the segment area
  • the segment area S1 is one pixel in the X-axis direction in the range P1 to P2.
  • the matching degree between the dot pattern of the segment area S1 and the actually measured dot pattern of DP light is obtained.
  • the segment area S1 is sent in the X-axis direction only on the line L1 passing through the uppermost segment area group of the reference pattern area. This is because, as described above, each segment region is normally displaced only in the X-axis direction from the position set by the reference template at the time of actual measurement. That is, the segment area S1 is considered to be on the uppermost line L1.
  • the processing load for the search is reduced.
  • the segment area may protrude from the reference pattern area in the X-axis direction. Therefore, the ranges P1 and P2 are set wider than the width of the reference pattern area in the X-axis direction.
  • a region (comparison region) having the same size as the segment region S1 is set on the line L1, and the similarity between the comparison region and the segment region S1 is obtained. That is, the difference between the pixel value of each pixel in the segment area S1 and the pixel value of the corresponding pixel in the comparison area is obtained. A value Rsad obtained by adding the obtained difference to all the pixels in the comparison region is acquired as a value indicating the similarity.
  • the comparison area is sequentially set while being shifted by one pixel on the line L1. Then, the value Rsad is obtained for all the comparison regions on the line L1. A value smaller than the threshold value is extracted from the obtained value Rsad. If there is no value Rsad smaller than the threshold value, the search for the segment area S1 is regarded as an error. Then, it is determined that the comparison area corresponding to the extracted Rsad having the smallest value is the movement area of the segment area S1. The same search as described above is performed for the segment areas other than the segment area S1 on the line L1. Similarly, the segment areas on the other lines are searched by setting the comparison area on the lines as described above.
  • the dot pattern of the DP light can change depending on the shape and position of the DOE 114, the wavelength of the laser light emitted from the laser light source 111, and the like.
  • these factors are likely to change with temperature and may change over time.
  • the DOE 114 is formed of a resin material, the characteristics of the DOE 114 are likely to change depending on the temperature, and the dot pattern is likely to change accordingly.
  • the dot pattern held as the reference template is not appropriate, and the dot pattern at the time of actual measurement and the dot pattern held in the reference template are not properly collated. As a result, there is a possibility that the accuracy of detecting the distance to the detection target object is lowered.
  • FIG. 6 is a diagram showing a state in which the segment area S1 at the time of actual measurement has deviated from the line L1 due to the above factors.
  • the segment area S1 is deviated above the line L1 (Y-axis positive direction)
  • the segment area S1 is deviated below the line L1 (Y-axis negative direction).
  • the search result of the segment area S1 results in an error, thereby degrading the accuracy of distance detection for the detection target object.
  • a template in which a reference template is updated is generated based on a dot pattern of DP light at the time of actual measurement, and a segment area is searched using this updated template.
  • FIG. 7 is a diagram showing processing at the time of template update.
  • the process of FIG. 7 is performed by the update unit 21b of FIG.
  • the updating unit 21b performs the process of FIG. 7A at predetermined time intervals during actual measurement.
  • the updating unit 21b determines that the difference between the temperature acquired from the temperature sensor 115 at the previous update (previous temperature) and the temperature detected by the current temperature sensor 115 (current temperature) is the threshold Ts. Is determined (S101). When the information acquisition apparatus 1 is activated, it is determined whether the difference between the reference temperature when the reference template is configured and the current temperature exceeds the threshold Ts.
  • the template is updated (S103). If the determination in S101 is NO, it is determined in the search for the segment area at the time of the latest measurement whether the ratio of the segment area in which the search is an error to the total segment area exceeds the threshold Es. If the determination in S102 is YES, the template is updated (S103), and if NO, the template update ends.
  • FIG. 7B is a flowchart showing the update process in S103 of FIG.
  • the process of FIG. 7B is performed with reference to the reference template previously stored in the memory 25 and the dot pattern information acquired at the time of actual measurement and developed in the memory 25.
  • the reference template includes information on the position of the reference pattern area, pixel values of all pixels included in the reference pattern area, and information for dividing the reference pattern area into segment areas. In the following, for convenience of explanation, explanation is made based on a dot pattern.
  • the update unit 21b first searches for a preset displacement position of the reference segment region from the dot pattern on the CMOS image sensor 124 of DP light at the time of actual measurement (S201).
  • reference segment areas Sr1 to Sr4 are set at the four corners of the standard pattern area of the standard template. It is searched at which position these reference segment areas Sr1 to Sr4 are in the search area MA shown in FIG. 8B.
  • the search area MA covers substantially the entire light receiving area of the CMOS image sensor 124.
  • the search is performed by collating all of the search areas MA for each of the reference segment areas Sr1 to Sr4. That is, after the search is performed on the uppermost stage of the search area MA, the search is performed on the next stage that is one pixel below the uppermost stage, and similarly, the search is performed on the lower stage. .
  • the search is performed in the same manner as described with reference to FIG.
  • the updating unit 21b determines the current dot pattern on the CMOS image sensor 124 based on the acquired displacement positions.
  • a region (update pattern region) suitable for the above is set (S202).
  • the displacement amount of the reference segment regions Sr1 to Sr4 in the Y-axis direction is obtained from the displacement positions of the reference segment regions Sr1 to Sr4.
  • a rectangular area connecting positions where the four corners of the standard pattern area are displaced by the displacement amount in the Y-axis direction of the reference segment areas Sr1 to Sr4 is set as the update pattern area.
  • the update unit 21b applies the dot pattern of the reference template to the set update pattern area (S203). Furthermore, the segment area is set by dividing the update pattern area (S204). Then, the update unit 21b obtains information on the position of the update pattern area, information on the dot patterns included in the update pattern area (pixel values of all pixels), and information for dividing the update pattern area into segment areas. And stored in the memory 25 as an update template. By dividing the mapping area of the pixel values of all the pixels included in the update pattern area into segment areas, the pixel values (dot patterns) of the pixels included in each segment area are acquired.
  • the segment area is searched using the update template.
  • FIG. 9A the positions of the reference segment areas Sr1 to Sr4 searched in S201 of FIG. 7B are shifted from the base pattern area by the same amount in the upward direction (Y-axis positive direction). Shows the case.
  • FIG. 9B a rectangular shape connecting the positions where the four corners of the reference pattern region are displaced upward (Y-axis positive direction) by the amount of displacement in the Y-axis direction of the reference segment regions Sr1 to Sr4, respectively.
  • the area is set as the update pattern area.
  • the dot pattern of the reference template is applied to the set update pattern area.
  • the dot pattern in the reference pattern area is assigned to the update pattern area as it is.
  • the update pattern area is divided into segment areas in a matrix.
  • the positions of the reference segment areas Sr1 and Sr2 searched in S201 of FIG. 7B are shifted by the same amount in the upward direction (Y-axis positive direction) with respect to the reference pattern area.
  • the positions of the reference segment areas Sr3 and Sr4 are shifted by the same amount in the downward direction (Y-axis negative direction) with respect to the standard pattern area.
  • the two upper corners of the reference pattern area are displaced upward (Y-axis positive direction) by the amount of displacement in the Y-axis direction of the reference segment areas Sr1 and Sr2, respectively.
  • a rectangular area connecting the two lower corners of the reference pattern area with the positions where the reference segment areas Sr3 and Sr4 are displaced downward (Y-axis negative direction) by the amount of displacement in the Y-axis direction is set as the update pattern area. Is done.
  • the dot pattern of the reference template is applied to the set update pattern area.
  • the update pattern area since the update pattern area has a shape in which the reference pattern area is extended in the Y-axis direction, the dot pattern in the reference pattern area is assigned to the update pattern area so as to be extended uniformly in the Y-axis direction. . Thereafter, the update pattern area is divided into segment areas in a matrix.
  • the segment area of the update template is the same size as the segment area of the reference template. For this reason, the number of segment areas is increasing in the update template.
  • an update template is configured.
  • the positions of the reference segment areas Sr1 and Sr2 searched in S201 of FIG. 7B are shifted by the same amount in the downward direction (Y-axis negative direction) with respect to the reference pattern area.
  • the positions of the reference segment areas Sr3 and Sr4 are shifted by the same amount in the upward direction (Y-axis positive direction) with respect to the reference pattern area.
  • the two upper corners of the reference pattern region are displaced downward (Y-axis negative direction) by the amount of displacement in the Y-axis direction of the reference segment regions Sr1 and Sr2, respectively.
  • a rectangular area that connects the two lower corners of the reference pattern area to the positions where the reference segment areas Sr3 and Sr4 are displaced upward (Y-axis positive direction) by the amount of displacement in the Y-axis direction is set as the update pattern area. Is done.
  • the dot pattern of the reference template is applied to the set update pattern area.
  • the update pattern area since the update pattern area has a shape in which the reference pattern area is contracted in the Y-axis direction, the dot pattern in the reference pattern area is allocated to the update pattern area so as to be uniformly contracted in the Y-axis direction. Thereafter, the update pattern area is divided into segment areas in a matrix.
  • the segment area of the update template is the same size as the segment area of the reference template. For this reason, the number of segment regions is reduced in the update template.
  • an update template is configured.
  • FIG. 10C the position of Sr2 searched in S201 of FIG. 7B is shifted upward (Y-axis positive direction) with respect to the standard pattern area, and the position of the reference segment area Sr4 is The case where it shifted
  • the two right corners of the reference pattern region are respectively moved upward (Y-axis positive direction) and downward (Y-axis) by the amount of displacement in the Y-axis direction of the reference segment regions Sr2 and Sr4.
  • a rectangular area connecting the position displaced in the negative direction) and the two left corners of the reference pattern area is set as the update pattern area.
  • the update pattern area is a trapezoid.
  • the dot pattern of the reference template is applied to the set update pattern area.
  • the update pattern area since the update pattern area has a shape in which the reference pattern area is extended in the Y-axis direction, the dot pattern in the reference pattern area is extended in the Y-axis direction according to the distance in the Y-axis direction of the update pattern area. In this way, the update pattern area is assigned. Thereafter, the update pattern area is divided into segment areas in a matrix.
  • the maximum rectangular area is set in the update pattern area, and this area is divided into segment areas in a matrix.
  • an update template is configured.
  • the maximum rectangular area set in the update pattern area is the same size as the reference pattern area. Further, the update pattern area and the reference pattern area have the same position. Furthermore, in the present embodiment, the segment area of the update template has the same size as the segment area of the reference template, and therefore, the update template has the same number of segment areas as the reference template. However, in the updated template, since the dot pattern in the reference pattern area is a dot pattern that is stretched in a trapezoidal shape, the dot pattern in each segment area is different from the dot pattern in the corresponding segment area in the reference template.
  • FIGS. 10C and 10D show one example of the case where the update pattern area has a trapezoidal shape, but the update pattern area also has a trapezoid shape having another shape, as described above.
  • the dot pattern of the reference template is applied to the pattern area, the largest rectangular area is set in the update pattern area, and this area is divided into segment areas in a matrix form to constitute an update template.
  • the reference template is updated based on the displacement at the time of actual measurement of the reference segment area set in the reference template, and the segment area is updated using the updated template (update template). Since the search is performed, even if the dot pattern of the laser light changes depending on the shape and position of the DOE 114, the wavelength of the laser light, and the like, the segment area can be searched appropriately. Therefore, the distance to the detection target object can be detected appropriately.
  • the dot pattern of the laser beam can change when the temperature change is large or when the segment area search has a high error rate. Since the update process for the reference template is performed when the property is high, the reference template can be updated effectively.
  • the update pattern area is configured by shifting and deforming the reference pattern area only in the vertical direction (Y-axis direction).
  • the segment area can be searched by the update template without deforming the reference pattern area in the X-axis direction. That is, in the update template according to the above embodiment, there is a possibility that the position of the segment area is shifted from the proper position in the X-axis direction.
  • the displacement position of the segment area at the time of actual measurement can be acquired without causing an error. In this case, the acquired displacement position may deviate from the original position, but this deviation is usually not so large. Therefore, the acquisition of distance information can be performed without any problem.
  • the update pattern area may be configured by deforming the reference pattern area in the X-axis direction as shown in FIG.
  • FIGS. 11A and 11B show examples in which the update pattern area is configured by extending the reference pattern area in the X-axis direction
  • FIGS. 11C and 11D show the reference pattern area as the X-axis.
  • An example in which the update pattern area is configured by reducing the direction is also shown.
  • the update pattern area may be configured by expanding / reducing the reference pattern area in the X-axis direction based on the temperature detected during actual measurement.
  • the temperature and the expansion / reduction ratio in the X-axis direction are associated with each other and stored in the memory 25. Such adjustment by temperature can be applied even if the update pattern region is not expanded or contracted in the Y-axis direction with respect to the reference pattern region.
  • the size of the segment area of the update template is the same as the size of the segment area of the reference template.
  • the number of segment areas of the update template may be the same as the number of segment areas of the reference template.
  • 12A and 12B show examples in which the update pattern area is configured by extending the reference pattern area in the Y-axis direction.
  • FIGS. 12C and 12D show the reference pattern area in the Y-axis direction.
  • An example in which the update pattern region is configured by reducing the size is shown.
  • the segment area of the update template has a shape in which the segment area of the reference template is expanded / reduced in the Y-axis direction.
  • a part of the segment area of the standard template is used as the reference segment areas Sr1 to Sr4.
  • an area other than the segment area of the standard template may be set as the reference segment area. good.
  • the reference segment areas Sr1 to Sr4 are set at the four corners of the standard pattern area.
  • the reference segment areas are set at the four corners in this way, and two areas separated in the Y-axis direction.
  • And may be set in the other two regions that are separated in the Y-axis direction and do not overlap the two regions in the Y-axis direction.
  • the reference pattern region can be not only shifted in the Y-axis direction but also deformed in the Y-axis direction to form the update pattern region.
  • reference segment areas Sr5 to Sr8 may be added to the side portion of the standard pattern area to increase the set number of reference segment areas. In this way, the update pattern area can be set by further deforming the reference layout area. Further, as shown in FIG. 13B, a reference segment region Sr9 may be added at the center of the standard pattern region. Thus, the update pattern region can be set with the displacement position of the reference segment region Sr9 as the center of gravity.
  • the update pattern area can be configured by shifting, expanding, or reducing the reference pattern area in the Y-axis direction.
  • the update pattern area cannot be formed by being deformed into a shape.
  • three reference segment areas Sr12, Sr13, and Sr14 may be set at the two corners and the center of the base pattern area.
  • the update pattern area cannot be formed by deforming the base pattern area into a trapezoidal shape, but is updated using the displacement position of the reference segment area Sr14 as the center of gravity.
  • a pattern area can be set.
  • the segment areas are set so as not to overlap each other as shown in FIG. 4B, but each segment area may be set to partially overlap the upper and lower segment areas. good.
  • each segment area may be set so as to be partially overlapped with the left and right segment areas and arranged in a matrix.
  • the reference template includes information on the position of the reference pattern area on the CMOS image sensor 124, pixel values of all pixels included in the reference pattern area, information on the size (width and width) of the segment area, and each segment. Information on the position of the area on the reference pattern area is included.
  • the shape of the reference pattern region may be other shapes such as a square, etc., as well as a rectangle as in the above embodiment.
  • the shape of the update pattern area can be changed as appropriate.
  • the CMOS image sensor 124 is used as the light receiving element, but a CCD image sensor can be used instead.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Measurement Of Optical Distance (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

 レーザ光のドットパターンが、回折光学素子の形状や位置、および、レーザ光の波長等によって変化しても、検出対象物体までの距離を適正に検出し得る情報取得装置およびこれを搭載する物体検出装置を提供する。情報取得装置(1)は、波長830nm程度のレーザ光を出射するレーザ光源(111)と、レーザ光を前記目標領域に向けて投射する投射光学系(11)と、前記目標領域からの反射光を受光して信号を出力するCMOSイメージセンサ(124)と、CMOSイメージセンサ(124)によって受光される光の基準パターンを、マトリックス状に並ぶ基準セグメント領域で区分した基準テンプレートを保持するメモリ(25)と、基準テンプレートを更新する更新部(21b)とを有する。更新部(21b)は、基準テンプレートに設定された参照セグメント領域の実測時における変位に基づいて、基準テンプレートを更新する。

Description

[規則37.2に基づきISAが決定した発明の名称] 情報取得装置および物体検出装置 
 本発明は、目標領域に光を投射したときの反射光の状態に基づいて目標領域内の物体を検出する物体検出装置およびこれに用い好適な情報取得装置に関する。
 従来、光を用いた物体検出装置が種々の分野で開発されている。いわゆる距離画像センサを用いた物体検出装置では、2次元平面上の平面的な画像のみならず、検出対象物体の奥行き方向の形状や動きを検出することができる。かかる物体検出装置では、レーザ光源やLED(Light Emitting Device)から、予め決められた波長帯域の光が目標領域に投射され、その反射光がCMOSイメージセンサ等の受光素子により受光される。距離画像センサとして、種々のタイプのものが知られている。
 所定のドットパターンを持つレーザ光を目標領域に照射するタイプの距離画像センサでは、目標領域から反射されたドットパターンをイメージセンサで受光し、イメージセンサ上におけるドットパターンの受光位置に基づいて、三角測量法を用いて、検出対象物体の各部までの距離が検出される(たとえば、非特許文献1)。
 この方式では、たとえば、レーザ光の照射部から所定の距離の位置に反射平面が配置された状態で、ドットパターンを持つレーザ光が出射され、そのときにイメージセンサ上に照射されたレーザ光のドットパターンがテンプレートとして保持される。そして、実測時にイメージセンサ上に照射されたレーザ光のドットパターンとテンプレートに保持されたドットパターンとが照合され、テンプレート上のドットパターンのセグメント領域が実測時のドットパターン上のどの位置に移動したかが検出される。この移動量に基づいて、各セグメント領域に対応する目標領域の各部までの距離が算出される。
第19回日本ロボット学会学術講演会(2001年9月18-20日)予稿集、P1279-1280
 上記物体検出装置では、ドットパターンのレーザ光を生成するために回折光学素子が用いられる。レーザ光のドットパターンは、回折光学素子の形状や位置、および、レーザ光の波長等に依存する。しかしながら、これらの要素は、温度によって変化し易く、また、時間の経過によっても変化し得る。特に、回折光学素子が樹脂材料により形成された場合には、温度によって回折光学素子の特性が変わり易く、これに伴いドットパターンも変化し易い。このようにドットパターンが変化すると、テンプレートとして保持されたドットパターンが適正でなくなり、実測時のドットパターンとテンプレートに保持されたドットパターンとの照合が適正に行われなくなる。その結果、検出対象物体に対する距離の検出精度が低下する惧れがある。
 本発明は、かかる問題を解消するためになされたものであり、レーザ光のドットパターンが、回折光学素子の形状や位置、および、レーザ光の波長等によって変化しても、検出対象物体までの距離を適正に検出し得る情報取得装置およびこれを搭載する物体検出装置を提供することを目的とする。
 本発明の第1の態様は、光を用いて目標領域の情報を取得する情報取得装置に関する。この態様に係る情報取得装置は、所定波長帯域の光を出射する光源と、前記光源から出射された光を、所定のドットパターンでもって、前記目標領域に向けて投射する投射光学系と、前記目標領域から反射された反射光を受光して信号を出力する受光素子と、前記受光素子によって受光される前記光の基準パターンに複数の基準セグメント領域を設定した基準テンプレートを保持する記憶部と、前記基準テンプレートを更新する更新部と、を有する。前記更新部は、前記基準テンプレートに設定された参照セグメント領域の実測時における変位に基づいて、前記基準テンプレートを更新する。
 本発明の第2の態様は、物体検出装置に関する。この態様に係る物体検出装置は、上記第1の態様に係る情報取得装置を有する。
 本発明によれば、レーザ光のドットパターンが、回折光学素子の形状や位置、および、レーザ光の波長等によって変化しても、検出対象物体までの距離を適正に検出し得る情報取得装置およびこれを搭載する物体検出装置を提供することができる。
 本発明の特徴は、以下に示す実施の形態の説明により更に明らかとなろう。ただし、以下の実施の形態は、あくまでも、本発明の一つの実施形態であって、本発明ないし各構成要件の用語の意義は、以下の実施の形態に記載されたものに制限されるものではない。
実施の形態に係る物体検出装置の構成を示す図である。 実施の形態に係る情報取得装置と情報処理装置の構成を示す図である。 実施の形態に係る目標領域に対するレーザ光の照射状態とイメージセンサ上のレーザ光の受光状態を示す図である。 実施の形態に係る基準テンプレートの設定方法を説明する図である。 実施の形態に係る距離検出方法を説明する図である。 実施の形態に係る距離検出エラーが起こる状態を説明する図である。 実施の形態に係るテンプレートの更新処理を示すフローチャートである。 実施の形態に係るテンプレートの更新方法を示す図である。 実施の形態に係るテンプレートの更新例を示す図である。 実施の形態に係るテンプレートの更新例を示す図である。 実施の形態に係るテンプレートの更新方法の変更例を示す図である。 実施の形態に係るテンプレートの更新方法の変更例を示す図である。 実施の形態に係る参照セグメント領域の他の設定方法を示す図である。
 以下、本発明の実施の形態につき図面を参照して説明する。本実施の形態は、所定のドットパターンを持つレーザ光を目標領域に照射するタイプの情報取得装置に本発明を適用したものである。
 まず、図1に本実施の形態に係る物体検出装置の概略構成を示す。図示の如く、物体検出装置は、情報取得装置1と、情報処理装置2とを備えている。テレビ3は、情報処理装置2からの信号によって制御される。
 情報取得装置1は、目標領域全体に赤外光を投射し、その反射光をCMOSイメージセンサにて受光することにより、目標領域にある物体各部の距離(以下、「3次元距離情報」という)を取得する。取得された3次元距離情報は、ケーブル4を介して情報処理装置2に送られる。
 情報処理装置2は、たとえば、テレビ制御用のコントローラやゲーム機、パーソナルコンピュータ等である。情報処理装置2は、情報取得装置1から受信した3次元距離情報に基づき、目標領域における物体を検出し、検出結果に基づきテレビ3を制御する。
 たとえば、情報処理装置2は、受信した3次元距離情報に基づき人を検出するとともに、3次元距離情報の変化から、その人の動きを検出する。たとえば、情報処理装置2がテレビ制御用のコントローラである場合、情報処理装置2には、受信した3次元距離情報からその人のジェスチャを検出するとともに、ジェスチャに応じてテレビ3に制御信号を出力するアプリケーションプログラムがインストールされている。この場合、ユーザは、テレビ3を見ながら所定のジェスチャをすることにより、チャンネル切り替えやボリュームのUp/Down等、所定の機能をテレビ3に実行させることができる。
 また、たとえば、情報処理装置2がゲーム機である場合、情報処理装置2には、受信した3次元距離情報からその人の動きを検出するとともに、検出した動きに応じてテレビ画面上のキャラクタを動作させ、ゲームの対戦状況を変化させるアプリケーションプログラムがインストールされている。この場合、ユーザは、テレビ3を見ながら所定の動きをすることにより、自身がテレビ画面上のキャラクタとしてゲームの対戦を行う臨場感を味わうことができる。
 図2は、情報取得装置1と情報処理装置2の構成を示す図である。
 情報取得装置1は、光学系として、投射光学系11と受光光学系12とを備えている。投射光学系11と受光光学系12は、X軸方向に並ぶように、情報取得装置1に配置される。
 投射光学系11は、レーザ光源111と、コリメータレンズ112と、アパーチャ113と、回折光学素子(DOE:Diffractive Optical Element)114、温度センサ115とを備えている。また、受光光学系12は、アパーチャ121と、撮像レンズ122と、フィルタ123と、CMOSイメージセンサ124とを備えている。この他、情報取得装置1は、回路部の構成として、CPU(Central Processing Unit)21と、レーザ駆動回路22と、撮像信号処理回路23と、入出力回路24と、メモリ25を備えている。
 レーザ光源111は、波長830nm程度の狭波長帯域のレーザ光を出力する。コリメータレンズ112は、レーザ光源111から出射されたレーザ光を平行光に変換する。アパーチャ113は、レーザ光の光束断面を所定の形状に調整する。DOE114は、入射面に回折パターンを有する。この回折パターンによる回折作用により、アパーチャ113からDOE114に入射したレーザ光は、ドットパターンのレーザ光に変換されて、目標領域に照射される。温度センサ115は、レーザ光源111の周囲の温度を検出する。
 目標領域から反射されたレーザ光は、アパーチャ121を介して撮像レンズ122に入射する。アパーチャ121は、撮像レンズ122のFナンバーに合うように、外部からの光に絞りを掛ける。撮像レンズ122は、アパーチャ121を介して入射された光をCMOSイメージセンサ124上に集光する。
 フィルタ123は、レーザ光源111の出射波長(830nm程度)を含む波長帯域の光を透過し、可視光の波長帯域をカットするバンドパスフィルタである。CMOSイメージセンサ124は、撮像レンズ122にて集光された光を受光して、画素毎に、受光光量に応じた信号(電荷)を撮像信号処理回路23に出力する。ここで、CMOSイメージセンサ124は、各画素における受光から高レスポンスでその画素の信号(電荷)を撮像信号処理回路23に出力できるよう、信号の出力速度が高速化されている。
 CPU21は、メモリ25に格納された制御プログラムに従って各部を制御する。かかる制御プログラムによって、CPU21には、レーザ光源111を制御するためのレーザ制御部21aと、後述する更新部21bと、3次元距離情報を生成するための3次元距離演算部21cの機能が付与される。
 レーザ駆動回路22は、CPU21からの制御信号に応じてレーザ光源111を駆動する。撮像信号処理回路23は、CMOSイメージセンサ124を制御して、CMOSイメージセンサ124で生成された各画素の信号(電荷)をライン毎に順次取り込む。そして、取り込んだ信号を順次CPU21に出力する。CPU21は、撮像信号処理回路23から供給される信号(撮像信号)をもとに、情報取得装置1から検出対象物の各部までの距離を、3次元距離演算部21cによる処理によって算出する。入出力回路24は、情報処理装置2とのデータ通信を制御する。
 情報処理装置2は、CPU31と、入出力回路32と、メモリ33を備えている。なお、情報処理装置2には、同図に示す構成の他、テレビ3との通信を行うための構成や、CD-ROM等の外部メモリに格納された情報を読み取ってメモリ33にインストールするためのドライブ装置等が配されるが、便宜上、これら周辺回路の構成は図示省略されている。
 CPU31は、メモリ33に格納された制御プログラム(アプリケーションプログラム)に従って各部を制御する。かかる制御プログラムによって、CPU31には、画像中の物体を検出するための物体検出部31aの機能が付与される。かかる制御プログラムは、たとえば、図示しないドライブ装置によってCD-ROMから読み取られ、メモリ33にインストールされる。
 たとえば、制御プログラムがゲームプログラムである場合、物体検出部31aは、情報取得装置1から供給される3次元距離情報から画像中の人およびその動きを検出する。そして、検出された動きに応じてテレビ画面上のキャラクタを動作させるための処理が制御プログラムにより実行される。
 また、制御プログラムがテレビ3の機能を制御するためのプログラムである場合、物体検出部31aは、情報取得装置1から供給される3次元距離情報から画像中の人およびその動き(ジェスチャ)を検出する。そして、検出された動き(ジェスチャ)に応じて、テレビ3の機能(チャンネル切り替えやボリューム調整、等)を制御するための処理が制御プログラムにより実行される。
 入出力回路32は、情報取得装置1とのデータ通信を制御する。
 図3(a)は、目標領域に対するレーザ光の照射状態を模式的に示す図、図3(b)は、CMOSイメージセンサ124におけるレーザ光の受光状態を模式的に示す図である。なお、同図(b)には、便宜上、目標領域に平坦な面(スクリーン)が存在するときの受光状態が示されている。
 投射光学系11からは、ドットパターンを持ったレーザ光(以下、このパターンを持つレーザ光の全体を「DP光」という)が、目標領域に照射される。同図(a)には、DP光の光束領域が実線の枠によって示されている。DP光の光束中には、DOE114による回折作用によってレーザ光の強度が高められたドット領域(以下、単に「ドット」という)が、DOE114による回折作用によるドットパターンに従って点在している。
 なお、図3(a)では、便宜上、DP光の光束が、マトリックス状に並ぶ複数のセグメント領域に区分されている。各セグメント領域には、ドットが固有のパターンで点在している。一つのセグメント領域におけるドットの点在パターンは、他の全てのセグメント領域におけるドットの点在パターンと相違する。これにより、各セグメント領域は、ドットの点在パターンをもって、他の全てのセグメント領域から区別可能となっている。
 目標領域に平坦な面(スクリーン)が存在すると、これにより反射されたDP光の各セグメント領域は、同図(b)のように、CMOSイメージセンサ124上においてマトリックス状に分布する。たとえば、同図(a)に示す目標領域上におけるセグメント領域S0の光は、CMOSイメージセンサ124上では、同図(b)に示すセグメント領域Spに入射する。なお、図3(b)においても、DP光の光束領域が実線の枠によって示され、便宜上、DP光の光束が、マトリックス状に並ぶ複数のセグメント領域に区分されている。
 上記3次元距離演算部21cでは、CMOSイメージセンサ124上における各セグメント領域の位置が検出され、検出された各セグメント領域の位置から、三角測量法に基づいて、検出対象物体の各セグメント領域に対応する位置までの距離が検出される。かかる検出手法の詳細は、たとえば、上記非特許文献1(第19回日本ロボット学会学術講演会(2001年9月18-20日)予稿集、P1279-1280)に示されている。
 図4は、上記距離検出に用いられる基準テンプレートの生成方法を模式的に示す図である。
 図4(a)に示すように、基準テンプレートの生成時には、投射光学系11から所定の距離Lsの位置に、Z軸方向に垂直な平坦な反射平面RSが配置される。この状態で、投射光学系11からDP光が所定時間Teだけ出射される。出射されたDP光は、反射平面RSによって反射され、受光光学系12のCMOSイメージセンサ124に入射する。これにより、CMOSイメージセンサ124から、画素毎の電気信号が出力される。出力された画素毎の電気信号の値(画素値)が、図2のメモリ25上に展開される。
 こうしてメモリ25上に展開された画素値に基づいて、図4(b)に示すように、CMOSイメージセンサ124上におけるDP光の照射領域を規定する基準パターン領域が設定される。さらに、この基準パターン領域が、縦横に区分されてセグメント領域が設定される。上記のように、各セグメント領域には、固有のパターンでドットが点在する。よって、セグメント領域の画素値のパターンは、セグメント領域毎に異なっている。なお、各セグメント領域は、他の全てのセグメント領域と同じサイズである。
 基準テンプレートは、このようにCMOSイメージセンサ124上に設定された各セグメント領域に、そのセグメント領域に含まれる各画素の画素値を対応付けて構成される。
 具体的には、基準テンプレートは、CMOSイメージセンサ124上における基準パターン領域の位置に関する情報と、基準パターン領域に含まれる全画素の画素値と、基準パターン領域をセグメント領域に分割するための情報を含んでいる。基準パターン領域に含まれる全画素の画素値は、基準パターン領域に含まれるDP光のドットパターンに相応するものになる。また、基準パターン領域に含まれる全画素の画素値のマッピング領域をセグメント領域に区分することで、各セグメント領域に含まれる画素の画素値が取得される。なお、基準テンプレートは、さらに、各セグメント領域に含まれる画素の画素値を、セグメント領域毎に保持していても良い。
 構成された基準テンプレートは、図2のメモリ25に、消去不可能な状態で保持される。
 こうしてメモリ25に保持された基準テンプレートは、投射光学系11から検出対象物体の各部までの距離を算出する際に参照される。
 たとえば、図4(a)に示すように距離Lsよりも近い位置に物体がある場合、基準パターン上の所定のセグメント領域Snに対応するDP光(DPn)は、物体によって反射され、セグメント領域Snとは異なる領域Sn’に入射する。投射光学系11と受光光学系12はX軸方向に隣り合っているため、セグメント領域Snに対する領域Sn’の変位方向はX軸に平行となる。同図の場合、物体が距離Lsよりも近い位置にあるため、領域Sn’は、セグメント領域Snに対してX軸正方向に変位する。物体が距離Lsよりも遠い位置にあれば、領域Sn’は、セグメント領域Snに対してX軸負方向に変位する。
 セグメント領域Snに対する領域Sn’の変位方向と変位量をもとに、投射光学系11からDP光(DPn)が照射された物体の部分までの距離Lrが、距離Lsを用いて、三角測量法に基づき算出される。同様にして、他のセグメント領域に対応する物体の部分について、投射光学系11からの距離が算出される。
 かかる距離算出では、基準テンプレートのセグメント領域Snが、実測時においてどの位置に変位したかを検出する必要がある。この検出は、実測時にCMOSイメージセンサ124上に照射されたDP光のドットパターンと、セグメント領域Snに含まれるドットパターンとを照合することによって行われる。
 図5は、かかる検出の手法を説明する図である。同図(a)は、CMOSイメージセンサ124上における基準パターン領域とセグメント領域の設定状態を示す図、同図(b)は、実測時におけるセグメント領域の探索方法を示す図、同図(c)は、実測されたDP光のドットパターンと、基準テンプレートのセグメント領域に含まれるドットパターンとの照合方法を示す図である。
 たとえば、同図(a)のセグメント領域S1の実測時における変位位置を探索する場合、同図(b)に示すように、セグメント領域S1が、範囲P1~P2において、X軸方向に1画素ずつ送られ、各送り位置において、セグメント領域S1のドットパターンと、実測されたDP光のドットパターンのマッチング度合いが求められる。この場合、セグメント領域S1は、基準パターン領域の最上段のセグメント領域群を通るラインL1上のみをX軸方向に送られる。これは、上記のように、通常、各セグメント領域は、実測時において、基準テンプレートにより設定された位置からX軸方向にのみ変位するためである。すなわち、セグメント領域S1は、最上段のラインL1上にあると考えられるためである。このように、X軸方向にのみ探索を行うことで、探索のための処理負担が軽減される。
 なお、実測時には、検出対象物体の位置によっては、セグメント領域が基準パターン領域の範囲からX軸方向にはみ出すことが起こり得る。このため、範囲P1~P2は、基準パターン領域のX軸方向の幅よりも広く設定される。
 上記マッチング度合いの検出時には、ラインL1上に、セグメント領域S1と同じサイズの領域(比較領域)が設定され、この比較領域とセグメント領域S1との間の類似度が求められる。すなわち、セグメント領域S1の各画素の画素値と、比較領域の対応する画素の画素値との差分が求められる。そして、求めた差分を比較領域の全ての画素について加算した値Rsadが、類似度を示す値として取得される。
 たとえば、図5(c)のように、一つのセグメント領域中に、m列×n行の画素が含まれている場合、セグメント領域のi列、j行の画素の画素値T(i,j)と、比較領域のi列、j行の画素の画素値I(i,j)との差分が求められる。そして、セグメント領域の全ての画素について差分が求められ、その差分の総和により、値Rsadが求められる。すなわち、値Rsadは、次式により算出される。
Figure JPOXMLDOC01-appb-M000001
 値Rsadが小さい程、セグメント領域と比較領域との間の類似度が高い。
 探索時には、比較領域が、ラインL1上を1画素ずつずらされつつ順次設定される。そして、ラインL1上の全ての比較領域について、値Rsadが求められる。求めた値Rsadの中から、閾値より小さいものが抽出される。閾値より小さい値Rsadが無ければ、セグメント領域S1の探索はエラーとされる。そして、抽出されたRsadの中で最も値が小さいものに対応する比較領域が、セグメント領域S1の移動領域であると判定される。ラインL1上のセグメント領域S1以外のセグメント領域も、上記と同様の探索が行われる。また、他のライン上のセグメント領域も、上記と同様、そのライン上に比較領域が設定されて、探索が行われる。
 こうして、実測時に取得されたDP光のドットパターンから、各セグメント領域の変位位置が探索されると、上記のように、その変位位置に基づいて、三角測量法により、各セグメント領域に対応する検出対象物体の部位までの距離が求められる。
 ところで、DP光のドットパターンは、DOE114の形状や位置、および、レーザ光源111から出射されるレーザ光の波長等に依存して変わり得る。しかしながら、これらの要素は、温度によって変化し易く、また、時間の経過によっても変化し得る。特に、DOE114が樹脂材料により形成された場合には、温度によってDOE114の特性が変わり易く、これに伴いドットパターンも変化し易い。このようにドットパターンが変化すると、基準テンプレートとして保持されたドットパターンが適正でなくなり、実測時のドットパターンと基準テンプレートに保持されたドットパターンとの照合が適正に行われなくなる。その結果、検出対象物体に対する距離の検出精度が低下する惧れがある。
 図6は、上記のような要因により、実測時のセグメント領域S1がラインL1から外れた状態を示す図である。同図(a)では、セグメント領域S1がラインL1の上側(Y軸正方向)に外れ、同図(b)では、セグメント領域S1がラインL1の下側(Y軸負方向)に外れている。このような場合、上記のようにラインL1上を探索しても、セグメント領域S1の変位領域を抽出できない。よって、セグメント領域S1の探索結果はエラーとなり、これにより、検出対象物体に対する距離検出の精度が劣化する。
 本実施の形態では、かかる問題を解消するために、実測時のDP光のドットパターンに基づいて、基準テンプレートを更新したテンプレートが生成され、この更新テンプレートを用いて、セグメント領域の探索が行われる。
 図7は、テンプレート更新時の処理を示す図である。図7の処理は、図2の更新部21bによって行われる。更新部21bは、実測時において、所定の時間間隔で、図7(a)の処理を行う。
 図7(a)を参照して、更新部21bは、前回の更新時に温度センサ115から取得した温度(前回温度)と現在温度センサ115により検出された温度(現在温度)との差分が閾値Tsを超えるかを判定する(S101)。なお、情報取得装置1の起動時には、基準テンプレートを構成したときの基準温度と現在温度との差分が閾値Tsを超えるかが判定される。
 S101の判定がYESであれば、テンプレートの更新が行われる(S103)。S101の判定がNOであれば、直近の実測時におけるセグメント領域の探索において、探索がエラーとなったセグメント領域の全セグメント領域に対する割合が閾値Esを超えるかが判定される。S102の判定がYESであれば、テンプレートの更新が行われ(S103)、NOであれば、テンプレートの更新が終了する。
 図7(b)は、図7(a)のS103における更新処理を示すフローチャートである。図7(b)の処理は、メモリ25に予め保持された上記基準テンプレートと、実測時に取得されメモリ25に展開されたドットパターンの情報とを参照して行われる。基準テンプレートは、上記のように、基準パターン領域の位置に関する情報と、基準パターン領域に含まれる全画素の画素値と、基準パターン領域をセグメント領域に分割するための情報を含んでいる。以下では、説明の便宜上、ドットパターンをベースに、説明行う。
 図7(b)を参照して、更新部21bは、まず、実測時のDP光のCMOSイメージセンサ124上のドットパターンから、予め設定された参照セグメント領域の変位位置を探索する(S201)。
 本実施の形態では、図8(a)に示す如く、基準テンプレートの基準パターン領域の4隅に、参照セグメント領域Sr1~Sr4が設定されている。これら参照セグメント領域Sr1~Sr4が、図8(b)に示す探索領域MA内のどの位置にあるかが探索される。探索領域MAは、CMOSイメージセンサ124の受光領域の略全てをカバーする。また、探索は、参照セグメント領域Sr1~Sr4のそれぞれについて、探索領域MAの全てを照合することにより行われる。すなわち、探索領域MAの最上段に対して探索が行われた後、最上段よりも1画素だけ下にある次の段について探索が行われ、以下同様に、下の段へと探索が行われる。探索は、図5(c)を参照して説明したと同様の方法で行われる。
 図7(b)に戻り、S201において、参照セグメント領域Sr1~Sr4の変位位置が取得されると、更新部21bは、取得された変位位置に基づいて、CMOSイメージセンサ124上の現在のドットパターンに適する領域(更新パターン領域)を設定する(S202)。本実施の形態では、参照セグメント領域Sr1~Sr4の変位位置から参照セグメント領域Sr1~Sr4のY軸方向の変位量が求められる。そして、基準パターン領域の四隅をそれぞれ参照セグメント領域Sr1~Sr4のY軸方向の変位量だけ変位させた位置を結ぶ矩形状の領域が、更新パターン領域として設定される。
 次に、更新部21bは、設定された更新パターン領域に、基準テンプレートのドットパターンを適用する(S203)。さらに、更新パターン領域を分割してセグメント領域を設定する(S204)。そうして、更新部21bは、更新パターン領域の位置に関する情報と、更新パターン領域に含まれるドットパターンに関する情報(全画素の画素値)と、更新パターン領域をセグメント領域に分割するための情報を、更新テンプレートとして、メモリ25に保持する。更新パターン領域に含まれる全画素の画素値のマッピング領域をセグメント領域に区分することで、各セグメント領域に含まれる画素の画素値(ドットパターン)が取得される。
 こうして、更新テンプレートが構成された後は、更新テンプレートを用いて、上述のセグメント領域の探索が行われる。
 図9および図10に、更新テンプレートの構成例を示す。
 図9(a)は、図7(b)のS201にて探索された参照セグメント領域Sr1~Sr4の位置が、基準パターン領域に対して、上方向(Y軸正方向)に同じ量だけずれた場合を示している。この場合、図9(b)のように、基準パターン領域の四隅をそれぞれ参照セグメント領域Sr1~Sr4のY軸方向の変位量だけ上方向(Y軸正方向)変位させた位置を結ぶ矩形状の領域が、更新パターン領域として設定される。
 そして、設定された更新パターン領域に、基準テンプレートのドットパターンが適用される。この場合、基準パターン領域と更新パターン領域は同じサイズであるため、基準パターン領域のドットパターンがそのまま更新パターン領域に割り当てられる。しかる後、更新パターン領域がセグメント領域にマトリックス状に分割される。こうして、更新テンプレートが構成される。
 図9(c)は、図7(b)のS201にて探索された参照セグメント領域Sr1、Sr2の位置が、基準パターン領域に対して、上方向(Y軸正方向)に同じ量だけずれ、参照セグメント領域Sr3、Sr4の位置が、基準パターン領域に対して、下方向(Y軸負方向)に同じ量だけずれた場合を示している。この場合、図9(d)のように、基準パターン領域の上の二隅をそれぞれ参照セグメント領域Sr1、Sr2のY軸方向の変位量だけ上方向(Y軸正方向)変位させた位置と、基準パターン領域の下の二隅をそれぞれ参照セグメント領域Sr3、Sr4のY軸方向の変位量だけ下方向(Y軸負方向)変位させた位置とを結ぶ矩形状の領域が、更新パターン領域として設定される。
 そして、設定された更新パターン領域に、基準テンプレートのドットパターンが適用される。この場合、更新パターン領域は基準パターン領域がY軸方向に引き伸ばされた形状であるため、基準パターン領域のドットパターンが、Y軸方向に均等に引き延ばされるようにして、更新パターン領域に割り当てられる。しかる後、更新パターン領域がセグメント領域にマトリックス状に分割される。本実施の形態では、更新テンプレートのセグメント領域は、基準テンプレートのセグメント領域と同じサイズである。このため、更新テンプレートは、セグメント領域の数が増加している。こうして、更新テンプレートが構成される。
 図10(a)は、図7(b)のS201にて探索された参照セグメント領域Sr1、Sr2の位置が、基準パターン領域に対して、下方向(Y軸負方向)に同じ量だけずれ、参照セグメント領域Sr3、Sr4の位置が、基準パターン領域に対して、上方向(Y軸正方向)に同じ量だけずれた場合を示している。この場合、図10(b)のように、基準パターン領域の上の二隅をそれぞれ参照セグメント領域Sr1、Sr2のY軸方向の変位量だけ下方向(Y軸負方向)変位させた位置と、基準パターン領域の下の二隅をそれぞれ参照セグメント領域Sr3、Sr4のY軸方向の変位量だけ上方向(Y軸正方向)変位させた位置とを結ぶ矩形状の領域が、更新パターン領域として設定される。
 そして、設定された更新パターン領域に、基準テンプレートのドットパターンが適用される。この場合、更新パターン領域は基準パターン領域がY軸方向に縮められた形状であるため、基準パターン領域のドットパターンが、Y軸方向に均等に縮められるようにして、更新パターン領域に割り当てられる。しかる後、更新パターン領域がセグメント領域にマトリックス状に分割される。本実施の形態では、更新テンプレートのセグメント領域は、基準テンプレートのセグメント領域と同じサイズである。このため、更新テンプレートは、セグメント領域の数が減少している。こうして、更新テンプレートが構成される。
 図10(c)は、図7(b)のS201にて探索されたSr2の位置が、基準パターン領域に対して、上方向(Y軸正方向)にずれ、参照セグメント領域Sr4の位置が、基準パターン領域に対して、下方向(Y軸負方向)にずれた場合を示している。この場合、図10(d)のように、基準パターン領域の右の二隅をそれぞれ参照セグメント領域Sr2、Sr4のY軸方向の変位量だけ上方向(Y軸正方向)と下方向(Y軸負方向)に変位させた位置と、基準パターン領域の左の二隅とを結ぶ矩形状の領域が、更新パターン領域として設定される。この場合、更新パターン領域は、台形となる。
 そして、設定された更新パターン領域に、基準テンプレートのドットパターンが適用される。この場合、更新パターン領域は基準パターン領域がY軸方向に引き伸ばされた形状であるため、基準パターン領域のドットパターンが、更新パターン領域のY軸方向の距離に応じてY軸方向に引き延ばされるようにして、更新パターン領域に割り当てられる。しかる後、更新パターン領域がセグメント領域にマトリックス状に分割される。
 本実施の形態では、更新パターン領域内に最大の矩形領域が設定され、この領域がセグメント領域にマトリックス状に分割される。こうして、更新テンプレートが構成される。
 なお、図10(c)、(d)では、更新パターン領域内に設定される最大の矩形領域は、基準パターン領域と同じサイズである。また、更新パターン領域と基準パターン領域は、位置が同じである。さらに、本実施の形態では、更新テンプレートのセグメント領域は、基準テンプレートのセグメント領域と同じサイズであるため、更新テンプレートは、基準テンプレートとセグメント領域の数が同じである。しかしながら、更新テンプレートでは、基準パターン領域のドットパターンが台形状に引き伸ばされたドットパターンであるため、各セグメント領域のドットパターンは、基準テンプレートの対応するセグメント領域のドットパターンと相違している。
 なお、図10(c)、(d)には、更新パターン領域が台形になる場合の一つの例を示したが、更新パターン領域が他の形状の台形になる場合も、上記と同様、更新パターン領域に基準テンプレートのドットパターンが適用された後、更新パターン領域内に最大の矩形領域が設定され、この領域がセグメント領域にマトリックス状に分割されて、更新テンプレートが構成される。
 以上、本実施の形態によれば、前記基準テンプレートに設定された参照セグメント領域の実測時における変位に基づいて、前記基準テンプレートが更新され、更新後のテンプレート(更新テンプレート)を用いてセグメント領域の探索が行われるため、レーザ光のドットパターンが、DOE114の形状や位置、および、レーザ光の波長等によって変化しても、適正に、セグメント領域の探索が行われ得る。よって、検出対象物体までの距離を適正に検出することができる。
 また、本実施の形態によれば、図7(a)に示すように、温度変化が大きい場合やセグメント領域の探索がエラーとなった割合が大きい場合等、レーザ光のドットパターンが変化する可能性が高い場合に、基準テンプレートに対する更新処理が行われるため、基準テンプレートの更新を、効果的に行うことができる。
 以上、本発明の実施の形態について説明したが、本発明は、上記実施の形態に何ら制限されるものではなく、また、本発明の実施の形態も上記の他に種々の変更が可能である。
 たとえば、上記実施の形態では、基準パターン領域を上下方向(Y軸方向)にのみシフト・変形させることにより、更新パターン領域が構成された。これは、X軸方向に基準パターン領域を変形させなくても、更新テンプレートによって、セグメント領域を探索できるためである。すなわち、上記実施の形態による更新テンプレートでは、セグメント領域の位置が、適正な位置からX軸方向にずれる可能性がある。しかし、X軸方向のずれであるため、上記のようにX軸方向に探索が行われると、実測時におけるセグメント領域の変位位置は、エラーとならずに取得され得る。この場合、取得された変位位置は、本来の位置からずれることが起こり得るが、通常、このずれは、それほど大きくない。よって、距離情報の取得は、さほど問題なく行われ得る。
 しかしながら、セグメント領域の変位位置のX軸方向のずれをも解消する場合には、図11に示すように、基準パターン領域をX軸方向にも変形させて更新パターン領域を構成しても良い。図11(a)、(b)は、基準パターン領域をX軸方向にも拡張させて更新パターン領域を構成した例を示し、図11(c)、(d)は、基準パターン領域をX軸方向にも縮小させて更新パターン領域を構成した例を示す。
 この場合、基準パターン領域を、Y軸方向と同様の割合でX軸方向に拡張・縮小する方法がとられ得る。この他、実測時に検出された温度に基づいて、基準パターン領域をX軸方向に拡張・縮小させて更新パターン領域を構成しても良い。この場合、温度と、X軸方向の拡張・縮小の割合とが対応付けられて、メモリ25に格納される。かかる温度による調整は、更新パターン領域が基準パターン領域に対してY軸方向に拡張・縮小されなくても適用され得る。
 また、上記実施の形態では、更新パターン領域が基準パターン領域に対して拡張・縮小されても、更新テンプレートのセグメント領域のサイズは、基準テンプレートのセグメント領域のサイズと同じとされた。これに代えて、図12に示すように、更新テンプレートのセグメント領域の数と、基準テンプレートのセグメント領域の数を同じとしても良い。図12(a)、(b)は、基準パターン領域をY軸方向に拡張させて更新パターン領域を構成した例を示し、図12(c)、(d)は、基準パターン領域をY軸方向に縮小させて更新パターン領域を構成した例を示す。この場合、更新テンプレートのセグメント領域は、基準テンプレートのセグメント領域がY軸方向に拡張・縮小された形状となる。
 また、上記実施の形態では、参照セグメント領域Sr1~Sr4として、基準テンプレートのセグメント領域の一部が用いられたが、基準テンプレートのセグメント領域とは別の領域が、参照セグメント領域として設定されても良い。
 また、上記実施の形態では、参照セグメント領域Sr1~Sr4が基準パターン領域の四隅に設定されたが、参照セグメント領域は、このように四隅に設定する他、Y軸方向に離れた2つの領域と、Y軸方向に離れるとともに前記2つの領域とY軸方向において重ならない他の2つの領域に設定されても良い。こうすると、上記実施の形態と同様、基準パターン領域を、Y軸方向にシフトさせるのみならず、Y軸方向に変形させて、更新パターン領域を構成することができる。
 また、図13(a)のように、基準パターン領域の辺部分に参照セグメント領域Sr5~Sr8を追加し、参照セグメント領域の設定数を増加させても良い。こうすると、さらに細かく基準レイアウト領域を変形させて更新パターン領域を設定することができる。また、図13(b)のように、基準パターン領域の中心に参照セグメント領域Sr9を追加してもよい。こうすると、参照セグメント領域Sr9の変位位置を重心として、更新パターン領域を設定することができる。
 なお、図13(c)のように、上下に2つのみ参照セグメント領域Sr10、Sr11を設定しても良い。ただし、この場合は、Y軸方向に基準パターン領域をシフト、拡張または縮小させて更新パターン領域を構成することはできるが、図10(c)、(d)のように、基準パターン領域を台形状に変形させて更新パターン領域を構成することはできない。
 また、図13(d)のように、基準パターン領域の対角の2つの隅と中心に、3つの参照セグメント領域Sr12、Sr13、Sr14を設定しても良い。この場合も、図10(c)、(d)のように、基準パターン領域を台形状に変形させて更新パターン領域を構成することはできないが、参照セグメント領域Sr14の変位位置を重心として、更新パターン領域を設定することができる。
 また、上記実施の形態では、図4(b)に示すように各セグメント領域が互いに重なることなく設定されたが、各セグメント領域が、その上下のセグメント領域と一部重なるように設定されても良い。また、各セグメント領域が、その左右のセグメント領域と一部重なってマトリックス状に並ぶように設定されても良い。この場合の基準テンプレートは、CMOSイメージセンサ124上における基準パターン領域の位置に関する情報と、基準パターン領域に含まれる全画素の画素値と、セグメント領域のサイズ(縦横の幅)に関する情報と、各セグメント領域の基準パターン領域上の位置に関する情報を含む。
 また、基準パターン領域の形状は、上記実施の形態のように長方形である他、正方形等、他の形状であっても良い。また、更新パターン領域の形状も適宜変更可能である。
 さらに、上記実施の形態では、受光素子として、CMOSイメージセンサ124を用いたが、これに替えて、CCDイメージセンサを用いることもできる。
 本発明の実施の形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。
     1 情報取得装置
    11 投射光学系
   111 レーザ光源(光源)
   112 コリメータレンズ(投射光学系)
   113 アパーチャ(投射光学系)
   114 DOE(投射光学系)
   115 温度センサ
   124 CMOSイメージセンサ(受光素子)
    21 CPU
   21b 更新部
    25 メモリ(記憶部)

Claims (6)

  1.  光を用いて目標領域の情報を取得する情報取得装置において、
     所定波長帯域の光を出射する光源と、
     前記光源から出射された光を、所定のドットパターンでもって、前記目標領域に向けて投射する投射光学系と、
     前記目標領域から反射された反射光を受光して信号を出力する受光素子と、
     前記受光素子によって受光される前記光の基準パターンに複数の基準セグメント領域を設定した基準テンプレートを保持する記憶部と、
     前記基準テンプレートを更新する更新部と、を有し、
     前記更新部は、前記基準テンプレートに設定された参照セグメント領域の実測時における変位に基づいて、前記基準テンプレートを更新する、
    ことを特徴とする情報取得装置。
  2.  請求項1に記載の情報取得装置において、
     前記更新部は、前記基準パターンと、実測時に前記受光素子によって受光された前記光の実測パターンとを照合し、前記基準パターン上に設定された参照セグメント領域の前記実測パターン上の位置から更新パターン領域を設定し、設定した前記更新パターン領域に前記基準パターンを適用して更新パターンを設定し、設定した更新パターンに複数の更新セグメント領域を設定して更新テンプレートを構成する、
    ことを特徴とする情報取得装置。
  3.  請求項2に記載の情報取得装置において、
     前記更新パターン領域は、前記光源と前記受光素子との並び方向に垂直な方向における、前記受光素子上の前記参照セグメント領域の変位量に基づいて、前記基準パターンの基準パターン領域を、前記垂直な方向に、シフトまたは変形させることにより設定される、
    ことを特徴とする情報取得装置。
  4.  請求項3に記載の情報取得装置において、
     前記参照セグメント領域は、前記垂直な方向に離れた2つの領域と、前記垂直な方向に離れるとともに前記2つの領域と前記垂直な方向において重ならない他の2つの領域に設定される、
    ことを特徴とする情報取得装置。
  5.  請求項1ないし4の何れか一項に記載の情報取得装置において、
     当該情報取得装置内部の温度を検出する温度センサを更に備え、
     前記更新部は、前記温度センサにより検出された温度の変化が所定閾値を超えると、前記基準テンプレートの更新を行う、
    ことを特徴とする情報取得装置。
  6.  請求項1ないし5の何れか一項に記載の情報取得装置を有する物体検出装置。
PCT/JP2011/062663 2010-08-25 2011-06-02 情報取得装置および物体検出装置 WO2012026180A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2012530563A JP5143314B2 (ja) 2010-08-25 2011-06-02 情報取得装置および物体検出装置
CN2011800051332A CN102686975A (zh) 2010-08-25 2011-06-02 物体检测装置及信息取得装置
US13/596,991 US20120327310A1 (en) 2010-08-25 2012-08-28 Object detecting device and information acquiring device

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2010-188925 2010-08-25
JP2010188925 2010-08-25
JP2011-116701 2011-05-25
JP2011116701 2011-05-25

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/596,991 Continuation US20120327310A1 (en) 2010-08-25 2012-08-28 Object detecting device and information acquiring device

Publications (1)

Publication Number Publication Date
WO2012026180A1 true WO2012026180A1 (ja) 2012-03-01

Family

ID=45723196

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/062663 WO2012026180A1 (ja) 2010-08-25 2011-06-02 情報取得装置および物体検出装置

Country Status (4)

Country Link
US (1) US20120327310A1 (ja)
JP (1) JP5143314B2 (ja)
CN (1) CN102686975A (ja)
WO (1) WO2012026180A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013206044A (ja) * 2012-03-28 2013-10-07 Denso It Laboratory Inc 情報処理装置
JP2015111101A (ja) * 2013-11-05 2015-06-18 キヤノン株式会社 情報処理装置および方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2580908C1 (ru) * 2014-11-10 2016-04-10 Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Московский государственный университет геодезии и картографии" (МИИГАиК) Способ определения пространственного положения объектов и устройство для его осуществления
CN109974976B (zh) * 2017-12-28 2021-09-21 舜宇光学(浙江)研究院有限公司 多温度标定系统以及多温度标定方法
CN108917639A (zh) * 2018-05-15 2018-11-30 深圳奥比中光科技有限公司 深度成像系统及其温度误差校正方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001147110A (ja) * 1999-11-22 2001-05-29 Sony Corp ランダムパターン生成装置とその方法、距離画像生成装置とその方法、およびプログラム提供媒体
JP2003269915A (ja) * 2002-03-13 2003-09-25 Omron Corp 三次元監視装置
JP2006214816A (ja) * 2005-02-02 2006-08-17 Nikon Corp 半導体検査装置
JP2010101683A (ja) * 2008-10-22 2010-05-06 Nissan Motor Co Ltd 距離計測装置および距離計測方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AUPO798697A0 (en) * 1997-07-15 1997-08-07 Silverbrook Research Pty Ltd Data processing method and apparatus (ART51)
JP4024719B2 (ja) * 2003-04-14 2007-12-19 株式会社トプコン 電子式測量装置
US7526103B2 (en) * 2004-04-15 2009-04-28 Donnelly Corporation Imaging system for vehicle
JP4940800B2 (ja) * 2006-07-12 2012-05-30 オムロン株式会社 変位センサ
JP5073256B2 (ja) * 2006-09-22 2012-11-14 株式会社トプコン 位置測定装置及び位置測定方法及び位置測定プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001147110A (ja) * 1999-11-22 2001-05-29 Sony Corp ランダムパターン生成装置とその方法、距離画像生成装置とその方法、およびプログラム提供媒体
JP2003269915A (ja) * 2002-03-13 2003-09-25 Omron Corp 三次元監視装置
JP2006214816A (ja) * 2005-02-02 2006-08-17 Nikon Corp 半導体検査装置
JP2010101683A (ja) * 2008-10-22 2010-05-06 Nissan Motor Co Ltd 距離計測装置および距離計測方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013206044A (ja) * 2012-03-28 2013-10-07 Denso It Laboratory Inc 情報処理装置
JP2015111101A (ja) * 2013-11-05 2015-06-18 キヤノン株式会社 情報処理装置および方法
US10070117B2 (en) 2013-11-05 2018-09-04 Canon Kabushiki Kaisha Three-dimensional measuring apparatus
US10979694B2 (en) 2013-11-05 2021-04-13 Canon Kabushiki Kaisha Information processing apparatus, method, and storage medium

Also Published As

Publication number Publication date
JP5143314B2 (ja) 2013-02-13
JPWO2012026180A1 (ja) 2013-10-28
US20120327310A1 (en) 2012-12-27
CN102686975A (zh) 2012-09-19

Similar Documents

Publication Publication Date Title
WO2012137674A1 (ja) 情報取得装置、投射装置および物体検出装置
JP5138116B2 (ja) 情報取得装置および物体検出装置
JP5138119B2 (ja) 物体検出装置および情報取得装置
JP5143312B2 (ja) 情報取得装置、投射装置および物体検出装置
JP5214062B1 (ja) 情報取得装置および物体検出装置
JP5143314B2 (ja) 情報取得装置および物体検出装置
JP6187671B2 (ja) 自己位置算出装置及び自己位置算出方法
JP2012237604A (ja) 情報取得装置、投射装置および物体検出装置
WO2014108976A1 (ja) 物体検出装置
JP5138115B2 (ja) 情報取得装置及びその情報取得装置を有する物体検出装置
WO2013046927A1 (ja) 情報取得装置および物体検出装置
JP2014044113A (ja) 情報取得装置および物体検出装置
WO2012144340A1 (ja) 情報取得装置および物体検出装置
JP2014052307A (ja) 情報取得装置および物体検出装置
US20120327037A1 (en) Optical touch system and calculation method thereof
JP2014021017A (ja) 情報取得装置および物体検出装置
JP2013234956A (ja) 情報取得装置および物体検出装置
KR102029786B1 (ko) 패턴을 구비한 디스플레이 장치 및 상기 디스플레이 장치에 형성된 패턴을 인식하여 입력 위치 검출이 가능한 이미지 인식 장치 및 방법
JP5138120B2 (ja) 物体検出装置および情報取得装置
WO2013031448A1 (ja) 物体検出装置および情報取得装置
JP2014238262A (ja) 情報取得装置および物体検出装置
JP2014035304A (ja) 情報取得装置および物体検出装置
JP2014098585A (ja) 情報取得装置および物体検出装置
JP2006226676A (ja) マーク認識装置およびマーク認識方法

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180005133.2

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11819653

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012530563

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11819653

Country of ref document: EP

Kind code of ref document: A1