WO2007069721A1 - 三次元形状データの記憶・表示方法と装置および三次元形状の計測方法と装置 - Google Patents

三次元形状データの記憶・表示方法と装置および三次元形状の計測方法と装置 Download PDF

Info

Publication number
WO2007069721A1
WO2007069721A1 PCT/JP2006/325042 JP2006325042W WO2007069721A1 WO 2007069721 A1 WO2007069721 A1 WO 2007069721A1 JP 2006325042 W JP2006325042 W JP 2006325042W WO 2007069721 A1 WO2007069721 A1 WO 2007069721A1
Authority
WO
WIPO (PCT)
Prior art keywords
dimensional shape
error distribution
representative point
measurement
botacell
Prior art date
Application number
PCT/JP2006/325042
Other languages
English (en)
French (fr)
Inventor
Toshihiro Hayashi
Yukihiro Kawano
Hideo Terada
Original Assignee
Ihi Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ihi Corporation filed Critical Ihi Corporation
Priority to DE112006003361T priority Critical patent/DE112006003361T5/de
Priority to US12/096,871 priority patent/US8300048B2/en
Priority to JP2007550239A priority patent/JP4650750B2/ja
Priority to CN2006800474232A priority patent/CN101331380B/zh
Publication of WO2007069721A1 publication Critical patent/WO2007069721A1/ja

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/005Tree description, e.g. octree, quadtree
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction

Definitions

  • the present invention relates to a method and apparatus for storing and displaying a 3D shape data for measuring a plurality of measurement position forces of a stationary 3D shape and integrating and restoring the distance data, and a 3D shape measurement. It relates to a method and a device.
  • Three-dimensional shape measurement technology has become widespread, and three-dimensional shape data is used in various application fields, for example, shape measurement of machine parts' workpieces', identification of self-positions in mobile robots, measurement of topography 'structures, etc.
  • Measurement data in three-dimensional shape measurement is, for example, polar coordinate values with the measurement position as the origin
  • the Botacel structure has a constant data volume and enables data integration with multiple viewpoints.
  • Patent Document 2 “Environmental Model Input Device” proposes a means for accumulating probability values in each botasel. This method integrates environmental models without depending on the frequency of giving probabilities, making it possible to create accurate environmental models.
  • Non-Patent Document 1 assumes a plane, but corrects the incorrect probability value of the botacell caused by the error included in the measurement data to V and returns it to the value for the botacell holding the probability value. Propose! /
  • Patent Document 2 JP-A-9 81788, “Environmental Model Input Device”
  • Non-Patent Document 1 describes “Learning Occupancy Grid Maps With
  • Non-patent document 2 Kiyohide Sekimoto, et al., “Development of 3D laser radar”, Ishikawajima-Harima Technical Report Vol. 43 No. 4 (2003-7)
  • the boatacell structure of Patent Document 1 has a problem that the data size increases as the number of force divisions that repeats the division of the buttonel cell increases. For this reason, the division depth is generally fixed, which limits the resolution. In other words, it is not possible to express a resolution that is greater than the size of the divided botacell. In addition, there is a botasel that is generated by mistake due to data containing errors. For this reason, it cannot cope with data containing errors.
  • Non-Patent Document 1 Since the botacell structure of Non-Patent Document 1 includes a process of lowering the probability, it has a function of erasing a botacell that holds an erroneous probability value. However, in general, there are both the area where the measurement object exists and the area where the measurement object does not exist in the Botacel, so even if multiple measurements are combined, it does not converge to the shape! There is a problem.
  • the present invention has been developed to solve the above-described problems.
  • the object of the present invention is to restore a stationary three-dimensional shape by integrating distance data from multiple positions, and to increase the resolution without significantly increasing the data size.
  • An object of the present invention is to provide a method and apparatus for storing and displaying three-dimensional shape data, and a method and apparatus for measuring a three-dimensional shape, which can cope with data including errors.
  • An output step of outputting the botasel position, representative point, and error distribution to an output device A method for storing and displaying three-dimensional shape data is provided. Further, according to the present invention, there is provided a three-dimensional shape measurement method for recovering a three-dimensional shape from the coordinate value of a measurement point on the three-dimensional shape and outputting three-dimensional shape data,
  • Model building steps to build an environmental model
  • the method for storing and displaying the three-dimensional shape data or the method for measuring the three-dimensional shape may include the following contents.
  • the coordinate value and error distribution are set as the coordinate value and error distribution of the representative point.
  • a model update step for updating the environmental model, and in the model update step, a Botacel corresponding to the coordinate value of the newly input measurement point is searched.
  • the error distributions do not overlap with each other, it is preferable to further divide the voxel into a plurality of hierarchical hierarchies so that only a single representative point exists within a single botacell.
  • an octree or a KD tree is used to divide the botacell.
  • a coordinate value on the three-dimensional shape is sequentially acquired as distance data having an arbitrary measurement position as the origin using a distance sensor while moving the origin.
  • the distance sensor position and error distribution are obtained, it is preferable to synthesize the distance sensor position error distribution and the measurement data error distribution.
  • the newly acquired error distribution is compared with the error distribution in the already set botacell, and when the error distributions overlap each other, As a result of resetting a new error distribution and a new representative point, when the new representative point moves into another botacel,
  • the new error distribution is compared with the error distribution in the other button cell that has already been set.
  • A When the error distributions overlap each other, From both error distributions, or from both error distributions and the representative points already set in the button cell and the new representative points, a new error distribution and a new representative point are reset, and (B) If they do not overlap with each other, in some cases, only a single representative point exists within a single botasel, and the botasel is further divided into a plurality of hierarchies.
  • a new representative point is obtained by the Kalman filter from the newly inputted coordinate value of the measured point and its error distribution, and the representative point and its error distribution in the already set button cell. Get the error distribution and reset it.
  • the position of the representative point of the button cell is output to the output device as a measured value of a three-dimensional shape, and an index indicating the reliability or accuracy of the measured value is used as an error distribution inside the button cell. Output to the output device based on the size of.
  • the outputting step when outputting the position of the representative point of the botacel to the output device as a measured value of a three-dimensional shape, a size of an error distribution inside the voxel is larger than a predetermined reference value In addition, if the reliability or accuracy of the measurement value is lower than a predetermined standard, the measurement value of the voxel is not output to the output device.
  • the position force of the distance sensor is output to the output device as the three-dimensional shape measurement value of the representative point of the boat cell in the environmental model in a range where the distance sensor can measure the position.
  • a storage / display device for 3D shape data for restoring a 3D shape from the coordinate values of a measurement point on the 3D shape
  • a data input device for inputting coordinate values on a three-dimensional shape to a computer
  • a matching device for setting and storing a representative point and its error distribution in the inside of the button cell corresponding to the coordinate value
  • a data input device for inputting coordinate values on a three-dimensional shape to a computer
  • a matching device for setting and storing a representative point and its error distribution in the inside of the button cell corresponding to the coordinate value
  • a three-dimensional shape measuring apparatus comprising a data transmission device that outputs at least one of the representative point, the botacell position, and the error distribution to an output device.
  • the three-dimensional shape data storage 'display device or the three-dimensional shape measurement device may include the following contents.
  • the three-dimensional shape data storage 'display device or the three-dimensional shape measuring device is represented by the matching device inside the button cell corresponding to the coordinate value.
  • a model updating device for updating the environmental model after setting and storing a point and its error distribution;
  • the three-dimensional shape data storage 'display device or the three-dimensional shape measurement device is represented by the matching device inside the button cell corresponding to the coordinate value.
  • a model updating device for updating the environmental model after setting and storing a point and its error distribution;
  • the coordinate value and error distribution are set as the coordinate value and error distribution of the representative point.
  • the three-dimensional shape data storage / display device or the three-dimensional shape measuring device is represented by the matching device in the inside of the button cell corresponding to the coordinate value.
  • a model updating device for updating the environmental model after setting and storing a point and its error distribution;
  • the newly acquired error distribution is compared with the error distribution in the already set botacell,
  • the new error distribution and the new error distribution are calculated from both error distributions, or both error distributions and the coordinate values of the representative points already set in the button cell and the newly input measured point. Re-set the representative point,
  • the voxel is further divided into a plurality of hierarchically so that there is only a single representative point in a single votacell.
  • the matching device sets and stores the probability value of the botacell in addition to the representative point and its error distribution inside the botacell.
  • the three-dimensional shape data storage 'display device or the three-dimensional shape measurement device uses a coordinate value on the three-dimensional shape as an origin as an arbitrary measurement position.
  • a distance sensor that sequentially acquires the distance data while moving the origin is provided.
  • the matching device synthesizes the error distribution of the distance sensor position and the error data distribution when the distance sensor position and error distribution are obtained. .
  • the model update device includes:
  • the new error distribution is compared with the error distribution in the other button cell that has already been set.
  • A When the error distributions overlap each other, New error distribution and new representative point are reset from both error distributions, or from both error distributions and representative points already set in the button cell and the new representative points.
  • B Error distributions overlap each other. In this case, in order to have only a single representative point in a single botacell, the botacell is further divided into a plurality of hierarchies.
  • the 3D shape data storage 'display device or the 3D shape measuring device includes a model update device that updates the environmental model after the matching step.
  • the model updating apparatus acquires a new representative point and error distribution by a Kalman filter from the newly inputted coordinate value of the measured point and its error distribution, and the representative point in the already set botacell and its error distribution. To reset.
  • the data transmission device outputs the position of the representative point of the botacel as a three-dimensional shape measurement value to the output device, and displays an index indicating the reliability or accuracy of the measurement value inside the voxel. Based on the size of the error distribution! /, Output to the output device.
  • the data transmission device When the data transmission device outputs the position of the representative point of the botacel as a three-dimensional measurement value to the output device, the size of the error distribution inside the voxel is a predetermined reference If the measured value is larger than the value, it is determined that the reliability or accuracy of the measured value is lower than a predetermined reference value, and the measured value of the button cell is not output to the output device.
  • the output device outputs the position of the representative point of the button cell in the environmental model in a range in which the distance sensor can measure the position as a three-dimensional shape measurement value to the output device.
  • a spatial region where a three-dimensional shape exists is divided into a plurality of voxels and the positions of each botacel are stored. Therefore, even if the measurement object is large, the amount of data Can be suppressed to a small data proportionate to the number of botasels.
  • the representative point and its error distribution are set and stored in the inside of the button cell corresponding to the coordinate value, information exceeding the resolution of the button cell can be expressed.
  • the maximum botacell when the maximum botacell is set to a size corresponding to the necessary minimum resolution, and there are a plurality of measurement points in a single botacell,
  • the voxel is further divided and divided into a plurality of hierarchical hierarchies so that only a single point to be measured exists within a single botasel.
  • the representative point can be used to further increase the resolution.
  • the voxel is further divided into a plurality of hierarchies in a hierarchical manner so that only a single representative point exists within a single votacell. It is possible to converge to a highly accurate shape while avoiding accumulation.
  • the method and apparatus of the present invention has a function of correcting distance data including an error into accurate information, and by repeating this, it is highly effective for long-time measurement. Converge to an accurate shape.
  • the method of the present invention is a process for updating the representative points corresponding to each botasel and the error distribution thereof with new measurement points, so the amount of calculation is small.
  • the measurement data can be successively integrated into the botacell structure with the minimum resolution required for the largest botacell, and the memory size does not greatly exceed the fixed size.
  • a new value is obtained by a Kalman filter from the newly input coordinate value of the measured point and its error distribution, and the representative point and the error distribution in the already set botasel. Since the representative point and the error distribution are acquired and reset, the shape can be obtained closer to the true value.
  • an index indicating the reliability or accuracy of the measurement value is provided. Since the error distribution inside the voxel is output to the output device, the user can select the measurement value with low reliability according to the contents of the application when using the measurement device. It's a little bit.
  • the size of the error distribution inside the voxel is predetermined. If the reliability or accuracy of the measured value is lower than a predetermined standard, the measured value of the voxel is not output to the output device. Therefore, when using a measurement device, only highly reliable measurement values can be handled in the first place, which leads to a reduction in the amount of data handled and an improvement in reliability.
  • a coordinate value on a three-dimensional shape is sequentially acquired while moving the origin as distance data having an arbitrary measurement position as the origin, and in particular, By obtaining distance data from different directions, it is possible to integrate distance data of error distributions with different distribution shapes and improve accuracy.
  • FIG. 1 is a configuration diagram of a three-dimensional laser radar disclosed in Non-Patent Document 2.
  • polar coordinate values (r, ⁇ , ⁇ ) with an arbitrary measurement position as the origin are measured as measurement results.
  • An error distribution as shown in the figure usually exists in the measurement result of the distance sensor.
  • A is a standard constant.
  • the data input device 32 includes the above-described distance sensor, and inputs coordinate values on a three-dimensional shape to a storage device.
  • the position / posture and moving distance of the distance sensor may be input using a goometer, odometer, or the like.
  • the data input device 32 may also have normal input means such as a keyboard.
  • the model building device is a device that performs a model building step described later
  • the matching device is a device that performs a matching step described later
  • the model updating device is a device that performs a model updating step described later
  • a data transmission device Is a device that outputs data to the output device 36.
  • the above-described apparatus of the present invention may be a combination of the above-described distance sensor and a normal PC (computer), or may be an apparatus in which the entirety is integrated. Also, it may be integrated into a self-propelled device.
  • the method of the present invention is a three-dimensional shape measurement method and apparatus for restoring a three-dimensional shape from the coordinate value of a measurement point on the three-dimensional shape, and includes a data input step Sl, a data correction step S2, and a model construction. It has step S3, matching step S4, model update step S5, and output step S6.
  • Sl, S2, and S4 to S6 are performed each time measurement data is obtained, and S3 can be performed only when measurement data is obtained for the first time.
  • the coordinate value on the three-dimensional shape is input to the computer storage device using the distance sensor. Also, for example, using a goometer, odometer, etc.
  • this data input step S1 it is preferable to use the three-dimensional laser radar 10 to sequentially obtain the coordinate values on the three-dimensional shape as distance data having an arbitrary measurement position as the origin and without moving the origin.
  • the coordinate value on the three-dimensional shape is This is distance data with an arbitrary measurement position as the origin, and is represented by polar coordinate values (r, ⁇ , ⁇ ). Also, the error distribution of each coordinate value is input in advance by another input means (for example, a keyboard), which is a force obtained by calculation from the polar coordinate values (r, ⁇ , ⁇ ).
  • isolated point removal In the distance data correction processing, isolated point removal, statistical processing, and the like are performed.
  • An isolated point is a point that exists in an isolated point force, and the measurement data is composed of a plurality of adjacent points. Therefore, the isolated point can be removed assuming that it is an erroneous measurement.
  • Statistical processing takes into account the error distribution included in the measurement data and corrects the distance by statistical processing (for example, average value) of multiple measurements.
  • the target three-dimensional shape can be approximated by a straight line or a plane, these should be performed.
  • FIG. 5 is a schematic diagram of model building steps when an octree is used to divide the botacell.
  • the space model where the three-dimensional shape exists is divided into a plurality of botell cells 6 that have rectangular body forces whose boundary surfaces are orthogonal to each other, and an environment model that stores each bot cell position. Build up.
  • FIG. 6 is a schematic diagram of the constructed environmental model.
  • the representative point 7 and its error distribution 8 are set and stored inside the boat cell 6 corresponding to the coordinate value on the three-dimensional shape.
  • the terminal botasel can have only one representative point of measurement.
  • Each botacel has a representative point of the measured value and its error distribution to represent the shape of the object.
  • (X, y, z) is the relative coordinates of the representative point in the button cell
  • Sx, Sy, Sz is the size of one side of the button cell at level 1
  • n (k), n (k), n (k) are the levels
  • the address of the boat cell at k, L is the level where the desired representative point exists.
  • FIG. 7A and FIG. 7B are diagrams showing the data structure of the botacell data in the present invention.
  • Presence The presence or absence of an object can be expressed.
  • model update step S5 is performed after the matching step S4, and updates the environment model constructed in the model construction step S3.
  • FIG. 8 is a data processing flowchart in the model update step S5. As shown in this figure, if a search is made for a botacell corresponding to the coordinate value of the measured point newly input in step ST1, and there is no representative point in that botacell in step ST2 (the botacell is empty), Sets (newly registers) the coordinate value and error distribution of the measured point newly input in step ST3 as the coordinate value and error distribution of the representative point.
  • step ST3 there should be essentially no object between the new measurement position (origin) and the measured point. Therefore, the representative point and error distribution in the button cell located between the new measurement position (origin) and the measured point are reset or deleted.
  • step ST4 the error distribution newly acquired in step ST4 is compared with the error distribution in the already set botacell (i.e., whether different points are the same). Judge whether it is one point).
  • the voxel is further divided into eight so that only a single representative point exists in a single votacell in steps ST6 and ST7. In this way, it is divided into a plurality of hierarchies and newly registered.
  • the criteria for division and synthesis are determined from, for example, the degree of coincidence of error distributions.
  • a distance scale such as Mahalanobis distance or a probability scale such as likelihood can be used as the degree of coincidence of the error distribution.
  • the force that represents the same point may be determined by statistical testing.
  • step ST5 a new error distribution and a new error distribution center are reset from both error distributions.
  • a new representative point has moved into another button cell (ie, Yes in step ST8), the process returns to step ST2 and the above-described processing is repeated.
  • Figure 10 shows the new error distribution and new error from both error distributions at step ST5, or from both error distributions and the coordinate values of the representative points already set in the botacell and the newly input measured points. As a result of resetting the center of the distribution, a new representative point moves to another botasel.
  • the position of the representative point of the button cell is output to the output device 36 as a three-dimensional shape measurement value, and an index (for example, a numerical value) indicating the reliability or accuracy of the measurement value is displayed for the voxel.
  • the size (spread) of the error distribution inside the voxel is larger than a predetermined reference value.
  • the measured value is smaller than the predetermined reference, the measured value of the voxel (that is, the position of the representative point of the votacel) is not output to the output device 36.
  • a search is made for a button cell corresponding to the coordinate value of the newly input measured point, and a representative point and an error distribution in the button cell are newly set. Only when the car, the car to be reset, or the voxel is further divided into a plurality of hierarchically divided botasels, in the output step S6, the representative point position, error distribution and At least one of the positions may be output to the output device as a three-dimensional shape measurement value.
  • the position of the representative point of the button cell in the environmental model in the range visible from the position is measured as a three-dimensional shape measurement value to the output device. It may be output.
  • the range where the position force of the distance sensor can be seen is the range where the distance sensor can measure the position of the distance sensor. From the position of the distance sensor, the angle range (field of view) where the distance sensor can measure the position and the position of the distance sensor Include the distance range that the distance sensor can measure!
  • the processing procedure shown in FIG. 4 repeats the processing every time new measurement data is obtained, and at least the internal storage device 34 and the external storage device 33 are used. Also stores the result in either. In order to speed up processing, it is preferable to store the results in the internal storage device 34 as much as the capacity allows.
  • the spatial region in which the three-dimensional shape exists is divided into a plurality of botasels 6, and the positions of the respective botasels are stored in the external storage device 33. Even if is large, the amount of data can be reduced to a data size that is small in proportion to the number of botasels.
  • the maximum botacell 9 is set to a size corresponding to the necessary minimum resolution, and there are a plurality of measurement points in a single botacell 9
  • the voxel is further divided into eight and divided into a plurality of hierarchically so that only a single point to be measured exists in a single botagel, the data volume can be reduced to a small data size.
  • the resolution can be further increased by using the divided botacell and representative points.
  • a plurality of coordinate values on a three-dimensional shape are acquired as distance data having a plurality of measurement positions as origins, and the coordinate value of the distance data is used as the coordinate value of the representative point.
  • Figure 12 shows how the error distribution of representative points is reduced and the accuracy of representative points is improved by integrating distance data with multiple measurement positions as the origin. Since the distance data obtained with different measurement positions (that is, the position of the three-dimensional measuring instrument as the distance sensor) as the origin also has different error distribution directions, these distance data are integrated sequentially via the environmental model. As a result, the error distribution of the representative points is reduced, and the position accuracy of the representative points is improved.
  • the figure after the three-dimensional measurement is a schematic diagram showing a two-dimensional cross section of the cup, and the broken line in the figure after the three-dimensional measurement shows the actual surface of the cup.
  • the voxel is further divided into eight and divided into a plurality of hierarchically so that only a single representative point exists in a single votacell. It is possible to converge to a highly accurate shape while avoiding accumulation.
  • the probability value of each boatel is also calculated as a representative point and an error distribution force.
  • the probability value of the botacell is calculated by including it in the botacell for the entire error distribution. The specific power of the distribution can also be obtained.
  • probability values are synthesized by, for example, Bayesian estimation using probability values for the respective error distributions.
  • the absolute error of the measurement data can be calculated by synthesizing this error distribution with the error distribution of the measurement data.
  • FIG. 15 is a schematic diagram in the case of calculating the absolute error of the measurement data by combining the error distribution of the position of the distance sensor and the error distribution of the measurement data.
  • the method and apparatus of the present invention has a function of correcting distance data including an error to accurate information, and by repeating this, it is highly accurate for long-time measurement. Converge to shape.
  • the method of the present invention is a process for updating the representative points 7 corresponding to the respective botasels 6 and the error distribution 8 thereof with new measurement points, so that the calculation amount is small.
  • the measurement data can be sequentially integrated into a voxel structure with the maximum resolution and the minimum resolution, and the memory size does not greatly exceed the fixed size.
  • the position m (i) of each model point group is a state quantity, and the model is expressed by the following equation (3) based on the position of the measurement point of the distance sensor.
  • m (i) is a representative point inside the botasel (hereinafter the same).
  • L (j) is a measurement position by the distance sensor.
  • t is the transposed matrix (the same applies below)
  • h (R, t, m (i)) is an observation system model for L (j).
  • the translation vector t (X, y, z) representing the position of the mobile body (for example, mobile robot) equipped with the distance sensor with respect to the world coordinate system.
  • v (i) is the observation noise added to the measured value L (j) of the distance sensor.
  • the measurement object is stationary, and the position and orientation of the measurement object! Fix ⁇ to the environment model.
  • Measurement point cloud by distance sensor and point i (ie representative point) on environmental model point cloud The point i on the model point group to which this association is performed is updated by the following equation (4). It should be noted that only the representative point m (i) on the model point group associated with the measurement point group by the distance sensor may be updated by the following equation (4).
  • K mk (i) ⁇ mk (i) H mk (j) H mk (j) ⁇ mk (i) H mk + ⁇ Lk (j))-1
  • the subscript k represents a value at a discrete time k.
  • m and (i) indicate the updated value (post-estimate value) of m (i), and m (i) is m, k k k k, k-1 k-
  • N is the total number of measurement points obtained by 3D LR.
  • N is the total number of measurement points obtained by 3D LR.
  • ⁇ S be the error covariance matrix when the laser is irradiated in the X-axis direction of the sensor coordinate system. The error distribution also changes its posture according to the laser irradiation direction.
  • ⁇ (j) is the error covariance matrix when the laser is irradiated in the X-axis direction of the sensor coordinate system. The error distribution also changes its posture according to the laser irradiation direction.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Electromagnetism (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Length Measuring Devices With Unspecified Measuring Means (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

 三次元形状上の座標値をコンピュータに入力するデータ入力ステップS1と、空間領域を境界表面が互いに直交する直方体からなる複数のボクセルに分割し、各ボクセル位置を記憶する環境モデルを構築するモデル構築ステップS3と、座標値に対応するボクセルの内部に代表点とその誤差分布を設定し記憶するマッチングステップS4と、環境モデルを更新するモデル更新ステップS5と、ボクセル位置、代表点および誤差分布の少なくともいずれかを出力装置に出力する出力ステップS6とを有する。

Description

明 細 書
三次元形状データの記憶'表示方法と装置および三次元形状の計測方 法と装置
発明の背景
[0001] 発明の技術分野
本発明は、静止している三次元形状を複数の計測位置力 計測し、その距離デー タを統合して復元するための三次元形状データの記憶'表示方法と装置、および三 次元形状の計測方法と装置に関する。
[0002] 関連技術の説明
三次元形状の計測技術が普及し、様々な応用分野、例えば、機械部品'工作物等 の形状計測、移動ロボットにおける自己位置の同定、地形'構造物の計測等に三次 元形状データが用いられて 、る。
[0003] 三次元形状データの記憶 ·表示方法と装置として、点群、距離画像、サーフェス、 ボタセル構造等が従来力 用いられて 、る。
点群は、センサの計測データである計測点の座標値で形状を表現する。また距離 画像は、二次元画像の各画素に対して奥行き方向の距離値を保持することで形状を 表現する。サーフェスは、三角形等の張り合わせにより物体の表面形状を表現する。 ボタセル構造は、空間を小直方体で分割し、各ボタセル内に形状情報を保持するも のである。
[0004] 三次元形状計測における計測データは、例えば、計測位置を原点とする極座標値
(r, θ, φ )で表される。本発明において、このデータを「距離データ」と呼ぶ。
[0005] 静止している三次元形状を、複数の位置からの距離データを統合して復元する場 合、以下の問題点がある。
点群を用いる場合、計測データに比例してデータ量が増加する。従って、計測対象 物が大きい場合の統合データ量は膨大となる。そのため、形状表現のためのデータ 構造としては現実的ではな 、。
距離画像を用いる場合、一方向力もの計測であるため、遠方に行くほど画素の間 隔が広がり精度が低下する。また、一方向からのデータのみしか表すことができない ため、複数視点力もの計測結果の統合に向 、て 、な 、。
サーフヱスを用いる場合、統合に複雑な処理を必要とするため、高速処理が困難 である。
[0006] これに対し、ボタセル構造は、データ量が一定、複数視点力 のデータ統合が可能
、データ統合に複雑な計算を必要としない、という特徴を有し、複数の位置からの距 離データを統合して復元するのに最も適して ヽる。
[0007] さらに、ボタセル構造を改良したものとして、特許文献 1, 2や非特許文献 1が開示さ れている。
特許文献 1の「三次元情報抽出方法」では、 Voxel Votingと呼ばれる方法を用い て計測結果を各ボタセルに投票することで、複数視点からの三次元形状を統合する 。更にこの方法では、必要な解像度が得られないボタセルに対しては、ボタセルを更 に八分割して階層的にデータを管理する方法を開示している。
特許文献 2の「環境モデル入力装置」では、各ボタセルに確率値を蓄積する手段を 提案している。この手段では、確率を与える頻度に依存せずに環境モデルの統合を 行い、正確な環境モデルの作成を可能としている。
非特許文献 1の手段では、平面を想定しているものの、確率値を保持するボタセル に対して、計測データに含まれる誤差により発生したボタセルの誤った確率値を正し V、値に戻す処理を提案して!/、る。
[0008] また、本発明に関連する技術として、非特許文献 2が開示されている。
[0009] 特許文献 1 :特許第 3170345号公報、「三次元情報抽出方法」
特許文献 2:特開平 9 81788号公報、「環境モデル入力装置」
[0010] 非特許文献 1: Sebastian Thrun, "Learning Occupancy Grid Maps With
Forward Sensor Models.
非特許文献 2 :関本清英、他、「三次元レーザレーダの開発」、石川島播磨技報 Vol. 43 No. 4 (2003- 7)
発明の開示
[0011] 発明が解決しょうとする課題 特許文献 1のボタセル構造は、正しい形状を得るために、ボタセルの分割を繰り返 す力 分割の回数が増えるとデータサイズが増加するという問題が発生する。そのた め、分割の深さを固定とするのが一般であり、これにより解像度の限界が存在する。 つまり、分割後のボタセルの大きさ以上の解像度を表現できない。また、誤差を含む データにより誤って発生したボタセルはそのまま存在してしまう。そのため、誤差を含 むデータに対応できない。
[0012] 特許文献 2のボタセル構造は、確率値を用いて形状を表現して!/ヽるが、特許文献 1 と同様にデータが誤差を含む場合は誤って発生したボタセルはそのまま存在してし まう。そのため、誤差を含むデータに対応できない。
[0013] 非特許文献 1のボタセル構造は、確率を下げる処理を含むため、誤った確率値を 保持するボタセルを消去する機能を有する。しかし、一般にはボタセル内に計測物体 が存在している領域と存在しない領域の両方が存在するため、複数回の計測を統合 しても、正 U、形状に収束しな!、と!/、う問題がある。
発明の要約
[0014] 本発明は上述した問題点を解決するために創案されたものである。すなわち、本発 明の目的は、静止している三次元形状を、複数の位置からの距離データを統合して 復元することができ、かつデータサイズを大幅に増加することなく解像度を高めること ができ、誤差を含むデータに対応できる三次元形状データの記憶 ·表示方法と装置 、および三次元形状の計測方法と装置を提供することにある。
[0015] 本発明によれば、三次元形状上の被計測点の座標値から三次元形状を復元する ための三次元形状データの記憶'表示方法であって、
三次元形状上の座標値をコンピュータに入力するデータ入力ステップと、 前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築ステップと、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチングステップと、
前記ボタセル位置、代表点、および誤差分布を出力装置に出力する出力ステップ とを有する、ことを特徴とする三次元形状データの記憶'表示方法が提供される。 また、本発明によれば、三次元形状上の被計測点の座標値から三次元形状を復元 し、三次元形状データを出力する三次元形状の計測方法であって、
三次元形状上の座標値をコンピュータに入力するデータ入力ステップと、 前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築ステップと、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチングステップと、
前記代表点、ボタセル位置および誤差分布の少なくともいずれかを出力装置に出 力する出力ステップとを有する、ことを特徴とする三次元形状の計測方法が提供され る。
[0016] 前記三次元形状データの記憶'表示方法または三次元形状の計測方法は、以下 の内容を含んでもよい。
[0017] 本発明の好ま 、実施形態によれば、前記モデル構築ステップにお 、て、最大の ボタセルを必要最小限の分解能に相当する大きさに設定し、かつ単一のボタセル内 に複数の被計測点が存在する場合に、単一のボタセル内に単一の被計測点のみが 存在するように、該ボクセルを更に分割して階層的に複数のボタセルに分割する。
[0018] また、前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステ ップを有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値 に対応するボタセルを探索し、
原点と被計測点の間に物体が存在しな 、ものとして、その間に位置するボタセル内 の代表点と誤差分布を再設定もしくは消去する。
[0019] また、前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステ ップを有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値 に対応するボタセルを探索し、
該ボクセル内に代表点がな 、場合に、前記座標値と誤差分布を代表点の座標値と 誤差分布として設定する。 [0020] また、前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステ ップを有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値 に対応するボタセルを探索し、
前記ボタセル内に既に設定した代表点がある場合に、新たに取得した誤差分布と 既に設定したボタセル内の誤差分布とを比較し、
誤差分布が互いに重複する場合に、両誤差分布から、または、両誤差分布とボクセ ル内に既に設定した代表点と新たに入力された被計測点の座標値から、新たな誤差 分布と新たな代表点を再設定し、
誤差分布が互いに重複しない場合に、単一のボタセル内に単一の代表点のみが 存在するように、該ボクセルを更に分割して階層的に複数のボタセルに分割する、こ とが好ましい。ボタセルの分割には、例えば八分木や K—D木を用いる。
[0021] また、ボタセルの内部に代表点とその誤差分布にカ卩えて、確率値を併せ持つ、こと が好ましい。
また、前記データ入力ステップにおいて、距離センサを用いて、三次元形状上の座 標値を任意の計測位置を原点とする距離データとして原点を移動しながら順次取得 する。
また、距離センサの位置と誤差分布が得られる場合に、距離センサの位置の誤差 分布と計測データの誤差分布を合成する、ことが好ま 、。
[0022] また、前記モデル更新ステップにお 、て、前記新たに取得した誤差分布と前記既 に設定したボタセル内の誤差分布とを比較し、誤差分布が互いに重複する場合に、 両誤差分布から新たな誤差分布と新たな代表点を再設定した結果、新たな代表点 が他のボタセル内へ移動したとき、
該他のボタセル内に代表点がな!、場合に、該新たな誤差分布と該新たな代表点を 該他のボタセルの内部に設定し、
該他のボタセル内に既に設定した代表点がある場合に、該新たな誤差分布と既に 設定した該他のボタセル内の誤差分布とを比較し、(A)誤差分布が互いに重複する 場合に、両誤差分布から、または、両誤差分布とボタセル内に既に設定した代表点と 該新たな代表点から、新たな誤差分布と新たな代表点を再設定し、(B)誤差分布が 互いに重複しな 、場合に、単一のボタセル内に単一の代表点のみが存在するように 、該ボタセルを更に分割して階層的に複数のボタセルに分割する。
[0023] 本発明の好ましい実施形態によれば、前記マッチングステップの後に、前記環境モ デルを更新するモデル更新ステップを有し、
該モデル更新ステップにお 、て、新たに入力された被計測点の座標値およびその誤 差分布と、既に設定したボタセル内の代表点およびその誤差分布とから、カルマンフ ィルタにより新たな代表点と誤差分布を取得して再設定する。
[0024] 前記出力ステップにおいて、前記ボタセルの代表点の位置を三次元形状の計測値 として出力装置に出力するとともに、該計測値の信頼性または精度を示す指標を、該 ボタセルの内部の誤差分布の大きさに基づいて、出力装置に出力する。
[0025] 前記出力ステップにおいて、前記ボタセルの代表点の位置を三次元形状の計測値 として出力装置に出力するときに、該ボクセルの内部の誤差分布の大きさが所定の 基準値よりも大きい場合に、該計測値の信頼性または精度が所定の基準よりも低いと して、該ボクセルの前記計測値を出力装置に出力しな 、。
[0026] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値に対応 するボタセルを探索し、前記ボタセル内の代表点および誤差分布の少なくとも 、ずれ かが新たに設定される、または再設定される、または該ボクセルを更に分割して階層 的に複数のボタセルに分割される場合、前記出力ステップにおいて、当該ボタセル の代表点の位置を三次元形状の計測値として出力装置に出力する。
[0027] 前記出力ステップにおいて、距離センサの位置力も距離センサが位置計測可能な 範囲の環境モデル内のボタセルの代表点の位置を三次元形状の計測値として出力 装置に出力する。
[0028] また本発明によれば、三次元形状上の被計測点の座標値から三次元形状を復元 するための三次元形状データの記憶 ·表示装置であって、
三次元形状上の座標値をコンピュータに入力するデータ入力装置と、
前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築装置と、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチング装置と、
前記ボタセル位置、代表点、および誤差分布を出力装置に出力するデータ伝達装 置とを備える、ことを特徴とする三次元形状データの記憶 ·表示装置が提供される。 また本発明によれば、三次元形状上の被計測点の座標値から三次元形状を復元 し、三次元形状データを出力する三次元形状の計測装置であって、
三次元形状上の座標値をコンピュータに入力するデータ入力装置と、
前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築装置と、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチング装置と、
前記代表点、ボタセル位置および誤差分布の少なくともいずれかを出力装置に出 力するデータ伝達装置とを備える、ことを特徴とする三次元形状の計測装置が提供さ れる。
[0029] 前記三次元形状データの記憶'表示装置または三次元形状の計測装置は、以下 の内容を含んでもよい。
[0030] 本発明の好ま ヽ実施形態によれば、前記モデル構築装置は、最大のボタセルを 必要最小限の分解能に相当する大きさに設定し、かつ単一のボタセル内に複数の 被計測点が存在する場合に、単一のボタセル内に単一の被計測点のみが存在する ように、該ボクセルを更に分割して階層的に複数のボタセルに分割する。
[0031] 本発明の好ましい実施形態によれば、前記三次元形状データの記憶'表示装置ま たは三次元形状の計測装置は、前記マッチング装置が前記座標値に対応するボタ セルの内部に代表点とその誤差分布を設定し記憶した後に、前記環境モデルを更 新するモデル更新装置を有し、
該モデル更新装置は、
新たに入力された被計測点の座標値に対応するボタセルを探索し、 原点と被計測点の間に物体が存在しな 、ものとして、その間に位置するボタセル内 の代表点と誤差分布を再設定もしくは消去する。
[0032] 本発明の好ましい実施形態によれば、前記三次元形状データの記憶'表示装置ま たは三次元形状の計測装置は、前記マッチング装置が前記座標値に対応するボタ セルの内部に代表点とその誤差分布を設定し記憶した後に、前記環境モデルを更 新するモデル更新装置を有し、
該モデル更新装置は、
新たに入力された被計測点の座標値に対応するボタセルを探索し、
該ボクセル内に代表点がな 、場合に、前記座標値と誤差分布を代表点の座標値と 誤差分布として設定する。
[0033] 本発明の好ましい実施形態によれば、前記三次元形状データの記憶'表示装置ま たは三次元形状の計測装置は、前記マッチング装置が前記座標値に対応するボタ セルの内部に代表点とその誤差分布を設定し記憶した後に、前記環境モデルを更 新するモデル更新装置を有し、
該モデル更新装置は、
新たに入力された被計測点の座標値に対応するボタセルを探索し、
前記ボタセル内に既に設定した代表点がある場合に、新たに取得した誤差分布と 既に設定したボタセル内の誤差分布とを比較し、
誤差分布が互いに重複する場合に、両誤差分布、または、両誤差分布とボタセル 内に既に設定した代表点と新たに入力された被計測点の座標値から、力 新たな誤 差分布と新たな代表点を再設定し、
誤差分布が互いに重複しない場合に、単一のボタセル内に単一の代表点のみが 存在するように、該ボクセルを更に分割して階層的に複数のボタセルに分割する。
[0034] 本発明の好ましい実施形態によれば、前記マッチング装置は、ボタセルの内部に 代表点とその誤差分布に加えて、ボタセルの確率値を併せて設定し記憶する。
[0035] 本発明の好ましい実施形態によれば、前記三次元形状データの記憶'表示装置ま たは三次元形状の計測装置は、前記三次元形状上の座標値を任意の計測位置を 原点とする距離データとして原点を移動しながら順次取得する距離センサを備える。 [0036] 本発明の好ま ヽ実施形態によれば、前記マッチング装置は、前記距離センサの 位置と誤差分布が得られる場合に、距離センサの位置の誤差分布と計測データの誤 差分布を合成する。
[0037] 本発明の好ましい実施形態によれば、前記モデル更新装置は、
前記新たに取得した誤差分布と前記既に設定したボタセル内の誤差分布とを比較 し、誤差分布が互いに重複する場合に、両誤差分布から、または、両誤差分布とボタ セル内に既に設定した代表点と新たに入力された被計測点の座標値から、新たな誤 差分布と新たな代表点を再設定した結果、新たな代表点が他のボタセル内へ移動し たとき、
該他のボタセル内に代表点がな!、場合に、該新たな誤差分布と該新たな代表点を 該他のボタセルの内部に設定し、
該他のボタセル内に既に設定した代表点がある場合に、該新たな誤差分布と既に 設定した該他のボタセル内の誤差分布とを比較し、(A)誤差分布が互いに重複する 場合に、両誤差分布から、または、両誤差分布とボタセル内に既に設定した代表点と 該新たな代表点から、新たな誤差分布と新たな代表点を再設定し、(B)誤差分布が 互いに重複しな 、場合に、単一のボタセル内に単一の代表点のみが存在するように 、該ボタセルを更に分割して階層的に複数のボタセルに分割する。
[0038] 本発明の好ましい実施形態によれば、前記三次元形状データの記憶'表示装置ま たは三次元形状の計測装置は、前記マッチングステップの後に、前記環境モデルを 更新するモデル更新装置を有し、
該モデル更新装置は、新たに入力された被計測点の座標値およびその誤差分布 と、既に設定したボタセル内の代表点およびその誤差分布とから、カルマンフィルタ により新たな代表点と誤差分布を取得して再設定する。
[0039] 前記データ伝達装置は、前記ボタセルの代表点の位置を三次元形状の計測値とし て出力装置に出力するとともに、該計測値の信頼性または精度を示す指標を、該ボ クセルの内部の誤差分布の大きさに基づ!/、て、出力装置に出力する。
[0040] 前記データ伝達装置は、前記ボタセルの代表点の位置を三次元形状の計測値とし て出力装置に出力するときに、該ボクセルの内部の誤差分布の大きさが所定の基準 値よりも大きい場合に、該計測値の信頼性または精度が所定の基準よりも低いとして 、該ボタセルの前記計測値を出力装置に出力しない。
[0041] 前記マッチング装置の後に、前記環境モデルを更新するモデル更新装置を有し、 該モデル更新装置にお 、て、新たに入力された被計測点の座標値に対応するボタ セルを探索し、前記ボタセル内の代表点および誤差分布の少なくとも 、ずれかが新 たに設定される、または再設定される、または該ボクセルを更に分割して階層的に複 数のボタセルに分割される場合、前記出力装置は、当該ボタセルの代表点の位置を 三次元形状の計測値として出力装置に出力する。
[0042] 前記出力装置は、距離センサの位置力 距離センサが位置計測可能な範囲の環 境モデル内のボタセルの代表点の位置を三次元形状の計測値として出力装置に出 力する。
[0043] 発明の効果
上記本発明の方法と装置によれば、三次元形状の存在する空間領域を、複数のボ クセルに分割し、各ボタセル位置を記憶するので、計測対象物が大きい場合であつ ても、データ量をボタセル数に比例する小さ 、データサイズに抑えることができる。 また、座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶す るので、ボタセルの分解能以上の情報を表現することができる。
[0044] また、モデル構築ステップにお 、て、最大のボタセルを必要最小限の分解能に相 当する大きさに設定し、かつ単一のボタセル内に複数の被計測点が存在する場合に 、単一のボタセル内に単一の被計測点のみが存在するように、該ボクセルを更に分 割して階層的に複数のボタセルに分割するので、データ量を小さく抑えると同時に、 分割後のボタセルと代表点を用いて解像度を更に高めることができる。
[0045] 特に、三次元形状上の複数の座標値を複数の計測位置を原点とする距離データと して取得し、該距離データの座標値を、前記代表点の座標値とし、距離データの座 標値の計測誤差を代表点の誤差分布とすることにより、正確な座標値と誤差分布を 用いて複数回の計測を統計的に統合することができ、一層の精度向上が可能となる
[0046] また、原点と被計測点の間に物体が存在しないものとして、その間に位置するボタ セル内の代表点と誤差分布を消去することにより、誤った計測データの影響を取り除 くことができる。
[0047] また、新たに入力された被計測点の座標値に対応するボタセルを探索し、該ボクセ ル内に代表点がな 、場合に、前記座標値と誤差分布を代表点の座標値と誤差分布 として設定することにより、代表点の座標値と誤差分布を容易に設定できる。
[0048] 更に、前記ボタセル内に既に設定した代表点がある場合に、新たに取得した誤差 分布と既に設定したボタセル内の誤差分布とを比較し、
誤差分布が互いに重複する場合に、両誤差分布から、または、両誤差分布とボクセ ル内に既に設定した代表点と新たに入力された被計測点の座標値から、新たな誤差 分布と新たな代表点を再設定し、
誤差分布が互いに重複しない場合に、単一のボタセル内に単一の代表点のみが 存在するように、該ボクセルを更に分割して階層的に複数のボタセルに分割する、こ とにより、誤差の蓄積を回避しながら高精度な形状に収束させることができる。
特に、誤差分布が互いに重複する場合に、新たな誤差分布と新たな代表点を再設 定した結果、代表点が別のボタセルに移動する場合には、既に設定したボタセル内 の誤差分布と更に比較することで、単一のボタセル内に単一の代表点のみが存在す るように一貫性を保つことができる。
[0049] 上述したように、本発明の方法と装置によれば、誤差を含む距離データを正確な情 報に補正する機能を有すると共に、これを繰り返すことにより、長時間の計測に対し て高精度な形状に収束する。なおかつ、本発明の方法は、各ボタセルに対応する代 表点とその誤差分布を新たな計測点で更新する処理であるため計算量が小さ 、。ま た、演算は周囲のボタセルへの影響を与えずボタセル内で閉じているため、高速処 理が可能である。また、計測データは最大のボタセルが必要最小限の分解能を有す るボタセル構造に逐次統合可能であり、メモリサイズは固定サイズを大きく上回ること はない。
[0050] また、各ボタセルに確率値を持たせることによって、誤差分布が代表点の属するボ クセルよりも広がっている場合においても、各ボタセルにおける物体の存在有無を代 表点が属するボタセルを見つけ、その誤差分布力 再計算させることなぐ当該ボタ セルの確率値だけで判断できる。
[0051] また、センサの位置'姿勢に誤差がある場合でも、この誤差分布を計測データの誤 差分布に合成して、計測データの絶対誤差を算出することで、対象物体の位置精度 を向上させることができる。
[0052] さらに、前記モデル更新ステップにお 、て、新たに入力された被計測点の座標値 およびその誤差分布と、既に設定したボタセル内の代表点およびその誤差分布とか ら、カルマンフィルタにより新たな代表点と誤差分布を取得して再設定するので、より 真値に近 、形状を得ることができる。
特に、カルマンフィルタを用いたモデル更新ステップを繰り返すことで、誤差を含む データであってもカルマンフィルタの効果により真値に収束した高精度な形状が得ら れる。
[0053] また、前記出力ステップにお!/、て、前記ボタセルの代表点の位置を三次元形状の 計測値として出力装置に出力する際に、該計測値の信頼性または精度を示す指標 を、該ボクセルの内部の誤差分布の大きさ出力装置に出力するため、計測装置を使 用する際に、信頼性の低い計測値をアプリケーションの内容に応じて使用者が取捨 選択することができるよう〖こなる。
[0054] また、前記出力ステップにお!/、て、前記ボタセルの代表点の位置を三次元形状の 計測値として出力装置に出力するときに、該ボクセルの内部の誤差分布の大きさが 所定の基準値よりも大き!、場合に、該計測値の信頼性または精度が所定の基準より も低 、として、該ボクセルの前記計測値を出力装置に出力しな 、ようにすることによつ て、計測装置を使用する際に、そもそも信頼性の高い計測値のみを扱うことができる ようになるため、扱うデータ量を削減することや、信頼性の向上につながる。
[0055] また、前記データ入力ステップにお 、て、距離センサを用いて、三次元形状上の座 標値を任意の計測位置を原点とする距離データとして原点を移動しながら順次取得 し、特に異なる方向から距離データを得ることによって、分布形状が異なる誤差分布 の距離データを統合することが可能となり、精度を向上することができる。
[0056] また、前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステ ップを有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値 に対応するボタセルを探索し、前記ボタセル内の代表点および誤差分布の少なくとも いずれかが新たに設定される、または再設定される、または該ボクセルを更に分割し て階層的に複数のボタセルに分割される場合のみ、前記出力ステップにおいて、当 該ボクセルの代表点の位置、誤差分布およびボタセルの位置の少なくとも!/、ずれか を三次元形状の計測値として出力装置に出力することによって、距離センサ力 新た に得られた被計測点によって影響を受けたボタセル内の代表点等の値が出力される 。このため、使用者は従来と同様の運用を想定しながら、距離センサで得られる元々 の計測値があた力もより精度の高い計測値に置き換わったように、利用することがで きるようになる。このように、より精度の高い三次元形状計測が可能になる。
[0057] また、前記出力ステップにおいて、距離センサの位置力も距離センサが位置計測 可能な範囲の環境モデル内のボタセルの代表点の位置を三次元形状の計測値とし て出力装置に出力することによって、従来の距離センサの計測値の分解能が粗い場 合でも、あた力も精度良くかつ分解能が高い距離センサのように利用することが可能 となる。このように、より精度の高い三次元形状計測が可能になる。
本発明のその他の目的及び有利な特徴は、添付図面を参照した以下の説明から 明らかになろう。
図面の簡単な説明
[0058] [図 1]非特許文献 2に開示された三次元レーザレーダの構成図である。
[図 2A]距離センサで計測された極座標データと誤差の関係を示す図である。
[図 2B]誤差分布を直方体に包含される楕円体として近似する場合を示している。
[図 3]本発明の方法を実行するための装置構成図である。
[図 4]本発明の方法を示すフローチャートである。
[図 5]モデル構築ステップの模式図である。
[図 6]構築された環境モデルの模式図である。
[図 7A]本発明におけるボタセルデータのデータ構造を示す図であり、各ボタセルデ ータのメモリレイアウト例を示して 、る。
[図 7B]本発明におけるボタセルデータのデータ構造を示す図であり、レベル 2 (1, 1 , 0)のボタセルが代表点を持つ場合の例を示している。 [図 8]モデル更新ステップにおけるデータ処理フロー図である。
[図 9]該当するボタセル内に既に設定した代表点がある場合の模式図である。
[図 10]誤差分布が互いに重複する場合に、両誤差分布カゝら新たな誤差分布と新たな 誤差分布の中心を再設定した結果、新たな代表点が他のボタセル内へ移動する場 合を示している。
[図 11]誤差分布が互いに重複する場合の模式図である。
[図 12]複数の計測位置を原点とする距離データを統合することによって、代表点の誤 差分布が縮小し、代表点の精度が向上する様子を示す模式図である。
[図 13]ボタセルの確率値の算出方法の模式図である。
[図 14]誤差分布が互 、に重複する場合のボタセルの確率値の算出方法の模式図で ある。
[図 15]距離センサの位置の誤差分布と計測データの誤差分布を合成し、計測データ の絶対誤差を算出する場合の模式図である。
[図 16]カルマンフィルタを用いたモデル更新ステップにより得られた結果を示す。
[図 17]図 16の一部拡大図である。
好ましい実施例の説明
[0059] 以下本発明の好ましい実施形態について、図面を参照して説明する。なお、各図 において、共通する部分には同一の符号を付し、重複した説明を省略する。
[0060] 図 1は、距離センサの一例としての三次元レーザレーダの構成図である。三次元レ 一ザレーダは、例えば非特許文献 2に開示されて 、る。
この図に示すように、三次元レーザレーダ 10は、レーダヘッド 12と制御器 20から構 成される。レーザダイオード 13から発振されたノ ルスレーザ光 1は、投光レンズ 14で 平行光 2に整形され、ミラー 18a, 18bと回転 '揺動するポリゴンミラー 15で二次元方 向に走査され、測定対象物に照射される。測定対象物から反射されたパルスレーザ 光 3は、ポリゴンミラー 15を介して受光レンズ 16で集光され、光検出器 17で電気信 号に変換される。
[0061] 制御器 20内の時間間隔カウンタ 21は、レーザダイオード 13のパルス発振タイミン グと同期したスタートパルス 4と、光検出器 17から出力されたストップパルス 5の時間 間隔を計測する。信号処理ボード 22は、反射光が検出された時点の時間間隔 t、ポ リゴンミラーの回転角度 Θ、揺動角度 φを極座標データ (r, θ , φ )として出力する。
rは計測位置 (レーダヘッド設置位置)を原点とする距離であり、 r=c X t/2 の式 で求められる。ここで cは光速である。
判定処理ユニット 23は、信号処理ボード力もの極座標データを、レーダヘッド設置 位置を原点とした三次元空間データ (X, y, z)へ変換して、検出処理を行うようになつ て 、る。なおこの図で 24はドライブユニットである。
[0062] 上述した三次元レーザレーダ 10の計測範囲は、例えば、水平画角 60° 、垂直画 角 30° 、最大測定距離 50mである。また、位置検出精度は、例えば約 20cmである また、計測データを各画素に対して奥行き方向の距離値を持った距離画像で表示 する場合、 1フレームの計測点数を、横方向 166点、スキャン方向 50点とすると、 1フ レームに 166 X 50 = 8300点力 S表示される。この場合にフレームレートは、例えば約 2フレーム Z秒である。
[0063] この三次元レーザレーダ 10で計測される三次元形状上の被計測点は、横方向に
Δ Θ X r,垂直方向に Δ φ X r、互いに離散した点群となる。例えば、 Δ Θ =60/16 6 X π /180 = 6. 3 X 10—3ラジアン、 Δ φ = 30/50 X π /180= 10. 5 X 10—3ラ ジアン、 r= 50mの場合、最も近接する場合でも、被計測点の間隔は、横方向で約 3 15mm,垂直方向で約 525mmとなる。
[0064] 本発明では、距離センサとして、例えば、上述した三次元レーザレーダ 10を用いる 。しかし、距離センサはこれに限定されず、視差を利用した距離センサ、その他の周 知の距離センサを用いることができる。
[0065] 図 2A,図 2Bは、距離センサで計測された極座標データと誤差の関係を示す図で ある。
図 2Aに示すように、任意の計測位置を原点とする極座標値 (r, θ , φ )を計測結果 として計測する。距離センサによる計測結果には、図に示すような誤差分布が通常存 在する。
この誤差分布は、誤差分布の r , θ , φ での存在確率を P (r , θ , φ )とした場合 、誤差分布は計測の軸 r, θ , φ方向に正規分布しているとし、例えば式(1)で表す ことができる。ここで、 r, θ, φはセンサ力もの計測値、 σ , σ , σ は は標準偏差
r θ φ
、 Aは規格ィ匕定数である。
図 2Bに示すように、誤差分布は、通常 r方向に長い切頭円錐形 (左図)に内包され る分布である力 遠方において aと bの差は小さい。従って、この誤差分布を直方体に 包含される楕円体として安全サイドに近似することができる。
[0066] [数 1]
χ - θ)2 ~
exp exp ( - Φ) (1)
A V 22σσ, ノ 22σび 2 2a
J 2a ノ
[0067] 図 3は、本発明の方法を実行するための装置構成図である。この図に示すように、 この装置は、データ入力装置 32、外部記憶装置 33、内部記憶装置 34、中央処理装 置 35および出力装置 36を備える。
[0068] データ入力装置 32は、上述した距離センサを有し、三次元形状上の座標値を記憶 装置に入力する。また、例えばゴ-ォメータ、ォドメータ等を併用して、距離センサの 位置 ·姿勢や移動距離も入力するのがよい。なお、データ入力装置 32は、キーボー ド等の通常の入力手段も有するのがよい。
外部記憶装置 33は、ハードディスク、フロッピ (登録商標)一ディスク、磁気テープ、 コンパクトディスク等である。外部記憶装置 33は、環境モデルのサイズが大きく後述 する内部記憶装置 34に入力された三次元形状上の座標値、ボタセル位置、及び代 表点とその誤差分布の全体を保持できな ヽ場合には、環境モデルの一部範囲また は全体範囲に対する、入力された三次元形状上の座標値、ボタセル位置、及び代表 点とその誤差分布の一部または全体を記憶し、かつ本発明の方法を実行するための プログラムを記憶する。
内部記憶装置 34は、例えば RAM, ROM等であり、環境モデルの一部範囲または 全体範囲に対する、入力された三次元形状上の座標値、ボタセル位置、及び代表点 とその誤差分布の一部または全体を保管し、かつ演算情報を保管する。
中央処理装置 35 (CPU)は、モデル構築装置、マッチング装置、モデル更新装置 、データ伝達装置として機能し、演算や入出力等を集中的に処理し、内部記憶装置
34と共〖こ、プログラムを実行する。モデル構築装置は、後述のモデル構築ステップを 行う装置であり、マッチング装置は、後述のマッチングステップを行う装置であり、モ デル更新装置は、後述のモデル更新ステップを行う装置であり、データ伝達装置は、 出力装置 36へデータを出力する装置である。
出力装置 36は、例えば表示装置、プリンタ、外部装置等であり、内部記憶装置 34 および外部記憶装置 33の少なくとも 、ずれかに記憶したデータ及びプログラムの実 行結果を出力するようになっている。外部装置とのインターフェイスは、 LAN、 USB、 IEEE 1394等であり、入力された三次元形状上の座標値に対して該当するボタセル 内の代表点、誤差分布、ボタセル位置などを付加した結果や、環境モデル全体また は環境モデル一部を要求に応じて出力する。
[0069] 上述した本発明の装置は、上述した距離センサと通常の PC (コンピュータ)を組み 合わせたものでもよぐ或いは、全体を一体にした装置であってもよい。また、自走可 能な装置内に一体的に組み込んでもよい。
[0070] 図 4は、本発明の方法を示すフローチャートである。
本発明の方法は、三次元形状上の被計測点の座標値から三次元形状を復元する ための三次元形状の計測方法と装置であり、データ入力ステップ Sl、データ補正ス テツプ S2、モデル構築ステップ S3、マッチングステップ S4、モデル更新ステップ S5 及び出力ステップ S6を有する。
なお、これら一連の処理のうち、 Sl、 S2、 S4〜S6は、計測データが得られる毎に実 施し、 S3は初めて計測データが得られたときにだけ実施することができる。
[0071] データ入力ステップ S1では、距離センサを用いて、三次元形状上の座標値をコン ピュータの記憶装置に入力する。また、例えばゴ-ォメータ、ォドメータ等を併用して
、距離センサの位置 ·姿勢や移動距離も入力するのがよい。
なおこのデータ入力ステップ S1において、三次元レーザレーダ 10を用いて、三次 元形状上の座標値を任意の計測位置を原点とする距離データとして原点を移動しな 力 順次取得するのがよい。
[0072] 距離センサとして三次元レーザレーダ 10を用いた場合、三次元形状上の座標値は 、任意の計測位置を原点とする距離データであり、極座標値 (r, θ , φ )で表される。 また、各座標値の誤差分布は、極座標値 (r, θ , φ )から演算で求める力 予め別の 入力手段 (例えばキーボード)で入力する。
[0073] データ補正ステップ S2では、距離データの補正処理を行い、距離データの精度を 向上させる。また、極座標データとォドメータのデータから、任意の固定位置を原点と した三次元空間データ (X, y, z)へ変換してもよい。
距離データの補正処理では、孤立点の除去、統計的処理、等を行う。孤立点は、 周囲の点力 孤立して存在する点であり、計測データは複数の近接する点で構成さ れることから、孤立点は誤計測と仮定して除去することができる。統計的処理は、計 測データが含む誤差分布を考慮して、複数回の計測を統計処理 (例えば平均値等) することで、距離の補正を行う。
さらに、対象とする三次元形状が、直線近似又は平面近似できる場合にはこれらを 行うのがよい。
[0074] 図 5は、ボタセルの分割に八分木を用いた場合のモデル構築ステップの模式図で ある。
モデル構築ステップ S3では、この図に示すように、三次元形状の存在する空間領 域を、境界表面が互いに直交する直方体力 なる複数のボタセル 6に分割し、各ボタ セル位置を記憶する環境モデルを構築する。
ボタセル 6の形状は、各辺の長さが等しい立方体でも、各辺の長さが異なる直方体 でもよい。
また、ボタセル 6の各辺の長さは、最大のボタセル 6を必要最小限の分解能に相当 する大きさに設定するのがよい。以下、最大のボタセル 6をレベル 1のボタセルと呼ぶ また、単一のボタセル内に複数の被計測点が存在する場合には、単一のボタセル 内に単一の被計測点のみが存在するように、ボタセルを更に八分割して階層的に複 数のボタセルに分割する。以下、最大のボタセル 6の八分割を 1回実施した空間領域 をレベル 2のボタセル、 k回実施した空間領域をレベル k+ 1のボタセルと呼ぶ。
[0075] 図 6は、構築された環境モデルの模式図である。 マッチングステップ S4では、この図に示すように、三次元形状上の座標値に対応す るボタセル 6の内部に代表点 7とその誤差分布 8を設定し記憶する。末端のボタセル は計測値の代表点を 1つだけ持つことができる。各ボタセルが計測値の代表点とその 誤差分布を持つことで、物体の形状を表す。
[0076] マッチングステップ S4にお 、て、代表点の絶対位置は式(2)で与えられる。ここで、
(X, y, z)は代表点のボタセルでの相対座標、 Sx, Sy, Szはレベル 1でのボタセルの 一辺の大きさ、 n (k) , n (k) , n (k)はレベル kでのボタセルの番地、 Lは求める代表 点が存在するレベルである。
[0077] [数 2]
{X ' , Ζ) (k) …②
Figure imgf000021_0001
[0078] 図 7A,図 7Bは、本発明におけるボタセルデータのデータ構造を示す図である。
この図において、図 7Aは、各ボタセルデータのメモリレイアウト例である。この図に おいて、矢印はデータへのリンクを表し、値としてはデータへのポインタを保持する。 図 7Bは、レベル 2 (1, 1, 0)のボタセルが代表点を持つ場合の例を示している。な おこの図において、 nullは空集合を表す。
[0079] 上述したデータ構造の環境モデルは、以下の特徴を有する。
( 1)内容:空間を小直方体で分割して各ボタセルに計測点の代表点と誤差分布を保 持する。
(2)精度:ボタセル毎に持つ計測点の代表値相当である。
(3)存在:物体の存在の有無を表現できる。
(4)データ量:ボタセルの個数に比例してメモリを必要とする力 サイズ固定である。
(5)点群からの変換:適しており、計算量は少な!/、。
(6)アクセス速度:シンプルな構造をして 、るため、要素へのアクセスが高速である。
[0080] またこの特徴から、上述した環境モデルは、以下の効果 A〜Cをすベて満たしてい る。
効果 A:誤差を考慮した表現が可能である。 効果 B:必要なメモリ量と計算量が一定量以下である。
効果 C:物体の存在だけでなく、物体が存在しな!、ことを表せる。
[0081] さらに図 4において、モデル更新ステップ S5は、マッチングステップ S4の後に実施 し、モデル構築ステップ S3で構築した環境モデルを更新する。
[0082] 図 8は、モデル更新ステップ S5におけるデータ処理フロー図である。この図に示す ように、ステップ ST1で新たに入力された被計測点の座標値に対応するボタセルを 探索し、ステップ ST2で該当するボタセル内に代表点がない (ボタセルが空である) 場合には、ステップ ST3で新たに入力された被計測点の座標値と誤差分布を代表点 の座標値と誤差分布として設定 (新規に登録)する。
また、このステップ ST3において、新しい計測位置 (原点)と被計測点の間には、原 理的に物体が存在しないはずである。従って新しい計測位置 (原点)と被計測点の間 に位置するボタセル内の代表点と誤差分布を再設定もしくは消去する。
[0083] 図 9は、該当するボタセル内に既に設定した代表点がある場合の模式図である。
図 8のステップ ST2で該当するボタセル内に既に設定した代表点がある場合には、 ステップ ST4で新たに取得した誤差分布と既に設定したボタセル内の誤差分布とを 比較する (すなわち異なる点か同一点かを判断する)。
この比較で、誤差分布が互いに重複する場合(図 9A)には、ステップ ST5で両誤 差分布から、または、両誤差分布とボタセル内に既に設定した代表点と新たに入力さ れた被計測点の座標値から、新たな誤差分布と新たな誤差分布の中心を再設定す る (すなわち誤差分布を合成する)。
またこの比較で、誤差分布が互いに重複しない場合(図 9B)には、ステップ ST6、 S T7で単一のボタセル内に単一の代表点のみが存在するように、該ボクセルを更に八 分割して階層的に複数のボタセルに分割し新規に登録する。
分割と合成の基準は、例えば誤差分布の一致度から判断する。誤差分布の一致度 には例えば、マハラノビス距離のような距離尺度や、尤度のような確率値の尺度を利 用できる。また、 2つの誤差分布に基づき、両者が同一点を表している力を統計的検 定によって判定してもよい。
[0084] ステップ ST5で両誤差分布から新たな誤差分布と新たな誤差分布の中心を再設定 した結果、新たな代表点が他のボタセル内へ移動したとき(即ち、ステップ ST8で、 Y es)、ステップ ST2へ戻り、上述の処理を繰り返す。
なお、図 10は、ステップ ST5で両誤差分布から、または、両誤差分布とボタセル内 に既に設定した代表点と新たに入力された被計測点の座標値から、新たな誤差分布 と新たな誤差分布の中心を再設定した結果、新たな代表点が他のボタセル内へ移動 する場合を示している。
[0085] 図 11は、誤差分布が互いに重複する場合(図 9A)の別の模式図である。図 8のス テツプ ST5にお 、て、 2つの代表点と誤差分布を合成して新たな代表点と誤差分布 を設定する手段として、カルマンフィルタを用いることができる。例えば、二次元の場 合に、この図に示すように、 2つの代表点をそれぞれ x (l) , x' (2)、 2つの誤差分布 を∑ (1)、∑ ' (2)とし、これを合成した代表点を X (2)、誤差分布を∑ (2)とすると、代 表点 X (2)と誤差分布∑ (2)を算出する模式図は図 11のようになる。
[0086] 図 4において、出力ステップ S6では、ボタセル位置、及び代表点とその誤差分布を 出力装置 36に出力する。出力装置 36が表示装置 (例えば CRT)の場合、三次元画 像上に立体表示するのが好ましい。
また、出力ステップ S6では、ボタセル位置、及び代表点とその誤差分布を別の装置 (例えば制御装置、コンピュータ)に転送してもよぐプリンタで出力してもよい。即ち、 出力装置 36は、当該別の装置 (例えば制御装置、コンピュータ)であってよい。 なお、出力装置 36は、ボタセル位置、及び代表点とその誤差分布を記憶'保持で きる適切な記憶装置であってもよ 、。
また、出力ステップ S6において、ボタセルの代表点の位置を三次元形状の計測値 として出力装置 36に出力するとともに、該計測値の信頼性または精度を示す指標( 例えば、数値)を、該ボクセルの内部の誤差分布の大きさに基づいて、出力装置 36 に出力してもよい。さらに、出力ステップ S6において、ボタセルの代表点の位置を三 次元形状の計測値として出力装置 36に出力するときに、該ボクセルの内部の誤差分 布の大きさ (広がり)が所定の基準値よりも大きい場合に、該計測値の信頼性または 精度が所定の基準よりも低いとして、該ボクセルの前記計測値 (即ち、このボタセルの 代表点の位置)を出力装置 36に出力しな 、ようにしてもょ 、。 [0087] また、モデル更新ステップ S5にお 、て、新たに入力された被計測点の座標値に対 応するボタセルを探索し、前記ボタセル内の代表点、および誤差分布が新たに設定 されるカゝ、または再設定されるカゝ、または該ボクセルを更に分割して階層的に複数の ボタセルに分割される場合のみ、出力ステップ S6において、当該ボタセルの代表点 の位置、誤差分布およびボタセルの位置の少なくとも 、ずれかを三次元形状の計測 値として出力装置に出力してもよい。
[0088] また、出力ステップ S6において、距離センサの位置'姿勢が得られる場合は、その 位置から見える範囲の環境モデル内のボタセルの代表点の位置を三次元形状の計 測値として出力装置に出力してもよい。距離センサの位置力も見える範囲とは、距離 センサの位置力 距離センサが位置計測可能な範囲であり、距離センサの位置から 距離センサが位置計測可能な角度範囲 (視野)と、距離センサの位置から距離セン サが位置計測可能な距離範囲とを含んでよ!、。
[0089] 図 4に示した処理の手順は、新たな計測位置にぉ 、て、新 、計測データが得ら れる度に、処理を繰り返し行い、内部記憶装置 34および外部記憶装置 33の少なくと もいずれかに結果を格納する。処理を高速化するためには、内部記憶装置 34に容 量が許す限り結果を格納することが好ま 、。
[0090] 上述した本発明の方法と装置によれば、三次元形状の存在する空間領域を、複数 のボタセル 6に分割し、各ボタセル位置を外部記憶装置 33に記憶するので、計測対 象物が大き 、場合であっても、データ量をボタセル数に比例する小さ 、データサイズ に抑えることができる。
また、座標値に対応するボタセル 6の内部に代表点 7とその誤差分布 8を設定し記 憶するので、ボタセルの分解能以上の情報を表現することができる。
[0091] また、モデル構築ステップ S3にお 、て、最大のボタセル 9を必要最小限の分解能 に相当する大きさに設定し、かつ単一のボタセル 9内に複数の被計測点が存在する 場合に、単一のボタセル内に単一の被計測点のみが存在するように、該ボクセルを 更に八分割して階層的に複数のボタセルに分割するので、データ量を小さいデータ サイズに抑えると同時に、分割後のボタセルと代表点を用いて解像度を更に高めるこ とがでさる。 [0092] 特に、三次元形状上の複数の座標値を複数の計測位置を原点とする距離データと して取得し、該距離データの座標値を、前記代表点の座標値とし、距離データの座 標値の計測誤差を代表点の誤差分布とすることにより、正確な座標値と誤差分布を 用いて複数回の計測を統計的に統合することができ、一層の精度向上が可能となる 図 12は、複数の計測位置を原点とする距離データを統合することによって、代表点 の誤差分布が縮小し、代表点の精度が向上する様子を示している。このように異なる 計測位置 (即ち、距離センサである三次元計測器の位置)を原点として得られた距離 データは誤差分布の向きも異なるので、これらの距離データを環境モデルを介して 逐次統合することによって、代表点の誤差分布が縮小し、代表点の位置精度が向上 する。なお、図 12において、三次元計測後の図はコップの 2次元断面を表わした模 式図であり、三次元計測後の図の破線はコップの実際表面を表わしている。
[0093] また、原点と被計測点の間に物体が存在しないものとして、その間に位置するボタ セル内の代表点と誤差分布を再設定もしくは消去することにより、誤った計測データ を補正もしくは消去することができる。
[0094] また、新たに入力された被計測点の座標値に対応するボタセルを探索し、該ボクセ ル内に代表点がな 、場合に、前記座標値と誤差分布を代表点の座標値と誤差分布 として設定することにより、代表点の座標値と誤差分布を容易に設定できる。
[0095] 更に、前記ボタセル内に既に設定した代表点がある場合に、新たに取得した誤差 分布と既に設定したボタセル内の誤差分布とを比較し、
誤差分布が互いに重複する場合に、両誤差分布から、または、両誤差分布とボクセ ル内に既に設定した代表点と新たに入力された被計測点の座標値から、新たな誤差 分布と新たな代表点を再設定し、
誤差分布が互いに重複しない場合に、単一のボタセル内に単一の代表点のみが 存在するように、該ボクセルを更に八分割して階層的に複数のボタセルに分割する、 ことにより、誤差の蓄積を回避しながら高精度な形状に収束させることができる。
[0096] 各ボタセルの確率値は、代表点と誤差分布力も算出する。ボタセルの確率値の算 出方法は、例えば、図 13に示すように、誤差分布の全体に対してボタセルに内包さ れる分布の比力も求めることができる。
また、模式図を図 14に示すように、 2つ以上の誤差分布が交差するような場合は、 例えば、それぞれの誤差分布に対する確率値を用いたベイズ推定等により確率値の 合成を行う。
[0097] 距離センサの位置 ·姿勢の誤差分布が得られる場合は、この誤差分布を計測デー タの誤差分布に合成して、計測データの絶対誤差を算出することができる。
例えば、距離センサをォドメータ付き台車に搭載して計測を行う場合、一般に、ォド メータ情報には台車のスリップ等による誤差が含まれるため、距離センサの位置には 誤差が含まれる。図 15は、距離センサの位置の誤差分布と計測データの誤差分布 を合成し、計測データの絶対誤差を算出する場合の模式図である。
[0098] 従って、本発明の方法と装置によれば、誤差を含む距離データを正確な情報に補 正する機能を有すると共に、これを繰り返すことにより、長時間の計測に対して高精 度な形状に収束する。なおかつ、本発明の方法は、各ボタセル 6に対応する代表点 7 とその誤差分布 8を新たな計測点で更新する処理であるため計算量が小さ 、。また、 演算は周囲のボタセルへの影響を与えずボタセル内で閉じているため、高速処理が 可能である。また、計測データは最大のボタセルが必要最小限の分解能を有するボ クセル構造に逐次統合可能であり、メモリサイズは固定サイズを大きく上回ることはな い。
[0099] また、各ボタセルに確率値を持たせることによって、誤差分布が代表点の属するボ クセルよりも広がっている場合においても、各ボタセルにおける物体の存在有無を代 表点が属するボタセルを見つけ、その誤差分布力 再計算させることなぐ当該ボタ セルの確率値だけで判断できる。
[0100] また、センサの位置'姿勢に誤差がある場合でも、この誤差分布を計測データの誤 差分布に合成して、計測データの絶対誤差を算出することで、対象物体の位置精度 を向上させることができる。
[0101] カルマンフィルタを用いたモデル更新ステップについて、詳しく説明する。
[0102] カルマンフィルタを用いたモデル更新ステップの場合には、新たに入力された被計 測点の座標値およびその誤差分布と、既に設定したボタセル内の代表点およびその 誤差分布とから、カルマンフィルタにより新たな代表点と誤差分布を取得して再設定 する。
[0103] 各モデル点群の位置 m (i)を状態量とし、距離センサの計測点の位置を基に、モデ ルを次式(3)で表現する。なお、本実施例では、 m(i)は、ボタセル内部の代表点で ある(以下、同様)。
[0104] [数 3]
L(j) = hm(Rr,tr,m(i)) + vL(j)
= R (Rr- mG) - tr)一 ts) + vL( ( し, N) -(3)
[0105] 式(3)において、
L(j)は、距離センサによる計測位置である。例えば、 L(j)は、距離センサのセンサ 座標系において三次元 LRF (レーザレンジファインダ)の計測点; j(j = l, ... , N)の 位置 L(j) = (x (j), y (j), z (j))tである。ここで、 tは転置行列を示す (以下、同様)
し し し h (R , t , m(i) )は、 L (j)に対する観測系モデルである。
m r r
Rは、距離センサを搭載した移動体 (例えば、移動ロボット)のワールド座標系に対 する姿勢を表す回転行列 R=R(0x, θγ, 0ζ)である。なお、 0χ, θγ, 0ζは、そ れぞれ X軸、 y軸、 z軸周りの回転角を示す (以下、同様)。
ま、距離センサを搭載した移動体 (例えば、移動ロボット)のワールド座標系に対 する位置を表す並進ベクトル t = (X, y, z)である。
v (i)は、距離センサの計測値 L(j)に加わる観測ノイズである。
Rは、センサ座標系の移動体座標系に対する回転行列 Rs=R(0x, θγ, 0ζ)で s
ある。
tは、センサ座標系の移動体座標系に対する位置を表す併進ベクトル t = (X, y, z s s
)である。
[0106] 測定対象物は静止しているものであり、測定対象物の位置 、姿勢!^を環境モデル に対して固定する。
[0107] 距離センサによる計測点群と、環境モデル点群上の点 i (即ち、代表点)を対応づけ る。この対応付けが行われたモデル点群上の点 iに対して次式 (4)により更新を行う。 なお、距離センサによる計測点群と対応付けが行われたモデル点群上の代表点 m (i )に対してのみ次式 (4)により更新を行ってよい。
[0108] [数 4]
Kmk(i)=∑mk (i)Hmk(j) Hmk(j)∑mk (i)Hmk +∑Lk(j))- 1
m'k(i) = ¾k-i(i) +Kmk(i)(Lk(j) - hmk(Rrk,trk,mkk ))) --(4) mk(i) = 2mkk— i) - Kmk(i)Hmk(j)∑mkk— i)
[0109] 式(4)において、
添え字 kは、離散時刻 kでの値であることを表す。
m (i)につ 、て、 m, (i)は m (i)の更新値 (事後推定値)を示し、 m (i)は m, k k k k, k-1 k-
(i)に基づ!ヽた m (i)の予測値 (事前推定値)を示す。なお、環境 (測定対象物)は
1 k
静止しているので、 m (i) =m, (i)である。
k, k-1 k-1
∑ (i)は、ボタセル内部の代表点 m (i)の誤差共分散行列 (即ち、上述の誤差分 mk k
布)である。また、∑ (i)につ 、て、 ∑, (i)は∑ (i)の更新値 (事後推定値)を示 mk mk mk
し、∑ (i)は∑ ' (i)に基づ!/、た∑ (i)の予測値 (事前推定値)を示す。セ mk, k— 1 mk— 1 mk
ンサ座標系にお 、て三次元 LRFの計測点 j (j=l ,… ,Ν)の位置を L (j)で表し、その誤 差共分散行列を∑ (j) F
し で表す。ここで Nは、三次元 LR で得られた計測点の総数で ある。三次元 LRFの誤差モデルとして計測距離に関係な 、一定の正規分布を仮定 する。センサ座標系の X軸方向にレーザを照射する場合の誤差共分散行列を∑ Sと する。レーザの照射方向に応じて誤差分布も姿勢を変える。∑ (j)
し は、基準の方向 に対するレーザ照射方向を回転行列 R (j) j)
し を用いて∑ (j)=R (j)∑ R t(
し し S し と表さ れる。計測点 jのワールド座標系における位置 z(j)、およびその誤差共分散行列∑ z ( j)は、それぞれ z(j)=R (RL(j)+t)+t、 ∑ (j)=RR∑ (j)RtRtと表すことがで r s s r z r s L s r
きる。
K (i)は、 m (i)に対するカルマンゲインである。
mk k
(R , t , m (i))は、 L (j)、 i=p (j)に対する観測系モデルである。 i=p (j )は、計測点 jに対応付けられた環境地図(即ち、環境モデル)上の点である。
H は、 L (j)、 i=p (j)に対する観測系モデルのヤコビアン行列であり、次の式(5 mk k k
)で表わされる。
[0110] [数 5]
Figure imgf000029_0001
[0111] カルマンフィルタの更新過程によって、環境地図のモデル点群の各点(ボタセルの 代表点)の位置と誤差共分散行列の更新値 m' (i)、∑ ' (i)が得られた段階で、環 k mk
境モデルの更新を以下の手順で行う。
(1)これら更新値 m' (i)、∑ ' (i)を、新たな代表点、誤差分布として再設定する。
k mk
(2)上述(1)の結果、代表点の位置が別のボタセル内に移動した場合、移動先のボ クセルが代表点を保持して 、な 、ときは、移動後の代表点とその誤差共分散行列を 移動先のボタセルに保持させ、移動元のボタセルからは代表点等を取り除く。移動先 のボタセルが既に代表点を保持しているときには、 2つの代表点において、これらの 両誤差分布が重複するかを判断する(上述の ST4における判断と同様)。その後の 処理は、図 8の ST4以降の処理と同じであってよい。
(3)モデル点群上の代表点 m (i)と対応付けが行われな力つた距離センサによる計 測点について、当該計測点が含まれるボタセルが代表点を持たない場合は、計測点 とその誤差分布をそのボタセルの代表点と誤差分布として追加し保持する。もし、ボ クセル内に既に代表点が存在する場合には、ボタセル内にある対応付けが行われな 力つた他の複数の計測点を含め、既存の代表点と各計測点とが全て異なるボタセル に含まれるように、ボタセルを分割した上で分割後のボタセルに代表点等を継承させ る。
[0112] 上述のカルマンフィルタを用いたモデル更新ステップを繰り返すことで、序々にボタ セル内の誤差共分散行列 (即ち、誤差分布)の範囲が小さくなるとともに、ボタセルが 分割され易くなる。ボタセルが分割されることによって、初期ボタセルのサイズ以下の 変化も表現することが可能となる。 図 16は、カルマンフィルタを用 V、たモデル更新ステップにより得られた結果を示す 。図 17は図 16の一部拡大図である。これら図において、初期のボタセルの 1辺の長 さを 100cmとし、再分割数を 6分割まで許している。対象が存在している領域では、ボ クセルの再分割を繰り返した結果、計測対象を精度良く表現している。対象が存在し な 、領域ではボタセルの再分割は行われず、必要十分なデータ量で環境を表現で きることがわ力る。また、各ボタセル内の代表点の誤差分布も小さぐ環境地図を高精 度で表現できている。このように、誤差を含むデータであってもカルマンフィルタの効 果により、真値に収束した結果が得られる。さらに、この方法では計測データ数を増 カロさせることによって標準偏差が小さくなり、精度のさらなる向上が期待できる。
[0113] また、測定対象物の位置 ·姿勢は固定しているため、更新を測定対象物の位置'姿 勢と独立して行うことができる。なお、距離センサによる計測点群と対応付けが行われ たモデル点群上の代表点 m (i)に対してのみ、上述のカルマンフィルタによる更新を 行うことで、大幅な計算コストの削減が可能になる。
[0114] 計測点と環境地図 (即ち、環境モデル)との対応付けについて補足説明をする。対 応付けは次のように行える。
対象とする計測点 jの誤差共分散行列∑ (j) 3
し の範囲 (例えば標準偏差の倍の範囲
)と交わる最上位のボタセルとそのボタセルに隣接して 、る最上位のボタセルを求め 、下層のボタセルも含めこれらのボタセル内に存在する代表点を対応点の候補とす る。ボタセルが階層構造となっているため、この候補点の探索には計算コストはほとん どかからない。このとき、候補となる代表点がない場合には、対応点がないものとみな す。隣接するボタセルも候補に加える理由は、ボタセル内の代表点の位置によって は、誤差共分散行列の範囲が隣接するボタセルまではみ出すことがあるからである。
[0115] 実施形態として、三次元形状データの記憶 ·表示方法と装置、および三次元形状 の計測方法と装置にっ 、て説明したが、二次元形状を三次元形状の特別な場合とし て見ることにより、二次元形状データの記憶'表示方法と装置、および二次元形状の 計測方法と装置の形態としても実施できる。
また、上記出力ステップにおいて、前記ボタセル位置、代表点、および誤差分布の すべてを出力しなくてもよぐ例えば、これらすべてが無くても三次元形状が把握でき る場合や、これらのうち 1つ又は 2つが必要な場合などにおいては、前記ボタセル位 置、代表点、および誤差分布の少なくともいずれかを出力装置に出力してもよい。 なお、本発明は、上述した実施形態に限定されず、本発明の要旨を逸脱しない範 囲で種々〖こ変更することができることは勿論である。

Claims

請求の範囲
[1] 三次元形状上の被計測点の座標値から三次元形状を復元するための三次元形状 データの記憶 ·表示方法であって、
三次元形状上の座標値をコンピュータに入力するデータ入力ステップと、 前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築ステップと、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチングステップと、
前記ボタセル位置、代表点、および誤差分布を出力装置に出力する出力ステップ とを有する、ことを特徴とする三次元形状データの記憶 ·表示方法。
[2] 前記モデル構築ステップにお 、て、最大のボタセルを必要最小限の分解能に相当 する大きさに設定し、かつ単一のボタセル内に複数の被計測点が存在する場合に、 単一のボタセル内に単一の被計測点のみが存在するように、該ボクセルを更に分割 して階層的に複数のボタセルに分割する、ことを特徴とする請求項 1に記載の三次元 形状データの記憶 ·表示方法。
[3] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値に対応 するボタセルを探索し、
原点と被計測点の間に物体が存在しな 、ものとして、その間に位置するボタセル内 の代表点と誤差分布を再設定もしくは消去する、ことを特徴とする請求項 1に記載の 三次元形状データの記憶 ·表示方法。
[4] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値に対応 するボタセルを探索し、
該ボクセル内に代表点がな 、場合に、前記座標値と誤差分布を代表点の座標値と 誤差分布として設定する、ことを特徴とする請求項 1に記載の三次元形状データの記 憶 ·表示方法。
[5] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値に対応 するボタセルを探索し、
前記ボタセル内に既に設定した代表点がある場合に、新たに取得した誤差分布と 既に設定したボタセル内の誤差分布とを比較し、
誤差分布が互いに重複する場合に、両誤差分布から新たな誤差分布と新たな代表 点を再設定し、
誤差分布が互いに重複しない場合に、単一のボタセル内に単一の代表点のみが 存在するように、該ボクセルを更に分割して階層的に複数のボタセルに分割する、こ とを特徴とする請求項 1に記載の三次元形状データの記憶 ·表示方法。
[6] ボタセルの内部に代表点とその誤差分布に加えて、確率値を併せ持つ、ことを特徴 とする請求項 1に記載の三次元形状データの記憶 ·表示方法。
[7] 前記データ入力ステップにお 、て、距離センサを用いて、三次元形状上の座標値 を任意の計測位置を原点とする距離データとして原点を移動しながら順次取得する 、ことを特徴とする請求項 1に記載の三次元形状データの記憶 ·表示方法。
[8] 前記距離センサの位置と誤差分布が得られる場合に、距離センサの位置の誤差分 布と計測データの誤差分布を合成する、ことを特徴とする請求項 7に記載の三次元 形状データの記憶 ·表示方法。
[9] 前記モデル更新ステップにおいて、前記新たに取得した誤差分布と前記既に設定 したボタセル内の誤差分布とを比較し、誤差分布が互いに重複する場合に、両誤差 分布力 新たな誤差分布と新たな代表点を再設定した結果、新たな代表点が他のボ クセル内へ移動したとき、
該他のボタセル内に代表点がな!、場合に、該新たな誤差分布と該新たな代表点を 該他のボタセルの内部に設定し、
該他のボタセル内に既に設定した代表点がある場合に、該新たな誤差分布と既に 設定した該他のボタセル内の誤差分布とを比較し、(A)誤差分布が互いに重複する 場合に、両誤差分布から、または、両誤差分布とボタセル内に既に設定した代表点と 新たに入力された被計測点の座標値から、新たな誤差分布と新たな代表点を再設 定し、(B)誤差分布が互いに重複しない場合に、単一のボタセル内に単一の代表点 のみが存在するように、該ボクセルを更に分割して階層的に複数のボタセルに分割 する、ことを特徴とする請求項 5に記載の三次元形状データの記憶 ·表示方法。
[10] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、
該モデル更新ステップにお 、て、新たに入力された被計測点の座標値およびその 誤差分布と、既に設定したボタセル内の代表点およびその誤差分布とから、カルマン フィルタにより新たな代表点と誤差分布を取得して再設定する、ことを特徴とする請求 項 1に記載の三次元形状データの記憶 ·表示方法。
[11] 三次元形状上の被計測点の座標値から三次元形状を復元するための三次元形状 データの記憶 ·表示装置であって、
三次元形状上の座標値をコンピュータに入力するデータ入力装置と、
前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築装置と、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチング装置と、
前記ボタセル位置、代表点、および誤差分布を出力装置に出力するデータ伝達装 置とを備える、ことを特徴とする三次元形状データの記憶 ·表示装置。
[12] 三次元形状上の被計測点の座標値から三次元形状を復元し、三次元形状データ を出力する三次元形状の計測方法であって、
三次元形状上の座標値をコンピュータに入力するデータ入力ステップと、 前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築ステップと、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチングステップと、
前記代表点、ボタセル位置および誤差分布の少なくともいずれかを出力装置に出 力する出力ステップとを有する、ことを特徴とする三次元形状の計測方法。
[13] 前記出力ステップにおいて、前記ボタセルの代表点の位置を三次元形状の計測値 として出力装置に出力するとともに、該計測値の信頼性または精度を示す指標を、該 ボタセルの内部の誤差分布の大きさに基づいて、出力装置に出力する、ことを特徴と する請求項 12に記載の三次元形状の計測方法。
[14] 前記出力ステップにおいて、前記ボタセルの代表点の位置を三次元形状の計測値 として出力装置に出力するときに、該ボクセルの内部の誤差分布の大きさが所定の 基準値よりも大きい場合に、該計測値の信頼性または精度が所定の基準よりも低いと して、該ボクセルの前記計測値を出力装置に出力しない、ことを特徴とする請求項 1 2に記載の三次元形状の計測方法。
[15] 前記データ入力ステップにお 、て、距離センサを用いて、三次元形状上の座標値 を任意の計測位置を原点とする距離データとして原点を移動しながら順次取得する 、ことを特徴とする請求項 12に記載の三次元形状の計測方法。
[16] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値に対応 するボタセルを探索し、
該ボクセル内に代表点がな 、場合に、前記座標値と誤差分布を代表点の座標値と 誤差分布として設定する、ことを特徴とする請求項 12に記載の三次元形状の計測方 法。
[17] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値に対応 するボタセルを探索し、
前記ボタセル内に既に設定した代表点がある場合に、新たに取得した誤差分布と 既に設定したボタセル内の誤差分布とを比較し、
誤差分布が互いに重複する場合に、両誤差分布から、または、両誤差分布とボクセ ル内に既に設定した代表点と新たに入力された被計測点の座標値から、新たな誤差 分布と新たな代表点を再設定し、
誤差分布が互いに重複しない場合に、単一のボタセル内に単一の代表点のみが 存在するように、該ボクセルを更に分割して階層的に複数のボタセルに分割する、こ とを特徴とする請求項 12に記載の三次元形状の計測方法。
[18] 前記マッチングステップの後に、前記環境モデルを更新するモデル更新ステップを 有し、該モデル更新ステップにおいて、新たに入力された被計測点の座標値に対応 するボタセルを探索し、前記ボタセル内の代表点および誤差分布の少なくとも 、ずれ かが新たに設定される、または再設定される、または該ボクセルを更に分割して階層 的に複数のボタセルに分割される場合、前記出力ステップにおいて、当該ボタセル の代表点の位置を三次元形状の計測値として出力装置に出力する、ことを特徴とす る請求項 12に記載の三次元形状の計測方法。
[19] 前記出力ステップにおいて、距離センサの位置力 距離センサが位置計測可能な 範囲の環境モデル内のボタセルの代表点の位置を三次元形状の計測値として出力 装置に出力する、ことを特徴とする請求項 12に記載の三次元形状の計測方法。
[20] 三次元形状上の被計測点の座標値から三次元形状を復元し、三次元形状データ を出力する三次元形状の計測装置であって、
三次元形状上の座標値をコンピュータに入力するデータ入力装置と、
前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築装置と、
前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチング装置と、
前記代表点、ボタセル位置および誤差分布の少なくともいずれかを出力装置に出 力するデータ伝達装置とを備える、ことを特徴とする三次元形状の計測装置。
[21] 三次元形状上の被計測点の座標値から三次元形状を復元するための三次元形状 データの記憶 ·表示方法であって、
三次元形状上の座標値をコンピュータに入力するデータ入力ステップと、 前記三次元形状の存在する空間領域を、境界表面が互いに直交する直方体から なる複数のボタセルに分割し、各ボタセル位置を記憶する環境モデルを構築するモ デル構築ステップと、 前記座標値に対応するボタセルの内部に代表点とその誤差分布を設定し記憶する マッチングステップと、
前記代表点、ボタセル位置および誤差分布の少なくともいずれかを出力装置に出 力する出力ステップとを有する、ことを特徴とする三次元形状データの記憶 ·表示方 法。
PCT/JP2006/325042 2005-12-16 2006-12-15 三次元形状データの記憶・表示方法と装置および三次元形状の計測方法と装置 WO2007069721A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
DE112006003361T DE112006003361T5 (de) 2005-12-16 2006-12-15 Verfahren und Vorrichtung für das Aufzeichnen/Anzeigen von dreidimensionalen Formdaten und Verfahren und Vorrichtung für das Messen einer dreidimensionalen Form
US12/096,871 US8300048B2 (en) 2005-12-16 2006-12-15 Three-dimensional shape data recording/display method and device, and three-dimensional shape measuring method and device
JP2007550239A JP4650750B2 (ja) 2005-12-16 2006-12-15 三次元形状データの記憶・表示方法と装置および三次元形状の計測方法と装置
CN2006800474232A CN101331380B (zh) 2005-12-16 2006-12-15 三维形状数据的存储/显示方法和装置以及三维形状的计测方法和装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005363295 2005-12-16
JP2005-363295 2005-12-16

Publications (1)

Publication Number Publication Date
WO2007069721A1 true WO2007069721A1 (ja) 2007-06-21

Family

ID=38163023

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/325042 WO2007069721A1 (ja) 2005-12-16 2006-12-15 三次元形状データの記憶・表示方法と装置および三次元形状の計測方法と装置

Country Status (5)

Country Link
US (1) US8300048B2 (ja)
JP (1) JP4650750B2 (ja)
CN (1) CN101331380B (ja)
DE (1) DE112006003361T5 (ja)
WO (1) WO2007069721A1 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008309671A (ja) * 2007-06-15 2008-12-25 Ihi Corp 物体認識方法および装置
JPWO2007069726A1 (ja) * 2005-12-16 2009-05-28 株式会社Ihi 自己位置同定方法と装置および三次元形状の計測方法と装置
JPWO2007069724A1 (ja) * 2005-12-16 2009-05-28 株式会社Ihi 三次元形状データの位置合わせ方法と装置
JP2009128097A (ja) * 2007-11-21 2009-06-11 Ihi Corp バリまたは欠損認識方法と装置およびバリ取り方法と装置
JP2015190896A (ja) * 2014-03-28 2015-11-02 川崎重工業株式会社 目標探知支援システムおよびその方法
JP2017198517A (ja) * 2016-04-27 2017-11-02 株式会社国際電気通信基礎技術研究所 3次元地図生成システム
WO2017212929A1 (ja) * 2016-06-08 2017-12-14 ソニー株式会社 撮像制御装置および方法、並びに車両
JP2019053597A (ja) * 2017-09-15 2019-04-04 Kddi株式会社 選別装置、方法及びプログラム
JP2019192206A (ja) * 2018-04-27 2019-10-31 深セン市優必選科技股▲ふん▼有限公司Ubtech Poboticscorp Ltd 充電台の認識方法、装置及びロボット
JP2020035448A (ja) * 2018-08-30 2020-03-05 バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド 3次元シーンマップの生成方法、生成装置、機器および記憶媒体
WO2022003976A1 (ja) * 2020-07-03 2022-01-06 日本電気株式会社 測距誤差算出装置、測距誤差算出方法及び記憶媒体
WO2022180801A1 (ja) * 2021-02-26 2022-09-01 株式会社安川電機 シミュレーション装置、制御システム及びモデリング方法
KR20220126438A (ko) * 2021-03-09 2022-09-16 서울대학교산학협력단 3d 솔리드 모델의 디자인 방법
JP7416968B2 (ja) 2020-08-31 2024-01-17 ネイバーラボス コーポレーション 位置推定方法及びシステム

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8593457B2 (en) * 2010-05-27 2013-11-26 National Tsing Hua University Method of three-dimensional image data processing
CN102270291A (zh) * 2010-06-04 2011-12-07 上海三旗通信科技有限公司 一种新颖的中央处理器id软件保护方案及操作方法
FR2976352B1 (fr) * 2011-06-09 2015-04-10 Univ Savoie Procede et dispositif de caracterisation de surfaces.
EP2765386A4 (en) * 2011-08-29 2015-04-08 Hitachi Ltd MONITORING DEVICE, MONITORING SYSTEM AND MONITORING PROCEDURE
KR102123196B1 (ko) * 2011-09-13 2020-06-16 오에스아이 옵토일렉트로닉스 개선된 레이저 레인지파인더 센서
US8948497B2 (en) * 2012-09-04 2015-02-03 Digital Signal Corporation System and method for increasing resolution of images obtained from a three-dimensional measurement system
US9364995B2 (en) 2013-03-15 2016-06-14 Matterrise, Inc. Three-dimensional printing and scanning system and method
JP6180065B2 (ja) * 2013-10-30 2017-08-16 川崎重工業株式会社 物体位置検出装置および方法
JP6230442B2 (ja) * 2014-02-20 2017-11-15 株式会社東芝 算出装置、方法及びプログラム
JP2015184061A (ja) * 2014-03-20 2015-10-22 株式会社東芝 抽出装置、方法及びプログラム
JP6559535B2 (ja) 2015-10-22 2019-08-14 株式会社東芝 障害物マップ生成装置、その方法、及び、そのプログラム
US20170309060A1 (en) * 2016-04-21 2017-10-26 Honeywell International Inc. Cockpit display for degraded visual environment (dve) using millimeter wave radar (mmwr)
JP6786264B2 (ja) 2016-05-27 2020-11-18 株式会社東芝 情報処理装置、情報処理方法、および車両
US10839598B2 (en) * 2016-07-26 2020-11-17 Hewlett-Packard Development Company, L.P. Indexing voxels for 3D printing
US10816659B2 (en) * 2018-05-15 2020-10-27 GM Global Technology Operations LLC Method for efficient volumetric integration for 3D sensors
CN109029251A (zh) * 2018-06-14 2018-12-18 福建省汽车工业集团云度新能源汽车股份有限公司 一种通用式汽车管路检测设备

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63186308A (ja) * 1987-01-28 1988-08-01 Hitachi Ltd 移動体の誘導方法、および装置
JPH0618221A (ja) * 1991-03-11 1994-01-25 Agency Of Ind Science & Technol 多視点距離データの統合方法
JPH09229648A (ja) * 1996-02-21 1997-09-05 Canon Inc 画像情報入出力装置及び画像情報入出力方法
JP2000113193A (ja) * 1998-10-08 2000-04-21 Minolta Co Ltd 多視点3次元データの合成方法および記録媒体
JP2001022939A (ja) * 1999-07-12 2001-01-26 Nippon Telegr & Teleph Corp <Ntt> 3次元情報抽出方法、装置、および3次元情報抽出プログラムを記録した記録媒体
JP2001236522A (ja) * 1999-12-17 2001-08-31 Canon Inc 画像処理装置
JP2003296755A (ja) * 2001-11-27 2003-10-17 Samsung Electronics Co Ltd 深さイメージに基づく3次元物体を表現するためのノード構造
JP2004521423A (ja) * 2001-03-12 2004-07-15 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 8分木を用いた多数の画像からの3次元表現の生成
JP2005037379A (ja) * 2003-06-30 2005-02-10 Sanyo Electric Co Ltd 三次元モデリング方法と装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2625345A1 (fr) * 1987-12-24 1989-06-30 Thomson Cgr Procede de visualisation en trois dimensions d'objets codes numeriquement sous forme arborescente et dispositif de mise en oeuvre
JPH03170345A (ja) 1989-11-28 1991-07-23 Asahi Glass Co Ltd サーマルヘッドの抵抗体オーバーコートガラス組成物
JP3170345B2 (ja) 1992-05-13 2001-05-28 日本電信電話株式会社 3次元情報抽出方法
JPH06223201A (ja) * 1993-01-22 1994-08-12 Matsushita Electric Ind Co Ltd 並列画像生成装置
US5724493A (en) * 1994-12-13 1998-03-03 Nippon Telegraph & Telephone Corporation Method and apparatus for extracting 3D information of feature points
JPH0981788A (ja) 1995-09-12 1997-03-28 Toshiba Corp 環境モデル入力装置
US5689629A (en) * 1995-12-12 1997-11-18 The Regents Of The University Of California Iterative optimizing quantization method for reconstructing three-dimensional images from a limited number of views
JPH09231370A (ja) * 1996-02-21 1997-09-05 Canon Inc 画像情報入力装置
US6064942A (en) * 1997-05-30 2000-05-16 Rockwell Collins, Inc. Enhanced precision forward observation system and method
JPH1196374A (ja) * 1997-07-23 1999-04-09 Sanyo Electric Co Ltd 3次元モデリング装置、3次元モデリング方法および3次元モデリングプログラムを記録した媒体
JP3813343B2 (ja) * 1997-09-09 2006-08-23 三洋電機株式会社 3次元モデリング装置
US6026189A (en) * 1997-11-13 2000-02-15 National Research Council Of Canada Method of recognizing objects within two-dimensional and three-dimensional images
US7477768B2 (en) * 1999-06-29 2009-01-13 The Research Foundation Of State University Of New York System and method for performing a three-dimensional virtual examination of objects, such as internal organs
US6476803B1 (en) * 2000-01-06 2002-11-05 Microsoft Corporation Object modeling system and process employing noise elimination and robust surface extraction techniques
US6914601B2 (en) * 2001-06-12 2005-07-05 Minolta Co., Ltd. Method, apparatus, and computer program for generating three-dimensional shape data or volume data
JP2003015739A (ja) 2001-07-02 2003-01-17 Yaskawa Electric Corp 外環境地図、並びに自己位置同定装置および誘導制御装置
JP2003065736A (ja) * 2001-08-24 2003-03-05 Sanyo Electric Co Ltd 3次元モデリング装置
EP1321893B1 (en) * 2001-11-27 2011-11-09 Samsung Electronics Co., Ltd. Node structure for representing 3-dimensional objects using depth image
KR100812506B1 (ko) * 2002-05-31 2008-03-11 후지쯔 가부시끼가이샤 원격 조작 로봇 및 로봇 자기 위치 추정 방법
CN100388317C (zh) * 2002-06-28 2008-05-14 富士通株式会社 三维图象的比较程序、比较方法及比较装置
US7317456B1 (en) * 2002-12-02 2008-01-08 Ngrain (Canada) Corporation Method and apparatus for transforming point cloud data to volumetric data
US7843512B2 (en) * 2004-03-31 2010-11-30 Honeywell International Inc. Identifying key video frames
US20060017720A1 (en) * 2004-07-15 2006-01-26 Li You F System and method for 3D measurement and surface reconstruction
JP5314244B2 (ja) 2004-10-27 2013-10-16 富山化学工業株式会社 新規な含窒素複素環化合物およびその塩
DE102005035746B4 (de) * 2005-07-29 2010-02-18 Siemens Ag Verfahren zur Bestimmung einer Relativposition einer mobilen Einheit durch Vergleich von Scans einer Umgebung und mobile Einheit
US7653235B2 (en) * 2005-10-27 2010-01-26 Honeywell International Inc. Surface anomaly detection system and method
US8121399B2 (en) * 2005-12-16 2012-02-21 Ihi Corporation Self-position identifying method and device, and three-dimensional shape measuring method and device
CN101331381B (zh) * 2005-12-16 2011-08-24 株式会社Ihi 三维形状数据的位置对准方法和装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63186308A (ja) * 1987-01-28 1988-08-01 Hitachi Ltd 移動体の誘導方法、および装置
JPH0618221A (ja) * 1991-03-11 1994-01-25 Agency Of Ind Science & Technol 多視点距離データの統合方法
JPH09229648A (ja) * 1996-02-21 1997-09-05 Canon Inc 画像情報入出力装置及び画像情報入出力方法
JP2000113193A (ja) * 1998-10-08 2000-04-21 Minolta Co Ltd 多視点3次元データの合成方法および記録媒体
JP2001022939A (ja) * 1999-07-12 2001-01-26 Nippon Telegr & Teleph Corp <Ntt> 3次元情報抽出方法、装置、および3次元情報抽出プログラムを記録した記録媒体
JP2001236522A (ja) * 1999-12-17 2001-08-31 Canon Inc 画像処理装置
JP2004521423A (ja) * 2001-03-12 2004-07-15 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 8分木を用いた多数の画像からの3次元表現の生成
JP2003296755A (ja) * 2001-11-27 2003-10-17 Samsung Electronics Co Ltd 深さイメージに基づく3次元物体を表現するためのノード構造
JP2005037379A (ja) * 2003-06-30 2005-02-10 Sanyo Electric Co Ltd 三次元モデリング方法と装置

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2007069726A1 (ja) * 2005-12-16 2009-05-28 株式会社Ihi 自己位置同定方法と装置および三次元形状の計測方法と装置
JPWO2007069724A1 (ja) * 2005-12-16 2009-05-28 株式会社Ihi 三次元形状データの位置合わせ方法と装置
JP4650752B2 (ja) * 2005-12-16 2011-03-16 株式会社Ihi 自己位置同定方法と装置および三次元形状の計測方法と装置
JP4650751B2 (ja) * 2005-12-16 2011-03-16 株式会社Ihi 三次元形状データの位置合わせ方法と装置
JP2008309671A (ja) * 2007-06-15 2008-12-25 Ihi Corp 物体認識方法および装置
JP2009128097A (ja) * 2007-11-21 2009-06-11 Ihi Corp バリまたは欠損認識方法と装置およびバリ取り方法と装置
JP2015190896A (ja) * 2014-03-28 2015-11-02 川崎重工業株式会社 目標探知支援システムおよびその方法
JP2017198517A (ja) * 2016-04-27 2017-11-02 株式会社国際電気通信基礎技術研究所 3次元地図生成システム
JPWO2017212929A1 (ja) * 2016-06-08 2019-04-11 ソニー株式会社 撮像制御装置および方法、並びに車両
US11158076B2 (en) 2016-06-08 2021-10-26 Sony Corporation Imaging control device and method, and vehicle
WO2017212929A1 (ja) * 2016-06-08 2017-12-14 ソニー株式会社 撮像制御装置および方法、並びに車両
EP3470776A4 (en) * 2016-06-08 2019-04-17 Sony Corporation PICTURE CONTROL DEVICE AND METHOD AND VEHICLE
JP2019053597A (ja) * 2017-09-15 2019-04-04 Kddi株式会社 選別装置、方法及びプログラム
JP2019192206A (ja) * 2018-04-27 2019-10-31 深セン市優必選科技股▲ふん▼有限公司Ubtech Poboticscorp Ltd 充電台の認識方法、装置及びロボット
US11069133B2 (en) 2018-08-30 2021-07-20 Baidu Online Network Technology (Beijing) Co., Ltd. Method and device for generating three-dimensional scene map
JP2020035448A (ja) * 2018-08-30 2020-03-05 バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド 3次元シーンマップの生成方法、生成装置、機器および記憶媒体
WO2022003976A1 (ja) * 2020-07-03 2022-01-06 日本電気株式会社 測距誤差算出装置、測距誤差算出方法及び記憶媒体
JP7435779B2 (ja) 2020-07-03 2024-02-21 日本電気株式会社 測距誤差算出装置、測距誤差算出方法及びプログラム
JP7416968B2 (ja) 2020-08-31 2024-01-17 ネイバーラボス コーポレーション 位置推定方法及びシステム
WO2022180801A1 (ja) * 2021-02-26 2022-09-01 株式会社安川電機 シミュレーション装置、制御システム及びモデリング方法
KR20220126438A (ko) * 2021-03-09 2022-09-16 서울대학교산학협력단 3d 솔리드 모델의 디자인 방법
KR102474886B1 (ko) 2021-03-09 2022-12-06 서울대학교 산학협력단 3d 솔리드 모델의 디자인 방법

Also Published As

Publication number Publication date
JPWO2007069721A1 (ja) 2009-05-28
JP4650750B2 (ja) 2011-03-16
US8300048B2 (en) 2012-10-30
CN101331380A (zh) 2008-12-24
US20090184961A1 (en) 2009-07-23
DE112006003361T5 (de) 2008-10-16
CN101331380B (zh) 2011-08-03

Similar Documents

Publication Publication Date Title
WO2007069721A1 (ja) 三次元形状データの記憶・表示方法と装置および三次元形状の計測方法と装置
JP4650751B2 (ja) 三次元形状データの位置合わせ方法と装置
JP4650752B2 (ja) 自己位置同定方法と装置および三次元形状の計測方法と装置
JP5759161B2 (ja) 物体認識装置、物体認識方法、学習装置、学習方法、プログラム、および情報処理システム
JP5380792B2 (ja) 物体認識方法および装置
JP2021152662A5 (ja)
JP5627325B2 (ja) 位置姿勢計測装置、位置姿勢計測方法、およびプログラム
CN112639502A (zh) 机器人位姿估计
CN112219087A (zh) 位姿预测方法、地图构建方法、可移动平台及存储介质
KR102083911B1 (ko) 점군을 포함하는 라이다 지도 생성 방법
CN114526745A (zh) 一种紧耦合激光雷达和惯性里程计的建图方法及系统
CN112348897A (zh) 位姿确定方法及装置、电子设备、计算机可读存储介质
CN112733971B (zh) 扫描设备的位姿确定方法、装置、设备及存储介质
KR102083913B1 (ko) 라이다를 이용한 지도 생성 장치
KR102130687B1 (ko) 다중 센서 플랫폼 간 정보 융합을 위한 시스템
CN113409446B (zh) 一种盲人辅助视觉处理方法及装置
JP2022023508A (ja) 情報処理装置、情報処理方法、プログラム及びデータ構造
CN112612788A (zh) 一种无导航卫星信号下的自主定位方法
Cloitre Omnidirectional obstacle detection using minimal sensing
BECK et al. EXTENSION AND OPTIMIZATION OF THREE DIMENSIONAL INDOOR MAPS USING LINE CHARACTERISTICS
Unger Integrated estimation of UAV image orientation with a generalised building model
CN118111416A (zh) 融合定位方法、装置、介质及电子设备
Fossel Improving Light Detection and Ranging Based Simultaneous Localization and Mapping with Advanced Map Representations
CN116524014A (zh) 一种在线标定外参的方法、装置
CN117685953A (zh) 面向多无人机协同定位的uwb与视觉融合定位方法及系统

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200680047423.2

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2007550239

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 12096871

Country of ref document: US

RET De translation (de og part 6b)

Ref document number: 112006003361

Country of ref document: DE

Date of ref document: 20081016

Kind code of ref document: P

WWE Wipo information: entry into national phase

Ref document number: 112006003361

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 06834785

Country of ref document: EP

Kind code of ref document: A1