JP2011158386A - Non-contact three-dimensional measuring apparatus and method - Google Patents

Non-contact three-dimensional measuring apparatus and method Download PDF

Info

Publication number
JP2011158386A
JP2011158386A JP2010021318A JP2010021318A JP2011158386A JP 2011158386 A JP2011158386 A JP 2011158386A JP 2010021318 A JP2010021318 A JP 2010021318A JP 2010021318 A JP2010021318 A JP 2010021318A JP 2011158386 A JP2011158386 A JP 2011158386A
Authority
JP
Japan
Prior art keywords
image
line
line laser
camera
measured
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010021318A
Other languages
Japanese (ja)
Other versions
JP5457865B2 (en
Inventor
Takafusa Futamura
孝房 二村
Akira Nagai
亮 永井
Junichi Sakamoto
淳一 坂本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kurabo Industries Ltd
Kurashiki Spinning Co Ltd
Original Assignee
Kurabo Industries Ltd
Kurashiki Spinning Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kurabo Industries Ltd, Kurashiki Spinning Co Ltd filed Critical Kurabo Industries Ltd
Priority to JP2010021318A priority Critical patent/JP5457865B2/en
Publication of JP2011158386A publication Critical patent/JP2011158386A/en
Application granted granted Critical
Publication of JP5457865B2 publication Critical patent/JP5457865B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a non-contact three-dimensional measuring apparatus and method, capable of performing a fast measurement of an object without a feature on a surface. <P>SOLUTION: The non-contact three-dimensional measuring apparatus includes first and second cameras 2a, 2b for capturing images of the object to be measured 1, a line laser 4 for irradiating the object to be measured 1 with a line laser 12, a locating section 6 for externally locating the first and second cameras 2a, 2b with regard to a mutual location relationship, and an image processing section 8 for implementing image processing of the first and second images of the object to be measured 1 irradiated with the line laser 12 and captured by the first and second cameras 2a, 2b. The image processing section 8 selects a feature point as one point in a first line data irradiated with the line laser 12 on the first image, determines a correspondence point corresponding to the feature point selected on the first image as an intersection between an epipolar line and a second line data irradiated with the line laser 12 on the second image, and calculates a three-dimensional coordinate of the point on the object to be measured 1. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、被計測物の形状を非接触で計測する非接触三次元計測装置及び非接触三次元計測方法に関する。   The present invention relates to a non-contact three-dimensional measurement apparatus and a non-contact three-dimensional measurement method for measuring the shape of an object to be measured in a non-contact manner.

被計測物を計測する三次元計測の方法には、パッシブ法(受動型計測法)とアクティブ法(能動型計測法)とがある。パッシブ法としては、対象となる物体に対して、計測の補助となる特定の光や電波等を照射することなく計測を行う方法である。パッシブ法には、例えば写真計測法がある。アクティブ法は、三次元計測を行うために光、電波、音波などを対象となる物体に照射して、得られる情報を利用して計測を行う方法である。アクティブ法には、例えば光切断法がある。   There are a passive method (passive measurement method) and an active method (active measurement method) as three-dimensional measurement methods for measuring an object to be measured. The passive method is a method in which measurement is performed without irradiating a target object with specific light, radio waves, or the like that assist measurement. The passive method includes, for example, a photo measurement method. The active method is a method of performing measurement using information obtained by irradiating light, radio waves, sound waves, or the like on a target object in order to perform three-dimensional measurement. The active method includes, for example, a light cutting method.

パッシブ法の一つである写真計測は、撮影された2枚以上の画像より外部標定(2台のカメラの位置関係を求めること)を行い、画像間の特徴点に対し、同一場所を対応付けることで三次元点を求めていた(例えば、特許文献1参照。)。このため、写真に写るサイズであれば、被計測物の大きさは自由であり、大きな物から、小さな物まで計測することができる。   Photo measurement, which is one of the passive methods, performs external orientation (determining the positional relationship between two cameras) from two or more captured images, and associates the same location with the feature points between the images. The three-dimensional point was calculated | required by (For example, refer patent document 1). For this reason, the size of the object to be measured is arbitrary as long as it can be seen in the photograph, and it is possible to measure a large object to a small object.

特許第3924576号Japanese Patent No. 3924576

徐剛著,「写真から作る3次元CG」,近代科学社,2001年1月 P.31〜P.86Xu Tsuyoshi, “Three-dimensional CG made from photographs”, Modern Science, January 2001 31-P. 86 吉澤徹編,「光三次元計測」,新技術コミュニケーションズ,1993年3月 P.28〜P.37Edited by Toru Yoshizawa, “Optical 3D Measurement”, New Technology Communications, March 1993 28-P. 37

写真測量において、2台のカメラでそれぞれ撮影された2枚の写真内の対応付けは、2枚の写真内に共通して写っており、同一箇所と認定できる特徴点を利用して行われる。そのため、被計測物の表面上に同一箇所と認定できる何らかの特徴点がなければ、2枚の写真内の対応付けは困難であった。たとえば、プラスチック成型品の表面は滑らかで特徴がないため、写真測量による特徴点の対応付けを利用する三次元計測はできなかった。   In photogrammetry, the association between two photographs taken by two cameras is shown in common in the two photographs, and is performed using feature points that can be identified as the same location. For this reason, if there is no feature point that can be recognized as the same location on the surface of the object to be measured, it is difficult to associate the two photographs. For example, since the surface of a plastic molded product is smooth and has no features, three-dimensional measurement using feature point correspondence by photogrammetry has not been possible.

上述のように、パッシブ法である写真計測では、滑らかな表面等の何ら特徴のない形状は計測することは困難であった。また、アクティブ法である光切断法は、被計測物のサイズが装置によって限定されてしまうという欠点を持っている   As described above, it is difficult to measure a shape having no features such as a smooth surface in the photo measurement which is a passive method. In addition, the light cutting method, which is an active method, has the disadvantage that the size of the object to be measured is limited by the apparatus.

本発明の目的は、表面に何ら特徴のない物体についても高速に非接触で三次元形状計測を可能にする非接触三次元計測装置及び非接触三次元計測方法を提供することである。   An object of the present invention is to provide a non-contact three-dimensional measurement apparatus and a non-contact three-dimensional measurement method that enable non-contact three-dimensional shape measurement of an object having no features on the surface at high speed.

本発明に係る非接触三次元計測装置は、互いに距離をおいて配置され、被計測物を撮影する第1のカメラ及び第2のカメラと、
前記被計測物にラインレーザを照射するラインレーザと、
前記第1のカメラ及び前記第2のカメラについて、互いの距離を計測するための外部標定を行う標定部と、
前記ラインレーザが照射された被計測物を前記第1のカメラで撮影した第1の画像と、前記第2のカメラで撮影した第2の画像とを画像処理する画像処理部と、
を備え、
前記画像処理部は、
前記第1の画像上の前記ラインレーザが照射された第1線分データの中の一つの点を特徴点として選択し、
前記第1の画像上で選択した前記特徴点に対応するエピポーラ線を前記第2の画像上に表示して、
前記第2の画像上において、前記ラインレーザが照射された第2線分データと前記エピポーラ線との交点を、前記第1の画像上で選択した前記特徴点と対応する対応点として決定し、
前記第1の画像における前記特徴点と、前記第2の画像における前記対応点とを用いて、前記特徴点及び前記対応点に該当する前記被計測物上の該当点の三次元座標を算出する。
A non-contact three-dimensional measurement apparatus according to the present invention is arranged at a distance from each other, and a first camera and a second camera that shoot a measurement object,
A line laser for irradiating the object to be measured with a line laser;
For the first camera and the second camera, an orientation unit that performs external orientation for measuring a mutual distance;
An image processing unit that performs image processing on a first image obtained by photographing the object to be measured irradiated with the line laser with the first camera, and a second image photographed by the second camera;
With
The image processing unit
One point in the first line segment data irradiated with the line laser on the first image is selected as a feature point,
An epipolar line corresponding to the feature point selected on the first image is displayed on the second image;
On the second image, an intersection of the second line segment data irradiated with the line laser and the epipolar line is determined as a corresponding point corresponding to the feature point selected on the first image,
Using the feature points in the first image and the corresponding points in the second image, three-dimensional coordinates of the feature points and corresponding points on the measurement object corresponding to the corresponding points are calculated. .

また、前記ラインレーザは、前記被計測物の全体にわたってラインレーザを走査できるものであってもよい。   The line laser may be capable of scanning the line laser over the entire object to be measured.

さらに、前記ラインレーザは、照射方向の所定の軸について回転してラインレーザを前記被照射できるものであってもよい。   Further, the line laser may be capable of being irradiated with the line laser by rotating about a predetermined axis in the irradiation direction.

本発明に係る非接触三次元計測方法は、
(a)互いに距離をおいて配置され、被計測物を撮影する第1のカメラ及び第2のカメラについて、互いの距離を計測するための外部標定を行う外部標定ステップと、
(b)前記被計測物にラインレーザを照射するラインレーザ照射ステップと、
(c)前記ラインレーザが照射された被計測物を前記第1のカメラ及び前記第2のカメラでそれぞれ撮影して、前記第1のカメラによる第1の画像と、前記第2のカメラによる第2の画像とを得る画像撮影ステップと、
(d)前記第1の画像において、前記ラインレーザが照射された部分を第1線分データとして抽出する第1線分データ抽出ステップと、
(e)前記第2の画像において、前記ラインレーザが照射された部分を第2線分データとして抽出する第2線分データ抽出ステップと、
(f)前記第1の画像から抽出された前記第1線分データの中の一つの点を特徴点として選択する特徴点選択ステップと、
(g)前記第1のカメラのレンズ中心から前記特徴点を通って延びるエピポーラ線を前記第2の画像上に表示するエピポーラ線表示ステップと、
(h)前記第2の画像から抽出された前記第2線分データと前記エピポーラ線との交点を、前記第1の画像上で選択した前記特徴点と対応する対応点として決定する対応点決定ステップと、
(i)前記第1の画像における前記特徴点と、前記第2の画像における前記対応点とを用いて、前記特徴点及び前記対応点に該当する前記被計測物上の該当点の三次元座標を算出する三次元座標算出ステップと、
を含む。
Non-contact three-dimensional measurement method according to the present invention,
(A) an external orientation step for performing external orientation for measuring the mutual distance of the first camera and the second camera that are arranged at a distance from each other and photograph the object to be measured;
(B) a line laser irradiation step of irradiating the object to be measured with a line laser;
(C) The object to be measured irradiated with the line laser is photographed by the first camera and the second camera, respectively, and the first image by the first camera and the second image by the second camera are taken. An image capturing step for obtaining two images;
(D) a first line segment data extracting step of extracting a portion irradiated with the line laser as first line segment data in the first image;
(E) a second line segment data extracting step of extracting a portion irradiated with the line laser as second line segment data in the second image;
(F) a feature point selection step of selecting one point in the first line segment data extracted from the first image as a feature point;
(G) an epipolar line display step of displaying an epipolar line extending from the lens center of the first camera through the feature point on the second image;
(H) Corresponding point determination for determining an intersection between the second line segment data extracted from the second image and the epipolar line as a corresponding point corresponding to the feature point selected on the first image. Steps,
(I) Using the feature points in the first image and the corresponding points in the second image, three-dimensional coordinates of the corresponding points on the measurement object corresponding to the feature points and the corresponding points A three-dimensional coordinate calculation step for calculating
including.

さらに、(j)前記第1画像から抽出された前記第1線分上の点すべてに対して、前記ステップ(f)〜前記ステップ(i)を繰り返して、前記ラインレーザに照射されたライン部分に対して三次元座標を算出する三次元座標算出ステップを含んでもよい。   Further, (j) the line portion irradiated with the line laser by repeating the steps (f) to (i) for all points on the first line segment extracted from the first image. May include a three-dimensional coordinate calculating step for calculating three-dimensional coordinates.

また、前記ラインレーザ照射ステップ(b)において、前記ラインレーザを前記被計測物にわたって走査するラインレーザ走査ステップをさらに含み、前記ラインレーザを照射するごとに、前記ステップ(c)〜前記ステップ(j)を繰り返して、前記被計測物の全体を走査してもよい。   The line laser irradiation step (b) further includes a line laser scanning step of scanning the line laser over the object to be measured, and each time the line laser is irradiated, the steps (c) to (j) ) May be repeated to scan the entire object to be measured.

さらに、前記ラインレーザ照射ステップ(b)において、前記ラインレーザを照射方向の所定の軸について回転させて前記被計測物に照射するラインレーザ走査ステップをさらに含み、前記ラインレーザを回転させて前記被計測物に照射するごとに、前記ステップ(c)〜前記ステップ(j)を繰り返してもよい。   The line laser irradiation step (b) further includes a line laser scanning step of irradiating the object to be measured by rotating the line laser about a predetermined axis in an irradiation direction, and rotating the line laser to rotate the object to be measured. Each time the measurement object is irradiated, the step (c) to the step (j) may be repeated.

またさらに、前記対応点決定ステップ(i)において、前記エピポーラ線と前記第2線分データとの交点が2つ以上存在する場合、前記ラインレーザを前記第1の画像上の前記特徴点に該当する前記被計測物上の該当点への照射方向の軸について回転させて照射して、前記第2の画像上で前記エピポーラ線と前記第2線分データとの単一の交点を前記特徴点と対応する対応点として決定してもよい。   Still further, in the corresponding point determining step (i), when there are two or more intersections between the epipolar line and the second line segment data, the line laser corresponds to the feature point on the first image. Irradiating by rotating about the axis of the irradiation direction to the corresponding point on the object to be measured, and setting the single intersection point of the epipolar line and the second line segment data on the second image as the feature point It may be determined as a corresponding point.

本発明に係る非接触三次元計測装置及び非接触三次元計測方法によれば、被計測物にラインレーザを照射することで、被計測物が凹凸を有する形状であってもラインがぼけることがない。   According to the non-contact three-dimensional measurement apparatus and the non-contact three-dimensional measurement method according to the present invention, by irradiating the measurement object with a line laser, the line can be blurred even if the measurement object has an uneven shape. Absent.

また、この非接触三次元計測装置及び非接触三次元計測方法では、ラインレーザが照射された被計測物を2つのカメラで撮影した2枚の画像のうち一方の画像上でラインレーザが照射された部分である第1線分データの一つの点を特徴点として選択している。この場合に、もう一つの画像上でエピポーラ線を表示して、ラインレーザが照射された部分である第2線分データとの交点を上記特徴点と対応する対応点として特定することができる。これまで被計測物上に照射したパターンとの相関関係で対応点を特定していた場合に比べて曖昧さを含むことなく対応点を明確に決めることができ、三次元計測の精度を向上させることができる。   In the non-contact three-dimensional measurement apparatus and the non-contact three-dimensional measurement method, the line laser is irradiated on one of the two images obtained by photographing the measurement object irradiated with the line laser with two cameras. One point of the first line segment data that is the selected portion is selected as the feature point. In this case, an epipolar line is displayed on another image, and an intersection with the second line segment data that is a portion irradiated with the line laser can be specified as a corresponding point corresponding to the feature point. Compared to the case where the corresponding point has been specified by the correlation with the pattern irradiated on the measurement object, the corresponding point can be clearly determined without including ambiguity, and the accuracy of the three-dimensional measurement is improved. be able to.

本発明の実施の形態1に係る非接触三次元計測装置の構成を示すブロック図である。It is a block diagram which shows the structure of the non-contact three-dimensional measuring apparatus which concerns on Embodiment 1 of this invention. 被計測物と2つのカメラとの配置を示す概略図である。It is the schematic which shows arrangement | positioning of a to-be-measured object and two cameras. 第1のカメラによって撮影された第1の画像を示す概略図である。It is the schematic which shows the 1st image image | photographed with the 1st camera. 第2のカメラによって撮影された第2の画像を示す概略図である。It is the schematic which shows the 2nd image image | photographed with the 2nd camera. 図3の第1の画像について、第1線分データ中の一つの点を特徴点として選択する場合の概略図である。FIG. 4 is a schematic diagram when one point in the first line segment data is selected as a feature point for the first image in FIG. 3. 図4の第2の画像において、第1の画像上の特徴点に該当するエピポーラ線が表示された第2の画像を示す概略図である。FIG. 5 is a schematic diagram showing a second image in which epipolar lines corresponding to feature points on the first image are displayed in the second image of FIG. 4. 本発明の実施の形態1に係る非接触三次元計測方法のフローチャートである。It is a flowchart of the non-contact three-dimensional measuring method which concerns on Embodiment 1 of this invention. 本発明の実施の形態1に係る非接触三次元計測方法の特徴を説明するための概念図である。It is a conceptual diagram for demonstrating the characteristic of the non-contact three-dimensional measuring method which concerns on Embodiment 1 of this invention. 本発明の実施の形態1の変形例に係る非接触三次元計測方法のフローチャートである。It is a flowchart of the non-contact three-dimensional measuring method which concerns on the modification of Embodiment 1 of this invention. 本発明の実施の形態2に係る非接触三次元計測方法のフローチャートである。It is a flowchart of the non-contact three-dimensional measuring method which concerns on Embodiment 2 of this invention. 本発明の実施の形態3に係る非接触三次元計測方法のフローチャートである。It is a flowchart of the non-contact three-dimensional measuring method which concerns on Embodiment 3 of this invention.

本発明に係る非接触三次元計測装置及び計測方法について、添付図面を用いて以下に説明する。なお、図面において実質的に同一の部材については同一の符号を付している。   A non-contact three-dimensional measuring apparatus and measuring method according to the present invention will be described below with reference to the accompanying drawings. In the drawings, substantially the same members are denoted by the same reference numerals.

(実施の形態1)
図1は、実施の形態1に係る非接触三次元計測装置10の構成を示す概略図である。
この非接触三次元計測装置10は、距離を置いて設置された2台のカメラ2a、2bと、被計測物1にラインレーザを照射するラインレーザ4と、2台のカメラ2a、2bの位置関係を含む外部標定を行う標定部6と、ラインレーザが照射された被計測物1を第1のカメラ2aで撮影した第1の画像20と、第2のカメラ2bで撮影した第2の画像30とを画像処理する画像処理部8と、を含む。それぞれのカメラ2a、2bは、レンズ中心や焦点距離、歪補正係数などの内部標定(内部パラメータ)が予め算出されていることが望ましい。さらに、撮影された画像は、内部評定データを利用して歪補正された画像が望ましいが、必須ではない。また、ラインレーザ4は、被計測物1の表面全体にわたって走査できる。また、標定部6は、第1のカメラ2a及び第2のカメラ2bについて、互いの位置関係に関する外部標定を行う。画像処理部8は、第1の画像20上のラインレーザが照射された第1線分データ22の中の一つの点を特徴点24として選択し、その特徴点24に該当するエピポーラ線33を第2の画像30上に表示して、第2の画像30上において、ラインレーザが照射された第2線分データ32とエピポーラ線33との交点を、第1の画像20上で選択した特徴点24と対応する対応点34として決定し、第1の画像20における特徴点24と、第2の画像30における対応点34とを用いて、特徴点及び対応点に該当する被計測物1上の該当点14の三次元座標を算出する。
(Embodiment 1)
FIG. 1 is a schematic diagram illustrating a configuration of a non-contact three-dimensional measurement apparatus 10 according to the first embodiment.
This non-contact three-dimensional measuring apparatus 10 includes two cameras 2a and 2b installed at a distance, a line laser 4 for irradiating the object to be measured 1 with a line laser, and the positions of the two cameras 2a and 2b. The orientation unit 6 that performs external orientation including the relationship, the first image 20 obtained by photographing the measurement object 1 irradiated with the line laser by the first camera 2a, and the second image obtained by the second camera 2b. 30 and an image processing unit 8 for image processing. For each camera 2a, 2b, it is desirable that internal orientations (internal parameters) such as the lens center, focal length, and distortion correction coefficient are calculated in advance. Furthermore, the photographed image is preferably an image whose distortion has been corrected using the internal rating data, but it is not essential. Further, the line laser 4 can scan the entire surface of the measurement object 1. Further, the orientation unit 6 performs external orientation relating to the positional relationship between the first camera 2a and the second camera 2b. The image processing unit 8 selects one point in the first line segment data 22 irradiated with the line laser on the first image 20 as the feature point 24, and selects an epipolar line 33 corresponding to the feature point 24. A feature that is displayed on the second image 30, and on the second image 30, the intersection of the second line segment data 32 irradiated with the line laser and the epipolar line 33 is selected on the first image 20. A corresponding point 34 corresponding to the point 24 is determined, and the feature point 24 in the first image 20 and the corresponding point 34 in the second image 30 are used on the measurement object 1 corresponding to the feature point and the corresponding point. The three-dimensional coordinates of the corresponding point 14 are calculated.

図8は、実施の形態1に係る非接触三次元計測装置10の特徴を説明する概念図である。なお、図8は、図2の非接触三次元計測装置10の構成のうち、写真測量に関係する位置関係を詳細に示したものである。
<2つのカメラ及び画像について>
2つのカメラ(第1のカメラ2a、第2のカメラ2b)のそれぞれのレンズ中心を点A及び点Bとして表している。
第1のカメラ2aによる第1の画像20において、被計測物1に照射されたラインレーザの部分である第1線分データ22と、選択された一つの特徴点24を示している。第1のカメラ2aのレンズ中心、焦点距離、歪補正係数等は内部標定によって得られる。
また、第2のカメラによる第2の画像30において、被計測物1に照射されたラインレーザの部分である第2線分データ32と、第1線分データから選択された特徴点24に対応するエピポーラ線33と、両者の交点である対応点34と、を示している。第2のカメラ2bのレンズ中心、焦点距離、歪補正係数等は内部標定によって得られる。
<被計測物について>
また、被計測物1に照射されたラインレーザの部分12と、特徴点24及び対応点34とに該当する被計測物1上の該当点14を示している。この該当点14は点Cとしても示している。
FIG. 8 is a conceptual diagram illustrating features of the non-contact three-dimensional measurement apparatus 10 according to the first embodiment. FIG. 8 shows in detail the positional relationship related to photogrammetry in the configuration of the non-contact three-dimensional measuring apparatus 10 of FIG.
<About two cameras and images>
The lens centers of the two cameras (first camera 2a and second camera 2b) are represented as point A and point B, respectively.
In the first image 20 by the first camera 2a, the first line segment data 22 which is the part of the line laser irradiated to the object 1 to be measured and one selected feature point 24 are shown. The lens center, focal length, distortion correction coefficient, and the like of the first camera 2a are obtained by internal orientation.
Further, in the second image 30 by the second camera, it corresponds to the second line segment data 32 which is the part of the line laser irradiated to the object to be measured 1 and the feature point 24 selected from the first line segment data. The epipolar line 33 and the corresponding point 34 that is the intersection of the two are shown. The lens center, focal length, distortion correction coefficient, and the like of the second camera 2b are obtained by internal orientation.
<About the object to be measured>
In addition, a corresponding point 14 on the measured object 1 corresponding to the portion 12 of the line laser irradiated on the measured object 1, the feature point 24, and the corresponding point 34 is shown. This corresponding point 14 is also shown as point C.

<写真測量について>
a)第1のカメラ2aのレンズ中心Aと、第2のカメラ2bのレンズ中心Bとの間の位置関係及び、各カメラの方向は外部標定によって求められる。
b)また、第1のカメラ2a及び第2のカメラ2bのレンズ中心、焦点距離、歪補正係数等は内部標定を利用することによって求められる。
c)次に、被計測物1上の該当点14の点Cは、第1のカメラ2aのレンズ中心Aから第1の画像20上の特徴点24に向かって延長したライン上に存在すると共に、第2のカメラ2bのレンズ中心Bから第2の画像30上の対応点34に向かって延長したライン上に存在する。そのため、写真測量の原理によって、これらの交点として点Cが得られる。
以上によって、被計測物1上の該当点14(C)を三次元計測することができる。
<About photogrammetry>
a) The positional relationship between the lens center A of the first camera 2a and the lens center B of the second camera 2b and the direction of each camera are obtained by external orientation.
b) In addition, the lens centers, focal lengths, distortion correction coefficients, and the like of the first camera 2a and the second camera 2b are obtained by using internal orientation.
c) Next, the point C of the corresponding point 14 on the object to be measured 1 exists on a line extending from the lens center A of the first camera 2 a toward the feature point 24 on the first image 20. , On a line extending from the lens center B of the second camera 2 b toward the corresponding point 34 on the second image 30. Therefore, the point C is obtained as an intersection of these by the principle of photogrammetry.
As described above, the corresponding point 14 (C) on the object to be measured 1 can be three-dimensionally measured.

本発明の実施の形態1に係る非接触三次元計測装置10によれば、被計測物1にラインレーザを照射することで、被計測物1が凹凸を有する形状であってもラインがぼけることがない。このため、対応点の抽出精度が高くなり、必然的に三次元計測点の精度も高まる。   According to the non-contact three-dimensional measurement apparatus 10 according to the first embodiment of the present invention, the line is blurred even if the measurement object 1 has an uneven shape by irradiating the measurement object 1 with a line laser. There is no. For this reason, the extraction accuracy of the corresponding points is increased, and the accuracy of the three-dimensional measurement points is inevitably increased.

また、この非接触三次元計測装置10では、ラインレーザが照射された被計測物を2つのカメラ2a、2bで撮影した2枚の画像のうち一方の画像20上でラインレーザが照射された部分である第1線分データ22の一つの点を特徴点24として選択している。この場合に、もう一つの画像30上でエピポーラ線33を表示して、ラインレーザが照射された部分である第2線分データ32との交点を上記特徴点24と対応する対応点34として特定することができる。これまで被計測物1上に照射したパターンとの相関関係で対応点を特定していた場合に比べて曖昧さを含むことなく対応点を明確に決めることができ、三次元計測の精度を向上させることができる。   Moreover, in this non-contact three-dimensional measuring apparatus 10, the part to which the line laser was irradiated on one image 20 among the two images which image | photographed the to-be-measured object irradiated with the line laser with two cameras 2a and 2b. One point of the first line segment data 22 is selected as the feature point 24. In this case, the epipolar line 33 is displayed on the other image 30 and the intersection point with the second line segment data 32 which is the portion irradiated with the line laser is specified as the corresponding point 34 corresponding to the feature point 24. can do. Compared to the case where the corresponding point is specified by the correlation with the pattern irradiated on the measurement object 1 so far, the corresponding point can be clearly determined without including ambiguity, and the accuracy of the three-dimensional measurement is improved. Can be made.

図7は、本発明の非接触三次元計測方法のフローチャートである。この非接触三次元計測方法は、以下のようにして実行される。
(a)被計測物1が写る範囲に、被計測物1を撮影する2台のカメラ(第1のカメラ2a及び第2のカメラ2b)を、互いに距離をおいて配置する(図1)。それぞれのカメラ2a、2bは、レンズ中心、焦点距離、歪補正係数などの内部標定(内部パラメータ)が予め算出されていることが望ましい。なお、カメラの内部標定が行われていない場合には例えば、非特許文献1に挙げられる算出方法によって求めることができる。
(b)第1のカメラ2a及び第2のカメラ2bについて、互いの位置関係に関する外部標定を行う(S01)。
この外部標定によって、複数のカメラの位置関係を知ることができる。例えば、非特許文献1に挙げられる方法として、被計測物1の周りのあらかじめ知られた対応点を8点以上抽出することによって外部標定を実施することができる。
FIG. 7 is a flowchart of the non-contact three-dimensional measurement method of the present invention. This non-contact three-dimensional measurement method is executed as follows.
(A) Two cameras (a first camera 2a and a second camera 2b) for photographing the measurement object 1 are arranged at a distance from each other in a range where the measurement object 1 is captured (FIG. 1). For each camera 2a, 2b, it is desirable that internal orientations (internal parameters) such as the lens center, focal length, and distortion correction coefficient are calculated in advance. In addition, when the internal orientation of a camera is not performed, it can obtain | require by the calculation method given in the nonpatent literature 1, for example.
(B) About the 1st camera 2a and the 2nd camera 2b, external orientation regarding a mutual positional relationship is performed (S01).
With this external orientation, the positional relationship between a plurality of cameras can be known. For example, as a method described in Non-Patent Document 1, external orientation can be performed by extracting eight or more previously known corresponding points around the measurement object 1.

(c)被計測物1にラインレーザ4からラインレーザを照射する(S02)(図2)。ラインレーザを用いることによって、非計測物1が凹凸の大きい形状であっても照射されるラインがぼけることがない。
(d)ラインレーザが照射された被計測物1を第1のカメラ2a及び第2のカメラ2bでそれぞれ撮影して、第1のカメラ2aによる第1の画像(図3)と、第2のカメラ2bによる第2の画像(図4)とを得る(S03)。
(e)第1の画像20において、ラインレーザが照射された部分を第1線分データ22として抽出する(S04)(図3)。
(f)第2の画像30において、前記ラインレーザが照射された部分を第2線分データ32として抽出する(S05)(図4)。
(C) The line laser 4 is irradiated to the object 1 to be measured 1 (S02) (FIG. 2). By using the line laser, the irradiated line does not blur even if the non-measurement object 1 has a shape with large unevenness.
(D) The measurement object 1 irradiated with the line laser is photographed by the first camera 2a and the second camera 2b, respectively, and the first image (FIG. 3) by the first camera 2a and the second A second image (FIG. 4) is obtained by the camera 2b (S03).
(E) In the first image 20, a portion irradiated with the line laser is extracted as first line segment data 22 (S04) (FIG. 3).
(F) In the second image 30, the portion irradiated with the line laser is extracted as second line segment data 32 (S05) (FIG. 4).

(g)第1の画像20から抽出された第1線分データ22の中の一つの点を特徴点24として選択する(S06)(図5)。なお、特徴点24を、第1線分データ22の全体にわたって順に選択して、特徴点24を選択するごとに、後の(h)から(j)を繰り返すことによって、第1線分22の全体について三次元計測を行うことができる。
(h)特徴点24に対応するエピポーラ線33を第2の画像上に表示する(S07)(図6)。なお、エピポーラ線とは、第1のカメラ2aのレンズ中心と、第1の画像20上の特徴点24に該当する被計測物1上の点とを結ぶ仮想的な線が第2のカメラに投影された線分である。第2の画像30上でエピポーラ線33がどのように表示されるかは、第1のカメラ2a及び第2のカメラ2bの内部標定と、第1のカメラ2a及び第2のカメラ2bの外部標定とによって決定できる。第2の画像30上で表示されるエピポーラ線33上のどこかに特徴点24と対応する対応点が存在する。
(i)第2の画像30から抽出された第2線分データ32とエピポーラ線33との交点を第1の画像20上で選択した特徴点24と対応する対応点34として決定する(S08)(図6)。
(j)第1の画像20における特徴点24と、第2の画像30における対応点34とを用いて、特徴点及び対応点に該当する被計測物1上の該当点14の三次元座標を算出する(S09)。
(k)第1画像から抽出された第1線分上の点すべてに対して、上記ステップ(g)〜ステップ(j)を繰り返して、被計測物のラインレーザが照射されたライン部分に対して三次元座標を算出する(S10)。
以上の各ステップによって、特徴点及び対応点に該当する被計測物1の該当点14の三次元座標を得ることができる。
(G) One point in the first line segment data 22 extracted from the first image 20 is selected as the feature point 24 (S06) (FIG. 5). The feature points 24 are sequentially selected over the entire first line segment data 22, and each time the feature point 24 is selected, the following (h) to (j) are repeated, whereby the first line segment 22 Three-dimensional measurement can be performed for the whole.
(H) The epipolar line 33 corresponding to the feature point 24 is displayed on the second image (S07) (FIG. 6). The epipolar line is a virtual line connecting the lens center of the first camera 2a and a point on the measurement object 1 corresponding to the feature point 24 on the first image 20 to the second camera. This is the projected line segment. How the epipolar line 33 is displayed on the second image 30 depends on the internal orientation of the first camera 2a and the second camera 2b and the external orientation of the first camera 2a and the second camera 2b. And can be determined. There is a corresponding point corresponding to the feature point 24 somewhere on the epipolar line 33 displayed on the second image 30.
(I) The intersection of the second line segment data 32 extracted from the second image 30 and the epipolar line 33 is determined as a corresponding point 34 corresponding to the feature point 24 selected on the first image 20 (S08). (FIG. 6).
(J) Using the feature point 24 in the first image 20 and the corresponding point 34 in the second image 30, the three-dimensional coordinates of the corresponding point 14 on the measurement object 1 corresponding to the feature point and the corresponding point are obtained. Calculate (S09).
(K) Steps (g) to (j) are repeated for all points on the first line segment extracted from the first image, and the line portion irradiated with the line laser of the object to be measured is applied. The three-dimensional coordinates are calculated (S10).
Through the above steps, the three-dimensional coordinates of the corresponding point 14 of the measurement object 1 corresponding to the feature point and the corresponding point can be obtained.

本発明の実施の形態1に係る非接触三次元計測方法によれば、被計測物1にラインレーザを照射することで、被計測物1が凹凸を有する形状であってもラインはぼけることがない。このため、対応点の抽出精度が高くなり、必然的に三次元計測点の精度も高まる。   According to the non-contact three-dimensional measurement method according to Embodiment 1 of the present invention, by irradiating the measurement object 1 with a line laser, the line can be blurred even if the measurement object 1 has an uneven shape. Absent. For this reason, the extraction accuracy of the corresponding points is increased, and the accuracy of the three-dimensional measurement points is inevitably increased.

また、この被接触三次元計測方法では、ラインレーザが照射された被計測物を2つのカメラ2a、2bで撮影した2枚の画像のうち一方の画像20上でラインレーザが照射された部分である第1線分データ22の一つの点を特徴点24として選択している。この場合に、もう一つの画像30上でエピポーラ線33を表示して、ラインレーザが照射された部分である第2線分データ32との交点を上記特徴点24と対応する対応点34として特定することができる。このように、これまで被計測物1上に照射したパターンとの相関関係で対応点を特定していた場合に比べて曖昧さを含むことなく対応点を明確に決めることができ、三次元計測の精度を向上させることができる。   Further, in this contacted three-dimensional measurement method, in the portion irradiated with the line laser on one image 20 of the two images obtained by photographing the object irradiated with the line laser with the two cameras 2a and 2b. One point of certain first line segment data 22 is selected as the feature point 24. In this case, the epipolar line 33 is displayed on the other image 30 and the intersection point with the second line segment data 32 which is the portion irradiated with the line laser is specified as the corresponding point 34 corresponding to the feature point 24. can do. As described above, the corresponding points can be clearly determined without ambiguity as compared with the case where the corresponding points have been specified by the correlation with the pattern irradiated on the measurement object 1 so far, and the three-dimensional measurement is possible. Accuracy can be improved.

(変形例)
図9は、実施の形態1の変形例に係る非接触三次元計測方法のフローチャートである。この変形例の非接触三次元計測方法では、図8の実施の形態1に係る非接触三次元計測方法と対比すると、ラインレーザを被計測物の全体にわたって走査する点で相違する。
(a)及び(b)は、実施の形態1に係る非接触三次元計測方法と同じであるので説明を省略する。
(c)被計測物1にわたってラインレーザを走査する(S11)。ここでは、ラインレーザ4をラインとは角度をなす方向に沿って走査することで、被計測物1の全体にわたって順に走査していくことを表している。
(d)から(k)は、実施の形態1に係る非接触三次元計測方法と同じであるので説明を省略する。
(l)被計測物1の全体について走査したか確認する(S12)。被計測物1の全体について走査していない場合には、(c)から(k)を繰り返して、被計測物1の全体について三次元計測を行う。
以上の各ステップによって、被計測物1の全体にわたって三次元計測を行うことができる。
(Modification)
FIG. 9 is a flowchart of a non-contact three-dimensional measurement method according to a modification of the first embodiment. The non-contact three-dimensional measurement method of this modification is different from the non-contact three-dimensional measurement method according to Embodiment 1 in FIG. 8 in that the line laser is scanned over the entire object to be measured.
Since (a) and (b) are the same as the non-contact three-dimensional measurement method according to Embodiment 1, the description thereof is omitted.
(C) A line laser is scanned over the DUT 1 (S11). Here, the scanning of the line laser 4 along the direction that forms an angle with the line indicates that the entire object to be measured 1 is sequentially scanned.
Since (d) to (k) are the same as the non-contact three-dimensional measurement method according to Embodiment 1, the description thereof is omitted.
(L) It is confirmed whether the entire measurement object 1 has been scanned (S12). When the entire object to be measured 1 is not scanned, (c) to (k) are repeated to perform three-dimensional measurement on the entire object to be measured 1.
Through the above steps, three-dimensional measurement can be performed over the entire object to be measured 1.

(実施の形態2)
図10は、実施の形態2に係る非接触三次元計測方法のフローチャートである。この変形例の非接触三次元計測方法では、図8の実施の形態1に係る非接触三次元計測方法と対比すると、ラインレーザ4を照射方向の所定の軸について回転させて被計測物1に照射する点で相違する。
(a)及び(b)は、実施の形態1に係る非接触三次元計測方法と同じであるので説明を省略する。
(c)ラインレーザを照射方向の所定の軸について回転させて被計測物1に照射する(S13)。実施の形態1の変形例では、ラインレーザをラインと角度をなす方向に走査して被計測物1の全体にわたって走査していたが、ラインレーザ4を回転させることによっても被計測物1の全体について照射することができる。
(d)から(k)は、実施の形態1に係る非接触三次元計測方法と同じであるので説明を省略する。
(l)ラインレーザを全角度に回転させて照射したか確認する(S14)。被計測物1の全体について走査していない場合には、(c)から(k)を繰り返して、被計測物1の全体について三次元計測を行う。
以上の各ステップによって、被計測物1の全体にわたって三次元計測を行うことができる。
(Embodiment 2)
FIG. 10 is a flowchart of the non-contact three-dimensional measurement method according to the second embodiment. In the non-contact three-dimensional measurement method of this modification, as compared with the non-contact three-dimensional measurement method according to Embodiment 1 in FIG. 8, the line laser 4 is rotated about a predetermined axis in the irradiation direction to the object 1 to be measured. It differs in the point which irradiates.
Since (a) and (b) are the same as the non-contact three-dimensional measurement method according to Embodiment 1, the description thereof is omitted.
(C) The measurement object 1 is irradiated with the line laser rotated about a predetermined axis in the irradiation direction (S13). In the modification of the first embodiment, the line laser is scanned in the direction that forms an angle with the line, and the entire object to be measured 1 is scanned. However, the entire object to be measured 1 can also be obtained by rotating the line laser 4. Can be irradiated.
Since (d) to (k) are the same as the non-contact three-dimensional measurement method according to Embodiment 1, the description thereof is omitted.
(L) It is confirmed whether the line laser is rotated at all angles for irradiation (S14). When the entire object to be measured 1 is not scanned, (c) to (k) are repeated to perform three-dimensional measurement on the entire object to be measured 1.
Through the above steps, three-dimensional measurement can be performed over the entire object to be measured 1.

(実施の形態3)
図11は、実施の形態3に係る非接触三次元計測方法のフローチャートである。この変形例の非接触三次元計測方法では、図8の実施の形態1に係る非接触三次元計測方法と対比すると、(i)で第2線分データ32とエピポーラ線33との交点が単一ではなく2つ以上の交点が存在する場合に、ラインレーザを特徴点24に該当する被計測物1上の該当点14への軸について回転させて照射する点で相違する。
(a)から(h)は、実施の形態1に係る非接触三次元計測方法と同じであるので説明を省略する。
(i)の前に、第2の画像30上において、エピポーラ線33と第2線分32との交点は単一か、確認する(S15)。交点が一つの場合には、実施の形態1に係る非接触三次元計測方法の(i)から(k)を行って、特徴点及び対応点に該当する被計測物1の該当点14の三次元座標を得ることができる。
(Embodiment 3)
FIG. 11 is a flowchart of the non-contact three-dimensional measurement method according to the third embodiment. In the non-contact three-dimensional measurement method of this modification, when compared with the non-contact three-dimensional measurement method according to Embodiment 1 in FIG. 8, the intersection of the second line segment data 32 and the epipolar line 33 is a single point in (i). When there are two or more intersections instead of one, the line laser is different in that the line laser is rotated about the axis to the corresponding point 14 on the measurement object 1 corresponding to the feature point 24 and irradiated.
Since (a) to (h) are the same as the non-contact three-dimensional measurement method according to the first embodiment, description thereof is omitted.
Before (i), it is confirmed on the second image 30 whether the intersection of the epipolar line 33 and the second line segment 32 is single (S15). When there is only one intersection, the steps (i) to (k) of the non-contact three-dimensional measurement method according to Embodiment 1 are performed, and the tertiary of the corresponding point 14 of the measurement object 1 corresponding to the feature point and the corresponding point The original coordinates can be obtained.

一方、交点が複数の場合、例えば、ラインレーザが照射された部分である第2線分データ32とエピポーラ線33とが同一方向に沿って延在するような場合に交点が複数存在する場合が生じる。この場合には、ラインレーザ4を特徴点24に該当する被計測物1上の該当点14への軸について回転させて照射する(S16)。この場合に、エピポーラ線33とラインレーザのライン方向とが角度をなすようにラインレーザ4を回転させることが好ましい。より好ましくは、エピポーラ線33とラインレーザのライン方向とが互いに直交するようにラインレーザ4を回転させることである。また、特徴点24を保持するように、特徴点24に該当する被計測物1の該当点14について回転させる。その後、(d)から(h)を繰り返して、エピポーラ線33と第2線分32との交点が単一となるようにすることができる。   On the other hand, when there are a plurality of intersection points, for example, there may be a plurality of intersection points when the second line segment data 32 and the epipolar line 33 that are irradiated with the line laser extend along the same direction. Arise. In this case, the line laser 4 is irradiated while being rotated about the axis to the corresponding point 14 on the measurement object 1 corresponding to the feature point 24 (S16). In this case, it is preferable to rotate the line laser 4 so that the epipolar line 33 and the line direction of the line laser form an angle. More preferably, the line laser 4 is rotated so that the epipolar line 33 and the line direction of the line laser are orthogonal to each other. Further, the corresponding point 14 of the measurement object 1 corresponding to the feature point 24 is rotated so as to hold the feature point 24. Thereafter, (d) to (h) are repeated so that the intersection of the epipolar line 33 and the second line segment 32 can be single.

これによって、エピポーラ線33と第2線分データ32とが平行になる等の原因で対応点34が一つに特定できない場合でも、ラインレーザ4を回転させて、エピポーラ線33と第2線分データ32とが交差する交点として単一の対応点34が得られ、明確に対応点を特定でき、三次元計測の精度を向上させることができる。   As a result, even if the corresponding point 34 cannot be specified as a single point because the epipolar line 33 and the second line segment data 32 are in parallel, the line laser 4 is rotated and the epipolar line 33 and the second line segment 32 are rotated. A single corresponding point 34 is obtained as an intersection where the data 32 intersects, the corresponding point can be clearly identified, and the accuracy of the three-dimensional measurement can be improved.

なお、エピポーラ線33と第2線分データ32との交点が一つも得られない場合には、第1の画像20上で選択した特徴点24に対応する被計測物1上の該当点14が第2の画像30上には現れていないことを意味している。この場合には、第1のカメラ2aからの第1の画像20で表示される被計測物1の範囲と、第2のカメラ2bからの第2の画像30で表示される被計測物1の範囲とで共通して表示される範囲が少ないか又は存在しないと考えられる。そこで、第1のカメラ2aと第2のカメラ2bとの距離を縮めて第1の画像20と第2の画像30で共通する被計測物1の範囲が得られるようにすることが好ましい。   If no intersection between the epipolar line 33 and the second line segment data 32 is obtained, the corresponding point 14 on the measurement object 1 corresponding to the feature point 24 selected on the first image 20 is obtained. This means that it does not appear on the second image 30. In this case, the range of the measurement object 1 displayed by the first image 20 from the first camera 2a and the measurement object 1 displayed by the second image 30 from the second camera 2b. It is considered that the range displayed in common with the range is small or does not exist. Therefore, it is preferable to reduce the distance between the first camera 2a and the second camera 2b so that a common range of the measured object 1 is obtained in the first image 20 and the second image 30.

本発明に係る非接触三次元計測装置及び非接触三次元計測方法によれば、表面に特徴がない物体を被計測物とする場合であっても、2つの画像上で、一方の画像で選択した特徴点について、もう一方の画像上における対応点を明確に特定できる。そこで、本発明に係る非接触三次元計測装置及び非接触三次元計測方法は、表面に特徴がない物体を被計測物とする非接触三次元計測に有用である。   According to the non-contact three-dimensional measurement apparatus and the non-contact three-dimensional measurement method according to the present invention, even when an object having no feature on the surface is set as the measurement object, one of the two images is selected. The corresponding point on the other image can be clearly identified for the feature point. Therefore, the non-contact three-dimensional measurement apparatus and the non-contact three-dimensional measurement method according to the present invention are useful for non-contact three-dimensional measurement using an object having no feature on the surface as an object to be measured.

1 被計測物
2a 第1のカメラ
2b 第2のカメラ
4 ラインレーザ
6 標定部
8 画像処理部
10 非接触三次元計測装置
12 照射されたラインレーザ
14 該当点
20 第1の画像
22 第1線分データ
24 特徴点
30 第2の画像
32 第2線分データ
33 エピポーラ線
34 対応点
DESCRIPTION OF SYMBOLS 1 To-be-measured object 2a 1st camera 2b 2nd camera 4 Line laser 6 Orientation part 8 Image processing part 10 Non-contact three-dimensional measuring device 12 Irradiated line laser 14 Corresponding point 20 1st image 22 1st line segment Data 24 Feature point 30 Second image 32 Second line segment data 33 Epipolar line 34 Corresponding point

Claims (8)

互いに距離をおいて配置され、被計測物を撮影する第1のカメラ及び第2のカメラと、
前記被計測物にラインレーザを照射するラインレーザと、
前記第1のカメラ及び前記第2のカメラについて、互いの位置関係に関する外部標定を行う標定部と、
前記ラインレーザが照射された被計測物を前記第1のカメラで撮影した第1の画像と、前記第2のカメラで撮影した第2の画像とを画像処理する画像処理部と、
を備え、
前記画像処理部は、
前記第1の画像上の前記ラインレーザが照射された第1線分データの中の一つの点を特徴点として選択し、
前記第1の画像上で選択した前記特徴点に対応するエピポーラ線を前記第2の画像上に表示して、
前記第2の画像上において、前記ラインレーザが照射された第2線分データと前記エピポーラ線との交点を、前記第1の画像上で選択した前記特徴点と対応する対応点として決定し、
前記第1の画像における前記特徴点と、前記第2の画像における前記対応点とを用いて、前記特徴点及び前記対応点に該当する前記被計測物上の該当点の三次元座標を算出する、
非接触三次元計測装置。
A first camera and a second camera which are arranged at a distance from each other and shoot a measurement object;
A line laser for irradiating the object to be measured with a line laser;
An orientation unit that performs external orientation on the positional relationship between the first camera and the second camera;
An image processing unit that performs image processing on a first image obtained by photographing the object to be measured irradiated with the line laser with the first camera, and a second image photographed by the second camera;
With
The image processing unit
One point in the first line segment data irradiated with the line laser on the first image is selected as a feature point,
An epipolar line corresponding to the feature point selected on the first image is displayed on the second image;
On the second image, an intersection of the second line segment data irradiated with the line laser and the epipolar line is determined as a corresponding point corresponding to the feature point selected on the first image,
Using the feature points in the first image and the corresponding points in the second image, three-dimensional coordinates of the feature points and corresponding points on the measurement object corresponding to the corresponding points are calculated. ,
Non-contact 3D measuring device.
前記ラインレーザは、前記被計測物の全体にわたってラインレーザを走査できる、請求項1に記載の非接触三次元計測装置。   The non-contact three-dimensional measurement apparatus according to claim 1, wherein the line laser can scan the line laser over the entire object to be measured. 前記ラインレーザは、照射方向の所定の軸について回転してラインレーザを前記被照射できる、請求項1に記載の非接触三次元計測装置。   The non-contact three-dimensional measurement apparatus according to claim 1, wherein the line laser can rotate about a predetermined axis in an irradiation direction to be irradiated with the line laser. (a)互いに距離をおいて配置され、被計測物を撮影する第1のカメラ及び第2のカメラについて、互いの位置関係に関する外部標定を行う外部標定ステップと、
(b)前記被計測物にラインレーザを照射するラインレーザ照射ステップと、
(c)前記ラインレーザが照射された被計測物を前記第1のカメラ及び前記第2のカメラでそれぞれ撮影して、前記第1のカメラによる第1の画像と、前記第2のカメラによる第2の画像とを得る画像撮影ステップと、
(d)前記第1の画像において、前記ラインレーザが照射された部分を第1線分データとして抽出する第1線分データ抽出ステップと、
(e)前記第2の画像において、前記ラインレーザが照射された部分を第2線分データとして抽出する第2線分データ抽出ステップと、
(f)前記第1の画像から抽出された前記第1線分データの中の一つの点を特徴点として選択する特徴点選択ステップと、
(g)前記第1の第1の画像上で選択した前記特徴点に対応するエピポーラ線を前記第2の画像上に表示するエピポーラ線表示ステップと、
(h)前記第2の画像から抽出された前記第2線分データと前記エピポーラ線との交点を、前記第1の画像上で選択した前記特徴点と対応する対応点として決定する対応点決定ステップと、
(i)前記第1の画像における前記特徴点と、前記第2の画像における前記対応点とを用いて、前記特徴点及び前記対応点に該当する前記被計測物上の該当点の三次元座標を算出する三次元座標算出ステップと、
を含む、非接触三次元計測方法。
(A) an external orientation step for performing external orientation on the positional relationship between the first camera and the second camera, which are arranged at a distance from each other and shoot the object to be measured;
(B) a line laser irradiation step of irradiating the object to be measured with a line laser;
(C) The object to be measured irradiated with the line laser is photographed by the first camera and the second camera, respectively, and the first image by the first camera and the second image by the second camera are taken. An image capturing step for obtaining two images;
(D) a first line segment data extracting step of extracting a portion irradiated with the line laser as first line segment data in the first image;
(E) a second line segment data extracting step of extracting a portion irradiated with the line laser as second line segment data in the second image;
(F) a feature point selection step of selecting one point in the first line segment data extracted from the first image as a feature point;
(G) an epipolar line display step of displaying an epipolar line corresponding to the feature point selected on the first first image on the second image;
(H) Corresponding point determination for determining an intersection between the second line segment data extracted from the second image and the epipolar line as a corresponding point corresponding to the feature point selected on the first image. Steps,
(I) Using the feature points in the first image and the corresponding points in the second image, three-dimensional coordinates of the corresponding points on the measurement object corresponding to the feature points and the corresponding points A three-dimensional coordinate calculation step for calculating
A non-contact three-dimensional measurement method.
さらに、
(j)前記第1画像から抽出された前記第1線分上の点すべてに対して、前記ステップ(f)〜前記ステップ(i)を繰り返して、前記被計測物の前記ラインレーザが照射されたライン部分に対して三次元座標を算出する三次元座標算出ステップ
を含む、請求項4に記載の非接触三次元計測方法。
further,
(J) Steps (f) to (i) are repeated for all points on the first line segment extracted from the first image, and the line laser of the object to be measured is irradiated. The non-contact three-dimensional measurement method according to claim 4, further comprising a three-dimensional coordinate calculation step of calculating three-dimensional coordinates for the line portion.
前記ラインレーザ照射ステップ(b)において、前記ラインレーザを前記被計測物にわたって走査するラインレーザ走査ステップをさらに含み、前記ラインレーザを照射するごとに、前記ステップ(c)〜前記ステップ(j)を繰り返して、前記被計測物の全体を走査する、請求項5に記載の非接触三次元計測方法。   The line laser irradiation step (b) further includes a line laser scanning step of scanning the line laser across the object to be measured, and each time the line laser is irradiated, the steps (c) to (j) are performed. The non-contact three-dimensional measurement method according to claim 5, wherein the whole object to be measured is repeatedly scanned. 前記ラインレーザ照射ステップ(b)において、前記ラインレーザを照射方向の所定の軸について回転させて前記被計測物に照射するラインレーザ走査ステップをさらに含み、前記ラインレーザを回転させて前記被計測物に照射するごとに、前記ステップ(c)〜前記ステップ(j)を繰り返す、請求項5に記載の非接触三次元計測方法。   The line laser irradiation step (b) further includes a line laser scanning step in which the line laser is rotated about a predetermined axis in an irradiation direction to irradiate the object to be measured, and the line laser is rotated to rotate the object to be measured. The non-contact three-dimensional measurement method according to claim 5, wherein the step (c) to the step (j) are repeated each time the light is irradiated. 前記対応点決定ステップ(h)において、前記エピポーラ線と前記第2線分データとの交点が2つ以上存在する場合、前記ラインレーザを前記第1の画像上の前記特徴点に該当する前記被計測物上の該当点への照射方向の軸について回転させて照射して、前記第2の画像上で前記エピポーラ線と前記第2線分データとの単一の交点を前記特徴点と対応する対応点として決定する、請求項4に記載の非接触三次元計測方法。   In the corresponding point determination step (h), when there are two or more intersections between the epipolar line and the second line segment data, the line laser is moved to the feature point corresponding to the feature point on the first image. Rotate and irradiate a corresponding point on the measurement object with respect to the irradiation direction axis, and a single intersection between the epipolar line and the second line segment data corresponds to the feature point on the second image. The non-contact three-dimensional measurement method according to claim 4, wherein the non-contact three-dimensional measurement method is determined as a corresponding point.
JP2010021318A 2010-02-02 2010-02-02 Non-contact three-dimensional measuring apparatus and non-contact three-dimensional measuring method Active JP5457865B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010021318A JP5457865B2 (en) 2010-02-02 2010-02-02 Non-contact three-dimensional measuring apparatus and non-contact three-dimensional measuring method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010021318A JP5457865B2 (en) 2010-02-02 2010-02-02 Non-contact three-dimensional measuring apparatus and non-contact three-dimensional measuring method

Publications (2)

Publication Number Publication Date
JP2011158386A true JP2011158386A (en) 2011-08-18
JP5457865B2 JP5457865B2 (en) 2014-04-02

Family

ID=44590453

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010021318A Active JP5457865B2 (en) 2010-02-02 2010-02-02 Non-contact three-dimensional measuring apparatus and non-contact three-dimensional measuring method

Country Status (1)

Country Link
JP (1) JP5457865B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104215198A (en) * 2014-08-25 2014-12-17 南京天睿朗自动化科技有限公司 Scanner for scanning three-dimensional profile of internal surface of tubular object
CN107077729A (en) * 2014-09-17 2017-08-18 皮尔茨公司 For the method and apparatus for the structural element for recognizing the projection structure pattern in camera image
CN108195843A (en) * 2018-02-01 2018-06-22 中铁电气化局集团有限公司 A kind of anchor section dropper condition checkout gear and method
CN111435075A (en) * 2019-01-15 2020-07-21 谢登航 Computer vision measurement system
CN112797895A (en) * 2020-12-24 2021-05-14 上海智殷自动化科技有限公司 Frame body positioning device based on vision and laser

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0526640A (en) * 1991-07-25 1993-02-02 Toshiba Corp Lead shape measuring device
JP2001183120A (en) * 1999-12-24 2001-07-06 Minolta Co Ltd Method and device for three-dimensional input
JP3924576B2 (en) * 2004-10-18 2007-06-06 倉敷紡績株式会社 Three-dimensional measurement method and apparatus by photogrammetry
JP2009186216A (en) * 2008-02-04 2009-08-20 Nikon Corp Three-dimensional shape measuring device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0526640A (en) * 1991-07-25 1993-02-02 Toshiba Corp Lead shape measuring device
JP2001183120A (en) * 1999-12-24 2001-07-06 Minolta Co Ltd Method and device for three-dimensional input
JP3924576B2 (en) * 2004-10-18 2007-06-06 倉敷紡績株式会社 Three-dimensional measurement method and apparatus by photogrammetry
JP2009186216A (en) * 2008-02-04 2009-08-20 Nikon Corp Three-dimensional shape measuring device

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104215198A (en) * 2014-08-25 2014-12-17 南京天睿朗自动化科技有限公司 Scanner for scanning three-dimensional profile of internal surface of tubular object
CN107077729A (en) * 2014-09-17 2017-08-18 皮尔茨公司 For the method and apparatus for the structural element for recognizing the projection structure pattern in camera image
JP2017531258A (en) * 2014-09-17 2017-10-19 ピルツ ゲーエムベーハー アンド コー.カーゲー Method and apparatus for identifying structural element of projected structural pattern in camera image
CN108195843A (en) * 2018-02-01 2018-06-22 中铁电气化局集团有限公司 A kind of anchor section dropper condition checkout gear and method
CN108195843B (en) * 2018-02-01 2024-01-23 中铁电气化局集团有限公司 Anchor section hanger state detection device and method
CN111435075A (en) * 2019-01-15 2020-07-21 谢登航 Computer vision measurement system
CN112797895A (en) * 2020-12-24 2021-05-14 上海智殷自动化科技有限公司 Frame body positioning device based on vision and laser
CN112797895B (en) * 2020-12-24 2022-07-22 上海智殷自动化科技有限公司 Frame body positioning device based on vision and laser

Also Published As

Publication number Publication date
JP5457865B2 (en) 2014-04-02

Similar Documents

Publication Publication Date Title
JP5745178B2 (en) Three-dimensional measurement method, apparatus and system, and image processing apparatus
JP3624353B2 (en) Three-dimensional shape measuring method and apparatus
JP5770486B2 (en) All-around image measuring device
JP2874710B2 (en) 3D position measuring device
JP5715735B2 (en) Three-dimensional measurement method, apparatus and system, and image processing apparatus
CN111649690A (en) Handheld 3D information acquisition equipment and method
JP2013122434A (en) Three-dimensional shape position measuring device by monocular camera using laser, method for measuring three-dimensional shape position, and three-dimensional shape position measuring program
JP2016527478A (en) 3D imaging device, 3D image creation method, and 3D imaging device setting method
JP2012058076A (en) Three-dimensional measurement device and three-dimensional measurement method
JP5457865B2 (en) Non-contact three-dimensional measuring apparatus and non-contact three-dimensional measuring method
EP3049756B1 (en) Modeling arrangement and method and system for modeling the topography of a three-dimensional surface
JPWO2017146202A1 (en) Three-dimensional shape data and texture information generation system, photographing control program, and three-dimensional shape data and texture information generation method
JP2008241643A (en) Three-dimensional shape measuring device
JP5563930B2 (en) Non-contact three-dimensional measuring apparatus and non-contact three-dimensional measuring method
JP5477658B2 (en) Calibration jig for calibration, 3D measurement system with calibration jig
JP2007093412A (en) Three-dimensional shape measuring device
JP6065670B2 (en) Three-dimensional measurement system, program and method.
US7046839B1 (en) Techniques for photogrammetric systems
JP4006296B2 (en) Displacement measuring method and displacement measuring apparatus by photogrammetry
JP2000205821A (en) Instrument and method for three-dimensional shape measurement
JP4550081B2 (en) Image measurement method
JP4077755B2 (en) POSITION DETECTION METHOD, DEVICE THEREOF, PROGRAM THEREOF, AND CALIBRATION INFORMATION GENERATION METHOD
JP2008241609A (en) Distance measuring system and distance measuring method
JP2004117186A (en) Three-dimensional shape measuring device
JP2003042730A (en) Apparatus and method for measurement of surface shape as well as surface-state mapping apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121213

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130905

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130917

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131217

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140110

R150 Certificate of patent or registration of utility model

Ref document number: 5457865

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250