JP2018041169A5 - - Google Patents

Download PDF

Info

Publication number
JP2018041169A5
JP2018041169A5 JP2016173122A JP2016173122A JP2018041169A5 JP 2018041169 A5 JP2018041169 A5 JP 2018041169A5 JP 2016173122 A JP2016173122 A JP 2016173122A JP 2016173122 A JP2016173122 A JP 2016173122A JP 2018041169 A5 JP2018041169 A5 JP 2018041169A5
Authority
JP
Japan
Prior art keywords
pattern image
image
captured image
processing apparatus
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016173122A
Other languages
Japanese (ja)
Other versions
JP2018041169A (en
JP6867766B2 (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2016173122A priority Critical patent/JP6867766B2/en
Priority claimed from JP2016173122A external-priority patent/JP6867766B2/en
Publication of JP2018041169A publication Critical patent/JP2018041169A/en
Publication of JP2018041169A5 publication Critical patent/JP2018041169A5/ja
Application granted granted Critical
Publication of JP6867766B2 publication Critical patent/JP6867766B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

上記目的を達成するための本発明の一態様による情報処理装置は、以下の構成を備える。すなわち、
既知の幾何形状を少なくとも一つ以上有する第1のパターン画像の投影を含む撮像画像において、前記第1のパターン画像における前記幾何形状に対応する領域の、前記幾何形状からの幾何学的な歪みを表す写像を算出する算出手段と、
第2のパターン画像における注目領域と、前記第2のパターン画像の投影を含む撮像画像における領域を前記写像に基づいて変換することにより得られた対応領域と、の対比により、前記第2のパターン画像と前記撮像画像との対応点を探索する探索手段と、を備える。
In order to achieve the above object, an information processing apparatus according to an aspect of the present invention includes the following arrangement. That is,
In a captured image including projection of a first pattern image having at least one known geometric shape, a geometric distortion of the region corresponding to the geometric shape in the first pattern image from the geometric shape is reduced. A calculating means for calculating a mapping to represent;
A region of interest in the second pattern image, wherein the corresponding area obtained by the area definitive the captured image including a projection of the second pattern image is converted on the basis of the mapping, by the comparison, the second Search means for searching for corresponding points between the pattern image and the captured image .

[装置の構成]
図10は、第2の実施形態の情報処理装置100を備える三次元計測装置1000の構成例を示すブロック図である。第1の実施形態とは、撮像装置が1台追加され、第1の撮像装置2と第2の撮像装置3を有している点が異なる。第1の撮像装置2と第の撮像装置3は、投影装置1によりパターン画像が投影された状態で、異なる位置から撮像を行う。なお、投影装置1、第1の撮像装置2、第2の撮像装置3は各々の座標系を一致させるための校正が予め行われており、校正データが情報処理装置100内に保存されている。なお、情報処理装置100のハードウエア構成は第1の実施形態(図12)と同様である。
[Device configuration]
FIG. 10 is a block diagram illustrating a configuration example of a three-dimensional measurement apparatus 1000 including the information processing apparatus 100 according to the second embodiment. This embodiment is different from the first embodiment in that one imaging device is added and the first imaging device 2 and the second imaging device 3 are provided. The first imaging device 2 and the second imaging device 3 perform imaging from different positions in a state where the pattern image is projected by the projection device 1. Note that the projection device 1, the first imaging device 2, and the second imaging device 3 have been calibrated in advance to match the coordinate systems, and calibration data is stored in the information processing apparatus 100. . Note that the hardware configuration of the information processing apparatus 100 is the same as that of the first embodiment (FIG. 12).

Claims (16)

既知の幾何形状を少なくとも一つ以上有する第1のパターン画像の投影を含む撮像画像において、前記第1のパターン画像における前記幾何形状に対応する領域の、前記幾何形状からの幾何学的な歪みを表す写像を算出する算出手段と、
第2のパターン画像における注目領域と、前記第2のパターン画像の投影を含む撮像画像における領域を前記写像に基づいて変換することにより得られた対応領域と、の対比により、前記第2のパターン画像と前記撮像画像との対応点を探索する探索手段と、を備えることを特徴とする情報処理装置。
In a captured image including projection of a first pattern image having at least one known geometric shape, a geometric distortion of the region corresponding to the geometric shape in the first pattern image from the geometric shape is reduced. A calculating means for calculating a mapping to represent;
A region of interest in the second pattern image, wherein the corresponding area obtained by the area definitive the captured image including a projection of the second pattern image is converted on the basis of the mapping, by the comparison, the second An information processing apparatus comprising: search means for searching for corresponding points between a pattern image and the captured image .
異なる位置にある第1と第2の撮像手段から取得された、既知の幾何形状を少なくとも一つ以上有する第1のパターン画像の投影を含む第1と第2の撮像画像のそれぞれについて、前記第1のパターン画像における前記幾何形状に対応する領域の、前記幾何形状からの幾何学的な歪みを表す写像を算出する算出手段と、
前記第1と第2の撮像手段から取得された、第2のパターン画像の投影を含む第3と第4の撮像画像のうち、前記第3の撮像画像における注目領域と、前記第4の撮像画像における対応領域との対比により、前記第3の撮像画像と前記第4の撮像画像との対応点を探索する探索手段と、を備え、
前記対応領域は前記第1の撮像画像について算出された写像と、前記第2の撮像画像について算出された写像とに基づいて前記第3の撮像画像における注目領域を変換することにより設定されることを特徴とする情報処理装置。
For each of the first and second captured images including projections of the first pattern image having at least one known geometric shape acquired from the first and second imaging means at different positions, the area corresponding to the geometry definitive one of the pattern image, calculating means for calculating a mapping representing the geometric distortions from the geometry,
Of the third and fourth captured images including the projection of the second pattern image acquired from the first and second imaging means, the attention area in the third captured image, and the fourth captured image Search means for searching for corresponding points between the third captured image and the fourth captured image by comparison with a corresponding region in the image ,
The corresponding region is set by converting a region of interest in the third captured image based on a map calculated for the first captured image and a map calculated for the second captured image. An information processing apparatus characterized by the above.
前記探索手段は、前記対応領域の点に対応するエピポーラ線に沿って前記注目領域を探索することを特徴とする請求項1または2に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the search unit searches for the attention area along an epipolar line corresponding to a point of the corresponding area. 前記算出手段は、前記第1のパターン画像の投影を含む撮像画像の画素ごとに前記写像を算出し、
前記注目領域は、前記第2のパターン画像における注目画素とその周囲の近傍画素により形成され、
前記対応領域は、前記第2のパターン画像の投影を含む撮像画像における対応画素の周囲に、当該対応画素について算出された前記写像に基づいて前記周囲の近傍画素の位置が変換されて配置された領域であることを特徴とする請求項1乃至3のいずれか1項に記載の情報処理装置。
The calculating means calculates the mapping for each pixel of the captured image including a projection of the first pattern image,
The region of interest is formed by a pixel of interest in the second pattern image and neighboring pixels around it,
The corresponding region is around the corresponding pixel in the captured image including a projection of the second pattern image, the position of the neighboring pixels of the surrounding based on the mapping calculated for the corresponding pixels are arranged are converted The information processing apparatus according to claim 1, wherein the information processing apparatus is an area.
前記探索手段は、前記算出手段により算出された写像を初期値として、前記対応画素の更新に応じて写像を更新することを特徴とする請求項4に記載の情報処理装置。   The information processing apparatus according to claim 4, wherein the search unit updates the map according to the update of the corresponding pixel, with the map calculated by the calculation unit as an initial value. 前記第1のパターン画像の投影を含む撮像画像と、前記第2のパターン画像の投影を含む撮像画像を、別々の撮像画像として取得する取得手段を更に備えることを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。 6. The image processing apparatus according to claim 1 , further comprising an acquisition unit configured to acquire a captured image including the projection of the first pattern image and a captured image including the projection of the second pattern image as separate captured images. The information processing apparatus according to any one of the above. 前記第1のパターン画像と前記第2のパターン画像とを混合したパターン画像の投影を含む撮像画像を取得する取得手段を更に備えることを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。 The acquisition unit according to claim 1 , further comprising an acquisition unit that acquires a captured image including a projection of a pattern image obtained by mixing the first pattern image and the second pattern image. Information processing device. 前記第2のパターン画像は、非周期的なパターンを有することを特徴とする請求項1乃至7のいずれか1項に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the second pattern image has an aperiodic pattern. 前記第1のパターン画像は、階調または色調が異なる、既知の幾何形状が並んでいる画像であることを特徴とする請求項1乃至8のいずれか1項に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the first pattern image is an image in which known geometric shapes are arranged in different gradations or color tones. 前記第1のパターン画像は、前記幾何形状が規則的に並んでいるパターン画像であることを特徴とする請求項1乃至9のいずれか1項に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the first pattern image is a pattern image in which the geometric shapes are regularly arranged. 前記探索手段により探索された前記対応点に基づいて、対象物体の表面の三次元座標を算出する座標算出手段を更に備えることを特徴とする請求項1乃至10のいずれか1項に記載の情報処理装置。   The information according to any one of claims 1 to 10, further comprising coordinate calculation means for calculating a three-dimensional coordinate of the surface of the target object based on the corresponding points searched by the search means. Processing equipment. 投影手段をさらに備えることを特徴とする請求項1乃至11のいずれか1項に記載の情報処理装置。   The information processing apparatus according to claim 1, further comprising a projecting unit. 撮像手段をさらに備えることを特徴とする請求項1乃至12のいずれか1項に記載の情報処理装置。   The information processing apparatus according to claim 1, further comprising an imaging unit. 情報処理装置の制御方法であって、
既知の幾何形状を少なくとも一つ以上有する第1のパターン画像の投影を含む撮像画像において、前記第1のパターン画像における前記幾何形状に対応する領域の、前記幾何形状からの幾何学的な歪みを表す写像を算出する工程と、
第2のパターン画像における注目領域と、前記第2のパターン画像の投影を含む撮像画像における領域を前記写像に基づいて変換することにより得られた対応領域と、の対比により、前記第2のパターン画像と前記撮像画像との対応点を探索する探索工程と、を有することを特徴とする情報処理装置の制御方法。
A method for controlling an information processing apparatus,
In a captured image including a projection of a first pattern image having at least one known geometric shape, a geometric distortion of the region corresponding to the geometric shape in the first pattern image from the geometric shape is reduced. Calculating a mapping to represent;
A region of interest in the second pattern image, wherein the corresponding area obtained by the area definitive the captured image including a projection of the second pattern image is converted on the basis of the mapping, by the comparison, the second And a search step of searching for corresponding points between the pattern image and the captured image .
情報処理装置の制御方法であって、
異なる位置にある第1と第2の撮像手段から取得された、既知の幾何形状を少なくとも一つ以上有する第1のパターン画像の投影を含む第1と第2の撮像画像のそれぞれについて、前記第1のパターン画像における前記幾何形状に対応する領域の、前記幾何形状からの幾何学的な歪みを表す写像を算出する算出工程と、
前記第1と第2の撮像手段から取得された、第2のパターン画像の投影を含む第3と第4の撮像画像のうち、前記第3の撮像画像における注目領域と、前記第4の撮像画像における対応領域との対比により、前記第3の撮像画像と前記第4の撮像画像との対応点を探索する探索工程と、を有し、
前記対応領域は前記第1の撮像画像について算出された写像と、前記第2の撮像画像について算出された写像とに基づいて前記第3の撮像画像における領域を変換することにより設定されることを特徴とする情報処理装置の制御方法
A method for controlling an information processing apparatus,
For each of the first and second captured images including projections of the first pattern image having at least one known geometric shape acquired from the first and second imaging means at different positions, A calculation step of calculating a mapping representing a geometric distortion from the geometric shape of a region corresponding to the geometric shape in one pattern image;
Of the third and fourth captured images including the projection of the second pattern image acquired from the first and second imaging means, the attention area in the third captured image, and the fourth captured image A search step of searching for a corresponding point between the third captured image and the fourth captured image by comparison with a corresponding region in the image ,
The corresponding area is set by converting the area in the third captured image based on the map calculated for the first captured image and the map calculated for the second captured image. A control method for an information processing apparatus.
コンピュータに、請求項14または15に記載の情報処理装置の制御方法の各工程を実行させるためのプログラム。   A program for causing a computer to execute each step of a control method for an information processing apparatus according to claim 14 or 15.
JP2016173122A 2016-09-05 2016-09-05 Information processing device and its control method, program Active JP6867766B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016173122A JP6867766B2 (en) 2016-09-05 2016-09-05 Information processing device and its control method, program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016173122A JP6867766B2 (en) 2016-09-05 2016-09-05 Information processing device and its control method, program

Publications (3)

Publication Number Publication Date
JP2018041169A JP2018041169A (en) 2018-03-15
JP2018041169A5 true JP2018041169A5 (en) 2019-10-10
JP6867766B2 JP6867766B2 (en) 2021-05-12

Family

ID=61626128

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016173122A Active JP6867766B2 (en) 2016-09-05 2016-09-05 Information processing device and its control method, program

Country Status (1)

Country Link
JP (1) JP6867766B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7119621B2 (en) * 2018-06-18 2022-08-17 オムロン株式会社 Image processing system and image processing method
JP2022073496A (en) 2020-11-02 2022-05-17 セイコーエプソン株式会社 Determination method for projective transformation matrix, projector, and determination system

Similar Documents

Publication Publication Date Title
CN106454291B (en) System and method for automatic registration and projection mapping
JP6353289B2 (en) Ranging correction device
US10165262B2 (en) Image processing device and markers
JP2016019194A (en) Image processing apparatus, image processing method, and image projection device
JP2009042162A (en) Calibration device and method therefor
JP6566768B2 (en) Information processing apparatus, information processing method, and program
JP2015036629A5 (en)
WO2015125300A1 (en) Local location computation device and local location computation method
KR102255017B1 (en) Method for calibrating an image capture sensor comprising at least one sensor camera using a time coded pattern target
JP2019020778A5 (en)
JPWO2015068470A1 (en) 3D shape measuring apparatus, 3D shape measuring method, and 3D shape measuring program
JP2018113021A5 (en)
JP2017146952A5 (en) Information processing apparatus, information processing apparatus control method, information processing method, and program
JP2013246606A (en) Data derivation device and data derivation method
JP2018112790A5 (en)
JP2015106290A5 (en)
JP2012083233A5 (en)
JP2018041169A5 (en)
KR101245529B1 (en) Camera calibration method
JP2018017653A5 (en) Three-dimensional measuring device
CN116934871B (en) Multi-objective system calibration method, system and storage medium based on calibration object
EA201992033A1 (en) METHOD OF COMBINED METROLOGY FOR CALCULATING DISTANCE, ROLL AND POSITION PROVISIONS AND RELATIVE ORIENTATIONS BETWEEN TWO INTERESTING UNDERWATER POINTS
JP2015206654A (en) Information processing apparatus, information processing method, and program
JP6867766B2 (en) Information processing device and its control method, program
JP2017199285A (en) Information processor, information processing method, program