JP2009210470A - 形状測定方法及び装置 - Google Patents

Abstract

【課題】光沢面を持つ被測定物や複雑な形状の被測定物であっても正確にパタンを読み取ることができ、形状認識能力の高い形状測定方法及び装置を提供する。
【解決手段】プロジェクタ５で初期パタンを被測定物９に投影し、カメラ１，３で初期パタンが投影された被測定物９を撮影し、カメラ１，３で撮影した画像の明度を読み取り、読み取った画像の明度が設定した目標明度よりも明るい部分は暗く、暗い部分は明るくして測定用パタンを決定し、測定用パタンを被測定物９に投影してカメラ１，３で撮影し、撮影した画像から被測定物９の形状を求める。
【選択図】図１

Description

本発明は、被測定物の形状をステレオ法で測定する形状測定方法及び装置に関する。

被測定物の形状を測定する方法の１つとしてステレオ法がある。ステレオ法は、左右２台のカメラで被測定物を撮影し、撮影した２つの画像の視差から被測定物の形状を演算して求める。具体的には、左右の画像の視差が大きいほどカメラからの距離が近く、視差が小さいほどカメラからの距離が遠くなる。この視差からカメラと被測定物の距離が演算できるので、被測定物の形状を求めることができる。ここで視差とは、左側のカメラで撮影した画像に写った被測定物の位置と右側のカメラで撮影した画像に写った被測定物の位置との差のことである。

被測定物表面の形状に特徴が少ない場合、左右の画像に写った被測定物のどの部分が同じ場所なのか判別が難しくなる。このような被測定物の場合、被測定物に特徴のあるパタンを投影すれば、左右のカメラに写ったパタンを照合して２つの画像のどの部分に被測定物の同じ場所が写っているのかを知ることができる。このとき、２つの画像のパタンの照合がどれだけ正確に行えるかが測定精度に関わってくる。

パタンの照合を正確に行うための技術は、特許文献１に開示されている。この技術は、撮影対象に投影されたストライプパタンを撮影し撮影データの白い部分と黒い部分の輝度値の差が所定の範囲に収まるようにストライプパタンの本数を決定するようにしている。

特開２００１−２６４０１７号公報

前述の特許文献１に記載された３次元画像撮影装置は、白と黒のストライプパタンを投影している。そして、ストライプの白い部分と黒い部分がはっきりと認識できる最大のストライプ本数を探し出し設定することによって誤検出を生じずに高解像度の検出を行うものである。しかし、金属のような光沢面を有する被測定物を測定する場合、光沢面にパタンを投影すると、鏡面反射によって撮影した画像が部分的に真っ白になってしまう、いわゆる白飛びが生じる。また、被測定物の形状によっては反射光が少ない部分の画像が真っ黒になってしまう、いわゆる黒潰れが生じる。白飛びや黒潰れが生じると投影したパタンが読み取れなくなり、パタンの白い部分と黒い部分をはっきりと認識できなくなる問題点がある。

本発明は前述の問題点を解決するためになされたものであり、本発明の目的は、光沢面を持つ被測定物や複雑な形状の被測定物であっても正確にパタンを読み取ることができ、形状認識能力の高い形状測定方法及び装置を提供することである。

前述の目的を達成するために、本発明によれば、プロジェクタでパタンを投影した被測定物を複数の異なる角度からカメラで撮影し、被測定物の形状を測定する形状測定方法において、前記プロジェクタで初期パタンを被測定物に投影し、前記カメラで前記初期パタンが投影された被測定物を撮影し、前記カメラで撮影した画像の明度を読み取り、読み取った前記画像の明度が設定した目標明度よりも明るい部分は暗く、暗い部分は明るくして測定用パタンを決定し、前記測定用パタンを被測定物に投影して前記カメラで撮影し、撮影した画像から被測定物の形状を求める形状測定方法が提供される。

また、前述の目的を達成するために、本発明によれば、プロジェクタでパタンを投影した被測定物を複数の異なる角度からカメラで撮影し、被測定物の形状を測定する形状測定方法において、前記プロジェクタで初期パタンを被測定物に投影し、前記カメラで前記初期パタンが投影された被測定物を撮影し、前記カメラで撮影した画像の明度を読み取り、読み取った前記画像の明度が設定した目標明度よりも明るい部分は暗く、暗い部分は明るく変更パタンを生成し、前記変更パタンを被測定物に投影して撮影した画像の明度と前記目標明度との差が所定値以下になるまで、パタン変更、投影、撮影を繰り返してキャンセルパタンを決定し、被測定物の各部分に特徴を持たせる任意の模様である特徴付加パタンを決定し、前記キャンセルパタン及び前記特徴付加パタンから測定用パタンを決定し、前記測定用パタンを被測定物に投影して前記カメラで撮影し、撮影した画像から被測定物の形状を求める形状測定方法が提供される。前記キャンセルパタンを決定する工程は、パタン変更、投影、撮影の繰り返し回数が所定回数に達したとき、パタン変更を終了してキャンセルパタンを決定してもよい。

また、前述の目的を達成するために、本発明によれば、被測定物にパタンを投影して撮影した被測定物の画像から被測定物の形状を測定する形状測定装置において、前記被測定物にパタンを投影し、該パタンの明度を部分的に変更可能なプロジェクタと、前記被測定物に対して複数の異なる角度から撮影可能に設けられたカメラと、前記カメラで撮影された画像の明度を読み取り、複数の画像を照合して被測定物の形状を演算する画像解析部と、前記画像解析部で読み取った画像の明度に基づいて前記被測定物に投影するパタンを変更するパタン変更部と、を具備する形状測定装置が提供される。

前述のように、本発明は、被測定物にパタンを投影してカメラで撮影したとき、投影したパタンが読み取れなくなってしまう部分の明度を変更して測定用パタンを決定し、投影したパタンを読み取れるようにしている。

前述のように、本発明は、被測定物に投影したパタンを撮影した画像の明度を読み取り、読み取った明度に基づいて目標明度よりも明るい部分は暗く、暗い部分は明るくなるように測定用パタンを決定している。従って、被測定物が複雑な形状であったり、光沢面を有していても、被測定物に投影されたパタンをより正確に読み取ることができるようになったので、被測定物の形状認識能力が上がり、測定精度が大幅に向上した。

以下、本発明による形状測定方法及び形状測定装置の好ましい実施の形態を説明する。図１に示す形状測定装置は、被測定物９を固定するテーブル１１と、被測定物９を撮影可能な方向に向けて設けられた左カメラ１と、被測定物９にパタンを投影可能な方向に向けて設けられたプロジェクタ５と、プロジェクタ５と被測定物９との間の投影光軸上に設けられたハーフミラー７と、ハーフミラー７で反射した光をプロジェクタ５の投影光と同軸で受光する位置に設けられた右カメラ３と、制御装置１３とを備えている。

形状測定装置の制御装置１３は、初期パタンや特徴付加パタンを入力するパタン入力部１５と、プロジェクタ５に投影すべきパタンを送出するパタン送出部１７と、入力されたパタンや読み取った画像の明度に基づいて変更パタンを生成するパタン変更部１９と、左カメラ１及び右カメラ３で撮影した画像から明度を読み取り複数の画像を照合する画像解析部２１と、画像解析部２１で照合された複数の画像の視差からカメラと被測定物９との距離を演算し被測定物９の形状を求める形状演算部２３とを備えている。

左右のカメラ１，３及びプロジェクタ５と、被測定物９とが図示しない移動装置によって相対移動可能に構成されている。このような構成にすることによって、カメラ１，３及びプロジェクタ５と被測定物９との位置合せが容易になる。更に、移動装置は、被測定物９に対してカメラ１，３及びプロジェクタ５を旋回移動可能に構成されている。旋回移動可能にすることによって、様々な角度から被測定物９の測定を行うことができるようになり、１方向からでは見えない部分がある複雑な形状の被測定物にも対応できる。例えば、５軸制御のマシニングセンタの主軸側にカメラ１，３及びプロジェクタ５を設け、テーブル側に被測定物９を取り付ければよい。

次に、図２を参照して被測定物の形状測定方法の第１の実施の形態について説明する。ここで、プロジェクタで投影するパタンの明度及びカメラで撮影された画像の明度は、０〜２５５の値で設定され、値が大きくなるほど明るくなる。

まず、パタン入力部１５に初期パタンを入力する。初期パタンの明度は適宜設定すればよいが、本実施の形態では、明度２０及び明度２００の均一なパタンを初期パタンとして入力する。ここで均一なパタンとは全ての部分が同じ明度であり模様の無いパタンのことである。Ｓ１のステップでは、パタン入力部１５に入力された明度２０の初期パタンをパタン送出部１７からプロジェクタ５に送出し、プロジェクタ５で被測定物９に投影する。Ｓ２のステップでは、右カメラ３でハーフミラー７に映った被測定物９を撮影する。Ｓ３のステップでは、右カメラ３で撮影された画像は画像解析部２１で画素毎の明度を読み取る。

Ｓ４のステップでは、撮影回数をカウントし、設定された所定回数と比較して撮影回数が所定回数に達していない場合、Ｓ５のステップに進み、撮影回数が所定回数に達していた場合、Ｓ７のステップに進む。Ｓ５のステップでは、撮影された画像の明度と目標明度を比較し、撮影された画像の明度と目標明度の差が所定値より大きい場合、Ｓ６のステップに進み、撮影された画像の明度と目標明度の差が所定値以下の場合、Ｓ７のステップに進む。ここで目標明度は初期パタンで投影した明度２０に設定している。Ｓ６のステップでは、目標明度よりも明るい部分は暗く、暗い部分は明るくなるように、投影したパタンを変更して変更パタンを決定して被測定物９に投影する。Ｓ７のステップでは、そのとき投影していたパタンを明度２０のキャンセルパタンとして設定する。このようにして、明度２００の初期パタンでも目標明度を２００として明度２０の初期パタンの場合と同様の方法でキャンセルパタンを決定する。ここでキャンセルパタンとは、被測定物の形状や反射によって投影したパタンと撮影したパタンの明度が変わらないようにキャンセルするためのパタンである。

Ｓ８のステップでは、黒と白の２値のランダムドットパタンでなる特徴付加パタンを作成する。ここで特徴付加パタンとは、被測定物の各部分に特徴を持たせるためのパタンであり、各部分の認識ができるような特徴を持ったパタンであれば、ランダムドットパタンに限らず、任意の模様のパタンを使用することができる。Ｓ９のステップでは、特徴付加パタンの黒の部分は明度２０のキャンセルパタンの対応する部分の明度を設定し、白の部分は明度２００のキャンセルパタンの対応する部分の明度を設定して測定パタンを作成する。Ｓ１０のステップでは、作成した測定パタンを被測定物９に投影し、左カメラ１及び右カメラ３で被測定物９を撮影し、撮影した左右の画像を照合し、形状演算部２３で左右の画像に写っている被測定物９の位置の違いである視差に基づいてカメラから被測定物９の各部までの距離を求め、求めた被測定物９の各部までの距離から被測定物９の形状を演算して求める。

本発明の左右の画像の照合には様々な方法が適用できるが、方向符号照合法で行うのが好ましい。方向符号照合法とは、画素毎の明度勾配の方向に基づいて照合する照合法であり、画素の明度自体ではなく、画素とその周囲の画素との明度変化が最大となる方向を方向符号として各画素に割り当て、この方向符号の分布に基づいて２つの画像を照合する方法である。金属のような光沢面を有する被測定物は鏡面反射があるので、被測定物を異なる角度から見ると同じ部分でも明度が大きく変わることがある。方向符号照合法は、画素の明度自体を照合する照合法ではないので、見る角度によって変わる明度の変化に影響されにくいという特徴がある。

また、形状が複雑でカメラ１，３の死角になる部分がある被測定物９を測定するには、図示しない移動装置で、左右のカメラ１，３及びプロジェクタ５と被測定物９とを死角の部分を撮影できる角度に相対移動させ、前述の方法と同様に測定し、それぞれの測定データを合成して被測定物９の形状を求める。

被測定物の形状測定方法の第２の実施の形態では、初期パタンに明度２０及び明度２００のランダムドットパタンを使用し、明度２０の部分の目標明度を２０に、明度２００の部分の目標明度を２００にして、第１の実施の形態と同様に、目標明度よりも明るい部分は暗く、暗い部分は明るくパタンを変更しながら、撮影された画像の明度と目標明度の差が所定値以下になるか、撮影回数が所定回数になるまでパタン変更を繰り返し、そのときのパタンを測定用パタンとして、被測定物９の測定を行う。

本発明の実施の形態として、２台のカメラと１台のプロジェクタを用いて被測定物の形状を測定する形態を説明してきたが、本発明のカメラ及びプロジェクタの台数を限定するものではない。例えば、左カメラの位置と右カメラの位置との間で移動可能に構成された１台のカメラを用いることもできる。また、３台以上のカメラと２台以上のプロジェクタを用いて被測定物の死角を無くすように構成することもできる。

本発明の形状測定装置の実施の形態を示すブロック図である。 本発明の形状測定方法の実施の形態の手順を示すフローチャートである。

符号の説明

１ 左カメラ
３ 右カメラ
５ プロジェクタ
７ ハーフミラー
９ 被測定物
１１ テーブル
１３ 制御装置

Claims (4)

1. プロジェクタでパタンを投影した被測定物を複数の異なる角度からカメラで撮影し、被測定物の形状を測定する形状測定方法において、
   前記プロジェクタで初期パタンを被測定物に投影し、
   前記カメラで前記初期パタンが投影された被測定物を撮影し、
   前記カメラで撮影した画像の明度を読み取り、
   読み取った前記画像の明度が設定した目標明度よりも明るい部分は暗く、暗い部分は明るくして測定用パタンを決定し、
   前記測定用パタンを被測定物に投影して前記カメラで撮影し、撮影した画像から被測定物の形状を求めることを特徴とした形状測定方法。
2. プロジェクタでパタンを投影した被測定物を複数の異なる角度からカメラで撮影し、被測定物の形状を測定する形状測定方法において、
   前記プロジェクタで初期パタンを被測定物に投影し、
   前記カメラで前記初期パタンが投影された被測定物を撮影し、
   前記カメラで撮影した画像の明度を読み取り、
   読み取った前記画像の明度が設定した目標明度よりも明るい部分は暗く、暗い部分は明るくして変更パタンを生成し、
   前記変更パタンを被測定物に投影して撮影した画像の明度と前記目標明度との差が所定値以下になるまで、パタン変更、投影、撮影を繰り返してキャンセルパタンを決定し、
   被測定物の各部分に特徴を持たせる任意の模様である特徴付加パタンを決定し、
   前記キャンセルパタン及び前記特徴付加パタンから測定用パタンを決定し、
   前記測定用パタンを被測定物に投影して前記カメラで撮影し、撮影した画像から被測定物の形状を求めることを特徴とした形状測定方法。
3. 前記キャンセルパタンを決定する工程は、パタン変更、投影、撮影の繰り返し回数が所定回数に達したとき、パタン変更を終了してキャンセルパタンを決定する請求項２に記載の形状測定方法。
4. 被測定物にパタンを投影して撮影した被測定物の画像から被測定物の形状を測定する形状測定装置において、
   前記被測定物にパタンを投影し、該パタンの明度を部分的に変更可能なプロジェクタと、
   前記被測定物に対して複数の異なる角度から撮影可能に設けられたカメラと、
   前記カメラで撮影された画像の明度を読み取り、複数の画像を照合して被測定物の形状を演算する画像解析部と、
   前記画像解析部で読み取った画像の明度に基づいて前記被測定物に投影するパタンを変更するパタン変更部と、
   を具備することを特徴とした形状測定装置。

Images