JP3301031B2 - 物体の自動認識方法および自動認識装置 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、物体の自動認識方法お
よび物体自動認識装置に関し、特に、三次元物体の自動
認識方法および自動認識装置に適用して有効な技術に関
するものである。

【０００２】

【従来の技術】これまで三次元物体の認識方法として
は、超音波センサとニューラルネットワークを用いる方
法が提案されているが、当然のことながら物体の色や表
面の記号など表面情報を認識できないという問題があ
る。この問題点を補う意味で超音波センサとＣＣＤカメ
ラによる平面画像をフュージョン（合成）による物体認
識方法として、（１）濃淡画像を用いる、（２）微分画
像を用いる、（３）カラー画像を用いる、などの方法が
提案されている。

【０００３】

【発明が解決しようとする課題】しかしながら、前述の
従来技術には、以下の問題点がある。

【０００４】（１）の方法では、超音波像単独に比べて
物体像を飛躍的に向上することができるが、しかし、影
への対応が難しいことが明らかになり、屋外環境におい
ては併用する超音波のロバスト性（頑健性）を活かすこ
とができないという問題が生じる。

【０００５】（２）の方法では、濃淡画像に比べれば明
るさの変化に対しロバストであるが、しかし、微分画像
は再現性に問題があり、また、分解能が劣化するので折
角の画像の精細さを損なう結果となってしまう。

【０００６】（３）の方法では、色に基づいて物体像を
抽出するので、影の影響を受けにくい長所があるが、し
かし、物体の色が予めわからない場合には試行錯誤によ
る物体像抽出に時間を要す上、多色物体の場合には全体
像を一度に認識することができないという問題が生じ
る。なぜなら、色の異なった部分のいずれが物体を構成
するのか不明なため、全体像を構成できないためであ
る。人間と同様な認識機能を実現するには様々な改善が
必要である。

【０００７】本発明の目的は、影へのロバスト性の向上
による屋外で作動できる技術を提供することにある。

【０００８】本発明の他の目的は、ＣＣＤカメラの撮像
精度を活かした認識精度を得ることができる技術を提供
することにある。

【０００９】本発明の他の目的は、位置や向きが自由な
未確認物体のカラー物体像の背景からの抽出と認識が可
能な技術を提供することにある。

【００１０】本発明の前記ならびにその他の目的と新規
な特徴は、本明細書の記述及び添付図面によって明らか
にする。

【００１１】

【課題を解決するための手段】本願において開示される
発明のうち代表的なものの概略を簡単に説明すれば、以
下のとおりである。

【００１２】即ち、本発明は、三次元物体の自動認識方
法であって、距離画像測定手段で測定した距離情報の差
に基づいて物体像を抽出し、前記物体像を規格化した情
報に基づき物体を推定する第１の過程と、カラーカメラ
画像測定手段で測定した物体像のうち、前記推定した物
体の色に含まれる色領域のみを残すことによって作成し
たモデルをテンプレートとし、該テンプレートと、予め
カラーカメラ画像測定手段を用いて作成した前記推定し
た物体のモデルとの一致度を検定することによって物体
を認識する第２の過程とを備えたことを特徴とする。

【００１３】また、本発明は、観察による距離画像測定
手段、カラーカメラ画像測定手段、及び認識するパター
ン検定手段で構成される三次元物体の自動認識装置であ
って、前記距離画像測定手段で測定した距離情報の差に
基づいて物体像を抽出し、前記物体像を規格化した情報
を前記パターン検定手段に入力することによって物体を
推定する物体推定手段と、前記カラーカメラ画像測定手
段で測定した物体像のうち、前記推定した物体の色に含
まれる色領域のみを残すことによって作成したモデルを
テンプレートとし、当該テンプレートと、予めカラーカ
メラ画像測定手段を用いて作成した前記推定した物体の
モデルとの一致度を前記パターン検定手段で検定するこ
とによって物体を認識する物体認識手段とを備えたこと
を特徴とする。

【００１４】また、本発明は、前述の三次元物体の自動
認識装置において、前記距離画像測定手段としてレーザ
ー光切断法、もしくは超音波センサアレイ法を用い、カ
メラ画像測定手段として、ビデオカメラ法を用い、パタ
ーン検定手段として、ニューラルネットワーク法もしく
はテンプレートマッチング法を用いることを特徴とす
る。

【００１５】

【００１６】

【作用】前述した手段によれば、物体の外形と位置や向
きを判断し、詳細な形状や表面情報を認識する階層シス
テムを構成することにより、物体を推定した上で色情報
の認識を行うので、色フィルタを限定でき、不要な色認
識作業を節約できる。

【００１７】また、色情報に基づくので、影の影響が小
さく、正確な物体平面像を得ることができる。特に、色
分布のマッチングを行えるので、全体像の検定を一度に
行うことができる。

【００１８】また、このプロセスをニューラルネットに
比べて計算機に必要なメモリ数が少なくてすむパターン
マッチングで処理することができるので、メモリ数に限
定のある小型の計算機でも比較的多くの情報を扱える利
点がある。

【００１９】また、物体上の記号位置をデータベースに
与えることができるので、場所を限定した画像探索が可
能となり、表面記号の読み取りも可能になる。

【００２０】

【実施例】以下、図面を参照して本発明の実施例を詳細
に説明する。

【００２１】なお、実施例を説明するための全図におい
て、同一機能を有するものは同一符号を付け、その繰り
返しの説明は省略する。

【００２２】本発明は、第一の過程と第二の過程とから
なるが、第一の過程の内容は、超音波像をニューラルネ
ットワークで認識するものであり、その構成及び処理の
詳細は、特開平５−１９０５２号公報に記載される技術
と同様である。

【００２３】図１は、本発明に係る測定系（測定手段）
の一実施例の概略構成を示すブロック図であり、１は超
音波センサアレイ、２はカラービデオカメラ、３は物
体、４は測定面（背景）、５は正規化手段、６は第１の
パターン検定回路、７は色認識手段、８は第２のパター
ン検定回路である。

【００２４】本実施例の測定系（測定手段）は、超音波
センサを８行８列に計６４個同一平面上に設置して超音
波センサアレイ１を構成し、これの中央にカラービデオ
カメラ（カラーＣＣＤカメラ）２を設置する。前記超音
波センサアレイ１及びカラービデオカメラ（カラーＣＣ
Ｄカメラ）２を下向きに設置し、対向する測定面４上に
認識させる物体３を設置する。

【００２５】超音波センサはパルス遅延時間法もしくは
開口合成法を用いて駆動することによって、物体１及び
背景（測定面４）までの距離情報の平面分布を得る。こ
の情報に基づいて物体の立体像を得る。

【００２６】また、カラービデオカメラ（カラーＣＣＤ
カメラ）２により物体３のカラー平面像を得る。これら
の情報はニューラルネットワークに取り込まれる。ニュ
ーラルネットワークに取り込んだ距離情報の分布を学習
値と比較することにより、物体が予め学習した物体のい
ずれに一番類似しているかを判定する。

【００２７】次に、第一の過程および第二の過程の処理
の流れと各プロセスの内容を示す。

【００２８】〔第一の過程〕以下に第一の過程の処理の
流れと各プロセスの内容を示す。 （１１）：超音波像測定を行う。 （１２）：ノイズ孤立処理を行う。 （１３）：物体像抽出を行う。 （１４）：平行移動を行う。 （１５）：ニューラル回転対照法による形状認識および
向きの記録を行う （１６）：断面積および高さ検出を行う。 （１７）：物体認識を行う。 （１８）：物体モデルおよび向きの提案を行う。

【００２９】前記プロセス（１１）の超音波像測定によ
り、撮像面の縦横に対応した１５×１５程度の距離デー
タを得る。空間分解能はパルス遅延時間法ではセンサ間
隔の半分程度、開口合成法では波長程度である。陸上で
は周波数２００ｋＨｚでは１．７ｍｍ程度の分解能とな
る。

【００３０】前記プロセス（１２）のノイズ処理は、測
定した距離情報の分布において、距離情報が前後左右の
値に対して孤立している場合はノイズとして消去する。

【００３１】前記プロセス（１３）は、物体表面まで
と、背景までの距離の差に基づいて物体像を背景から抽
出する。背景までの距離は予め設定してもよいし、測定
値の最大値を用いても良い。

【００３２】前記プロセス（１４）は、物体の重心を算
出し、ニューラルネットワークに取り込むデータ列の特
定位置に重心が来るよう平行移動して、縦横の位置を正
規化する。

【００３３】前記プロセス（１５）は、重心中心に物体
像を一定角度毎に回転させたデータをニューラルネット
ワークに取り込み、物体形状および向きを認識する。

【００３４】前記プロセス（１６）は、物体１の断面積
および高さを検出する。

【００３５】前記プロセス（１７）は、物体形状、断面
積および高さをニューラルネットワークに取り込み、物
体を認識する。

【００３６】前記プロセス（１８）は、前記プロセス
（１７）の認識結果に基づき、確率の高い順番に候補物
体を提示し、向きをラベルに記録する。

【００３７】以上のプロセス（１１）〜（１８）によっ
て位置及び平面内の向きが自由な物体１を認識できる。
さらに、物体１の重心位置および向きを知ることができ
る。特に、このプロセスは、超音波センサを用いて行わ
れるので、環境の明るさに影響されないメリットがあ
る。しかし、超音波の課題として外径が分解能以下の物
体は推定できない欠点がある。物体を推定できる場合
は、向きも推定できる。

【００３８】なお、開口合成法は物体表面の平行度に対
するロバスト性にも優れているので超音波による斜め方
向観察も可能である。

【００３９】〔第二の過程〕第二の過程は、第一の過程
で推定した物体のモデルを想起して、これをカメラ画像
とテンプレートマッチング法により検定するものであ
る。以下に、第二の過程の処理の流れと各プロセスの内
容を示す。

【００４０】（２１）：６４０×４００画素のカラー像
撮像を行う。サンプルを撮像画面内に設置し、撮像す
る。 （２２）：超音波像で求めた重心位置に対応する点を中
心に２５６×２５６画素のカラー画像を抽出する。 （２３）：１画素毎にサンプリングして、１２８×１２
８画素のカラー画像とする。 （２４）：カラーモデルのラベルから色番号と回転角を
読み込む。 （２５）：ニューラルネットワークによりカラー画像の
色を識別し、前記プロセス（２４）で読み込んだ色番号
の画素については同じ色番号を付与し、他の画素は全て
０を付与する。 （２６）：重心を測定し、平行移動する。さらに、ラベ
ルから読み込んだ回転角だけ回転させてテンプレート画
像とする。 （２７）：カラーモデルとテンプレート画像を並列表示
し、パターンマッチングにより誤差の最小値を求める。 （２８）：最小値がしきい値以下にならない場合は、次
のカラーモデルについて前記プロセス（２４）以下の手
続きを繰り返す。しきい値以下の値が得られた時点で処
理を終了し、認識結果を表示する。

【００４１】以下に各プロセスの内容を補足する。

【００４２】前記プロセス（２１）でカラー撮像する。
前記プロセス（２２）は、超音波像に基づいて物体の位
置を把握し、物体像が中心になるように画像を抽出す
る。前記プロセス（２３）は、単にデータ量を減らして
演算を容易にするためのサンプリングである。前記プロ
セス（２４）で超音波像の認識結果に従いモデルを想起
する。特に、以下の処理で必要となる色情報と回転角を
読み込む。

【００４３】前記プロセス（２５）は、ニューラルネッ
トワーク等で物体平面像の色認識を行い、色規格化像を
作成する。色認識はカラーカメラのＲＧＢ出力の比によ
って行う。色認識後の画像で、前記プロセス（２４）で
読み込んだ面積規格化カラーモデルの色のみを保存し、
他の色についてはノイズおよび背景として０に置換す
る。

【００４４】結果として、背景が０の規格化像を得る。
前記プロセス（２６）で重心を検出し、位置を正規化す
る。また、超音波像の回転対照でピークを得た回転角だ
け像を回転させ、テンプレート像を作成する。

【００４５】前記プロセス（２７）は、以上のプロセス
で得たテンプレート画面を面積規格化カラーモデルとパ
ターンマッチング法によって検定する。両方の像は位置
や向き、大きさを整合させてある上、テンプレートは面
積規格化カラーモデルの色のみ残して他の色は背景と同
じ０に処理されているので、両者が一致する時は誤差は
小さいが、別物体である場合は大きな誤差を生じる。

【００４６】前記プロセス（２８）は、誤差の大きさに
より処理を終了もしくは次候補を検定する。次候補の場
合は前記プロセス（２５）のプロセスにおいて、前候補
と異なる色が保存されるので、テンプレートは前候補の
場合と全く異なった像となる。従って、間違った像を想
起しても、それを正解と誤認識する可能性は著しく低く
なる。逆に、正解を得る確率は高くなる。

【００４７】また、保存された色に対応する画素は、同
一物体を構成するものであることが保証されている。従
って、複数色に彩られた物体を一つの物体と認識でき
る。さらに、物体像の抽出にカラー画像を用いることが
できるので、照明の変化に寛容で再現性良く物体像を抽
出できる。また、影の影響にもロバストな長所がある。
これらが、本発明の特徴である。

【００４８】なお、前述の実施例では、パターン検定に
テンプレートマッチング法を用いた。これは、計算機の
メモリーを節約できるメリットが有るが、段階１と同様
にパーセプトロンなどのニューラルネットワークを用い
ても良い。通常はパターン認識にニューラルネットワー
クを用いる利点として複数のパターンを一度に検定でき
る利点があるが、この場合は、新しいテンプレート作成
にプロセス（２４）〜（２６）の操作を繰り返す必要が
あるので、新しいテンプレート毎にプロセス（２７）と
プロセス（２８）のプロセスを繰り返す必要がある。

【００４９】なお、面積規格化カラーモデルは、以下の
プロセスで作成される。

【００５０】（１）：画素が６４０×４００×ＲＧＢの
カラー像撮像を行う。物体を撮像画面中央に同じ向きに
設置し、撮像する。 （２）：中央部２５６×２５６画素のカラー像を抽出す
る。 （３）：１画素毎にサンプリングして、１２８×１２８
画素のカラー像とする。 （４）：ニューラルネットワークにより７色に識別し、
色番号を付与する。 （５）：色番号画像を表示する。 （６）：背景色を指定して、０に置換する。 （７）：重心を測定し、画像の中央に平行移動する。 （８）：左右上下に１２画素ずつ０画素を付加して、１
５２×１５２画素とする。 （９）：色番号をラベルに記録する。 （１０）：全てのサンプルについて上記手続きによりカ
ラーモデルを作成し記録する。

【００５１】前記プロセス（８）の処理は、画像の周囲
に余白を設けることにより、テンプレート像を色々な位
置にずらしてマッチングできるようにするためのもので
ある。パターン検定にニューラルネットワークを用いる
場合には、前記プロセス（８）は不要である。

【００５２】以下に実験結果を示し、本実施例の有効性
を説明する。

【００５３】（１）高さと直径が３ｃｍの円柱、一辺が
３ｃｍの立方体および外観が水色のシャープペンシル、
赤ボールペン、緑蛍光ペン、黒マジックについて前記プ
ロセスでサンプルモデルを作成した。モデル作成におい
ては、サンプルを水平に置いて撮像した。特に、筆記具
についてはそれらのクリップが向かって左、かつ上向き
になるよう設置した。

【００５４】（２）以上の６種のサンプルについて、認
識実験を行い、各サンプルについて正解、誤解と誤差を
記録した。筆記具についてはクリップの向きも変えて実
験し、記録した。なお、各実験はサンプルを１つずつ、
測定面内の任意の位置に自由な向きに設置して行った。
また、同一サンプルについて背景色を変えて実験した。

【００５５】（３）第一の過程では、物体を円柱、立方
体および筆記具の合計３種に分類できるよう構成した。
従って、ニューラルネットワークには、これらの３種に
ついて分離できるよう学習させた。筆記具については、
超音波のみでは外形の差異の抽出は困難なうえ、当然の
ことながら表面のカラー情報を得ることはできないの
で、これらの分離はできない。従って、筆記具は４種を
まとめて筆記具として認識し、それらの位置と向きを求
める様に構成した。

【００５６】（４）実験の結果、円柱と正方形と筆記具
は、それぞれ形状が著しく異なるので、第一過程の超音
波像に基づく認識だけで正解に分離できた。しかし、第
一の過程では４種の筆記具の分離はできないので、引き
続き第二の過程による処理を行った。以下に第二の過程
の実験結果の一部を図面を用いて説明する。

【００５７】（５）図２（ａ）に緑色の蛍光ペンの場合
のテンプレート２０Ａを示し、図２（ｂ）にそのカラー
モデル２０Ｂを示す。図２（ａ）および（ｂ）とも本質
的にカラー画像であるものを、特許出願のために、特
に、白黒画像で表示してある。

【００５８】図２（ｃ）および（ｄ）は、前記図２
（ａ）および（ｂ）の色分布を説明するための説明図で
ある。図２（ｂ）のカラーモデル２０Ｂは、例えば、図
２（ｄ）に示すように、黒（０）、青色（１）、赤色
（０）、紫色（９）、緑色（６８１）、水色（３８
７）、黄色（３６４）、白（０）の画素数で構成され、
誤差は（５０７）である。これらの８色の画素数の和は
１４４２となるので、黒と白はなく、水色は蛍光ペンの
カラーモデル全体の面積の３８７／１４４２＝２７％を
占めることを示している。

【００５９】前記図２（ａ）および（ｂ）の枠２０Ｃ
は、縦横１２４画素の領域を示す。テンプレート２０Ａ
は、蛍光ペンを白色の背景の上に置いて撮像したもので
ある。テンプレート２０Ａでは、背景中から物体像のみ
が抽出されている。一般的に、カラー画像中から物体像
を抽出する場合、物体色と背景色が同じ場合は、色に基
づく抽出は困難である。しかし、物体と背景の色が異な
る場合でも、物体の色や場所、大きさなどが予め分かっ
ていない限りは、背景から物体像を機械的に抽出するこ
とはできない。特に、物体が複数の色で構成されている
場合には、カラー画像中のどの色領域が同一の物体を構
成しているかがわからない限り、全体の物体像は抽出で
きない。本発明では、カラーモデル２０Ｂの色に従って
物体像を抽出するので、図２に示したように、蛍光ペン
の物体像を抽出することに成功した。

【００６０】また、表１中に示した誤差６８０とは、テ
ンプレートマッチングの結果を示す。つまり、モデルの
画素数１４４２のうち、６８０画素、つまり割合にして
４７．１％の領域でテンプレート２０Ａとカラーモデル
２０Ｂが異なることを示す。テンプレート２０Ａの蛍光
ペンの右端が欠けているのは、撮像領域が狭い上、平行
移動のプロセスでの重心位置の測定誤差による。

【００６１】４種の筆記具に対するテンプレートマッチ
ングの結果を表１に示す。

【００６２】

【表１】

【００６３】表１中のいずれの場合も、テンプレート２
０Ａとカラーモデル２０Ｂが一致した時が一番誤差が少
なく、正解が得られることがわかる。なお、誤差画素数
の割合が１００％を越える例があるのは、モデルの画素
数よりもテンプレートの画素数が多くなる場合があるた
めである。

【００６４】また、水色シャープペンシルのクリップの
向きをカラーモデルと異なえた場合の認識結果を図３
（ａ），（ｂ）と図４（ａ），（ｂ）にそれぞれ水色シ
ャープペンシル３０Ａとカラーモデル３０Ｂを示す。図
３（ｂ）のカラーモデル３０Ｂは、クリップを左下向き
にした結果、図４（ｂ）は右上向きにした結果であり、
それぞれのカラーモデル３０Ｂは、例えば、図３
（ｄ），図４（ｄ）に示すように、黒（０）、青色
（０）、赤色（０）、紫色（０）、緑色（３４５）、水
色（９０７）、黄色（９９）、白（０）の画素数で構成
され、誤差はそれぞれ５５４と６２０であった。この結
果を表１と比べると、認識結果は水色シャープペンシル
３０Ｂとなり、正解が得られることがわかる。この結果
が示すとおり、向きによる形状差は、物体の色の差に比
べると小さく認識され、テンプレートマッチングを用い
た本発明の有効性が確認できる。

【００６５】次に、背景の色を図５（ａ）の様に画面中
央で異なえて青色領域ＢＹと白色領域ＷＹの２色にした
場合のテンプレート（水色のシャープペンシル）２０Ａ
を図５（ｂ）に示す。背景を図５（ａ）の左半分を青色
ＢＹ、右半分を白色ＷＹとした場合でも、テンプレート
はほぼ物体像だけを抽出できている。なお、中央の縦線
は青色ＢＹと白色ＷＹの境界部で水色と判定された部分
である。以上の例では、図２に示したとおり色を黒色、
青色、赤色、紫色、緑色、水色、黄色、白色の８色に分
離したが、さらに細かく分離すれば、繊細な色の違いに
基づいて認識することが可能なことは言うまでもない。

【００６６】なお、以上の実施例では第一の過程として
距離画像を得るための手段として超音波を用いる例を示
したが、同様な目的で広く用いられているレーザー光源
を用いた光切断法を用いても良いことは言うまでもな
い。

【００６７】以上述べた本発明の実施例についての動作
処理の流れを図６に示す。図６からわかるように本発明
は見方によって以下の３方法に記述できる。

【００６８】（１）距離画像に基づいて個体を抽出し
て、該個体の形状と大きさおよび三次元位置、一平面内
の向きを認識する第一の過程と、第一の過程の認識結果
に基づいてカメラ画像情報から個体を抽出し、表面情報
を認識する第二の過程からなる三次元物体の自動認識方
法。

【００６９】（２）少なくとも二つの観察手段ａ，ｂと
認識手段によって構成され、観察手段ａの観察結果に基
づいて物体を推定する第一の過程と、前記推定結果に対
応する、異なる観察手段ｂのモデルと、前記観察手段ｂ
のモデルに記載された情報に基づく観察手段ｂによる観
察結果を比較して検定する第二の過程により物体を認識
する三次元物体の自動認識方法。

【００７０】（３）観察手段である距離画像測定手段と
カラーカメラ画像測定手段、及び認識手段であるパター
ン検定回路によって構成され、前記距離画像測定手段で
測定した距離情報の差に基づいて物体像を抽出し、前記
物体像を規格化した情報を前記パターン検定回路に入力
することによって物体を推定する第一の過程と、前記カ
ラーカメラ画像測定手段で測定した物体像のうち、前記
推定物体の色に含まれる色領域のみを残すことによって
作成したモデルをテンプレートとし、前記テンプレート
とカラーカメラ画像測定手段によるモデルとの一致度を
前記パターン検定回路で検定することによって物体を認
識する第二の過程により物体を認識する三次元物体の自
動認識方法。

【００７１】以上、本発明を前記実施例に基づき具体的
に説明したが、本発明は、前記実施例に限定されるもの
ではなく、その要旨を逸脱しない範囲において種々変更
可能であることは勿論である。

【００７２】

【発明の効果】本願において開示される発明のうち代表
的なものによって得られる効果を簡単に説明すれば、以
下のとおりである。

【００７３】（１）複数の色で構成される物体を、単一
物体として、画像から抽出することが可能になる。

【００７４】（２）色情報を用いているので、照明条件
に寛容であり、また、影に影響されにくい利点がある。

【００７５】（３）距離画像で得た位置情報と向きに関
する情報を利用することができるので、精細なカラー像
に基づくパターン検定が可能になり、極めて精度が高
く、環境にロバストな実用に足る三次元物体認識を達成
することができる。

【図面の簡単な説明】

【図１】 本発明に係る測定系（測定手段）の一実施例
の概略構成を示すブロック図である。

【図２】 本実施例の緑色の蛍光ペンの場合のテンプレ
ートおよびそのカラーモデルを示す図である。

【図３】 本実施例の水色シャープペンシルのクリップ
の向きをカラーモデルと異なえた場合のクリップを左上
向きのテンプレートとカラーモデルと誤差の認識結果を
示す図である。

【図４】 本実施例の水色シャープペンシルのクリップ
の向きをカラーモデルと異なえた場合のクリップが右上
向きのテンプレートとカラーモデルと誤差の認識結果を
示す図である。

【図５】 本実施例の背景色と得られたテンプレートを
示す説明図である。

【図６】 本実施例の動作処理の流れを示すフローチャ
ートである。

【符号の説明】

１…超音波センサアレイ、２…カラービデオカメラ、３
…物体、４…測定面（背景）、５…正規化手段、６…第
１のパターン検定回路、７…色認識手段、８…第２のパ
ターン検定回路、２０Ａ…テンプレート、２０Ｂ…テン
プレートのカラーモデル、３０Ａ…水色シャープペンシ
ル、３０Ｂ…水色シャープペンシルのカラーモデル。

───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.⁷，ＤＢ名) G01B 11/00 - 11/30 102 G01B 17/00 - 21/32 G06T 1/00 G06T 7/00 G06T 7/60

Claims (3)

(57)【特許請求の範囲】
1. 【請求項１】 距離画像測定手段で測定した距離情報の
   差に基づいて物体像を抽出し、前記物体像を規格化した
   情報に基づき物体を推定する第１の過程と、 カラーカメラ画像測定手段で測定した物体像のうち、前
   記推定した物体の色に含まれる色領域のみを残すことに
   よって作成したモデルをテンプレートとし、該テンプレ
   ートと、予めカラーカメラ画像測定手段を用いて作成し
   た前記推定した物体のモデルとの一致度を検定すること
   によって物体を認識する第２の過程とを備えた ことを特
   徴とする三次元物体の自動認識方法。
2. 【請求項２】 観察による距離画像測定手段、カラーカ
   メラ画像測定手段、及び認識するパターン検定手段で構
   成される三次元物体の自動認識装置であって、 前記距離画像測定手段で測定した距離情報の差に基づい
   て物体像を抽出し、前記物体像を規格化した情報を前記
   パターン検定手段に入力することによって物体を推定す
   る物体推定手段と、 前記カラーカメラ画像測定手段で測定した物体像のう
   ち、前記推定した物体の色に含まれる色領域のみを残す
   ことによって作成したモデルをテンプレートとし、当該
   テンプレートと、予めカラーカメラ画像測定手段を用い
   て作成した前記推定した物体のモデルとの一致度を前記
   パターン検定手段で検定することによって物体を認識す
   る物体認識手段とを備えたことを特徴とする三次元物体
   の自動認識装置。
3. 【請求項３】 前記距離画像測定手段としてレーザー光
   切断法、もしくは超音波センサアレイ法を用い、 カメラ画像測定手段として、ビデオカメラ法を用い、 パターン検定手段として、ニューラルネットワーク法も
   しくはテンプレートマッチング法を用いることを特徴と
   する請求項２に記載の 三次元物体の自動認識装置。