JP2896539B2 - 物体の位置、角度等の固有情報の検出方法 - Google Patents

物体の位置、角度等の固有情報の検出方法

Info

Publication number
JP2896539B2
JP2896539B2 JP14702691A JP14702691A JP2896539B2 JP 2896539 B2 JP2896539 B2 JP 2896539B2 JP 14702691 A JP14702691 A JP 14702691A JP 14702691 A JP14702691 A JP 14702691A JP 2896539 B2 JP2896539 B2 JP 2896539B2
Authority
JP
Japan
Prior art keywords
angle
equation
detection
image processing
unique information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP14702691A
Other languages
English (en)
Other versions
JPH04370704A (ja
Inventor
忠雄 三上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Takenaka Komuten Co Ltd
Original Assignee
Takenaka Komuten Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Takenaka Komuten Co Ltd filed Critical Takenaka Komuten Co Ltd
Priority to JP14702691A priority Critical patent/JP2896539B2/ja
Publication of JPH04370704A publication Critical patent/JPH04370704A/ja
Application granted granted Critical
Publication of JP2896539B2 publication Critical patent/JP2896539B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】この発明は、例えばロボットハン
ド又は自動機械等により無作為に置かれた物体の位置及
び角度、その他物体固有の情報(品名、材質、大きさ
(形)、固さ、用途等)を得て、物体を種別毎に選別
し、又は同一種類の物体を検出して重ねたり、あるいは
特定の場所に整列させる所謂ハンドリング処理に応用し
て実施される検出方法に関する。
【0002】
【従来の技術】従来、物体の情報を読みとる方法、装置
としては、次のものが知られている。 (1)バーコードを貼付してこれを読み取る方式。 (2)画像処理装置で物体の辺や頂点等をエッジ処理
し、同物体の位置や角度を検出する方法。 (3)3個の輝点をTVカメラで撮影し、これを画像処
理しコンピュ−タで演算すると共に光波距離計を使用し
て測距し、物体の位置及び姿勢を検出する方法(特開昭
62−293115号公報参照)。 (4)4個の光点を円筒体の一端面に配置し、同円筒の
他端面の中心にも1個の光点を配置したものをターゲッ
トとして物体に取付け、前記のターゲットをTVカメラ
で撮影し画像処理すると共にコンピュータで演算して同
物体の姿勢を検知する方法。(実開昭59−17931
8号公報参照)。
【0003】
【本発明が解決しようとする課題】上記した(1)のバ
ーコードを読み取る方式は、せいぜい物体の品名、価格
等の固有情報が得られるだけで、情報量が少なく、同物
体の位置や角度の情報まで得ることはできない。上記
(2)の方法では、物体の全体が画像の視野に入ること
が必要であり、そのような条件を整えることが難しい。
また、画像情報量も多いので処理に時間がかかるという
問題がある。
【0004】上記(3)の方法では、物体の距離情報を
得るための装置(例えば光波距離計等)が必要である。
また、位置、姿勢以外の情報を得ることはできないか
ら、情報量が不足する。上記(4)の方法は、物体の姿
勢と2次元の位置の検出だけはできるが、それ以上の固
有情報を得ることはできないので、情報量が不足する。
【0005】従って、この発明の目的は、無作為に置か
れた物体の位置、角度(傾き)、その他の物体の多数の
情報(品名、材質、大きさ、形状、固さ等)を、最低4
個のマークから成るターゲット物体で表示し、このター
ゲット部をテレビカメラで撮影した画像の処理とコンピ
ュータによる演算とで検出し、ロボットハンドや自動機
械等で前記物体を移動させ又は整列などさせるハンドリ
ング処理を行なうための情報を与えられる、物体の位
置、角度等の固有情報の検出方法を提供することであ
る。
【0006】
【課題を解決するための手段】上記の目的を達成する手
段として、この発明に係る物体の位置、角度等の固有情
報の検出方法は、図面に実施例を示しているとおり、正
三角形又は二等辺三角形の各頂点に位置せしめた3個の
検出用マーク2a、2b、2cと、その近傍位置に設け
た少なくとも1個の基準点識別用マーク2dとから成る
ターゲット部2を物体1に表示すること、前記物体1の
ターゲット部2をテレビカメラ3で撮影し、前記テレビ
カメラ3の映像は処理装置4で画像処理すること、前記
処理装置4で得た画像処理データに基づくコンピュータ
5の演算処理によって物体1の位置、角度、その他の固
有の情報を得ること、をそれぞれ特徴とする。
【0007】
【作用】テレビカメラ3は物体1の移動経路上に視準線
を持つ配置とし、各物体1に付された3個の検出マーク
2a、2b、2c及び少なくとも1個の基準点識別用マ
ーク2dから成るターゲット部2を順に撮影する。前記
のテレビカメラ3で撮影した3個の検出マーク2a、2
b、2c及び1個の基準点識別用マーク2dから成るタ
ーゲット部2の映像は、処理装置4で画像処理し、三角
形の頂点の各検出マーク2a、2b、2c及び1個の基
準点識別用マーク2dの投影座標を得る。
【0008】物体1の角度には、ヨーイング角(平面内
の回転角)、ピッチング角(前後の傾き角)、ローリン
グ角(左右の傾き角)があり、それぞれの状態に応じ
て、撮影された3個の検出マーク2a、2b、2cと基
準点識別用マーク2dとの位置関係は変化する。前記ヨ
ーイング角、ピッチング角、ローリング角の3要素が複
合して生じている実際の場合は、前記3個のマーク2a
〜2cと基準点識別用マーク2dとの相互位置関係に基
づいて、コンピュータ5が演算して各要素の角度が求め
られる。
【0009】テレビカメラ3の画像面と平行なX、Y平
面のカメラ視準軸gからの位置の検出は、基準点識別用
マーク2dとの関係で特定された1個の検出マーク2a
について計算式で計算される。即ち、1個の検出用マー
ク2aの上下左右の変化量をX、Y座標によって求める
ことにより検出される。テレビカメラ3から特定の検出
用マーク2aまでの距離Lは、テレビカメラ3のレンズ
の画角が一定であるかぎり、画像上の三角形の一辺の長
さの関数として得られる。これは一度テレビカメラ3の
レンズを固定した状態で検定を行なっておけば、実際の
距離が得られるからである。
【0010】物体1の固有情報は、少なくとも1個付さ
れた基準点識別用マーク2dから前記特定の1個の検出
用マーク2aまでの距離S、又はこれら二つのマーク2
aと2dがなす角度b、あるいは前記Sとbの複合とし
て画像処理装置4で画像処理した値を用いて得られる。
この固有情報は、基準点識別用マーク2dが1個であっ
ても、画像処理装置4の分解能力の範囲で判別できるか
ぎり、かなりの情報量を検出できる。基準点識別用マー
ク2dの個数を必要に応じて増やせば、実用上問題無い
範囲で一層たくさんの固有情報を検出できる。
【0011】
【実施例】次に、図示した本発明の実施例を説明する。
図1は、この発明に係る検出方法の全体構成の概念図を
示している。図中1は矢印K方向に移動する物体であ
る。図中2は前記物体1に設けた最低4個のマークから
成るターゲット部、3は物体1の移動経路上に視準線を
もつように設置されたテレビカメラ、4は画像処理装
置、5はコンピュータである。
【0012】ターゲット部2は、図2Aに示したような
正三角形(又は図示を省略した二等辺三角形でも可)の
各頂点に位置せしめた3個の検出用マーク2a、2b、
2cと、その近傍位置に設けた1個の基準点識別用マー
ク2dとで構成されている。基準点識別用マーク2d
は、3点の検出用マーク2a、2b、2cにおける特定
の1個のマーク2aとの関係を決定するため、及び同物
体1の固有情報(例えば品名、大きさ、材質、固さ等)
を示すために設けられている。これら4個のマーク2
a、2b、2c、2dから成るターゲット部2は、物体
1の表面に印刷物として貼り付けたり、又はペイントす
る等の方法により設けられる。
【0013】図2A、Bは上記ターゲット部2を構成す
る4個のマーク2a〜2dの配置態様の例を示してい
る。図2Aは、正三角形の頂点を表わす3個の検出用マ
ーク2a、2b、2cの内、特定の1個の検出用マーク
2aと基準点識別用マーク2dとが距離Sだけ離して物
体1の中心線a上に並設されている場合を示している。
図2Bは、特定の1個の検出用マーク2aと基準点識別
用マーク2dとは距離Sだけ離すと共に物体1の中心線
a上の検出用マーク2aの位置に対し基準点識別用マー
ク2dが角度bだけ横方向へ偏位して設けられた場合を
示している。つまり、前記距離Sの大小及び、角度bの
大小並びに両者の組合わせの如何により、物体1につい
てたくさんの固有情報を作れるという訳である。
【0014】図3は物体1の角度要素について示してい
る。物体1には、図中に矢印で示したような前後の傾き
c⌒c’(ピッチング角)と、左右の傾きd⌒d’(ロ
ーリング角、及び平面内の回転e⌒e’(ヨーイング
角)が生ずる。テレビカメラ3は、上記した3個の検出
用マーク2a、2b、2cの様々な位置変化を撮影し、
このテレビカメラ3がとらえた3個の検出用マーク2
a、2b、2cの位置映像は図4A、Bに示した画像処
理装置4へ送る。この処理装置4で画像処理した前記3
個の検出用マーク2a、2b、2cの画像処理データ
(座標位置)はコンピュータ5へ出力される。前記テレ
ビカメラ3により撮影したターゲット部2の画像は、処
理装置4の画像処理画面において、当該テレビカメラ3
との位置の遠近によって図4A、Bに示したように小さ
く又は大きく検出され、カメラ3までの距離に換算され
る。
【0015】(演算処理方法について)図5において、
1 、P2 、P3 は空間上に正三角形に配置された3個
の検出用マーク(前記2a〜2cに相当するもの)であ
り、P1′、P2′、P3′はX−Y平面上に投影された
前記3個の検出用マークの位置であり、そのX−Y座標
は画像処理装置4で得られる。
【0016】まずP1′、P2′、P3′の座標値からP
1 、P2 、P3 の座標値を求める。既に述べたように、
Lはテレビカメラ3と特定の検出用マーク2a間の距
離、αは水平角、βは垂直角、LLは三角形の一辺の長
さを示す。P1 (P1′)を原点とした時のP
2(P2′)、及びP3(P3′)の座標位置関係は、次
の、
【0017】
【数1】
【0018】
【数2】
【0019】
【数3】 で求められる。
【0020】画像処理装置4で得られたX2 、Y2 及び
3 、Y3 に基づいて、Z2 、Z3 が次の、
【0021】
【数4】
【0022】
【数5】 で求められる。ただし、上式におけるα、β、γは、次
の、
【0023】
【数6】
【0024】
【数7】
【0025】
【数8】 により表わされる。次に、画像処理装置4上の正三角形
の一辺の長さLLを求める。
【0026】前記のΔP1 2 3 において、LLは次
の、
【0027】
【数9】 で求められる。 (物体の角度の検出について)物体1の角度、姿勢は、
ピッチング角、ローリング角、ヨーイング角から得られ
る。 (1)ピッチング角PPの計算法 図5に示したように、ピッチング角PPは、ΔP1 2
3 の頂点P1 と線分P2 −P3 の中点M′をむすぶ線
分P1 −MとX−Y平面とがなす角である。
【0028】線分P1 −Mは次の、
【0029】
【数10】 で求められる。線分M−M′は次の、
【0030】
【数11】 のように計算される。従って、ピッチング角PPは、次
の、
【0031】
【数12】 で求められる。 (2)ヨーイング角YYの計算法 図5に示したように、ヨーイング角YYは、ΔP1 2
3 をX−Z平面に投影して出来たΔP1 2″P3″の
頂点P1 と線分P2″−P3″の中心Mをむすぶ線分P1
−MがZ軸となす角である。
【0032】X−Y平面上において、P2″点とP3″点
の座標位置は、次の、
【0033】
【数13】
【0034】
【数14】 で表わされる。従って、M点とヨーイング角YYは、次
の、
【0035】
【数15】
【0036】
【数16】 で求められる。 (3)ローリング角RRの計算法 ローリング角RRは、図6に示したように、P1 を中心
にヨーイング角YY及びピッチング角PPをそれぞれゼ
ロに戻したときのP2 、P3 の座標より得られる。X−
Y平面において、P1 を中心にP2 、P3 をヨーイング
角YYだけ回転させたときの点をP2 、P3 とし、その
座標P2 3′、P3 3′は、次の、
【0037】
【数17】
【0038】
【数18】 で表わす。すると、X2′、Z2′、X3′、Z3′は、次
の、
【0039】
【数19】
【0040】
【数20】
【0041】
【数21】
【0042】
【数22】 で表わされる。かくして求めたP2 、P3 を、Y−Z平
面においてピッチング角PPだけ回転
【0043】させたときのP2 、P3 の座標P2 4′、P
3 4′は、次の、
【0044】
【数23】
【0045】
【数24】 で表わされる。そうすると、Y2″、Z2″、Y3″、
3″は次の、
【0046】
【数25】
【0047】
【数26】
【0048】
【数27】
【0049】
【数28】 で表わされる。かくして求めたP2 、P3 は、ヨーイン
グ角、ピッチング角の成分を含まない点なので、ローリ
ング角RRは次の、
【0050】
【数29】 で求められる。物体1の中心線aに対する傾き角bは、
以上の計算式で得られた値と、テレビカメラ3の視準線
g(図1及び図4に示す)の計画線に対する水平及び垂
直振り角により計算される。 (物体の位置の検出について)ターゲット部2の上下、
左右の移動量は、前記P1 点のX−Y座標によって求め
られる。実際のターゲット部2の正三角形の一辺の長さ
をLLとすると、画像処理装置4上の単位あたりの長さ
は、次の、
【0051】
【数30】 で求められる。従って、ターゲット部2の変位量X、Y
は次の、
【0052】
【数31】
【0053】
【数32】 で求められる。また、テレビカメラ3から特定の検出用
マーク2aまでの距離Lは、カメラの
【0054】レンズの画角が一定であれば、次の、
【0055】
【数33】 の如く画像上の三角形の一辺の長さLLの関数として得
られる。 (物体の固有情報の検出について)図2A、Bに示した
ように、物体1の固有情報は、正三角形の頂点を表わす
3個の検出用マーク2a、2b、2cの中で特定された
1個のマーク2aと、少なくとも1個の基準点識別用マ
ーク2dとの距離S、又は角度bの大きさ、あるいはこ
れらSとbの複合として画像処理した値を用いて判別す
ることができる。例えば、上記両マーク2a、2d間の
距離がS=10mmで、角度がb=5゜の場合は、「一辺
3mの立方体で材質はプラスチックである」と言うよう
な情報が与えられる。この情報は、基準点識別用マーク
2dが1点であっても、画像処理装置4の分解能力の範
囲内でSとbの大きさは多様に判別でき、それだけ多数
の情報量を検出できる訳である。従って、基準点識別用
マーク2dの数を必要に応じて増やせば、情報量を飛躍
的に増加することが可能である。
【0056】
【本発明が奏する効果】本発明に係る物体の位置、角度
等の固有情報の検出方法によれば、物体1の位置、角度
及び同物体に固有の色々な情報を自動的に迅速に的確に
得ることができるから、例えばロボットハンドの先にテ
レビカメラ3を設置し、無作為に置かれた物体1のター
ゲット部2を撮影することにより、同物体1の位置、角
度及びその他の固有情報を検出し、例えば同一種類の物
体1を重ねたり、ある場所に整列させたりすることを自
動で行なえるようになる。従って、高精度かつ能率的な
物体の自動的処理(自動的ハンドリング)に寄与するの
である。
【図面の簡単な説明】
【図1】本発明に係る移動物体の位置、角度及び固有情
報の検出装置全体の構成を概念的に示した説明図であ
る。
【図2】A、Bはターゲット部の構成態様の例を示した
平面図である。
【図3】物体に実際に生じるピッチング角、ローリング
角及びヨーイング角を示した説明図である。
【図4】A、Bは本発明の検出方法におけるテレビカメ
ラと検出用マーク及び画像処理装置のモニターテレビ画
面の基本的配置を示した説明図である。
【図5】物体のピッチング角とヨーイング角を演算する
ために検出用マークの画像処理の要領を示した説明図で
ある。
【図6】物体のローリング角を演算するために検出用マ
ークの画像処理の要領を示した説明図である。
【符号の説明】
1 物体 2 ターゲット部 2a、2b、2c 検出用マーク 2d 基準点識別用マーク 3 テレビカメラ 4 画像処理装置 5 コンピュータ
フロントページの続き (58)調査した分野(Int.Cl.6,DB名) G01B 11/00 - 11/30 102 G01C 15/00 - 15/14 G06T 7/00

Claims (1)

    (57)【特許請求の範囲】
  1. 【請求項1】 正三角形又は二等辺三角形の各頂点に位
    置せしめた3個の検出用マークと、その近傍位置に設け
    た少なくとも1個の基準点識別用マークから成るターゲ
    ット部を物体に表示すること、前記物体のターゲット部
    をテレビカメラで撮影し、前記テレビカメラの映像は処
    理装置で画像処理すること、前記処理装置で得た画像処
    理データに基づくコンピュータの演算処理によって物体
    の位置、角度、その他の固有情報を得ること、をそれぞ
    れ特徴とする、物体の位置、角度等の固有情報の検出方
JP14702691A 1991-06-19 1991-06-19 物体の位置、角度等の固有情報の検出方法 Expired - Fee Related JP2896539B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP14702691A JP2896539B2 (ja) 1991-06-19 1991-06-19 物体の位置、角度等の固有情報の検出方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP14702691A JP2896539B2 (ja) 1991-06-19 1991-06-19 物体の位置、角度等の固有情報の検出方法

Publications (2)

Publication Number Publication Date
JPH04370704A JPH04370704A (ja) 1992-12-24
JP2896539B2 true JP2896539B2 (ja) 1999-05-31

Family

ID=15420867

Family Applications (1)

Application Number Title Priority Date Filing Date
JP14702691A Expired - Fee Related JP2896539B2 (ja) 1991-06-19 1991-06-19 物体の位置、角度等の固有情報の検出方法

Country Status (1)

Country Link
JP (1) JP2896539B2 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6061644A (en) * 1997-12-05 2000-05-09 Northern Digital Incorporated System for determining the spatial position and orientation of a body
JP2000326082A (ja) * 1999-05-20 2000-11-28 Sumitomo Heavy Ind Ltd レーザ加工機
JP2004093265A (ja) 2002-08-30 2004-03-25 Fujitsu Ltd 位置検出装置及びライブラリ装置
DE102004005380A1 (de) * 2004-02-03 2005-09-01 Isra Vision Systems Ag Verfahren zur Bestimmung der Lage eines Objekts im Raum
JP4799088B2 (ja) * 2005-09-06 2011-10-19 株式会社東芝 遠隔検査における作業位置計測方法およびその装置
JP4530011B2 (ja) 2007-09-12 2010-08-25 富士ゼロックス株式会社 位置計測システム
JP5245345B2 (ja) * 2007-10-10 2013-07-24 富士ゼロックス株式会社 対象物認識装置、認識対象物およびプログラム
JP5217898B2 (ja) * 2008-10-24 2013-06-19 富士ゼロックス株式会社 位置計測装置およびプログラム
JP2010243405A (ja) * 2009-04-08 2010-10-28 Hiroshima Univ 画像処理用マーカー、それが表示された対象物の位置及び姿勢を検出するための画像処理装置及び画像処理プログラム

Also Published As

Publication number Publication date
JPH04370704A (ja) 1992-12-24

Similar Documents

Publication Publication Date Title
US10825198B2 (en) 3 dimensional coordinates calculating apparatus, 3 dimensional coordinates calculating method, 3 dimensional distance measuring apparatus and 3 dimensional distance measuring method using images
US8208029B2 (en) Method and system for calibrating camera with rectification homography of imaged parallelogram
JP3426459B2 (ja) 写真測量システムおよび写真測量方法
US9020240B2 (en) Method and surveying system for noncontact coordinate measurement on an object surface
US7116818B2 (en) Image forming apparatus, image forming method and computer-readable storage medium having an image forming program
US7310431B2 (en) Optical methods for remotely measuring objects
US7206080B2 (en) Surface shape measurement apparatus, surface shape measurement method, surface state graphic apparatus
Reid Projective calibration of a laser-stripe range finder
US9182220B2 (en) Image photographing device and method for three-dimensional measurement
JP2010008352A (ja) 寸法測定方法及び寸法測定装置
US6304669B1 (en) Photogrammetric analytical measurement system
JP2007147522A (ja) 写真計測方法及び写真計測プログラム
JPH11166818A (ja) 三次元形状計測装置の校正方法及び校正装置
JP2896539B2 (ja) 物体の位置、角度等の固有情報の検出方法
JP3690581B2 (ja) 位置検出装置及びその方法、平面姿勢検出装置及びその方法
JP2003042732A (ja) 表面形状測定装置及びその方法、表面形状測定プログラム、並びに表面状態図化装置
US6917700B2 (en) Method and apparatus for the determination of the contour of sheet metal blanks
CN107907055A (zh) 图案投射模组、三维信息获取系统、处理装置及测量方法
JP3842988B2 (ja) 両眼立体視によって物体の3次元情報を計測する画像処理装置およびその方法又は計測のプログラムを記録した記録媒体
JP3696336B2 (ja) カメラのキャリブレーション方法
JP2003065737A (ja) 表面形状測定装置及びその方法、並びに表面状態図化装置
EP0587328A2 (en) An image processing system
CN207600393U (zh) 图案投射模组、三维信息获取系统及处理装置
JP3696335B2 (ja) 複数枚の画像の各計測点の対応づけ方法
JP2980194B2 (ja) 鉄筋の配筋位置及び姿勢の計測方法及び装置

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees