JPH08304025A - 矩形荷物の位置計測方法 - Google Patents

矩形荷物の位置計測方法

Info

Publication number
JPH08304025A
JPH08304025A JP10885395A JP10885395A JPH08304025A JP H08304025 A JPH08304025 A JP H08304025A JP 10885395 A JP10885395 A JP 10885395A JP 10885395 A JP10885395 A JP 10885395A JP H08304025 A JPH08304025 A JP H08304025A
Authority
JP
Japan
Prior art keywords
slit light
image
slit
measurement
package
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP10885395A
Other languages
English (en)
Inventor
Eiji Matsukuma
英治 松隈
Naohito Soma
直仁 相馬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Steel Corp
Original Assignee
Nippon Steel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Steel Corp filed Critical Nippon Steel Corp
Priority to JP10885395A priority Critical patent/JPH08304025A/ja
Publication of JPH08304025A publication Critical patent/JPH08304025A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • De-Stacking Of Articles (AREA)

Abstract

(57)【要約】 【目的】 パレットに積載された矩形の荷物の三次元位
置計測のために、比較的簡素な装置構成と計測手法に
て、害乱光に影響されにくく、短時間で精度の良い確実
な計測を行うことが可能な位置計測装置を提供すること
を目的とする。 【構成】 パレット11a、11bに積載された矩形の
荷物13を取出すハンドリング装置1において、線状の
光を照射する少なくとも1台以上のスリット光照射装置
6と、スリット光の波長域のみを透過するフィルタ7
と、そのフィルタを介してスリット光が照射された荷物
の二次元画像を撮像する撮像装置7と、撮像装置7によ
り撮像された画像から矩形荷物13のハンドリング装置
1に対する三次元の相対位置と水平方向の回転角とを画
像演算装置9により計測する。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、パレットに積載された
ダンボール箱のような矩形の荷物を掴み、荷降ろし作業
を行うハンドリング装置において、荷物の積載位置を計
測するための位置計測装置に関する。
【0002】
【従来の技術】パレットに積載されたダンボール箱等の
矩形の荷物を、パレットから降ろしたり、別のパレット
に積み替えるための荷降ろし作業の自動化においては、
ロボットのようなハンドリング装置の利用が行われてき
た。一般に、パレットに積載されている荷物は、同一品
種・同一寸法のものが規定の配置でパレット上に積載さ
れており、予めハンドリング装置にパレット上の各荷物
の積載位置や積載方向を記憶させ、その情報によりハン
ドリング装置の動作制御を行なっている。しかし、パレ
ットに積載されている荷物は、途中の搬送過程による位
置ズレ、パレットのたわみ、また人手作業にてパレット
に積載する場合の積載位置のばらつき等により、規定位
置からの高さ・水平方向の並進ズレや水平方向の回転ズ
レにより、ハンドリング装置で荷物を掴み損ねたり、掴
めても別のパレットに積み替える際に精度良く積載でき
ないため、次の荷物を積載する場合に支障を来すことに
なる。
【0003】そこで、従来、荷物を掴む直前に荷物の位
置を計測して掴み位置を補正する方法として、特開平2
−310214号公報や特開平4−244391号公報
においては、高さ計測センサーによる高さ方向の計測
と、画像計測装置による水平方向の二次元計測とを組合
わせ、荷物の三次元位置を計測してパレットから取出す
ハンドリングロボットが示されている。しかしながら、
これらの計測方法では、高さ計測と二次元計測を別々の
装置構成で行うために制御が複雑であり、画像計測によ
る二次元計測では荷物の輪郭線による計測やパターンマ
ッチング等の手法を用いるために、荷物上面の絵柄によ
り誤検出の恐れがある上に、演算が複雑なために処理時
間も長いものとなっている。また、撮像装置はパレット
全体の広い視野を撮像しているために計測精度が低く、
撮像のために照明装置を施しているものの、太陽光の影
響で昼夜を通して荷物の照度が変化するために安定した
画像が得られないという問題がある。さらに、撮像装置
や照明装置はスタンドに固定して設置しているために、
パレットが供給されるステーションが複数必要な場合は
ステーション毎に撮像装置とスタンドが必要となり不経
済なものとなる。
【0004】その他の従来技術として、特開平6−24
1719号公報ではスリット光を物品に照射したものを
撮像し、物品の寸法情報を用いて物品の位置を計測する
装置が述ベられているが、この方法では物品の水平方向
の位置しか検出しないので、物品の高さ方向の位置が物
品のつぶれやパレットのたわみ等により規定位置からず
れている場合には、そのズレ量に比例して水平方向の計
測誤差が発生する。また、物品の高さ位置を計測できな
いので、パレット上の積載数が正規の数と異なる場合の
荷物の取り出しにおいて、ハンドリング装置が物品に衝
突して、物品やハンドリング装置を損傷する恐れがあ
る。
【0005】
【発明が解決しようとする課題】本発明は、パレットに
積載された矩形の荷物の三次元位置計測のために、比較
的簡素な装置構成と計測手法にて、害乱光に影響されに
くく、短時間で精度の良い確実な計測を行い、かつパレ
ットに積載されている荷物の寸法および数量を検査する
ことが可能な位置計測装置を提供することを課題とす
る。
【0006】
【課題を解決するための手段】本発明による位置計測方
法は、パレットに積載された矩形の荷物を取出すハンド
リング装置に、スリット光を荷物に照射する少なくとも
1台以上のスリット光照射装置と、スリット光照射装置
の上方にあって、該スリット光の波長域のみを透過する
フィルタを介して該スリット光が照射された荷物の二次
元画像を撮像する撮像装置とを設けている。
【0007】撮像した二次元画像を画像演算装置に記憶
し、二次元画像におけるスリット光の撮像位置と荷物上
面輪郭部におけるスリット光の途切れ位置から、三角測
量にもとづく荷物のハンドリング装置に対する高さ方向
および水平方向の位置すなわち三次元位置と、水平方向
の回転角とを計測し、ハンドリング装置に荷物の三次元
位置と水平方向の回転角の情報を与える機能を有してい
る。
【0008】
【作用】少なくともl台以上のスリット光照射装置によ
り荷物に照射されたスリット光を撮像装置にて撮像し、
画像演算装置にて検出した荷物上面におけるスリット光
の照射位置とスリット光の途切れ点から、荷物高さ位置
と水平方向の二次元位置の三次元位置計測、水平方向の
回転角、および荷物の寸法を同時に計測できる。この計
測において、撮像装置を取出す荷物の近くに移動させ荷
物の近傍を撮像しているので、分解能の高い画像が得ら
れ精度良い計測が可能となり、画像演算装置はスリット
光の波長域を透過するフィルタを通して得られたスリッ
ト光のみ検出すればよいので、荷物の絵柄や太陽光・室
内光に左右されず、簡単な演算のため計測処理時間が短
く、確実な計測を行うことができる。また、スリット光
照射装置と撮像装置はハンドリング装置に取付けられて
いるために取出すべきパレットの供給位置が数カ所あっ
ても一組のスリット光照射装置と撮像装置とにより計測
ができる。
【0009】
【実施例】図1は本発明における位置計測装置を含むハ
ンドリングシステムの装置構成を示したものである。ハ
ンドリングシステムは供給パレット4aおよび4bから
荷物を必要な数量だけ取出して、出荷パレット5へ積替
え作業を行うものであり、ハンドリング動作を行うため
のハンド2を有するハンドリングロボットlとそのロボ
ット制御装置3、位置計測装置としてハンド2に取付け
たスリット光照射装置6a、6b、6cの3台とフィル
タ8を有する撮像装置7および画像演算装置9、供給パ
レットが搬入出されるパレットステーションlla、l
lbおよび出荷パレットが供給される出荷パレットステ
ーション12、およびシステム全体を管理する統括制御
装置10より構成される。
【0010】図2はハンドリングシステム全体の処理フ
ローチャートを示したものである。供給パレットll
a、11bの上には各パレット毎に同一品種・同一寸法
の矩形の荷物13が規定の配置で積載されており、供給
パレット4a、4b上の荷物13の積載数と積載位置・
積載方向・寸法は統括制御装置10により管理してい
る。
【0011】供給パレット4a、4bが自動倉庫等(図
示せず)より供給パレットステーションllaまたはl
lbへ供給されると、ハンドリングロボットlを取出す
べき荷物13の上方に移動、停止させる。ここで、スリ
ット光照射装置6a、6b、6cよりレーザースリット
光を荷物13に照射して、撮像装置7にて撮像し、画像
演算装置9にて図3に示すようにハンドリングロボット
lの座標系(x,y,z)における荷物13の上面の三
次元位置X、Y、Zと水平方向の回転角θを求める。次
に、画像演算装置9で求めたX、Y、Z、θ(以下、相
対位置座標と定義する)を統括制御装置10に送り、統
括制御装置10は荷物13の取出し位置となる相対位置
座標と出荷パレット5上の積載位置座標とをロボット制
御装置3に伝送し、ハンドリングロボット1は荷物13
の取出し・積付け動作を行う。これら一連の計測−ハン
ドリング作業を統括制御装置の指示に従い、荷物毎に繰
り返していく。
【0012】次に、図4に示す計測装置の計測処理フロ
ーチャートにもとづき、相対位置座標X、Y、Z、θの
計測方法の詳紬について述べる。ハンドリングロボット
が取出すべき荷物の上方に移動した状態において、ハン
ド2に取付けられた3台のスリット光照射装置6a、6
b、6cから3本のレーザースリット光を照射し、撮像
装置7はスリット光照射装置の上方に取付け、スリット
光照射装置から照射されるスリット光の波長域のみを透
過するフィルタ8を介して、直下方の荷物近傍を視野と
して撮像する。ここで、スリット光照射装置6aは鉛直
方向で撮像装置7の画面に垂直な方向に、スリット光照
射装置6bは斜め方向から撮像装置7の画面に垂直な方
向に、スリット光照射装置6cは鉛直方向で撮像装置7
の画面に水平方向にスリット光が撮像されるように取り
付けており、図5に示すような荷物に対するスリット光
の照射状態が撮像される。撮像されたスリット像l4
a、14b、14c(添字a、b、cはスリット光照射
装置a、b、cに対応)は、撮像装置7をスリット光照
射装置6a、6b、6cの上方に取付けているので、荷
物13と周囲の段差部や隣の荷物との隙間においてスリ
ット像の途切れ15のある状態となり(図6)、また、
レーザー光の波長域のみを透過するフィルタにより室内
照明や太陽光等の外乱光に影響され難く、周囲とのコン
トラストの高いスリット像14a、14b、14cが得
られることになる。また、撮像装置7をハンドリングロ
ボットlのハンド2に取付けており、ハンドリングロボ
ットlを作動させ、撮像装置を荷物13の直近に移動さ
せることにより、パレット全体を視野として撮像する必
要がなく荷物13を大きく撮像することが可能なので、
精度の良い計測が行えることになる。
【0013】このように撮像装置7にて得られた画像は
画像演算装置9に伝送され画像データとして記憶する。
次に、この画像データからスリット光の像のみを抽出す
るようにしきい値を設定して、2値化処理を施し2値画
像を得る。この2値画像から、画像演算装置9の座標系
(x’,y’)、におけるスリット光照射装置6bによ
り斜め方向から照射したスリット像14bの位置Sxと
スリット像14a、14b、14cの各途切れ点、すな
わち荷物13上面の端点[Ax,Ay]、[Bx,B
y]、[Cx,Cy]、[Dx,Dy]、[Ex,E
y]、[Fx,Fy]とを抽出する。以下、これらの抽
出点から、荷物13の相対位置座標X、Y、Z、θと幅
寸法W、長さ寸法Lとを算出する方法を述べる。
【0014】<高さ方向位置Zの算出>先に求めたSx
から、三角測量の原理を用いた次式により高さ方向位置
Zを算出できる。
【0015】Z=β/(Sx+α) ここで、α、βは撮像装置7とスリット光照射装置6b
との位置関係や撮像装置7の視野によって決まる定数で
あり、予め既知の高さ方向位置Z1 、Z2 で観測したス
リット像の位置Sx1 N、Sx2 により次式で設定して
おく。
【0016】 α=(S2 ・Sx2 −S1 ・Sx1 )/(Z1 −Z2 ) β={Sx1 ・Sx2 (Sx2 −Sx1 )}/(Z1
2 ) <水平方向回転角θの算出>[Ax,Ay]、[Bx,
By]の中点[Gx,Gy]と、[Bx,By]、[D
x,Dy]の中点[Hx,Hy]とを通る直線L3
X’軸に対する回転量(左回りを正)として、次式によ
り水平方向回転角θを算出できる。(図7参照) θ=tan-1{(Hy−Gy)/(Hx−Gx)} Gx=(Ax+Bx)/2 Gy=(Ay+By)/2 Hx=(Cx+Cx)/2 Hy=(Dy+Dy)/2 <水平方向位置X、Yの算出>直線L3 と点[Ex,E
y]を通り直線L3 に直交する直線L1 との交点を[I
x,Iy]、直線L3 と点[Fx,Fy]を通り直線L
3 と直交する直線L2との交点を[Jx,Jy]とする
と、荷物13の中心座標[Qx,Qy]は次式により得
られる。
【0017】Qx=(Ix+Jx)/2 Qy=(Iy+Jy)/2 ただし、 Ix=sin2 θ・Gx+cosθ2 ・Ex+sinθ
・cosθ(Ey−Gy) Iy=tanθ(Ix−Gx)+Gy Jx=sin2 θ・Gx+cosθ2 ・Fx+sinθ
・cosθ(Fy−Gy) Jy=tanθ(Jx−Gx)+Gy 画像演算装置9の座標系(x’,y’)における原点
[Ox,Oy](撮像装置直下点)位置のハンドリング
ロボット1の座標系(x,y)に対する位置[Xc,Y
c]とすると、次式により水平方向位置X,Yが算出で
きる。(図8参照) X=γx・Qx/Z+Xc Y=γy・Qy/Z+Yc ここで、γx、γyは画像演算装置9の座標系(x’,
y’)からハンドリングロボット1の座標系(x,y)
への水平、垂直軸方向の変換係数であり、予め既知の位
置X1 ,Y1 ,Z1 に荷物13を配置して[Qx1 ,Q
1 ]を観測して次式により設定しておく。
【0018】γx=Z1 (X1 −Xc)/Qx1 γy−Z1 (Y1 −Yc)/Qy1 このようにして求めた荷物13の相対位置座標X、Y、
Z、θをロボット制御装置3に伝送して、ハンドリング
ロボットlが正確に荷物を掴むための動作制御が可能と
なる。
【0019】また、計測した荷物13の高さ位置Zと計
測結果と統括制御装置に記憶されている正規の荷物高さ
位置とを比較して供給パレット4a、4b上の積載数の
検査、および次式により求められる荷物の寸法W、Lと
正規の荷物寸法とを比較して供給パレット4a、4b上
の荷物の寸法検査を行い、計測値と正規の値とが異なれ
ば警報装置等により異常を知らせることができる。
【0020】W=γy(Ay−By)/cosθ L=γx(Fx−Ex)/cosθ 以上、本実施例は3台のスリット光照射装置を用いた場
合の例について述べたが、1台のスリット光照射装置で
も、ハンドリングロボットを移動、ハンドを旋回させる
ことにより同様の計測を行うことができる。また、4台
以上のスリッ卜光照射装置により、規定位置からのズレ
の大きい荷物や、計測すべき荷物寸法の範囲が広い場合
でも計測を行うことが可能である。
【0021】
【発明の効果】本発明によれば、パレットに積載された
矩形の荷物の位置計測において、以下のような効果を提
供できる。
【0022】(l)スリット光のみを抽出することによ
り三次元の位置計測が可能であり、画像演算による位置
計測を正確に、しかも短時間で行うことができる。
【0023】(2)ハンドリング装置に撮像装置を搭載
しているので、取出す荷物の近傍のみを撮像すればよ
く、精度良い計測が可能である。
【0024】(3)短波長のスリット光を観測するの
で、スリット光のみを透過するフィルタを用いることに
より、害乱光に影響されにくい位置計測装置が実現でき
る。
【0025】(4)荷物を取出すパレットの供給ステー
ションの数によらず、一組の装置構成で計測が可能であ
り低コストの計測装置を実現できる。
【0026】また、本発明によれば、さらに演算して得
られる矩形荷物の幅・長さ寸法、および荷物の高さ方向
の位置との計測情報と、パレットに積載されている荷物
の管理情報とを比較することにより、パレットに積載さ
れている荷物の寸法による品種の検査、および積載数量
を検査できるという効果もある。
【図面の簡単な説明】
【図1】 位置計測装置を含むハンドリングシステムの
装置構成図である。
【図2】 ハンドリングシステム計測装置の全体処理フ
ローチャートである。
【図3】 計測すべき荷物の位置を表す図である。
【図4】 計測装置の計測処理フローチャートである。
【図5】 荷物にレーザスリット光を照射した状態を撮
像した図である。
【図6】 荷物にレーザスリット光を照射した状態を示
した図である。
【図7】 画像演算装置により得られた2値画像を表す
図である。
【図8】 ハンドリングロボットの座標系と画像演算装
置の座標系における計測点の関係を示した図である。
【符号の説明】
1 ハンドリングロボット 2 ハンド 3 ロボット制御装置 4a、4b 供給パレット 5 出荷パレット 6 スリット光照射装置 7 撮像装置 8 フィルタ 9 画像演算装置 10 統括制御装置 11 供給パレットステーション 12 出荷パレットステーション 13 荷物 14 スリット像 15 スリット像の途切れ

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】 パレットに積載された矩形の荷物を取
    出すハンドリング装置に、スリット光を照射する少なく
    とも1台以上のスリット光照射装置と、スリット光照射
    装置の上方にあって、該スリット光の波長域のみを透過
    するフィルタを介して該スリッ卜光が照射された荷物の
    二次元画像を撮像する撮像装置とを設け、得られた二次
    元画像を画像演算装置に記憶し、二次元画像におけるス
    リット光の撮像位置と荷物上面輪郭部におけるスリット
    光の途切れ位置から三角測量にもとづく荷物のハンドリ
    ング装置に対する高さ方向および水平方向の三次元位置
    と、水平方向の回転角とを計測し、ハンドリング装置に
    計測した荷物の三次元位置と水平方向の回転角の情報を
    与えることを特徴とする位置計測方法。
JP10885395A 1995-05-02 1995-05-02 矩形荷物の位置計測方法 Pending JPH08304025A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP10885395A JPH08304025A (ja) 1995-05-02 1995-05-02 矩形荷物の位置計測方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP10885395A JPH08304025A (ja) 1995-05-02 1995-05-02 矩形荷物の位置計測方法

Publications (1)

Publication Number Publication Date
JPH08304025A true JPH08304025A (ja) 1996-11-22

Family

ID=14495262

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10885395A Pending JPH08304025A (ja) 1995-05-02 1995-05-02 矩形荷物の位置計測方法

Country Status (1)

Country Link
JP (1) JPH08304025A (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998043901A1 (en) * 1997-04-01 1998-10-08 R.A. Jones & Co., Inc. Robot controlled work area processing method
JP2001163446A (ja) * 1999-12-10 2001-06-19 Murata Mach Ltd ピックアップ装置
JP2003246452A (ja) * 2002-02-27 2003-09-02 Toyo Glass Co Ltd トップフレーム供給装置
JP2006300929A (ja) * 2005-03-22 2006-11-02 Jfe Engineering Kk 物体の3次元位置認識装置およびデパレタイズシステム
KR20200057040A (ko) 2017-11-08 2020-05-25 히데키 이이노 화물용 식별코드 및 그 표시물 및 그것을 사용하는 로봇핸드
KR20220135733A (ko) * 2021-03-31 2022-10-07 한국로봇융합연구원 Rgb-d 카메라를 이용한 적재 화물의 레이어 분리 장치 및 방법

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998043901A1 (en) * 1997-04-01 1998-10-08 R.A. Jones & Co., Inc. Robot controlled work area processing method
JP2001163446A (ja) * 1999-12-10 2001-06-19 Murata Mach Ltd ピックアップ装置
JP2003246452A (ja) * 2002-02-27 2003-09-02 Toyo Glass Co Ltd トップフレーム供給装置
JP2006300929A (ja) * 2005-03-22 2006-11-02 Jfe Engineering Kk 物体の3次元位置認識装置およびデパレタイズシステム
KR20200057040A (ko) 2017-11-08 2020-05-25 히데키 이이노 화물용 식별코드 및 그 표시물 및 그것을 사용하는 로봇핸드
DE112018005784B4 (de) 2017-11-08 2022-02-03 Hideki Iino Frachtidentifikationscode, Dinge, auf denen Dieser angebracht ist, und dafür nutzbarer Robotergreifer
US11267138B2 (en) 2017-11-08 2022-03-08 Hideki Iino Package identification code, sheet or sticker sheet displaying same, and robot hand used for same
KR20220135733A (ko) * 2021-03-31 2022-10-07 한국로봇융합연구원 Rgb-d 카메라를 이용한 적재 화물의 레이어 분리 장치 및 방법

Similar Documents

Publication Publication Date Title
CN111776759B (zh) 具有自动化包裹登记机构的机器人系统及其操作方法
TWI637455B (zh) 用於片盒夾持的機械手及自動片盒搬運裝置
US20170150129A1 (en) Dimensioning Apparatus and Method
KR101699672B1 (ko) 컨테이너 크레인을 사용하여 랜딩 타깃 상에 컨테이너들을 자동적으로 랜딩하기 위한 방법 및 시스템
JP6466297B2 (ja) 対象物検出装置、方法及びデパレタイズ自動化装置並びに梱包箱
CN109641729B (zh) 锁定设备的探测
US10850923B2 (en) Transporter and transporting method
US5317388A (en) Method and apparatus for determining the displacement of a rectangular object with respect to a reference position
CN105480864A (zh) 一种集装箱起重机自动化检测标定系统及方法
CN107390679A (zh) 存储设备、激光导航叉车
US11370575B2 (en) Robotic labeling system and method of labeling packages
JP2006300929A (ja) 物体の3次元位置認識装置およびデパレタイズシステム
CN111046983A (zh) 标签读取系统
JPH08304025A (ja) 矩形荷物の位置計測方法
JPH09105608A (ja) 荷物の位置計測方法
CN112581519A (zh) 一种放射性废物包识别定位方法与装置
US11820607B2 (en) Systems and methods for die transfer
JP7288231B2 (ja) トラッキング装置、トラッキング方法、およびプログラム
JPH09255158A (ja) 物体配置認識装置
TW202349152A (zh) 物品管理裝置、物品管理方法、物品管理用資料之資料結構、及程式
WO2023233506A1 (ja) 物品管理装置、物品管理方法、物品管理用データのデータ構造、およびプログラム
JPH07171780A (ja) 不整列状態にある長尺ワークの自動ハンドリング方法およびその装置
US20230278221A1 (en) Apparatus and method for automatic pallet builder calibration
JP2022134323A (ja) 情報処理装置、情報処理方法及びプログラム
JPH10118976A (ja) 画像取込み位置設定方法および設定装置

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20020607