JPH01265372A - 視覚センサシステムにおける画像処理方式 - Google Patents

視覚センサシステムにおける画像処理方式

Info

Publication number
JPH01265372A
JPH01265372A JP63092677A JP9267788A JPH01265372A JP H01265372 A JPH01265372 A JP H01265372A JP 63092677 A JP63092677 A JP 63092677A JP 9267788 A JP9267788 A JP 9267788A JP H01265372 A JPH01265372 A JP H01265372A
Authority
JP
Japan
Prior art keywords
image
stored
failure
memory
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP63092677A
Other languages
English (en)
Other versions
JP2950544B2 (ja
Inventor
Atsushi Watanabe
淳 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fanuc Corp
Original Assignee
Fanuc Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fanuc Corp filed Critical Fanuc Corp
Priority to JP63092677A priority Critical patent/JP2950544B2/ja
Publication of JPH01265372A publication Critical patent/JPH01265372A/ja
Application granted granted Critical
Publication of JP2950544B2 publication Critical patent/JP2950544B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Manipulator (AREA)
  • Processing Or Creating Images (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 産業上の利用分野 本発明は、産業用ロボット等の視覚として利用される視
覚センサシステムに関するものである。
従来の技術 視覚センナシステムは、画像処理プログラムを稼!II
IJさけ、ロボット等が取扱う部品等の対象物が置かれ
ている所定領域の画像をカメラでとらえ、画像処理を行
って、部品等の対象物の種類判別や対象物の位置姿勢の
計測を行うものであるが、何らかの原因、例えば設定探
索・フィンドウ内に対象物全体が入らない場合、対染物
が汚れていた場合等で対象物を認識できなかったとき、
通常、ロボットは連続運転を行っているので、Aベレー
タはその原因を追求することなく作業を一時停止させ、
作業を修正して、【コボットを再スタートさせている。
発明が解決しようとする課題 何らかの原因C部品等の対象物を認識できなかった場合
、その原因を調査するには、従来の視覚センサシステム
にJ3いては、現在行っている作業を中止して再度対客
物をカメラでとられて画@処理を行わねばならない。し
かし、特にT揚現揚等では画像処理プログラムを連続的
に稼動させて、順次送られてくる部品専の対象物を認識
させ、その対象物の位置等を順次ロボット等に送信しロ
ボット等の駆動を制御しでおり、該視覚センサシステム
が対象物を認識できなかった場合、オペレータが作業を
手動で修正し、通常ラインを停止さけることは行わない
。その結果、視覚センサがなぜ対象物を認識Cきなかっ
たか、その原因を調査1”ることが不可能であった。
そこで、本発明の目的は、視覚センサシステムにおいて
、対象物を認識できなかったとき、任意の時間に、対象
物を認識できイ≧かった原因を調査することができる視
覚センサにおける画像処理方式を提供することにある。
課題を解決するたダ)の手段 上記課題を解決するために、本発明は、フレームメモリ
に格納された画像を1以上格納できる画像保存メモリを
設け、画像処理で対象物の認識に失敗したどき、フレー
ムメモリに記憶された画像を上記画像保存メモリに転送
して格納し、対象物の認識失敗の原因調査時には、画像
保存メモリに記憶づる画像をフレームメモリに転送して
失敗原因調査できるように構成した。
作  用 視覚レンリシスデムでは、カメラでとられた画像をフレ
ーモス七りに格納し、該格納された画像に対し画像処理
を行って対象物の位置、姿勢等を認識検出し、該データ
を1]ボツ]〜等に遂信する。
一方、何らかの原因ににって上記画像処理により対象物
を認識できなかったとき、そのときのフレームメモリ内
に格納されている画像を画像保存メモリに転送し、格納
しておき、対象物の認識失敗原因調査時には、上記画像
保存メモリに格納されている画像を再びフレームメモリ
に転送し、このフレームメモリに転送された画像によっ
て対象物の認識失敗原因調査を行う。
実施例 第2図は、本発明の一実施例を実施する視覚センサシス
テムの要部ブI〕ツク図である。
図中、10は画像処理装置で、該画像処理Vt置10は
主中火処理¥を置(以下、メインCPUという)11を
有し、該メインCPL111には、カメラインクフェイ
ス121画像処理プロセッサ13゜コンソールインタフ
ェイス14.TVモニタインタフェイス15.フレーム
メモリ161画像保存メモリ17.ROMで形成された
コントロールソフト用メモリ18.RAM?7で構成さ
れたプログラムメモリ191通信インタフェイス20が
バス21で接続されている。
カメラインタフェイス12には部品等の対象物を囮影す
るカメラ22が接続され、該カメラ22の視野でとらえ
られた画像は、グレイスケールによる濃淡画像に変換さ
れてフレームスtす16に格納される。
画像処理プロセッサ13はフレームメモリ16に格納さ
れた画像を処理し対象物の識別0位置。
姿勢を計81IIする。
コンソールインタフェイス14にはコンソール23が接
続され、該コンソール23は、液晶表示部の外、各秤指
令キー、アプリケーションプログラムの入力1編集、登
録、実行などの操作を行うための数字キー等を有してお
り、上記液晶表示部には、各種データ設定のためのメニ
ューやアプリケーションプログラムのリストなどを表示
できるようになっている。
TVモニタインタフェイス15にはモニタブレビ24が
接続され、該モニタブレビ24にはフレーモス七り16
に格納されている画像及びカメラ22がとらえる生の映
像を表示できるようにしている。
又、コントロールソフト用メモリ18にはメインCPU
11が該視覚センサシスデムを制御するためのコントl
コールプログラムが格納されており、又、プログラムメ
モリ19にはユーザが作成するアプリケーションプログ
ラムが格納されている。
通信インタフェイス20にはロボット等の該61覚レン
ザシステムを利用するシステムに接続されている。
以上の構成は、従来の視覚センサシステムの構成と同様
であるが、本発明においては、画像保存メモリ17が付
加されている点において、従来のらのと責なる。該画像
保存メモリ17は、バブルメモリや、バックアップ回路
を設けたC−MOSメモリ等の不揮発性のメ[りで構成
され、フレームメモリ16に格納された画像を記憶保存
する退避フレームメ七りを複数枚設けられている。なお
、本実施例では、2枚の退避フレームメモリ有している
次に、本実施例の動作を第1図に丞す処理フローチl?
−トと共に説明する。
通信インタフェイス20を介して、外部から画像処理起
動指令が入力されると、メインCPU11は、プログラ
ムメモリ19に格納された画像処理プログラムを起動し
、まずカメラ22に対し画像スナップ指令を出力し、画
像処理プロセラ1ノ13でスナップされた画像をフレー
ムメモリ16にグレイスケール濃淡処理後の画像を格納
する(ステップ31)。次に、メインCPU11は、画
像処理プロセッサ13に対象物検出指令を出ツノしくス
テップS2)、該指令を受けて画像処理プロセッサ13
はフレームメモリ16に格納された画像に対し画像処理
を行い、対象物を認識し、対染物の位置、姿勢、検出を
行、う。この画像処理は従来と同じで、微分等の処理を
行い、対象物の輪郭を強調し、テンプレートで照合し、
照合度の最大値とその位置、姿勢を出力する。CPU1
1は出力された照合度の最大値と基準値を比較し、基準
値以上ぐあれば対象物を検出したとして(ステップS3
)、その位置、姿勢を視覚センサの座標系から[]ボッ
l−座標系に変換しくステップ34)、該位置情報を通
信インタフェイス20を介してロボットに送信する(ス
テップ35)。
一方、ステップS3で対象物を検出しなかったとき、即
ち、照合度の最大値が!工準値以下であると対象物を検
出できなかったとして、まず、画像保存メモリ17の退
避フレームメモリ#2に退避フレームメモリ#1に格納
されている画像を転送格納し、退避フレームメモリ#1
にフレームス[す16に格納されでいる画像を転送し格
納する(ステップ36.87)。そして、対象物検出に
失敗した旨の表示をT V T−ニタ24に表示するど
共に、検出失敗信号を通信インクフェイス20を介して
ロボットに送信する(ステップS8.S9)以上の処理
を外部から画像処理起動指令が入力される石に行い、対
象物の検出を失敗した場合、順次画像保存メモリ17の
退避フレームメモリ#1.#2に対象物検出失敗の画像
を保存する。
イして、対象物検出失敗の原因を調査Jるときには、コ
ンソール23を操作して、画像保存メモリ17の退避フ
レームメモリ#1又は#2に保存されている画像をフレ
ームメモリ16に転送し、TVモニタ24に該画像を描
画させ検出失敗の原因を調査する。この際、該フレーム
メモリ16に格納した画像に対し、再度画像処理を行い
、この際グレイスケールl11度変換1画像ぼかし、エ
ツジ強調などの画像前処理を行って画像処理を行う。
イして、その結果がどのように変化するかを見ることに
より対象物検出失敗の原因調査を行う。
なお、上記実施例では、画像保存メモリ17に2枚の画
像を保存するために、2枚のA避フレームメモリを設け
/Cが、退避フレームメモリの数は1枚でも又は2枚以
上でもにり、多数YQGプだ場合は、各退避フレームメ
モリに循環して対象物の検出を失敗した画像を格納する
ようにすればJ:い。
又、V記実施例では、フレームス[す16と画像保存メ
七り17の退避フレームスtり間の画像の転送をメイン
CPU11で行うようにしたが、第2図の破線で示すよ
うに、画像転送用のDMΔ]ン1−〇−ラ(ダイレクト
メモリアクレスコント°ローラ)を設置−1、該DMA
コントローラにJ、って高速に画像を転送するようにし
てbよい。
発明の効果 工場等で稼動している視覚セン1Jシステムにa3いて
tよ、画像処理で何らかの原因で対象物の認識の失敗が
生じたとき、従来は、その認識失敗の原因調査は作集う
インを停止さけて行なうしかなく、そのため原因調査は
、はとんど不可能であった。
しかし、本発明においては、対象物の認識の失敗が生じ
ても、そのときの画像が保存されているので作業ライン
が停止しているとぎに保存されている画像を呼び出し、
これに基づいて原因調査ができるので、作業ラインや、
視覚センサシステムの改善が図られ、作業効率を上げる
ことができる。
【図面の簡単な説明】
第1図は本発明の一実施例における動作処理フローチャ
ート、第2図は同一実施例の視覚センサシスデムの要部
ブロック図である。 10・・・画像処理装置、21・・・バス、22・・・
カメラ。 第 1 図

Claims (1)

    【特許請求の範囲】
  1. 視覚センサシステムにおいて、フレームメモリに格納さ
    れた画像を1以上格納できる画像保存メモリを設け、画
    像処理で対象物の認識に失敗したとき、フレームメモリ
    に記憶された画像を上記画像保存メモリに転送して格納
    し、対象物の認識失敗の原因調査時には、画像保存メモ
    リに記憶する画像をフレームメモリに転送して失敗原因
    調査を行うようにした視覚センサシステムにおける画像
    処理方式。
JP63092677A 1988-04-16 1988-04-16 視覚センサシステムにおける画像処理方法 Expired - Lifetime JP2950544B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP63092677A JP2950544B2 (ja) 1988-04-16 1988-04-16 視覚センサシステムにおける画像処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP63092677A JP2950544B2 (ja) 1988-04-16 1988-04-16 視覚センサシステムにおける画像処理方法

Publications (2)

Publication Number Publication Date
JPH01265372A true JPH01265372A (ja) 1989-10-23
JP2950544B2 JP2950544B2 (ja) 1999-09-20

Family

ID=14061117

Family Applications (1)

Application Number Title Priority Date Filing Date
JP63092677A Expired - Lifetime JP2950544B2 (ja) 1988-04-16 1988-04-16 視覚センサシステムにおける画像処理方法

Country Status (1)

Country Link
JP (1) JP2950544B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022181595A1 (ja) * 2021-02-26 2022-09-01 ファナック株式会社 産業機械システム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6015512A (ja) * 1983-07-08 1985-01-26 Toshiba Corp プラント監視表示装置
JPS61226289A (ja) * 1985-03-29 1986-10-08 株式会社神戸製鋼所 ロボツト・マニピユレ−タの診断装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6015512A (ja) * 1983-07-08 1985-01-26 Toshiba Corp プラント監視表示装置
JPS61226289A (ja) * 1985-03-29 1986-10-08 株式会社神戸製鋼所 ロボツト・マニピユレ−タの診断装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022181595A1 (ja) * 2021-02-26 2022-09-01 ファナック株式会社 産業機械システム

Also Published As

Publication number Publication date
JP2950544B2 (ja) 1999-09-20

Similar Documents

Publication Publication Date Title
JP2700965B2 (ja) 自動キャリブレーション方式
JP3394278B2 (ja) 視覚センサ座標系設定治具及び設定方法
JPH0213804A (ja) 視覚センサにおけるノミナル設定方式
EP1080447B1 (en) Image processing inspection apparatus
JPH0460817A (ja) カメラの位置ずれ検出方法
JPH01265372A (ja) 視覚センサシステムにおける画像処理方式
CN115398364B (zh) 数控装置及数控系统
JPH0535323A (ja) Nc装置
JP2921718B2 (ja) 産業用視覚センサにおける画像処理方法
JPH08285526A (ja) 画像認識方式
JPH06259530A (ja) 円形穴の認識方法
JPS60194303A (ja) 視覚センサ処理装置における物体の姿勢判定装置
JPH02276901A (ja) 視覚センサの位置ズレ修正方法
JPH0821081B2 (ja) ウィンドウの制御方法
JPH05301195A (ja) 視覚センサにおけるカメラ位置ずれ検出方法
JPS6186830A (ja) デ−タ処理方式
US20230311308A1 (en) Machine-learning device
JPH08272424A (ja) 産業用ロボットの数値制御装置
JPH02105001A (ja) 視覚センサ
JPH05237782A (ja) ワーク保持位置設定方法およびその装置
JPH01307880A (ja) 画像認識装置
JPS63318286A (ja) 産業用ロボットの視覚センサ
JPS62286107A (ja) ビジユアルパレタイジング方式
JPH05127715A (ja) 視覚センサにおける検出プログラム自動調整方法
JPH0259974A (ja) グレイスケール画像処理における可変濃淡制限フィルター

Legal Events

Date Code Title Description
R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080709

Year of fee payment: 9

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080709

Year of fee payment: 9