JP2003098098A - 画像処理装置および画像処理システム - Google Patents

画像処理装置および画像処理システム

Info

Publication number
JP2003098098A
JP2003098098A JP2001289448A JP2001289448A JP2003098098A JP 2003098098 A JP2003098098 A JP 2003098098A JP 2001289448 A JP2001289448 A JP 2001289448A JP 2001289448 A JP2001289448 A JP 2001289448A JP 2003098098 A JP2003098098 A JP 2003098098A
Authority
JP
Japan
Prior art keywords
image
image processing
image data
processing unit
central processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001289448A
Other languages
English (en)
Other versions
JP4473479B2 (ja
Inventor
Yoshihiko Sugimoto
義彦 杉本
Mitsuru Shirasawa
満 白澤
Takeshi Masuda
剛 増田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Electric Works Co Ltd
Original Assignee
Matsushita Electric Works Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Works Ltd filed Critical Matsushita Electric Works Ltd
Priority to JP2001289448A priority Critical patent/JP4473479B2/ja
Publication of JP2003098098A publication Critical patent/JP2003098098A/ja
Application granted granted Critical
Publication of JP4473479B2 publication Critical patent/JP4473479B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Input (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

(57)【要約】 【課題】 画像処理を止めたりあるいは遅らせたりする
ことなく、画像処理に使用された画像データを出力す
る。 【解決手段】 カメラ3から画像データを得る画像入力
インターフェース101と、その画像データを記憶する
VRAM153と、これに接続されたCPU160およ
びメインメモリ161とにより成る画像処理装置に対
し、画像入力インターフェース101からの画像データ
記憶するVRAM105と、これに接続されたCPU1
30およびメインメモリ131と、CPU160とCP
U130との間に介設され、これらの間でやりとりされ
る情報の転送を行うデュアルポートメモリ135とを備
えた。CPU160は、VRAM153に記憶された画
像データを用いて画像処理を実行して外観検査測定を行
う一方、CPU130は、VRAM105に記憶された
画像データの出力処理を実行する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、例えば製造ライン
において、製造物などの検査対象の外観検査測定に使用
される画像処理装置および画像処理システムに関するも
のである。
【0002】
【従来の技術】上記外観検査測定には、検査対象の外観
検査、寸法、形状、位置などの測定、傷クラック検査、
文字検査などが含まれるが、このような外観検査測定
で、良品または不良品の判定結果となった検査対象の良
品画像または不良品画像を画像処理装置から出力する必
要が多々生じる。どのような場合に画像データを出力す
る必要があるかについては、例えば、上記判定の基準品
と実際の検査対象との差が製造上の誤差などによる若干
の差であるときに、本来良品とすべきところ不良品の判
定結果となってしまった場合、どのような画像処理で不
良品の判定結果となったのかを調査する必要が生じた場
合、以前の設定についてどのような画像処理で例えば良
品としていたのかを調査する必要が生じた場合などが挙
げられる。
【0003】しかし、製造では、決められた一定水準以
上の生産性を確保する必要があるのであるが、画像処理
による外観検査測定の結果の善し悪しで、良品画像また
は不良品画像の画像データを画像処理装置から得るため
に画像処理を止めたり、あるいは遅らせたりすると、検
査対象の製造物を製造するための一連の作業が遅れ、全
体の生産効率が下がり、この結果、上記一定水準以上の
生産性を確保することができなくなる。
【0004】このため、製造中に画像処理を止めたりあ
るいは遅らせたりすることなく、画像処理に使用された
画像データを出力させる仕組みが望まれる。画像データ
を出力することについては、例えばパソコン(パーソナ
ル・コンピュータ)で読み込める形態でSDカードなど
の記憶媒体に書込み出力する構成でも、通信インターフ
ェースを介してパソコンに送信出力する構成でもどちら
でも構わない。また、画像データを出力する際に、対応
する各種パラメータや外観検査測定の結果も同時に出力
することができるようにすることが望ましい。このよう
にすれば、製造中に画像処理を止めたりあるいは遅らせ
たりすることなく、画像処理に使用された画像データを
取り出して、製造と平行しながら、別のパソコンで画像
処理の内容を解析したり、確認したりすることができ
る。
【0005】なお、特開平10−78308号公報に
は、撮像により得た画像データを部品が変わる度に所定
の記憶領域に交互に取り込んで記憶することにより、電
子部品の外観検査を高速なタクトタイムで実施できる電
子部品の外観検査装置が開示されている。
【0006】
【発明が解決しようとする課題】しかしながら、画像デ
ータの情報量が大きく、その画像データの出力に時間が
かかることが、画像処理の内容の解析または確認などを
妨げる要因となるので、上記仕組みを設けることは簡単
なことではない。
【0007】画像処理装置を使用する生産ラインの機械
的なタクト周期が年々高速になっているので、これに合
わせて画像処理を高速に実行させる必要がある。画像処
理装置に接続される撮像装置の種類が、例えば標準カメ
ラ、倍速カメラまたはメガピクセルカメラであるとき、
その撮像周期は、それぞれ、33.3ms(30フレー
ム/秒)、16.7ms(60フレーム/秒)または6
6.7ms(15フレーム/秒)となる。したがって、
コマ落ちなく外観検査測定を行うためには、上記撮像周
期よりも高速に画像処理を実行させなければならないの
で、そのような高速の画像処理を妨げないように、画像
データを出力する必要がある。
【0008】また、標準カメラ、倍速カメラまたはメガ
ピクセルカメラの場合、出力するべき画像データの情報
量は、それぞれ、約256Kバイト(画像1枚の画素数
が512×480画素の場合)、約256Kバイト(画
像1枚の画素数が512×480画素の場合)または約
1Mバイト(画像1枚の画素数が1024×960画素
の場合)となる。近年、検査対象の小型、精密化によっ
て、高精度な画像処理が必要となって撮像装置の画素数
が増大する傾向にあり、これに伴って、画像処理装置が
扱う画像データも増大する傾向にある。
【0009】従来の画像処理装置では、画像データを保
存する場合、保存時間の観点からSRAM(Static RAM)
などの高速メモリが使用される。そのSRAMには、通
常、画像処理を行うCPU(中央処理装置)によって画
像データが保存されるが、SRAMは、数十MB程度の
比較的小さな容量しか持っていないので、上記のような
大きな画像データの場合には数枚〜数十枚程度しか保存
することができない。また、RAMは、揮発性のため、
バッテリなどのバックアップ電源を使用しなければ、電
源のオフ時点で、保存した画像データが消去されること
になる。
【0010】このほか、従来の画像処理装置には、より
多くの画像データを保存するべく、RAM以外の不揮発
性メモリを搭載しているものがある。近時においては、
SDカード、コンパクトフラッシュ(R)、メモリステ
ィックなどの小型で低価格の大容量フラッシュROMが
普及し、これらを画像データの記憶媒体に使用すること
によって、多くの枚数をバックアップ電源なしで保持す
ることができるようになっている。
【0011】しかしながら、この種の記憶媒体は、素子
の性質上、保存時間が問題となる。例えばSDカードの
場合、512×480画像(約256Kバイト)または
1024×960画像(約1Mバイト)の画像データを
保存するためには、それぞれ2.9秒または12.4秒
の時間がかかる。このように保存時間が秒単位となる
と、画像処理を行うCPUが画像データを保存する構成
の場合、保存時間が撮像周期を大きく上回るため、画像
データを保存する毎に、画像処理が停止することにな
る。加えて、画像処理の過程の処理内容を知る上で重要
となるその過程で生起する画像データ(例えば、エッジ
位置を検出する過程で求められる微分値画像など、原画
像に対し、判定前に特定の画像処理が行われた途中経過
の画像、処理途中で導出されるデータ等)を保存するこ
とがさらに困難となる。
【0012】共通の記憶装置(共有メモリ)を使用して
多重処理をするマルチプロセッサの構成でも、各CPU
は共有メモリに同時にアクセスすることができず、時分
割的に共有メモリを使用する必要があることから、結果
として画像処理が遅れることになる。
【0013】本発明は、上記事情に鑑みてなされたもの
であり、画像処理を止めたりあるいは遅らせたりするこ
となく、画像処理に使用された画像データを出力するこ
とができる画像処理装置および画像処理システムを提供
することを目的とする。
【0014】
【課題を解決するための手段】上記課題を解決するため
の請求項1記載の発明の画像処理装置は、検査対象の撮
像を行う少なくとも1台の撮像装置から画像データを得
る画像入力インターフェースと、この画像入力インター
フェースで得られた画像データを取り込んで記憶する第
1画像メモリと、この第1画像メモリに記憶された画像
データを読出し自在に、前記第1画像メモリに接続され
た第1中央処理装置および第1主記憶装置と、前記画像
入力インターフェースで得られた画像データを取り込ん
で記憶する第2画像メモリと、この第2画像メモリに記
憶された画像データを読出し自在に、前記第2画像メモ
リに接続された第2中央処理装置および第2主記憶装置
と、前記第1中央処理装置と前記第2中央処理装置との
間に介設され、これらの間でやりとりされる情報の転送
を行う中央処理装置間通信部とを備え、前記第1中央処
理装置は、前記第1画像メモリに記憶された画像データ
を用いて画像処理を実行することにより前記検査対象の
外観検査測定を行う一方、前記第2中央処理装置は、前
記第2画像メモリに記憶された画像データの出力処理を
実行することを特徴とする。
【0015】請求項2記載の発明は、請求項1記載の画
像処理装置において、前記画像入力インターフェースの
出力に接続された第1および第2ゲートアレイをさらに
備え、前記第1画像メモリは、前記画像入力インターフ
ェースに前記第1ゲートアレイを介して接続され、この
第1ゲートアレイの制御下で、前記画像入力インターフ
ェースで得られた画像データを取り込んで記憶し、前記
第1中央処理装置および第1主記憶装置は、前記第1ゲ
ートアレイの制御下で、前記第1画像メモリに記憶され
た画像データを読出し自在に、前記第1ゲートアレイを
介して前記第1画像メモリに接続され、前記第2画像メ
モリは、前記画像入力インターフェースに前記第2ゲー
トアレイを介して接続され、この第2ゲートアレイの制
御下で、前記画像入力インターフェースで得られた画像
データを取り込んで記憶し、前記第2中央処理装置およ
び第2主記憶装置は、前記第2ゲートアレイの制御下
で、前記第2画像メモリに記憶された画像データを読出
し自在に、前記第2ゲートアレイを介して前記第2画像
メモリに接続されたことを特徴とする。
【0016】請求項3記載の発明は、請求項1記載の画
像処理装置において、前記第1中央処理装置および第1
主記憶装置が前記第2画像メモリとデータの読出しおよ
び書込み自在にさらに接続され、前記第1中央処理装置
は、前記画像処理を実行することで生起した画像データ
の書込みを前記第2画像メモリに対してさらに行い、前
記第2中央処理装置は、前記第2画像メモリに記憶され
た各種画像データの出力処理を実行することを特徴とす
る。
【0017】請求項4記載の発明は、請求項2記載の画
像処理装置において、前記第1および第2画像メモリの
各々は、複数フレーム分の画像データの記憶領域を持
ち、前記第1および第2ゲートアレイは、それぞれ、前
記第1および第2画像メモリにおける記憶領域のうち、
一フレーム分の画像データの記憶領域をカレントフレー
ムの画像データの記憶領域とし、この記憶領域に、前記
画像入力インターフェースで得られた画像データを記憶
する制御を行うほか、その記憶領域に記憶した画像デー
タを一時保存する場合には、別の一フレーム分の画像デ
ータの記憶領域をカレントフレームの画像データの記憶
領域とし、この記憶領域に、前記画像入力インターフェ
ースで得られた画像データを記憶する制御を行うことを
特徴とする。
【0018】請求項5記載の発明は、請求項1〜4のい
ずれかに記載の画像処理装置において、外部コンピュー
タと通信をするための通信インターフェースを前記第2
中央処理装置側にさらに備え、前記第1中央処理装置
は、前記中央処理装置間通信部を経由して、前記画像処
理に必要な各種パラメータおよびその画像処理結果の少
なくとも一方を含む画像処理状況データを前記第2中央
処理装置側に送信し、前記第2中央処理装置は、前記出
力処理として、前記通信インターフェースを介して、前
記第1中央処理装置からの画像処理状況データを、対応
する画像データとともに前記外部コンピュータに送信す
ることを特徴とする。
【0019】請求項6記載の発明は、請求項1〜4のい
ずれかに記載の画像処理装置において、前記第2画像メ
モリに記憶された画像データを着脱式の記憶媒体に書込
み出力するための記憶装置を前記第2中央処理装置側に
さらに接続して備え、前記第1中央処理装置は、前記中
央処理装置間通信部を経由して、前記画像処理に必要な
各種パラメータおよびその画像処理結果の少なくとも一
方を含む画像処理状況データを前記第2中央処理装置に
送信し、前記第2中央処理装置は、前記出力処理とし
て、前記記憶装置を介して、前記第1中央処理装置から
の画像処理状況データを、対応する画像データとともに
前記記憶媒体に書込み出力することを特徴とする。
【0020】請求項7記載の発明は、請求項6記載の画
像処理装置において、前記第2画像メモリは、画像デー
タの読出しおよび書込み自在に前記第2中央処理装置お
よび第2主記憶装置にさらに接続され、前記第2中央処
理装置は、前記記憶装置を介して、前記記憶媒体に書き
込まれた画像データを前記第2画像メモリに読み出し、
前記第1中央処理装置は、前記記憶媒体から前記第2画
像メモリに読み出された画像データを用いて画像処理を
再度実行することを特徴とする。
【0021】請求項8記載の発明は、請求項5〜7のい
ずれかに記載の画像処理装置において、前記第1中央処
理装置は、前記画像処理の経過中または経過後の結果に
ついて所定の判定を行い、この判定結果に従って、前記
中央処理装置間通信部を介して、前記第2中央処理装置
側に前記画像処理状況データを送信するとともに、この
画像処理状況データに対応する画像データを指定するこ
とを特徴とする。
【0022】請求項9記載の発明は、請求項8記載の画
像処理装置において、前記所定の判定とは、前記画像処
理において、不良判定結果が所定数連続したか否かの判
定、不良判定率が所定率を超えたか否かの判定および所
定の異常が発生したか否かの判定の少なくとも1つの判
定を含む良否判定のことであることを特徴とする。
【0023】請求項10記載の発明は、請求項8記載の
画像処理装置において、前記所定の判定とは、少なくと
も一つの判定項目についての良品不良品の判定結果が所
定率発生したか否かの判定のことであることを特徴とす
る。
【0024】請求項11記載の発明は、請求項9まはた
10記載の画像処理装置において、前記判定のための基
準は前記外部コンピュータまたは外部機器から入力され
ることを特徴とする。
【0025】請求項12記載の発明の画像処理システム
は、請求項5〜11のいずれかに記載の画像処理装置
と、この画像処理装置に具備された通信インターフェー
スに対応する通信インターフェースを有する外部コンピ
ュータとを備え、この外部コンピュータは、当該外部コ
ンピュータが有する通信インターフェースを介して前記
画像処理装置から得た画像処理状況データおよび画像デ
ータを用いて、前記第1中央処理装置による画像処理と
同様の画像処理を実行することにより、前記検査対象の
外観検査測定のシミュレーションを行うことを特徴とす
る。
【0026】請求項13記載の発明は、請求項12記載
の画像処理システムにおいて、前記外部コンピュータ
は、前記画像処理状況データに含まれる各種パラメータ
のうち少なくとも一つのパラメータを変更する必要があ
る場合、そのパラメータを変更して前記シミュレーショ
ンを再度行い、そのシミュレーションにより最適な画像
処理結果が得られると、その最適な画像処理結果となっ
たパラメータを含むデータを前記画像処理装置に送信設
定することを特徴とする。
【0027】
【発明の実施の形態】(第1実施形態)図1は画像処理
システムの構成図であり、この図を参照しながら本発明
の第1実施形態について説明する。
【0028】図1に示す画像処理システムは、例えば製
造ラインにおいて、製造物などの検査対象の外観検査測
定に使用されるものであり、通信部100および画像処
理部150により構成される画像処理装置1と、画像デ
ータ用記憶装置21および画像処理調整部22を含み画
像処理装置1と通信可能に接続されるパソコン2とを備
えているほか、画像処理装置1の周辺機器として、検査
対象の撮像を行う少なくとも1台のカメラ3と、キーパ
ッドなどの各種操作入力用の入力装置4と、CRTまた
はLCDなどの表示装置5とを備えている。
【0029】通信部100は、画像処理を止めたりある
いは遅らせたりすることなく、画像処理に使用された画
像データを出力する処理などを実行する核となるCPU
130およびメインメモリ(主記憶装置)131を備え
ているとともに、画像入力インターフェース101と、
VRAM105と、モニタ出力インターフェース116
と、通信インターフェース109と、メインコントロー
ラ137と、画像データ保存用記憶装置120と、デュ
アルポートメモリ135とを備えている。
【0030】画像入力インターフェース101は、A/
D変換器103を含み、このA/D変換器103によ
り、カメラ3からのアナログ画像信号をデジタルに変換
して画像データを得るものである。VRAM105は、
画像入力インターフェース101で得られた画像データ
を取り込んで記憶するものである。モニタ出力インター
フェース116は、D/A変換器119を含み、このD
/A変換器119により、VRAM105に記憶された
画像データをアナログに変換してアナログ画像信号を表
示装置5に出力するものである。通信インターフェース
109は、イーサネット(R)またはRS−232Cな
どに対応した外部との通信手段である。メインコントロ
ーラ137は、入力装置4の操作入力インターフェース
(図示せず)および通信インターフェース109などの
各種インターフェースの入出力制御を行うものである。
画像データ保存用記憶装置120は、SDカードなどの
着脱式の記憶媒体に、例えばVRAM105などに記憶
された画像データを保存するものである。デュアルポー
トメモリ135は、CPU130と後述のCPU160
との間に介設され、これらの間でやりとりされる情報
(例えばコマンドまたはデータなど)の転送を行うもの
である。
【0031】画像処理部150は、画像入力インターフ
ェース101で得られた画像データを取り込んで記憶す
るVRAM153を備えているほか、入力装置4および
通信インターフェース109に接続された外部機器の少
なくとも一方を通じて設定され、例えばデュアルポート
メモリ135を経由したメッセージ通信などで取得した
検査条件下で、VRAM153に記憶された画像データ
を用いた画像処理を通じ、検査対象についての各種外観
検査測定を実行する核となるCPU160およびメイン
メモリ161を備えている。
【0032】上記構成の画像処理システムの特徴となる
動作について説明すると、画像入力インターフェース1
01で得られた画像データは、VRAM153に記憶さ
れるとともにVRAM105に記憶される。
【0033】一方のVRAM153に記憶された画像デ
ータは、メインメモリ161と一体不可分となって動作
するCPU160により読み出されて、従来と同様に画
像処理に利用され、その画像処理を通じて検査対象につ
いての各種外観検査測定が実行される。
【0034】他方のVRAM105に記憶された画像デ
ータは、メインメモリ131と一体不可分となって動作
するCPU130により読み出されて例えばメインメモ
リ131に一端保持された後、画像データ保存用記憶装
置120に転送されるほか、メインコントローラ137
を経由して通信インターフェース109から外部のパソ
コン2に送信出力される。なお、画像データ保存用記憶
装置120に転送された画像データは、その記憶媒体に
書込み出力されることになる。
【0035】以上、第1実施形態によれば、カメラ3か
ら画像データを得る画像入力インターフェース101
と、この画像入力インターフェース101で得られた画
像データを取り込んで記憶するVRAM153と、この
VRAM153に記憶された画像データを読出し自在
に、VRAM153に接続されたCPU160およびメ
インメモリ161と、画像入力インターフェース101
で得られた画像データを取り込んで記憶するVRAM1
05と、このVRAM105に記憶された画像データを
読出し自在に、VRAM105に接続されたCPU13
0およびメインメモリ131と、CPU160とCPU
130との間に介設され、これらの間でやりとりされる
情報の転送を行うデュアルポートメモリ135とを備
え、CPU160は、VRAM153に記憶された画像
データを用いて画像処理を実行することにより検査対象
の外観検査測定を行う一方、CPU130は、VRAM
105に記憶された画像データの出力処理を実行するの
で、例えば、入力装置4を用いて入力されたVRAM1
05の画像データの出力指示に従って、CPU130が
VRAM105に記憶された画像データの出力処理を行
う場合、VRAM105の画像データの出力処理からC
PU160が完全に解放されるから、また例えばCPU
160が、デュアルポートメモリ135を経由したメッ
セージ通信によりCPU130に対して、VRAM15
3に記憶された画像データに対応するVRAM105に
記憶された画像データの出力指示をする場合でも、CP
U160に加わる負荷が数バイト程度の出力指示データ
を含む通信メッセージの送信処理のみで済むから、画像
処理を止めたりあるいは遅らせたりすることなく、画像
処理に使用された画像データを出力することができる。
【0036】(第2実施形態)図2は画像処理装置の構
成図、図3は出力処理が送信出力である場合の画像処理
システムの一部構成図、図4は画像処理を実行すること
で生起する画像データの例を示す図であり、これらの図
を参照しながら本発明の第2実施形態について説明す
る。
【0037】第2実施形態の画像処理装置1Aは、第1
実施形態との相違点として、VRAM153,105
と、メインメモリ161,131と、CPU160,1
30とに代えて、それぞれ図2に示すように、複数
(1,2,…N)フレーム分の画像データの記憶領域を
持つVRAM153a,105aと、第1実施形態とは
異なる実行プログラムが展開されたメインメモリ161
a,131aと、これらメインメモリ161a,131
aに展開されたプログラムにそれぞれ従って処理を実行
するCPU160a,130aとを備えている。
【0038】そして、CPU160aおよびメインメモ
リ161aがVRAM105aとデータの読出しおよび
書込み自在にさらに接続され、CPU160aが、第1
実施形態のCPU160との相違点として、画像処理を
実行することで生起した画像データの書込みをVRAM
105aに対してさらに行い、CPU130aが、第1
実施形態のCPU130との相違点として、VRAM1
05aに格納された少なくとも1フレーム分の画像デー
タの出力処理を実行する。このように、画像処理中の画
像データをも出力する本質的な理由は、画像処理がどの
ように行われて所定の画像処理結果が出てきたのかを解
析し、画像処理装置の設定を調整することにある。
【0039】このような構成の画像処理装置1AのCP
U160aおよびメインメモリ161a側では、各種画
像処理が実行されるが、図4の例に示すように画像処理
の前処理として、図4(a)の原画像から、図4(b)
の微分画像および図4(c)細線化画像を経て、図4
(d)に示すエッジ線の画像を得る場合、各種画像デー
タがメインメモリ161a中(図2の「処理画像」参
照)に生起する。これらの各種画像データは、CPU1
60aおよびメインメモリ161a側から経過画像とし
てVRAM105aに書き込まれる。
【0040】この後、VRAM105aに書き込まれた
各種画像データは、メインメモリ131aと一体不可分
となって動作するCPU130aの指示および制御によ
り、例えばDMA転送でメインメモリ131aに記憶さ
れた後、図2に示すように画像データ保存用記憶装置1
20に転送され、その記憶媒体に書込み出力(保存)さ
れるほか、図3に示すように外部のパソコン2に送信出
力(転送)される。
【0041】ここで、上記画像処理の前処理において、
図4(d)に示すようにエッジ線の途切れに起因して不
都合な画像処理結果となったとき、図4などに示す経過
画像も出力されるから、図4(d)に示すようなエッジ
線の途切れが原因であるといったような解析がパソコン
2で実行可能となる。なお、この場合、微分処理の画像
パラメータである微分しきい値の設定が大きすぎると推
察されれば、その微分しきい値が図3に示す画像処理調
整部22で最適値に変更され、最適値に変更された微分
しきい値がCPU130a側に送信されることになる。
【0042】以上、第2実施形態によれば、CPU16
0aおよびメインメモリ161aがVRAM105aと
データの読出しおよび書込み自在にさらに接続され、C
PU160aは、画像処理を実行することで生起した画
像データの書込みをVRAM105aに対してさらに行
い、CPU130aは、VRAM105aに記憶された
各種画像データの出力処理を実行するので、画像処理を
実行することで生起した画像データもパソコン2で確認
することができる。
【0043】(第3実施形態)図5は画像処理装置の構
成図、図6は図5の画像処理装置の動作説明図であり、
これらの図を参照しながら本発明の第3実施形態につい
て説明する。
【0044】第3実施形態の画像処理装置1Bは、第1
実施形態との相違点として、VRAM153,105に
代えて、それぞれ図5,図6に示すように、複数フレー
ム分の画像データの記憶領域を持つVRAM153a,
105aを備えているとともに、VRAM153a,1
05aのアドレス制御をそれぞれ行うVRAMコントロ
ーラ152,104をさらに備えている。
【0045】VRAMコントローラ152,104は、
ともにFPGA(Field Programmable Gate Array) であ
り、それぞれ、CPU160,130からのアドレス情
報に従って、VRAM153a,105aにおける記憶
領域のうち、一フレーム分の画像データの記憶領域をカ
レントフレームの画像データの記憶領域とし、この記憶
領域に、画像入力インターフェース101で得られた画
像データを記憶するハード制御を行うほか、その記憶領
域に記憶した画像データを一時保存する場合には、別の
一フレーム分の画像データの記憶領域をカレントフレー
ムの画像データの記憶領域とし、この記憶領域に、画像
入力インターフェース101で得られた画像データを記
憶するハード制御を行う。
【0046】なお、図5の例では、CPU160がVR
AMコントローラ152,104の両方に指示を与える
構成になっているが、これは、VRAMコントローラ1
04がカメラ3の撮像コントローラを兼ねており、CP
U160がVRAMコントローラ104を経由してカメ
ラ3を制御することができるようにするためである。V
RAMコントローラ104には、CPU160,130
からの指示を格納するレジスタが設けられており、その
レジスタに撮像指示が格納されると、VRAMコントロ
ーラ104は、その撮像指示に従って撮像制御を実行す
る。
【0047】上記構成の画像処理装置1Bでは、図6の
例に示すように、VRAM105aにおける記憶領域の
うち、画像番号“1”の画像データの記憶領域がカレン
トフレームの画像データの記憶領域(図6では“カレン
トフレーム画像記憶領域”)となっている場合、そのカ
レントフレーム画像記憶領域に、画像入力インターフェ
ース101で得られた画像データが記憶される。
【0048】このとき、外観検査測定で例えば不良品の
判定結果が得られると、その不良品の画像データは、V
RAM105aに一時保存された上で、解析などのため
に出力されることになる。すなわち、画像番号“1”の
画像データの記憶領域が“一時保存フレーム画像記憶領
域”に切り替えられ、画像番号“2”の画像データの記
憶領域が“カレントフレーム画像記憶領域”に設定され
る。これにより、画像番号“1”の画像データの記憶領
域に保存された不良品の画像データが新たな画像データ
によって上書きされて消失することがなくなる。
【0049】この後、外観検査測定で不良品の判定結果
が得られると、上記同様に、“カレントフレーム画像記
憶領域”が“一時保存フレーム画像記憶領域”に切り替
えられ、次の画像番号の画像データの記憶領域が“カレ
ントフレーム画像記憶領域”に設定される。そして、画
像番号“N”の記憶領域に至った場合には、次の記憶領
域が画像番号“1”の記憶領域となり、“カレントフレ
ーム画像記憶領域”がサイクリックに切り替えられる。
【0050】この“カレントフレーム画像記憶領域”の
切替え過程において、VRAM105aに記憶された不
良品の画像データは、第1実施形態と同様に、書込みま
たは送信出力される。
【0051】以上、第3実施形態によれば、VRAMコ
ントローラ152,104が、それぞれ、VRAM15
3a,105aにおける記憶領域のうち、一フレーム分
の画像データの記憶領域をカレントフレームの画像デー
タの記憶領域とし、この記憶領域に、画像入力インター
フェース101で得られた画像データを記憶する制御を
行うほか、その記憶領域に記憶した画像データを一時保
存する場合には、別の一フレーム分の画像データの記憶
領域をカレントフレームの画像データの記憶領域とし、
この記憶領域に、画像入力インターフェース101で得
られた画像データを記憶する制御を行うので、複数フレ
ーム分の画像データを用いた画像処理が可能になるほ
か、画像処理サイクルより画像データの出力処理サイク
ルの方が長く、例えば画像データを出力する必要のある
判定結果が続く場合でも、出力すべき画像データがこれ
に続く出力すべき画像データによって上書きされること
がなくなり、出力すべき画像データの出力時間を稼ぐこ
とができるとともに、CPU130に低速のものを使用
することが可能になる。また、過去の履歴を残し、複数
枚の画像を表示装置5に表示することができる。さら
に、VRAM153a,105aの画像データの整合を
図ることにより、CPU160がCPU130に対して
例えば画像番号のみで出力するべき画像データを指定す
ることが可能になる。
【0052】なお、第3実施形態では、画像データの整
合のため、VRAM153a,105aの双方に対し
て、“カレントフレーム画像記憶領域”の切替えがサイ
クリックに行われる構成になっているが、VRAM10
5aのみに対して、“カレントフレーム画像記憶領域”
の切替えがサイクリックに行われる構成でもよい。
【0053】(第4実施形態)図7は画像処理装置の構
成図、図8〜図11は図7の画像処理装置の動作説明図
であり、これらの図を参照しながら本発明の第4実施形
態について説明する。
【0054】第4実施形態の画像処理装置1Cは、第1
実施形態との相違点として、VRAM153,105
と、メインメモリ161,131と、CPU160,1
30とに代えて、それぞれ図7に示すように、複数フレ
ーム分の画像データの記憶領域を持つVRAM153
a,105aと、第1実施形態とは異なる実行プログラ
ムが展開されたメインメモリ161c,131cと、こ
れらメインメモリ161c,131cに展開されたプロ
グラムにそれぞれ従って処理を実行するCPU160
c,130cとを備えている。なお、図7では、画像入
力インターフェース101および通信インターフェース
109などは図示省略してある。また、VRAM105
aは、データの読出しおよび書込み自在にCPU160
cおよびメインメモリ161cにさらに接続される。
【0055】CPU160cは、第1実施形態のCPU
160との相違点として、デュアルポートメモリ135
を経由して、画像処理に必要な画像処理パラメータ、判
定パラメータなどの各種パラメータおよびその画像処理
結果の少なくとも一方を含む画像処理状況データをCP
U130c側に送信する処理を実行する。
【0056】CPU130cは、第1実施形態のCPU
130との相違点として、出力処理として、通信インタ
ーフェース109を介して、CPU160cからの画像
処理状況データを、対応する画像データとともにパソコ
ン2に送信するほか、画像データ保存用記憶装置120
を介して、CPU160cからの画像処理状況データ
を、対応する画像データとともに画像データ保存用記憶
装置120の記憶媒体に書込み出力する処理を実行す
る。
【0057】また、CPU130cは、画像データ保存
用記憶装置120を介して、その記憶媒体に書き込まれ
た画像データをVRAM105aに読み出し、CPU1
60cは、画像データ保存用記憶装置120の記憶媒体
からVRAM105aに読み出された画像データを用い
て画像処理を再度実行する。
【0058】上記構成の画像処理装置では、画像入力イ
ンターフェース101で得られた画像データは、VRA
M153a,105aに並列に記憶される。VRAM1
53a,105aにはN枚の画像データを記憶すること
ができ、各画像データには画像番号が付される。画像デ
ータは、第3実施形態と同様に、通常は同じ記憶領域に
繰り返し記憶されるが、CPU160cが画像データを
出力すると判断した場合には、画像データを記憶する記
憶領域が切り替えられる。
【0059】CPU160cおよびメインメモリ161
c側では、VRAM153aに記憶されたカレントの画
像データをメインメモリ161cにコピーした上で画像
処理が実行される。
【0060】ここで、図8の例において、VRAM10
5aに記憶されているN枚の画像データをパソコン2に
送信出力する場合、CPU160cは、N枚目の画像デ
ータを用いて画像処理を実行しているときに、VRAM
105aに記憶されているN枚の画像データを送信出力
させるべく、画像処理に必要な各種パラメータおよびそ
の画像処理結果の少なくとも一方を含む画像処理状況デ
ータを通信メッセージとして、デュアルポートメモリ1
35経由でCPU130cに送信する。通信メッセージ
には、出力するべき画像番号および通信インターフェー
ス109経由の指示などがさらに含められる。
【0061】CPU130cは、その通信メッセージを
受け取ると、VRAM105aに記憶されている出力す
るべき画像データをメインメモリ131cに順次読み出
し、画像処理状況データとともに通信インターフェース
109を介してパソコン2に送信出力する。
【0062】パソコン2は、画像処理装置1Cからの画
像データおよび画像処理状況データを画像処理調整部2
2の受信機能により受信した後、例えばハードディスク
装置などの画像データ用記憶装置21に保存する。
【0063】なお、パソコン2が画像処理装置1Cに未
接続である場合、パソコン2が受信状態に入っていない
場合などでは、画像データおよび画像処理状況データが
受信されないので、画像処理調整部22は受信状態に入
ったか否かを示す情報をCPU130cに送信し、CP
U130cはその情報を受信した後に画像データおよび
画像処理状況データを送信出力する。
【0064】図9の例において、VRAM105aに記
憶されているN枚の画像データを画像データ保存用記憶
装置120に書込み出力する場合、CPU160cは、
N枚目の画像データを用いて画像処理を実行していると
きに、VRAM105aに記憶されているN枚の画像デ
ータを送信出力させるべく、画像処理に必要な各種パラ
メータおよびその画像処理結果の少なくとも一方を含む
画像処理状況データを通信メッセージとして、デュアル
ポートメモリ135経由でCPU130cに送信する。
通信メッセージには、出力するべき画像番号および画像
データ保存用記憶装置120経由の指示などがさらに含
められる。
【0065】CPU130cは、その通信メッセージを
受け取ると、VRAM105aに記憶されている出力す
るべき画像データをメインメモリ131cに順次読み出
し、画像処理状況データとともに画像データ保存用記憶
装置120に転送する。順次転送された画像データおよ
び画像処理状況データは、画像データ保存用記憶装置1
20の記憶媒体に書込み出力される。
【0066】図10の例において、CPU130cは、
VRAM105aに記憶されている複数の画像のうち、
出力するべき所望の画像を入力装置4により選択可能に
表示装置5に表示し、入力装置4を用いて所望の画像が
選択されると、VRAM105aから対応する画像デー
タをメインメモリ131cに読み出し、画像データ保存
用記憶装置120に転送する。転送された画像データ
は、画像データ保存用記憶装置120の記憶媒体に書込
み出力される。この場合、VRAM105aの画像デー
タの出力処理からCPU160cが完全に解放されるか
ら、CPU160cの画像処理を遅らせることなく、画
像処理に使用された画像データを出力することができ
る。
【0067】図11の例において、以前の画像データが
保存されている記憶媒体を画像データ保存用記憶装置1
20に装着した後、その記憶媒体に保存されている画像
データを用いて画像処理を再実行する指示が入力装置4
からCPU130cに入力されると、CPU130c
は、画像データ保存用記憶装置120から、指示された
保存画像の画像データをメインメモリ131cに読み出
し、それをVRAM105aにコピーしてその保存画像
を表示装置5に表示する。保存画像のVRAM105a
への配置が完了した後、CPU130cは、デュアルポ
ートメモリ135を経由して、保存画像が展開されてい
るVRAM105aの画像番号を含む画像処理実行指示
をCPU160cに送信する。
【0068】CPU160cは、その画像処理実行指示
を受信すると、画像データ保存用記憶装置120の記憶
媒体からVRAM105aに読み出された画像データを
用いて画像処理を再度実行する。
【0069】以上、第4実施形態によれば、CPU16
0cは、デュアルポートメモリ135を経由して、画像
処理に必要な各種パラメータおよびその画像処理結果の
少なくとも一方を含む画像処理状況データをCPU13
0cに送信し、CPU130cは、CPU160cから
の画像処理状況データを、対応する画像データとともに
出力するので、より好適な解析が可能となる。
【0070】また、CPU130cは、画像データ保存
用記憶装置120を介して、その記憶媒体に書き込まれ
た画像データをVRAM105aに読み出し、CPU1
60cは、画像データ保存用記憶装置120の記憶媒体
からVRAM105aに読み出された画像データを用い
て画像処理を再度実行するので、画像データ保存用記憶
装置120からの時間のかかる(512×480画素の
画像の場合は約50ms強)保存画像の読出しがCPU
130cにより実行され、VRAM105aに再配置さ
れた保存画像がCPU160c側に読み出されることに
なるから、保存画像の再読込み時に生じ得る画像処理の
遅れを抑制することができる。また、VRAM105a
への保存画像の配置が完了した後に画像処理実行指示が
出されるので、VRAM105aに対するCPU160
c,130cによるアクセスの競合は起こらない。
【0071】なお、CPU160cとCPU130cと
の間で交換される指示などは、ポーリング的に送信され
る構成でも、指示をFPGAのレジスタに書き込むこと
によりイベントを発生させ、割込みにより指示を取り込
む構成でもよい。
【0072】また、画像処理の再実行は、カレントの画
像データを用いた画像処理の合間に実行されるようにし
てもよい。
【0073】(第5実施形態)図12は画像処理装置の
構成図、図13は原画像の例を示す図、図14は判定条
件の設定メニュー例を示す図であり、これらの図を参照
しながら本発明の第5実施形態について説明する。
【0074】第5実施形態の画像処理装置1Dは、第1
実施形態との相違点として、VRAM153,105
と、メインメモリ161,131と、CPU160,1
30とに代えて、それぞれ図12に示すように、複数フ
レーム分の画像データの記憶領域を持つVRAM153
a,105aと、第1実施形態とは異なる実行プログラ
ムが展開されたメインメモリ161d,131dと、こ
れらメインメモリ161d,131dに展開されたプロ
グラムにそれぞれに従って処理を実行するCPU160
d,130dとを備えている。なお、図12では、画像
入力インターフェース101および通信インターフェー
ス109などは図示省略してある。
【0075】CPU160dは、第1実施形態のCPU
160との相違点として、画像処理の経過中または経過
後の結果について所定の判定を行い、この判定結果に従
って、デュアルポートメモリ135を介して、CPU1
30d側に、画像処理に必要な各種パラメータおよびそ
の画像処理結果の少なくとも一方を含む画像処理状況デ
ータを送信するとともに、この画像処理状況データに対
応する画像データを指定する処理をさらに実行する。こ
こで、所定の判定とは、画像処理において、不良判定結
果が所定数連続したか否かの判定、不良判定率が所定率
を超えたか否かの判定および所定の異常が発生したか否
かの判定の少なくとも1つの判定を含む良否判定のこと
であり、また少なくとも一つの判定項目についての良品
不良品の判定結果が所定率発生したか否かの判定のこと
である。
【0076】CPU130dは、第1実施形態のCPU
130との相違点として、入力装置4が接続される操作
入力インターフェース(図示せず)および通信インター
フェース109の少なくとも一方を介して、上記所定の
判定のための判定基準を受け取ると、その判定基準をデ
ュアルポートメモリ135経由でCPU160dに送信
する処理をさらに実行する。
【0077】このような構成の画像処理装置1Dでも、
CPU130dに出力処理させる画像データを指定する
ときにCPU160dが使用する出力命令のデータ量を
滅らして、CPU160dの画像処理の停滞を防止する
べく、画像番号がVRAM153a,105aの各記憶
領域に付される。
【0078】いま、上記判定基準を含む自動サンプリン
グ条件が操作入力インターフェースおよび通信インター
フェース109の少なくとも一方から入力されると、C
PU130dは、デュアルポートメモリ135を介して
その自動サンプリング条件をCPU160d側に送信す
る。ここで、判定基準は、例えば「不良品とする判定が
N回連続したとき」というものであるとする。
【0079】この後、CPU160dは、予め設定され
た検査測定条件に従って良品不良品の判定を行い、この
判定結果(上記画像処理の経過中または経過後の結果)
が不良品であれば、第3実施形態と同様にして“カレン
トフレーム画像記憶領域”を切り替える。このとき、
“一時保存フレーム画像記憶領域”の画像番号が例えば
メインメモリ161dに保存される。また、CPU16
0dからCPU130dに“カレントフレーム画像記憶
領域”の切替え指示が出される。
【0080】この後、不良品の判定結果がN回連続する
と、CPU160dは、上記所定の判定により、「不良
品とする判定がN回連続したとき」に該当するので、画
像処理に必要な各種パラメータおよびその画像処理結果
の少なくとも一方を含む画像処理状況データ、この画像
処理状況データに対応する画像データを指定する画像番
号などを通信メッセージに含めて、デュアルポートメモ
リ135を介して、CPU130d側に送信する。
【0081】CPU130dは、上記を通信メッセージ
を受信すると、VRAM105aから対応する画像デー
タをメインメモリ131dに読み出して、画像処理状況
データとともに画像データ保存用記憶装置120に書込
み出力、または通信インターフェース109を介してパ
ソコン2に送信出力する。
【0082】ところで、上記動作例では、判定基準は、
「不良品とする判定がN回連続したとき」というものに
なっているが、この他にも様々な判定基準が考えられ
る。
【0083】図13に示す原画像について、枠F内の面
積値(2値化しきい値以上の光量を持つ画素数)と枠F
内の平均光量とを算出する画像処理において、図14に
示す設定メニューで、面積値および平均濃淡値を判定基
準として設定する場合を考えると、その範囲を外れる結
果となった画像データが出力の対象となる。
【0084】図14中のチェックボックスは、判定基準
として有効にするか無効にするかを設定するためのもの
であり、チェックが入れられると有効となる。そして、
そのチェックは、入力装置4またはパソコン2を通じて
設定することができるように構成される。
【0085】以上、第5実施形態によれば、CPU16
0dが、画像処理の経過中または経過後の結果について
所定の判定を行い、この判定結果に従って、デュアルポ
ートメモリ135を介して、CPU131d側に画像処
理状況データを送信するとともに、この画像処理状況デ
ータに対応する画像データを指定するので、画像処理の
経過中または経過後において解析などに必要となった画
像データが出力されることになり、出力された画像デー
タの利用価値が高まる。
【0086】また、所定の判定が、画像処理において、
不良判定結果が所定数連続したか否かの判定、不良判定
率が所定率を超えたか否かの判定および所定の異常が発
生したか否かの判定の少なくとも1つの判定を含む良否
判定であれば、良否判定状況に応じて必要な画像データ
に絞って出力することが可能となり、VRAMの記憶容
量を効率的に使用することができる。
【0087】また、所定の判定が、少なくとも一つの判
定項目についての良品不良品の判定結果が所定率発生し
たか否かの判定でも、良否判定状況に応じて必要な画像
データに絞って出力することが可能となる。例えば、重
要度を考えて所定率を設定すれば、よく発生する不良品
についてはその画像データが出力される確率を下げ、ま
れにしか発生しない不良品についてはその画像データが
出力される確率を高くすることができる。
【0088】さらに、判定のための基準が通信インター
フェース109に接続されたパソコン2または外部機器
から入力される構成の場合、画像処理前後、画像処理中
にかかわらす、判定のための基準の設定ないし変更が可
能となる。
【0089】なお、第5実施形態では、N回連続して不
良品の判定結果となった画像データが出力される構成に
なっているが、例えば経緯変化の解析のため、設定した
不良率の上限を超えた時点の前後各N枚の画像データが
出力される構成でもよい。
【0090】また、CPU160dがメインメモリ16
1dではなく、VRAM105aを途中経過の画像デー
タの保存位置としている場合には、N回連続で不良品判
定となった画像の途中経過を保存するように指定するこ
とも可能である。
【0091】(第6実施形態)図15は画像処理装置の
構成図、図16は図15の画像処理装置の動作説明図、
図17は使用可能フラグの例を示す図であり、これらの
図を参照しながら本発明の第6実施形態について説明す
る。
【0092】第6実施形態の画像処理装置1Eは、第3
実施形態との相違点として、デュアルポートメモリ13
5と、メインメモリ161,131と、CPU160,
130とに代えて、それぞれ図15,図16に示すよう
に、使用可能フラグ(図17の例を参照)が設定される
デュアルポートメモリ135eと、第3実施形態とは異
なる実行プログラムが展開されたメインメモリ161
e,131eと、これらメインメモリ161e,131
eに展開されたプログラムにそれぞれ従って処理を実行
するCPU160e,130eとを備えている。なお、
使用可能フラグの各フラグは、初期値として“1”が設
定されているとする。
【0093】CPU160eは、第3実施形態のCPU
160bとの相違点として、デュアルポートメモリ13
5eの使用可能フラグのうち、出力するべき画像データ
の画像番号に対応するフラグを“0”に設定する処理を
実行する。
【0094】CPU130eは、第3実施形態のCPU
130bとの相違点として、デュアルポートメモリ13
5eの使用可能フラグにおいて、“0”のフラグの画像
番号に対応する画像データをVRAM105aから読み
出して出力し、その画像データの出力が完了すると、そ
のフラグを“1”に置き換える処理を実行する。
【0095】上記構成の画像処理装置1Eの動作につい
て説明すると、CPU160eは、外観検査測定で画像
データを出力すると判定した場合、その画像データの画
像番号に当たるフラグを“0”に設定して、CPU13
0eに対してその画像データの出力指示を出す。
【0096】この後、CPU130eは、ポーリング的
に使用可能フラグの各フラグ状態を監視し、“0”に設
定されたフラグを検出すると、そのフラグの画像番号に
対応する画像データをVRAM105aから読み出して
出力する処理を実行する。続いて、その画像データの出
力が完了すると、対応するフラグを“1”に置き換える
処理を実行する。
【0097】ところで、CPU160e,CPU130
eは、それぞれ、ポーリング的に使用可能フラグの各フ
ラグ状態を監視するが、“0”に設定されたフラグを検
出した場合には、VRAM153a,105aにおける
各記憶領域のうち、対応する画像番号の記憶領域を書込
み禁止の状態に設定し、“1”に置き換えられたフラグ
を検出した場合には、対応する画像番号の記憶領域を書
込み許可の状態に設定する。
【0098】以上、第6実施形態によれば、フラグを用
いて出力するべき画像データの指示をするので、VRA
Mの効率的な利用が可能となる。
【0099】(第7実施形態)図18〜図21は画像処
理システムの動作説明図であり、これらの図を参照しな
がら本発明の第7実施形態について説明する。
【0100】第7実施形態の画像処理システムは、上記
各実施形態で説明した画像処理装置と、この画像処理装
置に具備された通信インターフェース109に対応する
通信インターフェース(図示せず)を有するパソコン2
eとを備えている。
【0101】パソコン2eは、自己の通信インターフェ
ースを介して画像処理装置から得た画像処理状況データ
および画像データを用いて、画像処理部のCPUによる
画像処理と同様の画像処理を実行することにより、検査
対象の外観検査測定のシミュレーションを行うほか、画
像処理状況データに含まれる各種パラメータのうち少な
くとも一つのパラメータを変更する必要がある場合、そ
のパラメータを変更して上記シミュレーションを再度行
い、そのシミュレーションにより最適な画像処理結果が
得られると、その最適な画像処理結果となったパラメー
タを含むデータを画像処理装置に送信設定する。
【0102】図18の動作例において、画像処理装置で
不良品の判定結果(NG)が発生した場合(S1)、画
像処理装置は、通信インターフェース109を介して画
像データおよび画像処理状況データをパソコン2eに送
信し(S2)、この後、以前に設定された画像処理パラ
メータを用いて画像処理を続行する(S3)。これによ
り生産が続行する。
【0103】画像データおよび画像処理状況データを受
信したパソコン2e側では、それらの情報に基づき、上
記画像処理装置と同様の画像処理を再現し、画像処理装
置上で起きている画像処理の内容を再現しながら最適な
パラメータに調整する(S4〜S7)。すなわち、画像
処理調整部22e(図20参照)により、画像処理検査
パラメータの調整、受信した画像データを用いた画像処
理を繰り返し実行することにより、検査シミュレーショ
ンを行い、画像処理装置とは独立してパラメータの調整
を行う。
【0104】パラメータの調整が完了した後、その調整
済みのパラメータを画像処理装置に転送して、画像処理
装置の画像処理部におけるCPUが使用する画像処理パ
ラメータを変更する(S8)。
【0105】図19の動作例において、画像処理は、
“画像処理A”および“画像処理B”などの特定の画像
処理ルーチンを組み合わせて使用することで行われるの
で、特定数の画像処理ルーチンが、予め画像処理装置に
ライブラリとして搭載されている。
【0106】画像処理装置では、画像処理部のCPUで
画像処理プログラムが動作する。まず、画像処理手順を
読み込み、手順に従って順次画像処理パラメータおよび
判定パラメータを入力し(S11)、それらのパラメー
タを使用して、ライブラリ内の画像処理ルーチンを呼び
出すことで画像処理を実行し(S12)、画像処理結果
のデータ(パラメータ)を出力する(S13)。
【0107】パソコン2eは、画像処理調整を行うた
め、画像処理装置にあるプログラムおよびライブラリと
同じものが搭載されており、画像処理装置から画像デー
タおよび画像処理状況データを受信することで(S1
4)、画像処理装置と同様の画像処理を実行する(S1
5)。
【0108】この場合、パソコン2eで画像処理の経緯
の確認とパラメータの修正が可能となり、画像処理状況
データのみを画像処理装置に設定することで、画像処理
装置の画像処理を調整することができる。
【0109】図20の動作例において、パソコン2e上
の画像処理調整部22eによって調整された画像処理パ
ラメータは、画像データ用記憶装置21に格納されてお
り、画像処理調整部22eにより読み出され(S2
1)、画像処理装置の通信部のCPU側に転送される
(S22)。
【0110】通信部のCPUは、画像処理調整部22e
からの通信コマンドを解析するルーチンを有しており、
画像処理調整部22eから送られてきた画像処理パラメ
ータを解析し、パラメータ変更指示をデュアルポートメ
モリに配置する(S23)。
【0111】画像処理部のCPUは、そのパラメータ変
更指示を画像処理の合間にポーリング的に受信し(S2
4)、画像処理パラメータとして設定する。
【0112】ここで、画像処理の対象となる画像が大き
なデータ(256KB〜1MB)であるのに比べ、画像
処理に使用されるパラメータのデータ量はそれほど大き
くない。これは、画像処理において繰返し演算の占める
割合が大きいからである。例えば、原画像に対してSo
belオペレータなどの微分処理を行う場合、入力オペ
レータとしては、オペレータの大きさや微分値のしきい
値などが必要となるだけで、それらの設定を使って繰返
し演算を行い、所定の画像のオペレータ処理を行うこと
になる。画像処理の対象となる画像データが256KB
〜1MBと容量が大きいのに比較して、修正設定すべき
画像処理パラメータは、数十〜数百バイト程度である。
【0113】より具体的には、従来の画像処理装置にお
いてSobelオペレータを使用して、ひびを検出する
ための外観検査画像の処理ルーチンの入力パラメータ
は、以下のように11個しかなく、容量的には、11×
4バイト=44バイトに過ぎない。
【0114】 入力パラメータ パラメータ名 param[0] フィルタサイズ param[1] エッジ抽出しきい値 param[2] エッジ延長下限値 param[3] 微分値しきい値 param[4] 検出微分方向値 param[5] 白黒判定 param[6] 濃度判定しきい値補正量 param[7] 濃度判定用ウイングサイズ param[8] 微分値総和しきい値 param[9] 不良画素数しきい値 param[10] エラーコード したがって、入力パラメータを画像処理部のCPUで変
更設定しても設定時間の問題とはならないのである。
【0115】図21の動作例において、パソコン2eが
上記S4〜S7による調整済みのパラメータを画像処理
装置に転送すると、画像処理装置は、例えば指定した一
定時間に上記調整済みのパラメータに一時的に変更して
画像処理シミュレーションを実行し(S31)、その画
像処理シミュレーションにより、例えば目標のNG率に
達したか否かに応じて調整済みのパラメータの妥当性を
検証し(S32)、問題点が解決されたことを示す検証
結果が得られたとき、はじめて当該画像処理装置内部の
画像処理パラメータを調整済みのパラメータに切り替え
る(S33)。
【0116】この動作の場合、画像処理装置とパソコン
2eとが異なる条件であったとしても、画像処理装置の
方でパソコン2eによる調整済みのパラメータの妥当性
が検証されるから、より確度の高いパラメータの調整が
可能になる。異なる条件の例としては、パソコン2eで
は画像データが固定されているのに対して、画像処理装
置ではラインを流れる検査対象に対するランプ照度等の
撮像条件の変動により画像データが変動すること、パソ
コン2eでは処理スピードの制限を受けないのに対し
て、画像処理装置ではラインスピード以上の処理スピー
ドで処理を実行しなければならず、検査対象領域を広げ
るなどすると、画像処理スピードが落ちてS32の判定
でNG解消にならない場合があることなどが挙げられ
る。
【0117】以上、第7実施形態によれば、パソコン2
eが、画像処理装置に具備された通信インターフェース
109に対応する通信インターフェースを有し、この通
信インターフェースを介して画像処理装置から得た画像
処理状況データおよび画像データを用いて、画像処理装
置の画像処理部のCPUによる画像処理と同様の画像処
理を実行することにより、検査対象の外観検査測定のシ
ミュレーションを行うので、画像処理装置の画像処理を
中断することなく、パソコン2eで画像処理装置と同様
の画像処理を再現したシミュレーションにより各種確認
が可能となる。
【0118】また、パソコン2eが、画像処理状況デー
タに含まれる各種パラメータのうち少なくとも一つのパ
ラメータを変更する必要がある場合、そのパラメータを
変更して上記シミュレーションを再度行い、そのシミュ
レーションにより最適な画像処理結果が得られると、そ
の最適な画像処理結果となったパラメータを含むデータ
を画像処理装置に送信設定するので、画像処理装置のパ
ラメータの更新が可能になる。
【0119】
【実施例】図22〜図24は上記第1実施形態などに関
連する実施例を示す図であり、図22は画像処理装置の
構成図、図23は図22の通信部のより詳細な構成図、
図24は図22の画像処理部のより詳細な構成図であ
る。
【0120】この実施例の画像処理装置は、上述の入力
装置4を用いて設定された検査条件下で、カメラ3の撮
像により得られた画像に対する画像処理を通じ、検査対
象についての各種外観検査測定を実行するほか、画像処
理を止めたりあるいは遅らせたりすることなく、画像処
理に使用された画像データを出力するものであり、図2
2に示すように、通信部と、画像処理部とにより構成さ
れている。
【0121】図23の通信部において、101は、検査
対象の撮像を行う最大で4台のカメラ3から画像データ
を得る画像入力インターフェースであり、各カメラ3の
出力と接続されるコネクタ102と、各コネクタ102
に接続されたカメラ3からのアナログ画像信号をデジタ
ル信号に変換して画像データを得るA/D変換器103
とにより構成されている。
【0122】104は、VRAMコントローラ(ゲート
アレイ)であり、図23ではFPGAにより構成されて
おり、画像入力インターフェース101の出力に接続さ
れている。
【0123】105は、VRAM(SDRAM)であ
り、画像入力インターフェース101にVRAMコント
ローラ104を介して接続され、このVRAMコントロ
ーラ104のハード制御下で、画像入力インターフェー
ス101で得られた画像データを取り込んで記憶する。
【0124】106は、入力装置4を接続するための操
作入力インターフェースであり、入力装置4と接続され
るコネクタ107と、このコネクタ107に接続された
入力装置4から入力信号を得る回路部108とにより構
成されている。
【0125】109は、パソコン2などの外部機器と通
信をするための通信インターフェースであり、コネクタ
110、トランス111およびイーサーネットコントロ
ーラ112により構成されるイーサネット(R)用のイ
ンターフェースと、コネクタ113およびRS−232
C用の回路部114により構成される2組のシリアル通
信用のインターフェースとを備えている。なお、115
はセレクタである。
【0126】116は、モニタ出力インターフェースで
あり、NTSCないしVGA用のコネクタ117,11
8と、VRAMコントローラ104の制御下で取得した
VRAM105からの画像データをアナログに変換し
て、アナログ画像信号をコネクタ117,118に接続
された表示装置5に出力するD/A変換器119とによ
り構成されている。
【0127】120は、画像データ保存用記憶装置であ
り、図23の例では、SDカード121と、このSDカ
ード121に画像データなどを書込み出力するSDカー
ドコントローラ122とにより構成されている。そし
て、このほか、ストロボなどを制御するために、フォト
カプラなどを含むインターフェース123,124が設
けられている。
【0128】130は図23の通信部全体の制御などの
処理を実行するCPU、131はメインメモリ、132
はFROM(フラッシュメモリ)であり、これらCPU
130、メインメモリ131およびFROM132と、
VRAMコントローラ104および画像データ保存用記
憶装置120は、バスB1を介して相互に接続されてい
る。これらのうち、一体不可分として動作するCPU1
30およびメインメモリ131は、VRAMコントロー
ラ104の制御下で、VRAM105に記憶された画像
データを読出し自在に、VRAMコントローラ104を
介してVRAM105に接続されている。なお、133
はCPU130によりデータの読み書きが行われるSR
OMである。また、134はVMEバスコントローラで
あり、例えばFPGAにより構成される。
【0129】136はSRAMである。137は、メイ
ンコントローラ(図23ではFPGA)であり、バスB
1と、SRAM136およびVRAMコントローラ10
4が接続されたバスB2とに接続され、操作入力インタ
ーフェース106、通信インターフェース109および
インターフェース124の入出力制御を行うほか、デュ
アルポートメモリとしてデータの転送制御を行う。すな
わち、このメインコントローラ137の一部とSRAM
136とによって、CPU130と図24に示すCPU
160との間に介設され、これらの間でやりとりされる
情報の転送を行うデュアルポートメモリ135が構成さ
れるのである。このデュアルポートメモリ135につい
ては、CPU130がメインコントローラ137を経由
してSRAM136にアクセスしているときでも、図2
4に示すCPU160がバスB2を経由してSRAM1
36にアクセスすることができる一方、逆に、CPU1
60がバスB2を経由してSRAM136にアクセスし
ているときは、CPU130がメインコントローラ13
7を経由してSRAM136にアクセスすることができ
ない構成になっている。
【0130】138は、図23の通信部と図24の画像
処理部とを接続するためのコネクタであり、画像入力イ
ンターフェース101の出力およびバスB2に接続され
ている。
【0131】図24の画像処理部において、151は、
図23の通信部のコネクタ138と接続されるコネクタ
である。152は、VRAMコントローラ(ゲートアレ
イ)であり、図24ではFPGAにより構成されてお
り、コネクタ151,138を介して画像入力インター
フェース101の出力に接続されている。
【0132】153は、VRAM(SDRAM)であ
り、画像入力インターフェース101にVRAMコント
ローラ152を介して接続され、このVRAMコントロ
ーラ152のハード制御下で、画像入力インターフェー
ス101で得られた画像データを取り込んで記憶する。
なお、154は、SDRAMなどによるオーバレイメモ
リであり、VRAMの一部を構成する(図22参照)。
【0133】160は画像処理用のCPU、161はメ
インメモリ、162はメインコントローラであり、これ
らCPU160、メインメモリ161およびメインコン
トローラ162は、バスB3を介して相互に接続されて
いる。これらのうち、一体不可分として動作するCPU
160およびメインメモリ161は、VRAMコントロ
ーラ152の制御下で、VRAM153に記憶された画
像データを読出し自在に、VRAMコントローラ152
を介してVRAM153に接続されている。他方、メイ
ンコントローラ162は、オーバレイメモリ154およ
びFROM163に接続されているほか、コネクタ15
1,138を介して図23の通信部のバスB2に接続さ
れている。なお、FROM163は、メインコントロー
ラ162を介して、CPU160によりデータが読み書
きされる。
【0134】このように構成される画像処理装置の特徴
となる動作について説明すると、画像入力インターフェ
ース101で得られた画像データは、VRAMコントロ
ーラ152の制御によりVRAM153に記憶されると
ともに、VRAMコントローラ104の制御によりVR
AM105に記憶される。
【0135】一方のVRAM153に記憶された画像デ
ータは、メインメモリ161と一体不可分となって動作
するCPU160により読み出されて、従来と同様に画
像処理に利用され、その画像処理を通じて検査対象につ
いての各種外観検査測定が実行される。なお、画像処理
に必要な各種設定情報は、操作入力インターフェース1
06および通信インターフェース109の少なくとも一
方から、CPU103およびメインメモリ131、デュ
アルポートメモリ135、そしてメインコントローラ1
62を経由して、CPU160およびメインメモリ16
1に取り込まれる。
【0136】他方のVRAM105に記憶された画像デ
ータは、メインメモリ131と一体不可分となって動作
するCPU130により読み出されて例えばメインメモ
リ131に一端保持された後、画像データ保存用記憶装
置120に転送されるほか、メインコントローラ137
を介して通信インターフェース109から外部のパソコ
ン2に送信出力される。なお、画像データ保存用記憶装
置120に転送された画像データは、そのSDカード1
21に書込み出力されることになる。また、どのような
画像データを書込み出力または送信出力するかは、上述
した実施形態と同様に処理され、そして仕様のメモリ容
量に応じた複数フレーム分の画像データの記憶領域を持
つVRAM153a,105aが搭載される。
【0137】以上、本実施例によれば、検査対象の撮像
を行うカメラ3から画像データを得る画像入力インター
フェース101と、この画像入力インターフェース10
1の出力に接続されたVRAMコントローラ152,1
04と、画像入力インターフェース101にVRAMコ
ントローラ152を介して接続され、このVRAMコン
トローラ152の制御下で、画像入力インターフェース
101で得られた画像データを取り込んで記憶するVR
AM153と、VRAMコントローラ152の制御下
で、VRAM153に記憶された画像データを読出し自
在に、VRAMコントローラ152を介してVRAM1
53に接続されたCPU160およびメインメモリ16
1と、画像入力インターフェース101にVRAMコン
トローラ104を介して接続され、このVRAMコント
ローラ104の制御下で、画像入力インターフェース1
01で得られた画像データを取り込んで記憶するVRA
M105と、VRAMコントローラ104の制御下で、
VRAM105に記憶された画像データを読出し自在
に、VRAMコントローラ104を介してVRAM10
5に接続されたCPU130およびメインメモリ131
と、FPGA162を介してCPU160とCPU13
0との間に介設され、これらの間でやりとりされる情報
の転送を行うデュアルポートメモリ135とを備え、C
PU160は、VRAM153に記憶された画像データ
を用いて画像処理を実行することにより検査対象の外観
検査測定を行う一方、CPU130は、VRAM105
に記憶された画像データの出力処理を実行するので、例
えば、入力装置4を用いて入力されたVRAM105の
画像データの出力指示に従って、CPU130がVRA
M105に記憶された画像データの出力処理を行う場
合、VRAM105の画像データの出力処理からCPU
160が完全に解放されるから、また例えばCPU16
0が、デュアルポートメモリ135を経由したメッセー
ジ通信によりCPU130に対して、VRAM153に
記憶された画像データに対応するVRAM105に記憶
された画像データの出力指示をする場合でも、CPU1
60に加わる負荷が数バイト程度の出力指示データを含
む通信メッセージの送信処理のみで済むから、画像処理
を止めたりあるいは遅らせたりすることなく、画像処理
に使用された画像データを出力することができる。
【0138】
【発明の効果】以上のことから明らかなように、請求項
1記載の発明の画像処理装置は、検査対象の撮像を行う
少なくとも1台の撮像装置から画像データを得る画像入
力インターフェースと、この画像入力インターフェース
で得られた画像データを取り込んで記憶する第1画像メ
モリと、この第1画像メモリに記憶された画像データを
読出し自在に、前記第1画像メモリに接続された第1中
央処理装置および第1主記憶装置と、前記画像入力イン
ターフェースで得られた画像データを取り込んで記憶す
る第2画像メモリと、この第2画像メモリに記憶された
画像データを読出し自在に、前記第2画像メモリに接続
された第2中央処理装置および第2主記憶装置と、前記
第1中央処理装置と前記第2中央処理装置との間に介設
され、これらの間でやりとりされる情報の転送を行う中
央処理装置間通信部とを備え、前記第1中央処理装置
は、前記第1画像メモリに記憶された画像データを用い
て画像処理を実行することにより前記検査対象の外観検
査測定を行う一方、前記第2中央処理装置は、前記第2
画像メモリに記憶された画像データの出力処理を実行す
るので、例えば、入力装置を用いて入力された第2画像
メモリの画像データの出力指示に従って、第2中央処理
装置が第2画像メモリに記憶された画像データの出力処
理を行う場合、第2画像メモリの画像データの出力処理
から第1中央処理装置が完全に解放されるから、また例
えば第2中央処理装置が、中央処理装置間通信部を経由
した情報の転送により第2中央処理装置に対して、第1
画像メモリに記憶された画像データに対応する第2画像
メモリに記憶された画像データの出力指示をする場合で
も、第1中央処理装置に加わる負荷が数バイト程度の出
力指示データを含む通信メッセージの送信処理のみで済
むから、画像処理を止めたりあるいは遅らせたりするこ
となく、画像処理に使用された画像データを出力するこ
とができる。また、画像データの大容量化に伴い、SR
AMなどの容量不足の対策として用いられる記憶媒体の
保存速度ないし時間に起因する画像処理全体の能力低下
という課題も解決することができる。さらに、画像デー
タの出力の遅さに対処することができ、従来よりも多く
の情報を出力することができるため、画像処理の途中画
像の出力が可能となる。
【0139】請求項2記載の発明は、請求項1記載の画
像処理装置において、前記画像入力インターフェースの
出力に接続された第1および第2ゲートアレイをさらに
備え、前記第1画像メモリは、前記画像入力インターフ
ェースに前記第1ゲートアレイを介して接続され、この
第1ゲートアレイの制御下で、前記画像入力インターフ
ェースで得られた画像データを取り込んで記憶し、前記
第1中央処理装置および第1主記憶装置は、前記第1ゲ
ートアレイの制御下で、前記第1画像メモリに記憶され
た画像データを読出し自在に、前記第1ゲートアレイを
介して前記第1画像メモリに接続され、前記第2画像メ
モリは、前記画像入力インターフェースに前記第2ゲー
トアレイを介して接続され、この第2ゲートアレイの制
御下で、前記画像入力インターフェースで得られた画像
データを取り込んで記憶し、前記第2中央処理装置およ
び第2主記憶装置は、前記第2ゲートアレイの制御下
で、前記第2画像メモリに記憶された画像データを読出
し自在に、前記第2ゲートアレイを介して前記第2画像
メモリに接続されているので、画像入力インターフェー
スから第1および第2画像メモリへの画像データの読出
し処理が第1および第2ゲートアレイにより実行される
ので、第1および第2中央処理装置に加わる負荷を軽減
することができる。
【0140】請求項3記載の発明は、請求項1記載の画
像処理装置において、前記第1中央処理装置および第1
主記憶装置が前記第2画像メモリとデータの読出しおよ
び書込み自在にさらに接続され、前記第1中央処理装置
は、前記画像処理を実行することで生起した画像データ
の書込みを前記第2画像メモリに対してさらに行い、前
記第2中央処理装置は、前記第2画像メモリに記憶され
た各種画像データの出力処理を実行するので、画像処理
を実行することで生起した画像データを外部コンピュー
タで確認することができる。
【0141】請求項4記載の発明は、請求項2記載の画
像処理装置において、前記第1および第2画像メモリの
各々は、複数フレーム分の画像データの記憶領域を持
ち、前記第1および第2ゲートアレイは、それぞれ、前
記第1および第2画像メモリにおける記憶領域のうち、
一フレーム分の画像データの記憶領域をカレントフレー
ムの画像データの記憶領域とし、この記憶領域に、前記
画像入力インターフェースで得られた画像データを記憶
する制御を行うほか、その記憶領域に記憶した画像デー
タを一時保存する場合には、別の一フレーム分の画像デ
ータの記憶領域をカレントフレームの画像データの記憶
領域とし、この記憶領域に、前記画像入力インターフェ
ースで得られた画像データを記憶する制御を行うので、
複数フレーム分の画像データを用いた画像処理が可能に
なるほか、画像処理サイクルより画像データの出力処理
サイクルの方が長く、例えば画像データを出力する必要
のある判定結果が続く場合でも、出力すべき画像データ
がこれに続く出力すべき画像データによって上書きされ
ることがなくなり、出力すべき画像データの出力時間を
稼ぐことができるとともに、第2中央処理装置に低速の
ものを使用することが可能になる。
【0142】請求項5記載の発明は、請求項1〜4のい
ずれかに記載の画像処理装置において、外部コンピュー
タと通信をするための通信インターフェースを前記第2
中央処理装置側にさらに備え、前記第1中央処理装置
は、前記中央処理装置間通信部を経由して、前記画像処
理に必要な各種パラメータおよびその画像処理結果の少
なくとも一方を含む画像処理状況データを前記第2中央
処理装置側に送信し、前記第2中央処理装置は、前記出
力処理として、前記通信インターフェースを介して、前
記第1中央処理装置からの画像処理状況データを、対応
する画像データとともに前記外部コンピュータに送信す
るので、より好適な解析が可能となる。
【0143】請求項6記載の発明は、請求項1〜4のい
ずれかに記載の画像処理装置において、前記第2画像メ
モリに記憶された画像データを着脱式の記憶媒体に書込
み出力するための記憶装置を前記第2中央処理装置側に
さらに接続して備え、前記第1中央処理装置は、前記中
央処理装置間通信部を経由して、前記画像処理に必要な
各種パラメータおよびその画像処理結果の少なくとも一
方を含む画像処理状況データを前記第2中央処理装置に
送信し、前記第2中央処理装置は、前記出力処理とし
て、前記記憶装置を介して、前記第1中央処理装置から
の画像処理状況データを、対応する画像データとともに
前記記憶媒体に書込み出力するので、より好適な解析が
可能となる。また、オフラインの別のコンピュータで画
像データおよび画像処理状況の確認が行え、外部コンピ
ュータをオンラインで接続しておく必要がない。
【0144】請求項7記載の発明は、請求項6記載の画
像処理装置において、前記第2画像メモリは、画像デー
タの読出しおよび書込み自在に前記第2中央処理装置お
よび第2主記憶装置にさらに接続され、前記第2中央処
理装置は、前記記憶装置を介して、前記記憶媒体に書き
込まれた画像データを前記第2画像メモリに読み出し、
前記第1中央処理装置は、前記記憶媒体から前記第2画
像メモリに読み出された画像データを用いて画像処理を
再度実行するので、記憶媒体に書き込まれた画像データ
の読み出し時に生じ得る画像処理の遅れを抑制すること
ができる。
【0145】請求項8記載の発明は、請求項5〜7のい
ずれかに記載の画像処理装置において、前記第1中央処
理装置は、前記画像処理の経過中または経過後の結果に
ついて所定の判定を行い、この判定結果に従って、前記
中央処理装置間通信部を介して、前記第2中央処理装置
側に前記画像処理状況データを送信するとともに、この
画像処理状況データに対応する画像データを指定するの
で、画像処理の経過中または経過後において解析などに
必要となった画像データが出力されることになり、無用
な画像データの出力が防止され、出力された画像データ
の利用価値が高まる。
【0146】請求項9記載の発明は、請求項8記載の画
像処理装置において、前記所定の判定とは、前記画像処
理において、不良判定結果が所定数連続したか否かの判
定、不良判定率が所定率を超えたか否かの判定および所
定の異常が発生したか否かの判定の少なくとも1つの判
定を含む良否判定のことであるので、良否判定状況に応
じて必要な画像データに絞って出力することが可能とな
り、第1および第2画像メモリの記憶容量を効率的に使
用することができる。
【0147】請求項10記載の発明は、請求項8記載の
画像処理装置において、前記所定の判定とは、少なくと
も一つの判定項目についての良品不良品の判定結果が所
定率発生したか否かの判定のことであるので、良否判定
状況に応じて必要な画像データに絞って出力することが
可能となる。
【0148】請求項11記載の発明は、請求項9まはた
10記載の画像処理装置において、前記判定のための基
準は前記外部コンピュータまたは外部機器から入力され
るので、画像処理前後、画像処理中にかかわらず、判定
のための基準の設定ないし変更が可能となる。
【0149】請求項12記載の発明の画像処理システム
は、請求項5〜11のいずれかに記載の画像処理装置
と、この画像処理装置に具備された通信インターフェー
スに対応する通信インターフェースを有する外部コンピ
ュータとを備え、この外部コンピュータは、当該外部コ
ンピュータが有する通信インターフェースを介して前記
画像処理装置から得た画像処理状況データおよび画像デ
ータを用いて、前記第1中央処理装置による画像処理と
同様の画像処理を実行することにより、前記検査対象の
外観検査測定のシミュレーションを行うので、画像処理
装置の画像処理を中断することなく、外部コンピュータ
で画像処理装置と同様の画像処理を再現したシミュレー
ションにより各種確認が可能となる。
【0150】請求項13記載の発明は、請求項12記載
の画像処理システムにおいて、前記外部コンピュータ
は、前記画像処理状況データに含まれる各種パラメータ
のうち少なくとも一つのパラメータを変更する必要があ
る場合、そのパラメータを変更して前記シミュレーショ
ンを再度行い、そのシミュレーションにより最適な画像
処理結果が得られると、その最適な画像処理結果となっ
たパラメータを含むデータを前記画像処理装置に送信設
定するので、画像処理装置のパラメータの更新が可能に
なる。これにより、画像処理自体と画像処理設定の分業
を図ることのできる。
【図面の簡単な説明】
【図1】本発明に係る第1実施形態の画像処理システム
の構成図である。
【図2】本発明に係る第2実施形態の画像処理装置の構
成図である。
【図3】出力処理が送信出力である場合の画像処理シス
テムの一部構成図である。
【図4】画像処理を実行することで生起する画像データ
の例を示す図である。
【図5】本発明に係る第3実施形態の画像処理装置の構
成図である。
【図6】図5の画像処理装置の動作説明図である。
【図7】本発明に係る第4実施形態の画像処理装置の構
成図である。
【図8】図7の画像処理装置の動作説明図である。
【図9】図7の画像処理装置の動作説明図である。
【図10】図7の画像処理装置の動作説明図である。
【図11】図7の画像処理装置の動作説明図である。
【図12】本発明に係る第5実施形態の画像処理装置の
構成図である。
【図13】原画像の例を示す図である。
【図14】判定条件の設定メニュー例を示す図である。
【図15】本発明に係る第6実施形態の画像処理装置の
構成図である。
【図16】図15の画像処理装置の動作説明図である。
【図17】使用可能フラグの例を示す図である。
【図18】本発明に係る第7実施形態の画像処理システ
ムの動作説明図である。
【図19】本発明に係る第7実施形態の画像処理システ
ムの動作説明図である。
【図20】本発明に係る第7実施形態の画像処理システ
ムの動作説明図である。
【図21】本発明に係る第7実施形態の画像処理システ
ムの動作説明図である。
【図22】第1実施形態などに関連する実施例を示す図
である。
【図23】図22の通信部のより詳細な構成図である。
【図24】図22の画像処理部のより詳細な構成図であ
る。
【符号の説明】
1,1A,1B,1C,1D,1E 画像処理装置 2 パソコン 3 カメラ 4 入力装置 5 表示装置 101 画像入力インターフェース 103 A/D変換器 104 VRAMコントローラ(FPGA) 105,105a VRAM(SDRAM) 106 操作入力インターフェース 109 通信インターフェース 116 モニタ出力インターフェース 119 D/A変換器 120 画像データ保存用記憶装置 121 SDカード 122 SDカードコントローラ 130,130a,130c,130d,130e C
PU 131,131a,131c,131d,131e メ
インメモリ 135,135e デュアルポートメモリ 137 メインコントローラ 152 VRAMコントローラ(FPGA) 153,153a VRAM(SDRAM) 160,160a,160c,160d,160e C
PU 161,161a,161c,161d,161e メ
インメモリ
───────────────────────────────────────────────────── フロントページの続き (72)発明者 増田 剛 大阪府門真市大字門真1048番地松下電工株 式会社内 Fターム(参考) 2G051 AA90 AB20 CA04 EA11 EA12 EA14 EA19 EB01 EB05 5B057 AA04 BA02 CA08 CA12 CA16 CB08 CB12 CB16 CH11 DA03 DB02 5C054 AA01 CH02 EA01 EA05 EA07 FC15 GA04 GB01 GB15 GD03 GD09 HA03 HA05

Claims (13)

    【特許請求の範囲】
  1. 【請求項1】 検査対象の撮像を行う少なくとも1台の
    撮像装置から画像データを得る画像入力インターフェー
    スと、 この画像入力インターフェースで得られた画像データを
    取り込んで記憶する第1画像メモリと、 この第1画像メモリに記憶された画像データを読出し自
    在に、前記第1画像メモリに接続された第1中央処理装
    置および第1主記憶装置と、 前記画像入力インターフェースで得られた画像データを
    取り込んで記憶する第2画像メモリと、 この第2画像メモリに記憶された画像データを読出し自
    在に、前記第2画像メモリに接続された第2中央処理装
    置および第2主記憶装置と、 前記第1中央処理装置と前記第2中央処理装置との間に
    介設され、これらの間でやりとりされる情報の転送を行
    う中央処理装置間通信部とを備え、 前記第1中央処理装置は、前記第1画像メモリに記憶さ
    れた画像データを用いて画像処理を実行することにより
    前記検査対象の外観検査測定を行う一方、前記第2中央
    処理装置は、前記第2画像メモリに記憶された画像デー
    タの出力処理を実行することを特徴とする画像処理装
    置。
  2. 【請求項2】 前記画像入力インターフェースの出力に
    接続された第1および第2ゲートアレイをさらに備え、 前記第1画像メモリは、前記画像入力インターフェース
    に前記第1ゲートアレイを介して接続され、この第1ゲ
    ートアレイの制御下で、前記画像入力インターフェース
    で得られた画像データを取り込んで記憶し、 前記第1中央処理装置および第1主記憶装置は、前記第
    1ゲートアレイの制御下で、前記第1画像メモリに記憶
    された画像データを読出し自在に、前記第1ゲートアレ
    イを介して前記第1画像メモリに接続され、 前記第2画像メモリは、前記画像入力インターフェース
    に前記第2ゲートアレイを介して接続され、この第2ゲ
    ートアレイの制御下で、前記画像入力インターフェース
    で得られた画像データを取り込んで記憶し、 前記第2中央処理装置および第2主記憶装置は、前記第
    2ゲートアレイの制御下で、前記第2画像メモリに記憶
    された画像データを読出し自在に、前記第2ゲートアレ
    イを介して前記第2画像メモリに接続されたことを特徴
    とする請求項1記載の画像処理装置。
  3. 【請求項3】 前記第1中央処理装置および第1主記憶
    装置が前記第2画像メモリとデータの読出しおよび書込
    み自在にさらに接続され、 前記第1中央処理装置は、前記画像処理を実行すること
    で生起した画像データの書込みを前記第2画像メモリに
    対してさらに行い、 前記第2中央処理装置は、前記第2画像メモリに記憶さ
    れた各種画像データの出力処理を実行することを特徴と
    する請求項1記載の画像処理装置。
  4. 【請求項4】 前記第1および第2画像メモリの各々
    は、複数フレーム分の画像データの記憶領域を持ち、 前記第1および第2ゲートアレイは、それぞれ、前記第
    1および第2画像メモリにおける記憶領域のうち、一フ
    レーム分の画像データの記憶領域をカレントフレームの
    画像データの記憶領域とし、この記憶領域に、前記画像
    入力インターフェースで得られた画像データを記憶する
    制御を行うほか、その記憶領域に記憶した画像データを
    一時保存する場合には、別の一フレーム分の画像データ
    の記憶領域をカレントフレームの画像データの記憶領域
    とし、この記憶領域に、前記画像入力インターフェース
    で得られた画像データを記憶する制御を行うことを特徴
    とする請求項2記載の画像処理装置。
  5. 【請求項5】 外部コンピュータと通信をするための通
    信インターフェースを前記第2中央処理装置側にさらに
    備え、 前記第1中央処理装置は、前記中央処理装置間通信部を
    経由して、前記画像処理に必要な各種パラメータおよび
    その画像処理結果の少なくとも一方を含む画像処理状況
    データを前記第2中央処理装置側に送信し、 前記第2中央処理装置は、前記出力処理として、前記通
    信インターフェースを介して、前記第1中央処理装置か
    らの画像処理状況データを、対応する画像データととも
    に前記外部コンピュータに送信することを特徴とする請
    求項1〜4のいずれかに記載の画像処理装置。
  6. 【請求項6】 前記第2画像メモリに記憶された画像デ
    ータを着脱式の記憶媒体に書込み出力するための記憶装
    置を前記第2中央処理装置側にさらに接続して備え、 前記第1中央処理装置は、前記中央処理装置間通信部を
    経由して、前記画像処理に必要な各種パラメータおよび
    その画像処理結果の少なくとも一方を含む画像処理状況
    データを前記第2中央処理装置に送信し、 前記第2中央処理装置は、前記出力処理として、前記記
    憶装置を介して、前記第1中央処理装置からの画像処理
    状況データを、対応する画像データとともに前記記憶媒
    体に書込み出力することを特徴とする請求項1〜4のい
    ずれかに記載の画像処理装置。
  7. 【請求項7】 前記第2画像メモリは、画像データの読
    出しおよび書込み自在に前記第2中央処理装置および第
    2主記憶装置にさらに接続され、 前記第2中央処理装置は、前記記憶装置を介して、前記
    記憶媒体に書き込まれた画像データを前記第2画像メモ
    リに読み出し、 前記第1中央処理装置は、前記記憶媒体から前記第2画
    像メモリに読み出された画像データを用いて画像処理を
    再度実行することを特徴とする請求項6記載の画像処理
    装置。
  8. 【請求項8】 前記第1中央処理装置は、前記画像処理
    の経過中または経過後の結果について所定の判定を行
    い、この判定結果に従って、前記中央処理装置間通信部
    を介して、前記第2中央処理装置側に前記画像処理状況
    データを送信するとともに、この画像処理状況データに
    対応する画像データを指定することを特徴とする請求項
    5〜7のいずれかに記載の画像処理装置。
  9. 【請求項9】 前記所定の判定とは、前記画像処理にお
    いて、不良判定結果が所定数連続したか否かの判定、不
    良判定率が所定率を超えたか否かの判定および所定の異
    常が発生したか否かの判定の少なくとも1つの判定を含
    む良否判定のことであることを特徴とする請求項8記載
    の画像処理装置。
  10. 【請求項10】 前記所定の判定とは、少なくとも一つ
    の判定項目についての良品不良品の判定結果が所定率発
    生したか否かの判定のことであることを特徴とする請求
    項8記載の画像処理装置。
  11. 【請求項11】 前記判定のための基準は前記外部コン
    ピュータまたは外部機器から入力されることを特徴とす
    る請求項9まはた10記載の画像処理装置。
  12. 【請求項12】 請求項5〜11のいずれかに記載の画
    像処理装置と、 この画像処理装置に具備された通信インターフェースに
    対応する通信インターフェースを有する外部コンピュー
    タとを備え、 この外部コンピュータは、当該外部コンピュータが有す
    る通信インターフェースを介して前記画像処理装置から
    得た画像処理状況データおよび画像データを用いて、前
    記第1中央処理装置による画像処理と同様の画像処理を
    実行することにより、前記検査対象の外観検査測定のシ
    ミュレーションを行うことを特徴とする画像処理システ
    ム。
  13. 【請求項13】 前記外部コンピュータは、前記画像処
    理状況データに含まれる各種パラメータのうち少なくと
    も一つのパラメータを変更する必要がある場合、そのパ
    ラメータを変更して前記シミュレーションを再度行い、
    そのシミュレーションにより最適な画像処理結果が得ら
    れると、その最適な画像処理結果となったパラメータを
    含むデータを前記画像処理装置に送信設定することを特
    徴とする請求項12記載の画像処理システム。
JP2001289448A 2001-09-21 2001-09-21 画像処理装置および画像処理システム Expired - Fee Related JP4473479B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001289448A JP4473479B2 (ja) 2001-09-21 2001-09-21 画像処理装置および画像処理システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001289448A JP4473479B2 (ja) 2001-09-21 2001-09-21 画像処理装置および画像処理システム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2010005073A Division JP4711015B2 (ja) 2010-01-13 2010-01-13 画像処理装置および画像処理システム

Publications (2)

Publication Number Publication Date
JP2003098098A true JP2003098098A (ja) 2003-04-03
JP4473479B2 JP4473479B2 (ja) 2010-06-02

Family

ID=19111935

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001289448A Expired - Fee Related JP4473479B2 (ja) 2001-09-21 2001-09-21 画像処理装置および画像処理システム

Country Status (1)

Country Link
JP (1) JP4473479B2 (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007316977A (ja) * 2006-05-26 2007-12-06 Shibuya Kogyo Co Ltd 画像処理装置の画像データ保存方法及び画像データ処理方法
JP2008046696A (ja) * 2006-08-11 2008-02-28 Matsushita Electric Works Ltd 画像処理装置
JP2008234065A (ja) * 2007-03-16 2008-10-02 Ricoh Co Ltd 画像処理装置、画像処理方法、コンピュータプログラム及び記憶媒体
WO2008143198A1 (ja) * 2007-05-18 2008-11-27 Mega Trade Corp 外観検査システム
JP2010078487A (ja) * 2008-09-26 2010-04-08 Omron Corp 外観検査装置及びプログラム
JP2010151463A (ja) * 2008-12-24 2010-07-08 Kirin Techno-System Co Ltd オフライン演算機能を備えた検査機
JP2011047698A (ja) * 2009-08-25 2011-03-10 Panasonic Electric Works Co Ltd 外観検査装置
JP2013140052A (ja) * 2011-12-28 2013-07-18 Keyence Corp 画像処理装置及び画像処理方法
JP6068710B1 (ja) * 2016-05-30 2017-01-25 株式会社ネクスコ・エンジニアリング北海道 俯瞰画像調整装置および俯瞰画像調整プログラム
JP2017078621A (ja) * 2015-10-20 2017-04-27 株式会社デンソー 検査システム
WO2020012600A1 (ja) * 2018-07-12 2020-01-16 株式会社Fuji 画像データ保存システムおよび画像データ保存方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0528244A (ja) * 1991-07-18 1993-02-05 Shinko Electric Ind Co Ltd 画像処理装置
JPH05157537A (ja) * 1991-12-06 1993-06-22 Sumitomo Light Metal Ind Ltd 板形状計測装置
JPH05180620A (ja) * 1991-12-27 1993-07-23 Matsushita Electric Ind Co Ltd 画像処理方法
JPH05223751A (ja) * 1992-02-13 1993-08-31 Sumitomo Metal Ind Ltd 表面疵検査方法
JPH06229941A (ja) * 1993-01-29 1994-08-19 Ricoh Co Ltd 画像検査装置
JPH08105842A (ja) * 1994-08-12 1996-04-23 Toshiba Corp 表面検査装置
JPH08128960A (ja) * 1994-11-01 1996-05-21 Nabco Ltd 筒体検査機
JPH1032810A (ja) * 1996-07-15 1998-02-03 Matsushita Electric Works Ltd 画像処理検査装置
JPH10302049A (ja) * 1997-04-28 1998-11-13 Kumamoto Techno Porisu Zaidan 画像識別装置および方法および画像識別装置を備えた画像検出識別装置ならびに画像識別用プログラムを記録した媒体

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0528244A (ja) * 1991-07-18 1993-02-05 Shinko Electric Ind Co Ltd 画像処理装置
JPH05157537A (ja) * 1991-12-06 1993-06-22 Sumitomo Light Metal Ind Ltd 板形状計測装置
JPH05180620A (ja) * 1991-12-27 1993-07-23 Matsushita Electric Ind Co Ltd 画像処理方法
JPH05223751A (ja) * 1992-02-13 1993-08-31 Sumitomo Metal Ind Ltd 表面疵検査方法
JPH06229941A (ja) * 1993-01-29 1994-08-19 Ricoh Co Ltd 画像検査装置
JPH08105842A (ja) * 1994-08-12 1996-04-23 Toshiba Corp 表面検査装置
JPH08128960A (ja) * 1994-11-01 1996-05-21 Nabco Ltd 筒体検査機
JPH1032810A (ja) * 1996-07-15 1998-02-03 Matsushita Electric Works Ltd 画像処理検査装置
JPH10302049A (ja) * 1997-04-28 1998-11-13 Kumamoto Techno Porisu Zaidan 画像識別装置および方法および画像識別装置を備えた画像検出識別装置ならびに画像識別用プログラムを記録した媒体

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007316977A (ja) * 2006-05-26 2007-12-06 Shibuya Kogyo Co Ltd 画像処理装置の画像データ保存方法及び画像データ処理方法
JP2008046696A (ja) * 2006-08-11 2008-02-28 Matsushita Electric Works Ltd 画像処理装置
JP4631828B2 (ja) * 2006-08-11 2011-02-16 パナソニック電工株式会社 画像処理装置
JP2008234065A (ja) * 2007-03-16 2008-10-02 Ricoh Co Ltd 画像処理装置、画像処理方法、コンピュータプログラム及び記憶媒体
WO2008143198A1 (ja) * 2007-05-18 2008-11-27 Mega Trade Corp 外観検査システム
JP2008286692A (ja) * 2007-05-18 2008-11-27 Mega Trade:Kk 外観検査システム
JP2010078487A (ja) * 2008-09-26 2010-04-08 Omron Corp 外観検査装置及びプログラム
JP2010151463A (ja) * 2008-12-24 2010-07-08 Kirin Techno-System Co Ltd オフライン演算機能を備えた検査機
JP2011047698A (ja) * 2009-08-25 2011-03-10 Panasonic Electric Works Co Ltd 外観検査装置
JP2013140052A (ja) * 2011-12-28 2013-07-18 Keyence Corp 画像処理装置及び画像処理方法
JP2017078621A (ja) * 2015-10-20 2017-04-27 株式会社デンソー 検査システム
JP6068710B1 (ja) * 2016-05-30 2017-01-25 株式会社ネクスコ・エンジニアリング北海道 俯瞰画像調整装置および俯瞰画像調整プログラム
JP2017216489A (ja) * 2016-05-30 2017-12-07 株式会社ネクスコ・エンジニアリング北海道 俯瞰画像調整装置および俯瞰画像調整プログラム
WO2020012600A1 (ja) * 2018-07-12 2020-01-16 株式会社Fuji 画像データ保存システムおよび画像データ保存方法
JPWO2020012600A1 (ja) * 2018-07-12 2021-07-01 株式会社Fuji 画像データ保存システムおよび画像データ保存方法
JP7104786B2 (ja) 2018-07-12 2022-07-21 株式会社Fuji 画像データ保存システムおよび画像データ保存方法

Also Published As

Publication number Publication date
JP4473479B2 (ja) 2010-06-02

Similar Documents

Publication Publication Date Title
JP2003098098A (ja) 画像処理装置および画像処理システム
JP2001101396A (ja) 画像歪み補正処理装置および方法、並びに画像歪み補正処理を行うプログラムを格納した媒体
EP1892664B1 (en) Image processing device and method
EP0820039A2 (en) Image processing inspection apparatus
CN108111777B (zh) 一种暗角校正系统及方法
JP4711015B2 (ja) 画像処理装置および画像処理システム
US20210097660A1 (en) Multi-eye camera system, multi-eye photographing camera head, image processing device, multi-eye photographing program and multi-eye photographing method
JP2003255854A (ja) 表示装置の製造方法及びその製造装置
JP2002232918A (ja) カメラモジュールの画像検査装置およびカメラモジュールの画像検査方法
CN114326171B (zh) 屏幕检测方法及装置
JP2011018248A (ja) 画像処理ボード、画像処理装置、及び画像処理方法
JPH0326130A (ja) 制御装置
JP2001184018A (ja) 電子機器の表示機能の自動判定システムおよび自動判定方法
CN213659503U (zh) 图像数据处理系统、存储策略设备
WO2018225461A1 (ja) 処理装置及びコンピュータプログラム
JP7479530B1 (ja) ディスプレイ異常検出システム及びディスプレイ異常検出方法
US20240012401A1 (en) Debugging method and apparatus for production line devices and production line system
JP2009026226A (ja) 故障通知装置
JPH06243050A (ja) 情報処理装置
JP2880964B2 (ja) 表示領域切換システム
CN114967289A (zh) 色轮模组、显示面板的亮度矫正装置、方法及存储介质
JP3245217B2 (ja) 画像検査用の閾値決定装置及び画像検査装置
JPH0512409A (ja) 産業用視覚センサにおける画像処理方法
JP2023125673A (ja) 画像処理システム
JP2725837B2 (ja) グラフィックディスプレイ装置に於けるメモリカードとのデータ転送装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050613

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070418

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070605

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071016

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071210

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080325

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080424

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080604

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20080718

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100113

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100305

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130312

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130312

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130312

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140312

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees