JP3620884B2 - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP3620884B2 JP3620884B2 JP04166895A JP4166895A JP3620884B2 JP 3620884 B2 JP3620884 B2 JP 3620884B2 JP 04166895 A JP04166895 A JP 04166895A JP 4166895 A JP4166895 A JP 4166895A JP 3620884 B2 JP3620884 B2 JP 3620884B2
- Authority
- JP
- Japan
- Prior art keywords
- contour
- boundary
- image processing
- line
- line segment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Image Analysis (AREA)
Description
【０００１】
【産業上の利用分野】
本発明は画像処理装置に関するものであり、特に、輪郭線全体の長さの半分を超える部分が互に直角または平行な直線により構成される対象物を画像処理する装置の処理精度あるいは処理速度の向上に関するものである。
【０００２】
【従来の技術】
この種の画像処理対象物には、外形が直線のみにより規定されるものや、直線および曲線により規定されるもの等、種々のものがある。プリント基板等の装着対象材に装着される電子部品はその例である。電子部品の中には、リードを有さない角形チップ，コンデンサ等、全体の外形が概して四角形を成すものや、直方体状の半導体チップの２辺あるいは４辺からそれぞれリードが突出させられたフラットパッケージ型の電子部品のリードのように、電子部品の一部である画像処理対象物が概して四角形を成すものがある。
ここにおいて、「概して四角形」なる用語は、長方形や正方形のように、互いに平行な２本の直線と、それら平行直線と直交する２本の直線とによって規定され、４個の角がいずれも尖っているものは勿論、長方形や正方形の４個の角部に丸みが付けられたり面取りが施されたものや、各辺が概して直線を成すが一部に凹凸を有するものなどをも含む用語として使用する。なお、上記リードの像は、互いに平行な２側縁とそれらに直角な先端縁とを有するが、基端側の縁は必ずしも明瞭な直線とはならないことが多い。しかし、リードの輪郭を特定する場合に、基端側の縁の重要度は低く、このような場合には概して四角形と見なして差し支えない。
【０００３】
電子部品の装着対象物への装着時には、電子部品供給装置により供給される電子部品は吸着ノズル等の部品保持具によって保持された後、撮像装置により撮像される。そして、撮像により得られた画像データに基づいて、電子部品の中心の位置ずれ（位置誤差）および電子部品の中心まわりの回転位置ずれ（角度誤差）が算出され、それら誤差が修正されて装着対象材に装着される。また、電子部品の形状，寸法を求めて、電子部品が装着すべき電子部品であるか否かが判定される場合もある。これら電子部品の位置誤差および角度誤差，形状，寸法等は、多くの場合、電子部品の輪郭に基づいて取得される。
【０００４】
電子部品装着装置の画像処理装置においては一般に、撮像装置として固体イメージセンサが使用され、多くの場合、電子部品の投影像が取得される。例えば、電子部品を間に挟んで発光器，反射板等の投光体とＣＣＤ（チャージ カップルド デバイス）カメラが配置され、ＣＣＤカメラの撮像面に配列された多数の感光素子のうち電子部品に対応する感光素子への光の入射量が少なく、背景に対応する感光素子への光の入射量が多く、電荷量に差が生ずることを利用して投影像が取得されるのである。多数の感光素子から転送される電荷量に応じた電気信号をしきい値と比較し、２値化データを作成すれば、電子部品に対応する画素の画像データは０、背景に対応する画素の画像データは１になる。１個の感光素子が撮像面の１画素を構成するのである。
したがって、画像データが０である画素の集合のうちの、最も外側の画素の集合が電子部品の輪郭を表すことになる。これら画素の予め定められた点（通常は中心点であるため、以下中心点として説明する）を輪郭点、輪郭点を結ぶ線を輪郭線と称することとする。ただし、輪郭を特定するために、すべての輪郭点を特定することは不可欠ではなく、例えば、画像面上にＸ軸およびＹ軸にそれぞれ平行な複数本ずつの走査線を設定し、それら走査線上における輪郭点の集合により輪郭を特定することも可能である。
【０００５】
【発明が解決しようとする課題】
しかしながら、従来の画像処理装置においては、電子部品の輪郭を特定できないか、誤った特定が行われてしまうことがあり、あるいは特定に長時間を要する問題があった。また、画像処理対象物の輪郭から角度誤差、すなわち傾斜角度を取得すれば、取得に時間がかかる問題があった。
例えば、電子部品を保持した吸着ノズルの一部が電子部品の輪郭からはみ出せば、吸着ノズルの電子部品からはみ出した部分の輪郭が電子部品の輪郭として検出されてしまい、電子部品の正確な輪郭が得られない。吸着ノズルの電子部品からのはみ出しによるノイズデータを含んだままで画像データを処理すれば、画像処理対象物の輪郭検出精度が低下することを避け得ない。
【０００６】
ノイズデータを除去することが可能な場合もあるが、この場合には処理時間が長くなることを避け得ない。例えば、輪郭線上の複数の輪郭点を検出して輪郭を特定する場合、検出した複数の輪郭点（輪郭を規定する画素の中心点）の組合わせと吸着ノズルの半径とに基づいて、輪郭点の中から部品吸着ノズルのはみ出しにより得られた輪郭点を排除すれば、電子部品の輪郭検出精度を向上させることができる。互いに隣接する３個以上の輪郭点を１組とし、その組に属する輪郭点の組合わせを順次変えつつ、それら輪郭点が吸着ノズルの輪郭の円弧と同じ半径の円弧上に位置するか否かを判定し、判定の結果が肯定である輪郭点の組を排除するのであるが、輪郭点の組合わせ数が多く、処理に時間がかかる。その上、吸着ノズル以外の物の像が影響して輪郭検出精度が低下することを回避することができない。
【０００７】
また、撮像装置の撮像面やレンズに埃等が付着し、その影響で誤った画像データが作成され、電子部品の輪郭が正確に特定されないこともある。
さらに、電子部品自体に何らかの欠陥があるが、その欠陥は無視し、欠陥がない部分の輪郭のみに基づいて電子部品の位置等を特定したい場合もあるが、この場合にも欠陥の影響で位置検出精度等が低下することを避け得ない。
以上は、電子部品の輪郭の特定を例として説明したが、撮像対象物が何であり、撮像装置や撮像方法がいかなるものであっても同様の問題が存在する。
そこで、請求項１の発明は、輪郭線全体の長さの半分を超える部分が互いに直角または平行な直線により構成される画像処理対象物について得られた画像データにノイズデータが混入しても、画像処理対象物の傾斜角度を正確にかつ迅速に決定することができる画像処理装置を得ることを課題として為されたものであり、請求項２および３の各発明はそれぞれ、外形が、互いに平行な２本の直線と、それら平行直線に対して直角な少なくとも１本の直線とを含み、概して四角形を成す画像処理対象物について得られた画像データにノイズデータが混入しても、画像処理対象物の輪郭を正確にかつ迅速に特定することができる画像処理装置を得ることを課題として為されたものである。
【０００８】
【課題を解決するための手段】
請求項１の発明に係る画像処理装置は、上記の課題を解決するために、（Ａ）多数の画素により構成される撮像面を有し、前記画像処理対象物を撮像して各画素の入光量に対応した階調値を画像データとして取得する撮像装置と、（Ｂ）前記多数の画素の各々について取得された前記階調値に基づいて、階調値が前記画像処理対象物の像と背景の像との境界線を検出するための境界線検出用階調値に等しい多数の境界点の位置を補間演算する境界点位置決定手段と、（Ｃ）その境界点位置決定手段により決定された多数の境界点の互いに隣接するものを結ぶ線分である多数の境界線分の傾斜角度を求め、それら傾斜角度の分布から前記画像処理対象物の前記撮像面の座標軸に対する傾斜角度を決定する傾斜角度決定手段とを含むように構成される。
【０００９】
請求項２の発明に係る画像処理装置は、請求項１の発明に係る画像処理装置と同様な（Ａ）撮像装置，（Ｂ）境界点位置決定手段および（Ｃ）傾斜角度決定手段と、（Ｄ）その傾斜角度決定手段により決定された傾斜角度に基づいて画像処理対象物の輪郭を規定する輪郭規定要素を決定する輪郭規定要素決定手段とを含むように構成される。
【００１０】
【作用】
請求項１の発明に係る画像処理装置においてはまず、撮像装置によって、画像処理対象物を撮像して各画素の入光量に対応した階調値が画像データとして取得される。そして、多数の画素の各々について取得された階調値に基づいて、境界点位置決定手段により、階調値が境界線検出用階調値に等しい多数の境界点の位置が補間演算される。それら補間演算により取得された多数の境界点の互いに隣接するものを結ぶ線分である多数の境界線分の傾斜角度が、傾斜角度決定手段により求められ、それら傾斜角度の分布から画像処理対象物の撮像面の座標軸に対する傾斜角度が決定される。
画像処理対象物の像を構成する画素について得られた階調値と、背景の像を構成する画素について得られた階調値との間には、顕著な大きさの差があり、その差の境界位置が画像処理対象物の境界位置である。この境界位置は、画像処理対象物に属する画素の位置データ（座標値）および階調値と、背景の像を構成する画素の位置データおよび階調値とに基づく補間演算により取得可能である。
階調値は、例えば、各画素における照度を表すものとすることができる。この場合、照度値がしきい照度値である位置が境界位置となる。境界線のデータは、全境界位置を表すデータでもよく、複数の走査線上等、特定の境界位置を表すデータの集合であってもよい。
上記のように、多数の境界線分の傾斜角度の分布から傾斜角度が決定される場合は、境界線データにノイズデータが混入していても支障なく画像処理対象物の傾斜角度が決定される。
画像処理対象物の傾斜は輪郭線の傾斜であり、互いに直角または平行な直線が輪郭線全体の長さの半分を超える画像処理対象物の場合、それら互いに直角または平行な直線が撮像面の座標軸に対して成す傾斜角度を画像処理対象物の傾斜角度とすることができる。互いに直角な２本の直線は、位相を９０度異にするが、撮像面の座標軸に対する傾斜角度は同じであり、画像処理対象物の輪郭線全体の長さの半分を超える直線により得られる傾斜角度が画像処理対象物の傾斜角度とされる。
【００１１】
なお、ここにおいて「輪郭」とは、撮像される物の外形を規定する外側輪郭であることもあり、撮像される物の外形線の内側に設けられた模様や凹凸等を規定する内側輪郭であることもあり、外側輪郭と内側輪郭との両方であることもある。光源と感光素子とが画像処理対象物を挟んで反対の位置に設けられ、いわゆるバックライトにより画像処理対象物の投影像が取得される場合は外側輪郭が得られる。光源と感光素子とが画像処理対象物に対して同じ側に設けられ、いわゆるフロントライトにより画像処理対象物の正面像が取得される場合は内側輪郭のみ、または内側輪郭と外側輪郭との両方が得られる。
【００１２】
請求項２の発明に係る画像処理装置においては、傾斜角度決定手段により決定された傾斜角度に基づいて、輪郭規定要素が決定される。境界点位置決定手段により決定された多数の境界点の位置のデータには、前述のように、吸着ノズルの輪郭等に基づくノイズデータが混入することがあるが、画像処理対象物が概して四角形を成すことを利用すれば、ノイズデータを除去することができる。ただし、画像処理対象物が撮像面の座標軸に対して傾斜していることもあるため、まず、傾斜角度決定手段により、境界線データに基づいて画像処理対象物の傾斜角度が決定され、その上で、輪郭規定要素決定手段により画像処理対象物の輪郭を規定する輪郭規定要素が決定される。「輪郭規定要素」とは、例えば、画像処理対象物の輪郭を規定する複数の直線もしくは複数の頂点、あるいは直線と頂点との組合わせであり、輪郭規定要素の決定前に傾斜角度を決定することは一見不可能なようであるが、画像処理対象物がほぼ四角形であることが予め判っている場合には、後に実施例において説明するように、輪郭規定要素より前に傾斜角度を決定することができるのである。輪郭規定要素が直線である場合には、その直線を表す式やその直線上に位置する複数の点の座標の集合で表され、頂点である場合にはその座標で表される。
【００１３】
【発明の効果】
このように請求項１の発明によれば、対象物の撮像により取得された画像データにノイズデータが混入していても、対象物の傾斜角度を正確にかつ迅速に決定することができる。
請求項２の発明によれば、対象物の撮像により取得された画像データにノイズデータが混入していても、輪郭規定要素の決定前に傾斜角度を決定することによって、画像処理対象物の輪郭を正確にかつ迅速に特定することができる。
【００１４】
【発明の望ましい実施態様】
以下、本発明の望ましい実施態様を列挙するとともに、必要に応じて関連説明を行う。
【００１５】
(1)前記輪郭規定要素決定手段が、
前記境界点位置決定手段により決定された多数の境界点の集合により構成される境界線に属し、傾斜角度が前記傾斜角度決定手段により決定された傾斜角度とほぼ等しい線分を前記画像処理対象物の輪郭線の構成要素である輪郭候補線分として抽出する輪郭候補線分抽出手段と、
その輪郭候補線分抽出手段により抽出された輪郭候補線分群から、互いに直角であって、端点間の距離が設定値以下である２本の輪郭候補線分を輪郭線分として選出する輪郭線分選出手段と、
その輪郭線分選出手段により選出された輪郭線分の群に基づいて前記輪郭規定要素を決定する手段と
を含むことを特徴とする請求項２に記載の画像処理装置（請求項３）。
画像処理対象物の傾斜角度にほぼ等しい角度で傾斜した線分が必ずしも輪郭線分であるとは限らず、輪郭候補線分から輪郭線分が選出される。
(2)さらに、前記輪郭規定要素決定手段により決定された輪郭規定要素と画像処理対象物の寸法データとに基づいて、画像処理対象物が目標とする対象物であるか否かの判定を行う判定手段を含む請求項２または (1) 項に記載の画像処理装置（請求項４）。
(3)前記境界点位置決定手段が、前記撮像面を構成する多数の画素の各々について得られた画像データが表す背景の階調値と、前記画像処理対象物の階調値とに基づいて、前記境界線検出用階調値を算出する境界線検出用階調値決定手段を含む請求項１，２， (1) 項， (2) 項のいずれかに記載の画像処理装置（請求項５）。
撮像装置は、画像処理対象物に光を照射し、画像処理対象物の像を得るのであるが、光源が画像処理対象物の背後から光を照射するバックライトであって撮像面に画像処理対象物の投影像が形成される場合でも、光源が画像処理対象物の正面から光を照射するフロントライトであって、撮像面に画像処理対象物の正面像が形成される場合でも、撮像面を構成する画素のうち、画像処理対象物に対応する画素と背景に対応する画素とでは光の入射量や波長分布等光学的特性が異なり、画像処理対象物に対応する画素の階調値と背景に対応する画素の階調値とが異なる。そのため、境界線検出用階調値を決定し、多数の画素の画像データが表す階調値に基づいて境界点位置を決定することができる。
例えば、実施例の項において述べるように、画像データが照度値（入光量）を表す階調値で作成される場合、しきい照度値を設定して境界線検出用階調値とし、各画素の照度値と座標値とに基づいて照度値がしきい照度値となる点の座標値を補間演算し、得られた座標値で境界点位置を表すことができる。
(4)前記境界点位置決定手段が、中心が前記境界線の両側に位置しかつ互いに隣接する２個の画素の前記階調値に基づいて、それら２個の画素の中心を結ぶ格子線分上において階調値が前記境界線検出用階調値になる境界点の位置を補間演算するものである請求項１，２， (1) 項ないし (3) 項のいずれかに記載の画像処理装置（請求項６）。
【００１６】
【実施例】
以下、本発明を電子部品装着装置の画像処理装置に適用した実施例を図面に基づいて詳細に説明する。
図１に画像処理装置の構成を概略的に示す。１０は部品吸着ノズルであり、負圧により電子部品１２を吸着する。電子部品１２は長方形のものであり、本来は互いに直角な２辺がそれぞれＸ軸とＹ軸とに平行な姿勢で吸着ノズル１０に吸着されるべきものであるが、誤差として比較的小さい傾斜角度が生ずるものとする。
部品吸着ノズル１０には光源としての発光体１４が取り付けられており、電子部品１２に背後から光を照射する。発光体１４はバックライトなのである。発光体１４は板状を成し、乳白色の拡散板により覆われた多数の発光ダイオードを備えており、拡散板から下方へ光を放射する。発光体１４から照射され、電子部品１２の輪郭の外側を通った光はレンズ１６により集光され、ＣＣＤカメラ１８に入光させられる。
【００１７】
ＣＣＤカメラ１８は、図２に示すように、多数の感光素子２０が平面状に配列されて成る固体撮像器によって構成された撮像面２２を備えており、各感光素子２０にはそれぞれ入射した光の量に応じた電荷が蓄積され、電荷量に応じた電気信号である電圧信号が感光素子２０毎に出力される。この電圧信号はアナログ信号であり、ＣＣＤカメラコントローラ２４からデータ処理装置２６へ送られて電子部品１２のサイズ，中心位置，傾斜角度等が求められる。データ処理装置２６は映像信号受信器２８を備えており、ＣＣＤカメラコントローラ２４から出力された電圧信号は映像信号受信器２８によって受信された後、画像メモリコントローラ３０へ出力され、画像メモリコントローラ３０によって画像メモリ３２に格納される。
【００１８】
画像メモリ３２は、各々撮像面２２の各画素（固体撮像器の各感光素子）に対応付けられ、各画素のＸ，Ｙ座標値により指定可能な１バイト（８ビット）ずつの記憶領域を多数有している。各記憶領域には各感光素子２０の照度を２５６階調で表すデータが格納可能とされているのであり、画像メモリコントローラ３０は、映像信号受信器２８から送られて来た映像信号に基づいて階調データを生成し、画像メモリ３２の所定の記憶領域に記憶させる。
【００１９】
データ処理装置２６は、ＣＰＵ３４を有している。ＣＰＵ３４には、データ処理実行等のためのプログラムを記憶するＲＯＭにより構成されるプログラムメモリ３６と、ＲＡＭにより構成されるワーキングメモリ３８とが接続されており、ＣＰＵ３４がデータ処理プログラムに従って電子部品１２について取得された画像データを処理することにより、吸着された電子部品１２が装着すべき電子部品１２であるか否かの判定，電子部品１２のサイズ，中心位置，傾斜角度の演算等が行われる。ＣＰＵ３４にはまた、ＣＲＴインタフェース４０を介してモニタディスプレイ装置としてのＣＲＴ装置４２が接続されており、データ処理の経過および結果等がＣＲＴ装置４２の画面４４（図７参照）に表示される。なお、ここでは理解を容易にするために、画面４４の最小構成単位は撮像面２２の１画素に対応させられているものとする。
【００２０】
以下、ＣＣＤカメラ１８の撮像により得られた画像データの処理を説明する。
まず、画像メモリ３２に記憶された撮像面２２の全部の画素の照度（感光素子２０の電圧）に対応する階調データに基づいて、図３に示すヒストグラムが作成される。このヒストグラムの横軸は２５６階調で表される電圧値、縦軸は画素数である。電子部品１２の像を形成する感光素子２０と、背景の像を形成する感光素子２０とでは入光量が大きく異なり、ヒストグラムを作成すれば、大小２つのピーク値Ａ1 ，Ａ2 が得られる。
【００２１】
この２つのピーク値Ａ1 ，Ａ2 に基づいて電子部品１２と背景との境界線を決定するしきい値が演算される。大きい方のピーク値Ａ2 から小さい方のピーク値Ａ1 を引いた値の６５パーセントに相当する値をピーク値Ａ1 に加えた値がしきい値とされる。発光板１４が電子部品１２に対してＣＣＤカメラ１８とは反対側に設けられたバックライトであり、撮像面２２には電子部品１２の投影像が形成されるため、電圧値（照度値）がしきい値より大きい画素は背景の像を形成する画素であり、しきい値より小さい画素は電子部品１２の像を形成する画素であることとなる。
【００２２】
このしきい値に基づいて電子部品１２の像を表す画素のうちで最も外側に位置する画素（以下、境界線構成画素と称する）が検出される。まず、電圧値がしきい値以下である画素が検出される。図４に示すように、部品吸着ノズル１０の中心位置Ｏ（撮像面２２の原点位置と一致させられている）から出発し、撮像面２２のＸ軸方向において正方向側に位置する画素の１つ１つについて、電圧値がしきい値以下であるか否かが判定される。当初、電圧値はしきい値より小さく、電圧値がしきい値より大きい画素が検出されれば、境界線検出方向が変えられ、Ｙ軸方向を正方向側に進んで境界線構成画素の検出が行われる。境界線構成画素の検出は、反時計方向に行われるのである。
【００２３】
例えば、前記２つのピーク値Ａ1 ，Ａ2 がそれぞれ２０，２００であり、しきい値が１３７であるとすれば、図５に示すように、電圧値が１２７の画素に隣接し、電圧値が１５１である画素が検出されたならば、この画素にＸ軸方向において負方向側に隣接する画素（電圧値が１２７である画素）が境界線構成画素とされる。次に、その境界線構成画素に対してＹ軸方向において正方向側に隣接する画素の電圧値が調べられる。境界線検出方向が変えられるのであり、この画素の電圧値がしきい値以下であれば、この画素にＸ軸方向において正方向側に隣接する画素の電圧値が調べられ、しきい値より大きければ、この電圧値がしきい値より大きい画素にＸ軸方向において負方向側に隣接する画素が境界線構成画素とされる。
なお、境界線検出方向が変えられた後、電圧値がしきい値以下である画素に対してＸ軸方向において正方向側に隣接する画素の電圧値もしきい値以下であれば、更にＸ軸方向において正方向側に隣接する画素の電圧値がしきい値以下であるかが調べられる。電圧値がしきい値より大きい画素が見つかるまでＸ軸方向において正方向側に隣接する画素の１つ１つについて電圧値が調べられる。
【００２４】
Ｙ軸方向を正方向に進んで境界線構成画素の検出が行われ、角に至れば、境界線構成画素（電圧値が１２８である画素）に対してＹ軸方向において正方向側に隣接する画素（電圧値が１５６である画素）の電圧値がしきい値より大きくなる。そのため、境界線検出方向が変えられ、境界線構成画素に対してＸ軸方向において負方向側に隣接する画素（電圧値が１１６である画素）の電圧値がしきい値以下であるか否かが調べられ、しきい値以下であれば、その画素に対してＹ軸方向において正方向側に隣接する画素（電圧値が１５１である画素）の電圧値がしきい値以下であるか否かが調べられる。この画素の電圧値がしきい値より大きければ、この画素にＹ軸方向において負方向側に隣接する画素が境界線構成画素とされ、次にこの境界線構成画素についてＸ軸方向において負方向側に隣接する画素の電圧値がしきい値以下であるか否かが調べられる。
【００２５】
Ｘ軸方向あるいはＹ軸方向において隣接する２個ずつの画素の一方の電圧値がしきい値以下であり、他方の電圧値がしきい値より大きいとき、電圧値がしきい値以下である画素が境界線構成画素とされ、電圧値がしきい値より大きい画素が背景構成画素とされる。境界線構成画素の位置データ（境界線構成画素の中心の撮像面２２上における座標値）は、隣接する背景構成画素の位置データ（背景構成画素の中心の撮像面２２上における座標値）および方向データと共にワーキングメモリ３８の境界線構成画素データメモリに記憶される。方向データとは、境界線構成画素がほぼ撮像面２２のＸ軸方向に延びる境界線を構成する画素であるか、ほぼＹ軸方向に延びる境界線を構成する画素であるかのデータである。いずれの方向に延びる境界線を構成する画素であるかは、境界線構成画素の検出方向からわかる。電圧値がしきい値以下である画素を境界線構成画素であると決定した背景構成画素が、境界線構成画素とＸ軸方向において隣接する場合には、その境界線構成画素はほぼＹ軸方向に延びる境界線を構成する画素であり、Ｙ軸方向において隣接する場合には、境界線構成画素はほぼＸ軸方向に延びる境界線を構成する画素であり、画素毎に方向データが付される。図５において電圧値が１２８である画素のように角の画素、あるいは４５度に近い角度で傾斜した境界線を構成する画素についてはＸ軸方向とＹ軸方向との両方向において背景構成画素が隣接する。この場合にはＸ軸方向とＹ軸方向との両方の方向データが付される。
【００２６】
以上のようにして、反時計方向で境界線構成画素の検出が行われ、最初に検出された境界線構成画素（図５において電圧値が１２７である画素）が再び検出されたならば、すべての境界線構成画素の検出が終了したとしてＣＲＴ装置４２に境界線が表示される。図６に示すように、部品吸着ノズル１０が電子部品１２を輪郭線から外へはみ出して吸着したとすれば、ＣＲＴ装置４２の画面４４には、図７に示すように電子部品１２および部品吸着ノズル１０の輪郭線により構成される境界線（正確には境界線構成画素の集合）４６が表示される。
【００２７】
次いで、電子部品１２の撮像面２２の座標軸に対する傾斜角度が決定される。まず、境界線構成画素と、その境界線構成画素に対して境界線を間に挟んで隣接する画素との２個の画素の位置と電圧値とに基づく補間演算により、それら２個の画素の中心間に、電圧値がしきい値になると推定される境界点が決定される。
境界線を間に挟んで隣接する２個の画素の一方は、境界線構成画素であり、他方は背景構成画素である。これらは境界線構成画素の検出時に対にされてワーキングメモリ３８の境界線構成画素データメモリに記憶されており、これら隣接する２個の画素の座標値と電圧値とから比例計算により電圧値がしきい値となる境界点の座標値が決定される。決定された境界点の位置データ（撮像面２２上における座標値）は、その境界点が境界線のほぼＸ軸方向に延びる部分を構成するか、ほぼＹ軸方向に延びる部分を構成するかを表す方向データと共にワーキングメモリ３８の境界点データメモリに記憶される。境界点の属性を表す属性データの一種である方向データが、境界点の位置データと共に記憶されるのである。
【００２８】
全部の境界線構成画素および隣接する背景構成画素に基づいて境界点位置が決定されたならば、これら多数の境界点のうち、隣接する２個を一対とし、それら境界点対を結ぶ線分を境界線分とし、それら境界点対の座標値に基づいて境界線分のＸ軸とＹ軸とのいずれか一方に対する傾斜角度が演算される。
境界点対が境界線のほぼＸ軸方向に延びる部分を構成するか、ほぼＹ軸方向に延びる部分を構成するかによって、得られる傾斜角度が９０度（またはπ／４ラジアン）異なる。そのため、全部の境界点対に基づいて演算された傾斜角度を用いてヒストグラムを作成すれば、２つピーク値が得られ、大きい方の傾斜角度から９０度（またはπ／４ラジアン）を引いた値と、小さい方の値との平均値が求められ、電子部品１２の撮像面２２の座標軸に対する傾斜角度とされてワーキングメモリ３８の傾斜角度メモリに記憶される。また、得られた傾斜角度は、図８に示すようにＣＲＴ装置４２に線分４８で表示される。なお、図８には、傾斜角度と境界線４６との関係をわかり易くするために、境界線４６が二点鎖線で示されているが、実際には境界線４６は画面４４に表示されない。
【００２９】
次に、境界点位置データおよび傾斜角度データに基づいて、境界線の中から、電子部品１２の像の輪郭を形成する輪郭線分の候補である輪郭候補線分が抽出される。輪郭候補線分の抽出は、境界点の中から、電子部品１２の傾斜角度とほぼ等しい角度で傾斜した線分を構成する境界点を抽出することにより行われる。
【００３０】
多数の境界点のうちの任意の一つが仮に輪郭候補線分の始点とされて、その境界点に始点データが付されるとともに、その境界点を通り、傾斜角度が電子部品１２の傾斜角度に等しい直線の式（１）または（２）が演算される。境界点が、境界線のほぼＸ軸方向に延びる部分を構成する場合には、直線の一次係数として傾斜角度θに対応する値ａが用いられ、Ｙ軸方向に延びる部分を構成する場合には、傾斜角度（θ＋９０）に対応する値ｃが用いられる。
ｙ1 ＝ａｘ1 ＋ｂ1 ・・・・（１）
ｘ1 ＝ｃｙ1 ＋ｄ1 ・・・・（２）
【００３１】
ここでは、図４に示したように部品吸着ノズル１０の中心位置Ｏから出発して撮像面２２のＸ軸方向に向かって走査された場合に検出された境界線構成画素に対応する境界点が輪郭線候補線分を構成する境界点であるか否かが判定されるものとする。この場合には、境界線はほぼＹ軸方向に延びているのが普通であるから、まず（２）式の演算が行われ、続いて、隣接する境界点を通り、傾斜角度が電子部品１２の傾斜角度に等しい直線の式（３）が演算され、この直線式のｘ切片が（４）式を満足するか否かにより、２番目の境界点が１番目の境界点と共に電子部品１２の傾斜角度とほぼ等しい角度で傾斜する境界線分を構成するか否かが判定される。（４）式は、ある境界点が電子部品１２の傾斜角度とほぼ等しい角度で傾斜する輪郭線分を構成するか否かを判定するために、それより前に判定が行われたすべての境界点（始点データが付された境界点に続くすべての境界点）の座標値に基づいて得られた直線式の各ｘ切片の値の平均値にΔｄを加減することによりｘ切片の範囲を設定する式であり、この設定範囲内にｘ切片の値があれば、そのｘ切片が得られた境界点は、始点データが付された境界点を始点とする輪郭候補線分を構成する点とされるのである。
ｘ2 ＝ｃｙ2 ＋ｄ2 ・・・・（３）
【００３２】
【数１】
【００３３】
始点データが付された境界点から現に判定が行われる境界点までのすべての境界点が同じ輪郭候補線分を構成する点であることを正確に判定するためには、すべての境界点が、勾配がｃでｘ軸方向の幅が２Δｄである帯状の領域内に存在することを確認する必要があり、（４）式のｄn をｄ1 ，ｄ2 ，ｄ3 ・・・，ｄn に変更する必要がある。本発明はこの判定手段を排除するものではないが、計算量が多くなって処理時間が延びるため、過去の境界点についての判定は行わず、新たな境界点のみについて判定を行うこととしたのである。
このようにして判定する場合には、始点データが付された境界点やそれに近接する境界点が実際には輪郭候補線分を構成する点ではないにもかかわらず、輪郭候補線分を構成する点であると判定される可能性がある。ｘ切片の平均値は、平均されるｘ切片の数の増加に従って変化し、この変化は判定される境界点が始点データが付された境界点から離れるに従って、すなわち、平均されるｘ切片の数が多くなるに従って小さくなるのが普通であるが、始点データが付された境界点やそれに近接した境界点の判定時にはかなり大きく変化する可能性があり、そのため、例えば、始点データが付された１番目の境界点に隣接する２番目の境界点は（４）式を満足し、３番目の境界点も（４）式を満足するが、その３番目の境界点の判定時における（４）式を１番目の境界点が満足しないことはあり得るのである。しかし、誤って輪郭候補線分を構成する点であると判定される境界点の数はそれほど多くないため、この誤りは実用上問題にならない。
【００３４】
上記の判定を繰り返すうち、ｘ切片の値が設定範囲から外れる境界点が現れれば、その境界点は輪郭候補線分を構成する点ではないと判定され、その境界点自体に始点データが付されるとともに、その境界点より１個前の境界点に終点データが付される。以下、始点データが付された境界点以降の境界点について上記の場合と同様の判定が実行される。
なお、始点データが付された境界点から終点データが付された境界点までの境界点の位置データの群が、始点データおよび終点データと共に輪郭候補線分データとしてワーキングメモリ３８の輪郭候補線分データメモリに記憶されるのであるが、同じ輪郭候補線分を構成する境界点と判定された境界点の数が設定個数以下である場合には、これら境界点により構成される直線は実際に輪郭線分である可能性はないとして、輪郭候補線分データメモリから削除される。すなわち、長さ下限値より長い直線でなければ輪郭候補線分とはされないのであり、これによりノイズデータの影響の一部が排除される。
また、輪郭候補線分データメモリに記憶された輪郭候補線分データの作成時に設定されていた最後のｘ切片の設定範囲が後の処理のために、輪郭候補線分データメモリに記憶された輪郭候補線分データと関連付けられてワーキングメモリ３８の設定範囲データメモリに記憶される。
【００３５】
判定される境界点が電子部品の角部を規定する境界点になれば、その境界点について得られる直線式のｘ切片の値が設定範囲から外れる。ただし、ｘ切片の値が設定範囲から外れても、ノイズデータによって外れたのか、角であるため外れたのかはわからない。また、電子部品１２の角はほぼ直角に尖っていることが予定されており、理想的には角に対応する境界点の方向データはＸ，Ｙ両方向であるはずであるが、実際には電子部品の角に多少の丸みが付いていることもあるため、境界線の角部近傍においては各境界点の方向データがＸ軸方向となったり、Ｙ軸方向となったり、あるいは両方向となったりする。
そのため、境界点に付された方向データが両方向のデータである場合には、その境界点が輪郭候補線分を構成することはあり得ないと判定されて、その境界点を通る直線およびそれの切片の演算、ならびに切片が設定範囲内にあるか否かの判定のすべてが省略されるとともに、その直前に輪郭候補線部を構成すると判定された境界点に終点データが付される。そして、再び方向データがＸ軸方向あるいはＹ軸方向である境界点が現れれば、その境界点に始点データが付され、方向データがＹ軸方向データであれば前記（４）式を用いた判定が行われ、Ｘ軸方向データであれば、下記（５）式によりｙ切片ｂn が求められ、（６）式を用いた判定が行われる。なお、Δｂは前記Δｄと同じ大きさの微小値である。
ｙn ＝ａｘn ＋ｂn ・・・・（５）
【００３６】
【数２】
【００３７】
境界点が連続してほぼＸ軸方向に延びる輪郭候補線分を構成するようになれば、すなわち境界点について演算された直線式のｙ切片がそれに先立って演算された直線式のｙ切片の値に基づいて設定される範囲内に収まるようになれば、それら連続する境界点のデータが輪郭候補線分データとして輪郭候補線分データメモリに記憶される。
【００３８】
境界線を１周し、１番最初に直線式が演算された境界点に戻ってきたとき、その境界点について再度直線式が演算され、その直線式のｘ切片が設定範囲内にあれば、その境界点は輪郭候補線分の途中にある点であって始点ではないとして、その境界点に先に付された始点データが消去される。その境界点の前後の境界点が１本の輪郭候補線分を構成する状態とされるのである。
【００３９】
すべての輪郭候補線分が求められたならば、図９に示すように、ＣＲＴ装置４２に輪郭候補線分が表示される。図から明らかなように、部品吸着ノズル１０の電子部品１２からはみ出した部分により構成される円弧部分は、ほぼＸ軸方向およびＹ軸方向に延びる一部分を除いて傾斜角度が電子部品１２の傾斜角度と異なるため、輪郭候補線分として抽出されず、ここでもノイズデータ（部品吸着ノズル１０のはみ出しに基づくノイズデータ）の影響の一部が排除される。
また、境界点が輪郭候補線分を構成する点であるか否かは、境界点１つ１つについて調べられるため、角部の検出に遅れがなく、輪郭候補線分を角のすぐ近くまで精度良く抽出することができる。
【００４０】
続いて、抽出された輪郭候補線分の群から、輪郭線分が選出される。ほぼＸ軸方向に延びる一対の輪郭候補線分と、それら輪郭候補線分の延長線間にあって、輪郭候補線分に直角な別の輪郭候補線分との組が取り出される。ほぼＸ軸方向に延びるかほぼＹ軸方向に延びるかは、輪郭候補線分を構成する境界点のデータに付された方向データからわかる。
【００４１】
電子部品１２を例に取れば、まず、図１０に示すように、抽出された輪郭候補線分ａ，ｂ，ｃ，ｄ，ｅ，ｆの群から、Ｘ軸に平行な一対の輪郭候補線分ａ，ｄと、それら輪郭候補線分ａ，ｄの延長線間にあって、輪郭候補線分ａ，ｄに直角な輪郭候補線分ｃとの組が取り出される。輪郭候補線分ａとｄとの間には、直角な輪郭候補線分が２本（ｂ，ｃ）あり、Ｘ軸方向に平行な一対の輪郭候補線分がＸ軸方向において負側へ延長されるときには、それら延長線間にある輪郭候補線分のうち、Ｘ座標値が小さい方の輪郭候補線分が先に取り出されるのである。なお、Ｘ軸方向に平行な一対の輪郭候補線分がＸ軸方向において正側へ延長されるとき、それら延長線間に複数本の直角な輪郭候補線分があれば、それら輪郭候補線分のうち、Ｘ座標値が大きい方の輪郭候補線分から先に取り出される。
そして、ほぼＸ軸に平行な一方の輪郭候補線分ａと、直角な輪郭候補線分ｃとの端点間の距離が設定値以下であるか否かが判定される。輪郭候補線分の抽出時に、各輪郭候補線分の始点と終点とにはそれぞれ始点データおよび終点データが付されており、端点間の距離が設定値以下であるか否かが判定される２本の輪郭候補線分のうち、輪郭候補線分の抽出方向において上流側に位置する輪郭候補線分、すなわち輪郭候補線分ａの終点と下流側に位置する輪郭候補線分、すなわち輪郭候補線分ｃの始点とについて、それらの間の距離が設定値以下であるか否かが判定される。
【００４２】
図１０に示すように、電子部品１２の場合、輪郭候補線分ａと輪郭候補線分ｃとの間の距離が設定値より大きいため、これら輪郭候補線分ａ，ｃにより規定される角は電子部品１２の角ではないと判定される。それに対して、輪郭候補線分ｃとｄとの間の距離は設定値より小さいため、これら輪郭候補線分ｃ，ｄにより規定される角は電子部品１２の角であり、かつ輪郭候補線分ｃとｄとは輪郭線分であると判定される。
次に、輪郭候補線分ａ，ｂ，ｄの組について同様の判定が行われるが、これら輪郭候補線分の始点と終点との距離はいずれも設定値より大きいため、これら輪郭候補線分ａ，ｂ，ｄの組は電子部品１２の輪郭を規定する組ではないと判定される。
輪郭候補線分ｆ，ｃ，ｄの組についても同様な判定が行われる。輪郭候補線分ｂは、輪郭候補線分ｆ，ｄの各延長線の間にないため、判定は行われない。輪郭候補線分ｃとｄとの組は輪郭線分であると判定されるが、輪郭候補線分ｆとｃとの組は輪郭線分ではないと判定される。
輪郭候補線分ａ，ｂ，ｆの組についても同様な判定が行われるが、輪郭候補線分ａとｂとの組，輪郭候補線分ｆとｂとの組はいずれも始点，終点間の距離が設定値より大きいため、輪郭線分の組ではないと判定される。
【００４３】
次に、図１１に示すように、輪郭候補線分ｄ，ｅ，ｆの組が取り出され、同様の判定が行われるが、ほぼＸ軸に平行な輪郭候補線分ｄと直角な輪郭候補線分ｅとの始点，終点間の距離、および輪郭候補線分ｆとｅとの始点，終点間の距離はいずれも設定値以下であるため、輪郭候補線分ｄとｅとの組、輪郭候補線分ｆとｅとの組はいずれも電子部品１２の角を規定するものであり、輪郭線分であると判定される。
【００４４】
輪郭候補線分ａ，ｅ，ｄの組についても同様な判定が行われ、輪郭候補線分ｄとｅとの組は輪郭線分であると判定されるが、輪郭候補線分ａとｅとの組は輪郭線分の組ではないと判定される。
なお、ほぼＸ軸方向に平行な一対の輪郭候補線分の延長線間に直角な輪郭候補線分がなければ、輪郭線分の選出は行われない。
以上の処理の結果、輪郭候補線分ｃ，ｄ，ｅ，ｆが輪郭線分として選出される。
【００４５】
以上で輪郭線分の選出処理を終了することも可能であるが、本実施例においては、輪郭線分選出の信頼性を高めるために、さらに確認処理が行われるようになっている。
この処理の第一段階は、複数の輪郭線候補線分のうち、複数本に分かれてはいるが、実際には１本の輪郭線分の複数部分である輪郭線分の群を捜す処理である。図９において、輪郭線分ｄは１本の直線となっているが、例えばこの直線で表される電子部品１２の辺の像に比較的小さい欠陥があったとすれば、この欠陥に基づくノイズデータの影響によって輪郭線分ｄは複数本の直線に分断される。そのような場合に、これら複数本の輪郭線分が一直線上に位置することが確認されれば、これら複数本の輪郭線分を１本の輪郭線分の各一部として扱うことができる。複数本の輪郭線分が一直線上に位置するか否かの判定は、それら複数本の輪郭線分に関連付けて前記設定範囲データメモリに記憶されたｘ切片あるいはｙ切片の設定範囲が実質的に一致するか否か、具体的には、例えば両設定範囲の上限値と下限値との中間値の差が設定差以下であるか否かによって行われる。
【００４６】
このようにして、互いに一直線上に位置すると判定された複数本の輪郭線分の長さの総和が演算され、この総和が総和下限値以上であれば、それら輪郭線分が真に輪郭線分であることが確認される。このようにすれば、画像の比較的小さい欠陥により輪郭線分が短い輪郭線分に分断された場合でも、高い信頼性をもって輪郭線分を特定することができる。換言すれば、総和が総和下限値より短ければ、これら輪郭線分は輪郭線分ではないとされるのであり、これによって、ノイズデータに基づいて偶然に複数の輪郭線分が一直線上に並んだ場合との混同を避けることができる。
【００４７】
なお、本実施例においては、上記確認が輪郭線分の選出後に行われるようにされているが、輪郭線分の選出前に同様の処理が行われ、判定の結果が肯定になった輪郭候補線分の中からのみ輪郭線分の選出が行われるようにすることも可能である。
また、実質的に一直線上に位置すると判定された複数の輪郭候補線分のうち、両端に位置する一方の輪郭候補線分の始点から他方の輪郭候補線分の終点までを１本の輪郭候補線分に置き換え、その輪郭候補線分について輪郭線分の選出が行われるようにすることも可能である。このようにすれば、短く分断された輪郭候補線分が多数生じた場合における輪郭線分選出に要する処理時間を短縮することができる。
これら２つの態様の場合には、本処理は確認処理ではなく、輪郭線分選出の第一段階処理であると考える方が自然である。
【００４８】
図９の例において、輪郭候補線分ｃ，ｄ，ｅが十分な長さを有しているが、輪郭候補線分ｆは比較的短い。しかも、この輪郭候補線分ｆと一直線上に位置する他の輪郭候補線分はないため、一直線上に位置する輪郭候補線分の長さの総和は、輪郭候補線分ｆ自体の長さと同じである。したがって、輪郭候補線分ｆの長さが長さ下限値より短く、輪郭候補線分ではないとすれば、電子部品１２の２個の角は特定されたが、残る２個の角が特定されないため、電子部品１２の形状が長方形であるとわかっていても、その形状，寸法を特定することはできない。
【００４９】
それに対し、輪郭候補線分ｆの長さが設定長さ以上であり、輪郭候補線分であるとすれば、電子部品１２の３個の角が特定されることとなり、電子部品１２の形状がほぼ長方形であるとわかっているため、４個の頂点の位置を特定することができる。図１２に○印で示す輪郭線分の始点，終点を結ぶ線分の延長線の交点が電子部品１２の頂点であり、本実施例においては、検出された４個の頂点が電子部品１２の輪郭を規定する輪郭規定要素であることになる。
このように４個の頂点が特定されれば、それらの位置データに基づいて電子部品１２のサイズ，中心位置，傾斜角度等を演算することができ、電子部品１２が装着すべき電子部品１２であるか否かの判定，正しい位置に装着するために修正すべき中心位置誤差および回転位置誤差等の取得が可能となる。
【００５０】
なお、電子部品１２のサイズ，中心位置，傾斜角度等は、輪郭線分を構成している多数の境界点の位置データに基づいて演算することも可能であり、上記のように単純に輪郭線分の始点，終点のみの位置データに基づいて演算する場合より高い精度でサイズ等を取得することができる。例えば、各輪郭線分を構成しているすべての境界点の位置データに基づいてそれら境界点の回帰直線を求め、それら回帰直線自体、またはそれら回帰直線同士の交点である４個の頂点を輪郭規定要素として電子部品１２のサイズ等の取得、あるいは種々の検査を行うことができる。
【００５１】
その一例は、電子部品１２の辺の平行，垂直の検査である。これは、上記４個の頂点もしくは４本の回帰直線により規定される長方形（正確には四辺形）の４辺のうち、２辺ずつが互いに平行で、それら平行な２辺の各組に属する１辺ずつが互いに垂直であるか否かを調べる検査である。この検査の結果、平行度および直角度が設定値より悪い場合は電子部品１２は、目標とする電子部品ではないか、あるいは許容範囲を越える製造誤差を有する電子部品であるなど、何らかの瑕疵があるとされ、その電子部品はプリント基板に装着されないようにされる。
【００５２】
また、２組２辺が平行，垂直であれば、４個の頂点の座標から得られる４辺の長さと、予めデータベースに記憶された電子部品１２の辺の長さとが比較され、部品吸着ノズル１０が吸着した電子部品がプリント基板に装着すべき電子部品であるか否かが判定される。また、２短辺の中点を通る直線と、２長辺の中点を通る直線との交点が中心位置とされ、この中心位置に基づいて電子部品１２の水平面内におけるＸ軸方向およびＹ軸方向の位置ずれが算出される。
なお、電子部品１２の傾斜角度としては、境界線構成要素の検出に続いて実行される傾斜角度の決定処理において決定された傾斜角度を使用してもよく、前記輪郭線分や回帰直線の平均傾斜角度を使用してもよい。
【００５３】
上記電子部品の中心位置や傾斜角度の演算結果、サイズや形状の製造誤差等の演算結果等はＣＲＴ装置４２の画面４４に表示される。図１３はその一例を示す図であり、円は吸着ノズル１０の輪郭線を示し、十字線は吸着ノズル１０の中心を示す。また、３個の長方形のうち、中間の図形が電子部品１２の輪郭線であり、他の大小２つの図形は公差範囲の上限および下限を示す。
【００５４】
以上の説明から明らかなように、本実施例においては、ＣＣＤカメラ１８およびＣＣＤカメラコントローラ２４と、データ処理装置２６の映像信号受信器２８，画像メモリコントローラ３０および画像メモリ３２とにより撮像装置が構成されている。電子部品１２が画像処理対象物の一例であり、図３に示す２つのピーク値Ａ1 ，Ａ2 に基づいて演算される電子部品１２と背景との境界線を決定するしきい値が境界線検出用階調値の一例である。
データ処理装置２６の、しきい値に基づいて電子部品１２の像を表す画素のうちで最も外側に位置する画素（境界線構成画素）を検出する部分、または、補間演算により境界点の位置を特定する部分により、境界線データ作成手段が構成されている。
データ処理装置２６の、前記「境界線構成画素と、その境界線構成画素に対して境界線を間に挟んで隣接する画素との２個の画素の位置と電圧値とに基づく補間演算により、それら２個の画素の中心間に、電圧値がしきい値になると推定される境界点を決定する」部分により境界点位置決定手段が構成され、前記「多数の境界点のうち、隣接する２個を一対とし、それら境界点対を結ぶ線分を境界線分とし、それら境界点対の座標値に基づいて境界線分のＸ軸とＹ軸とのいずれか一方に対する傾斜角度を演算する」部分（この部分により境界線分傾斜角演算手段が構成されている）と、前記「全部の境界点対に基づいて演算された傾斜角度を用いてヒストグラムを作成して２つピーク値を得、大きい方の傾斜角度から９０度（またはπ／４ラジアン）を引いた値と、小さい方の値との平均値を求めて、電子部品１２の撮像面２２の座標軸に対する傾斜角度を得る」部分とにより傾斜角度決定手段が構成されている。
ほぼ長方形の電子部品１２の４個の頂点が輪郭規定要素の一例であり、データ処理装置２６の、４個の頂点の位置を特定する部分が輪郭規定要素決定手段の一例である。
データ処理装置２６の、境界点位置データおよび傾斜角度データに基づいて、境界線の中から、電子部品１２の像の輪郭を形成する輪郭線分の候補である輪郭候補線分を抽出する部分、すなわち、境界点の中から、電子部品１２の傾斜角度とほぼ等しい角度で傾斜した線分を構成する境界点を抽出する部分により、輪郭候補線分抽出手段が構成されている。
データ処理装置２６の、抽出された輪郭候補線分の群から輪郭線分を選出する部分、例えば、ほぼＸ軸方向に延びる一対の輪郭候補線分と、それら輪郭候補線分の延長線間にあって、輪郭候補線分に直角な別の輪郭候補線分との組を取り出す部分により、組処理手段が構成されており、この組処理手段は輪郭線分選出手段の一種である。
データ処理装置２６の、互いに一直線上に位置すると判定された複数本の輪郭線分の長さの総和を演算し、その総和が総和下限値以上であれば、それら輪郭線分が真に輪郭線分であると確認する部分により、輪郭線分選出手段の一種としての合計長さ基準輪郭候補線分群選出手段が構成され、上記総和を演算する前に、始点データが付された境界点から終点データが付された境界点までの境界点の位置データの群に属する境界点の数が設定個数以下である場合に、これら境界点により構成される直線は実際に輪郭線分である可能性はないとして、輪郭候補線分データメモリから削除する部分により、短輪郭候補線分排除手段が構成されている。
【００５５】
次に、部品吸着ノズル１０が電子部品５０を輪郭線からはみ出すことなく吸着した場合の画像処理の例を図１４〜図１９に基づいて簡単に説明する。
この電子部品５０は、長方形の４個の角のうち、隣接する２個の角が円弧状を成し、残りの２個の角部が直線的に切り欠かれるとともに、４辺のうち、相対向する２辺に外向きに凸の突部が設けられた形状を有する。この電子部品５０の場合も電子部品１２の場合と同様に、画素データに基づいて境界線データが作成され、図１４に示すように境界線５２（正確には境界線構成画素の集合）が画面４４に表示される。
【００５６】
次いで電子部品５０の傾斜角度が検出され、図１５に示すように線分４８で表示された後、図１６に示すように、輪郭候補線分ａ〜ｈが抽出される。このとき、部分円弧状の角部および切欠角部は傾斜角度が電子部品５０の傾斜角度とは異なるため、排除される。そして、Ｘ軸にほぼ平行な輪郭候補線分ａ，ｅと、それら輪郭候補線分ａ，ｅの延長線間にある直角な輪郭候補線分ｂ，ｃ，ｄとの組について処理が行われる。輪郭候補線分ｃは一直線上に位置する他の輪郭候補線分がなく、かつそれ自体の長さが総和下限値より短いため、排除される。また、輪郭候補線分ａ，ｅはそれぞれ１本で総和下限値以上あり、また、輪郭候補線分ｂ，ｄは各長さの総和が総和下限値以上あるため、輪郭候補線分とされ、かつ、輪郭候補線分ｂの始点から輪郭候補線分ｄの終点までが１本の輪郭候補線分（ｂ＋ｄ）とされる。
すなわち、本実施例においては、一直線上にある複数の輪郭候補線分の総和が総和下限値以上であるか否かの判定と、１本の輪郭候補線分への置換とが、輪郭線分の選出前に行われるのである。
最後に、輪郭候補線分ａ，（ｂ＋ｄ），ｅ，（ｈ＋ｆ）について、互いの始点と終点との間の距離が設定距離以下であるか否かの判定により、輪郭線分の選出が行われ、選出結果が図１７に示すようにＣＲＴ装置４２の画面４４に表示される。
【００５７】
そして、図１８に示すように、上記４本の輪郭線分の合計８個の始点および終点が取得されるとともに、これら８個の点から電子部品５０の４個の頂点が決定され、電子部品５０のサイズ，中心位置，傾斜角度等が演算され、最終結果が図１９に示すように画面４４に表示される。
【００５８】
なお、請求項１の発明は、図２０に示すように、六角形状の画像処理対象物６０を処理する装置にも適用することができる。この画像処理対象物６０の輪郭を構成する６本の輪郭線分６２ａ〜６２ｆのうち、６２ａと６２ｄとが互いに平行であって、かつそれらの長さの和が６本の輪郭線分６２ａ〜６２ｆの長さの和の半分を超える。
この画像処理対象物６０についても前記実施例と同様に、多数の境界点位置を含む境界線データが作成されるとともに、隣接する２個を一対とする境界点を結ぶ境界線分毎に傾斜角度が演算され、ヒストグラムが作成されて撮像面の座標軸に対する傾斜角度が決定される。このとき、ヒストグラムのピーク値を形成するのは、互いに平行であって、長さの和が輪郭線全体の半分を超える輪郭線分６２ａ，６２ｄを規定する多数の境界点に基づいて得られた傾斜角度である。
ノイズが生じなければ、長さの和が輪郭線全体の半分を超える輪郭線分について得られた傾斜角度が画像処理対象物の傾斜角度になり、傾斜角度が誤りなく決定されるが、ノイズの発生により傾斜角度が誤って決定される恐れがある。互いに直角または平行な直線であって、長さの和が輪郭線全体の半分を超える直線の他に、互いに直角または平行な直線であって、長さの和が輪郭線全体の半分より小さい直線が少なくとも１組含まれる場合、ノイズの発生により傾斜角度のピーク値が逆転し、傾斜角度が誤って決定されることがあるのである。互いに平行または直角な直線の長さの和の輪郭線全体に占める割合が大きく、他の輪郭線との差が大きいほど、ノイズが発生しても逆転を生ずることは少なくなる。
互いに直角または平行な直線の長さの和が輪郭線全体の長さの半分を超えれば、画像処理対象物の傾斜角度を決定することができ、６５％を超えれば殆ど誤りなく決定することができ、８０％を超えれば一層誤りなく決定することができる。
【００５９】
図２１に示す画像処理対象物７０のように、互いに平行な２本の輪郭線分７２ａ，７２ｂと、それら輪郭線分７２ａ，７２ｂの各両端点を結ぶ円弧状の輪郭線分７２ｃ，７２ｄとを含む画像処理対象物の場合、輪郭線分７２ｃ，７２ｄについて境界線データを作成するとき、輪郭線分７２ｃ，７２ｄは互いに傾斜角度の異なる多数の直線に分割されるため、互いに平行な２本の輪郭線分７２ａ，７２ｂの輪郭線全体に占める割合が小さくても、画像処理対象物の傾斜角度を誤りなく決定することができる。
【００６０】
なお、上記各実施例においては、一直線上に並ぶ１本以上の輪郭候補線分の各長さが長さ下限値以下でないこと，一直線状に並ぶ１本以上の輪郭候補線分の各長さの総和が総和下限値以上であること，互いに直角な輪郭候補線分の始点と終点との間の距離が設定値以下であることという条件をすべて満たすか否かにより、輪郭線分の決定が行われたが、これら条件のすべてを満たすことは不可欠ではなく、１つまたは２つ以上の条件の適宜の組合わせを満足すれば輪郭線分であると決定されるようにすることも可能である。
条件が多いほど電子部品１２の輪郭を正確に検出することができるが、逆に、輪郭の検出が不可能であるとの結論に達する検出エラーの発生率が高くなり、電子部品の装着率が低下するため、条件を緩くした方がよい場合もあるのである。
【００６１】
また、画像処理対象物の撮像面の座標軸に対する傾斜角度は、上記各実施例におけるように、隣接する２個ずつの境界点対により規定される境界線分の角度を求め、ヒストグラムを作成してピーク値から傾斜角度を決定してもよく、あるいは２個ずつの境界点対から得られた全部の傾斜角度の平均を求めて画像処理対象物の傾斜角度としてもよい。境界点に基づいて得られる多数の傾斜角度の平均的値を傾斜角度とすればよいのである。
【００６２】
さらに、境界線のほぼＸ軸方向に延びる部分を構成する多数の境界点のうちＮ個（例えば１０個）おきの境界点、あるいはＭ本おきの画素格子線上における境界点のＹ座標値とＸ座標値とに基づいて傾斜角度を求め、得られた複数の傾斜角度のヒストグラムを作成してピーク値から画像処理対象物の傾斜角度を決定してもよく、複数の傾斜角度の平均値を画像処理対象物の傾斜角度としてもよい。
特に、画像データが２値化データで作成される場合には、このようにしなければ、適正に傾斜角度を求めることができない。画像データが２値化データである場合に、すべての境界線構成画素に基づいて傾斜角度を演算しようとすれば、互いに隣接する２つの境界点間の傾斜角度は０度か９０度かであって、これらのヒストグラムを作成することは意味がなく、また、これらの単純平均は、両端の境界点の座標値のみから演算した傾斜角度と同じになってしまうからである。
なお、画像データが２値化データである場合には、境界線構成画素の中心点、あるいは境界線構成画素の中心点とそれに隣接する背景構成画素の中心点とを結ぶ線分の中点を境界点とすればよい。
【００６３】
また、傾斜角度は、境界線のうち、ほぼＸ軸方向に延びる部分とほぼＹ軸方向に延びる部分とのうちの一方のみを構成する境界点を用いて決定してもよい。
さらに、画像処理対象物の全輪郭線を決定する必要がない場合には必要な部分のみが決定されるようにしてもよい。
【００６４】
また、輪郭候補線分の抽出時に、Ｎ個（例えば１０個）の境界点について、隣接する２個ずつの境界点について傾斜角度を求め、それら傾斜角度の平均値が画像処理対象物の傾斜角度とほぼ等しければ、それらＮ個の境界点が輪郭候補線分を構成する点であるとしてもよく、あるいはＮ個の境界点のうち、１個目とＮ個目との境界点を用いて傾斜角度を求め、画像処理対象物の傾斜角度と等しければ、それらＮ個の境界点が輪郭候補線分を構成する点であるとしてもよい。
【００６５】
さらに、画像処理対象物の輪郭線が閉曲線を描いていることも不可欠ではない。例えば、フラットパッケージ型電子部品の各リードを画像処理対象物とすることも可能なのである。リードの投影像は基端側の縁が曖昧な形状になるが、他の３つの縁は明瞭な線を描き、かつ全体としてほぼ四角形を成すことが多いため、各リードを本発明装置の画像処理対象物とすることができるのである。
その他、特許請求の範囲を逸脱することなく、当業者の知識に基づいて種々の変形，改良を施した態様で本発明を実施することができる。
【図面の簡単な説明】
【図１】本発明の一実施例である電子部品装着装置用画像処理装置の構成を概略的に示すブロック図である。
【図２】上記画像処理装置の構成要素であるＣＣＤカメラの撮像面の一部を概念的に示す図である。
【図３】上記画像処理装置において電子部品の撮像により得られた照度データ（電圧データ）のヒストグラムである。
【図４】上記画像処理装置において電子部品の像と背景の像との境界線の検出を概念的に説明する図である。
【図５】上記境界線の検出を具体的に説明する図である。
【図６】上記電子部品が吸着ノズルにより吸着された状態を概略的に示す平面図である。
【図７】上記吸着ノズルおよび電子部品の像と背景の像との境界線がＣＲＴ装置の画面に表示された状態を示す図である。
【図８】上記吸着ノズルにより吸着された電子部品の傾斜角度がＣＲＴ装置の画面に表示された状態を示す図である。
【図９】図７に示す境界線から抽出された輪郭候補線分群がＣＲＴ装置の画面に表示された状態を示す図である。
【図１０】上記輪郭候補線分群を用いた電子部品の角部の検出を説明する図である。
【図１１】上記輪郭候補線分群を用いた電子部品の別の角部の検出を説明する図である。
【図１２】上記輪郭候補線分群を用いて検出された輪郭線分の端点がＣＲＴ装置の画面に表示された状態を示す図である。
【図１３】画像処理の結果がＣＲＴ装置の画面に表示された状態を示す図である。
【図１４】別の種類の電子部品について検出された境界線がＣＲＴ装置の画面に表示された状態を示す図である。
【図１５】図１４に示す電子部品の傾斜角度がＣＲＴ装置の画面に表示された状態を示す図である。
【図１６】図１４に示す電子部品の境界線から抽出された輪郭候補線分群がＣＲＴ装置の画面に表示された状態を示す図である。
【図１７】図１６に示す輪郭候補線分から選出された輪郭線分がＣＲＴ装置の画面に表示された状態を示す図である。
【図１８】図１４に示す電子部品について選出された輪郭線分の端点がＣＲＴ装置の画面に表示された状態を示す図である。
【図１９】図１４に示す電子部品の画像処理結果がＣＲＴ装置の画面に表示された状態を示す図である。
【図２０】請求項１の発明に係る画像処理装置により傾斜角度が決定される画像処理対象物の例を示す図である。
【図２１】請求項１の発明に係る画像処理装置により傾斜角度が決定される画像処理対象物の別の例を示す図である。
【符号の説明】
１２ 電子部品
１８ ＣＣＤカメラ
２２ 撮像面
２６ データ処理装置
３４ ＣＰＵ
４６ 境界線
５０ 電子部品
５２ 境界線
６０，７０ 画像処理対象物
【産業上の利用分野】
本発明は画像処理装置に関するものであり、特に、輪郭線全体の長さの半分を超える部分が互に直角または平行な直線により構成される対象物を画像処理する装置の処理精度あるいは処理速度の向上に関するものである。
【０００２】
【従来の技術】
この種の画像処理対象物には、外形が直線のみにより規定されるものや、直線および曲線により規定されるもの等、種々のものがある。プリント基板等の装着対象材に装着される電子部品はその例である。電子部品の中には、リードを有さない角形チップ，コンデンサ等、全体の外形が概して四角形を成すものや、直方体状の半導体チップの２辺あるいは４辺からそれぞれリードが突出させられたフラットパッケージ型の電子部品のリードのように、電子部品の一部である画像処理対象物が概して四角形を成すものがある。
ここにおいて、「概して四角形」なる用語は、長方形や正方形のように、互いに平行な２本の直線と、それら平行直線と直交する２本の直線とによって規定され、４個の角がいずれも尖っているものは勿論、長方形や正方形の４個の角部に丸みが付けられたり面取りが施されたものや、各辺が概して直線を成すが一部に凹凸を有するものなどをも含む用語として使用する。なお、上記リードの像は、互いに平行な２側縁とそれらに直角な先端縁とを有するが、基端側の縁は必ずしも明瞭な直線とはならないことが多い。しかし、リードの輪郭を特定する場合に、基端側の縁の重要度は低く、このような場合には概して四角形と見なして差し支えない。
【０００３】
電子部品の装着対象物への装着時には、電子部品供給装置により供給される電子部品は吸着ノズル等の部品保持具によって保持された後、撮像装置により撮像される。そして、撮像により得られた画像データに基づいて、電子部品の中心の位置ずれ（位置誤差）および電子部品の中心まわりの回転位置ずれ（角度誤差）が算出され、それら誤差が修正されて装着対象材に装着される。また、電子部品の形状，寸法を求めて、電子部品が装着すべき電子部品であるか否かが判定される場合もある。これら電子部品の位置誤差および角度誤差，形状，寸法等は、多くの場合、電子部品の輪郭に基づいて取得される。
【０００４】
電子部品装着装置の画像処理装置においては一般に、撮像装置として固体イメージセンサが使用され、多くの場合、電子部品の投影像が取得される。例えば、電子部品を間に挟んで発光器，反射板等の投光体とＣＣＤ（チャージ カップルド デバイス）カメラが配置され、ＣＣＤカメラの撮像面に配列された多数の感光素子のうち電子部品に対応する感光素子への光の入射量が少なく、背景に対応する感光素子への光の入射量が多く、電荷量に差が生ずることを利用して投影像が取得されるのである。多数の感光素子から転送される電荷量に応じた電気信号をしきい値と比較し、２値化データを作成すれば、電子部品に対応する画素の画像データは０、背景に対応する画素の画像データは１になる。１個の感光素子が撮像面の１画素を構成するのである。
したがって、画像データが０である画素の集合のうちの、最も外側の画素の集合が電子部品の輪郭を表すことになる。これら画素の予め定められた点（通常は中心点であるため、以下中心点として説明する）を輪郭点、輪郭点を結ぶ線を輪郭線と称することとする。ただし、輪郭を特定するために、すべての輪郭点を特定することは不可欠ではなく、例えば、画像面上にＸ軸およびＹ軸にそれぞれ平行な複数本ずつの走査線を設定し、それら走査線上における輪郭点の集合により輪郭を特定することも可能である。
【０００５】
【発明が解決しようとする課題】
しかしながら、従来の画像処理装置においては、電子部品の輪郭を特定できないか、誤った特定が行われてしまうことがあり、あるいは特定に長時間を要する問題があった。また、画像処理対象物の輪郭から角度誤差、すなわち傾斜角度を取得すれば、取得に時間がかかる問題があった。
例えば、電子部品を保持した吸着ノズルの一部が電子部品の輪郭からはみ出せば、吸着ノズルの電子部品からはみ出した部分の輪郭が電子部品の輪郭として検出されてしまい、電子部品の正確な輪郭が得られない。吸着ノズルの電子部品からのはみ出しによるノイズデータを含んだままで画像データを処理すれば、画像処理対象物の輪郭検出精度が低下することを避け得ない。
【０００６】
ノイズデータを除去することが可能な場合もあるが、この場合には処理時間が長くなることを避け得ない。例えば、輪郭線上の複数の輪郭点を検出して輪郭を特定する場合、検出した複数の輪郭点（輪郭を規定する画素の中心点）の組合わせと吸着ノズルの半径とに基づいて、輪郭点の中から部品吸着ノズルのはみ出しにより得られた輪郭点を排除すれば、電子部品の輪郭検出精度を向上させることができる。互いに隣接する３個以上の輪郭点を１組とし、その組に属する輪郭点の組合わせを順次変えつつ、それら輪郭点が吸着ノズルの輪郭の円弧と同じ半径の円弧上に位置するか否かを判定し、判定の結果が肯定である輪郭点の組を排除するのであるが、輪郭点の組合わせ数が多く、処理に時間がかかる。その上、吸着ノズル以外の物の像が影響して輪郭検出精度が低下することを回避することができない。
【０００７】
また、撮像装置の撮像面やレンズに埃等が付着し、その影響で誤った画像データが作成され、電子部品の輪郭が正確に特定されないこともある。
さらに、電子部品自体に何らかの欠陥があるが、その欠陥は無視し、欠陥がない部分の輪郭のみに基づいて電子部品の位置等を特定したい場合もあるが、この場合にも欠陥の影響で位置検出精度等が低下することを避け得ない。
以上は、電子部品の輪郭の特定を例として説明したが、撮像対象物が何であり、撮像装置や撮像方法がいかなるものであっても同様の問題が存在する。
そこで、請求項１の発明は、輪郭線全体の長さの半分を超える部分が互いに直角または平行な直線により構成される画像処理対象物について得られた画像データにノイズデータが混入しても、画像処理対象物の傾斜角度を正確にかつ迅速に決定することができる画像処理装置を得ることを課題として為されたものであり、請求項２および３の各発明はそれぞれ、外形が、互いに平行な２本の直線と、それら平行直線に対して直角な少なくとも１本の直線とを含み、概して四角形を成す画像処理対象物について得られた画像データにノイズデータが混入しても、画像処理対象物の輪郭を正確にかつ迅速に特定することができる画像処理装置を得ることを課題として為されたものである。
【０００８】
【課題を解決するための手段】
請求項１の発明に係る画像処理装置は、上記の課題を解決するために、（Ａ）多数の画素により構成される撮像面を有し、前記画像処理対象物を撮像して各画素の入光量に対応した階調値を画像データとして取得する撮像装置と、（Ｂ）前記多数の画素の各々について取得された前記階調値に基づいて、階調値が前記画像処理対象物の像と背景の像との境界線を検出するための境界線検出用階調値に等しい多数の境界点の位置を補間演算する境界点位置決定手段と、（Ｃ）その境界点位置決定手段により決定された多数の境界点の互いに隣接するものを結ぶ線分である多数の境界線分の傾斜角度を求め、それら傾斜角度の分布から前記画像処理対象物の前記撮像面の座標軸に対する傾斜角度を決定する傾斜角度決定手段とを含むように構成される。
【０００９】
請求項２の発明に係る画像処理装置は、請求項１の発明に係る画像処理装置と同様な（Ａ）撮像装置，（Ｂ）境界点位置決定手段および（Ｃ）傾斜角度決定手段と、（Ｄ）その傾斜角度決定手段により決定された傾斜角度に基づいて画像処理対象物の輪郭を規定する輪郭規定要素を決定する輪郭規定要素決定手段とを含むように構成される。
【００１０】
【作用】
請求項１の発明に係る画像処理装置においてはまず、撮像装置によって、画像処理対象物を撮像して各画素の入光量に対応した階調値が画像データとして取得される。そして、多数の画素の各々について取得された階調値に基づいて、境界点位置決定手段により、階調値が境界線検出用階調値に等しい多数の境界点の位置が補間演算される。それら補間演算により取得された多数の境界点の互いに隣接するものを結ぶ線分である多数の境界線分の傾斜角度が、傾斜角度決定手段により求められ、それら傾斜角度の分布から画像処理対象物の撮像面の座標軸に対する傾斜角度が決定される。
画像処理対象物の像を構成する画素について得られた階調値と、背景の像を構成する画素について得られた階調値との間には、顕著な大きさの差があり、その差の境界位置が画像処理対象物の境界位置である。この境界位置は、画像処理対象物に属する画素の位置データ（座標値）および階調値と、背景の像を構成する画素の位置データおよび階調値とに基づく補間演算により取得可能である。
階調値は、例えば、各画素における照度を表すものとすることができる。この場合、照度値がしきい照度値である位置が境界位置となる。境界線のデータは、全境界位置を表すデータでもよく、複数の走査線上等、特定の境界位置を表すデータの集合であってもよい。
上記のように、多数の境界線分の傾斜角度の分布から傾斜角度が決定される場合は、境界線データにノイズデータが混入していても支障なく画像処理対象物の傾斜角度が決定される。
画像処理対象物の傾斜は輪郭線の傾斜であり、互いに直角または平行な直線が輪郭線全体の長さの半分を超える画像処理対象物の場合、それら互いに直角または平行な直線が撮像面の座標軸に対して成す傾斜角度を画像処理対象物の傾斜角度とすることができる。互いに直角な２本の直線は、位相を９０度異にするが、撮像面の座標軸に対する傾斜角度は同じであり、画像処理対象物の輪郭線全体の長さの半分を超える直線により得られる傾斜角度が画像処理対象物の傾斜角度とされる。
【００１１】
なお、ここにおいて「輪郭」とは、撮像される物の外形を規定する外側輪郭であることもあり、撮像される物の外形線の内側に設けられた模様や凹凸等を規定する内側輪郭であることもあり、外側輪郭と内側輪郭との両方であることもある。光源と感光素子とが画像処理対象物を挟んで反対の位置に設けられ、いわゆるバックライトにより画像処理対象物の投影像が取得される場合は外側輪郭が得られる。光源と感光素子とが画像処理対象物に対して同じ側に設けられ、いわゆるフロントライトにより画像処理対象物の正面像が取得される場合は内側輪郭のみ、または内側輪郭と外側輪郭との両方が得られる。
【００１２】
請求項２の発明に係る画像処理装置においては、傾斜角度決定手段により決定された傾斜角度に基づいて、輪郭規定要素が決定される。境界点位置決定手段により決定された多数の境界点の位置のデータには、前述のように、吸着ノズルの輪郭等に基づくノイズデータが混入することがあるが、画像処理対象物が概して四角形を成すことを利用すれば、ノイズデータを除去することができる。ただし、画像処理対象物が撮像面の座標軸に対して傾斜していることもあるため、まず、傾斜角度決定手段により、境界線データに基づいて画像処理対象物の傾斜角度が決定され、その上で、輪郭規定要素決定手段により画像処理対象物の輪郭を規定する輪郭規定要素が決定される。「輪郭規定要素」とは、例えば、画像処理対象物の輪郭を規定する複数の直線もしくは複数の頂点、あるいは直線と頂点との組合わせであり、輪郭規定要素の決定前に傾斜角度を決定することは一見不可能なようであるが、画像処理対象物がほぼ四角形であることが予め判っている場合には、後に実施例において説明するように、輪郭規定要素より前に傾斜角度を決定することができるのである。輪郭規定要素が直線である場合には、その直線を表す式やその直線上に位置する複数の点の座標の集合で表され、頂点である場合にはその座標で表される。
【００１３】
【発明の効果】
このように請求項１の発明によれば、対象物の撮像により取得された画像データにノイズデータが混入していても、対象物の傾斜角度を正確にかつ迅速に決定することができる。
請求項２の発明によれば、対象物の撮像により取得された画像データにノイズデータが混入していても、輪郭規定要素の決定前に傾斜角度を決定することによって、画像処理対象物の輪郭を正確にかつ迅速に特定することができる。
【００１４】
【発明の望ましい実施態様】
以下、本発明の望ましい実施態様を列挙するとともに、必要に応じて関連説明を行う。
【００１５】
(1)前記輪郭規定要素決定手段が、
前記境界点位置決定手段により決定された多数の境界点の集合により構成される境界線に属し、傾斜角度が前記傾斜角度決定手段により決定された傾斜角度とほぼ等しい線分を前記画像処理対象物の輪郭線の構成要素である輪郭候補線分として抽出する輪郭候補線分抽出手段と、
その輪郭候補線分抽出手段により抽出された輪郭候補線分群から、互いに直角であって、端点間の距離が設定値以下である２本の輪郭候補線分を輪郭線分として選出する輪郭線分選出手段と、
その輪郭線分選出手段により選出された輪郭線分の群に基づいて前記輪郭規定要素を決定する手段と
を含むことを特徴とする請求項２に記載の画像処理装置（請求項３）。
画像処理対象物の傾斜角度にほぼ等しい角度で傾斜した線分が必ずしも輪郭線分であるとは限らず、輪郭候補線分から輪郭線分が選出される。
(2)さらに、前記輪郭規定要素決定手段により決定された輪郭規定要素と画像処理対象物の寸法データとに基づいて、画像処理対象物が目標とする対象物であるか否かの判定を行う判定手段を含む請求項２または (1) 項に記載の画像処理装置（請求項４）。
(3)前記境界点位置決定手段が、前記撮像面を構成する多数の画素の各々について得られた画像データが表す背景の階調値と、前記画像処理対象物の階調値とに基づいて、前記境界線検出用階調値を算出する境界線検出用階調値決定手段を含む請求項１，２， (1) 項， (2) 項のいずれかに記載の画像処理装置（請求項５）。
撮像装置は、画像処理対象物に光を照射し、画像処理対象物の像を得るのであるが、光源が画像処理対象物の背後から光を照射するバックライトであって撮像面に画像処理対象物の投影像が形成される場合でも、光源が画像処理対象物の正面から光を照射するフロントライトであって、撮像面に画像処理対象物の正面像が形成される場合でも、撮像面を構成する画素のうち、画像処理対象物に対応する画素と背景に対応する画素とでは光の入射量や波長分布等光学的特性が異なり、画像処理対象物に対応する画素の階調値と背景に対応する画素の階調値とが異なる。そのため、境界線検出用階調値を決定し、多数の画素の画像データが表す階調値に基づいて境界点位置を決定することができる。
例えば、実施例の項において述べるように、画像データが照度値（入光量）を表す階調値で作成される場合、しきい照度値を設定して境界線検出用階調値とし、各画素の照度値と座標値とに基づいて照度値がしきい照度値となる点の座標値を補間演算し、得られた座標値で境界点位置を表すことができる。
(4)前記境界点位置決定手段が、中心が前記境界線の両側に位置しかつ互いに隣接する２個の画素の前記階調値に基づいて、それら２個の画素の中心を結ぶ格子線分上において階調値が前記境界線検出用階調値になる境界点の位置を補間演算するものである請求項１，２， (1) 項ないし (3) 項のいずれかに記載の画像処理装置（請求項６）。
【００１６】
【実施例】
以下、本発明を電子部品装着装置の画像処理装置に適用した実施例を図面に基づいて詳細に説明する。
図１に画像処理装置の構成を概略的に示す。１０は部品吸着ノズルであり、負圧により電子部品１２を吸着する。電子部品１２は長方形のものであり、本来は互いに直角な２辺がそれぞれＸ軸とＹ軸とに平行な姿勢で吸着ノズル１０に吸着されるべきものであるが、誤差として比較的小さい傾斜角度が生ずるものとする。
部品吸着ノズル１０には光源としての発光体１４が取り付けられており、電子部品１２に背後から光を照射する。発光体１４はバックライトなのである。発光体１４は板状を成し、乳白色の拡散板により覆われた多数の発光ダイオードを備えており、拡散板から下方へ光を放射する。発光体１４から照射され、電子部品１２の輪郭の外側を通った光はレンズ１６により集光され、ＣＣＤカメラ１８に入光させられる。
【００１７】
ＣＣＤカメラ１８は、図２に示すように、多数の感光素子２０が平面状に配列されて成る固体撮像器によって構成された撮像面２２を備えており、各感光素子２０にはそれぞれ入射した光の量に応じた電荷が蓄積され、電荷量に応じた電気信号である電圧信号が感光素子２０毎に出力される。この電圧信号はアナログ信号であり、ＣＣＤカメラコントローラ２４からデータ処理装置２６へ送られて電子部品１２のサイズ，中心位置，傾斜角度等が求められる。データ処理装置２６は映像信号受信器２８を備えており、ＣＣＤカメラコントローラ２４から出力された電圧信号は映像信号受信器２８によって受信された後、画像メモリコントローラ３０へ出力され、画像メモリコントローラ３０によって画像メモリ３２に格納される。
【００１８】
画像メモリ３２は、各々撮像面２２の各画素（固体撮像器の各感光素子）に対応付けられ、各画素のＸ，Ｙ座標値により指定可能な１バイト（８ビット）ずつの記憶領域を多数有している。各記憶領域には各感光素子２０の照度を２５６階調で表すデータが格納可能とされているのであり、画像メモリコントローラ３０は、映像信号受信器２８から送られて来た映像信号に基づいて階調データを生成し、画像メモリ３２の所定の記憶領域に記憶させる。
【００１９】
データ処理装置２６は、ＣＰＵ３４を有している。ＣＰＵ３４には、データ処理実行等のためのプログラムを記憶するＲＯＭにより構成されるプログラムメモリ３６と、ＲＡＭにより構成されるワーキングメモリ３８とが接続されており、ＣＰＵ３４がデータ処理プログラムに従って電子部品１２について取得された画像データを処理することにより、吸着された電子部品１２が装着すべき電子部品１２であるか否かの判定，電子部品１２のサイズ，中心位置，傾斜角度の演算等が行われる。ＣＰＵ３４にはまた、ＣＲＴインタフェース４０を介してモニタディスプレイ装置としてのＣＲＴ装置４２が接続されており、データ処理の経過および結果等がＣＲＴ装置４２の画面４４（図７参照）に表示される。なお、ここでは理解を容易にするために、画面４４の最小構成単位は撮像面２２の１画素に対応させられているものとする。
【００２０】
以下、ＣＣＤカメラ１８の撮像により得られた画像データの処理を説明する。
まず、画像メモリ３２に記憶された撮像面２２の全部の画素の照度（感光素子２０の電圧）に対応する階調データに基づいて、図３に示すヒストグラムが作成される。このヒストグラムの横軸は２５６階調で表される電圧値、縦軸は画素数である。電子部品１２の像を形成する感光素子２０と、背景の像を形成する感光素子２０とでは入光量が大きく異なり、ヒストグラムを作成すれば、大小２つのピーク値Ａ1 ，Ａ2 が得られる。
【００２１】
この２つのピーク値Ａ1 ，Ａ2 に基づいて電子部品１２と背景との境界線を決定するしきい値が演算される。大きい方のピーク値Ａ2 から小さい方のピーク値Ａ1 を引いた値の６５パーセントに相当する値をピーク値Ａ1 に加えた値がしきい値とされる。発光板１４が電子部品１２に対してＣＣＤカメラ１８とは反対側に設けられたバックライトであり、撮像面２２には電子部品１２の投影像が形成されるため、電圧値（照度値）がしきい値より大きい画素は背景の像を形成する画素であり、しきい値より小さい画素は電子部品１２の像を形成する画素であることとなる。
【００２２】
このしきい値に基づいて電子部品１２の像を表す画素のうちで最も外側に位置する画素（以下、境界線構成画素と称する）が検出される。まず、電圧値がしきい値以下である画素が検出される。図４に示すように、部品吸着ノズル１０の中心位置Ｏ（撮像面２２の原点位置と一致させられている）から出発し、撮像面２２のＸ軸方向において正方向側に位置する画素の１つ１つについて、電圧値がしきい値以下であるか否かが判定される。当初、電圧値はしきい値より小さく、電圧値がしきい値より大きい画素が検出されれば、境界線検出方向が変えられ、Ｙ軸方向を正方向側に進んで境界線構成画素の検出が行われる。境界線構成画素の検出は、反時計方向に行われるのである。
【００２３】
例えば、前記２つのピーク値Ａ1 ，Ａ2 がそれぞれ２０，２００であり、しきい値が１３７であるとすれば、図５に示すように、電圧値が１２７の画素に隣接し、電圧値が１５１である画素が検出されたならば、この画素にＸ軸方向において負方向側に隣接する画素（電圧値が１２７である画素）が境界線構成画素とされる。次に、その境界線構成画素に対してＹ軸方向において正方向側に隣接する画素の電圧値が調べられる。境界線検出方向が変えられるのであり、この画素の電圧値がしきい値以下であれば、この画素にＸ軸方向において正方向側に隣接する画素の電圧値が調べられ、しきい値より大きければ、この電圧値がしきい値より大きい画素にＸ軸方向において負方向側に隣接する画素が境界線構成画素とされる。
なお、境界線検出方向が変えられた後、電圧値がしきい値以下である画素に対してＸ軸方向において正方向側に隣接する画素の電圧値もしきい値以下であれば、更にＸ軸方向において正方向側に隣接する画素の電圧値がしきい値以下であるかが調べられる。電圧値がしきい値より大きい画素が見つかるまでＸ軸方向において正方向側に隣接する画素の１つ１つについて電圧値が調べられる。
【００２４】
Ｙ軸方向を正方向に進んで境界線構成画素の検出が行われ、角に至れば、境界線構成画素（電圧値が１２８である画素）に対してＹ軸方向において正方向側に隣接する画素（電圧値が１５６である画素）の電圧値がしきい値より大きくなる。そのため、境界線検出方向が変えられ、境界線構成画素に対してＸ軸方向において負方向側に隣接する画素（電圧値が１１６である画素）の電圧値がしきい値以下であるか否かが調べられ、しきい値以下であれば、その画素に対してＹ軸方向において正方向側に隣接する画素（電圧値が１５１である画素）の電圧値がしきい値以下であるか否かが調べられる。この画素の電圧値がしきい値より大きければ、この画素にＹ軸方向において負方向側に隣接する画素が境界線構成画素とされ、次にこの境界線構成画素についてＸ軸方向において負方向側に隣接する画素の電圧値がしきい値以下であるか否かが調べられる。
【００２５】
Ｘ軸方向あるいはＹ軸方向において隣接する２個ずつの画素の一方の電圧値がしきい値以下であり、他方の電圧値がしきい値より大きいとき、電圧値がしきい値以下である画素が境界線構成画素とされ、電圧値がしきい値より大きい画素が背景構成画素とされる。境界線構成画素の位置データ（境界線構成画素の中心の撮像面２２上における座標値）は、隣接する背景構成画素の位置データ（背景構成画素の中心の撮像面２２上における座標値）および方向データと共にワーキングメモリ３８の境界線構成画素データメモリに記憶される。方向データとは、境界線構成画素がほぼ撮像面２２のＸ軸方向に延びる境界線を構成する画素であるか、ほぼＹ軸方向に延びる境界線を構成する画素であるかのデータである。いずれの方向に延びる境界線を構成する画素であるかは、境界線構成画素の検出方向からわかる。電圧値がしきい値以下である画素を境界線構成画素であると決定した背景構成画素が、境界線構成画素とＸ軸方向において隣接する場合には、その境界線構成画素はほぼＹ軸方向に延びる境界線を構成する画素であり、Ｙ軸方向において隣接する場合には、境界線構成画素はほぼＸ軸方向に延びる境界線を構成する画素であり、画素毎に方向データが付される。図５において電圧値が１２８である画素のように角の画素、あるいは４５度に近い角度で傾斜した境界線を構成する画素についてはＸ軸方向とＹ軸方向との両方向において背景構成画素が隣接する。この場合にはＸ軸方向とＹ軸方向との両方の方向データが付される。
【００２６】
以上のようにして、反時計方向で境界線構成画素の検出が行われ、最初に検出された境界線構成画素（図５において電圧値が１２７である画素）が再び検出されたならば、すべての境界線構成画素の検出が終了したとしてＣＲＴ装置４２に境界線が表示される。図６に示すように、部品吸着ノズル１０が電子部品１２を輪郭線から外へはみ出して吸着したとすれば、ＣＲＴ装置４２の画面４４には、図７に示すように電子部品１２および部品吸着ノズル１０の輪郭線により構成される境界線（正確には境界線構成画素の集合）４６が表示される。
【００２７】
次いで、電子部品１２の撮像面２２の座標軸に対する傾斜角度が決定される。まず、境界線構成画素と、その境界線構成画素に対して境界線を間に挟んで隣接する画素との２個の画素の位置と電圧値とに基づく補間演算により、それら２個の画素の中心間に、電圧値がしきい値になると推定される境界点が決定される。
境界線を間に挟んで隣接する２個の画素の一方は、境界線構成画素であり、他方は背景構成画素である。これらは境界線構成画素の検出時に対にされてワーキングメモリ３８の境界線構成画素データメモリに記憶されており、これら隣接する２個の画素の座標値と電圧値とから比例計算により電圧値がしきい値となる境界点の座標値が決定される。決定された境界点の位置データ（撮像面２２上における座標値）は、その境界点が境界線のほぼＸ軸方向に延びる部分を構成するか、ほぼＹ軸方向に延びる部分を構成するかを表す方向データと共にワーキングメモリ３８の境界点データメモリに記憶される。境界点の属性を表す属性データの一種である方向データが、境界点の位置データと共に記憶されるのである。
【００２８】
全部の境界線構成画素および隣接する背景構成画素に基づいて境界点位置が決定されたならば、これら多数の境界点のうち、隣接する２個を一対とし、それら境界点対を結ぶ線分を境界線分とし、それら境界点対の座標値に基づいて境界線分のＸ軸とＹ軸とのいずれか一方に対する傾斜角度が演算される。
境界点対が境界線のほぼＸ軸方向に延びる部分を構成するか、ほぼＹ軸方向に延びる部分を構成するかによって、得られる傾斜角度が９０度（またはπ／４ラジアン）異なる。そのため、全部の境界点対に基づいて演算された傾斜角度を用いてヒストグラムを作成すれば、２つピーク値が得られ、大きい方の傾斜角度から９０度（またはπ／４ラジアン）を引いた値と、小さい方の値との平均値が求められ、電子部品１２の撮像面２２の座標軸に対する傾斜角度とされてワーキングメモリ３８の傾斜角度メモリに記憶される。また、得られた傾斜角度は、図８に示すようにＣＲＴ装置４２に線分４８で表示される。なお、図８には、傾斜角度と境界線４６との関係をわかり易くするために、境界線４６が二点鎖線で示されているが、実際には境界線４６は画面４４に表示されない。
【００２９】
次に、境界点位置データおよび傾斜角度データに基づいて、境界線の中から、電子部品１２の像の輪郭を形成する輪郭線分の候補である輪郭候補線分が抽出される。輪郭候補線分の抽出は、境界点の中から、電子部品１２の傾斜角度とほぼ等しい角度で傾斜した線分を構成する境界点を抽出することにより行われる。
【００３０】
多数の境界点のうちの任意の一つが仮に輪郭候補線分の始点とされて、その境界点に始点データが付されるとともに、その境界点を通り、傾斜角度が電子部品１２の傾斜角度に等しい直線の式（１）または（２）が演算される。境界点が、境界線のほぼＸ軸方向に延びる部分を構成する場合には、直線の一次係数として傾斜角度θに対応する値ａが用いられ、Ｙ軸方向に延びる部分を構成する場合には、傾斜角度（θ＋９０）に対応する値ｃが用いられる。
ｙ1 ＝ａｘ1 ＋ｂ1 ・・・・（１）
ｘ1 ＝ｃｙ1 ＋ｄ1 ・・・・（２）
【００３１】
ここでは、図４に示したように部品吸着ノズル１０の中心位置Ｏから出発して撮像面２２のＸ軸方向に向かって走査された場合に検出された境界線構成画素に対応する境界点が輪郭線候補線分を構成する境界点であるか否かが判定されるものとする。この場合には、境界線はほぼＹ軸方向に延びているのが普通であるから、まず（２）式の演算が行われ、続いて、隣接する境界点を通り、傾斜角度が電子部品１２の傾斜角度に等しい直線の式（３）が演算され、この直線式のｘ切片が（４）式を満足するか否かにより、２番目の境界点が１番目の境界点と共に電子部品１２の傾斜角度とほぼ等しい角度で傾斜する境界線分を構成するか否かが判定される。（４）式は、ある境界点が電子部品１２の傾斜角度とほぼ等しい角度で傾斜する輪郭線分を構成するか否かを判定するために、それより前に判定が行われたすべての境界点（始点データが付された境界点に続くすべての境界点）の座標値に基づいて得られた直線式の各ｘ切片の値の平均値にΔｄを加減することによりｘ切片の範囲を設定する式であり、この設定範囲内にｘ切片の値があれば、そのｘ切片が得られた境界点は、始点データが付された境界点を始点とする輪郭候補線分を構成する点とされるのである。
ｘ2 ＝ｃｙ2 ＋ｄ2 ・・・・（３）
【００３２】
【数１】
始点データが付された境界点から現に判定が行われる境界点までのすべての境界点が同じ輪郭候補線分を構成する点であることを正確に判定するためには、すべての境界点が、勾配がｃでｘ軸方向の幅が２Δｄである帯状の領域内に存在することを確認する必要があり、（４）式のｄn をｄ1 ，ｄ2 ，ｄ3 ・・・，ｄn に変更する必要がある。本発明はこの判定手段を排除するものではないが、計算量が多くなって処理時間が延びるため、過去の境界点についての判定は行わず、新たな境界点のみについて判定を行うこととしたのである。
このようにして判定する場合には、始点データが付された境界点やそれに近接する境界点が実際には輪郭候補線分を構成する点ではないにもかかわらず、輪郭候補線分を構成する点であると判定される可能性がある。ｘ切片の平均値は、平均されるｘ切片の数の増加に従って変化し、この変化は判定される境界点が始点データが付された境界点から離れるに従って、すなわち、平均されるｘ切片の数が多くなるに従って小さくなるのが普通であるが、始点データが付された境界点やそれに近接した境界点の判定時にはかなり大きく変化する可能性があり、そのため、例えば、始点データが付された１番目の境界点に隣接する２番目の境界点は（４）式を満足し、３番目の境界点も（４）式を満足するが、その３番目の境界点の判定時における（４）式を１番目の境界点が満足しないことはあり得るのである。しかし、誤って輪郭候補線分を構成する点であると判定される境界点の数はそれほど多くないため、この誤りは実用上問題にならない。
【００３４】
上記の判定を繰り返すうち、ｘ切片の値が設定範囲から外れる境界点が現れれば、その境界点は輪郭候補線分を構成する点ではないと判定され、その境界点自体に始点データが付されるとともに、その境界点より１個前の境界点に終点データが付される。以下、始点データが付された境界点以降の境界点について上記の場合と同様の判定が実行される。
なお、始点データが付された境界点から終点データが付された境界点までの境界点の位置データの群が、始点データおよび終点データと共に輪郭候補線分データとしてワーキングメモリ３８の輪郭候補線分データメモリに記憶されるのであるが、同じ輪郭候補線分を構成する境界点と判定された境界点の数が設定個数以下である場合には、これら境界点により構成される直線は実際に輪郭線分である可能性はないとして、輪郭候補線分データメモリから削除される。すなわち、長さ下限値より長い直線でなければ輪郭候補線分とはされないのであり、これによりノイズデータの影響の一部が排除される。
また、輪郭候補線分データメモリに記憶された輪郭候補線分データの作成時に設定されていた最後のｘ切片の設定範囲が後の処理のために、輪郭候補線分データメモリに記憶された輪郭候補線分データと関連付けられてワーキングメモリ３８の設定範囲データメモリに記憶される。
【００３５】
判定される境界点が電子部品の角部を規定する境界点になれば、その境界点について得られる直線式のｘ切片の値が設定範囲から外れる。ただし、ｘ切片の値が設定範囲から外れても、ノイズデータによって外れたのか、角であるため外れたのかはわからない。また、電子部品１２の角はほぼ直角に尖っていることが予定されており、理想的には角に対応する境界点の方向データはＸ，Ｙ両方向であるはずであるが、実際には電子部品の角に多少の丸みが付いていることもあるため、境界線の角部近傍においては各境界点の方向データがＸ軸方向となったり、Ｙ軸方向となったり、あるいは両方向となったりする。
そのため、境界点に付された方向データが両方向のデータである場合には、その境界点が輪郭候補線分を構成することはあり得ないと判定されて、その境界点を通る直線およびそれの切片の演算、ならびに切片が設定範囲内にあるか否かの判定のすべてが省略されるとともに、その直前に輪郭候補線部を構成すると判定された境界点に終点データが付される。そして、再び方向データがＸ軸方向あるいはＹ軸方向である境界点が現れれば、その境界点に始点データが付され、方向データがＹ軸方向データであれば前記（４）式を用いた判定が行われ、Ｘ軸方向データであれば、下記（５）式によりｙ切片ｂn が求められ、（６）式を用いた判定が行われる。なお、Δｂは前記Δｄと同じ大きさの微小値である。
ｙn ＝ａｘn ＋ｂn ・・・・（５）
【００３６】
【数２】
境界点が連続してほぼＸ軸方向に延びる輪郭候補線分を構成するようになれば、すなわち境界点について演算された直線式のｙ切片がそれに先立って演算された直線式のｙ切片の値に基づいて設定される範囲内に収まるようになれば、それら連続する境界点のデータが輪郭候補線分データとして輪郭候補線分データメモリに記憶される。
【００３８】
境界線を１周し、１番最初に直線式が演算された境界点に戻ってきたとき、その境界点について再度直線式が演算され、その直線式のｘ切片が設定範囲内にあれば、その境界点は輪郭候補線分の途中にある点であって始点ではないとして、その境界点に先に付された始点データが消去される。その境界点の前後の境界点が１本の輪郭候補線分を構成する状態とされるのである。
【００３９】
すべての輪郭候補線分が求められたならば、図９に示すように、ＣＲＴ装置４２に輪郭候補線分が表示される。図から明らかなように、部品吸着ノズル１０の電子部品１２からはみ出した部分により構成される円弧部分は、ほぼＸ軸方向およびＹ軸方向に延びる一部分を除いて傾斜角度が電子部品１２の傾斜角度と異なるため、輪郭候補線分として抽出されず、ここでもノイズデータ（部品吸着ノズル１０のはみ出しに基づくノイズデータ）の影響の一部が排除される。
また、境界点が輪郭候補線分を構成する点であるか否かは、境界点１つ１つについて調べられるため、角部の検出に遅れがなく、輪郭候補線分を角のすぐ近くまで精度良く抽出することができる。
【００４０】
続いて、抽出された輪郭候補線分の群から、輪郭線分が選出される。ほぼＸ軸方向に延びる一対の輪郭候補線分と、それら輪郭候補線分の延長線間にあって、輪郭候補線分に直角な別の輪郭候補線分との組が取り出される。ほぼＸ軸方向に延びるかほぼＹ軸方向に延びるかは、輪郭候補線分を構成する境界点のデータに付された方向データからわかる。
【００４１】
電子部品１２を例に取れば、まず、図１０に示すように、抽出された輪郭候補線分ａ，ｂ，ｃ，ｄ，ｅ，ｆの群から、Ｘ軸に平行な一対の輪郭候補線分ａ，ｄと、それら輪郭候補線分ａ，ｄの延長線間にあって、輪郭候補線分ａ，ｄに直角な輪郭候補線分ｃとの組が取り出される。輪郭候補線分ａとｄとの間には、直角な輪郭候補線分が２本（ｂ，ｃ）あり、Ｘ軸方向に平行な一対の輪郭候補線分がＸ軸方向において負側へ延長されるときには、それら延長線間にある輪郭候補線分のうち、Ｘ座標値が小さい方の輪郭候補線分が先に取り出されるのである。なお、Ｘ軸方向に平行な一対の輪郭候補線分がＸ軸方向において正側へ延長されるとき、それら延長線間に複数本の直角な輪郭候補線分があれば、それら輪郭候補線分のうち、Ｘ座標値が大きい方の輪郭候補線分から先に取り出される。
そして、ほぼＸ軸に平行な一方の輪郭候補線分ａと、直角な輪郭候補線分ｃとの端点間の距離が設定値以下であるか否かが判定される。輪郭候補線分の抽出時に、各輪郭候補線分の始点と終点とにはそれぞれ始点データおよび終点データが付されており、端点間の距離が設定値以下であるか否かが判定される２本の輪郭候補線分のうち、輪郭候補線分の抽出方向において上流側に位置する輪郭候補線分、すなわち輪郭候補線分ａの終点と下流側に位置する輪郭候補線分、すなわち輪郭候補線分ｃの始点とについて、それらの間の距離が設定値以下であるか否かが判定される。
【００４２】
図１０に示すように、電子部品１２の場合、輪郭候補線分ａと輪郭候補線分ｃとの間の距離が設定値より大きいため、これら輪郭候補線分ａ，ｃにより規定される角は電子部品１２の角ではないと判定される。それに対して、輪郭候補線分ｃとｄとの間の距離は設定値より小さいため、これら輪郭候補線分ｃ，ｄにより規定される角は電子部品１２の角であり、かつ輪郭候補線分ｃとｄとは輪郭線分であると判定される。
次に、輪郭候補線分ａ，ｂ，ｄの組について同様の判定が行われるが、これら輪郭候補線分の始点と終点との距離はいずれも設定値より大きいため、これら輪郭候補線分ａ，ｂ，ｄの組は電子部品１２の輪郭を規定する組ではないと判定される。
輪郭候補線分ｆ，ｃ，ｄの組についても同様な判定が行われる。輪郭候補線分ｂは、輪郭候補線分ｆ，ｄの各延長線の間にないため、判定は行われない。輪郭候補線分ｃとｄとの組は輪郭線分であると判定されるが、輪郭候補線分ｆとｃとの組は輪郭線分ではないと判定される。
輪郭候補線分ａ，ｂ，ｆの組についても同様な判定が行われるが、輪郭候補線分ａとｂとの組，輪郭候補線分ｆとｂとの組はいずれも始点，終点間の距離が設定値より大きいため、輪郭線分の組ではないと判定される。
【００４３】
次に、図１１に示すように、輪郭候補線分ｄ，ｅ，ｆの組が取り出され、同様の判定が行われるが、ほぼＸ軸に平行な輪郭候補線分ｄと直角な輪郭候補線分ｅとの始点，終点間の距離、および輪郭候補線分ｆとｅとの始点，終点間の距離はいずれも設定値以下であるため、輪郭候補線分ｄとｅとの組、輪郭候補線分ｆとｅとの組はいずれも電子部品１２の角を規定するものであり、輪郭線分であると判定される。
【００４４】
輪郭候補線分ａ，ｅ，ｄの組についても同様な判定が行われ、輪郭候補線分ｄとｅとの組は輪郭線分であると判定されるが、輪郭候補線分ａとｅとの組は輪郭線分の組ではないと判定される。
なお、ほぼＸ軸方向に平行な一対の輪郭候補線分の延長線間に直角な輪郭候補線分がなければ、輪郭線分の選出は行われない。
以上の処理の結果、輪郭候補線分ｃ，ｄ，ｅ，ｆが輪郭線分として選出される。
【００４５】
以上で輪郭線分の選出処理を終了することも可能であるが、本実施例においては、輪郭線分選出の信頼性を高めるために、さらに確認処理が行われるようになっている。
この処理の第一段階は、複数の輪郭線候補線分のうち、複数本に分かれてはいるが、実際には１本の輪郭線分の複数部分である輪郭線分の群を捜す処理である。図９において、輪郭線分ｄは１本の直線となっているが、例えばこの直線で表される電子部品１２の辺の像に比較的小さい欠陥があったとすれば、この欠陥に基づくノイズデータの影響によって輪郭線分ｄは複数本の直線に分断される。そのような場合に、これら複数本の輪郭線分が一直線上に位置することが確認されれば、これら複数本の輪郭線分を１本の輪郭線分の各一部として扱うことができる。複数本の輪郭線分が一直線上に位置するか否かの判定は、それら複数本の輪郭線分に関連付けて前記設定範囲データメモリに記憶されたｘ切片あるいはｙ切片の設定範囲が実質的に一致するか否か、具体的には、例えば両設定範囲の上限値と下限値との中間値の差が設定差以下であるか否かによって行われる。
【００４６】
このようにして、互いに一直線上に位置すると判定された複数本の輪郭線分の長さの総和が演算され、この総和が総和下限値以上であれば、それら輪郭線分が真に輪郭線分であることが確認される。このようにすれば、画像の比較的小さい欠陥により輪郭線分が短い輪郭線分に分断された場合でも、高い信頼性をもって輪郭線分を特定することができる。換言すれば、総和が総和下限値より短ければ、これら輪郭線分は輪郭線分ではないとされるのであり、これによって、ノイズデータに基づいて偶然に複数の輪郭線分が一直線上に並んだ場合との混同を避けることができる。
【００４７】
なお、本実施例においては、上記確認が輪郭線分の選出後に行われるようにされているが、輪郭線分の選出前に同様の処理が行われ、判定の結果が肯定になった輪郭候補線分の中からのみ輪郭線分の選出が行われるようにすることも可能である。
また、実質的に一直線上に位置すると判定された複数の輪郭候補線分のうち、両端に位置する一方の輪郭候補線分の始点から他方の輪郭候補線分の終点までを１本の輪郭候補線分に置き換え、その輪郭候補線分について輪郭線分の選出が行われるようにすることも可能である。このようにすれば、短く分断された輪郭候補線分が多数生じた場合における輪郭線分選出に要する処理時間を短縮することができる。
これら２つの態様の場合には、本処理は確認処理ではなく、輪郭線分選出の第一段階処理であると考える方が自然である。
【００４８】
図９の例において、輪郭候補線分ｃ，ｄ，ｅが十分な長さを有しているが、輪郭候補線分ｆは比較的短い。しかも、この輪郭候補線分ｆと一直線上に位置する他の輪郭候補線分はないため、一直線上に位置する輪郭候補線分の長さの総和は、輪郭候補線分ｆ自体の長さと同じである。したがって、輪郭候補線分ｆの長さが長さ下限値より短く、輪郭候補線分ではないとすれば、電子部品１２の２個の角は特定されたが、残る２個の角が特定されないため、電子部品１２の形状が長方形であるとわかっていても、その形状，寸法を特定することはできない。
【００４９】
それに対し、輪郭候補線分ｆの長さが設定長さ以上であり、輪郭候補線分であるとすれば、電子部品１２の３個の角が特定されることとなり、電子部品１２の形状がほぼ長方形であるとわかっているため、４個の頂点の位置を特定することができる。図１２に○印で示す輪郭線分の始点，終点を結ぶ線分の延長線の交点が電子部品１２の頂点であり、本実施例においては、検出された４個の頂点が電子部品１２の輪郭を規定する輪郭規定要素であることになる。
このように４個の頂点が特定されれば、それらの位置データに基づいて電子部品１２のサイズ，中心位置，傾斜角度等を演算することができ、電子部品１２が装着すべき電子部品１２であるか否かの判定，正しい位置に装着するために修正すべき中心位置誤差および回転位置誤差等の取得が可能となる。
【００５０】
なお、電子部品１２のサイズ，中心位置，傾斜角度等は、輪郭線分を構成している多数の境界点の位置データに基づいて演算することも可能であり、上記のように単純に輪郭線分の始点，終点のみの位置データに基づいて演算する場合より高い精度でサイズ等を取得することができる。例えば、各輪郭線分を構成しているすべての境界点の位置データに基づいてそれら境界点の回帰直線を求め、それら回帰直線自体、またはそれら回帰直線同士の交点である４個の頂点を輪郭規定要素として電子部品１２のサイズ等の取得、あるいは種々の検査を行うことができる。
【００５１】
その一例は、電子部品１２の辺の平行，垂直の検査である。これは、上記４個の頂点もしくは４本の回帰直線により規定される長方形（正確には四辺形）の４辺のうち、２辺ずつが互いに平行で、それら平行な２辺の各組に属する１辺ずつが互いに垂直であるか否かを調べる検査である。この検査の結果、平行度および直角度が設定値より悪い場合は電子部品１２は、目標とする電子部品ではないか、あるいは許容範囲を越える製造誤差を有する電子部品であるなど、何らかの瑕疵があるとされ、その電子部品はプリント基板に装着されないようにされる。
【００５２】
また、２組２辺が平行，垂直であれば、４個の頂点の座標から得られる４辺の長さと、予めデータベースに記憶された電子部品１２の辺の長さとが比較され、部品吸着ノズル１０が吸着した電子部品がプリント基板に装着すべき電子部品であるか否かが判定される。また、２短辺の中点を通る直線と、２長辺の中点を通る直線との交点が中心位置とされ、この中心位置に基づいて電子部品１２の水平面内におけるＸ軸方向およびＹ軸方向の位置ずれが算出される。
なお、電子部品１２の傾斜角度としては、境界線構成要素の検出に続いて実行される傾斜角度の決定処理において決定された傾斜角度を使用してもよく、前記輪郭線分や回帰直線の平均傾斜角度を使用してもよい。
【００５３】
上記電子部品の中心位置や傾斜角度の演算結果、サイズや形状の製造誤差等の演算結果等はＣＲＴ装置４２の画面４４に表示される。図１３はその一例を示す図であり、円は吸着ノズル１０の輪郭線を示し、十字線は吸着ノズル１０の中心を示す。また、３個の長方形のうち、中間の図形が電子部品１２の輪郭線であり、他の大小２つの図形は公差範囲の上限および下限を示す。
【００５４】
以上の説明から明らかなように、本実施例においては、ＣＣＤカメラ１８およびＣＣＤカメラコントローラ２４と、データ処理装置２６の映像信号受信器２８，画像メモリコントローラ３０および画像メモリ３２とにより撮像装置が構成されている。電子部品１２が画像処理対象物の一例であり、図３に示す２つのピーク値Ａ1 ，Ａ2 に基づいて演算される電子部品１２と背景との境界線を決定するしきい値が境界線検出用階調値の一例である。
データ処理装置２６の、しきい値に基づいて電子部品１２の像を表す画素のうちで最も外側に位置する画素（境界線構成画素）を検出する部分、または、補間演算により境界点の位置を特定する部分により、境界線データ作成手段が構成されている。
データ処理装置２６の、前記「境界線構成画素と、その境界線構成画素に対して境界線を間に挟んで隣接する画素との２個の画素の位置と電圧値とに基づく補間演算により、それら２個の画素の中心間に、電圧値がしきい値になると推定される境界点を決定する」部分により境界点位置決定手段が構成され、前記「多数の境界点のうち、隣接する２個を一対とし、それら境界点対を結ぶ線分を境界線分とし、それら境界点対の座標値に基づいて境界線分のＸ軸とＹ軸とのいずれか一方に対する傾斜角度を演算する」部分（この部分により境界線分傾斜角演算手段が構成されている）と、前記「全部の境界点対に基づいて演算された傾斜角度を用いてヒストグラムを作成して２つピーク値を得、大きい方の傾斜角度から９０度（またはπ／４ラジアン）を引いた値と、小さい方の値との平均値を求めて、電子部品１２の撮像面２２の座標軸に対する傾斜角度を得る」部分とにより傾斜角度決定手段が構成されている。
ほぼ長方形の電子部品１２の４個の頂点が輪郭規定要素の一例であり、データ処理装置２６の、４個の頂点の位置を特定する部分が輪郭規定要素決定手段の一例である。
データ処理装置２６の、境界点位置データおよび傾斜角度データに基づいて、境界線の中から、電子部品１２の像の輪郭を形成する輪郭線分の候補である輪郭候補線分を抽出する部分、すなわち、境界点の中から、電子部品１２の傾斜角度とほぼ等しい角度で傾斜した線分を構成する境界点を抽出する部分により、輪郭候補線分抽出手段が構成されている。
データ処理装置２６の、抽出された輪郭候補線分の群から輪郭線分を選出する部分、例えば、ほぼＸ軸方向に延びる一対の輪郭候補線分と、それら輪郭候補線分の延長線間にあって、輪郭候補線分に直角な別の輪郭候補線分との組を取り出す部分により、組処理手段が構成されており、この組処理手段は輪郭線分選出手段の一種である。
データ処理装置２６の、互いに一直線上に位置すると判定された複数本の輪郭線分の長さの総和を演算し、その総和が総和下限値以上であれば、それら輪郭線分が真に輪郭線分であると確認する部分により、輪郭線分選出手段の一種としての合計長さ基準輪郭候補線分群選出手段が構成され、上記総和を演算する前に、始点データが付された境界点から終点データが付された境界点までの境界点の位置データの群に属する境界点の数が設定個数以下である場合に、これら境界点により構成される直線は実際に輪郭線分である可能性はないとして、輪郭候補線分データメモリから削除する部分により、短輪郭候補線分排除手段が構成されている。
【００５５】
次に、部品吸着ノズル１０が電子部品５０を輪郭線からはみ出すことなく吸着した場合の画像処理の例を図１４〜図１９に基づいて簡単に説明する。
この電子部品５０は、長方形の４個の角のうち、隣接する２個の角が円弧状を成し、残りの２個の角部が直線的に切り欠かれるとともに、４辺のうち、相対向する２辺に外向きに凸の突部が設けられた形状を有する。この電子部品５０の場合も電子部品１２の場合と同様に、画素データに基づいて境界線データが作成され、図１４に示すように境界線５２（正確には境界線構成画素の集合）が画面４４に表示される。
【００５６】
次いで電子部品５０の傾斜角度が検出され、図１５に示すように線分４８で表示された後、図１６に示すように、輪郭候補線分ａ〜ｈが抽出される。このとき、部分円弧状の角部および切欠角部は傾斜角度が電子部品５０の傾斜角度とは異なるため、排除される。そして、Ｘ軸にほぼ平行な輪郭候補線分ａ，ｅと、それら輪郭候補線分ａ，ｅの延長線間にある直角な輪郭候補線分ｂ，ｃ，ｄとの組について処理が行われる。輪郭候補線分ｃは一直線上に位置する他の輪郭候補線分がなく、かつそれ自体の長さが総和下限値より短いため、排除される。また、輪郭候補線分ａ，ｅはそれぞれ１本で総和下限値以上あり、また、輪郭候補線分ｂ，ｄは各長さの総和が総和下限値以上あるため、輪郭候補線分とされ、かつ、輪郭候補線分ｂの始点から輪郭候補線分ｄの終点までが１本の輪郭候補線分（ｂ＋ｄ）とされる。
すなわち、本実施例においては、一直線上にある複数の輪郭候補線分の総和が総和下限値以上であるか否かの判定と、１本の輪郭候補線分への置換とが、輪郭線分の選出前に行われるのである。
最後に、輪郭候補線分ａ，（ｂ＋ｄ），ｅ，（ｈ＋ｆ）について、互いの始点と終点との間の距離が設定距離以下であるか否かの判定により、輪郭線分の選出が行われ、選出結果が図１７に示すようにＣＲＴ装置４２の画面４４に表示される。
【００５７】
そして、図１８に示すように、上記４本の輪郭線分の合計８個の始点および終点が取得されるとともに、これら８個の点から電子部品５０の４個の頂点が決定され、電子部品５０のサイズ，中心位置，傾斜角度等が演算され、最終結果が図１９に示すように画面４４に表示される。
【００５８】
なお、請求項１の発明は、図２０に示すように、六角形状の画像処理対象物６０を処理する装置にも適用することができる。この画像処理対象物６０の輪郭を構成する６本の輪郭線分６２ａ〜６２ｆのうち、６２ａと６２ｄとが互いに平行であって、かつそれらの長さの和が６本の輪郭線分６２ａ〜６２ｆの長さの和の半分を超える。
この画像処理対象物６０についても前記実施例と同様に、多数の境界点位置を含む境界線データが作成されるとともに、隣接する２個を一対とする境界点を結ぶ境界線分毎に傾斜角度が演算され、ヒストグラムが作成されて撮像面の座標軸に対する傾斜角度が決定される。このとき、ヒストグラムのピーク値を形成するのは、互いに平行であって、長さの和が輪郭線全体の半分を超える輪郭線分６２ａ，６２ｄを規定する多数の境界点に基づいて得られた傾斜角度である。
ノイズが生じなければ、長さの和が輪郭線全体の半分を超える輪郭線分について得られた傾斜角度が画像処理対象物の傾斜角度になり、傾斜角度が誤りなく決定されるが、ノイズの発生により傾斜角度が誤って決定される恐れがある。互いに直角または平行な直線であって、長さの和が輪郭線全体の半分を超える直線の他に、互いに直角または平行な直線であって、長さの和が輪郭線全体の半分より小さい直線が少なくとも１組含まれる場合、ノイズの発生により傾斜角度のピーク値が逆転し、傾斜角度が誤って決定されることがあるのである。互いに平行または直角な直線の長さの和の輪郭線全体に占める割合が大きく、他の輪郭線との差が大きいほど、ノイズが発生しても逆転を生ずることは少なくなる。
互いに直角または平行な直線の長さの和が輪郭線全体の長さの半分を超えれば、画像処理対象物の傾斜角度を決定することができ、６５％を超えれば殆ど誤りなく決定することができ、８０％を超えれば一層誤りなく決定することができる。
【００５９】
図２１に示す画像処理対象物７０のように、互いに平行な２本の輪郭線分７２ａ，７２ｂと、それら輪郭線分７２ａ，７２ｂの各両端点を結ぶ円弧状の輪郭線分７２ｃ，７２ｄとを含む画像処理対象物の場合、輪郭線分７２ｃ，７２ｄについて境界線データを作成するとき、輪郭線分７２ｃ，７２ｄは互いに傾斜角度の異なる多数の直線に分割されるため、互いに平行な２本の輪郭線分７２ａ，７２ｂの輪郭線全体に占める割合が小さくても、画像処理対象物の傾斜角度を誤りなく決定することができる。
【００６０】
なお、上記各実施例においては、一直線上に並ぶ１本以上の輪郭候補線分の各長さが長さ下限値以下でないこと，一直線状に並ぶ１本以上の輪郭候補線分の各長さの総和が総和下限値以上であること，互いに直角な輪郭候補線分の始点と終点との間の距離が設定値以下であることという条件をすべて満たすか否かにより、輪郭線分の決定が行われたが、これら条件のすべてを満たすことは不可欠ではなく、１つまたは２つ以上の条件の適宜の組合わせを満足すれば輪郭線分であると決定されるようにすることも可能である。
条件が多いほど電子部品１２の輪郭を正確に検出することができるが、逆に、輪郭の検出が不可能であるとの結論に達する検出エラーの発生率が高くなり、電子部品の装着率が低下するため、条件を緩くした方がよい場合もあるのである。
【００６１】
また、画像処理対象物の撮像面の座標軸に対する傾斜角度は、上記各実施例におけるように、隣接する２個ずつの境界点対により規定される境界線分の角度を求め、ヒストグラムを作成してピーク値から傾斜角度を決定してもよく、あるいは２個ずつの境界点対から得られた全部の傾斜角度の平均を求めて画像処理対象物の傾斜角度としてもよい。境界点に基づいて得られる多数の傾斜角度の平均的値を傾斜角度とすればよいのである。
【００６２】
さらに、境界線のほぼＸ軸方向に延びる部分を構成する多数の境界点のうちＮ個（例えば１０個）おきの境界点、あるいはＭ本おきの画素格子線上における境界点のＹ座標値とＸ座標値とに基づいて傾斜角度を求め、得られた複数の傾斜角度のヒストグラムを作成してピーク値から画像処理対象物の傾斜角度を決定してもよく、複数の傾斜角度の平均値を画像処理対象物の傾斜角度としてもよい。
特に、画像データが２値化データで作成される場合には、このようにしなければ、適正に傾斜角度を求めることができない。画像データが２値化データである場合に、すべての境界線構成画素に基づいて傾斜角度を演算しようとすれば、互いに隣接する２つの境界点間の傾斜角度は０度か９０度かであって、これらのヒストグラムを作成することは意味がなく、また、これらの単純平均は、両端の境界点の座標値のみから演算した傾斜角度と同じになってしまうからである。
なお、画像データが２値化データである場合には、境界線構成画素の中心点、あるいは境界線構成画素の中心点とそれに隣接する背景構成画素の中心点とを結ぶ線分の中点を境界点とすればよい。
【００６３】
また、傾斜角度は、境界線のうち、ほぼＸ軸方向に延びる部分とほぼＹ軸方向に延びる部分とのうちの一方のみを構成する境界点を用いて決定してもよい。
さらに、画像処理対象物の全輪郭線を決定する必要がない場合には必要な部分のみが決定されるようにしてもよい。
【００６４】
また、輪郭候補線分の抽出時に、Ｎ個（例えば１０個）の境界点について、隣接する２個ずつの境界点について傾斜角度を求め、それら傾斜角度の平均値が画像処理対象物の傾斜角度とほぼ等しければ、それらＮ個の境界点が輪郭候補線分を構成する点であるとしてもよく、あるいはＮ個の境界点のうち、１個目とＮ個目との境界点を用いて傾斜角度を求め、画像処理対象物の傾斜角度と等しければ、それらＮ個の境界点が輪郭候補線分を構成する点であるとしてもよい。
【００６５】
さらに、画像処理対象物の輪郭線が閉曲線を描いていることも不可欠ではない。例えば、フラットパッケージ型電子部品の各リードを画像処理対象物とすることも可能なのである。リードの投影像は基端側の縁が曖昧な形状になるが、他の３つの縁は明瞭な線を描き、かつ全体としてほぼ四角形を成すことが多いため、各リードを本発明装置の画像処理対象物とすることができるのである。
その他、特許請求の範囲を逸脱することなく、当業者の知識に基づいて種々の変形，改良を施した態様で本発明を実施することができる。
【図面の簡単な説明】
【図１】本発明の一実施例である電子部品装着装置用画像処理装置の構成を概略的に示すブロック図である。
【図２】上記画像処理装置の構成要素であるＣＣＤカメラの撮像面の一部を概念的に示す図である。
【図３】上記画像処理装置において電子部品の撮像により得られた照度データ（電圧データ）のヒストグラムである。
【図４】上記画像処理装置において電子部品の像と背景の像との境界線の検出を概念的に説明する図である。
【図５】上記境界線の検出を具体的に説明する図である。
【図６】上記電子部品が吸着ノズルにより吸着された状態を概略的に示す平面図である。
【図７】上記吸着ノズルおよび電子部品の像と背景の像との境界線がＣＲＴ装置の画面に表示された状態を示す図である。
【図８】上記吸着ノズルにより吸着された電子部品の傾斜角度がＣＲＴ装置の画面に表示された状態を示す図である。
【図９】図７に示す境界線から抽出された輪郭候補線分群がＣＲＴ装置の画面に表示された状態を示す図である。
【図１０】上記輪郭候補線分群を用いた電子部品の角部の検出を説明する図である。
【図１１】上記輪郭候補線分群を用いた電子部品の別の角部の検出を説明する図である。
【図１２】上記輪郭候補線分群を用いて検出された輪郭線分の端点がＣＲＴ装置の画面に表示された状態を示す図である。
【図１３】画像処理の結果がＣＲＴ装置の画面に表示された状態を示す図である。
【図１４】別の種類の電子部品について検出された境界線がＣＲＴ装置の画面に表示された状態を示す図である。
【図１５】図１４に示す電子部品の傾斜角度がＣＲＴ装置の画面に表示された状態を示す図である。
【図１６】図１４に示す電子部品の境界線から抽出された輪郭候補線分群がＣＲＴ装置の画面に表示された状態を示す図である。
【図１７】図１６に示す輪郭候補線分から選出された輪郭線分がＣＲＴ装置の画面に表示された状態を示す図である。
【図１８】図１４に示す電子部品について選出された輪郭線分の端点がＣＲＴ装置の画面に表示された状態を示す図である。
【図１９】図１４に示す電子部品の画像処理結果がＣＲＴ装置の画面に表示された状態を示す図である。
【図２０】請求項１の発明に係る画像処理装置により傾斜角度が決定される画像処理対象物の例を示す図である。
【図２１】請求項１の発明に係る画像処理装置により傾斜角度が決定される画像処理対象物の別の例を示す図である。
【符号の説明】
１２ 電子部品
１８ ＣＣＤカメラ
２２ 撮像面
２６ データ処理装置
３４ ＣＰＵ
４６ 境界線
５０ 電子部品
５２ 境界線
６０，７０ 画像処理対象物
Claims (6)
- 輪郭線全体の長さの半分を超える部分が互に直角または平行な直線により構成される画像処理対象物の画像処理装置であって、
多数の画素により構成される撮像面を有し、前記画像処理対象物を撮像して各画素の入光量に対応した階調値を画像データとして取得する撮像装置と、
前記多数の画素の各々について取得された前記階調値に基づいて、階調値が前記画像処理対象物の像と背景の像との境界線を検出するための境界線検出用階調値に等しい多数の境界点の位置を補間演算する境界点位置決定手段と、
その境界点位置決定手段により決定された多数の境界点の互いに隣接するものを結ぶ線分である多数の境界線分の傾斜角度を求め、それら傾斜角度の分布から前記画像処理対象物の前記撮像面の座標軸に対する傾斜角度を決定する傾斜角度決定手段と
を含むことを特徴とする画像処理装置。 - 外形が、互いに平行な２本の直線と、それら平行直線に対して直角な少なくとも１本の直線とを含み、概して四角形を成す画像処理対象物の画像処理装置であって、
多数の画素により構成される撮像面を有し、前記画像処理対象物を撮像して各画素の入光量に対応した階調値を画像データとして取得する撮像装置と、
前記多数の画素の各々について取得された前記階調値に基づいて、階調値が前記画像処理対象物の像と背景の像との境界線を検出するための境界線検出用階調値に等しい多数の境界点の位置を補間演算する境界点位置決定手段と、
その境界点位置決定手段により決定された多数の境界点の互いに隣接するものを結ぶ線分である多数の境界線分の傾斜角度を求め、それら傾斜角度の分布から前記画像処理対象物の前記撮像面の座標軸に対する傾斜角度を決定する傾斜角度決定手段と、
その傾斜角度決定手段により決定された傾斜角度に基づいて前記画像処理対象物の輪郭を規定する輪郭規定要素を決定する輪郭規定要素決定手段と
を含むことを特徴とする画像処理装置。 - 前記輪郭規定要素決定手段が、
前記境界点位置決定手段により決定された多数の境界点の集合により構成される境界線に属し、傾斜角度が前記傾斜角度決定手段により決定された傾斜角度とほぼ等しい線分を前記画像処理対象物の輪郭線の構成要素である輪郭候補線分として抽出する輪郭候補線分抽出手段と、
その輪郭候補線分抽出手段により抽出された輪郭候補線分群から、互いに直角であって、端点間の距離が設定値以下である２本の輪郭候補線分を輪郭線分として選出する輪郭線分選出手段と、
その輪郭線分選出手段により選出された輪郭線分の群に基づいて前記輪郭規定要素を決定する手段と
を含むことを特徴とする請求項２に記載の画像処理装置。 - さらに、前記輪郭規定要素決定手段により決定された輪郭規定要素と画像処理対象物の寸法データとに基づいて、画像処理対象物が目標とする対象物であるか否かの判定を行う判定手段を含む請求項２または３に記載の画像処理装置。
- 前記境界点位置決定手段が、前記撮像面を構成する多数の画素の各々について得られた画像データが表す背景の階調値と、前記画像処理対象物の階調値とに基づいて、前記境界線検出用階調値を算出する境界線検出用階調値決定手段を含む請求項１ないし４のいずれかに記載の画像処理装置。
- 前記境界点位置決定手段が、中心が前記境界線の両側に位置しかつ互いに隣接する２個の画素の前記階調値に基づいて、それら２個の画素の中心を結ぶ格子線分上において階調値が前記境界線検出用階調値になる境界点の位置を補間演算するものである請求項１ないし５のいずれかに記載の画像処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP04166895A JP3620884B2 (ja) | 1995-03-01 | 1995-03-01 | 画像処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP04166895A JP3620884B2 (ja) | 1995-03-01 | 1995-03-01 | 画像処理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH08237537A JPH08237537A (ja) | 1996-09-13 |
| JP3620884B2 true JP3620884B2 (ja) | 2005-02-16 |
Family
ID=12614778
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP04166895A Expired - Lifetime JP3620884B2 (ja) | 1995-03-01 | 1995-03-01 | 画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3620884B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017010078A (ja) * | 2015-06-16 | 2017-01-12 | 日産自動車株式会社 | 路面標示検出装置及び路面標示検出方法 |
| WO2018179187A1 (ja) * | 2017-03-29 | 2018-10-04 | 株式会社Ｆｕｊｉ | 情報処理装置、実装装置及び情報処理方法 |
| JP2022062236A (ja) * | 2017-02-10 | 2022-04-19 | ナノトロニクス イメージング インコーポレイテッド | 顕微鏡検査において大面積の撮像を容易にするためのカメラと検体の整列 |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7321687B2 (en) | 2002-03-07 | 2008-01-22 | Canon Kabushiki Kaisha | Apparatus and method for image processing to label an object in a binary image |
| JP4502645B2 (ja) * | 2004-01-20 | 2010-07-14 | 富士通株式会社 | 人物画像抽出装置、及びコンピュータプログラム |
| JP4777024B2 (ja) | 2005-09-06 | 2011-09-21 | キヤノン株式会社 | 画像処理装置および画像処理装置の制御方法 |
| US20080093776A1 (en) * | 2006-10-05 | 2008-04-24 | 3M Innovative Properties Company | Method of molding ultraviolet cured microstructures and molds |
| JP2011164992A (ja) * | 2010-02-10 | 2011-08-25 | Toyota Motor Corp | 画像処理装置 |
| CN104279958B (zh) * | 2014-10-24 | 2017-07-21 | 西安诺瓦电子科技有限公司 | 用于指导校正的led显示装置空间位置检测方法及系统 |
| KR102213873B1 (ko) * | 2014-10-28 | 2021-02-08 | 에스케이플래닛 주식회사 | 이미지 분할 서비스 시스템, 이에 적용되는 이미지분할장치 및 그 동작 방법 |
| US10937168B2 (en) | 2015-11-02 | 2021-03-02 | Cognex Corporation | System and method for finding and classifying lines in an image with a vision system |
| DE102016120775A1 (de) * | 2015-11-02 | 2017-05-04 | Cognex Corporation | System und Verfahren zum Erkennen von Linien in einem Bild mit einem Sichtsystem |
-
1995
- 1995-03-01 JP JP04166895A patent/JP3620884B2/ja not_active Expired - Lifetime
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017010078A (ja) * | 2015-06-16 | 2017-01-12 | 日産自動車株式会社 | 路面標示検出装置及び路面標示検出方法 |
| JP2022062236A (ja) * | 2017-02-10 | 2022-04-19 | ナノトロニクス イメージング インコーポレイテッド | 顕微鏡検査において大面積の撮像を容易にするためのカメラと検体の整列 |
| JP7428406B2 (ja) | 2017-02-10 | 2024-02-06 | ナノトロニクス イメージング インコーポレイテッド | 顕微鏡検査において大面積の撮像を容易にするためのカメラと検体の整列 |
| WO2018179187A1 (ja) * | 2017-03-29 | 2018-10-04 | 株式会社Ｆｕｊｉ | 情報処理装置、実装装置及び情報処理方法 |
| CN110463377A (zh) * | 2017-03-29 | 2019-11-15 | 株式会社富士 | 信息处理装置、安装装置及信息处理方法 |
| JPWO2018179187A1 (ja) * | 2017-03-29 | 2019-12-12 | 株式会社Ｆｕｊｉ | 情報処理装置、実装装置及び情報処理方法 |
| EP3606321A4 (en) * | 2017-03-29 | 2020-02-05 | Fuji Corporation | INFORMATION PROCESSING DEVICE, MOUNTING DEVICE, AND INFORMATION PROCESSING METHOD |
| CN110463377B (zh) * | 2017-03-29 | 2021-08-31 | 株式会社富士 | 安装装置及信息处理方法 |
| US11176657B2 (en) | 2017-03-29 | 2021-11-16 | Fuji Corporation | Information processing device, mounting device, and information processing method |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH08237537A (ja) | 1996-09-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3620884B2 (ja) | 画像処理装置 | |
| US6064756A (en) | Apparatus for three dimensional inspection of electronic components | |
| US7034272B1 (en) | Method and apparatus for evaluating integrated circuit packages having three dimensional features | |
| JPH11351827A (ja) | 画像処理装置 | |
| JP4190819B2 (ja) | 電子部品実装装置及び画像認識方法の選択方法 | |
| CN110487189B (zh) | 平坦度检测方法、平坦度检测装置及存储介质 | |
| WO2010090605A1 (en) | Methods for examining a bonding structure of a substrate and bonding structure inspection devices | |
| JP2008292430A (ja) | 外観検査方法および外観検査装置 | |
| CN113474618A (zh) | 使用多光谱3d激光扫描的对象检查的系统和方法 | |
| CN114241061A (zh) | 线结构光成像的标定方法、标定系统和标定靶及使用其的测量系统 | |
| JP4338405B2 (ja) | サイズ測定システムおよびサイズ測定装置 | |
| JP2000163579A (ja) | 外観検査方法およびその装置 | |
| JP2930746B2 (ja) | 部品検査装置 | |
| JP2008294065A (ja) | 電子部品の実装方法及び装置 | |
| TWI427263B (zh) | 突起之高度測定方法、突起之高度測定裝置、程式 | |
| JP3272998B2 (ja) | バンプ高さ良否判定装置 | |
| JPH10288505A (ja) | ワークの位置検出方法およびワークの外観検査方法およびこれらの装置 | |
| JPH08204096A (ja) | 半導体装置のリード外観検査方法および検査装置 | |
| JP3823488B2 (ja) | Ｉｃリード浮き検査装置及び検査方法 | |
| JPH11132737A (ja) | 画像処理方法 | |
| JPH06281421A (ja) | 画像処理方法 | |
| JP3189604B2 (ja) | 検査方法および装置 | |
| JPH0617849B2 (ja) | 発光素子の発光点位置測定装置 | |
| JP3680578B2 (ja) | 画像認識方法および検査方法 | |
| JPH10105720A (ja) | 孔位置の光学的計測方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20031219 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040113 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040311 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040706 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040831 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20041019 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20041116 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081126 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091126 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101126 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101126 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111126 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121126 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121126 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131126 Year of fee payment: 9 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |