JP2005286241A - 電子回路製造関連作業機 - Google Patents
電子回路製造関連作業機 Download PDFInfo
- Publication number
- JP2005286241A JP2005286241A JP2004101135A JP2004101135A JP2005286241A JP 2005286241 A JP2005286241 A JP 2005286241A JP 2004101135 A JP2004101135 A JP 2004101135A JP 2004101135 A JP2004101135 A JP 2004101135A JP 2005286241 A JP2005286241 A JP 2005286241A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- electronic component
- image
- range
- position information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Solid State Image Pick-Up Elements (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
- Supply And Installment Of Electrical Components (AREA)
- Wire Bonding (AREA)
- Die Bonding (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
【課題】画像データ取得時間を短縮することにより、電子回路製造関連作業機の作業速度の向上を図る。
【解決手段】電子回路製造関連作業機を、部品撮像装置24がCMOS型撮像センサ104および読出制御部108を備え、位置情報取得装置90が撮像範囲設定部92を備えるように構成する。撮像範囲設定部92は、制御装置80から送信された撮像すべき電子部品等の情報に基づいて、全撮像範囲のうちの、電子部品等が位置すると予定される範囲を設定撮像範囲として設定する。読出制御部108は、CMOS型撮像センサ104を制御し、全ての光電変換素子のうち、設定撮像範囲の光を受光する光電変換素子だけから信号電荷を読み出す。そのため、不要な範囲の光を受光する光電変換素子から信号電荷を読み出す時間を省略することができ、画像データ取得時間を短縮することができる。
【選択図】 図2
【解決手段】電子回路製造関連作業機を、部品撮像装置24がCMOS型撮像センサ104および読出制御部108を備え、位置情報取得装置90が撮像範囲設定部92を備えるように構成する。撮像範囲設定部92は、制御装置80から送信された撮像すべき電子部品等の情報に基づいて、全撮像範囲のうちの、電子部品等が位置すると予定される範囲を設定撮像範囲として設定する。読出制御部108は、CMOS型撮像センサ104を制御し、全ての光電変換素子のうち、設定撮像範囲の光を受光する光電変換素子だけから信号電荷を読み出す。そのため、不要な範囲の光を受光する光電変換素子から信号電荷を読み出す時間を省略することができ、画像データ取得時間を短縮することができる。
【選択図】 図2
Description
本発明は、電子回路構成部材を撮像する撮像装置を備え、撮像によって得られた画像データに基づいて電子回路の製造に関連する作業を行う作業機に関する。
電子回路製造関連作業機は、電子回路構成部材を撮像する撮像装置を備え、撮像によってそれらの位置,寸法等を取得し、その取得された位置,寸法等を利用して作業を行うものが存在する。例えば、部品装着機は、装着ヘッドに保持された回路部品を撮像し、その画像データを画像処理することによりその部品の保持位置のずれを取得し、そのずれ量に基づく補正を行って装着作業を行っている。この画像処理の速さは、作業機の作業速度を左右するため、できるだけ迅速に行うことが望まれ、例えば、画像処理の速度を向上させる技術として、下記特許文献に記載の記述等が検討されている。
特開2001−116528号公報
しかしながら、上記〔特許文献1〕には、CCD型の撮像センサを有する撮像装置において、その撮像装置によって得られた画像データのうち、必要なもののみに対して画像処理を行う技術である。ところが、CCD型の撮像センサを用いる場合、センサの有する全ての素子からのデータが読み出されるため、画像処理に不要な部分の画像データまでもが取り込まれる。したがって、画像データ取得の段階において相当の時間がかかることから、上記技術を持ってしても、充分満足できるまでには作業速度を向上させ得ないのである。本発明は、そのような実情に鑑み、迅速な作業を行い得る電子回路製造関連作業機を提供することを課題とする。
上記課題を解決するために、請求項1に記載の電子回路製造関連作業機は、(a) 露光量に応じた信号電荷を蓄える光電変換素子が二次元的に多数配列された受光面を有する撮像センサを備え、その撮像センサの受光面に電子部品,回路基板等の電子回路構成部材あるいはそれの一部分である撮像対象の像を結像させて、前記光電変換素子の各々に蓄えられる信号電荷に基づいて撮像対象に関する画像データを取得する撮像装置と、(b) その撮像装置によって得られた前記画像データを処理して前記撮像対象の位置情報を取得する位置情報取得装置とを含んで構成され、その取得された位置情報を利用して電子回路の製造に関連する作業を行う電子回路製造関連作業機であって、前記撮像装置が、前記撮像センサの全ての前記光電変換素子が受光することにより撮像される全撮像範囲のうちの一部分である設定撮像範囲の光を受光する前記光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて前記画像データを取得する設定範囲画像データ取得部を備えることを特徴とする。
撮像装置が有する撮像センサは、フォトダイオード,MOS型トランジスタ等の光電変換素子が二次元的(例えば、格子状あるいはマトリックス状)に多数配列されているものであればよい。一般的なCCD型の撮像センサでは、それら全ての光電変換素子の各々から信号電荷が読み出され、その信号電荷に基づいて画像データが取得される。しかし、多くの場合、撮像対象を撮像するために必要な範囲が全撮像範囲よりも小さいため、撮像時に全ての光電変換素子から信号電荷を読み出すと、不要な信号電荷を読み出すための無駄な時間が必要となる。そこで、設定撮像範囲として設定された撮像対象を撮像するために必要な範囲の光を受光する光電変換素子だけから信号電荷を読み出せば、不要な範囲(全撮像範囲のうち、設定撮像範囲以外の範囲)の光を受光する光電変換素子の信号電荷を読み出す時間を省くことができ、信号電荷を読み出して画像データを取得する時間である画像データ取得時間を短縮することができる。なお、信号電荷を読み出すとは、例えば、信号電荷をそのままあるいは増幅して取り出すことだけでなく、信号電荷を電気信号としてあるいはその電気信号を増幅して取り出すこと等をも意味する。
請求項1に記載された電子回路製造関連作業機(以後、電子回路製造関連作業機を単に「作業機」と略記する場合がある。)により、撮像において、撮像センサの全ての光電変換素子から信号電荷が読み出される場合と比較して、画像データ取得時間が短くなることにより、電子回路製造関連作業(以後、電子回路製造関連作業を作業と略記する場合がある。)を行う速度の向上を図れるという効果が得られる。また、全撮像範囲の面積と比較して設定撮像範囲の面積が小さければ小さいほど画像データ取得時間短縮の度合いが大きくなる。なお、設定撮像範囲の数,大きさ,形状等の制限は特にない。1つの撮像対象に1つの設定撮像範囲を設定すること,1つの撮像対象に複数の設定撮像範囲を設定すること,複数の撮像対象に1つの設定撮像範囲を設定すること等が可能である。
撮像対象は、例えば、電子部品,回路基板あるいはそれらの一部分に加え、回路基板上のクリームはんだ,接着剤等あるいはそれらの一部分であってもよい。なお、電子部品の一部分は、例えば、電子部品の周縁部,頂点の周辺,下面の一部分等であってよい。なお、また、回路基板の一部分は、回路基板の配線パターン,回路基板の表面に付された基準マーク等であってよい。撮像対象の位置情報には、水平方向の位置情報である水平位置情報と高さ方向の位置情報である高さ位置情報との少なくとも一方が含まれる。水平位置情報とは、例えば、水平方向における撮像対象の中心位置(あるいは重心位置),輪郭線上の点の位置,特異的な部分(例えば、頂点,角,突部等)の位置,回転角度位置である向き,寸法等の情報である。一方、高さ位置情報は、例えば、撮像対象の高さ方向の位置,高さ方向の寸法等の情報である。
本項に記載の作業機は、例えば、はんだ印刷機,接着剤塗布機,部品装着機,それらの作業結果を検査する検査機等のいずれの作業機であってもよい。作業機の種類や作業の目的によって、撮像対象として何を撮像するか,どのように設定撮像範囲を設定するか,位置情報として何を取得するか等を任意に決定することができる。例えば、検査機は、撮像対象として回路基板上の電子部品,はんだ等や回路基板の基準マーク等を撮像し、位置情報として電子部品の位置や向き,はんだの輪郭線上の点の位置,基準マークの位置等を取得する。
なお、本項に記載の作業機を、撮像センサが、任意の光電変換素子からそれらの各々に蓄えられた信号電荷を読み出す読出手段を有し、画像データ取得部が、読出手段を制御することによって設定撮像範囲の光を受光する光電変換素子だけから信号電荷を読み出す処理を読出手段に行わせる読出制御部を備えるように構成してもよい。例えば、XYアドレス方式のMOS型撮像センサは、垂直走査回路,水平走査回路を有している。その撮像センサは、垂直走査回路によって光電変換素子のY方向の位置(垂直位置)を、水平走査回路によって光電変換素子のX方向の位置(水平位置)を決定し、任意の1つの光電変換素子の信号電荷を読み出すことができる。
また、本項に記載の作業機を、位置情報取得装置が、全撮像範囲のうち撮像対象を撮像するために必要な範囲を設定撮像範囲として設定する撮像範囲設定部を備えるように構成することができる。撮像すべき撮像対象の標準的な寸法や撮像時の基準位置が既知である場合、撮像対象の寸法や撮像時の基準位置等に合わせて撮像範囲を設定すれば、設定撮像範囲の面積が小さくなり、信号電荷を読み出すべき光電変換素子の数が減少する。そのため、効率的に画像データ取得時間を短縮することができる。なお、撮像範囲設定部は撮像装置,制御装置,当該作業機に含まれる他の装置等のいずれに備えられていてもよい。
請求項2に記載の電子回路製造関連作業機は、請求項1に記載された作業機を、撮像センサが、相補形金属酸化物半導体型撮像センサであるように構成したものである。
相補形金属酸化物半導体(CMOS)型撮像センサは、例えば、NMOS型トランジスタとPMOS型トランジスタとが組み合わされた回路であるCMOS回路を用いて形成されているセンサである。CMOS回路を用いることにより、撮像センサの消費電力を低減させることができる等のメリットがある。なお、撮像センサとしてCMOS型撮像センサの一種であるしきい値変調(VMIS)型撮像センサを用いてもよい。VMIS型撮像センサは、1つの埋め込みフォトダイオードに1つのリングゲートおよび1つのMOS型トランジスタが組み合わされて1つの単位セルが構成されている。VMIS型撮像センサは、1つのMOS型トランジスタがスイッチと増幅回路との機能を果たすため、複数のトランジスタを用いて増幅機能を実現する単位セルを有する撮像センサに比べて、単位セルの面積を小さくすることができる。
請求項3に記載の電子回路製造関連作業機は、請求項1または請求項2に記載された作業機を、電子部品を回路基板の表面に装着する作業を行うものであって、供給される電子部品を保持して回路基板の表面に装着する装着装置と、前記位置情報を利用して前記装着装置を制御する制御装置とを備えるように構成したものである。
部品装着機は、部品装着作業を正確に行うために、装着装置により保持した電子部品を撮像して画像を取得し、その画像を画像処理することにより電子部品の位置情報を取得する。一方、電子回路の高密度化が進む中、部品装着機が装着する単位時間当たりの部品点数は増加しており、部品装着作業を迅速に行うことが強く望まれているため、画像データ取得時間を短縮することが特に有効なのである。
請求項4に記載の電子回路製造関連作業機は、請求項3の作業機を、撮像装置が、装着装置に保持された電子部品の下面の少なくとも一部を撮像対象として撮像するものであり、位置情報取得装置が、撮像対象の水平方向の位置情報を取得するものであり、制御装置が、その取得された水平位置情報を利用して装着装置の制御を行うものであり、設定範囲画像データ取得部が、全撮像範囲のうち、撮像対象が位置することが予定されている範囲を設定撮像範囲として、その設定撮像範囲の光を受光する光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて画像データを取得するように構成したものである。
保持位置ずれ等による電子部品の水平方向の位置ずれは、装着精度を大きく低下させる。その水平方向の位置ずれを補正するために、水平位置情報が取得されるのである。なお、本項における設定撮像範囲は、撮像対象が位置することが予定されている範囲とすることができ、例えば、撮像時に撮像対象が位置すべき範囲から位置誤差を考慮した分だけ広げた範囲となるように設定することができる。
請求項5に記載の電子回路製造関連作業機は、請求項4に記載された作業機を、装着装置が、供給される複数の電子部品を保持して回路基板の表面に装着するものであり、撮像装置が、装着装置に保持された複数の電子部品の中の2以上の電子部品の各々の下面の少なくとも一部をそれぞれ撮像対象として一度に撮像するものであり、位置情報取得装置が、撮像対象の各々の水平方向の位置情報を取得するものであり、設定範囲画像データ取得部が、全撮像範囲のうち、撮像対象の各々が位置することが予定されている各々の範囲を設定撮像範囲として、それらの設定撮像範囲の光を受光する光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて画像データを取得するように構成したものである。
複数の設定撮像範囲を設定することは、装着装置が複数の部品を保持する装着ヘッドを備えている場合等に特に有効である。その装着ヘッドが、大きさの異なる複数の電子部品を保持している場合等に、各電子部品の大きさに応じて複数の設定撮像範囲の各々を設定することができる。
請求項6に記載の電子回路製造関連作業機は、請求項3ないし請求項5のいずれかに記載された作業機が、装着装置に保持された電子部品の一部分を照らす照射光をその電子部品の下方から照射する照射装置を備え、撮像装置が、保持された電子部品の下方、かつ、照射装置とは異なる方向から撮像するように設けられて、照射光を照射された電子部品の一部分である被照射部の像を含む画像の画像データを取得するものであり、位置情報取得装置が、照射装置および撮像装置の配置によって定まる関係に基づいて、画像内における被照射部の位置から被照射部の高さ方向の位置情報を取得するものであり、制御装置が、その取得された高さ位置情報を利用して装着装置の制御を行うものであり、設定範囲画像データ取得部が、全撮像範囲のうち、被照射部が位置することが予定されている範囲を設定撮像範囲として、その設定撮像範囲の光を受光する光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて画像データを取得するように構成したものである。
電子部品の高さ位置情報を取得すれば、位置情報に基づいて装着装置等の高さ位置を補正することにより、装着時に電子部品と回路基板との過度の衝突を防ぐことができる等の効果がある。スポット光,スリット光等の電子部品の一部分を照らす照射光を電子部品に照射すれば、電子部品の一部分だけが照らされて電子部品の表面に点状,線状等の高輝度部分が生じ、その高輝度部分が被照射部として明るく撮像される。撮像対象となる被照射部を照射装置と異なる方向から撮像すると、被照射部の高さによって画像内における被照射部の位置が変化する。予め試験的な撮像を行うこと等によって被照射部の高さと画像内における被照射部の位置との関係を求めておけば、画像内における被照射部の位置に基づいて被照射部の高さ位置情報を取得することができる。設定撮像範囲は、被照射部が位置することが予定されている範囲とすることができ、その範囲は被照射部の寸法,被照射部の高さ位置,画像内における被照射部の取り得る位置等に基づいて設定すればよい。
請求項7に記載の電子回路製造関連作業機は、請求項6に記載された作業機を、照射装置が、装着装置に保持された電子部品の下面に線状の被照射部を形成する照射光としてのスリット光を照射するものであり、装着装置が、保持された電子部品とスリット光との相対移動に伴いスリット光が電子部品の下面を走査するように、保持された電子部品を照射装置および撮像装置に対して移動させる機能を有するものであり、撮像装置が、保持された電子部品の下面をスリット光が走査する過程において、定められた時間間隔で被照射部を複数回撮像することにより複数の画像の画像データを取得するものであり、位置情報取得装置が、それら複数の画像の画像データを処理することにより、電子部品の下面の水平位置情報と高さ位置情報とを取得するものであり、制御装置が、その取得された水平位置情報と高さ位置情報とを利用して装着装置を制御を行うように構成したものである。
本項に記載の作業機により、スリット光により撮像対象を走査しながら1あるいは2方向から複数回撮像して撮像対象の水平位置情報と高さ位置情報と(三次元データ)を取得する、いわゆる光切断法による電子部品の下面の三次元データの取得において、画像データ取得時間を短縮することができる。設定撮像範囲である被照射部が位置することが予定されている範囲は、被照射部の寸法(長さ),被照射部の高さ位置,画像内における被照射部の取り得る位置等に基づいて設定される。なお、本項における制御装置を、スリット光が電子部品の下面を走査するように保持された電子部品を照射装置および撮像装置に対して移動させるように装着装置の制御を行う走査制御部を備えるように構成してもよい。走査する過程における複数回の撮像により取得された複数の画像の画像データは、処理されて1つの三次元情報を有する画像データに変換すればよい。
以下、本発明の一実施例を、図を参照しつつ詳しく説明する。なお、本発明は、決して下記の実施例に限定されるものではなく、下記実施例の他、前記〔課題を解決するための手段〕の項に記載された態様を始めとして、当業者の知識に基づいて種々の変更、改良を施した種々の態様で実施することができる。
1. 部品装着機の概要.
電子回路製造関連作業機(以後、作業機と略記する場合がある)の一実施例として、部品装着機10を図1に示す。図1において2台の部品装着機10は同機種であり、右側の部品装着機10は外装板等を取り除いた状態を示している。部品装着機10は、部品供給装置20,装着装置22,部品撮像装置24および基板保持搬送装置26を含んでいる。なお、この図において方向をXYZ方向で示すものとし、図面右下に矢印でX,Y,Zの方向を表示する。矢印の向きはX,Y,Zそれぞれの正の方向を示す。なお、Z方向を単に上下方向と表現する場合もある。
電子回路製造関連作業機(以後、作業機と略記する場合がある)の一実施例として、部品装着機10を図1に示す。図1において2台の部品装着機10は同機種であり、右側の部品装着機10は外装板等を取り除いた状態を示している。部品装着機10は、部品供給装置20,装着装置22,部品撮像装置24および基板保持搬送装置26を含んでいる。なお、この図において方向をXYZ方向で示すものとし、図面右下に矢印でX,Y,Zの方向を表示する。矢印の向きはX,Y,Zそれぞれの正の方向を示す。なお、Z方向を単に上下方向と表現する場合もある。
基板保持搬送装置26は、2つのコンベア部を備え、隣接する作業機10等からそれらコンベア部に回路基板30を搬入し、保持する装置である。この図においては、2つのコンベア部のうち、部品供給装置20に近いコンベア部に回路基板30が保持されている。部品供給装置20は、電子部品テーピングを巻回したリールを保持する複数のテープフィーダ32を備え、各々のテープフィーダ32が電子部品テーピングを図においてYの正方向(部品供給装置20から基板保持搬送装置26へ向かう方向)に送ることにより、電子部品を取出位置34に供給する装置である。装着装置22は、装着ヘッド40を備えており、その装着ヘッド40は、自身に取り付けられた複数の吸着ノズル42によって複数の電子部品を保持するものである。具体的には、装着装置22は装着ヘッド40をXY移動させ、テープフィーダ32の取出位置34にある電子部品を吸着ノズル42に保持して取り出し、その吸着ノズル42で保持した電子部品を部品撮像装置24の上方の撮像位置に位置させ、部品撮像装置24による電子部品の撮像が行われた後、回路基板30上の装着位置に電子部品を装着する。なお、上記装着ヘッド40を、1つの吸着ノズルを保持する装着ヘッド等に交換することが可能である。
部品撮像装置24は、直立撮像カメラ50および傾斜撮像カメラ52(以後、撮像カメラ50,52と総称する場合がある。)を有している。部品装着機10は、リング型照明装置54,スリット光照射装置58(以後、照明装置等54,58と総称する場合がある。)を備えており、それぞれ直立撮像カメラ50,傾斜撮像カメラ52による撮像の際に用いられる。直立撮像カメラ50は、装着ヘッド40に保持された電子部品をそれの真下から撮像するように、自身の光軸が鉛直になるように設けられている。リング型照明装置54は、直立撮像カメラ50の上部外周に設けられており、多数のLED(発光ダイオード)を有している。リング型照明装置54によって下方から全体的に照明された電子部品の下面を撮像対象として直立撮像カメラ50で撮像することにより、電子部品の下面の平面像を取得することができる。傾斜撮像カメラ52は、スリット光照射装置58の真上に位置する電子部品をそれの斜め下方から撮像するように、自身の上部が基板保持搬送装置26側に近づく向きに設定角度だけ傾けて設けられている。スリット光照射装置58は、レーザ光源,レーザ光の径を拡大するビームエクスパンダおよびスリット板を有しており、自身の真上を通過する電子部品に、その電子部品の進行方向とほぼ直交する平板状の光であるスリット光を照射して、電子部品の下面の一部を線状に照らす装置である。それら、傾斜撮像カメラ52およびスリット光照射装置58は、電子部品の下面の三次元的な情報を取得する際に用いられる。
2. 機能ブロック図.
図2に、部品装着機10の、電子部品の撮像および位置情報の取得に関する機能を中心としたブロック図を示す。部品装着機10は、部品撮像装置24,照明装置等54,58,制御装置80,位置情報取得装置90,装着装置22等を含んでいる。
図2に、部品装着機10の、電子部品の撮像および位置情報の取得に関する機能を中心としたブロック図を示す。部品装着機10は、部品撮像装置24,照明装置等54,58,制御装置80,位置情報取得装置90,装着装置22等を含んでいる。
制御装置80は、コンピュータを主体とした装置であり、部品装着機10を構成する各種の装置と指令やデータ等の授受を行うことによってそれらを制御する装置である。制御装置80は、装着装置22,部品撮像装置24等を制御することにより、部品供給装置20から電子部品を取り出させて、その電子部品を撮像させ、その撮像により得られた電子部品の位置情報を利用して回路基板30上の正しい位置に電子部品を装着する等の作業を部品装着機10に行わせる。制御装置80は、電子部品の撮像を行わせる際に、位置情報取得装置90および部品撮像装置24に指令等を送信する。例えば、装着ヘッド40に保持された電子部品を撮像する前に、その電子部品の型番とその電子部品が撮像時に位置すると予定される基準位置等に関する情報を位置情報取得装置90に送信する。また、例えば、装着ヘッド40に保持された電子部品が撮像位置に位置する際に、部品撮像装置24に撮像を実行するように要求する指令を送信する。
位置情報取得装置90は、部品撮像装置24によって取得された画像データを処理し、装着装置22に保持された電子部品あるいはそれらの一部分である撮像対象の位置情報を取得する装置である。位置情報取得装置90は、撮像範囲設定部92,画像処理部94および位置情報取得部96を備えている。撮像範囲設定部92は、装着ヘッド40に保持される電子部品の型番と撮像時の基準位置等に関する情報を制御装置80から取得し、その情報に基づいて撮像範囲を設定する。画像処理部94は、部品撮像装置24から送信された画像データを所定の画像処理方法で画像処理することにより、撮像対象の画像内における位置や寸法を取得し、位置情報取得部96に送信する。その位置情報取得部96は、画像内における位置や寸法に基づいて撮像対象の位置や寸法等の情報である位置情報を取得し、制御装置80に送信する。なお、画像処理部94は、撮像カメラ50,52が撮像可能な最大の範囲である全撮像範囲を含む仮想平面を形成するように構成された画像メモリを有している。設定撮像範囲の画像データは、仮想平面上の、全撮像範囲におけるその設定撮像範囲の位置に配り置かれるように画像メモリに格納される。このような再配置処理により、設定撮像範囲内にある撮像対象の全撮像範囲における位置を取得することができるようになっているのである。
部品撮像装置24に備えられた直立撮像カメラ50,傾斜撮像カメラ52は同様の構成であり、直立撮像カメラ50の構成を代表的に図示する。それら撮像カメラ50,52はそれぞれ、撮像制御部100,集光部102、CMOS型撮像センサ104および撮像信号処理回路106を有している。集光部102は、ハード的には、集光レンズ,メカニカルシャッター,絞り等を有し、適切な量の入射光を集光して撮像センサ104上に撮像対象の像を結像させる機能を満たす。CMOS型撮像センサ104(以後、撮像センサと略記する場合がある)は、受光した光を信号電荷に変換し、その信号電荷に基づいて取得される撮像信号を撮像信号処理回路106に送信する。撮像信号処理回路106は、撮像センサ104によって取得された撮像信号のゲイン調整,A−D変換等の処理を行う回路である。撮像制御部100は、制御装置80の指令に従い、撮像対象の撮像を行って画像データを取得するように照明装置等54,58、集光部102、撮像センサ104および撮像信号処理回路106を制御する。撮像制御部100は、撮像センサ104から信号電荷を読み出す制御を行う読出制御部108を有している。その読出制御部108については後述する。
3. CMOS型撮像センサの詳細.
図3にCMOS型撮像センサ104の構造を模式的に示す。なお、この図において、左右方向が水平方向,上下方向が垂直方向とする。撮像センサ104は、フォトダイオード122,増幅器124およびゲートスイッチ126を有する単位セル128(図4参照),垂直走査回路140および水平走査回路142を含んで構成されている。なお、CMOS型撮像センサ104における、各種の回路は、pチャネルMOSトランジスタおよびnチャネルMOSトランジスタを用いて作成されたCMOS回路によって構成されている。
図3にCMOS型撮像センサ104の構造を模式的に示す。なお、この図において、左右方向が水平方向,上下方向が垂直方向とする。撮像センサ104は、フォトダイオード122,増幅器124およびゲートスイッチ126を有する単位セル128(図4参照),垂直走査回路140および水平走査回路142を含んで構成されている。なお、CMOS型撮像センサ104における、各種の回路は、pチャネルMOSトランジスタおよびnチャネルMOSトランジスタを用いて作成されたCMOS回路によって構成されている。
単位セル128は、垂直方向の並びが「列」,水平方向の並びが「行」となるようにしてマトリクス状に配列されている(図においては6×6)。垂直走査回路140は、水平方向に走る複数の行選択線144を有しており、それら行選択線144の各々は、水平方向に並ぶ単位セル128の行の各々と対応するように配置されている。水平走査回路142は、垂直方向に走る複数の列信号線146,水平方向に走る水平信号線148および複数の列選択スイッチ150を有している。列信号線146の各々は、垂直方向に並ぶ単位セル128の列の各々と対応するように配置されている。列選択スイッチ150は、トランジスタによって構成され、水平走査回路142によって印可される駆動信号によりON/OFFが切り換えられるものであり、水平信号線148と複数の列信号線146の各々とを個別にON/OFF切換可能に接続する。
図4に、1つの単位セル128の構造を模式的に示す。フォトダイオード122は、信号電荷の出力側において増幅器124に接続され、他端はアースに接続されている。増幅器124は、フォトダイオード122に蓄えられた信号電荷を増幅する回路であり、ゲートスイッチ126を介して列信号線146と接続されている。ゲートスイッチ126は、トランジスタによって構成され、そのトランジスタのゲート電極に印可される駆動信号によりON/OFFが切り換えられるものであり、垂直走査回路140から行選択線144に出力された駆動信号によりON状態となる。
いずれかの行選択線144に駆動信号が印可されて1行分のゲートスイッチ126がON状態とされ、かつ、水平走査回路142からの駆動信号によりいずれかの列選択スイッチ150がON状態とされると、その1行分のゲートスイッチ126と接続されている1行分のフォトダイオード122のうち、ONにされた列選択スイッチ150に接続されている列信号線146とゲートスイッチ126を介して接続されている1つのフォトダイオード122の信号電荷だけが読み出される。つまり、フォトダイオード122に蓄えられた信号電荷は、そのフォトダイオード122につながるゲートスイッチ126および列選択スイッチ150がON状態の時に電気信号として読み出され、列信号線146,水平信号線148等を経由して出力されるのである。
本実施例において、任意の光電変換素子からそれらの各々に蓄えられた信号電荷を読み出す読出手段は、垂直走査回路140,水平走査回路142およびゲートスイッチ126を含んで構成されている。本実施例において、水平信号線148が光電変換素子の各々から信号電荷を読み出す際に撮像信号としての電気信号の通り道となる信号線に該当し、ゲートスイッチ126および列選択スイッチ150が信号線と光電変換素子の各々との間を読出し状態と非読出し状態とに切り換えるスイッチに該当する。なお、光電変換素子の各々に蓄えられた信号電荷は、増幅器124により電気信号である信号電圧に変換されて増幅され、その信号電圧が信号線を介して撮像信号処理回路106に送信される。なお、また、撮像センサ104には、図示を省略するリセット線およびリセットスイッチが設けられており、適宜のタイミングで、任意の単位セル128のフォトダイオード122に蓄積された信号電荷を消去することができる。
4. 全撮像範囲と設定撮像範囲.
図5に、Wn(列)×Lm(行)のマトリクス状に配列された単位セル128を示す。なお、それらの単位セル128を上記のように行や列で表す場合や、横軸をW,縦軸をLとするWL座標で表す場合がある。撮像センサ104の全ての単位セル128のフォトダイオード122によって撮像される範囲が全撮像範囲となる。その全撮像範囲を撮像することにより得られる画像を最大画像と称する。その最大画像を構成する画素の数は単位セル128の数と等しく、その最大画像においてそれらの画素がWn(列)×Lm(行)のマトリクス状に配列している。1つの単位セル128から読み出された信号電荷に基づいて1つの画素が形成されており、各単位セル128と各画素とは1対1で対応しているのである。そして、最大画像における各画素の位置は、各画素に対応する単位セル128の撮像センサ104における位置(W,L)で表すことができる。すなわち、最大画像における各画素の位置をWL座標で表すことができ、WL座標が等しい画素と単位セル128とは互いに1対1で対応しているのである。
図5に、Wn(列)×Lm(行)のマトリクス状に配列された単位セル128を示す。なお、それらの単位セル128を上記のように行や列で表す場合や、横軸をW,縦軸をLとするWL座標で表す場合がある。撮像センサ104の全ての単位セル128のフォトダイオード122によって撮像される範囲が全撮像範囲となる。その全撮像範囲を撮像することにより得られる画像を最大画像と称する。その最大画像を構成する画素の数は単位セル128の数と等しく、その最大画像においてそれらの画素がWn(列)×Lm(行)のマトリクス状に配列している。1つの単位セル128から読み出された信号電荷に基づいて1つの画素が形成されており、各単位セル128と各画素とは1対1で対応しているのである。そして、最大画像における各画素の位置は、各画素に対応する単位セル128の撮像センサ104における位置(W,L)で表すことができる。すなわち、最大画像における各画素の位置をWL座標で表すことができ、WL座標が等しい画素と単位セル128とは互いに1対1で対応しているのである。
設定撮像範囲は、全撮像範囲のうちの一部分の範囲であり、前記撮像範囲設定部92により設定される。その設定撮像範囲が撮像されて取得される画像を設定範囲画像と称する。その設定範囲画像の最大画像内における位置は、WL座標により規定される。設定範囲画像の位置として規定されるWL座標に位置する単位セル128が、設定撮像範囲の光を受光する単位セル128に該当するのである。図6に、Wn(列)×Lm(行)のマトリクス状に配列された単位セル128と、4つの設定撮像範囲の光をそれぞれ受光する単位セル128の集まりであるブロック212,214,216,218を示す。本実施例において、撮像範囲の設定,読み出し制御等の容易さ等を考慮して、ブロック212等の形状を矩形(正方形を含む)とし、そのブロック212等を互いに向かい合う2つの頂点の座標で規定することとする。そのことにより、各ブロック212等の位置と寸法とを簡便に規定することができる。なお、各ブロック212等は、図において左上に位置する各ブロック内のW座標,L座標の両方が最小となる頂点のWL座標を範囲始点とし、その範囲始点と向かい合う頂点のWL座標を範囲終点として、それら範囲始点および範囲終点のWL座標によって各ブロック212等が規定される。
5. 信号電荷の読み出し.
まず、全ての単位セル128から信号電荷を読み出す際の処理について説明する。なお、単位セル128の各々は1つのフォトダイオード122を有しており、「フォトダイオード122から信号電荷を読み出す」ことと、「単位セル128から信号電荷を読み出す」こととは同義である。
まず、全ての単位セル128から信号電荷を読み出す際の処理について説明する。なお、単位セル128の各々は1つのフォトダイオード122を有しており、「フォトダイオード122から信号電荷を読み出す」ことと、「単位セル128から信号電荷を読み出す」こととは同義である。
信号電荷の読み出しは、図5において最も上に位置する「行」に属する単位セル128から行われる。また、同じ「行」属する単位セル128のうち、最も左に位置する単位セル128から右へ向かって順に信号電荷が読み出される。信号電荷を読み出す処理は、前述の読出制御部108により、垂直走査回路140,水平走査回路142等が定められたタイミングで制御され、1つの行選択線144に駆動信号が印可された状態で、駆動信号が印可される列選択スイッチ150を順次1つずつ左から右へ変えていくことにより1行分の読出しがなされる。駆動信号を印可する1つの行選択線144を、図5において最も上に位置する「行」に対応する行選択線144から、上から下に順次変えてゆき、1行ずつ信号電荷を読み出してゆけば、最終的に全ての単位セル128の信号電荷の読み出しが終了する。
次に、設定撮像範囲の光を受光する単位セル128の信号電荷の読み出しについて、図6に示した複数のブロック212等に属する単位セル128の信号電荷の読出しを例にして説明する。ブロック212等が含む単位セル128のうち、図において最も上に位置する単位セル128が属する行から順に信号電荷の読み出しが行われる。図において、丸数字1を付した矢印(以後、矢印1と称する)で表すように、ブロック212の単位セル128の信号電荷が順次読み出される。続いて、矢印2〜矢印14の順に信号電荷が読み出されて、ブロック212,214,216,218の信号電荷の読出しが完了する。矢印8および9で表す部分の読出しを例にして、読出制御部108による制御について説明する。「行L12」に対応する行選択線144に駆動信号が印可された状態で、「列W5〜W8,列W12〜W17」に対応する各々の列選択スイッチ150が1つずつ順次ONにされた後OFFにされて、「行L12」に属するブロック218,214,216の単位セル128の信号電荷が読み出された後、「行L12」に対応する行選択線144への駆動信号の印可が解除される。
本実施例において、読出制御部108は、読出手段を制御することにより、設定撮像範囲の光を受光する光電変換素子だけから信号電荷を読み出す処理を読出手段に行わせるものである。なお、設定撮像範囲の光を受光する前記光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて前記画像データを取得する設定範囲画像データ取得部は、読出制御部108,読出手段および撮像信号処理回路106を含んで構成されている。
6. 直立撮像カメラによる撮像.
部品装着機10は、装着ヘッド40に保持された電子部品の下面を直立撮像カメラ50によって撮像し、電子部品の水平位置情報である水平方向の位置,向き,寸法等を取得する。その撮像の際に設定される設定撮像範囲の一例を図7に示す。この例では、装着ヘッド40は、8つの吸着ノズル42a,bを円周240上に保持するインデックス型のヘッドであり、それら吸着ノズル42a,bにより、4つの中型電子部品244aと4つの小型電子部品244bとが1つおきに保持されるものとする。撮像センサ104の全てのフォトダイオード122の信号電荷を読み出した場合に撮像される範囲である全撮像範囲250の中に、中型電子部品244aおよび小型電子部品244bの下面が撮像対象とされ、それら2種類の撮像対象にあわせて2種類の大きさの設定撮像範囲254a,bが設定されている。8つの電子部品の全てを囲む1つの設定撮像範囲を設定することも可能であるが、図を見てもわかるように、この例では複数の電子部品が位置する円周240の中央部において電子部品が保持されず、撮像する必要性がない。そのため、この例では1つの設定撮像範囲を設定するよりも、複数の設定撮像範囲を設定する方が撮像する面積が少なくなることがわかる。その結果、信号電荷を読み出すフォトダイオード122の数が少なくてすむため、画像データ取得時間が短くなるのである。なお、図8に示すように、装着ヘッド40に保持された各電子部品を撮像できる範囲で、設定撮像範囲を全て同じ大きさとすることも可能である。また、図9に示すように、1つの電子部品246に対して1つの設定撮像範囲254を設定することも可能である。
部品装着機10は、装着ヘッド40に保持された電子部品の下面を直立撮像カメラ50によって撮像し、電子部品の水平位置情報である水平方向の位置,向き,寸法等を取得する。その撮像の際に設定される設定撮像範囲の一例を図7に示す。この例では、装着ヘッド40は、8つの吸着ノズル42a,bを円周240上に保持するインデックス型のヘッドであり、それら吸着ノズル42a,bにより、4つの中型電子部品244aと4つの小型電子部品244bとが1つおきに保持されるものとする。撮像センサ104の全てのフォトダイオード122の信号電荷を読み出した場合に撮像される範囲である全撮像範囲250の中に、中型電子部品244aおよび小型電子部品244bの下面が撮像対象とされ、それら2種類の撮像対象にあわせて2種類の大きさの設定撮像範囲254a,bが設定されている。8つの電子部品の全てを囲む1つの設定撮像範囲を設定することも可能であるが、図を見てもわかるように、この例では複数の電子部品が位置する円周240の中央部において電子部品が保持されず、撮像する必要性がない。そのため、この例では1つの設定撮像範囲を設定するよりも、複数の設定撮像範囲を設定する方が撮像する面積が少なくなることがわかる。その結果、信号電荷を読み出すフォトダイオード122の数が少なくてすむため、画像データ取得時間が短くなるのである。なお、図8に示すように、装着ヘッド40に保持された各電子部品を撮像できる範囲で、設定撮像範囲を全て同じ大きさとすることも可能である。また、図9に示すように、1つの電子部品246に対して1つの設定撮像範囲254を設定することも可能である。
1つの撮像対象について複数の設定撮像範囲を組み合わせて設定することもできる。例えば、図10に示す撮像対象260は突部262,264を有しており、その撮像対象260に対して複数の設定撮像範囲266,268,270が設定される。例えば、また、図11に示す電子部品440は、撮像対象として電子部品の下面の一部である周縁部を撮像する必要があるが、中央部は撮像する必要はないものである。その電子部品276に対して、4つの設定撮像範囲278,280,282,284が電子部品276の周縁部だけを囲むように設定される。上記2つの例では、複数の設定撮像範囲が設定されることにより、撮像する必要のない部分が減少し、1つの設定撮像範囲が設定された場合よりも、画像データ取得時間が短くなるのである。なお、撮像範囲設定部92は、制御装置の記憶部に記憶されている電子部品等に関するデータを参照し、その電子部品等に対する複数の設定撮像範囲の各々の寸法,相対位置等に基づいて複数の設定撮像範囲を設定する。
ここで、全撮像範囲を撮像する場合の画像データ取得時間と、設定撮像範囲を撮像する場合の画像データ取得時間とをある条件の下で計算して比較する。撮像カメラの駆動周波数が33.3MHzであると仮定すると、1[clock]で読み出す1画素分の画像データ取得時間は約30[ns(nano second)]となる。2048[pixel]×2048[line]の画像を取得する撮像センサにおいて、全撮像範囲を撮像する際の画像データ取得時間は、次の式から約127[ms(milli second)]となる。
2048[pixel]×2048[line]×30[ns]=127[ms]
280[pixel]×280[line]の設定撮像範囲が12個設定されていた際の画像データ取得時間は、次の式から約28.2[ms]となる。
280[pixel]×280[line]×30[ns]×12=28.2[ms]
よって、上記の設定撮像範囲の画像データ取得時間は、全撮像範囲の画像データ取得時間よりも約99[ms](割合にして約78%)短くなる。しかし、設定撮像範囲のフォトダイオードだけから信号電荷を読み出した場合には、ブランキング時間による遅延時間と前述の再配置処理を行う再配置時間とを考慮することが望ましい。遅延時間は、次の式から約1.6[ms]となる。なお、1[clock]は30[ns]である。
190[clock]×280[line]×30[ns]=1.6[ms]
再配置時間は、Pentium(登録商標)IIIの500MHzのCPUを搭載したコンピュータについて測定すると、1画素当たり約32[ns]であった。よって、280[pixel]×280[line]の画像を12個分再配置する時間は、次の式から約30[ms]となる。
280[pixel]×280[line]×32[ns]×12=30[ms]
画像データ取得時間,遅延時間および再配置時間の和は、約60[ms]となる。
28.2[ms]+1.6[ms]+30[ms]=約60[ms]
全てのフォトダイオードからの信号電荷の読み出し時間は約127[ms]であるので、遅延時間および再配置時間を考慮しても画像データ取得等に要する時間が約67[ms](割合にして約53%)短縮される。
以上の計算結果は、撮像カメラの駆動周波数,コンピュータの処理速度等によって変化するが、全撮像範囲よりも撮像する面積が小さい設定撮像範囲の画像データ取得時間は、全撮像範囲の画像データ取得時間よりも短くなることがわかる。
2048[pixel]×2048[line]×30[ns]=127[ms]
280[pixel]×280[line]の設定撮像範囲が12個設定されていた際の画像データ取得時間は、次の式から約28.2[ms]となる。
280[pixel]×280[line]×30[ns]×12=28.2[ms]
よって、上記の設定撮像範囲の画像データ取得時間は、全撮像範囲の画像データ取得時間よりも約99[ms](割合にして約78%)短くなる。しかし、設定撮像範囲のフォトダイオードだけから信号電荷を読み出した場合には、ブランキング時間による遅延時間と前述の再配置処理を行う再配置時間とを考慮することが望ましい。遅延時間は、次の式から約1.6[ms]となる。なお、1[clock]は30[ns]である。
190[clock]×280[line]×30[ns]=1.6[ms]
再配置時間は、Pentium(登録商標)IIIの500MHzのCPUを搭載したコンピュータについて測定すると、1画素当たり約32[ns]であった。よって、280[pixel]×280[line]の画像を12個分再配置する時間は、次の式から約30[ms]となる。
280[pixel]×280[line]×32[ns]×12=30[ms]
画像データ取得時間,遅延時間および再配置時間の和は、約60[ms]となる。
28.2[ms]+1.6[ms]+30[ms]=約60[ms]
全てのフォトダイオードからの信号電荷の読み出し時間は約127[ms]であるので、遅延時間および再配置時間を考慮しても画像データ取得等に要する時間が約67[ms](割合にして約53%)短縮される。
以上の計算結果は、撮像カメラの駆動周波数,コンピュータの処理速度等によって変化するが、全撮像範囲よりも撮像する面積が小さい設定撮像範囲の画像データ取得時間は、全撮像範囲の画像データ取得時間よりも短くなることがわかる。
設定撮像範囲の寸法の決定について説明する。設定撮像範囲の寸法は、電子部品の規格上の寸法である標準寸法,電子部品の最大位置ずれ量および余裕値に基づき、撮像範囲設定部92によって決定される。電子部品の位置ずれ量は、誤差がないと仮定した場合の撮像時における電子部品246の基準位置と、撮像することにより得られる電子部品246の位置との差である。電子部品246の位置ずれは、水平位置および水平方向の向き(回転位置)のずれであり、装着ヘッド40が電子部品を部品供給装置20から取り出す際に生じる保持位置ずれ等によって生じる。位置ずれ量の最大値である最大位置ずれ量は、実験値や過去の作業において記録されたデータに基づいて予め設定されている。余裕値とは、電子部品の位置ずれ量が最大値の時でも、電子部品が設定撮像範囲内に収まるようにするための値であり、予め設定されている値である。図5等に示した設定撮像範囲254の1つを代表的に図12に示す。電子部品246のX方向の標準寸法をSx,最大位置ずれ量をEx,余裕値をRxとすると、設定撮像範囲のX方向の寸法はSx+2Ex+2Rxとなる。設定撮像範囲のY方向の寸法についても、電子部品246のY方向の標準寸法,最大位置ずれ量および余裕値を用いて同様な計算を行えばよい。なお、X方向,Y方向において、それぞれ正負の方向への最大位置ずれ量を異ならせてもよい。
設定撮像範囲の位置は、装着装置22による部品装着作業において規定されているXY座標によって表される。撮像範囲設定部92は、電子部品の標準寸法,最大位置ずれ量,余裕値,撮像時の位置等に関する情報に基づいて、XY座標における範囲始点290および範囲終点292を決定する。具体的には、電子部品の輪郭線上の座標で、X座標だけの最小値であるXmin,Y座標だけの最小値であるYminからそれぞれX,Y方向における最大位置ずれ量および余裕値を引いた座標が範囲始点290となる(Xa,Ya)とされ、その範囲始点290のX座標,Y座標にそれぞれX,Y方向の設定撮像範囲254の寸法を加えた座標が範囲終点292となる(Xb,Yb)とされる。なお、電子部品の標準寸法,最大位置ずれ量,余裕値等は、制御装置80が備える記憶装置(図示省略)に記憶されており、制御装置80から送信された電子部品の型番に基づいて取得される。撮像範囲設定部92は、設定撮像範囲254の範囲始点290および範囲終点292を決定した後、それらのXY座標から、設定撮像範囲254の光を受光する単位セル128のブロックの範囲始点および範囲終点のWL座標を算出し、撮像制御部100等に送信するのである。なお、設定撮像範囲254が複数ある場合は、複数のブロックの範囲始点および範囲終点のWL座標が送信される。
撮像制御部100は、撮像センサ104が複数のブロックの信号電荷の読出しを行うように制御することにより、撮像センサ104に設定撮像範囲254の光を受光するフォトダイオード122だけから信号電荷を読み出させる。信号電荷を読出すことにより得られる撮像信号は、撮像信号処理回路106によって処理されて画像データに変換され、画像処理部94に送信される。その画像処理部94において、画像データが所定の画像処理方法によって画像処理されて最大画像における電子部品246の像の位置,向き,寸法等が取得され、位置情報取得部96に送信される。その位置情報取得部96により、電子部品246の像の最大画像における位置,向き,寸法等に基づき、電子部品246の下面のXY座標における水平位置,水平方向の向き,水平方向の寸法等の位置情報が取得され、制御装置80に送信される。その制御装置80により、水平方向の寸法に基づいて、電子部品246の不良,保持状態の良否等が判定され、それらが正常であれば水平方向の位置,向きに基づいて、電子部品246を装着するための移動量や回転角度が正確に把握されて、正確に装着される。
7. 傾斜撮像カメラによる撮像.
傾斜撮像カメラ52による撮像は、いわゆる光切断法に基づく撮像である。光切断法によれば、スリット光を照射して電子部品の一部を線状に照らし、電子部品をスリット光と交差する方向に移動させながら複数回の撮像を行い、複数回の撮像によって得られた複数の画像を画像処理してから合成することにより、電子部品の下面の三次元的な情報を取得することができる。通常は電子部品を撮像するのであるが、まず、図13に示すような基準チップ300の撮像について説明することにより光切断法の原理を説明する。その基準チップ300は、高さ位置(Z座標)と撮像により得られる画像内の位置との関係を求めるために使用される。基準チップ300は、撮像時に定められた高さ位置に位置するように保持される。撮像時には、その基準チップ300の階段状の面302の一部に、スリット光310により線状に照らされた高輝度となる被照射部312が生じる。
傾斜撮像カメラ52による撮像は、いわゆる光切断法に基づく撮像である。光切断法によれば、スリット光を照射して電子部品の一部を線状に照らし、電子部品をスリット光と交差する方向に移動させながら複数回の撮像を行い、複数回の撮像によって得られた複数の画像を画像処理してから合成することにより、電子部品の下面の三次元的な情報を取得することができる。通常は電子部品を撮像するのであるが、まず、図13に示すような基準チップ300の撮像について説明することにより光切断法の原理を説明する。その基準チップ300は、高さ位置(Z座標)と撮像により得られる画像内の位置との関係を求めるために使用される。基準チップ300は、撮像時に定められた高さ位置に位置するように保持される。撮像時には、その基準チップ300の階段状の面302の一部に、スリット光310により線状に照らされた高輝度となる被照射部312が生じる。
図14に、基準チップ300の被照射部312を撮像対象として撮像する傾斜撮像カメラ52,スリット光照射装置58等の側面図を示す。基準チップ300は、自身の階段状の面302を下に向けた状態で、装着ヘッド40に取り付けられた吸着ノズル320に保持され、Y方向の正の向き(図において右向き)に移動させられる。なお、面302aの高さ位置であるZ座標が「Z6」,面302bの高さ位置であるZ座標が「Z1」とされている。基準チップ300の右端がスリット光照射装置58の真上に位置すると、スリット光310により異なる高さの面302が線状に照らされて、それら面302の各々に被照射部312が生じる。その被照射部312が、傾斜撮像カメラ52によって、斜め下方かつ傾斜撮像カメラ52の光軸がスリット光310と交差する方向から撮像される。この図において、傾斜撮像カメラ52の全撮像範囲324の範囲内が撮像可能であり、最も高い面302aの被照射部312aからの反射光326と最も低い面302bの被照射部312bからの反射光328とは、高さ位置の違いにより全撮像範囲324における位置が異なる。このような関係から、全撮像範囲324が撮像された最大画像における被照射部312の像の位置から被照射部312の高さ位置を求めることができる。
図15に、Y方向の正の向きに移動する基準チップ300の下面を、スリット光310が走査する過程を模式的に示す。基準チップ300が、図において下方に移動させられるため、スリット光310は基準チップ300に対して上方に相対移動する。この図の例では撮像が10回行われ、そのうちの6回の撮像において基準チップ300とスリット光310とが交差している。この図の例では、基準チップ300の下面を全て撮像するため、複数の撮像における隣り合う被照射部312が等間隔に並ぶように、撮像する間隔である走査間隔が設定されている。なお、撮像対象を撮像する回数は、撮像対象のY方向の寸法や走査間隔等に応じて設定される。
図15においてスリット光310aによって基準チップ300が線状に照らされて生じる被照射部312が傾斜撮像カメラ52により撮像されると、図16に示す全撮像範囲324の画像である最大画像352が取得される。基準チップ300の高さ位置が最も高い面302a(Z6)における被照射部312aの像は最大画像352の下方(L座標が大)に位置し、面302の高さ位置が低いほど最大画像352における被照射部312の像の位置が上昇(L座標が小)する。基準チップ300の下面の高さ位置に応じて、最大画像352における被照射部312の像の位置(L座標)が定まるのである。逆に言うと、最大画像352における被照射部312の像のL座標から、被照射部312の高さ位置であるZ座標を求めることができるのである。
基準チップ300を撮像した最大画像352における被照射部312の像のL座標を、色の濃淡を用いて表現すると、図17の下方に示す画像370のように表示される(図においては斜線等で色の濃淡を表現している)。このように、高さ情報を色情報で表す画像に変換する処理を表示形式変換処理と称する。基準チップ300の撮像により取得された10個の画像について表示形式変換処理が行われて、並べられ、図18に示す基準チップ300の下面の三次元情報を含む画像が得られる。ここでは、高さ位置が高いほど薄い色で、高さ位置が低くなるほど濃い色で表示される。なお、図において被照射部312以外の部分、つまり、基準チップ300が位置していない部分は白く表示される。このような三次元情報を含む画像が取得されれば、撮像対象の水平方向と高さ方向との位置情報を1つの画像から取得することができる。
図19に示す電子部品400を例に、それの下面404の撮像について説明する。電子部品400の下面404にスリット光310が照射され、線状の被照射部408が生じる。その被照射部408を撮像対象として撮像する際の、設定撮像範囲の設定について説明する。なお、直立撮像カメラ50による撮像における設定撮像範囲の寸法および位置の設定と同様であり、異なる点を中心に説明する。まず、実際の高さ位置を表すZ座標を用いたXZ座標における撮像範囲が決定される。すなわち、電子部品400の撮像時の基準位置および標準の寸法から、基準チップ300の下面のX座標,Z座標のそれぞれの最小値Xmin,Zmin、最大値Xmax,Zmaxが求められる。それらXmin,ZminからそれぞれX,Z方向の最大位置ずれ量Ex,Ezおよび余裕値Rx,Rzを引いた座標が範囲始点の座標(Xa,Za)とされ、Xmax,ZmaxにそれぞれX,Z方向の最大位置ずれ量Ex,Ezおよび余裕値Rx,Rzを加えた座標が範囲終点の座標(Xb,Zb)とされる。次に、範囲始点および範囲終点のXZ座標が、傾斜撮像カメラ52により撮像された画像におけるWL座標に変換され、範囲始点の座標(Wa,La)および範囲終点の座標(Wb,Lb)が決定される。なお、電子部品400の下面404の撮像時の基準高さ位置のZ座標はZ3である。
上記のようにして設定された設定撮像範囲を撮像して得られた設定範囲画像430と、図16に示した基準チップ300の被照射部312の像とを図20に示す。なお、傾斜撮像カメラ52により、最大画像352として撮像される撮像範囲が全撮像範囲であり、設定範囲画像430として撮像される撮像範囲が設定撮像範囲である。電子部品400の下面404においてスリット光310により照射される場所を変えながら、つまり電子部品400の下面404における被照射部408の位置を変えながら複数回の撮像を行うことによって、複数の設定範囲画像430が取得される。それら複数の設定範囲画像430について、基準チップ300の撮像において説明した表示形式変換処理等の処理が行われ、図18に示した合成画像に相当する電子部品430の下面404の三次元情報を含む画像が取得される。
以上の方法を用いて電子部品の下面の三次元情報を取得すれば、電子部品の水平位置および高さ位置を利用して、その電子部品を回路基板上の装着位置に正確に装着することができる。また、例えば、リードを有する電子部品を撮像する場合には、リードの高さ位置から許容範囲外のリード曲がりがないか検査することができる。なお、上述の撮像では短時間の間に複数回の撮像を行うため、画像データ取得時間を短縮する効果が大きい。
なお、上記の例では、装着ヘッド40が1つの電子部品400を保持し、その1つの電子部品400の下面が撮像されたが、装着ヘッド40が複数の電子部品を保持していても、設定撮像範囲を設定して撮像を行うことができる。例えば、単純に、X方向,Z方向において、全ての電子部品の下面が撮像できるように設定撮像範囲を設定すればよい。すなわち、全ての電子部品の中で、X座標,Z座標のそれぞれの最小値Xmin,Zmin、最大値Xmax,Zmaxを求めれば、上述と同様な方法で設定撮像範囲を設定することができる。
本部品装着機10は、直立撮像カメラ50による撮像と傾斜撮像カメラ52による撮像との少なくとも一方の撮像により部品装着作業を行うことができる。撮像カメラ50,52の両方で撮像を行う場合は、例えば、直立撮像カメラ50による撮像によって電子部品の水平位置情報を取得し、傾斜撮像カメラ52による撮像で高さ位置情報のみ取得することができる。その際には、予め電子部品の水平位置情報を取得できるため、X方向の最大位置ずれ量を小さくすることができ、傾斜撮像カメラ52による撮像における設定範囲画像430のX方向の寸法を小さくすることが可能である。また、Y方向における正確な位置に基づいて撮像のタイミングをより正確に把握することができるため、撮像回数を減らすことが可能である。なお、部品撮像装置24が、直立撮像カメラ50と傾斜撮像カメラ52との少なくとも一方を備えるものであってもよい。
なお、電子部品の下面を全て走査せず、その一部の高さ位置を取得することもできる。例えば、傾斜撮像カメラ52による1回の撮像により、電子部品における線状の被照射部の高さ位置情報が取得できる。また、スリット光照射装置58がスポット光照射装置であってもよい。その場合は、傾斜撮像カメラ52による1回の撮像により、電子部品における点状の被照射部の高さ位置情報が取得できる。
8. その他の態様.
部品装着機10は、装着ヘッド40により保持される基板撮像装置460および照明装置等を備えている。その基板撮像装置460は、CMOS型撮像センサを有しており、回路基板30の一部(基準マーク,配線パターン等),回路基板30上の電子部品,クリームはんだ,接着剤等を撮像することができる。その基板撮像装置460によって撮像を行う場合でも、設定撮像範囲の光を受光するフォトダイオード122だけから信号電荷を読み出すことにより画像データ取得時間を短縮することができる。本実施例において、撮像範囲設定部92が位置情報取得装置90に設けられていたが、その撮像範囲設定部92を制御装置80あるいは部品撮像装置24に設けてもよい。
部品装着機10は、装着ヘッド40により保持される基板撮像装置460および照明装置等を備えている。その基板撮像装置460は、CMOS型撮像センサを有しており、回路基板30の一部(基準マーク,配線パターン等),回路基板30上の電子部品,クリームはんだ,接着剤等を撮像することができる。その基板撮像装置460によって撮像を行う場合でも、設定撮像範囲の光を受光するフォトダイオード122だけから信号電荷を読み出すことにより画像データ取得時間を短縮することができる。本実施例において、撮像範囲設定部92が位置情報取得装置90に設けられていたが、その撮像範囲設定部92を制御装置80あるいは部品撮像装置24に設けてもよい。
10:部品装着機 22:装着装置 24:部品撮像装置 30:回路基板 40:装着ヘッド 42:吸着ノズル 50:直立撮像カメラ 52:傾斜撮像カメラ 54:リング型照明装置 58:スリット光照射装置 80:制御装置 90:位置情報取得装置 92:撮像範囲設定部 94:画像処理部 96:位置情報取得部 100:撮像制御部 102:集光部 104:CMOS型撮像センサ 106:撮像信号処理回路 108:読出制御部 122:フォトダイオード 124:増幅器 126:ゲートスイッチ 128:単位セル 140:垂直走査回路 142:水平走査回路 144:行選択線 146:列信号線 148:水平信号線 150:列選択スイッチ 212,214,216,218:ブロック 250:全撮像範囲 254:設定撮像範囲 260:電子部品 300:基準チップ 302:階段状の面 310:スリット光 312:被照射部 320:吸着ノズル 324:全撮像範囲 326,328:反射光 370:画像 400:電子部品 408:被照射部 430:設定範囲画像
Claims (7)
- (a) 露光量に応じた信号電荷を蓄える光電変換素子が二次元的に多数配列された受光面を有する撮像センサを備え、その撮像センサの受光面に電子部品,回路基板等の電子回路構成部材あるいはそれの一部分である撮像対象の像を結像させて、前記光電変換素子の各々に蓄えられる信号電荷に基づいて撮像対象に関する画像データを取得する撮像装置と、(b) その撮像装置によって得られた前記画像データを処理して前記撮像対象の位置情報を取得する位置情報取得装置とを含んで構成され、その取得された位置情報を利用して電子回路の製造に関連する作業を行う電子回路製造関連作業機であって、
前記撮像装置が、前記撮像センサの全ての前記光電変換素子が受光することにより撮像される全撮像範囲のうちの一部分である設定撮像範囲の光を受光する前記光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて前記画像データを取得する設定範囲画像データ取得部を備えることを特徴とする電子回路製造関連作業機。 - 前記撮像センサが、相補形金属酸化物半導体型撮像センサである請求項1に記載の電子回路製造関連作業機。
- 当該電子回路製造関連作業機が、電子部品を回路基板の表面に装着する作業を行うものであって、
供給される電子部品を保持して回路基板の表面に装着する装着装置と、前記位置情報を利用して前記装着装置を制御する制御装置とを備える請求項1または2に記載の電子回路製造関連作業機。 - 前記撮像装置が、前記装着装置に保持された電子部品の下面の少なくとも一部を前記撮像対象として撮像するものであり、
前記位置情報取得装置が、前記撮像対象の水平方向の位置情報を取得するものであり、
前記制御装置が、その取得された水平位置情報を利用して前記装着装置の制御を行うものであり、
前記設定範囲画像データ取得部が、前記全撮像範囲のうち、前記撮像対象が位置することが予定されている範囲を前記設定撮像範囲として、その設定撮像範囲の光を受光する前記光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて前記画像データを取得するものである請求項3に記載の電子回路製造関連作業機。 - 前記装着装置が、供給される複数の電子部品を保持して回路基板の表面に装着するものであり、
前記撮像装置が、前記装着装置に保持された複数の電子部品の中の2以上の電子部品の各々の下面の少なくとも一部をそれぞれ前記撮像対象として一度に撮像するものであり、
前記位置情報取得装置が、前記撮像対象の各々の水平方向の位置情報を取得するものであり、
前記設定範囲画像データ取得部が、前記全撮像範囲のうち、前記撮像対象の各々が位置することが予定されている各々の範囲を前記設定撮像範囲として、それらの設定撮像範囲の光を受光する前記光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて前記画像データを取得するものである請求項4に記載の電子回路製造関連作業機。 - 当該電子回路製造関連作業機が、前記装着装置に保持された電子部品の一部分を照らす照射光をその電子部品の下方から照射する照射装置を備え、
前記撮像装置が、前記保持された電子部品の下方、かつ、前記照射装置とは異なる方向から撮像するように設けられて、照射光を照射された電子部品の一部分である被照射部の像を含む画像の画像データを取得するものであり、
前記位置情報取得装置が、前記照射装置および前記撮像装置の配置によって定まる関係に基づいて、前記画像内における前記被照射部の位置から前記被照射部の高さ方向の位置情報を取得するものであり、
前記制御装置が、その取得された高さ位置情報を利用して装着装置の制御を行うものであり、
前記設定範囲画像データ取得部が、前記全撮像範囲のうち、前記被照射部が位置することが予定されている範囲を前記設定撮像範囲として、その設定撮像範囲の光を受光する前記光電変換素子だけから信号電荷を読み出し、その読み出された信号電荷に基づいて前記画像データを取得するものである請求項3ないし5のいずれかに記載の電子回路製造関連作業機。 - 前記照射装置が、前記装着装置に保持された電子部品の下面に線状の前記被照射部を形成する前記照射光としてのスリット光を照射するものであり、
前記装着装置が、前記保持された電子部品とスリット光との相対移動に伴いスリット光が電子部品の下面を走査するように、前記保持された電子部品を前記照射装置および前記撮像装置に対して移動させる機能を有するものであり、
前記撮像装置が、前記保持された電子部品の下面をスリット光が走査する過程において、定められた時間間隔で前記被照射部を複数回撮像することにより複数の画像の画像データを取得するものであり、
前記位置情報取得装置が、それら複数の画像の画像データを処理することにより、電子部品の下面の水平位置情報と高さ位置情報とを取得するものであり、
前記制御装置が、その取得された水平位置情報と高さ位置情報とを利用して前記装着装置を制御を行うものである請求項6に記載の電子回路製造関連作業機。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004101135A JP2005286241A (ja) | 2004-03-30 | 2004-03-30 | 電子回路製造関連作業機 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004101135A JP2005286241A (ja) | 2004-03-30 | 2004-03-30 | 電子回路製造関連作業機 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005286241A true JP2005286241A (ja) | 2005-10-13 |
Family
ID=35184242
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004101135A Withdrawn JP2005286241A (ja) | 2004-03-30 | 2004-03-30 | 電子回路製造関連作業機 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005286241A (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008311336A (ja) * | 2007-06-13 | 2008-12-25 | Sunx Ltd | 測定装置、及び測定システム |
WO2012144430A1 (ja) * | 2011-04-20 | 2012-10-26 | 株式会社神戸製鋼所 | タイヤ表面形状測定装置及びタイヤ表面形状測定方法 |
JP2014179558A (ja) * | 2013-03-15 | 2014-09-25 | Hitachi High-Tech Instruments Co Ltd | ダイ認識手段及びダイ認識方法並びにダイボンダ |
WO2015019487A1 (ja) * | 2013-08-09 | 2015-02-12 | 富士機械製造株式会社 | 実装装置及び部品検出方法 |
WO2018163385A1 (ja) * | 2017-03-09 | 2018-09-13 | 株式会社Fuji | 部品認識装置 |
-
2004
- 2004-03-30 JP JP2004101135A patent/JP2005286241A/ja not_active Withdrawn
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008311336A (ja) * | 2007-06-13 | 2008-12-25 | Sunx Ltd | 測定装置、及び測定システム |
WO2012144430A1 (ja) * | 2011-04-20 | 2012-10-26 | 株式会社神戸製鋼所 | タイヤ表面形状測定装置及びタイヤ表面形状測定方法 |
JP2012225795A (ja) * | 2011-04-20 | 2012-11-15 | Kobe Steel Ltd | タイヤ表面形状測定装置及びタイヤ表面形状測定方法 |
CN103477183A (zh) * | 2011-04-20 | 2013-12-25 | 株式会社神户制钢所 | 轮胎表面形状测定装置及轮胎表面形状测定方法 |
JP2014179558A (ja) * | 2013-03-15 | 2014-09-25 | Hitachi High-Tech Instruments Co Ltd | ダイ認識手段及びダイ認識方法並びにダイボンダ |
CN105453715A (zh) * | 2013-08-09 | 2016-03-30 | 富士机械制造株式会社 | 安装装置及元件检测方法 |
WO2015019487A1 (ja) * | 2013-08-09 | 2015-02-12 | 富士機械製造株式会社 | 実装装置及び部品検出方法 |
EP3032934A4 (en) * | 2013-08-09 | 2016-08-17 | Fuji Machine Mfg | MOUNTING DEVICE AND PART DETECTION METHOD |
JPWO2015019487A1 (ja) * | 2013-08-09 | 2017-03-02 | 富士機械製造株式会社 | 実装装置及び部品検出方法 |
CN105453715B (zh) * | 2013-08-09 | 2018-11-27 | 株式会社富士 | 安装装置及元件检测方法 |
US10314220B2 (en) | 2013-08-09 | 2019-06-04 | Fuji Corporation | Mounting machine and component detection method |
WO2018163385A1 (ja) * | 2017-03-09 | 2018-09-13 | 株式会社Fuji | 部品認識装置 |
JPWO2018163385A1 (ja) * | 2017-03-09 | 2019-11-07 | 株式会社Fuji | 部品認識装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5753020B2 (ja) | 部品実装装置 | |
JP2001160135A (ja) | 画像処理方法,画像処理システムおよび補正データ作成方法 | |
TW201331547A (zh) | 形狀測定裝置、構造物製造系統、形狀測定方法、構造物製造方法、程式及記錄媒體 | |
JP2009297742A (ja) | レーザ加工装置 | |
KR20140071895A (ko) | 인식장치, 인식방법, 실장장치 및 실장방법 | |
JP4381764B2 (ja) | 撮像装置及び同装置を搭載した被撮像物移動装置 | |
CN108702867B (zh) | 安装装置及拍摄处理方法 | |
JP2005286241A (ja) | 電子回路製造関連作業機 | |
JP2011155050A (ja) | 電子部品装着装置 | |
JP2024019446A (ja) | 実装装置および半導体装置の製造方法 | |
CN109983859B (zh) | 表面安装机、元件识别装置、元件识别方法 | |
JP4963766B2 (ja) | 電子部品実装装置及びその方法 | |
JP2019011960A (ja) | 電子部品搬送装置および電子部品検査装置 | |
JP6338169B2 (ja) | 認識装置、認識方法、実装装置及び実装方法 | |
TWI798619B (zh) | 晶粒接合裝置及半導體裝置之製造方法 | |
JPWO2018134862A1 (ja) | 撮像装置及びこれを用いた表面実装機 | |
JP6388135B2 (ja) | 電子部品実装装置及び電子部品実装方法 | |
JP7464500B2 (ja) | 部品実装装置用撮像装置の傷画素処理方法および部品実装装置用撮像装置ならびに部品実装装置 | |
JP2008270719A (ja) | 実装機およびその部品撮像方法 | |
JP6896468B2 (ja) | 部品実装機、部品認識方法、部品認識プログラム | |
JP2002267415A (ja) | 半導体測定装置 | |
JP2018109550A (ja) | 電子部品搬送装置および電子部品検査装置 | |
CN112314065B (zh) | 安装机及安装系统 | |
JP2005340239A (ja) | 撮像装置用照明装置、表面実装機および部品検査装置 | |
JP2005260268A (ja) | 電子部品装着方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20070605 |