JP7083962B2 - 画像検索装置、部品実装システムおよび画像検索方法 - Google Patents

Description

この発明は、画像検索装置、部品実装システムおよび画像検索方法に関し、特に、基板に部品を実装する実装工程において撮影された画像を表示させる画像検索装置、部品実装システムおよび画像検索方法に関する。

従来、基板に部品を実装する実装工程において撮影された画像を表示させる構成が知られている。このような構成は、たとえば、特許第６１５４１２０号公報に開示されている。

上記特許第６１５４１２０号公報には、基板に電子部品を実装する実装動作時の画像を記憶する画像保存部と、電子部品の実装動作の履歴と撮影した画像とを対応付けて管理する制御部とを備える構成の管理システムが開示されている。この特許第６１５４１２０号公報の管理システムでは、制御部は、同じ基板に実装された複数の電子部品の画像を対応づけるとともに、同じ基板に実装されて対応づけられた複数の電子部品の画像を表示部に表示させる制御を行うように構成されている。

特許第６１５４１２０号公報

しかしながら、上記特許第６１５４１２０号公報の管理システムでは、同じ基板に実装されて対応づけられた複数の電子部品の画像を表示部に表示する。このため、実装動作時の画像を確認する際に表示される画像は、同じ基板に実装されて予め対応付けられた複数の電子部品の画像であるので、予め対応付けられていない実装動作時の画像は同時に表示することができないという不都合がある。その結果、対応付けられていない実装動作時の画像を確認するためには、ユーザが別途検索を行う必要があるので、実装動作時の予め対応づけられていない複数の関連する画像を容易に確認することが困難であるという問題点がある。

この発明は、上記のような課題を解決するためになされたものであり、この発明の１つの目的は、実装動作時の予め対応づけられていない複数の関連する画像を容易に確認することが可能な画像検索装置、部品実装システムおよび画像検索方法を提供することである。

上記目的を達成するために、この発明の第１の局面による画像検索装置は、基板に部品を実装する実装工程において撮影された複数の画像を保存する画像保存部と、画像保存部に保存された複数の画像から検索条件に従って画像を検索する制御部と、を備え、制御部は、ユーザにより設定された第１検索条件により画像保存部の複数の画像から画像を検索し、検索した画像からユーザにより選択された選択画像とともに、選択画像の情報に基づいて第１検索条件とは異なる第２検索条件により検索した関連画像を、併せて表示する制御を行うように構成されている。

この発明の第１の局面による部品実装システムでは、上記のように構成することによって、制御部が選択画像の情報に基づいて、選択画像を検索した第１検索条件とは異なる第２検索条件により関連画像を検索するので、複数の画像を予め対応付けていなくても、関連画像を抽出することができる。その結果、ユーザが別途検索を行う必要がないので、実装動作時の予め対応づけられていない複数の関連する画像を容易に確認することができる。また、選択画像と、関連画像とが同じ画面に表示されるので、実装状態の把握や、不良原因の特定を容易に行うことができる。

上記第１の局面による画像検索装置において、好ましくは、第１検索条件は、部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報のうち、少なくとも１つを含む情報に基づいて設定された条件である。このように構成すれば、ユーザにより部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報に基づいて設定された第１検索条件により画像を検索することができる。

上記第１の局面による画像検索装置において、好ましくは、制御部は、選択画像とともに、複数の関連画像を、併せて表示する制御を行うように構成されている。このように構成すれば、選択画像とともに複数の関連画像を確認することができるので、実装状態の把握や、不良原因の特定をより容易に行うことができる。

この場合、好ましくは、制御部は、選択画像に対する複数の関連画像のうち選択された関連画像の情報を記憶部に記憶し、記憶部に記憶した関連画像の情報を反映して第２検索条件を設定するように構成されている。このように構成すれば、たとえば、複数の関連画像のうち選択される回数が多い関連画像が検索されやすくなるように第２検索条件を設定することができるので、より適した関連画像を抽出することができる。

上記第１の局面による画像検索装置において、好ましくは、制御部は、ユーザにより選択された選択画像が部品の実装不良に関する画像である場合に、実装不良の種類に応じた第２検索条件により関連画像を検索するように構成されている。このように構成すれば、実装不良の種類に応じて原因を特定するための関連画像を表示することができるので、ユーザが効率よく画像を確認することができる。これにより、ユーザが実装不良を特定する作業を効率よく行うことができる。また、実装不良の種類に応じて、関連性が低い画像を抽出しないようにすることができるので、検索時間を短縮して検索作業を効率よく行うことができる。

上記第１の局面による画像検索装置において、好ましくは、制御部は、部品実装の検査結果のＯＫ／ＮＧを記憶部に蓄積し、選択画像が検査結果がＮＧの画像である場合に、同じ種類の部品の他の検査結果がＮＧの画像を関連画像として選択画像とともに表示する制御を行うように構成されている。このように構成すれば、検査結果がＮＧの他の類似の画像をユーザが検索して表示させる必要がないので、作業負担を軽減することができる。また、検査結果がＮＧの類似の画像を一覧で表示させることができるので、実装状態の把握や、不良原因の特定をより容易に行うことができる。

上記第１の局面による画像検索装置において、好ましくは、制御部は、第２検索条件を、関連画像とともに表示する制御を行うように構成されている。このように構成すれば、選択画像とともに表示される関連画像の検索条件をユーザが視覚的に確認することができる。

上記第１の局面による画像検索装置において、好ましくは、制御部は、選択画像に対して複数の第２検索条件が設定可能な場合に、設定可能な複数の第２検索条件のうち、ユーザの選択または所定の条件に基づいて選択された１つの第２検索条件により関連画像を検索するように構成されている。このように構成すれば、複数の第２検索条件から選択された１つの第２検索条件により関連画像を検索することができるので、より適した検索条件により関連画像を検索することができる。

この場合、好ましくは、制御部は、選択画像とともに、複数の第２検索条件を選択可能に表示する制御を行うように構成されている。このように構成すれば、ユーザが複数の第２検索条件から所望の検索条件を容易に選択することができる。

上記目的を達成するために、この発明の第２の局面による部品実装システムは、基板に部品を実装する部品実装装置と、画像検索装置と、を備え、画像検索装置は、基板に部品を実装する実装工程において撮影された複数の画像を保存する画像保存部と、画像保存部に保存された複数の画像から検索条件に従って画像を検索する制御部と、を含み、制御部は、ユーザにより設定された第１検索条件により画像保存部の複数の画像から画像を検索し、検索した画像からユーザにより選択された選択画像とともに、選択画像の情報に基づいて第１検索条件とは異なる第２検索条件により検索した関連画像を、併せて表示する制御を行うように構成されている。

この発明の第２の局面による部品実装システムでは、上記のように構成することによって、制御部が選択画像の情報に基づいて、選択画像を検索した第１検索条件とは異なる第２検索条件により関連画像を検索するので、複数の画像を予め対応付けていなくても、関連画像を抽出することができる。その結果、ユーザが別途検索を行う必要がないので、実装動作時の予め対応づけられていない複数の関連する画像を容易に確認することが可能な部品実装システムを提供することができる。また、選択画像と、関連画像とが同じ画面に表示されるので、実装状態の把握や、不良原因の特定を容易に行うことができる。

上記目的を達成するために、この発明の第３の局面による画像検索方法は、基板に部品を実装する実装工程において撮影された複数の画像を保存する工程と、第１検索条件により保存された複数の画像から画像を検索し、検索した画像から選択された選択画像とともに、選択画像の情報に基づいて第１検索条件とは異なる第２検索条件により検索した関連画像を、併せて表示する工程と、を備える。

この発明の第３の局面による画像検索方法では、上記のように構成することによって、選択画像の情報に基づいて、選択画像を検索した第１検索条件とは異なる第２検索条件により関連画像を検索するので、複数の画像を予め対応付けていなくても、関連画像を抽出することができる。その結果、ユーザが別途検索を行う必要がないので、実装動作時の予め対応づけられていない複数の関連する画像を容易に確認することが可能な画像検索方法を提供することができる。また、選択画像と、関連画像とが同じ画面に表示されるので、実装状態の把握や、不良原因の特定を容易に行うことができる。

上記第３の局面による画像検索方法において、好ましくは、第１検索条件は、部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報のうち、少なくとも１つを含む情報に基づいて設定された条件である。このように構成すれば、ユーザにより部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報に基づいて設定された第１検索条件により画像を検索することができる。

上記第３の局面による画像検索方法において、好ましくは、選択画像とともに、複数の関連画像を、併せて表示する。このように構成すれば、選択画像とともに複数の関連画像を確認することができるので、実装状態の把握や、不良原因の特定をより容易に行うことができる。

上記第３の局面による画像検索方法において、好ましくは、選択された選択画像が部品の実装不良に関する画像である場合に、実装不良の種類に応じた第２検索条件により関連画像を検索する。このように構成すれば、実装不良の種類に応じて原因を特定するための関連画像を表示することができるので、ユーザが効率よく画像を確認することができる。これにより、ユーザが実装不良を特定する作業を効率よく行うことができる。また、実装不良の種類に応じて、関連性が低い画像を抽出しないようにすることができるので、検索時間を短縮して検索作業を効率よく行うことができる。

上記第３の局面による画像検索方法において、好ましくは、部品実装の検査結果のＯＫ／ＮＧを蓄積し、選択画像が検査結果がＮＧの画像である場合に、同じ種類の部品の他の検査結果がＮＧの画像を関連画像として選択画像とともに表示する。このように構成すれば、検査結果がＮＧの他の類似の画像をユーザが検索して表示させる必要がないので、作業負担を軽減することができる。また、検査結果がＮＧの類似の画像を一覧で表示させることができるので、実装状態の把握や、不良原因の特定をより容易に行うことができる。

上記第３の局面による画像検索方法において、好ましくは、第２検索条件を、関連画像とともに表示する。このように構成すれば、選択画像とともに表示される関連画像の検索条件をユーザが視覚的に確認することができる。

本発明によれば、上記のように、実装動作時の予め対応づけられていない複数の関連する画像を容易に確認することができる。

本発明の一実施形態による部品実装システムを示したブロック図である。 本発明の一実施形態による部品実装システムの部品実装装置の全体構成を示した図である。 本発明の一実施形態による部品実装システムの画像検索装置の第１画面例を示した図である。 本発明の一実施形態による部品実装システムの画像検索装置の第２画面例を示した図である。 本発明の一実施形態による部品実装システムの第２検索条件のプルダウン表示の一例を示した図である。

以下、本発明を具体化した実施形態を図面に基づいて説明する。

図１および図２を参照して、本発明の一実施形態による部品実装システム１００の構成について説明する。

（部品実装システムの構成）
本実施形態による部品実装システム１００は、基板Ｓに部品Ｅを実装して、部品Ｅが実装された基板Ｓを製造するように構成されている。部品実装システム１００は、図１に示すように、部品実装ライン１０と、画像検索装置２０と、を備えている。

部品実装ライン１０は、複数設けられている。また、部品実装ライン１０は、ローダ１１と、印刷機１２と、印刷検査機１３と、ディスペンサ装置１４と、複数の部品実装装置１５と、外観検査装置１６と、リフロー装置１７と、外観検査装置１８と、アンローダ１９と、を含んでいる。また、部品実装ライン１０では、製造ラインに沿って上流側（左側）から下流側（右側）に向かって基板Ｓが搬送されるように構成されている。

（部品実装ラインの構成）
次に、部品実装ライン１０を構成する各装置の構成について説明する。

ローダ１１は、部品Ｅが実装される前の基板（配線基板）Ｓを保持するとともに部品実装ライン１０に基板Ｓを搬入する役割を有する。なお、部品Ｅは、ＬＳＩ、ＩＣ、トランジスタ、コンデンサおよび抵抗器などの小片状の電子部品を含む。

印刷機１２は、スクリーン印刷機であり、クリーム半田を基板Ｓの実装面上に塗布する機能を有する。また、印刷機１２は、基板ＳのフィデューシャルマークＦを撮像するための撮像部を有している。また、印刷機１２は、撮像部により撮像した画像を、撮像対象の情報とともに画像検索装置２０に送信する。

印刷検査機１３は、印刷機１２により印刷したクリーム半田の状態を検査する機能を有する。具体的には、印刷検査機１３は、撮像部により基板Ｓを撮像して、撮像した画像に基づいて印刷したクリーム半田の状態を検査する。また、印刷検査機１３は、撮像部により撮像した画像を、撮像対象の情報とともに画像検索装置２０に送信する。

ディスペンサ装置１４は、基板Ｓにクリーム半田や接着剤などを塗布する機能を有する。

部品実装装置１５は、クリーム半田が印刷された基板Ｓの所定の実装位置に部品を実装（搭載）する機能を有する。また、部品実装装置１５は、基板Ｓの搬送方向に沿って複数（３つ）配置されている。複数の部品実装装置１５は、同様の構成を有している。また、部品実装装置１５は、図２に示すように、基台１５１と、一対のコンベア１５２と、部品供給部１５３と、ヘッドユニット１５４と、支持部１５５と、一対のレール部１５６と、部品認識撮像部１５７と、制御部１５８とを備えている。

一対のコンベア１５２は、基台１５１上に設置され、基板ＳをＸ方向に搬送するように構成されている。また、一対のコンベア１５２は、搬送中の基板Ｓを実装作業位置で停止させた状態で保持するように構成されている。また、一対のコンベア１５２は、基板Ｓの寸法に合わせてＹ方向の間隔を調整可能に構成されている。

部品供給部１５３は、一対のコンベア１５２の外側（Ｙ１側およびＹ２側）に配置されている。また、部品供給部１５３には、複数のテープフィーダ１５３ａが配置されている。

テープフィーダ１５３ａは、複数の部品Ｅを所定の間隔を隔てて保持したテープが巻き付けられたリールを保持している。テープフィーダ１５３ａは、リールを回転させて部品Ｅを保持するテープを送出することにより、テープフィーダ１５３ａの先端から部品Ｅを供給するように構成されている。

ヘッドユニット１５４は、一対のコンベア１５２の上方と部品供給部１５３の上方との間を移動するように設けられている。また、ヘッドユニット１５４は、ノズルが下端に取り付けられた複数（５つ）の実装ヘッド１５４ａと、基板認識撮像部１５４ｂと、カメラユニット１５４ｃと、を含んでいる。

実装ヘッド１５４ａは、基板Ｓに対して部品Ｅを実装するように構成されている。具体的には、実装ヘッド１５４ａは、昇降可能（Ｚ方向に移動可能）に構成され、空気圧発生部によりノズルの先端部に発生された負圧によって、テープフィーダ１５３ａから供給される部品Ｅを吸着して保持し、基板Ｓにおける実装位置に部品Ｅを装着（実装）するように構成されている。

基板認識撮像部１５４ｂは、基板Ｓの位置および姿勢を認識するために、基板ＳのフィデューシャルマークＦを撮像するように構成されている。そして、フィデューシャルマークＦの位置を撮像して認識することにより、基板Ｓにおける部品Ｅの実装位置を正確に取得することが可能である。基板認識撮像部１５４ｂは、上方（Ｚ１方向側）から基板Ｓを撮像するように構成されている。基板認識撮像部１５４ｂにより撮像された画像は、撮像対象の情報とともに画像検索装置２０に送信される。

カメラユニット１５４ｃは、実装ヘッド１５４ａのノズルに吸着された部品を、側方から撮像可能に構成されている。また、カメラユニット１５４ｃは、部品Ｅの吸着前後のノズルを側方から撮像可能に構成されている。カメラユニット１５４ｃにより撮像された画像は、撮像対象の情報とともに画像検索装置２０に送信される。

支持部１５５は、Ｘ軸モータ１５５ａを含んでいる。支持部１５５は、Ｘ軸モータ１５５ａを駆動させることにより、支持部１５５に沿ってヘッドユニット１５４をＸ方向に移動させるように構成されている。支持部１５５は、両端部が一対のレール部１５６により支持されている。

一対のレール部１５６は、基台１５１上に固定されている。Ｘ１側のレール部１５６は、Ｙ軸モータ１５６ａを含んでいる。レール部１５６は、Ｙ軸モータ１５６ａを駆動させることにより、支持部１５５を一対のレール部１５６に沿ってＸ方向と直交するＹ方向に移動させるように構成されている。ヘッドユニット１５４が支持部１５５に沿ってＸ方向に移動可能であるとともに、支持部１５５がレール部１５６に沿ってＹ方向に移動可能であることによって、ヘッドユニット１５４はＸＹ方向に移動可能である。

部品認識撮像部１５７は、基台１５１の上面上に固定されている。部品認識撮像部１５７は、一対のコンベア１５２の外側（Ｙ１側およびＹ２側）に配置されている。部品認識撮像部１５７は、部品Ｅの実装に先立って部品Ｅの吸着状態（吸着姿勢）を認識するために、実装ヘッド１５４ａのノズルに吸着された部品Ｅを下方（Ｚ２方向側）から撮像するように構成されている。これにより、実装ヘッド１５４ａのノズルに吸着された部品Ｅの吸着状態を取得することが可能である。部品認識撮像部１５７により撮像された画像は、撮像対象の情報とともに画像検索装置２０に送信される。

制御部１５８は、ＣＰＵを含んでおり、一対のコンベア１５２による基板Ｓの搬送動作、ヘッドユニット１５４による実装動作、部品認識撮像部１５７、基板認識撮像部１５４ｂによる撮像動作などの部品実装装置１５の全体の動作を制御するように構成されている。また、制御部１５８は、画像検索装置２０に対して、撮像した画像を送信する制御を行うように構成されている。制御部１５８は、部品Ｅの画像、基板Ｓの表面の画像、基板Ｓのフィデューシャルマークの画像、実装ヘッド１５４ａのノズルの画像、テープフィーダ１５３ａの部品供給位置の画像を、画像検索装置２０に送信する。

図１に示すように、外観検査装置１６は、複数の部品実装装置１５の下流に設けられている。外観検査装置１６は、部品実装装置１５により部品Ｅが実装された基板Ｓの外観を検査する機能を有する。具体的には、外観検査装置１６は、撮像部により基板Ｓを撮像して、撮像した画像に基づいて、基板Ｓへの部品Ｅの実装状態を検査する。また、外観検査装置１６は、撮像部により撮像した画像を、撮像対象の情報とともに画像検索装置２０に送信する。

リフロー装置１７は、加熱処理を行うことにより半田を溶融させて部品Ｅを基板Ｓの電極部に接合する機能を有する。リフロー装置１７は、レーン上の基板Ｓを搬送しながら、加熱処理を行うように構成されている。

外観検査装置１８は、リフロー装置１７の下流に設けられている。外観検査装置１８は、リフロー装置１７により加熱処理が行われた後の基板Ｓの外観を検査する機能を有する。具体的には、外観検査装置１８は、撮像部により基板Ｓを撮像して、撮像した画像に基づいて、基板Ｓへの部品Ｅの実装状態を検査する。また、外観検査装置１８は、撮像部により撮像した画像を、撮像対象の情報とともに画像検索装置２０に送信する。

アンローダ１９は、部品Ｅが実装された後の基板Ｓを部品実装ライン１０から排出する役割を有する。

（画像検索装置の構成）
画像検索装置２０の構成について説明する。

画像検索装置２０は、パーソナルコンピュータにより構成されている。また、画像検索装置２０は、基板Ｓに部品Ｅを実装する実装工程において撮影された複数の画像のうち対象の画像を検索するために用いられる。また、画像検索装置２０は、部品実装ライン１０の管理を行う。

画像検索装置２０は、ＣＰＵ（中央演算処理装置）２１と、記憶部２２と、表示部２３と、操作部２４と、ＤＢ（データベース）２５と、を含んでいる。ＣＰＵ２１は、画像検索装置２０の各部を制御する。また、ＣＰＵ２１は、所定のプログラムを実行して、画像検索処理、部品実装ライン管理処理を行う。記憶部２２は、情報を記憶するように構成されている。表示部２３は、画像検索装置２０の操作のための画面を表示する。また、表示部２３は、画像検索装置２０による画像検索結果である画像を表示する。操作部２４は、ユーザからの操作を受け付ける。操作部２４は、キーボード、マウスなどの入力装置を含む。ＤＢ２５は、基板Ｓに部品Ｅを実装する実装工程において撮影された複数の画像を保存する。つまり、ＤＢ２５は、部品実装ライン１０の各装置（印刷機１２、印刷検査機１３、部品実装装置１５、外観検査装置１６、外観検査装置１８）から送信された画像を保存する。なお、ＣＰＵ２１は、請求の範囲の「制御部」の一例である。また、ＤＢ２５は、請求の範囲の「画像保存部」の一例である。

ここで、本実施形態では、ＣＰＵ２１は、ＤＢ２５に保存された複数の画像から検索条件に従って画像を検索するように構成されている。ＤＢ２５に保存されている画像は、基板名、シルク名、基板ＩＤ、部品番号、フィーダ番号、時刻、ヘッド番号、ノズル番号などの情報が紐づけられている。ＣＰＵ２１は、検索条件に従って画像を検索し、該当する画像の情報を表示部２３に一覧表示するように構成されている。ＣＰＵ２１は、たとえば、検索により抽出した複数の画像の撮像位置、撮像対象、撮像時間などの情報を表示部２３に一覧表示する。

たとえば、基板名、シルク名から印刷検査画像を検索する。また、基板名、シルク名から搭載後検査画像を検索する。また、部品番号、フィーダ番号からフィーダ画像を検索する。また、時刻、基板ＩＤからマーク画像を検索する。また、ヘッド番号、ノズル番号からノズル画像を検索する。また、基板名、シルク名から下方および側方からの部品認識画像を検索する。

具体的には、ＣＰＵ２１は、ユーザにより設定された第１検索条件によりＤＢ２５の複数の画像から画像を検索する。また、ＣＰＵ２１は、検索して抽出した画像の情報を表示部２３に一覧表示する。また、ＣＰＵ２１は、一覧表示した画像の情報からユーザが１つの画像を選択すると、図３に示すように、選択された選択画像３１を画面３０に表示する。また、ＣＰＵ２１は、ユーザにより設定された第１検索条件によりＤＢ２５の複数の画像から画像を検索し、検索した画像からユーザにより選択された選択画像３１とともに、選択画像３１の情報に基づいて第１検索条件とは異なる第２検索条件により検索した関連画像３２を、併せて表示する制御を行うように構成されている。つまり、ＣＰＵ２１は、選択画像３１に関する情報を含み、第１検索条件とは異なる条件の第２検索条件により画像を検索して関連画像３２をＤＢ２５から抽出する。そして、ＣＰＵ２１は、選択画像３１とともに、関連画像３２を画面３０に表示する。

選択画像３１が実装点における部品Ｅの画像である場合、関連画像３２は、たとえば、側面からの部品認識画像、基板ＳのフィデューシャルマークＦの認識画像、対象部品吸着ノズルの検査画像、対象部品供給フィーダの画像、印刷検査画像、搭載後検査画像などである。また、関連画像３２を検索するための情報として、基板、実装点、作業機、作業ツール、部品補給ツール、日時などの情報が含まれる。

第１検索条件は、部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報のうち、少なくとも１つを含む情報に基づいて設定された条件である。部品情報は、実装される部品の種類、形状、大きさなどの情報を含む。基板情報は、基板の種類、基板ＩＤなどの情報を含む。部品の実装位置の情報は、基板に対する部品の実装座標（Ｘ、Ｙ）の情報を含む。基板に作業を行う作業装置の情報は、各装置（印刷機１２、印刷検査機１３、部品実装装置１５、外観検査装置１６、外観検査装置１８）の種類、状態の情報を含む。基板に作業を行う作業部の情報は、部品実装装置１５の実装ヘッド１５４ａ、ノズルの情報を含む。部品供給部の情報は、テープフィーダ１５３ａの種類、ＩＤなどの情報を含む。

ユーザは、たとえば、基板Ｓへの部品Ｅの実装不良が生じた場合に、第１検索条件により画像を検索して、画像を確認することにより、実装不良の原因を解析する。また、ユーザは、実装ヘッド１５４ａの吸着不良や、実装ヘッド１５４ａにより実装動作が遅い場合などに、第１検索条件により画像を検索して、画像を確認することにより、不具合の原因を解析する。

図３に示すように、ＣＰＵ２１は、選択画像３１とともに、複数の関連画像３２を、併せて表示する制御を行うように構成されている。なお、選択画像３１に対する関連画像３２が１つの場合は、ＣＰＵ２１は、選択画像３１とともに、１つの関連画像３２を画面３０に表示する。また、選択画像３１に対する関連画像３２がない場合は、ＣＰＵ２１は、関連画像３２を表示せずに選択画像３１を画面３０に表示する。また、ＣＰＵ２１は、選択画像３１とともに、選択画像の画像認識結果を表示する。画像認識結果は、部品位置、部品サイズ、基板名、シルク名、基板ＩＤ、部品番号、フィーダ番号、時刻、ヘッド番号、ノズル番号などの情報を含む。

また、ＣＰＵ２１は、関連画像３２を、選択画像３１よりも小さいサイズにより表示する。また、ＣＰＵ２１は、複数の関連画像３２を並べて表示する。複数の関連画像３２は、たとえば、左右方向に並べて表示される。また、複数の関連画像３２は、選択画像３１の下方に表示される。

ＣＰＵ２１は、選択画像３１に対する複数の関連画像３２のうち選択された関連画像３２の情報を記憶部２２に記憶し、記憶部２２に記憶した関連画像３２の情報を反映して第２検索条件を設定するように構成されている。たとえば、表示回数が多い検索条件についてポイントを加算する学習を行い、ポイントが大きい検索条件が優先して第２検索条件として設定される。つまり、複数の関連画像３２のうち、ユーザが詳細を確認するために選択する回数の多い関連画像３２の検索条件が優先して第２検索条件として設定される。

ＣＰＵ２１は、複数の関連画像３２を優先順に基づいて並べて表示する。たとえば、ＣＰＵ２１は、表示回数が多くポイントが大きい関連画像３２を左から順に並べて表示する。また、たとえば、ＣＰＵ２１は、複数の関連画像３２の画像名に基づいて、五十音順、アルファベット順、数字順などにより複数の関連画像３２を順に並べて表示する。

ＣＰＵ２１は、一定時間（たとえば、５秒）毎に表示する複数の関連画像３２を切り替えて順次表示する。また、ＣＰＵ２１は、複数の関連画像３２を順次表示して所定数の関連画像３２を表示したのちに、最初の関連画像３２を表示する。そして、ＣＰＵ２１は、複数の関連画像３２を順次表示する制御を繰り返す。

ＣＰＵ２１は、表示した複数の関連画像３２のうち、一の関連画像３２が選択された場合に、選択された関連画像３２を、選択画像３１として、大きく表示する。この場合、選択された関連画像３２（新たな選択画像３１）の情報に基づいて新たな第２検索条件により関連画像３２を検索してもよい。そして、この場合、ＣＰＵ２１は、選択された関連画像３２（新たな選択画像３１）とともに、検索した関連画像３２を併せて表示する。

ＣＰＵ２１は、ユーザにより選択された選択画像３１が部品Ｅの実装不良に関する画像である場合に、実装不良の種類に応じた第２検索条件により関連画像３２を検索するように構成されている。実装不良の種類は、各装置（印刷機１２、印刷検査機１３、部品実装装置１５、外観検査装置１６、外観検査装置１８）からの情報や、ユーザの選択などにより決定される。

たとえば、部品Ｅの基板Ｓの実装位置がずれている実装不良の場合、第２検索条件として、該当する部品Ｅの下方からの部品認識画像、該当する基板Ｓのマーク認識画像（基板全体のフィデューシャルマーク・基板のローカルフィデューシャルマーク）、該当する部品Ｅの実装直前の側面からの姿勢画像を検索する条件が設定される。また、部品Ｅが欠品する実装不良の場合、第２検索条件として、該当する部品Ｅの実装直前の側面からの姿勢画像、該当する部品Ｅを実装したノズルの実装直後の側面からの画像を検索する条件が設定される。また、部品Ｅが立ち上がるマンハッタンの実装不良の場合、第２検索条件として、該当する実装位置の印刷検査画像、該当する部品Ｅの下方からの部品認識画像、該当する基板Ｓのマーク認識画像（基板全体のフィデューシャルマーク・基板のローカルフィデューシャルマーク）を検索する条件が設定される。また、部品Ｅの誤実装の実装不良の場合、第２検索条件として、該当する部品Ｅの下方からの部品認識画像を検索する条件が設定される。

ＣＰＵ２１は、部品実装の検査結果のＯＫ／ＮＧを記憶部２２に蓄積し、選択画像３１が検査結果がＮＧの画像である場合に、同じ種類の部品Ｅの他の検査結果がＮＧの画像を関連画像３２として選択画像３１とともに表示する制御を行うように構成されている。検査結果がＮＧとなるのは、基板Ｓに対して部品Ｅが正しく実装されていない状態の場合である。検査結果がＯＫとなるのは、基板Ｓに対して部品Ｅが正しく実装されている状態の場合である。

また、図４に示すように、ＣＰＵ２１は、第２検索条件を、関連画像３２とともに表示する制御を行うように構成されている。また、第２検索条件は、図５に示すように、プルダウン表示３３により選択可能に構成されている。つまり、ＣＰＵ２１は、選択画像３１に対して複数の第２検索条件が設定可能な場合に、設定可能な複数の第２検索条件のうち、ユーザの選択または所定の条件に基づいて選択された１つの第２検索条件により関連画像３２を検索するように構成されている。また、ＣＰＵ２１は、選択画像３１とともに、複数の第２検索条件を選択可能に表示する制御を行うように構成されている。

関連画像３２を検索するための第２検索条件は、選択画像３１の部品Ｅの他の認識画像、選択画像３１の部品Ｅと同じ種類の部品Ｅの認識画像、選択画像３１の部品Ｅと同条件の他の基板Ｓの認識画像などを検索する条件である。また、第２検索条件は、ユーザによりカスタマイズすることが可能である。

また、複数の第２検索条件は、一定時間間隔で自動で切り替わるように構成されていてもよい。この場合、表示回数の多い検索条件を記憶部２２に記憶して、優先して表示する。また、検索条件の中の要素（部品Ｅ、基板Ｓ、ツール、部品供給）について条件を点数付けして、点数が高い条件の表示を優先するように表示順が設定される。

（本実施形態の効果）
本実施形態では、以下のような効果を得ることができる。

本実施形態では、上記のように、ＣＰＵ２１を、ユーザにより設定された第１検索条件によりＤＢ２５の複数の画像から画像を検索し、検索した画像からユーザにより選択された選択画像３１とともに、選択画像３１の情報に基づいて第１検索条件とは異なる第２検索条件により検索した関連画像３２を、併せて表示する制御を行うように構成する。これにより、ＣＰＵ２１が選択画像３１の情報に基づいて、選択画像３１を検索した第１検索条件とは異なる第２検索条件により関連画像３２を検索するので、複数の画像を予め対応付けていなくても、関連画像３２を抽出することができる。その結果、ユーザが別途検索を行う必要がないので、実装動作時の予め対応づけられていない複数の関連する画像を容易に確認することができる。また、選択画像３１と、関連画像３２とが同じ画面に表示されるので、実装状態の把握や、不良原因の特定を容易に行うことができる。

また、本実施形態では、上記のように、第１検索条件は、部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報のうち、少なくとも１つを含む情報に基づいて設定された条件である。これにより、ユーザにより部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報に基づいて設定された第１検索条件により画像を検索することができる。

また、本実施形態では、上記のように、ＣＰＵ２１を、選択画像３１とともに、複数の関連画像３２を、併せて表示する制御を行うように構成する。これにより、選択画像３１とともに複数の関連画像３２を確認することができるので、実装状態の把握や、不良原因の特定をより容易に行うことができる。

また、本実施形態では、上記のように、ＣＰＵ２１を、選択画像３１に対する複数の関連画像３２のうち選択された関連画像３２の情報を記憶部２２に記憶し、記憶部２２に記憶した関連画像３２の情報を反映して第２検索条件を設定するように構成する。これにより、複数の関連画像３２のうち選択される回数が多い関連画像３２が検索されやすくなるように第２検索条件を設定することができるので、より適した関連画像３２を抽出することができる。

また、本実施形態では、上記のように、ＣＰＵ２１を、ユーザにより選択された選択画像３１が部品Ｅの実装不良に関する画像である場合に、実装不良の種類に応じた第２検索条件により関連画像３２を検索するように構成する。これにより、実装不良の種類に応じて原因を特定するための関連画像３２を表示することができるので、ユーザが効率よく画像を確認することができる。これにより、ユーザが実装不良を特定する作業を効率よく行うことができる。また、実装不良の種類に応じて、関連性が低い画像を抽出しないようにすることができるので、検索時間を短縮して検索作業を効率よく行うことができる。

また、本実施形態では、上記のように、ＣＰＵ２１を、部品実装の検査結果のＯＫ／ＮＧを記憶部２２に蓄積し、選択画像３１が検査結果がＮＧの画像である場合に、同じ種類の部品Ｅの他の検査結果がＮＧの画像を関連画像３２として選択画像３１とともに表示する制御を行うように構成する。これにより、検査結果がＮＧの他の類似の画像をユーザが検索して表示させる必要がないので、作業負担を軽減することができる。また、検査結果がＮＧの類似の画像を一覧で表示させることができるので、実装状態の把握や、不良原因の特定をより容易に行うことができる。

また、本実施形態では、上記のように、ＣＰＵ２１を、第２検索条件を、関連画像３２とともに表示する制御を行うように構成する。これにより、選択画像３１とともに表示される関連画像３２の検索条件をユーザが視覚的に確認することができる。

また、本実施形態では、上記のように、ＣＰＵ２１を、選択画像３１に対して複数の第２検索条件が設定可能な場合に、設定可能な複数の第２検索条件のうち、ユーザの選択または所定の条件に基づいて選択された１つの第２検索条件により関連画像３２を検索するように構成する。これにより、複数の第２検索条件から選択された１つの第２検索条件により関連画像３２を検索することができるので、より適した検索条件により関連画像３２を検索することができる。

また、本実施形態では、上記のように、ＣＰＵ２１を、選択画像３１とともに、複数の第２検索条件を選択可能に表示する制御を行うように構成する。これにより、ユーザが複数の第２検索条件から所望の検索条件を容易に選択することができる。

（変形例）
なお、今回開示された実施形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した実施形態の説明ではなく請求の範囲によって示され、さらに請求の範囲と均等の意味および範囲内でのすべての変更（変形例）が含まれる。

たとえば、上記実施形態では、画像検索装置は、部品実装ラインの処理を制御する装置として設けられている構成の例を示したが、本発明はこれに限られない。本発明では、画像検索装置は、部品実装ラインの処理を制御する制御装置とは別個に設けられていてもよい。

また、上記実施形態では、部品実装装置は、テープフィーダから部品が供給される構成の例を示したが、本発明はこれに限られない。本発明では、部品実装装置は、トレイから部品が供給されてもよい。

また、上記実施形態では、１つのレーンに沿って、基板が搬送されて実装作業が行われる構成の例を示したが、本発明はこれに限られない。本発明では、２つ以上のレーンに沿って、基板が搬送されて実装作業が行わる構成であってもよい。

また、上記実施形態では、複数の実装ヘッドが直線状に１列または複数列設けられたいわゆるインライン式のヘッドユニットを設ける構成の例を示したが、本発明はこれに限られない。本発明では、実装ヘッドが円周状に複数設けられたいわゆるロータリー式のヘッドユニットを設けてもよい。

また、上記実施形態では、ヘッドユニットが１つ設けられている構成の例を示したが、本発明はこれに限られない。本発明では、ヘッドユニットを複数設けてもよい。

また、上記実施形態では、１つの部品実装ラインに３つの部品実装装置が設けられている構成の例を示したが、本発明はこれに限られない。本発明では、１つの部品実装ラインに２つ以下または４つ以上の部品実装装置が設けられていてもよい。

１５ 部品実装装置
２０ 画像検索装置
２１ ＣＰＵ（制御部）
２２ 記憶部
２５ ＤＢ（画像保存部）
３１ 選択画像
３２ 関連画像
１００ 部品実装システム
Ｅ 部品
Ｓ 基板

Claims (16)

1. 基板に部品を実装する実装工程において撮影された複数の画像を保存する画像保存部と、
   前記画像保存部に保存された複数の画像から検索条件に従って画像を検索する制御部と、を備え、
   前記制御部は、ユーザにより設定された第１検索条件により前記画像保存部の複数の画像から画像を検索し、検索した画像からユーザにより選択された選択画像とともに、前記選択画像の情報に基づいて前記第１検索条件とは異なる第２検索条件により検索した関連画像を、併せて表示する制御を行うように構成されている、画像検索装置。
2. 前記第１検索条件は、部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報のうち、少なくとも１つを含む情報に基づいて設定された条件である、請求項１に記載の画像検索装置。
3. 前記制御部は、前記選択画像とともに、複数の前記関連画像を、併せて表示する制御を行うように構成されている、請求項１または２に記載の画像検索装置。
4. 前記制御部は、前記選択画像に対する複数の前記関連画像のうち選択された前記関連画像の情報を記憶部に記憶し、前記記憶部に記憶した前記関連画像の情報を反映して前記第２検索条件を設定するように構成されている、請求項３に記載の画像検索装置。
5. 前記制御部は、ユーザにより選択された前記選択画像が部品の実装不良に関する画像である場合に、実装不良の種類に応じた前記第２検索条件により前記関連画像を検索するように構成されている、請求項１～４のいずれか１項に記載の画像検索装置。
6. 前記制御部は、部品実装の検査結果のＯＫ／ＮＧを記憶部に蓄積し、前記選択画像が検査結果がＮＧの画像である場合に、同じ種類の部品の他の検査結果がＮＧの画像を前記関連画像として前記選択画像とともに表示する制御を行うように構成されている、請求項１～５のいずれか１項に記載の画像検索装置。
7. 前記制御部は、前記第２検索条件を、前記関連画像とともに表示する制御を行うように構成されている、請求項１～６のいずれか１項に記載の画像検索装置。
8. 前記制御部は、前記選択画像に対して複数の前記第２検索条件が設定可能な場合に、設定可能な複数の前記第２検索条件のうち、ユーザの選択または所定の条件に基づいて選択された１つの前記第２検索条件により前記関連画像を検索するように構成されている、請求項１～７のいずれか１項に記載の画像検索装置。
9. 前記制御部は、前記選択画像とともに、複数の前記第２検索条件を選択可能に表示する制御を行うように構成されている、請求項８に記載の画像検索装置。
10. 基板に部品を実装する部品実装装置と、
    画像検索装置と、を備え、
    前記画像検索装置は、
    基板に部品を実装する実装工程において撮影された複数の画像を保存する画像保存部と、
    前記画像保存部に保存された複数の画像から検索条件に従って画像を検索する制御部と、を含み、
    前記制御部は、ユーザにより設定された第１検索条件により前記画像保存部の複数の画像から画像を検索し、検索した画像からユーザにより選択された選択画像とともに、前記選択画像の情報に基づいて前記第１検索条件とは異なる第２検索条件により検索した関連画像を、併せて表示する制御を行うように構成されている、部品実装システム。
11. 基板に部品を実装する実装工程において撮影された複数の画像を保存する工程と、
    第１検索条件により保存された複数の画像から画像を検索し、検索した画像から選択された選択画像とともに、前記選択画像の情報に基づいて前記第１検索条件とは異なる第２検索条件により検索した関連画像を、併せて表示する工程と、を備える、画像検索方法。
12. 前記第１検索条件は、部品情報、基板情報、部品の実装位置の情報、基板に作業を行う作業装置の情報、基板に作業を行う作業部の情報、部品を供給する部品供給部の情報、作業日時の情報のうち、少なくとも１つを含む情報に基づいて設定された条件である、請求項１１に記載の画像検索方法。
13. 前記選択画像とともに、複数の前記関連画像を、併せて表示する、請求項１１または１２に記載の画像検索方法。
14. 選択された前記選択画像が部品の実装不良に関する画像である場合に、実装不良の種類に応じた前記第２検索条件により前記関連画像を検索する、請求項１１～１３のいずれか１項に記載の画像検索方法。
15. 部品実装の検査結果のＯＫ／ＮＧを蓄積し、前記選択画像が検査結果がＮＧの画像である場合に、同じ種類の部品の他の検査結果がＮＧの画像を前記関連画像として前記選択画像とともに表示する、請求項１１～１４のいずれか１項に記載の画像検索方法。
16. 前記第２検索条件を、前記関連画像とともに表示する、請求項１１～１５のいずれか１項に記載の画像検索方法。

Images