JP6061713B2 - 検査装置、検査方法及びプログラム - Google Patents
検査装置、検査方法及びプログラム Download PDFInfo
- Publication number
- JP6061713B2 JP6061713B2 JP2013022907A JP2013022907A JP6061713B2 JP 6061713 B2 JP6061713 B2 JP 6061713B2 JP 2013022907 A JP2013022907 A JP 2013022907A JP 2013022907 A JP2013022907 A JP 2013022907A JP 6061713 B2 JP6061713 B2 JP 6061713B2
- Authority
- JP
- Japan
- Prior art keywords
- teacher data
- type
- inspection
- unit
- discrimination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Description
例えば、特許文献1には、画像入力手段によって取り込んだ画像情報から特徴量を抽出し、判別関数を用いることで群予測手段によって前記特徴量の群予測値を算出し、当該群予測値に基づいて検査項目の判定を行う画像判定装置について記載されている。
なお、前記した「検査事項」とは、検査装置が検査すべき事項(例えば、欠陥の有無)を意味している。
さらに、再学習手段は、追加された教師データを含めて複数の種類判別アルゴリズムそれぞれに対応する判別基準を再学習する。このように判別基準を再学習することで、検査対象物の型式等が変化した場合に柔軟に対応でき、検査処理を続行できる。
このように、互いに異なる特性を有する種類判別アルゴリズムを用いることで、一方が誤判別した場合でも、他方の判別結果と比較することによって結果の妥当性をチェックできる。
また、SVMアルゴリズムで用いる判別関数を決定する際、前記した超平面付近の教師データが重要な役割を果たす。このような重要な教師データを残すことで、検査対象物の型式等が変化しても柔軟かつ適切に対応できる。
以下では一例として、検査対象となる物(検査対象物)が燃料電池の電極等であり、検査すべき事項(検査事項)が電極等の表面における欠陥の有無である場合について説明する。
なお、前記した「欠陥」とは、検査対象物に存在する不良箇所であり、例えば、欠落(窪み)又は異物が存在する箇所である。
<検査装置の構成>
図1は、本発明の第1実施形態に係る検査装置の構成図である。検査装置100は、検査対象物の欠陥の有無を、当該検査対象物の画像情報に基づいて検査する装置である。
検査装置100は、主として、領域情報生成部101と、特徴ベクトル抽出領域決定部102と、フィルタ処理部103と、特徴ベクトル抽出部104と、種類判別部105と、判別結果評価部108と、表示制御部109と、教師データ追加部110と、学習処理部112と、を備えている。
検査装置100は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、各種インタフェース等の電子回路(図示せず)を含んで構成され、ROMに記憶されたプログラムを読み出してRAMに展開し、CPUが各種処理を実行する。
(1)検査処理の開始前、教師データに基づいて行う初期学習。
(2)初期学習の後、検査処理を行いつつ教師データを追加して行う再学習。
(3)初期学習(又は、初期学習及び再学習)の結果に基づいた検査処理。
領域情報生成部101は、撮像装置300から入力される検査対象物の画像情報に基づいて欠陥候補領域に含まれる画素を抽出し、欠陥候補ごとの識別情報であるラベリング値と対応付けて欠陥候補の領域情報を生成する。
なお、前記した「欠陥候補」とは、検査対象物のうち欠陥に該当する可能性がある箇所を意味している。
なお、図2(a)には、電極Eの紙面右上に欠落P1が存在し、電極Eの紙面左下に異物Q1が存在する場合の画像を示した。領域情報生成部101に入力される画像情報は、例えば、照明装置(図示せず)によって光を照射された検査対象物を、CCD(Charge Coupled Device)カメラ等の撮像装置300で撮像することで得られる。
輝度情報生成部101aは、撮像装置300から入力される画像情報の全ての画素についてRGBデータからYUVデータに変換し、各画素のY値(輝度値)を輝度情報として2値化処理部101bに出力する。
さらに、2値化処理部101bは、画素値が‘1’である画素のうち隣接する(又はユークリッド距離が所定値以下である)画素同士を同じ領域として識別し、それぞれの領域に対してラベリングする。
さらに、2値化処理部101bは、図2(b)に示す領域P2,Q2に対して欠陥候補ごとの識別情報であるラベリング値と、各欠陥候補に含まれる画素(それぞれの欠陥候補内の一群の画素)の座標値と、を対応付けた欠陥候補の領域情報を生成する。
2値化処理部101bは、生成した欠陥候補の領域情報を特徴ベクトル抽出領域決定部102に出力する。
すなわち、特徴ベクトル抽出領域決定部102は、領域情報生成部101から入力されるそれぞれの欠陥候補について、欠陥候補の領域を囲む矩形領域を特定し(図2(b)の符号TP2,TQ2を参照)、その座標値を前記したラベリング値と対応付けて特徴ベクトル抽出部104に出力する。
前記したバイラテラルフィルタはエッジ保持型平滑化フィルタであり、画像全体として平滑化処理を行うことによって画像全体での濃淡変化や細かいノイズをキャンセルしつつ、エッジ(輪郭)を強調するものである。これによって、後記する特徴ベクトル抽出部104で適切かつ正確に欠陥候補の特徴ベクトルを抽出できる。
なお、フィルタ処理部103による画像処理と、領域情報生成部101による画像処理と、は並列的に実行される。これによって、検査装置100の処理を高速化できる。
このように、欠陥が存在する可能性がある矩形領域(図2(b)の符号TP2,TQ2を参照)についてのみ限定的に特徴ベクトルを抽出することで、検査処理を行う際の演算量を大幅に低減し、処理時間を短縮できる。
特徴ベクトル抽出部104は、欠陥候補を含む矩形領域に対応する特徴ベクトルを抽出し、前記したラベリング値と対応付けて種類判別部105に出力する。
図3に示すように、種類判別部105は、第1SVM判別部105aと、第2SVM判別部105bと、マハラノビス距離判別部105cと、比較部105dと、指令信号生成部105eと、を有している。
第1SVM判別部105aは、サポートベクターマシン(SVM:Support Vector Mchine)を用いることによって、検査対象に対応する特徴ベクトルの種類を判別する(SVMアルゴリズム)。
図4(a)に示す教師データH1,Ha1は、検査装置100の設定を行う者(以下、設定者と記す。)によって所定種類の欠陥と対応付けられた特徴ベクトルであり、教師データ記憶部111(図1参照)に格納されている。教師データH2,Ha2は、前記した教師データH1,Ha1とは異なる種類に対応する特徴ベクトルである。
前記した線形分離関数は、初期学習又は再学習を行う際に学習処理部112(図1参照)によって求められ、学習結果記憶部113に格納されている。
パラメータ:γは、いわゆる正則化パラメータであり、その値を調整することで多数種類に分類する際の適応性や、必要な教師データ数等を変化させることができる。ちなみに、パラメータ:γの値が小さいほど、ノイズの許容度が高くなる(つまり、ソフトマージン法に近づく)。
一方、パラメータ:Costは、線形分離関数によって規定される空間から外れた教師データに課すペナルティの程度を規定するパラメータである。
パラメータ:γ,Costの値は、検査装置100の初期設定を行う際、入力装置200を介した操作に応じて適宜設定される。
第2SVM判別部105bで用いるパラメータ:Costに関しては、第1SVM判別部105aで設定したもの同一の値を用いた。
図4(b)は、マハラノビス距離判別部が用いる判別基準の説明図である。図4(b)に示す教師データH1,H2は、それぞれ異なる種類に対応付けられた特徴ベクトルであり、教師データ記憶部111に格納されている。重心G1は複数の教師データH1の重心座標であり、重心G2は複数の教師データH2の重心座標である。重心G1,G2(判別基準)は、学習処理部112によって初期学習又は再学習時に算出され、学習結果記憶部113に格納されている。
このように判別処理においてマハラノビス距離を用いることで、各次元の尺度によらずデータ間の相関関係を反映できると共に、欠陥候補が属する種類を精度よく判別できる。
比較部105dは、各判別部105a〜105cから入力される種類判別結果の中に一致しないものがあるか否かを判定し、その結果を指令信号生成部105eに出力する。
(A)各判別部105a〜105cによる種類判別結果が全て同一である場合、指令信号生成部105eは、判別結果評価部108に対して評価指令信号を出力する。
この場合、種類判別部105による判別結果の信頼性が非常に高い。したがって、その後、判別結果評価部108での総合評価に基づく検査処理が自動的に進められる。
この場合、種類判別部105による判別結果の信頼性は(A)に比べて低い。したがって、表示装置500(モニタ等)に検査領域の画像を拡大表示して検査要員に視認させ、欠陥種類の再検討を促す。この後の処理については後記する。
判別結果記憶部106には、検査領域に対応する画像情報に関して、各判別部105a〜105cによる種類判別結果が当該画像情報のラベリング値に対応付けて格納される。また、判別結果記憶部106には、各判別部105a〜105cによる種類判別結果が一致していたか否かを示す情報も併せて格納される。
なお、前記した評価基準情報として欠陥候補の種類の他、欠陥候補の位置及び面積も含めて総合的に判定することが好ましい。この場合、欠陥に該当するか否かの閾値となる位置及び面積が、欠陥候補の種類と対応付けて評価基準記憶部107に予め格納される。
一方、検査対象物に欠陥が存在しない場合、判別結果評価部108は搬送装置400に制御指令を出力し、検査対象物を組立等の次段階の処理に移す。
すなわち、表示制御部109は、指令信号生成部105e(図3参照)から表示指令が入力された場合、検査領域(例えば、矩形領域TP2:図2(b)参照)の拡大画像を表示装置500に表示させる。なお、当該画像として、フィルタ処理部103による処理後の拡大画像を表示することが好ましい。これによって、表示装置500の画面を視た検査要員は、欠陥候補の特徴を正確に把握できる。
初期学習又は再学習は、入力装置200を介して所定の学習開始指令(初期学習又は再学習の開始指令)が入力された場合に実行される。
なお、教師データとは、所定の教師画像情報に基づいて抽出された特徴ベクトルと、欠陥候補の種類と、が対応付けられたデータである。
一方、再学習を行う際には、表示装置500に表示された画像を視た検査要員によって教師データの追加要否が判断され、必要に応じて追加される。
なお、前記した第1SVM判別部105a及び第2SVM判別部105bの判別基準は、特徴ベクトルを各種類のクラスに分類する超平面を規定するための線形分離関数(判別関数)に相当する。
マハラノビス距離判別部105cの判別基準は、種類ごとの特徴ベクトルの重心座標に相当する。
図5、図6は、検査装置が実行する処理の流れを示すフローチャートである。なお、ステップS101,S102が、前記した初期学習に相当する。また、ステップS103〜S119が、前記した検査処理及び再学習に相当する。つまり、検査装置100は、検査対象物を順次検査しつつ、必要に応じて再学習を実行する。
ステップS102において検査装置100(学習処理部112)は、入力装置200からの指令に応じて初期学習を実行する。前記したように、当該初期学習では、各判別部105a〜105cそれぞれに対応する判別基準(線形分離関数及び重心座標)が算出される。
ステップS104において検査装置100は、n=1とする。なお、値nは一つの検査対象物うち検査している欠陥候補が何個目であるかを示す値である。すなわち、検査装置100は、一つ又は複数存在する欠陥候補のうち、1つ目の欠陥候補について検査処理を開始する。
ステップS106において検査装置100(種類判別部105)は、欠陥候補の種類判別処理を実行する(種類判別ステップ)。すなわち、検査装置100は、ステップS102の初期学習において算出した判別基準を用いて、各判別部105a〜105c(図3参照)により並列的に種類判別処理を行う。
なお、評価基準として面積及び位置を用いる場合、検査対象である欠陥候補の位置(例えば、重心座標)及び面積も予め算出しておく。
ステップS110において検査装置100は、搬送装置400(図1参照)に制御指令を出力し、検査対象物を別ラインに搬送させる。当該検査対象物は再利用又は廃棄される。
一方、検査対象としている欠陥候補が欠陥に該当しない場合(S109→No)、検査装置100の処理はステップS111に進む。
ステップS112において検査装置100は、前記したnの値をインクリメントし、次の欠陥候補について検査するためにステップS105の処理に戻る。
ステップS113において検査装置100(表示制御部109)は、検査対象物の画像等を表示装置500に表示させる(表示制御ステップ)。当該画像は、例えば、特徴ベクトル抽出領域決定部102で決定された領域に対してフィルタ処理部103でバイラテラルフィルタをかけた拡大画像である(図2(c)参照)。
また、検査要員は、各判別部105a〜105cがどのような種類として欠陥候補を判別したかを参考にしつつ、必要に応じて検査装置100に再学習させる。
ステップS115において検査装置100は、検査要員によって欠陥候補が欠陥に該当するという情報が入力されたか否かを判定する。欠陥に該当する場合(S115→Yes)、検査装置100の処理はステップS116に進む。一方、欠陥に該当しない場合(S115→No)、検査装置100の処理はステップS117に進む。
ステップS117において検査装置100(教師データ追加部110)は、入力装置200を介して教師データの追加指令が入力されたか否かを判定する。教師データの追加指令が入力された場合(S117→Yes)、検査装置100の処理はステップS118に進む。一方、教師データの追加指令が入力されていない場合(S117→No)、検査装置100の処理はステップS111に進む。
ステップS119において検査装置100(学習処理部112)は、初期学習(S102)において取得した教師データと、ステップS118で追加された教師データと、を含めて再学習を実行する(再学習ステップ)。すなわち、検査装置100は、ステップS118で追加された教師データを含めて、各判別部105a〜105cそれぞれに対応する判別基準を再学習する。再学習の具体的な処理は、ステップS102の初期学習と同様であるから説明を省略する。
本実施形態によれば、欠陥候補の種類判別結果が一致しない場合(S107→No)、検査装置100は検査要員による入力に応じて新たな教師データを追加し(S118)、再学習を行って判別基準を設定し直す(S119)。これによって、例えば、検査対象物の型式が変わったり、検査対象物を撮像する際の条件が微妙に変化した場合でも(いわゆるドリフト現象)、これに追従するように適切な判別基準を設定することができる。
一方、マハラノビス距離を用いる場合、特徴ベクトルと重心座標(図4(b)の重心G1,G2)との距離を比較して判別処理を実行するため、前記したパラメータ設定の困難性はない。その一方、欠陥の種類ごとの教師データ数が異なる場合、ベクトル空間において多数の教師データを有する側に重心座標が寄ってしまう傾向がある。
その結果、初期学習時における教師データの個数が比較的少ない場合でも誤判定を防止し、検査装置100の設定者が膨大な教師データを収集する必要がなくなる。
また、検査装置100は、特徴ベクトル抽出領域決定部102から入力される特徴ベクトル抽出領域(矩形領域)についてのみ高次局所自己相関処理を行う。したがって、特徴ベクトル抽出処理に要する演算量を大幅に低減し、欠陥検査に要する時間を短縮できる。
第2実施形態は、教師データ追加部110A(図7参照)が教師データの個数を調整する機能を有する点が第1実施形態と異なるが、その他の点は第1実施形態の場合と同様である。したがって、当該異なる部分(教師データ追加部110Aの構成)について説明し、第1実施形態と重複する部分については説明を省略する。
図7は、本発明の第2実施形態に係る検査装置が備える教師データ追加部の構成図である。
教師データ追加部110Aは、教師データ数比較部110aと、第1距離算出部110bと、第1距離比較部110cと、記憶部110dと、第2距離算出部110eと、第2距離比較部110fと、教師データ数調整部110gと、を有している。
第1距離算出部110bは、教師データ数mが閾値M1を超えている場合において、追加した教師データと、既に存在する複数の教師データと、の距離kをそれぞれ算出し、記憶部110dに格納する。
記憶部110dには、第1距離算出部110b及び第2距離算出部110eによる算出結果、教師データ数比較部110a、第1距離比較部110c、及び第2距離比較部110fによる比較結果が格納される。
第2距離比較部110fは、第2距離算出部110eによって算出したそれぞれの距離の長短を比較し、当該距離が最大である教師データ(つまり、境界面から最も遠い位置に存在する教師データ)のラべリング値を教師データ数調整部110gに出力する。
ちなみに、前記した超平面は複数存在する。したがって、例えば、複数の教師データそれぞれについて各超平面との距離を算出し、その最大値に対応する教師データDmを検索してもよいし、各超平面との距離の平均値を比較することで教師データDmを検索してもよい。
本実施形態に係る検査装置100が実行する処理は、第1実施形態で説明したフローチャート(図5、図6)のステップS118をステップS200に置き換えたものであり、その他は第1実施形態の場合と同様である。したがって、ステップS200(教師データ数の調整処理)についてのみ説明する。
図6のステップS200において検査装置100は、新たな教師データを追加するとともに、不要な教師データを削除することで教師データ数mを調整する。
なお、当該処理は、入力装置200を介して検査要員による教師データの追加指令がなされた場合に実行される(S117→Yes:図6参照)。
ステップS203において教師データ追加部110A(第1距離算出部110b、第1距離比較部110c)は、既存の各教師データについて、新たに追加する教師データとの距離kを算出し、閾値K1以下であるものが存在するか否かを判定する。距離kが閾値K1以下の教師データが存在する場合(S203→Yes)、教師データ追加部110Aの処理はステップS204に進む。
ステップS206において教師データ追加部110A(教師データ数調整部110g)は、ステップS205で検索した教師データDmを削除する。これによって、サポートベクターマシンの種類判別精度に寄与していない(つまり、境界である超平面から遠い)教師データを優先的に削除できる。
本実施形態に係る検査装置100は、教師データを追加した場合の教師データの個数mが閾値M1よりも大きい場合(S202→Yes)、当該教師データとの距離kが閾値K1以下である他の教師データを優先的に削除する(S203→Yes,S204)。
仮に教師データが増えすぎると、再学習や種類判別の処理に要する演算量が膨大になり、処理時間が長くなるという事態が起こる。本実施形態によれば、教師データの個数mを閾値M1以下に抑制することによって、前記した事態を回避できる。
さらに、検査装置100は、古い教師データを優先的に削除することで(S204)、検査対象物の型式等が変化した場合にも柔軟に対応できる。また、仮に、初期学習時に与えられた教師データにノイズが含まれていた場合でも、前記した手順を実行することでノイズの個数を低減できる。
第3実施形態は、第2実施形態で説明した教師データ追加部110Aの構成から第1距離算出部110b及び第1距離比較部110cを省略し、交差検定部110h(図9参照)を追加した点が異なるが、その他の点は第2実施形態と同様である。したがって、当該異なる部分について説明し、第2実施形態と重複する部分については説明を省略する。
図9は、本発明の第3実施形態に係る検査装置が備える教師データ追加部の構成図である。教師データ追加部110Bは、交差検定部110h等を有している。
交差検定部110hは、第2距離比較部110fから入力される情報(線形分離関数で規定される超平面との距離が最大となる教師データを特定する情報)に基づいて交差検定を実行する。
交差検定の結果、教師データの追加によって正答率(つまり、種類判別精度)が低下することが判明した場合、交差検定部110hは、当該教師データの追加を禁止する指令信号を教師データ数調整部110gに出力する。
次に、交差検定部110hは、当該K個のグループから1つのグループを除外した(K−1)個のグループの教師データを用いて、それぞれの判別部105a〜105c(図3参照)の正答率を算出する。さらに、交差検定部110hは、前記した除外するグループを順次変更して正答率の算出をK回繰り返し、例えば、正答率の平均値を算出する。
本実施形態に係る検査装置100が実行する処理は、教師データを追加する際の処理(S200の内容:図6参照)を除いて、第1実施形態に係る検査装置100の処理(図5、図6参照)と同様である。したがって、図6に示すステップS200の内容についてのみ説明し、それ以外の処理については説明を省略する。
図10は、教師データ追加部110Bが実行する処理の流れ(図6のステップS200)を示すフローチャートである。
ステップS202において教師データ追加部110B(教師データ数比較部110a)は、新たな教師データを追加した場合の教師データ数mが、閾値M1よりも大きいか否かを判定する。教師データ数mが閾値M1以下である場合(S202→No)、教師データ追加部110Bは処理を終了する(END)。この場合、教師データ追加部110Bは、既存の教師データを削除することなく新たな教師データを追加する。
ステップS213において教師データ追加部110B(交差検定部110h)は、新たな教師データを追加した上で交差検定を実行する。つまり、教師データ追加部110Bは、ステップS211で検索した既存の教師データDmを削除して新たな教師データを追加した、と仮定した場合の欠陥種類の正答率(種類判別精度)を算出する。
ステップS215において教師データ追加部110B(教師データ数調整部110g)は、新たな教師データの追加を取消し、ステップS212で交差検定の対象から除外した教師データDmを残す。これによって、教師データの個数をM個以下に抑えつつ、不適当な教師データの追加による種類判別精度の低下を抑制できる。
ステップS216において教師データ追加部110B(教師データ数調整部110g)は、新たな教師データを追加した状態を維持し、ステップS212で交差検定の対象から除外した教師データDmを教師データ記憶部111(図1参照)から削除する。これによって、教師データの個数をM個以下に抑えつつ、検査対象の型式等の変化に対し柔軟に対応できる。
本実施形態に係る検査装置100によれば、入力装置200を介して新たな教師データを追加する際、事前に交差検定を行う。
教師データを追加して再学習することで、検査対象物の型式等の変化に柔軟に対応することが好ましいが、適切な教師データを検査要員が目視で選別することは容易でない。例えば、教師データを追加することで、予想に反して種類判別部105の種類判別精度が落ちる可能性もある。
つまり、人間の目視に基づく判断結果の妥当性を交差検定によって再検討することで、高い種類判別精度を維持しつつ検査対象物等の変化に柔軟に対応できる。
以上、本発明に係る検査装置100について各実施形態により説明したが、本発明はこれらの記載に限定されるものではなく、種々の変更等を行うことができる。
例えば、前記実施形態では、種類判別部105が、第1SVM判別部105aと、第2SVM判別部105bと、マハラノビス距離判別部105cと、を有する場合について説明したが、他の種類判別アルゴリズムを用いた判別部を追加してもよい。
また、種類判別部105は、最短距離法や群平均法等の階層的クラスタリング、又はk-means法等の非階層的クラスタリングを用いたクラスタリング判別部を含んでもよい。
また、種類判別部105は、自己組織化写像によって高次元の特徴ベクトルを低次元の特徴ベクトルに変換し、既に取得した画像データの特徴ベクトルと競合させることで学習するSOM(Self-organizing maps)判別部を含んでもよい。
種類判別部105が有する複数の種類判別アルゴリズムは、検査装置100の設定段階において、シミュレーション結果等に基づき設定者によって適宜選択・設定される。
また、第2、第3実施形態において教師データを追加する際、当該追加の直前における教師データ数mが閾値Mに達している場合(m=M)、不要な教師データを削除した後、新たな教師データを追加してもよい。
また、第2実施形態において、教師データ数mが閾値M1よりも大きい場合(S202→Yes:図8参照)、前記した距離kに関する処理(S203,S204)を省略し、超平面からの距離が最大となる教師データの検索・削除処理(S205,S206)のみを実行してもよい。
また、前記実施形態では、検査装置100が検査すべき事項(検査事項)が検査対象物の欠陥の有無である場合について説明したが、これに限らない。例えば、撮像装置500によって撮像された物品の種類を判別し、その判別結果に応じて物品を仕分け(検査する)するなど、他の検査事項についても同様の方法を用いることができる。
101 領域情報生成部
102 特徴ベクトル抽出領域決定部
103 フィルタ処理部
104 特徴ベクトル抽出部(特徴ベクトル抽出手段)
105 種類判別部(種類判別手段)
105a 第1SVM判別部(サポートベクターマシン)
105b 第2SVM判別部(サポートベクターマシン)
105c マハラノビス距離判別部(マハラノビス距離アルゴリズム)
106 判別結果記憶部
107 評価基準記憶部
108 判別結果評価部
109 表示制御部(表示制御手段)
110,110A,110B 教師データ追加部(教師データ追加手段、教師データ数調整手段)
110g 教師データ数調整部(教師データ数調整手段)
110h 交差検定部(交差検定手段)
111 教師データ記憶部
112 学習処理部(再学習手段)
113 学習結果記憶部
200 入力装置(入力手段)
300 撮像装置
400 搬送装置
500 表示装置(表示手段)
Claims (7)
- 外部から入力される検査対象物の画像情報に基づいて、所定の検査事項に関して種類の判別を含む検査を行う検査装置であって、
前記画像情報の特徴ベクトルを抽出する特徴ベクトル抽出手段と、
互いに異なる複数の種類判別アルゴリズムが、教師あり学習に基づく独自の判別基準をそれぞれ用いて、前記特徴ベクトルが属する前記種類を判別して複数の判別結果を得る種類判別手段と、
前記複数の判別結果において一致しないものがある場合、前記画像情報に対応する画像を表示手段に表示させる表示制御手段と、
前記表示手段に表示された前記画像を確認した人が判断した前記画像に対応する種類を入力する入力手段と、
前記表示手段に表示される前記画像に対応する特徴ベクトルと、前記入力手段を介して入力された種類と、を対応付けて、新たな教師データとして追加する教師データ追加手段と、
追加された前記教師データを含めて、前記複数の種類判別アルゴリズムそれぞれに対応する判別基準を再学習する再学習手段と、を備え、
前記種類判別手段は、再学習した前記判別基準を用いて、前記複数の種類判別アルゴリズムによる判別処理を続行する
ことを特徴とする検査装置。 - 前記複数の種類判別アルゴリズムは、
教師データを前記種類ごとに分類するための超平面を規定する判別関数に基づいて、前記特徴ベクトルが属する前記種類を判別するSVM(Support Vector Mchine)アルゴリズムと、
前記種類が共通する教師データの重心座標を求め、それぞれの種類の重心座標と前記特徴ベクトルとのマハラノビス距離に基づいて、当該特徴ベクトルが属する前記種類を判別するマハラノビス距離アルゴリズムと、を含む
ことを特徴とする請求項1に記載の検査装置。 - 前記教師データ追加手段によって教師データを追加したとき、教師データの個数が所定値を超える場合、前記超平面までの距離が長い教師データを優先的に削除する教師データ数調整手段を備える
ことを特徴とする請求項2に記載の検査装置。 - 前記教師データ追加手段によって教師データを追加したとき、教師データの個数が所定値を超える場合、当該教師データとのマハラノビス距離が所定値以下である他の教師データを優先的に削除する教師データ数調整手段を備える
ことを特徴とする請求項2に記載の検査装置。 - 前記教師データ追加手段によって教師データを追加する際に交差検定を実行し、前記交差検定の結果、前記教師データの追加によって前記種類判別手段の判別精度が低下した場合、当該教師データの追加を禁止する交差検定手段を備える
ことを特徴とする請求項2に記載の検査装置。 - 外部から入力される検査対象物の画像情報に基づいて、所定の検査事項に関して種類の判別を含む検査を行う検査装置が実行する検査方法であって、
前記検査装置は、
前記画像情報の特徴ベクトルを抽出する特徴ベクトル抽出ステップと、
互いに異なる複数の種類判別アルゴリズムが、教師あり学習に基づく独自の判別基準をそれぞれ用いて、前記特徴ベクトルが属する前記種類を判別して複数の判別結果を得る種類判別ステップと、
前記複数の判別結果において一致しないものがある場合、前記画像情報に対応する画像を表示手段に表示させる表示制御ステップと、
前記表示手段に表示された前記画像を確認した人が判断した前記画像に対応する種類を、入力手段を介して入力する入力ステップと、
前記表示手段に表示される前記画像に対応する特徴ベクトルと、前記入力手段を介して入力された種類と、を対応付けて、新たな教師データとして追加する教師データ追加ステップと、
追加された前記教師データを含めて、前記複数の種類判別アルゴリズムそれぞれに対応する判別基準を再学習する再学習ステップと、
再学習した前記判別基準を用いて、前記複数の種類判別アルゴリズムによる判別処理を続行する判別処理続行ステップと、を含む処理を実行する
ことを特徴とする検査方法。 - 請求項6に記載の検査方法を、コンピュータである前記検査装置に実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013022907A JP6061713B2 (ja) | 2013-02-08 | 2013-02-08 | 検査装置、検査方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013022907A JP6061713B2 (ja) | 2013-02-08 | 2013-02-08 | 検査装置、検査方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014153906A JP2014153906A (ja) | 2014-08-25 |
JP6061713B2 true JP6061713B2 (ja) | 2017-01-18 |
Family
ID=51575721
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013022907A Expired - Fee Related JP6061713B2 (ja) | 2013-02-08 | 2013-02-08 | 検査装置、検査方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6061713B2 (ja) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6184033B2 (ja) * | 2015-02-04 | 2017-08-23 | エヌ・ティ・ティ・コムウェア株式会社 | 感性評価装置、感性評価方法、およびプログラム |
JP2016143354A (ja) * | 2015-02-04 | 2016-08-08 | エヌ・ティ・ティ・コムウェア株式会社 | 学習装置、学習方法、およびプログラム |
JP6072103B2 (ja) * | 2015-02-04 | 2017-02-01 | エヌ・ティ・ティ・コムウェア株式会社 | 学習装置、学習方法、およびプログラム |
JP5953384B1 (ja) * | 2015-02-04 | 2016-07-20 | エヌ・ティ・ティ・コムウェア株式会社 | 学習装置、学習方法、およびプログラム |
JP6148265B2 (ja) * | 2015-02-04 | 2017-06-14 | エヌ・ティ・ティ・コムウェア株式会社 | 学習装置、学習方法、およびプログラム |
US10210464B2 (en) * | 2015-03-11 | 2019-02-19 | Qualcomm Incorporated | Online training for object recognition system |
JP6922539B2 (ja) * | 2017-08-09 | 2021-08-18 | 日立金属株式会社 | 表面欠陥判定方法および表面欠陥検査装置 |
JP7056259B2 (ja) * | 2018-03-14 | 2022-04-19 | オムロン株式会社 | 検査システム、識別システム、及び識別器評価装置 |
CN109239075B (zh) * | 2018-08-27 | 2021-11-30 | 北京百度网讯科技有限公司 | 电池检测方法及装置 |
EP3862749A4 (en) * | 2018-10-01 | 2022-07-13 | System Square Inc. | TRAINING DATA GENERATION DEVICE AND TRAINING DATA GENERATION SYSTEM |
JP7443244B2 (ja) * | 2018-11-07 | 2024-03-05 | 株式会社東芝 | 画像処理装置、画像処理方法及びプログラム |
JP7391504B2 (ja) * | 2018-11-30 | 2023-12-05 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP7075056B2 (ja) * | 2018-12-27 | 2022-05-25 | オムロン株式会社 | 画像判定装置、画像判定方法及び画像判定プログラム |
JP6749655B1 (ja) * | 2019-03-19 | 2020-09-02 | 株式会社 システムスクエア | 検査装置、異常検出方法、コンピュータプログラム、学習モデルの生成方法、及び学習モデル |
JP6742037B1 (ja) * | 2019-03-19 | 2020-08-19 | 株式会社 システムスクエア | 学習モデルの生成方法、学習モデル、検査装置、異常検出方法、及びコンピュータプログラム |
JP7271306B2 (ja) * | 2019-05-16 | 2023-05-11 | 株式会社キーエンス | 画像検査装置及び画像検査装置の設定方法 |
JP7433782B2 (ja) * | 2019-06-14 | 2024-02-20 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP6917083B1 (ja) * | 2020-03-24 | 2021-08-11 | 株式会社 システムスクエア | 教師データ生成装置、検査装置及びプログラム |
JP7496543B2 (ja) | 2020-05-08 | 2024-06-07 | アース環境サービス株式会社 | 異物の混入時期特定方法及びシステム |
CN112950547B (zh) * | 2021-02-03 | 2024-02-13 | 佛山科学技术学院 | 一种基于深度学习的锂电池隔膜缺陷机器视觉检测方法 |
WO2022202366A1 (ja) * | 2021-03-25 | 2022-09-29 | パナソニックIpマネジメント株式会社 | データ支援システム、データ支援方法、プログラム、統合システム、及び処理装置 |
WO2024121970A1 (ja) * | 2022-12-07 | 2024-06-13 | 株式会社Fuji | 良否判定装置および良否判定方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000200356A (ja) * | 1999-01-08 | 2000-07-18 | Hitachi Ltd | 欠陥分類方法およびその装置 |
JP5137863B2 (ja) * | 2009-01-20 | 2013-02-06 | セコム株式会社 | 物体検出装置 |
JP5246066B2 (ja) * | 2009-06-30 | 2013-07-24 | Jfeスチール株式会社 | カテゴリ判定ルールの作成方法、装置およびコンピュータプログラム |
JP5075924B2 (ja) * | 2010-01-13 | 2012-11-21 | 株式会社日立製作所 | 識別器学習画像生成プログラム、方法、及びシステム |
JP2011158373A (ja) * | 2010-02-02 | 2011-08-18 | Dainippon Screen Mfg Co Ltd | 自動欠陥分類のための教師データ作成方法、自動欠陥分類方法および自動欠陥分類装置 |
US8385632B2 (en) * | 2010-06-01 | 2013-02-26 | Mitsubishi Electric Research Laboratories, Inc. | System and method for adapting generic classifiers for object detection in particular scenes using incremental training |
WO2012117966A1 (ja) * | 2011-02-28 | 2012-09-07 | 日本電気株式会社 | データ判別装置、方法及びプログラム |
-
2013
- 2013-02-08 JP JP2013022907A patent/JP6061713B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2014153906A (ja) | 2014-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6061713B2 (ja) | 検査装置、検査方法及びプログラム | |
JP5546317B2 (ja) | 外観検査装置、外観検査用識別器の生成装置及び外観検査用識別器生成方法ならびに外観検査用識別器生成用コンピュータプログラム | |
US10043264B2 (en) | Integration of automatic and manual defect classification | |
TWI579775B (zh) | A matching processing device, a matching processing method and an inspection device using the same | |
US9715723B2 (en) | Optimization of unknown defect rejection for automatic defect classification | |
JP6632193B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP2013167596A (ja) | 欠陥検査装置、欠陥検査方法及びプログラム | |
EP3502966A1 (en) | Data generation apparatus, data generation method, and data generation program | |
US10891508B2 (en) | Image processing apparatus, method, and non-transitory computer-readable storage medium | |
JP7137487B2 (ja) | 画像評価装置及び方法 | |
JP2019016249A (ja) | 判定装置、判定方法および判定プログラム | |
CN112805719A (zh) | 分类半导体样本中的缺陷 | |
JP2019158628A (ja) | 検査装置、検査方法、及び検査プログラム | |
JP2007018176A (ja) | 学習装置、学習方法、学習プログラム、記録媒体、パターン認識装置およびパターン認識方法 | |
US20230325413A1 (en) | Error Factor Estimation Device and Error Factor Estimation Method | |
CN111612749B (zh) | 基于肺部影像的病灶检测方法和装置 | |
JP2019215728A (ja) | 情報処理装置、情報処理方法及びプログラム | |
CN115362445A (zh) | 数据分类装置、数据分类方法以及数据分类程序 | |
JP6504682B2 (ja) | 部品種類自動判別方法及び部品種類自動判別システム並びに画像処理用部品データ作成方法及び画像処理用部品データ作成システム | |
Kofler et al. | Classifying defects in topography images of silicon wafers | |
KR101473991B1 (ko) | 얼굴 검출 방법 및 그 장치 | |
JP7559633B2 (ja) | 統合モデルの生成方法、画像検査システム、画像検査用モデルの生成装置、画像検査用モデルの生成プログラム及び画像検査装置 | |
Pastor-López et al. | Surface defect categorization of imperfections in high precision automotive iron foundries using best crossing line profile | |
CN111598023A (zh) | 一种基于似然比的指纹鉴定方法和系统 | |
Nahar et al. | Automated corner grading of trading cards: Defect identification and confidence calibration through deep learning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151126 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20160620 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160914 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160920 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161118 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161213 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6061713 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |