JP2021012098A - 検査装置 - Google Patents

検査装置 Download PDF

Info

Publication number
JP2021012098A
JP2021012098A JP2019126313A JP2019126313A JP2021012098A JP 2021012098 A JP2021012098 A JP 2021012098A JP 2019126313 A JP2019126313 A JP 2019126313A JP 2019126313 A JP2019126313 A JP 2019126313A JP 2021012098 A JP2021012098 A JP 2021012098A
Authority
JP
Japan
Prior art keywords
image
foreign matter
image processing
article
evaluation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019126313A
Other languages
English (en)
Inventor
厚司 岩井
Koji Iwai
厚司 岩井
太 万木
Futoshi Yurugi
太 万木
浩太 冨永
Kota TOMINAGA
浩太 冨永
広祥 牧
Hiroaki Maki
広祥 牧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ishida Co Ltd
Original Assignee
Ishida Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ishida Co Ltd filed Critical Ishida Co Ltd
Priority to JP2019126313A priority Critical patent/JP2021012098A/ja
Priority to US16/917,052 priority patent/US20210004951A1/en
Priority to KR1020200080856A priority patent/KR102498829B1/ko
Priority to EP20183416.5A priority patent/EP3764088B1/en
Priority to CN202010626211.1A priority patent/CN112255251B/zh
Publication of JP2021012098A publication Critical patent/JP2021012098A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/04Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/06Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption
    • G01N23/18Investigating the presence of flaws defects or foreign matter
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/97Determining parameters from multiple pictures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/03Investigating materials by wave or particle radiation by transmission
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/10Different kinds of radiation or particles
    • G01N2223/101Different kinds of radiation or particles electromagnetic radiation
    • G01N2223/1016X-ray
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/40Imaging
    • G01N2223/401Imaging image processing
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/60Specific applications or type of materials
    • G01N2223/652Specific applications or type of materials impurities, foreign matter, trace amounts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • G06T2207/20008Globally adaptive
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20224Image subtraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)

Abstract

【課題】予め記憶された複数の画像処理アルゴリズムの中から最適な画像処理アルゴリズムを人の手を介さずに設定することが可能となる検査装置を提供する。【解決手段】X線検査装置1は、複数の画像処理アルゴリズムを記憶する記憶部21と、異物を付与した物品に電磁波を透過させることで得られる透過画像、又は合成透過画像を、基準透過画像として取得する取得部22と、記憶部21に記憶された複数の画像処理アルゴリズムによって基準透過画像をそれぞれ処理することにより得られる評価画像に基づいて、それぞれの画像処理アルゴリズムに対する異物の検出精度を評価する評価部24と、評価部24における評価に基づいて、画像処理アルゴリズムの少なくとも1つを、予め選択された画像処理アルゴリズムとして設定する設定部25と、を備える。【選択図】図3

Description

本発明は、検査装置に関する。
物品に電磁波を透過させることで得られた透過画像に対して、画像処理アルゴリズムを用いた画像処理を施して処理画像を生成し、この処理画像に基づいて物品の検査を行う検査装置が知られている。このような検査装置では、複数の画像処理アルゴリズムが記憶部に予め記憶されており、記憶された複数の画像処理アルゴリズムの中から、検査時の画像処理に用いる最適な画像処理アルゴリズムが選択されて設定される。
例えば、特許文献1には、被検査物中から検出する異物の異物検出特性をオペレータが選択すると、選択された異物検出特性に近似する複数の画像処理アルゴリズムを、予め記憶された複数の画像処理アルゴリズムから抽出して表示部に表示する検査装置(X線検査装置)が開示されている。
特許第5635903号公報
しかしながら、上記従来の検査装置では、異物検出特性に応じて抽出された複数の画像処理アルゴリズムが表示部に表示されるものの、当該複数の抽出された画像処理アルゴリズムの中から最終的に画像処理に用いる画像処理アルゴリズムを決定するのはオペレータである。このため、画像処理アルゴリズムの選択に時間又は手間がかかったり、上記選択の過程で最適な画像処理アルゴリズムが選択されなかったりするおそれがある。このため、最適な画像処理アルゴリズムを選択する上で改善の余地がある。
そこで、本発明は、予め記憶された複数の画像処理アルゴリズムの中から最適な画像処理アルゴリズムを人の手を介さずに設定することが可能となる検査装置を提供することを目的とする。
本発明の検査装置は、物品に電磁波を透過させることで得られる透過画像に対して、複数の画像処理アルゴリズムの中から予め選択された画像処理アルゴリズムを用いて画像処理し、その画像処理結果に基づいて物品に含まれる異物の有無を検査する検査装置であって、複数の画像処理アルゴリズムを記憶する記憶部と、異物を付与した物品に電磁波を透過させることで得られる透過画像、又は物品に電磁波を透過させることで得られる透過画像に仮想的に異物を合成することにより生成される合成透過画像を、基準透過画像として取得する取得部と、記憶部に記憶された複数の画像処理アルゴリズムによって基準透過画像をそれぞれ処理することにより得られる評価画像に基づいて、それぞれの画像処理アルゴリズムに対する異物の検出精度を評価する評価部と、評価部における評価に基づいて、画像処理アルゴリズムの少なくとも1つを、予め選択された画像処理アルゴリズムとして設定する設定部と、を備える。
なお、取得部によって取得される基準透過画像に含まれる異物には、異物に対応するテストピース(試験片)も含まれる。この構成の検査装置では、記憶部に記憶された複数の画像処理アルゴリズムによって基準透過画像をそれぞれ処理することにより得られる評価画像に基づいて、それぞれの画像処理アルゴリズムに対する異物の検出精度が評価されるので、画像処理アルゴリズムの客観的な評価が可能となる。そして、客観的に評価された画像処理アルゴリズムの中から少なくとも一つの画像処理アルゴリズムが、検査時において画像処理する際の予め選択された画像処理アルゴリズムとして自動的に設定される。この結果、予め記憶された複数の画像処理アルゴリズムの中から最適な画像処理アルゴリズムを人の手を介さずに設定することが可能となる。
本発明の検査装置では、合成透過画像は、物品に電磁波を透過させることで得られる透過画像の少なくとも一部に、異物に電磁波を透過させることで得られる透過画像を合成することにより生成されてもよい。これにより、異物が付与された物品の透過画像が簡易に取得できる。
本発明の検査装置では、評価部は、評価画像の異物に対応する部分の平均明るさ、異物に対応する部分の最小明るさ、及び異物以外の物品に対応する部分の最大明るさに基づいて算出される得点に基づいて検出精度を評価してもよい。これにより、異物の検出精度をより正確に判定することが可能となる。
本発明の検査装置では、画像処理アルゴリズムによる基準透過画像の処理の結果、電磁波の透過量が大きいほど暗く示され、透過量が小さいほど明るく示される評価画像が得られる場合、評価部は、評価画像の異物に対応する部分が明るくなるほど、かつ異物以外の物品に対応する部分が暗くなるほど得点が高くなるように設定された計算式に基づいて算出された得点に基づいて検出精度を評価してもよい。これにより、複数の画像処理アルゴリズムに対するそれぞれの評価が明示的に示されるので、評価部によって評価された画像処理アルゴリズムを確実に予め選択された画像処理アルゴリズムとして設定することができる。
本発明の検査装置では、取得部は、ベルトコンベヤに載置された状態で搬送される異物に電磁波を透過させることにより取得される透過画像に基づいて、電磁波の透過量が大きいほど暗く示され、透過量が小さいほど明るく示されると共に、透過画像から異物に対応する部分と異物の周囲の背景に対応する部分とを切り出した異物透過画像を生成し、異物透過画像を構成するそれぞれの画素の明るさから異物透過画像における明るさの最頻値となる明るさを差し引くことにより、背景に対応する部分の明るさを0とする仮想異物画像を生成し、物品に電磁波を透過させることで得られる透過画像に仮想異物画像を合成することによって合成透過画像を生成してもよい。これにより、画像処理アルゴリズムに対する異物の検出精度を評価する際に用いられる合成透過画像を容易に生成することができると共に、画像処理アルゴリズムを評価する際の画像として適切な基準透過画像を取得することができる。
本発明の検査装置では、取得部は、異物透過画像における背景に対応する部分に対する異物に対応する部分の明るさの変化である第一変化量と、異物が含まれる物品に電磁波を透過させることで得られる透過画像において、物品に対応する部分に対する異物に対応する部分の第二変化量と、を取得し、取得部は、第一変化量と第二変化量とに基づいて、合成透過画像を構成するそれぞれの画素の明るさを補正してもよい。これにより、より現実に近い合成透過画像を取得することができるので、評価部による評価精度を高めることが可能となる。
本発明によれば、予め記憶された複数の画像処理アルゴリズムの中から最適な画像処理アルゴリズムを人の手を介さずに設定することが可能となる。
図1は、一実施形態に係るX線検査装置の構成図である。 図2は、図1に示されるシールドボックスの内部の構成図である。 図3は、一実施形態に係るX線検査装置の機能構成を示す機能ブロック図である。 図4は、一実施形態に係るX線検査装置における画像処理の流れを示す説明図である。 図5(a)は、コンベヤベルトによって搬送される複数の異物の透過画像の一例であり、図5(b)は、異物透過画像の一例であり、図5(c)は、異物透過画像を明暗反転させた画像の一例である。 図6(a)は、異物領域画像の一例であり、図6(b)は、仮想異物画像の一例である。 図7(a)は、透過画像の一例であり、図7(b)は、画像処理アルゴリズムによる画像処理によって異物が適切に検出された評価画像の一例であり、図7(c)は、画像処理アルゴリズムによる画像処理によって異物が適切に検出されていない評価画像の一例である。
図1に示されるように、X線検査装置(検査装置)1は、装置本体2と、支持脚3と、シールドボックス4と、搬送部5と、X線照射部6と、X線検出部7と、表示操作部8と、制御部20と、を備えている。
X線検査装置1は、物品Aを搬送しつつ物品AにX線(電磁波)を照射することによって物品AのX線透過画像を生成し、当該X線透過画像に基づいて物品Aの検査(例えば、収納数検査、異物混入検査、欠品検査、割れ欠け検査等)を行う。検査前の物品Aは、搬入コンベア51によってX線検査装置1に搬入される。検査後の物品Aは、搬出コンベア52によってX線検査装置1から搬出される。X線検査装置1によって不良品と判定された物品Aは、搬出コンベア52の下流に配置された振分装置(図示省略)によって生産ライン外に振り分けられる。X線検査装置1によって良品と判定された物品Aは、当該振分装置をそのまま通過する。
装置本体2は、制御部20等を収容している。支持脚3は、装置本体2を支持している。シールドボックス4は、装置本体2に設けられている。シールドボックス4は、外部へのX線の漏洩を防止する。シールドボックス4の内部には、X線による物品Aの検査が実施される検査領域Rが設けられている。シールドボックス4には、搬入口4a及び搬出口4bが形成されている。検査前の物品Aは、搬入コンベア51から搬入口4aを介して検査領域Rに搬入される。検査後の物品Aは、検査領域Rから搬出口4bを介して搬出コンベア52に搬出される。搬入口4a及び搬出口4bのそれぞれには、X線の漏洩を防止するX線遮蔽カーテン(図示省略)が設けられている。
搬送部5は、シールドボックス4内に配置されている。搬送部5は、搬入口4aから検査領域Rを介して搬出口4bまで、搬送方向Dに沿って物品Aを搬送する。搬送部5は、例えば、搬入口4aと搬出口4bとの間に掛け渡されたベルトコンベアである。
図1及び図2に示されるように、X線照射部6は、シールドボックス4内に配置されている。X線照射部6は、搬送部5によって搬送される物品AにX線を照射する。X線照射部6は、例えば、X線を出射するX線管と、X線管から出射されたX線を搬送方向Dに垂直な面内において扇状に広げるコリメータと、を有している。
X線検出部7は、シールドボックス4内に配置されている。X線検出部7は、X線照射部6から搬送部5によって搬送される物品Aに向けて照射され、物品Aを透過したX線を検出する。X線検出部7は、搬送方向Dに垂直な水平方向に沿って一次元に配列されたX線検出素子によって構成されたラインセンサである。
図1に示されるように、表示操作部8は、装置本体2に設けられている。表示操作部8は、各種情報を表示すると共に、各種条件の入力を受け付ける。表示操作部8は、例えば、液晶ディスプレイであり、タッチパネルとしての操作画面を表示する。この場合、オペレータは、表示操作部8を介して各種条件を入力することができる。
制御部20は、装置本体2内に配置されている。制御部20は、X線検査装置1の各部の動作を制御する。制御部20は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、SSD(Solid State Drive)等で構成されている。ROMには、X線検査装置1を制御するためのプログラムが記録されている。I/Oポート及び通信ポートには、搬送部5、X線照射部6、X線検出部7、及び表示操作部8が接続されている。これにより、制御部20は、X線検査装置1の各種動作を制御することができる。
制御部20は、図3に示されるように、記憶部21と、CPU及びRAM等のハードウェア上に所定のコンピュータソフトウェアを読み込ませることにより、CPUの制御のもと実行されることにより構成される、取得部22、画像処理部23、評価部24、設定部25、及び異物判定部28を備えている。
記憶部21は、複数の画像処理アルゴリズムを記憶する。記憶部21に記憶する複数の画像処理アルゴリズムは、インターネット等のネットワークを介して外部から取得することができる。また、記憶部21に記憶する複数の画像処理アルゴリズムは、USBメモリ、CFカード又はリムーバブルハードディスク等の外部記憶媒体から取得することができる。
記憶部21に記憶する複数の画像処理アルゴリズムは、生物界における遺伝及び進化のメカニズムを応用した手法である遺伝的アルゴリズム(GA=Genetic Algorithms)を採用して、X線検査装置1の仕様又は検査条件等に基づき複数の画像処理フィルタから自動生成することができる。なお、記憶部21に予め記憶する複数の画像処理アルゴリズムは、遺伝的アルゴリズムを採用して生成されたアルゴリズム以外に、複数の画像処理フィルタを人手で適宜組み合わせたアルゴリズム等でもよい。
取得部22は、異物Fが含まれる可能性がある物品A(図4参照)にX線を透過させることで得られる透過画像P11(図4参照)を取得する。画像処理部23は、透過画像P11に対し、後段にて詳述する設定部25によって予め設定されている画像処理アルゴリズムを用いた画像処理を施して、多階調で表現された濃淡画像である処理画像P2を生成する。画像処理部23は、生成した当該処理画像P2を表示操作部8に表示させる。
異物判定部28は、画像処理部23によって画像処理された処理画像P2に基づいて物品Aの検査を行う。具体的には、異物判定部28は、処理画像P2を一方向に走査したときの明るさの変化(例えば、明るさ急変部の有無)に基づいて、異物Fの有無を判定(良否の判定)する。異物判定部28は、例えば、処理画像が表示される表示操作部8において、異物Fの周囲を枠等で囲んだり、文字を挿入したりして、検査結果を明示的に示してもよい。なお、本明細書における明るさとは、画像を構成するそれぞれの画素の明るさを意味し、濃淡値、濃度値、明度値、輝度値等により示される。
このようなX線検査装置1において異物Fの検査を行うためには、記憶部21に記憶された複数の画像処理アルゴリズムの中から処理画像P2を生成するための画像処理アルゴリズムを予め選択し、検査に用いられる画像処理アルゴリズムとして設定しておく必要がある。そして、異物Fの検知精度を高めるためには、処理画像P2を生成するために最適な画像処理アルゴリズムを予め選択して設定しておく必要がある。このため、X線検査装置1は、複数の画像処理アルゴリズムの中から検査に用いる画像処理アルゴリズムを選択して設定する初期設定機能が備えられている。
従来のX線検査装置は、透過画像P11に対して種々の画像処理アルゴリズムが施されたそれぞれの評価画像P3(図4参照)をオペレータに提示し、オペレータが主観的に最適と感じる評価画像P3を生成した画像処理アルゴリズムを、予め選択された画像処理アルゴリズムとして設定することができるという初期設定機能を有していた。本実施形態では、オペレータの手を介さず自動的に、複数の画像処理アルゴリズムの中から、最適な画像処理アルゴリズムを予め選択して設定することができる初期設定機能を有している。このような初期設定機能は、主に、取得部22、画像処理部23、評価部24、及び設定部25によって構成される。以下、本実施形態の初期設定機能について説明する。
はじめに、各画像処理アルゴリズムによって処理される画像である基準透過画像P1の取得機能について説明する。取得部22は、図4に示されるように、異物Fが含まれる物品AにX線を透過させることで得られる透過画像P11、又は、物品AにX線を透過させることで得られる良品透過画像PA1に異物FにX線を透過させることで得られる異物透過画像PFを合成することにより生成される合成透過画像P13を、基準透過画像P1として取得する。
取得部22は、搬送部5としてのベルトコンベヤによって搬送される異物Fを含む物品A(異物Fを含まない良品の物品に異物F又はテストピースを取り付けた物品A)にX線を照射し、物品Aを透過したX線を検出することで透過画像P11を取得する。本実施形態の取得部22は、X線の透過量が大きいほど明るく示され、X線の透過量が小さいほど暗く示される透過画像P11を取得する。
取得部22は、搬送部5としてのベルトコンベヤによって搬送される異物Fを含まない物品A(良品の物品A)にX線を照射し、良品の物品Aを透過したX線を検出することで良品透過画像PA1を取得する。本実施形態の取得部22は、X線の透過量が大きいほど明るく示され、X線の透過量が小さいほど暗く示される良品透過画像PA1を取得する。
また、取得部22は、搬送部5としてのベルトコンベヤによって搬送される異物FにX線を照射し、異物Fを透過したX線を検出することで異物透過画像PFを取得する。本実施形態の取得部22は、X線の透過量が大きいほど明るく示され、X線の透過量が小さいほど暗く示される異物透過画像PFを取得する。取得部22は、このようにして得られた良品透過画像PA1に異物透過画像PF1を合成することによって、合成透過画像P13を取得する。取得部22は、X線の透過量が大きいほど明るく示され、X線の透過量が小さいほど暗く示される合成透過画像P13を取得する。
良品透過画像PA1とは、異物Fを含まない検査対象物品のX線透過画像である。この良品透過画像PA1に異物透過画像PFに基づいて生成される仮想異物画像PF3(図6参照)を合成して形成される合成透過画像P13は、同種の物品の異物検査において使用される最適な画像処理アルゴリズムを評価するための基準とされる基準透過画像P1である。すなわち、仮想異物画像PF3は、良品透過画像PA1における仮想的な異物の大きさ、位置が予め分かっている。良品透過画像PA1に合成された仮想異物像の位置、大きさがわかっている状態で各画像処理アルゴリズムによる画像処理を行えるので、異物Fが存在する位置(画素)を設定する作業(ラベリング)等の手間が省け、各画像処理アルゴリズムによる画像処理結果から適切に異物検出ができるか否かにより各画像処理アルゴリズムを評価することができる。
ここで、取得部22による合成透過画像P13について、仮想異物画像PF3を用いて合成透過画像P13を生成する機能について、より詳細に説明する。本実施形態のX線検査装置1では、異物Fの種類ごとの透過画像である仮想異物画像PF3(図6参照)を予め記憶(登録)することができる機能を有する。このような機能を有するX線検査装置1では、良品透過画像PA1を取得すれば、予め登録されている仮想異物画像PF3を用いて基準透過画像P1を生成できる。すなわち、良品の物品Aに異物F(又はテストピース)を載置した状態のサンプルをベルトコンベヤに流し、基準透過画像P1を取得する手間が省略できる。以下、仮想異物画像PF3の生成機能について説明する。
図5(a)に示されるように、取得部22は、複数の異物Fの透過画像PF0を取得する。具体的には、オペレータによって複数の異物Fが搬送部5としてのコンベヤベルト上に並べられ、X線検査装置1による透過画像が取得される。図5(a)は、種類が同じ異物Fであり、サイズが互いに異なっている。取得部22は、例えば、オペレータが、異物Fとして登録したい異物Fが含まれる部分(領域)(例えば、図5(a)の枠部)が適宜な方法によって選択されると、当該部分を切り出して、図5(b)に示される異物透過画像PFを生成する。取得部22は、図5(c)に示される異物透過画像PFを明暗反転させた異物透過画像PF1を取得する。
ここで、取得部22は、異物透過画像PF1の明るさヒストグラムを生成し、明るさの最頻値を取得する。取得部22は、当該最頻値を、異物透過画像PF1における異物F以外の部分である背景部分であると判定する。取得部22は、異物透過画像PF1の全体について、上記の最頻値となる明るさを差し引き、図6(a)に示される異物F以外の部分の明るさを0とした異物領域画像PF2を取得する。すなわち、異物領域画像PF2は、明るさを0となる部分(黒で示される部分)を背景として、異物Fに対応する領域が周囲に比べて明るくなるように示された画像である。取得部22は、図6(b)に示されるように、異物領域画像PF2の異物Fに対応する領域を膨張させた、仮想異物画像PF3を生成する。
取得部22は、上記の良品透過画像PA1に、仮想異物画像PF3を合成させることによって、合成透過画像P13を生成する。このとき、取得部22は、異物透過画像PF1において背景に対応する部分(領域)に対する異物Fに対応する部分(領域)の明るさの変化である第一変化量と、異物Fを含んだ物品AにX線を透過させることで得られる透過画像P11において物品Aに対応する部分に対する異物Fに対応する部分の明るさの変化である第二変化量と、を取得する。取得部22は、上記の第一変化量と第二変化量とに基づいて、合成透過画像P13を構成するそれぞれの画素の明るさを補正する。
より詳細には、以下の計算式により算出される合成画像の明るさに基づいて、合成透過画像P13を構成するそれぞれの画素の明るさを補正する。


なお、調整係数とは、合成時の重みを示している。
本実施形態のX線検査装置1では、このような取得部22による合成画像の補正によって、より現実に近い合成透過画像P13を取得することができる。なお、図4では、X線の透過量が小さいほど暗く示される合成透過画像P13を例に挙げて説明したが、これに限定されず明暗が逆であってもよい。また、透過画像P11も同様に、明暗が逆であってもよい。
次に、各画像処理アルゴリズムを評価する機能について説明する。画像処理部23は、評価部24によって画像処理アルゴリズムの評価が行われる評価画像P3を生成する。具体的には、画像処理部23は、取得部22によって取得された基準透過画像P1に対し、記憶部21に記憶された画像処理アルゴリズムを用いて画像処理を施して評価画像P3を生成する処理を、記憶部21に記憶された複数の画像処理アルゴリズムのそれぞれについて行う。すなわち、図4に示されるように、画像処理部23は、複数の画像処理アルゴリズムのそれぞれによって基準透過画像P1(透過画像P11又は合成透過画像P13)が画像処理された、複数の評価画像P31,P32,…,P3nを生成する。
なお、画像処理部23は、記憶部21に記憶された全て(例えば200以上)の画像処理アルゴリズムに対する上記評価画像P3を生成してもよいし、例えば、種々の選出手法を用いて自動的に選出される一部(例えば5〜10程度)の画像処理アルゴリズムに対する評価画像P3を生成してもよい。
評価部24は、画像処理部23によって生成される評価画像P3に基づいて、それぞれの画像処理アルゴリズムに対する異物の検出精度を評価する。評価部24は、評価画像P3の異物Fに対応する部分の平均明るさ、異物Fに対応する部分の最小明るさ、及び異物F以外の物品Aに対応する部分の最大明るさに基づいて算出されるScore(得点)に基づいて、異物Fの検出精度を評価する。
詳細には、評価部24は、評価画像P3の異物Fに対応する部分(画素)が明るくなるほど、かつ異物F以外の物品Aに対応する部分(画素)が暗くなるほどScoreが高くなるように設定された計算式に基づいて算出された得点に基づいて検出精度を評価する。より詳細には、評価部24は、下記の算出式(1)により得られるScoreに基づいて、異物の検出精度を評価する。本実施形態では、評価部24は、最大のScoreとなる評価画像P3を生成した画像処理アルゴリズムを最適アルゴリズムと判定する。

AveMinRate:レベル均一度(ただし、0〜1.00)

なお、異物F部分の部平均明るさが0の場合、AveMinRate=0とする。
AveSub:平均レベル差(ただし、0〜100)
平均レベル差=(異物F部分の平均明るさ)−(異物F部分以外の最大明るさ)
MinSub:最小レベル差(ただし、0〜100)
最小レベル差=((異物F部分の最小明るさ)−(異物F部分以外の最大明るさ))×2
AveRate:平均コントラスト(ただし、0〜100)

MinRate:最小コントラスト(ただし、0〜100)
上述の算出式(1)によれば、下記に示すとおり、画像処理アルゴリズムを正しく評価することが可能なことを説明する。まず、異物Fが4箇所に含まれたサンプル品の透過画像P11(図7(a)参照)を基準透過画像P1として取得し、当該基準透過画像P1に対し、第一の画像処理アルゴリズムと、第一の画像処理アルゴリズムとは異なる第二の画像処理アルゴリズムとをそれぞれ施して、評価画像P31と評価画像P32とを生成した。評価画像P31は、画像処理アルゴリズムによる画像処理によって良好に異物Fが検出された画像であり、評価画像P32は、画像処理アルゴリズムによる画像処理によって異物Fが適切に検出することができなった画像であることが分かる。
このような評価画像P31及び評価画像P32のそれぞれを、上記の算出式(1)に基づいてScoreを算出すると、下記に示される表1の結果となる。すなわち、上記の算出式(1)によれば、良好に異物Fが検出された画像のScoreは、異物Fが適切に検出することができなった画像のScoreよりも大きくなることが分かる。
設定部25は、記憶部21に記憶された複数の画像処理アルゴリズムのうち評価部24によって選択された1つを、検査に用いる画像処理アルゴリズムとして設定(確定)する。本実施形態の設定部25は、評価部24によって算出されたScoreの点数が最も高い画像処理アルゴリズムを検査に用いる画像処理アルゴリズムとして設定する。設定部25は、複数種(例えば200〜300種)の物品Aのそれぞれについて、複数の感度レベルごとに、評価部24によって最適と評価された画像処理アルゴリズムを設定する。
次に、以上のように構成されたX線検査装置1において、物品Aについて、異物Fの種類ごと、感度レベルごとに最適な画像処理アルゴリズムを設定する手順(初期設定)を行う手順について説明する。また、ここでは、合成透過画像P13を基準透過画像P1として用いる手順について説明する。
オペレータは、初期設定画面である感度オートセットメニュー画面において、例えば、感度レベル4〜7で抽出したい異物Fの種類をセットする。次に、オペレータは、X線の出力レベル及び画像強調レベルの設定を感度オートセットによって決定した後、異物Fが含まれる可能性のある物品Aであって、異物Fが含まれない良品の物品Aを搬送部5に流して、良品透過画像PA1を取得させる。オペレータは、当該作業を繰り返して、10個の良品透過画像PA1を取得させる。
次に、オペレータは、良品透過画像PA1に、感度レベル4のときに抽出したい異物Fに対応する仮想異物画像PF3を選択する。X線検査装置1は、オペレータによって選択された仮想異物画像PF3を10個の良品透過画像PA1のそれぞれに合成して、10個の合成透過画像P13を生成する。X線検査装置1では、10個の合成透過画像P13が生成されると、自動的に又はオペレータの操作によって、10個の合成透過画像P13に対する、複数の画像処理アルゴリズムによる画像処理が開始される。画像処理アルゴリズムは、上述したとおり、記憶部21(外部記憶媒体を含む)に記憶されている。
X線検査装置1では、複数の画像処理アルゴリズムによって処理されたそれぞれの評価画像P3が生成されると、評価画像P3のそれぞれについて、異物の検出精度を評価するためのScoreが算出される。X線検査装置1は、Scoreが最も高い画像処理アルゴリズムを選出し、検査に用いられる画像処理アルゴリズムとして自動的に設定される。ここでは、ある物品Aについて、ある異物Fの感度レベル4に最適な画像処理アルゴリズムが設定される。オペレータは、同様の手順を、感度レベル5〜7についても繰り返す。
このような初期設定が行われたX線検査装置1において物品Aの検査をする場合、オペレータは、少なくとも物品Aの種類を選択さえすれば、複数の画像処理アルゴリズムの中から予め選択された画像処理アルゴリズムを用いて透過画像P11の画像処理が施され、物品Aの検査が実行される。
以上説明したように、本実施形態に係るX線検査装置1では、記憶部21に記憶された複数の画像処理アルゴリズムによって基準透過画像P1をそれぞれ処理することにより得られる評価画像P3に基づいて、それぞれの画像処理アルゴリズムに対する異物Fの検出精度が評価されるので、画像処理アルゴリズムの客観的な評価が可能となる。そして、客観的に評価された画像処理アルゴリズムの中から、検査時において画像処理する際の予め選択された画像処理アルゴリズムとして自動的に設定される。この結果、予め記憶された複数の画像処理アルゴリズムの中から最適な画像処理アルゴリズムを人の手を介さずに設定することが可能となる。
以上、本発明の実施形態について説明してきたが、本発明は必ずしも上述した実施形態に限定されるものではなく、その要旨を逸脱しない範囲で様々な変更が可能である。
上記実施形態では、一つのラインセンサからなるX線検出部7を例に挙げて説明したが、第一ラインセンサ及び第二ラインセンサの二つのラインセンサを有していてもよい。この場合、第一ラインセンサは低エネルギー帯のX線を検出し、第二ラインセンサは、低エネルギー帯よりも高いエネルギー帯のX線を検出する、いわゆるデュアルエナジーセンサであってもよい。この場合も、第一ラインセンサ及び第二ラインセンサの検出により生成される透過画像に対し、それぞれ適切な画像処理アルゴリズムが施される。したがって、初期設定においても、物品Aについて、異物Fの種類ごと、感度レベルごとに、第一ラインセンサ及び第二ラインセンサのそれぞれに対する最適な画像処理アルゴリズムが設定される。
上記実施形態では、物品Aについて、異物Fの種類ごと、感度レベルごとに最適なアルゴリズムを一つ設定する例を挙げて説明したが、二つ以上が選択され、予め選択された画像処理アルゴリズムとして設定されてもよい。
上記実施形態では、取得部22は、合成透過画像P13の生成方法の例として、物品Aに電磁波を透過させることで得られる透過画像(良品透過画像PA1)に、異物透過画像PFを合成することにより生成される例を挙げて説明したがこれに限定されない。例えば、良品透過画像PA1を構成する画素の少なくとも一部の画素値を、電磁波の吸収特性等に基づいて決定される所定の画素値に基づいて変更する処理を行ってもよい。このような処理は、コンピュータプログラムによって処理されてもよい。
また、上記実施形態では、検査装置がX線検査装置1である形態を一例に説明した。しかし、本開示に係る検査装置は、X線検査装置1に限定されず、電磁波を利用して物品Aの異物検査を行う装置であればよい。ここで、電磁波とは、X線、近赤外線、光、その他の電磁波である。また、物品Aの種類は特に限定されず、様々な物品Aを検査対象とすることができる。同様に、異物の種類は特に限定されず、様々な異物を検査対象とすることができる。
1…X線検査装置、5…搬送部、6…X線照射部、7…X線検出部、8…表示操作部、20…制御部、21…記憶部、22…取得部、23…画像処理部、24…評価部、25…設定部、28…異物判定部、P1…基準透過画像、P11…透過画像、P13…合成透過画像、P2…処理画像、P3…評価画像、PA1…良品透過画像、PF,PF1…異物透過画像、PF3…仮想異物画像。

Claims (6)

  1. 物品に電磁波を透過させることで得られる透過画像に対して、複数の画像処理アルゴリズムの中から予め選択された画像処理アルゴリズムを用いて画像処理し、その画像処理結果に基づいて前記物品に含まれる異物の有無を検査する検査装置であって、
    複数の前記画像処理アルゴリズムを記憶する記憶部と、
    異物を付与した前記物品に電磁波を透過させることで得られる透過画像、又は前記物品に電磁波を透過させることで得られる透過画像に仮想的に前記異物を合成することにより生成される合成透過画像を、基準透過画像として取得する取得部と、
    前記記憶部に記憶された複数の前記画像処理アルゴリズムによって前記基準透過画像をそれぞれ処理することにより得られる評価画像に基づいて、それぞれの前記画像処理アルゴリズムに対する前記異物の検出精度を評価する評価部と、
    前記評価部における評価に基づいて、前記画像処理アルゴリズムの少なくとも1つを、前記予め選択された画像処理アルゴリズムとして設定する設定部と、を備える、検査装置。
  2. 前記合成透過画像は、前記物品に電磁波を透過させることで得られる透過画像の少なくとも一部に、前記異物に電磁波を透過させることで得られる透過画像を合成することにより生成される、請求項1記載の検査装置。
  3. 前記評価部は、前記評価画像の前記異物に対応する部分の平均明るさ、前記異物に対応する部分の最小明るさ、及び前記異物以外の前記物品に対応する部分の最大明るさに基づいて算出される得点に基づいて前記検出精度を評価する、請求項1又は2記載の検査装置。
  4. 前記画像処理アルゴリズムによる前記基準透過画像の処理の結果、前記電磁波の透過量が大きいほど暗く示され、前記透過量が小さいほど明るく示される前記評価画像が得られる場合、
    前記評価部は、前記評価画像の前記異物に対応する部分が明るくなるほど、かつ前記異物以外の前記物品に対応する部分が暗くなるほど得点が高くなるように設定された計算式に基づいて算出された前記得点に基づいて前記検出精度を評価する、請求項1〜3の何れか一項記載の検査装置。
  5. 前記取得部は、ベルトコンベヤに載置された状態で搬送される前記異物に電磁波を透過させることにより取得される透過画像に基づいて、電磁波の透過量が大きいほど暗く示され、前記透過量が小さいほど明るく示されると共に、前記透過画像から前記異物に対応する部分と前記異物の周囲の背景に対応する部分とを切り出した異物透過画像を生成し、前記異物透過画像を構成するそれぞれの画素の明るさから前記異物透過画像における明るさの最頻値となる明るさを差し引くことにより、前記背景に対応する部分の明るさを0とする仮想異物画像を生成し、前記物品に電磁波を透過させることで得られる透過画像に前記仮想異物画像を合成することによって前記合成透過画像を生成する、請求項1〜4の何れか一項記載の検査装置。
  6. 前記取得部は、
    前記異物透過画像における前記背景に対応する部分に対する前記異物に対応する部分の明るさの変化である第一変化量と、
    前記異物が含まれる前記物品に電磁波を透過させることで得られる透過画像において、前記物品に対応する部分に対する前記異物に対応する部分の第二変化量と、を取得し、
    前記取得部は、前記第一変化量と前記第二変化量とに基づいて、前記合成透過画像を構成するそれぞれの画素の明るさを補正する、請求項5記載の検査装置。
JP2019126313A 2019-07-05 2019-07-05 検査装置 Pending JP2021012098A (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2019126313A JP2021012098A (ja) 2019-07-05 2019-07-05 検査装置
US16/917,052 US20210004951A1 (en) 2019-07-05 2020-06-30 Inspection apparatus
KR1020200080856A KR102498829B1 (ko) 2019-07-05 2020-07-01 검사 장치
EP20183416.5A EP3764088B1 (en) 2019-07-05 2020-07-01 Inspection apparatus
CN202010626211.1A CN112255251B (zh) 2019-07-05 2020-07-02 检查装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019126313A JP2021012098A (ja) 2019-07-05 2019-07-05 検査装置

Publications (1)

Publication Number Publication Date
JP2021012098A true JP2021012098A (ja) 2021-02-04

Family

ID=71620144

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019126313A Pending JP2021012098A (ja) 2019-07-05 2019-07-05 検査装置

Country Status (5)

Country Link
US (1) US20210004951A1 (ja)
EP (1) EP3764088B1 (ja)
JP (1) JP2021012098A (ja)
KR (1) KR102498829B1 (ja)
CN (1) CN112255251B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113077391B (zh) * 2020-07-22 2024-01-26 同方威视技术股份有限公司 校正扫描图像的方法和装置以及图像扫描系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004028891A (ja) * 2002-06-27 2004-01-29 Anritsu Sanki System Co Ltd X線画像処理フィルタ自動設定方法,x線異物検出方法及びx線異物検出装置
WO2006001107A1 (ja) * 2004-06-24 2006-01-05 Ishida Co., Ltd. X線検査装置およびx線検査装置の画像処理手順の生成方法
JP2006261162A (ja) * 2005-03-15 2006-09-28 Hitachi High-Technologies Corp レビュー装置及びレビュー装置における検査方法
JP2009168740A (ja) * 2008-01-18 2009-07-30 Anritsu Sanki System Co Ltd X線異物検出装置
JP2011053170A (ja) * 2009-09-04 2011-03-17 Seiko Epson Corp 孔内検査方法
WO2017014194A1 (ja) * 2015-07-17 2017-01-26 株式会社イシダ 光検査システム及び画像処理アルゴリズム設定方法
US20170160426A1 (en) * 2014-09-02 2017-06-08 Tsinghua University Methods and systems for inspecting a vehicle

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5350242A (en) 1976-10-18 1978-05-08 Ransburg Japan Ltd Non rotating disk type electrostatic powder painting device
JP2006119817A (ja) * 2004-10-20 2006-05-11 Fuji Photo Film Co Ltd 画像処理装置
JP2007178407A (ja) * 2005-12-28 2007-07-12 Yamatake Corp 検査対象物の異物混入検査方法及びこれに用いる異物混入検査装置
JP4961161B2 (ja) * 2006-04-27 2012-06-27 株式会社日立ハイテクノロジーズ 検査装置
JP5051622B2 (ja) * 2008-03-31 2012-10-17 サクサ株式会社 画像処理方法及び画像処理装置
EP2806374B1 (en) * 2013-05-24 2022-07-06 Tata Consultancy Services Limited Method and system for automatic selection of one or more image processing algorithm
US10303847B2 (en) * 2016-12-09 2019-05-28 Direct Genomics Co., Ltd. Single molecule identification using intensity time sequencing, line charting and run-length coding
US11062176B2 (en) * 2017-11-30 2021-07-13 Kofax, Inc. Object detection and image cropping using a multi-detector approach

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004028891A (ja) * 2002-06-27 2004-01-29 Anritsu Sanki System Co Ltd X線画像処理フィルタ自動設定方法,x線異物検出方法及びx線異物検出装置
WO2006001107A1 (ja) * 2004-06-24 2006-01-05 Ishida Co., Ltd. X線検査装置およびx線検査装置の画像処理手順の生成方法
JP2006261162A (ja) * 2005-03-15 2006-09-28 Hitachi High-Technologies Corp レビュー装置及びレビュー装置における検査方法
JP2009168740A (ja) * 2008-01-18 2009-07-30 Anritsu Sanki System Co Ltd X線異物検出装置
JP2011053170A (ja) * 2009-09-04 2011-03-17 Seiko Epson Corp 孔内検査方法
US20170160426A1 (en) * 2014-09-02 2017-06-08 Tsinghua University Methods and systems for inspecting a vehicle
WO2017014194A1 (ja) * 2015-07-17 2017-01-26 株式会社イシダ 光検査システム及び画像処理アルゴリズム設定方法

Also Published As

Publication number Publication date
CN112255251A (zh) 2021-01-22
EP3764088B1 (en) 2023-08-30
US20210004951A1 (en) 2021-01-07
KR20210004858A (ko) 2021-01-13
EP3764088A3 (en) 2021-03-03
KR102498829B1 (ko) 2023-02-09
CN112255251B (zh) 2024-07-30
EP3764088A2 (en) 2021-01-13

Similar Documents

Publication Publication Date Title
CN112255250B (zh) 图像生成装置、检查装置及学习装置
JP4317566B2 (ja) X線検査装置およびx線検査装置の画像処理手順の生成方法
JP2019164156A (ja) 検査装置
WO2020071162A1 (ja) 教師データ生成装置及び教師データ生成プログラム
KR102387529B1 (ko) 검사 장치
AU2017376794B2 (en) Dual-energy microfocus radiographic imaging system and method for poultry and meat inspection
JP2023082280A (ja) X線検査装置、x線検査システム、及びx線検査方法
US20230284991A1 (en) X-ray inspection apparatus and adjustment method thereof
JP6979672B2 (ja) X線検査装置
KR102498829B1 (ko) 검사 장치
JP2015137858A (ja) 検査装置
JPWO2019235022A1 (ja) 検査装置
JP7250330B2 (ja) 検査装置及び学習装置
JP7393793B2 (ja) X線検査装置
US20230243764A1 (en) X-ray inspection device
JP6757970B2 (ja) 光検査装置及び光検査方法
WO2020189087A1 (ja) X線検査装置
JP2022049924A (ja) 検査装置
JP2023114827A (ja) 検査装置、学習モデル生成方法および検査方法
JP2021148645A (ja) X線検査装置
JP2024054011A (ja) 検査装置
JP2021149653A (ja) 画像処理装置及び画像処理システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220608

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230324

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230601

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230620