JP6939641B2 - 画像検査装置および画像検査方法 - Google Patents

画像検査装置および画像検査方法 Download PDF

Info

Publication number
JP6939641B2
JP6939641B2 JP2018030931A JP2018030931A JP6939641B2 JP 6939641 B2 JP6939641 B2 JP 6939641B2 JP 2018030931 A JP2018030931 A JP 2018030931A JP 2018030931 A JP2018030931 A JP 2018030931A JP 6939641 B2 JP6939641 B2 JP 6939641B2
Authority
JP
Japan
Prior art keywords
light emitting
unit
lighting
illumination
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018030931A
Other languages
English (en)
Other versions
JP2019144203A (ja
Inventor
加藤 豊
豊 加藤
伸悟 稲積
伸悟 稲積
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Priority to JP2018030931A priority Critical patent/JP6939641B2/ja
Priority to CN201910031584.1A priority patent/CN110186928B/zh
Priority to US16/247,598 priority patent/US11619591B2/en
Priority to EP19151861.2A priority patent/EP3531116B1/en
Publication of JP2019144203A publication Critical patent/JP2019144203A/ja
Application granted granted Critical
Publication of JP6939641B2 publication Critical patent/JP6939641B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2513Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2518Projection by scanning of the object
    • G01B11/2527Projection by scanning of the object with phase change by in-plane movement of the patern
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/47Scattering, i.e. diffuse reflection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/47Scattering, i.e. diffuse reflection
    • G01N2021/4704Angular selective
    • G01N2021/4711Multiangle measurement
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Description

本技術は、撮影画像を用いて対象物を検査する画像検査装置および画像検査方法に関する。
FA(Factory Automation)分野などにおいては、対象物を照明しながら撮影し、得られた撮影画像を用いて対象物の外観を検査することが知られている。
たとえば、特開2017−62120号公報(特許文献1)は、面光源と、面光源と検査対象との間に配置された、レンズ、遮光マスクおよびフィルタとを備えた照明装置を用いる検査システムを開示している。このシステムでは、レンズ、遮光マスクおよびフィルタにより、検査対象の各点に照射される検査光の照射立体角が略均一に形成される。これにより、視野全体を均一に照射することができ、対象物の検査精度が向上する。
特開2017−62120号公報
特開2017−62120号公報は、検査光の照射立体角を均一に制御するための構成を開示するものの、その検査光を用いた検査方法、およびその検査方法を実行するための装置の構成を開示していない。
本発明は、発光位置および光の照射角度を制御することによって対象物の検査を行うことが可能な画像検査装置および画像検査方法を提供することを目的とする。
本開示の一例によれば、画像検査装置は、対象物を撮影する撮像部と、対象物と撮像部との間に配置されて、対象物に向けて光を照射する発光面を有し、発光面における発光位置および光の照射方向を制御可能に構成された、透光性の照明部と、撮像部および照明部を制御するように構成された制御部とを備える。制御部は、照明部に発光位置および照射方向を変化させるとともに、撮像部に対象物を撮像させて、対象物の画像から、対象物の表面の測定点が照明されるときの照明部の発光位置および照射方向を特定し、特定された発光位置、および特定された照射方向に基づいて、測定点までの距離を算出する。
この開示によれば、制御部によって、照明部が、その発光位置および光の照射角度を制御することができる。これにより、発光位置および光の照射角度を制御することによって対象物の検査を行うことが可能な画像検査装置を提供することができる。光を反射させる対象物の表面は、たとえば鏡面である。その鏡面の形状を限定することなく、測定点までの距離を算出することができる。
上述の開示において、撮像部は、照明部が発光位置を変化させながら対象物を照明する際に、対象物を複数回撮像して、複数の第1の撮影画像を作成する。撮像部は、照明部が照射方向を変化させながら対象物を照明する際に、対象物を複数回撮像して、複数の第2の撮影画像を作成する。制御部は、複数の第1の撮影画像から、対象物の測定点を照明するための発光位置に関する情報を有する第1のデータ配列を作成する。制御部は、複数の第2の撮影画像から、対象物の測定点を照明するための照射方向に関する情報を有する第2のデータ配列を作成する。制御部は、第1のデータ配列に含まれる発光位置の情報、および、第2のデータ配列に含まれる照射方向の情報から、距離を算出する。
この開示によれば、制御部は、第1のデータ配列および第2のデータ配列を作成することによって、測定点までの距離を算出することができる。
上述の開示において、照明部は、マトリクス状に配置された複数の照明要素を含む。複数の照明要素の各々は、マトリクス状に配列され、選択的に発光可能に構成された複数の発光部と、複数の発光部の各々から発せられる光の照射方向を、各複数の発光部の位置に対応した方向に制御するように構成された光学系とを含む。制御部は、照明部の複数の照明要素の各々の点灯および消灯を制御することによって、縞パターンの光を対象物に照射させ、縞パターンの位相、縞パターンの縞の周期、および縞の向きのいずれかを変化させることによって発光位置を変化させる。制御部は、照明部の複数の照明要素の各々の複数の発光部の点灯および消灯を制御することによって、照射方向を変化させる。
この開示によれば、制御部は、照明部の複数の照明要素の各々、および、各照明要素に含まれる複数の発光部の各々を制御することによって、照明部の発光位置および光の照射方向を制御することができる。発光させるべき発光部は、視野の場所に応じて選択可能である。したがって、視野の場所ごとに照射立体角を任意に設定可能な画像検査装置を実現できる。さらに、照射立体角を任意に変更することができるので、たとえばスリットあるいはハーフミラーといった光学部品を不要とすることができる。したがって照明装置を小型化することができる。この結果、視野の場所ごとに照射立体角を設定可能であるとともに、小型化が可能な画像検査装置を実現できる。
上述の開示において、光学系は、複数の発光部にそれぞれ対向して設けられた複数のマイクロレンズを含む。
この開示によれば、小型化が可能な画像検査装置を実現できる。
上述の開示において、複数のマイクロレンズのうちの少なくとも一部のマイクロレンズの光軸が、少なくとも一部のマイクロレンズに対向する発光部の光軸とずれるように、複数のマイクロレンズが配置されている。
この開示によれば、シンプルな構成により、光の照射方向を制御することができる。
上述の開示において、前記複数の照明要素のうちの少なくとも1つの照明要素において、前記少なくとも一部のマイクロレンズが、前記発光部のピッチよりも小さいピッチで配置されている。
この開示によれば、シンプルな構成により、光の照射方向を制御することができる。
上述の開示において、複数のマイクロレンズのうちの少なくとも一部のマイクロレンズの光軸が、少なくとも一部のマイクロレンズに対向する発光部の光軸に対して傾けられるように、複数のマイクロレンズが配置されている。
この開示によれば、シンプルな構成により、光の照射方向を制御することができる。
上述の開示において、照明部は、複数の発光部から出射される光のうち複数のマイクロレンズのそれぞれの周囲から漏れる光を遮るように構成された遮光部をさらに含む。
この開示によれば、発光部からの光が意図しない方向に漏れる可能性を低減することができる。
本開示の一例によれば、画像検査方法は、対象物を撮影する撮像部と、対象物と撮像部との間に配置されて、対象物に向けて光を照射する発光面を有し、発光面における発光位置および光の照射方向を制御可能に構成された、透光性の照明部と、撮像部および前記照明部を制御するように構成された制御部とを備えた画像検査装置による画像検査方法である。画像検査方法は、照明部が発光位置および照射方向を変化させるとともに、撮像部が対象物を撮像するステップと、撮像するステップによって取得された対象物の画像から、対象物の表面の測定点が照明されるときの照明部の発光位置および照射方向を特定するステップと、特定された発光位置、および特定された照射方向に基づいて、測定点までの距離を算出するステップとを備える。
この開示によれば、照明部が、その発光位置および光の照射角度を制御することができる。これにより、発光位置および光の照射角度を制御することによって対象物の検査を行うことが可能な画像検査方法を提供することができる。
上述の開示において、撮像するステップは、照明部が発光位置を変化させながら対象物を照明する際に、対象物を複数回撮像して、複数の第1の撮影画像を作成するステップと、照明部が照射方向を変化させながら対象物を照明する際に、対象物を複数回撮像して、複数の第2の撮影画像を作成するステップとを含む。発光位置および照射方向を特定するステップは、複数の第1の撮影画像から、対象物の測定点を照明するための発光位置に関する情報を有する第1のデータ配列を作成するステップと、複数の第2の撮影画像から、対象物の測定点を照明するための照射方向に関する情報を有する第2のデータ配列を作成するステップとを含む。算出するステップは、第1のデータ配列に含まれる発光位置の情報、および、第2のデータ配列に含まれる照射方向の情報から、距離を算出するステップを含む。
この開示によれば、第1のデータ配列および第2のデータ配列を作成することによって、測定点までの距離を算出することができる。
上述の開示において、照明部は、マトリクス状に配置された複数の照明要素を含む。複数の照明要素の各々は、マトリクス状に配列され、選択的に発光可能に構成された複数の発光部と、複数の発光部の各々から発せられる光の前記照射方向を、各前記複数の発光部の位置に対応した方向に制御するように構成された光学系とを含む。照明部が発光位置および照射方向を変化させるステップは、照明部の複数の照明要素の各々の点灯および消灯を制御することによって、縞パターンの光を対象物に照射させて、縞パターンの位相、縞パターンの縞の周期、および縞の向きのいずれかを変化させることによって発光位置を変化させるステップと、照明部の複数の照明要素の各々の複数の発光部の点灯および消灯を制御することによって、照射方向を変化させるステップとを含む。
この開示によれば、制御部は、照明部の複数の照明要素の各々、および、各照明要素に含まれる複数の発光部の各々を制御することによって、照明部の発光位置および光の照射方向を制御することができる。
本発明によれば、発光位置および光の照射角度を制御することによって対象物の検査を行うことが可能な画像検査装置および画像検査方法を提供することができる。
本実施の形態に係る画像検査装置を模式的に示す図である。 図1に示した制御装置による処理を説明するための模式図である。 本実施の形態に係る画像検査装置が適用される生産ラインの一例を示す模式図である。 画像検査装置に含まれる照明装置の構成を模式的に示した図である。 本実施の形態に係る照明装置の一例の一部断面を示す模式図である。 本実施の形態に係る照明装置の一部を拡大した模式平面図である。 照明装置の構成要素である照明要素の構造の一例を模式的に示した平面図である。 レンズの周囲から漏れる光の対策のための構成を示す模式平面図である。 図8に示された構成の模式断面図である。 図8に示された構成の1つの変形例を示した模式平面図である。 図8に示された構成の別の変形例を示した模式断面図である。 照明要素位置画像を取得するためのパターン照明を説明するための図である。 図12に示したパターン照明の一例を示した図である。 図13に示したパターン照明を変化させたパターン照明の例を示した図である。 照明要素位置画像を取得するためのパターン照明のバリエーションの一例を示した図である。 照明要素位置画像を取得するためのパターン照明のバリエーションの他の例を示した図である。 照明要素位置画像を取得するためのパターン照明の一例を説明するための図である。 図17に示したパターン照明を変化させたパターン照明の例を示した図である。 図17に示したパターン照明を変化させたパターン照明の他の例を示した図である。 本開示に係る検査方法に含まれる距離算出方法を示したフローチャートである。 この開示に係る距離算出方法の原理を説明するための上面図である。 図21のXXII−XXII線に沿った模式断面図である。 変形例1に係る照明装置の一部断面を示す模式図である。 変形例2に係る照明装置の一部断面を示す模式図である。 変形例3に係る照明装置の一部断面を示す模式図である。
本発明の実施の形態について、図面を参照しながら詳細に説明する。なお、図中の同一または相当部分については、同一符号を付してその説明は繰返さない。
<A.適用例>
まず、図1を参照して、本発明が適用される場面の一例について説明する。図1は、本実施の形態に係る画像検査装置1を模式的に示す図である。
本実施の形態に係る画像検査装置1は、工業製品の生産ラインなどにおいて、対象物(以下、「ワークW」とも称す。)を照明しながら撮影し、得られた撮影画像を用いてワークWの外観検査(傷、汚れ、異物などの検査)を行う装置に適用される。画像検査装置1は、ワークWによって反射された光を検出することで検査するものである。そのため、ワークWには、光を反射する表面を有するものが適用可能である。
一例としてワークWは、光を正反射させる表面を有する。このような表面は、たとえば鏡面、あるいはガラスの表面である。なお、ワークWの表面全体が光を正反射させるものであると限定する必要はない。光が照射される部分のみがその光を正反射させるのでもよい。また、本実施形態が適用可能であれば、ワークWの材質は限定されるものではない。ワークWの表面での反射光は、その一部に拡散反射成分を含んでもよく、正反射成分が拡散反射成分に対して十分大きければよい。
画像検査装置1は、撮像部の一例であるカメラ10と、照明部の一例である照明装置20と、カメラ10と照明装置20とを制御するように構成された制御部の一例である制御装置100とを備える。
カメラ10は、対象物であるワークWを撮影して、ワークWの撮影画像を作成するものである。
照明装置20は、カメラ10とワークWとの間に配置されており、ワークWに向けて光を照射する発光面を有する。照明装置20は、その発光面における発光位置および光の照射方向を制御可能に構成される。
さらに照明装置20は透光性を有している。カメラ10は、ワークWを照明装置20越しに撮影する。照明装置20は、カメラ10が照明装置20を通してワークWを撮像することが出来る程度の透光性を有していればよい。
照明装置20は、制御装置100からの指示に従って、光の照射方向および照明パターンを変更することができる。この際に、カメラ10はワークWを複数回撮像する。これによりカメラ10は、複数枚の撮影画像を取得する。
照明装置20は、1回目の照明において、照明パターンを変化させながらワークWに光を照射する。このとき、カメラ10は照明パターンの変化に応じてワークWを撮像する。これにより複数の撮影画像3が作成される。制御装置100は、複数の撮影画像3を取得する(1回目の画像取得)。
照明装置20は、2回目の照明において、照明パターンを変化させながらワークWに光を照射する。なお、1回目の照明と2回目の照明とでは照明パターン、およびその変化が異なる。カメラ10は照明パターンの変化に応じてワークWを撮像する。これにより複数の撮影画像5が作成される。制御装置100は、複数の撮影画像5を取得する(2回目の画像取得)。
制御装置100は、撮像されたワークWの画像(複数の撮影画像3および複数の撮影画像5)から、ワークWの表面の測定点が照明されるときの照明装置20の発光位置、および、光の照射方向(照明方向)を特定する。「測定点」とは、発光面からの距離を測定すべきワークWの表面上の位置である。制御装置100は、特定された発光位置、および、照明方向に基づいて、照明装置20の発光面から測定点までの距離を算出する。
図2は、図1に示した制御装置による処理を説明するための模式図である。図2に示すように、制御装置100は、複数の撮影画像からデータ配列を作成する。以下に説明する例においては、データ配列は、二次元配列であり、画像の形態をなす。複数の撮影画像の各々は、二次元に配置された複数の画素を有する。したがって、画素位置ごとに、撮影画像の数と同数の画素が得られる。制御装置100は、それら複数の画素から、1つの画素を選択して二次元データ配列である画像を作成する。ただし本実施の形態において、データ配列は、連続的に配列された測定点により構成されるものと限定されない。データ配列は、離散的あるいは局所的に配列された測定点により構成されてもよい。
制御装置100は、照明発光位置特定処理、および、照明ビーム方向特定処理を実行する。照明発光位置特定処理において、制御装置100は、複数の撮影画像3から、ワークWの測定点の照明に最も寄与した照明要素の位置(発光位置)に関する情報を有する画像(照明要素位置画像4)を作成する。画素位置(x,y)に位置する画素PX1は、複数の撮影画像3の各々の同一の画素位置(x,y)にある画素から選択された画素である。画素PX1は、発光位置に関する情報を画素値として有する。
照明ビーム方向特定処理において、制御装置100は、複数の撮影画像5から、ワークWの測定点の照明に最も寄与した照明方向に関する情報を有する画像(照明方向画像6)を作成する。画素位置(x,y)に位置する画素PX2は、複数の撮影画像5の各々の同一の画素位置(x,y)にある画素から選択された画素である。画素PX2は、照明方向に関する情報を画素値として有する。照明方向画像6の中の画素PX2の位置(x,y)は、照明要素位置画像4内の画素PX1の中の画素位置(x,y)と同じである。
制御装置100は、照明要素位置画像4および照明方向画像6に基づいて、照明装置20からワークWまでの距離を画素ごとに算出する。具体的には、制御装置100は、照明要素位置画像4の画素PX1に含まれる照明位置の情報、照明方向画像6の画素PX2に含まれる照明方向の情報に基づいて、照明装置20の発光面から、ワークWの表面の位置(測定点)までの距離を算出する。制御装置100は、その算出した距離を画素値として有する画素PXを含む距離画像7を作成する。
このように、照明装置20からワークWの表面までの距離を算出するために、照明要素位置画像4の画素PX1が有する情報と、照明方向画像6において画素PX1と同一の位置にある画素PX2に含まれる情報とを用いる。照明装置20から発せられる光の照射方向(照明方向)、および照明装置20における発光の位置は制御可能である。したがって制御装置100は、発光位置および照明方向に関する情報を有することができる。
さらに、カメラ10の光軸11から照明装置20の発光位置までの距離は既知である。カメラ10の光軸11から照明装置20の発光位置までの距離を求めるためには、カメラ10の光軸11と照明装置20の発光面との交点の位置が必要である。交点の位置は、カメラ10の光軸11と照明装置20との間の位置合わせにより、予め決定される。したがって光の照射角度を制御することによって対象物の検査を行うことが可能な画像検査装置および画像検査方法を提供することができる。
<B.画像検査装置が適用される生産ラインの一例>
次に、図3を参照しながら、画像検査装置1が適用される生産ラインの一例を説明する。図3は、本実施の形態に係る画像検査装置1が適用される生産ラインの一例を示す模式図である。画像検査装置1は、工業製品の生産ラインなどにおいて、制御装置100の制御によって照明装置20でワークWを照明しながらカメラ10で撮影し、得られた撮影画像を用いてワークWの外観検査を行う。具体的には、検査対象となるワークWは、移動可能なステージ300によって、カメラ10および照明装置20が固定された検査位置まで移動する。ワークWは、検査位置まで移動すると、画像検査装置1による外観検査が終了するまでその場で停止する。このとき、制御装置100は、照明装置20によってワークWを照明しながらカメラ10でワークWを撮影し、撮影画像をモニタに表示する。これにより、作業者は、モニタ画面に表示された撮影画像の色を見ながらワークWの外観を検査する。もしくは、制御装置100は、撮影画像に対して所定の画像処理を行ない、画像処理結果に基づいてワークWの異常判定を行なってもよい。
制御装置100は、たとえば、CPU(Central Processing Unit)やMPU(Micro-Processing Unit)などのプロセッサと、RAM(Random Access Memory)と、表示コントローラと、システムコントローラと、I/O(Input Output)コントローラと、ハードディスクと、カメラインターフェイスと、入力インターフェイスと、発光インターフェイスと、通信インターフェイスと、メモリカードインターフェイスとを含む。これらの各部は、システムコントローラを中心として、互いにデータ通信可能に接続される。
<C.照明装置の構成の一例>
図4は、画像検査装置1に含まれる照明装置の構成を模式的に示した図である。照明装置20は、ワークWとカメラ10との間に配置され、ワークWに向けて光を照射するとともに、透光性を有している。そのため、照明装置20から放射された光は、ワークWで反射し、照明装置20を透過して、カメラ10に到達する。
照明装置20は、面光源30と、光学系の一例であるマイクロレンズアレイ40とを含む。面光源30は、ワークW側の発光面35からワークWに向けて光を放射する。面光源30の発光面35のうち、マトリクス状に配置された複数の発光領域から光が放射される。ワークWからの反射光は、面光源30のうち発光領域以外の透光領域を透過する。
各発光領域は、発光部31を含む。一例では、発光部31は、有機エレクトロルミネッセンス(以下、有機ELと呼ぶ)により構成された部材を含む。複数の発光部31は、選択的に発光可能に構成されている。発光すべき発光部31は、制御装置100(図1を参照)によって選択される。一例として面光源30は、有機ELを用いた光源である。しかし、透過性を有する照明装置であって、マトリクス状に配列され選択的に発光可能に構成された複数の発光部を有する照明装置であれば、この実施の形態に適用可能である。すなわち本実施の形態に適用可能な照明装置20は、有機ELを用いた光源に限定されるものではない。
マイクロレンズアレイ40は、面光源30の発光面35に対向して配置される。マイクロレンズアレイ40は、複数の発光部31にそれぞれ対向して設けられた複数のレンズ41を含む。一例では、レンズ41は凸レンズである。レンズ41は、対応する発光部31から発せられる光を所望の方向に導くように構成される。すなわち、マイクロレンズアレイ40は、複数の発光部31の各々の照明方向を、各発光部31の位置に対応した方向に制御するように構成されている。
複数の発光部31の中から発光させるべき発光部を選択することによって、照射立体角を任意に変更することができる。発光させるべき発光部は、視野の場所に応じて選択される。したがって、視野の場所ごとに照射立体角を任意に設定可能な画像検査装置1を実現できる。さらに、照射立体角を任意に変更することができるので、たとえばスリットあるいはハーフミラーといった光学部品を不要とすることができる。したがって照明装置20を小型化することができる。したがって、視野の場所ごとに照射立体角を設定可能であるとともに、小型化が可能な画像検査装置1を実現できる。
図5および図6を参照して、本実施の形態に係る照明装置の構成の一例を説明する。図5は、本実施の形態に係る照明装置の一例の一部断面を示す模式図である。図6は、本実施の形態に係る照明装置の一部を拡大した模式平面図である。
照明装置20は、透過型のシート照明装置であり、面光源30とマイクロレンズアレイ40とを含む。面光源30は、有機ELを用いた光源である。面光源30は、発光面35に沿ってマトリクス状に配列された複数の発光部を含む。図5には、発光部31A〜31Eが代表的に示されている。
各々の発光部31A〜31Eは、対向する一対の電極(図示せず)を有する。一対の電極間に電圧が印加されることにより、これらの発光部は発光する。複数の電極対の中から電圧が印加されるべき電極対を選択することによって、発光すべき発光部を選択することができる。発光部31A〜31Eの各々が発する光の色は限定されない。たとえば複数の発光部31は同色の光を発するのでもよい。あるいは、赤色光を発する発光部と、緑色光を発する発光部と、青色光を発する発光部とを組み合わせることにより、光の色を異ならせることができる発光部を実現することができる。
マイクロレンズアレイ40は、複数の発光部31にそれぞれ対向して配置された複数のマイクロレンズである、複数のレンズ41を含む。複数のレンズ41は、発光面35に沿ってマトリクス状に配置される。図5には、発光部31A〜31Eにそれぞれ対向するレンズ41A〜41Eが代表的に示されている。一例ではレンズ41A〜41Eの各々は、平凸レンズである。平凸レンズの平面は発光面35に向けられている。たとえば平凸レンズは半球レンズであってもよい。
各々のレンズは、対応する発光部から発せられる光の照射方向を制御するためのものである。一実施形態では、レンズ41A〜41Eの間では、発光部の光軸に対するレンズの光軸の相対的な位置が異なっている。発光部の光軸に対するレンズの光軸のずれの方向およびずれ量に従って、レンズから出射される光の方向が決定される。なお、この実施の形態において、発光部の光軸とは、発光領域の中心点を通り発光領域に対して垂直な軸を意味し、レンズの光軸とは、レンズの中心を通り、レンズの主面に対して垂直な軸を意味する。「ずれ量」とは、発光部の光軸に対するレンズの光軸のずれの大きさを意味する。
発光部31Cの光軸32Cと、レンズ41Cの光軸42Cとは実質的に一致している。発光部31Aの光軸32Aに対して、レンズ41Aの光軸42Aは、紙面右方向(+X方向)にずれている。同様に、発光部31Bの光軸32Bに対して、レンズ41Bの光軸42Bも+X方向にずれている。発光部31Aおよびレンズ41Aの対のほうが、発光部31Bおよびレンズ41Bの対よりも、ずれ量が大きい。
一方、発光部31Dの光軸32Dに対して、レンズ41Dの光軸42Dは、紙面左方向(−X方向)にずれている。同様に、発光部31Eの光軸32Eに対して、レンズ41Eの光軸42Eも−X方向にずれている。発光部31Eおよびレンズ41Eの対のほうが、発光部31Dおよびレンズ41Dの対よりも、ずれ量が大きい。
図5から理解されるように、図5に示す発光部31A〜発光部31Eのいずれかを選択的に発光させることにより、照射立体角を異ならせることができる。照射立体角を異ならせることが可能であるので、照明装置20の照明のパターンの制約が小さくなる。言い換えると、任意のパターンに従う照明を照明装置20によって実現することができる。
図6に示すように、照明装置20は、マトリクス状に配置された複数の照明要素21を含む。すなわち照明装置20は、複数の照明要素21に区画される。各々の照明要素21は、複数の発光部31および複数のレンズ41を含む。たとえば各々の照明要素21は、図5に示す発光部31A〜発光部31Eおよびレンズ41A〜41Eを含むことができる。図示の都合上、図6では、各々の照明要素21に含まれる1つの発光部31および、対応する1つのレンズ41が示される。
各々の照明要素21は、発光領域と透明領域とを含む。発光領域を発光させることによって照明要素21全体を発光させることができる。一方、各照明要素21は、透明領域を備えることによって、透光性を有する。
照明装置20は、複数の照明要素21を互いに独立に点灯させることができる。複数の照明要素21のうち、発光されるべき発光部31を含む照明要素21(すなわち、点灯させるべき照明要素21)によって、照明装置20による照明パターンが決定される。各照明要素21から照射される光の波長を変えることができる照明装置20においては、照明パターンは、複数の照明要素21のうちの点灯させる照明要素21と、点灯させる各照明要素21から照射させる光の波長とによって決定されてもよい。
図7は、照明装置20の構成要素である照明要素の構造の一例を模式的に示した平面図である。図7では、撮像部側(照明装置20の上方)からの照明要素の平面視図が示されている。
照明要素21は、マトリクス状に配置された複数のセル22を含む。以下の説明では「行」はX方向を意味し、「列」はY方向を意味する。図5では、5行5列(=5×5)に配置された25個のセル22からなる照明要素21が示されている。しかし、照明要素21を構成するセル22の個数は特に限定されない。たとえば照明要素21は、11行11列(=11×11)に配置された121個のセル22によって構成されてもよい。セル22の個数が多いほど、照明要素21の照明方向の分解能を向上させることができる一方で発光位置の分解能が低下する。照明要素21を構成するセル22の個数は、照明方向の分解能と発光位置の分解能とから決定することができる。
各々のセル22は、発光部31と、レンズ41と、透明領域24とを含む。発光部31の発光面は、セル22において発光領域を構成する。
複数の発光部31は、第1のピッチP1でX方向およびY方向に配置される。複数のレンズ41は、第2のピッチP2でX方向およびY方向に配置される。第2のピッチP2が第1のピッチP1よりも小さい(P2<P1)ので、X方向(行方向)に沿って並べられた複数のセル22について、発光部31の光軸32とレンズ41の光軸42との間のX方向のずれ量が、公差(P1−P2)の等差数列に従う。同様に、Y方向(列方向)に沿って並べられた複数のセル22について、発光部31の光軸32とレンズ41の光軸42との間のY方向のずれ量が公差(P1−P2)の等差数列に従う。
複数の発光部31および複数のレンズ41は、X軸およびY軸の両方に対して対称に配置される。このことを説明するために、図7に対称軸25,26が示される。対称軸25は、複数の発光部31および複数のレンズ41が、X軸に対して対称に配置されることを示すための軸であり、Y方向に平行である。対称軸26は、複数の発光部31および複数のレンズ41が、Y軸に対して対称に配置されることを示すための軸であり、X方向に平行である。
図7において、セル22Cは、照明要素21の中心に位置するセルである。セル22Cは、発光部31Cとレンズ41Cとを含む。発光部31Cの光軸32Cとレンズ41Cの光軸42Cとは平面視において重なる。すなわち、光軸32Cと光軸42Cとの間では、X方向のずれ量およびY方向のずれ量は、ともに0である。なお、光軸32C,42Cは、対称軸25,26の交点に位置する。
照明要素21内の各セルにおいて、発光部31の光軸32とレンズ41の光軸42との間のX方向のずれ量およびY方向のずれ量は、そのセルと、中央のセル22Cとの間のX方向の距離およびY方向の距離に従って決定される。これにより、セル22ごとに光の照射方向を異ならせることができる。照明要素21は、複数の方向からワークに光を照射することができる。さらに、複数のセルのうち、点灯させるセルを選択することによって、照明要素21からの光の照射方向を制御することができる。
図7に示した構造では、X方向とY方向とで発光部31のピッチおよびレンズ41のピッチが同じである。しかしながら、X方向とY方向とで発光部31のピッチを異ならせてもよい。同様にX方向とY方向とでレンズ41のピッチを異ならせてもよい。
発光部31の光軸32に対するレンズ41の光軸42のずれ量(変位量)が大きい場合、発光部31から出射された光の一部がレンズ41の周囲から漏れる可能性がある。図8は、レンズ41の周囲から漏れる光の対策のための構成を示す模式平面図である。図9は、図8に示された構成の模式断面図である。図8および図9に示されるように、レンズ41の周辺を囲むように遮光部44が設けられてもよい。遮光部44は光を通さない部材、あるいは光を減衰させる部材からなる。遮光部44によって、発光部31からの光が意図しない方向に漏れる可能性を低減することができる。
図10は、図8に示された構成の1つの変形例を示した模式平面図である。図10に示された例では、図8に示された構成に比べて、遮光部44の面積が大きい。これにより、発光部31からの光が意図しない方向に漏れる可能性をさらに低減することができる。
図11は、図8に示された構成の別の変形例を示した模式断面図である。図11に示された例では、遮光部44は、図10に示した構成に加えて、レンズ41の高さ(厚み)方向に沿った十分な高さでレンズ41の周囲を囲む構成を有する。図10に示された構成によれば、レンズ41の周囲から漏れる光を低減する効果をさらに高めることができる。
<D.照明要素位置画像を取得するためのパターン照明>
図12は、照明要素位置画像を取得するためのパターン照明を説明するための図である。図13は、図12に示したパターン照明の一例を示した図である。図14は、図13に示したパターン照明を変化させたパターン照明の例を示した図である。
図12から図14を参照して、この実施の形態では、位相シフト法を用いてワークの表面が検査される。照明装置20は、ワークWに対して縞パターンの光を照射する。図13および図14において、Lは縞の周期を表す。
照明装置20は、縞パターン(明暗パターン)の光を、縞パターンの位相を変化させながらワークWに照射する。これにより、縞パターンの光をワークの表面上で走査するのと等価な状態を発生させることができる。たとえば図13および図14に示す例では、照明パターンがX方向に走査される。
照明パターンは周期的なパターンであるため、照明装置20は、位相を1周期分変化させるだけでよい。図14に示される照明パターンは、図13に示された照明パターンに対して、縞パターンの位相を180°反転させたパターンに対応する。
図15は、照明要素位置画像を取得するためのパターン照明のバリエーションの一例を示した図である。図15に示された照明パターンでは、縞の周期がnL(=n×L;nは2以上の自然数)である。すなわち、図13あるいは図14に示された照明パターンと比較すると、図15に示された照明パターンでは、縞の周期がn倍となっている。
図16は、照明要素位置画像を取得するためのパターン照明のバリエーションの他の例を示した図である。図16に示された照明パターンは、図13あるいは図14に示された照明パターンを90°回転させたパターンに相当する。したがって、図16に示された照明パターンでは、縞の間隔はnLである。
図13〜図16に示されるように、照明装置20は、複数の照明要素21のうちの発光すべき照明要素を制御することができる。したがって照明装置20は、発光位置を制御することができる。さらに、照明要素位置画像を取得する際には、発光すべき照明要素21において、すべての発光部31が発光する。したがって、この照明要素21は、いわば全ての方向から、ワークWに対して光を照射する。
<E.照明方向画像を取得するためのパターン照明>
図17は、照明要素位置画像を取得するためのパターン照明の一例を説明するための図である。図17に示すように、所定方向からワークWに光を照射するために、複数の照明要素21の各々では、特定の行(たとえば行R1)に配置された各々の発光部31が発光する。
図18および図19は、図17に示したパターン照明を変化させたパターン照明の例を示した図である。図18に示された例では、行R2に配置された各々の発光部が発光する。行R2は、行R1の隣の行である。図7および図18を参照して理解されるように、行R1と行R2とでは、発光部の光軸に対するレンズの光軸のずれの大きさが異なっている。したがって、行R2に属する発光部31から発せられる光の照射角度は、行R1に属する発光部31から発せられる光の照射角度とは異なる。
図19に示された例では、列C5に配置された各々の発光部が発光する。行R1の位置を、照明要素21の中心に対して90°回転させた位置が列C5の位置に対応する。したがって、列C5に属する発光部31の照明方向は、行R1に属する発光部31の照明方向を、照明要素21の中心に対して90°回転させた方向に相当する。
図17〜図19に示すように、照明方向画像を取得する際には、照明装置20の発光面の全体(発光可能な領域の全体)が発光する。したがって、ワークWを1つの方向から照明することができる。さらに、照明要素21の中から、発光すべき発光部が属する行あるいは列を選択することによって、照明装置20は、照明方向を制御する(変化させる)ことができる。
<F.距離の算出>
図20は、本開示に係る検査方法に含まれる距離算出方法を示したフローチャートである。図2および図20を参照することにより本開示に係る距離算出方法を以下に説明する。ステップS1において、照明発光位置特定処理が実行される。照明装置20は、基本形の縞パターン(図13を参照)でワークWを照明する。さらに照明装置20は、位相の180°変化(図14を参照)、周期Lの変化(図15を参照)、および縞パターンの90°回転(図16を参照)を組み合わせた照明バリエーションを用いてワークWを照明する。カメラ10は、パターン照明を変化させるたびにワークWを撮像する。これによりn(nは2以上の整数)枚の画像(n枚の撮影画像3)が取得される。なお、撮像画像の枚数nは、図15に示した周期Lの倍数nと同一である必要はない。これら「n」は、複数を意味するために用いられている。
ステップS2において、制御装置100は、ステップS1の処理によって得られたn枚の画像から、照明要素位置画像4を作成する。具体的には、制御装置100は、画素位置(x,y)ごとに、n枚の撮像画像の中から、輝度が最大となる画素を特定する。そして、制御装置100は、その画像が得られたときの照明要素位置を、画素の情報に含める。照明要素位置画像4内の各画素は、最も高い輝度の値を与える照明要素の位置の情報を画素値として有する。
ステップS3において、照明ビーム方向特定処理が実行される。照明装置20は、基本形の照明パターン(図17を参照)でワークWを照明する。さらに照明装置20は、位相の変化(図18を参照)および90°回転(図19を参照)を組み合わせた照明バリエーションを用いてワークWを照明する。カメラ10は、パターン照明を変化させるたびにワークWを撮像する。これによりm枚の画像が取得される。mは2以上の自然数である。
ステップS4において、制御装置100は、ステップS3の処理によって得られたm枚の画像(m枚の撮影画像5)から、照明方向画像6を作成する。ステップS2の処理と同様に、制御装置100は、画素位置(x,y)ごとに、n枚の撮像画像の中から、輝度が最大となる画素を特定する。そして、制御装置100は、その画像が得られたときの照明方向を、画素の情報に含める。照明方向画像6内の各画素は、最も高い輝度の値を与える照明方向の情報を画素値として有する。
ステップS5では、制御装置100は、d1画像(照明要素位置画像4)とd2画像(照明方向画像6)とを用いて、各座標(x,y)の画素に対応する距離Dを算出する。距離Dは、照明装置20の発光面35から、座標(x,y)の画素に対応するワークWの表面上の測定点までの距離である。
図21は、この開示に係る距離算出方法の原理を説明するための上面図である。図22は、図21のXXII−XXII線に沿った模式断面図である。図21および図22に示された測定点13は、座標(x,y)の画素に対応するワークWの表面上の位置に対応する。照明要素位置画像4における画素PX1、および照明方向画像6における画素PX2は、測定点13に対応した画素である。
距離d1は、カメラ10の光軸11から照明要素21までの距離を表す。角度θ1は、照明要素21の照明方向を表す。角度θ1は、発光面35の法線に対する光の照射方向のなす角度である。角度θ2は、レンズ15の中心点と測定点13とを結ぶ直線14がカメラの光軸11となす角度である。距離d2は、カメラ10のレンズ15の中心点から照明装置20の発光面35までの距離である。
図21および図22に示す関係から、以下の式(1)が導かれる。
d1=D×tanθ1+(d2+D)×tanθ2 (1)
式(1)を変形すると、以下の式(2)が導かれる。
D=(d1−d2×tanθ2)/(tanθ1+tanθ2) (2)
カメラ10と照明装置20とは予め位置合わせ(キャリブレーション)されるので、カメラ10と照明装置20との間の光学的な位置関係は既知である。したがって、距離d2は既知である。カメラ10の光軸11の位置が既知であるので、角度θ2も既知である。距離d1の値は、画素PX1が有する画素値として、照明要素位置画像4に含まれる。角度θ1の値は、画素PX2が有する画素値として、照明方向画像6に含まれる。したがって、制御装置100は、照明要素位置画像4および照明方向画像6に含まれる情報から、距離Dを算出することができる。
自由形状の鏡面を有するワークの三次元形状計測は一般に容易ではない。たとえば、位相シフト法のように縞パターンを投影しその歪みから形状を推定する方法が提案されている。しかし、直接取得できる情報は対象面の法線情報であり、距離情報を直接求めることはできない。積分により距離を推定する方法もあるものの、対象面の連続性が保証されない場合には大きな誤差が発生する。これに対して、この開示によれば、自由形状の鏡面を有するワークの三次元形状を直接的に計測することができる。したがって対象面の連続性が保証されない場合においても、距離を精度よく求めることができる。
なお、照明発光位置の特定において、たとえば最もシンプルな例として、各照明要素を独立に点灯させてもよい。縞パターンを用いるのは、所謂空間コード法の応用である。縞パターンを用いることによって、撮像回数を削減することができる。
また、照明発光位置の特定において、たとえば最もシンプルな例として、特定方向の照明要素を独立に点灯させてもよい。ラインパターンを用いて光を走査させるのは、撮影回数を削減するためである。他の例として、照明発光位置特定と同様に、縞パターンを用いてワークWを照明してもよい。この場合には、ラインパターンに比べて撮影回数をさらに削減できる。
また、上記の開示では、照明発光位置特定処理および照明ビーム方向特定処理の2つのステップの処理を実行することによって距離が算出される。たとえば最もシンプルな別の方法として、任意の照明要素の任意の照明方向の発光部のみを独立に点灯させて、その発光部がどの画素を明るくするのかを調べてもよい。撮影回数の制限がなければこのような方法を採用することができる。上記2つのステップの処理を実行することによって、撮像回数を削減することができる。
上記の開示では、画像に含まれる全ての画素に対して距離を算出することが可能である。しかしながら、たとえば画像内の特定の領域のみについて、距離を算出してもよい。この場合には、全画素について距離を計算する場合に比べて計算時間を短縮することができる。
<G.照明装置の構成の変形例>
図23は、変形例1に係る照明装置120の一部断面を示す模式図である。図3に示す照明装置20と比較して、照明装置120は、マイクロレンズアレイ40に替えてマイクロレンズアレイ140を備える。マイクロレンズアレイ140は、複数の発光部31にそれぞれ対向して配置された複数のマイクロレンズである、複数のレンズ141を含む。図23には、発光部31A〜31Eにそれぞれ対向するレンズ141A〜141Eが代表的に示されている。
レンズ141A〜141Eの各々は、ロッドレンズである。レンズ141A〜141Eの間では、発光部31の光軸(光軸32A〜32E)に対するレンズの光軸(光軸142A〜142E)の角度が異なっている。ロッドレンズの入射面に対する光の入射角度を異ならせることによって、ロッドレンズの出射面から出射される光の出射角度(レンズの光軸に対する角度)を異ならせることができる。したがって、照明装置120では、発光部ごとに光の出射方向を異ならせることができる。ロッドレンズを利用することにより、ワークWの形状の検査を実施可能な、ワークWと照明装置120との間の距離を大きくすることができる。
図24は、変形例2に係る照明装置220の一部断面を示す模式図である。図3に示す照明装置20と比較して、照明装置220は、マイクロレンズアレイ40に替えてマイクロレンズアレイ240を備える。マイクロレンズアレイ240は、複数の発光部31にそれぞれ対向して配置された複数のマイクロレンズである、複数のレンズ241を含む。図24には、発光部31A〜31Eにそれぞれ対向するレンズ241A〜241Eが代表的に示されている。
レンズ241A〜241Eの各々は、凹レンズである。図24に示された変形例と同様に、レンズ241A〜241Eの間では、発光部31の光軸に対するレンズの光軸の角度が異なっている。発光部の光軸(光軸32A〜32E)に対するレンズの光軸(光軸242A〜242E)の角度を異ならせることによって、凹レンズから出射される光の出射角度(レンズの光軸に対する角度)を異ならせることができる。
図25は、変形例3に係る照明装置320の一部断面を示す模式図である。図3に示す照明装置20と比較して、照明装置320は、マイクロレンズアレイ40に替えてマイクロレンズアレイ340を備える。マイクロレンズアレイ340は、複数の発光部31にそれぞれ対向して配置された複数のマイクロレンズである、複数のレンズ341を含む。図25には、発光部31A〜31Eにそれぞれ対向するレンズ341A〜341Eが代表的に示されている。
変形例3では、図3の構成におけるレンズ41A〜41Eが、レンズ341A〜341Eに置き換えられ、光軸42A〜42Eが、光軸342A〜342Eに置き換えられている。レンズ341A〜341Eの各々は凸レンズである。ただし、レンズ341A〜341Eの各々の形状は、レンズ41A〜41Eの形状とは異なる。図3に示された例と同じく、発光部の光軸(光軸32A〜32E)に対するレンズの光軸(光軸342A〜342E)の相対的な位置を異ならせることにより、発光部から発せられる光の照射方向をレンズによって制御することができる。
なお図23および図24に示された照明装置において、照明要素はマトリクス状に配置された複数のセル22を含む。複数のセル22の間では、そのセルの位置に応じて、発光部の光軸に対するレンズの光軸の傾きの角度を異ならせることができる。さらに、X軸に対するレンズの光軸の角度および、Y軸に対するレンズの光軸の角度がセルごとに異なり得る。
また、図23〜図25に示されたマイクロレンズアレイ140,240,340において、レンズの周囲に遮光部44(図8〜図11を参照)を配置してもよい。
<H.付記>
以上のように、本実施の形態は以下のような開示を含む。
(構成1)
対象物(W)を撮影する撮像部(10)と、
前記対象物(W)と前記撮像部(10)との間に配置されて、前記対象物(W)に向けて光を照射する発光面(35)を有し、前記発光面(35)における発光位置および前記光の照射方向を制御可能に構成された、透光性の照明部(20,120,220,320)と、
前記撮像部(10)および前記照明部(20,120,220,320)を制御するように構成された制御部(100)とを備え、
前記制御部(100)は、
前記照明部(20,120,220,320)に前記発光位置および前記照射方向を変化させるとともに、前記撮像部(10)に前記対象物(W)を撮像させて、前記対象物(W)の画像から、前記対象物(W)の表面の測定点(13)が照明されるときの前記照明部(20,120,220,320)の前記発光位置および前記照射方向を特定し、特定された発光位置、および特定された照射方向に基づいて、前記測定点(13)までの距離(D)を算出する、画像検査装置。
(構成2)
前記撮像部(10)は、前記照明部(20,120,220,320)が前記発光位置を変化させながら前記対象物(W)を照明する際に、前記対象物(W)を複数回撮像して、複数の第1の撮影画像(3)を作成し、
前記撮像部(10)は、前記照明部(20,120,220,320)が前記照射方向を変化させながら前記対象物(W)を照明する際に、前記対象物(W)を複数回撮像して、複数の第2の撮影画像(5)を作成し、
前記制御部(100)は、
前記複数の第1の撮影画像(3)から、前記対象物(W)の前記測定点(13)を照明するための前記発光位置に関する情報を有する第1のデータ配列(4)を作成し、
前記複数の第2の撮影画像(5)から、前記対象物(W)の前記測定点(13)を照明するための前記照射方向に関する情報を有する第2のデータ配列(6)を作成し、
前記第1のデータ配列(4)に含まれる前記発光位置の情報、および、前記第2のデータ配列(6)に含まれる前記照射方向の情報から、前記距離(D)を算出する、構成1に記載の画像検査装置。
(構成3)
前記照明部(20,120,220,320)は、マトリクス状に配置された複数の照明要素(21)を含み、
前記複数の照明要素(21)の各々は、
マトリクス状に配列され、選択的に発光可能に構成された複数の発光部(31,31A−31E)と、
前記複数の発光部(31,31A−31E)の各々から発せられる前記光の前記照射方向を、各前記複数の発光部(31,31A−31E)の位置に対応した方向に制御するように構成された光学系(40,140,240,340)とを含み、
前記制御部(100)は、前記照明部(20,120,220,320)の前記複数の照明要素(21)の各々の点灯および消灯を制御することによって、縞パターンの前記光を前記対象物(W)に照射させ、前記縞パターンの位相、前記縞パターンの縞の周期、および前記縞の向きのいずれかを変化させることによって前記発光位置を変化させ、
前記制御部(100)は、前記照明部(20,120,220,320)の前記複数の照明要素(21)の各々の前記複数の発光部(31,31A−31E)の点灯および消灯を制御することによって、前記照射方向を変化させる、構成2に記載の画像検査装置。
(構成4)
前記光学系(40,140,240,340)は、
前記複数の発光部(31,31A−31E)にそれぞれ対向して設けられた複数のマイクロレンズ(41,41A−41E,141A−141E,241A−241E,341A−341E)を含む、構成3に記載の画像検査装置。
(構成5)
前記複数のマイクロレンズのうち(41,41A−41E,141A−141E,241A−241E,341A−341E)の少なくとも一部のマイクロレンズの光軸(42,42A−42E,142A−142E,242A−242E,342A−342E)が、前記少なくとも一部のマイクロレンズに対向する発光部(31,31A−31E)の光軸(32,32A−32E)とずれるように、前記複数のマイクロレンズが配置されている、構成4に記載の画像検査装置。
(構成6)
前記複数の照明要素(21)のうちの少なくとも1つの照明要素(21)において、前記少なくとも一部のマイクロレンズ(41,41A−41E,341A−341E)が、前記発光部(31,31A−31E)のピッチ(P1)よりも小さいピッチ(P2)で配置されている、構成5に記載の画像検査装置。
(構成7)
前記複数のマイクロレンズ(141A−141E,241A−241E)のうちの少なくとも一部のマイクロレンズの光軸(142A−142E,242A−242E)が、前記少なくとも一部のマイクロレンズに対向する発光部(31,31A−31E)の光軸(32,32A−32E)に対して傾けられるように、前記複数のマイクロレンズ(141A−141E,241A−241E)が配置されている、構成4に記載の画像検査装置。
(構成8)
前記照明部(20,120,220,320)は、
前記複数の発光部(31,31A−31E)から出射される光のうち前記複数のマイクロレンズのそれぞれの周囲から漏れる光を遮るように構成された遮光部(44)をさらに含む、構成4から構成7のいずれか1項に記載の画像検査装置。
(構成9)
対象物(W)を撮影する撮像部(10)と、前記対象物(W)と前記撮像部(10)との間に配置されて、前記対象物(W)に向けて光を照射する発光面(35)を有し、前記発光面(35)における発光位置および前記光の照射方向を制御可能に構成された、透光性の照明部(20,120,220,320)と、前記撮像部(10)および前記照明部(20,120,220,320)を制御するように構成された制御部(100)とを備えた画像検査装置による画像検査方法であって、
前記照明部(20,120,220,320)が前記発光位置および前記照射方向を変化させるとともに、前記撮像部(10)が前記対象物(W)を撮像するステップ(S1,S3)と、
前記撮像するステップ(S1,S3)によって取得された前記対象物(W)の画像から、前記対象物(W)の表面の測定点(13)が照明されるときの前記照明部(20,120,220,320)の前記発光位置および前記照射方向を特定するステップ(S2,S4)と、
特定された発光位置、および特定された照射方向に基づいて、前記測定点(13)までの距離(D)を算出するステップ(S5)とを備える、画像検査方法。
(構成10)
前記撮像するステップ(S1,S3)は、
前記照明部(20,120,220,320)が前記発光位置を変化させながら前記対象物(W)を照明する際に、前記対象物(W)を複数回撮像して、複数の第1の撮影画像(3)を作成するステップ(S1)と、
前記照明部(20,120,220,320)が前記照射方向を変化させながら前記対象物(W)を照明する際に、前記対象物(W)を複数回撮像して、複数の第2の撮影画像(5)を作成するステップ(S3)とを含み、
前記発光位置および前記照射方向を特定するステップ(S2,S4)は、
前記複数の第1の撮影画像(3)から、前記対象物(W)の前記測定点(13)を照明するための前記発光位置に関する情報を有する第1のデータ配列(4)を作成するステップ(S2)と、
前記複数の第2の撮影画像(5)から、前記対象物(W)の前記測定点(13)を照明するための前記照射方向に関する情報を有する第2のデータ配列(6)を作成するステップ(S4)とを含み、
前記算出するステップ(S5)は、
前記第1のデータ配列(4)に含まれる前記発光位置の情報、および、前記第2のデータ配列(6)に含まれる前記照射方向の情報から、前記距離(D)を算出するステップを含む、構成9に記載の画像検査方法。
(構成11)
前記照明部(20,120,220,320)は、マトリクス状に配置された複数の照明要素(21)を含み、
前記複数の照明要素(21)の各々は、
マトリクス状に配列され、選択的に発光可能に構成された複数の発光部(31,31A−31E)と、
前記複数の発光部(31,31A−31E)の各々から発せられる前記光の前記照射方向を、各前記複数の発光部(31,31A−31E)の位置に対応した方向に制御するように構成された光学系(40,140,240,340)とを含み、
前記照明部(20,120,220,320)が前記発光位置および前記照射方向を変化させるステップは、
前記照明部(20,120,220,320)の前記複数の照明要素(21)の各々の点灯および消灯を制御することによって、縞パターンの前記光を前記対象物(W)に照射させて、前記縞パターンの位相、前記縞パターンの縞の周期、および前記縞の向きのいずれかを変化させることによって前記発光位置を変化させるステップと、
前記照明部(20,120,220,320)の前記複数の照明要素(21)の各々の前記複数の発光部(31,31A−31E)の点灯および消灯を制御することによって、前記照射方向を変化させるステップとを含む、構成9または構成10に記載の画像検査方法。
今回開示された各実施の形態は全ての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内での全ての変更が含まれることが意図される。また、実施の形態および各変形例において説明された発明は、可能な限り、単独でも、組み合わせても、実施することが意図される。
1 画像検査装置、3,5 撮影画像、4 照明要素位置画像、6 照明方向画像、7 距離画像、10 カメラ、11,32,32A−32E,42,42A−42E,142A−142E,242A−242E,342A−342E 光軸、15、41A−41E,141,141A−141E,241,241A−241E,341,341A−341E レンズ、20,120,220,320 照明装置、21 照明要素、22,22C セル、24 透明領域、25,26 対称軸、30 面光源、31,31A,31B,31C,31D,31E 発光部、35 発光面、40,140,240,340 マイクロレンズアレイ、44 遮光部、100 制御装置、300 ステージ、C5 列、D,d1,d2 距離、L 周期、P1 第1のピッチ、P2 第2のピッチ、PX,PX1,PX2 画素、R1,R2 行、S1−S5 ステップ、W ワーク。

Claims (11)

  1. 対象物を撮影する撮像部と、
    前記対象物と前記撮像部との間に配置されて、前記対象物に向けて光を照射する発光面を有し、複数の照明要素を含む、透光性の照明部と、
    前記撮像部および前記照明部を制御するように構成された制御部とを備え、
    前記制御部は、
    前記複数の照明要素の各々の点灯および消灯を制御して前記照明部における発光位置を変化させながら前記撮像部に前記対象物を撮像させて、前記対象物の画像から、前記対象物の表面の測定点が照明されるときに前記測定点の照明に最も寄与した前記照明部の前記発光位置および前記発光位置から発せられる光の照射方向を特定し、特定された発光位置、および特定された照射方向に基づいて、前記測定点までの距離を算出する、画像検査装置。
  2. 前記撮像部は、前記照明部が前記発光位置を変化させながら前記対象物を照明する際に、前記対象物を複数回撮像して、複数の第1の撮影画像を作成し、
    前記撮像部は、前記照明部が前記照射方向を変化させながら前記対象物を照明する際に、前記対象物を複数回撮像して、複数の第2の撮影画像を作成し、
    前記制御部は、
    前記複数の第1の撮影画像から、前記対象物の前記測定点を照明するための前記発光位置に関する情報を有する第1のデータ配列を作成し、
    前記複数の第2の撮影画像から、前記対象物の前記測定点を照明するための前記照射方向に関する情報を有する第2のデータ配列を作成し、
    前記第1のデータ配列に含まれる前記発光位置の情報、および、前記第2のデータ配列に含まれる前記照射方向の情報から、前記距離を算出する、請求項1に記載の画像検査装置。
  3. 前記複数の照明要素は、マトリクス状に配置され、
    前記複数の照明要素の各々は、
    マトリクス状に配列され、選択的に発光可能に構成された複数の発光部と、
    前記複数の発光部の各々から発せられる前記光の前記照射方向を、各前記複数の発光部の位置に対応した方向に制御するように構成された光学系とを含み、
    前記制御部は、前記照明部の前記複数の照明要素の各々の点灯および消灯を制御することによって、縞パターンの前記光を前記対象物に照射させ、前記縞パターンの位相、前記縞パターンの縞の周期、および前記縞の向きのいずれかを変化させることによって前記発光位置を変化させ、
    前記制御部は、前記照明部の前記複数の照明要素の各々の前記複数の発光部の点灯および消灯を制御することによって、前記照射方向を変化させる、請求項2に記載の画像検査装置。
  4. 前記光学系は、
    前記複数の発光部にそれぞれ対向して設けられた複数のマイクロレンズを含む、請求項3に記載の画像検査装置。
  5. 前記複数のマイクロレンズのうちの少なくとも一部のマイクロレンズの光軸が、前記少なくとも一部のマイクロレンズに対向する発光部の光軸とずれるように、前記複数のマイクロレンズが配置されている、請求項4に記載の画像検査装置。
  6. 前記複数の照明要素のうちの少なくとも1つの照明要素において、前記少なくとも一部のマイクロレンズが、前記発光部のピッチよりも小さいピッチで配置されている、請求項5に記載の画像検査装置。
  7. 前記複数のマイクロレンズのうちの少なくとも一部のマイクロレンズの光軸が、前記少なくとも一部のマイクロレンズに対向する発光部の光軸に対して傾けられるように、前記複数のマイクロレンズが配置されている、請求項4に記載の画像検査装置。
  8. 前記照明部は、
    前記複数の発光部から出射される光のうち前記複数のマイクロレンズのそれぞれの周囲から漏れる光を遮るように構成された遮光部をさらに含む、請求項4から請求項7のいずれか1項に記載の画像検査装置。
  9. 対象物を撮影する撮像部と、前記対象物と前記撮像部との間に配置されて、前記対象物に向けて光を照射する発光面を有し、複数の照明要素を含む、透光性の照明部と、前記撮像部および前記照明部を制御するように構成された制御部とを備えた画像検査装置による画像検査方法であって、
    前記制御部が前記複数の照明要素の各々の点灯および消灯を制御して前記照明部における発光位置および照射方向を変化させながら前記撮像部が前記対象物を撮像するステップと、
    前記撮像するステップによって取得された前記対象物の画像から、前記対象物の表面の測定点が照明されるときに前記測定点の照明に最も寄与した前記照明部の前記発光位置および前記発光位置から発せられる光の照射方向を特定するステップと、
    特定された発光位置、および特定された照射方向に基づいて、前記測定点までの距離を算出するステップとを備える、画像検査方法。
  10. 前記撮像するステップは、
    前記照明部が前記発光位置を変化させながら前記対象物を照明する際に、前記対象物を複数回撮像して、複数の第1の撮影画像を作成するステップと、
    前記照明部が前記照射方向を変化させながら前記対象物を照明する際に、前記対象物を複数回撮像して、複数の第2の撮影画像を作成するステップとを含み、
    前記発光位置および前記照射方向を特定するステップは、
    前記複数の第1の撮影画像から、前記対象物の前記測定点を照明するための前記発光位置に関する情報を有する第1のデータ配列を作成するステップと、
    前記複数の第2の撮影画像から、前記対象物の前記測定点を照明するための前記照射方向に関する情報を有する第2のデータ配列を作成するステップとを含み、
    前記算出するステップは、
    前記第1のデータ配列に含まれる前記発光位置の情報、および、前記第2のデータ配列に含まれる前記照射方向の情報から、前記距離を算出するステップを含む、請求項9に記載の画像検査方法。
  11. 前記複数の照明要素は、マトリクス状に配置され、
    前記複数の照明要素の各々は、
    マトリクス状に配列され、選択的に発光可能に構成された複数の発光部と、
    前記複数の発光部の各々から発せられる前記光の前記照射方向を、各前記複数の発光部の位置に対応した方向に制御するように構成された光学系とを含み、

    記照明部が前記発光位置および前記照射方向を変化させるステップは、
    前記照明部の前記複数の照明要素の各々の点灯および消灯を制御することによって、縞パターンの前記光を前記対象物に照射させて、前記縞パターンの位相、前記縞パターンの縞の周期、および前記縞の向きのいずれかを変化させることによって前記発光位置を変化させるステップと、
    前記照明部の前記複数の照明要素の各々の前記複数の発光部の点灯および消灯を制御することによって、前記照射方向を変化させるステップとを含む、請求項9または請求項10に記載の画像検査方法。
JP2018030931A 2018-02-23 2018-02-23 画像検査装置および画像検査方法 Active JP6939641B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2018030931A JP6939641B2 (ja) 2018-02-23 2018-02-23 画像検査装置および画像検査方法
CN201910031584.1A CN110186928B (zh) 2018-02-23 2019-01-14 图像检查装置以及图像检查方法
US16/247,598 US11619591B2 (en) 2018-02-23 2019-01-15 Image inspection apparatus and image inspection method
EP19151861.2A EP3531116B1 (en) 2018-02-23 2019-01-15 Image inspection apparatus and image inspection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018030931A JP6939641B2 (ja) 2018-02-23 2018-02-23 画像検査装置および画像検査方法

Publications (2)

Publication Number Publication Date
JP2019144203A JP2019144203A (ja) 2019-08-29
JP6939641B2 true JP6939641B2 (ja) 2021-09-22

Family

ID=65030997

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018030931A Active JP6939641B2 (ja) 2018-02-23 2018-02-23 画像検査装置および画像検査方法

Country Status (4)

Country Link
US (1) US11619591B2 (ja)
EP (1) EP3531116B1 (ja)
JP (1) JP6939641B2 (ja)
CN (1) CN110186928B (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7392582B2 (ja) * 2020-06-12 2023-12-06 オムロン株式会社 検査システムおよび検査方法
CN111795647A (zh) * 2020-08-04 2020-10-20 湖南视杰智能科技有限公司 一种高度检测装置及方法
JP2022032193A (ja) * 2020-08-11 2022-02-25 株式会社ヴィーネックス 異物・欠陥検査装置、異物・欠陥検査における画像生成装置、及び異物・欠陥検査方法
CN112261302A (zh) * 2020-10-23 2021-01-22 创新奇智(广州)科技有限公司 一种多角度目标对象拍摄的方法、装置以及系统
JP2023037333A (ja) * 2021-09-03 2023-03-15 株式会社東芝 被検体の検査に関連する処理装置、被検体の検査システム、被検体の検査に関連する処理方法、及び、被検体の検査に関連する処理プログラム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6618123B2 (en) * 2000-10-20 2003-09-09 Matsushita Electric Industrial Co., Ltd. Range-finder, three-dimensional measuring method and light source apparatus
JP3647784B2 (ja) * 2000-10-20 2005-05-18 松下電器産業株式会社 レンジファインダ装置
JP4601473B2 (ja) * 2005-03-28 2010-12-22 国立大学法人信州大学 検査対象物の外観を検査する装置
US20100014063A1 (en) * 2005-05-31 2010-01-21 Fujifilm Corporation Image exposure apparatus
US7193697B2 (en) * 2005-07-25 2007-03-20 Chroma Ate Inc. Apparatus for feature detection
EP1930719A4 (en) * 2005-08-31 2009-11-25 Ccs Inc COAXIAL LIGHT EMITTING DEVICE
JP2009164033A (ja) * 2008-01-09 2009-07-23 Konica Minolta Holdings Inc 有機エレクトロルミネッセンス素子の製造方法、有機エレクトロルミネッセンス素子、表示装置及び照明装置
JP2014096253A (ja) * 2012-11-08 2014-05-22 Yamagata Prefecture 透視性を有する面状光源及びそれを用いた撮像方法
US20150015701A1 (en) * 2013-07-10 2015-01-15 Faro Technologies, Inc. Triangulation scanner having motorized elements
DE102013111761B4 (de) * 2013-10-25 2018-02-15 Gerhard Schubert Gmbh Verfahren und Scanner zum berührungslosen Ermitteln der Position und dreidimensionalen Form von Produkten auf einer laufenden Fläche
JP2015148583A (ja) * 2014-02-10 2015-08-20 稔 新村 パターン投影用発光装置
JP6424020B2 (ja) 2014-06-09 2018-11-14 株式会社キーエンス 画像検査装置、画像検査方法、画像検査プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP5866586B1 (ja) 2015-09-22 2016-02-17 マシンビジョンライティング株式会社 検査用照明装置及び検査システム
KR102597579B1 (ko) * 2015-10-21 2023-11-01 프린스톤 옵트로닉스, 인크. 코딩된 패턴 투영기
US20180367722A1 (en) * 2017-06-14 2018-12-20 Canon Kabushiki Kaisha Image acquisition device and image acquisition method

Also Published As

Publication number Publication date
EP3531116B1 (en) 2024-05-01
CN110186928B (zh) 2021-11-30
JP2019144203A (ja) 2019-08-29
CN110186928A (zh) 2019-08-30
US11619591B2 (en) 2023-04-04
US20190265171A1 (en) 2019-08-29
EP3531116A1 (en) 2019-08-28

Similar Documents

Publication Publication Date Title
JP6939641B2 (ja) 画像検査装置および画像検査方法
JP7176600B2 (ja) 画像検査装置および画像検査方法
JP6507653B2 (ja) 検査装置及び検査装置の制御方法
US20100302364A1 (en) Three dimensional shape measurement apparatus and method
KR20120088773A (ko) 검사 장치, 3차원 형상 측정 장치, 구조물의 제조 방법
US10803623B2 (en) Image processing apparatus
JP2017122614A (ja) 画像生成方法及び検査装置
US11209712B2 (en) Image processing apparatus
JP7187782B2 (ja) 画像検査装置
CN110118776B (zh) 图像检查装置以及照明装置
US10909702B2 (en) Inspection device
JP2012237613A (ja) 形状計測装置及び形状計測方法
JP7143740B2 (ja) 画像検査装置および照明装置
EP4246204A1 (en) Calibration target, fourier ptychographic imaging system and method for calibrating a fourier ptychographic imaging system
JP5867123B2 (ja) 3次元形状計測装置およびキャリブレーション方法
JP7022661B2 (ja) 形状測定装置および形状測定方法
JP2006105942A (ja) 三次元形状測定方法及び三次元形状測定装置
JP7459525B2 (ja) 三次元形状計測装置、三次元形状計測方法及びプログラム
JP7424074B2 (ja) 三次元形状計測装置、三次元形状計測方法及びプログラム
JP2020176993A (ja) 評価装置、および、評価方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200305

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210323

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210518

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210721

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210816

R150 Certificate of patent or registration of utility model

Ref document number: 6939641

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150