JP6976914B2 - 光学検査装置 - Google Patents

光学検査装置 Download PDF

Info

Publication number
JP6976914B2
JP6976914B2 JP2018173038A JP2018173038A JP6976914B2 JP 6976914 B2 JP6976914 B2 JP 6976914B2 JP 2018173038 A JP2018173038 A JP 2018173038A JP 2018173038 A JP2018173038 A JP 2018173038A JP 6976914 B2 JP6976914 B2 JP 6976914B2
Authority
JP
Japan
Prior art keywords
light
light guide
light sources
guide body
optical inspection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018173038A
Other languages
English (en)
Other versions
JP2020046232A (ja
Inventor
博司 大野
卓大 神川
武宏 羽藤
宏弥 加納
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2018173038A priority Critical patent/JP6976914B2/ja
Priority to US16/288,301 priority patent/US10901134B2/en
Publication of JP2020046232A publication Critical patent/JP2020046232A/ja
Application granted granted Critical
Publication of JP6976914B2 publication Critical patent/JP6976914B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/0001Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
    • G02B6/0011Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
    • G02B6/0033Means for improving the coupling-out of light from the light guide
    • G02B6/0035Means for improving the coupling-out of light from the light guide provided on the surface of the light guide or in the bulk of it
    • G02B6/0045Means for improving the coupling-out of light from the light guide provided on the surface of the light guide or in the bulk of it by shaping at least a portion of the light guide
    • G02B6/0046Tapered light guide, e.g. wedge-shaped light guide
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/0001Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
    • G02B6/0011Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
    • G02B6/0033Means for improving the coupling-out of light from the light guide
    • G02B6/005Means for improving the coupling-out of light from the light guide provided by one optical element, or plurality thereof, placed on the light output side of the light guide
    • G02B6/0055Reflecting element, sheet or layer
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/0001Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
    • G02B6/0011Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
    • G02B6/0066Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form characterised by the light source being coupled to the light guide
    • G02B6/0068Arrangements of plural sources, e.g. multi-colour light sources
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/0001Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
    • G02B6/0011Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
    • G02B6/0081Mechanical or electrical aspects of the light guide and light source in the lighting device peculiar to the adaptation to planar light guides, e.g. concerning packaging
    • G02B6/0085Means for removing heat created by the light source from the package
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/0001Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
    • G02B6/0011Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
    • G02B6/0013Means for improving the coupling-in of light from the light source into the light guide
    • G02B6/0015Means for improving the coupling-in of light from the light source into the light guide provided on the surface of the light guide or in the bulk of it
    • G02B6/002Means for improving the coupling-in of light from the light source into the light guide provided on the surface of the light guide or in the bulk of it by shaping at least a portion of the light guide, e.g. with collimating, focussing or diverging surfaces
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07DHANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
    • G07D2205/00Coin testing devices
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07DHANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
    • G07D2207/00Paper-money testing devices
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07DHANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
    • G07D5/00Testing specially adapted to determine the identity or genuineness of coins, e.g. for segregating coins which are unacceptable or alien to a currency
    • G07D5/005Testing the surface pattern, e.g. relief
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07DHANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
    • G07D7/00Testing specially adapted to determine the identity or genuineness of valuable papers or for segregating those which are unacceptable, e.g. banknotes that are alien to a currency
    • G07D7/06Testing specially adapted to determine the identity or genuineness of valuable papers or for segregating those which are unacceptable, e.g. banknotes that are alien to a currency using wave or particle radiation
    • G07D7/12Visible light, infrared or ultraviolet radiation
    • G07D7/121Apparatus characterised by sensor details

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Description

本発明の実施形態は、検査対象を光学的に検査可能な光学検査装置に関する。
物体の凹凸の非接触検査の一つに、斜入射の照明を用いて凹凸部で光を散乱させ、その散乱光を撮像するという方法がある。物体の方位方向によらず、検査を行うためには、斜入射のリング照明を用いることが従来から行われる。ここで、被検物に対する照明の入射角にばらつきがないほど精度のよい検査が行える。つまり、照明の配光角の角度幅が狭いほど精度のよい検査ができる。
特開2008−209726号公報 特開2002−328094号公報 特開2010−251168号公報
しかし、従来のリング照明は、入射角の幅が大きいという課題があった。さらに、測定領域の寸法の2乗に比例して光源(LED)の数が増えてしまい、検査装置が高額になる課題があった。
本発明が解決しようとする課題は、高精度な検査を可能にしつつ、光源の数を低減した光学検査装置を提供することである。
実施形態の光学検査装置は、検査対象と対向する撮像光学系と、前記撮像光学系の周囲に設けられた1以上の光源と、前記撮像光学系の光軸に沿って筒状に延びるとともに、その端面が前記1以上の光源と対向した導光体と、前記導光体の内面に設けられ、前記端面から前記導光体内に入射された光を内部全反射させる全反射面と、前記導光体の外面に設けられ、前記光源から前記導光体内に入射された光を前記検査対象に向けて反射するミラー面と、前記導光体の内面に設けられ、前記ミラー面で反射された光を前記検査対象に向けて透過させる透過面と、を備える。
図1は、第1実施形態の光学検査装置を示した斜視図である。 図2は、図1に示す光学検査装置を光軸を含む面で切断して示した断面図である。 図3は、図2に示す光学検査装置の位置、寸法、角度の関係を示す模式図である。 図4は、図2に示す光学検査装置において、光源から射出された光線の光線追跡シミュレーションの結果の一部を抜粋して示した模式図である。 図5は、図1に示す光学検査装置において、光源から射出された光線の光線追跡シミュレーションの結果を用いて計算した配光分布を示した図である。 図6は、第2実施形態の光学検査装置の導光体および1以上の光源を示した斜視図である。 図7は、第2実施形態の光学検査装置を光軸を含む面で切断して示した断面図である。 図8(a)は、第2実施形態の光学検査装置の光線追跡シミュレーションを用いて解析した照度分布を示す図であり、図8(b)は、図8(a)の照度分布のうち、図6のF8(b)−F8(b)線の位置での照度分布を示した図である。
以下に、実施形態にかかる光学検査装置について図面を参照しつつ説明する。光学検査装置は、検査対象の表面の形状などを詳細に検査することができる。以下の実施形態の光学検査装置で対象とする検査の例としては、例えば、硬貨や紙幣の真贋の検査や、工場の製造ラインにおける製品の不具合(例えば、ひび割れ等)の有無等の検査が挙げられるが、光学検査装置は、それ以外の検査にも用いることができる。
図面は模式的または概念的なものであり、各部分の厚みと幅との関係、部分間の大きさの比率などは、必ずしも現実のものと同一とは限らない。また、同じ部分を表す場合であっても、図面により互いの寸法や比率が異なって表される場合もある。本願明細書と各図において、既出の図に関して前述したものと同様の要素には同一の符号を付し、重複する説明を適宜に省略する。
[第1実施形態]
図1に本実施形態の光学検査装置11の斜視図を示し、図2に図1の光学検査装置11の光軸14を含む面で光学検査装置11を切断した断面図を示す。図1、図2に示すように、光学検査装置11は、検査対象23と対向する撮像光学系12と、撮像光学系12の周囲に設けられた1以上の光源13と、撮像光学系12の光軸14に沿って設けられた筒状の導光体15と、1以上の光源13が実装された基板16と、基板16に取り付けられたヒートシンク17と、を備える。
本実施形態において、1以上の光源13は、複数(例えば、4個)で構成されるが、光源13の数としては複数(例えば、4個)に限定されるものではない。光源13の数は、1つでもよいし、5つ以上又は3以下の複数であっても当然によい。光源13のそれぞれは、例えばLED(light emitting diode)で構成される。
複数の光源13は、互いに間隔を空けて設けられている。複数の光源13は、例えば、光軸14を中心とする1つの円の円周上に配置されている。複数の光源13は、略均等な間隔を空けて配置されており、光軸14を基準に回転対象の位置に配置されている。より具体的には、複数の光源13は、4回回転対象の位置に配置される。すなわち、複数の光源13は、光軸14回りに、0°の方位角の位置、90°の方位角の位置、180°の方位角の位置、270°の方位角の位置の4か所に配置される。ここで、回転対称とは、対象物を回転対称軸に対して回転させたとき、回転角が360°未満でもとの対象物に一致することを意味する。複数の光源13は、例えば、白色のLEDで構成される。光源13が射出する光は、可視光に限らず、赤外光や紫外光であってもよい。
撮像光学系12は、一般的なデジタルカメラで構成される。図3に示すように、撮像光学系12は、瞳面を構成するレンズ21と、撮像素子22(CCDやCMOS)と、を有する。撮像光学系12は、検査対象23の静止画を取得することができるが、検査対象23の動画を取得できるようにしてもよい。光軸14(主光軸)は、レンズ21と撮像素子22によって規定される。撮像光学系12は、その外側のレンズケース12Aがヒートシンク17と接するように設けられてもよい。これによって、撮像光学系12の熱をヒートシンク17側に逃がすことができる。
図2に示すように、ヒートシンク17は、熱伝導性の良好な金属である銅やアルミニウム合金等で形成されている。ヒートシンク17は、複数の放熱用のフィン17Aを有する。ヒートシンク17は、例えば、基板16上の導電性金属(例えば、銅)の構造(パッド、スルーホール)等を介して、複数の光源13と熱的に接続されていてもよいし、或いは直接的に複数の光源13と接触するようにこれらと熱的に接続されていてもよい。ヒートシンク17は、例えば、開口部17Bを有していてもよく、開口部17Bの内側に撮像光学系12が通されていてもよい。
基板16は、一般的なプリント回路板で構成される。基板16には、制御回路24と、画像処理用回路25(画像処理チップ)と、複数の光源13と、画像記録用の記憶装置26と、が実装されている。図2に示すように、基板16および撮像光学系12は、電源27から電力供給を受ける。制御回路24は、複数の光源13と電気的に接続されており、複数の光源13に含まれる光源13の1つ1つを個別に点灯・消灯することができる。制御回路24は、CPU、ROM、RAM等で実現されてもよいし、CPUの代わりに、ASIC(Application Specific Integrated Circuit)やPLD(Programmable Logic Device)やFPGA(Field Programmable Gate Array)で構成されてもよい。あるいは、制御回路24をワンチップマイコン等で実現してもよい。
図2に示すように、基板16は、貫通孔部16Aを有する。撮像光学系12は、貫通孔部16Aに通されて基板16に固定されている。したがって、本実施形態では、1以上の光源13、撮像光学系12、およびヒートシンク17が基板16に固定されて一体化されている。したがって、光学検査装置11を分解してメンテナンスする場合等に、基板16、1以上の光源13、撮像光学系12、およびヒートシンク17の取り扱いが容易である。
撮像光学系12は、制御回路24および画像処理用回路25と電気的に接続されている。制御回路24は、撮像光学系12で取得した像を、画像処理用回路25で画像処理させ、図示しないディスプレイ等の表示部に表示させることができる。また、制御回路24は、画像処理用回路25で画像処理された画像を、必要に応じて記憶装置26で記憶させることもできる。或いは、制御回路24は、通信ケーブルや無線LAN等を通じて他のパソコン等に画像情報を送信してもよい。記憶装置26は、SSD(Solid State Drive)等の半導体メモリ系の記憶装置で構成されるが、HDD(Hard Disk Drive)等の他の記憶装置であっても当然によい。
導光体15は、透光性の材料によって、中空の円筒形に構成されている。導光体15の中心軸は、撮像光学系12の光軸14と一致している。導光体15の内面31の直径(内径)は、撮像光学系12から遠ざかるにつれて大きくなっている。導光体15は、内部に、十分に大きな中空領域15Aを有している。したがって、導光体15の内面31が撮像光学系12の視野範囲18に入らないようになっている。このため、本実施形態では、撮像光学系12の視野角が広く確保される。
導光体15は、光に対して透明な材料であればよく、たとえばアクリル等の透光性の樹脂材料を好適に用いることができるが、導光体15の材料はこれに限られるものではない。導光体15の材料としては、ポリカーボネート、ガラスなどであってもよい。導光体15は、射出成形や機械加工(旋盤やNC旋盤等による切削加工)によって形成できる。
図2、図4に示すように、導光体15は、内面31(内周面)と、外面32(外周面)と、撮像光学系12側の第1端面33(入射面、端面)と、検査対象23側の第2端面34と、内面31に設けられた全反射面35と、内面31に設けられた透過面36と、を有する。内面31は主光軸14に近い側の面であり、外面32は主光軸14から遠い側の面である。図2に示すように、導光体15の内面31と外面32との間の厚み寸法Wは、撮像光学系12(1以上の光源13)から遠ざかるにつれて小さくなっている。第1端面33は、1以上の光源13と対向している。
図2に示すように、外面32は、光源13から導光体15内に入射された光を検査対象23に向けて反射するミラー面37で構成される。導光体15のミラー面37は、光軸14から遠ざかる方向に凸になった円弧面である。ミラー面37には、外面32にアルミニウム等を蒸着させることによって、ミラー面形成の処理がされている。ただし、ミラー面37の形成方法としては、この限りではなく、例えば、ミラー面37を備えた別部材を外面32に密着させ、外面32で反射を起こさせる構造としてもよい。
内面31は、光軸14に近づく方向に凸になった円弧面で構成される。内面31は、撮像光学系12側に位置した全反射面35と、検査対象23側に位置した透過面36と、を有する。全反射面35は、透過面36よりも光源13に近い位置に設けられる。外面32と異なり、内面31は、透明である。内面31には、表面処理、例えばバフ研磨等がなされて平滑化されている。ただし、内面31に対する表面処理としてはこの限りではない。内面のうち、透過面36をサンドブラスト処理等で荒らして、透過面36を透過する光を拡散できる拡散面としてもよい。
全反射面35は、第1端面33から導光体15内に入射された光を内部全反射させることができる。透過面36は、ミラー面37で反射された光を検査対象23に向けて透過させる。その際、透過面36は、透過面36を透過する光を屈折させる。
図2、図4に示すように、第1端面33は、平坦面44と、平坦面44から段状に突出した導光凸部45と、を有する。導光凸部45は、環状をなしており(図1参照)、各光源13の発光面と対向している。導光凸部45は、頂面45Aと、側面45Bと、を有する。導光凸部45は、導光体15の内面31に沿って1以上の光源13に向けて突出している。導光凸部45の厚み寸法は、内面31と外面32との間の厚み寸法Wよりも小さくなっている。第2端面34は、第1端面33と対向している。
導光体15は、基板16に対して嵌め合いやねじ止め等で固定されている。光学検査装置11は、撮像光学系12、1以上の光源13、導光体15、基板16、およびヒートシンク17を取り囲むケースを有していてもよく、ケースを介して導光体15と基板16とが互いに位置決めされていてもよい。
導光体15からの光が照射される照射野(検査面42)は、導光体15の先端である第2端面34から、例えば、5mmの位置に設置されるが、これに限定されるものではない。本実施形態の光学検査装置11は、例えば、検査対象23を硬貨とする検査に好適に用いることができる。光学検査装置11は、硬貨の凹凸形状等を好適に検査して、硬貨の真贋の判断に用いることができる。
図3に示すように、撮像光学系12の入射瞳面41から結像面42までの距離をlとする。通常、結像面42と照射面を一致させることにより、鮮明な画像を取得できる。また、照射光の主光線43の配光角をθとする。また,その主光線43が導光体15より射出された点の結像面42(照射面と一致する場合は照射面)からの距離をhとし、主光軸14からの距離をrとする。導光体15は、入射瞳面41から主光軸14に沿って結像面42に向かって延長される構成となっており、その延長距離Lは少なくとも距離lより短い。つまり、
Figure 0006976914
である。これにより、照射面と結像面42を一致させることができ、鮮明な画像を取得できる。
また、さらに、幾何学より、
Figure 0006976914
という関係がある。ここで、rとして導光体15の内面の主光軸14からの距離が最も小さいものをRとする。このとき、
Figure 0006976914
となり、導光体15の延長距離Lは、少なくとも
Figure 0006976914
でなければならない。
以上から、下記の関係を導くことができる。
Figure 0006976914
次に、図2、図4、図5等を参照して、本実施形態の光学検査装置11の作用について説明する。
光源13(LED)から射出された光は、第1端面33の導光凸部45(頂面45A)から導光体15内に入射される。導光凸部45に入射された光のうち、内側(検査対象23)に向かう光は、内面31の全反射面35において外側のミラー面37側に反射される(図2、図4参照)。ミラー面37に到達した光は、内側の透過面36に向けて反射される。透過面36において微小な角度だけ屈折されて、検査対象23に照射される。
導光凸部45に入射された光のうち、外側に向かう光は、導光凸部45の側面45Bで内部全反射されて内側の全反射面35に案内される。全反射面35に案内された光は、上記と同様に内部全反射されてミラー面37側に案内される。ミラー面37に到達した光は、内側の透過面36に向けて反射される。透過面36において微小な角度だけ屈折されて、検査対象に照射される。
図4に示すように、光源13から導光凸部45(頂面45A)内に入射されることなく、平坦面44に直接に入射された光は、同じく全反射面35において内部全反射されて、外側のミラー面37側に案内される。ミラー面37に到達した光は、内側の透過面36に向けて反射される。透過面36において微小な角度だけ屈折されて、検査対象23に照射される。撮像光学系12は、このように検査対象23に照射され、検査対象23で反射された光(散乱光)を検出することで、検出対象23の画像を取得できる。
本実施形態では、図1に示すように、導光体15は回転対称形(円筒形)であり、外側にミラー面37を設け、内側に全反射面35および透過面36を設ける。このような構成にすることで、エタンデュの保存則を利用し、光線折り畳みにより、領域を広げ発散角を小さくすることができる。
エタンデュの保存則とは、ある面での断面積をAとし、その面における各点の平均的な発散角をΘとする。ある面とは異なる面での断面積をAとし、その面における各点の平均的な発散角をΘとする。nは、導光部を構成する材料の屈折率である。このとき量Eは、
Figure 0006976914
のように、光線束が伝搬されても保存される。これがエタンデュの保存則である。
本実施形態では、少ない光源13を用いて、この光源13から出て第1端面33(入射面)からの光を検査対象の方向に案内しつつ、当該光を導光体15の周方向および厚み方向に広げることで、検査対象23の近くにある透過面36を出る光の発散角を小さくできる。
つまり、本実施形態の光学検査装置11によれば、導光体15を用いることで、少ない光源13を用いて、照射領域を広げることで狭配光を実現できる。このように狭配光を実現できれば、検査対象23への入射角にばらつきがなくなり、検査対象23に対してより高精度な検査を行うことができる。
図5に光線追跡シミュレーションを用いて計算した配光分布を示す。本図に示すように、導光体15と光源13を組み合わせることで、狭配光の斜入射照明を実現することができる。本実施形態では、配光角を−55°および55°として光を射出した。シミュレーション結果によれば、配光角の角度幅は約10°となった。従来の一般的な砲弾型LEDの配光角の角度幅は20°以上であるので、これに比して十分な狭配光が実現されたことが理解できる。
また光源13から導光体15に入射した光線は、導光体15内を伝搬するに従い、周方向(主光軸14を回転軸としたときの回転方向)に広がることが可能となる。つまり、光源13からの光線が均一に広げられる。
本実施形態では、光源13、撮像光学系12、および基板16を一体化することで、製造コストが低減されるとともに、装置構成をコンパクトにできる。これと同時に、放熱用のヒートシンク17も基板16と一体化できる。これにより、光源13の冷却を促進して光学検査装置11の信頼性を向上しつつ、別途にヒートシンク17を設けた場合に比して、ヒートシンク17に関わるコストも低減できる。さらに、光学検査装置11をコンパクトにすることもできる。
第1実施形態によれば、以下のことがいえる。
光学検査装置11は、検査対象23と対向する撮像光学系12と、撮像光学系12の周囲に互いに間隔を空けて設けられた1以上の光源13と、撮像光学系12の光軸14に沿って筒状に延びるとともに、その端面が1以上の光源13と対向した導光体15と、導光体15の内面31に設けられ、前記端面から導光体15内に入射された光を内部全反射させる全反射面35と、導光体15の外面32に設けられ、光源13から導光体15内に入射された光を検査対象23に向けて反射するミラー面37と、導光体15の内面に設けられ、ミラー面37で反射された光を検査対象23に向けて透過させる透過面36と、を備える。
この構成によれば、光源13から射出され導光体15内に入射された光を導光体15内で広げることで、エタンデュの法則を利用して、透過面36から検査対象に向かう光を狭配光にすることができる。これによって、検査対象23の高精度な検査を実施することができる。また、導光体15を利用して光を広げるようにしているために、従来に比して光源13の数を少なくすることができる。したがって、本実施形態によれば、高い検査精度を確保しつつ、光源13の数を低減できるという極めて優れた2つの効果を同時に実現できる。また、導光体15の構造も簡単であり、且つ、部品点数も少なく実現できることから、光学検査装置11全体の製造コストを低減できる。
上記構成によれば、光源13および撮像光学系12を検査対象23から離して設置することができる。これによって、熱源となる光源13および撮像光学系12から検査対象を離すことができ、熱によって検査対象に悪影響を及ぼすことを防止できる。また、光源13および撮像光学系12を比較的近い位置に配置できる構造となるために、これらをまとめて冷却することも容易であり、光学検査装置11の冷却性を向上して光学検査装置11の信頼性を向上できる。
この場合、全反射面35は、透過面36よりも光源13に近い位置に設けられる。また、全反射面35と透過面36は共通領域を有してもよい。また、全反射面35と透過面36は共通であってもよい。この構成によれば、エタンデュの法則を利用して導光体15内で光を拡散する前に、導光体15外に光が漏れ出してしまうことを防止できる。これによって、透過面36から検査対象23に向かう光を狭配光にして、高精度な検査を実現できる。全反射面35と透過面36の共通領域を設けることで、全体的にコンパクトにできるという利点がある。また、全反射面35と透過面36を完全に共通にすることで、さらなるコンパクト化が可能という利点がある。
この場合、撮像光学系12の入射瞳面41から検査対象23までの距離をlとし、導光体15から射出される主光線43の配光角をθとし、光軸14から内面31の最近接距離をRとし、光軸14に沿う方向に関する入射瞳面41からの導光体15の延長距離をLとしたとき、
Figure 0006976914
の関係を満たす。
この構成によれば、配光角θの光線43を撮像光学系12の結像面42と光軸14との交点に向けて射出することができる。つまり、照射野の中心に所望の配光角の光を射出できる。
導光体15の内面31は、撮像光学系12の視野範囲18よりも外側に位置する。この構成によれば、撮像光学系12の視野範囲18を導光体15によって邪魔してしまうことがなく、撮像光学系12で取得できる視野を十分に広くすることができる。
導光体15の内面31と外面32との間の厚み寸法Wは、撮像光学系12から遠ざかるにつれて小さくなる。この構成によれば、例えば、光源13から遠い位置で内面31の角度を斜めにすることができる。これによって、光源13から遠い位置で導光体15から光を内側に漏れやすくすることができる。これによって、内面31において、光源13に近い位置に全反射面35を設け、光源13から遠い位置に透過面36を設けるという構造を簡単に実現できる。
導光体15は、円筒形である。この構成によれば、光源13からの光を導光体15内で偏りなく広げることができ、光源13の数を低減したことによる影響を最小限にすることができる。また、構造を単純化することができるために、導光体15の製造コストを低減できる。
この場合、導光体15の内面の直径は、光源13から遠ざかるにつれて大きくなる。この構成によれば、光源13から遠い位置で内面31の角度を斜めにすることができる。これによって、光源13から遠い位置で導光体15から光を内側に漏れやすくすることができる。したがって、内面31において、光源13に近い位置に全反射面35を設け、光源13から遠い位置に透過面36を設けるという構造を簡単に実現できる。
光学検査装置11は、導光体15の内面31に沿うように、前記端面から1以上の光源13に向けて突出するとともに、導光体15と連続して設けられた筒状の導光凸部45を備え、導光凸部45の厚み寸法は、内面31と外面32との間の厚み寸法よりも小さい。この構成によれば、光源13から導光体15内に入射された光のうち、直接的にミラー面37側に向かう光を全反射面35に向けて内部全反射させることができる。これによって、導光体15の第1端面33から入射した光が、設計意図と違う方向であるミラー面37側に直接進んでしまうことを防止して、設計通りに正しい経路で光を案内できる。これによって、検査対象に到達できる光線の数を増加させることができ、器具効率(光源13の全光束に対し、照明として利用される光束の割合))の高い照明を実現できる。これによって、光源13の数を少なくした場合でも、検査対象23(検査面42)が暗くなってしまうことが防止される。
導光体15のミラー面37は、光軸14から遠ざかる方向に凸になった円弧面である。この構成によれば、ミラー面37によっていわゆる凹面鏡の構造を実現でき、検査対象23に到達できる光線の数を増加して、器具効率を向上(検査面42を明るく)できる。
導光体15の内面31は、光軸14に近づく方向に凸になった円弧面である。この構成によれば、光源13に近い位置では、光軸14に略沿った方向に内面31を延ばし、光源13から遠い位置では、光軸14に対して斜め方向に内面31を延ばす構造をとることができる。これによって、単純な構造によって、全反射面35と透過面36とを実現することができ、導光体15構造を簡略化して導光体15の製造コストを低減できる。また、この構成によれば、全反射面35と透過面36との間で、厳密な境界を設ける必要がなくなる。したがって、全反射面35と透過面36との中間地点では、ある光線に対しては全反射面35として働き、他の光線に対しては透過面36として働く。このように全反射面35と透過面36との間の境界をグレーにすることで、マイナーな光線も検査対象23に向かわせることができ、結果的に器具効率の向上に寄与できる。
光学検査装置11は、前記1以上の光源13と熱的に接続されたヒートシンク17を備える。この構成によれば、光源13およびその周辺の機器において放熱性を向上することができる。これによって、熱によって光源13が故障してしまう不具合を生じることが防止され、光学検査装置11の信頼性を向上できる。
光学検査装置11は、1以上の光源13を実装した基板16であって、撮像光学系12を通すための貫通孔部16Aを有する基板16を備える。この構成によれば、撮像光学系12と1以上の光源13とを略同じ高さに設置することができる。これによって、発熱部品を一か所に集めることができ、これらを冷却するためのヒートシンク17等の設計が容易になる。また、基板16と撮像光学系12を一体にすることができ、これらを個別に設置する場合に比して、設置スペースを低減できる。
1以上の光源13は、複数であり、複数の光源13に含まれる光源は、互いに独立に点灯可能である。この構成によれば、どの光源13から射出された光線であるのかを区別することができる。これによって、撮像光学系12で得られた撮像画像から、検査対象23の散乱光の情報をより詳細に取得することができ、検査の精度をより一層向上できる。
以下の変形例、および第2実施形態では、主として、上記第1実施形態および第1実施例とは異なる部分について説明し、それらと共通する部分については、図示および説明を省略する。
(変形例)
本変形例では、光学検査装置11において、複数の光源13の色が互いに異なっている。それ以外の点は、上記実施形態と共通している。
例えば、複数の光源13のうち1つを赤色LEDで構成し、複数の光源13のうち他の1つを青色LEDとし、複数の光源13のうち他の1つを緑色LEDとし、複数の光源13のうち他の1つを白色LEDとしてもよい。複数の光源13の色の組み合わせは、この例に限られず、任意の色の組み合わせにしても当然によい。本変形例によれば、どの方位から射出された光線かを色によって区別することができる。すなわち、撮像光学系12で撮像された色から、より詳細な散乱情報が取得できるという効果がある。
[第2の実施形態]
図6〜図8を参照して、第2実施形態の光学検査装置11について説明する。本実施形態では、導光体15の構成が異なっているが、他の部分は第1実施形態と共通している。
導光体15は、透光性の材料によって、中空の方形筒状(升状)に構成されている。複数の光源13(4個の光源13)は、方形の筒状の導光体15の角部に対応する4か所に設けられる。導光体15の中心軸は、撮像光学系12の光軸14と一致している。導光体15は、内部に、十分に大きな中空領域15Aを有している。したがって、導光体15の内面が撮像光学系12の視野範囲18に入らないようになっている。このため、本実施形態では、撮像光学系12の視野角が広く確保される。また、本実施形態では、導光体15を方形筒状とすることによって、導光体15の高さを自由に変更可能となっている。
導光体15は、光に対して透明な材料であればよく、たとえばアクリル等の透光性の樹脂材料を好適に用いることができるが、導光体の材料はこれに限られるものではない。導光体15の材料としては、ポリカーボネート、ガラスなどであってもよい。導光体15は、射出成形や機械加工(フライス盤やNCフライス盤等による切削加工)によって形成できる。
図6、図7に示すように、導光体15は、内面31(内周面)と、外面32(外周面)と、撮像光学系12側の第1端面33(入射面)と、内面31に設けられた平坦な全反射面35と、内面31に設けられた平坦な透過面36と、を有する。内面31は主光軸14に近い側の面であり、外面32は主光軸14から遠い側の面である。本実施形態では、導光体15の内面31と外面32との間の厚み寸法Wは、全反射面35および次に述べる第2全反射面47との間では、一定に維持されている。
内面31の全反射面35および透過面36は、透明である。全反射面35は、透過面36よりも光源13に近い位置に設けられる。内面31の全反射面35および透過面36には、表面処理、例えばバフ研磨等がなされて平滑化されている。ただし、内面31に対する表面処理としてはこの限りではない。内面31の透過面36をサンドブラスト処理等で荒らして、透過面36を透過する光を拡散できる拡散面としてもよい。全反射面35は、第1端面33から導光体15内に入射された光を内部全反射させることができる。透過面36は、ミラー面37で反射された光を検査対象23に向けて透過させる。その際、透過面36は、透過面36を透過する光を屈折させる。
本実施形態では、全反射面35と透過面36との間に境界は存在せず、両者は連続的である。したがって、全反射面35と透過面36との中間地点では、ある光線に対しては全反射面35として働き、他の光線に対しては透過面36として働く。このように全反射面35と透過面36との間の境界をグレーにすることで、マイナーな光線も検査対象に向かわせることができ、結果的に器具効率の向上に寄与できる。
外面32は、光源13側(撮像光学系12側)に設けられた平坦な第2全反射面47と、検査対象23側に設けられたミラー面37と、を有する。第2全反射面47は、透明である。第2全反射面47は、1以上の光源13から導光体15内に入射された光を内部全反射させることができる。外面32の第2全反射面47には、表面処理、例えばバフ研磨等がなされて平滑化されている。
ミラー面37は、導光体15の検査対象23側の端部の外側に設けられた面取り部46に形成されている。すなわち、面取り部46は、導光体15の検査対象23側の端部の角部を面取りした形状に形成される。この形状は、導光体15の先端部に約45°の角度のテーパーを設けたとも言い換えられる。
ミラー面37は、光源13から導光体15内に入射された光を検査対象23に向けて反射できる。ミラー面37には、外面32の面取り部46にアルミニウム等を蒸着させることによって、ミラー面処理がされている。ただし、ミラー面37の形成方法としては、この限りではなく、例えば、ミラー面37を備えた別部材を外面32に密着させ、外面32の面取り部46で反射を起こさせる構造としてもよい。
本実施形態においても、ミラー面37が設けられる位置において、導光体15の内面31と外面32との間の厚み寸法Wは、撮像光学系12から遠ざかるにつれて小さくなっている。
導光体15からの光が照射される照射野は、導光体15の先端である第2端面34から、例えば、5mmの位置に設置されるが、これに限定されるものではない。
図7、図8(a)、(b)を参照して、本実施形態の光学検査装置11の作用について説明する。1以上の光源13から導光体15に入射された光は、全反射面35で内部全反射されるとともに、第2全反射面47においても内部全反射される。これらの面で内部全反射される回数は、複数回であってもよい。全反射面35で内部全反射された光は、ミラー面37に到達し、ミラー面37で検査対象23側に反射される。ミラー面37で反射された光は、透過面36で屈折されて、検査対象23に向けて透過される。撮像光学系12は、このように検査対象23に照射され、検査対象23で反射された光(散乱光)を検出することで、検出対象23の画像を取得できる。
図8(a)に、光線追跡シミュレーションを用いた照度分布を示す。図8(b)は、図6のF8(b)−F8(b)線の位置(光軸14と交わる直線上)で、図8(a)の照度分布を示した図である。両図より、照射野(検査面42)において、略均一な照度分布が実現されていることがわかる。なお、図8(b)で、5E+04は、5×10の意味である。同図の単位はLuxである。
本実施形態によれば、以下のことがいえる。
導光体15は、方形の筒状である。この構成によれば、導光体15の形状を単純にして、導光体15の製造コストを低減できる。
ミラー面37は、導光体15の検査対象23側の端部の外側に設けられた面取り部46に設けられる。この構成によれば、面取り部46においてミラー面37を形成して検査対象23に光を案内する構造としているために、導光体15の高さを問わない形状にすることができる。すなわち、検査対象23に対して、例えば、光源13等からの熱の影響を及ぼしたくない場合には、導光体15の高さを高くして、検査対象23と光源13との距離を大きくすることもできる。また一方で、例えば、設置スペースの関係から導光体15をコンパクト化したい場合には、導光体15の高さを低く抑えて光学検査装置11をコンパクト化することもできる。したがって、光学検査装置11の設計の自由度を向上することができ、種々の検査機器や製造機械、生産ライン等への採用が期待できる。
1以上の光源13は、方形の筒状の導光体15の角部に対応する位置に設けられる。この構成によれば、導光体15において光源13からの光を周方向に均一に広げることができる。これによって、照射野(検査面42)において十分な明るさを確保することができる。また、光源13から射出され導光体15内に入射された光を導光体15内で広げることで、エタンデュの法則を利用して、透過面36から検査対象23に向かう光を狭配光にすることができる。これによって、高精度な検査を実施することができる。さらに、光源13の数も4個で済み、光源の数を低減することができる。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これらの新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。また、各実施形態及び変形例に記載された発明を適宜に組み合わせて一つの発明を実現することも当然にできる。
11…光学検査装置、12…撮像光学系、13…光源、14…光軸、15…導光体、16…基板、16A…貫通孔部、23…検査対象、24…制御回路、31…内面、32…外面、33…第1端面、35…全反射面、36…透過面、37…ミラー面、45…導光凸部、46…面取り部。

Claims (18)

  1. 検査対象と対向する撮像光学系と、
    前記撮像光学系の周囲に設けられた1以上の光源と、
    前記撮像光学系の光軸に沿って筒状に延びるとともに、その端面が前記1以上の光源と対向した導光体と、
    前記導光体の内面に設けられ、前記端面から前記導光体内に入射された光を内部全反射させる全反射面と、
    前記導光体の外面に設けられ、前記光源から前記導光体内に入射された光を前記検査対象に向けて反射するミラー面と、
    前記導光体の内面に設けられ、前記ミラー面で反射された光を前記検査対象に向けて透過させる透過面と、
    を備える光学検査装置。
  2. 前記全反射面は、前記透過面よりも前記光源に近い領域が存在する請求項1に記載の光学検査装置。
  3. 前記撮像光学系の入射瞳面から前記検査対象までの距離をlとし、
    前記導光体から射出される主光線の配光角をθとし、
    前記光軸から前記内面の最近接距離をRとし、
    前記光軸に沿う方向に関する前記入射瞳面からの前記導光体の延長距離をLとしたとき、
    Figure 0006976914
    の関係を満たす請求項1又は請求項2に記載の光学検査装置。
  4. 前記導光体の前記内面は、前記撮像光学系の視野範囲よりも外側に位置する請求項1〜3のいずれか1項に記載の光学検査装置。
  5. 前記導光体の前記内面と前記外面との間の厚み寸法は、前記撮像光学系から遠ざかるにつれて小さくなる請求項1〜4のいずれか1項に記載の光学検査装置。
  6. 前記1以上の光源は、前記光軸を中心とする1つの円周上に配置される請求項1〜5のいずれか1項に記載の光学検査装置。
  7. 前記導光体は、円筒形である請求項1〜6のいずれか1項に記載の光学検査装置。
  8. 前記導光体の前記内面の直径は、前記光源から遠ざかるにつれて大きくなる請求項1〜7のいずれか1項に記載の光学検査装置。
  9. 前記導光体の前記内面に沿うように、前記端面から前記1以上の光源に向けて突出するとともに、前記導光体と連続して設けられた筒状の導光凸部を備え、
    前記導光凸部の厚み寸法は、前記内面と前記外面との間の厚み寸法よりも小さい請求項1〜8のいずれか1項に記載の光学検査装置。
  10. 前記導光体の前記ミラー面は、前記光軸から遠ざかる方向に凸になった円弧面である請求項1〜9のいずれか1項に記載の光学検査装置。
  11. 前記導光体の前記内面は、前記光軸に近づく方向に凸になった円弧面である請求項1〜10のいずれか1項に記載の光学検査装置。
  12. 前記導光体は、方形の筒状である請求項1〜6のいずれか1項に記載の光学検査装置。
  13. 前記ミラー面は、前記導光体の前記検査対象側の端部の外側に設けられた面取り部に設けられる請求項1〜6、請求項12のいずれか1項に記載の光学検査装置。
  14. 前記1以上の光源は、方形の筒状の前記導光体の角部に対応する位置に設けられる請求項12に記載の光学検査装置。
  15. 前記1以上の光源と熱的に接続されたヒートシンクを備える請求項1〜14のいずれか1項に記載の光学検査装置。
  16. 前記1以上の光源を実装した基板であって、前記撮像光学系を通すための貫通孔部を有する基板を備える請求項1〜15のいずれか1項に記載の光学検査装置。
  17. 前記1以上の光源は、互いに間隔を空けた複数であり、
    前記複数の光源に含まれる光源同士は、互いに色が異なる請求項1〜16のいずれか1項に記載の光学検査装置。
  18. 前記1以上の光源は、互いに間隔を空けた複数であり、
    前記複数の光源に含まれる光源は、互いに独立に点灯可能である請求項1〜17のいずれか1項に記載の光学検査装置。
JP2018173038A 2018-09-14 2018-09-14 光学検査装置 Active JP6976914B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018173038A JP6976914B2 (ja) 2018-09-14 2018-09-14 光学検査装置
US16/288,301 US10901134B2 (en) 2018-09-14 2019-02-28 Optical inspection apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018173038A JP6976914B2 (ja) 2018-09-14 2018-09-14 光学検査装置

Publications (2)

Publication Number Publication Date
JP2020046232A JP2020046232A (ja) 2020-03-26
JP6976914B2 true JP6976914B2 (ja) 2021-12-08

Family

ID=69773916

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018173038A Active JP6976914B2 (ja) 2018-09-14 2018-09-14 光学検査装置

Country Status (2)

Country Link
US (1) US10901134B2 (ja)
JP (1) JP6976914B2 (ja)

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4617619A (en) * 1985-10-02 1986-10-14 American Sterilizer Company Reflector for multiple source lighting fixture
US4706168A (en) * 1985-11-15 1987-11-10 View Engineering, Inc. Systems and methods for illuminating objects for vision systems
US4731649A (en) * 1986-09-11 1988-03-15 Vistech Corp. Oblique illumination for video rim inspection
EP0657732A1 (de) * 1993-12-06 1995-06-14 Elpatronic Ag Verfahren und Vorrichtung zur optischen Prüfung eines durchsichtigen Behälterbereichs, insbesondere des Mündungsbereichs
US5923419A (en) * 1997-06-16 1999-07-13 Insight Control Systems International System and method for optical inspection of recessed surfaces
US6788411B1 (en) * 1999-07-08 2004-09-07 Ppt Vision, Inc. Method and apparatus for adjusting illumination angle
JP2002328094A (ja) 2001-05-02 2002-11-15 Nidec Tosok Corp Ledリング照明及びそれを備えた画像検査装置
US6614596B2 (en) * 2001-07-25 2003-09-02 Mitutoyo Corporation Systems and methods for increasing illumination density within a field of view of an imaging system
US20080024794A1 (en) * 2004-06-04 2008-01-31 Yoko Miyazaki Semiconductor Surface Inspection Apparatus and Method of Illumination
JP4468857B2 (ja) * 2005-05-17 2010-05-26 株式会社小糸製作所 車両用照明灯具
JP2007263787A (ja) * 2006-03-29 2007-10-11 Nix Inc リング状集中照射器具、および照射角度の調節装置
JP2008203093A (ja) * 2007-02-20 2008-09-04 Mitsutoyo Corp 照明装置、画像測定装置
JP2008209726A (ja) 2007-02-27 2008-09-11 Olympus Corp 照明装置
JP5394805B2 (ja) 2009-04-17 2014-01-22 株式会社ミツトヨ リング照明装置
IT1395546B1 (it) * 2009-08-04 2012-09-28 Sacmi Apparato e metodo di ispezione di elementi concavi, come contenitori, tappi o simili.
JP5565775B2 (ja) * 2011-10-25 2014-08-06 株式会社栗原工業 Led照明装置
JP5786068B2 (ja) * 2014-06-10 2015-09-30 スタンレー電気株式会社 車両用灯具ユニット
ITUB20155377A1 (it) * 2015-11-09 2017-05-09 Rimsa P Longoni S R L Lampada scialitica a led, particolarmente per sale operatorie e simili.
JP7224937B2 (ja) * 2019-01-30 2023-02-20 株式会社東芝 光学検査装置

Also Published As

Publication number Publication date
US20200088933A1 (en) 2020-03-19
JP2020046232A (ja) 2020-03-26
US10901134B2 (en) 2021-01-26

Similar Documents

Publication Publication Date Title
US10732102B2 (en) Optical test apparatus and optical test method
KR101857539B1 (ko) 검사용 조명 장치 및 검사 시스템
JP5181321B2 (ja) 光照射装置
US11415510B2 (en) Optical inspection apparatus
WO2019111426A1 (ja) 検査システム及び検査方式
JP5471477B2 (ja) ネジ山の検査装置
US20200182801A1 (en) Lighting device and inspection apparatus
US20080062424A1 (en) Compact Ringlight
TWI647465B (zh) 光學檢測系統
KR20140060946A (ko) 전자재료 가공부위 측정용 조명장치 및 이를 적용한 검사 장치
JP6976914B2 (ja) 光学検査装置
JP7224937B2 (ja) 光学検査装置
TWI400441B (zh) 照明系統及用於提供一列光線之方法
TWI825682B (zh) 整合型光源裝置及其光學檢測系統
JP2017003412A (ja) レンズ検査装置及びレンズ検査方法
JP6749084B2 (ja) Led照明装置
JP2006202665A (ja) 光源装置
TW202125034A (zh) 光源裝置及光學檢測系統
US20180329190A1 (en) Multi-Stop Illuminator for Video Inspection System with Stepped Aperture Settings
JP7086780B2 (ja) 光学素子、照明装置
Dubovikov et al. Features of the use of LEDs in artificial-vision systems
US11249028B2 (en) Apparatus for inspecting object surface
JP6766825B2 (ja) 測色装置
JP4628256B2 (ja) 透明体の内面検査方法
CN117111319A (zh) 一种平行光源装置及暗场检测系统

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200625

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210511

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210708

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211012

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211110

R151 Written notification of patent or utility model registration

Ref document number: 6976914

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151