JP6936995B2 - 立体物の外観検査装置 - Google Patents

立体物の外観検査装置 Download PDF

Info

Publication number
JP6936995B2
JP6936995B2 JP2016167864A JP2016167864A JP6936995B2 JP 6936995 B2 JP6936995 B2 JP 6936995B2 JP 2016167864 A JP2016167864 A JP 2016167864A JP 2016167864 A JP2016167864 A JP 2016167864A JP 6936995 B2 JP6936995 B2 JP 6936995B2
Authority
JP
Japan
Prior art keywords
dimensional object
image
acquired
inspection
image acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016167864A
Other languages
English (en)
Other versions
JP2018036094A (ja
Inventor
宏和 山田
宏和 山田
Original Assignee
株式会社オービット
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社オービット filed Critical 株式会社オービット
Priority to JP2016167864A priority Critical patent/JP6936995B2/ja
Publication of JP2018036094A publication Critical patent/JP2018036094A/ja
Application granted granted Critical
Publication of JP6936995B2 publication Critical patent/JP6936995B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、立体物を回転させてその外観を検査する外観検査装置に関するものであり、より詳しくは、その立体物の全面画像を種々の角度から撮影して検査できるようにした外観検査装置に関するものである。
従来、歯車や丸鋸などのような軸対称の立体的を検査する外観検査装置が各種提案されている。
このような装置は、一般的に、軸対称の立体物を回転させながらカメラで撮影を行うとともに、その撮影された表面画像と基準画像とを比較することで、検査対象物の良否を検査できるようにしている(特許文献1、2など)。
このような立体物の外観検査措置の構成について、図8を用いて説明する。
図8において91は検査対象物であり、歯車、丸鋸などのような軸対称な立体物で構成されるものである。この立体物91の中心には、その立体物91を回転させるための軸穴92が設けられており、その軸穴92を中心に回転させるようにしている。また、符号93はその立体物91を検査のために保持して回転させる回転装置であって、立体物91の軸穴92に回転軸93Cを取り付けて回転させるようにしたものである。また、符号94は画像取得部であり、照明装置94aやカメラ94bなどによって構成されるものである。
このような装置を用いて立体物91を検査する場合、検査対象物である立体物91を取り出して、回転装置93の回転軸93Cに取り付けるとともに、その立体物91の対称軸を中心に回転させる。そして、その回転の位相に同期して外周部分に設けられた同一形状である凹凸などをカメラ94bで撮影し、これと基準画像とを比較することでその形成状態の良否を検査するようにしている。
特開2012−63254号 特開2014−115222号
ところで、このような装置を用いて立体物の形成状態を検査する場合、次のような問題がある。
すなわち、このような立体物の外周部分の凹凸を検査する場合、その凹部の底面部分だけでなく、その側壁面やエッジなどの他の部位も検査する必要がある。しかしながら、従来の検査装置で種々の方向から画像を取得して検査しようとすると、それぞれの位置にカメラを設けなければならず、コストが掛かってしまう。
また、このような立体物を回転装置に取り付ける場合、検査待ちの立体物の中から一つの立体物を取り出して、手でその回転装置に取り付けなければならないが、カメラが複数設けられていると、その回転装置がカメラで囲まれてしまうために、立体物を装着するのに時間が掛かってしまうといった問題があった。
そこで、本発明は上記課題に鑑みて、立体物の外観を検査する場合、簡単かつ迅速に種々の方向から画像を取得して検査できるようにすることを第一の目的とし、また、このような立体物を検査する場合、その立体物を回転装置に取り付ける手間を省いて迅速に検査を行えるようにすることも目的とする。
すなわち、本発明は上記課題を解決するために、外周部に同一形状を有する軸対称な立体物の外観を検査する外観検査装置において、前記立体物を把持する把持部を有し、当該把持部に把持された立体物を軸対称の軸を中心に回転させるとともに、当該軸の位置や角度を変化させるアームと、当該アームの把持部に把持された立体物の画像を取得する画像取得部と、前記立体物の外周部を異なる方向から撮像できるように、立体物の位置を制御するとともに、前記アームおよび前記画像取得部に対して、前記立体物の軸を中心に回転させる回転量と、画像を取得するタイミングとを同期させる制御部と、前記画像取得部で取得された画像を検査する検査部とを備えるようにしたものである。
本発明によれば、同じ方向から全面画像を取得することができるとともに、その回転軸の位置や角度を変化させることで、種々の位置や角度から画像を取得して簡単かつ迅速な検査を行うことができるようになる。
本発明の一実施の形態における外観検査装置を示す図 同形態における把持部を示す図 同形態における第一の位置で画像を取得した図 同形態における第二の位置で画像を取得した図 同形態における第三の位置で画像を取得した図 同形態における第四の位置で画像を取得した図 同形態における検査のフローチャート 従来例を示す図
以下、本発明の一実施の形態について図面を参照しながら説明する。
この実施の形態における立体物2の外観検査装置1は、歯車や丸鋸などのような外周部分に同一の形状を有する軸対称な立体物2を検査できるようにしたものであって、図1に示すように、立体物2を把持する把持部4と、この把持部4で把持された立体物2を対称軸を中心に回転させるロボット3と、当該回転する立体物2から外観画像を取得する画像取得部6と、当該画像取得部6で取得された画像に基づいて外観の良否を検査する検査部7とを備えるようにしたものである。そして、特徴的に、そのロボット3を用いて立体物2の回転軸を平行移動させたり傾斜させたりした状態で立体物2を360度回転させ、その回転の位相に同期して取得された画像に基づいて立体物2の外観を検査できるようにしたものである。以下、本実施の形態における外観検査装置1について詳細に説明する。
まず、検査対象物である軸対称な立体物2としては、歯車や丸鋸などのように、外周部分に歯車の凹凸や丸鋸刃などの同一の形状を有するものであって、ここでは、中心に軸穴21を有するものを用いて説明する。このような立体物2は、外周部分に同一の凹凸などが均等に配置されており、この立体物2を回転させながら位相と同期を取って撮影することにより、同一形状の画像を取得できる。なお、ここでは立体物2の例として、歯車や丸鋸などを例に挙げて説明するが、これ以外にスリーブやナットなどのような軸対称な立体物を用いることもできる。
ロボット3は、この検査対象物である立体物2を三次元(xyz)方向に移動させるとともに、これらの各軸回りに回転させるようにしたものであって、ここでは六軸多関節ロボットが用いられる。この六軸多関節ロボットは、図1に示すように、鉛直軸を中心に水平面内で回転するベース部31と、そのベース部31上に設けられた関節32を中心に前後方向に傾動する第一アーム33と、その第一アーム33の先端側に設けられた関節34a、34bを中心に上下方向に動かすとともに長手方向の軸を中心に回転する第二アーム35と、その第二アーム35の先端側に設けられた関節36を中心に上下方向に動かす第三アーム37と、その第三アーム37の先端側でその長手方向の軸回りに回転する回転機構38とを備えて構成されている。この回転機構38の先端には、図2に示すような立体物2を把持するための把持部4が設けられており、この把持部4によって立体物2を把持させて回転させられるようになっている。この把持部4には、立体物2を把持できるように、軸穴21に挿入して内側から押圧させる複数の分割片41を設けるようにしており、その分割片41を中心に寄せることによって立体物2の軸穴21に挿入できるようにしている。そして、立体物2の軸穴21を把持させる場合は、その分割片41を外側に拡大させることで径を大きくして軸穴21を内側から押圧させるようにしている。これらの分割片41には、立体物2をその把持部4の慣性主軸Cに対して鉛直に保持できるようにしたフランジ部42が設けられており、このフランジ部42を立体物2の表面を接触させて把持させるようにしている。
制御部5は、このロボット3の各関節32、34a、34b、36に設けられたモーターや、把持部4を取り付けた回転機構38、その把持部4の分割片41などの駆動させるようにしたもので、あらかじめコンピュータで設定された条件に従ってロボット3や把持部4を駆動させるようにしている。この制御部5を用いてロボット3を駆動させる場合、分割片41を用いて立体物2を把持させた後、カメラ62の前方まで移動させ、その位置で、回転機構38を用いて把持部4を360度回転させるようにする。そして、立体物2の外周の画像を取得して検査が終了した後、その結果に応じて、良品や不良品ごとに分けられた位置にアーム33、35、37を移動させて、立体物2を振り分け回収させるようにしている。
画像取得部6は、このロボット3の把持部4に把持された立体物2の画像を取得できるようにしたものであって、ここでは照明装置61やカメラ62で構成されている。このカメラ62は、照明装置61から照射された光が正反射しない位置に一台だけ設けられており、これによって強い反射光を避けて表面画像を取得できるようにしている。なお、これらの照明装置61としては、LEDや蛍光灯、ハロゲンランプなどのような光源に拡散板などを設けて均一な光を照射できるようにしたものなどが用いられ、また、カメラ62としては、ラインセンサ、エリアセンサなどを用いることができる。この画像取得部6で画像を取得する場合、その周囲に形成された凹凸などの同一画像を取得できるように立体物2の回転と同期して撮影を行うようにする。この同期を行う方法としては、立体物2の外周部分に設けられたセンサーによって同期を行うようにしてもよいし、あるいは、モーターの回転角度に応じて同期を行うようにしてもよい。
検査部7は、この画像取得部6で取得された画像に基づいて立体物2の形成状態の良否を検査できるようにしている。この検査を行う方法については種々の方法を用いることができるが、ここでは、あらかじめ記憶された基準画像に関する情報と、検査対象物の画像から取得された情報とを比較することで検査を行えるようにしている。具体的には、検査対象物の検査を行う場合、あらかじめ、良品の立体物2から複数の画像を取得しておき、それぞれの立体物2の画素における輝度値を取得しておく。そして、各画像の同じ位置における画素の輝度値の正規分布から、良品と判断できる輝度幅をその画素に対応させて記憶させておく。そして、検査対象物から画像が取得された場合、まず、その検査対象物の画像と基準画像の位置合わせを行った後、検査対象物の画素の輝度値を取得する。そして、その検査対象物から取得された画素の輝度値と、これに対応してあらかじめ記憶されたその画素の輝度幅とを比較し、その検査対象物の輝度値が所定の輝度幅の範囲内に含まれている場合は、良画素と判断する。一方、検査対象物から取得された画素の輝度値が、その所定幅の輝度幅に含まれていない場合は、不良画素と判断する。そして、隣接して存在する画素の面積の大きさを算出し、その面積が所定の大きさを超えた場合に、「不良」として出力する。この「不良」を出力する方法としては、ディスプレイに「不良」である旨の情報とともに不良領域の画像を表示させるようにしてもよい。あるいは、その検査対象物を不良品用の回収部に回収させるための駆動用の制御信号として出力するようにしてもよい。
次に、このような検査対象物の位置と画像取得部6の位置関係における画像の取得状況について説明する。
まず、図3に示すように、歯車の正面位置である第一の位置では、歯車の凹部22の底面や凸部23の凸面の明確な画像を取得することができる。そこで、制御部5では、この第一の位置で凹部22の底面や凸部23の凸面の画像を取得できるような位置に立体物2を移動させ、その位置で回転機構38を駆動させる。すると、その回転機構38に取り付けられた把持部4とともに立体物2が慣性主軸Cを中心に回転し、この回転の位相と同期して撮影を行うことで、その外周部分に形成された同一画像を複数枚取得して検査を行うことができる。
一方、図4に示すように、立体物2の中心から外れた第二の位置では、凹凸の一方の壁面24aの画像を取得することができる。そこで、制御部5では、この第二の位置で凹部22の壁面24aの画像を取得できるように立体物2を水平移動させ、同様に、この位置で回転機構38を駆動させる。そして、把持部4に把持された立体物2を慣性主軸を中心に回転させ、この回転の位相に同期して撮影を行うことで、その壁面24aの画像を複数取得して検査できるようにする。
また、図5に示すように、立体物2の中心から反対側に外れた第三の位置では、凹凸の他方の壁面24bの画像を取得することができる。そこで、制御部5では、この第三の位置で凹部22の壁面24bの画像を取得できるように立体物2を水平移動させ、同様にして、この位置で回転機構38を駆動させ、これに伴って、把持部4に把持された立体物2を慣性主軸Cを中心に回転させる。そして、この回転の位相に同期して撮影を行うことで、その壁面24bと同一画像を複数枚取得して検査できるようにする。
さらに、図6に示すように、立体物2の回転軸を90度傾斜させた第四の位置では、立体物2の表面方向から見た外周の凹凸形状の画像を取得することができる。そこで、制御部5を介して、この第四の位置に立体物2を移動させ、同様に、この位置で回転機構38を駆動させ、これに伴って、把持部4に把持された立体物2を慣性主軸Cを中心に回転させる。そして、この回転の位相に同期して撮影を行うことで、その外周部分に形成された同一の輪郭形状の画像を複数枚取得して検査できるようにする。
次に、このように構成された外観検査装置1の使用方法について図7のフローチャートを用いて説明する。
まず、この検査対象物である立体物2はベルトコンベアや集積部などにストックされているものとする。
このような検査待ちの立体物2を検査する場合、図示しないセンサーなどを用いて立体物2の位置を検出してアーム33、35、37を移動させ、把持部4で立体物2を把持させる(ステップS1)。この把持の動作においては、分割片41を中央に寄せた状態で立体物2の軸穴21に挿入し、フランジ部42をその立体物2の表面に当接させた状態で分割片41を拡大させて、内側から軸穴21を押圧する。
そして、このように立体物2を把持した状態で、図3に示すように、立体物2をカメラ62の前方である第n(n=1)の位置まで移動させる(ステップS2)。なお、ここで「第nの位置」における初期値は「n=1」に設定されているものとする。
そして、そこでロボット3の回転機構38を駆動させて立体物2を360度回転させるとともに、この回転の位相と同期してカメラ62で撮影を行い、その表面に形成された同一画像を複数枚取得する(ステップS3)。
この画像取得と並行して、取得された各画像と基準画像との位置合わせを行い、取得された画像における各画素の輝度値が基準画像の画素に対して所定の輝度幅の範囲内に含まれているか否かによって、各画素の良否を判断する(ステップS4)。このとき、不良と判断された画素が隣接して所定面積以上存在している場合は「不良」と判断し(ステップS5:No)、回収用のボックスなどにアーム33、35、37を移動させて回収する(ステップS7)。一方、良品と判断された場合は、良品用のベルトコンベアや集積部などに移動させて良品として回収する(ステップS6)。
次に、このように第一の位置における検査が終了した場合、図4に示すように、ロボット3を用いて立体物2を第n(n=2)の位置に水平移動させ(ステップS8〜S9、S2)、同様にして、立体物2を回転させて、片方の壁面24aの画像を取得し、検査結果に応じた回収を行うようにする(ステップS3〜S7)。
今度は、逆に他方の壁面24bの検査を行うべく、図5に示すように、ロボット3を用いて立体物2を第n(n=3)の位置に水平移動させ(ステップS8〜S9、S2)、同様にして、立体物2を回転させて壁面24bの画像を取得し、その検査結果に応じた回収を行うようにする(ステップS3〜S7)。
また、必要に応じて、図6に示すように、立体物2の回転軸を90度ほど傾斜させて第n(n=4)の位置に立体物2を移動させ(ステップS8〜S9、S2)、同様にして、立体物2の表裏面の凹凸形状の画像取得や、その検査や回収などを行うようにする(ステップS3〜S7)。
このように上記実施の形態によれば、外周部に同一形状を有する軸対称な立体物2の外観を検査する外観検査装置1において、前記立体物2を把持する把持部4を有し、当該把持部4に把持された立体物2を軸対称の慣性主軸Cを中心に回転させるとともに、当該慣性主軸Cの位置や角度を変化させるアーム33,35、37と、当該アーム33,35、37の把持部4に把持された立体物2の画像を取得する画像取得部6と、前記立体物2の外周部を異なる方向から撮像できるように、立体物2の位置を制御するとともに、前記アーム33,35、37および前記画像取得部6に対して、前記立体物2の慣性主軸Cを中心に回転させる回転量と、画像を取得するタイミングとを同期させる制御部5と、前記画像取得部6で取得された画像を検査する検査部7とを備えるようにしたので、同じ方向から全面画像を取得することができるとともに、その慣性主軸Cの位置や角度を変化させることで、種々の位置や角度から画像を取得して簡単かつ迅速な検査を行うことができるようになる。
なお、本発明は上記実施の形態に限定されることなく種々の態様で実施することができる。
例えば、上記実施の形態では、六軸多関節ロボットの先端部分の回転機構38を用いて立体物2を回転させるようにしたが、この六軸多関節ロボットの先端に別途新たな回転機構を設けて立体物2を360度回転させるようにしてもよい。
また、上記実施の形態では、ロボット3を用いて立体物2を回転させるとともに、その慣性主軸Cの変位や傾斜などを行わせるようにしたが、このようなロボット3を用いることなく、立体物2をステージの上に載置して慣性主軸Cを中心に360度回転させ、これによって、全面画像を取得できるようにしたもよい。そして、その際に、そのステージの回転軸を傾斜させるようにすることで、種々の角度からの画像を取得して検査できるようにしてもよい。
さらに、上記実施の形態では、立体物2の凹部22の底面や凸部23の表面、凹部22の両壁面24a、24b、凹凸の輪郭などを検査するようにしたが、これ以外に、立体物2の表面や裏面に形成された穴や模様、エッジの形成状態などを検査できるようにしてもよい。
1・・・外観検査装置
2・・・立体物
21・・・軸穴
22・・・凹部
23・・・凸部
24a、24b・・・壁面
3・・・ロボット
31・・・ベース部
32、34a、34b、36・・・関節
33、35、37・・・第一アーム、第二アーム、第三アーム
38・・・回転機構
4・・・把持部
41・・・分割片
42・・・フランジ部
5・・・制御部
6・・・画像取得部
61・・・照明装置
62・・・カメラ
7・・・検査部
8・・・制御部
C・・・慣性主軸

Claims (1)

  1. 外周部に同一形状を有する軸対称な立体物の外観を検査する外観検査装置において、
    前記立体物を把持する把持部を有し、当該把持部に把持された立体物を軸対称の軸を中心に回転させるとともに、当該軸の位置や角度を変化させるアームと、
    当該アームの把持部に把持された立体物の画像を取得する画像取得部と、
    前記立体物の外周部を異なる方向から撮像できるように、立体物の位置を制御するとともに、前記アームおよび前記画像取得部に対して、前記立体物の軸を中心に回転させる回転量と、画像を取得するタイミングとを同期させる制御部と、
    前記画像取得部で取得された画像を検査する検査部と、
    を備えるようにしたことを特徴とする外観検査装置。
JP2016167864A 2016-08-30 2016-08-30 立体物の外観検査装置 Active JP6936995B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016167864A JP6936995B2 (ja) 2016-08-30 2016-08-30 立体物の外観検査装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016167864A JP6936995B2 (ja) 2016-08-30 2016-08-30 立体物の外観検査装置

Publications (2)

Publication Number Publication Date
JP2018036094A JP2018036094A (ja) 2018-03-08
JP6936995B2 true JP6936995B2 (ja) 2021-09-22

Family

ID=61567276

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016167864A Active JP6936995B2 (ja) 2016-08-30 2016-08-30 立体物の外観検査装置

Country Status (1)

Country Link
JP (1) JP6936995B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109085173B (zh) * 2018-06-25 2021-04-16 盐城工学院 一种探伤检测人形机器人及其检测方法
CN109933070B (zh) * 2019-03-27 2022-05-31 上海理工大学 六轮救援旱地机器人的救援系统
JP2020201158A (ja) * 2019-06-11 2020-12-17 株式会社島津製作所 立体物の外観検査装置および立体物の外観検査方法
CN113666036A (zh) * 2020-05-14 2021-11-19 泰科电子(上海)有限公司 自动拆垛系统
CN112040124A (zh) * 2020-08-28 2020-12-04 深圳市商汤科技有限公司 数据采集方法、装置、设备、系统和计算机存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05189398A (ja) * 1992-01-14 1993-07-30 Fujitsu Ltd ニューラルネットワークによる学習方法
JPH06106490A (ja) * 1992-09-29 1994-04-19 Fujitsu Ltd 制御装置
JPH08222903A (ja) * 1995-02-17 1996-08-30 Dainippon Printing Co Ltd 信号伝送用ロータリージョイント
US8206116B2 (en) * 2005-07-14 2012-06-26 United Technologies Corporation Method for loading and locking tangential rotor blades and blade design
US20070058854A1 (en) * 2005-09-14 2007-03-15 Caskey Gregory T Gear pattern inspection system
JP4020144B2 (ja) * 2006-03-10 2007-12-12 オムロン株式会社 表面状態の検査方法
JP5564372B2 (ja) * 2010-09-16 2014-07-30 本田技研工業株式会社 ワーク検査装置及びその制御方法
JP2016120593A (ja) * 2016-04-06 2016-07-07 セイコーエプソン株式会社 ロボット制御装置及び組立て方法

Also Published As

Publication number Publication date
JP2018036094A (ja) 2018-03-08

Similar Documents

Publication Publication Date Title
JP6936995B2 (ja) 立体物の外観検査装置
JP4514007B2 (ja) 被検体の外観形状検査方法及び装置
JP5655936B2 (ja) ワークの欠陥検出装置
EP2508871A1 (en) Inspection apparatus, measurement method for three-dimensional shape, and production method for structure
JP5014003B2 (ja) 検査装置および方法
JP5014170B2 (ja) ワーク外観検査装置
WO2018034051A1 (ja) 検査装置および検査方法
JP2003240521A (ja) 被検体の外観・形状検査方法とその装置、及び、被検体の外観・形状検出装置
CN112730419A (zh) 外观瑕疵检测装置
TW201715221A (zh) 運用多軸機臂的光學檢查設備
JP2020201158A (ja) 立体物の外観検査装置および立体物の外観検査方法
KR20200046149A (ko) 영역 기반의 비젼 검사장치
JPH07243831A (ja) 紡糸口金自動検査装置及び検査方法
TWM479416U (zh) 元件檢測裝置
JP5425387B2 (ja) ガラス容器を検査するための機械
JP2002207011A (ja) ワークの外観検査装置
JPH0436644A (ja) 円筒内壁面の欠陥の検査方法
JP4981703B2 (ja) 外観検査装置および外観検査方法
JP7440975B2 (ja) 撮像装置と識別方法
JP7161159B2 (ja) 映像情報収集装置
JP2019163953A (ja) 外観検査装置
JP6402026B2 (ja) 接合ツール検査装置
TWI825932B (zh) 用於內螺紋瑕疵檢測之機構及方法
JP7374360B2 (ja) 軸受要素検査システムおよび方法
WO2023119882A1 (ja) ウエーハ外観検査装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190826

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190829

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200624

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200624

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200720

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201130

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210123

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210628

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210716

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210820

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210820

R150 Certificate of patent or registration of utility model

Ref document number: 6936995

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150