JP7024239B2 - 画像処理システム、画像処理装置および画像処理プログラム - Google Patents
画像処理システム、画像処理装置および画像処理プログラム Download PDFInfo
- Publication number
- JP7024239B2 JP7024239B2 JP2017143791A JP2017143791A JP7024239B2 JP 7024239 B2 JP7024239 B2 JP 7024239B2 JP 2017143791 A JP2017143791 A JP 2017143791A JP 2017143791 A JP2017143791 A JP 2017143791A JP 7024239 B2 JP7024239 B2 JP 7024239B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- storage
- image data
- collection
- conditions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0006—Industrial image inspection using a design-rule based approach
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30164—Workpiece; Machine component
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
Description
また、好ましくは、複数の保存条件の各々は、保存処理を有効とするか無効とするかを示す情報が付与されており、保存処理部は、有効な情報が付与された保存条件に基づいて保存処理を機能させる。
図1は、本発明の実施の形態に係る画像処理システム1の基本構成を示す模式図である。画像処理システム1は、主たる構成要素として、画像処理装置10とカメラ20とを含む。カメラ20は、ベルトコンベアのような搬送装置41によって搬送された対象物Wを撮像して画像データを生成する。画像処理装置10は、対象物Wの状態を計測するために、カメラ20が生成した画像データに対して画像計測処理を施すことで、画像計測を行う。
図2は、画像処理装置10のハードウェア構成について示す模式図である。画像処理装置10は、CPU(Central Processing Unit)11、メインメモリ12、ハードディスク13、カメラインターフェイス(I/F)14、表示コントローラ15、入力I/F16、外部メモリI/F17、および通信I/F18を含む。これらの各部は、バス19を介して、互いにデータ通信可能に接続される。
図3を参照して、画像処理装置10の機能全体について説明する。図3は、画像処理装置10の機能構成の一例を示す図である。CPU11は、画像計測プログラム131をメインメモリ12に展開して、実行することで、画像計測部111としての機能を果たす。画像計測プログラム131は、カメラ20が対象物Wを撮像して生成した画像データに基づいて、対象物Wの外観検査、対象物Wの位置情報の取得、対象物Wの品質検査等を行うためのプログラムである。画像計測部111は、特徴量算出部1111および評価部1112を含む。
図4を参照して、保存処理部112が処理情報を記憶部に出力する場合に実行する保存処理について説明する。図4は保存処理のフローチャートである。保存処理は、CPU11によって実現される処理である。本実施の形態において、保存処理は、一の画像計測処理が終了するごとに実行される。なお、保存処理は、所定間隔で実行される処理であってもよい。好ましくは、保存処理を所定間隔で実行する場合、CPU11は、処理を開始してから次の処理を開始するまでの間の時間を、処理を開始したときにバッファ領域120に一時的に保存されている全ての情報が他の情報に入れ替わるよりも前の時間に設定する。
図5を参照して、保存処理部112が保存処理を実行した場合の保存例を説明する。図5は、保存処理部112が、処理情報を複数の保存条件の各々に従って記憶部に保存していく様子を示す模式図である。図5中の上段には、バッファ領域120内を示す。中段には、計測結果DB134内を示す。下段には、サーバ50内を示す。図5においては、対象物Wごとに画像計測処理が行なわれたものとする。対象物W1に対する画像計測処理が終わると、対象物W2に対する画像計測処理が行なわれ、順次、画像計測処理の終了と開始とが繰り返されていくものとする。
図6~図10を用いて、保存条件を設定する際に、表示部31に表示される表示態様について説明する。図6は、保存条件の有効・無効を設定する際の保存条件選択画面311の一例を示す図である。ユーザは、チェックボックス701にチェックを入れることで有効にしたい保存条件を選択することができる。また、文字領域702を選択することで、選択した保存条件の内容を設定するための詳細設定画面312に切り替えることができる。
収集した収集結果の可視化について、図8~図10を参照して説明する。図8は、収集結果をヒストグラムとして可視化したときのヒストグラム画面313の一例である。図9および図10は、それぞれ、収集結果をトレンドモニタとして可視化したときのトレンドモニタ画面の一例である。また、収集結果の可視化は、解析部1131が表示内容を操作表示装置30に指示し、操作表示装置30が表示部31に指示内容の結果を表示することによって実現される。
図11を参照して、保存条件を設定したときに、保存条件の内容を見直すことをユーザに対して促す警告画面315について説明する。図11は、警告画面315の一例である。保存条件の内容を見直すべき状況としては、一の保存条件の一部または全部が他の保存条件の一部または全部と重複している状況が挙げられる。具体的には、一の収集条件が他の収集条件に包含されている状況、一の収集条件の一部が、他の収集条件の一部と重複している状況、一の保存条件における保存先および保存名が、他の保存条件における保存先および保存名と同じ状況などが挙げられる。
[I.収集条件]
本実施の形態において、収集条件として、特徴量または変化量の値に基づく条件を例に挙げたが、収集条件はこれらに限られない。図12は、収集条件の変形例を説明するための図である。
特徴量算出部1111は、生画像データに対して、複数種類の加工処理を行ってもよい。また、特徴量算出部1111は、特徴量を算出する過程で、複数の加工画像データを生成した場合に、バッファ領域120に、そのうちの一部のみを保存するようにしてもよく、或いは、その全部を保存するようにしてもよい。
上述のように、本実施の形態においては、保存条件として画像収集条件と画像収集規則を設定し、設定した保存条件で処理情報を保存することができる。また、画像処理装置10が画像計測をするために参照する画像計測条件とは別に画像収集条件を設定することができる。そのため、ユーザは、収集した処理情報の活用目的に合わせて画像収集条件を設定することができる。これにより、ユーザは保存した処理情報を容易に活用できる。また、必要な処理情報だけを保存することができるため、データ量を削減することができる。
Claims (12)
- 1または複数の記憶部と、
対象物を撮像して画像データを生成する撮像部と、
前記撮像部からの前記画像データに含まれる特徴量を算出するとともに、予め定められた画像計測条件に従って前記算出した特徴量を評価することで、前記対象物についての画像計測結果を出力する画像計測部と、
複数の保存条件の設定を受け付ける設定受付部と、
受け付けた前記複数の保存条件の各々に従い、前記画像データと当該画像データに対応する前記画像計測結果を示す属性情報とを、前記1または複数の記憶部のいずれかに保存する保存処理部とを備え、
前記複数の保存条件の各々は、前記画像計測条件とは独立して設定される1または複数の画像収集条件、および当該画像収集条件に対応付けられた画像収集規則を含み、
前記画像収集規則は、前記画像データの保存形式の規則と、前記画像データの保存場所の規則とを含み、
前記保存処理部は、前記画像データから算出された特徴量が、前記画像収集条件を満たす場合に、満たされた当該画像収集条件に対応付けられた前記画像収集規則に従って、前記画像データと当該画像データに対応する前記画像計測結果を示す属性情報とを、前記1または複数の記憶部に保存する、画像処理システム。 - 前記画像収集条件は、前記特徴量に対して設定される第1収集条件と、当該第1収集条件を満たす前記画像データのうちの一部を収集するために当該特徴量とは独立して設定される第2収集条件とを含む、請求項1に記載の画像処理システム。
- 前記保存形式の規則は、前記保存形式を前記画像データを圧縮する形式とするか否かの規則を含む、請求項1または請求項2に記載の画像処理システム。
- 前記画像データを圧縮する形式とするか否かの規則は、当該画像データを圧縮する場合に、当該画像データを圧縮前の状態に戻すことが可能な圧縮形式にするか否かの規則を含む、請求項3に記載の画像処理システム。
- 前記属性情報は、1または複数の情報を含み、
前記保存処理部は、前記画像データと前記属性情報とを保存するときに、当該属性情報のうちの少なくとも一の情報を保存名とする、請求項1から請求項4のうちいずれかに記載の画像処理システム。 - 前記画像収集規則は、前記保存名の規則を含み、
前記設定受付部は、前記保存名の規則の設定を受け付ける、請求項5に記載の画像処理システム。 - 前記設定受付部が受け付けた前記画像収集条件を満たす前記画像データを収集し、収集した前記画像データおよび当該画像データに対応する前記属性情報に基づいて収集結果を解析する解析部をさらに備える、請求項1から請求項6のうちいずれかに記載の画像処理システム。
- 前記解析部が収集した前記画像データに対応する前記属性情報を表示する表示部をさらに備える、請求項7に記載の画像処理システム。
- 前記1または複数の記憶部は、前記画像収集条件および前記画像収集規則を記憶し、
前記解析部は、前記設定受付部が受け付けた前記複数の保存条件のうち、重複する前記画像収集条件を検索し、
前記表示部は、前記解析部が検索した重複する前記画像収集条件を表示する、請求項8に記載の画像処理システム。 - 前記複数の保存条件の各々は、保存処理を有効とするか無効とするかを示す情報が付与されており、
前記保存処理部は、有効な情報が付与された保存条件に基づいて保存処理を機能させる、請求項1から請求項9のうちいずれかに記載の画像処理システム。 - 1または複数の記憶部と、
撮像装置が撮像した対象物の画像データを受け付けるインターフェースと、
前記撮像装置からの前記画像データに含まれる特徴量を算出するとともに、予め定められた画像計測条件に従って前記算出した特徴量を評価することで、前記対象物についての画像計測結果を出力する画像計測部と、
複数の保存条件の設定を受け付ける設定受付部と、
受け付けた前記複数の保存条件の各々に従い、前記画像データと当該画像データに対応する前記画像計測結果を示す属性情報とを、前記1または複数の記憶部のいずれかに保存する保存処理部とを備え、
前記複数の保存条件の各々は、前記画像計測条件とは独立して設定される1または複数の画像収集条件、および当該画像収集条件に対応付けられた画像収集規則を含み、
前記画像収集規則は、前記画像データの保存形式の規則と、前記画像データの保存場所の規則とを含み、
前記保存処理部は、前記画像データから算出された特徴量が、前記画像収集条件を満たす場合に、満たされた当該画像収集条件に対応付けられた前記画像収集規則に従って、前記画像データと当該画像データに対応する前記画像計測結果を示す属性情報とを、前記1または複数の記憶部に保存する、画像処理装置。 - 撮像装置が撮像した対象物の画像データを受け付けるステップと、
前記撮像装置からの前記画像データに含まれる特徴量を算出するステップと、
予め定められた画像計測条件に従って前記算出した特徴量を評価して、前記対象物についての画像計測結果を出力するステップと、
複数の保存条件の設定を受け付けるステップと、
受け付けた前記複数の保存条件の各々に従い、前記画像データと当該画像データに対応する前記画像計測結果を示す属性情報とを、1または複数の記憶部のいずれかに保存するステップとを備え、
前記複数の保存条件の各々は、前記画像計測条件とは独立して設定される1または複数の画像収集条件、および当該画像収集条件に対応付けられた画像収集規則を含み、
前記画像収集規則は、前記画像データの保存形式の規則と、前記画像データの保存場所の規則とを含み、
前記1または複数の記憶部のいずれかに保存するステップでは、前記画像データから算出された特徴量が、前記画像収集条件を満たす場合に、満たされた当該画像収集条件に対応付けられた前記画像収集規則に従って、前記画像データと当該画像データに対応する前記画像計測結果を示す属性情報とを、前記1または複数の記憶部に保存する、画像処理プログラム。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017143791A JP7024239B2 (ja) | 2017-07-25 | 2017-07-25 | 画像処理システム、画像処理装置および画像処理プログラム |
| US15/892,346 US10878555B2 (en) | 2017-07-25 | 2018-02-08 | Image processing system, image processing device, and non-transitory computer readable recording medium |
| DE102018102913.6A DE102018102913A1 (de) | 2017-07-25 | 2018-02-09 | Bildbearbeitungssystem, Bildbearbeitungsvorrichtung und Bildbearbeitungsprogramm |
| CN201810151500.3A CN109300080A (zh) | 2017-07-25 | 2018-02-13 | 图像处理系统与装置及非易失性的计算机可读记录介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017143791A JP7024239B2 (ja) | 2017-07-25 | 2017-07-25 | 画像処理システム、画像処理装置および画像処理プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019028511A JP2019028511A (ja) | 2019-02-21 |
| JP7024239B2 true JP7024239B2 (ja) | 2022-02-24 |
Family
ID=65003884
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017143791A Active JP7024239B2 (ja) | 2017-07-25 | 2017-07-25 | 画像処理システム、画像処理装置および画像処理プログラム |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US10878555B2 (ja) |
| JP (1) | JP7024239B2 (ja) |
| CN (1) | CN109300080A (ja) |
| DE (1) | DE102018102913A1 (ja) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6558724B1 (ja) * | 2019-03-07 | 2019-08-14 | オムロン株式会社 | データ管理システム |
| WO2020217434A1 (ja) * | 2019-04-25 | 2020-10-29 | 三菱電機株式会社 | データ収集装置、データ収集方法及びプログラム |
| JP2021144000A (ja) * | 2020-03-13 | 2021-09-24 | オムロン株式会社 | 検査システム、検査装置、及び検査プログラム |
| JP7803068B2 (ja) * | 2021-09-30 | 2026-01-21 | オムロン株式会社 | 画像検査方法、及び画像検査装置 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010272936A (ja) | 2009-05-19 | 2010-12-02 | Canon Inc | 画像処理装置、画像処理装置の制御方法、及びプログラム |
| JP2015232476A (ja) | 2014-06-09 | 2015-12-24 | 株式会社キーエンス | 検査装置、検査方法およびプログラム |
Family Cites Families (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2510687B2 (ja) * | 1987-08-13 | 1996-06-26 | 日本電信電話株式会社 | 高速欠陥検出方法および装置 |
| JP3310898B2 (ja) * | 1997-03-28 | 2002-08-05 | 三菱電機株式会社 | 画像処理装置 |
| JP3484601B2 (ja) * | 1997-08-27 | 2004-01-06 | オムロン株式会社 | 画像処理装置 |
| JP2000227316A (ja) * | 1999-02-04 | 2000-08-15 | Keyence Corp | 検査装置 |
| JP2000350156A (ja) * | 1999-06-09 | 2000-12-15 | Hitachi Ltd | 動画像情報の記憶方法及びこれを記録した記録媒体 |
| JP2001268509A (ja) * | 2000-03-17 | 2001-09-28 | Omron Corp | 画像記録装置及び画像記録システム |
| US6680748B1 (en) * | 2001-09-27 | 2004-01-20 | Pixim, Inc., | Multi-mode camera and method therefor |
| US7110569B2 (en) * | 2001-09-27 | 2006-09-19 | Koninklijke Philips Electronics N.V. | Video based detection of fall-down and other events |
| CN1500345B (zh) * | 2001-12-28 | 2010-06-02 | 索尼公司 | 显示设备和控制方法 |
| JP4200272B2 (ja) * | 2002-06-25 | 2008-12-24 | パナソニック電工株式会社 | 画像処理装置、これを含む画像処理システムおよび画像処理方法 |
| EP1704710A4 (en) * | 2003-12-24 | 2007-09-19 | Walker Digital Llc | METHOD AND DEVICE FOR AUTOMATIC COLLECTION AND MANAGEMENT OF IMAGES |
| JP2006079458A (ja) * | 2004-09-10 | 2006-03-23 | Fuji Photo Film Co Ltd | 画像伝送システム、画像伝送方法、及び画像伝送プログラム |
| JP2006119723A (ja) * | 2004-10-19 | 2006-05-11 | Canon Inc | 画像処理装置、画像処理方法 |
| JP2006261253A (ja) * | 2005-03-15 | 2006-09-28 | Omron Corp | プロセスデータ収集装置およびモデル作成装置ならびにモデル作成システム |
| WO2007023565A1 (ja) * | 2005-08-26 | 2007-03-01 | Beyond It Co., Ltd. | 画像診断用データ・サンプリング・システム並びに画像診断用データのサンプリング方法 |
| JP2007124239A (ja) * | 2005-10-27 | 2007-05-17 | Canon Inc | 画像記憶装置 |
| US7570796B2 (en) * | 2005-11-18 | 2009-08-04 | Kla-Tencor Technologies Corp. | Methods and systems for utilizing design data in combination with inspection data |
| JP4828265B2 (ja) * | 2006-03-13 | 2011-11-30 | セコム株式会社 | 画像センサ |
| JP5164368B2 (ja) * | 2006-12-07 | 2013-03-21 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| JP5733952B2 (ja) * | 2010-11-04 | 2015-06-10 | キヤノン株式会社 | 撮像装置、撮像システム、及び撮像装置の制御方法 |
| JP5716464B2 (ja) * | 2011-03-07 | 2015-05-13 | 富士通株式会社 | 画像処理プログラムおよび画像処理方法並びに画像処理装置 |
| JP5865707B2 (ja) * | 2012-01-06 | 2016-02-17 | 株式会社キーエンス | 外観検査装置、外観検査方法及びコンピュータプログラム |
| JP6205757B2 (ja) * | 2013-03-07 | 2017-10-04 | オムロン株式会社 | 制御システム、制御装置、画像処理装置、および、制御方法 |
| JP6242651B2 (ja) * | 2013-10-03 | 2017-12-06 | 株式会社日立製作所 | 早期状況把握方法、および装置 |
| JP6347589B2 (ja) * | 2013-10-30 | 2018-06-27 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
| JP2015119397A (ja) * | 2013-12-19 | 2015-06-25 | キヤノン株式会社 | 画像処理装置、画像処理方法ならびにプログラム |
| TWI582517B (zh) * | 2014-03-24 | 2017-05-11 | 群光電子股份有限公司 | 縮時攝影的方法及其電腦程式產品暨其具影像擷取功能的電子裝置 |
| JP6907880B2 (ja) * | 2017-10-24 | 2021-07-21 | オムロン株式会社 | 画像処理装置、画像処理システム、画像処理プログラム |
-
2017
- 2017-07-25 JP JP2017143791A patent/JP7024239B2/ja active Active
-
2018
- 2018-02-08 US US15/892,346 patent/US10878555B2/en active Active
- 2018-02-09 DE DE102018102913.6A patent/DE102018102913A1/de not_active Ceased
- 2018-02-13 CN CN201810151500.3A patent/CN109300080A/zh active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010272936A (ja) | 2009-05-19 | 2010-12-02 | Canon Inc | 画像処理装置、画像処理装置の制御方法、及びプログラム |
| JP2015232476A (ja) | 2014-06-09 | 2015-12-24 | 株式会社キーエンス | 検査装置、検査方法およびプログラム |
Non-Patent Citations (1)
| Title |
|---|
| 浅野 裕一,画像計測・検査システムの信頼性 [第9回] 検証ツール,映像情報インダストリアル,日本,産業開発機構(株),2010年05月,第42巻 第5号,pp.104-109 |
Also Published As
| Publication number | Publication date |
|---|---|
| US10878555B2 (en) | 2020-12-29 |
| CN109300080A (zh) | 2019-02-01 |
| US20190035072A1 (en) | 2019-01-31 |
| JP2019028511A (ja) | 2019-02-21 |
| DE102018102913A1 (de) | 2019-01-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7024239B2 (ja) | 画像処理システム、画像処理装置および画像処理プログラム | |
| US12368824B2 (en) | Machine-vision system and method for remote quality inspection of a product | |
| KR101968850B1 (ko) | 정보 처리 장치, 정보 처리 시스템 및 기록 매체 | |
| JP2020003301A (ja) | 外観検査システム、外観検査結果の表示方法、および、外観検査結果の表示プログラム | |
| DE112019005951T5 (de) | Zentralisierte Analyse mehrerer visueller Prüfvorrichtungen | |
| US20200193582A1 (en) | Information processing apparatus, information processing method, and non-transitory computer readable medium | |
| US20190355112A1 (en) | System and method of distributed processing for machine-vision analysis | |
| JP5060677B2 (ja) | 画像処理コントローラ及び検査支援システム | |
| JPH1032810A (ja) | 画像処理検査装置 | |
| CN109698958B (zh) | 图像处理装置、图像处理系统与记录介质 | |
| WO2020003887A1 (ja) | 外観検査システム、外観検査結果の表示方法、および、外観検査結果の表示プログラム | |
| CN114998263B (zh) | 用于百格测试的附着力分析方法及系统 | |
| JP6455590B2 (ja) | 画像処理システム、画像処理方法およびコンピュータプログラム | |
| JP2024131354A (ja) | 生産工程管理システム | |
| CN115136088B (zh) | 可编程显示器、控制系统及解析方法 | |
| JP7749489B2 (ja) | 映像解析装置および映像解析方法 | |
| JP5814668B2 (ja) | 画像処理装置 | |
| JP4944751B2 (ja) | 画像処理コントローラ | |
| JPH09259187A (ja) | 自動検査方法及びその装置 | |
| CN112543944B (zh) | 信息管理装置以及信息管理方法 | |
| CN119179416A (zh) | 信息提供装置、信息提供方法以及计算机可读取的存储介质 | |
| WO2022059612A1 (ja) | 検査結果表示装置、製造システム、検査結果表示方法、製造方法、及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180329 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200303 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210222 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210302 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210428 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210907 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211104 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220111 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220124 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7024239 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |