JP7103412B2 - 辞書学習装置、情報処理装置、辞書学習方法およびコンピュータプログラム - Google Patents
辞書学習装置、情報処理装置、辞書学習方法およびコンピュータプログラム Download PDFInfo
- Publication number
- JP7103412B2 JP7103412B2 JP2020521248A JP2020521248A JP7103412B2 JP 7103412 B2 JP7103412 B2 JP 7103412B2 JP 2020521248 A JP2020521248 A JP 2020521248A JP 2020521248 A JP2020521248 A JP 2020521248A JP 7103412 B2 JP7103412 B2 JP 7103412B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- image area
- recognized
- dictionary
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 71
- 230000010365 information processing Effects 0.000 title claims description 45
- 238000004590 computer program Methods 0.000 title claims description 6
- 238000001514 detection method Methods 0.000 claims description 220
- 238000013075 data extraction Methods 0.000 claims description 115
- 230000008569 process Effects 0.000 claims description 56
- 238000012545 processing Methods 0.000 claims description 42
- 230000006870 function Effects 0.000 claims description 34
- 239000000284 extract Substances 0.000 claims description 20
- 230000009467 reduction Effects 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 7
- 241000251468 Actinopterygii Species 0.000 description 39
- 238000010586 diagram Methods 0.000 description 19
- 230000004044 response Effects 0.000 description 15
- 229910052739 hydrogen Inorganic materials 0.000 description 12
- 230000000694 effects Effects 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 210000001015 abdomen Anatomy 0.000 description 3
- 230000003187 abdominal effect Effects 0.000 description 3
- 230000005484 gravity Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 241000473391 Archosargus rhomboidalis Species 0.000 description 1
- 241001417534 Lutjanidae Species 0.000 description 1
- 241001600434 Plectroglyphidodon lacrymatus Species 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 238000004804 winding Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/242—Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/772—Determining representative reference patterns, e.g. averaging or distorting patterns; Generating dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Databases & Information Systems (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Image Analysis (AREA)
Description
認識対象の物体を撮影する撮影装置による撮影画像から、前記認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出する基準データ抽出部と、
前記基準画像領域を含み前記基準画像領域よりも広い画像領域であって、前記認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて前記撮影画像から抽出する拡大データ抽出部と、
前記検知対象を含み前記基準画像領域よりも狭い画像領域であって、前記認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて前記撮影画像から抽出する縮小データ抽出部と、
前記撮影画像から前記検知対象を検知する検知処理で参照する参考データを含む辞書を、前記基準画像領域と前記拡大画像領域と前記縮小画像領域の画像を利用して学習する学習部と
を備える。
本発明に係る辞書学習装置により学習された辞書を保持する記憶装置と、
撮影装置による撮影画像から認識対象の物体における検知対象を前記記憶装置の辞書を利用して検知する検知部と、
前記検知された検知対象を利用した処理を実行する処理部と
を備える。
コンピュータによって、
認識対象の物体を撮影する撮影装置による撮影画像から、前記認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出し、
前記基準画像領域を含み前記基準画像領域よりも広い画像領域であって、前記認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて前記撮影画像から抽出し、
前記検知対象を含み前記基準画像領域よりも狭い画像領域であって、前記認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて前記撮影画像から抽出し、
前記撮影画像から前記検知対象を検知する検知処理で参照する参考データを含む辞書を、前記基準画像領域と前記拡大画像領域と前記縮小画像領域の画像を利用して学習する。
認識対象の物体を撮影する撮影装置による撮影画像から、前記認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出する処理と、
前記基準画像領域を含み前記基準画像領域よりも広い画像領域であって、前記認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて前記撮影画像から抽出する処理と、
前記検知対象を含み前記基準画像領域よりも狭い画像領域であって、前記認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて前記撮影画像から抽出する処理と、
前記撮影画像から前記検知対象を検知する検知処理で参照する参考データを含む辞書を、前記基準画像領域と前記拡大画像領域と前記縮小画像領域の画像を利用して学習する処理と
をコンピュータに実行させるコンピュータプログラムを記憶する。
図1は、本発明に係る第1実施形態の辞書学習装置の構成を簡略化して表すブロック図である。第1実施形態の辞書学習装置10は、コンピュータが利用する辞書を学習する装置である。ここでの辞書とは、図2に表されているような情報処理装置(コンピュータ)1に備えられている記憶装置3に保持され、情報処理装置1の制御装置(プロセッサ)2が処理を実行する際に参照する参考データを含むものである。
以下に、本発明に係る第2実施形態を説明する。なお、第2実施形態の説明において、第1実施形態の辞書学習装置と情報処理装置における構成部分の名称と同一名称部分には同一符号を付し、その共通部分の重複説明は省略する。
以下に、本発明に係る第3実施形態を説明する。なお、第3実施形態の説明において、第1や第2の実施形態の辞書学習装置と情報処理装置における構成部分の名称と同一名称部分には同一符号を付し、その共通部分の重複説明は省略する。
なお、本発明は第1~第3の実施形態に限定されず、様々な実施の態様を採り得る。例えば、図21には、本発明に係るその他の実施形態の辞書学習装置の構成がブロック図により表されている。図22には、図21における辞書学習装置により生成された辞書を利用する情報処理装置の構成がブロック図により表されている。図21における辞書学習装置100は、基準データ抽出部101と拡大データ抽出部102と縮小データ抽出部103と学習部104を備える。基準データ抽出部101は、認識対象の物体を撮影する撮影装置による撮影画像から、認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出する機能を備える。拡大データ抽出部102は、基準画像領域を含み基準画像領域よりも広い画像領域であって、認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて撮影画像から抽出する機能を備える。縮小データ抽出部103は、検知対象を含み基準画像領域よりも狭い画像領域であって、認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて撮影画像から抽出する機能を備える。学習部104は、撮影画像から検知対象を検知する検知処理で参照する参考データを含む辞書を、基準画像領域と拡大画像領域と縮小画像領域の画像を利用して学習する機能を備える。
3,30 記憶装置
5,114 辞書
6,111 検知部
7,112 処理部
10,100 辞書学習装置
21,101 基準データ抽出部
22,102 拡大データ抽出部
23,103 縮小データ抽出部
24 変形データ抽出部
27 物体認識データ生成部
25,104 学習部
Claims (8)
- 認識対象の物体を撮影する撮影装置による撮影画像から、前記認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出する基準データ抽出手段と、
前記基準画像領域を含み前記基準画像領域よりも広い画像領域であって、前記認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて前記撮影画像から抽出する拡大データ抽出手段と、
前記検知対象を含み前記基準画像領域よりも狭い画像領域であって、前記認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて前記撮影画像から抽出する縮小データ抽出手段と、
前記撮影画像から、変形状態の前記認識対象の物体を含む変形画像領域の画像を変形切り出し情報に基づいて抽出する変形データ抽出手段と、
前記撮影画像から前記検知対象を検知する検知処理で参照する参考データを含む辞書を、前記基準画像領域と前記拡大画像領域と前記縮小画像領域と前記変形画像領域の画像を利用して学習する学習手段と
を備える辞書学習装置。 - 前記基準画像領域と前記拡大画像領域と前記縮小画像領域は、その中心に前記検知対象が位置している画像領域である請求項1に記載の辞書学習装置。
- 前記基準画像領域には、互いに異なる複数の前記検知対象が含まれており、
前記拡大画像領域と前記縮小画像領域は、それら複数の前記検知対象を含む画像領域である請求項1に記載の辞書学習装置。 - 前記基準画像領域と前記拡大画像領域と前記縮小画像領域との各画像領域における前記検知対象の位置情報は、それら画像領域内において設定され、かつ、前記検知対象が中心部に位置している部分領域の位置を利用して表される請求項3に記載の辞書学習装置。
- 前記認識対象の物体が含まれている画像領域を物体毎に表す物体情報が関連付けられ、かつ、前記物体情報の数が前記撮影画像における前記認識対象の物体の撮影状態に応じて異なる前記撮影画像のデータを生成する物体認識データ生成手段をさらに備え、
前記学習手段は、前記認識対象の物体を検知する物体認識処理で参照する参考データを含む辞書を、前記物体情報が付与された前記撮影画像のデータを利用して学習する機能をさらに備える請求項1乃至請求項4の何れか一項に記載の辞書学習装置。 - 認識対象の物体を撮影する撮影装置による撮影画像から、前記認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出する基準データ抽出手段と、前記基準画像領域を含み前記基準画像領域よりも広い画像領域であって、前記認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて前記撮影画像から抽出する拡大データ抽出手段と、前記検知対象を含み前記基準画像領域よりも狭い画像領域であって、前記認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて前記撮影画像から抽出する縮小データ抽出手段と、前記撮影画像から、変形状態の前記認識対象の物体を含む変形画像領域の画像を変形切り出し情報に基づいて抽出する変形データ抽出手段と、前記撮影画像から前記検知対象を検知する検知処理で参照する参考データを含む辞書を、前記基準画像領域と前記拡大画像領域と前記縮小画像領域と前記変形画像領域の画像を利用して学習する学習手段とを備える辞書学習装置により学習された辞書を保持する記憶装置と、
前記撮影画像から前記認識対象の物体における前記検知対象を前記記憶装置の辞書を利用して検知する検知手段と、
検知された前記検知対象を利用した処理を実行する処理手段と
を備える情報処理装置。 - コンピュータによって、
認識対象の物体を撮影する撮影装置による撮影画像から、前記認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出し、
前記基準画像領域を含み前記基準画像領域よりも広い画像領域であって、前記認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて前記撮影画像から抽出し、
前記検知対象を含み前記基準画像領域よりも狭い画像領域であって、前記認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて前記撮影画像から抽出し、
前記撮影画像から、変形状態の前記認識対象の物体を含む変形画像領域の画像を変形切り出し情報に基づいて抽出し、
前記撮影画像から前記検知対象を検知する検知処理で参照する参考データを含む辞書を、前記基準画像領域と前記拡大画像領域と前記縮小画像領域と前記変形画像領域の画像を利用して学習する辞書学習方法。 - 認識対象の物体を撮影する撮影装置による撮影画像から、前記認識対象の物体における検知対象を含む基準となる基準画像領域の画像を基準切り出し情報に基づいて抽出する処理と、
前記基準画像領域を含み前記基準画像領域よりも広い画像領域であって、前記認識対象の物体以外が表されている背景を含む拡大画像領域の画像を拡大切り出し情報に基づいて前記撮影画像から抽出する処理と、
前記検知対象を含み前記基準画像領域よりも狭い画像領域であって、前記認識対象の物体が部分的に領域外となる縮小画像領域の画像を縮小切り出し情報に基づいて前記撮影画像から抽出する処理と、
前記撮影画像から、変形状態の前記認識対象の物体を含む変形画像領域の画像を変形切り出し情報に基づいて抽出する処理と、
前記撮影画像から前記検知対象を検知する検知処理で参照する参考データを含む辞書を、前記基準画像領域と前記拡大画像領域と前記縮小画像領域と前記変形画像領域の画像を利用して学習する処理と
をコンピュータに実行させるコンピュータプログラム。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018098700 | 2018-05-23 | ||
JP2018098700 | 2018-05-23 | ||
JP2018179775 | 2018-09-26 | ||
JP2018179775 | 2018-09-26 | ||
PCT/JP2019/020088 WO2019225595A1 (ja) | 2018-05-23 | 2019-05-21 | 辞書学習装置、情報処理装置、辞書学習方法およびプログラム記憶媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019225595A1 JPWO2019225595A1 (ja) | 2021-05-13 |
JP7103412B2 true JP7103412B2 (ja) | 2022-07-20 |
Family
ID=68616121
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020521248A Active JP7103412B2 (ja) | 2018-05-23 | 2019-05-21 | 辞書学習装置、情報処理装置、辞書学習方法およびコンピュータプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11600086B2 (ja) |
JP (1) | JP7103412B2 (ja) |
WO (1) | WO2019225595A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021105561A (ja) * | 2019-12-26 | 2021-07-26 | アイタックソリューションズ株式会社 | 認識処理システム、認識処理装置、及び認識処理プログラム |
JP2022018905A (ja) * | 2020-07-16 | 2022-01-27 | キヤノン株式会社 | 情報処理装置及び方法、撮像装置、及び撮像システム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002342758A (ja) | 2001-05-15 | 2002-11-29 | Osamu Hasegawa | 視覚認識システム |
JP2018060296A (ja) | 2016-10-03 | 2018-04-12 | グローリー株式会社 | 画像処理装置、画像処理システム及び画像処理方法 |
JP2018067149A (ja) | 2016-10-19 | 2018-04-26 | 三菱重工業株式会社 | 属性判定装置、属性判定方法、コンピュータプログラム、及び記録媒体 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003099777A (ja) * | 2001-09-21 | 2003-04-04 | Victor Co Of Japan Ltd | 顔画像検索装置 |
JP2005250863A (ja) | 2004-03-04 | 2005-09-15 | Univ Waseda | 領域検出方法およびそのシステム |
JP2017004052A (ja) * | 2015-06-04 | 2017-01-05 | キヤノン株式会社 | 学習装置、方法及びプログラム |
US10977509B2 (en) * | 2017-03-27 | 2021-04-13 | Samsung Electronics Co., Ltd. | Image processing method and apparatus for object detection |
JP6739847B2 (ja) * | 2018-09-12 | 2020-08-12 | 株式会社アルファコード | 画像表示制御装置および画像表示制御用プログラム |
-
2019
- 2019-05-21 JP JP2020521248A patent/JP7103412B2/ja active Active
- 2019-05-21 US US17/056,984 patent/US11600086B2/en active Active
- 2019-05-21 WO PCT/JP2019/020088 patent/WO2019225595A1/ja active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002342758A (ja) | 2001-05-15 | 2002-11-29 | Osamu Hasegawa | 視覚認識システム |
JP2018060296A (ja) | 2016-10-03 | 2018-04-12 | グローリー株式会社 | 画像処理装置、画像処理システム及び画像処理方法 |
JP2018067149A (ja) | 2016-10-19 | 2018-04-26 | 三菱重工業株式会社 | 属性判定装置、属性判定方法、コンピュータプログラム、及び記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2019225595A1 (ja) | 2021-05-13 |
WO2019225595A1 (ja) | 2019-11-28 |
US20210150185A1 (en) | 2021-05-20 |
US11600086B2 (en) | 2023-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104166509B (zh) | 一种非接触式屏幕交互方法及系统 | |
WO2019042426A1 (zh) | 增强现实场景的处理方法、设备及计算机存储介质 | |
JP2020535509A (ja) | イメージ内のターゲットオブジェクトに自動的にアノテーションするための方法、装置およびシステム | |
JP5631086B2 (ja) | 情報処理装置及びその制御方法、プログラム | |
JP2019028843A (ja) | 人物の視線方向を推定するための情報処理装置及び推定方法、並びに学習装置及び学習方法 | |
JP6491517B2 (ja) | 画像認識ar装置並びにその姿勢推定装置及び姿勢追跡装置 | |
WO2017143745A1 (zh) | 一种确定待测对象的运动信息的方法及装置 | |
JP2008275341A (ja) | 情報処理装置、情報処理方法 | |
JP7103412B2 (ja) | 辞書学習装置、情報処理装置、辞書学習方法およびコンピュータプログラム | |
WO2021114773A1 (en) | Target detection method, device, terminal device, and medium | |
JP2007304801A (ja) | 立体性認証方法、立体性認証装置および立体性認証プログラム | |
WO2024169384A1 (zh) | 视线估计方法、装置、可读存储介质及电子设备 | |
US10600202B2 (en) | Information processing device and method, and program | |
KR102069366B1 (ko) | 교육용 로봇과 상호 작용하는 증강 현실 구현 장치 및 그 방법 | |
KR20160110070A (ko) | 전자 장치 및 그 제어 방법 | |
CN115471863A (zh) | 三维姿态的获取方法、模型训练方法和相关设备 | |
JP5769411B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US11989928B2 (en) | Image processing system | |
US11941498B2 (en) | Facial motion detection and image correction method and apparatus | |
JP6425405B2 (ja) | 情報処理装置、方法、プログラム | |
JP7183020B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
WO2021157213A1 (ja) | 画像処理装置および画像処理方法 | |
JP2018200175A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2016194835A (ja) | 情報抽出方法、情報抽出プログラム及び情報抽出装置 | |
US20240078832A1 (en) | Joint detection apparatus, learning-model generation apparatus, joint detection method, learning-model generation method, and computer readable recording medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201110 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201110 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20211020 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220120 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220607 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220620 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7103412 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |