JP7031928B2 - 点字ブロックの判定支援装置、判定支援方法、およびプログラム - Google Patents
点字ブロックの判定支援装置、判定支援方法、およびプログラム Download PDFInfo
- Publication number
- JP7031928B2 JP7031928B2 JP2018044685A JP2018044685A JP7031928B2 JP 7031928 B2 JP7031928 B2 JP 7031928B2 JP 2018044685 A JP2018044685 A JP 2018044685A JP 2018044685 A JP2018044685 A JP 2018044685A JP 7031928 B2 JP7031928 B2 JP 7031928B2
- Authority
- JP
- Japan
- Prior art keywords
- block image
- determination
- pattern
- image
- score
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Navigation (AREA)
Description
ユーザの前方地面の画像を取得する画像取得部、
取得した画像から、同方向に連続する複数の点字ブロック画像を、ブロック画像群として抽出する抽出部、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類部、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出部、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定部、および、
前記判定の結果を出力する出力部を含む
ことを特徴とする。
ユーザの進行方向の地面の画像を取得する画像取得工程、
取得した画像から、同方向に連続する点字ブロック画像を、ブロック画像群として抽出する抽出工程、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類工程、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出工程、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定工程、および、
前記判定の結果を出力する出力工程を含む
ことを特徴とする。
本発明の点字ブロックの判定支援装置の一例について、図を用いて説明する。
A:点字ブロック画像(1)のパターンの定数
係数a=2
B:点字ブロック画像(2)のパターンの定数
係数b=1
C:点字ブロック画像(3)のパターンの定数
係数c=0.5
点状パターンの定数=-1
線状パターンの定数=+1
パターン不明の定数=0
パターン分類部13による、前記パターン分類工程は、例えば、前記点字ブロック画像を複数の区画に分割し、前記各区画について、点状パターン、線状パターン、またはパターン不明に分類し、前記点字ブロック画像における前記複数の区画の過半数が分類された分類結果を、前点字ブロック画像の分類結果とすることができる。
本実施形態は、判定部15による前記判定工程において、判別不可と判定した場合、さらに、新たなブロック画像群を抽出して、判定を行う形態の一例について、図11のフローチャートを用いて説明する。なお、本発明の判定支援方法は、これらの例には制限されない。
G:点字ブロック画像(1)のパターンの定数
係数g=2
H:点字ブロック画像(3)のパターンの定数
係数h:1
I1:点字ブロック画像(4)のパターンの定数
係数i=1
I1:点字ブロック画像(5)のパターンの定数
係数i=1
J1:点字ブロック画像(6)のパターンの定数
係数j=0.5
J2:点字ブロック画像(7)のパターンの定数
係数c=0.5
点状パターンの定数=-1
線状パターンの定数=+1
パターン不明の定数=0
本実施形態のプログラムは、前記各実施形態の判定支援方法を、コンピュータ上で実行可能なプログラムである。または、本実施形態のプログラムは、例えば、コンピュータ読み取り可能な記録媒体に記録されてもよい。前記記録媒体としては、特に限定されず、例えば、前述のような記憶媒体等があげられる。
上記の実施形態および実施例の一部または全部は、以下の付記のように記載されうるが、以下には限られない。
(付記1)
ユーザの前方地面の画像を取得する画像取得部、
取得した画像から、同方向に連続する複数の点字ブロック画像を、ブロック画像群として抽出する抽出部、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類部、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出部、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定部、および、
前記判定の結果を出力する出力部を含む
ことを特徴とする点字ブロックの判定支援装置。
(付記2)
前記判定部において、進行への警告または判別不可と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定部において、進行の誘導と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、付記1記載の判定支援装置。
(付記3)
前記スコア算出部において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、付記1または2記載の判定支援装置。
(付記4)
前記スコア算出部において、
前記点状パターンにマイナスの定数を付与し、前記線状パターンにプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定部において、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行への警告と判定し、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記3記載の判定支援装置。
(付記5)
前記スコア算出部において、
前記点状パターンにプラスの定数を付与し、前記線状パターンにマイナスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定部において、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行への警告と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記3記載の判定支援装置。
(付記6)
前記抽出部において、取得した画像から、ユーザの進行方向に連続する前記複数の点字ブロック画像を、前記ブロック画像群として抽出する、付記1から5のいずれかに記載の判定支援装置。
(付記7)
前記判定部において、判別不可と判定した場合、
前記抽出部は、さらに、取得した画像から前記進行方向に対する交差方向に連続する新たな複数の点字ブロック画像を、新たなブロック画像群として抽出し、
前記パターン分類部は、前記新たなブロック画像群について分類し、
前記スコア算出部は、前記新たなブロック画像群についてスコア算出し、
前記判定部は、前記新たなブロック画像群について判定し、
前記出力部は、前記判定の結果を出力する、付記6記載の判定支援装置。
(付記8)
前記パターン分類部は、
前記点字ブロック画像を複数の区画に分割し、
前記各区画について、点状パターン、線状パターン、またはパターン不明に分類し、
前記点字ブロック画像における前記複数の区画の過半数が分類された分類結果を、前点字ブロック画像の分類結果とする、付記1から7のいずれかに記載の判定支援装置。
(付記9)
さらに、シグナル発生部を有し、
前記出力部は、前記判定結果を、前記シグナル発生部に出力し、
前記シグナル発生部は、前記判定結果を示す、視覚以外の感覚機能に対するシグナルを発生する、付記1から8のいずれかに記載の判定支援装置。
(付記10)
前記シグナル発生部が、音発生部または振動発生部である、付記9記載の判定支援装置。
(付記11)
前記画像取得部が、カメラである、付記1から10のいずれかに記載の判定支援装置。
(付記12)
前記判定支援装置の形状が、ポータブルデバイスである、付記1から11のいずれかに記載の判定支援装置。
(付記13)
前記ポータブルデバイスが、眼鏡型、ゴーグル型、およびヘッドマウント型からなる群から選択された少なくとも一つである、付記12記載の判定支援装置。
(付記14)
前記出力部は、通信回線網を介して、端末と接続可能であり、前記端末に、前記判定結果を出力する、付記1から13のいずれかに記載の判定支援装置。
(付記15)
さらに、端末を有し、
前記出力部は、前記端末に、前記判定結果を出力する、付記1から13のいずれかに記載の判定支援装置。
(付記16)
前記出力部は、通信回線網を介して、前記端末と接続可能である、付記15記載の判定支援装置。
(付記17)
前記端末が、イヤホン型またはヘッドフォン型である、付記14から16のいずれかに記載の判定支援装置。
(付記18)
ユーザの進行方向の地面の画像を取得する画像取得工程、
取得した画像から、同方向に連続する点字ブロック画像を、ブロック画像群として抽出する抽出工程、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類工程、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出工程、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定工程、および、
前記判定の結果を出力する出力工程を含む
ことを特徴とする点字ブロックの判定支援方法。
(付記19)
前記判定工程において、進行への警告または判別不可と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定工程において、進行の誘導と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、付記18記載の判定支援方法。
(付記20)
前記スコア算出工程において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、付記18または19記載の判定支援方法。
(付記21)
前記スコア算出工程において、
前記点状パターンにマイナスの定数を付与し、前記線状パターンにプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定工程において、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行への警告と判定し、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記20記載の判定支援方法。
(付記22)
前記スコア算出工程において、
前記点状パターンにプラスの定数を付与し、前記線状パターンにマイナスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定工程において、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行への警告と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記20記載の判定支援方法。
(付記23)
前記抽出工程において、取得した画像から、ユーザの進行方向に連続する前記複数の点字ブロック画像を、前記ブロック画像群として抽出する、付記18から22のいずれかに記載の判定支援方法。
(付記24)
前記判定工程において、判別不可と判定した場合、
前記抽出工程は、さらに、取得した画像から、前記進行方向に対する交差方向に連続する新たな複数の点字ブロック画像を、新たなブロック画像群として抽出し、
前記パターン分類工程は、前記新たなブロック画像群について分類し、
前記スコア算出工程は、前記新たなブロック画像群についてスコア算出し、
前記判定工程は、前記新たな点字ブロック画像群について判定し、
前記出力工程は、前記判定の結果を出力する、付記23記載の判定支援方法。
(付記25)
前記パターン分類工程は、
前記点字ブロック画像を複数の区画に分割し、
前記各区画について、点状パターン、線状パターン、またはパターン不明に分類し、
前記点字ブロック画像における前記複数の区画の過半数が分類された分類結果を、前点字ブロック画像の分類結果とする、付記18から24のいずれかに記載の判定支援方法。
(付記26)
さらに、シグナル発生工程を有し、
前記シグナル発生工程は、前記出力工程における判定結果を示す、視覚以外の感覚機能に対するシグナルを発生する、付記18から25のいずれかに記載の判定支援方法。
(付記27)
前記視覚以外の感覚機能に対するシグナルが、音シグナルまたは振動シグナルである、付記26記載の判定支援方法。
(付記28)
付記1から17のいずれかに記載の判定支援装置を使用する、付記18から27のいずれかに記載の判定支援方法。
(付記29)
付記18~28のいずれかに記載の判定支援方法をコンピュータに実行させることを特徴とするプログラム。
(付記30)
付記29記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
2 端末
11 画像取得部
12 抽出部
13 パターン分類部
14 スコア算出部
15 判定部
16 出力部
17 シグナル発生部
20 点字ブロック
201 突起
202 プレート
30 画像
31 点字ブロック画像
40 ユーザ
41 白杖
101 CPU
102 メモリ
103 インターフェイス(I/F)
104 スピーカ
105 振動装置
106 通信デバイス
107 記憶装置
108 入力装置
111 カメラ
117 プログラム
Claims (10)
- ユーザの前方地面の画像を取得する画像取得部、
取得した画像から、同方向に連続する複数の点字ブロック画像を、ブロック画像群として抽出する抽出部、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類部、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出部、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定部、および、
前記判定の結果を出力する出力部を含む
ことを特徴とする点字ブロックの判定支援装置。 - 前記判定部において、進行への警告または判別不可と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定部において、進行の誘導と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、請求項1記載の判定支援装置。 - 前記スコア算出部において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、請求項1または2記載の判定支援装置。 - 前記スコア算出部において、
前記点状パターンにマイナスの定数を付与し、前記線状パターンにプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定部において、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行への警告と判定し、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、請求項3記載の判定支援装置。 - 前記抽出部において、取得した画像から、ユーザの進行方向に連続する前記複数の点字ブロック画像を、前記ブロック画像群として抽出する、請求項1から4のいずれか一項に記載の判定支援装置。
- 前記判定部において、判別不可と判定した場合、
前記抽出部は、さらに、取得した画像から前記進行方向に対する交差方向に連続する新たな複数の点字ブロック画像を、新たなブロック画像群として抽出し、
前記パターン分類部は、前記新たなブロック画像群について分類し、
前記スコア算出部は、前記新たなブロック画像群についてスコア算出し、
前記判定部は、前記新たなブロック画像群について判定し、
前記出力部は、前記判定の結果を出力する、請求項5記載の判定支援装置。 - ユーザの進行方向の地面の画像を取得する画像取得工程、
取得した画像から、同方向に連続する点字ブロック画像を、ブロック画像群として抽出する抽出工程、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類工程、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出工程、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定工程、および、
前記判定の結果を出力する出力工程を含む
ことを特徴とする点字ブロックの判定支援方法。 - 前記判定工程において、進行への警告または判別不可と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定工程において、進行の誘導と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、請求項7記載の判定支援方法。 - 前記スコア算出工程において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、請求項7または8記載の判定支援方法。 - 請求項7から9のいずれか一項に記載の判定支援方法をコンピュータに実行させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018044685A JP7031928B2 (ja) | 2018-03-12 | 2018-03-12 | 点字ブロックの判定支援装置、判定支援方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018044685A JP7031928B2 (ja) | 2018-03-12 | 2018-03-12 | 点字ブロックの判定支援装置、判定支援方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019159064A JP2019159064A (ja) | 2019-09-19 |
JP7031928B2 true JP7031928B2 (ja) | 2022-03-08 |
Family
ID=67993407
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018044685A Active JP7031928B2 (ja) | 2018-03-12 | 2018-03-12 | 点字ブロックの判定支援装置、判定支援方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7031928B2 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014203196A (ja) | 2013-04-03 | 2014-10-27 | トヨタ自動車株式会社 | 危険度判定装置、危険度判定方法、警報装置、及び運転支援装置 |
JP3208457U (ja) | 2016-10-31 | 2017-01-12 | 和也 千葉 | 点字ブロック |
JP2017146726A (ja) | 2016-02-16 | 2017-08-24 | セイコーエプソン株式会社 | 移動支援装置、及び、移動支援方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005031846A (ja) * | 2003-07-09 | 2005-02-03 | Casio Comput Co Ltd | 歩行者誘導システム、この歩行者誘導システムに用いられるサーバ及び歩行者誘導方法 |
-
2018
- 2018-03-12 JP JP2018044685A patent/JP7031928B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014203196A (ja) | 2013-04-03 | 2014-10-27 | トヨタ自動車株式会社 | 危険度判定装置、危険度判定方法、警報装置、及び運転支援装置 |
JP2017146726A (ja) | 2016-02-16 | 2017-08-24 | セイコーエプソン株式会社 | 移動支援装置、及び、移動支援方法 |
JP3208457U (ja) | 2016-10-31 | 2017-01-12 | 和也 千葉 | 点字ブロック |
Also Published As
Publication number | Publication date |
---|---|
JP2019159064A (ja) | 2019-09-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10776627B2 (en) | Human flow analysis method, human flow analysis apparatus, and human flow analysis system | |
Fiannaca et al. | Headlock: a wearable navigation aid that helps blind cane users traverse large open spaces | |
US9990540B2 (en) | Operation estimation apparatus, robot, and operation estimation method | |
CN102622850A (zh) | 信息处理装置、报警方法和程序 | |
US11436866B2 (en) | System and method for eye-tracking | |
KR20140014117A (ko) | 정보 처리 장치, 통지 방법, 및 프로그램 | |
JP2006251596A (ja) | 視覚障害者支援装置 | |
JP2006350705A (ja) | 情報提供装置および方法並びにプログラム | |
JP2012141770A (ja) | 運転支援装置及びプログラム | |
US20120327203A1 (en) | Apparatus and method for providing guiding service in portable terminal | |
KR102284744B1 (ko) | 스테레오 카메라와 적외선 센서를 활용한 시각장애인을 위한 웨어러블 기기 | |
KR102155379B1 (ko) | 시각 장애인을 위한 음파통신 기반 보행 안내 서비스 제공 방법, 장치 및 컴퓨터 프로그램 | |
Yadav et al. | Fusion of object recognition and obstacle detection approach for assisting visually challenged person | |
JP6734602B2 (ja) | スマートグラスのための追跡方法および追跡装置、スマートグラス、ならびに記憶媒体 | |
JP7403783B2 (ja) | 視覚障がい者用行動支援装置 | |
KR20200076170A (ko) | 스마트 안경을 이용한 시각 장애인 보조 시스템 및 방법 | |
JP2022526702A (ja) | 盲人及び視覚障害者用の立体音響装置 | |
JP7031928B2 (ja) | 点字ブロックの判定支援装置、判定支援方法、およびプログラム | |
KR102244768B1 (ko) | 인공지능에 기반한 시니어 케어를 위한 길안내를 제공하는 챗봇기반의 청각보조 시스템 및 방법 | |
KR20200071655A (ko) | 교통상황 정보 제공 장치 및 방법 | |
US10299982B2 (en) | Systems and methods for blind and visually impaired person environment navigation assistance | |
WO2019021973A1 (ja) | 端末装置、危険予測方法、記録媒体 | |
US11715332B2 (en) | System and method for eye-tracking | |
JP2023049253A (ja) | 視覚障碍者歩行支援装置、視覚障碍者歩行支援端末、視覚障碍者歩行支援方法、及びプログラム | |
US20170270782A1 (en) | Event detecting method and electronic system applying the event detecting method and related accessory |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20191025 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210209 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220125 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220217 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7031928 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |