JP2019159064A - 点字ブロックの判定支援装置、判定支援方法、およびプログラム - Google Patents
点字ブロックの判定支援装置、判定支援方法、およびプログラム Download PDFInfo
- Publication number
- JP2019159064A JP2019159064A JP2018044685A JP2018044685A JP2019159064A JP 2019159064 A JP2019159064 A JP 2019159064A JP 2018044685 A JP2018044685 A JP 2018044685A JP 2018044685 A JP2018044685 A JP 2018044685A JP 2019159064 A JP2019159064 A JP 2019159064A
- Authority
- JP
- Japan
- Prior art keywords
- determination
- block
- image
- pattern
- score
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Navigation (AREA)
Abstract
Description
ユーザの前方地面の画像を取得する画像取得部、
取得した画像から、同方向に連続する複数の点字ブロック画像を、ブロック画像群として抽出する抽出部、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類部、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出部、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定部、および、
前記判定の結果を出力する出力部を含む
ことを特徴とする。
ユーザの進行方向の地面の画像を取得する画像取得工程、
取得した画像から、同方向に連続する点字ブロック画像を、ブロック画像群として抽出する抽出工程、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類工程、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出工程、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定工程、および、
前記判定の結果を出力する出力工程を含む
ことを特徴とする。
本発明の点字ブロックの判定支援装置の一例について、図を用いて説明する。
A:点字ブロック画像(1)のパターンの定数
係数a=2
B:点字ブロック画像(2)のパターンの定数
係数b=1
C:点字ブロック画像(3)のパターンの定数
係数c=0.5
点状パターンの定数=−1
線状パターンの定数=+1
パターン不明の定数=0
パターン分類部13による、前記パターン分類工程は、例えば、前記点字ブロック画像を複数の区画に分割し、前記各区画について、点状パターン、線状パターン、またはパターン不明に分類し、前記点字ブロック画像における前記複数の区画の過半数が分類された分類結果を、前点字ブロック画像の分類結果とすることができる。
本実施形態は、判定部15による前記判定工程において、判別不可と判定した場合、さらに、新たなブロック画像群を抽出して、判定を行う形態の一例について、図11のフローチャートを用いて説明する。なお、本発明の判定支援方法は、これらの例には制限されない。
G:点字ブロック画像(1)のパターンの定数
係数g=2
H:点字ブロック画像(3)のパターンの定数
係数h:1
I1:点字ブロック画像(4)のパターンの定数
係数i=1
I1:点字ブロック画像(5)のパターンの定数
係数i=1
J1:点字ブロック画像(6)のパターンの定数
係数j=0.5
J2:点字ブロック画像(7)のパターンの定数
係数c=0.5
点状パターンの定数=−1
線状パターンの定数=+1
パターン不明の定数=0
本実施形態のプログラムは、前記各実施形態の判定支援方法を、コンピュータ上で実行可能なプログラムである。または、本実施形態のプログラムは、例えば、コンピュータ読み取り可能な記録媒体に記録されてもよい。前記記録媒体としては、特に限定されず、例えば、前述のような記憶媒体等があげられる。
上記の実施形態および実施例の一部または全部は、以下の付記のように記載されうるが、以下には限られない。
(付記1)
ユーザの前方地面の画像を取得する画像取得部、
取得した画像から、同方向に連続する複数の点字ブロック画像を、ブロック画像群として抽出する抽出部、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類部、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出部、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定部、および、
前記判定の結果を出力する出力部を含む
ことを特徴とする点字ブロックの判定支援装置。
(付記2)
前記判定部において、進行への警告または判別不可と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定部において、進行の誘導と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、付記1記載の判定支援装置。
(付記3)
前記スコア算出部において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、付記1または2記載の判定支援装置。
(付記4)
前記スコア算出部において、
前記点状パターンにマイナスの定数を付与し、前記線状パターンにプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定部において、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行への警告と判定し、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記3記載の判定支援装置。
(付記5)
前記スコア算出部において、
前記点状パターンにプラスの定数を付与し、前記線状パターンにマイナスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定部において、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行への警告と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記3記載の判定支援装置。
(付記6)
前記抽出部において、取得した画像から、ユーザの進行方向に連続する前記複数の点字ブロック画像を、前記ブロック画像群として抽出する、付記1から5のいずれかに記載の判定支援装置。
(付記7)
前記判定部において、判別不可と判定した場合、
前記抽出部は、さらに、取得した画像から前記進行方向に対する交差方向に連続する新たな複数の点字ブロック画像を、新たなブロック画像群として抽出し、
前記パターン分類部は、前記新たなブロック画像群について分類し、
前記スコア算出部は、前記新たなブロック画像群についてスコア算出し、
前記判定部は、前記新たなブロック画像群について判定し、
前記出力部は、前記判定の結果を出力する、付記6記載の判定支援装置。
(付記8)
前記パターン分類部は、
前記点字ブロック画像を複数の区画に分割し、
前記各区画について、点状パターン、線状パターン、またはパターン不明に分類し、
前記点字ブロック画像における前記複数の区画の過半数が分類された分類結果を、前点字ブロック画像の分類結果とする、付記1から7のいずれかに記載の判定支援装置。
(付記9)
さらに、シグナル発生部を有し、
前記出力部は、前記判定結果を、前記シグナル発生部に出力し、
前記シグナル発生部は、前記判定結果を示す、視覚以外の感覚機能に対するシグナルを発生する、付記1から8のいずれかに記載の判定支援装置。
(付記10)
前記シグナル発生部が、音発生部または振動発生部である、付記9記載の判定支援装置。
(付記11)
前記画像取得部が、カメラである、付記1から10のいずれかに記載の判定支援装置。
(付記12)
前記判定支援装置の形状が、ポータブルデバイスである、付記1から11のいずれかに記載の判定支援装置。
(付記13)
前記ポータブルデバイスが、眼鏡型、ゴーグル型、およびヘッドマウント型からなる群から選択された少なくとも一つである、付記12記載の判定支援装置。
(付記14)
前記出力部は、通信回線網を介して、端末と接続可能であり、前記端末に、前記判定結果を出力する、付記1から13のいずれかに記載の判定支援装置。
(付記15)
さらに、端末を有し、
前記出力部は、前記端末に、前記判定結果を出力する、付記1から13のいずれかに記載の判定支援装置。
(付記16)
前記出力部は、通信回線網を介して、前記端末と接続可能である、付記15記載の判定支援装置。
(付記17)
前記端末が、イヤホン型またはヘッドフォン型である、付記14から16のいずれかに記載の判定支援装置。
(付記18)
ユーザの進行方向の地面の画像を取得する画像取得工程、
取得した画像から、同方向に連続する点字ブロック画像を、ブロック画像群として抽出する抽出工程、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類工程、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出工程、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定工程、および、
前記判定の結果を出力する出力工程を含む
ことを特徴とする点字ブロックの判定支援方法。
(付記19)
前記判定工程において、進行への警告または判別不可と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定工程において、進行の誘導と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、付記18記載の判定支援方法。
(付記20)
前記スコア算出工程において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、付記18または19記載の判定支援方法。
(付記21)
前記スコア算出工程において、
前記点状パターンにマイナスの定数を付与し、前記線状パターンにプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定工程において、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行への警告と判定し、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記20記載の判定支援方法。
(付記22)
前記スコア算出工程において、
前記点状パターンにプラスの定数を付与し、前記線状パターンにマイナスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定工程において、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行への警告と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、付記20記載の判定支援方法。
(付記23)
前記抽出工程において、取得した画像から、ユーザの進行方向に連続する前記複数の点字ブロック画像を、前記ブロック画像群として抽出する、付記18から22のいずれかに記載の判定支援方法。
(付記24)
前記判定工程において、判別不可と判定した場合、
前記抽出工程は、さらに、取得した画像から、前記進行方向に対する交差方向に連続する新たな複数の点字ブロック画像を、新たなブロック画像群として抽出し、
前記パターン分類工程は、前記新たなブロック画像群について分類し、
前記スコア算出工程は、前記新たなブロック画像群についてスコア算出し、
前記判定工程は、前記新たな点字ブロック画像群について判定し、
前記出力工程は、前記判定の結果を出力する、付記23記載の判定支援方法。
(付記25)
前記パターン分類工程は、
前記点字ブロック画像を複数の区画に分割し、
前記各区画について、点状パターン、線状パターン、またはパターン不明に分類し、
前記点字ブロック画像における前記複数の区画の過半数が分類された分類結果を、前点字ブロック画像の分類結果とする、付記18から24のいずれかに記載の判定支援方法。
(付記26)
さらに、シグナル発生工程を有し、
前記シグナル発生工程は、前記出力工程における判定結果を示す、視覚以外の感覚機能に対するシグナルを発生する、付記18から25のいずれかに記載の判定支援方法。
(付記27)
前記視覚以外の感覚機能に対するシグナルが、音シグナルまたは振動シグナルである、付記26記載の判定支援方法。
(付記28)
付記1から17のいずれかに記載の判定支援装置を使用する、付記18から27のいずれかに記載の判定支援方法。
(付記29)
付記18〜28のいずれかに記載の判定支援方法をコンピュータに実行させることを特徴とするプログラム。
(付記30)
付記29記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
2 端末
11 画像取得部
12 抽出部
13 パターン分類部
14 スコア算出部
15 判定部
16 出力部
17 シグナル発生部
20 点字ブロック
201 突起
202 プレート
30 画像
31 点字ブロック画像
40 ユーザ
41 白杖
101 CPU
102 メモリ
103 インターフェイス(I/F)
104 スピーカ
105 振動装置
106 通信デバイス
107 記憶装置
108 入力装置
111 カメラ
117 プログラム
Claims (10)
- ユーザの前方地面の画像を取得する画像取得部、
取得した画像から、同方向に連続する複数の点字ブロック画像を、ブロック画像群として抽出する抽出部、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類部、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出部、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定部、および、
前記判定の結果を出力する出力部を含む
ことを特徴とする点字ブロックの判定支援装置。 - 前記判定部において、進行への警告または判別不可と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定部において、進行の誘導と判定した場合、前記出力部は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、請求項1記載の判定支援装置。 - 前記スコア算出部において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、請求項1または2記載の判定支援装置。 - 前記スコア算出部において、
前記点状パターンにマイナスの定数を付与し、前記線状パターンにプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記判定部において、
前記画像ブロック群のスコアが、マイナスの臨界値未満の場合、進行への警告と判定し、
前記画像ブロック群のスコアが、プラスの臨界値を超える場合、進行の誘導と判定し、
前記画像ブロック群のスコアが、マイナスの臨界値以上、プラスの臨界値以下の場合、判別不可と判定する、請求項3記載の判定支援装置。 - 前記抽出部において、取得した画像から、ユーザの進行方向に連続する前記複数の点字ブロック画像を、前記ブロック画像群として抽出する、請求項1から4のいずれか一項に記載の判定支援装置。
- 前記判定部において、判別不可と判定した場合、
前記抽出部は、さらに、取得した画像から前記進行方向に対する交差方向に連続する新たな複数の点字ブロック画像を、新たなブロック画像群として抽出し、
前記パターン分類部は、前記新たなブロック画像群について分類し、
前記スコア算出部は、前記新たなブロック画像群についてスコア算出し、
前記判定部は、前記新たなブロック画像群について判定し、
前記出力部は、前記判定の結果を出力する、請求項5記載の判定支援装置。 - ユーザの進行方向の地面の画像を取得する画像取得工程、
取得した画像から、同方向に連続する点字ブロック画像を、ブロック画像群として抽出する抽出工程、
前記ブロック画像群に含まれる前記各点字ブロック画像を、進行への警告を示す点状パターン、進行の誘導を示す線状パターン、またはパターン不明に分類するパターン分類工程、
前記ブロック画像群における前記各点字ブロック画像の位置関係と、前記各点字ブロック画像の分類パターンとから、前記ブロック画像群のスコアを算出するスコア算出工程、
前記ブロック画像群のスコアから、進行への警告、進行の誘導、または、判別不可と判定する判定工程、および、
前記判定の結果を出力する出力工程を含む
ことを特徴とする点字ブロックの判定支援方法。 - 前記判定工程において、進行への警告または判別不可と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行停止指示を出力し、
前記判定工程において、進行の誘導と判定した場合、前記出力工程は、前記判定結果として、前記ユーザに対する歩行継続指示を出力する、請求項7記載の判定支援方法。 - 前記スコア算出工程において、
前記点状パターンおよび前記線状パターンのうち、一方にマイナスの定数を付与し、他方にプラスの定数を付与し、前記パターン不明に定数ゼロを付与し、
前記各点字ブロック画像に、前記ブロック画像群における前記点字ブロック画像の位置関係に応じた、重み付けの係数を付与し、
前記各ブロック画像について、定数と係数とから個別スコアを算出し、
前記個別スコアの合計を、前記画像ブロック群のスコアとして算出する、請求項7または8記載の判定支援方法。 - 請求項7から9のいずれか一項に記載の判定支援方法をコンピュータに実行させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018044685A JP7031928B2 (ja) | 2018-03-12 | 2018-03-12 | 点字ブロックの判定支援装置、判定支援方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018044685A JP7031928B2 (ja) | 2018-03-12 | 2018-03-12 | 点字ブロックの判定支援装置、判定支援方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019159064A true JP2019159064A (ja) | 2019-09-19 |
JP7031928B2 JP7031928B2 (ja) | 2022-03-08 |
Family
ID=67993407
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018044685A Active JP7031928B2 (ja) | 2018-03-12 | 2018-03-12 | 点字ブロックの判定支援装置、判定支援方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7031928B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005031846A (ja) * | 2003-07-09 | 2005-02-03 | Casio Comput Co Ltd | 歩行者誘導システム、この歩行者誘導システムに用いられるサーバ及び歩行者誘導方法 |
JP2014203196A (ja) * | 2013-04-03 | 2014-10-27 | トヨタ自動車株式会社 | 危険度判定装置、危険度判定方法、警報装置、及び運転支援装置 |
JP3208457U (ja) * | 2016-10-31 | 2017-01-12 | 和也 千葉 | 点字ブロック |
JP2017146726A (ja) * | 2016-02-16 | 2017-08-24 | セイコーエプソン株式会社 | 移動支援装置、及び、移動支援方法 |
-
2018
- 2018-03-12 JP JP2018044685A patent/JP7031928B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005031846A (ja) * | 2003-07-09 | 2005-02-03 | Casio Comput Co Ltd | 歩行者誘導システム、この歩行者誘導システムに用いられるサーバ及び歩行者誘導方法 |
JP2014203196A (ja) * | 2013-04-03 | 2014-10-27 | トヨタ自動車株式会社 | 危険度判定装置、危険度判定方法、警報装置、及び運転支援装置 |
JP2017146726A (ja) * | 2016-02-16 | 2017-08-24 | セイコーエプソン株式会社 | 移動支援装置、及び、移動支援方法 |
JP3208457U (ja) * | 2016-10-31 | 2017-01-12 | 和也 千葉 | 点字ブロック |
Also Published As
Publication number | Publication date |
---|---|
JP7031928B2 (ja) | 2022-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10776627B2 (en) | Human flow analysis method, human flow analysis apparatus, and human flow analysis system | |
Poggi et al. | A wearable mobility aid for the visually impaired based on embedded 3D vision and deep learning | |
US20190294909A1 (en) | Apparatus and method for using background change to determine context | |
JP6144656B2 (ja) | 歩行者の視覚的認識が困難であり得ることを運転者に警告するシステム及び方法 | |
US9990540B2 (en) | Operation estimation apparatus, robot, and operation estimation method | |
JP2006251596A (ja) | 視覚障害者支援装置 | |
JP2017059207A (ja) | 画像認識方法 | |
KR20190118965A (ko) | 시선 추적 시스템 및 방법 | |
KR102155379B1 (ko) | 시각 장애인을 위한 음파통신 기반 보행 안내 서비스 제공 방법, 장치 및 컴퓨터 프로그램 | |
Tian | RGB-D sensor-based computer vision assistive technology for visually impaired persons | |
JP2016194612A (ja) | 視覚認識支援装置および視覚認識支援プログラム | |
KR20200076170A (ko) | 스마트 안경을 이용한 시각 장애인 보조 시스템 및 방법 | |
KR102242719B1 (ko) | 스마트 안경 추적 방법과 장치, 및 스마트 안경과 저장 매체 | |
Söveny et al. | Blind guide-A virtual eye for guiding indoor and outdoor movement | |
US20200372779A1 (en) | Terminal device, risk prediction method, and recording medium | |
KR102244768B1 (ko) | 인공지능에 기반한 시니어 케어를 위한 길안내를 제공하는 챗봇기반의 청각보조 시스템 및 방법 | |
JP2009212929A (ja) | 画像トリミング範囲の評価方法、装置およびプログラム | |
JP2019159064A (ja) | 点字ブロックの判定支援装置、判定支援方法、およびプログラム | |
JP2021189587A (ja) | 表示装置、表示方法及び表示プログラム | |
JP2014059208A (ja) | 移動補助装置および移動補助方法 | |
KR20150086840A (ko) | 복수개의 카메라를 이용한 휴대 장치 및 제어방법 | |
US20170270782A1 (en) | Event detecting method and electronic system applying the event detecting method and related accessory | |
JP2023049253A (ja) | 視覚障碍者歩行支援装置、視覚障碍者歩行支援端末、視覚障碍者歩行支援方法、及びプログラム | |
US20210290129A1 (en) | State estimation device, method and computer program therefor | |
JP3837572B2 (ja) | 視覚障害者用画像認識装置、その方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20191025 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210209 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220125 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220217 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7031928 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |