JP2017181393A - ナビゲーション装置及びナビゲーション方法 - Google Patents
ナビゲーション装置及びナビゲーション方法 Download PDFInfo
- Publication number
- JP2017181393A JP2017181393A JP2016071597A JP2016071597A JP2017181393A JP 2017181393 A JP2017181393 A JP 2017181393A JP 2016071597 A JP2016071597 A JP 2016071597A JP 2016071597 A JP2016071597 A JP 2016071597A JP 2017181393 A JP2017181393 A JP 2017181393A
- Authority
- JP
- Japan
- Prior art keywords
- navigation
- location
- predetermined range
- unphotographed
- shooting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Instructional Devices (AREA)
- Navigation (AREA)
Abstract
Description
前記移動体の緯度及び経度を含むGNSS情報を取得するGNSS情報取得部と、
前記所定範囲内のうち、次の撮影予定箇所を決定する撮影予定箇所決定部と、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するナビ画面表示部と、
を備える。
前記移動体の緯度及び経度を含むGNSS情報を取得するステップと、
前記所定範囲内のうち、次の撮影予定箇所を決定するステップと、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するステップと、
を含む。
前記移動体の緯度及び経度を含むGNSS情報を取得するステップと、
前記所定範囲内のうち、次の撮影予定箇所を決定するステップと、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するステップと、
の各ステップをコンピュータに実行させて、前記移動体を導く。
前記移動体の緯度及び経度を含むGNSS情報を取得するGNSS情報取得部と、
前記所定範囲内のうち、次の撮影予定箇所を決定する撮影予定箇所決定部と、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するナビ画面表示部と、
を備える。
撮影漏れである未撮影箇所を検出する未撮影箇所検出部と、
前記未撮影箇所が複数ある場合に、前記複数の未撮影箇所を順に撮影する未撮影箇所走行ルートを算出する未撮影箇所走行ルート算出部と、
をさらに備え、
前記ナビ画面表示部は、算出した前記走行ルートに沿って、前記移動体の移動方向を表示してもよい。
前記移動体の緯度及び経度を含むGNSS情報を取得するステップと、
前記所定範囲内のうち、次の撮影予定箇所を決定するステップと、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するステップと、
を含む。
前記移動体の緯度及び経度を含むGNSS情報を取得するステップと、
前記所定範囲内のうち、次の撮影予定箇所を決定するステップと、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するステップと、
の各ステップをコンピュータに実行させて、前記移動体を導く。
<撮影する所定範囲>
撮影準備として、撮影範囲を予め設定しておく。撮影範囲の設定は図面上で行ってもよいし、緯度経度等の数値を用いて行ってもよい。例えば、滑走路の航空写真や設計図等の図面を画面上に表示し、これから撮影したい範囲をマウス等で指示することで設定してもよい。この場合、図面にGPS情報を付加しておくことで、後述する未撮影箇所の検出に用いることができる。
図1(a)は、実施の形態1に係るナビゲーション装置20の機能的構成を示すブロック図である。図1(b)は、図1(a)のナビゲーション装置の一例であるコンピュータ10の物理的構成を示すブロック図である。図2は、撮影する所定範囲の一例であって、撮影済み箇所をハッチングで表し、未撮影箇所を白抜きで表した概略図である。図3は、ナビ画面表示部13において、車両等の移動体の移動方向を示した例を示す画面表示例である。なお、移動体は、車両に限られず人等の陸上移動体、飛行機、ヘリコプター等の飛行体、船、舟、カヌー等の水上航行体、等のいずれであってもよい。
このナビゲーション装置20は、所定範囲内を順次撮影可能な撮影部を備えた車両に搭載して、車両を導くナビゲーション装置である。このナビゲーション装置20は、GPS情報取得部11と、撮影予定箇所決定部12と、ナビ画面表示部13と、を備える。GPS情報取得部11によって、車両の緯度及び経度を含むGPS情報を取得する。撮影予定箇所決定部12によって、所定範囲内のうち、次の撮影予定箇所を決定する。ナビ画面表示部13によって、決定した撮影予定箇所2Bの方向に向かって、車両の移動方向22を画面に表示する。なお、ナビ画面表示部13では、撮影予定箇所2B、2C、3A、3Bを表示してもよい。さらに、ナビ画面表示部13では、撮影済み箇所1A、1B、1C、2Aを表示してもよい。
このナビゲーション装置20によれば、撮影予定箇所の方向に沿って、車両の移動方向が示されるので撮影漏れを抑制できる。さらに、撮影予定箇所及び撮影済み箇所を表示している場合には、撮影済み箇所を確認しながら走行できるので撮影漏れがさらに抑制できる。
GPS情報取得部11は、通常の方法でGPS情報を取得できる。GPS情報を取得する手段は特に限定しないが、市販の種々のGPSユニットを用いることができる。また、GPS情報は、衛星から受信した電波を基に計算した緯度経度データ及びデータの受信時刻から構成されており、所定の時間間隔で位置情報を記録したログである。具体的にはNMEA形式等のフォーマットを用いることができる。なお、上述のようにGPS情報は、GNSS情報の一例である。そこで、GPS情報取得部に代えてGPS情報以外のGNSS情報を取得するGNSS情報取得部を用いてもよい。
撮影予定箇所決定部12は、所定範囲内のうち、撮影済み箇所以外の次の撮影予定箇所を決定する。例えば、図2に示すように、所定範囲1A〜3Bのうち、撮影済み箇所1A、1B、1C、2A以外の箇所2B、2C、3A、3Bが次の撮影予定箇所であることがわかる。各箇所が撮影済みであるか否かの判断は、撮影済み箇所のGPS情報と、各箇所のGPS情報とに基づいて行うことができる。具体的には、撮影時刻を基にその前後の時刻のGPSログを参照し、各撮影済み箇所の位置情報を算出する(撮影画像とGPS情報との紐付け処理)。そして、所定範囲に付加された位置情報と照らし合わせることで、マップ上のどの座標に対応する位置で撮影をしたかが分かる。一回の撮影でカバーできる面積と、位置情報の照合結果とを合わせて、所定範囲内のどの箇所が撮影済みエリアかを判断できる。
なお、次の撮影予定箇所が複数箇所存在する場合には、全部の撮影予定箇所2B、2C、3A、3Bを決定してもよく、あるいは最も近い撮影予定箇所のみ、例えば撮影予定箇所2Bを決定してもよい。
ナビ画面表示部13は、例えば、図3に示すように、車両の現在位置から、決定した次の撮影予定箇所2Bの方向に向かって、車両の移動方向22を画面(ナビ画面)に表示する。なお、未撮影箇所2B、2C、3A、3Bを表示してもよい。さらに、撮影済み箇所1A、1B、1C、2Aを表示してもよい。また、撮影済み箇所は、リアルタイムで塗りつぶして表示してもよい。
なお、図3では、ナビ画面表示部13によって、撮影済み箇所1A、1B、1C、2A、未撮影箇所2B、2C、3A、3B、移動方向22を表示しているが、これに限られない。また、例えば、東西南北等の方位、時刻、等の一つ又は複数を組み合わせて表示してもよい。また、下図として航空写真、地図情報、CAD図面、等を表示してもよい。さらに、図3は模式図であって、最小限の画面構成例を示しており、装飾等を含まないが、適宜、装飾等を含めてもよい。
また、車両の現在の向きをGPS情報やコンパス等のセンサで検出し、リアルタイムに画面に表示してもよい。また、車両の向きに合わせて下図を回転させてもよい。これにより現在の進行方向と正しい移動方向22とのずれを認識できる。
また、GPSログの軌跡を画面上にプロットしてもよい。これにより走行済みの箇所を確認することができる。
また、移動方向22は隣接する2つの撮影箇所の重複部分を確保できるように表示してもよい。例えば1回の撮影範囲の幅が4mであった場合、隣接する2つの撮影領域のオーバーラップが常に1m程度発生するように移動方向を調整して表示する。これにより走行のずれが生じた場合にも撮影抜けを抑制することができる。
図4は、実施の形態1に係るナビゲーション方法のフローチャートである。このナビゲーション方法は、所定範囲内を順次撮影可能な撮影部を備える車両に搭載して、車両を導くナビゲーション方法である。
(a)車両の緯度及び経度を含むGPS情報を取得する(S01)。GPS情報の取得は、通常の方法で行うことができる。
(b)所定範囲内のうち、次の撮影予定箇所を決定する(S02)。
(c)決定した撮影予定箇所の方向に向かって、車両の移動方向をナビ画面に表示する(S03)。
以上によって、所定範囲内を順次撮影可能な撮影部を備える車両に搭載して、画像を撮影する際に漏れなく撮影できるように車両を導くことができる。
<ナビゲーション装置>
図5は、実施の形態2に係るナビゲーション装置20aの機能的構成を示すブロック図である。
このナビゲーション装置20aは、実施の形態1に係るナビゲーション装置と対比すると、走行ルート算出部14をさらに備える点で相違する。また、この場合、ナビ画面表示部13は、算出した走行ルートに沿って、車両の移動方向を表示する。
なお、走行ルートを複数作成可能な場合には一つに限定せず、複数の走行ルートからの選択が可能となるように複数の走行ルートをナビ画面表示部13で表示してもよい。
このナビゲーション装置20aによれば、現場で算出した走行ルートに従って走行するので、事前準備が不要となる。また、短時間で効率的に所定範囲を撮影できるので、長時間閉鎖が難しい空港の滑走路などでも検査が可能となる。さらに、将来的に自動運転に応用できる。
図6は、実施の形態2に係るナビゲーション方法のフローチャートである。このナビゲーション方法は、所定範囲内を順次撮影可能な撮影部を備える車両に搭載して、車両を導くナビゲーション方法である。
(a)車両の緯度及び経度を含むGPS情報を取得する(S01)。GPS情報の取得は、通常の方法で行うことができる。
(b)所定範囲内のうち、次の撮影予定箇所を決定する(S02)。
(c)撮影予定箇所の候補が複数箇所ある場合に、複数箇所の撮影予定箇所を順に撮影する走行ルートを算出する(S04)。
(d)算出した走行ルートに沿って、車両の移動方向をナビ画面に表示する(S05)。
このナビゲーション方法によれば、上記ナビゲーション装置20aと同様に、現場で算出した走行ルートに従って走行するので、走行ルートに沿って予めマーキングをしたり、ロードコーンを設置したりといった現場の事前準備が不要となる。また、短時間で効率的に所定範囲を撮影できるので、長時間閉鎖が難しい空港の滑走路などでも検査が可能となる。さらに、将来的に自動運転に応用できる。例えば、GPS情報と走行ルートに基づいて車両を自動走行させてもよい。また、車両の運転をアシストしてもよい。
<ナビゲーション装置>
図7は、実施の形態3に係るナビゲーション装置20bの機能的構成を示すブロック図である。
このナビゲーション装置20bは、実施の形態1に係るナビゲーション装置と対比すると、未撮影箇所検出部15と未撮影箇所走行ルート算出部16と、をさらに備える点で相違する。未撮影箇所検出部15は、所定範囲内で撮影漏れである未撮影箇所を検出する。未撮影箇所走行ルート算出部16は、未撮影箇所が複数ある場合に、複数の未撮影箇所を順に撮影する走行ルートを算出する。走行ルートの算出は、実施の形態2の走行ルート算出部14と同様に、例えば、車両の現在位置からの距離が近い順に巡る走行ルート、あるいは、右折を行わない走行ルート、その他のルート算出アルゴリズムを適宜選択すればよい。
なお、ナビ画面表示部13は、算出した未撮影箇所走行ルートに沿って、車両等の移動体の移動方向を表示する。走行ルートを複数作成可能な場合には一つに限定せず、複数の走行ルートからの選択が可能となるように、複数の走行ルートをナビ画面表示部13で表示してもよい。
このナビゲーション装置20bによれば、所定範囲内の未撮影箇所を検出できると共に、複数の未撮影箇所がある場合にも、複数の未撮影箇所を順に撮影できる未撮影箇所走行ルートを算出できる。さらに、この未撮影箇所走行ルートをナビ画面に表示することによって、ユーザは、表示された未撮影箇所走行ルートに沿って走行することで未撮影箇所を順に撮影していくことができる。
図8は、実施の形態3に係るナビゲーション方法のフローチャートである。このナビゲーション方法は、実施の形態1に係るナビゲーション方法と対比すると、未撮影箇所を検出できると共に、複数の未撮影箇所がある場合にも、複数の未撮影箇所を順に撮影できる未撮影箇所走行ルートを算出できる点で相違する。
(a)車両の緯度及び経度を含むGPS情報を取得する(S11)。GPS情報の取得は、通常の方法で行うことができる。
(b)所定範囲内のうち、未撮影箇所を検出する(S12)。
(c)未撮影箇所が複数箇所ある場合に、複数箇所の未撮影箇所を順に撮影する未撮影箇所走行ルートを算出する(S14)。
(d)算出した未撮影箇所走行ルートに沿って、車両の移動方向をナビ画面に表示する(S15)。
このナビゲーション方法によれば、所定範囲内の未撮影箇所を検出できると共に、複数の未撮影箇所がある場合にも、複数の未撮影箇所を順に撮影できる未撮影箇所走行ルートを算出できる。さらに、この未撮影箇所走行ルートをナビ画面に表示することによって、ユーザは、表示された未撮影箇所走行ルートに沿って走行することで未撮影箇所を順に撮影していくことができる。
2 メモリ
3 入出力部
4 記憶部
5 表示部
6 インタフェース
10 コンピュータ
11 GPS情報取得部
12 撮影予定箇所決定部
13 ナビ画面表示部
14 走行ルート算出部
15 未撮影箇所検出部
16 未撮影箇所走行ルート算出部
20 ナビゲーション装置
22 移動方向(進行方向)
30 車両
Claims (8)
- 所定範囲内を順次撮影可能な撮影部を備える移動体に搭載するナビゲーション装置であって、
前記移動体の緯度及び経度を含むGNSS情報を取得するGNSS情報取得部と、
前記所定範囲内のうち、次の撮影予定箇所を決定する撮影予定箇所決定部と、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するナビ画面表示部と、
を備えたナビゲーション装置。 - 前記ナビ画面表示部は、さらに、前記撮影予定箇所を表示する、請求項1に記載のナビゲーション装置。
- 前記ナビ画面表示部は、画面上で撮影済み箇所を表示する、請求項2に記載のナビゲーション装置。
- 次の撮影予定箇所の候補が複数ある場合に、前記複数の候補を順に撮影する走行ルートを算出する走行ルート算出部をさらに備え、
前記ナビ画面表示部は、算出した前記走行ルートに沿って、前記移動体の移動方向を表示する、請求項1から3のいずれか一項に記載のナビゲーション装置。 - 前記所定範囲内で撮影漏れである未撮影箇所を検出する未撮影箇所検出部と、
前記未撮影箇所が複数ある場合に、前記複数の未撮影箇所を順に撮影する未撮影箇所走行ルートを算出する未撮影箇所走行ルート算出部と、
をさらに備え、
前記ナビ画面表示部は、算出した前記未撮影箇所走行ルートに沿って、前記移動体の移動方向を表示する、請求項1から3のいずれか一項に記載のナビゲーション装置。 - 所定範囲内を順次撮影可能な撮影部を備える移動体を導くナビゲーション方法であって、
前記移動体の緯度及び経度を含むGNSS情報を取得するステップと、
前記所定範囲内のうち、次の撮影予定箇所を決定するステップと、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するステップと、
を含むナビゲーション方法。 - 所定範囲内を順次撮影可能な撮影部を備える移動体を導くナビゲーション用コンピュータプログラムであって、
前記移動体の緯度及び経度を含むGNSS情報を取得するステップと、
前記所定範囲内のうち、次の撮影予定箇所を決定するステップと、
決定した前記撮影予定箇所の方向に向かって、前記移動体の移動方向を画面に表示するステップと、
の各ステップをコンピュータに実行させて、前記移動体を導くナビゲーション用コンピュータプログラム。 - 請求項7に記載の前記ナビゲーション用コンピュータプログラムを格納したコンピュータ読み取り可能な記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016071597A JP6778008B2 (ja) | 2016-03-31 | 2016-03-31 | ナビゲーション装置及びナビゲーション方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016071597A JP6778008B2 (ja) | 2016-03-31 | 2016-03-31 | ナビゲーション装置及びナビゲーション方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017181393A true JP2017181393A (ja) | 2017-10-05 |
JP6778008B2 JP6778008B2 (ja) | 2020-10-28 |
Family
ID=60005988
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016071597A Active JP6778008B2 (ja) | 2016-03-31 | 2016-03-31 | ナビゲーション装置及びナビゲーション方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6778008B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021022210A (ja) * | 2019-07-29 | 2021-02-18 | 株式会社ソーシャル・キャピタル・デザイン | 画像処理システム |
JP2021026274A (ja) * | 2019-07-31 | 2021-02-22 | アイシン・エィ・ダブリュ株式会社 | 報告書作成支援システム、サーバ装置、及びコンピュータプログラム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009182536A (ja) * | 2008-01-30 | 2009-08-13 | Casio Comput Co Ltd | 撮像装置、撮影方法、撮影プログラム |
WO2010026695A1 (ja) * | 2008-09-03 | 2010-03-11 | 三菱電機株式会社 | 車両用撮影システム |
US20140375770A1 (en) * | 2012-08-31 | 2014-12-25 | Systèmes Pavemetrics Inc. | Method and apparatus for detection of foreign object debris |
JP2015164001A (ja) * | 2014-02-28 | 2015-09-10 | 株式会社丸山製作所 | ガイド装置 |
WO2015163106A1 (ja) * | 2014-04-25 | 2015-10-29 | ソニー株式会社 | 制御装置、撮像装置、制御方法、撮像方法及びコンピュータプログラム |
JP2017090189A (ja) * | 2015-11-09 | 2017-05-25 | 株式会社ソーシャル・キャピタル・デザイン | 走行ガイドシステム |
-
2016
- 2016-03-31 JP JP2016071597A patent/JP6778008B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009182536A (ja) * | 2008-01-30 | 2009-08-13 | Casio Comput Co Ltd | 撮像装置、撮影方法、撮影プログラム |
WO2010026695A1 (ja) * | 2008-09-03 | 2010-03-11 | 三菱電機株式会社 | 車両用撮影システム |
US20140375770A1 (en) * | 2012-08-31 | 2014-12-25 | Systèmes Pavemetrics Inc. | Method and apparatus for detection of foreign object debris |
JP2015164001A (ja) * | 2014-02-28 | 2015-09-10 | 株式会社丸山製作所 | ガイド装置 |
WO2015163106A1 (ja) * | 2014-04-25 | 2015-10-29 | ソニー株式会社 | 制御装置、撮像装置、制御方法、撮像方法及びコンピュータプログラム |
JP2017090189A (ja) * | 2015-11-09 | 2017-05-25 | 株式会社ソーシャル・キャピタル・デザイン | 走行ガイドシステム |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021022210A (ja) * | 2019-07-29 | 2021-02-18 | 株式会社ソーシャル・キャピタル・デザイン | 画像処理システム |
JP7317299B2 (ja) | 2019-07-29 | 2023-07-31 | 株式会社ソーシャル・キャピタル・デザイン | 画像処理システム |
JP2021026274A (ja) * | 2019-07-31 | 2021-02-22 | アイシン・エィ・ダブリュ株式会社 | 報告書作成支援システム、サーバ装置、及びコンピュータプログラム |
JP7400247B2 (ja) | 2019-07-31 | 2023-12-19 | 株式会社アイシン | 報告書作成支援システム、サーバ装置、及びコンピュータプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6778008B2 (ja) | 2020-10-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2133662B1 (en) | Methods and system of navigation using terrain features | |
US20150234055A1 (en) | Aerial and close-range photogrammetry | |
US20080195316A1 (en) | System and method for motion estimation using vision sensors | |
JP2019074532A (ja) | Slamデータに実寸法を付与する方法とそれを用いた位置測定 | |
JP5610870B2 (ja) | 無人走行車両の誘導装置及び無人走行車両の誘導方法 | |
JP6581629B2 (ja) | 自機位置計測装置、自機位置計測方法及び自機位置計測プログラム | |
KR101444685B1 (ko) | 영상기반 멀티센서 데이터를 이용한 차량의 위치자세 결정 방법 및 장치 | |
US11029707B2 (en) | Moving object, moving object control method, moving object control system, and moving object control program | |
US11614546B2 (en) | Methods for geospatial positioning and portable positioning devices thereof | |
JP6950832B2 (ja) | 位置座標推定装置、位置座標推定方法およびプログラム | |
US10473453B2 (en) | Operating device, operating method, and program therefor | |
KR101575954B1 (ko) | 3차원 정합을 이용한 증강현실 장치 및 그 방법 | |
JP4077385B2 (ja) | 画像処理を用いたグローバル座標取得装置 | |
US20120026324A1 (en) | Image capturing terminal, data processing terminal, image capturing method, and data processing method | |
JP2019120629A (ja) | 位置計算装置、位置計算プログラム及び座標マーカ | |
US9014964B2 (en) | Navigation apparatus capable of providing real-time navigation images | |
JP6778008B2 (ja) | ナビゲーション装置及びナビゲーション方法 | |
EP4008997A1 (en) | Surveying system, surveying method, and surveying program | |
KR20180040175A (ko) | 선박 위치 결정 방법 및 시스템 | |
JP2021143861A (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
TW202229818A (zh) | 使用週期性地更新的錨座標系進行車道映射和定位 | |
JP2013030851A (ja) | 光軸方向特定方法、光軸方向特定装置、及び光軸方向特定プログラム | |
RU116628U1 (ru) | Устройство для фиксации на топографической карте участков магистральных нефтепроводов с опасными геологическими процессами по их внешним проявлениям | |
Koska | Bore-sights and Lever-arms Determination of Sensors Mounted on Autonomous Mapping Airship | |
JP2010286944A (ja) | ドライブレコーダシステム、常時記録型ドライブレコーダおよびナビゲーション装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190129 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200121 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200311 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200929 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201009 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6778008 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |