JP7077961B2 - 画像解析装置、画像解析方法及びプログラム - Google Patents
画像解析装置、画像解析方法及びプログラム Download PDFInfo
- Publication number
- JP7077961B2 JP7077961B2 JP2018559097A JP2018559097A JP7077961B2 JP 7077961 B2 JP7077961 B2 JP 7077961B2 JP 2018559097 A JP2018559097 A JP 2018559097A JP 2018559097 A JP2018559097 A JP 2018559097A JP 7077961 B2 JP7077961 B2 JP 7077961B2
- Authority
- JP
- Japan
- Prior art keywords
- stable reflection
- reflection points
- distance
- stable
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010191 image analysis Methods 0.000 title claims description 100
- 238000003703 image analysis method Methods 0.000 title claims description 5
- 238000000034 method Methods 0.000 claims description 32
- 238000000926 separation method Methods 0.000 claims description 21
- 238000006243 chemical reaction Methods 0.000 description 18
- 238000004364 calculation method Methods 0.000 description 11
- 230000010354 integration Effects 0.000 description 10
- 238000004458 analytical method Methods 0.000 description 9
- 230000010365 information processing Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 238000006073 displacement reaction Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 3
- 230000000737 periodic effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000010287 polarization Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/89—Radar or analogous systems specially adapted for specific applications for mapping or imaging
- G01S13/90—Radar or analogous systems specially adapted for specific applications for mapping or imaging using synthetic aperture techniques, e.g. synthetic aperture radar [SAR] techniques
- G01S13/9021—SAR image post-processing techniques
- G01S13/9023—SAR image post-processing techniques combined with interferometric techniques
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/411—Identification of targets based on measurements of radar reflectivity
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
- G06F18/232—Non-hierarchical techniques
- G06F18/2323—Non-hierarchical techniques based on graph theory, e.g. minimum spanning trees [MST] or graph cuts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/762—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks
- G06V10/7635—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks based on graphs, e.g. graph cuts or spectral clustering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10032—Satellite or aerial image; Remote sensing
- G06T2207/10044—Radar image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Networks & Wireless Communication (AREA)
- Artificial Intelligence (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Geometry (AREA)
- Electromagnetism (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Spectroscopy & Molecular Physics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Discrete Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Image Analysis (AREA)
- Radar Systems Or Details Thereof (AREA)
Description
・ROM(Read Only Memory)502
・RAM(Random Access Memory)503
・RAM503にロードされるプログラム504
・プログラム504を格納する記憶装置505
・記録媒体506の読み書きを行うドライブ装置507
・通信ネットワーク509と接続する通信インターフェース508
・データの入出力を行う入出力インターフェース510
・各構成要素を接続するバス511
各実施形態における各装置の各構成要素は、これらの機能を実現するプログラム504をCPU501が取得して実行することで実現される。各装置の各構成要素の機能を実現するプログラム504は、例えば、予め記憶装置505やRAM503に格納されており、必要に応じてCPU501が読み出す。なお、プログラム504は、通信ネットワーク509を介してCPU501に供給されてもよいし、予め記録媒体506に格納されており、ドライブ装置507が当該プログラムを読み出してCPU501に供給してもよい。
まず、本発明の第1の実施形態について説明する。図1は、本発明の第1の実施形態における画像解析装置を示す図である。
続いて、本発明の第2の実施形態について説明する。図8は、本発明の第2の実施形態における画像解析装置を示す図である。
続いて、本発明の第3の実施形態について説明する。図12は、本発明の第3の実施形態における画像解析装置を示す図である。
上述した画像解析装置100等は、種々の画像等へ適用される。
SAR画像から得られた変位等を含む情報を、可視光画像等のSAR画像とは異なるデータと対応付けて解析を行う場合に用いられる。また、画像解析装置100等は、クラスタ毎に分類して表示することで、構造の差異を表示可能なSAR画像の表示装置として利用されうる。更に、画像解析装置100は、構造物毎の解析を行うSAR画像の解析装置に適用される。
複数のSAR(Synthetic Aperture Radar)画像に基づいて、前記複数のSAR画像において反射が安定している安定反射点を特定する安定反射点特定手段と、
前記安定反射点の各々の間のユークリッド距離及び前記安定反射点の各々の位相の相関に基づいて、前記安定反射点の各々をクラスタリングするクラスタリング手段とを備える画像解析装置。
前記クラスタリング手段は、2つの前記安定反射点の間の前記ユークリッド距離及び前記位相の相関に基づいて定められる前記距離の各々に基づいて前記安定反射点の各々をクラスタリングする、付記1に記載の画像解析装置。
前記クラスタリング手段は、前記距離に基づいて互いに接続された安定反射点の各々を分離することで前記安定反射点の各々をクラスタリングする、付記2に記載の画像解析装置。
前記クラスタリング手段は、
前記ユークリッド距離及び前記位相の相関に基づいて前記距離を特定する距離特定手段と、
距離の総和が最小となるような枝によって前記安定反射点が接続された最小全域木を生成する最小全域木生成手段と、
前記距離の大きさに基づいて、前記最小全域木を分離する分離手段と
を備える、付記3に記載の画像解析装置。
前記クラスタリング手段は、前記安定反射点の各々を、前記安定反射点のクラスタへ分類することで前記安定反射点の各々をクラスタリングする、付記2に記載の画像解析装置。
前記クラスタリング手段は、
前記安定反射点のクラスタを生成する初期クラスタ生成手段と、
前記ユークリッド距離及び前記位相の相関に基づいて前記距離を特定する距離特定手段と、
前記クラスタの前記距離に関する中心となるセントロイドと前記安定反射点の各々との距離に基づいて、前記安定反射点を前記クラスタに分類する分類手段と、
を備える、付記5に記載の画像解析装置。
前記距離特定部は、2つの前記安定反射点の各々に関する前記位相の相関と、前記2つの前記安定反射点の前記複数のSAR画像におけるユークリッド距離とに基づいて前記2つの前記安定反射点の間の前記距離を特定する、請求項1から6のいずれか一項に記載の画像解析装置。
前記複数のSAR画像に基づいて、前記安定反射点の各々における前記位相を特定する位相特定手段を備える、付記1から7のいずれか一項に記載の画像解析装置。
クラスタリングされた前記安定反射点に関する情報を出力する出力手段を備える、付記1から8のいずれか一項に記載の画像解析装置。
前記出力手段は、前記クラスタリングされた前記安定反射点に関する情報を、地理情報と重畳して出力する、付記9に記載の画像解析装置。
複数のSAR(Synthetic Aperture Radar)画像に基づいて、前記複数のSAR画像において反射が安定している安定反射点を特定し、
前記安定反射点の各々の間のユークリッド距離及び前記安定反射点の各々の位相の相関に基づいて、前記安定反射点の各々をクラスタリングする画像解析方法。
コンピュータに、
複数のSAR(Synthetic Aperture Radar)画像に基づいて、前記複数のSAR画像において反射が安定している安定反射点を特定する処理と、
前記安定反射点の各々の間のユークリッド距離及び前記安定反射点の各々の位相の相関に基づいて、前記安定反射点の各々をクラスタリングする処理とを実行させるプログラムを格納したコンピュータ読み取り可能記録媒体。
110 安定反射点特定部
120 位相特定部
130 クラスタリング部
131 距離特定部
1311 相関係数算出部
1312 ユークリッド距離算出部
1313 統合部
1314 変換部
132 最小全域木生成部
133 分離部
134 閾値決定部
235 初期クラスタ生成部
236 分類部
150 SAR画像記憶部
360 地理情報記憶部
Claims (9)
- 複数のSAR(Synthetic Aperture Radar)画像に基づいて、前記複数のSAR画像において反射が安定している安定反射点を特定する安定反射点特定手段と、
2つの前記安定反射点の間のユークリッド距離、及び、2つの前記安定反射点の位相の相関に基づいて定められる距離の各々に基づいて、前記安定反射点の各々をクラスタリングするクラスタリング手段と
を備える画像解析装置。 - 前記クラスタリング手段は、前記距離に基づいて互いに接続された前記安定反射点の各々を分離することで前記安定反射点の各々をクラスタリングする
請求項1に記載の画像解析装置。 - 前記クラスタリング手段は、
前記ユークリッド距離及び前記位相の相関に基づいて前記距離を特定する距離特定手段と、
前記距離の総和が最小となるように前記安定反射点が接続された最小全域木を生成する最小全域木生成手段と、
前記距離の大きさに基づいて、前記最小全域木を分離する分離手段と
を備える、請求項2に記載の画像解析装置。 - 前記クラスタリング手段は、前記安定反射点の各々を、前記安定反射点のクラスタへ分類することで前記安定反射点の各々をクラスタリングする
請求項1に記載の画像解析装置。 - 前記クラスタリング手段は、
前記安定反射点の前記クラスタを生成する初期クラスタ生成手段と、前記ユークリッド距離及び前記位相の相関に基づいて前記距離を特定する距離特定手段と、
前記クラスタの前記距離に関するセントロイドと前記安定反射点の各々との前記距離に基づいて、前記安定反射点を前記クラスタに分類する分類手段と
を備える、請求項4に記載の画像解析装置。 - クラスタリングされた前記安定反射点に関する情報を出力する出力手段を備える
請求項1から5のいずれか一項に記載の画像解析装置。 - 前記出力手段は、前記クラスタリングされた前記安定反射点に関する情報を、地理情報と重畳して出力する
請求項6に記載の画像解析装置。 - 複数のSAR(Synthetic Aperture Radar)画像に基づいて、前記複数のSAR画像において反射が安定している安定反射点を特定し、
2つの前記安定反射点の間のユークリッド距離、及び、2つの前記安定反射点の位相の相関に基づいて定められる距離の各々に基づいて、前記安定反射点の各々をクラスタリングする
画像解析方法。 - コンピュータに、
複数のSAR(Synthetic Aperture Radar)画像に基づいて、前記複数のSAR画像において反射が安定している安定反射点を特定する処理と、
2つの前記安定反射点の間のユークリッド距離、及び、2つの前記安定反射点の位相の相関に基づいて定められる距離の各々に基づいて、前記安定反射点の各々をクラスタリングする処理と
を実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016252479 | 2016-12-27 | ||
JP2016252479 | 2016-12-27 | ||
PCT/JP2017/045631 WO2018123748A1 (ja) | 2016-12-27 | 2017-12-20 | 画像解析装置、画像解析方法及びコンピュータ読み取り可能記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018123748A1 JPWO2018123748A1 (ja) | 2019-10-31 |
JP7077961B2 true JP7077961B2 (ja) | 2022-05-31 |
Family
ID=62708079
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018559097A Active JP7077961B2 (ja) | 2016-12-27 | 2017-12-20 | 画像解析装置、画像解析方法及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11487001B2 (ja) |
JP (1) | JP7077961B2 (ja) |
WO (1) | WO2018123748A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6856136B2 (ja) * | 2017-10-30 | 2021-04-07 | 日本電気株式会社 | 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理システム |
JP7020494B2 (ja) * | 2017-12-01 | 2022-02-16 | 日本電気株式会社 | Sar画像解析システム、画像処理装置、画像処理方法および画像処理プログラム |
US11754704B2 (en) | 2019-03-29 | 2023-09-12 | Nec Corporation | Synthetic-aperture-radar image processing device and image processing method |
US11846702B2 (en) | 2019-07-18 | 2023-12-19 | Nec Corporation | Image processing device and image processing method |
US20220262096A1 (en) * | 2019-07-18 | 2022-08-18 | Nec Corporation | Image processing device and image processing method |
EP3796011A1 (de) * | 2019-09-18 | 2021-03-24 | Siemens Aktiengesellschaft | Auswerten von teilentladungssignalen |
CN110988876B (zh) * | 2019-11-21 | 2023-01-03 | 长沙理工大学 | 闭合鲁棒双基线InSAR相位解缠方法、系统及可读存储介质 |
CN111476786B (zh) * | 2020-04-22 | 2022-02-01 | 南京航空航天大学 | 一种基于实测数据的长桁自动化涂胶及质量检测方法 |
CN113030971B (zh) * | 2021-03-17 | 2024-01-23 | 云南电网有限责任公司电力科学研究院 | 一种监测铁塔覆冰的定性分析方法及定量分析方法 |
CN112986948B (zh) * | 2021-04-20 | 2021-08-13 | 北京东方至远科技股份有限公司 | 基于InSAR技术的建筑形变监测方法和装置 |
CN115236655B (zh) | 2022-09-01 | 2022-12-20 | 成都理工大学 | 基于全极化sar的滑坡识别方法、系统、设备及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110163911A1 (en) | 2008-07-04 | 2011-07-07 | Telespazio S.P.A. | Identification and Analysis of Persistent Scatterers In Series of SAR Images |
JP2012014628A (ja) | 2010-07-05 | 2012-01-19 | Mitsubishi Electric Corp | 画像表示装置 |
JP2012523030A (ja) | 2009-04-03 | 2012-09-27 | テレ−リレヴァメント エウローパ−ティ.エルレ.エ. エッセ.エルレ.エルレ. | 同一領域上で取得されたsar画像における統計的に均質な画素を識別するための方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0894747A (ja) * | 1994-09-28 | 1996-04-12 | Mitsubishi Electric Corp | 合成開口レーダ画像による地形抽出装置 |
ITMI991154A1 (it) | 1999-05-25 | 2000-11-25 | Milano Politecnico | Procedimento per misure radar di spostamento di aere urbane e zone franose |
JP6320577B2 (ja) * | 2015-02-06 | 2018-05-09 | 三菱電機株式会社 | 合成開口レーダ信号処理装置 |
-
2017
- 2017-12-20 JP JP2018559097A patent/JP7077961B2/ja active Active
- 2017-12-20 WO PCT/JP2017/045631 patent/WO2018123748A1/ja active Application Filing
- 2017-12-20 US US16/470,301 patent/US11487001B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110163911A1 (en) | 2008-07-04 | 2011-07-07 | Telespazio S.P.A. | Identification and Analysis of Persistent Scatterers In Series of SAR Images |
JP2012523030A (ja) | 2009-04-03 | 2012-09-27 | テレ−リレヴァメント エウローパ−ティ.エルレ.エ. エッセ.エルレ.エルレ. | 同一領域上で取得されたsar画像における統計的に均質な画素を識別するための方法 |
JP2012014628A (ja) | 2010-07-05 | 2012-01-19 | Mitsubishi Electric Corp | 画像表示装置 |
Non-Patent Citations (1)
Title |
---|
MICHAELSEN,Eckart et al.,"Utilizing Phase for the Grouping of PS in Urban High-Resolution in-SAR-Images",Joint Urban Remote Sensing Event,2011年,p.189-192,DOI:10.1109/JURSE.2011.5764752 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2018123748A1 (ja) | 2019-10-31 |
US11487001B2 (en) | 2022-11-01 |
WO2018123748A1 (ja) | 2018-07-05 |
US20200096628A1 (en) | 2020-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7077961B2 (ja) | 画像解析装置、画像解析方法及びプログラム | |
KR101933216B1 (ko) | 드론과 공간정보를 이용한 하천지형정보 생성 방법 | |
US8179393B2 (en) | Fusion of a 2D electro-optical image and 3D point cloud data for scene interpretation and registration performance assessment | |
Dorninger et al. | 3D segmentation of unstructured point clouds for building modelling | |
US20060195858A1 (en) | Video object recognition device and recognition method, video annotation giving device and giving method, and program | |
Jiang et al. | Efficient structure from motion for oblique UAV images based on maximal spanning tree expansion | |
Pepe et al. | Use of SfM-MVS approach to nadir and oblique images generated throught aerial cameras to build 2.5 D map and 3D models in urban areas | |
US11841421B2 (en) | Synthetic aperture radar image analysis system, synthetic aperture radar image analysis method, and synthetic aperture radar image analysis program | |
CN105466399B (zh) | 快速半全局密集匹配方法和装置 | |
KR100904078B1 (ko) | 항공 사진의 영상정합을 이용한 3차원 공간 정보 생성 시스템 및 방법 | |
CN111458691B (zh) | 建筑物信息的提取方法、装置及计算机设备 | |
Ajibola et al. | Fusion of UAV-based DEMs for vertical component accuracy improvement | |
Mendes et al. | Photogrammetry with UAV’s: quality assessment of open-source software for generation of ortophotos and digital surface models | |
JPWO2019087673A1 (ja) | 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理システム | |
Sreedhar et al. | Automatic conversion of DSM to DTM by classification techniques using multi-date stereo data from cartosat-1 | |
KR100981588B1 (ko) | 특징점 픽셀의 크기와 방향 정보를 이용하는 벡터 변환에 기초한 도시공간 지리정보 생성 시스템 | |
JP7020418B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
Miraki et al. | Using canopy height model derived from UAV imagery as an auxiliary for spectral data to estimate the canopy cover of mixed broadleaf forests | |
Tyagi et al. | Elevation Data Acquisition Accuracy Assessment for ESRI Drone2Map, Agisoft Metashape, and Pix4Dmapper UAV Photogrammetry Software | |
KR101114904B1 (ko) | 도화원도와 항공 레이저 측량 데이터를 이용한 도시공간정보 구축 시스템 및 그 방법 | |
Ariff et al. | Transforming Physical Crime Scene into Geospatial-based Point Cloud Data | |
Pârvu et al. | Urban classification from aerial and satellite images | |
Scaioni et al. | Techniques for comparing multi-temporal archive aerial imagery for glacier monitoring with poor ground control | |
Bitelli et al. | A land in its setting: remote sensing satellite imagery for the characterization of the Eblaite Chora | |
Yu et al. | A cue line based method for building modeling from LiDAR and satellite imagery |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190611 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201116 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211005 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20211022 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220419 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220502 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7077961 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |