JP2019200175A - 魚種推定システム、魚種推定方法、及びプログラム - Google Patents
魚種推定システム、魚種推定方法、及びプログラム Download PDFInfo
- Publication number
- JP2019200175A JP2019200175A JP2018096081A JP2018096081A JP2019200175A JP 2019200175 A JP2019200175 A JP 2019200175A JP 2018096081 A JP2018096081 A JP 2018096081A JP 2018096081 A JP2018096081 A JP 2018096081A JP 2019200175 A JP2019200175 A JP 2019200175A
- Authority
- JP
- Japan
- Prior art keywords
- fish
- data
- fish species
- image
- echo
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 241000251468 Actinopterygii Species 0.000 title claims abstract description 212
- 241000894007 species Species 0.000 title claims description 20
- 238000000034 method Methods 0.000 title claims description 16
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims abstract description 28
- 238000010801 machine learning Methods 0.000 claims abstract description 21
- 230000006870 function Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 8
- 238000013528 artificial neural network Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 241000252233 Cyprinus carpio Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/86—Combinations of sonar systems with lidar systems; Combinations of sonar systems with systems not using wave reflection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/96—Sonar systems specially adapted for specific applications for locating fish
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
- G01S7/539—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
- G01S7/56—Display arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Acoustics & Sound (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
Abstract
Description
図1は、実施形態に係る魚種推定システム1の構成例を示すブロック図である。魚群推定システム1は、魚種推定装置10、カメラ2、GPSプロッタ3、魚群探知機4及びデータベース19を備えている。
図3は、魚種学習/推論部13の学習フェーズを説明するためのブロック図である。図4は、魚種学習/推論部13の学習フェーズの手順例を示すフロー図である。
図5は、魚種学習/推論部13の推論フェーズを説明するためのブロック図である。図6は、魚種学習/推論部13の推論フェーズの手順例を示すフロー図である。
図8は、魚群探知機4の構成例を示すブロック図である。魚群探知機4は、送受波器41、送受切替部42、送信回路43、受信回路44、AD変換器45、制御部46、表示部47、操作部48及び通知部49を備えている。制御部46は、表示制御部461及び一致判定部463を含んでいる。
図9は、表示制御部461を実現するために制御部46が実行する表示制御の手順例を示すフロー図である。図10は、表示制御を実行する際に参照されるマークテーブルの例を示す図である。
図14は、一致判定部463を実現するために制御部46が実行する魚種通知の手順例を示すフロー図である。まず、制御部46は、ユーザから魚種の指定を受け付ける(S41)。魚種の指定は、ユーザが操作部48を操作することにより行われる。次に、制御部46は、魚種推定装置10から推定された魚種を取得する(S42)。
Claims (10)
- 水中に発せられた超音波の反射波から生成されたエコーデータを少なくとも含むデータセットを取得する取得手段と、
前記データセットを入力データとするとともに、魚種を教師データとして機械学習により作成された学習済みモデルを用い、前記取得手段により取得された前記データセットの前記エコーデータに含まれる魚像の魚種を推定する推論手段と、
を備える魚種推定システム。 - 漁獲された魚を撮影するカメラにより生成された画像データに含まれる魚像の魚種を判別する判別手段と、
前記判別手段により判別された魚種を教師データとして前記学習済みモデルを作成する学習手段と、
をさらに備える、
請求項1に記載の魚種推定システム。 - 前記判別手段は、前記画像データを入力データとするとともに、魚種を教師データとして機械学習により作成された学習済みモデルを用い、前記画像データに含まれる魚像の魚種を判別する、
請求項2に記載の魚種推定システム。 - 前記取得手段は、前記エコーデータで魚影が検知されたときの位置と、前記画像データが生成された位置との距離が閾値以下である場合に、前記データセットと前記画像データとを関連付ける、
請求項2又は3に記載の魚種推定システム。 - 前記データセットは、位置データ、水温データ及び水深データから選択される1又は複数のデータをさらに含む、
請求項1ないし4の何れかに記載の魚種推定システム。 - 前記学習済みモデルは、魚種及び魚量を教師データとして作成され、
前記推論手段は、前記エコーデータに含まれる魚像の魚種及び魚量を推定する、
請求項1ないし5の何れかに記載の魚種推定システム。 - 前記エコーデータに基づくエコー画像を表示する表示制御手段をさらに備え、
前記表示制御手段は、前記推論手段により推定された魚種を表すマークを、前記エコー画像に含まれる魚像と対応付けて前記エコー画像上に付加する、
請求項1ないし6の何れかに記載の魚種推定システム。 - 前記推論手段により推定された魚種が予め指定された魚種と一致する場合に、ユーザに通知する通知手段をさらに備える、
請求項1ないし7の何れかに記載の魚種推定システム。 - 水中に発せられた超音波の反射波から生成されたエコーデータを少なくとも含むデータセットを取得し、
前記データセットを入力データとするとともに、魚種を教師データとして機械学習により作成された学習済みモデルを用い、取得された前記データセットの前記エコーデータに含まれる魚像の魚種を推定する、
魚種推定方法。 - 水中に発せられた超音波の反射波から生成されたエコーデータを少なくとも含むデータセットを取得する取得手段、及び、
前記データセットを入力データとするとともに、魚種を教師データとして機械学習により作成された学習済みモデルを用い、前記取得手段により取得された前記データセットの前記エコーデータに含まれる魚像の魚種を推定する推論手段、
としてコンピュータを機能させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018096081A JP7126858B2 (ja) | 2018-05-18 | 2018-05-18 | 魚種推定システム、魚種推定方法、及びプログラム |
EP19174516.5A EP3570071A1 (en) | 2018-05-18 | 2019-05-14 | Fish species estimating system, and method of estimating fish species |
US16/414,458 US20190353765A1 (en) | 2018-05-18 | 2019-05-16 | Fish species estimating system, and method of estimating fish species |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018096081A JP7126858B2 (ja) | 2018-05-18 | 2018-05-18 | 魚種推定システム、魚種推定方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019200175A true JP2019200175A (ja) | 2019-11-21 |
JP7126858B2 JP7126858B2 (ja) | 2022-08-29 |
Family
ID=66589208
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018096081A Active JP7126858B2 (ja) | 2018-05-18 | 2018-05-18 | 魚種推定システム、魚種推定方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20190353765A1 (ja) |
EP (1) | EP3570071A1 (ja) |
JP (1) | JP7126858B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021103092A (ja) * | 2019-12-24 | 2021-07-15 | 株式会社アイシン | シート姿勢検出装置 |
KR20220048085A (ko) * | 2020-10-12 | 2022-04-19 | 박교열 | 머신 러닝 및 위치/환경 정보에 기반한 객체 영상 분류 방법 |
WO2022080407A1 (ja) * | 2020-10-14 | 2022-04-21 | 国立研究開発法人海洋研究開発機構 | 魚数算出方法、魚数算出プログラム、及び、魚数算出装置 |
KR20230110861A (ko) * | 2022-01-17 | 2023-07-25 | 전남대학교산학협력단 | 딥러닝을 이용한 소나 영상내의 어류 검출 방법 |
KR102675081B1 (ko) * | 2023-09-27 | 2024-06-14 | 주식회사 해랑기술정책연구소 | 어업 활동 중 상괭이 혼획 모니터링 및 보고 장치 및 방법 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111406693A (zh) * | 2020-04-23 | 2020-07-14 | 上海海洋大学 | 基于仿生海鳗的海洋牧场渔业资源养护效果评价方法 |
CN111348161B (zh) * | 2020-04-23 | 2024-02-09 | 上海海洋大学 | 一种应用于海洋牧场的资源环境监测系统及其操作方法 |
CN111965654A (zh) * | 2020-08-03 | 2020-11-20 | 安庆师范大学 | 一种江豚无线定位追踪系统及追踪方法 |
US11516997B2 (en) * | 2020-11-24 | 2022-12-06 | X Development Llc | Escape detection and mitigation for aquaculture |
JP2024005623A (ja) * | 2022-06-30 | 2024-01-17 | 古野電気株式会社 | サーバ、魚種判別システム、魚種判別方法およびプログラム |
JP2024013658A (ja) * | 2022-07-20 | 2024-02-01 | 古野電気株式会社 | 魚種判別システム、サーバ、魚種判別方法およびプログラム |
US20240103163A1 (en) * | 2022-09-22 | 2024-03-28 | Furuno Electric Co., Ltd. | Fish species discrimination system and method |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS475811Y1 (ja) * | 1968-12-18 | 1972-02-29 | ||
JPS56154681A (en) * | 1980-05-01 | 1981-11-30 | Honda Keisuke | Fish detector discriminating kind of fish |
JPH05312947A (ja) * | 1992-05-13 | 1993-11-26 | Furuno Electric Co Ltd | 魚種判別装置 |
JPH07231733A (ja) * | 1993-09-30 | 1995-09-05 | Hirobumi Matsuo | 魚種識別装置 |
JPH10111922A (ja) * | 1996-10-08 | 1998-04-28 | Mitsubishi Heavy Ind Ltd | 魚種判別処理装置 |
JP2004271338A (ja) * | 2003-03-07 | 2004-09-30 | Seiko Epson Corp | 魚群情報共有システム、魚群情報端末装置、魚群情報共有方法、魚群情報端末装置の制御方法、魚群情報共有プログラム、魚群情報端末装置の制御プログラム、魚群情報共有プログラムを記録したコンピュータ読み取り可能な記録媒体、魚群情報端末装置の制御プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2013057609A (ja) * | 2011-09-09 | 2013-03-28 | Furuno Electric Co Ltd | アラーム発生装置、超音波探知装置、アラーム発生方法、超音波探知方法、アラーム発生プログラム、超音波探知プログラム |
WO2013099271A1 (ja) * | 2011-12-28 | 2013-07-04 | 山田電器工業株式会社 | 寸法計測方法、カメラ付き電子機器、および、カメラ付き電子機器用プログラム |
JP2014002084A (ja) * | 2012-06-20 | 2014-01-09 | Furuno Electric Co Ltd | 水中探知装置、水中表示システム、プログラムおよび水中表示方法 |
JP2015087328A (ja) * | 2013-10-31 | 2015-05-07 | 学校法人東北学院 | 体長種別判別装置、水中探知装置及び体長種別判別方法 |
WO2016092646A1 (ja) * | 2014-12-10 | 2016-06-16 | 株式会社ニレコ | 魚種判別装置および魚種判別方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014077703A (ja) | 2012-10-10 | 2014-05-01 | Furuno Electric Co Ltd | 魚種判別装置、信号処理装置、水中探知機、魚種判別方法及びプログラム |
-
2018
- 2018-05-18 JP JP2018096081A patent/JP7126858B2/ja active Active
-
2019
- 2019-05-14 EP EP19174516.5A patent/EP3570071A1/en active Pending
- 2019-05-16 US US16/414,458 patent/US20190353765A1/en not_active Abandoned
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS475811Y1 (ja) * | 1968-12-18 | 1972-02-29 | ||
JPS56154681A (en) * | 1980-05-01 | 1981-11-30 | Honda Keisuke | Fish detector discriminating kind of fish |
JPH05312947A (ja) * | 1992-05-13 | 1993-11-26 | Furuno Electric Co Ltd | 魚種判別装置 |
JPH07231733A (ja) * | 1993-09-30 | 1995-09-05 | Hirobumi Matsuo | 魚種識別装置 |
JPH10111922A (ja) * | 1996-10-08 | 1998-04-28 | Mitsubishi Heavy Ind Ltd | 魚種判別処理装置 |
JP2004271338A (ja) * | 2003-03-07 | 2004-09-30 | Seiko Epson Corp | 魚群情報共有システム、魚群情報端末装置、魚群情報共有方法、魚群情報端末装置の制御方法、魚群情報共有プログラム、魚群情報端末装置の制御プログラム、魚群情報共有プログラムを記録したコンピュータ読み取り可能な記録媒体、魚群情報端末装置の制御プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2013057609A (ja) * | 2011-09-09 | 2013-03-28 | Furuno Electric Co Ltd | アラーム発生装置、超音波探知装置、アラーム発生方法、超音波探知方法、アラーム発生プログラム、超音波探知プログラム |
WO2013099271A1 (ja) * | 2011-12-28 | 2013-07-04 | 山田電器工業株式会社 | 寸法計測方法、カメラ付き電子機器、および、カメラ付き電子機器用プログラム |
JP2014002084A (ja) * | 2012-06-20 | 2014-01-09 | Furuno Electric Co Ltd | 水中探知装置、水中表示システム、プログラムおよび水中表示方法 |
JP2015087328A (ja) * | 2013-10-31 | 2015-05-07 | 学校法人東北学院 | 体長種別判別装置、水中探知装置及び体長種別判別方法 |
WO2016092646A1 (ja) * | 2014-12-10 | 2016-06-16 | 株式会社ニレコ | 魚種判別装置および魚種判別方法 |
Non-Patent Citations (4)
Title |
---|
平間 友大 他: "CNNを用いた魚群探知機による魚種判別", FIT2017 第16回情報科学技術フォーラム 講演論文集 第2分冊, JPN6022004022, 5 September 2017 (2017-09-05), JP, pages 293 - 294, ISSN: 0004765799 * |
平間 友大 他: "CNNを用いた魚群音響画像に基づく魚種推定", 人工知能学会 「社会におけるAI」研究会 第31回研究会 (「社会システムと知能合同研究会」) [O, JPN6022004020, 4 March 2018 (2018-03-04), JP, pages 1 - 6, ISSN: 0004765797 * |
脇坂 健太郎 ほか: "Convolutional Neural Networkを用いた魚画像認識", 電子情報通信学会技術研究報告, vol. 第115巻 第457号, JPN6022017872, 14 February 2016 (2016-02-14), JP, pages 1 - 5, ISSN: 0004765798 * |
金城 篤史 他: "サポートベクターマシンを用いた遠隔的魚種識別技術の開発", 電子情報通信学会技術研究報告, vol. 第114巻 第198号, JPN6022004025, 25 August 2014 (2014-08-25), JP, pages 57 - 62, ISSN: 0004765800 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021103092A (ja) * | 2019-12-24 | 2021-07-15 | 株式会社アイシン | シート姿勢検出装置 |
KR20220048085A (ko) * | 2020-10-12 | 2022-04-19 | 박교열 | 머신 러닝 및 위치/환경 정보에 기반한 객체 영상 분류 방법 |
KR102424081B1 (ko) * | 2020-10-12 | 2022-07-25 | 박교열 | 머신 러닝 및 위치/환경 정보에 기반한 객체 영상 분류 방법 |
WO2022080407A1 (ja) * | 2020-10-14 | 2022-04-21 | 国立研究開発法人海洋研究開発機構 | 魚数算出方法、魚数算出プログラム、及び、魚数算出装置 |
JPWO2022080407A1 (ja) * | 2020-10-14 | 2022-04-21 | ||
JP7287734B2 (ja) | 2020-10-14 | 2023-06-06 | 国立研究開発法人海洋研究開発機構 | 魚数算出方法、魚数算出プログラム、及び、魚数算出装置 |
KR20230110861A (ko) * | 2022-01-17 | 2023-07-25 | 전남대학교산학협력단 | 딥러닝을 이용한 소나 영상내의 어류 검출 방법 |
KR102604114B1 (ko) * | 2022-01-17 | 2023-11-22 | 전남대학교산학협력단 | 딥러닝을 이용한 소나 영상내의 어류 검출 방법 |
KR102675081B1 (ko) * | 2023-09-27 | 2024-06-14 | 주식회사 해랑기술정책연구소 | 어업 활동 중 상괭이 혼획 모니터링 및 보고 장치 및 방법 |
Also Published As
Publication number | Publication date |
---|---|
EP3570071A1 (en) | 2019-11-20 |
US20190353765A1 (en) | 2019-11-21 |
JP7126858B2 (ja) | 2022-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7126858B2 (ja) | 魚種推定システム、魚種推定方法、及びプログラム | |
US20190204416A1 (en) | Target object detecting device, method of detecting a target object and computer readable medium | |
US10551498B2 (en) | Wireless sonar device | |
US12084150B2 (en) | System and method for measuring and sharing marine activity information | |
JP2017126150A (ja) | 船舶情報検索システム、船舶情報検索方法、および船舶情報検索サーバ | |
WO2020196543A1 (ja) | 漁場情報提供装置および漁業情報提供プログラム | |
JP7449567B2 (ja) | 通信端末、プログラム及び方法 | |
JPWO2019198701A1 (ja) | 分析装置、分析方法、プログラムおよび水中生物監視システム | |
KR20220048861A (ko) | 피싱 통계 및 예측 정보를 제공하는 피싱용 내비게이션 단말기. | |
JPWO2019198611A1 (ja) | 特徴推定装置および特徴推定方法 | |
JP2021012193A (ja) | 魚種学習装置、魚種学習システムおよび魚種学習方法 | |
US20210088656A1 (en) | Fish finder | |
Tolimieri et al. | Evaluating the SeaBED AUV for monitoring groundfish in untrawlable habitat | |
CN110084187A (zh) | 基于计算机视觉的位置识别方法、装置、设备及存储介质 | |
JP7093139B1 (ja) | プログラム、情報処理装置、情報処理システム及び情報処理方法 | |
EP4006580A1 (en) | Improved sonar display features | |
KR20160059453A (ko) | 스마트폰 탑재용 케이스장치 및 다이빙로그시스템 | |
JP2006033273A (ja) | プリント装置、プリント方法及びプログラム | |
KR101595864B1 (ko) | 스마트폰 탑재용 케이스장치 및 다이빙로그시스템 | |
JP7039621B2 (ja) | レーダー装置 | |
CN106338734A (zh) | 鱼群探知机、鱼群探知系统以及鱼群探知方法 | |
JP7489086B2 (ja) | 情報処理装置、プログラム及び方法 | |
WO2024005070A1 (en) | Fish species discrimination method, server, program and fish species discrimination system | |
CN117572438B (zh) | 一种走航式鱼群探测方法及系统 | |
Himawan et al. | Fish Tagging via RFID and Bluetooth: Field Testing and Lessons Learned |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210323 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220124 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220510 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220629 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220802 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220817 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7126858 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |