JP7243592B2 - 制御システム、制御方法およびプログラム - Google Patents
制御システム、制御方法およびプログラム Download PDFInfo
- Publication number
- JP7243592B2 JP7243592B2 JP2019212383A JP2019212383A JP7243592B2 JP 7243592 B2 JP7243592 B2 JP 7243592B2 JP 2019212383 A JP2019212383 A JP 2019212383A JP 2019212383 A JP2019212383 A JP 2019212383A JP 7243592 B2 JP7243592 B2 JP 7243592B2
- Authority
- JP
- Japan
- Prior art keywords
- mobile robot
- operation mode
- person
- staff
- group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 23
- 238000001514 detection method Methods 0.000 claims description 37
- 238000010586 diagram Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 238000003384 imaging method Methods 0.000 description 8
- 230000009471 action Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000032258 transport Effects 0.000 description 5
- 239000000284 extract Substances 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0212—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
- G05D1/0221—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving a learning process
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0212—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
- G05D1/0223—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving speed control of the vehicle
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0238—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/443—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
- G06V10/449—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters
- G06V10/451—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters with interaction between the filter responses, e.g. cortical complex cells
- G06V10/454—Integrating the filters into a hierarchical structure, e.g. convolutional neural networks [CNN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Evolutionary Computation (AREA)
- Aviation & Aerospace Engineering (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Automation & Control Theory (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Electromagnetism (AREA)
- Databases & Information Systems (AREA)
- Molecular Biology (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Biomedical Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Biodiversity & Conservation Biology (AREA)
- Business, Economics & Management (AREA)
- Game Theory and Decision Science (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Manipulator (AREA)
Description
以下、図面を参照して実施の形態1について説明する。実施の形態1にかかる制御システムは、所定の領域内を自律移動する搬送ロボットが被搬送物を収容して自律移動する。図1は、実施の形態1にかかる搬送システムの概観図である。図1に示す制御システム10は、制御システムの一実施態様である。制御システム10は、主な構成として、移動ロボット100、サーバ500およびカメラ600を有している。
次に、実施の形態2について説明する。実施の形態2にかかる制御システム10は、システム制御部の処理が実施の形態1と異なる。システム制御部513は、移動ロボット100の周辺において第1グループに属する人物が存在しない場合(N1=0)であって、移動ロボットの周辺に第2グループに属する人物が予め設定された密度より高く存在する場合には、第2動作モードと異なる第3動作モードを選択する。
100 移動ロボット
110 ロボット制御部
111 通信部
120 距離センサ群
130 駆動部
131 駆動輪
132 キャスター
140 操作受付部
150 筐体部
151 収納室扉
152 前後距離センサ
153 左右距離センサ
160 表示部
170 IDセンサ
180 ロボットカメラ
190 記憶部
500 サーバ
510 演算処理部
511 特徴検出部
512 分類部
513 システム制御部
520 通信部
530 記憶部
600 カメラ
600A 第1カメラ
600B 第2カメラ
800A、800B 撮像範囲
900 建物
901 部屋
902 通路
903 エレベータホール
Claims (8)
- 予め設定された施設を自律移動する移動ロボットの動作モードを制御する制御システムであって、
移動ロボットの周辺に存在する人物の着衣の特徴を検出する特徴検出部と、
前記着衣の特徴に基づいて前記人物を前記施設の非スタッフである第1グループまたは前記施設のスタッフである第2グループに分類する分類部と、
前記移動ロボットの周辺に前記第1グループに属する前記人物が存在する場合には第1動作モードを選択し、前記移動ロボットの周辺に前記第1グループに属する前記人物が存在しない場合には前記第1動作モードと異なる第2動作モードを選択して前記移動ロボットを制御するシステム制御部と、を備え、
前記システム制御部は、
前記第2動作モードにおける前記移動ロボットの第2移動速度を前記第1動作モードにおける第1移動速度よりも速い速度に設定するとともに、前記第1動作モードにおいて前記移動ロボットをエレベータに搭乗不可と設定し、前記第2動作モードにおいて、前記移動ロボットを前記エレベータに搭乗可と設定し、
前記移動ロボットの周辺において前記第1グループに属する前記非スタッフが存在しない場合であって、前記移動ロボットの周辺に前記第2グループに属する前記スタッフが予め設定された密度より高く存在する場合には、移動速度を前記第2移動速度より遅く設定するとともに前記エレベータを搭乗可と設定する前記第2動作モードと異なる第3動作モードを選択する、
制御システム。 - 前記移動ロボットの周辺を撮像して画像データを生成するカメラをさらに備え、
前記特徴検出部は、前記カメラが生成した前記画像データから前記着衣の特徴を検出する
請求項1に記載の制御システム。 - 前記カメラは、前記移動ロボットの周辺を撮像するように前記移動ロボットから離間した位置に設けられている
請求項2に記載の制御システム。 - 前記特徴検出部は、前記人物の前記着衣の予め設定された部分における色調を検出し
前記分類部は、前記色調に応じて前記人物を分類する
請求項3に記載の制御システム。 - 前記システム制御部が選択する前記第1動作モードにおける前記移動ロボットの第1移動範囲は、前記第2動作モードにおける第2移動範囲よりも狭い
請求項1~4のいずれか一項に記載の制御システム。 - 前記特徴検出部が検出する前記移動ロボットの周辺は、前記移動ロボットが存在する位置に応じて範囲が予め設定されている
請求項1~5のいずれか一項に記載の制御システム。 - 予め設定された施設を自律移動する移動ロボットの動作モードを制御する制御方法であって、
移動ロボットの周辺に存在する人物の着衣の特徴を検出する特徴検出ステップと、
前記着衣の特徴に基づいて前記人物を予め設定された前記施設の非スタッフである第1グループまたは前記施設のスタッフである第2グループに分類する分類ステップと、
前記移動ロボットの周辺に前記第1グループに属する前記人物が存在する場合には第1動作モードを選択し、前記移動ロボットの周辺に前記第1グループに属する前記人物が存在しない場合には前記第1動作モードと異なる第2動作モードを選択して前記移動ロボットを制御する制御ステップと、を備え、
前記制御ステップは、
前記第2動作モードにおける前記移動ロボットの第2移動速度を前記第1動作モードにおける第1移動速度よりも速い速度に設定するとともに、前記第1動作モードにおいて前記移動ロボットをエレベータに搭乗不可と設定し、前記第2動作モードにおいて、前記移動ロボットを前記エレベータに搭乗可と設定し、
前記移動ロボットの周辺において前記非スタッフが存在しない場合であって、前記移動ロボットの周辺に前記スタッフが予め設定された密度より高く存在する場合には、移動速度を前記第2移動速度より遅く設定するとともに前記エレベータを搭乗可と設定する前記第2動作モードと異なる第3動作モードを選択する、
制御方法。 - 予め設定された施設を自律移動する移動ロボットの動作モードを制御する制御方法であって、
移動ロボットの周辺に存在する人物の着衣の特徴を検出する特徴検出ステップと、
前記着衣の特徴に基づいて前記人物を予め設定された前記施設の非スタッフである第1グループまたは前記施設のスタッフである第2グループに分類する分類ステップと、
前記移動ロボットの周辺に前記第1グループに属する前記人物が存在する場合には第1動作モードを選択し、前記移動ロボットの周辺に前記第1グループに属する前記人物が存在しない場合には前記第1動作モードと異なる第2動作モードを選択して前記移動ロボットを制御する制御ステップと、を備え、
前記制御ステップは、
前記第2動作モードにおける前記移動ロボットの第2移動速度を前記第1動作モードにおける第1移動速度よりも速い速度に設定するとともに、前記第1動作モードにおいて前記移動ロボットをエレベータに搭乗不可と設定し、前記第2動作モードにおいて、前記移動ロボットを前記エレベータに搭乗可と設定し、
前記移動ロボットの周辺において前記非スタッフが存在しない場合であって、前記移動ロボットの周辺に前記スタッフが予め設定された密度より高く存在する場合には、移動速度を前記第2移動速度より遅く設定するとともに前記エレベータを搭乗可と設定する前記第2動作モードと異なる第3動作モードを選択する、
制御方法を、コンピュータに実行させるプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019212383A JP7243592B2 (ja) | 2019-11-25 | 2019-11-25 | 制御システム、制御方法およびプログラム |
US17/096,183 US11657634B2 (en) | 2019-11-25 | 2020-11-12 | Control system, control method, and program |
CN202011312269.5A CN112947402B (zh) | 2019-11-25 | 2020-11-20 | 控制系统、控制方法及程序 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019212383A JP7243592B2 (ja) | 2019-11-25 | 2019-11-25 | 制御システム、制御方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021086199A JP2021086199A (ja) | 2021-06-03 |
JP7243592B2 true JP7243592B2 (ja) | 2023-03-22 |
Family
ID=75973921
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019212383A Active JP7243592B2 (ja) | 2019-11-25 | 2019-11-25 | 制御システム、制御方法およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11657634B2 (ja) |
JP (1) | JP7243592B2 (ja) |
CN (1) | CN112947402B (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021157530A (ja) * | 2020-03-27 | 2021-10-07 | 本田技研工業株式会社 | 自律作業機、自律作業設定方法、およびプログラム |
JP2023097819A (ja) | 2021-12-28 | 2023-07-10 | トヨタ自動車株式会社 | 制御システム、制御方法、及びプログラム |
JP7201122B1 (ja) * | 2022-06-14 | 2023-01-10 | 三菱電機株式会社 | ビルシステム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008200770A (ja) | 2007-02-16 | 2008-09-04 | Toshiba Corp | ロボットおよびその制御方法 |
JP2013131100A (ja) | 2011-12-22 | 2013-07-04 | Univ Of Electro-Communications | 人数予測方法、人数予測装置、移動ロボット及びプログラム |
JP2018156597A (ja) | 2017-03-21 | 2018-10-04 | 株式会社東芝 | 情報処理装置、プログラム、及び情報処理方法 |
JP2019139716A (ja) | 2018-02-15 | 2019-08-22 | パナソニック株式会社 | 移動体管理装置、移動体管理システム、および移動体管理方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ATE418451T1 (de) * | 1998-06-18 | 2009-01-15 | Kline & Walker L L C | Automatische vorrichtung zur überwachung von auf abstand zu bedienende ausrüstungen und maschinen weltweit anwendbar |
WO2007047514A2 (en) | 2005-10-14 | 2007-04-26 | Aethon, Inc. | Robotic retrieval and delivery system |
CN101618542A (zh) * | 2009-07-24 | 2010-01-06 | 塔米智能科技(北京)有限公司 | 一种智能机器人迎宾系统和方法 |
KR101578881B1 (ko) * | 2014-03-11 | 2015-12-18 | 에브리봇 주식회사 | 로봇 청소기 및 그의 제어 방법 |
JP6203696B2 (ja) * | 2014-09-30 | 2017-09-27 | 富士ソフト株式会社 | ロボット |
US20180364045A1 (en) * | 2015-01-06 | 2018-12-20 | Discovery Robotics | Robotic platform with mapping facility |
WO2017086108A1 (ja) * | 2015-11-16 | 2017-05-26 | 大日本印刷株式会社 | 情報提示装置、情報提示方法、プログラム、情報処理装置及び案内ロボット制御システム |
US11445152B2 (en) * | 2018-08-09 | 2022-09-13 | Cobalt Robotics Inc. | Security automation in a mobile robot |
KR102565823B1 (ko) * | 2016-05-30 | 2023-08-10 | 엘지전자 주식회사 | 이동 로봇 및 그 이동 로봇의 제어 방법 |
JP6844124B2 (ja) * | 2016-06-14 | 2021-03-17 | 富士ゼロックス株式会社 | ロボット制御システム |
CN108734059B (zh) * | 2017-04-18 | 2022-02-11 | 深圳市丰巨泰科电子有限公司 | 室内移动机器人物体识别方法 |
US20200273345A1 (en) * | 2019-02-26 | 2020-08-27 | Aptiv Technologies Limited | Transportation system and method |
CN110355760B (zh) * | 2019-07-11 | 2022-03-18 | 天津捷强动力装备股份有限公司 | 特种机器人自主返航控制方法 |
-
2019
- 2019-11-25 JP JP2019212383A patent/JP7243592B2/ja active Active
-
2020
- 2020-11-12 US US17/096,183 patent/US11657634B2/en active Active
- 2020-11-20 CN CN202011312269.5A patent/CN112947402B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008200770A (ja) | 2007-02-16 | 2008-09-04 | Toshiba Corp | ロボットおよびその制御方法 |
JP2013131100A (ja) | 2011-12-22 | 2013-07-04 | Univ Of Electro-Communications | 人数予測方法、人数予測装置、移動ロボット及びプログラム |
JP2018156597A (ja) | 2017-03-21 | 2018-10-04 | 株式会社東芝 | 情報処理装置、プログラム、及び情報処理方法 |
JP2019139716A (ja) | 2018-02-15 | 2019-08-22 | パナソニック株式会社 | 移動体管理装置、移動体管理システム、および移動体管理方法 |
Also Published As
Publication number | Publication date |
---|---|
US20210157318A1 (en) | 2021-05-27 |
CN112947402B (zh) | 2024-05-17 |
CN112947402A (zh) | 2021-06-11 |
US11657634B2 (en) | 2023-05-23 |
JP2021086199A (ja) | 2021-06-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7243592B2 (ja) | 制御システム、制御方法およびプログラム | |
US20190374411A1 (en) | Patient support apparatuses with navigation and guidance systems | |
US11584017B2 (en) | Conveyance system, trained model generation method, trained model, control method, and program | |
JP7484761B2 (ja) | 制御システム、制御方法、及びプログラム | |
US20210403282A1 (en) | Passenger guidance device and passenger guidance method | |
JP7484758B2 (ja) | ロボット制御システム | |
US20220194737A1 (en) | Autonomous mobile system, autonomous mobile method, and autonomous mobile program | |
JP7468338B2 (ja) | 自律移動システム、自律移動方法及び自律移動プログラム | |
JP2022100904A (ja) | ロボット制御システム、ロボット制御方法、及び、制御プログラム | |
US12032384B2 (en) | Robot control system, robot control method, and control program | |
US20220253069A1 (en) | Robot control system, robot control method, and control program | |
JP2022038520A (ja) | 移動ロボット制御システム | |
JP7494746B2 (ja) | 自律移動システム、自律移動方法及び自律移動プログラム | |
US20230236601A1 (en) | Control system, control method, and computer readable medium | |
CN114852809B (zh) | 自主移动系统、自主移动方法和存储介质 | |
US20230364784A1 (en) | Control system, control method, and storage medium | |
US12032387B2 (en) | Autonomous mobile robot, autonomous mobile method, and storage medium | |
KR102652022B1 (ko) | 고객의 열차 탑승을 위한 길 안내용 로봇 및 시스템 | |
US11815883B2 (en) | Conveyance system, conveyance method, and program | |
US20230368517A1 (en) | Control system, control method, and storage medium | |
US20220204268A1 (en) | Management system, management method, and program | |
US20230150132A1 (en) | Robot control system, robot control method, and program | |
JP2023097819A (ja) | 制御システム、制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211119 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221031 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230207 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230220 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7243592 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |