JPWO2020036144A1 - Seat set and mobile device control system - Google Patents
Seat set and mobile device control system Download PDFInfo
- Publication number
- JPWO2020036144A1 JPWO2020036144A1 JP2020537069A JP2020537069A JPWO2020036144A1 JP WO2020036144 A1 JPWO2020036144 A1 JP WO2020036144A1 JP 2020537069 A JP2020537069 A JP 2020537069A JP 2020537069 A JP2020537069 A JP 2020537069A JP WO2020036144 A1 JPWO2020036144 A1 JP WO2020036144A1
- Authority
- JP
- Japan
- Prior art keywords
- area
- pattern
- information
- printed
- sheet
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 16
- 238000004891 communication Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 4
- 239000000463 material Substances 0.000 description 3
- 230000015556 catabolic process Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000004804 winding Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
- A63H18/00—Highways or trackways for toys; Propulsion by special interaction between vehicle and track
- A63H18/02—Construction or arrangement of the trackway
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Electromagnetism (AREA)
- General Health & Medical Sciences (AREA)
- Toxicology (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Toys (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
複数のシートのそれぞれに座標を示すパターンを印刷する場合に、それらに割り当てるための座標領域内の領域の増大を抑えること。シートセットは、複数のシートを含む。複数のシートのそれぞれは、所定のサイズを有し、当該シートを識別する情報が符号化されたパターンが印刷され、前記パターンを読み取る自走デバイスが始めに配置されるスタート領域と、前記スタート領域の周囲に配置され、割り当てられた座標領域内の座標が符号化されたパターンが印刷される共通領域と、を含む。複数のシートのいずれかの共通領域には、他の少なくとも1つのシートと重複する座標領域が割り当てられる。When printing a pattern showing coordinates on each of multiple sheets, suppress the increase of the area in the coordinate area for assigning to them. The sheet set includes a plurality of sheets. Each of the plurality of sheets has a predetermined size, a pattern in which information for identifying the sheet is encoded is printed, and a start area in which a self-propelled device for reading the pattern is first arranged and a start area. Includes a common area, which is placed around and printed with a coordinate-encoded pattern within the assigned coordinate area. A coordinate area that overlaps with at least one other sheet is allocated to the common area of any of the plurality of sheets.
Description
本発明はシートセットおよび移動デバイス制御システムに関する。 The present invention relates to seat sets and mobile device control systems.
紙などのシートにそのシート上の座標を示すパターンを印刷し、カメラのついた小型の装置でそのパターンを印刷することにより、その小型の装置のシート内の位置を検出する技術が存在する。 There is a technique for detecting the position of the small device in the sheet by printing a pattern indicating the coordinates on the sheet on a sheet such as paper and printing the pattern on a small device equipped with a camera.
特許文献1には、マットに座標を示すパターンを印刷し、自走デバイスに備えられたカメラでマット上のパターンを撮影することで、自走デバイスのマット内の位置を測定する技術が開示されている。
シート内の位置の検出精度を確保するためには、パターンを高密度に並べる必要があるため、必然的に各パターンのサイズが制限される。そのサイズの制限により、パターンのそれぞれに埋め込める情報量に限界がある。このため、パターンで座標表現が可能な座標空間は、必ずしも十分なサイズとならない。 In order to ensure the detection accuracy of the position in the sheet, it is necessary to arrange the patterns at a high density, so that the size of each pattern is inevitably limited. Due to its size limitation, there is a limit to the amount of information that can be embedded in each pattern. Therefore, the coordinate space in which the coordinates can be expressed by the pattern is not always a sufficient size.
本件発明者らは、複数のシートにパターンで表現される座標空間の一部をそれぞれ割り当て、そのパターンを読み取った際に、自走デバイスに、シートにより異なる動作をさせることを検討している。しかし、上述のように座標空間は必ずしも十分なサイズを有していないので、複数のシートのそれぞれに座標空間内の座標を割り当てる場合に、座標空間内の領域の不足が生じる恐れがあった。 The inventors of the present invention are studying assigning a part of the coordinate space represented by a pattern to a plurality of sheets, and when the pattern is read, cause the self-propelled device to perform different operations depending on the sheet. However, since the coordinate space does not necessarily have a sufficient size as described above, there is a possibility that the area in the coordinate space may be insufficient when the coordinates in the coordinate space are assigned to each of the plurality of sheets.
本発明は上記課題を鑑みてなされたものであり、その目的は、複数のシートのそれぞれに座標を示すパターンを印刷する場合に、それらに割り当てるための座標領域内の領域の増大を抑える技術を提供することである。 The present invention has been made in view of the above problems, and an object of the present invention is to provide a technique for suppressing an increase in an area in a coordinate area for allocating a pattern indicating coordinates to each of a plurality of sheets when printing a pattern. To provide.
上記課題を解決するために、本発明にかかるシートセットは、複数のシートを含む。前記複数のシートのそれぞれは、所定のサイズを有し当該シートを識別する情報が符号化されたパターンが印刷され、前記パターンを読み取る自走デバイスが始めに配置されるスタート領域と、前記スタート領域の周囲に配置され、割り当てられた座標領域内の座標が符号化されたパターンが印刷される共通領域と、を含む。前記複数のシートのそれぞれの前記共通領域には、他の少なくとも1つのシートと重複する座標領域が割り当てられる。 In order to solve the above problems, the sheet set according to the present invention includes a plurality of sheets. Each of the plurality of sheets has a start area in which a pattern having a predetermined size and encoded with information for identifying the sheet is printed, and a self-propelled device for reading the pattern is first arranged, and the start area. Includes a common area, which is placed around and printed with a coordinate-encoded pattern within the assigned coordinate area. A coordinate region that overlaps with at least one other sheet is assigned to the common area of each of the plurality of sheets.
また、本発明にかかる移動デバイス制御システムは、識別情報が符号化されたパターンが印刷されるスタート領域、および、スタート領域の周囲に配置され、割り当てられた座標領域内の座標が符号化されたパターンが印刷される共通領域を含むシートに印刷されたパターンを撮影するカメラを含み、前記シート上を自走する移動デバイスと、前記カメラにより撮影されたパターンから情報を復号する復号手段と、前記スタート領域に印刷されたパターンから復号された情報に基づいて、前記シートの識別情報を取得する識別手段と、前記共通領域に印刷されたパターンから復号された情報に基づいて、前記移動デバイスの位置を取得する位置取得手段と、前記取得された識別情報に紐づけられた前記共通領域のマップを取得するマップ取得手段と、前記取得されたマップおよび前記取得された前記移動デバイスの位置に基づいて、前記移動デバイスの動作を制御する制御手段と、を含む。 Further, in the mobile device control system according to the present invention, the start area on which the pattern in which the identification information is encoded is printed, and the coordinates in the assigned coordinate area are encoded by being arranged around the start area. A moving device that includes a camera that captures a pattern printed on a sheet including a common area on which the pattern is printed, a mobile device that runs on the sheet, a decoding means that decodes information from the pattern captured by the camera, and the above. The position of the moving device based on the identification means for acquiring the identification information of the sheet based on the information decoded from the pattern printed in the start area and the information decoded from the pattern printed in the common area. Based on the position acquisition means for acquiring the acquired identification information, the map acquisition means for acquiring the map of the common area associated with the acquired identification information, and the positions of the acquired map and the acquired mobile device. , A control means for controlling the operation of the mobile device, and the like.
本発明によれば、複数のシートのそれぞれに座標を示すパターンを印刷する場合に、それらに割り当てるための座標領域内の領域の増大を抑えることができる。 According to the present invention, when a pattern indicating coordinates is printed on each of a plurality of sheets, it is possible to suppress an increase in the area in the coordinate area for allocating the patterns.
本発明の一形態では、前記複数のシートのそれぞれの前記スタート領域には、前記スタート領域に割り当てられた座標領域内の座標が符号化されたパターンが印刷され、前記複数のシートのそれぞれの前記スタート領域には、他のシートのいずれとも重複しない座標領域が割り当てられてもよい。 In one embodiment of the present invention, a pattern in which the coordinates in the coordinate area assigned to the start area are encoded is printed on the start area of each of the plurality of sheets, and the respective start areas of the plurality of sheets are printed. The start area may be assigned a coordinate area that does not overlap with any of the other sheets.
以下では、本発明の実施形態について図面に基づいて説明する。出現する構成要素のうち同一機能を有するものには同じ符号を付し、その説明を省略する。本発明の実施形態では、制御システムとして、ユーザが簡易的な言語を用いて実習用のプログラム(以下では「実習プログラム」と記載する)を作成し、その実習プログラムを実行することにより迷路上で自走式のデバイスを走行させるプログラミング教材について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. Among the components that appear, those having the same function are designated by the same reference numerals, and the description thereof will be omitted. In the embodiment of the present invention, as a control system, a user creates a training program (hereinafter referred to as "practice program") using a simple language, and executes the training program on a maze. Explain programming materials for running self-propelled devices.
図1は、本発明の実施形態にかかる制御システムの一例を示す図である。図2は、本発明の実施形態にかかる制御システムのハードウェア構成の一例を示す図である。本発明にかかる制御システムは、デバイス制御装置10と、台車20a,20bと、コントローラ17と、カートリッジ18とを含む。台車20a,20bはカメラ24を有する移動デバイスであり、どちらも同じ機能を有する。以下では特に区別する必要がない限り、これらの台車20a,20bを台車20と記載する。デバイス制御装置10は、無線を介して台車20を制御する。コントローラ17はユーザによる操作を取得する入力装置であり、ケーブルによりデバイス制御装置10に接続されている。図3は、台車20の一例を示す図である。図3は、台車20を下からみた図である。台車20は、電源スイッチ250、スイッチ222、2つの車輪254をさらに含む。
FIG. 1 is a diagram showing an example of a control system according to an embodiment of the present invention. FIG. 2 is a diagram showing an example of the hardware configuration of the control system according to the embodiment of the present invention. The control system according to the present invention includes a
デバイス制御装置10は、プロセッサ11、記憶部12、通信部13、入出力部14を含む。台車20は、プロセッサ21、記憶部22、通信部23、カメラ24、2つのモータ25を含む。デバイス制御装置10は、制御のための専用の装置であってもよいし、汎用的なコンピュータであってもよい。
The
プロセッサ11は、記憶部12に格納されているプログラムに従って動作し、通信部13、入出力部14などを制御する。プロセッサ21は、記憶部22に格納されているプログラムに従って動作し、通信部23、カメラ24、モータ25などを制御する。上記プログラムは、カートリッジ18内のフラッシュメモリ等のコンピュータで読み取り可能な記憶媒体に格納されて提供されるが、インターネット等のネットワークを介して提供されてもよい。
The
記憶部12は、デバイス制御装置10に内蔵されるDRAMおよびフラッシュメモリと、カートリッジ18内のフラッシュメモリ等によって構成されている。記憶部22は、DRAMおよびフラッシュメモリ等によって構成されている。記憶部12,22は、上記プログラムを格納する。また、記憶部12,22は、プロセッサ11,21や通信部13,23等から入力される情報や演算結果を格納する。
The
通信部13,23は他の機器と通信するための集積回路やアンテナなどにより構成されている。通信部13,23は、例えばBluetooth(登録商標)プロトコルに従って互いに通信する機能を有する。通信部13,23は、プロセッサ11,21の制御に基づいて、他の装置から受信した情報をプロセッサ11,21や記憶部12,22に入力し、他の装置に情報を送信する。なお、通信部13はLANなどのネットワークを介して他の装置と通信する機能を有してもよい。
The
入出力部14は、コントローラ17などの入力デバイスからの情報を取得する回路と、音声出力デバイスや画像表示デバイスなどの出力デバイスを制御する回路とを含む。入出力部14は、入力デバイスから入力信号を取得し、その入力信号が変換された情報をプロセッサ11や記憶部12に入力する。また入出力部14は、プロセッサ11などの制御に基づいて、音声をスピーカに出力させ、画像を表示デバイスに出力させる。
The input /
モータ25は、プロセッサ21により回転方向、回転量および回転速度が制御される、いわゆるサーボモータである。2つのモータ25のそれぞれには、1つの車輪254が割り当てられており、モータ25は、割り当てられた車輪254を駆動する。
The
カメラ24は、台車20の下方を撮影するように配置され、台車20が置かれているシート31など(図4参照)に印刷されたパターンを撮影する。本実施形態では、シート31などには赤外線の周波数領域で認識されるパターンが印刷されており、カメラ24は、その赤外線の画像を撮影する。
The
図4は、台車20が配置されるシート31の一例を示す図である。図4は、複数のシート31が冊子状にまとめられている例を示している。それぞれのシート31には、ユーザが視認できる画像が印刷されており、さらに、カメラ24により撮影可能なパターンが印刷されている。図4の例では、ユーザが視認できる画像として、5×5のマスからなる迷路が印刷されている。この迷路はプログラミング教材のためのものである。ユーザは実習プログラムを作成し、台車20は、実習プログラムに従って移動する。マスの属性としては、スタートマス33a、ゴールマス33b、通行不能マス33i、通常マス33n、アクションマス33qなどがある。
FIG. 4 is a diagram showing an example of a
ユーザは、実習プログラムを制御システムに読み込ませたのちに、台車20のうち1台をスタートマス33aに配置し、制御システムが実習プログラムに応じて台車20を走行させる。例えば図4の例では、カートリッジ18により提供されるプログラムにより、制御システムは、台車20が通行不能マス33i上を走行しないように台車20を制御する。また台車20が通常マス33nやアクションマス33qを通ってゴールマス33bに到着すると、デバイス制御装置10はユーザがプログラムの作成に成功したことを意味する音声等を出力する。
After loading the training program into the control system, the user arranges one of the
シート31等に印刷されるパターンについてより詳細に説明する。シート31上には、所定の大きさ(例えば0.2mm角)の単位パターンがマトリクス状に並んでいる。単位パターンのそれぞれは、そのパターンが配置される位置の座標が符号化された画像である。パターンとして符号化されるデータの大きさはあらかじめ決まっており、符号化される座標の最大・最小値(座標空間の大きさ)は、そのデータの大きさと単位パターンの配置間隔とにより定まる。
The pattern printed on the
本実施形態にかかる制御システムでは、台車20のカメラ24がシート31等に印刷された単位パターンを撮影し、台車20またはデバイス制御装置10がその単位パターンを復号して座標を取得する。これにより、台車20のシート31等の上における位置が認識される。また、台車20またはデバイス制御装置10は、カメラ24により撮影された画像内にある複数の単位パターンのそれぞれから座標を取得し、その撮影された画像における複数の単位パターンの位置と、取得された座標とに基づいて、台車20の向きも算出する。
In the control system according to the present embodiment, the
本実施形態では、シート31等に印刷されるパターンを利用することにより、ステレオカメラなどの他のデバイスを用いることなくシート31等の上における台車20の位置を高精度に認識することができる。
In the present embodiment, by using the pattern printed on the
図5は、座標空間内の領域の割り当ての概要を示す図である。座標空間はxy座標の範囲により複数の割当領域に分割されており、分割された割当領域の一部は本実施形態におけるプログラミング教材のアプリケーション(本アプリケーション)に割り当てられ、また分割された領域の他の一部(他アプリケーション領域)は他のアプリケーションに割り当てられている。本アプリケーションに割り当てられた割当領域としては、共通割当領域、スタート割当領域、命令カード領域、追加マス領域、追加命令領域、追加付加領域がある。これらの割当領域のそれぞれの詳細については後述する。 FIG. 5 is a diagram showing an outline of the allocation of regions in the coordinate space. The coordinate space is divided into a plurality of allocated areas according to the range of the xy coordinates, and a part of the divided allocated areas is allocated to the application of the programming teaching material (this application) in the present embodiment, and other than the divided areas. Part of (other application area) is allocated to other applications. The allocation area allocated to this application includes a common allocation area, a start allocation area, an instruction card area, an additional mass area, an additional instruction area, and an additional additional area. Details of each of these allocated areas will be described later.
以下では、冊子に含まれる複数のシート31のそれぞれのうち、スタートマス33aの領域(スタート領域)を除く領域を共通領域とよぶ。共通領域は、スタート領域の周囲に配置される領域である。共通領域には、共通割当領域の一部の領域が割り当てられる。また、シート31には、複数のパターンが並んで印刷されており、そのパターンのそれぞれは、その割り当てられた領域のうちそのパターンの位置に対応する座標が符号化されたものである。
In the following, of each of the plurality of
図6は、共通割当領域を概略的に示す図である。共通割当領域は、スタートマス33aを中心とする9×9のマスに相当する領域である。図6に示されるマスの大きさはシート31に印刷される迷路のマスの大きさに対応する。図6の一点鎖線は図4に示されるシート31に印刷される座標空間内の領域を示している。各シート31の共通領域には、共通割当領域の9×9のマスのうち一部の領域が割り当てられる。より厳密には、共通領域には、共通割当領域に含まれる5×5のマスからスタートマス33aを除いた領域が割り当てられる。また図6の例では、共通割当領域におけるスタートマス33aの位置は固定されており、共通割当領域のうちシート31に割り当てられる領域は、シート31におけるスタートマス33aの位置に応じて変化する。
FIG. 6 is a diagram schematically showing a common allocation area. The common allocation area is an area corresponding to a 9 × 9 cell centered on the
これにより、複数のシート31のそれぞれの共通領域には、スタートマス33aとの相対位置を示す座標のパターンが印刷される。また、複数のシート31のそれぞれの共通領域には、他の少なくとも1つのシートの共通領域と重複する座標領域が割り当てられる。
As a result, a pattern of coordinates indicating the relative position with respect to the start
一方、スタートマス33aに相当するスタート領域には、シートを識別する情報が符号化されたパターンが印刷されている。より具体的には、スタート領域には、スタート割当領域内の座標領域が割り当てられ、その座標領域内の座標が符号化されたパターンが印刷される。スタート領域には、他のシート31のいずれとも重複しない座標領域が割り当てられる。
On the other hand, in the start area corresponding to the start
図7は、スタート割当領域の内訳を概略的に示す図である。スタート割当領域は、11×11のマスを有しており、これらのマスのそれぞれの大きさはシート31に印刷されるスタートマス33aの大きさに対応する。シート31のスタート領域には、スタート割当領域のうちいずれか1つのマスが割り当てられ、そのマスの座標が符号化されたパターンが印刷されている。図7の各マスに記載されている「1−1」などの符号は、そのマスに関連付けられたIDを示しており、そのIDはシート31を識別するものである。
FIG. 7 is a diagram schematically showing a breakdown of the start allocation area. The start allocation area has 11 × 11 squares, and the size of each of these squares corresponds to the size of the start square 33a printed on the
制御システムは、カメラ24で撮影されたスタート領域のパターンが示す座標がスタート割当領域のどのマスに属するか判定し、そのマスに関連付けられたシート31のIDを取得する。スタートマス33aには、始めにユーザにより自走する台車20が配置されるので、自走する台車20が移動を開始する前にどのシート31上にいるかを判定することができ、あるシート31と他のシート31とで、重複する座標が印刷されていても、制御システムはシート31に関連付けられたマップ等の情報に応じて台車20の動きを制御することができる。
The control system determines to which square of the start allocation region the coordinates indicated by the pattern of the start region photographed by the
次に、これまでに説明したシート31等を用いる制御システムの動作について、より詳細に説明する。図8は、制御システムが実現する機能を示すブロック図である。制御システムは、機能的に、初期位置取得部50、現在位置取得部51、スタート制御部52、実習プログラム取得部53、実習プログラム実行部54、追加情報取得部56、マップ格納部72を含む。初期位置取得部50、現在位置取得部51、スタート制御部52、実習プログラム取得部53、実習プログラム実行部54、追加情報取得部56は、主に、デバイス制御装置10に含まれるプロセッサ11が記憶部12に格納されるプログラムを実行し、通信部13を介して台車20を制御することにより実現される。また、初期位置取得部50、現在位置取得部51などの機能の一部または全部は、台車20に含まれるプロセッサ21が記憶部22に格納されるプログラムを実行し、通信部23を介してデバイス制御装置10とデータをやり取りし、カメラ24やモータ25を制御することにより実現される。
Next, the operation of the control system using the
マップ格納部72は、デバイス制御装置10に含まれる記憶部12により実現され、複数のシート31のそれぞれについてのマップやマップに関連する情報が格納されている一種のデータベースである。
The
初期位置取得部50は、カメラ24により撮影された画像から、座標が符号化されたパターンから情報を復号する。具体的には復号される情報は、シート31のうち台車20が配置された箇所の座標であり、シート31を識別することのできる情報である。
The initial
スタート制御部52は、初期位置取得部50により取得された台車20の座標に基づいて、実習プログラム実行部54の動作に関する設定をする。スタート制御部52は、機能的に、シート識別部61およびマップ特定部62を含む。シート識別部61は、初期位置取得部50により取得された情報(具体的には台車20の座標)に基づいて、台車20が配置されているシート31を識別する情報を取得する。マップ特定部62は、シート31の識別する情報に基づいて、シート31に関連付けられたマップの情報を取得する。マップの情報は、共通領域およびスタート領域にある各マスの属性の情報や、スタート位置から実習プログラムに従って移動する台車20を邪魔する他の台車20の動作プログラム、その他の付加的な情報を含む。
The
現在位置取得部51は、カメラ24により撮影された画像から、座標が符号化されたパターンを認識し、そのパターンが示す座標から、台車20の位置する座標と台車20の向きとを取得する。初期位置取得部50と現在位置取得部51は、実質的に同じものであってもよく、同じプログラムが実行されることにより実現されてもよい。
The current
実習プログラム取得部53は、スタート位置に配置される台車20を走行させるための実習プログラムであって、ユーザが作成した実習プログラムを取得する。
The training
実習プログラム実行部54は、取得された実習プログラムを実行し、取得されたマップと現在位置取得部51により取得された台車20の位置とに基づいてシート31上に配置された台車20の動作を制御する。実習プログラム実行部54は、機能的に、走行マス特定部65、マス属性取得部66、動作制御部67を含む。
The training
走行マス特定部65は、現在位置取得部51が取得した座標に基づいて、台車20が配置されるシート31上の領域が分割された複数のマスのうち、台車20が現在走行しているマスを特定する。
The traveling
マス属性取得部66は、マスのそれぞれと、台車20の動作を特定する動作情報とを関連付けて記憶するマップ格納部72から、走行マス特定部65により特定されたマスに関連付けられた動作情報を取得する。
The mass
動作制御部67は、取得された動作情報および現在の座標に基づいて、台車20の動作を制御する。
The
追加情報取得部56は、印刷されたパターンを自走するデバイスで読み取ることにより、マップの情報を取得し、取得されたマップの情報をマップ格納部72に格納する。
The additional
以下では、スタート制御部52および実習プログラム実行部54の処理について説明する。図9および10は、台車20を制御する処理の一例を示すフローチャートである。図10には、図9のステップS208の処理がより詳細に示されている。なお、図9,10に示される処理を行う前に、実習プログラム取得部53はユーザが作成した実習プログラムを取得している。
Hereinafter, the processing of the
はじめに、スタート制御部52に含まれる初期位置取得部50は、カメラ24により撮影されたパターンを復号し、シート31において台車20が置かれている現在の座標および向きを取得する(ステップS201)。次に、スタート制御部52に含まれるマップ特定部62は、取得された座標がスタート領域内にあることを示すか否か判定する(ステップS202)。より具体的には、マップ特定部62は、取得された座標がスタート割当領域内の座標であれば、取得された座標がスタート領域にある、言い換えれば、台車20がスタート領域にあると判定する。取得された座標により台車20がスタート領域にないと判定された場合には(ステップS202のN)、台車20をシート31のスタートマス33aに置くことを促すエラーを出力して処理を終了する(ステップS203)。
First, the initial
取得された座標により台車20がスタート領域にあると判定された場合には(ステップS202のY)、マップ特定部62は、現在の座標が示すマップIDを特定する(ステップS203)。より具体的には、マップ特定部62は、初期位置取得部50により取得された座標がスタート割当領域にある複数のマスのうちどのマスに属するか判定し、そのマスに関連付けられたマップIDを取得する。
When it is determined that the
そして、マップ特定部62はマップIDに応じたマップ情報をマップ格納部72から取得し、記憶部12のRAMに格納する(ステップS205)。図11は、あるシート31に紐づけられたマップ情報の一例を示す図である。図12は、台車20が配置されるシート31の他の一例を示す図である。図11のマップ情報は、図12のシート31に対応している。
Then, the
マップ情報は、マス情報と、命令情報と、付加情報とを含む。マス情報は、シート31に配置される5×5のマスのそれぞれの属性を示す。命令情報は、実習プログラムに従って動作する台車20(自台車)と異なる台車20(他台車)を動作させるプログラムを示す。付加情報は、その他の情報であり、スタート向き、CPU向き、課題種別、巻数を含む。スタート向きはスタート時の自台車の向きであり、図11の例ではシート31の上側を北とした方角によりあらわされている。CPU向きは、スタート時の他台車の向きである。課題種別は、シート31において、実習プログラムを実行する際の動作の種別を表しており、例えば、他台車があるか否かなどを表している。命令情報は、他台車を動かすプログラムの命令列であり、そのプログラムは課題種別が他台車の存在を示す場合に実行される。以下では、「台車20」と記載がある場合、特に断りがない場合は自台車を指すものとする。
The map information includes mass information, instruction information, and additional information. The mass information indicates the attributes of each of the 5 × 5 cells arranged on the
マス情報に含まれる各マスの属性について説明する。通常マス33nは、自台車が移動可能なマスであり、かつ実習プログラムに基づく停止や方向転換が可能なマスである。一方、滑り床33sは氷上のような滑りやすい環境を模したマスであり、自台車は滑り床33sのマスへ移動可能であるが、いったん滑り床33sの上に移動すると、自台車は実習プログラムの命令に関わらず滑り床33sと異なる属性のマスの上へ移動するか、壁(例えば通行不能マス33i)と衝突するまで同じ方向に動き続ける。このように、マスの属性は、台車20の動作を規定する動作情報の一種であり、あらかじめ定められているマスの属性の種別(例えば通常マス33nや滑り床33s)は、動作の種別にも相当する。また、マスの属性はモーションデータとも関連付けられている。モーションデータは台車20の走行の態様を示す情報であり、モーションデータは、例えば、少し進んでは止まりながら進む(例えば通常マス33n上)、左右にふらつきながら進む、詰まらずにまっすぐ進む(例えば滑り床33s上)などの動作の詳細を定義する情報である。なお、マスの属性が、モーションデータの代わりに動作を制御する動作プログラムを特定してもよい。つまり、マスの属性に応じて複数の動作プログラムを準備しておき、マスの属性に応じた動作プログラムが実行されることで動作を規定してもよい。
The attributes of each cell included in the mass information will be described. The
マップ特定部62がマップ情報を取得すると、スタート制御部52は、付加情報に含まれるスタート向きと、初期位置取得部50により取得された台車20の位置および向きとに基づいて、台車20のスタート位置および向きを調整する(ステップS207)。
When the
スタート位置および向きが調整されると、実習プログラム実行部54は、実習プログラムの実行を開始する。実習プログラム実行部54は、実習プログラムの命令(ステップ)を順に実行し、今回のステップにおける移動先を取得し、移動先まで台車を移動させる(ステップS208)。そして、今回のステップが最後のステップでない場合には(ステップS210のN)、実習プログラム実行部54は次のステップを実行対象とし、ステップS208から処理を繰り返す。一方、今回のステップが最後のステップである場合には(ステップS210のY)、実習プログラム実行部54は、実習プログラムの実行を終了し、台車20がゴールマス33bに到達したか否かに応じたメッセージを出力する(ステップS212)。より具体的には、実習プログラム実行部54は、台車20がゴールマス33bに到達した場合には、ミッションが成功したことを示す音声や画像を出力し、到達しない場合には、ユーザに再度のチャレンジを促す音声や画像を出力する。
When the start position and orientation are adjusted, the training
ここで、ステップS208の処理について図10を用いてさらに詳細に説明する。はじめに、実習プログラム実行部54に含まれる走行マス特定部65は、ユーザが作成した実習プログラムに基づいて、台車20の移動先となる次のマスを決定する(ステップS251)。より具体的には、走行マス特定部65は、実習プログラムの命令を順序にしたがって実行し、その命令が前方に1マスすすむなどの台車20の移動を伴う命令である場合や、滑り床33sにより命令による前回の移動から継続している場合には、その命令に従って次のマスを決定する。実習プログラム実行部54に含まれる動作制御部67は、次のマスが設定されない、または次のマスへ移動することが許されない場合には(ステップS252のN)、ステップS208の処理を終了し、ステップS210の処理へ遷移する。次のマスへ移動することが許されない場合とは、例えば移動先のマスの種別が通行不能マス33iである場合である。つまり、動作制御部67は、台車20が次に向かうマスの種別に応じて、台車20の移動を抑制している。
Here, the process of step S208 will be described in more detail with reference to FIG. First, the traveling
次のマスへ移動することが許される場合には(ステップS252のY)、実習プログラム実行部54に含まれるマス属性取得部66は、現在のマスの属性と、次のマスの属性とを取得する(ステップS254)。そして、実習プログラム実行部54に含まれる動作制御部67は、現在および次のマスの属性に応じた台車20の移動態様を決定する(ステップS255)。動作制御部67は、例えば現在のマスが通常マス33nで次のマスが滑り床33sである場合には、前半では通常マス33n上を少し進んでは止まりながら進み、後半では滑り床33s上を一定の速度で進むように台車20の動くような台車20の移動態様を決定する。次に、動作制御部67は、決定された移動態様により台車20を移動させる(ステップS256)。なお、走行マス特定部65は、移動後のマス(次のマスとして決定されたマス)を現在のマスとして設定する(ステップS257)。
When it is permitted to move to the next cell (Y in step S252), the mass
このように、マスの属性を設定し、その属性に応じた移動態様を設けることで、例えばシート31ごとに専用のプログラムを作成しなくても、台車20の移動のバリエーションを増やすことが可能になる。また、バリエーションを増やしつつ、マップの追加や変更が容易になる。
In this way, by setting the attributes of the mass and providing the movement mode according to the attributes, it is possible to increase the variation of the movement of the
本実施形態では、追加情報取得部56は、自走する台車20を用いて印刷されたパターンを読み込むことにより、新たなシート31についてのマップを追加することができる。以下では、追加情報取得部56の処理の詳細を説明する。
In the present embodiment, the additional
図13は、追加マップの情報が符号化された追加パターンを概略的に説明する図である。また、図14は、追加パターンとマップ情報との対応の一例を示す図である。追加パターンは、読取開始を示す領域、マップIDが符号化された領域、マス情報が符号化された領域、付加情報が符号化された領域、命令情報が符号化された領域(命令情報1から19)、および、読取終了を示す領域が所定の方向に並んで印刷されたものである。読取開始の領域は、追加マップの情報の読取を開始する前に、ユーザがいずれかの台車20を配置する領域である。マップIDが符号化された領域には、読み取られるマップを識別する情報が符号化されたパターンが配置されており、具体的には、この領域には、図7に示されるスタート割当領域に属するマスのうちいずれかの領域にあるパターンが印刷されている。
FIG. 13 is a diagram schematically illustrating an additional pattern in which the information of the additional map is encoded. Further, FIG. 14 is a diagram showing an example of correspondence between the additional pattern and the map information. The additional pattern includes an area indicating the start of reading, an area in which the map ID is encoded, an area in which the mass information is encoded, an area in which the additional information is encoded, and an area in which the instruction information is encoded (from instruction information 1). 19) and the areas indicating the end of reading are printed side by side in a predetermined direction. The reading start area is an area in which the user arranges any of the
マス情報の領域は、マス情報1から13のパターン領域からなる。付加情報の領域は、付加情報1から4のパターン領域からなる。命令情報の領域は、命令情報1から10のパターン領域からなる。マス情報1から13のパターン領域のそれぞれは、2つのマスの属性を示す情報が符号化されている。本実施形態ではマスの数は25であるため、マスの数の半分が小数点以下切り上げされた13がマス情報の数になっている。なお、マス情報1は、マス1−1,1−2の属性の情報が符号化されており、マス情報2以降も前のマス情報に続く2つのマスの属性の情報が符号化されている。命令情報1から10のパターン領域のそれぞれは、2つの命令を示す情報が符号化されている。命令情報1から10は、20の命令に復号される。
The mass information area consists of pattern areas of
追加パターンに含まれるパターン領域のうち、読取開始を示す領域を除くものは、パターン領域が並ぶ方向の長さが、直行する方向の長さより短くなっている。これにより、読取に必要な領域を削減しつつ、台車20が逸脱する可能性を減らすことができる。
Of the pattern regions included in the additional pattern, the length in the direction in which the pattern regions are lined up is shorter than the length in the orthogonal direction in the region excluding the region indicating the start of reading. As a result, the possibility that the
図14のパターンの欄に示される文字列は、座標空間内の各領域に紐づけられた一種の識別情報である。図15は、追加マス領域におけるマス属性と座標との関係の一例を示す図である。座標空間内の追加マス領域は、x軸方向に延びる境界線とy軸方向に延びる境界線とに囲まれる複数の矩形のセルに分割されており、それぞれのセルの座標領域はあるマスについて他の属性の種別と重複しないように割り当てられている。x軸の座標は、マス情報に属する2つのマスのうち先行するマスの属性を示し、y軸の座標は、あとに続くマスの属性を示している。図15の区分された領域内における文字列は、図14のパターンの欄に示される文字列に対応している。 The character string shown in the pattern column of FIG. 14 is a kind of identification information associated with each area in the coordinate space. FIG. 15 is a diagram showing an example of the relationship between the mass attribute and the coordinates in the additional mass area. The additional mass area in the coordinate space is divided into a plurality of rectangular cells surrounded by a boundary line extending in the x-axis direction and a boundary line extending in the y-axis direction, and the coordinate area of each cell is the other for a certain mass. It is assigned so that it does not overlap with the attribute type of. The x-axis coordinates indicate the attributes of the preceding cell of the two cells belonging to the mass information, and the y-axis coordinates indicate the attributes of the following cells. The character string in the divided area of FIG. 15 corresponds to the character string shown in the pattern column of FIG.
パターン領域のそれぞれには、データに割り当てられた領域に属する複数の座標が符号化された単位パターンが並ぶように印刷されている。1つのパターン領域に複数の情報を持たせることで、座標空間内のより大きい領域を割り当てる必要が生じるが、読取に必要なパターン領域の数を減らすことができる。 In each of the pattern areas, unit patterns in which a plurality of coordinates belonging to the areas assigned to the data are encoded are printed so as to be lined up. By having a plurality of pieces of information in one pattern area, it becomes necessary to allocate a larger area in the coordinate space, but the number of pattern areas required for reading can be reduced.
図16は、追加付加領域における付加情報と座標との関係の一例を示す図である。y軸の座標は、課題種別、スタート向き、キャラ行動、追加マップ関連、巻情報などの付加情報の種別を表し、x軸の座標はその付加情報の種別に設定されるデータを示している。そのデータは図16の各セルに記載されている。ただし、課題種別については、y軸で課題種別のうち大種別も示しており、x軸はアクションの種類などの小種別を表している。課題種別のセルに記載される数値は、パターンの番号である。 FIG. 16 is a diagram showing an example of the relationship between the additional information and the coordinates in the additional additional region. The y-axis coordinates represent the types of additional information such as task type, start orientation, character behavior, additional map-related information, and winding information, and the x-axis coordinates indicate the data set for the additional information type. The data is shown in each cell of FIG. However, regarding the task types, the y-axis also indicates the major types of the task types, and the x-axis represents the minor types such as the action type. The numerical value described in the task type cell is the pattern number.
図17は、追加命令領域における命令と座標との関係の一例を示す図である。マス情報と同様に、x軸の座標は、先行する命令を示し、y軸の座標は、あとに続く命令を示している。図15の区分された領域内における文字列は、図14のパターンの欄に示される文字列に対応している。 FIG. 17 is a diagram showing an example of the relationship between the command and the coordinates in the additional command area. Like the mass information, the x-axis coordinates indicate the preceding instruction and the y-axis coordinates indicate the following instruction. The character string in the divided area of FIG. 15 corresponds to the character string shown in the pattern column of FIG.
図18は、追加マップを読み取る処理の一例を示すフローチャートである。はじめに、追加情報取得部56は、カメラ24が撮影したパターンに基づいて、現在の台車20の座標および向きを取得する(ステップS101)。この処理は、初期位置取得部50の処理と同様である。
FIG. 18 is a flowchart showing an example of the process of reading the additional map. First, the additional
次に、追加情報取得部56は、台車20のスタート位置および向きを調整する(ステップS302)。より具体的には、現在の台車20のスタート位置および向きが許容範囲内にない場合に、スタートとして適正な位置及び向きになるように移動させる。
Next, the additional
次に、追加情報取得部56は、台車20を設定された方向へ向けて走行させる(ステップS303)。設定された方向は、始めは読取方向であるが後述する処理により修正される。そして、追加情報取得部56は、カメラ24により撮影された画像から、座標が符号化されたパターンを認識し、そのパターンが示す座標から、台車20の位置する現在座標Pと台車20の向きとを取得する(ステップS303)。ステップS303の処理は現在位置取得部51の処理と同様である。ここで、現在座標Pを(x,y)とし、台車20がx軸の正方向に移動するものとする。ここで、パターンが配置されていない領域に移動したなどの理由により、現在位置が取得できなかった場合には(ステップS305のN)、追加情報取得部56はこれまでに読み取られた情報が適正であったか、読み取る量が必要より少なくなっていないか確認し(ステップS310)、適正でない場合はエラーメッセージを出力する。
Next, the additional
一方、現在座標が取得された場合には(ステップS305のY)、追加情報取得部56は、前回に取得された台車20の座標である前回座標PPと現在座標Pとの差が所定の閾値より大きいか否かを判定する(ステップS306)。所定の閾値は、現在座標Pの測定間隔で移動しうる最大の距離より大きく、マス情報1などのパターン領域の読取方向の最小の長さより小さい。前回座標PPと現在座標Pとの差が所定の閾値より大きい場合には(ステップS306のY)、追加情報取得部56は台車20が別のパターン領域の上へ移ったと判断し、現在座標Pが示す情報を判定し、取得された情報をマップ格納部72(具体的にはメモリ)にマスと関連付けるように追加する(ステップS307)。前回座標PPと現在座標Pとの差が所定の閾値より小さい場合には(ステップS306のN)、追加情報取得部56は台車20が前回と同じパターン領域の上にあると判定し、ステップS307をスキップする。
On the other hand, when the current coordinates are acquired (Y in step S305), the additional
ステップS307の処理が終了する、またはステップS306で位置の差が閾値以下であると判定された後に、追加情報取得部56は現在位置Pの座標から、台車20が移動の目標とする目標座標Tを算出し、目標座標Tと現在座標Pとに基づいて、走行する方向を設定する(ステップS308)。そして、ステップS303以降の処理を繰り返す。これにより、追加情報取得部56は、所定の方向に自走する台車20に備えられたカメラ24が撮影した画像に基づいて、所定の方向に並ぶパターン領域から順にパターンを読み取り、マスに関連付けられるマス属性や命令などの情報を取得することができる。また、プログラムやデータを格納するカートリッジ18が販売された後であっても、オフラインでマップなどのデータを追加することができる。
After the process of step S307 is completed or it is determined in step S306 that the difference in position is equal to or less than the threshold value, the additional
Claims (3)
前記複数のシートのそれぞれは、
所定のサイズを有し、当該シートを識別する情報が符号化されたパターンが印刷され、前記パターンを読み取る自走デバイスが始めに配置されるスタート領域と、
前記スタート領域の周囲に配置され、割り当てられた座標領域内の座標が符号化されたパターンが印刷される共通領域と、
を含み、
前記複数のシートのそれぞれの前記共通領域には、他の少なくとも1つのシートと重複する座標領域が割り当てられる、
シートセット。Including multiple sheets
Each of the plurality of sheets
A start area in which a pattern having a predetermined size and encoded with information identifying the sheet is printed, and a self-propelled device that reads the pattern is first arranged,
A common area that is placed around the start area and prints a pattern in which the coordinates in the assigned coordinate area are encoded, and
Including
A coordinate area that overlaps with at least one other sheet is allocated to the common area of each of the plurality of sheets.
Seat set.
前記複数のシートのそれぞれの前記スタート領域には、前記スタート領域に割り当てられた座標領域内の座標が符号化されたパターンが印刷され、
前記複数のシートのそれぞれの前記スタート領域には、他のシートのいずれとも重複しない座標領域が割り当てられる、
シートセット。In the sheet set according to claim 1,
A pattern in which the coordinates in the coordinate area assigned to the start area are encoded is printed on the start area of each of the plurality of sheets.
A coordinate area that does not overlap with any of the other sheets is assigned to the start area of each of the plurality of sheets.
Seat set.
前記カメラにより撮影されたパターンから情報を復号する復号手段と、
前記スタート領域に印刷されたパターンから復号された情報に基づいて、前記シートの識別情報を取得する識別手段と、
前記共通領域に印刷されたパターンから復号された情報に基づいて、前記移動デバイスの位置を取得する位置取得手段と、
前記取得された識別情報に紐づけられた前記共通領域のマップを取得するマップ取得手段と、
前記取得されたマップおよび前記取得された前記移動デバイスの位置に基づいて、前記移動デバイスの動作を制御する制御手段と、
を含む移動デバイス制御システム。
Print on a sheet that includes a start area where the pattern with the coded identification information is printed, and a common area where the pattern is printed around the start area and the coordinates in the allocated coordinate area are printed. A mobile device that runs on the seat, including a camera that captures the printed pattern, and
Decoding means for decoding information from the pattern captured by the camera, and
An identification means for acquiring the identification information of the sheet based on the information decoded from the pattern printed in the start area, and
A position acquisition means for acquiring the position of the mobile device based on the information decoded from the pattern printed in the common area, and
A map acquisition means for acquiring a map of the common area associated with the acquired identification information, and
A control means for controlling the operation of the mobile device based on the acquired map and the position of the acquired mobile device.
Mobile device control system including.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018153621 | 2018-08-17 | ||
JP2018153621 | 2018-08-17 | ||
PCT/JP2019/031679 WO2020036144A1 (en) | 2018-08-17 | 2019-08-09 | Sheet set and mobile device control system |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020036144A1 true JPWO2020036144A1 (en) | 2021-05-13 |
JP7038833B2 JP7038833B2 (en) | 2022-03-18 |
Family
ID=69525415
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020537069A Active JP7038833B2 (en) | 2018-08-17 | 2019-08-09 | Seat set and mobile device control system |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7038833B2 (en) |
WO (1) | WO2020036144A1 (en) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018025467A1 (en) * | 2016-08-04 | 2018-02-08 | ソニー株式会社 | Information processing device, information processing method, and information medium |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6695668B2 (en) * | 2001-01-29 | 2004-02-24 | Kevin Gerard Donahue | Toy vehicle and method of controlling a toy vehicle from a printed track |
JP3215614U (en) * | 2017-12-20 | 2018-04-05 | 安譜國際股▲分▼有限公司 | Educational toys |
-
2019
- 2019-08-09 WO PCT/JP2019/031679 patent/WO2020036144A1/en active Application Filing
- 2019-08-09 JP JP2020537069A patent/JP7038833B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018025467A1 (en) * | 2016-08-04 | 2018-02-08 | ソニー株式会社 | Information processing device, information processing method, and information medium |
Also Published As
Publication number | Publication date |
---|---|
JP7038833B2 (en) | 2022-03-18 |
WO2020036144A1 (en) | 2020-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111039113A (en) | Elevator running state determining method, device, equipment and medium | |
CN115170580A (en) | Plate processing control method and device, computer equipment and storage medium | |
JP7038833B2 (en) | Seat set and mobile device control system | |
KR20190096487A (en) | Unmanned forklift that can move based on two-dimensional marker and operating method thereof | |
JP7038834B2 (en) | Mobile device control system and seat | |
CN118258406A (en) | Automatic guided vehicle navigation method and device based on visual language model | |
US11498013B2 (en) | Card, card reading system, and card set | |
JPWO2019171491A1 (en) | Mobile control device, mobile, mobile control system, mobile control method and mobile control program | |
CN111854757A (en) | Navigation method, navigation device, electronic equipment and storage medium | |
JP7028309B2 (en) | Mobile guidance device, mobile guidance method, and program | |
JP7223133B2 (en) | Control system, control method and program | |
KR102595490B1 (en) | Method of cost determination for path planning for unmanned vehicle and unmanned vehicle | |
JP7322168B2 (en) | control systems, seats and toy systems | |
JPWO2020153252A1 (en) | Control system, control method, program and seat set | |
JP2020035108A (en) | Vehicle control device, and vehicle control method | |
CN111727415A (en) | Unmanned aerial vehicle control method, terminal, unmanned aerial vehicle and storage medium | |
JP7497769B2 (en) | MOBILE BODY CONTROL SYSTEM, CONTROL DEVICE, CONTROL METHOD, AND COMPUTER PROGRAM | |
WO2024180725A1 (en) | Information processing device, control method, and computer-readable recording medium | |
JP2008158988A (en) | Information processor and control method therefor, program, and computer-readable storage medium | |
JP2017228057A (en) | Manipulation device | |
JP2022181435A (en) | Course editing device, course editing method, course editing program and recording medium | |
JP2023011114A (en) | Travelling body system, travelling body control device and travelling body | |
JP2023176330A (en) | Mobile body control system, mobile body control method, and mobile body control program | |
CN115540225A (en) | Mobile air conditioner control method and device, mobile air conditioner and storage medium | |
CN114253527A (en) | Data processing method based on physical programming and physical programming equipment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201015 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211207 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220127 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220222 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220308 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7038833 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |