JP2024019758A - 操作対象機器の操作用のプログラム - Google Patents
操作対象機器の操作用のプログラム Download PDFInfo
- Publication number
- JP2024019758A JP2024019758A JP2022122408A JP2022122408A JP2024019758A JP 2024019758 A JP2024019758 A JP 2024019758A JP 2022122408 A JP2022122408 A JP 2022122408A JP 2022122408 A JP2022122408 A JP 2022122408A JP 2024019758 A JP2024019758 A JP 2024019758A
- Authority
- JP
- Japan
- Prior art keywords
- operation information
- area
- display device
- information
- target device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000033001 locomotion Effects 0.000 claims description 50
- 239000013598 vector Substances 0.000 claims description 27
- 230000000717 retained effect Effects 0.000 abstract description 11
- 230000010365 information processing Effects 0.000 description 88
- 238000004891 communication Methods 0.000 description 41
- 238000010586 diagram Methods 0.000 description 40
- 238000000034 method Methods 0.000 description 29
- 230000008569 process Effects 0.000 description 25
- 238000012545 processing Methods 0.000 description 24
- 230000006870 function Effects 0.000 description 13
- 230000006399 behavior Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 7
- 238000010079 rubber tapping Methods 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 4
- 230000001174 ascending effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000005057 finger movement Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0016—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the operator's input device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Aviation & Aerospace Engineering (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Mathematical Physics (AREA)
- Automation & Control Theory (AREA)
- Computing Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Mechanical Engineering (AREA)
- Selective Calling Equipment (AREA)
- Telephone Function (AREA)
Abstract
Description
したがって、特許文献1及び2の操作装置の場合、タッチオンの状態を継続しやすいサイズのタッチパネルが用いられなければならない。
しかし、このような操作では、操作対象機器の細かな操作ができない。
したがって、接触感知領域に対して、指を押し続けることが可能なサイズのタッチパネルを用いなければならない。
しかし、このような2点を定める操作が可能なサイズのタッチパネルを用いなければならない。
また、操作のパターンも限られたものとなっている。
さらに、これらの装置では、指を触れ続けての操作が必要であり、小さいサイズのタッチパネルを使用した場合には、指を触れ続ける操作の難度が高くなる。
操作手段は、表示装置への接触が行われていない状態においても、保持されている現在の操作情報を操作対象機器に送信して、操作対象機器を操作する。
操作情報生成保持手段は、表示装置への接触が再度行われた場合に、保持されている現在の操作情報に基づいて、操作情報の生成を再開する。
操作情報生成保持手段は、指示体による操作が操作領域から始まり、操作領域をはみ出たとしても、画面端判定枠に達するまでは、操作情報を生成する。
操作情報生成保持手段は、第1領域における指示体による操作に基づいて、第1の操作のための操作情報を生成し、第2領域における指示体による操作に基づいて、第2の操作のための操作情報を生成する。
操作入力部への接触が行われていない状態において、操作手段は、更新した現在の操作情報に基づいて、操作対象機器を操作し、表示装置への接触が再度行われた場合に、接触位置が属する領域における操作情報として保持されている現在の操作情報に基づいて、操作対象機器の操作を再開する。
表示装置への接触が行われていない状態において、操作手段は、更新した現在の操作情報に基づいて、操作対象機器を操作する。
表示装置への接触が再度行われた場合に、操作手段は、接触位置が属する領域における操作情報として保持されている現在の操作情報に基づいて、操作対象機器の操作を再開する。
所定の上方向のフリックであると判断した場合に、操作情報生成保持手段は、現在の操作情報を一段上の強度の操作情報であるとして更新する。
操作入力部への接触が行われていない状態において、操作手段は、更新した現在の操作情報に基づいて、操作対象機器を操作する。
操作入力部への接触が再度行われた場合に、操作手段は、接触位置が属する領域における操作情報として保持されている現在の操作情報に基づいて、操作対象機器の操作を再開する。
タップ又は所定の下方向へのフリックであると判断した場合に、操作情報生成保持手段は、接触が離れた指示体に基づいて生成される現在の操作情報を一段下の強度の操作情報であるとして更新する。
操作入力部への接触が行われていない状態において、操作手段は、更新した現在の操作情報に基づいて、操作対象機器を操作する。
操作入力部への接触が再度行われた場合に、操作手段は、接触位置が属する領域における操作情報として保持されている現在の操作情報に基づいて、操作対象機器の操作を再開する。
ダブルタップであると判断した場合に、操作情報生成保持手段は、接触位置が属する領域における操作情報として保持されている情報を破棄する。
操作手段は、操作対象機器に対して、接触した領域に属する移動を停止させる操作を行う。
停止ボタンの押下であると判断した場合に、操作情報生成保持手段は、予め指定された領域で停止命令を実行し、それぞれの領域に属する保持されている情報を破棄する。
操作手段は、予め指定された領域に属する移動を停止させる操作を行う。予め指定された領域が全ての領域である場合は、操作対象機器を停止又はその場で待機させる操作を行う。
操作情報生成保持手段は、第1領域における指示体によるスワイプ操作に基づいて、第1領域における操作情報を生成し、第2領域における指示体によるスワイプ操作に基づいて、第2領域における操作情報を生成する。
これにより、ソフトウエアを用いた操作が可能となるので、専用の操作用のハードウエアが不要となるのであるから、汎用性に富んだ操作用のプログラムが提供されることとなる。
記憶部13は、制御部12が駆動部11を制御するために必要なプログラムやデータを記憶する。
通信部15は、通信機器1の通信部5と直接又はネットワークを介して通信することができる。
制御部12は、情報処理装置1からの操作情報に基づいて、複数のモータの回転速度を制御することで、操作対象機器10の上昇/下降(スロットル)、左右旋回(ラダー)、前進/後退(エレベーター)、及び左右平行移動(エルロン)を可能としている。
ドローンの操作では下記の成分が使用される。
1.上昇/下降(スロットル)
2.左右旋回(ラダー)
3.前進/後退(エレベーター)
4.左右平行移動(エルロン)
たとえば、表示画面に境界線を設けて、「境界線上部」と「境界線下部」とで、2つのコントローラに分けたとする。そのとき、「境界線上部」と「境界線下部」の2つのコントローラに、それぞれ上記1~4に対応する強度を、下記のように2次元ベクトルの情報として割り当てる。
X軸方向:左右平行移動(エルロン)の強度
Y軸方向:上昇/下降(スロットル)の強度
B.前後旋回移動(境界線下部のコントローラで操作)
X軸方向:左右旋回(ラダー)の強度
Y軸方向:前進/後退(エレベーター)の強度
なお、このとき、X軸方向の強度は、2次元ベクトルのx成分の大きさであり、Y軸方向の強度は、2次元ベクトルのy成分の大きさである。
このとき、X軸成分の強度に合わせて旋回する操作となり、X軸成分が正の場合は、右旋回であり、X軸成分が負の場合は、左旋回となる。
同時に、Y軸成分の強度に合わせて前進または後退する操作となり、Y軸成分が正の場合は、前進となり、Y軸成分が負の場合は、後退となる。
なお、画面の右がX軸の正、左がX軸の負、上がY軸の正、下がY軸の負としているが、限定されるものではなく、逆の関係でもよいし、画面の向きによって、適宜、変更されてもよい。
操作情報は、操作対象機器10に対して操作を指令するための情報である。操作情報には、コントローラ毎に、第1記憶枠に記憶されている情報と、第2記憶枠に記憶されている情報とがある。
「現在の操作情報」の「移動方向」は、スワイプしたときの2次元ベクトルの向きを表している。
「現在の操作情報」の「操作強度」は、スワイプしたときの2次元ベクトルの大きさを表している。なお、「操作強度」は、操作対象機器10での操作内容に適した形式で記憶されおり、2次元ベクトルの大きさのまま記憶されていてもよいし、X軸成分の大きさ及びY軸成分の大きさに分解されて表されていてもよく、その他の形式で記憶されていてもよい。
「現在の操作情報」の「操作強度段階」は、操作強度の段階を表している。
「現在の操作情報」の「基本操作強度」は、「操作強度段階」における基本の操作強度を表している。
第2記憶枠には、操作強度段階毎に、「基本操作強度」が記憶される。
最初に、図3を用いて、スワイプを例としたときの情報処理装置1及び操作対象機器10の主な処理の概要を説明する。
このようにして、スワイプが行われた場合、接触位置に応じたコントローラが利用されて、操作に応じた操作情報が操作対象機器10に送信されて、操作対象機器10の操作が行われる。
操作対象機器10は、切断指示を受信し(S126)、切断前処理(S128)の後、通信を切断する(S129)。また、操作対象機器10側で、通信切断要因が発生した場合(S127)にも、切断前処理(S128)の後、通信を切断する(S129)。
情報処理装置1と操作対象機器10とは、双方向に通信可能となるように、通信確立処理を実行する(S301)。
通信が確立された後は、情報処理装置1は、通信状態確認処理を、随時実行する(S302)。
操作対象機器10は、情報処理装置1からの操作情報を受信して、操作情報に応じた処理(行動処理)を実行する(S303)。
情報処理装置1は、各種情報の送受信処理を実行する(S304)。
情報処理装置1は、コントローラの操作処理を実行して、使用者の操作によって得られる操作情報を生成する(S305)。
情報処理装置1は、操作対象機器10に対して、通信接続を要請する(S401)。このときの通信方法は、使用している各通信規格に準拠するものとする(以下同様)。そして、情報処理装置1は、受信待機する(S402)。
情報処理装置1は、操作対象機器10との通信状態を確認する(S601)。確認が可能であった場合(S602のYes)、情報処理装置1は、接続状態と判定し(S603)、S601に戻る。確認が出来なかった場合(S602のNo)、情報処理装置1は、通信を切断して(S604)、通信確立処理(S301)に戻る。
このように、情報処理装置1は、操作対象機器10との間で、随時、通信状態が維持できているかを確認している。
操作対象機器10は、情報処理装置1から送信されてくる操作情報を受信し(S701)、受信に応答する(S702)。操作対象機器10は、受信した操作情報が適切か否かを判断する(S703)。適切でない場合、操作対象機器10は、処理をスキップして、S701に戻る(S704)。適切である場合、操作対象機器10は、操作情報に応じて、駆動装置11を制御するなどの処理を実行する(S705)。
まず、情報処理装置1は、コントローラの画像(仮想コントローラ画像)を、表示装置に表示させる(S800)。使用者は、コントローラを指などの指示体で操作する。その操作に応じて、後述の図9の処理に従って、操作情報が生成され、保持される。
情報処理装置1は、予め決めた範囲を画面端判定枠として、仮想コントローラ画像を生成する。
また、情報処理装置1は、操作対象機器10の位置が分かる画像を、表示装置4に表示させるとよい。
S203において、制御部2がスワイプであると判断した場合(S204)、制御部2は、スワイプの長さに応じて、「現在の操作情報」の「操作強度」を、アップさせて(S208)、スワイプの方向に応じて、「現在の操作情報」の「移動方向」を変更する(S209)。このとき、再接触された場合は、一旦、基本操作強度に戻って、スワイプによる強度のアップを再開してもよいし、保持されている現在の操作強度から、スワイプによる強度のアップを再開するようにしてもよい。すなわち、再接触された場合、情報処理装置1は、保持されている操作情報に基づいて、新たな操作情報を生成していけばよいのであり、どの強度から再開するかは、任意である。
<図11Aの例:境界線下部の領域に指が接触してスワイプが始まった場合>
最初に左下部のコントローラに接触した場合について説明する。境界線下部の領域に指を接触させたとする。そして、指が移動したとすると、仮想コントローラ画像は、指の移動方向を表現する画像となる。「操作強度」の数値は、指の移動距離に合わせて更新されていく。
スワイプの2次元ベクトルの向きに合わせて、操作対象機器10が前進及び右旋回するように、操作情報が情報処理装置1から操作対象機器10に対して送信される。上から見た図は、当該操作情報に応じて操作対象機器10の移動方向を表現した画像となる。
境界線下部の領域(第1領域)に指が接触し、スワイプ操作が境界線を越えてはみ出して、境界線上部(第2領域)のコントローラに達したとしても、境界線上部(第2領域)のコントローラは反応しないこととする。境界線下部(第1領域)から始まった操作は、境界線下部(第1領域)のコントローラを使った操作とする。指の移動距離に合わせて、操作強度が更新されていく。また、仮想コントローラ画像は、指の移動方向を表している。操作対象機器10は、指の移動距離に対応した強度のy成分の大きさに合わせて、前進すると共に、同x成分の大きさに合わせて、旋回する。
指が画面端判定枠からはみ出たとする。その場合、操作強度は保持され、操作強度段階が一つ加算され、基本操作強度が更新される。そして、操作対象機器10は、そのまま、維持されている現在の操作情報であるところの操作強度と移動方向に従って、移動を継続する。
その後、再度、指を境界線下部の任意の位置に再接触させたとする。操作強度、操作強度段階、及び基本操作強度が保持されて、再接触後の指の動きに合わせて、現在の操作情報が更新されていくこととなる。
境界線下部への再接触後、指の移動距離に合わせて、操作強度が更新されていく。操作強度は基本操作強度をベースとして加算される(継続加算という)。また、指の移動方向に合わせて、仮想コントローラ画像の矢印の向きが変わる。指を離したとしても、操作強度と回転角度(移動方向)は、そのまま維持されるため、操作対象機器10も、そのままの操作強度及び移動方向にしたがって、移動を継続する。
図11Dでは、画面端判定枠まで到達せずに、指が離れたとしている。その後、境界線下部で再接触させたとする。一度指を離して再接触させたとすると、操作強度は基本操作強度に戻る。
なお、ここでは、再接触された場合は、再接触されたら、一旦、基本操作強度に戻って、スワイプによる強度のアップを再開するとして図示しているが、再接触された場合、保持されている現在の操作強度から、スワイプによる強度のアップを再開してもよい。
そして、指の移動距離に合わせて、操作強度が加算され(継続加算)、指の移動方向に合わせて、仮想コントローラ画像の矢印の向きが変化する。
図11Eの後、指を離しても操作強度と回転角度(旋回方向)はそのまま維持されるため、操作対象機器10もそのまま移動する。境界線上部の任意の位置に、指が接触したとする。このとき、境界線上部を担当領域とする操作となるので、境界線下部の操作強度や回転角度(旋回方向)は、更新されない。境界線上部での操作は、ここでは、操作対象機器10の上昇、下降、左右移動であるとしている。図11Fの右側の下部の図に示すように横から見た図が表示されて、操作対象機器10の上下、左右移動が表現されるとよいが、限定されない。
指の移動距離に合わせて、操作強度が更新されていく。また、指の移動方向に合わせて、仮想コントローラ画像が回転する。境界線上部のスワイプの2次元ベクトルの方向及び大きさに合わせて、上昇/下降(スロットル)及び左右平行移動(エルロン)が行われる。横から見た図にあるように、当該2次元ベクトルのx成分の大きさが、左右平行移動(エルロン)の強度となり、y成分の大きさが上昇/下降(スロットル)の強度となる。境界線上部のコントローラの操作中、境界線下部のコントローラによる操作は解除されないので、左旋回、右旋回、前進、又は後進しながら、上昇、下降、右移動、又は左移動が可能となる。
図11Gの操作から、指が画面端判定枠からはみ出した場合、境界線上部のコントローラの操作強度は保持され、操作強度段階が加算され、基本操作強度が更新される。そして、指が離れた状態でも、境界線下部の操作情報に基づいて、前進及び旋回が継続され、境界線上部の操作情報に基づいて、上昇及び移動が継続される。
境界線上部への指接触から指を接触したまま操作する限り、境界線上部でのコントローラでの操作となる。境界線上部への指接触から接触したまま境界線下部へ指が移動しても、境界線下部のコントローラは反応しない。
指の移動距離に合わせて、境界線上部のコントローラの操作強度は更新していき、指の移動方向に合わせて、仮想コントローラ画像が回転する。横から見た図に示すように、スワイプの2次元ベクトルのy成分の大きさに応じた強度で、操作対象機器10が下降し、かつ、x成分の大きさに応じた強度で、操作対象機器10が左に移動する。
そして、指が画面端判定枠に到達したとする。
図11Iの右側の図の後、指が画面端判定枠からはみ出したとすると、操作強度は保持され、操作強度段階が加算され、基本操作強度が更新される。そして、操作対象機器10は、その現在の操作情報に基づいて移動を継続する。
S203での操作判定によって、制御部2が上フリックを認識したとする(S205:上フリック判断手段)。上フリックの場合、制御部2は、S216以降の処理に進む。すなわち、上フリックの場合には、スワイプの場合と異なり、スワイプの長さ及び方向に応じた「操作強度」のアップ及び「移動方向」の変更(S208,S209)は行われないが、「操作強度段階」が加算される処理が行われることとなる。
図14の左図に示すように、境界線下部において、上方向のフリック(上フリック)が行われたとする。このとき、図9に示すように、「操作強度」のアップ及び「移動方向」の変更(S208,S209)は行われないが、S216以降の動作に進むので、指が画面端判定枠からはみ出したときと同様の挙動が行われることとなる。すなわち、操作強度は維持され、操作強度段階が一つ加算され、基本操作強度が更新される。そして、操作対象機器10は、そのまま、維持されている現在の操作情報であるところの操作強度と移動方向に従って、移動を継続する。
S203での操作判定によって、制御部2がタップ又は下フリックを認識したとする(S206:タップ・下フリック判断手段)。制御部2は、記憶されている現在の操作強度段階の情報を破棄する(S221)。次に、制御部2は、「現在の操作情報」の「操作強度段階」が一段下になるように減算し(S222)、減算後の「操作強度段階」に対応した第2記憶枠に記憶されている「基本操作強度」を、「現在の操作情報」の「基本操作強度」とするように、「現在の操作情報」を更新する(S223)。そして、制御部2は、「現在の操作情報」の「操作強度」が「基本操作強度」となるように、「現在の操作情報」を更新する(S224)。制御部2は、「現在の操作情報」の「移動方向」は、保持したままとし(S225)、担当領域内の任意の位置に指が接触するまで待機する。
<タップ又は下フリックの場合の画面例>
図12の左側の図に示すように、境界線下部の任意の位置をタップしたとする。操作強度が1段階前の基本操作強度に更新されて、操作強度段階が減算され、基本操作強度が1段階前の基本操作強度に更新される。移動方向は保持される。このようにして、操作強度が基本操作強度にリセットされる。境界線上部のコントローラの各種情報及び方向は保持される。
基本的には「下フリック」と「タップ」が同じ挙動となる。ただし、図15のような上昇、下降のスロットル操作においては下方向へのスワイプが「下方向への移動」となることから、操作者の感覚において「下フリック」に強度加算の概念が発生し、基本的な挙動と矛盾してしまうケースがある。
そこで、エレベーター操作時は「下フリック」と「タップ」が同じ挙動、スロットル操作時は「下フリック」と「下方向スワイプで画面判定枠外へ指が出た場合」が同じ挙動になるとした方が、操作者の感覚に合うため、図15は、そういったケースの一例として示している。
S203での操作判定によって、制御部2がダブルタップを認識した(S207:ダブルタップ判断手段)、又は、停止ボタンが押下された(S240:停止ボタン判断手段)とする。制御部2は、仮想コントローラ画像に表示されている「操作強度段階」の表示をリセットし(S226)、「操作強度段階」の表示をリセットし(S227)、「操作強度」の表示をリセットし(S228)、「移動方向」の表示をリセットする(S229)。
ダブルタップされた領域のコントローラに対応する操作情報のみがリセットされて、他の領域のコントローラに対応する操作情報は、リセットされない。
図13Aの左側の図にあるように、境界線下部の任意の位置でダブルタップされた場合、下部コントローラの操作情報はリセットされるが、上部コントローラの操作情報は保持されたままとなる。
図13Aの右側の図にあるように、境界線上部の任意の位置でダブルタップされた場合、上部コントローラの操作情報はリセットされるが、下部コントローラの操作情報は保持されたままとなる。
図13Bに示されているように、たとえば、境界線上に、停止ボタンが配置されているとする。なお、停止ボタンの位置は、任意の位置でよい。
停止ボタンがタップされると、全てのコントローラの操作情報がリセットされる。
なお、停止ボタンによってリセットされるコントローラについては、任意にプリセット可能である。
図13Bに示す例では、境界線の上下のコントローラに対応する操作情報が同時にリセットされている。
上記においても、操作のための領域及び画面端判定枠について、説明したが、ここで、操作領域及び画面端判定枠について小括する。
情報処理装置1は、表示装置4の表示画面において、操作対象機器10に対する操作を行うための領域を操作領域としている。そして、操作領域と同一か又は操作領域よりも大きい範囲について、予め決められた範囲を画面端判定枠とする。そして、情報処理装置1は、操作領域に、仮想コントローラ画像を表示させる。このように、情報処理装置1は、表示装置4の表示画面において、操作対象機器10に対する操作を行うための領域を操作領域とし、かつ、表示装置4上の予め決められた範囲を画面端判定枠として、仮想コントローラ画像を表示装置4に表示させる仮想コントローラ画像表示手段として機能している。
図17A~図17Eに応用例を示す。
図17Aに示すように、広い画面にそれぞれ「操作特性」が異なるコントローラを配置することができる。たとえば、超微細操作から超高速操作まで多彩な操作を端末1つで実現できる。たとえば、図17Aのコントローラであれば、操作対象を目的地に急接近させた後、高精度の位置調整が可能である。
図18に示すように、使用する端末としては、スマートフォン、スマートウォッチ、タブレット、タッチスクリーン、立体映像など、種々のものが考えられる。いくつもの端末を使用しているかのような操作を多様な端末1つで実現可能である。プログラムで表示されたコントローラに触れて操作可能な機器であれば、端末の様式は問わない。
上記実施形態では、操作対象機器10は、一つであるとしたが、操作対象機器10を複数として、複数のコントローラを用いて、複数の操作対象機器10を制御するようにしてもよい。その場合、情報処理装置1は、操作対象となる機器に対して、コントローラによって得られた操作情報を送信するようにすればよく、他の動作については、上記した実施形態の技術を用いればよい。
上記実施形態では、主に、操作対象機器10は、ドローンであるとして、説明を行ったが、操作対象機器10は、ドローンに限られない。操作対象となる機器に合せて、コントローラに入力された操作情報を操作対象機器に送信するようにすれば、操作対象機器は、本発明においては限定されない。
上記図9に示す実施形態では、画面端判定枠から指が離れるか否かを判断するに際しては、上方向であるか下方向であるか、又は、それ以外の方向であるかについては判断していなかった。しかし、操作対象機器10によっては、下方向にスワイプして画面判定枠の外から指が離れた場合には、減速するとした方が、感覚的に適している場合がある。
を下げたい場合には、タップ又は下フリックを行うことになる。
ここで、所定の下方向とは、画面の側面に対して、完全に平行な下方向である必要はなく、所定の決められた角度の範囲内の下方向をいう。
2 制御部
3 記憶部
4 表示装置
4a 表示部
4b 操作入力部
5 通信部
6 入力部
10 操作対象機器
11 駆動部
12 制御部
13 記憶部
15 通信部
操作手段は、表示装置への接触が行われていない状態においても、保持されている現在の操作情報を操作対象機器に送信して、操作対象機器を操作する。
接触操作を受け付けるための操作入力部への接触が行われていない状態において、操作手段は、更新した現在の操作情報に基づいて、操作対象機器を操作し、表示装置への接触が再度行われた場合に、接触位置が属する領域における操作情報として保持されている現在の操作情報に基づいて、操作対象機器の操作を再開する。
所定の上方向のフリックであると判断した場合に、操作情報生成保持手段は、現在の操作情報を一段上の強度の操作情報であるとして更新する。
接触操作を受け付けるための操作入力部への接触が行われていない状態において、操作手段は、更新した現在の操作情報に基づいて、操作対象機器を操作する。
操作入力部への接触が再度行われた場合に、操作手段は、接触位置が属する領域における操作情報として保持されている現在の操作情報に基づいて、操作対象機器の操作を再開する。
タップ又は所定の下方向へのフリックであると判断した場合に、操作情報生成保持手段は、接触が離れた指示体に基づいて生成される現在の操作情報を一段下の強度の操作情報であるとして更新する。
接触操作を受け付けるための操作入力部への接触が行われていない状態において、操作手段は、更新した現在の操作情報に基づいて、操作対象機器を操作する。
操作入力部への接触が再度行われた場合に、操作手段は、接触位置が属する領域における操作情報として保持されている現在の操作情報に基づいて、操作対象機器の操作を再開する。
Claims (16)
- 駆動装置を有する操作対象機器を操作するためのプログラムであって、指示体による接触操作を受け付ける表示装置に接続される或いは当該表示装置を備えるコンピュータを、
前記表示装置に対する前記指示体による接触操作に基づいて、前記操作対象機器を操作するための操作情報を生成し、前記指示体が前記表示装置に接触していない場合でも、前記操作情報を保持する操作情報生成保持手段、及び、
保持されている前記操作情報を前記操作対象機器に送信することで、前記操作対象機器を操作する操作手段として機能させるためのプログラム。 - 前記操作情報生成保持手段は、
スワイプ中に前記表示装置への接触が離れたか否かを判断し、
スワイプ中に前記表示装置への接触が離れたと判断した場合に、前記操作対象機器に対する現在の操作情報を保持し、
前記操作手段は、
前記表示装置への接触が行われていない状態においても、保持されている前記現在の操作情報を前記操作対象機器に送信して、前記操作対象機器を操作し、
前記操作情報生成保持手段は、
前記表示装置への接触が再度行われた場合に、保持されている前記現在の操作情報に基づいて、前記操作情報の生成を再開することを特徴とする、請求項1に記載のプログラム。 - さらに、前記コンピュータを、
前記表示装置の表示画面において、前記操作対象機器に対する操作を行うための領域を操作領域とし、かつ、前記表示装置上の予め決められた範囲を画面端判定枠として、仮想コントローラ画像を前記表示装置に表示させる仮想コントローラ画像表示手段として機能させ、
前記操作情報生成保持手段は、前記指示体による操作が前記操作領域から始まり、前記操作領域をはみ出たとしても、前記画面端判定枠に達するまでは、前記操作情報を生成することを特徴とする、請求項2に記載のプログラム。 - さらに、前記コンピュータを、
少なくとも、前記操作対象機器に対する第1の操作を行うための第1領域と、前記操作対象機器に対する第2の操作を行うための第2領域とに分けて、仮想コントローラ画像を前記表示装置に表示させる仮想コントローラ画像表示手段として機能させ、
前記操作情報生成保持手段は、前記第1領域における前記指示体による操作に基づいて、前記第1の操作のための操作情報を生成し、前記第2領域における前記指示体による操作に基づいて、前記第2の操作のための操作情報を生成することを特徴とする、請求項2に記載のプログラム。 - 前記操作情報生成保持手段は、前記指示体による操作が前記第1領域から始まり、前記第1領域をはみ出て、前記第2領域に前記指示体の操作が達したとしても、前記第1領域での操作として、前記操作情報を生成することを特徴とする、請求項4に記載のプログラム。
- 予め決められた画面端判定枠の外で前記指示体の接触が離れたと判断した場合、前記操作情報生成保持手段は、前記現在の操作情報を一段上の強度の操作情報であるとして更新し、
前記操作入力部への接触が行われていない状態において、前記操作手段は、更新した前記現在の操作情報に基づいて、前記操作対象機器を操作し、
前記表示装置への接触が再度行われた場合に、接触位置が属する領域における操作情報として保持されている前記現在の操作情報に基づいて、前記操作対象機器の操作を再開することを特徴とする、請求項2に記載のプログラム。 - 予め決められた画面端判定枠の外で接触が離れたと判断した場合であり、かつ、接触が離れた際の移動方向が所定の下方向であった場合に、前記操作情報生成保持手段は、接触が離れた指示体に基づいて生成される前記現在の操作情報を一段下の強度の操作情報であるとして更新することもでき、
前記表示装置への接触が行われていない状態において、前記操作手段は、更新した前記現在の操作情報に基づいて、前記操作対象機器を操作し、
前記表示装置への接触が再度行われた場合に、前記操作手段は、接触位置が属する領域における操作情報として保持されている前記現在の操作情報に基づいて、前記操作対象機器の操作を再開することを特徴とする、請求項2に記載のプログラム。 - 前記コンピュータを、
前記表示装置での操作が所定の上方向のフリックであるか否かを判断する上フリック判断手段として機能させ、
前記所定の上方向のフリックであると判断した場合に、前記操作情報生成保持手段は、前記現在の操作情報を一段上の強度の操作情報であるとして更新し、
前記操作入力部への接触が行われていない状態において、前記操作手段は、更新した前記現在の操作情報に基づいて、前記操作対象機器を操作し、
前記操作入力部への接触が再度行われた場合に、前記操作手段は、接触位置が属する領域における操作情報として保持されている前記現在の操作情報に基づいて、前記操作対象機器の操作を再開することを特徴とする、請求項2に記載のプログラム。 - 前記コンピュータを、
前記表示装置での操作がタップ又は所定の下方向へのフリックであるか否かを判断するタップ・下フリック判断手段として機能させ、
タップ又は前記所定の下方向へのフリックであると判断した場合に、前記操作情報生成保持手段は、接触が離れた指示体に基づいて生成される前記現在の操作情報を一段下の強度の操作情報であるとして更新し、
前記操作入力部への接触が行われていない状態において、前記操作手段は、更新した前記現在の操作情報に基づいて、前記操作対象機器を操作し、
前記操作入力部への接触が再度行われた場合に、前記操作手段は、接触位置が属する領域における操作情報として保持されている前記現在の操作情報に基づいて、前記操作対象機器の操作を再開することを特徴とする、請求項2に記載のプログラム。 - 前記コンピュータを、
前記表示装置での操作がダブルタップであるかを判断するダブルタップ判断手段として機能させ、
ダブルタップであると判断した場合に、前記操作情報生成保持手段は、接触位置が属する領域における操作情報として保持されている情報を破棄して、
前記操作手段は、前記操作対象機器に対して、接触した領域に属する移動を停止させる操作を行う、
ことを特徴とする、請求項2に記載のプログラム。 - 前記コンピュータを、
前記表示装置での操作が停止ボタンの押下であるかを判断する停止ボタン判断手段として機能させ、
停止ボタンの押下であると判断した場合に、前記操作情報生成保持手段は、予め指定された領域で停止命令を実行し、それぞれの領域に属する保持されている情報を破棄して、
前記操作手段は、予め指定された領域に属する移動を停止させる操作を行うか、若しくは、予め指定された領域が全ての領域である場合は、操作対象機器を停止又はその場で待機させる操作を行う、
ことを特徴とする、請求項2に記載のプログラム。 - 前記操作情報生成保持手段は、前記指示体による前記表示装置上でのスワイプの2次元ベクトルに基づいて、前記操作情報を生成することを特徴とする、請求項2に記載のプログラム。
- 前記操作情報生成保持手段は、前記2次元ベクトルのx成分及びy成分に基づいて、前記操作情報を生成することを特徴とする、請求項12に記載のプログラム。
- 前記操作対象機器がドローンである場合、前記操作情報生成保持手段は、前記x成分及び前記y成分によって、ラダー、エレベーター、エルロン及びスロットルの内2つの方向及び強度を示すように、前記操作情報を生成することを特徴とする、請求項13に記載のプログラム。
- 前記操作対象機器がドローンである場合、前記操作情報生成保持手段は、前記x成分及びy成分によって、ラダー、エレベーター、エルロン及びスロットルの内、前記2つの方向及び強度以外の方向及び強度を示すように、前記操作情報を生成することを特徴とする、請求項14に記載のプログラム。
- さらに、前記コンピュータを、
前記操作対象機器がドローンである場合、ラダー、エレベーター、エルロン及びスロットルの内2つの操作を行うための第1領域と、前記第1領域の操作以外の2つの操作を行うための第2領域とに分けて、仮想コントローラ画像を前記表示装置に表示させる仮想コントローラ画像表示手段として機能させ、
前記操作情報生成保持手段は、前記第1領域における前記指示体によるスワイプ操作に基づいて、前記第1領域における操作情報を生成し、前記第2領域における前記指示体によるスワイプ操作に基づいて、前記第2領域における操作情報を生成することを特徴とする、請求項2に記載のプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022122408A JP7274157B1 (ja) | 2022-08-01 | 2022-08-01 | 操作対象機器の操作用のプログラム |
JP2023069066A JP2024020127A (ja) | 2022-08-01 | 2023-04-20 | 操作対象機器の操作用のプログラム |
EP23189001.3A EP4318202A1 (en) | 2022-08-01 | 2023-08-01 | Program for manipulating manipulation target device |
US18/229,118 US20240036568A1 (en) | 2022-08-01 | 2023-08-01 | Program for manipulating manipulation target device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022122408A JP7274157B1 (ja) | 2022-08-01 | 2022-08-01 | 操作対象機器の操作用のプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023069066A Division JP2024020127A (ja) | 2022-08-01 | 2023-04-20 | 操作対象機器の操作用のプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7274157B1 JP7274157B1 (ja) | 2023-05-16 |
JP2024019758A true JP2024019758A (ja) | 2024-02-14 |
Family
ID=86327304
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022122408A Active JP7274157B1 (ja) | 2022-08-01 | 2022-08-01 | 操作対象機器の操作用のプログラム |
JP2023069066A Pending JP2024020127A (ja) | 2022-08-01 | 2023-04-20 | 操作対象機器の操作用のプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023069066A Pending JP2024020127A (ja) | 2022-08-01 | 2023-04-20 | 操作対象機器の操作用のプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240036568A1 (ja) |
EP (1) | EP4318202A1 (ja) |
JP (2) | JP7274157B1 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014155129A (ja) * | 2013-02-12 | 2014-08-25 | Tsubakimoto Chain Co | 指示装置、コンピュータプログラム、移動体システム及び指示方法 |
JP2017119508A (ja) * | 2017-01-30 | 2017-07-06 | パナソニックIpマネジメント株式会社 | 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両 |
JP2017123148A (ja) * | 2015-10-19 | 2017-07-13 | パロット ドローンズ | 操縦コマンドを保持するようになっているドローン操縦装置及び関連する制御方法 |
JP6470112B2 (ja) * | 2015-06-01 | 2019-02-13 | 日本電信電話株式会社 | 移動装置操作端末、移動装置操作方法及び移動装置操作プログラム |
JP6685742B2 (ja) * | 2016-02-02 | 2020-04-22 | キヤノン株式会社 | 操作装置、移動装置、およびその制御システム |
JP2021012612A (ja) * | 2019-07-09 | 2021-02-04 | キヤノンマーケティングジャパン株式会社 | 情報処理装置、情報処理のシステム、およびそれらの制御方法、プログラム |
JP6855616B2 (ja) * | 2020-04-01 | 2021-04-07 | キヤノン株式会社 | 操作装置、移動装置、およびその制御システム |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01298243A (ja) | 1988-05-27 | 1989-12-01 | Mitsuhiko Yoshida | 絣糸調整機 |
KR101755051B1 (ko) * | 2009-07-22 | 2017-07-06 | 임머숀 코퍼레이션 | 플랫폼에 걸쳐 햅틱 피드백을 갖는 상호작용 터치 스크린 게임 메타포 |
JP5790203B2 (ja) * | 2011-06-29 | 2015-10-07 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム、および遠隔操作システム |
US20160070527A1 (en) * | 2012-03-14 | 2016-03-10 | Autoconnect Holdings Llc | Network connected vehicle and associated controls |
JP6479418B2 (ja) * | 2014-10-31 | 2019-03-06 | 古野電気株式会社 | 遠隔操舵システム、遠隔操作装置、及び遠隔操舵方法 |
US20170102699A1 (en) * | 2014-12-22 | 2017-04-13 | Intel Corporation | Drone control through imagery |
EP3101889A3 (en) * | 2015-06-02 | 2017-03-08 | LG Electronics Inc. | Mobile terminal and controlling method thereof |
US9361011B1 (en) * | 2015-06-14 | 2016-06-07 | Google Inc. | Methods and systems for presenting multiple live video feeds in a user interface |
US20190250601A1 (en) * | 2018-02-13 | 2019-08-15 | Skydio, Inc. | Aircraft flight user interface |
EP3881155A4 (en) * | 2018-12-31 | 2023-01-18 | Tomahawk Robotics | SPATIAL CONTROL INTENT RECOGNITION SYSTEMS AND METHODS |
WO2020220154A1 (zh) * | 2019-04-28 | 2020-11-05 | 深圳市大疆创新科技有限公司 | 屏幕显示切换方法、显示设备、可移动平台 |
US20240199224A1 (en) * | 2022-12-16 | 2024-06-20 | SkyRyse, Inc. | Movable vehicle control interface |
-
2022
- 2022-08-01 JP JP2022122408A patent/JP7274157B1/ja active Active
-
2023
- 2023-04-20 JP JP2023069066A patent/JP2024020127A/ja active Pending
- 2023-08-01 EP EP23189001.3A patent/EP4318202A1/en active Pending
- 2023-08-01 US US18/229,118 patent/US20240036568A1/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014155129A (ja) * | 2013-02-12 | 2014-08-25 | Tsubakimoto Chain Co | 指示装置、コンピュータプログラム、移動体システム及び指示方法 |
JP6470112B2 (ja) * | 2015-06-01 | 2019-02-13 | 日本電信電話株式会社 | 移動装置操作端末、移動装置操作方法及び移動装置操作プログラム |
JP2017123148A (ja) * | 2015-10-19 | 2017-07-13 | パロット ドローンズ | 操縦コマンドを保持するようになっているドローン操縦装置及び関連する制御方法 |
JP6685742B2 (ja) * | 2016-02-02 | 2020-04-22 | キヤノン株式会社 | 操作装置、移動装置、およびその制御システム |
JP2017119508A (ja) * | 2017-01-30 | 2017-07-06 | パナソニックIpマネジメント株式会社 | 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両 |
JP2021012612A (ja) * | 2019-07-09 | 2021-02-04 | キヤノンマーケティングジャパン株式会社 | 情報処理装置、情報処理のシステム、およびそれらの制御方法、プログラム |
JP6855616B2 (ja) * | 2020-04-01 | 2021-04-07 | キヤノン株式会社 | 操作装置、移動装置、およびその制御システム |
Also Published As
Publication number | Publication date |
---|---|
JP2024020127A (ja) | 2024-02-14 |
US20240036568A1 (en) | 2024-02-01 |
JP7274157B1 (ja) | 2023-05-16 |
EP4318202A1 (en) | 2024-02-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2631767B1 (en) | Method, computer readable medium and portable apparatus for scrolling a screen in a touch screen display apparatus | |
US10936011B2 (en) | Information processing apparatus, information processing method, and program | |
KR102188097B1 (ko) | 페이지 운용 방법 및 그 전자 장치 | |
US8482527B1 (en) | Apparatus and method of providing user interface on head mounted display and head mounted display thereof | |
US9218027B2 (en) | Information processing apparatus, information processing method and program | |
EP3998762A1 (en) | Device, method, and graphical user interface for establishing a relationship and connection between two devices | |
EP2541385A2 (en) | Information processing apparatus, information processing method, program and remote control system | |
US9201515B2 (en) | Device and system and method for interacting with target in operation area | |
EP2597555A1 (en) | Information processing terminal and control method therefor | |
US10362258B2 (en) | Information processing to control a movement of a focus displayed on a display screen | |
KR20120023867A (ko) | 터치 스크린을 구비한 휴대 단말기 및 그 휴대 단말기에서 컨텐츠 표시 방법 | |
JP2016225872A (ja) | 移動装置操作端末、移動装置操作方法及び移動装置操作プログラム | |
US9996242B2 (en) | Composite gesture for switching active regions | |
CN104020939A (zh) | 一种控制方法和电子设备 | |
JP7274157B1 (ja) | 操作対象機器の操作用のプログラム | |
KR20210018406A (ko) | 페이지 운용 방법 및 그 전자 장치 | |
JP6153487B2 (ja) | 端末及び制御方法 | |
EP3340047A1 (en) | Display and method in an electric device | |
JP5756682B2 (ja) | 情報処理装置 | |
CN110955340B (zh) | 游标控制系统以及游标控制方法 | |
WO2014162698A1 (ja) | 入力装置 | |
US20160196022A1 (en) | Information processing apparatus, control method, and storage medium | |
CN103513881A (zh) | 电子设备及电子设备中控制显示界面的方法及装置 | |
WO2013080430A1 (en) | Information processing device, information processing method, and program | |
JP2018124811A (ja) | 操作装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220816 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220816 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230322 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230420 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7274157 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |