JP2021103862A - Mouse operation device and remote monitoring system - Google Patents

Mouse operation device and remote monitoring system Download PDF

Info

Publication number
JP2021103862A
JP2021103862A JP2019234939A JP2019234939A JP2021103862A JP 2021103862 A JP2021103862 A JP 2021103862A JP 2019234939 A JP2019234939 A JP 2019234939A JP 2019234939 A JP2019234939 A JP 2019234939A JP 2021103862 A JP2021103862 A JP 2021103862A
Authority
JP
Japan
Prior art keywords
mouse
remote monitoring
remote
monitoring server
computer system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019234939A
Other languages
Japanese (ja)
Other versions
JP7266518B2 (en
Inventor
幸治 宮川
Koji Miyagawa
幸治 宮川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kubota Corp
Original Assignee
Kubota Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kubota Corp filed Critical Kubota Corp
Priority to JP2019234939A priority Critical patent/JP7266518B2/en
Publication of JP2021103862A publication Critical patent/JP2021103862A/en
Application granted granted Critical
Publication of JP7266518B2 publication Critical patent/JP7266518B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To provide a mouse operation device having a simple configuration and a high degree of freedom, and a remote monitoring system.SOLUTION: A mouse operation device for remotely operating a mouse M, which is a pointing device, includes: a fixing mechanism 22 that positions and fixes the mouse M; a pseudo movement mechanism (actuator 3a) that actuates a movement detection mechanism (trackball M1) incorporated in the mouse M in a state of being positioned and fixed by the fixing mechanism 22; a switch actuation mechanism (actuators 3c and 3d) that actuates a switch incorporated in the mouse M in the state of being positioned and fixed by the fixing mechanism 22; an operation control unit 35 that performs drive control on the pseudo movement mechanism and the switch actuation mechanism; and a communication interface 36 that inputs a control command to the operation control unit 35 from an external device.SELECTED DRAWING: Figure 2

Description

本発明は、マウス操作装置及び遠隔監視システムに関する。 The present invention relates to a mouse operating device and a remote monitoring system.

各種プラントや処理施設ではコンピュータシステムを活用した維持管理が広く行なわれている。例えば、浄水場に備えたコンピュータシステムは、沈砂池からの取水、凝集剤注入、フロック形成、沈殿ろ過、消毒、配水などの一連の工程を実行するためのポンプや各種のアクチュエータといった所定の機器を制御するとともに、水質や水量などをモニタする各種のセンサを介してその状態を監視するため、各種の演算処理を実行する演算部と、その結果を表示する液晶表示素子などで構成される表示装置と、表示装置に表示された情報に基づいて各種の機器を制御する入力装置などを備えている。 Maintenance management using computer systems is widely performed in various plants and processing facilities. For example, a computer system installed in a water purification plant may be equipped with predetermined equipment such as pumps and various actuators for performing a series of processes such as water intake from a sand pond, coagulant injection, floc formation, sedimentation filtration, disinfection, and water distribution. A display device consisting of an arithmetic unit that executes various arithmetic processes and a liquid crystal display element that displays the results in order to control and monitor the status via various sensors that monitor water quality and quantity. It is equipped with an input device that controls various devices based on the information displayed on the display device.

入力装置としてポインティングデバイスであるマウスの他にキーボードなどを備え、表示装置には浄水場の状態を表示する状態表示画像の他に、各種の機器を制御するためのアイコンなどの特定の機能を実行させる操作スイッチを表す画像が表示される。操作者は、表示装置に表示された画面を目視して施設の状態を把握し、必要に応じてマウスを介して各種のアイコンを選択操作するように構成されている。 In addition to the mouse, which is a pointing device, as an input device, it is equipped with a keyboard, etc., and the display device executes specific functions such as icons for controlling various devices in addition to the status display image that displays the status of the water purification plant. An image showing the operation switch to be operated is displayed. The operator visually observes the screen displayed on the display device to grasp the state of the facility, and is configured to select and operate various icons via the mouse as needed.

しかし、近年の人口減少の影響で、施設を維持管理する熟練作業者の高齢化に伴って新たな人員を補充することが困難な状況にある。また、新たな人員を確保しても施設を維持管理するための教育を個々に施すのは非常に困難な状況でもある。そのため、未熟な作業者が担当している施設で発生する様々な事象に電話等による指示に基づいて適切に対応するのは非常に困難な状況であった。 However, due to the recent population decline, it is difficult to replenish new personnel due to the aging of skilled workers who maintain and manage the facilities. In addition, even if new personnel are secured, it is extremely difficult to provide individual education for maintaining and managing the facility. Therefore, it has been extremely difficult to appropriately respond to various events that occur in the facility that an inexperienced worker is in charge of based on instructions by telephone or the like.

一方、施設に設置されたコンピュータシステムは施設の管理に特化したシステムであるため、ウィンドウズのような汎用のOSに備えているようなリモートアクセス機能を実現することが困難な場合も多く、また現状はリモートアクセスが可能な新たなコンピュータシステムを開発するために多大なコストをかけることができる状況でもない(ウィンドウズは登録商標)。 On the other hand, since the computer system installed in the facility is a system specialized for facility management, it is often difficult to realize the remote access function provided in a general-purpose OS such as Windows. Currently, it is not possible to spend a lot of money to develop a new computer system with remote access (Windows is a registered trademark).

特許文献1には、システムを大幅に改変することなく、制御所の無人化を容易に実現可能とする遠隔操作システムが提案されている。当該遠隔操作システムは、遠隔の制御所内に配置される計算機のインタフェースとしての第1ディスプレイ装置とその画面を撮影可能な撮像手段と、この撮像手段の画像を表示する監視用の第2ディスプレイと、第2ディスプレイ上に映し出される第1ディスプレイの映像を見ながら、第1ディスプレイのカーソルの遠隔操作を行なうカーソル操作手段とを設けたことを特徴とする。 Patent Document 1 proposes a remote control system that makes it possible to easily realize unmanned control stations without significantly modifying the system. The remote control system includes a first display device as an interface of a computer arranged in a remote control center, an imaging means capable of photographing the screen thereof, a second display for monitoring for displaying an image of the imaging means, and the like. It is characterized by providing a cursor operating means for remotely operating the cursor of the first display while observing the image of the first display displayed on the second display.

特開平09−107590号公報Japanese Unexamined Patent Publication No. 09-107590

しかし、上述した遠隔操作システムでは、第2ディスプレイ上に映し出される第1ディスプレイの映像の座標と、実際の第1ディスプレイに表示される映像の座標との相対関係を把握したうえで、遠隔の制御所内に配置される計算機を操作するマウスに代えて変換器を用いて画面の選択操作などを行なっているため、撮像手段のパン角度やチルト角度、さらにはズーム倍率に応じてその都度相対関係を求めることが必要となる。そのために第1ディスプレイに対する撮像手段の相対的な位置関係を把握する必要があり、撮像手段のパン角度やチルト角度、さらにはズーム倍率の変化に対応するのは、非常に煩雑でコストが嵩むという問題があった。また、遠隔の制御所の其々に個別に監視用の第2ディスプレイを備えた計算機システムを構築する必要があり、任意の地から遠隔制御できるような自由度のある汎用システムでもなかった。 However, in the above-mentioned remote control system, remote control is performed after grasping the relative relationship between the coordinates of the image of the first display displayed on the second display and the coordinates of the image displayed on the actual first display. Since the screen is selected using a converter instead of the mouse that operates the computer located in the facility, the relative relationship is determined each time according to the pan angle and tilt angle of the imaging means, and the zoom magnification. It is necessary to ask. Therefore, it is necessary to grasp the relative positional relationship of the imaging means with respect to the first display, and it is very complicated and costly to deal with changes in the pan angle, tilt angle, and zoom magnification of the imaging means. There was a problem. In addition, it was necessary to construct a computer system equipped with a second display for monitoring individually at each remote control station, and it was not a general-purpose system with a degree of freedom that could be remotely controlled from any location.

本発明の目的は、上述した従来技術に鑑み、簡単な構成で自由度の高いマウス操作装置及び遠隔監視システムを提供する点にある。 An object of the present invention is to provide a mouse operation device and a remote monitoring system having a simple configuration and a high degree of freedom in view of the above-mentioned prior art.

上述の目的を達成するため、本発明によるマウス操作装置の第一の特徴構成は、ポインティングデバイスであるマウスを遠隔操作するためのマウス操作装置であって、前記マウスを位置決めして固定する固定機構と、前記固定機構により位置決め固定された状態で、前記マウスに組み込まれた移動検知機構を作動させる疑似移動機構と、前記固定機構により位置決め固定された状態で、前記マウスに組み込まれたスイッチを作動させるスイッチ作動機構と、前記疑似移動機構と前記スイッチ作動機構を駆動制御する操作制御部と、外部装置から前記操作制御部に制御指令を入力する通信インタフェースと、を備えている点にある。 In order to achieve the above object, the first characteristic configuration of the mouse operating device according to the present invention is a mouse operating device for remotely operating a mouse, which is a pointing device, and a fixing mechanism for positioning and fixing the mouse. And, the pseudo-movement mechanism that operates the movement detection mechanism incorporated in the mouse in the state of being positioned and fixed by the fixing mechanism, and the switch incorporated in the mouse are operated in the state of being positioned and fixed by the fixing mechanism. It is provided with a switch operating mechanism for causing the mouse to operate, an operation control unit for driving and controlling the pseudo-moving mechanism and the switch operating mechanism, and a communication interface for inputting a control command from an external device to the operation control unit.

固定機構により位置決め固定されたマウスに対して、疑似移動機構を動作させることによりマウスの移動検知機構が作動して、表示画面に表示されるカーソルが移動し、スイッチ作動機構を動作させることによりマウスの左右のクリック用のスイッチが作動する。そのような疑似移動機構及びスイッチ作動機構は、通信インタフェースを介して外部装置から入力される制御指令に基づいて動作する操作制御部によって制御される。実際のマウスが制御されるため、正確に所望の操作が実現できる。 By operating the pseudo-movement mechanism for the mouse positioned and fixed by the fixing mechanism, the movement detection mechanism of the mouse is activated, the cursor displayed on the display screen is moved, and the switch operation mechanism is operated to operate the mouse. The left and right click switches are activated. Such a pseudo-moving mechanism and a switch operating mechanism are controlled by an operation control unit that operates based on a control command input from an external device via a communication interface. Since the actual mouse is controlled, the desired operation can be realized accurately.

同第二の特徴構成は、上述の第一の特徴構成に加えて、前記固定機構により位置決め固定された状態で、前記マウスに組み込まれたホイールを回転作動させる回転作動機構を備え、前記操作制御部は前記通信インタフェースを介して前記外部装置から入力された制御指令に基づいて前記回転作動機構を制御する点にある。 In addition to the above-mentioned first feature configuration, the second feature configuration includes a rotation operation mechanism for rotating a wheel incorporated in the mouse in a state of being positioned and fixed by the fixing mechanism, and the operation control is provided. The unit is to control the rotation operating mechanism based on a control command input from the external device via the communication interface.

固定機構により位置決め固定されたマウスに対して、回転作動機構を動作させることによりマウスのホイールが回転し、表示画面をスクロールさせることができる。 By operating the rotation actuating mechanism with respect to the mouse positioned and fixed by the fixing mechanism, the wheel of the mouse can be rotated and the display screen can be scrolled.

同第三の特徴構成は、上述の第一または第二の特徴構成に加えて、前記疑似移動機構がボールを回転作動させることで前記移動検知機構を作動させる点にある。 The third feature configuration is that, in addition to the first or second feature configuration described above, the pseudo-movement mechanism operates the movement detection mechanism by rotating the ball.

固定機構により位置決め固定されたマウスに対して、疑似移動機構によりボールが回転作動されると、それに伴ってマウスの移動検知機構が作動する。 When the ball is rotationally operated by the pseudo-movement mechanism with respect to the mouse positioned and fixed by the fixing mechanism, the movement detection mechanism of the mouse is operated accordingly.

本発明による遠隔監視システムの第一の特徴構成は、演算部と入力装置と表示装置とを備え所定の機器を制御するローカルコンピュータシステムを遠隔で監視して操作する遠隔監視システムであって、前記ローカルコンピュータシステムを遠隔監視する遠隔監視サーバと、前記ローカルコンピュータシステムの表示装置に表示されたモニタ画像を前記遠隔監視サーバにアップロードするカメラ装置と、前記遠隔監視サーバからの制御指令に基づいて作動する上述した第一または第二の特徴構成を備えたマウス操作装置と、演算部と入力装置と表示装置とを備えるとともに前記遠隔監視サーバと通信可能に接続され、前記ローカルコンピュータシステムを遠隔で操作する遠隔操作用コンピュータと、を備えて構成され、前記モニタ画像が前記遠隔監視サーバから前記遠隔操作用コンピュータにダウンロードされ、前記遠隔操作用コンピュータの表示装置に表示される前記モニタ画像に基づいて、遠隔操作者によって前記遠隔操作用コンピュータの入力装置に入力された制御指令が前記遠隔監視サーバにアップロードされると、前記制御指令が前記遠隔監視サーバから前記マウス操作装置に出力されて、前記ローカルコンピュータシステムが遠隔操作される遠隔操作モードを備えている点にある。 The first characteristic configuration of the remote monitoring system according to the present invention is a remote monitoring system including a calculation unit, an input device, and a display device, which remotely monitors and operates a local computer system that controls a predetermined device. It operates based on a remote monitoring server that remotely monitors a local computer system, a camera device that uploads a monitor image displayed on a display device of the local computer system to the remote monitoring server, and a control command from the remote monitoring server. A mouse operating device having the above-mentioned first or second characteristic configuration, an arithmetic unit, an input device, and a display device are provided, and the remote monitoring server is communicably connected to operate the local computer system remotely. A remote control computer is provided, and the monitor image is downloaded from the remote monitoring server to the remote control computer, and is remotely based on the monitor image displayed on the display device of the remote control computer. When the control command input to the input device of the remote operation computer by the operator is uploaded to the remote monitoring server, the control command is output from the remote monitoring server to the mouse operation device, and the local computer system The point is that it has a remote operation mode in which it is operated remotely.

遠隔操作用コンピュータの表示装置に表示されるローカルコンピュータシステムのモニタ画像に基づいて、遠隔操作者が遠隔操作用コンピュータの入力装置に制御指令を入力すると、当該制御指令が遠隔監視サーバからマウス操作装置に出力されて、ローカルコンピュータシステムが遠隔操作される。遠隔操作用コンピュータの設置場所を問わずに何れのロケーションであってもローカルコンピュータシステムを遠隔操作できるようになる。 When the remote operator inputs a control command to the input device of the remote control computer based on the monitor image of the local computer system displayed on the display device of the remote control computer, the control command is sent from the remote monitoring server to the mouse control device. Is output to, and the local computer system is operated remotely. The local computer system can be remotely controlled at any location regardless of the location of the remote control computer.

同第二の特徴構成は、上述の第一の特徴構成に加えて、前記マウス操作装置の前記固定機構に前記マウスが位置決め固定されると、前記遠隔操作モードが起動する点にある。 The second feature configuration is that, in addition to the first feature configuration described above, when the mouse is positioned and fixed to the fixing mechanism of the mouse operating device, the remote control mode is activated.

ローカルコンピュータシステムに備えたマウスが固定機構に位置決め固定されることにより遠隔操作モードが起動するので、ローカルコンピュータシステムを現場で制御するのか、遠隔制御するのかを切替操作する必要が無くなり、切替忘れといった人為的ミスを事前防止できる。 Since the remote control mode is activated by positioning and fixing the mouse provided in the local computer system to the fixing mechanism, it is no longer necessary to switch between controlling the local computer system in the field and remotely, and forgetting to switch. Human error can be prevented in advance.

同第三の特徴構成は、上述の第一または第二の特徴構成に加えて、前記遠隔監視サーバに、前記遠隔監視サーバから前記マウス操作装置に出力される制御指令にタイムスタンプが付された遠隔操作履歴を記憶する遠隔操作履歴記憶部を備え、前記ローカルコンピュータシステムに記録される操作履歴情報と照合可能に構成されている点にある。 In the third feature configuration, in addition to the first or second feature configuration described above, the remote monitoring server is time-stamped with control commands output from the remote monitoring server to the mouse operating device. It is provided with a remote operation history storage unit that stores the remote operation history, and is configured to be collated with the operation history information recorded in the local computer system.

遠隔制御されたときの操作履歴情報とローカルコンピュータシステムに記録される操作履歴情報とが照合可能になる。 The operation history information when remotely controlled and the operation history information recorded in the local computer system can be collated.

以上説明した通り、本発明によれば、簡単な構成で自由度の高いマウス操作装置及び遠隔監視システムを提供することができるようになった。 As described above, according to the present invention, it has become possible to provide a mouse operating device and a remote monitoring system having a high degree of freedom with a simple configuration.

(a)はマウス操作装置を俯瞰した説明図、(b)はマウス操作装置の切欠き側面図、(c)はマウス操作装置の切欠き平面図(A) is an explanatory view of a mouse operating device from a bird's-eye view, (b) is a notched side view of the mouse operating device, and (c) is a notched plan view of the mouse operating device. (a)はマウス操作装置に備えたスイッチ作動機構及び回転作動機構を説明する切欠き平面図、(b),(c)はマウス操作装置に備えたスイッチ作動機構及び疑似移動機構を説明する切欠き側面図(A) is a notch plan view for explaining the switch operation mechanism and the rotation operation mechanism provided in the mouse operation device, and (b) and (c) are cuts for explaining the switch operation mechanism and the pseudo movement mechanism provided in the mouse operation device. Notch side view (a)から(c)は疑似移動機構の説明図、(d)はマウス操作装置に対する操作アイコンの説明図(A) to (c) are explanatory diagrams of the pseudo-movement mechanism, and (d) is an explanatory diagram of operation icons for the mouse operating device. 遠隔監視システムの説明図Explanatory diagram of remote monitoring system

以下に、本発明によるマウス操作装置及び遠隔監視システムを説明する。
図1、図2及び図3にはマウスM及びマウス操作装置1が示されている。
The mouse operating device and the remote monitoring system according to the present invention will be described below.
A mouse M and a mouse operating device 1 are shown in FIGS. 1, 2 and 3.

マウスMはコンピュータに対するポインティングデバイスの一つとして用いられる入力装置であり、マウスケースの下面に移動検知機構を構成するトラックボールM1を備え、マウスケースの上面にホイールM2、左右の押圧操作部M3,M4などを備えている。マウスケースの内部にはトラックボールM1に連動して直交する二方向の回転を検知するエンコーダと、ホイールM2の回転を検知するエンコーダと、左右の押圧操作部M3,M4に伴って作動する左右のスイッチと、信号処理部などを備えている。 The mouse M is an input device used as one of the pointing devices for a computer. The mouse M is provided with a trackball M1 constituting a movement detection mechanism on the lower surface of the mouse case, a wheel M2 on the upper surface of the mouse case, and left and right pressing operation units M3. It is equipped with M4 and so on. Inside the mouse case, there is an encoder that detects rotation in two directions orthogonal to the trackball M1, an encoder that detects the rotation of the wheel M2, and left and right that operate with the left and right pressing operation units M3 and M4. It is equipped with a switch and a signal processing unit.

信号処理部は各エンコーダ及びスイッチの状態に基づいてマウスMの操作情報を生成する電子回路であり、生成した操作情報をコンピュータに伝達する通信インタフェースを備えている。コンピュータに接続された表示装置の画面にマウスの位置を示すマウスポインタが表示され、トラックボールM1の動きに連動してマウスポインタが移動する。また、左の押圧操作部M3を押圧操作してスイッチが作動すると左クリック、右の押圧操作部M4を押圧操作してスイッチが作動すると右クリックとなり、ホイールを回転走査するエンコーダが作動して回転速度に応じて画面がスクロールする。画面に表示されたアイコンをマウスMでクリックすることにより、各アイコンに割り付けた処理が実行される。 The signal processing unit is an electronic circuit that generates operation information of the mouse M based on the states of each encoder and switch, and includes a communication interface that transmits the generated operation information to a computer. A mouse pointer indicating the position of the mouse is displayed on the screen of the display device connected to the computer, and the mouse pointer moves in synchronization with the movement of the trackball M1. Further, when the switch is operated by pressing the left pressing operation unit M3, the left click is performed, and when the switch is operated by pressing the right pressing operation unit M4, the right click is performed. The screen scrolls according to the speed. By clicking the icon displayed on the screen with the mouse M, the process assigned to each icon is executed.

マウス操作装置1は、ポインティングデバイスであるマウスMを遠隔操作するための装置である。マウス操作装置1は、マウスMを収容する略直方体形状の容器2と、容器2に備えた複数のアクチュエータ3a,3b,3c,3dを備えている。 The mouse operating device 1 is a device for remotely controlling the mouse M, which is a pointing device. The mouse operating device 1 includes a substantially rectangular parallelepiped container 2 for accommodating the mouse M, and a plurality of actuators 3a, 3b, 3c, and 3d provided in the container 2.

容器2には、内部空間を上下に仕切る仕切り板21が設けられ、仕切り板21の上部空間がマウスMの収容空間となる。上部空間にはマウスMを位置決めして固定する固定機構22として機能する複数の弾性部材が容器2の内壁に固定されている。固定機構22でマウスMが固定された状態で、仕切り板21に形成された開口21hにマウスMのトラックボールM1が位置するように位置決めされる。弾性部材としてモルトプレーンや合成ゴム製の板状部材が用いられる。 The container 2 is provided with a partition plate 21 that divides the internal space into upper and lower parts, and the upper space of the partition plate 21 serves as a storage space for the mouse M. In the upper space, a plurality of elastic members functioning as a fixing mechanism 22 for positioning and fixing the mouse M are fixed to the inner wall of the container 2. With the mouse M fixed by the fixing mechanism 22, the trackball M1 of the mouse M is positioned so as to be positioned in the opening 21h formed in the partition plate 21. A plate-shaped member made of malt plane or synthetic rubber is used as the elastic member.

アクチュエータ3aが、固定機構22により位置決め固定された状態で、マウスMに組み込まれた移動検知機構であるトラックボールM1を作動させる疑似移動機構となる。 The actuator 3a is a pseudo-movement mechanism that operates the trackball M1 which is a movement detection mechanism incorporated in the mouse M in a state where the actuator 3a is positioned and fixed by the fixing mechanism 22.

図3(a)に示すように、アクチュエータ3aは、回転自在に支持された球体であるボール30と、ボール30を二次元平面上で互いに直交するX軸およびY軸方向に回転駆動する駆動機構31,32を備えている。駆動機構31,32はエンコーダ内蔵モータ31a,32aと当該モータ31a,32aの出力軸に取付けられ、周面がボール30と接触するように配置された円柱状の摩擦伝動体31b,32bを備えている。 As shown in FIG. 3A, the actuator 3a is a drive mechanism that rotationally drives the ball 30, which is a sphere supported rotatably, and the ball 30 in the X-axis and Y-axis directions orthogonal to each other on a two-dimensional plane. It has 31 and 32. The drive mechanisms 31 and 32 are provided with the encoder built-in motors 31a and 32a and the columnar friction transmitters 31b and 32b attached to the output shafts of the motors 31a and 32a and arranged so that the peripheral surface is in contact with the ball 30. There is.

図3(b)に示すように、摩擦伝動体31bがX軸周りに回転すると、ボール30がX軸と平行な軸芯周りに回転し、図3(c)に示すように、摩擦伝動体32bがY軸周りに回転すると、ボール30がY軸と平行な軸芯周りに回転する。ボール30が回転すると、ボール30に摩擦接触しているマウスMのトラックボールM1が連動して回転する。 As shown in FIG. 3 (b), when the friction transmitter 31b rotates around the X axis, the ball 30 rotates around the axis parallel to the X axis, and as shown in FIG. 3 (c), the friction transmitter When the 32b rotates about the Y-axis, the ball 30 rotates around the axis parallel to the Y-axis. When the ball 30 rotates, the trackball M1 of the mouse M, which is in frictional contact with the ball 30, rotates in conjunction with the rotation.

アクチュエータ3c,3dが、固定機構22により位置決め固定された状態で、マウスMの左右の押圧操作部M3,M4に連動し、マウスMに組み込まれたスイッチを作動させるスイッチ作動機構となる。また、アクチュエータ3bが、マウスMに組み込まれたホイールM2を作動させる回転作動機構となる。 With the actuators 3c and 3d positioned and fixed by the fixing mechanism 22, the actuators 3c and 3d are interlocked with the left and right pressing operation units M3 and M4 of the mouse M to act as a switch operating mechanism for operating the switch incorporated in the mouse M. Further, the actuator 3b serves as a rotation operating mechanism for operating the wheel M2 incorporated in the mouse M.

図2(a)に示すように、アクチュエータ3bは、エンコーダ内蔵モータ33aと当該モータ33aの出力軸に取付けられ、周面がホイールM2と接触するように配置された円柱状の摩擦伝動体33bで構成され、モータ33aが回転することにより摩擦伝動体33bを介してホイールM2が回転する。 As shown in FIG. 2A, the actuator 3b is a cylindrical friction transmitter 33b attached to the motor 33a with a built-in encoder and the output shaft of the motor 33a and arranged so that the peripheral surface is in contact with the wheel M2. As the motor 33a rotates, the wheel M2 rotates via the friction transmitter 33b.

アクチュエータ3c,3dは、エンコーダ内蔵モータ34aと当該モータ34aの出力軸に取付けられ、周面が押圧操作部M3,M4の近傍に位置するカム板34bで構成され、モータ34aが回転することにより回転するカム板34bにより押圧操作部M3,M4が押圧操作されてスイッチが作動する。カム板34bが1回転すると1クリック、カム板34bが2回転するとダブルクリックとなる。 The actuators 3c and 3d are attached to the motor 34a with a built-in encoder and the output shaft of the motor 34a, and the peripheral surface is composed of a cam plate 34b located in the vicinity of the pressing operation units M3 and M4. The pressing operation units M3 and M4 are pressed by the cam plate 34b to operate the switch. When the cam plate 34b makes one rotation, it becomes one click, and when the cam plate 34b makes two rotations, it becomes a double click.

さらに、仕切り板21の下部空間には、上述した疑似移動機構がスイッチ作動機構を駆動制御する操作制御部35と、外部装置から操作制御部35に制御指令を入力する通信インタフェース36とを備えている。 Further, in the lower space of the partition plate 21, an operation control unit 35 in which the above-mentioned pseudo-movement mechanism drives and controls the switch operation mechanism, and a communication interface 36 for inputting a control command from an external device to the operation control unit 35 are provided. There is.

固定機構22により位置決め固定されたマウスMに対して、疑似移動機構(アクチュエータ3a)を動作させることによりマウスMの移動検知機構が作動して、コンピュータに接続された表示装置の画面に表示されるマウスカーソルが移動し、スイッチ作動機構を動作させることによりマウスMの左右のクリック用のスイッチが作動する。そのような疑似移動機構及びスイッチ作動機構は、通信インタフェース36を介して外部装置から入力される制御指令に基づいて動作する操作制御部35によって制御される。実際のマウスMが制御されるため、正確に所望の操作が実現できる。 By operating the pseudo-movement mechanism (actuator 3a) with respect to the mouse M positioned and fixed by the fixing mechanism 22, the movement detection mechanism of the mouse M is activated and displayed on the screen of the display device connected to the computer. By moving the mouse cursor and operating the switch operating mechanism, the left and right click switches of the mouse M are activated. Such a pseudo-moving mechanism and a switch operating mechanism are controlled by an operation control unit 35 that operates based on a control command input from an external device via the communication interface 36. Since the actual mouse M is controlled, the desired operation can be accurately realized.

図4には、上述したマウス操作装置1が組み込まれた遠隔監視システムが示されている。遠隔監視システム10は、ローカルコンピュータシステムLCSと、遠隔監視サーバ40と、遠隔操作用コンピュータ50とを備えている。 FIG. 4 shows a remote monitoring system incorporating the mouse operating device 1 described above. The remote monitoring system 10 includes a local computer system LCS, a remote monitoring server 40, and a remote control computer 50.

当該遠隔監視システム10は、例えば浄水場に設置され、浄水用の設備機器を制御するローカルコンピュータシステムLCSを遠隔で監視して操作する遠隔監視システムである。当該ローカルコンピュータシステムLCSは、CPUボードを備えた演算部11と、液晶表示装置13と、入力装置12が設けられ、入力装置12としてマウスMとキーボードを備えている。そして、マウスMは上述したマウス操作装置1に収容されている。 The remote monitoring system 10 is, for example, a remote monitoring system that is installed in a water purification plant and remotely monitors and operates a local computer system LCS that controls equipment for water purification. The local computer system LCS is provided with a calculation unit 11 including a CPU board, a liquid crystal display device 13, and an input device 12, and includes a mouse M and a keyboard as the input device 12. The mouse M is housed in the mouse operating device 1 described above.

ローカルコンピュータシステムLCSには、さらに表示装置13に表示されたモニタ画像を撮像するカメラ装置14と、上述のマウス操作装置1に操作指令を出力する制御装置15と、カメラ装置14の映像を、インターネットを介して遠隔監視サーバ40に送信するとともに、遠隔操作用コンピュータ50からの操作指令を受信して制御装置15に出力する通信インタフェース16を備えている。通信インタフェース16としてWi−Fiなどの無線通信インタフェースが好適に用いられる。 In the local computer system LCS, a camera device 14 that captures a monitor image displayed on the display device 13, a control device 15 that outputs an operation command to the mouse operation device 1 described above, and an image of the camera device 14 are provided on the Internet. It is provided with a communication interface 16 that transmits to the remote monitoring server 40 via the above, receives an operation command from the remote operation computer 50, and outputs the operation command to the control device 15. As the communication interface 16, a wireless communication interface such as Wi-Fi is preferably used.

遠隔監視サーバ40は、ローカルコンピュータシステムLCSを遠隔監視するクラウド型のサーバで、カメラ装置14により撮影されたローカルコンピュータシステムLCSの表示装置13に表示されたモニタ画像が通信インタフェース16を介してアップロードされる。 The remote monitoring server 40 is a cloud-type server that remotely monitors the local computer system LCS, and the monitor image displayed on the display device 13 of the local computer system LCS taken by the camera device 14 is uploaded via the communication interface 16. To.

遠隔操作用コンピュータ50は、表示装置51とマウス52などの入力装置を備えている。遠隔操作用コンピュータ50は、遠隔監視サーバ40とインターネットを介して接続され、遠隔監視サーバ40からダウンロードされたモニタ画像が遠隔操作用コンピュータ50の表示装置に表示される。 The remote control computer 50 includes an input device such as a display device 51 and a mouse 52. The remote control computer 50 is connected to the remote control server 40 via the Internet, and the monitor image downloaded from the remote control server 40 is displayed on the display device of the remote control computer 50.

遠隔操作者は、遠隔操作用コンピュータ50の表示装置51に表示されたモニタ画像を目視して、遠隔操作用コンピュータ50のマウス52を操作することにより、ローカルコンピュータシステムLCSのマウス操作装置1を遠隔制御することが可能になるように構成されている。 The remote operator remotely controls the mouse operation device 1 of the local computer system LCS by visually observing the monitor image displayed on the display device 51 of the remote control computer 50 and operating the mouse 52 of the remote control computer 50. It is configured to be controllable.

遠隔監視サーバ40には、複数の施設に設置されたローカルコンピュータシステムLCSの其々からモニタ画像がアップロードされ、遠隔監視サーバ40に接続された複数の遠隔操作用コンピュータ50から必要なモニタ画像をダウンロードして監視可能に構成されている。遠隔監視サーバ40に遠隔操作用コンピュータ50を接続する際には、IDやパスワードなどの使用者情報を入力してログインする必要があり、各使用者と、各使用者が操作するローカルコンピュータシステムLCSとの関連付け情報が操作ログ情報として遠隔監視サーバ40に記録される。 Monitor images are uploaded to the remote monitoring server 40 from each of the local computer systems LCS installed in the plurality of facilities, and necessary monitor images are downloaded from the plurality of remote control computers 50 connected to the remote monitoring server 40. It is configured to be monitorable. When connecting the remote control computer 50 to the remote monitoring server 40, it is necessary to enter user information such as an ID and password to log in, and each user and the local computer system LCS operated by each user. The association information with is recorded in the remote monitoring server 40 as operation log information.

遠隔操作用コンピュータ50の表示装置51には、ローカルコンピュータシステムLCSの表示装置13に表示されたモニタ画像に加えて、マウス操作用の案内画像60が同時に表示され、当該案内画像60をマウス操作することにより、ローカルコンピュータシステムLCSに備えたマウス操作装置1に対する操作指令が生成される。なお、遠隔操作用コンピュータ50として、デスクトップ型コンピュータ、ラップトップ型コンピュータ以外にタブレット型コンピュータやスマートフォンのような携帯型情報端末を用いることもできる。 In addition to the monitor image displayed on the display device 13 of the local computer system LCS, the display device 51 of the remote operation computer 50 simultaneously displays the guidance image 60 for mouse operation, and the guidance image 60 is operated by the mouse. As a result, an operation command for the mouse operation device 1 provided in the local computer system LCS is generated. As the remote control computer 50, a portable information terminal such as a tablet computer or a smartphone can be used in addition to the desktop computer and the laptop computer.

図3(d)には、案内画像60が示されている。上下左右の「実線矢印」と「二重線矢印」に加えて「左」「右」「ダブル」といったアイコン画像が表示されている。「実線矢印」または「二重線矢印」をクリックすることにより、マウス操作装置1に位置決め固定されたマウスMのトラックボールがアクチュエータ3aを介して回転駆動され、矢印方向にマウスカーソルが移動する。その結果がモニタ画像に反映される。「実線矢印」または「二重線矢印」の違いはマウスMのカーソル移動ピッチの違いにあり、「実線矢印」のクリックによるマウスMのカーソル移動ピッチより「二重線矢印」のクリックによるマウスMのカーソル移動ピッチが大きくなるように設定されている。 The guide image 60 is shown in FIG. 3 (d). In addition to the up, down, left, and right "solid line arrows" and "double line arrows," icon images such as "left," "right," and "double" are displayed. By clicking the "solid line arrow" or the "double line arrow", the trackball of the mouse M positioned and fixed to the mouse operating device 1 is rotationally driven via the actuator 3a, and the mouse cursor moves in the direction of the arrow. The result is reflected in the monitor image. The difference between "solid arrow" and "double line arrow" lies in the difference in the cursor movement pitch of mouse M. Mouse M by clicking "double line arrow" from the cursor movement pitch of mouse M by clicking "solid line arrow". The cursor movement pitch of is set to be large.

「左」をクリックすると左クリックに対応する操作指令が生成されてマウス操作装置1に送信され、「右」をクリックすると右クリックに対応する操作指令が生成されてマウス操作装置1に送信され、「ダブル」をクリックするとダブルクリックに対応する操作指令が生成されてマウス操作装置1に送信される。図3(d)の「設定」アイコンは、「実線矢印」または「二重線矢印」のクリックに対するマウスの移動ピッチを設定するためのアイコンで、「設定」を押すとピッチの設定画面が表示され、ピッチを数値入力した後に「実線矢印」または「二重線矢印」をクリックすることによりクリックされた「実線矢印」または「二重線矢印」の移動ピッチが更新される。 When "left" is clicked, an operation command corresponding to the left click is generated and transmitted to the mouse operation device 1, and when "right" is clicked, an operation command corresponding to the right click is generated and transmitted to the mouse operation device 1. When "double" is clicked, an operation command corresponding to the double click is generated and transmitted to the mouse operating device 1. The "Setting" icon in Fig. 3 (d) is an icon for setting the mouse movement pitch for clicking the "solid arrow" or "double line arrow", and when "Setting" is pressed, the pitch setting screen is displayed. Then, the movement pitch of the clicked "solid line arrow" or "double line arrow" is updated by clicking the "solid line arrow" or "double line arrow" after inputting the pitch numerically.

案内画像60の右上にはホイールM2に対する回転方向を示すアイコン画像が示されている。下段の矢印をクリックすると、ホイールM2が手前側に所定角度回転し、それに伴って画面が上方に僅かにスクロールする。上段の矢印をクリックすると、ホイールM2が前方に所定角度回転し、それに伴って画面が下方に僅かにスクロールする。下段の矢印をドラッグすると、その間は所定速度でホイールM2が手前側に回転し、それに伴って画面が上方に連続的にスクロールする。上段の矢印をドラッグすると、その間は所定速度でホイールM2が前方に回転し、それに伴って画面が下方に連続的にスクロールする。 An icon image showing the direction of rotation with respect to the wheel M2 is shown in the upper right of the guide image 60. When the arrow in the lower row is clicked, the wheel M2 rotates by a predetermined angle toward the front side, and the screen scrolls slightly upward accordingly. When you click the arrow in the upper row, the wheel M2 rotates forward by a predetermined angle, and the screen scrolls slightly downward accordingly. When the lower arrow is dragged, the wheel M2 rotates toward you at a predetermined speed during that time, and the screen continuously scrolls upward accordingly. When the upper arrow is dragged, the wheel M2 rotates forward at a predetermined speed during that time, and the screen continuously scrolls downward accordingly.

なお、マウス操作装置1に対する操作指令は、遠隔監視サーバ40を介してローカルコンピュータシステムLCSのマウス操作装置1に送信されるように構成され、各操作履歴がタイムスタンプとともに遠隔監視サーバ40の記憶装置に記憶される。 The operation command for the mouse operation device 1 is configured to be transmitted to the mouse operation device 1 of the local computer system LCS via the remote monitoring server 40, and each operation history is stored together with the time stamp in the storage device of the remote monitoring server 40. Is remembered in.

上述したローカルコンピュータシステムLCSは本来そのシステムが設置された施設の操作者により操作されるものであるが、ローカルコンピュータシステムLCSの操作モードを遠隔操作モードに切り替えることにより、上述した遠隔操作モードに切り替わる。 The above-mentioned local computer system LCS is originally operated by the operator of the facility where the system is installed, but by switching the operation mode of the local computer system LCS to the remote control mode, the mode is switched to the above-mentioned remote control mode. ..

上述したマウス操作装置1の固定機構22にマウスMが位置決め固定されたことを検知するスイッチを備え、当該スイッチが作動すると、遠隔操作モードに切り替わって遠隔操作モードが起動するよう構成することが好ましい。 It is preferable that the fixing mechanism 22 of the mouse operating device 1 described above is provided with a switch for detecting that the mouse M is positioned and fixed, and when the switch is activated, the mode is switched to the remote control mode and the remote control mode is activated. ..

ローカルコンピュータシステムに備えたマウスが固定機構に位置決め固定されることにより遠隔操作モードが起動するので、ローカルコンピュータシステムを現場で制御するのか、遠隔制御するのかを意図的に切替操作する必要が無くなり、切替忘れといった人為的ミスを事前防止できる。 Since the remote control mode is activated by positioning and fixing the mouse provided in the local computer system to the fixing mechanism, it is not necessary to intentionally switch between controlling the local computer system in the field and remotely. Human error such as forgetting to switch can be prevented in advance.

また、遠隔監視サーバ40に、遠隔監視サーバ40からマウス操作装置1に出力される制御指令にタイムスタンプが付された遠隔操作履歴を記憶する遠隔操作履歴記憶部を備えていれば、ローカルコンピュータシステムLCSに記録される操作履歴情報と照合可能になり、様々な事後的検証が可能になる。右クリックで実行操作を行なった際には、同時に画面キャプチャで画像を記録させておくと、実際に実行した操作を視覚的に照合することができ、好ましい。 Further, if the remote monitoring server 40 is provided with a remote operation history storage unit that stores the remote operation history in which the control command output from the remote monitoring server 40 to the mouse operation device 1 is time-stamped, the local computer system It becomes possible to collate with the operation history information recorded in the LCS, and various ex post facto verifications become possible. It is preferable to record an image by screen capture at the same time when the execution operation is performed by right-clicking, because the actually executed operation can be visually collated.

上述した実施形態では、マウスに備えた移動検知機構がトラックボールM1を備えて構成されたものを説明したが、移動検知機構はボール式に限らず、光学式、レーザー式、ブルーLED式、IRセンサ式などの他の方式を採用するものであってもよい。この場合、光源からボール30表面に照射される検出光がボール30の表面からマウスに向けて反射することによりボール30の回転が検出されるようになる。 In the above-described embodiment, the movement detection mechanism provided in the mouse is configured to include the trackball M1, but the movement detection mechanism is not limited to the ball type, but is not limited to the ball type, but is an optical type, a laser type, a blue LED type, and an IR. Other methods such as a sensor type may be adopted. In this case, the rotation of the ball 30 is detected by reflecting the detection light emitted from the light source onto the surface of the ball 30 from the surface of the ball 30 toward the mouse.

上述した実施形態は何れも本発明の一例であり、該記載により本発明の技術的範囲が限定されるものではなく、本発明の作用効果が奏される範囲で適宜変更設計可能であることはいうまでもない。 The above-described embodiments are all examples of the present invention, and the description does not limit the technical scope of the present invention, and it is possible to appropriately modify and design within the range in which the effects of the present invention are exhibited. Needless to say.

1:マウス操作装置
2:容器
3a:疑似移動機構(アクチュエータ)
3b:回転作動機構(アクチュエータ)
3c,3d:スイッチ作動機構(アクチュエータ)
22:固定機構
10:遠隔監視システム
35:操作制御部
36:通信インタフェース
40:遠隔監視サーバ
50:遠隔操作用コンピュータ
60:案内画像
M:マウス
M1:トラックボール
M2:ホイール
M3,M4:押圧操作部

1: Mouse operating device 2: Container 3a: Pseudo-movement mechanism (actuator)
3b: Rotational operation mechanism (actuator)
3c, 3d: Switch operating mechanism (actuator)
22: Fixing mechanism 10: Remote monitoring system 35: Operation control unit 36: Communication interface 40: Remote monitoring server 50: Remote control computer 60: Guide image M: Mouse M1: Trackball M2: Wheels M3, M4: Pressing operation unit

Claims (6)

ポインティングデバイスであるマウスを遠隔操作するためのマウス操作装置であって、
前記マウスを位置決めして固定する固定機構と、
前記固定機構により位置決め固定された状態で、前記マウスに組み込まれた移動検知機構を作動させる疑似移動機構と、
前記固定機構により位置決め固定された状態で、前記マウスに組み込まれたスイッチを作動させるスイッチ作動機構と、
前記疑似移動機構と前記スイッチ作動機構を駆動制御する操作制御部と、
外部装置から前記操作制御部に制御指令を入力する通信インタフェースと、
を備えているマウス操作装置。
A mouse operating device for remotely controlling a mouse, which is a pointing device.
A fixing mechanism that positions and fixes the mouse,
A pseudo-movement mechanism that operates a movement detection mechanism incorporated in the mouse while being positioned and fixed by the fixing mechanism.
A switch operating mechanism that operates a switch incorporated in the mouse while being positioned and fixed by the fixing mechanism.
An operation control unit that drives and controls the pseudo-movement mechanism and the switch operation mechanism,
A communication interface for inputting control commands from an external device to the operation control unit,
A mouse operating device equipped with.
前記固定機構により位置決め固定された状態で、前記マウスに組み込まれたホイールを回転作動させる回転作動機構を備え、
前記操作制御部は前記通信インタフェースを介して前記外部装置から入力された制御指令に基づいて前記回転作動機構を制御する請求項1記載のマウス操作装置。
A rotation operating mechanism for rotating a wheel incorporated in the mouse while being positioned and fixed by the fixing mechanism is provided.
The mouse operation device according to claim 1, wherein the operation control unit controls the rotation operation mechanism based on a control command input from the external device via the communication interface.
前記疑似移動機構がボールを回転作動させることで前記移動検知機構を作動させる請求項1または2記載のマウス操作装置。 The mouse operating device according to claim 1 or 2, wherein the pseudo-movement mechanism operates the movement detection mechanism by rotating the ball. 演算部と入力装置と表示装置とを備え所定の機器を制御するローカルコンピュータシステムを遠隔で監視して操作する遠隔監視システムであって、
前記ローカルコンピュータシステムを遠隔監視する遠隔監視サーバと、
前記ローカルコンピュータシステムの表示装置に表示されたモニタ画像を前記遠隔監視サーバにアップロードするカメラ装置と、
前記遠隔監視サーバからの制御指令に基づいて作動する請求項から3の何れかに記載のマウス操作装置と、
演算部と入力装置と表示装置とを備えるとともに前記遠隔監視サーバと通信可能に接続され、前記ローカルコンピュータシステムを遠隔で操作する遠隔操作用コンピュータと、
を備えて構成され、
前記モニタ画像が前記遠隔監視サーバから前記遠隔操作用コンピュータにダウンロードされ、前記遠隔操作用コンピュータの表示装置に表示される前記モニタ画像に基づいて、遠隔操作者によって前記遠隔操作用コンピュータの入力装置に入力された制御指令が前記遠隔監視サーバにアップロードされると、
前記制御指令が前記遠隔監視サーバから前記マウス操作装置に出力されて、前記ローカルコンピュータシステムが遠隔操作される遠隔操作モードを備えている遠隔監視システム。
A remote monitoring system that remotely monitors and operates a local computer system that has an arithmetic unit, an input device, and a display device to control a predetermined device.
A remote monitoring server that remotely monitors the local computer system,
A camera device that uploads a monitor image displayed on the display device of the local computer system to the remote monitoring server, and a camera device.
The mouse operating device according to any one of claims 3 to 3, which operates based on a control command from the remote monitoring server.
A remote-controlled computer that includes a calculation unit, an input device, and a display device, is connected to the remote monitoring server in a communicable manner, and remotely operates the local computer system.
Is configured with
The monitor image is downloaded from the remote monitoring server to the remote control computer, and based on the monitor image displayed on the display device of the remote control computer, the remote operator makes the input device of the remote control computer. When the input control command is uploaded to the remote monitoring server,
A remote monitoring system having a remote control mode in which the control command is output from the remote monitoring server to the mouse operating device to remotely control the local computer system.
前記マウス操作装置の前記固定機構に前記マウスが位置決め固定されると、前記遠隔操作モードが起動する請求項4記載の遠隔監視システム。 The remote monitoring system according to claim 4, wherein when the mouse is positioned and fixed to the fixing mechanism of the mouse operation device, the remote operation mode is activated. 前記遠隔監視サーバに、前記遠隔監視サーバから前記マウス操作装置に出力される制御指令にタイムスタンプが付された遠隔操作履歴を記憶する遠隔操作履歴記憶部を備え、前記ローカルコンピュータシステムに記録される操作履歴情報と照合可能に構成されている請求項4または5記載の遠隔監視システム。 The remote monitoring server is provided with a remote operation history storage unit that stores a remote operation history in which a control command output from the remote monitoring server to the mouse operation device is time-stamped, and is recorded in the local computer system. The remote monitoring system according to claim 4 or 5, which is configured to be collated with operation history information.
JP2019234939A 2019-12-25 2019-12-25 Mouse operating device and remote monitoring system Active JP7266518B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019234939A JP7266518B2 (en) 2019-12-25 2019-12-25 Mouse operating device and remote monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019234939A JP7266518B2 (en) 2019-12-25 2019-12-25 Mouse operating device and remote monitoring system

Publications (2)

Publication Number Publication Date
JP2021103862A true JP2021103862A (en) 2021-07-15
JP7266518B2 JP7266518B2 (en) 2023-04-28

Family

ID=76755562

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019234939A Active JP7266518B2 (en) 2019-12-25 2019-12-25 Mouse operating device and remote monitoring system

Country Status (1)

Country Link
JP (1) JP7266518B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0594259A (en) * 1991-07-17 1993-04-16 Matsushita Electric Ind Co Ltd Pad device for optical mouse
US5528265A (en) * 1994-07-18 1996-06-18 Harrison; Simon J. Orientation-operated cursor control device
JP2017183936A (en) * 2016-03-29 2017-10-05 メタウォーター株式会社 Operation system for controller

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0594259A (en) * 1991-07-17 1993-04-16 Matsushita Electric Ind Co Ltd Pad device for optical mouse
US5528265A (en) * 1994-07-18 1996-06-18 Harrison; Simon J. Orientation-operated cursor control device
JP2017183936A (en) * 2016-03-29 2017-10-05 メタウォーター株式会社 Operation system for controller

Also Published As

Publication number Publication date
JP7266518B2 (en) 2023-04-28

Similar Documents

Publication Publication Date Title
JP7391023B2 (en) Systems and methods for learning industrial tasks by robots based on human demonstrations
US5872594A (en) Method for open loop camera control using a motion model to control camera movement
US7720552B1 (en) Virtual knob lever arm as analog control element
EP1709519B1 (en) A virtual control panel
US20160346921A1 (en) Portable apparatus for controlling robot and method thereof
US20230024500A1 (en) Neural Network-Based Recognition of Trade Workers Present on Industrial Sites
US11619924B2 (en) Combined visualization thin client HMI system and method
US9182582B2 (en) Observation device and method that performs compensation control as a first driving and a second driving
KR102507254B1 (en) Home automation system using real-time indoor image
CN104144326A (en) Robot monitoring system with image recognition and automatic patrol route setting function
US20220269284A1 (en) Systems and methods for management of a robot fleet
US20200125872A1 (en) Micro-Fiducial For Machine Vision
JP2012179682A (en) Mobile robot system, mobile robot control device, and moving control method and moving control program to be used for the control device
JP7266518B2 (en) Mouse operating device and remote monitoring system
KR102484768B1 (en) Touching Robot
JPWO2021199230A5 (en) REMOTE MONITORING AND CONTROLLER, SYSTEM, METHOD AND PROGRAM
KR101028130B1 (en) Remote real-time picture-transmitting system
KR100899651B1 (en) System of video monitoring and touchscreen control for managing local control panel
WO2017050673A1 (en) An arrangement for providing a user interface
US20210405701A1 (en) Dockable apparatus for automatically-initiated control of external devices
KR20190091870A (en) Robot control system using motion sensor and VR
CN114227709A (en) Auxiliary office case handling robot and case handling method
EP1975751A1 (en) Data transfer of data for analysis and evaluation
JP2017151666A (en) Facility monitoring device and program
KR20100001414A (en) Open motion control method and system using open remote control driving scheme

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220623

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230131

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230418

R150 Certificate of patent or registration of utility model

Ref document number: 7266518

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150