JP4900955B2 - 遠隔操作システム、制御方法及びプログラム - Google Patents
遠隔操作システム、制御方法及びプログラム Download PDFInfo
- Publication number
- JP4900955B2 JP4900955B2 JP2007155637A JP2007155637A JP4900955B2 JP 4900955 B2 JP4900955 B2 JP 4900955B2 JP 2007155637 A JP2007155637 A JP 2007155637A JP 2007155637 A JP2007155637 A JP 2007155637A JP 4900955 B2 JP4900955 B2 JP 4900955B2
- Authority
- JP
- Japan
- Prior art keywords
- button
- information processing
- information
- processing apparatus
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
Description
また、携帯機器を制御コンピュータとして利用する場合には表示部が小さく被制御コンピュータの共有画面を縮小しなければならない問題がある。
(第1の実施形態)
図1は、遠隔操作システムの構成を示すブロック図である。図1において、101は表示装置、102は主情報処理装置(第一の情報処理装置、被制御コンピュータ)、103は通信手段、104〜106は、例えば2以上の情報処理装置(第二の情報処理装置、制御コンピュータ)である。表示装置101には、主情報処理装置102の画面を表示する。少なくとも一台の情報処理装置104から通信手段103を通じて、主情報処理装置102のリモート操作を行う。このリモート操作には、表示装置101に表示された主情報処理装置102の画面を見ながら行う方法や、通信手段103を通じて主情報処理装置102の画面を情報処理装置104〜106に表示して行う方法等がある。本実施形態では、表示装置101に表示された主情報処理装置102の画面を見ながら行うリモート操作を行う場合について説明する。
なお、図示を省略するが、主情報処理装置102及び情報処理装置104〜106はそれぞれ汎用コンピュータに搭載される標準的な構成要素を有している。例えば、CPU、RAM、ROM、ハードディスク、外部記憶装置、ネットワークインタフェース、ディスプレイ、キーボード、マウス等である。主情報処理装置102は、表示部を持たないデスクトップ型PCを想定しているが、ノート型PC等の表示部を内蔵した装置であってもよい。また、情報処理装置104〜106には表示部を内蔵したノート型PCやPDA等の装置を想定しているが、表示装置を別に用意したデスクトップ型PC等の装置であってもよい。
ボタン制御部214は、入力内容がボタン外からボタン内への端末104のカーソル移動であった場合、ホスト102へリモート操作命令の1つであるボタン表示命令をリモート操作アプリケーション208及び通信部213又は通信部213だけを通じて送信する。ボタン表示命令には、端末104に表示中のボタンをホスト102に表示するために必要なボタン情報を含める。ホスト102の被リモート操作アプリケーション201が、端末104からボタン表示命令を受信するとボタン情報をボタン表示制御部207へ送信し、端末104のボタンを表示させる。
ボタン表示制御部207は、ボタン情報をもとにボタンのユーザインタフェースをホスト102の表示部へ表示する。もちろん、端末104からのボタン表示命令の度にボタン情報を取得するのではなく、ホスト102が受信したボタン情報を記憶装置(管理部)に保存しておき、端末104からはボタンに変更のあった場合のみボタン情報の全てあるいは更新情報だけを送信する。そして、ホスト102で受信したボタン表示命令にボタン情報が無ければ保存したボタン情報を用い、有れば保存したボタン情報を更新しそれを利用することもできる。
ステップS101において端末104とホスト102との間の通信確立後、ステップS102においてボタン情報の作成と表示の更新を行う。ステップS102におけるボタン情報の作成と表示の更新は、端末104の制御又はホスト102の制御の結果、リモート操作状態が変化した場合に再度実行する。リモート操作状態とは、端末104に与えられた操作権や利用中のアプリケーション等のリモート操作環境を示すモードである。
ステップS108において該ボタンがホスト102のリモート操作に関するものの場合には、ステップS109においてホスト102での対応動作を実行する。
端末104からのカーソル制御命令の結果、ステップS204において右クリック動作が発生する場合には、ステップS205においてボタン表示制御部207で右クリックメニューの制御を行う。この右クリックメニューの表示には、ホスト102のオペレーティングシステム216の制御によって表示される右クリックメニューへのメニューの追加方法がある場合には端末104のボタン情報をもとにメニューを追加する方法がある。また、追加方法が無く右クリックメニューの左下の座標を取得できる場合には端末104のボタン情報をもとに右クリックメニューの表示位置の下に独自メニューを表示する方法がある。また、右クリックメニューの表示位置が分からない場合にはカーソル位置が独自メニューの左下となるように表示する方法等がある。
ステップS206において、あるメニューでクリック動作が発生した場合、ステップS207において対応する動作を実行する。ステップS208において該メニューが端末からのものであった場合には、ステップS209において端末104での対応動作を実行する。
図8は、操作情報215の一例を示す図である。操作情報215には、ボタンのID301、ボタンの表示を決定するパラメータであるアイコン302、大きさ303、テキスト304、色305と、ボタンが押されたときに動作させる関数やイベント306等がある。アイコンは、他のパラメータによってイメージが変化するようにすると利用価値が高まる。例えば、イメージの一部を透明としておき背景の色によってイメージの一部の色を変化させると、ペンや塗りつぶしのアイコンとして利用できる。なお、アイコンは、変数設定によって外見を変更可能にしてもよい。
図9は、端末104のボタン情報の一例を示す図であり、401〜405が、端末に表示するボタンの一例である。ボタン情報は、操作情報とボタンとを表示する位置406によって構成される。
ボタン制御部214では、まずステップS303において操作情報215を呼び出す。
次に、ステップS304において操作情報215から表示するボタンの選択を行う。
ステップS304における表示ボタンの選択は、端末104のリモート操作状態や端末104の操作に利用する入力装置209等の環境に応じてボタン制御部214が自動で行う方法がある。また、ユーザのボタン操作履歴や入力履歴に基づいてボタン制御部214が選択ルールを自動生成して行う方法や、表示ボタン選択用ユーザインタフェースを表示しユーザに選択させる方法等で行う。
ステップS305におけるボタンの並び替え完了後、ステップS306においてボタンを表示する。これと同時にステップS307においてボタン情報の作成を行う。そして、図5のようにホスト102で端末104毎にボタン情報を保存する場合は、ステップS308においてこのボタン情報をホスト102へ送信する。ホスト102が端末104の操作情報215の全部あるいは一部を保持している場合には、ボタン情報に含まれる操作情報はボタンのID301のみ等とすることができる。
次に、ステップS603においてボタン表示命令中あるいは被リモート操作アプリケーション201が保存する端末104のボタン情報を取得する。
ステップS604においてボタン情報の取得に失敗した場合は、表示制御を終了し端末104へボタン情報の再送を要求する。ステップS604においてボタン情報の取得に成功したが、ステップS605においてボタンの表示領域が他の端末104のすでに表示されているボタンと重なる場合には、ステップS606においてボタン表示位置の変更を行う。ステップS606におけるボタン表示位置の変更では、ボタンの移動や縮小によりボタンの重なりを避ける。ボタンの重なりを許す場合には、重なりによって非表示となる端末104のボタン領域を該端末へ送信し、非表示領域におけるカーソル操作の中断を要求する(又は、無効とする)ことで、ボタンの非表示領域における誤動作を防止することができる。
ステップS606の終了後あるいはステップS605でボタンの重なりが無い場合には、ステップS607でボタン情報をもとに該端末のボタンを表示する。ステップS607で、取得したボタン情報をもとに該端末のボタンを表示する。なお、ステップS605において、ボタンが重なる場合は、表示中のボタンの操作が終了するまで、表示を行わないようにしたり、ボタンの表示を拒絶したりするようにしてもよい。
次に、ステップS703でボタン表示制御部207が該端末のボタンが表示中であるか確認し、表示中であればステップS704においてカーソル制御命令中の入力座標を端末ボタンの左上との相対座標からホストの表示領域内での絶対座標に変換する。
この絶対座標をもとにステップS707において該端末用の擬似カーソルを表示し、ステップS708においてカーソルの制御を行う。このように、ボタンとカーソルの位置関係とを維持するようにカーソルの座標変換を行う。
ステップS703において該端末のボタンが表示されていない場合は、ステップS705においてカーソル制御命令が右クリックであるか確認する。右クリックである場合はステップS706においてボタン表示制御部207へ該端末の右クリックメニューの表示を要求する。以降はステップS707、ステップS708と同様に処理する。
図6で述べたように右クリックメニューを表示する方法としてホスト102のオペレーティングシステム216の制御によって表示される右クリックメニューへのメニューの追加方法がある場合には、端末104のボタン情報をもとにメニューを追加する方法がある。また、追加方法が無く右クリックメニューの左下の座標を取得できる場合には端末104のボタン情報をもとに右クリックメニューの表示位置の下に独自メニューを表示する方法がある。また、右クリックメニューの表示位置が分からない場合にはカーソル位置が独自メニューの左下となるように表示する方法等がある。メニューを追加する場合が811、右クリックメニューの表示位置の下に独自メニューを表示する場合が812、右クリックメニューの表示位置の上に独自メニューを表示する場合が813である。
102 主情報処理装置
103 通信手段
104 情報処理装置
105 情報処理装置
106 情報処理装置
201 被リモート操作アプリケーション
202 入力装置
203 マウス
204 キーボード
205 入力制御部
206 通信部
207 ボタン表示制御部
208 リモート操作アプリケーション
209 入力装置
210 マウス
211 キーボード
212 入力制御部
213 通信部
214 ボタン制御部
215 操作情報
Claims (12)
- 第一の情報処理装置を第二の情報処理装置が遠隔操作する遠隔操作システムであって、
前記第二の情報処理装置は、
前記第二の情報処理装置の画面の座標を指示する指示手段と、
前記第一の情報処理装置の画面におけるボタンの表示位置と、前記ボタンが指示されたことにより実行される処理内容とを含むボタン情報、及び当該ボタン情報に対応するボタンを表示させるための表示制御命令、及び前記指示手段の指示に応じて、前記ボタン情報に応じた処理を実行させるためのリモート操作命令を前記第一の情報処理装置へ送信する送信手段とを有し、
前記第一の情報処理装置は、
前記第二の情報処理装置から前記ボタン情報、及び前記表示制御命令、及び前記リモート操作命令を受信する受信手段と、
前記第二の情報処理装置からの表示制御命令に応じて、前記第一の情報処理装置の画面に前記ボタン情報に対応するボタンを表示させる表示制御手段と、
前記第二の情報処理装置からのリモート操作命令に応じて前記ボタン情報に応じた処理を実行する実行手段とを有することを特徴とする遠隔操作システム。 - 前記送信手段は、前記第二の情報処理装置の画面におけるボタンの表示位置に対応する座標が指示されたことに応じて、当該ボタンの前記第一の情報処理装置の画面における表示位置を含むボタン情報と、当該ボタンを前記第一の情報処理装置の画面で表示させるための表示制御命令を送信することを特徴とする請求項1に記載の遠隔操作システム。
- 前記送信手段は、前記第一の情報処理装置との通信の確立に応じて前記ボタン情報を送信した後、前記第二の情報処理装置の画面におけるボタンの表示位置に対応する座標が指示されたことに応じて、当該ボタンを前記第一の情報処理装置の画面で表示させるための表示制御命令を送信することを特徴とする請求項1に記載の遠隔操作システム。
- 前記送信手段は、前記第一の情報処理装置の画面におけるボタンの表示位置に対応する前記第二の情報処理装置の画面の座標を指示している前記指示手段によるクリック指示の入力に応じてリモート操作命令を前記第一の情報処理装置へ送信し、
前記第一の情報処理装置の実行手段は、
前記リモート操作命令の受信に応じて前記ボタン情報に応じた処理を実行することを特徴とする請求項1乃至3の何れか1項に記載の遠隔操作システム。 - 前記ボタン情報は、前記ボタンの色、文字、アイコンの少なくとも何れかを含むことを特徴とする請求項1乃至4の何れか1項に記載の遠隔操作システム。
- 前記第二の情報処理装置は、前記第二の情報処理装置の画面にボタンを表示させる第二表示制御手段を有し、
前記送信手段は、前記第二の情報処理装置の画面に表示されるボタンと、前記第二の情報処理装置の画面において前記指示手段により指示された座標との相対位置に応じた座標情報を前記第一の情報処理装置に送信し、
前記第一の情報処理装置の表示制御手段は、前記第二の情報処理装置の画面に表示されたボタンと前記指示手段により指示された座標との位置関係と、前記第一の情報処理装置の画面に表示されたボタンと、前記第一の情報処理装置の画面に表示させるカーソルとの位置関係が対応するように、前記第一の情報処理装置の画面にカーソルを表示させることを特徴とする請求項1乃至5の何れか1項に記載の遠隔操作システム。 - 前記第一の情報処理装置は、
前記第一の情報処理装置を遠隔操作する第三の情報処理装置からのボタン情報に応じたボタンの表示中に前記第二の情報処理装置より受信したボタン情報に対応するボタンの表示領域が、当該表示中のボタンの表示領域と重なるか否かを判定する判定手段を有し、
前記表示制御手段は、前記第二の情報処理装置からのボタン情報に対応するボタンの表示領域が表示中のボタンの表示領域が重ならないと前記判定手段により判定された場合、前記第二の情報処理装置からのボタン情報に対応するボタンを表示させることを特徴とする請求項1乃至5の何れか1項に記載の遠隔操作システム。 - 前記実行手段は、
前記第二の情報処理装置からのボタン情報に対応するボタンの表示領域が、表示中のほかのボタンの表示領域と重なる場合、表示が隠れたボタンの表示位置に対応する前記第二の情報処理装置の画面の座標を指示している前記指示手段によりクリック指示が入力されたことによるリモート操作命令を受信しても前記ボタン情報に応じた処理を実行しないことを特徴とする請求項4に記載の遠隔操作システム。 - 前記表示制御手段は、前記第二の情報処理装置からのボタン情報に対応するボタンの表示領域が、表示中のほかのボタンの表示領域と重なる場合、前記第二の情報処理装置からのボタン情報に対応するボタンの表示位置を変更することを特徴とする請求項1乃至4の何れか1項に記載の遠隔操作システム。
- 第一の情報処理装置を第二の情報処理装置が遠隔操作する遠隔操作システムの制御方法であって、
前記第二の情報処理装置は、
前記第二の情報処理装置の画面の座標を指示する指示ステップと、
前記第一の情報処理装置の画面におけるボタンの表示位置と、前記ボタンが指示されたことにより実行される処理内容とを含むボタン情報、及び当該ボタン情報に対応するボタンを表示させるための表示制御命令、及び前記指示ステップの指示に応じて前記ボタン情報に応じた処理を実行させるためのリモート操作命令を前記第一の情報処理装置へ送信する送信ステップとを有し、
前記第一の情報処理装置は、
前記第二の情報処理装置から前記ボタン情報、及び前記表示制御命令、及び前記リモート操作命令を受信する受信ステップと、
前記第二の情報処理装置からの表示制御命令に応じて、前記第一の情報処理装置の画面に前記ボタン情報に対応するボタンを表示させる表示制御ステップと、
前記第二の情報処理装置からのリモート操作命令に応じて前記ボタン情報に応じた処理を実行する実行ステップとを有することを特徴とする制御方法。 - 情報処理装置から遠隔制御されるコンピュータに、
前記コンピュータの画面におけるボタンの表示位置と、前記ボタンが指示されたことにより実行される処理内容とを含むボタン情報、及び当該ボタン情報に対応するボタンを表示させるための表示制御命令、及び情報処理装置の画面の座標を指示する指示手段の指示に応じて送信される、前記ボタン情報に応じた処理を実行させるためのリモート操作命令を前記情報処理装置から受信する受信手順と、
前記情報処理装置からの表示制御命令に応じて、前記コンピュータの画面に前記ボタン情報に対応するボタンを表示させる表示制御手順と、
前記情報処理装置からのリモート操作命令に応じて前記ボタン情報に応じた処理を実行する実行手順とを実行させるためのプログラム。 - 情報処理装置を遠隔操作するコンピュータに、
前記コンピュータの画面の座標を指示する指示手順と、
前記情報処理装置の画面におけるボタンの表示位置と、前記ボタンが指示されたことにより実行される処理内容とを含むボタン情報、及び当該ボタン情報に対応するボタンを表示させるための表示制御命令、及び前記指示手順の指示に応じて前記ボタン情報に応じた処理を実行させるためのリモート操作命令を前記情報処理装置へ送信する送信手順とを実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007155637A JP4900955B2 (ja) | 2007-06-12 | 2007-06-12 | 遠隔操作システム、制御方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007155637A JP4900955B2 (ja) | 2007-06-12 | 2007-06-12 | 遠隔操作システム、制御方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2008310442A JP2008310442A (ja) | 2008-12-25 |
JP2008310442A5 JP2008310442A5 (ja) | 2010-07-22 |
JP4900955B2 true JP4900955B2 (ja) | 2012-03-21 |
Family
ID=40238011
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007155637A Expired - Fee Related JP4900955B2 (ja) | 2007-06-12 | 2007-06-12 | 遠隔操作システム、制御方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4900955B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5305894B2 (ja) * | 2008-12-26 | 2013-10-02 | 株式会社東芝 | 画面共有システム、設定変更方法、クライアント装置、およびプログラム |
EP2771770A4 (en) * | 2011-10-28 | 2015-04-29 | Thomson Licensing | METHOD FOR POSITIONING VIRTUAL MOUSE CURSOR OF REMOTE USER INTERFACE BASED ON INTERNET BROWSER |
JP2014146229A (ja) * | 2013-01-30 | 2014-08-14 | Sharp Corp | 画面共有システム及び中央装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006108911A (ja) * | 2004-10-01 | 2006-04-20 | Canon Inc | 画像処理装置及び画像処理方法 |
-
2007
- 2007-06-12 JP JP2007155637A patent/JP4900955B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2008310442A (ja) | 2008-12-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100686165B1 (ko) | 오에스디 기능 아이콘을 갖는 휴대용 단말기 및 이를이용한 오에스디 기능 아이콘의 디스플레이 방법 | |
TWI601055B (zh) | 統一可延伸韌體介面(uefi)基本輸入/輸出系統(bios)受控計算裝置以及其方法和非暫時性媒體 | |
US8300017B2 (en) | Mobile electronic apparatus with touch input device and display method using the same | |
US8310445B2 (en) | Remote-control system, remote-control apparatus, apparatus to be controlled, remote-control method, computer program, and storage medium | |
US7432876B2 (en) | Display system and method for image copy to a remote display | |
US9582903B2 (en) | Display terminal device connectable to external display device and method therefor | |
JP5532018B2 (ja) | 端末装置、プログラムおよびリモート操作システム | |
KR20150032066A (ko) | 화면 미러링 방법 및 그에 따른 소스 기기 | |
JP2007011531A (ja) | インタフェース制御プログラム、インタフェース制御方法、インタフェース制御装置、プラグインプログラム | |
JP2008293361A (ja) | 画面表示システム、その制御方法、プログラム及び記録媒体 | |
CN110708527A (zh) | 图像显示装置、图像显示装置的图像显示方法及存储介质 | |
JP2009205492A (ja) | コンピュータの遠隔操作システム | |
JP2004317583A (ja) | 描画装置 | |
CN113672290B (zh) | 一种文件打开方法及设备 | |
JP4900955B2 (ja) | 遠隔操作システム、制御方法及びプログラム | |
US9037981B2 (en) | Information processing apparatus, control method therefor, and storage medium for displaying cursors from other sites in dedicated windows | |
EP2150052B1 (en) | Remote desktop client peephole movement | |
US20140165011A1 (en) | Information processing apparatus | |
JP6293903B2 (ja) | 情報を表示するための電子機器および方法 | |
JP5228651B2 (ja) | 携帯端末 | |
KR20010030020A (ko) | 클라이언트와 호스트간의 정보 콘텐트의 통신 | |
JPH11296270A (ja) | 携帯表示端末装置、携帯表示システム、及び記憶媒体 | |
JP2005181424A (ja) | 携帯情報処理端末および情報表示処理方法および情報表示処理プログラム | |
JP2003050661A (ja) | 通信機能付き電子機器、及び通信プログラム | |
WO2015083321A1 (ja) | 携帯電子機器連携システム、車載表示装置、および連携用プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100607 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100607 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111124 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111206 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111226 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4900955 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150113 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |