JP2008293361A - Screen display system, control method therefor, program, and storage medium - Google Patents
Screen display system, control method therefor, program, and storage medium Download PDFInfo
- Publication number
- JP2008293361A JP2008293361A JP2007139402A JP2007139402A JP2008293361A JP 2008293361 A JP2008293361 A JP 2008293361A JP 2007139402 A JP2007139402 A JP 2007139402A JP 2007139402 A JP2007139402 A JP 2007139402A JP 2008293361 A JP2008293361 A JP 2008293361A
- Authority
- JP
- Japan
- Prior art keywords
- terminal device
- shared area
- cursor
- area
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、画面表示システム等に関する。 The present invention relates to a screen display system and the like.
近年のネットワークの発展に伴い、コンピュータシステムを利用した電子会議システムが普及している。特に、大画面表示装置を利用した電子会議システム等では、大画面表示装置を会議参加者の共有表示装置として利用している。また、単なる表示装置としての用途の他に電子ホワイトボード等、電子描画装置として使うことができる。 With the recent development of networks, electronic conference systems using computer systems have become widespread. In particular, in an electronic conference system using a large screen display device, the large screen display device is used as a shared display device for conference participants. Moreover, it can be used as an electronic drawing device such as an electronic whiteboard in addition to the use as a simple display device.
このような電子会議システムは、1台のPC(Personal Computer)に大画面表示装置を接続し、会議参加者が画面に表示された情報を共有、編集することができる。共有画面への入力端末としては有線又は無線のマウス、キーボード、タブレット、画面上で直接座標入力が可能なデジタイザ等が使用される。一方、ノート型PCやPDA(Personal Digital Assistants)等の情報端末装置も普及してきており、両者を組み合わせた電子会議システムが知られている。 In such an electronic conference system, a large screen display device is connected to one PC (Personal Computer), and conference participants can share and edit information displayed on the screen. As an input terminal for the shared screen, a wired or wireless mouse, keyboard, tablet, digitizer capable of inputting coordinates directly on the screen, or the like is used. On the other hand, information terminal devices such as notebook PCs and PDAs (Personal Digital Assistants) have also become widespread, and electronic conferencing systems combining both are known.
これらの多くの情報端末装置は、無線又は有線のインタフェースと、液晶表示画面と、データの入力方法としてペンを用いたタブレット式又はキーボード等の入力装置と、を備えている。したがって、このような情報端末装置は、上述した電子会議システムの入力端末として使用することができる。すなわち、接続された情報端末装置の入力装置を用いてホストとしての端末装置(ホスト端末装置)に対して、情報端末装置からマウスカーソルの移動座標及びマウスのクリック情報を送ることができる。そして、ホスト端末装置側では、情報端末装置から送られてきたマウス情報を基に、マウスイベントを発生させる。このように、情報端末装置(リモート端末装置)からホスト端末装置の操作が可能となり、会議やプレゼンテーション等の場で効果を発揮する。 Many of these information terminal devices include a wireless or wired interface, a liquid crystal display screen, and an input device such as a tablet or a keyboard using a pen as a data input method. Therefore, such an information terminal device can be used as an input terminal of the above-described electronic conference system. That is, the movement coordinates of the mouse cursor and the mouse click information can be sent from the information terminal device to the terminal device (host terminal device) as the host using the input device of the connected information terminal device. Then, on the host terminal device side, a mouse event is generated based on the mouse information sent from the information terminal device. In this way, the host terminal device can be operated from the information terminal device (remote terminal device), which is effective in a meeting or presentation.
ここで、1つの共有画面を有するホスト端末装置に対して、複数のリモート端末装置による有線又は無線の操作、ホスト端末装置に接続されているローカル入力デバイスから同時又は交互の操作、を行おうことができる。しかし、ホスト端末装置のカーソル資源は1つしかないため、操作の競合、操作者の混乱を招くという問題がある。この問題を解決する手段として、ホスト端末装置のカーソルを操作する権利(制御権)を排他的に各リモート端末装置に与えるという方法が考えられる。 Here, a wired or wireless operation by a plurality of remote terminal devices and a simultaneous or alternating operation from a local input device connected to the host terminal device are performed on a host terminal device having one shared screen. Can do. However, since there is only one cursor resource of the host terminal device, there is a problem that operation conflicts and operator confusion occur. As a means for solving this problem, a method of giving the right (control right) to operate the cursor of the host terminal device exclusively to each remote terminal device can be considered.
例えば、操作権を付与した入力デバイスの切替えの方法として、ホスト端末装置又はリモート端末装置からのボタン押下、メニュー選択等の指示による操作権を明示的に取得、割当て及び解除を行う方法がある。また、ある条件に基づき自動的に制御権の割当てを行う方法がある(例えば、特許文献1参照)。特許文献1に開示された技術は、入力デバイスからの入力が所定時間経過したかどうかで操作権の制御を自動的に行うというものである。
For example, as a method of switching an input device to which an operation right is given, there is a method of explicitly acquiring, assigning, and canceling an operation right based on an instruction such as pressing a button or selecting a menu from a host terminal device or a remote terminal device. There is also a method of automatically assigning control rights based on certain conditions (see, for example, Patent Document 1). The technique disclosed in
また、リモート端末装置をホスト端末装置のカーソル操作端末として使用するための方法としては、リモート端末装置上にホスト端末装置のポインティングカーソルの位置を指定するための座標指定エリアを設ける方法がある。このときの座標指定エリアは、ホスト端末装置の共有画面全体を表示する方法や一部を切り出して表示する方法がある。また、リモート端末装置が表示装置を有さず、タブレット面の一部をホストの共有画面全体又は一部の座標と対応させるという方法もある。また、会議やプレゼンテーションといった場では、より効果をあげることを目的として表示画面の一部を拡大表示することが考えられる。この実現手段としては、ホスト端末装置のアプリケーションが備えるズーム機能で拡大する方法と、ディスプレイ自体がズーム機能とを備えている場合がある。 As a method for using the remote terminal device as a cursor operation terminal of the host terminal device, there is a method of providing a coordinate designation area for designating the position of the pointing cursor of the host terminal device on the remote terminal device. The coordinate designation area at this time includes a method of displaying the entire shared screen of the host terminal device and a method of cutting out and displaying a part thereof. There is also a method in which the remote terminal device does not have a display device, and a part of the tablet surface is associated with the entire shared screen of the host or a part of coordinates. In a meeting or presentation, it is possible to enlarge a part of the display screen for the purpose of improving the effect. As a means for realizing this, there is a case where the zoom function provided in the application of the host terminal device is used for enlargement and the display itself has a zoom function.
上述したような従来の技術において、リモート端末装置上の座標指定エリアがホストの共有画面全体と対応する場合では、リモート端末装置のユーザは、ホストの共有画面を見ながらリモート端末装置を操作することが多い。そのため、ホスト端末装置の共有エリアの一部がズーム状態の場合にはリモート端末装置からのシステムカーソル操作によりホスト端末装置のカーソルが共有画面の外に出てしまい、カーソルを見失うということがある。さらに、リモート端末装置のユーザがホスト端末装置の共有画面を見ながらリモート端末装置を操作し、座標指定エリア外にカーソルが出たことに気づかず、クリックやタップ等を行うことがある。従って、ホスト端末装置上で表示されていない共有画面の外のクリック又はタップ動作となり、ユーザの予期しない誤動作を起こすという問題があった。 In the conventional technology as described above, when the coordinate designation area on the remote terminal device corresponds to the entire shared screen of the host, the user of the remote terminal device operates the remote terminal device while viewing the shared screen of the host. There are many. Therefore, when a part of the shared area of the host terminal device is in the zoom state, the cursor of the host terminal device may go out of the shared screen due to the system cursor operation from the remote terminal device, and the cursor may be lost. Further, the user of the remote terminal device may operate the remote terminal device while looking at the shared screen of the host terminal device, and may perform a click or tap without noticing that the cursor has come out of the coordinate designation area. Therefore, there is a problem that a click or tap operation outside the shared screen that is not displayed on the host terminal device causes an unexpected malfunction of the user.
本発明は、上述したような問題点を鑑みてなされたもので、ホスト端末装置の共有エリアの一部が共有エリア全体へ拡大表示されている場合において、カーソルの移動範囲を制御することによりホスト端末装置上の誤操作を防ぐことを目的とする。 The present invention has been made in view of the above-described problems. When a part of the shared area of the host terminal device is enlarged and displayed on the entire shared area, the host is controlled by controlling the movement range of the cursor. The purpose is to prevent erroneous operation on the terminal device.
本発明は、画面上に、通信回線を介して接続されたリモート端末装置から操作可能な共有エリアを有するホスト端末装置と、前記共有エリアに表示されるポインティングカーソルを操作するための座標指定エリアを有する前記リモート端末装置と、を有する画面表示システムであって、前記共有エリアの一部を共有エリア全体へ拡大表示する拡大手段と、前記拡大手段により、前記共有エリアの一部が共有エリア全体へ拡大表示されている場合に、前記ポインティングカーソルを前記拡大表示された共有エリアの一部の領域から出ないように制御するホスト端末カーソル制御手段と、を有することを特徴とする。 The present invention provides on a screen a host terminal device having a shared area that can be operated from a remote terminal device connected via a communication line, and a coordinate designation area for operating a pointing cursor displayed in the shared area. A remote terminal device, and a screen display system comprising: a magnifying means for enlarging and displaying a part of the shared area over the entire shared area; and Host terminal cursor control means for controlling the pointing cursor so that it does not come out of a part of the enlarged shared area when the enlarged display is performed.
本発明によれば、ホスト端末装置の共有エリアの一部が共有エリア全体へ拡大表示されている場合において、カーソルの移動範囲を制御することによりホスト端末装置上の誤操作を防ぐことができる。 According to the present invention, when a part of the shared area of the host terminal device is enlarged and displayed in the entire shared area, it is possible to prevent an erroneous operation on the host terminal device by controlling the movement range of the cursor.
(第1の実施形態)
以下、本発明の実施形態について図面を参照して詳細に説明する。
図1は、本実施形態に係る画面表示システムの全体構成を示すブロック図である。20は、ホスト端末装置である。ホスト端末装置20は、リモート端末装置9と通信回線を介して接続され、画面上にリモート端末装置9から操作可能であり、リモート端末装置9のユーザから直接見ることが可能な共有エリアを設けている。1は、ディスプレイ等の表示手段であり、リモート端末装置9から操作可能な共有エリアを表示する。2は、各種制御を行う制御手段である。3は、共有画面を有するホスト端末装置20の操作権となる排他情報やズーム情報等を記憶する記憶手段であり、フラッシュメモリやRAM等の不揮発性メモリやHDD等の外部記憶装置からなる。
(First embodiment)
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
FIG. 1 is a block diagram showing the overall configuration of the screen display system according to the present embodiment.
4は、操作権の制御を行う操作権管理手段である。5はホスト端末装置20へ座標情報を入力するマウス、タブレット、等の入力手段である。入力手段5は、座標入力可能なものであればデジタイザ、タッチパネル等、特に指定はしない。6は、ホスト端末装置20の共有エリアの一部が共有エリア全体へ拡大表示されている場合に、ホスト端末装置20のポインティングカーソルがホスト端末画面の拡大表示領域外へ出ないように制御するカーソル制御手段(ホスト端末カーソル制御手段)である。7は、ホスト端末装置20の共有エリアの一部を共有エリア全体へ拡大表示するための拡大手段である。8は、通信手段であり、ホスト端末装置20と他のリモート端末装置9との通信を制御する為のネットワークインタフェース部である。
Reference numeral 4 denotes operation right management means for controlling the operation right. Reference numeral 5 denotes an input means such as a mouse or a tablet for inputting coordinate information to the
9は、ホスト端末装置20の通信手段8と通信を行い、ホスト端末装置20の共有エリアを操作する為の座標入力手段を有する座標入力デバイスや、PDA等からなるリモート端末装置である。ここで、PDAは、Personal Digital Assistantsの略である。10は、ホスト端末装置20とリモート端末装置9とを有線又は無線で通信を行う為のLAN等のネットワークである。11は、表示手段であり、ホスト端末装置20の共有エリアへの入力の為の座標指定を行う為のリモート端末装置9のディスプレイである。12は、リモート端末装置9の各種制御を行う為の制御手段である。13は、記憶手段であり、フラッシュメモリやRAM等の不揮発性メモリやHDD等の外部記憶装置である。14は、カーソル制御手段(リモート端末カーソル制御手段)であり、ホスト端末装置20への座標指定を行う為のリモート端末装置9の座標入力エリアからカーソルを出す又は出さない等のカーソル制御を行う。15は、通信手段であり、ホスト端末装置20と通信を行う為の制御を行うネットワークインタフェース部である。16は、リモート端末装置9へ座標入力する為の入力手段であり、ペン、マウス、タブレット等である。
図3は、本実施形態に係る画面表示システムの全体構成を示すブロック図である。
図3では、ホスト端末装置20には座標入力装置としてマウス、共有エリアを表示するための共有ディスプレイが接続されており、共有ディスプレイ上からデジタイザで直接入力座標指定も可能である。ホスト端末装置20には座標入力デバイスとしてノートPC及びタブレットがLANで接続されている。
FIG. 3 is a block diagram showing the overall configuration of the screen display system according to the present embodiment.
In FIG. 3, the
図7は、本実施形態に係るホスト端末装置の表示手段である画面表示を示す図である。
図7において、701は、ホスト端末装置20の共有ディスプレイである。702は、共有エリアであり、ホスト端末装置20と接続されたリモート端末装置9からホスト端末装置20のポインティングカーソル(カーソル)を移動させることが可能なエリアである。共有エリア702はホスト端末装置20のディスプレイ701の表示可能領域と同じ大きさであっても、ホスト端末装置20のディスプレイ701の一部の領域であってもよい。
FIG. 7 is a diagram showing a screen display that is a display unit of the host terminal apparatus according to the present embodiment.
In FIG. 7,
703は、ホスト端末装置20のカーソルである。通常のPCにおいて、カーソルは1つであり、ディスプレイ701内のどの範囲にも移動できる。領域704は、ホスト端末装置20上で、拡大表示領域を指定する場合の矩形指定例であり、ホスト端末装置20又はリモート端末装置9において、カーソルのドラッグによる範囲指定やリモコンなどの入力装置から領域指定を行う。
図8は、本実施形態に係るホスト端末装置と接続されているリモート端末装置の画面表示の一例を示した図である。
図8において、801は、ホスト端末装置20と接続されているリモート端末装置9の表示手段であるディスプレイである。802は、リモート端末装置9からホスト端末装置20の共有エリア702に対して、カーソルを操作する為の座標指定を行う為の領域である。なお、領域802は、領域702の画面イメージを表示しても構わない。803は、リモート端末装置9のカーソルであり、通常、共有エリア702内にてカーソル703とカーソル803の動きは連動する。領域802は共有エリア702上の座標を絶対的に指定可能であり、領域702の左上座標と領域802の左上座標、領域702の右下座標と領域802の右下座標が対応する形となっている。絶対的に座標指定が可能な為、自然な操作感を実現する為にも領域702と領域802の縦横比は同じであることが望ましい。
FIG. 8 is a diagram illustrating an example of a screen display of a remote terminal device connected to the host terminal device according to the present embodiment.
In FIG. 8,
図9は、拡大指示後のホスト端末装置の画面例を示した図である。
図9において、領域901は、拡大指示前の図7上の領域704が、共有画面702全体へ拡大表示されたものである。
FIG. 9 is a diagram illustrating a screen example of the host terminal device after the enlargement instruction.
In FIG. 9, an
図10は、ホスト端末装置の拡大表示時のリモート端末装置の画面例を示した図である。
図10において、領域1001は、ホスト端末装置20の共有表示領域内の拡大表示領域に対応した領域が相対的にリモート端末装置9の座標指定領域内で示されている。ホスト端末装置20が、図7から図9へ拡大表示されたとすると、領域901は領域1001に対応している。
FIG. 10 is a diagram illustrating a screen example of the remote terminal device when the host terminal device is enlarged.
In FIG. 10, an
図11は、ホスト端末装置の拡大表示時のリモート端末装置の画面例を示した図である。
図11において、領域1101は、ホスト端末装置20の拡大表示領域と対応している。
FIG. 11 is a diagram illustrating a screen example of the remote terminal device when the host terminal device is enlarged.
In FIG. 11, an
図4は、本実施形態に係る拡大表示指示時のホスト端末装置20のカーソル制御の処理手順を示したフローチャートである。
まず、ステップS401でホスト端末装置20へ画面拡大指示があるか否かを判定し、ある場合は、ステップS402へ進む。
次に、ステップS402において、ホスト端末装置20のカーソル位置を取得し、カーソル位置が、ステップS401で指定された拡大領域外であるか否かの判定を行う。
次に、ステップS402にて拡大領域外であると判定した場合は、ステップS403にてカーソルを拡大指定領域内へ移動させる。ここでのカーソル移動先は拡大指定領域内であれば特に指定しないものとする。図7ではカーソル703は拡大指定領域704外にあるため、ステップS403にて図9中の拡大指定領域902へ移動される。ステップS402にてカーソルが拡大指定領域内であると判定した場合はステップS404へ進む。
FIG. 4 is a flowchart showing a cursor control processing procedure of the
First, in step S401, it is determined whether or not there is a screen enlargement instruction to the
Next, in step S402, the cursor position of the
Next, if it is determined in step S402 that it is outside the enlargement area, the cursor is moved into the enlargement designation area in step S403. The cursor movement destination here is not particularly specified if it is within the enlargement designation area. In FIG. 7, since the
ステップS404ではズーム中の、ホスト端末装置20又はリモート端末装置9から各種オペレーションを検出し、処理を行う。ズーム中のホスト端末装置20及びリモート端末装置9のカーソル移動時のオペレーションは図5及び図6のフローチャートで後述する。
ステップS405で拡大表示終了と判定した場合は、ステップS401へ戻る。そうでない場合はステップS404へ戻る。
In step S404, various operations are detected from the
If it is determined in step S405 that the enlarged display has ended, the process returns to step S401. Otherwise, the process returns to step S404.
図5は、ホスト端末装置の拡大表示中におけるホスト端末装置のカーソル制御の処理手順を示すフローチャートである。
まず、ステップS501でマウスやデジタイザ等の入力手段5や、リモート端末装置9から、ホスト端末装置20のカーソルの移動指示があるか否かを判定し、指示がある場合はステップS502へ進む。
次に、ステップS501において、ホスト端末装置20が拡大表示中であるかどうかを判定する。拡大表示中である場合は、ステップS503へ進む。
次に、ステップS503において、カーソル移動指示位置が拡大領域外への移動であると判定した場合には、ステップS504にてホスト端末装置20のカーソルの拡大指定領域外への移動を無効化する。ここでは無効化としているが、任意の所定位置へ強制移動させてもよい。
FIG. 5 is a flowchart showing a processing procedure of cursor control of the host terminal device during enlarged display of the host terminal device.
First, in step S501, it is determined whether there is an instruction to move the cursor of the
Next, in step S501, it is determined whether or not the
Next, if it is determined in step S503 that the cursor movement instruction position is a movement outside the enlargement area, the movement of the
また、ステップS503にてカーソル座標指示位置が拡大表示領域外への移動であると判定した場合には、カーソル座標指示位置が拡大領域に含まれるようにホスト端末の拡大領域を移動させるようにしてもよい。ただし、この場合に拡大領域の端が元の共有エリアの端まで移動した場合はステップS504へ進み、ホスト端末カーソルの移動制御の処理を行う。
ステップS503でカーソル座標指示位置が拡大指定領域内の場合、又はステップS502において拡大表示中でないと判定された場合は、ステップS505へ進む。
次に、ステップS505において、通常のカーソル移動の表示をし、ステップS501へ戻る。
If it is determined in step S503 that the cursor coordinate instruction position is a movement outside the enlarged display area, the enlarged area of the host terminal is moved so that the cursor coordinate instruction position is included in the enlarged area. Also good. However, in this case, if the end of the enlarged area has moved to the end of the original shared area, the process proceeds to step S504, and processing for moving the host terminal cursor is performed.
If it is determined in step S503 that the cursor coordinate indication position is within the enlargement designation area, or if it is determined in step S502 that enlargement display is not being performed, the process advances to step S505.
Next, in step S505, normal cursor movement is displayed, and the process returns to step S501.
図6は、ホスト端末装置の拡大表示中におけるリモート端末装置のカーソル制御の処理手順を示すフローチャートである。
まず、リモート端末装置9の入力手段16からリモート端末装置9上の座標指定エリアを利用し、ホスト端末装置20のカーソル操作を行う場合において、ステップS601でリモート端末装置9からカーソル移動指示があったか否かを判定する。あった場合は、ステップS602へ進む。
FIG. 6 is a flowchart showing the cursor control processing procedure of the remote terminal device during the enlarged display of the host terminal device.
First, in the case where a cursor operation of the
ステップS602で、ホスト端末装置20の共有エリアが拡大表示中か否かの判定を行う。ステップS602にて拡大表示中であると判定された場合は、ステップS603へ進む。
ステップS603において、カーソル移動指示位置が、ホスト端末装置20の拡大領域と対応したリモート端末装置9上の領域外への移動指示であるか判定を行う。ここでの判定はリモート端末装置9で行っているが、ホスト端末装置20へカーソル座標を送信し、ホスト端末装置20内で拡大領域であるかどうかの判定を行ってもよい。
In step S602, it is determined whether or not the shared area of the
In step S603, it is determined whether the cursor movement instruction position is an instruction to move outside the area on the remote
リモート端末装置9内でステップS603の判定処理を行う場合、図1のカーソル制御手段14が行う。ホスト端末装置20内で判定を行う場合は、図1の通信手段15よりリモート端末装置9からホスト端末装置20へ座標情報を送信し、ホスト端末装置20で受信された座標情報を、カーソル制御手段6が判定を行う。
ステップS603において、拡大領域外への移動であると判定されるとステップS604へ進む。
When the determination process in step S603 is performed in the remote
If it is determined in step S603 that the movement is outside the enlarged region, the process proceeds to step S604.
ステップS604において、リモート端末装置9のカーソルの拡大指定領域外への移動を無効化する。ここでは無効化としているが、任意の所定位置への強制移動でもよい。また、ステップS603にてカーソル座標指示位置が拡大表示領域外であると判定された場合に、カーソル座標指示位置が拡大領域に含まれるようにホスト端末装置20の拡大領域を移動させてもよい。ただし、その場合に拡大領域の端が元の共有エリアの端まで移動した場合はステップS604へ進み、リモート端末カーソルの移動制御の処理を行う。
次に、ステップS605ではカーソル制御後のカーソル位置を表示し、ステップS601へ戻る。
In step S604, the movement of the cursor of the remote
Next, in step S605, the cursor position after the cursor control is displayed, and the process returns to step S601.
このように、第1の実施形態によれば、一台又は複数のリモート端末装置からホスト端末装置の共有エリアのカーソル操作ができる。ホスト端末装置の共有エリアの一部が共有エリア全体へ拡大表示されている場合において、ホスト端末装置及びリモート端末装置のカーソルの移動範囲を拡大領域外へ出ないよう制御することによりホスト端末装置上の誤操作を防ぐことができる。 As described above, according to the first embodiment, the cursor operation of the shared area of the host terminal device can be performed from one or a plurality of remote terminal devices. By controlling the movement range of the cursor of the host terminal device and the remote terminal device so as not to go out of the enlarged region when a part of the shared area of the host terminal device is enlarged and displayed over the entire shared area, Can prevent misoperation.
(第2の実施形態)
第2の実施形態では、ホスト端末装置に複数のリモート端末装置が接続され、ホスト装置のカーソル制御を行う権利を排他的に管理し、一つのリモート端末装置からのみのカーソル操作を許すものとする。操作権の切替え方法は、ホスト端末装置20又はリモート端末装置9からのボタン押下、メニュー選択等の指示による操作権を明示的に取得・割当て・解除を行う方法と、タイマーによる一定時間経過等、ある条件に基づき自動的に制御権の割当てを行う方法とがある。
(Second Embodiment)
In the second embodiment, a plurality of remote terminal devices are connected to the host terminal device, the right to perform cursor control of the host device is exclusively managed, and a cursor operation from only one remote terminal device is permitted. . The operation right switching method includes a method of explicitly acquiring / assigning / releasing an operation right by an instruction such as a button press from the
前者の方法の例としては、ホスト端末装置20又はリモート端末装置9のマウスクリック、ダブルクリック、トリプルクリック、キーボードの特定ボタンの押下がある。また、ある特定パターンのマウス移動(マウスゼスチャ)、ある領域にマウスカーソルが移動、座標指定エリアウインドウへフォーカスが当たりActive化したとき等が挙げられる。
Examples of the former method include mouse click, double click, triple click, and pressing of a specific button on the keyboard of the
後者の方法としては、入力デバイスからの入力開始又は終了等の入力操作時、あるいはタイマー等を利用し入力操作から所定時間経過した時点で操作権の解放を行う方法が挙げられる。 As the latter method, there is a method of releasing the operation right at the time of input operation such as start or end of input from the input device, or when a predetermined time has elapsed from the input operation using a timer or the like.
図2は、第2の実施形態に係る記憶手段3に記憶される情報の一例を示した図である。
格納される情報としては、ホスト端末装置20へ座標入力するための座標入力デバイス識別子、ホスト端末装置20のカーソルを操作可能な権利をどの入力デバイスが持っているかのテーブルを持つ操作権テーブル情報がある。また、他の入力デバイスが操作権取得中でも強制的に操作権を取得することができる権利をどの入力デバイスが保持しているかの情報を持つ強制取得設定、図示しない画面拡大時の拡大領域矩形座標等から構成されている。操作権テーブル情報は操作権の切替え方法のときに更新されるものとする。
FIG. 2 is a diagram illustrating an example of information stored in the
The stored information includes a coordinate input device identifier for inputting coordinates to the
図12は、第2の実施形態に係るホスト端末装置の拡大表示中におけるリモート端末装置のカーソル制御の処理手順を示すフローチャートである。
まず、ステップS1201でリモート端末装置9からカーソル移動指示があったか否かを判定し、あった場合には、ステップS1202へ進む。
ステップS1202において、リモート端末装置9は図2の操作権テーブル情報を参照し、ホスト端末装置20のカーソルの操作権を有するか否かの判定を行う。ステップS1202にてリモート端末装置9が操作権を有していない場合は、S1206に進み、カーソル移動指示操作はリモート端末装置9のローカルな移動処理として、リモート端末装置9のカーソル制御手段14が処理を行う。
FIG. 12 is a flowchart illustrating a cursor control processing procedure of the remote terminal device during the enlarged display of the host terminal device according to the second embodiment.
First, it is determined in step S1201 whether or not there has been a cursor movement instruction from the remote
In step S1202, the remote
次に、S1202において、リモート端末装置9は操作権を有していると判定した場合はS1203に進む。
ステップS1203で、ホスト端末装置20が拡大表示中か否かの判定を行う。ステップS1203にて拡大表示中であると判定した場合はステップS1204へ進む。
ステップS1204で、カーソル移動指示位置が、ホスト端末装置20の拡大領域と対応したリモート端末装置9上の領域外への移動指示であるか判定を行う。ここでの判定はリモート端末装置9が行っているが、ホスト端末装置20へカーソル座標を送信しホスト端末装置20内で拡大領域であるかどうかの判定を行ってもよい。ホスト端末装置20内で判定を行う場合は、図1の通信手段15よりリモート端末装置9からホスト端末装置20へ座標情報を送信し、ホスト端末装置20で受信された座標情報をカーソル制御手段6が判定の処理を行う。次に、ステップS1204にて拡大領域外への移動であると判定されるとステップS1205へ進む。
Next, in S1202, when it is determined that the remote
In step S1203, it is determined whether or not the
In step S1204, it is determined whether the cursor movement instruction position is an instruction to move outside the area on the remote
ステップS1205において、リモート端末装置9のカーソルの拡大指定領域外への移動を無効化する。ここでは無効化としているが、任意の所定位置への強制移動でもよい。また、ステップS1204にてカーソル座標指示位置が拡大表示領域外であると判定された場合に、カーソル座標指示位置が拡大領域に含まれるようにホスト端末装置の拡大領域を移動させてもよい。ただし、その場合に拡大領域の端が元の共有エリアの端まで移動した場合はステップS1205へ進み、リモート端末カーソルの移動制御の処理を行う。
次に、ステップS1206ではカーソル制御後のカーソル位置を表示し、ステップS1201へ戻る。
In step S1205, the movement of the cursor of the remote
Next, in step S1206, the cursor position after cursor control is displayed, and the process returns to step S1201.
このように、第2の実施形態によれば、ホスト端末装置の操作権を持つリモート端末装置のみが、ホスト端末装置のポインティングカーソルを制御することができる。そして、リモート端末装置のポインティングカーソルがリモート端末表示画面内のホスト端末と対応した拡大表示領域外へ出ないように制御することにより操作権を所持していない端末のカーソル操作を制限することなくホスト端末上の誤操作を防ぐことができる。 As described above, according to the second embodiment, only the remote terminal device having the operation right of the host terminal device can control the pointing cursor of the host terminal device. Then, by controlling the pointing cursor of the remote terminal device so that it does not go out of the enlarged display area corresponding to the host terminal in the remote terminal display screen, the host does not restrict the cursor operation of the terminal that does not have the operation right. Incorrect operation on the terminal can be prevented.
上述した本発明の実施形態における画面表示システムを構成する各手段、並びに画面表示システムの制御方法の各ステップは、コンピュータのRAMやROM等に記憶されたプログラムが動作することによって実現できる。このプログラム及び前記プログラムを記録したコンピュータ読取可能な記録媒体は本発明に含まれる。 Each unit constituting the screen display system and each step of the control method of the screen display system in the embodiment of the present invention described above can be realized by operating a program stored in a RAM, a ROM, or the like of the computer. This program and a computer-readable recording medium on which the program is recorded are included in the present invention.
また、本発明は、例えば、システム、装置、方法、プログラムもしくは記録媒体等としての実施形態も可能であり、具体的には、一つの機器からなる装置に適用してもよい。ここで、記録媒体は、フロッピー(登録商標)ディスク、ハードディスク、光磁気ディスク、光ディスク、CD−ROM、CD−R、DVD−ROM、DVD−R、磁気テープ、不揮発性のメモリカード及びROMをいう。 Further, the present invention can be implemented as, for example, a system, apparatus, method, program, or recording medium, and may be applied to an apparatus composed of a single device. Here, the recording medium refers to a floppy (registered trademark) disk, a hard disk, a magneto-optical disk, an optical disk, a CD-ROM, a CD-R, a DVD-ROM, a DVD-R, a magnetic tape, a nonvolatile memory card, and a ROM. .
なお、本発明は、上述した実施形態の機能を実現するソフトウェアのプログラムを、システム又は装置に直接、又は遠隔から供給する。そして、そのシステム又は装置のコンピュータが前記供給されたプログラムコードを読み出して実行することによっても達成される場合を含む。 The present invention supplies a software program for realizing the functions of the above-described embodiments directly or remotely to a system or apparatus. In addition, this includes a case where the system or the computer of the apparatus is also achieved by reading and executing the supplied program code.
従って、本発明の機能処理をコンピュータで実現するために、前記コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、OSに供給するスクリプトデータ等の形態であってもよい。 Accordingly, since the functions of the present invention are implemented by computer, the program code installed in the computer also implements the present invention. In other words, the present invention includes a computer program itself for realizing the functional processing of the present invention. In that case, as long as it has the function of a program, it may be in the form of object code, a program executed by an interpreter, script data supplied to the OS, and the like.
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される。更に、そのプログラムの指示に基づき、コンピュータ上で稼動しているOS等が、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。 Further, the functions of the above-described embodiments are realized by the computer executing the read program. Furthermore, based on the instructions of the program, an OS or the like running on the computer performs part or all of the actual processing, and the functions of the above-described embodiments can be realized by the processing.
更に、その他の方法として、まず記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。そして、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現される。 As another method, a program read from a recording medium is first written in a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer. Then, based on the instructions of the program, the CPU or the like provided in the function expansion board or function expansion unit performs part or all of the actual processing, and the functions of the above-described embodiments are also realized by the processing.
1 表示手段
2 制御手段
3 記憶手段
4 操作権管理手段
5 入力手段
6 カーソル制御手段
7 拡大手段
8 通信手段
9 情報端末
10 ネットワーク
11 表示手段
12 制御手段
13 記憶手段
14 カーソル制御手段
15 通信手段
16 入力手段
20 ホスト端末装置
701 共有ディスプレイ
702 共有エリア
703 カーソル
704 拡大領域
801 リモート端末ディスプレイ
802 座標指定領域
803 リモート端末カーソル
901 拡大表示時のホスト画面例
902 カーソル
1001 リモート端末画面表示例
1101 リモート端末画面表示例
DESCRIPTION OF
Claims (10)
前記共有エリアの一部を共有エリア全体へ拡大表示する拡大手段と、
前記拡大手段により、前記共有エリアの一部が共有エリア全体へ拡大表示されている場合に、前記ポインティングカーソルを前記拡大表示された共有エリアの一部の領域から出ないように制御するホスト端末カーソル制御手段と、を有することを特徴とする画面表示システム。 A host terminal device having a shared area operable from a remote terminal device connected via a communication line on the screen, and the remote terminal having a coordinate designation area for operating a pointing cursor displayed in the shared area A screen display system comprising:
An enlarging means for enlarging and displaying a part of the shared area over the entire shared area;
A host terminal cursor for controlling the pointing cursor so that it does not exit from a part of the enlarged shared area when a part of the shared area is enlarged and displayed by the enlargement means. And a screen display system.
前記拡大手段により、前記共有エリアの一部が共有エリア全体へ拡大表示されている場合に、前記共有エリアに表示されるポインティングカーソルに対応して前記リモート端末装置の前記表示手段に表示されるポインティングカーソルを、前記拡大表示された共有エリアの一部に対応して前記表示手段に表示される拡大表示の領域から出ないように制御するリモート端末カーソル制御手段を有することを特徴とする請求項1に記載の画面表示システム。 The remote terminal device has display means for displaying a pointing cursor,
Pointing displayed on the display unit of the remote terminal device corresponding to the pointing cursor displayed on the shared area when a part of the shared area is enlarged and displayed on the entire shared area by the enlargement unit 2. The remote terminal cursor control means for controlling the cursor so as not to exit from the enlarged display area displayed on the display means corresponding to a part of the enlarged shared area. The screen display system described in 1.
前記リモート端末カーソル制御手段は、前記操作権を有する場合のみ、前記表示手段に表示されるポインティングカーソルを、前記拡大表示された共有エリアの一部に対応して前記表示手段に表示される拡大表示の領域から出ないように制御することを特徴とする請求項2に記載の画面表示システム。 The host terminal device has an operation right management means for controlling an operation right to operate a pointing cursor displayed in the shared area;
The remote terminal cursor control means displays the pointing cursor displayed on the display means only when it has the operation right, and an enlarged display displayed on the display means corresponding to a part of the enlarged shared area. The screen display system according to claim 2, wherein control is performed so as not to leave the area.
前記共有エリアの一部を共有エリア全体へ拡大表示する拡大ステップと、
前記拡大ステップにより、前記共有エリアの一部が共有エリア全体へ拡大表示されている場合に、前記ポインティングカーソルを前記拡大表示された共有エリアの一部の領域から出ないように制御するホスト端末カーソル制御ステップと、を有することを特徴とする画面表示システムの制御方法。 A host terminal device having a shared area operable from a remote terminal device connected via a communication line on the screen, and the remote terminal having a coordinate designation area for operating a pointing cursor displayed in the shared area A method for controlling a screen display system comprising:
An enlargement step of enlarging and displaying a part of the shared area over the entire shared area;
A host terminal cursor that controls the pointing cursor so that it does not exit from a part of the enlarged shared area when a part of the shared area is enlarged and displayed in the whole shared area by the enlargement step. And a control step for controlling the screen display system.
前記拡大ステップにより、前記共有エリアの一部が共有エリア全体へ拡大表示されている場合に、前記共有エリアに表示されるポインティングカーソルに対応して前記リモート端末装置の前記表示手段に表示されるポインティングカーソルを、前記拡大表示された共有エリアの一部に対応して前記表示手段に表示される拡大表示の領域から出ないように制御するリモート端末カーソル制御ステップを有することを特徴とする請求項4に記載の画面表示システムの制御方法。 The remote terminal device has display means for displaying a pointing cursor,
The pointing displayed on the display means of the remote terminal device corresponding to the pointing cursor displayed on the shared area when a part of the shared area is enlarged and displayed on the entire shared area by the enlargement step. 5. The remote terminal cursor control step for controlling the cursor so as not to exit from the enlarged display area displayed on the display means corresponding to a part of the enlarged shared area. A method for controlling the screen display system according to claim 1.
前記リモート端末カーソル制御ステップでは、前記操作権を有する場合のみ、前記表示手段に表示されるポインティングカーソルを、前記拡大表示された共有エリアの一部に対応して前記表示手段に表示される拡大表示の領域から出ないように制御することを特徴とする請求項5に記載の画面表示システムの制御方法。 The host terminal device has an operation right management means for controlling an operation right to operate a pointing cursor displayed in the shared area;
In the remote terminal cursor control step, an enlarged display displayed on the display means corresponding to a part of the enlarged shared area is displayed with the pointing cursor displayed on the display means only when the user has the operation right. 6. The method of controlling a screen display system according to claim 5, wherein control is performed so as not to leave the area.
前記共有エリアの一部を共有エリア全体へ拡大表示する拡大ステップと、
前記拡大ステップにより、前記共有エリアの一部が共有エリア全体へ拡大表示されている場合に、前記ポインティングカーソルを前記拡大表示された共有エリアの一部の領域から出ないように制御するホスト端末カーソル制御ステップと、をコンピュータに実行させるためのプログラム。 A host terminal device having a shared area operable from a remote terminal device connected via a communication line on the screen, and the remote terminal having a coordinate designation area for operating a pointing cursor displayed in the shared area A program for controlling the host terminal device in a screen display system comprising:
An enlargement step of enlarging and displaying a part of the shared area over the entire shared area;
A host terminal cursor that controls the pointing cursor so that it does not exit from a part of the enlarged shared area when a part of the shared area is enlarged and displayed in the whole shared area by the enlargement step. A program for causing a computer to execute control steps.
前記共有エリアの一部が共有エリア全体へ拡大表示されている場合に、前記共有エリアに表示されるポインティングカーソルに対応して前記リモート端末装置の前記表示手段に表示されるポインティングカーソルを、前記拡大表示された共有エリアの一部に対応して前記表示手段に表示される拡大表示の領域から出ないように制御するリモート端末カーソル制御ステップをコンピュータに実行させるためのプログラム。 A host terminal device having a shared area that can be operated from a remote terminal device connected via a communication line on a screen, a coordinate designation area for operating a pointing cursor displayed in the shared area, and display means A program for controlling the remote terminal device in a screen display system comprising the remote terminal device,
When a part of the shared area is enlarged and displayed on the entire shared area, the pointing cursor displayed on the display unit of the remote terminal device corresponding to the pointing cursor displayed on the shared area is expanded. A program for causing a computer to execute a remote terminal cursor control step for performing control so as not to exit an enlarged display area displayed on the display unit corresponding to a part of the displayed shared area.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007139402A JP2008293361A (en) | 2007-05-25 | 2007-05-25 | Screen display system, control method therefor, program, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007139402A JP2008293361A (en) | 2007-05-25 | 2007-05-25 | Screen display system, control method therefor, program, and storage medium |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008293361A true JP2008293361A (en) | 2008-12-04 |
Family
ID=40168006
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007139402A Pending JP2008293361A (en) | 2007-05-25 | 2007-05-25 | Screen display system, control method therefor, program, and storage medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008293361A (en) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014076215A (en) * | 2012-10-11 | 2014-05-01 | Toshiba Corp | Medical work support system and operation gown |
JP2014511522A (en) * | 2011-02-04 | 2014-05-15 | クゥアルコム・インコーポレイテッド | User input device for wireless back channel |
US8964783B2 (en) | 2011-01-21 | 2015-02-24 | Qualcomm Incorporated | User input back channel for wireless displays |
US9065876B2 (en) | 2011-01-21 | 2015-06-23 | Qualcomm Incorporated | User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays |
US9198084B2 (en) | 2006-05-26 | 2015-11-24 | Qualcomm Incorporated | Wireless architecture for a traditional wire-based protocol |
US9264248B2 (en) | 2009-07-02 | 2016-02-16 | Qualcomm Incorporated | System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment |
US9398089B2 (en) | 2008-12-11 | 2016-07-19 | Qualcomm Incorporated | Dynamic resource sharing among multiple wireless devices |
US9413803B2 (en) | 2011-01-21 | 2016-08-09 | Qualcomm Incorporated | User input back channel for wireless displays |
US9503771B2 (en) | 2011-02-04 | 2016-11-22 | Qualcomm Incorporated | Low latency wireless display for graphics |
US9525998B2 (en) | 2012-01-06 | 2016-12-20 | Qualcomm Incorporated | Wireless display with multiscreen service |
US9582238B2 (en) | 2009-12-14 | 2017-02-28 | Qualcomm Incorporated | Decomposed multi-stream (DMS) techniques for video display systems |
US9582239B2 (en) | 2011-01-21 | 2017-02-28 | Qualcomm Incorporated | User input back channel for wireless displays |
US9787725B2 (en) | 2011-01-21 | 2017-10-10 | Qualcomm Incorporated | User input back channel for wireless displays |
US10108386B2 (en) | 2011-02-04 | 2018-10-23 | Qualcomm Incorporated | Content provisioning for wireless back channel |
US10135900B2 (en) | 2011-01-21 | 2018-11-20 | Qualcomm Incorporated | User input back channel for wireless displays |
CN115079888A (en) * | 2021-03-10 | 2022-09-20 | 北京有竹居网络技术有限公司 | Control method and device of display equipment, terminal and storage medium |
-
2007
- 2007-05-25 JP JP2007139402A patent/JP2008293361A/en active Pending
Cited By (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9198084B2 (en) | 2006-05-26 | 2015-11-24 | Qualcomm Incorporated | Wireless architecture for a traditional wire-based protocol |
US9398089B2 (en) | 2008-12-11 | 2016-07-19 | Qualcomm Incorporated | Dynamic resource sharing among multiple wireless devices |
US9264248B2 (en) | 2009-07-02 | 2016-02-16 | Qualcomm Incorporated | System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment |
US9582238B2 (en) | 2009-12-14 | 2017-02-28 | Qualcomm Incorporated | Decomposed multi-stream (DMS) techniques for video display systems |
US9582239B2 (en) | 2011-01-21 | 2017-02-28 | Qualcomm Incorporated | User input back channel for wireless displays |
US10911498B2 (en) | 2011-01-21 | 2021-02-02 | Qualcomm Incorporated | User input back channel for wireless displays |
US8964783B2 (en) | 2011-01-21 | 2015-02-24 | Qualcomm Incorporated | User input back channel for wireless displays |
US9065876B2 (en) | 2011-01-21 | 2015-06-23 | Qualcomm Incorporated | User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays |
US10382494B2 (en) | 2011-01-21 | 2019-08-13 | Qualcomm Incorporated | User input back channel for wireless displays |
US9413803B2 (en) | 2011-01-21 | 2016-08-09 | Qualcomm Incorporated | User input back channel for wireless displays |
US10135900B2 (en) | 2011-01-21 | 2018-11-20 | Qualcomm Incorporated | User input back channel for wireless displays |
US9787725B2 (en) | 2011-01-21 | 2017-10-10 | Qualcomm Incorporated | User input back channel for wireless displays |
US10108386B2 (en) | 2011-02-04 | 2018-10-23 | Qualcomm Incorporated | Content provisioning for wireless back channel |
US9723359B2 (en) | 2011-02-04 | 2017-08-01 | Qualcomm Incorporated | Low latency wireless display for graphics |
US9503771B2 (en) | 2011-02-04 | 2016-11-22 | Qualcomm Incorporated | Low latency wireless display for graphics |
JP2016001483A (en) * | 2011-02-04 | 2016-01-07 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | User input device for wireless back channel |
JP2014511522A (en) * | 2011-02-04 | 2014-05-15 | クゥアルコム・インコーポレイテッド | User input device for wireless back channel |
US9525998B2 (en) | 2012-01-06 | 2016-12-20 | Qualcomm Incorporated | Wireless display with multiscreen service |
JP2014076215A (en) * | 2012-10-11 | 2014-05-01 | Toshiba Corp | Medical work support system and operation gown |
US11116261B2 (en) | 2012-10-11 | 2021-09-14 | Canon Medical Systems Corporation | Medical work support system, surgical clothing, and medical apparatus |
CN115079888A (en) * | 2021-03-10 | 2022-09-20 | 北京有竹居网络技术有限公司 | Control method and device of display equipment, terminal and storage medium |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2008293361A (en) | Screen display system, control method therefor, program, and storage medium | |
JP4035497B2 (en) | Image display system, image display apparatus, image display method, and program | |
JP4389090B2 (en) | Information display device | |
JP6364893B2 (en) | Terminal device, electronic whiteboard system, electronic whiteboard input support method, and program | |
AU2006225172B2 (en) | Electronic conference system, electronic conference support method, electronic conference support device, and conference server | |
KR100805871B1 (en) | Electronic conference control device, electronic conference assistance method, and storage medium | |
JP4500845B2 (en) | Information display device, information display method, program, and recording medium | |
KR20120105371A (en) | Information processing apparatus and control method therefor | |
KR20150032066A (en) | Method for screen mirroring, and source device thereof | |
JP5832257B2 (en) | Information processing apparatus, display control method, and program | |
JP7042622B2 (en) | Image processing device, image processing system, image processing method, and program | |
JP2017083960A (en) | Information processing device, control method, and program | |
JP2005149279A (en) | Information processor and program | |
EP3662357B1 (en) | Display apparatus for providing preview ui and method of controlling display apparatus | |
JP2007304333A (en) | Computer, editing method, program and recording medium | |
JP2007066081A (en) | Electronic conference device, and electronic conference device control program | |
JP6607243B2 (en) | Information processing apparatus, information processing method, and program | |
JP6209868B2 (en) | Information terminal, information processing program, information processing system, and information processing method | |
JP2009188942A (en) | Device and method for displaying image, and program | |
JP4900955B2 (en) | Remote operation system, control method and program | |
JP2008118317A (en) | Projection device | |
JP2019139332A (en) | Information processor, information processing method and information processing program | |
JP2006139679A (en) | Terminal operation device and method, storage medium, and program | |
JP6128097B2 (en) | Information processing apparatus, control method, and program | |
JP2018133108A (en) | Electronic terminal and method for controlling the same, and program |