JP2011018290A - Screen sharing system and data transfer method - Google Patents

Screen sharing system and data transfer method Download PDF

Info

Publication number
JP2011018290A
JP2011018290A JP2009164110A JP2009164110A JP2011018290A JP 2011018290 A JP2011018290 A JP 2011018290A JP 2009164110 A JP2009164110 A JP 2009164110A JP 2009164110 A JP2009164110 A JP 2009164110A JP 2011018290 A JP2011018290 A JP 2011018290A
Authority
JP
Japan
Prior art keywords
data
server device
client device
screen
transferred
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009164110A
Other languages
Japanese (ja)
Other versions
JP2011018290A5 (en
JP5519968B2 (en
Inventor
Kisho Sato
紀章 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2009164110A priority Critical patent/JP5519968B2/en
Publication of JP2011018290A publication Critical patent/JP2011018290A/en
Publication of JP2011018290A5 publication Critical patent/JP2011018290A5/ja
Application granted granted Critical
Publication of JP5519968B2 publication Critical patent/JP5519968B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To transfer data between memory spaces of separate information processing apparatuses by user's operation on a sharing area of a screen sharing system.SOLUTION: The screen sharing system includes on a client's screen, a sharing area for displaying partial screen information of a server and makes the server reproduce input event information generated in the sharing area to remotely control the server from the client. In the system, the client detects a data transfer instruction to the sharing area, requests the server to transfer data, receives the data transferred from the server, and develops the received data in a client's memory space. When receiving the data transfer request from the client, the server determines which is transferred, UI data for displaying an operating state or real data for ending the operation. Then, the server converts data to be transferred present in the memory space of the server to a transferable state and transmits the converted data to the client.

Description

本発明は、複数の情報処理装置の間で画面を共有する画面共有システム及びデータ転送方法に関する。   The present invention relates to a screen sharing system and a data transfer method for sharing a screen among a plurality of information processing apparatuses.

近年、様々な場面において、複数の情報処理装置で画面を共有する画面共有システムが利用されている。この画面共有システムは、以下のような場合に利用されている。
・遠隔地にある情報処理装置を遠隔操作する場合
・会議において、会議室に持ち込んだノートパソコンなどの情報処理装置の画面をネットワークを介して会議室に設置された大型ディスプレイに表示する場合
また、複数の情報処理装置での画面共有に加えて、ユーザがクライアント情報処理装置の共有画面に対して操作を行うことで、異なる情報処理装置のメモリ空間の間でファイルを転送するものもある(例えば、特許文献1参照)。
In recent years, screen sharing systems that share a screen among a plurality of information processing apparatuses have been used in various scenes. This screen sharing system is used in the following cases.
-When remotely operating an information processing device in a remote location-When displaying the screen of an information processing device such as a laptop computer brought into the conference room on a large display installed in the conference room via a network In addition to screen sharing among a plurality of information processing devices, there is also a method in which a user operates a shared screen of a client information processing device to transfer a file between memory spaces of different information processing devices (for example, , See Patent Document 1).

特開2006−172193号公報JP 2006-172193 A

しかしながら、上述の画面共有システムでは、共有画面をまたぐ操作を行う度にデータ転送が発生する、という問題が存在する。   However, the above-described screen sharing system has a problem that data transfer occurs every time an operation across the shared screen is performed.

この問題により、ユーザがデータサイズの大きな画像や映像を転送する操作を行う場合、操作のもたつきを感じていた。   Due to this problem, when a user performs an operation of transferring an image or video having a large data size, the user feels that the operation has become sluggish.

本発明は、画面共有システムが操作のために使用するUIデータの転送と、実データの転送とを分離することで、ユーザの共有画面操作に対する操作感を改善することを目的とする。   It is an object of the present invention to improve a user's operational feeling with respect to a shared screen operation by separating the transfer of UI data used for operation by the screen sharing system and the transfer of actual data.

本発明は、ネットワークを介してクライアント装置とサーバ装置とが接続され、前記サーバ装置が少なくとも一部の画面情報をクライアント装置に転送し、前記クライアント装置が転送された画面情報を画面上に共有エリアとして表示し、前記共有エリアに対して発生した入力イベント情報を前記サーバ装置に転送し、前記サーバ装置が転送された入力イベント情報を再生することにより、前記クライアント装置から前記サーバ装置のリモート操作を行う画面共有システムであって、
前記クライアント装置は、
前記共有エリアからのデータ転送の指示を検出する検出手段と、
前記サーバ装置にデータ転送を要求する要求手段と、
前記サーバ装置から転送されたデータを受信する受信手段と、
前記受信手段で受信したデータをクライアント装置のメモリ空間に展開する展開手段とを備え、
前記サーバ装置は、
前記クライアント装置からデータ転送の要求を受信すると、操作中の状態を表示するためのUIデータ又は操作を終了するための実データの何れを転送するかを判定する判定手段と、
前記サーバ装置のメモリ空間にある転送すべきデータを転送可能な状態に変換する変換手段と、
前記変換手段で変換したデータを前記クライアント装置に送信する送信手段とを備えることを特徴とする。
According to the present invention, a client device and a server device are connected via a network, the server device transfers at least part of screen information to the client device, and the client device transfers the transferred screen information to a shared area on the screen. And the event information generated for the shared area is transferred to the server device, and the server device reproduces the transferred input event information, thereby enabling remote operation of the server device from the client device. A screen sharing system to perform,
The client device is
Detecting means for detecting an instruction of data transfer from the shared area;
Request means for requesting data transfer to the server device;
Receiving means for receiving data transferred from the server device;
Expanding means for expanding the data received by the receiving means into the memory space of the client device;
The server device
When receiving a data transfer request from the client device, determination means for determining which of UI data for displaying a status during operation or actual data for ending the operation;
Conversion means for converting the data to be transferred in the memory space of the server device into a transferable state;
Transmission means for transmitting the data converted by the conversion means to the client device.

本発明によれば、画面共有システムが操作のために使用するUIデータの転送と、実データの転送とを分離することで、ユーザの共有画面操作に対する操作感を改善することができる。   According to the present invention, it is possible to improve the user's operational feeling with respect to the shared screen operation by separating the transfer of UI data used for operation by the screen sharing system and the transfer of actual data.

本実施形態による画面共有システムのネットワーク構成を示す図である。It is a figure which shows the network structure of the screen sharing system by this embodiment. 本実施形態による画面共有システムを構成するクライアント情報処理装置及びサーバ情報処理装置のハードウェア構成を示す概略図である。It is the schematic which shows the hardware constitutions of the client information processing apparatus and server information processing apparatus which comprise the screen sharing system by this embodiment. 本実施形態による情報処理装置の機能構成を示す概略図である。It is the schematic which shows the function structure of the information processing apparatus by this embodiment. クライアント情報処理装置101でのデータ転送処理を示すフローチャートである。3 is a flowchart showing data transfer processing in a client information processing apparatus 101. 画面共有機能により画面共有されたクライアント情報処理装置101の表示例を示す図である。It is a figure which shows the example of a display of the client information processing apparatus 101 screen-shared by the screen sharing function. 画面共有アプリケーションプログラム222が管理する操作画面管理テーブルを示す図である。It is a figure which shows the operation screen management table which the screen sharing application program 222 manages. サーバ情報処理装置102、103でのデータ転送処理を示すフローチャートである。3 is a flowchart showing data transfer processing in server information processing apparatuses 102 and 103; 図7のステップS704及びステップS707での転送データ変換処理の詳細を示すフローチャートである。It is a flowchart which shows the detail of the transfer data conversion process in FIG.7 S704 and step S707. クライアント情報処理装置101とサーバ情報処理装置102、103の画面表示例を示す図である。3 is a diagram illustrating a screen display example of a client information processing apparatus 101 and server information processing apparatuses 102 and 103. FIG. 階層的な画面共有システムを実現する一例を示す図である。It is a figure which shows an example which implement | achieves a hierarchical screen sharing system.

以下、図面を参照しながら発明を実施するための最良の形態について詳細に説明する。   The best mode for carrying out the invention will be described below in detail with reference to the drawings.

図1は、本実施形態による画面共有システムのネットワーク構成を示す図である。図1に示すように、画面共有システムは、それぞれ通信機能を備えている、クライアント情報処理装置101、サーバ情報処理装置102、サーバ情報処理装置103がネットワーク111に接続されているシステムである。   FIG. 1 is a diagram showing a network configuration of the screen sharing system according to the present embodiment. As shown in FIG. 1, the screen sharing system is a system in which a client information processing apparatus 101, a server information processing apparatus 102, and a server information processing apparatus 103 are connected to a network 111, each having a communication function.

図2は、本実施形態による画面共有システムを構成するクライアント情報処理装置及びサーバ情報処理装置のハードウェア構成を示す概略図である。尚、クライアント情報処理装置及びサーバ情報処理装置は共にパーソナルコンピュータなどのコンピュータシステムによって実現されるので、図2では情報処理装置201として説明する。   FIG. 2 is a schematic diagram illustrating a hardware configuration of the client information processing apparatus and the server information processing apparatus that configure the screen sharing system according to the present embodiment. Note that both the client information processing apparatus and the server information processing apparatus are realized by a computer system such as a personal computer, and therefore will be described as the information processing apparatus 201 in FIG.

情報処理装置201は、装置全体の制御を司るCPU211、ブートプログラムや固定的なデータなどを記憶しているROM212、メインメモリとして機能すると共にCPU211のワークエリアを提供するRAM213を備える。更に、情報処理装置201は、以下の構成を備える。   The information processing apparatus 201 includes a CPU 211 that controls the entire apparatus, a ROM 212 that stores a boot program and fixed data, and a RAM 213 that functions as a main memory and provides a work area for the CPU 211. Furthermore, the information processing apparatus 201 has the following configuration.

HDD214はハードディスク装置であり、オペレーティングシステム(OS)221、画面共有アプリケーションプログラム222、文書編集アプリケーションプログラム223などを格納している。VRAM215は表示しようとするイメージデータを展開するメモリであり、イメージデータなどを展開することで表示装置の一例であるディスプレイ231に表示させる。   An HDD 214 is a hard disk device, and stores an operating system (OS) 221, a screen sharing application program 222, a document editing application program 223, and the like. A VRAM 215 is a memory for developing image data to be displayed, and displays the image data on the display 231 which is an example of a display device by expanding the image data.

入力装置としてのキーボード232、マウス233、デジタイザ234は、キーボードコントローラ216、マウスコントローラ217、デジタイザコントローラ218にそれぞれ接続され、入力はCPU211に割込み信号として検出される。また、ネットワークインタフェース(I/F)219も設けられ、ネットワーク111に接続可能である。   The keyboard 232, mouse 233, and digitizer 234 as input devices are connected to the keyboard controller 216, mouse controller 217, and digitizer controller 218, respectively, and the input is detected as an interrupt signal by the CPU 211. A network interface (I / F) 219 is also provided and can be connected to the network 111.

以上の構成において、画面共有アプリケーションプログラム222及び文書編集アプリケーションプログラム223はキーボード232、マウス233、デジタイザ234からの特定の指示イベントに応じて起動される。この起動の際に、画面共有アプリケーションプログラム222及び文書編集アプリケーションプログラム223は、まずRAM213にロードされ、CPU211によって実行される。   In the above configuration, the screen sharing application program 222 and the document editing application program 223 are activated in response to specific instruction events from the keyboard 232, mouse 233, and digitizer 234. At the time of activation, the screen sharing application program 222 and the document editing application program 223 are first loaded into the RAM 213 and executed by the CPU 211.

尚、上述の画面共有アプリケーションプログラム222は、OS221に依存して連動するものでも良い。また、画面共有アプリケーションプログラム222は、後述する画面共有機能を実現するものである。   The screen sharing application program 222 described above may be linked depending on the OS 221. The screen sharing application program 222 realizes a screen sharing function described later.

図3は、本実施形態による情報処理装置の機能構成を示す概略図である。図3において、301は図2に示す情報処理装置201に相当する。302は図2に示すディスプレイ231に相当する表示装置である。303は図2に示すキーボード232、マウス233、デジタイザ234に相当する入力装置である。   FIG. 3 is a schematic diagram illustrating a functional configuration of the information processing apparatus according to the present embodiment. In FIG. 3, reference numeral 301 corresponds to the information processing apparatus 201 shown in FIG. Reference numeral 302 denotes a display device corresponding to the display 231 shown in FIG. Reference numeral 303 denotes an input device corresponding to the keyboard 232, mouse 233, and digitizer 234 shown in FIG.

情報処理装置301には、通信部311、データ制御部312、データ記憶部313、出力部314、入力部315が含まれる。通信部311はネットワーク111と接続し、他の情報処理装置などとデータを授受するための情報通信制御処理を行う。データ制御部312は画面共有やデータ転送などの処理を制御する。データ記憶部313は画面共有やデータ転送などで授受されるデータを記憶する。   The information processing apparatus 301 includes a communication unit 311, a data control unit 312, a data storage unit 313, an output unit 314, and an input unit 315. The communication unit 311 is connected to the network 111 and performs information communication control processing for exchanging data with other information processing apparatuses. The data control unit 312 controls processing such as screen sharing and data transfer. The data storage unit 313 stores data exchanged through screen sharing or data transfer.

出力部314は表示画面情報を液晶ディスプレイ、リアプロジェクションディスプレイなどに出力する。入力部315は入力装置303が検出した情報を入力し、データ制御部312に伝達する。   The output unit 314 outputs display screen information to a liquid crystal display, a rear projection display, or the like. The input unit 315 inputs information detected by the input device 303 and transmits the information to the data control unit 312.

次に、本実施形態による画面共有システムでのデータ転送について図4〜図9を用いて説明する。まず、クライアント情報処理装置101におけるデータ転送を、図4を用いて説明する。クライアント情報処理装置101の共有画面とローカル画面に対するドラッグ操作(ドラッグ&ドロップ)によるデータ転送を例にとって説明する。   Next, data transfer in the screen sharing system according to the present embodiment will be described with reference to FIGS. First, data transfer in the client information processing apparatus 101 will be described with reference to FIG. An example of data transfer by a drag operation (drag and drop) on the shared screen and the local screen of the client information processing apparatus 101 will be described.

ここでローカル画面とは、画面共有機能を使わずに、ローカル環境を表示している画面である。また、ドラッグ操作以外に、共有画面に対するクリップボードによるコピー指示&貼りつけ指示や転送指示によりデータ転送を行った場合も含まれることは言うまでもない。共有画面に対するコピー指示&貼りつけ指示や転送指示としては、以下のような場合である。   Here, the local screen is a screen displaying the local environment without using the screen sharing function. In addition to the drag operation, it goes without saying that a case where data transfer is performed by a copy instruction & paste instruction or transfer instruction by a clipboard on the shared screen is also included. The copy instruction & paste instruction and the transfer instruction for the shared screen are as follows.

ファイルやアプリケーションに含まれるオブジェクトなどを選択し表示されたメニューを使って指示する場合、或いはファイルやアプリケーションに含まれるオブジェクトなどをダブルクリックすることで指示する場合などである。   For example, when an object included in a file or application is selected and instructed using a displayed menu, or an object included in the file or application is instructed by double-clicking.

図4は、クライアント情報処理装置101でのデータ転送処理を示すフローチャートである。まず、サーバ情報処理装置102、103とクライアント情報処理装置101とで画面共有機能が開始されており、クライアント情報処理装置101はサーバ情報処理装置102、103と画面共有している。この時点におけるクライアント情報処理装置101の表示例を図5に示す。   FIG. 4 is a flowchart showing data transfer processing in the client information processing apparatus 101. First, a screen sharing function is started between the server information processing apparatuses 102 and 103 and the client information processing apparatus 101, and the client information processing apparatus 101 shares a screen with the server information processing apparatuses 102 and 103. A display example of the client information processing apparatus 101 at this time is shown in FIG.

図5において、501はクライアント情報処理装置101の表示画面例であり、502はサーバ情報処理装置102の表示画面例であり、503はサーバ情報処理装置103の表示画面例である。ここで、クライアント情報処理装置101の表示画面例501を説明すると、511はクライアント情報処理装置101で起動した文書編集アプリケーションプログラム223の表示例である。   In FIG. 5, reference numeral 501 is a display screen example of the client information processing apparatus 101, 502 is a display screen example of the server information processing apparatus 102, and 503 is a display screen example of the server information processing apparatus 103. Here, a display screen example 501 of the client information processing apparatus 101 will be described. Reference numeral 511 denotes a display example of the document editing application program 223 activated by the client information processing apparatus 101.

また、512はクライアント情報処理装置101で起動した画面共有アプリケーションプログラム222の表示例(サーバ情報処理装置102の表示画面502を画面共有機能によりクライアント情報処理装置101に表示している)である。   Reference numeral 512 denotes a display example of the screen sharing application program 222 activated on the client information processing apparatus 101 (the display screen 502 of the server information processing apparatus 102 is displayed on the client information processing apparatus 101 by the screen sharing function).

更に、513はクライアント情報処理装置101で起動した画面共有アプリケーションプログラム222の表示例(サーバ情報処理装置103の表示画面503を画面共有機能によりクライアント情報処理装置101に表示している)である。   Reference numeral 513 denotes a display example of the screen sharing application program 222 activated on the client information processing apparatus 101 (the display screen 503 of the server information processing apparatus 103 is displayed on the client information processing apparatus 101 by the screen sharing function).

次に、クライアント情報処理装置101のデータ制御部312は、ステップS401で、マウス233やデジタイザ234などの入力装置303から入力部315を介して入力された座標情報を取得し、データ記憶部313に記憶する。次に、ステップS402で、クライアント情報処理装置101のデータ制御部312はデータ記憶部313に記憶した座標情報を元に、操作対象の情報処理装置Anを決定する。尚、Anは、現在の操作対象装置を表している。   Next, the data control unit 312 of the client information processing apparatus 101 acquires coordinate information input via the input unit 315 from the input device 303 such as the mouse 233 or the digitizer 234 in step S 401, and stores it in the data storage unit 313. Remember. Next, in step S402, the data control unit 312 of the client information processing apparatus 101 determines the information processing apparatus An to be operated based on the coordinate information stored in the data storage unit 313. An represents the current operation target device.

図6は、画面共有アプリケーションプログラム222が管理する操作画面管理テーブルを示す図である。この操作画面管理テーブルはデータ記憶部313に記憶されている。   FIG. 6 is a diagram showing an operation screen management table managed by the screen sharing application program 222. This operation screen management table is stored in the data storage unit 313.

ステップS402では、ステップS401でデータ記憶部313に記憶した座標情報を元に、操作画面管理テーブルから操作対象の情報処理装置を決定する。このとき、クライアント情報処理装置101のデータ制御部312は、操作画面管理テーブルに含まれない領域については“操作対象はクライアント情報処理装置101である”と判定する。   In step S402, an information processing apparatus to be operated is determined from the operation screen management table based on the coordinate information stored in the data storage unit 313 in step S401. At this time, the data control unit 312 of the client information processing apparatus 101 determines that the operation target is the client information processing apparatus 101 for an area that is not included in the operation screen management table.

次に、ステップS403で、クライアント情報処理装置101のデータ制御部312は、ステップS402で決定した操作対象の情報処理装置Anが操作対象装置フラグの情報処理装置Apと同じであるか否かを判定する。尚、Apは、操作対象装置フラグを表し、後述するステップS406で設定され、データ記憶部313に記憶されている。   Next, in step S403, the data control unit 312 of the client information processing apparatus 101 determines whether or not the operation target information processing apparatus An determined in step S402 is the same as the information processing apparatus Ap of the operation target apparatus flag. To do. Ap represents an operation target device flag, which is set in step S406 to be described later and stored in the data storage unit 313.

ステップS403で判定した結果、同じである場合はステップS407へ進み、異なる場合はステップS404へ進む。このステップS404では、クライアント情報処理装置101のデータ制御部312は、データ記憶部313に記憶している操作対象装置フラグの情報処理装置Apで設定されている情報処理装置に転送データを要求する。   If the result of determination in step S403 is the same, the process proceeds to step S407, and if different, the process proceeds to step S404. In step S404, the data control unit 312 of the client information processing apparatus 101 requests transfer data from the information processing apparatus set in the information processing apparatus Ap of the operation target apparatus flag stored in the data storage unit 313.

ここで、転送データとは、操作中の状態を示すUIデータと文字通り“転送するデータ”を指す実データのことである。UIデータには、操作後に提供される実データの種類や大きさ、位置などが含まれる。実データには、ファイルデータや任意のアプリケーションプログラムに含まれる画像データ、動画データ、テキストデータ、オブジェクトデータなどが含まれる。これら実データのサイズは大きく、転送に時間がかかるため、実データと比べて小さなUIデータを転送して操作中の状態を示すことに利用する。   Here, the transfer data is UI data indicating a state in operation and actual data indicating literally “data to be transferred”. The UI data includes the type, size, position, and the like of actual data provided after the operation. The actual data includes file data, image data, moving image data, text data, object data, etc. included in an arbitrary application program. Since the actual data is large in size and takes a long time to transfer, it is used to transfer the UI data smaller than the actual data to indicate the operating state.

情報処理装置Apは後述する図7に示すアルゴリズムに従ってUIデータ又は実データを転送データとしてクライアント情報処理装置101に提供する。   The information processing apparatus Ap provides UI data or actual data to the client information processing apparatus 101 as transfer data in accordance with an algorithm shown in FIG.

上述のステップS404で、操作対象装置フラグの情報処理装置Apがローカルである場合には、クライアント情報処理装置101のデータ制御部312はデータ記憶部313に記憶されている転送データを取得する。   If the information processing device Ap of the operation target device flag is local in step S404 described above, the data control unit 312 of the client information processing device 101 acquires transfer data stored in the data storage unit 313.

次に、ステップS405で、クライアント情報処理装置101のデータ制御部312は、操作対象の情報処理装置Anへ転送データを送信する。このステップS405で、操作対象の情報処理装置Anがローカルである場合には、クライアント情報処理装置101のデータ制御部312はステップS404で取得したデータを展開して、転送データとしてデータ記憶部313に記憶する。   In step S405, the data control unit 312 of the client information processing apparatus 101 transmits the transfer data to the operation target information processing apparatus An. If the information processing device An to be operated is local in step S405, the data control unit 312 of the client information processing device 101 expands the data acquired in step S404 and stores it in the data storage unit 313 as transfer data. Remember.

上述したステップS404、S405により、転送データが情報処理装置Anのメモリ空間から操作対象装置フラグの情報処理装置Apのメモリ空間に渡される。   Through steps S404 and S405 described above, the transfer data is transferred from the memory space of the information processing device An to the memory space of the information processing device Ap of the operation target device flag.

次に、ステップS406で、クライアント情報処理装置101のデータ制御部312は、操作対象装置フラグの情報処理装置Apに操作対象の情報処理装置Anを設定し、データ記憶部313に記憶する。   Next, in step S <b> 406, the data control unit 312 of the client information processing device 101 sets the operation target information processing device An to the information processing device Ap of the operation target device flag, and stores it in the data storage unit 313.

次に、ステップS407で、クライアント情報処理装置101のデータ制御部312は、データ記憶部313に記憶している操作対象情報処理装置Anがローカル(この場合、クライアント情報処理装置101である)であるか否かを判定する。操作対象の情報処理装置Anがローカルである場合はステップS409へ進み、操作対象の情報処理装置Anがローカルでない場合はステップS408へ進む。   Next, in step S407, the data control unit 312 of the client information processing apparatus 101 indicates that the operation target information processing apparatus An stored in the data storage unit 313 is local (in this case, the client information processing apparatus 101). It is determined whether or not. If the operation target information processing apparatus An is local, the process proceeds to step S409. If the operation target information processing apparatus An is not local, the process proceeds to step S408.

このステップS408では、クライアント情報処理装置101のデータ制御部312は、ステップS401でデータ記憶部313に記憶した入力情報を操作対象の情報処理装置Anに送信して、ステップS401に戻る。   In step S408, the data control unit 312 of the client information processing apparatus 101 transmits the input information stored in the data storage unit 313 in step S401 to the operation target information processing apparatus An, and the process returns to step S401.

一方、ステップS409では、クライアント情報処理装置101のデータ制御部312は、ローカルの操作を継続する。次に、ステップS410で、クライアント情報処理装置101のデータ制御部312は、ユーザが操作を終了するか否か判定する。ここで、操作を終了する場合はこの処理を終了する。また、操作を終了しない場合はステップS401に戻る。   On the other hand, in step S409, the data control unit 312 of the client information processing apparatus 101 continues the local operation. Next, in step S410, the data control unit 312 of the client information processing apparatus 101 determines whether or not the user ends the operation. Here, when the operation is finished, this process is finished. If the operation is not terminated, the process returns to step S401.

尚、ステップS404、S405で転送データを要求、送信した後、ユーザがドロップ操作やペースト操作を行うと、転送データが操作対象のアプリケーションやファイルシステムなどに渡される。即ち、ユーザが画面共有アプリケーションプログラム222の表示画面に対してドロップ操作や貼り付け操作を行うと、転送データはサーバ情報処理装置で起動している任意のアプリケーションやファイルシステムなどに渡される。ここで、表示画面は、サーバ情報処理装置の表示画面を画面共有機能によりクライアント情報処理装置に表示したものである。   If the user performs a drop operation or a paste operation after requesting and transmitting the transfer data in steps S404 and S405, the transfer data is transferred to the application or file system to be operated. That is, when the user performs a drop operation or a paste operation on the display screen of the screen sharing application program 222, the transfer data is passed to any application or file system running on the server information processing apparatus. Here, the display screen is obtained by displaying the display screen of the server information processing apparatus on the client information processing apparatus using the screen sharing function.

上述した処理により、図5に示す「A」、「B」、「C」のデータ転送が実現される。ここで、「A」、「B」、「C]は以下のようなデータ転送である。
「A」:クライアント情報処理装置101のメモリ空間からサーバ情報処理装置103のメモリ空間へのデータ転送
「B」:サーバ情報処理装置103のメモリ空間からクライアント情報処理装置101のメモリ空間へのデータ転送
「C」:サーバ情報処理装置103のメモリ空間からサーバ情報処理装置102のメモリ空間へのデータ転送
尚、本実施形態では、「B」のデータ転送を具体例として説明しているが、操作対象の情報処理装置An及び操作対象装置フラグの情報処理装置Apを、「A」や「C」に対応する情報処理装置に読み替えることができる。
With the processing described above, data transfer of “A”, “B”, and “C” shown in FIG. 5 is realized. Here, “A”, “B”, and “C” are data transfer as follows.
“A”: Data transfer from the memory space of the client information processing apparatus 101 to the memory space of the server information processing apparatus 103 “B”: Data transfer from the memory space of the server information processing apparatus 103 to the memory space of the client information processing apparatus 101 “C”: Data transfer from the memory space of the server information processing apparatus 103 to the memory space of the server information processing apparatus 102 In this embodiment, the data transfer of “B” is described as a specific example. Information processing device An and the information processing device Ap of the operation target device flag can be read as information processing devices corresponding to “A” and “C”.

次に、サーバ情報処理装置102、103におけるデータ転送を、図7、図8を用いて説明する。   Next, data transfer in the server information processing apparatuses 102 and 103 will be described with reference to FIGS.

図7は、サーバ情報処理装置102、103でのデータ転送処理を示すフローチャートである。まず、ステップS701で、サーバ情報処理装置102、103のデータ制御部312は、クライアント情報処理装置101から送信されたデータを受信し、データ記憶部313に記憶する。このデータ受信処理は、図4に示すステップS404、S405、S408でクライアント情報処理装置101が行ったサーバ情報処理装置102、103へのデータ送信に対応する処理である。     FIG. 7 is a flowchart showing data transfer processing in the server information processing apparatuses 102 and 103. First, in step S <b> 701, the data control unit 312 of the server information processing apparatuses 102 and 103 receives the data transmitted from the client information processing apparatus 101 and stores it in the data storage unit 313. This data reception processing is processing corresponding to the data transmission to the server information processing apparatuses 102 and 103 performed by the client information processing apparatus 101 in steps S404, S405, and S408 shown in FIG.

次に、ステップS702で、サーバ情報処理装置102、103のデータ制御部312は、ステップS701で受信したデータを解析し、転送データが要求されているか否かを判定する。判定の結果、転送データが要求されている場合は、ステップS703へ進み、転送データが要求されていない場合は、ステップS710へ進む。   In step S702, the data control unit 312 of the server information processing apparatuses 102 and 103 analyzes the data received in step S701 and determines whether transfer data is requested. As a result of the determination, if transfer data is requested, the process proceeds to step S703. If transfer data is not requested, the process proceeds to step S710.

ステップS703では、操作状態がドラッグ中であるか否かを判定する。判定の結果、ドラッグ中である場合は、ステップS704へ進み、ドラッグ中でない場合は、ステップS06へ進む。このステップS704では、サーバ情報処理装置102、103のデータ制御部312は、転送データ取得処理で取得したUIデータを転送可能な状態に変換する。この処理は図8を用いて更に後述する
次に、ステップS705で、サーバ情報処理装置102、103のデータ制御部312は、ステップS704で変換されたUIデータを要求された転送先に送信し、ステップS701に戻る。ステップS706では、操作対象装置フラグApがローカルであるか否かを判定する。判定の結果、操作対象装置フラグApがローカルである場合は、ステップS707で転送データ取得処理を実施して実データを転送可能な状態に変換する。ステップS708で実データを要求された転送先に送信し、ステップS701に戻る。
In step S703, it is determined whether the operation state is dragging. If the result of determination is that dragging is in progress, processing proceeds to step S704. If not, processing proceeds to step S06. In step S704, the data control unit 312 of the server information processing apparatuses 102 and 103 converts the UI data acquired in the transfer data acquisition process into a transferable state. This processing will be described later with reference to FIG. 8. Next, in step S705, the data control unit 312 of the server information processing apparatuses 102 and 103 transmits the UI data converted in step S704 to the requested transfer destination. The process returns to step S701. In step S706, it is determined whether or not the operation target device flag Ap is local. As a result of the determination, if the operation target device flag Ap is local, a transfer data acquisition process is performed in step S707 to convert the actual data into a transferable state. In step S708, the actual data is transmitted to the requested transfer destination, and the process returns to step S701.

操作対象装置フラグApがローカルではない場合は、ステップS709で操作対象装置に対して実データを要求された転送先に送信するよう転送データの要求を行い、ステップS701に戻る。このステップS709により、実データは遠隔操作の被操作端末から操作端末に対して最短経路で転送される。   If the operation target device flag Ap is not local, in step S709, the operation target device is requested to transfer data to transmit the actual data to the requested transfer destination, and the process returns to step S701. By this step S709, the actual data is transferred from the remotely operated terminal to the operation terminal through the shortest path.

一方、ステップS710で、サーバ情報処理装置102、103のデータ制御部312は、ステップS701でデータ記憶部313に記憶したデータがUIデータであるか否かを判定する。判定の結果、データがUIデータである場合は、ステップS711へ進み、データがUIデータでない場合は、ステップS712へ進む。   On the other hand, in step S710, the data control unit 312 of the server information processing apparatuses 102 and 103 determines whether the data stored in the data storage unit 313 in step S701 is UI data. As a result of the determination, if the data is UI data, the process proceeds to step S711, and if the data is not UI data, the process proceeds to step S712.

ステップS711では、サーバ情報処理装置102、103のデータ制御部312は、ステップS701でデータ記憶部313に記憶したデータを展開し、UIデータとしてデータ記憶部313に記憶し、ステップS701に戻る。ステップS712では、サーバ情報処理装置102、103のデータ制御部312は、ステップS701でデータ記憶部313に記憶したデータが実データであるか否かを判定する。判定の結果、データが実データである場合は、ステップS713へ進み、データが実データでない場合は、ステップS714へ進む。   In step S711, the data control unit 312 of the server information processing apparatuses 102 and 103 expands the data stored in the data storage unit 313 in step S701, stores the data as UI data in the data storage unit 313, and returns to step S701. In step S712, the data control unit 312 of the server information processing apparatuses 102 and 103 determines whether the data stored in the data storage unit 313 in step S701 is actual data. As a result of the determination, if the data is actual data, the process proceeds to step S713. If the data is not actual data, the process proceeds to step S714.

ステップS713では、サーバ情報処理装置102、103のデータ制御部312は、ステップS701でデータ記憶部313に記憶したデータを展開し、実データとしてデータ記憶部313に記憶し、ステップS701に戻る。   In step S713, the data control unit 312 of the server information processing apparatuses 102 and 103 expands the data stored in the data storage unit 313 in step S701, stores the data as actual data in the data storage unit 313, and returns to step S701.

一方、ステップS714で、サーバ情報処理装置102、103のデータ制御部312は、ステップS701でデータ記憶部313に記憶したデータを使い、ローカル(サーバ情報処理装置)での操作として、ステップS402〜S409での処理を行う。例えば、ステップS701で、データ記憶部313に記憶したデータに基づいてローカルのマウスカーソルを移動させる。   On the other hand, in step S714, the data control unit 312 of the server information processing apparatuses 102 and 103 uses the data stored in the data storage unit 313 in step S701 and performs operations in the local (server information processing apparatus) as steps S402 to S409. Perform the process in. For example, in step S701, the local mouse cursor is moved based on the data stored in the data storage unit 313.

次に、ステップS715で、サーバ情報処理装置102、103のデータ制御部312は、ユーザが操作を終了するか否かを判定する。ここで、操作を終了する場合は、処理を終了し、操作を終了しない場合は、ステップS701に戻る。   Next, in step S715, the data control unit 312 of the server information processing apparatuses 102 and 103 determines whether the user ends the operation. If the operation is to be ended, the process is ended. If the operation is not to be ended, the process returns to step S701.

尚、本発明に係る画面共有システムのネットワーク構成は、上述したような構成だけでなく、以下のような構成でも良いことは言うまでもない。
・サーバ情報処理装置:複数台、クライアント情報処理装置:1台
・サーバ情報処理装置:1台、クライアント情報処理装置:1台
・サーバ情報処理装置:1台、クライアント情報処理装置:複数台
・サーバ情報処理装置:複数台、クライアント情報処理装置:複数台
次に、図7に示すステップS704及びステップS707での転送データ取得処理を、図8を用いて説明する。ここでは、図9に示す「C]のように、サーバ情報処理装置103からサーバ情報処理装置102へのデータ転送を例に挙げて説明する。
Needless to say, the network configuration of the screen sharing system according to the present invention is not limited to the configuration described above, but may be the following configuration.
・ Server information processing device: multiple units, client information processing device: 1 unit ・ Server information processing device: 1 unit, client information processing device: 1 unit ・ Server information processing unit: 1 unit, client information processing device: multiple units ・ Server Information processing apparatus: plural units, client information processing apparatus: plural units Next, transfer data acquisition processing in step S704 and step S707 shown in FIG. 7 will be described with reference to FIG. Here, as illustrated by “C” in FIG. 9, data transfer from the server information processing apparatus 103 to the server information processing apparatus 102 will be described as an example.

図8は、図7のステップS704及びステップS707での転送データ変換処理の詳細を示すフローチャートである。図9は、クライアント情報処理装置101とサーバ情報処理装置102、103の画面表示例を示す図である。図9に示す501〜522は図5と同様である。   FIG. 8 is a flowchart showing details of the transfer data conversion processing in steps S704 and S707 in FIG. FIG. 9 is a diagram illustrating a screen display example of the client information processing apparatus 101 and the server information processing apparatuses 102 and 103. 9 are the same as those in FIG.

図9において、901はクライアント情報処理装置101のマウス233のカーソルである。ここで、操作対象装置フラグApに設定されている情報処理装置はサーバ情報処理装置103、クライアント情報処理装置101のデータ制御部312が判定した操作対象の情報処理装置Anはサーバ情報処理装置102である。902はサーバ情報処理装置103のマウス233のカーソルであり、図9に示す位置に存在する。   In FIG. 9, reference numeral 901 denotes a cursor of the mouse 233 of the client information processing apparatus 101. Here, the information processing apparatus set in the operation target apparatus flag Ap is the server information processing apparatus 103, and the operation target information processing apparatus An determined by the data control unit 312 of the client information processing apparatus 101 is the server information processing apparatus 102. is there. A cursor 902 of the mouse 233 of the server information processing apparatus 103 is present at the position shown in FIG.

まず、ステップS801で、サーバ情報処理装置103のデータ制御部312は、図9に示すカーソル902の下にウィンドウ911を生成する。次に、ステップS802で、サーバ情報処理装置103のデータ制御部312は、マウスイベントを発生する。次に、ステップS803で、サーバ情報処理装置103のデータ制御部312は、ステップS802で発生したマウスイベントをウィンドウ911で処理する。この処理により、サーバ情報処理装置103のデータ記憶部313に記憶している転送データを取得する。そして、ステップS804で、サーバ情報処理装置103のデータ制御部312は、ステップS803で取得した転送データを転送可能な状態に変換し、この処理を終了する。   First, in step S801, the data control unit 312 of the server information processing apparatus 103 generates a window 911 under the cursor 902 shown in FIG. Next, in step S802, the data control unit 312 of the server information processing apparatus 103 generates a mouse event. Next, in step S803, the data control unit 312 of the server information processing apparatus 103 processes the mouse event generated in step S802 in the window 911. Through this processing, transfer data stored in the data storage unit 313 of the server information processing apparatus 103 is acquired. In step S804, the data control unit 312 of the server information processing apparatus 103 converts the transfer data acquired in step S803 into a transferable state, and ends this process.

転送データとして取得するデータがUIデータであるか実データであるかは、ステップS703によって判定される。ステップS704では、実データを取得した後、実データの情報に基づいてUIデータを作成して転送データとする。一方、ステップS707では、実データを転送データとする。   Whether the data acquired as the transfer data is UI data or actual data is determined in step S703. In step S704, after acquiring the actual data, UI data is created based on the information of the actual data and used as transfer data. On the other hand, in step S707, actual data is used as transfer data.

図5及び図9は、クライアント情報処理装置101とサーバ情報処理装置102が異なる装置とした例である。図2及び図3に示したように、クライアント情報処理装置101とサーバ情報処理装置102の構成に違いは無い。   5 and 9 are examples in which the client information processing apparatus 101 and the server information processing apparatus 102 are different apparatuses. As shown in FIGS. 2 and 3, there is no difference in the configuration of the client information processing apparatus 101 and the server information processing apparatus 102.

従って、図4に示したクライアント情報処理装置101でのデータ転送処理と、図7に示したサーバ情報処理装置102でのデータ転送処理の両方を備えることで、階層的な画面共有システムを実現することができる。   Therefore, a hierarchical screen sharing system is realized by providing both the data transfer process in the client information processing apparatus 101 shown in FIG. 4 and the data transfer process in the server information processing apparatus 102 shown in FIG. be able to.

ここで、階層的な画面共有システムを実現する一例を図10に示す。図10において、1001はクライアント情報処理装置101に対するサーバ情報処理装置102として機能すると共に、サーバ情報処理装置102に対するクライアント情報処理装置101として機能する。   Here, an example of realizing a hierarchical screen sharing system is shown in FIG. In FIG. 10, reference numeral 1001 functions as the server information processing apparatus 102 for the client information processing apparatus 101 and also functions as the client information processing apparatus 101 for the server information processing apparatus 102.

このように、ネットワークを介してサーバの少なくとも一部の画面情報をクライアントに転送し、転送された画面情報をクライアントの画面上に共有エリアとして表示する。そして、クライアントで共有エリアに対して発生した入力イベント情報をサーバに転送し、転送された入力イベント情報をサーバの入力イベント情報として再生する。   In this way, at least part of the screen information of the server is transferred to the client via the network, and the transferred screen information is displayed as a shared area on the client screen. Then, the input event information generated in the shared area by the client is transferred to the server, and the transferred input event information is reproduced as the input event information of the server.

従って、クライアントからサーバのリモート操作を行う画面共有システムで、ユーザがクライアント情報処理装置で共有画面に対して操作することにより、異なる情報処理装置のメモリ空間の間でデータを転送することができる。   Therefore, in a screen sharing system in which a server remotely operates from a client, data can be transferred between memory spaces of different information processing apparatuses when a user operates the shared screen on the client information processing apparatus.

尚、本実施形態では、異なる情報処理装置のメモリ空間の間で転送するデータとして、ファイルや任意のアプリケーションに含まれる画像データ、動画データ、テキストデータ、オブジェクトデータを取り上げた。しかし、本発明はそれ以外のデータも扱えることは言うまでもない。   In the present embodiment, image data, moving image data, text data, and object data included in a file or an arbitrary application are taken up as data transferred between memory spaces of different information processing apparatuses. However, it goes without saying that the present invention can also handle other data.

[他の実施形態]
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
[Other Embodiments]
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, or the like) of the system or apparatus reads the program. It is a process to be executed.

Claims (15)

ネットワークを介してクライアント装置とサーバ装置とが接続され、前記サーバ装置が少なくとも一部の画面情報をクライアント装置に転送し、前記クライアント装置が転送された画面情報を画面上に共有エリアとして表示し、前記共有エリアに対して発生した入力イベント情報を前記サーバ装置に転送し、前記サーバ装置が転送された入力イベント情報を再生することにより、前記クライアント装置から前記サーバ装置のリモート操作を行う画面共有システムであって、
前記クライアント装置は、
前記共有エリアからのデータ転送の指示を検出する検出手段と、
前記サーバ装置にデータ転送を要求する要求手段と、
前記サーバ装置から転送されたデータを受信する受信手段と、
前記受信手段で受信したデータをクライアント装置のメモリ空間に展開する展開手段とを備え、
前記サーバ装置は、
前記クライアント装置からデータ転送の要求を受信すると、操作中の状態を表示するためのUIデータ又は操作を終了するための実データの何れを転送するかを判定する判定手段と、
前記サーバ装置のメモリ空間にある転送すべきデータを転送可能な状態に変換する変換手段と、
前記変換手段で変換したデータを前記クライアント装置に送信する送信手段とを備えることを特徴とする画面共有システム。
A client device and a server device are connected via a network, the server device transfers at least part of screen information to the client device, and the client device displays the transferred screen information as a shared area on the screen, A screen sharing system for performing remote operation of the server device from the client device by transferring the input event information generated for the shared area to the server device and reproducing the transferred input event information. Because
The client device is
Detecting means for detecting an instruction of data transfer from the shared area;
Request means for requesting data transfer to the server device;
Receiving means for receiving data transferred from the server device;
Expanding means for expanding the data received by the receiving means into the memory space of the client device;
The server device
When receiving a data transfer request from the client device, determination means for determining which of UI data for displaying a status during operation or actual data for ending the operation;
Conversion means for converting the data to be transferred in the memory space of the server device into a transferable state;
A screen sharing system comprising: transmission means for transmitting data converted by the conversion means to the client device.
ネットワークを介してクライアント装置とサーバ装置とが接続され、前記サーバ装置が少なくとも一部の画面情報をクライアント装置に転送し、前記クライアント装置が転送された画面情報を画面上に共有エリアとして表示し、前記共有エリアに対して発生した入力イベント情報を前記サーバ装置に転送し、前記サーバ装置が転送された入力イベント情報を再生することにより、前記クライアント装置から前記サーバ装置のリモート操作を行う画面共有システムであって、
前記クライアント装置は、
前記共有エリアへのデータ転送の指示を検出する検出手段と、
操作中の状態を表示するためのUIデータ又は操作を終了するための実データの何れを転送するかを判定する判定手段と、
前記クライアント装置のメモリ空間にある転送すべきデータを転送可能な状態に変換する変換手段と、
前記変換手段で変換したデータを前記サーバ装置に送信する送信手段とを備え、
前記サーバ装置は、
前記クライアント装置から転送されたデータを受信する受信手段と、
前記受信手段で受信したデータを前記サーバ装置のメモリ空間に展開する展開手段とを備えることを特徴とする画面共有システム。
A client device and a server device are connected via a network, the server device transfers at least part of screen information to the client device, and the client device displays the transferred screen information as a shared area on the screen, A screen sharing system for performing remote operation of the server device from the client device by transferring the input event information generated for the shared area to the server device and reproducing the transferred input event information. Because
The client device is
Detecting means for detecting an instruction for data transfer to the shared area;
A determination means for determining which of UI data for displaying an operating state or actual data for ending an operation;
Conversion means for converting data to be transferred in the memory space of the client device into a transferable state;
Transmission means for transmitting the data converted by the conversion means to the server device,
The server device
Receiving means for receiving data transferred from the client device;
A screen sharing system comprising: expansion means for expanding data received by the reception means in a memory space of the server device.
ネットワークを介してクライアント装置とサーバ装置とが接続され、前記サーバ装置が少なくとも一部の画面情報をクライアント装置に転送し、前記クライアント装置が転送された画面情報を画面上に共有エリアとして表示し、前記共有エリアに対して発生した入力イベント情報を前記サーバ装置に転送し、前記サーバ装置が転送された入力イベント情報を再生することにより、前記クライアント装置から前記サーバ装置のリモート操作を行う画面共有システムであって、
前記クライアント装置は、
前記サーバ装置の画面を表示する共有エリアから他のサーバ装置の画面を表示する他の共有エリアへのデータ転送の指示を検出する検出手段と、
前記サーバ装置に他のサーバ装置へのデータ転送を要求する手段とを備え、
前記サーバ装置は、
前記クライアントからデータ転送の要求を受信すると、操作中の状態を表示するためのUIデータ又は操作を終了するための実データの何れを転送するかを判定する判定手段と、
前記サーバ装置のメモリ空間にある転送すべきデータを転送可能な状態に変換する変換手段と、
前記変換手段で変換したデータを他のサーバ装置に送信する送信手段と、
前記判定手段で実データの転送と判定した場合に、前記他のサーバ装置に対してデータ転送を要求する手段とを備え、
他のサーバ装置は、
前記サーバ装置から転送されたデータを受信する受信手段と、
前記受信手段で受信したデータを他のサーバ装置のメモリ空間に展開する展開手段とを備えることを特徴とする画面共有システム。
A client device and a server device are connected via a network, the server device transfers at least part of screen information to the client device, and the client device displays the transferred screen information as a shared area on the screen, A screen sharing system for performing remote operation of the server device from the client device by transferring the input event information generated for the shared area to the server device and reproducing the transferred input event information. Because
The client device is
Detecting means for detecting an instruction to transfer data from a shared area displaying the screen of the server device to another shared area displaying the screen of another server device;
Means for requesting the server device to transfer data to another server device,
The server device
A determination means for determining whether to transfer UI data for displaying a status during operation or actual data for ending an operation upon receiving a data transfer request from the client;
Conversion means for converting the data to be transferred in the memory space of the server device into a transferable state;
Transmitting means for transmitting the data converted by the converting means to another server device;
A means for requesting data transfer to the other server device when it is determined that the determination means transfers actual data;
Other server devices
Receiving means for receiving data transferred from the server device;
A screen sharing system comprising: expansion means for expanding data received by the reception means in a memory space of another server device.
前記検出手段は、前記共有エリアから、或いは前記共有エリアへのドラッグ操作が行われた場合に、前記データ転送の指示とみなし、
前記展開手段は、前記受信手段で受信したデータをメモリ空間に展開することを特徴とする請求項1乃至3の何れか1項に記載の画面共有システム。
The detection means considers the data transfer instruction when a drag operation is performed from or to the shared area,
4. The screen sharing system according to claim 1, wherein the expansion unit expands data received by the reception unit in a memory space. 5.
前記検出手段は、クリップボードへのコピーが行われた場合に、前記データ転送の指示とみなし、
前記展開手段は、前記受信手段で受信したデータをメモリ空間に展開することを特徴とする請求項1乃至3の何れか1項に記載の画面共有システム。
The detection means regards the data transfer instruction when copying to the clipboard is performed,
4. The screen sharing system according to claim 1, wherein the expansion unit expands data received by the reception unit in a memory space. 5.
前記検出手段は、オブジェクトに対するダブルクリックが行われた場合に、前記データ転送の指示とみなし、
前記展開手段は、前記受信手段で受信したデータをメモリ空間に展開することを特徴とする請求項1乃至3の何れか1項に記載の画面共有システム。
The detection means regards the data transfer instruction when a double-click is performed on an object,
4. The screen sharing system according to claim 1, wherein the expansion unit expands data received by the reception unit in a memory space. 5.
前記検出手段は、オブジェクトに対する選択の操作が行われた場合に、前記データ転送の指示とみなし、
前記展開手段は、前記受信手段で受信したデータをメモリ空間に展開することを特徴とする請求項1乃至3の何れか1項に記載の画面共有システム。
The detection means considers the data transfer instruction when a selection operation is performed on an object,
4. The screen sharing system according to claim 1, wherein the expansion unit expands data received by the reception unit in a memory space. 5.
前記変換手段は、前記クライアント装置からデータ転送の要求を受信すると、前記サーバ装置でイベントを発生し、そのイベントを処理することにより前記サーバ装置のメモリ空間にあるデータを取得することを特徴とする請求項1に記載の画面共有システム。   When the conversion unit receives a data transfer request from the client device, the conversion unit generates an event in the server device, and acquires the data in the memory space of the server device by processing the event. The screen sharing system according to claim 1. 前記変換手段は、前記クライアント装置からデータ転送の要求を受信すると、前記サーバ装置でイベントを発生し、そのイベントを処理することにより前記サーバ装置のメモリ空間にあるデータを取得することを特徴とする請求項3に記載の画面共有システム。   When the conversion unit receives a data transfer request from the client device, the conversion unit generates an event in the server device, and acquires the data in the memory space of the server device by processing the event. The screen sharing system according to claim 3. 前記データは、前記サーバ装置でカーソルの下にウィンドウを生成した後、イベントを発生し、生成したウィンドウで、発生したイベントを処理することにより取得されることを特徴とする請求項8又は9に記載の画面共有システム。   10. The data according to claim 8, wherein the data is acquired by generating an event after generating a window under the cursor in the server device, and processing the generated event in the generated window. The screen sharing system described. ネットワークを介してクライアント装置とサーバ装置とが接続され、前記サーバ装置が少なくとも一部の画面情報をクライアント装置に転送し、前記クライアント装置が転送された画面情報を画面上に共有エリアとして表示し、前記共有エリアに対して発生した入力イベント情報を前記サーバ装置に転送し、前記サーバ装置が転送された入力イベント情報を再生することにより、前記クライアント装置から前記サーバ装置のリモート操作を行う画面共有システムのデータ転送方法であって、
前記クライアント装置に、
前記共有エリアからのデータ転送の指示を検出する検出工程と、
前記サーバ装置にデータ転送を要求する要求工程と、
前記サーバ装置から転送されたデータを受信する受信工程と、
前記受信工程で受信したデータをクライアント装置のメモリ空間に展開する展開工程とを有し、
前記サーバ装置に、
前記クライアント装置からデータ転送の要求を受信すると、操作中の状態を表示するためのUIデータ又は操作を終了するための実データの何れを転送するかを判定する判定工程と、
前記サーバ装置のメモリ空間にある転送すべきデータを転送可能な状態に変換する変換工程と、
前記変換工程で変換したデータを前記クライアント装置に送信する送信工程とを有することを特徴とするデータ転送方法。
A client device and a server device are connected via a network, the server device transfers at least part of screen information to the client device, and the client device displays the transferred screen information as a shared area on the screen, A screen sharing system for performing remote operation of the server device from the client device by transferring the input event information generated for the shared area to the server device and reproducing the transferred input event information. Data transfer method,
In the client device,
A detection step of detecting an instruction for data transfer from the shared area;
A requesting step for requesting data transfer to the server device;
A receiving step for receiving data transferred from the server device;
Expanding the data received in the receiving step in the memory space of the client device,
In the server device,
When receiving a data transfer request from the client device, a determination step of determining which UI data for displaying a status during operation or actual data for ending the operation is transferred;
A conversion step of converting the data to be transferred in the memory space of the server device into a transferable state;
And a transmission step of transmitting the data converted in the conversion step to the client device.
ネットワークを介してクライアント装置とサーバ装置とが接続され、前記サーバ装置が少なくとも一部の画面情報をクライアント装置に転送し、前記クライアント装置が転送された画面情報を画面上に共有エリアとして表示し、前記共有エリアに対して発生した入力イベント情報を前記サーバ装置に転送し、前記サーバ装置が転送された入力イベント情報を再生することにより、前記クライアント装置から前記サーバ装置のリモート操作を行う画面共有システムのデータ転送方法であって、
前記クライアント装置に、
前記共有エリアへのデータ転送の指示を検出する検出工程と、
操作中の状態を表示するためのUIデータ又は操作を終了するための実データの何れを転送するかを判定する判定工程と、
前記クライアント装置のメモリ空間にある転送すべきデータを転送可能な状態に変換する変換工程と、
前記変換工程で変換したデータを前記サーバ装置に送信する送信工程とを有し、
前記サーバ装置に、
前記クライアント装置から転送されたデータを受信する受信工程と、
前記受信工程で受信したデータを前記サーバ装置のメモリ空間に展開する展開工程とを有することを特徴とするデータ転送方法。
A client device and a server device are connected via a network, the server device transfers at least part of screen information to the client device, and the client device displays the transferred screen information as a shared area on the screen, A screen sharing system for performing remote operation of the server device from the client device by transferring the input event information generated for the shared area to the server device and reproducing the transferred input event information. Data transfer method,
In the client device,
A detection step of detecting an instruction to transfer data to the shared area;
A determination step of determining which of UI data for displaying a status during operation or actual data for ending the operation;
A conversion step of converting data to be transferred in the memory space of the client device into a transferable state;
A transmission step of transmitting the data converted in the conversion step to the server device,
In the server device,
A receiving step of receiving data transferred from the client device;
A data transfer method comprising: a data expansion method for expanding the data received in the reception step into a memory space of the server device.
ネットワークを介してクライアント装置とサーバ装置とが接続され、前記サーバ装置が少なくとも一部の画面情報をクライアント装置に転送し、前記クライアント装置が転送された画面情報を画面上に共有エリアとして表示し、前記共有エリアに対して発生した入力イベント情報を前記サーバ装置に転送し、前記サーバ装置が転送された入力イベント情報を再生することにより、前記クライアント装置から前記サーバ装置のリモート操作を行う画面共有システムのデータ転送方法であって、
前記クライアント装置に、
前記サーバ装置の画面を表示する共有エリアから他のサーバ装置の画面を表示する他の共有エリアへのデータ転送の指示を検出する検出工程と、
前記サーバ装置に他のサーバ装置へのデータ転送を要求する工程とを有し、
前記サーバ装置に、
前記クライアントからデータ転送の要求を受信すると、操作中の状態を表示するためのUIデータ又は操作を終了するための実データの何れを転送するかを判定する判定工程と、
前記サーバ装置のメモリ空間にある転送すべきデータを転送可能な状態に変換する変換工程と、
前記変換工程で変換したデータを他のサーバ装置に送信する送信工程と、
前記判定手段で実データの転送と判定した場合に、前記他のサーバ装置に対してデータ転送を要求する手段とを備え、
他のサーバ装置に、
前記サーバ装置から転送されたデータを受信する受信工程と、
前記受信工程で受信したデータを他のサーバ装置のメモリ空間に展開する展開工程とを有することを特徴とするデータ転送方法。
A client device and a server device are connected via a network, the server device transfers at least part of screen information to the client device, and the client device displays the transferred screen information as a shared area on the screen, A screen sharing system for performing remote operation of the server device from the client device by transferring the input event information generated for the shared area to the server device and reproducing the transferred input event information. Data transfer method,
In the client device,
A detection step of detecting an instruction for data transfer from the shared area displaying the screen of the server device to another shared area displaying the screen of the other server device;
Requesting the server device to transfer data to another server device,
In the server device,
When receiving a data transfer request from the client, a determination step of determining which of UI data for displaying a status during operation or actual data for ending the operation;
A conversion step of converting the data to be transferred in the memory space of the server device into a transferable state;
A transmission step of transmitting the data converted in the conversion step to another server device;
A means for requesting data transfer to the other server device when it is determined that the determination means transfers actual data;
To other server devices,
A receiving step for receiving data transferred from the server device;
A data transfer method comprising: a data expansion step of expanding the data received in the reception step into a memory space of another server device.
コンピュータに、請求項11乃至13の何れか1項に記載のデータ転送方法の各工程を実行させるためのプログラム。   A program for causing a computer to execute each step of the data transfer method according to any one of claims 11 to 13. 請求項14に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。   The computer-readable recording medium which recorded the program of Claim 14.
JP2009164110A 2009-07-10 2009-07-10 Screen sharing system and data transfer method Active JP5519968B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009164110A JP5519968B2 (en) 2009-07-10 2009-07-10 Screen sharing system and data transfer method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009164110A JP5519968B2 (en) 2009-07-10 2009-07-10 Screen sharing system and data transfer method

Publications (3)

Publication Number Publication Date
JP2011018290A true JP2011018290A (en) 2011-01-27
JP2011018290A5 JP2011018290A5 (en) 2012-08-23
JP5519968B2 JP5519968B2 (en) 2014-06-11

Family

ID=43596011

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009164110A Active JP5519968B2 (en) 2009-07-10 2009-07-10 Screen sharing system and data transfer method

Country Status (1)

Country Link
JP (1) JP5519968B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015535352A (en) * 2012-07-13 2015-12-10 シリコン イメージ,インコーポレイテッド Integrated mobile desktop

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07105130A (en) * 1993-10-07 1995-04-21 Fuji Xerox Co Ltd Cooperative operation assistance system
JPH10187619A (en) * 1996-12-26 1998-07-21 Toshiba Corp Collaborative operation system
JP2009122947A (en) * 2007-11-14 2009-06-04 Canon Inc Screen sharing system and data transfer method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07105130A (en) * 1993-10-07 1995-04-21 Fuji Xerox Co Ltd Cooperative operation assistance system
JPH10187619A (en) * 1996-12-26 1998-07-21 Toshiba Corp Collaborative operation system
JP2009122947A (en) * 2007-11-14 2009-06-04 Canon Inc Screen sharing system and data transfer method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015535352A (en) * 2012-07-13 2015-12-10 シリコン イメージ,インコーポレイテッド Integrated mobile desktop
US9743017B2 (en) 2012-07-13 2017-08-22 Lattice Semiconductor Corporation Integrated mobile desktop

Also Published As

Publication number Publication date
JP5519968B2 (en) 2014-06-11

Similar Documents

Publication Publication Date Title
JP2009122947A (en) Screen sharing system and data transfer method
JP3546705B2 (en) Method and apparatus for associating annotation data with application window, system, and storage medium storing program for controlling association of annotation data with application window
CN102750076B (en) Information processing apparatus, and control method thereof
EP2629188B1 (en) Display apparatus and control method for drag and drop externally stored data to separately externally stored application to trigger the processing of the data by the application
JP2009181419A (en) Communication device, method, and program
JP2009122947A5 (en)
JP2007334886A (en) Routing system and method for document processing job
JP2011156800A (en) Printing system and printing method therefor
JP5052361B2 (en) Image processing system and image processing method
JP2009064115A (en) File synchronization between mobile terminal device and server device
JP5935806B2 (en) Information processing system, information processing method, information processing apparatus, control method thereof, and control program
JP5519968B2 (en) Screen sharing system and data transfer method
US10761794B2 (en) Image processing apparatus and program
JP5676921B2 (en) Server apparatus, control method thereof, and system
EP3136240A1 (en) Virtual computer system, method and program
JP6501665B2 (en) INFORMATION PROCESSING APPARATUS AND ITS CONTROL METHOD AND PROGRAM
JP6922344B2 (en) Information processing equipment, information processing system, and information processing method
JP5305754B2 (en) Information processing apparatus, client, information processing method, and program
JP6245804B2 (en) Image display system, image transmission apparatus and control method therefor, program, and recording medium
KR102193040B1 (en) Method for running application virtualization whith application installed on virtual desktops in vdi environment or switching to virtual desktop connection, and vitualization server using the same
JP2012164207A (en) Workflow processing device, information processing method and program
JP6552318B2 (en) INFORMATION PROCESSING APPARATUS AND ITS CONTROL METHOD AND PROGRAM
JP2008210113A (en) Server device and program
KR20130142793A (en) Apparatus and method for providing time machine in cloud computing system
JP2000293464A (en) Data processor and display processing method and storage medium for storing computer readable porogram

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120706

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120706

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130318

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130805

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140307

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140404

R151 Written notification of patent or utility model registration

Ref document number: 5519968

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151