JP6569766B2 - System, method executed by system, information processing apparatus, program, and method executed by information processing - Google Patents
System, method executed by system, information processing apparatus, program, and method executed by information processing Download PDFInfo
- Publication number
- JP6569766B2 JP6569766B2 JP2018076542A JP2018076542A JP6569766B2 JP 6569766 B2 JP6569766 B2 JP 6569766B2 JP 2018076542 A JP2018076542 A JP 2018076542A JP 2018076542 A JP2018076542 A JP 2018076542A JP 6569766 B2 JP6569766 B2 JP 6569766B2
- Authority
- JP
- Japan
- Prior art keywords
- screen
- information processing
- input operation
- processing apparatus
- setting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
- User Interface Of Digital Computer (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Digital Computer Display Output (AREA)
Description
本発明は、システム、システムが実行する方法、情報処理装置、プログラムおよび情報処理が実行する方法に関するものである。 The present invention relates to a method of how the system, the system performs, the information processing apparatus, program and information processing is executed.
例えば、特許文献1には、マルチメディア会議環境において、サーバが、クライアント端末の表示画面をキャプチャし、他のクライアント端末に提供することで、リアルタイム情報交換を容易にする技術が開示されている。
For example,
このように、従来では、通信機能を有する複数の情報処理装置間で画面情報をリアルタイムに送受信し、表示画面を共有する技術が知られている。このような技術は、例えば、共通する資料を複数の参加者が閲覧しながら議論を行う会議などで利用される。 As described above, conventionally, a technique is known in which screen information is transmitted and received in real time between a plurality of information processing apparatuses having a communication function, and a display screen is shared. Such a technique is used, for example, in a meeting in which a plurality of participants browse a common material for discussion.
しかしながら、従来の方法では、表示画面を共有する情報処理装置間の通信や情報処理装置自体の描画処理(受信後の画面描画処理)に負荷がかかっていた。 However, in the conventional method, there is a load on communication between information processing apparatuses that share a display screen and drawing processing of the information processing apparatus itself (screen drawing processing after reception).
従来の方法は、情報処理装置間で表示画面の画像データ(画面情報)を送受信する仕組みとなっている。また、画面共有時のリアルタイム性を向上させるために、画像データを送受信する頻度(通信頻度)が高い。このように、従来の方法では、情報処理装置間で送受信するデータ量が多くなり、上述したような通信負荷や処理負荷などが生じてしまう。 The conventional method has a mechanism for transmitting and receiving display screen image data (screen information) between information processing apparatuses. Moreover, in order to improve the real-time property at the time of screen sharing, the frequency of transmitting and receiving image data (communication frequency) is high. As described above, in the conventional method, the amount of data transmitted and received between the information processing apparatuses increases, and the communication load and the processing load as described above are generated.
これらの問題点は、画面共有に係る時間(通信時間や画面描画処理時間)を冗長させる原因となり、画面共有時のリアルタイム性に悪影響を及ぼすことが懸念されることから、少ないデータ量で情報処理装置間の通信を行うことが望ましい。 These problems cause redundant time for screen sharing (communication time and screen drawing processing time), and there is a concern that it may adversely affect real-time performance when sharing screens. It is desirable to communicate between devices.
本発明は上記従来技術の問題点を鑑み提案されたものであり、少ないデータ量で入力操作が反映された表示画面を共有できる画面共有サービス提供システム、情報処理装置、画面共有サービス提供方法、画面共有サービス提供プログラム、及びプログラムを提供することにある。 The present invention has been proposed in view of the above-described problems of the prior art, and provides a screen sharing service providing system, an information processing apparatus, a screen sharing service providing method, and a screen capable of sharing a display screen in which an input operation is reflected with a small amount of data. A shared service providing program and a program are provided.
上記目的を達成するため、本発明にあっては、ネットワークを介して接続された複数の情報処理装置を有するシステムであって、前記複数の情報処理装置の少なくとも1以上の情報処理装置が、他の情報処理装置と画面を共有する複数のページを含む表示コンテンツを第1の共有画面に表示させる表示手段と、前記第1の共有画面上の少なくともページ送り操作を含む入力操作の権限を切り換える第1の切換手段と、表示画面の画面共有の設定を切り換える第2の切換手段と、前記入力操作の権限の切り換えに従って前記入力操作の権限を有している場合に受け付けた入力操作の操作情報を前記他の情報処理装置へ送信する送信手段と、前記入力操作の権限を有しておらず、前記他の情報処理装置が前記入力操作の権限を有している場合に、前記他の情報処理装置の第2の共有画面上の少なくともページ送り操作を含む入力操作の操作情報を受信する受信手段と、前記第1の共有画面の前記表示コンテンツの表示に対して、前記受信した操作情報又は前記受け付けた入力操作の操作情報に従って入力操作を描画反映する描画手段と、を有し、前記画面共有の設定の切り換えに従って前記入力操作を共有する設定から共有しない設定に切り換えられた場合に、前記第1の共有画面から前記表示コンテンツに対するページ送り操作を個別に受け付け可能とする個別画面に切り換える一方で、前記受信手段によって受信した前記第2の共有画面上のページ送り操作の操作情報を前記個別画面に描画反映せずに自装置の記憶領域に記録し、前記個別画面において前記入力操作の権限を有している前記他の情報処理装置とは異なるページを個別に表示している際に前記画面共有の設定の切り換えに従って前記入力操作を前記共有しない設定から前記共有する設定に切り換えられた場合に、前記個別画面を表示している際に前記記憶領域に記録しておいた前記第2の共有画面上のページ送り操作の操作情報に従って、前記入力操作の権限を有している前記他の情報処理装置の第2の共有画面上に表示されているページと同じページが表示された前記第1の共有画面に切り換える。
In order to achieve the above object, according to the present invention, there is provided a system having a plurality of information processing devices connected via a network, wherein at least one information processing device of the plurality of information processing devices is other Display means for displaying a display content including a plurality of pages sharing a screen with the information processing apparatus on the first shared screen, and a function for switching authority of an input operation including at least a page turning operation on the first shared screen . Operation information of the input operation received when the user has the authority of the input operation according to the switching of the authority of the input operation. transmitting means for transmitting to the other information processing apparatus, does not have the authority of the input operation, when the other information processing apparatus has the authority of the input operation, Serial receiving means for receiving operation information of the input operation including at least page turning operation on a second shared screen of the other information processing apparatus, the display of the display contents of the first shared screen, the receiving And a drawing unit that draws and reflects the input operation according to the operation information of the received input operation, and is switched from the setting for sharing the input operation to the setting for not sharing according to the switching of the setting of the screen sharing In this case, the page sharing operation on the second shared screen received by the receiving unit is switched from the first shared screen to the individual screen that can individually accept the page turning operation for the display content. information is recorded in a storage area of the device itself without drawing reflected in the individual frame, it has the authority of the input operation in the individual frame If said switched to the setting of the share from a setting that does not the share the input operation according to switching of the screen sharing settings while displaying individually different pages from the other information processing apparatus that, the individual According to the operation information of the page turning operation on the second shared screen recorded in the storage area when the screen is displayed, the other information processing apparatus having the authority of the input operation The screen is switched to the first shared screen on which the same page as the page displayed on the second shared screen is displayed .
このような構成によって、本発明に係る画面共有サービス提供システムは、同一コンテンツが画面に表示された情報処理装置間において、操作権を有する情報処理装置が、入力操作に応じた操作情報を、他の情報処理装置へと送信し、他の情報処理装置が、受信した操作情報に従って、送信側の入力操作を画面上に再現する。 With such a configuration, the screen sharing service providing system according to the present invention enables the information processing device having the operation right to transfer the operation information corresponding to the input operation between the information processing devices in which the same content is displayed on the screen. The other information processing apparatus reproduces the input operation on the transmission side on the screen according to the received operation information.
これによって、本発明に係る画面共有サービス提供システムでは、少ないデータ量で入力操作が反映された表示画面を共有できる。その結果、情報処理装置間の通信負荷が軽減(通信時間が短縮)され、情報処理装置自体の処理負荷が軽減(描画処理時間が軽減)される。そのため、本発明に係る画面共有サービス提供システムでは、画面共有時の高いリアルタイム性を実現できる。 Accordingly, the screen sharing service providing system according to the present invention can share the display screen reflecting the input operation with a small amount of data. As a result, the communication load between the information processing apparatuses is reduced (communication time is shortened), and the processing load of the information processing apparatus itself is reduced (drawing processing time is reduced). Therefore, the screen sharing service providing system according to the present invention can realize high real-time performance during screen sharing.
本発明によれば、情報処理装置間で予め表示コンテンツを共有しておき、各情報処理装置で受け付けた入力操作の操作情報のみをやり取りすることで、少ないデータ量で入力操作が反映された表示画面を共有可能な画面共有サービス提供システム、情報処理装置、画面共有サービス提供方法、画面共有サービス提供プログラム、及びプログラムを提供することができる。 According to the present invention, display content is reflected in a small amount of data by sharing display content between information processing devices in advance and exchanging only operation information of the input operations received by each information processing device. A screen sharing service providing system capable of sharing a screen, an information processing apparatus, a screen sharing service providing method, a screen sharing service providing program, and a program can be provided.
以下、本発明の好適な実施の形態(以下「実施形態」と言う)について、図面を用いて詳細に説明する。 DESCRIPTION OF EMBODIMENTS Hereinafter, preferred embodiments of the present invention (hereinafter referred to as “embodiments”) will be described in detail with reference to the drawings.
[第1の実施形態]
<システム構成>
図1は、本実施形態に係る画面共有サービス提供システム1000の構成例を示す図である。
図1(A)には、複数の情報処理装置1001〜100n(以下総称する場合「情報処理装置100」と言う)が、ネットワークなどのデータ伝送路N(例えば「LAN:Local Area Network」)を介して接続される構成例が示されている。なお、本実施形態では、無線通信環境を想定している。よって、上記データ伝送路Nは、例えば、無線LANやBluetooth(商標又は登録商標)ネットワークなどである。
[First Embodiment]
<System configuration>
FIG. 1 is a diagram illustrating a configuration example of a screen sharing
In FIG. 1A, a plurality of
情報処理装置100は、無線通信機能、情報入力機能、及び情報表示機能などを有する機器である。なお、本実施形態では、デスクトップ型の一般的なPC(Personal Computer)ではなく、携帯性に優れた情報端末を想定している。例えば、上記情報処理装置100は、スマートフォンやタブレットPCなどである。
The
図1(B)には、本実施形態に係る画面共有サービス提供システム1000を、プレゼンテーション会議に利用した場合(利用場面)の例が示されている。この場合、本実施形態に係る画面共有サービス提供システム1000は、次のように利用される。
FIG. 1B shows an example in which the screen sharing
まず、各情報処理装置1001〜1004は、会議室内に設置されたアクセスポイントAPを検出し、無線LANに接続する。
First, each of the
会議参加者は、各情報処理装置1001〜1004において、本サービスの提供を実現する画面共有アプリ(画面共有機能を実現するソフトウェア)を起動し、プレゼンテーション資料にあたるコンテンツを画面に表示させる。これにより、情報処理装置間で表示コンテンツが共有されたことになる。
A conference participant activates a screen sharing application (software that realizes a screen sharing function) for realizing the provision of the service in each of the
なお、表示コンテンツは、情報処理装置100が備える記憶領域に保持している場合や、ファイルサーバなどの外部の記憶領域に保持されている場合などが考えられる。よって、会議参加者は、情報処理装置100において、画面共有アプリを操作し、所定の記憶領域にアクセスすることで、表示コンテンツを取得する。
The display content may be stored in a storage area included in the
また、プレゼンテーションを行う発表者は、情報処理装置1001において、画面共有アプリを操作し、共有画面上の入力操作の権限(以下「操作権」と言う)を保有している旨を、他の会議参加者である視聴者A,B,Cに通知する。このとき、情報処理装置1001では、ブロードキャストなどにより検出した視聴者A,B,Cの情報処理装置1002〜1004に対して、操作権保有の旨を通知している。
In addition, the presenter to do a presentation, in the
この状態で、情報処理装置1001は、ページ送り操作やポインタ操作と言った発表者の入力操作を受け付けると、その操作情報を、情報処理装置1002〜1004に対して送信する。その結果、視聴者A,B,Cの情報処理装置1002〜1004では、受信した操作情報に基づき、発表者の入力操作が画面上に再現される。これにより、本実施形態に係る画面共有サービス提供システム1000では、情報処理装置間において、入力操作が反映された表示画面が共有される。
In this state, the
以上のように、本実施形態に係る画面共有サービス提供システム1000では、上記システム構成により、情報処理装置間における画面共有サービスを提供することができる。
As described above, the screen sharing
<ハードウェア構成>
図2は、本実施形態に係る情報処理装置100のハードウェア構成例を示す図である。
図2に示すように、情報処理装置100は、入力装置101、表示装置102、ドライブ装置103、RAM(Random Access Memory)104、ROM(Read Only Memory)105、CPU(Central Processing Unit)106、インタフェース装置107、及びHDD(Hard Disk Drive)108などを備え、それぞれがバスBで相互に接続されている。
<Hardware configuration>
FIG. 2 is a diagram illustrating a hardware configuration example of the
As shown in FIG. 2, the
入力装置101は、タッチパネルなどを含み、情報処理装置100に各操作信号を入力するのに用いられる。表示装置102は、ディスプレイなどを含み、情報処理装置100による処理結果を表示する。
The
インタフェース装置107は、情報処理装置100をデータ伝送路Nに接続するインタフェースである。これにより、情報処理装置100は、インタフェース装置107を介して、他の情報処理装置100とデータ通信を行うことができる。
The
HDD108は、プログラムやデータを格納している不揮発性の記憶装置である。格納されるプログラムやデータには、情報処理装置全体を制御する情報処理システム(例えば「Windows(商標又は登録商標)」や「UNIX(商標又は登録商標)」などの基本ソフトウェアであるOS(Operating System))、及びシステム上において各種機能を提供するアプリケーション(例えば「画面共有アプリ」)などがある。また、HDD108は、格納しているプログラムやデータを、所定のファイルシステム及び/又はDB(Data Base)により管理している。
The
ドライブ装置103は、着脱可能な記録媒体103aとのインタフェースである。これにより、情報処理装置100は、ドライブ装置103を介して、記録媒体103aの読み取り及び/又は書き込みを行うことができる。記録媒体103aには、例えば、SDメモリカード(SD Memory Card)やUSB(Universal Serial Bus)メモリなどがある。
The
ROM105は、電源を切っても内部データを保持することができる不揮発性の半導体メモリ(記憶装置)である。ROM105には、情報処理装置100の起動時に実行されるBIOS(Basic Input/Output System)、情報処理システム設定、及びネットワーク設定などのプログラムやデータが格納されている。RAM104は、プログラムやデータを一時保持する揮発性の半導体メモリ(記憶装置)である。CPU106は、上記記憶装置(例えば「HDD」や「ROM」など)から、プログラムやデータをRAM(メモリ)上に読み出し、処理を実行することで、装置全体の制御や搭載機能を実現する演算装置である。
The
以上のように、本実施形態に係る情報処理装置100では、上記ハードウェア構成により、各種情報処理サービスを提供することができる。
As described above, the
<画面共有機能>
本実施形態に係る画面共有機能について説明する。
本実施形態に係る画面共有サービス提供システム1000では、同一コンテンツが画面に表示された情報処理装置間において、操作権を有する情報処理装置1001が、入力操作に応じた操作情報を、他の情報処理装置1002〜100nへと送信し、他の情報処理装置1002〜100nが、受信した操作情報に従って、送信側の入力操作を画面上に再現する。本実施形態に係る画面共有サービス提供システム1000は、このような画面共有機能を有している。
<Screen sharing function>
The screen sharing function according to the present embodiment will be described.
In the screen sharing
従来の方法では、表示画面を共有する情報処理装置間の通信や情報処理装置自体の描画処理(受信後の画面描画処理)に負荷がかかっていた。なぜなら、従来の方法は、情報処理装置間で、入力操作が反映された表示画面の画像データ(画面情報)を送受信し、さらに、画像データを送受信する頻度(通信頻度)が高い仕組みとなっており、情報処理装置間で送受信するデータ量が多いためである。 In the conventional method, there has been a load on communication between information processing apparatuses that share a display screen and drawing processing (screen drawing processing after reception) of the information processing apparatus itself. This is because the conventional method transmits and receives image data (screen information) of a display screen reflecting an input operation between information processing apparatuses, and further has a high frequency of transmitting and receiving image data (communication frequency). This is because the amount of data transmitted and received between the information processing apparatuses is large.
そのため、従来の方法では、画面共有に係る時間(通信時間や画面描画処理時間)が冗長し、画面共有時のリアルタイム性に悪影響を及ぼすことが懸念される。 Therefore, in the conventional method, there is a concern that the time (communication time and screen drawing processing time) related to screen sharing becomes redundant and adversely affects the real-time property during screen sharing.
そこで、本実施形態に係る画面共有サービス提供システム1000では、情報処理装置間で予め表示コンテンツを共有しておき、各情報処理装置1001〜100nで受け付けた入力操作の操作情報のみをやり取りする仕組みとした。つまり、本実施形態では、情報処理装置間で、データ量の多い画像データを定期的にやり取りするのではなく、画面に表示する基本データが共有された情報処理装置間で、画面上に入力操作を反映させるために最低限必要なデータのみをやり取りすることで、情報処理装置間で送受信するデータ量を軽減するものである。
In view of this, in the screen sharing
これにより、本実施形態に係る画面共有サービス提供システム1000では、少ないデータ量で入力操作が反映された表示画面を共有できる。
Thereby, in the screen sharing
以下に、本実施形態に係る画面共有機能の構成とその動作について説明する。
図3は、本実施形態に係る画面共有機能の構成例を示す図である。
図3に示すように、本実施形態に係る情報処理装置100は、通信制御部11、操作権切換部21、操作種判別部22、送信データ生成部23、及び描画部24などを有している。本実施形態に係る画面共有機能は、情報処理装置間において、これらの各機能部が連携動作することにより実現される。
The configuration and operation of the screen sharing function according to this embodiment will be described below.
FIG. 3 is a diagram illustrating a configuration example of the screen sharing function according to the present embodiment.
As illustrated in FIG. 3, the
通信制御部11は、情報処理装置間の通信を制御する機能部である。通信制御部11は、インタフェース装置107を制御し、情報処理装置間でデータの送受信を行う。
The
操作権切換部21は、情報処理装置間における共有画面の操作権を切り換える機能部である。操作権切換部21は、操作権の設定指示を受け付けるGUI(Graphical User Interface)を画面に表示し、受け付けた設定指示に従って、共有画面の操作権を切り換える。
The operation right switching
操作権切換部21は、操作権の設定指示を受け付けると、同機能部を有する情報処理装置100において入力操作を受け付ける機能(例えば「タッチ入力機能」)を有効とし、通信制御部11を介して、他の情報処理装置100に対し、操作権を保有した旨を通知する。その結果、他の情報処理装置100では、操作権切換部21が、通信制御部11を介して受信した通知に基づき、同装置における入力操作を受け付ける機能を無効にする。これにより、情報処理装置間では、共有画面の操作権が切り換えられる。
When the operation right switching
また、このような操作権の切り換えにより、情報処理装置間におけるデータ送信の流れが決定される。つまり、操作情報を送受信する複数の情報処理装置100において、操作権を保有し、操作情報を送信する情報処理装置(以下「送信側の情報処理装置」と言う)100aと、操作権を保有しておらず、操作情報を受信する情報処理装置(以下「受信側の情報処理装置」と言う)100bと、が決定される。
In addition, the flow of data transmission between information processing apparatuses is determined by such switching of operation rights. That is, in the plurality of
操作種判別部22は、入力操作の種類を判別する機能部である。入力操作には、例えば、ページ送り操作やポインタ操作などがあり、このような操作種の違いによって、送信する操作情報が異なる。よって、送信データを生成する前段階で、入力操作の種類を判別しておく必要がある。入力操作は、異なる操作イベントとして、入力装置101から取得できることから、操作種判別部22は、取得した操作イベントに基づき、入力操作の種類を判別する。
The operation
なお、操作種の判別は、上記方法に限らない。例えば、入力操作によって異なるプログラムコード(又はモジュール)が実行されるソフトウェア構成の場合、操作種判別部22は、実行されるプログラムコード(又はモジュール)に基づき、入力操作の種類を判別してもよい。
The operation type is not limited to the above method. For example, in the case of a software configuration in which different program codes (or modules) are executed by an input operation, the operation
送信データ生成部23は、入力操作の操作情報を含む送信データを生成する機能部である。送信データ生成部23は、判別された入力操作に応じた操作情報に基づき、送信データを生成する。送信データ生成部23は、例えば、図4に示すような送信データを生成する。
The transmission
図4は、本実施形態に係る操作情報の送信データ例を示す図である。
図4(A)に示すように、送信データ生成部23は、操作種判別部22により、受け付けた入力操作がページ送り操作であると判別された場合に、ページ送り後に表示するページを識別するページ番号(ページ識別情報)を、入力操作に応じた操作情報とし、ページ番号(page=n)を含む送信データ23D1を生成する。また、図4(B)に示すように、送信データ生成部23は、操作種判別部22により、受け付けた入力操作がポインタ操作であると判別された場合に、画面上のポインタ位置にあたる座標値(ポインタ位置情報)を、入力操作に応じた操作情報とし、座標値(x=a,y=b)を含む送信データ23D2を生成する。なお、送信データ23D1,23D2を総称する場合には、「送信データ23D」と言う。
FIG. 4 is a diagram illustrating an example of transmission data of operation information according to the present embodiment.
As shown in FIG. 4A, the transmission
送信データ生成部23は、このようにして生成した送信データ23Dを通信制御部11へと渡し、データ送信の実行を指示する。これにより、情報処理装置間では、画面上に入力操作を反映させるために最低限必要なデータのみがやり取りされる。
The transmission
なお、操作種判別部22及び送信データ生成部23は、操作権の切り換えと連動して機能する。つまり、操作権を保有し、入力操作を受け付ける機能が有効となった送信側の情報処理装置100aでは、両機能部が機能する。一方、操作権の切り換えにより、入力操作を受け付ける機能が無効となった受信側の情報処理装置100bでは、機能停止状態となる。
The operation
描画部24は、画面上に表示オブジェクトを描画する機能部である。描画部24は、受け付けた操作イベント又は受信データに含まれる操作情報に従って、表示オブジェクトを描画する。描画部24は、次のようにして表示オブジェクトを描画する。
The
送信側の情報処理装置100aでは、描画部24が、同装置で受け付けた操作イベントに従って、表示オブジェクトを描画する。例えば、ページ送り操作の入力を受け付けた場合には、操作イベントに従って、ページ送り後に表示するページのページオブジェクトを画面上に描画する。また、ポインタ操作の入力を受け付けた場合には、操作イベントに従って、ポインタオブジェクトを画面上に描画する。
In the
一方、受信側の情報処理装置100bでは、描画部24が、通信制御部11を介して受信した受信データに含まれる操作情報に従って、表示オブジェクトを描画する。例えば、ページ番号を含む送信データ23D1を受信した場合には、受信データに含まれるページ番号のページオブジェクトを画面上に描画し、画面遷移させる。また、座標値を含む送信データ23D2を受信した場合には、受信データに含まれる座標値に従って、ポインタオブジェクトを画面上に描画する。これにより、受信側の情報処理装置100bでは、受信した操作情報に従って、送信側の入力操作が画面上に再現される。
On the other hand, in the
以上のように、本実施形態に係る画面共有機能は、上記各機能部が連携動作することにより実現される。具体的に、本実施形態に係る画面共有機能は、システム1000を構成する情報処理装置100に搭載(インストール)された画面共有アプリのプログラム(画面共有機能を実現するソフトウェア)が、各情報処理装置が備えるCPU106(演算装置)により、記憶装置(例えば「HDD」や「ROM」など)からメモリ(RAM)上に読み出され、以下の処理が実行されることで実現される。
As described above, the screen sharing function according to the present embodiment is realized by the above-described functional units working together. Specifically, in the screen sharing function according to the present embodiment, a screen sharing application program (software that realizes the screen sharing function) installed (installed) in the
本実施形態に係る画面共有機能の詳細な動作(機能部群の連携動作)について、処理手順を示すシーケンス図を用いて説明する。 A detailed operation of the screen sharing function according to the present embodiment (cooperation operation of functional unit groups) will be described with reference to a sequence diagram showing a processing procedure.
《画面共有サービス提供時の主な処理》
図5は、本実施形態に係る画面共有サービス提供時の処理手順例を示すシーケンス図である。なお、図5には、情報処理装置間において、操作権の切り換えにより、操作情報の送信側と受信側との各情報処理装置100a,100bが決定された後の処理手順が示されている。
《Main processing when providing screen sharing service》
FIG. 5 is a sequence diagram illustrating a processing procedure example when providing a screen sharing service according to the present embodiment. FIG. 5 shows a processing procedure after the
(1)ページ送り操作時の画面共有
図5に示すように、送信側の情報処理装置100aでは、画面上でページ送り操作が行われると、対応する操作イベントが、描画部24及び操作種判別部22へと渡される。
(1) Screen sharing during page turning operation As shown in FIG. 5, in the
描画部24は、操作イベントに従って、ページ送り後に表示するページのページオブジェクトを画面上に描画し、画面遷移させる(ステップS101)。
In accordance with the operation event, the
また、操作種判別部22は、操作イベントに基づき、受け付けた入力操作がページ送り操作であると判別し(ステップS102)、送信データ生成部23に対して、送信データ23D1の生成を指示する(ステップS103)。このとき、操作種判別部22は、操作イベントから取得可能なページ送り後に表示するページのページ番号(以下便宜上「ページ送り先のページ番号」と言う)を、入力操作に応じた操作情報として、送信データ生成部23へと渡す。
The operation
送信データ生成部23は、ページ番号を含む送信データ23D1を生成し(ステップS104)、通信制御部11に対して、データ送信を指示する(ステップS105)。このとき、送信データ生成部23は、生成後の送信データ23D1を、通信制御部11へと渡す。
Transmission
これにより、送信側の情報処理装置100aからは、受信側の情報処理装置100bに対して、ページ送り先のページ番号が送信される(ステップS106)。このとき、送信側の情報処理装置100aが有する通信制御部11では、ブロードキャスト時に取得したネットワーク設定情報(例えば「IPアドレス(Internet Protocol address)」に従って、受信側の情報処理装置100bへのデータ送信が行われる。
As a result, the page number of the page destination is transmitted from the
これを受けて、受信側の情報処理装置100bでは、受信データが通信制御部11から描画部24へと渡され(ステップS107)、描画部24が、受信データに含まれるページ番号のページオブジェクトを画面上に描画し、画面遷移させる(ステップS108)。これにより、受信側の情報処理装置100bでは、受信したページ番号に従って、送信側のページ送り操作が画面上に再現される。
In response to this, in the
(2)ポインタ操作時の画面共有
図5に示すように、送信側の情報処理装置100aでは、画面上でポインタ操作が行われると、対応する操作イベントが、描画部24及び操作種判別部22へと渡される。
(2) Screen Sharing During Pointer Operation As shown in FIG. 5, in the
描画部24は、操作イベントに従って、ポインタオブジェクトを画面上に描画する(ステップS201)。
The
また、操作種判別部22は、操作イベントに基づき、受け付けた入力操作がポインタ操作であると判別し(ステップS202)、送信データ生成部23に対して、送信データ23D2の生成を指示する(ステップS203)。このとき、操作種判別部22は、操作イベントから取得可能な画面上のポインタ位置にあたる座標値を、入力操作に応じた操作情報として、送信データ生成部23へと渡す。
The operation
送信データ生成部23は、画面上のポインタ位置にあたる座標値を含む送信データ23D2を生成し(ステップS204)、通信制御部11に対して、データ送信を指示する(ステップS205)。このとき、送信データ生成部23は、生成後の送信データ23D2を、通信制御部11へと渡す。
Transmission
なお、ポインタ操作時に生成する送信データ23D2には、送信側と画面の大きさが異なる受信側において、送信側で行われたポインタ操作の再現位置を調整するためのデータを含めてもよい。具体的には、送信データ23D2に、座標値の他、送信側の画面フレームサイズ(画面フレーム情報)を含める。 Note that the transmission data 23D 2 produced during pointer operation, at the receiving side the size of the transmission side and the screen are different, it may include data for adjusting the reproduction position of the pointer operation performed on the transmission side. Specifically, the transmission data 23D 2, other coordinate values, including picture frame size of the transmitting side (the screen frame information).
これにより、送信側の情報処理装置100aからは、受信側の情報処理装置100bに対して、ポインタ位置にあたる座標値及び送信側の画面フレームサイズが送信される(ステップS206)。
As a result, the coordinate value corresponding to the pointer position and the screen frame size on the transmission side are transmitted from the
これを受けて、受信側の情報処理装置100bでは、受信データが通信制御部11から描画部24へと渡され(ステップS207)、描画部24が、受信データに含まれる座標値及び画面フレームサイズに従って、ポインタオブジェクトを画面上に描画する(ステップS208)。このとき、描画部24は、同機能部が動作する情報処理装置100bの画面フレームサイズと、受信データに含まれる送信側の画面フレームサイズとに基づき、送信側画面の座標空間を受信側画面の座標空間に変換し(座標変換を行い)、ポインタオブジェクトの描画位置を調整する。
In response to this, in the
これにより、受信側の情報処理装置100bでは、受信した座標値及び画面フレームサイズに従って、送信側のポインタ操作が画面上に再現される。
Thereby, in the
<まとめ>
以上のように、本実施形態に係る画面共有サービス提供システム1000によれば、同一コンテンツが画面に表示された情報処理装置間において、操作権を有する情報処理装置(送信側の情報処理装置)100aが、操作種判別部22により、入力操作を判別し、送信データ生成部23により、判別された入力操作に応じた操作情報を含む送信データ23Dを生成し、通信制御部11を介して、他の情報処理装置(受信側の情報処理装置)100bへと送信する。その結果、他の情報処理装置(受信側の情報処理装置)100bでは、通信制御部11を介して、送信データ23Dを受信し、描画部24により、受信データに含まれる操作情報に従って、送信側の入力操作が画面上に再現される。
<Summary>
As described above, according to the screen sharing
これによって、本実施形態に係る画面共有サービス提供システム1000では、少ないデータ量で入力操作が反映された表示画面を共有できる。その結果、情報処理装置間の通信負荷が軽減(通信時間が短縮)され、情報処理装置自体の処理負荷が軽減(描画処理時間が軽減)される。そのため、本実施形態に係る画面共有サービス提供システム1000では、画面共有時の高いリアルタイム性を実現できる。
Accordingly, the screen sharing
<変形例1>
以下に、上記実施形態に係る変形例1を説明する。
図6は、発表者と視聴者との画面共有例を示す図である。図6には、図1(B)に示した利用場面における発表者側の表示画面W1と視聴者側の表示画面W2とが示されている。
<
Below, the
FIG. 6 is a diagram illustrating an example of screen sharing between the presenter and the viewer. FIG. 6 shows a display screen W1 on the presenter side and a display screen W2 on the viewer side in the usage scene shown in FIG.
図6に示すように、例えば、発表者(操作権を保有している会議参加者)は、プレゼンテーション中に、表示画面W1に表示されたポインタオブジェクトを位置P1から位置P2へと移動させることがある。この場合、視聴者側の表示画面W2に、発表者のポインタ操作をリアルタイムに再現するため、発表者と視聴者との情報処理装置間では、発表者がポインタ操作を行う間(ポインタ操作中)、ポインタ位置にあたる座標値が定期的に送受信される。つまり、情報処理装置間では、座標値を含む送信データ23D2が複数回に渡って送信される。 As shown in FIG. 6, for example, a presenter (a conference participant who has an operation right) can move the pointer object displayed on the display screen W1 from the position P1 to the position P2 during the presentation. is there. In this case, since the pointer operation of the presenter is reproduced in real time on the display screen W2 on the viewer side, the presenter performs the pointer operation between the information processing apparatuses of the presenter and the viewer (during the pointer operation). The coordinate value corresponding to the pointer position is periodically transmitted and received. That, among the information processing apparatus, transmission data 23D 2 including coordinate values are transmitted over a plurality of times.
そこで、本変形例1では、画面上のポインタを移動操作する場合における情報処理装置間のデータ送信を、入力操作単位で一括送信し、通信頻度の減少から通信負荷を軽減する仕組みを提案する。また、本変形例1では、入力操作単位の一括送信であっても、受信側で発生すると考えられる入力操作の再現に係るタイムラグを相殺し、画面共有時のリアルタイム性を確保する仕組みについても提案する。 Therefore, in the first modification, a mechanism is proposed in which data transmission between the information processing apparatuses when moving the pointer on the screen is collectively transmitted in units of input operations to reduce the communication load from the decrease in communication frequency. In addition, the first modification also proposes a mechanism for canceling the time lag related to the reproduction of the input operation that is expected to occur on the receiving side even in batch transmission of the input operation unit and ensuring the real-time property when the screen is shared. To do.
《ポインタ移動操作時の画面共有処理》
図7は、本変形例1に係るポインタ移動操作時の画面共有処理手順例を示すシーケンス図である。
図7に示すように、送信側の情報処理装置100aでは、画面上でポインタ操作が開始されると、対応する操作イベントが、描画部24及び操作種判別部22へと渡される。
《Screen sharing process during pointer movement operation》
FIG. 7 is a sequence diagram illustrating an example of a screen sharing process procedure at the time of a pointer movement operation according to the first modification.
As shown in FIG. 7, in the
描画部24は、操作イベントに従って、画面上にポインタオブジェクトの描画を開始する(ステップS301)。
The
また、操作種判別部22は、操作イベントに基づき、受け付けた入力操作がポインタ操作であると判別し(ステップS302)、送信データ生成部23に対して、ポインタ操作が開始された旨を通知する(ステップS303)。このとき、操作種判別部22は、操作イベントから取得可能な画面上のポインタ位置にあたる操作開始座標値を、入力操作に応じた操作情報として、送信データ生成部23へと渡す。
Further, the operation
送信データ生成部23は、操作開始の通知(送信データの生成指示)を受け付けると、次の処理を開始する。送信データ生成部23は、操作時間[T1]を計測し、操作中のポインタ位置にあたる座標値を記録する(ステップS304)。このとき、操作時間[T1]の計測は、例えば、送信側の情報処理装置100aが備える時計回路(非図示)を用いて行う。また、座標値の記録は、操作種判別部22から定期的に渡される操作中のポインタ位置にあたる座標値をメモリ(RAM)上にバッファリングすることにより行われる。よって、メモリ上には、時間経過とともに、入力操作の軌跡を示す複数の座標値(座標値群)が一時保持されることになる。
When the transmission
また、送信側の情報処理装置100aでは、画面上でポインタ操作が終了すると、対応する操作イベントが、描画部24及び操作種判別部22へと渡される。このとき、ポインタ操作の終了は、例えば、タッチ入力によるポインタ操作の場合、入力装置101により、タッチペンや指と言った指示部材の表示画面に対する接触状態に基づき検知される。入力装置101は、指示部材が画面上に接触している間、ポインタ操作中であるとし、画面上から離れた場合に、ポインタ操作の終了を検知する。
In the
描画部24は、操作イベント(検知結果)に従って、画面上へのポインタオブジェクトの描画を終了する(ステップS401)。
The
また、操作種判別部22は、操作イベント(検知結果)に基づき、送信データ生成部23に対して、ポインタ操作が終了した旨を通知する(ステップS402)。このとき、操作種判別部22は、操作イベントから取得可能な画面上のポインタ位置にあたる操作終了座標値を、送信データ生成部23へと渡す。これにより、操作種判別部22は、送信データ生成部23に対して、送信データ23D2の生成を指示する。
Also, the operation
送信データ生成部23は、操作終了の通知(送信データの生成指示)を受け付けると、操作時間[T1]の計測及び座標値の記録を終了し、例えば、図8に示すような送信データ23D2を生成する(ステップS403)。
When receiving the operation end notification (transmission data generation instruction), the transmission
図8は、本実施形態に係る操作情報の送信データ例を示す図である。
図8に示すように、送信データ生成部23は、記録した座標値群(x=a1,y=b2・・x=an,y=bn)、画面フレームサイズ(fsize=W[width]×H[height])、及び計測した操作時間(time=T1[sec])を含む送信データ23D2を生成する。
FIG. 8 is a diagram illustrating an example of transmission data of operation information according to the present embodiment.
As shown in FIG. 8, the transmission
図7の説明に戻る。送信データ生成部23は、生成後の送信データ23D2を、通信制御部11へと渡し、通信制御部11に対して、データ送信を指示する(ステップS404)。
Returning to the description of FIG. Transmission
これにより、送信側の情報処理装置100aからは、受信側の情報処理装置100bに対して、ポインタ移動操作開始から終了までのポインタ位置にあたる複数の座標値(記録順の座標値)、送信側の画面フレームサイズ、及びポインタ移動操作の操作時間[T1]が、入力操作ごと一括送信される(ステップS405)。これにより、本変形例1では、情報処理装置間の通信頻度が減り、通信負荷が軽減される。
As a result, the
また、受信側の情報処理装置100bでは、受信データが通信制御部11から描画部24へと渡される(ステップS406)。
In the
描画部24は、まず、受信側でのポインタ移動操作の再現時間(ポインタオブジェクトの描画時間[T2])を算出する(ステップS407)。このとき、描画部24は、以下の式により、ポインタオブジェクトの描画時間[T2]を算出する。
描画時間[T2]=操作時間[T1]×調整係数[k] ・・・・・・(式1)
調整係数[k] :0 < [k] < 1 ・・・・・・(式2)
上記式からも分かるように、調整係数[k]とは、送信側の入力操作を受信側で再現する際の速度(描画速度)を調整する係数である。
The
Drawing time [T2] = operation time [T1] × adjustment coefficient [k] (Equation 1)
Adjustment coefficient [k]: 0 <[k] <1 (Expression 2)
As can be seen from the above equation, the adjustment coefficient [k] is a coefficient for adjusting the speed (drawing speed) when reproducing the input operation on the transmission side on the reception side.
ここで、操作時間[T1]と調整係数[k]との関係について説明する。
図9は、本変形例1に係る操作時間[T1]と描画速度の調整係数[k]との関係を示す図である。図9には、縦軸に調整係数[k]、横軸に操作時間[T1]が示されている。
Here, the relationship between the operation time [T1] and the adjustment coefficient [k] will be described.
FIG. 9 is a diagram illustrating a relationship between the operation time [T1] and the drawing speed adjustment coefficient [k] according to the first modification. In FIG. 9, the vertical axis indicates the adjustment coefficient [k], and the horizontal axis indicates the operation time [T1].
図9に示すように、操作時間[T1]と調整係数[k]とは、反比例の関係となっている。また、調整係数[k]の値は、上記(式2)に示す範囲である。よって、調整係数[k]は、操作時間[T1]が長ければ、'0'に近い小数値となる。一方、操作時間[T1]が短ければ、'1'に近い小数値となる。 As shown in FIG. 9, the operation time [T1] and the adjustment coefficient [k] have an inversely proportional relationship. Further, the value of the adjustment coefficient [k] is in the range shown in the above (Equation 2). Therefore, the adjustment coefficient [k] is a decimal value close to “0” if the operation time [T1] is long. On the other hand, if the operation time [T1] is short, the decimal value is close to “1”.
描画部24は、上記関係から、操作時間[T1]に基づき、描画時間[T2]の算出時に用いる調整係数[k]を決定し、描画時間[T2]を算出する。具体的には、描画部24は、操作時間[T1]と調整係数[k]との関係データ(例えば「テーブルデータ」)を保持する所定の記憶領域にアクセスし、操作時間[T1]対応する調整係数[k]の該当データを取得する。描画部24は、取得した調整係数[k]と受信データに含まれる操作時間[T1]とを上記(式1)に代入し、描画時間[T2]を算出する。
Based on the operation time [T1], the
このように、描画部24では、操作時間[T1]から決定した調整係数[k]により、送信側の入力操作を受信側で再現する際の速度(描画速度)が調整される。具体的には、図10に示す通りである。
In this manner, the
図10は、本変形例1に係るポインタ移動操作時の画面共有例を示す図である。
例えば、本変形例1では、送信側で行われた入力操作の操作時間[T1]が長い場合、'0'に近い小数値である調整係数[k]から、操作時間[T1]に対して短い描画時間[T2]が算出され、描画速度が速くなるように調整される。
FIG. 10 is a diagram illustrating an example of screen sharing at the time of a pointer movement operation according to the first modification.
For example, in the first modification, when the operation time [T1] of the input operation performed on the transmission side is long, the adjustment coefficient [k], which is a decimal value close to “0”, is used for the operation time [T1]. A short drawing time [T2] is calculated and adjusted to increase the drawing speed.
これにより、本変形例1では、送信側の入力操作を受信側の共有画面に反映する際に発生するタイムラグを相殺し、画面共有時のリアルタイム性を確保することができる。
Thereby, in this
図7の説明に戻る。描画部24は、描画時間[T2]を算出後、受信データに含まれる複数の座標値(記録順の座標値)及び画面フレームサイズに従って、画面上にポインタオブジェクトの描画を開始する(ステップS408)。このとき、描画部24は、算出した描画時間[T2]内に描画処理が終了する速度で、ポインタオブジェクトを描画する。これにより、受信側では、送信側で行われた入力操作の速度より、速い速度で、ポインタ移動操作が再現される。
Returning to the description of FIG. After calculating the drawing time [T2], the
以上のように、本変形例1に係る画面共有サービス提供システム1000では、情報処理装置間のデータ送信を入力操作単位で一括送信することで、通信頻度が減り、通信負荷を軽減することができる。また、本変形例1に係る画面共有サービス提供システム1000では、入力操作単位の一括送信であっても、送信側の入力操作を受信側で再現する際の速度を調整することで、画面共有時のリアルタイム性を確保することができる。
As described above, in the screen sharing
なお、本変形例1では、送信側の入力操作に、ポインタを移動する操作を例に挙げたが、この限りでない。例えば、手書き入力操作などであってもよい。本変形例1に係る画面共有サービス提供システム1000では、所定時間の間、表示画面に接触した状態での入力操作に対して、上記効果を奏する。
In the first modification, an operation of moving the pointer is given as an example of the input operation on the transmission side, but the present invention is not limited to this. For example, it may be a handwriting input operation. In the screen sharing
<変形例2>
以下に、上記実施形態に係る変形例2について説明する。
本変形例2では、発表者(操作権を保有している会議参加者)が、プレゼンテーション中に、視聴者が、会議参加者同士で共有したプレゼンテーション資料に、個別メモを記録したい場合が考えられる。
<
Below, the
In the second modification, there may be a case where the presenter (conference participant holding the operation right) wants to record individual memos in the presentation material shared by the conference participants during the presentation. .
そこで、本変形例2では、表示画面の共有/非共有(画面共有モード)が切り換えられる仕組みを提案する。
図11は、本変形例2に係る画面共有機能の構成例を示す図である。
図11に示す機能構成と図3に示した機能構成との違いは、共有モード切換部25を有している点である。
Therefore, in the second modification, a mechanism is proposed in which display screen sharing / non-sharing (screen sharing mode) can be switched.
FIG. 11 is a diagram illustrating a configuration example of the screen sharing function according to the second modification.
The difference between the functional configuration illustrated in FIG. 11 and the functional configuration illustrated in FIG. 3 is that the shared
共有モード切換部25は、情報処理装置間における表示画面の共有/非共有を切り換える機能部である。共有モード切換部25は、画面共有モード(共有/非共有)の設定指示を受け付けるGUIを画面に表示し、受け付けた設定指示に従って、画面共有モードを切り換える。
The sharing
なお、以下の説明では、主に画面共有モードの切り換えが行われる視聴者の情報処理装置、すなわち受信側の情報処理装置100bを例に説明する。
In the following description, the information processing apparatus of the viewer whose screen sharing mode is switched, that is, the
共有モード切換部25は、非共有の設定指示を受け付けると、同機能部を有する情報処理装置100bにおいて入力操作を受け付ける機能を有効とし、操作種判別部22に対して、機能停止状態の解除を指示する。同時に、共有モード切換部25は、描画部24に対して、共有画面から個別画面への画面切換を指示する。その結果、操作種判別部22は、描画部24により共有画面から切り換えられた個別画面からの入力操作を受け付け、操作情報を操作情報保持部31に記録する。なお、操作情報保持部31は、例えば、情報処理装置100bが備える記憶装置(例えば「HDD」)の所定の記憶領域にあたる。これにより、視聴者は、自身が保有する情報処理装置100bにおいて、手書き入力操作などにより、個別にメモを記録することができる。
When the sharing
また、共有モード切換部25は、非共有の設定指示を受け付けると、通信制御部11に対して、送信側の情報処理装置100aからの受信データ(送信側の操作情報)の記録を指示する。その結果、通信制御部11は、送信側の情報処理装置100aから送信データ23Dを受信し、受信データを受信データ保持部32に記録する。なお、受信データ保持部32は、情報処理装置100bが備える記憶装置の所定の記憶領域にあたり、上記操作情報保持部31と異なる記憶領域にあたる。つまり、本変形例2では、個別画面への入力操作と共有画面への入力操作とを、異なる記録領域により管理している。
When the sharing
なお、操作種判別部22は、非共有から画面共有へと画面共有モードが切り換えられると、操作情報保持部31への記録処理を終了し、再び、機能停止状態となる。また、通信制御部11は、受信データ保持部32への記録処理を終了し、描画部24は、表示画面を、個別画面から共有画面へと切り換え、記録された受信データに基づき、送信側の入力操作を再現する。
Note that, when the screen sharing mode is switched from non-sharing to screen sharing, the operation
以上のように、本変形例2に係る画面共有機能は、上記各機能部が連携動作することにより実現される。 As described above, the screen sharing function according to the second modification is realized by the above-described functional units operating in cooperation.
《画面共有モード切換時の処理》
図12は、本変形例2に係る画面共有モード切換時の処理手順例を示すシーケンス図である。
図12に示すように、受信側の情報処理装置100bでは、画面共有モード(非共有)が設定されると、共有モード切換部25が、設定指示に従って、画面共有から非共有へと画面共有モードを切り換え、通信制御部11に対して、送信側の情報処理装置100aからの受信データの記録を指示する(ステップS501)。
<Process when switching screen sharing mode>
FIG. 12 is a sequence diagram illustrating a processing procedure example when switching the screen sharing mode according to the second modification.
As shown in FIG. 12, in the
その結果、通信制御部11は、送信側の情報処理装置100aから送信データ23Dを受信し、受信データを受信データ保持部32に記録する(ステップS502)。
As a result, the
また、共有モード切換部25は、描画部24及び操作種判別部22に対して、画面共有モードが画面共有から非共有へと切り換えられた旨を通知する(ステップS503)。
Further, the sharing
これを受けて、描画部24は、表示画面を、共有画面から個別画面へと切り換える(ステップS504)。
Receiving this, the
受信側の情報処理装置100bでは、個別画面上で手書き入力操作が行われると、対応する操作イベントが、描画部24及び操作種判別部22へと渡される。
In the
描画部24は、操作イベントに従って、手書きの軌跡にあたる線オブジェクトを個別画面上に描画する(ステップS601)。
The
また、操作種判別部22は、操作イベントに基づき、受け付けた入力操作が手書き入力操作であると判別し(ステップS602)、操作情報を、操作情報保持部31に記録する(ステップS603)。このとき、操作種判別部22は、手書き入力しているページを識別するページ番号や手書きの軌跡を示す複数の座標値(線を構成する座標値群)などを、入力操作の操作情報として記録する。
The operation
受信側の情報処理装置100bでは、画面共有モード(共有)が設定されると、共有モード切換部25が、設定指示に従って、非共有から画面共有へと画面共有モードを切り換え、通信制御部11に対して、送信側の情報処理装置100aからの受信データの記録終了を指示する(ステップS701)。これにより、受信データ保持部32への記録処理が終了する。
In the
また、共有モード切換部25は、描画部24及び操作種判別部22に対して、画面共有モードが非共有から画面共有へと切り換えられた旨を通知する(ステップS702)。これにより、操作情報保持部31への記録処理が終了する。
The sharing
これを受けて、描画部24は、表示画面を、個別画面から共有画面へと切り換え(ステップS703)、受信データ保持部32にアクセスし、受信データに含まれる操作情報に従って、送信側の入力操作を共有画面上に再現する(ステップS704)。
In response to this, the
以上のように、本変形例2に係る画面共有サービス提供システム1000では、画面共有時の高い利便性を実現できる。
As described above, the screen sharing
なお、本変形例2において、非共有から画面共有へと画面共有モードが切り換えられ、送信側の入力操作を受信側の共有画面に再現する際に、上記変形例1で提案した受信側の描画速度調整機能を適用することで、画面共有時のリアルタイム性を確保することもできる。 In the second modification, when the screen sharing mode is switched from non-sharing to screen sharing, and the input operation on the transmission side is reproduced on the shared screen on the reception side, the drawing on the reception side proposed in the first modification is performed. By applying the speed adjustment function, it is possible to ensure real-time performance when sharing the screen.
<変形例3>
以下に、上記実施形態に係る変形例3について説明する。
図13は、本変形例3に係る画面共有サービス提供システム1010の構成例を示す図である。
図13(A)に示すシステム構成と図1(A)に示したシステム構成との違いは、投影装置200がデータ伝送路Nに接続されている点である。
<Modification 3>
Below, the modification 3 which concerns on the said embodiment is demonstrated.
FIG. 13 is a diagram illustrating a configuration example of a screen sharing
The difference between the system configuration shown in FIG. 13A and the system configuration shown in FIG. 1A is that the
投影装置200は、無線通信機能及び情報表示機能などを有する機器であり、例えば、プロジェクタなどである。
The
図13(B)には、本変形例3に係る画面共有サービス提供システム1000を、プレゼンテーション会議に利用した場合(利用場面)の例が示されている。この場合、視聴者の情報処理装置1002,1003と同様に、発表者の情報処理装置1001との共有画面の表示内容が、投影装置200によりスクリーンへ投影される。
FIG. 13B shows an example in which the screen sharing
また、投影装置200では、上記実施形態に係る情報処理装置100と同様に、画面共有機能が動作可能なハードウェアを備えている。
In addition, the
図14は、本変形例3に係る投影装置200のハードウェア構成例を示す図である。
図14に示すように、投影装置200は、コントローラ210、操作パネル220、及び投影器230などを備え、それぞれが相互にバスBで接続されている。
FIG. 14 is a diagram illustrating a hardware configuration example of the
As shown in FIG. 14, the
操作パネル220は、入力部や表示部を備えており、機器情報などの各種情報を利用者に提供したり、動作設定や動作指示などの各種利用者操作を受け付けたりする入力・表示装置である。投影器230は、スクリーンなどに画像データを投影する装置である。
The
コントローラ210は、CPU211、記憶装置212、ネットワークI/F213、及び外部記憶I/F214などを備える制御基板であり、それぞれが相互にバスBで接続されている。
The
記憶装置211は、RAM、ROM、及びHDDなどを含み、各種プログラムやデータを格納及び/又は保持する装置である。CPU212は、ROMやHDDから、プログラムやデータをRAM上に読み出し、処理を実行する(記憶装置から読み出したプログラムやデータの処理を実行する)ことで、装置全体の制御や搭載機能を実現する演算装置である。
The
ネットワークI/F213は、投影装置200をデータ伝送路Nに接続するインタフェースである。これにより、投影装置200は、ネットワークI/F213を介して、情報処理装置100とデータ通信を行うことができる。
The network I /
外部記憶I/F214は、外部記憶装置にあたる記録媒体214aとのインタフェースである。記録媒体214aには、例えば、SDメモリカードやUSBメモリなどがある。これにより、投影装置200は、外部記憶I/F214を介して、記録媒体214aの読み取り及び/又は書き込みを行うことができる。
The external storage I /
よって、本変形例3に係る投影装置200では、上記ハードウェア構成により、搭載(インストール)された画面共有アプリのプログラム(画面共有機能を実現するソフトウェア)が、CPU211(演算装置)により、記憶装置212からメモリ(RAM)上に読み出され、実行されることで画面共有機能が実現される。
Therefore, in the
以上のように、本変形例3に係る画面共有サービス提供システム1010では、上記実施形態と同様の効果を奏することができる。
As described above, the screen sharing
ここまで、上記実施形態の説明を行ってきたが、上記実施形態に係る「画面共有機能」は、図を用いて説明を行った各処理手順を、動作環境(プラットフォーム)にあったプログラミング言語でコード化したプログラムが、システム1を構成する各機器(例えば「情報処理装置」や「投影装置」など)の演算装置(例えば「CPU」)により実行されることで実現される。
Up to this point, the above embodiment has been described. The “screen sharing function” according to the above embodiment is a programming language suitable for the operating environment (platform). The encoded program is implemented by an arithmetic device (for example, “CPU”) of each device (for example, “information processing apparatus”, “projection apparatus”, etc.) constituting the
例えば、情報処理装置100の場合、上記プログラムは、コンピュータが読み取り可能な記録媒体103aに格納することができる。これにより、例えば、上記プログラムは、ドライブ装置103を介して、情報処理装置100にインストールすることができる。また、情報処理装置100は、インタフェース装置107を備えていることから、電気通信回線を用いて上記プログラムをダウンロードし、インストールすることもできる。
For example, in the case of the
最後に、上記実施形態に挙げた形状や構成に、その他の要素との組み合わせなど、ここで示した要件に、本発明が限定されるものではない。これらの点に関しては、本発明の主旨をそこなわない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。 Finally, the present invention is not limited to the requirements shown here, such as combinations of other elements with the shapes and configurations described in the above embodiments. With respect to these points, the present invention can be changed within a range that does not detract from the gist of the present invention, and can be appropriately determined according to the application form.
11 通信制御部
21 操作権切換部
22 操作種判別部
23 送信データ生成部(D:送信データ)
24 描画部
25 共有モード切換部
31 操作情報保持部
32 受信データ保持部
100 情報処理装置
101 入力装置
102 表示装置
103 ドライブ装置(a:記録媒体)
104 RAM(揮発性の半導体メモリ)
105 ROM(不揮発性の半導体メモリ)
106 CPU(演算装置)
107 インタフェース装置(NIC:Network I/F Card)
108 HDD(不揮発性の記憶装置)
200 投影装置
210 コントローラ(制御基板)
211 CPU(演算装置)
212 記憶装置(ROM,RAM,HDDなど)
213 ネットワークI/F
214 外部記憶I/F(a:記録媒体)
1000,1010 画面共有サービス提供システム
B バス
N データ伝送路(ネットワーク)
11
24
104 RAM (volatile semiconductor memory)
105 ROM (nonvolatile semiconductor memory)
106 CPU (arithmetic unit)
107 Interface device (NIC: Network I / F Card)
108 HDD (nonvolatile storage device)
200
211 CPU (arithmetic unit)
212 Storage device (ROM, RAM, HDD, etc.)
213 Network I / F
214 External storage I / F (a: recording medium)
1000, 1010 Screen sharing service provision system B Bus N Data transmission path (network)
Claims (14)
前記複数の情報処理装置の少なくとも1以上の情報処理装置が、
他の情報処理装置と画面を共有する複数のページを含む表示コンテンツを第1の共有画面に表示させる表示手段と、
前記第1の共有画面上の少なくともページ送り操作を含む入力操作の権限を切り換える第1の切換手段と、
表示画面の画面共有の設定を切り換える第2の切換手段と、
前記入力操作の権限の切り換えに従って前記入力操作の権限を有している場合に受け付けた入力操作の操作情報を前記他の情報処理装置へ送信する送信手段と、
前記入力操作の権限を有しておらず、前記他の情報処理装置が前記入力操作の権限を有している場合に、前記他の情報処理装置の第2の共有画面上の少なくともページ送り操作を含む入力操作の操作情報を受信する受信手段と、
前記第1の共有画面の前記表示コンテンツの表示に対して、前記受信した操作情報又は前記受け付けた入力操作の操作情報に従って入力操作を描画反映する描画手段と、
を有し、
前記画面共有の設定の切り換えに従って前記入力操作を共有する設定から共有しない設定に切り換えられた場合に、前記第1の共有画面から前記表示コンテンツに対するページ送り操作を個別に受け付け可能とする個別画面に切り換える一方で、前記受信手段によって受信した前記第2の共有画面上のページ送り操作の操作情報を前記個別画面に描画反映せずに自装置の記憶領域に記録し、
前記個別画面において前記入力操作の権限を有している前記他の情報処理装置とは異なるページを個別に表示している際に前記画面共有の設定の切り換えに従って前記入力操作を前記共有しない設定から前記共有する設定に切り換えられた場合に、前記個別画面を表示している際に前記記憶領域に記録しておいた前記第2の共有画面上のページ送り操作の操作情報に従って、前記入力操作の権限を有している前記他の情報処理装置の第2の共有画面上に表示されているページと同じページが表示された前記第1の共有画面に切り換えることを特徴とするシステム。 A system having a plurality of information processing devices connected via a network,
At least one information processing apparatus of the plurality of information processing apparatuses is
Display means for displaying display content including a plurality of pages sharing a screen with another information processing apparatus on the first shared screen;
First switching means for switching authority of an input operation including at least a page turning operation on the first shared screen;
A second switching means for switching the screen sharing setting of the display screen;
Transmitting means for transmitting the operation information of the input operation accepted when the authority of the input operation according to the switching of the authority of the input operation to the other information processing apparatus;
If the user does not have the authority for the input operation and the other information processing apparatus has the authority for the input operation , at least a page turning operation on the second shared screen of the other information processing apparatus Receiving means for receiving operation information of an input operation including :
Drawing means for drawing and reflecting an input operation according to the received operation information or the operation information of the received input operation with respect to the display of the display content on the first shared screen;
Have
When switching from the setting for sharing the input operation to the setting for not sharing according to the switching of the setting for screen sharing, the page is changed to an individual screen that can individually accept page feed operations for the display content from the first shared screen. While switching , the operation information of the page turning operation on the second shared screen received by the receiving means is recorded in the storage area of the device without reflecting the drawing on the individual screen,
From the setting that the input operation is not shared according to the switching of the screen sharing setting when a page different from the other information processing apparatus having the authority of the input operation on the individual screen is individually displayed. When the setting is changed to the sharing setting, the input operation is performed according to the operation information of the page turning operation on the second shared screen recorded in the storage area when the individual screen is displayed . A system for switching to the first shared screen on which the same page as the page displayed on the second shared screen of the other information processing apparatus having the authority is displayed .
前記権限を取得するための設定指示に従って、自装置が前記権限を有さない設定から前記権限を有する設定へ切り換えられる場合に、前記第1の共有画面上の前記入力操作を受け付ける機能を無効から有効とする一方で、前記他の情報処理装置へ該他の情報処理装置の第2の共有画面上の前記入力操作を受け付ける機能を無効にするための通知を送信し、
前記少なくとも1以上の情報処理装置のいずれかにおいて前記権限を取得するための設定指示を受け付けた場合に、該権限を取得するための設定指示を受け付けるまで前記権限を有していた情報処理装置の前記入力操作を受け付ける機能は、前記権限を取得するための設定指示を受け付けた情報処理装置から送信された前記無効にするための通知に基づいて有効から無効となることを特徴とする請求項1から請求項3までのいずれか一項に記載のシステム。 The at least one information processing apparatus includes:
The function of accepting the input operation on the first shared screen is disabled when the own apparatus is switched from the setting without the authority to the setting with the authority according to the setting instruction for acquiring the authority. While enabling, sending a notification for invalidating the function of accepting the input operation on the second shared screen of the other information processing device to the other information processing device,
When a setting instruction for acquiring the authority is received in any of the at least one information processing apparatus, the information processing apparatus having the authority until the setting instruction for acquiring the authority is received The function of accepting the input operation is changed from valid to invalid based on the notification for invalidation transmitted from the information processing apparatus that accepted the setting instruction for acquiring the authority. The system according to any one of claims 3 to 4.
前記表示コンテンツを前記情報処理装置が備える記憶領域または外部の記憶領域から取得することを特徴とする請求項1から請求項4までのいずれか一項に記載のシステム。 The at least one information processing apparatus includes:
The system according to any one of claims 1 to 4, wherein the display content is acquired from a storage area provided in the information processing apparatus or an external storage area.
利用者によるポインタ操作を受け付けた場合、前記第1の共有画面上のポインタ位置にあたるポインタ位置情報を前記操作情報として送信することを特徴とする請求項1から請求項5までのいずれか一項に記載のシステム。 The at least one information processing apparatus includes:
When receiving a pointer operation by the user, to any one of claims 1, characterized in that to transmit the pointer position information corresponding to the pointer position on the first shared screen as the operation information to Claim 5 The described system.
それぞれの画面共有アプリを起動することによって前記表示コンテンツを前記共有画面へ表示させることを特徴とする請求項1から請求項7までのいずれか一項に記載のシステム。 The at least one information processing apparatus further has a screen sharing application installed;
The system according to any one of claims 1 to 7 , wherein the display content is displayed on the shared screen by activating each screen sharing application.
前記共有しない設定は、非共有モードであり、
前記共有モード又は前記非共有モードの設定指示を受け付けるGUI(Graphical User Interface)を表示することを特徴とする請求項1から請求項9までのいずれか一項に記載のシステム。 The sharing setting is a sharing mode,
The non-shared setting is a non-shared mode,
The system according to any one of claims 1 to 9, wherein a GUI (Graphical User Interface) that accepts an instruction to set the shared mode or the non-shared mode is displayed.
前記複数の情報処理装置の少なくとも1以上の情報処理装置が、
他の情報処理装置と画面を共有する複数のページを含む表示コンテンツを第1の共有画面に表示させる表示工程と、
前記第1の共有画面上の少なくともページ送り操作を含む入力操作の権限を切り換える第1の切換工程と、
表示画面の画面共有の設定を切り換える第2の切換工程と、
前記入力操作の権限の切り換えに従って前記入力操作の権限を有している場合に受け付けた入力操作の操作情報を前記他の情報処理装置へ送信する送信工程と、
前記入力操作の権限を有しておらず、前記他の情報処理装置が前記入力操作の権限を有している場合に、前記他の情報処理装置の第2の共有画面上の少なくともページ送り操作を含む入力操作の操作情報を受信する受信工程と、
前記第1の共有画面の前記表示コンテンツの表示に対して、前記受信した操作情報又は前記受け付けた入力操作の操作情報に従って入力操作を描画反映する描画工程と、
を有し、
前記画面共有の設定の切り換えに従って前記入力操作を共有する設定から共有しない設定に切り換えられた場合に、前記第1の共有画面から前記表示コンテンツに対するページ送り操作を個別に受け付け可能とする個別画面に切り換える一方で、前記受信工程において受信した前記第2の共有画面上のページ送り操作の操作情報を前記個別画面に描画反映せずに自装置の記憶領域に記録し、
前記個別画面において前記入力操作の権限を有している前記他の情報処理装置とは異なるページを個別に表示している際に前記画面共有の設定の切り換えに従って前記入力操作を前記共有しない設定から前記共有する設定に切り換えられた場合に、前記個別画面を表示している際に前記記憶領域に記録しておいた前記第2の共有画面上のページ送り操作の操作情報に従って、前記入力操作の権限を有している前記他の情報処理装置の第2の共有画面上に表示されているページと同じページが表示された前記第1の共有画面に切り換えることを特徴とする方法。 There is a method executed by a system having a plurality of information processing devices connected via a network,
At least one information processing apparatus of the plurality of information processing apparatuses is
A display step of displaying a display content including a plurality of pages sharing a screen with another information processing apparatus on the first shared screen;
A first switching step of switching authority of an input operation including at least a page turning operation on the first shared screen;
A second switching step for switching the screen sharing setting of the display screen;
A transmission step of transmitting the operation information of the input operation received when the authority of the input operation according to the switching of the authority of the input operation to the other information processing apparatus;
If the user does not have the authority for the input operation and the other information processing apparatus has the authority for the input operation , at least a page turning operation on the second shared screen of the other information processing apparatus A receiving process for receiving operation information of an input operation including :
A drawing step of drawing and reflecting an input operation according to the received operation information or the operation information of the received input operation with respect to the display of the display content on the first shared screen;
Have
When switching from the setting for sharing the input operation to the setting for not sharing according to the switching of the setting for screen sharing, the page is changed to an individual screen that can individually accept page feed operations for the display content from the first shared screen. While switching , the operation information of the page turning operation on the second shared screen received in the receiving step is recorded in the storage area of the own device without drawing and reflecting on the individual screen,
From the setting that the input operation is not shared according to the switching of the screen sharing setting when a page different from the other information processing apparatus having the authority of the input operation on the individual screen is individually displayed. When the setting is changed to the sharing setting, the input operation is performed according to the operation information of the page turning operation on the second shared screen recorded in the storage area when the individual screen is displayed . A method of switching to the first shared screen displaying the same page as the page displayed on the second shared screen of the other information processing apparatus having the authority .
他の情報処理装置と画面を共有する複数のページを含む表示コンテンツを第1の共有画面に表示させる表示手段と、
前記第1の共有画面上の少なくともページ送り操作を含む入力操作の権限を切り換える第1の切換手段と、
表示画面の画面共有の設定を切り換える第2の切換手段と、
前記入力操作の権限の切り換えに従って前記入力操作の権限を有している場合に受け付けた入力操作の操作情報を前記他の情報処理装置へ送信する送信手段と、
前記入力操作の権限を有しておらず、前記他の情報処理装置が前記入力操作の権限を有している場合に、前記他の情報処理装置の第2の共有画面上の少なくともページ送り操作を含む入力操作の操作情報を受信する受信手段と、
前記第1の共有画面の前記表示コンテンツの表示に対して、前記受信した操作情報又は前記受け付けた入力操作の操作情報に従って入力操作を描画反映する描画手段と、
を有し、
前記画面共有の設定の切り換えに従って前記入力操作を共有する設定から共有しない設定に切り換えられた場合に、前記第1の共有画面から前記表示コンテンツに対するページ送り操作を個別に受け付け可能とする個別画面に切り換える一方で、前記受信手段によって受信した前記第2の共有画面上のページ送り操作の操作情報を前記個別画面に描画反映せずに自装置の記憶領域に記録し、
前記個別画面において前記入力操作の権限を有している前記他の情報処理装置とは異なるページを個別に表示している際に前記画面共有の設定の切り換えに従って前記入力操作を前記共有しない設定から前記共有する設定に切り換えられた場合に、前記個別画面を表示している際に前記記憶領域に記録しておいた前記第2の共有画面上のページ送り操作の操作情報に従って、前記入力操作の権限を有している前記他の情報処理装置の第2の共有画面上に表示されているページと同じページが表示された前記第1の共有画面に切り換えることを特徴とする情報処理装置。 The information processing apparatus in a system having a plurality of information processing apparatuses connected via a network,
Display means for displaying display content including a plurality of pages sharing a screen with another information processing apparatus on the first shared screen;
First switching means for switching authority of an input operation including at least a page turning operation on the first shared screen;
A second switching means for switching the screen sharing setting of the display screen;
Transmitting means for transmitting the operation information of the input operation accepted when the authority of the input operation according to the switching of the authority of the input operation to the other information processing apparatus;
If the user does not have the authority for the input operation and the other information processing apparatus has the authority for the input operation , at least a page turning operation on the second shared screen of the other information processing apparatus Receiving means for receiving operation information of an input operation including :
Drawing means for drawing and reflecting an input operation according to the received operation information or the operation information of the received input operation with respect to the display of the display content on the first shared screen;
Have
When switching from the setting for sharing the input operation to the setting for not sharing according to the switching of the setting for screen sharing, the page is changed to an individual screen that can individually accept page feed operations for the display content from the first shared screen. While switching , the operation information of the page turning operation on the second shared screen received by the receiving means is recorded in the storage area of the device without reflecting the drawing on the individual screen,
From the setting that the input operation is not shared according to the switching of the screen sharing setting when a page different from the other information processing apparatus having the authority of the input operation on the individual screen is individually displayed. When the setting is changed to the sharing setting, the input operation is performed according to the operation information of the page turning operation on the second shared screen recorded in the storage area when the individual screen is displayed . An information processing apparatus that switches to the first shared screen on which the same page as the page displayed on the second shared screen of the other information processing apparatus having the authority is displayed .
他の情報処理装置と画面を共有する複数のページを含む表示コンテンツを第1の共有画面に表示させる表示手段と、
前記第1の共有画面上の少なくともページ送り操作を含む入力操作の権限を切り換える第1の切換手段と、
表示画面の画面共有の設定を切り換える第2の切換手段と、
前記入力操作の権限の切り換えに従って前記入力操作の権限を有している場合に受け付けた入力操作の操作情報を前記他の情報処理装置へ送信する送信手段と、
前記入力操作の権限を有しておらず、前記他の情報処理装置が前記入力操作の権限を有している場合に、前記他の情報処理装置の第2の共有画面上の少なくともページ送り操作を含む入力操作の操作情報を受信する受信手段と、
前記第1の共有画面の前記表示コンテンツの表示に対して、前記受信した操作情報又は前記受け付けた入力操作の操作情報に従って入力操作を描画反映する描画手段と、
として機能させ、
前記画面共有の設定の切り換えに従って前記入力操作を共有する設定から共有しない設定に切り換えられた場合に、前記第1の共有画面から前記表示コンテンツに対するページ送り操作を個別に受け付け可能とする個別画面に切り換える一方で、前記受信手段によって受信した前記第2の共有画面上のページ送り操作の操作情報を前記個別画面に描画反映せずに自装置の記憶領域に記録し、
前記個別画面において前記入力操作の権限を有している前記他の情報処理装置とは異なるページを個別に表示している際に前記画面共有の設定の切り換えに従って前記入力操作を前記共有しない設定から前記共有する設定に切り換えられた場合に、前記個別画面を表示している際に前記記憶領域に記録しておいた前記第2の共有画面上のページ送り操作の操作情報に従って、前記入力操作の権限を有している前記他の情報処理装置の第2の共有画面上に表示されているページと同じページが表示された前記第1の共有画面に切り換えることを特徴とするプログラム。 A computer constituting the information processing apparatus in a system having a plurality of information processing apparatuses connected via a network;
Display means for displaying display content including a plurality of pages sharing a screen with another information processing apparatus on the first shared screen;
First switching means for switching authority of an input operation including at least a page turning operation on the first shared screen;
A second switching means for switching the screen sharing setting of the display screen;
Transmitting means for transmitting the operation information of the input operation accepted when the authority of the input operation according to the switching of the authority of the input operation to the other information processing apparatus;
If the user does not have the authority for the input operation and the other information processing apparatus has the authority for the input operation , at least a page turning operation on the second shared screen of the other information processing apparatus Receiving means for receiving operation information of an input operation including :
Drawing means for drawing and reflecting an input operation according to the received operation information or the operation information of the received input operation with respect to the display of the display content on the first shared screen;
Function as
When switching from the setting for sharing the input operation to the setting for not sharing according to the switching of the setting for screen sharing, the page is changed to an individual screen that can individually accept page feed operations for the display content from the first shared screen. While switching , the operation information of the page turning operation on the second shared screen received by the receiving means is recorded in the storage area of the device without reflecting the drawing on the individual screen,
From the setting that the input operation is not shared according to the switching of the screen sharing setting when a page different from the other information processing apparatus having the authority of the input operation on the individual screen is individually displayed. When the setting is changed to the sharing setting, the input operation is performed according to the operation information of the page turning operation on the second shared screen recorded in the storage area when the individual screen is displayed . A program for switching to the first shared screen on which the same page as the page displayed on the second shared screen of the other information processing apparatus having the authority is displayed .
他の情報処理装置と画面を共有する複数のページを含む表示コンテンツを第1の共有画面に表示させる表示工程と、
前記第1の共有画面上の少なくともページ送り操作を含む入力操作の権限を切り換える第1の切換工程と、
表示画面の画面共有の設定を切り換える第2の切換工程と、
前記入力操作の権限の切り換えに従って前記入力操作の権限を有している場合に受け付けた入力操作の操作情報を前記他の情報処理装置へ送信する送信工程と、
前記入力操作の権限を有しておらず、前記他の情報処理装置が前記入力操作の権限を有している場合に、前記他の情報処理装置の第2の共有画面上の少なくともページ送り操作を含む入力操作の操作情報を受信する受信工程と、
前記第1の共有画面の前記表示コンテンツの表示に対して、前記受信した操作情報又は前記受け付けた入力操作の操作情報に従って入力操作を描画反映する描画工程と、
を有し、
前記画面共有の設定の切り換えに従って前記入力操作を共有する設定から共有しない設定に切り換えられた場合に、前記第1の共有画面から前記表示コンテンツに対するページ送り操作を個別に受け付け可能とする個別画面に切り換える一方で、前記受信工程において受信した前記第2の共有画面上のページ送り操作の操作情報を前記個別画面に描画反映せずに自装置の記憶領域に記録し、
前記個別画面において前記入力操作の権限を有している前記他の情報処理装置とは異なるページを個別に表示している際に前記画面共有の設定の切り換えに従って前記入力操作を前記共有しない設定から前記共有する設定に切り換えられた場合に、前記個別画面を表示している際に前記記憶領域に記録しておいた前記第2の共有画面上のページ送り操作の操作情報に従って、前記入力操作の権限を有している前記他の情報処理装置の第2の共有画面上に表示されているページと同じページが表示された前記第1の共有画面に切り換えることを特徴とする情報処理方法。 There is a method executed by the information processing apparatus in a system having a plurality of information processing apparatuses connected via a network,
A display step of displaying a display content including a plurality of pages sharing a screen with another information processing apparatus on the first shared screen;
A first switching step of switching authority of an input operation including at least a page turning operation on the first shared screen;
A second switching step for switching the screen sharing setting of the display screen;
A transmission step of transmitting the operation information of the input operation received when the authority of the input operation according to the switching of the authority of the input operation to the other information processing apparatus;
If the user does not have the authority for the input operation and the other information processing apparatus has the authority for the input operation , at least a page turning operation on the second shared screen of the other information processing apparatus A receiving process for receiving operation information of an input operation including :
A drawing step of drawing and reflecting an input operation according to the received operation information or the operation information of the received input operation with respect to the display of the display content on the first shared screen;
Have
When switching from the setting for sharing the input operation to the setting for not sharing according to the switching of the setting for screen sharing, the page is changed to an individual screen that can individually accept page feed operations for the display content from the first shared screen. While switching , the operation information of the page turning operation on the second shared screen received in the receiving step is recorded in the storage area of the own device without drawing and reflecting on the individual screen,
From the setting that the input operation is not shared according to the switching of the screen sharing setting when a page different from the other information processing apparatus having the authority of the input operation on the individual screen is individually displayed. When the setting is changed to the sharing setting, the input operation is performed according to the operation information of the page turning operation on the second shared screen recorded in the storage area when the individual screen is displayed . An information processing method characterized by switching to the first shared screen on which the same page as the page displayed on the second shared screen of the other information processing apparatus having the authority is displayed .
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010240005 | 2010-10-26 | ||
JP2010240005 | 2010-10-26 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016216614A Division JP6323537B2 (en) | 2010-10-26 | 2016-11-04 | Service providing system, service providing method, information processing apparatus, program, and information processing method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019146003A Division JP7003978B2 (en) | 2010-10-26 | 2019-08-08 | Systems, information processing equipment, methods, and programs |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018156662A JP2018156662A (en) | 2018-10-04 |
JP2018156662A5 JP2018156662A5 (en) | 2019-01-24 |
JP6569766B2 true JP6569766B2 (en) | 2019-09-04 |
Family
ID=51169446
Family Applications (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014002207A Pending JP2014112398A (en) | 2010-10-26 | 2014-01-09 | Screen sharing service providing system, information processing device, projection device, screen sharing service providing method, and screen sharing service providing program |
JP2015128069A Pending JP2015187889A (en) | 2010-10-26 | 2015-06-25 | Screen sharing service providing system, screen sharing method, information processing device, and program |
JP2016216614A Active JP6323537B2 (en) | 2010-10-26 | 2016-11-04 | Service providing system, service providing method, information processing apparatus, program, and information processing method |
JP2018076542A Active JP6569766B2 (en) | 2010-10-26 | 2018-04-12 | System, method executed by system, information processing apparatus, program, and method executed by information processing |
JP2019146003A Active JP7003978B2 (en) | 2010-10-26 | 2019-08-08 | Systems, information processing equipment, methods, and programs |
Family Applications Before (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014002207A Pending JP2014112398A (en) | 2010-10-26 | 2014-01-09 | Screen sharing service providing system, information processing device, projection device, screen sharing service providing method, and screen sharing service providing program |
JP2015128069A Pending JP2015187889A (en) | 2010-10-26 | 2015-06-25 | Screen sharing service providing system, screen sharing method, information processing device, and program |
JP2016216614A Active JP6323537B2 (en) | 2010-10-26 | 2016-11-04 | Service providing system, service providing method, information processing apparatus, program, and information processing method |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019146003A Active JP7003978B2 (en) | 2010-10-26 | 2019-08-08 | Systems, information processing equipment, methods, and programs |
Country Status (1)
Country | Link |
---|---|
JP (5) | JP2014112398A (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6451226B2 (en) * | 2014-11-06 | 2019-01-16 | 富士ゼロックス株式会社 | Information processing apparatus, information processing system, program, and recording medium |
JP2017068797A (en) * | 2015-10-02 | 2017-04-06 | 富士通株式会社 | Input support system and electronic apparatus |
KR20180135190A (en) * | 2017-06-12 | 2018-12-20 | 모브리진 주식회사 | Method and system for synchronized viewing between clients under web or cloud environment |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0675735A (en) * | 1992-08-27 | 1994-03-18 | Matsushita Electric Ind Co Ltd | Shared screen controller |
JP3283645B2 (en) * | 1993-07-26 | 2002-05-20 | 富士通株式会社 | Application cooperative operation control device |
JPH07298235A (en) * | 1994-04-27 | 1995-11-10 | Canon Inc | Video conference equipment and pointing cursor display control method |
JPH08241280A (en) * | 1995-03-01 | 1996-09-17 | Oki Electric Ind Co Ltd | Method for controlling application operation right |
JPH0962630A (en) * | 1995-08-22 | 1997-03-07 | Fujitsu Ltd | General application program sharing system |
JPH09330281A (en) * | 1996-06-13 | 1997-12-22 | Canon Inc | Information processor and its method, and information processing system and its system control method |
JP3821170B2 (en) * | 1996-07-26 | 2006-09-13 | 富士ゼロックス株式会社 | Method for managing collaborative work information and collaborative work support system |
JP2000066968A (en) * | 1998-08-26 | 2000-03-03 | Nippon Telegr & Teleph Corp <Ntt> | Synchronously controlling method for shared image, synchronous control system of shared image and recording medium recording synchronous control program for shared image |
JP2000092217A (en) * | 1998-09-09 | 2000-03-31 | Nippon Telegr & Teleph Corp <Ntt> | Picture display controlling method in electronic conference system, electronic conference system and recording medium recording picture display control program |
JP3846666B2 (en) * | 1998-09-24 | 2006-11-15 | 富士通株式会社 | Shared screen controller |
JP2001331428A (en) * | 2000-05-18 | 2001-11-30 | Chihiro Tsuyusaki | Remote operation software for information processor, remote operation system and recording medium having program recorded thereon |
JP2004110573A (en) * | 2002-09-19 | 2004-04-08 | Ricoh Co Ltd | Data communication method, data communication device, data communication system and data communication program |
US7634533B2 (en) * | 2004-04-30 | 2009-12-15 | Microsoft Corporation | Systems and methods for real-time audio-visual communication and data collaboration in a network conference environment |
JP2007018517A (en) * | 2006-07-10 | 2007-01-25 | Fujitsu Ltd | Three-dimensional object shared processing method and storage medium |
JP2010067108A (en) * | 2008-09-12 | 2010-03-25 | Hitachi Ltd | Picture display control method and its system |
JP2010181978A (en) * | 2009-02-03 | 2010-08-19 | Seiko Epson Corp | Collaborative work apparatus and method of controlling collaborative work |
-
2014
- 2014-01-09 JP JP2014002207A patent/JP2014112398A/en active Pending
-
2015
- 2015-06-25 JP JP2015128069A patent/JP2015187889A/en active Pending
-
2016
- 2016-11-04 JP JP2016216614A patent/JP6323537B2/en active Active
-
2018
- 2018-04-12 JP JP2018076542A patent/JP6569766B2/en active Active
-
2019
- 2019-08-08 JP JP2019146003A patent/JP7003978B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP6323537B2 (en) | 2018-05-16 |
JP2018156662A (en) | 2018-10-04 |
JP2020009456A (en) | 2020-01-16 |
JP2015187889A (en) | 2015-10-29 |
JP7003978B2 (en) | 2022-01-21 |
JP2014112398A (en) | 2014-06-19 |
JP2017021871A (en) | 2017-01-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6035712B2 (en) | Screen sharing service providing system, information processing apparatus, screen sharing service providing method, screen sharing service providing program, and program | |
US10419618B2 (en) | Information processing apparatus having whiteboard and video conferencing functions | |
US10431187B2 (en) | Terminal apparatus, screen recording method, program, and information processing system | |
EP2879044B1 (en) | Information processing apparatus, program, information processing system, and information processing method | |
TWI474186B (en) | Electronic device and method for collaborating editing by a plurality of mobile devices | |
JP6569766B2 (en) | System, method executed by system, information processing apparatus, program, and method executed by information processing | |
JP6656026B2 (en) | Information processing apparatus, information processing control method, and computer program | |
US20130038899A1 (en) | Remote print preview generation | |
JP2014182793A (en) | Encoder, video processing server, video processing system, encoding method, and program therefor | |
JP2015127944A (en) | Information processing system, information processing device, information processing method, and program | |
US20150341435A1 (en) | Communication system, transfer control device, and communication method | |
JP6244846B2 (en) | Information processing terminal, information processing method, program, and information processing system | |
JP6442940B2 (en) | Information processing system, information processing apparatus, device control method, and program | |
JP2022171740A (en) | Terminal device, program, content sharing method, and information processing system | |
JP7298224B2 (en) | Display device and display method | |
JP2020144725A (en) | Information processing system and control method thereof | |
JP2023128239A (en) | screen sharing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180508 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181205 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190415 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190423 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190624 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190709 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190722 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6569766 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |