JP7003978B2 - Systems, information processing equipment, methods, and programs - Google Patents

Systems, information processing equipment, methods, and programs Download PDF

Info

Publication number
JP7003978B2
JP7003978B2 JP2019146003A JP2019146003A JP7003978B2 JP 7003978 B2 JP7003978 B2 JP 7003978B2 JP 2019146003 A JP2019146003 A JP 2019146003A JP 2019146003 A JP2019146003 A JP 2019146003A JP 7003978 B2 JP7003978 B2 JP 7003978B2
Authority
JP
Japan
Prior art keywords
information processing
screen
page
sharing
processing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019146003A
Other languages
Japanese (ja)
Other versions
JP2020009456A5 (en
JP2020009456A (en
Inventor
侑作 桝田
遼一 馬場
圭史 岩田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of JP2020009456A publication Critical patent/JP2020009456A/en
Publication of JP2020009456A5 publication Critical patent/JP2020009456A5/en
Application granted granted Critical
Publication of JP7003978B2 publication Critical patent/JP7003978B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Digital Computer Display Output (AREA)

Description

本発明は、通信機能を有する複数の情報処理装置間において、リアルタイムで表示画面を共有する技術に関するものである。 The present invention relates to a technique for sharing a display screen in real time among a plurality of information processing devices having a communication function.

例えば、特許文献１には、マルチメディア会議環境において、サーバが、クライアント端末の表示画面をキャプチャし、他のクライアント端末に提供することで、リアルタイム情報交換を容易にする技術が開示されている。 For example, Patent Document 1 discloses a technique in which a server captures a display screen of a client terminal and provides it to another client terminal in a multimedia conference environment to facilitate real-time information exchange.

このように、従来では、通信機能を有する複数の情報処理装置間で画面情報をリアルタイムに送受信し、表示画面を共有する技術が知られている。このような技術は、例えば、共通する資料を複数の参加者が閲覧しながら議論を行う会議などで利用される。 As described above, conventionally, there is known a technique of transmitting and receiving screen information in real time between a plurality of information processing devices having a communication function and sharing a display screen. Such a technique is used, for example, in a conference where a plurality of participants browse and discuss common materials.

しかしながら、従来の方法では、表示画面を共有する情報処理装置間の通信や情報処理装置自体の描画処理（受信後の画面描画処理）に負荷がかかっていた。 However, in the conventional method, the communication between the information processing devices sharing the display screen and the drawing process of the information processing device itself (screen drawing process after reception) are burdened.

従来の方法は、情報処理装置間で表示画面の画像データ（画面情報）を送受信する仕組みとなっている。また、画面共有時のリアルタイム性を向上させるために、画像データを送受信する頻度（通信頻度）が高い。このように、従来の方法では、情報処理装置間で送受信するデータ量が多くなり、上述したような通信負荷や処理負荷などが生じてしまう。 The conventional method is a mechanism for transmitting and receiving image data (screen information) of a display screen between information processing devices. Further, in order to improve the real-time property at the time of screen sharing, the frequency of transmitting and receiving image data (communication frequency) is high. As described above, in the conventional method, the amount of data transmitted and received between the information processing devices becomes large, and the above-mentioned communication load and processing load are generated.

これらの問題点は、画面共有に係る時間（通信時間や画面描画処理時間）を冗長させる原因となり、画面共有時のリアルタイム性に悪影響を及ぼすことが懸念されることから、少ないデータ量で情報処理装置間の通信を行うことが望ましい。 These problems cause the time related to screen sharing (communication time and screen drawing processing time) to become redundant, and there is a concern that the real-time performance during screen sharing may be adversely affected. Therefore, information processing is performed with a small amount of data. It is desirable to communicate between devices.

本発明は上記従来技術の問題点を鑑み提案されたものであり、少ないデータ量で入力操作が反映された表示画面を共有できるシステム、情報処理装置、方法、及びプログラムを提供することにある。 The present invention has been proposed in view of the above-mentioned problems of the prior art, and provides a system , an information processing device , a method , and a program capable of sharing a display screen in which an input operation is reflected with a small amount of data. There is something in it.

上記目的を達成するため、本発明に係るシステムは、第１の表示装置を有する第１の情報処理装置と、前記第１の情報処理装置とネットワークを介して接続可能な第２の情報処理装置を有するシステムであって、前記第１の情報処理装置は、前記第２の情報処理装置と画面を共有するための複数のページを含む表示コンテンツを記憶する記憶手段と、前記第１の表示装置に表示された前記表示コンテンツに対する少なくともページ送り操作を含む入力操作の権限を切り換える指示を受け付ける第１のＧＵＩと、前記表示コンテンツの画面共有の設定を切り換える指示を受け付ける第２のＧＵＩを前記第１の表示装置に表示する表示手段と、前記権限を有している発表者が操作する前記第２の情報処理装置において受け付けたページ送り操作に応じて表示されたページと同じページを前記第１の表示装置に描画反映する描画手段と、入力操作の操作情報を含む送信データを生成する送信データ生成手段と、を有し、前記入力操作の権限を保有した場合に、前記送信データ生成手段により、利用者による入力操作の操作情報に基づき、前記送信データを生成し、前記送信データを、前記第２の情報処理装置へと送信し、利用者によるページ送り操作を受け付けた場合、前記送信データ生成手段により、ページ送り後に表示するページを識別するページ識別情報を含む送信データを生成し、前記第２のＧＵＩにおいて受け付けた指示に応じて、画面共有する設定から画面共有しない設定に切り換えられた場合に、前記表示コンテンツに対するページ送り操作を個別に受付可能とし、前記権限を有している発表者が操作する前記第２の情報処理装置の第２の表示装置に表示されている前記表示コンテンツのページとは異なるページを前記第１の表示装置に表示している際に、前記第２のＧＵＩにおいて受け付けた指示に応じて、前記画面共有しない設定から画面共有する設定に切り換えられた場合に、前記描画手段は、前記画面共有する設定に切り換えられる前に受信して前記記憶手段に記憶しておいた前記第２の情報処理装置から送信された前記発表者のページ送り操作の操作情報に従って、前記第２の表示装置に表示されている前記表示コンテンツのページと同じページを描画反映することを特徴とする。 In order to achieve the above object, the system according to the present invention includes a first information processing device having a first display device, and a second information processing device that can be connected to the first information processing device via a network. The first information processing apparatus includes a storage means for storing display contents including a plurality of pages for sharing a screen with the second information processing apparatus, and the first display device. The first GUI that accepts an instruction to switch the authority of an input operation including at least a page feed operation for the display content displayed on the display content, and a second GUI that accepts an instruction to switch the screen sharing setting of the display content. The same page as the page displayed in response to the display means displayed on the display device and the page feed operation received by the second information processing device operated by the presenter having the authority is the first page. The transmission data generation means has a drawing means for drawing and reflecting on the display device and a transmission data generation means for generating transmission data including operation information of the input operation, and when the authority for the input operation is possessed, the transmission data generation means is used. When the transmission data is generated based on the operation information of the input operation by the user, the transmission data is transmitted to the second information processing apparatus, and the page feed operation by the user is accepted, the transmission data generation is performed. When transmission data including page identification information that identifies the page to be displayed after page turning is generated by means, and the setting for screen sharing is switched to the setting for not sharing the screen according to the instruction received in the second GUI. In addition, the page feed operation for the display content can be individually accepted, and the display content displayed on the second display device of the second information processing device operated by the presenter having the authority. When a page different from the page is displayed on the first display device and the setting for not sharing the screen is switched to the setting for sharing the screen in response to the instruction received in the second GUI. The drawing means follows the operation information of the page feed operation of the presenter received from the second information processing apparatus and stored in the storage means before being switched to the screen sharing setting. It is characterized in that the same page as the page of the display content displayed on the second display device is drawn and reflected.

このような構成によって、本発明に係る画面共有サービス提供システムは、同一コンテンツが画面に表示された情報処理装置間において、操作権を有する情報処理装置が、入力操作に応じた操作情報を、他の情報処理装置へと送信し、他の情報処理装置が、受信した操作情報に従って、送信側の入力操作を画面上に再現する。 With such a configuration, in the screen sharing service providing system according to the present invention, the information processing device having the operation right between the information processing devices in which the same content is displayed on the screen can provide operation information according to the input operation. The information processing device is transmitted to the information processing device, and the other information processing device reproduces the input operation on the transmitting side on the screen according to the received operation information.

これによって、本発明に係る画面共有サービス提供システムでは、少ないデータ量で入力操作が反映された表示画面を共有できる。その結果、情報処理装置間の通信負荷が軽減（通信時間が短縮）され、情報処理装置自体の処理負荷が軽減（描画処理時間が軽減）される。そのため、本発明に係る画面共有サービス提供システムでは、画面共有時の高いリアルタイム性を実現できる。 As a result, the screen sharing service providing system according to the present invention can share the display screen on which the input operation is reflected with a small amount of data. As a result, the communication load between the information processing devices is reduced (communication time is shortened), and the processing load of the information processing device itself is reduced (drawing processing time is reduced). Therefore, in the screen sharing service providing system according to the present invention, high real-time performance at the time of screen sharing can be realized.

本発明によれば、情報処理装置間で予め表示コンテンツを共有しておき、各情報処理装置で受け付けた入力操作の操作情報のみをやり取りすることで、少ないデータ量で入力操作が反映された表示画面を共有可能なシステム、情報処理装置、方法、及びプログラムを提供することができる。 According to the present invention, display contents are shared between information processing devices in advance, and only the operation information of the input operation received by each information processing device is exchanged, so that the display reflects the input operation with a small amount of data. It is possible to provide a system , an information processing device , a method , and a program capable of sharing a screen.

本発明の第１の実施形態に係る画面共有サービス提供システムの構成例を示す図である。It is a figure which shows the configuration example of the screen sharing service provision system which concerns on 1st Embodiment of this invention. 本発明の第１の実施形態に係る情報処理装置のハードウェア構成例を示す図である。It is a figure which shows the hardware configuration example of the information processing apparatus which concerns on 1st Embodiment of this invention. 本発明の第１の実施形態に係る画面共有機能の構成例を示す図である。It is a figure which shows the structural example of the screen sharing function which concerns on 1st Embodiment of this invention. 本発明の第１の実施形態に係る操作情報の送信データ例を示す図である。It is a figure which shows the transmission data example of the operation information which concerns on 1st Embodiment of this invention. 本発明の第１の実施形態に係る画面共有サービス提供時の処理手順例を示すシーケンス図である。It is a sequence diagram which shows the processing procedure example at the time of providing a screen sharing service which concerns on 1st Embodiment of this invention. 発表者と視聴者との画面共有例を示す図である。It is a figure which shows the screen sharing example between a presenter and a viewer. 本発明の変形例１に係るポインタ移動操作時の画面共有処理手順例を示すシーケンス図である。It is a sequence diagram which shows the screen sharing processing procedure example at the time of a pointer movement operation which concerns on modification 1 of this invention. 本発明の変形例１に係る操作情報の送信データ例を示す図である。It is a figure which shows the transmission data example of the operation information which concerns on the modification 1 of this invention. 本発明の変形例１に係る操作時間と描画速度の調整係数との関係を示す図である。It is a figure which shows the relationship between the operation time which concerns on the modification 1 of this invention, and the adjustment coefficient of a drawing speed. 本発明の変形例１に係るポインタ移動操作時の画面共有例を示す図である。It is a figure which shows the screen sharing example at the time of the pointer movement operation which concerns on the modification 1 of this invention. 本発明の変形例２に係る画面共有機能の構成例を示す図である。It is a figure which shows the structural example of the screen sharing function which concerns on the modification 2 of this invention. 本発明の変形例２に係る画面共有モード切換時の処理手順例を示すシーケンス図である。It is a sequence diagram which shows the processing procedure example at the time of screen sharing mode switching which concerns on modification 2 of this invention. 本発明の変形例３に係る画面共有サービス提供システムの構成例を示す図である。It is a figure which shows the configuration example of the screen sharing service provision system which concerns on the modification 3 of this invention. 本発明の変形例３に係る投影装置のハードウェア構成例を示す図である。It is a figure which shows the hardware configuration example of the projection apparatus which concerns on the modification 3 of this invention.

以下、本発明の好適な実施の形態（以下「実施形態」と言う）について、図面を用いて詳細に説明する。 Hereinafter, preferred embodiments of the present invention (hereinafter referred to as “embodiments”) will be described in detail with reference to the drawings.

［第１の実施形態］
＜システム構成＞
図１は、本実施形態に係る画面共有サービス提供システム１０００の構成例を示す図である。
図１（Ａ）には、複数の情報処理装置１００１～１００ｎ（以下総称する場合「情報処理装置１００」と言う）が、ネットワークなどのデータ伝送路Ｎ（例えば「ＬＡＮ：Local Area Network」）を介して接続される構成例が示されている。なお、本実施形態では、無線通信環境を想定している。よって、上記データ伝送路Ｎは、例えば、無線ＬＡＮやＢｌｕｅｔｏｏｔｈ（商標又は登録商標）ネットワークなどである。 [First Embodiment]
<System configuration>
FIG. 1 is a diagram showing a configuration example of the screen sharing service providing system 1000 according to the present embodiment.
In FIG. 1A, a plurality of information processing devices 100 1 to 100 n (hereinafter collectively referred to as “information processing device 100”) are connected to a data transmission line N (for example, “LAN: Local Area Network”) such as a network. ) Is shown as a configuration example. In this embodiment, a wireless communication environment is assumed. Therefore, the data transmission line N is, for example, a wireless LAN, a Bluetooth (trademark or registered trademark) network, or the like.

情報処理装置１００は、無線通信機能、情報入力機能、及び情報表示機能などを有する機器である。なお、本実施形態では、デスクトップ型の一般的なＰＣ（Personal Computer）ではなく、携帯性に優れた情報端末を想定している。例えば、上記情報処理装置１００は、スマートフォンやタブレットＰＣなどである。 The information processing device 100 is a device having a wireless communication function, an information input function, an information display function, and the like. In this embodiment, an information terminal having excellent portability is assumed instead of a general desktop type PC (Personal Computer). For example, the information processing device 100 is a smartphone, a tablet PC, or the like.

図１（Ｂ）には、本実施形態に係る画面共有サービス提供システム１０００を、プレゼンテーション会議に利用した場合（利用場面）の例が示されている。この場合、本実施形態に係る画面共有サービス提供システム１０００は、次のように利用される。 FIG. 1B shows an example of a case where the screen sharing service providing system 1000 according to the present embodiment is used for a presentation meeting (usage scene). In this case, the screen sharing service providing system 1000 according to the present embodiment is used as follows.

まず、各情報処理装置１００１～１００４は、会議室内に設置されたアクセスポイントＡＰを検出し、無線ＬＡＮに接続する。 First, each of the information processing devices 100 1 to 100 4 detects the access point AP installed in the conference room and connects to the wireless LAN.

会議参加者は、各情報処理装置１００１～１００４において、本サービスの提供を実現する画面共有アプリ（画面共有機能を実現するソフトウェア）を起動し、プレゼンテーション資料にあたるコンテンツを画面に表示させる。これにより、情報処理装置間で表示コンテンツが共有されたことになる。 The conference participants activate the screen sharing application (software that realizes the screen sharing function) that realizes the provision of this service on each of the information processing devices 100 1 to 100 4 , and displays the content corresponding to the presentation material on the screen. As a result, the displayed content is shared between the information processing devices.

なお、表示コンテンツは、情報処理装置１００が備える記憶領域に保持している場合や、ファイルサーバなどの外部の記憶領域に保持されている場合などが考えられる。よって、会議参加者は、情報処理装置１００において、画面共有アプリを操作し、所定の記憶領域にアクセスすることで、表示コンテンツを取得する。 The display content may be stored in a storage area included in the information processing apparatus 100, or may be stored in an external storage area such as a file server. Therefore, the conference participant acquires the display content by operating the screen sharing application in the information processing apparatus 100 and accessing a predetermined storage area.

また、プレゼンテーションを行う発表者は、情報処理装置１００１において、画面共有アプリを操作し、共有画面上の入力操作の権限（以下「操作権」と言う）を保有している旨を、他の会議参加者である視聴者Ａ，Ｂ，Ｃに通知する。このとき、情報処理装置１００１では、ブロードキャストなどにより検出した視聴者Ａ，Ｂ，Ｃの情報処理装置１００２～１００４に対して、操作権保有の旨を通知している。 In addition, the presenter who gives the presentation operates the screen sharing application in the information processing apparatus 1001 and has another authority for input operation on the shared screen (hereinafter referred to as "operation right"). Notify viewers A, B, and C who are participants in the conference. At this time, the information processing device 100 1 notifies the information processing devices 100 2 to 100 4 of the viewers A, B, and C detected by broadcasting or the like that the operation right is possessed.

この状態で、情報処理装置１００１は、ページ送り操作やポインタ操作と言った発表者の入力操作を受け付けると、その操作情報を、情報処理装置１００２～１００４に対して送信する。その結果、視聴者Ａ，Ｂ，Ｃの情報処理装置１００２～１００４では、受信した操作情報に基づき、発表者の入力操作が画面上に再現される。これにより、本実施形態に係る画面共有サービス提供システム１０００では、情報処理装置間において、入力操作が反映された表示画面が共有される。 In this state, when the information processing apparatus 100 1 receives the presenter's input operation such as a page feed operation or a pointer operation, the information processing apparatus 100 1 transmits the operation information to the information processing apparatus 100 2 to 100 4 . As a result, in the information processing devices 100 2 to 100 4 of the viewers A, B, and C, the input operation of the presenter is reproduced on the screen based on the received operation information. As a result, in the screen sharing service providing system 1000 according to the present embodiment, the display screen reflecting the input operation is shared between the information processing devices.

以上のように、本実施形態に係る画面共有サービス提供システム１０００では、上記システム構成により、情報処理装置間における画面共有サービスを提供することができる。 As described above, in the screen sharing service providing system 1000 according to the present embodiment, the screen sharing service between the information processing devices can be provided by the above system configuration.

＜ハードウェア構成＞
図２は、本実施形態に係る情報処理装置１００のハードウェア構成例を示す図である。
図２に示すように、情報処理装置１００は、入力装置１０１、表示装置１０２、ドライブ装置１０３、ＲＡＭ（Random Access Memory）１０４、ＲＯＭ（Read Only Memory）１０５、ＣＰＵ（Central Processing Unit）１０６、インタフェース装置１０７、及びＨＤＤ（Hard Disk Drive）１０８などを備え、それぞれがバスＢで相互に接続されている。 <Hardware configuration>
FIG. 2 is a diagram showing a hardware configuration example of the information processing apparatus 100 according to the present embodiment.
As shown in FIG. 2, the information processing device 100 includes an input device 101, a display device 102, a drive device 103, a RAM (Random Access Memory) 104, a ROM (Read Only Memory) 105, a CPU (Central Processing Unit) 106, and an interface. A device 107, an HDD (Hard Disk Drive) 108, and the like are provided, and each is connected to each other by a bus B.

入力装置１０１は、タッチパネルなどを含み、情報処理装置１００に各操作信号を入力するのに用いられる。表示装置１０２は、ディスプレイなどを含み、情報処理装置１００による処理結果を表示する。 The input device 101 includes a touch panel and the like, and is used to input each operation signal to the information processing device 100. The display device 102 includes a display and the like, and displays the processing result by the information processing device 100.

インタフェース装置１０７は、情報処理装置１００をデータ伝送路Ｎに接続するインタフェースである。これにより、情報処理装置１００は、インタフェース装置１０７を介して、他の情報処理装置１００とデータ通信を行うことができる。 The interface device 107 is an interface for connecting the information processing device 100 to the data transmission line N. As a result, the information processing device 100 can perform data communication with another information processing device 100 via the interface device 107.

ＨＤＤ１０８は、プログラムやデータを格納している不揮発性の記憶装置である。格納されるプログラムやデータには、情報処理装置全体を制御する情報処理システム（例えば「Ｗｉｎｄｏｗｓ（商標又は登録商標）」や「ＵＮＩＸ（商標又は登録商標）」などの基本ソフトウェアであるＯＳ（Operating System））、及びシステム上において各種機能を提供するアプリケーション（例えば「画面共有アプリ」）などがある。また、ＨＤＤ１０８は、格納しているプログラムやデータを、所定のファイルシステム及び／又はＤＢ（Data Base）により管理している。 The HDD 108 is a non-volatile storage device that stores programs and data. The stored programs and data include OS (Operating System), which is basic software such as an information processing system that controls the entire information processing device (for example, "Windows (trademark or registered trademark)" or "UNIX (trademark or registered trademark)". )), And applications that provide various functions on the system (for example, "screen sharing application"). Further, the HDD 108 manages the stored programs and data by a predetermined file system and / or a DB (Data Base).

ドライブ装置１０３は、着脱可能な記録媒体１０３ａとのインタフェースである。これにより、情報処理装置１００は、ドライブ装置１０３を介して、記録媒体１０３ａの読み取り及び／又は書き込みを行うことができる。記録媒体１０３ａには、例えば、ＳＤメモリカード（SD Memory Card）やＵＳＢ（Universal Serial Bus）メモリなどがある。 The drive device 103 is an interface with the detachable recording medium 103a. As a result, the information processing device 100 can read and / or write to the recording medium 103a via the drive device 103. The recording medium 103a includes, for example, an SD memory card (SD Memory Card), a USB (Universal Serial Bus) memory, and the like.

ＲＯＭ１０５は、電源を切っても内部データを保持することができる不揮発性の半導体メモリ（記憶装置）である。ＲＯＭ１０５には、情報処理装置１００の起動時に実行されるＢＩＯＳ（Basic Input/Output System）、情報処理システム設定、及びネットワーク設定などのプログラムやデータが格納されている。ＲＡＭ１０４は、プログラムやデータを一時保持する揮発性の半導体メモリ（記憶装置）である。ＣＰＵ１０６は、上記記憶装置（例えば「ＨＤＤ」や「ＲＯＭ」など）から、プログラムやデータをＲＡＭ（メモリ）上に読み出し、処理を実行することで、装置全体の制御や搭載機能を実現する演算装置である。 The ROM 105 is a non-volatile semiconductor memory (storage device) capable of holding internal data even when the power is turned off. The ROM 105 stores programs and data such as a BIOS (Basic Input / Output System), an information processing system setting, and a network setting, which are executed when the information processing apparatus 100 is started. The RAM 104 is a volatile semiconductor memory (storage device) that temporarily holds programs and data. The CPU 106 is an arithmetic unit that realizes control and on-board functions of the entire device by reading a program or data from the storage device (for example, "HDD" or "ROM") onto a RAM (memory) and executing processing. Is.

以上のように、本実施形態に係る情報処理装置１００では、上記ハードウェア構成により、各種情報処理サービスを提供することができる。 As described above, the information processing apparatus 100 according to the present embodiment can provide various information processing services by the above hardware configuration.

＜画面共有機能＞
本実施形態に係る画面共有機能について説明する。
本実施形態に係る画面共有サービス提供システム１０００では、同一コンテンツが画面に表示された情報処理装置間において、操作権を有する情報処理装置１００１が、入力操作に応じた操作情報を、他の情報処理装置１００２～１００ｎへと送信し、他の情報処理装置１００２～１００ｎが、受信した操作情報に従って、送信側の入力操作を画面上に再現する。本実施形態に係る画面共有サービス提供システム１０００は、このような画面共有機能を有している。 <Screen sharing function>
The screen sharing function according to this embodiment will be described.
In the screen sharing service providing system 1000 according to the present embodiment, the information processing device 100 1 having the operation right between the information processing devices in which the same content is displayed on the screen provides the operation information corresponding to the input operation to other information. The information is transmitted to the processing devices 100 2 to 100 n , and the other information processing devices 100 2 to 100 n reproduce the input operation on the transmitting side on the screen according to the received operation information. The screen sharing service providing system 1000 according to the present embodiment has such a screen sharing function.

従来の方法では、表示画面を共有する情報処理装置間の通信や情報処理装置自体の描画処理（受信後の画面描画処理）に負荷がかかっていた。なぜなら、従来の方法は、情報処理装置間で、入力操作が反映された表示画面の画像データ（画面情報）を送受信し、さらに、画像データを送受信する頻度（通信頻度）が高い仕組みとなっており、情報処理装置間で送受信するデータ量が多いためである。 In the conventional method, the communication between the information processing devices sharing the display screen and the drawing process of the information processing device itself (screen drawing process after reception) are burdened. This is because the conventional method is a mechanism in which the image data (screen information) of the display screen reflecting the input operation is transmitted and received between the information processing devices, and the frequency (communication frequency) of transmitting and receiving the image data is high. This is because the amount of data transmitted and received between the information processing devices is large.

そのため、従来の方法では、画面共有に係る時間（通信時間や画面描画処理時間）が冗長し、画面共有時のリアルタイム性に悪影響を及ぼすことが懸念される。 Therefore, in the conventional method, the time related to screen sharing (communication time and screen drawing processing time) becomes redundant, and there is a concern that the real-time property at the time of screen sharing is adversely affected.

そこで、本実施形態に係る画面共有サービス提供システム１０００では、情報処理装置間で予め表示コンテンツを共有しておき、各情報処理装置１００１～１００ｎで受け付けた入力操作の操作情報のみをやり取りする仕組みとした。つまり、本実施形態では、情報処理装置間で、データ量の多い画像データを定期的にやり取りするのではなく、画面に表示する基本データが共有された情報処理装置間で、画面上に入力操作を反映させるために最低限必要なデータのみをやり取りすることで、情報処理装置間で送受信するデータ量を軽減するものである。 Therefore, in the screen sharing service providing system 1000 according to the present embodiment, display contents are shared in advance between the information processing devices, and only the operation information of the input operation received by each information processing device 100 1 to 100 n is exchanged. It was a mechanism. That is, in the present embodiment, instead of periodically exchanging image data having a large amount of data between the information processing devices, an input operation on the screen is performed between the information processing devices in which the basic data to be displayed on the screen is shared. By exchanging only the minimum necessary data to reflect the information processing device, the amount of data sent and received between the information processing devices is reduced.

これにより、本実施形態に係る画面共有サービス提供システム１０００では、少ないデータ量で入力操作が反映された表示画面を共有できる。 As a result, the screen sharing service providing system 1000 according to the present embodiment can share the display screen on which the input operation is reflected with a small amount of data.

以下に、本実施形態に係る画面共有機能の構成とその動作について説明する。
図３は、本実施形態に係る画面共有機能の構成例を示す図である。
図３に示すように、本実施形態に係る情報処理装置１００は、通信制御部１１、操作権切換部２１、操作種判別部２２、送信データ生成部２３、及び描画部２４などを有している。本実施形態に係る画面共有機能は、情報処理装置間において、これらの各機能部が連携動作することにより実現される。 The configuration and operation of the screen sharing function according to the present embodiment will be described below.
FIG. 3 is a diagram showing a configuration example of the screen sharing function according to the present embodiment.
As shown in FIG. 3, the information processing apparatus 100 according to the present embodiment includes a communication control unit 11, an operation right switching unit 21, an operation type determination unit 22, a transmission data generation unit 23, a drawing unit 24, and the like. There is. The screen sharing function according to the present embodiment is realized by the cooperative operation of each of these functional units between the information processing devices.

通信制御部１１は、情報処理装置間の通信を制御する機能部である。通信制御部１１は、インタフェース装置１０７を制御し、情報処理装置間でデータの送受信を行う。 The communication control unit 11 is a functional unit that controls communication between information processing devices. The communication control unit 11 controls the interface device 107 and transmits / receives data between the information processing devices.

操作権切換部２１は、情報処理装置間における共有画面の操作権を切り換える機能部である。操作権切換部２１は、操作権の設定指示を受け付けるＧＵＩ（Graphical User Interface）を画面に表示し、受け付けた設定指示に従って、共有画面の操作権を切り換える。 The operation right switching unit 21 is a functional unit for switching the operation right of the shared screen between the information processing devices. The operation right switching unit 21 displays a GUI (Graphical User Interface) for receiving an operation right setting instruction on the screen, and switches the operation right of the shared screen according to the received setting instruction.

操作権切換部２１は、操作権の設定指示を受け付けると、同機能部を有する情報処理装置１００において入力操作を受け付ける機能（例えば「タッチ入力機能」）を有効とし、通信制御部１１を介して、他の情報処理装置１００に対し、操作権を保有した旨を通知する。その結果、他の情報処理装置１００では、操作権切換部２１が、通信制御部１１を介して受信した通知に基づき、同装置における入力操作を受け付ける機能を無効にする。これにより、情報処理装置間では、共有画面の操作権が切り換えられる。 When the operation right switching unit 21 receives an operation right setting instruction, the information processing apparatus 100 having the same function unit enables a function (for example, "touch input function") for receiving an input operation, and the operation right switching unit 21 enables the function (for example, "touch input function") via the communication control unit 11. , Notifies the other information processing apparatus 100 that it has the operation right. As a result, in the other information processing apparatus 100, the operation right switching unit 21 disables the function of accepting the input operation in the apparatus based on the notification received via the communication control unit 11. As a result, the operation right of the shared screen is switched between the information processing devices.

また、このような操作権の切り換えにより、情報処理装置間におけるデータ送信の流れが決定される。つまり、操作情報を送受信する複数の情報処理装置１００において、操作権を保有し、操作情報を送信する情報処理装置（以下「送信側の情報処理装置」と言う）１００ａと、操作権を保有しておらず、操作情報を受信する情報処理装置（以下「受信側の情報処理装置」と言う）１００ｂと、が決定される。 Further, by switching the operation right in this way, the flow of data transmission between the information processing devices is determined. That is, in the plurality of information processing devices 100 that transmit and receive operation information, the information processing device 100a that holds the operation right and transmits the operation information (hereinafter referred to as "information processing device on the transmitting side") and the operation right are held. However, the information processing device (hereinafter referred to as “information processing device on the receiving side”) 100b for receiving the operation information is determined.

操作種判別部２２は、入力操作の種類を判別する機能部である。入力操作には、例えば、ページ送り操作やポインタ操作などがあり、このような操作種の違いによって、送信する操作情報が異なる。よって、送信データを生成する前段階で、入力操作の種類を判別しておく必要がある。入力操作は、異なる操作イベントとして、入力装置１０１から取得できることから、操作種判別部２２は、取得した操作イベントに基づき、入力操作の種類を判別する。 The operation type determination unit 22 is a functional unit that determines the type of input operation. The input operation includes, for example, a page feed operation and a pointer operation, and the operation information to be transmitted differs depending on the difference in the operation type. Therefore, it is necessary to determine the type of input operation before generating the transmission data. Since the input operation can be acquired from the input device 101 as a different operation event, the operation type determination unit 22 determines the type of the input operation based on the acquired operation event.

なお、操作種の判別は、上記方法に限らない。例えば、入力操作によって異なるプログラムコード（又はモジュール）が実行されるソフトウェア構成の場合、操作種判別部２２は、実行されるプログラムコード（又はモジュール）に基づき、入力操作の種類を判別してもよい。 The determination of the operation type is not limited to the above method. For example, in the case of a software configuration in which a different program code (or module) is executed depending on an input operation, the operation type determining unit 22 may determine the type of the input operation based on the executed program code (or module). ..

送信データ生成部２３は、入力操作の操作情報を含む送信データを生成する機能部である。送信データ生成部２３は、判別された入力操作に応じた操作情報に基づき、送信データを生成する。送信データ生成部２３は、例えば、図４に示すような送信データを生成する。 The transmission data generation unit 23 is a functional unit that generates transmission data including operation information of an input operation. The transmission data generation unit 23 generates transmission data based on the operation information corresponding to the determined input operation. The transmission data generation unit 23 generates transmission data as shown in FIG. 4, for example.

図４は、本実施形態に係る操作情報の送信データ例を示す図である。
図４（Ａ）に示すように、送信データ生成部２３は、操作種判別部２２により、受け付けた入力操作がページ送り操作であると判別された場合に、ページ送り後に表示するページを識別するページ番号（ページ識別情報）を、入力操作に応じた操作情報とし、ページ番号（ｐａｇｅ＝ｎ）を含む送信データ２３Ｄ１を生成する。また、図４（Ｂ）に示すように、送信データ生成部２３は、操作種判別部２２により、受け付けた入力操作がポインタ操作であると判別された場合に、画面上のポインタ位置にあたる座標値（ポインタ位置情報）を、入力操作に応じた操作情報とし、座標値（ｘ＝ａ，ｙ＝ｂ）を含む送信データ２３Ｄ２を生成する。なお、送信データ２３Ｄ１，２３Ｄ２を総称する場合には、「送信データ２３Ｄ」と言う。 FIG. 4 is a diagram showing an example of transmission data of operation information according to the present embodiment.
As shown in FIG. 4A, the transmission data generation unit 23 identifies the page to be displayed after page feed when the operation type determination unit 22 determines that the received input operation is a page feed operation. The page number (page identification information) is used as the operation information corresponding to the input operation, and the transmission data 23D 1 including the page number (page = n) is generated. Further, as shown in FIG. 4B, the transmission data generation unit 23 has a coordinate value corresponding to a pointer position on the screen when the operation type determination unit 22 determines that the received input operation is a pointer operation. (Pointer position information) is used as operation information corresponding to an input operation, and transmission data 23D 2 including coordinate values (x = a, y = b) is generated. When the transmission data 23D 1 and 23D 2 are generically referred to, they are referred to as "transmission data 23D".

送信データ生成部２３は、このようにして生成した送信データ２３Ｄを通信制御部１１へと渡し、データ送信の実行を指示する。これにより、情報処理装置間では、画面上に入力操作を反映させるために最低限必要なデータのみがやり取りされる。 The transmission data generation unit 23 passes the transmission data 23D thus generated to the communication control unit 11 and instructs the execution of data transmission. As a result, only the minimum data necessary for reflecting the input operation on the screen is exchanged between the information processing devices.

なお、操作種判別部２２及び送信データ生成部２３は、操作権の切り換えと連動して機能する。つまり、操作権を保有し、入力操作を受け付ける機能が有効となった送信側の情報処理装置１００ａでは、両機能部が機能する。一方、操作権の切り換えにより、入力操作を受け付ける機能が無効となった受信側の情報処理装置１００ｂでは、機能停止状態となる。 The operation type determination unit 22 and the transmission data generation unit 23 function in conjunction with the switching of the operation right. That is, in the information processing apparatus 100a on the transmitting side, which has the operation right and the function of accepting the input operation is enabled, both functional units function. On the other hand, the information processing apparatus 100b on the receiving side, in which the function of accepting the input operation is disabled due to the switching of the operation right, is in the function stop state.

描画部２４は、画面上に表示オブジェクトを描画する機能部である。描画部２４は、受け付けた操作イベント又は受信データに含まれる操作情報に従って、表示オブジェクトを描画する。描画部２４は、次のようにして表示オブジェクトを描画する。 The drawing unit 24 is a functional unit that draws a display object on the screen. The drawing unit 24 draws a display object according to the operation information included in the received operation event or received data. The drawing unit 24 draws a display object as follows.

送信側の情報処理装置１００ａでは、描画部２４が、同装置で受け付けた操作イベントに従って、表示オブジェクトを描画する。例えば、ページ送り操作の入力を受け付けた場合には、操作イベントに従って、ページ送り後に表示するページのページオブジェクトを画面上に描画する。また、ポインタ操作の入力を受け付けた場合には、操作イベントに従って、ポインタオブジェクトを画面上に描画する。 In the information processing device 100a on the transmitting side, the drawing unit 24 draws a display object according to an operation event received by the device. For example, when the input of the page feed operation is accepted, the page object of the page to be displayed after page feed is drawn on the screen according to the operation event. When the input of the pointer operation is accepted, the pointer object is drawn on the screen according to the operation event.

一方、受信側の情報処理装置１００ｂでは、描画部２４が、通信制御部１１を介して受信した受信データに含まれる操作情報に従って、表示オブジェクトを描画する。例えば、ページ番号を含む送信データ２３Ｄ１を受信した場合には、受信データに含まれるページ番号のページオブジェクトを画面上に描画し、画面遷移させる。また、座標値を含む送信データ２３Ｄ２を受信した場合には、受信データに含まれる座標値に従って、ポインタオブジェクトを画面上に描画する。これにより、受信側の情報処理装置１００ｂでは、受信した操作情報に従って、送信側の入力操作が画面上に再現される。 On the other hand, in the information processing apparatus 100b on the receiving side, the drawing unit 24 draws a display object according to the operation information included in the received data received via the communication control unit 11. For example, when the transmission data 23D 1 including the page number is received, the page object of the page number included in the received data is drawn on the screen and the screen is changed. When the transmission data 23D 2 including the coordinate values is received, the pointer object is drawn on the screen according to the coordinate values included in the received data. As a result, in the information processing apparatus 100b on the receiving side, the input operation on the transmitting side is reproduced on the screen according to the received operation information.

以上のように、本実施形態に係る画面共有機能は、上記各機能部が連携動作することにより実現される。具体的に、本実施形態に係る画面共有機能は、システム１０００を構成する情報処理装置１００に搭載（インストール）された画面共有アプリのプログラム（画面共有機能を実現するソフトウェア）が、各情報処理装置が備えるＣＰＵ１０６（演算装置）により、記憶装置（例えば「ＨＤＤ」や「ＲＯＭ」など）からメモリ（ＲＡＭ）上に読み出され、以下の処理が実行されることで実現される。 As described above, the screen sharing function according to the present embodiment is realized by the above-mentioned functional units operating in cooperation with each other. Specifically, in the screen sharing function according to the present embodiment, the program of the screen sharing application (software that realizes the screen sharing function) installed (installed) in the information processing device 100 constituting the system 1000 is used for each information processing device. It is realized by reading from a storage device (for example, "HDD", "ROM", etc.) onto a memory (RAM) by the CPU 106 (calculation device) provided in the software, and executing the following processing.

本実施形態に係る画面共有機能の詳細な動作（機能部群の連携動作）について、処理手順を示すシーケンス図を用いて説明する。 The detailed operation of the screen sharing function (coordination operation of the functional unit group) according to the present embodiment will be described with reference to a sequence diagram showing a processing procedure.

《画面共有サービス提供時の主な処理》
図５は、本実施形態に係る画面共有サービス提供時の処理手順例を示すシーケンス図である。なお、図５には、情報処理装置間において、操作権の切り換えにより、操作情報の送信側と受信側との各情報処理装置１００ａ，１００ｂが決定された後の処理手順が示されている。 << Main processing when providing screen sharing service >>
FIG. 5 is a sequence diagram showing an example of a processing procedure at the time of providing a screen sharing service according to the present embodiment. Note that FIG. 5 shows a processing procedure after the information processing devices 100a and 100b between the transmitting side and the receiving side of the operation information are determined by switching the operation right between the information processing devices.

（１）ページ送り操作時の画面共有
図５に示すように、送信側の情報処理装置１００ａでは、画面上でページ送り操作が行われると、対応する操作イベントが、描画部２４及び操作種判別部２２へと渡される。 (1) Screen sharing during page feed operation As shown in FIG. 5, in the information processing apparatus 100a on the transmitting side, when a page feed operation is performed on the screen, the corresponding operation event is determined by the drawing unit 24 and the operation type. It is handed over to department 22.

描画部２４は、操作イベントに従って、ページ送り後に表示するページのページオブジェクトを画面上に描画し、画面遷移させる（ステップＳ１０１）。 The drawing unit 24 draws a page object of the page to be displayed after page turning on the screen according to the operation event, and makes a screen transition (step S101).

また、操作種判別部２２は、操作イベントに基づき、受け付けた入力操作がページ送り操作であると判別し（ステップＳ１０２）、送信データ生成部２３に対して、送信データ２３Ｄ１の生成を指示する（ステップＳ１０３）。このとき、操作種判別部２２は、操作イベントから取得可能なページ送り後に表示するページのページ番号（以下便宜上「ページ送り先のページ番号」と言う）を、入力操作に応じた操作情報として、送信データ生成部２３へと渡す。 Further, the operation type determination unit 22 determines that the received input operation is a page feed operation based on the operation event (step S102), and instructs the transmission data generation unit 23 to generate the transmission data 23D 1 . (Step S103). At this time, the operation type determination unit 22 transmits the page number of the page to be displayed after page feed (hereinafter referred to as "page number of the page feed destination" for convenience) that can be acquired from the operation event as operation information corresponding to the input operation. It is passed to the data generation unit 23.

送信データ生成部２３は、ページ番号を含む送信データ２３Ｄ１を生成し（ステップＳ１０４）、通信制御部１１に対して、データ送信を指示する（ステップＳ１０５）。このとき、送信データ生成部２３は、生成後の送信データ２３Ｄ１を、通信制御部１１へと渡す。 The transmission data generation unit 23 generates transmission data 23D 1 including a page number (step S104), and instructs the communication control unit 11 to transmit data (step S105). At this time, the transmission data generation unit 23 passes the generated transmission data 23D 1 to the communication control unit 11.

これにより、送信側の情報処理装置１００ａからは、受信側の情報処理装置１００ｂに対して、ページ送り先のページ番号が送信される（ステップＳ１０６）。このとき、送信側の情報処理装置１００ａが有する通信制御部１１では、ブロードキャスト時に取得したネットワーク設定情報（例えば「ＩＰアドレス（Internet Protocol address）」に従って、受信側の情報処理装置１００ｂへのデータ送信が行われる。 As a result, the information processing apparatus 100a on the transmitting side transmits the page number of the page destination to the information processing apparatus 100b on the receiving side (step S106). At this time, the communication control unit 11 of the information processing device 100a on the transmitting side transmits data to the information processing device 100b on the receiving side according to the network setting information (for example, "IP address (Internet Protocol address)" acquired at the time of broadcasting. Will be done.

これを受けて、受信側の情報処理装置１００ｂでは、受信データが通信制御部１１から描画部２４へと渡され（ステップＳ１０７）、描画部２４が、受信データに含まれるページ番号のページオブジェクトを画面上に描画し、画面遷移させる（ステップＳ１０８）。これにより、受信側の情報処理装置１００ｂでは、受信したページ番号に従って、送信側のページ送り操作が画面上に再現される。 In response to this, in the information processing apparatus 100b on the receiving side, the received data is passed from the communication control unit 11 to the drawing unit 24 (step S107), and the drawing unit 24 sets the page object of the page number included in the received data. It is drawn on the screen and the screen is changed (step S108). As a result, in the information processing apparatus 100b on the receiving side, the page turning operation on the transmitting side is reproduced on the screen according to the received page number.

（２）ポインタ操作時の画面共有
図５に示すように、送信側の情報処理装置１００ａでは、画面上でポインタ操作が行われると、対応する操作イベントが、描画部２４及び操作種判別部２２へと渡される。 (2) Screen sharing during pointer operation As shown in FIG. 5, in the information processing apparatus 100a on the transmitting side, when a pointer operation is performed on the screen, the corresponding operation event is generated by the drawing unit 24 and the operation type determination unit 22. Passed to.

描画部２４は、操作イベントに従って、ポインタオブジェクトを画面上に描画する（ステップＳ２０１）。 The drawing unit 24 draws the pointer object on the screen according to the operation event (step S201).

また、操作種判別部２２は、操作イベントに基づき、受け付けた入力操作がポインタ操作であると判別し（ステップＳ２０２）、送信データ生成部２３に対して、送信データ２３Ｄ２の生成を指示する（ステップＳ２０３）。このとき、操作種判別部２２は、操作イベントから取得可能な画面上のポインタ位置にあたる座標値を、入力操作に応じた操作情報として、送信データ生成部２３へと渡す。 Further, the operation type determination unit 22 determines that the received input operation is a pointer operation based on the operation event (step S202), and instructs the transmission data generation unit 23 to generate the transmission data 23D 2 (step S202). Step S203). At this time, the operation type determination unit 22 passes the coordinate value corresponding to the pointer position on the screen that can be acquired from the operation event to the transmission data generation unit 23 as operation information corresponding to the input operation.

送信データ生成部２３は、画面上のポインタ位置にあたる座標値を含む送信データ２３Ｄ２を生成し（ステップＳ２０４）、通信制御部１１に対して、データ送信を指示する（ステップＳ２０５）。このとき、送信データ生成部２３は、生成後の送信データ２３Ｄ２を、通信制御部１１へと渡す。 The transmission data generation unit 23 generates transmission data 23D 2 including coordinate values corresponding to pointer positions on the screen (step S204), and instructs the communication control unit 11 to transmit data (step S205). At this time, the transmission data generation unit 23 passes the generated transmission data 23D 2 to the communication control unit 11.

なお、ポインタ操作時に生成する送信データ２３Ｄ２には、送信側と画面の大きさが異なる受信側において、送信側で行われたポインタ操作の再現位置を調整するためのデータを含めてもよい。具体的には、送信データ２３Ｄ２に、座標値の他、送信側の画面フレームサイズ（画面フレーム情報）を含める。 The transmission data 23D 2 generated at the time of the pointer operation may include data for adjusting the reproduction position of the pointer operation performed on the transmitting side on the receiving side whose screen size is different from that on the transmitting side. Specifically, the transmission data 23D 2 includes the screen frame size (screen frame information) of the transmission side in addition to the coordinate values.

これにより、送信側の情報処理装置１００ａからは、受信側の情報処理装置１００ｂに対して、ポインタ位置にあたる座標値及び送信側の画面フレームサイズが送信される（ステップＳ２０６）。 As a result, the information processing device 100a on the transmitting side transmits the coordinate value corresponding to the pointer position and the screen frame size on the transmitting side to the information processing device 100b on the receiving side (step S206).

これを受けて、受信側の情報処理装置１００ｂでは、受信データが通信制御部１１から描画部２４へと渡され（ステップＳ２０７）、描画部２４が、受信データに含まれる座標値及び画面フレームサイズに従って、ポインタオブジェクトを画面上に描画する（ステップＳ２０８）。このとき、描画部２４は、同機能部が動作する情報処理装置１００ｂの画面フレームサイズと、受信データに含まれる送信側の画面フレームサイズとに基づき、送信側画面の座標空間を受信側画面の座標空間に変換し（座標変換を行い）、ポインタオブジェクトの描画位置を調整する。 In response to this, in the information processing apparatus 100b on the receiving side, the received data is passed from the communication control unit 11 to the drawing unit 24 (step S207), and the drawing unit 24 receives the coordinate values and the screen frame size included in the received data. The pointer object is drawn on the screen according to the procedure (step S208). At this time, the drawing unit 24 sets the coordinate space of the transmitting side screen on the receiving side screen based on the screen frame size of the information processing device 100b in which the function unit operates and the screen frame size of the transmitting side included in the received data. Convert to the coordinate space (perform coordinate conversion) and adjust the drawing position of the pointer object.

これにより、受信側の情報処理装置１００ｂでは、受信した座標値及び画面フレームサイズに従って、送信側のポインタ操作が画面上に再現される。 As a result, in the information processing apparatus 100b on the receiving side, the pointer operation on the transmitting side is reproduced on the screen according to the received coordinate values and the screen frame size.

＜まとめ＞
以上のように、本実施形態に係る画面共有サービス提供システム１０００によれば、同一コンテンツが画面に表示された情報処理装置間において、操作権を有する情報処理装置（送信側の情報処理装置）１００ａが、操作種判別部２２により、入力操作を判別し、送信データ生成部２３により、判別された入力操作に応じた操作情報を含む送信データ２３Ｄを生成し、通信制御部１１を介して、他の情報処理装置（受信側の情報処理装置）１００ｂへと送信する。その結果、他の情報処理装置（受信側の情報処理装置）１００ｂでは、通信制御部１１を介して、送信データ２３Ｄを受信し、描画部２４により、受信データに含まれる操作情報に従って、送信側の入力操作が画面上に再現される。 <Summary>
As described above, according to the screen sharing service providing system 1000 according to the present embodiment, the information processing device (information processing device on the transmitting side) 100a having an operation right between the information processing devices in which the same content is displayed on the screen. However, the operation type discrimination unit 22 discriminates the input operation, the transmission data generation unit 23 generates the transmission data 23D including the operation information corresponding to the discriminated input operation, and the transmission data 23D is generated via the communication control unit 11. The information is transmitted to the information processing device (information processing device on the receiving side) 100b. As a result, the other information processing device (information processing device on the receiving side) 100b receives the transmission data 23D via the communication control unit 11, and the drawing unit 24 follows the operation information included in the received data on the transmitting side. The input operation of is reproduced on the screen.

これによって、本実施形態に係る画面共有サービス提供システム１０００では、少ないデータ量で入力操作が反映された表示画面を共有できる。その結果、情報処理装置間の通信負荷が軽減（通信時間が短縮）され、情報処理装置自体の処理負荷が軽減（描画処理時間が軽減）される。そのため、本実施形態に係る画面共有サービス提供システム１０００では、画面共有時の高いリアルタイム性を実現できる。 As a result, the screen sharing service providing system 1000 according to the present embodiment can share the display screen on which the input operation is reflected with a small amount of data. As a result, the communication load between the information processing devices is reduced (communication time is shortened), and the processing load of the information processing device itself is reduced (drawing processing time is reduced). Therefore, in the screen sharing service providing system 1000 according to the present embodiment, high real-time performance at the time of screen sharing can be realized.

＜変形例１＞
以下に、上記実施形態に係る変形例１を説明する。
図６は、発表者と視聴者との画面共有例を示す図である。図６には、図１（Ｂ）に示した利用場面における発表者側の表示画面Ｗ１と視聴者側の表示画面Ｗ２とが示されている。 <Modification 1>
Hereinafter, a modification 1 according to the above embodiment will be described.
FIG. 6 is a diagram showing an example of screen sharing between the presenter and the viewer. FIG. 6 shows a display screen W1 on the presenter side and a display screen W2 on the viewer side in the usage scene shown in FIG. 1 (B).

図６に示すように、例えば、発表者（操作権を保有している会議参加者）は、プレゼンテーション中に、表示画面Ｗ１に表示されたポインタオブジェクトを位置Ｐ１から位置Ｐ２へと移動させることがある。この場合、視聴者側の表示画面Ｗ２に、発表者のポインタ操作をリアルタイムに再現するため、発表者と視聴者との情報処理装置間では、発表者がポインタ操作を行う間（ポインタ操作中）、ポインタ位置にあたる座標値が定期的に送受信される。つまり、情報処理装置間では、座標値を含む送信データ２３Ｄ２が複数回に渡って送信される。 As shown in FIG. 6, for example, the presenter (meeting participant who holds the operation right) may move the pointer object displayed on the display screen W1 from the position P1 to the position P2 during the presentation. be. In this case, in order to reproduce the pointer operation of the presenter in real time on the display screen W2 on the viewer side, the information processing device between the presenter and the viewer is performing the pointer operation while the presenter is operating the pointer (during the pointer operation). , The coordinate value corresponding to the pointer position is periodically transmitted and received. That is, the transmission data 23D 2 including the coordinate values is transmitted a plurality of times between the information processing devices.

そこで、本変形例１では、画面上のポインタを移動操作する場合における情報処理装置間のデータ送信を、入力操作単位で一括送信し、通信頻度の減少から通信負荷を軽減する仕組みを提案する。また、本変形例１では、入力操作単位の一括送信であっても、受信側で発生すると考えられる入力操作の再現に係るタイムラグを相殺し、画面共有時のリアルタイム性を確保する仕組みについても提案する。 Therefore, in the first modification, we propose a mechanism to collectively transmit data between information processing devices when moving a pointer on the screen in units of input operations to reduce the communication load from a decrease in communication frequency. Further, in the present modification 1, even if the input operation unit is collectively transmitted, a mechanism for offsetting the time lag related to the reproduction of the input operation that is considered to occur on the receiving side and ensuring the real-time property at the time of screen sharing is also proposed. do.

《ポインタ移動操作時の画面共有処理》
図７は、本変形例１に係るポインタ移動操作時の画面共有処理手順例を示すシーケンス図である。
図７に示すように、送信側の情報処理装置１００ａでは、画面上でポインタ操作が開始されると、対応する操作イベントが、描画部２４及び操作種判別部２２へと渡される。 << Screen sharing process when moving the pointer >>
FIG. 7 is a sequence diagram showing an example of the screen sharing processing procedure at the time of the pointer movement operation according to the present modification 1.
As shown in FIG. 7, in the information processing apparatus 100a on the transmitting side, when the pointer operation is started on the screen, the corresponding operation event is passed to the drawing unit 24 and the operation type determination unit 22.

描画部２４は、操作イベントに従って、画面上にポインタオブジェクトの描画を開始する（ステップＳ３０１）。 The drawing unit 24 starts drawing the pointer object on the screen according to the operation event (step S301).

また、操作種判別部２２は、操作イベントに基づき、受け付けた入力操作がポインタ操作であると判別し（ステップＳ３０２）、送信データ生成部２３に対して、ポインタ操作が開始された旨を通知する（ステップＳ３０３）。このとき、操作種判別部２２は、操作イベントから取得可能な画面上のポインタ位置にあたる操作開始座標値を、入力操作に応じた操作情報として、送信データ生成部２３へと渡す。 Further, the operation type determination unit 22 determines that the received input operation is a pointer operation based on the operation event (step S302), and notifies the transmission data generation unit 23 that the pointer operation has started. (Step S303). At this time, the operation type determination unit 22 passes the operation start coordinate value corresponding to the pointer position on the screen that can be acquired from the operation event to the transmission data generation unit 23 as operation information corresponding to the input operation.

送信データ生成部２３は、操作開始の通知（送信データの生成指示）を受け付けると、次の処理を開始する。送信データ生成部２３は、操作時間［Ｔ１］を計測し、操作中のポインタ位置にあたる座標値を記録する（ステップＳ３０４）。このとき、操作時間［Ｔ１］の計測は、例えば、送信側の情報処理装置１００ａが備える時計回路（非図示）を用いて行う。また、座標値の記録は、操作種判別部２２から定期的に渡される操作中のポインタ位置にあたる座標値をメモリ（ＲＡＭ）上にバッファリングすることにより行われる。よって、メモリ上には、時間経過とともに、入力操作の軌跡を示す複数の座標値（座標値群）が一時保持されることになる。 When the transmission data generation unit 23 receives the notification of the start of the operation (instruction to generate the transmission data), the transmission data generation unit 23 starts the next processing. The transmission data generation unit 23 measures the operation time [T1] and records the coordinate value corresponding to the pointer position during the operation (step S304). At this time, the operation time [T1] is measured by using, for example, a clock circuit (not shown) provided in the information processing apparatus 100a on the transmitting side. Further, the coordinate value is recorded by buffering the coordinate value corresponding to the pointer position during the operation periodically passed from the operation type determination unit 22 to the memory (RAM). Therefore, a plurality of coordinate values (coordinate value group) indicating the trajectory of the input operation are temporarily held in the memory with the passage of time.

また、送信側の情報処理装置１００ａでは、画面上でポインタ操作が終了すると、対応する操作イベントが、描画部２４及び操作種判別部２２へと渡される。このとき、ポインタ操作の終了は、例えば、タッチ入力によるポインタ操作の場合、入力装置１０１により、タッチペンや指と言った指示部材の表示画面に対する接触状態に基づき検知される。入力装置１０１は、指示部材が画面上に接触している間、ポインタ操作中であるとし、画面上から離れた場合に、ポインタ操作の終了を検知する。 Further, in the information processing apparatus 100a on the transmitting side, when the pointer operation is completed on the screen, the corresponding operation event is passed to the drawing unit 24 and the operation type determination unit 22. At this time, the end of the pointer operation is detected by the input device 101 based on the contact state of the indicating member such as a stylus or a finger with respect to the display screen, for example, in the case of the pointer operation by touch input. The input device 101 assumes that the pointer is being operated while the instruction member is in contact with the screen, and detects the end of the pointer operation when the indicator member is away from the screen.

描画部２４は、操作イベント（検知結果）に従って、画面上へのポインタオブジェクトの描画を終了する（ステップＳ４０１）。 The drawing unit 24 ends drawing the pointer object on the screen according to the operation event (detection result) (step S401).

また、操作種判別部２２は、操作イベント（検知結果）に基づき、送信データ生成部２３に対して、ポインタ操作が終了した旨を通知する（ステップＳ４０２）。このとき、操作種判別部２２は、操作イベントから取得可能な画面上のポインタ位置にあたる操作終了座標値を、送信データ生成部２３へと渡す。これにより、操作種判別部２２は、送信データ生成部２３に対して、送信データ２３Ｄ２の生成を指示する。 Further, the operation type determination unit 22 notifies the transmission data generation unit 23 that the pointer operation has been completed based on the operation event (detection result) (step S402). At this time, the operation type determination unit 22 passes the operation end coordinate value corresponding to the pointer position on the screen that can be acquired from the operation event to the transmission data generation unit 23. As a result, the operation type determination unit 22 instructs the transmission data generation unit 23 to generate the transmission data 23D 2 .

送信データ生成部２３は、操作終了の通知（送信データの生成指示）を受け付けると、操作時間［Ｔ１］の計測及び座標値の記録を終了し、例えば、図８に示すような送信データ２３Ｄ２を生成する（ステップＳ４０３）。 When the transmission data generation unit 23 receives the notification of the end of the operation (instruction to generate the transmission data), the transmission data generation unit 23 ends the measurement of the operation time [T1] and the recording of the coordinate values, and for example, the transmission data 23D 2 as shown in FIG. Is generated (step S403).

図８は、本実施形態に係る操作情報の送信データ例を示す図である。
図８に示すように、送信データ生成部２３は、記録した座標値群（ｘ＝ａ１，ｙ＝ｂ２・・ｘ＝ａｎ，ｙ＝ｂｎ）、画面フレームサイズ（ｆｓｉｚｅ＝Ｗ［width］×Ｈ［height］）、及び計測した操作時間（ｔｉｍｅ＝Ｔ１［sec］）を含む送信データ２３Ｄ２を生成する。 FIG. 8 is a diagram showing an example of transmission data of operation information according to the present embodiment.
As shown in FIG. 8, the transmission data generation unit 23 has recorded coordinate value groups (x = a 1 , y = b 2 ... x = an, y = b n ) , and a screen frame size (fsize = W [. width] × H [height]), and transmission data 23D 2 including the measured operation time (time = T1 [sec]) is generated.

図７の説明に戻る。送信データ生成部２３は、生成後の送信データ２３Ｄ２を、通信制御部１１へと渡し、通信制御部１１に対して、データ送信を指示する（ステップＳ４０４）。 Returning to the description of FIG. The transmission data generation unit 23 passes the generated transmission data 23D 2 to the communication control unit 11 and instructs the communication control unit 11 to transmit data (step S404).

これにより、送信側の情報処理装置１００ａからは、受信側の情報処理装置１００ｂに対して、ポインタ移動操作開始から終了までのポインタ位置にあたる複数の座標値（記録順の座標値）、送信側の画面フレームサイズ、及びポインタ移動操作の操作時間［Ｔ１］が、入力操作ごと一括送信される（ステップＳ４０５）。これにより、本変形例１では、情報処理装置間の通信頻度が減り、通信負荷が軽減される。 As a result, the information processing device 100a on the transmitting side sends a plurality of coordinate values (coordinate values in the recording order) corresponding to the pointer positions from the start to the end of the pointer movement operation to the information processing device 100b on the receiving side. The screen frame size and the operation time [T1] of the pointer movement operation are collectively transmitted for each input operation (step S405). As a result, in the present modification 1, the communication frequency between the information processing devices is reduced, and the communication load is reduced.

また、受信側の情報処理装置１００ｂでは、受信データが通信制御部１１から描画部２４へと渡される（ステップＳ４０６）。 Further, in the information processing apparatus 100b on the receiving side, the received data is passed from the communication control unit 11 to the drawing unit 24 (step S406).

描画部２４は、まず、受信側でのポインタ移動操作の再現時間（ポインタオブジェクトの描画時間［Ｔ２］）を算出する（ステップＳ４０７）。このとき、描画部２４は、以下の式により、ポインタオブジェクトの描画時間［Ｔ２］を算出する。
描画時間［Ｔ２］＝操作時間［Ｔ１］×調整係数［ｋ］ ・・・・・・（式１）
調整係数［ｋ］ ：０ ＜ ［ｋ］ ＜ １ ・・・・・・（式２）
上記式からも分かるように、調整係数［ｋ］とは、送信側の入力操作を受信側で再現する際の速度（描画速度）を調整する係数である。 First, the drawing unit 24 calculates the reproduction time of the pointer movement operation on the receiving side (drawing time of the pointer object [T2]) (step S407). At this time, the drawing unit 24 calculates the drawing time [T2] of the pointer object by the following formula.
Drawing time [T2] = Operation time [T1] x Adjustment coefficient [k] ... (Equation 1)
Adjustment coefficient [k]: 0 <[k] <1 ... (Equation 2)
As can be seen from the above equation, the adjustment coefficient [k] is a coefficient for adjusting the speed (drawing speed) when the input operation on the transmitting side is reproduced on the receiving side.

ここで、操作時間［Ｔ１］と調整係数［ｋ］との関係について説明する。
図９は、本変形例１に係る操作時間［Ｔ１］と描画速度の調整係数［ｋ］との関係を示す図である。図９には、縦軸に調整係数［ｋ］、横軸に操作時間［Ｔ１］が示されている。 Here, the relationship between the operation time [T1] and the adjustment coefficient [k] will be described.
FIG. 9 is a diagram showing the relationship between the operation time [T1] and the drawing speed adjustment coefficient [k] according to the present modification 1. In FIG. 9, the vertical axis shows the adjustment coefficient [k], and the horizontal axis shows the operation time [T1].

図９に示すように、操作時間［Ｔ１］と調整係数［ｋ］とは、反比例の関係となっている。また、調整係数［ｋ］の値は、上記（式２）に示す範囲である。よって、調整係数［ｋ］は、操作時間［Ｔ１］が長ければ、'０'に近い小数値となる。一方、操作時間［Ｔ１］が短ければ、'１'に近い小数値となる。 As shown in FIG. 9, the operation time [T1] and the adjustment coefficient [k] have an inverse proportional relationship. The value of the adjustment coefficient [k] is in the range shown in the above (Equation 2). Therefore, the adjustment coefficient [k] becomes a decimal value close to '0' if the operation time [T1] is long. On the other hand, if the operation time [T1] is short, the numerical value is close to '1'.

描画部２４は、上記関係から、操作時間［Ｔ１］に基づき、描画時間［Ｔ２］の算出時に用いる調整係数［ｋ］を決定し、描画時間［Ｔ２］を算出する。具体的には、描画部２４は、操作時間［Ｔ１］と調整係数［ｋ］との関係データ（例えば「テーブルデータ」）を保持する所定の記憶領域にアクセスし、操作時間［Ｔ１］対応する調整係数［ｋ］の該当データを取得する。描画部２４は、取得した調整係数［ｋ］と受信データに含まれる操作時間［Ｔ１］とを上記（式１）に代入し、描画時間［Ｔ２］を算出する。 From the above relationship, the drawing unit 24 determines the adjustment coefficient [k] used when calculating the drawing time [T2] based on the operation time [T1], and calculates the drawing time [T2]. Specifically, the drawing unit 24 accesses a predetermined storage area that holds the relationship data (for example, "table data") between the operation time [T1] and the adjustment coefficient [k], and corresponds to the operation time [T1]. Acquire the corresponding data of the adjustment coefficient [k]. The drawing unit 24 substitutes the acquired adjustment coefficient [k] and the operation time [T1] included in the received data into the above (Equation 1) to calculate the drawing time [T2].

このように、描画部２４では、操作時間［Ｔ１］から決定した調整係数［ｋ］により、送信側の入力操作を受信側で再現する際の速度（描画速度）が調整される。具体的には、図１０に示す通りである。 In this way, in the drawing unit 24, the speed (drawing speed) when the input operation on the transmitting side is reproduced on the receiving side is adjusted by the adjustment coefficient [k] determined from the operation time [T1]. Specifically, it is as shown in FIG.

図１０は、本変形例１に係るポインタ移動操作時の画面共有例を示す図である。
例えば、本変形例１では、送信側で行われた入力操作の操作時間［Ｔ１］が長い場合、'０'に近い小数値である調整係数［ｋ］から、操作時間［Ｔ１］に対して短い描画時間［Ｔ２］が算出され、描画速度が速くなるように調整される。 FIG. 10 is a diagram showing an example of screen sharing during the pointer movement operation according to the present modification 1.
For example, in the present modification 1, when the operation time [T1] of the input operation performed on the transmitting side is long, the adjustment coefficient [k], which is a decimal value close to '0', is used with respect to the operation time [T1]. A short drawing time [T2] is calculated and adjusted so that the drawing speed becomes faster.

これにより、本変形例１では、送信側の入力操作を受信側の共有画面に反映する際に発生するタイムラグを相殺し、画面共有時のリアルタイム性を確保することができる。 Thereby, in the present modification 1, the time lag that occurs when the input operation on the transmitting side is reflected on the shared screen on the receiving side can be offset, and the real-time property at the time of screen sharing can be ensured.

図７の説明に戻る。描画部２４は、描画時間［Ｔ２］を算出後、受信データに含まれる複数の座標値（記録順の座標値）及び画面フレームサイズに従って、画面上にポインタオブジェクトの描画を開始する（ステップＳ４０８）。このとき、描画部２４は、算出した描画時間［Ｔ２］内に描画処理が終了する速度で、ポインタオブジェクトを描画する。これにより、受信側では、送信側で行われた入力操作の速度より、速い速度で、ポインタ移動操作が再現される。 Returning to the description of FIG. After calculating the drawing time [T2], the drawing unit 24 starts drawing a pointer object on the screen according to a plurality of coordinate values (coordinate values in the recording order) and screen frame size included in the received data (step S408). .. At this time, the drawing unit 24 draws the pointer object at a speed at which the drawing process is completed within the calculated drawing time [T2]. As a result, the pointer movement operation is reproduced on the receiving side at a speed faster than the speed of the input operation performed on the transmitting side.

以上のように、本変形例１に係る画面共有サービス提供システム１０００では、情報処理装置間のデータ送信を入力操作単位で一括送信することで、通信頻度が減り、通信負荷を軽減することができる。また、本変形例１に係る画面共有サービス提供システム１０００では、入力操作単位の一括送信であっても、送信側の入力操作を受信側で再現する際の速度を調整することで、画面共有時のリアルタイム性を確保することができる。 As described above, in the screen sharing service providing system 1000 according to the first modification, the communication frequency can be reduced and the communication load can be reduced by collectively transmitting the data transmission between the information processing devices in the input operation unit. .. Further, in the screen sharing service providing system 1000 according to the first modification, even if the input operation unit is batch transmission, the speed at which the input operation on the transmitting side is reproduced on the receiving side is adjusted to share the screen. Real-time property can be ensured.

なお、本変形例１では、送信側の入力操作に、ポインタを移動する操作を例に挙げたが、この限りでない。例えば、手書き入力操作などであってもよい。本変形例１に係る画面共有サービス提供システム１０００では、所定時間の間、表示画面に接触した状態での入力操作に対して、上記効果を奏する。 In this modification 1, the operation of moving the pointer is given as an example of the input operation on the transmitting side, but this is not the case. For example, it may be a handwriting input operation. The screen sharing service providing system 1000 according to the first modification has the above effect on an input operation in a state of being in contact with the display screen for a predetermined time.

＜変形例２＞
以下に、上記実施形態に係る変形例２について説明する。
本変形例２では、発表者（操作権を保有している会議参加者）が、プレゼンテーション中に、視聴者が、会議参加者同士で共有したプレゼンテーション資料に、個別メモを記録したい場合が考えられる。 <Modification 2>
Hereinafter, the modified example 2 according to the above embodiment will be described.
In this modification 2, the presenter (meeting participant who has the operation right) may want to record an individual memo in the presentation material shared by the viewers during the presentation. ..

そこで、本変形例２では、表示画面の共有／非共有（画面共有モード）が切り換えられる仕組みを提案する。
図１１は、本変形例２に係る画面共有機能の構成例を示す図である。
図１１に示す機能構成と図３に示した機能構成との違いは、共有モード切換部２５を有している点である。 Therefore, in the second modification, we propose a mechanism for switching between sharing / non-sharing of the display screen (screen sharing mode).
FIG. 11 is a diagram showing a configuration example of the screen sharing function according to the present modification 2.
The difference between the functional configuration shown in FIG. 11 and the functional configuration shown in FIG. 3 is that the shared mode switching unit 25 is provided.

共有モード切換部２５は、情報処理装置間における表示画面の共有／非共有を切り換える機能部である。共有モード切換部２５は、画面共有モード（共有／非共有）の設定指示を受け付けるＧＵＩを画面に表示し、受け付けた設定指示に従って、画面共有モードを切り換える。 The shared mode switching unit 25 is a functional unit for switching between sharing / non-sharing of display screens between information processing devices. The sharing mode switching unit 25 displays a GUI that accepts a screen sharing mode (shared / non-shared) setting instruction on the screen, and switches the screen sharing mode according to the accepted setting instruction.

なお、以下の説明では、主に画面共有モードの切り換えが行われる視聴者の情報処理装置、すなわち受信側の情報処理装置１００ｂを例に説明する。 In the following description, the information processing device of the viewer, that is, the information processing device 100b on the receiving side, in which the screen sharing mode is mainly switched, will be described as an example.

共有モード切換部２５は、非共有の設定指示を受け付けると、同機能部を有する情報処理装置１００ｂにおいて入力操作を受け付ける機能を有効とし、操作種判別部２２に対して、機能停止状態の解除を指示する。同時に、共有モード切換部２５は、描画部２４に対して、共有画面から個別画面への画面切換を指示する。その結果、操作種判別部２２は、描画部２４により共有画面から切り換えられた個別画面からの入力操作を受け付け、操作情報を操作情報保持部３１に記録する。なお、操作情報保持部３１は、例えば、情報処理装置１００ｂが備える記憶装置（例えば「ＨＤＤ」）の所定の記憶領域にあたる。これにより、視聴者は、自身が保有する情報処理装置１００ｂにおいて、手書き入力操作などにより、個別にメモを記録することができる。 When the shared mode switching unit 25 receives a non-shared setting instruction, the information processing apparatus 100b having the same function unit enables the function of accepting an input operation, and causes the operation type determination unit 22 to cancel the function stop state. Instruct. At the same time, the shared mode switching unit 25 instructs the drawing unit 24 to switch the screen from the shared screen to the individual screen. As a result, the operation type determination unit 22 accepts an input operation from the individual screen switched from the shared screen by the drawing unit 24, and records the operation information in the operation information holding unit 31. The operation information holding unit 31 corresponds to, for example, a predetermined storage area of a storage device (for example, “HDD”) included in the information processing device 100b. As a result, the viewer can individually record the memo in the information processing apparatus 100b owned by the viewer by handwriting input operation or the like.

また、共有モード切換部２５は、非共有の設定指示を受け付けると、通信制御部１１に対して、送信側の情報処理装置１００ａからの受信データ（送信側の操作情報）の記録を指示する。その結果、通信制御部１１は、送信側の情報処理装置１００ａから送信データ２３Ｄを受信し、受信データを受信データ保持部３２に記録する。なお、受信データ保持部３２は、情報処理装置１００ｂが備える記憶装置の所定の記憶領域にあたり、上記操作情報保持部３１と異なる記憶領域にあたる。つまり、本変形例２では、個別画面への入力操作と共有画面への入力操作とを、異なる記録領域により管理している。 When the shared mode switching unit 25 receives the non-shared setting instruction, the shared mode switching unit 25 instructs the communication control unit 11 to record the received data (operation information on the transmitting side) from the information processing device 100a on the transmitting side. As a result, the communication control unit 11 receives the transmission data 23D from the information processing device 100a on the transmission side, and records the reception data in the reception data holding unit 32. The received data holding unit 32 corresponds to a predetermined storage area of the storage device included in the information processing device 100b, and corresponds to a storage area different from the operation information holding unit 31. That is, in the present modification 2, the input operation to the individual screen and the input operation to the shared screen are managed by different recording areas.

なお、操作種判別部２２は、非共有から画面共有へと画面共有モードが切り換えられると、操作情報保持部３１への記録処理を終了し、再び、機能停止状態となる。また、通信制御部１１は、受信データ保持部３２への記録処理を終了し、描画部２４は、表示画面を、個別画面から共有画面へと切り換え、記録された受信データに基づき、送信側の入力操作を再現する。 When the screen sharing mode is switched from non-sharing to screen sharing, the operation type determination unit 22 ends the recording process in the operation information holding unit 31 and is in the function stop state again. Further, the communication control unit 11 ends the recording process in the received data holding unit 32, and the drawing unit 24 switches the display screen from the individual screen to the shared screen, and the transmitting side based on the recorded received data. Reproduce the input operation.

以上のように、本変形例２に係る画面共有機能は、上記各機能部が連携動作することにより実現される。 As described above, the screen sharing function according to the second modification is realized by the cooperative operation of the above-mentioned functional units.

《画面共有モード切換時の処理》
図１２は、本変形例２に係る画面共有モード切換時の処理手順例を示すシーケンス図である。
図１２に示すように、受信側の情報処理装置１００ｂでは、画面共有モード（非共有）が設定されると、共有モード切換部２５が、設定指示に従って、画面共有から非共有へと画面共有モードを切り換え、通信制御部１１に対して、送信側の情報処理装置１００ａからの受信データの記録を指示する（ステップＳ５０１）。 << Processing when switching screen sharing mode >>
FIG. 12 is a sequence diagram showing an example of a processing procedure at the time of switching the screen sharing mode according to the present modification 2.
As shown in FIG. 12, in the information processing apparatus 100b on the receiving side, when the screen sharing mode (non-sharing) is set, the sharing mode switching unit 25 changes from screen sharing to non-sharing according to the setting instruction. Is switched, and the communication control unit 11 is instructed to record the received data from the information processing apparatus 100a on the transmitting side (step S501).

その結果、通信制御部１１は、送信側の情報処理装置１００ａから送信データ２３Ｄを受信し、受信データを受信データ保持部３２に記録する（ステップＳ５０２）。 As a result, the communication control unit 11 receives the transmission data 23D from the information processing device 100a on the transmission side, and records the received data in the reception data holding unit 32 (step S502).

また、共有モード切換部２５は、描画部２４及び操作種判別部２２に対して、画面共有モードが画面共有から非共有へと切り換えられた旨を通知する（ステップＳ５０３）。 Further, the sharing mode switching unit 25 notifies the drawing unit 24 and the operation type determination unit 22 that the screen sharing mode has been switched from screen sharing to non-sharing (step S503).

これを受けて、描画部２４は、表示画面を、共有画面から個別画面へと切り換える（ステップＳ５０４）。 In response to this, the drawing unit 24 switches the display screen from the shared screen to the individual screen (step S504).

受信側の情報処理装置１００ｂでは、個別画面上で手書き入力操作が行われると、対応する操作イベントが、描画部２４及び操作種判別部２２へと渡される。 In the information processing apparatus 100b on the receiving side, when the handwriting input operation is performed on the individual screen, the corresponding operation event is passed to the drawing unit 24 and the operation type determination unit 22.

描画部２４は、操作イベントに従って、手書きの軌跡にあたる線オブジェクトを個別画面上に描画する（ステップＳ６０１）。 The drawing unit 24 draws a line object corresponding to a handwritten locus on an individual screen according to an operation event (step S601).

また、操作種判別部２２は、操作イベントに基づき、受け付けた入力操作が手書き入力操作であると判別し（ステップＳ６０２）、操作情報を、操作情報保持部３１に記録する（ステップＳ６０３）。このとき、操作種判別部２２は、手書き入力しているページを識別するページ番号や手書きの軌跡を示す複数の座標値（線を構成する座標値群）などを、入力操作の操作情報として記録する。 Further, the operation type determination unit 22 determines that the received input operation is a handwriting input operation based on the operation event (step S602), and records the operation information in the operation information holding unit 31 (step S603). At this time, the operation type determination unit 22 records a page number for identifying the page for which handwriting is being input, a plurality of coordinate values (coordinate value groups constituting the line) indicating the handwriting trajectory, and the like as operation information for the input operation. do.

受信側の情報処理装置１００ｂでは、画面共有モード（共有）が設定されると、共有モード切換部２５が、設定指示に従って、非共有から画面共有へと画面共有モードを切り換え、通信制御部１１に対して、送信側の情報処理装置１００ａからの受信データの記録終了を指示する（ステップＳ７０１）。これにより、受信データ保持部３２への記録処理が終了する。 In the information processing device 100b on the receiving side, when the screen sharing mode (sharing) is set, the sharing mode switching unit 25 switches the screen sharing mode from non-sharing to screen sharing according to the setting instruction, and the communication control unit 11 switches to the screen sharing mode. On the other hand, instructing the end of recording of the received data from the information processing apparatus 100a on the transmitting side (step S701). As a result, the recording process to the received data holding unit 32 is completed.

また、共有モード切換部２５は、描画部２４及び操作種判別部２２に対して、画面共有モードが非共有から画面共有へと切り換えられた旨を通知する（ステップＳ７０２）。これにより、操作情報保持部３１への記録処理が終了する。 Further, the sharing mode switching unit 25 notifies the drawing unit 24 and the operation type determination unit 22 that the screen sharing mode has been switched from non-sharing to screen sharing (step S702). As a result, the recording process in the operation information holding unit 31 is completed.

これを受けて、描画部２４は、表示画面を、個別画面から共有画面へと切り換え（ステップＳ７０３）、受信データ保持部３２にアクセスし、受信データに含まれる操作情報に従って、送信側の入力操作を共有画面上に再現する（ステップＳ７０４）。 In response to this, the drawing unit 24 switches the display screen from the individual screen to the shared screen (step S703), accesses the received data holding unit 32, and performs an input operation on the transmitting side according to the operation information included in the received data. Is reproduced on the shared screen (step S704).

以上のように、本変形例２に係る画面共有サービス提供システム１０００では、画面共有時の高い利便性を実現できる。 As described above, the screen sharing service providing system 1000 according to the second modification can realize high convenience at the time of screen sharing.

なお、本変形例２において、非共有から画面共有へと画面共有モードが切り換えられ、送信側の入力操作を受信側の共有画面に再現する際に、上記変形例１で提案した受信側の描画速度調整機能を適用することで、画面共有時のリアルタイム性を確保することもできる。 In the second modification, the screen sharing mode is switched from non-sharing to screen sharing, and when the input operation on the transmitting side is reproduced on the shared screen on the receiving side, the drawing on the receiving side proposed in the above modification 1 is performed. By applying the speed adjustment function, it is possible to ensure real-time performance when sharing the screen.

＜変形例３＞
以下に、上記実施形態に係る変形例３について説明する。
図１３は、本変形例３に係る画面共有サービス提供システム１０１０の構成例を示す図である。
図１３（Ａ）に示すシステム構成と図１（Ａ）に示したシステム構成との違いは、投影装置２００がデータ伝送路Ｎに接続されている点である。 <Modification 3>
Hereinafter, the modified example 3 according to the above embodiment will be described.
FIG. 13 is a diagram showing a configuration example of the screen sharing service providing system 1010 according to the present modification 3.
The difference between the system configuration shown in FIG. 13A and the system configuration shown in FIG. 1A is that the projection device 200 is connected to the data transmission line N.

投影装置２００は、無線通信機能及び情報表示機能などを有する機器であり、例えば、プロジェクタなどである。 The projection device 200 is a device having a wireless communication function, an information display function, and the like, and is, for example, a projector.

図１３（Ｂ）には、本変形例３に係る画面共有サービス提供システム１０００を、プレゼンテーション会議に利用した場合（利用場面）の例が示されている。この場合、視聴者の情報処理装置１００２，１００３と同様に、発表者の情報処理装置１００１との共有画面の表示内容が、投影装置２００によりスクリーンへ投影される。 FIG. 13B shows an example of a case where the screen sharing service providing system 1000 according to the third modification is used for a presentation meeting (usage scene). In this case, similarly to the information processing devices 100 2 and 100 3 of the viewer, the display content of the screen shared with the information processing device 100 1 of the presenter is projected onto the screen by the projection device 200.

また、投影装置２００では、上記実施形態に係る情報処理装置１００と同様に、画面共有機能が動作可能なハードウェアを備えている。 Further, the projection device 200 is provided with hardware capable of operating the screen sharing function, similarly to the information processing device 100 according to the above embodiment.

図１４は、本変形例３に係る投影装置２００のハードウェア構成例を示す図である。
図１４に示すように、投影装置２００は、コントローラ２１０、操作パネル２２０、及び投影器２３０などを備え、それぞれが相互にバスＢで接続されている。 FIG. 14 is a diagram showing a hardware configuration example of the projection device 200 according to the present modification 3.
As shown in FIG. 14, the projection device 200 includes a controller 210, an operation panel 220, a projector 230, and the like, each of which is connected to each other by a bus B.

操作パネル２２０は、入力部や表示部を備えており、機器情報などの各種情報を利用者に提供したり、動作設定や動作指示などの各種利用者操作を受け付けたりする入力・表示装置である。投影器２３０は、スクリーンなどに画像データを投影する装置である。 The operation panel 220 is provided with an input unit and a display unit, and is an input / display device that provides various information such as device information to the user and accepts various user operations such as operation settings and operation instructions. .. The projector 230 is a device that projects image data onto a screen or the like.

コントローラ２１０は、ＣＰＵ２１１、記憶装置２１２、ネットワークＩ／Ｆ２１３、及び外部記憶Ｉ／Ｆ２１４などを備える制御基板であり、それぞれが相互にバスＢで接続されている。 The controller 210 is a control board including a CPU 211, a storage device 212, a network I / F 213, an external storage I / F 214, and the like, and each of them is connected to each other by a bus B.

記憶装置２１１は、ＲＡＭ、ＲＯＭ、及びＨＤＤなどを含み、各種プログラムやデータを格納及び／又は保持する装置である。ＣＰＵ２１２は、ＲＯＭやＨＤＤから、プログラムやデータをＲＡＭ上に読み出し、処理を実行する（記憶装置から読み出したプログラムやデータの処理を実行する）ことで、装置全体の制御や搭載機能を実現する演算装置である。 The storage device 211 includes a RAM, a ROM, an HDD, and the like, and is a device that stores and / or holds various programs and data. The CPU 212 reads programs and data from the ROM and HDD onto the RAM and executes processing (executes processing of the programs and data read from the storage device), thereby performing control and mounting functions of the entire device. It is a device.

ネットワークＩ／Ｆ２１３は、投影装置２００をデータ伝送路Ｎに接続するインタフェースである。これにより、投影装置２００は、ネットワークＩ／Ｆ２１３を介して、情報処理装置１００とデータ通信を行うことができる。 The network I / F 213 is an interface for connecting the projection device 200 to the data transmission line N. As a result, the projection device 200 can perform data communication with the information processing device 100 via the network I / F 213.

外部記憶Ｉ／Ｆ２１４は、外部記憶装置にあたる記録媒体２１４ａとのインタフェースである。記録媒体２１４ａには、例えば、ＳＤメモリカードやＵＳＢメモリなどがある。これにより、投影装置２００は、外部記憶Ｉ／Ｆ２１４を介して、記録媒体２１４ａの読み取り及び／又は書き込みを行うことができる。 The external storage I / F 214 is an interface with the recording medium 214a, which is an external storage device. The recording medium 214a includes, for example, an SD memory card or a USB memory. As a result, the projection device 200 can read and / or write to the recording medium 214a via the external storage I / F 214.

よって、本変形例３に係る投影装置２００では、上記ハードウェア構成により、搭載（インストール）された画面共有アプリのプログラム（画面共有機能を実現するソフトウェア）が、ＣＰＵ２１１（演算装置）により、記憶装置２１２からメモリ（ＲＡＭ）上に読み出され、実行されることで画面共有機能が実現される。 Therefore, in the projection device 200 according to the third modification, the program (software that realizes the screen sharing function) of the screen sharing application installed (installed) by the above hardware configuration is stored by the CPU 211 (arithmetic unit). The screen sharing function is realized by reading from 212 on the memory (RAM) and executing the screen sharing function.

以上のように、本変形例３に係る画面共有サービス提供システム１０１０では、上記実施形態と同様の効果を奏することができる。 As described above, the screen sharing service providing system 1010 according to the third modification can achieve the same effect as that of the above embodiment.

ここまで、上記実施形態の説明を行ってきたが、上記実施形態に係る「画面共有機能」は、図を用いて説明を行った各処理手順を、動作環境（プラットフォーム）にあったプログラミング言語でコード化したプログラムが、システム１を構成する各機器（例えば「情報処理装置」や「投影装置」など）の演算装置（例えば「ＣＰＵ」）により実行されることで実現される。 Up to this point, the above-described embodiment has been described, but the "screen sharing function" according to the above-described embodiment uses a programming language suitable for the operating environment (platform) for each processing procedure described with reference to the figure. The coded program is realized by being executed by an arithmetic unit (for example, "CPU") of each device (for example, "information processing device" or "projection device") constituting the system 1.

例えば、情報処理装置１００の場合、上記プログラムは、コンピュータが読み取り可能な記録媒体１０３ａに格納することができる。これにより、例えば、上記プログラムは、ドライブ装置１０３を介して、情報処理装置１００にインストールすることができる。また、情報処理装置１００は、インタフェース装置１０７を備えていることから、電気通信回線を用いて上記プログラムをダウンロードし、インストールすることもできる。 For example, in the case of the information processing apparatus 100, the program can be stored in a computer-readable recording medium 103a. Thereby, for example, the above program can be installed in the information processing apparatus 100 via the drive apparatus 103. Further, since the information processing device 100 includes the interface device 107, the above program can be downloaded and installed using a telecommunication line.

最後に、上記実施形態に挙げた形状や構成に、その他の要素との組み合わせなど、ここで示した要件に、本発明が限定されるものではない。これらの点に関しては、本発明の主旨をそこなわない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。 Finally, the present invention is not limited to the requirements shown here, such as the combination of the shapes and configurations described in the above embodiments with other elements. With respect to these points, the gist of the present invention can be changed without impairing the gist of the present invention, and can be appropriately determined according to the application form thereof.

１１ 通信制御部
２１ 操作権切換部
２２ 操作種判別部
２３ 送信データ生成部（Ｄ：送信データ）
２４ 描画部
２５ 共有モード切換部
３１ 操作情報保持部
３２ 受信データ保持部
１００ 情報処理装置
１０１ 入力装置
１０２ 表示装置
１０３ ドライブ装置（ａ：記録媒体）
１０４ ＲＡＭ（揮発性の半導体メモリ）
１０５ ＲＯＭ（不揮発性の半導体メモリ）
１０６ ＣＰＵ（演算装置）
１０７ インタフェース装置（ＮＩＣ：Network I/F Card）
１０８ ＨＤＤ（不揮発性の記憶装置）
２００ 投影装置
２１０ コントローラ（制御基板）
２１１ ＣＰＵ（演算装置）
２１２ 記憶装置（ＲＯＭ，ＲＡＭ，ＨＤＤなど）
２１３ ネットワークＩ／Ｆ
２１４ 外部記憶Ｉ／Ｆ（ａ：記録媒体）
１０００，１０１０ 画面共有サービス提供システム
Ｂ バス
Ｎ データ伝送路（ネットワーク） 11 Communication control unit 21 Operation right switching unit 22 Operation type discrimination unit 23 Transmission data generation unit (D: Transmission data)
24 Drawing unit 25 Shared mode switching unit 31 Operation information holding unit 32 Received data holding unit 100 Information processing device 101 Input device 102 Display device 103 Drive device (a: Recording medium)
104 RAM (volatile semiconductor memory)
105 ROM (non-volatile semiconductor memory)
106 CPU (arithmetic logic unit)
107 Interface device (NIC: Network I / F Card)
108 HDD (non-volatile storage device)
200 Projection device 210 Controller (control board)
211 CPU (arithmetic unit)
212 Storage device (ROM, RAM, HDD, etc.)
213 Network I / F
214 External storage I / F (a: recording medium)
1000, 1010 Screen sharing service provision system B Bus N Data transmission line (network)

特開２００５－３１８５８９号公報Japanese Unexamined Patent Publication No. 2005-318589

Claims (9)

第１の表示装置を有する第１の情報処理装置と、前記第１の情報処理装置とネットワークを介して接続可能な第２の情報処理装置を有するシステムであって、
前記第１の情報処理装置は、
前記第２の情報処理装置と画面を共有するための複数のページを含む表示コンテンツを記憶する記憶手段と、
前記第１の表示装置に表示された前記表示コンテンツに対する少なくともページ送り操作を含む入力操作の権限を切り換える指示を受け付ける第１のＧＵＩと、
前記表示コンテンツの画面共有の設定を切り換える指示を受け付ける第２のＧＵＩを前記第１の表示装置に表示する表示手段と、
前記権限を有している発表者が操作する前記第２の情報処理装置において受け付けたページ送り操作に応じて表示されたページと同じページを前記第１の表示装置に描画反映する描画手段と、
入力操作の操作情報を含む送信データを生成する送信データ生成手段と、を有し、
前記入力操作の権限を保有した場合に、
前記送信データ生成手段により、利用者による入力操作の操作情報に基づき、前記送信データを生成し、前記送信データを、前記第２の情報処理装置へと送信し、
利用者によるページ送り操作を受け付けた場合、
前記送信データ生成手段により、ページ送り後に表示するページを識別するページ識別情報を含む送信データを生成し、
前記第２のＧＵＩにおいて受け付けた指示に応じて、画面共有する設定から画面共有しない設定に切り換えられた場合に、前記表示コンテンツに対するページ送り操作を個別に受付可能とし、
前記権限を有している発表者が操作する前記第２の情報処理装置の第２の表示装置に表示されている前記表示コンテンツのページとは異なるページを前記第１の表示装置に表示している際に、前記第２のＧＵＩにおいて受け付けた指示に応じて、前記画面共有しない設定から画面共有する設定に切り換えられた場合に、前記描画手段は、前記画面共有する設定に切り換えられる前に受信して前記記憶手段に記憶しておいた前記第２の情報処理装置から送信された前記発表者のページ送り操作の操作情報に従って、前記第２の表示装置に表示されている前記表示コンテンツのページと同じページを描画反映することを特徴とするシステム。 A system having a first information processing device having a first display device and a second information processing device that can be connected to the first information processing device via a network.
The first information processing device is
A storage means for storing display contents including a plurality of pages for sharing a screen with the second information processing device, and a storage means.
A first GUI that accepts an instruction to switch the authority of an input operation including at least a page feed operation for the display content displayed on the first display device.
A display means for displaying a second GUI on the first display device for receiving an instruction to switch the screen sharing setting of the display content, and a display means.
A drawing means for drawing and reflecting the same page as the page displayed in response to the page feed operation received by the second information processing device operated by the presenter having the authority on the first display device.
It has a transmission data generation means for generating transmission data including operation information of an input operation, and has.
If you have the authority to perform the above input operations
The transmission data generation means generates the transmission data based on the operation information of the input operation by the user, and transmits the transmission data to the second information processing apparatus.
When the page feed operation by the user is accepted
The transmission data generation means generates transmission data including page identification information that identifies the page to be displayed after page feed.
When the setting for screen sharing is switched to the setting for not sharing the screen according to the instruction received in the second GUI, the page feed operation for the display content can be individually accepted.
A page different from the page of the display content displayed on the second display device of the second information processing device operated by the presenter having the authority is displayed on the first display device. When the setting for not sharing the screen is switched to the setting for sharing the screen in response to the instruction received in the second GUI, the drawing means receives the information before switching to the setting for sharing the screen. The page of the display content displayed on the second display device according to the operation information of the page feed operation of the presenter transmitted from the second information processing device stored in the storage means. A system characterized by drawing and reflecting the same page as. 前記第１の情報処理装置は、
入力操作の開始から終了までの画面上の軌跡を示す複数の座標値を、前記操作情報として所定の記憶領域に記録し、入力操作の操作時間を計測し、
入力操作が終了した場合に、
前記送信データ生成手段により、記録した複数の座標値及び計測した操作時間を含む送信データを生成し、前記送信データを、他の情報処理装置へと送信することを特徴とする請求項１に記載のシステム。 The first information processing device is
A plurality of coordinate values indicating the locus on the screen from the start to the end of the input operation are recorded in a predetermined storage area as the operation information, and the operation time of the input operation is measured.
When the input operation is completed
The first aspect of claim 1 , wherein the transmission data generation means generates transmission data including a plurality of recorded coordinate values and measured operation times, and transmits the transmission data to another information processing apparatus. System. 前記第２の情報処理装置は、
受信データに含まれる操作時間に所定の係数を乗算することで、表示オブジェクトの描画時間を算出し、
前記描画手段により、算出した描画時間内に、受信データに含まれる操作情報に従って、表示オブジェクトを描画することを特徴とする請求項２に記載のシステム。 The second information processing device is
By multiplying the operation time included in the received data by a predetermined coefficient, the drawing time of the display object is calculated.
The system according to claim 2 , wherein the display object is drawn according to the operation information included in the received data within the calculated drawing time by the drawing means. 前記第２の情報処理装置は、
前記操作時間と反比例の関係を有し、値の範囲が０より大きく１より小さい係数を用いて、表示オブジェクトの描画時間を算出することを特徴とする請求項３に記載のシステム。 The second information processing device is
The system according to claim 3 , wherein the drawing time of the display object is calculated by using a coefficient having an inverse proportional relationship with the operation time and having a value range larger than 0 and smaller than 1. 前記第１の情報処理装置は、
利用者によるポインタ操作を受け付けた場合、
前記送信データ生成手段により、画面上のポインタ位置にあたるポインタ位置情報を含む送信データを生成することを特徴とする請求項１ないし４のいずれか一項に記載のシステム。 The first information processing device is
When the pointer operation by the user is accepted
The system according to any one of claims 1 to 4 , wherein the transmission data generation means generates transmission data including pointer position information corresponding to a pointer position on the screen. 前記第１の情報処理装置は、
利用者からの切り換え指示に従って、情報処理装置間における画面共有／非共有の画面共有モードを切り換える共有モード切換手段を有し、
前記共有モード切換手段により、画面共有モードが画面共有から非共有に切り換えられた場合に、
受信データを所定の記憶領域に記録し、
前記共有モード切換手段により、画面共有モードが非共有から画面共有に切り換えられた場合に、
前記描画手段により、記録した受信データに含まれる操作情報に従って、表示オブジェクトを描画することを特徴とする請求項１ないし５のいずれか一項に記載のシステム。 The first information processing device is
It has a shared mode switching means for switching between screen sharing / non-sharing screen sharing modes between information processing devices according to a switching instruction from the user.
When the screen sharing mode is switched from screen sharing to non-sharing by the sharing mode switching means,
Record the received data in a predetermined storage area and
When the screen sharing mode is switched from non-sharing to screen sharing by the sharing mode switching means,
The system according to any one of claims 1 to 5 , wherein a display object is drawn according to the operation information included in the recorded received data by the drawing means. 第１の表示装置を有し、ネットワークを介して第２の情報処理装置と接続可能な第１の情報処理装置であって、
前記第２の情報処理装置と画面を共有するための複数のページを含む表示コンテンツを記憶する記憶手段と、
前記第１の表示装置に表示された前記表示コンテンツに対する少なくともページ送り操作を含む入力操作の権限を切り換える指示を受け付ける第１のＧＵＩと、
前記表示コンテンツの画面共有の設定を切り換える指示を受け付ける第２のＧＵＩを前記第１の表示装置に表示する表示手段と、
前記権限を有している発表者が操作する前記第２の情報処理装置において受け付けたページ送り操作に応じて表示されたページと同じページを前記第１の表示装置に描画反映する描画手段と、
入力操作の操作情報を含む送信データを生成する送信データ生成手段と、を有し、
前記入力操作の権限を保有した場合に、
前記送信データ生成手段により、利用者による入力操作の操作情報に基づき、前記送信データを生成し、前記送信データを、前記第２の情報処理装置へと送信し、
利用者によるページ送り操作を受け付けた場合、
前記送信データ生成手段により、ページ送り後に表示するページを識別するページ識別情報を含む送信データを生成し、
前記第２のＧＵＩにおいて受け付けた指示に応じて、画面共有する設定から画面共有しない設定に切り換えられた場合に、前記表示コンテンツに対するページ送り操作を個別に受付可能とし、
前記権限を有している発表者が操作する前記第２の情報処理装置の第２の表示装置に表示されている前記表示コンテンツのページとは異なるページを前記第１の表示装置に表示している際に、前記第２のＧＵＩにおいて受け付けた指示に応じて、前記画面共有しない設定から画面共有する設定に切り換えられた場合に、前記描画手段は、前記画面共有する設定に切り換えられる前に受信して前記記憶手段に記憶しておいた前記第２の情報処理装置から送信された前記発表者のページ送り操作の操作情報に従って、前記第２の表示装置に表示されている前記表示コンテンツのページと同じページを描画反映することを特徴とする情報処理装置。 A first information processing device having a first display device and connectable to a second information processing device via a network.
A storage means for storing display contents including a plurality of pages for sharing a screen with the second information processing device, and a storage means.
A first GUI that accepts an instruction to switch the authority of an input operation including at least a page feed operation for the display content displayed on the first display device.
A display means for displaying a second GUI on the first display device for receiving an instruction to switch the screen sharing setting of the display content, and a display means.
A drawing means for drawing and reflecting the same page as the page displayed in response to the page feed operation received by the second information processing device operated by the presenter having the authority on the first display device.
It has a transmission data generation means for generating transmission data including operation information of an input operation, and has.
If you have the authority to perform the above input operations
The transmission data generation means generates the transmission data based on the operation information of the input operation by the user, and transmits the transmission data to the second information processing apparatus.
When the page feed operation by the user is accepted
The transmission data generation means generates transmission data including page identification information that identifies the page to be displayed after page feed.
When the setting for screen sharing is switched to the setting for not sharing the screen according to the instruction received in the second GUI, the page feed operation for the display content can be individually accepted.
A page different from the page of the display content displayed on the second display device of the second information processing device operated by the presenter having the authority is displayed on the first display device. When the setting for not sharing the screen is switched to the setting for sharing the screen in response to the instruction received in the second GUI, the drawing means receives the information before switching to the setting for sharing the screen. The page of the display content displayed on the second display device according to the operation information of the page feed operation of the presenter transmitted from the second information processing device stored in the storage means. An information processing device characterized by drawing and reflecting the same page as. 第１の表示装置を有する第１の情報処理装置と、前記第１の情報処理装置とネットワークを介して接続可能な第２の情報処理装置を有するシステムによる方法であって、
前記第１の情報処理装置が、
前記第２の情報処理装置と画面を共有するための複数のページを含む表示コンテンツを記憶手段に記憶し、
前記第１の表示装置に表示された前記表示コンテンツに対する少なくともページ送り操作を含む入力操作の権限を切り換える指示を受け付ける第１のＧＵＩと、前記表示コンテンツの画面共有の設定を切り換える指示を受け付ける第２のＧＵＩを前記第１の表示装置に表示し、
前記権限を有している発表者が操作する前記第２の情報処理装置において受け付けたページ送り操作に応じて表示されたページと同じページを前記第１の表示装置に描画反映し、
前記入力操作の権限を保有した場合に、
利用者による入力操作の操作情報に基づき、前記入力操作の操作情報を含む送信データを生成し、前記送信データを、前記第２の情報処理装置へと送信し、
利用者によるページ送り操作を受け付けた場合に、
ページ送り後に表示するページを識別するページ識別情報を含む送信データを生成し、
前記第２のＧＵＩにおいて受け付けた指示に応じて、画面共有する設定から画面共有しない設定に切り換えられた場合に、前記表示コンテンツに対するページ送り操作を個別に受付可能とし、
前記権限を有している発表者が操作する前記第２の情報処理装置の第２の表示装置に表示されている前記表示コンテンツのページとは異なるページを前記第１の表示装置に表示している際に、前記第２のＧＵＩにおいて受け付けた指示に応じて、前記画面共有しない設定から画面共有する設定に切り換えられた場合に、前記画面共有する設定に切り換えられる前に受信して前記記憶手段に記憶しておいた前記第２の情報処理装置から送信された前記発表者のページ送り操作の操作情報に従って、前記第２の表示装置に表示されている前記表示コンテンツのページと同じページを描画反映することを特徴とする方法。 A method based on a system having a first information processing device having a first display device and a second information processing device that can be connected to the first information processing device via a network.
The first information processing device is
Display contents including a plurality of pages for sharing the screen with the second information processing device are stored in the storage means.
A first GUI that accepts an instruction to switch the authority of an input operation including at least a page feed operation for the display content displayed on the first display device, and a second GUI that accepts an instruction to switch the screen sharing setting of the display content. GUI is displayed on the first display device.
The same page as the page displayed in response to the page feed operation received by the second information processing device operated by the presenter having the authority is drawn and reflected on the first display device.
If you have the authority to perform the above input operations
Based on the operation information of the input operation by the user, transmission data including the operation information of the input operation is generated, and the transmission data is transmitted to the second information processing apparatus.
When the page feed operation by the user is accepted
Generates transmission data containing page identification information that identifies the page to be displayed after page feed
When the setting for screen sharing is switched to the setting for not sharing the screen according to the instruction received in the second GUI, the page feed operation for the display content can be individually accepted.
A page different from the page of the display content displayed on the second display device of the second information processing device operated by the presenter having the authority is displayed on the first display device. When the setting for not sharing the screen is switched to the setting for sharing the screen in response to the instruction received in the second GUI, the storage means receives the information before switching to the setting for sharing the screen. The same page as the page of the display content displayed on the second display device is drawn according to the operation information of the page feed operation of the presenter transmitted from the second information processing device stored in the second display device. A method characterized by reflection. 第１の表示装置を有し、ネットワークを介して第２の情報処理装置と接続可能な第１の情報処理装置に、
前記第２の情報処理装置と画面を共有するための複数のページを含む表示コンテンツを記憶手段に記憶し、
前記第１の表示装置に表示された前記表示コンテンツに対する少なくともページ送り操作を含む入力操作の権限を切り換える指示を受け付ける第１のＧＵＩと、前記表示コンテンツの画面共有の設定を切り換える指示を受け付ける第２のＧＵＩを前記第１の表示装置に表示し、
前記権限を有している発表者が操作する前記第２の情報処理装置において受け付けたページ送り操作に応じて表示されたページと同じページを前記第１の表示装置に描画反映し、
入力操作の操作情報を含む送信データを生成し、
前記入力操作の権限を保有した場合に、
利用者による入力操作の操作情報に基づき、前記送信データを生成し、前記送信データを、前記第２の情報処理装置へと送信し、
利用者によるページ送り操作を受け付けた場合、
ページ送り後に表示するページを識別するページ識別情報を含む送信データを生成し、
前記第２のＧＵＩにおいて受け付けた指示に応じて、画面共有する設定から画面共有しない設定に切り換えられた場合に、前記表示コンテンツに対するページ送り操作を個別に受付可能とし、
前記権限を有している発表者が操作する前記第２の情報処理装置の第２の表示装置に表示されている前記表示コンテンツのページとは異なるページを前記第１の表示装置に表示している際に、前記第２のＧＵＩにおいて受け付けた指示に応じて、前記画面共有しない設定から画面共有する設定に切り換えられた場合に、前記画面共有する設定に切り換えられる前に受信して前記記憶手段に記憶しておいた前記第２の情報処理装置から送信された前記発表者のページ送り操作の操作情報に従って、前記第２の表示装置に表示されている前記表示コンテンツのページと同じページを描画反映する、処理を実行させることを特徴とするプログラム。 A first information processing device that has a first display device and can be connected to a second information processing device via a network.
Display contents including a plurality of pages for sharing the screen with the second information processing device are stored in the storage means.
A first GUI that accepts an instruction to switch the authority of an input operation including at least a page feed operation for the display content displayed on the first display device, and a second GUI that accepts an instruction to switch the screen sharing setting of the display content. GUI is displayed on the first display device.
The same page as the page displayed in response to the page feed operation received by the second information processing device operated by the presenter having the authority is drawn and reflected on the first display device.
Generate transmission data including operation information of input operation
If you have the authority to perform the above input operations
Based on the operation information of the input operation by the user, the transmission data is generated, and the transmission data is transmitted to the second information processing device.
When the page feed operation by the user is accepted
Generates transmission data containing page identification information that identifies the page to be displayed after page feed
When the setting for screen sharing is switched to the setting for not sharing the screen according to the instruction received in the second GUI, the page feed operation for the display content can be individually accepted.
A page different from the page of the display content displayed on the second display device of the second information processing device operated by the presenter having the authority is displayed on the first display device. When the setting for not sharing the screen is switched to the setting for sharing the screen in response to the instruction received in the second GUI, the storage means receives the information before switching to the setting for sharing the screen. The same page as the page of the display content displayed on the second display device is drawn according to the operation information of the page feed operation of the presenter transmitted from the second information processing device stored in the second display device. A program that reflects and executes processing.
JP2019146003A 2010-10-26 2019-08-08 Systems, information processing equipment, methods, and programs Active JP7003978B2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010240005 2010-10-26
JP2010240005 2010-10-26

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018076542A Division JP6569766B2 (en) 2010-10-26 2018-04-12 System, method executed by system, information processing apparatus, program, and method executed by information processing

Publications (3)

Publication Number Publication Date
JP2020009456A JP2020009456A (en) 2020-01-16
JP2020009456A5 JP2020009456A5 (en) 2020-12-17
JP7003978B2 true JP7003978B2 (en) 2022-01-21

Family

ID=51169446

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2014002207A Pending JP2014112398A (en) 2010-10-26 2014-01-09 Screen sharing service providing system, information processing device, projection device, screen sharing service providing method, and screen sharing service providing program
JP2015128069A Pending JP2015187889A (en) 2010-10-26 2015-06-25 Screen sharing service providing system, screen sharing method, information processing device, and program
JP2016216614A Active JP6323537B2 (en) 2010-10-26 2016-11-04 Service providing system, service providing method, information processing apparatus, program, and information processing method
JP2018076542A Active JP6569766B2 (en) 2010-10-26 2018-04-12 System, method executed by system, information processing apparatus, program, and method executed by information processing
JP2019146003A Active JP7003978B2 (en) 2010-10-26 2019-08-08 Systems, information processing equipment, methods, and programs

Family Applications Before (4)

Application Number Title Priority Date Filing Date
JP2014002207A Pending JP2014112398A (en) 2010-10-26 2014-01-09 Screen sharing service providing system, information processing device, projection device, screen sharing service providing method, and screen sharing service providing program
JP2015128069A Pending JP2015187889A (en) 2010-10-26 2015-06-25 Screen sharing service providing system, screen sharing method, information processing device, and program
JP2016216614A Active JP6323537B2 (en) 2010-10-26 2016-11-04 Service providing system, service providing method, information processing apparatus, program, and information processing method
JP2018076542A Active JP6569766B2 (en) 2010-10-26 2018-04-12 System, method executed by system, information processing apparatus, program, and method executed by information processing

Country Status (1)

Country Link
JP (5) JP2014112398A (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6451226B2 (en) * 2014-11-06 2019-01-16 富士ゼロックス株式会社 Information processing apparatus, information processing system, program, and recording medium
JP2017068797A (en) * 2015-10-02 2017-04-06 富士通株式会社 Input support system and electronic apparatus
KR20180135190A (en) * 2017-06-12 2018-12-20 모브리진 주식회사 Method and system for synchronized viewing between clients under web or cloud environment

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000066968A (en) 1998-08-26 2000-03-03 Nippon Telegr & Teleph Corp <Ntt> Synchronously controlling method for shared image, synchronous control system of shared image and recording medium recording synchronous control program for shared image
JP2007018517A (en) 2006-07-10 2007-01-25 Fujitsu Ltd Three-dimensional object shared processing method and storage medium

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0675735A (en) * 1992-08-27 1994-03-18 Matsushita Electric Ind Co Ltd Shared screen controller
JP3283645B2 (en) * 1993-07-26 2002-05-20 富士通株式会社 Application cooperative operation control device
JPH07298235A (en) * 1994-04-27 1995-11-10 Canon Inc Video conference equipment and pointing cursor display control method
JPH08241280A (en) * 1995-03-01 1996-09-17 Oki Electric Ind Co Ltd Method for controlling application operation right
JPH0962630A (en) * 1995-08-22 1997-03-07 Fujitsu Ltd General application program sharing system
JPH09330281A (en) * 1996-06-13 1997-12-22 Canon Inc Information processor and its method, and information processing system and its system control method
JP3821170B2 (en) * 1996-07-26 2006-09-13 富士ゼロックス株式会社 Method for managing collaborative work information and collaborative work support system
JP2000092217A (en) * 1998-09-09 2000-03-31 Nippon Telegr & Teleph Corp <Ntt> Picture display controlling method in electronic conference system, electronic conference system and recording medium recording picture display control program
JP3846666B2 (en) * 1998-09-24 2006-11-15 富士通株式会社 Shared screen controller
JP2001331428A (en) * 2000-05-18 2001-11-30 Chihiro Tsuyusaki Remote operation software for information processor, remote operation system and recording medium having program recorded thereon
JP2004110573A (en) * 2002-09-19 2004-04-08 Ricoh Co Ltd Data communication method, data communication device, data communication system and data communication program
US7634533B2 (en) * 2004-04-30 2009-12-15 Microsoft Corporation Systems and methods for real-time audio-visual communication and data collaboration in a network conference environment
JP2010067108A (en) * 2008-09-12 2010-03-25 Hitachi Ltd Picture display control method and its system
JP2010181978A (en) * 2009-02-03 2010-08-19 Seiko Epson Corp Collaborative work apparatus and method of controlling collaborative work

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000066968A (en) 1998-08-26 2000-03-03 Nippon Telegr & Teleph Corp <Ntt> Synchronously controlling method for shared image, synchronous control system of shared image and recording medium recording synchronous control program for shared image
JP2007018517A (en) 2006-07-10 2007-01-25 Fujitsu Ltd Three-dimensional object shared processing method and storage medium

Also Published As

Publication number Publication date
JP2014112398A (en) 2014-06-19
JP2015187889A (en) 2015-10-29
JP2018156662A (en) 2018-10-04
JP2020009456A (en) 2020-01-16
JP6323537B2 (en) 2018-05-16
JP2017021871A (en) 2017-01-26
JP6569766B2 (en) 2019-09-04

Similar Documents

Publication Publication Date Title
JP6035712B2 (en) Screen sharing service providing system, information processing apparatus, screen sharing service providing method, screen sharing service providing program, and program
JP7003978B2 (en) Systems, information processing equipment, methods, and programs
US8610938B2 (en) Remote print preview generation
JP7099244B2 (en) Display control device, display control method, display control program
JP2015127944A (en) Information processing system, information processing device, information processing method, and program
JP2014033381A (en) Information processing apparatus and program, and image processing system
JP6244846B2 (en) Information processing terminal, information processing method, program, and information processing system
JP6229336B2 (en) Video output device, video output system, and video output control program
JP2016099773A (en) Terminal device, reproduction method, program, and image sharing system
JP6958176B2 (en) Information processing equipment, information processing systems, control methods and programs
CN102200888B (en) Virtual memory, and virtual storage system and method
JP2020144725A (en) Information processing system and control method thereof
JP7173101B2 (en) TERMINAL DEVICE, PROGRAM, CONTENT SHARING METHOD AND INFORMATION PROCESSING SYSTEM
JP2014035573A (en) Information processor and program
JP7062951B2 (en) Electronic devices, equipment management systems, and programs
JP7172128B2 (en) VR content playback system for following operation input in main processing device in backup processing device
JP6269688B2 (en) Information processing apparatus, participation restriction method, program, and information processing system
JP2023125541A (en) Information processing device, terminal device, information processing system, and information processing program
US20090046060A1 (en) Indicator system, computer readable recording medium, and indicating device
JP2000224558A (en) Image transmitter, image processor, image display system and their method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190904

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200608

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201102

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201201

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210201

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210713

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211013

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20211013

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20211022

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20211026

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211130

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211213