JP2020004253A - Conference system, terminal device, method for controlling conference system, and method for controlling terminal device - Google Patents

Conference system, terminal device, method for controlling conference system, and method for controlling terminal device Download PDF

Info

Publication number
JP2020004253A
JP2020004253A JP2018125166A JP2018125166A JP2020004253A JP 2020004253 A JP2020004253 A JP 2020004253A JP 2018125166 A JP2018125166 A JP 2018125166A JP 2018125166 A JP2018125166 A JP 2018125166A JP 2020004253 A JP2020004253 A JP 2020004253A
Authority
JP
Japan
Prior art keywords
conference
terminal
update request
shared image
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018125166A
Other languages
Japanese (ja)
Other versions
JP7024628B2 (en
Inventor
暁人 森田
Akihito Morita
暁人 森田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2018125166A priority Critical patent/JP7024628B2/en
Publication of JP2020004253A publication Critical patent/JP2020004253A/en
Application granted granted Critical
Publication of JP7024628B2 publication Critical patent/JP7024628B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To reduce the possibility that a shared image is updated on a display screen which is not intended by a user in a conference system which shares the image among a plurality of terminal devices.SOLUTION: A conference system comprises a plurality of terminal devices. One terminal device included in the plurality of terminal devices includes: a management unit that manages information on other terminal devices participating in a conference; a transmission unit that acquires a still image from a display image that may change over time and transmits the acquired still image to the other terminal devices participating in the conference as a shared image; and a determination unit that, when receiving an update request for requesting update of the shared image, determines whether the update request is an update request made due to the fact that after the conference is started, a new terminal device participates in the conference, by using the information on the other terminal devices participating in the conference. When the update request is an update request made due to the fact that after the conference is started, a new terminal device participates in the conference, the transmission unit stops the update of the shared image.SELECTED DRAWING: Figure 5

Description

本発明は、会議システム、端末装置、会議システムの制御方法、端末装置の制御方法に関する。   The present invention relates to a conference system, a terminal device, a control method for a conference system, and a control method for a terminal device.

複数の端末装置の間で画像を共有して会議を行う会議システムが知られている。例えば、端末装置の表示部に、会議に参加している他の参加者を撮影した会議画像と共に、情報端末や電子ホワイトボード等に表示している共有画像を表示する会議システムが知られている。   2. Description of the Related Art There is known a conference system in which a conference is performed by sharing an image between a plurality of terminal devices. For example, a conference system that displays a shared image displayed on an information terminal, an electronic whiteboard, or the like, together with a conference image of another participant participating in the conference on a display unit of a terminal device is known. .

また、ウェブ会議システムにおいて、画面共有するアプリケーションの表示状態をプレビュー表示させ、情報処理装置からの指示に応じて、画面共有するアプリケーションの表示状態を他の情報処理装置に表示させる技術が知られている(例えば、特許文献1参照)。   Further, in a web conference system, there is known a technique of displaying a display state of an application to be screen-shared in a preview and displaying a display state of the application to be screen-shared in another information processing apparatus in response to an instruction from the information processing apparatus. (For example, see Patent Document 1).

特許文献1に開示された技術により、会議に参加する参加者は、共有画像を共有する前に、共有画像のプレビュー表示を確認できるので、意図しない共有画像が他の端末装置に配信されてしまうことを低減させることができる。   According to the technology disclosed in Patent Literature 1, a participant who participates in a conference can check a preview display of a shared image before sharing the shared image, so that an unintended shared image is distributed to another terminal device. Can be reduced.

一方、情報端末や電子ホワイトボード等の共有ソースに表示されている表示画面を共有画像として共有する会議システムにおいて、用途に応じて、リアルタイムの動画の共有と、動画をキャプチャした静止画像の共有とを切り替えしたいという要求がある。   On the other hand, in a conference system in which a display screen displayed on a shared source such as an information terminal or an electronic whiteboard is shared as a shared image, a real-time moving image can be shared, and a still image obtained by capturing the moving image can be shared. There is a demand to switch.

これにより、会議に参加する参加者は、共有ソースに表示されている表示画面を常に他の参加者と共有したいとき、動画の共有を行うことにより、表示画面に対する操作等を、リアルタイムに共有画像に反映することができる。また、会議に参加する参加者は、例えば、会議資料等の説明を行うとき等、説明の対象となる表示画面をキャプチャした静止画像を共有することにより、説明の対象となる会議資料等を共有したままで、情報端末等の表示画面を自由に変更することができるようになる。   Thus, when a participant who participates in the conference always wants to share the display screen displayed on the shared source with other participants, the operation of the display screen can be performed in real time by sharing the moving image. Can be reflected in In addition, participants participating in the conference can share the conference materials to be explained by sharing a still image that captures the display screen to be explained, for example, when explaining the meeting materials. It is possible to freely change the display screen of the information terminal or the like while keeping the state.

しかし、このような会議システムでは、例えば、第1の端末装置と第2の端末装置との間で静止画像を共有して会議を行っていたとしても、会議に途中から参加する第3の端末装置には、会議で動画の共有が行われているのか静止画の共有が行われているのか分からない。そして、第3の端末装置は、第1の端末装置と第2の端末装置との会議に途中から参加する際、第1の端末装置と第2の端末装置との会議で動画の共有が行われているものとして、共有画像の取得要求を行うと、共有画像を配信する第1の端末装置では共有画像の取得要求に応じて共有画像が意図せず更新されてしまう。   However, in such a conference system, for example, even if the first terminal device and the second terminal device share a still image and hold a conference, the third terminal that participates in the conference from the middle The device does not know whether the video is being shared or the still image is being shared in the meeting. Then, when the third terminal device participates in the conference between the first terminal device and the second terminal device in the middle, the moving image is shared in the conference between the first terminal device and the second terminal device. If a shared image acquisition request is issued, the shared image is unintentionally updated in the first terminal device that distributes the shared image in response to the shared image acquisition request.

本発明の実施の形態は、上記の問題点を鑑みてなされたものであって、複数の端末装置の間で画像を共有する会議システムにおいて、利用者が意図していない表示画面に共有画像が更新されてしまうことを低減させる。   Embodiments of the present invention have been made in view of the above problems, and in a conference system in which images are shared among a plurality of terminal devices, a shared image is displayed on a display screen not intended by a user. Reduce the possibility of being updated.

記課題を解決するため、本発明の一実施形態に係る会議システムは、複数の端末装置を備え、前記複数の端末装置の間で会議を行う会議システムであって、前記複数の端末装置に含まれる一つの端末装置は、前記会議に参加している他の端末装置の情報を管理する管理部と、経時的に変化し得る表示画像から静止画像を取得し、取得した静止画像を共有画像として前記会議に参加している他の端末装置に送信する送信部と、前記共有画像の更新を要求する更新要求を受け付けたとき、前記会議に参加している他の端末装置の情報を用いて、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求であるか否かを判断する判断部と、を有し、前記送信部は、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求でない場合、更新した前記共有画像を前記会議に参加している他の端末装置に送信し、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求である場合、前記共有画像の更新を中止する。   In order to solve the above problems, a conference system according to an embodiment of the present invention includes a plurality of terminal devices, a conference system for performing a conference between the plurality of terminal devices, included in the plurality of terminal devices One terminal device is a management unit that manages information of other terminal devices participating in the conference, obtains a still image from a display image that can change over time, and uses the obtained still image as a shared image. A transmitting unit that transmits to the other terminal devices participating in the conference, and when receiving an update request requesting an update of the shared image, using information on the other terminal devices participating in the conference, A determination unit that determines whether or not the update request is an update request due to a new terminal device participating in the conference after starting the conference; and After starting the meeting If the update request is not due to the new terminal device participating in the conference, the updated shared image is transmitted to the other terminal devices participating in the conference, and the update request is transmitted after the conference starts. If the update request is due to a new terminal device participating in the conference, the update of the shared image is stopped.

本発明の実施の形態によれば、複数の端末装置の間で画像を共有する会議システムにおいて、利用者が意図していない表示画面に共有画像が更新されてしまうことを低減させることができる。   According to the embodiment of the present invention, in a conference system in which an image is shared among a plurality of terminal devices, it is possible to reduce a situation in which a shared image is updated on a display screen not intended by a user.

一実施形態に係る会議システムのシステム構成の例を示す図である。It is a figure showing the example of the system configuration of the conference system concerning one embodiment. 一実施形態に係る会議端末が表示する表示画面のイメージを示す図である。It is a figure showing the image of the display screen which the conference terminal concerning one embodiment displays. 一実施形態に係る会議端末のハードウェア構成の例を示す図である。FIG. 2 is a diagram illustrating an example of a hardware configuration of a conference terminal according to an embodiment. 一実施形態に係るコンピュータのハードウェア構成の例を示す図である。FIG. 2 is a diagram illustrating an example of a hardware configuration of a computer according to an embodiment. 第1の実施の形態に係る会議システムの機能構成の例を示す図である。FIG. 2 is a diagram illustrating an example of a functional configuration of the conference system according to the first embodiment. 第1の実施形態に係る会議システムが管理する情報のイメージを示す図である。FIG. 4 is a diagram illustrating an image of information managed by the conference system according to the first embodiment. 第1の実施の形態に係る会議の開始処理の例を示すシーケンス図である。FIG. 8 is a sequence diagram illustrating an example of a conference start process according to the first embodiment. 第1の実施の形態に係る共有画像の共有処理の例を示すシーケンス図である。FIG. 7 is a sequence diagram illustrating an example of a sharing process of a shared image according to the first embodiment. 第1の実施の形態に係る会議端末の参加処理の例を示すシーケンス図である。FIG. 9 is a sequence diagram illustrating an example of a participation process of a conference terminal according to the first embodiment. 第1の実施の形態に係る更新判断部の判断処理の例を示すフローチャートである。9 is a flowchart illustrating an example of a determination process of an update determination unit according to the first embodiment. 第2の実施の形態に係る会議システムの機能構成の例を示す図である。FIG. 14 is a diagram illustrating an example of a functional configuration of a conference system according to a second embodiment. 第2の実施の形態に係る会議端末の参加処理の例を示すシーケンス図である。FIG. 14 is a sequence diagram illustrating an example of a participation process of a conference terminal according to the second embodiment. 第3の実施の形態に係る共有画像の共有処理の例を示すシーケンス図である。FIG. 14 is a sequence diagram illustrating an example of a sharing process of a shared image according to the third embodiment.

以下に、本発明の実施の形態について、添付の図面を参照して説明する。
<システムの構成>
図1は、一実施形態に係る会議システムのシステム構成の例を示す図である。会議システム100は、例えば、インターネットやLAN(Local Area Network)等のネットワーク160を介して通信可能に接続される複数の会議端末110a、110b、110c、・・・、呼制御サーバ130、及び画像配信サーバ140等を有する。なお、以下の説明の中で、複数の会議端末110a、110b、110c、・・・のうち、任意の会議端末を示す場合、「会議端末110」を用いる。
Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.
<System configuration>
FIG. 1 is a diagram illustrating an example of a system configuration of a conference system according to an embodiment. The conference system 100 includes, for example, a plurality of conference terminals 110a, 110b, 110c,... Communicatively connected via a network 160 such as the Internet or a LAN (Local Area Network), a call control server 130, and image distribution. It has a server 140 and the like. In the following description, the “conference terminal 110” is used to indicate an arbitrary conference terminal among the plurality of conference terminals 110a, 110b, 110c,.

会議端末110は、コンピュータの構成を有する端末装置であり、会議システム100用の専用端末であっても良いし、会議システム100のアプリケーションプログラム(以下、アプリと呼ぶ)を実行する汎用の情報端末であっても良い。ここでは、会議端末110が、会議システム100用の専用端末であるものとして、以下の説明を行う。   The conference terminal 110 is a terminal device having a configuration of a computer, and may be a dedicated terminal for the conference system 100 or a general-purpose information terminal that executes an application program (hereinafter, referred to as an application) of the conference system 100. There may be. Here, the following description is given assuming that the conference terminal 110 is a dedicated terminal for the conference system 100.

会議端末110は、例えば、呼制御サーバ130の制御により、画像配信サーバ140を介して他の会議端末110と通信を行い、会議の映像(動画像、音声等)を送受信することができる。これにより、例えば、会議端末110aの利用者は、他の会議端末110b、110cの利用者と、リアルタイムに送受信される会議の画像や音声を介してビデオ会議を行うことができる。なお、ビデオ会議は、テレビ会議、又は遠隔会議等と呼ばれる場合もある。   The conference terminal 110 can communicate with another conference terminal 110 via the image distribution server 140 under the control of the call control server 130, for example, to transmit and receive a video (moving image, audio, etc.) of the conference. Thereby, for example, the user of the conference terminal 110a can hold a video conference with the users of the other conference terminals 110b and 110c via images and sounds of the conference transmitted and received in real time. Note that the video conference may be called a video conference, a remote conference, or the like.

呼制御サーバ130は、コンピュータの構成を有する情報処理装置、又は複数の情報処理装置を含むシステムであり、複数の会議端末110間で行われる会議の通信を制御する。   The call control server 130 is an information processing device having a configuration of a computer or a system including a plurality of information processing devices, and controls communication of a conference performed between the plurality of conference terminals 110.

画像配信サーバ140は、コンピュータの構成を有する情報処理装置、又は複数の情報処理装置を含むシステムであり、会議に参加している会議端末110間の音声や画像等のコンテンツデータの配信(中継)を行う。   The image distribution server 140 is an information processing device having a computer configuration or a system including a plurality of information processing devices, and distributes (relays) content data such as audio and images between conference terminals 110 participating in a conference. I do.

例えば、会議端末110a、110b、110cが同じ会議に参加している場合、画像配信サーバ140は、会議端末110aから送信されたコンテンツデータを受信し、受信したコンテンツデータを会議端末110b、110cに配信する。また、画像配信サーバ140は、会議端末110bから送信されたコンテンツデータを受信し、受信したコンテンツデータを会議端末110a、110cに配信する。同様に、画像配信サーバ140は、会議端末110cから送信されたコンテンツデータを受信し、受信したコンテンツデータを会議端末110a、110bに配信する。   For example, when the conference terminals 110a, 110b, and 110c participate in the same conference, the image distribution server 140 receives the content data transmitted from the conference terminal 110a and distributes the received content data to the conference terminals 110b and 110c. I do. Further, the image distribution server 140 receives the content data transmitted from the conference terminal 110b, and distributes the received content data to the conference terminals 110a and 110c. Similarly, image distribution server 140 receives the content data transmitted from conference terminal 110c, and distributes the received content data to conference terminals 110a and 110b.

このように、画像配信サーバ140は、会議に参加している一の会議端末110から送信されたコンテンツデータを受信し、受信したコンテンツデータを会議に参加している他の会議端末110に配信する。これにより、会議端末110は、会議に参加する会議端末110の数が増えた場合でも、コンテンツデータを画像配信サーバ140に送信するだけで良いので、会議端末110の負荷を低減させることができる。   As described above, the image distribution server 140 receives the content data transmitted from one conference terminal 110 participating in the conference, and distributes the received content data to the other conference terminals 110 participating in the conference. . Thus, even when the number of conference terminals 110 participating in the conference increases, the conference terminal 110 only needs to transmit the content data to the image distribution server 140, and thus the load on the conference terminal 110 can be reduced.

また、本実施形態に係る会議システム100では、例えば、会議端末110aの外部I/F(Interface)111に接続された情報端末120等に表示している表示画面を、共有画面として他の会議端末110b、110cと共有することができる。なお、情報端末120は、外部I/F111に接続される外部機器の一例である。外部I/F111に接続される外部機器は、例えば、電子ホワイトボード等の電子機器であっても良い。   Further, in the conference system 100 according to the present embodiment, for example, the display screen displayed on the information terminal 120 or the like connected to the external I / F (Interface) 111 of the conference terminal 110a is used as another conference terminal as a shared screen. 110b and 110c can be shared. Note that the information terminal 120 is an example of an external device connected to the external I / F 111. The external device connected to the external I / F 111 may be, for example, an electronic device such as an electronic whiteboard.

図2は、一実施形態に係る会議端末が表示する表示画面のイメージを示す図である。図1に示す会議システム100において、会議端末110aと会議端末110bとの間で会議が行われている場合、会議端末110bの表示部には、例えば、図2に示すような表示画面200が表示される。   FIG. 2 is a diagram illustrating an image of a display screen displayed by the conference terminal according to the embodiment. In the conference system 100 shown in FIG. 1, when a conference is being held between the conference terminal 110a and the conference terminal 110b, for example, a display screen 200 as shown in FIG. Is done.

図2の例では、表示画面200には、会議端末110aが撮影した会議画像210、会議端末110bが撮影した会議画像220、及び共有画像230が表示されている。共有画像230は、例えば、会議端末110aの外部I/F111に接続された情報端末120や電子ホワイトボード等が表示している表示画面や、表示画面をキャプチャした静止画像等である。   In the example of FIG. 2, the display screen 200 displays a conference image 210 captured by the conference terminal 110a, a conference image 220 captured by the conference terminal 110b, and a shared image 230. The shared image 230 is, for example, a display screen displayed on the information terminal 120 or the electronic whiteboard or the like connected to the external I / F 111 of the conference terminal 110a, or a still image obtained by capturing the display screen.

例えば、会議端末110aの利用者は、情報端末120に表示されている表示画面を、会議端末110bの利用者と共有したい場合、情報端末120が表示している表示画面を動画像として共有する。この場合、図2の共有画像230に表示されている画像は、情報端末120への操作に応じて、経時的に変化する。例えば、会議端末110aの利用者が、情報端末120が表示しているウィンドウのサイズを変えると、共有画像230に表示されているウィンドウ231のサイズも変化する。   For example, when the user of the conference terminal 110a wants to share the display screen displayed on the information terminal 120 with the user of the conference terminal 110b, the display screen displayed on the information terminal 120 is shared as a moving image. In this case, the image displayed on shared image 230 in FIG. 2 changes with time according to the operation on information terminal 120. For example, when the user of the conference terminal 110a changes the size of the window displayed on the information terminal 120, the size of the window 231 displayed on the shared image 230 also changes.

一方、会議端末110aの利用者は、例えば、会議資料等の説明を行うときに、説明の対象となる表示画面をキャプチャして、静止画像として共有することもできる。これにより、会議端末110aの利用者は、説明の対象となる表示画面を、共有画像230に表示したまま、情報端末120の表示画面を自由に利用することができるようになる。   On the other hand, the user of the conference terminal 110a can, for example, capture a display screen to be explained and explain it as a still image when explaining the meeting materials and the like. Thus, the user of the conference terminal 110a can freely use the display screen of the information terminal 120 while the display screen to be explained is displayed on the shared image 230.

ただし、共有画像230として静止画像を共有している場合、会議に新たな会議端末110cが参加すると、会議端末110cは、共有画像230が配信されていないので、共有画像230を表示することができない。また、共有画像230が動画像の場合であっても、フレーム間の差分のみを配信している場合、会議に新たな会議端末110cが参加すると、会議端末110cは、元となる画像が配信されていないので、フレーム間の差分にみでは動画像を表示することができない。   However, when a still image is shared as the shared image 230, when a new conference terminal 110c participates in the conference, the conference terminal 110c cannot display the shared image 230 because the shared image 230 is not distributed. . Even when the shared image 230 is a moving image, if only a difference between frames is distributed and a new conference terminal 110c participates in the conference, the conference terminal 110c distributes the original image. Therefore, a moving image cannot be displayed based on the difference between frames.

このように、会議に新たに参加した会議端末110cが共有画像230を表示できない場合、会議端末110cは、例えば、画像配信サーバ140を介して、配信元の会議端末110aに共有画像の更新を要求する更新要求を送信する。   In this way, when the conference terminal 110c newly participating in the conference cannot display the shared image 230, the conference terminal 110c requests the distribution source conference terminal 110a to update the shared image via the image distribution server 140, for example. To send an update request.

しかし、共有画像230として静止画像を共有している場合、会議端末110aが共有画像を更新してしまうと、情報端末120が表示している表示画面が共有画像としてキャプチャされてしまうので、利用者が意図しない表示画面が共有されてしまう場合がある。   However, when a still image is shared as the shared image 230, if the conference terminal 110a updates the shared image, the display screen displayed by the information terminal 120 is captured as the shared image. May share an unintended display screen.

そこで、本実施形態に係る会議システム100では、静止画像を共有画像として共有している会議端末110aは、共有画像の更新要求を受け付けると、更新要求が、会議に新たな会議端末110が参加したことによる更新要求であるか否かを判断する。   Therefore, in the conference system 100 according to the present embodiment, when the conference terminal 110a sharing the still image as the shared image receives the update request for the shared image, the conference terminal 110a receives the update request and the new conference terminal 110 participates in the conference. It is determined whether the request is an update request.

また、会議端末110aは、受付した共有画像の更新要求が、会議に新たな会議端末110が参加したことによる更新要求でない場合、共有画像を更新し、他の会議端末110に更新した共有画像を配信する。   If the received update request of the shared image is not an update request due to the participation of the new conference terminal 110 in the conference, the conference terminal 110a updates the shared image and transmits the updated shared image to the other conference terminals 110. To deliver.

なお、既に会議に参加している会議端末110bが、共有画像の更新要求するケースとしては、例えば、ネットワーク160に起因する通信エラー等により、共有画像が正しく表示できない場合等が考えられる。しかし、このようなケースは、発生頻度が低く、また、共有画像を送信した直後(例えば、数秒以内等)に行われることが多いので、共有画像を更新しても問題にならない場合が多い。   As a case where the conference terminal 110b already participating in the conference requests an update of the shared image, a case where the shared image cannot be displayed correctly due to a communication error or the like due to the network 160, for example, can be considered. However, such a case has a low frequency of occurrence and is often performed immediately after the shared image is transmitted (for example, within a few seconds), so that updating the shared image does not often cause a problem.

一方、会議端末110aは、受付した共有画像の更新要求が、会議に新たな会議端末110cが参加したことによる更新要求である場合、共有画像の更新を中止する。これは、会議に新たな会議端末110が参加する場合には、共有画像を送信してから時間が経っていることが多く、共有画像を更新してしまうと、利用者が意図していない表示画面によって共有画像が更新されてしまうためである。   On the other hand, if the received shared image update request is an update request due to the participation of the new conference terminal 110c in the conference, the conference terminal 110a stops updating the shared image. This is because when a new conference terminal 110 participates in a conference, it has often been a long time since the shared image was transmitted, and if the shared image is updated, the display that the user does not intend is not displayed. This is because the shared image is updated depending on the screen.

このように、本実施形態に係る会議端末110は、共有画像の更新要求が、会議を開始した後に、会議に新たな会議端末110cが参加したことによる更新要求であるとき、共有画像の更新を中止する。これにより、会議端末110は、意図していない表示画面によって共有画像230が更新されてしまうことを低減することができる。   As described above, the conference terminal 110 according to the present embodiment updates the shared image when the shared image update request is an update request due to the participation of the new conference terminal 110c in the conference after starting the conference. Abort. Thereby, the conference terminal 110 can reduce the update of the shared image 230 by an unintended display screen.

以上、本実施形態によれば、複数の会議端末110の間で画像を共有する会議システム100において、利用者が意図していない表示画面に共有画像が更新されてしまうことを低減させることができる。   As described above, according to the present embodiment, in the conference system 100 in which an image is shared among a plurality of conference terminals 110, it is possible to reduce an update of a shared image to a display screen that is not intended by a user. .

<ハードウェア構成>
(会議端末のハードウェア構成)
図3は、一実施形態に係る会議端末のハードウェア構成の例を示す図である。会議端末110は、例えば、CPU(Central Processing Unit)301、ROM(Read Only Memory)302、RAM(Random Access Memory)303、ストレージ304、入力装置305、ネットワークI/F306、カメラ307、撮像素子I/F308、スピーカ309、マイク310、音声I/F311、ディスプレイ312、表示I/F313、外部I/F111、及びシステムバス314等を有する。なお、入力装置305、カメラ307、スピーカ309、マイク310、及びディスプレイ312のうち、少なくとも一部は、会議端末110の外部に接続されているものであっても良い。
<Hardware configuration>
(Hardware configuration of conference terminal)
FIG. 3 is a diagram illustrating an example of a hardware configuration of the conference terminal according to the embodiment. The conference terminal 110 includes, for example, a CPU (Central Processing Unit) 301, a ROM (Read Only Memory) 302, a RAM (Random Access Memory) 303, a storage 304, an input device 305, a network I / F 306, a camera 307, an image sensor I / F F308, speaker 309, microphone 310, audio I / F 311, display 312, display I / F 313, external I / F 111, system bus 314, and the like. At least a part of the input device 305, the camera 307, the speaker 309, the microphone 310, and the display 312 may be connected to the outside of the conference terminal 110.

CPU301は、ストレージ304、ROM302等に記憶されたプログラムを実行することにより、会議端末110の全体の動作を制御する演算装置である。ROM302は、例えば、IPL(Initial Program Loader)等のCPU301の起動に用いられるプログラムを記憶した不揮発性のメモリである。RAM303は、CPU301のワークエリア等として用いられる揮発性のメモリである。ストレージ304は、OS(Operating System)、アプリ、データ等を記憶する大容量の記憶装置であり、例えば、HDD(Hard Disk Drive)、SSD(Solid State Drive)等によって実現される。   The CPU 301 is an arithmetic device that controls the overall operation of the conference terminal 110 by executing programs stored in the storage 304, the ROM 302, and the like. The ROM 302 is, for example, a non-volatile memory that stores a program such as an IPL (Initial Program Loader) used for activating the CPU 301. The RAM 303 is a volatile memory used as a work area or the like of the CPU 301. The storage 304 is a large-capacity storage device that stores an OS (Operating System), applications, data, and the like, and is realized by, for example, a HDD (Hard Disk Drive), an SSD (Solid State Drive), or the like.

入力装置305は、利用者による操作を受け付ける入力デバイスであり、例えば、操作ボタン、キーボード、タッチパネル等によって実現される。ネットワークI/F306は、会議端末110をネットワーク160に接続して、他の装置の通信を行うための通信インタフェースである。   The input device 305 is an input device that receives an operation by a user, and is realized by, for example, an operation button, a keyboard, a touch panel, and the like. The network I / F 306 is a communication interface for connecting the conference terminal 110 to the network 160 and performing communication with another device.

カメラ307は、被写体を撮像して画像データを取得する撮像デバイスである。撮像素子I/F308は、カメラ307を会議端末110に接続するためのインタフェースである。スピーカ309は、音声I/F311から出力される音声信号を音声に変換して出力する。マイク310は、周辺の音声を取得して、音声信号に変換し、音声I/F311に出力する。音声I/F311は、スピーカ309、及びマイク310を会議端末110に接続するためのインタフェースであり、例えば、増幅回路、音量調整回路等が含まれる。   The camera 307 is an imaging device that captures an image of a subject and acquires image data. An image sensor I / F 308 is an interface for connecting the camera 307 to the conference terminal 110. The speaker 309 converts an audio signal output from the audio I / F 311 into audio and outputs the audio. The microphone 310 acquires the surrounding sound, converts the sound into a sound signal, and outputs the sound signal to the sound I / F 311. The audio I / F 311 is an interface for connecting the speaker 309 and the microphone 310 to the conference terminal 110, and includes, for example, an amplification circuit, a volume adjustment circuit, and the like.

ディスプレイ312は、会議端末110の表示画面を表示する表示装置である。表示I/F313は、ディスプレイ312を会議端末110に接続するためのインタフェースである。   The display 312 is a display device that displays a display screen of the conference terminal 110. The display I / F 313 is an interface for connecting the display 312 to the conference terminal 110.

外部I/F111は、例えば、情報端末120等の外部機器を会議端末110に接続するためのインタフェースである。なお、外部I/F111は、有線接続に限られず、無線通信を用いて、外部機器を会議端末110に接続するものであっても良い。   The external I / F 111 is an interface for connecting an external device such as the information terminal 120 to the conference terminal 110, for example. Note that the external I / F 111 is not limited to a wired connection, and may be a device that connects an external device to the conference terminal 110 using wireless communication.

システムバス314は、上記の各構成要素を、例えば、図2に示すように接続し、アドレス信号、データ信号、及び各種の制御信号を伝送する。   The system bus 314 connects the above-described components, for example, as shown in FIG. 2, and transmits an address signal, a data signal, and various control signals.

(呼制御サーバ、及び画像配信サーバのハードウェア構成)
呼制御サーバ130、及び画像配信サーバ140は、一般的なコンピュータのハードウェア構成を有している。ここでは、一般的なコンピュータのハードウェア構成について説明する。
(Hardware configuration of call control server and image distribution server)
The call control server 130 and the image distribution server 140 have a general computer hardware configuration. Here, the hardware configuration of a general computer will be described.

図4は、一実施形態に係るコンピュータのハードウェア構成の例を示す図である。コンピュータ400は、例えば、CPU401、RAM402、ROM403、ストレージ404、ネットワークI/F405、入力装置406、表示装置407、外部接続I/F408、及びバス409等を有する。   FIG. 4 is a diagram illustrating an example of a hardware configuration of a computer according to an embodiment. The computer 400 includes, for example, a CPU 401, a RAM 402, a ROM 403, a storage 404, a network I / F 405, an input device 406, a display device 407, an external connection I / F 408, a bus 409, and the like.

CPU401は、ROM403やストレージ404等に格納されたプログラムやデータをRAM402上に読み出し、処理を実行することで、コンピュータ400の各機能を実現する演算装置である。RAM402は、CPU401のワークエリア等として用いられる揮発性のメモリである。ROM403は、電源を切ってもプログラムやデータを保持する不揮発性のメモリである。   The CPU 401 is an arithmetic device that realizes each function of the computer 400 by reading out programs and data stored in the ROM 403 and the storage 404 onto the RAM 402 and executing processes. The RAM 402 is a volatile memory used as a work area of the CPU 401 and the like. The ROM 403 is a non-volatile memory that retains programs and data even when the power is turned off.

ストレージ404は、例えば、HDDやSSD等の大容量の記憶装置であり、OS、アプリ、各種のデータ等を記憶する。ネットワークI/F405は、コンピュータ400をネットワーク160等に接続するための通信インタフェースである。   The storage 404 is a large-capacity storage device such as an HDD or an SSD, and stores an OS, an application, various data, and the like. The network I / F 405 is a communication interface for connecting the computer 400 to the network 160 or the like.

入力装置406は、例えば、マウス等のポインティングデバイスや、キーボード等の入力デバイスであり、コンピュータ400に各操作信号を入力するために用いられる。表示装置407はディスプレイ等の表示デバイスであり、コンピュータ400による処理結果等を表示する。   The input device 406 is, for example, a pointing device such as a mouse or an input device such as a keyboard, and is used to input various operation signals to the computer 400. The display device 407 is a display device such as a display, and displays a processing result or the like by the computer 400.

外部接続I/F408は、コンピュータ400に外部装置を接続するためのインタフェースである。外部装置には、例えば、記憶媒体410等が含まれる。バス409は、上記の各構成要素に接続され、アドレス信号、データ信号、及び各種制御信号等を伝送する。   The external connection I / F 408 is an interface for connecting an external device to the computer 400. The external device includes, for example, a storage medium 410 and the like. The bus 409 is connected to each of the above components, and transmits an address signal, a data signal, various control signals, and the like.

[第1の実施形態]
続いて、第1の実施形態に係る会議システムの機能構成について説明する。
[First Embodiment]
Subsequently, a functional configuration of the conference system according to the first embodiment will be described.

<機能構成>
図5は、第1の実施形態に係る会議システムの機能構成の例を示す図である。なお、図5において、会議端末110b、110cは、会議端末110aと同様の機能構成を有しているものとする。
<Functional configuration>
FIG. 5 is a diagram illustrating an example of a functional configuration of the conference system according to the first embodiment. In FIG. 5, the conference terminals 110b and 110c have the same functional configuration as the conference terminal 110a.

(会議端末の機能構成)
会議端末(端末装置)110は、例えば、送受信部511、操作受付部512、表示制御部513、音声入出力部514、撮像部515、端末情報管理部516、共有画像送信部517、更新判断部518、更新要求部519、及び記憶部520等を有する。
(Functional configuration of conference terminal)
The conference terminal (terminal device) 110 includes, for example, a transmission / reception unit 511, an operation reception unit 512, a display control unit 513, a voice input / output unit 514, an imaging unit 515, a terminal information management unit 516, a shared image transmission unit 517, an update determination unit. 518, an update request unit 519, and a storage unit 520.

会議端末110は、例えば、図3のCPU301で所定のプログラムを実行することにより、上記の各機能構成を実現している。なお、上記の各機能構成のうち、少なくとも一部は、ハードウェアによって実現されるものであっても良い。   The conference terminal 110 realizes each of the above functional configurations by executing a predetermined program by the CPU 301 in FIG. 3, for example. In addition, at least a part of each of the above functional configurations may be realized by hardware.

送受信部511は、例えば、図3のCPU301で実行されるプログラム、及びネットワークI/F306等によって実現され、ネットワーク160を介して、他の会議端末110、呼制御サーバ130、画像配信サーバ140と通信を行う。   The transmission / reception unit 511 is realized by, for example, a program executed by the CPU 301 in FIG. 3 and a network I / F 306, and communicates with other conference terminals 110, the call control server 130, and the image distribution server 140 via the network 160. I do.

例えば、送受信部511は、呼制御サーバ130と制御用のセッションを確立し、呼制御サーバ130へのログイン処理、及び会議の開始、終了、参加等の通信制御を行う。また、送受信部511は、呼制御サーバ130の制御に従って、画像配信サーバ140と通信用のセッションを確立し、同じセッションに参加している他の会議端末110との間で、会議映像(動画像、音声等)、及び共有画像等の送受信を行う。   For example, the transmission / reception unit 511 establishes a control session with the call control server 130, performs login processing to the call control server 130, and performs communication control such as starting, ending, and joining a conference. Further, under the control of the call control server 130, the transmission / reception unit 511 establishes a communication session with the image distribution server 140, and exchanges a conference video (moving image) with another conference terminal 110 participating in the same session. , Audio, etc.) and shared images.

操作受付部512は、例えば、図3のCPU301で実行されるプログラムによって実現され、図3の入力装置305等を用いて、利用者による入力操作(例えば、発信、応答、宛先指定の操作等)を受け付ける。   The operation accepting unit 512 is realized, for example, by a program executed by the CPU 301 in FIG. 3, and performs an input operation (for example, a call, a response, and a destination designation operation) by a user using the input device 305 or the like in FIG. Accept.

表示制御部513は、例えば、図3のCPU301で実行されるプログラムによって実現され、図3のディスプレイ312等の表示部に会議の表示画面200を表示させる。なお、会議の表示画面200には、例えば、図2に示すように、他の会議端末110が撮影した1つ以上の会議画像210、自端末が撮影した会議画像220、及び共有画像230等が含まれる。   The display control unit 513 is realized by, for example, a program executed by the CPU 301 in FIG. 3, and causes the display unit such as the display 312 in FIG. 3 to display the conference display screen 200. The conference display screen 200 includes, for example, one or more conference images 210 captured by another conference terminal 110, a conference image 220 captured by its own terminal, and a shared image 230, as shown in FIG. included.

音声入出力部514は、例えば、図3のCPU301で実行されるプログラムによって実現される。音声入出力部514は、例えば、図3のマイク310と音声I/F311とを用いて、会議の音声を取得する。また、音声入出力部514は、例えば、図3のスピーカ309と音声I/F311とを用いて、他の会議端末110から送信される会議音声を出力する。   The audio input / output unit 514 is realized by, for example, a program executed by the CPU 301 in FIG. The audio input / output unit 514 acquires the audio of the conference using, for example, the microphone 310 and the audio I / F 311 in FIG. The audio input / output unit 514 outputs a conference audio transmitted from another conference terminal 110 using, for example, the speaker 309 and the audio I / F 311 in FIG.

撮像部515は、例えば、図3のCPU301で実行されるプログラムによって実現され、図3のカメラ307、撮像素子I/F308等を用いて、図2の表示画面200に含まれるような会議画像210を撮像する。   The imaging unit 515 is realized by, for example, a program executed by the CPU 301 in FIG. 3, and uses the camera 307 in FIG. 3, the image sensor I / F 308, and the like to include the conference image 210 included in the display screen 200 in FIG. Is imaged.

端末情報管理部516は、例えば、図3のCPU301で実行されるプログラムによって実現され、会議に参加している他の会議端末110の情報を、図6(a)に示すような端末情報601に記憶して管理する。   The terminal information management unit 516 is realized by, for example, a program executed by the CPU 301 in FIG. 3, and converts the information of the other conference terminals 110 participating in the conference into the terminal information 601 as illustrated in FIG. Remember and manage.

図6(a)は、会議端末110の記憶部520に記憶される端末情報601の一例のイメージを示している。図6(a)の例では、端末情報601には、「端末ID」、「通信開始時間」、「通信終了時間」等の情報が含まれる。   FIG. 6A illustrates an example of the terminal information 601 stored in the storage unit 520 of the conference terminal 110. In the example of FIG. 6A, the terminal information 601 includes information such as “terminal ID”, “communication start time”, and “communication end time”.

「端末ID」は、会議端末110と同じ会議に参加している他の会議端末110を識別する識別情報である端末IDが記憶される。「通信開始時間」は、会議端末110と同じ会議に参加している他の会議端末110が、通信を開始した時刻(会議に参加した時刻)が記憶される。「通信終了時間」は、会議端末110と同じ会議に参加していた他の会議端末110が、通信を終了した時刻(会議を退出した時刻)が記憶される。   The “terminal ID” stores a terminal ID which is identification information for identifying another conference terminal 110 participating in the same conference as the conference terminal 110. The “communication start time” stores the time at which another conference terminal 110 participating in the same conference as the conference terminal 110 started communication (the time at which the conference terminal 110 participated in the conference). In the “communication end time”, the time at which the other conference terminal 110 participating in the same conference as the conference terminal 110 ends the communication (the time at which the conference terminal 110 leaves the conference) is stored.

端末情報管理部516は、例えば、会議を開始するとき、会議を退出するとき、会議に参加するとき等に、呼制御サーバ130から通知される制御情報に基づいて、上記の端末ID、通信開始時間、及び通信終了時間等の情報を管理する。   The terminal information management unit 516, based on the control information notified from the call control server 130, for example, when starting a conference, when leaving a conference, when joining a conference, etc. It manages information such as time and communication end time.

共有画像送信部517は、例えば、図3のCPU301で実行されるプログラムによって実現される。共有画像送信部517は、外部I/F111等によって接続された外部装置から共有画像を取得し、取得した共有画像を会議に参加している他の会議端末110に送信する。例えば、共有画像送信部517は、外部I/F111に接続された情報端末120が表示している表示画面(表示画像)をキャプチャした静止画像を取得する。また、共有画像送信部517は、取得した静止画像を共有画像として、会議に参加している他の会議端末110に送信する。   The shared image transmission unit 517 is realized by, for example, a program executed by the CPU 301 in FIG. The shared image transmitting unit 517 acquires a shared image from an external device connected by the external I / F 111 or the like, and transmits the acquired shared image to another conference terminal 110 participating in the conference. For example, the shared image transmission unit 517 acquires a still image that captures a display screen (display image) displayed by the information terminal 120 connected to the external I / F 111. Further, shared image transmitting section 517 transmits the obtained still image as a shared image to other conference terminals 110 participating in the conference.

更新判断部518は、例えば、図3のCPU301で実行されるプログラムによって実現される。更新判断部518は、共有画像の更新を要求する更新要求を受け付けたとき、端末情報管理部516が管理する端末情報601を用いて、更新要求が、会議を開始した後に会議に新たな端末装置が参加したことによる更新要求であるか否かを判断する。なお、更新判断部518による更新処理の例については、図10を用いて後述する。   The update determination unit 518 is realized by, for example, a program executed by the CPU 301 in FIG. When receiving the update request for updating the shared image, the update determination unit 518 uses the terminal information 601 managed by the terminal information management unit 516, and transmits the update request to the terminal device after the start of the conference. It is determined whether this is an update request due to participation. An example of the update process by the update determination unit 518 will be described later with reference to FIG.

更新要求部519は、例えば、図3のCPU301で実行されるプログラムによって実現され、表示制御部513が画像配信サーバ140からされる共有画像を表示部に表示できない場合、画像配信サーバ140に共有画像の更新を要求する更新要求を送信する。   The update request unit 519 is realized by, for example, a program executed by the CPU 301 in FIG. 3. When the display control unit 513 cannot display a shared image from the image distribution server 140 on the display unit, the image distribution server 140 Send an update request requesting an update for.

例えば、図1において、会議端末110aと会議端末110bとの間で会議が行われているものとする。また、会議端末110aと会議端末110bとの間で、情報端末120から取得した共有画像(静止画像)が共有され、会議端末110bの表示部には、例えば、図2に示すように共有画像230を含む表示画面200が表示されているものとする。   For example, in FIG. 1, it is assumed that a conference is being held between the conference terminal 110a and the conference terminal 110b. The shared image (still image) acquired from the information terminal 120 is shared between the conference terminal 110a and the conference terminal 110b, and the shared image 230 shown in FIG. It is assumed that the display screen 200 including is displayed.

この会議に、会議端末110cが参加すると、会議端末110cは、会議端末110aが配信した共有画像(静止画像)を表示することができないので、共有画像の更新を要求する更新要求を、画像配信サーバ140(又は呼制御サーバ130)に送信する。   When the conference terminal 110c participates in this conference, the conference terminal 110c cannot display the shared image (still image) distributed by the conference terminal 110a. Therefore, the conference terminal 110c sends an update request for updating the shared image to the image distribution server. 140 (or the call control server 130).

記憶部520は、例えば、図3のCPU301で実行されるプログラム、及びストレージ304、RAM303等によって実現され、図6(a)に示すような端末情報601や端末ID等の様々な情報を記憶する。   The storage unit 520 is realized by, for example, the program executed by the CPU 301 in FIG. 3, the storage 304, the RAM 303, and the like, and stores various information such as the terminal information 601 and the terminal ID shown in FIG. .

(呼制御サーバの機能構成)
呼制御サーバ130は、例えば、送受信部531、通信制御部532、会議管理部533、及び記憶部534等を有する。
(Functional configuration of call control server)
The call control server 130 includes, for example, a transmitting / receiving unit 531, a communication control unit 532, a conference management unit 533, a storage unit 534, and the like.

呼制御サーバ130は、例えば、図4のCPU401で所定のプログラムを実行することにより、上記の各機能構成を実現している。なお、上記の各機能構成のうち、少なくとも一部は、ハードウェアによって実現されるものであっても良い。   The call control server 130 realizes each of the above functional configurations by executing a predetermined program by the CPU 401 in FIG. 4, for example. In addition, at least a part of each of the above functional configurations may be realized by hardware.

送受信部531は、例えば、図4のCPU401で実行されるプログラム、及びネットワークI/F405等によって実現され、ネットワーク160を介して、会議端末110、画像配信サーバ140と通信を行う。   The transmission / reception unit 531 is realized by, for example, a program executed by the CPU 401 in FIG. 4 and the network I / F 405, and communicates with the conference terminal 110 and the image distribution server 140 via the network 160.

通信制御部532は、例えば、図4のCPU401で実行されるプログラムによって実現され、会議端末110の間で会議を行うための通信を制御する。例えば、通信制御部532は、会議端末110の間における、発信、呼出、応答、参加、切断等の制御を行う。   The communication control unit 532 is realized by, for example, a program executed by the CPU 401 in FIG. 4, and controls communication for performing a conference between the conference terminals 110. For example, the communication control unit 532 performs control such as calling, calling, answering, joining, and disconnecting between the conference terminals 110.

会議管理部533は、例えば、図4のCPU401で実行されるプログラムによって実現され、会議システム100で開催されている会議の情報を、例えば、図6(b)に示すような会議情報602に記憶して管理する。   The conference management unit 533 is realized by, for example, a program executed by the CPU 401 in FIG. 4, and stores information on a conference held in the conference system 100 in, for example, conference information 602 as illustrated in FIG. 6B. And manage.

図6(b)は、第1の実施形態に係る会議情報602の一例のイメージを示している。図6(b)の例では、会議情報602には、「会議ID」、「開始日時」、「通信時間」、「要求元端末ID」、「宛先端末ID」、「参加端末ID」、「参加時刻」、及び「参加時刻」等の情報が含まれる。   FIG. 6B illustrates an image of an example of the conference information 602 according to the first embodiment. In the example of FIG. 6B, the conference information 602 includes “conference ID”, “start date and time”, “communication time”, “request source terminal ID”, “destination terminal ID”, “participating terminal ID”, Information such as “participation time” and “participation time” is included.

「会議ID」は、会議を識別する識別情報であり、新たな会議が開始されるとき、会議管理部533によって生成される。「開始日時」は、会議を開始した日時を示す情報である。「通信時間」は、会議を開始してから現在までの時間を示す情報である。   “Conference ID” is identification information for identifying a conference, and is generated by the conference management unit 533 when a new conference is started. “Start date and time” is information indicating the date and time when the conference was started. “Communication time” is information indicating the time from the start of the conference to the present.

「要求元端末ID」は、会議の開始を要求した会議端末110(以下、要求元端末と呼ぶ)を識別する端末IDである。「宛先端末ID」は、要求元端末によって、宛先として指定された会議端末110(以下、宛先端末と呼ぶ)を識別する端末IDである。   The “request source terminal ID” is a terminal ID that identifies the conference terminal 110 that has requested the start of the conference (hereinafter, referred to as a request source terminal). The “destination terminal ID” is a terminal ID for identifying the conference terminal 110 (hereinafter, referred to as a destination terminal) specified as a destination by the request source terminal.

「参加端末ID」は、要求元端末と宛先端末との間で開催されている会議に参加する1つ以上の会議端末110(以下、参加端末と呼ぶ)を識別する端末IDである。「参加時刻」は、各参加端末が会議に参加した時刻を示す情報である。   The “participating terminal ID” is a terminal ID for identifying one or more conference terminals 110 (hereinafter, referred to as participating terminals) participating in a conference held between the request source terminal and the destination terminal. “Participation time” is information indicating the time at which each participating terminal participated in the conference.

記憶部534は、例えば、図4のCPU401で実行されるプログラム、及びストレージ404、RAM402等によって実現され、会議情報602等の様々な情報を記憶する。   The storage unit 534 is realized by, for example, the program executed by the CPU 401 in FIG. 4, the storage 404, the RAM 402, and the like, and stores various information such as the conference information 602.

(画像配信サーバの機能構成)
画像配信サーバ140は、例えば、送受信部541、会議映像配信部542、共有画像配信部543、及び記憶部544等を有する。
(Functional configuration of image distribution server)
The image distribution server 140 includes, for example, a transmission / reception unit 541, a conference video distribution unit 542, a shared image distribution unit 543, a storage unit 544, and the like.

画像配信サーバ140は、例えば、図4のCPU401で所定のプログラムを実行することにより、上記の各機能構成を実現している。なお、上記の各機能構成のうち、少なくとも一部は、ハードウェアによって実現されるものであっても良い。   The image distribution server 140 realizes each of the above functional configurations by executing a predetermined program by the CPU 401 in FIG. 4, for example. In addition, at least a part of each of the above functional configurations may be realized by hardware.

送受信部541は、例えば、図4のCPU401で実行されるプログラム、及びネットワークI/F405等によって実現され、ネットワーク160を介して、会議端末110、呼制御サーバ130と通信を行う。   The transmission / reception unit 541 is realized by, for example, a program executed by the CPU 401 in FIG. 4 and the network I / F 405, and communicates with the conference terminal 110 and the call control server 130 via the network 160.

会議映像配信部542は、例えば、図4のCPU401で実行されるプログラムによって実現され、同じ会議(セッション)に参加している会議端末110の間で送受信される会議映像(動画像、音声等)を中継する。   The conference video distribution unit 542 is realized by, for example, a program executed by the CPU 401 in FIG. 4, and transmits and receives conference video (moving image, audio, and the like) between the conference terminals 110 participating in the same conference (session). Relay.

例えば、図5の会議端末110a、110b、110cが、同じ会議IDの会議に参加している場合、会議映像配信部542は、会議端末110aから送信される会議映像を受信し、受信した会議映像を会議端末110b、110cに配信する。同様にして、会議映像配信部542は、会議端末110bから送信される会議映像を受信して、会議端末110a、110cに配信し、会議端末110cから送信される会議映像を受信して、会議端末110a、110bに配信する。   For example, when the conference terminals 110a, 110b, and 110c in FIG. 5 participate in the conference with the same conference ID, the conference video distribution unit 542 receives the conference video transmitted from the conference terminal 110a, and receives the received conference video. To the conference terminals 110b and 110c. Similarly, the conference video distribution unit 542 receives the conference video transmitted from the conference terminal 110b, distributes it to the conference terminals 110a and 110c, receives the conference video transmitted from the conference terminal 110c, and Delivery to 110a, 110b.

共有画像配信部543は、例えば、図4のCPU401で実行されるプログラムによって実現され、共有画像を送信する会議端末110から受信した共有画像を、同じ会議に参加している他の会議端末110に配信する。   The shared image distribution unit 543 is realized by, for example, a program executed by the CPU 401 in FIG. 4 and transmits the shared image received from the conference terminal 110 that transmits the shared image to the other conference terminals 110 participating in the same conference. To deliver.

例えば、共有画像配信部543は、図1の会議端末110a、110b、110cが、同じ会議IDの会議に参加している場合、会議端末110aから受信した共有画像を、会議端末110b、110cに配信する。   For example, when the conference terminals 110a, 110b, and 110c in FIG. 1 participate in a conference with the same conference ID, the shared image distribution unit 543 distributes the shared image received from the conference terminal 110a to the conference terminals 110b and 110c. I do.

記憶部534は、例えば、図4のCPU401で実行されるプログラム、及びストレージ404、RAM402等によって実現され、例えば、呼制御サーバ130から通知される会議情報、会議参加情報等の様々な情報を記憶する。   The storage unit 534 is realized by, for example, the program executed by the CPU 401 in FIG. 4, the storage 404, the RAM 402, and the like, and stores, for example, various information such as conference information and conference participation information notified from the call control server 130. I do.

<処理の流れ>
続いて、第1の実施形態に係る会議システム100、及び会議端末(端末装置)110における制御方法の処理の流れについて説明する。
<Process flow>
Subsequently, a flow of processing of a control method in the conference system 100 and the conference terminal (terminal device) 110 according to the first embodiment will be described.

(会議の開始処理)
図7は、第1の実施形態に係る会議の開始処理の例を示すシーケンス図である。この処理は、要求元端末である会議端末110aと、宛先端末である会議端末110bとの間で会議を開始する処理の一例を示している。なお、図7の処理の開始時点において、会議端末110a、110bは電源が投入されており、前述した制御用のセッションを用いて、呼制御サーバ130と制御情報の送受信が可能であるものとする。
(Meeting start process)
FIG. 7 is a sequence diagram illustrating an example of a conference start process according to the first embodiment. This processing shows an example of processing for starting a conference between the conference terminal 110a as the request source terminal and the conference terminal 110b as the destination terminal. At the start of the process in FIG. 7, the conference terminals 110a and 110b are powered on, and can transmit and receive control information to and from the call control server 130 using the control session described above. .

ステップS701において、会議端末110aの操作受付部512が、利用者による会議の開始操作を受け付けると、ステップS702以降の処理が実行される。   In step S701, when the operation reception unit 512 of the conference terminal 110a receives a user's operation of starting a conference, the processing of step S702 and thereafter is executed.

ステップS702において、会議端末110aの送受信部511は、会議の開始を要求する制御情報である会議開始要求を、呼制御サーバ130に送信する。この会議開始要求には、例えば、要求元端末(ここでは会議端末110a)の端末IDである要求元端末ID、操作受付部512が受け付けた宛先端末(ここでは会議端末110b)の端末IDである宛先端末ID等が含まれる。   In step S702, the transmission / reception unit 511 of the conference terminal 110a transmits a conference start request, which is control information for requesting the start of the conference, to the call control server 130. The conference start request includes, for example, the request source terminal ID which is the terminal ID of the request source terminal (here, the conference terminal 110a), and the terminal ID of the destination terminal (here, the conference terminal 110b) which is received by the operation reception unit 512. The destination terminal ID and the like are included.

ステップS703において、呼制御サーバ130の通信制御部532が、会議端末110aから送信された会議開始要求を受付すると、会議管理部533は、受付した会議開始要求に対応する会議を識別する会議IDを生成する。   In step S703, when the communication control unit 532 of the call control server 130 receives the conference start request transmitted from the conference terminal 110a, the conference management unit 533 sets the conference ID for identifying the conference corresponding to the received conference start request. Generate.

ステップS704において、呼制御サーバ130の通信制御部532は、宛先端末である会議端末110bに、要求元端末である会議端末110aから呼出の要求があることを示す制御情報である呼出要求を送信する。この呼出要求には、例えば、要求元端末ID、会議ID等が含まれる。   In step S704, the communication control unit 532 of the call control server 130 transmits a call request, which is control information indicating that there is a call request from the conference terminal 110a, which is the request source terminal, to the conference terminal 110b, which is the destination terminal. . This call request includes, for example, a request source terminal ID, a conference ID, and the like.

ステップS705において、会議端末110bは、例えば、表示制御部513により、図3のディスプレイ312等の表示部に呼出画面を表示すると共に、音声入出力部514により、図3のスピーカ309から呼出音を出力する。また、会議端末110bは、利用者による応答操作を受け付ける。   In step S705, the conference terminal 110b displays a call screen on a display unit such as the display 312 in FIG. 3 by the display control unit 513, and outputs a call sound from the speaker 309 in FIG. Output. The conference terminal 110b accepts a response operation by the user.

ステップS706において、会議端末110bは、利用者による応答操作に応じて、呼出要求に応答する制御情報である呼出応答を、呼制御サーバ130に送信する。   In step S706, the conference terminal 110b transmits a call response, which is control information in response to the call request, to the call control server 130 in response to a response operation by the user.

なお、ステップS705、S706に示す処理は一例であり、会議端末110bは、ステップS704で受け付けた呼出要求に対して、自動的に呼出応答を返信するものであっても良い。   Note that the processing shown in steps S705 and S706 is an example, and the conference terminal 110b may automatically return a call response to the call request received in step S704.

ステップS707において、呼制御サーバ130の通信制御部532は、宛先端末である会議端末110bから呼出応答を受け付けると、要求元端末である会議端末110aに、会議開始要求に応答する制御情報である会議開始応答を送信する。この会議開始応答には、例えば、ステップS703で生成した会議IDが含まれる。   In step S707, upon receiving the call response from the conference terminal 110b, which is the destination terminal, the communication control unit 532 of the call control server 130 transmits the conference information, which is control information responding to the conference start request, to the conference terminal 110a, which is the request source terminal. Send a start response. This conference start response includes, for example, the conference ID generated in step S703.

なお、呼制御サーバ130は、後述するステップS710において、画像配信サーバ140の宛先情報と共に、会議IDを会議端末110aに通知するものであっても良い。   Note that the call control server 130 may notify the conference terminal 110a of the conference ID together with the destination information of the image distribution server 140 in step S710 described below.

ステップS708において、呼制御サーバ130の会議管理部533は、例えば、図6(b)に示すような会議情報602を更新する。例えば、会議管理部533は、ステップS703で生成した会議IDと対応付けて、要求元端末ID、宛先端末ID、及び開始日時等の情報を会議情報602に記憶する。   In step S708, the conference management unit 533 of the call control server 130 updates, for example, the conference information 602 as illustrated in FIG. For example, the conference management unit 533 stores information such as the request source terminal ID, the destination terminal ID, and the start date and time in the conference information 602 in association with the conference ID generated in step S703.

ステップS709において、呼制御サーバ130の通信制御部532は、画像配信サーバ140に会議の情報を通知する制御情報である会議情報を送信する。この会議情報には、例えば、ステップS703で生成した会議ID、及び要求元端末ID、宛先端末ID等が含まれる。   In step S709, the communication control unit 532 of the call control server 130 transmits conference information, which is control information for notifying the information of the conference, to the image distribution server 140. The conference information includes, for example, the conference ID generated in step S703, the request source terminal ID, the destination terminal ID, and the like.

ステップS710、S711において、呼制御サーバ130の通信制御部532は、会議端末110a、110bに、会議の開始を指示する制御情報である会議開始指示を送信する。この会議開始指示には、例えば、画像配信サーバの宛先情報(例えば、IPアドレス等)が含まれる。また、会議開始情報には、会議IDが含まれ得る。   In steps S710 and S711, the communication control unit 532 of the call control server 130 transmits a conference start instruction, which is control information for instructing the start of the conference, to the conference terminals 110a and 110b. The meeting start instruction includes, for example, destination information (for example, an IP address or the like) of the image distribution server. The meeting start information may include a meeting ID.

ステップS712において、会議端末110aの端末情報管理部516は、呼制御サーバ130から会議開始指示を受け付けると、例えば、図6(a)に示すような端末情報601を更新する。ここでは、会議端末110aの端末情報管理部516は、記憶部520に記憶した端末情報601に、会議端末110bの端末ID、通信開始時間等を記憶する。   In step S712, when receiving the conference start instruction from the call control server 130, the terminal information management unit 516 of the conference terminal 110a updates, for example, the terminal information 601 as illustrated in FIG. Here, the terminal information management unit 516 of the conference terminal 110a stores the terminal ID of the conference terminal 110b, the communication start time, and the like in the terminal information 601 stored in the storage unit 520.

ステップS713において、会議端末110aの送受信部511は、呼制御サーバ130から通知された画像配信サーバ140の宛先情報と、会議IDとを用いて、画像配信サーバ140と通信セッションを確立する。   In step S713, the transmission / reception unit 511 of the conference terminal 110a establishes a communication session with the image distribution server 140 using the destination information of the image distribution server 140 notified from the call control server 130 and the conference ID.

また、ステップS712、S713の処理と並行して、会議端末110bは、ステップS714、S715の処理を実行する。   In addition, in parallel with the processing of steps S712 and S713, the conference terminal 110b performs the processing of steps S714 and S715.

ステップS714において、会議端末110bの端末情報管理部516は、呼制御サーバ130から会議開始指示を受け付けると、端末情報601を更新する。ここでは、会議端末110bの端末情報管理部516は、記憶部520に記憶した端末情報601に、会議端末110aの端末ID、通信開始時間等を記憶する。   In step S714, when receiving the conference start instruction from the call control server 130, the terminal information management unit 516 of the conference terminal 110b updates the terminal information 601. Here, the terminal information management unit 516 of the conference terminal 110b stores the terminal ID of the conference terminal 110a, the communication start time, and the like in the terminal information 601 stored in the storage unit 520.

ステップS715において、会議端末110bの送受信部511は、呼制御サーバ130から通知された画像配信サーバ140の宛先情報と、会議IDとを用いて、画像配信サーバ140と通信セッションを確立する。   In step S715, the transmission / reception unit 511 of the conference terminal 110b establishes a communication session with the image distribution server 140 using the destination information of the image distribution server 140 notified from the call control server 130 and the conference ID.

上記の処理により、ステップS716において、同じ会議IDで通信セッションを確立した会議端末110aと会議端末110bとの間で、画像配信サーバ140を介して、会議映像(画像、音声)の送受信が行えるようになる。   By the above processing, in step S716, the conference video (image and audio) can be transmitted and received via the image distribution server 140 between the conference terminal 110a and the conference terminal 110b that have established the communication session with the same conference ID. become.

(共有画像の共有処理)
図8は、第1の実施形態に係る共有画像の共有処理の例を示すシーケンス図である。この処理は、例えば、図1において、会議端末110aと会議端末110bとの間で会議中に、会議端末110aの利用者が、情報端末120に表示している表示画面をキャプチャした静止画像を、会議端末110bと共有する場合の処理の例を示している。
(Sharing of shared images)
FIG. 8 is a sequence diagram illustrating an example of a sharing process of a shared image according to the first embodiment. In this process, for example, in FIG. 1, during a conference between the conference terminal 110a and the conference terminal 110b, a user of the conference terminal 110a captures a still image obtained by capturing a display screen displayed on the information terminal 120, The example of the process at the time of sharing with the conference terminal 110b is shown.

なお、図8のステップS716において、図7に示す会議の開始処理により、会議端末110aと会議端末110bとの間で、会議映像を送受信する会議が行われているものとする。   In step S716 in FIG. 8, it is assumed that a conference for transmitting and receiving conference video has been performed between the conference terminal 110a and the conference terminal 110b by the conference start process shown in FIG.

ステップS801において、会議端末110aの操作受付部512が、利用者による画像の共有操作を受け付けると、ステップS802以降の処理が実行される。   In step S801, when the operation receiving unit 512 of the conference terminal 110a receives a user's image sharing operation, the processing of step S802 and thereafter is executed.

ステップS802において、会議端末110aの共有画像送信部517は、情報端末120が表示している表示画像から静止画像を取得する。例えば、共有画像送信部517は、外部I/F111に接続された情報端末120から、情報端末120が表示している表示画像のデータを取得し、取得した表示画像のデータから共有画像(静止画像)を取得する。   In step S802, the shared image transmission unit 517 of the conference terminal 110a acquires a still image from the display image displayed by the information terminal 120. For example, the shared image transmission unit 517 acquires data of a display image displayed on the information terminal 120 from the information terminal 120 connected to the external I / F 111, and acquires a shared image (still image) from the acquired display image data. ) To get.

ステップS803、S804において、会議端末110aの共有画像送信部517は、取得した共有画像を、画像配信サーバ140を介して会議端末110bに送信する。   In steps S803 and S804, shared image transmitting section 517 of conference terminal 110a transmits the acquired shared image to conference terminal 110b via image distribution server 140.

ステップS805において、会議端末110bの表示制御部513は、会議端末110aから受信した共有画像を用いて、例えば、図2に示すような表示画面200に共有画像230を表示する。   In step S805, the display control unit 513 of the conference terminal 110b displays the shared image 230 on, for example, the display screen 200 as illustrated in FIG. 2 using the shared image received from the conference terminal 110a.

なお、ステップS805において、会議端末110bの表示制御部513が、例えば、通信品質の劣化等により、共有画像の表示に失敗した場合には、ステップS811〜S819に示す処理が実行される。   In step S805, when the display control unit 513 of the conference terminal 110b fails to display the shared image due to, for example, deterioration of communication quality, the processing illustrated in steps S811 to S819 is performed.

例えば、ステップS811において、会議端末110bの表示制御部513が、所定の時間内に共有画像の表示に失敗するものとする。   For example, in step S811, it is assumed that the display control unit 513 of the conference terminal 110b fails to display the shared image within a predetermined time.

ステップS812、S813において、更新要求部519は、共有画像の表示に失敗すると、共有画像の更新を要求する制御情報である更新要求を、画像配信サーバ140を介して会議端末110aに送信する。この更新要求には、会議端末110bの端末ID(宛先端末ID)等が含まれる。   In steps S812 and S813, when the display of the shared image fails, the update request unit 519 transmits an update request, which is control information for requesting an update of the shared image, to the conference terminal 110a via the image distribution server 140. This update request includes the terminal ID (destination terminal ID) of the conference terminal 110b and the like.

ステップS814において、会議端末110aの更新判断部518は、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求であるか否かを、例えば、図6(a)に示すような端末情報601を用いて判断する。   In step S814, the update determination unit 518 of the conference terminal 110a determines whether the update request is an update request due to the participation of a new participating terminal in the conference after the start of the conference, for example, as illustrated in FIG. Is determined using the terminal information 601 as shown in FIG.

更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求でない場合、会議端末110aは、共有画像を更新して、更新した共有画像を会議端末110bに送信する。   If the update request is not an update request due to the participation of a new participating terminal in the conference after starting the conference, the conference terminal 110a updates the shared image and transmits the updated shared image to the conference terminal 110b.

一方、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求である場合、会議端末110aは、共有画像の更新を中止する。   On the other hand, if the update request is an update request due to the participation of a new participating terminal in the conference after starting the conference, the conference terminal 110a stops updating the shared image.

ここでは、会議端末110aと会議端末110bとの間で会議を開始した後に、会議に新たな参加端末は参加していないので、ステップS815以降の処理が実行される。   Here, after the conference is started between the conference terminal 110a and the conference terminal 110b, since the new participating terminal has not participated in the conference, the processing after step S815 is executed.

ステップS815において、会議端末110aの共有画像送信部517は、情報端末120が表示している表示画像のデータを取得し、取得した表示画像のデータを用いて、共有画像(静止画像)を更新する。   In step S815, the shared image transmission unit 517 of the conference terminal 110a acquires the data of the display image displayed by the information terminal 120, and updates the shared image (still image) using the acquired data of the display image. .

ステップS816、S817において、会議端末110aの共有画像送信部517は、更新した共有画像を、画像配信サーバ140を介して会議端末110bに送信する。   In steps S816 and S817, shared image transmitting section 517 of conference terminal 110a transmits the updated shared image to conference terminal 110b via image distribution server 140.

ステップS818において、会議端末110bの表示制御部513は、会議端末110aから受信した共有画像を用いて、例えば、図2に示すような表示画面200に共有画像230を表示する。   In step S818, the display control unit 513 of the conference terminal 110b displays, for example, the shared image 230 on the display screen 200 as illustrated in FIG. 2 using the shared image received from the conference terminal 110a.

なお、ここでも共有画像の表示に失敗した場合には、例えば、ステップS811以降の処理が再び実行される。   Here, if the display of the shared image also fails, for example, the processing after step S811 is executed again.

(会議端末の参加処理)
図9は、第1の実施形態に係る会議端末の参加処理の例を示すシーケンス図である。この処理は、会議を開始した後、会議に新たな会議端末110c(参加端末)が参加する参加処理の一例を示している。
(Conference terminal participation processing)
FIG. 9 is a sequence diagram illustrating an example of the participation process of the conference terminal according to the first embodiment. This process shows an example of a joining process in which a new conference terminal 110c (participating terminal) joins the conference after the conference has started.

なお、図9のステップS716において、図7に示す会議の開始処理により、会議端末110aと会議端末110bとの間で、会議映像を送受信する会議が行われているものとする。   In step S716 in FIG. 9, it is assumed that a conference for transmitting and receiving conference video has been performed between the conference terminal 110a and the conference terminal 110b by the conference start process shown in FIG.

ステップS901において、会議端末110cの操作受付部512が、利用者による会議への参加操作を受け付けると、ステップS902以降の処理が実行される。   In step S901, when the operation reception unit 512 of the conference terminal 110c receives a user's operation to participate in a conference, the processing of step S902 and thereafter is executed.

ステップS902において、会議端末110aの送受信部511は、会議への参加を要求する制御情報である会議参加要求を、呼制御サーバ130に送信する。この会議参加要求には、例えば、会議に参加している会議端末110a又は会議端末110bの端末IDと、参加端末(会議端末110c)の端末IDである参加端末IDとが含まれる。   In step S902, the transmission / reception unit 511 of the conference terminal 110a transmits a conference participation request, which is control information for requesting participation in the conference, to the call control server 130. The conference participation request includes, for example, the terminal ID of the conference terminal 110a or the conference terminal 110b participating in the conference and the participation terminal ID that is the terminal ID of the participating terminal (conference terminal 110c).

ステップS903、S904において、呼制御サーバ130の通信制御部532は、会議参加要求を受け付けると、会議に参加している会議端末110a、110bに、新たな参加端末が会議に参加したことを示す制御情報である会議参加通知を送信する。この会議参加情報には、参加端末(会議端末110c)の端末IDである参加端末IDが含まれる。   In steps S903 and S904, upon receiving the conference participation request, the communication control unit 532 of the call control server 130 controls the conference terminals 110a and 110b participating in the conference to indicate that the new participating terminal has participated in the conference. Send a meeting notification that is information. The conference participation information includes a participation terminal ID which is a terminal ID of the participating terminal (conference terminal 110c).

ステップS905、S906において、会議端末110a、110bの端末情報管理部516は、会議参加通知を受け付けると、例えば、図6(a)に示すような端末情報601を更新する。例えば、会議端末110aの端末情報管理部516は、図6(a)に示すような端末情報601に、会議端末110cの端末ID「10ac」と、通信開始時間を記憶する。   In steps S905 and S906, upon receiving the conference participation notification, the terminal information management unit 516 of the conference terminals 110a and 110b updates the terminal information 601 as shown in FIG. 6A, for example. For example, the terminal information management unit 516 of the conference terminal 110a stores the terminal ID “10ac” of the conference terminal 110c and the communication start time in the terminal information 601 as illustrated in FIG.

ここで、ステップS907以降の処理は、自動的に実行されるものであっても良いし、既に会議に参加している会議端末110a、又は会議端末110bへの応答操作に応じて実行されるものであっても良い。ここでは、ステップS907以降の処理が自動的に実行されるものとして以下の説明を行う。   Here, the processing after step S907 may be automatically executed, or may be executed in response to a response operation to the conference terminal 110a or the conference terminal 110b already participating in the conference. It may be. Here, the following description is made assuming that the processing after step S907 is automatically executed.

ステップS907において、呼制御サーバ130の会議管理部533は、例えば、図6(b)に示すような会議情報602を更新する。例えば、会議管理部533は、会議端末110a、110bが参加している会議の会議IDに対応付けて、参加端末ID、参加時刻等の情報を会議情報602に記憶する。   In step S907, the conference management unit 533 of the call control server 130 updates, for example, the conference information 602 as illustrated in FIG. For example, the conference management unit 533 stores information such as the participation terminal ID and the participation time in the conference information 602 in association with the conference ID of the conference in which the conference terminals 110a and 110b participate.

ステップS908において、呼制御サーバ130の通信制御部532は、画像配信サーバ140に、参加端末である会議端末110cの情報を通知する制御情報である会議参加情報を送信する。この会議参加情報には、会議ID、参加端末(会議端末110c)の端末IDである参加端末ID等が含まれる。   In step S908, the communication control unit 532 of the call control server 130 transmits, to the image distribution server 140, conference participation information that is control information for notifying information of the conference terminal 110c that is a participating terminal. The conference participation information includes a conference ID, a participating terminal ID that is a terminal ID of the participating terminal (the conference terminal 110c), and the like.

ステップS909において、呼制御サーバ130の通信制御部は、会議端末110cに会議への参加を指示する制御情報である会議参加指示を送信する。この会議参加指示には、会議ID、画像配信サーバ140の宛先情報、及び会議に参加している他の会議端末110a、110bの端末ID等が含まれる。   In step S909, the communication control unit of the call control server 130 transmits a conference participation instruction, which is control information for instructing participation in the conference, to the conference terminal 110c. The conference participation instruction includes a conference ID, destination information of the image distribution server 140, terminal IDs of the other conference terminals 110a and 110b participating in the conference, and the like.

ステップS910において、会議端末110cの端末情報管理部516は、呼制御サーバ130から会議参加指示を受け付けると、例えば、図6(a)に示すような端末情報601を更新する。ここでは、会議端末110aの端末情報管理部516は、記憶部520に記憶した端末情報601に、会議端末110a、110bの端末ID等を記憶する。   In step S910, when receiving the conference participation instruction from the call control server 130, the terminal information management unit 516 of the conference terminal 110c updates, for example, the terminal information 601 as illustrated in FIG. Here, the terminal information management unit 516 of the conference terminal 110a stores the terminal IDs of the conference terminals 110a and 110b in the terminal information 601 stored in the storage unit 520.

ステップS911において、会議端末110aの送受信部511は、呼制御サーバ130から通知された画像配信サーバ140の宛先情報と、会議IDとを用いて、画像配信サーバ140と通信セッションを確立する。   In step S911, the transmission / reception unit 511 of the conference terminal 110a establishes a communication session with the image distribution server 140 using the destination information of the image distribution server 140 notified from the call control server 130 and the conference ID.

ステップS912、S913において、会議端末110cは、会議端末110a、110bと同じ会議に参加し、画像配信サーバ140を介して会議端末110a、110bと会議映像の送受信が行えるようになる。   In steps S912 and S913, the conference terminal 110c participates in the same conference as the conference terminals 110a and 110b, and can transmit and receive conference video to and from the conference terminals 110a and 110b via the image distribution server 140.

ステップS914において、新たに会議に参加した会議端末110cの表示制御部513は、共有画像の表示に失敗する。これは、例えば、図8のステップS804において、会議端末110aが送信した共有画像を、会議端末110cが受信していないためである。   In step S914, the display control unit 513 of the conference terminal 110c newly participating in the conference fails to display the shared image. This is because, for example, in step S804 in FIG. 8, the shared image transmitted by the conference terminal 110a is not received by the conference terminal 110c.

ステップS915、S916において、会議端末110cの更新要求部519は、表示制御部513が共有画像の表示に失敗すると、共有画像の更新を要求する更新要求を、画像配信サーバ140を介して会議端末110aに送信する。この更新要求には、会議端末110cの端末ID(参加端末ID)等が含まれる。   In steps S915 and S916, when the display control unit 513 fails to display the shared image, the update request unit 519 of the conference terminal 110c issues an update request for updating the shared image via the image distribution server 140 to the conference terminal 110a. Send to This update request includes the terminal ID (participating terminal ID) of the conference terminal 110c and the like.

ステップS917において、会議端末110aの更新判断部518は、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求であるか否かを、例えば、図6(a)に示すような端末情報601を用いて判断する。   In step S917, the update determination unit 518 of the conference terminal 110a determines whether the update request is an update request due to the participation of a new participating terminal in the conference after the start of the conference, for example, as shown in FIG. Is determined using the terminal information 601 as shown in FIG.

更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求でない場合、会議端末110aは、共有画像を更新して、更新した共有画像を会議端末110bに送信する。   If the update request is not an update request due to the participation of a new participating terminal in the conference after starting the conference, the conference terminal 110a updates the shared image and transmits the updated shared image to the conference terminal 110b.

一方、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求である場合、会議端末110aは、共有画像の更新を中止する。   On the other hand, if the update request is an update request due to the participation of a new participating terminal in the conference after starting the conference, the conference terminal 110a stops updating the shared image.

ここでは、更新要求が、会議を開始した後に会議に新たな会議端末110cが参加したことによる更新要求なので、ステップS918において、会議端末110aの共有画像送信部517は、共有画像の更新を中止する。   Here, the update request is an update request due to the participation of the new conference terminal 110c in the conference after the start of the conference. Therefore, in step S918, the shared image transmission unit 517 of the conference terminal 110a stops updating the shared image. .

上記の処理により、本実施形態に係る会議システム100では、会議を開始した後に会議に新たな参加端末が参加したとき、利用者が意図していない表示画面によって、共有画像が更新されてしまうことを低減させることができる。   According to the above processing, in the conference system 100 according to the present embodiment, when a new participating terminal joins the conference after the conference is started, the shared image is updated by a display screen not intended by the user. Can be reduced.

なお、本実施形態では、参加端末である会議端末110cの共有画像は、会議端末110aで共有画像の共有処理、又は更新処理が行われるまで表示されない。しかし、会議端末110cの利用者は、例えば、会議映像を用いて会議端末110aの利用者と対話できるので、共有画像の更新を会議端末110aの利用者に容易に依頼することができる。   In the present embodiment, the shared image of the conference terminal 110c, which is a participating terminal, is not displayed until the shared image is shared or updated by the conference terminal 110a. However, since the user of the conference terminal 110c can interact with the user of the conference terminal 110a using, for example, a conference video, the user of the conference terminal 110a can easily request the user of the conference terminal 110a to update the shared image.

(更新判断部の判断処理)
図10は、第1の実施形態に係る更新判断部の判断処理の例を示すフローチャートである。この処理は、例えば、図8のステップS814、又は図9のステップS917において、会議端末110の更新判断部518が、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求であるか否かを判断する処理の例を示している。
(Judgment processing of the update judgment unit)
FIG. 10 is a flowchart illustrating an example of a determination process of the update determination unit according to the first embodiment. This processing is performed, for example, in step S814 in FIG. 8 or in step S917 in FIG. 9, when the update determination unit 518 of the conference terminal 110 determines that the update request indicates that a new participating terminal has joined the conference after starting the conference. The example of the process which determines whether it is an update request is shown.

ステップS1001において、会議端末110は、共有画像の更新要求を受け付けると、ステップS1002以降の処理を実行する。   In step S1001, upon receiving the update request for the shared image, the conference terminal 110 executes the processing of step S1002 and thereafter.

ステップS1002において、会議端末110の更新判断部518は、例えば、図6(a)に示すような端末情報601を、記憶部520から読出する。   In step S1002, the update determination unit 518 of the conference terminal 110 reads, for example, the terminal information 601 as illustrated in FIG.

ステップS1003において、更新判断部518は、読出した端末情報601を用いて、会議を開始した後に会議に参加した参加端末があるか否かを判断する。図6(a)の例では、会議端末110aが、端末ID「10ab」の会議端末110bと通信を開始した約30分後に、端末ID「10ac」の会議端末110cと通信を開始しているので、会議を開始した後に会議に参加した参加端末があると判断することができる。   In step S1003, the update determination unit 518 determines whether there is any participating terminal that has participated in the conference after starting the conference, using the read terminal information 601. In the example of FIG. 6A, since the conference terminal 110a starts communicating with the conference terminal 110c with the terminal ID "10ac" about 30 minutes after starting communication with the conference terminal 110b with the terminal ID "10ab". It can be determined that there is a participating terminal that has joined the conference after starting the conference.

会議を開始した後に会議に参加した参加端末がない場合、更新判断部518は、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求ではないと判断し、処理をステップS1105に移行させる。   If there is no participating terminal that has joined the conference after the start of the conference, the update determination unit 518 determines that the update request is not an update request due to the participation of a new participating terminal in the conference after the start of the conference. Is shifted to step S1105.

一方、会議を開始した後に会議に参加した参加端末がある場合、更新判断部518は、処理をステップS1104に移行させる。   On the other hand, when there is a participating terminal that has participated in the conference after starting the conference, the update determination unit 518 shifts the processing to step S1104.

ステップS1104に移行すると、会議を開始した後に会議に参加した参加端末の通信開始時間から所定の時間(例えば、1〜5分程度)を経過しているか否かを判断する。なお、会議を開始した後に会議に参加した参加端末が複数ある場合、最後に参加した参加端末の通信開始時間から所定の時間を経過しているか否かを判断する。   In step S1104, it is determined whether or not a predetermined time (for example, about 1 to 5 minutes) has elapsed from the communication start time of the participating terminals that have joined the conference after starting the conference. If there are a plurality of participating terminals participating in the conference after starting the conference, it is determined whether a predetermined time has elapsed from the communication start time of the last participating terminal.

所定の時間を経過している場合、更新判断部518は、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求ではないと判断し、処理をステップS1105に移行させる。   If the predetermined time has elapsed, the update determination unit 518 determines that the update request is not an update request due to a new participating terminal participating in the conference after starting the conference, and shifts the processing to step S1105. Let it.

一方、所定の時間を経過していない場合、更新判断部518は、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求であると判断し、ステップS1007において、共有画像送信部517は、共有画像の更新を中止する。   On the other hand, if the predetermined time has not elapsed, the update determination unit 518 determines that the update request is an update request due to the participation of a new participating terminal in the conference after starting the conference, and in step S1007, The shared image transmission unit 517 stops updating the shared image.

ステップS1005に移行すると、会議端末110の共有画像送信部517は、情報端末120が表示している表示画像のデータを取得し、取得した表示画像のデータを用いて、共有画像(静止画像)を更新する。   In step S1005, the shared image transmission unit 517 of the conference terminal 110 acquires the data of the display image displayed by the information terminal 120, and converts the shared image (still image) using the acquired data of the display image. Update.

ステップS1006において、共有画像送信部517は、更新した共有画像を、会議に参加している他の会議端末110に、画像配信サーバ140を介して送信する。   In step S1006, shared image transmitting section 517 transmits the updated shared image to other conference terminals 110 participating in the conference via image distribution server 140.

上記の各処理により、会議端末110aと会議端末110bとの間で会議を行い、共有画像を共有しているときに、会議端末110cが新たに会議に参加した場合、会議端末110cが送信した共有画像の更新要求による共有画像の更新が行われない。   Through the above-described processes, when a conference is held between the conference terminal 110a and the conference terminal 110b and the shared image is shared, and the conference terminal 110c newly joins the conference, the shared terminal transmitted by the conference terminal 110c is transmitted. The shared image is not updated by the image update request.

したがって、本実施形態によれば、複数の会議端末110の間で静止画像を共有する会議システム100において、利用者が意図していない表示画面によって、共有画像が更新されてしまうことを効果的に低減させることができる。   Therefore, according to the present embodiment, in the conference system 100 that shares a still image among a plurality of conference terminals 110, it is possible to effectively prevent a shared image from being updated by a display screen not intended by a user. Can be reduced.

[第2の実施形態]
図5に示す第1の実施形態に係る会議システム100の機能構成は一例である。例えば、第1の実施形態において、会議端末110が有していた更新判断部518は、呼制御サーバ130が有していても良い。
[Second embodiment]
The functional configuration of the conference system 100 according to the first embodiment illustrated in FIG. 5 is an example. For example, in the first embodiment, the update determination unit 518 included in the conference terminal 110 may be included in the call control server 130.

第2の実施形態では、呼制御サーバ130が、更新判断部518を有している場合の例について説明する。   In the second embodiment, an example in which the call control server 130 includes the update determination unit 518 will be described.

<機能構成>
図5は、第2の実施形態に係る会議システムの機能構成の例を示す図である。図11に示すように、第2の実施形態では、第1の実施形態において、会議端末110が有していた更新判断部518を、呼制御サーバ130が有している。
<Functional configuration>
FIG. 5 is a diagram illustrating an example of a functional configuration of the conference system according to the second embodiment. As illustrated in FIG. 11, in the second embodiment, the call control server 130 includes the update determination unit 518 that the conference terminal 110 has in the first embodiment.

本実施形態に係る更新判断部518は、例えば、図4のCPU401で実行されるプログラムによって実現される。更新判断部518は、例えば、図6(b)に示すようは会議情報602を用いて、受付した更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求であるか否かを判断する。   The update determining unit 518 according to the present embodiment is realized by, for example, a program executed by the CPU 401 in FIG. The update determination unit 518 uses the conference information 602 as shown in FIG. 6B, for example, and the received update request is an update request due to the participation of a new participating terminal in the conference after the start of the conference. It is determined whether or not.

例えば、更新判断部518は、会議情報602の「会議ID」、「参加端末ID」、「及び参加時刻」の情報を用いて、図10に示すような判断処理を実行する。   For example, the update determination unit 518 performs a determination process as illustrated in FIG. 10 using the information of “conference ID”, “participating terminal ID”, and “participation time” of the conference information 602.

また、本実施形態では、会議中に会議に参加する参加端末は、画像配信サーバ140に代えて、呼制御サーバ130に共有画像の更新要求を送信する。   Further, in the present embodiment, the participating terminal that participates in the conference during the conference transmits a shared image update request to the call control server 130 instead of the image distribution server 140.

なお、上記以外の会議システム100の機能構成は、第1の実施形態と同様で良い。   The functional configuration of the conference system 100 other than the above may be the same as that of the first embodiment.

<処理の流れ>
図12は、第2の実施形態に係る会議端末の参加処理の例を示すシーケンス図である。なお、図12に示す処理のうち、ステップS716、及びステップS901〜S913に示す処理は、図9に示す第1の実施形態に係る処理と同様なので、ここでは、第1の実施形態に示す処理との相違点を中心に説明を行う。
<Process flow>
FIG. 12 is a sequence diagram illustrating an example of the participation process of the conference terminal according to the second embodiment. Note that among the processing shown in FIG. 12, the processing shown in step S716 and steps S901 to S913 are the same as the processing according to the first embodiment shown in FIG. The following description focuses on the differences from the above.

ステップS1201において、新たに会議に参加した会議端末110cの表示制御部513は、第1の実施形態と同様に共有画像の表示に失敗する。   In step S1201, the display control unit 513 of the conference terminal 110c newly participating in the conference fails to display the shared image as in the first embodiment.

ステップS1202において、会議端末110cの更新要求部519は、表示制御部513が共有画像の表示に失敗すると、制御用のセッションを用いて、呼制御サーバ130に共有画像の更新を要求する制御情報である更新要求を送信する。   In step S1202, when the display control unit 513 fails to display the shared image, the update request unit 519 of the conference terminal 110c uses control information to request the call control server 130 to update the shared image using the control session. Send an update request.

ステップS1203において、呼制御サーバ130の更新判断部518は、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求であるか否かを、例えば、図6(b)に示すような会議情報602を用いて判断する。   In step S1203, the update determination unit 518 of the call control server 130 determines whether or not the update request is an update request due to the participation of a new participating terminal in the conference after the start of the conference, for example, as shown in FIG. The determination is made using the conference information 602 as shown in FIG.

例えば、更新判断部518は、図6(b)に示すような会議情報602において、当該会議の「会議ID」に対応する「参加端末ID」が記憶されているか否かにより、図10のステップS1003の判断を行うことができる。また、更新判断部518は、図6(b)に示すような会議情報602において、当該会議の「会議ID」に対応する「参加時刻」により、図10のステップS1004の判断を行うことができる。   For example, the update determination unit 518 determines whether the “participation terminal ID” corresponding to the “conference ID” of the conference is stored in the conference information 602 as illustrated in FIG. The determination in S1003 can be made. Further, the update determination unit 518 can make the determination in step S1004 in FIG. 10 based on the “participation time” corresponding to the “conference ID” of the conference in the conference information 602 as illustrated in FIG. 6B. .

したがって、呼制御サーバ130の更新判断部518は、図6(b)に示すような会議情報602を用いて、図10に示す更新判断部の判断処理を実行することができる。なお、会議情報602は、会議管理部(管理部の別の一例)533が管理する、会議に参加している会議端末110の情報の一例である。   Therefore, the update determination unit 518 of the call control server 130 can execute the determination process of the update determination unit illustrated in FIG. 10 using the conference information 602 as illustrated in FIG. The conference information 602 is an example of information of the conference terminal 110 participating in the conference, which is managed by the conference management unit (another example of the management unit) 533.

更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求でない場合、呼制御サーバ130の通信制御部532は、共有画像の更新要求を会議端末110a、110b等に送信する。これにより、共有画像を配信した会議端末110aの共有画像送信部517は、共有画像を更新して、更新した共有画像を会議端末110b、110cに送信することができる。   If the update request is not an update request due to a new participating terminal joining the conference after starting the conference, the communication control unit 532 of the call control server 130 transmits a shared image update request to the conference terminals 110a, 110b and the like. I do. Thereby, the shared image transmission unit 517 of the conference terminal 110a that has distributed the shared image can update the shared image and transmit the updated shared image to the conference terminals 110b and 110c.

一方、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求である場合、呼制御サーバ130の通信制御部532は、共有画像の更新要求を、会議端末110a、110b等に送信する処理を中止する。これにより、共有画像を配信した会議端末aの共有画像送信部517による共有画像の更新を中止することができる。   On the other hand, when the update request is an update request due to the participation of a new participating terminal in the conference after the start of the conference, the communication control unit 532 of the call control server 130 sends the shared image update request to the conference terminal 110a, The processing to be transmitted to 110b or the like is stopped. Thereby, the update of the shared image by the shared image transmitting unit 517 of the conference terminal a to which the shared image has been distributed can be stopped.

ここでは、更新要求が、会議を開始した後に会議に新たな会議端末110cが参加したことによる更新要求なので、ステップS1204において、呼制御サーバ130の通信制御部532は、共有画像の更新要求の送信を中止する。   Here, since the update request is an update request due to the participation of the new conference terminal 110c in the conference after the conference has started, in step S1204, the communication control unit 532 of the call control server 130 transmits the shared image update request. To stop.

上記の処理により、第2の実施形態に係る会議システム100においても、会議を開始した後に会議に新たな参加端末が参加したとき、利用者が意図していない表示画面によって、共有画像が更新されてしまうことを低減させることができる。   With the above processing, also in the conference system 100 according to the second embodiment, when a new participating terminal joins the conference after starting the conference, the shared image is updated by a display screen that is not intended by the user. Can be reduced.

[第3の実施形態]
第1の実施形態では、会議端末110が、受付した共有画像の更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求である場合に、共有画像の更新を中止する場合の例について説明した。
[Third Embodiment]
In the first embodiment, the conference terminal 110 stops updating the shared image when the received shared image update request is an update request due to the participation of a new participating terminal in the conference after starting the conference. The example of the case where it does is explained.

第3の実施形態では、会議端末110が、受付した共有画像の更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求である場合に、共有画像の更新を中止し、記憶部520に記憶した共有画像を配信する場合の例について説明する。   In the third embodiment, the conference terminal 110 stops updating the shared image when the received shared image update request is an update request due to the participation of a new participating terminal in the conference after starting the conference. Then, an example in the case of distributing the shared image stored in the storage unit 520 will be described.

なお、第3の実施形態に係る会議システム100の機能構成は、図5に示す第1の実施形態に係る会議システム100の機能構成と同様で良い。   The functional configuration of the conference system 100 according to the third embodiment may be the same as the functional configuration of the conference system 100 according to the first embodiment illustrated in FIG.

<処理の流れ>
図13は、第3の実施形態に係る画像の共有処理の例を示すシーケンス図である。なお、図13のステップS716において、図7に示す会議の開始処理により、会議端末110aと会議端末110bとの間で、会議映像を送受信する会議が行われているものとする。また、図13に示す処理の基本的な処理内容は第1の実施形態と同様なので、ここでは、第1の実施形態と同様の処理についての詳細な説明は省略する。
<Process flow>
FIG. 13 is a sequence diagram illustrating an example of an image sharing process according to the third embodiment. In step S716 in FIG. 13, it is assumed that a conference for transmitting and receiving conference video has been performed between the conference terminal 110a and the conference terminal 110b by the conference start process shown in FIG. In addition, since the basic processing content of the processing illustrated in FIG. 13 is the same as that of the first embodiment, a detailed description of the same processing as that of the first embodiment will be omitted.

ステップS1301において、会議端末110aの操作受付部512が、利用者による画像の共有操作を受け付けると、ステップS1302以降の処理が実行される。   In step S1301, when the operation receiving unit 512 of the conference terminal 110a receives a user's image sharing operation, the processing from step S1302 is executed.

ステップS1302において、会議端末110aの共有画像送信部517は、情報端末120が表示している表示画像から共有画像(静止画像)を取得する。   In step S1302, shared image transmitting section 517 of conference terminal 110a acquires a shared image (still image) from the display image displayed by information terminal 120.

ステップS1303、S1304において、会議端末110aの共有画像送信部517は、取得した共有画像を、画像配信サーバ140を介して会議端末110bに送信する。   In steps S1303 and S1304, shared image transmitting section 517 of conference terminal 110a transmits the acquired shared image to conference terminal 110b via image distribution server 140.

ステップS1305において、会議端末110aの共有画像送信部517は、送信した共有画像を、記憶部520に記憶する。なお、共有画像送信部517は、共有画像を送信する前に、共有画像を記憶部520に記憶するものであっても良い。   In step S1305, shared image transmitting section 517 of conference terminal 110a stores the transmitted shared image in storage section 520. Note that the shared image transmitting unit 517 may store the shared image in the storage unit 520 before transmitting the shared image.

ステップS1306において、会議端末110bの表示制御部513は、会議端末110aから受信した共有画像を用いて、例えば、図2に示すような表示画面200に共有画像230を表示する。   In step S1306, the display control unit 513 of the conference terminal 110b displays the shared image 230 on, for example, the display screen 200 as illustrated in FIG. 2 using the shared image received from the conference terminal 110a.

ステップS1307において、例えば、図9のステップS901〜S911に示す会議端末110cの参加処理により、ステップS1308、S1309において、会議端末110cは、会議端末110a、110bと同じ会議に参加するものとする。   In step S1307, it is assumed that the conference terminal 110c participates in the same conference as the conference terminals 110a and 110b in steps S1308 and S1309, for example, by the participation processing of the conference terminal 110c shown in steps S901 to S911 in FIG.

ステップS1311において、新たに会議に参加した会議端末110cは、会議端末110aが送信した共有画像を受信していないため、共有画像の表示に失敗し、これにより、ステップS1312以降の処理が実行される。   In step S1311, the conference terminal 110c newly participating in the conference has failed to display the shared image because the conference terminal 110a has not received the shared image transmitted by the conference terminal 110a. Accordingly, the processes in and after step S1312 are executed. .

ステップS1312、S1313において、会議端末110cの更新要求部519は、画像配信サーバ140を介して、会議端末110aに共有画像の更新を要求する更新要求を送信する。   In steps S1312 and S1313, the update request unit 519 of the conference terminal 110c transmits an update request for requesting an update of the shared image to the conference terminal 110a via the image distribution server 140.

ステップS1314において、会議端末110aの更新判断部518は、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求であるか否かを、例えば、図6(a)に示すような端末情報601を用いて判断する。   In step S1314, the update determination unit 518 of the conference terminal 110a determines whether the update request is an update request due to the participation of a new participating terminal in the conference after the start of the conference, for example, as shown in FIG. Is determined using the terminal information 601 as shown in FIG.

更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求でない場合、会議端末110aの共有画像送信部517は、例えば、図8のステップS815〜816に示す処理により、共有画像を更新して他の会議端末110に送信する。   When the update request is not an update request due to the participation of a new participating terminal in the conference after the start of the conference, the shared image transmitting unit 517 of the conference terminal 110a performs, for example, the process illustrated in steps S815 to 816 in FIG. The shared image is updated and transmitted to another conference terminal 110.

一方、更新要求が、会議を開始した後に会議に新たな参加端末が参加したことによる更新要求である場合、会議端末110aの共有画像送信部517は、ステップS1315、S1316の処理を実行する。   On the other hand, if the update request is an update request due to a new participating terminal participating in the conference after starting the conference, the shared image transmission unit 517 of the conference terminal 110a performs the processing of steps S1315 and S1316.

ステップS1315において、会議端末110aの共有画像送信部517は、共有画像の更新を中止すると共に、ステップS1305で記憶部520に記憶した共有画像を読出する。   In step S1315, shared image transmission section 517 of conference terminal 110a stops updating the shared image and reads the shared image stored in storage section 520 in step S1305.

ステップS1316において、会議端末110aの共有画像送信部517は、記憶部520から読出した共有画像を、画像配信サーバ140に送信する。   In step S1316, shared image transmitting section 517 of conference terminal 110a transmits the shared image read from storage section 520 to image distribution server 140.

ステップS1317、S1318において、画像配信サーバ140の共有画像配信部543は、会議端末110aから受信した共有画像を、会議端末110aと同じ会議に参加している会議端末110b、110cに配信する。   In steps S1317 and S1318, shared image distribution unit 543 of image distribution server 140 distributes the shared image received from conference terminal 110a to conference terminals 110b and 110c participating in the same conference as conference terminal 110a.

ステップS1319、1320において、会議端末110b、110cの表示制御部513は、画像配信サーバ140から配信された配信画像を用いて、例えば、図2に示すような表示画面200の共有画像230を表示する。   In steps S1319 and 1320, the display control unit 513 of the conference terminals 110b and 110c displays, for example, the shared image 230 of the display screen 200 as illustrated in FIG. 2 using the distribution image distributed from the image distribution server 140. .

上記の処理により、第3の実施形態に係る会議システム100では、会議を開始した後に会議に新たな参加端末が参加したとき、利用者が意図していない表示画面によって、共有画像が更新されてしまうことを効果的に低減させることができる。   According to the above processing, in the conference system 100 according to the third embodiment, when a new participating terminal participates in the conference after starting the conference, the shared image is updated by the display screen not intended by the user. Can be effectively reduced.

また、第3の実施形態に係る会議システム100では、会議端末110a、110bが共有していた共有画像を更新することなく、後から会議に参加した会議端末110cと共有することができるようになる。   Further, in the conference system 100 according to the third embodiment, the shared image shared by the conference terminals 110a and 110b can be shared with the conference terminal 110c that has participated in the conference later without updating the shared image. .

以上、本発明の各実施形態によれば、複数の会議端末110の間で静止画像を共有する会議システム100において、利用者が意図していない表示画面によって、共有画像が更新されてしまうことを低減させることができる。   As described above, according to each embodiment of the present invention, in the conference system 100 that shares a still image among a plurality of conference terminals 110, the shared image is updated by a display screen not intended by the user. Can be reduced.

なお、上記の説明では、会議端末110の数が3台の場合の例について説明したが、会議端末110の数が4台以上の場合であっても、同様にして、利用者が意図していない表示画面によって、共有画像が更新されてしまうことを低減させることができる。   In the above description, an example in which the number of conference terminals 110 is three has been described. However, even in the case where the number of conference terminals 110 is four or more, the user similarly intends. It is possible to reduce the possibility that the shared image is updated by the display screen that does not exist.

また、上記の説明では、呼制御サーバ130と画像配信サーバ140とが別の情報処理装置である場合の例について説明したが、呼制御サーバ130、及び画像配信サーバ140が有する各機能構成は、1つ管理サーバ150が有していても良い。   Further, in the above description, an example in which the call control server 130 and the image distribution server 140 are different information processing apparatuses has been described. However, each functional configuration of the call control server 130 and the image distribution server 140 is as follows. One management server 150 may have it.

さらに、画像配信サーバ140は、例えば、会議映像を配信する会議映像配信サーバと、共有画像を配信する共有画像配信サーバとに分けて設けられていても良い。   Further, the image distribution server 140 may be provided separately, for example, as a conference video distribution server that distributes a conference video and a shared image distribution server that distributes a shared image.

さらにまた、会議システム100は、呼制御サーバ130、画像配信サーバ140、管理サーバ150等を有さずに、複数の会議端末110の間で直接に呼制御、会議画像の送受信、及び共有画像の共有等を行うものであっても良い。   Furthermore, the conference system 100 does not have the call control server 130, the image distribution server 140, the management server 150, and the like, and directly performs call control, transmission and reception of conference images, and transmission of shared images among the plurality of conference terminals 110. What performs sharing etc. may be used.

100 会議システム
110 会議端末(端末装置)
150 管理サーバ
513 表示制御部
516 端末情報管理部(管理部)
517 共有画像送信部(送信部)
518 更新判断部(判断部)
519 更新要求部
520 記憶部
532 通信制御部
533 会議管理部(管理部の別の一例)
543 共有画像配信部(送信部の別の一例)
601 端末情報(会議に参加している他の端末装置の情報)
602 会議情報(会議に参加している端末装置の情報)
100 conference system 110 conference terminal (terminal device)
150 management server 513 display control unit 516 terminal information management unit (management unit)
517 Shared image transmission unit (transmission unit)
518 Update judgment unit (judgment unit)
519 Update request section 520 Storage section 532 Communication control section 533 Conference management section (another example of the management section)
543 Shared image distribution unit (another example of transmission unit)
601 Terminal information (information of other terminal devices participating in the conference)
602 Conference information (information of terminal devices participating in the conference)

特開2016−110486号公報JP 2016-110486 A

Claims (10)

複数の端末装置を備え、前記複数の端末装置の間で会議を行う会議システムであって、
前記複数の端末装置に含まれる一つの端末装置は、
前記会議に参加している他の端末装置の情報を管理する管理部と、
経時的に変化し得る表示画像から静止画像を取得し、取得した静止画像を共有画像として前記会議に参加している他の端末装置に送信する送信部と、
前記共有画像の更新を要求する更新要求を受け付けたとき、前記会議に参加している他の端末装置の情報を用いて、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求であるか否かを判断する判断部と、
を有し、
前記送信部は、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求でない場合、更新した前記共有画像を前記会議に参加している他の端末装置に送信し、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求である場合、前記共有画像の更新を中止する、会議システム。
A conference system comprising a plurality of terminal devices, a conference between the plurality of terminal devices,
One terminal device included in the plurality of terminal devices,
A management unit that manages information of other terminal devices participating in the conference,
A transmission unit that obtains a still image from a display image that can change over time, and transmits the obtained still image to another terminal device participating in the conference as a shared image,
When an update request requesting an update of the shared image is received, using the information of the other terminal devices participating in the conference, the update request is newly added to the conference after the conference is started. A determination unit that determines whether the request is an update request due to participation of
Has,
The transmitting unit includes:
If the update request is not an update request by a new terminal device participating in the conference after starting the conference, transmit the updated shared image to other terminal devices participating in the conference,
When the update request is an update request due to a new terminal device participating in the conference after starting the conference, the update of the shared image is stopped.
前記端末装置とネットワークを介して通信可能に接続され、前記管理を管理する管理サーバを有し、
前記管理サーバは、
前記端末装置の間の通信を制御する通信制御部と、
前記会議に参加している前記端末装置のうち、一の端末装置が送信した前記共有画像を他の端末装置に配信する共有画像配信部と、
を有する、請求項1に記載の会議システム。
The terminal device is communicably connected via a network, and has a management server that manages the management,
The management server,
A communication control unit that controls communication between the terminal devices;
Among the terminal devices participating in the conference, a shared image distribution unit that distributes the shared image transmitted by one terminal device to another terminal device,
The conferencing system according to claim 1, comprising:
前記管理部は、前記通信制御部から通知される制御情報に基づいて、前記会議に参加している他の端末装置の情報を管理する、請求項2に記載の会議システム。   The conference system according to claim 2, wherein the management unit manages information on other terminal devices participating in the conference based on control information notified from the communication control unit. 前記送信部は、前記共有画像配信部を介して、前記会議に参加している他の端末装置に前記共有画像を送信する、請求項2又は3に記載の会議システム。   The conference system according to claim 2, wherein the transmission unit transmits the shared image to another terminal device participating in the conference via the shared image distribution unit. 前記端末装置は、
前記共有画像配信部から配信される前記共有画像を表示部に表示する表示制御部と、
前記共有画像配信部から配信される前記共有画像を前記表示部に表示できない場合、前記管理サーバに前記共有画像の更新を要求する更新要求部と、
を有する、請求項2乃至4のいずれか一項に記載の会議システム。
The terminal device,
A display control unit that displays the shared image distributed from the shared image distribution unit on a display unit,
When the shared image distributed from the shared image distribution unit cannot be displayed on the display unit, an update request unit that requests the management server to update the shared image,
The conference system according to any one of claims 2 to 4, comprising:
前記端末装置は、前記会議に参加している他の端末装置に送信した前記共有画像を記憶する記憶部を有し、
前記送信部は、前記更新要求が前記会議に新たな端末装置が参加したことによる更新要求である場合、前記記憶部に記憶した前記共有画像を前記会議に参加している他の端末装置に送信する、請求項1乃至5のいずれか一項に記載の会議システム。
The terminal device has a storage unit that stores the shared image transmitted to another terminal device participating in the conference,
The transmitting unit transmits the shared image stored in the storage unit to another terminal device participating in the conference, when the update request is an update request due to a new terminal device participating in the conference. The conference system according to any one of claims 1 to 5, wherein
複数の端末装置の間で会議を行う会議システムであって、
前記会議に参加している前記端末装置の情報を管理する管理部と、
前記会議に参加している複数の端末装置のうち、一の端末装置が経時的に変化し得る表示画像から取得した静止画像である共有画像を、前記会議に参加している他の端末装置に送信する送信部と、
前記共有画像の更新を要求する更新要求を受け付けたとき、前記会議に参加している前記端末装置の情報を用いて、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求であるか否かを判断する判断部と、
を有し、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求でない場合、更新した前記共有画像を前記会議に参加している他の端末装置に送信し、
前記更新要求が前記会議に新たな端末装置が参加したことによる更新要求である場合、前記共有画像の更新を中止する、会議システム。
A conference system for performing a conference between a plurality of terminal devices,
A management unit that manages information on the terminal devices participating in the conference,
Among the plurality of terminal devices participating in the conference, a shared image, which is a still image obtained from a display image in which one terminal device can change over time, is transmitted to another terminal device participating in the conference. A transmitting unit for transmitting,
When receiving an update request requesting an update of the shared image, using the information of the terminal devices participating in the conference, the update request is a new terminal device in the conference after starting the conference. A determination unit for determining whether the request is an update request due to participation;
Has,
If the update request is not an update request by a new terminal device participating in the conference after starting the conference, transmit the updated shared image to other terminal devices participating in the conference,
When the update request is an update request due to a new terminal device participating in the conference, updating of the shared image is stopped.
1つ以上の他の端末装置と会議を行う端末装置であって、
前記会議に参加している他の端末装置の情報を管理する管理部と、
経時的に変化し得る表示画像から静止画像を取得し、取得した静止画像を共有画像として前記会議に参加している他の端末装置に送信する送信部と、
前記共有画像の更新を要求する更新要求を受け付けたとき、前記会議に参加している他の端末装置の情報を用いて、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求であるか否かを判断する判断部と、
を有し、
前記送信部は、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求でない場合、更新した前記共有画像を前記会議に参加している他の端末装置に送信し、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求である場合、前記共有画像の更新を中止する、端末装置。
A terminal device for conducting a conference with one or more other terminal devices,
A management unit that manages information of other terminal devices participating in the conference,
A transmission unit that obtains a still image from a display image that can change over time, and transmits the obtained still image to another terminal device participating in the conference as a shared image,
When an update request requesting an update of the shared image is received, using the information of the other terminal devices participating in the conference, the update request is newly added to the conference after the conference is started. A determination unit that determines whether the request is an update request due to participation of
Has,
The transmitting unit includes:
If the update request is not an update request by a new terminal device participating in the conference after starting the conference, transmit the updated shared image to other terminal devices participating in the conference,
If the update request is an update request due to a new terminal device participating in the conference after starting the conference, updating of the shared image is stopped.
複数の端末装置の間で会議を行う会議システムの制御方法であって、
コンピュータが、
前記会議に参加している前記端末装置の情報を管理するステップと、
前記会議に参加している複数の端末装置のうち、一の端末装置が経時的に変化し得る表示画像から取得した静止画像である共有画像を、前記会議に参加している他の端末装置に送信するステップと、
前記共有画像の更新を要求する更新要求を受け付けたとき、前記会議に参加している前記端末装置の情報を用いて、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求であるか否かを判断するステップと、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求でない場合、更新した前記共有画像を前記会議に参加している他の端末装置に送信するステップと、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求である場合、前記共有画像の更新を中止すステップと、
を実行する、会議システムの制御方法。
A method of controlling a conference system for performing a conference between a plurality of terminal devices,
Computer
Managing the information of the terminal device participating in the conference,
Among the plurality of terminal devices participating in the conference, a shared image, which is a still image obtained from a display image in which one terminal device can change over time, is transmitted to another terminal device participating in the conference. Sending,
When receiving an update request requesting an update of the shared image, using the information of the terminal devices participating in the conference, the update request is a new terminal device in the conference after starting the conference. Determining whether the request is an update request due to participation;
Transmitting the updated shared image to another terminal device participating in the conference, if the update request is not an update request due to a new terminal device participating in the conference after starting the conference; and ,
If the update request is an update request due to the participation of a new terminal device in the conference after starting the conference, stopping the update of the shared image,
How to control the conferencing system.
複数の端末装置の間で会議を行う会議システムにおける前記端末装置の制御方法であって、
前記端末装置が、
前記会議に参加している他の端末装置の情報を管理するステップと、
経時的に変化し得る表示画像から静止画像を取得し、取得した静止画像を共有画像として前記会議に参加している他の端末装置に送信するステップと、
前記共有画像の更新を要求する更新要求を受け付けたとき、前記会議に参加している他の端末装置の情報を用いて、前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求であるか否かを判断するステップと、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求でない場合、更新した前記共有画像を前記会議に参加している他の端末装置に送信するステップと、
前記更新要求が、前記会議を開始した後に前記会議に新たな端末装置が参加したことによる更新要求である場合、前記共有画像の更新を中止するステップと、
を実行する、端末装置の制御方法。
A method of controlling the terminal device in a conference system for performing a conference between a plurality of terminal devices,
The terminal device,
Managing information of the other terminal devices participating in the conference,
Obtaining a still image from a display image that can change over time, transmitting the obtained still image as a shared image to other terminal devices participating in the conference,
When an update request requesting an update of the shared image is received, using the information of the other terminal devices participating in the conference, the update request is newly added to the conference after the conference is started. Determining whether the request is an update request due to participation by the user;
Transmitting the updated shared image to another terminal device participating in the conference, if the update request is not an update request due to a new terminal device participating in the conference after starting the conference; and ,
If the update request is an update request due to the participation of a new terminal device in the conference after starting the conference, stopping the update of the shared image,
A method for controlling a terminal device.
JP2018125166A 2018-06-29 2018-06-29 Conference system, terminal device, conference system control method, terminal device control method Active JP7024628B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018125166A JP7024628B2 (en) 2018-06-29 2018-06-29 Conference system, terminal device, conference system control method, terminal device control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018125166A JP7024628B2 (en) 2018-06-29 2018-06-29 Conference system, terminal device, conference system control method, terminal device control method

Publications (2)

Publication Number Publication Date
JP2020004253A true JP2020004253A (en) 2020-01-09
JP7024628B2 JP7024628B2 (en) 2022-02-24

Family

ID=69100084

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018125166A Active JP7024628B2 (en) 2018-06-29 2018-06-29 Conference system, terminal device, conference system control method, terminal device control method

Country Status (1)

Country Link
JP (1) JP7024628B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07321932A (en) * 1994-05-26 1995-12-08 Canon Inc Conference terminal equipment
JP2012054640A (en) * 2010-08-31 2012-03-15 Brother Ind Ltd Conference terminal device, communication method, and communication program
US20130086165A1 (en) * 2011-10-04 2013-04-04 Roland Findlay Meeting system that interconnects group and personal devices across a network
JP2016126432A (en) * 2014-12-26 2016-07-11 ブラザー工業株式会社 Remote conference program, terminal device, and remote conference method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07321932A (en) * 1994-05-26 1995-12-08 Canon Inc Conference terminal equipment
JP2012054640A (en) * 2010-08-31 2012-03-15 Brother Ind Ltd Conference terminal device, communication method, and communication program
US20130086165A1 (en) * 2011-10-04 2013-04-04 Roland Findlay Meeting system that interconnects group and personal devices across a network
JP2016126432A (en) * 2014-12-26 2016-07-11 ブラザー工業株式会社 Remote conference program, terminal device, and remote conference method

Also Published As

Publication number Publication date
JP7024628B2 (en) 2022-02-24

Similar Documents

Publication Publication Date Title
US20160134635A1 (en) Systems, communication endpoints, and related methods for distributing images corresponding to communication endpoints
JP6451227B2 (en) Information processing apparatus, information processing system, program, and recording medium
JP6182911B2 (en) Transmission terminal, transmission system, program
CN112312226B (en) Wheat connecting method, system, device, electronic equipment and storage medium
US10341519B2 (en) Communication system, image forming apparatus, method of controlling the same, and storage medium
JP6634686B2 (en) Information processing apparatus, program, communication platform determination method, transmission system
CN109586929B (en) Conference content transmission method and device, electronic equipment and storage medium
JP6484934B2 (en) COMMUNICATION DEVICE, COMMUNICATION SYSTEM, COMMUNICATION MANAGEMENT SYSTEM, COMMUNICATION CONTROL METHOD, AND PROGRAM
JP2017147555A (en) Information terminal, program, communication control method, and communication system
JP7135766B2 (en) Communication system, program, terminal device
JP2015126524A (en) Remote conference program, terminal device, and remote conference method
CN113242173A (en) Screen sharing method, device and system and instant messaging server
JP2017167661A (en) System, portable terminal, information processing apparatus, information processing method, and program
US9479656B2 (en) System and method for taking and sharing photographs in a photo kiosk
JP2018170769A5 (en) Transmission system, first transmission terminal, transmission method, display method, and program
JP2017028347A (en) Information processing device, communication system, program
EP3068111A1 (en) Status information management apparatus, status information processing method, transmission system, and recording medium
JP7024628B2 (en) Conference system, terminal device, conference system control method, terminal device control method
JP2017028660A (en) Information processing device, image display method, communication system and program
JP6524732B2 (en) Communication device, communication system, control method of communication device and program
JP2015002526A (en) Conference system and communication terminal device
CN114489889A (en) Method and device for processing sharing request of terminal equipment and terminal equipment
JP2018036688A (en) Information processing device, server device, information processing system, control method thereof, and program
JP5234850B2 (en) Projector system, projector, and data receiving method
JP2008252177A (en) Electronic conference system, information processor, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210208

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211224

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220111

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220124

R151 Written notification of patent or utility model registration

Ref document number: 7024628

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151