JP6254067B2 - Inter-terminal communication system, server, and inter-terminal communication method - Google Patents

Inter-terminal communication system, server, and inter-terminal communication method Download PDF

Info

Publication number
JP6254067B2
JP6254067B2 JP2014217420A JP2014217420A JP6254067B2 JP 6254067 B2 JP6254067 B2 JP 6254067B2 JP 2014217420 A JP2014217420 A JP 2014217420A JP 2014217420 A JP2014217420 A JP 2014217420A JP 6254067 B2 JP6254067 B2 JP 6254067B2
Authority
JP
Japan
Prior art keywords
terminal device
application
terminal
information
session
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014217420A
Other languages
Japanese (ja)
Other versions
JP2016086274A (en
Inventor
淳悟 知識
淳悟 知識
野村 和史
和史 野村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2014217420A priority Critical patent/JP6254067B2/en
Publication of JP2016086274A publication Critical patent/JP2016086274A/en
Application granted granted Critical
Publication of JP6254067B2 publication Critical patent/JP6254067B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

本発明の実施形態は、端末間通信システム、サーバ、及び端末間通信方法に関する。   Embodiments described herein relate generally to an inter-terminal communication system, a server, and an inter-terminal communication method.

従来、音声データ及び画像データを携帯用端末装置間において相互に送受信することにより、これらの携帯用端末装置を利用する通話者の間で同じ画像をリアルタイムに相互に加工することが可能なデータ通信システムが知られている(例えば、特許文献1を参照)。   Conventionally, data communication by which voice data and image data can be mutually processed in real time between callers using these portable terminal devices by transmitting and receiving voice data and image data to and from each other. A system is known (see, for example, Patent Document 1).

特開2000−261574号公報JP 2000-261574 A

上述したようなデータ通信システムにおいては、携帯用端末装置間で個人情報がやりとりされる場合がある。このため、このようなデータ通信システムにおいては、セキュアな通信環境が求められる。しかしながら、上述したようなデータ通信システムにおいては、セキュアな通信環境が提供されていなかった。そして特に、3台以上の端末装置間におけるセキュアな通信環境は提供されていなかった。   In the data communication system as described above, personal information may be exchanged between portable terminal devices. For this reason, in such a data communication system, a secure communication environment is required. However, in the data communication system as described above, a secure communication environment has not been provided. In particular, a secure communication environment between three or more terminal devices has not been provided.

本発明は、セキュアな通信環境により、端末装置間において音声データ及び画像データをリアルタイムに送受信することができる端末間通信システム、サーバ、及び端末間通信方法を提供することを目的とする。   An object of the present invention is to provide an inter-terminal communication system, a server, and an inter-terminal communication method capable of transmitting and receiving audio data and image data between terminal devices in real time in a secure communication environment.

本発明の一実施形態は、端末装置を識別する端末識別情報と、前記端末装置において動作するアプリケーションを識別するアプリケーション識別情報とを含む端末情報を前記端末装置から受信する端末情報受信部と、複数の前記端末装置のうち第1端末装置において動作する第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置とは異なる第2端末装置において動作する第2アプリケーションとの間のセションを構築するセション構築部と、前記第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置及び第2端末装置とは異なる第3端末装置において動作する第3アプリケーションとの適合性を、前記端末識別情報又は前記アプリケーション識別情報に基づいて判定する適合性判定部と、前記第1アプリケーションが送信する情報共有の要求に応じて、前記適合性判定部による判定結果を前記第1アプリケーションに送信する判定結果送信部と、を備え、前記セションは、セションに対応するキー情報に基づいて構築され、前記セション構築部は、前記第1アプリケーションが送信する前記第3アプリケーションとの通信開始の要求に応じて、前記第1アプリケーションと前記第3アプリケーションとの間のセションを、前記第1端末装置の前記端末情報と前記第3端末装置の前記端末情報とに基づいて構築し、前記第1端末装置と前記第2端末装置とが直接通信するピア・トゥー・ピアモードのセションが構築されている場合に、前記第3端末装置からの前記第1端末装置への音声通信の要求に応じて、複数の前記端末装置の間で情報共有を可能とする通信である情報共有通信を中継する中継サーバに前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応するキー情報を作成させ、前記中継サーバから前記第1端末装置及び前記第2端末装置に送信された当該キー情報に基づいて、前記ピア・トゥー・ピアモードのセションから切り替えて、前記中継サーバを介した中継モードのセションを前記第1アプリケーションと前記第2アプリケーションとの間に構築するとともに、前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応する前記キー情報に基づいて、前記第1アプリケーションと前記第3アプリケーションとの間の前記中継モードのセションを構築する端末間通信システムである。 One embodiment of the present invention includes a terminal information receiving unit that receives terminal information including terminal identification information for identifying a terminal device and application identification information for identifying an application operating on the terminal device, from the terminal device; A session is established between a first application that operates on the first terminal device among the terminal devices and a second application that operates on a second terminal device different from the first terminal device among the plurality of terminal devices. Compatibility of the session construction unit, the first application, and a third application that operates in a third terminal device different from the first terminal device and the second terminal device among the plurality of terminal devices, A compatibility determination unit for determining based on the identification information or the application identification information, and the first application A determination result transmission unit that transmits a determination result by the suitability determination unit to the first application in response to an information sharing request transmitted by the session, wherein the session is based on key information corresponding to the session. The session constructing unit is configured to perform a session between the first application and the third application in response to a request to start communication with the third application transmitted by the first application. Based on the terminal information of the device and the terminal information of the third terminal device, a peer-to-peer mode session is established in which the first terminal device and the second terminal device communicate directly. when the third in response to a request of a voice communication to the first terminal apparatus from the terminal apparatus, portable information shared among the plurality of terminal devices A communication to share information session on to create the key information corresponding between communication with the first application to the relay server for relaying to the second application, the first terminal from the relay server apparatus and the second based on the key information transmitted to the terminal device constructed to switch from session of the peer-to-peer mode, the session of the relay mode via the relay server between the second application and the first application And between terminals that establish the session in the relay mode between the first application and the third application based on the key information corresponding to the session between the first application and the second application. It is a communication system.

また、本発明の一実施形態の端末間通信システムにおいて、前記セション構築部は、前記第1アプリケーションが送信する前記第3アプリケーションとの前記通信開始の要求に応じて、前記第2アプリケーションと前記第3アプリケーションとの間のセションを、前記第2端末装置の端末情報と前記第3端末装置の端末情報に基づいて構築することを特徴とする。   Further, in the inter-terminal communication system according to the embodiment of the present invention, the session constructing unit responds to the communication start request with the third application transmitted by the first application, and the second application and the first application. A session with three applications is constructed based on the terminal information of the second terminal device and the terminal information of the third terminal device.

また、本発明の一実施形態の端末間通信システムにおいて、前記セション構築部は、前記第1アプリケーションから送信される前記第2端末装置を識別する第2端末識別情報に基づいて、前記第2アプリケーションと前記第3アプリケーションとの間のセションを構築することを特徴とする。   Further, in the inter-terminal communication system according to an embodiment of the present invention, the session construction unit includes the second application based on second terminal identification information identifying the second terminal device transmitted from the first application. And a session between the third application and the third application.

また、本発明の一実施形態の端末間通信システムにおいて、前記第1アプリケーションが前記第2アプリケーション又は前記第3アプリケーションのいずれか一方から受信した情報を、他方のアプリケーションに送信するか否かを判定する送信判定部、をさらに備えることを特徴とする。   In the inter-terminal communication system according to an embodiment of the present invention, the first application determines whether to transmit information received from either the second application or the third application to the other application. A transmission determination unit that performs the transmission determination.

また、本発明の一実施形態は、端末装置を識別する端末識別情報と、前記端末装置において動作するアプリケーションを識別するアプリケーション識別情報とを含む端末情報を前記端末装置から受信する端末情報受信部と、複数の前記端末装置のうち第1端末装置において動作する第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置とは異なる第2端末装置において動作する第2アプリケーションとの間のセションを構築するセション構築部と、前記第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置及び第2端末装置とは異なる第3端末装置において動作する第3アプリケーションとの適合性を、前記端末識別情報又は前記アプリケーション識別情報に基づいて判定する適合性判定部と、前記第1アプリケーションが送信する情報共有の要求に応じて、前記適合性判定部による判定結果を前記第1アプリケーションに送信する判定結果送信部と、を備え、前記セションは、セションに対応するキー情報に基づいて構築され、前記セション構築部は、前記第1アプリケーションが送信する前記第3アプリケーションとの通信開始の要求に応じて、前記第1アプリケーションと前記第3アプリケーションとの間のセションを、前記第1端末装置の前記端末情報と前記第3端末装置の前記端末情報とに基づいて構築し、前記第1端末装置と前記第2端末装置とが直接通信するピア・トゥー・ピアモードのセションが構築されている場合に、前記第3端末装置からの前記第1端末装置への音声通信の要求に応じて、複数の前記端末装置の間で情報共有を可能とする通信である情報共有通信を中継する中継サーバに前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応するキー情報を作成させ、前記中継サーバから前記第1端末装置及び前記第2端末装置に送信された当該キー情報に基づいて、前記ピア・トゥー・ピアモードのセションから切り替えて、前記中継サーバを介した中継モードのセションを前記第1アプリケーションと前記第2アプリケーションとの間に構築するとともに、前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応する前記キー情報に基づいて、前記第1アプリケーションと前記第3アプリケーションとの間の前記中継モードのセションを構築するサーバである。 In addition, according to an embodiment of the present invention, a terminal information receiving unit that receives terminal information including terminal identification information for identifying a terminal device and application identification information for identifying an application operating in the terminal device from the terminal device; A session between a first application that operates on a first terminal device among the plurality of terminal devices and a second application that operates on a second terminal device different from the first terminal device among the plurality of terminal devices. The compatibility between the session construction unit that constructs the first application, and a third application that operates in a third terminal device different from the first terminal device and the second terminal device among the plurality of terminal devices, A suitability determination unit for determining based on the terminal identification information or the application identification information; A determination result transmission unit that transmits a determination result by the suitability determination unit to the first application in response to an information sharing request transmitted by the application, wherein the session is based on key information corresponding to the session. The session constructing unit is configured to perform a session between the first application and the third application in response to a request to start communication with the third application transmitted by the first application. Based on the terminal information of the device and the terminal information of the third terminal device, a peer-to-peer mode session is established in which the first terminal device and the second terminal device communicate directly. when the third in response to a request of a voice communication to the first terminal apparatus from the terminal apparatus, information both between the plurality of terminal devices A communication that allows information sharing session on to create the key information corresponding between communication with the first application to the relay server for relaying to the second application, the first terminal device and said from said relay server based on the key information transmitted to the second terminal device, between the peer-to-peer mode is switched from the session of the session relay mode via the relay server said first application and said second application And constructing the relay mode session between the first application and the third application based on the key information corresponding to the session between the first application and the second application. It is a server.

また、本発明の一実施形態は、端末装置とサーバとを含む端末間通信システムにおける端末間通信方法であって、前記サーバが、前記端末装置を識別する端末識別情報と、前記端末装置において動作するアプリケーションを識別するアプリケーション識別情報とを含む端末情報を前記端末装置から受信する第1ステップと、前記サーバが、複数の前記端末装置のうち第1端末装置において動作する第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置とは異なる第2端末装置において動作する第2アプリケーションとの間のセションを構築する第2ステップと、前記サーバが、前記第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置及び第2端末装置とは異なる第3端末装置において動作する第3アプリケーションとの適合性を、前記端末識別情報又は前記アプリケーション識別情報に基づいて判定する第3ステップと、前記サーバが、前記第1アプリケーションが送信する情報共有の要求に応じて、前記第3ステップにおける判定結果を前記第1アプリケーションに送信する第4ステップと、前記サーバが、前記第1アプリケーションが送信する前記第3アプリケーションとの通信開始の要求に応じて、前記第1アプリケーションと前記第3アプリケーションとの間のセションを、前記第1端末装置の前記端末情報と前記第3端末装置の前記端末情報とに基づいて構築する第5ステップと、を含み、前記第1端末装置と前記第2端末装置とが直接通信するピア・トゥー・ピアモードのセションが構築されている場合に、前記第3端末装置からの前記第1端末装置への音声通信の要求に応じて、複数の前記端末装置の間で情報共有を可能とする通信である情報共有通信を中継する中継サーバに前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応するキー情報を作成させ、前記中継サーバから前記第1端末装置及び前記第2端末装置に送信された当該キー情報に基づいて、前記ピア・トゥー・ピアモードのセションから切り替えて、前記中継サーバを介した中継モードのセションを前記第1アプリケーションと前記第2アプリケーションとの間に構築するとともに、前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応する前記キー情報に基づいて、前記第1アプリケーションと前記第3アプリケーションとの間の前記中継モードのセションを構築する端末間通信方法である。 One embodiment of the present invention is an inter-terminal communication method in an inter-terminal communication system including a terminal device and a server, wherein the server operates in the terminal identification information for identifying the terminal device and the terminal device. A first step of receiving terminal information including application identification information for identifying an application to be performed from the terminal device, a first application that operates on the first terminal device among the plurality of terminal devices, and a plurality of A second step of establishing a session with a second application that operates on a second terminal device different from the first terminal device among the terminal devices; and the server includes the first application and a plurality of the terminals. 3rd application which operate | moves in 3rd terminal device different from the said 1st terminal device and 2nd terminal device among apparatuses A third step of determining compatibility with the application based on the terminal identification information or the application identification information, and the server in response to a request for information sharing transmitted by the first application in the third step A fourth step of transmitting a determination result to the first application, and the server responding to a request for starting communication with the third application transmitted by the first application, the first application and the third application; And a fifth step of constructing a session between the first terminal device and the third terminal device based on the terminal information of the first terminal device and the terminal information of the third terminal device. When a session in peer-to-peer mode is established, in which the third terminal device directly communicates with In response to a request of a voice communication to the first terminal apparatus, a plurality of the terminal device said first application and said second application to the relay server for relaying information sharing communication is a communication that allows information shared between Switch from the peer-to-peer mode session based on the key information transmitted from the relay server to the first terminal device and the second terminal device. Te, along with building a session relay mode via the relay server between the second application and the first application, said key information corresponding to the session between the first application and the second application Based on the relay mode between the first application and the third application. This is an inter-terminal communication method for constructing a session.

本発明によれば、セキュアな通信環境により、端末装置間において音声データ及び画像データをリアルタイムに送受信することができる端末間通信システム、サーバ、及び端末間通信方法を提供できる。   According to the present invention, it is possible to provide an inter-terminal communication system, a server, and an inter-terminal communication method capable of transmitting and receiving audio data and image data between terminal devices in real time in a secure communication environment.

本実施形態の端末装置の構成の一例を示す模式図である。It is a schematic diagram which shows an example of a structure of the terminal device of this embodiment. 本実施形態の端末間通信システムが提供する情報共有機能の概要の一例を示す模式図である。It is a schematic diagram which shows an example of the outline | summary of the information sharing function which the communication system between terminals of this embodiment provides. 本実施形態の端末間通信システムが提供する情報共有機能の選択操作の第1例を示す模式図である。It is a schematic diagram which shows the 1st example of selection operation of the information sharing function which the communication system between terminals of this embodiment provides. 本実施形態の端末間通信システムの構成の一例を示す概要図である。It is a schematic diagram which shows an example of a structure of the communication system between terminals of this embodiment. 本実施形態のシグナリングサーバが記憶するレジストレーション情報の一例を示す表である。It is a table | surface which shows an example of the registration information which the signaling server of this embodiment memorize | stores. 本実施形態のレジストレーションの動作手順の一例を示す流れ図である。It is a flowchart which shows an example of the operation | movement procedure of the registration of this embodiment. 本実施形態のP2Pモードにおけるセション構築の動作手順の一例を示す流れ図である。It is a flowchart which shows an example of the operation | movement procedure of the session construction in P2P mode of this embodiment. 本実施形態の中継モードにおけるセション構築の動作手順の一例を示す第1の流れ図である。It is a 1st flowchart which shows an example of the operation | movement procedure of the session construction in the relay mode of this embodiment. 本実施形態の中継モードにおけるセション構築の動作手順の一例を示す第2の流れ図である。It is a 2nd flowchart which shows an example of the operation | movement procedure of the session construction in the relay mode of this embodiment. 本実施形態の端末間通信システムによる三者間情報共有機能の提供の概要を示す第1の模式図の第1図である。It is FIG. 1 of the 1st schematic diagram which shows the outline | summary of provision of the three-way information sharing function by the communication system between terminals of this embodiment. 本実施形態の端末間通信システムによる三者間情報共有機能の提供の概要を示す第1の模式図の第2図である。It is FIG. 2 of the 1st schematic diagram which shows the outline | summary of provision of the tripartite information sharing function by the communication system between terminals of this embodiment. 本実施形態の端末間通信システムによる三者間情報共有機能の提供の概要を示す第2の模式図である。It is a 2nd schematic diagram which shows the outline | summary of provision of the three-way information sharing function by the communication system between terminals of this embodiment. 本実施形態の端末間通信システムによる三者間情報共有機能の提供の概要を示す第3の模式図である。It is a 3rd schematic diagram which shows the outline | summary of provision of the tripartite information sharing function by the communication system between terminals of this embodiment.

[実施形態]
以下、図を参照して本実施形態による端末間通信システム1の実施形態について説明する。
本実施形態の端末間通信システム1は、複数の端末装置10の間における情報共有機能を提供する。ここでいう端末装置10とは、音声や文字により装置間で相互に通信が可能な通信装置であり、例えば、携帯電話やスマートフォンである。この端末装置10は、音声情報と、画像情報とを同一の回線で送受信可能な、高速データ通信回線に接続が可能である。この高速データ通信回線とは、例えば、LTE(Long Term Evolution)通信網である。この高速データ通信回線は、画像や文字などのデジタル情報の送受信に加えて、音声通話を可能にするサービス(VoLTE;Voice over LTE)を提供する。
[Embodiment]
Hereinafter, an embodiment of the inter-terminal communication system 1 according to the present embodiment will be described with reference to the drawings.
The inter-terminal communication system 1 of the present embodiment provides an information sharing function among a plurality of terminal devices 10. The terminal device 10 here is a communication device that can communicate with each other by voice or text, and is, for example, a mobile phone or a smartphone. The terminal device 10 can be connected to a high-speed data communication line capable of transmitting and receiving voice information and image information through the same line. The high-speed data communication line is, for example, an LTE (Long Term Evolution) communication network. This high-speed data communication line provides a service (VoLTE; Voice over LTE) that enables voice calls in addition to transmission and reception of digital information such as images and characters.

この情報共有機能とは、複数の端末装置10の間において、画像情報又は音声情報を共有する機能である。より具体的には、ある端末装置10は、他の端末装置10に対して、画像情報又は音声情報を送信する。これにより、端末間通信システム1は、送信側の端末装置10に表示されている画像、又は再生されている音声を、受信側の端末装置10に表示又は再生させる。また、端末間通信システム1は、ある端末装置10から他の端末装置10に対する一方向の情報共有機能のみならず、端末装置10間の双方向の情報共有機能を提供する。   The information sharing function is a function for sharing image information or audio information among a plurality of terminal devices 10. More specifically, a certain terminal device 10 transmits image information or audio information to another terminal device 10. Accordingly, the inter-terminal communication system 1 displays or reproduces the image displayed on the transmission-side terminal device 10 or the sound being reproduced on the reception-side terminal device 10. The inter-terminal communication system 1 provides not only a one-way information sharing function from one terminal apparatus 10 to another terminal apparatus 10 but also a two-way information sharing function between the terminal apparatuses 10.

端末間通信システム1において3台以上の端末装置10により情報共有が行われる場合、情報の共有方法には第1の共有方法と第2の共有方法とがある。
第1の共有方法では、情報発信側の端末装置10が、情報受信側の端末装置10に同一の画像情報又は音声情報を送信する。そして、情報受信側の端末装置10は、それぞれ、受信した画像情報又は音声情報に基づいて、画像の表示又は音声の再生を行う。つまり、第1の共有方法では、端末間通信システム1に含まれる全ての端末装置10が同一の情報を再生することができる。
第2の共有方法では、情報発信側の端末装置10が、情報受信側の端末装置10毎に互いに異なる画像情報又は音声情報を送信する。そして、情報受信側の端末装置10は、それぞれ、受信した画像情報又は音声情報に基づいて、画像の表示又は音声の再生を行う。つまり、第2の共有方法では、端末間通信システム1に含まれる複数の端末装置10において再生される情報が異なる場合がある。ただし、情報送信側の端末装置10と情報受信側の端末装置10との少なくとも2台の端末装置10からなるペアは、同一の情報を再生する。
When information sharing is performed by three or more terminal devices 10 in the inter-terminal communication system 1, there are a first sharing method and a second sharing method as information sharing methods.
In the first sharing method, the terminal device 10 on the information transmission side transmits the same image information or audio information to the terminal device 10 on the information reception side. Then, the terminal device 10 on the information receiving side performs image display or audio reproduction based on the received image information or audio information, respectively. That is, in the first sharing method, all the terminal devices 10 included in the inter-terminal communication system 1 can reproduce the same information.
In the second sharing method, the terminal device 10 on the information transmission side transmits different image information or audio information for each terminal device 10 on the information reception side. Then, the terminal device 10 on the information receiving side performs image display or audio reproduction based on the received image information or audio information, respectively. That is, in the second sharing method, information reproduced in the plurality of terminal devices 10 included in the inter-terminal communication system 1 may be different. However, a pair consisting of at least two terminal devices 10 of the information transmission side terminal device 10 and the information reception side terminal device 10 reproduces the same information.

つまり、端末間通信システム1は、2台のみならず3台以上の端末間通信システム1においても、画像情報又は音声情報を共有することができる。以下では、3台以上の端末装置10における情報共有機能のことを「三者間情報共有機能」と称することがある。これに対し、2台の端末装置10における情報共有機能のことを「二者間情報共有機能」と称することがある。また、以下では、一例として3台の端末装置10による三者間情報機能について説明するが、端末装置10は、4台以上であってもよい。   That is, the inter-terminal communication system 1 can share image information or audio information not only in two but also in three or more inter-terminal communication systems 1. Hereinafter, an information sharing function in three or more terminal devices 10 may be referred to as a “three-party information sharing function”. On the other hand, the information sharing function in the two terminal devices 10 may be referred to as a “bilateral information sharing function”. Moreover, below, although the three-way information function by the three terminal devices 10 is demonstrated as an example, the terminal device 10 may be four or more.

この端末間通信システム1には、複数の端末装置10が含まれる。以下の説明において、複数の端末装置10のそれぞれを区別する場合には、例えば、端末装置10A、端末装置10Bと記載する。また、以下の説明において、これら複数の端末装置10のそれぞれを区別しない場合には、単に端末装置10と記載する。この端末装置10の構成について図1を参照して説明する。   The inter-terminal communication system 1 includes a plurality of terminal devices 10. In the following description, when distinguishing each of the plurality of terminal devices 10, for example, they are described as a terminal device 10A and a terminal device 10B. Moreover, in the following description, when not distinguishing each of these several terminal devices 10, it describes as the terminal device 10 only. The configuration of the terminal device 10 will be described with reference to FIG.

[端末装置の構成]
図1は、本実施形態の端末装置10の構成の一例を示す模式図である。端末装置10は、表示部100と、操作検出部110と、撮像部120と、音再生部130と、収音部140と、通信部150と、制御部160とを備えている。
[Configuration of terminal device]
FIG. 1 is a schematic diagram illustrating an example of a configuration of the terminal device 10 according to the present embodiment. The terminal device 10 includes a display unit 100, an operation detection unit 110, an imaging unit 120, a sound reproduction unit 130, a sound collection unit 140, a communication unit 150, and a control unit 160.

表示部100は、液晶ディスプレイを備えており、文字や写真などの画像を表示する。この表示部100が表示する画像には、着信を待ち受けている場合に表示される待ち受け画像、端末装置において動作するアプリケーションが提供するアプリ画像、端末装置が提供する各種の機能をユーザが選択するためのメニュー画像などが含まれる。   The display unit 100 includes a liquid crystal display and displays images such as characters and photographs. The image displayed by the display unit 100 is for a user to select a standby image displayed when waiting for an incoming call, an application image provided by an application operating on the terminal device, and various functions provided by the terminal device. Menu images and so on.

このアプリ画像には、電話(音声通信)アプリケーションが提供するダイヤラ画像、氏名や電話番号、メールアドレスを管理するアドレス帳アプリケーションが提供するアドレス帳の画像が含まれる。また、このアプリ画像には、動画再生アプリケーションが提供する動画像、ウェブブラウザアプリケーションが提供するウェブ画像、地図アプリケーションが提供する地図画像、写真アルバムアプリケーションが提供する写真の画像が含まれる。また、このアプリ画像には、電子メールアプリケーションが提供するメール文面の画像や、テキストチャットアプリケーションが提供するチャットの画像など、種々の画像が含まれる。   This application image includes a dialer image provided by a telephone (voice communication) application, and an address book image provided by an address book application that manages names, telephone numbers, and mail addresses. In addition, the application image includes a moving image provided by the moving image reproduction application, a web image provided by the web browser application, a map image provided by the map application, and a photo image provided by the photo album application. The application image includes various images such as a mail text image provided by the e-mail application and a chat image provided by the text chat application.

また、表示部100が表示するメニュー画像のうち、情報共有機能を選択するためのメニュー画像を、特に情報共有メニュー画像という。また、この情報共有メニュー画像を、共有メニューボール画像、又は共有メニューボタン画像ともいう。ここで、メニューには、情報共有メニューの他に、種々のメニューが含まれる。   Of the menu images displayed on the display unit 100, the menu image for selecting the information sharing function is particularly referred to as an information sharing menu image. The information sharing menu image is also referred to as a shared menu ball image or a shared menu button image. Here, the menu includes various menus in addition to the information sharing menu.

図1に戻り、操作検出部110は、表示部100を覆う透明なタッチパネルセンサを備えており、ユーザの操作を検出する。ユーザの操作には、様々な種類がある。操作の種類の一例には、タップ操作と、ドラッグ操作と、ピンチ操作とがある。タップ操作とは、ユーザが、タッチパネルのある位置に指を触れた後、すぐに指を離す操作である。ドラッグ操作とは、ユーザが、タッチパネルに触れた指を、タッチパネルに触れた状態のままある方向に移動させる操作である。ピンチ操作とは、ユーザが、タッチパネルに触れた2本の指の間隔を変化させる操作である。また、タップ操作には、1回だけ触れるシングルタップ操作と、シングルタップ操作をすばやく2回繰り返すダブルタップ操作とが含まれる。また、ドラッグ操作には、移動速度がドラッグ操作に比べて速いスワイプ操作と、さらに速いフリック操作とが含まれる。また、ピンチ操作には、タッチパネルに触れた2本の指の間隔を広げるピンチアウト操作と、タッチパネルに触れた2本の指の間隔を狭めるピンチイン操作とが含まれる。   Returning to FIG. 1, the operation detection unit 110 includes a transparent touch panel sensor that covers the display unit 100, and detects a user operation. There are various types of user operations. Examples of operation types include a tap operation, a drag operation, and a pinch operation. The tap operation is an operation in which the user releases the finger immediately after touching the finger at a position where the touch panel is located. The drag operation is an operation in which the user moves a finger touching the touch panel in a certain direction while touching the touch panel. The pinch operation is an operation in which the user changes the interval between two fingers that touch the touch panel. The tap operation includes a single tap operation that is touched only once and a double tap operation that repeats the single tap operation twice quickly. Further, the drag operation includes a swipe operation in which the moving speed is faster than that of the drag operation and a faster flick operation. The pinch operation includes a pinch-out operation that increases the interval between two fingers that touch the touch panel, and a pinch-in operation that decreases the interval between two fingers that touch the touch panel.

なお、ここでは、ユーザが、指によってタッチパネルセンサに触れることにより操作する場合を一例にして説明したが、これに限られない。例えば、ユーザは、指に代えて、操作用の指示棒などを用いて操作してもよい。すなわち、操作検出部110は、指や、指以外の物体(例えば、指示棒)による操作を、ユーザの操作として検出する。   Here, the case where the user performs an operation by touching the touch panel sensor with a finger has been described as an example, but the present invention is not limited thereto. For example, the user may operate using an operation indicator bar instead of a finger. That is, the operation detection unit 110 detects an operation with a finger or an object other than the finger (for example, a pointing stick) as a user operation.

音再生部130は、スピーカを備えており、入力される音情報に基づく音を再生する。この音再生部130は、耳あて通話用スピーカ131と、スピーカモード用スピーカ132とを備えている。耳あて通話用スピーカ131は、端末装置10をユーザの耳に当てて通話する場合に用いられる。スピーカモード用スピーカ132は、端末装置10を耳から話した状態で音を再生する場合に用いられる。   The sound reproducing unit 130 includes a speaker and reproduces sound based on input sound information. The sound reproducing unit 130 includes an ear-talking speaker 131 and a speaker mode speaker 132. The ear-talking speaker 131 is used when the terminal device 10 is placed on the user's ear to make a call. The speaker mode speaker 132 is used when sound is reproduced while the terminal device 10 is spoken from the ear.

収音部140は、マイクを備えており、端末装置10の周囲の音を収音して、収音した音を音情報に変換する。この端末装置10の周囲の音には、端末装置10の周囲の雑音、ユーザが通話のために発音している音、及び音再生部130のスピーカが発音している音が含まれる。すなわち、収音部140は、端末装置10の周囲の雑音や、通話中のユーザの声、端末装置10のスピーカが発している音など、種々の音を収音する。   The sound collection unit 140 includes a microphone, collects sounds around the terminal device 10, and converts the collected sounds into sound information. The sounds around the terminal device 10 include the noise around the terminal device 10, the sound that the user is making to make a call, and the sound that is produced by the speaker of the sound reproducing unit 130. That is, the sound collection unit 140 collects various sounds such as noise around the terminal device 10, the voice of the user during a call, and the sound emitted from the speaker of the terminal device 10.

通信部150は、通信制御用IC(Integrated Circuit)を備え、他の装置との通信を行う。端末装置10は、この通信部150による通信動作によって、他の装置と通信を行う。以下の説明において、通信部150の構成及び動作の説明は省略する。   The communication unit 150 includes a communication control IC (Integrated Circuit), and performs communication with other devices. The terminal device 10 communicates with other devices by the communication operation by the communication unit 150. In the following description, description of the configuration and operation of the communication unit 150 is omitted.

制御部160は、CPU(Central Processing Unit)を備え、端末装置10が備える各部を制御する。端末装置10は、この制御部160による各部の制御によって、表示部100への表示、操作検出部110による操作の検出、通信部150による他の装置との通信等の動作を行う。以下の説明において、制御部160の構成及び動作の説明は省略する。   The control unit 160 includes a CPU (Central Processing Unit) and controls each unit included in the terminal device 10. The terminal device 10 performs operations such as display on the display unit 100, detection of an operation by the operation detection unit 110, communication with another device by the communication unit 150, and the like by the control of each unit by the control unit 160. In the following description, description of the configuration and operation of the control unit 160 is omitted.

[情報共有機能の概要]
次に、端末間通信システム1が提供する情報共有機能の概要について図2を参照して説明する。
図2は、端末間通信システム1が提供する情報共有機能の概要の一例を示す模式図である。端末間通信システム1が提供する情報共有機能には、一例として、表示中の画像を共有する機能、手書き画像を共有する機能、位置情報を共有する機能、及び、カメラが撮像した画像を共有する機能がある。
[Overview of information sharing function]
Next, an outline of the information sharing function provided by the inter-terminal communication system 1 will be described with reference to FIG.
FIG. 2 is a schematic diagram illustrating an example of an overview of an information sharing function provided by the inter-terminal communication system 1. Examples of the information sharing function provided by the inter-terminal communication system 1 include a function for sharing an image being displayed, a function for sharing a handwritten image, a function for sharing position information, and an image captured by a camera. There is a function.

これらの情報共有機能は、端末装置10上で動作する情報共有機能アプリケーションによって提供される。以情報共有機能アプリケーションは、端末装置10内の基本ソフトウエア、及び他のアプリケーションと連携して動作することにより、情報共有機能を提供する。   These information sharing functions are provided by an information sharing function application that operates on the terminal device 10. The information sharing function application provides an information sharing function by operating in cooperation with the basic software in the terminal device 10 and other applications.

ここで、情報共有機能アプリケーションが連携する端末装置10内の基本ソフトウエアには、端末装置10が他の装置と通信を行うための通信ソフトウエアが含まれる。また、情報共有機能アプリケーションが連携する端末装置10内の他のアプリケーションには、基本アドレス帳アプリケーションと、画像共有用アドレス帳アプリケーションとが含まれる。
ここで、端末装置10が情報共有機能に対応している場合とは、端末装置10が情報共有機能を提供するアプリケーションをインストールしている場合をいう。また、端末装置10が情報共有機能に対応していない場合とは、端末装置10が情報共有機能を提供するアプリケーションをインストールしていない場合をいう。
Here, the basic software in the terminal device 10 with which the information sharing function application cooperates includes communication software for the terminal device 10 to communicate with other devices. Other applications in the terminal device 10 with which the information sharing function application cooperates include a basic address book application and an image sharing address book application.
Here, the case where the terminal device 10 is compatible with the information sharing function refers to the case where the terminal device 10 has installed an application that provides the information sharing function. Further, the case where the terminal device 10 does not support the information sharing function refers to a case where the terminal device 10 does not install an application that provides the information sharing function.

ここで、情報共有機能を説明するにあたり、本実施形態の説明中における端末装置10の表記の方法について説明する。端末装置10は、情報共有対象の情報を発信する側の端末装置10と、情報共有対象の情報を受信する側の端末装置10とに区別される。以下の説明において、複数の端末装置10のうち、情報共有対象の情報を発信する側の端末装置10を、情報発信側の端末装置10又は端末装置10−Sとも記載する。また、情報共有対象の情報を受信する側の端末装置10を、情報受信側の端末装置10、又は端末装置10−Rとも記載する。情報受信側の端末装置10と情報発信側の端末装置10とは、入れ替わることがある。具体的には、情報受信側の端末装置10から、情報発信側の端末装置10に対して、自装置からの情報の送信許可を要求する。そして、情報発信側の端末装置10により送信が許可された場合に、それまで情報受信側として機能していた端末装置10が、情報発信側の端末装置10として機能する。また、それまで情報発信側として機能していた端末装置10が、情報受信側の端末装置10として機能する。   Here, in describing the information sharing function, a description method of the terminal device 10 in the description of the present embodiment will be described. The terminal device 10 is classified into a terminal device 10 that transmits information to be shared, and a terminal device 10 that receives information to be shared. In the following description, the terminal device 10 that transmits information to be shared among the plurality of terminal devices 10 is also referred to as an information transmitting terminal device 10 or a terminal device 10-S. Further, the terminal device 10 on the information receiving target side is also referred to as an information receiving terminal device 10 or a terminal device 10-R. The terminal device 10 on the information receiving side and the terminal device 10 on the information transmitting side may be interchanged. Specifically, the terminal device 10 on the information receiving side requests the terminal device 10 on the information transmitting side to permit transmission of information from the own device. When the transmission is permitted by the terminal device 10 on the information transmission side, the terminal device 10 that has been functioning as the information reception side until then functions as the terminal device 10 on the information transmission side. Further, the terminal device 10 that has been functioning as the information transmitting side until then functions as the terminal device 10 on the information receiving side.

なお、情報共有を要求する側(要求側)の端末装置10と、情報共有を要求される側(被要求側)の端末装置10とのうち、いずれが情報共有対象の情報を発信し、いずれがこの情報を受信するのかは、各情報共有機能間の機能の違いや、端末装置10の動作状態などに依存する。すなわち、この端末間通信システム1においては、要求側の端末装置10が情報共有対象の情報を発信する場合と、被要求側の端末装置10が情報共有対象の情報を発信する場合とがある。   Of the terminal device 10 that requests information sharing (requesting side) and the terminal device 10 that requests information sharing (requested side), which transmits information to be shared, Whether this information is received depends on the functional difference between the information sharing functions, the operating state of the terminal device 10, and the like. That is, in the inter-terminal communication system 1, there are a case where the requesting terminal device 10 transmits information to be shared information and a case where the requested terminal device 10 transmits information to be shared information.

[情報共有機能:表示中の画像の共有(表示画面共有機能)]
次に、図2を参照して、情報共有機能の概要について説明する。ここでは、端末間通信システム1が提供する表示中の画像の共有(表示画面共有機能)について説明する。
[Information sharing function: Sharing the displayed image (display screen sharing function)]
Next, an overview of the information sharing function will be described with reference to FIG. Here, sharing of an image being displayed (display screen sharing function) provided by the inter-terminal communication system 1 will be described.

端末間通信システム1は、表示画面共有機能を提供する。この表示画面共有機能とは、端末装置10の表示部100に表示されている画像P1を、他の端末装置10の表示部100に画像P2として表示させることにより、端末装置10の間において画像を共有する機能である。この表示画面共有機能により端末装置10に表示される画面の一例を図2(A)に示す。ここでいう表示部100に表示されている画像には、上述した待ち受け画像、アプリ画像、及び、メニュー画像が含まれる。   The inter-terminal communication system 1 provides a display screen sharing function. With this display screen sharing function, an image P1 displayed on the display unit 100 of the terminal device 10 is displayed as an image P2 on the display unit 100 of another terminal device 10, whereby an image is displayed between the terminal devices 10. It is a function to share. An example of a screen displayed on the terminal device 10 by this display screen sharing function is shown in FIG. The image displayed on the display unit 100 here includes the above-described standby image, application image, and menu image.

ある端末装置10Aにおいて、この表示画面共有機能が選択されると、端末間通信システム1は、この端末装置10Aの表示部100に表示されている画像P1を、共有先である他の端末装置10Bの表示部100に画像P2として表示させる。   When the display screen sharing function is selected in a certain terminal device 10A, the inter-terminal communication system 1 displays the image P1 displayed on the display unit 100 of the terminal device 10A as another sharing destination terminal device 10B. Are displayed as an image P2.

この表示画面共有機能の具体例について説明する。例えば、端末装置10Aにおいて、写真アルバムアプリケーションが起動されており、この写真アルバムアプリケーションが写真の画像(図2(A)に示す画像P1)を表示部100に表示している場合について説明する。この場合、端末間通信システム1は、端末装置10Aの表示部100に表示されている写真の画像P1を、共有先である他の端末装置10Bの表示部100に画像P2として表示させる。このようにして2台の端末装置10のそれぞれの表示部100に、同一の写真の画像P1が表示されることにより、写真の画像P1が共有される。   A specific example of this display screen sharing function will be described. For example, a case will be described in which a photo album application is activated in the terminal device 10A, and the photo album application displays a photo image (image P1 shown in FIG. 2A) on the display unit 100. In this case, the inter-terminal communication system 1 displays the image P1 of the photograph displayed on the display unit 100 of the terminal device 10A as the image P2 on the display unit 100 of the other terminal device 10B that is the sharing destination. In this way, the image P1 of the same photograph is displayed on the respective display units 100 of the two terminal devices 10, whereby the photograph image P1 is shared.

次に、表示画面共有機能の他の具体例について説明する。例えば、端末装置10Aにおいて、動画アプリケーションが起動されており、この動画アプリケーションが音声付の動画像を表示部100に表示している場合について説明する。この場合、端末間通信システム1は、端末装置10Aの表示部100に表示されている動画像を、共有先である他の端末装置10Bの表示部100に表示させる。また、画像の共有と同時に端末間通信システム1は、端末装置10Aの音再生部130から再生されている音を、共有先である他の端末装置10Bの音再生部130から再生させる。このようにして、2台の端末装置10間において、音声付の動画像が共有される。   Next, another specific example of the display screen sharing function will be described. For example, a case where a moving image application is activated in the terminal device 10A and the moving image application displays a moving image with sound on the display unit 100 will be described. In this case, the inter-terminal communication system 1 displays the moving image displayed on the display unit 100 of the terminal device 10A on the display unit 100 of the other terminal device 10B that is the sharing destination. Simultaneously with image sharing, the inter-terminal communication system 1 causes the sound reproduced from the sound reproducing unit 130 of the terminal device 10A to be reproduced from the sound reproducing unit 130 of the other terminal device 10B that is the sharing destination. In this way, a moving image with sound is shared between the two terminal devices 10.

次に、三者間情報共有機能の提供時における端末装置10の表示について説明する。図2(B)において、端末装置10A〜10Cの3台の端末装置により表示画面の共有が行われている。この一例の説明において、端末装置10Aと端末装置10Bとの間には、予めセションが構築されている。このセションにおいて、ユーザAが利用する端末装置10Aは、情報送信側の端末装置10−Sである。また、ユーザBが利用する端末装置10Bは、情報受信側の端末装置10−Rである。そして、この一例の説明において、端末装置10Aは、端末装置10Cを情報共有通信に招待する。この招待により、端末装置10A〜10Cによる情報共有通信が開始されると、端末装置10Cは、情報受信側の端末装置10−Rとして機能する。この3台の端末装置10A〜10Cによる情報共有の一例では、端末装置10Aが表示する共有画像P31と、端末装置10Bが表示する共有画像P32と、端末装置10Cが表示する共有画像P33とは、同一の画像である。このとき、端末装置10A〜10Cの各表示部100には、2つの共有メニューボタン画像PMB、PMB2が表示される。   Next, the display of the terminal device 10 at the time of providing the tripartite information sharing function will be described. In FIG. 2B, the display screen is shared by three terminal devices 10A to 10C. In the description of this example, a session is established in advance between the terminal device 10A and the terminal device 10B. In this session, the terminal device 10A used by the user A is the terminal device 10-S on the information transmission side. Further, the terminal device 10B used by the user B is the terminal device 10-R on the information receiving side. And in description of this example, 10 A of terminal devices invite the terminal device 10C to information sharing communication. When information sharing communication by the terminal devices 10A to 10C is started by this invitation, the terminal device 10C functions as the terminal device 10-R on the information receiving side. In an example of information sharing by the three terminal devices 10A to 10C, the shared image P31 displayed by the terminal device 10A, the shared image P32 displayed by the terminal device 10B, and the shared image P33 displayed by the terminal device 10C are: It is the same image. At this time, two shared menu button images PMB and PMB2 are displayed on each display unit 100 of the terminal devices 10A to 10C.

共有メニューボタン画像PMB、PMB2は、2台の通信相手にそれぞれ対応する情報共有機能を選択する操作を受け付ける画像である。具体的には、例えば、端末装置10Aにおいて、共有メニューボタン画像PMBは、端末装置10Bとの間における通信に関するメニューを選択する操作を受け付ける画像である。また、例えば、端末装置10Aにおいて、共有メニューボタン画像PMB2は、端末装置10Cとの間における通信に関するメニューを選択する操作を受け付ける画像である。また、端末装置10Bにおいて、共有メニューボタン画像PMB、PMB2は、それぞれ、端末装置10A、10Cとの間における通信に関するメニューを選択する操作を受け付ける画像である。また、端末装置10Cにおいて、共有メニューボタン画像PMB、PMB2は、それぞれ、端末装置10A、10Bとの間における通信に関するメニューを選択する操作を受け付ける画像である。ここで、通信に関するメニューには、例えば、通信相手の端末装置10との間において、情報共有機能を中止し、音声通信のみにする機能や、情報共有及び音声通信の両方を切断する機能が含まれる。   The share menu button images PMB and PMB2 are images that accept operations for selecting information sharing functions respectively corresponding to two communication partners. Specifically, for example, in the terminal device 10A, the shared menu button image PMB is an image that receives an operation of selecting a menu related to communication with the terminal device 10B. Further, for example, in the terminal device 10A, the shared menu button image PMB2 is an image that receives an operation for selecting a menu related to communication with the terminal device 10C. In the terminal device 10B, the shared menu button images PMB and PMB2 are images that accept operations for selecting menus related to communication with the terminal devices 10A and 10C, respectively. In the terminal device 10C, the shared menu button images PMB and PMB2 are images that accept operations for selecting menus related to communication with the terminal devices 10A and 10B, respectively. Here, the menu related to communication includes, for example, a function of canceling the information sharing function with the terminal device 10 of the communication partner and making only voice communication, and a function of disconnecting both information sharing and voice communication. It is.

このように、端末装置10は、三者間情報共有機能を提供する場合に、その表示部100に、複数の通信相手それぞれとの間における通信に関するメニューを選択する操作を受け付ける画像を表示する。これにより、ユーザは、三者間情報共有機能を利用している場合であっても、その通信相手個別に情報共有を行ってよいか否かを制御することができる。   As described above, when the terminal device 10 provides the three-way information sharing function, the display unit 100 displays an image for accepting an operation for selecting a menu related to communication with each of a plurality of communication partners. Thereby, even if it is a case where the user is utilizing the tripartite information sharing function, it can control whether information sharing may be performed for each communication partner individually.

なお、共有メニューボタン画像PMB、PMB2は、各画像が対応する通信相手をアドレス帳やSNS(Social Networking Service)等の画像やテキストなどにより示してもよい。具体的には、端末装置10Aにおいて、共有メニューボタン画像PMBは、ユーザBの写真や氏名などを含んでもよい。また、端末装置10Aにおいて、共有メニューボタン画像PMB2は、ユーザCの写真や氏名などを含んでもよい。   Note that the shared menu button images PMB and PMB2 may indicate a communication partner to which each image corresponds by an image such as an address book or SNS (Social Networking Service), text, or the like. Specifically, in the terminal device 10A, the shared menu button image PMB may include a photograph of the user B, a name, and the like. Further, in the terminal device 10A, the shared menu button image PMB2 may include a photograph or a name of the user C.

[情報共有機能の選択操作の概要]
次に、ユーザが情報共有機能を起動する操作の概要について、図3を参照して説明する。ここでは、説明を簡潔にするため、2台の端末装置10による二者間情報共有機能を起動する場合の選択操作について説明する。
図3は、本実施形態の端末間通信システム1が提供する情報共有機能の選択操作の第1例を示す模式図である。
ここでは、ユーザA(Aさん)と、ユーザB(Bさん)とが、それぞれ端末装置10を使用して表示画面共有を利用する場合を一例にして説明する。また、この一例の説明において、ユーザAが利用する端末装置10Aが、要求側の端末装置10である。また、この一例の説明において、ユーザBが利用する端末装置10Bが、被要求側の端末装置10である。また、端末装置10によっては表示画面共有機能に対応していない端末装置10もあり得る。この一例の説明においては、各端末装置10が、表示画面共有機能に対応している場合について説明する。
[Overview of selecting information sharing function]
Next, an outline of an operation for the user to activate the information sharing function will be described with reference to FIG. Here, for the sake of brevity, a selection operation when the two-party information sharing function is activated by the two terminal devices 10 will be described.
FIG. 3 is a schematic diagram illustrating a first example of an information sharing function selection operation provided by the inter-terminal communication system 1 of the present embodiment.
Here, a case where user A (Mr. A) and user B (Mr. B) use display screen sharing using the terminal device 10 will be described as an example. In the description of this example, the terminal device 10A used by the user A is the requesting terminal device 10. In the description of this example, the terminal device 10B used by the user B is the requested terminal device 10. Some terminal devices 10 may not support the display screen sharing function. In the description of this example, a case where each terminal device 10 is compatible with the display screen sharing function will be described.

ユーザAと、ユーザBとは、図3(A)から図3(E)に示す操作を順に行うことにより、表示画面共有機能を利用する。このユーザAと、ユーザBとは、LTE通信網を経由した音声通話を行っている。このユーザAと、ユーザBとが、LTE通信網を経由した音声通話を行っている場合の、各端末装置10に表示される画像の一例を、図3(A)に示す。   The user A and the user B use the display screen sharing function by sequentially performing the operations shown in FIGS. 3 (A) to 3 (E). The user A and the user B are making a voice call via the LTE communication network. FIG. 3A shows an example of an image displayed on each terminal device 10 when the user A and the user B are making a voice call via the LTE communication network.

このとき、ユーザAの端末装置10Aの表示部100、及びユーザBの表示部100には、いずれも共有メニューボタンの画像PMBが表示されている。この共有メニューボタンの画像PMBの表示は、通信の相手側の端末装置10が、上述した情報共有機能のうち、いずれかの情報共有機能に対応していることを示す。この一例では、共有メニューボタンの画像PMBの表示は、端末装置10Aと、端末装置10Bとが、いずれも表示画面共有機能に対応していることを示す。   At this time, the shared menu button image PMB is displayed on both the display unit 100 of the terminal device 10A of the user A and the display unit 100 of the user B. The display of the image PMB of the sharing menu button indicates that the terminal device 10 on the communication partner side supports one of the information sharing functions described above. In this example, the display of the image PMB of the sharing menu button indicates that both the terminal device 10A and the terminal device 10B are compatible with the display screen sharing function.

ユーザAは、端末装置10Aの表示部100に表示されている共有メニューボタンの画像PMBをタップ操作する。このタップ操作を端末装置10Aの操作検出部110が検出すると、ランチャー画像P20が表示される(図3(B)を参照)。このランチャー画像P20とは、上述したメニュー画像の一例である。この一例においては、ランチャー画像P20は、表示画面共有機能、手書き共有機能、位置情報共有機能、及びカメラ共有機能のアイコン画像を示す。このアイコン画像が表示されている表示部100上の位置を、ユーザがタップ操作することにより、アイコン画像に対応付けられた機能が起動する。ここでは、ユーザAが、ランチャー画像P20に表示される各情報共有機能のうち、表示画面共有機能のアイコン画像P21をタップ操作する場合について説明する。   User A taps the image PMB of the shared menu button displayed on the display unit 100 of the terminal device 10A. When the operation detection unit 110 of the terminal device 10A detects this tap operation, a launcher image P20 is displayed (see FIG. 3B). The launcher image P20 is an example of the menu image described above. In this example, the launcher image P20 shows icon images of a display screen sharing function, a handwriting sharing function, a position information sharing function, and a camera sharing function. When the user taps the position on the display unit 100 where the icon image is displayed, the function associated with the icon image is activated. Here, a case where the user A taps the icon image P21 of the display screen sharing function among the information sharing functions displayed on the launcher image P20 will be described.

このタップ操作を端末装置10Aの操作検出部110が検出すると、表示画面共有機能の機能説明画像P22が表示される(図3(C)を参照)。また、このタップ操作を端末装置10Aの操作検出部110が検出すると、共有先の端末装置10Bの表示部100に画面共有開始の承諾画像P23が表示される。この承諾画像P23とは、情報共有の被要求側の端末装置10に表示される画像であり、要求側の端末装置10による情報共有の要求を承諾するか否かを示す操作を、ユーザに促す画像である。この一例においては、承諾画像P23とは、ユーザAからの画面共有の要求を承諾するか否かを示すタップ操作をユーザBに対して促す画像である。   When the operation detection unit 110 of the terminal device 10A detects this tap operation, a function explanation image P22 of the display screen sharing function is displayed (see FIG. 3C). When the operation detection unit 110 of the terminal device 10A detects this tap operation, a screen sharing start consent image P23 is displayed on the display unit 100 of the sharing destination terminal device 10B. The consent image P23 is an image displayed on the requesting terminal device 10 for information sharing, and prompts the user to perform an operation indicating whether or not to accept the information sharing request by the requesting terminal device 10. It is an image. In this example, the consent image P23 is an image prompting the user B to perform a tap operation indicating whether or not to accept the screen sharing request from the user A.

次に、ユーザBは、承諾画像P23の承諾ボタンの画像P24をタップ操作する。このタップ操作を端末装置10Bの操作検出部110が検出すると、端末装置10B及び端末装置10Aの各表示部100に、接続中を示す画像P25が表示される(図3(D)を参照)。このとき、端末装置10Aと端末装置10Bとの間において、表示画面共有のための端末間通信のセションが構築される。   Next, the user B taps the image P24 of the consent button of the consent image P23. When the operation detection unit 110 of the terminal device 10B detects this tap operation, an image P25 indicating that it is connected is displayed on each display unit 100 of the terminal device 10B and the terminal device 10A (see FIG. 3D). At this time, an inter-terminal communication session for sharing the display screen is established between the terminal device 10A and the terminal device 10B.

次に、端末装置10Aと端末装置10Bとの間において、表示画面共有のための端末間通信のセションが確立すると、端末装置10Aの表示部100に表示されている画像P26が、端末装置10Aの表示部100に画像P27として表示される(図3(E)を参照)。すなわち、端末装置10Aと端末装置10Bとの間において、表示画面共有が開始される。   Next, when a communication session between terminals for display screen sharing is established between the terminal device 10A and the terminal device 10B, an image P26 displayed on the display unit 100 of the terminal device 10A is displayed on the terminal device 10A. It is displayed on the display unit 100 as an image P27 (see FIG. 3E). That is, display screen sharing is started between the terminal device 10A and the terminal device 10B.

なお、端末装置10−1Sおよび端末装置10−2Rの双方の端末装置10は、それぞれ、後述するように、音声通話セションが構築されている通話相手の電話番号およびIPアドレスを保持している。音声通話中において、双方の端末装置10は、音声データに含まれる情報と、保持している電話番号およびIPアドレスとを照合して、音声通話が継続されているか否かを監視する。
端末装置10−1Sまたは端末装置10−2Rの何れか一方により通話終了の操作が受け付けられた場合、通話終了の操作を受け付けた端末装置10は、音声通話セションを終了させると共に、表示画面共有のための情報通信セション(端末間の情報共有のセションともいう)も終了させる。このとき、端末装置10は、音声通話セションを構築したLTE通信網におけるサーバ装置にセションの終了要求を送信すると共に、シグナリングサーバ20に情報通信セションの終了要求を送信する。他方の端末装置10は、保持している電話番号およびIPアドレスを含む音声データの受信が所定時間に亘り無いことを検出すると、音声通話が継続されていないと判定する。これにより、他方の端末装置10は、音声通話セションおよび表示画面共有のための情報通信セションが終了されたことを判定する。
Note that each of the terminal devices 10 of the terminal device 10-1S and the terminal device 10-2R holds a telephone number and an IP address of a call partner in which a voice call session is established, as will be described later. During a voice call, both terminal apparatuses 10 check whether the voice call is continued by checking information included in the voice data with the stored telephone number and IP address.
When the call end operation is accepted by either the terminal device 10-1S or the terminal device 10-2R, the terminal device 10 that has accepted the call end operation terminates the voice call session and also displays the display screen. Information communication session (also referred to as an information sharing session between terminals) is also terminated. At this time, the terminal device 10 transmits a session end request to the server device in the LTE communication network in which the voice call session is established, and transmits an information communication session end request to the signaling server 20. When the other terminal device 10 detects that the voice data including the held telephone number and IP address has not been received for a predetermined time, it determines that the voice call is not continued. Thereby, the other terminal device 10 determines that the voice communication session and the information communication session for sharing the display screen are ended.

[端末間通信システムの構成]
次に、上述した情報共有機能を提供する端末間通信システム1の構成について、図4を参照して説明する。
図4は、本実施形態の端末間通信システム1の構成の一例を示す概要図である。端末間通信システム1は、複数の端末装置10(この一例では、端末装置10−S及び端末装置10−R)の他に、次の装置を備える。すなわち、端末間通信システム1は、シグナリングサーバ20と、認証サーバ30と、プッシュサーバ40と、中継サーバ50とを備えている。
[Configuration of inter-terminal communication system]
Next, the configuration of the inter-terminal communication system 1 that provides the above-described information sharing function will be described with reference to FIG.
FIG. 4 is a schematic diagram illustrating an example of the configuration of the inter-terminal communication system 1 of the present embodiment. The inter-terminal communication system 1 includes the following devices in addition to the plurality of terminal devices 10 (in this example, the terminal device 10-S and the terminal device 10-R). That is, the inter-terminal communication system 1 includes a signaling server 20, an authentication server 30, a push server 40, and a relay server 50.

シグナリングサーバ20は、端末装置10の間において行われる情報共有通信のセションを管理する。具体的には、シグナリングサーバ20は、複数の端末装置10、認証サーバ30、及びプッシュサーバ40との間において通信が可能である。シグナリングサーバ20は、端末装置10が情報共有機能に対応している場合、その端末装置10の情報のレジストレーション(初期登録)を行う。また、シグナリングサーバ20は、端末装置10から情報共有の要求があった場合に、共有先の端末装置10との間の通信のセションを構築するためのシグナリング処理を行う。また、シグナリングサーバ20は、端末装置10から情報共有の要求があった場合に、共有の要求先の端末装置10が情報共有機能に対応しているか否かの返答を、要求側の端末装置10に対して行う。   The signaling server 20 manages a session of information sharing communication performed between the terminal devices 10. Specifically, the signaling server 20 can communicate with a plurality of terminal devices 10, the authentication server 30, and the push server 40. When the terminal device 10 supports the information sharing function, the signaling server 20 performs registration (initial registration) of information of the terminal device 10. Further, when there is a request for information sharing from the terminal device 10, the signaling server 20 performs signaling processing for establishing a communication session with the sharing destination terminal device 10. In addition, when there is a request for information sharing from the terminal device 10, the signaling server 20 returns a response as to whether or not the terminal device 10 that is the sharing request destination is compatible with the information sharing function. To do.

このシグナリングサーバ20は、端末情報受信部と、適合性判定部と、判定結果送信部と、セション構築部とを、その機能部として備えている。
このうち、端末情報受信部は、端末情報を端末装置10から受信する。この端末情報には、端末装置10を識別する端末識別情報と、端末装置10において動作するアプリケーションを識別するアプリケーション識別情報とが含まれている。
適合性判定部は、ある端末装置10において動作する第1アプリケーションと、別の端末装置10において動作する第2アプリケーションとの適合性を、端末情報に基づいて判定する。
判定結果送信部は、ある端末装置10において動作する第1アプリケーションが送信する判定要求に応じて、適合性判定部による判定結果を第1アプリケーションに送信する。
セション構築部は、第1アプリケーションが送信する通信開始の要求に応じて、通信開始の要求を送信した第1アプリケーションと、第2アプリケーションとの間のセションを、端末情報に基づいて構築する。本実施形態において、セションは、音声通信を行っている端末装置10の間でのみ構築される。そして、音声通信を終了する場合には、セションが切断される。従って、セションを介した情報共有は、音声通信中のみ行われる。
The signaling server 20 includes a terminal information reception unit, a suitability determination unit, a determination result transmission unit, and a session construction unit as functional units.
Among these, the terminal information receiving unit receives terminal information from the terminal device 10. The terminal information includes terminal identification information for identifying the terminal device 10 and application identification information for identifying an application operating on the terminal device 10.
The suitability determination unit determines suitability between a first application that operates on a certain terminal device 10 and a second application that operates on another terminal device 10 based on the terminal information.
The determination result transmission unit transmits a determination result by the suitability determination unit to the first application in response to a determination request transmitted by a first application that operates in a certain terminal device 10.
The session construction unit constructs a session between the first application that transmitted the communication start request and the second application in response to the communication start request transmitted by the first application based on the terminal information. In the present embodiment, the session is constructed only between the terminal devices 10 performing voice communication. Then, when ending the voice communication, the session is disconnected. Therefore, information sharing via a session is performed only during voice communication.

また、シグナリングサーバ20は、セションの構築開始時に端末装置10が正規の装置であるか否かを判定する。端末装置10が正規の装置であるか否かは、様々な手段によって判定することができる。この一例においては、シグナリングサーバ20は、端末装置10から送信される電話番号及びIPアドレスに基づいて、端末装置10が正規の装置であるか否かを判定する。より具体的には、シグナリングサーバ20は、端末装置10から送信される電話番号及びIPアドレスと、この端末装置10に予め割り当てられている電話番号及びIPアドレスとが一致するか否かに基づいて、端末装置10が正規の装置であるか否かを判定する。以下の説明において、シグナリングサーバ20が行う、端末装置10が正規の装置であるか否かの判定を、セキュア判定とも記載する。   Further, the signaling server 20 determines whether or not the terminal device 10 is a legitimate device at the start of session construction. Whether or not the terminal device 10 is a legitimate device can be determined by various means. In this example, the signaling server 20 determines whether or not the terminal device 10 is a regular device based on the telephone number and the IP address transmitted from the terminal device 10. More specifically, the signaling server 20 is based on whether or not the telephone number and IP address transmitted from the terminal apparatus 10 match the telephone number and IP address previously assigned to the terminal apparatus 10. Then, it is determined whether or not the terminal device 10 is a regular device. In the following description, the determination performed by the signaling server 20 as to whether or not the terminal device 10 is a regular device is also referred to as secure determination.

また、シグナリングサーバ20は、レジストレーション情報を記憶する。シグナリングサーバ20は、このレジストレーション情報を利用して、セションの構築、及びセキュア判定を行う。このシグナリングサーバ20が記憶するレジストレーション情報について、図5を参照して説明する。   In addition, the signaling server 20 stores registration information. The signaling server 20 uses this registration information to perform session construction and secure determination. Registration information stored in the signaling server 20 will be described with reference to FIG.

図5は、本実施形態のシグナリングサーバ20が記憶するレジストレーション情報の一例を示す表である。シグナリングサーバ20は、レジストレーション情報として、端末装置10の電話番号と、端末モデル名と、プッシュIDと、アプリケーションバージョンとを記憶する。ここで、プッシュIDとは、端末装置10上で動作する情報共有機能対応のアプリケーションについて、このアプリケーションを識別する識別情報である。   FIG. 5 is a table showing an example of registration information stored in the signaling server 20 of the present embodiment. The signaling server 20 stores the telephone number of the terminal device 10, the terminal model name, the push ID, and the application version as registration information. Here, the push ID is identification information for identifying an application for the information sharing function that operates on the terminal device 10.

図4に戻り、シグナリングサーバ20は、セションが確立された後には、所定の頻度で端末装置10が正規の装置であるか否かを判定する。シグナリングサーバ20は、端末装置10が正規の装置であると判定した場合に限り、セションを構築し、又は確立されたセションを維持する。具体的には、シグナリングサーバ20は、端末装置10が正規の装置であると判定した場合には、端末装置10に対してトークンを発行する。このトークンとは、高速通信回線を経由して端末装置10どうしが通信を行うための許可情報である。このトークンには、発行の時点からの有効期限が設定されている。端末装置10は、この有効なトークンが発行されている場合に、他の端末装置10との画面情報共有を行うことができる。また、端末装置1は、トークンが発行されていない場合、及び発行されているトークンの有効期限が途過している場合には、他の端末装置10との画面情報共有を行うことができない。このようにして、シグナリングサーバ20は、端末装置10の間のセションを管理する。   Returning to FIG. 4, after the session is established, the signaling server 20 determines whether or not the terminal device 10 is a regular device at a predetermined frequency. The signaling server 20 establishes a session or maintains an established session only when it is determined that the terminal device 10 is a legitimate device. Specifically, when the signaling server 20 determines that the terminal device 10 is a legitimate device, the signaling server 20 issues a token to the terminal device 10. This token is permission information for the terminal devices 10 to communicate with each other via a high-speed communication line. This token has an expiration date from the time of issue. The terminal device 10 can share screen information with other terminal devices 10 when this valid token is issued. Further, the terminal device 1 cannot share screen information with other terminal devices 10 when a token has not been issued and when the validity period of the issued token has expired. In this way, the signaling server 20 manages a session between the terminal devices 10.

認証サーバ30は、端末装置10の電話番号と、インターネットプロトコルアドレス(IPアドレス)とを関連付けて記憶している。認証サーバ30は、シグナリングサーバ20から、電話番号に対応するIPアドレスの要求があった場合に、端末装置10の電話番号に対応するIPアドレスを、シグナリングサーバ20に返答する。   The authentication server 30 stores the telephone number of the terminal device 10 and the Internet protocol address (IP address) in association with each other. When there is a request for an IP address corresponding to the telephone number from the signaling server 20, the authentication server 30 returns an IP address corresponding to the telephone number of the terminal device 10 to the signaling server 20.

なお、ある端末装置10についての電話番号とIPアドレスとの組み合わせが、認証サーバ30に記憶されている電話番号とIPアドレスとの組み合わせと一致しない場合には、この端末装置10が正規の装置でない可能性がある。シグナリングサーバ20は、ある端末装置10から電話番号及びIPアドレスを取得し、認証サーバに記憶されている電話番号及びIPアドレスと比較して、電話番号とIPアドレスとの組み合わせが一致するか否かを判定する。この比較の結果、電話番号とIPアドレスとの組み合わせが一致すると判定した場合、シグナリングサーバ20は、端末装置10に対してトークンを発行する。また、この比較の結果、電話番号とIPアドレスとの組み合わせが一致しないと判定した場合、シグナリングサーバ20は、端末装置10に対してトークンを発行しない。   If the combination of the telephone number and the IP address for a certain terminal device 10 does not match the combination of the telephone number and the IP address stored in the authentication server 30, this terminal device 10 is not a legitimate device. there is a possibility. The signaling server 20 acquires a telephone number and an IP address from a certain terminal device 10, and compares the telephone number and the IP address stored in the authentication server to see if the combination of the telephone number and the IP address matches. Determine. As a result of this comparison, when it is determined that the combination of the telephone number and the IP address matches, the signaling server 20 issues a token to the terminal device 10. Further, as a result of this comparison, when it is determined that the combination of the telephone number and the IP address does not match, the signaling server 20 does not issue a token to the terminal device 10.

プッシュサーバ40は、複数のプッシュIDを記憶する。このプッシュサーバ40に記憶されるプッシュIDと、端末装置10上で動作するアプリケーションとは、シグナリングサーバ20によって対応付けられている。具体的には、端末装置10において、ダウンロードされた新たなアプリケーションが初めて起動されると、この端末装置10は、プッシュサーバ40に対してプッシュIDの発行を要求する。プッシュサーバ40は、この要求に基づいて端末装置10の新たなアプリケーションに対するプッシュIDを発行して、発行したプッシュIDを端末装置10に送信する。端末装置10は、この新たなアプリケーションと、発行されたプッシュIDとを関連付けた情報を、シグナリングサーバ20に対してレジストレーション情報として送信する。シグナリングサーバ20は、端末装置10から送信されたレジストレーション情報を記憶する。これにより、プッシュサーバ40に記憶されるプッシュIDと、端末装置10上で動作するアプリケーションとが、シグナリングサーバ20によって対応付けられる。   The push server 40 stores a plurality of push IDs. The push ID stored in the push server 40 is associated with the application operating on the terminal device 10 by the signaling server 20. Specifically, when a new downloaded application is activated for the first time in the terminal device 10, the terminal device 10 requests the push server 40 to issue a push ID. The push server 40 issues a push ID for the new application of the terminal device 10 based on this request, and transmits the issued push ID to the terminal device 10. The terminal device 10 transmits information associating the new application and the issued push ID as registration information to the signaling server 20. The signaling server 20 stores the registration information transmitted from the terminal device 10. Thereby, the push ID stored in the push server 40 and the application operating on the terminal device 10 are associated by the signaling server 20.

また、プッシュサーバ40は、端末装置10においてアプリケーションがバージョンアップされると、このバージョンアップに伴って新たなプッシュIDを発行する。つまり、プッシュサーバ40は、端末装置10において動作するアプリケーションの、アプリケーションバージョンの更新に伴い、更新される。   Further, when the application is upgraded in the terminal device 10, the push server 40 issues a new push ID along with the upgrade. That is, the push server 40 is updated with the update of the application version of the application running on the terminal device 10.

また、プッシュサーバ40は、被要求側の端末装置10に対してシグナリングサーバ20がセション構築開始の要求を行う際に、要求側の端末装置10の電話番号をプッシュ技術により被要求側の端末装置10に対して送信する。このプッシュ技術とは、端末装置10に対する通信リクエストを、サーバ装置側(この例の場合には、シグナリングサーバ20、及びプッシュサーバ40側)からIPアドレスを用いてプッシュ配信する技術である。なお、以下の説明において、プッシュ技術によって情報を送信することを、単に、情報をプッシュするとも記載する。
また、プッシュサーバ40は、被要求側の端末装置10に対してシグナリングサーバ20がルームへの入室招待を行う際に、要求側の端末装置10の電話番号と、ルームIDと、入室キーとをプッシュ技術により被要求側の端末装置10に対して送信する。ルーム、ルームID、入室キーについては、後述する。
Further, when the signaling server 20 requests the requesting terminal device 10 to start the session construction, the push server 40 uses the push technology to obtain the telephone number of the requesting terminal device 10 by the push technique. 10 is transmitted. This push technology is a technology for delivering a communication request to the terminal device 10 from the server device side (in this example, the signaling server 20 and the push server 40 side) using an IP address. In the following description, transmitting information by the push technique is also referred to as simply pushing information.
Further, when the signaling server 20 invites the requesting terminal device 10 to enter the room, the push server 40 receives the telephone number, the room ID, and the entry key of the requesting terminal device 10. Transmission is made to the requested terminal device 10 by the push technique. The room, room ID, and entry key will be described later.

中継サーバ50は、複数の端末装置10の間の情報共有通信において、3台以上の端末装置10による情報共有通信を行う場合や、2つの端末装置10においてピア・トゥー・ピア接続ができない場合に、複数の端末装置10の間の情報共有通信を中継する中継サーバである。ピア・トゥー・ピア接続は、P2P接続とも称する。複数の端末装置10の間の情報共有通信のP2P接続が行われており、そのP2P接続に参加していない端末装置10を新たに情報共有通信に加える場合に、中継サーバ50を介したセションが構築される。複数の端末装置10の間の情報共有通信のP2Pセションが、所定の時間を超えても確立できない場合に、中継サーバ50を介したセションが構築される。   In the information sharing communication between the plurality of terminal devices 10, the relay server 50 performs information sharing communication by three or more terminal devices 10 or when the two terminal devices 10 cannot perform peer-to-peer connection. A relay server that relays information sharing communication among a plurality of terminal devices 10. A peer-to-peer connection is also referred to as a P2P connection. When a P2P connection for information sharing communication is performed between a plurality of terminal devices 10 and a terminal device 10 not participating in the P2P connection is newly added to the information sharing communication, a session via the relay server 50 is performed. Built. When a P2P session of information sharing communication between a plurality of terminal devices 10 cannot be established even after a predetermined time, a session via the relay server 50 is established.

中継サーバ50は、端末装置10からの要求に応じてルームを作成し、同一のルームに入室した複数の端末装置10の間の情報共有通信を中継する。このルームとは、中継サーバ50が提供する、複数の端末装置10が情報共有を行うための仮想的な空間である。このルームは、付される番号によって、例えば、ルーム1、ルーム2…のようにして区別される。このルームに付される番号を、ルームIDとも称する。端末装置10は、このルームのうち、いずれかのルームに接続する。同一のルームIDのルームに接続されている端末装置10は、互いに情報を共有することができる。例えば、ルーム1に、2台の端末装置10A、10Bがそれぞれ接続している場合には、これら2台の端末装置10A、10Bにおいて、互いに情報を共有することができる。また、例えば、ルーム1に3台の端末装置10A〜10Cがそれぞれ接続している場合には、これら3台の端末装置10A〜10Cにおいて、互いに情報を共有することができる。   The relay server 50 creates a room in response to a request from the terminal device 10 and relays information sharing communication between a plurality of terminal devices 10 that have entered the same room. This room is a virtual space provided by the relay server 50 so that a plurality of terminal devices 10 can share information. This room is distinguished by, for example, room 1, room 2,. The number assigned to this room is also referred to as a room ID. The terminal device 10 is connected to one of the rooms. Terminal devices 10 connected to rooms with the same room ID can share information with each other. For example, when two terminal devices 10A and 10B are connected to the room 1, the two terminal devices 10A and 10B can share information with each other. Further, for example, when three terminal devices 10A to 10C are connected to the room 1, the three terminal devices 10A to 10C can share information with each other.

中継サーバ50は、ルームIDと入室キーとを関連付けて記憶している。ルームIDとは、ルームを識別する識別情報である。入室キーとは、シグナリングサーバ20を介して端末装置10から受け付けた、ルームの作成要求に応じて発行され、ルームへの入室時に照会される情報である。中継サーバ50は、端末装置10からルームへの入室要求を受け付けた場合に、入室要求の要求元の端末装置10が送信したルームIDと入室キーとの組み合わせが自装置に記憶されているルームIDと入室キーとの組み合わせと一致するか否かを判定する。ルームIDと入室キーとの組み合わせが一致する場合、中継サーバ50は、端末装置10をルームに入室させる。   The relay server 50 stores the room ID and the entry key in association with each other. The room ID is identification information for identifying a room. The room entry key is information issued in response to a room creation request received from the terminal device 10 via the signaling server 20 and inquired when entering the room. When the relay server 50 receives a room entry request from the terminal device 10, the room ID in which the combination of the room ID and the room entry key transmitted by the terminal device 10 that has requested the room entry request is stored in the own device. It is determined whether or not the combination with the entry key matches. If the combination of the room ID and the entry key matches, the relay server 50 causes the terminal device 10 to enter the room.

[端末間通信システムの動作手順]
次に、図6〜図9を参照して、端末間通信システム1の動作手順について説明する。初めに、図6を参照して、端末装置10のレジストレーション(初期設定)の動作手順について説明する。次に、図7〜図9を参照して、端末間通信システム1によるセション構築の動作手順について説明する。本実施形態に係る端末間通信システム1において、端末装置10は、中継モードとP2Pモードとの2つの通信モードで互いに通信可能である。ここで、中継モードとは、中継サーバ50を介した通信モードである。また、P2Pモードとは、中継サーバ50を介さずに、端末装置10同士が直接通信する通信モードであり、P2P接続により通信を行うモードである。以下では、まず、P2Pモードによるセションの構築について説明する。その後、中継モードによるセションの構築について説明する。なお、図4に示すステップSの番号は、図6及び図7のステップSの番号に対応する。
[Operation procedure of inter-terminal communication system]
Next, the operation procedure of the inter-terminal communication system 1 will be described with reference to FIGS. First, an operation procedure of registration (initial setting) of the terminal device 10 will be described with reference to FIG. Next, with reference to FIGS. 7-9, the operation | movement procedure of the session construction by the communication system 1 between terminals is demonstrated. In the inter-terminal communication system 1 according to the present embodiment, the terminal devices 10 can communicate with each other in two communication modes, that is, a relay mode and a P2P mode. Here, the relay mode is a communication mode via the relay server 50. The P2P mode is a communication mode in which the terminal devices 10 communicate directly with each other without using the relay server 50, and is a mode in which communication is performed by P2P connection. In the following, first, the construction of a session in the P2P mode will be described. Then, the construction of a session in the relay mode will be described. Note that the numbers in step S shown in FIG. 4 correspond to the numbers in step S in FIGS. 6 and 7.

[端末間通信システムの動作手順1:初期設定]
図6を参照して、端末装置10のレジストレーション(初期設定)の動作手順について説明する。ここでは、端末装置10A、及び端末装置1010Bが順にレジストレーションを行う場合について説明する。
[Operation procedure of inter-terminal communication system 1: initial setting]
With reference to FIG. 6, an operation procedure of registration (initial setting) of the terminal device 10 will be described. Here, a case where the terminal device 10A and the terminal device 1010B perform registration in order will be described.

図6は、本実施形態のレジストレーションの動作手順の一例を示す流れ図である。
端末装置10Aは、情報共有機能対応のアプリケーションが端末装置10Aにおいて起動された場合に、プッシュサーバ40に対して、起動されたアプリケーションに対応するプッシュIDの発行の要求を送信する(ステップS10)。
プッシュサーバ40は、プッシュIDの発行の要求を受信すると、起動されたアプリケーションに対応するプッシュIDを、端末装置10Aに送信する(ステップS20)。端末装置10Aは、プッシュサーバ40からプッシュIDを取得する(ステップS30)。
FIG. 6 is a flowchart illustrating an example of an operation procedure of registration according to the present embodiment.
When the application corresponding to the information sharing function is activated in the terminal device 10A, the terminal device 10A transmits a push ID issuance request corresponding to the activated application to the push server 40 (step S10).
Upon receiving the push ID issuance request, the push server 40 transmits a push ID corresponding to the activated application to the terminal device 10A (step S20). The terminal device 10A acquires the push ID from the push server 40 (step S30).

次に、端末装置10は、レジストレーション情報を、シグナリングサーバ20に対して送信する(ステップS40)。ここで、レジストレーション情報には、ステップS10において取得したプッシュIDと、このプッシュIDに対応するアプリケーションのアプリケーションバージョン情報と、自装置の電話番号と、自装置の端末モデル名称とが含まれる。   Next, the terminal device 10 transmits registration information to the signaling server 20 (step S40). Here, the registration information includes the push ID acquired in step S10, the application version information of the application corresponding to the push ID, the phone number of the own device, and the terminal model name of the own device.

シグナリングサーバ20は、ステップS40において送信されたレジストレーション情報を記憶して(ステップS50)、端末装置10Aについての、レジストレーションの処理を終了する。   The signaling server 20 stores the registration information transmitted in step S40 (step S50), and ends the registration process for the terminal device 10A.

次に、シグナリングサーバ20は、認証サーバ30に対して、電話番号を送信する(ステップS60)。この電話番号とは、ステップS40において送信されたレジストレーション情報に含まれる電話番号である。   Next, the signaling server 20 transmits a telephone number to the authentication server 30 (step S60). This telephone number is a telephone number included in the registration information transmitted in step S40.

認証サーバ30は、ステップS60において送信された電話番号を受信し、この電話番号が予め登録されている電話番号であるか否かを判定して、この判定結果をシグナリングサーバ20に送信する(ステップS70)。ここで、認証サーバ30に予め登録されている電話番号とは、端末装置10が正規の端末装置10であることを示す情報である。すなわち、認証サーバ30は、端末装置10から送信されたレジストレーション情報に含まれる電話番号が、正規の端末装置10の電話番号であるか否かを判定する。また、ここでいう正規の端末装置10とは、予め登録された正規の利用者に利用されている端末装置10である。すなわち、シグナリングサーバ20は、レジストレーション情報を送信した端末装置10が、予め登録された正規の利用者本人が利用する端末装置10であるか否かを判定する。つまり、シグナリングサーバ20は、ステップS60及びステップS70において、端末装置10の利用者の本人認証を行う。   The authentication server 30 receives the telephone number transmitted in step S60, determines whether this telephone number is a telephone number registered in advance, and transmits this determination result to the signaling server 20 (step). S70). Here, the telephone number registered in advance in the authentication server 30 is information indicating that the terminal device 10 is a legitimate terminal device 10. That is, the authentication server 30 determines whether or not the telephone number included in the registration information transmitted from the terminal device 10 is the regular telephone number of the terminal device 10. Moreover, the regular terminal device 10 here is the terminal device 10 used by a regular user registered in advance. That is, the signaling server 20 determines whether or not the terminal device 10 that has transmitted the registration information is a terminal device 10 that is used by a registered regular user. That is, the signaling server 20 authenticates the user of the terminal device 10 in step S60 and step S70.

また、端末装置10Bは、図6に示すステップS10−2からステップS70−2によって、レジストレーションを行う。ここで、ステップS10−2からステップS70−2は、上述したステップS10からステップS70に対応する。このステップS10−2からステップS70−2についての説明は省略する。   Further, the terminal device 10B performs registration through steps S10-2 to S70-2 shown in FIG. Here, Steps S10-2 to S70-2 correspond to Steps S10 to S70 described above. A description of steps S10-2 to S70-2 will be omitted.

[端末間通信システムの動作2:セション構築(P2Pモード)]
次に、図7〜図9を参照して、端末装置10のセション構築の動作手順について説明する。
[Operation of inter-terminal communication system 2: session construction (P2P mode)]
Next, with reference to FIG. 7 to FIG. 9, an operation procedure for session construction of the terminal device 10 will be described.

図7は、本実施形態のP2Pモードによるセション構築の動作手順の一例を示す流れ図である。ここでは、端末装置10Aと端末装置10Bとの間にセションを構築する場合について説明する。また、ここでは、端末間通信システム1は、情報共有機能の利用可否の判定処理と、P2Pモードによるセション構築処理との2つの処理について説明する。情報共有機能の利用可否の判定処理は、ステップS100〜S130の処理により実行される。また、P2Pモードによるセション構築処理は、ステップS140〜S200の処理により実行される。また、ここでは、端末装置10Aが情報共有の要求側であり、端末装置10Bが情報共有の被要求側である場合について説明する。   FIG. 7 is a flowchart illustrating an example of an operation procedure for session construction in the P2P mode according to the present embodiment. Here, a case where a session is constructed between the terminal device 10A and the terminal device 10B will be described. In addition, here, the inter-terminal communication system 1 will be described with respect to two processes: a process for determining whether the information sharing function can be used, and a session construction process in the P2P mode. The process of determining whether or not the information sharing function can be used is executed by the processes of steps S100 to S130. Moreover, the session construction process by P2P mode is performed by the process of step S140-S200. Here, a case will be described in which the terminal device 10A is the information sharing requesting side and the terminal device 10B is the information sharing requested side.

要求側の端末装置10Aは、情報共有の要求をシグナリングサーバ20に対して送信する(ステップS100)。
シグナリングサーバ20は、端末装置10から情報共有の要求を受け付ける(ステップS110)。この情報共有の要求には、被要求側の端末装置10の電話番号が含まれている。
The requesting terminal device 10A transmits an information sharing request to the signaling server 20 (step S100).
The signaling server 20 receives an information sharing request from the terminal device 10 (step S110). This request for information sharing includes the telephone number of the requested terminal device 10.

次に、シグナリングサーバ20は、ステップS110において受け付けた電話番号と、予め記憶しているレジストレーション情報とを比較して、受信した電話番号が利用可能であるか否かを判定する(ステップS120)。
なお、シグナリングサーバ20は、電話番号の判定に代えて、又は電話番号の判定に加えて、プッシュIDの判定を行うこともできる。具体的には、シグナリングサーバ20は、ステップS110において受け付けた電話番号に対応するレジストレーション情報に、プッシュIDが登録されているか否かを判定する。
Next, the signaling server 20 compares the telephone number received in step S110 with the registration information stored in advance, and determines whether or not the received telephone number is available (step S120). .
The signaling server 20 can also determine the push ID instead of or in addition to the determination of the telephone number. Specifically, the signaling server 20 determines whether or not the push ID is registered in the registration information corresponding to the telephone number received in step S110.

次に、シグナリングサーバ20は、ステップS110において受信した電話番号が利用可能であると判定した場合(ステップS120;YES)には、要求側の端末装置10に対して、情報共有機能が利用可能である旨を通知する(ステップS130)。一方、シグナリングサーバ20は、ステップS110において受信した電話番号が利用可能でないと判定した場合(ステップS120;NO)には、要求側の端末装置10に対して、情報共有機能が利用不可能である旨を通知して、処理を終了する。   Next, when the signaling server 20 determines that the telephone number received in step S110 is available (step S120; YES), the information sharing function can be used for the requesting terminal device 10. A notification is made (step S130). On the other hand, if the signaling server 20 determines that the telephone number received in step S110 is not usable (step S120; NO), the information sharing function cannot be used for the requesting terminal device 10. This is notified and the process is terminated.

なお、上述において、シグナリングサーバ20は、シグナリングサーバ20に対して情報共有の要求があった後にセションを構築する過程において、要求側の端末装置10に対して情報共有機能が利用可能である旨を通知するとして説明したが、これに限られない。一例として、シグナリングサーバ20は、情報共有の要求がなされる前において、要求側の端末装置10に対して情報共有機能が利用可能である旨を通知してもよい。この場合、シグナリングサーバ20は、端末装置10間の音声通話開始時、又は音声通話中に、音声通話のバックグラウンド処理によって、情報共有の要求がなされる前において、要求側の端末装置10に対して情報共有機能が利用可能である旨を通知する。   In the above description, the signaling server 20 indicates that the information sharing function can be used for the requesting terminal device 10 in the process of establishing a session after the signaling server 20 requests information sharing. Although described as notification, it is not limited to this. As an example, the signaling server 20 may notify the requesting terminal device 10 that the information sharing function is available before the information sharing request is made. In this case, the signaling server 20 sends a request to the requesting terminal device 10 before the information sharing request is made by the background processing of the voice call at the start of the voice call between the terminal devices 10 or during the voice call. That the information sharing function is available.

また、他の変形例として、シグナリングサーバ20は、電話番号の判定に代えて、又は電話番号の判定に加えて、次に例示する条件によって情報共有機能が利用可能である旨を通知してもよい。一例として、シグナリングサーバ20は、要求側の端末装置10と、被要求側の端末装置10とのいずれにも、情報共有アプリケーションがインストールされている場合に、情報共有機能が利用可能である旨を通知する。また、一例として、シグナリングサーバ20は、要求側の端末装置10にインストールされている情報共有アプリケーションのアプリケーションバージョンと、被要求側の端末装置10にインストールされている情報共有アプリケーションのアプリケーションバージョンとが同一である場合に、情報共有機能が利用可能である旨を通知する。また、一例として、シグナリングサーバ20は、要求側の端末装置10にインストールされている情報共有アプリケーションと、被要求側の端末装置10にインストールされている情報共有アプリケーションとが互換性を有する場合に、情報共有機能が利用可能である旨を通知する。   As another modification, the signaling server 20 may notify that the information sharing function can be used according to the conditions exemplified below instead of or in addition to the determination of the telephone number. Good. As an example, the signaling server 20 indicates that the information sharing function can be used when the information sharing application is installed in both the requesting terminal device 10 and the requested terminal device 10. Notice. As an example, in the signaling server 20, the application version of the information sharing application installed in the requesting terminal device 10 and the application version of the information sharing application installed in the requested terminal device 10 are the same. If it is, it is notified that the information sharing function is available. Further, as an example, the signaling server 20 is compatible with the information sharing application installed in the requesting terminal device 10 and the information sharing application installed in the requested terminal device 10. Notify that the information sharing function is available.

また、他の一例として、シグナリングサーバ20は、要求側の端末装置10と、被要求側の端末装置10とが、いずれも高速データ通信回線(例えば、VoLTE)による通信に対応する端末装置である場合に、情報共有機能が利用可能である旨を通知する。   As another example, the signaling server 20 is a terminal device in which both the requesting terminal device 10 and the requested terminal device 10 support communication via a high-speed data communication line (for example, VoLTE). In such a case, a notification that the information sharing function is available is sent.

次に、要求側の端末装置10は、情報共有機能が利用可能である旨の通知を受信すると、シグナリングサーバ20にセション構築の要求を送信する(ステップS140)。このセション構築の要求には、送信要求側の端末装置10の電話番号及びIPアドレスと、被要求側の端末装置10の電話番号とが含まれる。
なお、上述したステップS100と、ステップS140との処理タイミングの前後関係は問わない。例えば、ステップS100が先で、ステップS140が後でもよく、これらステップS100と、ステップS140とが同時に行われてもよい。
Next, when receiving the notification that the information sharing function is available, the requesting terminal device 10 transmits a session construction request to the signaling server 20 (step S140). This request for session construction includes the telephone number and IP address of the terminal device 10 on the transmission request side and the telephone number of the terminal device 10 on the request side.
Note that there is no limitation on the order of processing timing between step S100 and step S140 described above. For example, step S100 may be performed first, step S140 may be performed later, and step S100 and step S140 may be performed simultaneously.

次に、シグナリングサーバ20は、ステップS140において送信されたセション構築の要求を受信すると、プッシュサーバ40に対して、セション構築情報を送信する(ステップS150)。このセション構築情報には、要求側の端末装置10の電話番号と、プッシュIDとが含まれている。このとき、シグナリングサーバ20は、被要求側の端末装置10の電話番号を検索キーにしてレジストレーション情報を検索することにより、プッシュIDを取得する。このプッシュIDは、被要求側の端末装置10において動作する情報共有アプリケーションに対応している。   Next, when the signaling server 20 receives the session construction request transmitted in step S140, the signaling server 20 transmits the session construction information to the push server 40 (step S150). This session construction information includes the telephone number of the requesting terminal device 10 and the push ID. At this time, the signaling server 20 acquires the push ID by searching the registration information using the telephone number of the requested terminal device 10 as a search key. This push ID corresponds to an information sharing application that operates in the requested terminal device 10.

プッシュサーバ40は、ステップS150において送信されたセション構築情報を受信すると、このセション構築情報に含まれるプッシュIDに基づいて、被要求側の端末装置10に対して、情報共有アプリケーションの起動要求をプッシュする(ステップS160)。このときプッシュサーバ40がプッシュする情報には、要求側の端末装置10の電話番号が含まれている。   Upon receiving the session construction information transmitted in step S150, the push server 40 pushes an information sharing application activation request to the requested terminal device 10 based on the push ID included in the session construction information. (Step S160). The information pushed by the push server 40 at this time includes the telephone number of the requesting terminal device 10.

被要求側の端末装置10は、ステップS160のプッシュが行われると、受信した要求側の端末装置10の電話番号が、現在通話中の相手の電話番号と一致するか否かを判定する(ステップS170)。被要求側の端末装置10は、受信した要求側の端末装置10の電話番号が、現在通話中の相手の電話番号と一致すると判定した場合(ステップS170;YES)には、処理をステップS180に進める。一方、被要求側の端末装置10は、受信した要求側の端末装置10の電話番号が、現在通話中の相手の電話番号と一致しないと判定した場合(ステップS170;NO)には、情報共有の承認をしない旨を、シグナリングサーバ20を介して要求側の端末装置10に送信して、処理を終了する。   When the requested terminal device 10 is pushed in step S160, it determines whether the received telephone number of the requesting terminal device 10 matches the telephone number of the other party who is currently talking (step S160). S170). If the requested terminal device 10 determines that the received telephone number of the requesting terminal device 10 matches the telephone number of the other party who is currently talking (step S170; YES), the process proceeds to step S180. Proceed. On the other hand, if the requested terminal device 10 determines that the received telephone number of the requesting terminal device 10 does not match the telephone number of the other party who is currently calling (step S170; NO), information sharing is performed. Is transmitted to the requesting terminal device 10 via the signaling server 20 and the processing is terminated.

ステップS180において、被要求側の端末装置10は、情報共有の承認画像を表示し、ユーザの承認操作を待つ。被要求側の端末装置10は、ユーザが承認する操作を行った場合(ステップS180;YES)には、シグナリングサーバ20に対してセション構築承認情報を送信する(ステップS190)。このセション構築承認情報には、被要求側の端末装置10の電話番号、IPアドレス及びポート番号が含まれている。一方、被要求側の端末装置10は、ユーザが承認しない操作を行った場合(ステップS180;NO)には、情報共有の承認をしない旨を、シグナリングサーバ20を介して要求側の端末装置10に送信して、処理を終了する。   In step S180, the requested terminal device 10 displays an information sharing approval image and waits for the user's approval operation. The requested terminal device 10 transmits the session construction approval information to the signaling server 20 when the user performs an operation to approve (step S180; YES) (step S190). The session construction approval information includes the telephone number, IP address, and port number of the requested terminal device 10. On the other hand, if the requested terminal device 10 performs an operation not approved by the user (step S180; NO), the requesting terminal device 10 notifies the requesting terminal device 10 via the signaling server 20 that the information sharing is not approved. To finish the process.

次に、シグナリングサーバ20は、ステップS190において送信されたセション構築承認情報を受信すると、要求側の端末装置10と、被要求側の端末装置10との間においてセションを構築して(ステップS200)、セション構築の処理を終了する。具体的には、ステップS200において、シグナリングサーバ20は、ステップS190において送信された被要求側の端末装置10のIPアドレス及びポート番号を、要求側の端末装置10に送信する。次に、要求側の端末装置10は、要求側の端末装置10のIPアドレス及びポート番号を、シグナリングサーバ20に送信する。シグナリングサーバ20は、要求側の端末装置10のIPアドレス及びポート番号を受信すると、受信したIPアドレス及びポート番号を被要求側の端末装置10に送信する。これにより、要求側の端末装置10は、被要求側の端末装置10のIPアドレス及びポート番号を取得する。また、被要求側の端末装置10は、要求側の端末装置10のIPアドレス及びポート番号を取得する。すなわち、複数の端末装置10は、互いに、情報共有相手の端末装置10のIPアドレス及びポート番号を取得する。   Next, upon receiving the session construction approval information transmitted in step S190, the signaling server 20 constructs a session between the requesting terminal device 10 and the requested terminal device 10 (step S200). The session construction process is terminated. Specifically, in step S200, the signaling server 20 transmits the IP address and port number of the requested terminal device 10 transmitted in step S190 to the requesting terminal device 10. Next, the requesting terminal device 10 transmits the IP address and port number of the requesting terminal device 10 to the signaling server 20. When the signaling server 20 receives the IP address and port number of the requesting terminal device 10, the signaling server 20 transmits the received IP address and port number to the requesting terminal device 10. As a result, the requesting terminal device 10 acquires the IP address and port number of the requested terminal device 10. Further, the requested terminal device 10 acquires the IP address and port number of the requesting terminal device 10. That is, the plurality of terminal devices 10 acquire the IP address and port number of the information sharing partner terminal device 10 from each other.

セション構築の処理が終了すると、端末装置10A及び端末装置10Bは、相互に情報共有を行う(ステップS210)。   When the session construction process ends, the terminal device 10A and the terminal device 10B share information with each other (step S210).

[端末間通信システムの動作2:セション構築(中継モード)]
次に、中継モードによるセション構築の動作の手順について説明する。
図8及び図9は、本実施形態の中継モードにおけるセション構築の動作手順の一例を示す流れ図である。ここでは、2台の端末装置10間におけるセション構築について説明するが、中継モードでは3台以上の端末装置10間におけるセション構築も可能である。また、ここでは、ルームの作成処理と、ルームへの入室処理について説明する。ルームの作成処理は、ステップS300〜S370の処理により実行される。また、ルームの作成要求を行った端末装置10のルームへの入室処理は、ステップS380〜S400の処理により実行される。また、ルームへの入室の招待を受けた端末装置10のルームへの入室処理は、ステップS410〜S520の処理により実行される。なお、以下では、図6を参照して説明した情報共有機能の利用可否の判定処理についての説明は省略する。この情報共有機能の利用可否の判定処理は、例えば、ステップS300の前に実行される。
[Operation of communication system between terminals 2: session construction (relay mode)]
Next, the procedure of session construction operation in the relay mode will be described.
8 and 9 are flowcharts showing an example of an operation procedure for session construction in the relay mode of this embodiment. Here, session construction between two terminal devices 10 will be described, but session construction between three or more terminal devices 10 is also possible in the relay mode. Here, a room creation process and a room entry process will be described. The room creation process is executed by the processes of steps S300 to S370. Further, the room entry process of the terminal apparatus 10 that has requested the room creation is executed by the processes of steps S380 to S400. In addition, the room entry process of the terminal device 10 that has received the invitation to enter the room is executed by the processes of steps S410 to S520. In the following, the description of the process for determining whether to use the information sharing function described with reference to FIG. 6 is omitted. This determination process for determining whether or not the information sharing function can be used is executed, for example, before step S300.

まず、要求側の端末装置10は、ルーム作成要求をシグナリングサーバ20に対して送信する(ステップS300)。このルーム作成要求とは、中継サーバ50に対して、ルームの作成を要求する情報である。また、このルーム作成要求には、要求側の端末装置10の電話番号が含まれている。すなわち、要求側の端末装置10は、要求側の端末装置10の電話番号が含まれるルーム作成要求を、シグナリングサーバ20に対して送信する。   First, the requesting terminal device 10 transmits a room creation request to the signaling server 20 (step S300). This room creation request is information requesting the relay server 50 to create a room. Further, the room creation request includes the telephone number of the requesting terminal device 10. That is, the requesting terminal device 10 transmits a room creation request including the telephone number of the requesting terminal device 10 to the signaling server 20.

シグナリングサーバ20は、要求側の端末装置10の電話番号を受信すると、中継サーバ50に対して、中継サーバ50の空き容量を確認する要求を出力する(ステップS310)。中継サーバ50は、中継サーバ50の空き容量を確認する要求を受信すると、新たなルームを作成可能か否かを判定し(ステップS320)、この判定結果をシグナリングサーバ20に送信する(ステップS330)。   When the signaling server 20 receives the telephone number of the requesting terminal device 10, the signaling server 20 outputs a request for confirming the free capacity of the relay server 50 to the relay server 50 (step S310). When the relay server 50 receives the request for checking the free capacity of the relay server 50, the relay server 50 determines whether or not a new room can be created (step S320), and transmits the determination result to the signaling server 20 (step S330). .

シグナリングサーバ20は、受信した判定結果が新たなルームを作成可能であることを示す場合(ステップS320;YES)には、中継サーバ50に対して、ルーム作成要求を送信する(ステップS340)。このルーム作成要求には、上述の通り、要求側の端末装置10の電話番号が含まれている。   If the received determination result indicates that a new room can be created (step S320; YES), the signaling server 20 transmits a room creation request to the relay server 50 (step S340). As described above, this room creation request includes the telephone number of the requesting terminal device 10.

中継サーバ50は、ルーム作成要求を受信すると、新たなルームIDを発行して、このルームIDを付したルームを作成する(ステップS350)。また、中継サーバ50は、作成したルームに入室するための入室キーを発行する。中継サーバ50は、ルーム作成要求に対するレスポンスをシグナリングサーバ20に対して送信する(ステップS360)。ルーム作成要求に対するレスポンスには、中継サーバ50が発行したルームIDと、入室キーとが含まれる。シグナリングサーバ20は、ルーム作成要求に対するレスポンスを受信すると、このレスポンスに含まれるルームIDと、入室キーとを含む情報を、ルーム作成要求に対するレスポンスとして、要求側の端末装置10に送信する(ステップS370)。   When receiving the room creation request, the relay server 50 issues a new room ID and creates a room with the room ID (step S350). Further, the relay server 50 issues an entry key for entering the created room. The relay server 50 transmits a response to the room creation request to the signaling server 20 (step S360). The response to the room creation request includes the room ID issued by the relay server 50 and the entry key. When the signaling server 20 receives the response to the room creation request, the signaling server 20 transmits information including the room ID and the entry key included in the response to the requesting terminal device 10 as a response to the room creation request (step S370). ).

要求側の端末装置10は、シグナリングサーバ20から、ルーム作成要求に対するレスポンスを受信する。上述の通り、このルーム作成要求に対するレスポンスには、中継サーバ50が発行したルームIDと、入室キーとが含まれる。
要求側の端末装置10は、中継サーバ50に対して、ルームへの入室要求を送信する(ステップS380)。このルームへの入室要求には、シグナリングサーバ20から受信したルームIDと、入室キーとが含まれる。すなわち、要求側の端末装置10は、中継サーバ50が発行したルームIDと、入室キーとを含む情報を、ルームへの入室要求として、中継サーバ50に対して送信する。中継サーバ50は、ルームへの入室要求を受信すると、このルームへの入室要求に含まれるルームIDと、入室キーとを照合する(ステップS390)。この照合の結果、ルームIDと、入室キーとの組み合わせが正しい場合(ステップS390;YES)には、中継サーバ50は、要求側の端末装置10をルームに入室させ、ルームに入室したことを通知する(ステップS400)。
The requesting terminal device 10 receives a response to the room creation request from the signaling server 20. As described above, the response to the room creation request includes the room ID issued by the relay server 50 and the room entry key.
The requesting terminal device 10 transmits a room entry request to the relay server 50 (step S380). The room entry request includes the room ID received from the signaling server 20 and the room entry key. That is, the request-side terminal device 10 transmits information including the room ID issued by the relay server 50 and the room entry key to the relay server 50 as a room entry request. When the relay server 50 receives the room entry request, the relay server 50 collates the room ID included in the room entry request with the room entry key (step S390). If the combination of the room ID and the room entry key is correct as a result of this collation (step S390; YES), the relay server 50 causes the requesting terminal device 10 to enter the room and notifies that the room has been entered. (Step S400).

また、要求側の端末装置10は、被要求側の端末装置10に対して、ルームへの入室の招待を行う。具体的には、要求側の端末装置10は、シグナリングサーバ20に対して、ルームへの入室の招待の要求を送信する(ステップS410)。このルームへの入室の招待の要求には、要求側の端末装置10の識別情報と、被要求側の端末装置10の識別情報と、ルームIDと、入室キーとが含まれる。ここで、端末装置10の識別情報とは、端末装置10の電話番号、IPアドレスなど、端末装置10を識別するための情報である。
シグナリングサーバ20は、ルームへの入室の招待の要求を要求側の端末装置10から受信すると、プッシュサーバ40に対して、プッシュ要求を送信する(ステップS420)。このプッシュ要求には、要求側の端末装置10の識別情報と、被要求側の端末装置10の識別情報と、ルームIDと、入室キーとが含まれる。
The requesting terminal device 10 invites the requested terminal device 10 to enter the room. Specifically, the requesting terminal device 10 transmits a request for invitation to enter the room to the signaling server 20 (step S410). The request to enter the room includes identification information of the requesting terminal device 10, identification information of the requested terminal device 10, a room ID, and an entry key. Here, the identification information of the terminal device 10 is information for identifying the terminal device 10 such as a telephone number or an IP address of the terminal device 10.
When the signaling server 20 receives a request to enter the room from the requesting terminal device 10, the signaling server 20 transmits a push request to the push server 40 (step S420). This push request includes identification information of the requesting terminal device 10, identification information of the requested terminal device 10, a room ID, and an entry key.

プッシュサーバ40は、プッシュ要求をシグナリングサーバ20から受信すると、被要求側の端末装置10に対して、ルームへの入室の招待情報を送信する(ステップS430)。このルームへの入室の招待情報には、要求側の端末装置10の識別情報と、被要求側の端末装置10の識別情報と、ルームIDと、入室キーとが含まれる。また、プッシュサーバ40は、ルームへの入室の招待情報を送信すると、ルームへの入室の招待情報を送信したことを示すレスポンスを、シグナリングサーバ20に送信する(ステップS440)。シグナリングサーバ20は、ルームへの入室の招待情報を送信したことを示すレスポンスを受信すると、要求側の端末装置10に対して、ルームへの入室の招待の要求に対するレスポンスを送信する(ステップS450)。   Upon receiving the push request from the signaling server 20, the push server 40 transmits invitation information for entering the room to the requested terminal device 10 (step S430). The invitation information for entering the room includes identification information of the requesting terminal device 10, identification information of the requested terminal device 10, a room ID, and an entry key. Further, when the push server 40 transmits the invitation information for entering the room, the push server 40 transmits a response indicating that the invitation information for entering the room has been transmitted to the signaling server 20 (step S440). When the signaling server 20 receives a response indicating that the invitation information for entering the room has been transmitted, the signaling server 20 transmits a response to the request for invitation to enter the room to the requesting terminal device 10 (step S450). .

一方、被要求側の端末装置10は、プッシュサーバ40からルームへの入室の招待情報を受信すると、ルームへの入室の招待情報を受信したことを、被要求側の端末装置10の利用者に通知して、ルームへの入室の操作を待つ(ステップS460)。被要求側の端末装置10の利用者が、ルームへの入室の操作を行うと、被要求側の端末装置10は、この操作を受け付け、要求側の端末装置10に対して、ルームへの入室の要求を送信する(ステップS470)。要求側の端末装置10は、被要求側の端末装置10からルームへの入室の要求を受信すると、ルームへの入室の要求に対するレスポンスの入力操作を待つ(ステップS480)。要求側の端末装置10は、被要求側の端末装置10のルームへの入室について承認をユーザから受け付けると、ルームへの入室の承認を表す承認情報を被要求側の端末装置10に送信する(ステップS490)。このルームへの入室の要求に対するレスポンスには、通信モードが中継モードであることを示す情報が含まれている。   On the other hand, when the requested terminal device 10 receives the invitation information for entering the room from the push server 40, the requested terminal device 10 informs the user of the requested terminal device 10 that the invitation information for entering the room has been received. Notification is made and the operation for entering the room is awaited (step S460). When the user of the requested terminal device 10 performs an operation to enter the room, the requested terminal device 10 accepts this operation, and the requesting terminal device 10 enters the room. Is transmitted (step S470). Upon receiving the request for entering the room from the requested terminal device 10, the requesting terminal device 10 waits for an input operation of a response to the request for entering the room (step S480). When the requesting terminal device 10 receives approval from the user for entry into the room of the requested terminal device 10, the requesting terminal device 10 transmits approval information indicating approval of entry into the room to the requested terminal device 10 ( Step S490). The response to the request to enter the room includes information indicating that the communication mode is the relay mode.

なお、この一例では、被要求側の端末装置10は、利用者によるルームへの入室の操作を受け付けた場合に、要求側の端末装置10に対して、ルームへの入室の要求を送信するとして説明したが、これに限られない。被要求側の端末装置10は、利用者による操作を要することなく、要求側の端末装置10に対して、ルームへの入室の要求を送信してもよい。この場合、例えば、被要求側の端末装置10は、アドレス帳アプリケーションに登録されている通信相手ごとに、ルームへの入室の要求を送信する場合に利用者の確認が必要か否かの設定を記憶することができる。そして、要求側の端末装置10が、この利用者の確認が不要と設定されている端末装置10である場合には、被要求側の端末装置10は、利用者による操作を要求することなく、要求側の端末装置10に対して、ルームへの入室の要求を送信する。また、例えば、被要求側の端末装置10は、音声通信を行っている間に、ルームへの入室の招待情報を受信した場合には、デフォルトで利用者による操作を要求することなく、要求側の端末装置10に対して、ルームへの入室の要求を送信してもよい。これにより、被要求側の端末装置10は、セションの再構築(再接続)において、利用者による操作を要することなく、自動的に要求側の端末装置10に対して、ルームへの入室の要求を送信することができる。   In this example, when the requested terminal device 10 receives an operation of entering the room by the user, the requested terminal device 10 transmits a request to enter the room to the requesting terminal device 10. Although explained, it is not limited to this. The requested terminal device 10 may transmit a request to enter the room to the requesting terminal device 10 without requiring an operation by the user. In this case, for example, the requested terminal device 10 sets whether or not a user confirmation is required when transmitting a request to enter a room for each communication partner registered in the address book application. Can be remembered. When the requesting terminal device 10 is a terminal device 10 that is set to require no user confirmation, the requested terminal device 10 does not request an operation by the user, A request to enter the room is transmitted to the requesting terminal device 10. Further, for example, if the requested terminal device 10 receives invitation information for entering a room during voice communication, the requesting terminal device 10 does not request an operation by the user by default. A request to enter the room may be transmitted to the terminal device 10. As a result, the requested terminal device 10 automatically requests the requesting terminal device 10 to enter the room without requiring an operation by the user in the reconstruction (reconnection) of the session. Can be sent.

被要求側の端末装置10は、要求側の端末装置10から、ルームへの入室の要求に対する承認情報を受信すると、中継サーバ50に対して、ルームへの入室要求を送信する(ステップS500)。このルームへの入室要求には、プッシュサーバ40から受信したルームIDと、入室キーとが含まれる。ここで、プッシュサーバ40から受信したルームIDは、要求側の端末装置10が既に入室しているルームのルームIDと一致する。また、プッシュサーバ40から受信した入室キーは、要求側の端末装置10が既に入室しているルームの入室キーと一致する。すなわち、被要求側の端末装置10は、要求側の端末装置10が既に入室しているルームへの入室要求を、中継サーバ50に対して送信する。中継サーバ50は、ルームへの入室要求を受信すると、このルームへの入室要求に含まれるルームIDと、入室キーとを照合する(ステップS510)。この照合の結果、ルームIDと、入室キーとの組み合わせが正しい場合(ステップS510;YES)には、中継サーバ50は、被要求側の端末装置10をルームに入室させる。そして、被要求側の端末装置10がルームに入室したことを同一のルームに接続している全端末装置10に通知する(ステップS520)。   Upon receiving the approval information for the request to enter the room from the requesting terminal device 10, the requested terminal device 10 transmits a room entry request to the relay server 50 (step S 500). The room entry request includes the room ID received from the push server 40 and the room entry key. Here, the room ID received from the push server 40 matches the room ID of the room in which the requesting terminal device 10 has already entered the room. The room entry key received from the push server 40 matches the room entry key of the room in which the requesting terminal device 10 has already entered the room. That is, the requested terminal device 10 transmits to the relay server 50 an entry request for a room in which the requesting terminal device 10 has already entered. When the relay server 50 receives the room entry request, the relay server 50 collates the room ID included in the room entry request with the room entry key (step S510). As a result of this collation, when the combination of the room ID and the room entry key is correct (step S510; YES), the relay server 50 causes the requested terminal device 10 to enter the room. Then, it notifies all terminal devices 10 connected to the same room that the requested terminal device 10 has entered the room (step S520).

この手順により、要求側の端末装置10と、被要求側の端末装置10とが、中継サーバ50が提供する同一のルームに入室する。これにより、要求側の端末装置10と、被要求側の端末装置10との間において、中継サーバ50を介した情報共有が可能になる。
なお、中継サーバ50は、ルームに接続している端末装置10に対して、同一のルームに接続している他の端末装置10を通知してもよい。この通知は、端末装置10からの要求に応じて行われてもよいし、端末装置10が新たにルームに入室した場合や端末装置10がルームから退室した場合など、ルームに接続する端末装置10が変化した場合に行われてもよい。
By this procedure, the requesting terminal device 10 and the requested terminal device 10 enter the same room provided by the relay server 50. Thereby, information sharing via the relay server 50 becomes possible between the requesting terminal device 10 and the requested terminal device 10.
In addition, the relay server 50 may notify the other terminal devices 10 connected to the same room to the terminal device 10 connected to the room. This notification may be performed in response to a request from the terminal device 10, or the terminal device 10 connected to the room, such as when the terminal device 10 newly enters the room or when the terminal device 10 leaves the room. This may be done when changes occur.

[変形例:端末間通信システムの動作(変形例1):通信回線の切り換え]
次に、中継サーバ50による通信回線の切り換えついて説明する。本実施形態の場合、複数の端末装置10の間の情報共有通信のうち、P2Pセションは、LTE回線を利用して構築される。また、本実施形態の場合、複数の端末装置10の間の情報共有通信のうち、中継サーバ50を介したセションは、無線LAN回線を利用して構築される。
[Modification: Operation of communication system between terminals (Modification 1): Switching of communication line]
Next, switching of communication lines by the relay server 50 will be described. In the case of the present embodiment, among the information sharing communication among the plurality of terminal devices 10, the P2P session is constructed using an LTE line. In the case of the present embodiment, of the information sharing communication among the plurality of terminal devices 10, a session via the relay server 50 is established using a wireless LAN line.

ここで、複数の端末装置10の間の音声通話がLTE回線を利用して行われ、情報共有通信がLTE回線を利用する状態と、無線LAN回線を利用する状態とが切り換えられて行われる場合がある。この場合には、回線の切り換えによって情報共有通信に用いられる端末装置10のIPアドレスが変化するため、端末間通信システム1は、セションの再確立を行う。このセションの再確立を行う間、送信側の端末装置10は、回線の切り換え前の通信状態を一時的に記憶しておき、セションの再確立後に、記憶しておいた通信状態に基づいて、情報共有を復帰させる。   Here, a voice call between a plurality of terminal devices 10 is performed using an LTE line, and information sharing communication is performed by switching between a state using an LTE line and a state using a wireless LAN line. There is. In this case, since the IP address of the terminal device 10 used for information sharing communication changes due to line switching, the inter-terminal communication system 1 reestablishes the session. While re-establishing this session, the terminal device 10 on the transmission side temporarily stores the communication state before switching the line, and after re-establishing the session, based on the stored communication state, Restore information sharing.

また、情報共有機能に対応している複数の端末装置10間においてLTE回線で通信している場合には、端末間通信システム1は、次のように制御することもできる。なお、ここでいう情報共有機能に対応している複数の端末装置10間においてLTE回線で通信している場合とは、複数の端末装置10において情報共有通信を行っている場合、又は、情報共有機能に対応しているアプリケーションを実装する複数の端末装置10の間において音声通話を行っている場合を含む。
この場合、複数の端末装置10間の通信回線が、LTE回線とLTE回線以外の通信回線とを選択可能な場合において、端末間通信システム1は、複数の端末装置10間の通信回線をLTE回線に固定し、LTE回線以外の通信回線に切り替えないように制御する。
In addition, when communication is performed using a LTE line between a plurality of terminal apparatuses 10 that support the information sharing function, the inter-terminal communication system 1 can be controlled as follows. In addition, the case where it communicates on the LTE line between the some terminal devices 10 corresponding to the information sharing function here is a case where information sharing communication is performed in the some terminal devices 10, or information sharing This includes the case where a voice call is made between a plurality of terminal devices 10 that implement an application corresponding to the function.
In this case, when the communication line between the plurality of terminal apparatuses 10 can select an LTE line and a communication line other than the LTE line, the inter-terminal communication system 1 uses the communication line between the plurality of terminal apparatuses 10 as an LTE line. And control not to switch to a communication line other than the LTE line.

また、複数の端末装置10の間の情報共有通信について、LTE回線を利用する状態と、無線LAN回線を利用する状態とを切り換える場合、または、一旦切断されたセションを再度確立させる場合がある。この場合には、端末間通信システム1は、被要求側の端末装置10(または、要求側の端末装置10)による承諾手順を省略してセションを確立させる。この場合、端末間通信システム1は、セションが切換又は切断されてから、セションが再確立するまでの時間に基づいて、承諾手順を省略するか否かを選択する。例えば、端末間通信システム1は、セションが切換又は切断されてから、セションが再確立するまでの時間が所定のタイムアウト時間以下であれば、承諾手順を省略する。また、端末間通信システム1は、セションが切換又は切断されてから、セションが再確立するまでの時間が所定のタイムアウト時間よりも長ければ、承諾手順を省略しない。つまり、端末間通信システム1は、一旦確立されたセションが切換又は切断された場合、セションが切換又は切断された状態が比較的短時間の場合には、承諾手順を省略する。これにより、端末間通信システム1は、セションが切換又は切断された場合のユーザの手間を軽減することができる。   In addition, for information sharing communication between a plurality of terminal apparatuses 10, there is a case where a state where an LTE line is used and a state where a wireless LAN line is used are switched, or a session once disconnected is reestablished. In this case, the inter-terminal communication system 1 establishes a session by omitting the consent procedure by the requested terminal device 10 (or the requesting terminal device 10). In this case, the inter-terminal communication system 1 selects whether to omit the acceptance procedure based on the time from when the session is switched or disconnected until the session is reestablished. For example, the inter-terminal communication system 1 omits the acceptance procedure if the time from when the session is switched or disconnected to when the session is reestablished is equal to or shorter than a predetermined timeout time. Further, the inter-terminal communication system 1 does not omit the acceptance procedure if the time from when the session is switched or disconnected to when the session is reestablished is longer than a predetermined timeout time. That is, the inter-terminal communication system 1 omits the acceptance procedure when the session once established is switched or disconnected, or when the session is switched or disconnected for a relatively short time. Thereby, the communication system 1 between terminals can reduce a user's effort when the session is switched or disconnected.

ここで、中継サーバ50による通信回線の切り換えの具体例について説明する。
中継サーバ50は、P2Pセションの確立が失敗した場合に、通信モードをP2Pモードから中継モードへと切り換える。
まず、端末装置10は、例えば、セション確立が失敗した場合、シグナリングサーバ20に対してエラー情報を送信する。このエラー情報とは、セションが所定時間内に確立しなかったことを示す情報である。すなわち、このエラー情報とは、端末装置10間で情報共有のための通信ができないことを示す情報である。ここで、所定時間とは、セション確立のための接続要求を要求側の端末装置10から被要求側の端末装置10に送信した場合に計時されるタイムアウト時間であり、例えば、2秒である。エラー情報は、要求側の端末装置10、及び被要求側の端末装置10のいずれも送信可能である。すなわち、シグナリングサーバ20は、エラー情報を、要求側の端末装置10と、被要求側の端末装置10とのいずれか一方、又は両方から受信する。シグナリングサーバ20は、要求側の端末装置10からエラー情報を受信すると、中継サーバ50との間で、図8及び図9を用いて説明した通信回線を切り換えるための手順を実行する。
Here, a specific example of communication line switching by the relay server 50 will be described.
When the establishment of the P2P session fails, the relay server 50 switches the communication mode from the P2P mode to the relay mode.
First, for example, when the session establishment fails, the terminal device 10 transmits error information to the signaling server 20. The error information is information indicating that the session has not been established within a predetermined time. That is, the error information is information indicating that communication for information sharing between the terminal devices 10 is not possible. Here, the predetermined time is a timeout time measured when a connection request for establishing a session is transmitted from the requesting terminal device 10 to the requested terminal device 10, and is, for example, 2 seconds. The error information can be transmitted by both the requesting terminal device 10 and the requested terminal device 10. That is, the signaling server 20 receives the error information from one or both of the requesting terminal device 10 and the requested terminal device 10. When receiving the error information from the requesting terminal device 10, the signaling server 20 executes the procedure for switching the communication line described with reference to FIGS. 8 and 9 with the relay server 50.

[変形例:端末間通信システムの動作(変形例2):定期的な認証動作]
シグナリングサーバ20は、セションが確立された後には、所定の頻度で端末装置10が正規の装置であるか否かを判定する。すなわち、シグナリングサーバ20は、端末装置10が正規の装置であるか否かを認証する動作を、所定の頻度で定期的に行う。この所定の頻度とは、例えば、数秒おきである。また、ここでいう正規の端末装置10とは、電話番号とIPアドレスとの組み合わせが、予め認証サーバ30に登録されている電話番号とIPアドレスとの組み合わせと一致する装置のことである。
これにより、端末間通信システム1は、正規でない端末装置10による情報共有機能の利用を排除することができる。
[Modification: Operation of communication system between terminals (Modification 2): Periodic authentication operation]
After the session is established, the signaling server 20 determines whether or not the terminal device 10 is a regular device at a predetermined frequency. That is, the signaling server 20 periodically performs an operation of authenticating whether or not the terminal device 10 is a regular device at a predetermined frequency. This predetermined frequency is, for example, every few seconds. The regular terminal device 10 here is a device in which a combination of a telephone number and an IP address matches a combination of a telephone number and an IP address registered in the authentication server 30 in advance.
Thereby, the inter-terminal communication system 1 can exclude the use of the information sharing function by the unauthorized terminal device 10.

[変形例:セション構築手順の変形例]
次に、端末間通信システム1のセション構築手順の変形例について説明する。ここでは、既に端末装置10のレジストレーションが完了している場合について説明する。また、ここでは、図7に示したセション構築の手順におけるステップS100からステップS210と比較しながら説明する。このため、セション構築手順の変形例の手順についてのステップS600からステップS670の図示は省略する。
[Variation: Variation of session construction procedure]
Next, a modified example of the session construction procedure of the inter-terminal communication system 1 will be described. Here, a case where registration of the terminal apparatus 10 has already been completed will be described. In addition, here, a description will be given while comparing with steps S100 to S210 in the session construction procedure shown in FIG. For this reason, illustration of step S600 to step S670 about the procedure of the modified example of the session construction procedure is omitted.

シグナリングサーバ20は、要求側の端末装置10から情報共有の要求を受け付ける(ステップS600)。このステップS600は、上述したステップS100からステップS110に対応する。この情報共有の要求には、要求側の端末装置10の電話番号と、被要求側の端末装置10の電話番号が含まれている。すなわち、情報共有の要求に、要求側の端末装置10の電話番号が含まれている点において、本変形例は、上述したステップS100と異なる。   The signaling server 20 receives a request for information sharing from the requesting terminal device 10 (step S600). This step S600 corresponds to the above-described steps S100 to S110. This information sharing request includes the telephone number of the requesting terminal device 10 and the telephone number of the requested terminal device 10. That is, this modification differs from step S100 described above in that the request for information sharing includes the telephone number of the requesting terminal device 10.

次に、シグナリングサーバ20は、ステップS600において受信した電話番号と、予め記憶しているレジストレーション情報とを比較して、受信した電話番号が利用可能であるか否かを判定する(ステップS610)。このステップS610は、上述したステップS12に対応する。ここで、シグナリングサーバ20は、要求側の端末装置10の電話番号と、被要求側の端末装置10の電話番号とについて、それぞれ利用可能であるか否かを判定する。すなわち、利用可能であるか否かの判定対象に、要求側の端末装置10の電話番号が含まれている点において、本変形例は、上述したステップS120と異なる。   Next, the signaling server 20 compares the telephone number received in step S600 with the registration information stored in advance, and determines whether or not the received telephone number is available (step S610). . This step S610 corresponds to step S12 described above. Here, the signaling server 20 determines whether or not the telephone number of the requesting terminal device 10 and the telephone number of the requested terminal device 10 are available. In other words, the present modification is different from step S120 described above in that the phone number of the requesting terminal device 10 is included in the determination target whether or not it can be used.

次に、シグナリングサーバ20は、ステップS610において受信した電話番号が利用可能であると判定した場合(ステップS610;YES)には、要求側の端末装置10に対して、被要求側のIPアドレスを送信する(ステップS620)。また、この場合(ステップS610;YES)には、シグナリングサーバ20は、プッシュサーバ40に対して、セション構築情報を送信する(ステップS630)。このステップS630は、上述したステップS130からステップS150に対応する。このセション構築情報には、要求側の端末装置10のIPアドレスと、端末装置10において動作する情報共有アプリケーションに対応するプッシュIDとが含まれている。すなわち、要求側の端末装置10がセション構築の要求を送信する手順が省略されている点において、本変形例は、上述したステップS130からステップS150と異なる。   Next, when the signaling server 20 determines that the telephone number received in step S610 is available (step S610; YES), the signaling server 20 assigns the requested side IP address to the requesting terminal device 10. Transmit (step S620). In this case (step S610; YES), the signaling server 20 transmits session construction information to the push server 40 (step S630). This step S630 corresponds to the above-described steps S130 to S150. This session construction information includes the IP address of the requesting terminal device 10 and the push ID corresponding to the information sharing application running on the terminal device 10. That is, the present modification is different from Steps S130 to S150 described above in that the procedure for transmitting the request for session establishment by the requesting terminal device 10 is omitted.

プッシュサーバ40は、ステップS630において送信されたセション構築情報を受信すると、このセション構築情報に含まれるプッシュIDに基づいて、被要求側の端末装置10に対して、要求側の端末装置10のIPアドレスをプッシュする(ステップS640)。このステップS640は、上述したステップS160に対応する。すなわち、プッシュサーバ40が要求側の端末装置10の電話番号に代えて、IPアドレスをプッシュする点において、本変形例は、上述したステップS160と異なる。   When the push server 40 receives the session construction information transmitted in step S630, the push server 40 sends the IP of the requesting terminal device 10 to the requested terminal device 10 based on the push ID included in the session construction information. The address is pushed (step S640). This step S640 corresponds to the above-described step S160. That is, the present modification is different from step S160 described above in that the push server 40 pushes the IP address instead of the telephone number of the requesting terminal device 10.

被要求側の端末装置10は、ステップS640のプッシュが行われると、情報共有の承認画像を表示し、ユーザの承認操作を待つ(ステップS650)。このステップS650は、上述したステップS170からステップS180に対応する。すなわち、被要求側の端末装置10において、電話番号の一致判定が省略されている点において、本変形例は、上述したステップS170と異なる。   When the requested terminal device 10 is pushed in step S640, it displays an information sharing approval image and waits for the user's approval operation (step S650). This step S650 corresponds to the above-described steps S170 to S180. That is, the modification is different from step S170 described above in that the telephone number match determination is omitted in the requested terminal device 10.

被要求側の端末装置10は、ユーザが承認する操作を行った場合(ステップS650;YES)には、シグナリングサーバ20に対してセション構築承認情報を送信する(ステップS660)。このステップS660は、上述したステップS190に対応する。一方、被要求側の端末装置10は、ユーザが承認しない操作を行った場合(ステップS650;NO)には、情報共有の承認をしない旨を、シグナリングサーバ20を介して要求側の端末装置10に送信して、処理を終了する。   The requested terminal device 10 transmits the session construction approval information to the signaling server 20 when the user performs an operation to approve (step S650; YES) (step S660). This step S660 corresponds to the above-described step S190. On the other hand, if the requested terminal device 10 performs an operation that the user does not approve (step S650; NO), the requesting terminal device 10 notifies the requesting terminal device 10 via the signaling server 20 that the information sharing is not approved. To finish the process.

次に、シグナリングサーバ20は、ステップS660において送信されたセション構築承認情報を受信すると、要求側の端末装置10と、被要求側の端末装置10との間においてセションを構築して(ステップS670)、セション構築の処理を終了する。このステップS670は、上述したステップS200に対応する。すなわち、本変形例のセション構築手順によれば、上述したステップS100からステップS200による手順に対比して、より簡易な手順によってセションを構築することができる。   Next, when the signaling server 20 receives the session construction approval information transmitted in step S660, the signaling server 20 constructs a session between the requesting terminal device 10 and the requested terminal device 10 (step S670). The session construction process is terminated. This step S670 corresponds to step S200 described above. That is, according to the session construction procedure of this modification, a session can be constructed by a simpler procedure as compared with the procedure from step S100 to step S200 described above.

[三者間情報共有通信開始時の基本動作]
次に、図10〜図13を参照して、端末間通信システム1による三者間情報共有機能の提供について説明する。本実施形態の端末間通信システム1は、音声通信が行われているときにのみ、情報共有通信を提供する。以下では、第1の端末装置10と第2の端末装置10との間で音声通信と、P2Pモードによる情報共有通信とが行われている状態から、第3の端末装置10を含めた三者間情報共有通信が行われるまでの処理について説明する。
[Basic operation when starting three-way information sharing communication]
Next, provision of a three-way information sharing function by the inter-terminal communication system 1 will be described with reference to FIGS. The inter-terminal communication system 1 of the present embodiment provides information sharing communication only when voice communication is performed. In the following, from the state in which voice communication and information sharing communication in the P2P mode are performed between the first terminal device 10 and the second terminal device 10, the three parties including the third terminal device 10 are included. Processing until inter-information sharing communication is performed will be described.

まず、中継モードによる三者間情報共有通信の開始について説明する。
図10及び図11は、本実施形態の端末間通信システム1による三者間情報共有機能の提供の概要を示す模式図である。図10は、三者間情報共有機能を提供するために、P2Pモードから中継モードに二者間情報共有通信を切り替える処理の流れの概要を示す模式図である。図11は、中継モードへの移行後に、第3の端末装置10を含めた三者間情報共有機能が提供されるまでの処理の流れの概要を示す模式図である。
First, the start of the three-way information sharing communication in the relay mode will be described.
10 and 11 are schematic diagrams showing an outline of providing a three-way information sharing function by the inter-terminal communication system 1 of the present embodiment. FIG. 10 is a schematic diagram showing an outline of a flow of processing for switching the two-party information sharing communication from the P2P mode to the relay mode in order to provide the three-party information sharing function. FIG. 11 is a schematic diagram showing an outline of a processing flow until the three-way information sharing function including the third terminal device 10 is provided after the transition to the relay mode.

この一例において、図10及び図11における端末装置10A〜10Cは、図2の端末装置10A〜10Cと同一である。まず、端末装置10Aと端末装置10Bとは、音声通信を行い、P2Pモードで情報を共有している(ステップS700)。次に、端末装置10Cから端末装置10Aへと音声通信の要求が行われ(ステップS710)、端末装置10Aのユーザが端末装置10Cを含めた音声通信の開始を選択すると、端末装置10A〜10Cは、互いに音声データの送受信を行う三者間音声通信(三者通話)を開始する(ステップS720)。次に、端末装置10Aは、端末装置10Bとの通信モードをP2Pモードから中継モードへと切り換える。   In this example, the terminal devices 10A to 10C in FIGS. 10 and 11 are the same as the terminal devices 10A to 10C in FIG. First, the terminal device 10A and the terminal device 10B perform voice communication and share information in the P2P mode (step S700). Next, a request for voice communication is made from the terminal device 10C to the terminal device 10A (step S710), and when the user of the terminal device 10A selects the start of voice communication including the terminal device 10C, the terminal devices 10A to 10C Then, the three-party voice communication (three-party call) for transmitting and receiving voice data to each other is started (step S720). Next, the terminal device 10A switches the communication mode with the terminal device 10B from the P2P mode to the relay mode.

具体的には、上述したように、まず、端末装置10Aは、シグナリングサーバ20を介して、中継サーバ50にルームの作成要求を送信する(ステップS730、S740)。このとき、端末装置10Aは、ルームの作成要求に自装置の電話番号に加え、端末装置10Bの電話番号を含める。次に、中継サーバ50は、ルームの作成要求に応じて作成したルームのルームIDと入室キーとを端末装置10A、10Bに送信する(ステップS750)。つまり、シグナリングサーバ20は、端末装置10Aと端末装置10Bとが入室するルームのルームIDを指定する。そして、端末装置10A、10Bは、中継サーバ50から取得したルームIDと入室キーとにより同一のルームへと入室し、端末装置10A、10Bは、中継モードによる情報共有通信を開始する(ステップS760)。   Specifically, as described above, first, the terminal device 10A transmits a room creation request to the relay server 50 via the signaling server 20 (steps S730 and S740). At this time, the terminal apparatus 10A includes the telephone number of the terminal apparatus 10B in addition to the telephone number of the own apparatus in the room creation request. Next, the relay server 50 transmits the room ID and entry key of the room created in response to the room creation request to the terminal devices 10A and 10B (step S750). That is, the signaling server 20 specifies the room ID of the room where the terminal device 10A and the terminal device 10B enter. Then, the terminal devices 10A and 10B enter the same room using the room ID and the entry key acquired from the relay server 50, and the terminal devices 10A and 10B start information sharing communication in the relay mode (step S760). .

次に、端末装置10Aのユーザが端末装置10Cを含めた情報共有通信の開始を選択すると、端末装置10Aは、端末装置10Cに対して情報共有の招待を行う。具体的には、端末装置10Aは、自装置が入室するルームのルームIDと入室キーとを、端末装置10Cに通知する(ステップS770)。次に、招待を受けた端末装置10Cのユーザが情報の共有を承諾すると、端末装置10Cは、中継サーバ50にアクセスして、端末装置10A、10Bが接続するルームへと入室する。端末装置10Cは、中継サーバ50にアクセスし、端末装置10Aから通知されたルームIDと入室キーとにより、端末装置10A、10Bが接続しているルームに入室する。そして、端末装置10Cは、端末装置10A、10Bと、中継モードによる情報共有通信を開始する(ステップS780)。これにより、端末装置10A〜10Cは、中継サーバ50を介して相互に情報を共有することができる。   Next, when the user of the terminal device 10A selects the start of information sharing communication including the terminal device 10C, the terminal device 10A invites the terminal device 10C to share information. Specifically, the terminal device 10A notifies the terminal device 10C of the room ID and the room entry key of the room where the device itself enters (step S770). Next, when the user of the terminal device 10C who has received the invitation accepts the sharing of information, the terminal device 10C accesses the relay server 50 and enters the room to which the terminal devices 10A and 10B are connected. The terminal device 10C accesses the relay server 50 and enters the room to which the terminal devices 10A and 10B are connected using the room ID and the entry key notified from the terminal device 10A. Then, the terminal device 10C starts information sharing communication in the relay mode with the terminal devices 10A and 10B (step S780). Thereby, the terminal devices 10 </ b> A to 10 </ b> C can share information with each other via the relay server 50.

なお、端末装置10Aは、三者通話を行っている場合に、バックグラウンドで端末装置10Cが情報共有機能に対応しているか否かを確認してもよい。この場合、端末装置10Aは、バックグラウンドで、端末装置10Cの電話番号をシグナリングサーバ20に送信する。そして、端末装置10Aは、端末装置10Cが情報共有機能に対応しているか否かの返答をシグナリングサーバ20から受信する。   Note that the terminal device 10 </ b> A may check whether the terminal device 10 </ b> C supports the information sharing function in the background when performing a three-party call. In this case, the terminal device 10A transmits the telephone number of the terminal device 10C to the signaling server 20 in the background. Then, the terminal device 10A receives a response from the signaling server 20 as to whether or not the terminal device 10C is compatible with the information sharing function.

[変形例:三者間情報共有通信開始時の動作(変形例1)]
次に、図12を参照して、三者間情報共有通信開始時における端末間通信システム1の動作の第1の変形例について説明する。第1の変形例では、複数の端末装置10と情報共有通信を行っているある端末装置10が、複数の通信相手のうち、1つの端末装置10のIPアドレスを他の端末装置10へと通知する。これにより、ある端末装置10の通信相手の複数の端末装置10は、相互にIPアドレスを交換してセションを構築することができる。
[Modification: Operation at the time of starting three-way information sharing communication (Modification 1)]
Next, a first modification of the operation of the inter-terminal communication system 1 at the start of the three-party information sharing communication will be described with reference to FIG. In the first modified example, a certain terminal device 10 performing information sharing communication with a plurality of terminal devices 10 notifies the other terminal device 10 of the IP address of one terminal device 10 among a plurality of communication partners. To do. Thereby, a plurality of terminal devices 10 of a communication partner of a certain terminal device 10 can establish a session by exchanging IP addresses with each other.

図12は、第1の変形例の、端末間通信システム1による三者間情報共有機能の提供の概要を示す模式図である。
ここでは、上述した基本動作と同様に、3台の端末装置10A〜10Cにより三者間情報共有通信を開始する例について説明する。また、ここでは、端末装置10Aと端末装置10Bとの間において、P2Pモードによる情報の共有が行われている場合について説明する。また、ここでは、端末装置10A〜10Cが三者通話を行っている場合について説明する。端末装置10Aと端末装置10Bとの間において音声通信とP2Pモードによる二者間情報共有通信とが行われている状態から、端末装置10A〜10Cによる三者通話が行われるまでの処理の流れは、上述した基本動作のステップS700〜S720までの処理と同様であるため、説明を省略する。
FIG. 12 is a schematic diagram illustrating an overview of providing a three-party information sharing function by the inter-terminal communication system 1 according to the first modification.
Here, as in the basic operation described above, an example in which three-party information sharing communication is started by three terminal devices 10A to 10C will be described. Here, a case where information is shared in the P2P mode between the terminal device 10A and the terminal device 10B will be described. Here, a case where the terminal devices 10A to 10C are performing a three-party call will be described. The flow of processing from when voice communication and two-party information sharing communication in P2P mode are performed between the terminal device 10A and the terminal device 10B until a three-party call is performed by the terminal devices 10A to 10C. Since it is the same as the processing from step S700 to S720 of the basic operation described above, the description thereof is omitted.

図12に示される第1の変形例において、端末間通信システム1は、端末装置10Aが自装置と通信する端末装置10B及び端末装置10Cのうちの一方の端末装置10のIPアドレスを、他方の端末装置10に通知する。
具体的には、まず、端末装置10Aと端末装置10Bとは、P2Pモードにより情報を共有している(ステップS800)。なお、図12では、三者通話の提供については、図示を省略している。端末装置10Aのユーザが端末装置10Cを含めた情報共有通信の開始を選択すると、端末装置10Aは、端末装置10Cに対して情報共有への招待を行う(ステップS810)。そして、端末装置10Cのユーザが端末装置10A、10Bとの情報共有を承諾した場合、端末装置10Cは、三者間情報共有通信の提供が承諾されたことを端末装置10Aに通知する(ステップS820)。端末装置10Aと端末装置10CとはP2Pモードによる通信を開始する(ステップS830)。
In the first modification example shown in FIG. 12, the inter-terminal communication system 1 uses the IP address of one terminal device 10 of the terminal device 10B and the terminal device 10C with which the terminal device 10A communicates with its own device. The terminal device 10 is notified.
Specifically, first, the terminal device 10A and the terminal device 10B share information in the P2P mode (step S800). In FIG. 12, illustration of the provision of a three-way call is omitted. When the user of the terminal device 10A selects the start of information sharing communication including the terminal device 10C, the terminal device 10A invites the terminal device 10C to share information (step S810). When the user of the terminal device 10C consents to information sharing with the terminal devices 10A and 10B, the terminal device 10C notifies the terminal device 10A that the provision of the three-way information sharing communication has been accepted (step S820). ). The terminal device 10A and the terminal device 10C start communication in the P2P mode (step S830).

他方、端末装置10Aは、端末装置10Cを含めた情報共有の承諾要求を端末装置10Bに送信する(ステップS840)。そして、端末装置10Bのユーザが端末装置10Cを含めた情報共有通信の承諾を行うと、端末装置10Bは、三者間情報共有機能の提供が承諾されたことを端末装置10Aに通知する(ステップS850)。   On the other hand, the terminal device 10A transmits an information sharing consent request including the terminal device 10C to the terminal device 10B (step S840). Then, when the user of the terminal device 10B approves the information sharing communication including the terminal device 10C, the terminal device 10B notifies the terminal device 10A that the provision of the three-way information sharing function has been approved (step). S850).

次に、端末装置10Aは、P2Pセション又はシグナリングサーバ20を介して、端末装置10BのIPアドレスを端末装置10Cに送信する(ステップS860)。また、端末装置10Aは、P2P接続又はシグナリングサーバ20を介して、端末装置10CのIPアドレスを端末装置10Bに送信する(ステップS860)。これにより、端末装置10Bは、端末装置10CのIPアドレスを取得する。また、端末装置10Cは、端末装置10BのIPアドレスを取得する。そして、端末装置10Bと端末装置10Cとは、取得したIPアドレスに基づいて、例えば、P2Pモードによる通信を開始する(ステップS870)。これにより、端末装置10A及び端末装置10B間、端末装置10A及び端末装置10C間、端末装置10B及び端末装置10C間において、P2Pモードによる通信が行われる。従って、端末装置10A〜10Cは、相互に情報を共有することができる。
なお、ここでは、端末装置10A〜10Cは、P2Pモードにより通信を行う場合について説明したが、端末装置10A〜10Cは、中継サーバ50を介した中継モードにより通信を行ってもよい。
Next, the terminal device 10A transmits the IP address of the terminal device 10B to the terminal device 10C via the P2P session or the signaling server 20 (step S860). Further, the terminal device 10A transmits the IP address of the terminal device 10C to the terminal device 10B via the P2P connection or the signaling server 20 (step S860). Thereby, the terminal device 10B acquires the IP address of the terminal device 10C. Also, the terminal device 10C acquires the IP address of the terminal device 10B. Then, the terminal device 10B and the terminal device 10C start communication in the P2P mode, for example, based on the acquired IP address (step S870). Accordingly, communication in the P2P mode is performed between the terminal device 10A and the terminal device 10B, between the terminal device 10A and the terminal device 10C, and between the terminal device 10B and the terminal device 10C. Accordingly, the terminal devices 10A to 10C can share information with each other.
Here, the terminal devices 10A to 10C have been described with respect to communication in the P2P mode. However, the terminal devices 10A to 10C may perform communication in the relay mode via the relay server 50.

[変形例:三者間情報共有通信開始時の動作(変形例2)]
次に、図13を参照して、三者間情報共有通信開始時における端末間通信システム1の動作の第2の変形例について説明する。第2の変形例では、ある端末装置10が複数の端末装置10とP2Pモードによる情報共有を行う。そして、このある端末装置10は、複数の通信相手のうち、1つの端末装置10から受信した情報を他の端末装置10に送信するか否かを判定する。これにより、ある端末装置10は、複数の端末装置10と互いに異なる情報を共有することができる。
[Modification: Operation at the time of starting three-way information sharing communication (Modification 2)]
Next, a second modification example of the operation of the inter-terminal communication system 1 at the start of the three-party information sharing communication will be described with reference to FIG. In the second modification, a certain terminal device 10 performs information sharing in a P2P mode with a plurality of terminal devices 10. And this certain terminal device 10 determines whether the information received from one terminal device 10 is transmitted to the other terminal device 10 among several communication partners. Thereby, a certain terminal device 10 can share different information with a plurality of terminal devices 10.

図13は、第2の変形例の、端末間通信システム1による三者間情報共有機能の提供の概要を示す模式図である。
ここでは、上述した基本動作と同様に、3台の端末装置10A〜10Cにより三者間情報共有通信を開始する例について説明する。また、ここでは、端末装置10Aと端末装置10Bとの間において、P2Pモードによる情報の共有が行われている場合について説明する。また、ここでは、端末装置10A〜10Cが三者通話を行っている場合について説明する。端末装置10Aと端末装置10Bとの間において音声通信とP2Pモードによる二者間情報共有通信とが行われている状態から、端末装置10A〜10Cによる三者通話が行われるまでの処理の流れは、上述した基本動作のステップS700〜S720までの処理と同様であるため、説明を省略する。
FIG. 13 is a schematic diagram illustrating an overview of providing a three-party information sharing function by the inter-terminal communication system 1 according to the second modification.
Here, as in the basic operation described above, an example in which three-party information sharing communication is started by three terminal devices 10A to 10C will be described. Here, a case where information is shared in the P2P mode between the terminal device 10A and the terminal device 10B will be described. Here, a case where the terminal devices 10A to 10C are performing a three-party call will be described. The flow of processing from the state in which voice communication and two-party information sharing communication in the P2P mode are performed between the terminal device 10A and the terminal device 10B until the three-party call by the terminal devices 10A to 10C is performed Since it is the same as the processing from step S700 to S720 of the basic operation described above, the description thereof is omitted.

第2の変形例について、具体的に説明する。まず、端末装置10Aと端末装置10Bとは、P2Pモードにより情報を共有している(ステップS800)。なお、図13では、三者通話の提供については、図示を省略している。次に、端末装置10Aのユーザが端末装置10Cを含めた情報共有通信の開始を選択すると、端末装置10Aは、端末装置10Cに対して情報共有への招待を行う(ステップS810)。次に、端末装置10Cのユーザが端末装置10Aとの情報共有を承諾した場合、端末装置10Cは、端末装置10Aと端末装置10Cとの間における二者間情報共有通信の提供が承諾されたことを端末装置10Aに通知する(ステップS820)。そして、端末装置10Aと端末装置10CとはP2Pモードによる通信を開始する(ステップS830)。   The second modification will be specifically described. First, the terminal device 10A and the terminal device 10B share information in the P2P mode (step S800). In FIG. 13, illustration of the provision of a three-way call is omitted. Next, when the user of the terminal device 10A selects the start of information sharing communication including the terminal device 10C, the terminal device 10A invites the terminal device 10C to share information (step S810). Next, when the user of the terminal device 10C consents to share information with the terminal device 10A, the terminal device 10C is permitted to provide bilateral information sharing communication between the terminal device 10A and the terminal device 10C. To the terminal device 10A (step S820). Then, the terminal device 10A and the terminal device 10C start communication in the P2P mode (step S830).

このとき、端末装置10Aと端末装置10Bとは、P2Pモードによる情報の共有を行っている。また、端末装置10Aと端末装置10Cとは、P2Pモードによる情報の共有を行っている。しかし、端末装置10Bと端末装置10Cとは、情報の共有を行っていない。そして、端末装置10Aは、例えば、端末装置10Bとの間で共有する情報と、端末装置10Cとの間で共有する情報とを個別に管理することができる。具体的には、端末装置10Aは、例えば、端末装置10Bと共有する情報と、端末装置10Cと共有する情報とのうち、自装置に表示する情報を、時間に応じて切り替える。また、端末装置10Aは、例えば、端末装置10Bと共有する情報と、端末装置10Cと共有する情報とを、自装置の表示部100に並べて表示する。   At this time, the terminal device 10A and the terminal device 10B share information in the P2P mode. Further, the terminal device 10A and the terminal device 10C share information in the P2P mode. However, the terminal device 10B and the terminal device 10C do not share information. Then, for example, the terminal device 10A can individually manage information shared with the terminal device 10B and information shared with the terminal device 10C. Specifically, the terminal device 10A switches, for example, information displayed on the own device among information shared with the terminal device 10B and information shared with the terminal device 10C according to time. Also, the terminal device 10A displays, for example, information shared with the terminal device 10B and information shared with the terminal device 10C side by side on the display unit 100 of the own device.

次に、端末装置10Aは、2つの通信相手のうち、一方の端末装置10B、10Cから受信した情報を他の端末装置10B、10Cに送信するか否かを判定する。具体的には、端末装置10Aは、例えば、端末装置10Bから受信した情報のうち、自装置とのみ共有される情報を、端末装置10Cには送信しない。また、端末装置10Aは、例えば、端末装置10Cから受信した情報のうち、自装置とのみ共有される情報を、端末装置10Bには送信しない。   Next, the terminal device 10A determines whether or not to transmit information received from one of the two terminal devices 10B and 10C to the other terminal devices 10B and 10C. Specifically, for example, the terminal device 10A does not transmit, to the terminal device 10C, information shared only with the own device among the information received from the terminal device 10B. Further, for example, the terminal device 10A does not transmit, to the terminal device 10B, information shared only with the own device among the information received from the terminal device 10C.

端末装置10Bから受信した情報を、端末装置10Cに送信するか否かについての端末装置10Aによる判定について説明する。
例えば、端末装置10Aは、自装置と端末装置10Bとの間における共有対象の情報を端末装置10Cへ送信してよいか否かを問い合わせる。端末装置10Bは、問い合わせを受け付けると、その表示部100に端末装置10Cへの共有対象の情報の送信の可否の入力を要求する画像を表示する。次に、端末装置10Bのユーザは、表示された画像を確認して、端末装置10Cへの共有対象の情報の送信の可否を入力する。端末装置10Bは、端末装置10Cへの共有対象の情報の送信の可否について、ユーザから受け付けた入力結果を示す共有可否情報を生成する。端末装置10Bは、自装置から端末装置10Aに送信する共有対象の情報に、共有可否情報を付加して端末装置10Aに送信する。端末装置10Aは、端末装置10Bから受信した共有可否情報を参照し、端末装置10Cへの共有対象の情報の送信が許可されている場合に、共有対象の情報を端末装置10Cに送信する。
The determination by the terminal device 10A regarding whether to transmit the information received from the terminal device 10B to the terminal device 10C will be described.
For example, the terminal device 10A inquires whether or not the information to be shared between the own device and the terminal device 10B may be transmitted to the terminal device 10C. When the terminal device 10B receives the inquiry, the terminal device 10B displays on the display unit 100 an image that requests input of whether or not to transmit the information to be shared to the terminal device 10C. Next, the user of the terminal device 10B confirms the displayed image and inputs whether or not the information to be shared can be transmitted to the terminal device 10C. The terminal device 10B generates sharability information indicating an input result received from the user regarding whether or not the information to be shared can be transmitted to the terminal device 10C. The terminal device 10B adds sharability information to the information to be shared transmitted from the own device to the terminal device 10A and transmits the information to the terminal device 10A. The terminal device 10A refers to the sharability information received from the terminal device 10B, and transmits the sharing target information to the terminal device 10C when transmission of the sharing target information to the terminal device 10C is permitted.

また、例えば、端末装置10Aは、端末装置10Bから自装置と端末装置10Bとの間における共有対象の情報を受信すると、受信した情報を端末装置10Cへ送信してよいか否かを問い合わせる。そして、端末装置10Bは、ユーザからの入力に基づいて共有可否情報を生成し、生成した共有可否情報を端末装置10Aに送信する。端末装置10Aは、端末装置10Bから受信した共有可否情報を、共有対象の情報と対応付ける。そして、共有可否情報に基づいて、共有対象の情報を端末装置10Cに送信するか否かを判定する。   Further, for example, when the terminal device 10A receives the information to be shared between the terminal device 10B and the terminal device 10B, the terminal device 10A inquires whether or not the received information may be transmitted to the terminal device 10C. Then, the terminal device 10B generates sharability information based on the input from the user, and transmits the generated sharability information to the terminal device 10A. The terminal device 10A associates the shareability information received from the terminal device 10B with the information to be shared. Then, based on the sharability information, it is determined whether or not information to be shared is transmitted to the terminal device 10C.

なお、ここでは、端末装置10A〜10Cは、P2Pモードにより通信を行う場合について説明したが、端末装置10A〜10Cは、中継サーバ50を介した中継モードにより通信を行ってもよい。   Here, the terminal devices 10A to 10C have been described with respect to communication in the P2P mode. However, the terminal devices 10A to 10C may perform communication in the relay mode via the relay server 50.

また、これまで、端末装置10は、表示画面共有機能において、表示部100の全領域するものとして説明したが、これに限られない。端末装置10は、表示画面共有機能において、表示部100の全領域ではなく、一部領域の画像を共有してもよい。例えば、表示部100に複数のアプリケーションの画像が表示されている場合において、端末装置10は、アプリケーションごと、又はアプリケーションの種類ごとに画像を共有するか、共有しないかを定めてもよい。また、端末装置10は、例えば、電子メールアプリケーションの画像が表示されている場合において、電子メールの本文の領域を共有しないようにしてもよい。   In addition, the terminal device 10 has been described so far as being the entire area of the display unit 100 in the display screen sharing function, but is not limited thereto. In the display screen sharing function, the terminal device 10 may share an image of a partial area instead of the entire area of the display unit 100. For example, when images of a plurality of applications are displayed on the display unit 100, the terminal device 10 may determine whether to share an image for each application or for each type of application. Further, for example, when an image of an e-mail application is displayed, the terminal device 10 may not share the area of the body of the e-mail.

なお、端末装置10は、画像を共有する対象のアプリケーションを、予め記憶していてもよい。この場合、ユーザは、端末装置10に対して、情報共有機能を有するアプリケーションのうち、画像を共有するアプリケーションと、画像を共有しないアプリケーションとを、予め選択する操作をする。端末装置10は、この選択する操作に基づいて、画像を共有する対象のアプリケーションを記憶する。また、端末装置10は、情報共有機能が起動される際に、予め記憶している情報に基づき、画像を共有する対象のアプリケーションか否かを判定する。   Note that the terminal device 10 may store in advance a target application for sharing an image. In this case, the user performs an operation on the terminal device 10 to preselect an application that shares an image and an application that does not share an image, among applications having an information sharing function. The terminal device 10 stores a target application to share an image based on the selected operation. Further, when the information sharing function is activated, the terminal device 10 determines whether or not the application is a target application for sharing an image based on information stored in advance.

また、これまで、端末装置10は、二者間情報共有機能を提供中に、割り込みの通信要求があった場合に三者間情報共有機能の提供が開始されるものとして説明したが、これに限られない。例えば、他の端末装置10と通信していない要求側の端末装置10が、複数の被要求側の端末装置10に対してセションの構築を要求し、三者間情報共有機能の提供を開始してもよい。   In addition, until now, the terminal device 10 has been described as providing the three-party information sharing function when an interrupt communication request is made while the two-party information sharing function is being provided. Not limited. For example, a requesting terminal device 10 not communicating with another terminal device 10 requests a plurality of requested terminal devices 10 to construct a session, and starts providing a three-way information sharing function. May be.

[変形例:タブレット型端末]
なお、これまで端末装置10が、携帯電話やスマートフォンなどである場合を一例にして説明したが、これに限られない。例えば、端末装置10は、タブレットなどの装置であってもよい。ここで、携帯電話やスマートフォンは、耳あて通話用スピーカ131を備えており、耳あて通話が可能である。一方、タブレットは、耳あて通話用スピーカ131を備えていない。すなわち、端末装置10は、耳あて通話用スピーカ131を備えない装置であってもよい。端末装置10がタブレットである場合には、スピーカモードによって通話が行われてもよい。
[Modification: Tablet terminal]
In addition, although the case where the terminal device 10 was a mobile phone, a smart phone, etc. was demonstrated as an example until now, it is not restricted to this. For example, the terminal device 10 may be a device such as a tablet. Here, the mobile phone and the smartphone are provided with an ear-facing call speaker 131, and can be talked to the ear. On the other hand, the tablet does not include the earphone speaker 131. That is, the terminal device 10 may be a device that does not include the earphone call speaker 131. When the terminal device 10 is a tablet, a call may be performed in the speaker mode.

[変形例:テキスト通信中の情報共有]
なお、これまでの説明において、端末間通信システム1は、音声通話中において情報共有機能を提供するとして説明したが、これに限られない。端末間通信システム1は、テキストによる通信中において、情報共有機能を提供してもよい。例えば、端末間通信システム1は、テキストチャットアプリケーションが提供するチャット中に、情報共有機能を提供してもよい。
[Variation: Information sharing during text communication]
In the above description, the inter-terminal communication system 1 has been described as providing an information sharing function during a voice call. However, the present invention is not limited to this. The inter-terminal communication system 1 may provide an information sharing function during text communication. For example, the inter-terminal communication system 1 may provide an information sharing function during chat provided by a text chat application.

以上、本発明の実施形態及びその変形を説明したが、これらの実施形態及びその変形は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態及びその変形は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲や要旨に含まれると同時に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。   As mentioned above, although embodiment of this invention and its deformation | transformation were demonstrated, these embodiment and its deformation | transformation were shown as an example and are not intending limiting the range of invention. These embodiments and modifications thereof can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and at the same time, are included in the invention described in the claims and equivalents thereof.

なお、上述の各装置は内部にコンピュータを有している。そして、上述した各装置の各処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、CD−ROM、DVD−ROM、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。   Each of the above devices has a computer inside. The process of each device described above is stored in a computer-readable recording medium in the form of a program, and the above-described processing is performed by the computer reading and executing the program. Here, the computer-readable recording medium means a magnetic disk, a magneto-optical disk, a CD-ROM, a DVD-ROM, a semiconductor memory, or the like. Alternatively, the computer program may be distributed to the computer via a communication line, and the computer that has received the distribution may execute the program.

また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。
さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。
The program may be for realizing a part of the functions described above.
Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, what is called a difference file (difference program) may be sufficient.

1…端末間通信システム、10…端末装置、20…シグナリングサーバ、30…認証サーバ、40…プッシュサーバ、50…中継サーバ DESCRIPTION OF SYMBOLS 1 ... Communication system between terminals, 10 ... Terminal device, 20 ... Signaling server, 30 ... Authentication server, 40 ... Push server, 50 ... Relay server

Claims (6)

端末装置を識別する端末識別情報と、前記端末装置において動作するアプリケーションを識別するアプリケーション識別情報とを含む端末情報を前記端末装置から受信する端末情報受信部と、
複数の前記端末装置のうち第1端末装置において動作する第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置とは異なる第2端末装置において動作する第2アプリケーションとの間のセションを構築するセション構築部と、
前記第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置及び第2端末装置とは異なる第3端末装置において動作する第3アプリケーションとの適合性を、前記端末識別情報又は前記アプリケーション識別情報に基づいて判定する適合性判定部と、
前記第1アプリケーションが送信する情報共有の要求に応じて、前記適合性判定部による判定結果を前記第1アプリケーションに送信する判定結果送信部と、
を備え、
前記セションは、セションに対応するキー情報に基づいて構築され、
前記セション構築部は、
前記第1アプリケーションが送信する前記第3アプリケーションとの通信開始の要求に応じて、前記第1アプリケーションと前記第3アプリケーションとの間のセションを、前記第1端末装置の前記端末情報と前記第3端末装置の前記端末情報とに基づいて構築し、
前記第1端末装置と前記第2端末装置とが直接通信するピア・トゥー・ピアモードのセションが構築されている場合に、前記第3端末装置からの前記第1端末装置への音声通信の要求に応じて、複数の前記端末装置の間で情報共有を可能とする通信である情報共有通信を中継する中継サーバに前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応するキー情報を作成させ、前記中継サーバから前記第1端末装置及び前記第2端末装置に送信された当該キー情報に基づいて、前記ピア・トゥー・ピアモードのセションから切り替えて、前記中継サーバを介した中継モードのセションを前記第1アプリケーションと前記第2アプリケーションとの間に構築するとともに、前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応する前記キー情報に基づいて、前記第1アプリケーションと前記第3アプリケーションとの間の前記中継モードのセションを構築する
端末間通信システム。
A terminal information receiving unit for receiving terminal information including terminal identification information for identifying a terminal device and application identification information for identifying an application operating in the terminal device from the terminal device;
A session between a first application that operates on a first terminal device among the plurality of terminal devices and a second application that operates on a second terminal device different from the first terminal device among the plurality of terminal devices. The session building department to build,
Compatibility between the first application and a third application that operates in a third terminal device different from the first terminal device and the second terminal device among the plurality of terminal devices is determined as the terminal identification information or the application identification. A suitability determination unit for determining based on the information;
A determination result transmission unit that transmits a determination result by the suitability determination unit to the first application in response to an information sharing request transmitted by the first application;
With
The session is constructed based on key information corresponding to the session,
The session construction unit
In response to a request to start communication with the third application transmitted by the first application, a session between the first application and the third application is transmitted to the terminal information of the first terminal device and the third application. Based on the terminal information of the terminal device,
When a peer-to-peer mode session is established in which the first terminal device and the second terminal device communicate directly, a request for voice communication from the third terminal device to the first terminal device is received. In response, key information corresponding to a session between the first application and the second application is created in a relay server that relays information sharing communication, which is communication that enables information sharing between the plurality of terminal devices. is allowed, based on the transmitted the key information from the relay server to the first terminal device and said second terminal apparatus, by switching from session of the peer-to-peer mode, the session of the relay mode via the relay server Is constructed between the first application and the second application, and the first application and the second application Based on the key information corresponding to the session between ® emissions, terminal communication system for constructing a session of the relay mode between the first application and the third application.
前記セション構築部は、前記第1アプリケーションが送信する前記第3アプリケーションとの前記通信開始の要求に応じて、前記第2アプリケーションと前記第3アプリケーションとの間のセションを、前記第2端末装置の前記端末情報と前記第3端末装置の前記端末情報に基づいて構築する
請求項1に記載の端末間通信システム。
In response to the communication start request with the third application transmitted by the first application, the session construction unit performs a session between the second application and the third application of the second terminal device. The inter-terminal communication system according to claim 1, wherein the communication is established based on the terminal information and the terminal information of the third terminal device.
前記セション構築部は、前記第1アプリケーションから送信される前記第2端末装置を識別する第2端末識別情報に基づいて、前記第2アプリケーションと前記第3アプリケーションとの間のセションを構築する
請求項2に記載の端末間通信システム。
The session construction unit constructs a session between the second application and the third application based on second terminal identification information for identifying the second terminal device transmitted from the first application. The inter-terminal communication system according to 2.
前記第1アプリケーションが前記第2アプリケーション又は前記第3アプリケーションのいずれか一方から受信した情報を、他方のアプリケーションに送信するか否かを判定する送信判定部、
をさらに備える請求項1から請求項3のいずれか一項に記載の端末間通信システム。
A transmission determination unit that determines whether or not the first application transmits information received from either the second application or the third application to the other application;
The inter-terminal communication system according to any one of claims 1 to 3, further comprising:
端末装置を識別する端末識別情報と、前記端末装置において動作するアプリケーションを識別するアプリケーション識別情報とを含む端末情報を前記端末装置から受信する端末情報受信部と、
複数の前記端末装置のうち第1端末装置において動作する第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置とは異なる第2端末装置において動作する第2アプリケーションとの間のセションを構築するセション構築部と、
前記第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置及び第2端末装置とは異なる第3端末装置において動作する第3アプリケーションとの適合性を、前記端末識別情報又は前記アプリケーション識別情報に基づいて判定する適合性判定部と、
前記第1アプリケーションが送信する情報共有の要求に応じて、前記適合性判定部による判定結果を前記第1アプリケーションに送信する判定結果送信部と、
を備え、
前記セションは、セションに対応するキー情報に基づいて構築され、
前記セション構築部は、
前記第1アプリケーションが送信する前記第3アプリケーションとの通信開始の要求に応じて、前記第1アプリケーションと前記第3アプリケーションとの間のセションを、前記第1端末装置の前記端末情報と前記第3端末装置の前記端末情報とに基づいて構築し、
前記第1端末装置と前記第2端末装置とが直接通信するピア・トゥー・ピアモードのセションが構築されている場合に、前記第3端末装置からの前記第1端末装置への音声通信の要求に応じて、複数の前記端末装置の間で情報共有を可能とする通信である情報共有通信を中継する中継サーバに前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応するキー情報を作成させ、前記中継サーバから前記第1端末装置及び前記第2端末装置に送信された当該キー情報に基づいて、前記ピア・トゥー・ピアモードのセションから切り替えて、前記中継サーバを介した中継モードのセションを前記第1アプリケーションと前記第2アプリケーションとの間に構築するとともに、前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応する前記キー情報に基づいて、前記第1アプリケーションと前記第3アプリケーションとの間の前記中継モードのセションを構築する
サーバ。
A terminal information receiving unit for receiving terminal information including terminal identification information for identifying a terminal device and application identification information for identifying an application operating in the terminal device from the terminal device;
A session between a first application that operates on a first terminal device among the plurality of terminal devices and a second application that operates on a second terminal device different from the first terminal device among the plurality of terminal devices. The session building department to build,
Compatibility between the first application and a third application that operates in a third terminal device different from the first terminal device and the second terminal device among the plurality of terminal devices is determined as the terminal identification information or the application identification. A suitability determination unit for determining based on the information;
A determination result transmission unit that transmits a determination result by the suitability determination unit to the first application in response to an information sharing request transmitted by the first application;
With
The session is constructed based on key information corresponding to the session,
The session construction unit
In response to a request to start communication with the third application transmitted by the first application, a session between the first application and the third application is transmitted to the terminal information of the first terminal device and the third application. Based on the terminal information of the terminal device,
When a peer-to-peer mode session is established in which the first terminal device and the second terminal device communicate directly, a request for voice communication from the third terminal device to the first terminal device is received. In response, key information corresponding to a session between the first application and the second application is created in a relay server that relays information sharing communication, which is communication that enables information sharing between the plurality of terminal devices. is allowed, based on the transmitted the key information from the relay server to the first terminal device and said second terminal apparatus, by switching from session of the peer-to-peer mode, the session of the relay mode via the relay server Is constructed between the first application and the second application, and the first application and the second application Based on the key information corresponding to the session between ® down, to build a session of the relay mode between the first application and the third application server.
端末装置とサーバとを含む端末間通信システムにおける端末間通信方法であって、
前記サーバが、前記端末装置を識別する端末識別情報と、前記端末装置において動作するアプリケーションを識別するアプリケーション識別情報とを含む端末情報を前記端末装置から受信する第1ステップと、
前記サーバが、複数の前記端末装置のうち第1端末装置において動作する第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置とは異なる第2端末装置において動作する第2アプリケーションとの間のセションを構築する第2ステップと、
前記サーバが、前記第1アプリケーションと、複数の前記端末装置のうち前記第1端末装置及び第2端末装置とは異なる第3端末装置において動作する第3アプリケーションとの適合性を、前記端末識別情報又は前記アプリケーション識別情報に基づいて判定する第3ステップと、
前記サーバが、前記第1アプリケーションが送信する情報共有の要求に応じて、前記第3ステップにおける判定結果を前記第1アプリケーションに送信する第4ステップと、
前記サーバが、前記第1アプリケーションが送信する前記第3アプリケーションとの通信開始の要求に応じて、前記第1アプリケーションと前記第3アプリケーションとの間のセションを、前記第1端末装置の前記端末情報と前記第3端末装置の前記端末情報とに基づいて構築する第5ステップと、
を含み、
前記セションは、セションに対応するキー情報に基づいて構築され、
前記第5ステップにおいて、前記サーバが、前記第1端末装置と前記第2端末装置とが直接通信するピア・トゥー・ピアモードのセションが構築されている場合に、前記第3端末装置からの前記第1端末装置への音声通信の要求に応じて、複数の前記端末装置の間で情報共有を可能とする通信である情報共有通信を中継する中継サーバに前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応するキー情報を作成させ、前記中継サーバから前記第1端末装置及び前記第2端末装置に送信された当該キー情報に基づいて、前記ピア・トゥー・ピアモードのセションから切り替えて、前記中継サーバを介した中継モードのセションを前記第1アプリケーションと前記第2アプリケーションとの間に構築するとともに、前記第1アプリケーションと前記第2アプリケーションとの間のセションに対応する前記キー情報に基づいて、前記第1アプリケーションと前記第3アプリケーションとの間の前記中継モードのセションを構築する
端末間通信方法。
A communication method between terminals in a communication system between terminals including a terminal device and a server,
A first step in which the server receives terminal information including terminal identification information for identifying the terminal apparatus and application identification information for identifying an application operating in the terminal apparatus from the terminal apparatus;
A first application that operates on a first terminal device among the plurality of terminal devices; and a second application that operates on a second terminal device different from the first terminal device among the plurality of terminal devices. A second step of building a session between,
The terminal identification information indicates compatibility between the first application and a third application that operates on a third terminal device different from the first terminal device and the second terminal device among the plurality of terminal devices. Or a third step of determining based on the application identification information;
A fourth step in which the server transmits a determination result in the third step to the first application in response to an information sharing request transmitted by the first application;
In response to a request to start communication with the third application transmitted by the first application, the server sends a session between the first application and the third application to the terminal information of the first terminal device. And a fifth step constructed based on the terminal information of the third terminal device;
Including
The session is constructed based on key information corresponding to the session,
In the fifth step, when the server establishes a peer-to-peer mode session in which the first terminal device and the second terminal device communicate directly, the third terminal device sends the second In response to a request for voice communication to one terminal device, the first application and the second application are relayed to a relay server that relays information sharing communication, which is communication that enables information sharing between the plurality of terminal devices . Key information corresponding to the session between the relay server , based on the key information transmitted from the relay server to the first terminal device and the second terminal device, switch from the peer-to-peer mode session, with building a session relay mode via the relay server between the first application second application, wherein Based on the key information corresponding to the session between the one application second application, terminal-to-terminal communication method for constructing a session of the relay mode between the first application and the third application.
JP2014217420A 2014-10-24 2014-10-24 Inter-terminal communication system, server, and inter-terminal communication method Active JP6254067B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014217420A JP6254067B2 (en) 2014-10-24 2014-10-24 Inter-terminal communication system, server, and inter-terminal communication method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014217420A JP6254067B2 (en) 2014-10-24 2014-10-24 Inter-terminal communication system, server, and inter-terminal communication method

Publications (2)

Publication Number Publication Date
JP2016086274A JP2016086274A (en) 2016-05-19
JP6254067B2 true JP6254067B2 (en) 2017-12-27

Family

ID=55971916

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014217420A Active JP6254067B2 (en) 2014-10-24 2014-10-24 Inter-terminal communication system, server, and inter-terminal communication method

Country Status (1)

Country Link
JP (1) JP6254067B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018042204A (en) * 2016-09-09 2018-03-15 株式会社東芝 Electronic apparatus
JPWO2018084033A1 (en) * 2016-11-01 2019-09-19 コニカミノルタ株式会社 Shared apparatus, operation control program, and operation control method
KR101883445B1 (en) * 2016-12-20 2018-08-30 에스케이텔레콤 주식회사 Signaling server apparatus and driving method thereof

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217446A (en) * 2005-02-07 2006-08-17 Hitachi Software Eng Co Ltd Remote conference system
WO2008149780A1 (en) * 2007-05-30 2008-12-11 Kyocera Corporation Radio communication system, management server, radio communication terminal, and radio communication method
JP2011211490A (en) * 2010-03-30 2011-10-20 Panasonic Corp Vpn device, ip communication apparatus, and server device
JP6156618B2 (en) * 2012-11-29 2017-07-05 株式会社コナミデジタルエンタテインメント Message sharing device, message sharing method, message sharing program, and terminal device control program
EP2950511B1 (en) * 2013-01-28 2020-08-12 Sony Corporation Wireless communication device, communication system, method for controlling wireless communication device, and program
JP6097679B2 (en) * 2013-02-28 2017-03-15 エルジー アプラス コーポレーション Inter-terminal function sharing method and terminal

Also Published As

Publication number Publication date
JP2016086274A (en) 2016-05-19

Similar Documents

Publication Publication Date Title
EP3005650B1 (en) Maintaining video conference session continuity during transfer of session to alternative device
US9319229B2 (en) Transmission terminal and method of transmitting display data
KR102145089B1 (en) Seamless call transitions with pre-escalation participation confirmation
KR101203248B1 (en) Network system, communication terminal, communication method, and computer readable recording medium having communication program
TW201507436A (en) Using physical gestures to initiate call transfers between devices
US10420011B2 (en) Communication system, transmission terminal, communication method, and medium
US20130219288A1 (en) Transferring of Communication Event
US10735477B2 (en) System, apparatus and associated methodology for establishing multiple data communications between terminals
CN110830933B (en) Electronic device and communication relay method thereof
US11431718B2 (en) Text chat management system connected to a video conference management system
US9826556B2 (en) Apparatus and method for data transmission and reception of a mobile terminal
US20170063939A1 (en) Control apparatus, communications control system, and non-transitory recording medium that stores program
JP6254067B2 (en) Inter-terminal communication system, server, and inter-terminal communication method
US20170041399A1 (en) Communications management system, communications system, non-transitory recording medium, and communications management method
JP5354571B2 (en) Network system, communication apparatus, communication method, and communication program
JP6081973B2 (en) Inter-terminal communication system, inter-terminal communication method, and inter-terminal communication program
JP2017175638A (en) Terminal device, terminal-to-terminal communication method and terminal device program
JP6509917B2 (en) Inter-terminal communication system, inter-terminal communication method, inter-terminal communication program, and communication server
JP2018117394A (en) Inter-terminal communication system, server device and method
US10904301B2 (en) Conference system and method for handling conference connection thereof
JP6499094B2 (en) Terminal device, information providing method, and computer program
JP2016072874A (en) End-to-end communication system, end-to-end communication method, and terminal device
JP6059699B2 (en) Terminal device, operation reception method, and program
JP2015072668A (en) Application cooperative execution terminal, application cooperative execution method, and application cooperative execution terminal program
JP2017135504A (en) Terminal device, communication method, and program

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160906

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161102

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20161104

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170516

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170628

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20170629

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171129

R150 Certificate of patent or registration of utility model

Ref document number: 6254067

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150