JP5694746B2 - COMMUNICATION METHOD, CLIENT DEVICE, AND MULTIMEDIA COMMUNICATION SYSTEM INCLUDING THE SAME - Google Patents
COMMUNICATION METHOD, CLIENT DEVICE, AND MULTIMEDIA COMMUNICATION SYSTEM INCLUDING THE SAME Download PDFInfo
- Publication number
- JP5694746B2 JP5694746B2 JP2010270684A JP2010270684A JP5694746B2 JP 5694746 B2 JP5694746 B2 JP 5694746B2 JP 2010270684 A JP2010270684 A JP 2010270684A JP 2010270684 A JP2010270684 A JP 2010270684A JP 5694746 B2 JP5694746 B2 JP 5694746B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- display
- information
- communication
- transfer path
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本発明は、通信方法、クライアント装置、及びそれを備えるマルチメディア通信システムに関する。 The present invention relates to a communication method, a client device, and a multimedia communication system including the same.
従来、ネットワークを介した接続された複数の情報端末装置間にて情報交換が行われている。例えば、複数のユーザが通信ネットワークを利用してリアルタイムにメッセージを交換することができるチャットシステムや、複数の情報端末装置間でネットワークを介して意見や資料を電子データとして送受信することができる電子会議システムなどが活用されている。これらの通信システムでは、テキストデータのほか、画像データや動画データ、音声データなどの様々なマルチメディアコンテントが送受信されている。 Conventionally, information is exchanged between a plurality of information terminal devices connected via a network. For example, a chat system in which a plurality of users can exchange messages in real time using a communication network, and an electronic conference in which opinions and materials can be transmitted and received as electronic data between a plurality of information terminal devices via the network System etc. are utilized. In these communication systems, in addition to text data, various multimedia contents such as image data, moving image data, and audio data are transmitted and received.
たとえば、特許文献1では、第1及び第2情報処理装置間でテキストデータやAVデータを送受信するテレビ電話通信を行う情報処理システムが開示されている。この情報処理システムでは、各情報処理装置は受信したデータを表示画面の予め定められた位置に表示している。
For example,
ここで、特許文献1の情報処理システムでは、送信側の情報処理装置は、送信するデータが表示画面上でどのように表示されるのかを示す表示属性を指定して、受信側の情報処理装置にデータを送信することはできない。そのため、各情報処理装置のユーザが表示画面から得られる視覚的な情報を活用する手段に欠けている。
Here, in the information processing system of
本発明は、複数の情報端末間で送受信されるマルチメディアコンテントを、送信側の情報端末が指定した表示属性で、受信側の情報端末に表示させ、表示画面から得られる視覚的な情報を積極的に活用することができる通信方法、クライアント装置、及びそれを備えるマルチメディア通信システムを提供することを目的とする。 In the present invention, multimedia content transmitted / received between a plurality of information terminals is displayed on a receiving information terminal with display attributes designated by the transmitting information terminal, and visual information obtained from the display screen is actively displayed. It is an object to provide a communication method, a client device, and a multimedia communication system including the same.
上記目的を達成するために本発明は、通信サーバにネットワークを介して接続される複数のクライアント装置間に、コンテントが転送されるコンテント転送経路が開設され、前記コンテント転送経路を介して転送される前記コンテントがクライアント装置の表示部に表示されるための通信方法において、前記コンテントのコンテントIDと、転送された前記コンテントが格納される表示要素情報の表示要素IDと、前記コンテントの表示属性を示す表示属性情報とを有するとともに、前記コンテントIDと前記表示要素IDとが対応付けられた転送経路設定情報が、第1クライアント装置から前記ネットワーク及び前記通信サーバを介して、第2クライアント装置に送信されるステップと、前記通信サーバから提供される通信機能により、前記第1クライアント装置及び前記第2クライアント装置の間に、前記転送経路設定情報に基づいて、前記コンテント転送経路が開設されるステップと、前記第1クライアント装置から、前記コンテント転送経路を介して前記第2クライアント装置に、前記コンテントが転送されるステップと、を備える。
In order to achieve the above object, the present invention establishes a content transfer path for transferring content between a plurality of client devices connected to a communication server via a network, and transfers the content via the content transfer path. In the communication method for displaying the content on the display unit of the client device, the content ID of the content, the display element ID of the display element information in which the transferred content is stored, and the display attribute of the content Transfer path setting information having display attribute information and the content ID and the display element ID associated with each other is transmitted from the first client device to the second client device via the network and the communication server. And the communication function provided by the communication server A step of establishing the content transfer path between the first client apparatus and the second client apparatus based on the transfer path setting information; and from the first client apparatus via the
上記構成によれば、コンテント転送経路を介して転送されるコンテントの識別子であるコンテントIDと、転送されたコンテントが格納される表示要素情報の識別子である表示要素IDと、コンテントの表示属性を示す表示属性情報とを有するとともに、コンテントIDと表示要素IDとが対応付けられた転送経路設定情報が、第1クライアント装置からネットワーク及び通信サーバを介して、第2クライアント装置に送信される。そして、第1クライアント装置と第2クライアント装置との間に、転送経路設定情報に基づいて、コンテント転送経路が開設される。転送経路設定情報では、コンテントIDとコンテントを格納する表示要素情報の表示要素IDとが対応付けられている。そのため、コンテント転送経路を介して転送されるコンテント及びその表示属性情報を、表示画面上の表示要素に対応付けることができる。従って、転送されるコンテントを、表示属性情報が示す表示属性で、第2クライアント装置の表示部に表示することができる。よって、送信側のクライアント装置のユーザは、指定する表示属性で、受信側のクライアント装置の表示部に、転送したコンテントを表示させることができる。そのため、各クライアント装置のユーザは、表示部の表示画面から得られる視覚的な情報を積極的に活用することができる。 According to the above configuration, the content ID that is the identifier of the content transferred through the content transfer path, the display element ID that is the identifier of the display element information in which the transferred content is stored, and the display attribute of the content The transfer path setting information having the display attribute information and the content ID and the display element ID associated with each other is transmitted from the first client device to the second client device via the network and the communication server. A content transfer path is established between the first client apparatus and the second client apparatus based on the transfer path setting information. In the transfer path setting information, the content ID is associated with the display element ID of the display element information for storing the content. Therefore, the content transferred through the content transfer path and the display attribute information thereof can be associated with the display element on the display screen. Therefore, the transferred content can be displayed on the display unit of the second client device with the display attribute indicated by the display attribute information. Therefore, the user of the client device on the transmission side can display the transferred content on the display unit of the client device on the reception side with the display attribute specified. Therefore, the user of each client device can positively utilize the visual information obtained from the display screen of the display unit.
上記構成において、前記第2クライアント装置において、前記コンテントIDと対応する前記表示要素IDにより特定される前記表示要素情報に、前記表示属性情報が上書きされるステップをさらに備えるものとしてもよい。 In the above configuration, the second client device may further include a step of overwriting the display attribute information on the display element information specified by the display element ID corresponding to the content ID.
このようにすることによって、各クライアント装置において、コンテントと表示画面上の表示要素との対応関係を保ったまま、個別に、表示画面上の表示要素の表示属性を管理することができる。 In this way, the display attributes of the display elements on the display screen can be individually managed in each client device while maintaining the correspondence between the content and the display elements on the display screen.
また、上記構成において、前記表示属性情報は、前記コンテントが前記表示部の表示画面上で表示される位置を示す表示位置情報と、前記コンテントが前記表示画面上で表示されるサイズを示す表示サイズ情報と、を有するものとしてもよく、さらに、前記表示サイズ情報は、前記コンテントの前記表示サイズとして、前記表示画面の解像度に対する相対的な表示サイズを示すものとしてもよい。 In the above configuration, the display attribute information includes display position information indicating a position at which the content is displayed on the display screen of the display unit, and a display size indicating a size at which the content is displayed on the display screen. Further, the display size information may indicate a display size relative to the resolution of the display screen as the display size of the content.
このようにすることによって、送信側のクライアント装置のユーザは、表示属性として指定した表示位置及び表示サイズで、転送したコンテントを、受信側のクライアント装置の表示部に表示させることができる。また、送信側のクライアント装置と受信側のクライアント装置とで、表示部の表示解像度が異なっている場合であっても、送信側のユーザが指定する表示属性で、受信側のクライアント装置の表示部に、コンテントを適切な表示構造で表示することができる。たとえば、送信側と受信側とで表示部の表示解像度が異なっている場合であっても、コンテントの表示サイズが大きすぎたり小さすぎたりすることがなく、また、いわゆる「画面切れ」して表示されるおそれがない。そのため、各クライアント装置のユーザは、表示部の表示画面から得られる視覚的な情報を積極的に活用することができる。 By doing so, the user of the client device on the transmission side can display the transferred content on the display unit of the client device on the reception side at the display position and display size specified as the display attributes. In addition, even when the display client has a display resolution that is different between the client device on the transmission side and the client device on the reception side, the display unit of the client device on the reception side has the display attribute specified by the user on the transmission side. In addition, the content can be displayed with an appropriate display structure. For example, even if the display resolution of the display unit is different between the transmission side and the reception side, the content display size is not too large or too small, and the so-called “screen is cut” is displayed. There is no fear of being done. Therefore, the user of each client device can positively utilize the visual information obtained from the display screen of the display unit.
また、上記構成において、前記転送経路設定情報は、前記コンテントID及び前記表示属性情報を含むカスケーディングスタイルシートを有するものとしてもよい。 In the above configuration, the transfer path setting information may include a cascading style sheet including the content ID and the display attribute information.
カスケーディングスタイルシートを利用することにより、送信側のクライアント装置のユーザは、転送するコンテントの表示属性を、htmlで表現可能な表示属性を指定することができる。従って、発信側のクライアント装置のユーザは、転送するコンテントの表示属性を、より簡便且つ明確に指定することができる。 By using the cascading style sheet, the user of the client device on the transmission side can specify a display attribute that can represent the display attribute of the content to be transferred in html. Therefore, the user of the originating client device can more easily and clearly specify the display attribute of the content to be transferred.
また、上記構成において、前記表示属性情報及び前記表示要素情報は、htmlファイルであるものとしてもよい。ここで、htmlファイルとは、XMPPに準拠した通信に適合するhtml(Hyper Text Markup Language)にて表現し得る形式のデータである。 In the above configuration, the display attribute information and the display element information may be html files. Here, the html file is data in a format that can be expressed in html (Hyper Text Markup Language) compatible with communication conforming to XMPP.
このようにすることによって、表示属性情報、及び表示要素情報を、Webブラウザで利用されているhtml形式での記述で表現することができる。すなわち、これらの情報とhtmlの表示要素とを対応付けることができるので、XMPPによるメッセージングとWebやhtmlとを結びつけることができる。 By doing so, the display attribute information and the display element information can be expressed by a description in the html format used in the Web browser. That is, since these pieces of information can be associated with html display elements, messaging by XMPP can be linked to the Web and html.
また、上記構成において、前記コンテントは複数であって、前記コンテント転送経路は、それぞれの前記コンテントが転送される複数の転送回線からなり、それぞれの前記コンテント毎に、対応する前記コンテントID、前記表示要素ID、及び前記表示属性情報が設定されるものとしてもよい。 Further, in the above configuration, the content is plural, and the content transfer path includes a plurality of transfer lines through which the content is transferred, and for each content, the corresponding content ID, the display The element ID and the display attribute information may be set.
このようにすることによって、複数のコンテントを転送する場合であっても、送信側のクライアント装置のユーザは、コンテント毎に別々の転送回線を介して、各コンテントを転送することができる。さらに、送信側のクライアント装置のユーザは、それぞれのコンテントの表示属性を個別に指定することができる。従って、受信側のクライアント装置の表示部に、各コンテントを個別に設定された表示属性で表示させることができる。 In this way, even when transferring a plurality of contents, the user of the client device on the transmission side can transfer each content via a separate transfer line for each content. Furthermore, the user of the client device on the transmission side can individually specify the display attribute of each content. Therefore, each content can be displayed on the display unit of the client device on the receiving side with display attributes set individually.
また、上記構成において、前記通信サーバは、前記複数のクライアント装置にXMPPに準拠する通信機能を提供するXMPPサーバであり、前記転送経路設定情報が送信されるステップ、及び前記コンテント転送経路が開設されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われるものとしてもよい。 Further, in the above configuration, the communication server is an XMPP server that provides a communication function compliant with XMPP to the plurality of client devices, the step of transmitting the transfer path setting information, and the content transfer path are established. This step may be performed using XEP-0166 (Jingle), which is an XMPP communication protocol.
このようにすることによって、各クライアント装置は、XMPPサーバからXMPPに準拠した通信機能の提供を受けることができるので、コンテント転送経路の開設、及びコンテントの転送を動的且つリアルタイムに行うことができる。また、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用してコンテント転送経路を開設することにより、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線を、同一の手順で簡便に開設することができる。 In this way, each client device can be provided with an XMPP-compliant communication function from the XMPP server, so that a content transfer path can be established and content can be transferred in real time. . Also, any kind of multimedia content (text, video, sound, image, etc.) is transferred by establishing a content transfer path using XEPP166 (Jingle), which is an XMPP protocol (communication protocol). A transfer line can be easily established by the same procedure.
なお、XMPP(eXtensible Messaging and Presence Protocol)とは、IETF(Internet Engineering Task Force)のXMPPワーキンググループから独立したXSF(XMPP Standards Foundation)により規格・標準化が進められているXMLベースのプロトコル(通信規約)である。XMPPは、インスタントメッセージ、プレゼンス(「相手が今どういう状態にあるのか」)、多人数チャット、音声またはテレビ電話、協調作業、コンテンツ・シンジケーション、XMLデータの一般化ルーティングなどを含む広範囲のアプリケーションを動的に制御し、インターネットなどの通信システムにおいてリアルタイムなコミュニケーションを行うために、それぞれの目的に応じて規格化された複数の拡張プロトコル(XEP:XMPP Extension Protocol)からなっている。 XMPP (eXtensible Messaging and Presence Protocol) is an XML-based protocol (communication protocol) that is being standardized and standardized by the XMPP (XMPP Standards Foundation) independent of the XMPP working group of the Internet Engineering Task Force (IETF). It is. XMPP runs a wide range of applications including instant messaging, presence ("what the person is now"), multi-person chat, voice or videophone, collaborative work, content syndication, generalized routing of XML data, etc. In order to perform control in real time and perform real-time communication in a communication system such as the Internet, it consists of a plurality of extension protocols (XEP: XMPP Extension Protocol) standardized for each purpose.
また、XEP−0166(Jingle)は、2つの通信可能な端末装置の間にデータを送受信する通信経路を確立する機能を規定したプロトコル(通信規約)である。 XEP-0166 (Jingle) is a protocol (communication protocol) that defines a function of establishing a communication path for transmitting and receiving data between two communicable terminal devices.
また、上記構成において、前記コンテント転送経路を介してさらに転送される第1コンテントの第1コンテントIDと、前記第1コンテントIDと対応付けられる第1表示要素IDと、前記第1コンテントの第1表示属性情報と、がさらに加えられる第1転送経路設定情報が、前記第1クライアント装置から前記ネットワーク及び前記通信サーバを介して、前記第2クライアント装置に送信されるステップと、前記通信サーバから提供される前記通信機能により、前記第1クライアント装置及び前記第2クライアント装置の間に、前記第1コンテントを転送する第1転送回線が、前記第1転送経路設定情報に基づいて開設されるステップと、をさらに備えるものとしてもよい。 In the above configuration, the first content ID of the first content that is further transferred through the content transfer path, the first display element ID that is associated with the first content ID, and the first content ID of the first content. First transfer route setting information to which display attribute information is further added is transmitted from the first client device to the second client device via the network and the communication server, and provided from the communication server A first transfer line for transferring the first content between the first client device and the second client device is established based on the first transfer path setting information by the communication function. , May be further provided.
このようにすることによって、各クライアント装置間に転送回線を動的にさらに開設して、コンテント転送経路に追加することができる。従って、送信側のクライアント装置のユーザは、コンテント転送経路を介して転送するコンテントを任意に追加して、動的に転送することができる。さらに、送信側のクライアント装置のユーザは、追加したコンテントを、指定する表示属性で、受信側のクライアント装置の表示部に表示させることができる。 By doing so, it is possible to dynamically open a transfer line between the client apparatuses and add it to the content transfer path. Therefore, the user of the client device on the transmission side can dynamically add the content to be transferred via the content transfer path and transfer it dynamically. Furthermore, the user of the client device on the transmission side can display the added content on the display unit of the client device on the reception side with the specified display attribute.
また、上記構成において、前記第2クライアント装置において、前記第1コンテントIDと対応する前記第1表示要素IDにより特定される前記第1表示要素情報に、前記第1表示属性情報が上書きされるステップをさらに備えるものとしてもよい。 In the above configuration, in the second client device, the first display attribute information is overwritten on the first display element information specified by the first display element ID corresponding to the first content ID. It is good also as what further comprises.
このようにすることによって、転送されるコンテントが任意に追加されても、各クライアント装置において、コンテントと表示画面上の表示要素との対応関係を保ったまま、個別に、表示画面上の表示要素の表示属性を管理することができる。 In this way, even if the content to be transferred is arbitrarily added, the display elements on the display screen are individually maintained while maintaining the correspondence between the contents and the display elements on the display screen in each client device. Can manage display attributes.
また、上記構成において、前記通信サーバは、前記複数のクライアント装置にXMPPに準拠する通信機能を提供するXMPPサーバであり、前記第1転送経路設定情報が送信されるステップ、及び前記第1転送回線が開設されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われるものとしてもよい。 Further, in the above configuration, the communication server is an XMPP server that provides a communication function compliant with XMPP to the plurality of client devices, the step of transmitting the first transfer path setting information, and the first transfer line May be performed using the XMPP communication protocol XEP-0166 (Jingle).
このようにすることによって、各クライアント装置は、XMPPサーバからXMPPに準拠した通信機能の提供を受けることができるので、追加されたコンテントを転送するための転送回線の開設、及びそのコンテントの転送を動的且つリアルタイムに行うことができる。また、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用することができるので、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線を同一の手順で簡便且つ動的に、追加して開設することができる。 By doing so, each client device can receive provision of a communication function compliant with XMPP from the XMPP server, so that a transfer line for transferring the added content and the transfer of the content can be transferred. It can be done dynamically and in real time. In addition, XEP-0166 (Jingle), which is an XMPP protocol (communication protocol), can be used, so that the same transfer line for transferring any kind of multimedia content (text, video, audio, image, etc.) can be used. It can be added and opened simply and dynamically in the procedure.
また、上記構成において、前記コンテント転送経路のうちの少なくとも1つの第2転送回線の接続が切断されるステップをさらに備え、前記第2転送回線の接続が切断されるステップは、前記第2転送回線により転送される第2コンテントの第2コンテントIDと、前記第2コンテントIDと対応付けられた第2表示要素IDと、前記第2コンテントの第2表示属性情報とが削除された第2転送経路設定情報が、前記第1クライアント装置から前記ネットワーク及び前記通信サーバを介して、前記第2クライアント装置に送信されるステップと、前記通信サーバから提供される前記通信機能により、前記第2転送経路設定情報に基づいて、前記第2転送回線の接続が切断されるステップと、を有するものとしてもよい。 Further, in the above configuration, the method further includes a step of disconnecting at least one second transfer line of the content transfer path, wherein the step of disconnecting the second transfer line includes the second transfer line. The second transfer path from which the second content ID of the second content transferred by the second content element, the second display element ID associated with the second content ID, and the second display attribute information of the second content are deleted. The setting information is transmitted from the first client device to the second client device via the network and the communication server, and the second transfer path setting is performed by the communication function provided from the communication server. And a step of disconnecting the second transfer line based on the information.
このようにすることによって、各クライアント装置間に開設されたコンテント転送経路を構成する転送回線のうちの少なくとも1つの接続を動的に切断することができる。従って、各クライアント装置間で転送されるコンテントの数を任意に削減することができる。 By doing so, it is possible to dynamically disconnect at least one of the transfer lines constituting the content transfer path established between the client apparatuses. Accordingly, it is possible to arbitrarily reduce the number of contents transferred between the client apparatuses.
また、上記構成において、前記通信サーバは、前記複数のクライアント装置にXMPPに準拠する通信機能を提供するXMPPサーバであり、前記第2転送経路設定情報が送信されるステップ、及び前記第2転送回線の接続が切断されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われるものとしてもよい。 Further, in the above configuration, the communication server is an XMPP server that provides a communication function compliant with XMPP to the plurality of client devices, the step of transmitting the second transfer path setting information, and the second transfer line The step of disconnecting the connection may be performed using XEP-0166 (Jingle), which is an XMPP communication protocol.
このようにすることによって、各クライアント装置は、XMPPサーバからXMPPに準拠した通信機能の提供を受けて、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用することができるので、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線の接続を、同一の手順で簡便且つ動的に、切断することができる。 By doing so, each client device can use the XMPP protocol (communication protocol) XEP-0166 (Jingle) by receiving provision of a communication function compliant with XMPP from the XMPP server. The connection of the transfer line for transferring any kind of multimedia content (text, moving image, sound, image, etc.) can be simply and dynamically disconnected by the same procedure.
また、上記構成において、前記コンテント転送経路は、前記第1クライアント装置と前記第2クライアント装置との間に開設される論理的な通信経路であるとともに、前記ネットワークとは論理的に異なる通信経路であるものとしてもよい。なお、論理的な通信経路とは、物理的に見た通信回線が有する論理的に見た仮想の通信回線(論理回線)である。たとえば、物理的には通信回線が1本であっても、複数の論理回線(論理的な通信経路)を設定することができる。また、各論理回線では異なったデータ通信を行うことができる。 In the above configuration, the content transfer path is a logical communication path established between the first client apparatus and the second client apparatus, and is a communication path logically different from the network. There may be. The logical communication path is a logically viewed virtual communication line (logical line) of a physically viewed communication line. For example, even if there is physically one communication line, a plurality of logical lines (logical communication paths) can be set. Also, different data communication can be performed on each logical line.
このようにすることによって、各クライアント装置間にコンテントが直接に転送される直通のコンテント転送経路を開設するとき、新たに物理的な通信回線を設ける必要がない。すなわち、既存の物理的な通信回線を利用して、コンテント転送経路を開設することができる。また、ネットワークとコンテント転送経路とが物理的に同じ通信回線を利用する場合であっても、それらは、異なる論理回線とすることができる。 By doing so, it is not necessary to provide a new physical communication line when establishing a direct content transfer path through which content is directly transferred between the client apparatuses. That is, a content transfer path can be established using an existing physical communication line. Even if the network and the content transfer path use the same communication line physically, they can be different logical lines.
上記目的を達成するために本発明は、通信サーバにネットワークを介して接続され、コンテントが転送されるコンテント転送経路が他のクライアント装置間に開設される通信部と、前記コンテントが表示される表示部と、前記コンテントのコンテントIDと、転送された前記コンテントが格納される表示要素情報の表示要素IDと、前記コンテントの表示属性を示す表示属性情報とを有する転送経路設定情報を、前記通信部から前記ネットワーク及び前記通信サーバを介して前記他のクライアント装置に送信し、前記通信サーバから提供される通信機能により、前記転送経路設定情報に基づいて、前記コンテント転送経路を開設するクライアント制御部と、前記通信部から前記コンテント転送経路を介して前記他のクライアント装置に、前記コンテントを転送するとともに、前記他のクライアント装置から前記コンテント転送経路を介して前記通信部に転送されたコンテントを前記表示要素情報に格納する表示要素制御部と、前記表示要素情報に格納された前記コンテントを、前記表示属性情報に基づいて前記表示部に表示する表示仕様制御部と、を備え、前記転送経路設定情報において、前記コンテントIDと前記表示要素IDとが対応付けられる。 In order to achieve the above object, the present invention provides a communication unit that is connected to a communication server via a network and has a content transfer path for transferring content between other client devices, and a display for displaying the content. Transfer path setting information including a content element ID, a content ID of the content, a display element ID of display element information in which the transferred content is stored, and display attribute information indicating a display attribute of the content. A client control unit configured to open the content transfer path based on the transfer path setting information by a communication function transmitted from the network and the communication server to the other client device, and provided by the communication server; , From the communication unit to the other client device via the content transfer path, A display element control unit that stores content transferred from the other client device to the communication unit via the content transfer path in the display element information, and the display element information stored in the display element information. A display specification control unit that displays content on the display unit based on the display attribute information, and the content ID and the display element ID are associated with each other in the transfer path setting information.
上記構成によれば、クライアント制御部が、コンテント転送経路を介して転送されるコンテントの識別子であるコンテントIDと、転送されたコンテントが格納される表示要素情報の識別子である表示要素IDと、コンテントの表示属性を示す表示属性情報とを有するとともに、コンテントIDと表示要素IDとが対応付けられた転送経路設定情報を、通信部からネットワーク及び通信サーバを介して、他のクライアント装置に送信する。そして、通信部と他のクライアント装置との間に、転送経路設定情報に基づいて、コンテント転送経路が開設される。転送経路設定情報では、コンテントIDとコンテントを格納する表示要素情報の表示要素IDとが対応付けられている。そのため、コンテント転送経路を介して転送されるコンテント及びその表示属性情報を、表示画面上の表示要素に対応付けることができる。従って、転送されるコンテントを、表示属性情報が示す表示属性で、他のクライアント装置の表示部に表示することができる。よって、送信側のクライアント装置のユーザは、指定する表示属性で、受信側のクライアント装置の表示部に、転送したコンテントを表示させることができる。そのため、クライアント装置のユーザは、表示部の表示画面から得られる視覚的な情報を積極的に活用することができる。 According to the above configuration, the client control unit includes a content ID that is an identifier of content transferred via the content transfer path, a display element ID that is an identifier of display element information in which the transferred content is stored, The transfer path setting information in which the content ID and the display element ID are associated with each other is transmitted from the communication unit to another client device via the network and the communication server. Then, a content transfer path is established between the communication unit and another client device based on the transfer path setting information. In the transfer path setting information, the content ID is associated with the display element ID of the display element information for storing the content. Therefore, the content transferred through the content transfer path and the display attribute information thereof can be associated with the display element on the display screen. Therefore, the transferred content can be displayed on the display unit of another client device with the display attribute indicated by the display attribute information. Therefore, the user of the client device on the transmission side can display the transferred content on the display unit of the client device on the reception side with the display attribute specified. Therefore, the user of the client device can actively utilize visual information obtained from the display screen of the display unit.
上記構成において、前記表示要素制御部は、前記コンテントIDと対応する前記表示要素IDにより特定される前記表示要素情報に、前記表示属性情報を上書きし、前記表示仕様制御部は、前記表示要素情報に格納された前記コンテントを、上書きされた前記表示属性情報に基づいて前記表示部に表示するものとしてもよい。 In the above configuration, the display element control unit overwrites the display attribute information on the display element information specified by the display element ID corresponding to the content ID, and the display specification control unit includes the display element information. The content stored in the display unit may be displayed on the display unit based on the overwritten display attribute information.
このようにすることによって、クライアント装置は、コンテントと表示画面上の表示要素との対応関係を保ったまま、表示画面上の表示要素の表示属性を、他のクライアント装置とは個別に管理することができる。 In this way, the client device can manage the display attributes of the display elements on the display screen separately from other client devices while maintaining the correspondence between the content and the display elements on the display screen. Can do.
また、上記構成において、前記表示属性情報は、前記コンテントが前記表示部の表示画面上で表示される位置を示す表示位置情報と、前記コンテントが前記表示画面上で表示されるサイズを示す表示サイズ情報と、を有するものとしてもよく、さらに、前記表示サイズ情報は、前記コンテントの前記表示サイズとして、前記表示画面の解像度に対する相対的な表示サイズを示すものとしてもよい。 In the above configuration, the display attribute information includes display position information indicating a position at which the content is displayed on the display screen of the display unit, and a display size indicating a size at which the content is displayed on the display screen. Further, the display size information may indicate a display size relative to the resolution of the display screen as the display size of the content.
このようにすることによって、送信側のクライアント装置のユーザは、表示属性として指定した表示位置及び表示サイズで、転送したコンテントを、受信側のクライアント装置の表示部に表示させることができる。また、送信側のクライアント装置と受信側のクライアント装置とで、表示部の表示解像度が異なっている場合であっても、送信側のユーザが指定する表示属性で、受信側のクライアント装置の表示部に、コンテントを適切な表示構造で表示することができる。たとえば、送信側と受信側とで表示部の表示解像度が異なっている場合であっても、コンテントの表示サイズが大きすぎたり小さすぎたりすることがなく、また、いわゆる「画面切れ」して表示されるおそれがない。そのため、各クライアント装置のユーザは、表示部の表示画面から得られる視覚的な情報を積極的に活用することができる。 By doing so, the user of the client device on the transmission side can display the transferred content on the display unit of the client device on the reception side at the display position and display size specified as the display attributes. In addition, even when the display client has a display resolution that is different between the client device on the transmission side and the client device on the reception side, the display unit of the client device on the reception side has the display attribute specified by the user on the transmission side. In addition, the content can be displayed with an appropriate display structure. For example, even if the display resolution of the display unit is different between the transmission side and the reception side, the content display size is not too large or too small, and the so-called “screen is cut” is displayed. There is no fear of being done. Therefore, the user of each client device can positively utilize the visual information obtained from the display screen of the display unit.
また、上記構成において、前記転送経路設定情報は、前記コンテントID及び前記表示属性情報を含むカスケーディングスタイルシートを有するものとしてもよい。 In the above configuration, the transfer path setting information may include a cascading style sheet including the content ID and the display attribute information.
カスケーディングスタイルシートを利用することにより、クライアント装置のユーザは、転送するコンテントの表示属性を、htmlで表現可能な表示属性で指定することができる。従って、クライアント装置のユーザは、転送するコンテントの表示属性を、より簡便且つ明確に指定することができる。 By using the cascading style sheet, the user of the client device can specify the display attribute of the content to be transferred with a display attribute that can be expressed in html. Therefore, the user of the client device can more easily and clearly specify the display attribute of the content to be transferred.
また、上記構成において、前記表示属性情報及び前記表示要素情報は、htmlファイルであるものとしてもよい。 In the above configuration, the display attribute information and the display element information may be html files.
このようにすることによって、表示属性情報、及び表示要素情報を、Webブラウザで利用されているhtml形式での記述で表現することができる。すなわち、これらの情報とhtmlの表示要素とを対応付けることができるので、XMPPによるメッセージングとWebやhtmlとを結びつけることができる。 By doing so, the display attribute information and the display element information can be expressed by a description in the html format used in the Web browser. That is, since these pieces of information can be associated with html display elements, messaging by XMPP can be linked to the Web and html.
また、上記構成において、前記コンテントは複数であって、前記コンテント転送経路は、それぞれの前記コンテントが転送される複数の転送回線からなり、それぞれの前記コンテント毎に、対応する前記コンテントID、前記表示要素ID、及び前記表示属性情報が設定されるものとしてもよい。 Further, in the above configuration, the content is plural, and the content transfer path includes a plurality of transfer lines through which the content is transferred, and for each content, the corresponding content ID, the display The element ID and the display attribute information may be set.
このようにすることによって、複数のコンテントを転送する場合であっても、クライアント装置のユーザは、コンテント毎に別々の転送回線を介して、各コンテントを転送することができる。さらに、クライアント装置のユーザは、それぞれのコンテントの表示属性を個別に指定することができる。従って、受信側のクライアント装置の表示部に、各コンテントを個別に設定された表示属性で表示させることができる。 In this way, even when transferring a plurality of contents, the user of the client apparatus can transfer each content via a separate transfer line for each content. Further, the user of the client device can individually specify the display attribute of each content. Therefore, each content can be displayed on the display unit of the client device on the receiving side with display attributes set individually.
また、上記構成において、前記通信サーバは、XMPPに準拠する通信機能を提供するXMPPサーバであり、前記クライアント制御部は、XMPPの通信規約であるXEP−0166(Jingle)を利用して、前記転送経路設定情報を送信し、前記コンテント転送経路を開設するものとしてもよい。 In the above configuration, the communication server is an XMPP server that provides a communication function compliant with XMPP, and the client control unit uses the XMPP communication protocol XEP-0166 (Jingle) to perform the transfer. Route setting information may be transmitted to open the content transfer route.
このようにすることによって、クライアント装置は、XMPPサーバからXMPPに準拠した通信機能の提供を受けることができるので、コンテント転送経路の開設、及びコンテントの転送を動的且つリアルタイムに行うことができる。また、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用してコンテント転送経路を開設することにより、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線を、同一の手順で簡便に開設することができる。 By doing so, the client device can receive provision of a communication function compliant with XMPP from the XMPP server, so that the content transfer path can be established and the content can be transferred dynamically and in real time. Also, any kind of multimedia content (text, video, sound, image, etc.) is transferred by establishing a content transfer path using XEPP166 (Jingle), which is an XMPP protocol (communication protocol). A transfer line can be easily established by the same procedure.
また、上記構成において、前記通信部と前記他のクライアント装置との間で、前記コンテント転送経路を介して、さらに第1コンテントが転送されるとき、前記クライアント制御部は、前記第1コンテントの第1コンテントIDと、前記第1転送経路設定情報において、前記第1コンテントIDと対応付けられた第1表示要素IDとが対応付けられる第1表示要素IDと、前記第1コンテントの第1表示属性情報とをさらに有する第1転送経路設定情報を、前記通信部から前記ネットワーク及び前記通信サーバを介して、前記他のクライアント装置に送信し、前記通信サーバから提供される前記通信機能によって、前記通信部と前記他のクライアント装置との間に前記第1コンテントを転送する第1転送回線を前記第1転送経路設定情報に基づいて開設し、前記通信部が前記第1転送回線を介して前記他のクライアント装置から転送される前記第1コンテントを受け取るとき、前記表示要素制御部は、前記第1コンテントを前記第1表示要素情報に格納し、表示仕様制御部は、前記第1表示要素情報に格納された前記第1コンテントを、前記第1表示属性情報に基づいて前記表示部に表示するものとしてもよい。 Further, in the above configuration, when the first content is further transferred between the communication unit and the other client device via the content transfer path, the client control unit includes the first content of the first content. A first display element ID associated with one content ID, a first display element ID associated with the first content ID in the first transfer path setting information, and a first display attribute of the first content. First transfer path setting information further including information is transmitted from the communication unit to the other client device via the network and the communication server, and the communication function provided by the communication server allows the communication to be performed. On the basis of the first transfer path setting information, a first transfer line for transferring the first content between the communication unit and the other client device And when the communication unit receives the first content transferred from the other client device via the first transfer line, the display element control unit transfers the first content to the first display element. The information may be stored in the information, and the display specification control unit may display the first content stored in the first display element information on the display unit based on the first display attribute information.
このようにすることによって、クライアント装置は、通信部と他のクライアント装置との間に転送回線を動的にさらに開設して、コンテント転送経路に追加することができる。従って、クライアント装置のユーザは、コンテント転送経路を介して転送するコンテントを任意に追加して、動的に転送することができる。さらに、送信側のクライアント装置のユーザは、追加したコンテントを、指定する表示属性で、受信側のクライアント装置の表示部に表示させることができる。 In this way, the client device can dynamically open a transfer line between the communication unit and another client device and add it to the content transfer path. Therefore, the user of the client apparatus can arbitrarily add content to be transferred via the content transfer path and transfer the content dynamically. Furthermore, the user of the client device on the transmission side can display the added content on the display unit of the client device on the reception side with the specified display attribute.
また、上記構成において、前記通信部が前記第1転送回線を介して前記他のクライアント装置から転送される前記第1コンテントを受け取るとき、前記表示要素制御部は、前記第1表示要素IDにより特定される前記第1表示要素情報に、前記第1表示属性情報を上書きし、前記表示仕様制御部は、前記第1表示要素情報に格納された前記第1コンテントを、上書きされた前記第1表示属性情報に基づいて前記表示部に表示するものとしてもよい。 In the above configuration, when the communication unit receives the first content transferred from the other client device via the first transfer line, the display element control unit is identified by the first display element ID. The first display element information is overwritten with the first display attribute information, and the display specification control unit overwrites the first content stored in the first display element information with the first display overwritten. It is good also as what displays on the said display part based on attribute information.
このようにすることによって、クライアント装置は、転送されるコンテントを任意に追加しても、コンテントと表示画面上の表示要素との対応関係を保ったまま、表示画面上の表示要素の表示属性を、他のクライアント装置とは個別に管理することができる。 By doing so, the client device can set the display attribute of the display element on the display screen while maintaining the correspondence between the content and the display element on the display screen even if the transferred content is arbitrarily added. It can be managed separately from other client devices.
また、上記構成において、前記通信サーバは、XMPPに準拠する通信機能を提供するXMPPサーバであり、前記クライアント制御部は、XMPPの通信規約であるXEP−0166(Jingle)を利用して、前記第1転送経路設定情報を送信し、前記第1転送回線を開設するものとしてもよい。 In the above configuration, the communication server is an XMPP server that provides a communication function compliant with XMPP, and the client control unit uses the XMP-0166 (Jingle), which is an XMPP communication protocol. One transfer path setting information may be transmitted to open the first transfer line.
このようにすることによって、クライアント装置は、XMPPサーバからXMPPに準拠した通信機能の提供を受けることができるので、追加されたコンテントを転送するための転送回線の追加開設、及びその追加開設した転送回線を介したコンテントの転送を動的且つリアルタイムに行うことができる。また、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用することができるので、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線を同一の手順で簡便且つ動的に、追加して開設することができる。 By doing so, the client apparatus can receive provision of a communication function compliant with XMPP from the XMPP server, so that an additional establishment of a transfer line for transferring the added content, and the additionally established transfer. Content can be transferred dynamically and in real time via a line. In addition, XEP-0166 (Jingle), which is an XMPP protocol (communication protocol), can be used, so that the same transfer line for transferring any kind of multimedia content (text, video, audio, image, etc.) can be used. It can be added and opened simply and dynamically in the procedure.
また、上記構成において、前記クライアント制御部は、前記第2転送回線により転送される第2コンテントの第2コンテントIDと、前記第2コンテントIDと対応付けられた第2表示要素IDと、前記第2コンテントの第2表示属性情報とが削除された第2転送経路設定情報を、前記通信部から前記ネットワーク及び前記通信サーバを介して、前記他のクライアント装置に送信し、前記通信サーバから提供される前記通信機能により、前記第2転送経路設定情報に基づいて、前記第2転送回線の接続を切断するものとしてもよい。 In the above configuration, the client control unit includes a second content ID of the second content transferred through the second transfer line, a second display element ID associated with the second content ID, and the second content ID. The second transfer path setting information from which the second display attribute information of two contents is deleted is transmitted from the communication unit to the other client device via the network and the communication server, and provided from the communication server. The communication function may disconnect the second transfer line based on the second transfer path setting information.
このようにすることによって、通信部と他のクライアント装置との間に開設されたコンテント転送経路を構成する転送回線のうちの少なくとも1つの接続を動的に切断することができる。従って、クライアント装置は、コンテント転送経路を介して転送するコンテントの数を任意に削減することができる。 By doing so, it is possible to dynamically disconnect at least one of the transfer lines constituting the content transfer path established between the communication unit and another client device. Therefore, the client device can arbitrarily reduce the number of content transferred via the content transfer path.
また、上記構成において、前記通信サーバは、前記複数のクライアント装置にXMPPに準拠する通信機能を提供するXMPPサーバであり、前記クライアント制御部は、XMPPの通信規約であるXEP−0166(Jingle)を利用して、前記第2転送経路設定情報を送信し、記第2転送回線の接続を切断するものとしてもよい。 In the above configuration, the communication server is an XMPP server that provides the plurality of client devices with an XMPP-compliant communication function, and the client control unit uses XEPP0166 (Jingle), which is an XMPP communication protocol. The second transfer path setting information may be transmitted to disconnect the second transfer line.
このようにすることによって、クライアント装置は、XMPPサーバからXMPPに準拠した通信機能の提供を受けて、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用することができるので、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線の接続を、同一の手順で簡便且つ動的に切断することができる。 By doing so, the client device can use the XMPP protocol (communication protocol) XEP-0166 (Jingle) by receiving the provision of the communication function compliant with the XMPP from the XMPP server. It is possible to easily and dynamically disconnect the connection of the transfer line for transferring various types of multimedia content (text, moving image, sound, image, etc.) in the same procedure.
また、上記構成において、前記コンテント転送経路は、前記通信部と前記他のクライアント装置との間に開設される論理的な通信経路であるとともに、前記ネットワークとは論理的に異なる通信経路であるものとしてもよい。 In the above configuration, the content transfer path is a logical communication path established between the communication unit and the other client device, and is a logically different communication path from the network. It is good.
このようにすることによって、クライアント装置は、通信部と他のクライアント装置との間にコンテントが直接に転送される直通のコンテント転送経路を開設するとき、新たに物理的な通信回線を設ける必要がない。すなわち、既存の物理的な通信回線を利用して、コンテント転送経路を開設することができる。また、ネットワークとコンテント転送経路とが物理的に同じ通信回線を利用する場合であっても、それらは、異なる論理回線とすることができる。 In this way, the client device needs to newly provide a physical communication line when establishing a direct content transfer path through which content is directly transferred between the communication unit and another client device. Absent. That is, a content transfer path can be established using an existing physical communication line. Even if the network and the content transfer path use the same communication line physically, they can be different logical lines.
また、上記目的を達成するために本発明は、上記の通信方法により、通信サーバにネットワークを介して接続される複数のクライアント装置間に、コンテントが転送されるコンテント転送経路が開設され、前記コンテント転送経路を介して転送されるコンテントがクライアント装置の表示部に表示される。 In order to achieve the above object, according to the present invention, a content transfer path for transferring content is established between a plurality of client devices connected to a communication server via a network by the above communication method. The content transferred through the transfer path is displayed on the display unit of the client device.
上記構成によれば、コンテント転送経路を介して転送されるコンテントの識別子であるコンテントIDと、転送されたコンテントが格納される表示要素情報の識別子である表示要素IDと、コンテントの表示属性を示す表示属性情報とを有するとともに、コンテントIDと表示要素IDとが対応付けられた転送経路設定情報が、第1クライアント装置からネットワーク及び通信サーバを介して、第2クライアント装置に送信される。そして、第1クライアント装置と第2クライアント装置との間に、転送経路設定情報に基づいて、コンテント転送経路が開設される。転送経路設定情報では、コンテントIDとコンテントを格納する表示要素情報の表示要素IDとが対応付けられている。そのため、コンテント転送経路を介して転送されるコンテント及びその表示属性情報を、表示画面上の表示要素に対応付けることができる。従って、転送されるコンテントを、表示属性情報が示す表示属性で、第2クライアント装置の表示部に表示することができる。よって、送信側のクライアント装置のユーザは、指定する表示属性で、受信側のクライアント装置の表示部に、転送したコンテントを表示させることができる。そのため、各クライアント装置のユーザは、表示部の表示画面から得られる視覚的な情報を積極的に活用することができる。 According to the above configuration, the content ID that is the identifier of the content transferred through the content transfer path, the display element ID that is the identifier of the display element information in which the transferred content is stored, and the display attribute of the content The transfer path setting information having the display attribute information and the content ID and the display element ID associated with each other is transmitted from the first client device to the second client device via the network and the communication server. A content transfer path is established between the first client apparatus and the second client apparatus based on the transfer path setting information. In the transfer path setting information, the content ID is associated with the display element ID of the display element information for storing the content. Therefore, the content transferred through the content transfer path and the display attribute information thereof can be associated with the display element on the display screen. Therefore, the transferred content can be displayed on the display unit of the second client device with the display attribute indicated by the display attribute information. Therefore, the user of the client device on the transmission side can display the transferred content on the display unit of the client device on the reception side with the display attribute specified. Therefore, the user of each client device can positively utilize the visual information obtained from the display screen of the display unit.
上記構成において、前記通信サーバと、上記の複数のクライアント装置と、を備えるものとしてもよい。 The said structure WHEREIN: It is good also as a thing provided with the said communication server and said several client apparatus.
本発明によれば、コンテント転送経路を介して転送されるコンテントの識別子であるコンテントIDと、転送されたコンテントが格納される表示要素情報の識別子である表示要素IDと、コンテントの表示属性を示す表示属性情報とを有するとともに、コンテントIDと表示要素IDとが対応付けられた転送経路設定情報が、第1クライアント装置からネットワーク及び通信サーバを介して、第2クライアント装置に送信される。そして、第1クライアント装置と第2クライアント装置との間に、転送経路設定情報に基づいて、コンテント転送経路が開設される。転送経路設定情報では、コンテントIDとコンテントを格納する表示要素情報の表示要素IDとが対応付けられている。そのため、コンテント転送経路を介して転送されるコンテント及びその表示属性情報を、表示画面上の表示要素に対応付けることができる。従って、転送されるコンテントを、表示属性情報が示す表示属性で、第2クライアント装置の表示部に表示することができる。よって、送信側のクライアント装置のユーザは、指定する表示属性で、受信側のクライアント装置の表示部に、転送したコンテントを表示させることができる。そのため、各クライアント装置のユーザは、表示部の表示画面から得られる視覚的な情報を積極的に活用することができる。 According to the present invention, the content ID that is the identifier of the content transferred through the content transfer path, the display element ID that is the identifier of the display element information in which the transferred content is stored, and the display attribute of the content The transfer path setting information having the display attribute information and the content ID and the display element ID associated with each other is transmitted from the first client device to the second client device via the network and the communication server. A content transfer path is established between the first client apparatus and the second client apparatus based on the transfer path setting information. In the transfer path setting information, the content ID is associated with the display element ID of the display element information for storing the content. Therefore, the content transferred through the content transfer path and the display attribute information thereof can be associated with the display element on the display screen. Therefore, the transferred content can be displayed on the display unit of the second client device with the display attribute indicated by the display attribute information. Therefore, the user of the client device on the transmission side can display the transferred content on the display unit of the client device on the reception side with the display attribute specified. Therefore, the user of each client device can positively utilize the visual information obtained from the display screen of the display unit.
以下に本発明の実施形態について、図面を参照して説明する。図1は、本発明のマルチメディア通信システムの一実施形態を説明するための図である。本実施形態では、本発明をマルチメディアコンテント転送システム1に適用している。図2は、本実施形態のマルチメディアコンテント転送システムを説明するための図である。図1及び図2に示すように、マルチメディアコンテント転送システム1(マルチメディア通信システム)は、後述するXMPP(eXtensible Messaging and Presence Protocol)を利用して構築されたマルチメディア通信システムであり、XMPPサーバ3(通信サーバ)と、複数のXMPPクライアント装置2(クライアント装置)と、を備える。図1及び図2では、各XMPPクライアント装置2は、インターネット機能付きテレビジョン2aや携帯端末2bとなっている。
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a diagram for explaining an embodiment of a multimedia communication system according to the present invention. In the present embodiment, the present invention is applied to the multimedia
ここで、XMPPとは、IETF(Internet Engineering Task Force)のXMPPワーキンググループから独立したXSF(XMPP Standards Foundation)により規格・標準化が進められているXML(eXtensible Markup Language)ベースのプロトコル(通信規約)である。XMPPは、インスタントメッセージ、プレゼンス(「相手が今どういう状態にあるのか」)、多人数チャット、音声またはテレビ電話、協調作業、コンテンツ・シンジケーション、XMLデータの一般化ルーティングなどを含む広範囲のアプリケーションを動的に制御し、インターネットなどの通信システムにおいてリアルタイムなコミュニケーションを行うために、それぞれの目的に応じて規格化された複数の拡張プロトコル(XEP:XMPP Extension Protocol)からなっている。 XMPP is an XML (eXtensible Markup Language) based protocol (communication protocol) that is being standardized and standardized by the XMPP (XMPP Standards Foundation) independent of the XMPP working group of the Internet Engineering Task Force (IETF). is there. XMPP runs a wide range of applications including instant messaging, presence ("what the person is now"), multi-person chat, voice or videophone, collaborative work, content syndication, generalized routing of XML data, etc. In order to perform control in real time and perform real-time communication in a communication system such as the Internet, it consists of a plurality of extension protocols (XEP: XMPP Extension Protocol) standardized for each purpose.
マルチメディアコンテント転送システム1は、このXMPPに規定されているプロトコル(通信規約)を利用して、各XMPPクライアント装置2間に、マルチメディアコンテントが転送される直通のコンテント転送経路5を開設する。
The multimedia
ここで、マルチメディアコンテント転送システム1を理解する上で重要なXMPPのプロトコルであるXEP−0166(Jingle)について説明しておく。XEP−0166(Jingle)は、2つの通信可能な端末装置の間にデータを送受信する通信経路を確立する機能を規定したプロトコル(通信規約)である。
Here, XEP-0166 (Jingle), which is an XMPP protocol important for understanding the multimedia
このXEP−0166(Jingle)では、Webシステムにおけるhttpのようなトランスポートに関する方法を規定している。しかしながら、転送されるコンテントの表示属性に関する方法は規定していない。すなわち、htmlやCSSなどで記述された表示属性で、転送したコンテントを柔軟にプレゼンテーションするための表示に関する方法は規定していない。また、XEP−0166(Jingle)では、任意の数のコンテントを転送できる通信経路を確立するように規定されている。しかしながら、動的に増減する複数のコンテントを、各端末装置にて、適切且つリアルタイムに表示させる汎用的な方法を規定していない。 In this XEP-0166 (Jingle), a method related to transport such as http in a Web system is defined. However, the method regarding the display attribute of the transferred content is not defined. In other words, a display-related method for flexibly presenting transferred content with display attributes described in html, CSS, or the like is not defined. XEP-0166 (Jingle) stipulates that a communication path capable of transferring an arbitrary number of contents is established. However, a general-purpose method for displaying a plurality of contents that dynamically increase and decrease appropriately and in real time on each terminal device is not defined.
マルチメディアコンテント転送システム1は、コンテントを転送するためのトランスポートに関する方法としてXEP−0166(Jingle)を利用し、転送するコンテントのプレゼンテーションに関する方法としてhtml(Hyper Text Markup Language)やカスケーディングスタイルシート(CSS:Cascading Style Sheets)などを利用する。これらによって、マルチメディアコンテント転送システム1は、XMPPクライアント装置2の間にコンテント転送経路5を動的に開設するとともに、このコンテント転送経路5を介して転送されるマルチメディアコンテントを柔軟にプレゼンテーションするための汎用的な通信手段を提供する。以下では、この通信手段を、MC−Jingle(Multimedia-Contents Jingle)と呼ぶ。MC−Jingleでは、クライアント装置の表示機能の規格がそれぞれ異なっていたとしても、それらの間で転送される任意の数のマルチメディアコンテントを統合的に扱うことができる。
The multimedia
また、マルチメディアコンテント転送システム1では、XMPPクライアント装置2が、任意のタイミングで、ネットワーク4を介してXMPPサーバ3と接続される。図1及び図2では、インターネット機能付きテレビジョン2aは任意のタイミングで、第1ネットワーク41を介してXMPPサーバ3に接続される。携帯端末2bも、同様に、任意のタイミングで、第2ネットワーク42を介してXMPPサーバ3に接続される。これらのXMPPクライアント装置2は、ネットワーク4及びXMPPサーバ3を経由して、XMPPサーバ3に接続されている他のXMPPクライアント装置2や他のサーバと通信を行うことができる。
In the multimedia
また、これらのXMPPクライアント装置2には、XMPPサーバ3から、XMPPに規定された応用プロトコル(通信規約)に準拠する通信機能が提供される。XMPPサーバ3から提供されるこの通信機能によって、携帯端末2bとインターネット機能付きテレビジョン2aとの間には、後述するように、マルチメディアコンテントが直接に転送される直通の通信経路であるコンテント転送経路5が開設される。そして、開設されたコンテント転送経路5を介して転送されるマルチメディアコンテントは、対応するhtml表示属性情報に基づいて表示される。
In addition, the
次に、インターネット機能付きテレビジョン2aと携帯端末2bとの間に開設されるコンテント転送経路5について説明する。コンテント転送経路5では、後述するように、インターネット機能付きテレビジョン2aや携帯端末2bの表示部23の各表示要素に対応するコンテントが転送される。また、コンテント転送経路5は、1又は複数の転送回線から構成される。
Next, the
コンテント転送経路5を構成する転送回線としては、たとえば、図1及び図2に示すようなビデオコンテント転送回線、イメージコンテント転送回線、テキストコンテント転送回線、オーディオコンテント転送回線などを挙げることができる。ビデオコンテント転送回線は、各クライアント装置の間でビデオコンテントをどちらか一方向に転送することができる。また、イメージコンテント転送回線では、各クライアント装置の間でテキストコンテントをどちらか一方向に転送することができる。また、テキストコンテント転送回線は、各クライアント装置の間でテキストコンテントを双方向に転送することができる。なお、これに限定されず、どちらか一方向に転送するものであってもよい。また、オーディオコンテント転送回線では、各クライアント装置の間でオーディオコンテントを双方向に転送することができる。なお、これに限定されず、どちらか一方向に転送するものであってもよい。
Examples of the transfer line constituting the
なお、コンテント転送経路5は、図1や図2に示す構成に限定されない。後述するように、複数の転送回線を任意に組み合わせて構成することができる。さらに、転送回線の追加や、各転送回線の接続の切断も動的に行うことができる。また、各転送回線を介して転送されるコンテントは、その識別子であるコンテントIDにより管理される。
The
また、各XMPPクライアント装置2は、コンテントを表示するためのhtml表示要素情報からなる構造化表示情報を有している。この構造化表示情報を構成する各html表示要素情報の構造は特に限定しない。図2に示すように並列的な構造を持つものであってもよいし、木構造であってもよい。各html表示要素情報には、表示するコンテントを格納するとともに、そのコンテントをどのように表示するかを示すhtml表示属性情報が記述されている。また、各html表示要素情報は、その識別子である表示要素IDにより管理されている。
Each
マルチメディアコンテント転送システム1では、コンテント転送経路5を開設するとき、各転送回線に対して、転送されるコンテントのコンテントIDと、そのコンテントが格納されるhtml表示要素情報の表示要素IDとを対応付ける。そのため、コンテント転送経路5を介して転送されるコンテントと、表示画面上の表示要素と対応付けることができる。
In the multimedia
また、マルチメディアコンテント転送システム1では、コンテント転送経路5を開設するとき、各転送回線に対して、転送されるコンテントのコンテントIDに対応する表示要素IDのhtml表示要素情報に、転送されるコンテントのhtml表示属性情報が上書きして記述される。そのため、転送されるコンテントは、対応するhtml表示属性情報が示す表示属性で表示される。
In the multimedia
このhtml表示属性情報は、たとえば、コンテントがXMPPクライアント装置2の表示部23で表示される位置を示す表示位置情報と、コンテントが表示部23の表示画面上で表示されるサイズを示す表示サイズ情報と、を有する。なお、これに限定されず、html表示属性情報は、htmlを利用した描画機構にて指定できる表示属性であればよい。たとえば、表示画面上での表示位置や表示画面上でのテキストの表示領域のサイズのほか、表示するテキストの書式(文字の大きさや色、フォント、文字の修飾(太字、イタリック、影付きなど)、文字間隔など)などを設定することができる。また、オーディオコンテントであれば、表示位置や表示サイズのほか、クロックレートなどを設定することができる。
The html display attribute information includes, for example, display position information indicating a position where the content is displayed on the
ここで、コンテント転送経路5及びこれを構成する各転送回線は論理的な通信経路である。論理的な通信経路とは、物理的に見た通信回線が有する論理的に見た仮想の通信回線(論理回線)である。たとえば、物理的には通信回線が1本であっても、複数の論理回線を設定することができる。各論理回線では異なったデータ通信を行うことができる。従って、各XMPPクライアント装置2の間にデータが直接に転送される直通のコンテント転送経路5を開設するとき、XMPPサーバ3とXMPPクライアント装置2とを接続するネットワーク4とは別の物理的な通信回線を設ける必要がない。すなわち、ネットワーク4が通じている物理的な通信回線を利用して、コンテント転送経路5を開設することができる。
Here, the
また、コンテント転送経路5及び各転送回線には、暗号化された回線を利用できる。暗号化された回線を利用することにより、コンテント転送経路5を介して転送されるデータは、暗号化で厳重に保護・管理することができるので、安全且つ確実にデータを転送する事ができるとともに、データのセキュリティ性をより向上させることができる。なお、コンテント転送経路5を介して転送されるデータが、暗号化されていてもよい。データの暗号化には、例えば、SSLなどが利用できる。
An encrypted line can be used for the
また、コンテント転送経路5及び各転送回線には、VPN(Virtual Private Network)を利用した通信経路(VPN回線)を利用してもよい。VPN回線を利用することにより、一般に共用されている通信網を利用して、セキュリティ性の高い論理回線を開設することができる。
Further, a communication path (VPN line) using VPN (Virtual Private Network) may be used for the
次に、本実施形態のマルチメディアコンテント転送システム1におけるXMPPクライアント装置2の構成について説明する。マルチメディアコンテント転送システム1が備えるXMPPクライアント装置2は、共通するhtml描画機構を有している。図3は、本実施形態におけるXMPPクライアント装置の構成図である。図3に示すように、XMPPクライアント装置2は、通信部21と、制御部22と、表示部23と、記憶部24と、入力部25とを備えている。
Next, the configuration of the
通信部21は、任意のタイミングで、XMPPサーバ3にネットワーク4を介して接続される。通信部21は、接続されたXMPPサーバ3や他のXMPPクライアント装置2に対して、XMPPに規定された応用プロトコル(通信規約)に準拠する通信を行うことができる。また、通信部21と他のXMPPクライアント装置2との間には、マルチメディアコンテントが転送される直通のコンテント転送経路5が開設される。また、このとき、通信部21は、開設されたコンテント転送経路5を介したコンテント転送の通信インターフェースとして機能する。
The
表示部23は、構造化表示情報に基づいて、html表示要素情報に格納されたコンテントを表示する。入力部25は、ユーザによって操作入力され、XMPPクライアント装置2に与えられる様々な指示を受け付ける。記憶部24は、html表示要素情報や、格納された各コンテントを記憶する。また、通信部21が送受信する様々なデータや、ユーザの入力操作によって入力部25に入力されるデータなども記憶する。
The
制御部22は、通信部21、表示部23、入力部25、及び記憶部24を制御している。また、制御部22は、html表示要素制御部222と、XMPPクライアント制御部221と、表示仕様制御部223と、を有している。
The
html表示要素制御部222は、表示部23の表示画面上の表示要素(コンテント)に関する制御を行う。たとえば、コンテント転送経路5を開設する際に、コンテント転送経路5の識別子である転送経路IDと、html表示要素情報の識別子である表示要素ID、及びコンテントがどのように表示されるかを示すhtml表示属性情報を有するhtml表示仕様情報7を作成する。また、通信部21からコンテント転送経路5を介して他のクライアント装置にコンテントを転送する。
The html display
また、html表示要素制御部222は、通信部21が他のクライアント装置からコンテント転送経路5を介して転送されるコンテントを受け取ったとき、そのコンテントのコンテントIDに対応する表示要素IDによってhtml表示要素情報を特定する。さらに、html表示要素制御部222は、受け取ったコンテントをそのhtml表示要素情報に格納するとともに、受け取ったコンテントのhtml表示属性情報をそのhtml表示要素情報に上書きして記述する。
When the
また、XMPPクライアント制御部221は、任意のタイミングで、ネットワーク4を介して通信部21をXMPPサーバ3に接続し、ネットワーク4を通じてXMPPサーバ3と通信を行う公開セッションを開設する。なお、このタイミングは、特に限定しない。例えば、XMPPクライアント制御部221は、入力部25がユーザからXMPPサーバ3との接続を指示する旨の操作入力を受け付けたとき、ネットワーク4を介してXMPPサーバ3に接続されてもよい。
Further, the XMPP
また、XMPPクライアント制御部221は、ネットワーク4を介して、XMPPサーバ3からXMPPに規定された通信規約に準拠する通信機能の提供を受けことによって、XMPPに規定された様々な応用プロトコル(通信規約)を利用することができる。XMPPクライアント制御部221は、コンテント転送経路5を開設するための転送経路設定情報m1を作成し、通信部21からネットワーク4及びXMPPサーバ3を介して他のXMPPクライアント装置2に、転送経路設定情報m1を送信する。そして、XMPPクライアント制御部221は、XMPPサーバ3から提供される通信機能により、転送経路設定情報m1に基づいて、通信部21と他のXMPPクライアント装置2との間にコンテント転送経路5を開設する。
The XMPP
ここで、転送経路設定情報m1は、XMPPに規定された通信規約であるXEP−0166(Jingle)を利用して作成される。また、転送経路設定情報m1については、後述する。 Here, the transfer path setting information m1 is created using XEP-0166 (Jingle) which is a communication protocol defined in XMPP. The transfer path setting information m1 will be described later.
表示仕様制御部223は、表示部23の表示画面231上の表示要素(コンテント)の表示仕様(どのように表示するか)に関する制御を行う。たとえば、表示仕様制御部223は、html表示要素情報に格納されたコンテントを、html表示要素情報に記述されたhtml表示属性情報に基づいて表示部23に表示する。
The display
このXMPPクライアント装置2としては、たとえば、インターネット機能付きテレビジョン、携帯電話機やPDAといった携帯型情報端末装置、パーソナルコンピュータなどを挙げることができるが、これらに限定するものではない。
Examples of the
ここで、コンテント転送経路5を開設するための転送経路設定情報m1について、説明する。転送経路設定情報m1は、第1XMPPクライアント装置2aが、コンテント転送経路5の開設を第2XMPPクライアント装置2bに提案するための情報である。
Here, the transfer route setting information m1 for establishing the
図4は、本実施形態における転送経路設定情報の一例である。図4に示す転送経路設定情報m1には、<iq>タグに、送信元である第1XMPPクライアント装置2aの識別子であるJID(Jabber ID)、転送経路設定情報m1の識別子("12345")、送信先である第2XMPPクライアント装置2bのJID、転送経路設定情報m1のtype属性("set")が記述されている。
FIG. 4 is an example of transfer route setting information in the present embodiment. The transfer path setting information m1 shown in FIG. 4 includes an <iq> tag, a JID (Jabber ID) that is an identifier of the first
また、<mc-jingle>タグに、転送経路設定情報m1の内容の種類を示すaction属性("session-initiate")、コンテント転送経路5の開設を提案するXMPPクライアント装置2であるイニシエータのJID、転送経路設定情報m1にて開設を提案するコンテント転送経路5を識別するための転送経路ID("98765")、ストリーム仕様情報6、及びhtml表示仕様情報7が記述されている。なお、転送経路IDに換えて、このコンテント転送経路5を通じて行われるセッションを識別するためのセッションID(sid:session id)が記述されていてもよい。
In addition, in the <mc-jingle> tag, an action attribute (“session-initiate”) indicating the type of the content of the transfer path setting information m1, the JID of the initiator that is the
<mc-jingle>タグ内のストリーム仕様情報6には、コンテント転送経路5を構成する各転送回線のストリーム属性を示すストリーム属性情報60a〜60dが記述されている。ストリーム属性情報60a〜60dには、それぞれ、対応するそれぞれの転送回線毎に、転送されるコンテントの作成者を示す情報、そのコンテントの種類、そのコンテントのコンテントID、転送されるコンテントのアプリケーションの種類、接続する第2XMPPクライアント装置2bのトランスポートのパラメータ(たとえば、ipアドレスなど)が記述される。
The stream specification information 6 in the <mc-jingle> tag describes
また、<mc-jingle>タグ内のhtml表示仕様情報7には、転送経路ID("98765")(又は、セッションID)、及び転送される各コンテントのhtml表示属性情報70a〜70dが記述されている。html表示属性情報70a〜70dには、それぞれ、対応するそれぞれのコンテント毎に、転送されるコンテントが格納されるhtml表示要素情報の識別子である表示要素ID、そのコンテントの種類、そのコンテントの表示属性(表示位置情報、表示サイズ情報など)がhtmlを用いて記述されている。
Also, the html
このように、転送経路設定情報m1は、転送経路IDと、コンテントIDを有するストリーム仕様情報6と、html表示仕様情報7とを有している。さらに、転送経路設定情報m1では、コンテントIDと表示要素IDとが対応付けられている。
As described above, the transfer path setting information m1 includes the transfer path ID, the stream specification information 6 having the content ID, and the html
また、本実施形態では、html表示属性情報70a〜70dは、それぞれコンテントが表示部23の表示画面231上で表示される位置を示す表示位置情報と、コンテントが表示画面231上で表示されるサイズを示す表示サイズ情報と、を有している。なお、表示サイズ情報は、コンテントの表示サイズとして、表示画面231の解像度に対する相対的な表示サイズを示すものとしてもよい。
In this embodiment, the html
このようにすることによって、送信側のXMPPクライアント装置2のユーザは、表示属性として指定した表示位置及び表示サイズで、転送したコンテントを、受信側のXMPPクライアント装置2の表示部23に表示させることができる。また、送信側のXMPPクライアント装置2と受信側のXMPPクライアント装置2とで、表示部23の表示解像度が異なっている場合であっても、送信側のユーザが指定する表示属性で、受信側のXMPPクライアント装置2の表示部23に、コンテントを適切な表示構造で表示することができる。たとえば、送信側と受信側とで表示部23の表示解像度が異なっている場合であっても、コンテントの表示サイズが大きすぎたり小さすぎたりすることがなく、また、いわゆる「画面切れ」して表示されるおそれがない。そのため、各XMPPクライアント装置2のユーザは、表示部23の表示画面231から得られる視覚的な情報を積極的に活用することができる。
By doing so, the user of the
また、本実施形態では、html表示属性情報70a〜70d、html表示要素情報は、htmlファイルである。ここで、htmlファイルとは、XMPPに準拠した通信に適合するhtml(Hyper Text Markup Language)にて表現し得る形式のデータである。このようにすることによって、html表示属性情報70a〜70d、及びhtml表示要素情報を、Webブラウザで利用されているhtml形式での記述で表現することができる。すなわち、これらの情報とhtmlの表示要素とを対応付けることができるので、XMPPによるメッセージングとWebやhtmlとを結びつけることができる。
In the present embodiment, the html
また、html表示仕様情報7は、htmlで記述されたカスケーディングスタイルシート(CSS:Cascading Style Sheets)であってもよい。カスケーディングスタイルシートを利用することにより、送信側のXMPPクライアント装置2のユーザは、転送するコンテントの表示属性を、htmlで表現可能な表示属性を指定することができる。従って、発信側のXMPPクライアント装置2のユーザは、転送するコンテントの表示属性を、より簡便且つ明確に指定することができる。
The html
なお、図4では、対応するコンテントIDと表示要素IDとが同じとなっているが、これに限定されない。コンテントのコンテントIDと、そのコンテントを格納するhtml表示要素情報の表示要素IDとが明確に対応付けられていれば、両者が異なっていてもよい。たとえば、各XMPPクライアント装置2が、コンテントIDと表示要素IDとの対応関係を示すデータ(対応表など)を有していてもよい。
In FIG. 4, the corresponding content ID and display element ID are the same, but the present invention is not limited to this. As long as the content ID of the content and the display element ID of the html display element information storing the content are clearly associated with each other, they may be different. For example, each
次に、本実施形態のマルチメディアコンテント転送システム1の具体的な動作について説明する。図5は、本実施形態において、XMPPクライアント装置間でコンテント転送経路を開設するための初期設定を行う手順を説明するための動作図である。
Next, a specific operation of the multimedia
先ず、任意のタイミングで、第1XMPPクライアント装置2aが、第1ネットワーク41を介して、クラウド31にあるXMPPサーバ3に接続される。(ステップS101)こうして、第1XMPPクライアント装置2aとXMPPサーバ3との間に、XMPPに準拠した通信が可能な第1セッションが確立される。
First, the first
次に、任意のタイミングで、第2XMPPクライアント装置2bが、第2ネットワーク42を介して、クラウド31にあるXMPPサーバ3に接続される。(ステップS102)こうして、第2XMPPクライアント装置2bとXMPPサーバ3との間に、XMPPに準拠した通信が可能な第2セッションが確立される。
Next, the second
XMPPサーバ3が、第1セッションを通じて第1XMPPクライアント装置2aにプレゼンスリストを送信する。(ステップS103)また、XMPPサーバ3は、第2セッションを通じて第2XMPPクライアント装置2bにプレゼンスリストを送信する。なお、両者に送信されるプレゼンスリストは、XMPPサーバ3に接続されているXMPPクライアント装置2(第1XMPPクライアント装置2a、第2XMPPクライアント装置2bを含む)の一覧を示すとともに、それらのXMPPクライアント装置2の現在の状態を示すプレゼンス情報を有している。このプレゼンス情報には、各XMPPクライアント装置2の現在の通信状態(たとえば、通信できる状態であるか否かなど)やアドレスなどの情報が含まれる。
The
ここで、第1XMPPクライアント装置2a、第2XMPPクライアント装置2bは、このプレゼンスリストを受信することにより、第1ネットワーク41、XMPPサーバ3、第2ネットワーク42を経由して、互いに通信可能となったことを認識する。なお、以下では、第1XMPPクライアント装置2aと、第2XMPPクライアント装置2bとが、第1ネットワーク41及び第2ネットワーク42を有するネットワーク4、XMPPサーバ3、を経由して通信する通信経路を公開データ回線と呼ぶ。
Here, the first
第1XMPPクライアント装置2aのhtml表示要素制御部222aは、コンテント転送経路5の識別子である転送経路IDと、転送されるコンテントが格納されるhtml表示要素情報の識別子である表示要素ID、及びそのコンテントがどのように表示されるかを示すhtml表示属性情報70を有するhtml表示仕様情報7を作成する。(ステップS104)
The html display
そして、作成されたhtml表示仕様情報7が、第1XMPPクライアント装置2aのhtml表示要素制御部222aからXMPPクライアント制御部221aに通知される。(ステップS105)
The created html
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、第2XMPPクライアント装置2bとの間に開設するコンテント転送経路5のストリーム属性を設定するためのストリーム仕様情報6を作成する。(ステップS106)このストリーム仕様情報6には、転送される各コンテントの識別子であるコンテントIDが含まれる。さらに、第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、図4に示すような転送経路設定情報m1を作成する。この転送経路設定情報m1は、転送経路IDと、転送される各コンテントIDを含むストリーム仕様情報6と、html表示要素制御部222aが作成したhtml表示仕様情報7と、を有する。この転送経路設定情報m1では、転送するコンテント毎に、コンテントIDと表示要素IDとが対応付けられている。
The XMPP
次に、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で、必要に応じて、マルチメディアコンテントが直接に転送される直通のコンテント転送経路5を開設するための設定が開始される。なお、このコンテント転送経路5の設定及び開設は、XMPPの応用プロトコルであるXEP−0166(Jingle)に規定された手順と同様の手順で行うことができる。ここで、第1XMPPクライアント装置2aは、コンテント転送経路5の開設を提案する側、すなわち、MC−Jingleのイニシエータとなる。また、第2XMPPクライアント装置2bは、コンテント転送経路5の開設の提案に対して同意又は拒否する側、すなわち、MC−Jingleのレスポンダとなる。
Next, a setting for opening a direct
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、XMPPの通信規約であるXEP−0166(Jingle)を利用して、公開データ回線を介して第2XMPPクライアント装置2bに、転送経路設定情報m1を送信する。(ステップS107)この転送経路設定情報m1は、コンテントのコンテントIDと、転送されたコンテントが格納される表示要素情報の表示要素IDと、コンテントの表示属性を示す表示属性情報70とを有している。また、転送経路設定情報m1では、コンテントIDと表示要素IDとが対応付けられている。なお、転送経路設定情報m1が送信されるタイミングは特に限定しない。この転送経路設定情報m1は、動的に送信される。
The XMPP
第2XMPPクライアント装置2bのXMPPクライアント制御部221bは、その提案を確認したことを示す提案確認情報m2を、公開データ回線を介して第1XMPPクライアント装置2aに送信する。(ステップS108)
The XMPP
図6は、本実施形態における提案確認情報の一例である。図6では、提案確認情報m2は、<iq>タグに、送信元である第2XMPPクライアント装置2bのJID(Jabber ID)、第2XMPPクライアント装置2bが確認した転送経路設定情報m1の識別子("12345")、送信先である第1XMPPクライアント装置2aのJID、提案確認情報m2のtype属性("result")が記述されている。
FIG. 6 is an example of the proposal confirmation information in the present embodiment. In FIG. 6, the proposal confirmation information m2 includes, in the <iq> tag, the JID (Jabber ID) of the second
そして、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で、公開データ回線を介して、コンテント転送経路5を開設するための設定内容についての交渉(ストリーム仕様ネゴシエーション)が行われる。(ステップS109及びS110)このストリーム仕様ネゴシエーションにより、たとえば、両者の間での通信可能なトランスポートの設定(例えば、IPアドレスセット)などが検出される。このストリーム仕様ネゴシエーションの結果に応じて、レスポンダである第2XMPPクライアント装置2bは、コンテント転送経路5の開設の提案に対して、同意するか拒否するかを判断する。
Then, negotiation (stream specification negotiation) is performed between the first
また、第1XMPPクライアント装置2aにおいて、XMPPクライアント制御部221aとhtml表示要素制御部222aとの間で、コンテント転送経路5を通じて転送される各コンテントの表示に関する表示パラメータ(表示属性)についての表示仕様ネゴシエーションが、転送経路設定情報m1の各html表示属性情報70に基づいて、行われる。(ステップS111)この表示仕様ネゴシエーションによって、コンテント転送経路5を構成する各転送回線に対応する各表示パラメータの第1XMPPクライアント装置2aでの設定が決定される。また、html表示要素制御部222aは、表示仕様ネゴシエーションにて設定された各表示パラメータを、コンテントIDと対応する表示要素IDにより特定されるhtml表示要素情報に上書きして記述する。
Further, in the first
同様に、第2XMPPクライアント装置2bにおいて、XMPPクライアント制御部221bとhtml表示要素制御部222bとの間で、転送経路設定情報m1の各html表示属性情報70に基づいて、コンテント転送経路5を通じて転送される各コンテントの表示に関する表示パラメータ(表示属性)についての表示仕様ネゴシエーションが行われる。(ステップS112)この表示仕様ネゴシエーションによって、コンテント転送経路5を構成する各転送回線に対応する各表示パラメータの第2XMPPクライアント装置2bでの設定が決定される。また、html表示要素制御部222bは、html表示属性情報70に基づいて設定された各表示パラメータを、コンテントIDと対応する表示要素IDにより特定されるhtml表示要素情報に上書きして記述する。すなわち、表示仕様ネゴシエーションにて設定された各表示パラメータを、html表示要素情報に上書きして記述する。
Similarly, in the second
第2XMPPクライアント装置2bのhtml表示要素制御部222bは、転送経路設定情報m1の各html表示属性情報70に基づく各表示パラメータの設定に同意すると(ステップS113)、転送経路設定情報m1の各html表示属性情報70に基づく各表示パラメータの設定に同意したことを、XMPPクライアント制御部221bに通知する。(ステップS114)
When the html display
そして、第2XMPPクライアント装置2bのXMPPクライアント制御部221bが、転送経路設定情報m1の各ストリーム属性情報60に基づく各転送回線のストリームパラメータ(ストリーム属性)の設定に同意すると(ステップS115)、XMPPクライアント制御部221bは、コンテント転送経路5の設定の提案に同意する旨を示す提案同意情報m3を、公開データ回線を介して第1XMPPクライアント装置2aに送信する。(ステップS116)
When the XMPP
図7は、本実施形態における提案同意情報の一例である。図7に示す提案同意情報m3では、<iq>タグに、送信元である第2XMPPクライアント装置2bのJID(Jabber ID)、提案同意情報m3の識別子("12346")、送信先である第1XMPPクライアント装置2aのJID、転送経路設定情報m1のtype属性("set")が記述されている。
FIG. 7 is an example of the proposal consent information in the present embodiment. In the proposal agreement information m3 shown in FIG. 7, the <iq> tag includes the JID (Jabber ID) of the second
また、<mc-jingle>タグには、転送経路設定情報m1の提案(すなわち、コンテント転送経路5の開設に同意したこと)を示すaction属性("session-accept")、コンテント転送経路5の開設を提案する側のXMPPクライアント装置であるイニシエータのJID、開設するコンテント転送経路5の転送経路ID("98765")、ストリーム仕様設定情報8、及びhtml表示仕様設定情報9が記述されている。
The <mc-jingle> tag includes an action attribute (“session-accept”) indicating the proposal of the transfer route setting information m1 (that is, consent to open the content transfer route 5), and the establishment of the
また、<mc-jingle>タグ内のストリーム仕様設定情報8には、ストリーム仕様ネゴシエーションにて決定された各転送回線のストリーム属性を示すストリーム属性設定情報80a〜80dが記述されている。ストリーム属性設定情報80a〜80dには、それぞれ、対応するそれぞれの転送回線毎に、転送されるコンテントの作成者を示す情報、そのコンテントの種類、そのコンテントのコンテントID、転送されるコンテントのアプリケーションの種類のほかに、接続する第2XMPPクライアント装置2aのトランスポートのパラメータ(たとえば、ipアドレスなど)が記述される。
In the stream specification setting information 8 in the <mc-jingle> tag, stream
また、<mc-jingle>タグ内のhtml表示仕様設定情報9には、転送経路ID("98765")(又は、セッションID)、及び各コンテントのhtml表示属性設定情報90a〜90dが記述されている。html表示属性設定情報90a〜90dには、それぞれ、対応するそれぞれのコンテント毎に、対応する表示要素IDやコンテントの種類のほかに、表示仕様ネゴシエーションにて決定された各表示属性(表示位置情報、表示サイズ情報など)のパラメータの設定がhtmlを用いて記述されている。
Also, the html display specification setting information 9 in the <mc-jingle> tag describes the transfer path ID (“98765”) (or session ID) and the html display
次に、第1XMPPクライアント装置2aのXMPPクライアント制御部221aが、第2XMPPクライアント装置2bが同意した各転送回線のストリームパラメータ(ストリーム属性)の設定を確認する。(ステップS117)
Next, the XMPP
また、第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、転送経路設定情報m1の各html表示属性情報70に基づく各表示パラメータの設定が第2XMPPクライアント装置2bにて同意された旨を、html表示要素制御部222aに通知する。(ステップS118)
In addition, the XMPP
第1XMPPクライアント装置2aのhtml表示要素制御部222aが、第2XMPPクライアント装置2bにて転送経路設定情報m1の各html表示属性情報70に基づく各表示パラメータの設定が同意されたことを確認する。(ステップS119)そして、第1XMPPクライアント装置2aのhtml表示要素制御部222aが、各表示パラメータの設定が同意されたことを確認した旨を、XMPPクライアント制御部221aに通知する。(ステップS120)
The html display
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、提案同意情報m3が示す同意の内容を確認したことを示す同意確認情報m4を、公開データ回線を通じて第2XMPPクライアント装置2bに送信する。(ステップS121)
The XMPP
図8は、本実施形態における同意確認情報の一例である。図8に示す同意確認情報m4では、<iq>タグに、送信元である第1XMPPクライアント装置2aのJID(Jabber ID)、第1XMPPクライアント装置2aが確認した提案同意情報m3の識別子("12346")、送信先である第2XMPPクライアント装置2bのJID、同意確認情報m4がメッセージングする情報のtype属性("result")が記述されている。
FIG. 8 is an example of consent confirmation information in the present embodiment. In the consent confirmation information m4 shown in FIG. 8, the <iq> tag includes the JID (Jabber ID) of the first
以上によって、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間でデータが直接に転送される直通のコンテント転送経路5を開設するための初期設定が完了する。
Thus, the initial setting for establishing the direct
次に、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で、コンテント転送経路5を通じて、複数のマルチメディアコンテントを転送する手順について説明する。図9は、本実施形態において、開設されるコンテント転送経路を介して、マルチメディアコンテントが転送される手順を説明するための動作図である。図9では、コンテント転送経路5を通じたデータ転送の一例として、第1XMPPクライアント装置2aから第2XMPPクライアント装置2bに複数のコンテントを転送する手順について説明する。なお、ここでは、図5にて説明したコンテント転送経路5を開設するための初期設定は既に完了しているものとする。
Next, a procedure for transferring a plurality of multimedia contents through the
第1XMPPクライアント装置2aのhtml表示要素制御部222aが、第2XMPPクライアント装置2bへのコンテントの転送の指示を受け付ける。(ステップS201)
The html display
html表示要素制御部222aが、XMPPクライアント制御部221aに、コンテントを第2XMPPクライアント装置2bに転送することを通知する。(ステップS202)
The html display
第1XMPPクライアント装置2aのXMPPクライアント制御部221a、及び第2XMPPクライアント装置2bのXMPPクライアント制御部221bが、XMPPサーバから提供されるXMPPの通信規約であるXEP−0166(Jingle)を利用した通信機能により、初期設定にて設定したパラメータを用いて、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間に、コンテント転送経路5を開設する。(ステップS203及びS204)このように、XMPPサーバから提供される通信機能により、第1クライアント装置2a及び第2クライアント装置2bの間に、転送経路設定情報m1に基づいて、コンテント転送経路5が開設される。なお、このとき、第1XMPPクライアント装置2aのXMPPクライアント制御部221aから公開データ回線を介して第2XMPPクライアント装置2bに、コンテント転送経路5を開設する旨が送信された後、コンテント転送経路5が開設されるものであってもよい。
The XMPP
開設したコンテント転送経路5を通じて、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bはチャットを開始する。(ステップS205及びS206)そして、任意のタイミングで、第1クライアント装置2aと第2クライアント装置2bとの間で、コンテント転送経路5介してコンテントが動的に転送される。(ステップS207)
Through the established
たとえば、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で送受信されるテキストメッセージデータは、テキストコンテントとして、テキストコンテント転送回線50dを介して送受信される。また、第1XMPPクライアント装置2aから第2XMPPクライアント装置2bへ転送される動画コンテントは、ビデオコンテント転送回線50aを介して転送される。また、第2XMPPクライアント装置2bから第1XMPPクライアント装置2aへ転送される動画コンテントは、ビデオコンテント転送回線50bを介して転送される。また、第1XMPPクライアント装置2aから第2XMPPクライアント装置2bへ転送される画像データは、イメージコンテント転送回線50cを介して転送される。
For example, text message data transmitted / received between the first
各コンテントは、初期設定されたストリーム属性のパラメータに従って、コンテント転送経路5を通じて第1XMPPクライアント装置2aから第2XMPPクライアント装置2bに、又は第1XMPPクライアント装置2aから第2XMPPクライアント装置2bに転送される。さらに、初期設定された表示属性のパラメータに従って、第1XMPPクライアント装置2aのhtml表示要素制御部222a又は第2XMPPクライアント装置2bのhtml表示要素制御部222bによって、コンテントIDに対応する表示要素IDのhtml表示要素情報に格納される。
Each content is transferred from the first
第1XMPPクライアント装置2aのhtml表示要素制御部222aは、第2XMPPクライアント装置2bから転送されるコンテントを、そのコンテントIDに対応する表示要素IDのhtml表示要素情報に格納する。(ステップS208)そして、表示仕様制御部223aに、コンテントを転送する。
The html display
第1XMPPクライアント装置2aの表示仕様制御部223aは、html表示要素情報に記述されたhtml表示属性情報70に基づいて、コンテントを表示画面231aに再配置し(ステップ209)、表示部23aに表示する。(ステップS210)たとえば、コンテントIDが”12”の動画コンテントが転送された場合、対応する表示要素ID”12”のhtml表示要素情報に格納され、表示画面231aの第2レイヤーの(10px,10px)の位置に、横480px×縦640pxのサイズで表示される。
The display
同様に、第2XMPPクライアント装置2bのhtml表示要素制御部222bは、第1XMPPクライアント装置2aから転送されるコンテントを、そのコンテントIDに対応する表示要素IDのhtml表示要素情報に格納する。(ステップS211)そして、表示仕様制御部223bに転送されたコンテントが対応するhtml表示要素情報に格納されたことを通知する。
Similarly, the html display
第2XMPPクライアント装置2bの表示仕様制御部223bは、html表示要素情報に記述されたhtml表示属性設定情報90に基づいて、コンテントを表示画面231bに再配置し(ステップ212)、表示部23bに表示する。(ステップS213)たとえば、コンテントIDが”11”の動画コンテントが転送された場合、対応する表示要素ID”11”のhtml表示要素に格納され、表示画面231bの第3レイヤーの(10px,800px)の位置に、横768px×縦1024pxのサイズで表示される。
The display
なお、本実施形態では、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で転送される動画コンテントの表示サイズが設定される例を説明したが、これに限定されず、htmlやカスケーディングスタイルシート(CSS:cascade style check sheet)にて表現できる表示属性であれば設定することができる。また、図4に示すhtml表示属性情報70や、図7に示すhtml表示属性設定情報90では、コンテントの表示位置情報や表示サイズ情報を絶対指定で設定したが、相対指定することもできる。特に、表示位置情報や表示サイズ情報を相対指定で設定することによって、例えば、受信側のXMPPクライアント装置2の表示部23の表示画面231の解像度に比例したサイズでコンテントを表示することができるので、表示画面231からコンテントがはみ出していわゆる「画面切れ」したり、表示画面231に対してコンテントの表示サイズが大きすぎたり小さすぎたりすることがない。
In the present embodiment, the example in which the display size of the moving image content transferred between the first
以上では、XMPPサーバ3にネットワーク4を介して接続される複数のXMPPクライアント装置2の間に、コンテントが転送される直通のコンテント転送経路5を開設し、第1XMPPクライアント装置2aから前記コンテント転送経路5を介して第2XMPPクライアント装置2bに転送するコンテントを、前記第2XMPPクライアント装置2bの表示部23bに表示する手順について説明した。
In the above, a direct
すなわち、本実施形態のマルチメディアコンテント転送システム1では、XMPPサーバ3にネットワーク4を介して接続される複数のXMPPクライアント装置2間に、コンテントが転送されるコンテント転送経路5が開設される。さらに、前記コンテント転送経路5を介して転送される前記コンテントがXMPPクライアント装置2の表示部23に表示される。特に、前記コンテントのコンテントIDと、転送された前記コンテントが格納されるhtml表示要素情報の表示要素IDと、前記コンテントの表示属性を示すhtml表示属性情報70とを有するとともに、前記コンテントIDと前記表示要素IDとが対応付けられた転送経路設定情報m1が、第1XMPPクライアント装置2aから前記ネットワーク4及び前記XMPPサーバ3を介して、第2XMPPクライアント装置2bに送信され、前記XMPPサーバ3から提供される通信機能により、前記第1XMPPクライアント装置2a及び前記第2XMPPクライアント装置2bの間に、前記転送経路設定情報m1に基づいて、前記コンテント転送経路5が開設され、前記第1XMPPクライアント装置2aから、前記コンテント転送経路5を介して前記第2XMPPクライアント装置2bに、前記コンテントが転送される。
That is, in the multimedia
よって、本実施形態のマルチメディアコンテント転送システム1では、コンテント転送経路5を介して転送されるコンテントの識別子であるコンテントIDと、転送されたコンテントが格納されるhtml表示要素情報の識別子である表示要素IDと、コンテントの表示属性を示すhtml表示属性情報70とを有するとともに、コンテントIDと表示要素IDとが対応付けられた転送経路設定情報m1が、第1XMPPクライアント装置2aからネットワーク及びXMPPサーバ3を介して、第2XMPPクライアント装置2bに送信される。そして、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間に、転送経路設定情報m1に基づいて、コンテント転送経路5が開設される。転送経路設定情報m1では、コンテントIDとコンテントを格納するhtml表示要素情報の表示要素IDとが対応付けられている。そのため、コンテント転送経路5を介して転送されるコンテント及びそのhtml表示属性情報70を、表示画面上の表示要素に対応付けることができる。従って、転送されるコンテントを、html表示属性情報70が示す表示属性で、第2XMPPクライアント装置2bの表示部に表示することができる。よって、送信側のXMPPクライアント装置2aのユーザは、指定する表示属性で、受信側のXMPPクライアント装置2bの表示部23bに、転送したコンテントを表示させることができる。そのため、各XMPPクライアント装置2のユーザは、表示部23の表示画面231から得られる視覚的な情報を積極的に活用することができる。
Therefore, in the multimedia
また、マルチメディアコンテント転送システム1では、前記第2XMPPクライアント装置2bにおいて、前記コンテントIDと対応する前記表示要素IDにより特定される前記html表示要素情報に、前記html表示属性情報70が上書きされるステップをさらに備える。
In the multimedia
こうすることによって、各XMPPクライアント装置2において、コンテントと表示画面231上の表示要素との対応関係を保ったまま、個別に、表示画面231上の表示要素の表示属性を管理することができる。
By doing so, each
また、マルチメディアコンテント転送システム1では、前記コンテントは複数であって、前記コンテント転送経路5は、それぞれの前記コンテントが転送される複数の転送回線50からなり、それぞれの前記コンテント毎に、対応する前記コンテントID、前記表示要素ID、及び前記html表示属性情報70が設定される。
In the multimedia
このようにすることによって、複数のコンテントを転送する場合であっても、送信側のXMPPクライアント装置2aのユーザは、コンテント毎に別々の転送回線50を介して、各コンテントを転送することができる。さらに、送信側のXMPPクライアント装置2aのユーザは、それぞれのコンテントの表示属性を個別に指定することができる。従って、受信側のXMPPクライアント装置2bの表示部23bに、各コンテントを個別に設定された表示属性で表示させることができる。
In this way, even when transferring a plurality of contents, the user of the
また、マルチメディアコンテント転送システム1では、前記XMPPサーバ3は、前記複数のXMPPクライアント装置にXMPPに準拠する通信機能を提供するXMPPサーバであり、前記転送経路設定情報m1が送信されるステップ、及び前記コンテント転送経路5が開設されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われる。
In the multimedia
このようにすることによって、各XMPPクライアント装置2は、XMPPサーバ3からXMPPに準拠した通信機能の提供を受けることができるので、コンテント転送経路5の開設、及びコンテントの転送を動的且つリアルタイムに行うことができる。また、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用してコンテント転送経路5を開設することにより、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線50を、同一の手順で簡便に開設することができる。
In this way, each
次に、マルチメディアコンテント転送システム1では、コンテント転送経路5を通じて転送するマルチメディアコンテントを動的に追加することができる。よって、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で、コンテント転送経路5を通じて転送するマルチメディアコンテントを追加する手順について説明する。図10は、本実施形態において、コンテント転送経路を介して転送するマルチメディアコンテントを追加する手順を説明するための動作図である。
Next, in the multimedia
まず、第1XMPPクライアント装置2aにおいて、html表示要素制御部222aが、チャットの表示処理を中断し(ステップS301)、XMPPクライアント制御部221aにチャットを中断する旨を通知する。(ステップS302)
First, in the first
第2XMPPクライアント装置2bにおいても同様に、html表示要素制御部222bが、チャットの表示処理を中断し(ステップS303)、XMPPクライアント制御部221bにチャットを中断する旨を通知する。(ステップS304)
Similarly, in the second
次に、第1XMPPクライアント装置2aでは、html表示要素制御部222aが、転送する追加コンテント(第1コンテント)の表示属性を示すhtml表示属性情報70e(第1表示属性情報)を新たに作成する。そして、コンテント転送経路5を介してさらに転送される追加コンテントのhtml表示属性情報70e、及び追加コンテントが格納されるhtml追加表示要素情報の識別子である追加表示要素IDが、従来のhtml表示仕様情報7に、さらに加えられた追加html表示仕様情報7a(第1html表示仕様情報)を作成する。(ステップS305)そして、html表示要素制御部222aは、XMPPクライアント制御部221aに、改訂した追加html表示仕様情報7aを通知する。(ステップS306)
Next, in the first
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、追加コンテントをさらに転送するための追加転送回線50e(第1転送回線)を開設してコンテント転送経路5に加えるための追加転送経路設定情報m5(第1転送経路設定情報)を作成する。(ステップS307)ここでは、追加転送回線50eを開設するためのストリーム属性を示す追加ストリーム属性情報6aを新たに作成する。また、追加コンテントの識別子である追加コンテントIDを有する追加ストリーム属性情報60eが、従来のストリーム仕様情報6にさらに加えられた追加ストリーム仕様情報6aが作成される。そして、転送経路IDと、改訂した追加ストリーム仕様情報6aと、追加html表示仕様情報7aとを有する追加転送経路設定情報m5を作成する。この追加転送経路設定情報m5は、コンテント転送経路5を介してさらに転送される追加コンテントの追加コンテントIDと、追加コンテントIDと対応付けられる追加表示要素IDと、追加コンテントのhtml表示属性情報60eとがさらに加えられている。
The XMPP
そして、第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、XMPPの通信規約であるXEP−0166(Jingle)を利用して、コンテント転送経路5に追加転送回線50eを追加することを提案する旨の追加転送経路設定情報m5を、公開データ回線を通じて第2XMPPクライアント装置2bに送信する。(ステップS308)
Then, the XMPP
図11は、本実施形態における追加転送経路設定情報の一例を示す図である。図11のように、追加転送経路設定情報m5は、追加コンテントIDをさらに有する追加ストリーム仕様情報6aと、追加表示要素ID及びhtml表示属性情報70eをさらに有する追加html表示仕様情報7aとを含んでいる。
FIG. 11 is a diagram showing an example of additional transfer path setting information in the present embodiment. As shown in FIG. 11, the additional transfer path setting information m5 includes additional
第2XMPPクライアント装置2bのXMPPクライアント制御部221bは、新たなコンテント転送経路5を追加することを提案する旨の追加転送経路設定情報m5を確認した旨を、公開データ回線を通じて第1XMPPクライアント装置2aに送信する。(ステップS309)
The XMPP
そして、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で、公開データ回線を介して、コンテント転送経路5を開設するための設定内容についての交渉(ストリーム仕様ネゴシエーション)が行われる。(ステップS310及びS311)このストリーム仕様ネゴシエーションの結果に応じて、MC−Jingleのレスポンダである第2XMPPクライアント装置2bは、新たなコンテント転送経路5の追加の提案に対して、同意するか拒否するかを判断する。
Then, negotiation (stream specification negotiation) is performed between the first
また、第1XMPPクライアント装置2aにおいて、XMPPクライアント制御部221aとhtml表示要素制御部222aとの間で、追加転送経路設定情報m5の追加html表示仕様情報7aのhtml表示属性情報70eに基づいて、追加コンテントの表示に関する表示パラメータ(表示属性)についての表示仕様ネゴシエーションが行われる。(ステップS312)この表示仕様ネゴシエーションによって、追加転送回線50eに対応する表示パラメータの第1XMPPクライアント装置2aでの設定が決定される。また、html表示要素制御部222aは、表示仕様ネゴシエーションにて設定された各表示パラメータを、追加コンテントIDと対応する追加表示要素IDにより特定されるhtml追加表示要素情報に上書きして記述する。
Further, in the first
同様に、第2XMPPクライアント装置2bにおいて、XMPPクライアント制御部221bとhtml表示要素制御部222bとの間で、追加転送経路設定情報m5の追加html表示仕様情報7aのhtml表示属性情報70eに基づいて、追加コンテントの表示に関する表示パラメータ(表示属性)についての表示仕様ネゴシエーションが行われる。(ステップS313)この表示仕様ネゴシエーションによって、追加転送回線50eに対応する表示パラメータの第2XMPPクライアント装置2bでの設定が決定される。また、html表示要素制御部222bは、html表示属性情報70eに基づいて設定された各表示パラメータを、追加コンテントIDと対応する追加表示要素IDにより特定されるhtml追加表示要素情報に上書きして記述する。すなわち、表示仕様ネゴシエーションにて設定された各表示パラメータを、html追加表示要素情報に上書きして記述する。
Similarly, in the second
第2XMPPクライアント装置2bのhtml表示要素制御部222が、追加転送経路設定情報m5のhtml表示属性情報70eに基づく表示パラメータの設定に同意すると(ステップS314)、html表示要素制御部222は、XMPPクライアント制御部221に、追加転送経路設定情報m5のhtml表示属性情報70eに基づく表示パラメータの設定に同意したことを通知する。(ステップS315)
When the html display
そして、第2XMPPクライアント装置2bのXMPPクライアント制御部221bが、追加転送経路設定情報m5の追加ストリーム属性情報6aに基づく追加転送回線50eのストリームパラメータ(ストリーム属性)の設定に同意すると(ステップS316)、XMPPクライアント制御部221bは、コンテント転送経路5の設定の提案に同意する旨を示す追加提案同意情報m6を、公開データ回線を介して第1XMPPクライアント装置2aに送信する。(ステップS317)図12は、本実施形態における追加提案同意情報の一例を示す図である。図12のように、追加提案同意情報m6は、追加コンテントIDをさらに有する追加ストリーム仕様設定情報8aと、追加表示要素ID及びhtml追加表示属性設定情報90eをさらに有するhtml追加表示仕様設定情報9aを含んでいる。
When the XMPP
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、第2XMPPクライアント装置2bが同意した追加転送回線50eのストリームパラメータ(ストリーム属性)の設定を確認する。(ステップS318)また、第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、追加転送経路設定情報m5のhtml表示属性情報70eに基づく表示パラメータの設定が第2XMPPクライアント装置2bにて同意された旨を、html表示要素制御部222aに通知する。(ステップS319)
The XMPP
第1XMPPクライアント装置2aのhtml表示要素制御部222aが、第2XMPPクライアント装置2bにてhtml表示属性情報70eに基づく表示パラメータの設定が同意されたことを確認する。(ステップS320)そして、第1XMPPクライアント装置2aのhtml表示要素制御部222aが、追加コンテントの表示パラメータの設定が同意されたことを確認したことを、XMPPクライアント制御部221aに通知する。(ステップS321)
The html display
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、追加提案同意情報m6が示す同意を確認した旨を、公開データ回線を通じて第2XMPPクライアント装置2bに送信する。(ステップS322)
The XMPP
そして、第1XMPPクライアント装置2aのXMPPクライアント制御部221a、及び第2XMPPクライアント装置2bのXMPPクライアント制御部221bは、XMPPサーバ3から提供されるXMPPの通信規約であるXEP−0166(Jingle)を利用した通信機能により、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間に追加転送回線50eを開設してコンテント転送経路5に加える。(ステップS323及びS324)なお、ここでは、追加転送回線50eとして、画像コンテントを転送するためのイメージコンテント転送回線がさらに開設され、コンテント転送経路5に加えられている。
The XMPP
そして、第1XMPPクライアント装置2aのhtml表示要素制御部222a、及び第2XMPPクライアント装置2bのhtml表示要素制御部222bは、チャットの表示処理を再開する。(ステップS325及びS326)
Then, the html display
以上によって、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間でコンテント転送経路5を介して、さらに転送するマルチメディアコンテントを追加することができる。
As described above, it is possible to add multimedia content to be further transferred between the first
すなわち、本実施形態のマルチメディアコンテント転送システム1では、コンテント転送経路5を介してさらに転送される追加コンテントの追加コンテントIDと、追加コンテントIDと対応付けられる追加表示要素IDと、追加コンテントの追加表示属性情報と、がさらに加えられる追加転送経路設定情報m5が、第1XMPPクライアント装置2aからネットワーク4及びXMPPサーバ3を介して、第2XMPPクライアント装置2bに送信されるステップと、XMPPサーバ3から提供される通信機能により、第1XMPPクライアント装置2a及び第2XMPPクライアント装置2bの間に、追加コンテントを転送する追加転送回線50eが、追加転送経路設定情報m5に基づいて開設されるステップと、をさらに備えることによって、さらに転送するマルチメディアコンテントを追加することができる。
That is, in the multimedia
このようにすることによって、各XMPPクライアント装置2の間に追加転送回線50eを動的にさらに開設して、コンテント転送経路5に追加することができる。従って、送信側のXMPPクライアント装置2aのユーザは、コンテント転送経路5を介して転送するコンテントを任意に追加して、動的に転送することができる。さらに、送信側のXMPPクライアント装置2bのユーザは、追加したコンテントを、指定する表示属性で、受信側のXMPPクライアント装置2bの表示部23bに表示させることができる。
In this way, an additional transfer line 50e can be dynamically opened between the
また、本実施形態のマルチコンテント転送システム1では、第2XMPPクライアント装置2bにおいて、追加コンテントIDと対応する追加表示要素IDにより特定される追加表示要素情報に、追加表示属性情報70eが上書きされるステップをさらに備えている。
In the
このようにすることによって、コンテント転送経路5を介して転送されるコンテントが任意に追加されても、各XMPPクライアント装置2において、コンテントと表示画面231上の表示要素との対応関係を保ったまま、個別に、表示画面231上の表示要素の表示属性を管理することができる。
By doing so, even if content transferred via the
さらに、前記追加転送経路設定情報m5が送信されるステップ、及び前記追加転送回線50eが開設されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われている。 Further, the step of transmitting the additional transfer path setting information m5 and the step of opening the additional transfer line 50e are performed using XEP-0166 (Jingle) which is an XMPP communication protocol.
このようにすることによって、各XMPPクライアント装置2は、XMPPサーバ3からXMPPに準拠した通信機能の提供を受けることができるので、追加されたコンテントを転送するための追加転送回線50eの開設、及びそのコンテントの転送を動的且つリアルタイムに行うことができる。また、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用することができるので、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する追加転送回線50eを同一の手順で簡便且つ動的に、追加して開設することができる。
In this way, each
また、マルチメディアコンテント転送システム1では、コンテント転送経路5を構成する任意の転送回線(第2転送回線)の接続を動的に切断することができる。次に、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で、コンテント転送経路5のうちの少なくとも1つの任意の転送回線(第2転送回線)の接続が切断される手順について説明する。図13は、本実施形態において、コンテント転送経路を介して転送するマルチメディアコンテントを削減する手順を説明するための動作図である。図13では、イメージコンテント転送回線50cの接続を切断している。
In the multimedia
まず、第1XMPPクライアント装置2aにおいて、html表示要素制御部222aが、チャットの表示処理を中断し(ステップS401)、XMPPクライアント制御部221aにチャットを中断する旨を通知する。(ステップS402)
First, in the first
第2XMPPクライアント装置2bにおいても同様に、html表示要素制御部222bが、チャットの表示処理を中断し(ステップS403)、XMPPクライアント制御部221bにチャットを中断する旨を通知する。(ステップS404)
Similarly, in the second
次に、第1XMPPクライアント装置2aでは、html表示要素制御部222aが、接続が切断されるイメージコンテント転送回線50cにより転送される画像コンテント(第2コンテント)の表示属性を示すhtml表示属性情報70c(第2html表示属性情報)、及びその画像コンテントの識別子である削減コンテントIDと対応付けられた削減表示要素ID(第2表示要素ID)が、それまでのhtml表示仕様情報7から削除された削減html表示仕様情報7b(第2html表示仕様情報)を作成する。(ステップS405)そして、html表示要素制御部222aは、改訂した削減html表示仕様情報7bを、XMPPクライアント制御部221aに通知する。(ステップS406)
Next, in the first
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、イメージコンテント転送回線5おc(第2転送回線)の接続を切断してコンテント転送経路5から除外するための削減転送経路設定情報m7(第2転送経路設定情報)を作成する。(ステップS407)ここでは、接続が切断されるイメージコンテント転送回線50cを介して転送されるコンテントの識別子である削減コンテントIDと、削減ストリーム属性情報60cが、それまでのストリーム仕様情報6から除外された削減ストリーム仕様情報6bが作成される。そして、転送経路IDと、改訂した削減ストリーム仕様情報6bと、削減html表示仕様情報7bとを有する削減転送経路設定情報m7を作成する。
The XMPP
そして、第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、XMPPの通信規約であるXEP−0166(Jingle)を利用して、削減転送経路設定情報m7を、公開データ回線を通じて第2XMPPクライアント装置2bに送信する。(ステップS408)これにより、コンテント転送経路5のイメージコンテント転送回線50cの接続を切断することを提案する旨を第2XMPPクライアント装置2bに通知する。図14は、本実施形態における削減転送経路設定情報の一例を示す図である。図14のように、削減転送経路設定情報m7では、それまでのストリーム仕様情報6及びhtml表示仕様情報7から、接続が切断されるイメージコンテント転送回線50cを介して転送されるコンテントのストリーム属性情報60c及びhtml表示属性情報70cが削除されている。
Then, the XMPP
第2XMPPクライアント装置2bのXMPPクライアント制御部221bは、削減転送経路設定情報m7を確認した旨を、公開データ回線を通じて第1XMPPクライアント装置2aに送信する。(ステップS409)
The XMPP
そして、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間で、公開データ回線を介して、イメージコンテント転送回線50cの接続を切断するための設定内容についての交渉(ストリーム仕様ネゴシエーション)が行われる。(ステップS410及びS411)このストリーム仕様ネゴシエーションの結果に応じて、MC−Jingleのレスポンダである第2XMPPクライアント装置2bは、イメージコンテント転送回線50cの接続の切断の提案に対して、同意するか拒否するかを判断する。
Then, negotiation (stream specification negotiation) is performed between the first
また、第1XMPPクライアント装置2aにおいて、XMPPクライアント制御部221aとhtml表示要素制御部222aとの間で、削減転送経路設定情報m7の削減html表示仕様情報7bに基づいて、削減コンテントの表示に関する表示パラメータ(表示属性)の削除設定についての表示仕様ネゴシエーションが行われる。(ステップS411)この表示仕様ネゴシエーションによって、接続が切断されるイメージコンテント転送回線50cに対応する表示属性のパラメータの削除設定が第1XMPPクライアント装置2aで決定される。
Further, in the first
同様に、第2XMPPクライアント装置2bにおいて、XMPPクライアント制御部221bとhtml表示要素制御部222bとの間で、削減転送経路設定情報m7の削減html表示仕様情報7bに基づいて、転送回線50cを介して転送されるコンテントの表示に関する表示パラメータ(表示属性)の削除設定についての表示仕様ネゴシエーションが行われる。(ステップS413)この表示仕様ネゴシエーションによって、接続が切断されるイメージコンテント転送回線50cに対応する表示属性のパラメータの削除設定が第2XMPPクライアント装置2bで決定される。
Similarly, in the second
第2XMPPクライアント装置2bのhtml表示要素制御部222bが、削除転送経路設定情報m1m7の削除html表示仕様情報7bに基づく表示パラメータの削除設定に同意すると(ステップS414)、html表示要素制御部222bは、XMPPクライアント制御部221bに、その削除設定に同意したことを通知する。(ステップS415)
When the html display
そして、第2XMPPクライアント装置2bのXMPPクライアント制御部221bが、削除転送経路設定情報m7の削除ストリーム属性情報6bに基づくイメージコンテント転送回線50cの接続の削除設定に同意すると(ステップS416)、XMPPクライアント制御部221bは、その削除設定の提案に同意する旨を示す削除提案同意情報m8を、公開データ回線を介して第1XMPPクライアント装置2aに送信する。(ステップS417)
When the XMPP
図15は、本実施形態における削除提案同意情報の一例を示す図である。図15のように、削除提案同意情報m8では、それまでのストリーム仕様情報8及びhtml表示仕様情報9から、接続が切断されるイメージコンテント転送回線50cを介して転送されるコンテントのストリーム属性設定情報80c及びhtml表示属性設定情報90cが削除されている。
FIG. 15 is a diagram showing an example of the deletion proposal consent information in the present embodiment. As shown in FIG. 15, in the deletion proposal consent information m8, the stream attribute setting information of the content transferred through the image content transfer line 50c to be disconnected from the stream specification information 8 and the html display specification information 9 so far. 80c and html display
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、第2XMPPクライアント装置2bが同意した削除転送経路設定情報m7の削除ストリーム属性情報8bの設定を確認する。(ステップS418)また、第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、削除転送経路設定情報m7の削除html表示仕様情報7bに基づく表示パラメータの削除設定が第2XMPPクライアント装置2bにて同意された旨を、html表示要素制御部222aに通知する。(ステップS419)
The XMPP
第1XMPPクライアント装置2aのhtml表示要素制御部222aが、第2XMPPクライアント装置2bにて削除html表示仕様情報7bに基づく表示パラメータの削除設定が同意されたことを確認する。(ステップS420)そして、第1XMPPクライアント装置2aのhtml表示要素制御部222aが、その削除設定の同意を確認した旨を、XMPPクライアント制御部221aに通知する。(ステップS421)
The html display
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、削除提案同意情報m8が示す同意を確認した旨を、公開データ回線を通じて第2XMPPクライアント装置2bに送信する。(ステップS422)
The XMPP
そして、第1XMPPクライアント装置2aのXMPPクライアント制御部221a、及び第2XMPPクライアント装置2bのXMPPクライアント制御部221bは、XMPPサーバ3から提供されるXMPPの通信規約であるXEP−0166(Jingle)を利用した通信機能により、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間に開設されたイメージコンテント転送回線52の接続を切断してコンテント転送経路5から除外する。(ステップS423,S424)
The XMPP
そして、第1XMPPクライアント装置2aのhtml表示要素制御部222a、及び第2XMPPクライアント装置2bのhtml表示要素制御部222bは、チャットの表示処理を再開する。(ステップS425,S426)
Then, the html display
このように、本実施形態のマルチメディアコンテント転送システム1では、XMPPサーバ3から提供される通信機能により、コンテント転送経路5のうちの少なくとも1つの削減転送回線(第2転送回線)の接続を動的に切断することができる。
As described above, in the multimedia
すなわち、本実施形態のマルチメディアコンテント転送システム1では、前記コンテント転送経路5のうちの少なくとも1つの削減転送回線の接続が切断されるステップをさらに備え、前記削減転送回線の接続が切断されるステップは、前記削減転送回線により転送される削減コンテントの削減コンテントIDと、前記削減コンテントIDと対応付けられた削減表示要素IDと、前記削減コンテントのhtml表示属性情報とが削除された削減転送経路設定情報m7が、前記第1XMPPクライアント装置2aから前記ネットワーク4及び前記XMPPサーバ3を介して、前記第2XMPPクライアント装置2bに送信されるステップと、前記XMPPサーバ3から提供される前記通信機能により、前記削減転送経路設定情報m7に基づいて、前記削減転送回線の接続が切断されるステップと、を有することによって、コンテント転送経路5のうちの少なくとも1つの削減転送回線の接続を動的に切断することができる。
That is, the multimedia
このようにすることによって、各XMPPクライアント装置2の間に開設されたコンテント転送経路5を構成する転送回線のうちの少なくとも1つの接続を動的に切断することができる。従って、各XMPPクライアント装置2の間で転送されるコンテントの数を任意に削減することができる。
By doing so, it is possible to dynamically disconnect at least one of the transfer lines constituting the
また、本実施形態のマルチメディアコンテント転送システム1では、前記削減転送経路設定情報m7が送信されるステップ、及び前記削減転送回線の接続が切断されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われる。
In the multimedia
このようにすることによって、各XMPPクライアント装置2は、XMPPサーバ3からXMPPに準拠した通信機能の提供を受けて、XMPPのプロトコル(通信規約)であるXEP−0166(Jingle)を利用することができる。よって、任意の種類のマルチメディアコンテント(テキストや動画、音声、画像など)を転送する転送回線の接続を、同一の手順で簡便且つ動的に、切断することができる。
In this way, each
次に、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間に接続されたコンテント転送経路5を切断する手順について説明する。図17は、本実施形態において、コンテント転送経路を切断する手順を説明するための動作図である。
Next, a procedure for disconnecting the
チャットが終了すると、第1XMPPクライアント装置2aのhtml表示要素制御部222a、及び第2XMPPクライアント装置2bのhtml表示要素制御部222bが、チャット画面の表示処理を終了する。(ステップS501、S502)
When the chat ends, the html display
そして、第1XMPPクライアント装置2aのhtml表示要素制御部222aが、コンテント転送経路5の接続を切断する旨を、XMPPクライアント制御部221aに指示する。(ステップS503)
Then, the html display
第1XMPPクライアント装置2aのXMPPクライアント制御部221aは、コンテント転送経路5の接続を切断するための転送経路切断情報m9を作成し(ステップS504)、公開データ回線を通じて第2XMPPクライアント装置2bに送信する。(ステップS505)
The XMPP
図17は、本実施形態における転送経路切断情報の一例である。図17では、転送経路切断情報m9は、<iq>タグに、送信元である第1XMPPクライアント装置2aのJID(Jabber ID)、転送経路切断情報m9の識別子("12351")、送信先である第2XMPPクライアント装置2bのJID、転送経路切断情報m9がメッセージングする情報のtype属性("set")が記述されている。また、<mc-jingle>タグには、転送経路切断情報m9がコンテント転送経路5の接続の切断を提案していることを示すaction属性("session-terminate")、イニシエータである第1XMPPクライアント装置2aのJID、レスポンダである第2XMPPクライアント装置2bのJID、コンテント転送経路5の転送経路ID("98765")が記述されている。なお、転送経路IDに換えて、このコンテント転送経路5を通じて行われるセッションを識別するためのセッションID(sid:session id)が記述されていてもよい。
FIG. 17 is an example of transfer path disconnection information in the present embodiment. In FIG. 17, the transfer path disconnection information m9 includes the <iq> tag, the JID (Jabber ID) of the first
第2XMPPクライアント装置2bのXMPPクライアント制御部221bは、コンテント転送経路5の接続を切断することの提案を確認した旨を、公開データ回線を通じて第1XMPPクライアント装置2aに送信する。(ステップS506)
The XMPP
そして、第1XMPPクライアント装置2aのXMPPクライアント制御部221a、及び第2XMPPクライアント装置2bのXMPPクライアント制御部221bは、コンテント転送経路5の接続を切断する。(ステップS507,S508)
Then, the XMPP
以上により、第1XMPPクライアント装置2aと第2XMPPクライアント装置2bとの間に接続されたコンテント転送経路5の接続が切断される。
Thus, the connection of the
以上、本発明を実施の形態をもとに説明した。この実施の形態は例示であり、その各構成要素や各処理の組み合わせに色々な変形例は可能であることは、本発明の範囲にあることは当業者に理解されるところである。 The present invention has been described based on the embodiments. It is to be understood by those skilled in the art that this embodiment is an exemplification, and that various modifications can be made to each component and combination of processes within the scope of the present invention.
たとえば、上述の実施形態において、コンテント転送経路5の設定・開設などは、XMPPの応用プロトコルであるJingle(XEP−0166)を利用するものとしたが、これに限定するものではない。2つの通信可能な端末装置の間にデータを送受信する通信経路を確立するためのプロトコル(通信規約)であれば利用できる。
For example, in the above-described embodiment, the setting / opening of the
本発明は、テキストコンテントのほか、動画コンテント、画像コンテント、音声コンテントなどのマルチメディアコンテントを相互転送するチャットシステムや、TV電話、電子会議システムなどに利用することができる。 The present invention can be used for a chat system, a videophone, an electronic conference system, and the like that mutually transfer multimedia content such as moving image content, image content, and audio content in addition to text content.
1 マルチメディアコンテント転送システム
(マルチメディア通信システム)
2 XMPPクライアント装置(クライアント装置)
2a インターネット機能付きテレビジョン(第1クライアント装置)
2b 携帯端末(第2クライアント装置)
21 通信部
22 制御部
221 XMPPクライアント制御部(クライアント制御部)
222 html表示要素制御部(表示要素制御部)
223 表示仕様制御部(表示仕様制御部)
23 表示部
231 表示画面
24 記憶部
25 入力部
3 XMPPサーバ(通信サーバ)
31 クラウド
4 ネットワーク
41 第1ネットワーク
42 第2ネットワーク
5 コンテント転送経路
51 転送回線
51a,51b ビデオコンテント転送回線
51c,51e イメージコンテント転送回線
51d テキストコンテント転送回線
6 ストリーム仕様情報
6a 追加ストリーム仕様情報
6b 削減ストリーム仕様情報
60a〜e ストリーム属性情報
7 html表示仕様情報
7a 追加html表示仕様情報
7b 削減html表示仕様情報
70a〜e html表示属性情報
8 ストリーム仕様設定情報
8a 追加ストリーム仕様設定情報
8b 削減ストリーム仕様設定情報
80a〜e ストリーム属性設定情報
9 html表示仕様設定情報
9a 追加html表示仕様設定情報
9b 削減html表示仕様設定情報
90a〜e html表示属性設定情報
1 Multimedia content transfer system
(Multimedia communication system)
2 XMPP client device (client device)
2a Television with Internet function (first client device)
2b Mobile terminal (second client device)
21
222 html display element control unit (display element control unit)
223 Display specification control unit (Display specification control unit)
23 display unit 231
31
Claims (28)
前記通信サーバから提供される通信機能により、前記第1クライアント装置及び前記第2クライアント装置の間に、前記転送経路設定情報に基づいて、コンテント転送経路が開設されるステップと、
前記コンテントが、前記第1クライアント装置から、前記コンテント転送経路を介して前記第2クライアント装置に転送されるステップと、
を備え、
前記コンテントは複数であって、前記コンテント転送経路は、それぞれの前記コンテントが転送される複数の転送回線からなり、
それぞれの前記コンテント毎に、対応する前記コンテントID、前記表示要素ID、及び前記表示属性情報が設定され、
前記表示部は、第2クライアント装置に内蔵又は外付けされる通信方法。 The content ID of the content to be displayed on the display unit, the display element ID of the display element information in which the content is stored, the display attribute information indicating the display attribute of the content, and the content ID and the display element ID Is transferred from the first client device to the second client device via the communication server,
A step of establishing a content transfer path between the first client apparatus and the second client apparatus based on the transfer path setting information by a communication function provided from the communication server;
Transferring the content from the first client device to the second client device via the content transfer path;
With
The content is plural, and the content transfer path includes a plurality of transfer lines to which the respective content is transferred,
For each content, the corresponding content ID, the display element ID, and the display attribute information are set.
The display unit is a communication method that is built in or externally attached to the second client device .
前記転送経路設定情報が送信されるステップ、及び前記コンテント転送経路が開設されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われる請求項1〜請求項6のいずれかに記載の通信方法。 The communication server is an XMPP server that provides a communication function based on XMPP to the plurality of client devices,
The step of transmitting the transfer path setting information and the step of establishing the content transfer path are performed using XEP-0166 (Jingle) which is a communication protocol of XMPP. The communication method according to the above.
前記通信サーバから提供される前記通信機能により、前記第1クライアント装置及び前記第2クライアント装置の間に、前記第1コンテントを転送する第1転送回線が、前記第1転送経路設定情報に基づいて開設されるステップと、
をさらに備える請求項1〜7のいずれかに記載の通信方法。 The first content ID of the first content that is further transferred through the content transfer path, the first display element ID that is associated with the first content ID, and the first display attribute information of the first content. Further, the first transfer path setting information to be added is transmitted from the first client device to the second client device via the network and the communication server;
A first transfer line for transferring the first content between the first client device and the second client device by the communication function provided from the communication server is based on the first transfer path setting information. Steps to be opened,
The communication method according to claim 1, further comprising:
前記第1転送経路設定情報が送信されるステップ、及び前記第1転送回線が開設されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われる請求項8又は請求項9に記載の通信方法。 The communication server is an XMPP server that provides a communication function based on XMPP to the plurality of client devices,
The step of transmitting the first transfer path setting information and the step of opening the first transfer line are performed using XEP-0166 (Jingle) which is a communication protocol of XMPP. 9. The communication method according to 9.
前記第2転送回線の接続が切断されるステップは、
前記第2転送回線により転送される第2コンテントの第2コンテントIDと、前記第2コンテントIDと対応付けられた第2表示要素IDと、前記第2コンテントの第2表示属性情報とが削除された第2転送経路設定情報が、前記第1クライアント装置から前記ネットワーク及び前記通信サーバを介して、前記第2クライアント装置に送信されるステップと、
前記通信サーバから提供される前記通信機能により、前記第2転送経路設定情報に基づいて、前記第2転送回線の接続が切断されるステップと、
を有する請求項1〜10のいずれかに記載の通信方法。 A step of disconnecting a second transfer line of at least one of the content transfer paths;
The step of disconnecting the second transfer line includes:
The second content ID of the second content transferred through the second transfer line, the second display element ID associated with the second content ID, and the second display attribute information of the second content are deleted. The second transfer path setting information transmitted from the first client device to the second client device via the network and the communication server;
A step of disconnecting the second transfer line based on the second transfer path setting information by the communication function provided from the communication server;
The communication method according to claim 1, comprising:
前記第2転送経路設定情報が送信されるステップ、及び前記第2転送回線の接続が切断されるステップが、XMPPの通信規約であるXEP−0166(Jingle)を利用して行われる請求項11に記載の通信方法。 The communication server is an XMPP server that provides a communication function based on XMPP to the plurality of client devices,
The step of transmitting the second transfer path setting information and the step of disconnecting the second transfer line are performed using XEP-0166 (Jingle) which is an XMPP communication protocol. The communication method described.
前記コンテントのコンテントIDと、前記コンテントが格納される表示要素情報の表示要素IDと、前記コンテントの表示属性を示す表示属性情報とを有する転送経路設定情報を、前記通信部から前記通信サーバを介して前記他のクライアント装置に送信し、前記通信サーバから提供される通信機能により、前記転送経路設定情報に基づいて、前記コンテント転送経路を開設するクライアント制御部と、
前記他のクライアント装置から前記コンテント転送経路を介して前記通信部に転送されたコンテントを前記表示要素情報に格納する表示要素制御部と、
前記表示要素情報に格納された前記コンテントを、自装置に内蔵又は外付けされる表示部に前記表示属性情報に基づいて表示する表示仕様制御部と、
を備え、
前記転送経路設定情報において、前記コンテントIDと前記表示要素IDとが対応付けられ、
前記コンテントは複数であって、前記コンテント転送経路は、それぞれの前記コンテントが転送される複数の転送回線からなり、
それぞれの前記コンテント毎に、対応する前記コンテントID、前記表示要素ID、及び前記表示属性情報が設定されるクライアント装置。 A communication unit connected to a communication server via a network, and a content transfer path through which content is transferred is established with another client device ;
Transfer route setting information including the content ID of the content, the display element ID of the display element information in which the content is stored, and the display attribute information indicating the display attribute of the content is transmitted from the communication unit via the communication server. A client control unit configured to open the content transfer path based on the transfer path setting information by a communication function provided to the other client device and provided from the communication server;
A display element control unit that stores the content that is transferred to the communication unit via the content transfer route from the previous SL other client devices in the display element information,
And Table Shimesuru display specification control section based on the display of the content stored in the element information, the display attribute information on the display unit that is internal or external to the own device,
With
In the transfer route setting information, the content ID and the display element ID are associated with each other,
The content is plural, and the content transfer path includes a plurality of transfer lines to which the respective content is transferred,
A client device in which the corresponding content ID, display element ID, and display attribute information are set for each content.
前記表示仕様制御部は、前記表示要素情報に格納された前記コンテントを、上書きされた前記表示属性情報に基づいて前記表示部に表示する請求項14に記載のクライアント装置。 The display element control unit overwrites the display attribute information on the display element information specified by the display element ID corresponding to the content ID,
The client device according to claim 14, wherein the display specification control unit displays the content stored in the display element information on the display unit based on the overwritten display attribute information.
前記クライアント制御部は、XMPPの通信規約であるXEP−0166(Jingle)を利用して、前記転送経路設定情報を送信し、前記コンテント転送経路を開設する請求項14〜請求項19のいずれかに記載のクライアント装置。 The communication server is an XMPP server that provides a communication function compliant with XMPP,
20. The client control unit transmits the transfer path setting information and opens the content transfer path using XEP-0166 (Jingle) which is a communication protocol of XMPP. The client device described.
前記クライアント制御部は、
前記第1コンテントの第1コンテントIDと、前記第1転送経路設定情報において、前記第1コンテントIDと対応付けられた第1表示要素IDとが対応付けられる第1表示要素IDと、前記第1コンテントの第1表示属性情報とをさらに有する第1転送経路設定情報を、前記通信部から前記ネットワーク及び前記通信サーバを介して、前記他のクライアント装置に送信し、
前記通信サーバから提供される前記通信機能によって、前記通信部と前記他のクライアント装置との間に前記第1コンテントを転送する第1転送回線を前記第1転送経路設定情報に基づいて開設し、
前記通信部が前記第1転送回線を介して前記他のクライアント装置から転送される前記第1コンテントを受け取ると、
前記表示要素制御部は、前記第1コンテントを前記第1表示要素情報に格納し、
表示仕様制御部は、前記第1表示要素情報に格納された前記第1コンテントを、前記第1表示属性情報に基づいて前記表示部に表示する請求項14〜請求項20のいずれかに記載のクライアント装置。 When the first content is further transferred between the communication unit and the other client device via the content transfer path,
The client control unit
A first content ID of the first content, a first display element ID associated with the first display element ID associated with the first content ID in the first transfer path setting information, and the first First transfer route setting information further including first display attribute information of content is transmitted from the communication unit to the other client device via the network and the communication server;
Based on the first transfer path setting information, a first transfer line for transferring the first content between the communication unit and the other client device is opened by the communication function provided from the communication server,
When the communication unit receives the first content transferred from the other client device via the first transfer line,
The display element control unit stores the first content in the first display element information,
The display specification control unit according to any one of claims 14 to 20, wherein the display specification control unit displays the first content stored in the first display element information on the display unit based on the first display attribute information. Client device.
前記表示要素制御部は、前記第1表示要素IDにより特定される前記第1表示要素情報に、前記第1表示属性情報を上書きし、
前記表示仕様制御部は、前記第1表示要素情報に格納された前記第1コンテントを、上書きされた前記第1表示属性情報に基づいて前記表示部に表示する請求項21に記載のクライアント装置。 When the communication unit receives the first content transferred from the other client device via the first transfer line,
The display element control unit overwrites the first display attribute information on the first display element information specified by the first display element ID,
The client device according to claim 21, wherein the display specification control unit displays the first content stored in the first display element information on the display unit based on the overwritten first display attribute information.
前記クライアント制御部は、XMPPの通信規約であるXEP−0166(Jingle)を利用して、前記第1転送経路設定情報を送信し、前記第1転送回線を開設する請求項21又は請求項22に記載のクライアント装置。 The communication server is an XMPP server that provides a communication function compliant with XMPP,
The client control unit transmits the first transfer path setting information by using XEP-0166 (Jingle) which is a communication protocol of XMPP, and opens the first transfer line. The client device described.
前記第2転送回線により転送される第2コンテントの第2コンテントIDと、前記第2コンテントIDと対応付けられた第2表示要素IDと、前記第2コンテントの第2表示属性情報とが削除された第2転送経路設定情報を、前記通信部から前記ネットワーク及び前記通信サーバを介して、前記他のクライアント装置に送信し、
前記通信サーバから提供される前記通信機能により、前記第2転送経路設定情報に基づいて、前記第2転送回線の接続を切断する請求項14〜23のいずれかに記載のクライアント装置。 The client control unit
The second content ID of the second content transferred through the second transfer line, the second display element ID associated with the second content ID, and the second display attribute information of the second content are deleted. The second transfer path setting information is transmitted from the communication unit to the other client device via the network and the communication server.
24. The client device according to claim 14, wherein the communication function provided from the communication server disconnects the connection of the second transfer line based on the second transfer path setting information.
前記クライアント制御部は、XMPPの通信規約であるXEP−0166(Jingle)を利用して、前記第2転送経路設定情報を送信し、記第2転送回線の接続を切断する請求項24に記載のクライアント装置。 The communication server is an XMPP server that provides a communication function based on XMPP to the plurality of client devices,
25. The client control unit according to claim 24, wherein the client control unit transmits the second transfer path setting information and disconnects the connection of the second transfer line by using XEP-0166 (Jingle) which is an XMPP communication protocol. Client device.
前記クライアント装置は、
前記通信サーバに前記ネットワークを介して接続され、前記コンテント転送経路が他のクライアント装置との間に開設される通信部と、
前記コンテントのコンテントIDと、前記コンテントが格納される表示要素情報の表示要素IDと、前記コンテントの表示属性を示す表示属性情報とを有する転送経路設定情報を、前記通信部から前記通信サーバを介して前記他のクライアント装置に送信し、前記通信サーバから提供される通信機能により、前記転送経路設定情報に基づいて、前記コンテント転送経路を開設するクライアント制御部と、
前記他のクライアント装置から前記コンテント転送経路を介して前記通信部に転送されたコンテントを前記表示要素情報に格納する表示要素制御部と、
前記表示要素情報に格納された前記コンテントを、前記クライアント装置に内蔵又は外付けされる前記表示部に前記表示属性情報に基づいて表示する表示仕様制御部と、
を備え、
前記転送経路設定情報において、前記コンテントIDと前記表示要素IDとが対応付けられる請求項27に記載のマルチメディア通信システム。 The communication server, and a plurality of the client devices,
The client device is
A communication unit that is connected to the communication server via the network and in which the content transfer path is established with another client device ;
Transfer route setting information including the content ID of the content, the display element ID of the display element information in which the content is stored, and the display attribute information indicating the display attribute of the content is transmitted from the communication unit via the communication server. A client control unit configured to open the content transfer path based on the transfer path setting information by a communication function provided to the other client device and provided from the communication server;
A display element control unit that stores the content that is transferred to the communication unit via the content transfer route from the previous SL other client devices in the display element information,
And Table Shimesuru display specification control section based on the display of the content stored in the element information, the display attribute information on the display unit that is internal or external to the client device,
With
The multimedia communication system according to claim 27, wherein the content ID and the display element ID are associated with each other in the transfer path setting information.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010270684A JP5694746B2 (en) | 2010-12-03 | 2010-12-03 | COMMUNICATION METHOD, CLIENT DEVICE, AND MULTIMEDIA COMMUNICATION SYSTEM INCLUDING THE SAME |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010270684A JP5694746B2 (en) | 2010-12-03 | 2010-12-03 | COMMUNICATION METHOD, CLIENT DEVICE, AND MULTIMEDIA COMMUNICATION SYSTEM INCLUDING THE SAME |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015020895A Division JP6090346B2 (en) | 2015-02-05 | 2015-02-05 | Information apparatus and communication method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012118937A JP2012118937A (en) | 2012-06-21 |
JP5694746B2 true JP5694746B2 (en) | 2015-04-01 |
Family
ID=46501645
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010270684A Active JP5694746B2 (en) | 2010-12-03 | 2010-12-03 | COMMUNICATION METHOD, CLIENT DEVICE, AND MULTIMEDIA COMMUNICATION SYSTEM INCLUDING THE SAME |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5694746B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101407603B1 (en) | 2012-10-11 | 2014-06-16 | (주)아이들 | Bidirectional transmission system for message of associated with disaster |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08263257A (en) * | 1995-03-27 | 1996-10-11 | Toshiba Corp | Information terminal unit and data display method for information terminal unit |
JP2003150527A (en) * | 2001-11-05 | 2003-05-23 | Internatl Business Mach Corp <Ibm> | Chat system, terminal unit therefor, chat server and program |
JP2003242058A (en) * | 2001-11-16 | 2003-08-29 | Canon Inc | Server device, information processor, control method of server device, control method of information processor, program for server device and program for information processor |
JP2004326684A (en) * | 2003-04-28 | 2004-11-18 | Tdk Corp | Content distribution method and system |
JP2006157266A (en) * | 2004-11-26 | 2006-06-15 | Canon Inc | Control device, apparatus to be controlled, and control method |
JP2009110041A (en) * | 2007-10-26 | 2009-05-21 | Sony Corp | Web screen sharing system, its terminal for sharing, and its sharing program |
-
2010
- 2010-12-03 JP JP2010270684A patent/JP5694746B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012118937A (en) | 2012-06-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2520065B1 (en) | Screen sharing | |
WO2018126853A1 (en) | Data transmission method and apparatus | |
CN101496363A (en) | Multi-threaded instant messaging | |
JP2009296449A (en) | Image edit system, image edit server, and communication terminal | |
CN103841004B (en) | Method for information display and information server | |
CN102138156A (en) | Persisting a group in an instant messaging application | |
JP2002063120A (en) | Data communication system and data communication method | |
US10817137B2 (en) | Method and system for communication between web browsers, using a unified communication environment | |
EP2028833A1 (en) | Communication control system, call control server and communication control method | |
US7933563B2 (en) | Communication system, communication terminal, server, communication method to be used therein and program therefor | |
EP3217596B1 (en) | Communication terminal, communication system, and data transmission method | |
JP2019012971A (en) | System and information processing method | |
JP2004213533A (en) | Screen reception device, screen delivery device, screen information transmission/reception system, screen reception method, screen delivery method and program therefor | |
JP2019046247A (en) | Information processing apparatus and method of controlling same, communication system, and program | |
JP2013214911A (en) | Telephone terminal and screen sharing method | |
JP2012074936A (en) | Terminal device, display control method, and display control program | |
JP5171392B2 (en) | Communication system, information holding device, and management device | |
JP5694746B2 (en) | COMMUNICATION METHOD, CLIENT DEVICE, AND MULTIMEDIA COMMUNICATION SYSTEM INCLUDING THE SAME | |
CN109074229B (en) | Printing of encrypted documents using multiple networks | |
JP6090346B2 (en) | Information apparatus and communication method | |
JP2004334721A (en) | Device for providing content, and device for browsing provided content | |
US20110283180A1 (en) | Communication method, information terminal apparatus, display apparatus, and communication system comprising these | |
JP2000293458A (en) | Data distribution device, data receiver and controlling method of them | |
JP5431118B2 (en) | Transmission device, execution device, remote control system, control method for transmission device, control method for execution device, control program, and recording medium | |
JP2002300297A (en) | Data managing system, first and second devices and portable terminal to be used therefor, portable terminal, data managing method, data managing program and computer readable recording medium with the program recorded thereon |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130827 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140327 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140408 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140530 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20140530 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140924 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150106 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150205 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5694746 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |