JP2016531504A - マルチコンテンツメディア通信方法、装置、およびシステム - Google Patents

マルチコンテンツメディア通信方法、装置、およびシステム Download PDF

Info

Publication number
JP2016531504A
JP2016531504A JP2016532212A JP2016532212A JP2016531504A JP 2016531504 A JP2016531504 A JP 2016531504A JP 2016532212 A JP2016532212 A JP 2016532212A JP 2016532212 A JP2016532212 A JP 2016532212A JP 2016531504 A JP2016531504 A JP 2016531504A
Authority
JP
Japan
Prior art keywords
media
capture
content
captures
individual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016532212A
Other languages
English (en)
Other versions
JP6255616B2 (ja
Inventor
▲ウェイ▼▲ウェイ▼ ▲楊▼
▲ウェイ▼▲ウェイ▼ ▲楊▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2016531504A publication Critical patent/JP2016531504A/ja
Application granted granted Critical
Publication of JP6255616B2 publication Critical patent/JP6255616B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/487—Arrangements for providing information services, e.g. recorded voice services or time announcements
    • H04M3/4872—Non-interactive information services
    • H04M3/4878—Advertisement messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本発明の実施形態は、マルチコンテンツメディア通信方法、マルチコンテンツメディア通信装置、およびマルチコンテンツメディア通信システムを提供する。本マルチコンテンツメディア通信方法は、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップであって、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップと、第1のメディア提供装置が第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップであって、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含む、第1のメディア提供装置が第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップと、第1のメディア提供装置が、選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信するステップとを含む。本発明の実施形態においては、複数のサイトのメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者および送信者は切り替えコンテンツおよび切り替えポリシに関して折衝することができる。

Description

本発明の実施形態はネットワーク通信技術に関し、詳細には、マルチコンテンツメディア通信方法、装置、およびシステムに関する。
ビデオ会議分野の発展と共に、ユーザの会議サイトは、1台のカメラ、1台のアクティブビデオ、および1台のアクティブ画像ディスプレイから複数のカメラ、複数のアクティブビデオ、および複数のアクティブ画像ディスプレイへと進化している。同じサイト内の複数のカメラ、複数のアクティブビデオ、および複数のアクティブ画像ディスプレイは、物理的関係または論理的関係によって関連付けられる。サイトAは3画面サイトであり、サイトBは2画面サイトであり、サイトCは1画面サイトである。サイトAのカメラ1はサイトA内の位置1のところの出席者の画像を取り込むことができ、この画像は、サイトA、サイトB、またはサイトCの画面1に表示される。
従来のテレプレゼンス技術においては、マルチ画面マルチディスプレイ要求シナリオが導入され、このシナリオでは、対応する画像コンテンツが会議において規則（例えばアクティビティレベル）に従って表示されることを可能にする。位置と関連付けられた画像がキャプチャシーン（Capture Scene）として定義され、同じサイトの異なる画像表示方式が異なるキャプチャ・シーン・エントリ（Capture Scene Entry、略してCSE）として定義される。先行技術においては、画像間の、すなわち、異なるキャプチャ・シーン・インスタンス間の切り替えは、例えば、同じサイト内の高アクティビティレベルを有する画像への切り替えなど、同じサイトに基づいて提供することしかできない。
先行技術における問題は、画像間の切り替えを同じキャプチャシーンに基づいて提供することしかできないことである。
本発明の実施形態は、画像間の切り替えを同じキャプチャシーンに基づいて行うことしかできない先行技術における問題を解決するのに使用される、マルチコンテンツメディア通信方法、マルチコンテンツメディア通信装置、およびマルチコンテンツメディア通信システムを提供する。
第1の態様によれば、本発明の一実施形態はマルチコンテンツメディア通信方法を提供し、本マルチコンテンツメディア通信方法は、
第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップであって、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップと、
第1のメディア提供装置が第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップであって、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、第1のメディア提供装置が第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップと、
第1のメディア提供装置が、選択された個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信するステップと
を含む。
第1の態様に関連して、第1の態様の第1の実施態様において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集された少なくとも1つの個別メディアキャプチャ、または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
第1の態様の第1の実施態様に関連して、第1の態様の第2の実施態様において、第1のメディア提供装置は具体的には会議センタであり、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップの前に、本方法は、
会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信するステップであって、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信するステップと、
会議センタが第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成するステップと、
異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、会議センタが、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、再付番を行うステップと
を含む。
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第3の実施態様において、本方法は、
第1のメディア提供装置が、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定するステップ
をさらに含む。
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第4の実施態様において、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
を含む。
第1の態様の第4の実施態様に関連して、第1の態様の第5の実施態様において、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第6の実施態様において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第7の実施態様において、
第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、第1のメディア提供装置は異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
第2の態様によれば、本発明の一実施形態は第1のメディア提供装置を提供し、本第1のメディア提供装置は、
第1のメディア使用装置へ第1のメディア告知メッセージを送信する送信モジュールであって、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、送信モジュールと、
第1のメディア使用装置によって送信される第1のメディア構成メッセージを受信する受信モジュールであって、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、受信モジュールと
を含み、送信モジュールはさらに、受信モジュールによって受信される第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。
第2の態様に関連して、第2の態様の第1の実施態様において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集される少なくとも1つの個別メディアキャプチャ、および／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
第2の態様の第1の実施態様に関連して、第2の態様の第2の実施態様において、第1のメディア提供装置は具体的には会議センタであり、受信モジュールはさらに、
送信モジュールが第1のメディア使用装置へ第1のメディア告知メッセージを送信する前に、マルチパーティ会議において各サイトによって送信される第2のメディア告知メッセージを受信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、第1のメディア提供装置は、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する処理モジュール、をさらに含み、
処理モジュールはさらに、異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、会議センタにより再付番を行う。
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第3の実施態様において、処理モジュールはさらに、
個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第4の実施態様において、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
を含む。
第2の態様の第4の実施態様に関連して、第2の態様の第5の実施態様において、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第6の実施態様において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第7の実施態様において、処理モジュールはさらに、
第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
第3の態様によれば、本発明の一実施形態は第1のメディア使用装置を提供し、本第1のメディア使用装置は、
第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信する受信モジュールであって、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、受信モジュールと、第1のメディア提供装置へ第1のメディア構成メッセージを受信する送信モジュールであって、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、送信モジュールと
を含み、受信モジュールはさらに、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信し、本第1のメディア使用装置は、
第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを表示する、表示モジュール
を含む。
第3の態様に関連して、第3の態様の第1の実施態様において、第1のメディア使用装置は、
第1のメディア告知メッセージに従って会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされる選択に従って第1のメディア構成メッセージを生成する処理モジュールであって、メディアコンテンツ構成オプションは、第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャを形成するように複合されている個別メディアキャプチャに関する情報を含む、処理モジュール
をさらに含み、送信モジュールはさらに、第1のメディア提供装置、すなわち会議センタへ第1のメディア構成メッセージを送信する。
第3の態様または第3の態様の第1の実施態様に関連して、第3の態様の第2の実施態様において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集される少なくとも1つの個別メディアキャプチャ、または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
第3の態様または第3の態様の第1の実施態様および第2の実施態様のいずれか1つに関連して、第3の態様の第3の実施態様において、送信モジュールはさらに、
受信モジュールが第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信する前に、会議センタへ第2のメディア告知メッセージを送信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、そのため、会議センタは、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する。
第3の態様または第3の態様の第1の実施態様および第2の実施態様のいずれか1つに関連して、第3の態様の第4の実施態様において、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
を含む。
第3の態様の第4の実施態様に関連して、第3の態様の第5の実施態様において、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
第3の態様または第3の態様の第1の実施態様および第2の実施態様のいずれか1つに関連して、第3の態様の第6の実施態様において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
第4の態様によれば、本発明の一実施形態はマルチコンテンツメディア通信システムを提供し、本マルチコンテンツメディア通信システムは、
第2の態様または第2の態様の第1の実施態様から第7の実施態様のいずれか1つによる少なくとも1つの第1のメディア提供装置と、第3の態様または第3の態様の第1の実施態様から第6の実施態様のいずれか1つによる少なくとも1つの第1のメディア使用装置と
を含む。
本発明の実施形態によるマルチコンテンツメディア通信方法、マルチコンテンツメディア通信装置、およびマルチコンテンツメディア通信システムにおいて、第1のメディア使用装置は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信する。したがって、各サイトがマルチコンテンツ・メディア・キャプチャを提供することができ、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
本発明の実施形態における、または先行技術における技術的解決策をより明確に説明するために、以下に、各実施形態または先行技術を説明するのに必要とされる添付の図面について簡単に記述する。明らかに、以下の説明の添付の図面は本発明の一部の実施形態を示すものであり、当業者はこれら添付の図面から難なく他の図面をさらに導出することができる。
本発明によるマルチコンテンツメディア通信方法の実施形態1の流れ図である。 本発明によるマルチコンテンツメディア通信方法の実施形態2の流れ図である。 本発明によるマルチコンテンツメディア通信方法の実施形態2のシナリオの概略図である。 本発明によるマルチコンテンツメディア通信方法の実施形態4の流れ図である。 本発明による第1のメディア提供装置の実施形態1の概略的構造図である。 本発明による第1のメディア使用装置の実施形態1の概略的構造図である。 本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図1である。 本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図2である。 本発明による第1のメディア提供装置の実施形態1の概略的構造図である。 本発明による第1のメディア使用装置の実施形態1の概略的構造図である。
本発明の実施形態の目的、技術的解決策、および利点をより明確にするために、以下で、本発明の実施形態における添付の図面に関連して本発明の実施形態における技術的解決策を明確に説明する。明らかに、説明する実施形態は本発明の実施形態の全部ではなく一部である。本発明の実施形態に基づいて当業者によって難なく得られる他のすべての実施形態は、本発明の保護範囲内に含まれるものとする。
図1は、本発明によるマルチコンテンツメディア通信方法の実施形態1の流れ図である。本実施形態は第1のメディア提供装置によって実行され、第1のメディア提供装置は、ソフトウェアおよび／またはハードウェアによって実現することができ、本実施形態においては、テレプレゼンス会議において適用される方法を一例として使用する。図1に示すように、本実施形態における方法は以下を含むことができる。
ステップ101：第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信する。第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合される。
本実施形態においては、中国深セン（Shenzhen）と中国香港（HongKong）にある2つのテレプレゼンス会議室で開催されるテレプレゼンス会議を一例として使用する。この会議はポイントツーポイントの2者会議であるため、会議センタといった別の仲介会議デバイスの関与は不要である。
メディアキャプチャ（Media Capture）は、リアルタイム通信におけるメディアコンテンツの基本記述であり、一般には、メディアデバイスから送信されるマルチメディアストリームを表す。メディアキャプチャがビデオコンテンツである場合、このメディアキャプチャをビデオキャプチャ（Video Capture、略してVC）と呼ぶことができ、メディアキャプチャがオーディオコンテンツである場合、このメディアキャプチャをオーディオキャプチャ（Audio Capture、略してAC）と呼ぶことができる。
本実施形態においては、メディアキャプチャは、個別メディアキャプチャ（Individual Media Capture）と、マルチコンテンツ・メディア・キャプチャ（Multi-Content Media Capture）とに分類され、マルチコンテンツ・メディア・キャプチャは、複合メディアキャプチャ（Compound Media Capture）あるいはマルチコンテンツキャプチャ（Multi-Content Capture、略してMCC）と呼ぶこともできる。各個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャはキャプチャ識別子を有する。例えば、典型的な3画面テレプレゼンス会議室においては、3つの基本的な個別メディアキャプチャを提供することができ、これらはVC0（Video Capture 1）、VC1（Video Capture 1）およびVC2（Video Capture 2）であり、VC0、VC1、およびVC2は、個別メディアキャプチャのキャプチャ識別子である。
個別メディアキャプチャ（Individual Media Capture）は、静的メディアキャプチャ（Static Media Capture）と呼ぶこともでき、単一の固定されたメディア収集デバイスによって生成されるマルチメディアストリームをいい、このマルチメディアストリームは、例えば、カメラ（camera）によって収集される単一のビデオ画像や、マイクロフォン（microphone）によって生成される独立したオーディオデータとすることができる。同じサイトにおいて、1つまたは複数の個別メディアキャプチャがキャプチャ・シーン・エントリ（Capture Scene Entry）を形成し、キャプチャ・シーン・エントリはキャプチャシーンについての提示方式を指示する。例えば、3画面テレプレゼンスサイトにおいて、3台のカメラによって収集される3つのビデオ画像が、そのサイトを提示するためのキャプチャ・シーン・エントリを形成しうる。
マルチコンテンツ・メディア・キャプチャは複数の個別メディアキャプチャから複合されたメディアキャプチャをいい、マルチコンテンツ・メディア・キャプチャの複合方式は、例えば、複数のビデオ画像を合成する（compose）、複数のオーディオデータをミキシングする（mix）といった空間的方式とすることもでき、あるいは例えば、複数のビデオ画像を時間的順序で順次に伝送し、再生する、複数のビデオ画像を、特定の規則（例えば、音響アクティビティレベル）に従って循環させるといった時間的方式とすることもできる。マルチコンテンツ・メディア・キャプチャのコンテンツソースは、個別メディアキャプチャ、キャプチャ・シーン・エントリ、またはこれら2つのランダムな組み合わせを含む。マルチコンテンツ・メディア・キャプチャと個別メディアキャプチャはどちらもメディアキャプチャであり、したがって、一貫したキャプチャ特性、例えば、識別子や場所や優先順位を有しうる。
具体的には、中国深センサイトにある会議端末といった第1のメディア提供装置は、中国香港サイトにある会議端末といった第1のメディア使用装置へ第1のメディア告知メッセージを送信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャは、この通信のために深センサイトによって提供されうるメディアコンテンツである。
本実施形態においては、中国深センサイトは、（3台のカメラに対応する）3画面を有するテレプレゼンスサイトであり、3つのサイト画像の個別メディアキャプチャを提供することができ、キャプチャ識別子は、VC0、VC1、およびVC2であるものと仮定する。深センサイトを一例として用いると、第1のメディア提供装置は、中国香港サイトにある会議端末といった第1のメディア使用装置へ、以下の第1のメディア告知メッセージを送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
MCC1(VC0, VC1, VC2){MaxCaptures:1}
]
前述の第1のメディア告知メッセージにおいて、CaptureScene1は、深センサイトのキャプチャシーンのサイト識別子情報を指示し、VC0、VC1、およびVC2は、深センサイトによって提供されうる3つの個別メディアキャプチャ（ビデオキャプチャ）であり、VC0は、深センサイトの左位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、VC1は、深センサイトの中央位置における話し手の役割を果たす出席者のサイトビデオ画像を指示し、VC2は、深センサイトの右位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、マルチコンテンツ・メディア・キャプチャMCC1がさらに含まれ、MCC1は、対応するキャプチャ識別子であり、第1のメディア告知メッセージ内の3つの個別メディアキャプチャVC0、VC1、およびVC2から複合されている。第1のメディア告知メッセージにおいて、｛｝内のコンテンツは、例えば、role=speaker、capturearea=centralおよびMaxCaptures:1などのメディアキャプチャの属性情報であり、MaxCaptures:1は、最大キャプチャ数の属性値が1である、すなわち、ただ1つの個別メディアキャプチャだけが同時に提供されることを指示する。ここには、例えば、異なるメディアキャプチャの連係情報や優先順位情報など、他の属性情報をさらに含むこともできる。
ステップ102：第1のメディア提供装置は第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信する。第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む。
具体的には、香港サイトがただ1つの画面を有するテレプレゼンスサイトである場合、深センサイトの3つの個別メディアキャプチャのビデオ画像を、深センサイトの実物大画像の解像度に従って同時に映写することができない。したがって、深センサイトのすべてのコンテンツがただ1つの画面上に表示されることが予期され、この場合には、深センサイトから送信された第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャが選択される。香港サイトのデバイスといった第1のメディア使用装置によって送信される第1のメディア構成メッセージは、以下のコンテンツを含むことができる。
CaptureScene1
[
MCC1(VC0, VC1, VC2)
]
ステップ103：第1のメディア提供装置は、選択された個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。
具体的には、深センサイトのデバイスといった第1のメディア提供装置は、香港サイトのデバイスといった第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信し、第1のメディア構成メッセージに従って、MCC1画像切り替えの方式でVC0、VC1、およびVC2を複合し（ここでは、切り替え効果を提示するために時間的方式で複合されうる）、メディアストリームを用いて第1のメディア使用装置へ複合されたVC0、VC1、およびVC2を送信する。
本実施形態においては、第1のメディア提供装置を会議センタとすることもでき、会議センタ（または会議サーバと呼ばれる）は、マルチポイント制御ユニット（Multipoint Control Unit、略してMCU）によって実行され、MCUは、IPマルチメディアサブシステム（IP Multimedia Subsystem、略してIMS）におけるメディアリソース機能（Media Resource Function、略してMRF）、あるいは別の会議システムにおける会議センタ制御エンティティとすることができる。
好ましくは、本実施形態において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ画面で収集された少なくとも1つの個別メディアキャプチャおよび／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、マルチコンテンツ・メディア・キャプチャのコンテンツは、複数の個別メディアキャプチャおよび／またはキャプチャ・シーン・エントリを含む。
具体的には、中国深センサイトを一例として用いると、第1のメディア提供装置として働く深センサイトの会議端末は以下の第1のメディア告知メッセージを送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC3{role=audience,capture=entire room},
CSE1{VC0, VC1, VC2},
CSE2{VC3},
MCC1(CSE1)
]
VC3は、焦点距離調整後にサイトカメラによって収集される深センサイト全体の個別メディアキャプチャを指示し、VC0、VC1、およびVC2はCSE1を形成し、CSE1は深センサイトの提示方式であり、VC3はCSE2を形成し、CSE2は深センサイトの第2の提示方式であり、マルチコンテンツ・メディア・キャプチャMCC1は、キャプチャ・シーン・エントリCSE1によって形成されうる。
本実施形態においては、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、第1のメディア提供装置は、第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含み、第1のメディア提供装置は、選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。したがって、各サイトがマルチコンテンツ・メディア・キャプチャを提供することができ、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
図2は、本発明によるマルチコンテンツメディア通信方法の実施形態2の流れ図である。図3は、本発明によるマルチコンテンツメディア通信方法の実施形態2のシナリオの概略図である。図1に示す方法実施形態に基づき、本実施形態における方法は以下を含むことができる。
ステップ201：会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信する。第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
本実施形態においては、第1のメディア提供装置が会議センタである。4者会議のシナリオを一例として使用し、会議に関与する4つの異なるサイトに加えて、会議センタ（または会議サーバ）の実行本体として働くマルチポイント制御ユニット（Multipoint Control Unit、略してMCU）がさらに含まれる。会議センタ（MCU）は、各会議当事者と対話して、各会議当事者によって提供されうる個別メディアキャプチャおよび／またはマルチメディアキャプチャを獲得する。
中国深セン（Shenzhen）、米国ダラス（Dallas）、スペインマドリード（Madrid）、および中国香港（HongKong）にある4つのテレプレゼンス会議室で開催されるテレプレゼンス会議室を一例として使用する。
具体的には、図3に示すように、中国深センサイト、米国ダラスサイト、スペイン・マドリード・サイトは、各々、（3台のカメラに対応する）3画面を有するテレプレゼンスサイトであり、中国香港サイトは、（1台のカメラに対応する）1画面を有するテレプレゼンス会議室であるものと仮定する。メディア提供者として、各サイトは各々、対応する数の個別メディアキャプチャをしかるべく提供することができ、例えば、中国深センサイトは、少なくとも、3台のカメラによってリアルタイムで収集される個別メディアキャプチャ、すなわち、VC0、VC1、およびVC2を提供することができる。対応するメディアコンテンツ受信機として、会議センタ（MCU）は、各サイトと対話して、各サイトから、キャプチャ識別子およびキャプチャ属性情報を搬送する個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを受信する。
会議センタ（MCU）は、異なる第1のメディア使用装置によって送信される第2のメディア告知メッセージを別々に用いて、中国深センサイト、米国ダラスサイト、およびスペイン・マドリード・サイトのメディアキャプチャを獲得することができる。
例えば、中国深センサイトは以下を送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC3{role=audience,capture=entire room},
CSE1{VC0, VC1, VC2},
]
米国ダラスサイトは以下を送信する。
CaptureScene1
[
Description=DallasTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=chairman,capturearea=central},
VC2{role=secretary,capturearea=right},
CSE1{VC0, VC1, VC2},
]
スペイン・マドリード・サイトは以下を送信する。
CaptureScene1
[
Description=MadridTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=audience,capturearea=central},
VC2{role=audience,capturearea=right},
CSE1{VC0, VC1, VC2},
]
ステップ202：会議センタは第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する。
具体的には、会議センタは、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成することができる。独立した第2のメディア告知メッセージにおいては、各CaptureScene識別子およびVC識別子は、ローカルに一意、すなわち、このメッセージ内で一意であり、探索可能である。
異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、会議センタは、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、再付番を行う。
例えば、MCUは、異なる会議当事者から受信された第2のメディア告知メッセージについて競合処理を行い、以下の第1のメディア告知メッセージを生成する。
エンドポイント深セン
CaptureSceneID1
[
Description=ShenZhenTPConfRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC3{role=audience,capture=entire room},
CSE1{VC0, VC1, VC2},
]
エンドポイントダラス
CaptureSceneID2
[
Description=DallasTPConfRoom,
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
CSE2{VC4, VC5, VC6},
]
エンドポイントマドリード
CaptureSceneID3
[
Description=MadridTPConfRoom,
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
CSE3{VC7, VC8, VC9},
]
深セン、ダラス、およびマドリードから受信されたメディア告知メッセージ内のキャプチャシーン、個別メディアキャプチャ、およびキャプチャ・シーン・エントリの識別子間で競合が発生するため、MCUは、異なるキャプチャシーン、個別メディアキャプチャ、およびキャプチャ・シーン・エントリに、それらの識別子が、MCUによって生成される第1のメディア告知メッセージにおいて一意であることを保証するように再付番する。
MCUは、提供された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、1つまたは複数のマルチコンテンツ・メディア・キャプチャを含む以下の第1のメディア告知メッセージをさらに生成することができる。
1．第1のメディア告知メッセージは1つのマルチコンテンツ・メディア・キャプチャを含む。
CaptureScene4
[
VC3{role=audience,capture=entire room},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC1(VC4, VC5, VC6, VC7, VC8, VC9),
CSE4(MCC1, VC3)
]
本例において、CaptureScene4は、MCUによって提供されうる第4のキャプチャシーンである。深センサイト、ダラスサイト、およびマドリードサイトをそれぞれ表すCaptureScene1、CaptureScene2、およびCaptureScene3と比べて、CaptureScene4は、この場合、仮想キャプチャシーンとほぼ同義である。この場合、MCUは、マルチコンテンツ・メディア・キャプチャMCC1を定義し、MCC1は、個別メディアキャプチャVC4、VC5、VC6、VC7、VC8、およびVC9に基づいく複合によって形成され、その複合方式は、パラメータによって指定されるように、時間による切り替えまたは空間による複合とすることができる。さらに、MCUは、マルチコンテンツ・メディア・キャプチャMCC1を含むキャプチャ・シーン・エントリCSE4を提供すること、すなわち、MCC1およびVC3の画像を用いて仮想キャプチャシーンCaptureScene4を表示することができる。
2．第1のメディア告知メッセージは複数のマルチコンテンツ・メディア・キャプチャを含む。
CaptureScene5
[
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC2(VC0, VC4, VC7),
MCC3(VC1, VC5, VC8),
MCC4(VC2, VC6, VC9),
CSE5(MCC1, MCC2, MCC3)
]
本例において、CaptureScene5は、MCUによって提供されうる別のキャプチャシーンである。深センサイト、ダラスサイト、およびマドリードサイトをそれぞれ表すCaptureScene1、CaptureScene2、およびCaptureScene3と比べて、この場合のCaptureScene5もまた、仮想キャプチャシーンである。この場合、MCUは複数のマルチコンテンツ・メディア・キャプチャを定義し、MCC2は、深センサイト、ダラスサイト、およびマドリードサイトにおける左領域を表す個別メディアキャプチャVC0、VC4、およびVC7に基づく複合によって形成され、MCC3は、深センサイト、ダラスサイト、およびマドリードサイトにおける中央領域を表す個別メディアキャプチャVC1、VC5、およびVC8に基づく複合によって形成され、MCC4は、深センサイト、ダラスサイト、およびマドリードサイトにおける右領域を表す個別メディアキャプチャVC2、VC6、およびVC9に基づく複合によって形成される。各複合方式はこの場合、パラメータによって指定されるように、時間による切り替えまたは空間による複合とすることができる。さらに、MCUは、マルチコンテンツ・メディア・キャプチャMCC2、MCC3、およびMCC4を含むキャプチャ・シーン・エントリCSE5を提供すること、すなわち、MCC2、MCC3、およびMCC4の画像を用いて仮想キャプチャシーンCaptureScene5を表示することができる。
本実施形態においては、各サイトへ送信される第1のメディア告知メッセージは、同じであっても異なっていてもよく、例えば、あるサイトへ送信される第1のメディア告知メッセージがそのサイトの個別メディアキャプチャを含まない場合もある。したがって、MCUによって深センサイトへ送信される第1のメディア告知メッセージに含まれるメディアキャプチャを、ダラスサイト、マドリードサイト、および香港サイトによって提供されたメディアキャプチャから複合することができる。
ステップ203：第1のメディア提供装置、すなわち会議センタは、第1のメディア使用装置へ第1のメディア告知メッセージを送信する。
本ステップの原理は図1に示す実施形態の原理と同様であり、ここでは繰り返さない。
本実施形態においては、会議センタが、マルチパーティ会議における各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、会議センタは第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成し、第1のメディア提供装置、すなわち会議センタは、第1のメディア使用装置へ第1のメディア告知メッセージを送信する。したがって、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
本発明によるマルチコンテンツメディア通信方法の実施形態3においては、図1および図2に示す方法実施形態に基づき、本実施形態においては、第1のメディア提供装置は、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにしかるべく使用することのできる符号化、ならびに第1のメディア提供装置が同時に送信することのできるメディアストリームの数を決定するように、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。
具体的には、符号化グループ属性情報は、使用することのできる符号化インスタンスの数、および特定の対応する符号化パラメータ、例えば解像度を指示する。メディアキャプチャのための符号化グループ属性情報を設定することによって、メディアキャプチャに使用することのできる符号化、および、符号化グループによって含められる符号化インスタンスの数、すなわち、同時に送信することのできるメディアストリームの数に従って決定される、同時に符号化することのできるメディアストリームの数を決定することができる。
例えば、マルチコンテンツ・メディア・キャプチャにおいて、符号化グループ属性情報の1形態は以下のように設定される。
MCC2(VC0, VC4, VC7){encoding group1}
これは、MCC2が、符号化グループ「encoding group1」を用いて符号化されることを指示する。このようにして、MCC2内のビデオキャプチャの符号化属性が、「encoding group1」に含まれる符号化インスタンスによって決定される。例えば、「encoding group1」が1つの1080p符号化インスタンスのみを含む場合、これは、MCC2によって提供されるビデオキャプチャの最大解像度が1080pであり、ただ1つの1080pビデオ画像を同時に生成することができることを指示する。
好ましくは、本実施形態において、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合され、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されることは、
複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されること、を含む。
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示する。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示する。
具体的には、複数のメディアキャプチャ間の切り替えまたは複数のメディアキャプチャの合成の効果を達成するために、複数の個別メディアキャプチャを時間的方式で、または空間的方式で複合することができる。例えば、切り替えは、異なるメディアキャプチャ画像の循環式切り替えとすることができ、合成は、異なる音響のミキシング（mix）や異なるメディアキャプチャ画像の合成（compose）とすることができる。本実施形態においては、個別メディアキャプチャの複合方式が、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値（MaxCaptures）を付加することによって設定される。例えば、MCC1(VC4, VC5, VC6, VC7, VC8, VC9){MaxCaptures:1}において、MaxCapturesの値が1である場合、この値は、ただ1つの個別メディアキャプチャが同時に提供されること、すなわち、複数の個別メディアキャプチャは時間に従って切り替えられるを指示し、このプロセスにおいて、各個別メディアキャプチャが持続する時間、および異なる個別メディアキャプチャ間の切り替えのトリガ条件を、別の属性を用いて、または別のやり方で設定することができる。MaxCapturesの値が1より大である場合、この値は、複数の個別メディアキャプチャが同時に提供されること、すなわち、複数の個別メディアキャプチャは空間に従って複合されることを指示する。MaxCapturesの値は、同じ画像において同時に表示される個別メディアキャプチャ画像の数を指示し、異なる個別メディアキャプチャの空間的複合のための相対的な位置および距離、それがピクチャ・イン・ピクチャ（Picture in Picture）であるかどうかなどを、他の属性を用いて、または他のやり方で設定することができる。
好ましくは、本実施形態においては、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含みうる。
具体的には、例えば、MCC1(VC4, VC5, VC6, VC7, VC8, VC9){MaxCaptures:2}は、2つの異なる個別メディアキャプチャがマルチコンテンツ・メディア・キャプチャを形成するように複合されることを指示し、それら2つの異なる個別メディアキャプチャの空間的合成位置に関する情報、例えば、一方が他方の左側に配置されること、または一方が他方の上方に配置されることなどを指示するためのキャプチャ領域属性をさらに搬送することができる。
好ましくは、本実施形態において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
例えば、以下のマルチコンテンツ・メディア・キャプチャ、
MCC2(VC0, VC4, VC7){policy=voice activity}
において、「policy」は異なるポリシ値を有しうる。例えば、「voice activity」は、複数のメディアキャプチャが音声アクティビティレベルまたは音量に従って複合され、または切り替えられることを指示し、「round robin」は、複数のメディアキャプチャが時間に従う順次循環の方式で複合され、または切り替えられることを指示し、「role」は、複数のメディアキャプチャが、それらのメディアキャプチャが表す役割に従って複合され、または切り替えられることを指示する。
好ましくは、本実施形態においては、第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、第1のメディア提供装置は異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
例えば、場面同期属性は、マルチコンテンツ・メディア・キャプチャにおいて{Scene-synchID1}として設定され、第1のメディア告知メッセージの1形態は以下のとおりである。
CaptureScene5
[
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC2(VC0, VC4, VC7) {Scene-synchID1},
MCC3(VC1, VC5, VC8) {Scene-synchID1},
MCC4(VC2, VC6, VC9) {Scene-synchID1},
CSE5(MCC1, MCC2, MCC3)
]
このメッセージが指示しているのは、マルチコンテンツ・メディア・キャプチャについて複合（例えば、時間的切り替えや空間的合成）が行われる場合に、同じ場面同期属性（すなわち、Scene-synchID1）を有する第1のメディア告知メッセージ内のいくつかのマルチコンテンツ・メディア・キャプチャについての複合後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証することが必要とされ、VC0、VC1、およびVC2は深センサイトからのものであり、VC4、VC5、およびVC6はダラスサイトからのものであり、VC7、VC8、およびVC9はマドリードサイトからのものであることである。したがって、実際の適用において、このメッセージが指示するのは、MCC2がVC0からVC4に切り替わるときに、MCC3およびMCC4は、それぞれ、VC1からVC5、VC2からVC6に切り替わることである。
好ましくは、本実施形態においては、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャの全部または一部である。
例えば、第1のメディア告知メッセージは以下の情報を含む。
CaptureScene5
[
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC2(VC0, VC4, VC7) {Scene-synchID1},
MCC3(VC1, VC5, VC8) {Scene-synchID1},
MCC4(VC2, VC6, VC9) {Scene-synchID1},
CSE5(MCC1, MCC2, MCC3)
]
深センサイトおよびダラスサイトのメディアキャプチャ画像が香港サイトにおいて表示されることが予期されるにすぎない場合、第1のメディア構成メッセージは以下のコンテンツを含むことができる。
CaptureScene5
[
MCC2(VC0, VC4) {Scene-synchID1},
MCC3(VC1, VC5) {Scene-synchID1},
MCC4(VC2, VC6) {Scene-synchID1},
CSE5(MCC1, MCC2, MCC3)
]
すなわち、MCUの第1のメディア告知メッセージ内の一部のメディアキャプチャが選択される。
本実施形態においては、第1のメディア提供装置が、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにしかるべく使用することのできる符号化、ならびに第1のメディア提供装置が同時に送信することのできるメディアストリームの数を決定するように、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。各サイトはマルチコンテンツ・メディア・キャプチャを提供することができ、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合され、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されることは、複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されること、を含む。複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示する。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示し、属性値が複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、この場合、異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加することを含みうる。マルチコンテンツ・メディア・キャプチャは、マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報をさらに含む。第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、第1のメディア提供装置は異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。したがって、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
図4は、本発明によるマルチコンテンツメディア通信方法の実施形態4の流れ図である。本実施形態は第1のメディア使用装置によって実行され、第1のメディア使用装置は、ソフトウェアおよび／またはハードウェアによって実現することができ、本実施形態においては、テレプレゼンス会議における適用を一例として使用する。図4に示すように、本実施形態における方法は以下を含むことができる。
ステップ401：第1のメディア使用装置が第1のメディア提供装置によって送信された第1のメディア告知メッセージを受信する。第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されている。
本実施形態においては、中国深セン（Shenzhen）と中国香港（HongKong）にある2つのテレプレゼンス会議室で開催されるテレプレゼンス会議を一例として使用する。この会議はポイントツーポイントの2者会議であるため、会議センタといった別の仲介会議デバイスの関与は不要である。
中国深センは、（3台のカメラに対応する）3画面を有するテレプレゼンスサイトであり、3つのサイト画像の個別メディアキャプチャを提供することができ、キャプチャ識別子キャプチャ識別子は、VC0、VC1、およびVC2であるものと仮定する。深センサイトを一例として用いると、第1のメディア提供装置は以下の第1のメディア告知メッセージを送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
MCC1(VC0, VC1, VC2)
]
第1のメディア使用装置として働く中国香港サイトの会議端末が第1のメディア告知メッセージを受信し、第1のメディア告知メッセージにおいて、CaptureScene1は、深センサイトのキャプチャシーンのサイト識別子情報を指示し、VC0、VC1、およびVC2は、深センサイトによって提供されうる3つの個別メディアキャプチャ（ビデオキャプチャ）であり、VC0は、深センサイトの左位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、VC1は、深センサイトの中央位置における話し手の役割を果たす出席者のサイトビデオ画像を指示し、VC2は、深センサイトの右位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、マルチコンテンツ・メディア・キャプチャMCC1がさらに含まれ、MCC1は、対応するキャプチャ識別子であり、第1のメディア告知メッセージ内の3つの個別メディアキャプチャVC0、VC1、およびVC2に基づく複合によって形成される提供方式である。第1のメディア告知メッセージにおいて、{}内のコンテンツは、例えば、role=speaker、capturearea=centralなど、メディアキャプチャの属性情報であり、ここでは、例えば、異なるメディアキャプチャの連係情報や優先順位情報など、他の属性情報をさらに含むこともできる。
ステップ402：第1のメディア使用装置は第1のメディア提供装置へ第1のメディア構成メッセージを送信する。第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含む。
具体的には、香港サイトがただ1つの画面を有するテレプレゼンスサイトである場合、深センサイトの3つの個別メディアキャプチャのビデオ画像を、深センサイトの実物大画像の解像度に従って同時に映写することができない。したがって、深センサイトのすべてのコンテンツがただ1つの画面上に表示されることが予期され、この場合には、深センサイトの第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャが選択される。香港サイトの会議端末といった第1のメディア使用装置によって送信される第1のメディア構成メッセージは、以下のコンテンツを含むことができる。
CaptureScene1
[
MCC1(VC0, VC1, VC2)
]
ステップ403：第1のメディア使用装置は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに従って選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信し、表示する。
具体的には、香港サイトの会議端末といった第1のメディア使用装置は、深センサイトのデバイスといった第1のメディア提供装置によって送信される、第1のメディア構成メッセージに従って選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信する。例えば、VC0、VC1、およびVC2がMCC1画像切り替えの方式で複合され（ここでは、切り替え効果を提示するために時間的方式で複合することができる）、メディアストリームを用いて第1のメディア使用装置へ送信される。
本実施形態においては、第1のメディア使用装置が第1のメディア提供装置によって送信された第1のメディア告知メッセージを受信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、第1のメディア使用装置は第1のメディア提供装置へ第1のメディア構成メッセージを送信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含み、第1のメディア使用装置は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに従って選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信し、表示する。したがって、各サイトがマルチコンテンツ・メディア・キャプチャを提供することができ、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
本発明によるマルチコンテンツメディア通信方法の実施形態5においては、図4に示す方法実施形態に基づき、第1のメディア使用装置は、第1のメディア告知メッセージに従って、会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされた選択に従って第1のメディア構成メッセージを生成し、第1のメディア構成メッセージを第1のメディア提供装置、すなわち、会議センタへ送信し、メディアコンテンツ構成オプションは、マルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャのための複合に際して含まれる個別メディアキャプチャに関する情報を含む。
具体的には、MCUによって送信された第1のメディア告知メッセージを受信した後で、第1のメディア使用装置として働く会議端末が、第1のメディア告知メッセージに従ってサイト内の会議端末上でメディアコンテンツ構成オプションをさらに生成することができ、メディアコンテンツ構成オプションは例えば以下を含む。
（1）メディア・キャプチャ・コンテンツ、例えば、利用可能な個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャ。
（2）複合ポリシ情報。この値は、「voice（音声）」とすることができる。すなわち、対応するMCUによって提供される切り替え告知メッセージ内のポリシが音声アクティビティと等しい。またこの値は「role（役割）」とすることもできる。すなわち、対応するMCUによって提供される切り替え告知メッセージ内のポリシは役割または役割／話し手と等しく、役割については、話し手、聞き手などといったさらに異なるオプションがあってもよく、役割だけが選択されてもよく、MCUは、優先順位に従って、切り替えのための役割タイプの画像を選択する。またこの値は「image quality（画像品質）」とすることもできる。すなわち、対応するMCUによって提供される第1のメディア告知メッセージはメディアキャプチャ画像品質に関する情報を含み、各サイトによって提供される第2のメディア告知メッセージもメディアキャプチャ画像品質に関する情報を含み、これは例えば、VC0{role=audience,capturearea=left, resolution=1080p}などであり、resolution=1080pは、画像解像度が1080pであることを指示する。あるいは、切り替えポリシの値を「round robin（ラウンドロビン）」とすることもでき、例えば、別のサイトのメディアキャプチャ画像がある時間に従ってあるサイト（会議の中心的話し手のサイト）において循環式に切り替えられる。
（3）複合方式、例えば、時間的切り替えや空間的複合。
（4）場面同期、例えば、場面同期がサポートされているサイトに従った切り替えや、メディアキャプチャが独立して切り替えられる画面に従った切り替え。
サイトに従った切り替えは、サイトに従った全般的切り替えをいう。すなわち、同じサイトのメディアキャプチャ画像が受信者の画面上に同時に表示され、例えば、サイトの受信者が、全般的切り替えを行うために、サイトの画面受信能力に従って、ピアサイトのすべてのメディアキャプチャ画像を完全に表示することのできるサイトを選択する。
画面に従った切り替えは、単一のメディアキャプチャ画像に従った切り替えをいう。
各サイト出席者は、前述のオプションのうちの1つまたは複数のオプションの組み合わせを選択することができ、それらのオプションは、例えば、MCUによって提供される画像コンテンツプレビューをさらに含むことができる。
本実施形態においては、第1のメディア使用装置が、第1のメディア告知メッセージに従って、会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされた選択に従って第1のメディア構成メッセージを生成し、第1のメディア構成メッセージを第1のメディア提供装置、すなわち、会議センタへ送信し、メディアコンテンツ構成オプションは、マルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャのための複合に際して含まれる個別メディアキャプチャに関する情報を含む。したがって、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
図5は、本発明による第1のメディア提供装置の実施形態1の概略的構造図である。本実施形態における第1のメディア提供装置は、各サイトの会議端末とすることができ、また、会議センタ、例えばMCUとすることもできる。図5に示すように、本実施形態における第1のメディア提供装置50は、送信モジュール501と受信モジュール502とを含むことができる。送信モジュール501は、第1のメディア使用装置へ第1のメディア告知メッセージを送信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合される。受信モジュール502は、第1のメディア使用装置によって送信される第1のメディア構成メッセージを受信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含む。送信モジュール501はさらに、受信モジュール502によって受信される第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。
本実施形態における第1のメディア提供装置は、図1に示す方法実施形態における技術的解決策を実行することができ、その実施原理および技術的効果は同様であり、ここでは繰り返さない。
好ましくは、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ画面で収集された少なくとも1つの個別メディアキャプチャおよび／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、マルチコンテンツ・メディア・キャプチャのコンテンツは、複数の個別メディアキャプチャおよび／またはキャプチャ・シーン・エントリを含む。
好ましくは、第1のメディア提供装置は具体的には会議センタであり、受信モジュール502はさらに、
送信モジュール501が第1のメディア使用装置へ第1のメディア告知メッセージを送信する前に、マルチパーティ会議において各サイトによって送信される第2のメディア告知メッセージを受信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、第1のメディア提供装置は、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する処理モジュール503をさらに含み、
処理モジュール503はさらに、異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、会議センタにより再付番を行う。
好ましくは、処理モジュール503はさらに、
個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにしかるべく使用することのできる符号化、ならびに第1のメディア提供装置が同時に送信することのできるメディアストリームの数を決定するように、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。
好ましくは、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合され、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されることは、
複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されること、を含む。
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示する。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示する。
好ましくは、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
好ましくは、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
好ましくは、処理モジュール503はさらに、
第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
好ましくは、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャの全部または一部である。
図6は、本発明による第1のメディア使用装置の実施形態1の概略的構造図である。本実施形態における第1のメディア使用装置は各サイトの会議端末とすることができる。図6に示すように、本実施形態における第1のメディア使用装置60は、受信モジュール601と、送信モジュール602と表示モジュール603とを含むことができる。受信モジュール601は、第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されている。送信モジュール602は、第1のメディア提供装置へ第1のメディア構成メッセージを送信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含む。受信モジュール601はさらに、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信する。表示モジュール603は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを表示する。
本実施形態における第1のメディア使用装置は、図4に示す方法実施形態における技術的解決策を実行することができ、その実施原理および技術的効果は同様であり、ここでは繰り返さない。
好ましくは、本実施形態において、第1のメディア使用装置60は、
第1のメディア告知メッセージに従って会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされる選択に従って第1のメディア構成メッセージを生成する処理モジュール604、をさらに含むことができ、メディアコンテンツ構成オプションは、第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャを形成するように複合されている個別メディアキャプチャに関する情報を含み、送信モジュール602はさらに、第1のメディア提供装置、すなわち会議センタへ第1のメディア構成メッセージを送信する。
本実施形態における第1のメディア使用装置は、方法実施形態4における技術的解決策を実行することができ、その実施原理および技術的効果は同様であり、ここでは繰り返さない。
好ましくは、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ画面で収集された少なくとも1つの個別メディアキャプチャおよび／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、マルチコンテンツ・メディア・キャプチャのコンテンツは、複数の個別メディアキャプチャおよび／またはキャプチャ・シーン・エントリを含む。
好ましくは、送信モジュール602はさらに、
受信モジュール601が第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信する前に、会議センタへ第2のメディア告知メッセージを送信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、そのため、会議センタは、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する。
好ましくは、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示すること
を含む。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示する。
好ましくは、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
好ましくは、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
好ましくは、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャは、
第1のメディア告知メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャの全部または一部である。
図7は、本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図1である。図8は、本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図2である。図7に示すように、本実施形態におけるシステムは、少なくとも1つの第1のメディア提供装置50と、少なくとも1つの第1のメディア使用装置60とを含む。第1のメディア提供装置50は、第1のメディア提供装置の構造実施形態における構造のいずれか1つを使用することができ、それに対応して、方法実施形態1および方法実施形態3における技術的解決策のいずれか1つを実行することができる。第1のメディア使用装置60は、第1のメディア使用装置の構造実施形態における構造のいずれか1つを使用することができ、それに対応して、方法実施形態4および方法実施形態5における技術的解決策のいずれか1つを実行することができる。その実施原理および技術的解決策は同様であり、ここでは繰り返さない。
好ましくは、図8に示すように、本実施形態におけるシステムは、第1のメディア提供装置、すなわち会議センタをさらに含むことができ、会議センタは、第1のメディア提供装置の構造実施形態における構造のいずれか1つを使用することができ、それに対応して、方法実施形態2における技術的解決策を実行することができる。
図9は、本発明による第1のメディア提供装置の実施形態1の概略的構造図である。図9に示すように、本実施形態において提供される第1のメディア提供装置90は、プロセッサ901とメモリ902とを含む。メモリ902は実行命令を記憶する。第1のメディア提供装置90が作動するときに、プロセッサ901はメモリ902と通信し、プロセッサ901は、第1のメディア提供装置90が本発明の方法実施形態1から方法実施形態3による技術的解決策のいずれか1つの方法を実行するように、メモリ902内の実行命令を呼び出す。その実施原理および技術的解決策は同様であり、ここでは繰り返さない。
図10は、本発明による第1のメディア使用装置の実施形態1の概略的構造図である。図10に示すように、本実施形態において提供される第1のメディア使用装置100は、プロセッサ1001とメモリ1002とを含む。メモリ1002は実行命令を記憶する。第1のメディア使用装置100が作動するときに、プロセッサ1001はメモリ1002と通信し、プロセッサ1001は、第1のメディア使用装置100が本発明の方法実施形態4から方法実施形態5による技術的解決策のいずれか1つの方法を実行するように、メモリ1002内の実行命令を呼び出す。その実施原理および技術的解決策は同様であり、ここでは繰り返さない。
本発明で提供されるいくつかの実施形態においては、開示の装置および方法を他のやり方で実現することもできることを理解すべきである。例えば、説明した装置実施形態は単なる例示にすぎない。例えば、ユニット分割は単なる論理的機能分割にすぎず、実際の実装に際しては他の分割も可能である。例えば、複数のユニットまたはコンポーネントを組み合わせ、または統合して別のシステムにする場合もあり、ある特徴が無視され、または実行されない場合もある。加えて、表示された、または論じられた相互結合または直接結合または通信接続を、いくつかのインターフェースを介して実現することもできる。装置間またはユニット間の間接結合または通信接続は、電気的形態、機械的形態、または他の形態として実現することができる。
別々の部品として記述されたユニットは物理的に分離していてもそうでなくてもよく、ユニットとして表示された部品は、物理的ユニットであってもそうでなくてもよく、1つの位置に位置していてもよく、複数のネットワークユニット上に分散されていてもよい。ユニットの一部または全部を、各実施形態の解決策の目的を達成するための実際の必要に従って選択することもできる。
加えて、本発明の各実施形態における機能ユニットを1つの処理ユニットへ統合することもでき、ユニットの各々が物理的に独立して存在していてもよく、または2つ以上のユニットが1つのユニットへ統合される。統合ユニットはハードウェアの形態で実現することもでき、ソフトウェア機能ユニットを組み合わせたハードウェアの形態で実現することもできる。
前述の統合ユニットがソフトウェア機能ユニットの形態で実現される場合には、その統合ユニットをコンピュータ可読記憶媒体に記憶することができる。ソフトウェア機能ユニットは記憶媒体に記憶されており、（パーソナルコンピュータ、サーバ、ネットワークデバイスなどとすることができる）コンピュータデバイスまたはプロセッサ（processor）に、本発明の実施形態において記述されている方法のステップの一部を実行するよう命令するためのいくつかの命令を含む。前述の記憶媒体は、USBフラッシュドライブ、取り外し可能ハードディスク、読取り専用メモリ（Read-Only Memory、ROM）、ランダム・アクセス・メモリ（Random Access Memory、RAM）、磁気ディスク、光ディスクといった、プログラムコードを記憶することができる任意の媒体を含む。
好都合で簡潔な説明を目的として、前述の機能モジュールの分割が例示のための一例として使用されており、実際の実装において、前述の機能は、異なるモジュールに割り振り、必要に応じて実装することができること、すなわち、装置の内部構造は、前述の機能の全部または一部を実装するために異なる機能モジュールへ分割されることを、当業者は明確に理解することができる。前述の装置の詳細な動作プロセスについては、前述の方法実施形態における対応するプロセスを参照することができ、ここでは詳細を繰り返さない。
最後に、前述の実施形態は、本発明を限定するためのものではなく、本発明の技術的解決策を説明するためのものにすぎないことに留意すべきである。本発明は前述の実施形態に関連して詳細に説明されているが、当業者は、前述の実施形態において記述されている技術的解決策に対する改変、または、前述の実施形態に記述されている技術的解決策の一部または全部の技術的特徴に対する等価の置換を、そうした改変または置換が対応する技術的解決策の本質を本発明の実施形態の技術的解決策の範囲から逸脱させない限りにおいてさらに行いうることを理解するはずである。
50 第1のメディア提供装置
501 送信モジュール
502 受信モジュール
503 処理モジュール
60 第1のメディア使用装置
601 受信モジュール
602 送信モジュール
603 表示モジュール
604 処理モジュール
90 第1のメディア提供装置
901 プロセッサ
902 メモリ
100 第1のメディア使用装置
1001 プロセッサ
1002 メモリ

Claims (24)

  1. 第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップであって、前記第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップと、
    前記第1のメディア提供装置が前記第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップであって、前記第1のメディア構成メッセージは、前記第1のメディア告知メッセージに従って前記第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、前記第1のメディア提供装置が前記第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップと、
    前記第1のメディア提供装置が、前記選択された個別メディアキャプチャまたは前記選択されたマルチコンテンツ・メディア・キャプチャに従って、前記第1のメディア使用装置へ対応するメディアストリームを送信するステップと
    を含む、マルチコンテンツメディア通信方法。
  2. 前記第1のメディア告知メッセージはエントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集される少なくとも1つの個別メディアキャプチャ、または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、請求項1に記載のマルチコンテンツメディア通信方法。
  3. 前記第1のメディア提供装置は具体的には会議センタであり、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信する前記ステップの前に、前記方法は、
    前記会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信するステップであって、前記第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、前記会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信するステップと、
    前記会議センタが前記第2のメディア告知メッセージに従って前記第1のメディア告知メッセージを生成するステップと、
    異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、前記会議センタが、前記第1のメディア告知メッセージ内の前記個別メディアキャプチャおよび前記マルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、前記キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、再付番を行うステップと
    をさらに含む、請求項2に記載のマルチコンテンツメディア通信方法。
  4. 前記第1のメディア提供装置が、前記個別メディアキャプチャおよび／または前記マルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定するステップ
    をさらに含む、請求項1または2に記載のマルチコンテンツメディア通信方法。
  5. 前記マルチコンテンツ・メディア・キャプチャは前記第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、前記マルチコンテンツ・メディア・キャプチャが前記第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
    前記複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
    前記複合方式は、前記マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、前記最大キャプチャ数の前記属性値が1である場合、前記属性値は、前記複数の個別メディアキャプチャが時間に従って複合されていることを指示し、前記最大キャプチャ数の前記属性値が1より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
    を含む、請求項1または2に記載のマルチコンテンツメディア通信方法。
  6. 前記最大キャプチャ数の前記属性値が1より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
    異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するために前記マルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
    を含む、請求項5に記載のマルチコンテンツメディア通信方法。
  7. 前記マルチコンテンツ・メディア・キャプチャは、
    前記マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
    をさらに含む、請求項1または2に記載のマルチコンテンツメディア通信方法。
  8. 前記第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、前記第1のメディア提供装置は異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の前記場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの前記切り替えを同時に行う、請求項1または2に記載のマルチコンテンツメディア通信方法。
  9. 第1のメディア提供装置であって、
    第1のメディア使用装置へ第1のメディア告知メッセージを送信する送信モジュールであって、前記第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、送信モジュールと、
    前記第1のメディア使用装置によって送信される第1のメディア構成メッセージを受信する受信モジュールであって、前記第1のメディア構成メッセージは、前記第1のメディア告知メッセージに従って前記第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、受信モジュールと
    を含み、前記送信モジュールはさらに、前記受信モジュールによって受信される前記第1のメディア構成メッセージに含まれる前記個別メディアキャプチャおよび／または前記マルチコンテンツ・メディア・キャプチャに従って、前記第1のメディア使用装置へ対応するメディアストリームを送信する、第1のメディア提供装置。
  10. 前記第1のメディア告知メッセージはエントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集される少なくとも1つの個別メディアキャプチャ、または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、請求項9に記載の第1のメディア提供装置。
  11. 前記第1のメディア提供装置は具体的には会議センタであり、前記受信モジュールはさらに、
    前記送信モジュールが前記第1のメディア使用装置へ前記第1のメディア告知メッセージを送信する前に、マルチパーティ会議において各サイトによって送信される第2のメディア告知メッセージを受信し、前記第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
    それに対応して、前記第1のメディア提供装置は、前記第2のメディア告知メッセージに従って前記第1のメディア告知メッセージを生成する処理モジュール、をさらに含み、
    前記処理モジュールはさらに、異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、前記第1のメディア告知メッセージ内の前記個別メディアキャプチャおよび前記マルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、前記キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、再度付番を行う、請求項10に記載の第1のメディア提供装置。
  12. 前記処理モジュールはさらに、
    前記個別メディアキャプチャおよび／または前記マルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する
    請求項9または10に記載の第1のメディア提供装置。
  13. 前記マルチコンテンツ・メディア・キャプチャは前記第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、前記マルチコンテンツ・メディア・キャプチャが前記第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
    前記複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
    前記複合方式は、前記マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、前記最大キャプチャ数の前記属性値が1である場合、前記属性値は、前記複数の個別メディアキャプチャが時間に従って複合されていることを指示し、前記最大キャプチャ数の前記属性値が1より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
    を含む、請求項9または10に記載の第1のメディア提供装置。
  14. 前記最大キャプチャ数の前記属性値が1より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
    異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するために前記マルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
    を含む、請求項13に記載の第1のメディア提供装置。
  15. 前記マルチコンテンツ・メディア・キャプチャは、
    前記マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
    をさらに含む、請求項9または10に記載の第1のメディア提供装置。
  16. 前記処理モジュールはさらに、
    前記第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の前記場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの前記切り替えを同時に行う、請求項9または10に記載の第1のメディア提供装置。
  17. 第1のメディア使用装置であって、
    第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信する受信モジュールであって、前記第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、受信モジュールと、
    前記第1のメディア提供装置へ第1のメディア構成メッセージをする送信モジュールであって、前記第1のメディア構成メッセージは、前記第1のメディア告知メッセージに従って前記第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、送信モジュールと
    を含み、前記受信モジュールはさらに、前記第1のメディア提供装置によって送信される、前記第1のメディア構成メッセージに含まれる前記個別メディアキャプチャおよび／または前記マルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信し、前記第1のメディア使用装置は、
    前記第1のメディア提供装置によって送信される、前記第1のメディア構成メッセージに含まれる前記個別メディアキャプチャおよび／または前記マルチコンテンツ・メディア・キャプチャに対応する前記メディアストリームを表示する、表示モジュール
    を含む、第1のメディア使用装置。
  18. 前記第1のメディア告知メッセージに従って会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされる選択に従って前記第1のメディア構成メッセージを生成する処理モジュールであって、前記メディアコンテンツ構成オプションは、前記第1のメディア告知メッセージ内の前記マルチコンテンツ・メディア・キャプチャおよび前記マルチコンテンツ・メディア・キャプチャを形成するように複合されている個別メディアキャプチャに関する情報を含む、処理モジュール
    をさらに含み、前記送信モジュールはさらに、前記第1のメディア提供装置、すなわち会議センタへ前記第1のメディア構成メッセージを送信する、請求項17に記載の第1のメディア使用装置。
  19. 前記第1のメディア告知メッセージはエントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集される少なくとも1つの個別メディアキャプチャ、または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、請求項17または18に記載の第1のメディア使用装置。
  20. 前記送信モジュールはさらに、
    前記受信モジュールが前記第1のメディア提供装置によって送信される前記第1のメディア告知メッセージを受信する前に、前記会議センタへ第2のメディア告知メッセージを送信し、前記第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、そのため、前記会議センタは、前記第2のメディア告知メッセージに従って前記第1のメディア告知メッセージを生成する、請求項17から19のいずれか一項に記載の第1のメディア使用装置。
  21. 前記マルチコンテンツ・メディア・キャプチャは前記第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、前記マルチコンテンツ・メディア・キャプチャが前記第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
    前記複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
    前記複合方式は、前記マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、前記最大キャプチャ数の前記属性値が1である場合、前記属性値は、前記複数の個別メディアキャプチャが時間に従って複合されていることを指示し、前記最大キャプチャ数の前記属性値が1より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
    を含む、請求項17から19のいずれか一項に記載の第1のメディア使用装置。
  22. 前記最大キャプチャ数の前記属性値が1より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
    異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するために前記マルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
    を含む、請求項21に記載の第1のメディア使用装置。
  23. 前記マルチコンテンツ・メディア・キャプチャは、
    前記マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
    をさらに含む、請求項17から19のいずれか一項に記載の第1のメディア使用装置。
  24. 請求項9から16のいずれか一項に記載の少なくとも1つの第1のメディア提供装置と、請求項17から24のいずれか一項に記載の少なくとも1つの第1のメディア使用装置と
    を含む、マルチコンテンツメディア通信システム。
JP2016532212A 2013-08-09 2014-05-12 マルチコンテンツメディア通信方法、装置、およびシステム Active JP6255616B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201310349246.5A CN104349117B (zh) 2013-08-09 2013-08-09 多内容媒体通信方法、装置及系统
CN201310349246.5 2013-08-09
PCT/CN2014/077216 WO2015018216A1 (zh) 2013-08-09 2014-05-12 多内容媒体通信方法、装置及系统

Publications (2)

Publication Number Publication Date
JP2016531504A true JP2016531504A (ja) 2016-10-06
JP6255616B2 JP6255616B2 (ja) 2018-01-10

Family

ID=52460613

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016532212A Active JP6255616B2 (ja) 2013-08-09 2014-05-12 マルチコンテンツメディア通信方法、装置、およびシステム

Country Status (11)

Country Link
US (1) US9787834B2 (ja)
EP (1) EP3012998B1 (ja)
JP (1) JP6255616B2 (ja)
KR (1) KR101864672B1 (ja)
CN (1) CN104349117B (ja)
AU (1) AU2014305576B2 (ja)
ES (1) ES2667774T3 (ja)
MY (1) MY191231A (ja)
PH (1) PH12016500153A1 (ja)
RU (1) RU2617680C1 (ja)
WO (1) WO2015018216A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022252564A1 (zh) * 2021-05-31 2022-12-08 华为云计算技术有限公司 消息传输方法、装置及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006350260A (ja) * 2005-06-20 2006-12-28 Fuji Xerox Co Ltd 表示制御装置、システム及び表示制御方法
US20100242091A1 (en) * 2009-03-23 2010-09-23 Microsoft Corporation Network video messaging
US20110261151A1 (en) * 2008-09-28 2011-10-27 Huawei Device Co., Ltd. Video and audio processing method, multipoint control unit and videoconference system
JP2012170069A (ja) * 2011-02-09 2012-09-06 Polycom Inc マルチストリームかつマルチサイトのテレプレゼンス会議システムのための自動的なビデオレイアウト
US20120236106A1 (en) * 2009-11-30 2012-09-20 Huawei Device Co., Ltd. Method, apparatus, and system for controlling conference including telepresence conferencing site
JP2013531934A (ja) * 2010-05-25 2013-08-08 ヴィディオ・インコーポレーテッド 複数のカメラおよび複数のモニタを使用する拡張可能なビデオ通信用のシステムおよび方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09321883A (ja) * 1996-05-31 1997-12-12 Nec Eng Ltd 室間会議での音声検出方式
JP2002164889A (ja) * 2000-11-24 2002-06-07 Matsushita Electric Ind Co Ltd 複数端末によるマルチキャスト会議方法、およびそれに用いる会議端末、並びに会議システム
EP1985116A4 (en) * 2005-12-22 2013-06-05 Vidyo Inc SYSTEM AND METHOD FOR VIDEO CONFERENCES USING SCALABLE VIDEO CODING AND COMPOSITION OF SCALABLE VIDEO CONFERENCE SERVER
US20090210789A1 (en) 2008-02-14 2009-08-20 Microsoft Corporation Techniques to generate a visual composition for a multimedia conference event
CN101291417B (zh) * 2008-06-06 2011-03-02 中兴通讯股份有限公司 一种视频会议系统的轮询方法和系统
CN101505226B (zh) * 2009-02-25 2011-07-27 中国联合网络通信集团有限公司 多媒体通信交互系统和方法
CN101583011B (zh) * 2009-05-27 2012-04-04 华为终端有限公司 视频会议控制方法、系统、视频会议网络设备和会场
CN102055949B (zh) * 2009-11-02 2013-10-02 华为终端有限公司 多媒体会议的录播方法、装置及系统、回播方法及装置
US8169936B2 (en) * 2009-12-22 2012-05-01 Motorola Solutions, Inc. Decoupled cascaded mixers architechture and related methods
CN101959051A (zh) * 2010-09-01 2011-01-26 华为终端有限公司 远程呈现系统的屏幕选看方法及装置
CN102469295B (zh) * 2010-10-29 2015-03-11 华为终端有限公司 会议控制方法及相关设备和系统
CN102571848B (zh) * 2010-12-27 2014-11-12 佛山络威网络技术有限公司 一种基于p2p的超大规模会议级联方法
CN102843542B (zh) * 2012-09-07 2015-12-02 华为技术有限公司 多流会议的媒体协商方法、设备和系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006350260A (ja) * 2005-06-20 2006-12-28 Fuji Xerox Co Ltd 表示制御装置、システム及び表示制御方法
US20110261151A1 (en) * 2008-09-28 2011-10-27 Huawei Device Co., Ltd. Video and audio processing method, multipoint control unit and videoconference system
US20100242091A1 (en) * 2009-03-23 2010-09-23 Microsoft Corporation Network video messaging
US20120236106A1 (en) * 2009-11-30 2012-09-20 Huawei Device Co., Ltd. Method, apparatus, and system for controlling conference including telepresence conferencing site
JP2013531934A (ja) * 2010-05-25 2013-08-08 ヴィディオ・インコーポレーテッド 複数のカメラおよび複数のモニタを使用する拡張可能なビデオ通信用のシステムおよび方法
JP2012170069A (ja) * 2011-02-09 2012-09-06 Polycom Inc マルチストリームかつマルチサイトのテレプレゼンス会議システムのための自動的なビデオレイアウト

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
A. ROMANOW, 外3名: "Framework for Telepresense Multi-Streams; draft-ietf-clue-framework-06.txt", CLUE WG INTERNET-DRAFT, [ONLINE], JPN7016001136, 6 July 2012 (2012-07-06), US, pages PP. 1-35 *

Also Published As

Publication number Publication date
MY191231A (en) 2022-06-09
CN104349117A (zh) 2015-02-11
PH12016500153B1 (en) 2016-04-25
EP3012998B1 (en) 2018-03-21
WO2015018216A1 (zh) 2015-02-12
AU2014305576A1 (en) 2016-02-18
JP6255616B2 (ja) 2018-01-10
PH12016500153A1 (en) 2016-04-25
KR20160030980A (ko) 2016-03-21
EP3012998A4 (en) 2016-06-01
US9787834B2 (en) 2017-10-10
EP3012998A1 (en) 2016-04-27
BR112016002667A2 (pt) 2017-08-01
AU2014305576B2 (en) 2017-08-31
KR101864672B1 (ko) 2018-06-05
CN104349117B (zh) 2019-01-25
US20160156778A1 (en) 2016-06-02
ES2667774T3 (es) 2018-05-14
RU2617680C1 (ru) 2017-04-26

Similar Documents

Publication Publication Date Title
AU2011320410B2 (en) Conference control method, apparatus and system thereof
EP2437491A1 (en) Method and system for video conference control, network equipment and meeting places for video conference
JP5508450B2 (ja) マルチストリームかつマルチサイトのテレプレゼンス会議システムのための自動的なビデオレイアウト
CN108235042A (zh) 一种多人网络直播方法、装置、加入装置和系统
WO2011140812A1 (zh) 多画面合成方法、系统及媒体处理装置
US20160132280A1 (en) Image transmission system and image transmission method
EP3070876A1 (en) Method and system for improving teleconference services
WO2017193830A1 (zh) 视频切换方法、装置、系统及存储介质
KR20150011886A (ko) 참여자 중심의 분산 영상 회의 장치 및 그 방법
CN104283857A (zh) 多媒体会议的建立方法、装置及系统
CN113542660A (zh) 一种实现会议多画面高清显示的方法、系统及存储介质
CN108156413B (zh) 视频会议的传输方法及装置、mcu
WO2012059280A2 (en) System and method for multiperspective telepresence communication
JP6255616B2 (ja) マルチコンテンツメディア通信方法、装置、およびシステム
WO2016045496A1 (zh) 一种媒体控制方法和设备
CN105191295B (zh) 用于在视频会议中管理媒体流的方法和设备
CN108989737B (zh) 一种数据播放方法、装置和电子设备
Chen et al. F. Live: Towards interactive live broadcast FTV experience
CN110636244A (zh) 一种视频会议服务器、系统、控制方法及存储介质
CN115695387B (zh) 音视频会议实现方法、音视频会议系统及相关装置
KR101843475B1 (ko) 동영상을 제공하는 미디어 서버
JP2017028646A (ja) 中継装置、通信システム、中継方法、及び中継プログラム
BR112016002667B1 (pt) Método de comunicações de mídia de conteúdo múltiplo, primeiro aparelho provedor de mídia, primeiro aparelho a utilizar mídia e sistema de comunicações de mídia de conteúdo múltiplo
Zhiyuan et al. A Cloud-Based Pan-Terminal Video Conferencing System
CN116489411A (zh) 基于直播间的交互方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170321

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170612

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171114

R150 Certificate of patent or registration of utility model

Ref document number: 6255616

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250