JP2011521570A - マルチポイント会議の制御方法及び装置 - Google Patents

Abstract

マルチポイントミーティングの制御方法及び装置。方法は、各端末の解像度の階層符号化パラメータを決定し各端末に出力するステップと、各端末から出力された符号ストリームを受信するステップと、各端末の表示要求に従って各端末上で表示される必要がある符号ストリームを受信した符号ストリームの中から選択するステップと、選択された符号ストリームを端末によって復号されることが可能な符号ストリームにトランスコード及びマッピングするステップと、各端末によって復号されることが可能な符号ストリームを各端末に出力するステップと、を含む。マルチポイント制御ユニットが解像度階層符号化を制御する技術が本発明の実施形態に適用され、階層化プロトコルをサポートすることができる端末と階層化プロトコルをサポートすることができない端末との両方がシステム内に存在すること、計算の量が減少すること、システムの効率が向上することが可能となる。

Description

本発明は、電気通信技術に関し、特に、マルチポイント会議を制御する方法及び装置に関する。

現在、通信技術は、イメージ伝送の分野において広く適用されている。イメージ伝送の分野における重要な適用例は、複数の端末を同時に関与させる通常のビデオ会議通信と、複数の端末のビデオ情報を１つの端末の画面内に同時に表示するコンティニュアスプレゼンス（ｃｏｎｔｉｎｕｏｕｓ ｐｒｅｓｅｎｃｅ）ビデオ会議とを含むビデオ会議である。

通常のビデオ会議適用例においては、ビデオ会議システムは、例えば、高精細度の端末（一般に、１２８０×７２０ピクセル、順次走査を示す、７２０Ｐ、又はより高い精細度）、標準精細度の端末（一般に、７０４×５７６ピクセルを示す、４ＣＩＦ）、及び一般的な端末（一般に、３５２×２８８ピクセルを示す、ＣＩＦ）などの様々な処理能力を有する端末を含む可能性がある。様々な処理能力の端末が同時に会議に参加する場合、どの端末の画面もピクチャを適切に表示できるように、端末のイメージ伝送能力が調整される必要がある。

全ての端末のイメージ伝送能力を調整する方法は、ビデオ会議システム内の端末を制御するためのマルチポイント制御ユニット（ＭＣＵ）が、各端末の解像度能力情報を受信し、全ての端末の共通の最も高い能力を会議に適用し、ビデオ会議内の端末がネゴシエートされた共通の最も高い能力に従ってイメージを符号化及び復号することを含む。しかし、会議を開催するために、ビデオ会議システム内の全ての端末がネゴシエートされた共通の最も高い能力を採用する場合、１つの低解像度端末が存在する場合に、高解像度の端末間でイメージが伝送される際に低解像度のイメージのみが提示される。

全ての端末のイメージ伝送能力を調整する別の方法は、ＭＣＵが符号ストリームに対するアダプテーション及びトランスコードを次のようにして実行することを含む。ＭＣＵは、受信した高空間解像度符号ストリームを復号し、復号されたイメージを低解像度イメージにダウンスケールし、低解像度イメージを符号化して低解像度イメージの符号ストリームを取得し、低解像度イメージの符号ストリームを低解像度でイメージを表示する必要がある端末に送信する。しかし、この方法は、符号ストリームの復号、全ての高解像度イメージのダウンスケール、及び低解像度イメージの符号化を含み、従って、複雑な計算と低い効率とをもたらす。

図１に示すように、従来技術におけるビデオ会議システムは、端末１〜端末Ｎと、端末を接続するためのＭＣＵとを含む。ＭＣＵは、独立型であってもよく、又は端末内に組み込まれていてもよい。

図１に示すビデオ会議システムを使用して会議を開催するプロセスは、以下のステップを含む。

ステップ１：システム内のＭＣＵは、システム内の全ての端末の共通の最も高い会議能力を決定し、決定された共通の最も高い会議能力をシステム内の全ての端末に送信する。

ステップ２：共通の最も高い会議能力を認識した後で、システム内の各端末は、共通の最も高い会議能力に従ってイメージを符号化し、符号ストリームを送信する。

ステップ３：システム内のＭＣＵは、端末によって送信された符号ストリームを受信し、符号ストリームを受信する必要がある端末に符号ストリームを送信する。

この方法は、次の欠点を有する。１つの低解像度端末が存在する限り、高解像度端末の間でイメージが伝送される場合でも、低解像度イメージのみが提示される。

図１に示すビデオ会議システムを使用して会議を開催する別のプロセスは、以下のステップを含む。
ステップ１：システム内のＭＣＵは、システム内の全ての端末の会議能力を記録する。
ステップ２：符号ストリームを受信する端末の能力が符号ストリームを送信する端末の能力と一致しないことをＭＣＵが見出した場合、ＭＣＵは、符号ストリームを送信する端末によって送信された符号ストリームを復号し、符号ストリームを受信する端末の能力に従ってイメージを符号化し、符号ストリームを受信する端末に符号ストリームを送信する。

この方法は、次の欠点を有する。復号及び符号化が必要とされる。従って、計算が複雑であり、効率が低い。

図１に示すビデオ会議システムを使用して会議を開催する第３のプロセスは、以下のステップを含む。

システム内のＭＣＵは、大きなピクチャの符号ストリームを受信し、大きなピクチャの符号ストリームを大きなピクチャのみを表示する端末に転送する。このピクチャを含む複数のピクチャを表示する必要がある端末については、すなわち、複数の小さなピクチャを表示する必要がある端末については、ＭＣＵは、符号ストリームを復号し、復号に由来するイメージをサブピクチャのサイズにダウンスケールし、ダウンスケールされたイメージを他のサブピクチャと組み合わせて大きなピクチャを形成し、組み合わされた大きなピクチャを符号化し、組み合わされた大きなピクチャの符号ストリームを、イメージを表示する必要がある端末に送信する。

この方法は、次の欠点を有する。各サブピクチャが復号及びダウンスケールされる必要があり、組み合わされた大きなピクチャが符号化される必要がある。従って、計算が複雑であり、効率が低い。

本発明の実施形態は、システム内の様々な表示能力の端末の表示要求（ｄｉｓｐｌａｙ ｒｅｑｕｉｒｅｍｅｎｔｓ）をサポートするためのマルチポイント会議を制御する方法及び装置を提供する。

本発明による技術的解決法は、以下の通りである。

本発明の一実施形態では、マルチポイント会議を制御する方法が提供される。方法は、
各端末の解像度レイヤード符号化パラメータ（ｒｅｓｏｌｕｔｉｏｎ−ｌａｙｅｒｅｄ ｃｏｄｉｎｇ ｐａｒａｍｅｔｅｒｓ）を決定し、対応する端末に送信し、
各端末によって送信された符号ストリームを受信し、受信した符号ストリームの中から各端末のための符号ストリームを各端末の表示要求に従って選択し、選択された符号ストリームを端末によって復号可能な符号ストリームにトランスコード又はマッピングし、符号ストリームを対応する端末に送信する
ことを含む。

本発明の一実施形態で提供されるＭＣＵは、
各端末の解像度レイヤード符号化パラメータを決定し、対応する端末に送信するように構成された第１の処理ユニットと、
受信した符号ストリームの中から各端末によって表示される符号ストリームを選択し、選択された符号ストリームを端末によって復号可能な符号ストリームにトランスコード又はマッピングし、符号ストリームを対応する端末に送信するように構成された第２の処理ユニットと、
を含む。

本発明の一実施形態で提供されるマルチポイントビデオ会議ステムは、
各端末の解像度レイヤード符号化パラメータを決定し、対応する端末に送信し、受信した符号ストリームの中から各端末によって表示される符号ストリームを選択し、選択された符号ストリームを対応する端末によって復号可能な符号ストリームにトランスコード又はマッピングし、復号可能な符号ストリームを対応する端末に送信するように構成されたＭＣＵと、
送信されるイメージに対して受信した解像度レイヤード符号化パラメータに従って解像度レイヤード符号化を実行し、符号化されたストリームを送信し、受信した符号ストリームを復号するように構成された端末と、
を含む。

本発明による技術的解決法では、解像度レイヤード符号化を制御するためにＭＣＵを使用する。従って、レイヤリングプロトコル（ｌａｙｅｒｉｎｇ ｐｒｏｔｏｃｏｌ）をサポートする端末とレイヤリングプロトコルをサポートしない端末とがシステム内で共存することが可能である。加えて、計算が減少し、システム効率が向上する。

従来技術におけるビデオ会議システムの構成を示す。 本発明の第１の実施形態のプロセスを示す。 本発明の第４の実施形態の構成を示す。

本発明の第１の実施形態は、コーデック方法である。図２に示すように、方法は、以下のステップを含む。

ステップ１：各端末の解像度レイヤード符号化パラメータが決定され、対応する端末に送信される。このステップを実行するエンティティは、システム内の全ての端末を制御するためのＭＣＵであってもよい。

ステップ２：端末は、受信した解像度レイヤード符号化パラメータに従って、送信されるイメージに対して解像度レイヤード符号化を実行し、符号ストリームを送信する。符号ストリームは、ＭＣＵに送信されてもよい。

ステップ３：エンティティは、各端末によって送信された符号ストリームを受信し、受信された符号ストリームの中から、各端末によって復号される符号ストリームを、各端末のイメージ表示要求に従って選択し、選択された符号ストリームを、端末によって復号可能な符号ストリームにトランスコード又はマッピングし、復号可能な符号ストリームを、対応する端末に送信する。このステップを実行するエンティティは、ＭＣＵであってもよい。

ステップ４：端末は、受信された符号ストリームを復号して、表示可能なイメージを取得する。

解像度レイヤード符号化パラメータは、スケーラブルビデオコーディング（ＳＶＣ）プロトコルによって決定された解像度レイヤード符号化パラメータ、又はＨ２６３プロトコルによって決定された解像度レイヤード符号化パラメータを含んでもよい。

この実施形態は、全ての端末が同時に通信する通常のビデオ適用例に適用可能であり、また、複数の端末のビデオ情報が１つの端末の画面内に同時に表示されるコンティニュアスプレゼンスビデオ適用例に適用可能である。以下の詳細な説明において、第２の実施形態は、通常のビデオ適用例に関するものであり、第３の実施形態は、コンティニュアスプレゼンスビデオ適用例に関するものである。

本発明の第２の実施形態は、以下のステップを含む。

ステップ１：各端末の基本レイヤ解像度（ｅｌｅｍｅｎｔａｒｙ ｌａｙｅｒ ｒｅｓｏｌｕｔｉｏｎ）が決定される。このステップを実行するエンティティは、システム内の全ての端末を制御するためのＭＣＵであってもよい。基本レイヤ解像度が事前設定されている場合、事前設定された基本レイヤ解像度がどの端末の最も高い復号解像度よりも高くないことを確認する必要がある。基本レイヤ解像度が事前設定されていない場合、ＭＣＵによって決定される基本レイヤ解像度は、システム内の全ての端末の受信した復号解像度の間での共通の最も高い解像度であってもよい。

ステップ２：決定された基本レイヤ解像度、各端末の表示要求、及び事前設定された解像度レイヤード符号化標準に従って、各端末の基本レイヤ符号化標準、拡張符号化レイヤ（ｅｎｈａｎｃｅｄ ｃｏｄｉｎｇ ｌａｙｅｒｓ）の数、拡張レイヤ解像度、及び拡張レイヤ符号化標準が決定され、それらの対応する端末に送信される。

解像度が基本レイヤ解像度に等しい端末については、端末の符号化プロトコル（符号化標準）は基本レイヤ符号化プトロコルであり、符号化解像度は基本レイヤ解像度であることが決定される。この場合、事前設定された基本レイヤ符号化標準と、基本レイヤ解像度とが、この端末のみに送信される。

解像度が基本レイヤ解像度より高く、レイヤード符号化の能力がない端末については、端末の符号化プロトコルは基本レイヤ符号化プロトコルであり、符号化解像度は基本レイヤ解像度であることが決定される。この場合、事前設定された基本レイヤ符号化標準と、基本レイヤ解像度とが、この端末のみに送信される。

解像度が基本レイヤ解像度より高く、レイヤード符号化の能力がある端末については、端末の符号化プロトコルはレイヤード符号化プロトコルであり、基本レイヤ符号化解像度は基本レイヤ解像度であることが決定され、そして、拡張レイヤパラメータが以下の方法で決定されてもよい。解像度が、共通の最も高い能力より高く、端末によってサポートされる少なくとも２つの解像度が存在する場合、各解像度が拡張レイヤに対応し、かつ／又は、解像度がクラスタ化され、それぞれのクラスタ化された解像度が拡張レイヤに対応する。

基本レイヤ符号化標準は、アドバンストビデオコーディング（ＡＶＣ）及びＨ２６３を含み、拡張レイヤ符号化標準は、ＳＶＣ及びＨ２６３を含む。

ステップ３：端末は、受信した基本レイヤ解像度、基本レイヤ符号化標準、拡張符号化レイヤの数、拡張レイヤ解像度、及び拡張レイヤ符号化標準に従って、解像度レイヤード符号化を実行し、符号化されたストリームを送信する。端末が、基本レイヤ符号化標準及び基本レイヤ解像度のみを受信した場合、イメージは、基本レイヤ符号化標準に従って符号化される。端末が、基本レイヤ符号化標準、基本レイヤ解像度、拡張符号化レイヤの数、拡張レイヤ解像度、及び拡張レイヤ符号化標準を受信した場合、イメージは、基本レイヤ符号化標準、基本レイヤ解像度、拡張符号化レイヤの数、拡張レイヤ解像度、及び拡張レイヤ符号化標準に従って符号化される。

ステップ４：各端末によって送信された符号ストリームが受信され、端末の事前設定された復号要求に従って、各端末によって復号される符号ストリームが決定され、各端末の符号ストリーム復号能力に従って、各端末によって復号される符号ストリームが、各端末によって復号可能な符号ストリームにトランスコードされる。

すなわち、解像度が基本レイヤ解像度に等しい端末については、復号される基本レイヤ符号ストリームが選択され、解像度が共通の最も高い能力より高く、レイヤード復号の能力がある端末については、復号されるレイヤード符号ストリーム（基本レイヤ符号ストリーム及び拡張レイヤ符号ストリーム）が選択されるか、または、基本レイヤ及び拡張レイヤを含むレイヤード符号ストリームが基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングされ、解像度が共通の最も高い能力より高く、レイヤード復号の能力がない端末については、復号される基本レイヤ符号ストリームが選択されるか、または、基本レイヤ及び拡張レイヤを含むレイヤード符号ストリームが基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングされる。

トランスコード又はマッピングは、完全な復号の後の符号化であってもよく、また、複雑な変換計算を含まずドリフトエラーを発生させることもない、予測係数の直接的な調節とシンタクス及びセマンティクスの対応する調節とであってもよい。最後に、取得された符号ストリームが、それぞれの対応する端末に送信される。

例えば、システム内に存在する端末は、端末１、端末２、端末３、及び端末４であり、ＭＣＵは、各端末によって送信された符号ストリームを受信する。端末の事前設定されたイメージ表示要求が、端末１によって送信されたイメージを端末４が表示することである場合、ＭＣＵは、端末１によって送信された符号ストリームを、端末４によって復号される符号ストリームとして設定する。端末４が、ＡＶＣ標準に従って符号化された符号ストリーム（すなわち、ＡＶＣ符号ストリーム）のみを復号可能である場合、ＭＣＵは、端末１がＳＶＣ符号ストリームを送信する場合、復号される基本レイヤＡＶＣ符号ストリームを選択するか、または、ＭＣＵは、ＳＶＣ符号ストリームをＡＶＣ符号ストリームにトランスコード又はマッピングし、符号ストリームを送信する。端末４が、ＳＶＣ符号ストリームを復号可能である場合、端末１がＳＶＣ符号ストリームを送信する場合、ＭＣＵは、ＳＶＣ符号ストリームを直接送信してもよく、または、ＭＣＵは、ＳＶＣ符号ストリームをＡＶＣ符号ストリームにトランスコード又はマッピングし、符号ストリームを送信する。

この実施形態において提供されるマルチポイント会議制御を制御する方法を使用することにより、システムは、レイヤリングプロトコルをサポートする端末とレイヤリングプロトコルをサポートしない端末との両方を含むことができ、計算が減少し、システム効率が向上する。

この実施形態におけるＭＣＵは、ビデオ会議システム内の端末上に設けられたＭＣＵ、又はシステム内の独立型のＭＣＵであってもよい。

以下では、ビデオ会議システムが端末１、端末２、端末３、及び端末４を含み、端末１がＭＣＵを含み、事前設定された解像度レイヤード符号化標準がＳＶＣ標準であると仮定して、本発明の第２の実施形態について説明する。端末１は、ＣＩＦ、４ＣＩＦ、及び７２０Ｐを復号する能力があり、端末２によって送信されたイメージを表示する必要があり、ＳＶＣ符号ストリームを復号する。端末２の復号解像度が最も低い。端末２は、ＣＩＦを復号する能力があり、端末３によって送信されたイメージを表示する必要があり、ＡＶＣ符号ストリームのみを復号する。端末３は、ＣＩＦ及び４ＣＩＦを復号する能力があり、端末４によって送信されたイメージを表示する必要があり、ＳＶＣ符号ストリームを復号する。端末４は、ＣＩＦ、４ＣＩＦ、及び７２０Ｐを復号する能力があり、端末１によって送信されたイメージを表示する必要があり、ＳＶＣ符号ストリームを復号する。拡張レイヤ方法が適用される場合、すなわち、解像度が基本レイヤ解像度より大きく、端末によってサポートされる少なくとも２つの解像度が存在し、各解像度が拡張レイヤに対応する場合、システムの実施プロセスは以下のステップを含む。

ステップ１：ＭＣＵは、ビデオ会議システム内の各端末によって送信された復号解像度能力を受信し、基本レイヤ解像度が端末２の復号解像度であることを決定する。

ステップ２：ＭＣＵは、決定された基本レイヤ解像度と、各端末の表示要求と、事前設定されたＳＶＣ解像度レイヤード符号化標準とに従って、ビデオ会議システム内の各端末の符号化モードを決定し、各端末の符号化モードを、対応する端末に送信する。端末１、３、及び４については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度は基本レイヤ解像度である。拡張レイヤはＳＶＣ標準を符号化のために使用し、拡張符号化レイヤの数は以下の基準に従って決定される。解像度は基本レイヤ解像度より大きく、端末によってサポートされる少なくとも２つの解像度が存在し、各解像度は拡張レイヤに対応する。従って、拡張符号化レイヤの数は２であり、拡張レイヤ１の解像度は４ＣＩＦであり、拡張レイヤ２の解像度は７２０Ｐである。端末２については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度は基本レイヤ解像度（すなわち、ＣＩＦ）であり、拡張レイヤは存在しない。端末３については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度は基本レイヤ解像度（すなわち、ＣＩＦ）であり、１つの拡張レイヤが存在し、拡張レイヤ１の解像度は４ＣＩＦである。端末１については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度は基本レイヤ解像度（すなわち、ＣＩＦ）であり、２つの拡張レイヤが存在し、拡張レイヤ１の解像度は４ＣＩＦであり、拡張レイヤ２の解像度は７２０Ｐである。

ステップ３：各端末は、受信した符号化モードに従ってイメージを符号化し、符号化されたストリームをＭＣＵに送信する。すなわち、端末１、端末３、及び端末４は、ＳＶＣ符号ストリームを送信し、端末２は、ＡＶＣ符号ストリームを送信する。

ステップ４：各端末によって送信された符号ストリームを受信した後で、ＭＣＵは、端末の復号能力に従って符号ストリームを選択し、選択された符号ストリームをトランスコードして、送信する。すなわち、端末２によって送信された符号ストリーム（ＡＶＣ符号ストリーム）は端末１に直接送信され、端末３によって送信された符号ストリーム（ＳＶＣ符号ストリーム）のうち基本レイヤＡＶＣ符号ストリームが選択されて端末２に送信され、端末４によって送信された符号ストリーム（ＳＶＣ符号ストリーム）のうち基本レイヤの符号ストリームと拡張レイヤ１の符号ストリームとが選択されて端末３に送信され、端末１によって送信された符号ストリーム（ＳＶＣ符号ストリーム）のうち基本レイヤの符号ストリームと拡張レイヤ１の符号ストリームと拡張レイヤ２の符号ストリームとが選択されて端末４に送信される。

ステップ５：各端末は、受信した符号ストリームを復号する。

クラスタ化された解像度を使用した拡張レイヤ方法が適用される場合、システムの実施プロセスは以下のステップを含む。

ステップ１：ＭＣＵは、ビデオ会議システム内の各端末によって送信された復号解像度能力を受信し、基本レイヤ解像度が端末２の復号解像度であることを決定する。

ステップ２：ＭＣＵは、決定された基本レイヤ解像度と、各端末の表示要求と、事前設定されたＳＶＣ解像度レイヤード符号化標準とに従って、ビデオ会議システム内の各端末の符号化モードを決定し、各端末の符号化モードを、対応する端末に送信する。端末１、端末３、及び端末４については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度は基本レイヤ解像度である。拡張レイヤはＳＶＣ標準を符号化のために使用し、拡張符号化レイヤの数は以下の基準に従って決定される。解像度は基本レイヤ解像度より大きく、端末によってサポートされる少なくとも２つの解像度クラスタが存在する。従って、拡張符号化レイヤの数は１であり、拡張レイヤ１の解像度は４ＣＩＦである。端末２については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度は基本レイヤ解像度（すなわち、ＣＩＦ）であり、拡張レイヤは存在しない。

ステップ３：各端末は、受信した符号化モードに従ってイメージを符号化し、符号化されたストリームをＭＣＵに送信する。すなわち、端末１、端末３、及び端末４は、ＳＶＣ符号ストリームを送信し、端末２は、ＡＶＣ符号ストリームを送信する。

ステップ４：各端末によって送信された符号ストリームを受信した後で、ＭＣＵは、端末の復号能力に従って符号ストリームを選択し、選択された符号ストリームをトランスコードして、送信する。すなわち、端末２によって送信された符号ストリーム（ＡＶＣ符号ストリーム）は端末１に直接送信され、端末３によって送信された符号ストリーム（ＳＶＣ符号ストリーム）のうち基本レイヤＡＶＣ符号ストリームが選択されて端末２に送信され、端末４によって送信された符号ストリーム（ＳＶＣ符号ストリーム）のうち基本レイヤの符号ストリームと拡張レイヤ１の符号ストリームとが選択されて端末３に送信される。

ステップ５：各端末は、受信された符号ストリームを復号する。

本発明の第３の実施形態は、以下のステップを含む。

ステップ１：各端末によって送信された解像度能力情報が受信される。各端末の解像度能力情報及び表示要求に従って、サブピクチャ解像度（ｓｕｂｐｉｃｔｕｒｅ ｒｅｓｏｌｕｔｉｏｎ）と、コンボピクチャ解像度（ｃｏｍｂｏ ｐｉｃｔｕｒｅ ｒｅｓｏｌｕｔｉｏｎ）とが決定される。解像度を決定するエンティティは、システム内のＭＣＵであってもよい。

ステップ２：決定されたサブピクチャ解像度、コンボピクチャ解像度、及び事前設定された解像度レイヤード符号化標準に従って、各端末の基本レイヤ符号化標準、拡張符号化レイヤの数、及び拡張レイヤ符号化標準が決定され、対応する端末に送信される。

解像度がサブピクチャ解像度に等しい端末については、端末の符号化プロトコルは基本レイヤ符号化プロトコルであり、符号化解像度はサブピクチャ解像度であることが決定される。

解像度がサブピクチャ解像度より高く、レイヤード符号化の能力がない端末については、端末の符号化プロトコルは基本レイヤ符号化プロトコルであり、符号化解像度はサブピクチャ解像度であることが決定される。

解像度がサブピクチャ解像度より高く、レイヤード符号化の能力がある端末については、端末の符号化プロトコルはレイヤード符号化プロトコルであり、基本レイヤ符号化解像度はサブピクチャ解像度であり、拡張レイヤ符号化解像度はコンボピクチャ解像度であることが決定される。

ステップ３：端末は、受信された基本レイヤ解像度、基本レイヤ符号化標準、拡張符号化レイヤの数、拡張レイヤ解像度、及び拡張レイヤ符号化標準に従って、解像度レイヤード符号化を実行し、符号化されたストリームを送信する。端末が、基本レイヤ符号化標準及び基本レイヤ解像度のみを受信した場合、イメージは、基本レイヤ符号化標準に従って符号化される。端末が、基本レイヤ符号化標準、基本レイヤ解像度、拡張符号化レイヤの数、拡張レイヤ解像度、及び拡張レイヤ符号化標準を受信した場合、イメージは、基本レイヤ符号化標準、基本レイヤ解像度、拡張符号化レイヤの数、拡張レイヤ解像度、及び拡張レイヤ符号化標準に従って符号化される。

ステップ４：各端末によって送信された符号ストリームが受信される。複数の小さなピクチャを表示する必要がある端末については、復号及び表示のために選択された符号ストリーム（１つ又は複数）が組み合わされて基本レイヤ符号ストリームが直接形成され、かつ／又は、復号のために選択された符号ストリーム（１つ又は複数）が復号され、復号されたピクチャが組み合わされて大きなピクチャが形成される。その後、大きなピクチャが符号化されて、基本レイヤ符号ストリームが取得される。

復号能力に応じて、大きなピクチャを表示する必要がある端末は２つのモードで動作する。レイヤード復号の能力がある端末については、復号されるサブピクチャ符号ストリームと復号される拡張レイヤ符号ストリームとが選択されるか、または、サブピクチャ符号ストリームと拡張レイヤ符号ストリームとを含むレイヤード符号ストリームが基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングされる。

レイヤード復号の能力がない端末については、サブピクチャ符号ストリームと拡張レイヤ符号ストリームとを含むレイヤード符号ストリームが、基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングされる。

例えば、本発明の第３の実施形態において、マルチピクチャビデオ会議は、端末１と、端末２と、端末３と、端末４と、ＭＣＵとを含み、事前設定された符号化標準はＳＶＣである。端末１は、ＣＩＦ、４ＣＩＦ、及び７２０Ｐを復号する能力があり、端末２によって送信されたイメージを表示する必要があり、ＳＶＣ符号ストリームを復号する。端末２の復号解像度が最も低い。端末２は、ＣＩＦを復号する能力があり、端末３によって送信されたイメージを表示する必要があり、ＡＶＣ符号ストリームのみを復号する。端末３は、ＣＩＦ及び４ＣＩＦを復号する能力があり、端末１、端末２、及び端末４によって送信されたイメージを表示する必要があり、ＳＶＣ符号ストリームを復号する。端末４は、ＣＩＦ、４ＣＩＦ、及び７２０Ｐを復号する能力がある。拡張レイヤ方法が適用される場合、すなわち、解像度が基本レイヤ解像度より大きく、端末によってサポートされる少なくとも２つの解像度が存在し、各解像度が拡張レイヤに対応する場合、システムの実施プロセスは以下のステップを含む。

ステップ１：ＭＣＵは、ビデオ会議システム内の各端末によって送信された復号解像度能力を受信し、サブピクチャ解像度がＣＩＦであり、コンボピクチャ解像度が４ＣＩＦであることを決定する。

ステップ２：各端末のレイヤリングパラメータが決定され、各端末の符号化モードが、対応する端末に送信される。端末１、端末３、及び端末４については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度はサブピクチャ解像度「ＣＩＦ」である。拡張レイヤはＳＶＣ標準を符号化のために使用し、拡張符号化レイヤの数は以下の基準に従って決定される。解像度は基本レイヤ解像度より大きく、端末によってサポートされる少なくとも２つの解像度が存在し、各解像度は拡張レイヤに対応する。従って、拡張符号化レイヤの数は２であり、拡張レイヤ１の解像度は４ＣＩＦであり、拡張レイヤ２の解像度は７２０Ｐである。端末２については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度はサブピクチャ解像度（すなわち、ＣＩＦ）であり、拡張レイヤは存在しない。

ステップ３：各端末は、受信された符号化モードに従ってイメージを符号化し、符号化されたストリームをＭＣＵに送信する。すなわち、端末１、端末３、及び端末４は、ＳＶＣ符号ストリームを送信し、端末２は、ＡＶＣ符号ストリームを送信する。

ステップ４：各端末によって送信された符号ストリームを受信した後で、ＭＣＵは、端末の復号能力及び表示要求に従って符号ストリームをトランスコードし、送信する。すなわち、端末１及び２は小さなピクチャを表示する必要がないため、端末１及び２に向けられた符号ストリームの処理は第２の実施形態における処理と同じであり、すなわち、端末２によって送信された符号ストリーム（ＡＶＣ符号ストリーム）は端末１に直接送信され、端末３によって送信された符号ストリーム（ＳＶＣ符号ストリーム）のうち基本レイヤＡＶＣ符号ストリームが選択されて端末２に送信される。

端末３はコンボピクチャを表示する必要があるため、ＭＣＵは、端末１によって送信された基本レイヤＡＶＣ符号ストリームと、端末２によって送信されたＡＶＣ符号ストリームと、端末４によって送信された基本レイヤＡＶＣ符号ストリームとを直接選択して、大きなピクチャの基本レイヤＡＶＣ符号ストリームを構成してもよく、そして、端末３に送信する。

ステップ５：マルチピクチャビデオ会議システム内の各端末は、受信した符号ストリームを復号する。コンボピクチャを表示する必要がある端末３については、受信したコンボピクチャの基本レイヤ符号ストリームが復号される。

クラスタ化された解像度を使用した拡張レイヤ方法が適用される場合、システムの実施プロセスは以下のステップを含む。

ステップ１：ＭＣＵは、ビデオ会議システム内の各端末によって送信された復号解像度能力を受信し、サブピクチャ解像度がＣＩＦであり、コンボピクチャ解像度が４ＣＩＦであることを決定する。

ステップ２：各端末のレイヤリングパラメータが決定され、各端末の符号化モードが、対応する端末に送信される。端末１、端末３、及び端末４については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度はサブピクチャ解像度「ＣＩＦ」である。拡張レイヤはＳＶＣ標準を符号化のために使用し、拡張符号化レイヤの数は以下の基準に従って決定される。解像度は共通の最も高い能力より大きく、端末によってサポートされる少なくとも２つの解像度クラスタが存在する。従って、拡張符号化レイヤの数は１であり、拡張レイヤ１の解像度は４ＣＩＦである。端末２については、基本レイヤはＡＶＣ標準を符号化のために使用し、符号化解像度はサブピクチャ解像度（すなわち、ＣＩＦ）であり、拡張レイヤは存在しない。

ステップ３：各端末は、受信された符号化モードに従ってイメージを符号化し、符号化されたストリームをＭＣＵに送信する。すなわち、端末１、端末３、及び端末４は、ＳＶＣ符号ストリームを送信し、端末２は、ＡＶＣ符号ストリームを送信する。

ステップ４：各端末によって送信された符号ストリームを受信した後で、ＭＣＵは、端末の復号能力及び表示要求に従って符号ストリームをトランスコードし、送信する。すなわち、端末１及び２は小さなピクチャを表示する必要がないため、端末１及び２に向けられた符号ストリームの処理は第２の実施形態における処理と同じであり、すなわち、端末２によって送信された符号ストリーム（ＡＶＣ符号ストリーム）は端末１に直接送信され、端末３によって送信された符号ストリーム（ＳＶＣ符号ストリーム）のうち基本レイヤＡＶＣ符号ストリームが選択されて端末２に送信される。

端末３はコンボピクチャを表示する必要があるため、ＭＣＵは、選択された端末１によって送信された基本レイヤＡＶＣ符号ストリームと、端末２によって送信されたＡＶＣ符号ストリームと、端末４によって送信された基本レイヤＡＶＣ符号ストリームとを復号してもよい。ＭＣＵは、復号されたストリームを組み合わせて大きなピクチャを形成し、大きなピクチャを符号化して、基本レイヤＡＶＣ符号ストリームを取得し、端末３に送信する。

ステップ５：マルチピクチャビデオ会議システム内の各端末は、受信した符号ストリームを復号する。コンボピクチャを表示する必要がある端末３については、受信したコンボピクチャの基本レイヤ符号ストリームが復号される。

この実施形態において提供されるマルチポイント会議制御を制御する方法を使用することにより、システムは、レイヤリングプロトコルをサポートする端末とレイヤリングプロトコルをサポートしない端末との両方を含むことができ、計算が減少し、システム効率が向上する。

本発明の第４の実施形態は、マルチポイント会議システムである。図３に示すように、システムは、ＭＣＵと、端末内に設けられたコーデック装置と、を含む。ＭＣＵは、
各端末の解像度レイヤード符号化パラメータを決定し、各端末の第１の処理ユニットにそれぞれ送信し、
受信された符号ストリームの中から各端末によって表示される符号ストリームを選択し、選択された符号ストリームを端末によって復号可能な符号ストリームにトランスコード又はマッピングし、
各端末によって復号可能な符号ストリームを各端末の第２の処理ユニットにそれぞれ送信するように構成される。

第１の処理ユニットは、情報受信ユニットと、パラメータ決定ユニットと、パラメータ送信ユニットと、を含む。

情報受信ユニットは、各端末の表示要求と解像度能力情報とを受信するように構成される。

パラメータ決定ユニットは、第１のパラメータ決定ユニット、及び／又は、第２のパラメータ決定ユニットを含む。

第１のパラメータ決定ユニットは、通常のビデオ会議適用例において適用され、そして、情報受信ユニットによって受信した各端末の表示要求と解像度能力情報とに従って、全ての端末の復号解像度の共通の最も高い解像度を、基本レイヤ解像度として決定し、各端末の解像度レイヤード符号化パラメータを決定するように構成される。解像度レイヤード符号化パラメータは次のようにして決定されてもよい。解像度が共通の最も高い能力に等しい端末については、端末の符号化プロトコルは基本レイヤ符号化プトロコルであり、符号化解像度は基本レイヤ解像度であることが決定される。解像度が共通の最も高い能力より高く、レイヤード符号化の能力がない端末については、端末の符号化プロトコルは基本レイヤ符号化プロトコルであり、符号化解像度は基本レイヤ解像度であることが決定される。解像度が共通の最も高い能力より高く、レイヤード符号化の能力がある端末については、端末の符号化プロトコルはレイヤード符号化プロトコルであり、基本レイヤ符号化解像度は基本レイヤ解像度であることが決定され、拡張レイヤパラメータが決定される。拡張レイヤパラメータは以下の基準に従って決定されてもよい。解像度が基本レイヤ解像度より高く、端末によってサポートされる少なくとも２つの解像度が存在し、各解像度が拡張レイヤに対応し、かつ／又は、解像度がクラスタ化され、それぞれのクラスタ化された解像度が拡張レイヤに対応する。

第２のパラメータ決定ユニットは、マルチピクチャビデオ会議システムにおいて適用され、各端末の解像度能力情報と表示要求とに従ってサブピクチャ解像度及びコンボピクチャ解像度を決定し、各端末の解像度レイヤード符号化パラメータを決定するように構成される。解像度レイヤード符号化パラメータは、次のようにして決定されてもよい。マルチピクチャビデオ会議システムにおいて、解像度がサブピクチャ解像度に等しい端末については、端末の符号化プロトコルは基本レイヤ符号化プトロコルであり、符号化解像度はサブピクチャ解像度であることが決定され、解像度がサブピクチャ解像度より高くレイヤード符号化の能力がない端末については、端末の符号化プロトコルは基本レイヤ符号化プロトコルであり、符号化解像度はサブピクチャ解像度であることが決定され、解像度がサブピクチャ解像度より高くレイヤード符号化の能力がある端末については、端末の符号化プロトコルはレイヤード符号化プロトコルであり、基本レイヤ符号化解像度はサブピクチャ解像度であることが決定され、拡張レイヤパラメータが決定される。拡張レイヤパラメータは以下の基準に従って決定されてもよい。解像度が基本レイヤ解像度より高く、端末によってサポートされる少なくとも２つの解像度が存在し、各解像度が拡張レイヤに対応し、かつ／又は、解像度がクラスタ化され、それぞれのクラスタ化された解像度が拡張レイヤに対応する。

パラメータ送信ユニットは、パラメータ決定ユニットによって決定された、各端末の解像度レイヤード符号化パラメータを、パラメータの対応する端末に送信するように構成される。

第２の処理ユニットは、符号ストリーム受信ユニットと、符号ストリーム選択ユニットと、符号ストリームトランスコード又はマッピングユニットと、符号ストリーム送信ユニットと、を含む。

符号ストリーム受信ユニットは、各端末によって送信された符号ストリームを受信するように構成される。

符号ストリーム選択ユニットは、受信された符号ストリームの中から、各端末によって表示される符号ストリームを選択するように構成される。

符号ストリームトランスコード又はマッピングユニットは、符号ストリーム選択ユニットによって選択された符号ストリームを、端末によって復号可能な符号ストリームにトランスコード又はマッピングするように構成される。符号ストリームトランスコード又はマッピングユニットは、第１のトランスコード又はマッピングユニット、及び／又は、第２のトランスコード又はマッピングユニット、及び／又は、第３のトランスコード又はマッピングユニットを含む。

第１のトランスコード又はマッピングユニットは、通常のビデオ会議のシナリオにおいて適用され、
解像度が基本レイヤ解像度に等しい端末については、復号される基本レイヤ符号ストリームを選択し、
解像度が基本レイヤ解像度より高くレイヤード復号の能力がある端末については、復号される基本レイヤ符号ストリームと復号される拡張レイヤ符号ストリームとを選択するか、または、基本レイヤと拡張レイヤとを含むレイヤード符号ストリームを基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングし、
解像度が基本レイヤ解像度より高くレイヤード復号の能力がない端末については、復号される基本レイヤ符号ストリームを選択するか、または、基本レイヤと拡張レイヤとを含むレイヤード符号ストリームを基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングするように構成される。

第２のトランスコード又はマッピングユニットは、マルチピクチャビデオのシナリオにおいて適用され、復号のために選択された符号ストリーム（１つ又は複数）を組み合わせて基本レイヤ符号ストリームを直接形成し、かつ／又は、選択された符号ストリーム（１つ又は複数）を復号し、復号されたピクチャを組み合わせて大きなピクチャを形成し、大きなピクチャを符号化して基本レイヤ符号ストリームを取得するように構成される。

第３のトランスコード又はマッピングユニットは、マルチピクチャビデオ会議のシナリオにおいて適用され、レイヤード復号の能力がある端末については、復号されるサブピクチャ符号ストリームと復号される拡張レイヤ符号ストリームとを選択するか、または、サブピクチャ符号ストリームと拡張レイヤ符号ストリームとを含むレイヤード符号ストリームを基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングし、レイヤード復号の能力がない端末については、サブピクチャ符号ストリームと拡張レイヤ符号ストリームとを含むレイヤード符号ストリームを基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングするように構成される。

符号ストリーム送信ユニットは、トランスコード又はマッピングされた符号ストリームを、それらの対応する端末に送信するように構成される。

コーデック装置は、
解像度レイヤード符号化パラメータを受信するように構成されたパラメータ受信ユニットと、
パラメータ受信ユニットによって受信された解像度レイヤード符号化パラメータに従って、送信されるイメージに対して解像度レイヤード符号化を実行し、符号化されたストリームを送信するように構成された符号化ユニットと、
受信された符号ストリームを復号するように構成された復号ユニットと、
を含む。

この実施形態において提供されるマルチポイント会議システムは、レイヤリングプロトコルをサポートする端末とレイヤリングプロトコルをサポートしない端末との両方を含むことができ、従って、計算を減少させ、システム効率を向上させる。

前述の実施形態の説明を介して、当業者は、本発明が、ハードウェアのみを使用することによって、又は、ソフトウェアと必要な汎用ハードウェアプラットフォームとを使用することによって実施されることが可能であるということを理解するであろう。そのような理解に基づいて、本発明の技術的解決法は、ソフトウェア製品の形態で実施されてもよい。ソフトウェア製品は、コンパクトディスク読み取り専用メモリ（ＣＤ−ＲＯＭ）、ユニバーサルシリアルバス（ＵＳＢ）フラッシュドライブ、又はリムーバブルハードドライブであってもよい不揮発性記憶媒体に記憶されてもよい。ソフトウェア製品は、本発明の実施形態において提供された方法をコンピュータ装置（パーソナルコンピュータ、サーバ、又はネットワーク装置）が実行することを可能にする複数の命令を含む。

結論として、上記は本発明の好ましい実施形態にすぎない。しかし、本発明の範囲はそれに限定されない。本発明の技術的範囲内の当業者に容易に明白となる変更又は置換は本発明の範囲に入る。従って、本発明の保護範囲は添付の特許請求の範囲によって決まる。
本出願は、２００８年５月２３日に中国専利局に出願された、「Ｍｅｔｈｏｄ ａｎｄ Ａｐｐａｒａｔｕｓ ｆｏｒ Ｃｏｎｔｒｏｌｌｉｎｇ Ｍｕｌｔｉｐｏｉｎｔ Ｃｏｎｆｅｒｅｎｃｅ（マルチポイント会議を制御する方法及び装置）」と題された中国特許出願第２００８１０１１２３９８．２号の優先権を主張するものであり、当該出願はその全体が参照によって本明細書中に援用される。

Claims (15)

1. 各端末の解像度レイヤード符号化パラメータを決定し、対応する端末に送信することと、
   各端末によって送信された符号ストリームを受信し、前記受信した符号ストリームの中から各端末によって表示される符号ストリームを各端末の表示要求に従って選択し、前記選択された符号ストリームを対応する端末によって復号可能な符号ストリームにトランスコード又はマッピングし、前記復号可能な符号ストリームを前記対応する端末に送信することと、
   を含む、マルチポイント会議を制御する方法。
2. 前記各端末の解像度レイヤード符号化パラメータを決定することは、
   各端末の基本レイヤ解像度を決定することと、
   前記決定された基本レイヤ解像度に従って各端末の前記解像度レイヤード符号化パラメータを決定することと、
   を含む、請求項１に記載の方法。
3. 前記各端末の基本レイヤ解像度を決定することは、
   各端末によって送信された端末の解像度能力情報を受信することと、
   受信した各端末の解像度能力情報に従って、全ての端末の復号解像度の共通の最も高い解像度が前記基本レイヤ解像度であることを決定することと、
   を含むか、又は、
   前記各端末の基本レイヤ解像度を決定することは、
   全ての端末の最も高い復号解像度より高くない前記基本レイヤ解像度を事前設定することを含む、
   請求項２に記載の方法。
4. 前記決定された基本レイヤ解像度に従って各端末の前記解像度レイヤード符号化パラメータを決定することは、
   解像度が前記基本レイヤ解像度に等しい端末について、前記端末の符号化プロトコルが基本レイヤ符号化プトロコルであり、符号化解像度が前記基本レイヤ解像度であることを決定すること、又は、
   解像度が前記基本レイヤ解像度より高くレイヤード符号化の能力がない端末について、前記端末の符号化プロトコルが前記基本レイヤ符号化プロトコルであり、前記符号化解像度が前記基本レイヤ解像度であることを決定すること、又は、
   解像度が前記基本レイヤ解像度より高くレイヤード符号化の能力がある端末について、前記端末の符号化プロトコルがレイヤード符号化プロトコルであり、基本レイヤ符号化解像度が前記基本レイヤ解像度であることを決定し、拡張レイヤパラメータを決定すること、
   を含む、請求項２に記載の方法。
5. 前記選択された符号ストリームを前記対応する端末によって復号可能な符号ストリームにトランスコード又はマッピングすることは、
   解像度が前記基本レイヤ解像度に等しい端末について、復号される基本レイヤ符号ストリームを選択すること、または、
   解像度が前記基本レイヤ解像度より高くレイヤード復号の能力がある端末について、復号される前記基本レイヤ符号ストリーム及び復号される拡張レイヤ符号ストリームを選択するか、又は、基本レイヤ及び拡張レイヤを含むレイヤード符号ストリームを基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングすること、または、
   解像度が前記基本レイヤ解像度より高くレイヤード復号の能力がない端末について、復号される前記基本レイヤ符号ストリームを選択するか、又は、前記基本レイヤ及び前記拡張レイヤを含む前記レイヤード符号ストリームを前記基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングすること、
   を含む、請求項２〜４のいずれか一項に記載の方法。
6. 前記各端末の前記解像度レイヤード符号化パラメータを決定することは、
   各端末によって送信された解像度能力情報を受信し、前記解像度能力情報と表示要求とに従ってサブピクチャ解像度とコンボピクチャ解像度とを決定することと、
   前記サブピクチャ解像度と前記コンボピクチャ解像度とに従って各端末の前記解像度レイヤード符号化パラメータを決定することと、
   を含む、請求項１に記載の方法。
7. 前記サブピクチャ解像度と前記コンボピクチャ解像度とに従って各端末の前記解像度レイヤード符号化パラメータを決定することは、
   解像度が前記サブピクチャ解像度に等しい端末について、前記端末の符号化プロトコルが基本レイヤ符号化プロトコルであり、符号化解像度が前記サブピクチャ解像度であることを決定すること、又は、
   解像度が前記サブピクチャ解像度より高くレイヤード符号化の能力がない端末について、前記端末の符号化プロトコルが前記基本レイヤ符号化プロトコルであり、前記符号化解像度が前記サブピクチャ解像度であることを決定すること、又は、
   解像度が前記サブピクチャ解像度より高くレイヤード符号化の能力がある端末について、前記端末の符号化プロトコルがレイヤード符号化プロトコルであり、基本レイヤ符号化解像度が前記サブピクチャ解像度であり、拡張レイヤ符号化解像度が前記コンボピクチャ解像度であることを決定し、拡張レイヤパラメータを決定すること、
   を含む、請求項６に記載の方法。
8. 前記拡張レイヤパラメータを決定することは、
   前記解像度が前記基本レイヤ解像度より大きく、前記端末によってサポートされる少なくとも２つの解像度が存在し、各解像度が拡張レイヤに対応するという基準に従って、前記拡張レイヤパラメータを決定することを含み、及び／又は、
   前記解像度をクラスタ化することを含み、それぞれのクラスタ化された解像度が拡張レイヤに対応する、
   請求項４又は請求項７に記載の方法。
9. 前記選択された符号ストリームを前記対応する端末によって復号可能な符号ストリームにトランスコード又はマッピングすることは、
   復号される１つ以上の選択された符号ストリームを組み合わせて基本レイヤ符号ストリームを形成すること、及び／又は、
   復号される前記１つ以上の選択された符号ストリームを復号し、復号されたピクチャを組み合わせて大きなピクチャを形成し、前記大きなピクチャを符号化して基本レイヤ符号ストリームを取得すること、
   を含む、請求項１又は請求項６に記載の方法。
10. 前記選択された符号ストリームを前記対応する端末によって復号可能な符号ストリームにトランスコード又はマッピングすることは、
    レイヤード復号の能力がある端末について、復号されるサブピクチャ符号ストリームと復号される拡張レイヤ符号ストリームとを選択するか、又は、前記サブピクチャ符号ストリームと前記拡張レイヤ符号ストリームとを含むレイヤード符号ストリームを基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングすること、または、
    レイヤード復号の能力がない端末について、前記サブピクチャ符号ストリームと前記拡張レイヤ符号ストリームとを含む前記レイヤード符号ストリームを前記基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングすること、
    を含む、請求項１又は請求項６に記載の方法。
11. 各端末の解像度レイヤード符号化パラメータを決定し、対応する端末に送信するように構成された第１の処理ユニットと、
    受信した符号ストリームの中から各端末によって表示される符号ストリームを選択し、前記選択された符号ストリームを対応する端末によって復号可能な符号ストリームにトランスコード又はマッピングし、前記復号可能な符号ストリームを前記対応する端末に送信するように構成された第２の処理ユニットと、
    を備える、マルチポイント制御ユニット（ＭＣＵ）。
12. 前記第１の処理ユニットは、
    各端末の表示要求と解像度能力情報とを受信するように構成された情報受信ユニットと、
    前記情報受信ユニットによって受信された各端末の表示要求と解像度能力情報とに従って、全ての端末の復号解像度の共通の最も高い解像度を基本レイヤ解像度として決定し、かつ／又は、前記解像度能力情報と各ユーザの表示要求とに従って、各端末の解像度レイヤード符号化パラメータを決定するように構成されたパラメータ決定ユニットと、
    前記パラメータ決定ユニットによって決定された各端末の解像度レイヤード符号化パラメータを前記パラメータの前記対応する端末に送信するように構成されたパラメータ送信ユニットと、
    を備える、請求項１１に記載のＭＣＵ。
13. 前記第２の処理ユニットは、符号ストリーム選択ユニットと、符号ストリームトランスコード又はマッピングユニットと、符号ストリーム送信ユニットと、を備え、
    前記符号ストリーム選択ユニットは、前記受信した符号ストリームの中から各端末によって表示される前記符号ストリームを選択するように構成され、
    前記符号ストリームトランスコード又はマッピングユニットは、前記符号ストリーム選択ユニットによって選択された前記符号ストリームを前記対応する端末によって復号可能な前記符号ストリームにトランスコード又はマッピングするように構成され、前記符号ストリームトランスコード又はマッピングユニットは、第１のトランスコード又はマッピングユニット、及び／又は、第２のトランスコード又はマッピングユニット、及び／又は、第３のトランスコード又はマッピングユニットを含み、
    前記第１のトランスコード又はマッピングユニットは、解像度が基本レイヤ解像度に等しい端末について、復号される基本レイヤ符号ストリームを選択し、解像度が前記基本レイヤ解像度より高くレイヤード復号の能力がある端末について、復号される前記基本レイヤ符号ストリームと復号される拡張レイヤ符号ストリームとを選択するか、または、基本レイヤと拡張レイヤとを含むレイヤード符号ストリームを基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングし、解像度が前記基本レイヤ解像度より高くレイヤード復号の能力がない端末について、復号される前記基本レイヤ符号ストリームを選択するか、または、前記基本レイヤと前記拡張レイヤとを含む前記レイヤード符号ストリームを前記基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングするように構成され、
    前記第２のトランスコード又はマッピングユニットは、復号のための１つ以上の選択された符号ストリームを組み合わせて基本レイヤ符号ストリームを直接形成し、かつ／又は、前記１つ以上の選択された符号ストリームを復号し、復号されたピクチャを組み合わせて大きなピクチャを形成し、前記大きなピクチャを符号化して基本レイヤ符号ストリームを取得するように構成され、
    前記第３のトランスコード又はマッピングユニットは、レイヤード復号の能力がある端末について、復号されるサブピクチャ符号ストリームと復号される拡張レイヤ符号ストリームとを選択するか、または、前記サブピクチャ符号ストリームと前記拡張レイヤ符号ストリームとを含むレイヤード符号ストリームを前記基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングし、レイヤード復号の能力がない端末について、前記サブピクチャ符号ストリームと前記拡張レイヤ符号ストリームとを含む前記レイヤード符号ストリームを前記基本レイヤ符号化標準の符号ストリームにトランスコード又はマッピングするように構成され、
    前記符号ストリーム送信ユニットは、前記トランスコード又はマッピングされた符号ストリームを対応する端末に送信するように構成される、
    請求項１１に記載のＭＣＵ。
14. 各端末の解像度レイヤード符号化パラメータを決定し、対応する端末に送信し、受信した符号ストリームの中から各端末によって表示される符号ストリームを選択し、前記選択された符号ストリームを対応する端末によって復号可能な符号ストリームにトランスコード又はマッピングし、前記復号可能な符号ストリームを前記対応する端末に送信するように構成されたマルチポイント制御ユニット（ＭＣＵ）と、
    受信した解像度レイヤード符号化パラメータに従って送信されるイメージに対して解像度レイヤード符号化を実行し、符号化されたストリームを送信し、受信した符号ストリームを復号するように構成された端末と、
    を備える、マルチポイント会議システム。
15. 前記端末は、
    前記解像度レイヤード符号化パラメータを受信するように構成されたパラメータ受信ユニットと、
    前記パラメータ受信ユニットによって受信された前記解像度レイヤード符号化パラメータに従って、送信される前記イメージに対して解像度レイヤード符号化を実行し、前記符号化されたストリームを送信するように構成された符号化ユニットと、
    前記受信された符号ストリームを復号するように構成された復号ユニットと、
    を備える、請求項１４に記載のシステム。

Images