JP2012178672A

JP2012178672A - 中継装置、多拠点テレビ会議システム

Info

Publication number: JP2012178672A
Application number: JP2011039903A
Authority: JP
Inventors: Yosuke Kawamura; 洋介川村
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 2011-02-25
Filing date: 2011-02-25
Publication date: 2012-09-13

Abstract

【課題】
遠隔通信端末装置全体の動作を制御するＣＰＵの処理能力に対して、エンコードする解像度とフレームレートが大きすぎると、遠隔通信端末装置に負荷がかかるという課題が生じる。
【解決手段】
遠隔通信端末装置１０Ａから中継装置３０に映像データストリームを受信するレイヤーと、遠隔通信端末装置１０Ｂおよび遠隔通信端末装置１０Ｃに映像データストリームを送信するレイヤーとを比較して、前記中継装置３０に受信したレイヤーはあるが、前記遠隔通信端末装置１０Ｂおよび前記遠隔通信端末装置１０Ｃに送信していないレイヤーはあるか否かを検出する制御部３０４を有することを特徴とする中継装置３０を提供する。
【選択図】図４

Description

本発明は、テレビ会議システム等の遠隔地にネットワークを介して映像データストリームを配信するためのシステムに適用可能な中継装置、及び、多拠点テレビ会議システムに関する。

従来の多拠点テレビ会議システムで送受信される映像は、データ量が大きいため非圧縮のままネットワークを介して他拠点に伝送するのは困難であった。そこで、映像の冗長な情報を取り除きデータ量を削減する圧縮(エンコード)および伸張（デコード)する技術が一般に知られている。

近年では、圧縮されたひとつの映像を複数のレイヤーに分けて他拠点に送ることで、ネットワークの状況や受信端末の能力に応じて、最適な映像再生を行うことができるスケーラブルコーディング(Scalable Video Coding・以下、略してＳＶＣと記載する)という技術が既に知られている。特に、近年標準化されたＨ．２６４／ＳＶＣは、中継装置が配信するレイヤーを選択し、最適な帯域、解像度、フレームレートで受信側がデコードする映像符号化規格があり、注目を集めている。以前、遠隔通信端末装置は、複数の遠隔通信端末装置からのデータを同時に受信することができないため、中継装置のコストが高く、遅延が生じる問題があった。一方、Ｈ．２６４／ＳＶＣは、デコードおよび再エンコードを行わないため中継装置のコストが安価である。これに加えて、中継装置に対してデータ転送を要求してから、その結果が返送されるまでの遅延時間（レイテンシ）も悪化しないので多くの利点を有する規格である。

このようなスケーラブルコーディング技術として、特許文献１には、異種のエンドポイント/受信者及びネットワーク上でホストされる会議システムにおいて、符号化された表現を、複数の時間、品質、および空間解像度で提供する方法が開示されている。

しかしながら、特許文献１に記載された発明では、遠隔通信端末装置がエンコードの処理を実行する際に、エンコードに必要な演算量は、データの解像度とフレームレートが大きくなるほど増大する。遠隔通信端末装置全体の動作を制御するＣＰＵ(Central Processing Unit)の処理能力に対して、エンコードする解像度とフレームレートが大きすぎると、目標とするフレームレートを達成できず、遠隔通信端末装置に負荷がかかるという問題があった。

前記課題を解決するために、請求項１に記載された発明は、複数の遠隔通信端末装置間の映像データストリームの中継を行う中継装置において、前記中継装置は、前記遠隔通信端末装置から中継装置に前記映像データストリームを受信するレイヤーと、他の前記遠隔通信端末装置に映像データストリームを送信するレイヤーとを比較して、中継装置に受信したレイヤーはあるが、他の前記遠隔通信端末装置に送信していないレイヤーはあるか否かを検出する制御部を有することを特徴とする中継装置である。

請求項２に記載された発明は、請求項１に記載の制御部が、中継装置に受信したレイヤーはあるが、他の前記遠隔通信端末装置に送信していないレイヤーがあると検出した場合には、前記検出の結果を前記遠隔通信端末装置に送信するであることを特徴とする中継装置である。

請求項３に記載された発明は、請求項１に記載の制御部が、記憶部に記憶される受信レイヤーテーブルおよび送信レイレイヤーテーブルを読み出して、比較することを特徴とする中継装置である。

請求項４に記載された発明は、請求項１に記載のレイヤーが、基本レイヤーと拡張レイヤーからなることを特徴とする中継装置である。

請求項５に記載された発明は、複数の遠隔通信端末装置と、複数の前記遠隔通信端末装置間の映像データストリームの中継を行う中継装置と、を有する多拠点テレビ会議システムにおいて、前記中継装置は、前記遠隔通信端末装置から中継装置に前記映像データストリームを受信するレイヤーと、他の前記遠隔通信端末装置に映像データストリームを送信するレイヤーとを比較して、前記中継装置に受信したレイヤーはあるが他の前記遠隔通信端末装置に送信していないレイヤーはあるか否かを検出する制御部を有することを特徴とする多拠点テレビ会議システムである。

請求項６に記載された発明は、請求項５に記載される制御部が、中継装置に受信したレイヤーはあるが、他の前記遠隔通信端末装置に送信していないレイヤーがあると検出した場合には、前記検出の結果を前記遠隔通信端末装置に送信し、遠隔通信端末装置の制御部は、前記検出の結果に基づいて、前記遠隔通信端末装置のデータ圧縮部に対して、送信していないレイヤーの生成を停止するように制御することを特徴とする多拠点テレビ会議システム。

本発明は、前記遠隔通信端末装置から中継装置に前記映像データストリームを受信するレイヤーと、他の前記遠隔通信端末装置に映像データストリームを送信するレイヤーとを比較して、中継装置に受信したレイヤーはあるが、他の前記遠隔通信端末装置に送信していないレイヤーはあるか否かを検出することによって、遠隔通信端末装置がエンコードの処理を実行する際に、過剰なレイヤーの生成を停止できるという理由から、エンコードの判断処理を円滑に行うことができるようになり、エンコードする解像度とフレームレートが大きい場合でも、目標とするフレームレートが達成でき、遠隔通信端末装置に負荷を軽減できるという顕著な効果を奏することができる。

図１は本発明の一実施形態に係る多拠点テレビ会議システムの概略図である。図２は本発明の一実施形態に係る遠隔通信端末装置のハードウェア構成図である。図３は本発明の一実施形態に係る中継装置のハードウェア構成図である。図４は本発明の一実施形態に係る多拠点テレビ会議システムを構成する中継装置３０の機能ブロック図である。図５は本発明の一実施形態に係る多拠点テレビ会議システムを構成する各遠隔通信端末装置１０および中継装置３０の機能ブロック図である。図６は本発明の一実施形態に係る多拠点テレビ会議システムを構成する遠隔通信端末装置１０と中継装置３０のシークエンスチャート図である。図７は本発明の一実施形態に係る多拠点テレビ会議システムを構成する中継装置３０の制御部３０４の処理を表すフローチャートである。

以下、図１乃至図７を用いて、本発明の一実施形態について説明する。

図１は、本発明の一実施形態に係る多拠点テレビ会議システムの概略を示す図である。一例として３拠点（拠点Ａ、Ｂ、およびＣ）の多拠点テレビ会議システムを示している。

多拠点テレビ会議システム１は、各遠隔通信端末装置（１０Ａ、１０Ｂ、１０Ｃ）と中継装置３０とから構成される。以下、各遠隔通信端末装置（１０Ａ、１０Ｂ、１０Ｃ）をまとめて、遠隔通信端末装置１０と記す。他の装置も同様に表記する。

各遠隔通信端末装置１０は、映像データストリームや等の通信を行う。映像データストリームは、圧縮された映像、あるいは圧縮された映像をネットワークで送信できるように分割(パケット化)したものです。

中継装置３０はインターネットやイントラネット等の通信ネットワーク２０にて接続され、各遠隔通信端末装置１０との各種データ（情報）の送受信を行う。また中継装置３０は、各遠隔通信端末装置１０の間で映像データストリームに基づき作成され、画像の再生に必須な基本データの中継を行う。

さらに、各遠隔通信端末装置１０は、各遠隔通信端末装置用のカメラ（１２Ａ、１２Ｂ、１２Ｃ）、各遠隔通信端末装置用のディスプレイ（１４Ａ、１４Ｂ、１４Ｃ）と接続している。

カメラ１２は、テレビ会議をしている際の映像を撮影する。各遠隔通信端末装置用のディスプレイ１４は、他拠点の映像を表示する。

図２は、本発明の一実施形態に係る遠隔通信端末装置１０のハードウェア構成図である。図
２に示されているように、本実施形態の遠隔通信端末装置１０は、遠隔通信端末装置１０全体の動作を制御し、圧縮(エンコード)および伸張（デコード)処理を行うＣＰＵ(Central Processing Unit)１０１、遠隔通信端末装置用プログラムを記憶したＲＯＭ(Read Only Memory)１０２、ＣＰＵ１０１のワークエリアとして使用されるＲＡＭ(Random Access Memory)１０３、映像データストリームや音声データ等の各種データを記憶するフラッシュメモリ１０４、ＣＰＵ１０１の制御にしたがってフラッシュメモリ１０４に対する各種データの読み出し又は書き込みを制御するＳＳＤ（Solid State Drive）１０５、フラッシュメモリ等の記録メディア１０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ１０７、遠隔通信端末装置１０を操作する操作ボタン１０８、遠隔通信端末装置１０の電源のＯＮ／ＯＦＦを切り換えるための電源スイッチ１０９、ネットワークを利用してデータ伝送をするためのネットワークＩ／Ｆ１１１、ＣＰＵ１０１の制御に従って外付けのカメラ１２で被写体を撮影し、映像データストリームを得て、映像データストリームの伝送を制御する撮像素子Ｉ／Ｆ１１３、音声を入力するマイク１１４、音声を出力するスピーカ１１５、ＣＰＵ１０１の制御に従ってマイク１１４及びスピーカ１１５との間で音声信号の入出力を処理する音声入出力Ｉ／Ｆ１１６、ＣＰＵ１０１の制御に従って外付けのディスプレイ１４に映像データストリームを伝送するディスプレイＩ／Ｆ１１７、及び上記各構成要素を図２に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン１１０を備えている。

なお、記録メディア１０６は、遠隔通信端末装置１０に対して着脱自在な構成となっている。また、ＣＰＵ１０１の制御にしたがってデータの読み出し又は書き込みを行う不揮発性メモリであれば、フラッシュメモリ１０４に限らず、ＥＥＰＲＯＭ（Electrically Erasable and Programmable ROM）等を用いてもよい。更に、カメラ１２としては、一例としてＣＯＭＳを使用する。ＣＯＭＳは、光を電荷に変換して被写体の画像（映像）を電子化する固体撮像素子であり、被写体を撮像するものであればＣＭＯＳに限らず、ＣＣＤ（Charge Coupled Device）等を用いてもよい。また、ディスプレイ１４は、被写体の画像や操作用アイコン等を表示する液晶や有機ＥＬにより構成されている。

更に、上記遠隔通信端末装置用プログラムは、インストール可能な形式又は実行可能な形式
のファイルで、上記記録メディア１０６等の、コンピュータで読み取り可能な記録媒体に
記録して流通させるようにしてもよい。

図３は、本発明の一実施形態に係る中継装置の構成図である。中継装置３０は、中継装置３０全体の動作を制御するＣＰＵ２０１、中継装置３０を制御するための基本データ中継装置用プログラムを記憶したＲＯＭ２０２、ＣＰＵ２０１のワークエリアとして使用されるＲＡＭ２０３、各種データを記憶するＨＤ(Hard Disk)２０４、ＣＰＵ２０１の制御にしたがってＨＤ２０４に対するデータの読み出し又は書き込みを制御するＨＤＤ(Hard Disk Drive)２０５、フラッシュメモリ等の記録メディア２０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ２０７、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示するディスプレイ１４、通信ネットワーク２０を利用してデータ伝送をするためのネットワークＩ／Ｆ２０９、文字、数値、各種指示などの入力のための複数のキーを備えたキーボード２１１、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行うマウス２１２、着脱可能な記録媒体の一例としてのＣＤ−ＲＯＭ(Compact Disc Read Only Memory)２１３に対するデータの読み出し又は書き込みを制御するＣＤ−ＲＯＭドライブ２１４、及び、上記各構成要素を図３に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン２１０を備えている。なお、上述の中継装置用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。

図４は、本発明の一実施形態に係る多拠点テレビ会議システム１を構成する中継装置３０の機能ブロック図である。

中継装置３０は、データ受信部（３０１Ａ、３０１Ｂ、３０１Ｃ）、データ送信部（３０２Ａ、３０２Ｂ、３０２Ｃ）、レイヤー選択部３０３、制御部３０４、記憶部３０５を備えている。

データ受信部３０１は、他拠点の遠隔通信端末装置１０から送信された映像データストリームを受信する。データ送信部３０２は、各遠隔通信端末装置１０に対して映像データストリームを送信する。中継装置３０のデータ受信部３０１により受信した映像データストリームは後述する基本レイヤー及び拡張レイヤーを介して遠隔通信端末装置１０より送信される。レイヤー選択部３０３は、各遠隔通信端末装置１０に対して送信するレイヤーを選択する。Ｈ．２６４／ＳＶＣでは、映像データストリームを基本レイヤーと任意の数の拡張レイヤーに分けて送信される。基本レイヤーは、たとえば映像データストリームを再生するために必要であり、必要最低限の映像データストリームを送信するために用いられる。また、拡張レイヤーは、たとえば映像データストリームをより美しく再生するための映像データストリームを送信するために用いられる。制御部３０４は、１つの遠隔通信端末装置１０から受信したレイヤーと各遠隔通信端末装置１０に向けて送信するレイヤーを比較して、中継装置３０で受信しているが、遠隔通信端末装置１０に送信していないレイヤーを検出する。検出した結果、遠隔通信端末装置１０に送信していないレイヤーを検出した場合、後述する遠隔通信端末装置１０の制御部３１０に対して検出の結果を通知する。また、上述の制御部３０４の検出の結果によって、レイヤーの生成を停止している場合、ある一定条件の下で、遠隔通信端末装置１０の制御部３１０に対して該当するレイヤーの生成および送信を再開するように制御する。一定条件とは、各遠隔通信端末装置１０の利用可能なネットワーク帯域が増加した場合やレイヤーが追加された場合などである。ここで、利用可能なネットワーク帯域が増加する場合とは、遠隔通信端末装置１０の設定で、ネットワーク帯域制限を解除した場合、ネットワークの混雑が解消した場合、無線通信で電波の状態が改善された場合などがあげられる。記憶部３０５は、中継装置３０のデータ受信部３０１で受信した映像データストリームの解像度とフレームレート、及びデータ送信部３０２から送信された映像データストリームの解像度とフレームレートが記憶されている。

図５は、本発明の一実施形態に係る多拠点テレビ会議システム１を構成する各遠隔通信端末装置１０および中継装置３０の機能ブロック図である。

上記図１にも記載したとおり、遠隔通信端末装置（１０Ａ、１０Ｂ、１０Ｃ）と中継装置３０は通信ネットワーク２０を介して、接続されている。各遠隔通信端末装置１０は、データ圧縮部（３０６Ａ、３０６Ｂ、３０６Ｃ）、データ送信部（３０７Ａ、３０７Ｂ、３０７Ｃ）、データ受信部（３０８Ａ、３０８Ｂ、３０８Ｃ）、データ伸張部（３０９Ａ、３０９Ｂ、３０９Ｃ）、制御部（３１０Ａ、３１０Ｂ、３１０Ｃ）を備えている。

また、中継装置３０については、上記図４と同様のため説明を省略する。

データ圧縮部３０８は、カメラ１２によって撮影された自拠点の映像データストリームに圧縮する。データ送信部３０７は、データ圧縮部３０６によって圧縮された映像データストリームを中継装置３０に送信する。データ受信部３０８は、中継装置３０を介して他拠点の遠隔通信端末装置１０から送信された映像データストリームを受信する。データ伸張部３０９は、データ受信部３０８で受信した映像データストリームを伸張する。制御部３１０は、利用可能なネットワーク帯域およびCPU処理能力の情報を取得し、遠隔通信端末装置１０のデータ送信部３０７から送信可能なレイヤーを決定する。これに加えて、中継装置３０の制御部３０４の検出の結果に基づき、データ圧縮部に対してレイヤーの生成の制御を行う。

以下、拠点Ａから、拠点Ｂおよび拠点Ｃに映像データストリームを送信する場合の具体例について表１を用いて説明する。遠隔通信端末装置１０Ａのデータ送信部３０７Ａから映像データストリームが送信され、中継装置３０のデータ受信部３０１Ａで受信した受信レイヤーテーブルが記憶部３０５に記憶されている。
表１受信レイヤーテーブル

拠点Ａの遠隔通信端末装置１０Ａにおいて、基本レイヤー３０Ａは、基本レイヤー３０Ａのみを伸張すると、解像度が３６０×２４０で、フレームレートが１５ｆｐｓの映像データストリームを再生できるとする。また基本レイヤー３０Ａに加えて、拡張レイヤー３０Ａ１、拡張レイヤー３０Ａ２、拡張レイヤー３０Ａ３を備えている。拡張レイヤー３０Ａ１をデコードすると解像度が３６０×２４０で、フレームレートが３０ｆｐｓの映像データストリームを再生できるとする。同様に拡張レイヤーを拡張レイヤー３０Ａ２、拡張レイヤー３０Ａ３と加えていくことで、再生できる映像の品質を向上させることができる。ここで、拡張レイヤー３０Ａ２は、解像度が７２０×４８０で、フレームレートが３０ｆｐｓであり、拡張レイヤー３０Ａ３は、解像度が７２０×４８０で、フレームレートが６０ｆｐｓであるとする。

また、表２に示されるような遠隔通信端末装置１０Ｂおよび遠隔通信端末装置１０Ｃの処理能力やネットワークの帯域情報に応じて受信できる、中継装置３０からデータ送信部３０２Ｂおよびデータ送信部３０２Ｃから送信されるレイヤーを表す送信レイヤーテーブルが記憶部３０５に記憶されている。
表２送信レイヤーテーブル

拠点Ｂの遠隔通信端末装置１０Ｂは、基本レイヤー３０Ａは解像度が３６０×２４０で、フレームレートが１５ｆｐｓの映像データストリームを受信できる能力があるとする。これに加えて拡張レイヤー３０Ａ１および拡張レイヤー３０Ａ２を備えているとする。拡張レイヤー３０Ａ１は解像度が３６０×２４０で、フレームレートが１５ｆｐｓ、拡張レイヤー３０Ａ２は解像度が７２０×４８０で、フレームレートが３０ｆｐｓであるとする。

また、拠点Ｃの遠隔通信端末装置１０Ｃは、基本レイヤー３０Ｃは解像度が３６０×２４０で、フレームレートが１５ｆｐｓの映像データストリームを受信できる能力があるとする。これに加えて拡張レイヤー３０Ａ１を備えているとする。拡張レイヤー３０Ａ１は解像度が３６０×２４０で、フレームレートが１５ｆｐｓであるとする。

この場合、従来であれば、拠点Ａの拡張レイヤー３０Ａ３は、拠点Ｂおよび拠点Ｃのどの遠隔通信端末装置１０でも受信されていないため、遠隔通信端末装置１０Ａにおいて拡張レイヤー３０Ａ３を生成したり、送信したりするＣＰＵへの負荷やネットワーク帯域は無駄となっていた。

そこで、本発明では制御部３０４で、受信レイヤーテーブル（表１）と送信レイヤーテーブル（表２）を比較する。制御部３０４で比較した結果、遠隔通信端末装置１０Ａの拡張レイヤー３０Ａ３から送信された映像データストリームを中継装置３０で受信しているが、遠隔通信端末装置１０Ｂまたは遠隔通信端末装置１０Ｃに送信していないことを検出する。制御部３０４から、検出の結果を遠隔通信端末装置１０Ａの制御部３１０Ａに対して送信し、拡張レイヤー３０Ａ３の生成および送信を停止するように遠隔通信端末装置１０Ａの制御部１０Ａで制御を行う。

図６は、本発明の一実施形態に係る多拠点テレビ会議システム１を構成する遠隔通信端末装置１０と中継装置３０のシークエンスチャート図である。

ここでも上記同様に、拠点Ａから、拠点Ｂおよび拠点Ｃに映像データストリームを送信する場合の具体例を説明する。遠隔通信端末装置１０Ａのデータ送信部３０７Ａから映像データストリームが送信される。（Ｓ６１）この時、上述の表１に示したとおり、基本レイヤー３０Ａは解像度が３６０×２４０・フレームレートが１５ｆｐｓ、拡張レイヤー３０Ａ１は解像度が３６０×２４０・フレームレートが３０ｆｐｓ、拡張レイヤー３０Ａ２は解像度が７２０×４８０・フレームレートが３０ｆｐｓ、拡張レイヤー３０Ａ３は解像度が７２０×４８０・フレームレートが６０ｆｐｓであるとする。ここで、中継装置３０のデータ受信部３０１Ａで、遠隔通信端末装置１０Ａから送信された映像データストリームを受信し、基本レイヤーおよび拡張レイヤーの解像度およびフレームレートを記憶部３０５に記憶する。表１で示される受信レイヤーテーブルが記憶部３０５に記憶されている。次に、遠隔通信端末装置１０Ｂおよび遠隔通信端末装置１０Ｃは、中継装置３０に対して受信可能なレイヤーの通知を行う。（Ｓ６２）あわせて、受信可能な最大の解像度およびフレームレートに関する情報を通知する。次に、レイヤー選択部３０３は、遠隔通信端末装置１０Ｂおよび遠隔通信端末装置１０Ｃに対して送信するレイヤーを選択する。（Ｓ６３）この際、Ｓ６２の通知された情報に基づき、レイヤーを選択する。レイヤー選択部３０３で選択されたレイヤーに基づき、中継装置３０から映像データストリームが遠隔通信端末装置１０Ｂおよび遠隔通信端末装置１０Ｃに送信される。（Ｓ６４）ここでも上記同様に、拠点Ｂの遠隔通信端末装置１０Ｂは、基本レイヤー３０Ａは解像度が３６０×２４０・フレームレートが１５ｆｐｓ、拡張レイヤー３０Ａ１は解像度が３６０×２４０・フレームレートが１５ｆｐｓ、拡張レイヤー３０Ａ２は解像度が７２０×４８０・レームレートが３０ｆｐｓであるとする。また、拠点Ｃの遠隔通信端末装置１０Ｃは、基本レイヤー３０Ａは解像度が３６０×２４０・フレームレートが１５ｆｐｓ、拡張レイヤー３０Ａ１は解像度が３６０×２４０・フレームレートが１５ｆｐｓであるとする。これらは、表２で示される送信レイヤーテーブルが記憶部３０５に記憶されている。

次に、中継装置３０の制御部３０４において、レイヤーの検出を行う。（Ｓ６５）ここで図７を参照して、レイヤーの検出を行う制御部３０４の処理について詳しく説明する。図７は、本発明の一実施形態に係る多拠点テレビ会議システム１を構成する中継装置３０の制御部３０４の処理を表すフローチャートである。

まず、制御部は記憶部３０５に記憶されている送信レイヤーテーブル（表１）と受信レイヤーテーブル（表２）を読み出して、レイヤーの比較を行う。（Ｓ７１）Ｓ７１でレイヤー比較した結果、１つの遠隔通信端末装置１０から送信され、中継装置３０で受信しているが、他の遠隔通信端末１０に送信していないレイヤーがあるか否かを検出する。ここで、１つの遠隔通信端末装置１０から中継装置３０で受信しているが、他の遠隔通信端末１０に送信していないレイヤーがない場合（ＮＯ）、再びレイヤーの比較（Ｓ７１）に戻る。一方、１つの遠隔通信端末装置１０から中継装置３０で受信しているが、他の遠隔通信端末１０に送信していないレイヤーがある場合（ＹＥＳ）、次のステップにうつる。この場合、遠隔通信端末装置１０Ａの拡張レイヤー３０Ａ３からの映像データストリームを受信しているが、遠隔通信端末装置１０Ｂまたは遠隔通信端末装置１０Ｃに送信していない。したがって、１つの遠隔通信端末装置１０から中継装置３０で受信しているが、他の遠隔通信端末１０に送信していないレイヤーがあるという検出結果となる。次に、検出結果を映像データストリーム送信元の遠隔通信端末装置１０に送信する。（Ｓ７３）この場合は、映像データストリーム送信元は遠隔通信端末装置１０Ａであるので、遠隔通信端末装置１０Ａに対し、検出結果を送信する。
再び図６に戻り、説明をする。中継装置３０の制御部３０４から送信された検出結果を遠隔通信端末装置１０の制御部３１０が受信する。（Ｓ６６）制御部３１０は中継装置３０からの検出結果を基づいて、データ圧縮部３０６に対し、他の遠隔通信端末装置１０に送信していないレイヤーの生成を停止するよう制御する。（Ｓ６７）この場合、拡張レイヤー３０Ａ３の生成を停止するように制御する。制御部３０４の制御により、データ圧縮部３０６は他の遠隔通信端末装置１０に送信していないレイヤーの生成を停止し、映像データストリームを中継装置３０に対して送信する。（Ｓ６８）この場合、拡張レイヤー３０Ａ３の生成が停止され、基本レイヤー３０Ａ、拡張レイヤー３０Ａ１、拡張レイヤー３０Ａ２によって映像データストリームが中継装置３０に送信される。そして、再び、中継装置３０でレイヤー選択部３０３によりレイヤーが選択され（Ｓ６９）、映像データストリームが、遠隔通信端末装置３０に送信される。（Ｓ７０）

多拠点テレビ会議システム１
遠隔通信端末装置１０
カメラ１２
ディスプレイ１４
通信ネットワーク２０
中継装置３０
ＣＰＵ(Central Processing Unit)１０１
ＲＯＭ(Read Only Memory)１０２
ＲＡＭ(Random Access Memory)１０３
フラッシュメモリ１０４
ＳＳＤ（Solid State Drive）１０５
記録メディア１０６
メディアドライブ１０７
操作ボタン１０８
電源スイッチ１０９
バスライン１１０
ネットワークＩ／Ｆ１１１
撮像素子Ｉ／Ｆ１１３
マイク１１４
スピーカ１１５
音声入出力Ｉ／Ｆ１１６
ディスプレイＩ／Ｆ１１７
ＣＰＵ２０１
ＲＯＭ２０２
ＲＡＭ２０３
ＨＤ(Hard Disk)２０４
ＨＤＤ(Hard Disk Drive)２０５
記録メディア２０６
メディアドライブ２０７
ディスプレイ２０８
ネットワークＩ／Ｆ２０９
バスライン２１０
キーボード２１１
マウス２１２
ＣＤ−ＲＯＭ(Compact Disc Read Only Memory)２１３
ＣＤ−ＲＯＭドライブ２１４
データ受信部３０１
データ送信部３０２
レイヤー選択部３０３
制御部３０４
記憶部３０５
データ圧縮部３０６
データ送信部３０７
データ受信部３０８
データ伸張部３０９
制御部３１０

特表２００９−５０８４５４号公報

Claims

複数の遠隔通信端末装置間の映像データストリームの中継を行う中継装置において、
前記中継装置は、
前記遠隔通信端末装置から中継装置に前記映像データストリームを受信するレイヤーと、他の前記遠隔通信端末装置に映像データストリームを送信するレイヤーとを比較して、中継装置に受信したレイヤーはあるが、他の前記遠隔通信端末装置に送信していないレイヤーはあるか否かを検出する制御部を有することを特徴とする中継装置。
請求項１に記載される制御部は、中継装置に受信したレイヤーはあるが、他の前記遠隔通信端末装置に送信していないレイヤーがあると検出した場合には、前記検出の結果を前記遠隔通信端末装置に送信することを特徴とする中継装置。
請求項１に記載される制御部は、記憶部に記憶される受信レイヤーテーブルおよび送信レイレイヤーテーブルを読み出して、比較することを特徴とする中継装置。
請求項１に記載されるレイヤーは、基本レイヤーと拡張レイヤーからなることを特徴とする中継装置。
複数の遠隔通信端末装置と、
複数の前記遠隔通信端末装置間の映像データストリームの中継を行う中継装置と、
を有する多拠点テレビ会議システムにおいて、
前記中継装置は、
前記遠隔通信端末装置から中継装置に前記映像データストリームを受信するレイヤーと、他の前記遠隔通信端末装置に映像データストリームを送信するレイヤーとを比較して、中継装置に受信したレイヤーはあるが、遠隔通信端末装置に送信していないレイヤーはあるか否かを検出する制御部を有することを特徴とする多拠点テレビ会議システム。
請求項５に記載される制御部が、中継装置に受信したレイヤーはあるが、他の前記遠隔通信端末装置に送信していないレイヤーがあると検出した場合には、前記検出の結果を前記遠隔通信端末装置に送信し、遠隔通信端末装置の制御部は、前記検出の結果に基づいて、前記遠隔通信端末装置のデータ圧縮部に対して、送信していないレイヤーの生成を停止するように制御することを特徴とする多拠点テレビ会議システム。