JP2007025375A - 中継装置、通信端末装置、信号復号化装置、信号処理方法、および信号処理プログラム - Google Patents

Abstract

【課題】 従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、復号化音声の大きな劣化を防ぐ多者通話システムを実現することが可能な中継装置、通信端末装置、信号復号化装置、信号処理方法およびプログラムを提供すること。
【解決手段】 多者通話に参加している各通信端末装置から送信され、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を、受信する受信部１１と、受信部１１が各通信端末装置から受信した符号化情報をレイヤ単位で組み合わせるための制御情報を作成する再構成処理部１５と、再構成処理部１５が作成した制御情報に基づいて、受信部１１が各通信端末装置から受信した符号化情報を、スケーラブルにレイヤ単位で組み合わせて統合すると共に、統合した符号化情報を送信する統合送信部１６とを備える。
【選択図】 図２

Description

本発明は、信号を符号化して伝送する通信システムに用いられる中継装置、通信端末装置、信号復号化装置、信号処理方法、および信号処理プログラムに関する。

近年、多地点会議システム等に代表される、３者以上の間で通話を行う多者通話システムが、広く利用されてきている。通常、３者以上の間で通話を行うためには、ＩＳＤＮ等の通信網で行われているデジタル通信のように、各端末から送信された音声に対し端末毎にチャネルを割り当てて１本の回線を介して送信することによって、多者通話を実現するという方法がとられる。

また、別の方法としては、交換機、通信サーバ、電話装置等の通信装置それ自体に多者通話を可能にする機能を持たせる方法がある。具体的には、各交換機等の通信装置において、各端末から送信された信号を復号化し、復号化して得られた各信号を重畳すると共に再度符号化して所定の端末に送信するという方法がとられる。また、電話装置が多者通話機能を有する場合は、他の端末から送信され受信した信号を復号化し、受信した電話装置に入力された音声信号を重畳すると共に再度符号化して交換機に送信するという方法がとられる。上記の多者通話の通信技術は、例えば、特許文献１に記載されている。

また、近年、音声信号、楽音信号の符号化において、符号化情報の一部からでも音声・楽音信号を復号化でき、パケット損失が発生するような状況においても音質劣化を抑制することができるスケーラブル符号化技術が開発されている（例えば、特許文献２参照）。このスケーラブル符号化技術は、符号化情報の一部からでも音声、楽音信号を復号化できるように音声信号、楽音信号を符号化するものであり、パケット損失が発生するような状況においても音質劣化を抑制することができる。具体的には、第１階層で入力信号を符号化して符号化情報を生成し、上位の第（ｉ−１）目の階層（ｉは２以上の整数）で、入力信号と第（ｉ−１）階層の符号化情報に応じて得られる復号化信号との差である残差信号を生成し、さらに上位の第ｉ階層で残差信号に応じて符号化することを繰り返す方法が知られている。
特開２００４−２２２１９４号公報 特開平１０−９７２９５号公報

しかしながら、このような従来の多者通話の機能を有する電話装置では、受信した符号化情報を一旦復号化し、復号化した信号を他の音声信号と重畳し再度符号化する処理を行うため、多大な計算コストを要すると共に、符号化が複数回行われた音声を復号化して得られる音声の品質は、きわめて劣化してしまうという問題があった。参加者数に応じて回線数を増やす方法も考えられるが、参加者数が増えれば必要な回線が増え、通信コストおよび回線使用率が高くなると共に、実現性に問題も生じてくる。

本発明はこのような問題を解決するためになされたもので、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することが可能な中継装置、通信端末装置、信号復号化装置、信号処理方法、および信号処理プログラムを提供するものである。

本発明の中継装置は、多者通話に参加している各通信端末装置から送信され、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を、受信する受信部と、前記受信部が各前記通信端末装置から受信した前記符号化情報を前記レイヤ単位で組み合わせるための制御情報を作成する再構成処理部と、前記再構成処理部が作成した前記制御情報に基づいて、前記受信部が各前記通信端末装置から受信した前記符号化情報を、スケーラブルに前記レイヤ単位で組み合わせて統合すると共に、統合した前記符号化情報を送信する統合送信部とを備えた構成を有している。

この構成により、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することが可能な中継装置を実現することができる。

また、本発明の中継装置は、前記多者通話に参加している前記通信端末装置毎に設定した、過去の送信の伝送ビットレートを含む制御パラメータを有し、前記再構成処理部が、前記制御パラメータに基づいて、各前記通信端末装置に送信する前記符号化情報を組み合わせるための前記制御情報を作成することを特徴とする構成を有している。

この構成により、過去の送信の伝送ビットレートを含む制御パラメータに基づいて、各通信端末装置に送信する符号化情報を組み合わせるための制御情報を作成するため、新たに伝送ビットレートを検出して制御情報を作成する処理の負荷を軽減することが可能な中継装置を実現することができる。

また、本発明の中継装置は、前記再構成処理部が、各前記通信端末装置から送信された各前記符号化情報に基づいて再生される音声の音声レベルと、各前記通信端末装置との通信に用いる回線の回線状況を含む通信状態に関する情報とに基づいて、前記制御パラメータを設定することを特徴とする構成を有している。

この構成により、再生される音声の音声レベルと回線状況を含む通信状態に基づいて制御パラメータを設定するため、受信側で聴き取りやすい音声を再生するレイヤ構成を実現することが可能な中継装置を実現することができる。

また、本発明の中継装置は、新たな通信端末装置を前記多者通話に参加させるとき、または、前記多者通話に参加している前記通信端末装置が前記多者通話をやめるとき、前記再構成処理部が、前記制御パラメータを更新することを特徴とする構成を有している。

この構成により、多者通話の参加数を変化させるときに制御パラメータを更新するため、制御情報を作成する処理の負荷をさらに軽減することが可能な中継装置を実現することができる。

また、本発明の中継装置は、前記再構成処理部が、各前記通信端末装置から受信した前記符号化情報のうちの、基本レイヤから所定レイヤ分の前記符号化情報を、前記制御パラメータに基づいて選択して組み合わせることを特徴とする構成を有している。

この構成により、制御パラメータに基づいて符号化情報を選択して組み合わせるため、処理の負荷を軽減することが可能な中継装置を実現することができる。

また、本発明の中継装置は、前記再構成処理部が、前記多者通話に参加している各前記通信端末装置が各時間帯で送信した前記符号化情報のうち、同一の前記時間帯に送信された前記符号化情報を受信してから次の前記時間帯に送信された前記符号化情報を受信することを特徴とする構成を有している。

この構成により、同一の時間帯に送信された符号化情報を受信してから次の時間帯に送信された符号化情報を受信するため、処理の明確化を図ることが可能な中継装置を実現することができる。

また、本発明の中継装置は、新たな通信端末装置を前記多者通話に参加させるとき、前記新たな通信端末装置を前記多者通話に参加させようとする前記通信端末装置と前記新たな通信端末装置とを、前記多者通話を行っている回線とは別の回線で接続することを特徴とする構成を有している。

この構成により、多者通話を行っている回線とは別の回線で割り込みに係る２つの通信端末装置を接続するため、多者通話を中断させることなく割り込みに関する処理を行うことが可能な中継装置を実現することができる。

また、本発明の中継装置は、前記多者通話に参加している前記通信端末装置と新たな通信端末装置とを通話させるとき、前記多者通話に参加している前記通信端末装置と前記新たな通信端末装置とを、前記多者通話を行っている回線とは別の回線で接続することを特徴とする構成を有している。

この構成により、多者通話を行っている回線とは別の回線で割り込みに係る２つの通信端末装置を接続するため、多者通話を中断させることなく割り込みに関する処理を行うことが可能な中継装置を実現することができる。

また、本発明の通信端末装置は、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を受信する受信部と、前記受信部が受信した前記符号化情報に含まれる制御情報に基づいて、スケーラブル復号化によって音声信号を復号化する復号化部と、前記受信部が受信した前記符号化情報に含まれる前記制御情報に基づいて、スケーラブル符号化によって音声信号を符号化する符号化部と、前記符号化部が符号化して得られた前記符号化情報を送信する送信部とを備える構成を有している。

この構成により、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することが可能な通信端末装置を実現することができる。

また、本発明の信号復号化装置は、スケーラブル符号化によって複数のレイヤで構成された符号化情報から情報源符号および制御情報を分離する符号化情報分離部と、前記制御情報に基づいて前記符号化情報をレイヤ毎に復号化する復号化部とを備えることを特徴とする構成を有している。

この構成により、制御情報に基づいて符号化情報をレイヤ毎に復号化するため、異なる通信端末装置から送信され異なるレイヤに統合された符号化情報を復号化することが可能な信号復号化装置を実現することができる。

また、本発明の信号復号化装置は、前記復号化部が、基本レイヤから所定レイヤ分の、レイヤ毎に符号化された前記符号化情報を復号化することを特徴とする構成を有している。

この構成により、レイヤ毎に符号化された前記符号化情報を基本レイヤから復号化するため、伝送ビットレートが低下したときでも適切に復号化することが可能な信号復号化装置を実現することができる。

また、本発明の信号処理方法は、多者通話に参加している各通信端末装置から送信され、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を受信機が受信する受信ステップと、前記受信ステップで各前記通信端末装置から受信した前記符号化情報を、レイヤ単位で組み合わせるための制御情報を、再構成処理部が作成する再構成ステップと、前記再構成処理部が作成した前記制御情報に基づいて、各前記通信端末装置から受信した前記符号化情報を、統合送信部がスケーラブルにレイヤ単位で組み合わせて統合する統合ステップと、前記統合ステップで統合した前記符号化情報を、前記統合送信部が送信する送信ステップとを備えることを特徴とする構成を有している。

この構成により、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することが可能な信号処理方法を実現することができる。

また、本発明の信号処理プログラムは、コンピュータに、多者通話に参加している各通信端末装置から送信され、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を受信する受信ステップと、前記受信ステップで各前記通信端末装置から受信した前記符号化情報を、レイヤ単位で組み合わせるための制御情報を作成する再構成ステップと、前記再構成ステップで作成した前記制御情報に基づいて、前記受信ステップで各前記通信端末装置から受信した前記符号化情報をスケーラブルにレイヤ単位で組み合わせて統合する統合ステップと、前記統合ステップで統合した前記符号化情報を、送信する送信ステップとを実行させることを特徴とする構成を有している。

この構成により、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することが可能な信号処理プログラムを実現することができる。

本発明は、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することができるという効果を有する中継装置、通信端末装置、信号復号化装置、信号処理方法、および信号処理プログラムを提供することができる。

以下、本発明の実施の形態について、図面を用いて説明する。

（第１の実施の形態）
図１は、本発明の実施の形態に係る中継装置および通信端末装置を有する通信システムのブロック構成を示す図である。図１において、通信システムは、多者通話可能な通信端末装置１Ａ〜１Ｎ等、中継装置１０、および通信端末装置１Ａ〜１Ｎ等と中継装置１０とを接続する伝送路２Ａ〜２Ｎを備え、通信端末装置１Ａ〜１Ｎは、中継装置１０を介して相互に多者通話可能な状態となっている。

以下、多者通話機能を実現するという観点から、上記の通信システムを構成する中継装置１０について説明する。二者間通話機能に関しては、従来と同様であるため、その説明を省略する。また、符号化および復号化は、ＣＥＬＰ（Ｃｏｄｅ−Ｅｘｃｉｔｅｄ Ｌｉｎｅａｒ Ｐｒｅｄｉｃｔｉｏｎ）方法を用いて、階層的に行われることとする。

ここで、各階層（以下、「レイヤ」という。）の下の方から、それぞれ、「基本レイヤ」、「第１の拡張レイヤ」、「第２の拡張レイヤ」、「第３の拡張レイヤ」等といい、基本レイヤ以外のレイヤを「拡張レイヤ」という。このように階層化することによって、通信速度を表すビットレートが充分確保できるときは、全てのレイヤのデータを送信し、ビットレートが充分確保できなくなったとき、ビットレートに応じて下位のレイヤから所定のレイヤまでのデータを送信し、スケーラビリティを確保するものである。

図２は、本発明の第１の実施の形態に係る中継装置１０のブロック構成を示す図である。中継装置１０は、図２に示すように、通信端末装置１Ａ〜１Ｎ等から送信された信号を受信する受信部１１と、受信した信号中に割り込み信号が含まれているか否かを判定する割込判定部１２と、上記の割り込み信号に応じて割り込み処理を行う第１の割込パターン処理部２０、第２の割込パターン処理部３０、および第３の割込パターン処理部４０と、受信した信号中の符号化情報（以下、「受信符号化情報」という。）の所定の部分を逐次分離する符号化情報分離部１３と、符号化情報分離部１３が逐次分離した情報を管理する符号化情報管理部１４と、通信端末装置１Ａ〜１Ｎ等に送信する符号化情報を再構成する再構成処理部１５と、再構成した符号化情報等を統合する符号化情報統合部１６ａと、統合化した符号化情報を各通信端末装置１Ａ〜１Ｎ等に送信する送信部１６ｂと、上記の割り込み信号に応じて接続が切り替わる制御スイッチ１８ａ、１８ｂと、回線接続および回線切断を行う通信処理部１９とを備える。ここで、符号化情報統合部１６ａと送信する送信部１６ｂとを合わせたものを「統合送信部１６」という。

受信部１１は、各伝送路２Ａ〜２Ｎ等を介して各通信端末装置１Ａ〜１Ｎ等から送信された信号を受信し、受信した信号を割込判定部１２に出力するようになっている。

割込判定部１２は、受信部１１が出力した信号が入力され、入力された信号中に多者通話の参加数を増減させるように通信端末装置の接続を変更するための割り込み信号が含まれているか否かを判定し、割り込み信号が含まれると判定したとき、割り込み信号のパターンを判断し、割り込み信号のパターンに応じて割り込み信号を割込パターン処理部２０、３０、４０に出力し、割り込み信号が含まれないと判定したとき、入力された信号を符号化情報分離部１３に出力するようになっている。

以下、特に断る場合を除き、多者通話は、通信端末装置１Ａ〜１Ｎ間で行われているものとする。ここで、上記の割り込み信号は、以下の３つのパターンを有する。まず、第１のパターンの割り込み信号は、通信端末装置１Ａ〜１Ｎが多者通話中に通信端末装置１Ａ〜１Ｎ以外の通信端末装置１Ｚを多者通話に参加させるときに、通信端末装置１Ａ〜１Ｎのいずれかから送信される参加要求信号である。第２のパターンの割り込み信号は、上記のように多者通話を行っているときに、通信端末装置１Ａ〜１Ｎ以外の通信端末装置１Ｚが、多者通話に参加している通信端末装置１Ａ〜１Ｎのいずれか（以下、通信端末装置１Ａとする。）と通信することを要求する参加要求信号である。第３のパターンの割り込み信号は、上記のように多者通話を行っているときに、多者通話に参加しているいずれかの通信端末装置１Ａ〜１Ｎ（以下、通信端末装置１Ｎとする。）が、多者通話の終了を要求するときに送信する回線切断要求信号である。図２に、割込判定部１２が、制御スイッチ１８ａ、１８ｂをそれぞれ端子Ａ、Ａ'側に接続し、第１のパターンの割り込み信号を第１の割込パターン処理部２０に出力している様子を示す。

符号化情報分離部１３は、割込判定部１２から出力された信号が入力され、入力された信号に含まれる受信符号化情報を情報源符号の成分（以下、「情報源符号成分」という。）と制御情報の成分（以下、「制御情報成分」という。）とに逐次分離し、逐次分離した情報源符号成分と制御情報成分を符号化情報管理部１４に出力する。

ここで、情報源符号とは、各通信端末装置１Ａ〜１Ｎから送信された通話内容等の符号化された音声情報をいう。また、制御情報とは、各通信端末装置１Ａ〜１Ｎが送信する際の伝送ビットレートの情報（以下、「端末送信モード情報」という。）を含む、情報源符号に関する情報、誤り訂正情報、誤り検出情報等をいう。

符号化情報管理部１４は、符号化情報分離部１３が出力した情報源符号成分と制御情報成分が入力され、多者通話に参加している各通信端末装置１Ａ〜１Ｎから各時間帯で送信された上記の情報源符号成分と制御情報成分を逐次蓄積して管理し、各通信端末装置１Ａ〜１Ｎから同一時間帯に送信された上記の情報源符号と制御情報が得られたとき、蓄積して得られた情報源符号と制御情報を再構成処理部１５に出力するようになっている。

再構成処理部１５は、符号化情報管理部１４が出力した上記の同一時間帯の情報源符号と制御情報、および、割込パターン処理部２０、３０、４０からの出力（以下、「割込処理出力」という。）が入力され、中継装置１０に設定されている制御パラメータに基づいて、各通信端末装置１Ａ〜１Ｎ等に送信する情報源符号および制御情報を再構成し、再構成して得られた情報（情報源符号および制御情報）を符号化情報統合部１６ａに出力する。ここで、制御パラメータは、通信端末装置１Ａ〜１Ｎ等毎に設定された各通信端末装置１Ａ〜１Ｎ等に送信する際の伝送ビットレートを含む所定のパラメータであり、中継装置１０内に設定される（再構成処理部１５に設定されるものとする。）。また、割込パターン処理部２０、３０、４０からの割込処理出力が再構成処理部１５に入力されたとき、上記の制御パラメータは、割込処理出力に応じて更新される。

以下に、再構成処理部１５が、制御パラメータに基づいて各通信端末装置１Ａ〜１Ｎ等に送信する情報源符号を再構成する処理について詳細に説明する。まず、再構成処理部１５は、再構成処理部１５内に設定されている制御パラメータを参照し、各通信端末装置１Ａ〜１Ｎから送信された情報源符号から必要なレイヤ分の情報源符号を抜き出す。このとき、各通信端末装置１Ａ〜１Ｎに対して設定された制御パラメータのうちの伝送ビットレートが、受信符号化情報中の端末送信モード情報が示す伝送ビットレートよりも大きいときは、受信の伝送ビットレートに応じたレイヤ分の情報源符号を抜き出す。

レイヤ数が４で、伝送ビットレートがＢＲ１、ＢＲ２、ＢＲ３、およびＢＲ４（ＢＲ１＜ＢＲ２＜ＢＲ３＜ＢＲ４）をとりうる通信形態を例にとり説明する。再構成処理部１５は、例えば、通信端末装置１Ａに対して設定された伝送ビットレートがＢＲ２であり、通信端末装置１Ａから受信した受信符号化情報中の端末送信モード情報が示す伝送ビットレートがＢＲ３であるとき、再構成処理部１５は、低い方の伝送ビットレートに対応するように、基本レイヤと第１拡張レイヤの情報源符号（以下、それぞれ、「基本レイヤ情報源符号」、「第１拡張レイヤ情報源符号」という。）を選択し抜き出す。

逆に、通信端末装置１Ａに対して設定された伝送ビットレートがＢＲ３であり、通信端末装置１Ａから受信した受信符号化情報中の端末送信モード情報が示す伝送ビットレートがＢＲ２であるとき、再構成処理部１５は、上記と同様に、低い方の伝送ビットレートに対応するように、基本レイヤ情報源符号と第１拡張レイヤ情報源符号を選択し抜き出す。

再構成処理部１５は、通信端末装置１Ａ〜１Ｎ毎に受信符号化情報から各レイヤの情報源符号を抜き出したとき、抜き出した情報源符号と制御情報とを再構成し、再構成して得られた情報を符号化情報統合部１６ａに出力する。具体的には、多者通話に参加中のある通信端末装置（通信端末装置１Ａとする）に対して伝送する情報源符号は、全通信端末装置１Ａ〜１Ｎからこの通信端末装置１Ａを除いた通信端末装置１Ｂ〜１Ｎから出力された各情報源符号から、上記の処理で抜き出した各レイヤの情報源符号とする。また、各通信端末装置１Ａ〜１Ｎに送信する制御情報は、以下に示す中継装置送信モード情報および情報源構成情報から成る。

まず、中継装置送信モード情報とは、各通信端末装置１Ａ〜１Ｎへの送信の際の伝送ビットレートを指示する情報であり、予め定められた複数の伝送ビットレートの中から１つ選択される。なお、本発明の第１の実施の形態においては、中継装置送信モード情報は、予め定められた４種類の伝送ビットレートＢＲ１、ＢＲ２、ＢＲ３、ＢＲ４（ＢＲ１＜ＢＲ２＜ＢＲ３＜ＢＲ４）の値を取り得るものとする。

また、情報源構成情報とは、各通信端末装置１Ａ〜１Ｎに送信する情報源符号が、どの通信端末装置１Ａ〜１Ｎから受信した情報源符号の、どのレイヤの情報源符号で構成されているかを示す情報である。例えば、通信端末装置１Ａに送信する情報源符号が、通信端末装置１Ｂから受信した基本レイヤ情報源符号と第１拡張レイヤ情報源符号、および、通信端末装置１Ｃから受信した第２拡張レイヤ情報源符号と第３拡張レイヤ情報源符号で構成されている場合、情報源構成情報は「Ｂ：Ｌ２（ｂａｓｅ，ｅｎｈ１），Ｃ：Ｌ２（ｅｎｈ２，ｅｎｈ３）」のように構成される。ここで、通信端末装置ＩＤ以下のＬ２とは、このＩＤの通信端末装置から受信し、再編成した情報源符号が占めるレイヤ数（占有レイヤ数）を意味し、占有レイヤ数が１つの場合はＬ１、３つの場合はＬ３となる。また、占有レイヤ数以下の括弧内は、各情報源符号が送信の際にどのレイヤを占めるかを示す。ここで、ｂａｓｅ、ｅｎｈ１、ｅｎｈ２、ｅｎｈ３はそれぞれ基本レイヤ情報源符号、第１拡張レイヤ情報源符号、第２拡張レイヤ情報源符号、第３拡張レイヤ情報源符号を意味する。

次に、第１の割込パターン処理部２０、第２の割込パターン処理部３０および第３の割込パターン処理部４０からの割込処理出力が再構成処理部１５に入力されたときに、再構成処理部１５が行う制御パラメータの更新処理について説明する。

まず、割込パターン処理部２０、３０、４０に割り込み信号が入力されたとき、割り込み信号が入力された割込パターン処理部２０、３０、４０から多者通話に参加する通信端末装置を示す情報（以下、「端末集合情報」という。）を含む割込処理出力が入力される。この端末集合情報は、上記の割込処理出力があった時点で、多者通話に参加する通信端末装置を示す情報である。再構成処理部１５は、得られた端末集合情報に基づき、各通信端末装置に送信する符号化情報の各レイヤをどの通信端末装置から受信した情報源符号に割り当てるかを決定する。割込処理出力には、例えば、割込パターン処理部２０、３０、４０に入力された割り込み信号が含まれるのでもよい。この場合、再構成処理部１５は、割り込み信号が割込パターン処理部２０、３０、４０から再構成処理部１５に入力されたとき、設定されている現在の制御パラメータを維持する。

具体的には、例えば４層のスケーラブル通信において、通信端末装置１Ａ、１Ｂ、１Ｃの３者間で多者通話が行われているとき、各通信端末装置１Ａ、１Ｂ、１Ｃには、残りの２つの通信端末装置から送られる情報源符号をどのように４層に割り当てるかを決定する。割り当て方法として、例えば、残りの２つの通信端末装置のそれぞれに対して２層ずつ割り当てるのでもよい。この場合、制御パラメータは「Ａ：Ｌ２，Ｂ：Ｌ２，Ｃ：Ｌ２」と更新される。また、他の割り当て方法として、例えば、各通信端末装置から送信された各符号化情報に基づいて再生される音声の音声レベルと、各通信端末装置との通信に用いる回線の回線状況を含む通信状態に関する情報とに基づいて、レイヤを非均等に割り当てるのでもよい。再構成処理部１５は、各通信端末装置に送信する情報源符号の割り当て方を決定した後、各通信端末装置に割り当てたレイヤ数を、新たな制御パラメータとして更新する。

符号化情報統合部１６ａは、再構成処理部１５が出力した、再構成された情報源符号および制御情報が入力され、入力された情報源符号および制御情報を、送信先の通信端末装置１Ａ〜１Ｎ等毎に統合して送信部１６ｂに出力するようになっている。

送信部１６ｂは、符号化情報統合部１６ａが通信端末装置１Ａ〜１Ｎ等毎に統合して出力した情報源符号および制御情報を各通信端末装置１Ａ〜１Ｎ等に送信する。

通信処理部１９は、割込パターン処理部２０、３０、４０から出力された信号に応じて回線接続および回線切断を行う。図２において、実線の矢印は信号が流れる方向を示し、破線の矢印は、制御の方向を示す。

図３は、本発明の第１の実施の形態に係る第１の割込パターン処理部２０のブロック構成を示す図である。第１の割込パターン処理部２０は、人数判定部２１、第１パターン切替処理部２２、接続準備部２３、許可判定部２４、切断準備部２５、第３パターン切替処理部２６、第２パターン切替処理部２７および制御スイッチ２０１〜２０３を有する。

まず、人数判定部２１は、割込判定部１２が出力した第１のパターンの割り込み信号が入力され、多者通話に現在参加している通信端末装置の数が多者通話可能な通信端末装置の最大数（以下、「最大端末装置数」という。）より小さいか否かを判断し、多者通話に参加している通信端末装置の数が最大端末装置数より小さいときは、制御スイッチ２０１を端子Ｐ１側に接続し、第１パターン切替処理部２２に割り込み信号および多者通話に参加している通信端末装置の数を出力する。ここで、上記の最大端末装置数を、例えば、スケーラブル符号化のレイヤ数以下の所定数とすることができる。また、人数判定部２１は、現在、多者通話に参加している通信端末装置の数が最大端末装置数より少なくないときは、制御スイッチ２０１を端子Ｑ１側に接続し、再構成処理部１５に割り込み信号および多者通話に参加している通信端末装置の数を出力する。

第１パターン切替処理部２２は、制御スイッチ２０１が端子Ｐ１側に接続されているとき、人数判定部２１が出力した割り込み信号および多者通話に参加している通信端末装置の数が入力され、第１のパターンの割り込み信号に含まれている、通信端末装置１Ｚを多者通話に参加させる参加要求信号を送信した通信端末装置（以下、通信端末装置１Ａとする。）を、多者通話に参加している通信端末装置１Ａ〜１Ｎから除いた残りの通信端末装置の端末集合情報（１Ｂ〜１Ｎ）を再構成処理部１５に出力する。また、第１パターン切替処理部２２は、制御スイッチ２０１が端子Ｐ１側に接続されているとき、第１のパターンの割り込み信号を接続準備部２３に出力する。また、第１パターン切替処理部２２は、制御スイッチ２０１が端子Ｑ１側に接続されているとき、何も動作しない。

接続準備部２３は、第１パターン切替処理部２２が出力した第１のパターンの割り込み信号が入力され、第１のパターンの割り込み信号に含まれる、参加要求信号を送信した通信端末装置１Ａおよび参加させる通信端末装置１Ｚを表す情報を通信処理部１９に出力する。また、接続準備部２３は、制御スイッチ２０２に第１のパターンの割り込み信号を出力する。

図２に示す通信処理部１９は、図３に示す接続準備部２３が出力した、参加要求信号を送信した通信端末装置１Ａおよび参加させる通信端末装置１Ｚを表す情報が入力され、通信端末装置１Ａと通信端末装置１Ｚとを、多者通話に用いている回線とは別の回線で接続する。次に、通信処理部１９は、上記の２つの通信端末装置１Ａ、１Ｚ間の接続が確立したとき、制御スイッチ２０２を端子Ｙ１側に接続し、接続が確立しないとき、制御スイッチ２０２を端子Ｎ１側に接続するように制御する。また、通信処理部１９は、上記の別回線で２つの通信端末装置１Ａ、１Ｚが通話中に、通信端末装置１Ｚからの送信された信号であって多者通話に参加するか否かの参加可否信号を受信したとき、受信した参加可否信号を許可判定部２４に出力する。以下、多者通話に参加することを示す信号を「参加承認信号」といい、参加しないことを示す信号を「参加否認信号」という。また、通信処理部１９は、参加可否信号を許可判定部２４に出力したとき、切断準備部２５からの制御により、別回線で行っている通話の切断（終了）処理を行う。

許可判定部２４は、制御スイッチ２０２が端子Ｙ１側に接続されているとき、接続準備部２３から出力された第１のパターンの割り込み信号、および通信処理部１９から出力された参加可否信号が入力される。許可判定部２４は、通信処理部１９から入力された参加可否信号が参加承認信号であるとき、制御スイッチ２０３を端子Ａ１側に接続し、第１のパターンの割り込み信号を切断準備部２５に出力する。また、許可判定部２４は、入力された参加可否信号が参加否認信号であるとき、制御スイッチ２０３を端子Ｄ１側に接続し、第１のパターンの割り込み信号を切断準備部２５に出力する。また、許可判定部２４は、制御スイッチ２０２が端子Ｎ１側に接続されているときは、何も動作しない。

第２パターン切替処理部２７は、制御スイッチ２０２が端子Ｎ１側に接続されているとき、接続準備部２３が出力した第１のパターンの割り込み信号が入力され、多者通話に参加している通信端末装置１Ａから送信された第１のパターンの割り込み信号に含まれている、通信端末装置１Ａを示す情報を現在の端末集合情報（１Ｂ〜１Ｎ）に加えた端末集合情報（１Ａ〜１Ｎ）を再構成処理部１５に出力する。また、第２パターン切替処理部２７は、制御スイッチ２０３が端子Ｄ１側に接続されているとき、切断準備部２５が出力した第１のパターンの割り込み信号が入力され、通信端末装置１Ａから送信された第１のパターンの割り込み信号に含まれている、通信端末装置１Ａを示す情報を現在の端末集合情報（１Ｂ〜１Ｎ）に加えた端末集合情報（１Ａ〜１Ｎ）を再構成処理部１５に出力する。また、第２パターン切替処理部２７は、制御スイッチ２０２が端子Ｎ１側に接続され制御スイッチ２０３が端子Ｄ１側に接続されているときは、何も動作しない。

切断準備部２５は、許可判定部２４が出力した第１のパターンの割り込み信号が入力され、制御スイッチ２０３が端子Ｄ１側に接続されているとき、第２パターン切替処理部２７に第１のパターンの割り込み信号を出力する。また、切断準備部２５は、制御スイッチ２０３が端子Ａ１側に接続されているとき、許可判定部２４から入力される第１のパターンの割り込み信号を第３パターン切替処理部２６に出力する。また、切断準備部２５は、通信処理部１９に現在別回線で行っている通話の切断（終了）処理を行わせるように制御する。

第３パターン切替処理部２６は、制御スイッチ２０３が端子Ａ１側に接続されているとき、切断準備部２５が出力した第１のパターンの割り込み信号が入力され、通信端末装置１Ａから送信された第１のパターンの割り込み信号に含まれている、通信端末装置１Ａを示す情報と通信端末装置１Ｚを示す情報を現在の端末集合情報（１Ｂ〜１Ｎ）に加えた端末集合情報（１Ａ〜１Ｎ、１Ｚ）を再構成処理部１５に出力する。また、第３パターン切替処理部２６は、制御スイッチ２０３が端子Ｄ１側に接続されているとき、何も動作しない。

図４は、本発明の第１の実施の形態に係る第２の割込パターン処理部３０のブロック構成を示す図である。第２の割込パターン処理部３０は、接続準備部３１、第１パターン切替処理部３２、許可判定部３３、人数判定部３４、切断準備部３５、３７、第３パターン切替処理部３６、第２パターン切替処理部３８および制御スイッチ３９ａ〜３９ｃを有する。

まず、接続準備部３１は、割込判定部１２が出力した第２のパターンの割り込み信号が入力され、第２のパターンの割り込み信号に含まれる、通信端末装置１Ｚが回線接続要求を発信して接続しようとする多者通話中の通信端末装置１Ａ、および通信端末装置１Ｚを表す情報を通信処理部１９に出力する。また、接続準備部３１は、制御スイッチ３９ａに第２のパターンの割り込み信号を出力する。

図２に示す通信処理部１９は、図４に示す接続準備部３１が出力した、通信端末装置１Ａ、１Ｚを表す情報が入力され、通信端末装置１Ａと通信端末装置１Ｚとを、多者通話に用いている回線とは別の回線で接続する。次に、通信処理部１９は、上記の２つの通信端末装置１Ａ、１Ｚ間の接続が確立したとき、制御スイッチ３９ａを端子Ｙ２側に接続し、接続が確立しないとき、制御スイッチ３９ａを端子Ｎ２側に接続するように制御する。

また、図２に示す通信処理部１９は、上記の別回線で２つの通信端末装置１Ａ、１Ｚが通話中に、通信端末装置１Ａからの参加承認信号または参加否認信号が入力されたとき、参加承認信号または参加否認信号を許可判定部３３に出力する。また、通信処理部１９は、参加承認信号または参加否認信号を許可判定部３３に出力したとき、切断準備部３５、３７からの制御により、別回線で行っている通話の切断（終了）処理を行う。ただし、ここでは、通信処理部１９は、別回線で通信を行っている２つの通信端末装置１Ａ、１Ｚからの切断要求信号があったときも、回線の切断（終了）処理を行うものとする。

図３に示す第１パターン切替処理部３２は、制御スイッチ３９ａが端子Ｙ２側に接続されているとき、接続準備部３１が出力した第２のパターンの割り込み信号が入力され、第２のパターンの割り込み信号に含まれる通信端末装置１Ａを現在の端末集合（１Ａ〜１Ｎ）から除いた端末集合情報（１Ｂ〜１Ｎ）を再構成処理部１５に出力する。また、第１パターン切替処理部３２は、制御スイッチ３９ａが端子Ｙ２側に接続されているとき、第２のパターンの割り込み信号を許可判定部３３に出力する。また、第１パターン切替処理部３２は、制御スイッチ３９ａが端子Ｎ２側に接続されているとき、何も動作しない。

許可判定部３３は、第１パターン切替処理部３２が出力する第２のパターンの割り込み信号、および、通信処理部１９が出力する参加承認信号または参加否認信号が入力される。許可判定部３３は、通信処理部１９から参加承認信号が入力されたとき、制御スイッチ３９ｂを端子Ａ２側に接続し、第２のパターンの割り込み信号を人数判定部３４に出力する。また、許可判定部３３は、通信処理部１９から参加否認信号が入力されたとき、制御スイッチ３９ｂを端子Ｄ２側に接続し、第２のパターンの割り込み信号を切断準備部３７に出力する。

人数判定部３４は、制御スイッチ３９ｂが端子Ａ２側に接続されているとき、許可判定部３３から第２のパターンの割り込み信号が入力される。また、人数判定部３４は、多者通話に現在参加している通信端末装置の数と多者通話が可能な最大端末装置数とを比較し、現在、多者通話に参加している通信端末装置の数が最大端末装置数より小さいときは、制御スイッチ３９ｃを端子Ｐ２側に接続し、切断準備部３５に第２のパターンの割り込み信号を出力する。ここで、上記の最大端末装置数を、例えば、スケーラブル符号化のレイヤ数以下の所定数とすることができる。また、人数判定部３４は、現在、多者通話に参加している通信端末装置の数が最大端末装置数より少なくないときは、制御スイッチ３９ｃを端子Ｑ２側に接続し、切断準備部３５に第２のパターンの割り込み信号を出力する。

切断準備部３７は、制御スイッチ３９ｂが端子Ｄ２側に接続されているとき、許可判定部３３が出力した第２のパターンの割り込み信号が入力され、入力された第２のパターンの割り込み信号を第２パターン切替処理部３８に出力する。また、切断準備部３７は、制御スイッチ３９ｂが端子Ｄ２側に接続されているとき、通信処理部１９に現在別回線で行っている通話の切断（終了）処理を行わせるように制御する。また、切断準備部３７は、制御スイッチ３９ｂが端子Ａ２側に接続されているとき、何も動作しない。

切断準備部３５は、人数判定部３４が出力した第２のパターンの割り込み信号が入力され、制御スイッチ３９ｃが端子Ｑ２側に接続されているとき、入力された第２のパターンの割り込み信号を第２パターン切替処理部３８に出力し、制御スイッチ３９ｃが端子Ｐ２側に接続されているとき、入力された第２のパターンの割り込み信号を第３パターン切替処理部３６に出力する。また、切断準備部３５は、通信処理部１９に現在別回線で行っている通話の切断（終了）処理を行わせるように制御する。

第２パターン切替処理部３８は、制御スイッチ３９ｂが端子Ｄ２側に接続されているとき、切断準備部３７が出力した第２のパターンの割り込み信号が入力され、多者通話に参加している通信端末装置１Ｚから送信された第２のパターンの割り込み信号に含まれている、通信端末装置１Ａを示す情報を現在の端末集合情報（１Ｂ〜１Ｎ）に加えた端末集合情報（１Ａ〜１Ｎ）を再構成処理部１５に出力する。また、第２パターン切替処理部３８は、制御スイッチ３９ｃが端子Ｑ２側に接続されているとき、切断準備部３５が出力した第２のパターンの割り込み信号が入力され、通信端末装置１Ａから送信された第１のパターンの割り込み信号に含まれている、通信端末装置１Ａを示す情報を現在の端末集合情報（１Ｂ〜１Ｎ）に加えた端末集合情報（１Ａ〜１Ｎ）を再構成処理部１５に出力する。また、第２パターン切替処理部３８は、制御スイッチ３９ｂが端子Ｄ２側に接続され制御スイッチ３９ｃが端子Ｑ２側に接続されているときは、何も動作しない。

第３パターン切替処理部３６は、制御スイッチ３９ｃが端子Ｐ２側に接続されているとき、切断準備部３５が出力した第２のパターンの割り込み信号が入力され、第２のパターンの割り込み信号に含まれている通信端末装置１Ａを示す情報、および通信端末装置１Ｚを示す情報を現在の端末集合情報（１Ｂ〜１Ｎ）に加えた端末集合情報（１Ａ〜１Ｎ、１Ｚ）を再構成処理部１５に出力する。また、第３パターン切替処理部３６は、制御スイッチ３９ｂが端子Ｄ２側に接続されているときは、何も動作しない。

図５は、本発明の第１の実施の形態に係る第３の割込パターン処理部４０のブロック構成を示す図である。第３の割込パターン処理部４０は、人数判定部４１、切断準備部４２、第４パターン切替処理部４３および制御スイッチ４４を有する。

人数判定部４１は、割込判定部１２が出力した第３のパターンの割り込み信号が入力される。また、人数判定部４１は、多者通話に現在参加している通信端末装置の数が２以下か否かを判断し、２以下でないと判断したときは、制御スイッチ４４を端子Ｐ３側に接続し、切断準備部４２に第３のパターンの割り込み信号を出力する。また、人数判定部４１は、現在、多者通話に参加している通信端末装置の数が２以下と判断したときは、制御スイッチ４４を端子Ｑ３側に接続し、通信処理部１９に第３のパターンの割り込み信号を出力する。

切断準備部４２は、人数判定部４１が上記で２以下でないと判断したとき、第３のパターンの割り込み信号が入力され、入力された第３のパターンの割り込み信号を通信処理部１９に送信し、第３のパターンの割り込み信号で特定される通信端末装置１Ｎの切断を要求する。切断準備部４２は、また、入力された第３のパターンの割り込み信号を第４パターン切替処理部４３に出力する。人数判定部４１が上記で２以下であると判断したとき、切断準備部４２は、上記の処理を行わない。

第４パターン切替処理部４３は、切断準備部４２から第３のパターンの割り込み信号が入力されると、第３のパターンの割り込み信号が含む通信端末装置１Ｎを示す情報を端末集合情報（１Ａ〜１Ｎ）から除いた端末集合情報（１Ａ〜１Ｍ）を再構成処理部１５に出力する。人数判定部４１が上記で２以下であると判断したとき、第４パターン切替処理部４３は、上記の処理を行わない。

図２に示す通信処理部１９は、図５に示す人数判定部４１が出力した第３のパターンの割り込み信号が入力されたとき、通話の終了処理を行う。通話の終了処理は、２者間で行われる通常の通話の処理と同様に行うことができるため、その説明を省略する。

図６は、本発明の第１の実施の形態に係る中継装置１０の動作を説明するためのフローチャートである。

まず、中継装置１０の受信部１１は、各通信端末装置１Ａ〜１Ｎ等からパケットとして送信された信号を受信し、受信した信号を割込判定部１２に出力する（Ｓ１）。

次に、中継装置１０の割込判定部１２は、ステップＳ１で受信した各通信端末装置からの信号中に多者通話の参加数を増減させるように通信端末装置の接続を変更するための割り込み信号が含まれているか否かを判定し（Ｓ２）、割り込み信号が含まれると判定したとき、処理はステップＳ８に移り、割り込み信号が含まれないと判定したとき、符号化情報を符号化情報分離部１３に出力し、処理はステップＳ３に進む。ここで、上記のステップＳ２で割り込み信号が含まれると判断したときでも、割り込み信号が含まれない他の受信信号については、処理はステップＳ３に進む。

ステップＳ２で割り込み信号が含まれないと判定したとき、中継装置１０の符号化情報分離部１３は、割込判定部１２から出力された受信符号化情報を含む信号が入力され、受信符号化情報を情報源符号成分と制御情報成分とに逐次分離し、逐次分離した情報源符号成分と制御情報成分を符号化情報管理部１４に出力する（Ｓ３）。

ステップＳ３で情報源符号成分と制御情報成分を符号化情報管理部１４に出力したとき、中継装置１０の符号化情報管理部１４は、情報源符号と制御情報が得られるまで情報源符号成分と制御情報成分を逐次蓄積する（Ｓ４）。

次に、中継装置１０の符号化情報管理部１４は、ステップＳ４で情報源符号成分と制御情報成分を逐次蓄積して情報源符号と制御情報が得られたか否かを判断し（Ｓ５）、情報源符号と制御情報が得られていないと判断したとき、上記のステップＳ１以降の処理を繰り返し、情報源符号と制御情報が得られたと判断したとき、処理はステップＳ６に進む。

ステップＳ２で割り込み信号を含むと判定したとき、中継装置１０の割込判定部１２は、割り込み信号のパターンを判断し、割り込み信号のパターンに応じて割り込み信号を割込パターン処理部２０、３０、４０に出力する（Ｓ８）。

ステップＳ８で割り込み信号のパターンが第１のパターンと判断したとき、割込判定部１２が第１のパターンの割り込み信号を第１の割込パターン処理部２０に出力し、第１の割込パターン処理部２０は、後述する第１の割込パターン処理を行い、得られた割込処理出力を再構成処理部１５に出力する（Ｓ９１）。

ステップＳ８で割り込み信号のパターンが第２のパターンと判断したとき、割込判定部１２が第２のパターンの割り込み信号を第２の割込パターン処理部３０に出力し、第２の割込パターン処理部３０は、後述する第２の割込パターン処理を行い、得られた割込処理出力を再構成処理部１５に出力する（Ｓ９２）。

ステップＳ８で割り込み信号のパターンが第３のパターンと判断したとき、割込判定部１２が第３のパターンの割り込み信号を第３の割込パターン処理部４０に出力し、第３の割込パターン処理部４０は、後述する第３の割込パターン処理を行い、得られた割込処理出力を再構成処理部１５に出力する（Ｓ９３）。

ステップＳ５で情報源符号と制御情報が得られたと判断したとき、中継装置１０の再構成処理部１５は、制御パラメータに基づいて、各通信端末装置１Ａ〜１Ｎ等に送信する情報源符号を再構成すると共に制御情報を生成し、符号化情報統合部１６ａに出力する（Ｓ６）。

ステップＳ６で再構成した情報源符号と生成された制御情報が符号化情報統合部１６ａに出力されたとき、中継装置１０の符号化情報統合部１６ａは、再構成した情報源符号と生成された制御情報とを各通信端末装置１Ａ〜１Ｎ等に送信する（Ｓ７）。

図７は、本発明の第１の実施の形態に係る第１の割込パターン処理を説明するためのフローチャートである。

まず、第１の割込パターン処理部２０の人数判定部２１は、現在、多者通話に参加している通信端末装置１Ａ〜１Ｎの数が、多者通話が可能な最大端末装置数より少ないか否かを判断し（Ｓ１０１）、最大端末装置数より少ないと判断したとき、処理はステップＳ１０２に進み、最大端末装置数より少なくないと判断したとき、処理はステップＳ１１０に移る。

ステップＳ１０１で最大端末装置数より少ないと判断したとき、通信処理部１９は、通信端末装置１Ａを、多者通話を行っている回線（以下、「多者通話回線」という。）から一時的に切り離し、人数判定部２１は、端末集合情報（１Ｂ〜１Ｎ）を生成して再構成処理部１５に出力する（Ｓ１０２）。

ステップＳ１０２で通信端末装置１Ａを多者通話回線から一時的に切り離したとき、通信処理部１９は、新たに多者通話に参加させる通信端末装置１Ｚの電話番号を通信端末装置１Ａから受信する（Ｓ１０３）。

ステップＳ１０３で通信端末装置１Ａから通信端末装置１Ｚの電話番号を受信したとき、通信処理部１９は、多者通話回線とは別回線で通信端末装置１Ａと通信端末装置１Ｚとの接続処理を行う（Ｓ１０４）。

ステップＳ１０４で接続処理を行ったとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとの接続が確立したか否かを判断し（Ｓ１０５）、接続が確立したと判断したとき、処理はステップＳ１０６に進み、接続が確立しないと判断したとき、処理はステップＳ１１１に移る。

ステップＳ１０５で接続が確立したと判断したとき、通信処理部１９は、通信端末装置１Ｚから参加可否信号を受信する（Ｓ１０６）。

ステップＳ１０６で通信処理部１９が通信端末装置１Ｚから参加可否信号を受信したとき、許可判定部２４は、受信した参加可否信号が参加承認信号か否かを判断し（Ｓ１０７）、受信した参加可否信号が参加承認信号であると判断したとき、処理はステップＳ１０８に進み、受信した参加可否信号が参加承認信号でなく参加否認信号であると判断したとき、処理はステップＳ１１２に移る。

ステップＳ１０７で受信した参加可否信号が参加承認信号であると判断したとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとの接続を一時的に切り離す（Ｓ１０８）。

ステップＳ１０８で通信端末装置１Ａと通信端末装置１Ｚとの接続を一時的に切り離したとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとを多者通話に参加させるように多者通話回線に接続する（Ｓ１０９）。

ステップＳ１０５で接続が確立しないと判断したとき、通信処理部１９は、通信端末装置１Ａを多者通話回線に接続し、通信端末装置１Ａ〜１Ｎで多者通話ができるようにする（Ｓ１１１）。

ステップＳ１０７で受信した参加可否信号が参加否認信号であると判断したとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとの接続を切り離す（Ｓ１１２）。

ステップＳ１１２で通信端末装置１Ａと通信端末装置１Ｚとの接続を切り離したとき、通信処理部１９は、通信端末装置１Ａを多者通話回線に接続し、通信端末装置１Ａ〜１Ｎで多者通話ができるようにする（Ｓ１１３）。

ステップＳ１０１で多者通話に参加している通信端末装置１Ａ〜１Ｎの数が最大端末装置数より少なくないと判断したとき、ステップＳ１０９で通信端末装置１Ａと通信端末装置１Ｚとを多者通話回線に接続したとき、ステップＳ１１１で通信端末装置１Ａを多者通話回線に接続したとき、または、ステップＳ１１３で通信端末装置１Ａを多者通話回線に接続したとき、端末集合情報等の割込処理出力を再構成処理部１５に出力する（Ｓ１１０）。

ステップＳ１１０で生成する割込処理出力は、それぞれ、ステップＳ１０１で多者通話に参加している通信端末装置１Ａ〜１Ｎの数が最大端末装置数より少なくないと判断したときは、第１の割り込み信号であり、ステップＳ１０９で通信端末装置１Ａと通信端末装置１Ｚとを多者通話回線に接続したときは、端末集合情報（１Ａ〜１Ｎ、１Ｚ）であり、ステップＳ１１１で通信端末装置１Ａを多者通話回線に接続したとき、および、ステップＳ１１３で通信端末装置１Ａを多者通話回線に接続したときは、端末集合情報（１Ａ〜１Ｎ）である。

図８は、本発明の第１の実施の形態に係る第２の割込パターン処理を説明するためのフローチャートである。

まず、第２の割込パターン処理部３０の接続準備部３１は、第２のパターンの割り込み信号が入力されたとき、第２のパターンの割り込み信号を通信処理部１９に出力し、通信処理部１９は、第２のパターンの割り込み信号を送信した通信端末装置１Ｚと通信端末装置１Ｚが接続をしようとする通信端末装置（以下、通信端末装置１Ａとする。）とを、多者通話回線とは別回線で接続する接続処理を行う（Ｓ２０１）。

ステップＳ２０１で接続処理を行ったとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとの接続が確立したか否かを判断し（Ｓ２０２）、接続が確立したと判断したとき、処理はステップＳ２０３に進み、接続が確立しないと判断したとき、処理はステップＳ２０９に移る。

ステップＳ２０２で接続が確立したと判断したとき、通信処理部１９は、通信端末装置１Ａを、多者通話を行っている回線（以下、「多者通話回線」という。）から一時的に切り離し、端末集合情報（１Ｂ〜１Ｎ）を生成して再構成処理部１５に出力する（Ｓ２０３）。

ステップＳ２０３で通信端末装置１Ａを一時的に切り離したとき、通信処理部１９は、通信端末装置１Ａから参加可否信号を受信する（Ｓ２０４）。

ステップＳ２０４で通信処理部１９が通信端末装置１Ａから参加可否信号を受信したとき、許可判定部３３は、受信した参加可否信号が参加承認信号か否かを判断し（Ｓ２０５）、受信した参加可否信号が参加承認信号であると判断したとき、処理はステップＳ２０６に進み、受信した参加可否信号が参加承認信号でなく参加否認信号であると判断したとき、処理はステップＳ２１０に移る。

ステップＳ２０５で受信した参加可否信号が参加承認信号であると判断したとき、人数判定部３４は、多者通話に参加している通信端末装置の数が最大端末装置数より小さいか否かを判断し（Ｓ２０６）、最大端末装置数より小さいと判断したとき、処理はステップＳ２０７に進み、最大端末装置数より小さくないと判断したとき、処理はステップＳ２１０に移る。

ステップＳ２０６で最大端末装置数より小さいと判断したとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとの接続を一時的に切り離す（Ｓ２０７）。

ステップＳ２０７で通信端末装置１Ａと通信端末装置１Ｚとの接続を一時的に切り離したとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとを多者通話に参加させるように多者通話回線に接続する（Ｓ２０８）。

ステップＳ２０５で参加可否信号が参加否認信号であると判断したとき、通信処理部１９は、切断要求信号が入力されるのを待ち（Ｓ２１０）、切断要求信号が入力されたと判断したとき、処理はステップＳ２１１に進む。

ステップＳ２１０で切断要求信号が入力されたと判断したとき、通信処理部１９は、通信端末装置１Ａと通信端末装置１Ｚとの接続を一時的に切り離す（Ｓ２１１）。

ステップＳ２１１で通信端末装置１Ａと通信端末装置１Ｚとの接続を一時的に切り離したとき、通信処理部１９は、通信端末装置１Ａを多者通話に参加させるように多者通話回線に接続する（Ｓ２１２）。

ステップＳ２０２で接続が確立しないと判断したとき、ステップＳ２０８で通信端末装置１Ａと通信端末装置１Ｚとを多者通話回線に接続したとき、または、ステップＳ２１２で通信端末装置１Ａを多者通話回線に接続したとき、端末集合情報等の割込処理出力を再構成処理部１５に出力する（Ｓ２０９）。

ステップＳ２０９で生成する割込処理出力は、それぞれ、ステップＳ２０２で接続が確立しないと判断したときは、第２の割り込み信号であり、ステップＳ２０８で通信端末装置１Ａと通信端末装置１Ｚとを多者通話回線に接続したときは、端末集合情報（１Ａ〜１Ｎ、１Ｚ）であり、ステップＳ２１２で通信端末装置１Ａを多者通話回線に接続したときは、端末集合情報（１Ａ〜１Ｎ）である。

図９は、本発明の第１の実施の形態に係る第３の割込パターン処理を説明するためのフローチャートである。

まず、第３の割込パターン処理部４０の人数判定部４１は、第３のパターンの割り込み信号が入力されたとき、多者通話に参加している通信端末装置１Ａ〜１Ｎの数が２を超えるか否かを判断し（Ｓ３０１）、２を超えると判断したとき、処理はステップＳ３０２に進み、２を超えないと判断したとき、処理はステップＳ３０４に移る。

ステップＳ３０１で２を超えると判断したとき、通信処理部１９は、第３のパターンの割り込み信号を送信した通信端末装置１Ｎを多者通話回線から切り離し、通信端末装置１Ａ〜１Ｍ間の通信に切り替える（Ｓ３０２）。

ステップＳ３０２で通信端末装置１Ｎを多者通話回線から切り離したとき、第４パターン切替処理部４３は、第３のパターンの割り込み信号が含む通信端末装置１Ｎを示す情報を端末集合情報（１Ａ〜１Ｎ）から除いた端末集合情報（１Ａ〜１Ｍ）を再構成処理部１５に出力する（Ｓ３０３）。

ステップＳ３０１で２以下と判断したとき、人数判定部４１は、第３のパターンの割り込み信号を通信処理部１９に出力し、通信処理部１９は、通信を終了させる処理を行う（Ｓ３０４）。ここで、通信を終了させる処理は、周知であり、ここでは、その説明を省略する。

以上説明したように、本発明の第１の実施の形態に係る中継装置は、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、通信コストおよび回線使用率を抑え、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することができる。

スケーラブル符号化技術を用いて音声・楽音信号等を伝送する中継装置を含めた通信システムにおいて、中継装置内で複数の通信端末装置から送信される符号化情報をレイヤ単位の符号化情報に分割し再構成し、各通信端末装置１Ａ〜１Ｎ等に伝送する。これにより、３者以上の多者通話を柔軟に実現することができる。また、符号化情報をレイヤ単位で再構成することにより、中継装置において複数の通信端末装置からの符号化情報を一度復号化し重畳した後再符号化するという従来技術と比べ、復号化信号の著しい品質劣化がない多者通話を実現することができる。

また、過去の送信の伝送ビットレートを含む制御パラメータに基づいて、各通信端末装置に送信する符号化情報を組み合わせるための制御情報を作成するため、新たに伝送ビットレートを検出して制御情報を作成する処理の負荷を軽減することができる。

また、再生される音声の音声レベルと回線状況を含む通信状態に基づいて制御パラメータを設定するため、受信側で聴き取りやすい音声を再生するレイヤ構成を実現することができる。

また、多者通話の参加数を変化させるときに制御パラメータを更新するため、制御情報を作成する処理の負荷をさらに軽減することができる。

また、制御パラメータに基づいて符号化情報を選択して組み合わせるため、処理の負荷を軽減することができる。

また、同一の時間帯に送信された符号化情報を受信してから次の時間帯に送信された符号化情報を受信するため、処理の明確化を図ることができる。

また、多者通話を行っている回線とは別の回線で割り込みに係る２つの通信端末装置を接続するため、多者通話を中断させることなく割り込みに関する処理を行うことができる。

また、多者通話を行っている回線とは別の回線で割り込みに係る２つの通信端末装置を接続するため、多者通話を中断させることなく割り込みに関する処理を行うことができる。

また、本発明の第１の実施の形態に係る信号処理方法は、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することができる。

なお、本発明の第１の実施の形態では、中継装置が、多者通話を行うための信号処理を行う信号処理動作について説明したが、本発明は、コンピュータにこの信号処理動作を行わせる信号処理プログラムにも同様に適用される。また、信号処理プログラムを、メモリ、ディスク、テープ、ＣＤ、ＤＶＤ等の機械読み取り可能な記録媒体に記録、書き込みをし、動作を行う場合についても、本発明は適用することができ、本実施の形態と同様の作用・効果を得ることができる。

（第２の実施の形態）
図１０は、本発明の第２の実施の形態に係る通信端末装置のブロック構成を示す図である。図１０において、通信端末装置１Ａ〜１Ｎ等は、符号化情報受信分離部１１０、制御情報分離部１２０、復号化部１３０、符号化部２１０、および、符号化情報送信統合部２３０を含むように構成される。以下、各処理ブロックについて詳細に説明する。

符号化情報受信分離部１１０は、伝送路２Ａ〜２Ｎ、２Ｚを介して中継装置１０から送信された符号化情報が入力され、符号化情報から情報源符号（以下、「受信情報源符号」という。）と制御情報とを分離して抽出し、得られた受信情報源符号を復号化部１３０に出力し、制御情報を制御情報分離部１２０に出力する。

制御情報分離部１２０は、符号化情報受信分離部１１０から制御情報が入力され、制御情報を解析する。制御情報分離部１２０は、制御情報を解析した後、復号化に利用される情報源符号構成情報と、符号化に利用される伝送モード情報とに分離し、情報源符号構成情報を復号化部１３０に出力し、伝送モード情報を符号化部２１０に出力する。ここで、情報源符号構成情報は、情報源符号のレイヤ構成を示す情報であり、伝送モード情報は、伝送ビットレートを含む所定の情報である。具体的には、制御情報分離部１２０は、制御情報中の情報源符号構成情報を復号化部１３０に出力し、制御情報中の伝送モード情報を符号化部２１０に出力する。

復号化部１３０は、符号化情報受信分離部１１０から受信情報源符号が入力され、また制御情報分離部１２０から情報源符号構成情報を入力する。復号化部１３０は、入力された情報源符号構成情報に基づいて情報源符号を復号化し、出力信号を得る。

符号化部２１０は、音声信号等の入力信号が入力されると共に、制御情報分離部１２０から伝送モード情報が入力され、入力された伝送モード情報に基づいて入力信号を符号化し、送信情報源符号を生成する。符号化部２１０は、得られた情報源符号、および伝送モード情報を符号化情報送信統合部２３０に出力する。

符号化情報送信統合部２３０は、符号化部２１０から情報源符号および伝送モード情報が入力され、入力された情報源符号および伝送モード情報を統合して送信符号化情報を生成し、送信符号化情報を伝送路２Ａ〜２Ｎ、２Ｚ経由で中継装置１０に出力する。

図１１は、本発明の第２の実施の形態に係る符号化部２１０のブロック構成を示す図である。以下、符号化部２１０は、入力信号をＮサンプルずつのデータに区切り（Ｎは自然数）、得られたＮサンプルのデータを１フレームとしてフレーム毎に符号化を行うものとする。

符号化部２１０は、符号化動作制御部２１１、制御スイッチ２２２ａ、２２２ｂ、２２４ａ、２２４ｂ、２２６ａ、２２６ｂ、基本レイヤ符号化部２２１ａ、基本レイヤ復号化部２２１ｂ、第１拡張レイヤ符号化部２２３ａ、第１拡張レイヤ復号化部２２３ｂ、第２拡張レイヤ符号化部２２５ａ、第２拡張レイヤ復号化部２２５ｂ、第３拡張レイヤ符号化部２２７、および加算器２１２、２１３、２１４を有する。

符号化動作制御部２１１には、伝送モード情報が入力される。符号化動作制御部２１１は、入力した伝送モード情報に応じて、制御スイッチ２２２ａ、２２２ｂ、２２４ａ、２２４ｂ、２２６ａ、２２６ｂのオン／オフ制御を行う。具体的には、符号化動作制御部２１１は、伝送モード情報がＢＲ４である場合、制御スイッチ２２２ａ、２２２ｂ、２２４ａ、２２４ｂ、２２６ａ、２２６ｂを全てオンにする。

また、符号化動作制御部２１１は、伝送モード情報がＢＲ３である場合、制御スイッチ２２２ａ、２２２ｂ、２２４ａ、２２４ｂをオンにし、制御スイッチ２２６ａ、２２６ｂをオフにする。また、符号化動作制御部２１１は、伝送モード情報がＢＲ２である場合、制御スイッチ２２２ａ、２２２ｂをオンにし、制御スイッチ２２４ａ、２２４ｂ、２２６ａ、２２６ｂをオフにする。

また、符号化動作制御部２１１は、伝送モード情報がＢＲ１である場合、制御スイッチ２２２ａ、２２２ｂ、２２４ａ、２２４ｂ、２２６ａ、２２６ｂを全てオフにする。また、符号化動作制御部２１１は、伝送モード情報を符号化情報送信統合部２３０に出力する。このように、符号化動作制御部２１１が伝送モード情報に応じて制御スイッチ群をオン／オフ制御することにより、入力信号の符号化に用いる符号化部の組み合わせが決定される。

基本レイヤ符号化部２２１ａは、音声信号等の入力信号が入力され、入力信号に対してＣＥＬＰタイプの音声符号化方法を用いて符号化を行って基本レイヤ情報源符号を生成し、生成した基本レイヤ情報源符号を符号化情報送信統合部２３０および制御スイッチ２２２ｂに出力する。なお、基本レイヤ符号化部２２１ａの構成については後述する。

基本レイヤ復号化部２２１ｂは、制御スイッチ２２２ｂがオンのとき、基本レイヤ符号化部２２１ａから出力された基本レイヤ情報源符号に対してＣＥＬＰタイプの音声復号化方法を用いて復号化を行って基本レイヤ復号化信号を生成し、生成した基本レイヤ復号化信号を加算器２１２に出力する。なお、基本レイヤ復号化部２２１ｂは、制御スイッチ２２２ｂがオフのときには何も動作しない。なお、基本レイヤ復号化部２２１ｂの構成については後述する。

加算器２１２は、制御スイッチ２２２ａ、２２２ｂがオンのとき、入力信号に、基本レイヤ復号化信号の極性を反転させて加算して第１差分信号を生成し、加算して得られた第１差分信号を第１拡張レイヤ符号化部２２３ａおよび制御スイッチ２２４ａに出力する。なお、加算器２１２は、制御スイッチ２２２ａ、２２２ｂがオフのときには何も動作しない。

第１拡張レイヤ符号化部２２３ａは、制御スイッチ２２２ａ、２２２ｂがオンのとき、加算器２１２から得られる第１差分信号に対してＣＥＬＰタイプの音声符号化方法を用いて符号化を行って第１拡張レイヤ情報源符号を生成し、生成した第１拡張レイヤ情報源符号を制御スイッチ２２４ｂおよび符号化情報送信統合部２３０に出力する。なお、第１拡張レイヤ符号化部２２３ａは、制御スイッチ２２２ａ、２２２ｂがオフのときには何も動作しない。

第１拡張レイヤ復号化部２２３ｂは、制御スイッチ２２４ｂがオンのとき、第１拡張レイヤ符号化部２２３ａから出力された第１拡張レイヤ情報源符号に対してＣＥＬＰタイプの音声復号化方法を用いて復号化を行って第１拡張レイヤ復号化信号を生成し、生成した第１拡張レイヤ復号化信号を加算器２１３に出力する。なお、第１拡張レイヤ復号化部２２３ｂは、制御スイッチ２２４ｂがオフのときには何も動作しない。

加算器２１３は、制御スイッチ２２４ａ、２２４ｂがオンのとき、制御スイッチ２２４ａから得られる第１差分信号に、第１拡張レイヤ復号化信号の極性を反転させて加算して第２差分信号を生成し、生成した第２差分信号を第２拡張レイヤ符号化部２２５ａに出力する。なお、加算器２１３は、制御スイッチ２２４ａ、２２４ｂがオフのときには何も動作しない。

第２拡張レイヤ符号化部２２５ａは、制御スイッチ２２４ａ、２２４ｂがオンのとき、加算器２１３から出力される第２差分信号に対してＣＥＬＰタイプの音声符号化方法を用いて符号化を行って第２拡張レイヤ情報源符号を生成し、生成した第２拡張レイヤ情報源符号を符号化情報送信統合部２３０に出力する。なお、第２拡張レイヤ符号化部２２５ａは、制御スイッチ２２４ａ、２２４ｂがオフのときには何も動作しない。

第２拡張レイヤ復号化部２２５ｂは、制御スイッチ２２６ａ、２２６ｂがオンのとき、第２拡張レイヤ符号化部２２５ａから出力された第２拡張レイヤ情報源符号に対してＣＥＬＰタイプの音声復号化方法を用いて復号化を行って第２拡張レイヤ復号化信号を生成し、生成した第２拡張レイヤ復号化信号を加算器２１４に出力する。なお、第２拡張レイヤ復号化部２２５ｂは、制御スイッチ２２６ｂがオフのときには何も動作しない。

加算器２１４は、制御スイッチ２２６ａ、２２６ｂがオンのとき、制御スイッチ２２６ａから得られる第２差分信号に、第２拡張レイヤ復号化信号の極性を反転させた信号を加算し、加算結果である第３差分信号を第３拡張レイヤ符号化部２２７に出力する。なお、加算器２１４は、制御スイッチ２２６ａ、２２６ｂがオフのときには何も動作しない。

第３拡張レイヤ符号化部２２７は、制御スイッチ２２６ａ、２２６ｂがオンのとき、加算器２１４から出力される第３差分信号に対してＣＥＬＰタイプの音声符号化方法を用いて符号化を行い、符号化により得られた情報源符号（以下、「第３拡張レイヤ情報源符号」という。）を符号化情報送信統合部２３０に出力する。なお、第３拡張レイヤ符号化部２２７は、制御スイッチ２２６ａ、２２６ｂがオフのときには何も動作しない。

符号化情報送信統合部２３０は、基本レイヤ符号化部２２１ａ、第１拡張レイヤ符号化部２２３ａ、第２拡張レイヤ符号化部２２５ａ、および第３拡張レイヤ符号化部２２７から出力された情報源符号と符号化動作制御部２１１から出力された伝送モード情報とを統合して符号化情報を生成し、生成した符号化情報を伝送路２Ａに出力する。

次に、伝送前符号化情報のデータ構造（ビットストリーム）について図１２を用いて説明する。伝送モード情報が伝送ビットレートがＢＲ１を示すとき、符号化情報は、図１２（ａ）に示すように、制御情報、基本レイヤ情報源符号および冗長部によって構成される。伝送モード情報がＢＲ２である場合、符号化情報は、図１２（ｂ）に示すように、制御情報、基本レイヤ情報源符号、第１拡張レイヤ情報源符号および冗長部によって構成される。

伝送モード情報が伝送ビットレートがＢＲ３を示すとき、符号化情報は、図１２（ｃ）に示すように、制御情報、基本レイヤ情報源符号、第１拡張レイヤ情報源符号、第２拡張レイヤ情報源符号および冗長部によって構成される。伝送モード情報が伝送ビットレートがＢＲ４を示すとき、符号化情報は、図１２（ｄ）に示すように、制御情報、基本レイヤ情報源符号、第１拡張レイヤ情報源符号、第２拡張レイヤ情報源符号、第３拡張レイヤ情報源符号および冗長部によって構成される。

ここで、図１２中のデータ構造における冗長部とは、ビットストリーム中に用意される冗長的なデータ格納部であり、伝送誤り検出・訂正用のビットおよび、パケットの同期をとるためのカウンタ等に利用される。

図１３は、本発明の第２の実施の形態に係る基本レイヤ符号化部２２１ａのブロック構成を示す図である。以下、基本レイヤ符号化部２２１ａが、ＣＥＬＰタイプの音声符号化方法を用いて音声符号化を行う場合を例にとり説明する。

基本レイヤ符号化部２２１ａは、前処理手段３０１と、ＬＰＣ分析手段３０２と、ＬＰＣ量子化手段３０３と、合成フィルタ３０４と、加算器３０５、３１１と、適応音源符号帳３０６と、量子化利得生成手段３０７と、固定音源符号帳３０８と、乗算器３０９、３１０と、聴覚重み付け手段３１２と、パラメータ決定手段３１３と、多重化部３１４とによって構成される。

前処理手段３０１は、符号化前の入力信号が入力され、入力信号に対し、ＤＣ成分を取り除くハイパスフィルタ処理や後続する符号化処理の性能改善につながるような波形整形処理、所謂プリエンファシス処理等の処理を行い、処理して得られた信号ＸｉｎをＬＰＣ分析手段３０２および加算器３０５に出力する。

ＬＰＣ分析手段３０２は、前処理手段３０１が出力した信号Ｘｉｎが入力され、信号Ｘｉｎに対して線形予測分析処理を行って線形予測係数を生成し、得られた線形予測係数をＬＰＣ量子化手段３０３に出力する。

ＬＰＣ量子化手段３０３は、ＬＰＣ分析手段３０２が出力した線形予測係数が入力され、線形予測係数（ＬＰＣ）に対して量子化処理を行って量子化ＬＰＣを生成し、得られた量子化ＬＰＣを合成フィルタ３０４に出力すると共に、合成フィルタ３０４が量子化ＬＰＣに基づいて合成フィルタ（フィルタ合成とあった。）処理を行うことを示す符号Ｌを多重化部３１４に出力する。

合成フィルタ３０４は、後述する加算器３１１からの出力信号と、ＬＰＣ量子化手段３０３から出力された線形予測係数とが入力され、量子化ＬＰＣに基づいて合成フィルタ処理のフィルタ係数を決定し、加算器３１１からの出力信号に対して合成フィルタ処理を施して合成信号を生成し、得られた合成信号を加算器３０５に出力する。

加算器３０５は、前処理手段３０１が出力した信号Ｘｉｎと、合成フィルタ３０４が出力した合成信号とが入力され、合成信号の極性を反転させて信号Ｘｉｎに加算することにより誤差信号を算出し、得られた誤差信号を聴覚重み付け手段３１２に出力する。

適応音源符号帳３０６は、後述するパラメータ決定手段３１３が出力した適応音源ベクトル符号Ａが入力され、この適応音源ベクトル符号Ａに応じて特定される過去の駆動音源（整合）から１フレーム分のサンプルを適応音源ベクトルとして切り出して乗算器３０９に出力する。ここで、上記の駆動音源は、過去に加算器３１１が出力した駆動音源をバッファに記憶しているものとする。

量子化利得生成手段３０７は、後述するパラメータ決定手段３１３が出力した音源利得符号Ｇが入力され、入力された音源利得符号Ｇに応じて量子化適応音源利得と量子化固定音源利得とを特定し、特定した量子化適応音源利得と量子化固定音源利得とをそれぞれ乗算器３０９と乗算器３１０とに出力する。ここで、量子化適応音源利得とは、適応音源符号帳３０６が出力した適応音源ベクトルを増幅するための利得であり、量子化固定音源利得とは、後述する固定音源符号帳３０８が出力する固定音源ベクトルを増幅するための利得である。

固定音源符号帳３０８は、後述するパラメータ決定手段３１３が出力した固定音源ベクトル符号Ｆが入力され、入力された固定音源ベクトル符号Ｆに応じて特定される形状を有するパルス音源ベクトルに拡散ベクトルを乗算して固定音源ベクトルを生成し、得られた固定音源ベクトルを乗算器３１０に出力する。

乗算器３０９は、適応音源符号帳３０６が出力した適応音源ベクトルと、量子化利得生成手段３０７が出力した量子化適応音源利得とが入力され、量子化適応音源利得を適応音源ベクトルに乗じて、加算器３１１に出力する。乗算器３１０は、固定音源符号帳３０８が出力した固定音源ベクトルと、量子化利得生成手段３０７が出力した量子化固定音源利得とが入力され、量子化固定音源利得を固定音源ベクトルに乗じて、加算器３１１に出力する。

加算器３１１は、乗算器３０９が出力した利得乗算後の適応音源ベクトルと、乗算器３１０が出力した固定音源ベクトルとが入力され、適応音源ベクトルと固定音源ベクトルとをベクトル加算して駆動音源を生成し、得られた駆動音源を合成フィルタ３０４および適応音源符号帳３０６に出力する。なお、適応音源符号帳３０６に入力された駆動音源は、バッファに記憶される。

聴覚重み付け手段３１２は、加算器３０５から出力された誤差信号が入力され、この誤差信号に対して聴覚を考慮した重み付けを行って符号化歪みを生成し、得られた符号化歪みをパラメータ決定手段３１３に出力する。

パラメータ決定手段３１３は、聴覚重み付け手段３１２から出力された符号化歪みが入力され、この符号化歪みを最小にする適応音源ベクトル、固定音源ベクトルおよび量子化利得を、それぞれ、適応音源符号帳３０６、固定音源符号帳３０８および量子化利得生成手段３０７が有するデータの中から選択して適応音源ベクトル符号Ａ、固定音源ベクトル符号Ｆおよび音源利得符号Ｇを生成し、多重化部３１４に出力する。ここで、適応音源ベクトル符号は、パラメータ決定手段３１３が選択した適応音源ベクトルを特定する情報であり、固定音源ベクトル符号は固定音源ベクトルを特定する情報であり、音源利得符号は、量子化適応音源利得と量子化固定音源利得を特定する情報である。

多重化部３１４は、ＬＰＣ量子化手段３０３が出力した量子化ＬＰＣを表す符号Ｌと、パラメータ決定手段３１３が出力した適応音源ベクトル符号Ａ、固定音源ベクトル符号Ｆおよび音源利得符号Ｇとを入力とし、これらの情報を多重化して基本レイヤ情報源符号を生成して出力する。

図１１に示す第１拡張レイヤ符号化部２２３ａ、第２拡張レイヤ符号化部２２５ａ、および第３拡張レイヤ符号化部２２７の構成の説明については、基本レイヤ符号化部２２１ａと同一であるため、その説明を省略する。ただし、第１拡張レイヤ符号化部２２３ａ、第２拡張レイヤ符号化部２２５ａ、および第３拡張レイヤ符号化部２２７に入力される信号と出力される情報源符号とは異なる。

図１４は、本発明の第２の実施の形態に係る基本レイヤ復号化部２２１ｂのブロック構成を示す図である。以下、基本レイヤ復号化部２２１ｂが、ＣＥＬＰタイプの音声復号化方法を用いて音声復号化を行う場合を例にとり説明する。

図１４において、基本レイヤ復号化部２２１ｂは、多重化分離手段４０１と、ＬＰＣ復号化手段４０２と、合成フィルタ４０３と、後処理手段４０４と、適応音源符号帳４０５と、量子化利得生成手段４０６と、固定音源符号帳４０７と、乗算器４０８、４０９と、加算器４１０とを有する。

多重化分離手段４０１は、基本レイヤ復号化部２２１ｂに入力された基本レイヤ情報源符号が入力され、基本レイヤ情報源符号から符号Ｌ、Ａ、Ｇ、Ｆを分離し、それぞれ、ＬＰＣ復号化手段４０２、適応音源符号帳４０５、量子化利得生成手段４０６、固定音源符号帳４０７に出力する。

ＬＰＣ復号化手段４０２は、多重化分離手段４０１が出力した符号Ｌが入力され、符号Ｌに基づいて量子化ＬＰＣを復号化し、得られた量子化ＬＰＣを合成フィルタ４０３に出力する。

適応音源符号帳４０５は、多重化分離手段４０１が出力した符号Ａが入力され、符号Ａで指定される駆動音源の１フレーム分のサンプルを、記憶している過去の駆動音源のうちから選択し、適応音源ベクトルとして乗算器４０８に出力する。

量子化利得生成手段４０６は、多重化分離手段４０１が出力した音源利得符号Ｇが入力され、音源利得符号Ｇで指定される量子化適応音源利得と量子化固定音源利得を復号化し、量子化適応音源利得を乗算器４０８に出力し、量子化固定音源利得を乗算器４０９に出力する。

固定音源符号帳４０７は、多重化分離手段４０１が出力した符号Ｆが入力され、符号Ｆで指定される固定音源ベクトルを生成し、生成した固定音源ベクトルを乗算器４０９に出力する。

乗算器４０８は、適応音源符号帳４０５が出力した適応音源ベクトルと、量子化利得生成手段４０６が出力した量子化適応音源利得とが入力され、適応音源ベクトルに量子化適応音源利得を乗算し、利得乗算後の適応音源ベクトルを加算器４１０に出力する。

乗算器４０９は、固定音源符号帳４０７が出力した固定音源ベクトルと、量子化利得生成手段４０６が出力した量子化固定音源利得とが入力され、固定音源ベクトルに量子化固定音源利得を乗算し、利得乗算後の固定音源ベクトルを加算器４１０に出力する。

加算器４１０は、乗算器４０８、４０９から出力された利得乗算後の適応音源ベクトルと固定音源ベクトルとを加算して駆動音源を生成し、得られた駆動音源を合成フィルタ４０３および適応音源符号帳４０５に出力する。

合成フィルタ４０３は、ＬＰＣ復号化手段４０２が出力した量子化ＬＰＣと、加算器４１０が出力した駆動音源とが入力され、量子化ＬＰＣに基づいてフィルタ係数を決定し、入力された駆動音源のフィルタ合成処理を行い、得られた（合成した）信号を後処理手段４０４に出力する。

後処理手段４０４は、合成フィルタ４０３が出力した信号が入力され、入力された信号に対して、ホルマント強調、ピッチ強調等の音声の主観的品質を改善する処理、定常雑音の主観的品質を改善する処理等を施し、基本レイヤ復号化信号として出力する。

図１１に示す第１拡張レイヤ復号化部２２３ｂおよび第２拡張レイヤ復号化部２２５ｂの構成の説明については、基本レイヤ復号化部２２１ｂと同一であるため、その説明を省略する。ただし、第１拡張レイヤ復号化部２２３ｂおよび第２拡張レイヤ復号化部２２５ｂに入力される情報源符号の種類と出力される復号化信号とは異なる。

図１５は、本発明の第２の実施の形態に係る復号化部１３０のブロック構成を示す図である。以下、復号化部１３０が、ＣＥＬＰタイプの音声復号化方法を用いて音声復号化を行う場合を例にとり説明する。

復号化部１３０は、符号化情報管理部１３１と、復号化動作制御部１３２と、基本レイヤ復号化部１３３と、第１拡張レイヤ復号化部１３５と、第２拡張レイヤ復号化部１３７と、第３拡張レイヤ復号化部１３９と、制御スイッチ１３４、１３６、１３８と、加算器１４０〜１４２と、合成音管理部１４３とを有する。

符号化情報管理部１３１には、符号化情報受信分離部１１０が出力した情報源符号と、制御情報分離部１２０が出力した情報源符号構成情報とが入力される。符号化情報管理部１３１は、入力された情報源符号構成情報に基づいて、所定データ量の情報源符号が入力されるまで、入力された情報源符号および制御情報を内部メモリに格納する。具体的には、符号化情報管理部１３１は、多者通話に参加している全通信端末装置１Ａ〜１Ｎ等から送信された所定データ量の情報源符号が全て揃うまで格納する。符号化情報管理部１３１は、また、所定データ量の情報源符号が全て入力されたとき、内部メモリに格納した情報源符号および情報源符号構成情報を復号化動作制御部１３２に出力する。

復号化動作制御部１３２は、符号化情報管理部１３１が出力した情報源符号および情報源符号構成情報が入力され、情報源符号構成情報に基づいて、受信した各通信端末装置１Ａ〜１Ｎ等からの情報源符号毎に、制御スイッチ１３４、１３６、１３８のオン／オフを制御し、基本レイヤ復号化部１３３、第１拡張レイヤ復号化部１３５、第２拡張レイヤ復号化部１３７および第３拡張レイヤ復号化部１３９に、対応するレイヤの信号を出力する。

具体的には、復号化動作制御部１３２は、各通信端末装置１Ａ〜１Ｎ等毎に、符号化情報管理部１３１から得られる情報源符号構成情報の占有レイヤ数（Ｌ１、Ｌ２、...）を参照し、占有レイヤ数が１（情報源符号構成情報がＬ１）の場合、制御スイッチ１３４、１３６、１３８を全てオフにし、この通信端末装置からの情報源符号を基本レイヤ復号化部１３３に出力する。また、復号化動作制御部１３２は、占有レイヤ数が２（情報源符号構成情報がＬ２）の場合、制御スイッチ１３４をオンにし、制御スイッチ１３６、１３８をオフにし、この通信端末装置からの情報源符号を下位のレイヤから順番に、基本レイヤ復号化部１３３および第１拡張レイヤ復号化部１３５にそれぞれ出力する。また、復号化動作制御部１３２は、占有レイヤ数が３（情報源符号構成情報がＬ３）の場合、制御スイッチ１３４、１３６をオンにし、制御スイッチ１３８をオフにし、この通信端末装置からの情報源符号を下位のレイヤから順番に、基本レイヤ復号化部１３３、第１拡張レイヤ復号化部１３５および第２拡張レイヤ復号化部１３７にそれぞれ出力する。また、復号化動作制御部１３２は、占有レイヤ数が４（情報源符号構成情報がＬ４）の場合、制御スイッチ１３４、１３６、１３８を全てオンにし、この通信端末装置からの情報源符号を下位のレイヤに対応する情報源符号から、基本レイヤ復号化部１３３、第１拡張レイヤ復号化部１３５、第２拡張レイヤ復号化部１３７および第３拡張レイヤ復号化部１３９にそれぞれ出力する。

また、復号化動作制御部１３２は、各通信端末装置１Ａ〜１Ｎ等から送信された情報源符号が全て復号化されるまで、得られた各通信端末装置１Ａ〜１Ｎ等毎の復号化信号を内部メモリに格納するように、合成音管理部１４３に制御信号を送り、合成音管理部１４３の動作を制御する。

例えば、４層のスケーラブル通信によって３者（通信端末装置１Ａ、１Ｂ、１Ｃ）間通話を行っている状態で、通信端末装置１Ａの復号化動作制御部１３２が受信した情報源符号構成情報が、「Ｂ：Ｌ２（ｂａｓｅ，ｅｎｈ１）Ｃ：Ｌ２（ｅｎｈ２，ｅｎｈ３）」であった場合を例にとり説明する。この場合、復号化動作制御部１３２は、制御スイッチ１３４をオンにし、制御スイッチ１３６、１３８をオフにし、通信端末装置１Ｂから伝送された情報源符号である基本レイヤ情報源符号を基本レイヤ復号化部１３３に出力し、第１拡張レイヤ情報源符号を第１拡張レイヤ復号化部１３５に出力する。また、復号化動作制御部１３２は、合成音管理部１４３に制御信号を出力し、基本レイヤ復号化部１３３および第１拡張レイヤ復号化部１３５が復号化して得られた各通信端末装置１Ｂ、１Ｃからの復号化信号を合成音管理部１４３に記憶させる。次に、復号化動作制御部１３２は、制御スイッチ１３４をオンにし、制御スイッチ１３６、１３８をオフにし、通信端末装置１Ｃから伝送された情報源符号である、第２拡張レイヤ情報源符号を基本レイヤ復号化部１３３に出力し、第３拡張レイヤ情報源符号を第１拡張レイヤ復号化部１３５に出力する。

基本レイヤ復号化部１３３は、復号化動作制御部１３２から出力された基本レイヤ情報源符号等の情報源符号に対してＣＥＬＰタイプの音声復号化方法を用いて復号化を行い、復号化により得られた復号化信号（以下、「基本レイヤ復号化信号」という。）を加算器１４２に出力する。

第１拡張レイヤ復号化部１３５は、制御スイッチ１３４がオンのとき、復号化動作制御部１３２から出力された第１拡張レイヤ情報源符号等の情報源符号に対してＣＥＬＰタイプの音声復号化方法を用いて復号化を行い、復号化により得られた復号化信号（以下、「第１拡張レイヤ復号化信号」という。）を加算器１４１に出力する。また、第１拡張レイヤ復号化部１３５は、制御スイッチ１３４がオフのときは、何も動作しない。

第２拡張レイヤ復号化部１３７は、制御スイッチ１３６がオンのとき、復号化動作制御部１３２から出力された第２拡張レイヤ情報源符号等の情報源符号に対してＣＥＬＰタイプの音声復号化方法を用いて復号化を行い、復号化により得られた復号化信号（以下、「第２レイヤ復号化信号」という。）を加算器１４０に出力する。また、第２拡張レイヤ復号化部１３７は、制御スイッチ１３６がオフのときは、何も動作しない。

第３拡張レイヤ復号化部１３９は、制御スイッチ１３８がオンのとき、復号化動作制御部１３２から出力された第３拡張レイヤ情報源符号等の情報源符号に対してＣＥＬＰタイプの音声復号化方法を用いて復号化を行い、復号化により得られた復号化信号（以下、「第３拡張レイヤ復号化信号」という。）を加算器１４０に出力する。また、第３拡張レイヤ復号化部１３９は、制御スイッチ１３８がオフのときは、何も動作しない。

加算器１４０は、制御スイッチ１３６、１３８がオンのとき、第３拡張レイヤ復号化部１３９から出力された第３拡張レイヤ復号化信号と第２拡張レイヤ復号化部１３７から出力された第２拡張レイヤ復号化信号とを加算し、加算後の信号を加算器１４１に出力する。また、加算器１４０は、制御スイッチ１３８がオフであり、かつ、制御スイッチ１３６がオンのとき、第２拡張レイヤ復号化部１３７から出力された第２拡張レイヤ復号化信号を加算器１４１に出力する。なお、加算器１４０は、制御スイッチ１３６、１３８がオフのとき、何も動作しない。

加算器１４１は、制御スイッチ１３４、１３６がオンのとき、第２拡張レイヤ復号化部１３７から出力された第２拡張レイヤ復号化信号と第１拡張レイヤ復号化部１３５から出力された第１拡張レイヤ復号化信号とを加算し、加算後の信号を加算器１４２に出力する。また、加算器１４１は、制御スイッチ１３６がオフであり、かつ、制御スイッチ１３４がオンのとき、第１拡張レイヤ復号化部１３５から出力された第１拡張レイヤ復号化信号を加算器１４２に出力する。なお、加算器１４１は、制御スイッチ１３４、１３６がオフのとき、何も動作しない。

加算器１４２は、制御スイッチ１３４がオンのとき、加算器１４１から出力された復号化信号と基本レイヤ復号化部１３３から出力された基本レイヤ復号化信号とを加算し、加算後の信号を合成音管理部１４３に出力する。なお、加算器１４２は、制御スイッチ１３４がオフのとき、基本レイヤ復号化部１３３から得られる基本レイヤ復号化信号を合成音管理部１４３に出力する。

合成音管理部１４３は、加算器１４２から出力される復号化信号が入力され、復号化動作制御部１３２からの制御に基づき、入力された復号化信号を内部メモリに格納する。また、合成音管理部１４３は、復号化動作制御部１３２からの制御に基づき、内部メモリに格納された複数の復号化信号を重畳加算し、得られた加算信号を出力信号として出力する。

具体的には、合成音管理部１４３は、復号化動作制御部１３２から制御信号として、制御部（中継装置）から伝送された情報源符号を構成する通信端末装置数を得て、この通信端末装置数分だけ、内部メモリに復号化信号を格納する。合成音管理部１４３は、指定された通信端末装置数分、復号化信号を格納した後、格納した全ての復号化信号を重畳加算し、得られた加算信号を出力信号として出力する。

なお、基本レイヤ復号化部１３３、第１拡張レイヤ復号化部１３５、第２拡張レイヤ復号化部１３７、および第３拡張レイヤ復号化部１３９の内部構成は、上述した基本レイヤ復号化部２２１ｂと同一であり、入力される情報源符号の種類および出力される信号の種類のみが異なるので、その説明は省略する。

以上説明したように、本発明の第２の実施の形態に係る通信端末装置は、入力された符号化情報を復号化せずに再構成して送信するため、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することができる。

また、制御情報に基づいて符号化情報をレイヤ毎に復号化するため、異なる通信端末装置から送信され異なるレイヤに統合された符号化情報を復号化することができる。

また、レイヤ毎に符号化された前記符号化情報を基本レイヤから復号化するため、伝送ビットレートが低下したときでも適切に復号化することができる。

また、本発明は階層を限定するものではなく、複数階層で構成された階層的な信号符号化または復号化方法において、下位レイヤでの入力信号と出力信号との差である残差信号を上位レイヤで符号化する場合について適用することができる。

また、本発明は同時に多者通話可能な通信端末装置数を限定するものではなく、スケーラブル符号化技術の階層数以上の通信端末装置間で多者通話を行う場合についても、階層数以上の通信端末装置から送信される符号化情報を一度復号化し重畳した後再符号化するという技術と組み合わせることで適用することができる。

また、本発明は同時に多者通話中に、各通信端末装置１Ａ〜１Ｎ等へのレイヤ数の割り当て方法を限定するものではなく、各通信端末装置１Ａ〜１Ｎ等へのレイヤ数の割り当てを出来る限り均等にするような場合の他に、通信端末装置から送信される音声レベルが高い端末、あるいは中継装置間との回線状況が良い端末等に優先的にレイヤ数を割り当てる場合などにも適用することができ、より柔軟な多者通話を実現することができる。

また、本発明は多者通話システムの参加方式、脱退方式を限定するものではなく、本実施の形態では、各通信端末装置１Ａ〜１Ｎ等の脱退時に自ら回線切断要求を送信することで脱退していたが、他の通信端末装置により強制的に脱退させられるという場合などにも適用することができる。

本発明に係る中継装置、通信端末装置、信号復号化装置、信号処理方法、および信号処理プログラムは、従来の通信装置、通信方法等よりも、処理における計算コストを増大させることなく、さらに、復号化音声の大きな劣化を防ぐ多者通話システムを実現することができるという効果を有し、多者通話が可能な中継装置、通信端末装置、信号復号化装置、信号処理方法、および信号処理プログラム等として有用である。

本発明の実施の形態に係る中継装置および通信端末装置を有する通信システムのブロック構成を示す図 本発明の第１の実施の形態に係る中継端末のブロック構成を示す図 本発明の第１の実施の形態に係る第１の割込パターン処理部のブロック構成を示す図 本発明の第１の実施の形態に係る第２の割込パターン処理部のブロック構成を示す図 本発明の第１の実施の形態に係る第３の割込パターン処理部のブロック構成を示す図 本発明の第１の実施の形態に係る中継端末の動作を説明するためのフローチャート 本発明の第１の実施の形態に係る第１の割込パターン処理を説明するためのフローチャート 本発明の第１の実施の形態に係る第２の割込パターン処理を説明するためのフローチャート 本発明の第１の実施の形態に係る第３の割込パターン処理を説明するためのフローチャート 本発明の第２の実施の形態に係る通信端末装置のブロック構成を示す図 本発明の第２の実施の形態に係る符号化部のブロック構成を示す図 本発明の第２の実施の形態に係る通信端末装置から伝送される符号化情報のデータ構造図 本発明の第２の実施の形態に係る符号化部の基本レイヤ符号化部の内部構成を示すブロック図 本発明の第２の実施の形態に係る符号化部の基本レイヤ復号化部の内部構成を示すブロック図 本発明の第２の実施の形態に係る通信端末装置内の復号化部の内部構成を示すブロック図

符号の説明

１Ａ〜１Ｎ 通信端末装置
２Ａ〜２Ｎ 伝送路
１０ 中継装置
１１ 受信部
１２ 割込判定部
１３ 符号化情報分離部
１４ 符号化情報管理部
１５ 再構成処理部
１６ 統合送信部
１６ａ 符号化情報統合部
１６ｂ 送信部
１８ａ、１８ｂ、３９ａ、３９ｂ、３９ｃ、４４、１３４、１３６、１３８、２０１、２０２、２０３、２２２ａ、２２２ｂ、２２４ａ、２２４ｂ、２２６ａ、２２６ｂ 制御スイッチ
１９ 通信処理部
２０、３０、４０ 割込パターン処理部
２１、３４、４１ 人数判定部
２２、２６、２７、３２、３６、３８、４３ パターン切替処理部
２３、３１ 接続準備部
２４、３３ 許可判定部
２５、３５、３７、４２ 切断準備部
１１０ 符号化情報受信分離部
１２０ 制御情報分離部
１３０ 復号化部
１３１ 符号化情報管理部
１３２ 復号化動作制御部
１３３、２２１ｂ 基本レイヤ復号化部
１３５、２２３ｂ 第１拡張レイヤ復号化部
１３７、２２５ｂ 第２拡張レイヤ復号化部
１３９ 第３拡張レイヤ復号化部
１４０、１４１、１４２、２１２、２１３、２１４、３０５、３１１、４１０ 加算器
１４３ 合成音管理部
２１０ 符号化部
２１１ 符号化動作制御部
２３０ 符号化情報送信統合部
２２１ａ 基本レイヤ符号化部
２２３ａ 第１拡張レイヤ符号化部
２２５ａ 第２拡張レイヤ符号化部
２２７ 第３拡張レイヤ符号化部
３０１ 前処理手段
３０２ ＬＰＣ分析手段
３０３ ＬＰＣ量子化手段
３０４、４０３ 合成フィルタ
３０６、４０５ 適応音源符号帳
３０７、４０６ 量子化利得生成手段
３０８、４０７ 固定音源符号帳
３０９、３１０、４０８、４０９ 乗算器
３１２ 聴覚重み付け手段
３１３ パラメータ決定手段
３１４ 多重化部
４０１ 多重化分離手段
４０２ ＬＰＣ復号化手段
４０４ 後処理手段

Claims (13)

1. 多者通話に参加している各通信端末装置から送信され、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を、受信する受信部と、前記受信部が各前記通信端末装置から受信した前記符号化情報を前記レイヤ単位で組み合わせるための制御情報を作成する再構成処理部と、前記再構成処理部が作成した前記制御情報に基づいて、前記受信部が各前記通信端末装置から受信した前記符号化情報を、スケーラブルに前記レイヤ単位で組み合わせて統合すると共に、統合した前記符号化情報を送信する統合送信部とを備えることを特徴とする中継装置。
2. 前記多者通話に参加している前記通信端末装置毎に設定した、過去の送信の伝送ビットレートを含む制御パラメータを有し、前記再構成処理部が、前記制御パラメータに基づいて、各前記通信端末装置に送信する前記符号化情報を組み合わせるための前記制御情報を作成することを特徴とする請求項１に記載の中継装置。
3. 前記再構成処理部が、各前記通信端末装置から送信された各前記符号化情報に基づいて再生される音声の音声レベルと、各前記通信端末装置との通信に用いる回線の回線状況を含む通信状態に関する情報とに基づいて、前記制御パラメータを設定することを特徴とする請求項２に記載の中継装置。
4. 新たな通信端末装置を前記多者通話に参加させるとき、または、前記多者通話に参加している前記通信端末装置が前記多者通話をやめるとき、前記再構成処理部が、前記制御パラメータを更新することを特徴とする請求項２または請求項３に記載の中継装置。
5. 前記再構成処理部が、各前記通信端末装置から受信した前記符号化情報のうちの、基本レイヤから所定レイヤ分の前記符号化情報を、前記制御パラメータに基づいて選択して組み合わせることを特徴とする請求項２乃至請求項４のいずれか１項に記載の中継装置。
6. 前記再構成処理部が、前記多者通話に参加している各前記通信端末装置が各時間帯で送信した前記符号化情報のうち、同一の前記時間帯に送信された前記符号化情報を受信してから次の前記時間帯に送信された前記符号化情報を受信することを特徴とする請求項２乃至請求項５のいずれか１項に記載の中継装置。
7. 新たな通信端末装置を前記多者通話に参加させるとき、前記新たな通信端末装置を前記多者通話に参加させようとする前記通信端末装置と前記新たな通信端末装置とを、前記多者通話を行っている回線とは別の回線で接続することを特徴とする請求項１乃至請求項６のいずれか１項に記載の中継装置。
8. 前記多者通話に参加している前記通信端末装置と新たな通信端末装置とを通話させるとき、前記多者通話に参加している前記通信端末装置と前記新たな通信端末装置とを、前記多者通話を行っている回線とは別の回線で接続することを特徴とする請求項１乃至請求項６のいずれか１項に記載の中継装置。
9. スケーラブル符号化によってレイヤ毎に符号化された符号化情報を受信する受信部と、前記受信部が受信した前記符号化情報に含まれる制御情報に基づいて、スケーラブル復号化によって音声信号を復号化する復号化部と、前記受信部が受信した前記符号化情報に含まれる前記制御情報に基づいて、スケーラブル符号化によって音声信号を符号化する符号化部と、前記符号化部が符号化して得られた前記符号化情報を送信する送信部とを備えることを特徴とする通信端末装置。
10. スケーラブル符号化によって複数のレイヤで構成された符号化情報から情報源符号および制御情報を分離する符号化情報分離部と、前記制御情報に基づいて前記符号化情報をレイヤ毎に復号化する復号化部とを備えることを特徴とする信号復号化装置。
11. 前記復号化部が、基本レイヤから所定レイヤ分の、レイヤ毎に符号化された前記符号化情報を復号化することを特徴とする請求項１０に記載の信号復号化装置。
12. 多者通話に参加している各通信端末装置から送信され、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を受信機が受信する受信ステップと、前記受信ステップで各前記通信端末装置から受信した前記符号化情報を、レイヤ単位で組み合わせるための制御情報を、再構成処理部が作成する再構成ステップと、前記再構成処理部が作成した前記制御情報に基づいて、各前記通信端末装置から受信した前記符号化情報を、統合送信部がスケーラブルにレイヤ単位で組み合わせて統合する統合ステップと、前記統合ステップで統合した前記符号化情報を、前記統合送信部が送信する送信ステップとを備えることを特徴とする信号処理方法。
13. コンピュータに、多者通話に参加している各通信端末装置から送信され、スケーラブル符号化によってレイヤ毎に符号化された符号化情報を受信する受信ステップと、前記受信ステップで各前記通信端末装置から受信した前記符号化情報を、レイヤ単位で組み合わせるための制御情報を作成する再構成ステップと、前記再構成ステップで作成した前記制御情報に基づいて、前記受信ステップで各前記通信端末装置から受信した前記符号化情報をスケーラブルにレイヤ単位で組み合わせて統合する統合ステップと、前記統合ステップで統合した前記符号化情報を、送信する送信ステップとを実行させることを特徴とする信号処理プログラム。

Images