JP3725209B2

JP3725209B2 - Communication system and communication control method for communication system

Info

Publication number: JP3725209B2
Application number: JP21376895A
Authority: JP
Inventors: 力安田; 隆治伊藤; 雅裕高木
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 1995-08-22
Filing date: 1995-08-22
Publication date: 2005-12-07
Anticipated expiration: 2015-08-22
Also published as: JPH0962597A

Description

【０００１】
【発明の属する技術分野】
本発明はマルチメディアサービスを実現するための通信システムに関する。
【０００２】
【従来の技術】
電子機器やコンピュータ技術および通信技術の発展に伴い、近年では音声のみならず画像（動画、静止画）やデータなど、様々なメディアの情報を端末間で授受することができるようになり、これらを自由に取り扱うことができるマルチメディアサービスが可能なった。
【０００３】
ところで、このようなサービスを利用するにあたって、様々なメディアを利用するには、相手方がそれに対応していなければならないことはいうまでもない。すなわち、複数のメディアからなる通信要求に対して、通信相手の使用する端末の有する機能の問題があり、全てのメディア扱える端末装置を備えている場合もあれば、電話端末のように音声だけしか利用できない場合もあり、あるいはＴＶ電話端末のように、動画像や静止画像と音声を扱える端末の場合もあり、あるいはファクシミリと電話等のように、画情報と音声が扱えるといった具合に、設置してある個々の端末によって扱える機能が様々である。
【０００４】
そして、個々の端末は、通信要求に含まれる複数のメディアの全てを扱えるわけではないが、各端末の機能を組み合わせることにより、通信要求に含まれる複数のメディアを扱うことができる場合がある。
【０００５】
従来はそのような状況において、通信要求に含まれる複数のメディアを満たした通信を行なうためには、通信要求を起動するユーザが所望のメディアを扱える相手の使用する端末が何であるかを認識し、それぞれの端末毎に接続要求を起動する必要があった。そのため、所望の通信を行なえるようにするまでの準備段階が大変であり、実用性に欠けるという問題があった。
【０００６】
【発明が解決しようとする課題】
このように、マルチメディアサービスを利用するにあたって、様々なメディアを利用するには、通信する相手方がそれに対応していなければならない。それは、複数のメディアからなる通信要求に対して、通信相手の使用する端末の有する機能が対応するか否かの問題であり、音声、画像、データの全てのメディア扱える端末装置を備えている場合もあれば、電話端末のように音声だけしか利用できない場合もあり、あるいはＴＶ電話端末のように、動画像や静止画像と音声を扱える端末の場合もあり、あるいはファクシミリと電話等のように、画情報と音声が扱えるといった具合に、設置してある個々の端末によって扱える機能が様々である。また、画像が扱えるといっても、扱える画像の形式が違うことも多く、また、扱えるデータや音声の方式が同じものとも限らない。
【０００７】
しかし、相手側に設置されている端末のうち、個々の端末は、通信要求に含まれる複数のメディアの全てを扱えるわけではないが、各端末の機能を組み合わせることにより、通信要求に含まれる複数のメディアを扱うことができる場合があり、このような場合、通信要求に含まれる複数のメディアを満たした通信を行なうためには、通信要求を起動するユーザが所望のメディアを扱える相手の使用する端末が何であるかを認識し、それぞれの端末毎に接続要求を起動する必要があった。そのため、所望の通信を行なえるようにするまでの準備段階が大変であり、実用性に欠けるという問題があった。
【０００８】
なお、音声端末とデータ端末とを用いて会議接続を行なう際に、会議開始のための一つの要求により、これら端末に対して接続を実現する方式として、特開昭６３‐１１４０号公報に示される技術があるが、当該方式では、音声とデータを組み合わせた会議の開始要求であることを示す特別番号の受信により、予め固定的に定められた音声端末とデータ端末とに対して接続を構成するものである。
【０００９】
そのため、汎用性に欠けることになり、組み合わせ接続の自由度の高いシステムとはいえない。
【００１０】
従って、発信時にユーザが指定したメディアに応じて、メディア処理能力の異なる相手側の複数の端末のうちの、必要なものの組み合わせを発信毎に決定し、それら端末の組合せに対して接続を実現することができるような組み合わせ接続の自由度の高いシステムの開発が嘱望されている。
【００１１】
そこでこの発明の目的とするところは、様々な複数メディアの組合せからなる通信要求を起動する際に、従来技術の問題点であった通信相手の使用する端末と、その端末が扱えるメディアをユーザが認識しなければならず、しかも複数メディアを複数端末の組み合せにて実現する場合には、それぞれの端末に対して通信要求を起動する必要があるという点を解決することにあり、発信時にユーザが指定したメディアに応じて、メディア処理能力の異なる相手側の複数の端末のうちの、必要なものの組み合わせを発信毎に自動的に決定し、それら端末の組合せに対しての接続を自動的に行なうことができるようにした通信システムおよび通信システムの通信制御方法を提供することにある。
【００１２】
また、本発明の他の目的は、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができるようにした通信システムおよび通信システムの通信制御方法を提供することにある。
【００１３】
【課題を解決するための手段】
上記目的を達成するために、本発明はつぎのようにする。
【００１４】
すなわち、第１には、本発明は、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムにおいて、
ユーザ毎に使用可能な端末を記憶するユーザ端末記憶手段と、端末毎に使用可能なメディアまたはメディア実現方式を記憶する端末メディア記憶手段と、通信要求に応じて、通信に関与するユーザの各々に対して、前記ユーザ端末記憶手段と前記端末メディア記憶手段により、前記各ユーザが使用可能な１つまたは複数のメディアまたはメディア実現方式および１つ以上の端末からなる端末の組を決定する決定手段と、前記決定手段が決定したメディアおよび前記端末の組に基づき、コール・コネクションの設定・解放を行うコール・コネクション制御手段を設ける。
【００１５】
また、第２には、本発明は、前記第１の構成に、さらに、
ユーザが通信要求の中で指定したメディアまたはメディア実現方式と、発側ユーザが使用可能なメディアまたはメディア実現方式と、着側ユーザが使用可能なメディアまたはメディア実現方式とにより通信に使用するメディアまたはメディア実現方式を決定し、前記決定した各々のメディアまたはメディア実現方式を使用するための発側ユーザが使用できる端末の組み合わせと、着側ユーザが使用できる端末の組み合わせとを決定する機能を前記決定手段に付加する構成とする。
【００１６】
また、第３には、本発明は、前記第１の構成に、さらに、
前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディアまたはメディア実現方式及び端末の組み合わせが見つからなかった場合、通信を要求したユーザまたは端末に通信不可を通知する手段を設ける構成とする。
【００１７】
また、第４には、本発明は、前記第１の構成に、さらに、
前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディアまたはメディア実現方式及び端末の組み合わせが一部のメディアまたはメディア実現方式についてのみ見つかった場合、見つかった、あるいは見つからなかったメディアまたはメディア実現方式を、通信に要求したユーザまたは端末に通知する手段を持つ構成とする。
【００１８】
また、第５には、本発明は、前記第１の構成において、
前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディアまたはメディア実現方式及び端末の組み合わせが一部のメディアまたはメディア実現方式についてのみ見つかった場合、見つかったメディアまたはメディア実現方式についてのみコール・コネクションの設定・解放を行なう構成とする。
【００１９】
また、第６には、本発明は、前記第１の構成に、さらに、
少なくともユーザの移動、或いは端末の電源ＯＮ／ＯＦＦ、或いは端末の加入者回線への接続／切断のいずれかにより、ユーザ毎に使用可能な端末の記憶内容を更新する前記ユーザ端末記憶手段を持つ構成とする。
【００２０】
また、第７には本発明は、前記第１の構成において、
少なくとも入出力装置の装着／脱却により端末毎に使用可能なメディアまたはメディア実現方式の記憶内容を更新する前記端末メディア記憶手段を持つ構成とする。
【００２１】
また、第８には、本発明は、前記第１の構成において、
通信に用いることができる複数のメディア情報間でメディア変換を行うメディア変換手段と、前記メディア変換手段に関する情報として変換するメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを記憶するメディア変換記憶手段とを持ち、前記決定手段は、通信に参加するユーザ間で共通に使用できるメディアまたはメディア実現方式が存在しない場合に、第１のユーザが使用するメディアまたはメディア実現方式から１つ以上のメディア変換手段を接続して第２のユーザの使用するメディアまたはメディア実現方式へ至るメディア変換手段を探すために必要に応じて繰り返し、メディア変換記憶手段を起動することで前記複数のユーザ間の通信にて各ユーザが使用するメディアまたはメディア実現方式とそのメディアまたはメディア実現方式間を接続するメディア変換手段を決定する構成とする。
【００２２】
また、第９には、本発明は、前記第１の構成において、
複数のメディア情報の演算処理を行なう多地点間メディア処理手段と、前記多地点間メディア処理手段に関する情報としてメディア処理種別と扱えるメディアまたはメディア実現方式と通信システム内での位置情報を記憶するための多地点間メディア処理記憶手段とを持ち、前記決定手段は、通信要求の中で指定された通信形態と、通信に関与する各ユーザが使用するメディアまたはメディア実現方式とにより、必要に応じて、前記多地点間メディア処理手段を決定し、前記コール・コネクション制御手段は、前記通信形態に応じたトポロジーにて前記多地点間メディア処理手段と通信に使用する端末との間のコネクションの設定制御を行なうようにする構成とする。
【００２３】
また、第１０には、本発明においては、ユーザ毎の使用可能端末、端末毎の使用可能メディア実現方式をそれぞれ記憶する手段を予め設け、通信に関与するユーザを識別する情報とメディア種別を識別する情報とを含む通信要求に応じて、前記予め設けられたユーザ毎の使用可能端末を記憶する手段により通信に関与する各ユーザの使用する１つ以上の端末を求め、得られた端末の一部または全てについて、前記予め設けられた、端末と使用可能なメディア実現方式を記憶する手段により通信に関与する各ユーザの使用可能な１つ以上のメディア実現方式を求め、通信に関与する各ユーザが通信に使用する、一つ以上のメディア実現方式および端末の組合せ、および必要に応じて複数のメディア情報間でメディア変換を行なうメディア変換手段を決定し、前記メディア実現方式および端末の組合せ、および必要に応じて使用するメディア変換手段に基きコール・コネクションの設定を行なうようにする構成とする。
【００２４】
また、第１１には、本発明は、前記第１０の構成の発明において、通信要求には通信形態を表す情報がさらに含まれ、指定された通信形態に応じて、複数のメディア情報間の演算処理を行なう多地点間メディア処理手段をさらに決定し、前記メディア実現方式および端末の組合せ、および必要に応じて使用するメディア変換手段および多地点間メディア処理手段に基きコール・コネクションの設定を行なうようにする構成とする。
【００２５】
また、第１２には、本発明は、前記第１０の構成の発明において、前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディア実現方式及び端末の組み合わせが一部のメディア実現方式についてのみ見つかった場合、見つかったメディア実現方式についてのみコール・コネクションの設定・解放を行なうようにする構成とする。
【００２６】
また、第１３には、本発明は、前記第１の構成の発明において、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムにあっては、通信要求に応じて、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する調整手段を設ける構成とする。
【００２７】
また、第１４には、本発明は、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムにおいて、ユーザにより、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する第１の段階と、前記通信要求に応じて、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する第２の段階と、前記決定したメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方が使用可能であれば、前記メディアの組合せまたは端末の組合せに対してコール・コネクションを設定する第３の段階とを有する。
【００２８】
また、第１５には、本発明は、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムであって、ユーザによる、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求の入力を受け付ける通信要求入力手段と通信要求に応じて、通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組決定する候補決定手段と、前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを備えることを特徴とする。
【００２９】
また好ましい例として第１６には、前記ユーザ意図反映手段によって通信要求の変更が選択された場合、変更内容のユーザによる入力を可能にする通信要求変更手段を持つ構成とする。
【００３０】
また好ましい例として第１７には、前記ユーザ意図反映手段による複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整することを可能にする、ユーザ間調整手段を持つ構成とする。
【００３１】
第１８には、本発明は、ネットワークに接続され、１つあるいは複数のメディアを扱える端末装置として、ユーザが、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する通信要求入力手段と前記通信に関与する少なくとも一人のユーザに関して、該ユーザが通信要求発生時点でその通信要求の少なくとも一部を満たすために利用可能な１つまたは複数のメディアの組合せ、または端末の組合せの少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せのいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを備える構成とする。
【００３２】
【発明の実施の形態】
本発明は、発信時にユーザが指定したメディアに応じてメディア処理能力の異なり得る複数の端末の組み合わせを発信毎に決定し、それら端末の組合せに対して接続を実現する。
【００３３】
本発明は、通信システムにユーザ端末記憶手段、端末メディア記憶手段、決定手段、コール・コネクション制御手段を設け、決定手段がユーザからの通信要求に含まれる通信相手ユーザ、使用メディアまたはメディア実現方式に基づき前記ユーザ端末記憶手段および端末メディア記憶手段を使用して通信に使用可能なメディアまたはメディア実現方式および端末の組合せを決定し、決定したメディアまたはメディア実現方式および端末の組合せに対してコール・コネクションを設定・解放を行うことにより実現することができる。
【００３４】
ここに、ユーザ端末記憶手段とは、ユーザ毎に該ユーザの使用可能な端末の情報を記憶するものであり、ユーザを特定する識別子から当該ユーザの使用可能な端末を検索することが可能になっている。また、端末メディア記憶手段とは、端末毎に該端末にて使用可能なメディアまたはメディア実現方式を記憶するものであり、端末を特定する識別子から当該端末において使用可能なメディアまたはメディア実現方式を検索することが可能になっている。
【００３５】
また、決定手段とは、通信に参加する各ユーザに対して、前記ユーザ端末記憶手段および端末メディア記憶手段を使用して、使用可能な端末またはメディアの組合せを検索し、検索結果から実際に通信に使用する端末またはメディアの組合せを選択するものである。コール・コネクション制御手段は指定された端末間に指定されたメディアを伝送するためのコネクションを設定・解放するものである。以上の手段はいずれも例えば計算機によって実現することが可能である。
【００３６】
また本発明は、上記の構成に加えてメディア変換手段およびメディア変換記憶手段を設け、前記決定手段は、通信に参加するユーザ間で共通に使用可能なメディアまたはメディア実現方式が存在しない場合に、第１のユーザが使用するメディアまたはメディア実現方式から１つ以上のメディア変換手段を接続して第２のユーザの使用するメディアまたはメディア実現方式へ至るメディア変換手段を探すために必要に応じて繰り返しメディア変換記憶手段を起動することで前記複数のユーザ間の通信にて各ユーザが使用するメディアまたはメディア実現方式とそのメディアまたはメディア実現方式間を接続するメディア変換手段を決定し、決定したメディアまたはメディア実現方式および端末の組合せ、およびメディア変換手段に対してコール・コネクションを設定・解放を行うことにより実現することができる。
【００３７】
ここに、メディア変換手段は、異なった種類の複数のメディア情報間で一方から他方へあるいは相互にメディア種別またはメディア実現方式を変換する手段である。メディア変換記憶手段は、メディア変換手段毎に該メディア変換手段が変換処理を行うことが可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、メディア変換手段を特定する識別子から当該メディア変換手段が変換処理を行うことが可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報を検索可能なものである。
【００３８】
以上の手段はいずれも例えば計算機あるいは信号処理用プロセッサによって実現することが可能である。
【００３９】
また本発明は、通信システムにユーザ端末記憶手段、端末メディア記憶手段、決定手段、コール・コネクション制御手段、多地点間メディア処理手段および多地点間メディア処理記憶手段を設け、前記決定手段は、通信要求の中で指定された、例えば会議や放送のような通信形態と、通信に関与する各ユーザが使用するメディアまたはメディア実現方式とにより、必要に応じて、前記多地点間メディア処理手段を決定し、前記コール・コネクション制御手段は、前記通信形態に応じたトポロジーにて前記多地点間メディア処理手段と通信に使用する端末との間のコネクションの設定制御を行なうことにより実現することができる。
【００４０】
ここに、多地点間メディア処理手段は、１つの入力メディア情報あるいは複数の入力メディア情報間で複製あるいは合成あるいは加算のような演算処理を行って１つまたは複数のメディア情報を生成し、出力する手段である。
【００４１】
多地点間メディア処理記憶手段は、多地点間メディア処理手段毎に、メディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、多地点間メディア処理手段を特定する識別子から当該多地点間メディア処理手段が実行可能なメディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを検索可能に保持するものである。以上の手段はいずれも例えば計算機あるいは信号処理用プロセッサによって実現することが可能である。
【００４２】
また本発明は、通信システムにユーザ端末記憶手段、端末メディア記憶手段、決定手段、コール・コネクション制御手段および調整手段を設け、ユーザにより、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する第１の段階と、前記通信要求に応じて、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する第２の段階と、前記決定したメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方が使用可能であれば、前記メディアの組合せまたは端末の組合せに対してコール・コネクションを設定する第３の段階とを設けることにより、実現することができる。
【００４３】
ここに、調整手段とは、一つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する手段であり、例えばメディアまたはメディア実現方式の組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方についてのユーザからの要求を受け付け、受け付けた要求に基づき発着ユーザ間で共通に使用可能なメディアまたはメディア実現方式の組合せ、または一つ以上の端末からなる端末の組合せの少なくとも一方をユーザに提示することを必要に応じて繰り返し行うことにより、例えば計算機により実現することが可能である。
【００４４】
（第１の具体的な実施の態様）
本発明の第１の具体的な実施の態様について、その詳細をつぎに説明する。
【００４５】
図１に、本発明によるマルチメディア通信システムのハードウエアブロック構成図を示す。図中、２は通信網、３はユーザ端末記憶手段、４は端末メディア記憶手段、５は決定手段、６はコール・コネクション制御手段、８はメディア変換記憶手段、１０は多地点間メディア処理記憶手段、１２は調整手段、１０１〜１１４はそれぞれ端末であり、７０１、７０２はメディア変換手段、９０１〜９０３は多地点間メディア処理手段である。
【００４６】
これらのうち、メディア変換手段７０１，７０２は、音声および動画像の符号化方式を変換するものであり、多地点間メディア処理手段９０１〜９０３は音声および動画像による会議接続やマルチキャスト接続を行なうためのものである。
【００４７】
また、多地点間メディア処理記憶手段１０は多地点間メディア処理手段毎に、メディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、多地点間メディア処理手段を特定する識別子から当該多地点間メディア処理手段が実行可能なメディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを検索可能に保持するものである。
【００４８】
また、ユーザ端末記憶手段３はユーザ毎に該ユーザの使用可能な端末の情報を記憶するものであり、ユーザを特定する識別子から当該ユーザの使用可能な端末を検索することが可能になっているものである。
【００４９】
端末メディア記憶手段４は、端末毎に該端末にて使用可能なメディアまたはメディア実現方式を記憶するものであり、端末を特定する識別子から当該端末において使用可能なメディアまたはメディア実現方式を検索することが可能になっている。
【００５０】
決定手段５は、通信に参加する各ユーザに対して、前記ユーザ端末記憶手段４および端末メディア記憶手段を使用して、使用可能な端末またはメディアの組合せを検索し、検索結果から実際に通信に使用する端末またはメディアの組合せを選択するものである。すなわち、決定手段５は、端末メディア記憶手段４を参照し、ユーザが使用可能な端末は何であり、どのようなメディアを扱うことができて符号化方式が何であり、接続しようとする相手方のユーザの使用可能な端末が何で、使用する端末の組み合わせをどのようにするか、といったことを決定する機能を有するものである。
【００５１】
また、コール・コネクション制御手段６は指定された端末間に指定されたメディアを伝送するためのコネクションを設定・解放するものであって、決定手段５からの指示内容に従って、コール・コネクションを設定するものである。
【００５２】
メディア変換記憶手段８は通信網に接続されている各端末のメディア変換手段毎の機能情報等を記憶するものであり、メディア変換手段毎に、変換メディア（符号化方式も含む）種別およびアドレス（接続時の宛先）を記憶している。また、多地点間メディア処理手段１１３は１つの入力メディア情報あるいは複数の入力メディア情報間で複製あるいは合成あるいは加算のような演算処理を行って１つまたは複数のメディア情報を生成し、出力する手段である。
【００５３】
調整手段１２は、一つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する機能を有するものである。また、多地点間メディア処理記憶手段１１４は、多地点間メディア処理手段１１３毎に、メディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、多地点間メディア処理手段を特定する識別子から当該多地点間メディア処理手段１１３が実行可能なメディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを検索可能に保持するものである。
【００５４】
前記各端末１０１〜１１４は通信網２を介して相互に接続されていて、それぞれ固有の端末ＩＤ（識別コード）を持つ。ここでは、各端末１０１〜１１４にはそれぞれ、端末１０１〜１１４に付した符号に因んで、端末１０１にはその端末ＩＤを“１０１”、端末１０２にはその端末ＩＤを“１０２”、端末１０３にはその端末ＩＤを“１０３”と云った具合に付与してあるものとする。
【００５５】
これら端末のうち、端末１０１は音声および動画像を扱うことが可能なマルチメディア端末であり、端末１０２および端末１０７は動画像を扱える計算機端末（パソコンやワークステーション等）であり、端末１０３，１０４，１０５，１０６は音声を扱える電話端末である。
【００５６】
端末１０８は音声および動画像を扱うことが可能な計算機端末である。また、端末１０９は前記の決定手段５、調整手段１２およびコール・コネクション制御手段６の機能を有する端末であり、端末１１０は前記のユーザ端末記憶手段３および端末メディア記憶手段４の機能を有する端末である。
【００５７】
また、端末１１１には音声および動画像の符号化方式を変換するメディア変換手段７０１，７０２があり、端末１１２は前記のメディア変換記憶手段８の機能を有するものである。
【００５８】
端末１１３は、音声および動画像による会議接続やマルチキャスト接続を行なうための多地点間メディア処理手段９０１〜９０３の機能を有する端末であり、端末１１４は多地点間メディア処理記憶手段１０の機能を有する端末である。
【００５９】
なお、ユーザ端末記憶手段３、端末メディア記憶手段４、決定手段５、コール・コネクション制御手段６、メディア変換手段７０１，７０２、メディア変換記憶手段８、多地点間メディア処理手段９０１〜９０３、多地点間メディア処理記憶手段１０、調整手段１２の各手段は、必ずしも計算機端末上に実現する必要はなく、これらの各手段の一部または全てを、交換機やサーバ装置のようなネットワーク設備に設ける構成としても良い。
【００６０】
図２にユーザ端末記憶手段３の記憶情報例を、また、図３に端末メディア記憶手段４の記憶情報例をそれぞれ示す。図２に示すように、ユーザ端末記憶手段３にはユーザ毎にそのユーザのＩＤ（識別コード）と、そのユーザのしよう可能な端末のＩＤが記憶されている。また、図３に示すように端末メディア記憶手段４には、端末毎のＩＤと、その端末のメディア種別が符号化方式の情報と共に記憶されている。
【００６１】
このような構成の第１の具体的な実施の態様にかかる本システムにおける各種の具体的動作例を説明する。はじめに、ユーザＡが音声および動画像によるユーザＢとの通信要求を起動した場合を例にとって第１の具体的動作例として説明する。
【００６２】
〔第１の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第１の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤが“１０２”，“１０３”，“１０４”の端末を使用可能なユーザＢに対して、音声および動画像によるユーザＢとの通信要求を起動した場合を例に説明する。端末ＩＤ“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤ“１０２”の端末１０２は、動画像を扱える計算機端末（パソコンやワークステーション等）であり、端末ＩＤが“１０３”の端末１０３と、端末ＩＤが“１０４”の端末１０４は、音声を扱える電話端末である。本例におけるメッセージシーケンスを図４に示す。
【００６３】
この場合、まずはじめに通信要求元のユーザＡは通信要求において、通信相手としてユーザＢを、そして、使用メディアとして音声および動画像を指定して通信網２にこの通信要求を出す。すると、通信網２はこの通信要求を決定手段の機能を有する端末１０９に通知し、この端末１０９ではこの通信要求を自端末上の決定手段５に通知する（図４中メッセージＭ４０１）。
【００６４】
この通信要求を受けた決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ４０２）、参照応答（Ｍ４０３）により、ユーザＡが端末１０１を、ユーザＢが端末１０２，１０３および１０４を、それぞれ使用可能であることを認識する。
【００６５】
次に決定手段５は端末１１０の端末メディア記憶手段４を参照し（Ｍ４０４）、端末メディア記憶手段４からの参照応答（Ｍ４０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能であり、ユーザＢが使用可能な端末１０２は動画像を符号化方式ｖ１にて、端末１０３は音声を符号化方式ａ１にて、端末１０４は音声を符号化方式ａ２にて、それぞれ使用可能である」ことを認識する。
【００６６】
この認識結果をもとに、決定手段５はユーザＢに対して通信要求を通知する（Ｍ４０６）。この通信要求により、ユーザＢ側からは承認通知（Ｍ４０７）が出される。
【００６７】
次に、決定手段５は前記通信要求に対するユーザＢからの承認通知（Ｍ４０７）を受けて、ユーザＡ側については、「音声符号化方式ａ１、動画像符号化方式ｖ１を扱える端末１０１」を使用し、ユーザＢ側については、「音声を扱うためには符号化方式ａ１を扱える端末１０３」を使用し、「動画像を扱うためには符号化方式ｖ１を扱える端末１０２」を使用することを決定し、この決定内容をコール・コネクション制御手段６に通知する（Ｍ４０８）。
【００６８】
すると、コール・コネクション制御手段６はこの決定手段５からの通知内容に従って、音声については端末１０１と端末１０３とを接続し、動画像については端末１０１と端末１０２とを接続するようにコール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクション設定応答を通知する（Ｍ４０９）。
【００６９】
これを受けて決定手段５は通信開始をユーザＡ、ユーザＢに通知する（Ｍ４１０，Ｍ４１１）。
【００７０】
このようにして設定されたコネクションの設定状態を図５に示す。なお、図中１１はコネクションであり、ユーザＡ側については、音声符号化方式ａ１、動画像符号化方式ｖ１を扱える端末１０１を使用し、ユーザＢ側については、音声を扱うためには符号化方式ａ１を扱える端末１０３を使用して互いに音声符号化方式ａ１を使用したコネクション１１を形成し、また、動画像については、ユーザＢ側では動画像を扱うためには符号化方式ｖ１を扱える端末１０２を使用してユーザＡ側とは端末１０１と符号化方式ｖ１を使用したコネクション１１を形成して通信を行なうようにした様子を示している。
【００７１】
以上は、ユーザＡが音声および動画像によるユーザＢとの通信要求を起動した場合を例にとった動作例であった。
【００７２】
次に、ユーザＡが音声および動画像によるユーザＣとの通信要求を起動した場合を例にとって第２の具体的動作例を説明する。
【００７３】
〔第２の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第２の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０５”の端末を使用可能なユーザＣに対して、音声および動画像によるユーザＣとの通信要求を起動した場合を例に説明する。端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤが“１０５”の端末１０５は、音声のみを扱える電話端末である。
【００７４】
本例におけるメッセージシーケンスを図６に示す。
【００７５】
音声および動画像によるユーザＣとの通信要求を起動する場合、ユーザＡは通信要求において、通信相手としてユーザＣを、使用メディアとして音声および動画像を指定する。
【００７６】
この通信要求は決定手段５に通知される（図６中メッセージＭ６０１）。すると決定手段５は、ユーザ端末記憶手段３の内容を参照し（Ｍ６０２）、その参照応答（Ｍ６０３）により、「ユーザＡが端末１０１を、また、ユーザＣが端末１０５を、それぞれ使用可能である」ことを認識する。
【００７７】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ６０４）、参照応答（Ｍ６０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能であり、ユーザＣが使用可能な端末１０５は音声を符号化方式ａ１にて使用可能である」ことを認識する。
【００７８】
その結果、決定手段５はユーザＡとユーザＣの間で共通に使用できるメディアは「符号化方式ａ１の音声のみ」であると判定する。
【００７９】
この認識結果をもとに決定手段５は、ユーザＣに対し、通信要求を通知する（Ｍ６０６）。
【００８０】
このようにしてユーザＣに対して、ユーザＡから音声と動画像による通信要求があると、決定手段５はどの端末が使用可能で、ユーザＡとユーザＣの間で共通に使用できるメディアは何かを判定し、その判定の結果から、そのうちの音声のみにより通信が可能であることを知って、音声のみによる通信を行なうことを通知することになる（Ｍ６０６）。そして、この通信要求に対するユーザＣからの承認通知（Ｍ６０７）を受けて、決定手段５はユーザＡに対しては音声のみにて接続が可能であることを通知する（（部分接続可能通知）Ｍ６０８）。
【００８１】
この通知に対して、ユーザＡは音声のみによる接続を要求し（Ｍ６０９）、これによって決定手段５は端末１０１と端末１０５との間を符号化方式ａ１の音声にて接続するようコール・コネクション制御手段６に指示する（Ｍ６１０）。
【００８２】
コール・コネクション制御手段６は通知内容に従って、コール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクション設定応答を通知する（Ｍ６１１）。この通知を受けると、決定手段５は通信開始をユーザＡ、ユーザＣに通知する（Ｍ６１２，Ｍ６１３）。そして端末１０１と端末１０５との間での音声通信を可能にする。
【００８３】
このようにして設定されたコネクションの設定状態を図７に示す。図７においては、端末１０１と端末１０５との間で符号化方式ａ１を使用したコネクションが成立し、端末１０１と端末１０５との間で音声通信を行なうことができるようになった様子を示している。
【００８４】
以上の第２の具体的動作例は、ユーザＡが音声および動画像によるユーザＣとの通信要求を起動した場合の例であった。次に、ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合を例にとって、第３の具体的動作例を説明する。
【００８５】
〔第３の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第３の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０６”，“１０７”の端末を使用可能なユーザＤに対して、音声および動画像による通信要求を起動した場合を例に説明する。端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤが“１０６”の端末１０６は、音声のみを扱える電話端末であり、端末ＩＤが“１０７”の端末１０７は、動画像を扱える計算機端末（パソコンやワークステーション等）である。
【００８６】
ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合の一例としてのメッセージシーケンスを図８に示す。
【００８７】
図８に従って説明する。ユーザＡは通信要求において、通信相手としてユーザＤを、また、使用メディアとして音声および動画像を指定したとする。
【００８８】
この通信要求は端末１０８上の決定手段５に通知される（図８中メッセージＭ８０１）。すると、決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ８０２）、その参照応答（Ｍ８０３）により、ユーザＡが端末１０１を、ユーザＤが端末１０６および端末１０７を、それぞれ使用可能であることを認識する。
【００８９】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ８０４）、その参照応答（Ｍ８０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能」であり、「ユーザＤが使用可能な端末１０６は音声を符号化方式ａ２にて使用可能」であり、また、「ユーザＤが使用可能な端末１０７は、動画像を符号化方式ｖ２にて使用可能」であることを認識する。
【００９０】
その結果、決定手段５は、「ユーザＡとユーザＤの間で共通に使用できるメディアは存在しない」と判定し、メディア変換記憶手段１０を参照する（Ｍ８０６）。
【００９１】
図９にメディア変換記憶手段８の構成を示す。図に示すように、メディア変換記憶手段８は、メディア変換手段毎に、変換メディア（符号化方式も含む）種別およびアドレス（接続時の宛先）を記憶している。
【００９２】
メディア変換記憶手段８の参照応答（Ｍ８０７）により、メディア変換記憶手段８に記憶されているメディア変換手段のうち、メディア変換手段７０１および７０３を使用することにより、音声については、「符号化方式をａ１からａ２へ、また、ａ２からａ１へ相互変換」することが可能であり、動画像については、「符号化方式をｖ１からｖ２へ、また、ｖ２からｖ１へ相互変換」することが可能であり、その結果、これを利用すればユーザＡとユーザＤの各使用メディア間を相互に接続することが可能であることを認識する。
【００９３】
そして、この認識した内容に基づき、決定手段５はメディア変換手段９０１および９０３を選択することを決定する。
【００９４】
そこで、決定手段５はユーザＤに対して通信要求を通知する（Ｍ８０８）。決定手段５は前記通信要求に対するユーザＤからの承認通知（Ｍ８０９）を受けて、端末１０１とメディア変換手段９０１との間を、符号化方式ａ１の音声にて、そして、端末１０１とメディア変換手段９０３との間を符号化方式ｖ１の動画像にてそれぞれ接続し、また、メディア変換手段７０１と端末１０６との間を、符号化方式ａ２の音声にて、そして、メディア変換手段７０３と端末１０７との間を、符号化方式ｖ２の動画像にてそれぞれ接続するようコール・コネクション制御手段６に指示する（Ｍ８１０）。
【００９５】
コール・コネクション制御手段６は、決定手段５から指示された内容に従って、コール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクションの設定応答を通知する（Ｍ８１１）。
【００９６】
これを受けて決定手段５は通信開始をユーザＡ、ユーザＤに通知する（Ｍ８１２，Ｍ８１３）。
【００９７】
このようにして設定されたコネクションの設定状態を図１０に示す。すなわち、音声通信用としては、端末１０１と端末１０６との間にメディア変換手段７０１を介して形成されるコネクション１１により、符号化方式ａ１とａ２の相互変換を利用した音声通信路が開設され、動画用としては端末１０１と端末１０７との間にメディア変換手段７０３を介して形成されるコネクション１１により、符号化方式ｖ１とｖ２の相互変換を利用した動画像授受の経路が開設され、端末１０１とメディア変換手段９０１との間を符号化方式ａ１の音声にて授受し、そして、端末１０１とメディア変換手段９０３との間を符号化方式ｖ１の動画像にて授受し、また、メディア変換手段７０１と端末１０６との間を、符号化方式ａ２の音声にて授受し、そして、メディア変換手段７０３と端末１０７との間を、符号化方式ｖ２の動画像にて授受する。
【００９８】
この結果、互いに符号化方式が異なる音声と動画を、ユーザＡとユーザＣとの間で授受することができるようになる。
【００９９】
以上の第３の具体的動作例は、ユーザＡが音声および動画像によるユーザＤに対しての通信要求を起動した場合の例であった。次に、ユーザＡが音声および動画像によるユーザＢ，Ｄとの会議通信を要求した場合を例にとって、第４の具体的動作例を説明する。
【０１００】
〔第４の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第４の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０２”，“１０３”，“１０４”の端末を使用可能なユーザＢと、端末ＩＤ“１０６”，“１０７”の端末を使用可能なユーザＤを対象に、会議通信を要求した場合を例に説明する。
【０１０１】
会議通信においては、音声および動画像による通信が必要である。端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤ“１０２”の端末１０２は、動画像を扱える計算機端末（パソコンやワークステーション等）であり、端末ＩＤが“１０３”の端末１０３と、端末ＩＤが“１０４”の端末１０４は、音声を扱える電話端末である。
【０１０２】
また、端末ＩＤが“１０６”の端末１０６は、音声のみを扱える電話端末であり、端末ＩＤが“１０７”の端末１０７は、動画像を扱える計算機端末（パソコンやワークステーション等）である。
【０１０３】
ユーザＡが音声および動画像によるユーザＢ，Ｄとの会議通信を要求した場合を例にとって説明する。本実施例におけるメッセージシーケンスを図１１に示す。
【０１０４】
会議通信を要求するにあたって、ユーザＡは通信要求において、通信相手としてユーザＢ，ユーザＤを、使用メディアとして音声および動画像を、通信形態として会議を、それぞれ指定する。この通信要求は端末１０８上の決定手段５に通知される（図１１中メッセージＭ１１０１）。
【０１０５】
すると決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ１１０２）、参照応答（Ｍ１１０３）により、ユーザＡが端末１０１を、ユーザＢが端末１０２，１０３および１０４を、ユーザＤが端末１０６を、それぞれ使用可能であることを認識する。
【０１０６】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ１１０４）、その参照応答（Ｍ１１０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能」であり、「ユーザＢが使用可能な端末１０２は動画像を符号化方式ｖ１にて、また、端末１０３は音声を符号化方式ａ１にて、そして、端末１０４は音声を符号化方式ａ２にて、それぞれ使用可能」であり、「ユーザＤが使用可能な端末１０６は音声を符号化方式ａ２にて、また、１０７は動画像を符号化方式ｖ２にてそれぞれ使用可能」であることを認識する。
【０１０７】
さらに、決定手段５は通信形態が会議通信であることを受けて、多地点間メディア処理記憶手段１０を参照する（Ｍ１１０６）。
【０１０８】
図１２に多地点間メディア処理記憶手段１０の構成を示す。ここに示すように、多地点間メディア処理記憶手段１０は、多地点間メディア処理手段毎に、メディア処理種別( 会議、放送など) 、取り扱い符号化方式およびアドレス（接続時の宛先）を記憶している。
【０１０９】
多地点間メディア処理記憶手段１０からの参照応答（Ｍ１１０７）により、決定手段５は多地点間メディア処理記憶手段１０に記憶される多地点間メディア処理手段のうち、「会議メディア処理をサポートする多地点間メディア処理手段であって、使用可能符号化方式がａ１およびｖ１であるもの」として、多地点間メディア処理手段９０１があることを知る。そして、決定手段５はこの多地点間メディア処理手段９０１を選択する。
【０１１０】
さらに、決定手段５は、多地点間メディア処理手段９０１と端末１０６，１０７とを接続するために、メディア変換記憶手段１０を参照し（Ｍ１１０８）、その参照応答（Ｍ１１０９）により、「音声符号化方式ａ１とａ２間」を変換するメディア変換手段としてメディア変換手段７０１があり、また、「動画像符号化方式ｖ１とｖ２間」を変換するメディア変換手段としてメディア変換手段７０３があることを知る。
【０１１１】
そして、決定手段５は「音声符号化方式ａ１とａ２間」、「動画像符号化方式ｖ１とｖ２間」をそれぞれ変換するメディア変換手段として、メディア変換手段７０１およびメディア変換手段７０３を選択する。
【０１１２】
これらの選択が終わると、決定手段５はユーザＢおよびユーザＤに対して通信要求を通知する（Ｍ１１１０，Ｍ１１１１）。ユーザＢおよびユーザＤからは通信要求に対する承認通知（Ｍ１１１２，Ｍ１１１３）が返される。
【０１１３】
決定手段５は、前記通信要求に対するユーザＢおよびユーザＤからの承認通知（Ｍ１１１２，Ｍ１１１３）を受けて、端末１０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声および符号化方式ｖ１の動画像にて、また、端末１０２と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて、そして、端末１０３と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて、また、端末１０６とメディア変換手段７０１との間を符号化方式ａ２の音声にて、また、メディア変換手段７０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて、また、端末１０７とメディア変換手段７０３との間を符号化方式ｖ２の動画像にて、そして、メディア変換手段７０３と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて、それぞれ接続するようコール・コネクション制御手段６に指示する（Ｍ１１１４）。
【０１１４】
すると、コール・コネクション制御手段６は、決定手段５から指示された内容に従って、コール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクションの設定応答を通知する（Ｍ１１１５）。これを受けて決定手段５は、通信開始をユーザＡ、ユーザＢ、ユーザＤに通知する（Ｍ１１１５，Ｍ１１１６，Ｍ１１１７）。
【０１１５】
このようにして設定されたコネクションの設定状態を図１３に示す。図では、端末１０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声および符号化方式ｖ１の動画像にて授受するようにし、また、端末１０２と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて授受するようにし、そして、端末１０３と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて授受するようにし、また、端末１０６とメディア変換手段７０１との間を符号化方式ａ２の音声にて授受するようにし、また、メディア変換手段７０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて授受するようにし、また、端末１０７とメディア変換手段７０３との間を符号化方式ｖ２の動画像にて授受するようにし、そして、メディア変換手段７０３と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて授受するようにした様子が示されている。
【０１１６】
この結果、端末１０１と多地点間メディア処理手段９０１との間では符号化方式ａ１の音声と、符号化方式ｖ１の動画像が授受され、また、端末１０２と多地点間メディア処理手段９０１との間では符号化方式ｖ１の動画像が授受され、そして、端末１０３と多地点間メディア処理手段９０１との間では符号化方式ａ１の音声が授受され、また、端末１０６とメディア変換手段７０１との間では符号化方式ａ２の音声が授受され、また、メディア変換手段７０１と多地点間メディア処理手段９０１との間では符号化方式ａ１の音声が授受され、また、端末１０７とメディア変換手段７０３との間を符号化方式ｖ２の動画像が授受され、そして、メディア変換手段７０３と多地点間メディア処理手段９０１との間では符号化方式ｖ１の動画像が授受されて、ユーザ間での符号化方式の違いと端末の機能の違いを乗り越えた音声と動画像による会議通信ができることになる。
【０１１７】
以上の第４の具体的動作例は、ユーザ間での使用可能な端末の機能と符号化方式の違いを乗り越えての会議通信を可能にする例を説明した。次にユーザＡが音声および動画像によるユーザＥとの通信要求を起動した場合を例にとって第５の具体的動作例を説明する。
【０１１８】
〔第５の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第５の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０８”の端末を使用可能なユーザＥに対して、音声および動画像による通信要求を起動した場合を例にとって説明する。
【０１１９】
端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤ“１０８”の端末１０８は、音声と動画像とを扱える端末である。しかし、端末１０１が動画像を符号化方式ｖ１で扱い、音声を符号化方式ａ１で扱うものであるのに対して、端末１０８は動画像および音声を単一の符号化方式に統合した符号化方式ａｖ１を扱うものとなっているとする。
【０１２０】
本例におけるメッセージシーケンスを図１４に示す。
【０１２１】
図１４に従って説明する。ユーザＡは通信要求において、通信相手としてユーザＥを、使用メディアとして音声および動画像を指定する。この通信要求は決定手段５に通知される（図１４中メッセージＭ１４０１）。これにより、決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ１４０２）、その参照応答（Ｍ１４０３）により、ユーザＡが端末１０１を、ユーザＥが端末１０８を、それぞれ使用可能であることを認識する。
【０１２２】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ１４０４）、その参照応答（Ｍ１４０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能」であり、「ユーザＥが使用可能な端末１０８は、動画像および音声を単一の符号化方式に統合した符号化方式ａｖ１にて使用可能」であることを認識する。
【０１２３】
この認識の結果、ユーザＡ、ユーザＥの使用可能な符号化方式が異なることを知った決定手段５はメディア変換が可能か否かを調べるために、メディア変換記憶手段１０を参照する（Ｍ１４０６）。
【０１２４】
メディア変換記憶手段１０の構成は第３の具体的動作例で用いた図９と同一である。参照応答（Ｍ１４０７）により、決定手段５は、符号化方式ａ１、ｖ１と符号化方式ａｖ１との間を相互に変換することができるメディア変換手段が存在しないことを認識する。
【０１２５】
その結果、決定手段５は、ユーザＡとユーザＥとの間で相互接続可能な符号化方式が存在しないと判断し、ユーザＡに通信不可であることを通知する（Ｍ１４０８）。ゆえに、ユーザＡとユーザＥとの間では通信は成立しない。
【０１２６】
以上の第５の具体的動作例は扱える符号化方式が不一致で、符号化方式を変換することのできるメディア変換手段も存在しない場合の例を説明した。次にユーザの使用中端末をユーザ端末記憶手段３に自動的に反映させるための処理手順について第６の具体的動作例として説明する。
【０１２７】
〔第６の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第６の具体的動作例として、ユーザの使用中の端末をユーザ端末記憶手段３に自動的に反映させるための処理手順について説明する。端末が計算機端末である場合、そのユーザが当該計算機端末にログインする際に、ログイン手順によってユーザ端末記憶手段３を更新するようにシステムを構成する。
【０１２８】
例えば、ユーザＡは通常はマルチメディア端末である端末１０１を使用するが、他の計算機端末にもログインする場合があるとすると、ユーザ端末記憶手段３には通常はユーザＣに対応する端末として端末１０１が設定される。そして、ユーザＡが例えば端末１０７にログインした場合には、ログイン手順に伴い、端末１０７からユーザ端末記憶手段３にユーザＡの使用端末の変更が通知され、ユーザ端末記憶手段３のユーザＡに対応する端末が端末１０７に変更される。
【０１２９】
同様にユーザＡが端末１０７からログアウトすると、ログアウト手順に伴い、端末１０７からユーザ端末記憶手段３にユーザＡの使用端末の変更が通知され、ユーザ端末記憶手段３のユーザＡに対応する端末がデフォールトの端末１０１に変更される。
【０１３０】
なお、本例においては端末へのログイン／ログアウトにより、端末からユーザ端末記憶手段３へ使用端末の変更が通知される例を示したが、ユーザ端末記憶手段３が定期的に各端末へ、ユーザのログイン状況を問い合わせる構成とすることにより、使用端末を更新するようにしても良い。また、ユーザが端末を使用しているか否かは、必ずしもユーザのログイン状況によって更新するように構成する必要はなく、例えば端末の電源のＯＮ／ＯＦＦ、ユーザの位置情報、あるいは端末の加入者回線への接続/ 切断等を検出した結果によって更新するように構成してもよい。本実施例の方法によれば、ユーザがどの端末を使用中であるかという状態に基いて自動的にユーザ端末記憶手段を適切に更新することが可能となる。つぎに、端末のメディア入出力能力の有無を端末メディア記憶手段４に自動的に反映させるための処理手順を、第７の具体的動作例として説明する。
【０１３１】
〔第７の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第７の具体的動作例として、端末のメディア入出力能力の有無を端末メディア記憶手段４に自動的に反映させるための処理手順について説明する。
【０１３２】
計算機端末などにおいては、取り扱えるメディアの種類や内容は、どのような機能を有する入出力装置（インタフェース）が装着されているかにかかる。従って、現在どのような入出力装置が装着され、それが使用可能になっているかを管理する必要がある。
【０１３３】
この場合、端末毎に、その端末に対しての入出力装置が装着／脱却されると、当該端末上の入出力管理機能から端末メディア記憶手段４へ、使用メディアまたは符号化方式の追加／削除が通知されるようにシステムを構成しておく。
【０１３４】
例えば、端末１０７に音声入出力装置が装着され、音声情報の符号化／復号化を行ない、当該入出力装置を駆動するソフトウェア（ドライバ）が実装されると、該ソフトウェアまたは当該端末上の入出力管理機能から端末メディア記憶手段４へ使用符号化方式の追加登録要求が通知され、端末メディア記憶手段４が更新されるといったようにする。
【０１３５】
逆に、音声入出力装置が脱却された際には当該端末上の入出力管理機能が当該入出力装置の脱却を検出し、端末メディア記憶手段４に使用符号化方式の削除要求が通知され、端末メディア記憶手段４が更新されるようにする。
【０１３６】
この結果、例えば、端末１０７に音声入出力装置が装着され、音声情報の符号化／復号化を行ない、当該入出力装置を駆動するソフトウェアが実装されると、該ソフトウェアまたは当該端末上の入出力管理機能から端末メディア記憶手段４へ使用符号化方式の追加登録要求が通知され、端末メディア記憶手段４が更新され、音声入出力装置が脱却された際には当該端末上の入出力管理機能が当該入出力装置の脱却を検出し、端末メディア記憶手段４に使用符号化方式の削除要求が通知され、端末メディア記憶手段４が更新されることになる。
【０１３７】
つぎに、ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合のもう一つの例について、第８の具体的動作例として説明する。
【０１３８】
〔第８の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第８の具体的動作例として、ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合のもう一つの例について説明する。
【０１３９】
ユーザＡの使用可能な端末１０１は音声および動画像が扱える端末であり、ユーザＤの使用可能な端末１０６，１０７は前者が音声のみの電話端末、後者は動画を扱えるが音声は扱えない計算機端末である。
【０１４０】
本例におけるメッセージシーケンスを図１５に示す。本例では、一つまたは、複数のメディアまたは、メディア実現方式からなるメディアの組み合わせ、または、一つ以上の端末からなる端末の組み合わせの少なくとも一方を、通信に関与するユーザ間で調整して決定する機能を有する調整手段１２を使用する。
【０１４１】
図１５を参照して説明する。ユーザＡは通信要求において、通信相手としてユーザＤを、使用メディアとして音声および動画像を指定する。この通信要求は調整手段１２に通知される（図１５中メッセージＭ１５０１）。すると調整手段１２は、ユーザＤに対して、ユーザＡから通信要求が起動されたことを通知する（Ｍ１５０２）。
【０１４２】
この通知に対してユーザＤは、音声のみによる通信が可能であることを、この通信要求に対して応答する（Ｍ１５０３）。この応答を調整手段１２が受け取ると、当該調整手段１２はユーザＡからの通信要求とユーザＤからの通信要求とが異なるメディアの組合せであることを知る。そして、これにより、調整手段１２はユーザＡおよびユーザＤに対して、両者が共通に希望しているメディアである音声のみにて接続して良いかどうかを問い合わせる（Ｍ１５０４，Ｍ１５０５）。
【０１４３】
本例では、この問い合わせに対してユーザＡが承認するものとする。従って、ユーザＡはこの問い合わせに対して承認する旨を調整手段１２に通知する（Ｍ１５０６）。
【０１４４】
ユーザＤも当初要求したメディア通りであるので承認するとして調整手段１２に応答する（Ｍ１５０７）。
【０１４５】
なお、本例のユーザＤのように、各ユーザへの問い合わせ内容が、そのユーザの当初の要求通りである場合には問い合わせ、承認手順は省略しても良い。
【０１４６】
調整手段１２はユーザＡ，Ｄの双方から承認の応答を得たことにより、次にユーザ端末記憶手段３を参照し（Ｍ１５０８）、その参照応答（Ｍ１５０９）により、ユーザＡ側では端末１０１を、ユーザＤ側では端末１０６および端末１０７を、それぞれ使用可能であることを認識する。
【０１４７】
次に調整手段１２は端末メディア記憶手段４を参照し（Ｍ１５１０）、その参照応答（Ｍ１５１１）により、ユーザＡが使用可能な端末１０１は音声を符号化方式ａ１にて使用可能であり、ユーザＤが使用可能な端末１０６は音声を符号化方式ａ２にて使用可能であることを認識する。
【０１４８】
その結果、調整手段１２はユーザＡとユーザＤの間で共通に使用できる符号化方式は存在しないと判断し、メディア変換記憶手段１０を参照する（Ｍ１５１２）。メディア変換記憶手段１０の構成は第３の具体的動作で説明したものと同様である。
【０１４９】
メディア変換記憶手段１０の参照応答（Ｍ１５１３）により、調整手段１２はメディア変換記憶手段１０に記憶されているメディア変換手段のうち、メディア変換手段７０１を使用することにより、音声の符号化方式をａ１からａ２へ、ａ２からａ１へと変換することが可能であり、ユーザＡとユーザＤの間を音声メディアにて接続可能であることを認識する。
【０１５０】
そして、この認識結果に基づき当該音声の符号化方式の相互変換できるメディア変換手段であるメディア変換手段７０１を選択し、端末１０１とメディア変換手段７０１との間を符号化方式ａ１の音声にて、メディア変換手段７０１と端末１０６との間を符号化方式ａ２の音声にてそれぞれ接続するようコール・コネクション制御手段６に指示する（Ｍ１５１４）。
【０１５１】
コール・コネクション制御手段６は指示された内容に従ってコール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、調整手段１２にコール・コネクションの設定応答を通知する（Ｍ１５１５）。
【０１５２】
これを受けて調整手段１２は通信開始をユーザＡ、ユーザＤに通知する（Ｍ１５１６，Ｍ１５１７）。
【０１５３】
このようにして設定されたコネクションの設定状態を図１６に示す。図では音声の符号化方式ａ１とａ２の相互変換できるメディア変換手段であるメディア変換手段７０１を介して、端末１０１とメディア変換手段７０１との間を符号化方式ａ１の音声にて、メディア変換手段７０１と端末１０６との間を符号化方式ａ２の音声にてそれぞれ接続して音声授受をするようにした様子が示されている。
【０１５４】
以上説明したように、第１の具体的な実施の態様によれば、複数メディアを含む通信を要求する際に、ユーザは一つの通信要求において、通信に参加するユーザ、使用するメディア、および必要に応じて通信形態を指定することにより、通信に参加する他のユーザの端末環境、使用可能符号化方式等を意識することなく、通信に参加するユーザ毎に適切な端末の組合せを選択し、選択した端末に対してコール・コネクションを設定することが可能となるという効果が得られる。
【０１５５】
以上は、相手方との関係で利用できるメディアをシステム側が自動的に選択して、コール・コネクションを設定するようにした例であった。次にこれを自動ではなく、ユーザに選択する余地を残した例を第２の具体的な実施の態様として説明する。
【０１５６】
（第２の具体的な実施の態様）
すなわち、ここでは本発明のもう一つの目的である、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにして、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現する例を第２の具体的な実施の態様として説明する。
【０１５７】
そのためにここでは、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムであって、ユーザによる、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求の入力を受け付ける通信要求入力手段と通信要求に応じて、通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組決定する候補決定手段と、前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを備える構成とする。
【０１５８】
また好ましくは、前記ユーザ意図反映手段によって通信要求の変更が選択された場合、変更内容のユーザによる入力を可能にする通信要求変更手段を持つ構成とする。
【０１５９】
また好ましくは、前記ユーザ意図反映手段による複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整することを可能にする、ユーザ間調整手段を備える構成とする。
【０１６０】
また、端末装置は、ネットワークに接続され、１つあるいは複数のメディアを扱える端末装置であって、ユーザが、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する通信要求入力手段と前記通信に関与する少なくとも一人のユーザに関して、該ユーザが通信要求発生時点でその通信要求の少なくとも一部を満たすために利用可能な１つまたは複数のメディアの組合せ、または端末の組合せの少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せのいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを設ける構成とする。
【０１６１】
図１７に第２の具体的な実施の態様としての通信システムの構成例をブロック図で示す。図において、１３００はユーザ端末記憶手段、１４００は端末メディア記憶手段、１５００は候補決定手段、１６００はコール・コネクション制御手段、１８００はメディア変換記憶手段、２３００は通信要求入力手段、２４００はユーザ意図反映手段、２５００はユーザ間調整手段、２６００は通信要求変更手段、３０００は多地点間メディア処理記憶手段である。
【０１６２】
これらのうち、通信要求入力手段２３００は、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求のユーザによる入力を受け付ける機能を有するものである。
【０１６３】
また、候補決定手段１５００は、通信要求に応じて通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組の候補を決定する機能を有するものである。
【０１６４】
より具体的には、前記候補決定手段１５００は、通信に関与するユーザの各々に対して、ユーザ端末記憶手段１３００と端末メディア記憶手段１４００により、前記各ユーザが使用可能な１つまたは複数のメディアの組合せの候補、または端末の組合せ候補の少なくとも一方を決定する。
【０１６５】
更に、前記候補決定手段１５００は、通信に参加するユーザ間で共通に使用できるメディアまたはメディア実現方式が存在しない場合に、第１のユーザが使用するメディアまたはメディア実現方式から１つ以上のメディア変換手段を接続して第２のユーザの使用するメディア、またはメディア実現方式へ至るメディア変換手段を探すために必要に応じて繰り返しメディア変換記憶手段１８００を起動することで、前記複数のユーザ間の通信にて各ユーザが使用するメディアまたはメディア実現方式間を接続するメディア変換手段があるか否かに関する情報を得て、その情報を加味して候補を決定する方式としても良い。
【０１６６】
あるいは、前記候補決定手段１５００は、通信要求の中で指定された通信形態と、通信に関与する各ユーザが使用するメディアまたはメディア実現方式とにより、多地点間メディア処理記憶手段３０００を起動して、必要に応じて多地点間メディア処理手段を決定する方式としても良い。
【０１６７】
ユーザ意図反映手段２４００は、前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザにより入力させ、決定させるものである。
【０１６８】
通信要求変更手段２６００は、通信要求の変更内容のユーザによる入力を可能にするものである。
【０１６９】
ユーザ間調整手段２５００は、前記ユーザ意図反映手段による複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整することを可能にするものである。
【０１７０】
コール・コネクション制御手段１６００は、前記メディアの組合せの候補または端末の組合せの候補の中からの前記ユーザ意図反映手段によるユーザの選択に基づき、コール・コネクションの設定・開放を行なうものである。
【０１７１】
通信要求入力手段２３００、ユーザ意図反映手段２４００、ユーザ間調整手段２５００、通信要求変更手段２６００は、ユーザが利用する少なくとも１つの端末で使用できるユーザＩ／Ｆ（インタフェース）を介して、ユーザに情報を提供し、ユーザからの入力を受け付けるものである。
【０１７２】
ユーザＩ／Ｆは、例えばパソコン、ワークステーションの画面・キーボード・マウス、あるいは多機能電話の表示画面とダイヤル及びボタン、ないしは通常の電話のマイク・スピーカと交換機内に備えられた音声認識・合成機能を組み合わせたものなどである。前記各手段は、このようなユーザＩ／Ｆとそれを制御する機能により実現される。制御する機能の実体は、パソコン、ワークステーション、交換機に付加された制御用計算機などに記憶され、その上で実行されるプログラムである。
【０１７３】
図１８に本発明システムの処理の流れ図を示す。
【０１７４】
図に従って説明する。ユーザによる、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求の入力を受け付け（Ｓ１０１）、通信要求に応じて、通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組の候補を決定する（Ｓ１０２）。
【０１７５】
そして、次に前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの該ユーザによる選択を入力させる（Ｓ１０３）。
【０１７６】
更に、複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整を行なう（Ｓ１０４）。
【０１７７】
更に、候補の選択でユーザ間の合意を見た場合（Ｓ１０５）、合意された端末の組合せまたはメディアの組合せに基づいてコールコネクションを設定し（Ｓ１０６）、通信要求の変更内容で合意を見た場合（Ｓ１０７）、再びＳ１０２以下の処理を実行する。
【０１７８】
このような第２の具体的な実施の態様について、より詳しく説明をする。
【０１７９】
（第２の具体的な実施の態様のより詳しい説明）
図１９に本発明の第２の具体的な実施の態様としてのマルチメディア通信システムの構成を示す。
【０１８０】
図１９は図１７に示した手段の具体的な装置への対応付けの一例であり、発明の趣旨を逸脱しない範囲でこれ以外の対応付けもあり得る。また、図１９は、主に制御面を記述した図１７の構成に加えて、情報の伝達、および伝達される情報の変換、合成または分離に関わる構成要素（ネットワーク１２００、メディア変換手段１７１１、多地点間メディア処理手段１９１１）を含んでいる。
【０１８１】
端末１１０１，１１０７は音声、動画、静止画、データを扱うことが可能なマルチメディア計算機端末、端末１１０２，１１０５はデータを扱える計算機端末であり、また、端末１１０３，１１０４，１１０６は音声、動画、静止画を扱うことができるＴＶ電話端末であり、端末１１０８は音声を扱うことが可能な電話端末である。
【０１８２】
これらの端末のうち、端末１１０１，１１０５，１１０７は通信要求入力手段（それぞれ２３０１，２３０５，２３０７）、ユーザ意図反映手段（それぞれ２４０１，２４０５，２４０７）、ユーザ間調整手段（それぞれ２５０１，２５０５，２５０７）、通信要求変更手段（それぞれ２６０１，２６０５，２６０７）を備える。
【０１８３】
サーバ装置１１０９はコール・コネクション制御手段１６０９、候補決定手段１５０９を実現する。サーバ装置１１１０は端末・メディア記憶手段１４１０、ユーザ・端末記憶手段１３１０を備える。端末・メディア記憶手段１４１０は、前記各端末が扱える上記のメディア、および各端末が各メディアをその時点で扱えるか否か（必要な資源が空いているか）の状態を記憶する。
【０１８４】
本システムにおいて、ユーザａは端末１１０１，１１０２および１１０３を、ユーザｂは端末１１０４および１１０５を、ユーザｃは端末１１０６を、そして、ユーザｄは端末１１０７および１１０８を利用可能であるとすると、ユーザ・端末記憶手段１３１０は、ユーザａが端末１１０１，１１０２および１１０３、ユーザｂは端末１１０４および１１０５、ユーザｃは端末１１０６、そして、ユーザｄは端末１１０７および１１０８を利用可能であることを記憶している。
【０１８５】
サーバ装置１１１１は多地点間マルチメディア処理手段１９１１、メディア変換手段１７１１を備える。端末１１１２は多地点間マルチメディア処理記憶手段３０１２、メディア変換記憶手段１８１２を備える。
【０１８６】
多地点間マルチメディア処理記憶手段３０１２は、多地点間マルチメディア処理手段１９１１がサーバ装置１１１１にあることを記憶し、メディア変換記憶手段１８１２はメディア変換手段１７１１がサーバ装置１１１１にあることを記憶する。なお、これらのサーバ装置１１０９，１１１０，１１１１および１１１２は、ユーザが直接利用する端末装置そのもの、またはユーザ側に設備される一部の端末装置をサーバとして運用しているものであっても構わないし、ネットワーク側に設備される交換機またはそれに付加される装置であっても構わない。
【０１８７】
このような構成の本システムの動作例をつぎに説明する。はじめに、ユーザａがユーザｂとの音声、動画像とデータによる通信を要求した場合を例にとって動作例１として説明する。
【０１８８】
〔動作例１〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｂとの音声、動画像とデータによる通信を要求した場合を例に動作例１として説明する。
【０１８９】
図２０は本動作例１において、通信要求入力時（図１８のＳ１０１）にユーザａに示される通信セッション制御画面例であり、図２０の如き通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点では端末１１０１の通信要求入力手段２３０１を動作させて通信要求入力をすることができることになる。
【０１９０】
すなわち、通信セッション制御画面４０００には、ユーザ追加ボタン４００２、ユーザ削除ボタン４００３、メディア追加ボタン４００４、メディア削除ボタン４００５が表示されており、ユーザａはユーザ追加ボタン４００２、ユーザ削除ボタン４００３を例えばマウスなどのポインティングデバイスを使用するなどして操作することにより、通信を希望するユーザを追加・削除し、メディア追加ボタン４００４、メディア削除ボタン４００５を操作することにより、通信を希望するメディアを追加・削除することができる。また、操作取り消しのためのキャンセルボタン４０１２、操作の確認のための確認ボタン４０１１がある。
【０１９１】
具体的な手順は、例えば、追加はボタンを押すと詳細なデータを入力するための新たな表示が現れ、削除は対象を指定してからボタンを押すといったものである。
【０１９２】
これらの通信要求の入力状況は、通信セッション制御画面４０００における画面中の通信セッション状態制御部４００１に表示される。図２０は本例の通信要求が全て設定された後の状態を示す。ユーザａは、キャンセルボタン４０１２により通信要求を取り消すこともできるが、ここでは確認ボタン４０１１により通信要求の入力完了を示した場合を想定する。
【０１９３】
入力された通信要求はサーバ装置１１０９の候補決定手段１５０９に通知される。候補決定手段１５０９は、サーバ装置１１１０のユーザ・端末記憶手段１３１０を参照し、ユーザａが端末１１０１、１１０２および１１０３を、ユーザｂが端末１１０４および１１０５を使用可能であることを認識する。
【０１９４】
次にサーバ装置１１０９の候補決定手段１５０９はサーバ装置１１１０の端末・メディア記憶手段１４１０を参照し、ユーザａが使用可能な端末１１０１は音声、静止画およびデータ、端末１１０２はデータ、端末１１０３は音声、動画像または静止画を、ユーザｂが使用可能な端末１１０４は音声、動画像または静止画、端末１１０５はデータを使用可能であることを認識する。
【０１９５】
ここで、端末１１０１は動画像を扱う能力を持っているが、この時点ではその能力を実現するための資源が別の目的で利用されているために、使用可能であるとは認識されない。
【０１９６】
候補決定手段１５０９は、ユーザａに対しては端末１１０２（計算機）によるデータ、端末１１０３（ＴＶ電話）による音声と動画像、端末１１０１（マルチメディア計算機）による音声とデータの提供、ユーザｂに対しては端末１１０４（ＴＶ電話）による音声と動画像、端末１１０５（計算機）によるデータの提供を候補として決定する（図１８のＳ１０２）。
【０１９７】
図２１は本例において候補の選択または通信要求変更入力時（図１８のＳ１０1）にユーザａに示される通信セッション制御部４００１であり、端末１１０１の画面の一部に表示される。この時点でユーザ意図反映手段２４０１として動作する。
【０１９８】
通信セッション状態表示部４００１は、候補決定手段１５０９から得たユーザａ側の上記の端末の組合せの候補およびメディアの組合せの候補の情報と、ユーザｂ側のメディアの組合せの候補を表示している。
【０１９９】
横に並んでいる端末が端末の組合せの候補である。ユーザｂ側の端末の組合せの候補を表示することはユーザａにとってそれほど重要でない場合が多いので、ここではメディアの提供の可能性のみを表示しているが、ユーザｂ側の端末の組合せの候補を表示しても良い。
【０２００】
また、単にユーザａ側の情報のみを表示し、ユーザｂ側の情報を全く表示しないことも、この実施例に示すようなシナリオにおいては意味を持つ。ユーザａは、端末１１０１（マルチメディア計算機）で音声、動画像およびデータを同時に扱えることを期待していたが、それが何らかの理由（例えば、上述のように動画を扱うために必要な資源がその時点で別の目的で利用されていた）で不可能であることを認識する。
【０２０１】
ユーザａは端末選択ボタン４００７により、自らが使用できる候補として挙げられた端末の組合せ（ＴＶ電話と計算機、ないしはマルチメディア計算機）、またはその一部（組合せ −ＴＶ電話と計算機− からＴＶ電話のみ）を選択することができる。
【０２０２】
更にメディア選択ボタン４００８によりメディア（音声、動画像、および／またはデータ）を選択することができる。単一の端末が複数のメディアを提供している場合、端末とメディアの両方を選択することで、その一部のみを選択することもできる（例えば、端末としてＴＶ電話とメディアとして音声を選ぶと、ＴＶ電話が音声のみを提供する）。
【０２０３】
ユーザａが予期した形での通信ができないことを認識したため、動画像に対する通信要求を静止画に対する要求に変更する場合も考えられる。このためにはメディア削除ボタン４００５を操作することにより動画像を削除し、メディア追加ボタン４００４を操作することにより静止画を追加するようにすれば良い。また、通信中止ボタン４００６を操作することにより通信を中止することもできる。
【０２０４】
すなわち、メディア追加ボタン、メディア削除ボタン、メンバ追加ボタン、メンバ削除ボタン、通信中止ボタンを表示して、これらボタンを必要に応じて利用することで、図２１の通信セッション制御画面４０００は通信要求変更手段２６０１の操作画面としても利用することができる。選択および通信要求の変更は、キャンセルボタン４０１２を操作することで取り消され、確認ボタン４０１１を操作することにより入力の完了が示される。
【０２０５】
本例のシナリオでは、ユーザｂからのユーザ意図の入力がないこと（入力の機会を与えていない）を想定しているため、ユーザａから入力された候補選択・通信要求変更は調整の必要なく（図１８のＳ１０４）、直ちに合意されたものとみなされ（図１８のＳ１０５またはＳ１０７）、候補が選択された場合はコール・コネクションを設定（図１８のＳ１０６）した後に処理を終え、通信要求が変更された場合は再びメディア・端末候補決定（図１８のＳ１０２）を行なう。通信が中止された場合は、何の合意も得られなかったものと見做され、そのまま処理が終了する。
【０２０６】
図２２は本動作例において、上述のように一旦、通信要求を変更した後の候補の選択または通信要求入力時（図１８のＳ１０３）にユーザａに示される通信セッション制御画面であり、図のような通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。ここでユーザａが上述の方法でマルチメディア計算機を選択すれば、上述の手順の後にコール・コネクションが設定され（図１８のＳ１０６）マルチメディア計算機による通信が開始される。
【０２０７】
この結果、マルルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２０８】
以上の動作例１は、ユーザａがユーザｂとの音声、動画像とデータによる通信を要求した場合の例であった。
【０２０９】
つぎに、ユーザａがユーザｃとの音声とデータによる通信を要求した場合を例に動作例２を説明する。
【０２１０】
〔動作例２〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｃとの音声とデータによる通信を要求した場合を例に動作例２として説明する。
【０２１１】
図２３は本例において通信要求入力時（図１８のＳ１０１）にユーザａに示される通信セッション制御画面の例であり、この通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点では端末１１０１は通信要求入力手段２３０１として動作する。ユーザａは動作例１と同様の方法で通信要求を入力する。
【０２１２】
図２３は本例の通信要求が全て設定された後の状態を示す。以下、確認ボタンにより通信要求の入力完了を示した場合を想定する。
【０２１３】
入力された通信要求はサーバ装置１１０９の候補決定手段１５０９に通知される。候補決定手段１５０９は、サーバ装置１１１０のユーザ・端末記憶手段１３１０を参照し、ユーザａが端末１１０１，１１０２および１１０３を、ユーザｃが端末１１０６を使用可能であることを認識する。
【０２１４】
次に候補決定手段１５０９はサーバ装置１１１０の端末・メディア記憶手段１４１０を参照し、ユーザａが使用可能な端末１１０１は音声、動画像、静止画およびデータ、端末１１０２はデータ、端末１１０３は音声、動画像または静止画を、ユーザｃが使用可能な端末１１０６は音声、動画像または静止画を使用可能であることを認識する。
【０２１５】
この認識結果より候補決定手段１５０９は、ユーザｃ側がデータを扱えないため、ユーザａ側でデータの提供をしても意味がないと判断し、ユーザａに対して端末１１０１（マルチメディア計算機）による音声、端末１１０３（ＴＶ電話）による音声の提供、ユーザｃに対して端末１１０６（ＴＶ電話）による音声の提供を候補として決定する。但し、ユーザａに端末１１０１（マルチメディア計算機）または端末１１０２（計算機）によりデータの提供ができることも示す（図１８のＳ１０２）。
【０２１６】
図２４は本例において候補の選択または通信要求変更入力時（図１８のＳ１０1 ）にユーザａに示される通信セッション制御画面であり、図に示すような通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点で端末１１０１はユーザ意図反映手段２４０１として動作する。
【０２１７】
先の動作例１が、ユーザａが自らのメディアまたは端末の候補に関する情報を得た結果としての操作に重点を置いたのに比べ、本例ではユーザａが相手であるユーザｃに関するメディアまたは端末の候補に関する情報を得た結果としての操作に重点をおいて説明する。
【０２１８】
通信セッション状態表示画面４００１は、ユーザａ側では利用できるがユーザｃ側で利用できないメディアを扱えるユーザａ側の端末も表示すること、およびユーザｃ側の情報を必ず表示することを除いて、前述の動作例１と同様に候補の情報を示す。ユーザａはユーザｃがデータを扱えないことを認識する。
【０２１９】
ユーザａはメディア選択ボタン４００８により音声のみを選択することができる。ユーザａの相手側であるユーザｃへの操作として、ユーザｃの端末としてＴＶ電話を明示的に表示している場合は、端末選択ボタン４００７によりユーザｃのＴＶ電話を選択することもできる。
【０２２０】
もちろん、動作例１と同様に、ユーザａがメディア削除ボタン４００５とメディア追加ボタン４００４の操作で、データに対する通信要求を静止画に対する通信要求に変更すること、通信中止ボタン４００６の操作で通信を中止することもできる。
【０２２１】
この場合、図２４の通信セッション制御画面４０００はこれを利用することで、通信要求変更手段２６０１として動作する。確認ボタン４０１１の操作により、選択または通信要求の変更の入力の完了が示されたとする。
【０２２２】
本例のシナリオでは、ユーザｃからのユーザ意図の入力がないこと（入力の機会を与えていない）を想定しているため、ユーザａから入力された候補選択・通信要求変更は調整の必要なく（図１８のＳ１０４）、直ちに合意されたものとみなされ（図１８のＳ１０５またはＳ１０７）、候補が選択された場合はコール・コネクションを設定（図１８のＳ１０６）した後に処理を終え、通信要求が変更された場合は再びメディア・端末候補決定（図１８のＳ１０２）を行なう。
【０２２３】
通信が中止された場合は、何の合意も得られなかったものとみなされ、そのまま処理が終了する。
【０２２４】
図２５は本例において、上述のように一旦、通信要求を変更した後の候補の選択または通信要求入力時（図１８のＳ１０１）にユーザａに示される通信セッション制御画面の例であり、図のような通信セッション制御画面４０００が、端末１１０１のディスプレイ画面の一部に表示される。
【０２２５】
ここでユーザａが上述の方法で自側端末としてマルチメディア計算機またはＴＶ電話を選択するか、メディアとして音声および／または静止画を選択すれば、上述の手順の後にコール・コネクションが設定され（図１８のＳ１０６）通信が開始される。
【０２２６】
この結果、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２２７】
つぎに、ユーザａがユーザｄとの音声と動画像による通信を要求した場合を例にとって、着信側であるユーザｄの意図の反映、およびユーザａとユーザｄ間での調整に重点をおいた動作例を動作例３として説明する。
【０２２８】
〔動作例３〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｄとの音声と動画像による通信を要求した場合に、着信側であるユーザｄの意図の反映、およびユーザａとユーザｄ間での調整に重点をおいた例を動作例３として説明する。
【０２２９】
ユーザａは先の動作例１、動作例２に述べたと同様な方法で上記の通信要求を入力する（図１８のＳ１０１）。
【０２３０】
入力された通信要求は、サーバ装置１１０９の候補決定手段１５０９に通知される。すると候補決定手段１５０９は、サーバ装置１１１０のユーザ・端末記憶手段１３１０を参照し、ユーザａが端末１１０１、１１０２および１１０３を、そして、ユーザｄが端末１１０７および１１０８をそれぞれ使用可能であることを認識する。
【０２３１】
次に候補決定手段１５０９はサーバ装置１１１０の端末・メディア記憶手段１４１０を参照し、これによって、ユーザａが使用可能な端末１１０１は音声、動画像、静止画およびデータであり、端末１１０２はデータであり、端末１１０３は音声、動画像または静止画であることを認識し、また、ユーザｄが使用可能な端末１１０７は音声、動画像、静止画およびデータであり、端末１１０８は音声を使用可能であることを認識する。
【０２３２】
この認識により、次に候補決定手段１５０９は、ユーザａに対して端末１１０１（マルチメディア計算機）による音声および動画像、端末１１０３（ＴＶ電話）による音声および動画像の提供、ユーザｃに対して端末１１０７（マルチメディア計算機）による音声および動画像の提供を候補として決定する（図１８のＳ１０２）。
【０２３３】
この情報は動作例１、動作例２で説明したものと同様に、ユーザ意図反映手段２４０１によりユーザａにも示されるが、詳細は省略する。但し、ユーザａがＴＶ電話による音声と動画像の通信を選択したと仮定する。
【０２３４】
図２６は本例において候補の選択または通信要求変更入力時（図１８のＳ１０3 ）にユーザｄに示される通信セッション制御画面の例であり、図のような通信セッション制御画面４０００が端末１１０７のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点で端末１１０７はユーザ意図反映手段２４０７として動作する。
【０２３５】
ユーザｄは通信セッション状態表示画面４００１の表示内容により、ユーザａが音声と動画像による通信を望んでおり、ユーザｄの側でマルチメディア計算機を選択すれば、その要求を満たすことができることを認識する。
【０２３６】
ユーザｄはマルチメディア計算機を選択することもできるが、ここではユーザｄがその時点で動画像による通信を望まない場合を想定し、端末選択ボタン４００７を使用して電話を選んだとする（図１８のＳ１０３）。
【０２３７】
ユーザａの選択結果（ＴＶ電話による音声と動画像）は端末１１０１のユーザ間調停手段２５０１に、ユーザｄの選択結果（電話による音声）は端末１１０７のユーザ間調整手段２５０７に渡される。これら２つのユーザ間調整手段２５０１，２５０７は、この結果を相互に交換し、それぞれユーザａとユーザｄの間の選択が一致しないことを認識する。そして、ユーザ間調整手段２５０７はユーザａに対して図２７に示す如き内容を、また、ユーザ間調停手段２５０１はユーザｄに対して図２８に示す如き内容を提示する。
【０２３８】
これらの図の通信セッション状態表示部４００１に示す内容は、各ユーザ毎に更に状態の表示が、「一致」、「自分（ユーザａまたはユーザｄ）」、「相手ユーザ（ユーザｄまたはユーザａ）」、「候補」に細分化されている。
【０２３９】
「一致」の並びは、調整に関わるユーザ間（つまりユーザａとユーザｄの間）での意見が一致している部分を示す。「自分」の並びは、この図が表示されているユーザ（図２７はユーザａ、図２８はユーザｄ）の要求または選択を示す。
【０２４０】
「相手ユーザ」の並びは、相手ユーザ（図２７はユーザｄ、図２８はユーザａ）の要求または選択を示す。「候補」の並びは、候補決定手段１５０９により候補として提示された端末またはメディアを示す。
【０２４１】
ユーザによって選択されたものは除いて表示しても良い。以下では、既に述べた方法でユーザａが動画像の要求を静止画の要求に変更した場合を想定する。
【０２４２】
この変更の結果、ユーザａに対するセッション制御部の表示は図２９のようになる。確認ボタン４０１１が押されることが変更内容の確定を意味するので、これを契機にこの変更はユーザ間調整手段２５０１からユーザ間調整手段２５０７にも伝えられる。
【０２４３】
この結果、ユーザｄに対するセッション制御画面４０００の表示は図３０のようになる。ユーザｄは、同意ボタン４００９を用いてこの通信要求の変更に対する同意、拒否ボタン４０１０を用いてこの変更に対する拒否を表明する。
【０２４４】
同意または拒否は、ユーザ間調整手段２５０７からユーザ間調整手段２５０１に伝えられる。拒否の場合には、同時に通信要求の別な形での変更を提案することもできる。以下では同意が得られたものと仮定する（図１８のＳ１０４）。
【０２４５】
この調整にはユーザａとユーザｄだけが関与しており、ユーザａの提案にユーザｄが同意したので、ユーザ調整手段２５０１およびユーザ調整手段２５０７は、これで調整は合意に至ったと判断する。更に場合分けすれば、ユーザａの提案は選択の変更ではなく、通信内容の変更であったため、候補の合意ではなく（図１８のＳ１０５）、通信変更内容が合意に至ったと判断する（図１８のＳ１０７）。
【０２４６】
変更された通信要求内容の候補決定手段１５０９への通知は、ユーザ間調整手段２５０１が行なっても、あるいはユーザ間調整手段２５０７が行なっても良い。候補決定手段１５０９は、上述したと同様な方法で、ユーザａに対して端末１１０１（マルチメディア計算機）による音声および静止画、端末１１０３（ＴＶ電話）による音声および静止画の提供、ユーザｃに対して端末１１０７（マルチメディア計算機）による音声および静止画の提供を候補として決定する（図１８のＳ１０２）。
【０２４７】
図３１および図３２は、上記の候補の決定の後、候補の選択または通信要求変更入力時（図１８のＳ１０３）に、それぞれユーザａおよびｄに示される通信セッション制御画面の例であり、図のような通信セッション制御画面４０００が表示される。
【０２４８】
ユーザａがＴＶ電話、ユーザｄがマルチメディア計算機を選択すれば（図１８のＳ１０３）、両者での一致が見られ（図１８のＳ１０４およびＳ１０５）、コール・コネクション制御手段１６０９により端末１１０３（ＴＶ電話）と端末１１０７（マルチメディア計算機）間にコール・コネクションが設定され（図１８のＳ１０６）、処理が終了する。
【０２４９】
別のケースとして、図２７がユーザａに表示されている時点で、ユーザａが端末としてＴＶ電話、メディアとして音声のみを選択した場合を考える。
【０２５０】
この選択の結果、ユーザａに対するセッション制御画面４０００の表示は図３３のようになる。確認ボタン４０１１が押されることが変更内容の確定を意味するので、これを契機にこの変更はユーザ間調整手段２５０１からユーザ間調整手段２５０７にも伝えられる。
【０２５１】
この結果、ユーザｄに対するセッション制御画面４０００の表示は図３４のようになる。ユーザｄは、同意ボタン４００９を用いて、この通信要求の変更に対する同意を表明する。同意は、ユーザ間調整手段２５０７からユーザ間調整手段２５０１に伝えられる（図１８のＳ１０４）。
【０２５２】
この調整にはユーザａとユーザｄだけが関与しており、ユーザａの提案にユーザｄが同意したので、ユーザ調整手段２５０１およびユーザ調整手段２５０７は、これで調整は合意に至ったと判断する。更に場合分けすれば、ユーザａの提案は選択の変更（図１８のＳ１０５）であったので、コール・コネクション制御手段１６０９がＴＶ電話１１０３とマルチメディア計算機１１０７間に音声のみのコール・コネクションを設定する（図１８のＳ１０６）。これで処理を終る。
【０２５３】
この結果、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２５４】
次に、ユーザａがユーザｄとの音声と動画像による通信を要求し、ユーザｄがその通信にユーザｂの追加を提案した場合を例にとって、メディアに関連する通信要求ではなく、通信に参加するユーザに関する通信要求に重点をおいた動作例を動作例４として説明する。
【０２５５】
〔動作例４〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｄとの音声と動画像による通信を要求し、ユーザｄがその通信にユーザｂの追加を提案した場合を例にとり、メディアに関連する通信要求ではなく、通信に参加するユーザに関する通信要求に重点をおいた例を動作例４として次に説明する。
【０２５６】
図３５に至るまでの手順（図１８のＳ１０１、Ｓ１０２）は、前述の動作例３で説明した図２６に至るまでの手順と同様なので省略する。
【０２５７】
図３５は本例において候補の選択または通信要求変更入力時（図１８Ｓ１０３）にユーザｄに示される通信セッション制御画面の例であり、図に示されるような通信セッション制御画面４０００が、端末１１０７のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点では端末１１０７はユーザ意図反映手段２４０７として動作する。
【０２５８】
ユーザｄは通信セッション制御画面４０００中における通信セッション状態表示部４００１の表示内容により、ユーザａが音声と動画像による通信を望んでおり、ユーザｄの側でマルチメディア計算機を選択すれば、その要求を満たすことができることを認識する。
【０２５９】
ここでは、ユーザｄが音声と動画像でユーザｂとも同時に通信するべきであると考えた場合を想定する。ユーザｄは、マルチメディア計算機を選択するのに加えて、ユーザ追加ボタン４００２を操作してユーザｂを追加することにより、通信要求の変更を提案する（図１８のＳ１０３）。
【０２６０】
ユーザａの選択結果（動作例３と同じ、ＴＶ電話による音声と動画像）は端末１１０１のユーザ間調停手段２５０１に、ユーザｄの選択結果（マルチメディア計算機による音声と動画像）と通信要求の変更（ユーザｂとの音声と動画像による通信の追加）は端末１１０７のユーザ間調整手段２５０７に渡される。
【０２６１】
これら２つのユーザ間調整手段２５０１，２５０７は、この結果を相互に交換し、それぞれユーザａとユーザｄの間の選択は一致するが、ユーザｄにより通信要求の変更が提案されていることを認識し、ユーザ間調整手段２５０７がユーザａに対して図３６、ユーザ間調停手段２５０１がユーザｄに対して図３７の如き画面を提示する。
【０２６２】
ここでは動作例３と異なり、ユーザａとユーザｄに関わる部分は一致しているため、セッション状態表示部４００１において、「一致」、「自分」、「相手ユーザ（ユーザｄまたはユーザａ）」、「候補」に細分化されるのは、ユーザｄによる提案に関わるユーザｂに関する情報のみである。
【０２６３】
これによりユーザａは、ユーザｂの通信への追加が提案されていることを認識する。ユーザａは、この提案を受け入れるなら同意ボタン４００９を操作することで同意を表明し、受け入れないなら拒否ボタン４０１０を操作することで拒否を表明することができる。
【０２６４】
提案を受け入れた場合、ユーザｂに対する図３６に示すセッション状態表示部４００１のユーザｂに関する「自分（ユーザａ）」の音声と動画像の欄が、「不明」から「有り」に変化し、提案を受け入れなかった場合、対応する欄が「無し」に変化する。この同意または拒否はユーザ間調整手段２５０１からユーザ間調整手段２５０７にも伝えられる。
【０２６５】
ユーザａが提案を受け入れた場合、ユーザｂに対する図３７のセッション状態表示部４００１のユーザｂに関する「相手ユーザ（ユーザａ）」の音声と動画像の欄が、「不明」から「有り」に変化し、後者の場合、対応する欄が「無し」に変化する。以下では同意が得られたものと仮定する（図１８のＳ１０４）。
【０２６６】
この調整にはユーザａとユーザｄだけが関与しており、ユーザｄの提案にユーザａが同意したので、ユーザ調整手段２５０１およびユーザ調整手段２５０７は、これで調整は合意に至ったと判断する。
【０２６７】
更に場合分けすれば、ユーザｄの提案は選択の変更ではなく、通信内容の変更であったため、候補の合意ではなく（図１８のＳ１０５）、通信変更内容が合意に至ったと判断する（図１８のＳ１０７）。
【０２６８】
変更された通信要求内容の候補選択手段１５０９への通知は、ユーザ調整手段２５０１が行なってもユーザ調整手段２５０７が行なっても良い。
【０２６９】
候補決定手段１５０９は、上述したと同様な方法で、新たなユーザｂに対して端末１１０４（ＴＶ電話）による音声と動画像の提供を候補として決定すると同時に、通信に関与するユーザが３人であることから多者間通信であることを認識する。そして、多地点間メディア処理記憶手段３０１２を参照して、音声と動画像の３者通信を実現する多地点間メディア処理手段１９１１を選択する（図１８のＳ１０２）。
【０２７０】
上記の候補の決定の後に、候補の選択または通信要求変更入力時（図１８のＳ１０３）に、ユーザａ、ユーザｂおよびユーザｄに対して、上記候補を示した通信セッション制御部４００１が提示されるが、既に何度も説明したものと本質的な違いはないので詳細は省略する。
【０２７１】
ユーザａとユーザｄは既に行なった選択を変えず、ユーザｂがＴＶ電話による音声と動画像の通信を受け入れて選択すれば（図１８のＳ１０３）、３者間での一致が見られ（図１８のＳ１０４およびＳ１０５）、コール・コネクション制御手段１６０９により端末１１０３（ＴＶ電話）、端末１１０４（ＴＶ電話）、端末１１０７（マルチメディア計算機）および多地点間メディア処理手段１９１１間にコール・コネクションが設定され（図１８のＳ１０６）、処理が終了する。
【０２７２】
一方、３者間で一致が見られなかった場合は、既に述べたのと同様な方法で候補選択・通信要求変更の調整を行なう（図１８のＳ１０４）が、説明は省略する。この結果、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２７３】
以上のように、第２の具体的な実施の態様によれば、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人ないしは複数のユーザの意図を反映した形で通信を実現することができる通信システムおよび通信システムの通信制御方法を提供できるようになる。
【０２７４】
なお、本発明は上述した具体例に限定されることなく、種々変形して実施可能である。
【０２７５】
【発明の効果】
以上詳述したように、本発明によれば、複数メディアを含む通信を要求する際に、ユーザは一つの通信要求において、通信に参加するユーザ、使用するメディア、および必要に応じて通信形態を指定することにより、通信に参加する他のユーザの端末環境、使用可能符号化方式等を意識することなく、通信に参加するユーザ毎に適切な端末の組合せを選択し、選択した端末に対してコール・コネクションを設定することが可能となるという効果が得られる。
【０２７６】
また、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、ユーザの予期できない形での通信が実現されることを防止し、更に１人ないしは複数のユーザの意図を反映した形で通信を実現することができる。
【図面の簡単な説明】
【図１】本発明を説明するための図であって、本発明の第１の具体的な実施の態様において適用するマルチメディア通信システムの構成を表すブロック図。
【図２】本発明の第１の具体的な実施の態様におけるユーザ端末記憶手段の構成を表す図。
【図３】本発明の第１の具体的な実施の態様における端末メディア記憶手段の構成を表す図。
【図４】本発明の第１の具体的な実施の態様における第１の動作例としてのメッセージシーケンスを表す図。
【図５】本発明の第１の具体的な実施の態様における第１の動作例としての接続形態を表す図。
【図６】本発明の第１の具体的な実施の態様における第２の動作例としてのメッセージシーケンスを表す図。
【図７】本発明の第１の具体的な実施の態様における第２の動作例としての接続形態を表す図。
【図８】本発明の第１の具体的な実施の態様における第３の動作例としてのメッセージシーケンスを表す図。
【図９】本発明の第１の具体的な実施の態様におけるメディア変換記憶手段の構成例を表す図。
【図１０】本発明の第１の具体的な実施の態様における第３の動作例としての接続形態を表す図。
【図１１】本発明の第１の具体的な実施の態様における第４の動作例としてのメッセージシーケンスを表す図。
【図１２】本発明の第１の具体的な実施の態様における多地点間メディア処理記憶手段の構成例を表す図。
【図１３】本発明の第１の具体的な実施の態様における第４の動作例としての接続形態を表す図。
【図１４】本発明の第１の具体的な実施の態様における第５の動作例としてのメッセージシーケンスを表す図。
【図１５】本発明の第１の具体的な実施の態様における第８の動作例としてのメッセージシーケンスを表す図。
【図１６】本発明の第１の具体的な実施の態様における第８の動作例としての接続形態を表す図。
【図１７】本発明の第２の具体的な実施の態様の概要を説明するためのブロック図。
【図１８】図１７の概要の処理の流れを示す図。
【図１９】本発明を説明するための図であって、本発明の第２の具体的な実施の態様において適用するマルチメディア通信システムの構成例を示すブロック図。
【図２０】本発明の動作例１におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２１】本発明の動作例１におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２２】本発明の動作例１におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２３】本発明の動作例２におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２４】本発明の動作例２におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２５】本発明の動作例２におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２６】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図２７】本発明の動作例３におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２８】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図２９】本発明の動作例３におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３０】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３１】本発明の動作例３におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３２】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３３】本発明の動作例４におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３４】本発明の動作例４におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３５】本発明の動作例４におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３６】本発明の動作例４におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３７】本発明の動作例４におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【符号の説明】
２…通信網
３…ユーザ端末記憶手段
４…端末メディア記憶手段
５…決定手段
６…コール・コネクション制御手段
８…メディア変換記憶手段
１０…多地点間メディア処理記憶手段
１１…コネクション
１２…調整手段
１０１〜１１４，１１０１〜１１０７…端末
７０１〜７０３…メディア変換手段
９０１〜９０３…多地点間メディア処理手段
１１０８〜１１１２…サーバ装置
１２００…ネットワーク
１３００，１３１０…ユーザ・端末記憶手段
１４００，１４１０…端末・メディア記憶手段
１５００，１５０９…候補決定手段
１６００，１６０９…コール・コネクション制御手段
１７１１…メディア変換手段
１８００，１８１２…メディア変換記憶手段
１９１１…多地点間メディア制御手段
２３００，２３０１，２３０５，２３０７…通信要求処理手段
２４００，２４０１，２４０５，２４０７…ユーザ意図反映手段
２５００，２５０１，２５０５，２５０７…ユーザ間調整手段
２６００，２６０１，２６０５，２６０７…通信要求変更手段
３０００，３０１２…多地点間メディア処理手段
４０００…通信セッション制御部
４００１…通信セッション状態表示部
４００２…ユーザ追加ボタン
４００３…ユーザ削除ボタン
４００４…メディア追加ボタン
４００５…メディア削除ボタン
４００６…通信中止ボタン
４００７…端末選択ボタン
４００８…メディア選択ボタン
４００９…同意ボタン
４０１０…拒否ボタン
４０１１…確認ボタン
４０１２…キャンセルボタン[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a communication system for realizing a multimedia service.
[0002]
[Prior art]
With the development of electronic equipment, computer technology, and communication technology, in recent years it has become possible to exchange not only audio but also various media information such as images (moving images, still images) and data between terminals. Multimedia services that can be handled freely were possible.
[0003]
By the way, when using such a service, it goes without saying that in order to use various media, the other party must support it. In other words, there is a problem with the functions of the terminal used by the communication partner in response to a communication request made up of multiple media, and there may be a terminal device that can handle all media, or only a voice like a telephone terminal. It may not be available, or it may be a terminal that can handle moving images, still images, and sound, such as a TV phone terminal, or it may be installed such that it can handle image information and sound, such as a facsimile and telephone. There are various functions that can be handled by individual terminals.
[0004]
Each terminal may not be able to handle all of the plurality of media included in the communication request, but may be able to handle a plurality of media included in the communication request by combining the functions of each terminal.
[0005]
Conventionally, in such a situation, in order to perform communication satisfying a plurality of media included in the communication request, the user who activates the communication request recognizes which terminal is used by the other party who can handle the desired media. It was necessary to start a connection request for each terminal. For this reason, the preparation stage until the desired communication can be performed is difficult, and there is a problem that it lacks practicality.
[0006]
[Problems to be solved by the invention]
As described above, when using a multimedia service, in order to use various media, the communicating party must support it. It is a question of whether or not the function of the terminal used by the communication partner corresponds to a communication request made up of multiple media, and it has a terminal device that can handle all media such as voice, image, and data. In some cases, only voice can be used, such as a telephone terminal, or in some cases a terminal that can handle moving images, still images, and voice, such as a TV phone terminal, or in a facsimile, telephone, etc. There are various functions that can be handled by each installed terminal, such as image information and voice. Also, even if images can be handled, the formats of the images that can be handled are often different, and the data and sound systems that can be handled are not necessarily the same.
[0007]
However, among the terminals installed on the other side, each terminal cannot handle all of the plurality of media included in the communication request, but by combining the functions of each terminal, the plurality of terminals included in the communication request In such a case, in order to perform communication satisfying a plurality of media included in the communication request, the user who starts the communication request uses a partner who can handle the desired medium. It was necessary to recognize what the terminal is and start a connection request for each terminal. For this reason, the preparation stage until the desired communication can be performed is difficult, and there is a problem that it lacks practicality.
[0008]
Japanese Patent Laid-Open No. 63-1140 discloses a method for realizing connection to a terminal when a conference connection is performed using a voice terminal and a data terminal by one request for starting the conference. However, in this method, a connection is established between a voice terminal and a data terminal that are fixedly determined in advance by receiving a special number indicating that it is a conference start request that combines voice and data. To do.
[0009]
Therefore, it lacks versatility, and cannot be said to be a system with a high degree of freedom in combination connection.
[0010]
Therefore, according to the media specified by the user at the time of outgoing call, a necessary combination of a plurality of terminals on the other side having different media processing capabilities is determined for each outgoing call, and connection is realized for the combination of these terminals. The development of a system with a high degree of freedom in combination connection is desired.
[0011]
Therefore, an object of the present invention is to enable a user to select a terminal used by a communication partner, which has been a problem of the prior art, and a medium that can be handled by the terminal when starting a communication request including a combination of various media. In order to solve the problem that it is necessary to activate a communication request for each terminal when a plurality of media are realized by a combination of a plurality of terminals. Depending on the specified media, a required combination of multiple terminals with different media processing capabilities is automatically determined for each outgoing call, and connection to these terminal combinations is automatically performed. Another object of the present invention is to provide a communication system and a communication control method for the communication system that can be used.
[0012]
Another object of the present invention is to request communication consisting of a combination of a plurality of media without designating a terminal to be used in advance, and realize the plurality of media of the communication request by one or a combination of a plurality of terminals. Communication system and communication system that prevent communication in a form unpredictable by the user and can realize communication reflecting the intention of one or more users A communication control method is provided.
[0013]
[Means for Solving the Problems]
In order to achieve the above object, the present invention is as follows.
[0014]
That is, firstly, in the communication system accommodating a plurality of terminals capable of handling one or a plurality of media,
User terminal storage means for storing a usable terminal for each user, terminal media storage means for storing a usable media or media realization method for each terminal, and each user involved in communication in response to a communication request On the other hand, the user terminal storage means and the terminal media storage means determine one or a plurality of media or media realization methods usable by each user and a terminal set including one or more terminals. Further, call connection control means for setting and releasing a call connection based on the media determined by the determining means and the set of the terminals is provided.
[0015]
Second, the present invention further includes the first configuration,
The media or media implementation method specified by the user in the communication request, the media or media implementation method that can be used by the originating user, and the media or media implementation method that can be used by the called user or A function for determining a media realization method and determining a combination of terminals that can be used by a calling user and a combination of terminals that can be used by a callee user to use each of the determined media or media realization methods. It is set as the structure added to a means.
[0016]
Third, the present invention further includes the first configuration,
A configuration in which means for notifying the user or terminal that requested communication is notified of communication failure when a combination of media or a media realization method and a terminal that can communicate between users involved in communication is not found as a result of determination by the determination means; To do.
[0017]
According to a fourth aspect of the present invention, the first configuration further includes:
In the determination result of the determination unit, when a combination of media or a media realization method and a terminal that can communicate between users involved in communication is found only for some media or media realization methods, The media implementation method is configured to have means for notifying a user or terminal that has requested communication.
[0018]
In the fifth aspect, the present invention provides the first configuration,
In the determination result of the determining means, when a combination of media or media realization methods and terminals that can be communicated between users involved in communication is found only for some media or media realization methods, only for the found media or media realization methods The call connection is set up and released.
[0019]
Sixthly, the present invention further includes the first configuration,
A configuration having the user terminal storage means for updating the storage contents of a usable terminal for each user by at least one of movement of the user, power ON / OFF of the terminal, or connection / disconnection of the terminal to / from a subscriber line And
[0020]
Seventhly, the present invention relates to the first configuration,
At least the terminal media storage means for updating the storage contents of the media that can be used for each terminal or the media realization method by attaching / detaching the input / output device.
[0021]
Eighthly, in the first configuration, the present invention provides the following:
Media conversion means for converting media between a plurality of media information that can be used for communication, media to be converted as information relating to the media conversion means, the type of media realization method, and position information in the communication system are stored A medium conversion storage unit, and the determination unit selects one of the media or media realization schemes used by the first user when there is no media or media realization schemes that can be commonly used among users participating in communication. By connecting the above media conversion means and searching for the media conversion means leading to the media used by the second user or the media realization method, it is repeated as necessary, and the media conversion storage means is started to activate the media conversion storage means. Media used by each user or media realization method and its media A configuration to determine the media conversion means for connecting the A or media implementation method.
[0022]
Ninth, the present invention provides the first configuration, wherein
Multi-point media processing means for performing arithmetic processing of a plurality of media information, media processing type and media that can be handled as media processing type information as information about the multi-point media processing means, and position information in the communication system Multi-point media processing storage means, the determination means, depending on the communication form specified in the communication request and the media or media realization method used by each user involved in the communication, if necessary, The multi-point media processing means is determined, and the call / connection control means controls connection setting between the multi-point media processing means and a terminal used for communication in a topology according to the communication form. It is set as the structure made to perform.
[0023]
Tenthly, in the present invention, means for storing the usable terminals for each user and the usable media realization method for each terminal are provided in advance to identify information and media types for identifying users involved in communication. One or more terminals used by each user involved in the communication by means of storing the available terminals for each user according to the communication request including the information to be obtained, and one of the obtained terminals Each or all users who are involved in communication are asked for one or more media realization methods that can be used by each user involved in communication by means of storing the media realization method that can be used with the terminal, provided in advance or for all Media conversion method that performs media conversion between multiple media information as needed, and combinations of one or more media realization methods and terminals used for communication It determines, a structure in which to perform the setting of the media implemented method and terminal combination, and based on the media conversion means used as required call connection.
[0024]
Eleventhly, in the tenth aspect of the present invention, the communication request further includes information indicating a communication form, and an operation between a plurality of pieces of media information is performed according to the designated communication form. Further, the multipoint media processing means for processing is further determined, and the call connection is set based on the combination of the media realization method and the terminal, and the media conversion means and the multipoint media processing means to be used as necessary. The configuration is as follows.
[0025]
In addition, the twelfth aspect of the present invention is that in the tenth aspect of the invention, a media realization method and a combination of terminals capable of communication between users involved in communication are determined as a result of the decision by the decision means. When only the method is found, the call connection is set / released only for the found media realization method.
[0026]
In a thirteenth aspect, the present invention relates to the communication system that accommodates a plurality of terminals capable of handling one or a plurality of media in the invention of the first configuration. An adjustment unit is provided that adjusts and determines at least one of a combination of a plurality of media or a combination of media composed of media or a combination of terminals composed of one or more terminals among users involved in communication.
[0027]
In the fourteenth aspect, the present invention provides a communication system that accommodates a plurality of terminals that can handle one or a plurality of media, and at least one or more other users and one or more media information that the user wishes to communicate with. At least one of a first step of inputting a communication request including: a combination of one or a plurality of media or media consisting of media implementation methods, or a combination of terminals consisting of one or more terminals in response to the communication request Used by at least one of the second stage of adjusting the communication between users involved in communication and the combination of media determined from the determined media or the media realization method, or the combination of terminals including one or more terminals. If possible, a third connection to set up a call connection for the media combination or terminal combination. And a floor.
[0028]
In the fifteenth aspect, the present invention is a communication system that accommodates a plurality of terminals that can handle one or a plurality of media, and at least one other user and one or more media that the user desires to communicate with. A communication request input means for receiving an input of a communication request including information about the communication request, and each user can be used to satisfy at least a part of the communication request for each user involved in communication in response to the communication request Candidate determination means for determining at least one of one or a plurality of media or a combination of media composed of media or a medium realization method or a combination of terminals composed of one or more terminals; The determined one or more media combination candidates or at least one terminal combination candidate for at least one user Select at least one of the users or different users involved in the communication, select one of the combination candidates and approve the communication by the combination, or select whether to change the communication request And a user intention reflecting means for determining a call connection based on the determination, and a setting means for setting a call connection based on the determination.
[0029]
As a preferred example, a sixteenth configuration includes a communication request changing unit that enables a user to input change contents when a change in communication request is selected by the user intention reflecting unit.
[0030]
Also, as a preferred example, in the seventeenth case, when there is a mismatch or may occur between the inputs of a plurality of users by the user intention reflecting means, the combination between at least two users involved in the communication is performed. It is configured that there is an inter-user adjustment means that makes it possible to make adjustments regarding selection of candidates or changes in communication requests.
[0031]
Eighteenth, the present invention is a terminal device that is connected to a network and can handle one or a plurality of media. A user includes at least one or more other users who wish to communicate and communication including information on one or more media. A communication request input means for inputting a request and a combination of one or a plurality of media that can be used by the user to satisfy at least a part of the communication request when the communication request occurs, regarding at least one user involved in the communication Or at least one of a combination of terminals is notified to the user or a different user involved in the communication, and either of the combinations is selected and communication by the combination is approved, or a communication request is changed. User intention reflecting means for determining the selection by input by the user who has received the notification, Hazuki a structure and a setting means for setting a call connection.
[0032]
DETAILED DESCRIPTION OF THE INVENTION
The present invention determines, for each outgoing call, a combination of a plurality of terminals that can have different media processing capabilities according to the media designated by the user at the time of outgoing call, and realizes connection to the combination of these terminals.
[0033]
The present invention provides a user terminal storage means, a terminal media storage means, a determination means, and a call / connection control means in a communication system, and the determination means is a communication partner user, used media or media realization method included in a communication request from a user. Based on the user terminal storage means and the terminal media storage means, a media or a media realization method and a combination of terminals usable for communication are determined, and a call connection is made to the determined media or media realization method and terminal combination. Can be realized by setting and releasing.
[0034]
Here, the user terminal storage means stores information on a terminal usable by the user for each user, and it becomes possible to search for a terminal usable by the user from an identifier for identifying the user. ing. The terminal media storage means stores media or a media realization method usable in the terminal for each terminal, and searches for a media or media realization method usable in the terminal from an identifier for identifying the terminal. It is possible to do.
[0035]
Further, the determining means searches for a usable terminal or combination of media using the user terminal storage means and terminal media storage means for each user participating in the communication, and actually communicates from the search result. A terminal or media combination to be used is selected. The call connection control means establishes / releases a connection for transmitting a designated medium between designated terminals. Any of the above means can be realized by a computer, for example.
[0036]
Further, the present invention provides media conversion means and media conversion storage means in addition to the above configuration, and the determination means, when there is no media or media realization method that can be commonly used among users participating in communication, One or more media conversion means are connected from the media or media realization method used by the first user, and repeated as necessary to search for media conversion means leading to the media or media realization method used by the second user. By activating the media conversion storage means, the media used by each user in communication between the plurality of users or the media realization method and the media conversion means connecting between the media or the media realization methods are determined, and the determined media or Call to media implementation method and terminal combination and media conversion means It can be realized by performing the setting and release the connection.
[0037]
Here, the media conversion means is a means for converting the media type or the media realization method from one to the other or mutually between a plurality of different types of media information. The media conversion storage means includes, for each media conversion means, the type of media or media realization method that can be converted by the media conversion means, and location information in the communication system such as a destination address used at the time of connection. From the identifier that identifies the media conversion means, and the type of media or media realization method that can be converted by the media conversion means, and location information in the communication system.
[0038]
Any of the above means can be realized by, for example, a computer or a signal processor.
[0039]
According to the present invention, a user terminal storage unit, a terminal media storage unit, a determination unit, a call / connection control unit, a multipoint media processing unit, and a multipoint media processing storage unit are provided in the communication system. The multi-point media processing means is determined according to the communication form specified in the request, such as a conference or broadcast, and the media or media realization method used by each user involved in the communication. The call connection control means can be realized by controlling the setting of the connection between the multipoint media processing means and the terminal used for communication in the topology according to the communication form.
[0040]
Here, the multi-point media processing means generates one or more pieces of media information by performing arithmetic processing such as duplication, composition or addition between one piece of input media information or a plurality of pieces of input media information, and outputs them. Means.
[0041]
Multi-point media processing storage means, for each multi-point media processing means, the media processing type, the type of media or media implementation method that can be handled, and the location in the communication system such as the destination address used at the time of connection Information, and the media processing type that can be executed by the multi-point media processing means from the identifier that identifies the multi-point media processing means, the type of media that can be handled or the media implementation method, The position information is held so as to be searchable. Any of the above means can be realized by, for example, a computer or a signal processor.
[0042]
The present invention also includes a user terminal storage means, a terminal media storage means, a determination means, a call connection control means, and an adjustment means in the communication system, and at least one or more other users who wish to communicate with one or more users. A first step of inputting a communication request including information relating to media; and a combination of media comprising one or more media or media realization methods or a combination of terminals comprising one or more terminals in response to the communication request At least one of a second step of adjusting and determining among users involved in communication, a combination of media determined from the determined media or media realization method, or a combination of terminals consisting of one or more terminals If one is available, the call By providing a third step of setting the action it can be realized.
[0043]
Here, the adjusting means adjusts at least one of a combination of one or a plurality of media or media consisting of media implementation methods or a combination of terminals consisting of one or more terminals among users involved in communication. A means for determining, for example, accepting a request from a user for at least one of a combination of media or media realization methods, or a combination of terminals composed of one or more terminals, and is commonly used between the arrival and departure users based on the accepted request It can be realized by, for example, a computer by repeatedly presenting at least one of possible media or a combination of media realization methods or a combination of terminals composed of one or more terminals to a user as necessary. .
[0044]
(First specific embodiment)
Details of the first specific embodiment of the present invention will be described below.
[0045]
FIG. 1 shows a hardware block diagram of a multimedia communication system according to the present invention. In the figure, 2 is a communication network, 3 is user terminal storage means, 4 is terminal media storage means, 5 is decision means, 6 is call / connection control means, 8 is media conversion storage means, and 10 is multipoint media processing storage. Means 12, adjustment means 101 and 114 are terminals, 701 and 702 are media conversion means, and 901 to 903 are multi-point media processing means.
[0046]
Among these, the media conversion means 701 and 702 convert the encoding method of voice and moving images, and the multipoint media processing means 901 to 903 perform conference connection and multicast connection by voice and moving images. belongs to.
[0047]
In addition, the multipoint media processing storage means 10 is provided for each multipoint media processing means within the communication system such as the media processing type, the type of media that can be handled or the media implementation method, and the destination address used at the time of connection. The media processing type that can be executed by the multipoint media processing means from the identifier that identifies the multipoint media processing means, the type of media that can be handled or the media implementation method, and the communication system The position information at is stored in a searchable manner.
[0048]
Further, the user terminal storage unit 3 stores information on a terminal usable by the user for each user, and can search for a terminal usable by the user from an identifier for identifying the user. Is.
[0049]
The terminal media storage unit 4 stores, for each terminal, media or media realization methods that can be used by the terminal, and searches for media or media realization methods that can be used by the terminal from an identifier that identifies the terminal. Is possible.
[0050]
The determination means 5 searches the user terminal storage means 4 and the terminal media storage means for each user participating in the communication using the user terminal storage means 4 and the terminal media storage means, and actually uses the search results for the communication. A combination of terminals or media to be used is selected. That is, the determination unit 5 refers to the terminal media storage unit 4 to determine what terminal is available to the user, what media can be handled, what encoding method is used, and the other user to connect to. It has a function of determining what kind of terminals can be used and what combination of terminals to use.
[0051]
The call / connection control means 6 sets / releases a connection for transmitting the designated media between the designated terminals, and sets up the call / connection according to the instructions from the decision means 5. Is.
[0052]
The media conversion storage means 8 stores function information and the like for each media conversion means of each terminal connected to the communication network. For each media conversion means, the type of conversion media (including the encoding method) and the address ( (Destination at the time of connection) is stored. Further, the multi-point media processing means 113 generates one or more media information by performing arithmetic processing such as duplication, composition or addition between one input media information or a plurality of input media information, and outputs the media information. It is.
[0053]
The adjusting means 12 is a function that adjusts and determines at least one of a combination of one or a plurality of media or a combination of media composed of media or a combination of terminals composed of one or more terminals among users involved in communication. It is what has. In addition, the multipoint media processing storage means 114 is a communication system such as a media processing type, a type of media that can be handled or a media realization method, and a destination address used at the time of connection for each multipoint media processing means 113. And the media processing type that can be executed by the multi-point media processing means 113 from the identifier that identifies the multi-point media processing means, the type of media that can be handled or the media implementation method, The position information in the communication system is held so as to be searchable.
[0054]
Each of the terminals 101 to 114 is connected to each other via the communication network 2 and has a unique terminal ID (identification code). Here, each terminal 101 to 114 has its terminal ID “101”, its terminal 102 has its terminal ID “102”, and its terminal 103, according to the codes given to the terminals 101 to 114. It is assumed that the terminal ID is assigned to “103”.
[0055]
Among these terminals, the terminal 101 is a multimedia terminal capable of handling voice and moving images, the terminal 102 and the terminal 107 are computer terminals (such as a personal computer and a workstation) capable of handling moving images, and the terminals 103 and 104. , 105 and 106 are telephone terminals that can handle voice.
[0056]
The terminal 108 is a computer terminal capable of handling voice and moving images. The terminal 109 is a terminal having the functions of the determining means 5, the adjusting means 12 and the call / connection control means 6, and the terminal 110 is a terminal having the functions of the user terminal storage means 3 and the terminal media storage means 4. It is.
[0057]
Further, the terminal 111 has media converting means 701 and 702 for converting the encoding method of voice and moving images, and the terminal 112 has the function of the media conversion storing means 8 described above.
[0058]
The terminal 113 is a terminal having the functions of the multipoint media processing means 901 to 903 for performing conference connection and multicast connection by voice and moving images, and the terminal 114 has the function of the multipoint media processing storage means 10. It is a terminal.
[0059]
User terminal storage means 3, terminal media storage means 4, determination means 5, call / connection control means 6, media conversion means 701 and 702, media conversion storage means 8, multi-point media processing means 901 to 903, multi-point Each means of the intermediary media processing storage means 10 and the adjusting means 12 is not necessarily realized on a computer terminal, and a part or all of these means are provided in a network facility such as an exchange or a server device. Also good.
[0060]
FIG. 2 shows an example of stored information in the user terminal storage unit 3, and FIG. 3 shows an example of stored information in the terminal media storage unit 4. As shown in FIG. 2, the user terminal storage means 3 stores the ID (identification code) of the user and the ID of the terminal that can be used by the user for each user. Also, as shown in FIG. 3, the terminal media storage means 4 stores the ID for each terminal and the media type of the terminal together with the information of the encoding method.
[0061]
Various specific operation examples in the present system according to the first specific embodiment having such a configuration will be described. First, a case where the user A activates a communication request with the user B by voice and moving images will be described as a first specific operation example.
[0062]
[First specific operation example]
As a first specific operation example in the present system according to the first specific embodiment, here, a user A who can use a terminal with a terminal ID “101” has a terminal ID “102”, “103”. A case will be described as an example in which a request for communication with the user B using voice and moving images is activated for the user B who can use the terminals "104". The terminal 101 with the terminal ID “101” is a multimedia terminal capable of handling voice and moving images, and the terminal 102 with the terminal ID “102” is a computer terminal (such as a personal computer or a workstation) that can handle moving images. The terminal 103 whose terminal ID is “103” and the terminal 104 whose terminal ID is “104” are telephone terminals that can handle voice. The message sequence in this example is shown in FIG.
[0063]
In this case, first, the communication requesting user A issues a communication request to the communication network 2 by designating the user B as a communication partner and voice and moving images as media to be used in the communication request. Then, the communication network 2 notifies the communication request to the terminal 109 having the function of the determining means, and the terminal 109 notifies the communication request to the determining means 5 on the own terminal (message M401 in FIG. 4).
[0064]
Upon receiving this communication request, the determination unit 5 refers to the user terminal storage unit 3 (M402), and, according to the reference response (M403), the user A uses the terminal 101 and the user B uses the terminals 102, 103, and 104, respectively. Recognize that it is possible.
[0065]
Next, the deciding unit 5 refers to the terminal media storage unit 4 of the terminal 110 (M404), and the reference response (M405) from the terminal media storage unit 4 indicates that “the terminal 101 usable by the user A is a video and audio. Can be used in the encoding schemes v1 and a1, respectively. The terminal 102 that can be used by the user B has the moving image in the encoding scheme v1, the terminal 103 in the encoding scheme a1, and the terminal 104 in the encoding scheme Can be used in the encoding scheme a2. "
[0066]
Based on the recognition result, the determination unit 5 notifies the communication request to the user B (M406). In response to this communication request, an approval notification (M407) is issued from the user B side.
[0067]
Next, the determination unit 5 receives an approval notification (M407) from the user B for the communication request, and uses “the terminal 101 that can handle the voice encoding method a1 and the moving image encoding method v1” on the user A side. On the user B side, “the terminal 103 that can handle the encoding scheme a1 to handle speech” is used, and “the terminal 102 that can handle the encoding scheme v1 to handle moving images” is used. The determined contents are notified to the call / connection control means 6 (M408).
[0068]
Then, the call connection control means 6 connects the terminal 101 and the terminal 103 for voice and connects the terminal 101 and the terminal 102 for moving images in accordance with the notification content from the determination means 5. When the call connection setting ends normally, the call connection setting response is notified to the determining means 5 (M409).
[0069]
In response to this, the determination means 5 notifies the user A and the user B of the start of communication (M410, M411).
[0070]
FIG. 5 shows the setting state of the connection set in this way. In the figure, reference numeral 11 denotes a connection. For the user A side, the terminal 101 that can handle the voice encoding scheme a1 and the moving image encoding scheme v1 is used, and for the user B side, encoding is performed in order to handle voice. The terminals 103 that can handle the scheme a1 are used to form a connection 11 that uses the speech coding scheme a1. For the moving image, the user B side can handle the coding scheme v1 in order to handle the moving image. 102 shows that the user A side communicates with the terminal 101 by forming a connection 11 using the encoding method v1.
[0071]
The above is an operation example in which the user A activates a communication request with the user B by voice and moving images.
[0072]
Next, a second specific operation example will be described by taking as an example a case where the user A activates a communication request with the user C by voice and moving images.
[0073]
[Second specific operation example]
As a second specific operation example in this system according to the first specific embodiment, here, user A who can use the terminal with the terminal ID “101” uses the terminal with the terminal ID “105”. A case will be described as an example where a request for communication with the user C by voice and moving images is activated for the possible user C. The terminal 101 whose terminal ID is “101” is a multimedia terminal capable of handling voice and moving images, and the terminal 105 whose terminal ID is “105” is a telephone terminal capable of handling only voice.
[0074]
The message sequence in this example is shown in FIG.
[0075]
When activating a communication request with the user C using voice and moving images, the user A specifies the user C as a communication partner and voice and moving images as media to be used in the communication request.
[0076]
This communication request is notified to the determination means 5 (message M601 in FIG. 6). Then, the determination unit 5 refers to the contents of the user terminal storage unit 3 (M602), and by the reference response (M603), “user A can use the terminal 101 and user C can use the terminal 105, respectively. "
[0077]
Next, the determining unit 5 refers to the terminal media storage unit 4 (M604), and, according to the reference response (M605), “the terminal 101 that can be used by the user A uses the encoding schemes v1 and a1 respectively for the moving image and the voice. The terminal 105 that can be used and can be used by the user C recognizes that the voice can be used in the encoding scheme a1.
[0078]
As a result, the determination unit 5 determines that the medium that can be commonly used by the user A and the user C is “only the audio of the encoding scheme a1”.
[0079]
Based on the recognition result, the determination unit 5 notifies the communication request to the user C (M606).
[0080]
In this way, when the user A issues a communication request by voice and moving image to the user C, which terminal can be used for the determination means 5 and what media can be commonly used between the user A and the user C. From the result of the determination, knowing that communication is possible only by voice, notification of performing communication only by voice is made (M606). Upon receiving an approval notification (M607) from the user C for this communication request, the determination unit 5 notifies the user A that connection can be made only by voice ((partial connection available notification) M608. ).
[0081]
In response to this notification, the user A requests a connection only by voice (M609), whereby the determination means 5 performs call / connection control so that the terminal 101 and the terminal 105 are connected by the voice of the encoding method a1. The means 6 is instructed (M610).
[0082]
The call connection control means 6 sets a call connection according to the contents of notification, and when the call connection setting ends normally, notifies the determination means 5 of a call connection setting response (M611). Upon receiving this notification, the determination unit 5 notifies the user A and the user C of the start of communication (M612, M613). Then, voice communication between the terminal 101 and the terminal 105 is enabled.
[0083]
The setting state of the connection set in this way is shown in FIG. FIG. 7 shows a state in which a connection using the encoding method a1 is established between the terminal 101 and the terminal 105, and voice communication can be performed between the terminal 101 and the terminal 105. Yes.
[0084]
The second specific operation example described above is an example in which the user A activates a communication request with the user C by voice and moving images. Next, a third specific operation example will be described by taking as an example a case where the user A activates a communication request with the user D by voice and moving images.
[0085]
[Third specific operation example]
As a third specific operation example in the present system according to the first specific embodiment, here, a user A who can use a terminal whose terminal ID is “101” has terminal IDs “106” and “107”. An example will be described in which a communication request using voice and moving images is activated for the user D who can use the terminal. The terminal 101 whose terminal ID is “101” is a multimedia terminal capable of handling voice and moving images, and the terminal 106 whose terminal ID is “106” is a telephone terminal that can handle only voice, and the terminal ID is A terminal 107 “107” is a computer terminal (such as a personal computer or a workstation) that can handle moving images.
[0086]
FIG. 8 shows a message sequence as an example when the user A activates a communication request with the user D by voice and moving images.
[0087]
A description will be given with reference to FIG. Assume that user A specifies user D as a communication partner and voice and moving images as media to be used in a communication request.
[0088]
This communication request is notified to the determining means 5 on the terminal 108 (message M801 in FIG. 8). Then, the determination unit 5 refers to the user terminal storage unit 3 (M802), and the user A can use the terminal 101 and the user D can use the terminal 106 and the terminal 107 based on the reference response (M803). Recognize
[0089]
Next, the determination unit 5 refers to the terminal media storage unit 4 (M804), and the reference response (M805) indicates that “the terminal 101 usable by the user A converts the moving image and the voice to the encoding schemes v1 and a1, respectively. "The terminal 106 that can be used by the user D can use the voice in the encoding scheme a2", and the "terminal 107 that the user D can use is the encoding scheme for moving images." Recognize that it can be used in v2.
[0090]
As a result, the determination unit 5 determines that “there is no medium that can be used in common between the user A and the user D”, and refers to the media conversion storage unit 10 (M806).
[0091]
FIG. 9 shows the configuration of the media conversion storage means 8. As shown in the figure, the media conversion storage unit 8 stores the type of conversion media (including the encoding method) and the address (destination at the time of connection) for each media conversion unit.
[0092]
By using the media conversion means 701 and 703 among the media conversion means stored in the media conversion storage means 8 according to the reference response (M807) of the media conversion storage means 8, the “encoding method is changed. It is possible to “mutually convert from a1 to a2 and from a2 to a1”. For moving images, it is possible to “mutually convert the encoding method from v1 to v2 and v2 to v1”. As a result, if this is used, it is recognized that the media used by user A and user D can be connected to each other.
[0093]
Based on the recognized contents, the determination unit 5 determines to select the media conversion units 901 and 903.
[0094]
Therefore, the determination unit 5 notifies the communication request to the user D (M808). Upon receiving the approval notification (M809) from the user D with respect to the communication request, the determination unit 5 receives the encoding method a1 between the terminal 101 and the media conversion unit 901, and the terminal 101 and the media conversion unit. 903 is connected with a moving image of the encoding method v1, respectively, and between the media conversion unit 701 and the terminal 106 is audio of the encoding method a2, and the media conversion unit 703 and the terminal 107 are connected. Are instructed by the call / connection control means 6 to connect each of them with a moving image of the encoding method v2 (M810).
[0095]
The call connection control means 6 sets the call connection according to the content instructed by the determination means 5 and, when the call connection setting is completed normally, notifies the determination means 5 of a call connection setting response ( M811).
[0096]
In response to this, the determination unit 5 notifies the user A and the user D of the start of communication (M812, M813).
[0097]
The setting state of the connection set in this way is shown in FIG. That is, for voice communication, a connection 11 formed between the terminal 101 and the terminal 106 via the media conversion means 701 establishes a voice communication path using mutual conversion between the encoding methods a1 and a2. For video, a connection 11 formed between the terminal 101 and the terminal 107 via the media conversion means 703 establishes a moving image exchange path using mutual conversion between the encoding methods v1 and v2. Between the terminal 101 and the media conversion means 901 with the audio of the encoding method a1, and between the terminal 101 and the media conversion means 903 with the moving image of the encoding method v1, and the media conversion means 701 and the terminal 106 are exchanged with the voice of the encoding scheme a2, and the encoding scheme v is exchanged between the media converting means 703 and the terminal 107. Exchanges in the moving image.
[0098]
As a result, audio and moving images with different encoding methods can be exchanged between the user A and the user C.
[0099]
The third specific operation example described above is an example in which the user A activates a communication request to the user D by voice and moving images. Next, a fourth specific operation example will be described by taking as an example the case where user A requests conference communication with users B and D by voice and moving images.
[0100]
[Fourth Specific Operation Example]
As a fourth specific operation example in the present system according to the first specific embodiment, here, a user A who can use a terminal having a terminal ID “101” has terminal IDs “102” and “103”. , "User B" who can use the terminal of "104" and User D who can use the terminals of the terminal IDs "106" and "107" will be described as an example.
[0101]
In conference communication, communication using voice and moving images is necessary. A terminal 101 with a terminal ID “101” is a multimedia terminal capable of handling voice and moving images, and a terminal 102 with a terminal ID “102” is a computer terminal (such as a personal computer or a workstation) that can handle moving images. The terminal 103 whose terminal ID is “103” and the terminal 104 whose terminal ID is “104” are telephone terminals that can handle voice.
[0102]
A terminal 106 with a terminal ID “106” is a telephone terminal that can handle only voice, and a terminal 107 with a terminal ID “107” is a computer terminal (such as a personal computer or a workstation) that can handle moving images.
[0103]
A case where user A requests conference communication with users B and D by voice and moving images will be described as an example. A message sequence in this embodiment is shown in FIG.
[0104]
In requesting the conference communication, the user A designates the user B and the user D as communication partners, the voice and the moving image as the use media, and the conference as the communication mode in the communication request. This communication request is notified to the determining means 5 on the terminal 108 (message M1101 in FIG. 11).
[0105]
Then, the determination unit 5 refers to the user terminal storage unit 3 (M1102), and, according to the reference response (M1103), the user A is the terminal 101, the user B is the terminals 102, 103, and 104, the user D is the terminal 106, Recognize that each can be used.
[0106]
Next, the determination unit 5 refers to the terminal media storage unit 4 (M1104), and, according to the reference response (M1105), “the terminal 101 usable by the user A converts the video and audio to the encoding schemes v1 and a1, respectively. The terminal 102 that can be used by the user B encodes the moving image with the encoding method v1, the terminal 103 encodes the audio with the encoding method a1, and the terminal 104 encodes the audio. "The terminal 106 that can be used by the user D can use the voice in the encoding scheme a2, and 107 can use the moving image in the encoding scheme v2." Recognize that.
[0107]
Further, when the communication mode is conference communication, the determination unit 5 refers to the multipoint media processing storage unit 10 (M1106).
[0108]
FIG. 12 shows the configuration of the multipoint media processing storage means 10. As shown here, the multipoint media processing storage means 10 stores the media processing type (conference, broadcast, etc.), handling encoding method and address (destination at the time of connection) for each multipoint media processing means. ing.
[0109]
Based on the reference response (M1107) from the multipoint media processing storage unit 10, the determination unit 5 selects “multiple media that support conference media processing” from among the multipoint media processing units stored in the multipoint media processing storage unit 10. It is known that there is the multi-point media processing means 901 as “the point-to-point media processing means whose usable encoding methods are a1 and v1”. Then, the determining unit 5 selects the multipoint media processing unit 901.
[0110]
Further, the determination means 5 refers to the media conversion storage means 10 in order to connect the multipoint media processing means 901 and the terminals 106 and 107 (M1108), and in response to the reference response (M1109), “speech encoding” It is known that there is media conversion means 701 as media conversion means for converting “between schemes a1 and a2”, and media conversion means 703 as media conversion means for converting “between moving picture coding schemes v1 and v2.”
[0111]
Then, the determination unit 5 selects the media conversion unit 701 and the media conversion unit 703 as media conversion units for converting “between the audio encoding methods a1 and a2” and “between the moving image encoding methods v1 and v2,” respectively.
[0112]
When these selections are completed, the determination unit 5 notifies the user B and the user D of a communication request (M1110, M1111). User B and user D return an approval notification (M1112, M1113) for the communication request.
[0113]
The determination unit 5 receives the approval notification (M1112, M1113) from the user B and the user D in response to the communication request, and the voice and encoding of the encoding method a1 between the terminal 101 and the multipoint media processing unit 901. In the moving image of the method v1, between the terminal 102 and the multipoint media processing means 901, in the moving image of the encoding method v1, and between the terminal 103 and the multipoint media processing means 901. Encoding is performed between the encoding method a1 and between the terminal 106 and the media conversion unit 701 with encoding method a2 and between the media conversion unit 701 and the multipoint media processing unit 901. Encoding method a1, audio between the terminal 107 and the media conversion unit 703 using a moving image of the encoding method v2, and media conversion unit 703 and multipoint media. Between the A processor 901 in the moving picture coding method v1, it instructs the call connection control unit 6 so as to connect each (M1114).
[0114]
Then, the call connection control means 6 sets the call connection according to the contents instructed by the decision means 5 and, when the call connection setting is completed normally, notifies the decision means 5 of the call connection setting response. (M1115). Receiving this, the determination means 5 notifies the user A, the user B, and the user D of communication start (M1115, M1116, M1117).
[0115]
The setting state of the connection set in this way is shown in FIG. In the figure, the terminal 101 and the multipoint media processing means 901 are exchanged with the audio of the encoding scheme a1 and the moving image of the encoding scheme v1, and the terminal 102 and the multipoint media processing means 901 are exchanged. Between the terminal 103 and the multipoint media processing means 901 with the voice of the encoding method a1, and the terminal 106 and the media conversion means 701 are exchanged with the audio of the encoding method a2, and between the media conversion means 701 and the multipoint media processing means 901 are exchanged with the audio of the encoding method a1. In addition, the terminal 107 and the media conversion means 703 are exchanged with a moving image of the encoding method v2, and the media conversion means 703 and the multipoint media are exchanged. How between the processing means 901 so as to exchange with the moving picture coding method v1 is shown.
[0116]
As a result, the audio of the encoding method a1 and the moving image of the encoding method v1 are exchanged between the terminal 101 and the multipoint media processing means 901, and the terminal 102 and the multipoint media processing means 901 are exchanged. Between the terminal 103 and the multipoint media processing means 901, and the voice of the encoding system a1 is exchanged between the terminal 103 and the media conversion means 701. Between the media conversion means 701 and the multipoint media processing means 901, and between the terminal 107 and the media conversion means 703. Between the media conversion unit 703 and the multipoint media processing unit 901, the video of the encoding method v1 is transferred between the media conversion unit 703 and the multipoint media processing unit 901. It is received, so that it is conferenced voice and moving images over the difference between the differences and the terminal function of the coding scheme between users.
[0117]
In the fourth specific operation example described above, an example has been described in which conference communication is possible by overcoming the difference in usable terminal functions and encoding methods between users. Next, a fifth specific operation example will be described by taking as an example the case where the user A activates a communication request with the user E by voice and moving images.
[0118]
[Fifth Specific Operation Example]
As a fifth specific operation example in this system according to the first specific embodiment, here, a user A who can use a terminal with a terminal ID “101” uses a terminal with a terminal ID “108”. A case will be described as an example in which a communication request using voice and moving images is activated for a possible user E.
[0119]
The terminal 101 with the terminal ID “101” is a multimedia terminal that can handle voice and moving images, and the terminal 108 with the terminal ID “108” is a terminal that can handle voice and moving images. However, while the terminal 101 handles the moving image with the encoding method v1 and handles the sound with the encoding method a1, the terminal 108 performs encoding that integrates the moving image and the sound into a single encoding method. It is assumed that the method av1 is handled.
[0120]
The message sequence in this example is shown in FIG.
[0121]
This will be described with reference to FIG. In the communication request, the user A designates the user E as a communication partner and voice and moving images as media to be used. This communication request is notified to the determination means 5 (message M1401 in FIG. 14). Accordingly, the determination unit 5 refers to the user terminal storage unit 3 (M1402), and recognizes that the user A can use the terminal 101 and the user E can use the terminal 108 based on the reference response (M1403). To do.
[0122]
Next, the determination unit 5 refers to the terminal media storage unit 4 (M1404), and, according to the reference response (M1405), “the terminal 101 that can be used by the user A converts the video and audio to the encoding schemes v1 and a1, respectively. It is recognized that “the terminal 108 usable by the user E can be used in the coding scheme av1 in which the moving image and the voice are integrated into a single coding scheme”.
[0123]
As a result of this recognition, the determination means 5 that knows that the encoding methods that can be used by the user A and the user E are different refers to the media conversion storage means 10 to check whether the media conversion is possible (M1406). .
[0124]
The configuration of the media conversion storage means 10 is the same as that of FIG. 9 used in the third specific operation example. Based on the reference response (M1407), the determination unit 5 recognizes that there is no media conversion unit that can convert between the encoding schemes a1 and v1 and the encoding scheme av1.
[0125]
As a result, the determining unit 5 determines that there is no encoding method that can be interconnected between the user A and the user E, and notifies the user A that communication is not possible (M1408). Therefore, communication is not established between user A and user E.
[0126]
In the fifth specific operation example described above, an example has been described in which the encoding methods that can be handled are inconsistent and there is no media conversion means that can convert the encoding method. Next, a processing procedure for automatically reflecting a terminal being used by the user to the user terminal storage unit 3 will be described as a sixth specific operation example.
[0127]
[Sixth specific operation example]
As a sixth specific operation example in the system according to the first specific embodiment, a processing procedure for automatically reflecting a user terminal in use in the user terminal storage unit 3 will be described. When the terminal is a computer terminal, the system is configured to update the user terminal storage unit 3 by a login procedure when the user logs in to the computer terminal.
[0128]
For example, if the user A normally uses the terminal 101 which is a multimedia terminal, but may log in to another computer terminal, the user terminal storage means 3 normally has a terminal as a terminal corresponding to the user C. 101 is set. For example, when the user A logs in to the terminal 107, the terminal 107 notifies the user terminal storage unit 3 of the change of the user A's terminal in accordance with the login procedure, and corresponds to the user A in the user terminal storage unit 3. The terminal to be changed is changed to the terminal 107.
[0129]
Similarly, when the user A logs out from the terminal 107, the terminal 107 notifies the user terminal storage means 3 of the change of the terminal used by the user A according to the logout procedure, and the terminal corresponding to the user A in the user terminal storage means 3 is the default. Terminal 101.
[0130]
In this example, an example is shown in which a change in the terminal used is notified from the terminal to the user terminal storage unit 3 by login / logout to the terminal. However, the user terminal storage unit 3 periodically notifies the user of each terminal. The terminal to be used may be updated by inquiring about the login status. Further, whether or not the user is using the terminal does not necessarily need to be configured to be updated according to the login status of the user. For example, the terminal power ON / OFF, the user location information, or the terminal subscriber line It may be configured to be updated according to the result of detecting connection / disconnection to / from. According to the method of the present embodiment, it is possible to automatically update the user terminal storage unit appropriately based on the state of which terminal the user is using. Next, a processing procedure for automatically reflecting the presence / absence of the media input / output capability of the terminal in the terminal media storage means 4 will be described as a seventh specific operation example.
[0131]
[Seventh specific operation example]
As a seventh specific operation example in the system according to the first specific embodiment, a processing procedure for automatically reflecting the presence / absence of the media input / output capability of the terminal in the terminal media storage unit 4 will be described. .
[0132]
In a computer terminal or the like, the types and contents of media that can be handled depend on what functions of input / output devices (interfaces) are installed. Therefore, it is necessary to manage what input / output devices are currently installed and available.
[0133]
In this case, when an input / output device for the terminal is attached / detached for each terminal, addition / deletion of used media or encoding method from the input / output management function on the terminal to the terminal media storage unit 4 Configure the system to be notified.
[0134]
For example, when a voice input / output device is mounted on the terminal 107, software (driver) that performs encoding / decoding of voice information and drives the input / output device is installed, the software or the input / output on the terminal The management function notifies the terminal media storage unit 4 of an additional registration request for the encoding method used, and the terminal media storage unit 4 is updated.
[0135]
On the contrary, when the voice input / output device is withdrawn, the input / output management function on the terminal detects the withdrawal of the input / output device, and the terminal media storage means 4 is notified of the request to delete the used encoding method, The terminal media storage means 4 is updated.
[0136]
As a result, for example, when a voice input / output device is attached to the terminal 107, software for encoding / decoding voice information and driving the input / output device is installed, the software or the input / output on the terminal is installed. When the management function notifies the terminal media storage unit 4 of an additional registration request for the coding method used, the terminal media storage unit 4 is updated, and when the voice input / output device is withdrawn, the input / output management function on the terminal is activated. The withdrawal of the input / output device is detected, and the terminal media storage unit 4 is notified of a request to delete the used encoding method, and the terminal media storage unit 4 is updated.
[0137]
Next, another example in which the user A activates a communication request with the user D by voice and moving images will be described as an eighth specific operation example.
[0138]
[Eighth Specific Operation Example]
As an eighth specific operation example in the system according to the first specific embodiment, another example in which the user A activates a communication request with the user D by voice and moving images will be described.
[0139]
The terminal 101 that can be used by the user A is a terminal that can handle voice and moving images, the terminals 106 and 107 that can be used by the user D are telephone terminals that can only handle voice, and the latter that can handle moving images but cannot handle voice. It is.
[0140]
The message sequence in this example is shown in FIG. In this example, at least one of one or a plurality of media, a combination of media composed of media implementation methods, or a combination of terminals composed of one or more terminals is determined by adjusting between users involved in communication. The adjusting means 12 having the function to perform is used.
[0141]
This will be described with reference to FIG. In the communication request, the user A designates the user D as a communication partner and voice and moving images as media to be used. This communication request is notified to the adjusting means 12 (message M1501 in FIG. 15). Then, the adjusting unit 12 notifies the user D that the communication request from the user A has been activated (M1502).
[0142]
In response to this notification, the user D responds to this communication request that communication using only voice is possible (M1503). When the adjustment unit 12 receives this response, the adjustment unit 12 knows that the communication request from the user A and the communication request from the user D are different media combinations. Then, the adjusting unit 12 inquires of the user A and the user D whether or not the connection can be made only with the voice that is the medium that both the users desire in common (M1504, M1505).
[0143]
In this example, it is assumed that the user A approves this inquiry. Therefore, the user A notifies the adjustment means 12 that the inquiry is approved (M1506).
[0144]
The user D also responds to the adjusting means 12 as approving since it is as requested in the media (M1507).
[0145]
In addition, like the user D of this example, when the inquiry content to each user is as the user's initial request, the inquiry and approval procedure may be omitted.
[0146]
The adjustment means 12 obtains the approval response from both the users A and D, and then refers to the user terminal storage means 3 (M1508). By the reference response (M1509), the user A side changes the terminal 101 to The user D recognizes that the terminal 106 and the terminal 107 can be used.
[0147]
Next, the adjustment unit 12 refers to the terminal media storage unit 4 (M1510), and the reference response (M1511) allows the terminal 101 that can be used by the user A to use the voice in the encoding method a1, and the user D Can recognize that the voice can be used in the encoding scheme a2.
[0148]
As a result, the adjusting unit 12 determines that there is no encoding method that can be used in common between the user A and the user D, and refers to the media conversion storage unit 10 (M1512). The configuration of the media conversion storage means 10 is the same as that described in the third specific operation.
[0149]
Based on the reference response (M1513) of the media conversion storage means 10, the adjustment means 12 uses the media conversion means 701 among the media conversion means stored in the media conversion storage means 10 to change the audio encoding method to a1. It is possible to convert from a2 to a2, and from a2 to a1, and recognize that the user A and the user D can be connected by audio media.
[0150]
Then, based on the recognition result, the media conversion unit 701 which is a media conversion unit capable of mutual conversion of the audio encoding method is selected, and the audio of the encoding method a1 between the terminal 101 and the media conversion unit 701, The call connection control means 6 is instructed to connect the media conversion means 701 and the terminal 106 with the audio of the encoding method a2 (M1514).
[0151]
The call connection control means 6 sets the call connection according to the instructed contents, and when the call connection setting ends normally, notifies the adjustment means 12 of a call connection setting response (M1515).
[0152]
In response to this, the adjustment unit 12 notifies the user A and the user D of the start of communication (M1516, M1517).
[0153]
FIG. 16 shows the setting state of the connection set in this way. In the figure, the media conversion means is connected between the terminal 101 and the media conversion means 701 with the voice of the encoding system a1 via the media conversion means 701 which is a media conversion means capable of mutual conversion between the voice encoding methods a1 and a2. A state is shown in which voice communication is performed by connecting the terminal 701 and the terminal 106 with the voice of the encoding method a2.
[0154]
As described above, according to the first specific embodiment, when requesting communication including a plurality of media, the user can participate in the communication, the media to be used, and the necessity in one communication request. By selecting the communication form according to the selection of the appropriate terminal combination for each user participating in the communication, without being aware of the terminal environment of other users participating in the communication, usable encoding methods, etc. There is an effect that it is possible to set up a call connection for the selected terminal.
[0155]
The above is an example in which the system side automatically selects media that can be used in relation to the other party and sets up a call connection. Next, an example in which this is not automatic but leaves room for the user to select will be described as a second specific embodiment.
[0156]
(Second specific embodiment)
That is, here, another object of the present invention is to request communication consisting of a combination of a plurality of media without designating a terminal to be used in advance, and to request one or a plurality of terminals for the plurality of media of the communication request. In the case of realizing by the combination of the above, it is possible to present the media that can be used for communication with the other party and to allow the user to select, thereby preventing communication in an unexpected form of the user. An example of realizing communication in a form reflecting the intentions of a plurality of users will be described as a second specific embodiment.
[0157]
Therefore, here, a communication system accommodating a plurality of terminals capable of handling one or a plurality of media, and a communication request by a user including at least one other user who desires communication and information on one or more media One or a plurality of communication requests that can be used by each user to satisfy at least part of the communication request for each of the users involved in the communication in response to the communication request input means and the communication request Candidate determination means for determining one or a plurality of media or a combination of media composed of media, or a combination of terminals composed of one or more terminals, and for the at least one user involved in the communication At least one of the determined one or more media combination candidates or terminal combination candidates One of them is notified to the user or a different user involved in the communication, and the selection of either one of the combination candidates to approve communication by the combination, or the desire to change the communication request, A user intention reflecting unit that is determined by an input by the user who has received the notification and a setting unit that sets a call connection based on the determination are provided.
[0158]
Also preferably, the communication request changing means is configured to allow the user to input the change contents when the change of the communication request is selected by the user intention reflecting means.
[0159]
Further preferably, when there is or may be a mismatch between inputs of a plurality of users by the user intention reflecting means, selection of the combination candidates among at least two users involved in the communication, Or it is set as the structure provided with the adjustment means between users which enables adjustment regarding the change of a communication request | requirement.
[0160]
The terminal device is a terminal device connected to a network and capable of handling one or a plurality of media. The communication request includes at least one or more other users who desire communication and information on one or more media. A combination of one or more media that can be used to satisfy at least a portion of the communication request at the time the communication request occurs, with respect to the communication request input means for inputting Or whether to notify the user or a different user involved in the communication of at least one of the terminal combinations and select one of the combinations to approve communication by the combination, or to change the communication request User intention reflecting means for determining selection of the user by input by the user who has received the notification, and based on the determination. Configured to provide a setting means for setting the call connection can.
[0161]
FIG. 17 is a block diagram showing a configuration example of a communication system as a second specific embodiment. In the figure, 1300 is user terminal storage means, 1400 is terminal media storage means, 1500 is candidate determination means, 1600 is call / connection control means, 1800 is media conversion storage means, 2300 is communication request input means, and 2400 is user intention reflection. Means 2500 is an inter-user adjustment means, 2600 is a communication request changing means, and 3000 is a multi-point media processing storage means.
[0162]
Among these, the communication request input unit 2300 has a function of accepting an input by a user of a communication request including information on at least one other user who desires communication and one or more media.
[0163]
In addition, the candidate determining unit 1500 can use one or more media or each of the users that can be used by each user to satisfy at least a part of the communication request for each user involved in communication in response to the communication request. It has a function of determining one or a plurality of sets of at least one of a combination of media consisting of a media realization method and a combination of terminals consisting of one or more terminals.
[0164]
More specifically, the candidate determination unit 1500 uses one or more media that can be used by each user by the user terminal storage unit 1300 and the terminal media storage unit 1400 for each user involved in communication. At least one of a combination candidate or a terminal combination candidate is determined.
[0165]
Further, the candidate determining means 1500 may convert one or more media conversions from the media or media implementation scheme used by the first user when there is no media or media implementation scheme that can be commonly used among users participating in communication. Communication between the plurality of users is started by repeatedly starting the media conversion storage unit 1800 as necessary in order to search for the media conversion unit leading to the media used by the second user or the media realization method by connecting the units. It is also possible to obtain information on whether or not there is media conversion means for connecting between the media used by each user or the media realization methods, and to determine candidates by taking that information into consideration.
[0166]
Alternatively, the candidate determination unit 1500 activates the multipoint media processing storage unit 3000 according to the communication mode specified in the communication request and the media or media implementation method used by each user involved in the communication. A multi-point media processing means may be determined as necessary.
[0167]
The user intention reflecting means 2400 is involved in at least one of the determined one or more media combination candidates and / or terminal combination candidates for at least one user involved in the communication. Notify a different user, select one of the combination candidates and approve communication by the combination, or select whether to change the communication request by the user who has received the notification and decide It is something to be made.
[0168]
The communication request changing unit 2600 enables the user to input the change contents of the communication request.
[0169]
The inter-user adjustment unit 2500 is a candidate for the combination between at least two or more users involved in the communication when a mismatch occurs or may occur between the inputs of a plurality of users by the user intention reflection unit. This makes it possible to make adjustments regarding the selection of or the change of the communication request.
[0170]
The call / connection control unit 1600 sets / releases a call / connection based on the user's selection by the user intention reflecting unit from the media combination candidates or the terminal combination candidates.
[0171]
The communication request input unit 2300, the user intention reflection unit 2400, the inter-user adjustment unit 2500, and the communication request change unit 2600 provide information to the user via a user I / F (interface) that can be used in at least one terminal used by the user. And accepts input from the user.
[0172]
The user I / F is, for example, a personal computer, a workstation screen / keyboard / mouse, or a multi-function telephone display screen and dials and buttons, or a normal telephone microphone / speaker and a voice recognition / synthesis function provided in the exchange. Or a combination of these. Each means is realized by such a user I / F and a function for controlling it. The substance of the function to be controlled is a program that is stored in a personal computer, a workstation, a control computer added to the exchange, and executed on the computer.
[0173]
FIG. 18 shows a flowchart of the processing of the system of the present invention.
[0174]
This will be described with reference to the drawings. The user accepts an input of a communication request including information on at least one other user and one or more media who wants communication (S101), and in response to the communication request, for each of the users involved in communication, At least one of one or more media or a combination of media consisting of media realization schemes or a combination of terminals consisting of one or more terminals that can be used by each user to satisfy at least a part of the communication request. One or a plurality of candidates are determined (S102).
[0175]
Then, at least one of the determined one or more media combination candidates or terminal combination candidates for at least one user involved in the communication is sent to the user or a different user involved in the communication. Notification is made, and one of the combination candidates is selected and communication by the combination is approved, or a selection by the user to change the communication request is input (S103).
[0176]
Further, when a mismatch occurs between input of a plurality of users, or there is a possibility that it will occur, at least two or more users involved in the communication adjust the selection of the combination candidate or the change of the communication request. Perform (S104).
[0177]
Furthermore, when an agreement between the users is seen in the selection of candidates (S105), a call connection is set based on the agreed terminal combination or media combination (S106), and the agreement is seen in the change contents of the communication request In the case (S107), the processing from S102 is executed again.
[0178]
Such a second specific embodiment will be described in more detail.
[0179]
(More detailed description of the second specific embodiment)
FIG. 19 shows the configuration of a multimedia communication system as a second specific embodiment of the present invention.
[0180]
FIG. 19 is an example of association of the means shown in FIG. 17 with a specific device, and other associations may be made without departing from the spirit of the invention. In addition to the configuration of FIG. 17 mainly describing the control surface, FIG. 19 shows components related to the transmission of information and the conversion, synthesis or separation of the transmitted information (network 1200, media conversion means 1711, multiple Point-to-point media processing means 1911).
[0181]
Terminals 1101 and 1107 are multimedia computer terminals that can handle voice, moving images, still images, and data, terminals 1102 and 1105 are computer terminals that can handle data, and terminals 1103, 1104, and 1106 are voice, moving images, It is a TV phone terminal that can handle still images, and a terminal 1108 is a phone terminal that can handle audio.
[0182]
Among these terminals, terminals 1101, 1105 and 1107 are communication request input means (respectively 2301, 2305 and 2307), user intention reflection means (respectively 2401, 2405 and 2407), and inter-user adjustment means (respectively 2501, 2505 and 2507). ), Communication request changing means (2601, 2605, 2607, respectively).
[0183]
The server apparatus 1109 implements call / connection control means 1609 and candidate determination means 1509. The server device 1110 includes a terminal / media storage unit 1410 and a user / terminal storage unit 1310. The terminal / media storage unit 1410 stores the above-described media that can be handled by each terminal, and the status of whether or not each terminal can handle each media at that time (whether necessary resources are available).
[0184]
In this system, it is assumed that user a can use terminals 1101, 1102 and 1103, user b can use terminals 1104 and 1105, user c can use terminal 1106, and user d can use terminals 1107 and 1108. The terminal storage means 1310 stores that the user a can use the terminals 1101, 1102 and 1103, the user b can use the terminals 1104 and 1105, the user c can use the terminal 1106, and the user d can use the terminals 1107 and 1108. .
[0185]
The server apparatus 1111 includes multipoint multimedia processing means 1911 and media conversion means 1711. The terminal 1112 includes multipoint multimedia processing storage means 3012 and media conversion storage means 1812.
[0186]
The multipoint multimedia processing storage unit 3012 stores that the multipoint multimedia processing unit 1911 is in the server apparatus 1111, and the media conversion storage unit 1812 stores that the media conversion unit 1711 is in the server apparatus 1111. . Note that these server devices 1109, 1110, 1111 and 1112 may be terminals that are directly used by the user or some terminal devices installed on the user side as servers. It may be an exchange installed on the network side or a device added thereto.
[0187]
An example of the operation of the system having such a configuration will be described next. First, an operation example 1 will be described by taking as an example a case where the user a requests communication with the user b by voice, moving images, and data.
[0188]
[Operation example 1]
In the multimedia communication system as a more detailed description of the second specific embodiment, an operation example 1 will be described by taking as an example a case where the user a requests communication with the user b by voice, moving images and data.
[0189]
FIG. 20 is an example of a communication session control screen shown to the user a when a communication request is input (S101 in FIG. 18) in this operation example 1. The communication session control screen 4000 as shown in FIG. Displayed in the section. By using this screen, the communication request input means 2301 of the terminal 1101 can be operated at this time to input a communication request.
[0190]
That is, on the communication session control screen 4000, a user addition button 4002, a user deletion button 4003, a media addition button 4004, and a media deletion button 4005 are displayed, and the user a clicks the user addition button 4002 and the user deletion button 4003 with a mouse, for example. The user who wants to communicate is added / deleted by using a pointing device such as the above, and the media desired to communicate is added / deleted by operating the media add button 4004 and the media delete button 4005. can do. Further, there are a cancel button 4012 for canceling the operation and a confirmation button 4011 for confirming the operation.
[0191]
The specific procedure is, for example, that a new display for inputting detailed data appears when a button is pressed for addition, and a button is pressed after a target is specified for deletion.
[0192]
The input status of these communication requests is displayed on the communication session state control unit 4001 in the communication session control screen 4000. FIG. 20 shows a state after all the communication requests of this example are set. Although the user a can cancel the communication request with the cancel button 4012, it is assumed here that the input of the communication request is indicated by the confirmation button 4011.
[0193]
The input communication request is notified to the candidate determination unit 1509 of the server apparatus 1109. The candidate determination unit 1509 refers to the user / terminal storage unit 1310 of the server device 1110 and recognizes that the user a can use the terminals 1101, 1102 and 1103, and the user b can use the terminals 1104 and 1105.
[0194]
Next, the candidate determination unit 1509 of the server apparatus 1109 refers to the terminal / media storage unit 1410 of the server apparatus 1110. The terminal 1101 usable by the user a is audio, still image and data, the terminal 1102 is data, and the terminal 1103 is audio. The terminal 1104 that can use the moving image or still image for the user b recognizes the voice, the moving image or still image, and the terminal 1105 can use the data.
[0195]
Here, the terminal 1101 has a capability of handling a moving image, but at this point, the resource for realizing the capability is used for another purpose, so that the terminal 1101 is not recognized as being usable.
[0196]
Candidate determination means 1509 provides user a with data by terminal 1102 (computer), voice and video by terminal 1103 (TV phone), voice and data by terminal 1101 (multimedia computer), and provides user b with Then, the provision of voice and moving image by the terminal 1104 (TV phone) and data by the terminal 1105 (computer) are determined as candidates (S102 in FIG. 18).
[0197]
FIG. 21 shows a candidate selection or communication request change input in this example (see FIG. 18 The communication session control unit 4001 shown to the user a in S101) is displayed on a part of the screen of the terminal 1101. At this time, the user intention reflecting means 2401 operates.
[0198]
The communication session state display unit 4001 displays the above-mentioned terminal combination candidate and media combination candidate information obtained from the candidate determination unit 1509 and the media combination candidate on the user b side. .
[0199]
Terminals arranged side by side are candidates for terminal combinations. Since it is often not so important for the user a to display the terminal combination candidate on the user b side, only the possibility of media provision is displayed here, but the terminal combination candidate on the user b side is displayed. May be displayed.
[0200]
It is also meaningful in a scenario as shown in this embodiment that only the information on the user a side is displayed and the information on the user b side is not displayed at all. User a was expecting to be able to handle voice, video and data at the same time on terminal 1101 (multimedia computer), but for some reason (for example, the resources necessary to handle moving images as described above are Recognize that it is impossible at the time)
[0201]
The user a can use the terminal selection button 4007 to select a combination of terminals that can be used by the user (TV phone and computer, or multimedia computer), or a part thereof (combination-TV phone and computer-to TV phone only). Can be selected.
[0202]
Further, media (sound, moving image, and / or data) can be selected by a media selection button 4008. When a single terminal provides a plurality of media, by selecting both the terminal and the media, it is possible to select only a part of the media (for example, selecting a videophone as a terminal and audio as a media) TV phone provides only voice).
[0203]
Since the user a recognizes that the communication in the expected form is not possible, a communication request for a moving image may be changed to a request for a still image. For this purpose, the moving image may be deleted by operating the media deletion button 4005 and the still image may be added by operating the media addition button 4004. Further, the communication can be stopped by operating the communication stop button 4006.
[0204]
That is, a media add button, a media delete button, a member add button, a member delete button, and a communication stop button are displayed, and the communication session control screen 4000 in FIG. 21 changes the communication request by using these buttons as necessary. It can also be used as an operation screen of the means 2601. The selection and the change of the communication request are canceled by operating the cancel button 4012, and the completion of the input is indicated by operating the confirmation button 4011.
[0205]
In the scenario of this example, it is assumed that there is no input of the user intention from the user b (the opportunity for input is not given), so the candidate selection / communication request change input from the user a need not be adjusted. (S104 in FIG. 18), it is immediately considered that the agreement has been reached (S105 or S107 in FIG. 18), and when a candidate is selected, the call connection is set (S106 in FIG. 18), and then the process is completed, and a communication request is made. When is changed, media / terminal candidate determination is performed again (S102 in FIG. 18). If the communication is interrupted, it is considered that no agreement has been obtained, and the process ends.
[0206]
FIG. 22 is a communication session control screen shown to the user a at the time of selection of a candidate or input of a communication request (S103 in FIG. 18) after once changing the communication request as described above in this operation example. Such a communication session control screen 4000 is displayed on a part of the display screen of the terminal 1101. Here, if the user a selects the multimedia computer by the above-described method, a call connection is set after the above-described procedure (S106 in FIG. 18), and communication by the multimedia computer is started.
[0207]
As a result, in a communication system capable of a multi-media service, a communication consisting of a combination of a plurality of media is requested without designating a terminal to be used in advance, and a plurality of media of the communication request is sent to one or a plurality of terminals. When realized in combination, by presenting media that can be used for communication with the other party and letting the user select it, it is possible to prevent communication in a form unpredictable by the user, and one person Alternatively, communication can be realized in a manner that reflects the intentions of a plurality of users.
[0208]
The above operation example 1 is an example in a case where the user a requests communication with the user b by voice, a moving image, and data.
[0209]
Next, an operation example 2 will be described taking as an example the case where the user a requests communication with the user c by voice and data.
[0210]
[Operation example 2]
In the multimedia communication system as a more detailed description of the second specific embodiment, a case where the user a requests communication with the user c by voice and data will be described as an operation example 2.
[0211]
FIG. 23 shows an example of a communication session control screen displayed to the user a when a communication request is input (S101 in FIG. 18) in this example, and this communication session control screen 4000 is displayed on a part of the display screen of the terminal 1101. . By using this screen, the terminal 1101 operates as the communication request input unit 2301 at this point. User a inputs a communication request in the same manner as in operation example 1.
[0212]
FIG. 23 shows a state after all communication requests in this example are set. Hereinafter, it is assumed that the input of the communication request is indicated by the confirmation button.
[0213]
The input communication request is notified to the candidate determination unit 1509 of the server apparatus 1109. The candidate determination unit 1509 refers to the user / terminal storage unit 1310 of the server device 1110 and recognizes that the user a can use the terminals 1101, 1102 and 1103, and the user c can use the terminal 1106.
[0214]
Next, the candidate determining unit 1509 refers to the terminal / media storage unit 1410 of the server device 1110, the terminal 1101 usable by the user a is voice, moving image, still image and data, the terminal 1102 is data, the terminal 1103 is voice, The terminal 1106 capable of using the moving image or the still image by the user c recognizes that the voice, the moving image or the still image can be used.
[0215]
Based on the recognition result, the candidate determining unit 1509 determines that it is meaningless to provide data on the user a side because the user c side cannot handle the data, and the terminal 1101 (multimedia computer) is used for the user a. The voice, the provision of voice by the terminal 1103 (TV phone), and the provision of voice by the terminal 1106 (TV phone) to the user c are determined as candidates. However, it also indicates that data can be provided to the user a by the terminal 1101 (multimedia computer) or the terminal 1102 (computer) (S102 in FIG. 18).
[0216]
FIG. 24 shows a communication session control screen displayed to the user a when a candidate is selected or a communication request change is input (S101 in FIG. 18) in this example, and the communication session control screen 4000 as shown in the figure is the display screen of the terminal 1101. It is displayed in a part of. By using this screen, the terminal 1101 operates as the user intention reflecting means 2401 at this time.
[0217]
Compared to the case where the previous operation example 1 focused on the operation as a result of the user a obtaining information related to his / her media or terminal candidate, in this example, the media or terminal related to the user c who is the user a An explanation will be given with an emphasis on the operation as a result of obtaining information on the candidates.
[0218]
The communication session status display screen 4001 is the same as that described above except that it displays a terminal on the user a side that can handle media that can be used on the user a side but cannot be used on the user c side, and that information on the user c side is always displayed. The candidate information is shown as in the first operation example. User a recognizes that user c cannot handle the data.
[0219]
The user a can select only the sound by using the media selection button 4008. When a TV phone is explicitly displayed as the user c's terminal as an operation to the user c who is the other side of the user a, the user c's TV phone can be selected by the terminal selection button 4007.
[0220]
Of course, as in the operation example 1, the user a changes the communication request for data to the communication request for the still image by operating the media delete button 4005 and the media add button 4004, and stops the communication by operating the communication stop button 4006. You can also
[0221]
In this case, the communication session control screen 4000 in FIG. 24 operates as the communication request change unit 2601 by using this. Assume that the operation of the confirmation button 4011 indicates completion of input of selection or change of a communication request.
[0222]
In the scenario of this example, it is assumed that there is no user intention input from the user c (no input opportunity is given), so the candidate selection / communication request change input from the user a need not be adjusted. (S104 in FIG. 18), it is immediately considered that the agreement has been reached (S105 or S107 in FIG. 18), and when a candidate is selected, the call connection is set (S106 in FIG. 18), and then the process is completed, and a communication request is made. When is changed, media / terminal candidate determination is performed again (S102 in FIG. 18).
[0223]
If the communication is interrupted, it is considered that no agreement has been obtained, and the process ends.
[0224]
FIG. 25 is an example of a communication session control screen shown to the user a when selecting a candidate or inputting a communication request (S101 in FIG. 18) after once changing the communication request as described above. A communication session control screen 4000 is displayed on a part of the display screen of the terminal 1101.
[0225]
Here, if the user a selects the multimedia computer or the videophone as the local terminal by the above-described method, or selects voice and / or still image as the media, a call connection is set up after the above-described procedure (see FIG. 18 S106) Communication is started.
[0226]
As a result, in a communication system capable of multimedia services, a communication composed of a combination of a plurality of media is requested without designating a terminal to be used in advance, and a plurality of media of the communication request are sent to one or a plurality of terminals. When realized in combination, by presenting media that can be used for communication with the other party and letting the user select it, it is possible to prevent communication in a form unpredictable by the user, and one person Alternatively, communication can be realized in a manner that reflects the intentions of a plurality of users.
[0227]
Next, taking as an example a case where the user a requests communication with the user d by voice and a moving image, an emphasis is placed on reflection of the intention of the user d on the receiving side and adjustment between the user a and the user d. An operation example will be described as operation example 3.
[0228]
[Operation example 3]
In the multimedia communication system as a more detailed explanation of the second specific embodiment, when the user a requests communication with the user d by voice and video, the intention of the user d on the receiving side is reflected An example that focuses on the adjustment between the user a and the user d will be described as an operation example 3.
[0229]
The user a inputs the above communication request in the same manner as described in the first operation example and the second operation example (S101 in FIG. 18).
[0230]
The input communication request is notified to the candidate determination unit 1509 of the server apparatus 1109. Then, the candidate determination unit 1509 refers to the user / terminal storage unit 1310 of the server device 1110 and recognizes that the user a can use the terminals 1101, 1102 and 1103, and the user d can use the terminals 1107 and 1108, respectively. To do.
[0231]
Next, the candidate determination unit 1509 refers to the terminal / media storage unit 1410 of the server apparatus 1110, whereby the terminal 1101 usable by the user a is a voice, a moving image, a still image, and data, and the terminal 1102 is data. Yes, the terminal 1103 recognizes that it is a sound, a moving image or a still image, and the terminal 1107 usable by the user d is a sound, a moving image, a still image and data, and the terminal 1108 can use a sound. Recognize that there is.
[0232]
Based on this recognition, the candidate determination unit 1509 then provides the user a with voice and moving images from the terminal 1101 (multimedia computer), the voice and moving images from the terminal 1103 (TV phone), and the terminal to the user c. Provision of voice and moving images by 1107 (multimedia computer) is determined as a candidate (S102 in FIG. 18).
[0233]
This information is also shown to the user a by the user intention reflecting means 2401 in the same manner as described in the operation example 1 and the operation example 2, but the details are omitted. However, it is assumed that the user “a” has selected the communication between the voice and the moving image by the TV phone.
[0234]
FIG. 26 shows an example of a communication session control screen displayed to the user d when a candidate is selected or a communication request change is input in this example (S10 3 in FIG. 18), and the communication session control screen 4000 as shown in the figure is displayed on the terminal 1107. It is displayed on a part of the screen. By using this screen, the terminal 1107 operates as the user intention reflecting means 2407 at this time.
[0235]
User d recognizes from the display content of the communication session state display screen 4001 that user a desires communication using voice and moving images, and that the request can be satisfied if user d selects a multimedia computer. To do.
[0236]
The user d can also select a multimedia computer, but here, assuming that the user d does not want to communicate by moving images at that time, he selects a telephone using the terminal selection button 4007 (see FIG. 18 S103).
[0237]
The selection result of user a (sound and video by TV phone) is passed to inter-user mediation means 2501 of terminal 1101, and the selection result of user d (voice by phone) is passed to inter-user adjustment means 2507 of terminal 1107. These two inter-user adjustment means 2501 and 2507 exchange these results with each other and recognize that the selections between the user a and the user d do not match. Then, the inter-user adjustment unit 2507 presents the content as shown in FIG. 27 to the user a, and the inter-user arbitration unit 2501 presents the content as shown in FIG. 28 to the user d.
[0238]
The contents shown in the communication session status display section 4001 in these figures are further displayed for each user as “match”, “self (user a or user d)”, “other user (user d or user a)”. ”And“ Candidate ”.
[0239]
The “match” sequence indicates a portion where opinions between the users involved in the adjustment (that is, between the user a and the user d) are in agreement. The sequence of “self” indicates the request or selection of the user (FIG. 27 shows user a and FIG. 28 shows user d) who is displaying this figure.
[0240]
The list of “other user” indicates a request or selection of the other user (user d in FIG. 27, user a in FIG. 28). The list of “candidates” indicates terminals or media presented as candidates by the candidate determination unit 1509.
[0241]
You may display except what was selected by the user. In the following, it is assumed that the user a changes the request for moving images to the request for still images by the method described above.
[0242]
As a result of this change, the display of the session control unit for user a is as shown in FIG. Since pressing the confirmation button 4011 means confirmation of the content of the change, this change is also transmitted from the inter-user adjustment unit 2501 to the inter-user adjustment unit 2507.
[0243]
As a result, the display of the session control screen 4000 for the user d is as shown in FIG. User d expresses consent to the change of the communication request using the consent button 4009 and denial of the change using the reject button 4010.
[0244]
Consent or rejection is transmitted from the inter-user adjustment unit 2507 to the inter-user adjustment unit 2501. In the case of refusal, it is also possible to propose another change of communication request at the same time. In the following, it is assumed that consent has been obtained (S104 in FIG. 18).
[0245]
Only the user a and the user d are involved in this adjustment, and the user d agrees with the proposal of the user a. Therefore, the user adjustment unit 2501 and the user adjustment unit 2507 determine that the adjustment has been agreed. Further, in another case, since the proposal of the user a is not a change in selection but a change in communication content, it is not a candidate agreement (S105 in FIG. 18), and it is determined that the communication change content has reached an agreement (FIG. 18). S107).
[0246]
Notification of the changed communication request content to the candidate determination unit 1509 may be performed by the inter-user adjustment unit 2501 or the inter-user adjustment unit 2507. Candidate determining means 1509 provides the user a with audio and still images from the terminal 1101 (multimedia computer), the audio and still images from the terminal 1103 (TV phone), and provides the user c with the same method as described above. Then, the provision of audio and still images by the terminal 1107 (multimedia computer) is determined as a candidate (S102 in FIG. 18).
[0247]
FIG. 31 and FIG. 32 are examples of communication session control screens shown to users a and d, respectively, at the time of candidate selection or communication request change input (S103 in FIG. 18) after the above-described candidate determination. A communication session control screen 4000 is displayed.
[0248]
If the user a selects the TV phone and the user d selects the multimedia computer (S103 in FIG. 18), a coincidence is seen between them (S104 and S105 in FIG. 18), and the call connection control means 1609 causes the terminal 1103 (TV A call connection is set up between the telephone) and the terminal 1107 (multimedia computer) (S106 in FIG. 18), and the process ends.
[0249]
As another case, let us consider a case where, when FIG. 27 is displayed to the user a, the user a selects the TV phone as the terminal and only the voice as the media.
[0250]
As a result of this selection, the display of the session control screen 4000 for the user a is as shown in FIG. Since pressing the confirmation button 4011 means confirmation of the content of the change, this change is also transmitted from the inter-user adjustment unit 2501 to the inter-user adjustment unit 2507.
[0251]
As a result, the display of the session control screen 4000 for the user d is as shown in FIG. User d expresses consent to the change of the communication request using consent button 4009. The consent is transmitted from the inter-user adjustment unit 2507 to the inter-user adjustment unit 2501 (S104 in FIG. 18).
[0252]
Since only the user a and the user d are involved in this adjustment, and the user d agrees with the proposal of the user a, the user adjustment unit 2501 and the user adjustment unit 2507 determine that the adjustment has been agreed. Further, in another case, since the proposal of the user a was a change of selection (S105 in FIG. 18), the call connection control unit 1609 sets up a voice-only call connection between the TV phone 1103 and the multimedia computer 1107. (S106 in FIG. 18). This ends the process.
[0253]
As a result, in a communication system capable of multimedia services, a communication composed of a combination of a plurality of media is requested without designating a terminal to be used in advance, and a plurality of media of the communication request are sent to one or a plurality of terminals. When realized in combination, by presenting media that can be used for communication with the other party and letting the user select it, it is possible to prevent communication in a form unpredictable by the user, and one person Alternatively, communication can be realized in a manner that reflects the intentions of a plurality of users.
[0254]
Next, in the case where the user a requests communication with the user d by voice and moving images, and the user d proposes the addition of the user b to the communication, it participates in communication instead of the communication request related to the media. An operation example with emphasis on the communication request regarding the user who performs the operation will be described as an operation example 4.
[0255]
[Operation Example 4]
In the multimedia communication system as a more detailed explanation of the second specific embodiment, the user a requests communication with the user d by voice and moving images, and the user d proposes to add the user b to the communication. Taking this case as an example, an example focusing on communication requests related to users participating in communication instead of communication requests related to media will be described as operation example 4.
[0256]
The procedure up to FIG. 35 (S101 and S102 in FIG. 18) is the same as the procedure up to FIG.
[0257]
FIG. 35 shows an example of the communication session control screen shown to the user d when selecting a candidate or inputting a communication request change (S103 in FIG. 18) in this example. The communication session control screen 4000 as shown in FIG. It is displayed on a part of the display screen. By using this screen, the terminal 1107 operates as the user intention reflecting means 2407 at this time.
[0258]
The user d wants to communicate by voice and moving image according to the display content of the communication session state display unit 4001 in the communication session control screen 4000. If the user d selects the multimedia computer, the request is made. Recognize that you can meet.
[0259]
Here, it is assumed that the user d thinks that the user b should communicate with the user b by voice and moving image at the same time. In addition to selecting the multimedia computer, the user d operates the user addition button 4002 to add the user b, and proposes a change in the communication request (S103 in FIG. 18).
[0260]
The selection result of the user a (same as the operation example 3, voice and moving image by the videophone) is sent to the inter-user arbitration means 2501 of the terminal 1101 and the selection result of the user d (voice and moving image by the multimedia computer) and the communication request. The change (addition of communication with the user b through voice and moving images) is transferred to the inter-user adjustment unit 2507 of the terminal 1107.
[0261]
These two inter-user adjustment means 2501 and 2507 exchange these results with each other, and recognize that the selection between the user a and the user d is the same, but the change of the communication request is proposed by the user d. Then, the inter-user adjustment unit 2507 presents a screen as shown in FIG. 36 to the user a, and the inter-user arbitration unit 2501 presents the screen as shown in FIG.
[0262]
Here, unlike the operation example 3, since the portions related to the user a and the user d match, the session state display unit 4001 displays “match”, “self”, “partner user (user d or user a)”, What is subdivided into “candidates” is only information related to the user b related to the proposal by the user d.
[0263]
Thereby, the user a recognizes that the addition to the communication of the user b is proposed. If the user a accepts the proposal, the user can express consent by operating the consent button 4009, and if not, the user a can express rejection by operating the reject button 4010.
[0264]
When the proposal is accepted, the voice and moving image column for “user (user a)” regarding user b in the session status display section 4001 shown in FIG. 36 for user b changes from “unknown” to “present”, If it is not accepted, the corresponding field changes to “none”. This consent or rejection is also transmitted from the inter-user adjustment unit 2501 to the inter-user adjustment unit 2507.
[0265]
When user a accepts the proposal, the voice and moving image column of “other user (user a)” regarding user b in session state display section 4001 of FIG. 37 for user b changes from “unknown” to “present”. In the latter case, the corresponding field changes to “none”. In the following, it is assumed that consent has been obtained (S104 in FIG. 18).
[0266]
Only the user a and the user d are involved in this adjustment, and the user a agrees to the proposal of the user d, so that the user adjustment unit 2501 and the user adjustment unit 2507 determine that the adjustment has been agreed.
[0267]
Further, in another case, since the proposal of the user d is not a selection change but a communication content change, it is determined that the communication change content has reached an agreement, not a candidate agreement (S105 in FIG. 18) (FIG. 18). S107).
[0268]
Notification of the changed communication request content to the candidate selection unit 1509 may be performed by the user adjustment unit 2501 or the user adjustment unit 2507.
[0269]
Candidate determining means 1509 determines the provision of voice and moving image by terminal 1104 (TV phone) as a candidate for new user b in the same manner as described above, and at the same time, there are three users involved in communication. Recognize that there is multi-party communication. Then, the multipoint media processing storage unit 3012 is selected with reference to the multipoint media processing storage unit 3012 (S102 in FIG. 18).
[0270]
After the determination of the candidates, a communication session control unit 4001 indicating the candidates is presented to the user a, the user b, and the user d at the time of candidate selection or communication request change input (S103 in FIG. 18). However, since there is no essential difference from what has already been described many times, details are omitted.
[0271]
If the user a and the user d do not change the selections already made and the user b accepts and selects the communication of the voice and moving images by the videophone (S103 in FIG. 18), the agreement between the three parties can be seen (FIG. 18). 18 S104 and S105), call connection control means 1609 establishes a call connection between terminal 1103 (TV phone), terminal 1104 (TV phone), terminal 1107 (multimedia computer) and multipoint media processing means 1911. (S106 in FIG. 18), and the process ends.
[0272]
On the other hand, if no match is found between the three parties, candidate selection / communication request change adjustment is performed in the same manner as described above (S104 in FIG. 18), but the description is omitted. As a result, in a communication system capable of multimedia services, a communication composed of a combination of a plurality of media is requested without designating a terminal to be used in advance, and a plurality of media of the communication request are sent to one or a plurality of terminals. When realized by a combination, it is possible to prevent communication in a form unpredictable by the user, and to realize communication in a form reflecting the intention of one or more users.
[0273]
As described above, according to the second specific embodiment, in a communication system capable of multimedia service, a communication composed of a combination of a plurality of media is requested without specifying a terminal to be used in advance, When realizing a plurality of media of the communication request by a combination of one or a plurality of terminals, it is possible to present the media that can be used for communication with the other party and to allow the user to select it. It is possible to provide a communication system and a communication control method for the communication system that can prevent the communication in the network from being realized, and can realize the communication reflecting the intention of one or more users.
[0274]
The present invention is not limited to the specific examples described above, and can be implemented with various modifications.
[0275]
【The invention's effect】
As described above in detail, according to the present invention, when requesting communication including a plurality of media, in one communication request, the user selects the user participating in the communication, the medium to be used, and the communication form as necessary. By specifying, without being aware of the terminal environment of other users participating in the communication, usable encoding methods, etc., an appropriate terminal combination is selected for each user participating in the communication, and the selected terminal The effect is that it is possible to set up a call connection.
[0276]
Further, when a communication composed of a combination of a plurality of media is requested without designating a terminal to be used in advance and the plurality of media of the communication request is realized by one or a combination of a plurality of terminals, the user cannot be expected. It is possible to prevent the communication in the form from being realized, and to realize the communication reflecting the intention of one or more users.
[Brief description of the drawings]
FIG. 1 is a diagram for explaining the present invention, and is a block diagram showing a configuration of a multimedia communication system applied in a first specific embodiment of the present invention.
FIG. 2 is a diagram showing a configuration of user terminal storage means in the first specific embodiment of the present invention.
FIG. 3 is a diagram showing a configuration of terminal media storage means in the first specific embodiment of the present invention.
FIG. 4 is a diagram showing a message sequence as a first operation example in the first specific embodiment of the present invention.
FIG. 5 is a diagram showing a connection form as a first operation example in the first specific embodiment of the present invention;
FIG. 6 is a diagram showing a message sequence as a second operation example according to the first specific embodiment of the present invention.
FIG. 7 is a diagram showing a connection form as a second operation example in the first specific embodiment of the present invention;
FIG. 8 is a diagram showing a message sequence as a third operation example according to the first specific embodiment of the present invention.
FIG. 9 is a diagram showing a configuration example of media conversion storage means in the first specific embodiment of the present invention.
FIG. 10 is a diagram showing a connection form as a third operation example in the first specific embodiment of the present invention;
FIG. 11 is a diagram showing a message sequence as a fourth operation example according to the first specific embodiment of the present invention.
FIG. 12 is a diagram showing a configuration example of a multipoint media processing storage unit in the first specific embodiment of the present invention.
FIG. 13 is a diagram showing a connection form as a fourth operation example in the first specific embodiment of the present invention;
FIG. 14 is a diagram showing a message sequence as a fifth operation example according to the first specific embodiment of the present invention.
FIG. 15 is a diagram showing a message sequence as an eighth operation example according to the first specific embodiment of the present invention;
FIG. 16 is a diagram showing a connection form as an eighth operation example according to the first specific embodiment of the present invention;
FIG. 17 is a block diagram for explaining the outline of the second specific embodiment of the present invention;
18 is a diagram showing a flow of processing of the outline of FIG.
FIG. 19 is a diagram for explaining the present invention, and is a block diagram showing a configuration example of a multimedia communication system applied in the second specific embodiment of the present invention.
FIG. 20 is a diagram showing a display example of a communication session processing unit for a user a in operation example 1 of the present invention.
FIG. 21 is a diagram showing a display example of a communication session processing unit for a user a in operation example 1 of the present invention.
FIG. 22 is a diagram showing a display example of a communication session processing unit for a user a in operation example 1 of the present invention.
FIG. 23 is a diagram showing a display example of a communication session processing unit for a user a in the operation example 2 of the present invention.
FIG. 24 is a diagram showing a display example of a communication session processing unit for a user a in operation example 2 of the present invention.
FIG. 25 is a diagram showing a display example of a communication session processing unit for a user a in the operation example 2 of the present invention.
FIG. 26 is a diagram showing a display example of a communication session processing unit for a user d in the operation example 3 of the present invention.
FIG. 27 is a diagram showing a display example of a communication session processing unit for a user a in the operation example 3 of the present invention.
FIG. 28 is a diagram showing a display example of a communication session processing unit for a user d in the operation example 3 of the present invention.
FIG. 29 is a diagram showing a display example of a communication session processing unit for a user a in the operation example 3 of the present invention.
FIG. 30 is a diagram showing a display example of a communication session processing unit for a user d in the operation example 3 of the present invention.
FIG. 31 is a diagram showing a display example of a communication session processing unit for a user a in operation example 3 of the present invention.
FIG. 32 is a diagram showing a display example of a communication session processing unit for a user d in the operation example 3 of the present invention.
FIG. 33 is a diagram showing a display example of a communication session processing unit for a user d in the operation example 4 of the present invention.
FIG. 34 is a diagram showing a display example of a communication session processing unit for a user a in the operation example 4 of the present invention.
FIG. 35 is a diagram showing a display example of a communication session processing unit for a user d in the operation example 4 of the present invention.
FIG. 36 is a diagram showing a display example of the communication session processing unit for the user a in the operation example 4 of the present invention.
FIG. 37 is a diagram showing a display example of a communication session processing unit for a user d in the operation example 4 of the present invention.
[Explanation of symbols]
2. Communication network
3. User terminal storage means
4 ... Terminal media storage means
5 ... Determination means
6 ... Call connection control means
8 ... Media conversion storage means
10 ... Multi-point media processing storage means
11 ... Connection
12 ... Adjustment means
101-114, 1101-1107 ... Terminal
701-703: Media conversion means
901 to 903 ... Multi-point media processing means
1108-1112 ... Server device
1200 ... network
1300, 1310 ... User / terminal storage means
1400, 1410 ... Terminal / media storage means
1500, 1509 ... Candidate determination means
1600, 1609 ... Call connection control means
1711: Media conversion means
1800, 1812 ... Media conversion storage means
1911: Multipoint media control means
2300, 2301, 2305, 2307 ... communication request processing means
2400, 2401, 2405, 2407 ... user intention reflecting means
2500, 2501, 2505, 2507... User adjustment means
2600, 2601, 2605, 2607 ... Communication request changing means
3000, 3012 ... Multi-point media processing means
4000 ... Communication session control unit
4001 ... Communication session status display section
4002 ... User addition button
4003 ... Delete user button
4004 ... Add media button
4005 ... Delete media button
4006 ... Communication stop button
4007 ... Terminal selection button
4008 ... Media selection button
4009 ... Agree button
4010 ... Reject button
4011 ... Confirm button
4012 ... Cancel button

Claims

A communication system accommodating a plurality of terminals capable of handling one or a plurality of media,
User terminal storage means for storing a usable terminal for each user;
Terminal media storage means for storing media or encoding methods usable for each terminal;
Media or encoding method that accepts a communication request from a certain user terminal and can be used by each of the users involved in this communication necessary for realizing the communication request by the user terminal storage means and the terminal media storage means And a terminal composed of a plurality of terminals capable of realizing the communication request by obtaining a terminal capable of using these and combining a part of the medium or the encoding scheme among the terminals. A determination means for determining a set of
A communication system comprising: call connection control means for setting / releasing a call connection instead of the user terminal based on the determination content of the determination means.

The multimedia communication system of claim 1, wherein
The determining means includes
The media or encoding method specified by the user in the communication request, the media or encoding method that can be used by the calling user, and the media or encoding method that can be used by the called user, or Decide the encoding method,
It has a function of determining a combination of terminals that can be used by a calling user to use each of the determined media or encoding methods and a combination of terminals that can be used by a called user. Communications system.

The multimedia communication system of claim 1, wherein
In the determination result of the determination means, when a combination of media or encoding scheme and terminal that can communicate between users involved in communication is not found, a means for notifying communication to the user or terminal that has requested communication is provided. A featured communication system.

The multimedia communication system of claim 1, wherein
As a result of the determination by the determining means, when a combination of media or encoding schemes and terminals that can be communicated between users involved in communication is found only for some media or encoding schemes, A communication system comprising means for notifying a user or terminal that has requested for communication of an encoding method.

The multimedia communication system of claim 1, wherein
As a result of the determination by the determining means, when a combination of media or encoding schemes and terminals that can be communicated between users involved in communication is found only for some media or encoding schemes, only for the found media or encoding schemes A communication system comprising means for setting / releasing a call connection.

The multimedia communication system of claim 1, wherein
It has the user terminal storage means for updating the storage contents of the terminal that can be used for each user by at least one of movement of the user, power ON / OFF of the terminal, or connection / disconnection of the terminal to / from the subscriber line. A communication system characterized by the above.

The multimedia communication system of claim 1, wherein
A communication system comprising the terminal media storage means for updating at least the media usable for each terminal or the storage content of the encoding method by attaching / detaching the input / output device.

The multimedia communication system of claim 1, wherein
Media conversion means for converting media between a plurality of media information that can be used for communication;
With respect to the media conversion means, the media to be converted or the type of encoding method, and media conversion storage means for storing position information in the communication system,
When there is no media or encoding method that can be used in common among users participating in communication, the determining unit is configured to change the media or encoding method used by the first user via one or more media converting units. In order to search for the media used by the second user or the media converting means for converting into the encoding system, the media conversion storage means is repeatedly activated as necessary to use each user in the communication between the plurality of users. A communication system having a function of determining a medium or a coding system and a medium converting means for converting the medium or the coding system.

The multimedia communication system of claim 1, wherein
A multi-point media processing means for computing a plurality of media information;
As the information on the multipoint media processing means, comprising a media processing type, a media or encoding method that can be handled, and multipoint media processing storage means for storing position information in the communication system,
The determining means determines the multi-point media processing means according to the communication form specified in the communication request and the media or encoding method used by each user involved in communication, if necessary, The call / connection control means controls the setting of a connection between the multipoint media processing means and a terminal used for communication in a topology according to the communication form. .

Various media conversion means for media conversion between a plurality of media information, a usable terminal for each user, and a storage means for storing a usable encoding method for each terminal are provided to identify users involved in communication. In accordance with a communication request including information and information for identifying a media type, an encoding method that can be used by the obtained terminal by obtaining a terminal used by each user indicated by the information for identifying the user by the storage means Based on the information in the storage means, and each user involved in the communication is a terminal that can use a part of the encoding method used for the communication and can realize the communication request. A set of terminals composed of a plurality of terminals and media conversion means for media conversion are determined from the various media conversion means, and based on this, the communication requirements are determined. Communication control method of a communication system, characterized in that to perform the setting of the call connection, instead of the terminal having issued.

The communication control method according to claim 10,
Various multi-point media processing means for performing arithmetic processing between a plurality of media information is provided, and the communication request further includes information indicating a communication form, and various multi-points are determined according to the designated communication form. Call connection based on the information of the media conversion means and the determined multi-point media processing means to determine the optimum one among the inter-media processing means, the combination of the encoding method and the terminal, and the media conversion means to be used as necessary A communication control method for a communication system, characterized in that:

As a result of the determination by the determination means, when a combination of encoding schemes and terminals that can be communicated between users involved in communication is found only for a part of the encoding schemes, call / connection setting only for the found encoding schemes 11. The communication control method for a communication system according to claim 10, wherein release is performed.

In a communication system accommodating a plurality of terminals capable of handling one or a plurality of media,
According to a communication request, at least one of one or a plurality of media or a combination of media composed of encoding methods or a combination of terminals composed of one or more terminals is determined by adjusting between users involved in communication. The communication system according to claim 1, further comprising an adjusting unit.

A communication system accommodating a plurality of terminals capable of handling one or a plurality of media,
User terminal storage means for storing a usable terminal for each user;
Terminal media storage means for storing media or encoding methods usable for each terminal;
A communication request input means for receiving an input of a communication request including information regarding a plurality of media and at least one other user who wishes to communicate with the user;
In response to the communication request, for each user involved in the communication, a plurality of media or a combination of media consisting of encoding schemes that can be used by each user to satisfy at least part of the communication request; And candidate determining means for determining one or a plurality of sets of terminal combinations composed of a plurality of terminals capable of using them based on the storage contents of the user terminal storage means and the terminal media storage means,
Notifying the user or a different user involved in communication of the determined plurality of media combination candidates and terminal combination candidates for at least one user involved in the communication, and selecting one of the combination candidates And a user intention reflecting means for deciding whether to approve communication by the combination or to change the communication request by input of the user who has received the notification,
A communication system comprising: setting means for setting a call connection on behalf of the user terminal based on the determination result.

The communication system according to claim 15,
A communication system comprising: a communication request changing means for enabling a user to input a change content when a change of a communication request is selected by the user intention reflecting means.

The communication system according to claim 15 or 16,
When there is a discrepancy between the inputs of a plurality of users by the user intention reflecting means, or when there is a possibility of the occurrence, selection of candidates for the combination or communication request between at least two users involved in the communication A communication system comprising inter-user adjustment means for enabling adjustment with respect to a change of the user.

In a communication system composed of a plurality of terminals connected to a network,
As the terminal, a terminal device capable of handling one or a plurality of media is used, and the terminal inputs a communication request including information on a plurality of media and at least one other user who desires communication with the user. Communication request input means,
For at least one user involved in the communication, a combination of a plurality of media that can be used by the user to satisfy at least a part of the communication request at the time when the communication request occurs, and a combination of terminals that can use these media Notifying the user or a different user involved in the communication and selecting the one of the combinations to approve the communication by the combination, or selecting the user who wishes to change the communication request. User intention reflecting means to be determined by input,
A communication system comprising: setting means for setting a call connection on behalf of the user terminal based on the determination result.