JP2008085837A - 複合メディア通信システム - Google Patents
複合メディア通信システム Download PDFInfo
- Publication number
- JP2008085837A JP2008085837A JP2006265272A JP2006265272A JP2008085837A JP 2008085837 A JP2008085837 A JP 2008085837A JP 2006265272 A JP2006265272 A JP 2006265272A JP 2006265272 A JP2006265272 A JP 2006265272A JP 2008085837 A JP2008085837 A JP 2008085837A
- Authority
- JP
- Japan
- Prior art keywords
- media
- terminal device
- procedure
- incidental
- translator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
【課題】ＶＯＩＰ通信システムで接続される双方の利用者が独立に通信メディアを選択可能な複合メディア通信システムを提供する。
【解決手段】選択された付帯メディアを示す選択指示に応じて、入力される音声データを指定された付帯メディアデータに変換するメディアトランスレータと、双方の利用者の端末装置間で授受される音声データを含むＲＴＰパケットについて、メディアトランスレータを経由する通信パスを設定する音声パス設定手段と、双方の利用者の端末装置間で授受されるメッセージから選択可能メディアに関する通信を希望する利用者および付帯メディアを特定する情報を含むメディア管理情報を抽出する抽出手段と、メディア管理情報に基づいて選択指示を作成して、メディアトランスレータに入力する変換制御手段と、メディア管理情報で指定された利用者の端末に、メディアトランスレータによって生成された付帯メディアデータを渡すための通信パスを設定する選択パス設定手段とを備える。
【選択図】 図１
【解決手段】選択された付帯メディアを示す選択指示に応じて、入力される音声データを指定された付帯メディアデータに変換するメディアトランスレータと、双方の利用者の端末装置間で授受される音声データを含むＲＴＰパケットについて、メディアトランスレータを経由する通信パスを設定する音声パス設定手段と、双方の利用者の端末装置間で授受されるメッセージから選択可能メディアに関する通信を希望する利用者および付帯メディアを特定する情報を含むメディア管理情報を抽出する抽出手段と、メディア管理情報に基づいて選択指示を作成して、メディアトランスレータに入力する変換制御手段と、メディア管理情報で指定された利用者の端末に、メディアトランスレータによって生成された付帯メディアデータを渡すための通信パスを設定する選択パス設定手段とを備える。
【選択図】 図１
Description
本発明は、ＩＰ電話サービスに代表されるＩＰネットワークを利用したリアルタイム通信サービスを提供するためのＶＯＩＰ通信システムに関し、特に、音声、映像およびテキスト情報を含む複数メディアの送受信が可能な通信端末を接続して複合的なサービスを提供する複合メディア通信システムに関する。
ＩＰ電話端末の普及に伴って、個々のＩＰ電話端末やパーソナルコンピュータにインストールすることでＩＰ電話機能を提供するソフトフォンの高機能化が進んでおり、音声のみならず、映像やテキスト情報を含む複数メディアの送受信を伴う複合的なリアルタイム通信が可能となってきている。
このように、様々な仕様を持つＩＰ電話端末が混在している中で、ＶＯＩＰ技術を用いて確実にリアルタイム通信を実現するために、従来は、ＳＩＰプロトコルに従ってセションを確立する際のネゴシエーションにおいて、発側端末と着側端末についてそれぞれ提供可能なメディアを調査し、双方が提供可能なメディアから選択された共通のメディアについてセションを確立している(特許文献１参照)。
このように、様々な仕様を持つＩＰ電話端末が混在している中で、ＶＯＩＰ技術を用いて確実にリアルタイム通信を実現するために、従来は、ＳＩＰプロトコルに従ってセションを確立する際のネゴシエーションにおいて、発側端末と着側端末についてそれぞれ提供可能なメディアを調査し、双方が提供可能なメディアから選択された共通のメディアについてセションを確立している(特許文献１参照)。
例えば、双方のＩＰ端末が音声とともに映像の通信も提供している場合には、ネゴシエーションの過程で音声通信のためのセションとともに映像通信のためのセションが確立され、映像通信を伴う音声通話が実現される。一方、片方のＩＰ電話端末が音声通信機能および映像通信機能とともにテキスト情報通信機能を備えていても、対向先のＩＰ電話端末に音声通信機能のみが備えられている場合には、ネゴシエーションの過程で選択されるメディアは音声通信に限定される。
特開２００２−２８１１７５号公報
従来のネゴシエーションでは、通信を確実に成立させることに重点がおかれていたため、発側のメディアと着側のメディアとを確実に一致させることが重要視されていた。
このため、例えば、聴覚にハンディキャップを持つ利用者が映像、音声およびテキスト情報の通信が可能なＩＰ電話端末を用いて、別の利用者とテキスト情報を含むコミュニケーションを希望したとしても、相手のＩＰ電話端末が映像および音声の通信にのみ対応している場合は、従来のネゴシエーションによって選択されるメディアは音声および映像となり、テキスト情報の通信は排除されてしまう。
このため、例えば、聴覚にハンディキャップを持つ利用者が映像、音声およびテキスト情報の通信が可能なＩＰ電話端末を用いて、別の利用者とテキスト情報を含むコミュニケーションを希望したとしても、相手のＩＰ電話端末が映像および音声の通信にのみ対応している場合は、従来のネゴシエーションによって選択されるメディアは音声および映像となり、テキスト情報の通信は排除されてしまう。
このように、従来のＩＰ電話サービスでは、ＩＰネットワークによって接続される利用者の少なくとも一方が望んでいるにもかかわらず、双方のＩＰ電話端末で提供可能なメディア以外のメディア(上述した例では、テキスト情報)を用いた通信を実現することができなかった。
ところで、近年では、パーソナルコンピュータの高機能化とともに音声認識技術や音声合成技術がめざましく進展しており、音声認識技術を適用して入力音声をテキスト化する音声入力システムや、音声合成技術を用いてテキスト情報を読み上げる読み上げシステムなどが、例えば、パーソナルコンピュータなどにインストール可能なパッケージソフトウェアとして市販されている。また、データベース化された手話映像と、テキストの形態素解析結果とを対応付けることにより、テキスト情報を手話映像に変換して提供することも技術的には可能となっている。
ところで、近年では、パーソナルコンピュータの高機能化とともに音声認識技術や音声合成技術がめざましく進展しており、音声認識技術を適用して入力音声をテキスト化する音声入力システムや、音声合成技術を用いてテキスト情報を読み上げる読み上げシステムなどが、例えば、パーソナルコンピュータなどにインストール可能なパッケージソフトウェアとして市販されている。また、データベース化された手話映像と、テキストの形態素解析結果とを対応付けることにより、テキスト情報を手話映像に変換して提供することも技術的には可能となっている。
このように、音声をテキスト情報に変換する、あるいは、テキスト情報を音声や手話映像に変換すること自体は、利用者個人が所有するパーソナルコンピュータでも実現可能となってきている。
しかしながら、例えば、上述した音声入力システムは、単独のシステムとしては提供されており、システムに固有のマイクロフォンなどの入力デバイスを介して受け取った音声入力をテキストに変換し、変換結果をディスプレイなどの予め決まった出力デバイスに出力する用途に適合するように作成されており、閉じたシステムとして提供されている。同様に、ＩＰ電話端末機能をパーソナルコンピュータで実現するために搭載されたソフトフォンシステムもまた、そのソフトフォンシステムが想定した入出力(例えば、付属のマイクロフォンからの音声入力およびスピーカによる音声出力)に特化したシステムである。
しかしながら、例えば、上述した音声入力システムは、単独のシステムとしては提供されており、システムに固有のマイクロフォンなどの入力デバイスを介して受け取った音声入力をテキストに変換し、変換結果をディスプレイなどの予め決まった出力デバイスに出力する用途に適合するように作成されており、閉じたシステムとして提供されている。同様に、ＩＰ電話端末機能をパーソナルコンピュータで実現するために搭載されたソフトフォンシステムもまた、そのソフトフォンシステムが想定した入出力(例えば、付属のマイクロフォンからの音声入力およびスピーカによる音声出力)に特化したシステムである。
このため、例えば、聴覚にハンディキャップを持つＩＰ電話利用者のパーソナルコンピュータに音声認識システムが搭載されていたとしても、ソフトフォンシステムと音声認識システムとをパーソナルコンピュータ上で連携させ、ＶＯＩＰ技術によって送られてきた音声情報をテキスト情報に変換して、この利用者にリアルタイムで提供することは容易ではない。
本発明は、ＶＯＩＰ通信システムで接続される双方の利用者が独立に通信メディアを選択可能な複合メディア通信システムを提供することを目的とする。
本発明にかかわる第１の複合メディア通信システムは、メディアトランスレータと、音声パス設定手段と、抽出手段と、変換制御手段と、選択パス設定手段とから構成される。
本発明にかかわる第１の複合メディア通信システムの原理は、以下の通りである。
メディアトランスレータは、音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを付帯メディアにおいて音声データの内容を表す付帯メディアデータに変換する。音声パス設定手段は、ＩＰネットワークを介して接続される双方の利用者の端末装置間で授受される音声データを含むＲＴＰパケットについて、メディアトランスレータを経由する通信パスを設定する。抽出手段は、双方の利用者の端末装置間で授受されるメッセージから選択可能メディアに関する通信を希望する利用者および付帯メディアを特定する情報を含むメディア管理情報を抽出する。変換制御手段は、メディア管理情報に基づいて選択指示を作成して、メディアトランスレータに入力する。選択パス設定手段は、メディア管理情報で指定された利用者の端末に、メディアトランスレータによって生成された付帯メディアデータを渡すための通信パスを設定する。
本発明にかかわる第１の複合メディア通信システムの原理は、以下の通りである。
メディアトランスレータは、音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを付帯メディアにおいて音声データの内容を表す付帯メディアデータに変換する。音声パス設定手段は、ＩＰネットワークを介して接続される双方の利用者の端末装置間で授受される音声データを含むＲＴＰパケットについて、メディアトランスレータを経由する通信パスを設定する。抽出手段は、双方の利用者の端末装置間で授受されるメッセージから選択可能メディアに関する通信を希望する利用者および付帯メディアを特定する情報を含むメディア管理情報を抽出する。変換制御手段は、メディア管理情報に基づいて選択指示を作成して、メディアトランスレータに入力する。選択パス設定手段は、メディア管理情報で指定された利用者の端末に、メディアトランスレータによって生成された付帯メディアデータを渡すための通信パスを設定する。
このように構成された第１の複合メディア通信システムの動作は、下記の通りである。
例えば、抽出手段により、一方の利用者Ａの端末装置からのＳＩＰメッセージから音声データに加えてテキスト情報の受信を希望する旨を示すメディア管理情報が抽出されると、この利用者Ａの端末と接続先の利用者Ｂの端末との間に音声パス設定手段によって設定される音声データ用の通信パスに加えて、選択パス設定手段により、付帯メディアであるテキスト情報を利用者Ａの端末装置に送るための通信パスがメディアトランスレータと利用者Ａの端末装置との間に設定される。そして、上述したメディア管理情報に基づいて、変換制御手段によって作製された選択指示に基づいて、メディアトランスレータにより、利用者Ｂからの音声データがテキスト情報に変換され、このテキスト情報が付帯メディアデータ用の通信パスを介して利用者Ａの端末装置に送出される。
例えば、抽出手段により、一方の利用者Ａの端末装置からのＳＩＰメッセージから音声データに加えてテキスト情報の受信を希望する旨を示すメディア管理情報が抽出されると、この利用者Ａの端末と接続先の利用者Ｂの端末との間に音声パス設定手段によって設定される音声データ用の通信パスに加えて、選択パス設定手段により、付帯メディアであるテキスト情報を利用者Ａの端末装置に送るための通信パスがメディアトランスレータと利用者Ａの端末装置との間に設定される。そして、上述したメディア管理情報に基づいて、変換制御手段によって作製された選択指示に基づいて、メディアトランスレータにより、利用者Ｂからの音声データがテキスト情報に変換され、このテキスト情報が付帯メディアデータ用の通信パスを介して利用者Ａの端末装置に送出される。
このようにして、利用者Ｂの端末装置とメディアトランスレータとの間で音声データの身の通信を成立させつつ、利用者Ａの端末装置とメディアトランスレータとの間で音声データにテキスト情報を加えた複合通信を成立させることができる。
具体的には、上述した第１の複合メディア通信システムを、ＳＩＰサーバシステムを用いて構成し、各端末装置に、ＩＮＶＩＴＥメッセージおよび２００ＯＫメッセージを含むＳＩＰメッセージに所望の付帯メディアを指定するメディア管理情報を付加する情報付加手段を備え、抽出手段は、ＳＩＰサーバシステムに属するＳＩＰサーバと各端末装置との間でやり取りされるＳＩＰメッセージに付加された付加情報からメディア管理情報を抽出する構成とすることができる。
具体的には、上述した第１の複合メディア通信システムを、ＳＩＰサーバシステムを用いて構成し、各端末装置に、ＩＮＶＩＴＥメッセージおよび２００ＯＫメッセージを含むＳＩＰメッセージに所望の付帯メディアを指定するメディア管理情報を付加する情報付加手段を備え、抽出手段は、ＳＩＰサーバシステムに属するＳＩＰサーバと各端末装置との間でやり取りされるＳＩＰメッセージに付加された付加情報からメディア管理情報を抽出する構成とすることができる。
このように構成された複合メディア通信システムでは、ＳＩＰプロトコルが適用されたＶＯＩＰ通信システムにおいて一般的な呼処理に用いられるＳＩＰメッセージに、各端末装置が適切な付加情報を付加し、この付加情報に含まれるメディア管理情報をＳＩＰサーバシステムにおいて抽出して、メディアトランスレータの動作や通信パスの設定動作に反映させることにより、ＶＯＩＰ通信システムで接続される双方の利用者が独立に通信メディアを選択可能な複合メディア通信システムを提供することができる。
本発明にかかわる第２の複合メディア通信システムは、メディアトランスレータと、保持手段と、メディア管理手段と、音声パス設定手段と、選択パス設定手段とから構成される。
本発明にかかわる第２の複合メディア通信システムの原理は、以下の通りである。
メディアトランスレータは、音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを付帯メディアにおいて音声データの内容を表す付帯メディアデータに変換する。保持手段は、個々の利用者に対応して、受信を希望する付帯メディアを示す登録情報を含むユーザ管理情報を保持する。メディア管理手段は、利用者の端末装置からの発呼要求に応じて保持手段を参照し、発呼側の利用者と着信側の利用者とにそれぞれ対応するユーザ管理情報に基づいて、付帯メディアでの通信の必要性を判定するとともに、ユーザ管理情報に基づいて必要とされる付帯メディアを示す選択指示を作成して、メディアトランスレータに入力する。音声パス設定手段は、メディア管理手段による判定結果に応じて、発呼側の利用者の端末装置と着信側の利用者の端末装置との間で授受される音声データを含むＲＴＰパケットについて、メディアトランスレータを経由する通信パスあるいはメディアトランスレータを経由しない通信パスを設定する。選択パス設定手段は、メディア管理手段によって付帯メディアでの通信が必要とされたときに、双方の利用者に対応する登録情報で示された付帯メディアデータ用の通信パスをそれぞれ設定する。
本発明にかかわる第２の複合メディア通信システムの原理は、以下の通りである。
メディアトランスレータは、音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを付帯メディアにおいて音声データの内容を表す付帯メディアデータに変換する。保持手段は、個々の利用者に対応して、受信を希望する付帯メディアを示す登録情報を含むユーザ管理情報を保持する。メディア管理手段は、利用者の端末装置からの発呼要求に応じて保持手段を参照し、発呼側の利用者と着信側の利用者とにそれぞれ対応するユーザ管理情報に基づいて、付帯メディアでの通信の必要性を判定するとともに、ユーザ管理情報に基づいて必要とされる付帯メディアを示す選択指示を作成して、メディアトランスレータに入力する。音声パス設定手段は、メディア管理手段による判定結果に応じて、発呼側の利用者の端末装置と着信側の利用者の端末装置との間で授受される音声データを含むＲＴＰパケットについて、メディアトランスレータを経由する通信パスあるいはメディアトランスレータを経由しない通信パスを設定する。選択パス設定手段は、メディア管理手段によって付帯メディアでの通信が必要とされたときに、双方の利用者に対応する登録情報で示された付帯メディアデータ用の通信パスをそれぞれ設定する。
このように構成された第２の複合メディア通信システムの動作は、下記の通りである。
例えば、発呼側の利用者Ａに対応してテキスト情報を付帯メディアとする旨のユーザ管理データが保持手段に登録されている場合に、メディア管理手段は、着信側の利用者Ｂに対応するユーザ管理データに付帯メディアが登録されているか否かにかかわらず、付帯メディアでの通信が必要であると判定し、これに応じて、音声パス設定手段により、利用者Ａの端末装置と利用者Ｂの端末装置との間にメディアトランスレータを経由してＲＴＰパケットを伝送する通信パスが設定される。また、このとき、メディア管理手段により、利用者Ａの端末装置に対応してテキスト情報が付帯メディアとして選択された旨の選択指示が作成されてメディアトランスレータに渡される。これに応じて、このメディアトランスレータにおいて、利用者Ａの端末装置に渡されるＲＴＰパケットに含まれる音声データをテキスト情報に変換する処理が起動され、この変換処理で生成されたテキスト情報が、選択パス設定手段によって設定された付帯メディアデータ用の通信パスを介して利用者Ａの端末装置に伝送される。
例えば、発呼側の利用者Ａに対応してテキスト情報を付帯メディアとする旨のユーザ管理データが保持手段に登録されている場合に、メディア管理手段は、着信側の利用者Ｂに対応するユーザ管理データに付帯メディアが登録されているか否かにかかわらず、付帯メディアでの通信が必要であると判定し、これに応じて、音声パス設定手段により、利用者Ａの端末装置と利用者Ｂの端末装置との間にメディアトランスレータを経由してＲＴＰパケットを伝送する通信パスが設定される。また、このとき、メディア管理手段により、利用者Ａの端末装置に対応してテキスト情報が付帯メディアとして選択された旨の選択指示が作成されてメディアトランスレータに渡される。これに応じて、このメディアトランスレータにおいて、利用者Ａの端末装置に渡されるＲＴＰパケットに含まれる音声データをテキスト情報に変換する処理が起動され、この変換処理で生成されたテキスト情報が、選択パス設定手段によって設定された付帯メディアデータ用の通信パスを介して利用者Ａの端末装置に伝送される。
このように、予め登録されたユーザ管理データに基づいて通信パスの設定やメディアトランスレータでの翻訳機能処理を制御することにより、利用者Ｂの端末装置とメディアトランスレータとの間で音声データのみの通信を成立させつつ、利用者Ａの端末装置とメディアトランスレータとの間で音声データにテキスト情報を加えた複合通信を成立させることができる。
一方、双方の利用者に対応するユーザ管理データに付帯メディアが示されていない場合は、メディア管理手段によって、付帯メディアでの通信は不要であると判定され、この判定結果に応じて、音声パス設定手段により、音声を含むＲＴＰパケットの伝送用としてメディアトランスレータを経由しない通信パスが設定される。
また、上述した第１あるいは第２の複合メディア通信システムにおいて、選択パス設定手段は、付帯メディアデータ用の通信パスとしてファイル転送プロトコルに従うＦＴＰパスを設定し、メディアトランスレータは、選択指示で指定された宛先の端末装置に渡されるＲＴＰパケットに含まれる音声データを、一定期間ごとに、付帯メディアにおいて音声データの内容を表す付帯メディアデータファイルに変換し、ＦＴＰパスを介して送出する変換手段を備えて構成することができる。
また、上述した第１あるいは第２の複合メディア通信システムにおいて、選択パス設定手段は、付帯メディアデータ用の通信パスとしてファイル転送プロトコルに従うＦＴＰパスを設定し、メディアトランスレータは、選択指示で指定された宛先の端末装置に渡されるＲＴＰパケットに含まれる音声データを、一定期間ごとに、付帯メディアにおいて音声データの内容を表す付帯メディアデータファイルに変換し、ＦＴＰパスを介して送出する変換手段を備えて構成することができる。
このように構成された複合メディア通信システムでは、音声通信との同時性を維持しつつ、効率の良いデータ伝送を実現するとともに、テキスト情報を保存に適したファイルとして提供することができる。
本発明にかかわる第３の複合メディア通信システムは、上述した第１あるいは第２の複合メディア通信システムに備えるメディアトランスレータに、検出手段とバージョン変換手段とパケット化手段とを備えて構成される。
本発明にかかわる第３の複合メディア通信システムは、上述した第１あるいは第２の複合メディア通信システムに備えるメディアトランスレータに、検出手段とバージョン変換手段とパケット化手段とを備えて構成される。
本発明にかかわる第３の複合メディア通信システムの原理は、以下の通りである。
上述した第１あるいは第２の複合メディア通信システムに備えられるメディアトランスレータにおいて、検出手段は、音声パス設定手段によって設定された音声データ用の通信パスを介して双方の利用者の端末装置から到来するＲＴＰパケットのＩＰバージョンの不整合を検出するとともに、追加データの宛先となる端末装置が属するＩＰネットワークのバージョンを特定する。バージョン変換手段は、不整合の検出に応じて、通信パスを介して伝送されるＲＴＰパケットについて、異なるＩＰバージョン間の変換処理を相互に行う。パケット化手段は、選択指示に応じて、指定された付帯メディアにおいてＲＴＰパケットに含まれる音声データの内容を表す付帯メディアデータを、検出手段で特定されたＩＰバージョンに応じてパケット化する。
上述した第１あるいは第２の複合メディア通信システムに備えられるメディアトランスレータにおいて、検出手段は、音声パス設定手段によって設定された音声データ用の通信パスを介して双方の利用者の端末装置から到来するＲＴＰパケットのＩＰバージョンの不整合を検出するとともに、追加データの宛先となる端末装置が属するＩＰネットワークのバージョンを特定する。バージョン変換手段は、不整合の検出に応じて、通信パスを介して伝送されるＲＴＰパケットについて、異なるＩＰバージョン間の変換処理を相互に行う。パケット化手段は、選択指示に応じて、指定された付帯メディアにおいてＲＴＰパケットに含まれる音声データの内容を表す付帯メディアデータを、検出手段で特定されたＩＰバージョンに応じてパケット化する。
このように構成された第３の複合メディア通信システムの動作は、下記の通りである。
検出手段により、双方の利用者の端末装置が異なるＩＰバージョンのＩＰネットワークに属していることが検出されたときに、端末装置間でやり取りされるＲＴＰパケットは、メディアトランスレータを経由して伝送される過程で、バージョン変換手段により、例えば、ＩＰｖ６からＩＰｖ４へまたその逆へのＩＰバージョン間の変換処理が行われる。これにより、それぞれの端末装置は、対向する端末装置が属するＩＰネットワークのＩＰバージョンが同一であるか否かにかかわらず、自身が属するＩＰネットワークのＩＰバージョンのＲＴＰパケットをやり取りすることができる。
検出手段により、双方の利用者の端末装置が異なるＩＰバージョンのＩＰネットワークに属していることが検出されたときに、端末装置間でやり取りされるＲＴＰパケットは、メディアトランスレータを経由して伝送される過程で、バージョン変換手段により、例えば、ＩＰｖ６からＩＰｖ４へまたその逆へのＩＰバージョン間の変換処理が行われる。これにより、それぞれの端末装置は、対向する端末装置が属するＩＰネットワークのＩＰバージョンが同一であるか否かにかかわらず、自身が属するＩＰネットワークのＩＰバージョンのＲＴＰパケットをやり取りすることができる。
また、検出手段によって特定されたＩＰバージョンに従って、パケット化手段により、追加データのパケット化が行われるので、追加データの宛先となる端末装置にこの端末装置が属するＩＰネットワークのＩＰバージョンに適合する形式のパケットとして追加データを渡すことができる。
このようにして、発側の利用者の端末装置と着側の利用者の端末装置とが、同一のＩＰバージョンのＩＰネットワークに属しているか否かにかかわらず、双方の利用者の意向を反映して独立に選択されたメディアを利用した複合メディア通信を実現することができる。
このようにして、発側の利用者の端末装置と着側の利用者の端末装置とが、同一のＩＰバージョンのＩＰネットワークに属しているか否かにかかわらず、双方の利用者の意向を反映して独立に選択されたメディアを利用した複合メディア通信を実現することができる。
本発明にかかわる第４の複合メディア通信システムは、上述した第１あるいは第２の複合メディア通信システムに、更に、発側手順終端手段と、着側手順終端手段と、中継手段と、要求検出手段と、追加変換制御手段と、追加設定制御手段と、通知手段とを備えて構成される。
本発明にかかわる第４の複合メディア通信システムの原理は、以下の通りである。
本発明にかかわる第４の複合メディア通信システムの原理は、以下の通りである。
上述した第１あるいは第２の複合メディア通信システムにおいて、発側手順終端手段は、発側の端末装置に関する呼処理のための手順メッセージ授受を終端する。着側手順終端手段は、着側の端末装置に関する呼処理のための手順メッセージ授受を終端する。中継手段は、発側手順終端手段と着側手順終端手段との間で、手順メッセージの中継を行う。要求検出手段は、音声パス設定手段による通信パスの設定後に、発側手順終端手段および着側手順終端手段によってそれぞれ授受される手順メッセージから付帯メディアの受信に関する要求を検出する。追加変換制御手段は、要求の検出に応じて、ＲＴＰパケット用の通信パスを介して要求の要求元に送られる音声データについて、付帯メディアへの変換を指示する選択指示をメディアトランスレータに入力する。追加設定制御手段は、要求の検出に応じて、選択パス設定手段に、要求の送出元の端末装置とメディアトランスレータとを結ぶ付帯メディアデータ用の通信パスの設定を指示する。通知手段は、追加設定制御手段による指示に応じた選択パス設定手段による付帯メディアデータ用の通信パスの設定が完了した後に、発側手順終端手段あるいは着側手順終端手段を介して、要求の要求元の端末装置に付帯メディアデータ用の通信パスに関する情報を通知する。
このように構成された第４の複合メディア通信システムの動作は、下記の通りである。
ネットワークを介して接続される双方の端末装置間で行われる手順メッセージの授受は、発側手順終端手段及び着側手順終端手段によってそれぞれ終端され、中継手段によって中継されるので、一方の端末装置からの手順メッセージから付帯メディアの受信に関する要求が検出されたときに、他方の端末装置との間の手順メッセージの授受に影響を与えることなく、追加設定制御手段によって新たな付帯メディアの通信のために必要な要求元の端末装置との間の通信パスの追加を行うことができる。
ネットワークを介して接続される双方の端末装置間で行われる手順メッセージの授受は、発側手順終端手段及び着側手順終端手段によってそれぞれ終端され、中継手段によって中継されるので、一方の端末装置からの手順メッセージから付帯メディアの受信に関する要求が検出されたときに、他方の端末装置との間の手順メッセージの授受に影響を与えることなく、追加設定制御手段によって新たな付帯メディアの通信のために必要な要求元の端末装置との間の通信パスの追加を行うことができる。
また、上述した要求に応じて、追加変換制御手段がメディアトランスレータに新たな付帯メディアに関する選択指示を入力することにより、要求元の端末装置に贈られる音声データを新たな付帯メディアに変換する処理が起動される。
このようにして、双方の端末装置の間での通信が確立された後に、一方の利用者からの要求に応じて、新たな付帯メディアでの受信を追加的に提供することが可能となる。
このようにして、双方の端末装置の間での通信が確立された後に、一方の利用者からの要求に応じて、新たな付帯メディアでの受信を追加的に提供することが可能となる。
本発明にかかわる第５の複合メディア通信システムは、上述した第３の複合メディア通信システム２、更に、発側手順終端手段と、着側手順終端手段と、手順中継手段と、要求検出手段と、追加変換制御手段と、バージョン通知手段と、追加設定制御手段と、通知手段とを備えて構成される。
本発明にかかわる第５の複合メディア通信システムの原理は、以下の通りである。
本発明にかかわる第５の複合メディア通信システムの原理は、以下の通りである。
上述した第３の複合メディア通信システムにおいて、発側手順終端手段は、発側の端末装置に関する呼処理のための手順メッセージ授受を終端する。着側手順終端手段は、着側の端末装置に関する呼処理のための手順メッセージ授受を終端する。手順中継手段は、発側手順終端手段と着側手順終端手段との間で、検出手段による検出結果に応じて双方の端末装置がそれぞれ属するＩＰネットワークのＩＰバージョンに対応するプロトコル変換を行うとともに、手順メッセージの中継を行う。要求検出手段は、音声パス設定手段による通信パスの設定後に、発側手順終端手段および着側手順終端手段によってそれぞれ授受される手順メッセージから付帯メディアの受信に関する要求を検出する。追加変換制御手段は、要求の検出に応じて、ＲＴＰパケット用の通信パスを介して要求の要求元に送られる音声データについて、付帯メディアへの変換を指示する選択指示をメディアトランスレータに入力する。バージョン通知手段は、要求の検出に応じて、要求元の端末装置が属するＩＰネットワークのＩＰバージョンを特定し、特定したＩＰバージョンを示す情報をメディアトランスレータのパケット化手段に通知する。追加設定制御手段は、要求の検出に応じて、選択パス設定手段に、要求の送出元の端末装置とメディアトランスレータとを結ぶ付帯メディアデータ用の通信パスの設定を指示する。通知手段は、追加設定制御手段による指示に応じた選択パス設定手段による付帯メディアデータ用の通信パスの設定が完了した後に、発側手順終端手段あるいは着側手順終端手段を介して、要求の要求元の端末装置に付帯メディアデータ用の通信パスに関する情報を通知する。
このように構成された第５の複合メディア通信システムの動作は、下記の通りである。
発側手順終端手段及び着側手順終端手段によってそれぞれ終端される手順メッセージの授受を手順中継手段によって中継する過程で、各端末装置が属するＩＰネットワークのＩＰバージョンに適合したプロトコル変換が行われる。また、バージョン通知手段により、付帯メディアの受信に関する新たな要求の要求元に対応するＩＰバージョンが特定されて、メディアトランスレータのパケット化手段に通知される。したがって、ＩＰバージョンが異なるＩＰネットワークに属する端末装置間で、一方の端末装置からの通信開始後の要求に応じて、新たな付帯メディアでの受信を追加的に提供することができる。
発側手順終端手段及び着側手順終端手段によってそれぞれ終端される手順メッセージの授受を手順中継手段によって中継する過程で、各端末装置が属するＩＰネットワークのＩＰバージョンに適合したプロトコル変換が行われる。また、バージョン通知手段により、付帯メディアの受信に関する新たな要求の要求元に対応するＩＰバージョンが特定されて、メディアトランスレータのパケット化手段に通知される。したがって、ＩＰバージョンが異なるＩＰネットワークに属する端末装置間で、一方の端末装置からの通信開始後の要求に応じて、新たな付帯メディアでの受信を追加的に提供することができる。
上述したように、本発明にかかわる第１および第２の複合通信システムでは、システム内に備えたメディアトランスレータによって所望のメディア変換を行うことにより、ＶＯＩＰ通信システムで接続される双方の利用者が独立に通信メディアを選択可能であるので、例えば、一方の利用者からの要求に応じて、他方の利用者の端末装置で提供可能であるか否かにかかわらず、一般的に用いられる音声通話に加えて、テキスト情報による受信サービスを提供することができる。
また、第３の複合通信システムでは、ＩＰバージョンの異なるＩＰネットワークの境界を越えて、同様の複合メディア通信システムを提供することができる。
また、本発明にかかわる第４および第５の複合通信システムでは、通信開始後に新たな付帯メディアでの受信を追加的に提供することが可能である。
これにより、例えば、聴覚にハンディキャップを持つ利用者側の端末装置にテキスト情報による受信を提供する機能が備えられていれば、対向する利用者の端末装置にテキスト情報による通信機能が備えられているか否かにかかわらず、前者の端末装置を介して音声データに対応するテキスト情報を提供することが可能となるので、様々な利用者に対するサービス性の向上を図ることができる。
また、本発明にかかわる第４および第５の複合通信システムでは、通信開始後に新たな付帯メディアでの受信を追加的に提供することが可能である。
これにより、例えば、聴覚にハンディキャップを持つ利用者側の端末装置にテキスト情報による受信を提供する機能が備えられていれば、対向する利用者の端末装置にテキスト情報による通信機能が備えられているか否かにかかわらず、前者の端末装置を介して音声データに対応するテキスト情報を提供することが可能となるので、様々な利用者に対するサービス性の向上を図ることができる。
また、例えば、音声データで表された内容に対応するテキスト情報をファイルとして要求元の端末装置に送出することにより、音声通話で得られた情報のテキストファイルによる蓄積を実現することが可能となり、情報収集の効率化を図ることもできる。
以下、図面に基づいて、本発明の実施形態について詳細に説明する。
（第１の実施形態）
図１に、本発明にかかわる複合メディア通信システムの第１の実施形態を示す。
図１において、端末装置Ａ２１０および端末装置Ｂ２４０は、ＩＰネットワークを介してＳＩＰサーバＡ２２０およびＳＩＰサーバＢ２３０にそれぞれ接続されており、メディアトランスレータ２５０は、上述したＩＰネットワークに接続されるとともに、内部に備えた通信処理部２５１を介してＳＩＰサーバＢ２３０に接続されている。
（第１の実施形態）
図１に、本発明にかかわる複合メディア通信システムの第１の実施形態を示す。
図１において、端末装置Ａ２１０および端末装置Ｂ２４０は、ＩＰネットワークを介してＳＩＰサーバＡ２２０およびＳＩＰサーバＢ２３０にそれぞれ接続されており、メディアトランスレータ２５０は、上述したＩＰネットワークに接続されるとともに、内部に備えた通信処理部２５１を介してＳＩＰサーバＢ２３０に接続されている。
図１に示した端末装置Ａ２１０に備えられたサービス処理部２１１は、電話機２１５を介した音声通話サービスを提供する機能を備えており、一方、端末装置Ｂ２４０に備えられたサービス処理部２４１は、表示装置２４５を介するテキスト情報表示を含む複合サービスを提供する機能を備えている。
また、図１に示したＳＩＰ処理部２１２、２４２は、それぞれ対応するサービス処理部２１１からのサービス要求に応じて対向するＳＩＰサーバＡ２２０、ＳＩＰサーバＢ２３０との間でＳＩＰプロトコルに従うメッセージの授受を行い、ＶＯＩＰ通信サービスに必要なセションの提供を受ける。
また、図１に示したＳＩＰ処理部２１２、２４２は、それぞれ対応するサービス処理部２１１からのサービス要求に応じて対向するＳＩＰサーバＡ２２０、ＳＩＰサーバＢ２３０との間でＳＩＰプロトコルに従うメッセージの授受を行い、ＶＯＩＰ通信サービスに必要なセションの提供を受ける。
このＳＩＰ処理部２１２によってセション制御が行われる過程で、付加情報設定部２１３は、登録情報保持部２１４に登録された情報に従って受信を希望する付帯メディアを示す付加情報をＳＩＰメッセージに付加する処理を行う。また、ＳＩＰ処理部２４２によってセション制御が行われる過程で、付加情報設定部２４３は、入力受付部２４４を介して入力された情報に従って受信を希望する付帯メディアを示す付加情報をＳＩＰメッセージに付加する処理を行う。
上述した端末装置Ａ２１０の付加情報設定部２１３によって付加された付加情報は、図１に示したＳＩＰサーバＡ２２０の付加サービス処理部２２２によって抽出され、複合メディア通信システムにおいて許容可能であるか否かの判定処理に供される。このとき、付加サービス処理部２２２は、抽出した付加情報で示される付帯メディアが付加サービス処理部２２２内に用意された選択可能メディアリストに含まれるか否かに基づいて、許容可能であるか否かを判定し、許容可能である場合に、ＳＩＰ処理部２２１に対して、メディアトランスレータ２５０が接続されたＳＩＰサーバＢ２３０への転送を依頼する。
一方、図１に示したＳＩＰサーバＢ２３０において、付加サービス処理部２３２は、ＳＩＰサーバＡ２２０から受け取ったＳＩＰメッセージがＳＩＰ処理部２３１によって処理される過程で、このＳＩＰメッセージに付加された付加情報に基づいて、通信処理部２３３を介してメディアトランスレータ２５０に音声データ用のＲＴＰセションに加えて、付加情報で示された付帯メディア用のＦＴＰセションを設定するためのポートの確保を依頼する。
図１に示したメディアトランスレータ２５０において、セション管理部２５２は、通信処理部２５１を介して受け取った依頼に基づいて、メディア変換処理部２５３の入出力ポートなどのリソースを獲得／解放するとともに、通信処理部２５１を介して獲得したリソースに関する情報をＳＩＰサーバＢ２３０に通知し、ＲＴＰセションおよびＦＴＰセションの確立処理に供する。
このとき、セション管理部２５２により、ＳＩＰサーバＡ２２０に対応する網側とＳＩＰサーバＢ２３０に対応するプロキシ側とのそれぞれについて、図２(ａ)に示すようなセション管理テーブルに、獲得したリソースに対応してセションの設定に必要な入力側、出力側および宛先のＩＰアドレスなどを含むセション設定情報および割当先のセッションに関してメディア変換処理部２５３で行うべき処理の内容を示す変換モードが登録され、このセション管理テーブルに登録された情報に基づいて、メディア変換処理部２５３による変換処理が行われる。
このメディア変換処理部２５３では、メディア変換を行う旨の変換モード(図２において、符号ONとして示した)が登録されたリソース番号に対応するセション設定情報に含まれる入力側ＩＰアドレス(ADin1)で示された入力側ポートから入力されるＲＴＰパケットに含まれる音声データを、この音声データで表される会話の内容を示すテキスト情報に変換し、セション設定情報の出力側ＩＰアドレス(ADout1)で示された出力側ポートを介して指定された宛先を設定して送出する処理が行われる。
このとき、メディア変換処理部２５３は、例えば、変換対象のセションを介して伝送されるＲＴＰパケットを一定時間に渡って保持しておき、保持したＲＴＰパケットに含まれる音声データについてまとめて音声認識処理を行ってテキスト情報に変換する処理と、得られたテキスト情報をテキストファイルの一部としてＦＴＰプロトコルに従って送出する処理を一定時間ごとに繰り返すことにより、音声からテキスト情報への変換を実現することができる。
また、メディア変換処理部２５３に手話映像データベースを備え、上述したようにして得られたテキスト情報あるいは端末装置から受け取ったテキスト情報に基づいて、手話映像データベースから適切な手話映像を検索して一連の手話映像からなる映像データを形成することにより、音声から手話映像へのメディア変換を実現することも可能である。このようにして形成された手話映像は、一般的な映像データの伝送方式に従って伝送することができる。
更に、メディア変換処理部２５３に音声変換処理部を備えて構成して、端末装置から受け取ったテキスト情報に基づいて合成音声を生成し、テキスト情報から音声データへのメディア変換を行って、生成した音声データを付帯メディアとしてあるいは上述した端末装置からの音声データの代わりの音声データとして、対向する端末装置に提供することも可能である。
次に、図１に示した複合メディア通信システムの動作について説明する。
図３に、複合メディア通信システムの動作を表すシーケンス図を示す。
図１に示した端末装置Ａ２１０の登録情報保持部２１４に、音声通話以外の付帯メディアでの着信を希望しない旨が登録されていた場合は、サービス処理部２１１からの依頼に応じてＳＩＰ処理部２１２が送出するＩＮＶＩＴＥメッセージには、ＶＯＩＰ通信のみを希望する旨の付加情報が設定される。このＩＮＶＩＴＥメッセージは、ＩＰネットワークを介してＳＩＰサーバＡ２２０に送出され、更に、メディアトランスレータ２５０に接続されたＳＩＰサーバＢ２３０に転送される(図３参照)。
図３に、複合メディア通信システムの動作を表すシーケンス図を示す。
図１に示した端末装置Ａ２１０の登録情報保持部２１４に、音声通話以外の付帯メディアでの着信を希望しない旨が登録されていた場合は、サービス処理部２１１からの依頼に応じてＳＩＰ処理部２１２が送出するＩＮＶＩＴＥメッセージには、ＶＯＩＰ通信のみを希望する旨の付加情報が設定される。このＩＮＶＩＴＥメッセージは、ＩＰネットワークを介してＳＩＰサーバＡ２２０に送出され、更に、メディアトランスレータ２５０に接続されたＳＩＰサーバＢ２３０に転送される(図３参照)。
このとき、図１に示したＳＩＰサーバＢ２３０の付加サービス処理部２３２は、通信処理部２３３を介してメディアトランスレータ２５０に、発信元の端末装置Ａ２１０と着信先の端末装置Ｂとにそれぞれ対応するＲＴＰセションおよび端末装置Ｂ２４０用のＦＴＰセションの捕捉を指示する。そして、この指示に応じて、メディアトランスレータ２５０のセション管理部２５２により、メディア変換処理部２５３の２つのＲＴＰポートＡ，ＢとともにＦＴＰポートＢが獲得され、これらの各ポートに関する情報がＳＩＰサーバＢ２３０に通知される(図３参照)。
図１に示したＳＩＰサーバＢ２３０の付加サービス処理部２３２は、上述したようにして通知されたＲＴＰポートＢおよびＦＴＰポートＢを示す情報を含む付加情報を作成し、この付加情報をＩＮＶＩＴＥメッセージに設定して、ＳＩＰ処理部２３１を介して端末装置Ｂ２４０に送出する(図３参照)。
例えば、図１に示した端末装置Ｂ２４０の利用者により、着信応答の際などに、入力装置を介してテキスト情報の着信を希望する旨が入力された場合に、この情報が入力受付部２４４を介して付加情報設定部２４３に通知される。これに応じて、付加情報設定部２４３により、音声通話に加えて付帯メディアとしてテキスト情報を希望する旨の付加情報が作成され、上述したＩＮＶＩＴＥメッセージに対する応答メッセージ(２００ＯＫ)に設定されて、ＳＩＰ処理部２４２を介してＳＩＰサーバＢ２３０に返される(図３参照)。
例えば、図１に示した端末装置Ｂ２４０の利用者により、着信応答の際などに、入力装置を介してテキスト情報の着信を希望する旨が入力された場合に、この情報が入力受付部２４４を介して付加情報設定部２４３に通知される。これに応じて、付加情報設定部２４３により、音声通話に加えて付帯メディアとしてテキスト情報を希望する旨の付加情報が作成され、上述したＩＮＶＩＴＥメッセージに対する応答メッセージ(２００ＯＫ)に設定されて、ＳＩＰ処理部２４２を介してＳＩＰサーバＢ２３０に返される(図３参照)。
この応答メッセージを発信元の端末装置Ａ２１０に返す過程で、ＳＩＰサーバＢ２３０の付加サービス処理部２３２により、端末装置Ａ２１０用のＲＴＰポートＡを示す情報を含む付加情報が作成され、この付加情報が設定された応答メッセージが、ＳＩＰ処理部２３１を介してＳＩＰサーバＡ２２０に送出され、更に、このＳＩＰサーバＡ２２０を介して端末装置Ａ２１０に返される(図３参照)。
このようにして、メディアトランスレータ２５０を経由して端末装置Ａ２１０と端末装置Ｂ２４０とを結ぶＲＴＰセションを設定するとともに、付帯メディアとしてテキスト情報の着信を希望している端末装置Ｂ２４０とメディアトランスレータ２５０との間に、ＦＴＰセションを独立に設定することができる。
そして、このようにして設定されたＲＴＰセションを介して端末装置Ａ２１０の利用者と端末装置Ｂ２４０の利用者との間に音声通話サービスを提供するとともに、対向する端末装置Ａ２１０にテキスト情報によるサービス機能が備えられているか否かにかかわらず、端末装置Ｂ２４０の利用者のみにＦＴＰセションを介してテキスト情報をテキストファイルの一部として提供し、付帯メディアでの受信サービスを提供することができる。
そして、このようにして設定されたＲＴＰセションを介して端末装置Ａ２１０の利用者と端末装置Ｂ２４０の利用者との間に音声通話サービスを提供するとともに、対向する端末装置Ａ２１０にテキスト情報によるサービス機能が備えられているか否かにかかわらず、端末装置Ｂ２４０の利用者のみにＦＴＰセションを介してテキスト情報をテキストファイルの一部として提供し、付帯メディアでの受信サービスを提供することができる。
上述したように、テキスト情報での受信を希望する旨の付加情報に応じて、付帯メディア用のセションとしてＦＴＰセションを設定し、付帯メディアでの受信に関する要求元の端末装置(例えば、端末装置Ｂ２４０)にテキスト情報をテキストファイルの一部としてＦＴＰプロトコルに従ってファイル転送することにより、要求元の端末装置では、音声通話の終了とともに、通話内容を表すテキスト情報を含むテキストファイルを取得することができる。
このようにして得られたテキストファイルを保存することにより、音声データそのものを蓄積する場合に比べて、音声通話の内容を格段にコンパクトに保存することができるので、通話によって得られる情報を保存する用途に適用する場合にも非常に有用である。
なお、図４に示すように、着信側の端末装置Ｂからの応答により、音声以外の付帯メディアでの着信を希望しない旨が示された場合は、図１に示したＳＩＰサーバＢ２３０の付加サービス処理部２３２により、通信処理部２３３を介してメディアトランスレータ２５０にＦＴＰセションの解放が指示され、これに応じて、セション管理部２５２により、着信側の端末装置用に確保されていたＦＴＰポートＢが解放される。
なお、図４に示すように、着信側の端末装置Ｂからの応答により、音声以外の付帯メディアでの着信を希望しない旨が示された場合は、図１に示したＳＩＰサーバＢ２３０の付加サービス処理部２３２により、通信処理部２３３を介してメディアトランスレータ２５０にＦＴＰセションの解放が指示され、これに応じて、セション管理部２５２により、着信側の端末装置用に確保されていたＦＴＰポートＢが解放される。
この場合は、メディアトランスレータ２５０を経由するＲＴＰセションを介した音声通話サービスのみが提供される。
上述したように、発信側からのＩＮＶＩＴＥメッセージに応じてメディアトランスレータ２５０のポートを確保し、着信側からの応答に応じて、不要であることが確定したポートを解放する手順を採用することにより、着信側の端末装置に必要なポートを問い合わせる手順を省略することができる。
（第２の実施形態）
図５に、本発明にかかわる複合メディア通信システムの第２の実施形態を示す。
上述したように、発信側からのＩＮＶＩＴＥメッセージに応じてメディアトランスレータ２５０のポートを確保し、着信側からの応答に応じて、不要であることが確定したポートを解放する手順を採用することにより、着信側の端末装置に必要なポートを問い合わせる手順を省略することができる。
（第２の実施形態）
図５に、本発明にかかわる複合メディア通信システムの第２の実施形態を示す。
なお、図５に示す構成要素のうち、図１に示した各部と同等のものについては、図１に示した符号を付して示し、その説明を省略する。
図５において、保守サーバ２６０は、例えば、ＳＩＰサーバＡ２２０およびＳＩＰサーバＢ２３０を介して、端末装置Ａ２１０および端末装置Ｂ２４０を含む各端末装置について、個々の端末装置が希望する付帯メディアを示すユーザ管理情報を収集し、収集したユーザ管理情報をＳＩＰサーバＢ２３０のユーザ管理テーブル２３４に登録する。
図５において、保守サーバ２６０は、例えば、ＳＩＰサーバＡ２２０およびＳＩＰサーバＢ２３０を介して、端末装置Ａ２１０および端末装置Ｂ２４０を含む各端末装置について、個々の端末装置が希望する付帯メディアを示すユーザ管理情報を収集し、収集したユーザ管理情報をＳＩＰサーバＢ２３０のユーザ管理テーブル２３４に登録する。
また、図５に示した付加サービス処理部２３２は、ＳＩＰ処理部２３１によってセションの確立のためのＳＩＰメッセージが授受される過程で、上述したユーザ管理テーブル２３４を参照し、対象となる双方の利用者の端末装置に対応するユーザ管理情報に基づいて、付帯メディアを用いたサービスの必要性を判断し、この判断結果に応じて、通信処理部２３３を介してメディアトランスレータ２５０を経由するセションの設定を制御する。
図６に、複合メディア通信システムの動作を表すシーケンス図を示す。
例えば、端末装置Ｂ２４０からのＩＮＶＩＴＥメッセージに応じて、図５に示したＳＩＰサーバＢ２３０の付加サービス処理部２３２は、ユーザ管理テーブル２３４を参照して、発信元である端末装置Ｂ２４０に対応して付帯メディアとしてテキスト情報が希望されている旨と着信先の端末装置Ａ２１０に対応して付帯メディアでの着信が希望されていない旨のユーザ管理情報を取得する。
例えば、端末装置Ｂ２４０からのＩＮＶＩＴＥメッセージに応じて、図５に示したＳＩＰサーバＢ２３０の付加サービス処理部２３２は、ユーザ管理テーブル２３４を参照して、発信元である端末装置Ｂ２４０に対応して付帯メディアとしてテキスト情報が希望されている旨と着信先の端末装置Ａ２１０に対応して付帯メディアでの着信が希望されていない旨のユーザ管理情報を取得する。
このように、少なくとも一方の端末装置に対応して付帯メディアを指定したユーザ管理情報が登録されている場合に、付加サービス処理部２３２は、付帯メディアを用いたサービスが必要とされると判断し、通信処理部２３３を介して、メディアトランスレータ２５０にセション捕捉指示を送出する。
このとき、付加サービス処理部２３２により、ユーザ管理テーブル２３４に登録されたユーザ管理情報に基づいて、必要となるＲＴＰポート数およびＦＴＰポート数を決定し、この決定結果をセション捕捉指示で指定することにより、メディアトランスレータ２５０のセション管理部２５２を介して、必要とされる付帯メディアでのサービスを提供するために過不足ないポートを確保することができる。
このとき、付加サービス処理部２３２により、ユーザ管理テーブル２３４に登録されたユーザ管理情報に基づいて、必要となるＲＴＰポート数およびＦＴＰポート数を決定し、この決定結果をセション捕捉指示で指定することにより、メディアトランスレータ２５０のセション管理部２５２を介して、必要とされる付帯メディアでのサービスを提供するために過不足ないポートを確保することができる。
このようにして確保されたポートを、上述した第１の実施形態と同様にして、発信元の端末装置Ｂ２４０および着信先の端末装置Ａ２１０に通知することにより、ユーザ管理テーブル２３４に登録されたユーザ管理情報に従って、メディアトランスレータ２５０を経由したＲＴＰセションによる音声通話サービスとともに、端末装置Ｂ２４０の利用者に、ＦＴＰセションを介してテキスト情報を提供することができる。
なお、双方の利用者に対応するユーザ管理情報により、音声通話のみのサービスを希望する旨が示された場合には、従来と同様のＳＩＰメッセージの授受を行って、メディアトランスレータ２５０を経由しないＲＴＰセションが設定される。
このように、メディアトランスレータ２５０に接続されたＳＩＰサーバＢ２３０に備えられたユーザ管理テーブル２３４に登録されたユーザ管理情報に基づいて、メディアトランスレータ２５０を経由するセションを設定するか否かを決定する構成では、付帯メディアを用いたサービスが必要とされる場合に限ってメディアトランスレータ２５０を経由するセションが設定されるので、メディアトランスレータ２５０の資源を有効に利用することが可能である。
（第３の実施形態）
図７に、本発明にかかわる複合メディア通信システムの第３の実施形態を示す。また、図８に、複合メディア通信システムの動作を表すシーケンス図を示す。
このように、メディアトランスレータ２５０に接続されたＳＩＰサーバＢ２３０に備えられたユーザ管理テーブル２３４に登録されたユーザ管理情報に基づいて、メディアトランスレータ２５０を経由するセションを設定するか否かを決定する構成では、付帯メディアを用いたサービスが必要とされる場合に限ってメディアトランスレータ２５０を経由するセションが設定されるので、メディアトランスレータ２５０の資源を有効に利用することが可能である。
（第３の実施形態）
図７に、本発明にかかわる複合メディア通信システムの第３の実施形態を示す。また、図８に、複合メディア通信システムの動作を表すシーケンス図を示す。
なお、図７に示す構成要素のうち、図１に示した各部と同等のものについては、図１に示した符号を付して示し、その説明を省略する。同様に、図８に示すシーケンスのうち、図３に示した各シーケンスと同等のものについては、図３に示した符号を付して示し、その説明を省略する。
図７に示したＳＩＰサーバＢ２３０において、プロトコル変換処理部２３５は、付加サービス処理部２３２を介して、ＩＰＶ４ネットワークに属する端末装置(例えば、端末装置Ａ２１０)とＩＰＶ６ネットワークに属する端末装置(例えば、端末装置Ｂ２４０)との間でやり取りされるＳＩＰメッセージを受け取り、必要とされるプロトコル変換を行って、ＳＩＰ処理部２３１を介して送出する。
図７に示したＳＩＰサーバＢ２３０において、プロトコル変換処理部２３５は、付加サービス処理部２３２を介して、ＩＰＶ４ネットワークに属する端末装置(例えば、端末装置Ａ２１０)とＩＰＶ６ネットワークに属する端末装置(例えば、端末装置Ｂ２４０)との間でやり取りされるＳＩＰメッセージを受け取り、必要とされるプロトコル変換を行って、ＳＩＰ処理部２３１を介して送出する。
また、ＩＰバージョンの異なるＩＰネットワークの境界を越えて付加情報を含むＳＩＰメッセージ(ＩＮＶＩＴＥ)が渡される際に、付加サービス処理部２３２は、通信処理部２３２を介してメディアトランスレータ２５０に、上述したＩＰバージョンの際に関する情報を含むセション捕捉指示を渡し、セション管理部２５２によるセション捕捉処理に供する。
このとき、図７に示したメディアトランスレータ２５０において、セション管理部２５２は、通信処理部２５１を介して受け取ったセション捕捉指示に基づいて、適切なリソースの獲得処理を行い、獲得したリソースに関するセション設定情報および変換モードとともに、図２(ｂ)に示すように、セション捕捉指示で指定されたＩＰバージョンに関する情報を登録して、パケット変換処理部２５４の処理に供する。
図７に示したパケット変換処理部２５４は、上述したようにしてセション管理テーブルに登録されたＩＰバージョンに関する情報に基づいて、ＩＰＶ４ネットワークに属する端末装置(例えば、端末装置Ａ２１０)とＩＰＶ６ネットワークに属する端末装置(例えば、端末装置Ｂ２４０)との間でやり取りされるＲＴＰパケットおよびＦＴＰパケットについて必要とされるパケット変換を行う。
このように構成された複合メディア通信システムでは、図８に示すように、ＩＰＶ６ネットワークに属する端末装置Ｂ２４０からのＳＩＰメッセージは、ＳＩＰサーバＢ２３０によってＩＰＶ４プロトコルに変換された上で、ＳＩＰサーバＡ２２０を介してＩＰＶ４ネットワークに属する端末装置Ａ２１０に渡され、逆に、ＩＰＶ４ネットワークに属する端末装置Ａ２１０からのＳＩＰメッセージは、ＳＩＰサーバＡ２３０によって中継された後に、ＳＩＰサーバＢ２３０において、ＩＰＶ６プロトコルに変換されてから端末装置Ｂ２４０に渡される。
また、上述したようなＳＩＰメッセージのやり取りによってＲＴＰセションが確立された後は、図７に示したパケット変換処理部２５４により、ＩＰＶ４／ＩＰＶ６間でのパケット変換が行われる(図８参照)。
このように、図７に示した複合メディア通信システムでは、ＩＰＶ４ネットワークとＩＰネットワークとにまたがって、付帯メディアでの着信を含む複合メディア通信サービスを提供することが可能となる。
（第４の実施形態）
図９に、本発明にかかわる複合メディア通信システムの第４の実施形態を示す。また、図１０に、複合メディアシステムの動作を表すシーケンス図を示す。
このように、図７に示した複合メディア通信システムでは、ＩＰＶ４ネットワークとＩＰネットワークとにまたがって、付帯メディアでの着信を含む複合メディア通信サービスを提供することが可能となる。
（第４の実施形態）
図９に、本発明にかかわる複合メディア通信システムの第４の実施形態を示す。また、図１０に、複合メディアシステムの動作を表すシーケンス図を示す。
なお、図９に示す構成要素のうち、図１に示した各部と同等のものについては、図１に示した符号を付して示し、その説明を省略する。同様に、図１０に示すシーケンスのうち、図３に示した各シーケンスと同等のものについては、図３に示した符号を付して示し、その説明を省略する。
図９に示した複合メディア通信システムでは、図１に示したＳＩＰサーバＢ２３０に代えて、ＳＩＰサーバＡ２２０と同等の構成を有するＳＩＰサーバＢ２７０が備えられるとともに、Ｂ２ＢＵＡ(Back to Back User Agent)２８０が備えられ、端末装置Ａ２１０と端末装置Ｂ２４０とのＳＩＰメッセージのやり取りがＢ２ＢＵＡ２８０によって中継される過程で、このＢ２ＢＵＡ２８０に備えられるＢ２ＢＵＡ機能処理部２８１の機能により、双方のＳＩＰプロトコルが終端されている(図１０参照)。
図９に示した複合メディア通信システムでは、図１に示したＳＩＰサーバＢ２３０に代えて、ＳＩＰサーバＡ２２０と同等の構成を有するＳＩＰサーバＢ２７０が備えられるとともに、Ｂ２ＢＵＡ(Back to Back User Agent)２８０が備えられ、端末装置Ａ２１０と端末装置Ｂ２４０とのＳＩＰメッセージのやり取りがＢ２ＢＵＡ２８０によって中継される過程で、このＢ２ＢＵＡ２８０に備えられるＢ２ＢＵＡ機能処理部２８１の機能により、双方のＳＩＰプロトコルが終端されている(図１０参照)。
また、図９において、メディアトランスレータ２５０は、Ｂ２ＢＵＡ２８０に接続されており、Ｂ２ＢＵＡ２８０に備えられた付加サービス処理部２８２は、Ｂ２ＢＵＡ機能処理部２８１によって中継されるＳＩＰメッセージから付加サービスにかかわる付加情報を検出し、検出した付加情報に基づいて、通信処理部２８３を介してメディアトランスレータ２５０との間で付加サービスの提供に必要な情報の授受を行う。
例えば、図１０に示したようにして、端末装置Ａ２１０と端末装置Ｂ２４０とを結ぶＲＴＰセションがメディアトランスレータ２５０を経由して設定されるとともに、端末装置Ｂ２４０にテキスト情報をＦＴＰ転送するためのＦＴＰセションが設定され、音声による通話とともに、端末Ｂ２４０の利用者へのテキスト情報の提供が開始される。
その後に、図１０に示すように、端末装置Ａ２１０からテキスト情報での着信の追加を希望する旨の付加情報を含むＲＥＩＮＶＩＴＥメッセージが送出されると、Ｂ２ＢＵＡ２８０の付加サービス処理部２８２により、通信処理部２８３を介してメディアトランスレータ２５０に追加のセション捕捉が指示される。
その後に、図１０に示すように、端末装置Ａ２１０からテキスト情報での着信の追加を希望する旨の付加情報を含むＲＥＩＮＶＩＴＥメッセージが送出されると、Ｂ２ＢＵＡ２８０の付加サービス処理部２８２により、通信処理部２８３を介してメディアトランスレータ２５０に追加のセション捕捉が指示される。
これに応じて、メディアトランスレータ２５０のセション管理部２５２により、ＦＴＰポートＡが獲得され、新たに獲得されたリソースに対応して、端末装置Ａ２１０に向かう音声データをテキスト情報に変換する旨を示す適切なセション設定情報および変換モードがセション管理テーブルに追加される。
また、メディアトランスレータ２５０からの通知に応じて、Ｂ２ＢＵＡ２８０により、追加ポート(ＦＴＰＡ)に関する情報を含むＳＩＰメッセージ(２００ＯＫ)が、ＳＩＰサーバＡ２２０を介して要求元の端末装置Ａ２１０に通知され、これに応じて、メディアトランスレータ２５０から端末装置Ａ２１０へのテキスト情報のＦＴＰプロトコルに従うファイル転送が開始される。
また、メディアトランスレータ２５０からの通知に応じて、Ｂ２ＢＵＡ２８０により、追加ポート(ＦＴＰＡ)に関する情報を含むＳＩＰメッセージ(２００ＯＫ)が、ＳＩＰサーバＡ２２０を介して要求元の端末装置Ａ２１０に通知され、これに応じて、メディアトランスレータ２５０から端末装置Ａ２１０へのテキスト情報のＦＴＰプロトコルに従うファイル転送が開始される。
このように、Ｂ２ＢＵＡを備えて構成された複合メディア通信システムでは、例えば、メディアトランスレータ２５０を経由したＲＴＰセションの設定後に、対向する端末装置それぞれからのＲＥＩＮＶＩＴＥメッセージに付加された付加情報に応じて、新たな付帯メディアによる着信サービスを追加的に提供することができる。
（第５の実施形態）
図１１に、本発明にかかわる複合メディア通信システムの第５の実施形態を示す。また、図１２、１３に、複合メディア通信システムの動作を表すシーケンス図を示す。
（第５の実施形態）
図１１に、本発明にかかわる複合メディア通信システムの第５の実施形態を示す。また、図１２、１３に、複合メディア通信システムの動作を表すシーケンス図を示す。
なお、図１１に示す構成要素のうち、図７、図９に示した各部と同等のものについては、図７、図９に示した符号を付して示し、その説明を省略する。同様に、図１２，１３に示すシーケンスのうち、図８、図１０に示した各シーケンスと同等のものについては、図８、図１０に示した符号を付して示し、その説明を省略する。
図１１に示した複合メディア通信システムにおいて、メディアトランスレータ２５０は、図７と同様にパケット変換処理部２５４を備えて構成されている。また、図１１に示したＢ２ＢＵＡ２８０は、図７に示したプロトコル変換処理部２３５と同等のプロトコル変換処理部２８４を備えて構成されており、ＳＩＰサーバＡ２２０とＳＩＰサーバＢ２３０との間でＳＩＰメッセージを中継する過程において、双方のＩＰバージョンの違いに対応したプロトコル変換が行われる。
図１１に示した複合メディア通信システムにおいて、メディアトランスレータ２５０は、図７と同様にパケット変換処理部２５４を備えて構成されている。また、図１１に示したＢ２ＢＵＡ２８０は、図７に示したプロトコル変換処理部２３５と同等のプロトコル変換処理部２８４を備えて構成されており、ＳＩＰサーバＡ２２０とＳＩＰサーバＢ２３０との間でＳＩＰメッセージを中継する過程において、双方のＩＰバージョンの違いに対応したプロトコル変換が行われる。
このような複合メディア通信システムでは、図１２に示すように、Ｂ２ＢＵＡ２８０において、ＩＰＶ６ネットワークとＩＰＶ４ネットワークとの境界をまたがってＳＩＰメッセージが中継される過程で、例えば、ＩＰＶ６とＩＰＶ４との間のプロトコル変換処理が行われる。また、メディアトランスレータ２５０において、端末装置Ａ２１０と端末装置Ｂ２４０との間でＲＴＰパケットが伝送される過程で、ＩＰＶ６とＩＰＶ４との間のパケット変換を行うとともに、メディア変換処理部２５３で得られたテキスト情報を、端末装置Ｂ２４０が属するＩＰネットワークのバージョンであるＩＰＶ６に適合するＦＴＰプロトコルに従って転送する。
これにより、図７に示した第３の実施形態と同様に、複合メディア通信サービスにかかわる端末装置がそれぞれ属するＩＰネットワークのバージョンが一致しているか否かにかかわらず、付帯メディアによる受信サービスを提供することができる。
更に、図１１に示した複合メディア通信システムでは、図９に示した第４の実施形態と同様に、付帯メディアによる受信サービスを追加することが可能である。
更に、図１１に示した複合メディア通信システムでは、図９に示した第４の実施形態と同様に、付帯メディアによる受信サービスを追加することが可能である。
例えば、図１３に示すように、端末装置Ａ２１０と端末装置Ｂ２４０との間にメディアトランスレータ２５０を経由するＲＴＰセションが確立された後に、端末装置Ｂ２４０からのＲＥＩＮＶＩＴＥメッセージに付加された付加情報よって、手話映像の追加が指示されると、第４の実施形態において説明したようにして、Ｂ２ＢＵＡ２８０からの指示に応じてメディアトランスレータ２５０による追加ポート(例えば、ＲＴＰポートＢ２)の獲得が行われる。そして、この追加ポートを示す情報が、ＩＰＶ６プロトコルに従って、ＳＩＰサーバＢ２３０を介して要求元の端末装置Ｂ２４０に通知され、新たなＲＴＰセションがメディアトランスレータ２５０と要求元の端末装置Ｂ２４０との間に設定される。
その後、メディアトランスレータ２５０に備えられたメディア変換処理部２５３により、テキスト情報を指定した付帯メディア受信サービスのために作成されたテキスト情報を手話映像に変換する処理が行われ、得られた手話映像を表す映像データが、新たに設定されたＲＴＰセションを介して端末装置Ｂ２４０に送出される。
このようにして、複合メディア通信サービスにかかわる端末装置がそれぞれ属するＩＰネットワークのバージョンが一致しているか否かにかかわらず、既に提供を受けている付帯メディア受信サービス(テキスト情報ファイルの受信)に加えて、更に、新たな付帯メディア(手話映像)による受信サービスを追加的に提供することができる。
このようにして、複合メディア通信サービスにかかわる端末装置がそれぞれ属するＩＰネットワークのバージョンが一致しているか否かにかかわらず、既に提供を受けている付帯メディア受信サービス(テキスト情報ファイルの受信)に加えて、更に、新たな付帯メディア(手話映像)による受信サービスを追加的に提供することができる。
以上の説明に関して、更に、以下の各項を開示する。
（付記１） 音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、前記選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを前記付帯メディアにおいて前記音声データの内容を表す付帯メディアデータに変換するメディアトランスレータと、
ＩＰネットワークを介して接続される双方の利用者の端末装置間で授受される音声データを含むＲＴＰパケットについて、前記メディアトランスレータを経由する通信パスを設定する音声パス設定手段と、
前記双方の利用者の端末装置間で授受されるメッセージから前記選択可能メディアに関する通信を希望する利用者および付帯メディアを特定する情報を含むメディア管理情報を抽出する抽出手段と、
前記メディア管理情報に基づいて前記選択指示を作成して、前記メディアトランスレータに入力する変換制御手段と、
前記メディア管理情報で指定された利用者の端末に、前記メディアトランスレータによって生成された前記付帯メディアデータを渡すための通信パスを設定する選択パス設定手段と
を備えたことを特徴とする複合メディア通信システム。
（付記１） 音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、前記選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを前記付帯メディアにおいて前記音声データの内容を表す付帯メディアデータに変換するメディアトランスレータと、
ＩＰネットワークを介して接続される双方の利用者の端末装置間で授受される音声データを含むＲＴＰパケットについて、前記メディアトランスレータを経由する通信パスを設定する音声パス設定手段と、
前記双方の利用者の端末装置間で授受されるメッセージから前記選択可能メディアに関する通信を希望する利用者および付帯メディアを特定する情報を含むメディア管理情報を抽出する抽出手段と、
前記メディア管理情報に基づいて前記選択指示を作成して、前記メディアトランスレータに入力する変換制御手段と、
前記メディア管理情報で指定された利用者の端末に、前記メディアトランスレータによって生成された前記付帯メディアデータを渡すための通信パスを設定する選択パス設定手段と
を備えたことを特徴とする複合メディア通信システム。
（付記２） 付記１に記載の第１の複合メディア通信システムにおいて、ＳＩＰサーバシステムを用いて構成し、各端末装置に、ＩＮＶＩＴＥメッセージおよび２００ＯＫメッセージを含むＳＩＰメッセージに所望の付帯メディアを指定するメディア管理情報を付加する情報付加手段を備えるとともに、
抽出手段は、ＳＩＰサーバシステムに属するＳＩＰサーバと各端末装置との間でやり取りされる前記ＳＩＰメッセージに付加された付加情報から前記メディア管理情報を抽出する構成であることを特徴とする複合メディア通信システム。
抽出手段は、ＳＩＰサーバシステムに属するＳＩＰサーバと各端末装置との間でやり取りされる前記ＳＩＰメッセージに付加された付加情報から前記メディア管理情報を抽出する構成であることを特徴とする複合メディア通信システム。
（付記３） 音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、前記選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを前記付帯メディアにおいて前記音声データの内容を表す付帯メディアデータに変換するメディアトランスレータと、
個々の利用者に対応して、受信を希望する付帯メディアを示す登録情報を含むユーザ管理情報を保持する保持手段と、
利用者の端末装置からの発呼要求に応じて前記保持手段を参照し、発呼側の利用者と着信側の利用者とにそれぞれ対応するユーザ管理情報に基づいて、付帯メディアでの通信の必要性を判定するとともに、前記ユーザ管理情報に基づいて必要とされる付帯メディアを示す選択指示を作成して、前記メディアトランスレータに入力するメディア管理手段と、
前記メディア管理手段による判定結果に応じて、前記発呼側の利用者の端末装置と前記着信側の利用者の端末装置との間で授受される音声データを含むＲＴＰパケットについて、前記メディアトランスレータを経由する通信パスあるいは前記メディアトランスレータを経由しない通信パスを設定する音声パス設定手段と、
前記メディア管理手段によって前記付帯メディアでの通信が必要とされたときに、前記双方の利用者に対応する登録情報で示された付帯メディアデータ用の通信パスをそれぞれ設定する選択パス設定手段と
を備えたことを特徴とする複合メディア通信システム。
個々の利用者に対応して、受信を希望する付帯メディアを示す登録情報を含むユーザ管理情報を保持する保持手段と、
利用者の端末装置からの発呼要求に応じて前記保持手段を参照し、発呼側の利用者と着信側の利用者とにそれぞれ対応するユーザ管理情報に基づいて、付帯メディアでの通信の必要性を判定するとともに、前記ユーザ管理情報に基づいて必要とされる付帯メディアを示す選択指示を作成して、前記メディアトランスレータに入力するメディア管理手段と、
前記メディア管理手段による判定結果に応じて、前記発呼側の利用者の端末装置と前記着信側の利用者の端末装置との間で授受される音声データを含むＲＴＰパケットについて、前記メディアトランスレータを経由する通信パスあるいは前記メディアトランスレータを経由しない通信パスを設定する音声パス設定手段と、
前記メディア管理手段によって前記付帯メディアでの通信が必要とされたときに、前記双方の利用者に対応する登録情報で示された付帯メディアデータ用の通信パスをそれぞれ設定する選択パス設定手段と
を備えたことを特徴とする複合メディア通信システム。
（付記４） 付記１あるいは付記３に記載の複合メディア通信システムにおいて、
前記選択パス設定手段は、付帯メディアデータ用の通信パスとしてファイル転送プロトコルに従うＦＴＰパスを設定し、
前記メディアトランスレータは、前記選択指示で指定された宛先の端末装置に渡されるＲＴＰパケットに含まれる音声データを、一定期間ごとに、前記付帯メディアにおいて前記音声データの内容を表す付帯メディアデータファイルに変換し、前記ＦＴＰパスを介して送出する変換手段を備えることを特徴とする複合メディア通信システム。
前記選択パス設定手段は、付帯メディアデータ用の通信パスとしてファイル転送プロトコルに従うＦＴＰパスを設定し、
前記メディアトランスレータは、前記選択指示で指定された宛先の端末装置に渡されるＲＴＰパケットに含まれる音声データを、一定期間ごとに、前記付帯メディアにおいて前記音声データの内容を表す付帯メディアデータファイルに変換し、前記ＦＴＰパスを介して送出する変換手段を備えることを特徴とする複合メディア通信システム。
（付記５） 付記１あるいは付記３に記載の複合メディア通信システムにおいて、
前記メディアトランスレータは、
前記音声パス設定手段によって設定された音声データ用の通信パスを介して双方の利用者の端末装置から到来するＲＴＰパケットのＩＰバージョンの不整合を検出するとともに、前記追加データの宛先となる端末装置が属するＩＰネットワークのバージョンを特定する検出手段と、
前記不整合の検出に応じて、前記通信パスを介して伝送されるＲＴＰパケットについて、異なるＩＰバージョン間の変換処理を相互に行うバージョン変換手段と、
前記選択指示に応じて、指定された付帯メディアにおいて前記ＲＴＰパケットに含まれる音声データの内容を表す付帯メディアデータを、前記検出手段で特定されたＩＰバージョンに応じてパケット化するパケット化手段とを備えた
ことを特徴とする複合メディア通信システム。
前記メディアトランスレータは、
前記音声パス設定手段によって設定された音声データ用の通信パスを介して双方の利用者の端末装置から到来するＲＴＰパケットのＩＰバージョンの不整合を検出するとともに、前記追加データの宛先となる端末装置が属するＩＰネットワークのバージョンを特定する検出手段と、
前記不整合の検出に応じて、前記通信パスを介して伝送されるＲＴＰパケットについて、異なるＩＰバージョン間の変換処理を相互に行うバージョン変換手段と、
前記選択指示に応じて、指定された付帯メディアにおいて前記ＲＴＰパケットに含まれる音声データの内容を表す付帯メディアデータを、前記検出手段で特定されたＩＰバージョンに応じてパケット化するパケット化手段とを備えた
ことを特徴とする複合メディア通信システム。
（付記６） 付記１あるいは付記３に記載の複合メディア通信システムにおいて、
発側の端末装置に関する呼処理のための手順メッセージ授受を終端する発側手順終端手段と、
着側の端末装置に関する呼処理のための手順メッセージ授受を終端する着側手順終端手段と、
前記発側手順終端手段と前記着側手順終端手段との間で、手順メッセージの中継を行う中継手段と、
前記音声パス設定手段による通信パスの設定後に、前記発側手順終端手段および前記着側手順終端手段によってそれぞれ授受される手順メッセージから前記付帯メディアの受信に関する要求を検出する要求検出手段と、
前記要求の検出に応じて、前記ＲＴＰパケット用の通信パスを介して前記要求の要求元に送られる音声データについて、前記付帯メディアへの変換を指示する選択指示を前記メディアトランスレータに入力する追加変換制御手段と、
前記要求の検出に応じて、前記選択パス設定手段に、前記要求の送出元の端末装置と前記メディアトランスレータとを結ぶ前記付帯メディアデータ用の通信パスの設定を指示する追加設定制御手段と、
前記追加設定制御手段による指示に応じた前記選択パス設定手段による前記付帯メディアデータ用の通信パスの設定が完了した後に、前記発側手順終端手段あるいは前記着側手順終端手段を介して、前記要求の要求元の端末装置に前記付帯メディアデータ用の通信パスに関する情報を通知する通知手段と
を備えたことを特徴とする複合メディア通信システム。
発側の端末装置に関する呼処理のための手順メッセージ授受を終端する発側手順終端手段と、
着側の端末装置に関する呼処理のための手順メッセージ授受を終端する着側手順終端手段と、
前記発側手順終端手段と前記着側手順終端手段との間で、手順メッセージの中継を行う中継手段と、
前記音声パス設定手段による通信パスの設定後に、前記発側手順終端手段および前記着側手順終端手段によってそれぞれ授受される手順メッセージから前記付帯メディアの受信に関する要求を検出する要求検出手段と、
前記要求の検出に応じて、前記ＲＴＰパケット用の通信パスを介して前記要求の要求元に送られる音声データについて、前記付帯メディアへの変換を指示する選択指示を前記メディアトランスレータに入力する追加変換制御手段と、
前記要求の検出に応じて、前記選択パス設定手段に、前記要求の送出元の端末装置と前記メディアトランスレータとを結ぶ前記付帯メディアデータ用の通信パスの設定を指示する追加設定制御手段と、
前記追加設定制御手段による指示に応じた前記選択パス設定手段による前記付帯メディアデータ用の通信パスの設定が完了した後に、前記発側手順終端手段あるいは前記着側手順終端手段を介して、前記要求の要求元の端末装置に前記付帯メディアデータ用の通信パスに関する情報を通知する通知手段と
を備えたことを特徴とする複合メディア通信システム。
（付記７） 付記５に記載の複合メディア通信システムにおいて、
発側の端末装置に関する呼処理のための手順メッセージ授受を終端する発側手順終端手段と、
着側の端末装置に関する呼処理のための手順メッセージ授受を終端する着側手順終端手段と、
前記発側手順終端手段と前記着側手順終端手段との間で、前記検出手段による検出結果に応じて前記双方の端末装置がそれぞれ属するＩＰネットワークのＩＰバージョンに対応するプロトコル変換を行うとともに、前記手順メッセージの中継を行う手順中継手段と、
前記音声パス設定手段による通信パスの設定後に、前記発側手順終端手段および前記着側手順終端手段によってそれぞれ授受される手順メッセージから前記付帯メディアの受信に関する要求を検出する要求検出手段と、
前記要求の検出に応じて、前記ＲＴＰパケット用の通信パスを介して前記要求の要求元に送られる音声データについて、前記付帯メディアへの変換を指示する選択指示を前記メディアトランスレータに入力する追加変換制御手段と、
前記要求の検出に応じて、前記要求元の端末装置が属するＩＰネットワークのＩＰバージョンを特定し、特定したＩＰバージョンを示す情報を前記メディアトランスレータのパケット化手段に通知するバージョン通知手段と、
前記要求の検出に応じて、前記選択パス設定手段に、前記要求の送出元の端末装置と前記メディアトランスレータとを結ぶ前記付帯メディアデータ用の通信パスの設定を指示する追加設定制御手段と、
前記追加設定制御手段による指示に応じた前記選択パス設定手段による前記付帯メディアデータ用の通信パスの設定が完了した後に、前記発側手順終端手段あるいは前記着側手順終端手段を介して、前記要求の要求元の端末装置に前記付帯メディアデータ用の通信パスに関する情報を通知する通知手段と
を備えたことを特徴とする複合メディア通信システム。
発側の端末装置に関する呼処理のための手順メッセージ授受を終端する発側手順終端手段と、
着側の端末装置に関する呼処理のための手順メッセージ授受を終端する着側手順終端手段と、
前記発側手順終端手段と前記着側手順終端手段との間で、前記検出手段による検出結果に応じて前記双方の端末装置がそれぞれ属するＩＰネットワークのＩＰバージョンに対応するプロトコル変換を行うとともに、前記手順メッセージの中継を行う手順中継手段と、
前記音声パス設定手段による通信パスの設定後に、前記発側手順終端手段および前記着側手順終端手段によってそれぞれ授受される手順メッセージから前記付帯メディアの受信に関する要求を検出する要求検出手段と、
前記要求の検出に応じて、前記ＲＴＰパケット用の通信パスを介して前記要求の要求元に送られる音声データについて、前記付帯メディアへの変換を指示する選択指示を前記メディアトランスレータに入力する追加変換制御手段と、
前記要求の検出に応じて、前記要求元の端末装置が属するＩＰネットワークのＩＰバージョンを特定し、特定したＩＰバージョンを示す情報を前記メディアトランスレータのパケット化手段に通知するバージョン通知手段と、
前記要求の検出に応じて、前記選択パス設定手段に、前記要求の送出元の端末装置と前記メディアトランスレータとを結ぶ前記付帯メディアデータ用の通信パスの設定を指示する追加設定制御手段と、
前記追加設定制御手段による指示に応じた前記選択パス設定手段による前記付帯メディアデータ用の通信パスの設定が完了した後に、前記発側手順終端手段あるいは前記着側手順終端手段を介して、前記要求の要求元の端末装置に前記付帯メディアデータ用の通信パスに関する情報を通知する通知手段と
を備えたことを特徴とする複合メディア通信システム。
以上に説明したように、本発明にかかわる複合メディア通信システムでは、システム内に備えられたメディアトランスレータにより、通話音声からテキスト情報へ、更に、手話映像へと所望のメディア変換を行うことができるので、ＩＰネットワークを介して接続される双方の端末装置に備えられたメディア通信機能が整合するか否かにかかわらず、個々の端末装置の利用者が希望する付帯メディアで受信するサービスを提供することができる。
このような付帯メディアでの受信サービスを提供することにより、例えば、聴覚にハンディキャップを持つ利用者がリアルタイム通信サービスを利用する際の障碍を除去し、リアルタイム通信サービスにおけるバリアフリー化を推進することができる。
また、受信メディアとしてテキスト情報を指定した場合には、通話内容を表すテキスト情報を含むテキストファイルを取得することができるので、音声通話で得られる情報をテキスト化してコンパクトに蓄積する用途にも適用することができる。
また、受信メディアとしてテキスト情報を指定した場合には、通話内容を表すテキスト情報を含むテキストファイルを取得することができるので、音声通話で得られる情報をテキスト化してコンパクトに蓄積する用途にも適用することができる。
２１０ 端末装置Ａ
２１１、２４１ サービス処理部
２１２、２４２ ＳＩＰ処理部
２１３、２４３ 付加情報設定部
２１４ 登録情報保持部
２１５ 電話機
２２０ ＳＩＰサーバＡ
２２１、２３１ ＳＩＰ処理部
２２２、２３２ 付加サービス処理部
２３０、２７０ ＳＩＰサーバＢ
２３３ 通信処理部
２３４ ユーザ管理テーブル
２３５ プロトコル変換処理部
２４０ 端末装置Ｂ
２４４ 入力受付部
２４５ 表示装置
２５０ メディアトランスレータ
２５１ 通信処理部
２５２ セション管理部
２５３ メディア変換処理部
２５４ パケット変換処理部
２６０ 保守サーバ
２８０ Ｂ２ＢＵＡ(Back to Back User Agent)
２８１ Ｂ２ＢＵＡ機能処理部
２８２ 付加サービス処理部
２８３ 通信処理部
２８４ プロトコル変換処理部
２１１、２４１ サービス処理部
２１２、２４２ ＳＩＰ処理部
２１３、２４３ 付加情報設定部
２１４ 登録情報保持部
２１５ 電話機
２２０ ＳＩＰサーバＡ
２２１、２３１ ＳＩＰ処理部
２２２、２３２ 付加サービス処理部
２３０、２７０ ＳＩＰサーバＢ
２３３ 通信処理部
２３４ ユーザ管理テーブル
２３５ プロトコル変換処理部
２４０ 端末装置Ｂ
２４４ 入力受付部
２４５ 表示装置
２５０ メディアトランスレータ
２５１ 通信処理部
２５２ セション管理部
２５３ メディア変換処理部
２５４ パケット変換処理部
２６０ 保守サーバ
２８０ Ｂ２ＢＵＡ(Back to Back User Agent)
２８１ Ｂ２ＢＵＡ機能処理部
２８２ 付加サービス処理部
２８３ 通信処理部
２８４ プロトコル変換処理部
Claims (5)
- 音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、前記選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを前記付帯メディアにおいて前記音声データの内容を表す付帯メディアデータに変換するメディアトランスレータと、
ＩＰネットワークを介して接続される双方の利用者の端末装置間で授受される音声データを含むＲＴＰパケットについて、前記メディアトランスレータを経由する通信パスを設定する音声パス設定手段と、
前記双方の利用者の端末装置間で授受されるメッセージから前記選択可能メディアに関する通信を希望する利用者および付帯メディアを特定する情報を含むメディア管理情報を抽出する抽出手段と、
前記メディア管理情報に基づいて前記選択指示を作成して、前記メディアトランスレータに入力する変換制御手段と、
前記メディア管理情報で指定された利用者の端末に、前記メディアトランスレータによって生成された前記付帯メディアデータを渡すための通信パスを設定する選択パス設定手段と
を備えたことを特徴とする複合メディア通信システム。 - 音声データとテキスト情報を含む選択可能メディアとの間の翻訳能力を持ち、前記選択可能メディアから選択された付帯メディアを示す選択指示に応じて、入力されるＲＴＰパケットに含まれる音声データを前記付帯メディアにおいて前記音声データの内容を表す付帯メディアデータに変換するメディアトランスレータと、
個々の利用者に対応して、受信を希望する付帯メディアを示す登録情報を含むユーザ管理情報を保持する保持手段と、
利用者の端末装置からの発呼要求に応じて前記保持手段を参照し、発呼側の利用者と着信側の利用者とにそれぞれ対応するユーザ管理情報に基づいて、付帯メディアでの通信の必要性を判定するとともに、前記ユーザ管理情報に基づいて必要とされる付帯メディアを示す選択指示を作成して、前記メディアトランスレータに入力するメディア管理手段と、
前記メディア管理手段による判定結果に応じて、前記発呼側の利用者の端末装置と前記着信側の利用者の端末装置との間で授受される音声データを含むＲＴＰパケットについて、前記メディアトランスレータを経由する通信パスあるいは前記メディアトランスレータを経由しない通信パスを設定する音声パス設定手段と、
前記メディア管理手段によって前記付帯メディアでの通信が必要とされたときに、前記双方の利用者に対応する登録情報で示された付帯メディアデータ用の通信パスをそれぞれ設定する選択パス設定手段と
を備えたことを特徴とする複合メディア通信システム。 - 請求項１または請求項２に記載の複合メディア通信システムにおいて、
前記メディアトランスレータは、
前記音声パス設定手段によって設定された音声データ用の通信パスを介して双方の利用者の端末装置から到来するＲＴＰパケットのＩＰバージョンの不整合を検出するとともに、前記追加データの宛先となる端末装置が属するＩＰネットワークのバージョンを特定する検出手段と、
前記不整合の検出に応じて、前記通信パスを介して伝送されるＲＴＰパケットについて、異なるＩＰバージョン間の変換処理を相互に行うバージョン変換手段と、
前記選択指示に応じて、指定された付帯メディアにおいて前記ＲＴＰパケットに含まれる音声データの内容を表す付帯メディアデータを、前記検出手段で特定されたＩＰバージョンに応じてパケット化するパケット化手段とを備えた
ことを特徴とする複合メディア通信システム。 - 請求項１または請求項２に記載の複合メディア通信システムにおいて、
発側の端末装置に関する呼処理のための手順メッセージ授受を終端する発側手順終端手段と、
着側の端末装置に関する呼処理のための手順メッセージ授受を終端する着側手順終端手段と、
前記発側手順終端手段と前記着側手順終端手段との間で、手順メッセージの中継を行う中継手段と、
前記音声パス設定手段による通信パスの設定後に、前記発側手順終端手段および前記着側手順終端手段によってそれぞれ授受される手順メッセージから前記付帯メディアの受信に関する要求を検出する要求検出手段と、
前記要求の検出に応じて、前記ＲＴＰパケット用の通信パスを介して前記要求の要求元に送られる音声データについて、前記付帯メディアへの変換を指示する選択指示を前記メディアトランスレータに入力する追加変換制御手段と、
前記要求の検出に応じて、前記選択パス設定手段に、前記要求の送出元の端末装置と前記メディアトランスレータとを結ぶ前記付帯メディアデータ用の通信パスの設定を指示する追加設定制御手段と、
前記追加設定制御手段による指示に応じた前記選択パス設定手段による前記付帯メディアデータ用の通信パスの設定が完了した後に、前記発側手順終端手段あるいは前記着側手順終端手段を介して、前記要求の要求元の端末装置に前記付帯メディアデータ用の通信パスに関する情報を通知する通知手段と
を備えたことを特徴とする複合メディア通信システム。 - 請求項３に記載の複合メディア通信システムにおいて、
発側の端末装置に関する呼処理のための手順メッセージ授受を終端する発側手順終端手段と、
着側の端末装置に関する呼処理のための手順メッセージ授受を終端する着側手順終端手段と、
前記発側手順終端手段と前記着側手順終端手段との間で、前記検出手段による検出結果に応じて前記双方の端末装置がそれぞれ属するＩＰネットワークのＩＰバージョンに対応するプロトコル変換を行うとともに、前記手順メッセージの中継を行う手順中継手段と、
前記音声パス設定手段による通信パスの設定後に、前記発側手順終端手段および前記着側手順終端手段によってそれぞれ授受される手順メッセージから前記付帯メディアの受信に関する要求を検出する要求検出手段と、
前記要求の検出に応じて、前記ＲＴＰパケット用の通信パスを介して前記要求の要求元に送られる音声データについて、前記付帯メディアへの変換を指示する選択指示を前記メディアトランスレータに入力する追加変換制御手段と、
前記要求の検出に応じて、前記要求元の端末装置が属するＩＰネットワークのＩＰバージョンを特定し、特定したＩＰバージョンを示す情報を前記メディアトランスレータのパケット化手段に通知するバージョン通知手段と、
前記要求の検出に応じて、前記選択パス設定手段に、前記要求の送出元の端末装置と前記メディアトランスレータとを結ぶ前記付帯メディアデータ用の通信パスの設定を指示する追加設定制御手段と、
前記追加設定制御手段による指示に応じた前記選択パス設定手段による前記付帯メディアデータ用の通信パスの設定が完了した後に、前記発側手順終端手段あるいは前記着側手順終端手段を介して、前記要求の要求元の端末装置に前記付帯メディアデータ用の通信パスに関する情報を通知する通知手段と
を備えたことを特徴とする複合メディア通信システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006265272A JP4910603B2 (ja) | 2006-09-28 | 2006-09-28 | 複合メディア通信システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006265272A JP4910603B2 (ja) | 2006-09-28 | 2006-09-28 | 複合メディア通信システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008085837A true JP2008085837A (ja) | 2008-04-10 |
| JP4910603B2 JP4910603B2 (ja) | 2012-04-04 |
Family
ID=39356191
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006265272A Expired - Fee Related JP4910603B2 (ja) | 2006-09-28 | 2006-09-28 | 複合メディア通信システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4910603B2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2011048693A1 (ja) | 2009-10-23 | 2011-04-28 | 富士通株式会社 | 通信システム |
| JP2011125006A (ja) * | 2009-12-08 | 2011-06-23 | Internatl Business Mach Corp <Ibm> | ｎ−Ｗａｙ選択的言語処理を用いたリアルタイムＶｏＩＰコミュニケーションのためのシステムおよび方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003092628A (ja) * | 2001-07-13 | 2003-03-28 | Ketsu Aoki | 電話リレーサービス方法 |
| JP2004048277A (ja) * | 2002-07-10 | 2004-02-12 | Mitsubishi Electric Corp | 通信システム |
| JP2005286979A (ja) * | 2004-03-30 | 2005-10-13 | Fumikazu Murase | 通訳電話システム |
-
2006
- 2006-09-28 JP JP2006265272A patent/JP4910603B2/ja not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003092628A (ja) * | 2001-07-13 | 2003-03-28 | Ketsu Aoki | 電話リレーサービス方法 |
| JP2004048277A (ja) * | 2002-07-10 | 2004-02-12 | Mitsubishi Electric Corp | 通信システム |
| JP2005286979A (ja) * | 2004-03-30 | 2005-10-13 | Fumikazu Murase | 通訳電話システム |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2011048693A1 (ja) | 2009-10-23 | 2011-04-28 | 富士通株式会社 | 通信システム |
| US9407531B2 (en) | 2009-10-23 | 2016-08-02 | Fujitsu Limited | Communication system |
| JP2011125006A (ja) * | 2009-12-08 | 2011-06-23 | Internatl Business Mach Corp <Ibm> | ｎ−Ｗａｙ選択的言語処理を用いたリアルタイムＶｏＩＰコミュニケーションのためのシステムおよび方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4910603B2 (ja) | 2012-04-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2009005373A (ja) | セッション開始プロトコルアダプタ | |
| JP2007049415A (ja) | 音声データ変換装置、ネットワークシステム、制御方法及び制御プログラム | |
| US20130007291A1 (en) | MEDIA INTERWORKING IN IPv4 AND IPv6 SYSTEMS | |
| JP2007318343A (ja) | ゲートウェイ装置及び再ネゴシエーション方法 | |
| JP4266188B2 (ja) | 通信システム及びこの通信システムで使用される通信端末装置、及び通信システムで使用される通信方法 | |
| RU2332804C2 (ru) | Обработка начальных мультимедийных данных ii | |
| US8594128B2 (en) | Method and apparatus for enabling dynamic protocol interworking resolution with diverse endpoints | |
| JP2012015797A (ja) | 電話交換装置及び電話端末及び電話システムで使用される制御方法 | |
| CN113726968B (zh) | 终端通信方法、装置、服务器和存储介质 | |
| US8681199B2 (en) | Method of providing video-call service using general voice-call terminal and private branch exchange for performing the method | |
| JP4910603B2 (ja) | 複合メディア通信システム | |
| JPWO2006003758A1 (ja) | 通信システム及び転送制御方法並びにそれに用いる電話装置、通信装置及びプログラム | |
| JP2010050693A (ja) | リアルタイム音声翻訳通話システム、方法、アプリケーションサーバ、およびリソースセッション確立方法 | |
| JP2008113381A (ja) | 通信システム | |
| CN101594623B (zh) | 一种互联网协议语音呼叫的监听方法及设备 | |
| JP6127320B2 (ja) | プロンプティングを実施してユーザ情報を収集するための方法、装置、及び、システム | |
| JP2006050552A (ja) | 通信システム及びこの通信システムで使用される主装置、及び通信システムで使用される通信方法 | |
| JP2007214989A (ja) | Ｉｐ電話交換システム、ｉｐ電話交換システムの駆動方法及び駆動プログラム | |
| JP2007174191A (ja) | 接続制御方法および装置並びにプログラム | |
| JP2006211001A (ja) | テレビ電話装置 | |
| JP2007036813A (ja) | Ｉｐネットワークにおける通信信号のモニタリングシステムと方法、及びそれに用いるｓｉｐサーバとモニタ装置 | |
| JP2003046530A (ja) | アドレス空間の異なるｉｐネットワーク間の通信方法およびグローバルｉｐアドレスを持つ装置 | |
| KR20080093725A (ko) | 세션 설정 프로토콜 기반의 ｉｐ 멀티미디어 서비스를제공하는 단말장치, 호 세션 제어 기능 장치 및 이를이용한 서비스 요청 송/수신 방법 | |
| CN102624626B (zh) | 基于xml隧道的rtp传输方法 | |
| CN106453265B (zh) | Ip呼叫的调度方法及调度系统、ippbx、服务器 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090611 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110316 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110329 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110527 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111220 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120102 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150127 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |