JP4331463B2 - Multi-channel conversation system - Google Patents

Multi-channel conversation system Download PDF

Info

Publication number
JP4331463B2
JP4331463B2 JP2002348188A JP2002348188A JP4331463B2 JP 4331463 B2 JP4331463 B2 JP 4331463B2 JP 2002348188 A JP2002348188 A JP 2002348188A JP 2002348188 A JP2002348188 A JP 2002348188A JP 4331463 B2 JP4331463 B2 JP 4331463B2
Authority
JP
Japan
Prior art keywords
voip
conversation
conference room
channel
character string
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002348188A
Other languages
Japanese (ja)
Other versions
JP2004185088A (en
Inventor
愛 矢野
訓行 福山
隆一 松倉
正信 森永
政秀 野田
仁 山内
英明 宮崎
健一 堀尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2002348188A priority Critical patent/JP4331463B2/en
Publication of JP2004185088A publication Critical patent/JP2004185088A/en
Application granted granted Critical
Publication of JP4331463B2 publication Critical patent/JP4331463B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、マルチチャネル会話システムに関し、特に、リアルタイムで文字列会話メッセージによるコミュニケーションを提供するチャットシステムと、音声会話メッセージによるコミュニケーションを提供するVoIP(Voice over Internet Protocol)システムとを融合したマルチチャネル会話システムに関する。
【0002】
【従来の技術】
チャットシステムは、ネットワークに接続されたチャットサーバと複数のチャットクライアントとによって構成され、ネットワーク上に設営されたチャネルと呼ばれる仮想的な会話空間を複数のチャットクライアントにより共有して、リアルタイムにテキストメッセージを送受信可能な会話システムである。
チャットサーバは、各チャットクライアントから送信されてくる文字列会話メッセージを、同一のチャネル内の他のチャットクライアントに同報送信する。
【0003】
各チャットクライアントは、ニックネームと呼ばれる識別子により一義的に特定されるものであり、チャネル内における文字列会話メッセージもニックネームにより発言者を特定することができる。
通常、チャットサーバは複数のチャネルを提供しており、各チャネルには一義的に特定するためのチャネル名が付与されている(非特許文献1)。
また、IP(Internet Protocol)網を利用して音声パケットを送受信し音声会話を行うVoIPシステムが存在する。このVoIPシステムでは、MCU(Multipoint Control Unit)と呼ばれるVoIP用サーバ内に、チャットにおけるチャネルに相当するVoIP用会議室を設定し、このVoIP用会議室に接続しているクライアントを介して複数のユーザによる音声会話が可能となる。
【0004】
サーバ側に設置されるCM(Call Manager)によって各クライアント端末は管理され、各クライアントからの呼制御を行うことで複数人による同時音声会話が可能となる。したがって、VoIP用会議室に接続しているクライアントの音声は、同じVoIP用会議室に接続している他のクライアントに配信され、複数人が同時に音声を発した場合には、それぞれをミキシングした音声が各クライアントに配信されることとなる(非特許文献2〜3)。
前述したようなチャットシステムを用いて、複数のユーザがチャネル内で会話を行うことによって、情報端末を利用した共同作業が盛んに行われるようになってきている。また、IP網の高速化・普及拡大により、VoIPシステムを用いた電話会議なども用いられ始めている。
【0005】
チャットシステムでは、チャット用アプリケーションを搭載したパソコンなどの端末をIP網に常時接続した状態で用いられ、VoIPシステムでは、専用電話機やVoIP用アプリケーションを搭載したパソコンなどの端末をIP網に常時接続した状態で用いられ、両者は独立して利用されている。
【0006】
【非特許文献1】
jp.fujitsu.com;Chocoa Communicator
<URL:http://software.fujitsu.com/jp/chocoa/product1.html>
【0007】
【非特許文献2】
@nifty:EyeballパティオLite
<URL:http://eyeball.nifty.com/lite/guide01.html>
【0008】
【非特許文献3】
Macnica Networks;Centra Conference5
<URL:http://www.networks.macnica.co.jp/centra/conference.html>
【0009】
【発明が解決しようとする課題】
チャットシステムを用いて文字列による会話を行う場合に、キーボードへの打ち込みが間に合わなくなるほど会話が頻発する可能性がある。この場合、各ユーザ端末がVoIPシステムに対応していれば、VoIPシステムによる音声会話による会議に移行したい旨の発言をチャット画面上で行って、相手のVoIP電話番号に電話をかける必要がある。また、複数のユーザによる電話会議を行う場合には、VoIP用会議室を設置し、他のユーザにそのVoIP用会議室に参加してもらう必要がある。
【0010】
【課題を解決するための手段】
本発明に係るマルチチャネル会話サーバは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、チャットサーバが管理するチャネル内の文字列会話メッセージ所定条件になった場合に所定条件到達情報を出力する会話監視手段と、会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間であるVoIP用会議室を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバとを備える。
【0011】
【課題を解決するための手段】
本発明に係るマルチチャネル会話サーバは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバとを備える。
【0012】
ここで、会話監視手段は、チャネル内における文字列会話メッセージの出現率が所定時間内において所定値を超えた場合に所定条件になったと判断するように構成できる。
また、会話監視手段は、チャネル内における文字列会話メッセージ中に特定の文字列が出現した場合に所定条件になったと判断するように構成できる。
さらに、会話監視手段により検出された文字列会話メッセージ中の特定の文字列を音声データに変換する音声合成手段と、音声合成手段により変換された音声データを対応するチャネルに属するクライアントに通知するVoIP呼出手段とをさらに備える構成とすることも可能である。
【0013】
VoIP通知手段は、対応するチャネルのVoIP用会議室をVoIPサーバに設定し、チャネルに属するクライアントに対してVoIP接続要求通知を送信するように構成できる。
また、VoIPサーバが管理するVoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力するVoIP音声監視手段と、VoIP音声監視手段からの所定条件到達情報に基づいてVoIPサーバが管理するVoIP用会議室を終了させるVoIP終了手段とをさらに備える構成とすることもできる。
【0014】
さらに、VoIP音声監視手段は、VoIP用会議室内における音声パケット量が所定値以下になった場合に所定条件になったと判断するように構成でき、また、VoIP用会議室内における音声会話メッセージを音声認識し特定のキーワードを抽出した場合に所定条件になったと判断するように構成でき、VoIP用会議室が設定されてからの経過時間が所定値を超えた場合に所定条件になったと判断するように構成できる。
VoIP終了手段は、VoIP用会議室に属するクライアントに対してチャットサーバが管理するチャネルに移行することを促すチャット移行通知を送信するように構成できる。
【0015】
VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報をチャットサーバが管理するチャネル内の文字列会話メッセージとしてチャネルに属するクライアントに送信する変換文字列通知手段とをさらに備える構成とすることも可能である。
さらに、変換文字列通知手段が送信する文字列情報を含めてチャネル内の文字列会話メッセージをチャットログとして管理するチャットログ管理手段と、VoIPサーバが管理するVoIP用会議室内における音声会話メッセージをVoIPログとして管理するVoIPログ管理手段と、チャットログ管理手段が管理するチャットログのうち変換文字列通知手段により送信された文字列情報を、VoIPログ管理手段が管理するVoIPログ内の対応箇所とリンクさせるVoIPリンク手段とをさらに備える構成とすることができる。
【0016】
また、VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報中からVoIP用会議室内における会話の特徴となる文字列を抽出するキーワード抽出手段と、文字列による会話メッセージを制御することが可能なVoIP専用チャネルを設定し、音声認識手段により変換された文字列情報をVoIP専用チャネルを介して各クライアントに送信するVoIPワード送信手段と、キーワード抽出手段により抽出された文字列をチャットサーバが管理するチャネル内の文字列会話メッセージとしてチャネルに属するクライアントに送信するキーワード通知手段とをさらに備える構成とすることもできる。
【0017】
音声認識手段により変換された文字列情報を他の言語に翻訳する翻訳手段をさらに備える構成とすることが可能である。
VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報中からVoIP用会議室に未接続の個人を特定する文字列を検出した場合、特定された個人を呼び出すためのIPアドレスを取得しVoIP接続を促すためのVoIP移行通知をIPアドレスに送信する個人呼出手段とをさらに備える構成とすることも可能である。
【0018】
本発明の他の観点によるマルチチャネル会話サーバは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間であるVoIP用会議室を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP会議室上での音声による同時コミュニケーションを行わせるVoIPサーバと、VoIP用会議室内における音声会話メッセージ所定条件になった場合に所定条件到達情報を出力する音声監視手段と、音声監視手段から出力される所定条件到達情報に基づいて対応するVoIP会議室に属するクライアントに対してチャット接続を促すためのチャット移行通知を送信するチャット通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるものであって、チャット通知手段によりチャット移行通知がなされたクライアントに対するチャット用のチャネルを提供するチャットサーバとを備える。
【0019】
ここで、音声監視手段は、VoIP会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報中に特定の文字列を検出した場合に所定条件になったと判断するチャット移行キーワード抽出手段とを備える構成とすることができる。
本発明に係るマルチチャネル会話クライアントは、ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、チャットクライアントが接続中のチャネルに関してチャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室にVoIPクライアントを接続させるVoIP移行手段とを備える。
【0020】
ここで、自端末からVoIP用会議室に送信される音声パケット量を監視し、所定値以下であると判断した場合にVoIPクライアントによるVoIP用会議室への接続を終了するVoIP通信量監視手段をさらに備える構成とすることができる。
また、VoIP移行手段によるVoIP用会議室への接続から所定時間を経過したと判断した場合に、VoIPクライアントによるVoIP用会議室への接続を終了するVoIP接続時間監視手段をさらに備える構成とすることができる。
さらに、VoIPサーバ側においてVoIP用会議室内の音声会話メッセージを音声認識して変換された文字列情報を受信し、チャットクライアントを介して文字列会話メッセージとして表示するVoIPワード表示手段と、VoIPワード表示手段により表示された文字列情報に対する選択指示を受け付け、対応するVoIP用会議室にVoIPクライアントを接続するVoIP接続手段とをさらに備える構成とすることができる。
【0021】
本発明に係るマルチチャネル会話システムは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、チャットサーバが管理するチャネル内の文字列会話メッセージ所定条件になった場合に所定条件到達情報を出力する会話監視手段と、会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間であるVoIP用会議室を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、チャットサーバとの間でチャネルを共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、VoIPサーバとの間でVoIP用会議室を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、チャットクライアントが接続中のチャネルに関してVoIP通知手段によりVoIP移行通知を受信した場合に、前記VoIPサーバが提供するVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段とを含む
本発明に係るマルチチャネル会話方法は、ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、チャネル内の文字列会話メッセージ所定条件になった場合に所定条件到達情報を出力する段階と、所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間であるVoIP用会議室を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせる段階とを含む。
【0022】
本発明に係るマルチチャネル会話サーバのプログラムは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、チャットサーバが管理するチャネル内の文字列会話メッセージ所定条件になった場合に所定条件到達情報を出力する会話監視手段と、会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間であるVoIP用会議室を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバとを備えるマルチチャネル会話サーバとしてコンピュータを機能させるためのプログラムである。
【0023】
本発明のマルチチャネル会話クライアントのプログラムは、ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、チャットクライアントが接続中のチャネルに関してチャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室にVoIPクライアントを接続させるVoIP移行手段とを備えるマルチチャネル会話クライアントとしてコンピュータを機能させるためのプログラムである。
【0024】
本発明に係るマルチチャネル会話方法のプログラムは、ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせる段階と、チャネル内の文字列会話メッセージ所定条件になった場合に所定条件到達情報を出力する段階と、所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間であるVoIP用会議室を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせる段階とを含むマルチチャネル会話方法をコンピュータに実行させるためのプログラムである。
【0025】
【発明の実施の形態】
〔第1実施形態〕
本発明の第1実施形態が採用されるシステムの概要を図1に示す。
ここでは、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0026】
サーバ端末100には、各チャネル内の文字列会話メッセージを制御するチャットサーバ110と、各VoIP用会議室内の音声会話メッセージを制御するMCU(Multipoint Control Unit)120と、各クライアント端末200からの呼制御を行うCM(Call Manager)130とを備えている。
図1に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージの出現率が所定値を超えていると判断した場合、チャットメッセージが頻発している旨の通知をCM130に対して送信する(図1▲1▼)。
【0027】
CM130では、チャットサーバ110からチャットメッセージが頻発している旨の通知を受けて、MCU120内にそのチャネルに対応するVoIP用会議室を作成する(図1▲2▼)。
CM130は、VoIP用会議室を作成するとともに、対応するチャネルに属しているクライアント端末200に対してVoIP接続要求を送出する(図1▲3▼)。
サーバ端末100からのVoIP接続要求を受けたクライアント端末200において、そのクライアント端末200を使用しているユーザが応答した場合(図1▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP用会議室内の音声会話メッセージとして制御される。
【0028】
この第1実施形態を構成するための制御ブロック図を図19に示す。
このマルチチャネル会話システムでは、サーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定時間内における出現率が所定値を超えた場合であって、かつその会話メッセージの発信元であるクライアント端末200が複数である場合に、所定条件到達情報をCM130に送信する会話頻発度監視部111を備えている。
【0029】
CM130は、チャットサーバ110の管理するチャネルに属するクライアント端末200からのIPアドレス登録を受け付けてIPアドレステーブル132に格納するクライアントIPアドレス登録部131と、チャットサーバ110から送信される所定条件到達情報に基づいてクライアントIPアドレス登録部131から対応するクライアント端末200のIPアドレスを取得するIPアドレス取得部133と、IPアドレス取得部133で取得したIPアドレスのクライアント端末200に対してVoIP接続要求を送信するVoIP接続要求部134とを備えている。
【0030】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第1実施形態における動作を図37に基づいて説明する。
クライアント端末200からチャットコミニュケーションを開始する際には、予めサーバ端末100のクライアントIPアドレス登録部131にIPアドレスを登録することとする。このとき、クライアントIPアドレス登録部131は、ユーザがチャットで使用するユーザ名(ニックネーム)とクライアント端末200のIPアドレスとを関連づけてIPアドレステーブル132に格納する。このIPアドレステーブル132の一例を表1に示す。
【0031】
【表1】

Figure 0004331463
【0032】
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミニュケーションを制御する(ステップS111)。
会話頻発度監視部111は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージが所定時間内に所定値を超えたか否かを判別する(S112)。ここで、チャネル内の文字列会話メッセージが所定時間内に所定値を超えており、かつその文字列会話メッセージの送信が複数のクライアント端末200であると判断した場合にはステップS113に移行する。
【0033】
ステップS113では、該当するチャネルに属するユーザ名を検出し、これをCM130のIPアドレス取得部133に通知する。
IPアドレス取得部133では、チャットサーバ110から送信されてきたユーザ名からIPアドレステーブル132を検索し、該当するクライアント端末200のIPアドレスを取得する(ステップS114)。
IPアドレス取得部133は、この後、取得したクライアント端末200のIPアドレスとこれに対応するユーザ名とをセットにしてVoIP接続要求部134に通知する(ステップS115)。
【0034】
VoIP接続要求部134は、IPアドレス取得部133からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS116)。ここで、MCU120内に作成されるVoIP用会議室は、派生元となったチャネルと関連づけられてVoIP会議室管理テーブルとしてMCU120によって管理される。このVoIP会議室管理テーブルの一例を表2に示す。なお、VoIP会議室管理テーブルは、CM130内で管理することも可能であり、他の記憶媒体などにより管理すること可能である。
【0035】
【表2】
Figure 0004331463
【0036】
VoIP接続要求部134は、さらに、該当するクライアント端末200に対してVoIP接続要求通知を送信する(ステップS117)。
クライアント端末200では、サーバ端末100側からVoIP接続要求通知を受けると、アプリケーションがその旨の表示を行い、VoIP接続に応答するか否かをユーザに選択させる(ステップS121)。ユーザがVoIP接続要求に応答する旨の指示を行った場合には、ステップS122に移行する。
ステップS122では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
【0037】
VoIP接続要求通知を受けたクライアント端末200では、たとえば、図55に示すようなVoIP接続要求ダイアログ500を立ち上げるように構成できる。このVoIP接続要求ダイアログ500では、通知の種別がVoIP会議接続要求である旨を示す通知種別バー501、「チャネル"#VoIP"からVoIP会議室"VoIP"が派生しました」の内容表示を行う内容表示部502、参加することに同意することを指示する承諾ボタン503、参加することに同意しないことを指示する拒否ボタン504などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン503をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0038】
このような第1実施形態では、チャットによる文字列会話メッセージが頻発した際に、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第2実施形態〕
本発明の第2実施形態が採用されるシステムの概要を図2に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0039】
図2に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージの出現率が所定値を超えていると判断した場合、チャットメッセージが頻発している旨の通知をCM130に対して送信する(図2▲1▼)。
CM130では、チャットサーバ110からチャットメッセージが頻発している旨の通知を受けて、MCU120内にそのチャネルに対応するVoIP用会議室を作成する(図2▲2▼)。
【0040】
CM130は、VoIP用会議室を作成するとともに、対応するチャネルに属しているクライアント端末200に対して、作成したVoIP用会議室を通知する(図2▲3▼)。
サーバ端末100からのVoIP用会議室の通知を受けたクライアント端末200において、そのクライアント端末200がVoIP用会議室への接続を行った場合(図2▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP会議室内の音声会話メッセージとして制御される。
【0041】
この第2実施形態を構成するための制御ブロック図を図20に示す。
この第2実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定時間内における出現率が所定値を超えた場合であって、かつその会話メッセージの発信元であるクライアント端末200が複数である場合に、所定条件到達情報をCM130に送信する会話頻発度監視部111を備えている。
【0042】
CM130は、会話頻発度監視部111から送信されてくる所定条件到達情報に応じて、MCU120内にVoIP用会議室を作成するとともに該当するチャネルに属するクライアント端末200に対して作成したVoIP用会議室を通知するVoIP用会議室通知部135を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0043】
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への接続を行うVoIP接続部211を備えている。
このようにした第2実施形態における動作を図38に基づいて説明する。
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御する(ステップS131)。
【0044】
会話頻発度監視部111は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージが所定時間内に所定値を超えたか否かを判別する(S132)。ここで、チャネル内の文字列会話メッセージが所定時間内に所定値を超えており、かつその文字列会話メッセージの送信が複数のクライアント端末200であると判断した場合にはステップS133に移行する。
ステップS133では、該当するチャネルに属するユーザ名を検出し、これをCM130のVoIP用会議室通知部135に通知する。
【0045】
VoIP用会議室通知部135では、会話頻発度監視部111からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS134)。
VoIP用会議室通知部135は、さらに、該当するクライアント端末200に対してVoIP用会議室情報を通知する(ステップS135)。ここでは、クライアント端末200のIPアドレスは必要なく、チャットサーバ110を介してチャネル内における制御情報としてクライアント端末200のチャットアプリ210に会議室名などを含むVoIP用会議室情報を送信する。
【0046】
クライアント端末200では、サーバ端末100側からVoIP用会議室の通知を受けると、チャットアプリ210を介してその旨の表示を行い、VoIP用会議室への接続を行うか否かをユーザに選択させる(ステップS141)。ユーザがVoIP接続を行う旨の指示を行った場合には、ステップS142に移行する。
ステップS142では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
VoIP用会議室の通知を受けたクライアント端末200では、たとえば、図56に示すようなVoIP会議室通知ダイアログ510を立ち上げるように構成できる。このVoIP会議室通知ダイアログ510では、通知の種別がVoIP会議室通知である旨を示す通知種別バー511、「チャネル"#VoIP"からVoIP会議室"VoIP"が派生しました」の内容表示を行う内容表示部512、参加することに同意することを指示する承諾ボタン513、参加することに同意しないことを指示する拒否ボタン514などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン513をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0047】
このような第2実施形態では、第1実施形態と同様に、チャットによる文字列会話メッセージが頻発した際に、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第3実施形態〕
本発明の第3実施形態が採用されるシステムの概要を図3に示す。
この第3実施形態も第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0048】
図3に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージ中に特定の文字列が出現するか否かを監視しており、特定の文字列が出現した場合、所定条件到達情報をCM130に対して送信する。たとえば、チャットサーバ110は、文字列会話メッセージ中にチャネルに属するユーザ名を検出した場合に、そのユーザに対する呼び掛けがあったと判断し、呼び掛けメッセージの検出通知をCM130に送出する(図3▲1▼)。
【0049】
CM130では、チャットサーバ110から呼び掛けメッセージの検出通知を受けて、MCU120内に対応するVoIP用会議室を作成する(図3▲2▼)。
CM130は、VoIP用会議室を作成するとともに、呼び掛けを行ったクライアント端末と呼び掛けられたクライアント端末に対して、VoIP接続要求を送出する(図3▲3▼)。
サーバ端末100からのVoIP接続要求を受けたクライアント端末200において、そのクライアント端末200を使用しているユーザが応答した場合(図3▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP用会議室内の音声会話メッセージとして制御される。
【0050】
この第3実施形態を構成するための制御ブロック図を図21に示す。
第3実施形態におけるマルチチャネル会話システムは第1実施形態と同様に、サーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、文字列会話メッセージ中に所定の文字列が出現した場合に所定条件到達情報を通知する特定文字列監視部112を備えている。
【0051】
CM130は、チャットサーバ110の管理するチャネルに属するクライアント端末200からのIPアドレス登録を受け付けてIPアドレステーブル132に格納するクライアントIPアドレス登録部131と、チャットサーバ110から送信される所定条件到達情報に基づいてクライアントIPアドレス登録部131から対応するクライアント端末200のIPアドレスを取得するIPアドレス取得部133と、IPアドレス取得部133で取得したIPアドレスのクライアント端末200に対してVoIP接続要求を送信するVoIP接続要求部134とを備えている。この場合、IPアドレス取得部133は、特定文字列監視部112からの呼び掛けメッセージ検出通知に基づいて、呼び掛けられたユーザ名に対応するクライアント端末200と、呼び掛けを行ったユーザ名に対応するクライアント端末の両方についてそのIPアドレスを取得し、これをVoIP接続要求部134に送出するように構成できる。
【0052】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第3実施形態における動作を図39に基づいて説明する。
第1実施形態と同様に、クライアント端末200からチャットコミニュケーションを開始する際には、予めサーバ端末100のクライアントIPアドレス登録部131にIPアドレスを登録することとする。
【0053】
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御する(ステップS151)。
特定文字列監視部112は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージに所定の文字列が含まれているか否かを判別する(S152)。特に、チャネルに属するユーザ名を検出した場合には、そのユーザ名に対する呼び掛けメッセージがあったと判定して、ステップS153に移行する。
【0054】
ステップS153では、検出された呼び掛けメッセージの発信ユーザ名と、呼び掛けられたユーザ名を検出して、IPアドレス取得部133に通知する。
IPアドレス取得部133では、チャットサーバ110から送信されてきたユーザ名からIPアドレステーブル132を検索し、該当するクライアント端末200のIPアドレスを取得する(ステップS154)。
IPアドレス取得部133は、この後、取得したクライアント端末200のIPアドレスとこれに対応するユーザ名とをセットにしてVoIP接続要求部134に通知する(ステップS155)。
【0055】
VoIP接続要求部134は、IPアドレス取得部133からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS156)。
VoIP接続要求部134は、さらに、該当するクライアント端末200に対してVoIP接続要求通知を送信する(ステップS157)。
クライアント端末200では、サーバ端末100側からVoIP接続要求通知を受けると、アプリケーションがその旨の表示を行い、VoIP接続に応答するか否かをユーザに選択させる(ステップS161)。ユーザがVoIP接続要求に応答する旨の指示を行った場合には、ステップS162に移行する。
【0056】
ステップS162では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
VoIP接続要求通知を受けたクライアント端末200では、たとえば、図57に示すようなVoIP接続要求ダイアログ520を立ち上げるように構成できる。このVoIP接続要求ダイアログ520では、通知の種別がVoIP会議接続要求である旨を示す通知種別バー521、呼び掛けメッセージの送信元であるユーザがVoIP用会議室を作成した旨の内容(図においては、「田中さん(呼び掛け元)がVoIP会議室"VoIP"を作成しました」の表示内容)を表示する内容表示部522、参加することに同意することを指示する承諾ボタン523、参加することに同意しないことを指示する拒否ボタン524などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン523をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0057】
このような第3実施形態では、呼び掛けメッセージを通知することにより、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第4実施形態〕
本発明の第4実施形態が採用されるシステムの概要を図4に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0058】
図4に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージ中に特定の文字列が出現するか否かを監視しており、特定の文字列が出現した場合、所定条件到達情報をCM130に対して送信する。たとえば、チャットサーバ110は、文字列会話メッセージ中にチャネルに属するユーザ名を検出した場合に、そのユーザに対する呼び掛けがあったと判断し、呼び掛けメッセージの検出通知をCM130に送出する(図4▲1▼)。
【0059】
CM130では、チャットサーバ110から呼び掛けメッセージの検出通知を受けて、MCU120内に対応するVoIP用会議室を作成する(図4▲2▼)。
CM130は、VoIP用会議室を作成するとともに、呼び掛けを行ったクライアント端末と呼び掛けられたクライアント端末に対して、作成したVoIP用会議室を通知する(図4▲3▼)。
サーバ端末100からのVoIP用会議室の通知を受けたクライアント端末200において、そのクライアント端末200がVoIP用会議室への接続を行った場合(図4▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP会議室内の音声会話メッセージとして制御される。
【0060】
この第4実施形態を構成するための制御ブロック図を図22に示す。
この第4実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定の文字列を検出した場合に所定条件到達情報ををCM130に送信する特定文字列監視部112を備えている。
【0061】
CM130は、特定文字列監視部112から送信されてくる所定条件到達情報に応じて、MCU120内にVoIP用会議室を作成するとともに、該当するクライアント端末200に対するVoIP用会議室情報の通知を行うVoIP用会議室通知部135を備えている。この場合、VoIP用会議室通知部135は、特定文字列監視部112からの呼び掛けメッセージ検出通知に基づいて、呼び掛けられたユーザ名に対応するクライアント端末200と、呼び掛けを行ったユーザ名に対応するクライアント端末の両方について、会議室名などのVoIP用会議室情報を送出するように構成できる。
【0062】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への接続を行うVoIP接続部211を備えている。
【0063】
このようにした第4実施形態における動作を図40に基づいて説明する。
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御する(ステップS171)。
特定文字列監視部112は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージに所定の文字列が含まれているか否かを判別する(S172)。特に、チャネルに属するユーザ名を検出した場合には、そのユーザ名に対する呼び掛けメッセージがあったと判定して、ステップS173に移行する。
【0064】
ステップS173では、検出された呼び掛けメッセージの発信ユーザ名と、呼び掛けられたユーザ名を検出して、VoIP用会議室通知部135に通知する。
VoIP用会議室通知部135では、特定文字列監視部112からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS174)。
VoIP用会議室通知部135は、さらに、該当するクライアント端末200に対してVoIP用会議室情報を通知する(ステップS175)。ここでは、クライアント端末200のIPアドレスは必要なく、チャットサーバ110を介してチャネル内における制御情報としてクライアント端末200のチャットアプリ210に会議室名などを含むVoIP用会議室情報を送信する。
【0065】
クライアント端末200では、サーバ端末100側からVoIP用会議室の通知を受けると、チャットアプリ210を介してその旨の表示を行い、VoIP用会議室への接続を行うか否かをユーザに選択させる(ステップS181)。ユーザがVoIP接続を行う旨の指示を行った場合には、ステップS182に移行する。
ステップS182では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
VoIP用会議室の通知を受けたクライアント端末200では、たとえば、図58に示すようなVoIP会議室通知ダイアログ530を立ち上げるように構成できる。このVoIP会議室通知ダイアログ530では、通知の種別がVoIP会議室通知である旨を示す通知種別バー531、呼び掛けメッセージの送信元であるユーザがVoIP用会議室を作成した旨の内容(図においては、「田中さん(呼び掛け元)がVoIP会議室"VoIP"を作成しました」の表示内容)を表示する内容表示部532、参加することに同意することを指示する承諾ボタン533、参加することに同意しないことを指示する拒否ボタン534などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン513をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0066】
このような第4実施形態では、チャネル内の文字列会話メッセージ中に特定の文字列を送信する、特に、チャネルに属するユーザ名を送信することで、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第5実施形態〕
本発明の第5実施形態が採用されるシステムの概要を図5に示す。
【0067】
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
サーバ端末100およびクライアント端末200には、前述の実施形態のように、チャネル内の文字列会話メッセージを監視して、会話頻発度または特定文字列の出現に応じてVoIP用会議室をMCU120内に作成し、該当するクライアント端末200に対してVoIP接続要求またはVoIP用会議室情報の通知を行い、クライアント端末200から自動的にVoIP用会議室に接続する機能が備わっている(図5▲1▼)。
【0068】
さらに、チャットサーバ110は、チャネル内の文字列会話メッセージ中に特定の文字列が出現するか否かを監視しており、特定の文字列が出現した場合、特定文字列出現通知をCM130に対して送信する(図5▲2▼)。
CM130は、チャットサーバ110から通知のあった特定文字列を音声合成により読み上げて、VoIPにより各クライアント端末200に送出する(図5▲3▼)。
この第5実施形態を構成するための制御ブロック図を図23に示す。
この第5実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
【0069】
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定の文字列を検出した場合に所定条件到達情報をCM130に送信する特定文字列監視部112を備えている。
CM130は、特定文字列監視部112から送信されてくる所定条件到達情報に応じて、MCU120内にVoIP用会議室を作成するとともに、該当するクライアント端末200に対するVoIP用会議室情報の通知を行うVoIP用会議室通知部135を備えている。この場合、VoIP用会議室通知部135は、チャットサーバ110からの所定条件到達情報に基づいて作成したVoIP用会議室の情報をクライアント端末200に通知するように構成でき、また、特定文字列監視部112からの呼び掛けメッセージ検出通知に基づいて、呼び掛けられたユーザ名に対応するクライアント端末200と、呼び掛けを行ったユーザ名に対応するクライアント端末の両方について、会議室名などのVoIP用会議室情報を送出するように構成できる。また、VoIP用会議室通知部135は、特定文字列監視部112から送信されてくる特定文字列検出通知を受け、呼出メッセージ通知を送出する。
【0070】
CM130は、VoIP用会議室通知部135から通知される呼出メッセージ通知に基づいてVoIPを通じて呼出を行うVoIP呼出部136を備えている。このVoIP呼出部136は、音声合成部137を備えており、チャットサーバ110の特定文字列監視部112が検出した特定文字列を音声に変換してVoIPに出力する。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0071】
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への自動接続を行うVoIP自動応答部212を備えている。
また、VoIPアプリ220は、サーバ端末100のVoIP呼出部136が出力する音声出力を受けてこれをユーザに通知する。
このようにした第5実施形態における動作を図41に基づいて説明する。
【0072】
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御しており、チャネル内の文字列会話メッセージの頻発度が所定値を超えた場合や所定の文字列を検出した場合にVoIP接続要求またはVoIP用会議室情報通知をクライアント端末200に送出する(ステップS191)。
サーバ端末100からVoIP接続要求またはVoIP用会議室情報通知を受けたクライアント端末200では、VoIP自動応答部212によりVoIP接続/応答処理を実行する(ステップS201)。
【0073】
サーバ端末100のチャットサーバ110において、チャネル内の文字列会話メッセージに特定文字列を検出し場合には、VoIP呼出部136の音声合成部137によりメッセージの音声合成を行う(ステップS192)。この後、VoIP呼出部136は、クライアント端末200に対してVoIPを通じて呼出音声メッセージの通知を行う(ステップS193)。
このようにした第5実施形態では、チャットにより呼びかけを行った際に、文字列による表示を行うだけでなく、VoIP音声によって各ユーザへの呼びかけを行うことが可能であり、クライアント端末200を操作するユーザが認識することを容易にする。たとえば、チャネルに属するユーザ名を文字列会話メッセージにより呼びかけた場合に、これを音声にしてVoIPにより呼びかけることにより、呼びかけられたユーザがこれを容易に認識することが可能となる。
【0074】
〔第6実施形態〕
本発明の第6実施形態が採用されるシステムの概要を図6に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0075】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、CM130がVoIP用会議室内の音声会話メッセージ量を監視している。具体的には、CM130は、各VoIP用会議室内の音声パケット量を監視しており、この音声パケット量が所定値以下になったか否かの検出を行っている(図6▲1▼)。
VoIP用会議室内における音声パケット量が所定量以下になったと判断した場合には、MCU120内の該当するVoIP用会議室を閉鎖する(図6▲2▼)。
【0076】
これと同時に、CM130は、閉鎖したVoIP用会議室に属するクライアント端末200に対してVoIP用会議室を閉鎖した旨の通知(切断通知)を送信する(図6▲3▼)。
この第6実施形態を構成するための制御ブロック図を図24に示す。
この第6実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0077】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0078】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室における通信量を監視して、所定量以下になった場合にそのVoIP用会議室を閉鎖するとともに該当するクライアント端末200に対してVoIP切断通知を行うVoIP会議室通信量監視部138を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0079】
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への自動接続を行うVoIP自動応答部212を備える構成とすることもできる。
このようにした第6実施形態における動作を図42に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS211)。
【0080】
VoIP用会議室内における音声会話メッセージの通信量は、VoIP会議室通信量監視部138によって監視されている。VoIP会議室通信量監視部138は、VoIP用会議室内における音声パケット量が一定値以下であると判断した場合(ステップS212)、MCU120内の該当するVoIP用会議室を閉鎖する(ステップS213)。VoIP会議室通信量監視部138は、これと同時に、クライアント端末100に対してVoIP切断通知を送信する(ステップS214)。
クライアント端末200側では、サーバ端末100からのVoIP切断通知を受けると、VoIPアプリ220が該当するVoIP用会議室が閉鎖された旨の表示を行うなどしてVoIP切断表示を行う(ステップS221)。
【0081】
ここで閉鎖されたVoIP用会議室が、チャットサーバ110が管理するチャネルから派生したものである場合には、該当するクライアント端末200のユーザは元のチャネルを通じて文字列会話メッセージによるチャットコミュニケーションに戻ることも可能であり、そうでない場合には、チャットサーバ110により新たなチャネルを作成させるように構成することも可能である。
このような第6実施形態では、VoIP用会議室内における音声パケット量が減少してきた場合に、このVoIP用会議室を終了することで、サーバ側の負担の少ないチャットコミュニケーションに速やかに移行させることが可能である。
【0082】
〔第7実施形態〕
本発明の第7実施形態が採用されるシステムの概要を図7に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0083】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、クライアント端末200側において自端末からの音声会話メッセージの通信量を監視しており、自端末からの音声パケット量が所定値以下になったか否かの検出を行っている(図7▲1▼)。
クライアント端末200において、自端末からの音声パケット量が所定値以下になったと判断した場合には、そのVoIP用会議室に対するVoIP接続の切断を通知する(図7▲2▼)。
【0084】
サーバ端末100では、MCU120内のVoIP用会議室を通じてVoIP電話コミュニケーションを提供し、VoIP用会議室に属するクライアント端末200がすべてVoIP接続を切断した場合に、このVoIP用会議室を閉鎖する(図7▲3▼)。
この第7実施形態を構成するための制御ブロック図を図25に示す。
この第7実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0085】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0086】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
VoIPアプリ220は、サーバ端末100内に設定されるVoIP用会議室を通じて他のクライアント端末200との間でVoIP電話コミュニケーションを実行するものであり、この機能の他に自端末から送信される音声会話メッセージの通信量を監視するVoIP通信量監視部221を備えている。
【0087】
VoIP通信量監視部221は、自端末から送信される音声パケット量を監視し、所定値以下であると判断した場合にVoIP接続を切断する旨の通知をサーバ100側に送信して、VoIP接続を終了させる。
このようにした第7実施形態における動作を図43に基づいて説明する。
クライアント端末200では、クライアント端末200からの要求に応じてサーバ端末100内に作成されたVoIP用会議室またはサーバ端末100がチャットのチャネルから派生して作成したVoIP用会議室に接続を行って、VoIP音声パケットの送受信を行う(ステップS231)。
【0088】
ここで、VoIP通信量監視部221は、自端末から送信される音声パケット量を監視し、所定値以下であるか否かを判別する(ステップS232)。VoIP通信量監視部221は、自端末からの音声パケット量が所定値以下であると判断した場合に、サーバ端末100側にVoIP切断通知を行い(ステップS233)、属しているVoIP用会議室へのVoIP接続を切断する。
VoIPアプリ220は、この後、ユーザに対してVoIP接続を終了させた旨の表示を行う(ステップS234)。
【0089】
サーバ端末100では、MCU120に作成されたVoIP用会議室に属するクライアント端末200からの音声会話メッセージを制御して各クライアント端末200によるVoIP電話コミュニケーションを提供する。
クライアント端末200からのVoIP切断通知を受けると、CM130は、VoIP会議室管理テーブルの該当するVoIP用会議室からそのクライアント端末200を削除し、そのVoIP用会議室に接続しているクライアント端末200が存在するか否かを判別する(ステップS241)。
【0090】
CM130は、接続しているクライアント端末200がなくなったVoIP用会議室を見つけるとそのVoIP用会議室を閉鎖する(ステップS242)。
閉鎖されたVoIP用会議室がチャットサーバ110により管理するチャネルから派生したものである場合、クライアント端末200側では、チャットアプリ210により派生元のチャネルを通じてチャットコミュニケーションを再開することも可能である。また、CM130が、閉鎖されたVoIP用会議室からチャットサーバ110内に新たなチャネルを作成し、このチャネル情報またはチャット接続要求を該当するクライアント端末200に送信するように構成することも可能である。
【0091】
このような第7実施形態によれば、自端末からの音声パケット量が少ない場合に、クライアント端末200側からVoIP接続を終了させてチャットによる会話に速やかに移行するように構成できる。
〔第8実施形態〕
本発明の第8実施形態が採用されるシステムの概要を図8に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0092】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、CM130はVoIP用会議室が作成されてからの経過時間を監視しており、この経過時間が所定時間を超えたか否かの検出を行っている(図8▲1▼)。
VoIP用会議室の設定から所定時間以上経過したと判断した場合には、MCU120内の該当するVoIP用会議室を閉鎖する(図8▲2▼)。
これと同時に、CM130は、閉鎖したVoIP用会議室に属するクライアント端末200に対してVoIP用会議室を閉鎖した旨の通知(切断通知)を送信する(図8▲3▼)。
【0093】
この第8実施形態を構成するための制御ブロック図を図26に示す。
この第8実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0094】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室の作成時からの経過時間を監視して、所定時間以上経過したと判断した場合にそのVoIP用会議室を閉鎖するとともに該当するクライアント端末200に対してVoIP切断通知を行うVoIP会議室開設時間監視部139を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0095】
このようにした第8実施形態における動作を図44に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS251)。
VoIP用会議室が作成されてからの経過時間は、VoIP会議室開設時間監視部139によって監視されている。VoIP会議室開設時間監視部139は、VoIP用会議室が開設かれてからの経過時間が所定時間を超えたと判断した場合(ステップS252)、MCU120内の該当するVoIP用会議室を閉鎖する(ステップS253)。VoIP会議室開設時間監視部139は、これと同時に、クライアント端末100に対してVoIP切断通知を送信する(ステップS254)。
【0096】
クライアント端末200側では、サーバ端末100からのVoIP切断通知を受けると、VoIPアプリ220が該当するVoIP用会議室が閉鎖された旨の表示を行うなどしてVoIP切断表示を行う(ステップS261)。
ここで閉鎖されたVoIP用会議室が、チャットサーバ110が管理するチャネルから派生したものである場合には、該当するクライアント端末200のユーザは元のチャネルを通じて文字列会話メッセージによるチャットコミュニケーションに戻ることも可能であり、そうでない場合には、チャットサーバ110により新たなチャネルを作成させるように構成することも可能である。
【0097】
このような第8実施形態では、VoIP用会議室を一定時間後に閉鎖して、チャットコミュニケーションに移行することを可能とし、サーバ端末100側の負担を軽くすることが可能となる。
〔第9実施形態〕
本発明の第9実施形態が採用されるシステムの概要を図9に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0098】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、クライアント端末200側において自端末がVoIP用会議室に参加してからの経過時間を監視しており、この経過時間が所定時間を超えたか否かの検出を行っている(図9▲1▼)。
クライアント端末200において、自端末がVoIP用会議室に参加してからの経過時間が所定時間を超えたと判断した場合には、そのVoIP用会議室に対するVoIP接続の切断を通知する(図9▲2▼)。
【0099】
サーバ端末100では、MCU120内のVoIP用会議室を通じてVoIP電話コミュニケーションを提供し、VoIP用会議室に属するクライアント端末200がすべてVoIP接続を切断した場合に、このVoIP用会議室を閉鎖する(図9▲3▼)。
この第9実施形態を構成するための制御ブロック図を図27に示す。
この第9実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0100】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0101】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
VoIPアプリ220は、サーバ端末100内に設定されるVoIP用会議室を通じて他のクライアント端末200との間でVoIP電話コミュニケーションを実行するものであり、この機能の他に自端末がVoIP用会議室に参加してからの経過時間を監視するVoIP会議室参加時間監視部222を備えている。
【0102】
VoIP会議室参加時間監視部222は、自端末がVoIP用会議室に参加してかの経過時間を監視し、所定時間を超えたと判断した場合にVoIP接続を切断する旨の通知をサーバ100側に送信して、VoIP接続を終了させる。
このようにした第9実施形態における動作を図45に基づいて説明する。
クライアント端末200では、クライアント端末200からの要求に応じてサーバ端末100内に作成されたVoIP用会議室またはサーバ端末100がチャットのチャネルから派生して作成したVoIP用会議室に接続を行って、VoIP音声パケットの送受信を行う(ステップS271)。
【0103】
ここで、VoIP会議室参加時間監視部222は、自端末がVoIP用会議室に参加してからの経過時間を監視し、所定時間を超えたか否かを判別する(ステップS272)。VoIP会議室参加時間監視部222は、自端末がVoIP用会議室に参加してからの経過時間が所定時間を超えたと判断した場合に、サーバ端末100側にVoIP切断通知を行い(ステップS273)、属しているVoIP用会議室へのVoIP接続を切断する。
VoIPアプリ220は、この後、ユーザに対してVoIP接続を終了させた旨の表示を行う(ステップS274)。
【0104】
サーバ端末100では、MCU120に作成されたVoIP用会議室に属するクライアント端末200からの音声会話メッセージを制御して各クライアント端末200によるVoIP電話コミュニケーションを提供する。
クライアント端末200からのVoIP切断通知を受けると、CM130は、VoIP会議室管理テーブルの該当するVoIP用会議室からそのクライアント端末200を削除し、そのVoIP用会議室に接続しているクライアント端末200が存在するか否かを判別する(ステップS281)。
【0105】
CM130は、接続しているクライアント端末200がなくなったVoIP用会議室を見つけるとそのVoIP用会議室を閉鎖する(ステップS282)。
閉鎖されたVoIP用会議室がチャットサーバ110により管理するチャネルから派生したものである場合、クライアント端末200側では、チャットアプリ210により派生元のチャネルを通じてチャットコミュニケーションを再開することも可能である。また、CM130が、閉鎖されたVoIP用会議室からチャットサーバ110内に新たなチャネルを作成し、このチャネル情報またはチャット接続要求を該当するクライアント端末200に送信するように構成することも可能である。
【0106】
このような第9実施形態によれば、自端末がVoIP用会議室に参加してから一定時間後にVoIP接続を終了させてチャットによる会話に速やかに移行するように構成できる。
〔第10実施形態〕
本発明の第10実施形態が採用されるシステムの概要を図10に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0107】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、CM130はVoIP用会議室内の音声会話メッセージを音声認識して所定の文字列が出現したか否かを判別する。たとえば、音声会話メッセージを音声認識してその中に「終了」という文字列が含まれている場合に、所定の文字列が出現したと判断する(図10▲1▼)。
VoIP用会議室内の音声会話メッセージを音声認識した結果、所定の文字列を検出した場合には、CM130はMCU120内の該当するVoIP用会議室を閉鎖する(図10▲2▼)。
【0108】
これと同時に、CM130は、閉鎖したVoIP用会議室に属するクライアント端末200に対してVoIP用会議室を閉鎖した旨の通知(切断通知)を送信する(図10▲3▼)。
この第10実施形態を構成するための制御ブロック図を図28に示す。
この第10実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0109】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0110】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列の中に所定の文字列が存在するか否かを判断するVoIP終了キーワード抽出部141とを備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0111】
このようにした第10実施形態における動作を図46に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS291)。
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS292)、VoIP終了キーワード抽出部141に送信される。
【0112】
VoIP終了キーワード抽出部141では、変換された文字列中に所定の文字列(終了キーワード)が含まれているか否かを判別し(ステップS293)、所定の文字列を検出した場合にはMCU120内の該当するVoIP用会議室を閉鎖する(ステップS294)。VoIP終了キーワード抽出部141は、これと同時に、クライアント端末100に対してVoIP切断通知を送信する(ステップS295)。
クライアント端末200側では、サーバ端末100からのVoIP切断通知を受けると、VoIPアプリ220が該当するVoIP用会議室が閉鎖された旨の表示を行うなどしてVoIP切断表示を行う(ステップS301)。
【0113】
ここで閉鎖されたVoIP用会議室が、チャットサーバ110が管理するチャネルから派生したものである場合には、該当するクライアント端末200のユーザは元のチャネルを通じて文字列会話メッセージによるチャットコミュニケーションに戻ることも可能であり、そうでない場合には、チャットサーバ110により新たなチャネルを作成させるように構成することも可能である。
このような第10実施形態では、VoIP用会議室で「終了しましょう」などの終了キーワードとなる発言をすることで、VoIP電話コミュニケーションを終了させ、チャットコミュニケーションへの移行を速やかに行うことを可能にする。
【0114】
〔第11実施形態〕
本発明の第11実施形態が採用されるシステムの概要を図11に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0115】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し(図11▲1▼)、その認識結果である文字列をチャットサーバ110に送出する(図11▲2▼)。
チャットサーバ110は、CM130から送信されてくる文字列情報を文字列会話メッセージとしてクライアント端末200に送信する(図11▲3▼)。チャットサーバ110が管理するチャネルから派生したVoIP用会議室内の音声会話メッセージを音声認識する場合には、派生元のチャネルに属するクライアント端末200にのみ文字列情報を送信するように構成することが可能であり、また他の特定のチャネルに文字列情報を送信するように構成することも可能である。
【0116】
この第11実施形態を構成するための制御ブロック図を図29に示す。
この第11実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0117】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142とを備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0118】
このようにした第11実施形態における動作を図47に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS311)。
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS312)、VoIPワード抽出部142に送信される。
【0119】
音声会話メッセージから変換された文字列は、VoIPワード抽出部142からチャットサーバ110に送信され、チャットサーバ110からチャネル内の文字列会話メッセージとしてクライアント端末200に送信される(ステップS313)。
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくる音声認識された文字列をチャットアプリ210を通じて表示する(ステップS321)。
【0120】
このような第11実施形態では、VoIP用会議室に参加していないクライアント端末でもVoIP用会議室内での会話内容を知ることが可能となる。
〔第12実施形態〕
本発明の第12実施形態が採用されるシステムの概要を図12に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0121】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し(図12▲1▼)、その認識結果である文字列とその文字列から抽出したキーワードをチャットサーバ110に送出する(図12▲2▼)。
チャットサーバ110は、CM130から送信されてくる音声認識結果である文字列情報と抽出キーワードを文字列会話メッセージとしてクライアント端末200に送信する(図12▲3▼)。
CM130は、VoIP用会議室の派生元チャネルとは異なるVoIPワード専用チャネルをチャットサーバ110内に作成し、音声認識結果である文字列情報をこのVoIPワード専用チャネルを介して送信させ、抽出キーワードをVoIP用会議室の派生元チャネルを介して送信させるように構成できる。
【0122】
この第12実施形態を構成するための制御ブロック図を図30に示す。
この第12実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0123】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142と、音声認識手段140により変換された文字列からキーワードを抽出するVoIPキーワード抽出部143と、音声認識手段140により変換された文字列を文字列会話メッセージとして送信するための専用チャネルをチャットサーバ110内に作成するVoIPワード専用チャネル作成部144とを備えている。
【0124】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第12実施形態における動作を図48に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS331)。このとき、VoIPワード専用チャネル作成部144により、VoIPワード専用チャネルをチャットサーバ110内に作成する(フローS)。
【0125】
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS332)、VoIPワード抽出部142およびVoIPキーワード抽出部143に送信される。
音声会話メッセージから変換された文字列は、VoIPワード抽出部142からVoIPワードとしてチャットサーバ110に送信され、チャットサーバ110からVoIPワード専用チャネル内の文字列会話メッセージとしてクライアント端末200に送信される(ステップS333)。
【0126】
また、VoIPキーワード抽出部143によって抽出されたキーワードは、VoIPキーワードとしてチャットサーバ110に送信され、チャットサーバ110から派生元チャネル内の文字列会話メッセージとしてクライアント端末200に送信される(ステップS334)。
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPキーワードを派生元チャネルの文字列会話メッセージとして表示し、サーバ端末100から送信されてくるVoIPワードをVoIPワード専用チャネル内の文字列会話メッセージとして表示する(ステップS341)。
【0127】
VoIPワード専用チャネル作成部144がVoIPワード専用チャネルを作成した際に、派生元チャネルに属するクライアント端末200に対して、このVoIPワード専用チャネルのチャネル名情報を通知するように構成することができ、また派生元チャネル内においてVoIPワード専用チャネルのチャネル名情報を流すことも可能である。
クライアント端末200側では、VoIP用会議室に参加していない場合であっても、音声会話メッセージから抽出されたキーワードを派生元チャネル内で文字列として認識することが可能であり、さらに詳細を知りたい場合にはVoIPワード専用チャネルに接続することにより音声認識された結果の文字列を参照することが可能となる。
【0128】
〔第13実施形態〕
本発明の第13実施形態が採用されるシステムの概要を図13に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0129】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し(図13▲1▼)、その認識結果である文字列を翻訳し(図13▲2▼)、さらに翻訳結果の文字列とその文字列から抽出したキーワードをチャットサーバ110に送出する(図13▲3▼)。
チャットサーバ110は、CM130から送信されてくる翻訳結果である文字列情報と抽出キーワードを文字列会話メッセージとしてクライアント端末200に送信する(図13▲4▼)。
【0130】
CM130は、VoIP用会議室の派生元チャネルとは異なるVoIPワード専用チャネルをチャットサーバ110内に作成し、翻訳結果である文字列情報をこのVoIPワード専用チャネルを介して送信させ、抽出キーワードをVoIP用会議室の派生元チャネルを介して送信させるように構成できる。
この第13実施形態を構成するための制御ブロック図を図31に示す。
この第13実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
【0131】
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0132】
CM130は、チャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142と、音声認識手段140により変換された文字列からキーワードするVoIPキーワード抽出部143と、VoIPワード抽出部142から送信されるVoIPワードを文字列会話メッセージとして送信するための専用チャネルをチャットサーバ110内に作成するVoIPワード専用チャネル作成部144と、VoIPワード抽出部142で抽出されたVoIPワードおよびVoIPキーワード抽出部143で抽出されたVoIPキーワードを翻訳する翻訳部145とを備えている。
【0133】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第13実施形態における動作を図49に基づいて説明する。
サーバ端末100側では、チャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS351)。このとき、VoIPワード専用チャネル作成部144により、VoIPワード専用チャネルをチャットサーバ110内に作成する(フローS)。
【0134】
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS352)、VoIPワード抽出部142およびVoIPキーワード抽出部143に送信される。
VoIPワード抽出部142は、音声会話メッセージから変換された文字列を翻訳部145により翻訳させ、VoIPワード専用チャネル内の文字列会話メッセージとしてチャットサーバ110に送信させる(ステップS353)。
また、VoIPキーワード抽出部143は、音声会話メッセージから変換された文字列からキーワードを抽出し、これを翻訳部145により翻訳させ、派生元チャネル内の文字列会話メッセージとしてチャットサーバ110に送信させる(ステップS354)。
【0135】
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPキーワードを派生元チャネルの文字列会話メッセージとして表示し、サーバ端末100から送信されてくるVoIPワードをVoIPワード専用チャネル内の文字列会話メッセージとして表示する(ステップS361)。
VoIPワード専用チャネル作成部144がVoIPワード専用チャネルを作成した際に、派生元チャネルに属するクライアント端末200に対して、このVoIPワード専用チャネルのチャネル名情報を通知するように構成することができ、また派生元チャネル内においてVoIPワード専用チャネルのチャネル名情報を流すことも可能である。
【0136】
このようにした第13実施形態では、派生元チャネルに文字列として表示されるVoIPキーワードおよびVoIPワード専用チャネルに文字列として表示されるVoIPワードを、VoIP用会議室内の音声パケットと異なる言語で表示することができ、会話内容の把握を容易にすることができる。
〔第14実施形態〕
本発明の第14実施形態が採用されるシステムの概要を図14に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0137】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識するとともに、音声会話メッセージの内容を保存する(図14▲1▼)。
また、CM130は、音声認識の結果である文字列をチャットサーバ110に送出する(図14▲2▼)。
チャットサーバ110は、CM130から送信されてくる音声認識の結果である文字列情報を文字列会話メッセージとしてクライアント端末200に送信する(図14▲3▼)とともに、この文字列情報をチャットログとして一時的に格納する。
【0138】
MCU120内のVoIP用会議室が終了した際に、CM130は保存された音声会話メッセージの保存ディレクトリ名をチャットサーバ110に通知する(図14▲4▼)。
チャットサーバ110では、送信されてきた保存ディレクトリ名と、チャットログ内のVoIPワードとの関連付けを行って、チャットログを音声会話メッセージの保存ディレクトリとのリンク情報とともに格納する(図14▲5▼)。
この第14実施形態を構成するための制御ブロック図を図32に示す。
【0139】
この第14実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0140】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142と、VoIP用会議室内の音声会話メッセージを保存するとともに保存ディレクトリ名をチャットサーバ110に送信するVoIPログ部146とを備えている。
【0141】
チャットサーバ110は、CM130のVoIPワード抽出部142から送信されてくるVoIPワードを該当するチャネル内の文字列会話メッセージとしてクライアント端末200に通知するとともに、このVoIPワードをチャットログとして保存し、かつVoIPログ部146から通知される保存ディレクトリ名と対応するVoIPワードとのリンク情報を保存するVoIPリンク部113を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0142】
このようにした第14実施形態における動作を図50に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS371)。
VoIP用会議室内での音声会話メッセージは、VoIPログ部146に送信されるとともに、音声認識手段140によって文字列に変換され(ステップS372)、文字列に変換されたVoIPワードとしてVoIPワード抽出部142に送信される。
【0143】
VoIPワード抽出部142は、音声会話メッセージから文字列に変換されたVoIPワードをチャットサーバ110が管理するチャネル内の文字列会話メッセージとしてチャットサーバ110に送信させる(ステップS373)。ここで、チャットサーバ110が管理するチャネルから派生したVoIP用会議室内の音声会話メッセージに基づくVoIPワードである場合には、チャットサーバ110は派生元のチャネル内の文字列会話メッセージとして送信するように構成できる。また、クライアント端末200の要求に応じて作成されたVoIP用会議室内での音声会話メッセージに基づくVoIPワードである場合には、CM130がチャットサーバ110内に専用チャネルを作成し、この専用チャネル内の文字列会話メッセージとして送信するように構成することも可能である。
【0144】
また、VoIPログ部146は、VoIP用会議室内の音声会話メッセージを所定の記録媒体に音声会話ログとして保存する(ステップS374)。
MCU120内のVoIP用会議室が閉鎖した際に(ステップS375)、VoIPログ部146は保存した音声会話ログの保存先である保存ディレクトリ名を取得し、これをチャットサーバ110に通知する(ステップS376)。
チャットサーバ110のVoIPリンク部113では、VoIPワード抽出部142から送出されるVoIPワードをチャットログと逐次保存しており、VoIP用会議室が閉鎖された際にVoIPログ部146から送信される保存ディレクトリ名とチャットログ内の対応する文字列との関連付けを行ってリンクをを張り付ける(ステップS377)。
【0145】
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPワードを派生元チャネルまたは専用チャネルの文字列会話メッセージとして表示し、VoIP用会議室内の音声会話を文字列で認識できるようにする(ステップS381)。
このようにした第14実施形態では、チャットログを後日検証する際に、対応するVoIPログを参照することが可能となり、文字列だけでは不明な細かい点についても確認が可能となる。
【0146】
〔第15実施形態〕
本発明の第15実施形態が採用されるシステムの概要を図15に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0147】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識する(図15▲1▼)。また、CM130は、音声認識の結果である文字列をチャットサーバ110に送出する(図15▲2▼)。
チャットサーバ110は、CM130から送信されてくる音声認識の結果である文字列情報を文字列会話メッセージとしてクライアント端末200に送信する(図15▲3▼)。
クライアント端末200では、サーバ端末100から受信した文字列情報をチャネル内の文字列会話メッセージとして表示し、その文字列情報に対するユーザからの指示を受け付ける(図15▲4▼)。
【0148】
文字列情報がクリックされると、サーバ端末100に対してVoIP接続を行い、その文字列情報に対応するVoIP用会議室に参加する(図15▲5▼)。
この第15実施形態を構成するための制御ブロック図を図33に示す。
この第15実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0149】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0150】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142とを備えている。
チャットサーバ110は、CM130のVoIPワード抽出部142から送信されてくるVoIPワードを該当するチャネル内の文字列会話メッセージとしてクライアント端末200に通知する。
【0151】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
チャットアプリ210は、チャネル内の文字列会話メッセージが特定のVoIP用会議室における音声会話メッセージに基づくVoIPワードであることを認識できるように表示し、このVoIPワードがユーザによりクリックされると、VoIPアプリに対して該当するVoIP用会議室に接続するように要求を出すVoIP接続部213を備えている。
【0152】
このようにした第15実施形態における動作を図51に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS391)。
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS392)、文字列に変換されたVoIPワードとしてチャットサーバ110に送信される。
【0153】
チャットサーバ110は、文字列に変換されたVoIPワードを所定のチャネル内の文字列会話メッセージとして送出するとともに、該当するVoIP用会議室情報およびそのVoIP用会議室がチャットチャネルから派生したものである場合にはその派生元チャネル情報などをクライアント端末200に送信する(ステップS393)。
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPワードを派生元チャネルまたは専用チャネルの文字列会話メッセージとして表示する(ステップS401)。VoIPワード接続部213は、表示されるVoIPワードとサーバ端末100から送信されるVoIP用会議室情報とを関連づけ(ステップS402)、ユーザによりVoIPワードがクリックされた場合にそのVoIP用会議室への接続を行うように構成する。
【0154】
このようにした第15実施形態では、クライアント200のチャットアプリ210上にVoIP用会議室内の音声会話を文字列で表示しており、その内容を容易に把握できるとともに、表示されているVoIPワードをクリックするだけで容易にVoIP用会議室への参加が可能となる。
〔第16実施形態〕
本発明の第16実施形態が採用されるシステムの概要を図16に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0155】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し、個人名および呼出キーワードがその中に含まれているか否かの検出を行う(図16▲1▼)。
CM130は、個人名および呼出キーワードを検出した場合には、該当するクライアント端末200のIPアドレスを取得してそのクライアント端末200に対してVoIP接続要求を通知する(図16▲2▼)。
サーバ端末100からのVoIP接続要求を受けたクライアント端末200において、そのクライアント端末200を使用しているユーザが応答した場合(図16▲3▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP用会議室内の音声会話メッセージとして制御される。
【0156】
この第16実施形態を構成するための制御ブロック図を図34に示す。
この第16実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0157】
CM130は、チャットサーバ110の管理するチャネルに属するクライアント端末200からのIPアドレス登録を受け付けてIPアドレステーブル132に格納するクライアントIPアドレス登録部131と、クライアントIPアドレス登録部131からクライアント端末200のIPアドレスを取得するIPアドレス取得部133と、IPアドレス取得部133で取得したIPアドレスのクライアント端末200に対してVoIP接続要求を送信するVoIP接続要求部134と、MCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列中に個人名および呼出キーワードを検出するVoIP個人呼出抽出部147とを備えている。
【0158】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第16実施形態における動作を図52に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS411)。
【0159】
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS412)、変換された文字列情報はVoIP個人呼出抽出部147に送信される。
VoIP個人呼出抽出部147では、変換された文字列情報中に個人名および呼出キーワードがあるか否かを判別し(ステップS413)、個人名および呼出キーワードが存在している場合には該当する個人名が使用しているユーザ名を取得しこれをIPアドレス取得部133に通知する(ステップS415)。
【0160】
IPアドレス取得部133では、クライアントIPアドレス登録部131のIPアドレステーブル132を参照し、ユーザ名に該当するクライアント端末200のIPアドレスを取得する(ステップS415)。
IPアドレス取得部133は、クライアントIPアドレス登録部131から取得したIPアドレスと、ユーザ名とをセットにしてこれをVoIP接続要求部134に通知する(ステップS416)。
VoIP接続要求部134は、通知されたIPアドレスおよびユーザ名に基づいて、該当するクライアント端末200に対してVoIP接続要求を通知し、呼出のあったVoIP用会議室への接続要求を行う(ステップS417)。
【0161】
クライアント端末200では、サーバ端末100側からVoIP接続要求通知を受けると、アプリケーションがその旨の表示を行い、VoIP接続に応答するか否かをユーザに選択させる(ステップS421)。ユーザがVoIP接続要求に応答する旨の指示を行った場合には、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する(ステップS422)。
VoIP接続要求通知を受けたクライアント端末200では、たとえば、図59に示すようなVoIP会議接続要求ダイアログ540を立ち上げるように構成できる。このVoIP会議接続要求ダイアログ540では、通知の種別がVoIP会議接続要求である旨を示す通知種別バー541、呼出があったVoIP用会議室名の表示を行う内容表示部542、参加することに同意することを指示する承諾ボタン543、参加することに同意しないことを指示する拒否ボタン544などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン543をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0162】
このような第16実施形態では、VoIP用会議室に参加してほしいユーザ名を会話の中で呼ぶことで自動的に該当のユーザに連絡され、電話番号をダイヤルするなどの手間を省くことができる。
〔第17実施形態〕
本発明の第17実施形態が採用されるシステムの概要を図17に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0163】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し、個人名および呼出キーワードがその中に含まれているか否かの検出を行う(図17▲1▼)。
CM130は、個人名および呼出キーワードを検出した場合には、該当するユーザ名のクライアント端末200に対して、そのVoIP用会議室情報を通知する(図17▲2▼)。
サーバ端末100からのVoIP用会議室情報を受けたクライアント端末200において、そのクライアント端末200がVoIP用会議室への接続を行った場合(図17▲3▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP会議室内の音声会話メッセージとして制御される。
【0164】
この第17実施形態を構成するための制御ブロック図を図35に示す。
この第17実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0165】
CM130は、MCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列中に個人名および呼出キーワードを検出するVoIP個人呼出抽出部147と、VoIP個人呼出抽出部147からの情報に基づいて該当するクライアント端末200に対して呼出のあったVoIP用会議室に関する情報をチャットサーバ110を介して送信するVoIP用会議室通知部135とを備えている。
【0166】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への接続を行うVoIP接続部211を備えている。
【0167】
このようにした第17実施形態における動作を図53に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS431)。
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS432)、変換された文字列情報はVoIP個人呼出抽出部147に送信される。
【0168】
VoIP個人呼出抽出部147では、変換された文字列情報中に個人名および呼出キーワードがあるか否かを判別し(ステップS433)、個人名および呼出キーワードが存在している場合には該当する個人名に対応するユーザ名を取得しこれをVoIP用会議室通知部135に通知する(ステップS434)。
VoIP用会議室通知部135では、通知されたユーザ名に基づいて該当するクライアント端末200に対して、呼出のあったVoIP用会議室情報を通知する(ステップS435)。
【0169】
クライアント端末200では、サーバ端末100側からVoIP用会議室の通知を受けると、チャットアプリ210を介してその旨の表示を行い、VoIP用会議室への接続を行うか否かをユーザに選択させる(ステップS441)。ユーザがVoIP接続を行う旨の指示を行った場合には、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する(ステップS442)。
VoIP用会議室の通知を受けたクライアント端末200では、たとえば、図60に示すようなVoIP会議室通知ダイアログ550を立ち上げるように構成できる。このVoIP会議室通知ダイアログ550では、通知の種別がVoIP会議室通知である旨を示す通知種別バー551、「VoIP会議室"VoIP"で呼ばれています」の内容表示を行う内容表示部552、参加することに同意することを指示する承諾ボタン553、参加することに同意しないことを指示する拒否ボタン554などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン553をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0170】
このような第17実施形態では、VoIP用会議室に参加してほしいユーザ名を会話の中で呼ぶことで自動的に該当のユーザに連絡され、電話番号をダイヤルするなどの手間を省くことができる。
〔第18実施形態〕
本発明の第18実施形態が採用されるシステムの概要を図18に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0171】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し、所定の文字列がその中に含まれているか否かの検出を行う(図18▲1▼)。たとえば、CM130がVoIP用会議室内の音声会話メッセージ中に「チャット」という言葉を検出した場合には、チャットサーバ110に対してそのVoIP用会議室に対応するチャネルを開設するように要求する(図18▲2▼)。
チャットサーバ110は、VoIP用会議室に属するクライアント端末200に対して、CM130からの要求に応じて開設したチャネルに招待するためのインバイト通知を行う(図18▲3▼)。
【0172】
この第18実施形態を構成するための制御ブロック図を図36に示す。
この第18実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
CM130は、MCU120内のVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列中に所定の文字列を検出した場合にチャットサーバ110に対してチャネル開設要求を通知するチャット移行キーワード抽出部148とを備えている。
【0173】
チャットサーバ110は、チャット移行キーワード抽出部148から送信されるチャネル開設要求に基づいて、そのVoIP用会議室に対応するチャネルを作成して対応するクライアント端末にインバイト通知を行うチャネル作成部114を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0174】
このようにした第18実施形態における動作を図54に基づいて説明する。
サーバ端末100側では、MCU120内のVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS451)。
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS452)、変換された文字列情報はチャット移行キーワード抽出部148に送信される。
チャット移行キーワード抽出部148では、変換された文字列情報中にチャット移行に対応するキーワードがあるか否かを判別し(ステップS453)、チャット移行キーワードが存在している場合にはチャットサーバ110に対してチャネル開設要求を通知する(ステップS454)。
【0175】
チャットサーバ110のチャネル作成部114では、チャット移行キーワード抽出部148から通知されたVoIP用会議室に対応するチャネルを作成し(ステップS455)、そのVoIP用会議室に参加しているクライアント端末200に対して、開設したチャネルへのインバイト通知を行う(ステップS456)。
クライアント端末200では、サーバ端末100からのインバイト通知に応じて、チャットアプリ210により該当するチャネル名などの情報を表示して招待されている旨のインバイト表示を行う(ステップS461)。ユーザがこのインバイト通知に応答してチャネルに接続した場合には、チャットアプリ210を通じて文字列会話メッセージによるコミュニケーションを開始することが可能となる。
【0176】
この第18実施形態においては、VoIP用会議室内における特定の発言(「チャットに移行しましょう」などの発言)をするだけで、VoIP用会議室からチャットに移行することができ、ユーザがチャネルを開設する手間を省き、ユーザ間のネゴシエーションの手間を省くことができる。
〔他の実施形態〕
前述した各実施形態の機能のうち、2以上の機能を含む構成とすることも可能であり、その組み合わせも自由に構成することができる。
<付記>
(付記1)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
を備えるマルチチャネル会話サーバ。
【0177】
(付記2)
前記会話監視手段は、チャネル内における文字列会話メッセージの出現率が所定時間内において所定値を超えた場合に所定条件になったと判断する、付記1に記載のマルチチャネル会話サーバ。
(付記3)
前記会話監視手段は、チャネル内における文字列会話メッセージ中に特定の文字列が出現した場合に所定条件になったと判断する、付記1に記載のマルチチャネル会話サーバ。
【0178】
(付記4)
前記会話監視手段により検出された文字列会話メッセージ中の特定の文字列を音声データに変換する音声合成手段と、
前記音声合成手段により変換された音声データを対応するチャネルに属するクライアントに通知するVoIP呼出手段と、
をさらに備える、付記3に記載のマルチチャネル会話サーバ。
(付記5)
前記VoIP通知手段は、対応するチャネルのVoIP用会議室をVoIPサーバに設定し、前記チャネルに属するクライアントに対してVoIP接続要求通知を送信する、付記1〜4のいずれかに記載のマルチチャネル会話サーバ。
【0179】
(付記6)
前記VoIPサーバが管理するVoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力するVoIP音声監視手段と、前記VoIP音声監視手段からの所定条件到達情報に基づいて前記VoIPサーバが管理するVoIP用会議室を終了させるVoIP終了手段と、
をさらに備える付記1〜5のいずれかに記載のマルチチャネル会話サーバ。
(付記7)
前記VoIP音声監視手段は、前記VoIP用会議室内における音声パケット量が所定値以下になった場合に所定条件になったと判断する、付記6に記載のマルチチャネル会話サーバ。
【0180】
(付記8)
前記VoIP音声監視手段は、前記VoIP用会議室内における音声会話メッセージを音声認識し特定のキーワードを抽出した場合に所定条件になったと判断する、付記6に記載のマルチチャネル会話サーバ。
(付記9)
前記VoIP音声監視手段は、前記VoIP用会議室が設定されてからの経過時間が所定値を超えた場合に所定条件になったと判断する、付記6に記載のマルチチャネル会話サーバ。
【0181】
(付記10)
前記VoIP終了手段は、前記VoIP用会議室に属するクライアントに対して前記チャットサーバが管理するチャネルに移行することを促すチャット移行通知を送信する、付記6〜9のいずれかに記載のマルチチャネル会話サーバ。
(付記11)
前記VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報を前記チャットサーバが管理するチャネル内の文字列会話メッセージとして前記チャネルに属するクライアントに送信する変換文字列通知手段と、
をさらに備える、付記1〜10のいずれかに記載のマルチチャネル会話サーバ。
【0182】
(付記12)
前記変換文字列通知手段が送信する文字列情報を含めて前記チャネル内の文字列会話メッセージをチャットログとして管理するチャットログ管理手段と、
前記VoIPサーバが管理するVoIP用会議室内における音声会話メッセージをVoIPログとして管理するVoIPログ管理手段と、
前記チャットログ管理手段が管理するチャットログのうち前記変換文字列通知手段により送信された文字列情報を、前記VoIPログ管理手段が管理するVoIPログ内の対応箇所とリンクさせるVoIPリンク手段と、
をさらに備える、付記11に記載のマルチチャネル会話サーバ。
【0183】
(付記13)
前記VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報中から前記VoIP用会議室内における会話の特徴となる文字列を抽出するキーワード抽出手段と、
文字列による会話メッセージを制御することが可能なVoIP専用チャネルを設定し、前記音声認識手段により変換された文字列情報を前記VoIP専用チャネルを介して各クライアントに送信するVoIPワード送信手段と、
前記キーワード抽出手段により抽出された文字列を前記チャットサーバが管理するチャネル内の文字列会話メッセージとして前記チャネルに属するクライアントに送信するキーワード通知手段と、
をさらに備える、付記1〜10のいずれかに記載のマルチチャネル会話サーバ。
【0184】
(付記14)
前記音声認識手段により変換された文字列情報を他の言語に翻訳する翻訳手段をさらに備える、付記11〜13のいずれかに記載のマルチチャネル会話サーバ。
(付記15)
前記VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報中から前記VoIP用会議室に未接続の個人を特定する文字列を検出した場合、特定された個人を呼び出すためのIPアドレスを取得しVoIP接続を促すためのVoIP移行通知を前記IPアドレスに送信する個人呼出手段と、
をさらに備える、付記1に記載のマルチチャネル会話サーバ。
【0185】
(付記16)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP会議室上での音声による同時コミュニケーションを行わせるVoIPサーバと、
前記VoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する音声監視手段と、
前記音声監視手段から出力される所定条件到達情報に基づいて対応するVoIP会議室に属するクライアントに対してチャット接続を促すためのチャット移行通知を送信するチャット通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるものであって、前記チャット通知手段によりチャット移行通知がなされたクライアントに対するチャット用のチャネルを提供するチャットサーバと、
を備えるマルチチャネル会話サーバ。
【0186】
(付記17)
前記音声監視手段は、
前記VoIP会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報中に特定の文字列を検出した場合に所定条件になったと判断するチャット移行キーワード抽出手段と、
を備える付記16に記載のマルチチャネル会話サーバ。
【0187】
(付記18)
ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記チャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を備えるマルチチャネル会話クライアント。
【0188】
(付記19)
自端末から前記VoIP用会議室に送信される音声パケット量を監視し、所定値以下であると判断した場合に前記VoIPクライアントによるVoIP用会議室への接続を終了するVoIP通信量監視手段をさらに備える、付記18に記載のマルチチャネル会話クライアント。
(付記20)
前記VoIP移行手段によるVoIP用会議室への接続から所定時間を経過したと判断した場合に、前記VoIPクライアントによるVoIP用会議室への接続を終了するVoIP接続時間監視手段をさらに備える、付記18に記載のマルチチャネル会話クライアント。
【0189】
(付記21)
前記VoIPサーバ側において前記VoIP用会議室内の音声会話メッセージを音声認識して変換された文字列情報を受信し、前記チャットクライアントを介して文字列会話メッセージとして表示するVoIPワード表示手段と、
前記VoIPワード表示手段により表示された文字列情報に対する選択指示を受け付け、対応するVoIP用会議室に前記VoIPクライアントを接続するVoIP接続手段と、
をさらに備える、付記18〜20のいずれかに記載のマルチチャネル会話クライアント。
【0190】
(付記22)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
前記チャットサーバとの間でチャネルを共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
前記VoIPサーバとの間でVoIP用会議室を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記VoIP通知手段によりVoIP移行通知を受信した場合に、前記VoIPサーバが提供するVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を含むマルチチャネル会話システム。
【0191】
(付記23)
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせる段階と、
を含むマルチチャネル会話方法。
【0192】
(付記24)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
を備えるマルチチャネル会話サーバとしてコンピュータを機能させるためのプログラム。
【0193】
(付記25)
ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記チャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を備えるマルチチャネル会話クライアントとしてコンピュータを機能させるためのプログラム。
【0194】
(付記26)
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせる段階と、
を含むマルチチャネル会話方法をコンピュータに実行させるためのプログラム。
【0195】
【発明の効果】
本発明によれば、文字列会話メッセージによるチャットシステムと音声会話メッセージによるVoIP電話システムとの連携を行うことで、ユーザが電話番号を打ち込んだり、VoIP用会議室の開設を行ったり、チャット用チャネルを開設する手間を省くとともに、ユーザ間における移行のためのネゴシエーションを省略して省力化することが可能であり、会議の中断時間を極力少なくすることができる。
【図面の簡単な説明】
【図1】第1実施形態の概要説明図。
【図2】第2実施形態の概要説明図。
【図3】第3実施形態の概要説明図。
【図4】第4実施形態の概要説明図。
【図5】第5実施形態の概要説明図。
【図6】第6実施形態の概要説明図。
【図7】第7実施形態の概要説明図。
【図8】第8実施形態の概要説明図。
【図9】第9実施形態の概要説明図。
【図10】第10実施形態の概要説明図。
【図11】第11実施形態の概要説明図。
【図12】第12実施形態の概要説明図。
【図13】第13実施形態の概要説明図。
【図14】第14実施形態の概要説明図。
【図15】第15実施形態の概要説明図。
【図16】第16実施形態の概要説明図。
【図17】第17実施形態の概要説明図。
【図18】第18実施形態の概要説明図。
【図19】第1実施形態の制御ブロック図。
【図20】第2実施形態の制御ブロック図。
【図21】第3実施形態の制御ブロック図。
【図22】第4実施形態の制御ブロック図。
【図23】第5実施形態の制御ブロック図。
【図24】第6実施形態の制御ブロック図。
【図25】第7実施形態の制御ブロック図。
【図26】第8実施形態の制御ブロック図。
【図27】第9実施形態の制御ブロック図。
【図28】第10実施形態の制御ブロック図。
【図29】第11実施形態の制御ブロック図。
【図30】第12実施形態の制御ブロック図。
【図31】第13実施形態の制御ブロック図。
【図32】第14実施形態の制御ブロック図。
【図33】第15実施形態の制御ブロック図。
【図34】第16実施形態の制御ブロック図。
【図35】第17実施形態の制御ブロック図。
【図36】第18実施形態の制御ブロック図。
【図37】第1実施形態のフローチャート。
【図38】第2実施形態のフローチャート。
【図39】第3実施形態のフローチャート。
【図40】第4実施形態のフローチャート。
【図41】第5実施形態のフローチャート。
【図42】第6実施形態のフローチャート。
【図43】第7実施形態のフローチャート。
【図44】第8実施形態のフローチャート。
【図45】第9実施形態のフローチャート。
【図46】第10実施形態のフローチャート。
【図47】第11実施形態のフローチャート。
【図48】第12実施形態のフローチャート。
【図49】第13実施形態のフローチャート。
【図50】第14実施形態のフローチャート。
【図51】第15実施形態のフローチャート。
【図52】第16実施形態のフローチャート。
【図53】第17実施形態のフローチャート。
【図54】第18実施形態のフローチャート。
【図55】 VoIP会議接続要求ダイアログの説明図。
【図56】 VoIP会議室通知ダイアログの説明図。
【図57】 VoIP会議接続要求ダイアログの説明図。
【図58】 VoIP会議室通知ダイアログの説明図。
【図59】 VoIP会議接続要求ダイアログの説明図。
【図60】 VoIP会議室通知ダイアログの説明図。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a multi-channel conversation system, and in particular, a multi-channel conversation in which a chat system that provides communication using a character string conversation message in real time and a VoIP (Voice over Internet Protocol) system that provides communication using a voice conversation message are integrated. About the system.
[0002]
[Prior art]
A chat system is composed of a chat server and a plurality of chat clients connected to a network, and a virtual conversation space called a channel set up on the network is shared by a plurality of chat clients, so that text messages can be sent in real time. It is a conversation system that can send and receive.
The chat server broadcasts the character string conversation message transmitted from each chat client to other chat clients in the same channel.
[0003]
Each chat client is uniquely specified by an identifier called a nickname, and a character string conversation message in a channel can also specify a speaker by a nickname.
Usually, a chat server provides a plurality of channels, and a channel name for uniquely specifying each channel is given (Non-Patent Document 1).
There is also a VoIP system that transmits and receives voice packets using an IP (Internet Protocol) network to perform voice conversation. In this VoIP system, a VoIP conference room equivalent to a chat channel is set in a VoIP server called MCU (Multipoint Control Unit), and multiple users are connected via clients connected to this VoIP conference room. Enables voice conversation.
[0004]
Each client terminal is managed by a CM (Call Manager) installed on the server side, and simultaneous voice conversations by a plurality of persons are possible by performing call control from each client. Therefore, the voice of the client connected to the conference room for VoIP is distributed to other clients connected to the same conference room for VoIP. Will be distributed to each client (Non-Patent Documents 2 to 3).
By using the chat system as described above, a plurality of users have conversations in a channel, and thus, collaborative work using information terminals has been actively performed. In addition, due to the speeding up and widespread use of IP networks, telephone conferences using VoIP systems are beginning to be used.
[0005]
In a chat system, a personal computer or other terminal equipped with a chat application is always connected to the IP network. In a VoIP system, a personal phone or personal computer terminal equipped with a VoIP application is always connected to the IP network. It is used in the state and both are used independently.
[0006]
[Non-Patent Document 1]
jp.fujitsu.com; Chocoa Communicator
<URL: http://software.fujitsu.com/jp/chocoa/product1.html>
[0007]
[Non-Patent Document 2]
@nifty: Eyeball Patio Lite
<URL: http://eyeball.nifty.com/lite/guide01.html>
[0008]
[Non-Patent Document 3]
Macnica Networks ; Centra Conference5
<URL: http://www.networks.macnica.co.jp/centra/conference.html>
[0009]
[Problems to be solved by the invention]
When a conversation using a character string is performed using a chat system, there is a possibility that the conversation will occur so frequently that the keyboard cannot be put in time. In this case, if each user terminal is compatible with the VoIP system, it is necessary to make a call on the chat screen and make a call to the other party's VoIP telephone number, saying that the user wants to switch to a voice conversation conference using the VoIP system. In addition, when conducting a conference call by a plurality of users, it is necessary to set up a VoIP conference room and have other users participate in the VoIP conference room.
[0010]
[Means for Solving the Problems]
  The multi-channel conversation server according to the present invention includes a plurality of virtual character string conversation spaces established on a network with a plurality of clients connected via the network.IsChannelLeA chat server that allows simultaneous communication by characters on a channel between multiple users by controlling a character string conversation message that is shared and transmitted via a client, and a character string conversation in a channel managed by the chat server messageButConversation monitoring means for outputting predetermined condition arrival information when a predetermined condition is met, and acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information output from the conversation monitoring means, and prompting VoIP connection Multiple virtual voice conversation spaces set up on the network between the VoIP notification means for sending a VoIP transition notification to each IP address and multiple clients connected via the networkIsVoIP conferenceRoomBy sharing and controlling voice conversation messages sent via clients, simultaneous voice communication between multiple users on the VoIP conference room can be performed. And a VoIP server that provides a conference room for VoIP for made clients.
[0011]
[Means for Solving the Problems]
The multi-channel conversation server according to the present invention shares a plurality of virtual character string conversation spaces (hereinafter referred to as channels) established on the network with a plurality of clients connected via the network, By controlling the text conversation message sent via the client, the chat server that enables simultaneous communication by characters on the channel between multiple users and the text conversation message in the channel managed by the chat server are monitored. VoIP connection by acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information output from the conversation monitoring means and the conversation monitoring means for outputting the predetermined condition arrival information when the predetermined condition is met A VoIP notification means for sending a VoIP transition notification to each IP address to Multiple virtual voice conversation spaces (hereinafter referred to as VoIP conference rooms) established on the network are shared with multiple clients connected via a network, and transmitted via the clients. By controlling voice conversation messages, multiple users can simultaneously communicate by voice on a VoIP conference room, and provide a VoIP conference room for clients that have been notified of VoIP transition by VoIP notification means. With a VoIP server.
[0012]
Here, the conversation monitoring means can be configured to determine that the predetermined condition is satisfied when the appearance rate of the character string conversation message in the channel exceeds a predetermined value within a predetermined time.
The conversation monitoring means can be configured to determine that a predetermined condition has been met when a specific character string appears in a character string conversation message in the channel.
Furthermore, voice synthesis means for converting a specific character string in the character string conversation message detected by the conversation monitoring means into voice data, and VoIP for notifying the client belonging to the corresponding channel of the voice data converted by the voice synthesis means It is possible to further comprise a calling means.
[0013]
The VoIP notification means can be configured to set the VoIP conference room of the corresponding channel in the VoIP server and transmit a VoIP connection request notification to the clients belonging to the channel.
In addition, the VoIP voice monitoring means for outputting the predetermined condition arrival information when the voice conversation message in the VoIP conference room managed by the VoIP server is monitored and the predetermined condition is met, and the predetermined condition arrival information from the VoIP voice monitoring means A VoIP termination means for terminating the VoIP conference room managed by the VoIP server can also be provided.
[0014]
Furthermore, the VoIP voice monitoring means can be configured to determine that a predetermined condition has been met when the amount of voice packets in the VoIP conference room falls below a predetermined value, and voice recognition of voice conversation messages in the VoIP conference room can be performed. When a specific keyword is extracted, it can be determined that the predetermined condition is met, and when the elapsed time since the VoIP conference room is set exceeds a predetermined value, the predetermined condition is determined. Can be configured.
The VoIP termination means can be configured to transmit a chat transition notification that prompts a client belonging to the VoIP conference room to transition to a channel managed by the chat server.
[0015]
Voice recognition means for recognizing a voice conversation message in a VoIP conference room and converting it into character string information, and character string information converted by the voice recognition means as a character string conversation message in a channel managed by the chat server. It is also possible to further comprise a conversion character string notification means for transmitting to the client to which it belongs.
In addition, the chat log management means that manages the character string conversation message in the channel including the character string information sent by the conversion character string notification means as the chat log, and the voice conversation message in the VoIP conference room managed by the VoIP server The VoIP log management means managed as a log and the character string information sent by the conversion character string notification means among the chat logs managed by the chat log management means are linked to corresponding locations in the VoIP log managed by the VoIP log management means And a VoIP link means to be provided.
[0016]
Also, voice recognition means for recognizing a voice conversation message in the VoIP conference room and converting it into character string information, and a character string that characterizes the conversation in the VoIP conference room from the character string information converted by the voice recognition means VoIP that sets keyword extraction means for extracting voice messages and a VoIP dedicated channel that can control conversation messages using character strings, and sends the character string information converted by the voice recognition means to each client via the VoIP dedicated channel A configuration may further include word transmitting means and keyword notifying means for transmitting the character string extracted by the keyword extracting means to a client belonging to the channel as a character string conversation message in the channel managed by the chat server.
[0017]
It is possible to further include a translation unit that translates the character string information converted by the voice recognition unit into another language.
Voice recognition means that recognizes voice conversation messages in the VoIP conference room and converts them into character string information, and character strings that identify individuals who are not connected to the VoIP conference room from the character string information converted by the voice recognition means It is also possible to further comprise a personal calling means for acquiring an IP address for calling the specified individual and transmitting a VoIP transition notification for prompting VoIP connection to the IP address when the detected individual is detected.
[0018]
  A multi-channel conversation server according to another aspect of the present invention includes a plurality of virtual voice conversation spaces established on a network with a plurality of clients connected via the network.IsVoIP conferenceRoomA voice conversation message in a VoIP conference room and a VoIP server that allows simultaneous voice communication on a VoIP conference room among multiple users by sharing and controlling voice conversation messages sent via clientsButVoice monitoring means for outputting predetermined condition arrival information when a predetermined condition is met, and for prompting chat connection to a client belonging to the corresponding VoIP conference room based on the predetermined condition arrival information output from the voice monitoring means A plurality of virtual character string conversation spaces established on the network between the chat notification means for transmitting the chat transition notification and a plurality of clients connected via the networkIsChannelLeBy controlling the character string conversation message that is shared and transmitted via the client, simultaneous communication by characters on the channel among a plurality of users is performed, and chat transition notification is made by the chat notification means. And a chat server that provides a chat channel for the client.
[0019]
Here, the voice monitoring means detects a specific character string in the character string information converted by the voice recognition means and the voice recognition means that recognizes the voice conversation message in the VoIP conference room and converts it into character string information. In this case, a chat transition keyword extracting unit that determines that a predetermined condition is satisfied may be provided.
A multi-channel conversation client according to the present invention shares a virtual character string conversation space (hereinafter referred to as a channel) established on a network with a chat server connected to the network, and communicates with other users. A virtual voice conversation space connected to the network (hereinafter referred to as a VoIP conference room) between a chat client that sends and receives text conversation messages between them and a VoIP server connected to the network. ) And a VoIP client that sends and receives voice conversation messages with other users for simultaneous communication, and a VoIP transition notification that prompts VoIP connection from the chat server for the channel to which the chat client is connected VoIP migration means to connect the VoIP client to the notified VoIP conference room Obtain.
[0020]
Here, the amount of voice packets transmitted from the terminal itself to the VoIP conference room is monitored, and if it is determined that the voice packet is below the predetermined value, the VoIP traffic monitoring means for terminating the connection to the VoIP conference room by the VoIP client is provided. Furthermore, it can be set as the structure provided.
In addition, when it is determined that a predetermined time has elapsed since the connection to the VoIP conference room by the VoIP transition means, the system further includes a VoIP connection time monitoring means for terminating the connection to the VoIP conference room by the VoIP client. Can do.
Furthermore, VoIP word display means for receiving the voice string information converted by voice recognition of the voice conversation message in the VoIP conference room on the VoIP server side and displaying it as a string conversation message via the chat client, and VoIP word display The apparatus may further comprise VoIP connection means for receiving a selection instruction for the character string information displayed by the means and connecting a VoIP client to the corresponding VoIP conference room.
[0021]
  A multi-channel conversation system according to the present invention includes a plurality of virtual character string conversation spaces established on a network with a plurality of clients connected via the network.IsChannelLeA chat server that allows simultaneous communication by characters on a channel between multiple users by controlling a character string conversation message that is shared and transmitted via a client, and a character string conversation in a channel managed by the chat server messageButConversation monitoring means for outputting predetermined condition arrival information when a predetermined condition is met, and acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information output from the conversation monitoring means, and prompting VoIP connection Multiple virtual voice conversation spaces set up on the network between the VoIP notification means for sending a VoIP transition notification to each IP address and multiple clients connected via the networkIsVoIP conferenceRoomBy sharing and controlling voice conversation messages sent via clients, simultaneous voice communication between multiple users on the VoIP conference room can be performed. A VoIP server that provides a VoIP meeting room for the client, and a chat client that shares a channel with the chat server and sends and receives text conversation messages with other users for simultaneous communication, and VoIP Share VoIP conference room with server and send / receive voice conversation message to / from other users for simultaneous communication and VoIP notification means for channel to which chat client is connected by VoIP notification means Before receiving the VoIP conference room provided by the VoIP server. And a VoIP migration means to connect the VoIP client.
  The multi-channel conversation method according to the present invention includes a plurality of virtual character string conversation spaces established on a network between a plurality of clients and a chat server connected via the network.IsChannelLeSharing and transmitting a character conversation message on the channel among a plurality of users by controlling a character string conversation message transmitted via a client; and a character string conversation message in the channelButA stage for outputting predetermined condition arrival information when a predetermined condition is met, and obtaining an IP address of a client belonging to the corresponding channel based on the predetermined condition arrival information, and sending a VoIP transition notification for prompting VoIP connection to each IP address A virtual voice conversation space established on the network between the client that sent the VoIP transition notification and the VoIP serverIsVoIP conferenceRoomSharing and controlling voice conversation messages transmitted through the client to perform simultaneous voice communication on a VoIP conference room among a plurality of users.
[0022]
  The multi-channel conversation server program according to the present invention includes a plurality of virtual character string conversation spaces established on a network with a plurality of clients connected via the network.IsChannelLeA chat server that allows simultaneous communication by characters on a channel between multiple users by controlling a character string conversation message that is shared and transmitted via a client, and a character string conversation in a channel managed by the chat server messageButConversation monitoring means for outputting predetermined condition arrival information when a predetermined condition is met, and acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information output from the conversation monitoring means, and prompting VoIP connection Multiple virtual voice conversation spaces set up on the network between the VoIP notification means for sending a VoIP transition notification to each IP address and multiple clients connected via the networkIsVoIP conferenceRoomBy sharing and controlling voice conversation messages sent via clients, simultaneous voice communication between multiple users on the VoIP conference room can be performed. A program for causing a computer to function as a multi-channel conversation server including a VoIP server that provides a VoIP conference room for a client made.
[0023]
The multi-channel conversation client program of the present invention shares a virtual character string conversation space (hereinafter referred to as a channel) established on the network with a chat server connected to the network, and with other users. A virtual voice conversation space (hereinafter referred to as a VoIP conference room) connected on the network between a chat client that sends and receives text conversation messages between them and a VoIP server connected to the network. VoIP client that transmits and receives voice conversation messages with other users and communicates simultaneously with other users, and a VoIP transition notification that prompts VoIP connection from the chat server for the channel to which the chat client is connected VoIP migration to connect a VoIP client to the notified VoIP conference room Is a program for causing a computer to function as a multi-channel conversation client and a stage.
[0024]
  A program for a multi-channel conversation method according to the present invention includes a plurality of virtual character string conversation spaces established on a network between a plurality of clients and a chat server connected via the network.IsChannelLeControlling string conversation messages that are shared and sent via the client to allow simultaneous text communication on the channel between multiple users, and string conversation messages in the channelButA stage for outputting predetermined condition arrival information when a predetermined condition is met, and obtaining an IP address of a client belonging to the corresponding channel based on the predetermined condition arrival information, and sending a VoIP transition notification for prompting VoIP connection to each IP address A virtual voice conversation space established on the network between the client that sent the VoIP transition notification and the VoIP serverIsVoIP conferenceRoomAllowing a computer to execute a multi-channel conversation method that includes simultaneous voice communication on a VoIP conference room between multiple users by sharing and controlling voice conversation messages sent through a client It is a program for.
[0025]
DETAILED DESCRIPTION OF THE INVENTION
[First Embodiment]
FIG. 1 shows an outline of a system in which the first embodiment of the present invention is adopted.
Here, the server terminal 100 and a plurality of client terminals 200 and 200 are connected on a network, and chat communication or network sharing any one of channels as a plurality of character string conversation spaces set up on the network. It implements VoIP telephone communication that shares one of the VoIP conference rooms, which are multiple voice conversation spaces set up above.
[0026]
The server terminal 100 includes a chat server 110 that controls character string conversation messages in each channel, an MCU (Multipoint Control Unit) 120 that controls voice conversation messages in each VoIP conference room, and a call from each client terminal 200. CM (Call Manager) 130 which performs control is provided.
As shown in FIG. 1, when the chat server 110 controlling the character string conversation message determines that the appearance rate of the character string conversation message in the channel exceeds a predetermined value, the chat message is frequently generated. A notification to that effect is transmitted to the CM 130 ((1) in FIG. 1).
[0027]
Upon receiving notification that chat messages are frequently generated from the chat server 110, the CM 130 creates a VoIP conference room corresponding to the channel in the MCU 120 ((2) in FIG. 1).
The CM 130 creates a VoIP conference room and sends a VoIP connection request to the client terminal 200 belonging to the corresponding channel ((3) in FIG. 1).
When the user using the client terminal 200 responds to the client terminal 200 that has received the VoIP connection request from the server terminal 100 (FIG. 1 (4)), the voice conversation message transmitted through the client terminal 200 Is sent to the MCU 120 through the CM 130 and controlled as a voice conversation message in the VoIP conference room.
[0028]
FIG. 19 shows a control block diagram for configuring the first embodiment.
In this multichannel conversation system, the server terminal 100 and the client terminal 200 are connected via a network 300.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 monitors the character string conversation message in the channel, and when the appearance rate within a predetermined time exceeds a predetermined value, the chat server 110 has a plurality of client terminals 200 that are the senders of the conversation message. In this case, a conversation frequency monitoring unit 111 that transmits predetermined condition arrival information to the CM 130 is provided.
[0029]
The CM 130 receives the IP address registration from the client terminal 200 belonging to the channel managed by the chat server 110 and stores it in the IP address table 132, and the predetermined condition arrival information transmitted from the chat server 110. Based on the IP address acquisition unit 133 that acquires the IP address of the corresponding client terminal 200 from the client IP address registration unit 131, and transmits the VoIP connection request to the client terminal 200 of the IP address acquired by the IP address acquisition unit 133 And a VoIP connection request unit 134.
[0030]
  The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. Send and receive voice conversation messages in the meeting roomForAnd a VoIP application 220 constituting a VoIP client.
  The operation in the first embodiment as described above will be described with reference to FIG.
  When starting chat communication from the client terminal 200, an IP address is registered in advance in the client IP address registration unit 131 of the server terminal 100. At this time, the client IP address registration unit 131 stores the user name (nickname) used by the user in the chat and the IP address of the client terminal 200 in association with each other in the IP address table 132. An example of the IP address table 132 is shown in Table 1.
[0031]
[Table 1]
Figure 0004331463
[0032]
  In the server terminal 100, the chat server 110 manages the character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls the chat communication in the channel (step S111).
  The conversation frequency monitoring unit 111 monitors the character string conversation message in each channel, and determines whether or not the character string conversation message in the channel exceeds a predetermined value within a predetermined time (S112). Here, the character string conversation message in the channel exceeds a predetermined value within a predetermined time, and the character string conversation message is transmitted.OriginalWhen it is determined that is a plurality of client terminals 200, the process proceeds to step S113.
[0033]
In step S113, a user name belonging to the corresponding channel is detected and notified to the IP address acquisition unit 133 of the CM 130.
The IP address acquisition unit 133 searches the IP address table 132 from the user name transmitted from the chat server 110, and acquires the IP address of the corresponding client terminal 200 (step S114).
Thereafter, the IP address acquisition unit 133 notifies the VoIP connection request unit 134 of the set of the acquired IP address of the client terminal 200 and the corresponding user name (step S115).
[0034]
In response to the notification from the IP address acquisition unit 133, the VoIP connection request unit 134 creates a corresponding VoIP conference room in the MCU 120 (step S116). Here, the VoIP conference room created in the MCU 120 is managed by the MCU 120 as a VoIP conference room management table in association with the channel from which it was derived. An example of this VoIP conference room management table is shown in Table 2. The VoIP conference room management table can also be managed in the CM 130, and can be managed by other storage media.
[0035]
[Table 2]
Figure 0004331463
[0036]
The VoIP connection request unit 134 further transmits a VoIP connection request notification to the corresponding client terminal 200 (step S117).
In the client terminal 200, when the VoIP connection request notification is received from the server terminal 100 side, the application displays that fact and allows the user to select whether or not to respond to the VoIP connection (step S121). When the user gives an instruction to respond to the VoIP connection request, the process proceeds to step S122.
In step S122, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
[0037]
The client terminal 200 that has received the VoIP connection request notification can be configured to launch a VoIP connection request dialog 500 as shown in FIG. 55, for example. In this VoIP connection request dialog 500, a notification type bar 501 indicating that the notification type is a VoIP conference connection request, and a content display of “VoIP conference room“ VoIP ”derived from channel“ #VoIP ”” is displayed. The display unit 502 includes an accept button 503 for instructing to agree to participate, a reject button 504 for instructing not to agree to participate, and the like. When the user agrees to participate in the VoIP conference room, clicking the accept button 503 enables the VoIP application 220 of the client terminal 200 to connect to the corresponding VoIP conference room, and the voice over the VoIP telephone. You can transition to conversation.
[0038]
In such a first embodiment, when a character string conversation message due to chat frequently occurs, it is possible to automatically shift to VoIP, and there is no need to negotiate to shift to a telephone conference. The trouble of dialing a number can also be omitted.
[Second Embodiment]
An outline of a system in which the second embodiment of the present invention is employed is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share either of VoIP conference rooms that are multiple voice conversation spaces set up on the network.
[0039]
As shown in FIG. 2, when the chat server 110 controlling the character string conversation message determines that the appearance rate of the character string conversation message in the channel exceeds a predetermined value, the chat message is frequently generated. A notification to that effect is transmitted to the CM 130 ((1) in FIG. 2).
Upon receiving notification that chat messages are frequently generated from the chat server 110, the CM 130 creates a VoIP conference room corresponding to the channel in the MCU 120 ((2) in FIG. 2).
[0040]
The CM 130 creates a VoIP conference room and notifies the created VoIP conference room to the client terminal 200 belonging to the corresponding channel ((3) in FIG. 2).
In the client terminal 200 that has received the VoIP conference room notification from the server terminal 100, when the client terminal 200 connects to the VoIP conference room ((4) in FIG. 2), it is transmitted through the client terminal 200. The incoming voice conversation message is sent to the MCU 120 through the CM 130 and controlled as a voice conversation message in the VoIP conference room.
[0041]
FIG. 20 shows a control block diagram for configuring the second embodiment.
Also in the second embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 monitors the character string conversation message in the channel, and when the appearance rate within a predetermined time exceeds a predetermined value, the chat server 110 has a plurality of client terminals 200 that are the senders of the conversation message. In this case, a conversation frequency monitoring unit 111 that transmits predetermined condition arrival information to the CM 130 is provided.
[0042]
  The CM 130 creates a VoIP conference room in the MCU 120 according to the predetermined condition arrival information transmitted from the conversation frequency monitor 111, and creates a VoIP conference room for the client terminal 200 belonging to the corresponding channel. VoIP conference room notification unit 135 is provided.
  The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. Send and receive voice conversation messages in the meeting roomForAnd a VoIP application 220 constituting a VoIP client.
[0043]
The chat application 210 connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135, in addition to a chat function for transmitting and receiving character string conversation messages in the channel managed by the chat server 110. A VoIP connection unit 211 is provided.
The operation in the second embodiment will be described with reference to FIG.
In the server terminal 100, the chat server 110 manages the character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls chat communication in the channel (step S131).
[0044]
  The conversation frequency monitoring unit 111 monitors the character string conversation message in each channel, and determines whether or not the character string conversation message in the channel exceeds a predetermined value within a predetermined time (S132). Here, the character string conversation message in the channel exceeds a predetermined value within a predetermined time, and the character string conversation message is transmitted.OriginalWhen it is determined that is a plurality of client terminals 200, the process proceeds to step S133.
  In step S133, a user name belonging to the corresponding channel is detected and notified to the VoIP conference room notification unit 135 of the CM 130.
[0045]
The VoIP conference room notification unit 135 receives the notification from the conversation frequency monitoring unit 111 and creates a corresponding VoIP conference room in the MCU 120 (step S134).
The VoIP conference room notification unit 135 further notifies the corresponding client terminal 200 of the VoIP conference room information (step S135). Here, the IP address of the client terminal 200 is not necessary, and the VoIP conference room information including the conference room name and the like is transmitted to the chat application 210 of the client terminal 200 as control information in the channel via the chat server 110.
[0046]
When the client terminal 200 receives a notification of the VoIP conference room from the server terminal 100 side, the client terminal 200 displays that fact via the chat application 210 and allows the user to select whether or not to connect to the VoIP conference room. (Step S141). When the user gives an instruction to make a VoIP connection, the process proceeds to step S142.
In step S142, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
The client terminal 200 that has received the notification of the VoIP conference room can be configured to launch a VoIP conference room notification dialog 510 as shown in FIG. 56, for example. In this VoIP conference room notification dialog 510, a notification type bar 511 indicating that the notification type is a VoIP conference room notification and the content of “VoIP conference room“ VoIP ”derived from channel“ #VoIP ”” are displayed. A content display unit 512, an accept button 513 for instructing to agree to participate, a reject button 514 for instructing not to agree to participate, and the like are provided. When the user agrees to participate in the VoIP conference room, clicking the accept button 513 allows the VoIP application 220 of the client terminal 200 to connect to the corresponding VoIP conference room, and the voice over the VoIP telephone. You can transition to conversation.
[0047]
In the second embodiment, as in the first embodiment, when a character string conversation message by chat frequently occurs, it is possible to automatically shift to VoIP, and to shift to a telephone conference. Negotiation is not necessary, and the trouble of dialing a telephone number can be omitted.
[Third Embodiment]
FIG. 3 shows an outline of a system in which the third embodiment of the present invention is adopted.
Similarly to the first embodiment, in the third embodiment, a server terminal 100 and a plurality of client terminals 200 and 200 are connected on a network, and a channel which is a plurality of character string conversation spaces established on the network. Chat communication that shares any of the above, or VoIP telephone communication that shares any of the VoIP conference rooms that are multiple voice conversation spaces set up on the network.
[0048]
As shown in FIG. 3, the chat server 110 controlling the character string conversation message monitors whether or not a specific character string appears in the character string conversation message in the channel. When the message appears, the predetermined condition arrival information is transmitted to the CM 130. For example, when the chat server 110 detects a user name belonging to a channel in a character string conversation message, the chat server 110 determines that there is a call to the user, and sends a call message detection notification to the CM 130 (FIG. 3 (1)). ).
[0049]
The CM 130 receives a call message detection notification from the chat server 110, and creates a corresponding VoIP conference room in the MCU 120 ((2) in FIG. 3).
The CM 130 creates a VoIP conference room and sends a VoIP connection request to the client terminal that has been called (FIG. 3 (3)).
In the client terminal 200 that receives the VoIP connection request from the server terminal 100, when the user using the client terminal 200 responds ((4) in FIG. 3), the voice conversation message transmitted through the client terminal 200 Is sent to the MCU 120 through the CM 130 and controlled as a voice conversation message in the VoIP conference room.
[0050]
FIG. 21 shows a control block diagram for constituting the third embodiment.
In the multi-channel conversation system in the third embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 includes a specific character string monitoring unit 112 that monitors a character string conversation message in a channel and notifies predetermined condition arrival information when a predetermined character string appears in the character string conversation message.
[0051]
The CM 130 receives the IP address registration from the client terminal 200 belonging to the channel managed by the chat server 110 and stores it in the IP address table 132, and the predetermined condition arrival information transmitted from the chat server 110. Based on the IP address acquisition unit 133 that acquires the IP address of the corresponding client terminal 200 from the client IP address registration unit 131, and transmits the VoIP connection request to the client terminal 200 of the IP address acquired by the IP address acquisition unit 133 And a VoIP connection request unit 134. In this case, the IP address acquisition unit 133, based on the notification message detection notification from the specific character string monitoring unit 112, the client terminal 200 corresponding to the user name called and the client terminal corresponding to the name of the user who made the call It is possible to obtain the IP address of both of them and send it to the VoIP connection request unit 134.
[0052]
  The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. Send and receive voice conversation messages in the meeting roomForAnd a VoIP application 220 constituting a VoIP client.
  The operation in the third embodiment will be described with reference to FIG.
  As in the first embodiment, when starting chat communication from the client terminal 200, an IP address is registered in advance in the client IP address registration unit 131 of the server terminal 100.
[0053]
In the server terminal 100, the chat server 110 manages the character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls chat communication in the channel (step S151).
The specific character string monitoring unit 112 monitors the character string conversation message in each channel, and determines whether or not a predetermined character string is included in the character string conversation message in the channel (S152). In particular, when a user name belonging to a channel is detected, it is determined that there is a call message for the user name, and the process proceeds to step S153.
[0054]
In step S153, the detected user name of the calling message and the called user name are detected and notified to the IP address acquisition unit 133.
The IP address acquisition unit 133 searches the IP address table 132 from the user name transmitted from the chat server 110, and acquires the IP address of the corresponding client terminal 200 (step S154).
Thereafter, the IP address acquisition unit 133 notifies the VoIP connection request unit 134 of a set of the acquired IP address of the client terminal 200 and the corresponding user name (step S155).
[0055]
In response to the notification from the IP address acquisition unit 133, the VoIP connection request unit 134 creates a corresponding VoIP conference room in the MCU 120 (step S156).
The VoIP connection request unit 134 further transmits a VoIP connection request notification to the corresponding client terminal 200 (step S157).
In the client terminal 200, when the VoIP connection request notification is received from the server terminal 100 side, the application displays that fact and allows the user to select whether to respond to the VoIP connection (step S161). When the user gives an instruction to respond to the VoIP connection request, the process proceeds to step S162.
[0056]
In step S162, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
The client terminal 200 that has received the VoIP connection request notification can be configured to launch a VoIP connection request dialog 520 as shown in FIG. 57, for example. The VoIP connection request dialog 520 includes a notification type bar 521 indicating that the notification type is a VoIP conference connection request, and a content indicating that the user who has transmitted the call message has created a VoIP conference room (in the figure, Content display section 522 for displaying “Mr. Tanaka (caller) created VoIP conference room“ VoIP ””), consent button 523 for instructing to agree, participation consent A reject button 524 for instructing not to be provided is provided. When the user agrees to participate in the VoIP conference room, clicking the accept button 523 enables the VoIP application 220 of the client terminal 200 to connect to the corresponding VoIP conference room, and the voice over the VoIP telephone. You can transition to conversation.
[0057]
In such a third embodiment, it is possible to automatically shift to VoIP by notifying a call message, eliminating the need for negotiation to shift to a telephone conference, and dialing a telephone number. Time and effort can be omitted.
[Fourth Embodiment]
An outline of a system in which the fourth embodiment of the present invention is adopted is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share either of VoIP conference rooms that are multiple voice conversation spaces set up on the network.
[0058]
As shown in FIG. 4, the chat server 110 controlling the character string conversation message monitors whether or not a specific character string appears in the character string conversation message in the channel. When the message appears, the predetermined condition arrival information is transmitted to the CM 130. For example, when the chat server 110 detects a user name belonging to a channel in a character string conversation message, the chat server 110 determines that there is a call to the user and sends a call message detection notification to the CM 130 (FIG. 4 (1)). ).
[0059]
The CM 130 receives a call message detection notification from the chat server 110, and creates a corresponding VoIP conference room in the MCU 120 ((2) in FIG. 4).
The CM 130 creates a VoIP conference room and notifies the created VoIP conference room to the called client terminal (FIG. 4 (3)).
In the client terminal 200 that has received the notification of the VoIP conference room from the server terminal 100, when the client terminal 200 connects to the VoIP conference room (FIG. 4 (4)), it is transmitted through the client terminal 200. The incoming voice conversation message is sent to the MCU 120 through the CM 130 and controlled as a voice conversation message in the VoIP conference room.
[0060]
FIG. 22 shows a control block diagram for configuring the fourth embodiment.
Also in the fourth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 includes a specific character string monitoring unit 112 that monitors character string conversation messages in the channel and transmits predetermined condition arrival information to the CM 130 when a predetermined character string is detected.
[0061]
The CM 130 creates a VoIP conference room in the MCU 120 in accordance with the predetermined condition arrival information transmitted from the specific character string monitoring unit 112 and notifies the corresponding client terminal 200 of the VoIP conference room information. A conference room notification unit 135 is provided. In this case, the VoIP conference room notification unit 135 corresponds to the client terminal 200 corresponding to the called user name and the name of the user who made the call based on the call message detection notification from the specific character string monitoring unit 112. VoIP conference room information such as the conference room name can be sent to both client terminals.
[0062]
  The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. Send and receive voice conversation messages in the meeting roomForAnd a VoIP application 220 constituting a VoIP client.
  The chat application 210 connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135, in addition to a chat function for transmitting and receiving character string conversation messages in the channel managed by the chat server 110. A VoIP connection unit 211 is provided.
[0063]
The operation in the fourth embodiment will be described with reference to FIG.
In the server terminal 100, the chat server 110 manages the character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls chat communication in the channel (step S171).
The specific character string monitoring unit 112 monitors the character string conversation message in each channel, and determines whether or not a predetermined character string is included in the character string conversation message in the channel (S172). In particular, when a user name belonging to a channel is detected, it is determined that there is a call message for the user name, and the process proceeds to step S173.
[0064]
In step S173, the calling user name of the detected call message and the called user name are detected and notified to the VoIP conference room notification unit 135.
In response to the notification from the specific character string monitoring unit 112, the VoIP conference room notification unit 135 creates a corresponding VoIP conference room in the MCU 120 (step S174).
The VoIP conference room notification unit 135 further notifies the corresponding client terminal 200 of the VoIP conference room information (step S175). Here, the IP address of the client terminal 200 is not necessary, and the VoIP conference room information including the conference room name and the like is transmitted to the chat application 210 of the client terminal 200 as control information in the channel via the chat server 110.
[0065]
When the client terminal 200 receives a notification of the VoIP conference room from the server terminal 100 side, the client terminal 200 displays that fact via the chat application 210 and allows the user to select whether or not to connect to the VoIP conference room. (Step S181). If the user gives an instruction to make a VoIP connection, the process proceeds to step S182.
In step S182, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
The client terminal 200 that has received the notification of the VoIP conference room can be configured to launch a VoIP conference room notification dialog 530 as shown in FIG. 58, for example. In this VoIP conference room notification dialog 530, a notification type bar 531 indicating that the type of notification is a VoIP conference room notification, and a content indicating that the user who has transmitted the call message has created a VoIP conference room (in the figure). , “Contents display section 532 for displaying“ Mr. Tanaka (caller) created VoIP conference room “VoIP” ”), a consent button 533 for instructing to participate, A reject button 534 for instructing not to agree is provided. When the user agrees to participate in the VoIP conference room, clicking the accept button 513 allows the VoIP application 220 of the client terminal 200 to connect to the corresponding VoIP conference room, and the voice over the VoIP telephone. You can transition to conversation.
[0066]
In the fourth embodiment, it is possible to automatically shift to VoIP by transmitting a specific character string in a character string conversation message in the channel, particularly by transmitting a user name belonging to the channel. Therefore, there is no need to negotiate to shift to a telephone conference, and the trouble of dialing a telephone number can be omitted.
[Fifth Embodiment]
FIG. 5 shows an outline of a system in which the fifth embodiment of the present invention is adopted.
[0067]
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share either of VoIP conference rooms that are multiple voice conversation spaces set up on the network.
The server terminal 100 and the client terminal 200 monitor the character string conversation message in the channel as in the above-described embodiment, and set up a VoIP conference room in the MCU 120 according to the frequency of conversation or the appearance of a specific character string. The client terminal 200 is provided with a function of making a VoIP connection request or notifying the VoIP conference room information to the corresponding client terminal 200 and automatically connecting to the VoIP conference room from the client terminal 200 ((1) in FIG. 5). ).
[0068]
Furthermore, the chat server 110 monitors whether or not a specific character string appears in the character string conversation message in the channel. If a specific character string appears, the chat server 110 notifies the CM 130 of a specific character string appearance notification. (Fig. 5 (2)).
The CM 130 reads out the specific character string notified from the chat server 110 by voice synthesis and sends it to each client terminal 200 by VoIP ((3) in FIG. 5).
FIG. 23 shows a control block diagram for configuring the fifth embodiment.
Also in the fifth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
[0069]
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 includes a specific character string monitoring unit 112 that monitors character string conversation messages in a channel and transmits predetermined condition arrival information to the CM 130 when a predetermined character string is detected.
The CM 130 creates a VoIP conference room in the MCU 120 in accordance with the predetermined condition arrival information transmitted from the specific character string monitoring unit 112 and notifies the corresponding client terminal 200 of the VoIP conference room information. A conference room notification unit 135 is provided. In this case, the VoIP conference room notification unit 135 can be configured to notify the client terminal 200 of the information on the VoIP conference room created based on the predetermined condition arrival information from the chat server 110, and can monitor a specific character string. VoIP conference room information such as conference room names for both the client terminal 200 corresponding to the called user name and the client terminal corresponding to the called user name based on the call message detection notification from the unit 112 Can be configured to send. In addition, the VoIP conference room notification unit 135 receives the specific character string detection notification transmitted from the specific character string monitoring unit 112 and sends a call message notification.
[0070]
  The CM 130 includes a VoIP calling unit 136 that makes a call through VoIP based on the call message notification notified from the VoIP conference room notification unit 135. The VoIP calling unit 136 includes a voice synthesizing unit 137, which converts the specific character string detected by the specific character string monitoring unit 112 of the chat server 110 into voice and outputs it to VoIP.
  The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. Send and receive voice conversation messages in the meeting roomForAnd a VoIP application 220 constituting a VoIP client.
[0071]
In addition to the chat function for sending and receiving character string conversation messages in the channel managed by the chat server 110, the chat application 210 automatically connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135. A VoIP automatic response unit 212 is provided.
In addition, the VoIP application 220 receives a voice output output from the VoIP calling unit 136 of the server terminal 100 and notifies the user of this.
The operation in the fifth embodiment will be described with reference to FIG.
[0072]
In the server terminal 100, the chat server 110 manages the character string conversation message transmitted from the chat application 210 of each client terminal 200, controls the chat communication in the channel, and the frequent occurrence of the character string conversation message in the channel. When the degree exceeds a predetermined value or when a predetermined character string is detected, a VoIP connection request or a VoIP conference room information notification is sent to the client terminal 200 (step S191).
In the client terminal 200 that receives the VoIP connection request or the VoIP conference room information notification from the server terminal 100, the VoIP automatic response unit 212 executes VoIP connection / response processing (step S201).
[0073]
When the chat server 110 of the server terminal 100 detects a specific character string in the character string conversation message in the channel, the voice synthesizer 137 of the VoIP calling unit 136 synthesizes the message (step S192). Thereafter, the VoIP calling unit 136 notifies the client terminal 200 of a calling voice message through VoIP (step S193).
In the fifth embodiment as described above, when calling by chat, it is possible not only to display by a character string but also to call each user by VoIP voice and operate the client terminal 200. Making it easier for the user to recognize. For example, when a user name belonging to a channel is called by a character string conversation message, it can be easily recognized by the called user by making this voice and calling it by VoIP.
[0074]
[Sixth Embodiment]
An overview of a system in which the sixth embodiment of the present invention is employed is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0075]
While the client terminal 200 performs VoIP telephone communication through the VoIP conference room created in the MCU 120, the CM 130 monitors the amount of voice conversation messages in the VoIP conference room. Specifically, the CM 130 monitors the amount of voice packets in each VoIP conference room, and detects whether or not the amount of voice packets has become a predetermined value or less ((1) in FIG. 6).
When it is determined that the amount of voice packets in the VoIP conference room has become equal to or less than the predetermined amount, the corresponding VoIP conference room in the MCU 120 is closed ((2) in FIG. 6).
[0076]
At the same time, the CM 130 transmits a notification (disconnection notification) indicating that the VoIP conference room is closed to the client terminals 200 belonging to the closed VoIP conference room ((3) in FIG. 6).
FIG. 24 shows a control block diagram for constituting the sixth embodiment.
Also in the sixth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0077]
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0078]
The CM 130 monitors the traffic in the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or in the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110. In addition, the VoIP conference room traffic monitoring unit 138 is provided that closes the VoIP conference room and notifies the corresponding client terminal 200 of VoIP disconnection when the amount falls below a predetermined amount.
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0079]
In addition to the chat function for sending and receiving character string conversation messages in the channel managed by the chat server 110, the chat application 210 automatically connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135. It can also be configured to include a VoIP automatic response unit 212 for performing.
The operation in the sixth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in the channel by the chat server 110. VoIP voice packets from the terminal 200 are controlled (step S211).
[0080]
The communication volume of the voice conversation message in the VoIP conference room is monitored by the VoIP conference room traffic monitoring unit 138. If the VoIP conference room traffic monitoring unit 138 determines that the amount of voice packets in the VoIP conference room is below a certain value (step S212), the VoIP conference room traffic monitoring unit 138 closes the corresponding VoIP conference room in the MCU 120 (step S213). At the same time, the VoIP conference room traffic monitoring unit 138 transmits a VoIP disconnection notification to the client terminal 100 (step S214).
When the client terminal 200 receives the VoIP disconnection notification from the server terminal 100, the VoIP application 220 displays the VoIP disconnection display by displaying that the corresponding VoIP conference room is closed (step S221).
[0081]
When the closed VoIP conference room is derived from the channel managed by the chat server 110, the user of the corresponding client terminal 200 returns to the chat communication by the character string conversation message through the original channel. Otherwise, the chat server 110 can be configured to create a new channel.
In the sixth embodiment, when the amount of voice packets in the VoIP conference room has decreased, the VoIP conference room can be terminated to promptly shift to chat communication with less load on the server side. Is possible.
[0082]
[Seventh Embodiment]
FIG. 7 shows an outline of a system in which the seventh embodiment of the present invention is adopted.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0083]
While the client terminal 200 performs VoIP telephone communication through the VoIP conference room created in the MCU 120, the client terminal 200 monitors the traffic volume of the voice conversation message from the own terminal, and the voice packet from the own terminal is monitored. It is detected whether or not the amount has become a predetermined value or less ((1) in FIG. 7).
When the client terminal 200 determines that the voice packet amount from the own terminal has become a predetermined value or less, it notifies the VoIP conference room of disconnection of the VoIP connection ((2) in FIG. 7).
[0084]
The server terminal 100 provides VoIP telephone communication through the VoIP conference room in the MCU 120 and closes the VoIP conference room when all the client terminals 200 belonging to the VoIP conference room disconnect the VoIP connection (FIG. 7). (3)).
FIG. 25 shows a control block diagram for configuring the seventh embodiment.
Also in the seventh embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0085]
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0086]
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The VoIP application 220 executes VoIP telephone communication with other client terminals 200 through a VoIP conference room set in the server terminal 100. In addition to this function, the voice conversation transmitted from the own terminal A VoIP traffic monitoring unit 221 that monitors message traffic is provided.
[0087]
The VoIP traffic monitoring unit 221 monitors the amount of voice packets transmitted from its own terminal, and when it is determined that it is below a predetermined value, transmits a notification to the server 100 side to disconnect the VoIP connection, End.
The operation in the seventh embodiment will be described with reference to FIG.
The client terminal 200 connects to a VoIP conference room created in the server terminal 100 in response to a request from the client terminal 200 or a VoIP conference room created by the server terminal 100 derived from the chat channel. A VoIP voice packet is transmitted and received (step S231).
[0088]
Here, the VoIP traffic monitoring unit 221 monitors the amount of voice packets transmitted from its own terminal, and determines whether or not it is equal to or less than a predetermined value (step S232). If the VoIP traffic monitoring unit 221 determines that the amount of voice packets from the terminal is less than or equal to the predetermined value, it notifies the server terminal 100 of VoIP disconnection (step S233), and sends it to the VoIP conference room to which it belongs. Disconnect the VoIP connection.
Thereafter, the VoIP application 220 displays to the user that the VoIP connection has been terminated (step S234).
[0089]
The server terminal 100 provides a VoIP telephone communication by each client terminal 200 by controlling a voice conversation message from the client terminal 200 belonging to the VoIP conference room created in the MCU 120.
When receiving the VoIP disconnection notification from the client terminal 200, the CM 130 deletes the client terminal 200 from the corresponding VoIP conference room in the VoIP conference room management table, and the client terminal 200 connected to the VoIP conference room It is determined whether or not it exists (step S241).
[0090]
When the CM 130 finds a VoIP conference room in which the connected client terminal 200 disappears, the CM 130 closes the VoIP conference room (step S242).
When the closed VoIP conference room is derived from the channel managed by the chat server 110, the chat communication can be resumed through the derived channel by the chat application 210 on the client terminal 200 side. The CM 130 can also be configured to create a new channel in the chat server 110 from the closed VoIP conference room and transmit this channel information or chat connection request to the corresponding client terminal 200. .
[0091]
According to the seventh embodiment, when the amount of voice packets from the own terminal is small, the VoIP connection is terminated from the client terminal 200 side and the conversation can be promptly shifted to the chat conversation.
[Eighth Embodiment]
FIG. 8 shows an outline of a system in which the eighth embodiment of the present invention is adopted.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0092]
While the client terminal 200 is performing VoIP telephone communication through the VoIP conference room created in the MCU 120, the CM 130 monitors the elapsed time since the creation of the VoIP conference room. Whether it has been exceeded is detected ((1) in FIG. 8).
If it is determined that a predetermined time or more has elapsed since the setting of the VoIP conference room, the corresponding VoIP conference room in the MCU 120 is closed ((2) in FIG. 8).
At the same time, the CM 130 transmits a notification (disconnection notification) indicating that the VoIP conference room is closed to the client terminals 200 belonging to the closed VoIP conference room ((3) in FIG. 8).
[0093]
FIG. 26 shows a control block diagram for constituting the eighth embodiment.
Also in the eighth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0094]
The CM 130 uses the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110. Monitor the elapsed time from the creation of the conference room, and if it is determined that more than a predetermined time has passed, the VoIP conference room is closed and a VoIP conference room is established to notify the corresponding client terminal 200 of VoIP disconnection A time monitoring unit 139 is provided.
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0095]
The operation in the eighth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in the channel by the chat server 110. VoIP voice packets from the terminal 200 are controlled (step S251).
The elapsed time since the creation of the VoIP conference room is monitored by the VoIP conference room opening time monitoring unit 139. If the VoIP conference room establishment time monitoring unit 139 determines that the elapsed time since the establishment of the VoIP conference room has exceeded a predetermined time (step S252), the VoIP conference room establishment time monitoring unit 139 closes the corresponding VoIP conference room in the MCU 120 (step S252). S253). At the same time, the VoIP conference room opening time monitoring unit 139 transmits a VoIP disconnection notification to the client terminal 100 (step S254).
[0096]
When the client terminal 200 receives the VoIP disconnection notification from the server terminal 100, the VoIP application 220 displays the VoIP disconnection display by displaying that the corresponding VoIP conference room is closed (step S261).
When the closed VoIP conference room is derived from the channel managed by the chat server 110, the user of the corresponding client terminal 200 returns to the chat communication by the character string conversation message through the original channel. Otherwise, the chat server 110 can be configured to create a new channel.
[0097]
In the eighth embodiment, it is possible to close the VoIP conference room after a certain time and shift to chat communication, and to reduce the burden on the server terminal 100 side.
[Ninth Embodiment]
An outline of a system in which the ninth embodiment of the present invention is adopted is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0098]
While the client terminal 200 performs VoIP telephone communication through the VoIP conference room created in the MCU 120, the client terminal 200 monitors the elapsed time since the terminal joined the VoIP conference room. It is detected whether or not the elapsed time exceeds a predetermined time ((1) in FIG. 9).
When the client terminal 200 determines that the elapsed time since its own terminal joined the VoIP conference room has exceeded a predetermined time, it notifies the VoIP conference room that the VoIP connection has been disconnected ((2) in FIG. 9). ▼).
[0099]
The server terminal 100 provides VoIP telephone communication through the VoIP conference room in the MCU 120. When all the client terminals 200 belonging to the VoIP conference room disconnect the VoIP connection, the VoIP conference room is closed (FIG. 9). (3)).
FIG. 27 shows a control block diagram for constituting the ninth embodiment.
Also in the ninth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0100]
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0101]
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The VoIP application 220 executes VoIP telephone communication with other client terminals 200 through a VoIP conference room set in the server terminal 100. In addition to this function, the own terminal is used as a VoIP conference room. A VoIP conference room participation time monitoring unit 222 that monitors the elapsed time since participation is provided.
[0102]
  The VoIP conference room participation time monitoring unit 222 confirms whether the terminal participates in the VoIP conference room.Et, And when it is determined that the predetermined time has been exceeded, a notification to disconnect the VoIP connection is transmitted to the server 100 side to terminate the VoIP connection.
  The operation in the ninth embodiment will be described with reference to FIG.
  The client terminal 200 connects to a VoIP conference room created in the server terminal 100 in response to a request from the client terminal 200 or a VoIP conference room created by the server terminal 100 derived from the chat channel. VoIP voice packets are transmitted and received (step S271).
[0103]
Here, the VoIP conference room participation time monitoring unit 222 monitors the elapsed time since the own terminal joined the VoIP conference room, and determines whether or not the predetermined time has been exceeded (step S272). The VoIP conference room participation time monitoring unit 222 notifies the server terminal 100 of VoIP disconnection when determining that the elapsed time since the terminal joined the VoIP conference room has exceeded a predetermined time (step S273). Disconnect the VoIP connection to the VoIP conference room you belong to.
Thereafter, the VoIP application 220 displays to the user that the VoIP connection has been terminated (step S274).
[0104]
The server terminal 100 provides a VoIP telephone communication by each client terminal 200 by controlling a voice conversation message from the client terminal 200 belonging to the VoIP conference room created in the MCU 120.
When receiving the VoIP disconnection notification from the client terminal 200, the CM 130 deletes the client terminal 200 from the corresponding VoIP conference room in the VoIP conference room management table, and the client terminal 200 connected to the VoIP conference room It is determined whether or not it exists (step S281).
[0105]
When the CM 130 finds a VoIP conference room in which the connected client terminal 200 disappears, the CM 130 closes the VoIP conference room (step S282).
When the closed VoIP conference room is derived from the channel managed by the chat server 110, the chat communication can be resumed through the derived channel by the chat application 210 on the client terminal 200 side. The CM 130 can also be configured to create a new channel in the chat server 110 from the closed VoIP conference room and transmit this channel information or chat connection request to the corresponding client terminal 200. .
[0106]
According to such a ninth embodiment, it is possible to configure so that the VoIP connection is terminated after a certain time after the own terminal participates in the VoIP conference room, and promptly transitioned to a chat conversation.
[Tenth embodiment]
An overview of a system in which the tenth embodiment of the present invention is employed is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0107]
While the client terminal 200 performs VoIP telephone communication through the VoIP conference room created in the MCU 120, the CM 130 recognizes the voice conversation message in the VoIP conference room and determines whether or not a predetermined character string has appeared. To do. For example, when a voice conversation message is recognized and a character string “end” is included therein, it is determined that a predetermined character string has appeared ((1) in FIG. 10).
When a predetermined character string is detected as a result of voice recognition of the voice conversation message in the VoIP conference room, the CM 130 closes the corresponding VoIP conference room in the MCU 120 ((2) in FIG. 10).
[0108]
At the same time, the CM 130 transmits a notification (disconnection notification) indicating that the VoIP conference room is closed to the client terminals 200 belonging to the closed VoIP conference room ((3) in FIG. 10).
FIG. 28 shows a control block diagram for constituting the tenth embodiment.
Also in the tenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0109]
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0110]
The CM 130 uses the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110. Voice recognition means 140 for recognizing a voice conversation message in a conference room and converting it into a character string, and VoIP termination for determining whether or not a predetermined character string exists in the character string converted by the voice recognition means 140 A keyword extraction unit 141.
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0111]
The operation in the tenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in the channel by the chat server 110. VoIP voice packets from the terminal 200 are controlled (step S291).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S292) and transmitted to the VoIP end keyword extraction unit 141.
[0112]
The VoIP end keyword extraction unit 141 determines whether or not a predetermined character string (end keyword) is included in the converted character string (step S293). The corresponding VoIP conference room is closed (step S294). At the same time, the VoIP end keyword extraction unit 141 transmits a VoIP disconnection notification to the client terminal 100 (step S295).
When the client terminal 200 receives the VoIP disconnection notification from the server terminal 100, the VoIP application 220 displays the VoIP disconnection by displaying that the corresponding VoIP conference room is closed (step S301).
[0113]
When the closed VoIP conference room is derived from the channel managed by the chat server 110, the user of the corresponding client terminal 200 returns to the chat communication by the character string conversation message through the original channel. Otherwise, the chat server 110 can be configured to create a new channel.
In such a tenth embodiment, it is possible to end VoIP telephone communication and promptly shift to chat communication by making a utterance keyword such as “let's end” in a VoIP conference room. To.
[0114]
[Eleventh embodiment]
FIG. 11 shows an outline of a system in which the eleventh embodiment of the present invention is adopted.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0115]
The CM 130 recognizes a voice conversation message transmitted and received in the VoIP conference room of the MCU 120 (FIG. 11 (1)), and sends a character string as a recognition result to the chat server 110 (FIG. 11 (2)).
The chat server 110 transmits the character string information transmitted from the CM 130 to the client terminal 200 as a character string conversation message ((3) in FIG. 11). When the voice conversation message in the conference room for VoIP derived from the channel managed by the chat server 110 is recognized by voice, the character string information can be transmitted only to the client terminal 200 belonging to the channel of the derivation source. It is also possible to transmit the character string information to another specific channel.
[0116]
FIG. 29 shows a control block diagram for constituting the eleventh embodiment.
Also in the eleventh embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0117]
The CM 130 uses the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110. A voice recognition unit 140 that recognizes a voice conversation message in the conference room and converts it into a character string, and a VoIP word extraction unit 142 that transmits the character string converted by the voice recognition unit 140 to the chat server 110 are provided.
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0118]
The operation in the eleventh embodiment will be described with reference to FIG.
On the server terminal 100 side, each client is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in the channel by the chat server 110. VoIP voice packets from the terminal 200 are controlled (step S311).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S312) and transmitted to the VoIP word extraction unit 142.
[0119]
The character string converted from the voice conversation message is transmitted from the VoIP word extraction unit 142 to the chat server 110, and is transmitted from the chat server 110 to the client terminal 200 as a character string conversation message in the channel (step S313).
On the client terminal 200 side, the voice-recognized character string transmitted as a character string conversation message from the server terminal 100 is displayed through the chat application 210 (step S321).
[0120]
In such an eleventh embodiment, it becomes possible for a client terminal not participating in a VoIP conference room to know the content of the conversation in the VoIP conference room.
[Twelfth embodiment]
An outline of a system in which the twelfth embodiment of the present invention is adopted is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0121]
The CM 130 recognizes a voice conversation message transmitted and received in the VoIP conference room of the MCU 120 (FIG. 12 (1)), and sends a character string as a recognition result and a keyword extracted from the character string to the chat server 110 ( Fig. 12 (2)).
The chat server 110 transmits the character string information that is the voice recognition result transmitted from the CM 130 and the extracted keyword to the client terminal 200 as a character string conversation message ((3) in FIG. 12).
The CM 130 creates a VoIP word dedicated channel in the chat server 110 that is different from the channel from which the VoIP conference room is derived, transmits the character string information as a voice recognition result via the VoIP word dedicated channel, and selects the extracted keyword. It can be configured to transmit through the channel from which the VoIP conference room is derived.
[0122]
FIG. 30 shows a control block diagram for constituting the twelfth embodiment.
Also in the twelfth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0123]
  The CM 130 uses the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110. A voice recognition unit 140 that recognizes a voice conversation message in the conference room and converts it into a character string, a VoIP word extraction unit 142 that transmits the character string converted by the voice recognition unit 140 to the chat server 110, Keywords from strings converted byExtractAnd a VoIP word dedicated channel creation unit 144 for creating a dedicated channel in the chat server 110 for transmitting the character string converted by the voice recognition means 140 as a character string conversation message. .
[0124]
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The operation in the twelfth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in the channel by the chat server 110. VoIP voice packets from the terminal 200 are controlled (step S331). At this time, the VoIP word dedicated channel creation unit 144 creates a VoIP word dedicated channel in the chat server 110 (flow S).
[0125]
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S332), and transmitted to the VoIP word extraction unit 142 and the VoIP keyword extraction unit 143.
The character string converted from the voice conversation message is transmitted from the VoIP word extraction unit 142 to the chat server 110 as a VoIP word, and is transmitted from the chat server 110 to the client terminal 200 as a character string conversation message in the VoIP word dedicated channel ( Step S333).
[0126]
The keywords extracted by the VoIP keyword extraction unit 143 are transmitted to the chat server 110 as VoIP keywords, and are transmitted from the chat server 110 to the client terminal 200 as character string conversation messages in the derivation source channel (step S334).
On the client terminal 200 side, the VoIP keyword transmitted as the character string conversation message from the server terminal 100 is displayed as the character string conversation message of the derivation source channel, and the VoIP word transmitted from the server terminal 100 is displayed in the VoIP word dedicated channel. Is displayed as a character string conversation message (step S341).
[0127]
When the VoIP word dedicated channel creation unit 144 creates the VoIP word dedicated channel, it can be configured to notify the channel name information of this VoIP word dedicated channel to the client terminal 200 belonging to the derivation source channel, It is also possible to send channel name information of the VoIP word dedicated channel in the derivation source channel.
The client terminal 200 can recognize the keyword extracted from the voice conversation message as a character string in the derivation source channel even if it is not participating in the VoIP conference room. If you want to connect to the VoIP word dedicated channel, you can refer to the character string of the voice recognition result.
[0128]
[Thirteenth embodiment]
An overview of a system in which the thirteenth embodiment of the present invention is employed is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0129]
The CM 130 recognizes the voice conversation message transmitted and received in the VoIP conference room of the MCU 120 (FIG. 13 (1)), translates the character string as the recognition result (FIG. 13 (2)), and further translates the characters of the translation result. The keyword extracted from the string and the character string is sent to the chat server 110 ((3) in FIG. 13).
The chat server 110 transmits the character string information and the extracted keyword, which are the translation results transmitted from the CM 130, to the client terminal 200 as a character string conversation message ((4) in FIG. 13).
[0130]
The CM 130 creates a VoIP word dedicated channel in the chat server 110 that is different from the channel from which the VoIP conference room is derived, transmits the character string information as a translation result through this VoIP word dedicated channel, and extracts the extracted keyword as VoIP. It can be configured to be transmitted through a source channel of the conference room.
A control block diagram for constituting the thirteenth embodiment is shown in FIG.
Also in the thirteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
[0131]
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0132]
For the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110, the CM 130 recognizes the voice conversation message in the VoIP conference room and converts it into a character string. A VoIP word extraction unit 142 that transmits the character string converted by the voice recognition unit 140 to the chat server 110, a VoIP keyword extraction unit 143 that performs a keyword from the character string converted by the voice recognition unit 140, and a VoIP word extraction unit VoIP word dedicated channel creation unit 144 that creates a dedicated channel in chat server 110 for transmitting the VoIP word transmitted from 142 as a character string conversation message, and the VoIP word and VoIP keyword extracted by VoIP word extraction unit 142 A translation unit 145 that translates the VoIP keywords extracted by the extraction unit 143; It has.
[0133]
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The operation in the thirteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, the VoIP voice packet from each client terminal 200 is controlled through the VoIP conference room created as a result of monitoring the character string conversation message in the channel by the chat server 110 (step S351). At this time, the VoIP word dedicated channel creation unit 144 creates a VoIP word dedicated channel in the chat server 110 (flow S).
[0134]
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S352) and transmitted to the VoIP word extraction unit 142 and the VoIP keyword extraction unit 143.
The VoIP word extraction unit 142 causes the translation unit 145 to translate the character string converted from the voice conversation message, and transmits it to the chat server 110 as a character string conversation message in the VoIP word dedicated channel (step S353).
Further, the VoIP keyword extraction unit 143 extracts a keyword from the character string converted from the voice conversation message, causes the translation unit 145 to translate the keyword, and transmits it to the chat server 110 as a character string conversation message in the derivation source channel ( Step S354).
[0135]
On the client terminal 200 side, the VoIP keyword transmitted as the character string conversation message from the server terminal 100 is displayed as the character string conversation message of the derivation source channel, and the VoIP word transmitted from the server terminal 100 is displayed in the VoIP word dedicated channel. Is displayed as a character string conversation message (step S361).
When the VoIP word dedicated channel creation unit 144 creates the VoIP word dedicated channel, it can be configured to notify the channel name information of this VoIP word dedicated channel to the client terminal 200 belonging to the derivation source channel, It is also possible to send channel name information of the VoIP word dedicated channel in the derivation source channel.
[0136]
In the thirteenth embodiment, the VoIP keyword displayed as a character string in the derivation source channel and the VoIP word displayed as a character string in the VoIP word dedicated channel are displayed in a language different from the voice packet in the VoIP conference room. And can easily understand the contents of the conversation.
[Fourteenth embodiment]
An outline of a system in which the fourteenth embodiment of the present invention is adopted is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0137]
The CM 130 recognizes a voice conversation message transmitted and received in the VoIP conference room of the MCU 120 and stores the contents of the voice conversation message ((1) in FIG. 14).
In addition, the CM 130 transmits a character string that is a result of the voice recognition to the chat server 110 ((2) in FIG. 14).
The chat server 110 transmits character string information, which is a result of voice recognition transmitted from the CM 130, to the client terminal 200 as a character string conversation message (FIG. 14 (3)), and temporarily stores this character string information as a chat log. To store.
[0138]
When the VoIP conference room in the MCU 120 is terminated, the CM 130 notifies the chat server 110 of the name of the saved voice conversation message directory (FIG. 14 (4)).
The chat server 110 associates the received storage directory name with the VoIP word in the chat log, and stores the chat log together with link information to the storage directory of the voice conversation message ((5) in FIG. 14). .
A control block diagram for configuring the fourteenth embodiment is shown in FIG.
[0139]
Also in the fourteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0140]
The CM 130 uses the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110. Voice recognition means 140 for recognizing a voice conversation message in the conference room and converting it into a character string, a VoIP word extracting unit 142 for transmitting the character string converted by the voice recognition means 140 to the chat server 110, and a conference room for VoIP And a VoIP log unit 146 that transmits a storage directory name to the chat server 110.
[0141]
The chat server 110 notifies the client terminal 200 of the VoIP word transmitted from the VoIP word extraction unit 142 of the CM 130 as a character string conversation message in the corresponding channel, and stores the VoIP word as a chat log. A VoIP link unit 113 that stores link information between the storage directory name notified from the log unit 146 and the corresponding VoIP word is provided.
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0142]
The operation in the fourteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring the character string conversation message in the channel by the chat server 110. The VoIP voice packet from 200 is controlled (step S371).
The voice conversation message in the VoIP conference room is transmitted to the VoIP log unit 146 and converted into a character string by the voice recognition unit 140 (step S372), and the VoIP word extracting unit 142 is converted into a character string. Sent to.
[0143]
The VoIP word extraction unit 142 causes the chat server 110 to transmit the VoIP word converted from the voice conversation message to a character string as a character string conversation message in a channel managed by the chat server 110 (step S373). Here, when the VoIP word is based on the voice conversation message in the VoIP conference room derived from the channel managed by the chat server 110, the chat server 110 transmits the message as a character string conversation message in the derivation source channel. Can be configured. Further, in the case of a VoIP word based on a voice conversation message in a VoIP conference room created in response to a request from the client terminal 200, the CM 130 creates a dedicated channel in the chat server 110. It can also be configured to transmit as a string conversation message.
[0144]
In addition, the VoIP log unit 146 stores the voice conversation message in the VoIP conference room as a voice conversation log in a predetermined recording medium (step S374).
When the VoIP conference room in the MCU 120 is closed (step S375), the VoIP log unit 146 obtains a storage directory name that is a storage destination of the stored voice conversation log, and notifies the chat server 110 of this (step S376). ).
In the VoIP link unit 113 of the chat server 110, the VoIP word transmitted from the VoIP word extraction unit 142 is sequentially stored with the chat log, and the storage is transmitted from the VoIP log unit 146 when the VoIP conference room is closed. A link is pasted by associating the directory name with the corresponding character string in the chat log (step S377).
[0145]
On the client terminal 200 side, the VoIP word transmitted as the character string conversation message from the server terminal 100 is displayed as the character string conversation message of the derivation source channel or the dedicated channel, and the voice conversation in the VoIP conference room can be recognized by the character string. (Step S381).
In the fourteenth embodiment configured as described above, when the chat log is verified at a later date, it is possible to refer to the corresponding VoIP log, and it is also possible to check details that are unknown only by the character string.
[0146]
[Fifteenth embodiment]
An overview of a system in which the fifteenth embodiment of the present invention is employed is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0147]
The CM 130 recognizes a voice conversation message transmitted / received in the VoIP conference room of the MCU 120 ((1) in FIG. 15). In addition, the CM 130 transmits a character string that is a result of the voice recognition to the chat server 110 ((2) in FIG. 15).
The chat server 110 transmits character string information, which is a result of voice recognition transmitted from the CM 130, to the client terminal 200 as a character string conversation message ((3) in FIG. 15).
The client terminal 200 displays the character string information received from the server terminal 100 as a character string conversation message in the channel, and accepts an instruction from the user for the character string information ((4) in FIG. 15).
[0148]
When the character string information is clicked, VoIP connection is made to the server terminal 100 and the VoIP conference room corresponding to the character string information is joined ((5) in FIG. 15).
FIG. 33 shows a control block diagram for constituting the fifteenth embodiment.
Also in the fifteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0149]
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0150]
The CM 130 uses the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or the VoIP conference room created in the MCU 120 based on the predetermined condition arrival information from the chat server 110. A voice recognition unit 140 that recognizes a voice conversation message in the conference room and converts it into a character string, and a VoIP word extraction unit 142 that transmits the character string converted by the voice recognition unit 140 to the chat server 110 are provided.
The chat server 110 notifies the client terminal 200 of the VoIP word transmitted from the VoIP word extraction unit 142 of the CM 130 as a character string conversation message in the corresponding channel.
[0151]
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The chat application 210 displays the string conversation message in the channel so that it can be recognized as a VoIP word based on the voice conversation message in a specific VoIP conference room, and when this VoIP word is clicked by the user, A VoIP connection unit 213 that issues a request to the application to connect to the corresponding VoIP conference room is provided.
[0152]
The operation in the fifteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring the character string conversation message in the channel by the chat server 110. The VoIP voice packet from 200 is controlled (step S391).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S392), and is transmitted to the chat server 110 as a VoIP word converted into a character string.
[0153]
The chat server 110 transmits the VoIP word converted into a character string as a character string conversation message in a predetermined channel, and the corresponding VoIP conference room information and the VoIP conference room are derived from the chat channel. In that case, the derivation source channel information and the like are transmitted to the client terminal 200 (step S393).
On the client terminal 200 side, the VoIP word transmitted as the character string conversation message from the server terminal 100 is displayed as the character string conversation message of the derivation source channel or the dedicated channel (step S401). The VoIP word connection unit 213 associates the displayed VoIP word with the VoIP conference room information transmitted from the server terminal 100 (step S402), and when the user clicks on the VoIP word, the VoIP word connection unit 213 accesses the VoIP conference room. Configure to make a connection.
[0154]
In the fifteenth embodiment as described above, the voice conversation in the VoIP conference room is displayed as a character string on the chat application 210 of the client 200, the contents can be easily grasped, and the displayed VoIP word is displayed. You can easily join a VoIP conference room with just a click.
[Sixteenth Embodiment]
An overview of a system in which the sixteenth embodiment of the present invention is adopted is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0155]
The CM 130 recognizes a voice conversation message transmitted / received in the VoIP conference room of the MCU 120 and detects whether or not the personal name and the calling keyword are included in the voice conversation message ((1) in FIG. 16).
When the CM 130 detects the personal name and the calling keyword, it acquires the IP address of the corresponding client terminal 200 and notifies the client terminal 200 of a VoIP connection request ((2) in FIG. 16).
In the client terminal 200 that receives the VoIP connection request from the server terminal 100, when the user using the client terminal 200 responds ((3) in FIG. 16), the voice conversation message transmitted through the client terminal 200 Is sent to the MCU 120 through the CM 130 and controlled as a voice conversation message in the VoIP conference room.
[0156]
A control block diagram for configuring the sixteenth embodiment is shown in FIG.
Also in the sixteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0157]
The CM 130 receives the IP address registration from the client terminal 200 belonging to the channel managed by the chat server 110 and stores it in the IP address table 132, and the client IP address registration unit 131 sends the IP of the client terminal 200. An IP address acquisition unit 133 for acquiring an address, a VoIP connection request unit 134 for transmitting a VoIP connection request to the client terminal 200 having the IP address acquired by the IP address acquisition unit 133, and a VoIP conference created in the MCU 120 Voice recognition means 140 for recognizing a voice conversation message in the conference room for VoIP and converting it into a character string, and a VoIP individual for detecting a personal name and a calling keyword in the character string converted by the voice recognition means 140 A call extraction unit 147.
[0158]
The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. And a VoIP application 220 that constitutes a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The operation in the sixteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring the character string conversation message in the channel by the chat server 110. The VoIP voice packet from 200 is controlled (step S411).
[0159]
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S412), and the converted character string information is transmitted to the VoIP personal call extraction unit 147.
The VoIP personal call extraction unit 147 determines whether or not there is a personal name and a call keyword in the converted character string information (step S413). If the personal name and the call keyword exist, the corresponding personal is detected. The user name used by the name is acquired and notified to the IP address acquisition unit 133 (step S415).
[0160]
The IP address acquisition unit 133 refers to the IP address table 132 of the client IP address registration unit 131, and acquires the IP address of the client terminal 200 corresponding to the user name (step S415).
The IP address acquisition unit 133 sets the IP address acquired from the client IP address registration unit 131 and the user name as a set, and notifies the VoIP connection request unit 134 of this (step S416).
Based on the notified IP address and user name, the VoIP connection request unit 134 notifies the corresponding client terminal 200 of the VoIP connection request and makes a connection request to the called VoIP conference room (step) S417).
[0161]
In the client terminal 200, when the VoIP connection request notification is received from the server terminal 100 side, the application displays that fact and makes the user select whether or not to respond to the VoIP connection (step S421). When the user gives an instruction to respond to the VoIP connection request, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation (step S422).
Upon receiving the VoIP connection request notification, for example, the client terminal 200 can be configured to launch a VoIP conference connection request dialog 540 as shown in FIG. In this VoIP conference connection request dialog 540, a notification type bar 541 indicating that the notification type is a VoIP conference connection request, a content display unit 542 for displaying the name of the conference room for VoIP that has been called, and consent to participate An approval button 543 for instructing to do, a rejection button 544 for instructing not to agree to participate, and the like. When the user agrees to participate in the VoIP conference room, clicking the accept button 543 enables the VoIP application 220 of the client terminal 200 to connect to the corresponding VoIP conference room, and the voice over the VoIP telephone. You can transition to conversation.
[0162]
In the sixteenth embodiment, by calling a user name that wants to participate in a VoIP conference room in a conversation, the user is automatically contacted and the trouble of dialing a telephone number can be saved. it can.
[Seventeenth embodiment]
FIG. 17 shows an outline of a system in which the seventeenth embodiment of the present invention is adopted.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0163]
The CM 130 recognizes a voice conversation message transmitted / received in the VoIP conference room of the MCU 120 and detects whether or not the personal name and the calling keyword are included in the voice conversation message ((1) in FIG. 17).
When the CM 130 detects the personal name and the calling keyword, the CM 130 notifies the VoIP conference room information to the client terminal 200 of the corresponding user name ((2) in FIG. 17).
In the client terminal 200 that has received the VoIP conference room information from the server terminal 100, when the client terminal 200 connects to the VoIP conference room ((3) in FIG. 17), it is transmitted through the client terminal 200. The incoming voice conversation message is sent to the MCU 120 through the CM 130 and controlled as a voice conversation message in the VoIP conference room.
[0164]
A control block diagram for constituting the seventeenth embodiment is shown in FIG.
Also in the seventeenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls character string conversation messages in the channel and provides chat communication using character strings among the plurality of client terminals 200. The chat server 110 transmits predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel, detection of a specific character string, and the like as in the above-described embodiment, and the corresponding VoIP is stored in the MCU 120. A conference room can be created, and a corresponding VoIP connection request or VoIP conference room information can be notified to the corresponding client terminal 200.
[0165]
For the VoIP conference room created in the MCU 120, the CM 130 recognizes the voice conversation message in the VoIP conference room by voice and converts it into a character string, and the character string converted by the voice recognition unit 140. VoIP personal call extraction unit 147 for detecting a personal name and a calling keyword in the inside, and chatting information on the VoIP conference room where the corresponding client terminal 200 is called based on information from VoIP personal call extraction unit 147 And a VoIP conference room notification unit 135 that transmits via the server 110.
[0166]
  The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. Send and receive voice conversation messages in the meeting roomForAnd a VoIP application 220 constituting a VoIP client.
  The chat application 210 connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135, in addition to a chat function for transmitting and receiving character string conversation messages in the channel managed by the chat server 110. A VoIP connection unit 211 is provided.
[0167]
The operation in the seventeenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring the character string conversation message in the channel by the chat server 110. The VoIP voice packet from 200 is controlled (step S431).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S432), and the converted character string information is transmitted to the VoIP personal call extraction unit 147.
[0168]
The VoIP personal call extraction unit 147 determines whether or not there is a personal name and a calling keyword in the converted character string information (step S433). If the personal name and the calling keyword exist, the corresponding personal is extracted. The user name corresponding to the name is acquired and notified to the VoIP conference room notification unit 135 (step S434).
The VoIP conference room notification unit 135 notifies the corresponding client terminal 200 of the called VoIP conference room information based on the notified user name (step S435).
[0169]
When the client terminal 200 receives a notification of the VoIP conference room from the server terminal 100 side, the client terminal 200 displays that fact via the chat application 210 and allows the user to select whether or not to connect to the VoIP conference room. (Step S441). When the user gives an instruction to make a VoIP connection, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation (step S442).
The client terminal 200 that has received the notification of the VoIP conference room can be configured to launch a VoIP conference room notification dialog 550 as shown in FIG. 60, for example. In this VoIP conference room notification dialog 550, a notification type bar 551 indicating that the type of notification is a VoIP conference room notification, a content display unit 552 for displaying the content of “Called by VoIP conference room“ VoIP ””, An approval button 553 for instructing to agree to participate, a reject button 554 for instructing not to agree to participate, and the like are provided. When the user agrees to participate in the VoIP conference room, clicking the accept button 553 enables the VoIP application 220 of the client terminal 200 to connect to the corresponding VoIP conference room, and the voice over the VoIP telephone. You can transition to conversation.
[0170]
In such a seventeenth embodiment, by calling a user name that wants to participate in a VoIP conference room in a conversation, the user is automatically contacted and the trouble of dialing a telephone number can be saved. it can.
[Eighteenth Embodiment]
An overview of a system in which the eighteenth embodiment of the present invention is employed is shown in FIG.
Similarly to the first embodiment, the server terminal 100 and the plurality of client terminals 200 and 200 are connected on the network, and any one of the channels which are a plurality of character string conversation spaces set up on the network is selected. Realizes chat communication to be shared or VoIP telephone communication to share one of the VoIP conference rooms, which are multiple voice conversation spaces set up on the network.
[0171]
The CM 130 recognizes a voice conversation message transmitted and received in the VoIP conference room of the MCU 120, and detects whether or not a predetermined character string is included in the voice conversation message ((1) in FIG. 18). For example, when the CM 130 detects the word “chat” in the voice conversation message in the VoIP conference room, it requests the chat server 110 to open a channel corresponding to the VoIP conference room (see FIG. 18 (2)).
The chat server 110 notifies the client terminal 200 belonging to the conference room for VoIP to invite to the channel established in response to a request from the CM 130 ((3) in FIG. 18).
[0172]
FIG. 36 shows a control block diagram for constituting the eighteenth embodiment.
Also in the eighteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
For the VoIP conference room in the MCU 120, the CM 130 recognizes a voice conversation message in the VoIP conference room and converts it into a character string, and a predetermined character string converted by the voice recognition unit 140. A chat transition keyword extraction unit 148 that notifies the chat server 110 of a channel opening request when the character string is detected.
[0173]
  Based on the channel opening request transmitted from the chat transition keyword extraction unit 148, the chat server 110 creates a channel creation unit 114 that creates a channel corresponding to the VoIP conference room and sends an invite notification to the corresponding client terminal. I have.
  The client terminal 200 includes a chat application 210 that constitutes a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP for management managed by the MCU 120 of the server terminal 100. Send and receive voice conversation messages in the meeting roomForAnd a VoIP application 220 constituting a VoIP client.
[0174]
The operation in the eighteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, the VoIP voice packet from each client terminal 200 is controlled through the VoIP conference room in the MCU 120 (step S451).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S452), and the converted character string information is transmitted to the chat transition keyword extraction unit 148.
The chat transition keyword extraction unit 148 determines whether or not there is a keyword corresponding to the chat transition in the converted character string information (step S453). If the chat transition keyword exists, the chat transition keyword extraction unit 148 determines whether the chat transition keyword exists. A channel opening request is notified to the terminal (step S454).
[0175]
The channel creation unit 114 of the chat server 110 creates a channel corresponding to the VoIP conference room notified from the chat transition keyword extraction unit 148 (step S455), and sends it to the client terminals 200 participating in the VoIP conference room. On the other hand, an invite notification is made to the established channel (step S456).
In response to the invite notification from the server terminal 100, the client terminal 200 displays the information such as the corresponding channel name by the chat application 210 and performs an invite display indicating that it has been invited (step S461). When the user connects to the channel in response to the invitation notification, communication by the character string conversation message can be started through the chat application 210.
[0176]
In the eighteenth embodiment, simply by making a specific remark in the VoIP conference room (such as “Let's move to chat”), the user can move to the chat from the VoIP conference room. It is possible to save the time and effort of establishment and negotiations between users.
[Other Embodiments]
Of the functions of the above-described embodiments, a configuration including two or more functions may be employed, and a combination thereof may be freely configured.
<Appendix>
(Appendix 1)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on the network with a plurality of clients connected via the network, and a character string transmitted via the client A chat server that allows simultaneous communication by characters on the channel between a plurality of users by controlling conversation messages;
Conversation monitoring means for outputting predetermined condition arrival information when a predetermined condition is reached by monitoring a character string conversation message in a channel managed by the chat server;
VoIP notification means for acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP transition notification for prompting VoIP connection to each IP address;
A plurality of virtual voice conversation spaces (hereinafter referred to as VoIP conference rooms) set up on the network are shared with a plurality of clients connected via the network, and transmitted via the clients. VoIP conference room for clients to which simultaneous communication by voice on the VoIP conference room is performed among a plurality of users by controlling voice conversation messages, and VoIP transition notification is made by the VoIP notification means A VoIP server that provides
A multi-channel conversation server comprising:
[0177]
(Appendix 2)
The multi-channel conversation server according to appendix 1, wherein the conversation monitoring unit determines that a predetermined condition is satisfied when an appearance rate of a character string conversation message in a channel exceeds a predetermined value within a predetermined time.
(Appendix 3)
The multi-channel conversation server according to appendix 1, wherein the conversation monitoring unit determines that a predetermined condition is met when a specific character string appears in a character string conversation message in a channel.
[0178]
(Appendix 4)
Voice synthesis means for converting a specific character string in the character string conversation message detected by the conversation monitoring means into voice data;
VoIP calling means for notifying the client belonging to the corresponding channel of the voice data converted by the voice synthesis means;
The multi-channel conversation server according to appendix 3, further comprising:
(Appendix 5)
The multi-channel conversation according to any one of appendices 1 to 4, wherein the VoIP notification means sets a VoIP conference room of a corresponding channel to a VoIP server and transmits a VoIP connection request notification to a client belonging to the channel. server.
[0179]
(Appendix 6)
VoIP voice monitoring means for outputting predetermined condition arrival information when a voice conversation message in a VoIP conference room managed by the VoIP server is monitored and a predetermined condition is met, and predetermined condition arrival information from the VoIP voice monitoring means VoIP termination means for terminating the VoIP conference room managed by the VoIP server based on
The multi-channel conversation server according to any one of appendices 1 to 5, further comprising:
(Appendix 7)
The multi-channel conversation server according to appendix 6, wherein the VoIP voice monitoring means determines that a predetermined condition has been met when a voice packet amount in the VoIP conference room is a predetermined value or less.
[0180]
(Appendix 8)
The multi-channel conversation server according to appendix 6, wherein the VoIP voice monitoring means determines that a predetermined condition has been satisfied when a voice conversation message in the VoIP conference room is recognized and a specific keyword is extracted.
(Appendix 9)
The multi-channel conversation server according to appendix 6, wherein the VoIP voice monitoring means determines that a predetermined condition has been reached when an elapsed time since the setting of the VoIP conference room exceeds a predetermined value.
[0181]
(Appendix 10)
The multi-channel conversation according to any one of appendices 6 to 9, wherein the VoIP termination means transmits a chat transition notification that urges a client belonging to the VoIP conference room to transition to a channel managed by the chat server. server.
(Appendix 11)
Voice recognition means for recognizing voice conversion messages in the conference room for VoIP and converting them into character string information;
A converted character string notification means for transmitting the character string information converted by the voice recognition means to a client belonging to the channel as a character string conversation message in a channel managed by the chat server;
The multi-channel conversation server according to any one of appendices 1 to 10, further comprising:
[0182]
(Appendix 12)
A chat log managing means for managing a character string conversation message in the channel as a chat log including character string information transmitted by the converted character string notifying means;
VoIP log management means for managing a voice conversation message in a VoIP conference room managed by the VoIP server as a VoIP log;
VoIP link means for linking the character string information transmitted by the converted character string notification means in the chat log managed by the chat log management means with the corresponding location in the VoIP log managed by the VoIP log management means,
The multi-channel conversation server according to appendix 11, further comprising:
[0183]
(Appendix 13)
Voice recognition means for recognizing voice conversion messages in the conference room for VoIP and converting them into character string information;
Keyword extraction means for extracting character strings that are characteristic of conversation in the VoIP conference room from character string information converted by the voice recognition means;
VoIP word transmission means for setting a VoIP dedicated channel capable of controlling a conversation message by a character string, and transmitting character string information converted by the voice recognition means to each client via the VoIP dedicated channel;
Keyword notification means for transmitting the character string extracted by the keyword extraction means to a client belonging to the channel as a character string conversation message in a channel managed by the chat server;
The multi-channel conversation server according to any one of appendices 1 to 10, further comprising:
[0184]
(Appendix 14)
The multi-channel conversation server according to any one of appendices 11 to 13, further comprising a translation unit that translates the character string information converted by the voice recognition unit into another language.
(Appendix 15)
Voice recognition means for recognizing voice conversion messages in the conference room for VoIP and converting them into character string information;
When a character string specifying an individual who is not connected to the VoIP conference room is detected from the character string information converted by the voice recognition means, an IP address for calling the specified individual is acquired to prompt VoIP connection Personal call means for sending a VoIP transition notification to the IP address,
The multi-channel conversation server according to appendix 1, further comprising:
[0185]
(Appendix 16)
A plurality of virtual voice conversation spaces (hereinafter referred to as VoIP conference rooms) set up on the network are shared with a plurality of clients connected via the network, and transmitted via the clients. A VoIP server that allows simultaneous voice communication on the VoIP conference room among a plurality of users by controlling voice conversation messages;
Voice monitoring means for outputting predetermined condition arrival information when a predetermined condition is reached by monitoring a voice conversation message in the VoIP conference room;
A chat notification means for transmitting a chat transition notification for prompting a chat connection to a client belonging to the corresponding VoIP conference room based on the predetermined condition arrival information output from the voice monitoring means;
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on the network with a plurality of clients connected via the network, and a character string transmitted via the client Chat for controlling a conversation message to perform simultaneous communication by characters on the channel among a plurality of users, and providing a chat channel for a client who has been notified of chat transition by the chat notification means Server,
A multi-channel conversation server comprising:
[0186]
(Appendix 17)
The voice monitoring means is
Voice recognition means for recognizing a voice conversation message in the VoIP conference room and converting it into character string information;
A chat transition keyword extraction unit that determines that a predetermined condition is satisfied when a specific character string is detected in the character string information converted by the voice recognition unit;
The multi-channel conversation server according to supplementary note 16, comprising:
[0187]
(Appendix 18)
A virtual character string conversation space (hereinafter referred to as a channel) set up on the network is shared with a chat server connected to the network, and character string conversation messages are exchanged with other users. A chat client for simultaneous communication,
A virtual voice conversation space connected to the network (hereinafter referred to as a VoIP conference room) is shared with a VoIP server connected to the network, and voice conversation messages are exchanged with other users. A VoIP client for simultaneous communication,
VoIP transition means for connecting the VoIP client to the notified VoIP conference room when receiving a VoIP transition notification for prompting VoIP connection from the chat server side regarding the channel to which the chat client is connected;
Multichannel conversation client with.
[0188]
(Appendix 19)
VoIP traffic monitoring means for monitoring the amount of voice packets transmitted from the own terminal to the VoIP conference room and terminating the connection to the VoIP conference room by the VoIP client when it is determined that the voice packet is below a predetermined value. The multi-channel conversation client according to appendix 18, which is provided.
(Appendix 20)
Appendix 18 further includes VoIP connection time monitoring means for terminating connection to the VoIP conference room by the VoIP client when it is determined that a predetermined time has elapsed since the connection to the VoIP conference room by the VoIP transition means. The listed multi-channel conversation client.
[0189]
(Appendix 21)
VoIP word display means for receiving character string information converted by voice recognition of the voice conversation message in the VoIP conference room on the VoIP server side, and displaying it as a character string conversation message via the chat client;
VoIP connection means for accepting a selection instruction for character string information displayed by the VoIP word display means, and connecting the VoIP client to a corresponding VoIP conference room;
The multi-channel conversation client according to any one of appendices 18 to 20, further comprising:
[0190]
(Appendix 22)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on the network with a plurality of clients connected via the network, and a character string transmitted via the client A chat server that allows simultaneous communication by characters on the channel between a plurality of users by controlling conversation messages;
Conversation monitoring means for outputting predetermined condition arrival information when a predetermined condition is reached by monitoring a character string conversation message in a channel managed by the chat server;
VoIP notification means for acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP transition notification for prompting VoIP connection to each IP address;
A plurality of virtual voice conversation spaces (hereinafter referred to as VoIP conference rooms) set up on the network are shared with a plurality of clients connected via the network, and transmitted via the clients. VoIP conference room for clients to which simultaneous communication by voice on the VoIP conference room is performed among a plurality of users by controlling voice conversation messages, and VoIP transition notification is made by the VoIP notification means A VoIP server that provides
A chat client that shares a channel with the chat server and performs simultaneous communication by transmitting and receiving a string conversation message with another user;
A VoIP client that shares a VoIP conference room with the VoIP server and sends and receives voice conversation messages with other users for simultaneous communication;
VoIP transition means for connecting the VoIP client to a VoIP conference room provided by the VoIP server when the chat client receives a VoIP transition notification by the VoIP notification means for the channel being connected;
Including multi-channel conversation system.
[0191]
(Appendix 23)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) established on the network are shared between a plurality of clients and a chat server connected via the network, and transmitted via the clients. Controlling a character string conversation message to perform simultaneous character communication on the channel between a plurality of users; and
Monitoring the string conversation message in the channel and outputting predetermined condition arrival information when a predetermined condition is reached;
Obtaining an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information, and transmitting a VoIP transition notification for prompting a VoIP connection to each IP address;
A voice transmitted through the client, sharing a virtual voice conversation space (hereinafter referred to as a VoIP conference room) established on the network between the client that has transmitted the VoIP transition notification and the VoIP server. Controlling voice messages on the VoIP conference room among a plurality of users by controlling conversation messages; and
Multi-channel conversation method including.
[0192]
(Appendix 24)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on the network with a plurality of clients connected via the network, and a character string transmitted via the client A chat server that allows simultaneous communication by characters on the channel between a plurality of users by controlling conversation messages;
Conversation monitoring means for outputting predetermined condition arrival information when a predetermined condition is reached by monitoring a character string conversation message in a channel managed by the chat server;
VoIP notification means for acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP transition notification for prompting VoIP connection to each IP address;
A plurality of virtual voice conversation spaces (hereinafter referred to as VoIP conference rooms) set up on the network are shared with a plurality of clients connected via the network, and transmitted via the clients. VoIP conference room for clients to which simultaneous communication by voice on the VoIP conference room is performed among a plurality of users by controlling voice conversation messages, and VoIP transition notification is made by the VoIP notification means A VoIP server that provides
A program for causing a computer to function as a multi-channel conversation server.
[0193]
(Appendix 25)
A virtual character string conversation space (hereinafter referred to as a channel) set up on the network is shared with a chat server connected to the network, and character string conversation messages are exchanged with other users. A chat client for simultaneous communication,
A virtual voice conversation space connected to the network (hereinafter referred to as a VoIP conference room) is shared with a VoIP server connected to the network, and voice conversation messages are exchanged with other users. A VoIP client for simultaneous communication,
VoIP transition means for connecting the VoIP client to the notified VoIP conference room when receiving a VoIP transition notification for prompting VoIP connection from the chat server side regarding the channel to which the chat client is connected;
A program for causing a computer to function as a multi-channel conversation client.
[0194]
(Appendix 26)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) established on the network are shared between a plurality of clients and a chat server connected via the network, and transmitted via the clients. Controlling a character string conversation message to perform simultaneous character communication on the channel between a plurality of users; and
Monitoring the string conversation message in the channel and outputting predetermined condition arrival information when a predetermined condition is reached;
Obtaining an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information, and transmitting a VoIP transition notification for prompting a VoIP connection to each IP address;
A voice transmitted through the client, sharing a virtual voice conversation space (hereinafter referred to as a VoIP conference room) established on the network between the client that has transmitted the VoIP transition notification and the VoIP server. Controlling voice messages on the VoIP conference room among a plurality of users by controlling conversation messages; and
A program for causing a computer to execute a multi-channel conversation method including:
[0195]
【The invention's effect】
According to the present invention, a chat system using a character string conversation message and a VoIP telephone system using a voice conversation message are linked so that a user can input a telephone number, establish a VoIP conference room, or a chat channel. Can be saved and labor can be saved by omitting negotiation for transition between users, and the interruption time of the conference can be minimized.
[Brief description of the drawings]
FIG. 1 is a schematic explanatory diagram of a first embodiment.
FIG. 2 is a schematic explanatory diagram of a second embodiment.
FIG. 3 is a schematic explanatory diagram of a third embodiment.
FIG. 4 is a schematic explanatory diagram of a fourth embodiment.
FIG. 5 is a schematic explanatory diagram of a fifth embodiment.
FIG. 6 is a schematic explanatory diagram of a sixth embodiment.
FIG. 7 is a schematic explanatory diagram of a seventh embodiment.
FIG. 8 is a schematic explanatory diagram of an eighth embodiment.
FIG. 9 is a schematic explanatory diagram of a ninth embodiment.
FIG. 10 is a schematic explanatory diagram of a tenth embodiment.
FIG. 11 is a schematic explanatory diagram of an eleventh embodiment.
FIG. 12 is a schematic explanatory diagram of a twelfth embodiment.
FIG. 13 is a schematic explanatory diagram of a thirteenth embodiment.
FIG. 14 is a schematic explanatory diagram of a fourteenth embodiment.
FIG. 15 is a schematic explanatory diagram of a fifteenth embodiment.
FIG. 16 is a schematic explanatory diagram of a sixteenth embodiment.
FIG. 17 is a schematic explanatory diagram of a seventeenth embodiment.
FIG. 18 is a schematic explanatory diagram of an eighteenth embodiment.
FIG. 19 is a control block diagram of the first embodiment.
FIG. 20 is a control block diagram according to the second embodiment.
FIG. 21 is a control block diagram according to the third embodiment.
FIG. 22 is a control block diagram of the fourth embodiment.
FIG. 23 is a control block diagram according to the fifth embodiment.
FIG. 24 is a control block diagram of a sixth embodiment.
FIG. 25 is a control block diagram according to the seventh embodiment.
FIG. 26 is a control block diagram according to the eighth embodiment.
FIG. 27 is a control block diagram according to the ninth embodiment.
FIG. 28 is a control block diagram according to the tenth embodiment.
FIG. 29 is a control block diagram of an eleventh embodiment.
FIG. 30 is a control block diagram according to the twelfth embodiment.
FIG. 31 is a control block diagram according to a thirteenth embodiment.
FIG. 32 is a control block diagram according to the fourteenth embodiment.
FIG. 33 is a control block diagram according to a fifteenth embodiment.
FIG. 34 is a control block diagram according to the sixteenth embodiment.
FIG. 35 is a control block diagram according to a seventeenth embodiment.
FIG. 36 is a control block diagram according to an eighteenth embodiment.
FIG. 37 is a flowchart of the first embodiment.
FIG. 38 is a flowchart of the second embodiment.
FIG. 39 is a flowchart of the third embodiment.
FIG. 40 is a flowchart of the fourth embodiment.
FIG. 41 is a flowchart of the fifth embodiment.
FIG. 42 is a flowchart of the sixth embodiment.
FIG. 43 is a flowchart of the seventh embodiment.
FIG. 44 is a flowchart of the eighth embodiment.
FIG. 45 is a flowchart of the ninth embodiment.
FIG. 46 is a flowchart of the tenth embodiment.
FIG. 47 is a flowchart of the eleventh embodiment.
FIG. 48 is a flowchart of the twelfth embodiment.
FIG. 49 is a flowchart of the thirteenth embodiment.
FIG. 50 is a flowchart according to the fourteenth embodiment.
FIG. 51 is a flowchart according to a fifteenth embodiment.
FIG. 52 is a flowchart of the sixteenth embodiment.
FIG. 53 is a flowchart of the seventeenth embodiment.
FIG. 54 is a flowchart of the eighteenth embodiment.
FIG. 55 is an explanatory diagram of a VoIP conference connection request dialog.
FIG. 56 is an explanatory diagram of a VoIP conference room notification dialog.
FIG. 57 is an explanatory diagram of a VoIP conference connection request dialog.
FIG. 58 is an explanatory diagram of a VoIP conference room notification dialog.
FIG. 59 is an explanatory diagram of a VoIP conference connection request dialog.
FIG. 60 is an explanatory diagram of a VoIP conference room notification dialog.

Claims (12)

ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージが所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのうち前記所定条件に該当する文字列会話メッセージの発信元となるクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間であるVoIP用会議室を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するとともに、当該VoIP会議室上で送受信される音声会話メッセージを音声認識し、音声認識された文字列情報を前記チャットサーバに送出するVoIPサーバと、
を備えるマルチチャネル会話サーバ。
A plurality of virtual character string conversation spaces established on the network are shared with a plurality of clients connected via the network, and character string conversation messages transmitted via the client are controlled. A chat server that allows simultaneous communication on the channel among a plurality of users by text,
Conversation monitoring means for outputting predetermined condition arrival information when a character string conversation message in a channel managed by the chat server becomes a predetermined condition;
Based on the predetermined condition arrival information output from the conversation monitoring means, obtains the IP address of the client that is the source of the character string conversation message corresponding to the predetermined condition among the clients belonging to the corresponding channel, and prompts the VoIP connection VoIP notification means for sending a VoIP transition notification for each IP address,
A VoIP conference room, which is a plurality of virtual voice conversation spaces set up on the network, is shared with a plurality of clients connected via the network, and voice conversation messages transmitted via the clients are shared. be those to perform simultaneous communication by voice over the VoIP conference rooms among multiple users by controlling, as well as providing a VoIP conference room for clients VoIP transition notification is made by the VoIP notifying means , A VoIP server that recognizes a voice conversation message transmitted and received on the VoIP conference room, and sends the character string information recognized by the voice to the chat server ;
A multi-channel conversation server comprising:
前記会話監視手段は、チャネル内における文字列会話メッセージの出現率が所定時間内において所定値を超えた場合に所定条件になったと判断する、請求項1に記載のマルチチャネル会話サーバ。  The multi-channel conversation server according to claim 1, wherein the conversation monitoring means determines that a predetermined condition is satisfied when the appearance rate of the character string conversation message in the channel exceeds a predetermined value within a predetermined time. 前記会話監視手段は、チャネル内における文字列会話メッセージ中に特定の文字列が出現した場合に所定条件になったと判断する、請求項1に記載のマルチチャネル会話サーバ。  The multi-channel conversation server according to claim 1, wherein the conversation monitoring means determines that a predetermined condition is met when a specific character string appears in a character string conversation message in a channel. 前記VoIP通知手段は、対応するチャネルのVoIP用会議室をVoIPサーバに設定し、前記チャネルに属するクライアントに対してVoIP接続要求通知を送信する、請求項1〜3のいずれかに記載のマルチチャネル会話サーバ。  The multi-channel according to any one of claims 1 to 3, wherein the VoIP notification means sets a VoIP conference room of a corresponding channel to a VoIP server and transmits a VoIP connection request notification to a client belonging to the channel. Conversation server. 前記VoIPサーバが管理するVoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力するVoIP音声監視手段と、
前記VoIP音声監視手段からの所定条件到達情報に基づいて前記VoIPサーバが管理するVoIP用会議室を終了させるVoIP終了手段と、
をさらに備える請求項1〜4のいずれかに記載のマルチチャネル会話サーバ。
VoIP voice monitoring means for outputting predetermined condition arrival information when a predetermined condition is reached by monitoring a voice conversation message in a VoIP conference room managed by the VoIP server;
VoIP termination means for terminating the VoIP conference room managed by the VoIP server based on the predetermined condition arrival information from the VoIP voice monitoring means,
The multi-channel conversation server according to claim 1, further comprising:
前記VoIP音声監視手段は、前記VoIP用会議室内における音声パケット量が所定値以下になった場合に所定条件になったと判断する、請求項5に記載のマルチチャネル会話サーバ。  6. The multi-channel conversation server according to claim 5, wherein the VoIP voice monitoring means determines that a predetermined condition is met when a voice packet amount in the VoIP conference room is a predetermined value or less. 前記VoIP音声監視手段は、前記VoIP用会議室内における音声会話メッセージを音声認識し特定のキーワードを抽出した場合に所定条件になったと判断する、請求項5に記載のマルチチャネル会話サーバ。  6. The multi-channel conversation server according to claim 5, wherein said VoIP voice monitoring means judges that a predetermined condition has been met when voice recognition is performed on a voice conversation message in the VoIP conference room and a specific keyword is extracted. 前記VoIP音声監視手段は、前記VoIP用会議室が設定されてからの経過時間が所定値を超えた場合に所定条件になったと判断する、請求項5に記載のマルチチャネル会話サーバ。  6. The multi-channel conversation server according to claim 5, wherein the VoIP voice monitoring means determines that a predetermined condition is met when an elapsed time since the VoIP conference room is set exceeds a predetermined value. 前記VoIP終了手段は、前記VoIP用会議室に属するクライアントに対して前記チャットサーバが管理するチャネルに移行することを促すチャット移行通知を送信する、請求項5〜8のいずれかに記載のマルチチャネル会話サーバ。  The multi-channel according to any one of claims 5 to 8, wherein the VoIP termination means transmits a chat transition notification that urges a client belonging to the VoIP conference room to transition to a channel managed by the chat server. Conversation server. ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージが所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのうち前記所定条件に該当する文字列会話メッセージの発信元となるクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間であるVoIP用会議室を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するとともに、当該VoIP会議室上で送受信される音声会話メッセージを音声認識し、音声認識された文字列情報を前記チャットサーバに送出するVoIPサーバと、
前記チャットサーバとの間でチャネルを共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
前記VoIPサーバとの間でVoIP用会議室を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記VoIP通知手段によりVoIP移行通知を受信した場合に、前記VoIPサーバが提供するVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を含むマルチチャネル会話システム。
A plurality of virtual character string conversation spaces established on the network are shared with a plurality of clients connected via the network, and character string conversation messages transmitted via the client are controlled. A chat server that allows simultaneous communication on the channel among a plurality of users by text,
Conversation monitoring means for outputting predetermined condition arrival information when a character string conversation message in a channel managed by the chat server becomes a predetermined condition;
Based on the predetermined condition arrival information output from the conversation monitoring means, obtains the IP address of the client that is the source of the character string conversation message corresponding to the predetermined condition among the clients belonging to the corresponding channel, and prompts the VoIP connection VoIP notification means for sending VoIP transition notification to each IP address,
A VoIP conference room, which is a plurality of virtual voice conversation spaces set up on the network, is shared with a plurality of clients connected via the network, and voice conversation messages transmitted via the clients are shared. be those to perform simultaneous communication by voice over the VoIP conference rooms among multiple users by controlling, as well as providing a VoIP conference room for clients VoIP transition notification is made by the VoIP notifying means , A VoIP server that recognizes a voice conversation message transmitted and received on the VoIP conference room, and sends the character string information recognized by the voice to the chat server ;
A chat client that shares a channel with the chat server and performs simultaneous communication by transmitting and receiving a string conversation message with another user;
A VoIP client that shares a VoIP conference room with the VoIP server and sends and receives voice conversation messages with other users for simultaneous communication;
VoIP transition means for connecting the VoIP client to a VoIP conference room provided by the VoIP server when the chat client receives a VoIP transition notification by the VoIP notification means for the channel being connected;
Including multi-channel conversation system.
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージが所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのうち前記所定条件に該当する文字列会話メッセージの送信元となるクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間であるVoIP用会議室を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるとともに、当該VoIP会議室上で送受信される音声会話メッセージを音声認識し、音声認識された文字列情報を前記チャットサーバに送出させる段階と、
を含むマルチチャネル会話方法。
A string conversation that is transmitted via a client, sharing a channel, which is a plurality of virtual character string conversation spaces established on the network, between a plurality of clients and a chat server connected via the network Allowing simultaneous textual communication on the channel between a plurality of users by controlling messages; and
Outputting predetermined condition arrival information when a character string conversation message in the channel becomes a predetermined condition;
Obtain the IP address of the client that is the transmission source of the character string conversation message corresponding to the predetermined condition among the clients belonging to the corresponding channel based on the predetermined condition arrival information, and send a VoIP transition notification for prompting VoIP connection Sending to the IP address;
The VoIP conference room, which is a virtual voice conversation space set up on the network, is shared between the client that sent the VoIP transition notification and the VoIP server, and the voice conversation message sent via the client is controlled. This enables simultaneous communication by voice on the VoIP conference room among a plurality of users , voice recognition of voice conversation messages transmitted and received on the VoIP conference room, and voice-recognized character string information. Sending to the chat server ;
Multi-channel conversation method including.
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間であるチャネルを共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージが所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのうち前記所定条件に該当する文字列会話メッセージの発信元となるクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間であるVoIP用会議室を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるとともに、当該VoIP会議室上で送受信される音声会話メッセージを音声認識し、音声認識された文字列情報を前記チャットサーバに送出させる段階と、
を含むマルチチャネル会話方法をコンピュータに実行させるためのプログラム。
A string conversation that is transmitted via a client, sharing a channel, which is a plurality of virtual character string conversation spaces established on the network, between a plurality of clients and a chat server connected via the network Allowing simultaneous textual communication on the channel between a plurality of users by controlling messages; and
Outputting predetermined condition arrival information when a character string conversation message in the channel becomes a predetermined condition;
Obtain the IP address of the client that is the source of the character string conversation message that meets the predetermined condition among the clients belonging to the corresponding channel based on the predetermined condition arrival information, and send a VoIP transition notification for prompting VoIP connection Sending to the IP address;
The VoIP conference room, which is a virtual voice conversation space set up on the network, is shared between the client that sent the VoIP transition notification and the VoIP server, and the voice conversation message sent via the client is controlled. This enables simultaneous communication by voice on the VoIP conference room among a plurality of users , voice recognition of voice conversation messages transmitted and received on the VoIP conference room, and voice-recognized character string information. Sending to the chat server ;
A program for causing a computer to execute a multi-channel conversation method including:
JP2002348188A 2002-11-29 2002-11-29 Multi-channel conversation system Expired - Fee Related JP4331463B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002348188A JP4331463B2 (en) 2002-11-29 2002-11-29 Multi-channel conversation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002348188A JP4331463B2 (en) 2002-11-29 2002-11-29 Multi-channel conversation system

Publications (2)

Publication Number Publication Date
JP2004185088A JP2004185088A (en) 2004-07-02
JP4331463B2 true JP4331463B2 (en) 2009-09-16

Family

ID=32751165

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002348188A Expired - Fee Related JP4331463B2 (en) 2002-11-29 2002-11-29 Multi-channel conversation system

Country Status (1)

Country Link
JP (1) JP4331463B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4507905B2 (en) * 2005-02-15 2010-07-21 ソニー株式会社 Communication control device, communication control method, program and recording medium for audio conference
JP4781101B2 (en) * 2005-12-15 2011-09-28 Aosテクノロジーズ株式会社 Chat response system
JP5892021B2 (en) * 2011-12-26 2016-03-23 キヤノンマーケティングジャパン株式会社 CONFERENCE SERVER, CONFERENCE SYSTEM, CONFERENCE SERVER CONTROL METHOD, PROGRAM, AND RECORDING MEDIUM
KR101467248B1 (en) 2012-10-26 2014-12-02 (주)카카오 Method of operating an application for providing group call service using mobile voice over internet protocol
JP5812051B2 (en) * 2012-12-26 2015-11-11 キヤノンマーケティングジャパン株式会社 Information processing apparatus, information processing apparatus control method, and program

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10304088A (en) * 1997-05-01 1998-11-13 Nippon Telegr & Teleph Corp <Ntt> Terminal equipment
JP3434209B2 (en) * 1998-07-27 2003-08-04 日本電信電話株式会社 Communication tool use status transmission method, server device, client terminal device, and program recording medium thereof
JP3972490B2 (en) * 1998-10-08 2007-09-05 富士ゼロックス株式会社 Information processing apparatus, information processing method, and recording medium
JP2000285063A (en) * 1999-03-31 2000-10-13 Sony Corp Information processor, information processing method and medium
JP4350265B2 (en) * 2000-04-10 2009-10-21 富士通株式会社 Communication means selection support apparatus and method
JP2001350749A (en) * 2000-06-06 2001-12-21 Nec Corp Method for preparing and recording minutes on internet and recording medium
JP2002007272A (en) * 2000-06-19 2002-01-11 Sukaibanana Entertainment:Kk Communication service system
JP2002108794A (en) * 2000-09-27 2002-04-12 Yamaha Corp Inquiring method
JP3089063U (en) * 2001-12-22 2002-10-11 有限会社フレックスランド Karaoke box remote interaction system and restaurant remote interaction system

Also Published As

Publication number Publication date
JP2004185088A (en) 2004-07-02

Similar Documents

Publication Publication Date Title
CN105915436B (en) System and method for topic-based instant message isolation
JP4467220B2 (en) Voice instant messaging
US9055155B2 (en) Collaborative conference experience improvement
JP3644580B2 (en) Display control method and apparatus
KR101475990B1 (en) Contextual awareness in real time collaborative activity alerts
US9628753B2 (en) Displaying video call data
US7412527B2 (en) Systems and methods for advanced communications and control
CN102550008B (en) Control multi-party communication
US20140040784A1 (en) Multi-user chat
US8332761B2 (en) Multiple profiles for a user in a synchronous conferencing environment
EP3227887A1 (en) Translation control
US20090222526A1 (en) Using gender analysis of names to assign avatars in instant messaging applications
US20100153858A1 (en) Uniform virtual environments
CN101304326B (en) Computer system and supervisory computer
US20070280434A1 (en) Processing a received voicemail message
KR20110126421A (en) Method and apparatus for providing message conversation corresponding to each of group in messaging service
US7376703B2 (en) Instant messaging with caller identification
JP2004214934A (en) Terminal and program for presence information processing, and presence service providing server
JP4331463B2 (en) Multi-channel conversation system
KR101380457B1 (en) Method for broadcasting a data stream and method for interaction among users
JP5494129B2 (en) Communication system and communication method
JP2008148169A (en) Communication apparatus, communication system, communication method used therefor, and program thereof
US8638919B2 (en) External messaging during conference call
CN102016816A (en) Messaging between events
US9565298B1 (en) Method and device for appending information in a conversation in a voice based networking website

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050912

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080205

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080331

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080929

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080930

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090303

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090430

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20090519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090616

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090618

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120626

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120626

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130626

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130626

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees