JP2004185088A - Multichannel conversation system - Google Patents

Multichannel conversation system Download PDF

Info

Publication number
JP2004185088A
JP2004185088A JP2002348188A JP2002348188A JP2004185088A JP 2004185088 A JP2004185088 A JP 2004185088A JP 2002348188 A JP2002348188 A JP 2002348188A JP 2002348188 A JP2002348188 A JP 2002348188A JP 2004185088 A JP2004185088 A JP 2004185088A
Authority
JP
Japan
Prior art keywords
voip
character string
conference room
channel
conversation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002348188A
Other languages
Japanese (ja)
Other versions
JP4331463B2 (en
Inventor
Ai Yano
愛 矢野
Noriyuki Fukuyama
訓行 福山
Ryuichi Matsukura
隆一 松倉
Masanobu Morinaga
正信 森永
Masahide Noda
政秀 野田
Hitoshi Yamauchi
仁 山内
Hideaki Miyazaki
英明 宮崎
Kenichi Horio
健一 堀尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2002348188A priority Critical patent/JP4331463B2/en
Publication of JP2004185088A publication Critical patent/JP2004185088A/en
Application granted granted Critical
Publication of JP4331463B2 publication Critical patent/JP4331463B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a multichannel conversation system smoothly and easily transferable between a channel in a chat system and a VoIP meeting room in a VoIP system without interruption. <P>SOLUTION: This system comprises a chat server for controlling a character string conversation message transmitted through a client, thereby performing a simultaneous communication by characters on a channel between a plurality of users, a VoIP reporting means for monitoring the character string conversation message in the channel and reporting, when it reaches a prescribed condition, a VoIP transfer report for urging VoIP connection to the client who belongs to the channel, and a VoIP server for providing the VoIP meeting room to the client who is the receiver of the VoIP transfer report from the VoIP reporting means. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、マルチチャネル会話システムに関し、特に、リアルタイムで文字列会話メッセージによるコミュニケーションを提供するチャットシステムと、音声会話メッセージによるコミュニケーションを提供するVoIP(Voice over Internet Protocol)システムとを融合したマルチチャネル会話システムに関する。
【0002】
【従来の技術】
チャットシステムは、ネットワークに接続されたチャットサーバと複数のチャットクライアントとによって構成され、ネットワーク上に設営されたチャネルと呼ばれる仮想的な会話空間を複数のチャットクライアントにより共有して、リアルタイムにテキストメッセージを送受信可能な会話システムである。
チャットサーバは、各チャットクライアントから送信されてくる文字列会話メッセージを、同一のチャネル内の他のチャットクライアントに同報送信する。
【0003】
各チャットクライアントは、ニックネームと呼ばれる識別子により一義的に特定されるものであり、チャネル内における文字列会話メッセージもニックネームにより発言者を特定することができる。
通常、チャットサーバは複数のチャネルを提供しており、各チャネルには一義的に特定するためのチャネル名が付与されている(非特許文献1)。
また、IP(Internet Protocol)網を利用して音声パケットを送受信し音声会話を行うVoIPシステムが存在する。このVoIPシステムでは、MCU(Multipoint Control Unit)と呼ばれるVoIP用サーバ内に、チャットにおけるチャネルに相当するVoIP用会議室を設定し、このVoIP用会議室に接続しているクライアントを介して複数のユーザによる音声会話が可能となる。
【0004】
サーバ側に設置されるCM(Call Manager)によって各クライアント端末は管理され、各クライアントからの呼制御を行うことで複数人による同時音声会話が可能となる。したがって、VoIP用会議室に接続しているクライアントの音声は、同じVoIP用会議室に接続している他のクライアントに配信され、複数人が同時に音声を発した場合には、それぞれをミキシングした音声が各クライアントに配信されることとなる(非特許文献2〜3)。
前述したようなチャットシステムを用いて、複数のユーザがチャネル内で会話を行うことによって、情報端末を利用した共同作業が盛んに行われるようになってきている。また、IP網の高速化・普及拡大により、VoIPシステムを用いた電話会議なども用いられ始めている。
【0005】
チャットシステムでは、チャット用アプリケーションを搭載したパソコンなどの端末をIP網に常時接続した状態で用いられ、VoIPシステムでは、専用電話機やVoIP用アプリケーションを搭載したパソコンなどの端末をIP網に常時接続した状態で用いられ、両者は独立して利用されている。
【0006】
【非特許文献1】
jp.fujitsu.com;Chocoa Communicator
<URL:http://software.fujitsu.com/jp/chocoa/product1.html>
【0007】
【非特許文献2】
@nifty:EyeballパティオLite
<URL:http://eyeball.nifty.com/lite/guide01.html>
【0008】
【非特許文献3】
Macnica Networks;Centra Conference5
<URL:http://www.networks.macnica.co.jp/centra/conference.html>
【0009】
【発明が解決しようとする課題】
チャットシステムを用いて文字列による会話を行う場合に、キーボードへの打ち込みが間に合わなくなるほど会話が頻発する可能性がある。この場合、各ユーザ端末がVoIPシステムに対応していれば、VoIPシステムによる音声会話による会議に移行したい旨の発言をチャット画面上で行って、相手のVoIP電話番号に電話をかける必要がある。また、複数のユーザによる電話会議を行う場合には、VoIP用会議室を設置し、他のユーザにそのVoIP用会議室に参加してもらう必要がある。
【0010】
本発明では、チャットシステムにおけるチャネルとVoIPシステムにおけるVoIP用会議室との間を中断することなく円滑にかつ容易に移行できるマルチチャネル会話システムの提供を目的とする。
【0011】
【課題を解決するための手段】
本発明に係るマルチチャネル会話サーバは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバとを備える。
【0012】
ここで、会話監視手段は、チャネル内における文字列会話メッセージの出現率が所定時間内において所定値を超えた場合に所定条件になったと判断するように構成できる。
また、会話監視手段は、チャネル内における文字列会話メッセージ中に特定の文字列が出現した場合に所定条件になったと判断するように構成できる。
さらに、会話監視手段により検出された文字列会話メッセージ中の特定の文字列を音声データに変換する音声合成手段と、音声合成手段により変換された音声データを対応するチャネルに属するクライアントに通知するVoIP呼出手段とをさらに備える構成とすることも可能である。
【0013】
VoIP通知手段は、対応するチャネルのVoIP用会議室をVoIPサーバに設定し、チャネルに属するクライアントに対してVoIP接続要求通知を送信するように構成できる。
また、VoIPサーバが管理するVoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力するVoIP音声監視手段と、VoIP音声監視手段からの所定条件到達情報に基づいてVoIPサーバが管理するVoIP用会議室を終了させるVoIP終了手段とをさらに備える構成とすることもできる。
【0014】
さらに、VoIP音声監視手段は、VoIP用会議室内における音声パケット量が所定値以下になった場合に所定条件になったと判断するように構成でき、また、VoIP用会議室内における音声会話メッセージを音声認識し特定のキーワードを抽出した場合に所定条件になったと判断するように構成でき、VoIP用会議室が設定されてからの経過時間が所定値を超えた場合に所定条件になったと判断するように構成できる。
VoIP終了手段は、VoIP用会議室に属するクライアントに対してチャットサーバが管理するチャネルに移行することを促すチャット移行通知を送信するように構成できる。
【0015】
VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報をチャットサーバが管理するチャネル内の文字列会話メッセージとしてチャネルに属するクライアントに送信する変換文字列通知手段とをさらに備える構成とすることも可能である。
さらに、変換文字列通知手段が送信する文字列情報を含めてチャネル内の文字列会話メッセージをチャットログとして管理するチャットログ管理手段と、VoIPサーバが管理するVoIP用会議室内における音声会話メッセージをVoIPログとして管理するVoIPログ管理手段と、チャットログ管理手段が管理するチャットログのうち変換文字列通知手段により送信された文字列情報を、VoIPログ管理手段が管理するVoIPログ内の対応箇所とリンクさせるVoIPリンク手段とをさらに備える構成とすることができる。
【0016】
また、VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報中からVoIP用会議室内における会話の特徴となる文字列を抽出するキーワード抽出手段と、文字列による会話メッセージを制御することが可能なVoIP専用チャネルを設定し、音声認識手段により変換された文字列情報をVoIP専用チャネルを介して各クライアントに送信するVoIPワード送信手段と、キーワード抽出手段により抽出された文字列をチャットサーバが管理するチャネル内の文字列会話メッセージとしてチャネルに属するクライアントに送信するキーワード通知手段とをさらに備える構成とすることもできる。
【0017】
音声認識手段により変換された文字列情報を他の言語に翻訳する翻訳手段をさらに備える構成とすることが可能である。
VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報中からVoIP用会議室に未接続の個人を特定する文字列を検出した場合、特定された個人を呼び出すためのIPアドレスを取得しVoIP接続を促すためのVoIP移行通知をIPアドレスに送信する個人呼出手段とをさらに備える構成とすることも可能である。
【0018】
本発明の他の観点によるマルチチャネル会話サーバは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP会議室上での音声による同時コミュニケーションを行わせるVoIPサーバと、VoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する音声監視手段と、音声監視手段から出力される所定条件到達情報に基づいて対応するVoIP会議室に属するクライアントに対してチャット接続を促すためのチャット移行通知を送信するチャット通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるものであって、チャット通知手段によりチャット移行通知がなされたクライアントに対するチャット用のチャネルを提供するチャットサーバとを備える。
【0019】
ここで、音声監視手段は、VoIP会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、音声認識手段により変換された文字列情報中に特定の文字列を検出した場合に所定条件になったと判断するチャット移行キーワード抽出手段とを備える構成とすることができる。
本発明に係るマルチチャネル会話クライアントは、ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、チャットクライアントが接続中のチャネルに関してチャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室にVoIPクライアントを接続させるVoIP移行手段とを備える。
【0020】
ここで、自端末からVoIP用会議室に送信される音声パケット量を監視し、所定値以下であると判断した場合にVoIPクライアントによるVoIP用会議室への接続を終了するVoIP通信量監視手段をさらに備える構成とすることができる。
また、VoIP移行手段によるVoIP用会議室への接続から所定時間を経過したと判断した場合に、VoIPクライアントによるVoIP用会議室への接続を終了するVoIP接続時間監視手段をさらに備える構成とすることができる。
さらに、VoIPサーバ側においてVoIP用会議室内の音声会話メッセージを音声認識して変換された文字列情報を受信し、チャットクライアントを介して文字列会話メッセージとして表示するVoIPワード表示手段と、VoIPワード表示手段により表示された文字列情報に対する選択指示を受け付け、対応するVoIP用会議室にVoIPクライアントを接続するVoIP接続手段とをさらに備える構成とすることができる。
【0021】
本発明に係るマルチチャネル会話システムは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、チャットサーバとの間でチャネルを共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、VoIPサーバとの間でVoIP用会議室を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、チャットクライアントが接続中のチャネルに関してVoIP通知手段によりVoIP移行通知を受信した場合に、前記VoIPサーバが提供するVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段とを含む
本発明に係るマルチチャネル会話方法は、ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせる段階とを含む。
【0022】
本発明に係るマルチチャネル会話サーバのプログラムは、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバとを備えるマルチチャネル会話サーバとしてコンピュータを機能させるためのプログラムである。
【0023】
本発明のマルチチャネル会話クライアントのプログラムは、ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、チャットクライアントが接続中のチャネルに関してチャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室にVoIPクライアントを接続させるVoIP移行手段とを備えるマルチチャネル会話クライアントとしてコンピュータを機能させるためのプログラムである。
【0024】
本発明に係るマルチチャネル会話方法のプログラムは、ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間におけるチャネル上での文字による同時コミュニケーションを行わせる段階と、チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間におけるVoIP用会議室上での音声による同時コミュニケーションを行わせる段階とを含むマルチチャネル会話方法をコンピュータに実行させるためのプログラムである。
【0025】
【発明の実施の形態】
〔第1実施形態〕
本発明の第1実施形態が採用されるシステムの概要を図1に示す。
ここでは、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0026】
サーバ端末100には、各チャネル内の文字列会話メッセージを制御するチャットサーバ110と、各VoIP用会議室内の音声会話メッセージを制御するMCU(Multipoint Control Unit)120と、各クライアント端末200からの呼制御を行うCM(Call Manager)130とを備えている。
図1に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージの出現率が所定値を超えていると判断した場合、チャットメッセージが頻発している旨の通知をCM130に対して送信する(図1▲1▼)。
【0027】
CM130では、チャットサーバ110からチャットメッセージが頻発している旨の通知を受けて、MCU120内にそのチャネルに対応するVoIP用会議室を作成する(図1▲2▼)。
CM130は、VoIP用会議室を作成するとともに、対応するチャネルに属しているクライアント端末200に対してVoIP接続要求を送出する(図1▲3▼)。
サーバ端末100からのVoIP接続要求を受けたクライアント端末200において、そのクライアント端末200を使用しているユーザが応答した場合(図1▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP用会議室内の音声会話メッセージとして制御される。
【0028】
この第1実施形態を構成するための制御ブロック図を図19に示す。
このマルチチャネル会話システムでは、サーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定時間内における出現率が所定値を超えた場合であって、かつその会話メッセージの発信元であるクライアント端末200が複数である場合に、所定条件到達情報をCM130に送信する会話頻発度監視部111を備えている。
【0029】
CM130は、チャットサーバ110の管理するチャネルに属するクライアント端末200からのIPアドレス登録を受け付けてIPアドレステーブル132に格納するクライアントIPアドレス登録部131と、チャットサーバ110から送信される所定条件到達情報に基づいてクライアントIPアドレス登録部131から対応するクライアント端末200のIPアドレスを取得するIPアドレス取得部133と、IPアドレス取得部133で取得したIPアドレスのクライアント端末200に対してVoIP接続要求を送信するVoIP接続要求部134とを備えている。
【0030】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うたSめのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第1実施形態における動作を図37に基づいて説明する。
クライアント端末200からチャットコミュニケーションを開始する際には、予めサーバ端末100のクライアントIPアドレス登録部131にIPアドレスを登録することとする。このとき、クライアントIPアドレス登録部131は、ユーザがチャットで使用するユーザ名(ニックネーム)とクライアント端末200のIPアドレスとを関連づけてIPアドレステーブル132に格納する。このIPアドレステーブル132の一例を表1に示す。
【0031】
【表1】

Figure 2004185088
【0032】
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御する(ステップS111)。
会話頻発度監視部111は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージが所定時間内に所定値を超えたか否かを判別する(S112)。ここで、チャネル内の文字列会話メッセージが所定時間内に所定値を超えており、かつその文字列会話メッセージの送信もとが複数のクライアント端末200であると判断した場合にはステップS113に移行する。
【0033】
ステップS113では、該当するチャネルに属するユーザ名を検出し、これをCM130のIPアドレス取得部133に通知する。
IPアドレス取得部133では、チャットサーバ110から送信されてきたユーザ名からIPアドレステーブル132を検索し、該当するクライアント端末200のIPアドレスを取得する(ステップS114)。
IPアドレス取得部133は、この後、取得したクライアント端末200のIPアドレスとこれに対応するユーザ名とをセットにしてVoIP接続要求部134に通知する(ステップS115)。
【0034】
VoIP接続要求部134は、IPアドレス取得部133からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS116)。ここで、MCU120内に作成されるVoIP用会議室は、派生元となったチャネルと関連づけられてVoIP会議室管理テーブルとしてMCU120によって管理される。このVoIP会議室管理テーブルの一例を表2に示す。なお、VoIP会議室管理テーブルは、CM130内で管理することも可能であり、他の記憶媒体などにより管理すること可能である。
【0035】
【表2】
Figure 2004185088
【0036】
VoIP接続要求部134は、さらに、該当するクライアント端末200に対してVoIP接続要求通知を送信する(ステップS117)。
クライアント端末200では、サーバ端末100側からVoIP接続要求通知を受けると、アプリケーションがその旨の表示を行い、VoIP接続に応答するか否かをユーザに選択させる(ステップS121)。ユーザがVoIP接続要求に応答する旨の指示を行った場合には、ステップS122に移行する。
ステップS122では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
【0037】
VoIP接続要求通知を受けたクライアント端末200では、たとえば、図55に示すようなVoIP接続要求ダイアログ500を立ち上げるように構成できる。このVoIP接続要求ダイアログ500では、通知の種別がVoIP会議接続要求である旨を示す通知種別バー501、「チャネル”#VoIP”からVoIP会議室”VoIP”が派生しました」の内容表示を行う内容表示部502、参加することに同意することを指示する承諾ボタン503、参加することに同意しないことを指示する拒否ボタン504などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン503をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0038】
このような第1実施形態では、チャットによる文字列会話メッセージが頻発した際に、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第2実施形態〕
本発明の第2実施形態が採用されるシステムの概要を図2に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0039】
図2に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージの出現率が所定値を超えていると判断した場合、チャットメッセージが頻発している旨の通知をCM130に対して送信する(図2▲1▼)。
CM130では、チャットサーバ110からチャットメッセージが頻発している旨の通知を受けて、MCU120内にそのチャネルに対応するVoIP用会議室を作成する(図2▲2▼)。
【0040】
CM130は、VoIP用会議室を作成するとともに、対応するチャネルに属しているクライアント端末200に対して、作成したVoIP用会議室を通知する(図2▲3▼)。
サーバ端末100からのVoIP用会議室の通知を受けたクライアント端末200において、そのクライアント端末200がVoIP用会議室への接続を行った場合(図2▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP会議室内の音声会話メッセージとして制御される。
【0041】
この第2実施形態を構成するための制御ブロック図を図20に示す。
この第2実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定時間内における出現率が所定値を超えた場合であって、かつその会話メッセージの発信元であるクライアント端末200が複数である場合に、所定条件到達情報をCM130に送信する会話頻発度監視部111を備えている。
【0042】
CM130は、会話頻発度監視部111から送信されてくる所定条件到達情報に応じて、MCU120内にVoIP用会議室を作成するとともに該当するチャネルに属するクライアント端末200に対して作成したVoIP用会議室を通知するVoIP用会議室通知部135を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うたSめのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0043】
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への接続を行うVoIP接続部211を備えている。
このようにした第2実施形態における動作を図38に基づいて説明する。
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御する(ステップS131)。
【0044】
会話頻発度監視部111は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージが所定時間内に所定値を超えたか否かを判別する(S132)。ここで、チャネル内の文字列会話メッセージが所定時間内に所定値を超えており、かつその文字列会話メッセージの送信もとが複数のクライアント端末200であると判断した場合にはステップS133に移行する。
ステップS133では、該当するチャネルに属するユーザ名を検出し、これをCM130のVoIP用会議室通知部135に通知する。
【0045】
VoIP用会議室通知部135では、会話頻発度監視部111からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS134)。
VoIP用会議室通知部135は、さらに、該当するクライアント端末200に対してVoIP用会議室情報を通知する(ステップS135)。ここでは、クライアント端末200のIPアドレスは必要なく、チャットサーバ110を介してチャネル内における制御情報としてクライアント端末200のチャットアプリ210に会議室名などを含むVoIP用会議室情報を送信する。
【0046】
クライアント端末200では、サーバ端末100側からVoIP用会議室の通知を受けると、チャットアプリ210を介してその旨の表示を行い、VoIP用会議室への接続を行うか否かをユーザに選択させる(ステップS141)。ユーザがVoIP接続を行う旨の指示を行った場合には、ステップS142に移行する。
ステップS142では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
VoIP用会議室の通知を受けたクライアント端末200では、たとえば、図56に示すようなVoIP会議室通知ダイアログ510を立ち上げるように構成できる。このVoIP会議室通知ダイアログ510では、通知の種別がVoIP会議室通知である旨を示す通知種別バー511、「チャネル”#VoIP”からVoIP会議室”VoIP”が派生しました」の内容表示を行う内容表示部512、参加することに同意することを指示する承諾ボタン513、参加することに同意しないことを指示する拒否ボタン514などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン513をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0047】
このような第2実施形態では、第1実施形態と同様に、チャットによる文字列会話メッセージが頻発した際に、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第3実施形態〕
本発明の第3実施形態が採用されるシステムの概要を図3に示す。
この第3実施形態も第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0048】
図3に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージ中に特定の文字列が出現するか否かを監視しており、特定の文字列が出現した場合、所定条件到達情報をCM130に対して送信する。たとえば、チャットサーバ110は、文字列会話メッセージ中にチャネルに属するユーザ名を検出した場合に、そのユーザに対する呼び掛けがあったと判断し、呼び掛けメッセージの検出通知をCM130に送出する(図3▲1▼)。
【0049】
CM130では、チャットサーバ110から呼び掛けメッセージの検出通知を受けて、MCU120内に対応するVoIP用会議室を作成する(図3▲2▼)。
CM130は、VoIP用会議室を作成するとともに、呼び掛けを行ったクライアント端末と呼び掛けられたクライアント端末に対して、VoIP接続要求を送出する(図3▲3▼)。
サーバ端末100からのVoIP接続要求を受けたクライアント端末200において、そのクライアント端末200を使用しているユーザが応答した場合(図3▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP用会議室内の音声会話メッセージとして制御される。
【0050】
この第3実施形態を構成するための制御ブロック図を図21に示す。
第3実施形態におけるマルチチャネル会話システムは第1実施形態と同様に、サーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、文字列会話メッセージ中に所定の文字列が出現した場合に所定条件到達情報を通知する特定文字列監視部112を備えている。
【0051】
CM130は、チャットサーバ110の管理するチャネルに属するクライアント端末200からのIPアドレス登録を受け付けてIPアドレステーブル132に格納するクライアントIPアドレス登録部131と、チャットサーバ110から送信される所定条件到達情報に基づいてクライアントIPアドレス登録部131から対応するクライアント端末200のIPアドレスを取得するIPアドレス取得部133と、IPアドレス取得部133で取得したIPアドレスのクライアント端末200に対してVoIP接続要求を送信するVoIP接続要求部134とを備えている。この場合、IPアドレス取得部133は、特定文字列監視部112からの呼び掛けメッセージ検出通知に基づいて、呼び掛けられたユーザ名に対応するクライアント端末200と、呼び掛けを行ったユーザ名に対応するクライアント端末の両方についてそのIPアドレスを取得し、これをVoIP接続要求部134に送出するように構成できる。
【0052】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うたSめのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第3実施形態における動作を図39に基づいて説明する。
第1実施形態と同様に、クライアント端末200からチャットコミュニケーションを開始する際には、予めサーバ端末100のクライアントIPアドレス登録部131にIPアドレスを登録することとする。
【0053】
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御する(ステップS151)。
特定文字列監視部112は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージに所定の文字列が含まれているか否かを判別する(S152)。特に、チャネルに属するユーザ名を検出した場合には、そのユーザ名に対する呼び掛けメッセージがあったと判定して、ステップS153に移行する。
【0054】
ステップS153では、検出された呼び掛けメッセージの発信ユーザ名と、呼び掛けられたユーザ名を検出して、IPアドレス取得部133に通知する。
IPアドレス取得部133では、チャットサーバ110から送信されてきたユーザ名からIPアドレステーブル132を検索し、該当するクライアント端末200のIPアドレスを取得する(ステップS154)。
IPアドレス取得部133は、この後、取得したクライアント端末200のIPアドレスとこれに対応するユーザ名とをセットにしてVoIP接続要求部134に通知する(ステップS155)。
【0055】
VoIP接続要求部134は、IPアドレス取得部133からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS156)。
VoIP接続要求部134は、さらに、該当するクライアント端末200に対してVoIP接続要求通知を送信する(ステップS157)。
クライアント端末200では、サーバ端末100側からVoIP接続要求通知を受けると、アプリケーションがその旨の表示を行い、VoIP接続に応答するか否かをユーザに選択させる(ステップS161)。ユーザがVoIP接続要求に応答する旨の指示を行った場合には、ステップS162に移行する。
【0056】
ステップS162では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
VoIP接続要求通知を受けたクライアント端末200では、たとえば、図57に示すようなVoIP接続要求ダイアログ520を立ち上げるように構成できる。このVoIP接続要求ダイアログ520では、通知の種別がVoIP会議接続要求である旨を示す通知種別バー521、呼び掛けメッセージの送信元であるユーザがVoIP用会議室を作成した旨の内容(図においては、「田中さん(呼び掛け元)がVoIP会議室”VoIP”を作成しました」の表示内容)を表示する内容表示部522、参加することに同意することを指示する承諾ボタン523、参加することに同意しないことを指示する拒否ボタン524などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン523をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0057】
このような第3実施形態では、呼び掛けメッセージを通知することにより、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第4実施形態〕
本発明の第4実施形態が採用されるシステムの概要を図4に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
【0058】
図4に示すように、文字列会話メッセージを制御しているチャットサーバ110は、チャネル内の文字列会話メッセージ中に特定の文字列が出現するか否かを監視しており、特定の文字列が出現した場合、所定条件到達情報をCM130に対して送信する。たとえば、チャットサーバ110は、文字列会話メッセージ中にチャネルに属するユーザ名を検出した場合に、そのユーザに対する呼び掛けがあったと判断し、呼び掛けメッセージの検出通知をCM130に送出する(図4▲1▼)。
【0059】
CM130では、チャットサーバ110から呼び掛けメッセージの検出通知を受けて、MCU120内に対応するVoIP用会議室を作成する(図4▲2▼)。
CM130は、VoIP用会議室を作成するとともに、呼び掛けを行ったクライアント端末と呼び掛けられたクライアント端末に対して、作成したVoIP用会議室を通知する(図4▲3▼)。
サーバ端末100からのVoIP用会議室の通知を受けたクライアント端末200において、そのクライアント端末200がVoIP用会議室への接続を行った場合(図4▲4▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP会議室内の音声会話メッセージとして制御される。
【0060】
この第4実施形態を構成するための制御ブロック図を図22に示す。
この第4実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定の文字列を検出した場合に所定条件到達情報ををCM130に送信する特定文字列監視部112を備えている。
【0061】
CM130は、特定文字列監視部112から送信されてくる所定条件到達情報に応じて、MCU120内にVoIP用会議室を作成するとともに、該当するクライアント端末200に対するVoIP用会議室情報の通知を行うVoIP用会議室通知部135を備えている。この場合、VoIP用会議室通知部135は、特定文字列監視部112からの呼び掛けメッセージ検出通知に基づいて、呼び掛けられたユーザ名に対応するクライアント端末200と、呼び掛けを行ったユーザ名に対応するクライアント端末の両方について、会議室名などのVoIP用会議室情報を送出するように構成できる。
【0062】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うたSめのVoIPクライアントを構成するVoIPアプリ220とを備えている。
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への接続を行うVoIP接続部211を備えている。
【0063】
このようにした第4実施形態における動作を図40に基づいて説明する。
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御する(ステップS171)。
特定文字列監視部112は、各チャネルにおける文字列会話メッセージを監視しており、チャネル内の文字列会話メッセージに所定の文字列が含まれているか否かを判別する(S172)。特に、チャネルに属するユーザ名を検出した場合には、そのユーザ名に対する呼び掛けメッセージがあったと判定して、ステップS173に移行する。
【0064】
ステップS173では、検出された呼び掛けメッセージの発信ユーザ名と、呼び掛けられたユーザ名を検出して、VoIP用会議室通知部135に通知する。
VoIP用会議室通知部135では、特定文字列監視部112からの通知を受けて、MCU120内に対応するVoIP用会議室を作成する(ステップS174)。
VoIP用会議室通知部135は、さらに、該当するクライアント端末200に対してVoIP用会議室情報を通知する(ステップS175)。ここでは、クライアント端末200のIPアドレスは必要なく、チャットサーバ110を介してチャネル内における制御情報としてクライアント端末200のチャットアプリ210に会議室名などを含むVoIP用会議室情報を送信する。
【0065】
クライアント端末200では、サーバ端末100側からVoIP用会議室の通知を受けると、チャットアプリ210を介してその旨の表示を行い、VoIP用会議室への接続を行うか否かをユーザに選択させる(ステップS181)。ユーザがVoIP接続を行う旨の指示を行った場合には、ステップS182に移行する。
ステップS182では、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する。
VoIP用会議室の通知を受けたクライアント端末200では、たとえば、図58に示すようなVoIP会議室通知ダイアログ530を立ち上げるように構成できる。このVoIP会議室通知ダイアログ530では、通知の種別がVoIP会議室通知である旨を示す通知種別バー531、呼び掛けメッセージの送信元であるユーザがVoIP用会議室を作成した旨の内容(図においては、「田中さん(呼び掛け元)がVoIP会議室”VoIP”を作成しました」の表示内容)を表示する内容表示部532、参加することに同意することを指示する承諾ボタン533、参加することに同意しないことを指示する拒否ボタン534などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン513をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0066】
このような第4実施形態では、チャネル内の文字列会話メッセージ中に特定の文字列を送信する、特に、チャネルに属するユーザ名を送信することで、自動的にVoIPに移行することが可能となり、電話での会議に移行する旨のネゴシエーションを行う必要がなくなり、電話番号をダイヤルする手間も省略することができる。
〔第5実施形態〕
本発明の第5実施形態が採用されるシステムの概要を図5に示す。
【0067】
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちいずれかを共有するVoIP電話コミュニケーションを実現している。
サーバ端末100およびクライアント端末200には、前述の実施形態のように、チャネル内の文字列会話メッセージを監視して、会話頻発度または特定文字列の出現に応じてVoIP用会議室をMCU120内に作成し、該当するクライアント端末200に対してVoIP接続要求またはVoIP用会議室情報の通知を行い、クライアント端末200から自動的にVoIP用会議室に接続する機能が備わっている(図5▲1▼)。
【0068】
さらに、チャットサーバ110は、チャネル内の文字列会話メッセージ中に特定の文字列が出現するか否かを監視しており、特定の文字列が出現した場合、特定文字列出現通知をCM130に対して送信する(図5▲2▼)。
CM130は、チャットサーバ110から通知のあった特定文字列を音声合成により読み上げて、VoIPにより各クライアント端末200に送出する(図5▲3▼)。
この第5実施形態を構成するための制御ブロック図を図23に示す。
この第5実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
【0069】
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを監視して、所定の文字列を検出した場合に所定条件到達情報をCM130に送信する特定文字列監視部112を備えている。
CM130は、特定文字列監視部112から送信されてくる所定条件到達情報に応じて、MCU120内にVoIP用会議室を作成するとともに、該当するクライアント端末200に対するVoIP用会議室情報の通知を行うVoIP用会議室通知部135を備えている。この場合、VoIP用会議室通知部135は、チャットサーバ110からの所定条件到達情報に基づいて作成したVoIP用会議室の情報をクライアント端末200に通知するように構成でき、また、特定文字列監視部112からの呼び掛けメッセージ検出通知に基づいて、呼び掛けられたユーザ名に対応するクライアント端末200と、呼び掛けを行ったユーザ名に対応するクライアント端末の両方について、会議室名などのVoIP用会議室情報を送出するように構成できる。また、VoIP用会議室通知部135は、特定文字列監視部112から送信されてくる特定文字列検出通知を受け、呼出メッセージ通知を送出する。
【0070】
CM130は、VoIP用会議室通知部135から通知される呼出メッセージ通知に基づいてVoIPを通じて呼出を行うVoIP呼出部136を備えている。このVoIP呼出部136は、音声合成部137を備えており、チャットサーバ110の特定文字列監視部112が検出した特定文字列を音声に変換してVoIPに出力する。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うたSめのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0071】
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への自動接続を行うVoIP自動応答部212を備えている。
また、VoIPアプリ220は、サーバ端末100のVoIP呼出部136が出力する音声出力を受けてこれをユーザに通知する。
このようにした第5実施形態における動作を図41に基づいて説明する。
【0072】
サーバ端末100では、チャットサーバ110が各クライアント端末200のチャットアプリ210から送信されてくる文字列会話メッセージを管理し、チャネル内のチャットコミュニケーションを制御しており、チャネル内の文字列会話メッセージの頻発度が所定値を超えた場合や所定の文字列を検出した場合にVoIP接続要求またはVoIP用会議室情報通知をクライアント端末200に送出する(ステップS191)。
サーバ端末100からVoIP接続要求またはVoIP用会議室情報通知を受けたクライアント端末200では、VoIP自動応答部212によりVoIP接続/応答処理を実行する(ステップS201)。
【0073】
サーバ端末100のチャットサーバ110において、チャネル内の文字列会話メッセージに特定文字列を検出し場合には、VoIP呼出部136の音声合成部137によりメッセージの音声合成を行う(ステップS192)。この後、VoIP呼出部136は、クライアント端末200に対してVoIPを通じて呼出音声メッセージの通知を行う(ステップS193)。
このようにした第5実施形態では、チャットにより呼びかけを行った際に、文字列による表示を行うだけでなく、VoIP音声によって各ユーザへの呼びかけを行うことが可能であり、クライアント端末200を操作するユーザが認識することを容易にする。たとえば、チャネルに属するユーザ名を文字列会話メッセージにより呼びかけた場合に、これを音声にしてVoIPにより呼びかけることにより、呼びかけられたユーザがこれを容易に認識することが可能となる。
【0074】
〔第6実施形態〕
本発明の第6実施形態が採用されるシステムの概要を図6に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0075】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、CM130がVoIP用会議室内の音声会話メッセージ量を監視している。具体的には、CM130は、各VoIP用会議室内の音声パケット量を監視しており、この音声パケット量が所定値以下になったか否かの検出を行っている(図6▲1▼)。
VoIP用会議室内における音声パケット量が所定量以下になったと判断した場合には、MCU120内の該当するVoIP用会議室を閉鎖する(図6▲2▼)。
【0076】
これと同時に、CM130は、閉鎖したVoIP用会議室に属するクライアント端末200に対してVoIP用会議室を閉鎖した旨の通知(切断通知)を送信する(図6▲3▼)。
この第6実施形態を構成するための制御ブロック図を図24に示す。
この第6実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0077】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0078】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室における通信量を監視して、所定量以下になった場合にそのVoIP用会議室を閉鎖するとともに該当するクライアント端末200に対してVoIP切断通知を行うVoIP会議室通信量監視部138を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0079】
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への自動接続を行うVoIP自動応答部212を備える構成とすることもできる。
このようにした第6実施形態における動作を図42に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS211)。
【0080】
VoIP用会議室内における音声会話メッセージの通信量は、VoIP会議室通信量監視部138によって監視されている。VoIP会議室通信量監視部138は、VoIP用会議室内における音声パケット量が一定値以下であると判断した場合(ステップS212)、MCU120内の該当するVoIP用会議室を閉鎖する(ステップS213)。VoIP会議室通信量監視部138は、これと同時に、クライアント端末100に対してVoIP切断通知を送信する(ステップS214)。
クライアント端末200側では、サーバ端末100からのVoIP切断通知を受けると、VoIPアプリ220が該当するVoIP用会議室が閉鎖された旨の表示を行うなどしてVoIP切断表示を行う(ステップS221)。
【0081】
ここで閉鎖されたVoIP用会議室が、チャットサーバ110が管理するチャネルから派生したものである場合には、該当するクライアント端末200のユーザは元のチャネルを通じて文字列会話メッセージによるチャットコミュニケーションに戻ることも可能であり、そうでない場合には、チャットサーバ110により新たなチャネルを作成させるように構成することも可能である。
このような第6実施形態では、VoIP用会議室内における音声パケット量が減少してきた場合に、このVoIP用会議室を終了することで、サーバ側の負担の少ないチャットコミュニケーションに速やかに移行させることが可能である。
【0082】
〔第7実施形態〕
本発明の第7実施形態が採用されるシステムの概要を図7に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0083】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、クライアント端末200側において自端末からの音声会話メッセージの通信量を監視しており、自端末からの音声パケット量が所定値以下になったか否かの検出を行っている(図7▲1▼)。
クライアント端末200において、自端末からの音声パケット量が所定値以下になったと判断した場合には、そのVoIP用会議室に対するVoIP接続の切断を通知する(図7▲2▼)。
【0084】
サーバ端末100では、MCU120内のVoIP用会議室を通じてVoIP電話コミュニケーションを提供し、VoIP用会議室に属するクライアント端末200がすべてVoIP接続を切断した場合に、このVoIP用会議室を閉鎖する(図7▲3▼)。
この第7実施形態を構成するための制御ブロック図を図25に示す。
この第7実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0085】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0086】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
VoIPアプリ220は、サーバ端末100内に設定されるVoIP用会議室を通じて他のクライアント端末200との間でVoIP電話コミュニケーションを実行するものであり、この機能の他に自端末から送信される音声会話メッセージの通信量を監視するVoIP通信量監視部221を備えている。
【0087】
VoIP通信量監視部221は、自端末から送信される音声パケット量を監視し、所定値以下であると判断した場合にVoIP接続を切断する旨の通知をサーバ100側に送信して、VoIP接続を終了させる。
このようにした第7実施形態における動作を図43に基づいて説明する。
クライアント端末200では、クライアント端末200からの要求に応じてサーバ端末100内に作成されたVoIP用会議室またはサーバ端末100がチャットのチャネルから派生して作成したVoIP用会議室に接続を行って、VoIP音声パケットの送受信を行う(ステップS231)。
【0088】
ここで、VoIP通信量監視部221は、自端末から送信される音声パケット量を監視し、所定値以下であるか否かを判別する(ステップS232)。VoIP通信量監視部221は、自端末からの音声パケット量が所定値以下であると判断した場合に、サーバ端末100側にVoIP切断通知を行い(ステップS233)、属しているVoIP用会議室へのVoIP接続を切断する。
VoIPアプリ220は、この後、ユーザに対してVoIP接続を終了させた旨の表示を行う(ステップS234)。
【0089】
サーバ端末100では、MCU120に作成されたVoIP用会議室に属するクライアント端末200からの音声会話メッセージを制御して各クライアント端末200によるVoIP電話コミュニケーションを提供する。
クライアント端末200からのVoIP切断通知を受けると、CM130は、VoIP会議室管理テーブルの該当するVoIP用会議室からそのクライアント端末200を削除し、そのVoIP用会議室に接続しているクライアント端末200が存在するか否かを判別する(ステップS241)。
【0090】
CM130は、接続しているクライアント端末200がなくなったVoIP用会議室を見つけるとそのVoIP用会議室を閉鎖する(ステップS242)。
閉鎖されたVoIP用会議室がチャットサーバ110により管理するチャネルから派生したものである場合、クライアント端末200側では、チャットアプリ210により派生元のチャネルを通じてチャットコミュニケーションを再開することも可能である。また、CM130が、閉鎖されたVoIP用会議室からチャットサーバ110内に新たなチャネルを作成し、このチャネル情報またはチャット接続要求を該当するクライアント端末200に送信するように構成することも可能である。
【0091】
このような第7実施形態によれば、自端末からの音声パケット量が少ない場合に、クライアント端末200側からVoIP接続を終了させてチャットによる会話に速やかに移行するように構成できる。
〔第8実施形態〕
本発明の第8実施形態が採用されるシステムの概要を図8に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0092】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、CM130はVoIP用会議室が作成されてからの経過時間を監視しており、この経過時間が所定時間を超えたか否かの検出を行っている(図8▲1▼)。
VoIP用会議室の設定から所定時間以上経過したと判断した場合には、MCU120内の該当するVoIP用会議室を閉鎖する(図8▲2▼)。
これと同時に、CM130は、閉鎖したVoIP用会議室に属するクライアント端末200に対してVoIP用会議室を閉鎖した旨の通知(切断通知)を送信する(図8▲3▼)。
【0093】
この第8実施形態を構成するための制御ブロック図を図26に示す。
この第8実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0094】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室の作成時からの経過時間を監視して、所定時間以上経過したと判断した場合にそのVoIP用会議室を閉鎖するとともに該当するクライアント端末200に対してVoIP切断通知を行うVoIP会議室開設時間監視部139を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0095】
このようにした第8実施形態における動作を図44に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS251)。
VoIP用会議室が作成されてからの経過時間は、VoIP会議室開設時間監視部139によって監視されている。VoIP会議室開設時間監視部139は、VoIP用会議室が開設かれてからの経過時間が所定時間を超えたと判断した場合(ステップS252)、MCU120内の該当するVoIP用会議室を閉鎖する(ステップS253)。VoIP会議室開設時間監視部139は、これと同時に、クライアント端末100に対してVoIP切断通知を送信する(ステップS254)。
【0096】
クライアント端末200側では、サーバ端末100からのVoIP切断通知を受けると、VoIPアプリ220が該当するVoIP用会議室が閉鎖された旨の表示を行うなどしてVoIP切断表示を行う(ステップS261)。
ここで閉鎖されたVoIP用会議室が、チャットサーバ110が管理するチャネルから派生したものである場合には、該当するクライアント端末200のユーザは元のチャネルを通じて文字列会話メッセージによるチャットコミュニケーションに戻ることも可能であり、そうでない場合には、チャットサーバ110により新たなチャネルを作成させるように構成することも可能である。
【0097】
このような第8実施形態では、VoIP用会議室を一定時間後に閉鎖して、チャットコミュニケーションに移行することを可能とし、サーバ端末100側の負担を軽くすることが可能となる。
〔第9実施形態〕
本発明の第9実施形態が採用されるシステムの概要を図9に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0098】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、クライアント端末200側において自端末がVoIP用会議室に参加してからの経過時間を監視しており、この経過時間が所定時間を超えたか否かの検出を行っている(図9▲1▼)。
クライアント端末200において、自端末がVoIP用会議室に参加してからの経過時間が所定時間を超えたと判断した場合には、そのVoIP用会議室に対するVoIP接続の切断を通知する(図9▲2▼)。
【0099】
サーバ端末100では、MCU120内のVoIP用会議室を通じてVoIP電話コミュニケーションを提供し、VoIP用会議室に属するクライアント端末200がすべてVoIP接続を切断した場合に、このVoIP用会議室を閉鎖する(図9▲3▼)。
この第9実施形態を構成するための制御ブロック図を図27に示す。
この第9実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0100】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0101】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
VoIPアプリ220は、サーバ端末100内に設定されるVoIP用会議室を通じて他のクライアント端末200との間でVoIP電話コミュニケーションを実行するものであり、この機能の他に自端末がVoIP用会議室に参加してからの経過時間を監視するVoIP会議室参加時間監視部222を備えている。
【0102】
VoIP会議室参加時間監視部222は、自端末がVoIP用会議室に参加してかrの経過時間を監視し、所定時間を超えたと判断した場合にVoIP接続を切断する旨の通知をサーバ100側に送信して、VoIP接続を終了させる。
このようにした第9実施形態における動作を図45に基づいて説明する。
クライアント端末200では、クライアント端末200からの要求に応じてサーバ端末100内に作成されたVoIP用会議室またはサーバ端末100がチャットのチャネルから派生して作成したVoIP用会議室に接続を行って、VoIP音声パケットの送受信を行う(ステップS271)。
【0103】
ここで、VoIP会議室参加時間監視部222は、自端末がVoIP用会議室に参加してからの経過時間を監視し、所定時間を超えたか否かを判別する(ステップS272)。VoIP会議室参加時間監視部222は、自端末がVoIP用会議室に参加してからの経過時間が所定時間を超えたと判断した場合に、サーバ端末100側にVoIP切断通知を行い(ステップS273)、属しているVoIP用会議室へのVoIP接続を切断する。
VoIPアプリ220は、この後、ユーザに対してVoIP接続を終了させた旨の表示を行う(ステップS274)。
【0104】
サーバ端末100では、MCU120に作成されたVoIP用会議室に属するクライアント端末200からの音声会話メッセージを制御して各クライアント端末200によるVoIP電話コミュニケーションを提供する。
クライアント端末200からのVoIP切断通知を受けると、CM130は、VoIP会議室管理テーブルの該当するVoIP用会議室からそのクライアント端末200を削除し、そのVoIP用会議室に接続しているクライアント端末200が存在するか否かを判別する(ステップS281)。
【0105】
CM130は、接続しているクライアント端末200がなくなったVoIP用会議室を見つけるとそのVoIP用会議室を閉鎖する(ステップS282)。
閉鎖されたVoIP用会議室がチャットサーバ110により管理するチャネルから派生したものである場合、クライアント端末200側では、チャットアプリ210により派生元のチャネルを通じてチャットコミュニケーションを再開することも可能である。また、CM130が、閉鎖されたVoIP用会議室からチャットサーバ110内に新たなチャネルを作成し、このチャネル情報またはチャット接続要求を該当するクライアント端末200に送信するように構成することも可能である。
【0106】
このような第9実施形態によれば、自端末がVoIP用会議室に参加してから一定時間後にVoIP接続を終了させてチャットによる会話に速やかに移行するように構成できる。
〔第10実施形態〕
本発明の第10実施形態が採用されるシステムの概要を図10に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0107】
MCU120に作成されたVoIP用会議室を通じてクライアント端末200がVoIP電話コミュニケーションを行っている間、CM130はVoIP用会議室内の音声会話メッセージを音声認識して所定の文字列が出現したか否かを判別する。たとえば、音声会話メッセージを音声認識してその中に「終了」という文字列が含まれている場合に、所定の文字列が出現したと判断する(図10▲1▼)。
VoIP用会議室内の音声会話メッセージを音声認識した結果、所定の文字列を検出した場合には、CM130はMCU120内の該当するVoIP用会議室を閉鎖する(図10▲2▼)。
【0108】
これと同時に、CM130は、閉鎖したVoIP用会議室に属するクライアント端末200に対してVoIP用会議室を閉鎖した旨の通知(切断通知)を送信する(図10▲3▼)。
この第10実施形態を構成するための制御ブロック図を図28に示す。
この第10実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0109】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0110】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列の中に所定の文字列が存在するか否かを判断するVoIP終了キーワード抽出部141とを備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0111】
このようにした第10実施形態における動作を図46に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS291)。
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS292)、VoIP終了キーワード抽出部141に送信される。
【0112】
VoIP終了キーワード抽出部141では、変換された文字列中に所定の文字列(終了キーワード)が含まれているか否かを判別し(ステップS293)、所定の文字列を検出した場合にはMCU120内の該当するVoIP用会議室を閉鎖する(ステップS294)。VoIP終了キーワード抽出部141は、これと同時に、クライアント端末100に対してVoIP切断通知を送信する(ステップS295)。
クライアント端末200側では、サーバ端末100からのVoIP切断通知を受けると、VoIPアプリ220が該当するVoIP用会議室が閉鎖された旨の表示を行うなどしてVoIP切断表示を行う(ステップS301)。
【0113】
ここで閉鎖されたVoIP用会議室が、チャットサーバ110が管理するチャネルから派生したものである場合には、該当するクライアント端末200のユーザは元のチャネルを通じて文字列会話メッセージによるチャットコミュニケーションに戻ることも可能であり、そうでない場合には、チャットサーバ110により新たなチャネルを作成させるように構成することも可能である。
このような第10実施形態では、VoIP用会議室で「終了しましょう」などの終了キーワードとなる発言をすることで、VoIP電話コミュニケーションを終了させ、チャットコミュニケーションへの移行を速やかに行うことを可能にする。
【0114】
〔第11実施形態〕
本発明の第11実施形態が採用されるシステムの概要を図11に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0115】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し(図11▲1▼)、その認識結果である文字列をチャットサーバ110に送出する(図11▲2▼)。
チャットサーバ110は、CM130から送信されてくる文字列情報を文字列会話メッセージとしてクライアント端末200に送信する(図11▲3▼)。チャットサーバ110が管理するチャネルから派生したVoIP用会議室内の音声会話メッセージを音声認識する場合には、派生元のチャネルに属するクライアント端末200にのみ文字列情報を送信するように構成することが可能であり、また他の特定のチャネルに文字列情報を送信するように構成することも可能である。
【0116】
この第11実施形態を構成するための制御ブロック図を図29に示す。
この第11実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0117】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142とを備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0118】
このようにした第11実施形態における動作を図47に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS311)。
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS312)、VoIPワード抽出部142に送信される。
【0119】
音声会話メッセージから変換された文字列は、VoIPワード抽出部142からチャットサーバ110に送信され、チャットサーバ110からチャネル内の文字列会話メッセージとしてクライアント端末200に送信される(ステップS313)。
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくる音声認識された文字列をチャットアプリ210を通じて表示する(ステップS321)。
【0120】
このような第11実施形態では、VoIP用会議室に参加していないクライアント端末でもVoIP用会議室内での会話内容を知ることが可能となる。
〔第12実施形態〕
本発明の第12実施形態が採用されるシステムの概要を図12に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0121】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し(図12▲1▼)、その認識結果である文字列とその文字列から抽出したキーワードをチャットサーバ110に送出する(図12▲2▼)。
チャットサーバ110は、CM130から送信されてくる音声認識結果である文字列情報と抽出キーワードを文字列会話メッセージとしてクライアント端末200に送信する(図12▲3▼)。
CM130は、VoIP用会議室の派生元チャネルとは異なるVoIPワード専用チャネルをチャットサーバ110内に作成し、音声認識結果である文字列情報をこのVoIPワード専用チャネルを介して送信させ、抽出キーワードをVoIP用会議室の派生元チャネルを介して送信させるように構成できる。
【0122】
この第12実施形態を構成するための制御ブロック図を図30に示す。
この第12実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0123】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142と、音声認識手段140により変換された文字列からキーワードするVoIPキーワード抽出部143と、音声認識手段140により変換された文字列を文字列会話メッセージとして送信するための専用チャネルをチャットサーバ110内に作成するVoIPワード専用チャネル作成部144とを備えている。
【0124】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第12実施形態における動作を図48に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室、またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS331)。このとき、VoIPワード専用チャネル作成部144により、VoIPワード専用チャネルをチャットサーバ110内に作成する(フローS)。
【0125】
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS332)、VoIPワード抽出部142およびVoIPキーワード抽出部143に送信される。
音声会話メッセージから変換された文字列は、VoIPワード抽出部142からVoIPワードとしてチャットサーバ110に送信され、チャットサーバ110からVoIPワード専用チャネル内の文字列会話メッセージとしてクライアント端末200に送信される(ステップS333)。
【0126】
また、VoIPキーワード抽出部143によって抽出されたキーワードは、VoIPキーワードとしてチャットサーバ110に送信され、チャットサーバ110から派生元チャネル内の文字列会話メッセージとしてクライアント端末200に送信される(ステップS334)。
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPキーワードを派生元チャネルの文字列会話メッセージとして表示し、サーバ端末100から送信されてくるVoIPワードをVoIPワード専用チャネル内の文字列会話メッセージとして表示する(ステップS341)。
【0127】
VoIPワード専用チャネル作成部144がVoIPワード専用チャネルを作成した際に、派生元チャネルに属するクライアント端末200に対して、このVoIPワード専用チャネルのチャネル名情報を通知するように構成することができ、また派生元チャネル内においてVoIPワード専用チャネルのチャネル名情報を流すことも可能である。
クライアント端末200側では、VoIP用会議室に参加していない場合であっても、音声会話メッセージから抽出されたキーワードを派生元チャネル内で文字列として認識することが可能であり、さらに詳細を知りたい場合にはVoIPワード専用チャネルに接続することにより音声認識された結果の文字列を参照することが可能となる。
【0128】
〔第13実施形態〕
本発明の第13実施形態が採用されるシステムの概要を図13に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0129】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し(図13▲1▼)、その認識結果である文字列を翻訳し(図13▲2▼)、さらに翻訳結果の文字列とその文字列から抽出したキーワードをチャットサーバ110に送出する(図13▲3▼)。
チャットサーバ110は、CM130から送信されてくる翻訳結果である文字列情報と抽出キーワードを文字列会話メッセージとしてクライアント端末200に送信する(図13▲4▼)。
【0130】
CM130は、VoIP用会議室の派生元チャネルとは異なるVoIPワード専用チャネルをチャットサーバ110内に作成し、翻訳結果である文字列情報をこのVoIPワード専用チャネルを介して送信させ、抽出キーワードをVoIP用会議室の派生元チャネルを介して送信させるように構成できる。
この第13実施形態を構成するための制御ブロック図を図31に示す。
この第13実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
【0131】
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0132】
CM130は、チャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142と、音声認識手段140により変換された文字列からキーワードするVoIPキーワード抽出部143と、VoIPワード抽出部142から送信されるVoIPワードを文字列会話メッセージとして送信するための専用チャネルをチャットサーバ110内に作成するVoIPワード専用チャネル作成部144と、VoIPワード抽出部142で抽出されたVoIPワードおよびVoIPキーワード抽出部143で抽出されたVoIPキーワードを翻訳する翻訳部145とを備えている。
【0133】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第13実施形態における動作を図49に基づいて説明する。
サーバ端末100側では、チャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS351)。このとき、VoIPワード専用チャネル作成部144により、VoIPワード専用チャネルをチャットサーバ110内に作成する(フローS)。
【0134】
VoIP用会議室内での音声会話メッセージは、音声認識手段140によって文字列に変換され(ステップS352)、VoIPワード抽出部142およびVoIPキーワード抽出部143に送信される。
VoIPワード抽出部142は、音声会話メッセージから変換された文字列を翻訳部145により翻訳させ、VoIPワード専用チャネル内の文字列会話メッセージとしてチャットサーバ110に送信させる(ステップS353)。
また、VoIPキーワード抽出部143は、音声会話メッセージから変換された文字列からキーワードを抽出し、これを翻訳部145により翻訳させ、派生元チャネル内の文字列会話メッセージとしてチャットサーバ110に送信させる(ステップS354)。
【0135】
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPキーワードを派生元チャネルの文字列会話メッセージとして表示し、サーバ端末100から送信されてくるVoIPワードをVoIPワード専用チャネル内の文字列会話メッセージとして表示する(ステップS361)。
VoIPワード専用チャネル作成部144がVoIPワード専用チャネルを作成した際に、派生元チャネルに属するクライアント端末200に対して、このVoIPワード専用チャネルのチャネル名情報を通知するように構成することができ、また派生元チャネル内においてVoIPワード専用チャネルのチャネル名情報を流すことも可能である。
【0136】
このようにした第13実施形態では、派生元チャネルに文字列として表示されるVoIPキーワードおよびVoIPワード専用チャネルに文字列として表示されるVoIPワードを、VoIP用会議室内の音声パケットと異なる言語で表示することができ、会話内容の把握を容易にすることができる。
〔第14実施形態〕
本発明の第14実施形態が採用されるシステムの概要を図14に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0137】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識するとともに、音声会話メッセージの内容を保存する(図14▲1▼)。
また、CM130は、音声認識の結果である文字列をチャットサーバ110に送出する(図14▲2▼)。
チャットサーバ110は、CM130から送信されてくる音声認識の結果である文字列情報を文字列会話メッセージとしてクライアント端末200に送信する(図14▲3▼)とともに、この文字列情報をチャットログとして一時的に格納する。
【0138】
MCU120内のVoIP用会議室が終了した際に、CM130は保存された音声会話メッセージの保存ディレクトリ名をチャットサーバ110に通知する(図14▲4▼)。
チャットサーバ110では、送信されてきた保存ディレクトリ名と、チャットログ内のVoIPワードとの関連付けを行って、チャットログを音声会話メッセージの保存ディレクトリとのリンク情報とともに格納する(図14▲5▼)。
この第14実施形態を構成するための制御ブロック図を図32に示す。
【0139】
この第14実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0140】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142と、VoIP用会議室内の音声会話メッセージを保存するとともに保存ディレクトリ名をチャットサーバ110に送信するVoIPログ部146とを備えている。
【0141】
チャットサーバ110は、CM130のVoIPワード抽出部142から送信されてくるVoIPワードを該当するチャネル内の文字列会話メッセージとしてクライアント端末200に通知するとともに、このVoIPワードをチャットログとして保存し、かつVoIPログ部146から通知される保存ディレクトリ名と対応するVoIPワードとのリンク情報を保存するVoIPリンク部113を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0142】
このようにした第14実施形態における動作を図50に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS371)。
VoIP用会議室内での音声会話メッセージは、VoIPログ部146に送信されるとともに、音声認識手段140によって文字列に変換され(ステップS372)、文字列に変換されたVoIPワードとしてVoIPワード抽出部142に送信される。
【0143】
VoIPワード抽出部142は、音声会話メッセージから文字列に変換されたVoIPワードをチャットサーバ110が管理するチャネル内の文字列会話メッセージとしてチャットサーバ110に送信させる(ステップS373)。ここで、チャットサーバ110が管理するチャネルから派生したVoIP用会議室内の音声会話メッセージに基づくVoIPワードである場合には、チャットサーバ110は派生元のチャネル内の文字列会話メッセージとして送信するように構成できる。また、クライアント端末200の要求に応じて作成されたVoIP用会議室内での音声会話メッセージに基づくVoIPワードである場合には、CM130がチャットサーバ110内に専用チャネルを作成し、この専用チャネル内の文字列会話メッセージとして送信するように構成することも可能である。
【0144】
また、VoIPログ部146は、VoIP用会議室内の音声会話メッセージを所定の記録媒体に音声会話ログとして保存する(ステップS374)。
MCU120内のVoIP用会議室が閉鎖した際に(ステップS375)、VoIPログ部146は保存した音声会話ログの保存先である保存ディレクトリ名を取得し、これをチャットサーバ110に通知する(ステップS376)。
チャットサーバ110のVoIPリンク部113では、VoIPワード抽出部142から送出されるVoIPワードをチャットログと逐次保存しており、VoIP用会議室が閉鎖された際にVoIPログ部146から送信される保存ディレクトリ名とチャットログ内の対応する文字列との関連付けを行ってリンクをを張り付ける(ステップS377)。
【0145】
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPワードを派生元チャネルまたは専用チャネルの文字列会話メッセージとして表示し、VoIP用会議室内の音声会話を文字列で認識できるようにする(ステップS381)。
このようにした第14実施形態では、チャットログを後日検証する際に、対応するVoIPログを参照することが可能となり、文字列だけでは不明な細かい点についても確認が可能となる。
【0146】
〔第15実施形態〕
本発明の第15実施形態が採用されるシステムの概要を図15に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0147】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識する(図15▲1▼)。また、CM130は、音声認識の結果である文字列をチャットサーバ110に送出する(図15▲2▼)。
チャットサーバ110は、CM130から送信されてくる音声認識の結果である文字列情報を文字列会話メッセージとしてクライアント端末200に送信する(図15▲3▼)。
クライアント端末200では、サーバ端末100から受信した文字列情報をチャネル内の文字列会話メッセージとして表示し、その文字列情報に対するユーザからの指示を受け付ける(図15▲4▼)。
【0148】
文字列情報がクリックされると、サーバ端末100に対してVoIP接続を行い、その文字列情報に対応するVoIP用会議室に参加する(図15▲5▼)。
この第15実施形態を構成するための制御ブロック図を図33に示す。
この第15実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
【0149】
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0150】
CM130は、クライアント端末200からの要求に応じてMCU120内に作成されたVoIP用会議室またはチャットサーバ110からの所定条件到達情報に基づいてMCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列をチャットサーバ110に送信するVoIPワード抽出部142とを備えている。
チャットサーバ110は、CM130のVoIPワード抽出部142から送信されてくるVoIPワードを該当するチャネル内の文字列会話メッセージとしてクライアント端末200に通知する。
【0151】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
チャットアプリ210は、チャネル内の文字列会話メッセージが特定のVoIP用会議室における音声会話メッセージに基づくVoIPワードであることを認識できるように表示し、このVoIPワードがユーザによりクリックされると、VoIPアプリに対して該当するVoIP用会議室に接続するように要求を出すVoIP接続部213を備えている。
【0152】
このようにした第15実施形態における動作を図51に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS391)。
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS392)、文字列に変換されたVoIPワードとしてチャットサーバ110に送信される。
【0153】
チャットサーバ110は、文字列に変換されたVoIPワードを所定のチャネル内の文字列会話メッセージとして送出するとともに、該当するVoIP用会議室情報およびそのVoIP用会議室がチャットチャネルから派生したものである場合にはその派生元チャネル情報などをクライアント端末200に送信する(ステップS393)。
クライアント端末200側では、サーバ端末100から文字列会話メッセージとして送信されてくるVoIPワードを派生元チャネルまたは専用チャネルの文字列会話メッセージとして表示する(ステップS401)。VoIPワード接続部213は、表示されるVoIPワードとサーバ端末100から送信されるVoIP用会議室情報とを関連づけ(ステップS402)、ユーザによりVoIPワードがクリックされた場合にそのVoIP用会議室への接続を行うように構成する。
【0154】
このようにした第15実施形態では、クライアント200のチャットアプリ210上にVoIP用会議室内の音声会話を文字列で表示しており、その内容を容易に把握できるとともに、表示されているVoIPワードをクリックするだけで容易にVoIP用会議室への参加が可能となる。
〔第16実施形態〕
本発明の第16実施形態が採用されるシステムの概要を図16に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0155】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し、個人名および呼出キーワードがその中に含まれているか否かの検出を行う(図16▲1▼)。
CM130は、個人名および呼出キーワードを検出した場合には、該当するクライアント端末200のIPアドレスを取得してそのクライアント端末200に対してVoIP接続要求を通知する(図16▲2▼)。
サーバ端末100からのVoIP接続要求を受けたクライアント端末200において、そのクライアント端末200を使用しているユーザが応答した場合(図16▲3▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP用会議室内の音声会話メッセージとして制御される。
【0156】
この第16実施形態を構成するための制御ブロック図を図34に示す。
この第16実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0157】
CM130は、チャットサーバ110の管理するチャネルに属するクライアント端末200からのIPアドレス登録を受け付けてIPアドレステーブル132に格納するクライアントIPアドレス登録部131と、クライアントIPアドレス登録部131からクライアント端末200のIPアドレスを取得するIPアドレス取得部133と、IPアドレス取得部133で取得したIPアドレスのクライアント端末200に対してVoIP接続要求を送信するVoIP接続要求部134と、MCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列中に個人名および呼出キーワードを検出するVoIP個人呼出抽出部147とを備えている。
【0158】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うためのVoIPクライアントを構成するVoIPアプリ220とを備えている。
このようにした第16実施形態における動作を図52に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS411)。
【0159】
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS412)、変換された文字列情報はVoIP個人呼出抽出部147に送信される。
VoIP個人呼出抽出部147では、変換された文字列情報中に個人名および呼出キーワードがあるか否かを判別し(ステップS413)、個人名および呼出キーワードが存在している場合には該当する個人名が使用しているユーザ名を取得しこれをIPアドレス取得部133に通知する(ステップS415)。
【0160】
IPアドレス取得部133では、クライアントIPアドレス登録部131のIPアドレステーブル132を参照し、ユーザ名に該当するクライアント端末200のIPアドレスを取得する(ステップS415)。
IPアドレス取得部133は、クライアントIPアドレス登録部131から取得したIPアドレスと、ユーザ名とをセットにしてこれをVoIP接続要求部134に通知する(ステップS416)。
VoIP接続要求部134は、通知されたIPアドレスおよびユーザ名に基づいて、該当するクライアント端末200に対してVoIP接続要求を通知し、呼出のあったVoIP用会議室への接続要求を行う(ステップS417)。
【0161】
クライアント端末200では、サーバ端末100側からVoIP接続要求通知を受けると、アプリケーションがその旨の表示を行い、VoIP接続に応答するか否かをユーザに選択させる(ステップS421)。ユーザがVoIP接続要求に応答する旨の指示を行った場合には、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する(ステップS422)。
VoIP接続要求通知を受けたクライアント端末200では、たとえば、図59に示すようなVoIP会議接続要求ダイアログ540を立ち上げるように構成できる。このVoIP会議接続要求ダイアログ540では、通知の種別がVoIP会議接続要求である旨を示す通知種別バー541、呼出があったVoIP用会議室名の表示を行う内容表示部542、参加することに同意することを指示する承諾ボタン543、参加することに同意しないことを指示する拒否ボタン544などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン543をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0162】
このような第16実施形態では、VoIP用会議室に参加してほしいユーザ名を会話の中で呼ぶことで自動的に該当のユーザに連絡され、電話番号をダイヤルするなどの手間を省くことができる。
〔第17実施形態〕
本発明の第17実施形態が採用されるシステムの概要を図17に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0163】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し、個人名および呼出キーワードがその中に含まれているか否かの検出を行う(図17▲1▼)。
CM130は、個人名および呼出キーワードを検出した場合には、該当するユーザ名のクライアント端末200に対して、そのVoIP用会議室情報を通知する(図17▲2▼)。
サーバ端末100からのVoIP用会議室情報を受けたクライアント端末200において、そのクライアント端末200がVoIP用会議室への接続を行った場合(図17▲3▼)、そのクライアント端末200を通じて送信されてくる音声会話メッセージは、CM130を通じてMCU120に送出され、VoIP会議室内の音声会話メッセージとして制御される。
【0164】
この第17実施形態を構成するための制御ブロック図を図35に示す。
この第17実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
チャットサーバ110は、チャネル内の文字列会話メッセージを制御して複数のクライアント端末200の間で文字列によるチャットコミュニケーションを提供する。このチャットサーバ110は、前述の実施形態と同様に、チャネル内の文字列会話メッセージの出現率や特定文字列の検出などに基づいてCM130に所定条件到達情報を送信し、MCU120内に該当するVoIP用会議室を作成させるとともに、該当するクライアント端末200にVoIP接続要求またはVoIP用会議室情報の通知をさせるように構成できる。
【0165】
CM130は、MCU120内に作成されたVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列中に個人名および呼出キーワードを検出するVoIP個人呼出抽出部147と、VoIP個人呼出抽出部147からの情報に基づいて該当するクライアント端末200に対して呼出のあったVoIP用会議室に関する情報をチャットサーバ110を介して送信するVoIP用会議室通知部135とを備えている。
【0166】
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うたSめのVoIPクライアントを構成するVoIPアプリ220とを備えている。
チャットアプリ210は、チャットサーバ110が管理するチャネル内の文字列会話メッセージを送受信するチャット機能の他に、VoIP用会議室通知部135からの通知に応じてそのVoIP用会議室への接続を行うVoIP接続部211を備えている。
【0167】
このようにした第17実施形態における動作を図53に基づいて説明する。
サーバ端末100側では、クライアント端末200からの要求に応じて作成されたVoIP用会議室またはチャットサーバ110によりチャネル内の文字列会話メッセージを監視した結果作成されたVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS431)。
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS432)、変換された文字列情報はVoIP個人呼出抽出部147に送信される。
【0168】
VoIP個人呼出抽出部147では、変換された文字列情報中に個人名および呼出キーワードがあるか否かを判別し(ステップS433)、個人名および呼出キーワードが存在している場合には該当する個人名に対応するユーザ名を取得しこれをVoIP用会議室通知部135に通知する(ステップS434)。
VoIP用会議室通知部135では、通知されたユーザ名に基づいて該当するクライアント端末200に対して、呼出のあったVoIP用会議室情報を通知する(ステップS435)。
【0169】
クライアント端末200では、サーバ端末100側からVoIP用会議室の通知を受けると、チャットアプリ210を介してその旨の表示を行い、VoIP用会議室への接続を行うか否かをユーザに選択させる(ステップS441)。ユーザがVoIP接続を行う旨の指示を行った場合には、VoIPアプリ220により該当するVoIP用会議室に接続して音声会話を開始する(ステップS442)。
VoIP用会議室の通知を受けたクライアント端末200では、たとえば、図60に示すようなVoIP会議室通知ダイアログ550を立ち上げるように構成できる。このVoIP会議室通知ダイアログ550では、通知の種別がVoIP会議室通知である旨を示す通知種別バー551、「VoIP会議室”VoIP”で呼ばれています」の内容表示を行う内容表示部552、参加することに同意することを指示する承諾ボタン553、参加することに同意しないことを指示する拒否ボタン554などを備えている。ユーザがVoIP用会議室への参加に同意する場合には、承諾ボタン553をクリックすることで、クライアント端末200のVoIPアプリ220により該当するVoIP用会議室への接続が可能となり、VoIP電話による音声会話に移行することができる。
【0170】
このような第17実施形態では、VoIP用会議室に参加してほしいユーザ名を会話の中で呼ぶことで自動的に該当のユーザに連絡され、電話番号をダイヤルするなどの手間を省くことができる。
〔第18実施形態〕
本発明の第18実施形態が採用されるシステムの概要を図18に示す。
第1実施形態と同様にして、サーバ端末100と複数のクライアント端末200,200がネットワーク上に接続されており、ネットワーク上に設営される複数の文字列会話空間であるチャネルのうちのいずれかを共有するチャットコミュニケーションまたはネットワーク上に設営される複数の音声会話空間であるVoIP用会議室のうちのいずれかを共有するVoIP電話コミュニケーションを実現している。
【0171】
CM130はMCU120のVoIP用会議室内で送受信される音声会話メッセージを音声認識し、所定の文字列がその中に含まれているか否かの検出を行う(図18▲1▼)。たとえば、CM130がVoIP用会議室内の音声会話メッセージ中に「チャット」という言葉を検出した場合には、チャットサーバ110に対してそのVoIP用会議室に対応するチャネルを開設するように要求する(図18▲2▼)。
チャットサーバ110は、VoIP用会議室に属するクライアント端末200に対して、CM130からの要求に応じて開設したチャネルに招待するためのインバイト通知を行う(図18▲3▼)。
【0172】
この第18実施形態を構成するための制御ブロック図を図36に示す。
この第18実施形態においても、第1実施形態と同様にしてサーバ端末100とクライアント端末200とがネットワーク300を介して接続されている。
サーバ端末100は、前述したように、チャットサーバ110と、MCU120とCM130とを備えている。
CM130は、MCU120内のVoIP用会議室について、そのVoIP用会議室内の音声会話メッセージを音声認識して文字列に変換する音声認識手段140と、音声認識手段140により変換された文字列中に所定の文字列を検出した場合にチャットサーバ110に対してチャネル開設要求を通知するチャット移行キーワード抽出部148とを備えている。
【0173】
チャットサーバ110は、チャット移行キーワード抽出部148から送信されるチャネル開設要求に基づいて、そのVoIP用会議室に対応するチャネルを作成して対応するクライアント端末にインバイト通知を行うチャネル作成部114を備えている。
クライアント端末200には、サーバ端末100のチャットサーバ110が管理するチャネル内での文字列会話メッセージの送受信を行うためのチャットクライアントを構成するチャットアプリ210と、サーバ端末100のMCU120が管理するVoIP用会議室内での音声会話メッセージの送受信を行うたSめのVoIPクライアントを構成するVoIPアプリ220とを備えている。
【0174】
このようにした第18実施形態における動作を図54に基づいて説明する。
サーバ端末100側では、MCU120内のVoIP用会議室を通じて、各クライアント端末200からのVoIP音声パケットを制御する(ステップS451)。
VoIP用会議室内での音声会話メッセージは音声認識手段140によって文字列に変換され(ステップS452)、変換された文字列情報はチャット移行キーワード抽出部148に送信される。
チャット移行キーワード抽出部148では、変換された文字列情報中にチャット移行に対応するキーワードがあるか否かを判別し(ステップS453)、チャット移行キーワードが存在している場合にはチャットサーバ110に対してチャネル開設要求を通知する(ステップS454)。
【0175】
チャットサーバ110のチャネル作成部114では、チャット移行キーワード抽出部148から通知されたVoIP用会議室に対応するチャネルを作成し(ステップS455)、そのVoIP用会議室に参加しているクライアント端末200に対して、開設したチャネルへのインバイト通知を行う(ステップS456)。
クライアント端末200では、サーバ端末100からのインバイト通知に応じて、チャットアプリ210により該当するチャネル名などの情報を表示して招待されている旨のインバイト表示を行う(ステップS461)。ユーザがこのインバイト通知に応答してチャネルに接続した場合には、チャットアプリ210を通じて文字列会話メッセージによるコミュニケーションを開始することが可能となる。
【0176】
この第18実施形態においては、VoIP用会議室内における特定の発言(「チャットに移行しましょう」などの発言)をするだけで、VoIP用会議室からチャットに移行することができ、ユーザがチャネルを開設する手間を省き、ユーザ間のネゴシエーションの手間を省くことができる。
〔他の実施形態〕
前述した各実施形態の機能のうち、2以上の機能を含む構成とすることも可能であり、その組み合わせも自由に構成することができる。
<付記>
(付記1)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
を備えるマルチチャネル会話サーバ。
【0177】
(付記2)
前記会話監視手段は、チャネル内における文字列会話メッセージの出現率が所定時間内において所定値を超えた場合に所定条件になったと判断する、付記1に記載のマルチチャネル会話サーバ。
(付記3)
前記会話監視手段は、チャネル内における文字列会話メッセージ中に特定の文字列が出現した場合に所定条件になったと判断する、付記1に記載のマルチチャネル会話サーバ。
【0178】
(付記4)
前記会話監視手段により検出された文字列会話メッセージ中の特定の文字列を音声データに変換する音声合成手段と、
前記音声合成手段により変換された音声データを対応するチャネルに属するクライアントに通知するVoIP呼出手段と、
をさらに備える、付記3に記載のマルチチャネル会話サーバ。
(付記5)
前記VoIP通知手段は、対応するチャネルのVoIP用会議室をVoIPサーバに設定し、前記チャネルに属するクライアントに対してVoIP接続要求通知を送信する、付記1〜4のいずれかに記載のマルチチャネル会話サーバ。
【0179】
(付記6)
前記VoIPサーバが管理するVoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力するVoIP音声監視手段と、前記VoIP音声監視手段からの所定条件到達情報に基づいて前記VoIPサーバが管理するVoIP用会議室を終了させるVoIP終了手段と、
をさらに備える付記1〜5のいずれかに記載のマルチチャネル会話サーバ。
(付記7)
前記VoIP音声監視手段は、前記VoIP用会議室内における音声パケット量が所定値以下になった場合に所定条件になったと判断する、付記6に記載のマルチチャネル会話サーバ。
【0180】
(付記8)
前記VoIP音声監視手段は、前記VoIP用会議室内における音声会話メッセージを音声認識し特定のキーワードを抽出した場合に所定条件になったと判断する、付記6に記載のマルチチャネル会話サーバ。
(付記9)
前記VoIP音声監視手段は、前記VoIP用会議室が設定されてからの経過時間が所定値を超えた場合に所定条件になったと判断する、付記6に記載のマルチチャネル会話サーバ。
【0181】
(付記10)
前記VoIP終了手段は、前記VoIP用会議室に属するクライアントに対して前記チャットサーバが管理するチャネルに移行することを促すチャット移行通知を送信する、付記6〜9のいずれかに記載のマルチチャネル会話サーバ。
(付記11)
前記VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報を前記チャットサーバが管理するチャネル内の文字列会話メッセージとして前記チャネルに属するクライアントに送信する変換文字列通知手段と、
をさらに備える、付記1〜10のいずれかに記載のマルチチャネル会話サーバ。
【0182】
(付記12)
前記変換文字列通知手段が送信する文字列情報を含めて前記チャネル内の文字列会話メッセージをチャットログとして管理するチャットログ管理手段と、
前記VoIPサーバが管理するVoIP用会議室内における音声会話メッセージをVoIPログとして管理するVoIPログ管理手段と、
前記チャットログ管理手段が管理するチャットログのうち前記変換文字列通知手段により送信された文字列情報を、前記VoIPログ管理手段が管理するVoIPログ内の対応箇所とリンクさせるVoIPリンク手段と、
をさらに備える、付記11に記載のマルチチャネル会話サーバ。
【0183】
(付記13)
前記VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報中から前記VoIP用会議室内における会話の特徴となる文字列を抽出するキーワード抽出手段と、
文字列による会話メッセージを制御することが可能なVoIP専用チャネルを設定し、前記音声認識手段により変換された文字列情報を前記VoIP専用チャネルを介して各クライアントに送信するVoIPワード送信手段と、
前記キーワード抽出手段により抽出された文字列を前記チャットサーバが管理するチャネル内の文字列会話メッセージとして前記チャネルに属するクライアントに送信するキーワード通知手段と、
をさらに備える、付記1〜10のいずれかに記載のマルチチャネル会話サーバ。
【0184】
(付記14)
前記音声認識手段により変換された文字列情報を他の言語に翻訳する翻訳手段をさらに備える、付記11〜13のいずれかに記載のマルチチャネル会話サーバ。
(付記15)
前記VoIP用会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報中から前記VoIP用会議室に未接続の個人を特定する文字列を検出した場合、特定された個人を呼び出すためのIPアドレスを取得しVoIP接続を促すためのVoIP移行通知を前記IPアドレスに送信する個人呼出手段と、
をさらに備える、付記1に記載のマルチチャネル会話サーバ。
【0185】
(付記16)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP会議室上での音声による同時コミュニケーションを行わせるVoIPサーバと、
前記VoIP用会議室内における音声会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する音声監視手段と、
前記音声監視手段から出力される所定条件到達情報に基づいて対応するVoIP会議室に属するクライアントに対してチャット接続を促すためのチャット移行通知を送信するチャット通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるものであって、前記チャット通知手段によりチャット移行通知がなされたクライアントに対するチャット用のチャネルを提供するチャットサーバと、
を備えるマルチチャネル会話サーバ。
【0186】
(付記17)
前記音声監視手段は、
前記VoIP会議室内における音声会話メッセージを音声認識して文字列情報に変換する音声認識手段と、
前記音声認識手段により変換された文字列情報中に特定の文字列を検出した場合に所定条件になったと判断するチャット移行キーワード抽出手段と、
を備える付記16に記載のマルチチャネル会話サーバ。
【0187】
(付記18)
ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記チャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を備えるマルチチャネル会話クライアント。
【0188】
(付記19)
自端末から前記VoIP用会議室に送信される音声パケット量を監視し、所定値以下であると判断した場合に前記VoIPクライアントによるVoIP用会議室への接続を終了するVoIP通信量監視手段をさらに備える、付記18に記載のマルチチャネル会話クライアント。
(付記20)
前記VoIP移行手段によるVoIP用会議室への接続から所定時間を経過したと判断した場合に、前記VoIPクライアントによるVoIP用会議室への接続を終了するVoIP接続時間監視手段をさらに備える、付記18に記載のマルチチャネル会話クライアント。
【0189】
(付記21)
前記VoIPサーバ側において前記VoIP用会議室内の音声会話メッセージを音声認識して変換された文字列情報を受信し、前記チャットクライアントを介して文字列会話メッセージとして表示するVoIPワード表示手段と、
前記VoIPワード表示手段により表示された文字列情報に対する選択指示を受け付け、対応するVoIP用会議室に前記VoIPクライアントを接続するVoIP接続手段と、
をさらに備える、付記18〜20のいずれかに記載のマルチチャネル会話クライアント。
【0190】
(付記22)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
前記チャットサーバとの間でチャネルを共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
前記VoIPサーバとの間でVoIP用会議室を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記VoIP通知手段によりVoIP移行通知を受信した場合に、前記VoIPサーバが提供するVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を含むマルチチャネル会話システム。
【0191】
(付記23)
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせる段階と、
を含むマルチチャネル会話方法。
【0192】
(付記24)
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
を備えるマルチチャネル会話サーバとしてコンピュータを機能させるためのプログラム。
【0193】
(付記25)
ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記チャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を備えるマルチチャネル会話クライアントとしてコンピュータを機能させるためのプログラム。
【0194】
(付記26)
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせる段階と、
を含むマルチチャネル会話方法をコンピュータに実行させるためのプログラム。
【0195】
【発明の効果】
本発明によれば、文字列会話メッセージによるチャットシステムと音声会話メッセージによるVoIP電話システムとの連携を行うことで、ユーザが電話番号を打ち込んだり、VoIP用会議室の開設を行ったり、チャット用チャネルを開設する手間を省くとともに、ユーザ間における移行のためのネゴシエーションを省略して省力化することが可能であり、会議の中断時間を極力少なくすることができる。
【図面の簡単な説明】
【図1】第1実施形態の概要説明図。
【図2】第2実施形態の概要説明図。
【図3】第3実施形態の概要説明図。
【図4】第4実施形態の概要説明図。
【図5】第5実施形態の概要説明図。
【図6】第6実施形態の概要説明図。
【図7】第7実施形態の概要説明図。
【図8】第8実施形態の概要説明図。
【図9】第9実施形態の概要説明図。
【図10】第10実施形態の概要説明図。
【図11】第11実施形態の概要説明図。
【図12】第12実施形態の概要説明図。
【図13】第13実施形態の概要説明図。
【図14】第14実施形態の概要説明図。
【図15】第15実施形態の概要説明図。
【図16】第16実施形態の概要説明図。
【図17】第17実施形態の概要説明図。
【図18】第18実施形態の概要説明図。
【図19】第1実施形態の制御ブロック図。
【図20】第2実施形態の制御ブロック図。
【図21】第3実施形態の制御ブロック図。
【図22】第4実施形態の制御ブロック図。
【図23】第5実施形態の制御ブロック図。
【図24】第6実施形態の制御ブロック図。
【図25】第7実施形態の制御ブロック図。
【図26】第8実施形態の制御ブロック図。
【図27】第9実施形態の制御ブロック図。
【図28】第10実施形態の制御ブロック図。
【図29】第11実施形態の制御ブロック図。
【図30】第12実施形態の制御ブロック図。
【図31】第13実施形態の制御ブロック図。
【図32】第14実施形態の制御ブロック図。
【図33】第15実施形態の制御ブロック図。
【図34】第16実施形態の制御ブロック図。
【図35】第17実施形態の制御ブロック図。
【図36】第18実施形態の制御ブロック図。
【図37】第1実施形態のフローチャート。
【図38】第2実施形態のフローチャート。
【図39】第3実施形態のフローチャート。
【図40】第4実施形態のフローチャート。
【図41】第5実施形態のフローチャート。
【図42】第6実施形態のフローチャート。
【図43】第7実施形態のフローチャート。
【図44】第8実施形態のフローチャート。
【図45】第9実施形態のフローチャート。
【図46】第10実施形態のフローチャート。
【図47】第11実施形態のフローチャート。
【図48】第12実施形態のフローチャート。
【図49】第13実施形態のフローチャート。
【図50】第14実施形態のフローチャート。
【図51】第15実施形態のフローチャート。
【図52】第16実施形態のフローチャート。
【図53】第17実施形態のフローチャート。
【図54】第18実施形態のフローチャート。
【図55】VoIP会議接続要求ダイアログの説明図。
【図56】VoIP会議室通知ダイアログの説明図。
【図57】VoIP会議接続要求ダイアログの説明図。
【図58】VoIP会議室通知ダイアログの説明図。
【図59】VoIP会議接続要求ダイアログの説明図。
【図60】VoIP会議室通知ダイアログの説明図。[0001]
TECHNICAL FIELD OF THE INVENTION
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a multi-channel conversation system, and more particularly, to a multi-channel conversation in which a chat system that provides communication using a character string conversation message in real time and a VoIP (Voice over Internet Protocol) system that provides communication using a voice conversation message. About the system.
[0002]
[Prior art]
A chat system is composed of a chat server and a plurality of chat clients connected to a network, and a virtual conversation space called a channel established on the network is shared by the plurality of chat clients to transmit text messages in real time. It is a conversation system that can transmit and receive.
The chat server broadcasts a character string conversation message transmitted from each chat client to other chat clients in the same channel.
[0003]
Each chat client is uniquely specified by an identifier called a nickname, and a character string conversation message in a channel can also specify a speaker by a nickname.
Normally, a chat server provides a plurality of channels, and each channel is given a channel name for uniquely specifying the channel (Non-Patent Document 1).
There is also a VoIP system that transmits and receives voice packets using an IP (Internet Protocol) network to perform voice conversation. In this VoIP system, a VoIP conference room corresponding to a channel in a chat is set in a VoIP server called an MCU (Multipoint Control Unit), and a plurality of users are connected through a client connected to the VoIP conference room. Voice conversation is possible.
[0004]
Each client terminal is managed by a CM (Call Manager) installed on the server side, and by performing call control from each client, simultaneous voice conversation by a plurality of persons becomes possible. Therefore, the voice of the client connected to the VoIP conference room is distributed to other clients connected to the same VoIP conference room. Is distributed to each client (Non-Patent Documents 2 and 3).
By using a chat system as described above, a plurality of users have a conversation in a channel, so that collaborative work using an information terminal has been actively performed. Also, with the speeding up and spread of IP networks, telephone conferences using VoIP systems have begun to be used.
[0005]
In a chat system, a terminal such as a personal computer equipped with a chat application is used while always connected to an IP network. In a VoIP system, a terminal such as a dedicated telephone or a personal computer equipped with a VoIP application is always connected to the IP network. Used in a state, both are used independently.
[0006]
[Non-patent document 1]
jp. Fujitsu. com; Chocoa Communicator
<URL: http: // software. Fujitsu. com / jp / chocoa / product1. html>
[0007]
[Non-patent document 2]
@Nifty: Eyeball Patio Lite
<URL: http: // eyeball. nifty. com / lite / guide01. html>
[0008]
[Non-Patent Document 3]
Macnica Networks; Centra Conference5
<URL: http: // www. networks. macnica. co. jp / centra / conference. html>
[0009]
[Problems to be solved by the invention]
When a conversation using a character string is performed using a chat system, there is a possibility that the conversation may occur so frequently that the user cannot hit the keyboard in time. In this case, if each user terminal supports the VoIP system, it is necessary to make a statement on the chat screen that the user wants to shift to a conference by voice conversation using the VoIP system, and make a call to the other party's VoIP telephone number. In addition, when a telephone conference is performed by a plurality of users, it is necessary to set up a VoIP conference room and have other users participate in the VoIP conference room.
[0010]
SUMMARY OF THE INVENTION It is an object of the present invention to provide a multi-channel conversation system that enables smooth and easy transition without interruption between a channel in a chat system and a VoIP conference room in a VoIP system.
[0011]
[Means for Solving the Problems]
A multi-channel conversation server according to the present invention shares a plurality of virtual character string conversation spaces (hereinafter, referred to as channels) set up on a network with a plurality of clients connected via the network, A chat server that allows simultaneous communication of characters on a channel between multiple users by controlling a string conversation message sent via a client, and monitors a string conversation message in a channel managed by the chat server A conversation monitoring unit that outputs predetermined condition arrival information when a predetermined condition is reached, and obtains an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information output from the conversation monitoring unit, and performs VoIP connection. To send VoIP migration notification to each IP address to prompt A plurality of virtual voice conversation spaces (hereinafter, referred to as VoIP conference rooms) set up on the network are shared between the notifying unit and a plurality of clients connected via the network. A VoIP conference for a client to which simultaneous communication by voice in a VoIP conference room between a plurality of users is performed by controlling a transmitted voice conversation message to a client to which a VoIP notification has been made by a VoIP notification means. And a VoIP server that provides a room.
[0012]
Here, the conversation monitoring means can be configured to determine that the predetermined condition has been reached when the appearance rate of the character string conversation message in the channel exceeds a predetermined value within a predetermined time.
Further, the conversation monitoring means can be configured to determine that a predetermined condition has been satisfied when a specific character string appears in a character string conversation message in the channel.
Further, a voice synthesizing unit that converts a specific character string in the character string conversation message detected by the conversation monitoring unit into voice data, and a VoIP that notifies the client belonging to the corresponding channel of the voice data converted by the voice synthesizing unit. It is also possible to adopt a configuration further including a calling unit.
[0013]
The VoIP notification means may be configured to set a VoIP conference room of a corresponding channel in a VoIP server and to transmit a VoIP connection request notification to a client belonging to the channel.
Also, a VoIP voice monitoring means for monitoring a voice conversation message in a VoIP conference room managed by the VoIP server and outputting predetermined condition reaching information when a predetermined condition is satisfied, and a predetermined condition reaching information from the VoIP voice monitoring means. And a VoIP termination unit that terminates the VoIP conference room managed by the VoIP server based on the VoIP server.
[0014]
Further, the VoIP voice monitoring means can be configured to determine that a predetermined condition has been reached when the amount of voice packets in the VoIP conference room has become equal to or less than a predetermined value, and to perform voice recognition on a voice conversation message in the VoIP conference room. When a specific keyword is extracted, it can be configured to determine that the predetermined condition has been satisfied. When the elapsed time since the setting of the VoIP conference room exceeds a predetermined value, it is determined that the predetermined condition has been satisfied. Can be configured.
The VoIP termination unit may be configured to transmit a chat transition notification that prompts a client belonging to the VoIP conference room to transition to a channel managed by the chat server.
[0015]
Voice recognition means for voice-recognizing a voice conversation message in a VoIP conference room and converting it into character string information; and converting the character string information converted by the voice recognition means into a channel as a character string conversation message in a channel managed by the chat server. It is also possible to provide a configuration further comprising a conversion character string notifying unit for transmitting the converted character string to the client to which the client belongs.
Further, a chat log management means for managing a character string conversation message in a channel including a character string information transmitted by the converted character string notification means as a chat log, and a VoIP conversation message managed in a VoIP conference room managed by a VoIP server. A VoIP log management unit that manages the log as a log, and links the character string information transmitted by the converted character string notification unit in the chat log managed by the chat log management unit to a corresponding part in the VoIP log that is managed by the VoIP log management unit. And a VoIP link unit for performing the operation.
[0016]
Also, a voice recognition means for voice-recognizing a voice conversation message in the VoIP conference room and converting it into character string information, and a character string characterizing the conversation in the VoIP conference room from the character string information converted by the voice recognition means. And a VoIP channel for setting a VoIP exclusive channel capable of controlling a conversation message by a character string, and transmitting the character string information converted by the voice recognition means to each client via the VoIP exclusive channel. The system may further include a word transmitting unit and a keyword notifying unit that transmits a character string extracted by the keyword extracting unit to a client belonging to the channel as a character string conversation message in a channel managed by the chat server.
[0017]
It is possible to adopt a configuration further including a translation unit for translating the character string information converted by the voice recognition unit into another language.
Voice recognition means for voice-recognizing a voice conversation message in a VoIP conference room and converting the same into character string information; and a character string for specifying an individual not connected to the VoIP conference room from the character string information converted by the voice recognition means , A personal call unit that obtains an IP address for calling the specified individual and transmits a VoIP transfer notification for prompting a VoIP connection to the IP address may be further provided.
[0018]
A multi-channel conversation server according to another aspect of the present invention includes a plurality of virtual voice conversation spaces (hereinafter, referred to as VoIP conference rooms) set up on a network with a plurality of clients connected via the network. ), And a VoIP server that allows simultaneous communication by voice in a VoIP conference room among a plurality of users by controlling a voice conversation message transmitted via a client; and a voice conversation message in a VoIP conference room. A voice monitoring unit that outputs predetermined condition arrival information when a predetermined condition is monitored and a chat connection is made to a client belonging to a corresponding VoIP conference room based on the predetermined condition arrival information output from the voice monitoring unit. Chat notification means for sending a chat transition notification to prompt A plurality of virtual string conversation spaces (hereinafter referred to as channels) set up on a network between a plurality of clients connected via a work, and a string conversation transmitted via the client. A chat server that provides simultaneous communication by text on the channel among a plurality of users by controlling a message, and provides a channel for chat to a client that has been notified of the chat transition by the chat notification unit; and Is provided.
[0019]
Here, the voice monitoring means detects the voice conversation message in the VoIP conference room by voice recognition and converts it into character string information, and detects a specific character string in the character string information converted by the voice recognition means. In such a case, a configuration may be provided that includes a chat transition keyword extraction unit that determines that a predetermined condition has been satisfied.
A multi-channel conversation client according to the present invention shares a virtual character string conversation space (hereinafter, referred to as a channel) established on a network with a chat server connected to the network, and communicates with another user. A virtual voice conversation space (hereinafter, referred to as a VoIP conference room) connected on a network between a chat client that transmits and receives a character string conversation message and performs simultaneous communication and a VoIP server connected to the network. ), A VoIP client that performs simultaneous communication by transmitting and receiving voice conversation messages with other users, and a VoIP migration notification that prompts a VoIP connection from the chat server regarding the channel to which the chat client is connected. The VoIP conference room notified And a VoIP migration means for connecting Ianto.
[0020]
Here, the VoIP communication volume monitoring means for monitoring the amount of voice packets transmitted from the own terminal to the VoIP conference room, and terminating the connection to the VoIP conference room by the VoIP client when it is determined that the audio packet volume is equal to or less than a predetermined value. Further, a configuration may be provided.
Further, a configuration is further provided that includes a VoIP connection time monitoring unit that terminates the connection to the VoIP conference room by the VoIP client when it is determined that a predetermined time has elapsed from the connection to the VoIP conference room by the VoIP transfer unit. Can be.
Further, a VoIP word display means for receiving the converted character string information by voice-recognizing the voice conversation message in the VoIP conference room on the VoIP server side and displaying it as a character string conversation message via a chat client, and a VoIP word display. The apparatus may further include a VoIP connection unit that receives a selection instruction for the character string information displayed by the unit and connects a VoIP client to a corresponding VoIP conference room.
[0021]
A multi-channel conversation system according to the present invention shares a plurality of virtual character string conversation spaces (hereinafter, referred to as channels) set up on a network with a plurality of clients connected via the network, A chat server that allows simultaneous communication of characters on a channel between multiple users by controlling a string conversation message sent via a client, and monitors a string conversation message in a channel managed by the chat server A conversation monitoring unit that outputs predetermined condition arrival information when a predetermined condition is reached, and obtains an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information output from the conversation monitoring unit, and performs VoIP connection. To send VoIP migration notification to each IP address to prompt A plurality of virtual voice conversation spaces (hereinafter, referred to as VoIP conference rooms) set up on the network are shared between the P notification means and a plurality of clients connected via the network. Control of a voice conversation message transmitted by a VoIP conference room between a plurality of users by voice communication, wherein the VoIP notification means transmits a VoIP transfer notice to a client to which a VoIP transfer notification has been made. A VoIP server between a VoIP server that provides a conference room and a chat client that shares a channel with a chat server and transmits and receives a character string conversation message with another user to perform simultaneous communication, and a VoIP server Share a meeting room for voice conversations with other users. A VoIP client that performs simultaneous communication by sending and receiving messages and a VoIP client that is connected to a VoIP conference room provided by the VoIP server when the VoIP notification unit receives a VoIP transfer notification for a channel that the chat client is connected to. VoIP transition means
The multi-channel conversation method according to the present invention uses a plurality of virtual character string conversation spaces (hereinafter, referred to as channels) set up on a network between a plurality of clients and a chat server connected via the network. Sharing and controlling simultaneous textual communication on said channel between a plurality of users by controlling the textual conversation message sent through the client; and monitoring the textual conversation message in the channel. A step of outputting predetermined condition arrival information when a predetermined condition is reached; and acquiring IP addresses of clients belonging to the corresponding channel based on the predetermined condition arrival information, and sending a VoIP shift notification for prompting a VoIP connection to each IP address. To the client, and the client and the VoIP that have transmitted the VoIP migration notification. A virtual voice conversation space (hereinafter, referred to as a VoIP conference room) set up on a network is shared between the server and a plurality of users by controlling a voice conversation message transmitted via a client. And performing simultaneous voice communication on the VoIP conference room.
[0022]
A program of a multi-channel conversation server according to the present invention shares a plurality of virtual character string conversation spaces (hereinafter, referred to as channels) set up on a network with a plurality of clients connected via the network. A chat server that controls a character string conversation message transmitted through a client to perform simultaneous character communication on a channel between a plurality of users; and a character string conversation message in a channel managed by the chat server. And a conversation monitoring unit that outputs predetermined condition arrival information when a predetermined condition is reached, and obtains an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information output from the conversation monitoring unit, Send VoIP migration notification to each IP address to prompt VoIP connection VoIP notification means and a plurality of clients connected via the network share a plurality of virtual voice conversation spaces (hereinafter, referred to as VoIP conference rooms) set up on the network, and Controlling simultaneous voice communication in a VoIP conference room between a plurality of users by controlling a voice conversation message transmitted through the VoIP communication unit, wherein the VoIP notification means sends a VoIP transfer notification to the client. This is a program for causing a computer to function as a multi-channel conversation server including a VoIP server that provides a conference room.
[0023]
The multi-channel conversation client program of the present invention shares a virtual character string conversation space (hereinafter, referred to as a channel) set up on a network with a chat server connected to the network, and communicates with other users. A virtual voice conversation space (hereinafter referred to as a VoIP conference room) connected to a network between a chat client that transmits and receives a character string conversation message and performs simultaneous communication and a VoIP server connected to the network. VoIP client that performs simultaneous communication by transmitting and receiving voice conversation messages to and from other users, and receives a VoIP migration notification that prompts a VoIP connection from the chat server regarding the channel to which the chat client is connected. In this case, V is added to the notified VoIP conference room. Is a program for causing a computer to function as a multi-channel conversation client and a VoIP migration means for connecting the IP client.
[0024]
The program of the multi-channel conversation method according to the present invention includes a plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on a network between a plurality of clients and a chat server connected via the network. ) Sharing and controlling simultaneous textual communication on the channel between the plurality of users by controlling the textual conversation messages sent through the client; and monitoring the textual conversation messages in the channel. Outputting the predetermined condition arrival information when the predetermined condition is reached, acquiring the IP address of the client belonging to the corresponding channel based on the predetermined condition arrival information, and sending a VoIP shift notification for prompting a VoIP connection to each IP. Sending to the address, and the client sending the VoIP migration notification A virtual voice conversation space (hereinafter referred to as a VoIP conference room) set up on a network is shared with an oIP server, and a plurality of users are controlled by controlling voice conversation messages transmitted via a client. And causing the computer to execute a multi-channel conversation method including a step of performing simultaneous voice communication in a VoIP conference room between the two.
[0025]
BEST MODE FOR CARRYING OUT THE INVENTION
[First Embodiment]
FIG. 1 shows an outline of a system in which the first embodiment of the present invention is adopted.
Here, a server terminal 100 and a plurality of client terminals 200, 200 are connected on a network, and a chat communication or a network that shares any one of channels that are a plurality of character string conversation spaces set up on the network. A VoIP telephone communication that shares one of a plurality of VoIP conference rooms, which are a plurality of voice conversation spaces set up above, is realized.
[0026]
The server terminal 100 includes a chat server 110 that controls a character string conversation message in each channel, an MCU (Multipoint Control Unit) 120 that controls a voice conversation message in each VoIP conference room, and calls from each client terminal 200. And a CM (Call Manager) 130 for performing control.
As shown in FIG. 1, when the chat server 110 controlling the character string conversation message determines that the appearance rate of the character string conversation message in the channel exceeds a predetermined value, the chat message frequently occurs. A notification to the effect is transmitted to the CM 130 (FIG. 1-1).
[0027]
In response to the notification from the chat server 110 that the chat message is frequent, the CM 130 creates a VoIP conference room corresponding to the channel in the MCU 120 (FIG. 1-2).
The CM 130 creates a VoIP conference room and sends out a VoIP connection request to the client terminal 200 belonging to the corresponding channel (FIG. 1-3).
When the user using the client terminal 200 responds to the client terminal 200 that has received the VoIP connection request from the server terminal 100 (FIG. 1-4), a voice conversation message transmitted through the client terminal 200 Is transmitted to the MCU 120 through the CM 130 and is controlled as a voice conversation message in the VoIP conference room.
[0028]
FIG. 19 shows a control block diagram for configuring the first embodiment.
In this multi-channel conversation system, a server terminal 100 and a client terminal 200 are connected via a network 300.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
Chat server 110 monitors the character string conversation message in the channel, and when the appearance rate within a predetermined time exceeds a predetermined value, and there are a plurality of client terminals 200 that are the transmission sources of the conversation message. In this case, a conversation frequency monitoring unit 111 that transmits predetermined condition arrival information to the CM 130 is provided.
[0029]
The CM 130 receives the IP address registration from the client terminal 200 belonging to the channel managed by the chat server 110 and stores the IP address table 132 in the client IP address registration unit 131 and the predetermined condition arrival information transmitted from the chat server 110. The VoIP connection request is transmitted to the IP address acquisition unit 133 that acquires the IP address of the corresponding client terminal 200 from the client IP address registration unit 131 based on the IP address acquired by the IP address acquisition unit 133. And a VoIP connection request unit 134.
[0030]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The operation in the first embodiment will be described with reference to FIG.
When starting chat communication from the client terminal 200, an IP address is registered in the client IP address registration unit 131 of the server terminal 100 in advance. At this time, the client IP address registration unit 131 stores the user name (nickname) used by the user in the chat in the IP address table 132 in association with the IP address of the client terminal 200. Table 1 shows an example of the IP address table 132.
[0031]
[Table 1]
Figure 2004185088
[0032]
In the server terminal 100, the chat server 110 manages a character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls chat communication in a channel (step S111).
The conversation frequency monitoring unit 111 monitors the character string conversation message in each channel, and determines whether the character string conversation message in the channel has exceeded a predetermined value within a predetermined time (S112). Here, if it is determined that the character string conversation message in the channel exceeds the predetermined value within the predetermined time and that the transmission source of the character string conversation message is a plurality of client terminals 200, the process proceeds to step S113. I do.
[0033]
In step S113, the user name belonging to the corresponding channel is detected, and this is notified to the IP address acquisition unit 133 of the CM 130.
The IP address obtaining unit 133 searches the IP address table 132 from the user name transmitted from the chat server 110, and obtains the IP address of the corresponding client terminal 200 (step S114).
Thereafter, the IP address acquisition unit 133 sets the acquired IP address of the client terminal 200 and the corresponding user name as a set, and notifies the VoIP connection request unit 134 of the set (step S115).
[0034]
Upon receiving the notification from the IP address acquisition unit 133, the VoIP connection request unit 134 creates a corresponding VoIP conference room in the MCU 120 (step S116). Here, the VoIP conference room created in the MCU 120 is managed by the MCU 120 as a VoIP conference room management table in association with the channel from which it is derived. Table 2 shows an example of the VoIP conference room management table. The VoIP conference room management table can be managed in the CM 130, and can be managed by another storage medium or the like.
[0035]
[Table 2]
Figure 2004185088
[0036]
The VoIP connection request unit 134 further transmits a VoIP connection request notification to the corresponding client terminal 200 (Step S117).
In the client terminal 200, upon receiving the VoIP connection request notification from the server terminal 100, the application displays a message to that effect and allows the user to select whether or not to respond to the VoIP connection (step S121). If the user has instructed to respond to the VoIP connection request, the process proceeds to step S122.
In step S122, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
[0037]
The client terminal 200 that has received the VoIP connection request notification can be configured, for example, to start a VoIP connection request dialog 500 as shown in FIG. In the VoIP connection request dialog 500, a notification type bar 501 indicating that the type of notification is a VoIP conference connection request, and the content of “VoIP conference room“ VoIP ”is derived from channel“ #VoIP ”” are displayed. A display unit 502, an accept button 503 for instructing to agree to participate, a reject button 504 for instructing not to agree to participate, and the like are provided. When the user agrees to participate in the VoIP conference room, by clicking the accept button 503, the VoIP application 220 of the client terminal 200 can connect to the corresponding VoIP conference room, and the voice by the VoIP telephone can be used. Can transition to a conversation.
[0038]
In the first embodiment, when a character string conversation message by chat frequently occurs, it is possible to automatically shift to VoIP, and it is not necessary to negotiate to shift to a telephone conference. The trouble of dialing a number can be omitted.
[Second embodiment]
FIG. 2 shows an outline of a system adopting the second embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels, which are a plurality of character string conversation spaces set up on the network, is used. A chat communication to be shared or a VoIP telephone communication to share one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network, is realized.
[0039]
As shown in FIG. 2, when the chat server 110 controlling the character string conversation message determines that the appearance rate of the character string conversation message in the channel exceeds a predetermined value, the chat message frequently occurs. A notification to the effect is transmitted to the CM 130 ((1) in FIG. 2).
In response to the notification from the chat server 110 that a chat message is frequently generated, the CM 130 creates a VoIP conference room corresponding to the channel in the MCU 120 (FIG. 2 (2)).
[0040]
The CM 130 creates a VoIP conference room and notifies the client terminal 200 belonging to the corresponding channel of the created VoIP conference room (FIG. 2 (3)).
When the client terminal 200 receives the notification of the VoIP conference room from the server terminal 100 and connects to the VoIP conference room (FIG. 2-4), the client terminal 200 transmits the VoIP conference room through the client terminal 200. The incoming voice conversation message is sent to the MCU 120 through the CM 130 and is controlled as a voice conversation message in the VoIP conference room.
[0041]
FIG. 20 shows a control block diagram for configuring the second embodiment.
Also in the second embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
Chat server 110 monitors the character string conversation message in the channel, and when the appearance rate within a predetermined time exceeds a predetermined value, and there are a plurality of client terminals 200 that are the transmission sources of the conversation message. In this case, a conversation frequency monitoring unit 111 that transmits predetermined condition arrival information to the CM 130 is provided.
[0042]
The CM 130 creates a VoIP conference room in the MCU 120 according to the predetermined condition arrival information transmitted from the conversation frequency monitoring unit 111, and creates the VoIP conference room for the client terminal 200 belonging to the corresponding channel. Is provided.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0043]
The chat application 210 connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135, in addition to the chat function of transmitting and receiving a character string conversation message in a channel managed by the chat server 110. A VoIP connection unit 211 is provided.
The operation in the second embodiment will be described with reference to FIG.
In the server terminal 100, the chat server 110 manages a character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls chat communication in a channel (step S131).
[0044]
The conversation frequency monitoring unit 111 monitors the character string conversation message in each channel, and determines whether the character string conversation message in the channel has exceeded a predetermined value within a predetermined time (S132). Here, when it is determined that the character string conversation message in the channel exceeds the predetermined value within the predetermined time and that the transmission source of the character string conversation message is a plurality of client terminals 200, the process proceeds to step S133. I do.
In step S133, the user name belonging to the corresponding channel is detected, and this is notified to the VoIP conference room notification unit 135 of the CM 130.
[0045]
Upon receiving the notification from the conversation frequency monitoring unit 111, the VoIP conference room notification unit 135 creates a corresponding VoIP conference room in the MCU 120 (step S134).
The VoIP conference room notification unit 135 further notifies the corresponding client terminal 200 of the VoIP conference room information (step S135). Here, the IP address of the client terminal 200 is not required, and VoIP conference room information including the conference room name and the like is transmitted to the chat application 210 of the client terminal 200 as control information in the channel via the chat server 110.
[0046]
Upon receiving the notification of the VoIP conference room from the server terminal 100, the client terminal 200 displays the notification via the chat application 210 and allows the user to select whether or not to connect to the VoIP conference room. (Step S141). If the user has given an instruction to make a VoIP connection, the process moves to step S142.
In step S142, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
The client terminal 200 that has received the notification of the VoIP conference room can be configured to start up a VoIP conference room notification dialog 510 as shown in FIG. 56, for example. In the VoIP conference room notification dialog 510, a notification type bar 511 indicating that the type of notification is a VoIP conference room notification, and the contents of "The VoIP conference room" VoIP "is derived from the channel"#VoIP"" are displayed. A content display unit 512, an accept button 513 for instructing to agree to participate, a reject button 514 for instructing not to agree to participate, and the like are provided. When the user agrees to participate in the VoIP conference room, by clicking the accept button 513, the VoIP application 220 of the client terminal 200 can connect to the corresponding VoIP conference room, and the voice by the VoIP telephone can be used. Can transition to a conversation.
[0047]
In the second embodiment, similarly to the first embodiment, when a character string conversation message by chat frequently occurs, it is possible to automatically shift to VoIP, and shift to a telephone conference. Negotiation is not required, and the trouble of dialing a telephone number can be omitted.
[Third embodiment]
FIG. 3 shows an outline of a system to which the third embodiment of the present invention is applied.
In the third embodiment, similarly to the first embodiment, a server terminal 100 and a plurality of client terminals 200, 200 are connected on a network, and a channel is a plurality of character string conversation spaces set up on the network. Is realized, or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network, is realized.
[0048]
As shown in FIG. 3, the chat server 110 that controls the character string conversation message monitors whether or not a specific character string appears in the character string conversation message in the channel. Is transmitted to the CM 130. For example, if the chat server 110 detects a user name belonging to the channel in the character string conversation message, it determines that there is a call to the user, and sends a notification of the call message detection to the CM 130 (FIG. 3A). ).
[0049]
Upon receiving the notification of the call message from the chat server 110, the CM 130 creates a corresponding VoIP conference room in the MCU 120 (FIG. 3B).
The CM 130 creates a VoIP conference room, and sends a VoIP connection request to the client terminal that has made the call and the client terminal that has made the call (FIG. 3 (3)).
When the user using the client terminal 200 responds to the client terminal 200 that has received the VoIP connection request from the server terminal 100 (FIG. 3-4), a voice conversation message transmitted through the client terminal 200 Is transmitted to the MCU 120 through the CM 130 and is controlled as a voice conversation message in the VoIP conference room.
[0050]
FIG. 21 shows a control block diagram for configuring the third embodiment.
In the multi-channel conversation system according to the third embodiment, a server terminal 100 and a client terminal 200 are connected via a network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 includes a specific character string monitoring unit 112 that monitors a character string conversation message in a channel and notifies predetermined condition arrival information when a predetermined character string appears in the character string conversation message.
[0051]
The CM 130 receives the IP address registration from the client terminal 200 belonging to the channel managed by the chat server 110 and stores the IP address table 132 in the client IP address registration unit 131 and the predetermined condition arrival information transmitted from the chat server 110. The VoIP connection request is transmitted to the IP address acquisition unit 133 that acquires the IP address of the corresponding client terminal 200 from the client IP address registration unit 131 based on the IP address acquired by the IP address acquisition unit 133. And a VoIP connection request unit 134. In this case, based on the challenge message detection notification from the specific character string monitoring unit 112, the IP address acquisition unit 133 includes a client terminal 200 corresponding to the called user name and a client terminal 200 corresponding to the called user name. The IP address can be acquired for both of them and sent to the VoIP connection request unit 134.
[0052]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The operation of the third embodiment will be described with reference to FIG.
As in the first embodiment, when starting chat communication from the client terminal 200, an IP address is registered in the client IP address registration unit 131 of the server terminal 100 in advance.
[0053]
In the server terminal 100, the chat server 110 manages a character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls chat communication in a channel (step S151).
The specific character string monitoring unit 112 monitors a character string conversation message in each channel, and determines whether or not a predetermined character string is included in the character string conversation message in the channel (S152). In particular, when a user name belonging to the channel is detected, it is determined that there is a call message for the user name, and the process shifts to step S153.
[0054]
In step S153, the originating user name of the detected calling message and the called user name are detected and notified to the IP address acquisition unit 133.
The IP address obtaining unit 133 searches the IP address table 132 from the user name transmitted from the chat server 110, and obtains the IP address of the corresponding client terminal 200 (step S154).
Thereafter, the IP address acquisition unit 133 sets the acquired IP address of the client terminal 200 and the corresponding user name as a set, and notifies the VoIP connection request unit 134 of the set (step S155).
[0055]
Upon receiving the notification from the IP address acquisition unit 133, the VoIP connection request unit 134 creates a corresponding VoIP conference room in the MCU 120 (step S156).
The VoIP connection request unit 134 further transmits a VoIP connection request notification to the corresponding client terminal 200 (Step S157).
In the client terminal 200, when receiving the VoIP connection request notification from the server terminal 100, the application displays a message to that effect and allows the user to select whether or not to respond to the VoIP connection (step S161). If the user has instructed to respond to the VoIP connection request, the process moves to step S162.
[0056]
In step S162, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
The client terminal 200 that has received the VoIP connection request notification can be configured to, for example, launch a VoIP connection request dialog 520 as shown in FIG. In the VoIP connection request dialog 520, a notification type bar 521 indicating that the type of notification is a VoIP conference connection request, and a content indicating that the user who is the source of the call message has created a VoIP conference room (in the figure, Content display section 522 displaying "Mr. Tanaka (caller) has created VoIP conference room" VoIP "", an accept button 523 for instructing to agree to participate, and agreeing to participate A reject button 524 for instructing not to do so is provided. When the user agrees to participate in the VoIP conference room, by clicking the accept button 523, the VoIP application 220 of the client terminal 200 can connect to the corresponding VoIP conference room, and the voice by the VoIP telephone can be used. Can transition to a conversation.
[0057]
In the third embodiment, by notifying the calling message, it is possible to automatically shift to VoIP, and it is not necessary to negotiate to shift to a telephone conference, and dial the telephone number. The trouble can be omitted.
[Fourth embodiment]
FIG. 4 shows an outline of a system employing the fourth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels, which are a plurality of character string conversation spaces set up on the network, is used. A chat communication to be shared or a VoIP telephone communication to share one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network, is realized.
[0058]
As shown in FIG. 4, the chat server 110 controlling the character string conversation message monitors whether or not a specific character string appears in the character string conversation message in the channel. Is transmitted to the CM 130. For example, when the chat server 110 detects a user name belonging to the channel in the character string conversation message, it determines that there is a call to the user, and sends a notification of the call message detection to the CM 130 (FIG. 4A). ).
[0059]
Upon receiving the notification of the call message from the chat server 110, the CM 130 creates a corresponding VoIP conference room in the MCU 120 (FIG. 4B).
The CM 130 creates a VoIP conference room, and notifies the client terminal that has made the call and the called client terminal of the VoIP conference room that has been made (FIG. 4 (3)).
When the client terminal 200 receives the notification of the VoIP conference room from the server terminal 100 and connects to the VoIP conference room (FIG. 4 (4)), the client terminal 200 transmits the VoIP conference room through the client terminal 200. The incoming voice conversation message is sent to the MCU 120 through the CM 130 and is controlled as a voice conversation message in the VoIP conference room.
[0060]
FIG. 22 shows a control block diagram for configuring the fourth embodiment.
Also in the fourth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 includes a specific character string monitoring unit 112 that monitors a character string conversation message in a channel and transmits predetermined condition reaching information to the CM 130 when a predetermined character string is detected.
[0061]
The CM 130 creates a VoIP conference room in the MCU 120 according to the predetermined condition arrival information transmitted from the specific character string monitoring unit 112, and notifies the corresponding client terminal 200 of the VoIP conference room information. The conference room notification unit 135 is provided. In this case, the VoIP conference room notification unit 135 corresponds to the client terminal 200 corresponding to the called user name and the name of the called user based on the notification message detection notification from the specific character string monitoring unit 112. For both client terminals, VoIP conference room information such as the conference room name can be transmitted.
[0062]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The chat application 210 connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135, in addition to the chat function of transmitting and receiving a character string conversation message in a channel managed by the chat server 110. A VoIP connection unit 211 is provided.
[0063]
The operation in the fourth embodiment will be described with reference to FIG.
In the server terminal 100, the chat server 110 manages the character string conversation message transmitted from the chat application 210 of each client terminal 200, and controls the chat communication in the channel (step S171).
The specific character string monitoring unit 112 monitors the character string conversation message in each channel, and determines whether or not a predetermined character string is included in the character string conversation message in the channel (S172). In particular, when a user name belonging to the channel is detected, it is determined that there is a call message for the user name, and the process shifts to step S173.
[0064]
In step S173, the calling user name of the detected calling message and the called user name are detected and notified to the VoIP conference room notification unit 135.
Upon receiving the notification from the specific character string monitoring unit 112, the VoIP conference room notification unit 135 creates a corresponding VoIP conference room in the MCU 120 (step S174).
The VoIP conference room notification unit 135 further notifies the corresponding client terminal 200 of the VoIP conference room information (step S175). Here, the IP address of the client terminal 200 is not required, and VoIP conference room information including the conference room name and the like is transmitted to the chat application 210 of the client terminal 200 as control information in the channel via the chat server 110.
[0065]
Upon receiving the notification of the VoIP conference room from the server terminal 100, the client terminal 200 displays the notification via the chat application 210 and allows the user to select whether or not to connect to the VoIP conference room. (Step S181). If the user has given an instruction to make a VoIP connection, the process moves to step S182.
In step S182, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation.
The client terminal 200 that has received the notification of the VoIP conference room can be configured to start up a VoIP conference room notification dialog 530 as shown in FIG. 58, for example. In the VoIP conference room notification dialog 530, a notification type bar 531 indicating that the type of notification is a VoIP conference room notification, and a content indicating that the user who is the transmission source of the calling message has created a VoIP conference room (in FIG. Content display section 532 that displays “Mr. Tanaka (caller) has created a VoIP conference room“ VoIP ””, an accept button 533 for instructing to agree to participate, A reject button 534 for instructing disagreement is provided. When the user agrees to participate in the VoIP conference room, by clicking the accept button 513, the VoIP application 220 of the client terminal 200 can connect to the corresponding VoIP conference room, and the voice by the VoIP telephone can be used. Can transition to a conversation.
[0066]
In the fourth embodiment, it is possible to automatically shift to VoIP by transmitting a specific character string in a character string conversation message in a channel, in particular, by transmitting a user name belonging to the channel. This eliminates the need to negotiate a transition to a telephone conference, and saves the trouble of dialing a telephone number.
[Fifth Embodiment]
FIG. 5 shows an outline of a system to which the fifth embodiment of the present invention is applied.
[0067]
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels, which are a plurality of character string conversation spaces set up on the network, is used. A chat communication to be shared or a VoIP telephone communication to share one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network, is realized.
As described in the above embodiment, the server terminal 100 and the client terminal 200 monitor the character string conversation message in the channel and set the VoIP conference room in the MCU 120 according to the frequency of conversation or the appearance of the specific character string. It has a function of creating, notifying the client terminal 200 of a VoIP connection request or VoIP conference room information, and automatically connecting to the VoIP conference room from the client terminal 200 (FIG. 5A). ).
[0068]
Further, the chat server 110 monitors whether or not a specific character string appears in the character string conversation message in the channel. When the specific character string appears, a specific character string appearance notification is sent to the CM 130. (Fig. 5 (2)).
The CM 130 reads out the specific character string notified from the chat server 110 by voice synthesis, and sends it out to each client terminal 200 by VoIP ((3) in FIG. 5).
FIG. 23 shows a control block diagram for constituting the fifth embodiment.
Also in the fifth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
[0069]
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 includes a specific character string monitoring unit 112 that monitors a character string conversation message in a channel and transmits predetermined condition reaching information to the CM 130 when a predetermined character string is detected.
The CM 130 creates a VoIP conference room in the MCU 120 according to the predetermined condition arrival information transmitted from the specific character string monitoring unit 112, and notifies the corresponding client terminal 200 of the VoIP conference room information. The conference room notification unit 135 is provided. In this case, the VoIP conference room notification unit 135 can be configured to notify the client terminal 200 of the VoIP conference room information created based on the predetermined condition arrival information from the chat server 110. VoIP conference room information such as a conference room name for both the client terminal 200 corresponding to the called user name and the client terminal corresponding to the called user name based on the notification of the calling message detection from the unit 112. Can be sent. Further, the VoIP conference room notification unit 135 receives the specific character string detection notification transmitted from the specific character string monitoring unit 112, and sends out a call message notification.
[0070]
The CM 130 includes a VoIP calling unit 136 that makes a call through VoIP based on a call message notification notified from the VoIP conference room notification unit 135. The VoIP calling unit 136 includes a voice synthesizing unit 137, converts a specific character string detected by the specific character string monitoring unit 112 of the chat server 110 into a voice, and outputs the voice to VoIP.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0071]
In addition to the chat function of transmitting and receiving a character string conversation message in a channel managed by the chat server 110, the chat application 210 performs automatic connection to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135. It has a VoIP automatic response unit 212 for performing.
Further, the VoIP application 220 receives the audio output output by the VoIP calling unit 136 of the server terminal 100 and notifies the user of the audio output.
The operation of the fifth embodiment will be described with reference to FIG.
[0072]
In the server terminal 100, the chat server 110 manages a character string conversation message transmitted from the chat application 210 of each client terminal 200, controls chat communication in a channel, and frequently generates a character string conversation message in a channel. When the degree exceeds a predetermined value or when a predetermined character string is detected, a VoIP connection request or a VoIP conference room information notification is transmitted to the client terminal 200 (step S191).
In the client terminal 200 that has received the VoIP connection request or the VoIP conference room information notification from the server terminal 100, the VoIP automatic response unit 212 executes a VoIP connection / response process (step S201).
[0073]
When the chat server 110 of the server terminal 100 detects a specific character string in the character string conversation message in the channel, the voice synthesis unit 137 of the VoIP calling unit 136 synthesizes the voice of the message (step S192). Thereafter, the VoIP calling unit 136 notifies the client terminal 200 of the calling voice message through VoIP (Step S193).
In the fifth embodiment as described above, when a call is made by chat, not only a display by a character string but also a call to each user by VoIP voice can be made. Makes it easy for a user to recognize. For example, when a user name belonging to a channel is called by a character string conversation message, this is converted to voice and called by VoIP, so that the called user can easily recognize this.
[0074]
[Sixth embodiment]
FIG. 6 shows an outline of a system employing the sixth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0075]
While the client terminal 200 is performing VoIP telephone communication through the VoIP conference room created in the MCU 120, the CM 130 monitors the amount of voice conversation messages in the VoIP conference room. Specifically, the CM 130 monitors the amount of voice packets in each VoIP conference room, and detects whether or not the amount of voice packets has become equal to or less than a predetermined value ((1) in FIG. 6).
When it is determined that the amount of voice packets in the VoIP conference room has become equal to or less than the predetermined amount, the corresponding VoIP conference room in the MCU 120 is closed (FIG. 6B).
[0076]
At the same time, the CM 130 transmits a notification (disconnection notification) to the effect that the VoIP conference room has been closed to the client terminals 200 belonging to the closed VoIP conference room (FIG. 6-3).
FIG. 24 shows a control block diagram for configuring the sixth embodiment.
Also in the sixth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0077]
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0078]
The CM 130 monitors the traffic in the VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or in the VoIP conference room created in the MCU 120 based on predetermined condition arrival information from the chat server 110. Then, the VoIP conference room communication volume monitoring unit 138 that closes the VoIP conference room when the amount becomes equal to or less than the predetermined amount and notifies the corresponding client terminal 200 of the VoIP disconnection is provided.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
[0079]
In addition to the chat function of transmitting and receiving a character string conversation message in a channel managed by the chat server 110, the chat application 210 performs automatic connection to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135. The VoIP automatic response unit 212 may be provided.
The operation of the sixth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the terminal 200 is controlled (step S211).
[0080]
The traffic of the voice conversation message in the VoIP conference room is monitored by the VoIP conference room traffic monitor 138. When the VoIP conference room communication volume monitoring unit 138 determines that the voice packet volume in the VoIP conference room is equal to or less than a certain value (step S212), the corresponding VoIP conference room in the MCU 120 is closed (step S213). At the same time, the VoIP conference room communication volume monitoring unit 138 transmits a VoIP disconnection notification to the client terminal 100 (Step S214).
On the client terminal 200 side, upon receiving the VoIP disconnection notification from the server terminal 100, the VoIP application 220 performs the VoIP disconnection display such as displaying that the corresponding VoIP conference room has been closed (step S221).
[0081]
If the closed VoIP conference room is derived from a channel managed by the chat server 110, the user of the client terminal 200 returns to chat communication using a character string conversation message through the original channel. Alternatively, if not, the chat server 110 may be configured to create a new channel.
In the sixth embodiment, when the amount of voice packets in the VoIP conference room decreases, by closing the VoIP conference room, it is possible to promptly shift to chat communication with less load on the server side. It is possible.
[0082]
[Seventh embodiment]
FIG. 7 shows an outline of a system adopting the seventh embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0083]
While the client terminal 200 is performing the VoIP telephone communication through the VoIP conference room created in the MCU 120, the client terminal 200 monitors the communication volume of the voice conversation message from the own terminal, and the voice packet from the own terminal. It is detected whether or not the amount has become a predetermined value or less (FIG. 7 (1)).
When the client terminal 200 determines that the voice packet volume from the terminal itself has become equal to or less than the predetermined value, the client terminal 200 notifies the VoIP conference room of disconnection of the VoIP connection (FIG. 7B).
[0084]
The server terminal 100 provides the VoIP telephone communication through the VoIP conference room in the MCU 120, and closes the VoIP conference room when all the client terminals 200 belonging to the VoIP conference room disconnect the VoIP connection (FIG. 7). (3)).
FIG. 25 shows a control block diagram for configuring the seventh embodiment.
Also in the seventh embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0085]
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0086]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
The VoIP application 220 executes VoIP telephone communication with another client terminal 200 through a VoIP conference room set in the server terminal 100. In addition to this function, a voice conversation transmitted from the terminal itself is provided. A VoIP traffic monitoring unit 221 for monitoring the traffic of the message is provided.
[0087]
The VoIP traffic monitoring unit 221 monitors the amount of voice packets transmitted from the terminal itself, and transmits a notification to the server 100 to disconnect the VoIP connection when it is determined that the number of voice packets is equal to or less than the predetermined value, and transmits the VoIP connection. To end.
The operation of the seventh embodiment will be described with reference to FIG.
The client terminal 200 connects to a VoIP conference room created in the server terminal 100 in response to a request from the client terminal 200 or a VoIP conference room created by the server terminal 100 derived from a chat channel. VoIP voice packets are transmitted and received (step S231).
[0088]
Here, the VoIP traffic monitor 221 monitors the amount of voice packets transmitted from the terminal itself and determines whether or not the amount is less than a predetermined value (step S232). When the VoIP traffic monitoring unit 221 determines that the voice packet volume from the own terminal is equal to or less than the predetermined value, the VoIP communication monitoring unit 221 notifies the server terminal 100 of the VoIP disconnection (step S233), and sends the VoIP conference room to which the server terminal 100 belongs. Disconnect the VoIP connection.
Thereafter, the VoIP application 220 displays a message to the effect that the VoIP connection has been terminated to the user (step S234).
[0089]
The server terminal 100 controls a voice conversation message from the client terminal 200 belonging to the VoIP conference room created in the MCU 120 to provide VoIP telephone communication by each client terminal 200.
Upon receiving the VoIP disconnection notification from the client terminal 200, the CM 130 deletes the client terminal 200 from the corresponding VoIP conference room in the VoIP conference room management table and the client terminal 200 connected to the VoIP conference room. It is determined whether or not it exists (step S241).
[0090]
When finding the VoIP conference room in which the connected client terminal 200 has disappeared, the CM 130 closes the VoIP conference room (Step S242).
When the closed VoIP conference room is derived from a channel managed by the chat server 110, the client terminal 200 can resume chat communication through the channel of the origin by the chat application 210. Further, the CM 130 may be configured to create a new channel in the chat server 110 from the closed VoIP conference room and transmit the channel information or the chat connection request to the corresponding client terminal 200. .
[0091]
According to the seventh embodiment, when the amount of voice packets from the terminal is small, the VoIP connection can be terminated from the client terminal 200 side and the conversation can be promptly shifted to a chat conversation.
[Eighth Embodiment]
FIG. 8 shows an outline of a system to which the eighth embodiment of the present invention is applied.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0092]
While the client terminal 200 is performing the VoIP telephone communication through the VoIP conference room created in the MCU 120, the CM 130 monitors the elapsed time since the VoIP conference room was created, and the elapsed time exceeds the predetermined time. It is detected whether or not it has exceeded (FIG. 8 (1)).
When it is determined that a predetermined time or more has elapsed since the setting of the VoIP conference room, the corresponding VoIP conference room in the MCU 120 is closed (FIG. 8 (2)).
At the same time, the CM 130 transmits a notification (disconnection notification) to the effect that the VoIP conference room has been closed to the client terminals 200 belonging to the closed VoIP conference room (FIG. 8 (3)).
[0093]
FIG. 26 shows a control block diagram for configuring the eighth embodiment.
Also in the eighth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0094]
The CM 130 generates a VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or a VoIP conference room created in the MCU 120 based on predetermined condition arrival information from the chat server 110. The elapsed time from the creation of the conference room is monitored, and when it is determined that the predetermined time has elapsed, the VoIP conference room is closed and a VoIP disconnection notification is sent to the corresponding client terminal 200 to open the VoIP conference room. A time monitoring unit 139 is provided.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
[0095]
The operation in the eighth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the terminal 200 is controlled (step S251).
The elapsed time since the creation of the VoIP conference room is monitored by the VoIP conference room opening time monitoring unit 139. When determining that the elapsed time since the establishment of the VoIP conference room has exceeded a predetermined time (step S252), the VoIP conference room opening time monitoring unit 139 closes the corresponding VoIP conference room in the MCU 120 (step S252). S253). At the same time, the VoIP conference room opening time monitoring unit 139 transmits a VoIP disconnection notification to the client terminal 100 (step S254).
[0096]
On the client terminal 200 side, upon receiving the VoIP disconnection notification from the server terminal 100, the VoIP application 220 performs the VoIP disconnection display by displaying, for example, that the corresponding VoIP conference room has been closed (step S261).
If the closed VoIP conference room is derived from a channel managed by the chat server 110, the user of the client terminal 200 returns to chat communication using a character string conversation message through the original channel. Alternatively, if not, the chat server 110 may be configured to create a new channel.
[0097]
In such an eighth embodiment, the VoIP conference room is closed after a certain period of time, so that it is possible to shift to chat communication, and the burden on the server terminal 100 side can be reduced.
[Ninth embodiment]
FIG. 9 shows an outline of a system adopting the ninth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0098]
While the client terminal 200 performs the VoIP telephone communication through the VoIP conference room created in the MCU 120, the client terminal 200 monitors the elapsed time since the terminal joined the VoIP conference room. It is detected whether the elapsed time has exceeded a predetermined time (FIG. 9 (1)).
When the client terminal 200 determines that the elapsed time since its own participation in the VoIP conference room has exceeded a predetermined time, the client terminal 200 notifies the disconnection of the VoIP connection to the VoIP conference room (FIG. 9B). ▼).
[0099]
The server terminal 100 provides the VoIP telephone communication through the VoIP conference room in the MCU 120, and closes the VoIP conference room when all the client terminals 200 belonging to the VoIP conference room disconnect the VoIP connection (FIG. 9). (3)).
FIG. 27 shows a control block diagram for constituting the ninth embodiment.
Also in the ninth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0100]
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0101]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
The VoIP application 220 executes VoIP telephone communication with another client terminal 200 through a VoIP conference room set in the server terminal 100. In addition to this function, the own terminal is connected to the VoIP conference room. A VoIP conference room participation time monitoring unit 222 that monitors the elapsed time after the participation is provided.
[0102]
The VoIP conference room participation time monitoring unit 222 monitors the elapsed time of the terminal itself participating in the VoIP conference room, and if it is determined that the predetermined time has been exceeded, notifies the server 100 that the VoIP connection is to be disconnected. To terminate the VoIP connection.
The operation of the ninth embodiment will be described with reference to FIG.
The client terminal 200 connects to a VoIP conference room created in the server terminal 100 in response to a request from the client terminal 200 or a VoIP conference room created by the server terminal 100 derived from a chat channel. VoIP voice packets are transmitted and received (step S271).
[0103]
Here, the VoIP conference room participation time monitoring unit 222 monitors the elapsed time since the terminal has joined the VoIP conference room, and determines whether or not a predetermined time has passed (step S272). The VoIP conference room participation time monitoring unit 222 notifies the server terminal 100 of the VoIP disconnection when determining that the elapsed time since the terminal has joined the VoIP conference room has exceeded a predetermined time (step S273). , Disconnects the VoIP connection to the VoIP conference room to which it belongs.
Thereafter, the VoIP application 220 displays a message to the effect that the VoIP connection has been terminated to the user (step S274).
[0104]
The server terminal 100 controls a voice conversation message from the client terminal 200 belonging to the VoIP conference room created in the MCU 120 to provide VoIP telephone communication by each client terminal 200.
Upon receiving the VoIP disconnection notification from the client terminal 200, the CM 130 deletes the client terminal 200 from the corresponding VoIP conference room in the VoIP conference room management table and the client terminal 200 connected to the VoIP conference room. It is determined whether or not it exists (step S281).
[0105]
When the CM 130 finds the VoIP conference room in which the connected client terminal 200 has disappeared, the CM 130 closes the VoIP conference room (step S282).
When the closed VoIP conference room is derived from a channel managed by the chat server 110, the client terminal 200 can resume chat communication through the channel of the origin by the chat application 210. Further, the CM 130 may be configured to create a new channel in the chat server 110 from the closed VoIP conference room and transmit the channel information or the chat connection request to the corresponding client terminal 200. .
[0106]
According to such a ninth embodiment, it is possible to configure so that the VoIP connection is terminated after a certain period of time after the terminal joins the VoIP conference room, and the terminal immediately shifts to a chat conversation.
[Tenth embodiment]
FIG. 10 shows an outline of a system employing the tenth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0107]
While the client terminal 200 is performing VoIP telephone communication through the VoIP conference room created in the MCU 120, the CM 130 performs voice recognition of a voice conversation message in the VoIP conference room to determine whether a predetermined character string has appeared. I do. For example, when a voice conversation message is voice-recognized and a character string "END" is included in the message, it is determined that a predetermined character string has appeared (FIG. 10 (1)).
When a predetermined character string is detected as a result of voice recognition of the voice conversation message in the VoIP conference room, the CM 130 closes the corresponding VoIP conference room in the MCU 120 (FIG. 10B).
[0108]
At the same time, the CM 130 transmits a notification (disconnection notification) indicating that the VoIP conference room has been closed to the client terminal 200 belonging to the closed VoIP conference room (FIG. 10 (3)).
FIG. 28 shows a control block diagram for configuring the tenth embodiment.
Also in the tenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0109]
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0110]
The CM 130 generates a VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or a VoIP conference room created in the MCU 120 based on predetermined condition arrival information from the chat server 110. Voice recognition means 140 for voice-recognizing a voice conversation message in a conference room and converting it into a character string, and VoIP termination for determining whether or not a predetermined character string exists in the character string converted by the voice recognition means 140 And a keyword extracting unit 141.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
[0111]
The operation in the tenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the terminal 200 is controlled (step S291).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S292), and transmitted to the VoIP end keyword extraction unit 141.
[0112]
The VoIP end keyword extraction unit 141 determines whether or not a predetermined character string (end keyword) is included in the converted character string (step S293). The corresponding VoIP conference room is closed (step S294). At the same time, the VoIP end keyword extracting unit 141 transmits a VoIP disconnection notification to the client terminal 100 (Step S295).
On the client terminal 200 side, upon receiving the VoIP disconnection notification from the server terminal 100, the VoIP application 220 performs the VoIP disconnection display by displaying, for example, that the corresponding VoIP conference room has been closed (step S301).
[0113]
If the closed VoIP conference room is derived from a channel managed by the chat server 110, the user of the client terminal 200 returns to chat communication using a character string conversation message through the original channel. Alternatively, if not, the chat server 110 may be configured to create a new channel.
In the tenth embodiment, it is possible to terminate the VoIP telephone communication and promptly shift to the chat communication by making a statement as an end keyword such as “let's end” in the VoIP conference room. To
[0114]
[Eleventh embodiment]
FIG. 11 shows an outline of a system to which the eleventh embodiment of the present invention is applied.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0115]
The CM 130 voice-recognizes the voice conversation message transmitted and received in the VoIP conference room of the MCU 120 ((1) in FIG. 11), and sends a character string as a result of the recognition to the chat server 110 ((2) in FIG. 11).
The chat server 110 transmits the character string information transmitted from the CM 130 to the client terminal 200 as a character string conversation message ((3) in FIG. 11). In the case of voice recognition of a voice conversation message in a VoIP conference room derived from a channel managed by the chat server 110, character string information can be transmitted only to the client terminal 200 belonging to the channel from which the VoIP is derived. It can also be configured to transmit character string information to another specific channel.
[0116]
FIG. 29 shows a control block diagram for constituting the eleventh embodiment.
Also in the eleventh embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0117]
The CM 130 generates a VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or a VoIP conference room created in the MCU 120 based on predetermined condition arrival information from the chat server 110. The voice recognition unit 140 includes a voice recognition unit 140 that performs voice recognition of a voice conversation message in a conference room and converts it into a character string, and a VoIP word extraction unit 142 that transmits the character string converted by the voice recognition unit 140 to the chat server 110.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
[0118]
The operation of the eleventh embodiment will be described with reference to FIG.
On the server terminal 100 side, each client passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the terminal 200 is controlled (step S311).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition unit 140 (step S312), and transmitted to the VoIP word extraction unit 142.
[0119]
The character string converted from the voice conversation message is transmitted from the VoIP word extraction unit 142 to the chat server 110, and transmitted from the chat server 110 to the client terminal 200 as a character string conversation message in a channel (step S313).
The client terminal 200 displays the recognized character string transmitted as a character string conversation message from the server terminal 100 through the chat application 210 (step S321).
[0120]
In the eleventh embodiment, it is possible for a client terminal not participating in the VoIP conference room to know the conversation content in the VoIP conference room.
[Twelfth embodiment]
FIG. 12 shows an outline of a system to which the twelfth embodiment of the present invention is applied.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0121]
The CM 130 performs voice recognition of a voice conversation message transmitted and received in the VoIP conference room of the MCU 120 ((1) in FIG. 12), and sends a character string as a result of the recognition and a keyword extracted from the character string to the chat server 110 (FIG. 12). (Fig. 12 (2)).
The chat server 110 transmits the character string information and the extracted keyword, which are the speech recognition results transmitted from the CM 130, to the client terminal 200 as a character string conversation message ((3) in FIG. 12).
The CM 130 creates a dedicated VoIP word channel in the chat server 110 different from the channel from which the VoIP conference room is derived, causes the character string information, which is the result of voice recognition, to be transmitted via the dedicated VoIP word channel, and outputs the extracted keyword. It can be configured to transmit via the derivation source channel of the VoIP conference room.
[0122]
FIG. 30 shows a control block diagram for constituting the twelfth embodiment.
Also in the twelfth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0123]
The CM 130 generates a VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or a VoIP conference room created in the MCU 120 based on predetermined condition arrival information from the chat server 110. Voice recognition means 140 for voice-recognizing a voice conversation message in a conference room and converting it into a character string; a VoIP word extraction unit 142 for transmitting the character string converted by the voice recognition means 140 to the chat server 110; A VoIP keyword extracting unit 143 for performing a keyword from the character string converted by the voice recognition unit 140, and a VoIP word dedicated channel for creating a dedicated channel in the chat server 110 for transmitting the character string converted by the voice recognition unit 140 as a character string conversation message. With the creation unit 144 To have.
[0124]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
The operation of the twelfth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client passes through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the terminal 200 is controlled (step S331). At this time, the VoIP word dedicated channel creation unit 144 creates a VoIP word dedicated channel in the chat server 110 (flow S).
[0125]
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition unit 140 (step S332), and transmitted to the VoIP word extraction unit 142 and the VoIP keyword extraction unit 143.
The character string converted from the voice conversation message is transmitted from the VoIP word extraction unit 142 to the chat server 110 as a VoIP word, and transmitted from the chat server 110 to the client terminal 200 as a character string conversation message in a VoIP word dedicated channel ( Step S333).
[0126]
The keyword extracted by the VoIP keyword extraction unit 143 is transmitted to the chat server 110 as a VoIP keyword, and transmitted from the chat server 110 to the client terminal 200 as a character string conversation message in the derivation source channel (step S334).
On the client terminal 200 side, the VoIP keyword transmitted from the server terminal 100 as a character string conversation message is displayed as a character string conversation message of the derivation source channel, and the VoIP word transmitted from the server terminal 100 is displayed in the VoIP word dedicated channel. Is displayed as a character string conversation message (step S341).
[0127]
When the VoIP word dedicated channel creation unit 144 creates the VoIP word dedicated channel, the VoIP word dedicated channel can be configured to notify the client terminal 200 belonging to the derivation source channel of the channel name information of the VoIP word dedicated channel. It is also possible to flow the channel name information of the VoIP word dedicated channel in the derivation source channel.
Even if the client terminal 200 does not participate in the VoIP conference room, the keyword extracted from the voice conversation message can be recognized as a character string in the derivation source channel. If desired, it is possible to refer to a character string obtained as a result of voice recognition by connecting to a dedicated VoIP word channel.
[0128]
[Thirteenth embodiment]
FIG. 13 shows an outline of a system adopting the thirteenth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0129]
The CM 130 voice-recognizes a voice conversation message transmitted and received in the VoIP conference room of the MCU 120 (FIG. 13 (1)), translates a character string as a result of the recognition (FIG. 13 (2)), and further translates a character as a translation result. The column and the keyword extracted from the character string are sent to the chat server 110 (FIG. 13-3).
The chat server 110 transmits the character string information, which is the translation result transmitted from the CM 130, and the extracted keyword to the client terminal 200 as a character string conversation message (FIG. 13-4).
[0130]
The CM 130 creates a dedicated VoIP word channel in the chat server 110 different from the channel from which the VoIP conference room is derived, causes the character string information as a translation result to be transmitted through the dedicated VoIP word channel, and outputs the extracted keyword to the VoIP word channel. It can be configured to transmit via the derivation source channel of the conference room.
FIG. 31 shows a control block diagram for configuring the thirteenth embodiment.
Also in the thirteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
[0131]
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0132]
For the VoIP conference room created in the MCU 120 based on the predetermined condition reaching information from the chat server 110, the CM 130 performs voice recognition on the voice conversation message in the VoIP conference room and converts it into a character string. A VoIP word extraction unit 142 that transmits the character string converted by the voice recognition unit 140 to the chat server 110; a VoIP keyword extraction unit 143 that performs a keyword from the character string converted by the voice recognition unit 140; A dedicated channel creation unit 144 for creating a dedicated channel in the chat server 110 for transmitting the VoIP word transmitted from the 142 as a character string conversation message, and a VoIP word and a VoIP keyword extracted by the VoIP word extraction unit 142 And a translation unit 145 for translating the VoIP keyword extracted by the detection section 143.
[0133]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
The operation in the thirteenth embodiment will be described with reference to FIG.
The server terminal 100 controls VoIP voice packets from each client terminal 200 through the VoIP conference room created as a result of monitoring the character string conversation message in the channel by the chat server 110 (step S351). At this time, the VoIP word dedicated channel creation unit 144 creates a VoIP word dedicated channel in the chat server 110 (flow S).
[0134]
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition unit 140 (step S352), and transmitted to the VoIP word extraction unit 142 and the VoIP keyword extraction unit 143.
The VoIP word extraction unit 142 causes the translation unit 145 to translate the character string converted from the voice conversation message, and transmits the character string conversation message in the VoIP word dedicated channel to the chat server 110 (step S353).
Further, the VoIP keyword extraction unit 143 extracts a keyword from the character string converted from the voice conversation message, translates the keyword by the translation unit 145, and transmits it to the chat server 110 as a character string conversation message in the derivation source channel ( Step S354).
[0135]
On the client terminal 200 side, the VoIP keyword transmitted from the server terminal 100 as a character string conversation message is displayed as a character string conversation message of the derivation source channel, and the VoIP word transmitted from the server terminal 100 is displayed in the VoIP word dedicated channel. Is displayed as a character string conversation message (step S361).
When the VoIP word dedicated channel creation unit 144 creates the VoIP word dedicated channel, the VoIP word dedicated channel can be configured to notify the client terminal 200 belonging to the derivation source channel of the channel name information of the VoIP word dedicated channel. It is also possible to flow the channel name information of the VoIP word dedicated channel in the derivation source channel.
[0136]
In the thirteenth embodiment, the VoIP keyword displayed as a character string on the derivation source channel and the VoIP word displayed as a character string on the VoIP word dedicated channel are displayed in a language different from the voice packet in the VoIP conference room. It is possible to easily understand the contents of the conversation.
[14th embodiment]
FIG. 14 shows an outline of a system employing the fourteenth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0137]
The CM 130 recognizes the voice conversation message transmitted and received in the VoIP conference room of the MCU 120 and stores the content of the voice conversation message ((1) in FIG. 14).
Further, the CM 130 sends a character string as a result of the voice recognition to the chat server 110 ((2) in FIG. 14).
The chat server 110 transmits the character string information, which is the result of voice recognition transmitted from the CM 130, to the client terminal 200 as a character string conversation message ((3) in FIG. 14), and temporarily stores the character string information as a chat log. To be stored.
[0138]
When the VoIP conference room in the MCU 120 ends, the CM 130 notifies the chat server 110 of the directory name of the stored voice conversation message (FIG. 14 (4)).
The chat server 110 associates the transmitted storage directory name with the VoIP word in the chat log, and stores the chat log together with link information to the voice conversation message storage directory (FIG. 14-5). .
FIG. 32 shows a control block diagram for constituting the fourteenth embodiment.
[0139]
Also in the fourteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0140]
The CM 130 generates a VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or a VoIP conference room created in the MCU 120 based on predetermined condition arrival information from the chat server 110. Voice recognition means 140 for voice-recognizing a voice conversation message in a conference room and converting it into a character string; a VoIP word extraction unit 142 for transmitting the character string converted by the voice recognition means 140 to the chat server 110; And a VoIP log unit 146 for storing the voice conversation message of the user and transmitting the storage directory name to the chat server 110.
[0141]
The chat server 110 notifies the client terminal 200 of the VoIP word transmitted from the VoIP word extraction unit 142 of the CM 130 as a character string conversation message in the corresponding channel, saves the VoIP word as a chat log, and saves the VoIP word as a chat log. A VoIP link unit 113 for storing link information between the storage directory name notified from the log unit 146 and the corresponding VoIP word is provided.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
[0142]
The operation in the fourteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the H.200 is controlled (step S371).
The voice conversation message in the VoIP conference room is transmitted to the VoIP log unit 146 and converted into a character string by the voice recognition unit 140 (step S372), and the VoIP word extraction unit 142 is converted into the character string as a VoIP word. Sent to.
[0143]
The VoIP word extraction unit 142 causes the chat server 110 to transmit the VoIP word converted from the voice conversation message to a character string as a character string conversation message in a channel managed by the chat server 110 (step S373). Here, if the VoIP word is based on a voice conversation message in a VoIP conference room derived from a channel managed by the chat server 110, the chat server 110 transmits the VoIP word as a character string conversation message in the channel from which the conversation was derived. Can be configured. If the VoIP word is based on a voice conversation message in the VoIP conference room created in response to a request from the client terminal 200, the CM 130 creates a dedicated channel in the chat server 110, and It can be configured to be transmitted as a character string conversation message.
[0144]
Further, the VoIP log unit 146 stores the voice conversation message in the VoIP conference room as a voice conversation log in a predetermined recording medium (step S374).
When the VoIP conference room in the MCU 120 is closed (step S375), the VoIP log unit 146 acquires a storage directory name as a storage destination of the stored voice conversation log, and notifies the chat server 110 of the name (step S376). ).
In the VoIP link unit 113 of the chat server 110, the VoIP word sent from the VoIP word extraction unit 142 is sequentially stored with the chat log, and the VoIP word is transmitted from the VoIP log unit 146 when the VoIP conference room is closed. A link is attached by associating the directory name with the corresponding character string in the chat log (step S377).
[0145]
On the client terminal 200 side, the VoIP word transmitted as a character string conversation message from the server terminal 100 is displayed as a character string conversation message of the derivation source channel or the dedicated channel, and the voice conversation in the VoIP conference room can be recognized as a character string. (Step S381).
In the fourteenth embodiment as described above, when the chat log is verified at a later date, it is possible to refer to the corresponding VoIP log, and it is possible to check even small points that are unknown only by the character string.
[0146]
[Fifteenth Embodiment]
FIG. 15 shows an outline of a system employing the fifteenth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0147]
The CM 130 performs voice recognition of a voice conversation message transmitted and received in the VoIP conference room of the MCU 120 ((1) in FIG. 15). Further, the CM 130 sends a character string as a result of the voice recognition to the chat server 110 ((2) in FIG. 15).
The chat server 110 transmits the character string information that is the result of the voice recognition transmitted from the CM 130 to the client terminal 200 as a character string conversation message (FIG. 15 (3)).
The client terminal 200 displays the character string information received from the server terminal 100 as a character string conversation message in the channel, and accepts an instruction from the user for the character string information (FIG. 15 (4)).
[0148]
When the character string information is clicked, a VoIP connection is made to the server terminal 100, and the user participates in the VoIP conference room corresponding to the character string information (FIG. 15-5).
FIG. 33 shows a control block diagram for constituting the fifteenth embodiment.
Also in the fifteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
[0149]
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0150]
The CM 130 generates a VoIP conference room created in the MCU 120 in response to a request from the client terminal 200 or a VoIP conference room created in the MCU 120 based on predetermined condition arrival information from the chat server 110. The voice recognition unit 140 includes a voice recognition unit 140 that performs voice recognition of a voice conversation message in a conference room and converts it into a character string, and a VoIP word extraction unit 142 that transmits the character string converted by the voice recognition unit 140 to the chat server 110.
Chat server 110 notifies client terminal 200 of the VoIP word transmitted from VoIP word extraction section 142 of CM 130 as a character string conversation message in the corresponding channel.
[0151]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
The chat application 210 displays so that the character string conversation message in the channel can be recognized as a VoIP word based on a voice conversation message in a specific VoIP conference room. When the VoIP word is clicked by the user, the VoIP word is displayed. A VoIP connection unit 213 that issues a request to the application to connect to the corresponding VoIP conference room is provided.
[0152]
The operation in the fifteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the H.200 is controlled (step S391).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S392), and transmitted to the chat server 110 as a VoIP word converted into the character string.
[0153]
The chat server 110 sends the VoIP word converted to the character string as a character string conversation message in a predetermined channel, and the corresponding VoIP conference room information and the VoIP conference room are derived from the chat channel. In this case, the derivation source channel information and the like are transmitted to the client terminal 200 (step S393).
The client terminal 200 displays the VoIP word transmitted as a character string conversation message from the server terminal 100 as a character string conversation message of the derivation source channel or the dedicated channel (step S401). The VoIP word connection unit 213 associates the displayed VoIP word with the VoIP conference room information transmitted from the server terminal 100 (step S402), and when the VoIP word is clicked by the user, the connection to the VoIP conference room is made. Configure to make a connection.
[0154]
In the fifteenth embodiment described above, the voice conversation in the VoIP conference room is displayed as a character string on the chat application 210 of the client 200, so that the content can be easily grasped and the displayed VoIP word can be displayed. Just by clicking, you can easily join the VoIP conference room.
[Sixteenth embodiment]
FIG. 16 shows an outline of a system employing the sixteenth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0155]
The CM 130 voice-recognizes the voice conversation message transmitted and received in the VoIP conference room of the MCU 120, and detects whether or not the personal name and the calling keyword are included therein (FIG. 16 (1)).
When detecting the personal name and the calling keyword, the CM 130 acquires the IP address of the corresponding client terminal 200 and notifies the client terminal 200 of a VoIP connection request (FIG. 16 (2)).
When the user using the client terminal 200 responds to the client terminal 200 that has received the VoIP connection request from the server terminal 100 ((3) in FIG. 16), a voice conversation message transmitted through the client terminal 200 Is transmitted to the MCU 120 through the CM 130 and is controlled as a voice conversation message in the VoIP conference room.
[0156]
FIG. 34 shows a control block diagram for configuring the sixteenth embodiment.
Also in the sixteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0157]
The CM 130 accepts an IP address registration from the client terminal 200 belonging to a channel managed by the chat server 110 and stores the IP address in the IP address table 132. An IP address acquisition unit 133 for acquiring an address, a VoIP connection request unit 134 for transmitting a VoIP connection request to the client terminal 200 having the IP address acquired by the IP address acquisition unit 133, and a VoIP conference created in the MCU 120. Voice recognition means 140 for voice-recognizing a voice conversation message in the VoIP conference room and converting it into a character string, and V for detecting a personal name and a calling keyword in the character string converted by the voice recognition means 140. And an IP personal call extraction unit 147.
[0158]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. A VoIP application 220 constituting a VoIP client for transmitting and receiving a voice conversation message in the conference room.
The operation in the sixteenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the H.200 is controlled (step S411).
[0159]
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S412), and the converted character string information is transmitted to the VoIP personal call extracting unit 147.
The VoIP personal call extracting unit 147 determines whether or not the converted character string information includes a personal name and a calling keyword (step S413). If the personal name and the calling keyword exist, the corresponding personal The user name used by the name is acquired, and this is notified to the IP address acquisition unit 133 (step S415).
[0160]
The IP address acquisition unit 133 refers to the IP address table 132 of the client IP address registration unit 131, and acquires the IP address of the client terminal 200 corresponding to the user name (Step S415).
The IP address acquisition unit 133 sets the IP address acquired from the client IP address registration unit 131 and the user name, and notifies the VoIP connection request unit 134 of the set (step S416).
The VoIP connection request unit 134 notifies the corresponding client terminal 200 of a VoIP connection request based on the notified IP address and user name, and makes a connection request to the called VoIP conference room (step). S417).
[0161]
In the client terminal 200, upon receiving the VoIP connection request notification from the server terminal 100, the application displays a message to that effect and allows the user to select whether or not to respond to the VoIP connection (step S421). When the user gives an instruction to respond to the VoIP connection request, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation (step S422).
The client terminal 200 that has received the VoIP connection request notification can be configured to start up a VoIP conference connection request dialog 540 as shown in FIG. 59, for example. In this VoIP conference connection request dialog 540, a notification type bar 541 indicating that the type of notification is a VoIP conference connection request, a content display section 542 for displaying the name of the called VoIP conference room, and agreement to participate A consent button 543 for instructing to do so, a reject button 544 for instructing not to agree to participate, and the like are provided. When the user agrees to participate in the VoIP conference room, clicking on the accept button 543 enables the VoIP application 220 of the client terminal 200 to connect to the corresponding VoIP conference room, and the voice by the VoIP telephone Can transition to a conversation.
[0162]
In the sixteenth embodiment, the user name desired to participate in the VoIP conference room is called in the conversation so that the user is automatically contacted and the trouble of dialing the telephone number can be omitted. it can.
[Seventeenth embodiment]
FIG. 17 shows an outline of a system employing the seventeenth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0163]
The CM 130 voice-recognizes the voice conversation message transmitted and received in the VoIP conference room of the MCU 120 and detects whether or not the personal name and the calling keyword are included therein (FIG. 17 (1)).
When detecting the personal name and the calling keyword, the CM 130 notifies the client terminal 200 of the corresponding user name of the VoIP conference room information ((2) in FIG. 17).
When the client terminal 200 receives the VoIP conference room information from the server terminal 100 and connects to the VoIP conference room ((3) in FIG. 17), the client terminal 200 is transmitted through the client terminal 200. The incoming voice conversation message is sent to the MCU 120 through the CM 130 and is controlled as a voice conversation message in the VoIP conference room.
[0164]
FIG. 35 shows a control block diagram for constituting the seventeenth embodiment.
Also in the seventeenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
The chat server 110 controls a character string conversation message in a channel to provide a character string chat communication between the plurality of client terminals 200. The chat server 110 transmits the predetermined condition arrival information to the CM 130 based on the appearance rate of the character string conversation message in the channel and the detection of the specific character string, as in the above-described embodiment, and the corresponding VoIP in the MCU 120. A conference room can be created, and the client terminal 200 can be notified of a VoIP connection request or VoIP conference room information.
[0165]
For the VoIP conference room created in the MCU 120, the CM 130 performs voice recognition on the voice conversation message in the VoIP conference room and converts the voice conversation message into a character string, and the character string converted by the voice recognition unit 140. A VoIP personal call extracting unit 147 that detects a personal name and a calling keyword therein, and chats information about a VoIP conference room called to the corresponding client terminal 200 based on information from the VoIP personal call extracting unit 147. And a VoIP conference room notification unit 135 that transmits via the server 110.
[0166]
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving voice conversation messages in the conference room.
The chat application 210 connects to the VoIP conference room in response to a notification from the VoIP conference room notification unit 135, in addition to the chat function of transmitting and receiving a character string conversation message in a channel managed by the chat server 110. A VoIP connection unit 211 is provided.
[0167]
The operation of the seventeenth embodiment will be described with reference to FIG.
On the server terminal 100 side, each client terminal is passed through a VoIP conference room created in response to a request from the client terminal 200 or a VoIP conference room created as a result of monitoring a character string conversation message in a channel by the chat server 110. The VoIP voice packet from the H.200 is controlled (step S431).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S432), and the converted character string information is transmitted to the VoIP personal call extraction unit 147.
[0168]
The VoIP personal call extracting unit 147 determines whether or not the converted character string information includes a personal name and a calling keyword (step S433). If the personal name and the calling keyword exist, the corresponding personal The user name corresponding to the name is acquired, and this is notified to the VoIP conference room notification unit 135 (step S434).
The VoIP conference room notification unit 135 notifies the corresponding client terminal 200 of the called VoIP conference room information based on the notified user name (step S435).
[0169]
Upon receiving the notification of the VoIP conference room from the server terminal 100, the client terminal 200 displays the notification via the chat application 210 and allows the user to select whether or not to connect to the VoIP conference room. (Step S441). When the user gives an instruction to make a VoIP connection, the VoIP application 220 connects to the corresponding VoIP conference room and starts a voice conversation (step S442).
The client terminal 200 that has received the notification of the VoIP conference room can be configured, for example, to launch a VoIP conference room notification dialog 550 as shown in FIG. In the VoIP conference room notification dialog 550, a notification type bar 551 indicating that the type of notification is a VoIP conference room notification, a content display portion 552 for displaying the content of "Called by VoIP conference room" VoIP ", An accept button 553 for instructing to agree to participate, a reject button 554 for instructing not to agree to participate, and the like are provided. If the user agrees to participate in the VoIP conference room, by clicking the accept button 553, the VoIP application 220 of the client terminal 200 can connect to the corresponding VoIP conference room, and the voice by the VoIP telephone can be used. Can transition to a conversation.
[0170]
In the seventeenth embodiment, the user name desired to participate in the VoIP conference room is called in the conversation so that the user is automatically contacted and the trouble of dialing the telephone number can be omitted. it can.
[Eighteenth Embodiment]
FIG. 18 shows an outline of a system adopting the eighteenth embodiment of the present invention.
As in the first embodiment, the server terminal 100 and the plurality of client terminals 200, 200 are connected on a network, and any one of channels that are a plurality of character string conversation spaces set up on the network is used. It realizes shared chat communication or VoIP telephone communication sharing one of VoIP conference rooms, which are a plurality of voice conversation spaces set up on a network.
[0171]
The CM 130 voice-recognizes the voice conversation message transmitted and received in the VoIP conference room of the MCU 120 and detects whether or not a predetermined character string is included therein (FIG. 18 (1)). For example, when the CM 130 detects the word “chat” in a voice conversation message in the VoIP conference room, the CM 130 requests the chat server 110 to open a channel corresponding to the VoIP conference room (FIG. 18 (2)).
The chat server 110 notifies the client terminal 200 belonging to the VoIP conference room of an invite for inviting to the channel opened in response to a request from the CM 130 (FIG. 18 (3)).
[0172]
FIG. 36 shows a control block diagram for constituting the eighteenth embodiment.
Also in the eighteenth embodiment, the server terminal 100 and the client terminal 200 are connected via the network 300 as in the first embodiment.
As described above, the server terminal 100 includes the chat server 110, the MCU 120, and the CM 130.
For the VoIP conference room in the MCU 120, the CM 130 performs voice recognition on the voice conversation message in the VoIP conference room and converts the voice conversation message into a character string, and a predetermined character string in the character string converted by the voice recognition means 140. And a chat transfer keyword extracting unit 148 that notifies the chat server 110 of a channel opening request when the character string is detected.
[0173]
The chat server 110 creates a channel corresponding to the VoIP conference room based on the channel opening request transmitted from the chat transition keyword extraction unit 148, and notifies the corresponding client terminal of an invite notification to the channel creation unit 114. Have.
The client terminal 200 includes a chat application 210 constituting a chat client for transmitting and receiving a character string conversation message in a channel managed by the chat server 110 of the server terminal 100, and a VoIP application managed by the MCU 120 of the server terminal 100. And a VoIP application 220 constituting a VoIP client for transmitting and receiving voice conversation messages in the conference room.
[0174]
The operation of the eighteenth embodiment will be described with reference to FIG.
The server terminal 100 controls the VoIP voice packet from each client terminal 200 through the VoIP conference room in the MCU 120 (step S451).
The voice conversation message in the VoIP conference room is converted into a character string by the voice recognition means 140 (step S452), and the converted character string information is transmitted to the chat transition keyword extraction unit 148.
The chat transfer keyword extracting unit 148 determines whether or not there is a keyword corresponding to the chat transfer in the converted character string information (step S453). If the chat transfer keyword exists, the chat server 110 Then, a channel opening request is notified (step S454).
[0175]
The channel creation unit 114 of the chat server 110 creates a channel corresponding to the VoIP conference room notified from the chat transition keyword extraction unit 148 (step S455), and sends the channel to the client terminal 200 participating in the VoIP conference room. On the other hand, an invite notification to the established channel is performed (step S456).
At the client terminal 200, in response to the invite notification from the server terminal 100, the chat application 210 displays information such as the corresponding channel name and performs an invite display indicating that the user is invited (step S461). When the user connects to the channel in response to the invite notification, it becomes possible to start communication using a character string conversation message through the chat application 210.
[0176]
In the eighteenth embodiment, it is possible to shift from the VoIP conference room to the chat simply by making a specific statement (a statement such as “Let's shift to chat”) in the VoIP conference room. It is possible to save time for setting up and to save time for negotiation between users.
[Other embodiments]
Of the functions of each of the above-described embodiments, a configuration including two or more functions is possible, and a combination thereof can be freely configured.
<Appendix>
(Appendix 1)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on a network with a plurality of clients connected via a network, and a character string transmitted via the client A chat server that allows simultaneous communication by text on the channel between a plurality of users by controlling a conversation message;
A conversation monitoring unit that monitors a character string conversation message in a channel managed by the chat server and outputs predetermined condition reaching information when a predetermined condition is satisfied;
VoIP notifying means for acquiring an IP address of a client belonging to a corresponding channel based on predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A plurality of virtual voice conversation spaces set up on the network (hereinafter, referred to as VoIP conference rooms) are shared with a plurality of clients connected via the network, and transmitted via the clients. A VoIP conference room for a client to which simultaneous communication by voice on the VoIP conference room among a plurality of users is performed by controlling a voice conversation message to a client who has been notified of a VoIP transfer by the VoIP notification means. A VoIP server that provides
A multi-channel conversation server comprising:
[0177]
(Appendix 2)
2. The multi-channel conversation server according to claim 1, wherein the conversation monitoring unit determines that a predetermined condition is satisfied when an appearance rate of a character string conversation message in a channel exceeds a predetermined value within a predetermined time.
(Appendix 3)
2. The multi-channel conversation server according to claim 1, wherein the conversation monitoring unit determines that a predetermined condition is satisfied when a specific character string appears in the character string conversation message in the channel.
[0178]
(Appendix 4)
Speech synthesis means for converting a specific character string in the character string conversation message detected by the conversation monitoring means into voice data,
VoIP calling means for notifying the client belonging to the corresponding channel of the voice data converted by the voice synthesizing means,
4. The multi-channel conversation server according to claim 3, further comprising:
(Appendix 5)
The multi-channel conversation according to any one of Supplementary notes 1 to 4, wherein the VoIP notification unit sets a VoIP conference room of a corresponding channel in a VoIP server, and transmits a VoIP connection request notification to a client belonging to the channel. server.
[0179]
(Appendix 6)
A VoIP voice monitoring means for monitoring a voice conversation message in a VoIP conference room managed by the VoIP server and outputting predetermined condition arrival information when a predetermined condition is reached; and a predetermined condition arrival information from the VoIP voice monitoring means. VoIP termination means for terminating a VoIP conference room managed by the VoIP server based on the VoIP server,
The multi-channel conversation server according to any one of supplementary notes 1 to 5, further comprising:
(Appendix 7)
7. The multi-channel conversation server according to claim 6, wherein the VoIP voice monitoring unit determines that a predetermined condition is satisfied when a voice packet volume in the VoIP conference room becomes equal to or less than a predetermined value.
[0180]
(Appendix 8)
7. The multi-channel conversation server according to claim 6, wherein the VoIP speech monitoring unit determines that a predetermined condition is satisfied when speech recognition is performed on a speech conversation message in the VoIP conference room and a specific keyword is extracted.
(Appendix 9)
7. The multi-channel conversation server according to claim 6, wherein the VoIP voice monitoring unit determines that a predetermined condition is satisfied when an elapsed time since the setting of the VoIP conference room exceeds a predetermined value.
[0181]
(Appendix 10)
The multi-channel conversation according to any one of Supplementary notes 6 to 9, wherein the VoIP termination unit transmits a chat transition notification that prompts a client belonging to the VoIP conference room to transition to a channel managed by the chat server. server.
(Appendix 11)
Voice recognition means for voice-recognizing a voice conversation message in the VoIP conference room and converting it into character string information;
A converted character string notifying means for transmitting the character string information converted by the voice recognition means as a character string conversation message in a channel managed by the chat server to a client belonging to the channel,
The multi-channel conversation server according to any one of supplementary notes 1 to 10, further comprising:
[0182]
(Appendix 12)
Chat log management means for managing a character string conversation message in the channel as a chat log, including character string information transmitted by the conversion character string notification means,
VoIP log management means for managing a voice conversation message in a VoIP conference room managed by the VoIP server as a VoIP log;
VoIP linking means for linking character string information transmitted by the converted character string notifying means in a chat log managed by the chat log managing means with a corresponding part in a VoIP log managed by the VoIP log managing means;
The multi-channel conversation server according to claim 11, further comprising:
[0183]
(Appendix 13)
Voice recognition means for voice-recognizing a voice conversation message in the VoIP conference room and converting it into character string information;
Keyword extracting means for extracting a character string that is a characteristic of a conversation in the VoIP conference room from character string information converted by the voice recognition means;
VoIP word transmitting means for setting a VoIP exclusive channel capable of controlling a conversation message by a character string, and transmitting the character string information converted by the voice recognition means to each client via the VoIP exclusive channel;
Keyword notifying means for transmitting a character string extracted by the keyword extracting means as a character string conversation message in a channel managed by the chat server to a client belonging to the channel;
The multi-channel conversation server according to any one of supplementary notes 1 to 10, further comprising:
[0184]
(Appendix 14)
14. The multi-channel conversation server according to any one of Supplementary Notes 11 to 13, further comprising a translation unit that translates the character string information converted by the voice recognition unit into another language.
(Appendix 15)
Voice recognition means for voice-recognizing a voice conversation message in the VoIP conference room and converting it into character string information;
When a character string specifying an individual who is not connected to the VoIP conference room is detected from the character string information converted by the voice recognition unit, an IP address for calling the specified individual is obtained to prompt a VoIP connection. Personal calling means for transmitting a VoIP transfer notification to the IP address for
The multi-channel conversation server according to claim 1, further comprising:
[0185]
(Appendix 16)
A plurality of virtual voice conversation spaces (hereinafter, referred to as VoIP conference rooms) set up on the network are shared with a plurality of clients connected via the network, and transmitted via the clients. A VoIP server that controls voice conversation messages to perform simultaneous voice communication between the plurality of users on the VoIP conference room;
Voice monitoring means for monitoring a voice conversation message in the VoIP conference room and outputting predetermined condition reaching information when a predetermined condition is satisfied;
Chat notification means for transmitting a chat shift notification for prompting a client belonging to the corresponding VoIP conference room to perform a chat connection based on predetermined condition arrival information output from the voice monitoring means;
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on a network with a plurality of clients connected via a network, and a character string transmitted via the client A chat that provides simultaneous communication by text on the channel among a plurality of users by controlling a conversation message, and provides a chat channel to a client that has been notified of a chat transition by the chat notification unit. Server and
A multi-channel conversation server comprising:
[0186]
(Appendix 17)
The voice monitoring means,
Voice recognition means for voice-recognizing a voice conversation message in the VoIP conference room and converting it into character string information;
A chat transition keyword extraction unit that determines that a predetermined condition is satisfied when a specific character string is detected in the character string information converted by the voice recognition unit;
17. The multi-channel conversation server of claim 16, comprising:
[0187]
(Appendix 18)
A virtual character string conversation space (hereinafter referred to as a channel) established on the network is shared with a chat server connected to the network, and character string conversation messages are transmitted and received with other users. A chat client for simultaneous communication,
A virtual voice conversation space (hereinafter, referred to as a VoIP conference room) connected to the network is shared with a VoIP server connected to the network, and a voice conversation message is transmitted / received to / from another user. A VoIP client for simultaneous communication
A VoIP transition unit that connects the VoIP client to the notified VoIP conference room when receiving a VoIP transition notification prompting a VoIP connection from the chat server regarding the channel to which the chat client is connected;
Multi-channel conversation client with.
[0188]
(Appendix 19)
The VoIP communication volume monitoring means for monitoring the amount of voice packets transmitted from the own terminal to the VoIP conference room and terminating the connection to the VoIP conference room by the VoIP client when it is determined that the voice packet volume is equal to or less than a predetermined value. 19. The multi-channel conversation client of claim 18, comprising:
(Appendix 20)
Supplementary note 18, further comprising a VoIP connection time monitoring unit that terminates the connection to the VoIP conference room by the VoIP client when it is determined that a predetermined time has elapsed from the connection to the VoIP conference room by the VoIP transfer unit. A multi-channel conversation client as described.
[0189]
(Appendix 21)
VoIP word display means for receiving the converted character string information by voice-recognizing a voice conversation message in the VoIP conference room on the VoIP server side and displaying the converted character string message via the chat client,
A VoIP connection unit that receives a selection instruction for the character string information displayed by the VoIP word display unit and connects the VoIP client to a corresponding VoIP conference room;
21. The multi-channel conversation client according to any of claims 18 to 20, further comprising:
[0190]
(Appendix 22)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on a network with a plurality of clients connected via a network, and a character string transmitted via the client A chat server that allows simultaneous communication by text on the channel between a plurality of users by controlling a conversation message;
A conversation monitoring unit that monitors a character string conversation message in a channel managed by the chat server and outputs predetermined condition reaching information when a predetermined condition is satisfied;
VoIP notifying means for acquiring an IP address of a client belonging to a corresponding channel based on predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A plurality of virtual voice conversation spaces set up on the network (hereinafter, referred to as VoIP conference rooms) are shared with a plurality of clients connected via the network, and transmitted via the clients. A VoIP conference room for a client to which simultaneous communication by voice on the VoIP conference room among a plurality of users is performed by controlling a voice conversation message to a client who has been notified of a VoIP transfer by the VoIP notification means. A VoIP server that provides
A chat client that shares a channel with the chat server, transmits and receives a character string conversation message with another user, and performs simultaneous communication,
A VoIP client that shares a VoIP conference room with the VoIP server, transmits and receives voice conversation messages with other users, and performs simultaneous communication;
A VoIP transition unit that connects the VoIP client to a VoIP conference room provided by the VoIP server when the VoIP notification unit receives a VoIP transition notification regarding the channel to which the chat client is connected;
Multi-channel conversation system including.
[0191]
(Appendix 23)
A plurality of virtual character string conversation spaces (hereinafter, referred to as channels) set up on the network are shared between a plurality of clients connected via the network and the chat server, and are transmitted via the clients. Controlling simultaneous text communication on the channel between a plurality of users by controlling a character string conversation message,
Monitoring the character string conversation message in the channel and outputting predetermined condition reaching information when a predetermined condition is reached;
Obtaining an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A virtual voice conversation space (hereinafter referred to as a VoIP conference room) set up on a network is shared between a client that has transmitted the VoIP transfer notification and a VoIP server, and voice transmitted via the client. Controlling a conversation message to perform simultaneous voice communication between the plurality of users on the VoIP conference room;
Multi-channel conversation methods including.
[0192]
(Appendix 24)
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on a network with a plurality of clients connected via a network, and a character string transmitted via the client A chat server that allows simultaneous communication by text on the channel between a plurality of users by controlling a conversation message;
A conversation monitoring unit that monitors a character string conversation message in a channel managed by the chat server and outputs predetermined condition reaching information when a predetermined condition is satisfied;
VoIP notifying means for acquiring an IP address of a client belonging to a corresponding channel based on predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A plurality of virtual voice conversation spaces set up on the network (hereinafter, referred to as VoIP conference rooms) are shared with a plurality of clients connected via the network, and transmitted via the clients. A VoIP conference room for a client to which simultaneous communication by voice on the VoIP conference room among a plurality of users is performed by controlling a voice conversation message to a client who has been notified of a VoIP transfer by the VoIP notification means. A VoIP server that provides
A program for causing a computer to function as a multi-channel conversation server provided with.
[0193]
(Appendix 25)
A virtual character string conversation space (hereinafter referred to as a channel) established on the network is shared with a chat server connected to the network, and character string conversation messages are transmitted and received with other users. A chat client for simultaneous communication,
A virtual voice conversation space (hereinafter, referred to as a VoIP conference room) connected to the network is shared with a VoIP server connected to the network, and a voice conversation message is transmitted / received to / from another user. A VoIP client for simultaneous communication
A VoIP transition unit that connects the VoIP client to the notified VoIP conference room when receiving a VoIP transition notification prompting a VoIP connection from the chat server regarding the channel to which the chat client is connected;
A program for causing a computer to function as a multi-channel conversation client including the program.
[0194]
(Supplementary Note 26)
A plurality of clients connected via the network and a chat server share a plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on the network, and are transmitted via the clients. Controlling simultaneous character string conversation messages to allow simultaneous communication by text on the channel between a plurality of users;
Monitoring the character string conversation message in the channel and outputting predetermined condition reaching information when a predetermined condition is reached;
Obtaining an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A virtual voice conversation space (hereinafter referred to as a VoIP conference room) set up on a network is shared between a client that has transmitted the VoIP transfer notification and a VoIP server, and voice transmitted via the client. Controlling simultaneous conversational messages to allow simultaneous voice communication between the plurality of users on the VoIP conference room;
A program for causing a computer to execute a multi-channel conversation method including:
[0195]
【The invention's effect】
ADVANTAGE OF THE INVENTION According to this invention, a user inputs a telephone number, establishes a VoIP conference room, performs a chat channel by linking a chat system using a character string conversation message and a VoIP telephone system using a voice conversation message. Can be saved, labor can be saved by omitting negotiations for migration between users, and the interruption time of the conference can be reduced as much as possible.
[Brief description of the drawings]
FIG. 1 is a schematic explanatory view of a first embodiment.
FIG. 2 is a schematic explanatory view of a second embodiment.
FIG. 3 is a schematic explanatory view of a third embodiment.
FIG. 4 is a schematic explanatory view of a fourth embodiment.
FIG. 5 is a schematic explanatory view of a fifth embodiment.
FIG. 6 is a schematic explanatory view of a sixth embodiment.
FIG. 7 is a schematic explanatory view of a seventh embodiment.
FIG. 8 is a schematic explanatory view of an eighth embodiment.
FIG. 9 is a schematic explanatory view of a ninth embodiment.
FIG. 10 is a schematic explanatory view of a tenth embodiment.
FIG. 11 is a schematic explanatory view of an eleventh embodiment.
FIG. 12 is a schematic explanatory view of a twelfth embodiment.
FIG. 13 is a schematic explanatory view of a thirteenth embodiment.
FIG. 14 is a schematic explanatory view of a fourteenth embodiment.
FIG. 15 is a schematic explanatory view of a fifteenth embodiment.
FIG. 16 is a schematic explanatory view of a sixteenth embodiment.
FIG. 17 is a schematic explanatory view of a seventeenth embodiment.
FIG. 18 is a schematic explanatory view of an eighteenth embodiment.
FIG. 19 is a control block diagram of the first embodiment.
FIG. 20 is a control block diagram of the second embodiment.
FIG. 21 is a control block diagram of the third embodiment.
FIG. 22 is a control block diagram according to a fourth embodiment.
FIG. 23 is a control block diagram according to a fifth embodiment.
FIG. 24 is a control block diagram according to a sixth embodiment.
FIG. 25 is a control block diagram according to a seventh embodiment.
FIG. 26 is a control block diagram according to the eighth embodiment.
FIG. 27 is a control block diagram according to a ninth embodiment.
FIG. 28 is a control block diagram according to a tenth embodiment.
FIG. 29 is a control block diagram according to an eleventh embodiment.
FIG. 30 is a control block diagram according to a twelfth embodiment.
FIG. 31 is a control block diagram according to a thirteenth embodiment.
FIG. 32 is a control block diagram according to a fourteenth embodiment.
FIG. 33 is a control block diagram according to a fifteenth embodiment.
FIG. 34 is a control block diagram according to a sixteenth embodiment.
FIG. 35 is a control block diagram according to a seventeenth embodiment.
FIG. 36 is a control block diagram according to an eighteenth embodiment.
FIG. 37 is a flowchart of the first embodiment.
FIG. 38 is a flowchart of the second embodiment.
FIG. 39 is a flowchart of the third embodiment.
FIG. 40 is a flowchart of the fourth embodiment.
FIG. 41 is a flowchart of the fifth embodiment.
FIG. 42 is a flowchart of the sixth embodiment.
FIG. 43 is a flowchart of the seventh embodiment.
FIG. 44 is a flowchart of the eighth embodiment.
FIG. 45 is a flowchart of the ninth embodiment.
FIG. 46 is a flowchart of the tenth embodiment.
FIG. 47 is a flowchart of the eleventh embodiment.
FIG. 48 is a flowchart of the twelfth embodiment.
FIG. 49 is a flowchart of a thirteenth embodiment.
FIG. 50 is a flowchart of a fourteenth embodiment.
FIG. 51 is a flowchart of the fifteenth embodiment.
FIG. 52 is a flowchart of the sixteenth embodiment.
FIG. 53 is a flowchart of a seventeenth embodiment.
FIG. 54 is a flowchart of an eighteenth embodiment.
FIG. 55 is an explanatory diagram of a VoIP conference connection request dialog.
FIG. 56 is an explanatory diagram of a VoIP conference room notification dialog.
FIG. 57 is an explanatory diagram of a VoIP conference connection request dialog.
FIG. 58 is an explanatory diagram of a VoIP conference room notification dialog.
FIG. 59 is an explanatory diagram of a VoIP conference connection request dialog.
FIG. 60 is an explanatory diagram of a VoIP conference room notification dialog.

Claims (5)

ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
を備えるマルチチャネル会話サーバ。
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on a network with a plurality of clients connected via a network, and a character string transmitted via the client A chat server that allows simultaneous communication by text on the channel between a plurality of users by controlling a conversation message;
A conversation monitoring unit that monitors a character string conversation message in a channel managed by the chat server and outputs predetermined condition reaching information when a predetermined condition is satisfied;
VoIP notifying means for acquiring an IP address of a client belonging to a corresponding channel based on predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A plurality of virtual voice conversation spaces set up on the network (hereinafter, referred to as VoIP conference rooms) are shared with a plurality of clients connected via the network, and transmitted via the clients. A VoIP conference room for a client to which simultaneous communication by voice on the VoIP conference room among a plurality of users is performed by controlling a voice conversation message to a client who has been notified of a VoIP transfer by the VoIP notification means. A VoIP server that provides
A multi-channel conversation server comprising:
ネットワークに接続されたチャットサーバとの間でネットワーク上に設営された仮想的な文字列会話空間(以下、チャネルと称す)を共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
ネットワークに接続されたVoIPサーバとの間でネットワーク上に接続された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記チャットサーバ側からVoIP接続を促すVoIP移行通知を受信した場合に、通知されたVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を備えるマルチチャネル会話クライアント。
A virtual character string conversation space (hereinafter referred to as a channel) established on the network is shared with a chat server connected to the network, and character string conversation messages are transmitted and received with other users. A chat client for simultaneous communication,
A virtual voice conversation space (hereinafter, referred to as a VoIP conference room) connected to the network is shared with a VoIP server connected to the network, and a voice conversation message is transmitted / received to / from another user. A VoIP client for simultaneous communication
A VoIP transition unit that connects the VoIP client to the notified VoIP conference room when receiving a VoIP transition notification prompting a VoIP connection from the chat server regarding the channel to which the chat client is connected;
Multi-channel conversation client with.
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせるチャットサーバと、
前記チャットサーバが管理するチャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する会話監視手段と、
前記会話監視手段から出力される所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信するVoIP通知手段と、
ネットワークを介して接続される複数のクライアントとの間でネットワーク上に設営された複数の仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせるものであって、前記VoIP通知手段によりVoIP移行通知がなされたクライアントに対するVoIP用会議室を提供するVoIPサーバと、
前記チャットサーバとの間でチャネルを共有し、他のユーザとの間で文字列会話メッセージを送受信して同時コミュニケーションを行うチャットクライアントと、
前記VoIPサーバとの間でVoIP用会議室を共有し、他のユーザとの間で音声会話メッセージを送受信して同時コミュニケーションを行うVoIPクライアントと、
前記チャットクライアントが接続中のチャネルに関して前記VoIP通知手段によりVoIP移行通知を受信した場合に、前記VoIPサーバが提供するVoIP用会議室に前記VoIPクライアントを接続させるVoIP移行手段と、
を含むマルチチャネル会話システム。
A plurality of virtual character string conversation spaces (hereinafter referred to as channels) set up on a network with a plurality of clients connected via a network, and a character string transmitted via the client A chat server that allows simultaneous communication by text on the channel between a plurality of users by controlling a conversation message;
A conversation monitoring unit that monitors a character string conversation message in a channel managed by the chat server and outputs predetermined condition reaching information when a predetermined condition is satisfied;
VoIP notifying means for acquiring an IP address of a client belonging to a corresponding channel based on predetermined condition arrival information output from the conversation monitoring means, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A plurality of virtual voice conversation spaces set up on the network (hereinafter, referred to as VoIP conference rooms) are shared with a plurality of clients connected via the network, and transmitted via the clients. A VoIP conference room for a client to which simultaneous communication by voice on the VoIP conference room among a plurality of users is performed by controlling a voice conversation message to a client who has been notified of a VoIP transfer by the VoIP notification means. A VoIP server that provides
A chat client that shares a channel with the chat server, transmits and receives a character string conversation message with another user, and performs simultaneous communication,
A VoIP client that shares a VoIP conference room with the VoIP server, transmits and receives voice conversation messages with other users, and performs simultaneous communication;
A VoIP transition unit that connects the VoIP client to a VoIP conference room provided by the VoIP server when the VoIP notification unit receives a VoIP transition notification regarding the channel to which the chat client is connected;
Multi-channel conversation system including.
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせる段階と、
を含むマルチチャネル会話方法。
A plurality of virtual character string conversation spaces (hereinafter, referred to as channels) set up on the network are shared between a plurality of clients connected via the network and the chat server, and are transmitted via the clients. Controlling simultaneous text communication on the channel between a plurality of users by controlling a character string conversation message,
Monitoring the character string conversation message in the channel and outputting predetermined condition reaching information when a predetermined condition is reached;
Obtaining an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A virtual voice conversation space (hereinafter referred to as a VoIP conference room) set up on a network is shared between a client that has transmitted the VoIP transfer notification and a VoIP server, and voice transmitted via the client. Controlling simultaneous conversational messages to allow simultaneous voice communication between the plurality of users on the VoIP conference room;
Multi-channel conversation methods including.
ネットワークを介して接続される複数のクライアントとチャットサーバとの間でネットワーク上に設営された複数の仮想的な文字列会話空間(以下、チャネルと称す)を共有し、前記クライアントを介して送信される文字列会話メッセージを制御することによって複数のユーザ間における前記チャネル上での文字による同時コミュニケーションを行わせる段階と、
前記チャネル内の文字列会話メッセージを監視して所定条件になった場合に所定条件到達情報を出力する段階と、
前記所定条件到達情報に基づいて対応するチャネルに属するクライアントのIPアドレスを取得し、VoIP接続を促すためのVoIP移行通知を各IPアドレスに送信する段階と、
前記VoIP移行通知を送信したクライアントとVoIPサーバとの間でネットワーク上に設営された仮想的な音声会話空間(以下、VoIP用会議室と称す)を共有し、前記クライアントを介して送信される音声会話メッセージを制御することによって複数のユーザ間における前記VoIP用会議室上での音声による同時コミュニケーションを行わせる段階と、
を含むマルチチャネル会話方法をコンピュータに実行させるためのプログラム。
A plurality of virtual character string conversation spaces (hereinafter, referred to as channels) set up on the network are shared between a plurality of clients connected via the network and the chat server, and are transmitted via the clients. Controlling simultaneous text communication on the channel between a plurality of users by controlling a character string conversation message,
Monitoring the character string conversation message in the channel and outputting predetermined condition reaching information when a predetermined condition is reached;
Obtaining an IP address of a client belonging to a corresponding channel based on the predetermined condition arrival information, and transmitting a VoIP shift notification for prompting a VoIP connection to each IP address;
A virtual voice conversation space (hereinafter referred to as a VoIP conference room) set up on a network is shared between a client that has transmitted the VoIP transfer notification and a VoIP server, and voice transmitted via the client. Controlling simultaneous conversational messages to allow simultaneous voice communication between the plurality of users on the VoIP conference room;
A program for causing a computer to execute a multi-channel conversation method including:
JP2002348188A 2002-11-29 2002-11-29 Multi-channel conversation system Expired - Fee Related JP4331463B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002348188A JP4331463B2 (en) 2002-11-29 2002-11-29 Multi-channel conversation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002348188A JP4331463B2 (en) 2002-11-29 2002-11-29 Multi-channel conversation system

Publications (2)

Publication Number Publication Date
JP2004185088A true JP2004185088A (en) 2004-07-02
JP4331463B2 JP4331463B2 (en) 2009-09-16

Family

ID=32751165

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002348188A Expired - Fee Related JP4331463B2 (en) 2002-11-29 2002-11-29 Multi-channel conversation system

Country Status (1)

Country Link
JP (1) JP4331463B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006229356A (en) * 2005-02-15 2006-08-31 Sony Corp Communication control apparatus, communication control method, program, and recording medium for voice conference
JP2007164581A (en) * 2005-12-15 2007-06-28 Aos Technologies Kk Chat reception system
JP2014143668A (en) * 2012-12-26 2014-08-07 Canon Marketing Japan Inc Information processing device, control method of information processing device and program
JP2016136746A (en) * 2011-12-26 2016-07-28 キヤノンマーケティングジャパン株式会社 Conference server, conference system, control method, and program
JP2017099008A (en) * 2012-10-26 2017-06-01 株式会社カカオKakao Corp. Method for operating application providing group call service using mobile voice over internet protocol

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10304088A (en) * 1997-05-01 1998-11-13 Nippon Telegr & Teleph Corp <Ntt> Terminal equipment
JP2000049901A (en) * 1998-07-27 2000-02-18 Nippon Telegr & Teleph Corp <Ntt> Method of transmission for utilization status of communication tool, its server device, client terminal and program recording medium for them
JP2000112846A (en) * 1998-10-08 2000-04-21 Fuji Xerox Co Ltd Information processor and recording medium
JP2000285063A (en) * 1999-03-31 2000-10-13 Sony Corp Information processor, information processing method and medium
JP2001290789A (en) * 2000-04-10 2001-10-19 Fujitsu Ltd Device and method for supporting selection of communication means
JP2001350749A (en) * 2000-06-06 2001-12-21 Nec Corp Method for preparing and recording minutes on internet and recording medium
JP2002007272A (en) * 2000-06-19 2002-01-11 Sukaibanana Entertainment:Kk Communication service system
JP2002108794A (en) * 2000-09-27 2002-04-12 Yamaha Corp Inquiring method
JP3089063U (en) * 2001-12-22 2002-10-11 有限会社フレックスランド Karaoke box remote interaction system and restaurant remote interaction system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10304088A (en) * 1997-05-01 1998-11-13 Nippon Telegr & Teleph Corp <Ntt> Terminal equipment
JP2000049901A (en) * 1998-07-27 2000-02-18 Nippon Telegr & Teleph Corp <Ntt> Method of transmission for utilization status of communication tool, its server device, client terminal and program recording medium for them
JP2000112846A (en) * 1998-10-08 2000-04-21 Fuji Xerox Co Ltd Information processor and recording medium
JP2000285063A (en) * 1999-03-31 2000-10-13 Sony Corp Information processor, information processing method and medium
JP2001290789A (en) * 2000-04-10 2001-10-19 Fujitsu Ltd Device and method for supporting selection of communication means
JP2001350749A (en) * 2000-06-06 2001-12-21 Nec Corp Method for preparing and recording minutes on internet and recording medium
JP2002007272A (en) * 2000-06-19 2002-01-11 Sukaibanana Entertainment:Kk Communication service system
JP2002108794A (en) * 2000-09-27 2002-04-12 Yamaha Corp Inquiring method
JP3089063U (en) * 2001-12-22 2002-10-11 有限会社フレックスランド Karaoke box remote interaction system and restaurant remote interaction system

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006229356A (en) * 2005-02-15 2006-08-31 Sony Corp Communication control apparatus, communication control method, program, and recording medium for voice conference
JP4507905B2 (en) * 2005-02-15 2010-07-21 ソニー株式会社 Communication control device, communication control method, program and recording medium for audio conference
JP2007164581A (en) * 2005-12-15 2007-06-28 Aos Technologies Kk Chat reception system
JP2016136746A (en) * 2011-12-26 2016-07-28 キヤノンマーケティングジャパン株式会社 Conference server, conference system, control method, and program
JP2017099008A (en) * 2012-10-26 2017-06-01 株式会社カカオKakao Corp. Method for operating application providing group call service using mobile voice over internet protocol
US10069879B2 (en) 2012-10-26 2018-09-04 Kakao Corp. Method for operating application providing group call service using mobile voice over internet protocol
US10305946B2 (en) 2012-10-26 2019-05-28 Kakao Corp. Method for operating application providing group call service using mobile voice over internet protocol
JP2014143668A (en) * 2012-12-26 2014-08-07 Canon Marketing Japan Inc Information processing device, control method of information processing device and program

Also Published As

Publication number Publication date
JP4331463B2 (en) 2009-09-16

Similar Documents

Publication Publication Date Title
CN105915436B (en) System and method for topic-based instant message isolation
JP4467220B2 (en) Voice instant messaging
US9729395B2 (en) Collaborative conference experience improvement
CN102550008B (en) Control multi-party communication
US7283154B2 (en) Systems and methods for videoconference and/or data collaboration initiation
JP5079695B2 (en) Contextual phone augmentation
US8583729B2 (en) Handling an audio conference related to a text-based message
KR101475990B1 (en) Contextual awareness in real time collaborative activity alerts
JP6469737B2 (en) Method of operating an application that provides a group call service using the Mobile Voice over Internet Protocol
US7412527B2 (en) Systems and methods for advanced communications and control
US20160170970A1 (en) Translation Control
US20060244818A1 (en) Web-based conferencing system
CN101720551A (en) Recognition of human gestures by a mobile phone
JP2006339937A (en) Network system performing application control corresponding to context information
US7376703B2 (en) Instant messaging with caller identification
US20080003941A1 (en) VoIP two-way broadcasting
JP2004214934A (en) Terminal and program for presence information processing, and presence service providing server
JP4331463B2 (en) Multi-channel conversation system
JP2005057781A (en) Advanced group communication system
JP5494129B2 (en) Communication system and communication method
JP2003223407A (en) Contents sharing support system, user terminal, contents sharing support server, method and program for sharing contents among users, and recording medium for the program
JP2006229379A (en) Communications system among many person, client terminal, communication method among many person used for them, and program therefor
JP2008148169A (en) Communication apparatus, communication system, communication method used therefor, and program thereof
JP5170558B2 (en) Communication apparatus and communication method
JP2005173874A (en) Chat system with closed participating function for participant and chat method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050912

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080205

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080331

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080929

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080930

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090303

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090430

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20090519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090616

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090618

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120626

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120626

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130626

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130626

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees