JP2539153B2

JP2539153B2 - 仮想会議システム用端末装置及び仮想会議システム

Info

Publication number: JP2539153B2
Application number: JP5060269A
Authority: JP
Inventors: 一郎椎尾; 真小林
Original assignee: International Business Machines Corp
Current assignee: International Business Machines Corp
Priority date: 1993-03-19
Filing date: 1993-03-19
Publication date: 1996-10-02
Anticipated expiration: 2011-10-02
Also published as: JPH06274596A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、仮想会議システム用端
末装置及び仮想会議システムにかかり、特に、仮想的に
会議を行うための仮想会議システム用端末装置及び電話
回線等の通信回線によって接続された複数の仮想会議シ
ステム用端末装置を用いて会議を行う仮想会議システム
に関する。

【０００２】

【従来の技術及び発明が解決しようとする課題】従来、
通信回線を利用して遠隔地の複数ユーザーがユーザー端
末装置の回線接続による出席によって会議を構成するテ
レビ電話会議システムがある（特開平４−１４０９９０
号公報参照）。このシステムによれば、テレビ電話会議
に出席するためのユーザー端末装置にはテレビ電話機及
び遠隔画像送信回路を設け、各端末装置のモニターの画
面を複数に分割して各分割画面に出席者の画像を表示さ
せて、会議を行うことができる。

【０００３】しかしながら、上記のような会議システム
では、出席者の顔を各ユーザー端末装置に表示させるた
めに出席者の顔を撮影して撮影画像を各ユーザー端末装
置に転送している。この撮影画像の情報量は膨大である
ため、会議の進行に関与しない撮影画像の入出力のみに
要する時間が生じる。また、伝送される信号を画像に変
換する必要もある。従って、このシステムでは、リアル
タイムでの議事進行が困難であると共に各々のユーザー
端末装置はコスト高になる。また、各ユーザー端末装置
では、画面を複数に分割して各分割画像にユーザーの顔
を表示させることにより出席者の認識は容易となるが、
単に表示のみであるため、会議における雰囲気をリアル
タイムで伝達することはできずに、実際に会議を行った
ときに発生する様々な状態を表現することができない。

【０００４】本発明は、上記事実を考慮して、直観的で
明快かつ効果的に議事進行することができる仮想会議シ
ステム用端末装置及び仮想会議システムを提供すること
が目的である。

【０００５】

【課題を解決するための手段】上記目的を達成するため
に請求項１に記載の発明の仮想会議システム用端末装置
は、仮想的な会議を行うための仮想会議室を表示すると
共に該会議への出席者を表すアニメーションキャラクタ
を該仮想会議室内に表示するための表示手段と、自己の
アニメーションキャラクタの動作を指示するための指示
手段と、前記指示手段で指示された自己のアニメーショ
ンキャラクタの動作情報を出力する情報出力手段と、入
力された他のアニメーションキャラクタの動作情報に応
じて他のアニメーションキャラクタを動作させると共
に、前記指示された動作に応じて自己のアニメーション
キャラクタを動作させるキャラクタ制御手段と、を備え
ている。

【０００６】請求項２に記載の発明の仮想会議システム
用端末装置は、仮想的な会議を行うための仮想会議室を
表示すると共に該会議への出席者を表すアニメーション
キャラクタを該仮想会議室内に表示するための表示手段
と、自己のアニメーションキャラクタの動作を指示する
ための指示手段と、前記指示手段で指示された自己のア
ニメーションキャラクタの動作情報を出力する情報出力
手段と、入力された他のアニメーションキャラクタの動
作情報と指示された自己のアニメーションキャラクタの
動作情報とに基づいて動作させるアニメーションキャラ
クタを判断しかつ判断されたアニメーションキャラクタ
に動作の権利を割り当てる管理手段と、入力された他の
アニメーションキャラクタの動作情報及び指示された自
己のアニメーションキャラクタの動作情報の少なくとも
一方に応じて、前記権利が割り当てられたアニメーショ
ンキャラクタを動作させるキャラクタ制御手段と、を備
えている。

【０００７】請求項３に記載の発明の仮想会議システム
用端末装置は、仮想的な会議を行うための仮想会議室を
表示すると共に該会議への出席者を表すアニメーション
キャラクタを該仮想会議室内に表示するための表示手段
と、自己のアニメーションキャラクタの動作を指示する
ための指示手段と、前記指示手段で指示された自己のア
ニメーションキャラクタの動作情報を出力する情報出力
手段と、入力された他のアニメーションキャラクタの動
作情報に応じて他のアニメーションキャラクタを動作さ
せると共に、出力した動作情報に対応する許可情報が入
力されたときに指示された動作に応じて自己のアニメー
ションキャラクタに動作させるキャラクタ制御手段と、
を備えている。

【０００８】請求項４に記載の発明の仮想会議システム
は、請求項１または２に記載の仮想会議システム用端末
装置を複数個動作情報が入力可能に接続している。

【０００９】請求項５に記載の発明の仮想会議システム
は、請求項３に記載の仮想会議システム用端末装置を複
数個集中制御装置に接続し、集中制御装置は入力された
動作情報に応じて動作させるアニメーションキャラクタ
を判断しかつ判断されたアニメーションキャラクタに対
応する仮想会議システム用端末装置に許可情報を出力し
ている。

【００１０】請求項６に記載の発明の仮想会議システム
用端末装置は、仮想的な会議を行うための仮想会議室を
表示すると共に該会議への出席者を表すアニメーション
キャラクタを該仮想会議室内に表示するための表示手段
と、自己のアニメーションキャラクタの動作を指示する
ための指示手段と、入力された音声を自己のアニメーシ
ョンキャラクタの音声情報に変換して前記指示手段で指
示された自己のアニメーションキャラクタの動作情報と
共に出力する情報出力手段と、入力された他のアニメー
ションキャラクタの動作情報に基づいて音声を発生する
か否かを判断し、音声を発生するときには音声情報に基
づいて音声を出力する音声出力手段と、入力された他の
アニメーションキャラクタの動作情報に応じて他のアニ
メーションキャラクタを動作させると共に、前記指示さ
れた動作に応じて自己のアニメーションキャラクタを動
作させるキャラクタ制御手段と、を備えている。

【００１１】請求項７に記載の発明の仮想会議システム
は、請求項６に記載の仮想会議システム用端末装置を複
数個音声情報及び動作情報が入力可能に接続している。

【００１２】

【作用】請求項１に記載の発明の仮想会議システム用端
末装置は、表示手段、指示手段、情報出力手段及びキャ
ラクタ制御手段から構成されている。表示手段には、仮
想的な会議を行うための仮想会議室が机等の備品と共に
表示されかつ、この仮想会議室内に会議への出席者を表
す自己及び他のアニメーションキャラクタが表示され
る。この表示された自己のアニメーションキャラクタ
は、指示手段により発言の挙手や移動等の動作が指示さ
れる。指示された自己のアニメーションキャラクタの動
作情報は情報出力手段により出力される。上記表示手段
に表示された他のアニメーションキャラクタは、入力さ
れる他のアニメーションキャラクタの動作情報に応じて
動作するようにキャラクタ制御手段によって制御され
る。また、キャラクタ制御手段は、指示された動作に応
じて自己のアニメーションキャラクタが動作するように
制御する。

【００１３】この仮想会議システム用端末装置の複数個
を、請求項４に記載の発明のように、動作情報が入力可
能に接続して仮想会議システムを構成する。従って、自
己及び他の仮想会議システム用端末装置の間や他の仮想
会議システム用端末装置における相互間では、各仮想会
議システム用端末装置の動作情報が入出力される。これ
により、議事に関する発言を要求するための挙手や会議
室内におけるアニメーションキャラクタの移動等を動作
させるために、操作者が自己のアニメーションキャラク
タを指示した動作情報は、接続されている各他の仮想会
議システム用端末装置に出力される。また、他の仮想会
議システム用端末装置の操作者が対応する他のアニメー
ションキャラクタを指示した動作情報は、接続されてい
るこの他の各仮想会議システム用端末装置に出力される
と共に自己の仮想会議システム用端末装置に入力され
る。従って、自己の仮想会議システム用端末装置及び他
の仮想会議システム用端末装置の各々の表示手段の仮想
会議室内には、同一の会議状態のアニメーションキャラ
クタ、すなわち、議事に関する発言の挙手や会議室内を
移動する状態等の各操作者が意図する会議状態に対応し
て動作する各アニメーションキャラクタが表示される。
このように、各々の操作者は仮想会議システム用端末装
置を用いて表示手段に表示された仮想会議室内の各々の
操作者に対応するアニメーションキャラクタを、会議の
状態に応じて動作させることができるので、各操作者の
意図する会議の状態が反映された仮想的な会議を進行す
ることができる。

【００１４】また、請求項２に記載の仮想会議システム
用端末装置は、請求項１で説明したのと同様の表示手
段、指示手段及び情報出力手段を有し、管理手段及びキ
ャラクタ制御手段を備えて構成されている。管理手段
は、入力された他のアニメーションキャラクタの動作情
報と指示された自己のアニメーションキャラクタの動作
情報とに基づいて動作させるアニメーションキャラクタ
を判断しかつ判断されたアニメーションキャラクタに動
作の権利を割り当てる。キャラクタ制御手段は、入力さ
れた他のアニメーションキャラクタの動作情報及び指示
された自己のアニメーションキャラクタの動作情報の少
なくとも一方に応じて、権利が割り当てられたアニメー
ションキャラクタを動作させる。

【００１５】この請求項２の仮想会議システム用端末装
置の複数個を、上記請求項１で説明したように動作情報
が入力可能に接続して仮想会議システムを構成すること
によって、各々の仮想会議システム用端末装置では優先
順や予め定められた出席者の順位等に基づいて動作させ
る必要があると判断されて動作の権利が割り当てられた
アニメーションキャラクタが動作する。従って、動作と
して例えば、議事に関する発言等が複数の操作者から要
求された場合に、発言が重複することなく、発言権が割
り当てられて円滑に会議を進行することができる。

【００１６】更に、請求項３に記載の発明の仮想会議シ
ステム用端末装置は、入力された他のアニメーションキ
ャラクタの動作情報に応じて他のアニメーションキャラ
クタを動作させると共に、出力した動作情報に対応する
許可情報が入力されたときに指示された動作に応じて自
己のアニメーションキャラクタに動作させるキャラクタ
制御手段、請求項１で説明したのと同様の表示手段、指
示手段及び情報出力手段から構成されている。

【００１７】この請求項３の仮想会議システム用端末装
置の複数個を、請求項５に記載したように、集中制御装
置に接続して仮想会議システムを構成する。集中制御装
置には、接続された１または複数の仮想会議システム用
端末装置から例えば議事に関する発言等の動作情報が入
力される。この集中制御装置は入力された動作情報に対
応する仮想会議システム用端末装置の優先順や予め定め
られた出席者の順位等に基づいて動作させるアニメーシ
ョンキャラクタを判断しかつ判断されたアニメーション
キャラクタに対応する仮想会議システム用端末装置に許
可情報を出力する。従って、動作を指示した仮想会議シ
ステム用端末装置では、集中制御装置から許可情報が入
力されると、出力した動作情報に対応する許可情報が入
力されたときに指示した動作に応じて自己のアニメーシ
ョンキャラクタに動作させる。また、入力された他のア
ニメーションキャラクタの動作情報に応じて他のアニメ
ーションキャラクタを動作させる。これによって、各仮
想会議システム用端末装置が指示した動作の権利は集中
制御装置で管理される。

【００１８】ここで、会議を進行するときには、出席者
の発言等の音声による意思表示や出席者同士による秘話
等の音声発生の状態が生じる。

【００１９】そこで、請求項６に記載の発明の仮想会議
システム用端末装置は情報出力手段を備え、この情報出
力手段は入力された音声を自己のアニメーションキャラ
クタの音声情報に変換して指示手段で指示された自己の
アニメーションキャラクタの発表や秘話等の動作情報と
共に出力する。音声出力手段は、入力された他のアニメ
ーションキャラクタの発表や秘話等の動作情報に基づい
て音声を発生するか否かを判断し音声を発生するときに
は音声情報に基づいて音声を出力する。キャラクタ制御
手段は、入力された他のアニメーションキャラクタの発
表や秘話等の動作情報に応じて他のアニメーションキャ
ラクタを動作させると共に、指示された動作に応じて自
己のアニメーションキャラクタを動作させる。この発表
や秘話等の動作情報としての音声発生の状態に対応する
アニメーションキャラクタの動作には例えば口の部分を
変化させることがある。

【００２０】この請求項６に記載の発明の仮想会議シス
テム用端末装置を複数個、請求項７に記載したように、
請求項６に記載の仮想会議システム用端末装置を複数個
音声情報及び動作情報が入力可能に接続することによっ
て、各々の仮想会議システム用端末装置では操作者が音
声を入力したときに対応する自己のアニメーションキャ
ラクタの例えば口の部分が話すように動作すると共に、
この話すように動作する自己のアニメーションキャラク
タは、他の仮想会議システム用端末装置においても動作
する。また、この話言葉の内容は、指示された自己のア
ニメーションキャラクタの発表や秘話等の動作情報に応
じて、例えば対象となる出席者のみや全員に聴取できる
ように各仮想会議システム用端末装置へ出力される。従
って、秘話しているときは、対象となる操作者間では会
話ができ、かつその状態を他の操作者に分かるようにア
ニメーションキャラクタを動作することができ、また、
他の端末間で秘話がされているときは、秘話しているア
ニメーションキャラクタ間の口の部分のみが動作し、音
声は聞こえない。これにより、操作者が発した音声に応
じて、アニメーションキャラクタを動作できかつ音声の
内容は操作者が意図する状態でのみ他の操作者に伝達す
ることができる。このため、会議に出席している出席者
間の会話や発言等の音声発生の状態に応じて表示画面と
音声とにより表現することができ、会議室の雰囲気に則
して会議を進行することができる。

【００２１】

【実施例】以下、図面を参照して、本発明の実施例を詳
細に説明する。第１実施例の仮想会議システム１０は、
図１に示したように、デジタル信号が送受信可能なリン
グ状のネットワーク１２とこのネットワーク１２に接続
されたＫ（Ｋは自然数）台のユーザー端末装置１６₁〜
１６_Kとから構成されている。この仮想会議システム１
０では、ネットワーク１２上を転送データ（表１）が伝
送される。このユーザー端末装置１６₁〜１６_Kの各々
は、操作者１８₁〜１８_Kによって操作される。なお、
ネットワーク１２は、上記ネットワーク（イーサネッ
ト、トークンリングネットワーク等）に限定されるもの
ではなく、公衆電話回線網、ＩＳＤＮ等のネットワー
ク、及びこれらの組合せでもよい。

【００２２】図２に示したように、ユーザー端末装置１
６_i（ｉ：１≦ｉ≦Ｋ）は、パーソナルコンピュータ
（以下、ＰＣという）２２_i、ディスプレイ２４_i、キ
ーボード２６_i、マウス２８_i、マイクロフォン３
０_i、及び１組のスピーカ３２_iから構成されている。
このマイクロフォン３０_i及び１組のスピーカ３２
_iは、電話等のヘッドセットや送受話器に置き換えるこ
とができる。また、１組のスピーカ３２_iは、左右でス
テレオ効果を出すようにすることや多チャンネル再生時
には３台以上のスピーカを用いてもよく、モノラル再生
のときは１つのスピーカのみでもよい。上記構成の他
に、デジタイザ、プリンタ、スキャナ等の入出力装置を
接続してもよい。

【００２３】図３には、ＰＣ２２_iの内部構成の概略を
機能毎のブロック図として示した。ＰＣ２２_iは、他の
ＰＣ_j（ｊ：１≦ｊ≦Ｋ，ｉ≠ｊ）と相互にデータ等を
通信するための通信制御部４０_i、複数ユーザー端末装
置間上で生成される仮想会議室（以下、会議室という）
の生成終了や出席者の入退室等の会議運営を制御するた
めの会議制御部４２_i、及び会議室の全景が表示された
仮想会議室ウインドウ６２（図５参照）の制御と仮想会
議室ウインドウ６２に各操作者を表すアニメーションキ
ャラクタ（以下、エージェントという）の表示等を制御
するためのエージェント制御部４４_iから構成されてい
る。また、ＰＣ２２_iは、マイクロフォン３０_iからの
音声をデジタル信号に変換するための音声入力処理部４
６_i及び他のＰＣ_j（ｊ：１≦ｊ≦Ｋ，ｉ≠ｊ）から入
力されるデジタル音声信号をアナログ信号に変換するた
めの音声出力処理部４８_iを有し、かつ会議室内におい
て出席者が共有する共有黒板等へ文字や図形の書込消去
等のためのプログラムが記憶された共有アプリケーショ
ン部５０_iを有している。

【００２４】上記通信制御部４０_iは、ネットワーク１
２に接続されると共に、会議制御部４２_i、エージェン
ト制御部４４_i、共有アプリケーション部５０_i、音声
入力処理部４６_i及び音声出力処理部４８_iに接続され
ている。この会議制御部４２ _iは共有アプリケーション
部５０_i、エージェント制御部４４_i、音声入力処理部
４６_i及び音声出力処理部４８_iに接続されている。ま
た、通信制御部４０_iは、共有アプリケーション部５０
_iに接続されている。この共有アプリケーション部５０
_iには、ディスプレイ２４_i、キーボード２６_i及びマ
ウス２８_iに接続されており、これらディスプレイ２４
_i等はエージェント制御部４４_iにも接続されている。
エージェント制御部４４_iは、音声入力処理部４６_i及
び音声出力処理部４８_iに接続されており、音声入力処
理部４６_iにはマイクロフォン３０_iが接続され音声出
力処理部４８_iにはスピーカ３２_iが接続されている。

【００２５】上記ＰＣの各制御部間、及びユーザー端末
装置間とは、以下の表１に示したフォーマットの転送デ
ータが授受される。

【００２６】

【表１】

【００２７】この転送データは、後述するように識別部
であるＩＤ部及び転送データが示す内容であるデータ部
から構成される。ＩＤ部は、転送データの送り元のユー
ザー端末装置を示す送り元装置ＩＤ、転送データの送り
先のユーザー端末装置を示す送り先ＩＤ、及び転送デー
タが適用されるユーザー端末装置の制御部を示す制御部
ＩＤから順に構成されている。また、データ部は各制御
部毎の特有のデータとしてＰＣ２２_iが有する各制御部
毎に生成される特有なデータが格納される。

【００２８】各制御部毎の特有のデータの例としては、
エージェント制御部４４_iから送出されるデータは、エ
ージェントについての位置、顔の向き、口の開閉、及び
挙手等の状態を表すデータがある。なお、エージェント
制御部４４_iには、音声入力処理部４６_iから入力され
る音声の大きさに応じてエージェントの口が開閉するよ
うに制御するための信号が入力される。

【００２９】また、会議制御部４２_iから出力される転
送データの特有のデータとしては、会議への参加（出
席）、会議からの離脱、操作権の要求、及び操作権の許
可等を表すデータがある。また、音声入力処理部４６_i
から出力される転送データの特有のデータとしては、マ
イクロフォン３０_iにより入力された音声がデジタル化
や圧縮化された音声データがある。

【００３０】次に、本実施例の作用を説明する。ユーザ
ー端末装置の操作者が図示しない会議を行うための処理
メニューを選択すると、図４に示したように、操作者１
８_iが使用するユーザー端末装置１６_iのディスプレイ
２４_iの表示画面６０上には、会議室の全景を表す仮想
会議室ウインドウ６２が開かれる。また、この表示画面
６０上には、現在開催されている会議の一覧を表示した
会議室一覧ウインド６４や、それらの会議に出席が許可
された操作者を表すアニメーションキャラクタを並べた
会議出席可能者のリストを表す会議参加者ウインドウ６
６が表示されている。

【００３１】なお、上記各ウインドウ上に表示された
（例えば、操作者等を表す）絵柄の像付近は処理に応じ
て対象を選択するとき等にマウス２８_iで指示するため
の指示入力部位を兼ねており、以下、これらの絵柄をア
イコンという。このアイコンは、マウスマウス２８_iに
よってクリックする選択指示やダブルクリックする指示
実行及び選択状態のアイコンの移動（以下、ドラッグと
いう）に用いられる。

【００３２】また、会議参加者ウインドウ６６には、ネ
ートワーク１２に接続されているユーザー端末装置等の
全ての操作者を会議出席可能者として表示させたり、会
議の種類やアプリケーションに応じて選択的に許可者の
みを表示させたりしてもよく、その旨の記載事項をアイ
コンに付与するようにしてもよい。

【００３３】上記仮想会議室ウインドウ６２には、図５
に示したように、机、共有黒板、チョーク、マイク及び
演壇等の会議運営のために用いられる備品を表すオブジ
ェクト及び、ネットワーク１２に接続されたユーザー端
末装置１６₁、１６₂、・・１６_kを操作しかつ現在会
議に出席している操作者（出席者）１８₁、１８₂、・
・１８_kを表わす全てのエージェント２０₁、２０₂、
・・２０_kが表示される（詳細後述）。

【００３４】次に、会議を実際に開催しようとするとき
は、会議室一覧ウインドウ６４において新規会議室のア
イコンをダブルクリックすることやキーボード２６_iに
よる指示でメニュー（図示省略）から選択する。これに
よってエージェント制御部４４_iは、会議開催要求を表
すデータを有する転送データを会議制御部４２_iに伝送
する。このエージェント制御部４４_iは、ディスプレイ
２４_iの表示画面６０上の仮想会議室ウインドウ６２と
仮想会議室ウインドウ６２中に表示されるエージェント
及び机やマイク等の会議時に用いられる備品の表示を制
御する。この表示には、エージェント及び備品の移動動
作（後述）を含んでいる。

【００３５】会議制御部４２_iでは、エージェント制御
部４４_iから転送データが入力されると、新規会議を１
個生成してユーザー端末装置１６_iに登録する。更に、
この操作者１８_iを当会議の出席者に設定して、出席要
求を表すデータを有する転送データをエージェント制御
部４４_iへ送出する。この結果、会議室を表示する仮想
会議室ウインドウ６２が開かれ、操作者１８_i本人を表
すエージェント２０_iが仮想会議室ウインドウ６２中に
表示される。

【００３６】この会議制御部４２_iは、会議の生成や削
除の要求を処理したり、エージェント制御部４４_iから
送信される発言権の要求（後述）を受けて他のユーザー
端末装置の会議制御部４２_jと連絡してその要求の受理
を処理したりすることや、会議への新規の出席及びアプ
リケーションの操作権を有する操作者が入替等のデータ
をエージェント制御部４４_iや共有アプリケーション部
５０_iに行って各々同期的に同一内容を維持するように
処理する。

【００３７】次に、開催した会議に他の操作者１８_jを
出席させるためには、会議参加者ウインドウ６６から出
席を要請する操作者１８_jを表すアイコンをマウス２８
_iでドラッグして、仮想会議室ウインドウ６２内に移動
する。このドラッグによりエージェント制御部４４
_iは、対応するユーザー端末装置１６_jのエージェント
制御部４４_jに対して、通信制御部４０_i及びネットワ
ーク１２を介して出席要求を含む転送データを送出す
る。出席要請されたユーザー端末装置１６_jでは、エー
ジェント制御部４４_jが出席するか否かの判断を求める
出席要請ウインドウ（図示省略）を、ユーザー端末装置
１６_jのディスプレイ２４_j上に表示する。

【００３８】他の操作者１８_jへ出席要請時の出席要請
側のユーザー端末装置１６_iでは、他の操作者１８_jが
出席を拒否するデータがエージェント制御部４４_iに返
送されるまたは他の操作者１８_jがユーザー端末装置１
６_jの未操作または不在のために応答がない場合（タイ
マー等による所定時間経過後）には、上記出席手続を打
ち切る。

【００３９】他の操作者１８_jが出席を承諾した場合に
は、出席を要請したユーザー端末装置１６_iのエージェ
ント制御部４４_iへ出席承諾を表すデータを含む転送デ
ータが返送される。その場合、要請側のエージェント制
御部４４_iは会議制御部４２ _iへ新規な操作者が会議に
出席する旨のデータを有する転送データを送出する。こ
れにより、会議制御部４２_iでは、転送データをエージ
ェント制御部４４_i及びアプリケーション部５０_iへ送
出する。アプリケーション部５０_iは、新規に出席する
操作者１８_jのユーザー端末装置１６_jで同一内容のア
プリケーションが立ち上がるように必要なデータ等の転
送処理を行う。また、会議制御部４２_iは、新規操作者
を表すエージェント２０_jが会議室内に追加されるよう
にエージェント制御部４４_iへ転送データを送出する。

【００４０】次に、操作者１８_iが出席を許可されか
つ、既に開催されている会議に出席するときは、開催さ
れている会議を表すアイコンが、会議室一覧ウインドウ
６４（図４参照）の中に表示されているので、そのアイ
コンをダブルクリックする。これにより、上記説明した
ように出席を承諾したときと同様の手続が開始されて、
操作者１８_iのエージェント２０_iが既開催の会議室内
に加わることとなる。

【００４１】会議室内で、所謂上座で発言するときのよ
うに操作者１８_iのエージェント２０_iを移動させるた
めには、仮想会議室ウインドウ６２内のエージェント２
０_iをドラッグする。このドラッグの押圧を目的地点ま
で継続している間は、エージェントの足のパターンが交
互に動作して実際に歩行しているようなアニメーション
の表現がなされる。この動作の状態及び位置等のデータ
は、エージェント制御部４４_iから通信制御部４０_iを
介して全ての会議出席者のユーザー端末装置へ送出さ
れ、各ユーザー端末装置のディスプレイ上で同様にエー
ジェント２０_iの位置及び足のパターンが変化する。

【００４２】また、エージェント２０_iの新しい位置
（目的地点）のデータは、音声出力処理部４８_iに伝送
され、仮想会議室ウインドウ６２内に表示されている他
のエージェントとの新しい位置関係（距離）に応じた聞
こえ方（音声の大きさやバランス）をするような音声処
理がなされる。なお、物理的な位置関係による処理だけ
でなく、例えば、図６に示したようにエージェント２０
₄とエージェント２０₅が重ねられた場合には、秘話モ
ードとして各々のエージェント間の位置とは関係がなく
２つのエージェント２０₄、２０₅の間でだけしか音声
が聞こえなくなる処理もできる。この場合、エージェン
ト２０₄、２０₅の口の部分が動くので、他の出席者に
は会話の内容は分からないが、秘話を行っていることは
理解される。

【００４３】操作者１８_iが発言すると、音声入力処理
部４６_iにより、発言状態が検出される。例えば、音声
の大きさを測定してそれを随時エージェント制御部４４
_iに送出する。音声出力処理部４８_iでは、他の操作者
１８_jのユーザー端末装置１６_jから送信された音声デ
ータをエージェント制御部４４_iでの各エージェントの
位置関係や秘話状態の有無に応じて、操作者１８_iにと
って他の操作者_jの音声の大きさや左右の方向性が適切
になるように合成処理を行ってスピーカ３２_iから出力
する。

【００４４】エージェント制御部４４_iでは、音声の入
力に応じて、例えば、音量が大きいときには、口を大き
く開けたパターンにエージェント２０_iを変化させる
（図６のエージェント２０₇参照）。この変化は、他の
全ての出席者のユーザー端末装置へも送出される。この
結果、発言している操作者１８_iのエージェント２０_i
の口の部分が開閉して発言を行っていることを示すアニ
メーション効果が表示される。

【００４５】会議中におけるエージェント２０_iは、キ
ーボード２６_iやマウス２８_iの操作によって、図６に
示したように挙手した状態を表現するようなパターンに
変化させることができ、この挙手により発言の要求を示
したり、議題に対する賛意を表明したりすることができ
る。また、この挙手状態のデータは音声出力処理部４８
_iに送出される。この結果、挙手した出席者の音声は、
物理的な位置とは関係なく、他の出席者全員に一律の大
きな音声で聞こえるように処理される。

【００４６】なお、上記説明した移動、挙手、秘話によ
るエージェント２０_iのパターン変化の他の例として
は、入退室、うなずき、及び方向転換等の議事進行時に
おいて発生し得る意思表示や行動を表現できる。

【００４７】次に、共有アプリケーション部５０_iの処
理の１例を説明する。共有黒板９８や共有スプレッドシ
ート等の共有アプリケーション部５０_iの操作権は、予
め登録した表現方法で会議室中に表示できる。例えば、
共有黒板９８に対して、その操作権を会議室内のチョー
ク９９に予め関連させておく（図５参照）。操作者１８
_iは、チョーク９９を選択、例えば、マウスのダブルク
リックによって操作権を要求する。この要求は、転送デ
ータとしてエージェント制御部４４_iから会議制御部４
２_iに送出され、会議制御部４２_iは、その会議内の全
ての出席者のユーザー端末装置上の会議制御部へ合意を
求めるデータを送出する。会議制御部４２_iでは、他の
会議制御部から送出される合意の判断データから多数決
や全員一致等の基準により操作権要求の許諾を決定す
る。この決定は、他の各会議制御部においても処理され
る。操作権要求を許諾する決定がなされたときは、会議
制御部４２_iは、共有黒板の操作権の要求を許諾するデ
ータをエージェント制御部４４_i及び共有黒板のアプリ
ケーションへ送出する。

【００４８】ここで、上記会議を進行する上で、共有ア
プリケーションの操作権の衝突がある。上記共有黒板の
例では、複数の操作者が同時に共有黒板の操作権を要求
することによって共有黒板の操作権の衝突がある。この
場合、適宜（例えば、先着順等により）、操作権許諾の
優先度を割り振ることにより、操作権の許諾に順番待ち
させるようにする。この操作権許諾を表すデータ及び操
作権許諾の順番待ちを表すデータは、許諾及び順番待ち
の各操作者のエージェント制御部及び共有黒板９８に対
して送出される。これらのデータにより、エージェント
制御部では、許可された操作者に対してはチョーク９９
を掴んだようにエージェントの表示を変化させたり、待
たされた操作者に対してはチョーク９９のあるところの
横にエージェントを移動させて待っているという表示を
行う。また、共有黒板９８に関するアプリケーションプ
ログラムでは、誤入力を防ぐために、許諾された操作者
のキーボードとマウスの入力を可能にし、許諾者以外の
操作者の入力を不可能にするデータを送出する。

【００４９】上記の他に、議長席、発言席、マイクロフ
ォン等の制御がある。いずれの場合も、１人または予め
設定された人数がこの場所を占有することができ、この
占有可能な権利が操作権に相当し、上記で説明したよう
な機構で割り当てられる。この議長席、発言席、マイク
ロフォンを占有した操作者の音声は、上記のように挙手
による発言と同様に、他の出席者全員に大きな音声で伝
送される。

【００５０】上記説明した操作権の衝突についての他の
例を、図７を参照して説明する。図７は、朝礼等のよう
に発言者が１人であるべき定形的な会議を表す仮想会議
室ウインドウ６３を示している。この会議室に１人のみ
が位置することができる演壇３６を設け、この演壇３６
に位置したエージェント２０₁に対応する操作者のみの
音声が会議に出席した全員の操作者に伝達されるように
設定する。これによって、議事進行の発言衝突を回避で
きる。また、上記で説明した複数の操作者が発言を行う
ときの順序は、操作者が発言する順序を表すデータを待
ち行列として、この場合、エージェント２０₂、２０₃
を表しかつ順序を表すデータを送出するようにする。こ
れによって、仮想会議室ウインドウ６３には、発言者及
び順番待ちのエージェントが視覚的に対応するように表
示される。

【００５１】以上説明したように、本実施例では、ネッ
トワークによって接続された各ユーザー端末装置におい
て、会議の出席者及び会議室の備品等の環境を操作者を
表すエージェント及び表示データによって表示している
ため、画像データを伝送するようにデータ量が膨大にな
ることがなく、通信負荷が軽減される。また、議事進行
時において発生し得る意思表示や行動を、エージェント
のパターン変化によって実現できるため、このパターン
変化に対応するデータの入出力のみによって、実際に会
議する時の出席者を招集したときと同様の状況による会
議を進行することができる。また、データ量が軽減され
るため、リアルタイムで会議を進行できる。

【００５２】次に、第２実施例を説明する。なお、本実
施例は、上記第１実施例と同様のため、同一部分には同
一符号を付して詳細な説明は省略し、以下、異なる部分
を説明する。本実施例の仮想会議システム１０は、図８
に示したように、ネットワーク１２に接続された集中制
御装置１７及びＬ（Ｌは自然数）台のユーザー端末装置
１６₁〜１６_Lから構成されている。図９に示したよう
に、ユーザー端末装置１６_i（ｉ：１≦ｉ≦Ｌ）のＰＣ
２２ _iは、通信制御部４０_i、エージェント制御部４５
_i、音声入力処理部４７_i、音声出力処理部４９_i、及
び共有アプリケーション部５０_iから構成されている。
通信制御部４０_iは、ネットワーク１２に接続されると
共に、エージェント制御部４５_i、音声入力処理部４７
_i、音声出力処理部４９_i及び共有アプリケーション部
５０_iに接続されている。本実施例では、集中制御装置
１７によって仮想会議を運営するため、会議制御部が削
除されかつ、音声入力処理部４７_i及び音声出力処理部
４９_iは単に入力された音声信号をデジタル変換及びデ
ジタル入力された音声信号をアナログ変換の処理のみで
よい。

【００５３】図１０に示したように、集中制御装置１７
は、通信制御部４０Ｃ、会議制御部４２Ｃ、エージェン
ト制御部４４Ｃ、音声制御部４６Ｃ、及び共有アプリケ
ーション部５０Ｃから構成されている。通信制御部４０
Ｃは、ネットワーク１２に接続されると共に、会議制御
部４２Ｃ、エージェント制御部４４Ｃ、音声制御部４６
Ｃ及び共有アプリケーション部５０Ｃに接続されてい
る。また、会議制御部４２Ｃは、エージェント制御部４
４Ｃ、音声制御部４６Ｃ、及び共有アプリケーション部
５０Ｃに接続されている。

【００５４】このエージェント制御部４４Ｃは、ディス
プレイや入出力装置に対する直接制御することなくエー
ジェントの位置やパターン等の状態の内部データのみを
扱う。エージェントの位置変更時には、このデータを音
声制御部４６Ｃへ送出する。また、会議制御部４２Ｃ及
び共有アプリケーション部５０Ｃは、第１実施例で説明
した会議制御部４２_i及び共有アプリケーション部５０
_iと同様のため、説明を省略する。また、エージェント
制御部４４Ｃ及び共有アプリケーション部５０Ｃは、会
議制御部４２Ｃから入力される転送データにより各ユー
ザー端末装置にデータを送出する。音声制御部４６Ｃで
は、エージェントの位置関係や状態（例えば、秘話）に
応じて各々の操作者に対する音声の合成及び音量調整を
行われ、各ユーザー端末装置にデータを送出すると共
に、音量レベルに応じてエージェントのパターンを変化
させるためのデータをエージェント制御部４４Ｃへ送出
する。

【００５５】なお、集中制御装置１７は、ＰＣ２３が第
１実施例で説明したＰＣ２２の各制御部の機能を有しか
つマイク等の入出力装置が接続可能にすることによって
ユーザー端末装置として作動させることができる。

【００５６】上記転送データは、第１実施例と同様のフ
ォーマット（表１参照）で生成されるが、各ユーザー端
末装置に会議制御部が含まれないため、会議制御部に対
応する固有のデータは省略される。また、集中制御装置
１７から送出される転送データには、音声制御部４６Ｃ
において合成等の処理されたデータが固有のデータとし
て格納される。

【００５７】このように、本実施例では、集中制御装置
が接続されたネットワークにより仮想会議を進行させる
ため、音声データとして必要とされる音声パケットの総
量が減少できる。すなわち、第１実施例ではｎ台のユー
ザー端末装置が接続されたネットワーク上で、１つのユ
ーザー端末装置から送出される転送データは、他の全て
のユーザー端末装置に送出される。従って、ｎ台のユー
ザー端末装置の操作者が同時に会話を行うときは、ｎ
（ｎ−１）個の音声パケットが生じる。これに対して本
実施例では、集中制御装置１７に音声の転送データが入
力されたのち、合成処理等の終了した音声データが送出
されるため、２ｎ個の音声パケットのみでよいことにな
る。

【００５８】次に、第３実施例を説明する。本実施例
は、上記実施例と同様のため、同一部分には同一符号を
付して詳細な説明は省略し、以下、異なる部分を説明す
る。本実施例の仮想会議システム１０は、図１１に示し
たように、ネットワーク１２及び音声ネットワーク１３
に接続された集中制御装置１７及びＭ（Ｍは自然数）台
のユーザー端末装置１６₁〜１６_Mから構成されてい
る。

【００５９】図１２に示したように、本実施例のユーザ
ー端末装置１６_i（ｉ：１≦ｉ≦Ｍ）のＰＣ２２_iは、
通信制御部４０_i、エージェント制御部４５_i、増幅装
置５２_i、５４_i、及び共有アプリケーション部５０_i
から構成されている。なお、増幅装置５２_i、５４_iを
ＰＣ２２_iから分離して独立した装置としてもよい。ネ
ットワーク１２は通信制御部４０_iを介してエージェン
ト制御部４５_i及び共有アプリケーション部５０_iに接
続され、音声ネットワーク１３は増幅装置５２ _i、５４
_iに接続されている。

【００６０】図１３に示したように、集中制御装置１７
は、通信制御部４０Ｃ、会議制御部４２Ｃ、エージェン
ト制御部４４Ｃ、共有アプリケーション部５０Ｃ、及び
音声検出装置５７と音声混合装置５８とを有する音声制
御装置５６から構成されている。通信制御部４０Ｃは、
ネットワーク１２に接続されると共に、会議制御部４２
Ｃ、エージェント制御部４４Ｃ、及び共有アプリケーシ
ョン部５０Ｃに接続され、会議制御部４２Ｃは、エージ
ェント制御部４４Ｃ、及び共有アプリケーション部５０
Ｃに接続されている。音声制御装置５６は、音声混合装
置５８が音声ネットワーク１３に接続されると共に音声
検出装置５７、会議制御部４２Ｃ及びエージェント制御
部４４Ｃに接続され、音声検出装置５７がエージェント
制御部４４Ｃに接続されている。

【００６１】この音声混合装置５８は、各ユーザー端末
装置からの多チャンネルの音声信号を混合して出力す
る。例えば、ｎ個のユーザー端末装置から音声信号が入
力されると各々の操作者が会議室で聴取すべき音場に混
合し、２ｎチャンネル（モノラルの場合は、ｎチャンネ
ル）の出力を各ユーザー端末装置へ送出する。この聴取
すべき音場に混合する場合の混合比は、エージェント制
御部４４Ｃ及び会議制御部４２Ｃによって制御される。
また、音声検出装置５７は、各ユーザー端末装置から送
出された音声信号の音量を計測し、その結果をエージェ
ント制御部４４Ｃに送出する。

【００６２】このように、本実施例では、デジタル信号
と音声信号とを分離して、各々に対応するネットワーク
により仮想会議を進行させるため、音声は独立してデー
タの授受を行うことができ、ユーザー端末装置及び集中
制御装置のデジタル変換等の負荷を軽減することができ
る。

【００６３】次に、第４実施例を説明する。本実施例
は、音声による電話会議に本発明を適用した例である。
なお、本実施例は、上記実施例と略同様のため、同一部
分には同一符号を付して詳細な説明は省略し、以下、異
なる部分を説明する。本実施例の仮想会議システム１０
は、図１４に示したように、公衆電話回線網等の電話回
線（本実施例では、ＩＳＤＮ回線網１４を用いてい
る。）によって集中制御装置１７に接続されたＮ（Ｎは
自然数）台のユーザー端末装置１６₁〜１６_Nから構成
されている。

【００６４】図１５に示したように、ユーザー端末装置
１６_i（ｉ：１≦ｉ≦Ｎ）は、電話機７２_i、表示装置
７４_i及びこれらに接続されたＩＳＤＮインタフェース
７６ _iから構成されている。表示装置７４_iは、会議出
席者等を表示するためのものであり、発言状態アイコン
制御装置７８_i及び液晶表示装置８０_iから構成されて
おり（図１６参照）、会議の出席者の名前及び出席者の
発言状態を示すアイコン（本実施例では、表示のみ）を
表示する。なお、このアイコンは、ランプを点灯するよ
うにしてもよく、発言中等の文字を表示するようにして
もよい。また、集中制御装置１７は、音声検出装置５
７、音声混合装置５８及びこれらに接続されたＩＳＤＮ
インタフェース７６Ｃから構成されている（図１７参
照）。

【００６５】なお、ユーザー端末装置１６_iと集中制御
装置１７とは、送話と受話の各々の音声信号が別個に伝
送されるようにしてもよく、同一の回線で同時に伝送さ
れるようにしてもよい。

【００６６】上記ユーザー端末装置１６_iと集中制御装
置１７との間は、以下の表２に示したフォーマットの転
送データによって相互にデータが授受される。

【００６７】

【表２】

【００６８】転送データは、出席者人数ｎ、ｍ番目の出
席者名及びｍ番目の出席者の発言状態フラグから構成さ
れる。このフラグはｍ番目の出席者が発言中のときにセ
ットされかつ未発言のときにリセットされる。例えば、
上記フラグのセットのデータを「１」でかつリセットの
データを「０」としたときに、出席者が６人で４番目の
出席者が発言中の場合の転送データは、６：鈴木，０：
高橋，０：山本，０：山田，１：田中，０：佐藤，０：
となる。各ユーザー端末装置では、この転送データによ
って出席者名一覧と何れの出席者が発言中であるかを表
示することができる。

【００６９】なお、音声検出装置５７は、各ユーザー端
末装置に設けてもよい。この場合、ユーザー端末装置か
ら集中制御装置１７へ各ユーザー端末装置の識別番号と
発言中か否かを示すフラグを送出すればよい。

【００７０】次に、本実施例の作用を説明する。各操作
者は、ユーザー端末装置をＩＳＤＮ回線網１４を介して
集中制御装置１７に接続する。集中制御装置１７は、他
のユーザー端末装置を呼び出したり、接続するのを待っ
たりする。複数のユーザー端末装置が接続され、会議が
開催され、いずれかのユーザー端末装置の操作者が発言
すると、その発言音声の音量が集中制御装置１７の音声
検出装置５７で検出される。集中制御装置１７は、全て
のユーザー端末装置へ上記フォーマット（表２参照）の
転送データを順次送出する。各ユーザー端末装置では、
集中制御装置１７からの転送データに基づいて出席者名
一覧と発言中の出席者のアイコンを発言中であることを
示す状態に表示する。

【００７１】このように、本実施例によれば、会議の出
席者が多数の場合や声を知らない出席者が出席している
場合であっても、発言者が誰であるかを認識することが
でき、会議を進行する上で各出席者は容易に会議の状況
を把握することができる。

【００７２】

【発明の効果】以上説明したように本発明によれば、会
議の出席者に対応するアニメーションキャラクタを表示
手段に表示させ表示されたアニメーションキャラクタを
会議の状況に応じて変化させるため、議事進行に必要な
出席者の意思表示が反映された仮想会議システム用端末
装置を提供することができる、という効果がある。

【００７３】また、本発明の仮想会議システム用端末装
置を複数用いることによって会議の状況に応じて議事進
行に必要な出席者の意思表示がアニメーションキャラク
タに反映され、遠隔地であっても出席者が一同に介して
会議したときと同様に会議を進行する仮想会議システム
を提供することができる、更に、本発明の仮想会議シス
テムによれば、音声情報を用いて音声発生の状態に応じ
てキャラクタを変化させるため、発言等の会議出席者の
状態を他の出席者へ伝達することができる、という効果
がある。

【図面の簡単な説明】

【図１】第１実施例の仮想会議システムを示す概略構成
図である。

【図２】第１実施例の１ユーザー端末装置を示す概略構
成図である。

【図３】第１実施例の１ユーザー端末装置のコンピュー
タ概略内部構成を示すブロック図である。

【図４】１ユーザー端末装置のディスプレイに表示され
る表示画面を示すイメージ図である。

【図５】ユーザー端末装置のディスプレイに表示される
仮想会議室ウインドウを表すイメージ図である。

【図６】仮想会議室ウインドウ内のエージェントの所作
に関するパターンを説明するためのイメージ図である。

【図７】第１実施例の他の仮想会議室ウインドウを表す
イメージ図である。

【図８】第２実施例の仮想会議システムを示す概略構成
図である。

【図９】第２実施例の１ユーザー端末装置の概略構成を
示すブロック図である。

【図１０】第２実施例の集中制御装置を示す概略構成図
である。

【図１１】第３実施例の仮想会議システムを示す概略構
成図である。

【図１２】第３実施例の１ユーザー端末装置の概略構成
を示すブロック図である。

【図１３】第３実施例の集中制御装置を示す概略構成図
である。

【図１４】第４実施例の仮想会議システムを示す概略構
成図である。

【図１５】第４実施例の１ユーザー端末装置を示す概略
構成図である。

【図１６】第４実施例の１ユーザー端末装置の概略構成
を示すブロック図である。

【図１７】第４実施例の集中制御装置を示す概略構成図
である。

【符号の説明】

１０仮想会議システム１２ネットワーク１６₁〜１６_K ユーザー端末装置１８₁〜１８_K 操作者２０₁〜２０_K エージェント

───────────────────────────────────────────────────── フロントページの続き (72)発明者小林真東京都千代田区三番町５−19 日本アイ・ビー・エム株式会社東京基礎研究所内

Claims

(57)【特許請求の範囲】

【請求項１】仮想的な会議を行うための仮想会議室を
表示すると共に該会議への出席者を表すアニメーション
キャラクタを該仮想会議室内に表示するための表示手段
と、自己のアニメーションキャラクタの動作を指示するため
の指示手段と、前記指示手段で指示された自己のアニメーションキャラ
クタの動作情報を出力する情報出力手段と、入力された他のアニメーションキャラクタの動作情報に
応じて他のアニメーションキャラクタを動作させると共
に、前記指示された動作に応じて自己のアニメーション
キャラクタを動作させるキャラクタ制御手段と、を備えた仮想会議システム用端末装置。
【請求項２】仮想的な会議を行うための仮想会議室を
表示すると共に該会議への出席者を表すアニメーション
キャラクタを該仮想会議室内に表示するための表示手段
と、自己のアニメーションキャラクタの動作を指示するため
の指示手段と、前記指示手段で指示された自己のアニメーションキャラ
クタの動作情報を出力する情報出力手段と、入力された他のアニメーションキャラクタの動作情報と
指示された自己のアニメーションキャラクタの動作情報
とに基づいて動作させるアニメーションキャラクタを判
断しかつ判断されたアニメーションキャラクタに動作の
権利を割り当てる管理手段と、入力された他のアニメーションキャラクタの動作情報及
び指示された自己のアニメーションキャラクタの動作情
報の少なくとも一方に応じて、前記権利が割り当てられ
たアニメーションキャラクタを動作させるキャラクタ制
御手段と、を備えた仮想会議システム用端末装置。
【請求項３】仮想的な会議を行うための仮想会議室を
表示すると共に該会議への出席者を表すアニメーション
キャラクタを該仮想会議室内に表示するための表示手段
と、自己のアニメーションキャラクタの動作を指示するため
の指示手段と、前記指示手段で指示された自己のアニメーションキャラ
クタの動作情報を出力する情報出力手段と、入力された他のアニメーションキャラクタの動作情報に
応じて他のアニメーションキャラクタを動作させると共
に、出力した動作情報に対応する許可情報が入力された
ときに指示された動作に応じて自己のアニメーションキ
ャラクタに動作させるキャラクタ制御手段と、を備えた仮想会議システム用端末装置。
【請求項４】請求項１または２に記載の仮想会議シス
テム用端末装置を複数個動作情報が入力可能に接続した
仮想会議システム。
【請求項５】請求項３に記載の仮想会議システム用端
末装置を複数個集中制御装置に接続し、集中制御装置は
入力された動作情報に応じて動作させるアニメーション
キャラクタを判断しかつ判断されたアニメーションキャ
ラクタに対応する仮想会議システム用端末装置に許可情
報を出力する仮想会議システム。
【請求項６】仮想的な会議を行うための仮想会議室を
表示すると共に該会議への出席者を表すアニメーション
キャラクタを該仮想会議室内に表示するための表示手段
と、自己のアニメーションキャラクタの動作を指示するため
の指示手段と、入力された音声を自己のアニメーションキャラクタの音
声情報に変換して前記指示手段で指示された自己のアニ
メーションキャラクタの動作情報と共に出力する情報出
力手段と、入力された他のアニメーションキャラクタの動作情報に
基づいて音声を発生するか否かを判断し、音声を発生す
るときには音声情報に基づいて音声を出力する音声出力
手段と、入力された他のアニメーションキャラクタの動作情報に
応じて他のアニメーションキャラクタを動作させると共
に、前記指示された動作に応じて自己のアニメーション
キャラクタを動作させるキャラクタ制御手段と、を備えた仮想会議システム用端末装置。
【請求項７】請求項６に記載の仮想会議システム用端
末装置を複数個音声情報及び動作情報が入力可能に接続
した仮想会議システム。