JP5217877B2 - 会議支援装置 - Google Patents

Description

本発明は、会議を支援する技術に関する。

通信網を介して接続された複数の通信端末を用いて会議を行う遠隔会議システムが普及している。このような遠隔会議システムにおいて、会議をより好適に行う技術が種々提案されている。例えば、特許文献１には、参加者など画面表示上重要な部分以外に文字情報やアイコンなどをスーパーインポーズすることができるテレビ会議装置が提案されている。
特開２００８−１４７９２１号公報

ところで、遠隔会議システムにおいては、接続される会議端末の数が多いほど、ネットワーク上を伝送するデータ量が多くなり、ネットワークの状況等によってはデータの質が落ちる等の問題があった。ネットワーク上を伝送するデータ量を削減するためには、映像データの解像度を下げる等が考えられるが、この場合は画質が劣化して会議の参加者が会議の状況を把握しづらくなる等の問題があった。
本発明は上述した背景に鑑みてなされたものであり、通信ネットワークを介して遠隔会議を行う際に、ネットワーク上を伝送するデータ量を削減しつつ、参加者が会議の状況を把握しづらくなるのを防ぐことのできる技術を提供することを目的とする。

上記課題を解決するために、本発明は、アイコンを表すアイコンデータ及び前記アイコンと会議の参加者との対応関係を示す対応データを取得する対応データ取得手段と、前記参加者を識別する参加者識別データを取得する参加者識別データ取得手段と、前記参加者識別データ取得手段によって取得された参加者識別データに対応するアイコンデータを、前記対応データ取得手段によって取得された対応データを参照して選択する選択手段と、前記選択手段によって選択されたアイコンデータの示すアイコンを、表示装置の表示領域における予め定められた位置に表示する表示制御手段とを具備することを特徴とする。

本発明の好ましい態様において、前記表示制御手段によって表示されたアイコンのいずれかを、操作手段から出力される信号に応じて指定するアイコン指定手段と、前記アイコン指定手段によって指定されたアイコンに対応する参加者の画像の取得を要求する旨を示す要求データを、通信ネットワークを介して接続された他の端末へ送信するデータ取得要求手段とを具備してもよい。

また、本発明の更に好ましい態様において、前記参加者の画像を表す画像データを受信する画像データ受信手段と、前記画像データ受信手段によって受信された画像データの表す画像を、該画像データに対応するアイコンの近傍に表示する画像表示制御手段とを具備してもよい。

また、本発明の更に好ましい態様において、収音手段から出力される音声信号に応じて、前記参加者が発話しているか否かを判定する話者検出手段と、前記話者検出手段による判定結果が肯定的である場合に、前記参加者の画像を表す画像データを、通信ネットワークを介して接続された他の端末へ送信する画像データ送信手段とを具備してもよい。

また、本発明の更に好ましい態様において、撮影手段から出力される画像データを解析し、解析結果に応じて前記参加者の配置態様を検出する配置対応検出手段を具備し、前記表示制御手段は、前記選択手段によって選択されたアイコンデータの示すアイコンを、前記配置対応検出手段によって検出された配置態様に応じた配置態様で、前記表示装置に表示してもよい。

また、本発明の更に好ましい態様において、前記対応データ取得手段は、通信ネットワークを介して接続された他の端末から、前記アイコンデータ及び前記対応データを取得してもよい。

本発明によれば、複数の通信端末を用いて遠隔会議を行う際に、ネットワーク上を伝送するデータ量を削減しつつ、参加者が会議の状況を把握しづらくなるのを防ぐことができる。

＜構成＞
図１は、この発明の一実施形態である遠隔会議システム１の構成を示すブロック図である。この遠隔会議システム１は、複数の拠点のそれぞれに設置された複数の端末１０ａ，１０ｂ，１０ｃ，１０ｄが、インターネット等の通信ネットワーク２０に接続されて構成される。なお、図１においては４つの端末１０ａ，１０ｂ，１０ｃ，１０ｄを図示しているが、端末の数は４に限定されるものではなく、これより多くても少なくてもよい。また、以下の説明においては、説明の便宜上、端末１０ａ，１０ｂ，１０ｃ，１０ｄを各々区別する必要がない場合には、これらを「端末１０」と称して説明する。遠隔会議の参加者が端末１０を用いて通信を行うことで、遠隔会議が実現される。

図２は、端末１０の構成の一例を示すブロック図である。図において、制御部１１は、ＣＰＵ（Central Processing Unit）やＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）を備え、ＲＯＭ又は記憶部１２に記憶されているコンピュータプログラムを読み出して実行することにより、バスＢＵＳを介して端末１０の各部を制御する。記憶部１２は、制御部１１によって実行されるコンピュータプログラムやその実行時に使用されるデータを記憶するための記憶手段であり、例えばハードディスク装置である。表示部１３は、液晶パネルを備え、制御部１１による制御の下に各種の画像を表示する。操作部１４は、端末１０の利用者による操作に応じた信号を出力する。マイクロホン１５は、収音し、収音した音声を表す音声信号（アナログ信号）を出力する。音声処理部１６は、マイクロホン１５が出力する音声信号（アナログ信号）をＡ／Ｄ変換によりデジタルデータに変換する。また、音声処理部１６は、供給されるデジタルデータをＤ／Ａ変換によりアナログ信号に変換してスピーカ１７に供給する。スピーカ１７は、音声処理部１６から出力されるアナログ信号に応じた強度で放音する。通信部１８は、他の端末１０との間で通信ネットワーク２０を介して通信を行うための通信手段である。撮影部１９は、撮影し、撮影した映像を表す映像データを出力する。

なお、この実施形態では、マイクロホン１５とスピーカ１７とが端末１０に含まれている場合について説明するが、音声処理部１６に入力端子及び出力端子を設け、オーディオケーブルを介してその入力端子に外部マイクロホンを接続する構成としても良い。同様に、オーディオケーブルを介してその出力端子に外部スピーカを接続する構成としてもよい。また、この実施形態では、マイクロホン１５から音声処理部１６へ入力されるオーディオ信号及び音声処理部１６からスピーカ１７へ出力されるオーディオ信号がアナログオーディオ信号である場合について説明するが、デジタルオーディオデータを入出力するようにしても良い。このような場合には、音声処理部１６にてＡ／Ｄ変換やＤ／Ａ変換を行う必要はない。表示部１３や撮影部１９についても同様であり、外部出力端子を設け、外部モニタや外部カメラを接続する構成としても良い。

端末１０の記憶部１２は、アイコンデータ記憶領域１２１と、対応テーブル記憶領域１２２とを有している。アイコンデータ記憶領域１２１には、アイコンを表すアイコンデータが、アイコンを識別するアイコンＩＤに対応付けられて複数記憶されている。ここでは、アイコンデータとして、遠隔会議の拠点名を表す文字画像を表すデータが用いられる。

対応テーブル記憶領域１２２には、アイコンと会議の参加者との対応関係を示すテーブルが記憶されている。図３は、対応テーブル記憶領域１２２に記憶されたテーブルの内容の一例を示す図である。図示のように、このテーブルは、「参加者ＩＤ」と「アイコンＩＤ」との各項目が互いに関連付けられて構成されている。これらの項目のうち、「参加者ＩＤ」の項目には、参加者を識別する参加者ＩＤ（参加者識別データ）が記憶されている。「アイコンＩＤ」の項目には、アイコンを識別するアイコンＩＤが記憶されている。

記憶部１２に記憶されたアイコンデータ及び対応テーブルに記憶されたデータは、例えば、端末１０が、所定のサーバ装置から該データを受信して記憶部１２に記憶するようにしてもよく、また、例えば、端末１０が、遠隔会議の相手端末から受信して記憶部１２に記憶するようにしてもよい。また、参加者の操作に応じて制御部１１がアイコンデータや対応テーブルに登録するデータを生成し、生成したデータを記憶部１２に記憶するようにしてもよい。

次に、端末１０の機能的構成について図面を参照しつつ説明する。図４は、端末１０の機能的構成の一例を示す図である。図において、対応データ取得部１１１，参加者ＩＤ取得部１１２，表示アイコン選択部１１３，アイコン指定部１１４，表示制御部１１５は、制御部１１が記憶部１２に記憶されたコンピュータプログラムを読み出して実行することによって実現される。なお、図中の矢印はデータの流れを概略的に示すものである。

通信制御部１１０は、供給されるデータをパケット化して、通信部１８を介して他の端末１０へ送信する。通信制御部１１０は、音声処理部１６から供給される、マイクロホン１５によって収音された音声を表す音声データと、撮影部１９によって撮影された映像を表す映像データとを、パケット化して通信部１８を介して他の端末１０へ送信する。また、通信制御部１１０は、他の端末１０から送信されてくるデータを受信する。通信制御部１１０は、音声データが受信された場合には、受信した音声データを音声処理部１６に供給し、スピーカ１７から音として出力させる。また、映像データが受信された場合には、通信制御部１１０は、受信した映像データを表示制御部１１５に供給し、受信した映像データの表す映像を表示部１３に表示させる。

対応データ取得部１１１は、アイコンを表すアイコンデータ及びアイコンと会議の参加者との対応関係を示すデータ（以下、「対応データ」という）を取得する。ここでは、対応データ取得部１１１は、対応テーブル記憶領域１２２を参照して、参加者ＩＤとアイコンＩＤとの対を対応データとして取得する。参加者ＩＤ取得部１１２は、参加者を識別する参加者ＩＤを、通信ネットワークを介して接続された他の端末１０から取得する。表示アイコン選択部１１３は、参加者ＩＤ取得部１１２によって取得された参加者ＩＤに対応するアイコンデータを、対応データ取得部１１１によって取得された対応データを参照して選択する。

表示制御部１１５は、表示アイコン選択部１１３によって選択されたアイコンデータの示すアイコンを、表示部１３の表示領域における予め定められた位置に表示する。また、表示制御部１１５は、通信制御部１１０によって受信された画像データの表す画像を、その画像データに対応するアイコンの近傍に表示する。

アイコン指定部１１４は、操作部１４から出力される信号に応じて、表示制御部１１５によって表示されたアイコンのいずれかを選択し、選択結果を示すデータを通信制御部１１０に供給する。ここでは、アイコン指定部１１４は、表示制御部１１５によって表示された各アイコンの表示位置を示す位置情報を表示制御部１１５から取得し、取得した位置情報に基づいて、操作部１４から出力される信号に対応するアイコンを選択する。通信制御部１１０は、アイコン指定部１１４によって指定されたアイコンに対応する参加者の画像の取得を要求する旨を示す要求データを、通信ネットワークを介して接続された他の端末へ送信する。また、通信制御部１１０は、他の端末１０から、要求データを受信すると、撮影部１９から出力される映像データを、要求データの送信元の端末１０へ送信する。

＜動作＞
次に、本実施形態の動作について説明する。まず、遠隔会議を開始するに先立って、（又は会議開始と同時に）、端末１０の利用者は、操作部１４を用いて、自身に割り当てられた参加者ＩＤを入力する。端末１０の制御部１１は、操作部１４から出力される信号に応じて、端末１０の利用者に割り当てられた参加者ＩＤを、他の端末１０へ送信する。なお、この実施形態では、参加者が操作部１４を用いて参加者ＩＤを入力するようにしたが、これに限らず、端末１０の記憶部１２の所定の記憶領域に、参加者ＩＤを予め記憶しておき、制御部１１が、遠隔会議を開始する際に、記憶部１２から参加者ＩＤを読み出し、読み出した参加者ＩＤを他の端末１０へ送信するようにしてもよい。

また、端末１０は、他の端末１０から送信されてくる、参加者を示す参加者ＩＤを取得する（受信する）。なお、この実施形態では、端末１０は、会議の参加者を示す参加者ＩＤを他の端末１０から受信するようにしたが、これに限らず、会議の参加者を示す参加者ＩＤを記憶部１２の所定の記憶領域に予め記憶しておき、制御部１１が、遠隔会議を開始する際に、参加者ＩＤを記憶部１２の所定の記憶領域から読み出すようにしてもよい。

制御部１１は、他の端末１０から参加者ＩＤを取得すると、取得した参加者ＩＤに対応するアイコンデータを、対応データ取得部１１１によって取得された対応データを参照して選択し、選択したアイコンデータの示すアイコンを表示部１３の表示領域における予め定められた位置に表示する。

図５は、表示部１３に表示される画面の一例を示す図である。図示のように、複数の端末１０のそれぞれに対応するアイコンＩ１，Ｉ２，Ｉ３，…が、表示部１３に表示される。ここでは、制御部１１は、会議で用いられる資料を表す画像を画面の中央に表示するとともに、複数のアイコンＩ１，Ｉ２，Ｉ３，…を表示部１３の資料の周囲に表示する。なお、制御部１１が表示部１３に表示する資料を表す資料データは、記憶部１２に予め記憶されたものであってもよく、また、例えば、他の端末１０から受信されるデータであってもよい。なお、図５に示す例では、制御部１１は、画面の中央に資料を表示し、その周囲にアイコンを表示するようにしたが、アイコンの表示位置はこれに限らず、要は、選択されたアイコンデータの示すアイコンを、表示部１３の表示領域における予め定められた位置に表示するようにすればよい。

次いで、端末１０は、遠隔会議を開始する。すなわち、端末１０のそれぞれは、マイクロホン１５で収音した音声を表す音声データを他の端末１０に送信する。また、端末１０は、複数の他の端末１０のそれぞれについて、各端末１０の利用者の音声を収音するマイクロホン１５によって収音された音声を表す音声データを、通信ネットワーク２０を介して受信し、受信した音声データをスピーカ１７から音として出力する。これにより遠隔会議が実現される。

さて、会議が行われている最中において、会議の参加者は、表示部１３に表示されたアイコンを選択することができる。アイコンが選択されると、制御部１１は、選択されたアイコンに対応する画像データの取得要求を示す要求データを、他の端末１０へ送信する。一方、端末１０の制御部１１は、遠隔会議の相手端末１０から要求データを受信すると、撮影部１９によって撮影された映像を表す映像データを、その要求データの送信元である端末１０に対して送信する。

このように、端末１０が要求データを他の端末１０（以下「相手端末１０」という）に対して送信すると、送信した要求データの応答としてその相手端末１０から画像データが送信されてくる。端末１０は、他の端末から要求データの応答として映像データを受信すると、受信された映像データの表す画像を、その相手端末１０に対応するアイコンの近傍に表示させる。

図６は、表示部１３に表示される画面の一例を示す図である。図６に示す例では、制御部１１は、アイコンＩ４の近傍に、アイコンＩ４に対応する端末１０から送信されてきた映像データの表す映像を表示する。このとき、図６に例示するように、アイコンＩ４に対してふきだし画像Ｇ１を表示し、このふきだし画像Ｇ１のなかに送信されてくる映像データの表す映像を表示するようにしてもよい。なお、図６に示す例では、参加者の映像をふきだし画像のなかに含めて表示するようにしたが、参加者の映像の表示態様はこれに限らず、例えば、表示部１３に表示された資料が透けて見えるように、資料画像と部分画像とを合成して表示するようにしてもよく、要は、制御部１１が、受信される映像データの表す映像を、その映像データの送信元の端末に対応するアイコンの近傍に表示するようにすればよい。

図６に示す画面が表示されている状態において、参加者がアイコンＩ４以外の他のアイコンを指定する操作を行うと、制御部１１は、アイコンＩ４に係る処理と同様の処理を行って、指定されたアイコンに対応する映像を、指定されたアイコンの近傍に表示する。このとき、制御部１１は、アイコンＩ４に対応する映像を継続して表示する。

一方、図６に示す画面が表示されている状態において、参加者が再度アイコンＩ４を指定する操作を行うと、制御部１１は、映像データの送信元の端末１０に対して映像の送信を停止する旨を示す要求データを送信するとともに、ふきだし画像Ｇ１と受信される映像データの表す映像の表示を停止する。この処理により、表示部１３の表示は図５に例示した画面に戻る。また、要求データを受信した端末１０は、映像データの送信を停止する。

このように、端末１０は、会議の参加者がアイコン指定操作を行っていない状態においては、音声データの送受信を行って音声通信によって遠隔会議を実現する。一方、会議の参加者がアイコンを指定する操作を行うと、端末１０の制御部１１は、指定されたアイコンに対応する他の端末１０に対して要求データを送信し、送信した要求データの応答として映像データが送信されてくると、その映像データを受信し、受信した映像データを参加者によって指定されたアイコンの近傍に表示する。このように、端末１０は、常に映像データを送受信するのではなく、参加者が所望する映像データを、参加者が所望するタイミングにおいてのみ伝送する。このように、遠隔会議中において映像データの伝送を指定されたタイミングにおいてのみ行うことによって、通信ネットワーク上を伝送するデータ量を削減することができる。また、会議の参加者は、他の参加者の映像を視認したい場合には、アイコンをクリックする（指定する）だけでよく、簡単な操作で他の参加者の映像を表示させることができ、参加者が会議の状況を把握しづらくなるのを防ぐことができる。

具体的には、例えば、図６に示す例において、参加者が「仙台」の拠点の映像を視認したい場合には、アイコンＩ４をクリックすればアイコンＩ４に対応する端末１０の映像がアイコンＩ４の近傍に表示される。また、参加者が「大阪」の拠点の映像を視認したい場合には、アイコンＩ７をクリックすればアイコンＩ７に対応する端末１０の映像がアイコンＩ７の近傍に表示される。このように、本実施形態によれば、参加者は、簡単な操作で各拠点の映像を表示部１３に表示させることができる。

例えば、ある拠点の参加者が発言している最中において、その参加者がどのような表情で発言しているかを見たい場合がある。このような場合には、参加者は、その参加者に対応するアイコンをクリックするだけで、発言中の参加者の映像を表示させることができる。また、例えば、ある拠点の参加者が発言している最中において、他拠点の参加者の反応や表情を見たい場合がある。このような場合にも、参加者は、反応を確認したい参加者に対応するアイコンをクリックするだけで、その参加者の映像を表示させることができる。このように、本実施形態では、発言していない参加者の映像についても、各参加者の操作によって各端末１０の表示部１３に表示させることができる。

以上説明したように本実施形態によれば、端末１０の制御部１１が、会議の参加者を識別する参加者ＩＤを他の端末１０から取得し、取得した参加者ＩＤに対応するアイコンを選択し、選択したアイコンを表示部１３に表示するから、各参加者は、この会議にどのような参加者が参加しているかを表示されるアイコンを視認することで把握することができ、これにより、会議の状況を参加者が把握し易くすることができる。

また、本実施形態によれば、端末１０ごとに必要とするデータを要求し、取得・表示するから、会議の参加者が所望する画像のデータのみをネットワーク上に伝送させることができる。これにより、ネットワーク上を伝送するデータ量を削減しつつ、かつ、参加者が会議の状況を把握しづらくなるのを防ぐことができる。このように、本実施形態によれば、ネットワーク上を伝送するデータ量を少なくしつつ、ユーザが所望する情報をユーザに知らしめることができる。

＜変形例＞
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されることなく、他の様々な形態で実施可能である。以下にその例を示す。なお、以下の各態様を適宜に組み合わせてもよい。
（１）上述の実施形態において、遠隔会議中に話者検出を行って、発言している参加者を各端末１０の表示部１３に表示するようにしてもよい。この場合の端末１０の機能的構成の一例について、図７を参照しつつ説明する。図７は、上述の実施形態において図４に示した図に対応するものであり、同様の構成については同じ符号を付して適宜その説明を省略する。図において、話者検出部１１６は、音声処理部１６から出力される音声データ（すなわちマイクロホン１５によって収音された音声を表す音声データ）の音圧を検出する。また、話者検出部１１６は、検出した音圧の時間的な変化を解析し、解析結果に応じて、会議の参加者の発話の有無を判定する。話者検出部１１６は、判定結果を示すデータを、通信制御部１１０に供給する。通信制御部１１０は、話者検出部１１６による判定結果が肯定的である場合に、撮影部１９から出力される映像データを、通信ネットワークを介して接続された他の端末１０へ送信する。他の端末１０は、受信される映像データの表す映像を、映像データの送信元の端末１０に対応するアイコンの近傍に表示させる。このようにすることによって、参加者のいずれかが発言する毎に、発言した参加者の映像が端末１０の表示部１３に表示される。また、参加者の映像がその参加者に対応するアイコンの近傍に表示されるから、どの拠点で発言されたかを参加者が把握し易くすることができる。

また、上述の場合において、発話者以外の参加者の映像を表示するように予め設定しておいてもよい。この場合は、例えば、参加者と他の参加者との対応関係を示すテーブルを端末１０の記憶部１２に予め記憶させておく構成とし、端末１０が参加者の発話を検出すると、端末１０は、検出した参加者に対応する参加者を記憶部１２に記憶されたテーブルを参照して特定し、特定した参加者に対応する端末１０に対して、映像の送信を要求する旨を示す要求データを送信する。要求データを受信した端末１０は、撮影部１９から出力される映像データを、他の端末１０に対して送信する。このようにすることにより、例えば、ある参加者が発言すると、その参加者に対応する参加者（例えば、発言者の上司、等）の映像が表示される。

（２）上述の実施形態において、各拠点に複数の参加者がいる場合には、撮影部１９で撮影した映像を複数に分割し、分割した各部分画像を表す画像データを送受信するようにしてもよい。この場合の具体例について図面を参照しつつ説明する。図８は、撮影部１９が撮影した映像を表す映像データの内容の一例を示す図である。図８に示す例においては、或る拠点において、参加者Ｓ１，参加者Ｓ２，参加者Ｓ３の３人の参加者がおり、それら３人の参加者の映像を撮影部１９が撮影する場合の例を示している。この場合、端末１０の制御部１１は、撮影部１９から出力される映像データを解析して顔検出を行い、検出した顔画像を含む撮影部分領域Ｒ１，Ｒ２，Ｒ３をそれぞれ特定する。また、制御部１１は、特定した撮影部分領域Ｒ１，Ｒ２，Ｒ３と参加者とを対応付け、対応付け結果を示すデータを、記憶部１２の所定の記憶領域に記憶する。撮影部分領域と参加者との対応付け処理の態様としては、参加者の操作内容に応じて対応付けるようにしてもよい。また、各端末１０は、参加者によって表示部１３に表示されたアイコンが指定されると、指定されたアイコンに対応する参加者ＩＤを含む要求データを、そのアイコンに対応する端末１０に対して送信する。一方、要求データを受信した端末１０は、受信した要求データに含まれる参加者ＩＤに対応する部分画像データを、要求データの送信元の端末１０に対して送信する。具体的には、要求データを受信した端末１０は、受信した要求データに含まれる参加者ＩＤに対応する撮影部分領域を記憶部１２を参照して特定し、特定した撮影部分領域内の映像を表す部分映像データを、要求データの送信元の端末１０へ送信する。このように、この態様においては、撮影部１９で撮影された映像を表す映像データを全て送信するのではなく、撮影部１９で撮影された映像を表す映像データのうちの、指定された参加者に対応する部分画像を表すデータのみを送信する。このようにすることで、通信ネットワーク上を伝送するデータ量をより少なくすることができる。

また、上述の態様においては、制御部１１が、撮影部１９から出力される映像データを解析して顔検出を行い、検出した顔画像を含む撮影部分領域を特定するようにしたが、撮影部分領域の特定方法はこれに限らず、例えば、参加者の操作に応じて撮影部分領域を特定するようにしてもよい。

（３）上述の実施形態において、各拠点に複数の参加者がいる場合には、参加者の実際の配置態様を、アイコンの配置態様に反映させるようにしてもよい。この場合は、制御部１１が、撮影部１９から出力される映像データを解析し、解析結果に応じて参加者の配置態様を検出し、会議の参加者のそれぞれに対応するアイコンを、検出した配置態様に応じた配置態様で表示部１３に表示するようにしてもよい。このようにすれば、各参加者は、相手側端末の参加者がどういった配置で参加しているかを知ることができる。

（４）上述の実施形態では、本発明に係る通信端末を用いて遠隔会議を行う場合について説明したが、本発明はこれに限らず、例えば、通信ネットワークを介して講義や講演を行う場合においても本発明を適用することができる。

（５）上述の実施形態において、参加者毎に属性情報（役職（部長、等）、司会、上司、中間管理職、当事者、等）を付与し、制御部１１が、属性情報に応じて画像の表示制御を行うようにしてもよい。この場合は、端末１０の記憶部１２に、端末１０を識別する端末ＩＤとその端末の利用者の属性を示す属性情報とを対応付けて記憶するとともに、属性と部分画像の表示態様との対応関係を記憶しておき、制御部１１が、端末１０に対応する属性情報に応じて、画像の表示態様を制御するようにすればよい。具体的には、例えば、特定の属性の参加者に対応する端末については、参加者の操作に関わらず常に画像を表示するようにしてもよい。

また、会議毎に属性（演説、ブレインストーミング、打ち合わせ、報告、等）を付与し、属性に応じて画像の表示制御を行うようにしてもよい。この場合は、属性と画像の表示態様との対応関係を記憶部１２の所定の記憶領域に予め記憶しておく。会議の参加者が、端末１０の操作部１４を用いて会議の属性を入力し、制御部１１が、操作部１４から出力される信号に応じて会議の属性を特定し、特定した属性に応じて表示制御を行うようにしてもよい。具体的には、例えば、特定の属性の会議については、参加者の操作に関わらず常に画像を表示するようにしてもよい。

（６）上述の実施形態では、参加者とアイコンとの対応関係を示す対応テーブルを対応テーブル記憶領域１２２に予め記憶させておく構成としたが、これに限らず、例えば、遠隔会議を開始する際に、制御部１１が、参加者とアイコンとの対応関係を示す対応データを、他の端末１０や所定のサーバ装置等から受信するようにしてもよい。

（７）上述の実施形態では、アイコンとして拠点名の文字画像を用いたが、本実施形態で適用されるアイコンはこれに限らず、例えば、アイコンデータとしては、アバターや動物のキャラクタ等を表す３Ｄ画像を表すデータを用いてもよい。要は、参加者と対応付けられる画像（静止画像及び動画像を含む）であればどのようなものであってもよい。

（８）また、上述の実施形態において、参加者の表情をアイコンに反映させるようにしてもよい。この場合は、例えば、制御部１１が、撮影部１９から出力される映像データに対して、画像解析や顔検出を行って、参加者の表情を検出し、検出した表情をアイコンに反映させるようにしてもよい。アイコンへの反映の態様としては、例えば、アイコンとしてアバターを用い、参加者の表情をアイコンの表情に反映させるようにしてもよい。また、これに限らず、例えば、参加者が笑っている場合には、笑っていることを示す画像を表示してもよい。

（９）上述の実施形態において、表示部１３に表示する画像は、撮影部１９によって撮影された映像に限らず、他の画像であってもよい。例えば、参加者に係る資料（所属部署名、名前、その参加者が作成した資料、等）であってもよい。具体的には、例えば、Ａさんが話すと、Ａさんに関連する資料を合成表示するようにしてもよい。要は、端末１０が、参加者に関する画像を表示部１３に表示するようにすればよい。

（１０）上述の実施形態において、端末１０毎に異なる画面を表示するようにしてもよい。例えば、端末１０を識別する端末ＩＤと表示態様との対応関係を予め記憶部１２の所定の記憶領域に記憶しておき、制御部１１が、アイコンや映像を表示する際に、記憶部１２に記憶された対応関係を参照して、端末１０毎に表示態様を異ならせるようにしてもよい。

（１１）上述の実施形態では、映像が表示されている最中において参加者によって再度アイコンが指定された場合に、映像の表示を停止するようにしたが、映像の表示を停止する態様はこれに限らず、例えば、制御部１１が、映像の表示を開始してから予め定められた期間が経過したときに映像の表示を停止するようにしてもよく、また、例えば、操作者によって他のアイコンが指定されたときに映像の表示を停止するようにしてもよい。要は、制御部１１が、予め定められたアルゴリズムに従って映像の表示を停止するようにすればよい。

（１２）上述の実施形態において、端末１０の制御部１１によって実行されるプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータが読取可能な記録媒体に記憶した状態で提供し得る。また、インターネットのようなネットワーク経由で端末１０にダウンロードさせることも可能である。

遠隔会議システムの構成の一例を示す図である。 端末のハードウェア構成の一例を示すブロック図である。 対応テーブルの内容の一例を示す図である。 端末の機能的構成の一例を示すブロック図である。 表示部に表示される画面の一例を示す図である。 表示部に表示される画面の一例を示す図である。 端末の機能的構成の一例を示す図である。 映像データの表す映像の一例を示す図である。

符号の説明

１…遠隔会議システム、１０…端末、１１…制御部、１２…記憶部、１３…表示部、１４…操作部、１５…マイクロホン、１６…音声処理部、１７…スピーカ、１８…通信部、１９…撮影部、２０…通信ネットワーク、１１０…通信制御部、１１１…対応データ取得部、１１２…参加者ＩＤ取得部、１１３…表示アイコン選択部、１１４…アイコン指定部、１１５…表示制御部、１１６…話者検出部。

Claims (9)

1. アイコンを表すアイコンデータ及び前記アイコンと会議の参加者との対応関係を示す対応データを取得する対応データ取得手段と、
   前記参加者を識別する参加者識別データを取得する参加者識別データ取得手段と、
   前記参加者識別データ取得手段によって取得された参加者識別データに対応するアイコンデータを、前記対応データ取得手段によって取得された対応データを参照して選択する選択手段と、
   前記選択手段によって選択されたアイコンデータの示すアイコンを、表示装置の表示領域における予め定められた位置に表示する表示制御手段と、
   前記参加者の画像を表す画像データを受信する画像データ受信手段と、
   前記画像データ受信手段によって受信された画像データの表す画像を、該画像データに対応するアイコンの近傍に表示する画像表示制御手段と
   を具備することを特徴とする会議支援装置。
2. 前記表示制御手段によって表示されたアイコンのいずれかを、操作手段から出力される信号に応じて指定するアイコン指定手段と、
   前記アイコン指定手段によって指定されたアイコンに対応する参加者の画像の取得を要求する旨を示す要求データを、通信ネットワークを介して接続された他の端末へ送信するデータ取得要求手段と
   を具備することを特徴とする請求項１に記載の会議支援装置。
3. 収音手段から出力される音声信号に応じて、前記参加者が発話しているか否かを判定する話者検出手段と、
   前記話者検出手段による判定結果が肯定的である場合に、前記参加者の画像を表す画像データを、通信ネットワークを介して接続された他の端末へ送信する画像データ送信手段と
   を具備することを特徴とする請求項１又は２に記載の会議支援装置。
4. 前記対応データ取得手段は、通信ネットワークを介して接続された他の端末から、前記アイコンデータ及び前記対応データを取得する
   ことを特徴とする請求項１乃至３のいずれか１項に記載の会議支援装置。
5. 前記参加者の属性と画像の表示態様との対応関係を示す第２の対応データを取得する第２の対応データ取得手段と、
   前記参加者の属性を示す属性情報を取得する属性情報取得手段と
   を具備し、
   前記画像表示制御手段は、前記属性情報取得手段によって取得された属性情報と前記第２の対応データ取得手段によって取得された第２の対応データとを参照して、前記画像データ受信手段によって受信された画像データに対応する参加者の属性に応じた表示制御を行う
   ことを特徴とする請求項１乃至４のいずれか１項に記載の会議支援装置。
6. 前記会議の属性と画像の表示態様との対応関係を示す第３の対応データを取得する第３の対応データ取得手段と、
   前記会議の属性を示す属性情報を取得する第２の属性情報取得手段と
   を具備し、
   前記画像表示制御手段は、前記第２の属性情報取得手段によって取得された属性情報に対応する表示態様を、前記第３の対応データ取得手段によって取得された第３の対応データを参照して特定し、特定した表示態様に応じた表示制御を行う
   ことを特徴とする請求項１乃至５のいずれか１項に記載の会議支援装置。
7. 撮影手段から出力される画像データを解析し、解析結果に応じて参加者の表情を検出する表情検出手段
   を具備し、
   前記表示制御手段は、前記表情検出手段によって検出された表情を、前記選択手段によって選択されたアイコンデータの示すアイコンに反映させる
   ことを特徴とする請求項１乃至６のいずれか１項に記載の会議支援装置。
8. アイコンを表すアイコンデータ及び前記アイコンと会議の参加者との対応関係を示す対応データを取得する対応データ取得手段と、
   前記参加者を識別する参加者識別データを取得する参加者識別データ取得手段と、
   前記参加者識別データ取得手段によって取得された参加者識別データに対応するアイコンデータを、前記対応データ取得手段によって取得された対応データを参照して選択する選択手段と、
   前記選択手段によって選択されたアイコンデータの示すアイコンを、表示装置の表示領域における予め定められた位置に表示する表示制御手段と、
   撮影手段から出力される画像データを解析し、解析結果に応じて前記参加者の配置態様を検出する配置対応検出手段と
   を具備し、
   前記表示制御手段は、前記選択手段によって選択されたアイコンデータの示すアイコンを、前記配置対応検出手段によって検出された配置態様に応じた配置態様で、前記表示装置に表示する
   ことを特徴とする会議支援装置。
9. アイコンを表すアイコンデータ及び前記アイコンと会議の参加者との対応関係を示す対応データを取得する対応データ取得手段と、
   前記参加者を識別する参加者識別データを取得する参加者識別データ取得手段と、
   前記参加者識別データ取得手段によって取得された参加者識別データに対応するアイコンデータを、前記対応データ取得手段によって取得された対応データを参照して選択する選択手段と、
   前記選択手段によって選択されたアイコンデータの示すアイコンを、表示装置の表示領域における予め定められた位置に表示する表示制御手段と、
   収音手段から出力される音声信号に応じて、前記参加者が発話しているか否かを判定する話者検出手段と、
   前記参加者と他の参加者との対応関係を示す第２の対応データを取得する第２の対応データ取得手段と、
   前記第２の対応データ取得手段によって取得された第２の対応データを参照して、前記話者検出手段によって発話していると判定された参加者に対応する参加者を特定し、特定した参加者の画像の取得を要求する旨を示す要求データを、通信ネットワークを介して接続された他の端末へ送信するデータ取得要求手段と
   を具備することを特徴とする会議支援装置。

Images