JPH0738870A - 多地点電子会議システムの映像音声制御方式 - Google Patents

Abstract

(57)【要約】 【目的】 多地点電子会議端末で複数の会議に参加可能
とし、複数の会議をユーザが混乱せずに使い分けること
を可能とすること。 【構成】 ネットワーク上の多地点を会議の論理的な空
間として管理する手段（２１）を設け、多地点の映像を
復号（２３）しウインドウに合成表示する手段（２５）
によって会議空間を表現し、ウインドウ管理部（２８）
からのフォーカスの状態に応じて会議空間ごとに音声と
画像を制御（２０１〜２０８）できるよう構成されてな
る。 【効果】 本発明によれば、一つの多地点電子会議端末
で、通信ネットワーク上の複数の電子会議に参加すると
きに、一つの電子会議を一つの会議空間として認識でき
るので、複数の電子会議をユーザが混乱せずに使い分け
ることが可能となる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ワークステーション等
を用いてマルチウインドウが表示可能な操作性の高い多
地点の電子会議システムに関する。特には、画面上でウ
インドウのフォーカスを移動することによって会議途中
割り込み等の操作性の向上、あるいは、階層的に構成し
たウインドウを利用する利便性の高い電子会議システム
に関する。

【０００２】

【従来の技術】従来の電子会議端末では、多地点との電
子会議を行う場合、各地点からの画像をそれぞれに対応
する一つのウインドウ上に表示し、このウインドウを会
議参加の地点数表示することで多地点の会議を表現して
いた。これによって、一つの画像表示装置でも多地点の
画像の表示を可能とし、電子会議システムとしての柔軟
性を向上させることを狙っていた。そこでは、会議参加
者一人一人に対応してウインドウが必要なため、多人数
での会議では多くのウインドウが表示される。この公知
例としては特開平２−６７８９１がある。

【０００３】

【発明が解決しようとする課題】従来の電子会議の表示
方法では、参加者のウインドウは会議に関係のない空間
（以下、この空間のことを個人空間と呼ぶ）のウインド
ウと混在して表示されるため、個人空間と会議空間との
区別が困難である。本発明の第一の目的は、この会議空
間の区別を容易にすることである。

【０００４】次に、従来の電子会議の表示方法では、一
つの会議端末は同時に一つの会議にしか参加できない。
これは、会議空間の識別が容易でないことによる。本発
明の第二の目的は、複数の会議空間を容易に扱えるよう
にすることである。

【０００５】

【課題を解決するための手段】上記目的を達成するため
に以下のような手段を構成する。

【０００６】多地点の対地の動画像を会議空間ごとに一
つのウインドウに合成表示する特徴を有する。

【０００７】ユーザが自分の画像と音声の出力先を会議
空間に応じて変更する際に、ウインドウのフォーカスに
連動して変更できるようにする特徴を有する。

【０００８】会議中に用いる共同実行アプリケーション
の表示ウインドウを、用いている会議空間に属している
という関係を保つ特徴を有し、共同実行アプリケーショ
ンのウインドウへのフォーカスの移動、個人空間アプリ
ケーションのウインドウへのフォーカスの移動、他の会
議空間のウインドウおよびその会議空間に属するアプリ
ケーションのウインドウへのフォーカスの移動、の場合
に合わせて画像・音声の空間が自然に切り替わるように
する特徴を有する。

【０００９】

【作用】本発明によれば、ユーザは会議空間と個人の環
境との区別を、ウインドウによって区別することが可能
となる。マルチウインドウシステムでは、一つのウイン
ドウに一つの作業が対応しており、会議空間を同様な手
法で表現することで、ユーザの会議空間の認識性が向上
する。さらに、本発明による会議空間の表現を行えば、
複数の会議空間を一つの表示装置上に表示し、それを区
別して利用することが可能となる。

【００１０】本発明によれば、ユーザが会議空間として
表現されるところの共有環境と、ユーザの個人空間とし
て表現されるところの個人環境との間を移動する際に、
画像と音声を自然に切替えることが可能となり、会議空
間と音声空間を一致させることが可能となり、電子会議
のインタフェースが向上する。

【００１１】

【実施例】以下、本発明の実施例を図面を用いて説明す
る。

【００１２】図１は、本発明の第１の実施例を示す説明
図であり、多地点の接続の例として対地Ａ、対地Ｂ、対
地Ｃ、対地Ｄの４地点での接続を示しており、対地Ａは
複数の電子会議に参加している状態である。

【００１３】図１において、１はネットワーク、２は多
地点の電子会議を行う対地の一つで対地Ａ、３は多地点
の電子会議を行う対地の一つで対地Ｂ、４は多地点の電
子会議を行う対地の一つで対地Ｃ、５は多地点の電子会
議を行う対地の一つで対地Ｄ、６はマルチウインドウが
表示可能なディスプレイ、７は受信した会議参加者の音
声を再生するスピーカ、８は自画像を撮影するカメラ、
９は自音声を収音するマイク、１０は対地Ａと対地Ｂと
対地Ｃとでなる会議ａ、１１は対地Ａと対地Ｄとでなる
会議ｂ、１２は会議ａ１０を表したウインドウ、１３は
会議ｂ１１を表したウインドウ、１４はウインドウ１２
に合成表示された対地Ｂの動画像、１５はウインドウ１
２に合成表示された対地Ｃの動画像、１６はウインドウ
１３に合成表示された対地Ｄの動画像である。

【００１４】図２は、本発明の実施例を構成するブロッ
ク図である。

【００１５】図２において、２１は会議管理部、２２は
通信データ受信部、２３は画像復号化部、２４は画像出
力制御部、２５は画像合成部、２６は音声復号化部、２
７は音声出力制御部、２８はウインドウ管理部、２９は
ウインドウ生成部、３０は通信データ送信部、３１は音
声符合化部、３２は音声入力制御部、３３は画像符合化
部、３４は画像入力制御部、３５は操作部である。

【００１６】以下、図２を用いて図１の表示となる動作
を説明する。

【００１７】対地Ａのユーザが対地Ｂと対地Ｃとからな
る会議ａ１０を開始すると、会議管理部２１は、会議ａ
１０の参加相手が対地Ｂと対地Ｃであることを保持す
る。そして会議管理部２１は、会議空間を表すウインド
ウを表示するようにウインドウ管理部２８に指示する
（１１０）。ウインドウ管理部２８は指示に従い会議空
間を表すウインドウを生成するようにウインドウ生成部
２９に指示する（１１１）。

【００１８】このとき、通信データ受信部２２は、ネッ
トワークから対地Ｂと対地Ｃからの会議データパケット
を受信し（１０１）、画像データパケットと音声データ
パケットと会議管理データパケットとに振り分ける（１
０２、１０６、１０９）。

【００１９】会議管理部２１は、会議管理データパケッ
トを受けとり（１０９）、どの対地からの画像である
か、あるいは音声であるかを識別してそれぞれのパケッ
トを対地ごとに復号化するように画像復号化部２３と音
声復号化部２６に制御命令を出す（２０１、２０３）。

【００２０】画像復号化部２３は、画像データパケット
を復号し対地の画像を画像出力制御部２４に出力する
（１０３）。

【００２１】音声復号化部２６は、音声データパケット
を復号し対地の音声を音声出力制御部２７に出力する
（１０７）。

【００２２】画像出力制御部２４および音声出力制御部
２７は、会議管理部から制御を受けて（２０２、２０
４）、映像を画像合成部２５に出力／停止したり（１０
４）、音声をスピーカ７に出力／停止したり（１０８）
する。これについては図３以降の説明でさらに詳しく述
べる。

【００２３】画像合成部２５は、ウインドウ生成部２９
によって作られた会議空間のウインドウ（１１２）に対
地Ｂと対地Ｃの動画像（１０４）を合成しディスプレイ
６に出力する（１０５）。なお、ここでの画像合成につ
いては、特許出願済みの「動画像の合成装置および多地
点間会議装置：特願平４−３６７８」による合成方法を
前提としている。

【００２４】これで、図１において会議ａのウインドウ
１２が表示される。同様に、対地Ａと対地Ｄとからなる
会議ｂについてもウインドウ１３が表示され、会議空間
ごとにウインドウが表示されウインドウによって会議空
間の識別が可能となっている。

【００２５】一方、マイク９から収音された音声は、音
声入力制御部３２に入力され（１１８）、会議管理部２
１からの音声の入力／停止の指示（２０６）に従って音
声符合化部３１に出力され（１１７）、会議管理部２１
からのどの会議空間の対地に対して符合化するかの指示
（２０５）に従って符合化し音声データパケットを通信
データ送信部３０に出力する（１１６）。同様に、カメ
ラ８から撮影された画像は、画像入力制御部３４に入力
され（１２１）、会議管理部２１からの映像の入力／停
止の指示（２０８）に従って画像符合化部３３に出力さ
れ（１２０）、会議管理部２１からのどの会議空間の対
地に対して符合化するかの指示（２０７）に従って符合
化し画像データパケットを通信データ送信部３０に出力
する（１１９）。

【００２６】通信データ送信部３０は、会議管理部２１
から対地Ａの会議状態を示す会議管理データパケットを
受けとり（１１３）、会議管理データパケットと音声デ
ータパケットと画像データパケットとをネットワークに
出力する（１２２）。

【００２７】対地Ｂと対地Ｃにおいても同様の動作によ
って、会議ａのウインドウが表示される。そして、それ
ぞれ、対地Ｂでは対地Ａと対地Ｃの音声と画像、対地Ｃ
では対地Ａと対地Ｂの音声と画像が受信され発音／表示
される。同様に、対地Ｄでは対地Ａの音声と画像が受信
され発音／表示される。

【００２８】図１に示した実施例によれば、一つの会議
を一つのウインドウとして認識できるため複数の会議を
一つのディスプレイ上で表示できる効果が生じるととも
に、ユーザはウインドウによって複数の会議を容易に識
別できる効果が生じる。

【００２９】以下では、図３〜６を図２を参照しながら
説明する。

【００３０】図３は、本発明の第２の実施例を示す図で
ある。この実施例では、会議ａを表すウインドウ４２か
ら会議ａとは独立したアプリケーションのウインドウ４
３へフォーカスを移動（２１１）させる時の映像音声の
状態を示している。

【００３１】図３（ａ）は、フォーカスを移動する前の
状態を示している。ここでは会議ａのウインドウ４２に
フォーカスがあり、スピーカ７からは会議ａに参加して
いる対地から受信した音声１３１が発音されている。そ
して、マイク９から収音された自分の音声は、会議ａに
参加している対地に送信されている。

【００３２】図３（ｂ）は、フォーカスを移動した後の
状態を示している。このとき、操作部３５からフォーカ
スの移動がウインドウ管理部２８に指示される（１１
５）。ウインドウ管理部２８は、会議ａウインドウ４２
のフォーカスがウインドウ４３に移ったことを会議管理
部２１に知らせる（１１４）。会議管理部２１は、ウイ
ンドウ４３が会議ａと独立したアプリケーションのウイ
ンドウであることを判断し、音声出力制御部２７に会議
ａの対地からの音声の出力を停止するよう指示し（２０
４）、音声復号化部２６に該音声データパケットの復号
停止を指示する（２０３）。次に、音声入力制御部３２
に対してマイク９からの音声の入力（１１８）を停止す
るよう指示し（２０６）、音声符合化部３１に該音声の
符合化の停止を指示する（２０５）。同様に、画像入力
制御部３４に対してカメラ８からの画像の入力（１２
１）を停止するよう指示し（２０８）、画像符合化部３
３に該画像の符合化の停止を指示する（２０７）。

【００３３】以上の動作によって、会議ａのウインドウ
４２にフォーカスがあるときでは、スピーカ７から会議
ａの音声が出ていた状態（１３１）であって、フォーカ
スを会議ａと独立したアプリケーションのウインドウ４
３に移動した後では、会議ａの音声の出力が停止された
状態となる。そして、自音声と自画像の会議ａへの出力
も停止される。

【００３４】この実施例が利用される状況としては、会
議を中座し一時的に別の作業を行なう時、あるいは、会
議端末の前から一時的に離席するためにフォーカスを外
す時などがある。

【００３５】この実施例によれば、会議と会議と独立し
たアプリケーションとでは、音声と画像が分離された状
態にあり、同じ会議空間の中にないということを自然に
認識できる効果が生じる。

【００３６】図４は、本発明の第３の実施例を示す図で
ある。この実施例では、会議ａを表すウインドウ４２か
ら会議ａの中で用いている共有アプリケーションのウイ
ンドウ５１へフォーカスを移動（２１１）させる時の映
像音声の状態を示している。

【００３７】図４（ａ）は、フォーカスを移動する前の
状態を示しており、音声と画像の状態は、図３（ａ）と
同様の状態である。

【００３８】図４（ｂ）は、フォーカスを移動した後の
状態を示している。このとき、操作部３５からフォーカ
スの移動がウインドウ管理部２８に指示される（１１
５）。ウインドウ管理部２８は、会議ａのウインドウ４
２のフォーカスがウインドウ５１に移ったことを会議管
理部２１に知らせる（１１４）。会議管理部２１は、ウ
インドウ５１が会議ａの中で用いている共有アプリケー
ションのウインドウであることを判断し、会議ａの対地
からの音声の出力と会議ａへの音声と画像の出力をフォ
ーカスを移動する前と同じ状態を継続したままとする。

【００３９】以上の動作によって、会議ａのウインドウ
４２から会議ａの中で用いている共有アプリケーション
のウインドウにフォーカスを移動しても会議での音声と
画像の状態はそのまま保たれる。

【００４０】この実施例が利用される状況としては、会
議で共有アプリケーションを用いて会議を進める時であ
る。

【００４１】この実施例によって、会議ウインドウと共
有アプリケーションのウインドウとがウインドウとして
は独立していても、音声と画像は一つにつながった同じ
会議空間の中にあるということを容易に認識できる効果
が生じる。

【００４２】図５は、本発明の第４の実施例を示す図で
ある。この実施例では、会議ａを表すウインドウ４２か
ら会議ｂを表すウインドウ６１へフォーカスを移動（２
１１）させる時の映像音声の状態を示している。

【００４３】図５（ａ）は、フォーカスを移動する前の
状態を示しており、音声と画像の状態は、図３（ａ）と
同様の状態である。

【００４４】図５（ｂ）は、フォーカスを移動した後の
状態を示している。このとき、操作部３５からフォーカ
スの移動がウインドウ管理部２８に指示される（１１
５）。ウインドウ管理部２８は、会議ａのウインドウ４
２のフォーカスがウインドウ６１に移ったことを会議管
理部２１に知らせる（１１４）。会議管理部２１は、ウ
インドウ６１が会議ｂのウインドウであることを判断
し、音声出力制御部２７に会議ａの対地からの音声の出
力を停止し、会議ｂの対地からの音声を出力するよう指
示し（２０４）、音声復号化部２６に会議ａの対地から
の音声データパケットの復号を停止し、会議ｂの対地か
らの音声データパケットの復号を行うよう指示する（２
０３）。次に、音声入力制御部３２に対してマイク９か
らの音声の入力（１１８）を継続するよう指示し（２０
６）、音声符合化部３１に会議ａに向けた音声の符合化
を停止し、会議ｂに向けた音声の符合化を行うよう指示
する（２０５）。同様に、画像入力制御部３４に対して
カメラ８からの画像の入力（１２１）を継続するよう指
示し（２０８）、画像符合化部３３に会議ａに向けた画
像の符合化の停止し、会議ｂに向けた画像の符合化を行
うよう指示する（２０７）。

【００４５】以上の動作によって、会議ａのウインドウ
４２にフォーカスがあるときでは、スピーカ７から会議
ａの音声が出ていた状態（１３１）であって、フォーカ
スを会議ｂのウインドウ６１へ移動した後では、会議ａ
の音声の出力が停止された状態となり、会議ｂの音声が
出力される状態となる（１４１）。そして、自音声と自
画像の会議ａへの出力は停止され、会議ｂへの出力が行
われる。

【００４６】この実施例が利用される状況としては、あ
る会議を行っている時に別の会議からの途中割り込みが
ある時である。あるいは、二つの会議に並行して参加
し、これを切替えながら会議を行う時である。

【００４７】この実施例によれば、複数の会議を切替え
て使う時に、ウインドウとして表現されている会議空間
と音声と画像の空間が一致していることを容易に認識で
きる効果が生じる。これによって、会議空間の認識性が
高まり、例えば、途中割り込みの会議に対してフォーカ
スを移動すれば、それまで進行中であった会議空間の対
地に音声のやりとりを聞かれることなく割り込みに応じ
ることができるので、会議空間を容易に扱うことができ
るようになる。

【００４８】図６は、本発明の第５の実施例を示す図で
ある。この実施例では、会議ａを表すウインドウ４２か
ら会議ｂで用いている共有アプリケーションのウインド
ウ７１へフォーカスを移動（２１１）させる時の映像音
声の状態を示している。

【００４９】図６（ａ）は、フォーカスを移動する前の
状態を示しており、音声と画像の状態は、図３（ａ）と
同様の状態である。

【００５０】図６（ｂ）は、フォーカスを移動した後の
状態を示している。このとき、操作部３５からフォーカ
スの移動がウインドウ管理部２８に指示される（１１
５）。ウインドウ管理部２８は、会議ａのウインドウ４
２のフォーカスがウインドウ７１に移ったことを会議管
理部２１に知らせる（１１４）。会議管理部２１は、ウ
インドウ７１が会議ｂの共有アプリケーションのウイン
ドウであることを判断する。

【００５１】判断後の動作は、図５で説明した動作と同
様であり、会議ａのウインドウ４２にフォーカスがある
ときでは、スピーカ７から会議ａの音声が出ていた状態
（１３１）であって、フォーカスを会議ｂの共有アプリ
ケーションのウインドウ７１へ移動した後では、会議ａ
の音声の出力が停止された状態となり、会議ｂの音声が
出力される状態となる（１４１）。そして、自音声と自
画像の会議ａへの出力は停止され、会議ｂへの出力が行
われる。

【００５２】この実施例が利用される状況としては、二
つの会議に並行して参加し、これを切替えながら会議を
行う時である。

【００５３】この実施例によれば、図４で示した第３の
実施例の効果と図５で示した第４の実施例の効果との相
乗効果が生じる。つまり、ウインドウとしては独立して
いても、そのウインドウが別の会議の共有アプリケーシ
ョンのウインドウであれば別の会議空間に属していると
いうことを容易に認識できる効果が生じる。

【００５４】

【発明の効果】第１の発明によれば、多地点の会議を一
つのウインドウに表現することが可能となり、このウイ
ンドウを複数持つことで複数の会議を一つの多地点電子
会議端末で表示することが可能となり、ユーザはこのウ
インドウ単位で会議空間を認識することができる。

【００５５】第２の発明によれば、ウインドウとして表
現された会議空間に音声と画像の空間を一致させること
が可能となり、また、この一致関係は、ウインドウのフ
ォーカスを移動させても保たれるため、ユーザは音声と
画像を含めて一つの会議空間として容易に認識すること
が可能となる。

【図面の簡単な説明】

【図１】本発明の第１の実施例を示す図。

【図２】本発明の実施例を構成するブロック図。

【図３】本発明の第２の実施例を示す図。

【図４】本発明の第３の実施例を示す図。

【図５】本発明の第４の実施例を示す図。

【図６】本発明の第５の実施例を示す図。

【符号の説明】

１…ネットワーク、２…対地Ａ、３…対地Ｂ、４…対地
Ｃ、５…対地Ｄ、６…ディスプレイ、７…スピーカ、８
…カメラ、９…マイク、１０…会議ａ、１１…会議ｂ、
１２…会議ａのウインドウ、１３…会議ｂのウインド
ウ、１４…対地Ｂの動画、１５…対地Ｃの動画、１６…
対地Ｄの動画、２１…会議管理部、２２…通信データ受
信部、２３…画像復号化部、２４…画像出力制御部、２
５…画像合成部、２６…音声復号化部、２７…音声出力
制御部、２８…ウインドウ管理部、２９…ウインドウ生
成部、３０…通信データ送信部、３１…音声符合化部、
３２…音声入力制御部、３３…画像符合化部、３４…画
像入力制御部、３５…操作部。

Claims (2)

【特許請求の範囲】
1. 【請求項１】ネットワーク上の多地点で音声・画像を用
   いて同時に会議できる電子会議システムにおいて、ディ
   スプレイ画面上に複数のウインドウを表示する機能を備
   えた端末装置を具備し、一つの会議に対して一つのウイ
   ンドウを対応させ、そのウインドウの中にその会議の参
   加者の画像と会議室を模した静止画あるいはグラフィッ
   クスとを合成表示することにより、このウインドウによ
   って物理的に分散した参加者があたかも一つの仮想的な
   空間（以下、この仮想的な空間を会議空間と呼ぶ）に居
   るように表現することが可能となるよう構成されている
   ことを特徴とする電子会議システム。
2. 【請求項２】操作装置からの指示によって操作者の注視
   （以下、この注視のことをフォーカスと呼ぶ）するウイ
   ンドウを選択するとき、フォーカスの移動元ウインドウ
   とフォーカスの移動先ウインドウのそれぞれ属する会議
   空間あるいは非会議空間の関係に応じて、画像と音声の
   表示／再生の一時停止とその再開、また音声の音量を制
   御する機能を有する請求項１記載の電子会議システム。