JPH09139928A

JPH09139928A - 多地点ビデオ会議システム

Info

Publication number: JPH09139928A
Application number: JP7297334A
Authority: JP
Inventors: Fuado Isuramu Fuaruhado; フアドイスラムファルハド
Original assignee: Hewlett Packard Co
Current assignee: HP Inc
Priority date: 1995-10-20
Filing date: 1995-10-20
Publication date: 1997-05-27
Anticipated expiration: 2015-10-20
Also published as: JP3625549B2

Abstract

(57)【要約】【課題】複数参加者画像の中から、端末装置の参加者
が注目したい他の参加者、及び／又は他の参加者が端末
装置の画像表示装置に表示している更に他の参加者を、
視覚的なガイド手段を用いて、自由に選択表示できる多
地点ビデオ会議システムを提供する。【解決手段】端末装置がスクロール操作手段１１５を
備え、メディアデータ処理装置１が、複数の参加者画
像が所定位置に配置された仮想画面３１を作成し、任意
の参加者画像が参加者表示部３２に表示されるように仮
想画面をスクロールさせる参加者画像生成手段１６、
各参加者画像の、仮想画面上での位置を記憶する位置記
憶手段１８、参加者画像の中から選択された特定参加
者画像の仮想画面上での位置を算出する手段１７ａ〜
ｄ、を有してなり、モニタ１１１は、特定参加者画像の
仮想画面上での位置を、前記端末装置の参加者に視覚的
に知らせるための参加者位置表示部３３ａ〜ｄを表示す
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、会議環境を改善し
た多地点ビデオ会議システムに関し、複数の参加者画像
の中から、（ａ）端末装置の参加者が注目したい他の参
加者、および／または（ｂ）当該他の参加者が端末装置
の画像表示装置に表示している更に他の参加者を、視覚
的なガイド手段を用いて、自由に選択表示することがで
きる多地点ビデオ会議システムに関する。

【０００２】

【技術背景】従来、多地点ビデオ会議システム（以下、
「ビデオ会議システム」と言う）の端末装置において
は、参加者画像を、（１）画面分割法、（２）ウィンド
ウ表示法の２つの方法により表示している。（１）の方
法では、端末装置の画像表示装置（以下、「モニタ」と
言う）の画面（あるいは、該モニタに表示された単一の
ウィンドウ）を複数の領域に分割し、各領域に参加者画
像を表示する。また、（２）の方法では、各参加者画像
を、独立のウィンドウ内に表示している。

【０００３】上記（１），（２）の方法は、ビデオ会議
の参加者数（すなわち、ビデオ会議システムに接続され
る端末装置数）が少ない（例えば、４名以下）ときには
問題は生じにくいが、参加者数が多いときには以下のよ
うな問題を生じる。

【０００４】（１）の方法では、各参加者に割り当てら
れた表示領域が狭くなる。

【０００５】また、（２）の方法では、各参加者をそれ
ぞれ小さなウィンドウ内に表示すると、参加者の表情等
を認識しにくくなる。一方、各参加者をそれぞれ大きい
ウィンドウ内に表示すると、各ウィンドウ同士がオーバ
ーラップする。通常、これらのウィンドウは、アイコン
をカーソルによりクリックすることによりオープンす
る。ある参加者画像を表示させたい場合、その参加者に
ついてのウィンドウが開いていないときには、アイコン
を探し出してウィンドウをオープンする。あるいは、す
でにその参加者のウィンドウが開いているときには、ウ
ィンドウを前面に移動させなければならないことも多
い。このように、端末装置の参加者（以下、「ローカル
参加者」と言う）は、多数のアイコンやオーバーラップ
したウィンドウの中から目標とするアイコンやウィンド
ウを探すことにおいて、大きな負担を強いられている。

【０００６】さらに、（１）の方法では、前面のウィン
ドウに表示されている特定の参加者と、他の参加者とが
討論や対話をしているような場合、ローカル参加者が前
記他の参加者の画像を表示させたい場合が生じる。しか
し、この場合にも、ローカル参加者が上記他の参加者に
ついてのアイコンやウィンドウを、多数のアイコンやウ
ィンドウの中からから探し出すことは容易ではない。

【０００７】加えて、（１），（２）の方法では、いわ
ゆるアイコンタクトの問題が生じる。すなわち、ローカ
ル参加者の画像は他の参加者の端末装置のモニタに表示
される。このため、ローカル参加者の端末装置のモニタ
に多数の参加者が表示されていると、ローカル参加者の
視点は該モニタ上を移動する。このようなことから、他
の参加者は、前記ローカル参加者の表情を奇異に感ず
る。

【０００８】

【発明の目的】本発明の１つの目的は、モニタに所望参
加者画像が表示されていなくても、ローカル参加者が、
前記所望参加者画像を、視覚的なガイド手段を用いて容
易に表示することが可能なビデオ会議システムを提供す
ることである。本発明の他の目的は、ある参加者が他の
参加者と討論や対話をしているときに、ローカル参加者
が、上記他の参加者の参加者画像を容易に探し出して、
モニタに表示することができる上記システムを提供する
ことである。本発明のさらに他の目的は、いわゆるアイ
コンタクトによる不都合を低減することができる上記シ
ステムを提供することである。

【０００９】

【発明の概要】本発明は、モニタ、音響発生装置（以
下、「スピーカ」と言う）、撮像装置（以下、「ビデオ
カメラ」と言う）、および音声入力装置（以下、「マイ
クロフォン」と言う）を備えた複数の端末装置が、有線
または無線の通信回線を介して相互に参加者画像および
参加者音声を含むメディアデータを送受信するビデオ会
議システムに適用されるもので、端末装置はスクロール
操作手段を備えている。

【００１０】ここで、参加者画像とは、ビデオカメラに
より撮像される画像（通常は、ビデオ会議参加者の画像
であるが、文書等の参加者画像以外の画像であることも
ある）である。通常、１つの参加者画像には参加者１人
が表示されるが、複数が表示される場合もある。参加者
音声とは、例えばマイクロフォンから入力された音声
（通常は、ビデオ会議参加者の発言音声）である。

【００１１】通信回線には、メディアデータおよびシス
テム情報が流されており、このメディアデータは、上述
した参加者画像、参加者音声からなる。また、システム
情報には、これら画像や音声がどの参加者のものなのか
を特定する識別コード（この識別コードを「Ｓ_ｉｄ」と
言う）が含まれる。また、システム情報には、後述する
ように、議長，副議長等、特別の役割を持つ参加者が予
め決定されている場合にはその役割を特定するための識
別コードが、またメディアデータが発言参加者に係るも
のである場合には、発言していることを示す識別コード
が含まれる（前者および後者の識別コードを「ＲＣ」と
言う）。さらに、システム情報には、ある参加者の端末
装置の参加者表示部に表示されている参加者（以下、便
宜上「対話相手」と言う）をローカル参加者に知らせる
ようにする場合には、メディアデータにはその対話相手
の識別コード（この識別コードを「Ａ_ｉｄ」と言う）も
含まれる。なお、通常、Ａ_ｉｄは、上記対話相手のＳ
_ｉｄである。

【００１２】メディアデータを処理するための装置（メ
ディアデータ処理装置）は、端末装置に設けられること
もあるし、マルチポイントコントロールユニットなどの
端末装置以外の装置に設けられることもある。このメデ
ィアデータの処理装置は、（１）参加者画像生成手段、
（２）位置記憶手段、（３）位置算出手段（後述する特
定参加者画像の前記仮想画面上での位置を算出する手
段）を有している。

【００１３】（１）の参加者画像生成手段は、複数の参
加者画像が所定位置に配置された仮想画面を作成し、こ
の仮想画面の一部をモニタの参加者表示部に表示させ
る。通常、参加者表示部には、仮想画面上の参加者画像
のうちの一参加者画像のみが表示され、仮想画面は上記
スクロール操作手段からの相対位置信号に応じてスクロ
ールされる。なお、参加者表示部に表示される仮想画面
は、拡大または縮小することもできる。仮想画面を縮小
したときは、参加者表示部には複数の参加者が表示され
る。

【００１４】（２）の位置記憶手段は、仮想画面上の各
参加者画像の、該仮想画面上での配置を記憶している。
本発明では、この位置記憶手段に記憶されている参加者
画像の前記仮想画面上での配置の指定や変更を、ローカ
ル参加者が行うことができるようにもでき、この場合に
は、参加者配置変更手段が設けられる。

【００１５】（３）の位置算出手段は、位置記憶手段に
記憶された仮想画面上での特定参加者画像（各参加者画
像の中から選択された特定の参加者画像）の配置情報
と、前記仮想画面における参加者表示部の画像の現在配
置情報とに基づき、その特定参加者の仮想画面上での位
置算出を行う。例えば、ビデオ会議の議長や副議長を特
定参加者とすることもできるし、発言参加者を特定参加
者とすることもできる。

【００１６】後述するように、ガイド手段は、上記特定
参加者の位置をローカル参加者に知らせるアロー等であ
る。

【００１７】ガイド手段を、上記特定参加者の対話相手
の画像の仮想画面上での位置を、ローカル参加者に知ら
せるために用いることもできる。もちろん、ガイド手段
を、特定参加者ではない参加者（画像位置がアロー等に
より表示されない参加者）の対話相手の画像の仮想画面
上での位置を、ローカル参加者に知らせるために用いる
こともできる。すなわち、本発明では、第１の端末装置
のモニタに表示されたガイド手段が、第１の端末装置に
おける仮想画面上での、第２の前記端末装置のモニタの
参加者表示部に表示されている参加者画像の位置を、前
記第１の端末装置の参加者に視覚的に知らせるようにも
できる。ローカル参加者は、例えば、議長が他の参加者
と会話をしている場合に、当該他の参加者を知ることが
できない。すなわち、通常、ローカル参加者は、前記他
の参加者がモニタに表示されている場合を除いて、前記
他の参加者を知ることができない。このため、ローカル
参加者は会議の内容を完全に理解することができないと
いう事態も生じる。しかし、上記のように、ある参加者
の対話相手の仮想画面上での位置をガイド手段で示すこ
とで、ローカル参加者は、該対話相手が誰であるのかを
容易に知ることができる。

【００１８】ローカル参加者がどのような役割を有して
いるか（すなわち、ローカル参加者がどのような識別コ
ードＲＣを持っているか）、ローカル参加者がどの参加
者と対話しているか（すなわち、ある参加者がどのよう
な識別コードＡ_ｉｄを持っているか）を、他の参加者に
知らせるために、メディアデータの処理装置は、端末装
置のモニタの参加者画像表示部に表示されている参加者
画像を特定するための情報を出力するシステム情報出力
部を有することができる。また、逆に、ある参加者がど
のような識別コードＲＣを持っているか、ある参加者が
どのような識別コードＡ_ｉｄを持っているかを、ローカ
ル参加者が知るために、メディアデータの処理装置は、
他の端末装置のモニタの参加者画像表示部に表示されて
いる参加者画像を特定するための情報を入力するシステ
ム情報入力部を有することができる。

【００１９】画像表示装置にはガイド手段が表示され
る。このガイド手段は、仮想画面上での特定参加者画像
の位置を、ローカル参加者に知らせるために設けられる
もので、前記特定参加者画像の位置をローカル参加者に
視覚的に知らせることができる。ガイド手段は、典型的
にはモニタの位置表示部に表示されたアローとすること
ができる。この場合には、前記仮想画面における、前記
参加者表示部を基準とする前記特定参加者画像の距離
を、前記アローの長さで表示し、前記仮想画面におけ
る、前記参加者表示部を基準とする特定参加者画像の方
向を、前記アローの方向で表示することができる。

【００２０】以下、本発明のビデオ会議システムの作用
の一例を説明する。前述したように、参加者表示部に表
示される画像は仮想画面の一部である。ローカル参加者
はスクロール操作手段用いて、任意の参加者画像が参加
者表示部に表示されるように仮想画面を移動させること
ができる。参加者画像の中から選択された少なくとも１
つの特定参加者画像の仮想画面上での位置（参加者表示
部を基準とする特定参加者画像の方向、あるいは方向と
距離）がガイド手段（例えばアロー）により表示され
る。この特定参加者は、ガイド手段により示された他の
特定参加者の対話相手であることもあるし、ガイド手段
によっては示されない他の参加者の対話相手であること
もある。

【００２１】ローカル参加者が、上記の特定の参加者画
像を参加者表示部に表示させたいときには、位置表示部
の表示を参照してスクロール操作手段を操作する。この
操作手段は相対位置信号を生成し、この信号を参加者画
像生成手段に出力する。この相対位置信号に基づき、参
加者画像生成手段は仮想画面をスクロールする。また、
位置算出手段は、このスクロールに応じて、参加者表示
部を基準とする特定参加者画像の仮想画面上での上記位
置を算出し、これを位置表示部にリアルタイムで表示さ
せる。

【００２２】ローカル参加者は、位置表示部の表示を参
照することにより、特定参加者画像（例えば、ローカル
参加者が注目している参加者やその対話相手）を容易に
見つけ出して表示させることができる。また、モニタに
表示される参加者画像の数は従来の端末装置と比較して
極めて少ない（例えば、１人）ので、いわゆるアイコン
タクトの不都合も緩和される。

【００２３】

【実施例】図１は本発明のビデオ会議システムが適用さ
れるシステムの一例を示す図であり、図２は本発明のビ
デオ会議システムを具体的に示す説明図である。図１に
おいて、通信回線２００に接続された複数の端末装置
（以下、「ローカル端末装置」と言う）１００は、メデ
ィアデータ処理装置１（図１では図示せず）を内蔵する
と共に、この処理装置１に接続されたモニタ１１１、ス
ピーカ１１２、ビデオカメラ１１３、マイクロフォン１
１４、スクロール操作手段（同図ではジョイスティッ
ク）１１５、キーボード１１６およびコンピュータ筐体
１２０を有している。

【００２４】図２に示すように、通信回線２００上に
は、図示しない他の端末装置（ローカル端末装置１００
と同一構成であるとは限らない）からの、メディアデー
タＭＤ（ビデオ信号ＶＳと音声信号ＡＳからなる多重化
信号）、およびシステム情報ＳＩ（識別コードＳ_ｉｄ，
ＲＣ，Ａ_ｉｄ）が流されている。前述したように、Ｓ
_ｉｄは多重化信号ＭＤがどの参加者のものなのかを特定
する識別コードである。また、ＲＣは特別の役割を持つ
参加者の当該役割を特定するための識別コードおよび／
または現在発言していることを示す識別コードである。
さらに、Ａ_ｉｄはある参加者の対話相手を示す識別コー
ド（すなわち、該参加者の識別コードＳ_ｉｄ）である。

【００２５】メディアデータ処理装置１は、多重化信号
入力部１２、多重化信号出力部１３、システム情報入力
部１４、システム情報出力部１５、参加者画像生成手段
１６、位置算出手段１７ａ〜１７ｄ、位置記憶手段１
８、特定参加者変更手段１９、参加者配置変更手段２
０、およびディスプレイ・デバイス２１を有してなる。
なお、メディアデータ処理装置１の上記構成要素の全て
が、図１に示したコンピュータ筐体１２０に内蔵されて
いてもよいし、その一部の構成要素（例えば、ディスプ
レイ・デバイス２１）がコンピュータ筐体１２０に内蔵
され、他の構成要素が図示しない別の筐体に内蔵されて
いてもよい。

【００２６】多重化信号出力部１３は、ビデオカメラ１
１３からのローカル参加者画像、およびマイクロフォン
１１４からのローカル参加者音声を入力し、これらを多
重化しメディアデータＭＤ_ｏｕｔ（ビデオ信号ＶＳ，音
声信号ＡＳ）を生成する。多重化信号出力部１３は、こ
のＭＤ_ｏｕｔをメディアデータＭＤとしてローカル参加
者の識別コードＳ_ｉｄと共に通信回線２００に出力す
る。一方、多重化信号入力部１２は、他の端末装置から
のメディアデータＭＤ（ビデオ信号ＶＳ，音声信号Ａ
Ｓ）をＭＤ_ｉｎとして、識別コードＳ_ｉｄと共に通信回
線２００から入力し、ビデオ信号ＶＳと識別コードＳ
_ｉｄとを参加者画像生成手段１６に出力する。なお、音
声信号ＡＳは、図示しない音声処理回路に出力され、こ
の音声処理回路はスピーカ１１２に参加者音声を出力さ
せる。

【００２７】参加者画像生成手段１６は、複数の参加者
画像が所定位置に配置された仮想画面３１（図３（ａ）
参照）を作成する。この仮想画面３１上には、通常は、
ビデオ会議に参加しているすべての参加者についての参
加者画像が所定の配列で割り振られる。

【００２８】図３（ａ）は、端末装置の外観および仮想
画面３１がモニタ１１１の参加者表示部３２に表示され
た様子を示している。同図（ａ）では、モニタ１１１は
コンピュータ筐体１２０上に載置されている。また、仮
想画面３１にはＡ〜Ｐの参加者画像が配置され、仮想画
面３１上の一部（通常、参加者画像の少なくとも１画像
であり、同図ではＫ）が、モニタ１１１の参加者表示部
３２に表示されている。なお、図３（ａ）に示したよう
な参加者表示部３２と、後述する参加者位置表示部３３
ａ〜３３ｄとは、別々のウィンドウに表示されるように
もできるし、図３（ａ）に示したように１つのウィンド
ウに表示されるようにもできる。また、このウィンドウ
をオープンするためのスイッチをアイコン化しておくこ
とができる。なお、参加者表示部３２および／または参
加者位置表示部３３ａ〜３３ｄは、拡大・縮小表示でき
るようにしてもよい。

【００２９】図２において、参加者画像生成手段１６
は、多重化信号入力部１２から入力したビデオ信号ＶＳ
を識別コードＳ_ｉｄと、位置記憶手段１８に記憶されて
いる後述する配置情報ＰＩとに基づき、図３（ａ）に示
した仮想画面３１上の所定位置に各参加者画像を表示す
る。なお、後述するように、配置情報ＰＩはローカル参
加者により変更されることがある。この場合には、参加
者画像生成手段１６は、配置情報ＰＩを位置記憶手段１
８から取得して、当該参加者画像の配置変更を行う。

【００３０】スクロール操作手段１１５は、仮想画面３
１を任意の方向にスクロール操作するために、ローカル
参加者に提供されるもので、相対位置信号ＲＰＳを生成
する。ローカル参加者が、スクロール操作手段１１５を
操作すると、参加者画像生成手段１６は、所望の参加者
画像が参加者表示部３２に表示されるように、仮想画面
３１を表示する画像信号ＶＤを後述するディスプレイ・
デバイス２１に出力する。そして、所望の参加者画像
が、スクロールされつつモニタ１１１に表示される。こ
こで、スクロール（通常、縦スクロール、横スクロール
（すなわち、パン）、これらの組み合わせ（斜めスクロ
ール）である。

【００３１】なお、スクロール操作手段１１５として、
ジョイスティックの他、フットペダル、またはキーボー
ドのキー（例えば、アローキー）を用いることができ
る。また、モニタ１１１に表示されたアロー形状をなす
ソフトキー（通常、マウスにより操作される）を用いる
こともできる。フットペダルを使用する場合には、手が
常に自由となるので、筆記や飲食を行いつつ仮想画面３
１をスクロールすることができる。

【００３２】また、参加者画像生成手段１６は、相対位
置信号ＲＰＳ、およびディスプレイ・デバイス２１が出
力するウィンドウ情報ＷＩに基づき、参加者表示部３２
に現在表示されている仮想画面３１の位置についての情
報（現在位置情報）ＣＰを生成し、これを位置算出手段
１７ａ〜１７ｄに出力する。ウィンドウ情報ＷＩは、参
加者表示部３２の、モニタ１１１の表示画面上での位
置、大きさ等に関する情報を含んでいる。本実施例で
は、現在位置情報ＣＰは、参加者画像生成手段１６が保
有しているが、他の手段が保有する（例えば、位置算出
手段１７ａ〜１７ｄそれぞれが保有する）こともでき
る。

【００３３】参加者画像生成手段１６は、上記した現在
位置情報ＣＰを位置記憶手段１８にも出力し、位置記憶
手段１８からローカル参加者の対話相手が誰であるかの
情報（すなわち、識別コードＡ_ｉｄ）を取得する。そし
て、参加者画像生成手段１６はシステム情報出力部１５
にこの識別コードＡ_ｉｄを出力し、システム情報出力部
１５は、システム情報ＳＩ_ｏｕｔ（識別コードＡ_ｉｄ，
ローカル参加者の識別コードＳ_ｉｄ，およびその役割を
示す識別コードＲＣ）を、ＳＩとして通信回線２００に
出力する。

【００３４】システム情報入力部１４は、システム情報
ＳＩ（識別コードＳ_ｉｄ，Ａ_ｉｄおよびＲＣ）をＳＩ
_ｉｎとして通信回線２００から入力し、これらを内蔵す
る記憶部１４１に関連付けて記憶している。特定参加者
変更手段１９は、システム情報入力部１４から識別コー
ドＲＣ、Ｓ_ｉｄを入力しており、これらを内蔵する記憶
部１９１に関連付けて記憶している。前述したようにＡ
_ｉｄは、ある参加者の端末装置のモニタに表示される他
の参加者を示す識別コードであり、当該端末装置におい
て仮想画面がスクロールされると、これに応じてコード
値が変更される。また、ＲＣは、ある参加者の役割を示
す識別コードであり、例えば、ある参加者が発言してい
るときと発言していないときとではそのコード値は異な
る。このため、記憶部１４１，１９１の記憶内容は、通
常、頻繁に更新される。

【００３５】ローカル参加者は、キーボード１１６から
特定参加者を誰にするかを設定することができる。特定
参加者変更手段１９は、キーボード１１６からの信号に
応じて特定参加者を誰にするかの信号をシステム情報入
力部１４に出力する。例えば、特定参加者変更手段１９
は、議長（または発言参加者、あるいは任意の参加者）
を特定参加者とするための信号がキーボード１１６から
入力されると、議長（または発言参加者、あるいは任意
の参加者）を示す選択用信号ＳＳ（識別コードＳ_ｉｄお
よび／またはＲＣ）をシステム情報入力部１４に出力す
る。なお、特定参加者の設定を、キーボード１１６を用
いずに、モニタ１１１に表示されたソフトキー（図示せ
ず）により設定するようにもできる。

【００３６】本実施例では、特定参加者が、システムに
より決定された議長（参加者画像Ｊ）およびその対話相
手（参加者画像Ｄ）、ならびにローカル参加者が選択し
た参加者（参加者画像Ｍ）およびその対話相手（参加者
画像Ｐ）の４人であるものとする。システム情報入力部
１４は、議長（参加者画像Ｊで示される）を示す識別コ
ードＳ_ｉｄおよびその対話相手（参加者画像Ｄで示され
る）を示す識別コードＡ_ｉｄ（図２ではＳ_ｓｃｃ，Ｓ
_{ａ＿ｓｃｃ}として示す）を、位置算出手段１７ａおよび
１７ｂにそれぞれ出力する。また、システム情報入力部
１４は、ローカル参加者が選択した参加者（参加者画像
Ｍで示される）を示す識別コードＳ_ｉｄおよびその対話
相手（参加者画像Ｐで示される）を示す識別コードＡ
_ｉｄ（図２ではＳ_ｌｃｃ，Ｓ_{ａ＿ｌｃｃ}として示す）を
位置算出手段１７ｂ，１７ｃに出力する。

【００３７】前述したように、位置記憶手段１８は、各
参加者画像Ａ〜Ｐの、仮想画面１６上での配置情報ＰＩ
を記憶している。この配置情報ＰＩは、最も簡単な例で
は、ある参加者画像が配置された位置を基準に、単に各
参加者画像の順序を、単純な序列行列や行列として表す
こともできるし座標情報で表すこともできる。識別コー
ドＳ_ｉｄがＳ_ｓｃｃ，Ｓ_ｌｃｃ，Ｓ_{ａ＿ｓｃｃ}，Ｓ
_{ａ＿ｌｃｃ}である参加者（すなわち、特定参加者）の画
像の、位置記憶手段１８の配置情報ＰＩは、位置算出手
段１７ａ〜１７ｄに出力される。位置算出手段１７ａ〜
１７ｄは、（ｉ）位置記憶手段１８から取得した各特定
参加者画像の仮想画面３１上での配置情報ＰＩと、（ｉ
ｉ）参加者画像生成手段１６からの現在位置情報ＣＰと
に基づき、上記各参加者画像の仮想画面３１上での参加
者表示部３２を基準とする位置の算出を行う。この算出
結果は、本実施例では、位置ベクトル情報ＰＶ_ａ〜ＰＶ
_ｄである。

【００３８】位置算出手段１７ａ〜１７ｄは、参加者表
示部３２を基準として、予め選択されている上記４つの
特定参加者画像（議長および議長の対話相手、ならびに
ローカル参加者が選択した参加者およびその対話相手の
それぞれ画像）Ｊ，Ｄ，Ｍ，Ｐの位置ベクトル情報ＰＶ
_ａ〜ＰＶ_ｄをディスプレイ・デバイス２１に出力する。

【００３９】ディスプレイ・デバイス２１は、位置算出
手段１７ａ〜１７ｄにより算出された位置ベクトル情報
ＰＶ_ａ〜ＰＶ_ｄに基づき、図３（ａ）に示したように、
各特定参加者画像の位置をガイド手段（すなわち参加者
位置表示部３３ａ〜３３ｄ）に表示させる。特定参加者
位置表示部３３ａ〜３３ｄにおける位置表示は、通常は
図３（ａ）に示したようにアロー３４により表示される
が、数値で表示することも可能である。

【００４０】図３（ａ）の例では、参加者表示部３２の
基準位置（通常、該表示部の中心位置）と、特定参加者
画像の位置（通常、該画像の中心位置）との最短距離が
アロー３４の長さで表示され、参加者表示部３２を基準
とする特定参加者画像Ｊ，Ｄ，Ｍ，Ｐの方向がアロー３
４の方向で表示されている。

【００４１】ローカル参加者は、位置記憶手段１８に記
憶されている配置情報ＰＩを変更することができる。す
なわち、参加者配置変更手段２０は、キーボード１１６
からの信号に応じて、位置記憶手段１８に配置変更用の
信号（識別コードＳ_ｉｄと配置情報ＰＩからなる）を出
力することができる。ローカル参加者は、自分が注目し
たい２以上の参加者の参加者画像を近接して配置するこ
ともできる。こうすることにより、短いスクロール距離
で簡単に上記２以上の参加者を交互に参加者表示部３２
に表示させることができる。また、参加者表示部３２を
拡大することにより、該表示部３２に同時に上記２以上
の参加者を表示させることができる。なお、配置情報の
変更をモニタ１１１に表示されたソフトキーにより設定
するようにもできる。

【００４２】以下、上記ビデオ会議システムの動作を図
２および図３（ａ）を参照しつつより具体的に説明す
る。図２，図３（ａ）の実施例においては、端末装置１
００が起動されると、システム情報入力部１４が、通信
回線２００からシステム情報ＳＩ（識別コードＳ_ｉｄ，
Ａ_ｉｄ，ＲＣ，場合によりビデオ会議参加者人数等の情
報を含む）をＳＩ_ｉｎとして入力する。なお、参加者画
像生成手段１６は、位置記憶手段１８からのデフォルト
情報に基づき、参加者画像Ａ〜Ｐを仮想画面３１上に配
置する。

【００４３】ここで、ローカル参加者が、必要に応じ、
キーボード１１６から特定参加者画像を選択すると、特
定参加者変更手段１９からの選択用信号ＳＳ（Ｓ_ｉｄお
よび／またはＲＣ）がシステム情報入力部１４に出力さ
れる。システム情報入力部１４は、特定参加者の識別コ
ードＳ_ｉｄ（Ｓ_ｓｃｃ，Ｓ_ｌｃｃ）および識別Ａ
_ｉｄ（Ｓ_{ａ＿ｓｃｃ}，Ｓ_{ａ＿ｌｃｃ}）を位置算出手段１
７ａ〜１７ｄに出力する。位置算出手段１７ａ〜１７ｄ
は、参加者画像生成手段１６からの現在位置情報ＣＰお
よび位置記憶手段１８に記憶された配置情報ＰＩを参照
して、各特定参加者画像の仮想画面３１上での位置情報
をディスプレイ・デバイス２１に出力する。そして、デ
ィスプレイ・デバイス２１は、アロー３４を参加者位置
表示部３３ａ〜３３ｄにそれぞれ表示させる。

【００４４】ローカル参加者が、参加者位置表示部３３
ａ〜３３ｄの何れかを参照して、スクロール操作手段１
１５を操作すると、操作手段１１５からの相対位置信号
ＲＰＳは参加者画像生成手段１６に出力される。

【００４５】参加者画像生成手段１６は、特定参加者画
像が参加者表示部３２に表示されるように仮想画面３１
をスクロールする。また、位置算出手段１７ａ〜１７ｄ
は、現在位置信号ＣＰと配置情報ＰＩとに基づき、参加
者位置表示部３３ａ〜３３ｄのアロー３４を変更する。

【００４６】例えば、ローカル参加者は、参加者位置表
示部３３ｂのアロー３４を参照して、スクロール操作手
段１１５を操作することにより、議長（参加者画像Ｊ）
の対話相手の画像（参加者画像Ｄ）を、参加者表示部３
２に表示させることができる。また、議長と、ある参加
者（例えば、参加者画像Ｄとして表示されている参加
者）とが頻繁に討議をしているような場合には、図３
（ｂ）に示すように、キーボード１１６（図２参照）を
用いて、議長の参加者画像Ｊと参加者画像Ｄとを近接位
置に配置することもできる。

【００４７】図３（ａ）の参加者表示部３２に複数の参
加者を表示することもできる。このためには、通常、仮
想画面３１は縮小表示されるか、または参加者表示部３
２が横長および／または縦長にされる。この場合、図２
を参照して説明すると、参加者画像生成手段１６は複数
の識別コードＡ_ｉｄをシステム情報出力部１５に出力
し、システム情報出力部１５は、システム情報ＳＩ
_ｏｕｔにこれら複数の識別コードＡ_ｉｄを含め、ＳＩと
して通信回線２００に出力する。他の端末装置が、この
ような複数の識別コードＡ_ｉｄを含むシステム情報ＳＩ
を出力している場合には、システム情報入力部１４は、
他の端末装置から、このシステム情報ＳＩをシステム情
報ＳＩ_ｉｎとして入力する。この場合には、メディアデ
ータ処理装置１には、複数の対話相手を示す参加者位置
表示部およびこれに対応する位置算出手段が、識別コー
ドＡ_ｉｄの個数に応じて予め用意される。

【００４８】本発明では、発言参加者を特定参加者とす
ることで、参加者Ｘ_１の発言に対して参加者Ｘ_２が発言
し、この参加者Ｘ_２の発言に対して参加者Ｘ_３が発言す
るような場合に、ローカル参加者は、参加者Ｘ_１，
Ｘ_２，Ｘ_３を追跡することができる。この場合には、図
３（ａ）の参加者位置表示部３３ｃには発言参加者画像
の仮想画面３１上での位置が、同じく参加者位置表示部
３３ｄにはその対話相手の仮想画面３１上での位置が表
示されるようにしておく。参加者Ｘ_１がその端末装置の
モニタの参加者表示部に参加者Ｘ_２を表示させ、参加者
Ｘ_２に話しかけると、参加者位置表示部３３ｃには参加
者Ｘ_１の画像位置が表示され、参加者位置表示部３３ｄ
には参加者Ｘ_２の画像位置が表示される。次に、参加者
Ｘ_２がその端末装置のモニタの参加者表示部に参加者Ｘ
_３を表示させて参加者Ｘ_３に話しかけると、参加者位置
表示部３３ｃには参加者Ｘ_２の画像位置が表示され、参
加者位置表示部３３ｄには参加者Ｘ_３の画像位置が表示
される。したがって、ローカル参加者は、参加者位置表
示部３３ｃ，３３ｄを参照することにより、容易に発言
参加者Ｘ_１，Ｘ_２、発言参加者の対話相手Ｘ_２，Ｘ_３を
順次追跡することができる。

【００４９】なお、特定参加者位置表示部３３ａ〜３３
ｄに表示されたアロー３４を適宜位置にドラッグできる
ようにもできる。図３（ａ）には、参加者画像にドラッ
グされたアロー３４が点線で示されている。このアロー
３４は、実際においても点線（あるいは、参加者画像の
視認の障害とならないような形態）で表示することが好
ましい。アロー３４を参加者にオーバーラップさせるこ
とで、ローカル参加者の視点がモニタ１１１の画面上を
移動する頻度は減少する。これにより、アイコンタクト
の不都合が低減される。

【００５０】図３（ａ）においては、参加者画像Ａ〜Ｐ
が仮想画面３１に平面モードでマトリクス状に配置され
ている場合を示したが、図４（ａ）に示すように、参加
者画像Ａ〜Ｐが表示される面を球面と同相とし、各参加
者画像を任意の方向に方向に自在にスクロールできるよ
うにしてもよい。また、図４（ｂ）に示すように、各参
加者画像Ａ〜Ｐを、仮想画面３１に、垂直または水平
（同図では水平）の直線モードで配置してもよい。ま
た、この場合にも、図４（ｃ）に示すように、各参加者
画像をループ状に配置してもよい。

【００５１】

【発明の効果】以上述べたように、本発明は以下のよう
な効果を奏することができる。（１）ローカル参加者は、仮想画面上に配置された各参
加者画像を、該仮想画面をスクロールすることにより自
由に選択して表示できるので、全ての参加者画像を１つ
のモニタに表示する必要がなくなった。

【００５２】（２）ローカル参加者は、他の参加者、お
よび／またはその対話相手を視覚的なガイド手段を用い
て容易に見つけ出すことができる。

【００５３】（３）参加者位置表示部の指示に基づく仮
想画面のスクロールは、ジョイスティックの操作、ソフ
トキーやハードキーの操作により行うことができる。ま
た、参加者位置表示部は、シンプルな指示をローカル参
加者に与えることができる。したがって、本発明におい
ては、多数のアイコンがオーバーラップしたウィンドウ
から、マウス操作により所定の参加者画像を捜さなけれ
ばならない従来技術と比較して、所望参加者をモニタ上
に表示させる際の操作性が極めて高い。

【００５４】（４）ビデオ会議参加者が多数であったと
しても、モニタに表示される参加者画像をスクロールで
きる。したがって、該モニタに表示される参加者画像を
１人あるいは極めて少数とできるので、ローカル参加者
の視線が移動する頻度は極めて少ない。したがって、ロ
ーカル参加者の画像を通信回線を介して見ている他の参
加者は、ローカル参加者の視線の動きが気になるといっ
た、アイコンタクトの不都合は従来と比較して大幅に低
減される。

【図面の簡単な説明】

【図１】本発明のビデオ会議システムが適用されるシス
テムの一例を示す図である。

【図２】本発明のビデオ会議システムの説明図である。

【図３】（ａ）は図２のビデオ会議システムのモニタの
表示状態等を示す説明図であり、（ｂ）は議長画像Ｊと
参加者画像Ｄとを近接位置に配置した様子を示す図であ
る。

【図４】本発明のビデオ会議システムにおける仮想画面
の態様を示す説明であり、（ａ）は仮想画面が球面と同
相な表示面に配置された様子を示す図、（ｂ）は仮想画
面が直線モードで配置された様子を示す図、（ｃ）は、
仮想画面がループ状の線モードで配置された様子を示す
図である。

【符号の説明】

１メディアデータ処理装置１２多重化信号入力部１３多重化信号出力部１４システム情報入力部１４１，１９１記憶部１５システム情報出力部１６参加者画像生成手段１７ａ〜１７ｄ位置算出手段１８位置記憶手段１９特定参加者変更手段２０参加者配置変更手段２１ディスプレイ・デバイス３１仮想画面３２参加者表示部３３ａ〜３３ｄ参加者位置表示部３４アロー１１１モニタ１１２スピーカ１１３ビデオカメラ１１４マイクロフォン１１５スクロール操作手段１１６キーボード１２０コンピュータ筐体１００端末装置２００通信回線ＭＤ，ＭＤ_ｏｕｔ，ＭＤ_ｉｎ多重化信号ＳＩ，ＳＩ_ｏｕｔ，ＳＩ_ｉｎシステム情報Ｓ_ｉｄ，Ａ_ｉｄ，ＲＣ識別コードＶＳビデオ信号ＡＳ音声信号ＲＰＳ相対位置信号ＳＳ選択用信号ＰＩ配置情報ＣＰ現在位置信号ＰＶ_ａ〜ＰＶ_ｄ位置ベクトル情報ＶＤ画像信号

Claims

【特許請求の範囲】

【請求項１】画像表示装置、音響発生装置、撮像装
置、および音声入力装置を備えた複数の端末装置が、通
信回線を介して相互に参加者画像および参加者音声を含
むメディアデータを送受信する多地点ビデオ会議システ
ムであって、前記端末装置がスクロール操作手段を備え、メディアデータの処理装置が、（１）複数の参加者画像
が所定位置に配置された仮想画面を作成し、前記仮想画
面の一部を、前記画像表示装置の参加者表示部に表示さ
せると共に、任意の前記参加者画像が前記参加者表示部
に表示されるように前記仮想画面を、前記スクロール操
作手段からの相対位置信号に応じてスクロールさせるこ
とができる参加者画像生成手段、（２）前記各参加者画
像の、該仮想画面上での位置を記憶する位置記憶手段、
（３）前記参加者画像の中から選択された少なくとも１
つの特定参加者画像の、前記参加者表示部を基準とした
前記仮想画面上での位置を、前記位置記憶手段から取得した前記特定参加者画像の前
記仮想画面上での配置情報と、前記参加者表示部に表示されている画像の前記仮想画面
上での位置と、に基づき算出する手段、を有してなり、前記画像表示装置は、前記特定参加者画像の前記仮想画
面上での位置を、前記端末装置の参加者に視覚的に知ら
せるためのガイド手段を表示する、ことを特徴とする多
地点ビデオ会議システム。
【請求項２】第１の端末装置の画像表示装置に表示さ
れたガイド手段が、第１の端末装置における仮想画面上
での、第２の前記端末装置の画像表示装置の参加者表示
部に表示されている参加者画像の位置を、前記第１の端
末装置の参加者に視覚的に知らせることを特徴とする請
求項１に記載の多地点ビデオ会議システム。
【請求項３】前記ガイド手段が前記特定参加者画像の
位置を指し示すアローであり、前記アローの長さが、前記仮想画面における、前記参加
者表示部を基準とする前記特定参加者画像の距離であ
り、前記アローの方向が、前記仮想画面における、前記参加
者表示部を基準とする前記特定参加者画像の方向であ
る、ことを特徴とする請求項１または２に記載の多地点
ビデオ会議システム。
【請求項４】前記特定参加者画像の選択、または該選
択後の特定参加者画像の選択の変更を行う特定参加者変
更手段を備えてなることを特徴とする請求項１〜３に記
載の多地点ビデオ会議システム。
【請求項５】前記位置記憶手段に記憶されている前記
参加者画像の前記仮想画面上での配置情報の指定または
その変更を行う参加者配置変更手段を備えてなることを
特徴とする請求項１〜４に記載の多地点ビデオ会議シス
テム。
【請求項６】前記メディアデータの処理装置は、画像
表示装置の参加者画像表示部に表示されている参加者画
像を特定するための情報を出力するシステム情報出力部
を有すると共に、他の端末装置からの前記情報を入力す
るシステム情報入力部を有してなることを特徴とする請
求項１〜５に記載の多地点ビデオ会議システム。