JP2003299051A - 情報出力装置および情報出力方法 - Google Patents

Abstract

(57)【要約】 【課題】 複数人で行うテレビ会議において、発言者が
分かりにくく、発言を促進しないシステムであった。 【解決手段】 ２以上の情報処理装置から映像を含む情
報、または映像と音声を含む情報を入力して相互に送受
信する場合に、受信した情報に基づいて、発言者の情報
処理装置を決定し、当該発言者の情報処理装置から受信
した映像を他の情報処理装置から受信した映像と視覚的
に区別する映像を出力する情報出力方法により発言者を
視覚的に明示でき、発言を促進する教育的な効果を奏す
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、複数人で議論を行
い、または外国語会話等の学習等を行うための電子的な
会議等の場を提供する情報処理システム、情報出力装置
等に関するものである。

【０００２】

【従来の技術】従来技術における、複数人で議論を行
い、または外国語会話等の学習等を行うための電子的な
会議等の場を提供する情報処理システムは、以下のよう
なものであった。つまり、従来技術として、複数人で英
語会話の練習を行うシステムが実用化されている。当該
従来技術は、図７に示すように、４人（例えば、講師１
人と生徒３人）の映像が画面上に出力される。かかる映
像は、４つの情報処理装置から入力された映像を合成し
て出力されたものである。その合成された映像は、４つ
の情報処理装置に出力される。また、映像の合成方法
は、以下の通りである。４つの情報処理装置から入力さ
れた映像それぞれに対応するウィンドウを設ける。各ウ
ィンドウは、同一の大きさで、その大きさや配置などの
ウィンドウ属性値は固定である。また、４つの情報処理
装置から入力された音声も、リアルタイムで、各情報処
理装置から出力される。

【０００３】

【発明が解決しようとする課題】しかし、従来技術によ
れば、４つの情報処理装置から入力された映像それぞれ
に対応するウィンドウの属性値は固定であるので、発言
者がわかりにくい。また、発言したことの履歴が明示さ
れないので、発言しなくても、何の問題もなく議論や英
会話のクラスが進行する。つまり、発言しないことに対
する恥ずかしさ等の気持ちが、発言しない人に芽生えな
い。よって、教育的な意義を考えれば、従来技術では、
不十分である。

【０００４】さらに、従来技術によれば、グループで討
議する場合の形式が分からず、議論の内容も理解し難い
ものであった。

【０００５】

【課題を解決するための手段】以上の課題を解決するた
めに、第一の発明は、２以上の情報処理装置から映像を
含む情報、または映像と音声を含む情報を入力して相互
に送受信する場合に、受信した情報に基づいて、発言者
の情報処理装置を決定し、当該発言者の情報処理装置か
ら受信した映像を他の情報処理装置から受信した映像と
視覚的に区別する映像を出力する情報出力方法により、
発言者を視覚的に明示する。また、第二の発明は、２以
上の情報処理装置から映像を含む情報、または映像と音
声を含む情報を入力して相互に送受信する場合に、受信
した情報に基づいて、発言者の情報処理装置を決定し、
当該決定した発言者の情報処理装置を識別する情報処理
装置識別子を有する発言履歴情報を記録し、発言履歴情
報に基づいて、発言者の履歴を視覚的に明示する映像を
出力する情報出力方法を提供する。さらに、第三の発明
は、２以上の情報処理装置から映像を含む情報、または
映像と音声を含む情報を入力して相互に送受信する場合
に、グループで討議する形式に関する情報である討議形
式情報を取得し、討議形式情報に基づいて受信した情報
を出力する情報出力方法を提供する。

【０００６】

【発明の実施の形態】以下に、本発明の実施の形態につ
いて、図面を用いて詳細に説明する。なお、本実施の形
態において、同一の符号を用いた構成要素やフローチャ
ートのステップなどは、同じ機能を果たすので、一度説
明したものについて説明を省略する場合がある。

【０００７】（実施の形態１）図１は、本実施の形態に
係る情報処理システムの概念図である。本情報処理シス
テムは、ｎ個の情報処理装置（１１から１ｎ）とサーバ
装置２２を有する。ｎ個の情報処理装置とサーバ装置２
２は、情報の送受信が可能である。

【０００８】ｎ個の情報処理装置を代表する情報処理装
置を情報処理装置１１とする。以下、情報処理装置１１
およびサーバ装置２２を有する情報処理システムについ
て説明する。情報処理システムの構成を図２のブロック
図に示す。情報処理装置１１は、端末映像取得部１１０
１、端末音声取得部１１０２、端末情報送信部１１０
３、端末情報受信部１１０４、端末情報出力部１１０５
を有する。

【０００９】端末映像取得部１１０１は、情報処理装置
１１の利用者の映像を取得する。端末映像取得部１１０
１は、通常、カメラとカメラから映像を取り出すソフト
ウェアで実現され得る。但し、カメラは情報処理装置１
１の外付けのものでも良い。かかる場合、端末映像取得
部１１０１は、カメラから映像を取り出すソフトウェア
または、カメラから映像を取り出す専用回路（ハードウ
ェア）で実現され得る。

【００１０】端末音声取得部１１０２は、情報処理装置
１１の利用者が発声する音声を取得する。端末音声取得
部１１０２は、マイクと当該マイクが集音した音声を取
り出すソフトウェアで実現され得る。但し、マイクは情
報処理装置１１の外付けのものでも良い。かかる場合、
端末音声取得部１１０２は、マイクが集音した音声を取
り出すソフトウェアまたはマイクが集音した音声を取り
出す専用回路（ハードウェア）で実現され得る。

【００１１】端末情報送信部１１０３は、端末映像取得
部１１０１が取得した映像、および／または端末音声取
得部１１０２が取得した音声、および情報処理装置１１
を識別する情報である情報処理装置識別子を有する情報
を送信する。情報処理装置識別子は、情報処理装置１１
に格納されている、とする。端末情報送信部１１０３
は、通常、無線または有線の通信手段で実現され得る
が、放送手段で実現しても良い。特に、ＣＡＴＶケーブ
ルで送信する手段は、端末情報送信部１１０３として好
適である。なお、端末情報送信部１１０３が送信する情
報が、映像、音声、情報処理装置識別子の他、テキスト
データを含んでも良い。テキストデータの例として、
「○○さん発言中」などの当該端末が発言中であること
を示すデータ等がある。

【００１２】端末情報受信部１１０４は、サーバ装置２
２から送信される情報を受信する。サーバ装置２２から
送信される情報は、映像と音声を含む。端末情報受信部
１１０４は、通常は、無線または有線の通信手段で実現
され得るが、放送を受信する手段（例えば、チューナー
およびそのドライバーソフト等）で実現しても良い。

【００１３】端末情報出力部１１０５は、端末情報受信
部１１０４が受信した情報（映像と音声を有する）を出
力する。端末情報出力部１１０５は、映像を画面出力
し、音声をスピーカーから出力する。端末情報出力部１
１０５は、例えば、ＣＲＴや液晶などのディスプレイと
そのドライバーソフト、およびスピーカーとそのドライ
バーソフトで実現され得る。

【００１４】サーバ装置２２は、情報受信部１２０１、
発言者決定部１２０２、画面構築部１２０３、情報出力
部１２０４を有する。

【００１５】情報受信部１２０１は、２以上の情報処理
装置から、映像、音声、および情報処理装置識別子を有
する情報を受信する。なお、情報受信部１２０１が受信
する情報の中に音声を含まない場合もある。情報受信部
１２０１は、通常は、無線または有線の通信手段で実現
され得るが、放送を受信する手段（例えば、チューナー
およびそのドライバーソフト等）で実現しても良い。

【００１６】発言者決定部１２０２は、情報受信部１２
０１が受信した２以上の情報に基づいて発言者の情報処
理装置を決定する。発言者決定部１２０２は、通常、決
定した情報処理装置を識別する情報処理装置識別子を格
納する。この格納とは、不揮発性の記録媒体への格納だ
けではなく、揮発性の記録媒体への一時的な格納も含
む。発言者決定部１２０２は、通常、ソフトウェアで実
現され得るが、専用回路（ハードウェア）で実現しても
良い。

【００１７】画面構築部１２０３は、発言者の情報処理
装置から受信した映像を他の情報処理装置から受信した
映像と視覚的に区別する映像を、２以上の受信した映像
から合成して構築する。画面構築部１２０３は、通常、
ソフトウェアで実現され得るが、専用回路（ハードウェ
ア）で実現しても良い。

【００１８】情報出力部１２０４は、画面構築部１２０
３で合成した映像と、情報受信部１２０１で受信した音
声を、情報処理装置（１１から１ｎ）に送信する。情報
出力部１２０４は、通常、無線または有線の通信手段で
実現され得るが、放送手段で実現しても良い。特に、Ｃ
ＡＴＶケーブルで送信する手段は、情報出力部１２０４
として好適である。なお、情報出力部１２０４は、サー
バ装置２２が有する／またはサーバ装置２２に接続され
ているディスプレイやスピーカー等の出力デバイスに情
報を出力するものであっても良い。

【００１９】以下、本実施の形態における情報処理装置
１１の動作について、図３のフローチャートを用いて説
明する。

【００２０】（ステップＳ３０１）端末映像取得部１１
０１は、映像を取得する。

【００２１】（ステップＳ３０２）端末音声取得部１１
０２は、音声を取得する。

【００２２】（ステップＳ３０３）端末情報送信部１１
０３は、格納されている情報処理装置識別子を取得す
る。

【００２３】（ステップＳ３０４）端末情報送信部１１
０３は、ステップＳ３０１、ステップＳ３０２、ステッ
プＳ３０３で取得した映像、音声、情報処理装置識別子
から送信する情報を構成する。情報の構成方法は、種々
ある。例えば、端末情報送信部１１０３は、映像、音
声、および情報処理装置識別子を多重化する。また、例
えば、端末情報送信部１１０３は、映像、音声、および
情報処理装置識別子を構造化して、コード化する。コー
ド化とは、具体的には、ＭＰＥＧの形式に情報を構成す
ることなどが考えられる。

【００２４】（ステップＳ３０５）端末情報送信部１１
０３は、ステップＳ３０４で構成した情報を送信する。

【００２５】（ステップＳ３０６）端末情報受信部１１
０４は、サーバ装置２２から情報を受信したか否かを判
断する。情報を受信すればステップＳ３０７に行き、情
報を受信しなければステップＳ３０６に戻る。

【００２６】（ステップＳ３０７）端末情報出力部１１
０５は、ステップＳ３０６で受信した情報から映像を取
得する。

【００２７】（ステップＳ３０８）端末情報出力部１１
０５は、ステップＳ３０６で受信した情報から音声を取
得する。

【００２８】（ステップＳ３０９）端末情報出力部１１
０５は、ステップＳ３０７で取得した映像を出力する。

【００２９】（ステップＳ３１０）端末情報出力部１１
０５は、ステップＳ３０８で取得した音声を出力する。

【００３０】（ステップＳ３１１）端末情報受信部１１
０４は、終了信号を受信したか否かを判断する。終了信
号を受信すれば終了し、終了信号を受信しなければステ
ップＳ３０１に戻る。

【００３１】以下、本実施の形態におけるサーバ装置２
２の動作について、図４のフローチャートを用いて説明
する。

【００３２】（ステップＳ４０１）カウンタｉに１を代
入する。

【００３３】（ステップＳ４０２）情報受信部１２０１
は、ｉ番目の情報を受信したか否かを判断する。なお、
サーバ装置２２と情報の送受信を行う情報処理装置の個
数が、最初に分かっていれば、その個数の回数だけステ
ップＳ４０２からステップＳ４０４の処理についてルー
プする。また、ｉ番目の情報とは、ｉ番目の情報処理装
置から受信した情報である。

【００３４】（ステップＳ４０３）情報出力部１２０４
は、ｉ番目の情報から映像を取得する。

【００３５】（ステップＳ４０４）情報出力部１２０４
は、ｉ番目の情報から音声取得する。

【００３６】（ステップＳ４０５）ｉをインクリメント
する。

【００３７】（ステップＳ４０６）発言者決定部１２０
２は、ステップＳ４０２で受信した情報に基づいて発言
者（の情報処理装置）を決定する。発言者（の情報処理
装置）を決定する方法は種々ある。例えば、ステップＳ
４０４で取得したｎ個の情報処理装置からの音声に基づ
いて発言者（の情報処理装置）を決定する方法がある。
最も大きな音声データを送信した情報処理装置の利用者
を発言者と決定する方法がある。最も大きな音声データ
は、平均の音量レベルが最も大ききデータを判断する場
合もあれば、音圧レベルや連続音声データ長などをパラ
メータとして決定する場合もある。その他、最も大きな
音声データの決定方法は種々ある。また、最も音量レベ
ルの変化が大きい音声データを送信した情報処理装置の
利用者を発言者と決定する方法がある。また、ステップ
Ｓ４０３で取得したｎ個の情報処理装置からの映像に基
づいて発言者（の情報処理装置）を決定する方法があ
る。ｎ個の情報処理装置から送信された映像の差分情報
を取っておき、最も差が大きい（最も動きが激しい）映
像データを送信した情報処理装置の利用者を発言者と決
定する方法がある。特に、輪郭抽出の技術を用いて、口
を抽出し、口の動きで発言者を決定するのが好適であ
る。また、情報処理装置から、発言者を示す情報である
発言者情報が送信される場合がある。かかる場合は、サ
ーバ装置２２が受信した情報の中で、発言者情報を有す
る情報を送信した情報処理装置の利用者が発言者であ
る。なお、発言者情報は、例えば、情報処理装置の利用
者が、情報処理装置に設置された発言者ボタンを押下す
ることにより、送信される。さらに、ある情報処理装置
（議論の議長）から送信された、発言者を識別する情報
を取得し、発言者を認識する方法がある。かかる場合、
議長が発言者を指定する態様が実現できる。なお、例え
ば、議長の情報処理装置から発言者を識別する情報が送
信される方法として、議長の情報処理装置がタッチパネ
ルになっており、議長が当該タッチパネルを押下して、
当該押下された位置と画面上のウィンドウの対応をとる
ことにより、どのウィンドウが指示されたか判断する方
法がある。そして、ウィンドウに対応する情報処理装置
識別子をサーバ装置または議長の情報処理装置で管理し
ておけば、議長がどの情報処理装置（発言者）を選択し
たかが判断できる。かかる方法の他、議長の情報処理装
置のインターフェイスとして、ソフト的に発言者を指名
するスイッチを付加したウィンドウを生成する方法や、
ハード的にスイッチを付加した議長専用の情報処理装置
（例えば、ＴＶのリモコンによる指名ができる装置な
ど）を用意する方法など、種々の方法が考えられるが、
発言者を特定できる方法であれば、自動／手動を問わ
ず、どのような方法でも良い。

【００３８】（ステップＳ４０７）画面構築部１２０３
は、２以上の受信した映像を合成して一の映像を構成す
る。その際に、画面構築部１２０３は、発言者の情報処
理装置から受信した映像を他の情報処理装置から受信し
た映像と視覚的に区別する映像を構築する。どのように
発言者の情報処理装置から受信した映像を他と区別する
かは、種々の態様がある。この区別する態様についての
具体例は、以下で詳細に述べる。

【００３９】（ステップＳ４０８）情報出力部１２０４
は、ステップＳ４０７で構築した映像を出力する。ここ
での出力は、通常、ｎ個の情報処理装置への映像の送信
である。

【００４０】（ステップＳ４０９）情報出力部１２０４
は、ステップＳ４０４で取得したｎ個の音声を出力す
る。ここでの出力は、通常、ｎ個の情報処理装置への音
声の送信である。通常、ｎ個の音声を出力する前に、ｎ
個の音声データに対して多重化する等の処理を行う。な
お、発言者の音声を強調するなどの目的で、発言者の音
声データのみ各情報処理装置において出力される場合に
は、発言者の音声データのみ配信しても良い。また、ｎ
個の各情報処理装置とサーバ装置２２とのネットワーク
上での距離（回線速度などの外的な要因によるものを含
む）を吸収する仕組みを導入しても良い。かかる仕組み
とは、例えば、サーバ装置２２と各情報処理装置との間
で同一データの送受信に要する時間を別途あらかじめ測
定しておき、その値を用いて時間的にデータを補正する
仕組みである。つまり、さらに具体的には、サーバ装置
２２と距離的に遠い一の情報処理装置の利用者がサーバ
装置２２と距離的に近い他の情報処理装置の利用者より
も時間的に先に発言したにも関わらず、データ通信の遅
延から、他の情報処理装置の利用者の情報が先にサーバ
装置に到着する場合がある。かかる場合に、上記のデー
タ補正の仕組みにより、発言時間の前後の狂いがなく、
サーバ装置から情報処理装置に情報が送信される。

【００４１】なお、図４のフローチャートによれば、サ
ーバ装置２２は、情報を一度受け取ったら処理を終了す
ることになるが、情報の受信と、映像合成、出力等を連
続して行っても良い。かかる場合、終了信号の受信など
により、処理を終了する。

【００４２】以下、本実施の形態における情報処理シス
テムの具体的な動作について説明する。今、例えば、図
５に示すように４つの情報処理装置がサーバ装置を経由
して、情報の送受信を行うものとする。４つの情報処理
装置とサーバ装置により、英会話の学習をリアルタイム
に行う情報処理システムを実現する。４つの情報処理装
置の利用者は、それぞれ先生、生徒１、生徒２、生徒３
であるとする。そして、各情報処理装置には、カメラと
マイクとディスプレイとスピーカーが接続されている。
各情報処理装置から、映像と音声（音声がない場合もあ
るが）がサーバ装置に送信される。そして、サーバ装置
では、４つの映像を合成する。そして、４つの音声を取
得する。そして、合成した一の映像と４つの音声を４つ
の情報処理装置に送信する。なお、サーバ装置からの音
声の送信は、送信先の情報処理装置から受信した音声を
除いて当該情報処理装置に音声を送信しても良い。

【００４３】ここで、映像の合成の仕方について詳細に
説明する。サーバ装置における４つの映像の合成の仕方
には、種々ある。まず、発言者決定部が、発言者の情報
処理送装置を決定する。この決定の方法は、上述したよ
うに種々考えられる。そして、当該発言者の情報処理送
装置の映像を、他の（発言者ではない者が利用者であ
る）情報処理装置からの映像と視覚的に区別するよう
に、４つの映像を合成する。

【００４４】具体的には、例えば、以下の態様がある。
例えば、図６に示すような４つのウィンドウの情報が、
画面構築部で管理されている。図６の表をウィンドウ管
理表と言うことにする。ウィンドウ管理表は、例えば、
「ウィンドウＩＤ」「情報処理装置識別子」「始点
（ｘ，ｙ）」「大きさ（ｗ，ｈ）」「背景色」「枠の太
さ」「枠の色」「枠の点滅」の属性値を有する。「ウィ
ンドウＩＤ」は、ウィンドウを識別する情報であり、１
から４の数字である。「情報処理装置識別子」は、ウィ
ンドウに表示する映像を送信してきた情報処理装置を識
別する情報である。情報処理装置識別子は、情報処理装
置の電話番号や、ＩＰアドレスや、電子メールアドレス
や、ネットワークカードに固有のｍａｃアドレスなど、
情報処理装置を識別する情報であれば何でも良い。な
お、通常、情報処理装置識別子を用いて通信を行う。
「始点（ｘ，ｙ）」は、ウィンドウを表示するときの画
面上の座標である。通常、「始点（ｘ，ｙ）」は、ウィ
ンドウの左上の座標である。「大きさ（ｗ，ｈ）」は、
ウィンドウの大きさ、つまりウィンドウの幅（ｗ）と高
さ（ｈ）を示す。「始点（ｘ，ｙ）」と「大きさ（ｗ，
ｈ）」により、ウィンドウの領域（矩形）が決定され
る。「背景色」は、ウィンドウの背景色である。「枠の
太さ」は、ウィンドウの枠の線の太さを示す。「枠の
色」は、ウィンドウの枠の線の色である。「枠の点滅」
は、ウィンドウの枠を点滅表示するか否かを示す情報で
ある。「枠の点滅」のとり得る値は、「ＯＮ」または
「ＯＦＦ」とする。なお、枠の点滅のさせ方は、枠全体
を同時に点滅させる方法に限るものではなく、例えば、
左上から右下に順に部分的に点滅させる方法や、左右対
称に順に点滅させる方法など、枠が強調されｒ方法であ
れば何でも良い。さらに、点滅させる際に、枠の表示色
を変化させていっても良い。この場合も、枠が強調され
る方法であれば何でも良い。

【００４５】そして、ウィンドウ管理表のデータが図６
のようなデータである場合は、サーバ装置は、画面を均
等に４等分して４つのウィンドウを構成し、各ウィンド
ウに各情報処理装置から送信された４つの映像を貼り付
けて一の映像に合成する。この合成した映像を図７に示
す。そして、当該映像が音声とともに４つの情報処理装
置に送信され、４つの情報処理装置では、図７の映像を
ディスプレイに表示する。そして、音声は、映像と同期
を取って、スピーカーから出力される。なお、ウィンド
ウの属性値が管理されている状態において画面上にウィ
ンドウを出力する技術は、既存技術であるので、説明を
省略する。

【００４６】今、生徒１（図５の情報処理装置）が発
言者であると決定されたとする。生徒１（図５の情報処
理装置）に対応するウィンドウは、「ウィンドウＩＤ
＝２」のウィンドウである、とする。かかる場合、画像
構築部は、「ウィンドウＩＤ＝２」のウィンドウの大き
さを大きくする、とする。例えば、画像構築部はウィン
ドウ管理表中の４つのウィンドウの「大きさ（ｗ，
ｈ）」「始点（ｘ，ｙ）」の値が、図８のように変更す
る、とする。なお、一つのウィンドウの大きさ変更に伴
って、他のウィンドウの大きさも変化する。今、タイル
式ウィンドウシステムを採用しているからである。但
し、オーバーラップ式のウィンドウシステムにより映像
を出力しても良い。かかる場合、一のウィンドウサイズ
の変更に伴って、他のウィンドウサイズが必ずしも変更
になるとは限らない。そして、図８のウィンドウ管理表
に従って、画像構築部は、４つの映像を合成する。する
と、図９のようになる。そして、図９の画面（映像）が
４つの情報処理装置に送信される。そして、図９の画面
を４つの情報処理装置が出力する。これによって、生徒
１（図５の情報処理装置）が発言者であることが視覚
的に明示される。つまり、発言者の情報処理装置から受
信した映像を他の情報処理装置から受信した映像より大
きくすることにより、発言者の情報処理装置から受信し
た映像を他の情報処理装置から受信した映像と視覚的に
区別して出力するのである。

【００４７】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、発言者の情報処理装置から受信
した映像の配置により、発言者の情報処理装置から受信
した映像を他の情報処理装置から受信した映像と視覚的
に区別する態様である。例えば、発言者の映像を常に、
図７のように４分割された画面中のウィンドウのうちの
左上のウィンドウに表示するのである。これにより。情
報処理装置の利用者は、発言者が誰であるか認識でき
る。これは、ウィンドウ管理表のウィンドウ属性の「始
点（ｘ，ｙ）」を変更することにより可能である。な
お、配置とは、出力される画面上の位置を言う。

【００４８】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、情報受信部が受信した各映像を
出力するウィンドウを２以上構成し、当該２以上のウィ
ンドウを合成した第一の映像に、発言者の情報処理装置
から受信した映像を出力するウィンドウからなる第二の
映像を上に重ねた映像を出力する態様である。発言者が
先生（図５の情報処理装置）であったとする。かかる
場合、ウィンドウ管理表は、図６から図１０のように変
更される。つまり、５つ目のウィンドウが生成される。
５つ目のウィンドウは先生（図５の情報処理装置）の
映像が出力されるウィンドウである。そして、図７の基
本的な映像出力の画面の上に、５つ目の映像が配置さ
れ、図１１に示すような一の映像がサーバ装置で構築さ
れる。そして、サーバ装置から４つの情報処理装置に一
の映像が送信され、４つの情報処理装置は一の映像を表
示する。つまり、サーバ装置の情報受信部が受信した各
映像を出力するウィンドウを２以上構成し、当該２以上
のウィンドウを合成した第一の映像に、発言者の情報処
理装置から受信した映像を出力するウィンドウからなる
第二の映像を上に重ねた映像を出力するのである。な
お、第二の映像と第一の映像の対応を図１２のように視
覚的に示しても良い。かかる場合、例えば、発言者が先
生（図５の情報処理装置）から生徒２（図５の情報処
理装置）に変わった場合には、図１２の表示が図１３
のようになり、生徒たちも発言する意欲がわいてくる。
また、第一の映像を表示しなくて、第二の映像だけを出
力しても良い。かかる場合、発言者だけの映像が出力さ
れることになる。なお、ここでは図１２および図１３に
おいて、対応する映像を斜線により表現したが、映像の
背景色を他と異なる色にしたり、対応する映像全体の明
度、彩度または輝度などを他と異なるものにしたり、対
応する映像のウィンドウ枠の色などを他と異なる色にし
ても良い。

【００４９】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、発言者の情報処理装置から受信
した映像を出力するウィンドウの背景色を他の情報処理
装置から受信した映像を出力するウィンドウの背景色と
異なる背景色にすることにより、発言者の情報処理装置
から受信した映像を他の情報処理装置から受信した映像
と視覚的に区別する態様である。発言者が先生（図５の
情報処理装置）であったとする。かかる場合、ウィン
ドウ管理表は、図６から図１４のように変更される。つ
まり、「ウィンドウＩＤ＝１」の「背景色」が「白」か
ら「赤」に変更される。そして、合成された画面は、図
１５のようになる。つまり、先生の映像を出力するウィ
ンドウの背景色が白から赤に変化する。これにより、発
言者の情報処理装置から受信した映像を他の情報処理装
置から受信した映像と視覚的に区別することができる。

【００５０】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、発言者の情報処理装置から受信
した映像を出力するウィンドウの枠の太さを他の情報処
理装置から受信した映像を出力するウィンドウの枠の太
さと異なる太さにすることにより、発言者の情報処理装
置から受信した映像を他の情報処理装置から受信した映
像と視覚的に区別する態様である。発言者が生徒３（図
５の情報処理装置）であったとする。かかる場合、ウ
ィンドウ管理表は、図６から図１６のように変更され
る。つまり、生徒３（図５の情報処理装置）に対応す
るウィンドウ「ＩＤ＝４」の枠の太さが「１」から「１
０」に変化する。そして、サーバ装置において、図１７
に示すような画面が構成され、４つの情報処理装置に送
信される。そして、４つの情報処理装置は図１７の画面
を出力する。図１７によれば、発言者の映像を出力して
いるウィンドウの枠の太さが、他の者の映像を出力して
いるウィンドウの枠の太さと異なり、発言者の情報処理
装置から受信した映像を他の情報処理装置から受信した
映像と視覚的に区別している。

【００５１】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、発言者の情報処理装置から受信
した映像を出力するウィンドウの枠の色を他の情報処理
装置から受信した映像を出力するウィンドウの枠の色と
異なる色にすることにより、発言者の情報処理装置から
受信した映像を他の情報処理装置から受信した映像と視
覚的に区別する態様である。発言者が生徒３（図５の情
報処理装置）であったとする。かかる場合、ウィンド
ウ管理表は、図６から図１８のように変更される。つま
り、生徒３（図５の情報処理装置）に対応するウィン
ドウ「ＩＤ＝４」の枠の色が「黒」から「赤」に変化す
る。そして、サーバ装置において、図１９に示すような
画面が構成され、４つの情報処理装置に送信される。そ
して、４つの情報処理装置は図１９の画面を出力する。
図１９によれば、発言者の映像を出力しているウィンド
ウの枠の色が、他の者の映像を出力しているウィンドウ
の枠の色と異なり、発言者の情報処理装置から受信した
映像を他の情報処理装置から受信した映像と視覚的に区
別している。なお、ウィンドウの枠の線の種類（直線、
破線、点線など）により、発言者の情報処理装置から受
信した映像を他の情報処理装置から受信した映像と視覚
的に区別しても良い。

【００５２】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、発言者の情報処理装置から受信
した映像を出力するウィンドウの枠を点滅させることに
より、発言者の情報処理装置から受信した映像を他の情
報処理装置から受信した映像と視覚的に区別する態様で
ある。かかる場合、発言者以外の情報処理装置から受信
した映像出力するウィンドウの枠は点滅させない。発言
者が生徒１（図５の情報処理装置）であったとする。
かかる場合、ウィンドウ管理表は、生徒１（図５の情報
処理装置）に対応するウィンドウ「ＩＤ＝２」の「枠
の点滅」の属性値が「ＯＦＦ」から「ＯＮ」に変化す
る。そして、サーバ装置において、右上のウィンドウの
枠が点滅するように画面を構成する。そして、サーバ装
置は当該画面を情報処理装置に送信し、情報処理装置
は、当該点滅のウィンドウ枠を含む画面を出力する。な
お、枠を点滅するアルゴリズムは、表示、削除を繰り返
すことで可能である。枠を点滅する記述は既存技術であ
るので、詳細な説明を省略する。以上より、発言者の情
報処理装置から受信した映像を出力するウィンドウの枠
を点滅させることにより、発言者の情報処理装置から受
信した映像を他の情報処理装置から受信した映像と視覚
的に区別できる。

【００５３】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、発言者の情報処理装置から受信
した映像を出力するウィンドウ内に予め決められたアイ
コンを出力することにより、発言者の情報処理装置から
受信した映像を他の情報処理装置から受信した映像と視
覚的に区別する態様である。発言者が生徒１（図５の情
報処理装置）であったとする。かかる場合、ウィンド
ウ管理表は変化しない、とする。しかし、サーバ装置
は、予め格納しているアイコン（図２０に示す）を取り
出し、発言者の生徒１（図５の情報処理装置）に対応
するウィンドウ（ＩＤ＝２）に添付する。そして、アイ
コンを添付したウィンドウを用いて映像を合成する。そ
の合成した映像は、図２１である。図２１によれば、発
言者の情報処理装置から受信した映像を出力するウィン
ドウ内に予め決められたアイコンを出力することによ
り、発言者の情報処理装置から受信した映像が他の情報
処理装置から受信した映像と比べて視覚的に区別されて
いる。

【００５４】次の、発言者の視覚的な明示の態様につい
て述べる。次の態様は、発言者の情報処理装置から受信
した映像を構成するフィールドの単位時間あたりの出力
フィールド数を、他の情報処理装置から受信した映像を
構成するフィールドの単位時間あたりの出力フィールド
数と異なる数にすることにより、発言者の情報処理装置
から受信した映像を他の情報処理装置から受信した映像
と視覚的に区別する態様である。通常、人がなめらかな
動画と考えるのが、１秒間に３０フィールド（フィール
ドは１枚の静止画を現す。）以上を出力する場合である
と言われている。そして、サーバ装置は映像出力を制御
して、発言者の映像を出力するウィンドウのみ３０フィ
ールド／秒の変化のある動画を出力し、他のウィンドウ
は、例えば、５フィールド／秒の変化ある動画を出力す
る。つまり、他のウィンドウは、６枚のフィールドは同
じフィールドにして、１／５秒ごとに取得した新しい静
止画（フィールドを用いて画面を合成する。かかる処理
を行うことにより、発言者の映像のみ、自然な動画に見
え、他の者の映像は、いわゆるコマ送りとなる。また、
例えば、発言者の映像を出力するウィンドウのみ３０フ
ィールド／秒の変化のある動画を出力し、他のウィンド
ウは、最後に発言した時のフィールド（静止画）をずっ
と出力し続ける、という表示態様がある。かかる場合、
発言者の映像のみ、自然な動画に見え、他の者の映像は
静止画に見える。以上のように、発言者の情報処理装置
から受信した映像を構成するフィールドの単位時間あた
りの出力フィールド数を、他の情報処理装置から受信し
た映像を構成するフィールドの単位時間あたりの出力フ
ィールド数と異なる数にすることにより、発言者の情報
処理装置から受信した映像を他の情報処理装置から受信
した映像と視覚的に区別することができる。なお、ここ
ではフィールド数を例に説明したが、有効画素数や転送
レートなど画質が明らかに変わるパラメータを変化させ
る方法であれば何でも良い。

【００５５】以上、本実施の形態によれば、複数の情報
処理装置から入力された映像を合成して、音声とともに
出力する場合に、発言者とそうでない者の映像を視覚的
に区別して出力することにより、発言者が誰であるかが
すぐに分かる。かかるシステムを英会話などの教育シス
テムに利用すると、発言していない人が明白であり、発
言を促すなどの教育的な効果が高い。

【００５６】なお、本実施の形態において、応用事例と
して、英会話等の教育システムでの利用を主として説明
したが、複数人で何らかの議論や討議等を行うときに利
用するシステムであればどのようなシステムでも利用可
能である。

【００５７】また、本実施の形態において、映像の視覚
的な区別は、主としてウィンドウ属性値を変化させるこ
とにより実現する例について述べたが、他の手段でも良
い。例えば、ウィンドウを表示せずに、サーバ装置が受
信した映像から人の輪郭抽出をして人の顔を切り取った
複数のデータを、背景に貼り付けて一の映像を構成して
も良い。つまり、ウィンドウの概念を用いなくても、２
以上の情報処理装置から映像を含む情報、または映像と
音声を含む情報を入力して相互に送受信する場合に、受
信した情報に基づいて、発言者の情報処理装置を決定
し、当該発言者の情報処理装置から受信した映像を他の
情報処理装置から受信した映像と視覚的に区別する映像
を出力する情報出力方法であれば良い。かかることは、
他の実施の形態においても該当する。

【００５８】また、本実施の形態において、ウィンドウ
の形状は矩形であったが、円形や星型などの他の形状で
も良い。かかることは、他の実施の形態においても該当
する。

【００５９】また、本実施の形態において、映像を合成
する処理はサーバ装置で行ったが、各情報処理装置で映
像の合成処理を行っても良い。つまり、ＴＶ会議システ
ム等の複数の人（拠点）の映像を合成して出力する場合
に、発言者を含むウィンドウを視覚的に明示すれば良
い。つまり、映像の合成の処理をどの装置で行うかは問
題ではない。例えば、図２２のように複数の情報処理装
置がバス接続されている場合、各情報処理装置で、他の
情報処理装置から送信される映像と自情報処理装置で取
得した映像を合成して、図７、図９、図１１、図１２、
図１３、図１５、図１７、図１９等のように出力しても
良い。つまり、上述したサーバ装置が映像を合成する処
理をしても、上述した情報処理装置が映像を合成する処
理をしても、処理の一部をサーバ装置が行い残りの処理
を情報処理装置が行う、という構成にしても、以下の情
報出力装置により、発明者を視覚的に明示する、という
効果が出る。２以上の情報処理装置から映像を含む情
報、または映像と音声を含む情報を受信する情報受信部
と、情報受信部が受信した２以上の映像を合成して１つ
の映像を構築する画面構築部と、画面構築部で合成した
映像と、情報受信部で受信した音声を出力する情報出力
部を具備する情報出力装置において、情報受信部が受信
した情報に基づいて、発言者の情報処理装置を決定する
発言者決定部をさらに具備し、発言者の情報処理装置か
ら受信した映像を他の情報処理装置から受信した映像と
視覚的に区別する映像を出力することを特徴とする情報
出力装置により上記の効果が出るのである。この情報出
力装置が上述したサーバ装置の場合、情報出力部は映像
等を送信する。また、この情報出力装置が上述した情報
処理装置の場合、情報出力部は映像をディスプレイに表
示し、音声をスピーカー等に出力する。また、サーバ装
置で出力映像を構成しても、情報処理装置で出力映像を
構成しても、どのように画面を構築するかは、上述した
ように種々の態様が考えられる。なお、ここでは、映像
情報、音声情報を取り扱う例を中心に説明したが、テキ
ストデータを取り扱っても良い。テキストデータは、例
えば、キーボードやＴＶのリモコンやモバイル端末など
のテキストを入力する入力装置を用いて入力される。

【００６０】また、本実施の形態において、発言者を視
覚的に区別する場合に、発言者が一人の場合を例として
説明したが、複数人での発表の場合に、複数人の映像を
視覚的に他と区別する出力にしても良い。また、連続発
表の場合に、当該連続する発表者を視覚的に明示する形
態で映像を出力しても良い。連続発表の場合の視覚的な
区別は、発言の順序や主従を視覚的に明示する映像出力
であっても良い。また、討議などの場合に、次の発言
者、あるいは今の発言者に対する質問者を視覚的に区別
することにより、次々と発言者が変わる際にスムーズに
進行することが考えられる。

【００６１】さらに、本実施の形態における各種の処理
は、ソフトウェアによって実現し、ソフトウェアダウン
ロードにより提供しても良い。また、かかるソフトウェ
アをＣＤ−ＲＯＭ等の記録媒体に記録して配布しても良
い。かかるソフトウェアによる実現については、他の実
施の形態において述べた処理も同様である。なお、本実
施の形態における各種の処理をソフトウェアで実現した
場合は、当該ソフトウェアは、２以上の情報処理装置か
ら映像を含む情報、または映像と音声を含む情報を入力
して相互に送受信する場合に、受信した情報に基づい
て、発言者の情報処理装置を決定し、当該発言者の情報
処理装置から受信した映像を他の情報処理装置から受信
した映像と視覚的に区別する映像を出力する情報出力方
法を実現することとなる。

【００６２】（実施の形態２）図２３は、本実施の形態
に係る情報処理システムのブロック図である。ｎ個の情
報処理装置を代表する情報処理装置を情報処理装置１１
とする。以下、本情報処理システムは、情報処理装置１
１等およびサーバ装置２３２を有する。情報処理装置１
１は、端末映像取得部１１０１、端末音声取得部１１０
２、端末情報送信部１１０３、端末情報受信部１１０
４、端末情報出力部１１０５を有する。サーバ装置２３
２は、情報受信部１２０１、発言者決定部１２０２、発
言履歴記録部２３２０１、画面構築部２３２０２、情報
出力部１２０４を有する。

【００６３】発言履歴記録部２３２０１は、発言者決定
部１２０２で決定した発言者の情報処理装置を識別する
情報処理装置識別子を有する発言履歴情報を記録する。
情報処理装置識別子は、発言者の情報処理装置を識別す
る情報であれば何でも良い。情報処理装置識別子は、例
えば、情報処理装置のＩＰアドレス、ｍａｃアドレス、
電話番号、情報処理装置と情報を送受信するための電子
メールアドレス、情報処理装置で取得した映像が出力さ
れるウィンドウのウィンドウ識別子等である。情報処理
装置識別子は、通常、情報受信部１２０１が受信する情
報の中に含まれている情報処理装置を識別する情報と同
じ情報である。しかし、情報受信部１２０１が受信する
情報の中に含まれている情報処理装置を識別する情報を
サーバ装置２３２が変換した情報でも良い。例えば、サ
ーバ装置２３２が情報処理装置を識別するＩＰアドレス
を受信し、サーバ装置２３２が当該ＩＰアドレスを情報
処理装置名に変換し、発言履歴記録部２３２０１が当該
情報処理装置名を記録しても良い。また、発言履歴記録
部２３２０１は、内部に有する記録媒体または、サーバ
装置２３２の外付けの記録媒体に発言履歴情報を記録す
る。記録媒体は、揮発性の記録媒体でも、不揮発性の記
録媒体でも良い。発言履歴記録部２３２０１に記録媒体
を含むと考えても、記録媒体を含まないと考えても良
い。発言履歴記録部２３２０１は、通常、ソフトウェア
で実現され得るが、専用回路（ハードウェア）で実現し
ても良い。

【００６４】画面構築部２３２０２は、発言履歴記録部
２３２０１が記録した２以上の発言履歴情報に基づいて
（記録前の最新の発言者決定部の決定にも一部基づく場
合もあり得る）、発言者の履歴を視覚的に明示する映像
を構成する。つまり、画面構築部２３２０２は、最近
に、どの人が発言したかの発言履歴を視覚的に示す映像
を、情報受信部１２０１が受信した映像を合成して、構
成する。画面構築部２３２０２は、通常、ソフトウェア
で実現され得るが、専用回路（ハードウェア）で実現し
ても良い。

【００６５】以下、本実施の形態におけるサーバ装置２
３２の動作について、図２４のフローチャートを用いて
説明する。

【００６６】（ステップＳ２４０１）情報受信部１２０
１は情報を受信したか否かを判断する。情報受信部１２
０１が情報を受信すればステップＳ４０１に行き、情報
受信部１２０１が情報を受信しなければステップＳ２４
０１に戻る。

【００６７】（ステップＳ２４０２）発言履歴記録部２
３２０１は、発言履歴情報を構成し、当該構成した発言
履歴情報を記録する。なお、発言履歴情報は、例えば、
スタックに記録される。

【００６８】（ステップＳ２４０３）画面構築部２３２
０２は、記録したすべての発言履歴情報を取得する。ま
たは、画面構築部２３２０２は、記録した発言履歴情報
の中で、最近のｘ個（ｘは予め決められた定数）の発言
履歴情報を取得する。

【００６９】（ステップＳ２４０４）画面構築部２３２
０２は、ステップＳ２４０３で取得した発言履歴情報に
基づいて、ステップ４０３で取得した映像を合成して、
一の映像を構成する。ステップＳ４０８に行く。

【００７０】（ステップＳ２４０５）情報受信部１２０
１は、情報処理装置から処理の終了を示す終了信号を受
信したか否かを判断する。終了信号を受信すればステッ
プＳ２４０６に行き、終了信号を受信しなければステッ
プＳ２４０１に戻る。

【００７１】（ステップＳ２４０６）情報出力部１２０
４は、他の情報処理装置（終了信号を送信した情報処理
装置を除く情報処理装置）に終了信号を送信する。な
お、情報出力部１２０４は、すべての情報処理装置に終
了信号を送信しても良い。

【００７２】以下、本実施の形態における情報処理シス
テムの具体的な動作について説明する。今、図２５に示
すように５つの情報処理装置（今、例えば、携帯情報端
末である、とする。）がサーバ装置を経由して、情報の
送受信を行う。携帯情報端末は、端末、端末、端末
、端末、端末と番号が付されている。５つの情報
処理装置とサーバ装置により、リアルタイムに議論する
ための情報処理システムを実現する。各情報処理装置
（携帯情報端末）は、カメラとマイクとディスプレイと
スピーカーを有している。各情報処理装置から、映像と
音声（音声がない場合もあるが）がサーバ装置に送信さ
れる。そして、サーバ装置では、５つの映像を種々の方
法により合成する。そして、５つの音声を取得する。そ
して、合成した一の映像と５つの音声を５つの情報処理
装置に送信する。なお、サーバ装置からの音声の送信
は、送信先の情報処理装置から受信した音声を除いて当
該情報処理装置に音声を送信しても良い。

【００７３】ここで、映像の合成の仕方について詳細に
説明する。サーバ装置における５つの映像の合成（５つ
すべての映像を利用するとは限らない。）の仕方には、
種々ある。まず、発言者決定部が、発言者の情報処理送
装置を決定する。この決定の方法は、上述したように種
々考えられる。そして、当該発言者の履歴を視覚的に示
すように５つの映像を用いて、一の映像を構成する。つ
まり、発言履歴記録部が記録した２以上の発言履歴情報
に基づいて、発言者の履歴を視覚的に明示する映像を出
力すれば良い。

【００７４】具体的には、例えば、以下の映像の合成の
態様がある。５人でコミュニケーションをしているが、
最近に発言していない一人の映像を除く４つの映像を合
成して一の映像を構成する方法がある。そして、４つの
映像を任意に配置しても良いが、４つの映像の配置を以
下のようにしても良い。

【００７５】つまり、２以上の発言履歴情報に基づい
て、当該２以上の発言者の情報処理装置から受信した２
以上の映像の配置により、前記発言者の履歴を視覚的に
明示する映像を出力する態様がある。サーバ装置は、図
２６に示すように画面を４分割し、最近に発言した者の
情報処理装置から送信される映像を順に、図２６の
（１）から（４）のウィンドウに出力する。つまり、最
も最近に発言した者の映像は図２６の（１）のウィンド
ウに出力され、次の映像が（２）、次が（３）、その次
が（４）のウィンドウに出力される。この仕組みは、例
えば、以下のような仕組みである。図２７に示すスタッ
クに、発言履歴情報が記録されている。図２７に示すス
タックには、下のデータほど時間的に前の発言者を示す
発言履歴情報であり、上のデータほど時間的に後（最
近）の発言者を示す発言履歴情報である。発言履歴情報
は、情報処理端末を識別する情報処理端末の名称である
が、情報処理端末を特定するための情報であれば何でも
良い。そして、図２８は、ウィンドウ管理表である。ウ
ィンドウ管理表では、４つのウィンドウが管理されてい
る。そして、４つのウィンドウは情報処理装置の画面を
４分割するウィンドウであり、図２８に示す情報を保持
している。そして、２以上の発言履歴情報に基づいて、
図２８の表の「情報処理装置識別子」が変化する。今、
図２７より、発言が時間的に後の者が利用者である情報
処理装置は「端末」「端末」「端末」「端末」
の順である。従って、「ウィンドウＩＤ＝１」対応する
情報処理装置は「端末」であり、「ウィンドウＩＤ＝
２」対応する情報処理装置は「端末」であり、「ウィ
ンドウＩＤ＝３」対応する情報処理装置は「端末」で
あり、「ウィンドウＩＤ＝４」対応する情報処理装置は
「端末」である。そして、サーバ装置は、図２８のウ
ィンドウ管理表に基づいてウィンドウを生成し、また、
２以上の発言履歴情報に基づいて、映像を合成する。そ
の結果、サーバ装置は、図２９に示す映像を得る。そし
て、サーバ装置は図２９に示す映像を音声とともに、各
携帯情報端末に送信する。各携帯情報端末は、図２９の
映像を受信し、当該映像をディスプレイ上に表示する。
以上、２以上の発言履歴情報に基づいて、当該２以上の
発言者の情報処理装置から受信した２以上の映像の配置
により、発言者の履歴を視覚的に明示する映像を出力す
る態様について説明した。また、発言してから一定の順
番を経過した発言者の情報処理装置からの映像を出力し
ない態様についても説明した。

【００７６】次の、発言者の履歴の視覚的な明示の態様
について述べる。次の態様も、２以上の発言履歴情報に
基づいて、当該２以上の発言者の情報処理装置から受信
した２以上の映像の配置により、発言者の履歴を視覚的
に明示する態様である。今、図３０に示すように４つの
情報処理装置（今、例えば、携帯情報端末である、とす
る。）がサーバ装置を経由して、情報の送受信を行う。
携帯情報端末は、端末、端末、端末、端末と番
号が付されている。４つの情報処理装置とサーバ装置に
より、リアルタイムに議論するための情報処理システム
を実現する。各情報処理装置（携帯情報端末）は、カメ
ラとマイクとディスプレイとスピーカーを有している。
各情報処理装置から、映像と音声（音声がない場合もあ
るが）がサーバ装置に送信される。そして、サーバ装置
では、４つの映像を種々の方法により合成する。そし
て、４つの音声を取得する。そして、合成した一の映像
と４つの音声を４つの情報処理装置に送信する。なお、
サーバ装置からの音声の送信は、送信先の情報処理装置
から受信した音声を除いて当該情報処理装置に音声を送
信しても良い。そして、かかる場合、図３１に示す発言
履歴情報が、サーバ装置によって記録されているとす
る。図３１は図２７と同様にスタックであり、図３１に
よれば、時間的に後に発言した順に「端末」「端末
」「端末」である。そして、「端末」の利用者
は、まだ発言していない。かかる状態において、例え
ば、ウィンドウ管理表は図３２になる。図３２を解釈し
てウィンドウを構成した例が、図３３である。発言者の
配置は、図２９に従うとする。図３３によれば、「ウィ
ンドウＩＤ＝４」の映像が出力されない。発言しない人
は映像を出力されないので、発言しようとするのであ
る。なお、図３１の発言履歴情報でも、「ウィンドウＩ
Ｄ＝４」のレコードの「情報処理装置識別子」の属性値
を「端末」としても良い。図３１の情報から「ウィン
ドウＩＤ＝４」で出力されるべき「情報処理装置識別
子」は分かるので、「ウィンドウＩＤ＝４」のレコード
の「情報処理装置識別子」の属性値を「端末」とする
ことは可能である。かかる場合、サーバ装置が合成する
映像は、図３４になる。サーバ装置は図３３または図３
４の映像を４つの情報処理装置に送信し、４つの情報処
理装置は図３３または図３４の映像を受信し出力する。

【００７７】次の、発言者の履歴の視覚的な明示の態様
について述べる。次の態様は、２以上の発言者の情報処
理装置から受信した２以上の映像を出力するウィンドウ
の枠の大きさを他のウィンドウの枠の大きさと異なる大
きさにすることにより、発言者の履歴を視覚的に明示す
る態様である。今、図３０に示すように４つの情報処理
装置（今、例えば、携帯情報端末である、とする。）が
サーバ装置を経由して、情報の送受信を行う。携帯情報
端末は、端末、端末、端末、端末と番号が付さ
れている。そして、図３１に示す発言履歴情報が、サー
バ装置によって記録されているとする。かかる場合、ウ
ィンドウ管理表は図３５になる。各端末に対応するウィ
ンドウの配置は固定であるが、発言履歴情報に基づいて
ウィンドウの枠の太さが異なるのである。図３５によれ
ば、「ウィンドウＩＤ＝１」の枠の太さは「１０」、
「ウィンドウＩＤ＝２」の枠の太さは「１５」、「ウィ
ンドウＩＤ＝３」の枠の太さは「５」、「ウィンドウＩ
Ｄ＝４」の枠の太さは「２０」である。従って、サーバ
装置は、４つの映像を合成し、図３６のような一の映像
を作り出す。そして、サーバ装置は、図３６の映像を４
つの情報処理装置に送信する。４つの情報処理装置が図
３６の映像を受信し出力する。以上、２以上の発言者の
情報処理装置から受信した２以上の映像を出力するウィ
ンドウの枠の大きさを他のウィンドウの枠の大きさと異
なる大きさにすることにより、発言者の履歴を視覚的に
明示する態様について説明した。

【００７８】次の、発言者の履歴の視覚的な明示の態様
について述べる。次の態様は、２以上の発言者の情報処
理装置から受信した２以上の映像を出力するウィンドウ
の枠の大きさを他のウィンドウの枠の大きさと異なる大
きさにすることにより、発言者の履歴の視覚的な明示す
る態様である。今、図３０に示すように４つの情報処理
装置（今、例えば、携帯情報端末である、とする。）が
サーバ装置を経由して、情報の送受信を行う。携帯情報
端末は、端末、端末、端末、端末と番号が付さ
れている。そして、図３１に示す発言履歴情報が、サー
バ装置によって記録されているとする。かかる場合、ウ
ィンドウ管理表は、例えば図３７になる。各端末に対応
するウィンドウの大きさが異なる。図３７によれば、
「ウィンドウＩＤ＝１」の枠の大きさは（６０，７
５）、「ウィンドウＩＤ＝２」の枠の大きさは（８０，
１００）、「ウィンドウＩＤ＝３」の枠の大きさは（２
４，３０）、「ウィンドウＩＤ＝４」の枠の大きさは
（１２０，１５０）である。従って、サーバ装置は、４
つの映像を合成し、図３８のような一の映像を作り出
す。そして、サーバ装置は、図３８の映像を４つの情報
処理装置に送信する。４つの情報処理装置が図３８の映
像を受信し出力する。なお、ウィンドウの始点（ｘ，
ｙ）は変化しない。ただ、バランスを考えてウィンドウ
の配置なども大きさとともに変化させても良い。

【００７９】次の、発言者の履歴の視覚的な明示の態様
について述べる。次の態様は、２以上の発言者の情報処
理装置から受信した２以上の映像を出力するウィンドウ
の背景色を他のウィンドウの背景色と異なる色にするこ
とにより、発言者の履歴を視覚的に明示する態様であ
る。今、図３０に示すように４つの情報処理装置（今、
例えば、携帯情報端末である、とする。）がサーバ装置
を経由して、情報の送受信を行う。携帯情報端末は、端
末、端末、端末、端末と番号が付されている。
そして、図３１に示す発言履歴情報が、サーバ装置によ
って記録されているとする。かかる場合、ウィンドウ管
理表は図３９になる。図３９によれば、「ウィンドウＩ
Ｄ＝１」の背景色は「灰（３０％黒）」、「ウィンドウ
ＩＤ＝２」の背景色は「灰（６０％黒）」、「ウィンド
ウＩＤ＝３」の背景色は「白」、「ウィンドウＩＤ＝
４」の背景色は「黒」である。従って、サーバ装置は、
４つの映像を合成し、図４０のような一の映像を作り出
す。そして、サーバ装置は、図４０の映像を４つの情報
処理装置に送信する。４つの情報処理装置が図４０の映
像を受信し出力する。

【００８０】次の、発言者の履歴の視覚的な明示の態様
について述べる。次の態様は、２以上の発言者の情報処
理装置から受信した２以上の映像を出力するウィンドウ
の枠の色を他のウィンドウの枠の色と異なる色にするこ
とにより、発言者の履歴を視覚的に明示する態様であ
る。今、図３０に示すように４つの情報処理装置（今、
例えば、携帯情報端末である、とする。）がサーバ装置
を経由して、情報の送受信を行う。携帯情報端末は、端
末、端末、端末、端末と番号が付されている。
そして、図３１に示す発言履歴情報が、サーバ装置によ
って記録されているとする。かかる場合、ウィンドウ管
理表は図４１になる。図４１によれば、「ウィンドウＩ
Ｄ＝１」のウィンドウの枠の色は「灰（３０％黒）」、
「ウィンドウＩＤ＝２」のウィンドウの枠の色は「灰
（６０％黒）」、「ウィンドウＩＤ＝３」のウィンドウ
の枠の色は「白」、「ウィンドウＩＤ＝４」のウィンド
ウの枠の色は「黒」である。なお、すべてのウィンドウ
の枠の太さも「５」とした。従って、サーバ装置は、４
つの映像を合成し、図４２のような一の映像を作り出
す。そして、サーバ装置は、図４２の映像を４つの情報
処理装置に送信する。４つの情報処理装置が図４０の映
像を受信し出力する。

【００８１】その他、発言者の履歴の視覚的な明示の態
様について種々ある。例えば、ウィンドウの枠の点滅の
方法を変えることにより、発言者の履歴を視覚的に明示
する方法である。また、動画の単位時間あたりの出力フ
ィールド数を変える（擬似的なものも含む。擬似的と
は、上述したように、同じ映像を出力している間は静止
しているように見えるというものである。）ことによ
り、発言者の履歴を視覚的に明示する方法である。

【００８２】以上、本実施の形態によれば、複数の情報
処理装置から入力された映像を合成して、音声とともに
出力する場合に（テレビ会議システム等において）、記
録した２以上の発言履歴情報に基づいて、発言者の履歴
を視覚的に明示する映像を出力することができる。従っ
て、発言していない者、発言が少ない者が明瞭に分か
る。かかるシステムを、テレビ会議や英会話などの教育
システムに利用すると、発言していない人が明白であ
り、指導的な効果や教育的な効果が高い。

【００８３】また、本実施の形態において、映像を合成
する処理はサーバ装置で行ったが、各情報処理装置で映
像の合成処理を行っても良い。つまり、ＴＶ会議システ
ム等の複数の人（拠点）の映像を合成して出力する場合
に、発言者の履歴を視覚的に明示する映像を出力すれば
良い。つまり、映像の合成の処理をどの装置で行うかは
問題ではない。例えば、図２２のように複数の情報処理
装置がバス接続されている場合、各情報処理装置で、他
の情報処理装置から送信される映像と自情報処理装置で
取得した映像を合成しても良い。よって、上述したサー
バ装置が映像を合成する処理をしても、上述した情報処
理装置が映像を合成する処理をしても、処理の一部をサ
ーバ装置が行い残りの処理を情報処理装置が行う、とい
う構成にしても、以下の情報出力装置により、発明者を
視覚的に明示する、という効果がでる。２以上の情報処
理装置から映像を含む情報、または映像と音声を含む情
報を受信する情報受信部と、情報受信部が受信した２以
上の映像を合成して１つの映像を構築する画面構築部
と、画面構築部で合成した映像と、情報受信部で受信し
た音声を出力する情報出力部を具備する情報出力装置に
おいて、情報受信部が受信した情報に基づいて、発言者
の情報処理装置を決定する発言者決定部と、発言者決定
部で決定した発言者の情報処理装置を識別する情報処理
装置識別子を有する発言履歴情報を記録する発言履歴記
録部をさらに具備し、発言履歴記録部が記録した２以上
の発言履歴情報に基づいて、発言者の履歴を視覚的に明
示する映像を出力することを特徴とする情報出力装置に
より上記の効果が出るのである。この情報出力装置が上
述したサーバ装置の場合、情報出力部は映像等を送信す
る。また、この情報出力装置が上述した情報処理装置の
場合、情報出力部は映像をディスプレイに表示し、音声
をスピーカー等に出力する。また、サーバ装置で出力映
像を構成しても、情報処理装置で出力映像を構成して
も、どのように画面を構築するかは、上述したように種
々の態様が考えられる。

【００８４】さらに、本実施の形態における各種の処理
は、ソフトウェアによって実現し、ソフトウェアダウン
ロードにより提供しても良い。また、かかるソフトウェ
アをＣＤ−ＲＯＭ等の記録媒体に記録して配布しても良
い。なお、本実施の形態における各種の処理をソフトウ
ェアで実現した場合は、当該ソフトウェアは、２以上の
情報処理装置から映像を含む情報、または映像と音声を
含む情報を入力して相互に送受信する場合に、受信した
情報に基づいて、発言者の情報処理装置を決定し、当該
決定した発言者の情報処理装置を識別する情報処理装置
識別子を有する発言履歴情報を記録し、発言履歴情報に
基づいて、発言者の履歴を視覚的に明示する映像を出力
する情報出力方法を実現することとなる。

【００８５】（実施の形態３）図４３は、本実施の形態
に係る情報処理システムのブロック図である。ｎ個の情
報処理装置を代表する情報処理装置を情報処理装置１１
とする。以下、本情報処理システムは、情報処理装置１
１等およびサーバ装置４３２を有する。情報処理装置１
１は、端末映像取得部１１０１、端末音声取得部１１０
２、端末情報送信部１１０３、端末情報受信部１１０
４、端末情報出力部１１０５を有する。サーバ装置４３
２は、情報受信部１２０１、討議形式取得部４３２０
１、画面構築部４３２０２、情報出力部１２０４を有す
る。

【００８６】討議形式取得部４３２０１は、グループで
討議する形式に関する情報である討議形式情報を取得す
る。討議形式情報とは、対等にｎ人で議論する討議形式
である対等対話形式を示す情報と人数を含む情報や、教
える人（教師）と教えられる人（生徒）がおり、これら
の人々で会話を行うという非対等対話形式を示す情報と
人数（教師と生徒）を示す情報を含む情報や、パネルデ
ィスカッションを示す情報と人数（パネラーの人数）を
示す情報を含む情報などがある。討議形式情報の取得方
法は種々ある。例えば、情報受信部１２０１がいずれか
の情報処理装置から受信する情報から討議形式情報を取
得する方法がある。かかる場合、ある情報処理装置から
討議形式情報がサーバ装置４３２に送信される。また、
例えば、サーバ装置で討議形式を判断する場合がある。
例えば、サーバ装置は、一定時間の間で音声の送信をす
る情報処理装置の利用者のみが討議する人と考えて、討
議する人数をまず算出する。そして、デフォルトを対等
の対話と考えて、算出した人数の対等対話形式であると
いう討議形式情報を取得する。また、ある情報処理装置
から送信される情報とサーバ装置４３２での判断により
討議形式情報を取得する方法がある。例えば、司会者が
利用者である情報処理装置から司会者であることを示す
情報が送信される。そして、サーバ装置は、一定時間の
間で音声の送信をする情報処理装置の利用者のみが討議
する人と考えて、討議する人数を算出する。そして、パ
ネルディスカッションの形式であり、算出した人数マイ
ナス１の人数がパネラーである（一人は司会者）である
と判断する方法である。討議形式取得部４３２０１は、
通常、ソフトウェアで実現されるが、専用回路（ハード
ウェア）で実現しても良い。

【００８７】画面構築部４３２０２は、討議形式取得部
４３２０１で取得した形式に基づいて情報受信部１２０
１で受信した２以上の映像を合成して１つの映像を構築
する。画面構築部４３２０２は、通常、ソフトウェアで
実現されるが、専用回路（ハードウェア）で実現しても
良い。

【００８８】以下、本実施の形態におけるサーバ装置４
３２の動作について、図４４のフローチャートを用いて
説明する。

【００８９】（ステップＳ４４０１）討議形式取得部４
３２０１は、討議形式が既に決まっているか否かを判断
する。討議形式が既に決まっていればステップｓ４４０
３に行き、討議形式が既に決まっていなければステップ
ｓ４４０２に行く。

【００９０】（ステップＳ４４０２）討議形式取得部４
３２０１は、討議形式情報を取得する。討議形式情報の
取得方法は種々考えられ、当該方法の例について既に説
明した。

【００９１】（ステップＳ４４０３）画面構築部４３２
０２は、討議形式取得部４３２０１で取得した討議形式
情報に基づいて、ステップＳ４０３で取得した映像を合
成する。

【００９２】以下、本実施の形態における情報処理シス
テムの具体的な動作について説明する。今、図４５に示
すように９つの情報処理装置がサーバ装置を経由して、
情報の送受信を行う。９つの情報処理装置のうち、一つ
は先生の情報処理装置（情報処理識別子を「先生」とす
る。）である。そして、８つは生徒の情報処理装置（情
報処理識別子をそれぞれ「生徒」「生徒」・・・
「生徒」とする。）である。かかる場合、通常、サー
バ装置は、図４６のような映像を合成して各情報処理装
置に送信する。そして、各情報処理装置では、図４６の
画面を出力している。かかる場合のウィンドウ管理表
は、図４７である。そして、先生から２名の生徒を指示
して、対等な形式でのディスカッションを行う指示が出
た、とする。かかる場合、先生の情報処理装置から「生
徒」と「生徒」がサーバ装置に送信される。そし
て、サーバ装置は、対話形式を対等対話形式であると決
定する（対等対話形式がデフォルトである、とす
る。）。かかる場合、サーバ装置は、図４７のウィンド
ウ管理表を図４８のウィンドウ管理表に更新する。ま
ず、サーバ装置は、先生の情報処理装置から「生徒」
と「生徒」の情報が送信され、かつ対等対話形式であ
ると判断することにより、２人で対等な対話が行われる
ことを知り、「ウィンドウＩＤ＝１０」と「ウィンドウ
ＩＤ＝１１」のレコードを、ウィンドウ管理表に生成す
る。なお、ウィンドウの大きさや始点は、対話を行う生
徒の数に基づいて決められる。そして、サーバ装置は、
対等対話形式であるから、矢印のアイコン（アイコン
）のウィンドウを生成する。これが、ウィンドウ管理
表の「ウィンドウＩＤ＝１２」のレコードである。な
お、アイコンは図５０に示すようにサーバ装置に管理さ
れている。図５０は、対話形式に対応したアイコンが管
理されている。サーバ装置は、図５０のアイコン管理表
から図４８の「ウィンドウＩＤ＝１２」のレコードを作
り出すのである。また、アイコンのウィンドウの始点
は、対話を行う生徒の数に基づいて決められる。図４８
のウィンドウ管理表から図４９の画面が構成される。

【００９３】また、先生から、生徒を指名して、先生
が特別に何かを教える場合を考える。かかる場合、対話
形式は非対称であり、画面は図５１のようになる。サー
バ装置は、非対称の対話形式であることを得て、上下に
２つのウィンドウ（先生と生徒）を配置したのであ
る。そして、非対称に合致するアイコンを図５０のアイ
コン管理表から取得して、ウィンドウ管理表にアイコン
に対応するレコードを生成する。

【００９４】なお、ここでは、先生の例について説明し
たが、先生の代わりに例えば、議長を務める生徒など、
他の利用者と異なる利用者であれば何でも良いことを言
うまでもない、また、その異なる利用者が動的にフレキ
シブルに変化しても構わない。

【００９５】以上の例は、ｎ（ｎは２以上の整数）個の
情報処理装置の利用者の中で、（ｎ−１）人以上の利用
者が発言を行う対話形式である場合、情報受信部が受信
した各映像を出力するウィンドウを２以上構成し、当該
２以上のウィンドウを合成した第一の映像に、（ｎ−
１）人以上の発言者の情報処理装置から受信した映像を
出力するウィンドウを合成した第二の映像を上に重ねた
映像を出力する例である。つまり、対話者のウィンドウ
を新たに生成し、ポップアップで表示した。しかし、討
議形式または／および対話している人を視覚的に表示す
る形態であれば他の形態でも良い。例えば、ｎ（ｎは２
以上の整数）個の情報処理装置の利用者の中で、（ｎ−
１）人以上の利用者が発言を行う形式である場合、（ｎ
−１）人以上の発言者の情報処理装置から受信した映像
を出力するウィンドウを他の情報処理装置から受信した
映像を出力するウィンドウより大きくすることにより、
（ｎ−１）人以上の発言者の情報処理装置から受信した
映像を他の情報処理装置から受信した映像と視覚的に区
別する形態がある。また、ｎ（ｎは２以上の整数）個の
情報処理装置の利用者の中で、（ｎ−１）人以上の利用
者が発言を行う形式である場合、（ｎ−１）人以上の発
言者の情報処理装置から受信した映像を出力するウィン
ドウの配置を他の情報処理装置から受信した映像を出力
するウィンドウの配置と異なる配置にすることにより、
（ｎ−１）人以上の発言者の情報処理装置から受信した
映像を他の情報処理装置から受信した映像と視覚的に区
別する態様がある。また、形式が、ｎ（ｎは２以上の整
数）個の情報処理装置の利用者の中で、（ｎ−１）人以
上の利用者が発言を行う形式である場合、（ｎ−１）人
以上の発言者の情報処理装置から受信した映像を出力す
るウィンドウの背景色を他の情報処理装置から受信した
映像を出力するウィンドウの背景色と異なる色にするこ
とにより、（ｎ−１）人以上の発言者の情報処理装置か
ら受信した映像を他の情報処理装置から受信した映像と
視覚的に区別する態様がある。ｎ（ｎは２以上の整数）
個の情報処理装置の利用者の中で、（ｎ−１）人以上の
利用者が発言を行う形式である場合、（ｎ−１）人以上
の発言者の情報処理装置から受信した映像を出力するウ
ィンドウの枠の太さを他の情報処理装置から受信した映
像を出力するウィンドウの枠の太さと異なる太さにする
ことにより、（ｎ−１）人以上の発言者の情報処理装置
から受信した映像を他の情報処理装置から受信した映像
と視覚的に区別する態様がある。また、ｎ（ｎは２以上
の整数）個の情報処理装置の利用者の中で、（ｎ−１）
人以上の利用者が発言を行う形式である場合、（ｎ−
１）人以上の発言者の情報処理装置から受信した映像を
出力するウィンドウの枠の太さを点滅させることによ
り、（ｎ−１）人以上の発言者の情報処理装置から受信
した映像を他の情報処理装置から受信した映像と視覚的
に区別する態様がある。ｎ（ｎは２以上の整数）個の情
報処理装置の利用者の中で、（ｎ−１）人以上の利用者
が発言を行う形式である場合、（ｎ−１）人以上の発言
者の情報処理装置から受信した映像を出力するウィンド
ウの枠の色を他の情報処理装置から受信した映像を出力
するウィンドウの枠の色と異なる色にすることにより、
（ｎ−１）人以上の発言者の情報処理装置から受信した
映像を他の情報処理装置から受信した映像と視覚的に区
別する態様がある。また、ｎ（ｎは２以上の整数）個の
情報処理装置の利用者の中で、（ｎ−１）人以上の利用
者が発言を行う形式である場合、（ｎ−１）人以上の発
言者の情報処理装置から受信した映像を出力するウィン
ドウ内に予め決められたアイコンを出力することによ
り、（ｎ−１）人以上の発言者の情報処理装置から受信
した映像を他の情報処理装置から受信した映像と視覚的
に区別する態様がある。かかる種々の態様の実現方法
は、実施の形態１または実施の形態２等で述べた内容か
ら実現できる。つまり、ウィンドウ管理表のデータを変
更またはレコード生成等するのである。

【００９６】また、複数人の発表者が連続発表を行う場
合に、その順序を視覚的に区別して表示するように工夫
できる。さらに、発表に対して、質問がある場合に、次
に質問をする利用者を区別する表示をしたり、質問者が
複数いる場合に、質問者を視覚的に明示することを行う
と、グループ討議、対話がスムーズに進行する、という
効果が期待できる。

【００９７】以上、本実施の形態によれば、グループで
討議、対話する映像を情報処理装置に出力する場合に、
討論形式または対話形式等に合致した画面の表示が可能
である。

【００９８】また、本実施の形態において、映像を合成
する処理はサーバ装置で行ったが、各情報処理装置で映
像の合成処理を行っても良い。つまり、出力する映像を
どの装置で構成するかは問題ではない。つまり、グルー
プで討議する形式に関する情報である討議形式情報に基
づいて複数の装置から送信された映像を合成して出力
し、当該討議形式を視覚的に明示すれば良い。つまり、
上述したサーバ装置が出力映像を構成する処理をして
も、上述した情報処理装置が出力映像を構成する処理を
しても、処理の一部をサーバ装置が行い残りの処理を情
報処理装置が行う、という構成にしても、以下の情報出
力装置により、討議形式を視覚的に明示する、という効
果がでる。２以上の情報処理装置から映像を含む情報、
または映像と音声を含む情報を受信する情報受信部と、
情報受信部が受信した２以上の映像を合成して１つの映
像を構築する画面構築部と、画面構築部で合成した映像
と、情報受信部で受信した音声を出力する情報出力部を
具備する情報出力装置において、グループで討議する形
式に関する情報である討議形式情報を取得する討議形式
取得部をさらに具備し、討議形式取得部で取得した討議
形式情報に基づいて情報受信部で受信した情報を出力す
ることを特徴とする情報出力装置により上記の効果が出
るのである。この情報出力装置が上述したサーバ装置の
場合、情報出力部は映像等を送信する。また、この情報
出力装置が上述した情報処理装置の場合、情報出力部は
映像をディスプレイに表示し、音声をスピーカー等に出
力する。また、サーバ装置で出力映像を構成しても、情
報処理装置で出力映像を構成しても、どのように画面を
構築するかは、上述したように種々の態様が考えられ
る。

【００９９】また、本実施の形態において、討議形式
は、２人で行う形式を例に説明したが、例えば、５人で
行う場合は、図５２に示すような画面が構成され、出力
される。なお、図４９、図５１、図５２において、出力
される映像は、ポップアップしたウィンドウの後ろに、
会議者全員の映像が表示されていたが、討論形式にかか
る情報処理装置から送信される映像のみ（議論している
人のみ）の映像を出力しても良い。

【０１００】さらに、本実施の形態における各種の処理
は、ソフトウェアによって実現し、ソフトウェアダウン
ロードにより提供しても良い。また、かかるソフトウェ
アをＣＤ−ＲＯＭ等の記録媒体に記録して配布しても良
い。なお、本実施の形態における各種の処理をソフトウ
ェアで実現した場合は、当該ソフトウェアは、２以上の
情報処理装置から映像を含む情報、または映像と音声を
含む情報を入力して相互に送受信する場合に、グループ
で討議する形式に関する情報である討議形式情報を取得
し、討議形式情報に基づいて受信した情報を出力する情
報出力方法を実現する。

【０１０１】

【発明の効果】本発明によれば、グループで討議、対話
する映像を情報処理装置に出力する場合に、発言者を視
覚的に明示したり、発言履歴を視覚的に明示したり、討
論形式を視覚的に明示したりできる。本発明を、例えば
教育システムに用いれば、特に、教育的効果が高い。

【図面の簡単な説明】

【図１】実施の形態１における情報処理システムの概念
図

【図２】実施の形態１における情報処理システムの構成
を示すブロック図

【図３】実施の形態１における情報処理装置の動作を説
明するフローチャート

【図４】実施の形態１におけるサーバ装置の動作を説明
するフローチャート

【図５】実施の形態１における具体的な情報処理システ
ムの概念図

【図６】実施の形態１におけるウィンドウ管理表を示す
図

【図７】実施の形態１における映像の出力例を示す図

【図８】実施の形態１におけるウィンドウ管理表を示す
図

【図９】実施の形態１における映像の出力例を示す図

【図１０】実施の形態１におけるウィンドウ管理表を示
す図

【図１１】実施の形態１における映像の出力例を示す図

【図１２】実施の形態１における映像の出力例を示す図

【図１３】実施の形態１における映像の出力例を示す図

【図１４】実施の形態１におけるウィンドウ管理表を示
す図

【図１５】実施の形態１における映像の出力例を示す図

【図１６】実施の形態１におけるウィンドウ管理表を示
す図

【図１７】実施の形態１における映像の出力例を示す図

【図１８】実施の形態１におけるウィンドウ管理表を示
す図

【図１９】実施の形態１における映像の出力例を示す図

【図２０】実施の形態１におけるアイコンを示す図

【図２１】実施の形態１における映像の出力例を示す図

【図２２】実施の形態１における具体的な情報処理シス
テムの概念図

【図２３】実施の形態２における情報処理システムの構
成を示すブロック図

【図２４】実施の形態２におけるサーバ装置の動作を説
明するフローチャート

【図２５】実施の形態２における具体的な情報処理シス
テムの概念図

【図２６】実施の形態２における情報処理装置の画面分
割の例を示す図

【図２７】実施の形態２における発言履歴情報の例を示
す図

【図２８】実施の形態２におけるウィンドウ管理表を示
す図

【図２９】実施の形態２における映像の出力例を示す図

【図３０】実施の形態２における具体的な情報処理シス
テムの概念図

【図３１】実施の形態２における発言履歴情報の例を示
す図

【図３２】実施の形態２におけるウィンドウ管理表を示
す図

【図３３】実施の形態２における映像の出力例を示す図

【図３４】実施の形態２における映像の出力例を示す図

【図３５】実施の形態２におけるウィンドウ管理表を示
す図

【図３６】実施の形態２における映像の出力例を示す図

【図３７】実施の形態２におけるウィンドウ管理表を示
す図

【図３８】実施の形態２における映像の出力例を示す図

【図３９】実施の形態２におけるウィンドウ管理表を示
す図

【図４０】実施の形態２における映像の出力例を示す図

【図４１】実施の形態２におけるウィンドウ管理表を示
す図

【図４２】実施の形態２における映像の出力例を示す図

【図４３】実施の形態３における情報処理システムの構
成を示すブロック図

【図４４】実施の形態３におけるサーバ装置の動作を説
明するフローチャート

【図４５】実施の形態３における具体的な情報処理シス
テムの概念図

【図４６】実施の形態３における映像の出力例を示す図

【図４７】実施の形態３におけるウィンドウ管理表を示
す図

【図４８】実施の形態３におけるウィンドウ管理表を示
す図

【図４９】実施の形態３における映像の出力例を示す図

【図５０】実施の形態３におけるアイコン管理表を示す
図

【図５１】実施の形態３における映像の出力例を示す図

【図５２】実施の形態３における映像の出力例を示す図

【符号の説明】

１１ 情報処理装置 ２２、２３２、４３２ サーバ装置 １１０１ 端末映像取得部 １１０２ 端末音声取得部 １１０３ 端末情報送信部 １１０４ 端末情報受信部 １１０５ 端末情報出力部 １２０１ 情報受信部 １２０２ 発言者決定部 １２０３、２３２０２、４３２０２ 画面構築部 １２０４ 情報出力部 ２３２０１ 発言履歴記録部 ４３２０１ 討議形式取得部

フロントページの続き (72)発明者 田上 正範 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 Ｆターム(参考） 2C028 AA02 AA03 AA06 BA03 BA04 BB04 BB05 BB06 BC05 BD02 BD03 5C064 AA02 AB02 AB03 AB04 AC04 AC06 AC09 AC13 AC16 AD06 5E501 AB20 AB30 BA03 BA09 EA34 FA06 FA32 FB44

Claims (29)

【特許請求の範囲】
1. 【請求項１】 ２以上の情報処理装置から映像を含む情
   報、または映像と音声を含む情報を受信する情報受信部
   と、前記情報受信部が受信した２以上の映像を合成して
   １つの映像を構築する画面構築部と、前記画面構築部で
   合成した映像と、前記情報受信部で受信した音声を出力
   する情報出力部を具備する情報出力装置において、前記
   情報受信部が受信した情報に基づいて、発言者の情報処
   理装置を決定する発言者決定部をさらに具備し、前記発
   言者の情報処理装置から受信した映像を他の情報処理装
   置から受信した映像と視覚的に区別する映像を出力する
   ことを特徴とする情報出力装置。
2. 【請求項２】 前記発言者の情報処理装置から受信した
   映像の配置により、前記発言者の情報処理装置から受信
   した映像を他の情報処理装置から受信した映像と視覚的
   に区別する請求項１記載の情報出力装置。
3. 【請求項３】 前記発言者の情報処理装置から受信した
   映像を他の情報処理装置から受信した映像より大きくす
   ることにより、前記発言者の情報処理装置から受信した
   映像を他の情報処理装置から受信した映像と視覚的に区
   別する請求項１記載の情報出力装置。
4. 【請求項４】 前記情報受信部が受信した各映像を出力
   するウィンドウを２以上構成し、当該２以上のウィンド
   ウを合成した第一の映像に、前記発言者の情報処理装置
   から受信した映像を出力するウィンドウからなる第二の
   映像を上に重ねた映像を出力する請求項１記載の情報出
   力装置。
5. 【請求項５】 前記画面構築部が、前記情報受信部が受
   信した各映像を出力するウィンドウを２以上構成し、当
   該２以上のウィンドウを合成して１つの映像を構築し、
   前記発言者の情報処理装置から受信した映像を出力する
   ウィンドウの背景色を他の情報処理装置から受信した映
   像を出力するウィンドウの背景色と異なる背景色にする
   ことにより、前記発言者の情報処理装置から受信した映
   像を他の情報処理装置から受信した映像と視覚的に区別
   する請求項１記載の情報出力装置。
6. 【請求項６】 前記画面構築部が、前記情報受信部が受
   信した各映像を出力するウィンドウを２以上構成し、当
   該２以上のウィンドウを合成して１つの映像を構築し、
   前記発言者の情報処理装置から受信した映像を出力する
   ウィンドウの枠の太さを他の情報処理装置から受信した
   映像を出力するウィンドウの枠の太さと異なる太さにす
   ることにより、前記発言者の情報処理装置から受信した
   映像を他の情報処理装置から受信した映像と視覚的に区
   別する請求項１記載の情報出力装置。
7. 【請求項７】 前記画面構築部が、前記情報受信部が受
   信した各映像を出力するウィンドウを２以上構成し、当
   該２以上のウィンドウを合成して１つの映像を構築し、
   前記発言者の情報処理装置から受信した映像を出力する
   ウィンドウの枠の色を他の情報処理装置から受信した映
   像を出力するウィンドウの枠の色と異なる色にすること
   により、前記発言者の情報処理装置から受信した映像を
   他の情報処理装置から受信した映像と視覚的に区別する
   請求項１記載の情報出力装置。
8. 【請求項８】 前記画面構築部が、前記情報受信部が受
   信した各映像を出力するウィンドウを２以上構成し、当
   該２以上のウィンドウを合成して１つの映像を構築し、
   前記発言者の情報処理装置から受信した映像を出力する
   ウィンドウの枠を点滅させることにより、前記発言者の
   情報処理装置から受信した映像を他の情報処理装置から
   受信した映像と視覚的に区別する請求項１記載の情報出
   力装置。
9. 【請求項９】 前記画面構築部が、前記情報受信部が受
   信した各映像を出力するウィンドウを２以上構成し、当
   該２以上のウィンドウを合成して１つの映像を構築し、
   前記発言者の情報処理装置から受信した映像を出力する
   ウィンドウ内に予め決められたアイコンを出力すること
   により、前記発言者の情報処理装置から受信した映像を
   他の情報処理装置から受信した映像と視覚的に区別する
   請求項１記載の情報出力装置。
10. 【請求項１０】 前記発言者の情報処理装置から受信し
    た映像を構成するフィールドの単位時間あたりの出力フ
    ィールド数を、他の情報処理装置から受信した映像を構
    成するフィールドの単位時間あたりの出力フィールド数
    と異なる数にすることにより、前記発言者の情報処理装
    置から受信した映像を他の情報処理装置から受信した映
    像と視覚的に区別する請求項１記載の情報出力装置。
11. 【請求項１１】 前記発言者の情報処理装置から受信し
    た映像を構成するフィールドの単位時間あたりの出力フ
    ィールド数が単位時間あたり２以上のフィールド数で、
    他の情報処理装置から受信した映像の出力は静止画であ
    る請求項１０記載の情報出力装置。
12. 【請求項１２】 ２以上の情報処理装置から映像を含む
    情報、または映像と音声を含む情報を受信する情報受信
    部と、前記情報受信部が受信した２以上の映像を合成し
    て１つの映像を構築する画面構築部と、前記画面構築部
    で合成した映像と、前記情報受信部で受信した音声を出
    力する情報出力部を具備する情報出力装置において、前
    記情報受信部が受信した情報に基づいて、発言者の情報
    処理装置を決定する発言者決定部と、前記発言者決定部
    で決定した発言者の情報処理装置を識別する情報処理装
    置識別子を有する発言履歴情報を記録する発言履歴記録
    部をさらに具備し、前記発言履歴記録部が記録した２以
    上の発言履歴情報に基づいて、前記発言者の履歴を視覚
    的に明示する映像を出力することを特徴とする情報出力
    装置。
13. 【請求項１３】 前記２以上の発言履歴情報に基づい
    て、当該２以上の発言者の情報処理装置から受信した２
    以上の映像の配置により、前記発言者の履歴を視覚的に
    明示する映像を出力する請求項１２記載の情報出力装
    置。
14. 【請求項１４】 前記２以上の発言者の情報処理装置か
    ら受信した２以上の映像を他の情報処理装置から受信し
    た映像より大きくすることにより、前記発言者の履歴の
    視覚的な明示がなされる請求項１３記載の情報出力装
    置。
15. 【請求項１５】 前記２以上の発言者の情報処理装置か
    ら受信した２以上の映像を出力するウィンドウの背景色
    を他のウィンドウの背景色と異なる色にすることによ
    り、前記発言者の履歴の視覚的な明示がなされる請求項
    １３記載の情報出力装置。
16. 【請求項１６】 前記２以上の発言者の情報処理装置か
    ら受信した２以上の映像を出力するウィンドウの枠の太
    さを他のウィンドウの枠の太さと異なる太さにすること
    により、前記発言者の履歴の視覚的な明示がなされる請
    求項１３記載の情報出力装置。
17. 【請求項１７】 前記２以上の発言者の情報処理装置か
    ら受信した２以上の映像を出力するウィンドウの枠の色
    を他のウィンドウの枠の色と異なる色にすることによ
    り、前記発言者の履歴の視覚的な明示がなされる請求項
    １３記載の情報出力装置。
18. 【請求項１８】 ２以上の情報処理装置から映像を含む
    情報、または映像と音声を含む情報を受信する情報受信
    部と、前記情報受信部が受信した２以上の映像を合成し
    て１つの映像を構築する画面構築部と、前記画面構築部
    で合成した映像と、前記情報受信部で受信した音声を出
    力する情報出力部を具備する情報出力装置において、グ
    ループで討議する形式に関する情報である討議形式情報
    を取得する討議形式取得部をさらに具備し、前記討議形
    式取得部で取得した討議形式情報に基づいて前記情報受
    信部で受信した情報を出力することを特徴とする情報出
    力装置。
19. 【請求項１９】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記情報受信部が
    受信した各映像を出力するウィンドウを２以上構成し、
    当該２以上のウィンドウを合成した第一の映像に、前記
    （ｎ−１）人以上の発言者の情報処理装置から受信した
    映像を出力するウィンドウを合成した第二の映像を上に
    重ねた映像を出力する請求項１８記載の情報出力装置。
20. 【請求項２０】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記（ｎ−１）人
    以上の発言者の情報処理装置から受信した映像を出力す
    るウィンドウを他の情報処理装置から受信した映像を出
    力するウィンドウより大きくすることにより、前記（ｎ
    −１）人以上の発言者の情報処理装置から受信した映像
    を他の情報処理装置から受信した映像と視覚的に区別す
    る請求項１８記載の情報出力装置。
21. 【請求項２１】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記（ｎ−１）人
    以上の発言者の情報処理装置から受信した映像を出力す
    る配置により、前記（ｎ−１）人以上の発言者の情報処
    理装置から受信した映像を他の情報処理装置から受信し
    た映像と視覚的に区別する請求項１８記載の情報出力装
    置。
22. 【請求項２２】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記（ｎ−１）人
    以上の発言者の情報処理装置から受信した映像を出力す
    るウィンドウの背景色を他の情報処理装置から受信した
    映像を出力するウィンドウの背景色と異なる色にするこ
    とにより、前記（ｎ−１）人以上の発言者の情報処理装
    置から受信した映像を他の情報処理装置から受信した映
    像と視覚的に区別する請求項１８記載の情報出力装置。
23. 【請求項２３】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記（ｎ−１）人
    以上の発言者の情報処理装置から受信した映像を出力す
    るウィンドウの枠の太さを他の情報処理装置から受信し
    た映像を出力するウィンドウの枠の太さと異なる太さに
    することにより、前記（ｎ−１）人以上の発言者の情報
    処理装置から受信した映像を他の情報処理装置から受信
    した映像と視覚的に区別する請求項１８記載の情報出力
    装置。
24. 【請求項２４】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記（ｎ−１）人
    以上の発言者の情報処理装置から受信した映像を出力す
    るウィンドウの枠の太さを点滅させることにより、前記
    （ｎ−１）人以上の発言者の情報処理装置から受信した
    映像を他の情報処理装置から受信した映像と視覚的に区
    別する請求項１８記載の情報出力装置。
25. 【請求項２５】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記（ｎ−１）人
    以上の発言者の情報処理装置から受信した映像を出力す
    るウィンドウの枠の色を他の情報処理装置から受信した
    映像を出力するウィンドウの枠の色と異なる色にするこ
    とにより、前記（ｎ−１）人以上の発言者の情報処理装
    置から受信した映像を他の情報処理装置から受信した映
    像と視覚的に区別する請求項１８記載の情報出力装置。
26. 【請求項２６】 前記形式が、ｎ（ｎは２以上の整数）
    個の情報処理装置の利用者の中で、（ｎ−１）人以上の
    利用者が発言を行う形式である場合、前記（ｎ−１）人
    以上の発言者の情報処理装置から受信した映像を出力す
    るウィンドウ何に予め決められたアイコンを出力するこ
    とにより、前記（ｎ−１）人以上の発言者の情報処理装
    置から受信した映像を他の情報処理装置から受信した映
    像と視覚的に区別する請求項１８記載の情報出力装置。
27. 【請求項２７】 ２以上の情報処理装置から映像を含む
    情報、または映像と音声を含む情報を入力して相互に送
    受信する場合に、受信した情報に基づいて、発言者の情
    報処理装置を決定し、当該発言者の情報処理装置から受
    信した映像を他の情報処理装置から受信した映像と視覚
    的に区別する映像を出力する情報出力方法。
28. 【請求項２８】 ２以上の情報処理装置から映像を含む
    情報、または映像と音声を含む情報を入力して相互に送
    受信する場合に、前記受信した情報に基づいて、発言者
    の情報処理装置を決定し、当該決定した発言者の情報処
    理装置を識別する情報処理装置識別子を有する発言履歴
    情報を記録し、前記発言履歴情報に基づいて、前記発言
    者の履歴を視覚的に明示する映像を出力する情報出力方
    法。
29. 【請求項２９】 ２以上の情報処理装置から映像を含む
    情報、または映像と音声を含む情報を入力して相互に送
    受信する場合に、グループで討議する形式に関する情報
    である討議形式情報を取得し、前記討議形式情報に基づ
    いて受信した情報を出力する情報出力方法。