JP6610076B2 - 情報処理装置、情報処理システム、プログラム、及び記録媒体 - Google Patents

Description

本発明は、情報処理装置、情報処理システム、プログラム、及び記録媒体に関する。

近年、ＰＣやタブレット端末等を相互にネットワーク接続し資料や音声・映像データ等を電子的に共有する、いわゆる電子会議システムが利用されている。このような電子会議システムにおいて、主に会議の議事録等を作成する目的で、会議でやりとりされた音声や、会議の様子を撮影した映像等のメディア情報（メディアデータ）を記録する技術が提案されている。例えば特許文献１には、会議のメディアデータをユーザ毎に時系列に記録・再生するシステムが提案されている。

特開平１１−２０５３１４号公報

しかし、特許文献１のシステムは、メディアデータを単に時系列で記録するものであるため、再生時には時系列で順を追って再生するか、タイムチャプターに基づいて再生することしかできず、所定の条件に該当する部分のみを選択的に再生することは困難である。例えば、会議中に議題が変更されたり、発表者が変更されたりした場合に、変更された部分からの音声を再生したくても、変更されたタイミングが分からなければ容易に再生することはできない。このため、会議の全ての記録を最初から再生しなければならず非効率である。

本発明は、上記実情に鑑みてなされたものであり、その目的は、複数の端末間において送受信されたメディアデータの再生時の効率化を図ることができるように、該メディアデータを記録する情報処理装置、情報処理システム、プログラム、及び記録媒体を提供することにある。

本発明の請求項１に係るプログラムは、ネットワークを介して接続され相互に通信する複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディアデータを送受信させるコンピュータを機能させるためのプログラムであって、複数の端末が相互に通信しているときに発生したイベントを検知する検知手段、及び、前記メディアデータに含まれる時間情報と、前記イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記メディアデータに関連付ける関連付手段、としてコンピュータを機能させ、前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、前記関連付手段は、前記メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、ことを特徴とするプログラムである。

本発明の請求項２に係るプログラムは、請求項１に記載の構成において、前記コンピュータを、さらに、前記端末においてユーザが行った操作の内容を示す操作情報を受け付ける受付手段、及び、前記操作情報と、該操作情報に対応する前記イベント情報の種別を示すイベント情報種別とを関連付けて記憶する記憶手段を参照して、前記受付手段が受け付けた前記操作情報に対応する前記イベント情報種別を判定する判定手段、として機能させ、前記関連付手段は、前記イベント情報種別に対応する前記イベント情報を、前記メディアデータに関連付ける。

本発明の請求項３に係るプログラムは、請求項２に記載の構成において、前記記憶手段は、前記操作情報と、前記操作を行ったユーザを識別するユーザ情報と、該操作情報に対応する前記イベント情報種別と、を関連付けて記憶し、前記判定手段は、前記受付手段が受け付けた前記操作情報と前記ユーザ情報とに対応する前記イベント情報種別を判定する。

本発明の請求項４に係るプログラムは、請求項１に記載の構成において、前記検知手段
が、会議で使用する資料に対するユーザのページ切り替え操作を前記イベントとして検知
した場合、前記関連付手段は、前記ページを切り替えた時刻を示す時間情報と、前記ペー
ジを切り替える前のページ番号と、前記ページを切り替えたユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける。

本発明の請求項５に係るプログラムは、請求項１に記載の構成において、前記検知手段が、会議において発表を担当するユーザの交代操作を前記イベントとして検知した場合、前記関連付手段は、前記ユーザが交代した時刻を示す時間情報と、前記ユーザが交代する前のユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける。

本発明の請求項６に係るプログラムは、請求項１に記載の構成において、前記コンピュータを、さらに、ユーザから前記イベントに対応する前記メディアデータの再生要求を受け付ける受付手段、及び、前記メディアデータを再生する再生手段、として機能させ、前記再生手段は、前記メディアデータのうちユーザが選択した前記イベントに対応する部分のメディアデータを再生する。

本発明の請求項７に係る情報処理装置は、ネットワークを介して接続され相互に通信す
る複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディア
データを送受信させる情報処理装置であって、複数の端末が相互に通信しているときに発
生したイベントを検知する検知手段と、前記メディアデータに含まれる時間情報と、前記
イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記
メディアデータに関連付ける関連付手段と、を含み、前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、前記関連付手段は、メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、ことを特徴とする。

本発明の請求項８に係る情報処理システムは、ネットワークを介して接続され相互に通信する複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディアデータを送受信させる情報処理システムであって、複数の端末が相互に通信しているときに発生したイベントを検知する検知手段と、前記メディアデータに含まれる時間情報と、前記イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記メディアデータに関連付ける関連付手段と、を含み、前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、前記関連付手段は、前記メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、ことを特徴とする。

本発明の請求項９に係る記録媒体は、ネットワークを介して接続され相互に通信する複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディアデータを送受信させるコンピュータを機能させるためのプログラムであって、複数の端末が相互に通信しているときに発生したイベントを検知する検知手段、及び、前記メディアデータに含まれる時間情報と、前記イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記メディアデータに関連付ける関連付手段、としてコンピュータを機能させ、前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、前記関連付手段は、前記メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付けるためのプログラムを記録したコンピュータ読み取り可能な記録媒体である。

本発明の請求項１、７、８、９の構成によれば、複数の端末間において送受信されたメディアデータの再生時の効率化を図ることができ、メッセージを選択した時刻を示す時間情報と、メッセージの内容と、メッセージを選択したユーザのユーザ情報とがメディアデータに関連付けられる。

本発明の請求項２の構成によれば、ユーザが行った操作の内容を示す操作情報に対応するイベント情報種別に対応するイベント情報がメディアデータに関連付けられる。

本発明の請求項３の構成によれば、ユーザの操作情報とユーザ情報とに対応するイベント情報種別が決定される。

本発明の請求項４の構成によれば、ページを切り替えた時刻を示す時間情報と、ページを切り替える前のページ番号と、ページを切り替えたユーザのユーザ情報とがメディアデータに関連付けられる。

本発明の請求項５の構成によれば、ユーザが交代した時刻を示す時間情報と、ユーザが交代する前のユーザのユーザ情報とがメディアデータに関連付けられる。

本発明の請求項６の構成によれば、メディアデータのうちユーザが選択したイベントに対応する部分のメディアデータが再生される。

本実施形態に係る電子会議システムの全体構成図である。 電子会議システムのハードウェア構成を示すブロック図である。 端末管理サーバ及びメディアデータ管理サーバの具体的な構成を示す機能ブロック図である。 発表者用端末の表示画面に表示される表示内容の一例を示す図である。 端末の具体的な構成を示す機能ブロック図である。 端末の具体的な構成を示す機能ブロック図である。 送信端末リストの一例を示す図である。 受信端末リストの一例を示す図である。 更新された受信端末リストの一例を示す図である。 通信路を示すネットワーク構成の一例を示す図である。 通信路を示すネットワーク構成の一例を示す図である。 通信路を示すネットワーク構成の一例を示す図である。 電子会議システムの動作フロー図である。 電子会議システムの動作フロー図である。 電子会議システムの動作フロー図である。 メタデータ種別判定テーブルの一例を示す図である。 メタデータ管理テーブルの一例を示す図である。 １つの会議で発生した一連のイベントの内容を示す図である。 メッセージ管理テーブルの一例を示す図である。 音声データとメタデータとを模式的に示す図である。 電子会議システムの動作フロー図である。 電子会議システムの動作フロー図である。 メタデータ管理テーブルの一例を示す図である。 メタデータ管理テーブルの一例を示す図である。 メタデータ管理テーブルの一例を示す図である。 メタデータ管理テーブルの一例を示す図である。 変形例１に係る端末管理サーバの具体的な構成を示す機能ブロック図である。 電子会議システムのネットワーク構成の一例を示す図である。 受信端末リストの一例を示す図である。 変形例１に係る通信路を示すネットワーク構成の一例を示す図である。 電子会議システムのネットワーク構成の一例を示す図である。

本発明の一実施形態について、図面を用いて以下に説明する。本実施形態では、情報処理システムの一例として、ネットワークを介して接続され相互に通信する複数の端末間で資料等の電子データ、及び、音声データ及び画像データ等のメディアデータを共有（同期）する電子会議システムを例に挙げて説明する。

図１は、本実施形態に係る電子会議システムの全体構成図である。電子会議システム１００（情報処理システム）は、会議に出席する複数のユーザがそれぞれ使用（操作）する複数の端末１０と、端末１０を管理する端末管理サーバ２０と、会議における音声及び映像等のメディアデータを管理するメディアデータ管理サーバ３０と、を含んで構成されている。端末管理サーバ２０とメディアデータ管理サーバ３０とは１つの情報処理装置に含まれてもよい。また、端末１０と端末管理サーバ２０とが１つの情報処理装置に含まれてもよいし、端末１０とメディアデータ管理サーバ３０とが１つの情報処理装置に含まれてもよいし、端末１０と端末管理サーバ２０とメディアデータ管理サーバ３０とが１つの情報処理装置に含まれてもよい。本実施形態では、必要に応じて、会議において発表を担当するユーザを「発表者」といい、発表者が使用する端末を「発表者用端末」という。また、発表者以外の、会議に出席するユーザを「参加者」といい、参加者が使用する端末を「参加者用端末」という。例えば図１において、端末１０ａが発表者用端末となる場合、他の５台の端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆは参加者用端末となる。各端末１０は、発表者用端末及び参加者用端末の何れにもなり得る。また発表者用端末には操作権限が付与され、これにより発表者用端末において発表者が操作した内容に応じた表示画面が他の参加者用端末に同期表示される。また、発表者は、会議において資料等に関する発言を行う発言権（音声送信権）を有していてもよい。なお、発言権は、１人のユーザが有していてもよいし、複数のユーザが有していてもよい。以下では、発表者用端末及び参加者用端末において共通する機能を説明する際は、端末１０と総称して説明する。

各端末１０は、ユーザが発言した音声データを送信する送信機能と、該音声データを受信する受信機能との両機能を兼ね備えている。これにより、例えば、発表者は自身の端末１０に表示された資料を操作して参加者の端末１０に同期表示させるとともに、資料に関する説明を発言し、発言した音声を参加者の端末１０から出力させることができる。

図１に示すように、各端末１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆと、端末管理サーバ２０と、メディアデータ管理サーバ３０とは、ＬＡＮ（Local Area Network）やインターネット等の通信ネットワーク５０を介して相互に接続されている。

図２は、端末１０、端末管理サーバ２０及びメディアデータ管理サーバ３０のハードウェア構成を示すブロック図である。

端末１０は、ＣＰＵ１０１、メモリ１０２、記憶部１０３、通信部１０４、操作部１０５、表示部１０６、音声入力部１０７、及び音声出力部１０８を含むコンピュータで構成されている。これらのハードウェア要素はバスにより相互にデータの授受が可能に接続されている。ＣＰＵ１０１は、端末１０の各部を制御したり、各種の情報処理を実行したりする。メモリ１０２は、各種のプログラムやデータを保持する。メモリ１０２には、ＣＰＵ１０１の作業領域も確保される。記憶部１０３は、各種のファイルやドキュメント等のデータを記憶する。通信部１０４は、通信ネットワーク５０を介して、端末管理サーバ２０やメディアデータ管理サーバ３０や他の端末１０とデータ通信を行う。操作部１０５は、キーボード、マウス、ペンツール、タッチパネル等の入力デバイスである。表示部１０６は、Ｗｅｂブラウザ等のアプリケーションソフトを介して各種のファイルやドキュメント等を表示する表示画面である。また、表示部１０６は、会議においてユーザの操作を受け付けるための操作画面や会議に使用される資料等を表示する。音声入力部１０７は、会議において発言したユーザの音声が入力されるマイクである。音声出力部１０８は、会議において、他の端末１０から受信した音声データを音声として出力するスピーカである。これら記憶部１０３、操作部１０５、表示部１０６、音声入力部１０７、及び音声出力部１０８は、端末１０の外部に設けられ、通信ネットワーク５０を介して端末１０に接続されていてもよい。会議の様子を撮影して映像データ（メディアデータ）として保存する場合には、端末１０や端末管理サーバ２０等にカメラが搭載されていてもよい。

端末１０は、会議に出席するユーザが使用する端末である。端末１０には、ブラウザや電子メールクライアント等のソフトウェアが組み込まれている。端末１０は、例えば、パーソナルコンピュータ、ＰＤＡ（Personal Digital Assistant）、スマートフォン等の携帯情報端末等である。なお、１つの端末１０は、例えば、１つのブラウザであっても良いし、ブラウザの中の１つのウィンドウであっても良いし、１つのアプリケーションであっても良い。

端末管理サーバ２０は、ＣＰＵ２０１、メモリ２０２、記憶部２０３、及び通信部２０４を含むコンピュータで構成されている。これらのハードウェア要素はバスにより相互にデータの授受が可能に接続されている。ＣＰＵ２０１は、端末管理サーバ２０の各部を制御したり、各種の情報処理を実行したりする。メモリ２０２は、各種のプログラムやデータを保持する。メモリ２０２には、ＣＰＵ２０１の作業領域も確保される。記憶部２０３は、各種のファイルやドキュメント等のデータを記憶する。通信部２０４は、通信ネットワーク５０を介して、他の端末やサーバとデータ通信を行う。記憶部２０３は、端末管理サーバ２０の外部に設けられ、通信ネットワーク５０を介して端末管理サーバ２０に接続されていてもよい。

メディアデータ管理サーバ３０は、ＣＰＵ３０１、メモリ３０２、記憶部３０３、及び通信部３０４を含むコンピュータで構成されている。これらのハードウェア要素はバスにより相互にデータの授受が可能に接続されている。ＣＰＵ３０１は、メディアデータ管理サーバ３０の各部を制御したり、各種の情報処理を実行したりする。メモリ３０２は、各種のプログラムやデータを保持する。メモリ３０２には、ＣＰＵ３０１の作業領域も確保される。記憶部３０３は、各種の音声データや映像データ等のメディアデータを記憶する。なお、以下では、メディアデータの一例として、音声データを例に挙げる。通信部３０４は、通信ネットワーク５０を介して、他の端末やサーバとデータ通信を行う。記憶部３０３は、メディアデータ管理サーバ３０の外部に設けられ、通信ネットワーク５０を介してメディアデータ管理サーバ３０に接続されていてもよい。

図３は、電子会議システム１００の具体的な構成を示す機能ブロック図である。図３には、端末管理サーバ２０及びメディアデータ管理サーバ３０の具体的な構成を示している。

端末管理サーバ２０は、受付処理部２１、通信接続部２２、通知部２３、送信要求受信部２４、受信要求受信部２５、判定処理部２６、及び、端末情報生成部２７を含んでいる。これらの要素はメモリ２０２に格納されたプログラムをＣＰＵ２０１が実行することにより実現される。記憶部２０３には、端末情報を保存する端末情報データベース（端末情報ＤＢ２８）が含まれている。

上記プログラムは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、メモリカード等のコンピュータが読み取り可能な情報記憶媒体から端末管理サーバ２０にインストールされてもよいし、インターネット等の通信ネットワーク５０を介してダウンロードされてもよいし、上記プログラムが予め記憶されたサーバからダウンロードされてもよい。

また、上記プログラムは、各端末１０にインストールされてもよい。例えば、各端末１０が端末管理サーバ２０に接続された時点で、上記プログラムが端末管理サーバ２０から各端末１０のメモリにダウンロードされ、会議用の資料データが記憶部にダウンロードされてもよい。上記プログラム及び資料データは、例えばＪａｖａＳｃｒｉｐｔ（登録商標）により構成されてもよい。上記プログラムがダウンロード又は記録された端末１０は、情報処理装置として機能する。また、上記プログラムがダウンロードされたコンピュータは、端末１０であってもよいし、端末管理サーバ２０であってもよい。

本実施形態に係る電子会議システム１００では、端末管理サーバ２０は、図３に示す各機能を実現するためのプログラムを有する。また各端末１０が端末管理サーバ２０に接続され認証されると、例えば、各端末１０に、会議に使用される資料のデータと、端末１０の表示部における表示内容（同期表示を含む）等を制御する表示制御プログラムと、音声データを送受信するための通信路の確立や切断等を制御する通信路制御プログラムと、がダウンロードされる。

［同期表示処理］
次に、電子会議システム１００における同期表示処理を実現するための機能について説明する。

受付処理部２１は、各端末１０においてユーザが操作した内容に応じた各種情報（操作情報、要求情報等）を受け付ける（受信する）とともに、その情報に応じた処理を実行する。操作情報の例としては、会議開催中における発表者による操作内容（新規資料の表示、資料のページ切り替え等）が挙げられる。要求情報の例としては、端末１０の端末管理サーバ２０への接続要求や切断要求等が挙げられる。

通信接続部２２は、端末１０から受信する接続要求や切断要求に応じて、端末１０との通信の接続及び切断を行う。電子会議システム１００において利用される通信規格は特に限定されないが、例えば、Web Socketが好適である。なお、端末１０との接続を認証する方法は特に限定されず、公知の技術を適用することができる。

通知部２３は、会議の開始時及び会議中において、発表者の操作情報（発表者操作情報）を各参加者用端末に通知する。発表者操作情報は、例えば、新規資料の表示、ペンツール（手書き用ツール）による資料への書き込み、投稿コメントのピックアップ（選択）、資料のページ切り替え、マウスポインタの入力及び移動等の操作内容を示す情報である。例えば通知部２３は、発表者用端末から発表者操作情報（例えば発表者が資料のページを切り替えた場合の資料ＩＤ、ページ番号の情報）を受信すると、該情報を参加者用端末に通知する。参加者用端末は、該情報を受信すると、自身の記憶部から資料ＩＤ及びページ番号に対応する資料データを読み出して表示画面に表示する。

ここで、会議における同期表示の具体例を説明する。ここでは、端末１０ａが発表者用端末に決定され（操作権限を付与され）、端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆが参加者用端末に決定されたと仮定する。受付処理部２１が発表者用端末１０ａから発表者操作情報を受信すると、通知部２３が、該発表者操作情報を参加者用端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆに通知する。例えば、受付処理部２１は、発表者用端末１０ａから、新規資料の表示、ペンツール（手書き用ツール）による資料への書き込み、投稿コメントのピックアップ（選択）、資料のページ切り替え、マウスポインタの入力及び移動等の操作内容を示す情報を受信する。

図４は、発表者用端末１０ａの表示画面に表示される表示内容の一例を示している。例えば、発表者が発表者用端末１０ａにおいて、マウス等の操作部１０５を操作して、自身の記憶部１０３に保存されている資料の読み込み（資料画面へ新規資料を表示させる操作）を行った場合、受付処理部２１は、発表者用端末１０ａから、資料ＩＤ及びページ番号を示す情報を含む発表者操作情報を受信する。また、例えば、発表者が発表者用端末１０ａにおいて、マウスを操作して、表示部１０６に表示された資料画面（図４参照）にマウスポインタを入力した場合、受付処理部２１は、発表者用端末１０ａから、マウスポインタの位置（座標）、入力された資料のＩＤ及びページ番号等を示す情報を含む発表者操作情報を受信する。また、例えば、発表者が発表者用端末１０ａにおいて、ペンツールを操作して、表示部１０６に表示された資料画面（図４参照）に文字等を書き込んだ場合、受付処理部２１は、発表者用端末１０ａから、書き込まれた位置（座標）、書き込まれた資料のＩＤ及びページ番号等を示す情報を含む発表者操作情報を受信する。さらに、例えば、発表者が発表者用端末１０ａにおいて、マウスを操作して、表示部１０６に表示された資料画面（図４参照）のページを切り替えた場合、受付処理部２１は、発表者用端末１０ａから、表示された資料のＩＤ及び指定されたページ番号を示す情報を含む発表者操作情報を受信する。

受付処理部２１が上記発表者操作情報を受信すると、通知部２３が、各参加者用端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆに上記発表者操作情報を通知する。参加者用端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆは、上記発表者操作情報を受信すると、上記発表者操作情報に応じた表示画面を表示部１０６に表示する。例えば、自身の記憶部１０３から資料ＩＤ及びページ番号に対応する資料データを読み出して表示部１０６に表示する。このようにして、会議に参加する複数の参加者が使用する複数の端末１０それぞれの表示画面に、会議で共有する資料に対して操作を行う発表者が使用する端末１０の表示画面の表示内容を同期して表示させる。電子会議システム１００における同期表示や非同期表示の方法は公知の技術を適用することができる。なお、参加者用端末は、表示制御プログラムを実行して、発表者操作情報に対応する表示内容を自身の表示部に表示させる。各端末１０は、表示制御手段としての機能を有する。

［通信路確立処理］
次に、電子会議システム１００における通信路確立処理を実現するための機能について説明する。

図５及び図６は、電子会議システム１００における端末１０の具体的な構成を示す機能ブロック図である。以下では説明の便宜上、図５に示す端末１０（以下、送信端末ともいう。）では、送信機能に対応する機能ブロックを示し、図６に示す端末１０（以下、受信端末ともいう。）では、受信機能に対応する機能ブロックを示している。なお、上述のように、各端末１０は、送信機能（図５参照）及び受信機能（図６参照）の両機能を備えている。また、送信端末１０及び受信端末１０の何れか１台が上記操作権限を有してしてもよいし、何れも上記操作権限を有していなくてもよい。

送信端末１０は、図５に示すように、送信要求送信部１１、判定結果取得部１２、端末情報取得部１３、通信路制御部１４、音声送信部１５、及び、表示制御部１６を含んでいる。受信端末１０は、図６に示すように、受信要求送信部４１、判定結果取得部４２、表示制御部４３、及び、音声受信部４４を含んでいる。

各端末１０に含まれる上記各要素は、それぞれのメモリ１０２（図２参照）に格納されたプログラムをそれぞれのＣＰＵ１０１が実行することにより実現される。上記プログラムは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、メモリカード等のコンピュータが読み取り可能な情報記憶媒体から端末１０にインストールされてもよいし、インターネット等の通信ネットワーク５０を介してダウンロードされてもよいし、上記各要素に対応するプログラムが予め記憶された端末管理サーバ２０から、所定の要素に対応するプログラムが各端末１０にダウンロードされてもよい。

上記プログラムに対応する各機能について説明する。以下では、会議の進行に応じた電子会議システム１００の処理の流れに準じて説明する。

まず、会議において、ユーザは、自身の発言（音声）を他の端末１０へ送信することを希望する場合、すなわち、自身の端末と他の端末との間に音声データを送信するための通信路を確立することを要求する場合、端末１０の操作部１０５を操作して、その旨の指示を与える。例えば、ユーザＡは、会議において、自身が使用する端末１０（図５参照）の表示部１０６に表示された「音声送信」の選択画面（例えば、チェックボックスや電子的ボタン）を、キーボードやマウス等を使用して選択する。端末１０の送信要求送信部１１は、受け付けたユーザＡの要求（以下、送信要求という。）を、端末管理サーバ２０に送信する。なお、例えば、ユーザＡが「音声送信」のチェックボックスを外した場合や所定の条件を満たした場合（後述）は、送信要求送信部１１は、送信の解除要求を送信する。例えば、送信要求送信部１１は、送信要求を送信する場合は「＋１」を送信し、解除要求を送信する場合は「−１」を送信する。

また、会議において、ユーザは、他のユーザの発言（音声）を受信することを希望する場合、端末１０の操作部１０５を操作して、その旨の指示を与える。例えば、ユーザＢは、会議において、自身が使用する端末１０（図６参照）の表示部１０６に表示された「音声受信」の選択画面（例えば、チェックボックスや電子的ボタン）を、キーボードやマウス等を使用して選択する。端末１０の受信要求送信部４１は、受け付けたユーザＢの要求（以下、受信要求という。）を、端末管理サーバ２０に送信する。なお、例えば、ユーザＢが「音声受信」のチェックボックスを外した場合や所定の条件を満たした場合（後述）は、受信要求送信部４１は、受信の解除要求を送信する。例えば、受信要求送信部４１は、受信要求を送信する場合は「＋１」を送信し、解除要求を送信する場合は「−１」を送信する。

なお、各端末１０では、「音声送信」及び「音声受信」の両方の選択画面が表示されており、各ユーザは、各選択画面を別個に選択することが可能になっている。例えば、端末１０において、ユーザＡは、「音声送信」及び「音声受信」の両方を選択することもできる。

端末管理サーバ２０（図３参照）の送信要求受信部２４は、端末１０の送信要求送信部１１から送信された送信要求を受信する。例えば、端末１０ａ、１０ｆのそれぞれから送信要求が送信された場合、送信要求受信部２４は、両端末１０ａ、１０ｆの送信要求を受信する。

端末管理サーバ２０の受信要求受信部２５は、端末１０の受信要求送信部４１から送信された受信要求を受信する。例えば、端末１０ａ〜１０ｆのそれぞれから受信要求が送信された場合、受信要求受信部２５は、各端末１０ａ〜１０ｆの受信要求を受信する。

端末管理サーバ２０の判定処理部２６は、送信要求受信部２４により受信された送信要求に基づいて、該送信要求を送信した端末１０における音声送信の許否を判定する。具体的には、判定処理部２６は、送信要求受信部２４により受信された送信要求を行った端末１０の合計台数と、予め設定された設定台数とを比較し、合計台数が設定台数以下であるか否かを判定する。そして、判定処理部２６は、合計台数が設定台数以下である場合は、送信要求を行った端末１０における音声送信を許可し、合計台数が設定台数を超える場合は、音声送信を拒否する。例えば、設定台数が「３」に設定されている場合に、端末１０ａ、１０ｆが送信要求を行った場合、合計台数（２台）は設定台数（３台）以下であるため、端末１０ａ、１０ｆにおける音声送信を許可する。

ここで、判定処理部２６は、現時点（判定対象の端末が送信要求を行った時点）で送信要求を行っている端末１０の合計台数を算出する。例えば、端末１０ａ、１０ｆが既に送信要求を行っており、新たに端末１０ｂが送信要求を行った場合、現時点の上記合計台数は３台となる。よって、例えば、設定台数が「２」に設定されている場合に、端末１０ａ、１０ｆが既に送信要求を行っており（音声送信が既に行われていてもよい）、新たに端末１０ｂが送信要求を行った場合は、合計台数（３台）が設定台数（２台）を超えるため、新たに送信要求を行った端末１０ｂの音声送信を拒否する。

このように、音声送信は、送信要求を行った順に設定台数に達するまで許可が与えられる。また、音声送信が許可された端末１０の台数が設定台数に達した場合は、何れかの端末１０において音声送信（通信路）が解除された場合に、他の端末１０の音声送信の許可が与えられ得る。

判定処理部２６は、上記判定結果（許可通知、拒否通知）を、送信要求を送信した端末１０に送信する。

また、判定処理部２６は、受信要求受信部２５により受信された受信要求に基づいて、該受信要求を送信した端末１０における音声受信の許否を判定してもよい。例えば、判定処理部２６は、受信要求受信部２５により受信された受信要求を行った端末１０の合計台数と、予め設定された設定台数とを比較し、合計台数が設定台数以下であるか否かを判定してもよい。また、判定処理部２６は、受信要求受信部２５により受信された全ての受信要求について、音声受信を許可してもよい。判定処理部２６は、上記判定結果（許可通知、拒否通知）を、受信要求を送信した端末１０に送信する。

さらに、判定処理部２６は、送信要求を行える端末１０の合計台数が設定台数に達した場合に、送信端末数が規定値（設定台数）に達し、これ以上の送信要求が行えないことを示す通知（メッセージ）を、端末管理サーバ２０に接続されている全端末１０に送信してもよい。同様に、送信解除要求を受けて送信要求を行える台数が設定台数を下回った場合に、送信要求が可能になったことを示す通知を、全端末１０に送信してもよい。また、設定台数に達するまでの残りの台数自体を示す通知を送信しても良い。例えば、設定台数が２台だった場合に、端末１０ａからの送信要求があった場合には端末１０ａに送信許可を通知するとともに、全端末１０に設定台数に達するまでの残りの台数である「１（台）」を送信し、次に端末１０ｆからの送信要求があった場合には端末１０ｆに送信許可を通知するとともに、全端末１０に「０（台）」を送信し、さらに今度は端末１０ａから送信解除要求があった場合には全端末１０に「１（台）」を送信する、といった具合である。なお、判定処理部２６は、受信要求に対しても上記と同様の処理を実行しても良い。

端末管理サーバ２０の端末情報生成部２７は、送信要求受信部２４により受信された送信要求と、判定処理部２６における上記判定結果に基づいて、送信端末情報を生成する。具体的には、端末情報生成部２７は、合計台数が設定台数以下である場合に、音声送信を許可する端末１０の端末情報を一覧にした送信端末リストを生成する。例えば、端末１０ａ、１０ｆから受信した送信要求が許可された場合、端末情報生成部２７は、端末１０ａ、１０ｆの名称、識別情報（端末ＩＤ、ＩＰアドレス等）等の端末情報を一覧にした送信端末リストを生成する。図７には、送信端末リストの一例を示している。端末情報生成部２７は、受信された送信要求が許可される度、又は送信要求が解除される度に、送信端末リストを更新する。生成された送信端末リストは、端末情報ＤＢ２８に保存される。

また、端末情報生成部２７は、受信要求受信部２５により受信された受信要求に基づいて、受信端末情報を生成する。具体的には、端末情報生成部２７は、受信要求を許可する端末１０の端末情報を一覧にした受信端末リストを生成する。例えば、端末１０ａ〜１０ｆから受信した受信要求が許可された場合、端末情報生成部２７は、端末１０ａ〜１０ｆの名称、識別情報（端末ＩＤ、ＩＰアドレス等）等の端末情報を一覧にした受信端末リストを生成する。図８には、受信端末リストの一例を示している。端末情報生成部２７は、受信された受信要求が許可される度、又は受信要求が解除される度に、受信端末リストを更新する。図９には、図８の状態において、ネットワーク接続された端末１０ｇ（図示せず）から受信された新たな受信要求が許可された場合の、更新された受信端末リストを示している。生成された受信端末リストは、端末情報ＤＢ２８に保存される。

また、端末情報生成部２７は、判定処理部２６において音声送信が許可された端末１０に対して、上記受信端末リストを送信する。さらに、端末情報生成部２７は、上記受信端末リストが更新（変更）された際も音声送信が許可された端末１０に対して、更新された受信端末リストを送信する。例えば、端末１０ａ、１０ｆに対して音声送信が許可された場合、端末情報生成部２７は、上記受信端末リスト（図８参照）を端末１０ａ、１０ｆに送信する。また、上記受信端末リストが更新された際も、端末情報生成部２７は、更新された受信端末リストを端末１０ａ、１０ｆに送信する。その際、変更された（追加された）受信端末リストだけを送信しても良い。

端末１０の判定結果取得部１２（図５参照）は、端末管理サーバ２０の判定処理部２６における上記判定結果を受信（又は取得）する。例えば、端末１０ａ、１０ｆの判定結果取得部１２は、端末管理サーバ２０から、音声送信の許可通知を取得する。

端末１０の端末情報取得部１３（端末情報受信部）（図５参照）は、端末管理サーバ２０の端末情報生成部２７から受信端末リストを取得（又は受信）する。例えば、端末１０ａ、１０ｆの端末情報取得部１３は、端末管理サーバ２０から、図８に示す受信端末リストを取得する。

端末１０の通信路制御部１４（制御手段）（図５参照）は、端末情報取得部１３により取得された受信端末リストに基づいて、他の端末１０との間に、音声データを送信する（送受信させる）ための通信路を確立する。取得した受信端末リストは、記憶部１０３に保存される。例えば、端末１０ａの通信路制御部１４は、端末１０ａと、端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆそれぞれとの間に通信路を確立する。図１０には、端末１０ａと端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆそれぞれとの間に確立された通信路を示すネットワーク構成を示している。同様に、端末１０ｆの通信路制御部１４は、端末１０ｆと、端末１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅそれぞれとの間に通信路を確立する。図１１には、端末１０ｆと端末１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅそれぞれとの間に確立された通信路を示すネットワーク構成を示している。図１２には、上記の例において確立される全通信路を示すネットワーク構成を示している。図１０〜図１２において、矢印の向きは、音声データの送信方向を示している。なお、図１０〜図１２では、端末管理サーバ２０を介さずに音声データを送受信する構成を示しているが、ネットワーク構成はこれに限定されず、端末管理サーバ２０を中継器として音声データを送受信する構成であってもよい。

また、通信路の確立は、例えば、音声送信する端末（送信端末）が、音声受信する端末（受信端末）に対して、受信端末情報のＩＰアドレス及びポート番号に基づいて行われる。また、例えば、ユーザＡが端末１０ａの表示部１０６に表示された「音声送信」のチェックボックスを外した場合、通信路制御部１４は、確立した通信路を解除する。

端末１０の音声送信部１５（図５参照）は、通信路制御部１４により上記通信路が確立されると、音声入力部１０７に入力された音声データを、上記通信路を介して各端末１０に送信（配信）する。例えば、音声送信部１５は、端末１０ａの音声入力部１０７に入力されたユーザＡの発言（音声）に対応する音声データを、通信路（図１２の一重線）を介して端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆに送信し、端末１０ｆの音声入力部１０７に入力されたユーザＦの発言（音声）に対応する音声データを、通信路（図１２の二重線）を介して端末１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅに送信する。これにより、ユーザＡとユーザＦの発言（音声データ）が、例えば同じタイミングで他の端末１０に送信され得る。なお、音声送信部１５は、各端末１０に、ストリーム送信（ストリーミング）を行ってもよいし、音声データファイルを送信してもよい。また、送信端末及び受信端末ともにＷｅｂブラウザが組み込まれている場合は、ＷｅｂＲＴＣ（Web Real-Time Communication）を用いて、送信端末の音声ストリームを受信端末に接続させてもよい良い。

また、音声送信部１５は、音声入力部１０７に入力された音声データを、メディアデータ管理サーバ３０に送信（配信）する。メディアデータ管理サーバ３０は、受信した音声データを記憶部３０３に保存する。メディアデータ管理サーバ３０の詳細は後述する。

端末１０の表示制御部１６（図５参照）は、判定結果取得部１２により取得された上記判定結果に応じた表示内容を、表示部１０６に表示させる。例えば、判定結果取得部１２が端末管理サーバ２０から音声送信の許可通知を取得した場合は、表示制御部１６は、表示部１０６に、音声送信が許可された旨のメッセージを表示させる。また、判定結果取得部１２が端末管理サーバ２０から音声送信の拒否通知を取得した場合は、表示制御部１６は、表示部１０６に、音声送信の拒否を示すエラーメッセージを表示させるとともに、表示部１０６に表示された「音声送信」の選択画面（チェックボックスや電子的ボタン）を選択できないように変更する。例えば、音声送信（送信要求）を選択するための電子的ボタンを、グレーアウト(不活性化)表示して選択(押下)できないようにしたり、表示部１０６に、「現在送信要求はできない」という旨の注記を表示したりしてもよい。このように、表示制御部１６は、ユーザが新たな音声送信（送信要求）ができないように表示部１０６の表示内容を制御してもよい。

端末１０の判定結果取得部４２（図６参照）は、端末管理サーバ２０の判定処理部２６における上記判定結果を受信（又は取得）する。例えば、端末１０ａ〜１０ｆの判定結果取得部４２は、端末管理サーバ２０から、音声受信の許可通知を取得する。

端末１０の表示制御部４３（図６参照）は、判定結果取得部４２により上記許可通知が取得されると、表示部１０６に、音声受信が許可された旨のメッセージを表示させる。また、判定結果取得部４２が端末管理サーバ２０から音声受信の拒否通知を取得した場合は、表示制御部４３は、表示部１０６に、音声受信の拒否を示すエラーメッセージを表示させるとともに、表示部１０６に表示された「音声受信」の選択画面（チェックボックスや電子的ボタン）を選択できないように変更する。

端末１０の音声受信部４４（図６参照）は、上記通信路を介して送信される音声データを受信する。音声出力部１０８は、受信された音声データを変換して音声を出力する。例えば、端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆのそれぞれの音声受信部４４は、端末１０ａから通信路（図１２の一重線）を介して送信されるユーザＡの発言（音声）に対応する音声データを受信し、それぞれの音声出力部１０８は音声を出力する。また、端末１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅのそれぞれの音声受信部４４は、端末１０ｆから通信路（図１２の二重線）を介して送信されるユーザＦの発言（音声）に対応する音声データを受信し、それぞれの音声出力部１０８は音声を出力する。これにより、例えば端末１０ｂ、１０ｃ、１０ｄ、１０ｅのユーザＢ、ユーザＣ、ユーザＤ、及びユーザＥは、ユーザＡの発言とユーザＦの発言を同じタイミングで聞くことができる。

次に、電子会議システム１００における通信路確立処理の流れについて、フロー図を用いて説明する。図１３は、端末管理サーバ２０が端末１０から送信要求を受信した場合のフロー図を示している。この処理は、例えば、会議を開始する際、端末管理サーバ２０が会議の開始案内を端末管理サーバ２０にネットワーク接続された複数の端末１０に通知することにより実行される。後述する図１４及び図１５の処理も同様である。

まず、端末１０から送信要求が送信されると、送信要求受信部２４は該送信要求を受信する（Ｓ１０１）。次に、判定処理部２６は、送信要求を行った端末１０の合計台数と、予め設定された設定台数とを比較し、合計台数が設定台数以下であるか否かを判定する（Ｓ１０２）。

上記合計台数が上記設定台数以下である場合は、判定処理部２６は、送信要求を行った端末１０に音声送信の許可通知を送信するとともに、端末情報生成部２７は、送信端末リスト（図７参照）を生成する（Ｓ１０３）。続いて、端末情報生成部２７は、送信端末リストに登録した端末１０に対して、受信要求を行った端末の情報を一覧にした受信端末リストを送信する（Ｓ１０４）。

Ｓ１０２の処理において、上記合計台数が上記設定台数を超える場合は、判定処理部２６は、送信要求を送信した端末１０に音声送信の拒否通知を送信する（Ｓ１０５）。上記Ｓ１０１からＳ１０５の処理は、会議が終了するまで繰り返される（Ｓ１０６）。

図１４は、端末管理サーバ２０が端末１０から受信要求を受信した場合のフロー図を示している。

まず、端末１０から受信要求が送信されると、受信要求受信部２５は該受信要求を受信する（Ｓ２０１）。次に、端末情報生成部２７は、受信端末リスト（図８参照）を生成又は更新する（Ｓ２０２）。次に、端末情報生成部２７は、受信端末リストに登録した端末１０に対して、音声受信の許可通知を送信する（Ｓ２０３）。なおここでは、受信要求受信部２５により受信された全ての受信要求について音声受信が許可された場合を示しているが、判定処理部２６は、予め設定された設定台数以下である場合のみ音声受信を許可し、拒否の場合は、音声受信の拒否通知を端末１０に送信するようにしても良い。次に、端末情報生成部２７は、送信端末リストを取得して、送信端末リストに登録されている端末１０の１台毎に、受信端末リストを送信する（Ｓ２０４）。なお、受信端末リストが変更（更新）された場合は、変更があった（追加された）受信端末リストだけを送信しても良い。上記Ｓ２０１からＳ２０４の処理は、会議が終了するまで繰り返される（Ｓ２０５）。

図１５は、端末１０においてユーザが送信要求を行った場合の端末１０における処理（通信路確立処理）のフロー図を示している。

まず、会議において、端末１０がユーザから送信要求を受け付ける（Ｓ３０１）。次に、送信要求送信部１１は、受け付けた送信要求を端末管理サーバ２０に送信する（Ｓ３０２）。端末管理サーバ２０は、送信要求を受信すると、図１３に示すＳ１０１からＳ１０５の処理を実行する。

次に、端末１０の判定結果取得部１２は、端末管理サーバ２０から送信許可通知又は送信拒否通知を取得する（Ｓ３０３）。送信許可通知を取得した場合は、端末情報取得部１３は、端末管理サーバ２０から受信端末リストを取得する（Ｓ３０４）。

次に、通信路制御部１４は、受信端末リストから任意の１つの端末１０の端末情報（端末ＩＤ）を取得する（Ｓ３０５）。次に、通信路制御部１４は、取得した端末情報に対応する端末１０に対して音声データを送信するための通信路を確立する（Ｓ３０６）。通信路制御部１４は、受信端末リストに登録されている全ての端末１０について、通信路を確立する処理を実行する（Ｓ３０７）。

次に、音声送信部１５は、確立された通信路を介して、音声データを各端末１０に送信する（Ｓ３０８）。

上記Ｓ３０３の処理において、判定結果取得部１２が端末管理サーバ２０から送信拒否通知を取得した場合は、端末１０の表示制御部１６は、表示部１０６にエラーメッセージを表示させる（Ｓ３０９）。上記Ｓ３０１からＳ３０９の処理は、会議が終了するまで繰り返される（Ｓ３１０）。

以上のように、本実施形態に係る電子会議システム１００は、発言権が付与された（音声を送信する）送信端末数に上限を設けるとともに、送信を許可する端末をユーザの指示に応じて動的に変化させて、送信が許可された端末と、他の端末との間に通信路を確立する構成を有している。これにより、ネットワークを介して接続される端末の台数が多くなっても、端末間で高品質なデータ通信が実現される。また、各ユーザは、発言（音声）を送信したい場合や、音声を受信したい場合など、自身の意思に応じて選択することができ、ネットワーク上の端末間には、ユーザの意思に反映して動的に通信路が変化して確立される。

また、電子会議システム１００によれば、資料（表示内容）の共有状態（同期、非同期）とは独立して、音声データの通信が制御される。すなわち、複数の端末間において資料及び音声を別個に同期制御することができる。このため例えば、会議中において、音声データを送受信するための通信路のネットワークが図１２に示すように構築されており、端末１０ａのユーザＡが表示内容に関する操作を行う発表者である場合は、ユーザＡは、上記操作を行いつつ発言（例えば表内容に対する説明）を行うこともできる。これにより、他の端末１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆの各ユーザＢ〜ユーザＦは、端末１０ａにおける操作内容に応じた表示画面を各自の端末の表示画面で確認しつつ、各自の端末の音声出力部１０８から出力されるユーザＡの発言（説明）を聞くことができる。

以上に説明した構成は、例えば、発表者のユーザＡが端末１０ａの表示部１０６に表示された資料Ｘを、参加者のユーザＢ〜Ｆの端末１０ｂ〜１０ｆの表示部１０６に同期表示させるとともに、ユーザＡが発言した音声を端末１０ｂ〜１０ｆから出力させる構成である。また、ユーザＡが資料Ｘに対する操作、例えば、ペンツールによる資料Ｘへの書き込み、投稿コメントのピックアップ、資料Ｘのページ切り替え、資料Ｘへのマウスポインタの入力及び移動等の操作が行われた場合に、その操作に応じた内容が端末１０ｂ〜１０ｆの表示部１０６に同期して表示される構成である。

本実施形態に係る電子会議システム１００は、上記「同期表示処理」及び「通信路確立処理」を実行する構成に加えて、会議の音声・映像等のメディアデータを記録して管理するメディアデータ管理処理を実行する構成を有している。具体的には、電子会議システム１００は、会議の音声データに、会議で発生したイベントに関連するイベント情報（以下、メタデータという。）を付与する（関連付ける）。例えば、会議において、ユーザＡが資料Ｘを別の資料Ｙに変更（新規資料を表示）した場合に、変更した資料Ｙの情報と変更した時刻の情報とを、音声データに関連付ける。
本実施形態に係る電子会議システム１００では、メディアデータ管理サーバ３０は、図３に示す各機能を実現するためのプログラムを有する。また各端末１０がメディアデータ管理サーバ３０に接続され認証されると、例えば、各端末１０に、メディアデータを管理するメディアデータ管理プログラムがダウンロードされてもよい。

以下では、電子会議システム１００におけるメディアデータ管理処理を実現するための機能について説明する。

［メディアデータ管理処理］
図３には、メディアデータ管理サーバ３０の具体的な構成を示している。

メディアデータ管理サーバ３０は、イベント検知部３１、メタデータ種別判定部３２（判定手段）、時間情報取得部３３、メタデータ生成部３４（生成手段）、及び、メタデータ付与部３５（関連付手段）を含んでいる。これらの要素はメモリ３０２に格納されたプログラムをＣＰＵ３０１が実行することにより実現される。

記憶部３０３には、メディアデータベース（メディアＤＢ３６）及びメタデータ管理データベース（メタデータ管理ＤＢ３７）が含まれている。メディアＤＢ３６には、会議の音声・映像等のメディアデータが保存される。ここでは、メディアデータの一例として、音声データを例に挙げる。例えば、会議において、各端末１０の音声送信部１５から送信された音声データが時系列に記録されていき、会議終了と同時に１つの音声データとして保存される。なお、音声データには時間情報が関連付けられている。時間情報は、会議開始時点からの経過時間の情報であってもよいし、会議が行われたリアルタイムの日時の情報であってもよい。メタデータ管理ＤＢ３７には、メタデータに関する各種の情報が保存される。

上記プログラムは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、メモリカード等のコンピュータが読み取り可能な情報記憶媒体から端末１０にインストールされてもよいし、インターネット等の通信ネットワーク５０を介してダウンロードされてもよいし、上記各要素に対応するプログラムが予め記憶されたメディアデータ管理サーバ３０から、所定の要素に対応するプログラムが各端末１０にダウンロードされてもよい。

イベント検知部３１は、電子会議システム１００において発生した各種のイベントを検知する。イベントは、複数の端末１０が相互に通信しているときに発生した動作に関するものである。例えばイベントには、会議中に各端末１０においてユーザが操作した行為（「ユーザ操作」）や、ユーザが会議に参加するために行った行為（「入室」）や、ユーザが会議から抜けるために行った行為（「退室」）等が含まれる。また、ユーザ操作には、新規資料の表示、ペンツール（手書き用ツール）による資料への書き込み（文字入力）、投稿コメント（質問等）のピックアップ（選択）、資料のページ切り替え、マウスポインタの入力及び移動、アンケート集計等の発表者又は参加者による操作や、発表者を交代するための操作等が含まれる。

メタデータ種別判定部３２は、イベント検知部３１により検知されたイベントに対応するメタデータ種別を判定する。ここでメタデータは、上述の通り、音声データに関連付けられる、会議で発生したイベントに関連する情報（イベント情報）であり、メタデータ種別は、メタデータの種類（カテゴリー）を示す情報（イベント情報種別）である。メタデータ種別判定部３２は、メタデータ種別判定テーブルを参照してイベントに対応するメタデータ種別を判定する。図１６には、メタデータ種別判定テーブルの一例を示している。例えば、上記イベントが「発表者のページ切り替え」であった場合、発表者は切り替え後のページの説明に入ったと判断できるため、メタデータ種別判定部３２は、対応するメタデータ種別を、「Ｐ（説明）：ページ番号」と判定する。また上記イベントが「コメントピックアップ」であった場合、ピックアップされているコメントは参加者からの質問であり、発表者がこれに対する回答をしていると判断できるため、メタデータ種別判定部３２は、対応するメタデータ種別を、「Ａ（回答）：メッセージ番号」と判定する。メタデータ種別判定テーブルは、例えば管理者により予め設定される。

時間情報取得部３３は、会議においてイベントを検知した現在時刻（イベントが発生した時刻）（時間情報）を取得する。現在時刻は、会議開始時点からの経過時間であってもよいし、実際の日時であってもよい。ここでは、会議開始時点からの経過時間を例に挙げる。

メタデータ生成部３４は、メタデータ種別判定部３２により判定されたメタデータ種別と、時間情報取得部３３により取得された時間情報とに基づいて、対応するメタデータを生成する。具体的には、メタデータ生成部３４は、メタデータ管理テーブルにメタデータを構成する各種情報（メタデータ情報）を記録していくことによりイベントに対応するメタデータを生成する。メタデータ生成部３４は、会議中にイベントが発生する度に、メタデータ管理テーブルにメタデータ情報を記録してメタデータを生成する。図１７には、メタデータ管理テーブルの一例を示している。図１７は、会議が終了した時点のメタデータ管理テーブルを示している。１つのイベント毎に、管理番号「ＭＤ」と、音声の開始時刻及び終了時刻（時間情報）と、イベントの内容（イベント情報）が記録される。これら開始時刻、終了時刻、イベント情報のそれぞれがメタデータ情報となる。そして、１つの管理番号に対応する時間情報とインベント情報とが、１つのメタデータとなる。図１７に示すメタデータ管理テーブルは、図１８に示す、１つの会議で発生した一連のイベントの内容に対応している。

図１８において、「音声データ」は、会議中に録音されメディアＤＢ３６に保存されたデータであり、ここでは、全体で２０分間の容量を有することを示している。「発表者」は、会議において発表を担当したユーザを示し、ここでは、時系列で発表者がユーザＡ、Ｂ、Ａの順に変更したことを示している。「参加者数」は、会議に参加したユーザの人数を示し、ここでは、時系列で参加者数が１０人、２５人、８人の順に増減したことを示している。「参加者」は、会議に参加しているユーザを示し、例えば、ユーザＣは会議の最初から最後まで参加し、ユーザＤ、Ｅは会議の途中で退室し、ユーザＦ、Ｇは会議の途中から参加（入室）したことを示している。「Ｐ（説明）」は、会議で使用（表示）された資料のページ番号を示しており、ここでは、時系列でページ番号が１ページから６ページまで順に切り替えられたことを示している。「Ｑ（質問）」は、ユーザ（参加者）が投稿した質問（メッセージ番号「Ｍ３」）を示し、参加者が手書き文字入力した時刻から文字入力を終了した時刻までを示している。「Ａ（回答）」は、上記質問に対する発表者の回答（メッセージ番号「Ｍ２」）を示し、発表者が上記質問をピックアップ（選択）した時刻からクローズした（閉じた）時刻までを示している。「Ｃ（補足）」は、ユーザが投稿したコメント（メッセージ番号「Ｍ１」）を示し、発表者が手書き文字入力した時刻から文字入力を終了した時刻までを示している。なお、質問、回答及び補足の内容は、メッセージ管理テーブルに保存され、それぞれにメッセージ番号が付されて管理されている。図１９には、メッセージ管理テーブルの一例を示している。メッセージ管理テーブルは、記憶部３０３に保存される。

図１７に示すように、例えば、管理番号「ＭＤ１」は、会議中の「０１：００」から「０５：００」の期間において、メッセージ番号「Ｍ３」の質問（「Ｑ」）がされたことを示し、管理番号「ＭＤ２」は、会議中の「０５：００」から「０８：００」の期間において、メッセージ番号「Ｍ２」の回答（「Ａ」）がされたことを示し、管理番号「ＭＤ３」は、会議中の「０８：００」から「１２：００」の期間において、メッセージ番号「Ｍ１」のコメント（「Ｃ」）がされたことを示している。また、管理番号「ＭＤ４」は、会議中の「００：００」から「０２：００」の期間において、資料の１ページが表示及び説明（「Ｐ」）されたことを示し、管理番号「ＭＤ５」は、会議中の「０２：００」から「０７：００」の期間において、資料の２ページが表示及び説明（「Ｐ」）されたことを示している。また、管理番号「ＭＤ１０」は、会議中の「００：００」から「０８：００」の期間において、ユーザＡが発表を担当したことを示し、管理番号「ＭＤ１１」は、会議中の「０８：００」から「１４：００」の期間において、ユーザＢが発表を担当したことを示している。

メタデータ付与部３５は、メタデータ生成部３４により生成されたメタデータをメディアＤＢ２２１に保存されている音声データに付与する。具体的には、音声データには時間情報が関連付けられているため、メタデータ付与部３５は、メタデータの時間情報に一致する音声データの位置にメタデータを付与する。図２０には、音声データと、該音声データに付与されたメタデータとを模式的に示している。ここでは、一例として、メタデータ「ＭＤ１」、「ＭＤ２」、「ＭＤ３」、「ＭＤ４」、「ＭＤ５」、「ＭＤ１０」、「ＭＤ１１」を示している。

なお、メタデータ付与部３５は、メディアＤＢ２２１に保存されている音声データを、メタデータ生成部３４により生成されたメタデータ毎に分割して、分割した音声データそれぞれにメタデータを付与してもよい。この場合は、メタデータの個数分の音声データファイルが生成される。また、メタデータ付与部３５は、生成されたメタデータを、音声データに関連付けて、音声データとは異なるフォルダに保存してもよい。

上記の構成によれば、保存された音声データにおいて、イベントに対応する部分の音声データの検索が容易になるため、所望の音声だけを効率よく再生することができる。例えば、音声データを再生する際に、資料の２ページの説明に対応する部分の音声だけを迅速に再生させることができる。また、例えば、発表者がＡからＢに変更されている場合に、Ｂが発表した部分の音声だけを迅速に再生させることができる。

音声を再生させる構成は特に限定されない。例えば、端末管理サーバ２０の受付処理部２１が、ユーザからイベントに対応する音声データの再生要求を受け付け、該イベントに対応する音声データをユーザの端末に送信して再生してもよい。受付処理部２１は、受付手段及び再生手段として機能する。

例えば、メタデータ管理テーブルに応じた画面をユーザの端末に表示させて、ユーザが表示画面上で所望のイベント内容を選択した場合に、端末管理サーバ２０の受付処理部２１が、ユーザが選択したイベントを受け付け、これに関連付けられた音声データをユーザの端末に送信して再生させるように構成してもよい。

ここで、メディアデータ管理処理、すなわちメタデータの生成及び付与処理（関連付処理）の流れについて、図２１及び図２２のフロー図を用いて説明する。図２１は、発表者Ａが会議中に資料のページを１ページから２ページに切り替えた場合の処理の流れを示し、図２２は、会議中に参加者が質問したコメントを発表者Ａがピックアップした場合の処理の流れを示している。

図２１に示す例において、先ず、イベント検知部３１が発表者Ａによる資料のページ切り替えのイベントを検知する（Ｓ５１）。次に、メタデータ種別判定部３２が、メタデータ種別判定テーブル（図１６）を参照して、上記イベントに対応するメタデータ種別を判定する（Ｓ５２）。ここでは、図１６に示すように、メタデータ種別として、「Ｐ（説明）：ページ番号」と判定する。次に、メタデータ生成部３４は、切り替え前後のページ番号を取得する（Ｓ５３）。ここでは、ページ番号として「１」及び「２」を取得する。

次に、時間情報取得部３３が、現在時刻（時間情報）、すなわちイベントを検知した時刻（イベントが発生した時刻）を取得する（Ｓ５４）。ここでは、時間情報取得部３３は、発表者Ａが資料のページを１ページから２ページに切り替えた時刻を取得する。例えば現在時刻「０２：００」を取得する（図１８参照）。なお、本実施例では、現在時刻は、会議開始時を基準（「００（分）：００（秒）」）とした経過時間としているが、これに限定されず、実際の日時でもよい。

次に、メタデータ生成部３４は、切り替え前の表示ページが存在するか否かを判定する（Ｓ５５）。例えば、会議の途中で初めて資料の所望のページを表示した場合には、これ以前に表示していたページは存在しない。ここでは、１ページから２ページに切り替えているため、切り替え前の表示ページ（１ページ）は存在する。

切り替え前の表示ページが存在する場合は（Ｓ５５でＹＥＳ）、メタデータ生成部３４は、時間情報取得部３３が取得した現在時刻（「０２：００」）を、メタデータ管理テーブルの切り替え前の表示ページ（１ページ）の終了時刻に記録する（図２３参照）（Ｓ５６）。

次に、メタデータ生成部３４は、切り替え後のページ（２ページ）のイベントの内容を記録するとともに、時間情報取得部３３が取得した現在時刻（「０２：００」）を、切り替え後のページ（２ページ）の開始時刻に記録する（図２４参照）（Ｓ５７）。

切り替え前の表示ページが存在しない場合は（Ｓ５５でＮＯ）、Ｓ５７の処理に移行する。

上記の処理により、全音声データのうち時刻「００：００」から「０２：００」までの音声データに対するメタデータ（管理番号「ＭＤ４」）が生成される。なお、管理番号「ＭＤ５」のメタデータは、発表者Ａが２ページから３ページに切り替えたとき（図１８の時刻「０７：００」参照）に生成される（図１７参照）。このようにして生成された各メタデータには、イベントが発生した時間を示す情報（時間情報）と、イベントの内容を示す情報とが含まれる。

最後に、メタデータ付与部３５は、メタデータ生成部３４により生成されたメタデータ（管理番号「ＭＤ４」）をメディアＤＢ２２１に保存されている音声データの所定の位置に付与する（図２０参照）（Ｓ５８）。

図２２に示す例のメタデータの生成及び付与処理を説明する。

先ず、イベント検知部３１が、発表者Ａによるコメントピックアップのイベントを検知する（Ｓ６１）。次に、メタデータ種別判定部３２が、メタデータ種別判定テーブルを参照して、上記イベントに対応するメタデータ種別を判定する（Ｓ６２）。ここでは、図１６に示すように、メタデータ種別として、「Ａ（回答）：メッセージ番号」と判定する。次に、メタデータ生成部３４は、ピックアップされたメッセージ番号を取得する（Ｓ６３）。ここでは、メッセージ番号として「Ｍ２」を取得する。

次に、時間情報取得部３３が、現在時刻、すなわちイベントを検知した時刻（イベントが発生した時刻）を取得する（Ｓ６４）。ここでは、時間情報取得部３３は、発表者Ａがコメントをピックアップした時刻を取得する。例えば現在時刻「０５：００」を取得する（図１８参照）。

次に、メタデータ生成部３４は、イベントの内容を記録するとともに、時間情報取得部３３が取得した現在時刻（「０５：００」）を、イベントに対応する開始時刻に記録する（図２５参照）（Ｓ６５）。

次に、イベント検知部３１が、発表者Ａによるコメントピックアップ終了のイベントを検知する（Ｓ６６）。次に、時間情報取得部３３が、現在時刻、すなわちイベントを検知した時刻を取得する（Ｓ６７）。ここでは、時間情報取得部３３は、ピックアップを終了した時刻（クローズした時刻）を取得する。例えば現在時刻「０８：００」を取得する（図１８参照）。

次に、メタデータ生成部３４は、時間情報取得部３３が取得した現在時刻（「０８：００」）を、終了時刻に記録する（図２６参照）（Ｓ６８）。

上記の処理により、全音声データのうち時刻「０５：００」から「０８：００」までの音声データに対するメタデータ（管理番号「ＭＤ２」）が生成される。

最後に、メタデータ付与部３５は、メタデータ生成部３４により生成されたメタデータ（管理番号「ＭＤ２」）をメディアＤＢ２２１に保存されている音声データの所定の位置に付与する（図２０参照）（Ｓ６９）。

［変形例１］
電子会議システム１００における音声を送受信する構成は上記構成に限定されず、様々な構成を採用することができる。以下では、変形例１に係る電子会議システム１００について、上記構成との相違点を中心に説明する。以下の変形例１に係る電子会議システム１００において、上記電子会議システム１００と機能が共通する要素については説明を省略する。

変形例１に係る電子会議システム１００では、端末管理サーバ２０は、さらに、各端末１０の現在地を取得する現在地取得部２９を含んでもよい。図２７は、変形例１に係る端末管理サーバ２０の具体的な構成を示す機能ブロック図である。

現在地取得部２９は、例えば、各端末１０に設けられた位置検出部（図示せず）（例えば、ＧＰＳ等）の検出値を受信して、各端末１０の現在地（住所地等）を取得する。また、現在地取得部２９は、ＩＰアドレスやネットワークのサブネット等と位置情報を予め設定しておき、各端末１０のＩＰアドレスを取得することで各端末１０の現在地を取得しても良い。

判定処理部２６は、受信要求受信部２５により受信された受信要求と、現在地取得部２９により取得された各端末１０の現在地とに基づいて、該受信要求を送信した端末１０における音声受信の許否を判定する。

端末情報生成部２７は、受信要求受信部２５により受信された受信要求と、判定処理部２６の判定結果とに基づいて、受信端末情報を生成する。具体的には、端末情報生成部２７は、受信要求を行った端末１０のうち、判定処理部２６により許可された端末１０の情報を一覧にした受信端末リストを生成する。端末情報生成部２７は、判定処理部２６において音声送信が許可された端末１０に対して、上記受信端末リストを送信する。

以下、具体例を挙げて説明する。図２８は、端末１０ａ、１０ｂ、１０ｃが同一の会議室１０１に設けられ、端末１０ｄが会議室１０１から遠隔の地Ｐ１に設けられ、端末１０ｅが会議室１０１から遠隔の地Ｐ２に設けられ、端末１０ｆが会議室１０１から遠隔の地Ｐ３に設けられている場合のネットワーク構成を示している。

図２８のネットワーク構成において、端末１０ａ、１０ｆが送信要求を送信し、端末１０ａ〜１０ｆが受信要求を送信したと仮定する。端末１０ａ、１０ｆは、送信要求の合計台数（２台）が設定台数（３台）以下であるため、音声送信が許可される。

現在地取得部２９は、各端末１０ａ〜１０ｆから現在地を取得する。すなわち、現在地取得部２９は、端末１０ａ、１０ｂ、１０ｃの現在地として「会議室１０１」を取得し、端末１０ｄの現在地として「遠隔地Ｐ１」を取得し、端末１０ｅの現在地として「遠隔地Ｐ２」を取得し、端末１０ｆの現在地として「遠隔地Ｐ３」を取得する。

判定処理部２６は、各端末１０の現在地が、同一又は予め設定された範囲内の場所（所定場所）であるか否かを判定し、複数の端末１０が所定場所に存在する場合は、複数の端末１０のうちの１台の端末１０については音声受信を許可し、その他の端末１０については音声受信を拒否する。図２８のネットワーク構成では、所定の場所（会議室１０１）に存在する端末１０ａ、１０ｂ、１０ｃのうち、端末１０ａの音声受信を許可し、端末１０ｂ、１０ｃの音声受信を拒否する。判定処理部２６は、判定結果（許可通知、拒否通知）を、受信要求を送信した端末に送信する。

端末情報生成部２７は、上記判定結果に基づいて、図２９に示す受信端末リストを生成し、端末１０ａ、１０ｆに送信する。端末１０ａ、１０ｆは、取得した受信端末リストに基づいて通信路を確立する。図３０は、変形例１に係る電子会議システム１００において確立される通信路を示すネットワーク構成を示している。

なお、複数の端末１０が所定場所に存在し、これらのうちの複数の端末１０において送信要求が行われた場合は、判定処理部２６は、送信要求を行った複数の端末１０のうちの１台の端末１０については音声送信を許可し、その他の端末１０については音声送信を拒否しても良い。例えば、会議室１０１に存在する端末１０ａ、１０ｂ、１０ｃにおいて送信要求を行なわれた場合、端末１０ａの音声送信を許可し、端末１０ｂ、１０ｃの音声送信を拒否する。端末情報生成部２７は、音声送信を許可した端末１０ａに受信端末リストを送信し、端末１０ａは、取得した受信端末リストに基づいて通信路を確立する。

上記ネットワーク構成の会議では、同一の会議室に存在する複数の端末１０の複数のユーザ（例えばユーザＢ、Ｃ）は、そのうちの一人のユーザ（例えばユーザＡ）の発言内容を直接聞くことができるし、遠隔地の他のユーザ（例えば、ユーザＤ、Ｅ、Ｆ）の発言内容を、該複数の端末１０の何れかの端末１０（例えば端末１０ａ）が受信して出力することにより聞くことができる。よって、変形例１に係る電子会議システム１００によれば、必要な通信路の数を減らすことができる。

［変形例２］
変形例２に係る電子会議システム１００では、上記設定台数を動的に変化させてもよい。具体的には、通信ネットワーク５０を介して接続された全ての端末１０の台数に応じて、設定台数を設定してもよい。例えば、端末１０の台数が多くなる程、設定台数を少なくする構成とすることができる。この構成は、例えば、発言者（発表者）が決まっているセミナー等の電子会議に好適である。また、ネットワークを介して接続された全ての端末１０の台数に対する割合によって設定台数を算出し設定してもよい。さらに、受信要求を行った端末１０の台数に応じて、設定台数を設定してもよい。

［変形例３］
変形例３に係る電子会議システム１００では、通信路が確立された後、音声送信が許可された端末１０から音声データが送信されない時間が、予め設定された時間に達した場合は、通信路制御部１４（図５参照）は、該端末１０に対応する通信路を解除してもよい。例えば、音声送信が許可されたユーザＡが一定時間発言しなかった場合、通信路制御部１４は、ユーザＡの端末１０ａに確立した通信路を強制的に解除する。また、上記構成において、送信端末を使用するユーザをカメラにより撮影し、撮影画像を解析して、ユーザの発言の有無及び無言状態の時間を測定してもよい。カメラは端末１０に内蔵されていてもよいし、外部（例えば会議室）に設置されていてもよい。

［変形例４］
上記実施形態では、図１５に示したように、送信拒否通知を取得した場合に、端末１０の表示制御部１６が、表示部１０６にエラーメッセージを表示させているが、音声送信が拒否された場合の構成はこれに限定されない。

例えば、変形例４に係る電子会議システム１００では、端末１０が端末管理サーバ２０に接続された時点で、送信端末の合計台数が既に設定台数に達している場合はチェックボックスをチェックできないように制御しても良い。また、送信端末の合計台数の増減に合わせて端末管理サーバ２０から情報を取得してチェックボックスの制御を行ってもよい。送信端末の合計台数の取得は、端末管理サーバ２０に対してポーリングで行っても良いが、好適には、Web Socket等を利用して接続した状態にしておき、端末管理サーバ２０側から各端末に通知すれば良い。

なお、上記電子会議システム１００では、以下の構成を有していてもよい。

電子会議システム１００は、多数の端末を繋いでいても、ある瞬間では同時に発言している人（話者端末）は限られていることから、同時に発言できる人数（送信端末の台数）を制限しつつ、送信端末を切り替えながら動的に通信路の確立状態を変化させる構成を有する。これにより、擬似的に多数の端末間で音声データを相互に送受信することが可能となる。

また、電子会議システム１００は、音声送信・音声受信をそれぞれの端末で選択可能とし、各端末の音声送信・音声受信の状態が変わったときに端末管理サーバ２０に通知する構成を有する。

また、端末管理サーバ２０では、音声送信が選択されている端末に対して、音声受信が選択されている端末の一覧（リスト）を通知する。なお、このとき、これまでの状態に変化がない端末の情報は通知しなくてもよい。通知を受けた送信端末は新たに登録された受信端末に対してのみ、自身のストリーム情報を受信するように受信端末にコールをかける（接続要求を発呼する）。

また、電子会議システム１００では、同時に送信できる端末の合計台数を端末管理サーバ２０が管理し、合計台数が上限値（設定台数）に達した場合は、端末において送信要求の選択を不可にする構成を有する。

また、電子会議システム１００では、送信端末には、常時送信端末と、一時的送信端末の２種類が含まれ、このうち一時的送信端末をある一定時間のみ送信可能とし、一定時間経過後は音声送信を解除（送信要求のチェックボックスが解除）する構成としてもよい。また、一時的送信端末では、ユーザが音声送信ボタンを押している間のみ送信可能とする構成としてもよい。また、一時的送信端末では、一定時間無言状態が続くと送信要求が解除される構成としてもよい。

また、電子会議システム１００では、発言したいユーザが端末において送信要求を行い、特定の端末（マスター端末）において指名されたユーザに発言権を与える（送信端末として許可する）構成としてもよい。

また、電子会議システム１００は、上記通信路確立処理を含まない構成であってもよい。すなわち、電子会議システム１００は、従来の音声通信処理を含んでいてもよい。

以上説明した各電子会議システムの各実施形態及び各変形例は一例であって、各形態を組み合わせることもできる。

また、各電子会議システムのネットワーク構成は、端末管理サーバ２０を有しない構成（図３１）であってもよい。図３１に示す構成では、上記電子会議システムに含まれる各要素に対応するプログラムが各端末１０ａ〜１０ｆにダウンロードされることにより実現される。具体的には、各端末１０ａ〜１０ｆのメモリに格納されたプログラムを、各端末のＣＰＵが実行することにより、各電子会議システムが実現される。なお、ダウンロードされるプログラムは、例えばＪａｖａＳｃｒｉｐｔ（登録商標）により構成されてもよい。また、上記プログラムがダウンロード又は記録された端末１０は、情報処理装置として機能する。また、上記プログラムがダウンロードされたコンピュータは、端末１０であってもよいし、端末管理サーバ２０であってもよい。

電子会議システム１００は、音声データの送受信に限定されない。すなわち、電子会議システム１００は、音声データ及び映像データ（動画像データ）の少なくとも何れかを含むメディアデータの送受信に適用することができる。また、各電子会議システムは、テレビ会議、電話会議等の各種の電子会議に適用することができる。なお、テレビ会議では、各端末に搭載されたカメラが撮影した映像を上記通信路を介して端末間で双方向通信する。また、各電子会議システムは、会議出席者が互いに遠隔地にいる遠隔会議に適用することもできる。

以上の説明では、情報処理システムの一例として電子会議システムを例に挙げたが、当該情報処理システムは、電子会議システムに限定されず、ネットワーク接続された端末間でメディアデータを共有する多種多様なシステムを含むものである。

１００ 電子会議システム、１０１，２０１，３０１ ＣＰＵ、１０２，２０２，３０２ メモリ、１０３，２０３，３０３ 記憶部、１０４，２０４，３０４ 通信部、１０５ 操作部、１０６ 表示部、１０７ 音声入力部、１０８ 音声出力部、５０ 通信ネットワーク、１０ 端末、１１ 送信要求送信部、１２ 判定結果取得部、１３ 端末情報取得部、１４ 通信路制御部、１５ 音声送信部、１６ 表示制御部、２０ 端末管理サーバ、２１ 受付処理部、２２ 通信接続部、２３ 通知部、２４ 送信要求受信部、２５ 受信要求受信部、２６ 判定処理部、２７ 端末情報生成部、２８ 端末情報ＤＢ、２９ 現在地取得部、３０ メディアデータ管理サーバ、３１ イベント検知部、３２ メタデータ種別判定部、３３ 時間情報取得部、３４ メタデータ生成部、３５ メタデータ付与部、３６ メディアＤＢ、３７ メタデータ管理ＤＢ。

Claims (9)

1. ネットワークを介して接続され相互に通信する複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディアデータを送受信させるコンピュータを機能させるためのプログラムであって、
   複数の端末が相互に通信しているときに発生したイベントを検知する検知手段、及び、
   前記メディアデータに含まれる時間情報と、前記イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記メディアデータに関連付ける関連付手段、
   としてコンピュータを機能させ、
   前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、
   前記関連付手段は、前記メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、
   ことを特徴とするプログラム。
2. 前記コンピュータを、さらに、
   前記端末においてユーザが行った操作の内容を示す操作情報を受け付ける受付手段、及び、
   前記操作情報と、該操作情報に対応する前記イベント情報の種別を示すイベント情報種別とを関連付けて記憶する記憶手段を参照して、前記受付手段が受け付けた前記操作情報に対応する前記イベント情報種別を判定する判定手段、
   として機能させ、
   前記関連付手段は、前記イベント情報種別に対応する前記イベント情報を、前記メディアデータに関連付ける、
   ことを特徴とする請求項１に記載のプログラム。
3. 前記記憶手段は、前記操作情報と、前記操作を行ったユーザを識別するユーザ情報と、該操作情報に対応する前記イベント情報種別と、を関連付けて記憶し、
   前記判定手段は、前記受付手段が受け付けた前記操作情報と前記ユーザ情報とに対応する前記イベント情報種別を判定する、
   ことを特徴とする請求項２に記載のプログラム。
4. 前記検知手段が、会議で使用する資料に対するユーザのページ切り替え操作を前記イベントとして検知した場合、
   前記関連付手段は、前記ページを切り替えた時刻を示す時間情報と、前記ページを切り替える前のページ番号と、前記ページを切り替えたユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、
   ことを特徴とする請求項１に記載のプログラム。
5. 前記検知手段が、会議において発表を担当するユーザの交代操作を前記イベントとして検知した場合、
   前記関連付手段は、前記ユーザが交代した時刻を示す時間情報と、前記ユーザが交代する前のユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、
   ことを特徴とする請求項１に記載のプログラム。
6. 前記コンピュータを、さらに、
   ユーザから前記イベントに対応する前記メディアデータの再生要求を受け付ける受付手段、及び、
   前記メディアデータを再生する再生手段、
   として機能させ、
   前記再生手段は、前記メディアデータのうちユーザが選択した前記イベントに対応する部分のメディアデータを再生する、
   ことを特徴とする請求項１に記載のプログラム。
7. ネットワークを介して接続され相互に通信する複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディアデータを送受信させる情報処理装置であって、
   複数の端末が相互に通信しているときに発生したイベントを検知する検知手段と、
   前記メディアデータに含まれる時間情報と、前記イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記メディアデータに関連付ける関連付手段と、
   を含み、
   前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、
   前記関連付手段は、メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、
   ことを特徴とする情報処理装置。
8. ネットワークを介して接続され相互に通信する複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディアデータを送受信させる情報処理システムであって、
   複数の端末が相互に通信しているときに発生したイベントを検知する検知手段と、
   前記メディアデータに含まれる時間情報と、前記イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記メディアデータに関連付ける関連付手段と、
   を含み、
   前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、
   前記関連付手段は、前記メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付ける、
   ことを特徴とする情報処理システム。
9. ネットワークを介して接続され相互に通信する複数の端末間において、音声データ及び映像データの少なくとも何れかを含むメディアデータを送受信させるコンピュータを機能させるためのプログラムであって、
   複数の端末が相互に通信しているときに発生したイベントを検知する検知手段、及び、
   前記メディアデータに含まれる時間情報と、前記イベントが検知された時刻とに基づいて、前記イベントに関連するイベント情報を、前記メディアデータに関連付ける関連付手段、
   としてコンピュータを機能させ、
   前記検知手段が、投稿されたメッセージに対するユーザの選択操作を前記イベントとして検知した場合、
   前記関連付手段は、前記メッセージを選択した時刻を示す時間情報と、前記メッセージの内容と、前記メッセージを選択したユーザのユーザ情報とを、前記イベント情報として前記メディアデータに関連付けるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。

Images