JP3266959B2

JP3266959B2 - 電子会議システム

Info

Publication number: JP3266959B2
Application number: JP01689193A
Authority: JP
Inventors: 慎一郎谷口
Original assignee: Fuji Xerox Co Ltd; Fujifilm Business Innovation Corp
Current assignee: Fujifilm Business Innovation Corp
Priority date: 1993-01-07
Filing date: 1993-01-07
Publication date: 2002-03-18
Anticipated expiration: 2017-03-18
Also published as: JPH06205151A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、電子会議システムに関
するものであり、特に、会議の途中における会議データ
の保存、および呼び出しに関するものである。

【０００２】

【従来の技術】従来の一般的な会議では、会議の途中に
おける議事内容を書き留めておくために、黒板やホワイ
トボードが用いられてきた。近年、黒板やホワイトボー
ドの代わりとして、電子黒板、電子ＯＨＰ、大型ディス
プレイ、ボードノーター（Ｂｏａｒｄｎｏｔｅｒ）など
を用いた電子会議システムが導入されてきている。例え
ば、電子黒板は、特開昭６４−７８８８９号公報等に記
載されている。また、ボードノーター（Ｂｏａｒｄｎｏ
ｔｅｒ）は、Ｃｏｍｍｕｎｉｃａｔｉｏｎｓｏｆｔ
ｈｅＡＣＭ，Ｖｏｌ．３０，Ｎｏ．１，１９８７，Ｍ
ａｒｋＳｔｅｆｉｋ他，“ＢＥＹＯＮＤＴＨＥＣ
ＨＡＬＫＢＯＡＲＤ：ＣＯＭＰＵＴＥＲＳＵＰＰＯＲＴ
ＦＯＲＣＯＬＬＡＢＯＲＡＴＩＯＮＡＮＤＰＲ
ＯＢＬＥＭＳＯＬＶＩＮＧＩＮＭＥＥＴＩＮＧ
Ｓ”，ｐｐ．３２−４７に記載されている。これらの機
器を用いた会議システムでは、会議の途中における議事
内容は、電子的に蓄えられ、プリントアウトされ、表示
される。しかし、従来の電子黒板やボードノーター（Ｂ
ｏａｒｄｎｏｔｅｒ）では、書き留められた議事内容の
みを記録するだけであり、その議事内容が出てきた経緯
等が記録されず、会議の記録された結果以外の重要な情
報が失われるという欠点があった。

【０００３】そのため、例えば、特願平３−１３８５４
２号公報や、特開昭６２−１９９１８６号公報等に記載
されているような、時系列的に会議中の議事内容を記憶
する電子会議システムや、特開昭６４−３２７５１号公
報に記載されてるように、会議中のコメントを音声で記
録する電子会議システムが提案されている。しかし、特
願平３−１３８５４２号公報では、記入され、表示され
た情報は時系列的に記録されるが、記入されない音声や
ジェスチャといった情報は失われてしまうという欠点が
あった。また、特開昭６２−１９９１８６号公報では、
画像や音声は時系列的に残るが、所望の情報を検索する
ときには、時系列的に記録された音声や画像を最初から
見て行くか、あるいは、経過時間を勘により入力して前
後を探したりしなければならず、検索が困難であるとい
う欠点があった。特開昭６４−３２７５１号公報では、
文書との対応をつけることによって検索できるが、時系
列的な記録がないため、会議の流れを再現することはで
きないという欠点がある。さらに、会議中に文書の変更
や削除があった場合、それらの場所に付けられた音声メ
モが検索できなくなるという欠点があり、また、音声メ
モは、メモを付けるときに発話者が文書の特定箇所を指
示しなければならず、先に発言し、その発言に基づいた
記述を追加しても、先の発言が記録されないという欠点
があった。

【０００４】

【発明が解決しようとする課題】本発明は、上述した事
情に鑑みてなされたもので、会議の議事内容が出てきた
経緯等を記録しておき、記録しておいた情報を検索し、
再現することのできる電子会議システムを提供すること
を目的とするものである。

【０００５】

【課題を解決するための手段】本発明は、電子会議シス
テムにおいて、表示手段と、前記表示手段に表示させる
情報を入力する入力手段と、前記表示手段に表示された
情報を記憶する表示情報記憶手段と、会議参加者の音声
および映像を入力する音声映像入力手段と、前記音声映
像入力手段に入力された音声および映像を記憶する音声
映像記憶手段と、前記入力手段からの入力の間隔を検出
する入力間隔検出手段と、前記入力間隔検出手段の検出
結果または利用者からの指示に基づき前記表示情報記憶
手段に記憶されている表示情報と前記音声映像記憶手段
に記憶されている音声映像情報を対応づけるインデック
ス情報を生成するインデックス生成手段と、前記インデ
ックス生成手段により生成されたインデックス情報を記
憶するインデックス情報記憶手段と、前記インデックス
情報記憶手段に記憶されたインデックス情報を基に前記
音声映像記憶手段から音声映像情報を呼び出す音声映像
呼出手段と、前記音声映像呼出手段により呼び出された
音声映像情報を順次再生する音声映像情報再生手段を有
することを特徴とするものである。また本発明は、電子
会議システムにおいて、表示手段と、前記表示手段に表
示させる情報を入力する入力手段と、前記表示手段に表
示された情報を記憶する表示情報記憶手段と、会議参加
者の音声および映像を入力する音声映像入力手段と、前
記音声映像入力手段に入力された音声および映像を記憶
する音声映像記憶手段と、前記入力手段からの入力の間
隔を検出する入力間隔検出手段と、前記入力間隔検出手
段の検出結果または利用者からの指示に基づき前記表示
情報記憶手段に記憶されている表示情報と前記音声映像
記憶手段に記憶されている音声映像情報を対応づけるイ
ンデックス情報を生成するインデックス生成手段を有す
ることを特徴とするものである。さらに本発明は、電子
会議システムにおいて、表示手段に表示された情報を記
憶する表示情報記憶手段と、会議参加者の音声および映
像を記憶する音声映像記憶手段と、前記表示手段に表示
された情報が入力された間隔に基づいてまたは利用者か
らの指示に基づいて前記表示情報記憶手段に記憶されて
いる表示情報と前記音声映像記憶手段に記憶されている
音声映像情報を対応づけたインデックス情報を記憶する
インデックス情報記憶手段と、前記インデックス情報記
憶手段に記憶されたインデックス情報を基に前記音声映
像記憶手段から音声映像情報を呼び出す音声映像呼出手
段と、前記音声映像呼出手段により呼び出された音声映
像情報を順次再生する音声映像情報再生手段を有するこ
とを特徴とするものである。

【０００６】

【作用】本発明によれば、順次記録される表示情報およ
び音声映像情報は、インデックス生成手段により生成さ
れたインデックス情報により対応づけられる。このイン
デックス情報を基に、例えば、ブラウズ表示等により、
検索を容易に行なうことができ、検索された音声映像情
報を再生することができる。

【０００７】

【実施例】図１は、本発明の電子会議システムの第１の
実施例を示す概略構成図である。図中、１は表示手段、
２は入力手段、３は表示情報記憶手段、４は音声映像記
憶手段、５は入力間隔検出手段、６はインデックス情報
生成手段、７はインデックス情報記憶手段、８は音声映
像情報呼出手段、９は音声映像情報再生手段、１０は音
声映像入力手段である。

【０００８】表示手段１には、会議で用いる資料や、入
力手段２から入力された情報、以前表示した情報などを
表示する。入力手段２は、電子ペンなどにより構成され
ており、表示手段１と対応して設置され、表示手段１に
表示させる情報が入力される。入力手段２は、キーボー
ドとマウスで構成することも可能である。表示情報記憶
手段３は、表示手段１に表示された情報を記憶する。音
声映像情報記憶手段４は、音声映像入力手段１０から入
力される会議参加者の音声および映像を記憶する。入力
間隔検出手段５は、入力手段２から入力されるデータ間
の間隔を検出し、入力が一定時間途切れたかどうかを検
知する。インデックス生成手段６は、表示情報記憶手段
３に記憶された表示情報と音声映像情報記憶手段４に記
憶された音声映像情報を対応づけるインデックス情報を
生成する。インデックス情報記憶手段７は、インデック
ス生成手段６により生成されたインデックス情報を記憶
する。音声映像情報呼出手段８は、ユーザーの指示に従
い、インデックス情報記憶手段７に記憶されているイン
デックス情報に対応する音声映像情報を音声映像情報記
憶手段４から呼び出す。音声映像情報再生手段９は、音
声映像情報呼出手段８により呼び出された音声映像情報
を、音声および画像として、順次再生表示する。音声映
像情報再生手段９は、表示手段１と兼用する構成も可能
である。兼用とする構成の場合、システムを安価に構成
することができる。音声映像入力手段１０は、ビデオカ
メラやマイク等からなり、会議中の音声、映像を入力
し、音声映像情報記憶手段４に記憶させる。音声映像入
力手段１０中のビデオカメラやマイクなどを複数配置す
ることにより、会議場内の死角をなくし、より細やかな
情報を記録再現することができる。

【０００９】図２は、本発明の電子会議システムの第１
の実施例の動作を説明するためのフローチャートであ
る。会議が開始されると、Ｓ２１において、ビデオカメ
ラやマイクなどの音声映像入力手段１０から入力された
会議の情景や音声が、音声映像記憶手段４に順次記憶さ
れてゆく。それとともに、Ｓ２２において、記録されて
ゆく音声映像情報に対して、インデックス情報生成手段
６において、インデックス情報を生成する。次に、Ｓ２
３において、入力手段２からコマンドを読み込み、その
指示に従い、各種の処理を行なう。まず、読み込まれた
コマンドが書き込みであれば、Ｓ２８において、書き込
みの処理を行ない、表示手段１に線や図形、文字等を表
示する。また、コマンドが消去であれば、Ｓ２７におい
て、消去の処理を行ない、表示手段１に表示されている
表示情報の一部または全部を消去する。この書き込み、
消去により、電子黒板としての機能を実現することがで
きる。また、保存の指示が入力されると、Ｓ２６におい
て、表示手段１に表示されている表示情報を、表示情報
記憶手段３に保存する。保存された表示情報は、ユーザ
ーからの頁選択指示により、Ｓ２９において、頁選択処
理が行なわれ、所望の頁の表示情報を表示情報記憶手段
３から読み出し、表示手段１に表示することができる。
頁の選択の際に表示手段１に表示する表示情報は、時間
に沿って全ての頁をユーザーに提示したり、または、あ
る頁に関してのみ、時間に沿ってユーザーに提示した
り、あるいは、各ページの最新の表示情報をユーザーに
提示し、ユーザーはこれらの表示情報を基に、頁の選択
を行なうことができる。Ｓ３０において、これらの書き
込み、消去、頁選択等の処理を行なった後、情報の入力
が一定時間ないことを入力間隔検出手段５が検出した場
合、Ｓ３１において、インデックス生成手段６は、表示
情報と音声映像情報を対応づけるインデックス情報を生
成し、生成したインデックス情報をインデックス情報記
憶手段７に記憶する。また、ユーザーからインデックス
生成指示が行なわれた場合も、Ｓ２５において、インデ
ックス生成手段６はインデックス情報の生成を行ない、
インデックス情報をインデックス情報記憶手段７に記憶
する。音声映像情報の再生が指示された場合は、Ｓ２４
において、現在選択されている頁中の領域を選択し、そ
の領域に対応するインデックス情報をインデックス情報
記憶手段７から検索する。音声映像情報呼出手段８は、
検索されたインデックス情報を基に、音声映像記憶手段
４から音声映像情報を呼び出し、音声映像情報再生手段
９に表示再生する。会議の終わりには、終了が指示さ
れ、Ｓ３２において終了処理を行なった後、Ｓ３３にお
いて、音声映像情報の記録を停止し、処理を終了する。

【００１０】図３は、本発明の電子会議システムの第１
の実施例におけるインデックス生成処理の流れを示すフ
ローチャートである。インデックス情報生成手段６が起
動されると、まず、Ｓ４１において、音声映像情報記憶
手段４に現在書き込まれている番地を取得する。Ｓ４２
において、新しい頁か否かを判断し、何も書かれていな
い新しいページならば、インデックス番号を１にセット
し、Ｓ４３において、インデックス情報記憶手段７に記
憶領域を確保して、先に取得した音声映像情報記憶手段
４の番地を、確保した記憶領域に書き込む。

【００１１】Ｓ４２において、新しい頁でないと判断さ
れたときは、Ｓ４５において、現在の表示情報を表示情
報記憶手段３に保存し、Ｓ４６において、同じ頁の前回
保存した表示情報を表示情報記憶手段３から読み出す。
Ｓ４７において、読み出した前回の表示情報と現在の表
示情報の差を取り、Ｓ４８において、差があるか否かを
判断する。差がなければインデックス生成処理を終了
し、差があれば、Ｓ４９において、指示された処理が書
き込みか削除かを判断する。指示された処理が書き込み
の場合には、Ｓ５０において、前回の表示情報と現在の
表示情報の差の部分を含む領域の情報と、Ｓ４１におい
て取得した音声映像情報の記憶番地を、インデックス情
報に追加する。また、指示された処理が削除の場合に
は、Ｓ５１において、差の部分、すなわち削除された部
分を含む領域の情報と、Ｓ４１において取得した音声映
像情報の記憶番地を、前回のインデックス情報に追加す
るとともに、削除された情報を含むインデックス情報を
修正して、今回のインデックス情報として保存する。イ
ンデックス情報の追加、修正の後、Ｓ５２において、新
しいインデックス情報をインデックス情報記憶手段７に
保存し、インデックス情報生成処理を終了する。

【００１２】図３に示した動作の流れを、図４乃至図７
の具体例を用いて説明する。図４は、新しい頁のインデ
ックス情報の説明図である。まず、Ｓ４２において、新
しい頁と判断された場合、インデックス情報生成手段６
は、図４に示すようなインデックス情報を生成する。こ
のインデックス情報は、頁の番号、表示情報番号、イン
デックス番号、インデックス領域、音声映像情報記憶番
地等からなる。新しい頁の場合には、インデックス番号
は１である。図４では、生成したという特性の情報
「Ｃ」を付加し、インデックス番号として「１Ｃ」が書
き込まれている。また、新しい頁では、前回の表示情報
との差は有り得ないので、インデックス領域の欄は、使
用しない。図４では、「−」が書き込まれている。音声
映像情報記憶番地の欄には、Ｓ４１で取得した音声映像
記憶手段４の番地、例えば「１０００」が書き込まれ
る。

【００１３】図５は、書き込みによるインデックス情報
の追加の説明図である。書き込みが行なわれる前は、図
５（Ａ）に示すような表示情報が表示情報記憶手段３に
記憶されているものとする。そのときのインデックス情
報としては、図５（Ｂ）のような情報がインデックス情
報記憶手段７に記憶されている。図５（Ｂ）において、
インデックス番号「１Ｃ」は、この頁の最初に生成され
たインデックス情報であり、インデックス番号「２Ｃ」
は、表示情報「○○○○」が書き込まれた際に生成され
たインデックス情報である。ここで、図５（Ｃ）に示す
ように、「ア△△△△」という情報が書き込まれ、イン
デックス情報生成手段６が起動されたとする。まず、Ｓ
４１で音声映像記憶手段４の番地、「１００４５０」が
取得される。次に、Ｓ４５で、現在の表示情報、すなわ
ち図５（Ｃ）に示した情報が保存される。そして、Ｓ４
６で前回の表示情報、すなわち図５（Ｂ）が読み出さ
れ、Ｓ４７で図５（Ｂ）と図５（Ｃ）の差が検出され
る。検出される差は、「ア△△△△」である。Ｓ５０に
おいて、新たなインデックス番号「３Ｃ」を生成し、イ
ンデックス領域は、差である「ア△△△△」が含まれる
領域を示す情報、例えば、領域の四隅の座標を記憶させ
る。さらに、音声映像情報記憶番地には、先に取得した
番地「１００４５０」を記憶する。追加の行なわれたイ
ンデックス情報を図５（Ｄ）に示す。このようにして、
新たに書き込まれた表示情報と、書き込まれる際の音声
映像情報が対応づけられて保存される。

【００１４】図６は、消去によるインデックス情報の追
加の説明図である。消去前の表示情報は、図６（Ａ）に
示されている。この時のインデックス情報は、図６
（Ｃ）に示されている。ここで、図６（Ａ）の表示情報
中、「▽▽」が削除され、インデックス情報生成手段６
が起動されたとする。削除後の表示情報を図６（Ｂ）に
示す。まず、Ｓ４１において、現在の音声映像記憶手段
４の番地、「１００１５００」を取得する。Ｓ４５で現
在の表示情報、すなわち、図６（Ｂ）に示した表示情報
を表示情報記憶手段３に保存する。Ｓ４６で前回保存し
た表示情報、すなわち、図６（Ａ）に示した表示情報を
読み出し、Ｓ４７で図６（Ａ）と図６（Ｂ）の表示情報
の差が検出される。検出される差は、「▽▽」である。
Ｓ５１において、削除のインデックス情報である旨の新
たなインデックス番号「４Ｅ」を生成し、インデックス
領域には、削除された「▽▽」が含まれる領域を示す情
報、および、音声映像情報記憶番地には、先に取得した
番地「１００１５００」を、前回のインデックス情報に
追加して記憶する。今回のインデックス情報は、削除し
た情報が含まれるインデックス情報のインデックス領域
を、削除後の領域となるように修正し、また、インデッ
クス番号を修正された旨のインデックス番号「４Ｍ」に
変更して、保存する。削除のインデックス情報の追加さ
れた前回のインデックス情報を図６（Ｄ）に、また、今
回のインデックス情報を図６（Ｅ）に示す。このように
して、表示情報の削除された経緯を示す音声映像情報
が、削除された表示情報と対応づけられて保存される。

【００１５】上述のインデックス情報は、図示したよう
なフォーマットで保存される必要はなく、例えば、デー
タ構造体や、リスト構造など、種々のフォーマットで構
成することができる。また、保存する項目も、図示した
データ以外の、例えば、日時や時間情報などを一緒に保
存するようにしてもよいし、また、インデックス番号に
含めている特性情報を別の項目として保存するように構
成することもできる。さらに、保存するデータも、図示
したような数値や文字でなくともよく、コードデータな
ど、その他の形式のデータであってもよい。

【００１６】図７は、１つの頁の表示情報とそれに対応
するインデックス情報の変化の説明図である。会議中、
時間の経過とともに、情報の書き込みおよび消去がなさ
れる。図７では、上から下へ時間の経過とともに書き込
みおよび消去を行なったときの、表示情報とインデック
ス情報の変化の様子を示している。図中、（１）乃至
（５）は、それぞれ会議中の経過時間を示しており、ま
た、（ａ）は表示情報を、（ｂ）は表示情報の差を、
（ｃ）は各インデックス情報を、（ｄ）はこの頁の生成
されたインデックス情報を、（ｅ）はこの頁の消去イン
デックス情報をそれぞれ示している。この図では、イン
デックス情報は、インデックス領域のみを示している。

【００１７】まず、時間（１）において、表示情報は、
「○○○○」が書き込まれている。このときまでに生成
されるインデックス情報は、この頁が最初に選択された
ときのインデックス情報と、縦のハッチングで示した領
域のインデックス情報である。続いて、時間（２）にお
いて、「ア△△△△」が書き込まれる。すると、時間
（１）の表示情報と、時間（２）の表示情報の差が、
（ｂ）欄のように検出される。この差に対して、（ｃ）
欄のようなインデックス情報が生成され、時間（１）の
インデックス情報に追加された形で時間（２）の生成イ
ンデックス情報が保存される。さらに、時間（３）にお
いて、「イ▽▽▽▽」が書き込まれる。時間（２）のと
きと同様に、時間（２）の表示情報と、時間（３）の表
示情報の差を検出し、その差に対応するインデックス情
報を生成し、時間（２）の生成インデックス情報に追加
して時間（３）の生成インデックス情報として保存す
る。

【００１８】時間（４）では、「イ▽▽▽▽」が消去さ
れている。時間（３）の表示情報と時間（４）の表示情
報との差を検出し、その差に対応するインデックス情報
を生成する。この生成されたインデックス情報は、消去
された情報に対するインデックス情報であるから、前
回、すなわち時間（３）の消去インデックスとして、
（ｅ）欄の時間（３）に示している。このとき、時間
（３）のインデックス情報は、時間（３）のときに保存
した生成インデックス情報と、時間（４）で追加された
消去インデックス情報となる。それとともに、時間
（３）の生成インデックスから、消去された情報に対応
する生成インデックス情報を消去し、時間（４）の生成
インデックス情報として保存する。時間（５）では、
「△△」が消去されている。時間（４）と同様に、消去
された部分の情報を検出し、そのインデックス情報を生
成し、これを時間（４）の消去インデックス情報として
追加する。また、時間（５）の消去は、部分的なもので
あるので、時間（４）の生成インデックス情報のインデ
ックス領域を修正して、時間（５）の生成インデックス
情報として保存する。

【００１９】図８は、本発明の電子会議システムの第１
の実施例における音声映像情報再生処理の流れを示すフ
ローチャートである。この処理は、音声映像情報呼出手
段８で行なわれる。音声映像情報の再生が指示され、音
声映像情報読み出し処理が開始されると、Ｓ６１におい
て、現在の頁のインデックス情報をインデックス情報記
憶手段７から読み出す。続いて、Ｓ６２において、入力
手段２により指示されている座標を取得する。Ｓ６３に
おいて、指示された座標がインデックス情報に記憶され
ている領域内か否かが判定され、指示された座標がイン
デックス情報に記憶されている領域内に入っていないな
ら、Ｓ６４において、現在の音声映像情報記憶番地を再
生終了番地にセットし、次に、Ｓ６５において、その頁
が生成されたときの音声映像情報記憶番地をインデック
ス情報から読み出して、再生開始番地にセットする。Ｓ
６３において、入力手段２より指示された座標が、イン
デックス情報に記憶されているインデックスの領域内に
入っていたなら、Ｓ６６において、その領域に対応する
インデックス番号よりも１つ小さいインデックス番号に
対応する音声映像情報記憶番地を読み出し、再生開始番
地にセットする。次に、Ｓ６７において、指示された座
標の入っている領域に対応するインデックス番号よりも
１つ大きいインデックス番号があれば、そのインデック
ス番号に対応する音声映像情報記憶番地を読み出し、再
生終了番地にセットし、なければ現在の音声映像情報の
記憶番地を読み出し、再生終了番地にセットする。最後
に、Ｓ６８において、再生開始番地から再生終了番地ま
での音声映像情報を音声映像情報再生手段９に再生表示
する。再生中に、ユーザーからの中断指示があれば、そ
の時点で音声映像情報再生処理を終了する。なお、ユー
ザーから指示された座標により、複数のインデックス情
報が指定された場合、それぞれのインデックス情報に対
応する再生開始番地と再生終了番地を指定された順番で
順次連結し、再生することにより、任意の順序で音声映
像情報を再生表示させることができる。

【００２０】図９は、音声映像情報再生処理の具体例の
説明図である。図９（Ａ）は表示画面上の座標を入力手
段で指示しているところを示している。この場合、１つ
の「△」を指し示している。音声映像情報呼出手段８で
は、この座標を検出する。また、図９（Ｂ）は、インデ
ックス情報を模式的に示しており、図９（Ｃ）は、イン
デックス情報をデータとして示している。音声映像情報
呼出手段８は、図９（Ｃ）のような、現在の頁のインデ
ックス情報をインデックス情報記憶手段７から読み出
す。この例では、「△」が指示され、図９（Ｂ）に示し
ているハッチングを施したインデックス情報の領域のう
ち、中央のインデックス情報の領域内の座標が指示され
ている。すなわち、図９（Ｃ）のインデックス情報のう
ち、インデックス番号が「３Ｃ」が指示されている。こ
の判断は、それぞれのインデックス情報のうちのインデ
ックス領域の情報を参照することにより行なわれる。指
示されているインデックス番号が「３Ｃ」と判定される
と、このインデックス番号より１つ小さいインデックス
番号「２Ｃ」に対応する音声映像情報記憶番地「１００
２００」が読み出され、再生開始番地としてセットされ
る。また、インデックス番号「３Ｃ」より１つ大きいイ
ンデックス番号「４Ｃ」に対応する音声映像情報記憶番
地「１０６００」が読み出され、再生終了番地としてセ
ットされる。これらのデータのセットが終了すると、音
声映像記憶手段４から、セットされた再生開始番地から
再生終了番地までに記録されている音声映像情報が読み
出され、音声映像情報再生手段９に再生表示される。こ
のようにして、指定した表示情報が書かれる前の経緯
や、書かれた後の説明など、指定した表示情報に関する
前後の会議の様子を知ることができる。指定した表示情
報の保存前だけや、保存後、次の表示情報の保存までだ
けの音声映像情報を再生表示するように構成することも
可能である。

【００２１】図１０は、本発明の電子会議システムの第
２の実施例を示す概略構成図である。図中、図１と同様
の部分には同じ符号を付して説明を省略する。１１は指
示動作検出手段である。指示動作検出手段１１は、入力
手段２から入力される動作のうち、書き込みや消去を行
なわない動作を監視しており、書き込みや消去を行なわ
ない動作を検出する。会議のときには、発言者は表示さ
れた情報を指し示したり、表示部分を囲んで示して、説
明を加えることがしばしば行われる。これらの指示動作
は、入力手段２からのカーソルなどの移動により行われ
る。指示動作検出手段１１では、これらの指示動作、例
えば、表示されている項目の下に線を引くような動作
や、表示されている項目を楕円で囲むような動作、表示
されている項目の前に丸を書くような動作、表示されて
いる項目をつつくような動作などを検出し、指示動作を
検出すると、インデックス情報生成手段６に対してイン
デックス情報の生成を依頼して、指示動作と音声映像情
報を対応づけて保存することができる。

【００２２】本発明の電子会議システムの第２の実施例
の動作を説明するが、指示動作検出手段１１を除くその
他の動作は、第１の実施例の動作と同様であるので、こ
こでは、指示動作検出手段１１による指示動作の検出及
び指示動作に基づくインデックス情報の生成動作につい
てのみ述べる。

【００２３】図１１は、指示動作に基づくインデックス
情報生成処理の流れを示すフローチャートである。指示
動作検出手段１１は、書き込みや消去を行なわない動
作、例えば、カーソルの移動等を監視しており、書き込
みや消去を行なわない動作を検出すると、Ｓ７１におい
て、現在の音声映像情報の記録番地を取得するととも
に、Ｓ７２において、カーソルの移動開始位置の座標を
取得する。次に、カーソルが動いた軌跡を取得するた
め、Ｓ７３において、順次、カーソルの位置の座標を取
得し、Ｓ７４において、カーソルが一定時間停止したか
否かを判断し、カーソルが一定時間停止するまで、Ｓ７
３におけるカーソルの位置の座標の取得が行われる。カ
ーソルが一定時間停止すると、Ｓ７５において、取得し
たカーソルの座標から移動軌跡を求め、この移動軌跡
と、予め登録されている指示動作、例えば、表示されて
いる項目の下に線を引くような動作や、表示されている
項目を楕円で囲むような動作、表示されている項目の前
に丸を書くような動作、表示されている項目をつつくよ
うな動作などと一致するか否かを判断し、このような予
め登録されている指示動作を検出すると、Ｓ７６におい
て、その指示動作に対応する指示位置を求め、指示位置
に対応する表示手段１上の座標を取得する。取得した指
示座標は、インデックス情報生成手段６に送られる。Ｓ
７７において、インデックス情報生成手段６は、送られ
てきた指示座標が、今までに生成したインデックス情報
のうちのどれに対応しているかを調べ、対応するインデ
ックス情報を取得する。Ｓ７８において、取得したイン
デックス情報を基に、指示された旨のインデックス情
報、すなわち、ポインティングインデックスと音声映像
情報の記憶番地を追加する。Ｓ７９において、情報の追
加されたインデックス情報を保存し、指示動作に基づく
インデックス情報生成処理を終了する。Ｓ７１で行った
音声映像情報の記憶番地の取得の処理は、Ｓ７５におい
て、予め登録された指示動作と判断されてから、Ｓ７８
において、インデックス情報を生成するまでの間のどこ
かで行うようにしてもよい。

【００２４】図１２は、指示動作に基づくインデックス
情報生成処理の具体例の説明図である。図１２（Ａ）
は、指示動作中の表示情報を示し、図１２（Ｂ）は、指
示動作前のインデックス情報を示し、図１２（Ｃ）は、
指示動作後のインデックス情報を示している。また、図
１２（Ｄ）は、登録されている指示動作の例を示してい
る。

【００２５】会議中に、表示情報を指し示す動作、例え
ば、図１２（Ａ）のように、入力手段によってカーソル
を動かし、表示情報の１つである「ア△△△△」の下を
アンダーラインを引くように指し示すと、指示動作検出
手段１１はこれを検出し、カーソルの動きに対応して、
カーソルの表示画面上の座標位置を順次取得する。取得
した座標から、図１２（Ｄ）に示すような、予め登録さ
れている指示動作のうちに、該当する動作があるかどう
かを判断する。図１２（Ｄ）において、登録されている
指示動作は、直線、例えば、アンダーラインを引いたよ
うに指示動作を行った場合、楕円を描くように表示情報
を囲んだ場合、指示位置に小さな円を描くように指示動
作を行った場合の３つの指示動作が登録されている。こ
の他の指示動作、例えば、四角で囲む動作や、表示情報
をつつく動作などを登録しておくこともできる。各指示
動作には、その指示動作によって指示される指示位置が
設定されており、図１２（Ａ）のように、アンダーライ
ンを引くように指示動作が行われた場合には、アンダー
ラインの左端の少し上を指示位置として登録してある。
この指示位置は、指示動作によって指示された表示情報
が特定できる位置であればよく、例えば、アンダーライ
ンの中央部の位置でも、右端の位置でもよい。この具体
例では、表示情報の「ア」のあたりが指示位置となり、
この座標が指示座標として取得される。取得された指示
座標は、インデックス情報生成手段６に送られる。イン
デックス情報生成手段６では、図１２（Ｂ）に示す指示
動作前のインデックス情報中から、送られてきた指示座
標をインデックス領域に含むようなインデックス情報を
検索する。そして、指示された「ア△△△△」に対応し
たインデックス番号「３Ｃ」を取得し、同じインデック
ス番号「３」に、ポインティングインデックスであるこ
とを示す「Ｐ」を付加したインデックス番号「３Ｐ」を
有するインデックス情報を生成する。このとき、生成前
に得ておいた音声映像情報の記憶番地「１００１５０
０」とともに、インデックス情報の追加を行なう。追加
の行われた後のインデックス情報を図１２（Ｃ）に示
す。インデックス領域の情報は不用なので、「−」が格
納されている。このようにして、会議中に表示情報が指
示された場合、指示された時の会議の様子や、表示情報
に対する説明などを、表示情報に対応付けて保存するこ
とができる。

【００２６】図１３は、本発明の電子会議システムの第
３の実施例を示す概略構成図である。図中、図１と同様
の部分には同じ符号を付して説明を省略する。１２はイ
ンデックス情報ブラウズ手段である。

【００２７】会議の終了した後や、会議の途中で、会議
の経緯を知りたいという要求が発生すると、上述の第
１，第２の実施例において保存されているインデックス
情報に基づいて、音声映像情報を再生することになる。
このインデックス情報を簡単に検索できるようにするた
め、保存している表示情報の一覧表示、すなわち、ブラ
ウズ表示が便利である。インデックス情報ブラウズ手段
１２は、ユーザーからの指示に従い、インデックス情報
記憶手段７に保存されているインデックス情報を参照し
ながら、表示情報記憶手段３に保存されている表示情報
の一部分のみ、または、全部を縮小して、複数の表示情
報を表示手段１に表示させる。

【００２８】図１４は、頁単位でのブラウズ表示時の表
示画面例の説明図である。何頁もの資料をもとに会議を
行っている場合、所望の表示情報がどの頁にあるかわか
らない場合もある。このようなときには、図１４に示す
ように、各頁の表示情報をブラウズ表示することによ
り、所望の頁を確認し、選択することができる。図１４
では、９頁の表示情報をそれぞれ縮小して１つの画面に
表示している。現在の表示情報は、太枠により表示され
ている。ここでは、６頁目が現在の表示情報である。１
０頁目以降の表示情報は、次頁の指定によりブラウズ表
示する表示情報を替えたり、スクロールするように構成
することもできる。表示する表示情報の頁数は、適宜決
めればよい。各頁の表示情報の下には、頁番号を一緒に
表示し、頁の選択を容易にしている。頁の選択は、頁数
の入力のほか、ブラウズ表示されている表示情報を指し
示すことにより選択できるようにすることも可能であ
る。

【００２９】図１５は、任意頁の時間経過に基づくブラ
ウズ表示時の表示画面例の説明図である。ある１頁を取
り出してみた場合、その１頁には、情報が追加され、ま
たは、削除される場合がある。情報の追加や、削除の経
緯を知りたい場合、本発明では、インデックス情報およ
び表示情報を保存している。そのため、保存しておいた
表示情報を、その頁の時間経過に基づきブラウズ表示す
ることにより、どのような経緯で最終的な表示情報が出
来上がったのかを知ることができるとともに、追加，削
除など、所望の操作について選択し、音声映像情報を得
ることが可能となる。図１５では、選択された任意の頁
の表示情報を、会議の開始からの経過時間とともに、経
過時間順にブラウズ表示している。会議の開始からの経
過時間は、それぞれのインデックス情報とともに保存し
ておくことができる。また、画面の左上には、頁番号を
表示している。このブラウズ表示を確認し、所望の情報
の選択により、またはブラウズ表示されている表示情報
の選択を行ない、その後、所望の情報の選択を行なうこ
とにより、所望の情報の追加削除などの経緯に関する音
声映像情報を得ることができる。この表示例では、９枚
の表示情報を１度に表示できるように構成しているが、
表示情報の枚数や、各情報のレイアウトなどは、見やす
さなどにより、適宜変更可能である。１０枚目以降の表
示情報についても、もちろん表示可能である。このと
き、スクロールできると、時間を追って表示情報を確認
することができる。また、本発明の第２の実施例のよう
に、指示動作により、インデックス情報が作成されてい
る場合には、その指示動作を含めて、ブラウズ表示を行
なうことができる。

【００３０】図１６は、会議の時間経過に基づくブラウ
ズ表示時の表示画面例の説明図である。任意の１頁の時
間経過だけでなく、時間経過に基づく会議全体の流れを
知りたいことも多い。そのような場合、会議の時間経過
に基づき、表示情報がブラウズ表示できれば、会議の流
れを容易に把握することができる。図１６では、会議の
時間経過に基づき、表示情報と、表示情報の頁番号、会
議開始からの経過時間を組にして、１２枚の表示情報を
１つの表示画面にブラウズ表示している。また、現在の
表示情報は、太枠で囲まれている。会議の開始時間は、
左上に表示されている。これらの表示を確認し、所望の
表示情報を選択し、会議の経緯を音声映像情報により知
ることができる。表示されている項目のレイアウトおよ
び表示方法は、適宜変更可能である。また、１つの表示
画面に表示する表示情報の枚数も変更可能である。１３
枚目以降の表示情報についても、もちろん表示可能であ
る。ブラウズ表示する表示情報は、保存されている表示
情報のすべてでなくともよく、ある条件により、ピック
アップしてブラウズ表示することも可能である。このよ
うにすると、長時間の会議の場合でも、会議の流れを把
握することができる。

【００３１】第３の実施例において、インデックス情報
ブラウズ手段１２を設けたことにより、上述のように様
々な形式でのブラウズ表示を行なうことができ、表示手
段１上で指示するだけで所望の音声映像情報が再現でき
るので、会議後あるいは会議中に参照、利用することに
より、議論の経緯を容易に再現することができる。

【００３２】図１７は、本発明の電子会議システムの第
４の実施例を示す概略構成図である。図中、図１と同様
の部分には同じ符号を付して説明を省略する。１３はイ
ンデックス情報構造化手段である。インデックス情報構
造化手段１３は、ユーザーが指定するインデックス情報
の関係を、ユーザー定義項目としてインデックス情報に
追加する処理を行なう。このユーザー定義項目には、文
字，数値，他のインデックスの指定など、自由に記述す
ることができる。このユーザー定義項目により各インデ
ックスを自由に構造化することが可能となる。また、ユ
ーザー定義項目は、複数の定義ができ、より自由な構造
化を可能としている。このユーザー定義項目は、音声映
像情報の再生表示のときや、第３の実施例のようにブラ
ウズ表示のときに使用され、定義されている項目に従っ
て再生表示や、ブラウズ表示等が行なわれる。

【００３３】図１８は、本発明の電子会議システムの第
４の実施例の具体例の説明図である。図１８（Ａ）は、
表示情報を示し、図１８（Ｂ）は、インデックス情報を
示している。図１８（Ａ）のような表示情報の場合、第
１の実施例でも述べたように、インデックス情報として
は、インデックス番号、インデックス領域、音声映像情
報記憶番地等が保存される。インデックス情報構造化手
段１３により、各インデックスに対して、ｎ個のユーザ
ー定義項目が付加される場合、図１８（Ｂ）のようなイ
ンデックス情報となる。例えば、インデックス番号「２
Ｃ」には、ユーザー定義項目１として、「サブテーマ」
が付加され、また、ユーザー定義項目ｎには、「１−２
−３Ｃ」が付加されている。また、インデックス番号
「３Ｃ」には、ユーザー定義項目１として「選択枝１」
が、インデックス番号「４Ｃ」には、「選択枝２」が付
加されている。例えば、第３の実施例のように、ブラウ
ズ表示の機能がある場合、ユーザー定義項目が付加され
ていると、このユーザー定義項目を参照し、条件に合致
するインデックス情報を検索して、表示情報をブラウズ
表示することができる。具体的には、ユーザーからユー
ザー定義項目１に「選択枝」という情報が存在する表示
情報をブラウズ表示するように指示されると、インデッ
クス情報ブラウズ手段１２は、インデックス情報記憶手
段７の中から、「選択枝」の情報がユーザー定義項目１
に存在するインデックス情報、すなわち、インデックス
番号「３Ｃ」，「４Ｃ」を検索し、対応する表示情報を
表示情報記憶手段３から集めてブラウズ表示を行なう。
このように、インデックス情報構造化手段１３と、イン
デックス情報ブラウズ手段１２を組み合わせて用いるこ
とにより、いろいろな条件でブラウズ表示を行なうこと
ができる。また、他のインデックスの指定をユーザー定
義項目に持つ場合、ユーザー定義項目に書かれたインデ
ックスの指定に従って、順次、音声映像記憶番地を取得
し、必要な音声映像情報の再生表示を行なう。例えば、
インデックス番号「２Ｃ」のユーザー定義項目ｎにおい
て「１−２−３Ｃ」のように、インデックス１，２，３
が指定されていると、インデックス番号「２Ｃ」の音声
映像情報の再生表示が指示されたときには、インデック
ス番号「１Ｃ」，「２Ｃ」，「３Ｃ」の順で音声映像情
報記憶番地が取得され、音声映像情報の再生表示が順次
行なわれる。このようにして、会議中に保存された表示
情報および音声映像情報に、ユーザー定義項目を付加す
ることにより、ユーザー独自の分類により会議中の情報
を整理し、必要なときに迅速に会議の情報を検索するこ
とができる。

【００３４】上述した第１乃至４の実施例で説明した手
段を、適宜組み合わせて構成することもできる。例え
ば、第４の実施例でも述べたように、第４の実施例のイ
ンデックス情報構造化手段１３と、第３の実施例で説明
したインデックス情報ブラウズ手段１２を組み合わせて
構成したり、さらに、第２の実施例で説明した指示動作
検出手段１１を組み合わせることも可能である。

【００３５】

【発明の効果】以上の説明から明らかなように、本発明
によれば、会議における議事内容である表示情報だけで
なく、議事内容の記録される過程における会議情報の会
話や身振りなども記録することができる。このことによ
り、従来のように議事録等の記載だけでは記録されない
経緯等が失われることなく、記録し、再現することがで
きるという効果がある。このとき、議事内容が削除され
た場合でも、インデックス情報が生成され、削除前の表
示情報とともに保存されるので、修正や処理された経緯
や、削除された部分の音声映像情報も再現することがで
きる。会議中、音声映像情報は会議開始から終了まで連
続してなされ、インデックスはその音声映像情報に対
し、自動生成されるので、会議参加者の発言や身振りを
もれなく記録することができる、という効果もある。

【図面の簡単な説明】

【図１】本発明の電子会議システムの第１の実施例を
示す概略構成図である。

【図２】本発明の電子会議システムの第１の実施例の
動作を説明するためのフローチャートである。

【図３】本発明の電子会議システムの第１の実施例に
おけるインデックス生成処理の流れを示すフローチャー
トである。

【図４】新しい頁のインデックス情報の説明図であ
る。

【図５】書き込みによるインデックス情報の追加の説
明図である。

【図６】消去によるインデックス情報の追加の説明図
である。

【図７】１つの頁の表示情報とそれに対応するインデ
ックス情報の変化の説明図である。

【図８】本発明の電子会議システムの第１の実施例に
おける音声映像情報再生処理の流れを示すフローチャー
トである。

【図９】音声映像情報再生処理の具体例の説明図であ
る。

【図１０】本発明の電子会議システムの第２の実施例
を示す概略構成図である。

【図１１】指示動作に基づくインデックス情報生成処
理の流れを示すフローチャートである。

【図１２】指示動作に基づくインデックス情報生成処
理の具体例の説明図である。

【図１３】本発明の電子会議システムの第３の実施例
を示す概略構成図である。

【図１４】頁単位でのブラウズ表示時の表示画面例の
説明図である。

【図１５】任意頁の時間経過に基づくブラウズ表示時
の表示画面例の説明図である。

【図１６】会議の時間経過に基づくブラウズ表示時の
表示画面例の説明図である。

【図１７】本発明の電子会議システムの第４の実施例
を示す概略構成図である。

【図１８】本発明の電子会議システムの第４の実施例
の具体例の説明図である。

【符号の説明】

１表示手段、２入力手段、３表示情報記憶手段、
４音声映像記憶手段、５入力間隔検出手段、６イ
ンデックス情報生成手段、７インデックス情報記憶手
段、８音声映像情報呼出手段、９音声映像情報再生
手段、１０音声映像入力手段、１１指示動作検出手
段、１２インデックス情報ブラウズ手段、１３イン
デックス情報構造化手段。

Claims

(57)【特許請求の範囲】

【請求項１】表示手段と、前記表示手段に表示させる
情報を入力する入力手段と、前記表示手段に表示された
情報を記憶する表示情報記憶手段と、会議参加者の音声
および映像を入力する音声映像入力手段と、前記音声映
像入力手段に入力された音声および映像を記憶する音声
映像記憶手段と、前記入力手段からの入力の間隔を検出
する入力間隔検出手段と、前記入力間隔検出手段の検出
結果または利用者からの指示に基づき前記表示情報記憶
手段に記憶されている表示情報と前記音声映像記憶手段
に記憶されている音声映像情報を対応づけるインデック
ス情報を生成するインデックス生成手段と、前記インデ
ックス生成手段により生成されたインデックス情報を記
憶するインデックス情報記憶手段と、前記インデックス
情報記憶手段に記憶されたインデックス情報を基に前記
音声映像記憶手段から音声映像情報を呼び出す音声映像
呼出手段と、前記音声映像呼出手段により呼び出された
音声映像情報を順次再生する音声映像情報再生手段を有
することを特徴とする電子会議システム。
【請求項２】表示手段と、前記表示手段に表示させる
情報を入力する入力手段と、前記表示手段に表示された
情報を記憶する表示情報記憶手段と、会議参加者の音声
および映像を入力する音声映像入力手段と、前記音声映
像入力手段に入力された音声および映像を記憶する音声
映像記憶手段と、前記入力手段からの入力の間隔を検出
する入力間隔検出手段と、前記入力間隔検出手段の検出
結果または利用者からの指示に基づき前記表示情報記憶
手段に記憶されている表示情報と前記音声映像記憶手段
に記憶されている音声映像情報を対応づけるインデック
ス情報を生成するインデックス生成手段を有することを
特徴とする電子会議システム。
【請求項３】表示手段に表示された情報を記憶する表
示情報記憶手段と、会議参加者の音声および映像を記憶
する音声映像記憶手段と、前記表示手段に表示された情
報が入力された間隔に基づいてまたは利用者からの指示
に基づいて前記表示情報記憶手段に記憶されている表示
情報と前記音声映像記憶手段に記憶されている音声映像
情報を対応づけたインデックス情報を記憶するインデッ
クス情報記憶手段と、前記インデックス情報記憶手段に
記憶されたインデックス情報を基に前記音声映像記憶手
段から音声映像情報を呼び出す音声映像呼出手段と、前
記音声映像呼出手段により呼び出された音声映像情報を
順次再生する音声映像情報再生手段を有することを特徴
とする電子会議システム。