JPH0482357A - 記録および検索方法ならびに自動記録装置 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は、コンピュータに支援された電子会議システム
において、参加者の発言とその発言に基づく資料とを対
応付けて、自動的に記録、検索する記録方法、検索方法
および自動記録装置に関する。

〔従来の技術〕

社会の変化が急速になると、経営上、必要な情報を早く
、かつ正確に取得することが重要となる。

すなわち、ニーズの個性化、商品のライフサイクルの短
期化に対処するために、企業における商品開発のスピー
ドアップが求められ、その−環として打ち合わせに要す
る時間の短縮、グループによる作業の効率向上を図るた
めに、電子会議システムの利用が注目されてきている。

従来の電子会議システムは、例えば、「日経コンピュー
タ、ｆｉ　１９８９年７月３１日、ｐｐ、５５〜６１に
記載されているように、共用大型デイスプレィおよび個
人用ワークステーションを用いたものが主流となってい
る。そして、これらのシステムでは、会議の開催通知や
会議中の通信方法については工夫が見られるが、討議の
結果を記録することについては、余り考慮されていない
。ところが、会議等においては、その内容を議事録とし
て残し、後日、それらを判断材料として利用することが
多い。

そのために、従来においては、議事録を会議参加者の人
手により作成したり、あるいは会議の部始終をビデオレ
コーダにより記録する方法が用いられていた。この場合
でも、その時の内容を正確に把握するためには、第三者
等の主観が混じらない状態で記録することが望ましい。

また、これらの資料の中から、検索者の求めている部分
が迅速に取り出せることが望ましい。

〔発明が解決しようとする課題］ 前述のように、従来の方法では、自動的に討議内容の記
録を残すという機能はなかった。そのために、全て人手
により議事録を作成していたが、この方法では次のよう
な問題がある。

（ａ）議事録作成者の思考能力の一部が、議事録を取る
という非生産的作業に使われてしまうこと、（ｂ）議事
録の中に、作成者の主観が混じってしまう可能性があり
、会議に参加しなかった者に対して、その場の雰囲気が
正確に伝わり難いこと、（Ｃ）ビデオ等で記録する場合
には、その場の雰囲気は残るが、会議参加者がビデオを
意識するあまり、形式的な討論になり易く、十分な討議
ができないこと、 （ｄ）記録結果の内容を検索する場合には、知りたい部
分を見つけ出すまでに、時間が長くかがることが多く、
特にビデオの記録から特定の内容を検索することは、極
めて面倒であること、等である。

本発明の目的は、これら従来の課題を解決し、参加者が
記録されていることを意識せずに討議でき、会議の要点
をその場の雰囲気を保った状態で記録できる記録方法、
検索方法および自動記録装置を提供することにある。

また、本発明の他の目的は、議事録の中から知りたい部
分のみを簡単に検索でき、誰が、何を、どのような状態
で発言したかを、正確に把握できる検索方法を提供する
ことにある。

〔課題を解決するための手段〕

上記目的を達成するため、本発明の記録方法は、（ａ）
各々が端末装置を備えた会議参加者全員が表示装置に表
示された資料を参照しながら、順次発言して会議を行っ
た後、会議の内容を記録する記録方法において、各参加
者の発言と、発言が行われている時に表示装置に表示さ
れた資料とを自動的に対応付けて、対応毎にインデクス
番号を付加し、各対応における発言は発言ファイルに、
資料は会議資料ファイルに、またインデクス番号はイン
デクスフアイルに、それぞれ記憶することに特徴がある
。また、（ｂ）発言ファイルに発言を記録する場合、全
ての発言の中から記録すべき発言であるか否かを判定し
、発言の音量を測定することにより、予め定めたレベル
以上の音量を持つ発言のみを記録することにも特徴があ
る。また、（Ｃ）発言ファイルに発言を記録する場合、
発言を記録するか否かの判定を発言者の意図により行う
ことにも特徴がある。また、（ｄ）発言ファイルに発言
を記録する場合、発言を記録すべきか否かの判断を、例
えば、特定の資料に対する発言のみを記録することを含
めて、予め与えられた条件を満たしたときのみ会議中の
発言を記録させるようにしたことにも特徴がある。また
、（ｅ）発言ファイルに発言を記録する場合、発言と同
時に発言中の発言者の映像を記録して、発言ファイルの
代りに音声画像ファイルに記録することにも特徴がある
６また、（ｆ）発言ファイルに発言を記録する場合に、
参加者の発言を入力するための音声入力装置を参加者毎
に割り当てるとともに、各参加者から入力される発言に
対して、発言者を識別できるコードを付与して、発言フ
ァイルに記録することにも特徴がある。さらに、（ｇ）
発言ファイルに発言を記録する場合、参加者の発言を音
声！識装置により文字データに変換したものを発言とと
もに、文字データファイルに記録することにも特徴があ
る。

また、本発明の検索方法は、（ｈ）会議で用いられる資
料には、予め検索のためのキーワードが付与されており
、検索の際には、記録されたファイルに対して、端末装
置から参照資料を指定することにより、キーワードを用
いて上記参照資料に関する議論が行われた部分の記録情
報を取り出すことに特徴がある。また、（１）記録され
たファイルに対し、発言中の単語ないし文節ないし文章
を指定することにより、参照された資料に関する議論が
行われた部分の記録情報を取り出すことにも特徴がある
。

また、本発明の自動記録装置は、（ｊ）参加者毎に設け
られ、各参加者の発言をそれぞれ入力するための音声入
力手段と、音声入力手段からの入力レベルが予め定めた
レベル値以上になったときの発言を公的発言として選択
する発言選択手段と、表示装置上に表示中の資料を特定
する資料番号を、資料が表示されている期間だけ記憶す
る一時記憶手段と、選択された発言とそのとき上記一時
記憶手段に記憶されている資料番号とを対応付けるイン
デクスを作成するインデクス作成手段と、インデクスと
選択された発言とを記録する発言記録手段とを具備する
ことに特徴がある。また、（ｋ）発言記録手段により発
言を記録する場合に、発言の記録と連動して発言中の発
言者の表情を記録するための撮影手段を、参加者毎に設
けたことにも特徴がある。また、（１）発言記録手段ま
たは撮影手段で参加者の発言または表情を記録する場合
に、発言の記録と連動して発言者が表示装置上で示した
例えばカーソルの指示記号の位置を、そのとき表示中の
資料上の位置と対応付けて記録するためのカーソル位置
記憶手段を設けることにも特徴がある。

〔作　　用〕

本発明においては、会議で用いる資料を表示装置に表示
している間、一時記憶手段が資料番号を記憶する。音声
入力手段が参加者の発言を常に入力し、発言選択手段は
発言が公的なものか、私的なものかを判定して、公的な
ものを選択する。また、インデクス作成手段は、記憶す
べき発言が決定すると、資料番号とその発言とを対応付
けるためのインデクスを作成する。発言記録手段は、記
録すべき発言とそのインデクスが決定した時点で、記憶
装置に記憶する。

記憶装置に記憶されている会議内容は、資料および発言
ともに、キーワード検索により計算機による検索が行わ
れる。その際に、資料と発言がインデクスで対応付けら
れているため、会議の状態が正確に再現され、把握され
る。

詳細情報を残しておく方法として、音声画像入力手段と
音声認識手段が設けられる。前者は、会議中の画像を音
声画像データとして取得し、後者は、発言の音声データ
から単語を認識して、発言を文字データに変換する。ま
た、要約作成手段も設けられ、会議中に得られた発言の
全文字データを基に、会議内容の要約を作成する。

〔実施例〕

以下、本発明の実施例を、図面により詳細に説明する。

第１図〜第１４図は、本発明の第１の実施例を示すもの
であり、第１５図〜第２３図は、本発明の第２の実施例
を示すものである。

第１図は、本発明の第１の実施例を示す会議システムの
主要部ブロック図である。

第１図において、ｌはコンピュータを内蔵した制御装置
、２は出席者の発言を取得するための複数個の音声入力
装置、３はデイスプレィやキーボド等から構成される個
人用の端末装置、４は参加者全員に見せる資料等を表示
するための大型デイスプレィを備えた表示装置、５は会
議用の資料や本発明の出力である会議内容を記録するた
めの記憶装置、６は処理途中の結果を記憶するための一
時記憶装置である。

制御装置１内には、発言選択装置１１と発言記録装置１
２とインデグス作成装置１３と資料検索装置１４が内蔵
される。発言選択装置１１は、出席者の発言音量を調べ
ることで、公的な発言のみを選択する。また、発言記録
装置１２は、発言と参照資料を対応付けて記録する。イ
ンデグス作成装置１３は、発言と参照資料を対応付ける
ためのインデグスを作成する。さらに、資料検索装置１
４は、端末装置３からの指示により記憶装置５から会議
資料を取り出して表示装置４に表示する。

記憶装置５には、会議資料ファイル５１とインデクスフ
アイル５２と発言ファイル５３が格納されている。

第２図は、第１図の会議システムの利用形態を示す説明
図である。

会議場には、会議システムとして、制御装置ｌ。

記憶装置５および一時記憶装置６の他に、１台の大型デ
イスプレィ４と、その表示画面が見えるように配置され
た複数台の個人用端末装置３がある。

会議参加者は、これらの個人用端末装置３を利用しなが
ら会議を行う。また、音声入力装置２は、他の雑音を避
けるために参加者毎に用意されている。

第３図は、第１図の会議システムの会議の内容を記録す
るための動作フローチャートである。

会議システムが起動すると、一時記憶装置６をクリアし
く１０１）、会議中の間、つまり司会者が会議終了を宣
言するまでの間に、次の動作を繰り返す（１０２）。参
加者の発言は、常に音声入力装置２から入力されて、発
言選択装置１１に送られている（１０３）。発言選択装
置１１は、音量レベルに基づいて、その発言が記録とし
て有効が否かの選択処理を行い（１０４）、その発言が
有効であれば（１０５）、一時記憶装置６内の表示中資
料番号の取り出し処理を行う（１０６）。その後、発言
記録装置１２は、インデクスフアイル１３がらいま選択
された発言とその時の表示装置４に表示中の会議資料を
対応付けるインデクスおよび発言検索キーを入手し、発
言とインデクスを記憶装置５に記録する（１０７）。

以上の動作によ番ハ会議中の発言中から有効なものだけ
が自動的に記録される。

第４図は、第３図の一時記憶装置のクリア動作が終了し
たときの内容フォーマット図である。

一時記憶装置６の内容としては、発言の有効性を示すた
めの有効性フラグ６１　（０は無効、１は有効）、表示
装置４上に表示中の会議資料番号６２（何も表示されて
いない時には、空白となる）、発言と会議資料を対応付
けるためのインデクス番号６３、および記録した発言に
付加された発言番号６４の順で格納される。インデクス
番号６３には、直前に作成されたインデクス番号が示さ
れている。第４図におけるインデクス番号（ＩＸＯ）は
、ＩＸと１以上の数値を組合わせたもので、識別番号と
して用いられる。また、発言番号６４には、直前に記録
された発言番号が示されている。第４図での発言番号は
、「発言」の文字と１以上の数値の組合わせである。

第５図は、制御装置内の資料検索装置の動作フローチャ
ートである。

先ず、表示すべき資料の資料番号を入力する（１４１）
。次に、資料番号を検索キーにして記憶装置５内の会議
資料ファイル５１を検索する（１４２）。その資料があ
れば、資料番号を一時記憶装置６に記憶して（１４４）
、検索した資料を大型デイスプレィ４に表示する（１４
５）。

もし、該当する資料がなかった時には、資料無しを示す
メツセージを端末装置３に送出し、端末装置３の表示装
置に表示させて処理を終了する。

ｆＪ６図は、制御装置内の発言選択装置の入力および出
力を示す特性図である。

いま、発言選択装置１１の入力が、第６図（ａ）に示す
ようなレベルの音声波形であり、かつ入力の有効範囲を
３０デシベル以上に設定したと仮定すると、発言選択装
置１１の出力は、第６図（ｂ）に示すように、時間ｔ１
からし２の間の波形のみが出力され、これが１回の記録
単位となる。

ただし、人間の発言には、局所的に音声が途切れる部分
もあるため、有効音量に満たない時間がある値以上続い
た時に発言の終了とみなす。

また、第６図（ａ）の１０〜ｔｌの期間の低レベルの音
声波形は、私語つまり雑音と同じような公的発言ではな
い信号とみなして抽出しないようにしている。

第７図は、発音選択装置の動作フローチャートである。

本実施例では、発言の音量が一定時間（例えば、５秒間
）以上定められた値より低かった時に、１回の発言が終
了したものとみなす。

最初に１発言の終了を判定するためのタイマをリセット
しく１１１）、発言の入力レベルを判定する（１１２）
。音声波形の入力レベルが３０デシベル以上であれば、
発言が有効であることを示すために、有効フラグをセッ
トして（１１３）、入力波形を出力する（１１４）。ま
た、入力レベルが３０デシベル以下の場合には、タイマ
の値が５秒になるまでは入力波形を出力する（１１５，
１１６）。

タイマの値が５秒を越えると、１回の発言が終了したも
のとみなし、有効フラグをＯにリセットした後（１１７
）、出力レベルをＯデシベルにする（１１８）。

以上の動作により、第６図（ｂ）に示す出力が得られる
ので、会議での正式な発言のみを自動的に選択できる。

なお、入力レベルが３０デシベル以上か否かの判断（１
１２）を、人手により行う場合も考えられる。この場合
には、自動的選択にならないが、記録したくない発言を
任意に排除できるという利点だけはある。また、本実施
例では、発言選択装置１１を制御装置１内に配置してい
るが、音声入力装置２内に配置することも可能である。

この場合には、個々の音声入力装置２毎に入力の有効範
囲を設定できるので、例えば参加者Ａは小声であるから
２５デシベル以上、参加者Ｂは大声であるから３５デシ
ベル以上に基準レベルを設定する等、参加者の個性に合
った選択基準が設定できる利点がある。

本実施例では、会議内容を記録すべきか否かの判断を、
発言の音量値（例えば、３０デシベル以上）を条件とし
て、発言選択装置１１を設けているが、本発明では、こ
れに限らず、次のような条件を判断して記録することが
できる。

（ｉ）特定の人物の識別コードを与えて、その人物の発
言は全て記録対象とする。

（ｉｉ）特定の人物の発言後に、同一資料が表示されて
いる間の全ての発言を記録対象にする。

（ｍ）特定の資料番号を与えて、その資料に対する発言
のみを記録対象にする。

第８図は、制御装置内の発言記録装置の動作フローチャ
ートである。

発言選択装置１１から送られた音声データを入力しく１
２１）、その音声データをディジタルデータに変換する
（１２２）。次に、インデクス作成装置ｆ１３に対して
発言検索キーおよびインデクスの作成要求を出す（１２
３）。得られた発言検索キーを発言データに押入するこ
とにより、検索可能な発言データを作成する（１２４）
。そして、発言データは発言ファイル５３に、インデク
スはインデクスフアイル５２に、それぞれ記録する（１
２５）。

なお、音声をディジタル化して記憶する方法としては、
例えば特開昭６３−２８２８７７号公報のｒ音声注釈入
力装置」に記載された技術を用いて実現することができ
る。

第９図は、制御装置内のインデクス作成装置の動作フロ
ーチャートである。

インデクス作成装置の動作は、一時記憶装置６内の値に
基づいて行われる。先ず、一時記憶装置６をアクセスし
て、インデクス番号６３を読み出し、その数値に１を加
えたものを新しいインデグス番号とする（１３１）。同
じように、発言番号６４を読み出し、その数値に１を加
えたものを新しい発言番号とする（１３２）。次に、デ
イスプレィ４に現在表示中の資料番号６２を取り出す（
１３３）。そして、インデクス番号、発言番号および資
料番号を接続したものを新規インデクスとしく１３４）
、インデクス番号、発言番号を接続したものを新規発言
検索キーとする（１３５）。

このインデグスと発言検索キーにより、表示装置４上の
会議資料と発言は別のファイルに記録されているので、
これらを単独で、あるいは関連付けて、コンパクトディ
スク等の記録媒体に複写して保管することが可能であり
、利用者に提供することができる。

第１０図および第１１図は、一時記憶装置のある状態を
示す説明図である。

第１０図は、会議が始まり、最初に有効な発言があった
時の状態を示しており、この時点では、まだ表示装置４
上には会議用資料が表示されていないものとする。第４
図が、一時記憶装置６の初期状態である。すなわち、第
４図の状態に対して、第９図に示す動作を実行したこと
により、有効フラグはｌ′、資料番号６２は空白、イン
デクス番号６３はＩＸＩ’　、発言番号６４は″発言１
″がそれぞれセットされる（第１０図）。

次に、第１１図は、会議用資料１を表示装置４に表示し
た後に、２番目の発言があった時の状態を示している。

このとき、有効フラグ６１はｌ′に、資料番号６２は′
資料１″に、インデクス番号６３は’ＩＸ２’　に、発
言番号６４は１発言２″に、それぞれセットされる（第
１１図）。

第１２図は、本実施例で、ある会議の終了時の記憶装置
内の状態を示す説明図である。

第１２図（ａ）は記憶装置５内の会議資料ファイル５１
、第１２図（ｂ）は記憶装置５内のインデクスフアイル
５２、第１２図（Ｃ）は記憶装置５内の発言ファイル５
３の各内容を示している。

発言１では司会者の会議開始の宣言であるため、資料は
なく、インデクス番号ＩＸＩで対応付けられている。ま
た、発言２では資料ｌを参照しながら発言しているので
、インデクス番号ＩＸ２で対応付けられている。また、
発言ｎは最後に結論をまとめた資料ｎを用いて会議の終
了を宣言しているので、インデクス番号ＩＸｎで対応付
けられている。

このようにして、インデクスフアイル５２により、会議
資料ファイル５１と発言ファイル５３とが対応付けられ
ている。

第１３図は、本実施例の記録結果に対する検索装置の動
作状態を示すブロック図である。

第１３図において、７は制御装置、７５は記録検索装置
、３はデイスプレィやキーボード等を具備した個人用の
端末装置、５は会議内容を記録した記憶装置、８は音声
出力装置である。記憶装置５には、会議資料ファイル５
１とインデクスフアイル５２と発言ファイル５３とが格
納されている。

この例では、端末装置３のキーボード等がら会議資料の
資料番号を入力して、その資料に関連する発言を取得す
る。

ここで、第１図の制御装置ｌおよび資料検索装置１４に
比べて、記号番号が異なっているのは、全く別の装置を
意味しているからである。すなわち、記録検索装置７５
を第１図の制御装置１とは別個に独立して構成している
ため、会議内容が記録された記憶装置５にアクセス可能
な環境であれば、検索者がどこにいても検索できるとい
う利点がある。

さらに、制御装置７は、検索動作に関する処理が実行で
きればよいため、小型で低価格のものを利用でき、多数
の場所に設置し易いという利点を持つ。なお、制御装置
７は第１図の制御装置ｌと同一のものであっても、何等
問題はない。

第１４図は、第１３図における記録検索装置の動作フロ
ーチャートである。

先ず、端末装置３から資料番号を取得する（８５１）。

次に、取得した資料番号をキーにして会議資料ファイル
５１を検索し、その資料を端末装置３に表示する（８５
２）。その後、以下の動作を繰り返すことにより、この
資料に関する発言の全てを取り出して、音声出力装置８
から出力する。

すなわち、インデクスフアイル５２を先頭から調べてい
き（８５３）、端末装置３から最初に得た資料番号を含
むインデクスがあれば、それを取り出す（８５５）。こ
の動作は、インデクスの検索がインデクスフアイルの末
尾まで実行されることにより終了する。（８５４）。取
り出されたインデクスから発言検索キーを抜き出し、発
言ファイル５３から発言データを取得する（８５６）。

取得した発言データをアナログ変換器を経てアナログ化
しく８５７）、音声出力装置８から出力する（８５８）
。

これによって、検索者は会議に出席していなくても、自
分が知りたい部分についてのみ、脛がどのような発言を
したかを、臨場感をもって知ることができる。

以上が、本発明の第１の実施例である。

次に、詳細な記録を必要とする場合の第２の実施例につ
いて説明する。すなわち、第２の実施例では、第１図に
示した会議システムの記録データに、発言を文字データ
に変換したものと、発言者の映像と、会議全体の要約と
を合わせて記録として残すようにしている。

第１５図は、本発明の第２の実施例を示す会議システム
のブロック図である。

第１５図において、第１図と同一の記号のものは同一の
装置を表わしており、以下、この実施例で新たに設ける
ものだけを説明する。

制御装置１に内蔵されている１５０は、記録された音声
データを文字データに変換して記録する音声文字変換装
置、１６０は発言の音声データを文字データに変換する
ための音声認識装置、１７０は文字データを基に、会議
の要約を作成する要約作成装置である。また、記憶装置
５に格納されている５２０は、第１図のインデクスフア
イル５２に、発言の文字データと会議の要約を検索する
ためのインデクスを追加したインデクスフアイル、５３
０は発言と発言者の画像を記録した音声画像ファイル、
５４０は発言を文字データに変換した文字データファイ
ル、５５０は会議の要約を記録した要約ファイルである
。すなわち、第１図の記憶装置１内の発言ファイル５３
の代りに、本実施例では、５３０〜５５０の３つのファ
イルが格納されている。

また、第１図では、端末装置３毎に音声入力装置２が設
けられているが、本実施例では、端末装置３毎に音声画
像入力装置２０が設けられる。この装置２０は、マイク
とカメラを具備した装置である。

第１６図は、第１５図の会議システムにおける内容記録
動作のフローチャートである。

先ず、会議システムが起動すると、一時記憶装置６をク
リアしく１０１）、会議中であるという条件で以下の動
作を繰り返す（１０２）。参加者の発言および画像は常
に音声画像入力装置２ｏがら音声画像データとして入力
されており、その中の音声データが発言選択装置１１に
送られている（１０３）。発言選択装置１１は、音量レ
ベルに基づいてその発言が記録として有効であるか否か
を判断して、選択処理を行い（１０４）、その発言が有
効であれば（ｌ　Ｏ５）、一時記憶装置６内の表示中資
料番号６２の取り出し処理を行う（１０６）。その後、
発言記録装置１２は、インデクスフアイル１３から音声
画像データとその時に表示装ｆ４上に表示中である会議
資料を対応付けるインデクス、および発言検索キーを入
手し、それら音声画像データとインデクスを記憶装置５
に記録する（１０７〕。会議が終了すると（１０２）、
音声文字変換装置１５０により会議中に記録した音声画
像デクの音声データを文字データに変換する（１０８）
。

次に、その文字データを基に、会議内容の要約を生成す
る（１０９）。

以上の動作によって、会議中の発言の中から有効なもの
だけが、その時の発言者の画像とともに自動的に記録さ
れる。さらに、会議の概要を簡単に把握するための要約
も、自動的に作成できる。

なお、音声画像データの入力は、ビデオカメラ等の撮影
装置により実現可能であり、また音声画像データの記録
は追記型の光デイスク装置を用いることにより実行可能
である。

第１７図は、第１５図における音声文字変換装置の動作
フローチャートである。

音声文字変換装置１５０は、会議中に作成した音声画像
ファイル５３０を基にして文字データファイル５４０を
生成する。

先ず、インデクスフアイル５２０を検索するためのイン
デグス番号をＩＸＯに初期設定した後（１５０１）、イ
ンデクス番号に１を加え（１５０２）、そのインデクス
番号を持つインデクスがあるか否かを確認する（１５０
３）。なければ処理を終了する。そのインデクスがあれ
ば、対応する音声画像データを取得しく１５０４）、こ
れを音声認識装置１６０に渡す。音声認識装置１６０は
、音声データを文字データに変換する（１５０５）。文
字データは文字データ用のインデクスを別個に与えられ
て（１５０６）、文字データファイル５４０に記録され
る（１５０７）。再び始めに戻り、インデクス番号を１
だけ進める（１５０２）。このようにして、インデクス
フアイル末尾の音声画像データに対する変換処理が終了
すると、動作を終了す第１８図は、第１５図における音
声認識装置の動作フローチャートである。

音声認識装置１６０の機能は、音声データを文字データ
に変換することである。

先ず、変換すべき音声データを入力する（１６０１）。

入力された音声データは、音量の変化を基に音声分析さ
れ（１６０２）、音節の候補を認識する。次に、音声辞
書とのマツチング処理により単語認識を行う（１６０３
）。音声画像入力装置２０を個人毎に設けた場合には、
音声画像データの記録に個人を識別する記号を付加する
ことが可能であり、単語認識処理（１６０３）で用いる
音声辞書を個人対応に用意し、利用することが可能であ
るため、単語の認識をさらに効率よく行うことができる
。認識された単語に対し、接続条件を確認した後、文章
を生成する（１６０４）。

音声認ｗｉ、装置１６０は、例えば、特開平１−１３０
２６２号公報に記載された「音声ワードプロセッサ」の
技術を用いることにより実現することができる。

このようにして、発言を文字データとして記録すること
（こより、発言中のキーワードを取り出すことが可能で
ある。これにより、会議記録に対する検索方法の多様化
を図ることができると′ともに、要約も作成できる。

第１９図は、第１５図における要約作成装置の動作フロ
ーチャートである。

要約作成装置１７０は、文字データファイル５４ｏ内の
会議中の発言を文章として捉え、会議内容の要約を作成
する。

先ず、インデクスフアイル５２０を検索するためのイン
デクスをＩＸＯに初期設定した後（１７０１）、インデ
クス番号を１だけ進ませる（１７０２）。そのインデク
ス番号を持つインデクスが存在するか否かを判断する（
１７０３）。つまり、文字データファイル５４０の末尾
に至っていないことを判断し、そのインデクス番号が存
在すれば、対応する文字データを取得しく１７０４）、
発言内容の重要度を判定する（１７０５）。重要度の判
定は、会議進行のポイントになる′議題′、　゛目的゛
、゛決定事項′等の言葉の有無で行うことができる。

発言内容が重要文であることを判定すると（１７０５）
、その発言を要約ファイル５５０に出力する（＋７０７
）。次に、最初に戻ってインデクス番号に１を加え（１
７０２）、文字データファイル５４０の末尾まで検索し
た後（１７０３）、要約ファイル５５０へのインデクス
をセットして（１７０８）、処理を終了する。

なお、要約作成装置１７０の概要は、例えば、情報処理
学会第３４回全国大会講演論文集、第１４６１頁〜１４
６２頁「文書要約・検索システムの一構成法Ｊに示され
ている。要約を作成することにより、会議の要点を簡単
に把握できる。

第２０図は、第１５図における記憶装置内の各ファイル
の状態を示す図である。

会議内容の記録が終了した時点では、記憶装置５内には
、第２０図（ａ　）（ｂ　）（ｃ　）（ｄ　）の各ファ
イルが格納される。インデクスフアイル５２０により、
音声画像ファイル５３０と文字データファイル５４０と
要約ファイル５５０とが対応付けられている。なお、会
議資料ファイル５１に関しては、第１２図と同じである
。

音声画像ファイル５３０のＡＶ２では資料Ｉを参照しな
がら説明が行われている画像であり、同じ資料ｌに対し
て発言２が文字データファイルＳ４０で記録されている
。これらの対応関係が、インデクスフアイル５２０のＩ
Ｘ２の欄にまとめて記録されている。ＩＸＯ〜ＩＸｎま
での文字データに対して要約ファイルが作成され、要約
番号として会議０１が付される。

第２１図は、本発明の他の実施例を示す記録検索装置の
ブロック図である。

第２１図において、７は制御装置、７５０は記録検索装
置、３は個人用の端末装置、８は音声出力装置、５は会
議内容を記録した記憶装置である。

記憶装置５には、前述のように、会議資料ファイル５１
、インデクスフアイル５２０、音声画像ファイル５３０
１文字データファイル５４０、および要約ファイル５５
０が格納される。

第１５図の制御装置ｌとは別個に設けられた制御装置７
に記録検索装置７５０を内蔵して、端末装置３のキーボ
ード等から会議資料の資料番号を入力することにより、
その資料とともにその資料に関連する発言者の画像を表
示するものである。

第２２図は、本発明の他の実施例を示す検索動作フロー
チャートである。

先ず、検索者は知りたい資料の資料番号を端末装置３か
ら入力する（７５００１）。記録検索装置７５０は、会
議資料ファイル５１を調べて該当する資料の存在を確認
する（７５００２）。資料が存在すれば、発言検索の準
備として発言数とインデクス番号をＩＸＯに初期化しく
７５００３）、インデクスフアイル５２０の末尾まで以
下の検索動作を繰り返す。インデクス番号を１だけ進め
て（７５００４）、インデクスフアイル５２０内のイン
デクスを調べる（７５００６）。インデクスが存在すれ
ば、そのインデクスが持っている資料番号が端末装置か
ら入力された資料番号と等しいか否かを判定する（７５
００７）。資料番号が等しいときには、そのインデクス
の音声画像番号を取り出し、音声画像ファイル５３０か
ら発言者の画像データを取得して（７５００８）、発言
数を１だけ進める（７５００９）。次に、最初に戻って
、インデクス番号を１だけ進め（７５００４）、インデ
クスフアイル５２０の末尾まで以上の検索動作を繰り返
した後、発言数が１以上のとき（７５０１０）、会議資
料ファイル５１から該当する資料を取得する（７５０１
１）。その後、その会議資料と発言者画像を対応付けて
端末装置３に表示する（７５０１２）。

第２３図は、第２２図における検索動作の検索結果表示
例を示す図である。

第２３図では、端末装置３の画面上に参照資料とその資
料に対して発言した発言者の画像が表示されている。こ
れにより、各資料に対して雌が発言したかを簡単に知る
ことができるので、会議の中心テーマになっていた資料
、または内容が容易に判断できる。

本発明の記録検索装置では、発言数のカウントを発言者
別に行い、発言者の画像とともにその発言者の発言回数
を表示することもできる。また、別の検索方法として、
第１８図の説明で述べたように、音声画像データ中に個
人を識別する記号を付加した場合には、参加者個人を指
定した検索も可能である。

さらに、発言者が表示装置４上に表示中の資料をカーソ
ル等の指示記号を用いて差し示しながら説明する場合の
指示記号の動きを記録するためには、表示装置４に対す
る出力信号を音声画像入力装置２０の画像データと同じ
ように扱えばよい。

この場合に、指示記号の動きだけを記録しておき、検索
時には、会議資料の画像に重ねて再生するようにすれば
、表示効果が大きい。さらに、別の方法として、発言中
の表示装置４における動作を全て記録する方法も可能で
ある。

また、本実施例では、資料と発言をインデクスにより対
応付けることが特徴の１つとなっているが、それ以外の
方法で対応する情報を取り出せるようにすることも可能
である。例えば、レーザーディスク等の大容量、高速ア
クセス記憶装置が普及してくれば、画像データや音声デ
ータを一緒に記録することが可能になり、互いのデータ
を対応付けるインデクスは不要となる。

このように、第２の実施例においては、検索者は、会議
中の発言やその他のでき事に対して、発言者の表情も表
示できる等、詳細な情報を得ることができる。

〔発明の効果］ 以上説明したように、本発明によれば、会議後に、会議
内容を参考にして判断する必要がある場合、非参加者で
あっても、臨場感をもって会議の内容を知ることができ
るので、従来の議事録のように、記録者の記録誤りや記
録者の主観はなく、より細かな状況を把握して判断する
ことができるという効果がある。

【図面の簡単な説明】 第１図は本発明の第１の実施例を示す会議システムの主
要部ブロック図、第２図は第１図の会議システムの利用
形態を示す図、第３図は第１図の会議システムの記録動
作のフローチャート、第４図は第１図の一時記憶装置の
内容フォーマット図、第５図は第１図の資料検索装置の
動作フロチャト、第６図は第１図の発言選択装置の入力
と出力の特性図、第７図は第６図の発言選択装置の動作
フローチャート、第８図は第１図の発言記録装置の動作
フローチャート、第９図は第１図のインデクス作成装置
の動作フローチャート、第１．０図および第１１図は第
１図の一時記憶装置の最初と有効発言後の記憶内容を示
す図、第１２図は会議が終了した時点での記憶装置内の
各ファイルの内容を示す図、第１３図は本発明における
他の検索装置の構成と接続図、第１４図は第１３図の記
録検索装置の動作フローチャート、第１５図は本発明の
第２の実施例を示す会議システムの主要部ブロック図、
第】６図は第１５図の記録動作のフロチャート、第１７
図は第１５図の音声文字変換装置の動作フローチャート
、第１８図は第１５図の音声認識装置の動作フローチャ
ート、第１９図は第１５図の要約作成装置の動作フロー
チャート、第２０図は第１５図の記録終了後の記憶装置
内の各ファイルの状態を示す図、第２１図は本実施例の
別の検索装置の構成と接続図、第２２図は第２１図の記
録検索装置の動作フローチャート、第２３図は第２２図
の検索動作の結果表示例を示す図である。 １．７：制御装置、２：音声入力装置、３　端末装置、
４：表示装置、５：記憶装置、６．一時記憶装置、ｌｌ
：発言選択装置、１２：発言記録装置、１３；インデク
ス作成装置、１４，７５゜７５０：資料検索装置、５１
：会議資料ファイル、５２．５２０：インデクスフアイ
ル、５３　発言ファイル、１５０：音声文字変換装置、
１６０音声８識装置、１７０．要約作成装置、５３０音
声画像ファイル、５４０・文字データファイル、５５０
：要約ファイル、２ｏ、音声画像入力装置。 第 図 第 図 第 図 第 図 第 図 （ａ） 第 図 第 図 第 図 第 図 第 図 第 図（その１） （ａ） 会議資料ファイル 第 図 第 図（その２） （ｂ） インデクスフアイル 第 図（その３） （ｃ） 発言ファイル 第 図 第 図 第 図 第 図 第 図 第 図 第 図（その２） （ｂ） 音声画像ファイル 第 図 （その１） （ａ） インデクスフアイル 第 図（その３） （ｃ） 文字データファイル 第 図（その４） （ｄ） 要約ファイル 第 図

Claims (1)

1. 【特許請求の範囲】 １、各々が端末装置を備えた会議参加者全員が表示装置
   に表示された資料を参照しながら、順次発言して会議を
   行った後、該会議の内容を記録する記録方法において、
   上記各参加者の発言と、該発言が行われている時に、上
   記表示装置に表示された資料とを自動的に対応付けて、
   対応毎にインデクス番号を付加し、各対応における上記
   発言は発言ファイルに、上記資料は会議資料ファイルに
   、また上記インデクス番号はインデクスフアイルに、そ
   れぞれ記憶することを特徴とする記録方法。 ２、請求項１に記載の記録方法において、上記発言ファ
   イルに発言を記録する場合、全ての発言の中から記録す
   べき発言であるか否かを判定し、発言の音量を測定する
   ことにより、予め定めたレベル以上の音量を持つ発言の
   みを記録することを特徴とする記録方法。 ３、請求項１に記載の記録方法において、上記発言ファ
   イルに発言を記録する場合、発言を記録するか否かの判
   定を発言者の意図により行うことを特徴とする記録方法
   。 ４、請求項１に記載の記録方法において、上記発言ファ
   イルに発言を記録する場合、発言を記録すべきか否かの
   判断を、例えば、特定の資料に対する発言のみを記録す
   ることを含めて、予め与えられた条件を満たしたときの
   み会議中の発言を記録させるようにしたことを特徴とす
   る記録方法。 ５、請求項１〜４のいずれかの記録方法において、上記
   発言ファイルに発言を記録する場合、発言と同時に発言
   中の発言者の映像を記録して、発言ファイルの代りに音
   声画像ファイルに記録することを特徴とする記録方法。 ６、請求項１〜５のいずれかの記録方法において、上記
   発言ファイルに発言を記録する場合に、参加者の発言を
   入力するための音声入力装置を参加者毎に割り当てると
   ともに、各参加者から入力される発言に対して、発言者
   を、別できるコードを付与して、上記発言ファイルに記
   録することを特徴とする記録方法。 ７、請求項１〜６のいずれかの記録方法において、上記
   発言ファイルに発言を記録する場合、参加者の発言を音
   声認識装置により文字データに変換したものを発言とと
   もに、文字データファイルに記録することを特徴とする
   記録方法。 ８、請求項１〜７のいずれかの記録方法において、上記
   会議で用いられる資料には、予め検索のためのキーワー
   ドが付与されており、検索の際には、記録されたファイ
   ルに対して、端末装置から参照資料を指定することによ
   り、上記キーワードを用いて上記参照資料に関する議論
   が行われた部分の記録情報を取り出すことを特徴とする
   検索方法。 ９、請求項８に記載の検索方法において、請求項１〜７
   のいずれかの記録方法により記録されたファイルに対し
   、発言中の単語ないし文節ないし文章を指定することに
   より、参照された資料に関する議論が行われた部分の記
   録情報を取り出すことを特徴とする検索方法。 １０、各々が端末装置を備えた会議参加者全員が表示装
   置に表示された資料を参照しながら、順次発言して、会
   議を行った後、会議内容を自動的に記録する自動記録装
   置において、参加者毎に設けられ、各参加者の発言をそ
   れぞれ入力するための音声入力手段と、該音声入力手段
   からの入力レベルが予め定めたレベル値以上になったと
   きの発言を公的発言として選択する発言選択手段と、上
   記表示装置上に表示中の資料を特定する資料番号を、該
   資料が表示されている期間だけ記憶する一時記憶装置と
   、選択された発言とそのとき上記一時記憶装置に記憶さ
   れている資料番号とを対応付けるインデクスを作成する
   インデクス作成手段と、該インデクスと選択された発言
   とを記録する発言記録手段とを具備することを特徴とす
   る自動記録装置。 １１、請求項１０に記載の自動記録装置において、上記
   発言記録手段により発言を記録する場合に、発言の記録
   と連動して発言中の発言者の表情を記録するための撮影
   手段を、参加者毎に設けたことを特徴とする自動記録装
   置。 １２、請求項１０または１１に記載の自動記録装置にお
   いて、上記発言記録手段または撮影手段で参加者の発言
   または表情を記録する場合に、発言の記録と連動して発
   言者が表示装置上で示した例えばカーソルの指示記号の
   位置を、そのとき表示中の資料上の位置と対応付けて記
   録するためのカーソル位置記憶手段を設けることを特徴
   とする自動記録装置。 １３、請求項１０〜１１のいずれかの自動記録装置にお
   いて、上記発言記録手段により発言を記録する場合、記
   録された発言から言葉を認識するための音声認識手段を
   設け、該音声認識手段により発言を音声データと文字デ
   ータの両方で記録することを特徴とする自動記録装置。 １４、請求項１０に記載の自動記録装置において、上記
   発言選択手段は、入力レベルが一旦、定められた値以上
   になった後、入力レベルが上記定められた値以下になる
   時間が、予め定められた時間以上続いたときまでを１回
   の登録単位と認識することを特徴とする自動記録装置。 １５、請求項１０に記載の自動記録装置において、上記
   発言選択手段は、同一発言者が発言している間を１回の
   登録単位と認識することを特徴とする自動記録装置。 １６、請求項１４または１５に記載の自動記録装置にお
   いて、上記発言選択手段は、１回の登録単位として選択
   した発言データの中に、予め定められた時間以上に音量
   が低い部分が存在したときには、該音量の低い部分をあ
   る時間まで短縮して記録することを特徴とする自動記録
   装置。 １７、請求項１〜７のいずれかの記録方法において、上
   記各ファイルには、会議で使用された資料と、該資料に
   対して行われた発言とを対応付けて記録するか、該資料
   と、該資料に対して行われた発言と、該発言の発言者画
   像を対応付けて記録し、検索ないし表示できる形式で記
   録することを特徴とする記録方法。