JP2002023716A

JP2002023716A - プレゼンテーションシステムおよび記録媒体

Info

Publication number: JP2002023716A
Application number: JP2000203951A
Authority: JP
Inventors: Yoji Yamamoto; 洋史山本; Masayuki Ohata; 雅之大畑
Original assignee: PFU Ltd
Current assignee: PFU Ltd
Priority date: 2000-07-05
Filing date: 2000-07-05
Publication date: 2002-01-25

Abstract

(57)【要約】【課題】本発明は、プレゼンテーションを行なうプレ
ゼンテーションシステムおよび記録媒体に関し、発表
者、視聴者の感情を音声、画像処理によって認識してプ
レゼンテーションに反映し、より効果的なプレゼンテー
ションを行なえるようにすることを目的とする。【解決手段】プレゼンテーション実施時に発表者の音
声を入力する手段と、入力した音声の大きさおよび抑揚
を分析する手段と、分析して音声の大きいあるいは抑揚
の大きい強調部である場合にプレゼンテーション中の画
面を強調表示、あるいは注意を引く音声を発声する手段
とを備えるように構成する。

Description

【発明の詳細な説明】

【０００１】

【発明が属する技術分野】本発明は、プレゼンテーショ
ンを行なうプレゼンテーションシステムおよび記録媒体
に関するものである。

【０００２】

【従来の技術】従来、パソコンのプレゼンテーションツ
ールを利用したプレゼンテーションは、視覚的な効果も
高く、手間もかからないため多用されている。

【０００３】

【発明が解決しようとする課題】しかし、ツールが良く
なっても必ずしもプレゼンテーションの質の向上にはつ
ながらないという問題があった。プレゼンター（発表
者）の情熱や、発表内容のポイントを視聴者に強く訴え
るには、従来のプレゼンテーションツールでは困難であ
った。

【０００４】本発明は、これらの問題を解決するため、
発表者、視聴者の感情を音声、画像処理によって認識し
てプレゼンテーションに反映し、より効果的なプレゼン
テーションを行なえるようにすることを目的としてい
る。

【０００５】

【課題を解決するための手段】図１を参照して課題を解
決するための手段を説明する。図１において、カメラ１
は、プレゼンテーションを行なっている発表者を撮影す
るカメラである。

【０００６】カメラ２は、プレゼンテーションを視聴し
ている視聴者を撮影するカメラである。マイク３は、発
表者および視聴者の音声を入力するものである。

【０００７】処理装置４は、各種処理を行なうものであ
って、ここでは、カメラ１，２およびマイク３から入力
された画像、音声をもとにプレゼンテーションの各種支
援を行なうものである。

【０００８】次に、動作を説明する。マイク１でプレゼ
ンテーション中の発表者の音声を入力し、処理装置４が
入力した音声の大きさおよび抑揚を分析し、分析して音
声の大きいあるいは抑揚の大きい強調部である場合にプ
レゼンテーション中の画面を強調表示、あるいは注意を
引く音声を発声するようにしている。

【０００９】この際、強調部である場合に入力された音
声を音声認識して表示されている該当部分を強調表示す
るようにしている。また、カメラ１でプレゼンテーショ
ン中の発表者の画像を入力し、処理装置４が入力した画
像中の発表者像の動作あるいは表情を分析し、分析して
発表者像の動作が大きいあるいは表情の変化のある強調
部である場合にプレゼンテーション中の画面を強調表
示、あるいは注意を引く音声を発声するようにしてい
る。

【００１０】また、強調部である場合に表示されている
部分を強調表示するようにしている。また、入力した音
声を分析して発表の切れ目の場合に、次の資料を表示す
るようにしている。

【００１１】また、入力した音声を分析して表示中の文
字列と比較して不一致が多いときに警告を発するように
している。また、入力した音声を認識して指定された資
料が１つのときにその資料を表示し、複数のときに資料
一覧を表示してその中から１つを選択あるいは指定され
たキーワードの資料を表示するようにしている。

【００１２】また、入力した音声を認識して該当イメー
ジの資料を検索し、検索された資料が１つのときにその
資料を表示し、複数のときに資料一覧を表示してその中
から１つを選択あるいは指定された該当イメージの資料
を表示するようにしている。

【００１３】また、発表者の画像の動き、抑揚、および
音声を分析して戸惑っている場合に、支援となるメッセ
ージを表示するようにしている。また、視聴者の画像を
分析して注目度を算出して、発表者に知らせるようにし
ている。

【００１４】また、画像中から発表者の像を抽出して資
料と一緒に表示するようにしている。従って、発表者、
視聴者の感情を音声、画像処理によって認識してプレゼ
ンテーションに反映することにより、より効果的なプレ
ゼンテーションを行うことが可能となる。

【００１５】

【発明の実施の形態】次に、図１から図１０を用いて本
発明の実施の形態および動作を順次詳細に説明する。

【００１６】図１は、本発明のシステム構成図を示す。
図１において、カメラ１は、プレゼンテーションを行な
っている発表者の身体の動き、顔の表情、手足の動作な
どの画像を撮影するカメラである。

【００１７】カメラ２は、プレゼンテーションを視聴し
ている視聴者の顔の表情、視線の方向などを認識するた
めの画像、視聴者の挙手の状態などの画像を撮影するカ
メラである。

【００１８】マイク３は、発表者および視聴者の音声を
入力するものである。処理装置４は、各種処理を行なう
ものであって、カメラ１，２およびマイク３から入力さ
れた画像、音声をもとにプレゼンテーションの各種支援
を行なうものであり、１１ないし２３から構成されるも
のである。

【００１９】画像入力手段１１は、カメラ１，２からの
画像を取り込むものである。画像解析手段１２は、画像
入力手段１１によって取り込んだ画像を解析し、発表者
や視聴者の身体の動き、顔の表情、手足の動きなどを解
析するものである。

【００２０】感情解析手段１３は、画像解析手段１２に
よって解析された結果（例えば発表者の手先が特定方向
を指している、顔の動きが激しい、視聴者の顔が一定方
向を向いている、挙手の数の割合などの結果）をもと
に、発表者の感情や視聴者の応答状態を解析（推定）す
るものである。

【００２１】画像認識手段１３−１は、取り込んで画像
認識したイメージ（図形など）を抽出したり、文字列を
抽出したりなどするものである。資料解析手段１４は、
感情解析手段１３、画像認識手段１３−１で解析や認識
した結果をもとに、表示されているイメージや資料中の
イメージや文字列と一致するか、一致するときは一致す
る割合を算出したりなどするものである。

【００２２】記録手段１５は、資料解析手段１４などで
解析した結果を記録するものである。会場施設制御手段
１６は、プレゼンテーションを行なう会場の施設（ビデ
オ投影機、音声発声器、照明機器など）の制御を行なう
ものである。

【００２３】音声入力手段１７は、マイク３で聴取した
発表者および視聴者の音声を取り込むものである。音声
解析処理手段１８は、音声入力手段１７で取り込んだ音
声信号を解析し、音声の変化、大きさ、抑揚などを解析
するものである。

【００２４】感情解析手段１９は、音声解析処理手段１
８で解析された結果（音声の大きさ、変化、抑揚など）
をもとに、発表者や視聴者の感情（発表者が強調してい
る強調部である、視聴者の拍手が多くて感動している部
分であるなど）を解析するものである。

【００２５】音声認識手段２０は、音声の文字認識を行
なうものである。資料検索手段２１は、感情解析手段１
９および音声認識手段２０で解析、認識された結果をも
とに、プレゼンテーション中の資料（例えば表示中の画
像のイメージ、文字列）から一致するイメージや、文字
列を検索したり、一致した割合を算出したりなどするも
のである。

【００２６】資料等表示手段２２は、資料をスクリーン
上に表示したり、発表者の顔などを一緒に表示したりな
どするものである。資料蓄積手段２３は、資料等表示手
段２２で表示した資料などを蓄積するものである。

【００２７】次に、図２から図１０を用いて図１の構成
の動作を順次詳細に説明する。図２は、本発明の動作説
明フローチャートを示す。これは、図１の構成の動作を
説明するフローチャートである。

【００２８】図２において、Ｓ１は、プレゼンテーショ
ンを開始する。Ｓ２は、画像、音声の取り込みを行な
う。Ｓ３は、発表者の動作、音声の抽出を行なう。これ
らＳ１からＳ３は、プレゼンテーションを開始し、会場
のスクリーン上に資料を表示すると共に、発表者の画像
をカメラ１で撮影および視聴者の画像をカメラ２で撮影
して図１の処理装置４が取り込み、取り込んだ画像から
発表者の動作（顔の表情、身体全体、手足の変化などの
動作）を抽出、音声の抽出を行なう。

【００２９】Ｓ４は、強調を感知か判別する。これは、
Ｓ３の発表者の動作、音声の抽出結果（解析結果）をも
とに、強調部を感知（検出）か判別する。ＹＥＳの場合
には、Ｓ５で強調表現、例えば右側に記載した・文字、画像をフラッシュ・色を変化・ボリュームを変更・照明、ＢＧＭを変更などの強調表現を行なう。ここで、文字、画像をフラッ
シュは、スクリーン上に表示中の資料をフラッシュした
り、音声から抽出した文字列に一致する表示中の文字列
をフラッシュしたりして視聴者の注意を引くようにす
る。色の変化は、強調表示したい部分の色を変化させ
て、視聴者の注意を引くようにする。ボリュームの変更
は、発表者などの音声のボリュームを変更（例えば強調
部で大きく、他の場所で標準に戻す）を行なう。照明，
ＢＧＭを変更は、強調部のときに会場の照明を明るくし
たり、流れているＢＧＭの曲調を変更したりし、視聴者
の注意を引くようにする。そして、Ｓ６に進む。一方、
Ｓ４のＮＯの場合には、Ｓ６に進む。

【００３０】Ｓ６は、戸惑いや焦り感知か判別する。こ
れは、Ｓ３の発表者の動作、音声の抽出結果（解析結
果）をもとに、発表者の動作に戸惑いや焦りを感知か判
別する。ＹＥＳの場合には、Ｓ７で発表者が戸惑いある
いは焦りを感知したので、発表者補助機能を起動、例え
ば右側に記載した・アドバイスの表示・話題の提供・照明、ＢＧＭを変更などの補助を行なう。ここで、アドバイスの表示は、例
えば現在表示中の資料の説明資料や補助資料の表示など
のアドバイスを行なう。話題の提供は、例えば現在表示
中の資料に関する話題となる、資料を表示してアドバイ
スを行なう。照明、ＢＧＭを変更は、戸惑いや焦りを和
らげるように、照明を替えたり、流れているＢＧＭの曲
調を変更したりする。そして、Ｓ８に進む。一方、Ｓ６
のＮＯの場合には、Ｓ８に進む。

【００３１】Ｓ８は、画像、音声の認識処理を行なう。
発表者の画像の認識処理、および音声の文字認識処理を
行なう。Ｓ９は、発表の切れ目から判別する。これは、
Ｓ８で認識処理の結果をもとに、発表の切れ目（図６を
用いて後述）か判別する。ＹＥＳの場合には、Ｓ１０で
プレゼンテーションの表示を切り替える。これは、後述
する図６で説明するように、表示切り替え時点を検出し
たときに、Ｓ８の右側に記載したように・該当資料発見時切替・複数発見時サブネイル表示する。ここで、該当資料発見時切替は、切り替える次の
資料が１つのときは次の資料に切り替えて表示などす
る。複数発見時サブネイル表示は、切り替える次の資料
が複数あるときはそのサブネイルを表示し、選択された
１つの資料を表示するように切り替える。そして、Ｓ１
１に進む。一方、Ｓ９のＮＯの場合には、Ｓ１１に進
む。

【００３２】Ｓ１１は、キーワードが検索されたか判別
する。ＹＥＳの場合には、Ｓ１２で検索動作を起動し、・該当資料発見時切替・複数発見時サブネイル表示を行なう。ここで、該当資料発見時切替は、検索して見
つかったキーワードが１つのときはそのキーワードの資
料に切り替えて表示などする。複数発見時サブネイル表
示は、検索して見つかったキーワードの資料が複数ある
ときはそのサブネイルを表示し、選択された１つのキー
ワードの資料を表示するように切り替える。そして、Ｓ
１３に進む。一方、Ｓ１１のＮＯの場合には、Ｓ１３に
進む。

【００３３】Ｓ１３は、特徴指定の動作や言葉か判別す
る。ＹＥＳの場合には、Ｓ１４で検索動作を起動し、・該当資料発見時切替・複数発見時サブネイル表示を行なう。ここで、該当資料発見時切替は、検索して見
つかった特徴指定の動作、あるいは言葉の資料が１つの
ときは、その資料に切り替えて表示などする。複数発見
時サブネイル表示は、検索して見つかった特定指定の動
作あるいは言葉の資料が複数あるときはそのサブネイル
を表示し、選択された１つの特徴指定の動作あるいは言
葉の資料を表示するように切り替える。そして、Ｓ１５
に進む。一方、Ｓ１３のＮＯの場合には、Ｓ１５に進
む。

【００３４】Ｓ１５は、視聴者の動作、音声の抽出を行
なう。これは、カメラ２で撮影した視聴者の画像から視
聴者の動作を抽出、およびマイク３で受信した視聴者の
音声を抽出する。

【００３５】Ｓ１６は、視聴者状況をグラフ、数値で表
示する。例えば後述する図１０の（ｂ）の分析画面上の
視聴者反応のグラフを表示したり、数値で表示したりす
る。Ｓ１７は、特定値を越えたか判別する。ＹＥＳの場
合には、Ｓ１８で発表者保持機能を起動し、・アドバイス表示などを行なう。ここでは、アドバイス表示は、視聴者の
状況のグラフ、数値が特定値を越えたので、発表者にそ
の旨の情報およびアドバイスを表示する。そして、Ｓ１
９に進む。一方、Ｓ１７のＮＯの場合には、Ｓ１９に進
む。

【００３６】Ｓ１９は、発表者、視聴者の状況の抽出、
分析データの記録を行なう。これは、Ｓ１からＳ１８で
発表者、視聴者の抽出、分析したデータを記録して保存
する。

【００３７】以上のように、発表者、視聴者の画像、音
声、更に表示、音声出力した資料を解析し、発表者の動
作、視聴者の動作をもとに、プレゼンテーションの強調
部分を強調表示したり、切れ目のときに次の資料を表示
したり、キーワードや特定動作を検出したときに該当資
料の部分を強調表示したりし、視聴者の注意を引くプレ
ゼンテーションを行なうことが可能となる。以下順次説
明する。

【００３８】図３は、本発明の説明図（その１）を示
す。これは、図示のように、発表者が音声で強調した強
調部を検出して表示している部分を強調する場合のもの
である。

【００３９】（１）発表者が音声で「市場がポイント
です！」という部分を強調して発声する。（２）音声入力手段１７が（１）で発声された発表者
の音声を取り込む。

【００４０】（３）音声解析処理手段１８が（２）で
取り込んだ音声を解析したり、音声認識手段２０が音声
の文字認識し、資料解析手段１４が資料中の該当文字列
を解析したりなどする。

【００４１】（４）感情解析手段１９が（３）で解析
された結果（図示の音声の抑揚、音量、速度の時間に伴
う変化）をもとに、発表者の感情（ここでは、音声で強
調した強調部であるという感情表現）を解析する。

【００４２】（５）資料等表示手段２２がスクリーン
上に表示中の画像について、右上に示すように、表示フ
ラッシュ、反転表示などして強調部である旨の強調表示
したり、ＢＧＭを流したり、照明操作して強調部である
旨を表現したり、あるいは右下に示すように、スクリー
ンに表示中の資料のうちの該当するキーワードとなる文
字列（ここでは、「市場」）を単独強調表示（例えば文字
列「市場」をフラッシュ表示したり、明るく、特定色で表
示）したりする。

【００４３】以上によって、発表者の音声を入力して、
その声の音量、抑揚、速度などをもとに強く訴えている
強調部を分析し、強調部である場合には表示中の資料を
フラッシュして強調表示したり、色を変化させて強調表
示したりして視聴者の注意を引くようにしたり、ＢＧＭ
を流してその曲調を変化させて視聴者の注意を引くよう
にしたり、更に、音声を文字認識して表示中の資料内の
該当文字列（例えば「市場」）をフラッシュして強調表示
したり、該当文字列を拡大表示して強調表示したりして
視聴者の注意を引くようにしたりすることが可能とな
る。

【００４４】図４は、本発明の説明図（その２）を示
す。発表者の画像から・動作・位置変異・表情を抽出し、これらから発表者の感情を判断し、表示中の
資料に強調表示（資料をフラッシュ表示、該当部分を拡
大表示、該当文字列をフラッシュ表示など）を行なう。
ここで、動作は、発表者の画像から発表者の動きの速
さ、抑揚などを抽出したものである。位置変異は、会場
のいずれかの位置に変異したかを抽出する。表情は、発
表者の顔の画像から、その表情となる特徴（例えば口を
開けた表情、口を強く閉めた厳しい表情などの特徴）を
抽出する。

【００４５】以上のように、発表者の動作、位置変異、
表情を抽出し、これらをもとに既述した図３の右側に記
載した各種強調表示することが可能となる。図５は、本
発明の資料キーワードテーブル例を示す。これは、発表
者の音声などから抽出したキーワードに対応づけて次に
表示／発声する画像、音声を登録したテーブルである。
例えば既述した図２のＳ１１で発表者の音声から抽出し
た文字列のうち、図５の資料キーワードテーブルに登録
されているキーワードと一致したときに、内容欄に登録
されている画像、音声を表示したり、次の画像、音声に
切り替えたりする。

【００４６】以上のように、資料キーワードテーブルに
キーワードに対応づけて内容（画像、音声）を登録する
ことで、例えば既述した図２のＳ１１で発表者の音声か
ら認識した文字列（キーワード）が当該資料キーワード
テーブルに登録されているときに、自動的に該当する画
像、音声に切り替えて表示、発声したり、該当する画
像、音声を強調して表示、発声することが可能となる。

【００４７】図６は、本発明の説明図（その３）を示
す。ここで、上段の発表者の音声は、発表者が話をして
いる状態と、話の切れ目を示したものである。中段の発
表者の動きは、発表者の画像から抽出した発表者の動き
の大きい、小さいを示す。下段の資料との比較は、資料
を表示している様子を示し、右側の発表者の声および発
表者の動きが停止（あるいは少なく）なった時間が所定
時間経過したときに資料の切替タイミングとして判定し
た様子を示す。

【００４８】この図６は、発声者の音声、動き、資料と
比較する様子をイメージ的に示し、プレゼンテーション
中に資料の表示を切り替える場合、従来はコマンド（手
操作、音声指示などのコマンド）で行なっていたが、本
発明では、発表者の音声による発表の切れ目、画像中の
発表者の発表動作の切れ目などによる説明のインターバ
ルを．図示のように見つけて自動的に次の資料を表示、
音声出力する。

【００４９】また、次の資料への表示切替時には、音
声、ブザー音、表示点滅などで発表者および視聴者に知
らせる。この際、切替前に発表者から次の資料への切替
中止指示があったときは行なわない。

【００５０】また、資料の表示中は、発表者の音声認識
した文字列およびイメージと、資料との比較を行ない、
一致するものが所定以下で一致しない可能性が高いとき
には、発表者にその旨のメッセージを表示して注意を促
す。

【００５１】以上のように、発表者の音声の切れ目、発
表者の動作の切れ目をもとに次の資料へ切り替えて表示
したりなどすることが可能となる。図７は、本発明の説
明図（その４）を示す。これは、プレゼンテーション中
に発表者が音声でキーワードを発声して該当する資料を
表示させるものである。

【００５２】図７の（ａ）は、プレゼンテーションで資
料を表示中に発表者がモード切替指示（キーワード選択
への切替指示）を行なった状態を示す。この状態では、
図示のように、発表者が音声で、「キーワード選択」と発
声したことに対応して、音声認識して当該「キーワード
選択」と判明したときに、キーワード選択モード（キー
ワードで選択した資料を表示するモード）に切り替わ
る。

【００５３】図７の（ｂ）は、発表者がキーワード「市
場」を入力（音声入力、キーボード入力）する状態を示
す。入力されたキーワード「市場」を検出して全資料中か
ら当該キーワードの存在する資料を検索し、検索した結
果、１つの場合には、図示の、例えば市場動向グラフの
ように表示する。

【００５４】図７の（ｃ）は、図７の（ｂ）でキーワー
ド検索して２つ以上の資料が見つかったので、その資料
のサブネイルを表示した状態を示す。図７の（ｄ）は、
図７の（ｃ）で表示したサブネイルのうちの番号「２」を
発表者が発声して選択し、選択した資料「市場動向グラ
フ」を表示させた状態を示す。

【００５５】図７の（ｅ）は、図７の（ｃ）でサブネイ
ルを表示させた状態（あるいは複数の資料があるのみ表
示させた状態）で、更に、追加キーワード「動向」を音声
入力した状態を示す。この音声入力したキーワード「動
向」を含む資料がここでは、１つであったので右側に示
す、市場動向グラフを表示する。

【００５６】以上のように、キーワードを入力してキー
ワードを含む資料を検索し、１つのときはその資料を表
示し、複数のときはサブネイル表示して１つを選択して
その資料を表示したり、追加キーワードを入力して１つ
の資料を表示したりすることが可能となる。

【００５７】図８は、本発明の説明図（その５）を示
す。図８の（ａ）は、プレゼンテーションで表示されて
いる資料の例を示す。ここでは、資料には、文字列「市
場の三原則」と３つの○（丸のイメージ）が表示されて
いる。

【００５８】図８の（ｂ）は、図８の（ａ）の表示され
ている資料中のイメージを画像解析した例を示す。・丸×３・丸が三角配置・下向き三角形・目と口（○の配置が目と口に似ている）図８の（ｃ）は、発表者が「丸が３つある資料」と発声し
た様子を示す。この発表者の音声指示「丸が３つある資
料」を音声認識し、これのイメージを持つ資料を検索す
ると、図８の（ｂ）の資料の画像解析結果と一致するの
で当該資料を取り出して表示する様子を示す。

【００５９】図８の（ｄ）は、発表者が図示のように手
で逆三角形を作り、カメラで撮影した画像より当該逆三
角形を画像認識させる様子を示す。この画像認識した
「逆三角形」のイメージを含む資料として、ここでは、図
８の（ｂ）の画像解析した下向き三角形に一致するの
で、図８の（ａ）の資料を取り出して表示する様子を示
す。

【００６０】以上のように、発表者が音声でイメージ入
力あるいは手などでイメージを表現して画像認識させ、
そのイメージを含む資料を検索して表示することが可能
となる。

【００６１】図９は、本発明の説明図（その６）を示
す。図９の（ａ）は、表示中の資料の例を示す。ここで
は、資料「市場動向グラフ」を表示している。

【００６２】図９の（ｂ）は、発表者の実際の会場の例
を示す。ここでは、発表者が演壇で右手を挙げて説明し
ている。この発表者をカメラ１で撮影して発表者の画像
を切り出す。

【００６３】図９の（ｃ）は、図９の（ａ）の資料の右
下に、図９の（ｂ）で切り出した発表者の画像を一緒に
表示した状態を示す。これにより、視聴者は、資料と、
発表者とを交互に見て比較するために視線、更に首を動
かす必要がなくなり、資料を表示したスクリーンを見る
だけで当該資料と、演壇上の離れた位置の発表者の画像
とを一緒にみることができ、視線や頭を回す必要がなく
なる。

【００６４】以上によって、視聴者はプレゼンテーショ
ン中に表示された資料と、演壇上の発表者とを視線を交
互に移動させたり、頭を移動させたりする必要がなくな
り、資料に注視することが可能となる。これは、特に遠
隔地で資料と、発表者とを注視しながらプレゼンテーシ
ョンを視聴するときに役に立つものである。

【００６５】図１０は、本発明の説明図（プレゼンテー
ション分析）を示す。図１０の（ａ）は、フローチャー
トを示す。図１０の（ａ）において、Ｓ２１は、抽出、
分析を記録した情報を取り込む。

【００６６】Ｓ２２は、プレゼンテーション資料と並べ
てグラフ表示する。これらＳ２１，Ｓ２２は、後述する
図１０の（ｂ）に示すように、プレゼンテーションで表
示する資料に対応づけて、・記録時間／音声・強調度・戸惑い／あせり・視聴者反応・切れ目などを図示の上から順に示すようにグラフ表示する。こ
こで、横軸は時間であり、縦軸はそれぞれの大きさ、高
さ、強さなどである。

【００６７】Ｓ２３は、視覚的に状況分析して問題点や
よい点を検討する。Ｓ２２で表示した図１０の（ｂ）の
分析画面を視覚的に分析して問題点や、よい点を検討す
る。以上によって、図１から図９で説明した発表者、視
聴者の画像、音声、表示した資料をもとに解析した結果
を横軸を時間軸にして図１０の（ｂ）に示すように分析
結果をまとめて表示し、視覚的にプレゼンテーションの
問題点や、よい点を容易に解析することが可能となる。

【００６８】

【発明の効果】以上説明したように、本発明によれば、
発表者、視聴者の感情を音声、画像処理によって認識し
てプレゼンテーションに反映する構成を採用しているた
め、より効果的なプレゼンテーションを行うことができ
ると共に、視聴者の注意を引いたプレゼンテーションに
仕立てることができる。

【図面の簡単な説明】

【図１】本発明のシステム構成図である。

【図２】本発明の動作説明フローチャートである。

【図３】本発明の説明図（その１）である。

【図４】本発明の説明図（その２）である。

【図５】本発明の資料キーワードテーブル例である。

【図６】本発明の説明図（その３）である。

【図７】本発明の説明図（その４）である。

【図８】本発明の説明図（その５）である。

【図９】本発明の説明図（その６）である。

【図１０】本発明の説明図（プレゼンテーション分析）
である。

【符号の説明】

１、２：カメラ３：マイク４：処理装置１１：画像入力手段１２：画像解析処理手段１３：感情解析手段１３−１：画像認識手段１４：資料解析手段１５：記録手段１６：会場施設制御手段１７：音声入力手段１８：音声解析処理手段１９：感情解析手段２０：音声認識手段２１：資料検索手段２２：資料等表示手段２３：資料蓄積手段

───────────────────────────────────────────────────── フロントページの続きＦターム(参考） 5C082 AA03 AA21 AA27 AA31 CA82 CB01 DA87 MM08 MM10 5E501 AA01 AC14 BA09 CA08 CB14 CB15 EA21 EA32 EB05 FA23 FB44

Claims

【特許請求の範囲】

【請求項１】プレゼンテーションを行なうシステムにお
いて、プレゼンテーション実施時に発表者の音声を入力する手
段と、上記入力した音声の大きさおよび抑揚を分析する手段
と、上記分析して音声の大きいあるいは抑揚の大きい強調部
である場合にプレゼンテーション中の画面を強調表示、
あるいは注意を引く音声を発声する手段とを備えたこと
を特徴とするプレゼンテーションシステム。
【請求項２】上記強調部である場合に入力された音声を
音声認識して表示されている該当部分を強調表示する手
段を備えたことを特徴とする請求項１記載のプレゼンテ
ーションシステム。
【請求項３】プレゼンテーションを行なうシステムにお
いて、プレゼンテーション実施時に発表者の画像を入力する手
段と、上記入力した画像中の発表者像の動作あるいは表情を分
析する手段と、上記分析して発表者像の動作が大きいあるいは表情の変
化のある強調部である場合にプレゼンテーション中の画
面を強調表示、あるいは注意を引く音声を発声する手段
とを備えたことを特徴とするプレゼンテーションシステ
ム。
【請求項４】上記強調部である場合に表示されている部
分を強調表示する手段を備えたことを特徴とする請求項
３記載のプレゼンテーションシステム。
【請求項５】入力した音声を分析して発表の切れ目の場
合に、次の資料を表示する手段を備えたことを特徴とす
る請求項１から請求項４のいずれかに記載のプレゼンテ
ーションシステム。
【請求項６】入力した音声を分析して表示中の文字列と
比較して不一致が多いときに警告を発する手段を備えた
ことを特徴とする請求項１から請求項５のいずれかに記
載のプレゼンテーションシステム。
【請求項７】入力した音声を認識して指定された資料が
１つのときにその資料を表示し、複数のときに資料一覧
を表示してその中から１つを選択あるいは指定されたキ
ーワードの資料を表示する手段を備えたことを特徴とす
る請求項１から請求項６のいずれかに記載のプレゼンテ
ーションシステム。
【請求項８】入力した音声を認識して該当イメージの資
料を検索し、検索された資料が１つのときにその資料を
表示し、複数のときに資料一覧を表示してその中から１
つを選択あるいは指定された該当イメージの資料を表示
する手段を備えたことを特徴とする請求項１から請求項
６のいずれかに記載のプレゼンテーションシステム。
【請求項９】発表者の画像の動き、抑揚、および音声を
分析して戸惑っている場合に、支援となるメッセージを
表示する手段を備えたことを特徴とする請求項１から請
求項６のいずれかに記載のプレゼンテーションシステ
ム。
【請求項１０】視聴者の画像を分析して注目度を算出し
て、発表者に知らせる手段を備えたことを特徴とする請
求項１から請求項９のいずれかに記載のプレゼンテーシ
ョンシステム。
【請求項１１】画像中から発表者の像を抽出して資料と
一緒に表示する手段を備えたことを特徴とする請求項１
から請求項１０のいずれかに記載のプレゼンテーション
システム。
【請求項１２】画像中から視聴者の像の挙手などの特定
動作の割合を検出して表示する手段を備えたことを特徴
とする請求項１から請求項１１のいずれかに記載のプレ
ゼンテーションシステム。
【請求項１３】プレゼンテーション実施時に発表者の音
声を入力する手段と、上記入力した音声の大きさおよび抑揚を分析する手段
と、上記分析して音声の大きいあるいは抑揚の大きい強調部
である場合にプレゼンテーション中の画面を強調表示、
あるいは注意を引く音声を発生する手段として機能させ
るプログラムを記録したコンピュータ読取可能な記録媒
体。
【請求項１４】プレゼンテーション実施時に発表者の画
像を入力する手段と、上記入力した画像中の発表者像の動作あるいは表情を分
析する手段と、上記分析して発表者像の動作が大きいあるいは表情の変
化のある強調部である場合にプレゼンテーション中の画
面を強調表示、あるいは注意を引く音声を発生する手段
として機能させるプログラムを記録したコンピュータ読
取可能な記録媒体。