JP2010107593A - プレゼンテーション画像の提示システム、提示方法、提示プログラム及びその記録媒体 - Google Patents

Abstract

【課題】提示情報に対する聞き手の集中度合いを効果的に制御すると共に、聞き手の注目先を提示情報と話し手との間で効果的に切り替えられるようにして、プレゼンテーションの効果を高める。
【解決手段】スクリーンとその周辺の背景部分を撮像した背景画像データを予め記憶しておき、この背景画像データのスクリーン画像上に、資料操作端末ＴＭ１から送られる資料画像データを、その中心がスクリーン画像の中心と一致するように位置合わせして重畳することで、投影画像データを生成する。そして、スクリーン操作端末ＴＭ２に設けたズームインボタン１８１又はズームアウトボタン１８２が発表者ＵＳにより操作された場合に、上記投影画像データを所定の時間変化率で拡大又は縮小処理し、この拡大又は縮小処理された投影画像データをプロジェクタＰＪに供給してスクリーンＳＣに投影する。
【選択図】 図２

Description

この発明は、例えば会議室において会議資料等のプレゼンテーション画像をプロジェクタを使用して参加者に提示する提示システム、提示方法、提示プログラム及びその記録媒体に関する。

一般に会議では、会議資料等の画像をプロジェクタによりスクリーンに投影しながら、話し手がプレゼンテーションを行う形態が多く用いられる。この種の会議では、会議参加者や聴衆等の聞き手の注目を会議資料等のプレゼンテーション画像に集めるために、プレゼンテーション画像をズームインしたり、レーザポインタを用いてスクリーン上を指示する手法がよく用いられる。しかしながら、このような手法はその操作のすべてが聞き手の注目をプレゼンテーション画像に向けさせるものであるため、聞き手は常に緊張を強いられることになり、これがかえって提示情報に対する集中を保ちにくくさせ、理解度を低下させる一因になっている。

そこで最近では、聞き手が自身の端末を用いて、分からない点や興味を持った点をサーバ装置に送り、サーバ装置が聞き手の端末から送られた情報を蓄積して、必要に応じ話し手の端末に表示させるシステムが提案されている（例えば、特許文献１を参照。）。このシステムを用いると、プレゼンテーション中に聞き手が興味のある話題を選択してその情報を話し手にフィードバックすることができ、この情報をもとに話し手が話し方や話の内容を変化させることで、プレゼンテーションの効果を高めることが可能となる。

ところが、上記システムは常に聞き手に対し興味のある話題の選択操作を要求するため、聞き手はプレゼンテーションに集中しにくくなる。また話し手は、聞き手からのフィードバック情報を常に意識しなければならないため、自身の話のペースや、本来強調したかった話題や予定していた話の流れを乱されるという問題が発生する。

特開２０００−２００２３７号公報

以上のように、プレゼンテーションの効率を上げるために従来より実施又は提案されている手法は、提示情報に対し聞き手を注目させる方向のみの工夫だったり、プレゼンテーション中に聞き手が興味のある話題を話し手にフィードバックして話し手がこのフィードバックされた情報を参考に話題等を変化させるものとなっている。このため、聞き手が常に緊張を強いられたり、聞き手と話し手が共にプレゼンテーションに集中し難くなり、その結果期待するプレゼンテーション効果が得られなくなるという問題点があった。

この発明は上記事情に着目してなされたもので、その目的とするところは、提示情報に対する聞き手の集中度合いを効果的に制御すると共に、聞き手の注目先を提示情報と話し手との間で効果的に切り替えられるようにして、プレゼンテーションの効果を高めることが可能なプレゼンテーション画像提示システム、方法、プログラム及びその記録媒体を提供することにある。

上記目的を達成するためにこの発明の一観点は、スクリーンとその周辺部とを含む背景画像データを記憶するメモリを備え、このメモリから背景画像データを読み出し、この読み出された背景画像データのスクリーン画像領域に、プレゼンテーションに使用する資料画像データを、その中心点がスクリーン画像の中心点と一致するように位置合わせして重畳することにより、投影画像データを生成する。そして、この生成された投影画像データを、そのスクリーン画像領域の中心を起点に拡大又は縮小し、この拡大又は縮小された投影画像データを上記スクリーンに投影させるように構成したものである。

したがって、資料画像だけでなくスクリーンとその周辺を含む背景全体が、仮想的に近づいたり遠ざかったりするように聴衆に知覚させることができ、これにより資料画像に対する聴衆の集中と緩和を効果的に制御することが可能となると共に、聞き手の注目先を提示情報と話し手との間で効果的に切り替えることが可能となって、プレゼンテーション効果をより高めることができる。

この発明の一観点は、以下のような各種具体的な態様をさらに備えることを特徴とする。
第１の態様は、上記投影画像データを拡大又は縮小する際に、上記プレゼンテーションを行う発表者の手動による拡大又は縮小操作を受け付け、この受け付けた拡大又は縮小操作に応じて、上記生成された投影画像データをそのスクリーン画像領域の中心を起点に拡大又は縮小処理するものである。
このようにすると、上記投影画像データの拡大又は縮小処理が発表者の手動操作により制御される。このため、発表者の意志を直接反映させたかたちで投影画像の仮想的な遠近制御を実現できる。

第２の態様は、上記投影画像データを拡大又は縮小する際に、上記プレゼンテーションを行う発表者の上記スクリーンに対する指示操作の有無を判定し、この指示操作の有無の判定結果に応じて上記投影画像データを拡大又は縮小処理するものである。
このようにすると、発表者がスクリーンに対し指示操作を行うと投影画像データが自動的に拡大され、一方発表者がスクリーンに対する指示操作を行わないと投影画像データが自動的に縮小される。このため、発表者は投影画像データの拡大又は縮小操作を別途行う必要がなくなり、これによりプレゼンテーションに対し意識をより集中することが可能となる。

すなわちこの発明の一観点によれば、提示情報に対する聞き手の集中度合いを効果的に制御できるようになり、さらに聞き手の注目先を提示情報と話し手との間で効果的に切り替えられるようになり、これによりプレゼンテーションの効果をさらに高めることが可能なプレゼンテーション画像の提示システム、提示方法、提示プログラム及びその記録媒体を提供することができる。

以下、図面を参照してこの発明の実施形態を説明する。
（第１の実施形態）
図１は、この発明の第１の実施形態に係わるプレゼンテーション画像提示システムの概略構成図である。
第１の実施形態に係わるシステムは、資料操作端末ＴＭ１と、この資料操作端末ＴＭ１に対し例えばＬＡＮ（Local Area Network）ケーブルＬＣを介して接続されるスクリーン操作端末ＴＭ２と、このスクリーン操作端末ＴＭ２に対し信号ケーブルを介して接続されるプロジェクタＰＪとを備えたものである。

資料操作端末ＴＭ１はパーソナル・コンピュータからなり、発表者ＵＳが操作可能な位置に設置されている。資料操作端末ＴＭ１には、プレゼンテーションに使用する資料が電子データ化されてメモリに記憶されている。資料操作端末ＴＭ１は、発表者による資料選択操作及びそのページ捲り操作を監視し、この操作が検出されるごとに当該操作により選択された資料の電子データをメモリから読み出す。そして、この読み出された資料の電子データ（例えばＰＮＧファイル）を、例えば１秒間隔でＬＡＮケーブルＬＣを介してスクリーン操作端末ＴＭ２へ送信する。

スクリーン操作端末ＴＭ２もパーソナル・コンピュータからなり、上記資料操作端末ＴＭ１と同様に発表者ＵＳが操作可能な位置に設置されている。スクリーン操作端末ＴＭ２はこのシステムの中核をなすもので、次のように構成される。図２はそのハードウエア及びソフトウエアの構成を示すブロック図である。

スクリーン操作端末ＴＭ２は、中央処理ユニット（ＣＰＵ；Central Processing Unit）１１を備え、このＣＰＵ１１にはバス１２を介してプログラムメモリ１３及びデータメモリ１４が接続され、さらに通信インタフェース１５と、プロジェクタインタフェース１６と、入出力インタフェース１７が接続されている。

通信インタフェース１５は、ＣＰＵ１１の制御の下で、資料操作端末ＴＭ１から資料画像データを受信するための通信処理を行う。資料操作端末ＴＭ１との間がＬＡＮケーブルＬＣを介して接続される場合、通信プロトコルとしては例えばＴＣＰ／ＩＰ（Transmission Control Protocol／Internet Protocol）が使用される。

プロジェクタインタフェース１６には、信号ケーブルを介してプロジェクタＰＪが接続される。プロジェクタインタフェース１６は、ＣＰＵ１１の制御の下、生成された投影画像データを信号ケーブルを介してプロジェクタＰＪへ供給する。プロジェクタＰＪは、上記プロジェクタインタフェース１６から供給された投影画像データに対応する光学像を生成し、この光学像をスクリーンＳＣに投影する。

入出力インタフェース１７には、入力デバイス１８及び表示デバイス１９が接続される。入力デバイス１８は、例えばキーボードにより構成される。キーボードの各キーのうち例えばカーソルの上下キーには、それぞれ投影画像をズームインさせるときに操作するズームインボタン１８１としての機能と、投影画像をズームアウトさせるときに操作するズームアウトボタン１８２としての機能が割り当てられる。また、例えばエンターキーにはズームイン及びズームアウト動作を停止させるときに操作する停止ボタン１８３としての機能が割り当てられる。入出力インタフェース１７は、上記各機能ボタン１８１〜１８３の操作を検出してＣＰＵ１１に伝える。なお、表示デバイス１９は、上記投影画像を表示するために用いられる。

データメモリ１４には、この発明を実施するために必要な記憶領域として、背景・スクリーン画像記憶部１４１と、資料画像記憶部１４２が設けられている。背景・スクリーン画像記憶部１４１には、予めカメラで撮像したスクリーンＳＣとその周辺の壁や天井等を含む背景画像のデータが格納される。資料画像記憶部１４２は、資料操作端末ＴＭ１から送られた資料画像データを一時保存するために使用される。

プログラムメモリ１３には、この発明の第１の実施形態を実施するために必要なアプリケーション・プログラムとして、投影画像生成プログラム１３１と、拡大／縮小制御プログラム１３２が格納されている。

投影画像生成プログラム１３１は、以下の処理をＣＰＵ１１に実行させる。
(1) 資料操作端末ＴＭ１から送信される資料画像データが通信インタフェース１５により受信されるごとに、当該受信された資料画像データをデータメモリ１４内の資料画像記憶領域１４２に記憶させる処理。

(2) 例えば２秒間隔で、背景・スクリーン画像記憶部１４１からスクリーンＳＣとその周辺の壁等を含む背景画像のデータを読み出し、この背景画像データのスクリーン画像領域に、上記受信された最新の資料画像データを両者の中心点を一致させた状態で重畳することにより、投影画像データを生成する処理。

(3) 上記生成された投影画像データを、後述する拡大／縮小制御プログラム１３２から倍率制御データにより与えられる倍率に従い拡大／縮小処理し、この拡大／縮小処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる処理。

拡大／縮小制御プログラム１３２は、入力デバイス１８においてズームインボタン１８１又はズームアウトボタン１８２が操作された場合に、その操作時点から停止ボタン１８３が操作されるまでの経過時間に応じて上記投影画像の倍率を可変制御するための倍率制御データを生成し、この倍率制御データを上記投影画像生成プログラム１３１に与える処理を、上記ＣＰＵ１１に実行させる。

次に、以上のように構成されたシステムによるプレゼンテーション画像の提示動作を説明する。図３は、資料操作端末ＴＭ１及びスクリーン操作端末ＴＭ２による処理手順と処理内容を示すフローチャートである。
なお、スクリーン操作端末ＴＭ２の背景・スクリーン画像記憶部１４１には、スクリーンＳＣとその周辺の壁や天井等を含む背景をビデオカメラにより撮像した画像データが予め記憶されているものとして説明を行う。

資料操作端末ＴＭ１において、発表者ＵＳがプレゼンテーションに使用する資料の提示開始操作又はページ捲り操作を行ったとする。資料操作端末ＴＭ１は、上記操作をステップＳ３１で検出すると、ステップＳ３２において上記操作に応じて資料に対するオペレーション処理を行う。例えば、操作の種類が資料提示開始操作であれば、当該操作により指定された資料の１ページ目の画像データをメモリから選択的に読み出す。一方、操作の種類がページ捲り操作であれば、選択中の資料の次ページ又は前ページの画像データをメモリから読み出す。そして資料操作端末ＴＭ１は、ステップＳ３３において、上記読み出された資料画像データを例えば１秒間隔でＬＡＮケーブルＬＣを介してスクリーン操作端末ＴＭ２へ送信する。

一方、スクリーン操作端末ＴＭ２は以下のような処理を行う。すなわち、上記資料操作端末ＴＭ１から資料画像データが送信されると、ＣＰＵ１１はこの資料画像データをステップＳ３４により通信インタフェース１５を介して受信して、データメモリ１４内の資料画像記憶部１４２に保存する。以後、資料操作端末ＴＭ１から資料画像データが送られるごとに、資料画像記憶部１４２に保存された資料画像データを更新する。すなわち、資料操作端末ＴＭ１は先に述べたように１秒間隔で資料画像データを送信するので、資料画像記憶部１４２に保存された資料画像データは１秒間隔で更新される。

またＣＰＵ１１は、ステップＳ４４において、２秒間隔で背景・スクリーン画像記憶部１４１から背景画像データを読み出す。そして、上記読み出した背景画像データのスクリーン画像領域に、上記ステップＳ３４により受信し保存した最新の資料画像データを資料画像記憶部１４２から読み出して重畳し、投影画像データを生成する。このとき、上記スクリーン画像の中心と資料画像の中心とが一致するように、スクリーン画像に対する資料画像データの重畳位置が調整される。

続いてＣＰＵ１１は、上記生成された投影画像データを、拡大・縮小制御プログラム１３２により指定される倍率に従い、ステップＳ３６により拡大／縮小処理する。そして、この拡大／縮小処理された投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。なお、このとき投影画像の倍率の初期値は、例えば予め定めた中間的な値に設定される。このため、上記投影画像データは上記中間的な倍率に応じたサイズに調整されたのち、プロジェクタＰＪへ出力される。この結果、スクリーンＳＣには、上記中間的なサイズに設定された資料画像が背景画像と共に投影される。

さて、以上のように中間的なサイズに設定された資料画像がスクリーンＳＣ２投影されている状態で、スクリーン操作端末ＴＭ２において発表者ＵＳが例えばズームインボタン１８１を押下したとする。このとき、スクリーン操作端末ＴＭ１のＣＰＵ１１は、ステップＳ３７、ステップＳ３８及びステップＳ３９においてそれぞれズームインボタン１８１、ズームアウトボタン１８２及び停止ボタン１８３の操作を監視しており、上記ズームインボタン１８１の操作を検出すると、ステップＳ４１に移行して投影画像データの倍率を所定の時間変化率で拡大させるための倍率制御データを生成する。

そしてＣＰＵ１１は、ステップＳ４４、Ｓ３４及びＳ３５により生成された投影映像データを、上記倍率制御データにより与えられる倍率に従いステップＳ３６で拡大処理し、この拡大処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。このとき、上記拡大処理はスクリーン画像及び資料画像の中心点を起点に行われる。したがって、スクリーンＳＣに表示される投影画像は、スクリーン画像の中心点を起点として所定の時間変化率でズームインされる。そして、投影画像の倍率が予め設定された最大倍率に達するか、又は上記ズームインの途中で発表者ＵＳが停止ボタン１８３を押下すると、上記投影画像のズームインは停止される。

図４は、上記最大倍率に達したときの投影画像の一例を示すものである。同図に示すように、スクリーンＳＣには最大倍率に拡大されたスクリーン画像ＩＭ２及び資料画像ＩＭ１が投影される。すなわち、仮想的なスクリーンＩＭ２上に資料画像ＩＭ１が投影された画像が投影される。したがって、聴衆に対し、ズームインによりスクリーンがあたかも近づいてきた（寄ってきた）ように知覚させることができ、これにより聴衆に対し資料画像ＩＭ１を強調し、注目させることが可能となる。

一方、この状態で、スクリーン操作端末ＴＭ２において発表者ＵＳがズームアウトボタン１８２を押下したとする。そうすると、スクリーン操作端末ＴＭ２のＣＰＵ１１は、上記ズームアウトボタン１８２の操作をステップ３８で検出すると、ステップＳ４２に移行して、投影画像データの倍率を所定の時間変化率で縮小させるための倍率制御データを生成する。

そしてＣＰＵ１１は、ステップＳ４４、Ｓ３４及びＳ３５により生成された投影映像データを、上記倍率制御データにより与えられる倍率に従いステップＳ３６で縮小処理し、この縮小処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。このとき、上記縮小処理は、先に述べた拡大処理の場合と同様にスクリーン画像及び資料画像の中心点を起点に行われる。したがって、スクリーンＳＣに表示される投影画像は、スクリーン画像の中心点を起点として所定の時間変化率でズームアウトされる。そして、投影画像の倍率が予め設定された最小倍率に達するか、又は上記ズームインの途中で発表者ＵＳが停止ボタン１８３を押下すると、上記投影画像のズームアウトは停止される。

図５は、上記最小倍率に達したときの投影画像の一例を示すものである。同図に示すように、スクリーンＳＣの中央部には最小倍率に設定されたスクリーン画像ＩＭ２及び資料画像ＩＭ１が投影され、さらにその周辺部には壁や天井、椅子等の背景を表す画像ＩＭ３が投影される。すなわち、仮想的な背景ＩＭ３をバックに仮想的なスクリーンＩＭ２上に資料画像ＩＭ１が表示された画像が投影される。したがって、聴衆に対し、ズームアウトによりスクリーンがあたかも遠ざかった（引いた）ように知覚させることができ、これにより資料画像ＩＭ１に対する聴衆の集中を緩和すると共に、資料画像ＩＭ１に対する聴衆の注目を自然に外して注目を発表者ＵＳへと向けさせることができる。

なお、投影する背景画像の色を、スクリーン又は壁等の実際の背景の表面色に極力近づけるようにすると、上記ズームアウトした場合に投影画像中の仮想的な背景と実際の背景とが空間的に一体化して繋がったように聴衆に知覚させることができ、これによりスクリーンの奥行き方向への動きを知覚させやすくなって、プレゼンテーションに対する聴衆の没入感を高めることが可能となる。また、投影画像の投影面を大きくすればするほど、壁全体が奥行き方向に移動するように聴衆に知覚させることができ、これにより没入感をさらに高めることができる。
また、上記背景画像ＩＭ３を生成する際に、コンピュータグラフィックスの３次元立体表示技術により立体的な仮想表示を実現してもよいし、室内を撮影した写真を２次元的に拡大／縮小することにより擬似的に立体的な表現を実現してもよい。

なお、上記投影画像がズームアウトされた状態で、発表者ＵＳが再びズームインボタン１８１を押下したとする。そうすると、ＣＰＵ１１はステップＳ３７からステップＳ４１に移行して投影画像データの倍率を所定の時間変化率で拡大させるための倍率制御データを生成する。そしてＣＰＵ１１は、投影画像生成プログラム１３１に従い、ステップＳ４４、Ｓ３４及びＳ３５により生成された投影映像データを、上記倍率制御データにより与えられる倍率に従いステップＳ３６で拡大処理し、この拡大処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。

したがって、スクリーンＳＣに表示される投影画像は、スクリーン画像の中心点を起点として所定の時間変化率で再びズームインされる。そして、投影画像の倍率が予め設定された最大倍率に達するか、又は上記ズームインの途中で発表者ＵＳが停止ボタン１８３を押下すると、上記投影画像のズームインは停止される。

以上述べたように第１の実施形態では、スクリーン操作端末ＴＭ２において、スクリーンとその周辺の背景部分を撮像した背景画像データを背景・スクリーン画像記憶部１４１に予め記憶しておき、この背景画像データのスクリーン画像領域に、資料操作端末ＴＭ１から送られる資料画像データを、その中心点がスクリーン画像の中心点と一致するように位置合わせして重畳することで、投影画像データを生成する。そして、スクリーン操作端末ＴＭ２に設けたズームインボタン１８１又はズームアウトボタン１８２が発表者ＵＳにより操作された場合に、上記投影画像データを所定の時間変化率で拡大又は縮小処理し、この拡大又は縮小処理された投影画像データをプロジェクタＰＪに供給してスクリーンＳＣに投影するようにしている。

したがって、発表者ＵＳのズーム操作に応じて、資料画像だけでなくスクリーン及びその周囲の背景全体が仮想的に近づいたり遠ざかったりするように聴衆者に知覚させることができ、これにより資料画像に対する聴衆の集中と緩和を効果的に制御することが可能となり、さらに聞き手の注目先を提示情報と話し手との間で効果的に切り替えることが可能となる。また、上記投影画像データの拡大／縮小処理を、発表者ＵＳの手操作により制御するようにしているので、発表者ＵＳの意志を直接反映させた制御を実現できる。

（第２の実施形態）
この発明の第２の実施形態は、プレゼンテーション中の発表者の挙動をビデオカメラで撮像して、その撮像画像からスクリーンに対する発表者の指示操作の有無を判定し、この指示操作の有無の判定結果に応じて投影画像データの拡大／縮小処理を制御するようにしたものである。

図６は、この発明の第２の実施形態に係わるプレゼンテーション画像提示システムの概略構成図である。なお、同図において前記図１と同一部分には同一符号を付して説明を行う。
第２の実施形態に係わるシステムでは、発表者ＵＳの垂直上方となる位置にビデオカメラＣＭが配置してある。このビデオカメラＣＭは、プレゼンテーション中に発表者ＵＳの挙動をその垂直上方から撮像するもので、その撮像画像データを一定の時間間隔（例えば１秒）でスクリーン操作端末ＴＭ２に送る。なお、ビデオカメラＣＭとスクリーン操作端末ＴＭ２との間は、ＬＡＮケーブルを介して接続してもよいし、一般的な画像用信号ケーブルを用いて接続するようにしてもよい。

スクリーン操作端末ＴＭ２は、以下のように構成される。図７はそのハードウエア及びソフトウエアの構成を示すブロック図である。なお、同図において前記図２と同一部分には同一符号を付して詳しい説明は省略する。

スクリーン操作端末ＴＭ２は、先に述べた通信インタフェース１５及びプロジェクタインタフェース１６に加え、カメラインタフェース２０を備えている。このカメラインタフェース２０には上記ビデオカメラＣＭが接続される。カメラインタフェース２０は、上記ビデオカメラＣＭから出力される発表者ＵＳの撮像画像データを受信する。

プログラムメモリ１３には、この発明の第２の実施形態を実施するために必要なアプリケーション・プログラムとして、先に述べた投影画像生成プログラム１３１と、拡大／縮小制御プログラム１３２に加え、指示操作判定プログラム１３３が格納されている。

指示操作判定プログラム１３３は、以下の処理を上記ＣＰＵ１１に実行させる。
(1) 上記カメラインタフェース２０により受信された発表者ＵＳの撮像画像データを、データメモリ１４内に設けた撮像画像記憶部（図示せず）に保存させる処理。
(2) 上記保存された撮像画像データに対し画像認識処理を行って、当該撮像画像データ中から発表者ＵＳの輪郭を表す画像領域を認識する。そして、この認識した画像領域を囲む最小の長方形（バウンディングボックス）を求め、このバウンディングボックスの面積と当該バウンディングボックス内における画像領域の重心位置とをもとに、発表者ＵＳがスクリーンＳＣを指示しているか否かを判定する処理。なお、上記画像認識処理は、ＣＰＵ１１のソフトウエア処理により実現する以外に、ＤＳＰ（Digital Signal Processor）等の画像処理ＬＳＩにより実現することも可能である。

拡大／縮小制御プログラム１３２は、上記指示操作判定プログラム１３３による判定結果に基づいて以下のような処理を、上記ＣＰＵ１１に実行させる。
(1) 上記指示操作判定プログラム１３３により発表者ＵＳがスクリーンＳＣを指示していると判定された場合に、投影画像のサイズを予め設定した最大値に拡大させるための倍率制御データを生成して上記投影画像生成プログラム１３１に与える処理。

(2) 上記指示操作判定プログラム１３３により発表者ＵＳがスクリーンＳＣを指示していない状態が２０秒続いた場合に、投影中の投影画像サイズが最大サイズか又はその３／４のサイズかを判定する処理。

(3) (2) の判定処理により、投影中の投影画像サイズが最大サイズと判定された場合に、投影画像のサイズを３／４に縮小させるための倍率制御データを生成して上記投影画像生成プログラム１３１に与える処理。

(4) (2) の判定処理により、投影中の投影画像サイズが３／４と判定された場合には、投影画像のサイズを２／４にさらに縮小させるための倍率制御データを生成して上記投影画像生成プログラム１３１に与える処理。

投影画像生成プログラム１３１は、背景画像データのスクリーン画像領域にその時点で最新の資料画像データを重畳することにより生成された投影画像データを、上記拡大／縮小制御プログラム１３２から倍率制御データにより与えられる倍率に従い拡大／縮小処理する。そして、この拡大／縮小処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる処理を、上記ＣＰＵ１１に実行させる。

次に、以上のように構成されたシステムによるプレゼンテーション画像の提示動作を説明する。図８は、資料操作端末ＴＭ１及びスクリーン操作端末ＴＭ２による処理手順と処理内容を示すフローチャートである。なお、同図においても前記図３と同一部分には同一符号を付して説明を行う。

資料操作端末ＴＭ１から資料画像データが送信されると、ＣＰＵ１１はこの資料画像データをステップＳ３４により通信インタフェース１５を介して受信して、データメモリ１４内の資料画像記憶部１４２に保存する。以後、資料操作端末ＴＭ１から資料画像データが送られるごとに、資料画像記憶部１４２に保存された資料画像データを更新する。

またＣＰＵ１１は、ステップＳ４４において、２秒間隔で背景・スクリーン画像記憶部１４１から背景画像データを読み出す。そして、上記読み出した背景画像データのスクリーン画像領域に、上記ステップＳ３４により受信し保存した最新の資料画像データを資料画像記憶部１４２から読み出して重畳し、投影画像データを生成する。このとき、上記スクリーン画像の中心点と資料画像の中心点とが一致するように、スクリーン画像に対する資料画像データの重畳位置が調整される。

続いてＣＰＵ１１は、上記生成された投影画像データを、拡大・縮小制御プログラム１３２により指定される倍率に従い、ステップＳ３６により拡大／縮小処理する。そして、この拡大／縮小処理された投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。なお、このとき投影画像の倍率の初期値は、例えば予め定めた中間的な値に設定される。このため、上記投影画像データは上記中間的な倍率に応じたサイズに調整されたのち、プロジェクタＰＪへ出力される。この結果、スクリーンＳＣには、上記中間的なサイズに設定された資料画像が背景画像と共に投影される。

さて、以上のように資料画像がスクリーンＳＣに投影されている状態で、ＣＰＵ１１は指示操作判定プログラム１３３に従い、以下のような処理を実行する。
すなわち、プレゼンテーション中の発表者ＵＳの挙動がその垂直上方においてビデオカメラＣＭ２より撮像され、その撮像画像データが１秒間隔でスクリーン操作端末ＴＭ２へ送られる。スクリーン操作端末ＴＭ２のＣＰＵ１１は、上記ビデオカメラＣＭから送られる発表者ＵＳの撮像画像データがカメラインタフェース２０で受信されるごとに、この受信された撮像画像データをデータメモリ１４内に設けた撮像画像記憶部に保存させる。

次にＣＰＵ１１は、ステップ８１において、上記保存された撮像画像データに対し画像認識処理を行って、当該撮像画像データ中から発表者ＵＳの輪郭を表す画像領域を認識し、この認識した画像領域を囲む最小の長方形（バウンディングボックス）を求める。例えば、図９に示すように発表者ＵＳの輪郭を表す画像領域Ｅ１が検出されたとすると、ＣＰＵ１１はこの検出された画像領域Ｅ１を囲む最小のバウンディングボックスＢＢを設定する。

続いてＣＰＵ１１は、上記バウンディングボックスＢＢの面積を計算し、算出された面積を予め設定したしきい値（例えば、発表者ＵＳが指示操作を行っていないときの面積の１．５倍に設定）と比較する。そして、上記算出されたバウンディングボックスＢＢの面積が上記しきい値を超えた場合に発表者ＵＳは何らかの指示操作を行ったと判定し、超えていない場合には発表者ＵＳは指示操作を行っていないと判定する。

さらにＣＰＵ１１は、上記発表者ＵＳの指示操作がスクリーンＳＣに対するものか否かを以下のように判定する。
すなわち、図１１に示すように先ず発表者ＵＳの画像領域Ｅ１の重心Ｇを検出する。次に、バウンディングボックスＢＢの４個の角領域Ａ〜Ｄのうち、先ず発表者ＵＳの画像領域Ｅ１を含む領域を選択し、次にこの選択された角領域の中から上記検出された重心Ｇから最も遠い角領域Ａを発表者ＵＳの手の位置として選択する。続いて、上記バウンディングボックスＢＢの中心点Ｅから上記選択した角領域Ａを通る直線を引き、この直線がスクリーンＳＣの投影面と交差する点Ｐが検出されるか否かを判定する。この判定の結果、図１１に示すように交差点Ｐが見つかれば、発表者ＵＳはスクリーンＳＣを指示していると判定し、一方図１０のように交差点Ｐが見つからなければ、発表者ＵＳはスクリーンＳＣを指示していないと判定する。

以上の判定処理により、発表者ＵＳがスクリーンＳＣを指示していると判定されると、ＣＰＵ１１はステップＳ８５に移行し、投影画像のサイズを予め設定した最大値（４／４）に拡大させるための倍率制御データを生成して投影画像生成プログラム１３１に与える。そして、ＣＰＵ１１は投影画像生成プログラム１３１に従い、ステップＳ４４、Ｓ３４及びＳ３５により生成された投影映像データを、上記倍率制御データにより与えられる倍率に従いステップＳ３６で拡大処理し、この拡大処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。このとき、上記拡大処理はスクリーン画像及び資料画像の中心点を起点に行われる。したがって、スクリーンＳＣに表示される投影画像は、スクリーン画像の中心点を起点として最大サイズにズームインされる。

したがってこの場合には、図４に示したようにスクリーンＳＣには最大サイズに拡大されたスクリーン画像ＩＭ２及び資料画像ＩＭ１が投影される。すなわち、仮想的なスクリーンＩＭ２上に資料画像ＩＭ１が投影された画像が投影される。したがって、聴衆に対し、ズームインによりスクリーンがあたかも近づいてきた（寄ってきた）ように知覚させることができ、これにより聴衆に対し資料画像ＩＭ１を強調することが可能となる。

一方、上記ステップＳ８１による判定処理により、発表者ＵＳがスクリーンＳＣを指示していないと判定され、さらにこの状態が２０秒続いたとする。この場合ＣＰＵ１１は、ステップＳ８２からステップＳ８３に移行し、投影中の投影画像のサイズが最大サイズか否かを判定する。そして、この判定の結果、投影中の投影画像サイズが最大サイズと判定されれば、ステップＳ８６により投影画像のサイズを３／４に縮小させるための倍率制御データを生成する。

そしてＣＰＵ１１は、ステップＳ４４、Ｓ３４及びＳ３５により生成された投影映像データを、上記倍率制御データにより与えられる倍率に従いステップＳ３６で３／４に縮小する処理を行い、この縮小処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。このとき、上記縮小処理は、先に述べた拡大処理の場合と同様にスクリーン画像及び資料画像の中心点を起点に行われる。したがって、スクリーンＳＣに表示される投影画像は、スクリーン画像の中心点を起点として３／４サイズにズームアウトされる。

さらに、上記３／４サイズに縮小された後、発表者ＵＳがスクリーンＳＣを指示していない状態がさらに２０秒間続いたとする。この場合ＣＰＵ１１は、ステップＳ８２からステップＳ８３を介してステップＳ８４に移行し、投影中の投影画像のサイズが最大サイズの３／４のサイズか否かを判定する。そして、この判定の結果、投影中の投影画像サイズが最大サイズの３／４と判定されれば、ステップＳ８７により投影画像のサイズを２／４に縮小させるための倍率制御データを生成する。

そしてＣＰＵ１１は、ステップＳ４４、Ｓ３４及びＳ３５により生成された投影映像データを、上記倍率制御データにより与えられる倍率に従いステップＳ３６で２／４に縮小する処理を行い、この縮小処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。このとき、上記縮小処理は、先に述べた拡大処理の場合と同様にスクリーン画像及び資料画像の中心点を起点に行われる。したがって、スクリーンＳＣに表示される投影画像は、スクリーン画像の中心点を起点として２／４サイズにさらにズームアウトされる。

すなわち、プレゼンテーション中に発表者ＵＳがスクリーンＳＣに対する指示操作を行わなければ、スクリーンＳＣに表示される投影画像は２０秒が経過するごとにそのサイズが３／４、２／４と段階的にズームアウトされる。ズームアウトされると、例えば図５に示したようにスクリーンＳＣの中央部には最小倍率に設定されたスクリーン画像ＩＭ２及び資料画像ＩＭ１が投影され、さらにその周辺部には壁や天井、椅子等の背景を表す画像ＩＭ１が投影される。

すなわち、仮想的な背景ＩＭ３をバックに仮想的なスクリーンＩＭ２上に資料画像ＩＭ１が表示された画像が投影される。したがって、聴衆に対し、ズームアウトによりスクリーンがあたかも遠ざかった（引いた）ように知覚させることができ、これにより資料画像ＩＭ１に対する聴衆の集中を緩和することができる。

なお、上記投影画像サイズが３／４又は２／４に縮小されている状態で、発表者ＵＳがスクリーンＳＣに対し再度指示操作を行うと、ＣＰＵ１１はステップＳ８１からステップＳ８５に移行して投影画像のサイズを最大値（４／４）に拡大させるための倍率制御データを生成する。そして投影画像生成プログラム１３１に従い、ステップＳ４４、Ｓ３４及びＳ３５により生成された投影映像データを、上記倍率制御データにより与えられる倍率に従いステップＳ３６で拡大処理し、この拡大処理後の投影画像データをプロジェクタインタフェース１６からプロジェクタＰＪへ出力させる。したがって、スクリーンＳＣに表示される投影画像は、スクリーン画像の中心点を起点として最大サイズにズームインされる。

以上述べたように第２の実施形態では、プレゼンテーション中の発表者ＵＳの挙動をその垂直上方からビデオカメラＣＭで撮像して、その撮像画像からスクリーンＳＣに対する発表者ＵＳの指示操作の有無を判定し、この指示操作の有無の判定結果に応じて投影画像データを拡大／縮小処理するようにしている。

したがって、スクリーンＳＣに対する発表者ＵＳの指示操作に応じて、資料画像だけでなくスクリーン及びその周囲の背景全体が仮想的に近づいたり遠ざかったりするように聴衆者に知覚させることができ、これにより資料画像に対する聴衆の集中と緩和を効果的に制御することが可能となり、さらに聞き手の注目先を提示情報と話し手との間で効果的に切り替えることが可能となる。また、上記投影画像データの拡大／縮小処理を、スクリーンＳＣに対する発表者ＵＳの指示操作に応じて自動的に制御するようにしているので、発表者ＵＳは投影画像データの拡大又は縮小操作を別途行う必要がなくなり、これによりプレゼンテーションに対し意識をより集中することが可能となる。

（その他の実施形態）
前記第２の実施形態では、ビデオカメラＣＭにより発表者ＵＳを撮像してその撮像画像をもとにスクリーンＳＣに対する指示操作の有無を判定するようにした。しかし、それに限定されるものではなく、他に発表者ＵＳがスクリーンＳＣに対しレーザポインタを用いて指示操作を行う場合に、スクリーンＳＣに対するレーザポインタの照射の有無をビデオカメラ等の映像を用いて判定するようにしてもよい。

また、前記第１の及び第２の実施形態では、資料操作端末ＴＭ１とスクリーン操作端末ＴＭ２との間をＬＡＮケーブルＬＣを介して接続した場合を例にとって説明したが、ＬＡＮケーブルの代わりに無線ＬＡＮやBluetooth（登録商標）、ＵＷＢ（Ultra Wideband）等の小電力無線データ通信規格を適用した無線通信システムを適用してもよい。

さらに、前記各実施形態では、資料の操作を資料操作端末ＴＭ１で、またスクリーンの操作をスクリーン操作端末ＴＭ２でそれぞれ行う場合を例にとって説明したが、１台の端末で資料の操作とスクリーンの操作の両方を一括して行うように構成してもよい。このようにすると、システム構成を簡単化することができる。

その他、操作端末の種類や構成、投影画像データ生成処理及びその拡大／縮小処理の手順や内容等についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

この発明の第１の実施形態に係わるプレゼンテーション画像提示システムの概略構成図である。 図１に示したシステム中のスクリーン操作端末のハードウエア及びソフトウエアの構成を示すブロック図である。 図１に示したシステム中の資料操作端末及びスクリーン操作端末による処理手順と処理内容を示すフローチャートである。 図１に示したシステムのスクリーンに投影される、ズームインしたときの画像の一例を示す図である。 図１に示したシステムのスクリーンに投影される、ズームアウトしたときの画像の一例を示す図である。 この発明の第２の実施形態に係わるプレゼンテーション画像提示システムの概略構成図である。 図６に示したシステム中の資料操作端末及びスクリーン操作端末による処理手順と処理内容を示すフローチャートである。 図６に示したシステム中の資料操作端末及びスクリーン操作端末による処理手順と処理内容を示すフローチャートである。 発表者がプレゼンテーション映像に対する指示を行っていないときに検出される画像領域を示す図である。 発表者がプレゼンテーション映像に対する指示を行っているときに検出される画像領域を示す図である。 発表者による指示操作の判定方法を説明するための図である。

符号の説明

ＴＭ１…資料操作端末、ＴＭ２…スクリーン操作端末、ＬＣ…ＬＡＮケーブル、ＰＪ…プロジェクタ、ＳＣ…スクリーン、ＣＭ…ビデオカメラ、ＵＳ…ユーザ、ＢＢ…バウンディングボックス、Ｅ１…発表者の映像領域、ＩＭ１…発表資料画像、ＩＭ２…スクリーン画像、ＩＭ３…背景画像、１１…ＣＰＵ、１２…バス、１３…プログラムメモリ、１４…データメモリ、１５…通信インタフェース、１６…プロジェクタインタフェース、１７…入出力インタフェース、１８…入力デバイス、１９…表示デバイス、２０…カメラインタフェース、１３１…投影画像生成プログラム、１３２…拡大／縮小制御プログラム、１３３…指示操作判定プログラム、１４１…背景・スクリーン画像記憶部、１４２…資料画像記憶部、１８１…ズームインボタン、１８２…ズームアウトボタン、１８３…停止ボタン。

Claims (10)

1. スクリーンとその周辺部とを含む背景画像データを記憶するメモリと、
   前記メモリから背景画像データを読み出し、この読み出された背景画像データのスクリーン画像領域に、プレゼンテーションに使用する資料画像データを、その中心点がスクリーン画像の中心点と一致するように位置合わせして重畳することにより、投影画像データを生成する手段と、
   前記生成された投影画像データを、そのスクリーン画像領域の中心を起点に拡大又は縮小する手段と、
   前記拡大又は縮小された投影画像データを前記スクリーンに投影させる手段と
   を具備することを特徴とするプレゼンテーション画像の提示システム。
2. 前記投影画像データを拡大又は縮小する手段は、
   前記プレゼンテーションを行う発表者の手動による拡大又は縮小操作を受け付ける手段と、
   前記受け付けた拡大又は縮小操作に応じ、前記生成された投影画像データをそのスクリーン画像領域の中心を起点に拡大又は縮小処理する手段と
   を備えることを特徴とする請求項１記載のプレゼンテーション画像の提示システム。
3. 前記投影画像データを拡大又は縮小する手段は、
   前記プレゼンテーションを行う発表者の前記スクリーンに対する指示操作の有無を判定する手段と、
   前記指示操作の有無の判定結果に応じて、前記投影画像データを拡大又は縮小処理する手段と
   を備えることを特徴とする請求項１記載のプレゼンテーション画像の提示システム。
4. プレゼンテーションに使用する資料画像データをスクリーンに投影する際に、
   前記スクリーンとその周辺部とを含む背景画像データをメモリから読み出し、この読み出された背景画像データのスクリーン画像領域に、前記プレゼンテーションに使用する資料画像データを、その中心点がスクリーン画像の中心点と一致するように位置合わせして重畳することにより、投影画像データを生成する過程と、
   前記生成された投影画像データを、そのスクリーン画像領域の中心を起点に拡大又は縮小する過程と、
   前記拡大又は縮小された投影画像データを前記スクリーンに投影させる過程と
   を具備することを特徴とするプレゼンテーション画像の提示方法。
5. 前記投影画像データを拡大又は縮小する過程は、
   前記プレゼンテーションを行う発表者の手動による拡大又は縮小操作を受け付ける過程と、
   前記受け付けた拡大又は縮小操作に応じ、前記生成された投影画像データをそのスクリーン画像領域の中心を起点に拡大又は縮小処理する過程と
   を備えることを特徴とする請求項４記載のプレゼンテーション画像の提示方法。
6. 前記投影画像データを拡大又は縮小する過程は、
   前記プレゼンテーションを行う発表者の前記スクリーンに対する指示操作の有無を判定する過程と、
   前記指示操作の有無の判定結果に応じて、前記投影画像データを拡大又は縮小処理する過程と
   を備えることを特徴とする請求項４記載のプレゼンテーション画像の提示方法。
7. プレゼンテーションに使用する資料画像データをコンピュータの制御の下でスクリーンに投影する装置で使用されるプログラムであって、
   前記スクリーンとその周辺部とを含む背景画像データをメモリから読み出し、この読み出された背景画像データのスクリーン画像領域に、前記プレゼンテーションに使用する資料画像データを、その中心点がスクリーン画像の中心点と一致するように位置合わせして重畳することにより、投影画像データを生成する処理と、
   前記生成された投影画像データを、そのスクリーン画像領域の中心を起点に拡大又は縮小する処理と、
   前記拡大又は縮小された投影画像データを前記スクリーンに投影させる処理と
   を、前記コンピュータに実行させることを特徴とするプログラム。
8. 前記投影画像データを拡大又は縮小する処理は、
   前記プレゼンテーションを行う発表者の手動による拡大又は縮小操作を受け付ける処理と、
   前記受け付けた拡大又は縮小操作に応じ、前記生成された投影画像データをそのスクリーン画像領域の中心を起点に拡大又は縮小処理する処理と
   を、前記コンピュータに実行させることを特徴とする請求項７記載のプログラム。
9. 前記投影画像データを拡大又は縮小する処理は、
   前記プレゼンテーションを行う発表者の前記スクリーンに対する指示操作の有無を判定する処理と、
   前記指示操作の有無の判定結果に応じて、前記投影画像データを拡大又は縮小処理する処理と
   を、前記コンピュータに実行させることを特徴とする請求項７記載のプログラム。
10. 前記請求項７乃至請求項９のいずれかに記載のプログラムを読み出し可能に格納した記録媒体。

Images