JP2005203886A - 遠隔会議支援システム、遠隔会議支援システム制御方法、及びプログラム - Google Patents

Abstract

【課題】遠隔会議を支援する遠隔会議支援システムを提供する。
【解決手段】遠隔会議を支援する遠隔会議支援システムであって、遠隔地のそれぞれに設置され、投影画像を投影する２つのプロジェクタと、２つのプロジェクタに、投影すべき元画像を送信するサーバとを備え、２つのプロジェクタのそれぞれが、投影画像を投影したスクリーンに書き込まれた書込画像を撮像する撮像手段と、撮像手段によって撮像された書込画像をサーバに送信する送信手段とを有し、サーバは、２つのプロジェクタの一方から受信した書込画像を元画像に合成する合成手段と、合成手段により合成された画像を２つのプロジェクタの他方へ送信する転送手段とを有する。
【選択図】図２

Description

本発明は、遠隔会議支援システム、遠隔会議支援システム制御方法、及びプログラムに関する。特に本発明は、遠隔会議を支援する遠隔会議支援システムに関する。

従来、離れた会議室で会議がそれぞれ行われた場合、それぞれの会議室のホワイトボードに書き込まれた会議内容を、相手のホワイトボードに表示させる会議システムが知られている（例えば、特許文献１参照）。
特開２０００−１８８６５５号公報

しかしながら、それぞれの会議室のホワイトボードに、プロジェクタで会議資料を投影した場合、一方の会議室のホワイトボードに行なわれた書き込みを他方のホワイトボードに表示させると、他方のホワイトボードにおいては、プロジェクタにより投影されている画像と、表示された書き込み画像との位置が合わない場合がある。このような場合、会議の参加者は、投影画像に対して行われた書き込みの意図を理解できず、会議が進まない場合がある。

そこで本発明は、上記の課題を解決することのできる遠隔会議支援システム、及び遠隔会議支援システム制御方法、及びプログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。

上記課題を解決するために、本発明の第１の形態においては、遠隔会議を支援する遠隔会議支援システムであって、遠隔地のそれぞれに設置され、投影画像を投影する２つのプロジェクタと、２つのプロジェクタに、投影すべき元画像を送信するサーバとを備え、２つのプロジェクタのそれぞれが、投影画像を投影したスクリーンに書き込まれた書込画像を撮像する撮像手段と、撮像手段によって撮像された書込画像をサーバに送信する送信手段とを有し、サーバは、２つのプロジェクタの一方から受信した書込画像を元画像に合成する合成手段と、合成手段により合成された画像を２つのプロジェクタの他方へ送信する転送手段とを有する。これにより、本発明の遠隔会議支援システムは、一方の会議室のホワイトボードに書き込まれた内容を、他方の会議室のホワイトボードに投影されている画像に対して正しい位置で表示させることができる。そして会議の参加者は、お互いの書き込みを共有しながら、円滑に会議を進めることができる。

上記の合成手段は、２つのプロジェクタの他方から受信した書込画像を元画像に更に合成し、転送手段は、合成手段により合成された画像を２つのプロジェクタの一方へ、更に送信してもよい。

また本発明の遠隔会議支援システムにおいて、２つのプロジェクタの一方とサーバとが一体に作られもよい。これにより、サーバを介さずに２つのプロジェクタ間で通信を行うことができるので、サーバとプロジェクタとを一体に作成しない場合に比べて、通信に必要なコストを下げることができる。

上記のサーバは、元画像を予め記憶している記憶装置と、２つのプロジェクタのいずれかの撮像手段が取得した書込画像を記憶装置に順次記録する画像記録手段と、記憶装置から元画像と書込画像とを順次読み出す画像読出手段とを更に有し、合成手段は、読み出された元画像に書込画像を合成する手段を更に有し、転送手段は合成された画像を、２つのプロジェクタのいずれかへ送信する手段を更に有してもよい。これにより、遠隔会議支援システムの参加者は、会議の終了後に、それぞれの会議の内容を確認することができる。

上記のサーバは、元画像を読み出した読み出しタイミングを、読み出した元画像に対応づけて記憶装置に記録するタイミング記録手段を更に有し、画像記録手段は、２つのプロジェクタのいずれかから書込画像を受信した画像受信タイミングを、受信した書込画像に対応づけて記憶装置に記録し画像読出手段は、記憶装置から、元画像、読出しタイミングおよび画像受信タイミングを読み出し、合成手段は、同一のタイミングで投影または受信されていた読出しタイミングおよび画像受信タイミングを参照することにより、元画像と書込画像を合成し、転送手段は、合成手段が合成した画像を送信する手段を更に有してもよい。これにより、各会議室において投影が行われた順番、および書込みが行われた順番どおりに正しく、会議の内容を再現することができる。

上記の２つのプロジェクタは、音声を取得するマイクと、音声を再生する音声再生手段とを更に有し、送信手段は、マイクによって取得された音声をサーバへ更に送信し、上記のサーバは、２つのプロジェクタのいずれかから音声を受信した音声受信タイミングを、受信した音声に対応付けて記憶装置に記録する音声記録手段と、記憶装置から音声及び音声受信タイミングを読み出す音声読出手段とを更に有し、音声再生手段は、音声受信タイミングで、記憶装置から読み出された音声を再生してもよい。これにより、各会議室において投影が行われた順番、書込みが行われた順番、および録音が行われた順番どおりに正しく、会議の内容を再現することができる。

本発明の第２の形態においては、遠隔地のそれぞれに設置され、投影画像を投影する２つのプロジェクタと、２つのプロジェクタに、投影すべき元画像を送信するサーバとを備え、遠隔会議を支援する遠隔会議支援システムを制御する遠隔会議支援システム制御方法であって、２つのプロジェクタのそれぞれが、投影画像を投影したスクリーンに書き込まれた書込画像を撮像する撮像ステップと、撮像ステップによって撮像された書込み画像をサーバに送信する送信ステップとを有し、サーバは、２つのプロジェクタの一方から受信した書込画像を元画像に合成する合成ステップと、合成ステップにより合成された画像を２つのプロジェクタの他方へ送信する転送ステップとを有する。これにより第１の実施形態と同様の効果を得ることができる。

上記のサーバは、元画像を予め記憶している記憶装置を有し、２つのプロジェクタのいずれかの撮像手段が取得した書込画像を記憶装置に順次記録する画像記録ステップと記憶装置から元画像と書込画像とを順次読み出す画像読出ステップとを更に有し、合成ステップは、読み出された元画像に書込画像を合成するステップを更に有し、転送ステップは合成された画像を、２つのプロジェクタのいずれかへ送信するステップを更に有してもよい。これにより第１の実施形態と同様の効果を得ることができる。

本発明の第３の形態においては、遠隔地のそれぞれに設置され、投影画像を投影する２つのプロジェクタに働きかけて動作させる共に、２つのプロジェクタに投影すべき元画像を送信するサーバと働きかけて動作させるプログラムであって、上記の２つのプロジェクタに、投影画像を投影したスクリーンに書き込まれた書込画像を撮像する撮像機能と、撮像ステップによって撮像された書込み画像をサーバに送信する送信機能とを実現させ、上記のサーバに、２つのプロジェクタの一方から受信した書込画像を元画像に合成する合成機能と、合成ステップにより合成された画像を２つのプロジェクタの他方へ送信する転送機能とを実現させる。これにより第１の実施形態と同様の効果を得ることができる。

上記のプログラムは、サーバに、２つのプロジェクタのいずれかの撮像手段が取得した書込画像を、上記のサーバが有する、元画像を予め記憶している記憶装置に順次記録する画像記録機能と、記憶装置から元画像と書込画像とを順次読み出す画像読出機能とを更に実現させ、合成機能は、サーバに読み出された元画像に書込画像を合成する機能を更に有し、転送機能は、合成された画像を２つのプロジェクタのいずれかへ送信する機能を更に有してもよい。これにより第１の実施形態と同様の効果を得ることができる。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、本発明の実施形態に係る遠隔会議支援システム６０の構成の一例を示す。遠隔会議支援システム６０は、遠隔地のそれぞれに設置され、投影画像を投影するプロジェクタ１０およびプロジェクタ３０と、これら２つのプロジェクタに投影すべき元画像を送信するサーバ２０とを備える。ここで元画像とは、例えばパワーポイント（商標）等のプレゼンテーションソフトウエアで作成されたスライドの画像である。本発明におけるプロジェクタ１０及び３０は、通信網７０を介してサーバ２０に接続され、元画像をサーバ２０よりそれぞれ受信する。プロジェクタ１０及び３０は、受け取った元画像を、それぞれの会議室に設置されたスクリーン４０およびスクリーン５０へ投影する。それぞれの会議室において、プロジェクタ１０の利用者３００、及びプロジェクタ３０の利用者３５０は、投影された画像を用いて会議を行う。

ここで利用者３００および利用者３５０は、スクリーン４０およびスクリーン５０に書き込みをしながら、投影画像の内容の説明を行う場合がある。そして、従来、それぞれの会議室のホワイトボードに書き込まれた会議内容を互いに共有する会議システムが知られているが、一方の会議室のホワイトボードへの書き込みを他方のホワイトボードに表示させると、他方のホワイトボードにおいては、プロジェクタによって投影されている画像と表示された書き込み画像との位置が合わない場合がある。そこで本発明における遠隔会議支援システム６０は、スクリーン４０への書き込み４５２を、別の会議室におけるスクリーン５０に、書き込み４５４として元画像と共に投影し、スクリーン５０への書き込み４５６を、別の会議室におけるスクリーン４０に、書き込み４５８として元画像と共に投影することにより、上記課題を解決することを目的とする。

図２は、プロジェクタ１０及び３０の詳細な構成の一例を示す。プロジェクタ１０及び３０は、投影手段１００、撮像手段１４０、送信手段１５０、音声再生手段１６０、受信手段１７０、タイミング発生器１８０、マイク１９０、及び読出指示手段１８５をそれぞれ有する。尚、プロジェクタ３０はプロジェクタ１０と同様の構成及び機能を有するので、以下に説明する点を除きプロジェクタ３０についての記載を省略する。

受信手段１７０は、サーバ２０から、元画像としてカラービデオ信号等の電子データを受け取り、受け取った電子データを投影手段１００へ与える。また受信手段１７０は、サーバ２０から音声を受信し、受信した音声を音声再生手段１６０へ出力する。音声再生手段１６０は、受信した音声を再生する。

投影手段１００は、Ｒ光源１１２、Ｇ光源１１４、Ｂ光源１１６、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、Ｂ液晶シャッタ１２６、投影光生成手段１２０、結合プリズム１２８、および光学系１３０を有する。Ｒ光源１１２、Ｇ光源１１４、およびＢ光源１１６のそれぞれは、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６のそれぞれを透過すべき光を発生する白色光源である。

Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６のそれぞれは、複数の画素に区切られた液晶パネルであり、投影光生成手段１２０の指示に応じて、投影画像の赤色成分、緑色成分、および青色成分である赤色画像、緑色画像、および青色画像のそれぞれを表示する。これにより、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６は、投影画像を表示する。また、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６には、それぞれ、赤色フィルタ、緑色フィルタ、および青色フィルタが貼り付けられており、Ｒ光源１１２からの光、Ｇ光源１１４からの光、Ｂ光源１１６からの光に応じて、赤色画像の投影光、緑色画像の投影光、および青色画像の投影光を、それぞれ生成する。

投影光生成手段１２０は、受け取った電子データに基づき、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６を画素毎に開閉させる。これにより投影光生成手段１２０は、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６に、赤色画像、緑色画像、および青色画像を表示させる。結合プリズム１２８は、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、Ｂ液晶シャッタ１２６から受け取る赤色画像、緑色画像、および青色画像の投影光を結合してカラーの投影光を生成して、光学系１３０に供給する。

光学系１３０は、投影画像をスクリーン４０上に投影するための光学系であり、投影レンズ１３４およびハーフミラー１３２を有する。投影レンズ１３４は、結合プリズム１２８により生成されたカラーの投影光を、ハーフミラー１３２を介して受け取り、スクリーン４０に結像させる。これにより、光学系１３０は、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６を透過した光をスクリーン４０上に照射する。そして、光学系１３０は、Ｒ液晶シャッタ１２２、Ｇ液晶シャッタ１２４、およびＢ液晶シャッタ１２６に表示された投影画像を、スクリーン４０に投影する。ハーフミラー１３２は、結合プリズム１２８から受け取る光を、投影レンズ１３４に向けて透過する。また、ハーフミラー１３２は、投影レンズ１３４を介してスクリーン４０から入射する光を、撮像手段１４０に向けて反射する。撮像手段１４０は、光学系１３０の投影レンズ１３４を通って、ハーフミラー１３２により反射されたスクリーン４０の像を撮像する。

タイミング発生器１８０は、所定の間隔のタイミングを発生させ、発生させたタイミングをスクリーン４０に書き込まれた書込画像を撮像すべきタイミングとして撮像手段１４０へ与える。撮像手段１４０は、例えばカラーのＣＣＤ撮像素子を有する。撮像手段１４０は、受け取ったタイミングに基づいて投影光生成手段１２０を制御し、スクリーン４０の書込画像を撮像する。本例において撮像すべきタイミングになると、撮像手段１４０は投影光生成手段１２０にスクリーン４０への画像の投影を一時中断させ、代わりにスクリーン４０全体に均一な光を投影させる。そして撮像手段１４０は、投影画像を投影したスクリーン４０の書込画像を撮像し、撮像した書込画像を送信手段１５０へ出力する。

マイク１９０は、プロジェクタ１０が設置された会議室の音声を取得し、取得した音声を送信手段１５０へ出力する。読出指示手段１８５は、次のスライド画像をスクリーン４０へ表示させる為の指示を利用者３００から受け取り、受け取った指示を送信手段１５０へ出力する。送信手段１５０は、スクリーン４０の書込画像、プロジェクタ１０が設置された会議室の音声、及び次のスライド画像を表示させる為の指示をサーバ２０へ送信する。

同様に、プロジェクタ３０において、投影手段１００は、サーバ２０から受信した画像をスクリーン５０へ投影し、音声再生手段１６０はサーバ２０から受信した音声を再生する。また撮像手段１４０は、スクリーン５０の書込画像を撮像し、マイク１９０は、プロジェクタ３０が設置された会議室の音声を取得する。そして送信手段１５０は、スクリーン５０の書込画像、プロジェクタ３０が設置された会議室の音声、及び次のスライド画像を表示させるための指示をサーバ２０へ送信する。

図３は、サーバ２０の詳細な構成の一例を示す。サーバ２０は、受信手段２１０、画像記録手段２２０、音声記録手段２３０、記憶装置２４０、タイミング記録手段２５０、タイミング発生器２６０、音声読出手段２７０、画像読出手段２８０、合成手段２９０、および転送手段３０５を有する。

受信手段２１０は、プロジェクタ１０から、スクリーン４０の書込画像、プロジェクタ１０が設置された会議室の音声、及び、次の元画像を表示させる為の指示を受信する。また、受信手段２１０は、プロジェクタ３０から、スクリーン５０の書込画像、プロジェクタ３０が設置された会議室の音声、及び、次のスライド画像を表示させる為の指示を受信する。受信手段２１０は、受信したそれぞれの書込画像を合成手段２９０及び画像記録手段２２０へ出力し、受信したそれぞれの音声を音声記録手段２３０へ出力し、受信したそれぞれの、次の元画像を表示させる為の指示を、タイミング記録手段２５０及び画像読出手段２８０へ出力する。

タイミング発生器２６０は、所定の間隔でタイミングを発生させ、発生させたタイミングを画像記録手段２２０、音声記録手段２３０、及びタイミング記録手段２５０へ与える。画像読出手段２８０は、受信手段２１０から次のスライド画像を表示させる為の指示を受け取ると、記憶装置２４０から元画像を読み出し、読み出した元画像を合成手段２９０へ出力する。タイミング記録手段２５０は、受信手段２１０から次のスライド画像を表示させる為の指示を受け取ると、元画像を読み出した読出しタイミングを、読み出した元画像に対応づけて記憶装置に記録する。

合成手段２９０は、受信手段２１０より受け取ったスクリーン４０の書込画像を、画像読出手段２８０から受け取った元画像に合成し、合成した画像を転送手段３０５へ出力する。また合成手段２９０は、受信手段２１０より受け取ったスクリーン５０の書込画像を、画像読出手段２８０から受け取った元画像に合成し、合成した画像を転送手段３０５へ出力する。

転送手段３０５は、受け取ったスクリーン４０の書込画像と元画像との合成画像を、プロジェクタ３０へ転送すると共に、受け取ったスクリーン５０の書込画像と元画像との合成画像を、プロジェクタ１０へ転送する。ここでプロジェクタ１０は、スクリーン５０の書込画像と元画像との合成画像をスクリーン４０へ投影し、プロジェクタ３０は、スクリーン４０の書込画像と元画像との合成画像をスクリーン５０へ投影する。

これにより、一方の会議室で行われた書き込みを他方のホワイトボードに投影されている画像に対して、正しい位置で表示させることができる。そして会議の参加者は、それぞれの会議室において、プロジェクタ１０又は３０で投影された内容に対する書き込みをお互いに共有しながら、円滑に会議を進めることができる。

また画像記録手段２２０は、プロジェクタ１０及び３０のいずれかから書込画像を受信した画像受信タイミングを、受信したそれぞれの書込画像に対応づけて記憶装置２４０に記録する。音声記録手段２３０は、プロジェクタ１０及び３０のいずれかから音声を受信した音声受信タイミングを、受信したそれぞれの音声に対応付けて記憶装置２４０に記録する。

そして会議が終了した後に、画像読出手段２８０は、記憶装置２４０から、読出しタイミングに対応した元画像を読み出すと共に、画像受信タイミングに対応する書込画像を読み出し、読み出した元画像と書込画像とを合成手段２９０へ出力する。合成手段２９０は、スクリーン４０の書込画像、スクリーン５０の書込画像、及び元画像を合成し、合成した画像を転送手段３０５へ出力する。

また、会議が終了した後に音声読出手段２７０は、記憶装置２４０から、それぞれの音声受信タイミングに対応する音声をそれぞれ読み出し、２つの音声を合成して、転送手段３０５へ出力する。尚、本例においては、サーバ２０の利用者が、画像読出手段２８０及び音声読出手段２７０に入力を与えることにより、これらの画像および音声の読み出しを開始する。

転送手段３０５は、合成された画像および合成された音声を、プロジェクタ１０及びプロジェクタ３０へ送信する。プロジェクタ１０及び３０は、合成された画像をスクリーン４０及び５０にそれぞれ投影し、合成された音声をそれぞれ再生する。これにより、本発明における遠隔会議支援システム６０の参加者は、会議の終了後に、それぞれの会議室で行われた会議の内容を確認することができる。

図４は、記憶装置２４０が格納するデータの一例を示す。本例において、記憶装置２４０は、ファイル２５及びファイル２７を含む。本例においてファイル２５は、元画像のスライド名称に対応づけて、スライドの投影が開始された開始時刻、及びスライドの投影が終了した終了時刻を、読み出しタイミングとして格納している。またファイル２５は、スクリーン４０の書込画像に対応づけて、サーバ２０により書込画像が受信された時刻を、画像受信タイミングとして格納している。同様にファイル２５は、スクリーン５０の書込画像に対応づけて、サーバ２０により書込画像が受信された時刻を、画像受信タイミングとして格納している。またファイル２７は、それぞれの会議室において音声の記録が開始され、これらの音声の受信が開始された開始時刻、および音声の記録が終了し、音声の受信が終了した終了時刻を、音声受信タイミングとして、音声のファイル名に対応づけて格納している。

図５は、会議時における遠隔会議支援システム６０の動作の一例を示すフローチャートである。会議が開始されると、プロジェクタ１０のタイミング発生器１８０は、所定の間隔のタイミングを発生させ（Ｓ１００）、発生させたタイミングを、スクリーン４０を撮像すべきタイミングとして撮像手段１４０へ与える。撮像手段１４０は、受け取ったタイミングに基づいて書込画像を撮像し（Ｓ１０５）、撮像した書込画像を送信手段１５０へ出力する。送信手段１５０は、受け取った書込画像をサーバ２０の受信手段２１０へ送信する（Ｓ１１０）。

同様にして、プロジェクタ３０のタイミング発生器１８０は、所定の間隔のタイミングを発生させ（Ｓ３００）、発生させたタイミングを、スクリーン５０を撮像すべきタイミングとして撮像手段１４０へ与える。撮像手段１４０は、受け取ったタイミングに基づいて、書込画像を撮像し（Ｓ３０５）、撮像した書込画像を送信手段１５０へ出力する。送信手段１５０は、受け取った書込画像をサーバ２０の受信手段２１０へ送信する（Ｓ３１０）。

発表が開始されると、一方で、サーバ２０のタイミング発生器２６０は、時刻を計時すると共に所定の間隔でタイミングを発生させ、発生させたタイミングをタイミング記録手段２５０及び画像読出手段２８０へ与える。画像読出手段２８０は、受け取ったタイミングに基づいて、記憶装置２４０から元画像を読み出し（Ｓ２００）、読み出した元画像を合成手段２９０へ出力する。またタイミング記録手段２５０は、読み出した元画像を、読出しタイミングに対応づけて記録する（Ｓ２０５）。

受信手段２１０からスクリーン４０の書込画像およびスクリーン５０の書込画像を受け取ると、画像記録手段２２０は、これらの書込画像を受信したそれぞれの画像受信タイミングを、受信した書込画像に対応づけて記録する（Ｓ２１０）。本例において画像記録手段２２０は、書込画像を受信した時刻を、画像受信タイミングとして記録する。これにより画像記録手段２２０は、プロジェクタ１０及び３０から送信されたそれぞれの書込画像を記憶装置に順次記録する。

合成手段２９０は、画像読出手段２８０から受け取った元画像と受信手段２１０から受け取ったスクリーン４０の書込画像とを合成する（Ｓ２１５）。本例において合成手段２９０は、元画像及び書込画像において、対応する画素の画素値をそれぞれ比較し、暗い方の画素値を選択することにより元画像と書込画像とを合成し、合成した画像を転送手段３０５へ出力する。転送手段３０５は、元画像とスクリーン４０の書込画像とが合成された画像を、プロジェクタ３０へ転送する（Ｓ２２０）。

同様に合成手段２９０は、画像読出手段２８０から受け取った元画像と、受信手段２１０から受け取ったスクリーン５０の書込画像とを合成し（Ｓ２２５）、合成した画像を転送手段３０５へ出力する。そして転送手段３０５は、元画像とスクリーン５０の書込画像とが合成された画像を、プロジェクタ１０へ転送する（Ｓ２３０）。

ここでプロジェクタ１０の受信手段１７０は、受け取った画像を投影手段１００へ与え、投影手段１００は、スクリーン５０の書込画像と元画像とが合成された画像をスクリーン４０へ投影する（Ｓ１１５）。同様に、プロジェクタ３０の投影手段１００は、スクリーン４０の書込画像と元画像とが合成された画像をスクリーン５０へ投影する（Ｓ３１５）。

ここで、プロジェクタ１０の利用者３００、またはプロジェクタ３０の利用者３５０が読出指示手段１８５に入力を与えることにより、次の元画像の読み出しが指示されると（Ｓ２３５ ＹＥＳ）、本フローチャートの処理はＳ２００へ戻り、画像読出手段２８０は次の元画像を読み出す。次の元画像の読み出しの指示が無い場合（Ｓ２３５ ＮＯ）、本フローチャートの処理はＳ２４０へ進む。そして発表が終了していない場合は（Ｓ２４０ ＮＯ）、フローチャートの処理はＳ２００へ戻る。この場合、画像読出手段２８０は、同じ元画像を読み出し続ける。発表が終了した場合（Ｓ１２０ ＹＥＳ）、（Ｓ２４０ ＮＯ）、及び（Ｓ３２０ ＹＥＳ）、本フローチャートの処理は終了する。

これにより本発明の遠隔会議支援システム６０は、一方の会議室で行われた書き込みを他方のホワイトボードに投影されている画像に対して、正しい位置で表示させることができる。そして、会議の参加者は、書き込みの内容を互いに共有しながら、円滑に会議を進めることができる。

図６は図５で示したＳ１０５及びＳ３０５の動作の一例を示すフローチャートである。Ｓ１０５において撮像手段１４０は、撮像すべきタイミングをタイミング発生器１８０より受け取る。すると撮像手段１４０は、投影光生成手段１２０を制御して、投影画像の投影を一時中断させる（Ｓ４００）。そして撮像手段１４０は、投影光生成手段１２０に、スクリーン４０全体に均一な光を投影させる（Ｓ４０５）。そして投影手段１００が均一な光をスクリーン４０へ投影している間に、撮像手段１４０はスクリーン４０全体を撮像する（Ｓ４１０）。撮像手段１４０は、撮像した撮像画像を送信手段１５０へ出力し、本フローチャートの処理は、図４におけるＳ１１０へ進む。尚、Ｓ３０５における処理は、Ｓ１０５における動作と同様であるのでこの説明を省略する。これによりプロジェクタ１０及び３０は、スクリーン４０及び５０の書込画像を、それぞれ取得することができる。

図７は、会議後における遠隔会議支援システム６０の動作の一例を示すフローチャートである。サーバ２０の利用者が再生を指示すると、サーバ２０は内部のタイマーを動作させ（Ｓ５００）、画像読出手段２８０は読出しタイミングに対応する元画像を読み出す。本例において記憶装置２４０は、元画像に対応づけて、開始時刻と終了時刻とをそれぞれ記録している。画像読出手段２８０は、タイマーに応じて、記憶装置２４０に記録された時刻に対応する元画像を読み出し（Ｓ５０５）、読み出した投影画像を合成手段２９０へ出力する。

また記憶装置２４０は、書込画像に対応づけて、書込画像が撮像された時刻を記録している。画像読出手段２８０は、タイマーに応じて、画像受信タイミングに対応するスクリーン４０及び５０の書込画像をそれぞれ読み出し（Ｓ５１０）、読み出した書込画像を合成手段２９０へ出力する。そして合成手段２９０は、同一のタイミングで投影または受信されていた読出しタイミングおよび画像受信タイミングを参照することにより、元画像と書込画像を合成する（Ｓ５１５）。

尚、本例において合成手段２９０は、元画像、スクリーン４０の書込画像、スクリーン５０の書込画像において、それぞれ対応する画素の画素値を比較し、最も暗い方の画素値を選択することにより、元画像とこれらの書込画像とを合成し、合成した画像を転送手段３０５へ出力する。転送手段３０５は、合成された画像をプロジェクタ１０及びプロジェクタ３０へ転送する（Ｓ５２０）。そしてプロジェクタ１０及び３０は、合成された画像を、スクリーン４０及びスクリーン５０へそれぞれ投影する（Ｓ５２５）。

記憶装置２４０は、各会議室の音声に対応づけて、音声の記録が開始された開始時刻、および音声の記録が終了した終了時刻を記録している。画像読出手段２８０は、タイマーに応じて、音声受信タイミングに対応する音声をそれぞれ読み出し（Ｓ５３０）、読み出した音声を合成して、転送手段３０５へ出力する。転送手段３０５は、合成された音声をプロジェクタ１０及びプロジェクタ３０へ送信する。これによりプロジェクタ１０及びプロジェクタ３０における音声再生手段１６０は、受信した音声を再生する（Ｓ５３５）。以上で本フローチャートの処理は終了する。これにより、各会議室において投影が行われた順番、書込みが行われた順番、録音が行われた順番どおりに正しく、会議の内容を再現することができる。

尚、本例において合成手段２９０は、元画像、スクリーン４０の書込画像、及びスクリーン５０の書込画像を合成したが、他の例においては、元画像とスクリーン４０の書込画像とを合成してもよいし、元画像とスクリーン５０の書込画像とを合成してもよいし、書込画像を合成しなくてもよい。また本例における音声読出手段２７０は、それぞれの会議室の音声を読み出して合成して、転送手段３０５へ出力したが、他の例においては、いずれかの音声を読み出して転送手段３０５へ出力してもよい。

また本例において、画像記録手段２２０は、スクリーン４０及び５０の書込画像を、書込画像を受信したタイミングに対応づけて記憶装置２４０に記録したが、他の例においては、撮像手段１４０が書込画像を撮像したタイミングに対応づけて、これらの書込画像を記憶装置２４０に記録してもよい。この場合、プロジェクタ１０及び３０は、それぞれの撮像手段１４０が書込画像を撮像したタイミングを書込画像と共にサーバ２０へ送信し、画像記録手段２２０は、この書込画像が撮像されたタイミングを、受信した書込画像に対応づけて記憶装置２４０に記録する。同様に、本例における音声記録手段２３０は、音声を受信したタイミングに対応づけて受信した音声を記憶装置２４０に記録したが、他の例においては、音声が取得されたタイミングに対応づけて、取得された音声を記憶装置２４０に記録してもよい。

更に、本発明における遠隔会議支援システム６０において、２つのプロジェクタの一方とサーバ２０とが一体に作られもよい。これにより、サーバ２０を介さずに２つのプロジェクタ１０及び３０との間で通信をすれば良いので、サーバ２０とプロジェクタ１０又は３０とを一体に作成しない場合に比べて、通信に必要なコストを下げることができる。

図８は、サーバ２０におけるハードウェア構成の一例を示す。サーバ２０は、ホストコントローラ１０８２により相互に接続されるＣＰＵ１０００、ＲＡＭ１０２０、グラフィックコントローラ１０７５、及び表示装置１０８０を有するＣＰＵ周辺部と、Ｉ／Ｏコントローラ１０８４によりホストコントローラ１０８２に接続される通信Ｉ／Ｆ１０３０、ハードディスクドライブ１０４０、及びＣＤ−ＲＯＭドライブ１０６０を有する入出力部と、Ｉ／Ｏコントローラ１０８４に接続されるＲＯＭ１０１０、ＦＤ（フレキシブルディスク）ドライブ１０５０、及びＩ／Ｏチップ１０７０を有するレガシー入出力部とを備える。

ホストコントローラ１０８２は、ＲＡＭ１０２０と、高い転送レートでＲＡＭ１０２０をアクセスするＣＰＵ１０００及びグラフィックコントローラ１０７５とを接続する。ＣＰＵ１０００は、ＲＯＭ１０１０及びＲＡＭ１０２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィックコントローラ１０７５は、ＣＰＵ１０００等がＲＡＭ１０２０内に設けたフレームバッファ上に生成する画像データを取得し、表示装置１０８０上に表示させる。これに代えて、グラフィックコントローラ１０７５は、ＣＰＵ１０００等が生成する画像データを格納するフレームバッファを、内部に含んでもよい。

Ｉ／Ｏコントローラ１０８４は、ホストコントローラ１０８２と、比較的高速な入出力装置である通信Ｉ／Ｆ１０３０、ハードディスクドライブ１０４０、及びＣＤ−ＲＯＭドライブ１０６０とを接続する。通信Ｉ／Ｆ１０３０は、ファイバチャネル等のネットワークを介して外部の装置と通信する。ハードディスクドライブ１０４０は、サーバ２０が使用するプログラム及びデータをそれぞれ格納する。ＣＤ−ＲＯＭドライブ１０６０は、ＣＤ−ＲＯＭ１０９５からプログラム又はデータを読み取り、ＲＡＭ１０２０を介してＩ／Ｏチップ１０７０に提供する。

また、Ｉ／Ｏコントローラ１０８４には、ＲＯＭ１０１０と、ＦＤドライブ１０５０やＩ／Ｏチップ１０７０等の比較的低速な入出力装置とが接続される。ＲＯＭ１０１０は、サーバ２０の起動時にＣＰＵ１０００が実行するブートプログラムや、サーバ２０のハードウェアに依存するプログラム等をそれぞれ格納する。ＦＤドライブ１０５０は、フレキシブルディスク１０９０からプログラム又はデータを読み取り、ＲＡＭ１０２０を介してＩ／Ｏチップ１０７０に提供する。Ｉ／Ｏチップ１０７０は、フレキシブルディスク１０９０や、例えばパラレルポート、シリアルポート、キーボードポート、マウスポート等を介して各種の入出力装置を接続する。

サーバ２０に提供されるプログラムは、フレキシブルディスク１０９０、ＣＤ−ＲＯＭ１０９５、又はＩＣカード等の記録媒体に格納されて利用者によって提供される。プログラムは、Ｉ／Ｏチップ１０７０及び／又はＩ／Ｏコントローラ１０８４を介して、記録媒体から読み出されサーバ２０にインストールされ、ＲＡＭ１０２０に読み出され、そして実行される。

サーバ２０にインストールされて実行されるプログラムは、撮像機能、送信機能、合成機能、転送機能、画像記録機能、画像読出機能を備える。プログラムが、サーバ２０上で行う動作、及びプロジェクタ１０及びプロジェクタ３０に働きかけて行わせる動作のそれぞれは、図１から図７において説明したサーバ２０、プロジェクタ１０、及びプロジェクタ３０における、対応する部材の動作と同一であるから、説明を省略する。

以上に示したプログラムは、外部の記憶媒体に格納されてもよい。記憶媒体としては、フレキシブルディスク１０９０、ＣＤ−ＲＯＭ１０９５の他に、ＤＶＤやＰＤ等の光学記録媒体、ＭＤ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスク又はＲＡＭ等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムをサーバ２０に提供してもよい。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

本発明の実施形態に係る遠隔会議支援システム６０の構成の一例を示す図である。 プロジェクタ１０及び３０の詳細な構成の一例を示す図である。 サーバ２０の詳細な構成の一例を示す図である。 記憶装置１５０が格納するデータの一例を示す図である。 会議時における遠隔会議支援システム６０の動作の一例を示すフローチャートである。 図５で示したＳ１０５及びＳ３０５の動作の一例を示すフローチャートである。 会議後における遠隔会議支援システム６０の動作の一例を示すフローチャートである。 サーバ２０におけるハードウェア構成の一例を示す図である。

符号の説明

１０、３０・・・プロジェクタ、２０・・・サーバ、２５、２７・・・ファイル、４０、５０・・・スクリーン、６０・・・遠隔会議支援システム、７０・・・通信網、３００、３５０・・・利用者、４５２、４５４、４５６、４５８・・・書き込み、１００・・・投影手段、１１２・・・Ｒ光源、１１４・・・Ｇ光源、１１６・・・Ｂ光源、１２０・・・投影光生成手段、１２２・・・Ｒ液晶シャッタ、１２４・・・Ｇ液晶シャッタ、１２６・・・Ｂ液晶シャッタ、１２８・・・結合プリズム、１３０・・・光学系、１３２・・・ハーフミラー、１３４・・・投影レンズ、１４０・・・撮像手段、１５０・・・送信手段、１６０・・・音声再生手段、１７０、２１０・・・受信手段、１８０・・・タイミング発生器、１８５・・・読出指示手段、１９０・・・マイク、２２０・・・画像記録手段、２３０・・・音声記録手段、２４０・・・記憶装置、２５０・・・タイミング記録手段、２６０・・・タイミング発生器、２７０・・・音声読出手段、２８０・・・画像読出手段、２９０・・・合成手段、３０５・・・転送手段、１０００・・・ＣＰＵ、１０１０・・・ＲＯＭ、１０２０・・・ＲＡＭ、１０３０・・・通信Ｉ／Ｆ、１０４０・・・ハードディスクドライブ、１０５０・・・ＦＤドライブ、１０６０・・・ＣＤ−ＲＯＭドライブ、１０７０・・・Ｉ／Ｏチップ、１０７５・・・グラフィックコントローラ、１０８０・・・表示装置、１０８２・・・ホストコントローラ、１０８４・・・Ｉ／Ｏコントローラ、１０９０・・・フレキシブルディスク、１０９５・・・ＣＤ−ＲＯＭ

Claims (10)

1. 遠隔会議を支援する遠隔会議支援システムであって、
   遠隔地のそれぞれに設置され、投影画像を投影する２つのプロジェクタと、
   前記２つのプロジェクタに、投影すべき元画像を送信するサーバと
   を備え、
   前記２つのプロジェクタのそれぞれが、
   前記投影画像を投影したスクリーンに書き込まれた書込画像を撮像する撮像手段と、
   前記撮像手段によって撮像された前記書込画像を前記サーバに送信する送信手段と
   を有し、
   前記サーバは、前記２つのプロジェクタの一方から受信した前記書込画像を前記元画像に合成する合成手段と、
   前記合成手段により合成された画像を前記２つのプロジェクタの他方へ送信する転送手段と
   を有する遠隔会議支援システム。
2. 前記合成手段は、前記２つのプロジェクタの他方から受信した前記書込画像を前記元画像に更に合成し、前記転送手段は、前記合成手段により合成された画像を前記２つのプロジェクタの一方へ、更に送信する請求項１に記載の遠隔会議支援システム。
3. 前記２つのプロジェクタの一方と前記サーバとが一体に作られている請求項１に記載の遠隔会議支援システム。
4. 前記サーバは、
   前記元画像を予め記憶している記憶装置と、
   前記２つのプロジェクタのいずれかの前記撮像手段が取得した前記書込画像を前記記憶装置に順次記録する画像記録手段と、
   前記記憶装置から前記元画像と前記書込画像とを順次読み出す画像読出手段と
   を更に有し、
   前記合成手段は、読み出された前記元画像に前記書込画像を合成する手段を更に有し、前記転送手段は合成された画像を、前記２つのプロジェクタのいずれかへ送信する手段を更に有する請求項２に記載の遠隔会議支援システム。
5. 前記サーバは、
   前記元画像を読み出した読出しタイミングを、読み出した前記元画像に対応づけて前記記憶装置に記録するタイミング記録手段を更に有し、
   前記画像記録手段は、前記２つのプロジェクタのいずれかから前記書込画像を受信した画像受信タイミングを、受信した前記書込画像に対応づけて前記記憶装置に記録し
   前記画像読出手段は、前記記憶装置から、前記元画像、前記読出しタイミング、前記書込画像、および前記画像受信タイミングを読み出し、
   前記合成手段は、同一のタイミングで投影または受信されていた前記読出しタイミングおよび前記画像受信タイミングを参照することにより、前記元画像と前記書込画像を合成し、前記転送手段は、前記合成手段が合成した画像を送信する手段を更に有する請求項４に記載の遠隔会議支援システム。
6. 前記２つのプロジェクタは、
   音声を取得するマイクと、
   音声を再生する音声再生手段とを更に有し、
   前記送信手段は、前記マイクによって取得された前記音声を前記サーバへ更に送信し、
   前記サーバは、
   前記２つのプロジェクタのいずれかから前記音声を受信した音声受信タイミングを、受信した前記音声に対応付けて前記記憶装置に記録する音声記録手段と、
   前記記憶装置から前記音声及び前記音声受信タイミングを読み出す音声読出手段とを更に有し、
   前記音声再生手段は、前記音声受信タイミングで前記記憶装置から読み出された前記音声を再生する請求項５に記載の遠隔会議支援システム。
7. 遠隔地のそれぞれに設置され、投影画像を投影する２つのプロジェクタと、
   前記２つのプロジェクタに、投影すべき元画像を送信するサーバと
   を備え、遠隔会議を支援する遠隔会議支援システムを制御する遠隔会議支援システム制御方法であって、
   前記２つのプロジェクタのそれぞれが、
   前記投影画像を投影したスクリーンに書き込まれた書込画像を撮像する撮像ステップと、
   前記撮像ステップによって撮像された前記書込み画像を前記サーバに送信する送信ステップと
   を有し、
   前記サーバは、前記２つのプロジェクタの一方から受信した前記書込画像を前記元画像に合成する合成ステップと、
   前記合成ステップにより合成された画像を前記２つのプロジェクタの他方へ送信する転送ステップと
   を有する遠隔会議支援システム制御方法。
8. 前記２つのプロジェクタのいずれかの前記撮像手段が取得した前記書込画像を、前記サーバが有する、前記元画像を予め記憶している記憶装置に順次記録する画像記録ステップと、
   前記記憶装置から前記元画像と前記書込画像とを順次読み出す画像読出ステップと
   を更に有し、
   前記合成ステップは、読み出された前記元画像に前記書込画像を合成するステップを更に有し、前記転送ステップは合成された画像を、前記２つのプロジェクタのいずれかへ送信するステップを更に有する請求項７に記載の遠隔会議支援システム制御方法。
9. 遠隔地のそれぞれに設置され、投影画像を投影する２つのプロジェクタに働きかけて動作させると共に、前記２つのプロジェクタに投影すべき元画像を送信するサーバに働きかけて動作させるプログラムであって、
   前記２つのプロジェクタのそれぞれに、
   前記投影画像を投影したスクリーンに書き込まれた書込画像を撮像する撮像機能と、
   前記撮像ステップによって撮像された前記書込み画像を前記サーバに送信する送信機能とを実現させ、
   前記サーバに、前記２つのプロジェクタの一方から受信した前記書込画像を前記元画像に合成する合成機能と、
   前記合成ステップにより合成された画像を前記２つのプロジェクタの他方へ送信する転送機能と
   を実現させるプログラム。
10. 前記サーバに、
    前記２つのプロジェクタのいずれかの前記撮像手段が取得した前記書込画像を、前記サーバが有する、前記元画像を予め記憶している記憶装置に順次記録する画像記録機能と
    前記記憶装置から前記元画像と前記書込画像とを順次読み出す画像読出機能と
    を更に実現させ、
    前記合成機能は、読み出された前記元画像に前記書込画像を合成する機能を更に有し、
    前記転送機能は合成された画像を、前記２つのプロジェクタのいずれかへ送信する機能を更に有する請求項９に記載のプログラム。

Images