JP2020098225A - 画像抽出方法、及びプロジェクター - Google Patents

Abstract

【課題】ユーザーによって書き込まれた画像のみを保存することが可能な画像抽出方法、及びプロジェクターを提供する。【解決手段】第１画像４１が投写される第１領域３１と、第１画像４１に対応して第２画像４２が書き込まれる第２領域３２と、を含む全体領域３０を撮像して第１撮像画像を取得し、第１領域３１に第１画像４１が投写されていない状態で、全体領域３０を撮像して第２撮像画像を取得し、第１撮像画像と第２撮像画像との差分に基づいて、全体領域３０のうち第２領域３２を抽出する。【選択図】図４

Description

本発明は、画像抽出方法、及びプロジェクターに関する。

画像抽出方法として、例えば、特許文献１には、ホワイトボードへ、プロジェクターから投写した画像に対して書き込みを行った後で、プロジェクターによる投写を中断する、又は、白色光を投写する、と共にプロジェクターが有する撮像部による撮像を行って、書き込まれた部分のみを取得する方法が開示されている。

特開２０１３−６５０４６号公報

特許文献１に記載の技術においては、ユーザーが、ホワイトボードなど投写面の一部に書き込みを行った場合であっても、投写面の全体が取得されるので、ユーザーにとって不要な部分まで取得されることになり、視認性が悪いという課題がある。

本願の画像抽出方法は、第１画像が投写される第１領域と、第２画像が書き込まれる第２領域と、を含む全体領域を撮像して第１撮像画像を取得し、前記第１領域に前記第１画像が投写されていない状態で、前記全体領域を撮像して第２撮像画像を取得し、前記第１撮像画像と前記第２撮像画像との差分に基づいて、前記第１撮像画像又は前記第２撮像画像から、前記全体領域のうち前記第２領域を抽出することを特徴とする。

上記の画像抽出方法において、前記差分に基づいて、前記全体領域を前記第１領域と前記第２領域とに分割し、前記第２領域を抽出することが望ましい。

上記の画像抽出方法において、前記全体領域には、第３画像が書き込まれる第３領域が含まれ、前記差分に基づいて、前記第２領域と前記第３領域とを抽出することが望ましい。

上記の画像抽出方法において、抽出された前記第２領域の中から、前記第２画像の分布に基づいて、１つ又は複数の第４領域を抽出することが望ましい。

上記の画像抽出方法において、前記第２領域及び前記第４領域を含む複数の領域のうち一つの領域を選択させ、選択された前記領域を抽出することが望ましい。

上記の画像抽出方法において、前記第１領域に前記第１画像が投写されていない状態は、前記第１領域に白画像又は黒画像を投写した状態であることが望ましい。

本願のプロジェクターは、第１画像を投写する投写部と、前記第１画像が投写される第１領域と、第２画像が書き込まれる第２領域と、を含む全体領域を撮像する撮像部と、前記撮像部及び前記投写部を制御する制御部と、を備え、前記制御部は、前記投写部から前記第１画像を投写させた状態で前記撮像部に前記全体領域を撮像させて第１撮像画像を取得させ、前記投写部に前記第１画像の投写を停止させた状態で前記全体領域を撮像させて第２撮像画像を取得させ、前記第１撮像画像と前記第２撮像画像との差分に基づいて、前記第１撮像画像又は前記第２撮像画像から、前記全体領域のうち前記第２領域を抽出することを特徴とする。

上記のプロジェクターにおいて、前記制御部は、前記差分に基づいて、前記全体領域を前記第１領域と前記第２領域とに分割し、前記第２領域を抽出することが望ましい。

上記のプロジェクターにおいて、前記全体領域には、第３画像が書き込まれる第３領域が含まれ、前記制御部は、前記差分に基づいて、前記第２領域と前記第３領域とを抽出することが望ましい。

上記のプロジェクターにおいて、前記制御部は、抽出された前記第２領域の中から、前記第２画像の分布に基づいて、１つ又は複数の第４領域を抽出することが望ましい。

上記のプロジェクターにおいて、前記制御部は、前記第２領域及び前記第４領域を含む複数の領域のうち一つの領域を選択させ、選択された前記領域を抽出することが望ましい。

上記のプロジェクターにおいて、前記第１領域に前記第１画像が投写されていない状態は、前記第１領域に白画像又は黒画像を投写した状態であることが望ましい。

第１実施形態の画像表示システムの構成を示す概略斜視図。 プロジェクターの構成を示すブロック図。 プロジェクターの一部である投写部の構成を示すブロック図。 ホワイトボードに表示された画像の一例を模式的に示す図。 画像抽出方法を示すフローチャート。 画像抽出方法の一部の方法を具体的に示す模式図。 画像抽出方法の一部の方法を具体的に示す模式図。 画像抽出方法の一部の方法を具体的に示す模式図。 第２実施形態のホワイトボードに表示された画像の一例を模式的に示す図。 第２実施形態の画像抽出方法を示すフローチャート。 画像抽出方法の一部の方法を具体的に示す模式図。 画像抽出方法の一部の方法を具体的に示す模式図。 画像抽出方法の一部の方法を具体的に示す模式図。 画像抽出方法の一部の方法を具体的に示す模式図。 画像抽出方法の一部の方法を具体的に示す模式図。 画像抽出方法の一部の方法を具体的に示す模式図。 変形例の画像抽出方法の一部を示す図。 変形例の画像抽出方法の一部を示す図。

以下、実施形態の画像表示システムについて、図面を参照して説明する。

（第１実施形態）
図１は、本実施形態の画像表示システムの構成を示す概略斜視図である。以下、画像表示システムの構成を、図１を参照しながら説明する。

図１に示すように、画像表示システム１００は、プロジェクター１と、ホワイトボード２と、を備えている。プロジェクター１は、外部から入力される画像情報、又は、予め内部に記憶されている画像情報に基づく画像を、ホワイトボード２に投写する。

ホワイトボード２は、プロジェクター１から画像が投写される被投写部材であり、画像が投写される投写面には、マーカーなどを用いて手書きが可能になっている。本実施形態のプロジェクター１は、ホワイトボード２の一部の領域に向けて画像を投写する。

図２は、プロジェクターの構成を示すブロック図である。以下、プロジェクターの構成を、図２を参照しながら説明する。

図２に示すように、プロジェクター１は、制御部１０と、記憶部１１と、入力操作部１２と、撮像部１４と、画像情報入力部１５と、画像情報処理部１６と、投写部１７と、を備えて構成されている。プロジェクター１は、画像供給装置１８から画像情報入力部１５に入力される画像情報に基づいて、投写部１７からホワイトボード２に画像を投写する。

制御部１０は、１つ又は複数のプロセッサーを備えて構成され、例えば、記憶部１１に記憶されている制御プログラムに従って動作することにより、プロジェクター１の動作を統括制御する。

記憶部１１は、ＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）等のメモリーを備えて構成される。ＲＡＭは、各種データ等の一時記憶に用いられ、ＲＯＭは、プロジェクター１の動作を制御するための制御プログラムや制御データ等を記憶する。また、記憶部１１は、投写部１７から投写するための画像情報を記憶していてもよい。

入力操作部１２は、ユーザーがプロジェクター１に対して各種指示を行うための複数の操作キーを備えている。入力操作部１２が備える操作キーとしては、電源のＯＮとＯＦＦとを切り替えるための電源キー、各種設定を行うためのメニューを表示させるメニューキー、メニューの項目を選択するための方向キー等がある。

ユーザーが入力操作部１２の各種操作キーを操作すると、入力操作部１２は、ユーザーの操作内容に応じた操作信号を制御部１０に出力する。なお、遠隔操作が可能な図示しないリモコンを、入力操作部１２として用いる構成としてもよい。この場合、リモコンは、ユーザーの操作内容に応じた赤外線の操作信号を発信し、図示しないリモコン信号受信部がこれを受信して制御部１０に伝達する。

撮像部１４は、例えば、レンズ等の光学系にて集光された光を電気信号に変換する撮像素子であるＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を備えたカメラである。撮像部１４は、制御部１０の制御に基づいてホワイトボード２を撮像し、その撮像結果である画像情報を取得する。撮像部１４は、取得した画像情報を制御部１０に出力する。

画像情報入力部１５は、コンピューターや画像再生装置等の画像供給装置１８に接続され、画像供給装置１８から画像情報の供給を受ける。また、画像情報入力部１５は、制御部１０から、記憶部１１に記憶されている画像情報の供給を受けることができる。画像情報入力部１５は、入力された画像情報を画像情報処理部１６に出力する。

画像情報処理部１６は、画像情報入力部１５から入力される画像情報に対して様々な処理を施し、制御部１０の指示に従って、処理後の画像情報を投写部１７のライトバルブ駆動部２４（図３参照）に出力する。例えば、画像情報処理部１６は、明るさやコントラスト等の画質を調整する処理等を必要に応じて画像情報に施す。

なお、画像情報入力部１５及び画像情報処理部１６は、１つ又は複数のプロセッサー等によって構成されてもよいし、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の専用の処理装置によって構成されてもよい。

また、制御部１０は、撮像画像処理部１９を備えている。撮像画像処理部１９は、撮像部１４で撮像した撮像画像を取得し、取得した撮像画像に歪み補正や背景除去などの画像処理を施したり、領域を分割する処理を施したりする。

図３は、プロジェクターの一部である投写部の構成を示すブロック図である。以下、投写部の構成を、図３を参照しながら説明する。

図３に示すように、投写部１７は、光源２１、光変調装置としての３つの液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂ、投写光学系２３、ライトバルブ駆動部２４等を備えて構成されている。投写部１７は、光源２１から射出された光を、液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂで変調して画像光を形成し、レンズ及びミラーの少なくとも一方を含む投写光学系２３からこの画像光を投写してホワイトボード２に画像を表示する。

光源２１は、超高圧水銀ランプやメタルハライドランプ等の放電型の光源ランプ、又は発光ダイオードや半導体レーザー等の固体光源を含んで構成されている。光源２１から射出された光は、図示しないインテグレーター光学系によって輝度分布が略均一な光に変換され、図示しない色分離光学系によって光の３原色である赤色、緑色、青色の各色光成分に分離された後、それぞれ液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂに入射する。

液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂは、それぞれ一対の透明基板間に液晶が封入された透過型の液晶パネル等によって構成される。各液晶パネルには、マトリクス状に配列された複数の画素からなる矩形の画像形成領域２２ｉが形成されており、液晶に対して画素毎に駆動電圧を印加可能になっている。

ライトバルブ駆動部２４は、液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂの画像形成領域２２ｉに画像を形成する。具体的には、ライトバルブ駆動部２４は、画像情報処理部１６から入力される画像情報に応じた駆動電圧を、画像形成領域２２ｉの各画素に印加し、各画素を画像情報に応じた光透過率に設定する。

光源２１から射出された光は、液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂの画像形成領域２２ｉを透過することによって画素毎に変調され、画像情報に応じた画像光が色光毎に形成される。形成された各色の画像光は、図示しない色合成光学系によって画素毎に合成されてカラー画像を表す画像光となり、投写光学系２３によってホワイトボード２に拡大投写される。この結果、ホワイトボード２には、画像情報入力部１５に入力された画像情報に基づく画像が表示される。

図４は、ホワイトボードに表示された画像の一例を模式的に示す図である。以下、ホワイトボードに表示された画像の一例を、図４を参照しながら説明する。

図４に示すように、ホワイトボード２には、プロジェクター１から画像が投写され得る領域３０が含まれている。これ以降、領域３０を、全体領域３０とも呼ぶ。撮像部１４は、少なくとも全体領域３０が含まれる範囲を撮像できるように設定されている。図４では、全体領域３０の一部である第１領域３１にプロジェクター１から第１画像４１が投写された状態が示されている。全体領域３０のうち第１領域３１以外の第２領域３２には、プロジェクター１から有意な画像が投写されておらず、例えば、白色無地の白画像が投写されている。このため、ユーザーは、マーカー等で第２領域３２に第２画像４２を書き込むことができる。

具体的には、第１領域３１に投写された第１画像４１は、例えば、会議などで検討するための基となるパワーポイントなどの資料である。第２領域３２に書き込んだ第２画像４２は、例えば、第１画像４１を見ながら会議で検討したことをマーカーで記録した画像、言い換えれば、第１画像４１に対応して書き込まれた会議録などの画像である。

本実施形態では、例えば、会議録として記録した第２領域３２の第２画像４２のみを、全体領域３０から抽出して保存できるようにする方法を、以下に説明する。

図５は、全体領域から第２領域を抽出する画像抽出方法を示すフローチャートである。図６Ａ〜図６Ｃは、画像抽出方法を具体的に示す模式図である。以下、画像抽出方法を、図５及び図６Ａ〜図６Ｃを参照しながら説明する。

なお、ホワイトボード２の第１領域３１には、プロジェクター１から第１画像４１が投写されている。ホワイトボード２の第２領域３２には、マーカーで第２画像４２が書かれている。上記したように、第２画像は、例えば、ホワイトボード２にマーカーで記録した会議録情報である。

また、制御部１０は、予め行われるキャリブレーション処理により、撮像された画像内における全体領域３０の位置や大きさを事前に把握している。キャリブレーション処理とは、複数の基準点を含むパターン画像をホワイトボード２に投写して、これを撮像部１４で撮像し、撮像された画像の中から複数の基準点を検出することにより、投写する画像内の位置と、撮像された画像内の位置とを対応付ける処理である。

ユーザーが画像の撮像を指示すると、制御部１０は、図５に示すフローに従って動作を開始する。撮像を指示する方法としては、例えば、入力操作部１２のメニューキーを操作したときに表示されるメニュー画面の中から「書込み画像の記録」という項目を選択することにより、撮像を指示するようにしてもよい。また、撮像を指示するための専用のボタンを入力操作部１２に備えるようにしてもよい。

図５に示すように、ステップＳ１１では、制御部１０は、ホワイトボード２の全体領域３０を撮像するように撮像部１４を制御する。

制御部１０は、撮像した画像を第１撮像画像５１として撮像部１４から取得する。制御部１０は、取得した第１撮像画像５１に、歪み補正や背景除去などの処理を施すように撮像画像処理部１９を制御する。ここで、歪み補正とは、ホワイトボード２を斜め方向から撮像することに伴う画像の歪みを補正する処理であり、背景除去とは、撮像された画像のうち、全体領域３０の外側の領域を排除する処理である。また、制御部１０は、画像処理が施された第１撮像画像５１を記憶部１１に保存する。

図６Ａに示すように、画像処理後の第１撮像画像５１には、全体領域３０が含まれ、全体領域３０には、プロジェクター１から投写した第１画像４１が表示されている第１領域３１と、マーカーによって第２画像４２が書かれた第２領域３２とが含まれている。

次に、ステップＳ１２では、制御部１０は、投写部１７から全体領域３０に白画像を投写させる。具体的には、制御部１０は、白画像に対応する画像情報を画像情報入力部１５に出力する。白画像とは、全体領域３０の全域が白色となる画像であり、液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂの画像形成領域２２ｉに備わる全ての画素の光透過率を最大にする画像である。白画像を投写させる期間は、ユーザーが画像の変化に気づかない程度であることが好ましく、例えば、１フレーム期間である。

なお、投写する画像は白画像であることに限定されず、全体領域３０から第２領域３２が抽出できればよく、例えば、黒画像やグレー画像でもよい。黒画像とは、全体領域３０の全域が黒色となる画像であり、画像形成領域２２ｉの全ての画素の光透過率を最小にする画像である。また、グレー画像とは、全体領域３０の全域が灰色となる画像であり、画像形成領域２２ｉの全ての画素の光透過率が白画像と黒画像の間の状態となる画像である。グレー画像の場合、例えば、照明環境、ホワイトボード２の反射特性、カメラ特性などに応じて、最適な照度になるように、言い換えれば、撮像画像のＳ／Ｎ比が高くなるように、グレー階調を調整することが好ましい。

ステップＳ１３では、制御部１０は、投写部１７によって白画像を投写するタイミングに合わせて、撮像部１４に全体領域３０を撮像させる。制御部１０は、撮像した画像を第２撮像画像５２として撮像部１４から取得する。制御部１０は、取得した第２撮像画像５２に、歪み補正や背景除去などの処理を施すように撮像画像処理部１９を制御する。また、制御部１０は、画像処理が施された第２撮像画像５２を記憶部１１に保存する。第２撮像画像５２は、図６Ｂに示すように、第１領域３１に対応する部分に第１画像４１の表示がなくなり、第２領域３２に対応する部分に第２画像４２が表示された画像である。

ステップＳ１４では、制御部１０は、第１撮像画像５１と第２撮像画像５２との差分を生成するように撮像画像処理部１９を制御する。まず、制御部１０は、第１撮像画像５１及び第２撮像画像５２を記憶部１１から読み出す。撮像画像処理部１９は、制御部１０の指示に基づいて、第１撮像画像５１と第２撮像画像５２との差分を生成する。差分を生成する方法としては、例えば、第１撮像画像５１と第２撮像画像５２との各画素値の差分を求める。

ステップＳ１５では、制御部１０は、第１撮像画像５１と第２撮像画像５２との差分に基づいて領域分割するように、撮像画像処理部１９を制御する。具体的には、撮像画像処理部１９は、全体領域３０を、差分が所定値以上の部分と、所定値未満の部分に区分する。この結果、差分が所定未満となる部分には、第２領域３２と、第１領域３１の一部が含まれる。撮像画像処理部１９は、差分が所定値未満の部分に含まれる最大の矩形の領域を第２領域３２と定め、第２領域３２以外の領域を第１領域３１と定める。撮像画像処理部１９は、第１撮像画像５１を、第１領域３１と第２領域３２とに分割する。

ステップＳ１６では、制御部１０は、第１撮像画像５１の中から、図６Ｃに示すように、第２領域３２の画像を抽出する。抽出した画像を画像５１ａとする。なお、第２撮像画像５２から第２領域３２の画像を抽出するようにしてもよい。

ステップＳ１７では、制御部１０は、抽出した第２領域３２の画像５１ａを、記憶部１１に保存する。以上により、画像抽出方法の処理を終了する。これ以降、ユーザーは、必要なときに、入力操作部１２を操作して保存した画像５１ａをプロジェクター１から投写させたり、図示しない外部の機器に転送したりすることが可能である。

このような画像抽出方法によれば、第１撮像画像５１と第２撮像画像５２との差分に基づいて、全体領域３０から第２領域３２の画像５１ａを抽出するので、例えば、マーカーでホワイトボード２に書き込んだ会議録のみを保存することができる。よって、手書きで書いた会議録の情報だけを保存したい場合、不要な領域までが含まれる画像を取り込む場合と比較して、見やすかったりデータ量が少なかったりなど、ユーザーにとって利便性を向上させることができる。

以上説明したように、第１実施形態の画像抽出方法、及びプロジェクター１によれば、以下の効果を得ることができる。

（１）第１実施形態によれば、全体領域３０から第２領域３２のみを抽出するので、例えば、会議録として書き込みを行った第２画像４２を取り込むことができる。よって、不要な領域までを含む画像を取り込む場合と比較して、見やすくできるなど、ユーザーにとって利便性を高くすることができる。

（第２実施形態）
図７は、第２実施形態のホワイトボードに表示された画像の一例を模式的に示す図である。図８は、第２実施形態の画像抽出方法を示すフローチャートである。図９Ａ〜図９Ｄは、画像抽出方法を具体的に示す模式図である。以下、第２実施形態の画像抽出方法を、図７、図８、図９Ａ、図９Ｂ、図９Ｃ、図９Ｄを参照しながら説明する。

第１実施形態の画像抽出方法は、全体領域３０から第２領域３２を抽出して保存しているが、第２実施形態の画像抽出方法は、第２領域３２から更に小さな領域を抽出し、その中から所望の領域を選択させて保存する。その他の構成については概ね第１実施形態と同様であるため、第２実施形態では、第１実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略する。

図７に示すように、第２実施形態のホワイトボード２の第１領域３１には、第１実施形態と同様に、プロジェクター１から投写された第１画像４１が表示されている。ホワイトボード２の第２領域３２には、会議録など文字を含む第２画像１４２が所定の距離をあけ離間して書かれている。

図８に示すように、第２実施形態の画像抽出方法におけるステップＳ２１〜ステップＳ２６は、第１実施形態のステップＳ１１〜ステップＳ１６に対応しており、同じ処理方法である。このため、ステップＳ２６までに第２領域３２の画像が抽出されて記憶部１１に保存される。

ステップＳ２７では、制御部１０は、抽出した第２領域３２から複数の小領域３４ａ，３４ｂを抽出するように、撮像画像処理部１９を制御する。

撮像画像処理部１９は、第２領域３２の画像を分析し、ホワイトボード２の背景色と異なる色を有する有色部を判別する。さらに、撮像画像処理部１９は、近接する有色部の集まりを１つの集合とみなし、各集合を含む１つ又は複数の矩形の小領域を設定する。つまり、撮像画像処理部１９は、第２領域３２内における有色部の分布、即ち第２画像１４２の分布に基づいて、１つ又は複数の小領域を設定する。図７の例では、第２領域３２の上側に書かれた画像１４２ａを含む小領域３４ａと、第２領域の下側に書かれた画像１４２ｂを含む小領域３４ｂの２つの小領域３４ａ，３４ｂが設定される。小領域３４ａ，３４ｂは第４領域に相当する。

ステップＳ２８では、制御部１０は、保存したい領域をユーザーに選択させる。例えば、入力操作部１２に備えられた方向キーがユーザーによって操作される度に、保存の対象となる領域が順次切り替わるようにする。具体的には、図９Ｄ及び図９Ｅに示すように、制御部１０は、画像情報処理部１６に指示をして、領域を囲む枠を順次切り替える。ユーザーが、所望の領域を選択して決定キーを押すと、制御部１０は、保存の対象となる領域を決定する。撮像画像処理部１９は、決定した領域内の画像を抽出する。

ステップＳ２９では、抽出した領域の画像を保存する。制御部１０は、選択された領域の画像を、記憶部１１に保存するように制御する。例えば、小領域３４ａが選択される場合は、図９Ｆに示すように、小領域３４ａが抽出される。抽出した画像を画像１５１ａ１とする。以上により、画像抽出方法の処理を終了する。

なお、ユーザーが選択可能な領域は、小領域３４ａ又は小領域３４ｂに限定されるものではなく、例えば、第２領域３２や、全体領域３０、或いは、小領域３４ａ，３４ｂの両方が選択肢に含まれていてもよい。

以上説明したように、第２実施形態の画像抽出方法、及びプロジェクター１によれば、以下の効果を得ることができる。

（２）第２実施形態によれば、第２領域３２から更に小さな領域である小領域３４ａ，３４ｂを抽出するので、ユーザーにとって必要な領域の画像のみを抽出して保存することができる。更に、小領域３４ａ，３４ｂ、第２領域３２、全体領域３０を選択して抽出できるので、ユーザーが必要なシチュエーションに合わせた画像を保存することができる。

（変形例）
また、上記実施形態は、以下のように変更してもよい。

上記した実施形態では、全体領域３０の左側半分の領域を第１領域３１、右側半分の領域を第２領域３２として、全体領域３０から第２領域３２を抽出する方法を説明したが、これに限定されず、全体領域３０の中央の領域にマーカーで手書きをして、その周囲の領域にプロジェクター１によって画像を投写するようにしてもよい。具体的には、図１０に示すように、全体領域３０のうち、周囲の領域を第１領域３１とし、中央の領域を第２領域３２とし、手書きで書かれた第２領域３２を抽出して保存する。

上記した実施形態では、全体領域３０の左側半分の領域を第１領域３１、右側半分の領域を第２領域３２として、全体領域３０から第２領域３２を抽出する方法を説明したが、これに限定されず、全体領域３０のうち右端の領域と左端の領域とを手書きの領域として、右端の領域及び左端の領域を抽出して保存するようにしてもよい。具体的には、図１１に示すように、全体領域３０のうち第１画像４１が投写された中央の領域を第１領域３１とし、左端の領域を第２領域３２とし、右端の領域を第３領域３３とし、手書きで書かれた第２画像４２を含む第２領域３２と、手書きで書かれた第３画像４３を含む第３領域３３とを抽出して保存する。このとき、第２領域３２のみ、第３領域３３のみ、及び第２領域３２と第３領域３３の双方の３つの選択肢の中から１つをユーザーに選択させて、選択された領域を保存するようにしてもよい。

上記した実施形態では、プロジェクター１に内蔵されたカメラでホワイトボード２の撮像を行っているが、これに限定されず、外付けのカメラを用いてホワイトボード２を撮像するようにしてもよい。また、この場合の画像抽出方法は、プロジェクター１で行うようにしてもよいし、ＰＣを用いて行うようにしてもよい。

上記した第１実施形態では、ステップＳ１１、ステップＳ１２、ステップＳ１３の順に工程を進めているが、これに限定されず、ステップＳ１２、ステップＳ１３、ステップＳ１１の順に工程を進めるようにしてもよい。なお、第２実施形態も同様である。

上記した実施形態では、プロジェクター１が画像を投写し得る範囲を全体領域３０としたが、撮像部１４がホワイトボード２の全体を撮像し、撮像画像処理部１９がエッジ検出等によりホワイトボード２の境界を検出可能な構成の場合には、ホワイトボード２の全体を全体領域３０としてもよい。

上記した実施形態において、第１撮像画像５１から、第２領域３２の画像とともに、第１領域３１の画像、即ち第１画像４１も抽出し、第１画像４１と第２領域３２の画像とを対応付けて記憶部１１に保存するようにしてもよい。また、第１撮像画像５１から第１画像４１を抽出する代わりに、画像情報処理部１６に第１画像４１をキャプチャーさせ、キャプチャーされた第１画像４１と第２領域３２の画像とを対応付けて保存するようにしてもよい。

上記した実施形態において、画像抽出方法を、プロジェクター１が実行することに限定されず、ＰＣなど情報処理装置とプロジェクター１とを含むシステムにおいて、情報処理装置が実行するようにしてもよい。

以下に、実施形態から導き出される内容を記載する。

画像抽出方法は、第１画像が投写される第１領域と、第２画像が書き込まれる第２領域と、を含む全体領域を撮像して第１撮像画像を取得し、前記第１領域に前記第１画像が投写されていない状態で、前記全体領域を撮像して第２撮像画像を取得し、前記第１撮像画像と前記第２撮像画像との差分に基づいて、前記第１撮像画像又は前記第２撮像画像から、前記全体領域のうち前記第２領域を抽出することを特徴とする。

この方法によれば、全体領域から第２領域を抽出するので、書き込みを行った第２画像のみを取り込むことができる。よって、第２画像ではない領域も抽出する場合と比較して、第２画像の視認性を向上できる。

上記の画像抽出方法において、前記差分に基づいて、前記全体領域を前記第１領域と前記第２領域とに分割し、前記第２領域を抽出することが望ましい。

この方法によれば、第１領域と第２領域とに分割してから第２領域を抽出するので、第２領域に、第２領域以外の領域が多く含まれることを抑えることができる。

上記の画像抽出方法において、前記全体領域には、第３画像が書き込まれる第３領域が含まれ、前記差分に基づいて、前記第２領域と前記第３領域とを抽出することが望ましい。

この方法によれば、全体領域から第２領域と第３領域とに抽出することが可能となるので、抽出する領域の範囲を広げることができる。

上記の画像抽出方法において、抽出された前記第２領域の中から、前記第２画像の分布に基づいて、１つ又は複数の第４領域を抽出することが望ましい。

この方法によれば、第２領域から更に小さな領域を抽出するので、ユーザーにとって必要な領域の画像を絞り込むことができる。

上記の画像抽出方法において、前記第２領域及び前記第４領域を含む複数の領域のうち一つの領域を選択させ、選択された前記領域を抽出することが望ましい。

この方法によれば、第２領域及び第４領域を選択して抽出することが可能となるので、ユーザーにとって必要な領域の画像を抽出することができる。

上記の画像抽出方法において、前記第１領域に前記第１画像が投写されていない状態は、前記第１領域に白画像又は黒画像を投写した状態であることが望ましい。

この方法によれば、第１画像の１フレームに白画像又は黒画像を挿入するので、白画像又は黒画像のときに全体領域を撮像することにより、書き込まれた第２画像のみの画像を撮像することができる。

プロジェクターは、第１画像を投写する投写部と、前記第１画像が投写される第１領域と、第２画像が書き込まれる第２領域と、を含む全体領域を撮像する撮像部と、前記撮像部及び前記投写部を制御する制御部と、を備え、前記制御部は、前記投写部から前記第１画像を投写させた状態で前記撮像部に前記全体領域を撮像させて第１撮像画像を取得させ、前記投写部に前記第１画像の投写を停止させた状態で前記全体領域を撮像させて第２撮像画像を取得させ、前記第１撮像画像と前記第２撮像画像との差分に基づいて、前記第１撮像画像又は前記第２撮像画像から、前記全体領域のうち前記第２領域を抽出することを特徴とする。

この構成によれば、全体領域から第２領域を抽出するので、書き込みを行った第２画像のみを取り込むことができる。よって、第２画像ではない領域を多く抽出する場合と比較して、視認性を向上できるなど、ユーザーにとって利便性を高くすることができる。

上記のプロジェクターにおいて、前記制御部は、前記差分に基づいて、前記全体領域を前記第１領域と前記第２領域とに分割し、前記第２領域を抽出することが望ましい。

この構成によれば、第１領域と第２領域とに分割してから第２領域を抽出するので、第２領域に、第２領域以外の領域が多く含まれることを抑えることができる。

上記のプロジェクターにおいて、前記全体領域には、第３画像が書き込まれる第３領域が含まれ、前記制御部は、前記差分に基づいて、前記第２領域と前記第３領域とを抽出することが望ましい。

この構成によれば、全体領域から第２領域と第３領域とに抽出することが可能となるので、抽出する領域の範囲を広げることができる。

上記のプロジェクターにおいて、前記制御部は、抽出された前記第２領域の中から、前記第２画像の分布に基づいて、１つ又は複数の第４領域を抽出することが望ましい。

この構成によれば、第２領域から更に小さな領域を抽出するので、ユーザーにとって必要な領域の画像を絞り込むことができる。

上記のプロジェクターにおいて、前記制御部は、前記第２領域及び前記第４領域を含む複数の領域のうち一つの領域を選択させ、選択された前記領域を抽出することが望ましい。

この構成によれば、第２領域及び第４領域を選択して抽出することが可能となるので、ユーザーにとって必要な領域の画像を抽出することができる。

上記のプロジェクターにおいて、前記第１領域に前記第１画像が投写されていない状態は、前記第１領域に白画像又は黒画像を投写した状態であることが望ましい。

この構成によれば、第１画像の１フレームに白画像又は黒画像を挿入するので、白画像又は黒画像のときに全体領域を撮像することにより、書き込まれた第２画像のみの画像を撮像することができる。

１…プロジェクター、２…ホワイトボード、３…支持部材、１０…制御部、１１…記憶部、１２…入力操作部、１４…撮像部、１５…画像情報入力部、１６…画像情報処理部、１７…投写部、１８…画像供給装置、１９…撮像画像処理部、２１…光源、２２Ｒ，２２Ｇ，２２Ｂ…液晶ライトバルブ、２２ｉ…画像形成領域、２３…投写光学系、２４…ライトバルブ駆動部、３０…全体領域、３１…第１領域、３２…第２領域、３２ａ…有効領域、３３…第３領域、３４，３４ａ，３４ｂ…第４領域としての小領域、４１…第１画像、４２…第２画像、４３…第３画像、５１…第１撮像画像、５１ａ，１４２ａ，１４２ｂ，１５１ａ，１５１ａ１…画像、５２…第２撮像画像、１００…画像表示システム、１４２…第２画像。

Claims (12)

1. 第１画像が投写される第１領域と、第２画像が書き込まれる第２領域と、を含む全体領域を撮像して第１撮像画像を取得し、
   前記第１領域に前記第１画像が投写されていない状態で、前記全体領域を撮像して第２撮像画像を取得し、
   前記第１撮像画像と前記第２撮像画像との差分に基づいて、前記第１撮像画像又は前記第２撮像画像から、前記全体領域のうち前記第２領域を抽出することを特徴とする画像抽出方法。
2. 請求項１に記載の画像抽出方法であって、
   前記差分に基づいて、前記全体領域を前記第１領域と前記第２領域とに分割し、前記第２領域を抽出することを特徴とする画像抽出方法。
3. 請求項１又は請求項２に記載の画像抽出方法であって、
   前記全体領域には、第３画像が書き込まれる第３領域が含まれ、前記差分に基づいて、前記第２領域と前記第３領域とを抽出することを特徴とする画像抽出方法。
4. 請求項１乃至請求項３のいずれか一項に記載の画像抽出方法であって、
   抽出された前記第２領域の中から、前記第２画像の分布に基づいて、１つ又は複数の第４領域を抽出することを特徴とする画像抽出方法。
5. 請求項４に記載の画像抽出方法であって、
   前記第２領域及び前記第４領域を含む複数の領域のうち一つの領域を選択させ、選択された前記領域を抽出することを特徴とする画像抽出方法。
6. 請求項１乃至請求項５のいずれか一項に記載の画像抽出方法であって、
   前記第１領域に前記第１画像が投写されていない状態は、前記第１領域に白画像又は黒画像を投写した状態であることを特徴とする画像抽出方法。
7. 第１画像を投写する投写部と、
   前記第１画像が投写される第１領域と、第２画像が書き込まれる第２領域と、を含む全体領域を撮像する撮像部と、
   前記撮像部及び前記投写部を制御する制御部と、
   を備え、
   前記制御部は、
   前記投写部から前記第１画像を投写させた状態で前記撮像部に前記全体領域を撮像させて第１撮像画像を取得させ、
   前記投写部に前記第１画像の投写を停止させた状態で前記全体領域を撮像させて第２撮像画像を取得させ、
   前記第１撮像画像と前記第２撮像画像との差分に基づいて、前記第１撮像画像又は前記第２撮像画像から、前記全体領域のうち前記第２領域を抽出することを特徴とするプロジェクター。
8. 請求項７に記載のプロジェクターであって、
   前記制御部は、前記差分に基づいて、前記全体領域を前記第１領域と前記第２領域とに分割し、前記第２領域を抽出することを特徴とするプロジェクター。
9. 請求項７又は請求項８に記載のプロジェクターであって、
   前記全体領域には、第３画像が書き込まれる第３領域が含まれ、
   前記制御部は、前記差分に基づいて、前記第２領域と前記第３領域とを抽出することを特徴とするプロジェクター。
10. 請求項７乃至請求項９のいずれか一項に記載のプロジェクターであって、
    前記制御部は、抽出された前記第２領域の中から、前記第２画像の分布に基づいて、１つ又は複数の第４領域を抽出することを特徴とするプロジェクター。
11. 請求項１０に記載のプロジェクターであって、
    前記制御部は、前記第２領域及び前記第４領域を含む複数の領域のうち一つの領域を選択させ、選択された前記領域を抽出することを特徴とするプロジェクター。
12. 請求項７乃至請求項１１のいずれか一項に記載のプロジェクターであって、
    前記第１領域に前記第１画像が投写されていない状態は、前記第１領域に白画像又は黒画像を投写した状態であることを特徴とするプロジェクター。

Images