JP2013125181A - 投影装置 - Google Patents

Abstract

【課題】投影面の前で移動するプレゼンタの目を投影光から保護することのできる投影装置を提供する。
【解決手段】
投影面（４）へ投影画像を投影する投影部（１０）と、前記投影面を撮像する撮像部（２０）と、前記撮像部の撮像結果から人物（３）の顔の動きに関する情報（ｖ）を取得し、当該取得した情報に基づいて、前記投影部が所定の投影画像を投影するタイミングにおける人物の顔の位置を予測する予測部（３５，３７）と、前記予測部による予測結果に基づいて、前記所定の投影画像の一部を加工する加工部（３７）と、を備える投影装置。
【選択図】図２

Description

本発明は、投影装置に関する。

従来より、投影した画像の一部を撮像し、その撮像した画像に人物が含まれる場合に、人物の顔へ加工画像を投影する投影装置が提案されている（例えば、特許文献１）。

特開２０１０-３４８２０号公報

ところで、投影装置を利用してプレゼンテーションを行う人物（プレゼンタ）が、説明の最中に投影面の前で動く場合がある。しかしながら、特許文献１の投影装置では、人物が投影面の前で動くことを考慮していないため、移動する人物に対応できず、使い勝手が悪いおそれがある。

そこで、本発明は上記の課題に鑑みてなされたものであり、使い勝手のよい投影装置を提供することを目的とする。

本発明の投影装置は、投影面（４）へ投影画像を投影する投影部（１０）と、前記投影面を撮像する撮像部（２０）と、前記撮像部の撮像結果から人物（３）の顔の動きに関する情報を取得し、当該取得した情報に基づいて、前記投影部が所定の投影画像を投影するタイミングにおける人物の顔の位置を予測する予測部（３５，３７）と、前記予測部による予測結果に基づいて、前記所定の投影画像の一部を加工する加工部（３７）と、を備えたことを特徴とする投影装置である。

本発明の投影装置では、前記加工部は、前記所定の投影画像のうち、前記予測部により予測された顔の位置に相当する部分の明度を低下させることとしてもよい。さらに、前記加工部は、前記所定の投影画像のうち、前記予測部により予測された顔の位置に相当する部分を黒画像（５）とすることとしてもよい。

本発明の投影装置では、前記予測部は、前記投影部が投影した投影画像と前記撮像部が撮像した撮像画像との差分画像に基づいて、前記顔の動きに関する情報（ｖ）を取得することとしてもよい。さらに、前記予測部は、前記差分画像のうち下端から連続する部分を人物と推定し、当該推定結果に基づいて前記顔の動きに関する情報を取得することとしてもよい。また、本発明の投影装置では、前記予測部は、前記顔の動きに関する情報が、顔の移動速度の減速を示す情報であった場合に、前記人物の顔の位置を予測することとしてもよい。

本発明の投影装置では、前記加工部は、前記所定の投影画像の一部を加工するとともに、当該加工した所定の投影画像の一部を別の位置に再配置することとしてもよい。

本発明の投影装置では、前記加工部は、前記撮像部により撮像される前記投影面の前方に位置する物体の状態に基づいて、前記所定の投影画像のうち前記物体に投影される部分を加工することとしてもよい。

本発明の投影装置では、前記撮像面周辺の音声を取得する音声取得部（１１０、１３１）と、前記撮像部による撮像結果から得られる前記人物の口の動きと、前記音声取得部の取得結果とに基づいて、前記人物の発声内容を取得する取得部（１３２）と、を備え、前記加工部は、前記所定の投影画像に、前記取得部が取得した発声内容を合成することとしてもよい。

なお、本発明をわかりやすく説明するために、上記においては以下の実施形態を表す図面の符号に対応つけて説明したが、本発明は、これに限定されるものではなく、後述の実施形態の構成を適宜改良しても良く、また、少なくとも一部を他の構成物に代替させても良い。更に、その配置について特に限定のない構成要件は、実施形態で開示した配置に限らず、その機能を達成できる位置に配置することができる。

本発明によれば、使い勝手のよい投影装置を提供することができるという効果を奏する。

第１の実施形態における投影装置の使用の態様を示す図である。 第１の実施形態における投影装置の構成を示すブロック図である。 投影装置に設けられた画像処理エンジンの機能ブロック図である。 画像処理エンジンにより行われる処理を示すフローチャートである。 移動するプレゼンタを便宜的に同一の画面上に示した図である。 図６（ａ）は、第２の実施形態の加工していない画像をスクリーンへ投影した様子を示す図であり、図６（ｂ）は、加工をした画像をスクリーンへ投影した様子を示す図である。 第３の実施形態における投影装置の構成を示した図である。 第３の実施形態における画像処理エンジンの機能ブロック図である。

《第１の実施形態》
以下、第１の実施形態について、図１〜図５に基づいて、詳細に説明する。図１は本実施形態における投影装置１の使用の態様を示す図である。

本実施形態の投影装置１はパーソナルコンピュータ（以下、パソコンと呼ぶ）２から入力される投影データを投影面（ここでは、スクリーン）４へ投影する装置である。投影装置１は、例えば、図１に示すようなプレゼンタ３によるプレゼンテーションの場面で用いられる。

図２は、投影装置１の構成を示すブロック図である。投影装置１は、図２に示すように、投影部１０と、撮像部２０と、画像処理エンジン３０と、を備えている。

投影部１０は、プロジェクタ投影部１１と、プロジェクタ制御部１２と、を有する。プロジェクタ投影部１１は、光源、照明光学系、光変調素子、投射光学系（いずれも図示しない）を有する。光源は、例えば光を出射するランプである。照明光学系は、光源から出射された光束を光変調素子に照明する。光変調素子は、例えば液晶パネルであり、スクリーン４上に投影する画像を生成する。このスクリーン４は、壁等に設けられる白色の（又はほぼ白色の）矩形状の幕である。投射光学系は、光変調素子からの光束をスクリ−ン４に向けて投射する。なお、投射光学系は、投影する像の大きさを調整するズームレンズと、フォーカス位置を調整するフォーカスレンズとを有する。プロジェクタ制御部１２は、画像処理エンジン３０から出力された投影データを受信し、投影データに従った投影画像を投影するように、プロジェクタ投影部１１の各構成を制御する。

撮像部２０は、撮影レンズ２１、撮像センサ２２、及び撮像センサ２２を制御するＡＦＥ（Analog Front End）２３、ＴＧ（Timing Generator）２４といった制御回路等を備えている。

撮影レンズ２１としては、広角レンズが用いられており、撮像部２０は、投影部１０の投影する投影領域ａ（図１において実線で囲まれた矩形領域）よりも広い範囲（撮像領域ｂ（図１において破線で囲まれた矩形領域））を撮像できるようになっている。なお、撮影レンズ２１は、フォーカスレンズを有していてもよい。この場合、不図示の焦点検出装置の焦点検出結果に応じてフォーカスレンズの位置が調節される。

撮像センサ２２は、ＣＣＤ（Charge Coupled Device）イメージセンサやＣＭＯＳ（Complimentary Metal Oxide Semiconductor）イメージセンサなどの矩形状の素子である。撮像センサ２２は映像信号を光信号から電気信号へ変換する。ＡＦＥ２３は、撮像センサ２２にて変換された映像信号に対して、相関二重サンプリングによる雑音除去、信号の振幅調整及びデジタル変換を行い、画像処理エンジン３０へ出力する。ＴＧ２４は、撮像部２０全体のタイミング管理を行う。

なお、図１、図２に示した構成では、撮像部２０と投影部１０は、投影装置１に内蔵されており、撮像部２０と投影部１０との位置関係が装置定数として画像処理エンジン３０に接続されたＳＤＲＡＭ９４に記憶されているものとする。

画像処理エンジン３０は、図３に示す各部の機能を有する。具体的には、画像処理エンジン３０は、投影データ受信部３１、撮像センサデータ受信部３２、画像処理演算部３３、顔検出演算部３４、動きベクトル算出部３５、スイッチ検出部３６、プロジェクタ投影画像作成部３７、プロジェクタ投影情報出力部３８、ＳＤＲＡＭコントローラ３９としての機能を有する。

投影データ受信部３１は、パソコン２から投影データを受信する。撮像センサデータ受信部３２は、撮像部２０が撮像した画像を受信する。画像処理演算部３３は、パソコン２から取り込んだ投影用の画像データや、撮像部２０で撮像された画像データを処理する。具体的には、画像処理演算部３３は、画像データの画像サイズやコントラストを処理する。また、画像処理演算部３３は、撮像画像のBayerパターンをＹＵＶ方式へ変換する。

顔検出演算部３４は、画像処理演算部３３で処理された画像を取得し、当該画像からプレゼンタ３の顔を検出する。顔検出演算部３４は、例えば、撮像された画像データのうち投影部１０により画像が投影された部分（投影領域ａ）と、投影用の画像データとを比較して、差分を算出し、算出した差分に基づいて、人（プレゼンタ３）の顔を検出する。この場合、予めＳＤＲＡＭ９４などに記憶されている顔のテンプレート画像と算出した差分とのパターンマッチングにより顔を検出することとしてもよい。また、算出した差分が人である可能性が高い場合には、当該差分の最上部近傍の部分を顔として検出してもよい。なお、算出した差分が人であるか否かは、当該差分の領域が撮像画像の下端から連続する領域であるか否か（人の場合、床面上に立っていることから、下端から連続する領域となる可能性が高いため）により判断するものとする。また、算出した差分が人であるか否かは、当該差分の領域と、予め用意されている人物のサンプリング画像とのパターンマッチングにより判断することとしてもよい。

動きベクトル算出部３５は、顔検出演算部３４が検出したプレゼンタ３の顔の動きベクトルを算出する。具体的には、動きベクトル算出部３５は、所定時間差で取得した撮像画像から検出されるプレゼンタ３の顔の位置の変化に基づき、当該所定時間におけるプレゼンタ３の顔の移動方向及び移動量を示す動きベクトルを算出する。

スイッチ検出部３６は、投影装置１に設けられている各種スイッチ４０のオン／オフの状態を検出する。なお、各種スイッチ４０には、投影終了スイッチなどが含まれる。

プロジェクタ投影画像作成部３７は、顔検出演算部３４が特定したプレゼンタ３の顔の位置と、動きベクトル算出部３５が算出した動きベクトルの情報とに基づいて画像データを加工し、加工後の画像データを投影する画像データとする。より具体的には、プロジェクタ投影画像作成部３７は、プレゼンタ３の顔の位置と動きベクトルとから、次の画像（フレーム）が投影部１０によって投影されるタイミングにおける顔の位置を推定する。そして、プロジェクタ投影画像作成部３７は、当該推定結果に基づいて、推定された顔の部分を黒色に加工（以下、「黒指定」と呼ぶ）した画像データを作成する。

プロジェクタ投影情報出力部３８は、プロジェクタ投影画像作成部３７で作成された画像データを投影部１０のプロジェクタ制御部１２へ送る。ＳＤＲＡＭコントローラ３９は、ＳＤＲＡＭ９４のデータの読み出し、書き出し、リフレッシュ等を行う。ＳＤＲＡＭ９４には、画像処理エンジン３０で用いられる各種データ等が格納される。

次に、本実施形態の投影装置１の動作について、図４、図５に基づいて説明する。図４は、プレゼンタ３が投影装置１を用いたプレゼンテーションを行う際に、画像処理エンジン３０により行われる処理を示すフローチャートである。この処理が開始される前提として、投影部１０によるスクリーン４に向けた投影が可能な位置に投影装置１が設置されているものとする。また、投影装置１及びパソコン２は既に起動された状態にあるものとする。

図４の処理では、まず、ステップＳ１において、画像処理エンジン３０が、プロジェクタ投影用データを準備する。具体的には、投影データ受信部３１が、パソコン２からプロジェクタ投影用データを取り込む。なお、投影データ受信部３１は、取り込んだ投影用データをプロジェクタ投影情報出力部３８へ送信する。なお、投影用データは、ＳＤＲＡＭコントローラ３９を介して、ＳＤＲＡＭ９４に記憶される。

次いで、ステップＳ２では、プロジェクタ投影情報出力部３８は、投影部１０のプロジェクタ制御部１２に対し、スクリーン４への投影を指示する。この指示により、プロジェクタ制御部１２は、受信した投影用データに基づく画像をプロジェクタ投影部１１に投影させる。

次いで、ステップＳ３では、スイッチ検出部３６が、投影を継続するか否かを判断する。この場合、スイッチ検出部３６は、投影を継続するか否かを、スイッチ４０の投影終了スイッチがプレゼンタ３等により押されたか否かに基づいて判断する。ここでの判断が否定された場合には、図４の全処理が終了するが、判断が肯定された場合には、ステップＳ４に移行する。

ステップＳ４に移行すると、撮像センサデータ受信部３２は、撮像部２０に対し、スクリーン４の投影画像を撮像するよう指示を出す。そして、撮像センサデータ受信部３２は、撮像部２０により撮像された撮像画像を取り込む（受信する）。なお、取り込んだ撮像画像は、画像処理演算部３３において処理された後、顔検出演算部３４に送信される。

次いで、ステップＳ５では、顔検出演算部３４が、撮像画像中における投影領域の特定を行う。具体的には、顔検出演算部３４は、ＳＤＲＡＭ９４上に記憶されている投影用データを読み出し、当該投影用データに基づく画像と撮像画像とのマッチング（テンプレートマッチング）を行う。そして、顔検出演算部３４は、マッチング結果に基づいて、撮像画像のうち、投影用データに基づく画像が投影されている可能性が高い部分（例えば矩形領域）を抽出し、これを撮像画像中における投影領域として特定する。

次いで、ステップＳ６では、顔検出演算部３４が、撮像画像中の人物（プレゼンタ３）の顔を検出する。この場合、顔検出演算部３４は、ステップＳ５において特定された撮像画像中における投影領域と、投影用データに基づく画像との差分を取るとともに、当該差分を用いてプレゼンタ３の顔を検出する。なお、プレゼンタ３の顔を検出する方法については、上述した種々の方法を採用することができる。

次いで、ステップＳ７では、動きベクトル算出部３５が、撮像画像中に顔が存在していたか否かを判断する。ここでの判断が否定された場合には、ステップＳ１に戻るが、肯定された場合には、ステップＳ８に移行する。

ステップＳ８に移行した場合、動きベクトル算出部３５は、顔の動きベクトルを算出する。具体的には、動きベクトル算出部３５は、所定の時間差をおいて取得した２つの撮像画像から人物の顔の動きベクトル（動く方向及び移動量）を算出する。図５は、所定の時間差で取得されたプレゼンタ３の位置（符号３ａ，３ｂ）を示した図である。図５に示すようにプレゼンタ３が移動した場合、動きベクトル算出部３５は、例えば顔の重心や顔の特徴部分（目や鼻など）の位置変化から動きベクトルｖを算出する。

次いで、ステップＳ９では、プロジェクタ投影画像作成部３７が、動きベクトルの検出結果から、次に投影する画像（フレーム）がスクリーン４上に投影されるタイミングにおけるプレゼンタ３の顔の位置を予測する。この場合、プロジェクタ投影画像作成部３７は、動きベクトルを取得した際に用いた２つの撮像画像の取得間隔（所定の時間差）を把握しているものとする。このため、プロジェクタ投影画像作成部３７は、当該時間差と動きベクトルとを用いることで、顔の移動速度を算出することができる。したがって、プロジェクタ投影画像作成部３７は、顔の移動方向及び移動速度と、次の画像（フレーム）を投影するまでの時間とを用いることで、次画像（フレーム）を投影するときの顔の位置を予測することができる。

次いで、ステップＳ１０では、プロジェクタ投影画像作成部３７が、ステップＳ９における予測の結果、次のフレームが投影されるタイミングにおいてプレゼンタ３の顔が投影画像と重なる位置にあると予測されたか否かを判断する。ここでの判断が否定された場合には、ステップＳ１に戻るが、肯定された場合には、ステップＳ１１に移行する。

ステップＳ１１に移行した場合、プロジェクタ投影画像作成部３７は、次のフレームの投影用データのうち、プレゼンタ３の顔と重なると予測された部分を黒指定する。その後は、ステップＳ２に戻る。なお、ステップＳ２に戻った後は、黒指定された画像（加工された画像）が投影部１０により投影されることになる（ステップＳ２）。この場合、投影部１０により投影される画像は、プレゼンタ３の顔の部分が黒く加工されているため、プレゼンタ３の目の周辺に明るい画像が投影されることがない。これにより、プレゼンタ３がまぶしく感じるのを抑制することができるとともに、プレゼンタ３の目を保護することが可能となる。

その後は、上記処理を繰返す。すなわち、プレゼンタ３の顔が投影画像と重なっている場合には、当該顔の部分を黒く加工した画像を投影し、顔が投影画像と重なっていない場合には、投影画像を加工せずに投影する。そして、プレゼンタ３等によりスイッチ４０に含まれる投影終了スイッチが押された段階（ステップＳ３が否定された段階）で、図４の全処理が終了する。

以上、詳細に説明したように、本第１の実施形態によると、投影装置１は、スクリーン４へ画像を投影する投影部１０と、スクリーン４を撮像する撮像部２０と、撮像部２０の撮像結果から人物（プレゼンタ３）の顔の動きベクトルを取得し、これに基づいて、投影部１０が次の画像を投影するタイミングにおける顔の位置を予測するとともに、当該予測結果に基づいて、次の投影画像の一部を加工（黒指定）する画像処理エンジン３０と、を備えている。これにより、本第１の実施形態では、プレゼンタ３が移動している場合でも、次の投影画像を投影するタイミングにおける顔の位置を的確に予測することができるので、次の投影画像中の適切な位置を黒指定することが可能となる。したがって、プレゼンタ３が移動する場合であっても、プレゼンタ３の目周辺への強い（明るい）光の投影を抑制することができ、ひいては、プレゼンタ３の目を保護することも可能となる。また、本第１の実施形態では、画像処理エンジン３０は、投影画像の一部を黒指定する加工を行う。このため、人の顔を避けるように投影画像を移動したり、投影画像の大きさを変更するような場合と比較して、視聴者の視認性の低下を抑制することができる。

また、本第１の実施形態では、動きベクトル算出部３５は、投影部１０が投影した投影画像と撮像部２０が撮像した撮像画像との差分画像に基づいて、顔の動きベクトルを取得する。これにより、投影画像の種別、内容にかかわらず、すなわち、投影画像に顔の写真や絵が含まれていたりしていても、プレゼンタ３の顔の動きベクトルを正確に把握することができる。

また、本第１の実施形態では、動きベクトル算出部３５は、差分画像のうち下端から連続する部分を人物（プレゼンタ３）と推定し、当該推定結果に基づいて顔の動きベクトルを算出することができる。この場合、人物の推定に画像を用いたパターンマッチング等を行う必要がなくなるので、人物の推定処理を簡素化することが可能となる。

なお、上記第１の実施形態では、投影画像の加工として、画像の一部を黒指定する場合について説明したが、これに限られるものではない。例えば、投影画像のうち顔と重なる部分の明度を低下させることとしてもよい。この場合、人がまぶしいと感じる明度（閾値）を予め測定しておき、顔と重なる部分の明度を測定した閾値よりも低下させるようにしてもよい。

なお、上記第１の実施形態においては、顔の移動速度にかかわらず、顔の位置を予測する（ステップＳ９）場合について説明したが、これに限られるものではない。例えば、顔の移動速度が遅くなった場合にのみ、顔の位置を予測するようにしてもよい。この場合、顔の移動が行われなくなった、又は顔の移動が遅くなった場合に限り、投影用データの加工が行われることになる。このようにすることで、投影用データの加工に意味がある（黒指定した部分が顔の移動に追従できる）場合にのみ投影用データの加工を行うこととなるため、効率的な処理が可能となる。

なお、上記第１の実施形態では、動きベクトル算出部３５は、プレゼンタ３の顔の動きベクトルを算出こととしたが、これに限らず、プレゼンタ３の目の動きベクトルを用いることとしてもよい。この場合、投影画像のうち、目の周辺のみを黒指定するようにしてもよい。

なお、上記第１の実施形態では、投影部１０と撮像部２０とが一体である場合について説明したが、これに限らず、投影部１０と撮像部２０は別体であってもよい。ただし、この場合には、投影部１０と撮像部２０の位置関係を予め測定する必要がある。また、上記第１の実施形態では、撮影レンズ２１として、広角レンズを用い、投影部１０の投影する投影領域ａよりも広い撮像領域ｂを撮像するようにしたが、これに限られるものではない。例えば、撮像部２０を複数用いることで、投影領域ａよりも広い範囲を撮像するようにしてもよい。

《第２の実施形態》
次に、第２の実施形態について、図６に基づいて説明する。本第２の実施形態における装置構成等は、上述した第１の実施形態と同一又は同等である。したがって、これらの説明については省略するものとする。

本第２の実施形態では、上記第１の実施形態において黒指定され、スクリーン４上に投影されなくなる部分の画像を別の位置に再配置する。具体的には、図６（ａ）に示すように、プレゼンタ３が投影画像と重なっていない状態で、図表ｆがスクリーン４上に投影される場合において、図６（ｂ）に示すように、プレゼンタ３が投影画像と重なる位置に移動したとする。この場合、プロジェクタ投影画像作成部３７は、図４のステップＳ１１において、第１の実施形態と同様、投影画像のうち顔と重なる部分を黒指定する（図６（ｂ）の符号５参照）とともに、図６（ｂ）に示すように、顔と重なる部分に位置する図表ｆを空いているスペースに再配置した画像（画像データ）を作成する。なお、空いているスペースが無い場合には、図表ｆの再配置を行わなくてもよいし、他の文字や図表の間隔を調整することでスペースを確保し、当該確保したスペースに図表ｆを再配置してもよい。

以上のように、本第２の実施形態では、プロジェクタ投影画像作成部３７が投影画像の一部を加工（黒指定）するとともに、当該加工した投影画像の一部を別の位置に再配置することとしている。これにより、投影画像を加工（黒指定）した場合でも投影画像中の情報量が低下するのを抑制することが可能となる。

なお、上記第２の実施形態では、プロジェクタ投影画像作成部３７は、投影画像の一部が服や腕などに投影される場合に、服の模様や形状、腕の形状に基づき、投影画像を加工することとしてもよい。例えば、いわゆるプロジェクションマッピングを行うことにより、服や腕へ投影した画像を、スクリーン４に投影している画像と同等な状態で視聴者に見せるようにしてもよい。

なお、上記第２の実施形態では、黒指定されることにより、スクリーン４上に投影されなくなった部分の画像を別の位置に再配置する場合について説明したが、これに限らず、黒指定をせずに、顔と重なった部分の画像を別の位置に再配置することとしてもよい。

《第３の実施形態》
次に、第３の実施形態について、図７、図８に基づいて説明する。本第３の実施形態の投影装置１０１では、上記第１、第２の実施形態の投影装置１に図７に示す音声取得部１１０が追加されているとともに、画像処理エンジン３０の機能として、図８に示す音声データ受信部１３１と発声内容取得部１３２とが追加されている。

音声取得部１１０は、マイクを含み、スクリーン４周辺の音声（例えば、プレゼンタ３の音声）を取得する。音声データ受信部１３１は、音声取得部１１０から音声データを受信し、取得する。

発声内容取得部１３２は、音声データ受信部１３１が取得した音声データと撮像部２０による撮像結果から得られるプレゼンタ３の口の動きとをリンクさせることで、音声データの中からプレゼンタ３の音声データのみを抽出する。そして、発声内容取得部１３２は、抽出したプレゼンタ３の音声データの音声認識を行い、音声データに対応する文字データ（発声内容）を生成する。そして、発声内容取得部１３２は、プロジェクタ投影画像作成部３７に対して、生成した文字データを送信する。プロジェクタ投影画像作成部３７は、受信した文字データを投影画像の一部に合成した画像（画像データ）を作成し、プロジェクタ投影情報出力部３８に対して送信する。なお、文字データは、投影画像中の空いているスペースに合成してもよいし、例えば、漫画で用いられるふきだしの画像の中に文字データを挿入して、投影画像中に合成してもよい。前者の場合には、発生内容を投影するためのスペース（例えば映画において字幕が表示されるような位置）を予め設けておいてもよい。また、後者の場合には、文字データがなるべくプレゼンタ３の近傍に表示されるようにする。

以上説明したように、本第３の実施形態では、スクリーン４周辺の音声を取得する音声取得部１１０と、撮像部２０の撮像結果から得られるプレゼンタ３の口の動きと、音声取得部１１０の取得結果とに基づいて、プレゼンタ３の音声データ（発声内容）を取得する発声内容取得部１３２と、を備えており、プロジェクタ投影画像作成部３７は、投影画像に音声データ（発声内容）を合成する。これにより、プレゼンタ３の音声を聞き取りにくい場合（プレゼンタ３の声が届かない場合や、周囲がざわついているような場合、視聴者が難聴の場合など）でも、プレゼンタ３の発生内容が投影画像中に表示されるので、視聴者は、プレゼンタ３の発声内容を正しく認識することができる。

なお、上記第３の実施形態においては、音声取得部１１０は、投影装置１に内蔵されているものとしたが（図７参照）、これに限らず、音声取得部１１０は、投影装置１に直接的又は間接的に（例えば、パソコン２を間に介在させて）接続されていればよい。

なお、上記第１〜第３の実施形態では、投影装置１がポインタ表示機能を有していてもよい。ポインタ表示機能は、撮像部２０が撮像した画像から例えば指の移動軌跡を取得し、当該指の移動軌跡を投影画像に合成するというものである。投影装置１がこのような機能を有することで、プレゼンタ３の利便性及び視聴者の視認性を向上することができる。なお、指の移動軌跡に代えて、レーザポインタ（スクリーン４上に照射される赤色等の光）の移動軌跡を投影画像に合成することとしてもよい。

なお、上記各実施形態の構成は、一例である。例えば、図２、図７の構成や図３、図８の機能ブロック図は一例であり、種々変更が可能である。例えば、画像処理エンジン３０，１３０の一部機能は、ハードウェアにより実現されてもよい。

上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。

１ 投影装置
３ プレゼンタ
４ スクリーン
１０ 投影部
２０ 撮像部
３５ 動きベクトル算出部
３７ プロジェクタ投影画像作成部
１１０ 音声取得部
１３１ 音声データ受信部
１３２ 発声内容取得部
ｖ 動きベクトル

Claims (9)

1. 投影面へ投影画像を投影する投影部と、
   前記投影面を撮像する撮像部と、
   前記撮像部の撮像結果から人物の顔の動きに関する情報を取得し、当該取得した情報に基づいて、前記投影部が所定の投影画像を投影するタイミングにおける人物の顔の位置を予測する予測部と、
   前記予測部による予測結果に基づいて、前記所定の投影画像の一部を加工する加工部と、を備えたことを特徴とする投影装置。
2. 前記加工部は、前記所定の投影画像のうち、前記予測部により予測された顔の位置に相当する部分の明度を低下させることを特徴とする請求項１に記載の投影装置。
3. 前記加工部は、前記所定の投影画像のうち、前記予測部により予測された顔の位置に相当する部分を黒画像とすることを特徴とする請求項２に記載の投影装置。
4. 前記予測部は、前記投影部が投影した投影画像と前記撮像部が撮像した撮像画像との差分画像に基づいて、前記顔の動きに関する情報を取得することを特徴とする請求項１〜３のいずれか一項に記載の投影装置。
5. 前記予測部は、前記差分画像のうち下端から連続する部分を人物と推定し、当該推定結果に基づいて前記顔の動きに関する情報を取得することを特徴とする請求項４に記載の投影装置。
6. 前記予測部は、前記顔の動きに関する情報が、顔の移動速度の減速を示す情報であった場合に、前記人物の顔の位置を予測することを特徴とする請求項１〜５のいずれか一項に記載の投影装置。
7. 前記加工部は、前記所定の投影画像の一部を加工するとともに、当該加工した所定の投影画像の一部を別の位置に再配置することを特徴とする請求項１〜６のいずれか一項に記載の投影装置。
8. 前記加工部は、前記撮像部により撮像される前記投影面の前方に位置する物体の状態に基づいて、前記所定の投影画像のうち前記物体に投影される部分を加工することを特徴とする請求項１〜７のいずれか一項に記載の投影装置。
9. 前記撮像面周辺の音声を取得する音声取得部と、
   前記撮像部による撮像結果から得られる前記人物の口の動きと、前記音声取得部の取得結果とに基づいて、前記人物の発声内容を取得する取得部と、を備え、
   前記加工部は、前記所定の投影画像に、前記取得部が取得した発声内容を合成することを特徴とする請求項１〜８のいずれか一項に記載の投影装置。
   
   

Images