JP2013257686A5 - - Google Patents

Description

本願の請求項２に記載の技術によれば、請求項１に記載の投影型画像表示装置の前記カメラ部は所定の時間間隔毎に前記投影部の投影面を撮影し、前記ジェスチャー認識部は、前記所定の時間間隔毎の撮影画像のフレーム間差分をとった差分画像に基づいて、投影面上で行なわれたジェスチャー操作を認識するように構成されている。

本願の請求項１４に記載の技術によれば、請求項３に記載の投影型画像表示装置は、前記カメラ部による撮影画像に基づいて前記投影部から前記入力画像を前記被投射体に投影する際の歪みを補正する画像補正量を算出する画像補正量算出部をさらに備えている。そして、前記表示制御部は、前記画像補正量に基づいて前記入力画像を補正し、前記ジェスチャー認識部は、補正した後の前記入力画像が投影されない部分を前記ジェスチャー操作領域として用いるように構成されている。

本願の請求項１６に係るコンピューター・プログラムは、コンピューター上で所定の処理を実現するようにコンピューター可読形式で記述されたコンピューター・プログラムを定義したものである。換言すれば、本願の請求項１６に係るコンピューター・プログラムをコンピューターにインストールすることによって、コンピューター上では協働的作用が発揮され、本願の請求項１に係る投影型画像表示装置と同様の作用効果を得ることができる。

カメラ部１０４は、投影部１０１から被投射体（図示しない）に投影された画像を撮影するように設置されている。画像処理部１０５は、カメラ部１０４で撮影した画像信号に対して、デジタル・ゲイン制御、ＡＷＢ（自動ホワイト・バランス制御）、シャープネス・彩度コントラスト調整など信号処理を行なう。

付言すれば、投影部１０１からの投影面は、一般的なディスプレイよりも大画面となり、複数人で共用し易くなるが、複数人が同時にジェスチャー操作をする従来技術も見当たらない。

図３には、投影型画像表示装置１００が投影面上で手形状を認識するための概略的な処理手順をフローチャートの形式で示している。カメラ部１０４では、投影部１０１から被投射体に投影される静止画像を動画として撮影し、又は、所定の時間間隔毎に静止画として撮影する（ステップＳ３０１）。そして、ジェスチャー認識部１２２は、撮影した動画像から所定の時間間隔毎で抽出した２フレーム、又は、所定の時間間隔毎に撮影した静止画２フレームについて、差分を検出する（ステップＳ３０２）。そして、差分画像に基づいて、投影部１０１の投影面に出現した手形状を検出すると（ステップＳ３０３）、検出した手形状をトラッキングして、ジェスチャー操作を認識する（ステップＳ３０４）。

カメラ部１０４では、投影部１０１から被投射体に投影される静止画像を動画として撮影し、又は、所定の時間間隔毎に静止画として撮影する（ステップＳ１００１）。

画面状態１では、投影部１０１からは入力インターフェース１０３経由で入力された入力画像（Ｉｍａｇｅ Ａ）がそのまま投影表示される。そして、カメラ部１０４では、投影部１０１からの投影画像をそのまま撮影することになる。ジェスチャー認識部１２２では、常時、カメラ部１０４の撮影画像のフレーム間差分を計算し、フレーム内に変化がないかをチェックしている。

なお、本明細書の開示の技術は、以下のような構成をとることも可能である。
（１）入力画像を被投射体に投影する投影部と、前記被投射体を撮影するカメラ部と、前記投影部により投影する投影画像の表示を制御する表示制御部と、前記カメラ部による撮影画像に含まれるユーザーのジェスチャー操作を認識するジェスチャー認識部と、を具備する投影型画像表示装置。
（２）前記カメラ部は所定の時間間隔毎に前記投影部の投影面を撮影し、前記ジェスチャー認識部は、前記所定の時間間隔毎の撮影画像のフレーム間差分をとった差分画像に基づいて、投影面上で行なわれたジェスチャー操作を認識する、上記（１）に記載の投影型画像表示装置。
（３）前記表示制御部は、前記カメラ部の撮影領域内にジェスチャー操作領域を配設する、上記（１）に記載の投影型画像表示装置。
（４）前記表示制御部は、前記投影画像内にゲイン補正し又はほぼ白画像にしたジェスチャー操作領域を形成し、前記ジェスチャー認識部は、前記ジェスチャー操作領域内で手形状の探索並びにジェスチャーの認識を行なう、上記（３）に記載の投影型画像表示装置。
（５）前記表示制御部は、前記ジェスチャー認識部が前記撮影画像のフレーム内で変化を検出したことに応答して、前記ジェスチャー操作領域を配設する、上記（３）に記載の投影型画像表示装置。
（６）前記表示制御部は、前記ジェスチャー操作領域を配設してから、所定期間内に手形状を検出できないとき、又は、ジェスチャーを検出できないときには、前記ジェスチャー操作領域を消滅させる、上記（３）に記載の投影型画像表示装置。
（７）前記表示制御部は、前記ジェスチャー認識部が手形状を認識したことを示す視覚的情報を前記投影画像内に表示させる、上記（１）に記載の投影型画像表示装置。
（８）前記表示制御部は、前記ジェスチャー認識部がジェスチャー操作の認識処理を終了したことを示す視覚的情報を前記投影画像内に表示させる、上記（１）記載の投影型画像表示装置。
（９）前記表示制御部は、前記ジェスチャー操作領域内にジェスチャー操作の方法を示すガイド表示を行なう、上記（３）に記載の投影型画像表示装置。
（１０）前記投影部により動画像を投影するときには、前記表示制御部は前記カメラ部の撮影領域内にジェスチャー操作領域を常に配設する、上記（３）に記載の投影型画像表示装置。
（１１）前記表示制御部は、前記動画像に静止画からなる前記ジェスチャー操作領域を重畳して表示する、
上記（１０）に記載の投影型画像表示装置。
（１２）前記表示制御部は、前記ジェスチャー操作領域の表示を行なう際に、前記入力画像の投影サイズを縮退して、前記ジェスチャー操作領域と重ならないようにする、上記（３）に記載の投影型画像表示装置。
（１３）前記表示制御部は、前記投影部が前記被投射体に投影可能な領域のうち、前記入力画像を前記投影部から投影した後の余剰の領域を利用して前記ジェスチャー操作領域の表示を行なう、上記（３）に記載の投影型画像表示装置。
（１４）前記カメラ部による撮影画像に基づいて前記投影部から前記入力画像を前記被投射体に投影する際の歪みを補正する画像補正量を算出する画像補正量算出部をさらに備え、前記表示制御部は、前記画像補正量に基づいて前記入力画像を補正し、前記ジェスチャー認識部は、補正した後の前記入力画像が投影されない部分を前記ジェスチャー操作領域として用いる、上記（３）に記載の投影型画像表示装置。
（１５）入力画像を被投射体に投影する投影ステップと、前記被投射体を撮影する撮影ステップと、前記撮影ステップによる撮影画像に含まれるユーザーのジェスチャー操作を認識するジェスチャー認識ステップと、を有する投影型画像表示方法。
（１６）入力画像を被投射体に投影する投影部、前記被投射体を撮影するカメラ部、前記投影部により投影する投影画像の表示を制御する表示制御部、前記カメラ部による撮影画像に含まれるユーザーのジェスチャー操作を認識するジェスチャー認識部、としてコンピューターを機能させるようコンピューター可読形式で記述されたコンピューター・プログラム。

Claims (16)

1. 入力画像を被投射体に投影する投影部と、
   前記被投射体を撮影するカメラ部と、
   前記投影部により投影する投影画像の表示を制御する表示制御部と、
   前記カメラ部による撮影画像に含まれるユーザーのジェスチャー操作を認識するジェスチャー認識部と、
   を具備する投影型画像表示装置。
2. 前記カメラ部は所定の時間間隔毎に前記投影部の投影面を撮影し、
   前記ジェスチャー認識部は、前記所定の時間間隔毎の撮影画像のフレーム間差分をとった差分画像に基づいて、投影面上で行なわれたジェスチャー操作を認識する、
   請求項１に記載の投影型画像表示装置。
3. 前記表示制御部は、前記カメラ部の撮影領域内にジェスチャー操作領域を配設する、
   請求項１又は２のいずれかに記載の投影型画像表示装置。
4. 前記表示制御部は、前記投影画像内にゲイン補正し又はほぼ白画像にしたジェスチャー操作領域を形成し、
   前記ジェスチャー認識部は、前記ジェスチャー操作領域内で手形状の探索並びにジェスチャーの認識を行なう、
   請求項３に記載の投影型画像表示装置。
5. 前記表示制御部は、前記ジェスチャー認識部が前記撮影画像のフレーム内で変化を検出したことに応答して、前記ジェスチャー操作領域を配設する、
   請求項３又は４のいずれかに記載の投影型画像表示装置。
6. 前記表示制御部は、前記ジェスチャー操作領域を配設してから、所定期間内に手形状を検出できないとき、又は、ジェスチャーを検出できないときには、前記ジェスチャー操作領域を消滅させる、
   請求項３乃至５のいずれかに記載の投影型画像表示装置。
7. 前記表示制御部は、前記ジェスチャー認識部が手形状を認識したことを示す視覚的情報を前記投影画像内に表示させる、
   請求項１乃至６のいずれかに記載の投影型画像表示装置。
8. 前記表示制御部は、前記ジェスチャー認識部がジェスチャー操作の認識処理を終了したことを示す視覚的情報を前記投影画像内に表示させる、
   請求項１乃至７のいずれかに記載の投影型画像表示装置。
9. 前記表示制御部は、前記ジェスチャー操作領域内にジェスチャー操作の方法を示すガイド表示を行なう、
   請求項３乃至６のいずれかに記載の投影型画像表示装置。
10. 前記投影部により動画像を投影するときには、前記表示制御部は前記カメラ部の撮影領域内にジェスチャー操作領域を常に配設する、
    請求項３乃至６のいずれかに記載の投影型画像表示装置。
11. 前記表示制御部は、前記動画像に静止画からなる前記ジェスチャー操作領域を重畳して表示する、
    請求項１０に記載の投影型画像表示装置。
12. 前記表示制御部は、前記ジェスチャー操作領域の表示を行なう際に、前記入力画像の投影サイズを縮退して、前記ジェスチャー操作領域と重ならないようにする、
    請求項３乃至６のいずれかに記載の投影型画像表示装置。
13. 前記表示制御部は、前記投影部が前記被投射体に投影可能な領域のうち、前記入力画像を前記投影部から投影した後の余剰の領域を利用して前記ジェスチャー操作領域の表示を行なう、
    請求項３乃至６のいずれかに記載の投影型画像表示装置。
14. 前記カメラ部による撮影画像に基づいて前記投影部から前記入力画像を前記被投射体に投影する際の歪みを補正する画像補正量を算出する画像補正量算出部をさらに備え、
    前記表示制御部は、前記画像補正量に基づいて前記入力画像を補正し、
    前記ジェスチャー認識部は、補正した後の前記入力画像が投影されない部分を前記ジェスチャー操作領域として用いる、
    請求項３乃至６のいずれかに記載の投影型画像表示装置。
15. 入力画像を被投射体に投影する投影ステップと、
    前記被投射体を撮影する撮影ステップと、
    前記撮影ステップによる撮影画像に含まれるユーザーのジェスチャー操作を認識するジェスチャー認識ステップと、
    を有する投影型画像表示方法。
16. 入力画像を被投射体に投影する投影部、
    前記被投射体を撮影するカメラ部、
    前記投影部により投影する投影画像の表示を制御する表示制御部、
    前記カメラ部による撮影画像に含まれるユーザーのジェスチャー操作を認識するジェスチャー認識部、
    としてコンピューターを機能させるようコンピューター可読形式で記述されたコンピューター・プログラム。