JP2013123099A - 投写型映像表示装置 - Google Patents

Abstract

【課題】投写型映像表示装置においてユーザフレンドリなユーザインタフェースを実現する。
【解決手段】撮像部２８０ａは、物体が設置された投写面を撮像する。投写部１１０ａは、撮像部２８０ａにより撮像された画像から抽出される特徴点に対応付けられた映像を、投写面に投写する。映像処理部１６３は、抽出された特徴点に対応付けられた映像が投写面上の物体の設置領域と重複しない領域に投写されるよう、映像の位置およびサイズを調整してもよい。
【選択図】図６

Description

本発明は、ユーザフレンドリなユーザインタフェースを搭載する投写型映像表示装置に関する。

近年、インタラクティブ機能を搭載した投写型映像表示装置が実用化されてきている。インタラクティブ機能の代表的なものとしてペン型デバイスを用いるものがある。ペン型デバイスを使用することにより、ユーザは投写映像上にあたかも文字や記号を書く感覚で、投写映像のもとになる電子的な映像信号に変更を加えることができる。このように、インタラクティブ機能を使用することにより、ユーザインタフェースが大きく向上する。

特開平８−１６３４７６号公報

本発明者は、これまでのインタラクティブ機能と異なる投写型映像表示装置の新たなユーザインタフェースを開発するに至った。それはユーザの意思または意図に関係なく、ユーザをサポートする機能である。例えば、水平面上の投写面にユーザが書類を置いた場合、ユーザの意思に関係なく、その書類の記入例を投写する機能である。ユーザはその記入例を表示させるために、インタラクティブ操作も含め付加的な操作は必要ない。このように投写型映像表示装置に不慣れなユーザも十分にサポートできる、ユーザフレンドリなユーザインタフェースである。

本発明はこうした状況に鑑みなされたものであり、その目的は、投写型映像表示装置においてユーザフレンドリなユーザインタフェースを実現する技術を提供することにある。

本発明のある態様の投写型映像表示装置は、物体が設置された投写面を撮像する撮像部と、撮像部により撮像された画像から抽出される特徴点に対応付けられた映像を、投写面に投写する投写部と、を備える。

本発明によれば、投写型映像表示装置においてユーザフレンドリなユーザインタフェースを実現できる。

投写型映像表示装置（床面投写）を示す図である。 投写型映像表示装置（壁面投写）を示す図である。 投写型映像表示装置の光学構成を示す図である。 実施の形態１に係る投写型映像表示装置の使用例を説明するための斜視図である。 実施の形態１に係る投写型映像表示装置の使用例を説明するための投写面の上面図である。 実施の形態１に係る投写型映像表示装置の機能ブロックを示す図である。 実施の形態１に係る投写型映像表示装置の動作を説明するためのフローチャートである。 図８（Ａ）−（Ｂ）は、実施の形態１の変形例１に係る投写型映像表示装置１００の使用例を説明するための投写面の上面図である。 実施の形態１の変形例１に係る投写型映像表示装置の動作を説明するためのフローチャートである。 実施の形態１の変形例２に係る投写型映像表示装置の使用例を説明するための投写面の上面図である。 図１１（Ａ）−（Ｂ）は、実施の形態１の変形例３に係る投写型映像表示装置の使用例を説明するための投写面の上面図である。

以下、本発明の実施の形態に係る投写型映像表示装置について図面を参照しながら説明する。なお、図面の記載において同一又は類似の部分には、同一又は類似の符号を付している。ただし、図面は模式的なものであり、各寸法の比率などは現実のものとは異なることに留意すべきである。従って、具体的な寸法などは以下の説明を参酌して判断すべきである。また、図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることにも留意すべきである。

（投写型映像表示装置の概略構成）
以下、投写型映像表示装置の概略構成について図面を参照しながら説明する。この概略構成は、以下に説明するいくつかの実施の形態で共通である。図１は、投写型映像表示装置１００（床面投写）を示す図である。図２は、投写型映像表示装置１００（壁面投写）を示す図である。

図１及び図２に示すように投写型映像表示装置１００は筐体２００を有しており、投写面に映像を投写する。筐体２００には後述する投写光学系１１０から出射される光を通す投写口２１０が設けられる。投写口２１０はガラス窓で構成されてもよい。

投写面は、図１に示すように水平面に形成されてもよいし、図２に示すように垂直面に形成されてもよい。水平面に形成される場合、床面、机上、スクリーン、ホワイトボードなどに形成される。垂直面に形成される場合、壁面、スクリーン、ホワイトボードなどに形成される。投写型映像表示装置１００は、映像光を水平面に投写するように配置されてもよいし、垂直面に投写するように配置されてもよい。

略直方体の筐体２００が有する面のうち、図１に示すケースでは第１面２２０が設置面（即ち、底面）となり、図２に示すケースでは第２面２３０が設置面となる。

投写型映像表示装置１００は小型サイズで構成され、投写型映像表示装置１００は投写面に２０〜４０インチ程度の映像を表示する。例えば、Ａ３サイズの映像を表示する。投写型映像表示装置１００は投写面との距離が非常に近い、いわゆる超短焦点型である。

（投写型映像表示装置の光学構成）
以下、投写型映像表示装置１００の光学構成について図面を参照しながら説明する。図３は、投写型映像表示装置１００の光学構成を示す図である。

図３に示すように投写型映像表示装置１００は、投写光学系１１０、照明光学系１２０、ＤＭＤ(Digital Micromirror Device)７０、反射プリズム８０、冷却ファン１３０、バッテリ１４０、電源基板１５０、主制御基板１６０、操作基板１７０を有する。

投写光学系１１０は、光変調素子であるＤＭＤ７０から出射された映像光を投写面に投写する。本実施の形態ではカラー映像を投写するため、その映像光は色成分を持つ。投写光学系１１０は、投写レンズ群１１１、反射ミラー１１２を有する。投写レンズ群１１１は、ＤＭＤ７０から出射された色成分光を反射ミラー１１２側に出射する。

投写レンズ群１１１は投写光学系１１０の光軸Ｌを中心とする略円形状および略半円形状のレンズを含む。なお、投写レンズ群１１１に含まれるレンズの径は、反射ミラー１１２に近いほど大きいことに留意すべきである。

反射ミラー１１２は投写レンズ群１１１から出射された映像光を反射する。反射ミラー１１２は映像光を集光した上で映像光を広角化する。例えば、反射ミラー１１２は投写レンズ群１１１側に凹面を有する非球面ミラーであり、投写光学系１１０の光軸Ｌを中心とする略半円形状を有する。

反射ミラー１１２で集光された映像光は、筐体２００に設けられた投写口２１０から外部に導かれる。筐体２００に設けられた投写口２１０は、反射ミラー１１２によって映像光が集光される位置近傍に設けられることが好ましい。

照明光学系１２０は、光源１０、ダイクロイックプリズム３０、ロッドインテグレータ４０、第１ミラー５１、第２ミラー５２、第１レンズ６１、第２レンズ６２、第３レンズ６３を有する。

光源１０は複数色の色成分光を個別に出射するように構成される。光源１０には、光源１０で生じる熱を放熱するヒートシンクが併設されていてもよい。図３では光源１０は、赤色光源１０Ｒ、緑色光源１０Ｇ、青色光源１０Ｂによって構成される。

赤色光源１０Ｒは赤成分光Ｒを出射する光源である。赤色光源１０Ｒには、例えば、赤色ＬＥＤ(Light Emitting Diode)または赤色ＬＤ(Laser Diode)を用いることができる。緑色光源１０Ｇは緑成分光Ｇを出射する光源である。緑色光源１０Ｇには、例えば、緑色ＬＥＤまたは緑色ＬＤを用いることができる。青色光源１０Ｂは青成分光Ｂを出射する光源である。青色光源１０Ｂには、例えば、青色ＬＥＤまたは青色ＬＤを用いることができる。赤色光源１０Ｒ、緑色光源１０Ｇ、青色光源１０Ｂのそれぞれには、金属などのように放熱性が良好な部材によって構成されるヒートシンクが併設されてもよい。

ダイクロイックプリズム３０は、赤色光源１０Ｒから出射される赤成分光Ｒ、緑色光源１０Ｇから出射される緑成分光Ｇ、青色光源１０Ｂから出射される青成分光Ｂを合成する。

ロッドインテグレータ４０は、光入射面と、光出射面と、光入射面の外周から光出射面の外周に亘って設けられる光反射側面とを有する。ロッドインテグレータ４０は、ダイクロイックプリズム３０から出射された色成分光を均一化する。より詳細には、ロッドインテグレータ４０は光反射側面で色成分光を反射することによって色成分光を均一化する。ロッドインテグレータ４０は、ガラスなどによって構成される中実ロッドであってもよいし、ミラー面によって内面が構成される中空ロッドであってもよい。

図３に示す例では、ロッドインテグレータ４０は光源１０から出射される光の進行方向に向けて、光の進行方向に垂直な断面が大きくなるテーパ形状を有する。なお、ロッドインテグレータ４０は光源１０から出射される光の進行方向に向けて、光の進行方向に垂直な断面が小さくなる逆テーパ形状を有してもよい。

第１ミラー５１、第２ミラー５２は、ロッドインテグレータ４０から出射された光をＤＭＤ７０に導くために、光路を折り曲げる反射ミラーである。第１レンズ６１、第２レンズ６２、第３レンズ６３は、光源１０から出射された色成分光の拡大を抑制しながら、色成分光をＤＭＤ７０上に略結像するリレーレンズである。

冷却ファン１３０は筐体２００の外部に連通しており、筐体２００内の熱を放出する。または、筐体２００の外部の空気を筐体２００内に送り込む。または、その両方を行う。冷却ファン１３０は光源１０の近傍に設けられ、光源１０を冷却する。

バッテリ１４０は投写型映像表示装置１００内で使用される電力を蓄積する。電源基板１５０はＡＣ−ＤＣコンバータを備え、ＡＣ−ＤＣコンバータは商用電源から供給される交流電力を直流電力に変換する。ＡＣ−ＤＣコンバータは、変換した直流電力をバッテリ１４０に蓄積するか、投写型映像表示装置１００内の各種回路に供給する。電源基板１５０と商用電源が非接続のとき、バッテリ１４０に蓄積された電力が各種回路に供給される。なお、小型化、軽量化の観点からバッテリ１４０を搭載しない構成としてもよい。

主制御基板１６０は、投写型映像表示装置１００の動作を制御する制御回路を搭載する。操作基板１７０は、投写型映像表示装置１００に設置される操作部に接続されている。操作基板１７０に搭載される制御回路は、操作部から入力される操作信号を主制御基板１６０に搭載される制御回路に伝達する。

ＤＭＤ７０は複数の微小ミラーによって構成される。複数の微小ミラーはそれぞれ独立に可動する。原則として一つの微小ミラーが一画素に対応する。ＤＭＤ７０は、設定される映像信号に応じて各微小ミラーの角度を変更する。これにより、表示画素ごとに色成分光を投写光学系１１０側に反射するか否かを切り替えることができる。なお、投写光学系１１０側に反射する時間を制御することにより階調制御が可能である。

図３では光変調素子としてＤＭＤを用いる例を示したが、ＤＭＤの代わりに反射型または透過型の液晶パネルを用いてもよい。

反射プリズム８０は、照明光学系１２０から出射される光をＤＭＤ７０側に透過するとともに、ＤＭＤ７０から出射される光を投写光学系１１０側に反射する。

［実施の形態１］
以下、実施の形態１に係る投写型映像表示装置１００を説明する。実施の形態１に係る投写型映像表示装置１００は、従来のインタラクティブ機能と異なる新たなユーザインタフェースとして、物体を認識し、その物体に関連する情報をユーザに提供するシステムを搭載する。物体としては紙、人間の手などが挙げられる。以下の説明では物体の例として書類を例に説明する。

図４は、実施の形態１に係る投写型映像表示装置１００の使用例を説明するための斜視図である。この使用例では役所で書類に必要事項を記入する際、投写型映像表示装置１００は、その記入事項をガイダンスするための映像を机上投写する。

実施の形態１に係る投写型映像表示装置１００は、カメラ２８０を備える。カメラ２８０は投写口２１０の近傍に設置される。図４ではカメラ２８０は筐体２００の投写口２１０が設置される面に設置される例を描いているが、投写口２１０の内側、即ち筐体２００の内部に設置されてもよい。なお、投写距離より撮影距離が長くなる位置に設置したほうが広範囲を撮影できるため、画角が狭いカメラを使用することができる。画角が狭いカメラを使用するとコスト削減につながる。

カメラ２８０は投写面を撮影する。カメラ２８０は投写面上の投写領域３００全体を撮影範囲に含むことが好ましい。ユーザにより投写領域３００に書類４００が設置されると、その書類４００はカメラ２８０により撮影される。後述する画像解析部は、カメラ２８０により撮影された画像内において特徴点を抽出することにより、書類４００の設置位置および種類を検出する。また、書類４００内の各欄の位置を検出してもよい。

書類４００はその表面に特殊塗料が塗られているものであってもよい。例えば、書類４００の種類ごとに異なる特殊塗料が塗られていてもよい。また例えば、書類４００の各記入欄の枠線がそれぞれ異なる特殊インクで引かれていてもよい。画像解析部は、カメラ２８０により撮影された画像内において、この特殊インクで引かれた線を容易に抽出できる。なお、特殊インクを用いず通常のインクを使用した場合でも、高解像度のカメラを使用すれば、比較的高精度に線やマークを抽出できる。

投写光学系１１０とカメラ２８０の位置関係は固定であり、床面投写ではそれらと投写面との距離関係も固定である。従って、撮影された画像内の特徴点の位置と、投写面の位置が一意に対応づけられる。投写型映像表示装置１００は特定された投写面の位置を基準に、その特徴点に対応づけられた映像を投写する。図４では投写型映像表示装置１００は、書類４００の種類および書類４００の左上欄の位置を特定し、その左上欄の記入をガイダンスする吹き出し映像３１０を投写する。その際、吹き出し先が当該左上欄を指し示す位置に、吹き出し映像３１０を投写する。

図５は、実施の形態１に係る投写型映像表示装置１００の使用例を説明するための投写面の上面図である。この上面図は投写面に対して鉛直な方向から投写型映像表示装置１００および投写面を俯瞰した図である。

画像解析部は、カメラ２８０により撮影された画像内において特殊インクで引かれた線を抽出することにより、書類４００内の第１記入領域４１０、第２記入領域４２０、第３記入領域４３０、第４記入領域４４０を検出する。なお、書類４００の種類ごとに記入フォーマットが異なる場合、書類４００の種類および書類４００全体の設置位置を検出すれば、第１記入領域４１０、第２記入領域４２０、第３記入領域４３０、第４記入領域４４０の位置を特定できる。後述する制御部は、第１記入領域４１０、第２記入領域４２０、第３記入領域４３０、第４記入領域４４０の位置にそれぞれ対応する投写面の位置を特定する。

投写型映像表示装置１００は特定された投写面の位置を基準に、第１吹き出し映像３１０、第２吹き出し映像３２０、第３吹き出し映像３３０、第４吹き出し映像３４０を投写する。図５ではそれぞれの吹き出しの先が第１記入領域４１０、第２記入領域４２０、第３記入領域４３０、第４記入領域４４０をそれぞれ指し示す位置に、第１吹き出し映像３１０、第２吹き出し映像３２０、第３吹き出し映像３３０、第４吹き出し映像３４０を投写する。

図６は、実施の形態１に係る投写型映像表示装置１００の機能ブロックを示す図である。実施の形態１に係る投写型映像表示装置１００は、光源１０、光変調部７０ａ、投写部１１０ａ、撮像部２８０ａ、操作部１７０ａ、制御部１６１、画像解析部１６２、映像処理部１６３、通信部１６４、記録媒体１６６、変換テーブル１６７を備える。

制御部１６１、画像解析部１６２、映像処理部１６３のそれぞれの構成は、ハードウエア的には、任意のプロセッサ、メモリ、その他のＬＳＩで実現でき、ソフトウエア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。

光変調部７０ａは光源１０からの光を、映像処理部１６３により設定された映像信号にもとづき変調する。投写部１１０ａは、光変調部７０ａにより変調された光を投写面に投写する。この光が投写される投写面上の領域を投写領域と呼ぶ。投写領域には有意な映像領域と背景領域が含まれる。本明細書では有意な映像を単に映像と呼び、映像は背景を含まない概念とする。

撮像部２８０ａは投写面を撮像する。投写領域と撮像領域は必ずしも一致する必要はなく、両者にずれがあってもよい。投写領域のうち投写型映像表示装置１００に近接する領域まで撮像するには画角が広いカメラを使用する必要がある。コスト削減のため画角の狭いカメラを使用し、投写型映像表示装置１００に近接する領域を撮像範囲から外してもよい。

投写面には物体が設置されることがある。本実施の形態では物体の一例として書類を想定している。撮像部２８０ａは書類が設置された投写面を撮像する。画像解析部１６２は、撮像部２８０ａにより撮像された画像を解析する。より具体的には撮像部２８０ａにより撮像された画像から特徴点を抽出する。画像解析部１６２は解析結果を制御部１６１に供給する。

操作部１７０ａはユーザからの指示を受け付け、電気信号に変更して制御部１６１に出力する。通信部１６４はネットワークに接続され、情報処理装置と情報を送受信する。この情報処理装置としてＰＣ、サーバ、スマートフォンが該当する。例えば、データセンタに設置されたクラウドサーバであってもよい。記録媒体１６６は不揮発性の内蔵メモリ及び／又は着脱可能なリムーバブルメモリである。例えば、フラッシュメモリ、ハードディスク、光ディスクが該当する。

変換テーブル１６７は、撮像画像から抽出される特徴点と、投写すべき映像との対応付けを保持する。例えば、書類の撮像画像から抽出される特徴点により特定される記入欄と、その記入欄に記入すべき内容に関する映像との対応付けを保持する。投写すべき映像のもとになる映像信号は、記録媒体１６６に保持されていてもよいし、ネットワークに接続された情報処理装置に保持されていてもよい。

制御部１６１は投写型映像表示装置１００全体を制御する。制御部１６１は画像解析部１６２により抽出される特徴点を変換テーブル１６７を参照して、投写すべき映像を特定する。また、制御部１６１は当該特徴点の位置および当該映像のサイズにもとづき、当該映像の投写位置を決定する。制御部１６１は当該映像のもとになる映像信号を、記録媒体１６６またはネットワーク接続された情報処理装置から取得する。制御部１６１は取得した映像信号とその投写位置を映像処理部１６３に供給する。

映像処理部１６３は制御部１６１から供給される映像信号に所定の処理を施し、光変調部７０ａに設定する。これにより、投写部１１０ａは画像解析部１６２により抽出された特徴点に対応付けられた映像を、投写面に投写できる。

図７は、実施の形態１に係る投写型映像表示装置１００の動作を説明するためのフローチャートである。画像解析部１６２は撮像部２８０ａにより撮像された、書類が設置された投写面の画像内から特徴点を抽出する（Ｓ１０）。制御部１６１は変換テーブル１６７を参照して当該特徴点に対応づけられた映像を特定する（Ｓ１２）。制御部１６１は当該特徴点から書類の設置位置を特定する（Ｓ１４）。制御部１６１は、特定した書類の設置位置および投写すべき映像のサイズから当該映像の投写位置を決定する（Ｓ１６）。投写部１１０ａは、特定された映像を決定された位置に投写する（Ｓ１８）。

以上説明したように実施の形態１によれば、投写面に物体を設置するだけでその物体に関連する映像が投写される。これは従来のインタラクティブ操作と異なるユーザインタフェースである。例えば、設置した物体に関する説明情報が投写面に表示されることにより、その物体を設置したユーザは、その設置動作以外のアクションを起こさなくても有益な情報を取得できる。例えば、書類を設置するだけで書類の記入方法に関する情報を取得できる。このようにユーザフレンドリなユーザインタフェースを実現できる。

また、投写型映像表示装置１００を商品陳列に使用してもよい。店員が商品を陳列するだけで、その商品説明が投写面に表示される。この場合、店員の作業を軽減できる。

［実施の形態１の変形例１］
以下、実施の形態１の変形例１に係る投写型映像表示装置１００を説明する。実施の形態１の変形例１では、映像処理部１６３は画像解析部１６２により抽出された特徴点に対応付けられた映像が、投写面上の物体の設置領域と重複しない領域に投写されるよう、映像の位置およびサイズを調整する。実施の形態１の基本例では物体と投写映像が重なることを排除しなかったが、変形例１ではそれらが重なることを排除する。物体の表面に模様がある場合や文字が書かれている場合、その上に映像を投写すると映像が見にくくなる。

投写領域３００において物体と重ならないように映像を投写する場合、投写映像のサイズを調整する必要が発生する。投写領域３００において物体が設置されていない空き領域のサイズが小さい場合、映像処理部１６３は、その空き領域に映像が収まるよう映像のサイズを縮小する。反対に空き領域のサイズが大きい場合、映像処理部１６３はその空き領域に映像が収まる範囲で映像を拡大する。例えば、その空き領域に映像が収まる範囲で、余白を除き映像を最大化してもよい。

映像のアスペクト比が固定の場合、投写面上の物体が移動すると表示可能な空き領域のサイズが変化する。映像処理部１６３はその空き領域の変化に合わせて適応的に映像のサイズを調整してもよい。なお、映像のアスペクト比が固定の場合、制御部１６１は映像を最大サイズで表示可能な空き領域を、映像の投写位置に決定してもよい。

図８（Ａ）−（Ｂ）は、実施の形態１の変形例１に係る投写型映像表示装置１００の使用例を説明するための投写面の上面図である。図８（Ａ）は書類４００を投写領域３００の中央に設置した例を示し、図８（Ｂ）は書類４００を投写領域３００の右端に設置した例を示している。

図８（Ａ）では投写領域３００において、書類４００の左側に書類４００の記入例映像３５０が投写される。投写領域３００の中央に書類４００が設置されている場合、その周囲に空き領域が発生する。しかしながら、いずれの方向に発生する空き領域も小さなサイズとなり、記入例映像３５０のサイズも小さくなる。図８（Ｂ）に示すようにユーザは書類４００を投写領域３００の右端にずらす。これにより、書類４００の左側に大きなサイズの空き領域が発生する。これにより、記入例映像３５０が拡大され、記入例映像３５０の文字が読みやすくなる。

図９は、実施の形態１の変形例１に係る投写型映像表示装置１００の動作を説明するためのフローチャートである。画像解析部１６２は撮像部２８０ａにより撮像された、書類が設置された投写面の画像内から特徴点を抽出する（Ｓ１０）。制御部１６１は変換テーブル１６７を参照して当該特徴点に対応づけられた映像を特定する（Ｓ１２）。制御部１６１は当該特徴点から書類の設置位置を特定する（Ｓ１４）。制御部１６１は、特定した書類の設置位置および投写すべき映像のアスペクト比から当該映像の投写位置を決定する（Ｓ１６）。その際、当該書類と当該映像とが重複しない範囲で、当該映像を最大サイズで表示できる位置に決定する。映像処理部１６３は、決定された投写位置に最大サイズで当該映像を投写できるよう当該映像を拡大または縮小する（Ｓ１７）。投写部１１０ａは、特定されたサイズ調整後の映像を決定された位置に投写する（Ｓ１８）。

以上説明したように変形例１によれば、基本例と同様の効果を奏する。さらに、投写面に設置された物体と重複しないよう映像を投写するため、投写映像が見にくくなることを抑制できる。また、投写領域３００の空き領域に応じて映像のサイズを調整することにより、できるだけ見やすいサイズの映像を投写することができる。

［実施の形態１の変形例２］
以下、実施の形態１の変形例２に係る投写型映像表示装置１００を説明する。実施の形態１の変形例２では、撮像部２８０ａは、投写面に設置された紙に対する、ユーザによる、紙に書込可能なペン型デバイスを用いた記入動作を撮像する。画像解析部１６２は、ユーザにより紙に記入された内容を検出して、その内容を電子化する。

紙に書込可能なペン型デバイスは電子ペンである。例えば、当該電子ペンは赤外線ＬＥＤまたは赤外線ＬＤを有し、赤外線を照射する。また、当該電子ペンはペン先にインクを有し、通常のペンと同様に紙に書き込むことができる。当該電子ペンが赤外線照射型のペンである場合、カメラ２８０は赤外線領域に感度を持つ撮像素子を備える必要がある。

画像解析部１６２は、撮像部２８０ａにより撮像された画像内から赤外線成分が所定の設定値より高い画素を検出する。画像解析部１６２は、その画素の軌跡から、当該電子ペンを用いてユーザが記載した文字、記号、図形、模様を特定する。画像解析部１６２はその文字等を画像データとして電子化してもよいし、テキストデータとして電子化してもよい。画像データからテキストデータへの変換は既存の一般的なアプリケーションプログラムにより実行可能である。

図１０は、実施の形態１の変形例２に係る投写型映像表示装置１００の使用例を説明するための投写面の上面図である。図１０は投写領域３００の右側に書類４００が設置され、投写領域３００の左側に記入例映像３５０が表示されている状態を示している。ユーザは紙に書込可能な電子ペン５００を用いて書類４００に必要事項を記入している。撮像部２８０ａはこのユーザの記入動作を撮像し、画像解析部１６２はその記入内容を電子化する。これにより、ユーザにより記入された直筆の書類と、その記入内容の電子ファイルを同時に生成できる。

以上説明したように変形例２によれば、基本例と同様の効果を奏する。さらに、直筆書類と電子ファイルを一度に作成できるため効率的である。例えば、選挙の投票用紙に適用すると、直筆の投票用紙により電子的な不正を抑制しつつ、電子データを用いて電子的に集計することにより集計時間を短縮できる。

［実施の形態１の変形例３］
以下、実施の形態１の変形例３に係る投写型映像表示装置１００を説明する。実施の形態１の変形例３では、操作部１７０ａは、投写面に投写される映像の位置または大きさの変更指示を受け付ける。映像処理部１６３は、操作部１７０ａにより受け付けられた変更指示に応じて、映像の位置または大きさを変更する。

図１１（Ａ）−（Ｂ）は、実施の形態１の変形例３に係る投写型映像表示装置１００の使用例を説明するための投写面の上面図である。図１１（Ａ）−（Ｂ）では、投写型映像表示装置１００の上面に操作部１７０ａが設置され、操作部１７０ａは左シフトキー１７２および右シフトキー１７４を含む。左シフトキー１７２および右シフトキー１７４は物理的なボタンであってもよいし、タッチパネルキーであってもよい。また、操作部１７０ａは上シフトキー、下シフトキーを含んでもよい。さらに、拡大キー、縮小キーを含んでもよい。

図１１（Ａ）−（Ｂ）では、書類４００の上に記入例映像３５０が重畳して表示されている。ユーザは書類４００の記入欄に、記入例映像３５０の対応する記入例が表示されるよう、書類４００及び／又は記入例映像３５０の位置を調整する。記入例映像３５０の位置は左シフトキー１７２または右シフトキー１７４を押下することにより調整可能である。

電子ペン５００の使用時、電子ペン５００を持っている手および電子ペン５００の影が書類４００に映り、文字等が記入しづらくなる場合がある。図１１（Ｂ）に示すように右利きのユーザは、書類４００および記入例映像３５０を投写領域３００の右端にずらすことにより、書類４００に影が発生しづらくなる。反対に左利きのユーザは、書類４００および記入例映像３５０を投写領域３００の左端にずらすことにより、書類４００に影が発生しづらくなる。

以上説明したように変形例３によれば、基本例と同様の効果を奏する。さらに、操作部１７０ａに、投写領域３００に表示されている投写映像を移動させるためのキーを設けることにより、ユーザは投写映像をお気に入りの場所に精度よく移動させることができる。マニュアル操作であるため、ユーザの投写映像に対するきめ細かなニーズを反映させることができる。

以上、本発明をいくつかの実施の形態をもとに説明した。これらの実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。

実施の形態１では投写型映像表示装置１００が画像解析部１６２および変換テーブル１６７を備える構成を説明した。この点、画像解析部１６２および変換テーブル１６７は、ネットワーク接続された情報処理装置に設けられる構成であってもよい。この情報処理装置が複数の投写型映像表示装置１００のホスト装置となる場合に、特に有効な構成である。

実施の形態１の変形例２、３では紙に書込可能な電子ペン５００を用いた。この点、紙に書込できない一般的な電子ペンを用いてもよい。この場合、ユーザが記載した文字等の電子データのみが生成されることになる。

１００ 投写型映像表示装置、 １１０ａ 投写部、 １６１ 制御部、 １６２ 画像解析部、 １６３ 映像処理部、 １６４ 通信部、 １６６ 記録媒体、 １６７ 変換テーブル、 １７０ａ 操作部、 １７２ 左シフトキー、 １７４ 右シフトキー、 ２８０ａ 撮像部、 ３１０ 吹き出し映像、 ３５０ 記入例映像、 ４００ 書類、 ５００ 電子ペン。

Claims (5)

1. 物体が設置された投写面を撮像する撮像部と、
   前記撮像部により撮像された画像から抽出される特徴点に対応付けられた映像を、前記投写面に投写する投写部と、
   を備えることを投写型映像表示装置。
2. 投写すべき映像に処理を施す映像処理部を、さらに備え、
   前記映像処理部は、抽出された特徴点に対応付けられた映像が前記投写面上の前記物体の設置領域と重複しない領域に投写されるよう、前記映像の位置およびサイズを調整することを特徴とする請求項１に記載の投写型映像表示装置。
3. 前記映像処理部は、前記映像が前記投写面上の前記物体の設置領域と重複しない範囲で、前記映像を拡大することを特徴とする請求項２に記載の投写型映像表示装置。
4. 投写すべき映像に処理を施す映像処理部と、
   前記投写面に投写される映像の位置またはサイズの変更指示を受け付ける操作部と、
   をさらに備え、
   前記映像処理部は、前記操作部により受け付けられた変更指示に応じて、前記映像の位置またはサイズを変更することを特徴とする請求項１に記載の投写型映像表示装置。
5. 前記物体は紙であり、
   前記投写部は、前記紙の撮像画像から抽出される特徴点により特定される記入欄に対応付けられた、記入欄に記入すべき内容に関する映像を投写することを特徴とする請求項１から４のいずれかに記載の投写型映像表示装置。

Images