JP2015047885A - 車両搭載インタラクティブシステム - Google Patents

Abstract

【課題】車両内の設置されたスクリーンに投射された映像の内容に対してインタラクティブな操作を行うことができるインタラクティブシステムを提供する。【解決手段】システムは、車室内に設けられ、映像生成装置６０からの画像をスクリーン３０Ａ〜３０Ｃに対して投射するプロジェクタ５０を備える。システムは、スクリーン３０Ａ〜３０Ｃの前で行われる操作者の操作位置または操作軌跡を検出する位置検出センサ３２〜３８及び演算装置７０を備える。映像生成装置６０は位置検出センサ３２〜３８の操作検出に基づく画像を生成してプロジェクタ５０に出力する。【選択図】図１

Description

本発明は、車両搭載インタラクティブシステムに関する。

車室内にプロジェクタを搭載し、前記プロジェクタから、車の窓に設けたスクリーンに投射するプロジェクタ及び前記プロジェクタに映像を出力する映像出力装置を備えたものは特許文献１、２で提案されている。

特許文献１では、複数の車の窓に設けたスクリーンに対して、映像出力装置から出力された映像を車の天井等に設けられた１つまたは複数のプロジェクタから、投射するようにしている。この装置によって、複数のガラス面を用いて三次元的な映像表現をすることができる利点がある。

特許文献２では、車両の天井に対して、映像出力装置から出力された映像を、車両の側壁に配置したプロジェクタから投射するようにしている。この装置によって、車室の比較的狭い空間において車室内の人に大型の映像を提供できる利点がある。

特開２００４−３５４８４１号公報 特開２００４−３１２４８０号公報

ところで、上記従来技術は、映像をスクリーンに単に投射するだけであるため、映像の内容についてインタラクティブな操作を行うことができないものとなっている。
本発明の目的は、車両内の設置されたスクリーンに投射された映像の内容に対してインタラクティブな操作を行うことができるインタラクティブシステムを提供することにある。

上記問題点を解決するために、本発明の車両搭載インタラクティブシステムは、車室内に設けられたスクリーン部と、画像を生成して出力する映像生成部と、前記車室内に設けられ、前記映像生成部からの前記画像を前記スクリーン部に対して投射するプロジェクタと、前記スクリーン部の前で行われる操作者の操作位置または操作軌跡を検出する操作検出部とを備え、前記映像生成部は、前記操作検出部の操作検出に基づく画像を少なくとも生成して前記プロジェクタに出力するものである。

また、前記スクリーン部が、車両の窓に設けられていることが好ましい。
また、前記窓が、スライドドアの窓であることが好ましい。
また、前記操作検出部による前記操作者の操作位置または操作軌跡の検出が、前記操作者の指または前記操作者が把持するスタイラスの前記スクリーン部における座標値または操作軌跡の検出であり、前記スクリーン部、前記操作検出部と前記映像生成部を少なくとも含むことによりインタラクティブホワイトボードが構成されていることが好ましい。

また、前記操作検出部が、前記操作者のモーションを検出して、前記操作者の操作位置または操作軌跡を検出するモーションセンサであることが好ましい。
また、車両の外部の景色を撮像する撮像部を備え、前記映像生成部は、前記撮像部が撮像した画像を前記プロジェクタに出力することが好ましい。

また、地理情報を記憶する地理情報記憶部と、ＧＰＳ情報を取得するＧＰＳ取得部と、前記撮像部が画像を撮像したときに前記ＧＰＳ取得部が取得したＧＰＳ情報に基づいてそのＧＰＳ情報に関連する地理情報を前記地理情報記憶部から選択する地理情報選択部を備え、前記映像生成部は、前記地理情報選択部が選択した地理情報と前記画像をあわせて前記プロジェクタに出力し、前記プロジェクタは、前記地理情報と前記画像を前記スクリーン部に投射することが好ましい。

また、前記車室内に設けられ、前記プロジェクタを格納する格納部を備えることが好ましい。
また、前記スクリーン部が、前記車室内に複数設けられており、前記プロジェクタを、前記スクリーン部の各々に対して相対する位置に変位可能に回転させる回転機構を備えることが好ましい。

本発明によれば、車両内の設置されたスクリーンに投射された映像の内容に対してインタラクティブな操作を行うことができる。

（ａ）及び（ｂ）は第１実施形態の車両搭載インタラクティブシステムを搭載した車両の概略平面図。 第１実施形態の車両搭載インタラクティブシステムを搭載した車両の概略平面図。 （ａ）及び（ｂ）はスクリーン３０Ｃの配置状態の説明図。 第１実施形態のスライドドア、スクリーン部、プロジェクタの配置関係を示す車両の要部の断面図。 位置検出センサとスクリーンの配置関係を示す説明図。 第１実施形態の車両搭載インタラクティブシステムの電気ブロック図。 第２実施形態のスライドドア、スクリーン部、プロジェクタの配置関係を示す車両の要部の断面図。 第２実施形態の車両搭載インタラクティブシステムの電気ブロック図。 第３実施形態の車両搭載インタラクティブシステムの電気ブロック図。 第４実施形態の車両搭載インタラクティブシステムの電気ブロック図。

（第１実施形態）
以下、本発明の車両搭載インタラクティブシステム（以下、単にシステムという）を具体化した第１実施形態について図１〜図５を参照して説明する。

まず、本システムを搭載する車両の説明をする。
図１に示すように、車両１０は、運転席１２Ａと助手席１２Ｂを有する１列目シートと、図示はしないが２列目シート及び３列目シートを備えている。車両１０の左右の両側部には、２列目シート及び３列目シートに乗降するための一対のスライドドア１４Ａ，１４Ｂが備えられている。

スライドドア１４Ａ，１４Ｂは、車体のドア開口部１６に対して図１（ａ）の二点鎖線で示す全開位置と、実線で示す全閉位置の間を往復移動自在に設けられている。図３に示すようにスライドドア１４Ａ，１４Ｂは、ドア本体１５に対して上下動して出入り自在に装着されたドアガラス１７を備えている。また、スライドドア１４Ａ，１４Ｂは、ドア本体１５に対して上下動して出入り自在に装着された四角形状をなすスクリーン３０Ａ，３０Ｂを備えている。なお、図３では、スライドドア１４Ａに設けられたスクリーン３０Ａのみが図示されている。スクリーン３０Ａ，３０Ｂは、ドアガラス１７に対して車室内側に配置されている。また、スクリーン３０Ａ，３０Ｂは、ドア本体１５の窓上部に設けられた図示しないフックにかけられることにより、ドアガラス１７の略全体を覆うように配置されて、ドアガラス１７を通して入射する光を遮蔽する。このように本実施形態では、スクリーン３０Ａ，３０Ｂは、不透明であってシェードの機能を有する。また、スクリーン３０Ａ，３０Ｂにおいて、車内を向く面は、プロジェクタ５０が投射した画像の投射面となっており、白色となるように設けられている。また、スクリーン３０Ａ，３０Ｂにおいて、車外側に向く面は黒色となるように設けられている。なお、スクリーン３０Ａ，３０Ｂにおいて、スクリーンの画像の投射面の色は、白色の代わりに銀色等のように、プロジェクタ５０が投射した画像の色に悪影響を与えない色であってもよい。

スクリーン３０Ａ，３０Ｂは、スライドドア１４Ａ，１４Ｂが全閉位置に位置するときにおいて、使用可能である。
スライドドア１４Ａの窓上縁であって、展開状態のスクリーン３０Ａの上辺の前後の両コーナに近位の部位には、一対の位置検出センサ３２，３４がそれぞれ装着されている。

また、スライドドア１４Ｂの窓上縁であって、展開状態のスクリーン３０Ｂの上辺の前後両端に近位の部位には、スクリーン３０Ａと同様に一対の位置検出センサ３２，３４がそれぞれ装着されている。

また、１列目シートの後方には、四角形状のスクリーン３０Ｃが設けられている。スクリーン３０Ｃは、ロールスクリーンからなる。スクリーン３０Ｃはロールスクリーンに限定するものではなく、折り畳まれたスクリーンを展開して車室の天井１８のフックに上端をかけるとともに下端を床１９のフックに掛けてもよい。

図３（ａ）に示すように、スクリーン３０Ｃがロールスクリーンの場合、使用しないときは、天井１８に設けられた格納室１８ａにその全体が収納されていてもよい。この場合、使用時には、巻かれた状態のスクリーン３０Ｃを、下方へ展開して、床１９に設けられたフックにかけることにより展開状態を保持する。また、使用しない場合は、展開状態のスクリーン３０Ｃを、前記フックから外した後、巻くことにより前記格納室１８ａ内に格納する。

また、図３（ｂ）に示すように、スクリーン３０Ｃがロールスクリーンの場合、使用しないときは、床１９に設けられた格納室１９ａにその全体が収納されていてもよい。この場合、使用時には、巻かれた状態のスクリーン３０Ｃを、上方へ展開して、天井１８に設けられたフックにかけることにより展開状態を保持する。また、使用しない場合は、展開状態のスクリーン３０Ｃを前記フックから外した後、巻くことにより前記格納室１９ａに格納する。

図３（ａ）、図３（ｂ）に示すように、天井１８において、展開状態のスクリーン３０Ｃの上辺の幅方向に位置する両コーナに近位の部位には、一対の位置検出センサ３６，３８が設けられている。

図３に示すように、車室の天井１８には、回転機構４２が設けられている。回転機構４２は、天井１８に固定された上部に対して、鉛直方向に下方に延びた下部がその軸心の周りで回転自在に連結されている。

回転機構４２の下部には、格納部４０が固定されている。格納部４０は、略四角箱形状に形成されるとともにその一側面に開口部４０ａを有する。格納部４０内には、プロジェクタ５０が収納されている。プロジェクタ５０は、格納部４０内において、ブラケット５３を介して上下方向に角度調節自在に吊り下げ支持されている。プロジェクタ５０は、回転機構４２による回転位置の選択及び前記上下方向における角度調節により、展開状態のスクリーン３０Ａ、３０Ｂ、３０Ｃのいずれか１つのスクリーンに対して画像を投射可能である。図１（ａ）、図１（ｂ）及び図２は、スクリーン３０Ａ、３０Ｂ，３０Ｃのそれぞれに対してプロジェクタ５０が画像を投射する場合の回転機構４２による回転位置での状態を示している。

なお、図３では図示はしていないが、格納部４０内には、コンピュータからなる映像生成装置６０及び各位置検出センサに電気的に接続されたマイクロコンピュータからなる演算装置７０が収納されている。

（システムの電気的構成）
次に、システムの電気的構成を、図６を参照して説明する。
システムは、スクリーン３０Ａ〜３０Ｃ、位置検出センサ３２〜３８、プロジェクタ５０、各スクリーンの一対の位置検出センサにそれぞれ接続された演算装置７０、演算装置７０に接続された映像生成装置６０にて構成されている。

本実施形態では、スクリーン３０Ａ〜３０Ｃはスクリーン部に相当する。位置検出センサ３２〜３８及び演算装置７０は操作検出部に相当する。映像生成装置６０は映像生成部に相当する。また、スクリーン３０Ａ〜３０Ｃ、演算装置７０、映像生成装置６０により、インタラクティブホワイトボードが構成されている。

図６に示すように、位置検出センサ３２，３４、及び位置検出センサ３６，３８は、それぞれ演算装置７０に接続されている。位置検出センサ３６，３８は位置検出センサ３２，３４と構成が同じであるため、位置検出センサ３２，３４について説明する。

図５に示すように、位置検出センサ３２，３４は、それぞれスクリーン３０Ａ、３０Ｂの投射面の全体に沿って近赤外線レーザを投光走査する図示しない投光部と、操作者（乗員）が把持するスタイラス８０の反射部８０ａからの反射光の入力があった受光位置を検出する検出部を有する。また、スタイラス８０は電子ペンであって、図示しない無線通信部及び電池、並びに外部操作可能な図示しないスイッチを有している。前記スイッチがオン操作されると、図示しない無線通信部を介して映像生成装置６０の無線通信部６８にオン信号を送信するようにされている。

図５において、Ｌ１〜Ｌ２の範囲が位置検出センサ３２（３６）の投光走査する範囲である。Ｌ３〜Ｌ４は位置検出センサ３４（３８）の投光走査する範囲である。いずれの範囲も、スクリーン３０Ａ〜３０Ｃの投射面の全領域をカバーする。

演算装置７０は、位置検出センサ３２（３６），３４（３８）がそれぞれ検出した受光位置を三角測量法に基づいて、スクリーンでの座標値であるスタイラス８０の二次元座値を演算して映像生成装置６０に出力する。

映像生成装置６０は、前記演算装置７０と有線で接続されて前記二次元座標値を入力するインターフェイス６１、ＣＰＵ６２、入力データメモリ６４、表示画像メモリ６６、無線通信部６８、記憶装置６９及び図示しないＲＯＭ等を備えている。

入力データメモリ６４は、インターフェイス６１から入力した二次元座標値を記憶する。この二次元座標値が、時間的に変化する場合は、スタイラス８０の操作軌跡となる。記憶装置６９は、複数のコンテンツを含むプログラムを記憶している。前記コンテンツは少なくとも映像データを含む。記憶装置６９は、例えばハードディスク等からなっていて書き込み書き出し可能である。表示画像メモリ６６は、入力データメモリ６４に格納されている入力データに基づいてＣＰＵ６２が生成した画像を一旦記憶するメモリである。

ＣＰＵ６２は、前記コンテンツのプログラムを実行中に、或いは再生時にそのプログラムの内容に従って該コンテンツの画像（以下、コンテンツ画像という）を生成する。そして、ＣＰＵ６２はそのコンテンツ画像を、表示画像メモリ６６に生成した画像（以下、入力画像という）がある場合には入力画像とともに無線通信部６８を介して、プロジェクタ５０に送信可能である。無線通信部６８は、プロジェクタ５０の無線通信部５２と通信を行い、前記コンテンツ画像をプロジェクタ５０に送信する。無線通信部６８と無線通信部５２との通信は、例えば、無線ＬＡＮであるＷｉｆＩ（Wireless Fidelity ）規格、或いはブルートゥース等の規格で行うが、無線の規格は限定するものではない。また、無線通信部６８は、前記無線の規格で無線通信可能なスマートフォン、タブレット、或いはノートパソコンとも無線接続可能である。このことから、本実施形態のシステムでは、前記スマートフォン、タブレット、或いはノートパソコンからもコメント等を前記コンテンツ画像と合わせて投射することも可能である。

プロジェクタ５０は、液晶、レーザ、ＤＬＰ（登録商標）、ＬＣＯＳ等があるが、限定するものではない。プロジェクタ５０は、無線通信部５２が受信した画像を、スクリーン３０Ａ〜３０Ｃに投射する。

（第１実施形態の作用）
次に、本実施形態のシステムの作用を説明する。
操作者（乗員）は、使用するスクリーン３０Ａ〜３０Ｃを選択する。この例では、図１、及び図４に示すようにスライドドア１４Ａが全閉位置に位置した状態であって、スクリーン３０Ａを使用するものとする。操作者は、スクリーン３０Ａの上辺を、ドア本体１５の窓上部に設けられた図示しないフックにかけることにより、ドアガラス１７の略全体を覆うように配置する。なお、スクリーンの形式はフックに掛けるタイプに限定するものではない。例えば、スクリーンにはスライドドアに一対のポールを立てて、そのポール間にスクリーンを張るようにしたポール式スクリーン、自動的にスクリーンが展開及び格納可能な電動スクリーン等を含む種々の形式のスクリーンがあり、いずれも車載用に採用可能である。

映像生成装置６０は、前記コンテンツのプログラムを実行して、該コンテンツの画像を生成し、無線通信部６８を介して、プロジェクタ５０に送信する。プロジェクタ５０は、送信された画像を受信して、その画像をスクリーン３０Ａの投射面に投射する。

投射面上のコンテンツの画像が、例えばメニューの画像である場合、種々の機能の押しボタンが映される。例えば、次の画像に移行したい場合の押しボタン、前の画像に戻りたい場合の押しボタン等がある場合、操作者は、前記投射面上で、スタイラス８０を所望の押しボタンの画像まで移動した後、スタイラス８０に設けられた図示しないスイッチをオン操作する。

スタイラス８０が前記投射面上で操作されると、位置検出センサ３２，３４がスタイラス８０の反射部８０ａからの反射光の入力があった受光位置を検出し、その受光位置を演算装置７０に出力する。演算装置７０は、検出した受光位置を三角測量法に基づいて、スクリーン３０Ａでの座標値であるスタイラス８０の二次元座値を演算して映像生成装置６０に出力する。

映像生成装置６０の入力データメモリ６４は、インターフェイス６１から入力した二次元座標値を記憶する。ＣＰＵ６２は、入力した二次元座標値がスクリーン３０Ａの投射面上の押しボタンが属する領域の座標値であって、かつ、スタイラス８０のスイッチからオン信号の入力があった条件を満足するか否かを判定する。ここで、前記入力した二次元座標値は、操作位置に相当する。

この場合、上記のようにスタイラス８０に設けられた図示しないスイッチがオン操作されているため、前記オン信号は無線通信部６８を介して映像生成装置６０に入力される。このため、ＣＰＵ６２は、前記条件を満足すると判定し、すなわち、該スクリーン３０Ａの投射面上の押しボタンが操作されたと見做して、前記プログラムに基づいて当該押しボタンに応じた画像データを無線通信部６８にて送信する。プロジェクタ５０は、前記画像データを受信すると、この画像データに基づく画像をスクリーン３０Ａに投射する。

また、操作者の操作によりスタイラス８０が前記投射面上で投射面に沿って移動中に、スタイラス８０の図示しないスイッチが所望の時間の間、オン操作が継続されたとする。
この場合、ＣＰＵ６２は、前記オン信号が継続して入力している間に、演算装置７０から入力して入力データメモリ６４に格納した二次元座標位置のデータ群に基づいて操作軌跡の画像を作成する。ＣＰＵ６２は、この作成した画像とプログラムに応じて生成している画像を合成した合成画像データを、無線通信部６８を介してプロジェクタ５０に送信する。プロジェクタ５０は、前記合成画像データを受信すると、この合成画像データに基づく画像をスクリーン３０Ａに投射する。この結果、投射されたスクリーン３０Ａの投射面には、画像化されたスタイラス８０の操作軌跡が映される。

従って、スタイラス８０の操作軌跡は、文字であったり、或いは図形として画像化されることになる。
本実施形態によれば、以下のような効果を得ることができる。

（１） 本実施形態のシステムは、車室内に設けられたスクリーン３０Ａ〜３０Ｃ（スクリーン部）と、画像を生成して出力する映像生成装置６０（映像生成部）を備えている。また、システムは、車室内に設けられ、映像生成装置６０からの前記画像をスクリーン３０Ａ〜３０Ｃ（スクリーン部）に対して投射するプロジェクタ５０を備えている。また、システムは、スクリーン３０Ａ〜３０Ｃの前で行われる操作者の操作位置または操作軌跡を検出する位置検出センサ３２〜３８及び演算装置７０（操作検出部）を備えている。また、映像生成装置６０（映像生成部）は、位置検出センサ３２〜３８の操作検出に基づく画像を生成してプロジェクタ５０に出力する。

この結果、本実施形態によれば、車両内の設置されたスクリーンに投射された映像の内容に対してインタラクティブな操作を行うことができる。
（２） 本実施形態のシステムは、スクリーン３０Ａ，３０Ｂ（スクリーン部）が、車両１０の窓に設けられている。この結果、本実施形態によれば、車両の窓を利用して、スクリーンを貼ることができる。特にスクリーンは、ドア内に収納されるため、スクリーンのための収納スペースのために、車室の空間を狭めることがない。

（３） 本実施形態のシステムは、スクリーンを設けた窓が、スライドドアの窓としている。このため、スライドドアの窓に設けたスクリーンに対して、プロジェクタから画像を投射することができる。

（４） 本実施形態のシステムは、位置検出センサ３２〜３８及び演算装置７０による操作者の操作位置または操作軌跡の検出が、スタイラス８０のスクリーン３０Ａ〜３０Ｃにおける検出としている。また、スクリーン３０Ａ〜３０Ｃ、位置検出センサ３２〜３８及び演算装置７０と、映像生成装置６０によりインタラクティブホワイトボードを構成している。この結果、本実施形態によれば、操作者のスタイラスの操作によって、コンテンツを操作したり、或いは、コメント等を画像化することができる。

（５） 本システムのスクリーン３０Ａ，３０Ｂは、シェード機能を兼用するため、スクリーンとシェードをそれぞれ車両に用意する必要がなく、部品点数を少なくできる。
（６） 本システムでは、格納部４０は車室内に設けられるとともに、プロジェクタ５０を格納するため、プロジェクタ５０を使用しないときには、乗員の邪魔になることがない。

（７） 本システムでは、スクリーン３０Ａ〜３０Ｃ（スクリーン部）が、車室内に複数設られている。また、プロジェクタ５０が、複数のスクリーン３０Ａ〜３０Ｃ（スクリーン部）の各々に対して相対する位置に変位可能に回転させる回転機構４２を備えている。この結果、本実施形態では、必要なときに乗員がスクリーン３０Ａ〜３０Ｃを選択的に使用することができる。

（第２実施形態）
次に、第２実施形態の車両搭載インタラクティブシステムを図７及び図８を参照して説明する。なお、第１実施形態と同一構成及び相当する構成については同一符号を付して、その説明を省略し、異なる構成について説明する。

本実施形態では、第１実施形態の構成中、位置検出センサ３２，３４，３６，３８が省略されている代わりに、モーションセンサ９０が、スクリーン３０Ａ〜３０Ｃの上方または下方、或いはスクリーンに設けられているところが異なっている。

例えば、図７に示すように、スクリーン３０Ａ，３０Ｂでは、モーションセンサ９０がドアの窓の下部に設けられている。また、図示はしないが、スクリーン３０Ｃでは、モーションセンサ９０が車両の天井に設けられていることが好ましい。モーションセンサ９０の取付位置は窓の下部または上部に限定するものではなく、車内側から見て左側部、または右側部のいずれか１つに設けるようにしてもよい。

モーションセンサ９０は、スクリーンの前で操作者の手、指、またはツールのジェスチュアを検出するものである。モーションセンサ９０は、操作者のモーションを検出して、操作者の操作位置（３次元座標値）または操作軌跡の検出する操作検出部に相当する。

モーションセンサ９０の例としては、マイクロソフト社のＫＩＮＥＣＴがある。このセンサは、所定のパターンをもったレーザをスクリーンの投射面の前の空間領域に投射して、手、指またはツールから反射した光のパターンの歪みに基づいて画素毎の距離データを算出し、画素毎の距離データに基づきそれらのモーションを検出するものである。

また、モーションセンサ９０の他の例としては、ＬＥＡＰ ＭＯＴＩＯＮ社のモーションセンサがある。なお、モーションセンサ９０は上記したものに限定されるものではない。

（第２実施形態の作用）
次に、本実施形態のシステムの作用を説明する。
操作者（乗員）は、使用するスクリーン３０Ａ〜３０Ｃについての使用方法は、第１実施形態と同様であるため、説明を省略する。

以下では、映像生成装置６０により、コンテンツ画像がスクリーン３０Ａの投射面に投射されているものとする。
次に、コンテンツ画像が、画面上にモーションの指の操作によって、コンテンツ画像の切替を行う場合について説明する。このモードは、メニュー画像等で設定されている。以下では、代表的にメニュー画像の場合の下での操作について説明する。

コンテンツ画像がメニュー画像のときに、操作者が指で操作を行う場合、スクリーンに対して指でスクロールする。このスクロールは、投射画面に沿って上下、或いは左右にドラッグすることである。モーションセンサ９０は、この指のモーションの軌跡の座標値を算出するとともに、ドラッグのモーションであるとして、そのモーションの座標値を映像生成装置６０に出力する。

映像生成装置６０の入力データメモリ６４は、インターフェイス６１から入力したモーションの二次元座標値を記憶する。ＣＰＵ６２は、入力したモーションの座標値に基づいて、メニューのコンテンツ画像を移動して、他の画像に変更する。

また、コンテンツ画像がメニューのときに、操作者がスクリーン３０Ａ上の投射面上で特定の画像領域に対して指でタップする。モーションセンサ９０は、この指のタップしたモーションの軌跡の座標値を算出するとともに、その移動軌跡に基づいてタップのモーションであるとして、そのモーションの座標値を映像生成装置６０に出力する。

映像生成装置６０の入力データメモリ６４は、インターフェイス６１から入力したモーションの二次元座標値を記憶する。ＣＰＵ６２は、入力したタップのモーションの座標値に基づいて、前記特定の領域がタップされた場合に、予め設定されているコンテンツ画像に変更する。

また、詳細な説明は省略するが、操作者の指のモーションが、フリック、ホールド、ピンチアウト、ピンチイン等がされた場合には、モーションセンサ９０はそれらのモーションを、座標値とともに検出する。

映像生成装置６０の入力データメモリ６４は、インターフェイス６１を介して入力した前記各モーションの二次元座標値を記憶する。ＣＰＵ６２は、入力したタップのモーションの座標値に基づいて、それらの特定のモーションに応じたコテンツ画像に変更してスクリーン３０Ａに投射する。

次に、コンテンツ画像が、画面上にモーションの軌跡を描くモードに設定されている場合について説明する。このモード設定は、予め映像生成装置６０の図示しない操作部を操作してこのモードに設定する。

操作者が、スクリーン３０Ａの投射面上において、指で投射面に沿って移動すると、モーションセンサ９０は、移動軌跡の座標値を検出して、映像生成装置６０に出力する。前記佐座標値は入力データメモリ６４に格納される。そして、映像生成装置６０のＣＰＵ６２は、入力データメモリ６４に格納した二次元座標位置のデータ群に基づいて操作軌跡の画像を作成する。ＣＰＵ６２は、この作成した画像とプログラムに応じて生成している画像を合成した合成画像データを、無線通信部６８を介してプロジェクタ５０に送信する。

プロジェクタ５０は、前記合成画像データを受信すると、この合成画像データに基づく画像をスクリーン３０Ａに投射する。この結果、投射されたスクリーン３０Ａの投射面には、画像化された指の操作軌跡が映される。従って、指の操作軌跡は、文字であったり、或いは図形として画像化されることになる。

なお、上記の説明では、指の軌跡で説明したが、モーションセンサは、手、或いはスタイラスの軌跡の検出も有効である。
本実施形態によれば、第１実施形態の（１）〜（３）、（５）の効果の他、以下のような効果を得ることができる。

（１） 本実施形態のシステムは、モーションセンサ９０による操作者の操作位置または操作軌跡の検出が、スタイラス８０のスクリーン３０Ａ〜３０Ｃにおける検出としている。この結果、本実施形態によれば、モーションセンサにより、操作者の操作位置、操作軌跡によって、コンテンツを操作したり、或いは、コメント等を画像化することができる。

（第３実施形態）
次に、第３実施形態のシステムを図１、図９を参照して説明する。第３実施形態のシステムは、第１実施形態のシステムの構成にさらに、図１に示すように車載カメラ１０２を搭載したところが異なっている。図１において、車載カメラ１０２の車両１０に対する搭載位置を示している。図１では、車両１０のフロント、リア、及び左右両側部の４箇所にそれぞれ設けている。なお、図９では、１台分の車載カメラ１０２が代表して図示されている。車載カメラ１０２は撮像部に相当する。

車載カメラ１０２が撮像した画像は、接続端子１０８を介して映像生成装置６０に入力される。ＣＰＵ６２は、車載カメラ１０２が撮像した画像を、無線通信部６８を介してプロジェクタ５０に送信可能である。また、本実施形態では、４台の車載カメラ１０２が接続されているため、図示しない操作部を操作することにより、４台中の車載カメラ１０２のうち、少なくともいずれか１台の車載カメラ１０２が撮像した画像をプロジェクタ５０に対して送信可能である。従って、２〜４台の複数の撮像した画像をプロジェクタ５０からスクリーン３０Ａ〜３０Ｃのいずれか１つに投射することも可能である。

なお、車載カメラ１０２は、４箇所全部に設ける必要はなく、車両１０のフロント（前部）だけに車載カメラ１０２を設けてもよい。フロントに車載カメラ１０２を設けると、車両１０の進行方向における外部の景色が見えるため、運転中の運転者と同じ景色を見ることができる。また、車両１０のリアに設けると、走行中の車両の後側における外部の景色を見ることができる。走行中の車両の後側における外部の景色は、通常は頻繁に見ることができないため、見慣れていない景色を見ることが可能となる。

車両１０の左右のいずれかの側部にそれぞれ車載カメラ１０２を設けた場合には、スクリーン３０Ａ、３０Ｂが窓を遮蔽している場合、スクリーン３０Ａ〜３０Ｃのいずれか１つにプロジェクタ５０から投射することにより、車外の景色を見ることができる。

また、図９に示すように、本実施形態では、映像生成装置６０には地理情報記憶部１１０及びＧＰＳ装置１２０が接続端子１０４，１０６を介して接続されている。地理情報記憶部は、地理情報（地理空間情報ともいう）を記憶している。地理情報は、地理上の特定の地点、或いは区域の位置を示す情報（以下、特定位置情報という）と、特定位置情報と関連付けられた関連情報のデータベースである。特定位置情報は地図データを含む。また、関連情報には、その位置に関連した属性情報、例えば、名物、お得情報、観光地、店舗及びその店舗の販売する商品等を含む。

ＧＰＳ装置１２０は、図示しないＧＰＳ受信機を備えていて、受信したＧＰＳ衛星からの信号に基づいて車両１０の位置を測位してＧＰＳ情報を取得する。ＧＰＳ装置１２０は、ＧＰＳ取得部に相当する。

本実施形態の映像生成装置６０は、地理情報選択部に相当する。
（第３実施形態の作用）
次に、第３実施形態の作用を説明する。

操作者は図示しない操作部を操作することにより、４台中の車載カメラ１０２のうち、少なくともいずれか１台の車載カメラ１０２を選択する。選択された車載カメラ１０２は、映像生成装置６０に画像を出力する。映像生成装置６０は、前記車載カメラ１０２の撮影画像をプロジェクタ５０に対して送信する。

なお、コンテンツ画像と車載カメラ１０２の撮影画像をともに、プロジェクタ５０に送信したい場合は、図示しない前記操作部にて、撮影画像及びコンテンツ画像をともに送信可能なモードに設定しておくものとする。この場合は、コンテンツ画像と前記撮影画像とがともに、プロジェクタ５０に送信されて、スクリーン３０Ａに投射される。

また、前記撮影画像とともに車両１０が現在位置する地理情報を共にスクリーンに投射させたい場合は、地理情報を撮影画像とともに投射するモードに、前記操作部により設定する。

この場合、ＣＰＵ６２は、ＧＰＳ装置１２０から車両１０の現在の位置であるＧＰＳ情報を取得する。そして、ＣＰＵ６２はこのＧＰＳ情報と同じ特定位置情報、或いは閾値以内の近位位置の特定位置情報に関連した関連情報を、地理情報記憶部１１０から取得する。

取得した関連情報を前記撮影画像とともに、プロジェクタ５０に送信する。プロジェクタ５０は、前記撮影画像と前記関連情報をスクリーン３０Ａに投射する。この投射により、乗員は、スクリーンに撮影画像が拡張現実として映ることになる。

本実施形態によれば、第１実施形態の（１）〜（７）の効果を他に下記の効果を奏する。
（１） 本実施形態のシステムは、車両１０の外部の景色を撮像する車載カメラ１０２（撮像部）を備えている。そして、映像生成装置６０（映像生成部）は、車載カメラ１０２が撮像した画像をプロジェクタ５０に出力する。この結果、乗員が、スクリーン３０Ａ〜３０Ｃに投射された外部の景色を見ることができる。特に、スライドドア１４Ａ，１４Ｂの窓がコンテンツ画像を投射するためにスクリーンで遮蔽されている場合、スクリーンに外部の景色が投射できるため、コンテンツ画像と外部の景色の撮影画像を乗員は共に見ることができる。

（２） 本実施形態のシステムは、地理情報を記憶する地理情報記憶部１１０と、ＧＰＳ情報を取得するＧＰＳ装置１２０（ＧＰＳ取得部）を備える。また、映像生成装置６０は、地理情報選択部として車載カメラ１０２（撮像部）が画像を撮像したときにＧＰＳ装置１２０（ＧＰＳ取得部）が取得したＧＰＳ情報に基づいてそのＧＰＳ情報に関連する地理情報を地理情報記憶部１１０から選択する。

また、映像生成装置６０（映像生成部）は、選択した地理情報と前記画像をあわせてプロジェクタ５０に出力する。これを受けてプロジェクタ５０は、地理情報と前記画像をスクリーン３０Ａ〜３０Ｂ（スクリーン部）に投射する。

この結果、本実施形態のシステムによれば、車室内のスクリーンに投射する撮影画像に地理情報を付与した拡張現実を実現することができる。
（第４実施形態）
次に、第４実施形態の車両搭載インタラクティブシステムを図１、図１０を参照して説明する。第４実施形態のシステムは、第２実施形態のシステムの構成にさらに、図１に示すように車載カメラ１０２を搭載したところが異なっている。図１において、車載カメラ１０２の車両１０に対する搭載位置を示している。車載カメラ１０２の搭載位置は、第３実施形態と同様に、４つに限定するものではない。本実施形態において、車載カメラ１０２は撮像部に相当する。

また、図１０に示すように、本実施形態では、第３実施形態と同様に映像生成装置６０には地理情報記憶部１１０及びＧＰＳ装置１２０が接続端子１０４，１０６を介して接続されている。地理情報記憶部は、地理情報（地理空間情報ともいう）を記憶している。本実施形態において、ＧＰＳ装置１２０は、ＧＰＳ取得部に相当し、映像生成装置６０は、地理情報選択部に相当する。

（第４実施形態の作用）
第４実施形態のシステムにおいて、モーションセンサ９０、映像生成装置６０、プロジェクタ５０の作用は第２実施形態と同様であるため、説明を省略する。また、システムにおける車載カメラ１０２、地理情報記憶部１１０、ＧＰＳ装置１２０、映像生成装置６０、及びプロジェクタ５０の作用は、第３実施形態と同様であるため、説明を省略する。

本実施形態によれば、第１実施形態の（１）〜（３）、（５）の効果、第２実施形態の（１）、及び第３実施形態の(１)及び（２）の効果を奏する。
なお、前記実施形態の各々は以下のように変更してもよい。

・ 無線通信部６８と、プロジェクタの無線通信部５２の代わりに、映像生成装置６０とプロジェクタ５０を有線で接続してもよい。
・ 前記実施形態では、スライドドアにスクリーン３０Ａ，３０Ｂを設けたが、ドアはスライドドアに限定するものではなく、非スライド式のドアにスクリーン３０Ａ，３０Ｂを設けてもよい。

・ 第１、第３実施形態では、スタイラス８０に設けた図示しないスイッチがオン状態のとき、スタイラス８０の操作軌跡を検出して、その操作軌跡を画像化してプロジェクタ５０によりスクリーンに映すようにした。この構成に代えて、映像生成装置６０の図示しない操作部に設けたキーを操作することにより、スタイラス８０の操作軌跡を検出して、その操作軌跡を画像化してプロジェクタ５０によりスクリーンに映すようにしてもよい。また、スタイラスの代わりに、映像生成装置６０の図示しない操作部に設けたキーを操作することにより、操作者の指の操作軌跡を検出して、その操作軌跡を画像化してプロジェクタ５０によりスクリーンに映すようにしてもよい。

・ 前記実施形態において、スクリーン３０Ａ，３０Ｂを省略する代わりに、ドアガラス１７自体をスクリーン部としてもよい。具体的には、ドアガラス１７を、調光ガラスとすることによりスクリーン部とする。

前記調光ガラスは、一対のガラス板間に調光フィルムを介在させたものや、或いは、一枚のガラス板に調光フィルムを貼りつけたもの等がある。調光フィルムを介在させたものには、液晶方式、エレクトロクロミック方式等がある。

いずれも、調光ガラスは、電源オンにより、光の通過を大きく許容する透明状態となり、電源オフにより、光の通過を許容しない遮蔽状態にすることができる。この調光ガラスをドアガラス１７とすることにより、電源オフ状態では、スクリーン部として使用することができる。

・ 前記実施形態のスクリーンを半透明にしてもよい。例えば、スクリーン３０Ａ、３０Ｂを半透明にすると、室内から、スクリーン３０Ａ，３０Ｂ、ドアガラス１７を介して、車窓の景色を操作者（乗員）は見ることができる。

・ 前記実施形態では、各スクリーンは、四角形状にしたが、四角形状に限定するものではなく、他の形状であってもよい。また、スクリーンの数は、限定するものではなく、１つ以上あればよい。

・ スクリーンの投射面をタッチパネル式としてもよい。タッチパネル式としては、代表的には、抵抗膜式、静電容量式あり、また、他の方式も種々あるため、これらのいずれの方式を採用してもよい。タッチパネル式の場合、スタイラス８０で押圧された部位の２次元座標値を検出することができる。

・ プロジェクタとして、レーザプロジェクタを使用する場合は、該プロジェクタ内に、レーザ反射光検出が可能なディテクタ（光検出器）で操作位置、または操作軌跡の検出を検出可能としてもよい。この場合、このディテクタが、操作検出部に相当する。

・ 第３、第４実施形態において、地理情報記憶部１１０及びＧＰＳ装置１２０を省略してもよい。

１０…車両、１４Ａ，１４Ｂ…スライドドア、１８…天井、
１８ａ…格納室、３０Ａ〜３０Ｃ…スクリーン（スクリーン部）、
３２，３４，３６，３８…位置検出センサ、
４０…格納部、４２…回転機構、５０…プロジェクタ、５２…無線通信部、
６０…映像生成装置（映像生成部、地理情報選択部）、６２…ＣＰＵ、
６４…入力データメモリ、６６…表示画像メモリ、６８…無線通信部、
７０…演算装置、８０…スタイラス、９０…モーションセンサ、
１０２…車載カメラ（撮像部）、１１０…地理情報記憶部、
１２０…ＧＰＳ装置（ＧＰＳ取得部）。

Claims (9)

1. 車室内に設けられたスクリーン部と、
   画像を生成して出力する映像生成部と、
   前記車室内に設けられ、前記映像生成部からの前記画像を前記スクリーン部）に対して投射するプロジェクタと、
   前記スクリーン部の前で行われる操作者の操作位置または操作軌跡を検出する操作検出部とを備え、
   前記映像生成部は、前記操作検出部の操作検出に基づく画像を少なくとも生成して前記プロジェクタに出力する車両搭載インタラクティブシステム。
2. 前記スクリーン部が、車両の窓に設けられている請求項１に記載の車両搭載インタラクティブシステム。
3. 前記窓が、スライドドアの窓である請求項２に記載の車両搭載インタラクティブシステム。
4. 前記操作検出部による前記操作者の操作位置または操作軌跡の検出が、前記操作者の指または前記操作者が把持するスタイラスの前記スクリーン部における座標値または操作軌跡の検出であり、
   前記スクリーン部、前記操作検出部と前記映像生成部を少なくとも含むことによりインタラクティブホワイトボードが構成されている請求項１乃至請求項３のうちいずれか１項に記載の車両搭載インタラクティブシステム。
5. 前記操作検出部が、前記操作者のモーションを検出して、前記操作者の操作位置または操作軌跡を検出するモーションセンサである請求項１乃至請求項３のうちいずれか１項に記載の車両搭載インタラクティブシステム。
6. 車両の外部の景色を撮像する撮像部を備え、
   前記映像生成部は、前記撮像部が撮像した画像を前記プロジェクタに出力する請求項１乃至請求項５のうちいずれか１項に記載の車両搭載インタラクティブシステム。
7. 地理情報を記憶する地理情報記憶部と、
   ＧＰＳ情報を取得するＧＰＳ取得部と、
   前記撮像部が画像を撮像したときに前記ＧＰＳ取得部が取得したＧＰＳ情報に基づいてそのＧＰＳ情報に関連する地理情報を前記地理情報記憶部から選択する地理情報選択部を備え、
   前記映像生成部は、前記地理情報選択部が選択した地理情報と前記画像をあわせて前記プロジェクタに出力し、前記プロジェクタは、前記地理情報と前記画像を前記スクリーン部に投射する請求項６に記載の車両搭載インタラクティブシステム。
8. 前記車室内に設けられ、前記プロジェクタを格納する格納部を備える請求項１乃至請求項７のうちいずれか１項に記載の車両搭載インタラクティブシステム。
9. 前記スクリーン部が、前記車室内に複数設けられており、
   前記プロジェクタを、前記スクリーン部の各々に対して相対する位置に変位可能に回転させる回転機構を備える請求項１乃至請求項８のいずれか１項に記載の車両搭載インタラクティブシステム。