WO2020161853A1 - 映像刺激提示制御装置 - Google Patents

Abstract

従来とは異なる態様で映像と現実のビークルを利用することにより、ユーザに新たな仮想的体験を提供することができる映像刺激提示装置に用いられる映像刺激提示制御装置を提供する。映像刺激提示制御装置は、現実ビークルデータと仮想物体データに基づいて、仮想物体映像データを取得し、現実のビークルを操縦しているオペレータが見ている現実の光景に仮想物体の映像が重ねて提示されるように、仮想物体映像データを映像刺激提示装置に出力する。映像刺激提示制御装置は、現実ビークルデータと仮想物体データに基づいて、相対位置関係刺激に関するデータを含む仮想物体現実ビークル刺激データを取得し、相対位置関係刺激が現実の光景に重ねて提示されている仮想物体の映像を見ながら現実のビークルを操縦しているオペレータに対して付与されるように、仮想物体現実ビークル刺激データを映像刺激提示装置に出力する。

Description

映像刺激提示制御装置

　本発明は、現実のビークルを操縦しているオペレータに対して仮想的な体験を提供する映像刺激提示装置に用いられ、当該映像刺激提示装置が現実のビークルを操縦しているオペレータに提示する映像及び刺激を制御する映像刺激提示制御装置に関する。

　従来、映像情報に応じた感覚又は運動をユーザに提示することにより、新たな仮想的体験を提供するバーチャルリアリティシステム（以下、ＶＲシステム）が知られている。このようなＶＲシステムは、例えば、特開２０１７－１０２４０１号公報に開示されている。

　上記ＶＲシステムは、映像情報に応じた感覚又は運動をユーザに提示するためのモーションプラットフォーム（以下、ＭＰ）として、車両を利用する。上記ＶＲシステムは、バーチャル空間を表す映像情報に基づいてユーザに映像を提示する映像提示手段と、バーチャル空間を表す映像情報に基づいて車両内のユーザに感覚又は運動を提示するように車両の一部を駆動制御する制御手段とを備える。

　上記ＶＲシステムにおいて、映像情報に応じた感覚又は運動をユーザに提示するためのＭＰとしての車両は、現実の車両である。上記ＶＲシステムに用いられる車両は、車両モード又はＶＲシステムモードにて駆動される。車両モードとＶＲシステムモードの切替は、ユーザの操作によって実現される。上記ＶＲシステムに用いられる車両は、車両モードでは通常の車両として利用され、ＶＲシステムモードではＭＰとして利用される。

　上記ＶＲシステムにおいて、ユーザは、映像提示手段であるヘッドマウントディスプレイ（以下、ＨＭＤ）を装着してＭＰである車両に乗る。上記ＶＲシステムは、ＨＭＤによりバーチャル空間の映像をユーザに提示する。つまり、ＨＭＤを装着したユーザは、バーチャル空間の映像だけを見ている。

　上記ＶＲシステムは、ＨＭＤによりバーチャル空間の映像をユーザに提示するときに、ユーザが乗っている車両をＭＰとして利用する。具体的には、ユーザが乗っている車両の一部を駆動制御することにより、ユーザにバーチャル空間の映像に応じた感覚又は運動を提示する。

特開２０１７－１０２４０１号公報

　上記ＶＲシステムでは、ユーザに新たな仮想的体験を提供するために、バーチャル空間の映像と現実の車両とを利用している。これとは異なる態様で映像と現実のビークルとを利用して、高い現実感覚を有する新たな仮想的体験をシンプルな制御でユーザに提供することが求められている。

　本発明の目的は、従来とは異なる態様で映像と現実のビークルを利用することにより、高い現実感覚を有する新たな仮想的体験をユーザに提供することができる映像刺激提示装置に用いられ、当該映像刺激提示装置がユーザに提供する新たな仮想的体験をシンプルに制御することができる映像刺激提示制御装置を提供することである。

　本発明の一実施形態に係る映像刺激提示制御装置は、現実のビークルを操縦しているオペレータに対して仮想的な体験を提供するために電気的に作り出した映像と当該映像に関連する刺激とを提示する映像刺激提示装置に用いられ、映像刺激提示装置が提示する映像と刺激を制御する。

　映像刺激提示制御装置は、仮想物体データ取得部と、現実ビークルデータ取得部と、仮想物体映像データ取得部と、仮想物体映像データ出力部と、仮想物体現実ビークル刺激データ取得部と、仮想物体現実ビークル刺激データ出力部とを備える。

　仮想物体データ取得部は、仮想物体データを取得する。仮想物体データは、仮想物体の種類及び形状に関するデータを含む。仮想物体は、現実のビークルを操縦しているオペレータが見ている現実の光景の中に存在しない物体である。

　現実ビークルデータ取得部は、現実ビークルデータを取得する。現実ビークルデータは、現実のビークルと仮想物体との相対的な位置関係に関するデータを含む。

　仮想物体映像データ取得部は、現実ビークルデータ取得部によって取得された現実ビークルデータおよび仮想物体データ取得部によって取得された仮想物体データに基づいて、仮想物体映像データを取得する。仮想物体映像データは、現実のビークルとの相対的な位置が考慮された仮想物体の映像に関するデータである。

　仮想物体映像データ出力部は、現実のビークルを操縦しているオペレータが見ている現実の光景に仮想物体の映像が重ねて提示されるように、仮想物体映像データを映像刺激提示装置に出力する。

　仮想物体現実ビークル刺激データ取得部は、現実ビークルデータ取得部によって取得された現実ビークルデータおよび仮想物体データ取得部によって取得された仮想物体データに基づいて、仮想物体現実ビークル刺激データを取得する。仮想物体現実ビークル刺激データは、相対位置関係刺激に関するデータを含む。相対位置関係刺激は、仮想物体と現実のビークルとの相対的な位置関係に基づく刺激であって、現実のビークルを操縦しているオペレータに付与するための刺激である。

　仮想物体現実ビークル刺激データ出力部は、相対位置関係刺激が現実のビークルを操縦しているオペレータに対して付与されるように、仮想物体現実ビークル刺激データを映像刺激提示装置に出力する。

　上記映像刺激提示制御装置が用いられる映像刺激提示装置によれば、現実のビークルを操縦しているオペレータに対して、高い現実感覚を有する新たな仮想的体験を提供することができる。具体的には、以下のとおりである。

　現実のビークルを操縦しているオペレータは、現実のビークルとの相対的な位置が考慮された仮想物体の映像を現実の光景の中に見ることができる。つまり、現実のビークルを操縦しているオペレータは、制御された仮想物体の映像を現実の光景の中に見ることができる。

　現実のビークルを操縦しているオペレータは、現実のビークルを操縦しているときに、現実のビークルを操縦していることによって刺激を受けている。また、現実のビークルを操縦しているオペレータは、現実のビークルを操縦しているときに、現実のビークルを操縦していることによって受けている刺激に加えて、仮想物体と現実のビークルとの相対的な位置関係に基づく刺激である相対位置関係刺激を受けることができる。

　したがって、上記映像刺激提示制御装置が用いられる映像刺激提示装置によれば、現実のビークルを操縦しているオペレータに対して、高い現実感覚を有する新たな仮想的体験を提供することができる。

　また、上記映像刺激提示制御装置によれば、現実のビークルを操縦しているオペレータに対して高い現実感覚を有する新たな仮想的体験を提供する際の制御をシンプルにすることができる。具体的には、以下のとおりである。

　仮想的な体験を提供するために現実のビークルを操縦しているオペレータに対して提示される映像とその映像に関連させる刺激は、仮想物体の映像と、その仮想物体と現実のビークルとの相対的な位置関係に基づく相対位置関係刺激である。また、映像刺激提示制御装置が関連させる映像と刺激は、仮想物体の映像と、その仮想物体と現実のビークルとの相対的な位置関係に基づく相対位置関係刺激である。

　このように、本発明の一実施形態に係る映像刺激提示制御装置が関連させる映像と刺激は、オペレータが見ている光景を全て仮想空間の映像とし、その映像とオペレータが受ける全ての刺激とを関連させる従来の映像刺激提示制御装置が制御するものより少なくて済む。つまり、仮想物体の映像は、オペレータが見ている光景を全て仮想空間の映像とした場合に比べて、少ない処理負担で提供することができる。また、オペレータは現実のビークルを操縦することで刺激に対して敏感になっており、現実のビークルを操縦しているオペレータに付与する刺激は少なくてもよいので、刺激の付与に伴う処理負担を軽減することができる。そのため、映像刺激提示制御装置が行う制御をシンプルな制御にすることができる。

　本発明の一実施形態に係る映像刺激提示制御装置は、映像刺激提示装置が提示する映像と刺激を制御するものであれば、特に限定されない。映像刺激提示制御装置は、例えば、ＩＣ（Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）、電子部品、回路基板等の組み合わせによって実現される。

　本発明の一実施形態に係る映像刺激提示制御装置は、例えば、映像刺激提示装置に設けられていてもよいし、映像刺激提示装置以外の装置に設けられていてもよい。また、映像刺激提示制御装置を複数の装置で構成し、当該複数の装置を分散して設けてもよい。映像刺激提示制御装置を構成する複数の装置を分散して設ける場合、映像刺激提示制御装置を構成する複数の装置の少なくとも１つは、例えば、サーバによって実現してもよい。

　本発明の一実施形態に係る映像刺激提示制御装置において、現実ビークルデータ取得部、仮想物体データ取得部、仮想物体映像データ取得部、仮想物体映像データ出力部、仮想物体現実ビークル刺激データ取得部、及び、仮想物体現実ビークル刺激データ出力部の各々は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）が不揮発性のメモリに記憶されたプログラムを読み出し、当該プログラムに従って所定の処理を実行すること等によって実現される。

　本発明の一実施形態に係る映像刺激提示制御装置が用いられる映像刺激提示装置は、現実のビークルを操縦しているオペレータに対して仮想的な体験を提供するために電気的に作り出した映像と当該映像に関連する刺激とを提示するものであれば、特に限定されない。

　映像刺激提示装置は、例えば、映像を提示する映像提示部と、映像に関連する刺激を提示する刺激提示部とを含む。映像提示部は、現実のビークルを操縦しているオペレータが見ている現実の光景に仮想物体の映像を重ねて提示することができるものであれば、特に限定されない。刺激提示部は、現実のビークルを操縦しているオペレータに対して相対位置関係刺激を付与することができるものであれば、特に限定されない。刺激提示部は、現実のビークルを操縦しているオペレータに付与する刺激に応じた構造を有していればよい。映像提示部と刺激提示部は、例えば、同じ装置を用いて実現してもよいし、別々の装置を用いて実現してもよい。映像提示部は、例えば、現実のビークルを操縦しているオペレータに接触した状態で使用されるものであってもよい。刺激提示部によってオペレータに提示される刺激がオペレータの触覚を刺激するものである場合、刺激提示部は、例えば、現実のビークルを操縦しているオペレータに接触した状態で使用されるものであってもよい。このような刺激提示部は、例えば、オペレータが操縦している現実のビークルの一部を用いて実現してもよい。映像提示部による映像の提示と刺激提示部による刺激の提示とを関連させるには、例えば、映像提示部が映像を提示するタイミングと刺激提示部が刺激を提示するタイミングとを調整すればよい。映像提示部が映像を提示するタイミングと刺激提示部が刺激を提示するタイミングとを調整するには、例えば、映像提示部と刺激提示部との間で信号をやりとりすればよい。

　映像刺激提示装置は、オペレータが操縦する現実のビークルの少なくとも一部を含んでいてもよい。この場合、仮想物体現実ビークル刺激データ出力部は、相対位置関係刺激が現実のビークルを操縦しているオペレータに対して現実のビークルの少なくとも一部を介して付与されるように、仮想物体現実ビークル刺激データを映像刺激提示装置に出力してもよい。

　このような態様においては、オペレータが操縦している現実のビークルを介して、相対位置関係刺激がオペレータに付与される。そのため、相対位置関係刺激をオペレータに感じさせやすくなる。その理由は、以下のとおりである。

　現実のビークルを操縦しているオペレータは、現実のビークルを操縦しているときに、現実のビークルを操縦していることによる刺激を感じ取っている。そのため、現実のビークルを操縦しているオペレータは、現実のビークルを操縦しているときには、刺激に対して敏感になっている。このように刺激に対して敏感になっているオペレータに相対位置関係刺激を付与すれば、オペレータは現実のビークルを操縦していることによる刺激に加えて付与される相対位置関係刺激についても感じ取りやすくなる。したがって、オペレータが操縦している現実のビークルを介して相対位置関係刺激がオペレータに付与されるようにすれば、相対位置関係刺激をオペレータに感じさせやすくなる。

　電気的に作り出した映像は、電気的変換によって再現した映像である。別の表現をすれば、電気的に作り出した映像は、電気信号に基づいて生成される映像である。電気的に作り出した映像は、現実の光景に重ね合わせて提示することができるものであれば、特に限定されない。

　映像が提示されるタイミングと刺激が提示されるタイミングは、ずれていてもよい。映像に関連する刺激は、現実のビークルを操縦しているオペレータが認識できるものであればよい。映像に関連する刺激は、複数回に亘って付与されてもよい。複数回に亘って付与される刺激は、互いに異なるものであってもよい。

　本発明の一実施形態に係る映像刺激提示制御装置において、現実ビークルデータ取得部は、現実ビークルデータを取得するものであれば、特に限定されない。現実ビークルデータは、現実のビークルと仮想物体との相対的な位置関係に関するデータを含むものであれば、特に限定されない。

　現実ビークルデータ取得部が現実のビークルと仮想物体との相対的な位置関係に関するデータを取得する態様は、特に限定されない。

　現実ビークルデータ取得部は、例えば、仮想物体の出現位置と現実のビークルの現在位置とに基づいて、現実のビークルと仮想物体との相対的な位置関係を取得してもよい。

　現実のビークルの現在位置は、例えば、現実のビークルの位置情報を取得可能な装置を用いて取得してもよい。現実のビークルの位置情報を取得可能な装置は、例えば、現実のビークルに設けてもよいし、現実のビークルを操縦しているオペレータが所持していてもよい。現実のビークルの位置情報を取得可能な装置が現実のビークルを操縦しているオペレータによって所持される態様には、現実のビークルの位置情報を取得可能な装置が現実のビークルを操縦しているオペレータに装着される態様を含む。現実のビークルの位置情報を取得可能な装置は、例えば、ＧＰＳ受信機である。

　現実のビークルの位置情報は、ＧＰＳを利用せずに取得してもよい。例えば、現実のビークルが走行する路面を私有地内に形成する場合、当該私有地内に配置された複数のアンテナからの信号を受信可能な装置を用いて、現実のビークルの位置情報を取得してもよい。

　また、現実ビークルデータ取得部は、現実のビークルを操縦しているオペレータに装着されたカメラによって撮影された仮想物体の出現位置を含む画像に基づいて、現実のビークルと仮想物体との相対的な位置関係を取得してもよい。カメラによって撮影された画像内での仮想物体の出現位置や当該画像の画素数等を利用すれば、現実のビークルの現在位置から仮想物体の出現位置までの距離と、現実のビークルの現在位置から見た仮想物体の出現位置の方向が判るので、現実のビークルと仮想物体との相対的な位置関係を取得することができる。

　現実ビークルデータは、現実のビークルの形状に関するデータを含んでいてもよい。現実ビークルデータ取得部が現実のビークルの形状に関するデータを取得する態様は、特に限定されない。現実ビークルデータ取得部は、例えば、メモリに格納された現実のビークルの形状に関するデータを読み出すことにより、現実のビークルの形状に関するデータを取得してもよい。現実のビークルの形状に関するデータを格納するメモリは、映像刺激提示制御装置に設けられたものであってもよいし、映像刺激提示制御装置以外の装置に設けられたものであってもよい。

　現実のビークルの形状に関するデータは、現実のビークルと仮想物体との相対的な位置関係を導き出すために用いることができるものであれば、特に限定されない。現実のビークルの形状に関するデータは、例えば、現実のビークルの平面形状に関するものであってもよいし、現実のビークルの立体形状に関するものであってもよい。現実のビークルの平面形状は、例えば、現実のビークルを上から見た形状に関するものであってもよいし、現実のビークルを前後左右の何れかから見た形状に関するものであってもよい。

　現実のビークルは、オペレータが操縦可能なものであれば、特に限定されない。現実のビークルは、例えば、地上を移動可能なビークルであってもよいし、水上又は水中を移動可能なビークルであってもよいし、空中を移動可能なビークルであってもよい。地上を移動可能なビークルは、例えば、車両である。車両は、例えば、少なくとも１つの車輪を備える。水上又は水中を移動可能なビークルは、例えば、船である。空中を移動可能なビークルは、例えば、飛行機である。映像刺激提示装置が刺激提示部を含みかつ当該刺激提示部が現実のビークルの一部を用いて実現される場合、現実のビークルは、映像刺激提示制御装置からの信号によって制御される。このような現実のビークルは、例えば、電動ビークルによって実現される。電動ビークルは、電力供給源からの電力供給に基づいて推進力を得るものであれば、特に限定されない。

　本発明の一実施形態に係る映像刺激提示制御装置において、仮想物体データ取得部は、仮想物体データを取得するものであれば、特に限定されない。仮想物体データ取得部が仮想物体データを取得する態様は、特に限定されない。仮想物体データ取得部は、例えば、メモリに格納された仮想物体データを読み出すことにより、仮想物体データを取得してもよい。仮想物体データが格納されたメモリは、映像刺激提示制御装置に設けられたものであってもよいし、映像刺激提示制御装置以外の装置に設けられたものであってもよい。

　仮想物体は、現実のビークルを操縦しているオペレータが見ている現実の光景の中に存在しない物体であれば、特に限定されない。現実の光景は、例えば、現実のビークルを操縦しているオペレータの周囲の光景である。現実の光景は、例えば、現実のビークルを操縦しているオペレータが直接見るものであってもよいし、現実のビークルを操縦しているオペレータに装着されたカメラが撮影する画像（オペレータの周囲を撮影した画像）が表示された画面を介してオペレータが見るものであってもよい。仮想物体は、例えば、固体であってもよいし、液体であってもよいし、気体であってもよいし、固体と液体と気体のうちの少なくとも２つを組み合わせたものであってもよい。仮想物体は、例えば、当該仮想物体と現実のビークルとの相対的な位置関係に基づく刺激についての情報を提示する機能を有していてもよい。

　仮想物体データは、仮想物体の形状に関するデータを含むものであれば、特に限定されない。仮想物体の形状に関するデータは、例えば、仮想物体の平面形状に関するものであってもよいし、仮想物体の立体形状に関するものであってもよい。仮想物体の平面形状は、例えば、仮想物体を上から見た形状に関するものであってもよいし、仮想物体を前後左右の何れかから見た形状に関するものであってもよい。

　本発明の一実施形態に係る映像刺激提示制御装置において、仮想物体映像データ取得部は、現実ビークルデータ取得部によって取得された現実ビークルデータおよび仮想物体データ取得部によって取得された仮想物体データに基づいて、仮想物体映像データを取得するものであれば、特に限定されない。

　仮想物体映像データ取得部が仮想物体映像データを取得する態様は、特に限定されない。仮想物体映像データ取得部は、例えば、現実ビークルデータ取得部が取得した現実ビークルデータと仮想物体データ取得部が取得した仮想物体データから仮想物体映像データを生成して取得してもよい。具体的には、現実ビークルデータ取得部が取得した現実ビークルデータに含まれる現実のビークルと仮想物体との相対的な位置関係を示すデータに基づいて仮想物体の見え方を決定し、当該見え方に対応する仮想物体の映像に関するデータを生成して取得してもよい。

　仮想物体映像データは、現実のビークルとの相対的な位置が考慮された仮想物体の映像に関するデータであれば、特に限定されない。現実のビークルとの相対的な位置が考慮された仮想物体の映像は、例えば、現実のビークルとの相対的な位置関係に応じた見え方をするように提示される仮想物体の映像である。つまり、仮想物体の映像は、現実のビークルとの相対的な位置関係に応じて変化する。

　本発明の一実施形態に係る映像刺激提示制御装置において、仮想物体映像データ出力部は、現実のビークルを操縦しているオペレータが見ている現実の光景に仮想物体の映像が重ねて提示されるように、仮想物体映像データを映像刺激提示装置に出力するものであれば、特に限定されない。現実のビークルを操縦しているオペレータが見ている現実の光景に仮想物体の映像が重ねて提示されることにより、現実のビークルを操縦しているオペレータが現実の光景と仮想物体の映像を同時に見ることができる。

　本発明の一実施形態に係る映像刺激提示制御装置において、仮想物体現実ビークル刺激データ取得部は、現実ビークルデータ取得部によって取得された現実ビークルデータおよび仮想物体データ取得部によって取得された仮想物体データに基づいて、仮想物体現実ビークル刺激データを取得するものであれば、特に限定されない。

　仮想物体現実ビークル刺激データ取得部が仮想物体現実ビークル刺激データを取得する態様は、特に限定されない。仮想物体現実ビークル刺激データ取得部は、例えば、参照テーブルを用いることにより、現実ビークルデータ取得部が取得した現実ビークルデータと仮想物体データ取得部が取得した仮想物体データに対応する仮想物体現実ビークル刺激データを取得してもよい。

　仮想物体現実ビークル刺激データは、相対位置関係刺激に関するデータを含むものであれば、特に限定されない。相対位置関係刺激は、仮想物体と現実のビークルとの相対的な位置関係に基づく刺激であって、現実のビークルを操縦しているオペレータに付与するための刺激であれば、特に限定されない。

　仮想物体と現実のビークルとの相対的な位置関係に基づく刺激は、例えば、仮想物体と現実のビークルとの相対的な位置関係を示す刺激であってもよいし、仮想物体と現実のビークルとの相対的な位置関係に起因して付与される刺激であってもよい。仮想物体と現実のビークルとの相対的な位置関係に起因して付与される刺激は、仮想物体と現実のビークルとの相対的な位置関係に起因して行われる現実のビークルへの制御により、現実のビークルを介して現実のビークルのオペレータに付与されるものを含む。

　相対位置関係刺激は、例えば、現実のビークルを操縦しているオペレータの五感である視覚、聴覚、触覚、臭覚及び味覚のうちの複数の感覚を刺激するものであってもよい。この場合、オペレータの五感のうち複数の感覚が刺激されるので、オペレータはより刺激を受け易くなる。

　相対位置関係刺激は、例えば、現実のビークルを操縦しているオペレータの触覚を刺激するものを含むものであってもよい。この場合、オペレータの触覚が刺激されるので、オペレータはより刺激を受け易くなる。

　相対位置関係刺激は、例えば、オペレータが現実のビークルを操縦しているときに受ける刺激よりも小さくてもよい。この場合、相対位置関係刺激をオペレータに付与するための制御において処理の負担が軽減される。その結果、相対位置関係刺激をオペレータに付与するための制御がシンプルになる。

　相対位置関係刺激がオペレータの視覚を刺激するように付与される態様には、例えば、現実のビークルと仮想物体との相対的な位置関係に応じた映像を表示する態様や、現実のビークルと仮想物体との相対的な位置関係に応じて仮想物体の映像を変化させる態様等が含まれる。

　相対位置関係刺激がオペレータの聴覚を刺激するように付与される態様には、例えば、現実のビークルと仮想物体との相対的な位置関係に応じた音声を出力する態様や、現実のビークルを仮想物体との相対的な位置関係に応じて出力される音声を変化させる態様等が含まれる。

　相対位置関係刺激がオペレータの触覚を刺激するように付与される態様には、例えば、現実のビークルと仮想物体との相対的な位置関係に応じて、オペレータの身体に及ぼされる力の大きさや力が及ぼされる方向を変化させる態様等が含まれる。オペレータの身体に及ぼされる力の大きさを変化させる態様には、例えば、オペレータの皮膚に力が及ぼされていない状態からオペレータの皮膚に力を及ぼす態様が含まれる。

　相対位置関係刺激がオペレータの嗅覚を刺激するように付与される態様には、例えば、現実のビークルと仮想物体との相対的な位置関係に応じて匂いを変化させる態様等が含まれる。匂いを変化させる態様には、例えば、オペレータが刺激として付与される匂いを嗅いでいない状態から当該匂いを嗅いでいる状態に変化させる態様が含まれる。

　相対位置関係刺激がオペレータの味覚を刺激するように付与される態様には、例えば、現実のビークルと仮想物体との相対的な位置関係に応じて味を変化させる態様等が含まれる。味を変化させる態様には、例えば、オペレータが刺激として付与される味を感じていない状態から当該味を感じている状態に変化させる態様が含まれる。

　本発明の一実施形態に係る映像刺激提示制御装置において、仮想物体現実ビークル刺激データ出力部は、相対位置関係刺激が現実のビークルを操縦しているオペレータに対して付与されるように、仮想物体現実ビークル刺激データを映像刺激提示装置に出力するものであれば、特に限定されない。現実のビークルを操縦しているオペレータに対して相対位置関係刺激が付与されることにより、現実のビークルを操縦しているオペレータは、現実のビークルを操縦することで受ける刺激に加えて、仮想物体と現実のビークルとの相対的な位置関係に基づく刺激である相対位置関係刺激を受けることができる。

　この発明の上述の目的及びその他の目的、特徴、局面及び利点は、添付図面に関連して行われる以下のこの発明の実施形態の詳細な説明から一層明らかとなろう。

　本明細書にて使用される場合、用語「及び／又は（ａｎｄ／ｏｒ）」は１つの、又は複数の関連した列挙されたアイテム（ｉｔｅｍｓ）のあらゆる又は全ての組み合わせを含む。

　本明細書中で使用される場合、用語「含む、備える（ｉｎｃｌｕｄｉｎｇ）」、「含む、備える（ｃｏｍｐｒｉｓｉｎｇ）」又は「有する（ｈａｖｉｎｇ）」及びその変形の使用は、記載された特徴、工程、操作、要素、成分及び／又はそれらの等価物の存在を特定するが、ステップ、動作、要素、コンポーネント、及び／又はそれらのグループのうちの１つ又は複数を含むことができる。

　他に定義されない限り、本明細書で使用される全ての用語（技術用語及び科学用語を含む）は、本発明が属する当業者によって一般的に理解されるのと同じ意味を有する。

　一般的に使用される辞書に定義された用語のような用語は、関連する技術及び本開示の文脈における意味と一致する意味を有すると解釈されるべきであり、本明細書で明示的に定義されていない限り、理想的又は過度に形式的な意味で解釈されることはない。

　本発明の説明においては、技術及び工程の数が開示されていると理解される。これらの各々は個別の利益を有し、それぞれは、他の開示された技術の１つ以上、又は、場合によっては全てと共に使用することもできる。従って、明確にするために、この説明は、不要に個々のステップの可能な組み合わせの全てを繰り返すことを控える。それにもかかわらず、明細書及び特許請求の範囲は、そのような組み合わせが全て本発明及び特許請求項の範囲内にあることを理解して読まれるべきである。

　以下の説明では、説明の目的で、本発明の完全な理解を提供するために多数の具体的な詳細を述べる。しかしながら、当業者には、これらの特定の詳細なしに本発明を実施できることが明らかである。本開示は、本発明の例示として考慮されるべきであり、本発明を以下の図面又は説明によって示される特定の実施形態に限定することを意図するものではない。

　本発明によれば、従来とは異なる態様で映像と現実のビークルを利用することにより、ユーザに新たな仮想的体験を提供することができる映像刺激提示装置に用いられる映像刺激提示制御装置を提供することができる。

本発明の実施の形態による映像刺激提示制御装置を示すブロック図と、現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図とを併せて示す図面である。 映像刺激提示制御装置が実行する仮想物体映像データ取得処理を示すフローチャートである。 映像刺激提示制御装置が実行する仮想物体現実ビークル刺激データ取得処理を示すフローチャートである。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、複数の仮想物体が現実の光景に重ねて提示されている情況を示す説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、複数の仮想物体の何れかと現実のビークルとが接触したときの情況を示す説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、現実のビークルが仮想物体に接触することで得られる効果を説明するための説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、図４及び図５に示す仮想物体とは異なる仮想物体がサーキットのコース上に出現している情況を示す説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、図７に示す仮想物体に対して現実のビークルが接触した場合の効果を説明するための説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、図７に示す仮想物体に対して現実のビークルが接触した場合の効果を説明するための説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、図７に示す仮想物体に対して現実のビークルが接触した場合の効果を説明するための説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、仮想物体が現実のビークルの教習の課題に用いられるものであることを示す説明図である。 現実のビークルを操縦しているオペレータが見る光景の一例を説明するための説明図であって、仮想物体が現実のビークルの教習の課題に用いられるものであることを示す説明図である。

　以下、図面を参照しながら、本発明の実施の形態による映像刺激提示制御装置の詳細について説明する。なお、以下に説明する実施の形態は、あくまでも一例である。本発明は、以下に説明する実施の形態によって、何等、限定的に解釈されるものではない。

　図１を参照しながら、本発明の実施の形態による映像刺激提示制御装置１０について説明する。図１は、映像刺激提示制御装置１０を示すブロック図と、現実のビークルＲＶを操縦しているオペレータＯＰが見る光景の一例を説明するための説明図とを併せて示す図面である。

　映像刺激提示制御装置１０は、映像刺激提示装置２０に用いられる。映像刺激提示装置２０は、現実のビークルＲＶを操縦しているオペレータＯＰに対して仮想的な体験を提示するために、電気的に作り出した映像と当該映像に関連する刺激とをオペレータＯＰに提示する。

　ここで、現実のビークルＲＶは、オペレータＯＰが操縦可能なものであれば、特に限定されない。現実のビークルＲＶは、例えば、地上を移動可能なビークルであってもよいし、水上又は水中を移動可能なビークルであってもよいし、空中を移動可能なビークルであってもよい。地上を移動可能なビークルは、例えば、車両である。車両は、例えば、少なくとも１つの車輪を備える。水上又は水中を移動可能なビークルは、例えば、船である。空中を移動可能なビークルは、例えば、飛行機である。

　本実施の形態では、現実のビークルＲＶは、電動ビークルである。電動ビークルは、電力供給源からの電力供給に基づいて推進力を得るものであれば、特に限定されない。電動ビークルは、例えば、映像刺激提示制御装置１０からの信号に基づく制御が可能な構成を有する。つまり、映像刺激提示制御装置１０からの信号に基づく制御が可能な構成を有する電動ビークルは、電動ビークルを操縦しているオペレータに刺激を付与することができる。

　先ず、映像刺激提示制御装置１０が用いられる映像刺激提示装置２０について説明する。映像刺激提示装置２０は、映像提示部２２と、刺激提示部２４とを含む。

　映像提示部２２は、現実のビークルＲＶを操縦しているオペレータＯＰに対して仮想的な体験を提示するために、電気的に作り出した映像を提示する。電気的に作り出した映像は、電気信号に基づいて生成される映像である。

　映像提示部２２は、電気的に作り出した映像を、現実のビークルＲＶを運転しているオペレータＯＰが見ている現実の光景に重ねて提示する。現実の光景は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰの周囲の光景である。

　映像提示部２２は、現実のビークルＲＶを運転しているオペレータＯＰが見ている現実の光景に対して電気的に作り出した映像を重ねて提示するために、例えば、可視光線に対して透明であって、かつ、電気的に作り出した映像を表示可能な表示画面を含む。このような表示画面を映像提示部２２が有することにより、現実のビークルＲＶを運転しているオペレータＯＰは、現実の光景と電気的に作り出した映像とを同時に見ることができる。

　映像提示部２２は、現実のビークルＲＶを運転しているオペレータＲＶの視界の一部に、電気的に作り出した映像を提示する。つまり、現実のビークルＲＶを運転しているオペレータＯＰの視界には、現実のビークルＲＶを運転しているオペレータＲＶが見ている現実の光景と、映像提示部２２が提示する映像（電気的に作り出した映像）とが共存する。別の表現をすれば、現実のビークルＲＶを運転しているオペレータＯＰに映像提示部２２が電気的に作り出した映像を提示しているときであっても、オペレータＯＰが見ている光景の全てが映像ではない。

　映像提示部２２が現実のビークルＲＶを運転しているオペレータＯＰに提示する映像は、仮想物体ＶＯの映像である。仮想物体ＶＯは、現実のビークルＲＶを操縦しているオペレータＯＰが見ている現実の光景の中に存在しない物体であれば、特に限定されない。なお、仮想物体ＶＯの映像の詳細については、後述する。

　映像刺激提示装置２０は、映像提示部２２として機能する装置を含む。映像提示部２２として機能する装置は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰが装着した状態で使用される。別の表現をすれば、現実のビークルＲＶを操縦しているオペレータＯＰに接触した状態で使用される。本実施の形態では、映像提示部２２として機能する装置は、現実のビークルＲＶを操縦しているオペレータＯＰが装着する光透過型ヘッドマウントディスプレイＨＭＤである。

　光透過型ヘッドマウントディスプレイＨＭＤは、例えば、現実のビークルＲＶを運転しているオペレータＯＰが見ている現実の光景に対して電気的に作り出した映像を重ねて提示するために、可視光線を透過可能であって、かつ、電気的に作り出した映像を表示可能な表示画面を有する。このような表示画面は、例えば、現実のビークルＲＶを運転しているオペレータＯＰが光透過型ヘッドマウントディスプレイＨＭＤを装着している状態で、現実のビークルＲＶを運転しているオペレータＯＰの目の前に配置される。

　刺激提示部２４は、現実のビークルＲＶを操縦しているオペレータＯＰに対して仮想的な体験を提示するために、電気的に作り出した映像に関連する刺激を、現実のビークルＲＶを操縦しているオペレータに付与する。つまり、刺激提示部２４は、現実のビークルＲＶを操縦しているオペレータＯＰに刺激を付与する。

　電気的に作り出した映像に関連する刺激は、現実のビークルＲＶを操縦しているオペレータＯＰが認識できるものであれば、特に限定されない。映像が提示されるタイミングと刺激が提示されるタイミングは、同じであってもよいし、ずれていてもよい。電気的に作り出した映像に関連する刺激は、現実のビークルＲＶを操縦しているオペレータに対して複数回に亘って付与されてもよい。複数回に亘って付与される刺激は、互いに異なるものであってもよい。

　電気的に作り出した映像に関連する刺激は、現実のビークルＲＶを操縦しているオペレータＯＰの五感である視覚、聴覚、触覚、臭覚及び味覚の何れかを刺激するものであれば、特に限定されない。電気的に作り出した映像に関連する刺激は、現実のビークルＲＶを操縦しているオペレータＯＰの五感である視覚、聴覚、触覚、臭覚及び味覚のうちの複数を刺激するものであってもよい。電気的に作り出した映像に関連する刺激は、現実のビークルＲＶを操縦しているオペレータＯＰの触覚を刺激するものであってもよい。電気的に作り出した映像に関連する刺激は、現実のビークルＲＶを操縦しているオペレータＯＰが現実のビークルＲＶを操縦しているときに受ける刺激よりも小さくてもよい。

　電気的に作り出した映像に関連する刺激は、例えば、相対位置関係刺激である。相対位置関係刺激は、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づく刺激であって、現実のビークルＲＶを操縦しているオペレータＯＰに付与するための刺激である。なお、相対位置関係刺激の詳細については、後述する。

　刺激提示部２４は、現実のビークルＲＶを操縦しているオペレータＯＰに付与する刺激の種類に応じた構造を有していればよい。刺激提示部２４によって付与される刺激がオペレータＯＰの触覚を刺激するものである場合、刺激提示部２４は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰに接触した状態で使用されるものであればよい。このような刺激提示部２４は、例えば、オペレータＯＰが操縦している現実のビークルの一部を用いて実現することができる。

　映像刺激提示装置２０は、刺激提示部２４として機能する装置を含む。刺激提示部２４によって付与される刺激がオペレータＯＰの触覚を刺激するものである場合、刺激提示部２４として機能する装置は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰに接触した状態で使用されるものであればよい。刺激提示部２４によって付与される刺激がオペレータＯＰの視覚を刺激するものである場合、刺激提示部２４として機能する装置は、例えば、映像提示部２２として機能する装置を用いて実現してもよい。つまり、刺激提示部２４として機能する装置は、映像提示部２２として機能する装置と同じ装置であってもよいし、映像提示部２２として機能する装置と異なる装置であってもよい。

　本実施の形態では、刺激提示部２４として機能する装置として、現実のビークルＲＶと、光透過型ヘッドマウントディスプレイＨＭＤとが採用されている。現実のビークルＲＶは、現実のビークルＲＶを操縦しているオペレータＯＰの触覚を刺激するために用いられる。そのため、現実のビークルＲＶを介して、現実のビークルＲＶを操縦しているオペレータＯＰに刺激が付与される。光透過型ヘッドマウントディスプレイＨＭＤは、現実のビークルＲＶを操縦しているオペレータＯＰの視覚を刺激するために用いられる。なお、光透過型ヘッドマウントディスプレイＨＭＤがスピーカを備える場合、光透過型ヘッドマウントディスプレイＨＭＤは、現実のビークルＲＶを操縦しているオペレータＯＰの聴覚を刺激するために用いてもよい。

　続いて、このような映像刺激提示装置２０に用いられる映像刺激提示制御装置１０について説明する。

　映像刺激提示制御装置１０は、映像刺激提示装置２０が提示する映像と刺激とを制御する。映像刺激提示制御装置１０は、例えば、ＩＣ（Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）、電子部品、回路基板等の組み合わせによって実現される。映像刺激提示制御装置１０は、例えば、映像刺激提示装置２０に設けられていてもよいし、映像刺激提示装置２０に設けられていなくてもよい。

　映像刺激提示制御装置１０は、現実ビークルデータ取得部１１と、仮想物体データ取得部１２と、仮想物体映像データ取得部１３と、仮想物体映像データ出力部１４と、仮想物体現実ビークル刺激データ取得部１５と、仮想物体現実ビークル刺激データ出力部１６とを含む。現実ビークルデータ取得部１１、仮想物体データ取得部１２、仮想物体映像データ取得部１３、仮想物体映像データ出力部１４、仮想物体現実ビークル刺激データ取得部１５、及び、仮想物体現実ビークル刺激データ出力部１６の各々は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）が不揮発性のメモリに記憶されたプログラムを読み出し、当該プログラムに従って所定の処理を実行すること等によって実現される。

　現実ビークルデータ取得部１１は、現実ビークルデータを取得する。現実ビークルデータは、現実のビークルＲＶと仮想物体ＯＰとの相対的な位置関係に関するデータを含む。

　現実ビークルデータ取得部１１が現実のビークルＲＶと仮想物体ＯＰとの相対的な位置関係に関するデータを取得する態様は、特に限定されない。本実施の形態では、現実ビークルデータ取得部１１は、現実のビークルＲＶを操縦しているオペレータＯＰに装着された光透過型ヘッドマウントディスプレイＨＭＤが備えるカメラＣＡＭによって撮影された仮想物体ＶＯの出現位置を含む画像に基づいて、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係を取得する。カメラＣＡＭによって撮影された画像内での仮想物体ＶＯの出現位置や当該画像の画素数等を利用すれば、現実のビークルＲＶの現在位置から仮想物体ＶＯの出現位置までの距離と、現実のビークルＲＶの現在位置から見た仮想物体ＶＯの出現位置の方向が判るので、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係を取得することができる。

　仮想物体ＶＯの出現位置には、例えば、マーカーが配置されている。当該マーカーを光透過型ヘッドマウントディスプレイＨＭＤに設けられたカメラＣＡＭで撮影することにより、光透過型ヘッドマウントディスプレイＨＭＤの表示画面に仮想物体ＶＯの映像が表示される。

　仮想物体データ取得部１２は、仮想物体データを取得する。仮想物体データは、例えば、仮想物体ＶＯの形状に関するデータと、仮想物体ＶＯの出現位置に関するデータとを含む。仮想物体ＶＯは、現実のビークルＲＶを操縦しているオペレータＯＰが見ている現実の光景の中に存在しない物体である。

　仮想物体データ取得部１２が仮想物体データを取得する態様は、特に限定されない。仮想物体データ取得部１２は、例えば、図示しないメモリに格納された仮想物体データを読み出すことにより、仮想物体データを取得する。仮想物体データが格納されたメモリは、映像刺激提示制御装置１０が備えているものであってもよいし、映像刺激提示制御装置１０が備えていないものであってもよい。本実施の形態では、映像刺激提示制御装置１０が備える事前登録データ格納部１２１に格納された仮想物体データを仮想物体データ取得部１２が読み出すことにより、仮想物体データ取得部１２が仮想物体データを取得する。

　仮想物体ＶＯは、現実のビークルＲＶを操縦しているオペレータＯＰが見ている現実の光景の中に存在しない物体であれば、特に限定されない。現実の光景は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰの周囲の光景である。仮想物体ＶＯは、例えば、固体であってもよいし、液体であってもよいし、気体であってもよいし、固体と液体と気体のうちの少なくとも２つを組み合わせたものであってもよい。仮想物体ＶＯは、例えば、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づいて現実のビークルＲＶを操縦しているオペレータＯＰに付与される刺激についての情報を提示する機能を有していてもよい。

　仮想物体ＶＯの形状に関するデータは、例えば、仮想物体ＶＯの平面形状に関するものであってもよいし、仮想物体ＶＯの立体形状に関するものであってもよい。仮想物体ＶＯの平面形状は、例えば、仮想物体ＶＯを上から見た形状に関するものであってもよいし、仮想物体ＶＯを前後左右の何れかから見た形状に関するものであってもよい。

　仮想物体映像データ取得部１３は、現実ビークルデータ取得部１１によって取得された現実ビークルデータおよび仮想物体データ取得部１２によって取得された仮想物体データに基づいて、仮想物体映像データを取得する。仮想物体映像データは、現実のビークルＲＶとの相対的な位置が考慮された仮想物体ＶＯの映像に関するデータである。

　仮想物体映像データ取得部１３は、例えば、現実ビークルデータ取得部１１が取得した現実ビークルデータと仮想物体データ取得部１２が取得した仮想物体データから仮想物体映像データを生成して取得する。

　仮想物体映像データは、現実のビークルＲＶとの相対的な位置が考慮された仮想物体ＶＯの映像に関するデータであれば、特に限定されない。現実のビークルＲＶとの相対的な位置が考慮された仮想物体ＶＯの映像は、例えば、現実のビークルＲＶとの相対的な位置関係に応じた見え方をするように提示される仮想物体ＶＯの映像である。つまり、仮想物体ＶＯの映像は、現実のビークルＲＶとの相対的な位置関係に応じて変化する。

　仮想物体映像データ取得部１３が仮想物体映像データを取得する方法としては、例えば、以下のようなものが採用される。なお、以下に説明する方法は、あくまでも一例であって、仮想物体映像データ取得部１３が仮想物体映像データを取得する方法は、以下に説明する方法に限定されない。

　仮想物体映像データ取得部１３は、先ず、現実ビークルデータ取得部１１が取得した現実ビークルデータに含まれる現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に基づいて、仮想物体ＶＯの見え方を決定する。次に、仮想物体映像データ取得部１３は、決定した見え方に対応する仮想物体ＶＯの映像に関するデータ、つまり、現実のビークルＲＶとの相対的な位置が考慮された仮想物体ＶＯの映像に関するデータである仮想物体映像データを生成する。このようにして、仮想物体映像データ取得部１３は、仮想物体映像データを取得する。

　例えば、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係が「現実のビークルＲＶの左斜め前に仮想物体ＶＯが位置する」ことである場合、現実のビークルＲＶとの相対的な位置が考慮された仮想物体ＶＯの映像は、「右斜め後から見た仮想物体ＶＯの映像」になる。

　仮想物体映像データ出力部１４は、現実のビークルＲＶを操縦しているオペレータＯＰが見ている現実の光景に仮想物体ＶＯの映像が重ねて提示されるように、仮想物体映像データを映像刺激提示装置２０に出力する。具体的には、仮想物体映像データ出力部１４は、現実のビークルＲＶを操縦しているオペレータＯＰが見ている現実の光景に仮想物体ＶＯの映像が重ねて提示されるように、仮想物体映像データを映像提示部２２に出力する。これにより、映像刺激提示装置２０（映像提示部２２）は、現実のビークルＲＶを操縦しているオペレータＯＰが見ている現実の光景に仮想物体ＶＯの映像を重ねて提示する。現実のビークルＲＶを操縦しているオペレータＯＰが見ている現実の光景に仮想物体ＶＯの映像が重ねて提示されることにより、現実のビークルＲＶを操縦しているオペレータＯＰが現実の光景と仮想物体ＶＯの映像を同時に見ることができる。

　仮想物体現実ビークル刺激データ取得部１５は、現実ビークルデータ取得部１１によって取得された現実ビークルデータおよび仮想物体データ取得部１２によって取得された仮想物体データに基づいて、仮想物体現実ビークル刺激データを取得する。仮想物体現実ビークル刺激データは、相対位置関係刺激に関するデータを含む。相対位置関係刺激は、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づく刺激であって、現実のビークルＲＶを操縦しているオペレータＯＰに付与するための刺激である。

　仮想物体現実ビークル刺激データ取得部１５は、例えば、参照テーブルを用いることにより、現実ビークルデータ取得部１１が取得した現実ビークルデータと仮想物体データ取得部１２が取得した仮想物体データに対応する仮想物体現実ビークル刺激データを取得する。

　仮想物体現実ビークル刺激データは、相対位置関係刺激に関するデータを含むものであれば、特に限定されない。相対位置関係刺激は、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づく刺激であって、現実のビークルＲＶを操縦しているオペレータＯＰに付与するための刺激であれば、特に限定されない。

　仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づく刺激は、例えば、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係を示す刺激であってもよいし、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に起因して付与される刺激であってもよい。仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に起因して付与される刺激は、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に起因して行われる現実のビークルＲＶへの制御により、現実のビークルＲＶのオペレータＯＰに付与されるものを含む。仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に起因して行われる現実のビークルＲＶへの制御により、現実のビークルＲＶのオペレータＯＰに付与される刺激は、例えば、現実のビークルＲＶの加速又は減速に起因して現実のビークルＲＶのオペレータＯＰが現実のビークルＲＶの前又は後方向の加速度を感じることを含む。現実のビークルＲＶの前又は後方向に加速度を感じる場合、現実のビークルＲＶのオペレータＯＰは、例えば、現実のビークルＲＶに設けられたシートへの着座状態の変化を触覚にて感じることができる。

　仮想物体現実ビークル刺激データ取得部１５が仮想物体現実ビークル刺激データを取得する方法としては、例えば、以下のようなものが採用される。なお、以下に説明する方法は、あくまでも一例であって、仮想物体現実ビークル刺激データ取得部１５が仮想物体現実ビークル刺激データを取得する方法は、以下に説明する方法に限定されない。

　仮想物体現実ビークル刺激データ取得部１５は、現実ビークルデータ取得部１１が取得した現実ビークルデータに含まれる現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に対応する刺激が存在するか否かを確認する。当該刺激が存在する場合には、仮想物体現実ビークル刺激データ取得部１５は、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に対応する刺激に関するデータを含む仮想物体現実ビークル刺激データを取得する。このようにして、仮想物体現実ビークル刺激データ取得部１５は、仮想物体現実ビークル刺激データを取得する。

　例えば、現実のビークルＲＶと仮想物体ＶＯの相対的な位置関係が「現実のビークルＲＶが仮想物体ＶＯに接触した」ことを示す場合、仮想物体現実ビークル刺激データ取得部１５は、現実のビークルＲＶが仮想物体ＶＯに接触した場合について設定された刺激に関するデータを含む仮想物体現実ビークル刺激データを、例えば、参照テーブルを用いて取得する。

　相対位置関係刺激は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰの五感である視覚、聴覚、触覚、臭覚及び味覚のうちの複数の感覚を刺激するものであってもよい。相対位置関係刺激は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰの触覚を刺激するものを含むものであってもよい。相対位置関係刺激は、例えば、オペレータＯＰが現実のビークルＲＶを操縦しているときに受ける刺激よりも小さくてもよい。

　相対位置関係刺激がオペレータＯＰの視覚を刺激するものである場合、当該刺激がオペレータＯＰに付与される態様には、例えば、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に応じた映像を表示する態様や、現実のビークルと仮想物体との相対的な位置関係に応じて仮想物体ＶＯの映像を変化させる態様等が含まれる。

　相対位置関係刺激がオペレータＯＰの聴覚を刺激するものである場合、当該刺激がオペレータＯＰに付与される態様には、例えば、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に応じた音声を出力する態様や、現実のビークルＲＶを仮想物体ＶＯとの相対的な位置関係に応じて出力される音声を変化させる態様等が含まれる。

　相対位置関係刺激がオペレータＯＰの触覚を刺激するものである場合、当該刺激がオペレータＯＰに付与される態様には、例えば、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に応じてオペレータＯＰの身体に及ぼされる力の大きさや力が及ぼされる方向を変化させる態様等が含まれる。オペレータＯＰの身体に及ぼされる力の大きさを変化させる態様には、例えば、オペレータＯＰの身体に力が及ぼされていない状態からオペレータＯＰの身体に力を及ぼす態様が含まれる。

　相対位置関係刺激がオペレータＯＰの嗅覚を刺激するものである場合、当該刺激がオペレータＯＰに付与される態様には、例えば、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に応じて匂いを変化させる態様等が含まれる。匂いを変化させる態様には、例えば、オペレータＯＰが刺激として付与される匂いを嗅いでいない状態から当該匂いを嗅いでいる状態に変化させる態様が含まれる。

　相対位置関係刺激がオペレータＯＰの味覚を刺激するものである場合、当該刺激がオペレータＯＰに付与される態様には、例えば、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に応じて、味を変化させる態様等が含まれる。味を変化させる態様には、例えば、オペレータＯＰが刺激として付与される味を感じていない状態から当該味を感じている状態に変化させる態様が含まれる。

　仮想物体現実ビークル刺激データ出力部１６は、現実のビークルＲＶを操縦しているオペレータＯＰに対して付与されるように、仮想物体現実ビークル刺激データを映像刺激提示装置２０に出力する。具体的には、仮想物体現実ビークル刺激データ出力部１６は、相対位置関係刺激が現実のビークルＲＶを操縦しているオペレータＯＰに対して付与されるように、仮想物体現実ビークル刺激データを刺激提示部２４に出力する。これにより、映像刺激提示装置２０（刺激提示部２４）は、現実のビークルＲＶを操縦しているオペレータＯＰに相対位置関係刺激を付与する。その結果、現実のビークルＲＶを操縦しているオペレータＯＰに対して相対位置関係刺激が付与されることにより、現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶを操縦することで受ける刺激に加えて、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づく刺激である相対位置関係刺激を受けることができる。

　本実施の形態では、刺激提示部２４としての機能を有する装置として、現実のビークルＲＶが採用されている。そのため、仮想物体現実ビークル刺激データ出力部１６は、現実のビークルＲＶを操縦しているオペレータＯＰに対して、現実のビークルＲＶを介して相対位置関係刺激が付与されるように、仮想物体現実ビークル刺激データを映像刺激提示装置２０に出力する。

　続いて、図２を参照しながら、映像刺激提示制御装置１０が実行する仮想物体映像データ取得処理について説明する。図２は、映像刺激提示制御装置１０が実行する仮想物体映像データ取得処理を示すフローチャートである。

　先ず、映像刺激提示制御装置１０は、ステップＳ１１において、現実ビークルデータ取得部１１が取得した現実ビークルデータに含まれる現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に基づいて、仮想物体ＶＯの見え方を決定する。

　続いて、映像刺激提示制御装置１０は、ステップＳ１２において、現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に応じた見え方をするように提示される仮想物体ＶＯの映像に関するデータ、つまり、現実のビークルＲＶとの相対的な位置が考慮された仮想物体ＶＯの映像に関するデータである仮想物体映像データを生成して取得する。

　続いて、映像刺激提示制御装置１０は、ステップＳ１３において、ステップＳ１２にて取得した仮想物体映像データを映像刺激提示装置２０に出力する。その後、映像刺激提示制御装置１０は、仮想物体映像データ取得処理を終了する。

　続いて、図３を参照しながら、映像刺激提示制御装置１０が実行する仮想物体現実ビークル刺激データ取得処理について説明する。図３は、映像刺激提示制御装置１０が実行する仮想物体現実ビークル刺激データ取得処理を示すフローチャートである。

　先ず、映像刺激提示制御装置１０は、ステップＳ２１において、現実ビークルデータ取得部１１が取得した現実ビークルデータに含まれる現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に対応する刺激であって、仮想物体データ取得部１２が取得した仮想物体データに含まれる仮想物体の種類に対応する刺激が存在するか否かを確認する。

　現実ビークルデータ取得部１１が取得した現実ビークルデータに含まれる現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に対応する刺激であって、仮想物体データ取得部１２が取得した仮想物体データに含まれる仮想物体の種類に対応する刺激が存在しない場合（ステップＳ２１：ＮＯ）、映像刺激提示制御装置１０は、仮想物体現実ビークル刺激データ取得処理を終了する。

　現実ビークルデータ取得部１１が取得した現実ビークルデータに含まれる現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に対応する刺激であって、仮想物体データ取得部１２が取得した仮想物体データに含まれる仮想物体の種類に対応する刺激が存在する場合（ステップＳ２１：ＹＥＳ）、映像刺激提示制御装置１０は、ステップＳ２２において、現実ビークルデータ取得部１１が取得した現実ビークルデータに含まれる現実のビークルＲＶと仮想物体ＶＯとの相対的な位置関係に対応する刺激であって、仮想物体データ取得部１２が取得した仮想物体データに含まれる仮想物体の種類に対応する刺激に関するデータを含む仮想物体現実ビークル刺激データを取得する。

　続いて、映像刺激提示制御装置１０は、ステップＳ２３において、ステップＳ２２にて取得した仮想物体現実ビークル刺激データを映像刺激提示装置２０に出力する。その後、映像刺激提示制御装置１０は、仮想物体現実ビークル刺激データ取得処理を終了する。

　続いて、図４～図１０を参照しながら、現実のビークルＲＶを操縦しているオペレータＯＰが見る光景と、現実のビークルＲＶを操縦しているオペレータＯＰに付与される刺激とについて説明する。図４～図１０は、それぞれ、現実のビークルＲＶを操縦しているオペレータＯＰが見る光景の一例を説明するための説明図である。

　なお、以下では、サーキットのコースを２台の現実のビークルＲＶが走行する場合について説明する。２台の現実のビークルＲＶの各々は、鞍乗型電動車両である。２台の現実のビークルＲＶが走行するサーキットのコースは、例えば、私有地内に設けられている。２台の現実のビークルＲＶが走行するサーキットのコースは、例えば、２台の現実のビークルＲＶだけが走行できる状態で使用される。２台の現実のビークルＲＶが走行するサーキットのコースは、例えば、アスファルトで形成されていてもよいし、衝撃を和らげることが可能な材料で形成されていてもよい。

　図４～図１０は、それぞれ、２台の現実のビークルＲＶのうち後に位置する現実のビークルＲＶ（以下、このような現実のビークルＲＶを「現実のビークルＲＶ１」とする）を操縦しているオペレータＯＰ（以下、このようなオペレータＯＰを「オペレータＯＰ１」とする）が見る光景の一例を示している。現実のビークルＲＶ１を操縦しているオペレータＯＰ１は、現実のビークルＲＶ１よりも前に位置する現実のビークルＲＶ（以下、このような現実のビークルＲＶを「現実のビークルＲＶ２」とする）と、当該現実のビークルＲＶ２を操縦しているオペレータＯＰ（以下、このようなオペレータＯＰを「オペレータＯＰ２」とする）とを見ることができる。

　サーキットのコース上には、少なくとも１つの仮想物体出現位置が設定されている。現実のビークルＲＶがサーキットのコースを走行しているとき、サーキットのコース上に設定された仮想物体出現位置において仮想物体ＶＯが出現するように、仮想物体ＶＯが現実の光景に重ねて提示される。例えば、仮想物体出現位置に設けられたマーカーをカメラＣＡＭで撮影すると、光透過型ヘッドマウントディスプレイＨＭＤの表示画面に仮想物体ＶＯが表示される。

　仮想物体ＶＯは、サーキットのコースにて行われるレースを有利に（又は不利に）するためのアイテムである。サーキットのコースにて行われるレース中において、現実のビークルＲＶが仮想物体ＶＯに接触することにより、当該接触した仮想物体ＶＯに設定されている効果が現実のビークルＲＶに付与される。

　なお、以下の説明では、便宜上、「仮想物体ＶＯと現実のビークルＲＶとが接触する」との表現を用いるが、仮想物体ＶＯが現実の光景の中に存在しないものであるため、仮想物体ＶＯと現実のビークルＲＶとが現実の世界で物理的に接触することはない。「仮想物体ＶＯと現実のビークルＲＶとが接触する」というのは、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づいて仮想物体ＶＯと現実のビークルＲＶとが接触していると映像刺激提示制御装置１０によって判定される場合のことである。

　図４を参照しながら、説明する。図４は、現実のビークルＲＶ１を操縦しているオペレータＯＰ１が見る光景の一例を説明するための説明図であって、複数の仮想物体ＶＯ１が現実の光景に重ねて提示されている情況を示す説明図である。

　現実のビークルＲＶを操縦しているオペレータＯＰは、複数の仮想物体ＶＯ１の映像を現実の光景の中に見ることができる。複数の仮想物体ＶＯ１は、それぞれ、現実のビークルＲＶとの相対的な位置が考慮された状態で、現実の光景に重ねて提示されている。したがって、複数の仮想物体ＶＯ１は、それぞれ、見え方が異なっている。

　複数の仮想物体ＶＯ１は、それぞれ、サーキットのコース上に設定された仮想物体出現位置に出現するように、現実の光景に重ねて提示されている。複数の仮想物体ＶＯ１は、それぞれ、サーキットのコース上に設定された仮想物体出現位置から移動しないようにして、現実の光景に重ねて提示されていてもよい。或いは、複数の仮想物体ＶＯ１は、それぞれ、サーキットのコース上に設定された仮想物体出現位置を中心とする所定の範囲内を移動するようにして、現実の光景に重ねて提示されていてもよい。

　複数の仮想物体ＶＯ１は、それぞれ、サーキットのコース上にて行われるレースを有利にするためのアイテムである。複数の仮想物体ＶＯ１は、それぞれ、現実のビークルＲＶの車速を上昇させるためのアイテムである。

　複数の仮想物体ＶＯ１は、それぞれ、矩形の板形状を有している。複数の仮想物体ＶＯ１の各々が有する特定の面（以下、このような面を「表面」と称する）には、絵柄が記載されている。当該絵柄は、仮想物体ＶＯ１に接触することで現実のビークルＲＶが得られる効果を示している。本実施の形態では、仮想物体ＶＯ１の表面に記載された絵柄は、現実のビークルＲＶの車速が上昇することを示している。つまり、仮想物体ＶＯ１には、情報伝達機能が付与されている。

　このような複数の仮想物体ＶＯ１の何れかと現実のビークルＲＶ１が接触する場合について、図５を参照しながら、説明する。図５は、現実のビークルＲＶ１を操縦しているオペレータＯＰ１が見る光景の一例を説明するための説明図であって、複数の仮想物体ＶＯ１の何れかと現実のビークルＲＶ１とが接触したときの情況を示す説明図である。

　現実のビークルＲＶが仮想物体ＶＯ１に接触すると、仮想物体ＶＯ１の映像が変化する。つまり、仮想物体ＶＯ１の映像が変化することにより、現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶが仮想物体ＶＯ１に接触したことを認識することができる。このように、現実のビークルＲＶが仮想物体ＶＯ１に接触することに起因して仮想物体ＶＯ１の映像が変化することにより、現実のビークルＲＶを操縦しているオペレータの視覚が刺激される。

　続いて、仮想物体ＶＯ１に接触したことで現実のビークルＲＶが得る効果について、図６を参照しながら、説明する。図６は、現実のビークルＲＶ１を操縦しているオペレータＯＰ１が見る光景の一例を説明するための説明図であって、現実のビークルＲＶ１が仮想物体ＶＯ１に接触することで得られる効果を説明するための説明図である。

　仮想物体ＶＯ１に接触することで、現実のビークルＲＶの車速が上昇している。そのため、図６では、２番手で走行している現実のビークルＲＶ１と先頭を走る現実のビークルＲＶ２との距離が縮まっている。

　なお、本実施の形態では、現実のビークルＲＶが仮想物体ＶＯ１に接触すると、現実のビークルＲＶを操縦しているオペレータＯＰの視界のうち左上の領域に、現実のビークルＲＶが接触した仮想物体ＶＯ１を示すアイコンが表示される。これにより、現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶが接触した仮想物体ＶＯの種類を認識することができる。

　また、本実施の形態では、現実のビークルＲＶが仮想物体ＶＯ１に接触することで得られる効果を示す文字情報（図中の「ＳＰＥＥＤ　ＵＰ」）が提示される。これにより、現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶが接触した仮想物体ＶＯによって得られる効果を認識することができる。

　ここで、現実のビークルＲＶの車速が上昇するとき、現実のビークルＲＶは加速する。現実のビークルＲＶが加速すると、現実のビークルＲＶを操縦しているオペレータＯＰが見る現実の光景は、現実のビークルＲＶが加速する前よりも速く変化する。例えば、現実のビークルＲＶを操縦しているオペレータＯＰが現実のビークルＲＶの前方を見ているときに現実のビークルＲＶが加速すると、現実のビークルＲＶを操縦しているオペレータＯＰの後方に向かって現実の光景が流れる速度が大きくなる。また、２番手で走行している現実のビークルＲＶ１のオペレータＯＰ１は、現実のビークルＲＶ１の車速が上昇して、先行する現実のビークルＲＶ２との距離が短くなることにより、現実のビークルＲＶ１の車速が上昇する前と比べて、先行する現実のビークルＲＶ２が大きく見える。つまり、現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶが加速することにより、視覚が刺激される。したがって、現実のビークルＲＶの車速を上昇させることは、現実のビークルＲＶを操縦しているオペレータＯＰに刺激を付与することになる。

　なお、現実のビークルＲＶの車速を上昇させる際に現実のビークルＲＶを操縦しているオペレータＯＰに付与する刺激は、上記のようなオペレータＯＰの視覚を刺激するものに限定されない。例えば、現実のビークルＲＶが加速するときに、現実のビークルＲＶを操縦しているオペレータＯＰが現実のビークルＲＶの後方向に加速度を感じることがある。これは、現実のビークルＲＶを操縦しているオペレータＯＰが、例えば、現実のビークルＲＶに設けられたシートに対する着座状態の変化（例えば、現実のビークルＲＶの後方向に体が移動しようとすることに起因する着座位置の変化）を触覚にて感じるためである。つまり、現実のビークルＲＶの加速に伴って現実のビークルＲＶを操縦しているオペレータＯＰに付与される刺激には、触覚を刺激するものが含まれる場合がある。

　続いて、図７を参照しながら、サーキットのコース上に出現する仮想物体ＶＯについて説明する。図７は、現実のビークルＲＶ１を操縦しているオペレータＯＰ１が見る光景の一例を説明するための説明図であって、図４及び図５に示す仮想物体ＶＯとは異なる仮想物体ＶＯがサーキットのコース上に出現している情況を示す説明図である。

　図７では、複数の仮想物体ＶＯ２、ＶＯ３、ＶＯ４がサーキットのコース上に出現している。複数の仮想物体ＶＯ２、ＶＯ３、ＶＯ４は、それぞれ、図４及び図５に示す仮想物体ＶＯ１とは異なる。複数の仮想物体ＶＯ２、ＶＯ３、ＶＯ４の各々に設定されている効果は、図４及び図５に示す仮想物体ＶＯ１に設定されている効果とは異なる。

　なお、本実施の形態では、現実のビークルＲＶが複数の仮想物体ＶＯ２、ＶＯ３、ＶＯ４の何れかに接触するのを促す映像（図中の複数の矢印）が表示されている。これにより、現実のビークルＲＶを操縦しているオペレータＯＰに対して、操縦している現実のビークルＲＶを複数の仮想物体ＶＯ２、ＶＯ３、ＶＯ４の何れかに接触させる動機が付与される。

　続いて、図８～図１０を参照しながら、図７に示す仮想物体ＶＯ３に対して現実のビークルＲＶが接触した場合の効果について説明する。図８～図１０は、それぞれ、現実のビークルＲＶ１を操縦しているオペレータＯＰ１が見る光景の一例を説明するための説明図であって、図７に示す仮想物体ＶＯ３に対して現実のビークルＲＶが接触した場合の効果を説明するための説明図である。

　図７に示す仮想物体ＶＯ３に現実のビークルＲＶが接触したときの効果は、現実のビークルＲＶ１から先行する現実のビークルＲＶ２に向かってレーザービームが照射され、当該レーザービームが先行する現実のビークルＲＶ２に命中すると、先行する現実のビークルＲＶ２の車速が低下するというものである。

　具体的には、図７に示す仮想物体ＶＯ３に現実のビークルＲＶが接触すると、図８に示すように、先行する現実のビークルＲＶ２がレーザービームの照射対象であることを示す映像（図中の「ＴＡＲＧＥＴ」との文字）が提示される。これにより、図７に示す仮想物体ＶＯ３に接触した現実のビークルＲＶ１を操縦しているオペレータＯＰ１の視覚が刺激される。

　続いて、図９に示すように、現実のビークルＲＶ１から先行する現実のビークルＲＶ２に向かってレーザービームが照射され、当該レーザービームが先行する現実のビークルＲＶ２に命中する。このような映像が提示されることにより、図７に示す仮想物体ＶＯ３に接触した現実のビークルＲＶ１を操縦しているオペレータＯＰ１の視覚が刺激される。

　その後、図１０に示すように、先行する現実のビークルＲＶ２は、現実のビークルＲＶ１から照射されたレーザービームが命中したことによるダメージを受けて、車速が低下する。図１０では、先行する現実のビークルＲＶ２が現実のビークルＲＶ１から照射されたレーザービームによってダメージを受けていることを示す映像（図中の炎と、文字情報である「ＤＡＭＡＧＥ」）が提示される。また、図１０では、先行する現実のビークルＲＶ２にレーザービームが命中したことを賞賛する映像（図中の文字情報である「ＧＲＥＡＴ」）が提示される。また、先行する現実のビークルＲＶ２の車速が低下することに伴って、先行する現実のビークルＲＶ２と２番手で走行する現実のビークルＲＶ１との距離が短くなり、先行する現実のビークルＲＶ２の車速が低下する前と比べて、先行する現実のビークルＲＶ２が大きく見えるようになる。これにより、図７に示す仮想物体ＶＯ３に接触した現実のビークルＲＶ１を操縦しているオペレータＯＰ１の視覚が刺激される。

　このような映像刺激提示制御装置１０が用いられる映像刺激提示装置２０によれば、現実のビークルＲＶを操縦しているオペレータＯＰに対して、高い現実感覚を有する新たな仮想的体験を提供することができる。具体的には、以下のとおりである。

　現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶとの相対的な位置が考慮された仮想物体ＶＯの映像を現実の光景の中に見ることができる。つまり、現実のビークルＲＶを操縦しているオペレータＯＰは、制御された仮想物体ＶＯの映像と現実の光景を見ることができる。

　現実のビークルＲＶを操縦しているオペレータＯＰは、現実の光景の中に仮想物体ＶＯの映像を見ながら現実のビークルＲＶを操縦しているときに、現実のビークルＲＶを操縦していることによって刺激を受けている。また、現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶを操縦しているときに、現実のビークルＲＶを操縦していることによって受けている刺激に加えて、仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係に基づく刺激である相対位置関係刺激を受けることができる。

　したがって、映像刺激提示制御装置１０が用いられる映像刺激提示装置２０によれば、現実のビークルＲＶを操縦しているオペレータＯＰに対して、高い現実感覚を有する新たな仮想的体験を提供することができる。

　また、映像刺激提示制御装置１０によれば、シンプルな制御によって高い現実感覚を有する新たな仮想的体験を提供することができる。具体的には、以下のとおりである。

　仮想的な体験を提供するために現実のビークルＲＶを操縦しているオペレータＯＰに対して提示される映像とその映像に関連する刺激は、仮想物体ＶＯの映像と、その仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係を示す相対位置関係刺激である。また、映像刺激提示制御装置１０が関連付ける映像と刺激は、仮想物体ＶＯの映像と、その仮想物体ＶＯと現実のビークルＲＶとの相対的な位置関係を示す相対位置関係刺激である。

　このように、映像刺激提示制御装置１０が関連させる映像と刺激は、オペレータＯＰが見ている光景を全て映像とし、その映像とオペレータが受ける全ての刺激とを関連付ける従来の映像刺激提示制御装置が制御するものより少なくて済む。つまり、仮想物体ＶＯの映像は、オペレータＯＰが見ている光景を全て仮想空間の映像とした場合に比べて、少ない処理負担で提供することができる。また、オペレータＯＰは現実のビークルＲＶを操縦することで刺激に対して敏感になっており、現実のビークルＲＶを操縦しているオペレータＯＰに付与する刺激は少なくてもよいので、刺激の付与に伴う処理負担を軽減することができる。そのため、映像刺激提示制御装置１０が行う制御をシンプルな制御にすることができる。

　また、映像刺激提示制御装置１０が用いられる映像刺激提示装置２０においては、オペレータＯＰが操縦している現実のビークルＲＶを介して、相対位置関係刺激がオペレータＯＰに付与される。そのため、相対位置関係刺激をオペレータＯＰに感じさせやすくなる。その理由は、以下のとおりである。

　現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶを操縦しているときに、現実のビークルＲＶを操縦していることによる刺激を感じ取っている。そのため、現実のビークルＲＶを操縦しているオペレータＯＰは、現実のビークルＲＶを操縦しているときには、刺激に対して敏感になっている。このように刺激に対して敏感になっているオペレータＯＰに相対位置関係刺激を付与すれば、オペレータＯＰは現実のビークルＲＶを操縦していることによる刺激に加えて付与される相対位置関係刺激についても感じ取りやすくなる。したがって、オペレータＯＰが操縦している現実のビークルＲＶを介して相対位置関係刺激がオペレータＯＰに付与されるようにすれば、相対位置関係刺激をオペレータＯＰに感じさせやすくなる。

　（実施の形態の変形例）
　図１１及び図１２を参照しながら、現実のビークルＲＶを操縦しているオペレータＯＰが見る仮想物体ＶＯについて説明する。図１１及び図１２は、それぞれ、現実のビークルＲＶを操縦しているオペレータＯＰが見る光景の一例を説明するための説明図であって、仮想物体ＶＯが現実のビークルＲＶの教習の課題に用いられるものであることを示す説明図である。

　図１１を参照して、仮想物体ＶＯ５は、現実のビークルＲＶの教習の課題であるスラローム走行に用いられるパイロンである。仮想物体ＶＯ５を用いることにより、例えば、現実のビークルＲＶの教習において、現実のビークルＲＶがパイロン（仮想物体ＶＯ５）を倒すことがあっても、倒したパイロン（仮想物体ＶＯ５）を現実のビークルＲＶのオペレータＯＰが元の位置に戻す必要がなくなる。

　現実のビークルＲＶが仮想物体ＶＯ５としてのパイロンに接触すると、現実のビークルＲＶを操縦しているオペレータＯＰに刺激が付与される。当該刺激は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰの聴覚が刺激される音声であってもよいし、現実のビークルＲＶを操縦しているオペレータＯＰの視覚が刺激される映像であってもよい。

　なお、現実のビークルの形状と仮想物体の形状とを用いて、現実のビークルと仮想物体の相対的な位置関係を判定すれば、現実のビークルと仮想物体の相対的な位置関係をより高精度に判定することができる。

　図１２を参照して、仮想物体ＶＯ６は、現実のビークルＲＶの教習の課題に用いられる一本橋である。現実のビークルＲＶが仮想物体ＶＯ６としての一本橋から落下すると、現実のビークルＲＶを操縦しているオペレータＯＰに刺激が付与される。当該刺激は、例えば、現実のビークルＲＶを操縦しているオペレータＯＰの聴覚が刺激される音声であってもよいし、現実のビークルＲＶを操縦しているオペレータＯＰの視覚が刺激される映像であってもよい。或いは、現実のビークルＲＶを操縦しているオペレータＯＰの触覚が刺激されるように、現実のビークルＲＶの駆動力を変化させるものであってもよい。

（その他の実施形態）
　本明細書において記載と図示の少なくとも一方がなされた実施形態及び変形例は、本開示の理解を容易にするためのものであって、本開示の思想を限定するものではない。上記の実施形態及び変形例は、その趣旨を逸脱することなく変更・改良され得る。

　当該趣旨は、本明細書に開示された実施形態に基づいて当業者によって認識されうる、均等な要素、修正、削除、組み合わせ（例えば、実施形態及び変形例に跨る特徴の組み合わせ）、改良、変更を包含する。特許請求の範囲における限定事項は当該特許請求の範囲で用いられた用語に基づいて広く解釈されるべきであり、本明細書あるいは本願のプロセキューション中に記載された実施形態及び変形例に限定されるべきではない。そのような実施形態及び変形例は非排他的であると解釈されるべきである。例えば、本明細書において、「好ましくは」、「よい」という用語は非排他的なものであって、「好ましいがこれに限定されるものではない」、「よいがこれに限定されるものではない」ということを意味する。

　上記実施の形態では、サーキットのコースを２台の鞍乗型電動車両ＲＶ１、ＲＶ２が走行する場合について説明したが、例えば、サーキットのコースを３台以上の鞍乗型電動車両が走行する場合や、サーキットのコースを１台の鞍乗型電動車両が走行する場合であっても、本発明は適用可能である。

　上記実施の形態では、映像刺激提示装置２０の映像提示部２２として、光透過型ヘッドマウントディスプレイを採用しているが、映像刺激提示装置２０の映像提示部２２は、例えば、オペレータＯＰの網膜に映像を投影するものであってもよい。

　上記実施の形態では、矩形の板形状を有する仮想物体ＶＯ１の表面に絵柄が記載されており、当該絵柄が見える状態の仮想物体ＶＯ１に対して現実のビークルＲＶが接触することにより、現実のビークルＲＶの車速が上昇するようになっている。例えば、仮想物体ＶＯ１のうち表面の反対側の面（以下、このような面を裏面とする）にも絵柄が記載されており、当該絵柄が見える状態の仮想物体ＶＯ１に対して現実のビークルＲＶが接触することにより、現実のビークルＲＶの車速が減少するようにしてもよい。このように表面及び裏面のそれぞれに異なる効果を示す絵柄が記載された仮想物体ＶＯ１は、例えば、仮想物体ＶＯ１が出現する位置において回転するように表示されてもよい。

　上記実施の形態では、現実のビークルＲＶが仮想物体ＶＯに接触する場合にのみ、現実のビークルＲＶを操縦しているオペレータＯＰに刺激を付与しているが、例えば、現実のビークルＲＶが仮想物体ＶＯの直ぐ近くに位置するのであれば、現実のビークルＲＶを操縦しているオペレータＯＰに刺激を付与してもよい。この場合の刺激としては、例えば、現実のビークルＲＶを操縦しているオペレータＯＰの聴覚を刺激する風切音を出力することが考えられる。

　上記実施の形態では、映像提示部が光透過型ヘッドマウントディスプレイによって実現されているが、映像提示部はカメラが撮影したオペレータの周囲の画像を表示するビデオ透過型ヘッドマウントディスプレイであってもよい。

１０　映像刺激提示制御装置
１１　現実ビークルデータ取得部
１２　仮想物体データ取得部
１３　仮想物体映像データ取得部
１４　仮想物体映像データ出力部
１５　仮想物体現実ビークル刺激データ取得部
１６　仮想物体現実ビークル刺激データ出力部
２０　映像刺激提示装置
２２　映像提示部
２４　刺激提示部
３０　現実ビークル位置情報取得装置
ＨＭＤ　光透過型ヘッドマウントディスプレイ
ＲＶ　現実のビークル
ＯＰ　オペレータ
ＶＯ　仮想物体
 

Claims (6)

1. 　現実のビークルを操縦しているオペレータに対して仮想的な体験を提供するために電気的に作り出した映像と前記映像に関連する刺激とを前記オペレータに提示する映像刺激提示装置に用いられ、前記映像刺激提示装置が提示する前記映像と前記刺激を制御する映像刺激提示制御装置であって、
   　前記現実のビークルを操縦している前記オペレータが見ている現実の光景の中に存在しない物体である仮想物体の種類及び形状に関するデータを含む仮想物体データを取得する仮想物体データ取得部と、
   　前記現実のビークルと前記仮想物体との相対的な位置関係に関するデータを含む現実ビークルデータを取得する現実ビークルデータ取得部と、
   　前記現実ビークルデータ取得部によって取得された前記現実ビークルデータおよび前記仮想物体データ取得部によって取得された前記仮想物体データに基づいて、前記現実のビークルとの相対的な位置が考慮された前記仮想物体の映像に関するデータである仮想物体映像データを取得する仮想物体映像データ取得部と、
   　前記現実のビークルを操縦している前記オペレータが見ている前記現実の光景に前記仮想物体の映像が重ねて提示されるように、前記仮想物体映像データを前記映像刺激提示装置に出力する仮想物体映像データ出力部と、
   　前記現実ビークルデータ取得部によって取得された前記現実ビークルデータおよび前記仮想物体データ取得部によって取得された前記仮想物体データに基づいて、前記仮想物体と前記現実のビークルとの相対的な位置関係に基づく刺激であって、前記現実のビークルを操縦している前記オペレータに付与するための刺激である相対位置関係刺激に関するデータを含む仮想物体現実ビークル刺激データを取得する仮想物体現実ビークル刺激データ取得部と、
   　前記相対位置関係刺激が前記現実のビークルを操縦している前記オペレータに対して付与されるように、前記仮想物体現実ビークル刺激データを前記映像刺激提示装置に出力する仮想物体現実ビークル刺激データ出力部と、
   を備える、映像刺激提示制御装置。
2. 　請求項１に記載の映像刺激提示制御装置であって、
   　前記映像刺激提示装置は、前記オペレータが操縦する前記現実のビークルの少なくとも一部を含み、
   　前記仮想物体現実ビークル刺激データ出力部は、前記相対位置関係刺激が前記現実のビークルを操縦している前記オペレータに対して前記現実のビークルの少なくとも一部を介して付与されるように、前記仮想物体現実ビークル刺激データを前記映像刺激提示装置に出力する、映像刺激提示制御装置。
3. 　請求項１又は２に記載の映像刺激提示制御装置であって、
   　前記相対位置関係刺激は、前記現実のビークルを操縦しているオペレータの五感である視覚、聴覚、触覚、臭覚及び味覚のうちの複数の感覚を刺激するものである、映像刺激提示制御装置。
4. 　請求項３に記載の映像刺激提示制御装置であって、
   　前記相対位置関係刺激は、前記現実のビークルを操縦しているオペレータの触覚を刺激するものを含む、映像刺激提示制御装置。
5. 　請求項１～４の何れか１項に記載の映像刺激提示制御装置であって、
   　前記相対位置関係刺激は、前記オペレータが前記現実のビークルを操縦しているときに受ける刺激よりも小さい、映像刺激提示制御装置。
6. 　請求項１～５の何れか１項に記載の映像刺激提示制御装置であって、
   　前記現実ビークルデータは、前記現実のビークルの形状に関するデータを含む、映像刺激提示制御装置。
    

Images