JP2015072687A - 車載動的バーチャルリアリティのためのシステム及び方法 - Google Patents

車載動的バーチャルリアリティのためのシステム及び方法 Download PDF

Info

Publication number
JP2015072687A
JP2015072687A JP2014200010A JP2014200010A JP2015072687A JP 2015072687 A JP2015072687 A JP 2015072687A JP 2014200010 A JP2014200010 A JP 2014200010A JP 2014200010 A JP2014200010 A JP 2014200010A JP 2015072687 A JP2015072687 A JP 2015072687A
Authority
JP
Japan
Prior art keywords
vehicle
data
virtual
user
virtual view
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014200010A
Other languages
English (en)
Other versions
JP6497884B2 (ja
Inventor
アーサー・アラニズ
Alaniz Arthur
ジョセフ・ウィネリー
Whinnery Joseph
ロバート・ウェスリー・マーリッシュ
Wesley Murrish Robert
マイケル・エイモン・グリーソン−メイ
Eamonn Gleeson-May Michael
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of JP2015072687A publication Critical patent/JP2015072687A/ja
Application granted granted Critical
Publication of JP6497884B2 publication Critical patent/JP6497884B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8006—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying scenes of vehicle interior, e.g. for monitoring passengers or cargo
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Abstract

【課題】車両の１つ以上の車両システムから車両動力学データを受信し、バーチャルリアリティデバイスからユーザデータを受信する車載動的バーチャルリアリティのための方法を提供する。【解決手段】バーチャル世界モデルが、バーチャルビューを定義する１つ以上の構成要素を含み、バーチャルビューを生成する、車両データ及びユーザデータのうちの少なくとも１つに従って、バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む工程と、車両動力学データに従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、バーチャルビューを出力デバイスにレンダリングする工程と、を含む。【選択図】図１

Description

（関連出願の相互参照）
本願は、２０１３年１０月３日出願の米国仮出願第６１／８８６２４０号の優先権を主張し、それは、参照により本明細書に明示的に組み込まれる。
真の没入型バーチャルリアリティ及び拡張現実システムは、ユーザの知覚システムをコンピュータ生成刺激に没入する環境（例えば、バーチャル世界及び／又はバーチャルビュー）を作成する。典型的に、これらの没入型システムは、ユーザの感覚を捕らえつつ、物質的世界からの刺激を遮断する。バーチャル世界は、ユーザからの入力、及び／又はバーチャル世界とユーザの相互作用の結果として変化し得る。
これらのシステムの目的は、没入型環境を作成することであるが、物理的世界が依然として没入型環境のための状況を提供するために使用され得る。具体的に、ユーザの環境及び状況を考慮することが重要である。例えば、車両中のユーザの状況において、没入型バーチャルリアリティ及び拡張現実システムは、ユーザ、車両、及び車両に対するユーザに関する情報を考慮することができる。この情報は、ユーザ及びユーザの環境にカスタマイズされる没入型環境を生成するために使用され得、ユーザが快適に没入型環境を知覚することを可能にし得る。
一態様に従って、車載動的バーチャルリアリティのための方法は、車両の１つ以上の車両システムから車両データを受信する工程であって、車両データが車両動力学データを含む、受信する工程と、バーチャルリアリティデバイスからユーザデータを受信する工程と、を含む。この方法は、車両データ、ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する工程であって、バーチャル世界モデルが、バーチャルビューを定義する１つ以上の構成要素を含み、バーチャルビューを生成する工程が、車両データ及びユーザデータのうちの少なくとも１つに従って、バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、生成する工程と、車両動力学データに従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、バーチャルビューを出力デバイスにレンダリングする工程と、を含む。
別の態様に従って、車載動的バーチャルリアリティのための車両コンピュータシステムは、バーチャル世界モデルを記憶するデータストアであって、バーチャル世界モデルが、バーチャルビューを定義する１つ以上の構成要素を含む、データストアと、コンピュータ通信のために、データストア、車両の１つ以上の車両システム、及びバーチャルリアリティデバイスに動作的に接続される、プロセッサと、を含む。プロセッサは、車両の１つ以上の車両システムから車両データを受信し、かつバーチャルリアリティデバイスからユーザデータを受信する、バーチャルリアリティデータモジュールを含み、車両データは、車両動力学データを含む。プロセッサは、データストアからの車両データ、ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する動的バーチャルリアリティモジュールも含み、バーチャルビューを生成する工程は、車両データ及びユーザデータのうちの少なくとも１つに従って、バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む。プロセッサは、車両動力学データに従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、動的リアリティモジュールからのバーチャルビューを出力デバイスにレンダリングするレンダリングモジュールも含む。
別の態様に従って、非一時的コンピュータ可読記憶媒体は、車両コンピュータによって実行されるとき、コンピュータに、車両の１つ以上の車両システムから車両データを受信する工程であって、車両データが車両動力学データを含む、受信する工程と、バーチャルリアリティデバイスからユーザデータを受信する工程と、を実施させる命令を記憶する。これらの工程は、車両データ、ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する工程であって、バーチャル世界モデルが、バーチャルビューを定義する１つ以上の構成要素を含み、バーチャルビューを生成する工程が、車両データ及びユーザデータのうちの少なくとも１つに従って、バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、生成する工程と、車両動力学データに従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、バーチャルビューを出力デバイスにレンダリングする工程と、を含む。
例示的な実施形態に従う、車載動的バーチャルリアリティシステム及び方法に対する動作環境の概略図である。 例示的な実施形態に従う、車載バーチャルリアリティシステム及び方法を実装する車両及び車両乗員の概略図である。 例示的な実施形態に従う、図１のバーチャルリアリティエンジンのブロック図である。 例示的な実施形態に従う、データフローを含むバーチャル世界モデル図である。 例示的な実施形態に従う、図４のバーチャル世界モデルを含む、バーチャルリアリティ世界の概略クラス図である。 例示的な実施形態に従う、車載動的バーチャルリアリティのための方法のフローチャート図である。 例示的な実施形態に従う、バーチャルビューの例示的な実施形態である。 例示的な実施形態に従う、別のバーチャルビューの例示的な実施形態である。
以下は、本明細書において使用される選択された用語の定義を含む。この定義は、用語の範囲内に収まるとともに実施のために使用することができる、構成要素の様々な実施形態及び／又は形態を含む。この実施形態は、制限的なものであることを意図していない。
本明細書で用いる「バス」は、コンピュータの内部の、又はコンピュータの間の他のコンピュータ構成要素に動作可能に接続された、相互に連結されるアーキテクチャを指す。バスは、コンピュータの構成要素の間でデータを転送することができる。このバスは、メモリバス、メモリコントローラ、周辺バス、外部バス、クロスバースイッチ、及び／又はローカルバス等であり得る。このバスは、コントローラエリアネットワーク（ＣＡＮ）、ローカルインターコネクトネットワーク（ＬＩＮ）等のプロトコルを用いて、車両内部の構成要素を相互接続する車両用バスでもあり得る。
本明細書で用いる「コンピュータ通信」は、２つ以上のコンピューティングデバイス（例えば、コンピュータ、パーソナルデジタル補助装置、携帯電話、ネットワークデバイス）の間の通信を指し、例えば、ネットワーク転送、ファイル転送、アプレット移転、電子メール、ハイパーテキスト転送プロトコル（ＨＴＴＰ）転送であり得る。コンピュータ通信は、例えば、無線システム（例えば、ＩＥＥＥ ８０２．１１）、イーサネット（登録商標）システム（例えば、ＩＥＥＥ ８０２．３）、トークンリングシステム（例えば、ＩＥＥＥ ８０２．５）、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、ポイントツーポイント方式、回線交換方式、パケット交換方式等にわたって生じることがあり得る。
本明細書で用いる「ディスク」は、例えば、磁気ディスクドライブ、ソリッドステートディスクドライブ、フロッピー（登録商標）ディスクドライブ、テープドライブ、Ｚｉｐドライブ、フラッシュメモリカード、及び／又はメモリスティックであり得る。更にまた、ディスクは、ＣＤ−ＲＯＭ（コンパクトディスクＲＯＭ）、ＣＤレコーダブルドライブ（ＣＤ−Ｒドライブ）、ＣＤリライタブルドライブ（ＣＤ−ＲＷドライブ）及び／又はデジタルビデオＲＯＭドライブ（ＤＶＤ ＲＯＭ）であり得る。このディスクは、コンピューティングデバイスのリソースを制御又は割り当てるオペレーティングシステムを書き込むことができる。
本明細書で用いる「データベース」は、表、表のセット、データストアのセット、並びに／又はそれらのデータストアにアクセスする、及び／若しくはそれらを操作するための方法を指し得る。
本明細書で用いる「メモリ」は、揮発性メモリ及び／又は不揮発性メモリを含むことができる。不揮発性メモリは、例えば、ＲＯＭ（読出し専用メモリ）、ＰＲＯＭ（プログラマブル読出し専用メモリ）、ＥＰＲＯＭ（消去可能なＰＲＯＭ）及びＥＥＰＲＯＭ（電気的消去可能ＰＲＯＭ）を含むことができる。揮発性メモリは、例えばＲＡＭ（ランダムアクセスメモリ）、シンクロナスＲＡＭ（ＳＲＡＭ）、ダイナミックＲＡＭ（ＤＲＡＭ）、シンクロナスＤＲＡＭ（ＳＤＲＡＭ）、ダブルデータレートＳＤＲＡＭ（ＤＤＲ ＳＤＲＡＭ）、ダイレクトＲＡＭバスＲＡＭ（ＤＲＲＡＭ）を含むことができる。メモリは、コンピューティングデバイスのリソースを制御又は割り当てるオペレーティングシステムを記憶することができる。
本明細書で用いる「モジュール」には、機能若しくは動作を実行し、並びに／又は別のモジュール、方法、及び／若しくはシステムからの機能若しくは動作を引き起こすためのハードウェア、ファームウェア、機械上で実行されるソフトウェア、及び／又はそれぞれの組み合わせが含まれるが、これらに限定されない。モジュールには、ソフトウェア制御されるマイクロプロセッサ、個別論理回路、アナログ回路、デジタル回路、プログラムされた論理デバイス、実行命令を含有するメモリデバイスなどが含まれ得る。
「動作可能な接続」又は実体が「動作可能に接続される」とは、信号、物理的な通信及び／又は論理的通信を送信及び／又は受信することができる接続である。動作可能な接続は、物理的なインターフェース、データインターフェース及び／又は電気的インターフェースを含むことができる。
本明細書で用いる「プロセッサ」は、信号を処理し、一般的な計算及び算術関数を実行する。プロセッサによって処理される信号には、デジタル信号、データ信号、計算機命令、プロセッサ命令、メッセージ、ビット、ビットストリーム、又は受信し、送信し及び／又は検出することができる他の手段を含めることができる。一般に、プロセッサは、マルチ、シングル及びマルチコアのプロセッサ及びコプロセッサ、並びに他のマルチ、シングル及びマルチコアのプロセッサ及びコプロセッサのアーキテクチャを含む様々なプロセッサであり得る。プロセッサは、様々な機能を実行するために様々なモジュールを含むことができる。
本明細書で用いる「携帯デバイス」は、ユーザ入力（例えば、タッチ、キーボード）を有する表示画面及び計算のためのプロセッサを典型的に有するコンピューティングデバイスである。携帯デバイスには、ハンドヘルドデバイス、モバイルデバイス、スマートフォン、ラップトップ、タブレット、及び電子書籍リーダーが含まれるが、これらに限定されない。
本明細書で用いる「車両」は、１人以上の乗員を乗せることが可能であり、任意の形態のエネルギーによって電力供給される、任意の移動車両を指す。「車両」という用語には、車、トラック、バン、ミニバン、ＳＵＶ、オートバイ、スクータ、ボート、パーソナルウォータークラフト、及び航空機が含まれるが、これらに限定されない。場合によっては、自動車は、１つ以上のエンジンを含む。
本明細書で用いる「車両システム」には、車両、運転、及び／又は安全を強化するために使用され得る、任意の自動又は手動システムが含まれ得るが、これらに限定されない。例示的な車両システムには、電子安定制御システム、アンチロックブレーキシステム、ブレーキ補助システム、自動ブレーキプレフィルシステム、低速追従システム、クルーズ制御システム、衝突警報システム、衝突軽減ブレーキシステム、自動クルーズ制御システム、車線逸脱警報システム、ブラインドスポットインジケータシステム、車線維持支援システム、ナビゲーションシステム、変速システム、ブレーキペダルシステム、電子パワーステアリングシステム、視覚デバイス（例えば、カメラシステム、近接センサシステム）、気象制御システム、電子プリテンションシステム等が含まれ得るが、これらに限定されない。
ここで図面を参照すると、表示は１つ以上の例示的な実施形態を示す目的であり、それらを制限する目的ではなく、図１は、例示的な実施形態に従う、車載動的バーチャルリアリティシステム及び方法を実装する、動作環境１００の概略図である。システム１００の構成要素、並びに本明細書で論じられる他のシステム、ハードウェアアーキテクチャ、及びソフトウェアアーキテクチャの構成要素は、種々の実施形態のために、組み合わされ得るか、省略され得るか、又は異なるアーキテクチャに組織化され得る。更に、動作環境１００の構成要素は、車両で実装され得るか、又は車両と関連付けられ得る。例えば、図２は、本明細書で更に詳述される、車載動的バーチャルリアリティシステム及び方法を実装する車両２００を示す。
図１の例示的な実施形態では、図１の環境１００は、車両（例えば、図２の車両２００）の種々の構成要素及び環境１００の他の構成要素を処理する、それらと通信する、及びそれらと相互作用するための規定付きで、車両コンピュータデバイス（ＶＣＤ）１０２（例えば、テレマティックスユニット、ヘッドユニット、ナビゲーションユニット、インフォテインメントユニット、電子コントロールユニット）を含む。概して、ＶＣＤ １０２は、プロセッサ１０４、メモリ１０６、ディスク１０８、グローバルポジショニングシステム（ＧＰＳ）１１０、及び入力／出力（Ｉ／Ｏ）インターフェース１１２を含み、それぞれは、バス１１４（例えば、コントローラエリアネットワーク（ＣＡＮ）若しくはローカル相互接続ネットワーク（ＬＩＮ）プロトコルバス）、並びに／又は他の有線及び無線技術を介して、コンピュータ通信のために動作可能に接続される。Ｉ／Ｏインターフェース１１２は、ＶＣＤ １０２の構成要素と他の構成要素、ネットワークとデータソースとの間のデータ入力及び出力を促進するために、ソフトウェア及びハードウェアを提供し、それらは、本明細書に記載される。加えて、本明細書で論じられるシステム及び方法に関して更に詳細に論じられるように、プロセッサ１０４は、環境１００の構成要素によって促進される、ユーザ（例えば、車両乗員）に車載動的バーチャルリアリティ環境を提供するのに好適なバーチャルリアリティ（ＶＲ）エンジン１１６を含む。
ＶＣＤ １０２はまた、１つ以上の車両システム１１８とのコンピュータ通信（例えば、バス１１４及び／又はＩ／Ｏインターフェース１１２を介した）のために動作可能に接続される。車両システムには、車両、運転、及び／又は安全を強化するために使用され得る、任意の自動又は手動システムが含まれ得るが、これらに限定されない。車両システム１１８は、種々の車両センサ１２０を含み、及び／又はコンピュータ通信のためにそれらに動作可能に接続され、車両センサ１２０は、車両、車両環境、及び／又は車両システム１１８と関連する情報を提供及び／又は感知する。センサ１２０には、車両状態センサ、車両システム状態センサ、近接センサ、視覚センサ、音声センサ、ＧＰＳセンサ（例えば、ＧＰＳ １１０）、及び他のセンサが含まれ得るが、これらに限定されない。特定の車両システムセンサには、車両速度センサ、アクセルペダルセンサ、ブレーキセンサ、スロットル位置センサ、車輪センサ、アンチロックブレーキセンサ、カムシャフトセンサ等が含まれ得るが、これらに限定されない。センサ１２０は、車両、車両環境、車両システム１１８、及び／又は車両の乗員と関連したデータの測定を感知するように動作可能であり、データの前述の測定を示すデータ信号を生成する。これらのデータ信号は、他のデータ基準及びパラメータを生成するために、他のデータ形式（例えば、値）に変換され得る、及び／又は車両システム１１８及び／又はＶＣＤ １０２によって使用され得る。具体的に、ＶＣＤ １０２及びその構成要素は、複数の車両システム１１８及び／又はセンサ１２０から、データ（例えば、車両データ、ユーザデータ、他のデータ（図３））にアクセスする、及び／又はそれを受信することができる。
再び図１を参照すると、ＶＣＤ １０２は、コンピュータ通信のために、種々のネットワーク１２２及びバーチャルリアリティ（ＶＲ）デバイス１２４にも動作的に接続される。ネットワーク１２２は、例えば、データネットワーク、インターネット、広域ネットワーク、又はローカルエリアネットワークである。ネットワーク１２２は、種々のリモートデバイス（例えば、ウェブサーバ、リモートサーバ、アプリケーションサーバ、中間サーバ、クライアントマシン、他の携帯デバイス（図示せず））との通信媒体としての機能を果たす。ＶＲデバイス１２４は、車載動的バーチャルリアリティ環境を促進し、それをユーザに提供するために、ＶＣＤ １０２、及び具体的にＶＲエンジン１１６に入力及び／又は出力を提供するデバイスを含む。例えば、ＶＲデバイス１２４には、バーチャルリアリティ追跡デバイス、頭装着型ディスプレイ、バーチャルリアリティ衣服、バーチャルリアリティ入力デバイス、バーチャルリアリティメガネ、ユーザ、車両、及び／又は車両環境を監視するための車両中のカメラ追跡システム、携帯デバイス、モバイルデバイス等のうちの１つ以上が含まれ得るが、これらに限定されない。
一実施形態では、ＶＲデバイス１２４は、ユーザの身体（例えば、頭）上に配置され得るか、又はヘルメット若しくはゴーグル上に取り付けられ得る、頭装着型ディスプレイ（ＨＭＤ）である。例えば、図２を参照すると、車両２００のシート２０４に位置付けられる車両乗員２０２は、車両乗員２０２の頭に配置されるＨＭＤ ２０６を装着している。ＨＭＤ ２０６は、車両乗員２０２に関する情報、例えば、追跡情報、入力情報、運動情報等を、ＶＲエンジン１１６に提供することができる。ＨＭＤ ２０６はまた、ＶＲエンジン１１６によって生成されるバーチャルビューを、車両乗員２０２に提供する。別の実施形態では、車両乗員２０２は、携帯デバイス２０８を所有していてもよい。携帯デバイス２０８は、単独で又はＨＭＤ ２０６と組み合わせて、車両乗員２０２に関する情報を提供することができ、携帯デバイス２０８上にＶＲエンジン１１６によって生成されたバーチャルビューを提供することができる。例えば、携帯デバイス２０８は、携帯デバイス２０８を所有している車両乗員２０２に関する追跡情報を提供することができる、加速度計、ジャイロスコープ、及び／又はコンパスを含むことができる。ＨＭＤ ２０６及び／又は携帯デバイス２０８はまた、音声入力及び出力のためのスピーカ又はヘッドフォンを含むことができる。ＨＭＤ ２０６及び／又は携帯デバイス２０８は、ＶＣＤ １０２とのコンピュータ通信のために、無線又は有線技術を利用することができる。種々の入力／出力技術が、本明細書に記載されるシステム及び方法で実装され得る。ＶＲデバイス１２４の他の構成及び使用法も利用され得る。例えば、車両乗員２０２はまた、コントローラ（図示されないが、携帯デバイス２０８として実装され得る）を使用することができるか、又は携帯デバイス２０８を単独で、又はＨＭＤ ２０６とともに使用することができる。
図１のＶＲエンジン１１６、及び車載動的バーチャルリアリティのためのシステムは、これから図３及び図１を参照して詳細に論じられる。図３は、例示的な実施形態に従う、バーチャルリアリティ（ＶＲ）エンジン３００（例えば、ＶＲエンジン１１６）のブロック図を示す。簡単にするために、図１の全ての構成要素が図３に示されるわけではない。ＶＲエンジン３００は、バーチャルリアリティデータモジュール３０２、動的バーチャルリアリティ（ＶＲ）モジュール３０６、及びレンダリングモジュール３０８を含む。図１を参照した上記の機能性に加えて、上記のモジュールは、車両データ３１８、ユーザデータ３２０、及び他のデータ３２２にアクセス、及び／又はそれらを受信することができ、かつ車両システム３１４及びＶＲデバイス３１６と通信することができる。上述のように、ＶＲデバイス３１６は、入力及び／又は出力をＶＲエンジン３００に提供する。具体的に、ＶＲデバイス３１６は、入力及び／又は出力をユーザ３１２（例えば、車両乗員２０２（図２））に提供することができる。例えば、図１とともに上で論じられるように、ＶＲデバイスは、バーチャルリアリティ追跡デバイス、頭装着型ディスプレイ（例えば、ＨＭＤ ２０６）、携帯デバイス（例えば、携帯デバイス２０８）、バーチャルリアリティ衣服、バーチャルリアリティ入力デバイス等を含むことができる。
バーチャルリアリティデータモジュール３０２は、車両の１つ以上の車両システムから、車両データを受信する。車両データは、車両動力学データを含む。例えば、バーチャルリアリティデータモジュール３０６は、例えば、車両システム３１４から、車両データ３１８を受信することができる。車両データ３１８は、車両センサ１２０から得られる車両データ基準及びパラメータを含む。例えば、車両データには、車両位置データ（例えば、ＧＰＳ １１０から）、車両配向データ、車両システム状態データ、１つ以上の車両システム並びに／又は構成要素に関するデータ、車両環境データ（例えば、内部及び外部環境データ）等が含まれ得るが、これらに限定されない。車両データ３１８は、ナビゲーションデータ、例えば、位置データ、方向データ（例えば、起点、目的地、及び関心点）等も含むことができる。
車両データ３１８はまた、車両の動力学及び車両の運動（例えば、速度、方向、加速度、ヨーレート、ステアリング速度、ステアリング角）を説明する、車両動力学データを含むことができる。車両動力学データには、車両の速度レベル、加速度、ヨーレート、ハンドル位置、ブレーキ位置、スロットル位置、変速ギア位置、ドライバのコマンド、動的車両反応、タイヤ及び道路等の力等に関するリアルタイムデータが含まれ得るが、これらに限定されない。いくつかの実施形態では、車両データ３１８は、リモートソース、例えば、ネットワーク１２２（図１）から受信され得る。一実施形態では、ＶＲデータモジュール３０２は、予測車両データを受信することができるか、又は車両データ３１８及び／若しくは車両動力学データに基づいて予測車両データを決定することができる。例えば、車両予測運動データは、ペダル位置、車両システム状態／制御、現在車両位置、車両目的地情報等に基づき得る。
バーチャルリアリティデータモジュール３０６もまた、ユーザデータ３２０を受信する。例えば、ユーザデータ３２０は、ＶＲデバイス３１６から受信され得る。ユーザデータ３２０は、例えば、ＶＲデバイス３１６からの追跡データ、相互作用データ、ユーザ入力データを含む。例えば、ユーザデータは、視覚センサ（例えば、センサ１２０、カメラ、ジェスチャー／運動センサ）、追跡システム、ＨＭＤ ２０６、携帯デバイス２０８、並びにユーザの相互作用、姿勢、配向、位置、及び運動に関するデータを提供する他のセンサ及びシステムからのデータに、少なくとも部分的に基づき得る。例えば、ユーザデータ３２０は、ユーザに関する姿勢、配向、及び位置情報を含むことができる。別の実施形態では、ユーザデータ３２０は、例えば、車両データ３１８（車両動力学データを含む）に少なくとも部分的に基づいて、車両に関連したユーザに関する姿勢、配向、及び位置情報を含むことができる。したがって、一実施形態では、ユーザデータ３２０は、ユーザの運動及び姿勢に関する、並びにユーザの運動及び姿勢がどのように車両動力学の影響を受けるかに関する情報を提供することができる。ユーザデータはまた、例えば、健康監視デバイス（例えば、ユーザによって装着される携帯医療デバイス、車載生物学的健康監視デバイス）からの、ユーザに関する健康データを含むことができる。いくつかの実施形態では、ユーザデータはまた、他のネットワーク１２２及び／又は車両システム３１４から受信され得る。
別の実施形態では、バーチャルリアリティデータモジュール３０２はまた、車載動的バーチャルリアリティを促進するために他のデータを受信する。他のデータ３２２は、車両システム３１４、ＶＲデバイス３１６、及び／又は他のネットワーク１２２からのビッグデータを含むことができる。例えば、他のデータ３２２は、車両（例えば、内部、外部）、道路状況（例えば、凸凹道、滑りやすい道路、交通状況）、天候状態、車両温度等に関連した環境データを含むことができる。別の実施形態では、他のデータ３２２は、ドライバ動作データ、例えば、運転履歴、燃費、他の車両システムとの相互作用、ジェスチャー、車両に対する運動等を含むことができる。更に、いくつかの実施形態では、他のデータ３２２は、例えば、他のネットワーク１２２からのソーシャルメディアデータを含むことができる。
再び図３を参照すると、動的ＶＲデータモジュール３０６は、車両データ、ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する。一実施形態では、データストアは、バーチャル世界モデルを記憶し、バーチャル世界モデルは、バーチャルビューを定義する１つ以上の構成要素を含む。例えば、図３において、データストア３１０は、バーチャル世界モデル及び設計データを記憶することができる。バーチャル世界モデル及び設計データは、バーチャル世界及び／又はバーチャルビューを定義及び生成するためのゲームテーマ、ソフトウェア、又はプログラム命令を含むことができる。別の実施形態では、メモリ１０６及び／又はディスク１０８（図１）は、上記のバーチャル世界モデル及び設計データの一部又は全部を記憶することができる。別の実施形態では、バーチャル世界モデル及び設計データは、リモートソース、例えば、ネットワーク１２２から受信される。
ここで、例示的なバーチャル世界モデルを、図４及び５を参照して説明する。図４は、例示的な実施形態に従う、データフローを含む例示的なバーチャル世界データモデル４００の図を示す。図５は、例示的な実施形態に従う、図４のバーチャル世界モデルのノードクラスのグループ５０４を含む、バーチャルリアリティ世界５０２の概略的クラス図５００である。図４及び５とともに論じられるノードクラス、オブジェクト、プロパティ、参照、方法、及びイベント（すなわち、バーチャルビューを定義する１つ以上の構成要素）は、本質的に例示的であり、制限することを目的としていない。概して、バーチャル世界モデルは、バーチャル世界及び１つ以上のバーチャルビューを定義する、多くの個々の動作及びオブジェクトの集合体である。バーチャル世界モデルは、種々のモデリング及びプログラミング言語、例えば、バーチャルリアリティモデリング言語（ＶＲＭＬ）、ＤｉｒｅｃｔＸ、ＯｐｅｎＧＬ、Ｕｎｉｔｙ等で定義され得る。図５に示されるように、バーチャル世界５０２は、１つ以上のバーチャルビュー５０６を含むことができる。バーチャル世界５０２及びバーチャルビュー５０６はまた、１つ以上のバーチャルオブジェクト５１０を含むことができる。バーチャルビュー５０６及びバーチャルオブジェクト５１０は、ノードクラス、及び図５の実施形態において、ノードクラスのグループ５０４によって定義される。いくつかの実施形態では、ノードは、階層構造中で、グループ化され、１つ以上のバーチャルビュー５０６及び／又はバーチャルオブジェクト５１０に適用され得る。例えば、ノードクラスのグループ５０４は、ノードの特定のグループ（すなわち、ノードクラスのグループ５０４）と関連した、バーチャルビュー５０６及び／又はバーチャルオブジェクト５１０の親及び子ノードに適用することができる。
図５の例示された実施形態では、ノードクラスのグループ５０４は、ビューノードクラス５１２、世界構造ノードクラス５１４、イベントインノードクラス５１６、及びイベントアウトノードクラス５１８を含む。各ノードクラスは、ノードクラスを定義及び／又は修正する構成要素、例えば、他のノード、プロパティ、フィールド、方法、及び／又は参照を含むことができる。いくつかの実施形態では、ノード、プロパティ、フィールド、方法、及び／又は参照は、例えば、特定のテーマ、ゲーム等に対するバーチャル世界に基づいて、予め定義され得る。加えて、いくつかの実施形態では、ノード、プロパティ、フィールド、方法、及び／又は参照は、ユーザに基づいて、例えば、ユーザ選好に基づいて、予め定義され得る。図４及び５に含まれない他のノードクラス、プロパティ、フィールド、方法、及び／又は参照が実装されてもよく、かつ上記とは異なるモデリング及びプログラミング言語に基づいてもよい。
図５のノードクラスのグループ５０４は、これから詳細に論じられる。ビューノードクラス５１２は、バーチャルビュー５０６、バーチャルオブジェクト５１０、並びに／又はバーチャルビュー５０６及び／若しくはバーチャルオブジェクト５１０と関連した動作の位置並びに／又は配向を定義する。例えば、図５において、幾何学的変換を実施するために変換ノードが使用され得、特性、位置、回転、及びスケールを含む。画像効果ノードは、画像後処理効果を取り扱う。例示的な画像後処理効果は、被写界深度、動き、及びぶれ等を含む。挙動ノードは、異なる挙動、例えば、アニメーション及び運動を可能及び不可能にするために使用され得る。視覚効果ノードは、視覚効果、例えば、ラインレンダラ、ハロー効果、トレイルレンダ等を定義するために使用され得る。レンダリングノードは、ゲーム内及びユーザインターフェース要素をレンダリングするための設定及び構成要素を定義するために使用され得る。
世界構造クラスノード５１４は、バーチャルビュー５０６、バーチャルオブジェクト５１０、並びに／又はバーチャルビュー５０６及び／若しくはバーチャルオブジェクト５１０と関連した動作の構造並びに／又は外観を定義する。例えば、形状ノードは、形を定義するために使用され得る。外観ノードは、質感及び材料を定義するために使用され得る。地勢ノードは、地勢及び景色の特徴を定義するために使用され得る。衝突ノードは、バーチャルビュー中のどのオブジェクトが衝突可能であるかを定義する。
イベントインクラスノード５１６は、各ノードが受信又は生成することができるイベントの種類及び名前を定義する。例えば、イベントマネージャノードは、カスタムイベントを定義することができ、特定のイベントを初期化するために、イベントトリガ（例えば、ユーザデータ（例えば、ユーザ入力）、車両データから決定される）を決定する、イベントハンドラ及びリスナを含む。タイプフィールドは、イベントの種類を定義し、ノードフィールドは、イベントがどのノードに適用するかを定義し、ｓｅｔ＿ｆｉｅｌｄｎａｍｅ方法は、イベント中にフィールド値を修正するために使用され得る。イベントアウトクラスノード５１８は、イベントの実行及びルーティングを管理する。ｆｉｅｌｄｎａｍｅ＿ｃｈａｎｇｅｄフィールドは、何のフィールドがイベント中に変更されるかを示し、タイプフィールドは、イベントの種類を定義し、ノードフィールドは、イベントがどのノードに適用するかを定義し、ルート方法は、イベントがどのようにノードに送信されるか、並びにイベントがどのようにノードによって受信及び生成されるかを定義する。この場合もやはり、図５のクラスノード及び構成要素は、本質的に例示的であり、他のクラスノード及び構成要素は、本明細書で論じられるシステム及び方法で実装され得る。クラスノード及び構成要素は、ユーザに動的バーチャル世界及び／又はバーチャルビューを生成するために、車両データ及びユーザデータのうちの少なくとも１つに従って拡張され得る。具体的に、車両データ及びユーザデータは、ノードを初期化し、プロパティ及びフィールドを設定し、かつイベントを初期化又は定義するために使用され得る。
再び図４を参照すると、モデル４００は、バーチャルビューを定義する１つ以上の構成要素を含む。例えば、図４において、モデルは、ビュークラスノード４０２、世界構造クラスノード４０４、イベントインクラスノード４０６、及びイベントアウトクラスノード４０８を含む。図４のクラスノードは、図５に記載されるクラスノードと同様の方法、プロパティ、フィールド、及び参照を含むことができる。図４はまた、例えば、クラスノードを拡張するための、クラスノードへの例示的なデータフローを示す。具体的に、動的ＶＲモジュール３０６は、特定のクラスノードを拡張するために、これらの種類のデータを使用することができる。図３で論じられるように、データは、車両データ３１８、ユーザデータ３２０、及び／又は他のデータ３２２を含むことができる。図４に示されるデータの種類は、図３の車両データ３１８、ユーザデータ３２０、及び／又は他のデータ３２２の種類である。具体的に、図４において、データには、車両運動データ（車両動力学データを含む）４１２、ユーザ運動データ４１３、車両運動予測データ４１４、ナビゲーションデータ４１６、ビッグデータ４１８、及びドライバ動作データ４１２が含まれるが、これらに限定されない。
動的ＶＲモジュール３０６は、車両データ及びユーザデータのうちの少なくとも１つに基づいて、バーチャル世界モデル４００の１つ以上の構成要素を修正及び／又は拡張する。異なる種類のデータからＶＲモデル構成要素への図４中の矢印は、特定のＶＲモデル構成要素を拡張するために使用され得る、データの例示的なフローを示す。例えば、車両運動データ４１２（例えば、車両動力学データ、車両速度、方向、加速度、車両乗員運動データ）は、ビュークラスノード４０２の構成要素を拡張するために使用され得る。ユーザ運動データ４１３（例えば、姿勢、配向、位置、入力）は、ビュークラスノード４０２の構成要素を拡張するために使用され得る。更に、車両運動予測データ４１４（例えば、ペダル位置、自動クルーズコントロール）もまた、ビュークラスノード４０２を拡張するために使用され得る。別の実施形態では、ナビゲーションデータ４１６（例えば、ナビゲーション位置、方向）が、世界構造クラスノード４０４を拡張するために使用され得る。ビッグデータ４１８（例えば、スピードバンプ、道路状況、ステアリング状況）もまた、世界構造クラスノード４０４を拡張するために使用され得る。更に、ビッグデータ４１８は、イベントインクラスノード４０６を拡張するために使用され得る。ドライバ動作データ４２０（例えば、燃費、ドライバ入力、音声）もまた、イベントインクラスノード４０６を拡張するために使用され得る。
上述のように、ビュークラスノード４０２、世界構造クラスノード４０４、イベントインクラスノード４０６、及びイベントアウトクラスノード４０８は、バーチャルビューを定義し、動的バーチャルビューをユーザに提供するために、車両データ及びユーザデータのうちの少なくとも１つを使用して、拡張され得る。具体的に、図４のデータの種類は、バーチャル世界モデル４００の構成要素を拡張するために使用され得、それにより、１つ以上のバーチャルイベント４１０を含むことができる、バーチャルビューを生成する。一実施形態では、動的ＶＲモデル３０６は、車両データ及びユーザデータに基づいて、バーチャル世界モデルの構成要素の１つ以上のプロパティを拡張する。例えば、１つ以上の構成要素の１つ以上のプロパティは、図５に示されるクラスノードのプロパティを含むことができる。一実施形態では、プロパティのうちの１つ以上は、構成要素の運動を定義する運動プロパティを含むことができる。例えば、ビュークラスノード４０２は、プロパティ、例えば、オブジェクトの位置、回転、及び／又はスケールを定義する変換クラスノードを含むことができる。車両データ及びユーザデータのうちの少なくとも１つに基づいて、変換クラスノードは、オブジェクトの位置、回転、及び／又はスケールを変更するために拡張され得る。例示的な実施形態として、かつ図４及び５を参照して、ＶＲオブジェクト５１０は、ボールとして定義され得る（すなわち、世界構造クラスノード５１４、例えば、形状クラスノードによって定義される）。車両運動データ４１２（例えば、車両動力学データ）は、ボールの特徴を拡張するために使用され得る。例えば、ビュークラスノード４０２及び変換クラスノードを使用して、ボールの位置、回転、及び／又はスケールは、車両運動データ４１２に基づいて設定され得る。結果的に、ＶＲオブジェクト５１０（すなわち、ボール）は、車両運動データ４１２と同期化される。
再び図３を参照すると、レンダリングモジュール３０８は、車両動力学データに従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、動的ＶＲモジュール３０６からのバーチャルビューを出力デバイスにレンダリングする。例えば、動的リアリティモジュール３０６は、バーチャルビューをＶＲデバイス３１６の１つ以上（すなわち、ＨＭＤ ２０６、携帯デバイス２０８）にレンダリングする。一実施形態では、レンダリングモジュール３０８は、車両動力学データ（すなわち、車両データ３１８）に基づいて車両運動データ４１２を決定する。レンダリングモジュール３０８はまた、ユーザデータ３２０及び車両データ３１８に基づいて車両に対するユーザの運動を表すユーザ運動データ４１２を決定することができる。例えば、一実施形態では、ＶＲデバイス３１６は、車両に対するユーザの姿勢、位置、及び／又は配向を決定するのに役立つ、加速度計センサ及び／又はジャイロスコープセンサを含むことができる。車両運動データ４１２及び／又はユーザ運動データ４１２は、車両動力学データに従って、バーチャルビューの表示を更新するために、バーチャル世界モデル４００の１つ以上の構成要素を拡張し、それにより、出力デバイスを制御するために使用され得る。別の実施形態では、レンダリングモジュール３０８は、車両運動データ４１２及び／又はユーザ運動データ４１２に基づいて、ＶＲデバイス３１６のレンダリング速度（例えば、グラフィックスレンダリングハードウェア／ソフトウェアによって定義及び実装される、１秒当たりのフレーム数、フレーム速度、フレーム更新速度）を直接拡張することができる。
更なる実施形態では、レンダリングモジュール３０８は、車両運動データ及びユーザ運動データに基づいて一時的運動レンダリング速度を決定する。一時的運動レンダリング速度は、車両運動データとユーザ運動データとの間の相関である。別の実施形態では、一時的運動レンダリング速度は、車両データからの時間構成要素も考慮する。一時的運動レンダリング速度は、車両運動データとユーザ運動データとの間の差を最小限に抑える、画像後処理及びレンダリングプロパティ（例えば、１秒当たりのフレーム数、フレーム速度、フレーム更新速度）である。レンダリングモジュール３０８は、一時的運動レンダリング速度に基づいてバーチャルビューの表示を更新するように、出力デバイスを制御することによって、バーチャルビューを出力デバイスにレンダリングすることができる。例えば、ＶＲデバイス３１６のグラフィックスハードウェア及び／又はソフトウェアによって実装されるレンダリング速度（例えば、１秒当たりのフレーム数、フレーム速度、フレーム更新速度）は、一時的運動レンダリング速度に基づいて拡張され得る。別の実施形態では、動的ＶＲモジュール３０６は、一時的運動レンダリング速度に基づいてバーチャル世界モデルの１つ以上の構成要素の１つ以上のプロパティを拡張する。例えば、ビュークラスノード４０２は、レンダリングプロパティ及び／又は運動に関するプロパティを含むことができる（図５を参照されたい）。一実施形態では、これらのプロパティは、フレーム数、フレーム速度、及び／又はフレーム更新速度を含むことができる。
リアルタイムで車両動力学データに従ってバーチャルビューを更新することによって、ユーザに示されるバーチャルビューは動的であり、車両運動及びユーザ運動を考慮し、それにより、リアルタイムでバーチャルビュー中の車両運動及びユーザ運動をシミュレーションする。言い換えれば、バーチャル世界モデルの１つ以上の構成要素は、車両動力学データ及びユーザ運動データを含む、少なくとも車両データ及びユーザデータに基づいて同期化される。これがユーザのための真の没入型バーチャルリアリティ環境を提供するだけでなく、バーチャルビューが車両動力学及びユーザ運動を考慮するため、バーチャルリアリティ酔いが最小限に抑えられ得る。
ここで、動作中の上記の図１〜５に示される車載動的バーチャルリアリティシステムを、図６の方法を参照して、説明する。図１〜５を参照して上で論じられるシステム及び構成要素は、図６の方法で同様に実装され得ることが理解されるであろう。図６の方法は、ブロック６０２において、車両の１つ以上の車両システムから車両データを受信する工程を含み、車両データは、車両動力学データを含む。例えば、図３を参照すると、ＶＲデータモジュール３０２は、車両データ３１８を受信することができる。車両データ３１８は、車両動力学データを含むことができる。ブロック６０２はまた、バーチャルリアリティデバイスからユーザデータを受信する工程を含む。例えば、ＶＲデータモジュール３０２はまた、ユーザデータ３２０を受信することができる。
図６に戻って参照すると、ブロック６０４において、車両データ、ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する工程を含む。バーチャル世界モデルは、バーチャルビューを定義する１つ以上の構成要素を含む。図４は、例示的な実施形態に従う、データフローを含む例示的なバーチャル世界モデル４００の図を示す。バーチャル世界モデル４００は、バーチャルビューを定義する１つ以上の構成要素を含む。例えば、ビューノードクラス４０２、世界構造ノードクラス４０４、イベントインノードクラス４０６、及びイベントアウトノードクラス４０８が、バーチャルビューを定義する例示的な構成要素である。具体的に、これらのノードクラスは、バーチャル世界の１つ以上のバーチャルビュー及び１つ以上のバーチャルオブジェクトを定義する。ノードクラスは、他のノード、プロパティ、フィールド、方法、及び参照を含有することができる（図５を参照されたい）。
一実施形態では、バーチャルビューを生成する工程は、車両データ及びユーザデータのうちの少なくとも１つに従って、バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む。例えば、ビューノードクラス４０２、世界構造ノードクラス４０４、イベントインノードクラス４０６、及びイベントアウトノードクラス４０８、並びに／又はこれらのノードと関連したノード、プロパティ、フィールド、方法、及び参照が、車両データ及びユーザデータのうちの少なくとも１つに基づいて拡張され得る。図４において、車両運動データ４１２、ユーザ運動データ４１３、車両運動予測データ４１４、ナビゲーションデータ４１６、ビッグデータ４１８、及びドライバ動作データ４２０は、バーチャル世界モデル４００の構成要素のうちの１つ以上を拡張するために使用され得る、データの例示的な種類である。
一実施形態では、方法は、車両データに基づいて車両の配向及び位置を決定する工程を含む。例えば、ナビゲーションデータ４１６（例えば、ＧＰＳ １１０から）が、車両の配向及び位置を決定するために使用され得る。動的ＶＲモジュール３０６及び／又はレンダリングモジュール３０８は、車両データ３１８に基づいて車両の配向及び位置を決定することができる。方法はまた、ユーザデータ及び車両データに基づいて車両に対するユーザの配向及び位置を決定する工程を含むことができる。例えば、動的ＶＲモジュール３０６及び／又はレンダリングモジュール３０８は、ユーザデータ３２０及び車両データ３１８に基づいて車両に対するユーザの配向及び位置を決定することができる。例えば、ＶＲデバイス（例えば、追跡デバイス、ＨＭＤ ２０２、携帯デバイス２０８）は、車両に対するユーザの配向及び位置を決定するためのユーザデータを提供する、センサ（例えば、加速度計、ジャイロスコープ、コンパス）を含むことができる。
バーチャル世界モデルの１つ以上の構成要素を拡張する工程は、車両の配向及び位置、並びにユーザの配向及び位置のうちの少なくとも１つに基づき得る。非限定的実施形態として、動的ＶＲモジュールは、リアルタイム世界構造を提供するために、車両の配向及び位置、並びに車両に対するユーザの配向及び位置で、世界構造クラスノード４０４を拡張することができる。例えば、地勢クラスノード（図５を参照されたい）は、車両の配向及び位置、並びに車両に対するユーザの配向及び位置に基づいて構成要素を含むバーチャルビュー中の地勢又は景色を提供するように拡張され得る。
別の実施形態では、１つ以上のバーチャルイベント４１０は、車両データ３１８及びユーザデータ３２０のうちの少なくとも１つに基づいて拡張又は作成され得る。例示的な実施形態として、ドライバ動作データ４２０は、イベントインクラスノード４０６を拡張するために使用され得る。ドライバ動作データ４２０は、例えば、ドライバ動作データ、例えば、運転履歴、燃費、他の車両システムとの相互作用、ジェスチャー、車両に対する運動等を含むことができる。非限定的な例示的な実施形態として、ユーザ３１２（すなわち、車両乗員２０２）は、車両の窓（図示せず）を下げてもよい。このドライバ動作は、ユーザ３１２が車両の窓を下げたことを示す、車両システム３１４（例えば、パワーウィンドウ車両システム）からの車両データ３１８、及びＶＲデバイス３１６（例えば、追跡デバイス）からのユーザデータ３２０に基づいて決定される。それに応じて、動的ＶＲモジュール３０６は、車両の窓を下げるユーザ３１２と関連したバーチャルビュー中のイベントをトリガーするために、例えば、イベントインクラスノード４０６を拡張することができる。例えば、車両の窓からの風のシミュレーションが、バーチャルビュー等に示され得る。別の例示的な実施形態として、動的ＶＲモジュール３０６は、車両データ３１８から決定される温度に基づいて風のシミュレーションの構造を定義することができる。例えば、温度がある特定の温度である場合、バーチャルビュー中の風のシミュレーションは、雪の粒子を含んでもよい。これは、世界構造クラスノード４０４のイベントインクラスノード４０６を拡張することによって定義され得る。次いで、イベントアウトノード４０８は、バーチャルイベント４１０を作成するために、イベントをルーティングすることができる。
更なる実施形態では、方法は、車両動力学データに基づいて車両運動データを決定する工程を含む。動的ＶＲモジュール３０６及び／又はレンダリングモジュール３０８は、車両動力学データを含む車両データ３１８に基づいて車両運動データを決定することができる。上述のように、車両運動データ４１２は、車両のリアルタイム運動を定義する。更に、車両運動データは、車両データ３１８、ユーザデータ３２０、及び／又は他のデータ３２２に基づいて決定される予測車両運動データも含むことができる。例えば、予測車両運動データは、ペダル位置、クルーズコントロール、目的地情報等に基づき得る。更に、方法は、ユーザデータ及び車両データに基づいて車両に対するユーザの運動を表すユーザ運動データを決定する工程も含むことができる。ユーザ運動データは、車両データ及びユーザデータ３２０に基づき得、動的ＶＲモジュール３０６及び／又はレンダリングモジュール３０８によって決定され得る。
ブロック６０８において、方法は、車両動力学データに従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、バーチャルビューを出力デバイスにレンダリングする工程を含む。例えば、動的リアリティモジュール３０６は、バーチャルビューをＶＲデバイス３１６の１つ以上（すなわち、ＨＭＤ ２０６、携帯デバイス２０８）にレンダリングする。一実施形態では、レンダリングモジュール３０８は、車両運動データ４１２及びユーザ運動データ４１３に従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、バーチャルビューを出力デバイスにレンダリングする。これは、一実施形態では、ＶＲデバイス３１６のグラフィックスハードウェア及び／又はソフトウェアによって実装される、レンダリング速度（例えば、１秒当たりのフレーム数、フレーム速度、フレーム更新速度）を直接拡張することによって達成され得る。ブロック６０６に示される別の実施形態では、動的ＶＲモジュール３０６は、車両運動データ４１２及びユーザ運動データ４１３に従って、バーチャル世界モデル４００の１つ以上の構成要素を拡張する。
別の実施形態では、方法は、車両運動データ及びユーザ運動データに基づいて一時的運動レンダリング速度を決定する工程を含む。バーチャルビューをレンダリングする工程は、一時的運動レンダリング速度に基づいてバーチャルビューの表示を更新するように、出力デバイスを制御する工程を含むことができる。一時的運動レンダリング速度は、車両運動データ４１２とユーザ運動データ４１３の間の相関である。別の実施形態では、一時的運動レンダリング速度はまた、車両データからの時間構成要素を考慮する。一時的運動レンダリング速度は、車両運動データ４１２とユーザ運動データ４１３との間の差を最小限に抑える、画像後処理及びレンダリングプロパティ（例えば、１秒当たりのフレーム数）である。レンダリングモジュール３０８は、一時的運動レンダリング速度に基づいてバーチャルビューの表示を更新するように、出力デバイスを制御することによって、バーチャルビューを出力デバイスにレンダリングすることができる。例えば、ＶＲデバイス３１６のグラフィックスハードウェア及び／又はソフトウェアによって実装されるレンダリング速度（例えば、１秒当たりのフレーム数、フレーム速度、フレーム更新速度）は、一時的運動レンダリング速度に基づいて拡張され得る。
ブロック６０６に示される更なる実施形態では、動的ＶＲモジュール３０６は、一時的運動レンダリング速度に基づいてバーチャル世界モデルの１つ以上の構成要素の１つ以上のプロパティを拡張する。例えば、ビュークラスノード４０２は、レンダリングプロパティ及び／又は運動に関するプロパティを含むことができる（図５を参照されたい）。一実施形態では、これらのプロパティは、フレーム数、フレーム速度、及び／又はフレーム更新速度を含むことができる。このようにして、ユーザに示されるバーチャルビューは動的であり、リアルタイムで車両運動をシミュレーションする。言い換えれば、バーチャル世界モデルの１つ以上の構成要素は、車両動力学データ及びユーザ運動データを含む、少なくとも車両データ及びユーザデータに基づいて同期化される。これがユーザのための真の没入型バーチャルリアリティ環境を提供するだけでなく、バーチャルビューが車両動力学及びユーザ運動を考慮するため、バーチャルリアリティ酔いも最小限に抑えられ得る。更に、ユーザに示される各バーチャルビューは、車両動力学データに基づいて更新及び維持され得る。例えば、バーチャルビューがユーザ設定を示す（すなわち、ゲームプレイモードではない）場合、バーチャルビューは常に、車両動力学データに基づいて更新及び維持される。
いくつかの実施形態では、バーチャルリアリティオブジェクト及び／又は動作は、予め定義されたレンダリング速度を有することができる。例示的な実施形態として、ある特定のオブジェクト又はある特定のバーチャル世界が、２５ｍｓのレンダリング速度に設定されてもよい。この予め定義されたレンダリング速度は、上述の車両動力学データに基づいて調節され得る。したがって、いくつかの実施形態では、一時的運動レンダリング速度は、予め定義されたレンダリング速度、車両運動、及びユーザ運動に基づき得る。更に、一時的運動レンダリング速度は、ユーザに基づく他の種類のデータも考慮し得る。例えば、上述のように、他のデータ３２２は、ユーザ３１２と関連した健康データを含むことができる。例えば、健康データが運動又は感覚の問題（例えば、見当識障害、めまい、乗物酔い）を示す場合、一時的運動レンダリング速度は、運動又は感覚の問題を最小限に抑えるために、健康データに基づいて調節され得る。
本明細書で論じられる方法及びシステムによって生成される動的バーチャルビューの例示的な実施形態が、これから図７Ａ及び７Ｂを参照して説明される。フィッシングバーチャルリアリティゲームから、図７Ａは、バーチャルビュー７０２を示し、図７Ｂは、バーチャルビュー７０４を示し、そのオブジェクト及び動作は、バーチャル世界モデル、例えば、図４のバーチャル世界モデル４００、及び図５のバーチャルリアリティ世界の概略的クラス図５００によって定義される。具体的に、バーチャルビュー７０２、７０４は、車両データ、ユーザデータ、及びバーチャル世界モデルに基づいて生成され、バーチャル世界モデルは、バーチャルビュー７０２、７０４を定義する１つ以上の構成要素を含む。バーチャルビュー７０２、７０４は、車両２００中の１つ以上のＶＲデバイス３１４、例えば、ＨＭＤ ２０６及び／又は携帯デバイス２０８上に表示され得る。
バーチャルビュー７０２は、景色７０６、太陽７０８、魚７１０、及び水面オブジェクト７１２を含む、１つ以上のバーチャルリアリティオブジェクトを含む。水面オブジェクト７１２は、１つ以上の波７１４を含む。この場合もやはり、バーチャルビュー７０２のオブジェクト及び動作は、バーチャル世界モデルによって定義される。バーチャル世界モデルの１つ以上の構成要素は、車両データ及びユーザデータのうちの少なくとも１つに従って拡張され得る。具体的に、一実施形態では、バーチャル世界モデルは、車両動力学データに基づいて拡張され得、及び／又はバーチャルビュー７０２は、車両動力学データに従って、バーチャルビューの表示を更新するように、出力デバイスを制御することによって、出力デバイスにレンダリングされ得る。このようにして、バーチャルビューのバーチャルビュー及びオブジェクトは、車両データ及び／又はユーザデータによって影響を受け、バーチャルビュー及びバーチャルビューのオブジェクトは、車両動力学データと同期化される。例えば、動的ＶＲモジュール３０６は、車両２００の位置及び配向、並びに車両乗員２０２の位置及び配向に基づいて、オブジェクトでバーチャルビュー７０２を動的に生成及び更新するために、世界構造クラスノード４０４（例えば、地勢クラスノード）を拡張することができる。例示的な実施形態として、車両２００は、日中、山岳地帯を走っている。結果的に、車両データ３１８から決定された車両２００の位置及び配向、並びに時間構成要素に基づいて、バーチャルビュー７０２中の景色オブジェクト７０６の外観及び地勢は、山及び太陽７０８を含む。これは、車両データ３１８から決定された車両２００の位置及び配向、並びに時間構成要素で、世界構造クラスノード４０４を拡張することによって達成される。
別の実施形態として、魚オブジェクト７１０は、車両２００の位置及び配向、並びに車両乗員２０２の位置及び配向に元からある種類の魚として生成され得る。更に、魚オブジェクト７１０の位置もまた、車両２００の位置及び配向、並びに車両乗員２０２の位置及び配向に基づいて生成され得る。例えば、魚オブジェクト７１０の位置及び配向を定義するビュークラスノード４０２は、車両２００の位置及び配向、並びに車両乗員２０２の位置及び配向に基づいて、車両乗員２０２に視点を示すように拡張され得る。
更なる実施形態として、バーチャルビュー７０２中の水面オブジェクト７１２は、車両動力学データに基づいて生成され得る。例示的な実施形態として、車両データ３１８は、一定の速度及び真っ直ぐの方向を示すヨーレートを示すことができる。更に、ユーザデータ３２０は、一定のユーザ運動を示すことができる。結果的に、図７Ａにおいて、波７１４は、車両データ３１８及びユーザデータ３２０に基づいて、穏やかで一定のように見える。しかしながら、車両２００が、図７Ｂに示されるように急に速度を増した場合、１つ以上の波７２０を含む水面オブジェクト７２４は、荒れているように見える。他の実施形態では、１つ以上の波７２０を含む水面オブジェクト７２４は、車両動力学データに基づいてビュークラスノード４０２のパララックス運動又は運動の深度を変更することによって生成され得る。
別の実施形態では、車両２００のヨーレート及び車両乗員２０２の運動は、車両２００のヨーレート及びユーザ２０２の運動に基づいてボートが向きを変えるか、又は移動するバーチャルビューを生成するように、ボートオブジェクトのビュークラスノード４０２を拡張するために使用され得る。明らかなように、バーチャルビューの多くの変化形が、車両データ３１８、ユーザデータ３２０、及び他のデータ３２２に基づいて生成され得る。加えて、バーチャルビューがゲームプレイモードではない（すなわち、バーチャルビューが、ゲーム設定、ユーザ設定、スタートアップ命令を示す）状況において、バーチャルビューは、依然として車両動力学データに従って生成及び更新される。結果的に、リアルタイムで車両動力学データに従ってバーチャルビューを更新することによって、ユーザに示されるバーチャルビューは動的であり、車両運動及びユーザ運動を考慮し、それにより、リアルタイムでバーチャルビュー中の車両運動及びユーザ運動をシミュレーションする。これがユーザのための真の没入型バーチャルリアリティ環境を提供するだけでなく、バーチャルビューが車両動力学及びユーザ運動を考慮するため、バーチャルリアリティ酔いが最小限に抑えられ得る。
本明細書で論じられる実施形態は、コンピュータ実行可能命令を記憶するコンピュータ可読記憶媒体との関連で記載及び実装され得る。コンピュータ可読記憶媒体は、コンピュータ記憶媒体及び通信媒体を含む。例えば、フラッシュメモリドライブ、デジタル多用途ディスク（ＤＶＤ）、コンパクトディスク（ＣＤ）、フロッピー（登録商標）ディスク及びテープカセットである。コンピュータ可読記憶媒体は、コンピュータ可読命令、データ構造、モジュール、若しくは他のデータ等の情報を記憶するための任意の方法又は技術において実装される、揮発性及び不揮発性の取り外し可能及び取り外し不能な媒体を含むことができる。コンピュータ可読記憶媒体は、非一時的有形媒体及び伝播されるデータ信号を除外する。
上で開示される種々の実装例、並びに他の特性及び機能、又はその代替案若しくは変形は、多くの他の異なるシステム又は適用に望ましく組み合わせられ得ることが理解されよう。また、種々の現在予期されていない、若しくは予想されていない代替案、修正、変形、又は改善が、後に当業者によって行われてもよく、それらも、以下の「特許請求の範囲」によって包含されるよう意図される。
１００ システム
１０４ プロセッサ
１０６ メモリ
１０８ ディスク
１１２ 入力／出力（Ｉ／Ｏ）インターフェース
１１４ バス
１１６ エンジン
１１８ 車両システム
１２０ 車両センサ
１２２ ネットワーク
１２４ デバイス

Claims (23)

  1. 車載動的バーチャルリアリティのためのコンピュータ実装方法であって、
    車両の１つ以上の車両システムから車両データを受信する工程であって、前記車両データが、前記車両の車両動力学データを含む、受信する工程と、
    携帯デバイスからユーザデータを受信する工程であって、前記ユーザデータが、ユーザの少なくとも配向及び位置情報を含む、受信する工程と、
    前記車両データ、前記ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する工程であって、前記バーチャル世界モデルが、前記バーチャルビューを定義する１つ以上の構成要素を含み、前記バーチャルビューを生成する工程が、前記車両データ及び前記ユーザデータのうちの少なくとも１つに従って、前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、生成する工程と、
    前記車両動力学データに従って、前記バーチャルビューの表示を更新するように、出力デバイスを制御することによって、前記バーチャルビューを前記出力デバイスにレンダリングする工程と、を含む、方法。
  2. 車載動的バーチャルリアリティのためのコンピュータ実装方法であって、
    車両の１つ以上の車両システムから車両データを受信する工程であって、前記車両データが、車両動力学データを含む、受信する工程と、
    バーチャルリアリティデバイスからユーザデータを受信する工程と、
    前記車両データ、前記ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する工程であって、前記バーチャル世界モデルが、前記バーチャルビューを定義する１つ以上の構成要素を含み、前記バーチャルビューを生成する工程が、前記車両データ及び前記ユーザデータのうちの少なくとも１つに従って、前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、生成する工程と、
    前記車両動力学データに従って、前記バーチャルビューの表示を更新するように、出力デバイスを制御することによって、前記バーチャルビューを前記出力デバイスにレンダリングする工程と、を含む、方法。
  3. 前記車両データに基づいて前記車両の配向及び位置を決定する工程を含む、請求項１または２に記載のコンピュータ実装方法。
  4. 前記ユーザデータ及び前記車両データに基づいて前記車両に対する前記ユーザの配向及び位置を決定する工程を含む、請求項３に記載のコンピュータ実装方法。
  5. 前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程が、前記車両の前記配向及び前記位置、並びに前記ユーザの前記配向及び前記位置のうちの少なくとも１つに基づく、請求項４に記載のコンピュータ実装方法。
  6. 前記車両動力学データに基づいて車両運動データを決定する工程を含む、請求項１または２に記載のコンピュータ実装方法。
  7. 前記ユーザデータ及び前記車両データに基づいて前記車両に対する前記ユーザの運動を表すユーザ運動データを決定する工程を含む、請求項６に記載のコンピュータ実装方法。
  8. 前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程が、前記ユーザ運動データ及び前記車両運動データのうちの少なくとも１つに基づく、請求項７に記載のコンピュータ実装方法。
  9. 前記車両運動データ及び前記ユーザ運動データに基づいて一時的運動レンダリング速度を決定する工程を含む、請求項７に記載のコンピュータ実装方法。
  10. 前記バーチャルビューを前記出力デバイスにレンダリングする工程が、前記一時的運動レンダリング速度に基づいて前記バーチャルビューの表示を更新するように、前記出力デバイスを制御する工程を含む、請求項９に記載のコンピュータ実装方法。
  11. 前記出力デバイスが、前記携帯デバイスである、請求項１または２に記載のコンピュータ実装方法。
  12. 車載動的バーチャルリアリティのためのコンピュータシステムであって、
    コンピュータ通信のために、車両の１つ以上の車両システム及び携帯デバイスに動作的に接続されるプロセッサを備え、前記プロセッサが、
    車両の前記１つ以上の車両システムから車両データを受信し、かつ前記携帯デバイスからユーザデータを受信するバーチャルリアリティデータモジュールであって、前記車両データが前記車両の車両動力学データを含み、前記ユーザデータが前記携帯デバイスを所有するユーザに関する少なくとも配向及び位置情報を含む、バーチャルリアリティデータモジュールと、
    前記車両データ、前記ユーザデータ、及びバーチャル世界モデルに基づいて前記バーチャルビューを生成する動的バーチャルリアリティモジュールであって、前記バーチャル世界モデルが、前記バーチャルビューを定義する１つ以上の構成要素を含み、前記バーチャルビューを生成する工程が、前記車両データ及び前記ユーザデータのうちの少なくとも１つに従って、前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、動的バーチャルリアリティモジュールと、
    前記車両動力学データに従って、前記バーチャルビューの表示を更新するように、出力デバイスを制御することによって、前記動的リアリティモジュールからの前記バーチャルビューを前記出力デバイスにレンダリングするレンダリングモジュールと、を含む、システム。
  13. 車載動的バーチャルリアリティのためのコンピュータシステムであって、
    バーチャル世界モデルを記憶するデータストアであって、前記バーチャル世界モデルが、バーチャルビューを定義する１つ以上の構成要素を含む、データストアと、
    コンピュータ通信のために、前記データストア、車両の１つ以上の車両システム、及びバーチャルリアリティデバイスに動作的に接続されるプロセッサと、を備え、前記プロセッサが、
    車両の前記１つ以上の車両システムから車両データを受信し、かつ前記バーチャルリアリティデバイスからユーザデータを受信する、バーチャルリアリティデータモジュールであって、前記車両データが車両動力学データを含む、バーチャルリアリティデータモジュールと、
    前記データストアからの前記車両データ、前記ユーザデータ、及びバーチャル世界モデルに基づいて前記バーチャルビューを生成する動的バーチャルリアリティモジュールであって、前記バーチャルビューを生成する工程が、前記車両データ及び前記ユーザデータのうちの少なくとも１つに従って、前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、動的バーチャルリアリティモジュールと、
    前記車両動力学データに従って、前記バーチャルビューの表示を更新するように、出力デバイスを制御することによって、前記動的リアリティモジュールからの前記バーチャルビューを前記出力デバイスにレンダリングするレンダリングモジュールと、を含む、システム。
  14. 前記動的バーチャルリアリティモジュールが、前記車両データ及び前記ユーザデータに基づいて前記バーチャル世界モデルの前記構成要素のうちの１つ以上の１つ以上のプロパティを拡張する、請求項１２または１３に記載のシステム。
  15. 前記１つ以上のプロパティが、前記構成要素の運動を定義する運動プロパティを含む、請求項１４に記載のシステム。
  16. 前記レンダリングモジュールが、前記車両動力学データに基づいて車両運動データを決定する、請求項１２または１３に記載のシステム。
  17. 前記レンダリングモジュールが、前記ユーザデータ及び前記車両データに基づいて前記車両に対する前記ユーザの運動を表すユーザ運動データを決定する、請求項１６に記載のシステム。
  18. 前記レンダリングモジュールが、前記車両運動データ及び前記ユーザ運動データに基づいて一時的運動レンダリング速度を決定する、請求項１７に記載のシステム。
  19. 前記レンダリングモジュールが、前記一時的運動レンダリング速度に基づいて前記バーチャルビューの表示を更新するように、前記出力デバイスを制御することによって、前記バーチャルビューを前記出力デバイスにレンダリングする、請求項１８に記載のシステム。
  20. 前記動的バーチャルリアリティモジュールが、前記一時的運動レンダリング速度に基づいて前記バーチャル世界モデルの前記構成要素のうちの１つ以上の１つ以上のプロパティを拡張する、請求項１９に記載のシステム。
  21. 車両コンピュータによって実行されるとき、前記コンピュータに、
    車両の１つ以上の車両システムから車両データを受信する工程であって、前記車両データが、前記車両の車両動力学データを含む、受信する工程と、
    携帯デバイスからユーザデータを受信する工程であって、前記ユーザデータが、ユーザの少なくとも配向及び位置情報を含む、受信する工程と、
    前記車両データ、前記ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する工程であって、前記バーチャル世界モデルが、前記バーチャルビューを定義する１つ以上の構成要素を含み、前記バーチャルビューを生成する工程が、前記車両データ及び前記ユーザデータのうちの少なくとも１つに従って、前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、生成する工程と、
    前記車両動力学データに従って、前記バーチャルビューの表示を更新するように、出力デバイスを制御することによって、前記バーチャルビューを前記出力デバイスにレンダリングする工程と、を実施させる命令を記憶する、非一時的コンピュータ可読記憶媒体。
  22. 車両コンピュータによって実行されるとき、前記コンピュータに、
    車両の１つ以上の車両システムから車両データを受信する工程であって、前記車両データが、車両動力学データを含む、受信する工程と、
    バーチャルリアリティデバイスからユーザデータを受信する工程と、
    前記車両データ、前記ユーザデータ、及びバーチャル世界モデルに基づいてバーチャルビューを生成する工程であって、前記バーチャル世界モデルが、前記バーチャルビューを定義する１つ以上の構成要素を含み、前記バーチャルビューを生成する工程が、前記車両データ及び前記ユーザデータのうちの少なくとも１つに従って、前記バーチャル世界モデルの１つ以上の構成要素を拡張する工程を含む、生成する工程と、
    前記車両動力学データに従って、前記バーチャルビューの表示を更新するように、出力デバイスを制御することによって、前記バーチャルビューを前記出力デバイスにレンダリングする工程と、を実施させる命令を記憶する、非一時的コンピュータ可読記憶媒体。
  23. 前記車両動力学データ及び前記ユーザデータに基づいて一時的運動レンダリング速度を判定する工程を含み、前記バーチャルビューを出力デバイスにレンダリングする工程が、前記一時的運動レンダリング速度に基づいて前記バーチャルビューの表示を更新するように、前記出力デバイスを制御する工程を含む、請求項２１または２２に記載の非一時的コンピュータ可読記憶媒体。
JP2014200010A 2013-10-03 2014-09-30 車載動的バーチャルリアリティのためのシステム及び方法 Expired - Fee Related JP6497884B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201361886240P 2013-10-03 2013-10-03
US61/886,240 2013-10-03
US14/177,841 2014-02-11
US14/177,841 US9547173B2 (en) 2013-10-03 2014-02-11 System and method for dynamic in-vehicle virtual reality

Publications (2)

Publication Number Publication Date
JP2015072687A true JP2015072687A (ja) 2015-04-16
JP6497884B2 JP6497884B2 (ja) 2019-04-10

Family

ID=52776594

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014200010A Expired - Fee Related JP6497884B2 (ja) 2013-10-03 2014-09-30 車載動的バーチャルリアリティのためのシステム及び方法

Country Status (3)

Country Link
US (7) US9547173B2 (ja)
JP (1) JP6497884B2 (ja)
DE (1) DE102014220053A1 (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016189572A1 (ja) * 2015-05-27 2016-12-01 泉陽興業株式会社 遊戯施設
JP2018529101A (ja) * 2015-09-17 2018-10-04 バイドゥ オンライン ネットワーク テクノロジー （ベイジン） カンパニー リミテッド ナビゲーション画像の描画方法、装置及び記憶媒体
WO2018198909A1 (ja) * 2017-04-28 2018-11-01 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理方法及びプログラム
KR20200062287A (ko) * 2017-10-12 2020-06-03 아우디 아게 헤드 마운티드 전자 디스플레이 장치를 작동하기 위한 방법 및 가상 콘텐츠를 디스플레이하기 위한 디스플레이 시스템
JP2020087448A (ja) * 2018-11-30 2020-06-04 サムスン・シー・アンド・ティー・コーポレーション 遊園地で乗り物を稼動する間にイメージを視角化する装置、方法、及びイメージ視角化装置を管理する装置及び方法
JP2021040871A (ja) * 2019-09-10 2021-03-18 株式会社カプコン ゲームプログラム、ゲーム装置、及びゲームシステム
JP2021053266A (ja) * 2019-10-01 2021-04-08 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP2021053421A (ja) * 2019-10-01 2021-04-08 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP2021083768A (ja) * 2019-11-28 2021-06-03 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP2021084038A (ja) * 2019-11-28 2021-06-03 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP7339571B2 (ja) 2019-10-01 2023-09-06 株式会社カプコン ゲームプログラム、ゲームシステム、及び自動運転車

Families Citing this family (69)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10262462B2 (en) * 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US10996473B2 (en) * 2014-03-26 2021-05-04 Atheer, Inc. Method and apparatus for adjusting motion-based data space manipulation
EP2933707B1 (en) * 2014-04-14 2017-12-06 iOnRoad Technologies Ltd. Head mounted display presentation adjustment
CN105094310B (zh) * 2014-05-09 2019-08-16 梦工厂动画公司 虚拟现实驾乘系统中减少晕车的方法和系统
DE102014009697A1 (de) * 2014-06-26 2015-12-31 Audi Ag Verfahren zum Betreiben eines mobilen Virtual-Reality-Systems in einem Kraftfahrzeug und mobiles Virtual-Reality-System
US11504029B1 (en) 2014-10-26 2022-11-22 David Martin Mobile control using gait cadence
US10342462B2 (en) * 2014-10-26 2019-07-09 David Martin Application of gait characteristics for mobile
US11045116B1 (en) * 2017-09-15 2021-06-29 David Martin Enhanced determination of cadence for control in mobile
DE102015003948B4 (de) 2015-03-26 2022-08-11 Audi Ag Verfahren zum Betreiben einer in einem Kraftfahrzeug angeordneten Virtual-Reality-Brille und Virtual-Reality-System
EP3096212B1 (en) * 2015-05-18 2020-01-01 DreamWorks Animation LLC Method and system for calibrating a virtual reality system
US10724874B2 (en) 2015-10-13 2020-07-28 Here Global B.V. Virtual reality environment responsive to predictive route navigation
DE102015220249A1 (de) 2015-10-16 2017-04-20 Continental Automotive Gmbh Verfahren zum automatisierten Führen eines mit einem Fahrer besetzten Kraftfahrzeugs und zur Information des Fahrers
US10969748B1 (en) * 2015-12-28 2021-04-06 Disney Enterprises, Inc. Systems and methods for using a vehicle as a motion base for a simulated experience
CN105403415B (zh) * 2015-12-29 2018-01-16 腾讯科技（深圳）有限公司 一种车辆诊断系统的数据处理方法、装置和系统
US11524242B2 (en) 2016-01-20 2022-12-13 Disney Enterprises, Inc. Systems and methods for providing customized instances of a game within a virtual space
CN108139815B (zh) * 2016-02-22 2020-11-10 谷歌有限责任公司 用于虚拟现实内容的显示的场景和对象的分立时间扭曲
EP3220233B1 (en) * 2016-03-18 2020-11-04 Volvo Car Corporation Method and system for enabling interaction in a test environment
US20170352185A1 (en) 2016-06-02 2017-12-07 Dennis Rommel BONILLA ACEVEDO System and method for facilitating a vehicle-related virtual reality and/or augmented reality presentation
CN106056973B (zh) * 2016-06-29 2020-09-11 北京小米移动软件有限公司 基于虚拟现实技术的停车引导方法及系统
CN106095653A (zh) * 2016-07-07 2016-11-09 乐视控股（北京）有限公司 虚拟现实终端的人机交互方法及装置及其终端
US10650621B1 (en) 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network
US10503245B2 (en) * 2016-09-21 2019-12-10 Apple Inc. Relative intertial measurement system
WO2018058361A1 (en) * 2016-09-28 2018-04-05 Bayerische Motoren Werke Aktiengesellschaft Method, system, display device for displaying virtual reality in vehicle, and computer program product
US10186065B2 (en) * 2016-10-01 2019-01-22 Intel Corporation Technologies for motion-compensated virtual reality
US10234937B2 (en) * 2016-10-07 2019-03-19 Panasonic Avionics Corporation Handset with virtual reality goggles
DE102016224122A1 (de) * 2016-12-05 2018-06-07 Audi Ag Verfahren zum Betreiben einer VR-Brille in einem Innenraum eines Kraftfahrzeugs sowie Steuervorrichtung und Kraftfahrzeug
DE102016225131A1 (de) * 2016-12-15 2017-11-02 Volkswagen Aktiengesellschaft Anwenderschnittstelle, Computerprogrammprodukt, Signalfolge, Fortbewegungsmittel und Verfahren zum Bereitstellen eines virtuellen Arbeitsplatzes in einem Fortbewegungsmittel
DE102016225710A1 (de) * 2016-12-21 2018-06-21 Robert Bosch Gmbh Verfahren zum Betreiben eines autonomen Fahrzeugs
DE102017200733A1 (de) * 2017-01-18 2018-07-19 Audi Ag Unterhaltungssystem für ein Kraftfahrzeug und Verfahren zum Betreiben eines Unterhaltungssystems
DE102017001787A1 (de) 2017-02-24 2017-10-19 Daimler Ag Kommunikationsvorrichtung für ein Fahrzeug und Verfahren zur Kommunikation
US10580386B2 (en) * 2017-04-21 2020-03-03 Ford Global Technologies, Llc In-vehicle projected reality motion correction
DE102017208881A1 (de) * 2017-05-05 2018-11-08 Audi Ag Mobile Sensorvorrichtung für ein in einem Fahrzeug einsetzbares am Kopf tragbares visuelles Ausgabegerät und Verfahren zum Betreiben eines Anzeigesystems
US10560735B2 (en) 2017-05-31 2020-02-11 Lp-Research Inc. Media augmentation through automotive motion
DE102017211028A1 (de) 2017-06-29 2019-01-03 Robert Bosch Gmbh Verfahren zur Warnung eines Passagiers in einem Fahrzeug
DE102017211518A1 (de) * 2017-07-06 2019-01-10 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Erzeugen einer virtuellen Umgebung für einen Benutzer in einem Fahrzeug, entsprechendes Virtual-Reality-System sowie Fahrzeug
DE102017211520A1 (de) 2017-07-06 2019-01-10 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Erzeugen einer virtuellen Umgebung für einen Benutzer in einem Fahrzeug, entsprechendes Virtual-Realitysystem sowie Fahrzeug
DE102017211521A1 (de) 2017-07-06 2019-01-10 Bayerische Motoren Werke Aktiengesellschaft Steuerung von Fahrzeugfunktionen aus einer virtuellen Realität
JP2019014450A (ja) * 2017-07-10 2019-01-31 トヨタ自動車株式会社 車両用表示装置
CN107300475B (zh) * 2017-08-11 2019-06-25 西华大学 一种汽车人机工程学视野校核系统
ES2704373B2 (es) * 2017-09-15 2020-05-29 Seat Sa Método y sistema para mostrar información de realidad virtual en un vehículo
DE102017217025A1 (de) * 2017-09-26 2019-03-28 Audi Ag Verfahren und System zum Durchführen eines virtuellen Treffens zwischen wenigstens einer ersten Person und einer zweiten Person
DE102017217592A1 (de) * 2017-10-04 2019-04-04 Audi Ag Kinetosefreies Betrachten eines digitalen Inhalts in einem Fahrzeug
DE102017218352A1 (de) 2017-10-13 2019-04-18 Audi Ag Tragbare Vorrichtung zur Reduzierung von simulatorkrankheitsbedingten Störungen bei Verwendung einer elektronischen Datenbrille in einem Fahrzeug
DE102017219468B4 (de) 2017-11-01 2023-06-22 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Nutzung einer Virtual-Reality-Einrichtung
US10970560B2 (en) 2018-01-12 2021-04-06 Disney Enterprises, Inc. Systems and methods to trigger presentation of in-vehicle content
DE102018204325A1 (de) * 2018-03-21 2019-09-26 Bayerische Motoren Werke Aktiengesellschaft Verfahren, Vorrichtung und Fortbewegungsmittel für eine kinetosevermeidende, virtuelle Darstellung von Multimediainhalten in einem Fortbewegungsmittel
DE102018206658A1 (de) * 2018-04-30 2019-10-31 Audi Ag Verfahren zum Betreiben einer elektronischen Datenbrille in einem Kraftfahrzeug und elektronische Datenbrille
CN108741287A (zh) * 2018-05-09 2018-11-06 盐城市寻球远志科技有限公司 一种可进行vr全触感体验的穿戴式球服
US11107281B2 (en) * 2018-05-18 2021-08-31 Valeo Comfort And Driving Assistance Shared environment for vehicle occupant and remote user
DE102018210390B4 (de) 2018-06-26 2023-08-03 Audi Ag Verfahren zum Betreiben einer Anzeigeeinrichtung in einem Kraftfahrzeug und Anzeigesystem für ein Kraftfahrzeug
CN109003335A (zh) * 2018-07-05 2018-12-14 上海思致汽车工程技术有限公司 一种基于vr技术的虚拟驾驶感知系统及其场景生成方法
DE102018216383B4 (de) 2018-09-25 2023-12-07 Audi Ag Verfahren und Steuereinrichtung zum Betreiben einer am Kopf tragbaren Anzeigeeinrichtung in einem Kraftfahrzeug
KR20200057480A (ko) * 2018-11-16 2020-05-26 삼성전자주식회사 증강 현실 제어 장치, 이를 이용한 증강 현실 구현 방법, 및 이를 포함하는 증강 현실 구현 시스템
US11688297B2 (en) 2018-11-19 2023-06-27 The Boeing Company Virtual reality with virtualization in trainers and test environments
DE102019122632A1 (de) * 2019-08-22 2021-02-25 Bayerische Motoren Werke Aktiengesellschaft Anzeigesystem für ein Kraftfahrzeug
CN110488979A (zh) * 2019-08-23 2019-11-22 北京枭龙科技有限公司 一种基于增强现实的汽车展示系统
DE102019124386A1 (de) * 2019-09-11 2021-03-11 Audi Ag Verfahren zum Betreiben einer Virtual-Reality-Brille in einem Fahrzeug sowie Virtual-Reality-System mit einer Virtual-Reality-Brille und einem Fahrzeug
JP7384014B2 (ja) * 2019-12-06 2023-11-21 トヨタ自動車株式会社 表示システム
CN111127621B (zh) * 2019-12-31 2024-02-09 歌尔科技有限公司 画面渲染方法、装置和可读存储介质
CN111368424B (zh) * 2020-03-03 2023-09-01 阿波罗智能技术(北京)有限公司 一种车辆仿真方法、装置、设备及介质
CN111508046B (zh) * 2020-03-13 2023-08-22 重庆利龙中宝智能技术有限公司 一种基于OpenGL的车辆报警图标绘制方法、系统及存储介质
US11076276B1 (en) 2020-03-13 2021-07-27 Disney Enterprises, Inc. Systems and methods to provide wireless communication between computing platforms and articles
KR20210145485A (ko) * 2020-05-25 2021-12-02 (주)이머시브캐스트 인카 클라우드 vr 장치 및 방법
US11853232B2 (en) 2020-07-30 2023-12-26 Sony Group Corporation Device, method and computer program
US11571622B2 (en) * 2020-08-12 2023-02-07 GM Global Technology Operations LLC In-vehicle gaming systems and methods
DE102020126953B3 (de) * 2020-10-14 2021-12-30 Bayerische Motoren Werke Aktiengesellschaft System und Verfahren zum Erfassen einer räumlichen Orientierung einer tragbaren Vorrichtung
CN112506351A (zh) * 2020-12-23 2021-03-16 武汉小绿人动力技术股份有限公司 一种室外赛车场内沉浸式赛车系统及控制方法
JP7473489B2 (ja) * 2021-01-15 2024-04-23 トヨタ紡織株式会社 出力制御装置、出力制御システム、および制御方法
WO2023048605A1 (en) * 2021-09-22 2023-03-30 Telefonaktiebolaget Lm Ericsson (Publ) Virtual reality game experience in self-driving vehicle

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013257716A (ja) * 2012-06-12 2013-12-26 Sony Computer Entertainment Inc 障害物回避装置および障害物回避方法

Family Cites Families (87)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6513833B2 (en) * 1992-05-05 2003-02-04 Automotive Technologies International, Inc. Vehicular occupant motion analysis system
US5615132A (en) * 1994-01-21 1997-03-25 Crossbow Technology, Inc. Method and apparatus for determining position and orientation of a moveable object using accelerometers
US5583526A (en) 1995-07-28 1996-12-10 Chrysler Corporation Hand calibration system for virtual reality vehicle simulator
US6004243A (en) * 1995-10-11 1999-12-21 Ewert; Bruce Dynamic real time exercise video apparatus and method
US6116744A (en) 1996-04-04 2000-09-12 Omniplanar, Inc. Method and apparatus for illuminating retroreflective and other objects
WO1998026598A1 (fr) 1996-12-09 1998-06-18 Sony Corporation Dispositif de prise de vues d'objets mobiles
US6005578A (en) 1997-09-25 1999-12-21 Mindsphere, Inc. Method and apparatus for visual navigation of information objects
US7979173B2 (en) 1997-10-22 2011-07-12 Intelligent Technologies International, Inc. Autonomous vehicle travel control systems and methods
US6546119B2 (en) 1998-02-24 2003-04-08 Redflex Traffic Systems Automated traffic violation monitoring and reporting system
US6042533A (en) * 1998-07-24 2000-03-28 Kania; Bruce Apparatus and method for relieving motion sickness
AU2154000A (en) * 1998-12-07 2000-06-26 Universal City Studios, Inc. Image correction method to compensate for point of view image distortion
US7000469B2 (en) * 2000-04-21 2006-02-21 Intersense, Inc. Motion-tracking
US7375728B2 (en) * 2001-10-01 2008-05-20 University Of Minnesota Virtual mirror
US6441748B1 (en) 2001-04-02 2002-08-27 Yokogawa Electric Corporation Road surface condition monitoring system using sensors disposed under the road
US6882287B2 (en) 2001-07-31 2005-04-19 Donnelly Corporation Automotive lane change aid
US6983283B2 (en) 2001-10-03 2006-01-03 Sun Microsystems, Inc. Managing scene graph memory using data staging
NL1019989C2 (nl) 2002-02-18 2003-08-19 Tno Werkwijze ter preventie van bewegingsziekte, alsmede inrichting voor het detecteren en signaleren van potentieel ziekmakende bewegingen.
US7301547B2 (en) 2002-03-22 2007-11-27 Intel Corporation Augmented reality system
DE10245334A1 (de) 2002-09-27 2004-04-08 Robert Bosch Gmbh Navigationsvorrichtung
US7693702B1 (en) 2002-11-01 2010-04-06 Lockheed Martin Corporation Visualizing space systems modeling using augmented reality
US7128705B2 (en) * 2002-11-26 2006-10-31 Artis Llc Motion-coupled visual environment for prevention or reduction of motion sickness and simulator/virtual environment sickness
US6932090B1 (en) * 2003-02-06 2005-08-23 The United States Of America As Represented By The United States National Aeronautics And Space Administration Motion sickness treatment apparatus and method
ATE395577T1 (de) 2003-02-26 2008-05-15 Tomtom Int Bv Navigationseinrichtung und verfahren zum austausch von daten zwischen residenten anwendungen
US7233861B2 (en) * 2003-12-08 2007-06-19 General Motors Corporation Prediction of vehicle operator destinations
US8965460B1 (en) * 2004-01-30 2015-02-24 Ip Holdings, Inc. Image and augmented reality based networks using mobile devices and intelligent electronic glasses
JP5008556B2 (ja) 2004-06-03 2012-08-22 メイキング バーチャル ソリッド，エル．エル．シー． ヘッドアップ表示を使用する途上ナビゲーション表示方法および装置
JP4899340B2 (ja) * 2004-08-02 2012-03-21 日産自動車株式会社 運転感覚調整装置及び運転感覚調整方法
US20060262140A1 (en) 2005-05-18 2006-11-23 Kujawa Gregory A Method and apparatus to facilitate visual augmentation of perceived reality
US20090002142A1 (en) 2006-01-25 2009-01-01 Akihiro Morimoto Image Display Device
US7918781B1 (en) * 2006-03-22 2011-04-05 The United States Of America As Represented By The Secretary Of The Army Systems and methods for suppressing motion sickness
GB2440958A (en) 2006-08-15 2008-02-20 Tomtom Bv Method of correcting map data for use in navigation systems
WO2008056972A1 (en) 2006-11-06 2008-05-15 Tele Atlas B.V. Arrangement for and method of two dimensional and three dimensional precision location and orientation determination
KR100843093B1 (ko) * 2006-11-28 2008-07-02 삼성전자주식회사 움직임에 따라 컨텐츠를 디스플레이하는 장치 및 방법
US20080183344A1 (en) 2007-01-30 2008-07-31 Arinc Inc. Systems and methods for communicating restricted area alerts
US20090079555A1 (en) 2007-05-17 2009-03-26 Giadha Aguirre De Carcer Systems and methods for remotely configuring vehicle alerts and/or controls
US20080310707A1 (en) 2007-06-15 2008-12-18 Microsoft Corporation Virtual reality enhancement using real world data
US20090112452A1 (en) 2007-10-25 2009-04-30 Gm Global Technology Operations, Inc. Vehicle navigation system with real time traffic image display
US8264505B2 (en) 2007-12-28 2012-09-11 Microsoft Corporation Augmented reality and filtering
US8374743B2 (en) 2008-05-16 2013-02-12 GM Global Technology Operations LLC Method and apparatus for driver control of a limited-ability autonomous vehicle
US20100053151A1 (en) * 2008-09-02 2010-03-04 Samsung Electronics Co., Ltd In-line mediation for manipulating three-dimensional content on a display device
DE112009001896A5 (de) 2008-10-22 2011-05-05 Continental Teves Ag & Co. Ohg Verfahren und Vorrichtung zur automatischen Fahrtrichtungsanzeige
US8359149B2 (en) * 2009-02-03 2013-01-22 GM Global Technology Operations LLC Method for integrating multiple feature adaptive cruise control
US8395529B2 (en) 2009-04-02 2013-03-12 GM Global Technology Operations LLC Traffic infrastructure indicator on head-up display
US8352112B2 (en) 2009-04-06 2013-01-08 GM Global Technology Operations LLC Autonomous vehicle management
US8977489B2 (en) 2009-05-18 2015-03-10 GM Global Technology Operations LLC Turn by turn graphical navigation on full windshield head-up display
DE102009027026A1 (de) 2009-06-18 2010-12-23 Robert Bosch Gmbh Verfahren und Steuergerät zum Bereitstellen einer virtuellen Fahrlinienmarkierung
US20100321572A1 (en) * 2009-06-18 2010-12-23 Honeywell International Inc. System and method for image stabilization
US8380362B2 (en) 2009-07-10 2013-02-19 The Boeing Company Systems and methods for remotely collaborative vehicles
US9728006B2 (en) 2009-07-20 2017-08-08 Real Time Companies, LLC Computer-aided system for 360° heads up display of safety/mission critical data
US8972870B2 (en) 2009-08-27 2015-03-03 International Business Machines Corporation Providing alternative representations of virtual content in a virtual universe
US8687070B2 (en) 2009-12-22 2014-04-01 Apple Inc. Image capture device having tilt and/or perspective correction
US20110183301A1 (en) * 2010-01-27 2011-07-28 L-3 Communications Corporation Method and system for single-pass rendering for off-axis view
US8890774B2 (en) * 2010-02-09 2014-11-18 Disney Enterprises, Inc. Heads-up display for a gaming environment
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US20130278631A1 (en) * 2010-02-28 2013-10-24 Osterhout Group, Inc. 3d positioning of augmented reality information
US9134534B2 (en) * 2010-02-28 2015-09-15 Microsoft Technology Licensing, Llc See-through near-eye display glasses including a modular image source
US9994228B2 (en) * 2010-05-14 2018-06-12 Iarmourholdings, Inc. Systems and methods for controlling a vehicle or device in response to a measured human response to a provocative environment
US9298985B2 (en) 2011-05-16 2016-03-29 Wesley W. O. Krueger Physiological biosensor system and method for controlling a vehicle or powered equipment
US9043106B2 (en) * 2010-10-04 2015-05-26 W. Morrison Consulting Group, Inc. Vehicle control system and methods
TW201215442A (en) 2010-10-06 2012-04-16 Hon Hai Prec Ind Co Ltd Unmanned Aerial Vehicle control system and method
KR101544524B1 (ko) 2010-12-16 2015-08-17 한국전자통신연구원 차량용 증강현실 디스플레이 시스템 및 차량용 증강현실 디스플레이 방법
US8924150B2 (en) 2010-12-29 2014-12-30 GM Global Technology Operations LLC Vehicle operation and control system for autonomous vehicles on full windshield display
US9008904B2 (en) 2010-12-30 2015-04-14 GM Global Technology Operations LLC Graphical vehicle command system for autonomous vehicles on full windshield head-up display
US20120224060A1 (en) * 2011-02-10 2012-09-06 Integrated Night Vision Systems Inc. Reducing Driver Distraction Using a Heads-Up Display
US9082208B2 (en) 2011-07-12 2015-07-14 Spirit Aerosystems, Inc. System and method for locating and displaying aircraft information
US8692739B2 (en) * 2011-09-22 2014-04-08 GM Global Technology Operations LLC Dynamic information presentation on full windshield head-up display
US20130083061A1 (en) * 2011-09-30 2013-04-04 GM Global Technology Operations LLC Front- and rear- seat augmented reality vehicle game system to entertain & educate passengers
US8941690B2 (en) * 2011-12-09 2015-01-27 GM Global Technology Operations LLC Projected rear passenger entertainment system
US8811938B2 (en) 2011-12-16 2014-08-19 Microsoft Corporation Providing a user interface experience based on inferred vehicle state
US9443429B2 (en) 2012-01-24 2016-09-13 GM Global Technology Operations LLC Optimum gaze location on full windscreen display
US9001153B2 (en) * 2012-03-21 2015-04-07 GM Global Technology Operations LLC System and apparatus for augmented reality display and controls
JP6062041B2 (ja) 2012-05-07 2017-01-18 本田技研工業株式会社 道路を基準にした風景のビデオ画像から仮想表示面を生成する方法
US9058681B2 (en) * 2012-06-01 2015-06-16 The Boeing Company Sensor-enhanced localization in virtual and physical environments
IN2015KN00682A (ja) * 2012-09-03 2015-07-17 Sensomotoric Instr Ges Für Innovative Sensorik Mbh
US9266018B2 (en) 2012-11-08 2016-02-23 Audible, Inc. Customizable in-vehicle gaming system
US9247779B1 (en) 2012-11-08 2016-02-02 Peter Aloumanis Enhanced global positioning system (GPS) based functionality for helmets
US8457880B1 (en) 2012-11-28 2013-06-04 Cambridge Mobile Telematics Telematics using personal mobile devices
WO2014100484A1 (en) * 2012-12-19 2014-06-26 HeadsUp Technologies, Inc. Methods and systems for managing motion sickness
US9118911B2 (en) 2013-02-07 2015-08-25 Delphi Technologies, Inc. Variable disparity three-dimensional (3D) display system and method of operating the same
US8708884B1 (en) 2013-03-11 2014-04-29 The United States Of America As Represented By The Secretary Of The Army Systems and methods for adaptive mitigation of motion sickness
US9047703B2 (en) 2013-03-13 2015-06-02 Honda Motor Co., Ltd. Augmented reality heads up display (HUD) for left turn safety cues
US10655979B2 (en) * 2013-06-08 2020-05-19 Apple Inc. User interface for displaying predicted destinations
US10339711B2 (en) 2013-03-15 2019-07-02 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues
US9805508B1 (en) * 2013-04-01 2017-10-31 Marvell International Ltd Active augmented reality display enhancement
US9280202B2 (en) * 2013-05-10 2016-03-08 Magna Electronics Inc. Vehicle vision system
JP6149543B2 (ja) 2013-06-28 2017-06-21 アイシン・エィ・ダブリュ株式会社 ヘッドアップディスプレイ装置
US10332405B2 (en) 2013-12-19 2019-06-25 The United States Of America As Represented By The Administrator Of Nasa Unmanned aircraft systems traffic management

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013257716A (ja) * 2012-06-12 2013-12-26 Sony Computer Entertainment Inc 障害物回避装置および障害物回避方法

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2016189572A1 (ja) * 2015-05-27 2018-03-08 泉陽興業株式会社 遊戯施設
WO2016189572A1 (ja) * 2015-05-27 2016-12-01 泉陽興業株式会社 遊戯施設
JP2018529101A (ja) * 2015-09-17 2018-10-04 バイドゥ オンライン ネットワーク テクノロジー （ベイジン） カンパニー リミテッド ナビゲーション画像の描画方法、装置及び記憶媒体
US10724873B2 (en) 2015-09-17 2020-07-28 Baidu Online Network Technology (Beijing) Co., Ltd. Method and apparatus for rendering navigation image and storage medium
US11112857B2 (en) 2017-04-28 2021-09-07 Sony Interactive Entertainment Inc. Information processing apparatus, information processing method, and program
WO2018198909A1 (ja) * 2017-04-28 2018-11-01 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理方法及びプログラム
JPWO2018198909A1 (ja) * 2017-04-28 2019-11-07 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理方法及びプログラム
KR20200062287A (ko) * 2017-10-12 2020-06-03 아우디 아게 헤드 마운티드 전자 디스플레이 장치를 작동하기 위한 방법 및 가상 콘텐츠를 디스플레이하기 위한 디스플레이 시스템
KR102382718B1 (ko) 2017-10-12 2022-04-08 아우디 아게 헤드 마운티드 전자 디스플레이 장치를 작동하기 위한 방법 및 가상 콘텐츠를 디스플레이하기 위한 디스플레이 시스템
JP2020087448A (ja) * 2018-11-30 2020-06-04 サムスン・シー・アンド・ティー・コーポレーション 遊園地で乗り物を稼動する間にイメージを視角化する装置、方法、及びイメージ視角化装置を管理する装置及び方法
JP2021040871A (ja) * 2019-09-10 2021-03-18 株式会社カプコン ゲームプログラム、ゲーム装置、及びゲームシステム
JP2021126529A (ja) * 2019-10-01 2021-09-02 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP2021053421A (ja) * 2019-10-01 2021-04-08 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP7017702B2 (ja) 2019-10-01 2022-02-09 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP2021053266A (ja) * 2019-10-01 2021-04-08 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP7168858B2 (ja) 2019-10-01 2022-11-10 株式会社カプコン ゲームプログラム、自動運転車、及びゲームシステム
JP7339571B2 (ja) 2019-10-01 2023-09-06 株式会社カプコン ゲームプログラム、ゲームシステム、及び自動運転車
JP2021083768A (ja) * 2019-11-28 2021-06-03 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP2021084038A (ja) * 2019-11-28 2021-06-03 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム

Also Published As

Publication number Publication date
US10754421B2 (en) 2020-08-25
US9547173B2 (en) 2017-01-17
US10437322B2 (en) 2019-10-08
JP6497884B2 (ja) 2019-04-10
US20150097861A1 (en) 2015-04-09
US20190163264A1 (en) 2019-05-30
US20190163265A1 (en) 2019-05-30
US20190163263A1 (en) 2019-05-30
US20190163262A1 (en) 2019-05-30
US20150097860A1 (en) 2015-04-09
US20170139473A1 (en) 2017-05-18
DE102014220053A1 (de) 2015-07-23
US9599819B2 (en) 2017-03-21
US10635164B2 (en) 2020-04-28
US10261576B2 (en) 2019-04-16
US10817048B2 (en) 2020-10-27

Similar Documents

Publication Publication Date Title
JP6497884B2 (ja) 車載動的バーチャルリアリティのためのシステム及び方法
US10638106B2 (en) System and method for dynamic in-vehicle virtual reality
US10453260B2 (en) System and method for dynamic in-vehicle virtual reality
US10850744B2 (en) System and method for dynamic in-vehicle virtual reality
US11657263B2 (en) Neural network based determination of gaze direction using spatial models
US11682272B2 (en) Systems and methods for pedestrian crossing risk assessment and directional warning
EP3220233B1 (en) Method and system for enabling interaction in a test environment
JP2023165383A (ja) 機械学習モデルのためのデータ・セット生成及び拡張
US20240092390A1 (en) Virtual agent trajectory prediction and traffic modeling for machine simulation systems and applications

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170929

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20181005

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190204

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190312

R150 Certificate of patent or registration of utility model

Ref document number: 6497884

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees