JP2020144332A - 仮想現実システムおよび仮想現実方法 - Google Patents

仮想現実システムおよび仮想現実方法 Download PDF

Info

Publication number
JP2020144332A
JP2020144332A JP2019042856A JP2019042856A JP2020144332A JP 2020144332 A JP2020144332 A JP 2020144332A JP 2019042856 A JP2019042856 A JP 2019042856A JP 2019042856 A JP2019042856 A JP 2019042856A JP 2020144332 A JP2020144332 A JP 2020144332A
Authority
JP
Japan
Prior art keywords
vehicle
data
behavior
virtual reality
acquisition device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019042856A
Other languages
English (en)
Inventor
井上　直也
Naoya Inoue
直也 井上
泰正 中島
Yasumasa Nakajima
泰正 中島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Toyota Motor Corp
Original Assignee
Nikon Corp
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp, Toyota Motor Corp filed Critical Nikon Corp
Priority to JP2019042856A priority Critical patent/JP2020144332A/ja
Priority to US16/750,296 priority patent/US20200286398A1/en
Priority to EP20155700.6A priority patent/EP3705162A1/en
Publication of JP2020144332A publication Critical patent/JP2020144332A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/052—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles characterised by provision for recording or measuring trainee's performance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/803—Driving vehicles or craft, e.g. cars, airplanes, ships, robots or tanks
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/05—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles the view from a vehicle being simulated
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0183—Adaptation to parameters characterising the motion of the vehicle

Abstract

【課題】車両走行の疑似体験時における臨場感を向上させることが可能な仮想現実システムを提供する。【解決手段】仮想現実システム１００は、ユーザに車両走行を疑似体験させるものであり、車両５０に搭載され、車両５０の走行時に車両５０の周囲を撮像する撮像装置１と、車両５０に搭載され、車両５０の走行時に車両５０の挙動を取得する取得装置２と、撮像装置１により撮像された映像データと、取得装置２により取得された挙動データとを格納するとともに、映像データおよび挙動データを時間同期させるコンピュータ３と、映像データを再生するＨＭＤ４と、挙動データを再生するシート装置５とを備える。【選択図】図１

Description

本発明は、仮想現実システムおよび仮想現実方法に関する。
従来、車両搭乗状態を疑似体験させるシミュレーション装置が知られている（たとえば、特許文献１参照）。
特許文献１のシミュレーション装置は、車両走行旋回中の運転視界評価を目的として評価者に車両搭乗状態を疑似体験させるように構成されている。このシミュレーション装置は、三次元立体映像を運転視界として評価者に提示するヘッドマウントディスプレイと、車両挙動に基づく運転感覚を評価者に付与するドライビングシミュレータ本体と、走行音などを出力するスピーカとを備えている。
特開平７−２７１２８９号公報
ここで、上記した従来のシミュレーション装置では、車両搭乗状態を疑似体験させることが可能であるが、臨場感を向上させることについて改善の余地がある。
本発明は、上記の課題を解決するためになされたものであり、本発明の目的は、車両走行の疑似体験時における臨場感を向上させることが可能な仮想現実システムおよび仮想現実方法を提供することである。
本発明による仮想現実システムは、ユーザに車両走行を疑似体験させるものであり、車両に搭載され、車両の走行時に車両の周囲を撮像する撮像装置と、車両に搭載され、車両の走行時に車両の挙動を取得する取得装置と、撮像装置により撮像された映像データと、取得装置により取得された挙動データとを格納するとともに、映像データおよび挙動データを時間同期させるコンピュータと、映像データを再生する第１再生装置と、挙動データを再生する第２再生装置とを備える。
このように構成することによって、現実の車両を実際に走行させながら映像および挙動が取得され、その映像データおよび挙動データが再生されることにより、現実に即した映像および挙動が再現されるので、車両走行の疑似体験時における臨場感を向上させることができる。また、映像データおよび挙動データが時間同期されることにより、第１再生装置で再生される映像と、第２再生装置で再生される挙動とがずれないようにすることができる。
上記仮想現実システムにおいて、取得装置は、車両の走行時に車両のメータ情報を取得するように構成され、コンピュータは、取得装置により取得されたメータ表示用データを格納するとともに、メータ表示用データを映像データおよび挙動データと時間同期させるように構成され、第１再生装置は、メータ表示用データを再生可能に構成されていてもよい。
このように構成すれば、メータ表示用データが再生されることにより、ユーザが車両の状態を容易に把握することができる。
上記仮想現実システムにおいて、撮像装置は、車両の周囲を３６０度の範囲で撮像可能に構成されていてもよい。
このように構成すれば、車両の周囲を全て再現可能になり、臨場感をより向上させることができる。
上記仮想現実システムにおいて、取得装置は、車両の車載ネットワークから車両の挙動を取得するように構成されていてもよい。
このように構成すれば、車両の正確な挙動を取得することができるので、臨場感をより向上させることができる。
本発明による仮想現実方法は、ユーザに車両走行を疑似体験させるものであり、車両の走行時に、車両に搭載された撮像装置により車両の周囲を撮像するとともに、車両に搭載された取得装置により車両の挙動を取得するステップと、撮像装置により撮像された映像データと、取得装置により取得された挙動データとをコンピュータに格納するステップと、コンピュータにより映像データおよび挙動データを時間同期させるステップと、第１再生装置により映像データを再生するとともに、第２再生装置により挙動データを再生するステップとを備える。
このように構成することによって、現実の車両を実際に走行させながら映像および挙動が取得され、その映像データおよび挙動データが再生されることにより、現実に即した映像および挙動が再現されるので、車両走行の疑似体験時における臨場感を向上させることができる。また、映像データおよび挙動データが時間同期されることにより、第１再生装置で再生される映像と、第２再生装置で再生される挙動とがずれないようにすることができる。
本発明の仮想現実システムおよび仮想現実方法によれば、車両走行の疑似体験時における臨場感を向上させることができる。
本実施形態による仮想現実システムの概略構成を示したブロック図である。 図１の仮想現実システムの撮像装置を説明するためのブロック図である。 図１の仮想現実システムの取得装置を説明するためのブロック図である。 図１の仮想現実システムのヘッドマウントディスプレイを説明するためのブロック図である。 図１の仮想現実システムのシート装置を説明するためのブロック図である。 本実施形態の仮想現実システムにおけるデータ生成時の撮像装置の動作例を説明するためのフローチャートである。 本実施形態の仮想現実システムにおけるデータ生成時の取得装置の動作例を説明するためのフローチャートである。 本実施形態の仮想現実システムにおけるデータ再生時の動作例を説明するためのフローチャートである。
以下、本発明の一実施形態を図面に基づいて説明する。
まず、図１〜図５を参照して、本発明の一実施形態による仮想現実システム１００の構成について説明する。
仮想現実システム１００は、ユーザに車両走行を疑似体験させることが可能なように構成されている。この仮想現実システム１００は、図１に示すように、疑似体験時に再生されるデータを生成（収集）するための撮像装置１および取得装置２と、生成されたデータを保管するコンピュータ３と、保管されたデータを再生してユーザに疑似体験させるヘッドマウントディスプレイ（以下、「ＨＭＤ」という）４およびシート装置５とを備えている。撮像装置１、取得装置２、コンピュータ３、ＨＭＤ４およびシート装置５は、ネットワーク１５０を介して接続されている。
［撮像装置］
撮像装置１は、ユーザに疑似体験させる車両走行が行われる車両５０に搭載され、その車両５０の走行時に車両５０の周囲を撮像するように構成されている。撮像装置１は、図２に示すように、撮像部１ａと、マイク１ｂと、制御部１ｃと、通信部１ｄとを含んでいる。
撮像部１ａは、車両５０の周囲を３６０度の範囲で撮像可能に構成されている。撮像部１ａは、たとえば、図示省略した２組の広角レンズおよび撮像素子を有し、２組の広角レンズおよび撮像素子がそれぞれ前後を向くように配置されている。そして、２組の広角レンズおよび撮像素子による２つの撮像結果が制御部１ｃによって合成されることにより、映像データが生成されるようになっている。映像データは、車両５０の周囲の３６０度を撮影した動画データである。撮像部１ａは、たとえば車室内の助手席に設置されている。
マイク１ｂは、たとえば車室内の助手席に設置され、車両走行時の車室内の音を収集するために設けられている。マイク１ｂに入力される音に基づいて、制御部１ｃにより音声データが生成されるようになっている。
制御部１ｃは、撮像装置１を制御するように構成されている。具体的には、制御部１ｃは、撮像部１ａの撮像結果に基づいて映像データを生成するとともに、マイク１ｂへの入力に基づいて音声データを生成する機能を有する。そして、制御部１ｃは、映像データおよび音声データを関連付けして、その映像データおよび音声データをコンピュータ３に送信するように構成されている。また、制御部１ｃは、撮像部１ａおよびマイク１ｂに対して映像および音声の記録の開始および終了を指示するとともに、記録開始時刻を映像データおよび音声データに付加するようになっている。このため、映像データは、記録が開始されてから終了されるまでの動画データであり、音声データは、記録が開始されてから終了されるまでの音声データ（動画の記録期間中の音声データ）である。
通信部１ｄは、ネットワーク１５０を介してコンピュータ３と通信可能であり、映像データおよび音声データをコンピュータ３に送信するために設けられている。
［取得装置］
取得装置２は、ユーザに疑似体験させる車両走行が行われる車両５０に搭載され、その車両５０の走行時に車両５０の挙動およびメータ情報を取得するように構成されている。取得装置２は、図３に示すように、取得端末２１と、通信機２２とを含んでいる。取得端末２１は、車両５０の車載ネットワーク５１に接続され、その車載ネットワーク５１から車両５０の挙動およびメータ情報を取得するように構成されている。
ここで、車両５０の車載ネットワーク５１は、ゲートウェイＥＣＵ（以下、「ＧＷ−ＥＣＵ」という）５２と、ＧＷ−ＥＣＵ５２に接続される複数のバス５３とを含んでいる。各バス５３には、複数のＥＣＵ５４が接続されている。
ＥＣＵ５４は、車両５０の各部を制御するように構成されている。バス５３は、ＥＣＵ５４が通信する際の伝送路であり、通信プロトコルとしてたとえばＣＡＮ（Controller Area Network）が用いられる。ＧＷ−ＥＣＵ５２は、複数のバス５３間で通信を中継するために設けられている。
そして、ＥＣＵ５４がバス５３にメッセージを送信した場合には、そのバス５３に接続される送信元以外のＥＣＵ５４がメッセージを受信するとともに、ＧＷ−ＥＣＵ５２によりメッセージがその他のバス５３に転送され、その他のバス５３に接続されるＥＣＵ５４がメッセージを受信する。すなわち、車載ネットワーク５１では、ＧＷ−ＥＣＵ５２によってメッセージが中継されることから、異なるバス５３に接続されるＥＣＵ５４間でも通信可能である。そして、ＥＣＵ５４は、車両５０に関する情報をメッセージとしてバス５３に送信するように構成されている。車両５０に関する情報には、車両５０の挙動およびメータに関する情報が含まれている。
取得端末２１は、取得端末２１を制御するマイコン２１ａと、マイコン２１ａに接続されるトランシーバ２１ｂおよび入出力部２１ｃとを含んでいる。トランシーバ２１ｂには、車載ネットワーク５１のバス５３が接続され、入出力部２１ｃには、通信機２２などが接続されている。
マイコン２１ａは、ＥＣＵ５４からバス５３に車両５０の挙動およびメータに関する情報が送信された場合に、トランシーバ２１ｂを介して車両５０の挙動およびメータに関する情報を取得するように構成されている。車両５０の挙動に関する情報には、たとえば、車両５０についての前後加速度、横加速度、上下加速度、ロール角度、ピッチ角度、および、ヨー角度が含まれている。メータに関する情報には、たとえば、車速および変速段が含まれている。
そして、マイコン２１ａは、車載ネットワーク５１上の車両５０の挙動に関する情報に基づいて挙動データを生成するとともに、車載ネットワーク５１上の車両５０のメータに関する情報に基づいてメータ表示用データを生成するように構成されている。また、マイコン２１ａは、挙動およびメータ情報の記録の開始および終了を指示するとともに、記録開始時刻を挙動データおよびメータ表示用データに付加するようになっている。このため、挙動データは、たとえば、記録が開始されてから終了されるまでの前後加速度、横加速度、上下加速度、ロール角度、ピッチ角度、および、ヨー角度の経時変化によって構成されている。また、メータ表示用データは、たとえば、記録が開始されてから終了されるまでの車速および変速段の経時変化によって構成されている。そして、マイコン２１ａは、挙動データおよびメータ表示用データを入出力部２１ｃから通信機２２に出力する機能を有する。
通信機２２は、ネットワーク１５０を介してコンピュータ３と通信可能であり、挙動データおよびメータ表示用データをコンピュータ３に送信するために設けられている。
［コンピュータ］
コンピュータ３は、撮像装置１から受信した映像データおよび音声データと、取得装置２から受信した挙動データおよびメータ表示用データとを格納するために設けられている。映像データ、音声データ、挙動データおよびメータ表示用データは、現実の車両５０の実際の走行時に取得されたデータであり、ユーザの車両走行の疑似体験時に再生されるデータである。また、コンピュータ３は、格納された映像データ、音声データおよびメータ表示用データをＨＭＤ４に送信するとともに、格納された挙動データをシート装置５に送信する機能も有する。コンピュータ３は、映像データ、音声データ、挙動データおよびメータ表示用データを時間同期させて送信するように構成されている。
このコンピュータ３は、図１に示すように、制御部３ａと記憶部３ｂと通信部３ｃとを含んでいる。制御部３ａは、演算処理を実行することによりコンピュータ３を制御するように構成されている。記憶部３ｂには、撮像装置１および取得装置２から受信したデータなどが記憶されている。すなわち、記憶部３ｂには、映像データ、音声データ、挙動データおよびメータ表示用データが記憶されている。通信部３ｃは、ネットワーク１５０を介して撮像装置１、取得装置２、ＨＭＤ４およびシート装置５と通信するために設けられている。
［ＨＭＤ］
ＨＭＤ４は、車両走行を疑似体験するユーザの頭部に装着され、映像および音声を再生するように構成されている。このＨＭＤ４は、図４に示すように、表示部４ａと、スピーカ４ｂと、制御部４ｃと、センサ４ｄと、通信部４ｅとを含んでいる。なお、ＨＭＤ４は、本発明の「第１再生装置」の一例である。
表示部４ａは、コンピュータ３から受信した映像データに基づいて映像を表示するように構成されている。すなわち、表示部４ａには、車両５０の走行時に撮像部１ａによって撮影された映像が再現される。また、表示部４ａには、車速および変速段を示すメータが映像にオーバーレイ表示され、コンピュータ３から受信したメータ表示用データに基づいてメータの数値が調整されるようになっている。すなわち、車両５０の走行時のメータ情報が再現される。
スピーカ４ｂは、コンピュータ３から受信した音声データに基づいて音声を出力するように構成されている。すなわち、車両５０の走行時にマイク１ｂに入力された音声がスピーカ４ｂから再現される。
制御部４ｃは、ＨＭＤ４を制御するように構成されている。具体的には、制御部４ｃは、表示部４ａの表示制御を行うとともに、スピーカ４ｂの出力制御を行うように構成されている。センサ４ｄは、ユーザの頭部の位置および向きを検出するために設けられている。そして、制御部４ｃは、センサ４ｄの検出結果に応じて、表示部４ａに表示される映像を調整する機能を有する。たとえば、ユーザが頭部を動かすことにより視界が移動（変更）される場合には、そのユーザの頭部の動きに応じて表示部４ａに表示される映像が変更（映像データのうち表示部４ａに表示される範囲が変更）されるようになっている。
通信部４ｅは、ネットワーク１５０を介してコンピュータ３と通信可能であり、映像データ、音声データおよびメータ表示用データをコンピュータ３から受信するために設けられている。
［シート装置］
シート装置５は、車両走行を疑似体験するユーザが着座可能であり、挙動を再生するように構成されている。このシート装置５は、たとえば、スチュワートプラットフォーム型のパラレルリンク機構を有しており、シート５ａを６自由度で移動可能になっている。すなわち、シート装置５は、Ｘ軸方向、Ｙ軸方向、Ｚ軸方向、Ｘ軸周り方向、Ｙ軸周り方向およびＺ軸周り方向にシート５ａを移動可能に構成されている。シート装置５は、図５に示すように、シート５ａと、６つのアクチュエータ５ｂと、制御部５ｃと、通信部５ｄとを含んでいる。なお、シート装置５は、本発明の「第２再生装置」の一例である。
シート５ａは、ユーザが着座可能に設けられている。６つのアクチュエータ５ｂは、シート５ａを支持するとともに、そのシート５ａを移動させるように構成されている。
制御部５ｃは、シート装置５を制御するように構成されている。具体的には、制御部５ｃは、コンピュータ３から受信した挙動データに基づいて、アクチュエータ５ｂを用いてシート５ａを移動させるように構成されている。たとえば、挙動データにおいて上方向への加速度が発生した場合には、制御部５ｃがアクチュエータ５ｂを制御することによりシート５ａが上方向に移動される。このため、シート装置５では、車両５０の走行時に車載ネットワーク５１から取得された挙動が再現される。
通信部５ｄは、ネットワーク１５０を介してコンピュータ３と通信可能であり、挙動データをコンピュータ３から受信するために設けられている。
−仮想現実システムの動作例−
次に、図６〜図８を参照して、本実施形態による仮想現実システム１００の動作例（仮想現実方法）について説明する。なお、以下では、データ生成時の動作例を説明した後に、データ再生時の動作例について説明する。
［データの生成時］
データの生成は、車両５０（図１参照）に搭載された撮像装置１および取得装置２が車両走行時の情報を収集することによって行われる。具体的には、撮像装置１による映像および音声の収集と、取得装置２による挙動およびメータ情報の収集とが並行して行われる。なお、以下では、車両走行時に並行して動作する撮像装置１および取得装置２のうち、撮像装置１の動作を説明した後に、取得装置２の動作を説明する。また、データの生成は、たとえば、プロドライバによる車両５０のラリー走行またはサーキット走行時に行われる。
（映像装置の動作）
図６のステップＳ１において、制御部１ｃ（図２参照）により、映像および音声の記録が開始されたか否かが判断される。たとえば、撮像装置１が記録開始操作を受け付けた場合に、記録が開始されたと判断される。そして、記録が開始されたと判断された場合には、ステップＳ２に移る。その一方、記録が開始されていないと判断された場合には、ステップＳ１が繰り返し行われる。すなわち、制御部１ｃは記録が開始されるまで待機する。
次に、ステップＳ２において、制御部１ｃにより、撮像部１ａを用いて映像が収集されるとともに、マイク１ｂを用いて音声が収集される。具体的には、車両５０の周囲が３６０度の範囲で撮像部１ａによって撮像されるとともに、車室内の音がマイク１ｂによって収集される。
次に、ステップＳ３において、制御部１ｃにより、映像および音声の記録が終了されたか否かが判断される。たとえば、撮像装置１が記録終了操作を受け付けた場合に、記録が終了されたと判断される。そして、記録が終了されていないと判断された場合には、ステップＳ２に戻り、映像および音声の収集が継続される。その一方、記録が終了されたと判断された場合には、ステップＳ４に移る。
次に、ステップＳ４において、制御部１ｃにより、記録開始から記録終了までの期間の映像データおよび音声データが生成され、その映像データおよび音声データが通信部１ｄからコンピュータ３（図１参照）に送信される。コンピュータ３では、撮像装置１から受信した映像データおよび音声データが格納される。なお、映像データおよび音声データは関連付けられ、映像データおよび音声データには記録開始時刻が付加されている。その後、エンドに移る。
（取得装置の動作）
図７のステップＳ１１において、マイコン２１ａ（図３参照）により、挙動およびメータ情報の記録が開始されたか否かが判断される。たとえば、取得装置２が記録開始操作を受け付けた場合に、記録が開始されたと判断される。そして、記録が開始されたと判断された場合には、ステップＳ１２に移る。その一方、記録が開始されていないと判断された場合には、ステップＳ１１が繰り返し行われる。すなわち、マイコン２１ａは記録が開始されるまで待機する。
次に、ステップＳ１２において、マイコン２１ａにより、挙動およびメータ情報が収集される。具体的には、ＥＣＵ５４からバス５３に送信される車両５０の挙動およびメータに関する情報がトランシーバ２１ｂに入力されることにより、挙動およびメータ情報が収集される。
次に、ステップＳ１３において、マイコン２１ａにより、挙動およびメータ情報の記録が終了されたか否かが判断される。たとえば、取得装置２が記録終了操作を受け付けた場合に、記録が終了されたと判断される。そして、記録が終了されていないと判断された場合には、ステップＳ１２に戻り、挙動およびメータ情報の収集が継続される。その一方、記録が終了されたと判断された場合には、ステップＳ１４に移る。
次に、ステップＳ１４において、マイコン２１ａにより、記録開始から記録終了までの期間の挙動データおよびメータ表示用データが生成される。挙動データおよびメータ表示用データは、入出力部２１ｃから通信機２２に出力され、通信機２２からコンピュータ３に送信される。コンピュータ３では、取得装置２から受信した挙動データおよびメータ表示用データが格納される。なお、挙動データおよびメータ表示用データには記録開始時刻が付加されている。その後、エンドに移る。
［データの再生時］
データの再生は、ユーザの頭部に装着されるＨＭＤ４およびユーザが着座するシート装置５によって行われる。このデータの再生により、ユーザに車両走行を疑似体験させることが可能である。
図８のステップＳ２１において、制御部３ａ（図１参照）により、データの再生が開始されたか否かが判断される。たとえば、コンピュータ３が再生開始操作を受け付けた場合に、再生が開始されたと判断される。そして、再生が開始されたと判断された場合には、ステップＳ２２に移る。その一方、再生が開始されていないと判断された場合には、ステップＳ２１が繰り返し行われる。すなわち、コンピュータ３は再生が開始されるまで待機する。
次に、ステップＳ２２において、制御部３ａにより、記憶部３ｂに格納されたデータが通信部３ｃから送信される。具体的には、映像データ、音声データ、挙動データおよびメータ表示用データが時間同期されて出力される。この時間同期は、各データに付加された記録開始時刻を用いて行われる。たとえば、データの記録開始時刻にずれがある場合には、そのうちの最も遅い記録開始時刻が全てのデータの出力開始時点に設定され、出力開始時点からの再生経過時間に応じたデータが出力される。映像データ、音声データおよびメータ表示用データはＨＭＤ４に出力され、挙動データはシート装置５に出力される。
ＨＭＤ４（図４参照）では、制御部４ｃにより、通信部４ｅが受信した映像データとセンサ４ｄの検出結果とに基づいて表示部４ａに映像が表示される。表示部４ａには、車速および変速段を示すメータがオーバーレイ表示され、通信部４ｅが受信したメータ表示用データに基づいてメータの数値が調整される。また、制御部４ｃにより、通信部４ｅが受信した音声データに基づいてスピーカ４ｂから音声が出力される。このため、現実の車両５０の実際の走行時に取得された映像、音声およびメータ情報がユーザに提示される。
シート装置５（図５参照）では、制御部５ｃにより、通信部５ｄが受信した挙動データに基づいて、アクチュエータ５ｂが駆動される。このアクチュエータ５ｂの駆動により、シート５ａが移動される。このため、現実の車両５０の実際の走行時に取得された挙動がユーザに与えられる。なお、シート５ａが６自由度で移動可能であることから、車両走行時の前後加速度、横加速度、上下加速度、ロール角度、ピッチ角度、および、ヨー角度を再現可能である。
次に、ステップＳ２３において、制御部３ａにより、データの再生が終了されたか否かが判断される。たとえば、データが最後まで再生された場合、および、コンピュータ３が再生終了操作を受け付けた場合に、再生が終了されたと判断される。そして、再生が終了されていないと判断された場合には、ステップＳ２２に戻り、データの再生が継続される。その一方、再生が終了されたと判断された場合には、エンドに移る。
−効果−
本実施形態では、上記のように、車両５０の走行時に車両５０の周囲を撮像する撮像装置１と、車両５０の走行時に車両５０の挙動を取得する取得装置２と、撮像装置１による映像データおよび取得装置２による挙動データを格納し、その映像データおよび挙動データを時間同期させて出力するコンピュータ３と、映像データを再生するＨＭＤ４と、挙動データを再生するシート装置５とが設けられている。このように構成することによって、現実の車両５０を実際に走行させながら映像および挙動が取得され、その映像データおよび挙動データが再生されることにより、現実に即した映像および挙動が再現されるので、車両走行の疑似体験時における臨場感を向上させることができる。また、映像データおよび挙動データが時間同期されることにより、ＨＭＤ４で再生される映像と、シート装置５で再生される挙動とがずれないようにすることができる。そして、たとえば、プロドライバによる車両５０のラリー走行またはサーキット走行時にデータが生成され、そのデータが再生される場合には、プロドライバが運転する車両５０の助手席にユーザが同乗しているような疑似体験をさせることができる。
また、本実施形態では、取得装置２により車両５０の走行時に車両５０のメータ情報が取得されることによって、表示部４ａにメータがオーバーレイ表示されることにより、ユーザが車両５０の状態を容易に把握することができる。
また、本実施形態では、撮像装置１により車両５０の周囲が３６０度の範囲で撮像されることによって、車両５０の周囲を全て再現可能になり、ユーザの頭部の動きに応じて表示部４ａに表示される映像が変更されることから、臨場感をより向上させることができる。
また、本実施形態では、車載ネットワーク５１から車両５０の挙動が取得されることによって、車両５０の正確な挙動を取得することができるので、臨場感をより向上させることができる。
−他の実施形態−
なお、今回開示した実施形態は、すべての点で例示であって、限定的な解釈の根拠となるものではない。したがって、本発明の技術的範囲は、上記した実施形態のみによって解釈されるものではなく、特許請求の範囲の記載に基づいて画定される。また、本発明の技術的範囲には、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれる。
たとえば、上記実施形態では、撮像装置１および取得装置２がネットワーク１５０を介してコンピュータ３に接続される例を示したが、これに限らず、撮像装置および取得装置がコンピュータに接続されていなくてもよい。この場合には、撮像装置および取得装置によって収集されたデータ（映像データ、音声データ、挙動データおよびメータ表示用データ）が図示省略した記憶媒体を介してコンピュータに格納されるようにしてもよい。
また、上記実施形態では、ＨＭＤ４およびシート装置５がネットワーク１５０を介してコンピュータ３に接続される例を示したが、これに限らず、ＨＭＤおよびシート装置がネットワークを介さずにコンピュータに直接接続されていてもよい。
また、上記実施形態において、ネットワーク１５０は、公衆回線であってもよいし、専用回線であってもよい。
また、上記実施形態において、１組のＨＭＤ４およびシート装置５毎にコンピュータ３が設けられていてもよいし、複数組のＨＭＤ４およびシート装置５に対して１つのコンピュータ３が設けられていてもよい。
また、上記実施形態では、撮像部１ａにより車両５０の周囲が３６０度の範囲で撮像される例を示したが、これに限らず、撮像部により車両前方側のみが撮像されるようにしてもよい。
また、上記実施形態では、撮像部１ａが助手席に配置される例を示したが、これに限らず、撮像部が助手席以外に配置されていてもよい。
また、上記実施形態では、マイク１ｂが車室内に配置される例を示したが、これに限らず、マイクが車室内およびエンジンコンパートメントに配置され、その２つのマイクに入力された音を合成して音声データが生成されるようにしてもよい。なお、マイクの数が３つ以上であってもよいし、マイクの配置場所は適宜変更可能である。
また、上記実施形態では、撮像装置１に通信部１ｄが設けられるとともに、取得装置２に通信機２２が設けられる例を示したが、これに限らず、撮像装置および取得装置が共用する１つの通信機が設けられるようにしてもよい。
また、上記実施形態では、車載ネットワーク５１のバス５３から車両５０の挙動が取得される例を示したが、これに限らず、取得装置に加速度センサおよび角度センサなどが設けられ、そのセンサにより車両の挙動が取得されるようにしてもよい。
また、上記実施形態では、前後加速度、横加速度、上下加速度、ロール角度、ピッチ角度およびヨー角度がバス５３から取得される例を示したが、これに限らず、前後加速度、横加速度、上下加速度、ロール角度、ピッチ角度およびヨー角度がバスから取得された情報に基づいて算出されるようにしてもよい。
また、上記実施形態では、前後加速度、横加速度、上下加速度、ロール角度、ピッチ角度およびヨー角度に基づいて挙動データが生成される例を示したが、これに限らず、前後加速度、横加速度、上下加速度、ロール角度、ピッチ角度およびヨー角度のうちの少なくとも１つから挙動データが生成されるようにしてもよい。たとえば、挙動データが上下加速度の経時変化のみで構成されていてもよい。この場合には、シートが６自由度で移動する必要はなく、シート座面の下側にウーファーを設け、そのウーファーによって上下動を再現するようにしてもよい。
また、上記実施形態では、取得装置２がメータ情報を取得する例を示したが、これに限らず、取得装置がメータ情報を取得しないようにしてもよい。すなわち、映像にメータがオーバーレイ表示される例を示したが、これに限らず、映像にメータがオーバーレイ表示されないようにしてもよい。
また、上記実施形態において、表示部４ａの映像にオーバーレイされるメータを表示状態と非表示状態とで切り替え可能にしてもよい。
また、上記実施形態では、取得装置２により車載ネットワーク５１から車速および変速段が取得され、その車速および変速段がオーバーレイ表示される例を示したが、これに限らず、取得装置により車載ネットワークからアクセル操作量、ブレーキ操作量およびステアリング操作量などが取得され、そのアクセル操作量、ブレーキ操作量およびステアリング操作量などがオーバーレイ表示されるようにしてもよい。このように構成すれば、車両５０を運転するドライバの操作を、車両走行を疑似体験するユーザが知ることができる。
また、上記実施形態では、映像を再生するＨＭＤ４が設けられる例を示したが、これに限らず、映像を再生する平面ディスプレイまたは球面ディスプレイが設けられていてもよい。
また、上記実施形態では、シート装置５がスチュワートプラットフォーム型のパラレルリンク機構を有する例を示したが、これに限らず、シート装置は、車両の挙動を再生してユーザに与えることが可能であれば、どのようなものであってもよい。
また、上記実施形態において、制御部１ｃは、撮像部１ａの撮影フレームレート、露光時間および感度のうちの少なくともいずれか一つを変更するようにしてもよい。たとえば、制御部１ｃが、撮影中に車両５０の速度情報を取得し、速度情報に基づいて撮像部１ａを制御するようにしてもよい。具体的には、制御部１ｃは、車両５０の速度が速くなるほど、撮像部１ａの露光時間を長くするようにしてもよい。このようにすれば、景色が流れるような画像となり、スピード感を再現することができる。また、たとえば、車両５０の前方に太陽がある場合には、白飛びが発生しないように、露光時間を短くしたり、感度を下げるようにしてもよい。
また、上記実施形態において、再生する画像に対して画像処理を施すようにしてもよい。たとえば、実際の車両５０が高速で移動している場合には、景色が流れるため、再生する画像の輪郭を弱めたり、ブラーを付加するようにしてもよい。具体的には、撮像部１ａの露光時間を短くすると、再生される動画像では実際の車両５０から見る景色に比べてスピード感が落ちることがあるため、輪郭を弱めたり、ブラーを付加することにより、スピード感を再現することが可能になる。また、車両５０の速度が速くなるほど、車両５０に乗っている人間の視野は狭くなるため、再生する画像の中央領域の周辺をぼかすようにしてもよい。具体的には、表示する画像の中央付近は画像処理を行わずに再生し、中央から所定の距離を超えた領域では、車両５０の速度が速くなるほど強いぼかしを付加するようにしてもよい。さらに、ぼかしは、中央からの距離に応じて徐々に強くしてもよい。
また、上記実施形態では、車載ネットワーク５１の通信プロトコルとしてＣＡＮが用いられる例を示したが、これに限らず、車載ネットワークの通信プロトコルとしてＣＡＮ以外が用いられていてもよい。
本発明は、ユーザに車両走行を疑似体験させる仮想現実システムおよび仮想現実方法に利用可能である。
１ 撮像装置
２ 取得装置
３ コンピュータ
４ ＨＭＤ（第１再生装置）
５ シート装置（第２再生装置）
５０ 車両
５１ 車載ネットワーク
１００ 仮想現実システム

Claims (5)

  1. ユーザに車両走行を疑似体験させる仮想現実システムであって、
    車両に搭載され、前記車両の走行時に前記車両の周囲を撮像する撮像装置と、
    前記車両に搭載され、前記車両の走行時に前記車両の挙動を取得する取得装置と、
    前記撮像装置により撮像された映像データと、前記取得装置により取得された挙動データとを格納するとともに、前記映像データおよび前記挙動データを時間同期させるコンピュータと、
    前記映像データを再生する第１再生装置と、
    前記挙動データを再生する第２再生装置とを備えることを特徴とする仮想現実システム。
  2. 請求項１に記載の仮想現実システムにおいて、
    前記取得装置は、前記車両の走行時に前記車両のメータ情報を取得するように構成され、
    前記コンピュータは、前記取得装置により取得されたメータ表示用データを格納するとともに、前記メータ表示用データを前記映像データおよび前記挙動データと時間同期させるように構成され、
    前記第１再生装置は、前記メータ表示用データを再生可能に構成されていることを特徴とする仮想現実システム。
  3. 請求項１または２に記載の仮想現実システムにおいて、
    前記撮像装置は、前記車両の周囲を３６０度の範囲で撮像可能に構成されていることを特徴とする仮想現実システム。
  4. 請求項１〜３のいずれか１つに記載の仮想現実システムにおいて、
    前記取得装置は、前記車両の車載ネットワークから前記車両の挙動を取得するように構成されていることを特徴とする仮想現実システム。
  5. ユーザに車両走行を疑似体験させる仮想現実方法であって、
    車両の走行時に、前記車両に搭載された撮像装置により前記車両の周囲を撮像するとともに、前記車両に搭載された取得装置により前記車両の挙動を取得するステップと、
    前記撮像装置により撮像された映像データと、前記取得装置により取得された挙動データとをコンピュータに格納するステップと、
    前記コンピュータにより前記映像データおよび前記挙動データを時間同期させるステップと、
    第１再生装置により前記映像データを再生するとともに、第２再生装置により前記挙動データを再生するステップとを備えることを特徴とする仮想現実方法。
JP2019042856A 2019-03-08 2019-03-08 仮想現実システムおよび仮想現実方法 Pending JP2020144332A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019042856A JP2020144332A (ja) 2019-03-08 2019-03-08 仮想現実システムおよび仮想現実方法
US16/750,296 US20200286398A1 (en) 2019-03-08 2020-01-23 Virtual reality system and virtual reality method
EP20155700.6A EP3705162A1 (en) 2019-03-08 2020-02-05 Virtual reality system and virtual reality method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019042856A JP2020144332A (ja) 2019-03-08 2019-03-08 仮想現実システムおよび仮想現実方法

Publications (1)

Publication Number Publication Date
JP2020144332A true JP2020144332A (ja) 2020-09-10

Family

ID=69500630

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019042856A Pending JP2020144332A (ja) 2019-03-08 2019-03-08 仮想現実システムおよび仮想現実方法

Country Status (3)

Country Link
US (1) US20200286398A1 (ja)
EP (1) EP3705162A1 (ja)
JP (1) JP2020144332A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114071111B (zh) * 2021-12-27 2023-08-15 北京百度网讯科技有限公司 视频播放方法和装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5865624A (en) * 1995-11-09 1999-02-02 Hayashigawa; Larry Reactive ride simulator apparatus and method
JP2003241642A (ja) * 2002-02-21 2003-08-29 Bosutooku Kk シミュレーションライド装置
JP2004206218A (ja) * 2002-12-24 2004-07-22 Koyo Seiko Co Ltd 車両遠隔操作システム、遠隔操作装置、車両用制御装置、および車両遠隔操作方法
JP2005316004A (ja) * 2004-04-27 2005-11-10 Japan Science & Technology Agency ドライビングシミュレータ
US20080311983A1 (en) * 2007-06-14 2008-12-18 Panasonic Autmotive Systems Co. Of America, Division Of Panasonic Corp. Of North America Vehicle entertainment and Gaming system
JP2013257524A (ja) * 2012-06-11 2013-12-26 Toshihiro Ota 加速度運転体験機
WO2014013985A1 (ja) * 2012-07-17 2014-01-23 日産自動車株式会社 運転支援システム及び運転支援方法
JP2016167771A (ja) * 2015-03-10 2016-09-15 株式会社デンソー ダイジェスト映像生成装置
KR101748401B1 (ko) * 2016-08-22 2017-06-16 강두환 가상현실 어트랙션 제어 방법 및 시스템
US20170276494A1 (en) * 2016-03-22 2017-09-28 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle virtual reality navigation system
US20170293809A1 (en) * 2016-04-07 2017-10-12 Wal-Mart Stores, Inc. Driver assistance system and methods relating to same

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07271289A (ja) 1994-03-30 1995-10-20 Mazda Motor Corp シミュレーション装置
US20130083061A1 (en) * 2011-09-30 2013-04-04 GM Global Technology Operations LLC Front- and rear- seat augmented reality vehicle game system to entertain & educate passengers
US10015537B2 (en) * 2016-06-30 2018-07-03 Baidu Usa Llc System and method for providing content in autonomous vehicles based on perception dynamically determined at real-time
TWI654106B (zh) * 2017-06-12 2019-03-21 勝捷光電股份有限公司 利用數位錄影方式以記錄行車資訊與產生汽車履歷之方法
US10357715B2 (en) * 2017-07-07 2019-07-23 Buxton Global Enterprises, Inc. Racing simulation

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5865624A (en) * 1995-11-09 1999-02-02 Hayashigawa; Larry Reactive ride simulator apparatus and method
JP2003241642A (ja) * 2002-02-21 2003-08-29 Bosutooku Kk シミュレーションライド装置
JP2004206218A (ja) * 2002-12-24 2004-07-22 Koyo Seiko Co Ltd 車両遠隔操作システム、遠隔操作装置、車両用制御装置、および車両遠隔操作方法
JP2005316004A (ja) * 2004-04-27 2005-11-10 Japan Science & Technology Agency ドライビングシミュレータ
US20080311983A1 (en) * 2007-06-14 2008-12-18 Panasonic Autmotive Systems Co. Of America, Division Of Panasonic Corp. Of North America Vehicle entertainment and Gaming system
JP2013257524A (ja) * 2012-06-11 2013-12-26 Toshihiro Ota 加速度運転体験機
WO2014013985A1 (ja) * 2012-07-17 2014-01-23 日産自動車株式会社 運転支援システム及び運転支援方法
JP2016167771A (ja) * 2015-03-10 2016-09-15 株式会社デンソー ダイジェスト映像生成装置
US20170276494A1 (en) * 2016-03-22 2017-09-28 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle virtual reality navigation system
US20170293809A1 (en) * 2016-04-07 2017-10-12 Wal-Mart Stores, Inc. Driver assistance system and methods relating to same
KR101748401B1 (ko) * 2016-08-22 2017-06-16 강두환 가상현실 어트랙션 제어 방법 및 시스템

Also Published As

Publication number Publication date
EP3705162A1 (en) 2020-09-09
US20200286398A1 (en) 2020-09-10

Similar Documents

Publication Publication Date Title
EP3794851B1 (en) Shared environment for vehicle occupant and remote user
JP3817612B2 (ja) バーチャルドライビングシステム
EP3648857A1 (en) Racing simulation
US6151060A (en) Stereoscopic video display apparatus which fuses real space image at finite distance
US9420392B2 (en) Method for operating a virtual reality system and virtual reality system
JP2009093076A (ja) 列車内画像表示システム
JP4848648B2 (ja) 車載情報提供装置
JP2005167612A (ja) 音場再生装置及び音場空間再生システム
JPH08191419A (ja) 頭部装着型表示システム
US20200286398A1 (en) Virtual reality system and virtual reality method
CN110447244A (zh) 用于为两轮车骑车者提供空间可感知的声学信号的方法
JP2003241642A (ja) シミュレーションライド装置
WO2019058496A1 (ja) 表情記録システム
JPH07141095A (ja) トレーニング装置
JP2013020033A (ja) 車室内の音の官能評価装置
JP6620724B2 (ja) 車両用会話支援装置
JP6719119B2 (ja) 画像表示装置、および、コンピュータプログラム
CN113997863A (zh) 数据处理方法、装置和车辆
JP3685574B2 (ja) 運転支援画像取り込み装置
JP7336228B2 (ja) 車両の非接触操作装置、および車両
JP2007333784A (ja) 教習状況確認システム
JP2003114607A (ja) 仮想ドライビングシステム
KR102517818B1 (ko) 혼합현실 기반 체험 시뮬레이터
US20240087334A1 (en) Information process system
EP3926588A1 (en) Image displaying apparatus and method of displaying image data on a vr display device, particularly disposed in a vehicle

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210415

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220308

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220830

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230307