CN103028243A - 用于乘客的娱乐和教育的前后座增强实境车辆游戏系统 - Google Patents

用于乘客的娱乐和教育的前后座增强实境车辆游戏系统 Download PDF

Info

Publication number
CN103028243A
CN103028243A CN2012103681458A CN201210368145A CN103028243A CN 103028243 A CN103028243 A CN 103028243A CN 2012103681458 A CN2012103681458 A CN 2012103681458A CN 201210368145 A CN201210368145 A CN 201210368145A CN 103028243 A CN103028243 A CN 103028243A
Authority
CN
China
Prior art keywords
vehicle
augmented reality
image
time video
real time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012103681458A
Other languages
English (en)
Other versions
CN103028243B (zh
Inventor
P.K.米什拉
J.W.苏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GM Global Technology Operations LLC
Original Assignee
GM Global Technology Operations LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GM Global Technology Operations LLC filed Critical GM Global Technology Operations LLC
Publication of CN103028243A publication Critical patent/CN103028243A/zh
Application granted granted Critical
Publication of CN103028243B publication Critical patent/CN103028243B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/803—Driving vehicles or craft, e.g. cars, airplanes, ships, robots or tanks
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/92—Video game devices specially adapted to be hand-held while playing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/216—Input arrangements for video game devices characterised by their sensors, purposes or types using geographical information, e.g. location of the game device or player using GPS
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A63F13/46—Computing the game score
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/105—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals using inertial sensors, e.g. accelerometers, gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/204—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform the platform being a handheld device
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/205—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform for detecting the geographical location of the game platform
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/69—Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8094—Unusual game types, e.g. virtual cooking

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明涉及用于乘客的娱乐和教育的前后座增强实境车辆游戏系统。具体地，根据示例性实施例，增强虚拟实境游戏被提供用于车辆。一种方法包括从在车辆上安装的照相机在车辆操作过程中接收实时视频图像并且使实时视频图像与一个或多个虚拟图像合并以提供增强实境图像。增强实境图像然后在车辆操作期间传送给游戏设备的显示器。一种系统包括提供实时视频图像的照相机和联接到照相机的控制器。另外，数据库为控制器提供一个或多个虚拟图像，使得控制器可以通过使实时视频图像与一个或多个虚拟图像合并来提供增强实境图像。最后，包括发射器以用于在车辆操作期间传送增强实境图像到游戏设备的显示器。

Description

用于乘客的娱乐和教育的前后座增强实境车辆游戏系统
技术领域
技术领域总体涉及用于游戏系统的系统和方法，其可以当乘坐在车辆中的时候享受，更特别地，涉及增强实境游戏系统，其中车辆在游戏中扮演主动角色。
背景技术
现在常见的是车辆包括车载电子控制，通信，和安全系统。例如，许多车辆现在包括导航系统，其利用无线全球定位系统（GPS）技术，其可以提供车辆位置信息以在旅行计划和路径选择中提供帮助。此外，成像系统是已知的，其提供实时的视野，同时基于雷达、声纳和激光的系统是已知的，其可以提供，前部、后部和侧面的障碍探测。互联车辆和道旁-车辆通信系统利用特定（ad-hoc）无线联网发展，其提供用于分布式的感应、数据交换和对碰撞缓解和避免有用的提前警告系统的基础。当这样的系统提供车辆操作者与车辆的安全操作有关的有价值的信息的时候，此信息没有成为可用于由车辆的乘客使用，这些乘客通常是简单地乘坐一路或必须使他们自己进行娱乐直到车辆到达目的地。
虚拟实境是在游戏系统中提供娱乐的常用技术，其通过产生基于计算机的虚拟环境以允许人们经历在实际生活中由于空间和物理约束而从未经历的各种情形。相反，增强实境是一种系统，其处理现实世界图像与虚拟世界图像（例如计算机图形图像）的结合。换句话说，增强实境系统将实际环境与虚拟目标结合，从而有效地以实时的方式与用户互动。乘客可以通过使用增强实境系统中的实时的、现实世界的车辆信息来用于娱乐和教育目的而获益。
相应地，希望提供一种用于车辆的增强实境游戏系统。此外，希望提供一种增强实境游戏系统，使用增强实境的主动角色中的车辆用于由车辆乘客使用的教育和娱乐。另外，本发明的其他期望的特征和特性将从后面结合附图和前述技术领域及背景技术的描述中变得明显。
发明内容
根据示例性实施例，增强虚拟实境游戏被提供用于车辆。一种用于提供增强实境游戏的方法包括从在车辆上安装的照相机在车辆操作过程中接收实时视频图像并且使实时视频图像与一个或多个虚拟图像合并以提供增强实境图像。增强实境图像然后在车辆操作期间传送给游戏设备的显示器。
根据示例性实施例，增强虚拟实境游戏被提供用于车辆。一种用于提供增强实境游戏的方法包括提供实时视频图像的照相机和联接到照相机的控制器。另外，数据库为控制器提供一个或多个虚拟图像，使得控制器可以通过使实时视频图像与一个或多个虚拟图像合并来提供增强实境图像。最后，包括发射器以用于在车辆操作期间传送增强实境图像到游戏设备的显示器。
本发明还提供了以下方案：
1. 一种方法，包括：
在车辆操作过程中，从车辆上安装的照相机接收实时视频图像；
使实时视频图像，车辆操作数据与一个或多个虚拟图像合并以提供增强实境图像；以及
在车辆操作过程中，传送增强实境图像。
2. 如方案1所述的方法，其特征在于，传送进一步包括传送增强实境图像到车辆内安装的显示器。
3. 如方案1所述的方法，其特征在于，传送进一步包括传送增强实境图像到车辆内操作的移动电脑或游戏系统的显示器。
4. 如方案1所述的方法，其特征在于，传送进一步包括传送增强实境图像在车辆远程操作的移动电脑或游戏系统的显示器。
5. 如方案1所述的方法，其特征在于，车辆操作数据包括以下组中的至少一个：车辆速度，车辆方向；或车辆加速度。
6. 如方案1所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，从雷达或声纳系统接收数据；以及
使数据的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境图像。
7. 如方案1所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，接收全球定位数据；以及
使全球定位数据的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境图像。
8. 如方案1所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，从道旁信息源接收信息；以及
使信息的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境图像。
9. 如方案1所述的方法，其特征在于，其进一步包括：
从其他车辆接收第二实时视频图像；以及
在传送之前使第二实时视频图像的至少一部分与增强实境图像合并。
10. 如方案1所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，从其他车辆接收信息，所述信息源自信息源的以下组中的至少一个：实时视频；雷达；激光；声纳；全球定位；或道旁信息；以及
使信息的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境图像。
11. 一种方法，包括：
在车辆操作过程中，从车辆上安装的照相机接收实时视频图像；
在车辆操作过程中，从其他信息源接收信息，所述信息源自信息源的以下组中的至少一个：雷达；激光；声纳；全球定位；或道旁信息；
使用所述信息产生一个或多个虚拟图像；
使实时视频图像与一个或多个虚拟图像合并以提供增强实境游戏图像；以及
在车辆操作过程中，传送增强实境游戏图像。
12. 如方案11所述的方法，其特征在于，传送进一步包括传送增强实境游戏图像到车辆内操作的移动电脑或游戏系统的显示器。
13. 如方案12所述的方法，其特征在于，其进一步包括从车辆内操作的计算机或游戏系统接收用于增强实境游戏图像的指令。
14. 如方案13所述的方法，其特征在于，其进一步包括在传送增强实境游戏图像到车辆内操作的移动电脑或游戏系统的显示器之前，将游戏分数合并到增强实境游戏图像中。
15. 如方案11所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，接收车辆操作数据；以及
使车辆操作数据的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境游戏图像。
16. 一种车辆，包括：
提供实时视频图像的照相机；
联接到照相机的控制器，所述控制器带有数据库，所述数据库具有一个或多个虚拟图像，并且所述控制器配置成通过使车辆操作数据与实时视频图像和一个或多个虚拟图像合并来提供增强实境图像；以及
发射器，其用于在车辆操作过程中传送增强实境图像。
17. 如方案16所述的车辆，其特征在于，所述控制器还联接到信息源的以下组中的至少一个：雷达；激光；声纳；全球定位；或道旁信息。
18. 如方案16所述的车辆，其特征在于，所述控制器处理由信息源的组的至少一个提供的信息，从而提供一个或多个虚拟图像。
19. 如方案16所述的车辆，其特征在于，所述发射器传送增强实境图像到车辆内安装的显示器。
20. 如方案16所述的车辆，其特征在于，所述发射器传送增强实境图像到车辆内操作的移动电脑或游戏系统的显示器。
附图说明
本发明的主题将在后面结合下面的附图描述，其中相同的附图标记表示相同的元件，其中：
图1示出了根据示例性实施例的使用增强实境游戏系统的主车辆的操作环境；
图2示出了根据示例性实施例的替代主车辆；
图3是根据示例性实施例的增强实境游戏系统的功能框图；
图4是根据示例性实施例适合于与增强实境游戏系统一起使用的移动计算机装置的示图；和
图5是根据示例性实施例的用于提供增强实境游戏系统的方法的流程图。
具体实施方式
以下的详细描述实质上仅仅是示例性的并且并不旨在限制本主题的实施例或这样的实施例的应用或使用。如在此使用的，文字“示例性”意思是“作为例子，举例，或示例”。作为示例在此描述的任何实施方式不需要配置为比其它实施方式更优选或更有利的。此外，并不旨在通过在之前技术领域，背景技术，发明内容或以下具体实施方式中存在的任何明示或暗示的理论进行限定。
技术和工艺可以根据功能和/或逻辑块部件，并且参照操作，处理任务的符号表示，以及通过各种计算部件或装置执行的功能在此进行描述。这样的操作，任务，以及功能有时认为是计算机执行的，计算机处理，软件实施，或计算机实施的。在实践中，一个或多个处理器装置可以通过操作代表系统存储器中的存储器位置处的数据位的电信号以及其他的信号处理来执行所述操作，任务和功能。其中保持数据位的存储器位置是物理位置，其具有对应与数据位的特定电、磁、光或有机属性。应当理解，在附图中示出的各种块部件可以通过配置为执行具体功能的任意数目的硬件，软件，和/或固件部件实现。例如，系统或部件的实施例可以采用在一个或多个微处理器或其它控制装置的控制下执行各种功能的各种集成电路部件，例如，存储元件，数字信号处理元件，逻辑元件，查找表等。
以下的描述涉及“连接”或“联接”在一起的元件或节点或特征。如在此使用的，除非清楚地指出否则，“连接”意思是一个元件/结点/特征直接地结合到另一元件/结点/特征上（或直接与其连通），而不是必须机械地。同样地，除非清楚地指出否则，“联接”意思是一个元件/结点/特征间接地或间接地结合到另一元件/结点/特征上（或直接地或间接地与其连通），而不是必须机械地。因此，尽管附图描绘了元件的一个示例性布置，额外的介入元件、装置、特征或部件可以存在于所示主题的实施例中。
此外，某些术语也可以仅用于参考目的在下面的描述中使用，并且因此不旨在限制。例如，术语，例如"上部"，"下部"，"以上"，"以下"涉及所参考的附图中的方向。术语，例如"前部"，"背部"，"后部"，"侧面"，"车外"和"车内"在一致但任意的参考框架内描述部件的部分的方位和/或位置，其参考讨论中描述部件的文本和相关附图而变得清楚。这样的术语可以包括上述特别提到的词语，其衍生物，和类似含义的词语。类似地，除非在上下文中明确地表示，涉及结构的术语"第一"、"第二"和其他这样的数字术语不暗示序列或顺序。
为简短起见，与无线数据传送、雷达和其他探测系统、GPS系统、矢量分析、交通模型，和系统（和系统的独立操作组件）的其他功能方面有关的常规的技术可以不在此进行详细描述。此外，包含其中的各个附图所示的连接线用于代表各个元件之间的示例性功能关系和/或物理联接。应当指出许多替代的或额外的功能关系或物理连接可以存在于主题的实施例中。
图1是如本文所述的增强实境游戏系统的实施例的示例性操作环境的示意图。在示例性实施例中，增强实境游戏系统涉及主车辆10，其沿着车道12行驶。为了简便和方便起见，系统将关于主车辆10和接近主车辆10的多个邻近的车辆22，24，26，28和30在这里描述。为了收集用于增强实境游戏的现实世界图像和数据，主车辆10包括车载的车辆到车辆位置认知系统，邻近的车辆22，24，26，28和30可以但是不需要具有相容的位置认知系统。另外，某些远程车辆22，24，26，28和30具有与主车辆10的通信能力，其称为车辆到车辆（V2V）消息发送。主车辆10和那些具有通信能力的相应邻近车辆周期地在相应的互联车辆通信网络上向彼此广播无线消息，例如，但是不限于本领域已知的专用短程通信协议（DSRC）。这样，主车辆10可以获得额外的数据用于产生虚拟图像以增强本公开的增强实境游戏的实时图像的实境。
仍然参照图1，主车辆10也装备有视觉和目标探测传感装置。目标探测传感装置包括但不限于基于雷达的探测装置，基于视觉的探测装置，和基于光的探测装置。这样的装置的例子可以包括雷达探测器（例如，长程和短程雷达）、照相机和激光装置（例如，光探测和测距（LIDAR）或激光探测与测距（LADAR））。每个相应的传感系统在各自的传感器的视野中探测或捕获图像。视野取决于目标探测传感器被引导的方向。在此例子中，邻近车辆22和24通过主车辆10前方的传感区域的视野25内的主车辆10的目标探测传感器的前视照相机探测。在所示的例子中，邻近车辆30还包括视觉和目标探测传感装置。因此，邻接车辆30可以使用它的目标探测传感器探测邻近车辆28并且传送（V2V）不在主车辆10的视野25中的邻接车辆28的图像和位置信息。因此，使由邻接车辆30探测的图像和目标数据融合可以允许主车辆10构造围绕主车辆10的更鲁棒的增强实境图像。不过，在本公开的增强实境游戏系统的最基本的实施例中，所需要的是前视照相机图像和一些虚拟实境增强元件以用于引导乘客感兴趣的任何特定游戏。在一个实施例中，游戏涉及教育驾驶体验游戏，其中乘客跟随在交通中的主车辆的操作虚拟车辆。游戏点可以增加到游戏分数或从游戏分数中减去，其取决于游戏乘客展现的驾驶习惯。例如，适当的车辆距离，驾驶速度和变道操纵增加游戏分数，而超速，未进行信号操作或堵塞在交通中将会引起游戏分数被减少。替代地，不同的图标可以向游戏乘客展示安全的，有风险的或危险驾驶习惯。基于实时主车辆操作提供增强实境驾驶经历为游戏乘客提供逼真的驾驶经历以用于他们的教育和娱乐。此外，因为主车辆的操作者（驾驶员）知道增强实境驾驶游戏是在进行中的，驾驶员更自觉地安全驾驶，从而为了游戏乘客设置正确的例子。
现在参照图2，示出了主车辆10'的替代实施例的俯视图，其显示了用于主车辆10'的示例性传感器探测区域32。为了说明性的目的，探测区域32被分成四个子区域，其与前部传感器区域32a、后部传感器区域32b、驾驶员侧面传感器区域32c和乘客侧面传感器区域32d相对应。这种布置对应于具有用于探测和测距系统的四个传感器的实施例，然而主车辆10'实施例可以包括比四个传感器更多或更少的传感器。应认识到那在操作中这些传感器区域中的每个将对应于三维空间，其不需要是图2所示的形状或尺寸，并且这些传感器区域将很可能彼此重叠。此外，每个传感器区域的特定尺寸，形状，和范围（在视野中是可调的）能够被选择以适合特定部署的需要并且确保主车辆10'将能够探测感兴趣的所有邻近车辆。
现在参照图3，用于主车辆10的增强实境游戏系统的功能框图示出为包括多个传感系统34以用于提供与车辆的周围或环境有关的各种数据。来自传感系统的信号和数据被提供到基于计算机的控制单元36。控制单元36可以包括单个或多个控制器，其独立地操作或以合作或联网模式操作，并且包括常用元件例如微处理器、只读存储器ROM、随机存取存储器RAM、电子可编程只读存储器EPROM、高速时钟、模拟-数字（A/D）和数字-模拟（D/A）电路和输入/输出电路和装置（I/O）和适当的信号调节和缓冲电路。此外，控制单元36可以与车辆动力学数据处理相关，其例如包括关于车辆速度、加速/减速、偏航、转向轮位置、制动和节气门位置、和车辆的变速器齿轮位置的实时数据。最后，控制单元36具有在其中存储的计算机可执行程序代码形式的用于进行步骤、程序和过程的算法，该步骤、程序和过程与本公开的示例性实施例的增强实境游戏系统有关。
继续主车辆10的各种系统的描述，第一和基本传感系统包括一个或多个摄像机的成像系统38或其他相似的成像装置，例如包括红外线和夜视系统，或与其合作结合物以用于实时目标探测。通常，至少前视照相机被用于为游戏乘客提供驾驶员视野以用于进行教育驾驶游戏。不过，其他照相机位置能够用于为游戏乘客提供机会来改变增强实境驾驶游戏的虚拟车辆的视角。
如这里所用的，术语成像系统包括例如成像装置，如摄像机，红外线的和夜视系统。示例性成像硬件包括黑白或颜色CMOS或CCD摄像机和模-数转换器电路，或带有数字式数据接口的相同摄像机系统。这样的照相机在适当的位置被安装以用于预期的视野，其优选地包括前面的（前视）视野，并且其可以进一步包括后部和大体上横向的视野（参看图2）。多个照相机对于提供最多样的增强实境游戏是理想的，因为全360度视野可以被传感并对游戏乘客显示。因此应认识到多位置传感器可以沿着主车辆10的周长位于各种不同的点，以促进从任何方向的成像。替代地，应意识到部分周长覆盖范围（或仅前视视野）是完全可接收的并可能实际上从车辆制造商的成本/效益考虑是优选的。在一些实施例中，成像系统包括目标识别功能，其包括例如：道路特征识别，如道路标志、路肩特征、立交桥或路口，斜坡等等；常用道旁目标识别，如引导标识；以及车辆识别，如客车，卡车和其他可合理预见的车辆，其与主车辆10共用道路。这样的传感系统特别是相对于方位角位置提供目标检测是有效的，并且利用适当的训练确定目标识别是有效的。还已知的是单个照相机图像处理系统，其可以估计除了角位置以外的目标的范围和距离变率。立体成像系统能够准确地确定目标的范围并且还能够计算距离变率信息。彩色照相机系统确定视野中的目标/车辆的颜色并且当在增强游戏系统上展现时能够用于为虚拟目标呈现相对应的颜色。
适用于增强实境游戏系统的另一传感系统包括一个或多个基于雷达、声纳或激光的系统40以用于实时目标探测和范围/距离变率/角位置信息提取。如这里所用的，术语测距系统包括例如任何适应性的探测和测距系统，包括例如基于雷达、声纳或激光的系统（例如，光探测和测距（LIDAR）或激光探测与测距（LADAR））。虽然其他常规类型的传感器可以被使用，传感系统40优选地采用电磁雷达类型传感器，激光雷达类型传感器，或脉冲红外激光器类型传感器。当目标进入传感范围和主题车辆周长的视野内的时候，传感器或传感阵列优选地位于车辆的周长（例如，前部）处或附近，由此促进最佳视线位置传感（图1的附图标记25）。再者，理想的是最佳比赛经历具有全360度视野中可能的最多样情况认知（见图2）。因此，可以理解多个位置传感器可以沿着车辆的周长位于各种不同的点和方位，由此促进来自任何方向的目标、它们的范围、距离变率和角位置的传感。不过应理解的是，部分周长覆盖范围是完全可接收的并可能实际上从车辆制造商实施产品系统的成本/效益考虑是优选的。
用于为增强实境游戏系统提供数据的另一传感系统包括全球定位系统（GPS）。GPS系统通常包括全球定位系统接收器42和GPS数据库44，其包含以数字地图数据形式的详细道路和公路地图信息。GPS（42和44）使得控制器36能够以经度和纬度坐标的形式从GPS卫星获得实时车辆位置数据。数据库42提供详细信息，其与道路和车道、沿道路或在道路附近定位的各种目标或地标的身份和位置以及拓扑数据有关。这些数据库目标中的一些可以包括例如标记，杆，消防龙头，障碍，桥，桥柱和立交桥。此外，由GPS42利用的数据库44通过远程传送（例如，通过手机，直接卫星或其他远程信息通信网络）能够容易地从GPS客户服务中心更新，使得关于甚至是临时标志或阻挡结构的身份和位置的详细信息在道路相关的构造也可用的简短周期期间设置。一个这样的客户服务中心的例子包括远程信息通信服务系统（未示出）。这样的传感系统可用于构造道路图像和固定式结构，其在道路上或在道路附近，并相对于主题车辆位置覆盖相同的。相对于由于天气或环境照明导致的降低能见度的驾驶条件（其可能对于其他传感系统是有不利影响的），由于GPS 42的实用性而受到青睐。
促进更鲁棒的游戏经历的另一传感系统包括车辆到车辆（V2V）和道旁到车辆（R2V）通信系统46。通信系统46在极限范围内或视野内与其他车辆通信（例如，具有通信能力的图1的远程车辆22，24，26，28和30）。这样的系统可以被更好地称为专用短程通信（DSRC）系统。这样，主车辆和远程车辆能够经由它们各自的通信系统发送与接收相应的车辆数据，包括尺寸，汽车动力学数据（例如，速度、加速度、偏航率、转向轮/轮胎角、制动踏板开关状态等等）以及到和来自彼此的位置数据。
通信系统46也可以与道旁到车辆通信系统通信。这样的系统提供数据，例如即将到来的交通情况、道路建设、事故、道路阻碍或绕道。另外地，信息（例如当前和即将到来的速度限制，通行或不通行区域和通常由道旁引导标识提供的其他信息）能够局部地传送给通过的车辆以接收和处理该信息。
由基于雷达、声纳或激光系统40以及V2V和R2V通信系统46提供的数据由虚拟图像（图标）数据库48处理以提供虚拟图像（例如，图标，符号）以用于并入由照相机38提供的实况视频图象。合并或融合实况图象与虚拟图像提供用于本公开的增强实境游戏系统的增强实境图像。如这里所用的，"增强实境图像"是实况视频图象与形成主车辆前面或周围的环境的模拟模型的虚拟图像（例如，图标）的合并或融合。通常，增强实境图像可以包括用于感兴趣的区域内的感兴趣的每个车辆的矢量计算，其中用于车辆的矢量限定当前前进方向，位置或定位，速度，和车辆的加速/减速。增强实境图像也可以包括从车辆到车辆通信系统46接收的远程车辆的预计的，预测的或推测的特性以预测或预期未来的某些时间的前进方向、位置，速度，以及一个或多个远程车辆的可能的其他参数。在某些实施例中，增强实境图像可以包括信息，其关于主车辆自身和关于主车辆所位于的环境，包括，但没有限制，数据，其关于：周围风景或景观；道路，高速公路，或公路，主车辆正在其上行驶（例如，导航或地图数据）；车道信息；道路，高速公路，或公路的速度限制，主车辆正在其上行驶；以及感兴趣的区域中的其他目标，例如树、建筑物、标记，灯柱等等。
相应地，实况视频图象50，虚拟图像52和GPS数据（例如，车辆指南针方向，当地路标）被提供给控制器36，其包括融合模块56，其合并数据和信息在一起以形成增强实境图像。即，从各个传感器34收集的多个数据被融合成单个集合图像，其提供用于本公开的增强实境游戏系统的合并的实时的（或接近实时）增强实境图像。可选地，实时车辆信息58（例如，当前速度）也可以被合并成增强实境图像，以为游戏乘客提供附加信息。
一旦产生，通过车内有线连接器60（例如车内数据总线）或通过无线连接器62实时（或在控制器的给定某处理时间尽可能实时地）提供增强实境图像给游戏乘客到显示器64。在有线的实施例中，显示64可以被构造成座椅背部乘客面前，或被构造成弹出或降下头上视频显示系统（未示出）。在无线的实施例中，显示器64可以是任何移动笔记本电脑或平板电脑（例如，例如Apple®的iPAD®）或便携式专用游戏系统。在替代的或附加的实施例中，增强实境图像可以通过高带宽低延迟通信系统66（例如第三代（3G）或第四代（4G）手机通信系统）传送给远程游戏玩家。这样，远程（例如，家）玩家能够沿着主车辆的操作者驾驶的路径跟随而且还进行增强实境游戏。用于交互游戏的游戏控制可以通过常规的游戏控制器、触屏显示器或其他游戏输入装置由游戏乘客（或远程玩家）输入。
图4示出了适合于允许乘客进行本公开的增强实境游戏的示例性移动平板电脑400。通常，移动平板电脑400包括壳体402和显示区域404。在玩游戏期间，屏幕404由实况照相机区域406提供，各种虚拟图像（图标）416可以被合并到实况照相机区域406中。在一些实施例中，显示器404的部分408被保留（例如，虚拟仪表板）以用于游戏信息，例如游戏分数410，虚拟后视镜（假设面向后的照相机在主车辆中可用）或其他游戏信息414（例如，指示游戏玩家是否展现安全、鲁莽或危险的驾驶习惯）。图标416可以代表从传感器导出的任何信息（图3的附图标记34），包括代表虚拟车辆由游戏玩家驾驶的图标或符号。为了控制游戏乘客符号车辆，平板电脑400可以包括加速计（未示出），其通过使平板电脑400转向右（418）或左（420）提供转向。加速可以通过远离玩家稍微倾斜（422）而控制，而减速可以通过朝向玩家的相反倾斜（424）而控制。转弯或转向可以由按钮或触摸传感器426和428指示从而分别指示向右或向左操作。
在一个实施例中，增强实境游戏实现为教育驾驶经历游戏，其中乘客操作虚拟车辆跟随交通中的主车辆。游戏点可以增加到游戏分数或从游戏分数中减去（410），其取决于游戏乘客展现的驾驶习惯。例如，适当的车辆距离，驾驶速度和变道操纵增加游戏分数，而超速，未进行信号操作或堵塞在交通中将会引起游戏分数被减少。替代地，各种图标（414）可以向游戏乘客展示安全的，有风险的或危险驾驶习惯。基于实时主车辆操作提供增强实境驾驶经历为游戏乘客提供逼真的驾驶经历以用于他们的教育和娱乐。此外，因为主车辆的操作者（驾驶员）知道增强实境驾驶游戏是在进行中的，驾驶员更自觉地安全驾驶，从而为了游戏乘客设置正确的例子。
现在参照图5，示出了用于提供增强实境游戏系统的方法500的流程图。结合图5的方法500执行的各种任务可以由软件、硬件、固件或其任意组合执行。为了说明性目的，图5的方法的下面描述可以涉及结合图1-4在上面提到的元件。在实践中，图5的方法的部分可以由所述系统的不同元件执行。还应认识到，图5的方法可以包括任意数量的额外或替代任务并且图5的方法可以并入更广泛的程序或过程，其具有此处没有详细描述的额外功能。此外，图5所示的一个或多个任务可以从图5的方法的实施例中省略，只要预计的总体功能保持完整。
方法500在步骤502中开始，其中实时视频图像（图3中的附图标记50）被捕获以用于与步骤504中提供的虚拟图像合并（融合）。如上所述，虚拟图像可以来自数据库（图3中的附图标记48）或来自GPS数据（图3中的附图标记54）或其他信息源。接着，在步骤506中，操作主车辆数据（图3中的附图标记58）也可以被收集以用于与实时视频图像和虚拟图像融合。决定508确定是否附加信息或数据是可用的，例如来自V2V或R2V源的（例如，来自图3中的通信系统46）。如果是，步骤510包括这样的信息或数据以与其它信息合并。否则，程序继续到步骤512，其融合实时视频图像与所有其他虚拟图像和数据。现在产生的增强实境图像被传送（图3中的附图标记60，62或66）给游戏玩家。最后，步骤516在玩游戏期间接收玩家输入。
相应地，增强实境游戏系统被提供用于车辆，其为游戏乘客提供用于他们的教育和娱乐的逼真的驾驶经历。此外，因为主车辆的操作者（驾驶员）知道增强实境驾驶游戏是在进行中的，驾驶员更自觉地安全驾驶，从而为了游戏乘客设置正确的例子。
尽管在前面的发明内容和具体实施方式中已经展现了至少一个示例性实施例，应当认识到存在大量变化。还应当认识到，一个或多个示例性实施例仅为例子，并不旨在以任何方式限制本公开的范围，应用性，或构造。而是，前面的发明内容和具体实施方式将为本领域技术人员提供实施一个或多个实施例的便利的路线图。应当理解，在不背离由所附权利要求和其法律等同体限定的本公开范围的情况下，元件的功能和布置可以做出各种变化。

Claims (10)

1.一种方法，包括：
在车辆操作过程中，从车辆上安装的照相机接收实时视频图像；
使实时视频图像，车辆操作数据与一个或多个虚拟图像合并以提供增强实境图像；以及
在车辆操作过程中，传送增强实境图像。
2.如权利要求1所述的方法，其特征在于，传送进一步包括传送增强实境图像到车辆内安装的显示器。
3.如权利要求1所述的方法，其特征在于，传送进一步包括传送增强实境图像到车辆内操作的移动电脑或游戏系统的显示器。
4.如权利要求1所述的方法，其特征在于，传送进一步包括传送增强实境图像在车辆远程操作的移动电脑或游戏系统的显示器。
5.如权利要求1所述的方法，其特征在于，车辆操作数据包括以下组中的至少一个：车辆速度，车辆方向；或车辆加速度。
6.如权利要求1所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，从雷达或声纳系统接收数据；以及
使数据的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境图像。
7.如权利要求1所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，接收全球定位数据；以及
使全球定位数据的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境图像。
8.如权利要求1所述的方法，其特征在于，其进一步包括：
在车辆操作过程中，从道旁信息源接收信息；以及
使信息的至少一部分与实时视频图像和一个或多个虚拟图像合并以提供增强实境图像。
9.一种方法，包括：
在车辆操作过程中，从车辆上安装的照相机接收实时视频图像；
在车辆操作过程中，从其他信息源接收信息，所述信息源自信息源的以下组中的至少一个：雷达；激光；声纳；全球定位；或道旁信息；
使用所述信息产生一个或多个虚拟图像；
使实时视频图像与一个或多个虚拟图像合并以提供增强实境游戏图像；以及
在车辆操作过程中，传送增强实境游戏图像。
10.一种车辆，包括：
提供实时视频图像的照相机；
联接到照相机的控制器，所述控制器带有数据库，所述数据库具有一个或多个虚拟图像，并且所述控制器配置成通过使车辆操作数据与实时视频图像和一个或多个虚拟图像合并来提供增强实境图像；以及
发射器，其用于在车辆操作过程中传送增强实境图像。
CN201210368145.8A 2011-09-30 2012-09-28 用于乘客的娱乐和教育的前后座增强实境车辆游戏系统 Expired - Fee Related CN103028243B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/249,983 2011-09-30
US13/249983 2011-09-30
US13/249,983 US20130083061A1 (en) 2011-09-30 2011-09-30 Front- and rear- seat augmented reality vehicle game system to entertain & educate passengers

Publications (2)

Publication Number Publication Date
CN103028243A true CN103028243A (zh) 2013-04-10
CN103028243B CN103028243B (zh) 2018-11-30

Family

ID=47878789

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210368145.8A Expired - Fee Related CN103028243B (zh) 2011-09-30 2012-09-28 用于乘客的娱乐和教育的前后座增强实境车辆游戏系统

Country Status (3)

Country Link
US (1) US20130083061A1 (zh)
CN (1) CN103028243B (zh)
DE (1) DE102012214988B4 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106110657A (zh) * 2016-07-18 2016-11-16 杨跃龙 一种基于地理位置和速度的驾驶者互动和游戏系统
CN107108045A (zh) * 2014-11-07 2017-08-29 空中客车集团简化股份公司 用于全程运输乘客的设备
CN107315988A (zh) * 2016-04-26 2017-11-03 百度（美国）有限责任公司 用于在无人驾驶车辆中呈现媒体内容的系统和方法
CN107589851A (zh) * 2017-10-17 2018-01-16 极鱼（北京）科技有限公司 汽车的交互方法和系统
CN108519815A (zh) * 2018-03-26 2018-09-11 广东欧珀移动通信有限公司 基于增强现实的车辆控制方法、装置、存储介质和电子设备
US10341162B2 (en) 2017-09-12 2019-07-02 Pacific Import Manufacturing, Inc. Augmented reality gaming system
WO2019192270A1 (zh) * 2018-04-03 2019-10-10 网易（杭州）网络有限公司 在增强现实中控制虚拟控制对象移动的方法、装置及终端
CN110371114A (zh) * 2018-04-13 2019-10-25 本田技研工业株式会社 车辆控制装置、车辆控制方法及存储介质
CN110404255A (zh) * 2019-08-07 2019-11-05 广州小鹏汽车科技有限公司 车辆间的游戏互动方法、装置、车辆及机器可读介质
WO2019218791A1 (zh) * 2018-05-18 2019-11-21 腾讯科技（深圳）有限公司 虚拟车辆的控制方法、模型训练方法、控制设备及存储介质
CN113082691A (zh) * 2021-03-05 2021-07-09 东风汽车集团股份有限公司 赛车游戏控制方法、装置、设备及可读存储介质
CN114567783A (zh) * 2022-01-10 2022-05-31 上海哲奥实业有限公司 一种驾车游戏的处理方法、装置及计算机存储介质

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101387189B1 (ko) * 2012-05-30 2014-04-29 삼성전기주식회사 운행 보조정보 표시장치 및 운행 보조정보 표시방법
US20140043482A1 (en) * 2012-08-07 2014-02-13 Chui-Min Chiu Vehicle security system
US10408632B2 (en) * 2012-12-27 2019-09-10 Harman International Industries, Inc. Vehicle navigation
DE102013215095A1 (de) * 2013-08-01 2015-02-05 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Vermeidung von Beeinträchtigungen der Gesundheit eines Fahrzeuginsassen unter Nutzung der Fahrzeugdynamik
US9715764B2 (en) 2013-10-03 2017-07-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9547173B2 (en) 2013-10-03 2017-01-17 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9630631B2 (en) 2013-10-03 2017-04-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9536353B2 (en) 2013-10-03 2017-01-03 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9613459B2 (en) 2013-12-19 2017-04-04 Honda Motor Co., Ltd. System and method for in-vehicle interaction
US10583354B2 (en) 2014-06-06 2020-03-10 Lego A/S Interactive game apparatus and toy construction system
WO2016050757A1 (en) 2014-10-02 2016-04-07 Lego A/S Game system
US10943395B1 (en) 2014-10-03 2021-03-09 Virtex Apps, Llc Dynamic integration of a virtual environment with a physical environment
US9943754B2 (en) * 2014-11-14 2018-04-17 United Services Automobile Association System, method and apparatus for collecting and utilizing big data for online gameplay
US10026450B2 (en) * 2015-03-31 2018-07-17 Jaguar Land Rover Limited Content processing and distribution system and method
DE102015207337B4 (de) 2015-04-22 2024-06-06 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Unterhaltung mindestens eines Insassen eines Kraftfahrzeugs
KR102375411B1 (ko) * 2015-05-11 2022-03-18 삼성전자주식회사 차량 주변 영상 제공 방법 및 장치
US9964765B2 (en) * 2015-09-11 2018-05-08 The Boeing Company Virtual display of the real-time position of a robotic device to a human operator positioned on an opposing side of an object
EP3353763A1 (en) 2015-09-25 2018-08-01 Apple Inc. Augmented reality display system
US10589625B1 (en) 2015-12-11 2020-03-17 Disney Enterprises, Inc. Systems and methods for augmenting an appearance of an actual vehicle component with a virtual vehicle component
US10969748B1 (en) * 2015-12-28 2021-04-06 Disney Enterprises, Inc. Systems and methods for using a vehicle as a motion base for a simulated experience
US11524242B2 (en) 2016-01-20 2022-12-13 Disney Enterprises, Inc. Systems and methods for providing customized instances of a game within a virtual space
JP6232649B2 (ja) * 2016-02-18 2017-11-22 国立大学法人名古屋大学 仮想空間表示システム
DE102016210088B3 (de) 2016-06-08 2017-07-06 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Darstellung einer Umgebung eines Kraftfahrzeugs
US10205890B2 (en) 2016-07-25 2019-02-12 Ford Global Technologies, Llc Systems, methods, and devices for rendering in-vehicle media content based on vehicle sensor data
KR102366723B1 (ko) * 2016-10-11 2022-02-23 삼성전자주식회사 운송 수단으로 시야 확보 영상을 제공하는 방법, 이를 위한 전자 장치 및 컴퓨터 판독 가능한 기록 매체
US10647289B2 (en) 2016-11-15 2020-05-12 Ford Global Technologies, Llc Vehicle driver locator
CN106781822B (zh) * 2016-12-03 2019-07-05 西安科锐盛创新科技有限公司 提高驾驶安全性的系统和方法
US10455165B2 (en) 2016-12-28 2019-10-22 Microsoft Technology Licensing, Llc Systems, methods, and computer-readable media for using a video capture device to alleviate motion sickness via an augmented display for a passenger
US10627909B2 (en) 2017-01-10 2020-04-21 Disney Enterprises, Inc. Simulation experience with physical objects
US10332292B1 (en) * 2017-01-17 2019-06-25 Zoox, Inc. Vision augmentation for supplementing a person's view
EP3370085B1 (en) * 2017-03-01 2021-10-13 Aptiv Technologies Limited Method of tracking a plurality of objects in the vicinity of a host vehicle
US10467980B2 (en) * 2017-03-07 2019-11-05 Panasonic Avionics Corporation Systems and methods for supporting augmented reality applications on a transport vehicle
US10580386B2 (en) * 2017-04-21 2020-03-03 Ford Global Technologies, Llc In-vehicle projected reality motion correction
US10331125B2 (en) * 2017-06-06 2019-06-25 Ford Global Technologies, Llc Determination of vehicle view based on relative location
US10357715B2 (en) * 2017-07-07 2019-07-23 Buxton Global Enterprises, Inc. Racing simulation
US10585471B2 (en) 2017-10-03 2020-03-10 Disney Enterprises, Inc. Systems and methods to provide an interactive space based on predicted events
US10970560B2 (en) 2018-01-12 2021-04-06 Disney Enterprises, Inc. Systems and methods to trigger presentation of in-vehicle content
WO2019190722A1 (en) * 2018-03-28 2019-10-03 Pearson Education, Inc. Systems and methods for content management in augmented reality devices and applications
US10698206B2 (en) 2018-05-31 2020-06-30 Renault Innovation Silicon Valley Three dimensional augmented reality involving a vehicle
DE102018210390B4 (de) 2018-06-26 2023-08-03 Audi Ag Verfahren zum Betreiben einer Anzeigeeinrichtung in einem Kraftfahrzeug und Anzeigesystem für ein Kraftfahrzeug
US10841632B2 (en) 2018-08-08 2020-11-17 Disney Enterprises, Inc. Sequential multiplayer storytelling in connected vehicles
US10882617B2 (en) * 2018-10-11 2021-01-05 Rockwell Collins, Inc. Aircraft based augmented and virtual reality passenger social media interaction system and related method
US11504626B2 (en) * 2018-11-29 2022-11-22 Ts Tech Co., Ltd. Seat system and seat experience device
US10625676B1 (en) * 2018-12-03 2020-04-21 GM Global Technology Operations LLC Interactive driving system and method
JP2020144332A (ja) * 2019-03-08 2020-09-10 トヨタ自動車株式会社 仮想現実システムおよび仮想現実方法
US10785621B1 (en) * 2019-07-30 2020-09-22 Disney Enterprises, Inc. Systems and methods to provide an interactive space based on vehicle-to-vehicle communications
JP7431538B2 (ja) * 2019-09-10 2024-02-15 株式会社カプコン ゲームプログラム、車両、及びゲームシステム
CN110677476B (zh) * 2019-09-27 2023-01-20 大陆投资(中国)有限公司 基于车辆的电子装置
US11087529B2 (en) * 2019-09-27 2021-08-10 Disney Enterprises, Inc. Introducing real-time lighting effects to illuminate real-world physical objects in see-through augmented reality displays
JP6974782B2 (ja) * 2019-10-01 2021-12-01 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP6901541B2 (ja) * 2019-11-28 2021-07-14 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
JP6974780B2 (ja) * 2019-11-28 2021-12-01 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
US11076276B1 (en) 2020-03-13 2021-07-27 Disney Enterprises, Inc. Systems and methods to provide wireless communication between computing platforms and articles
US20210316797A1 (en) * 2020-04-13 2021-10-14 Kelvin Cannon Personal Transportation Vehicle
DE102020114656A1 (de) 2020-06-02 2021-12-02 Audi Aktiengesellschaft Informationsverarbeitungssystem und verfahren zur verarbeitung von information
CN113847929A (zh) * 2020-06-28 2021-12-28 宝能汽车集团有限公司 车辆及其控制方法、装置和存储介质
US11571622B2 (en) * 2020-08-12 2023-02-07 GM Global Technology Operations LLC In-vehicle gaming systems and methods
WO2023092375A1 (en) * 2021-11-25 2023-06-01 Citrix Systems, Inc. Computing device with live background and related method
US20230321533A1 (en) * 2022-04-07 2023-10-12 Ford Global Technologies, Llc Systems and methods to entertain an occupant of a vehicle
DE102022120134A1 (de) 2022-08-10 2024-02-15 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zum Bereitstellen eines Computerspiels in einem Fahrzeug
US11948227B1 (en) * 2023-04-18 2024-04-02 Toyota Motor Engineering & Manufacturing North America, Inc. Eliminating the appearance of vehicles and/or other objects when operating an autonomous vehicle
CN117173240B (zh) * 2023-11-03 2024-02-06 天津信天电子科技有限公司 伺服控制驱动器的ar辅助装配方法、装置、设备及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1543200A (zh) * 2003-04-22 2004-11-03 ���µ�����ҵ��ʽ���� 联合摄像机构成的监视装置
US20050221759A1 (en) * 2004-04-01 2005-10-06 Spadafora William G Intelligent transportation system
US20060223637A1 (en) * 2005-03-31 2006-10-05 Outland Research, Llc Video game system combining gaming simulation with remote robot control and remote robot feedback
US20060284839A1 (en) * 1999-12-15 2006-12-21 Automotive Technologies International, Inc. Vehicular Steering Wheel with Input Device
US20080311983A1 (en) * 2007-06-14 2008-12-18 Panasonic Autmotive Systems Co. Of America, Division Of Panasonic Corp. Of North America Vehicle entertainment and Gaming system
CN101876827A (zh) * 2009-11-20 2010-11-03 海安县奇锐电子有限公司 无人驾驶汽车

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5316480A (en) * 1993-02-10 1994-05-31 Ellsworth Thayne N Portable multiple module simulator apparatus
US5983161A (en) * 1993-08-11 1999-11-09 Lemelson; Jerome H. GPS vehicle collision avoidance warning and control system and method
IL152412A0 (en) * 2000-04-24 2004-05-12 Video Domain Technologies Ltd Surveillance system with camera
DE10152855A1 (de) * 2001-10-25 2003-05-15 Manfred Eckelt Vorrichtung für den drahtlosen Datentransfer sowie Verfahren zur Durchführung von drahtlosem Datentransfer
US7050630B2 (en) * 2002-05-29 2006-05-23 Hewlett-Packard Development Company, L.P. System and method of locating a non-textual region of an electronic document or image that matches a user-defined description of the region
US7102496B1 (en) * 2002-07-30 2006-09-05 Yazaki North America, Inc. Multi-sensor integration for a vehicle
US7174153B2 (en) * 2003-12-23 2007-02-06 Gregory A Ehlers System and method for providing information to an operator of an emergency response vehicle
JP3875697B2 (ja) * 2004-05-06 2007-01-31 松下電器産業株式会社 車載情報処理装置
DE102004048347A1 (de) * 2004-10-01 2006-04-20 Daimlerchrysler Ag Fahrassistenzvorrichtung zur gegenüber dem Sichtfeld des Fahrers eines Kraftfahrzeugs positionsrichtigen Darstellung des weiteren Straßenverlaufs auf einem Fahrzeugdisplay
WO2007011522A2 (en) * 2005-07-14 2007-01-25 Gm Global Technology Operations, Inc. Remote perspective vehicle environment observation system
US7486199B2 (en) * 2005-11-17 2009-02-03 Nissan Technical Center North America, Inc. Forward vehicle brake warning system
US7991550B2 (en) * 2006-02-03 2011-08-02 GM Global Technology Operations LLC Method and apparatus for on-vehicle calibration and orientation of object-tracking systems
WO2009047366A2 (en) * 2007-10-12 2009-04-16 Toyota Motor Europe Nv Methods and systems for processing of video data
US20090228172A1 (en) * 2008-03-05 2009-09-10 Gm Global Technology Operations, Inc. Vehicle-to-vehicle position awareness system and related operating method
DE102008028373A1 (de) * 2008-06-13 2009-12-24 Audi Ag Verfahren zur kombinierten Ausgabe eines Bildes und einer Fahrinformation, sowie Kraftfahrzeug hierfür
DE102008034594B4 (de) 2008-07-25 2021-06-24 Bayerische Motoren Werke Aktiengesellschaft Verfahren sowie Informationssystem zur Information eines Insassen eines Fahrzeuges
DE102008034606A1 (de) 2008-07-25 2010-01-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Darstellung der Umgebung eines Fahrzeugs auf einer mobilen Einheit
US8229663B2 (en) * 2009-02-03 2012-07-24 GM Global Technology Operations LLC Combined vehicle-to-vehicle communication and object detection sensing
WO2010099416A1 (en) * 2009-02-27 2010-09-02 Magna Electronics Alert system for vehicle
DE102009051265A1 (de) * 2009-10-29 2010-07-01 Daimler Ag Anzeigeeinheit für ein Kraftfahrzeug und Verfahren zum Anzeigen einer Bildinformation über eine Umgebung des Kraftfahrzeugs
US20110150434A1 (en) * 2009-12-23 2011-06-23 Empire Technology Development Llc A Pan camera controlling method
US8669857B2 (en) * 2010-01-13 2014-03-11 Denso International America, Inc. Hand-held device integration for automobile safety
US20110185390A1 (en) * 2010-01-27 2011-07-28 Robert Bosch Gmbh Mobile phone integration into driver information systems

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060284839A1 (en) * 1999-12-15 2006-12-21 Automotive Technologies International, Inc. Vehicular Steering Wheel with Input Device
CN1543200A (zh) * 2003-04-22 2004-11-03 ���µ�����ҵ��ʽ���� 联合摄像机构成的监视装置
US20050221759A1 (en) * 2004-04-01 2005-10-06 Spadafora William G Intelligent transportation system
US20060223637A1 (en) * 2005-03-31 2006-10-05 Outland Research, Llc Video game system combining gaming simulation with remote robot control and remote robot feedback
US20080311983A1 (en) * 2007-06-14 2008-12-18 Panasonic Autmotive Systems Co. Of America, Division Of Panasonic Corp. Of North America Vehicle entertainment and Gaming system
CN101876827A (zh) * 2009-11-20 2010-11-03 海安县奇锐电子有限公司 无人驾驶汽车

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107108045A (zh) * 2014-11-07 2017-08-29 空中客车集团简化股份公司 用于全程运输乘客的设备
CN107315988A (zh) * 2016-04-26 2017-11-03 百度（美国）有限责任公司 用于在无人驾驶车辆中呈现媒体内容的系统和方法
CN106110657A (zh) * 2016-07-18 2016-11-16 杨跃龙 一种基于地理位置和速度的驾驶者互动和游戏系统
US10341162B2 (en) 2017-09-12 2019-07-02 Pacific Import Manufacturing, Inc. Augmented reality gaming system
CN107589851A (zh) * 2017-10-17 2018-01-16 极鱼（北京）科技有限公司 汽车的交互方法和系统
CN108519815A (zh) * 2018-03-26 2018-09-11 广东欧珀移动通信有限公司 基于增强现实的车辆控制方法、装置、存储介质和电子设备
WO2019192270A1 (zh) * 2018-04-03 2019-10-10 网易（杭州）网络有限公司 在增强现实中控制虚拟控制对象移动的方法、装置及终端
US11504624B2 (en) 2018-04-03 2022-11-22 Netease (Hangzhou) Network Co., Ltd. Method and apparatus for controlling movement of virtual object in augmented reality, and terminal
CN110371114A (zh) * 2018-04-13 2019-10-25 本田技研工业株式会社 车辆控制装置、车辆控制方法及存储介质
US11135513B2 (en) 2018-05-18 2021-10-05 Tencent Technology (Shenzhen) Company Limited Virtual vehicle control method, model training method, control device and storage medium
WO2019218791A1 (zh) * 2018-05-18 2019-11-21 腾讯科技（深圳）有限公司 虚拟车辆的控制方法、模型训练方法、控制设备及存储介质
CN110404255A (zh) * 2019-08-07 2019-11-05 广州小鹏汽车科技有限公司 车辆间的游戏互动方法、装置、车辆及机器可读介质
CN113082691A (zh) * 2021-03-05 2021-07-09 东风汽车集团股份有限公司 赛车游戏控制方法、装置、设备及可读存储介质
CN113082691B (zh) * 2021-03-05 2023-05-23 东风汽车集团股份有限公司 赛车游戏控制方法、装置、设备及可读存储介质
CN114567783A (zh) * 2022-01-10 2022-05-31 上海哲奥实业有限公司 一种驾车游戏的处理方法、装置及计算机存储介质
CN114567783B (zh) * 2022-01-10 2023-02-07 上海哲奥实业有限公司 一种驾车游戏的处理方法、装置及计算机存储介质

Also Published As

Publication number Publication date
DE102012214988A1 (de) 2013-04-04
DE102012214988B4 (de) 2020-06-25
US20130083061A1 (en) 2013-04-04
CN103028243B (zh) 2018-11-30

Similar Documents

Publication Publication Date Title
CN103028243A (zh) 用于乘客的娱乐和教育的前后座增强实境车辆游戏系统
US10394345B2 (en) Lidar display systems and methods
US9507345B2 (en) Vehicle control system and method
JP7039940B2 (ja) 車両制御装置
US20070016372A1 (en) Remote Perspective Vehicle Environment Observation System
US9373255B2 (en) Method and system for producing an up-to-date situation depiction
US20170076605A1 (en) Vehicle recognition notification apparatus and vehicle recognition notification system
CN111664854A (zh) 物体位置指示器系统和方法
EP3506239A1 (en) Vehicle on-board communication device and vehicle
CN109952491B (zh) 生成由车辆的感知系统检测的对象的表示的方法和系统
US20210039674A1 (en) Path providing device and path providing method thereof
US11840173B2 (en) External facing communications for autonomous vehicles
CN115298520A (zh) 显示装置、显示方法及车辆
JP6956132B2 (ja) 撮影システム、サーバ、制御方法およびプログラム
US20220221298A1 (en) Vehicle control system and vehicle control method
JP7315101B2 (ja) 障害物情報管理装置、障害物情報管理方法、車両用装置
KR102611338B1 (ko) 차량의 ar 디스플레이 장치 및 그것의 동작방법
EP4372315A1 (en) Route guidance device and route guidance system based on augmented reality and mixed reality
US20240003700A1 (en) Route guidance device and route guidance system
JP2019117435A (ja) 画像生成装置
CN115996869A (zh) 信息处理装置、信息处理方法、信息处理系统和程序
CN113928335A (zh) 用于控制具有自主驾驶模式的车辆的方法和系统
JP2019117434A (ja) 画像生成装置
JP7333445B2 (ja) 画像生成装置
JP2024011841A (ja) 仮想画像表示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181130

CF01 Termination of patent right due to non-payment of annual fee