CN111161008A - Ar/vr/mr乘车共享助理 - Google Patents

Ar/vr/mr乘车共享助理 Download PDF

Info

Publication number
CN111161008A
CN111161008A CN201911085730.5A CN201911085730A CN111161008A CN 111161008 A CN111161008 A CN 111161008A CN 201911085730 A CN201911085730 A CN 201911085730A CN 111161008 A CN111161008 A CN 111161008A
Authority
CN
China
Prior art keywords
ride share
vehicle
data
user device
ride
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911085730.5A
Other languages
English (en)
Other versions
CN111161008B (zh
Inventor
J·肯尼
G·班赛尔
卢红升
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN111161008A publication Critical patent/CN111161008A/zh
Application granted granted Critical
Publication of CN111161008B publication Critical patent/CN111161008B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0645—Rental transactions; Leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/3407—Route searching; Route guidance specially adapted for specific applications
    • G01C21/3438—Rendez-vous, i.e. searching a destination where several users can meet, and the routes to this destination for these users; Ride sharing, i.e. searching a route such that at least two users can share a vehicle for at least part of the route
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/03—Cooperating elements; Interaction or communication between different cooperating elements or between cooperating elements and receivers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/023—Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/025—Services making use of location information using location based information parameters
    • H04W4/027—Services making use of location information using location based information parameters using movement velocity, acceleration information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/70—Services for machine-to-machine communication [M2M] or machine type communication [MTC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10—Recognition assisted with metadata

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Remote Sensing (AREA)
  • Signal Processing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • General Engineering & Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Finance (AREA)
  • Databases & Information Systems (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Automation & Control Theory (AREA)
  • Development Economics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Tourism & Hospitality (AREA)
  • Traffic Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

AR/VR/MR乘车共享助理。本公开包括用于在用户设备上提供增强图形数据的实施例。在一些实施例中，方法包括由用户设备接收由乘车共享车辆发送的车辆对一切V2X无线消息，该V2X无线消息包括描述乘车共享车辆的V2X数据。该方法包括基于V2X数据生成增强图形数据，其中增强图形数据描述由用户设备捕获的图像的增强版本，该图像描绘包括乘车共享车辆的现实生活环境，其中增强版本在现实生活环境内突出显示乘车共享车辆的位置。该方法包括在用户设备上呈现增强图形数据，从而更容易在现实生活环境中定位乘车共享车辆。

Description

AR/VR/MR乘车共享助理
技术领域
本说明书涉及提供乘车共享(ride share)服务。特别地，本说明书涉及生成增强现实(AR)/虚拟现实(VR)/混合现实(MR)输出，以辅助用户定位提供乘车共享服务的乘车共享车辆。
背景技术
乘车共享应用程序(例如，优步(Uber)、莱福特(Lyft)等)正变得越来越流行。现有乘车共享应用程序的一个问题是，当乘车共享车辆位于其他车辆的群集中时，乘车共享乘客可能难以定位乘车共享车辆。例如，假设使用乘车共享车辆向乘车共享乘客(例如，现有乘车共享应用程序的用户)提供乘车共享服务。乘车共享车辆试图在机场或使用乘车共享车辆的任何其他位置接送乘车共享乘客；乘车共享车辆在乘车共享乘客附近，但是乘车共享乘客却努力寻找乘车共享车辆，因为乘车共享车辆位于其他车辆的群集中(例如，乘车共享车辆被其他车辆包围)。
现有乘车共享应用程序可以向乘车共享乘客提供乘车共享车辆的以下信息：(1)乘车共享车辆的品牌(make)；(2)乘车共享车辆的型号；(3)乘车共享车辆的车牌号；(4)乘车共享车辆的驾驶员的头像图像；和(5)地图图像，该地图图像描绘当乘车共享车辆行驶到靠近乘车共享乘客的位置时的乘车共享车辆的图画。使用该信息，乘车共享乘客有望在公共场所搜索乘车共享车辆。然而，当乘车共享车辆位于其他车辆的群集中时，该信息对于乘车共享乘客定位乘车共享车辆来说不是方便或客户友好的方式。该方法还花费大量时间，并且使当他/她在繁忙的人行道上等待时不想担心他/她是否能够在拥挤的街道上寻找到乘车共享车辆的用户感到焦虑。此外，在一些情况下，乘车共享乘客位于路边，并且乘车共享车辆由于交通拥堵而无法到达路边(例如，机场是发生这种情况的常见场景，但是其他场景也是可能的)，从而造成不安全的情况，其中乘车共享乘客必须在街上行走以便寻找乘车共享车辆，或以其他方式取消乘车共享服务并且预定另一车辆。
发明内容
描述了安装在乘车共享乘客的用户设备中的乘车共享助理和安装在乘车共享车辆的电子控制单元(ECU)中的乘车共享客户端的实施例。乘车共享助理和乘车共享客户端彼此协作，以在难以在许多其他车辆当中识别乘车共享车辆的情况下，或者在乘车共享乘客可能努力定位乘车共享车辆的任何其他情况下，使乘车共享乘客更容易寻找到乘车共享车辆。
在一些实施例中，乘车共享客户端和乘车共享助理经由车辆对一切(V2X)通信彼此进行通信。乘车共享客户端使乘车共享车辆的V2X无线电装置向乘车共享乘客的用户设备(例如智能电话)发送V2X无线消息。该V2X无线消息包括描述乘车共享车辆的地理位置的数字数据。用户设备生成描述用户设备的地理位置的数字数据。乘车共享助理是独立的乘车共享应用程序(类似于优步(Uber)或莱福特(Lyft))、或现有乘车共享应用程序的插件或模块。
乘车共享助理使用用户设备的电子显示器来生成AR/VR/MR输出，该AR/VR/MR输出描绘用户设备的环境(或乘车共享乘客的环境)的图像，并且在该环境内突出显示乘车共享车辆的位置。例如，乘车共享乘客正在寻找乘车共享车辆。乘车共享乘客举起他/她的智能电话，就像他/她将要拍摄环境图像一样。当他/她这样做时，他/她的智能电话的相机捕获图像数据，并且智能电话的显示器描绘乘车共享乘客的环境的实时现实生活图像。乘车共享车辆位于该环境内。乘车共享助理修改智能电话上显示的图像，以在环境内突出显示乘车共享车辆的位置。例如，图像是黑白的，但是乘车共享车辆是彩色的。用于突出显示乘车共享车辆的位置的许多其他变型是可能的，包括例如突出显示乘车共享车辆的位置的图形覆盖(overlay)。当环境中的对象移动或智能电话的取向改变(例如，乘车共享乘客的手移动)时，图像实时或接近实时地更新。
在一些实施例中，乘车共享助理接收以下输入，并且基于这些输入来输出由用户设备的电子显示器显示的图像：(1)描述乘车共享车辆的地理位置的数字数据；(2)描述用户设备的地理位置的数字数据；(3)描述乘车共享车辆的环境的图像的相机数据；和(4)描述用户设备的显示器的取向或取向变化的传感器数据。
在一些实施例中，路侧单元(RSU)在乘车共享客户端与乘车共享助理之间中继V2X通信。
没有现有解决方案使用AR/VR/MR内容来帮助乘车共享乘客定位乘车共享车辆。相反，一些现有解决方案向乘车共享乘客提供基本信息，并且期望乘车共享乘客手动定位乘车共享车辆。例如，现有解决方案可以向乘车共享乘客提供当前环境的地图图像，该地图图像描绘(1)乘车共享乘客在环境中的位置，以及(2)示出车辆随着时间的流逝越来越靠近乘车共享乘客的位置的车辆的图画。然而，该地图不是AR/VR/MR内容，并且没有描述环境的实际图像。相反，由地图描绘的一切都是图画，而不是实际世界的图像。相比之下，在本文中描述的一些实施例中，乘车共享助理使用乘车共享乘客的用户设备的相机来捕获实际环境的图像。当这些图像被实时地捕获时，用户设备的显示器描绘这些图像。当乘车共享车辆出现在图像中时，以某种方式修改乘车共享车辆的外形，使得乘车共享乘客能够辨别图像中描绘的车辆是他/她的乘车共享车辆。其他实施例是可能的。当与现有解决方案相比时，该方法使乘车共享乘客更快且更没有压力地定位他/她的乘车共享车辆。
没有现有解决方案使用V2X通信来帮助乘车共享乘客定位乘车共享车辆。相反，一些现有解决方案使用云服务器，该云服务器存储乘车共享车辆的配置文件，该配置文件包括关于乘车共享车辆的基本信息以及关于乘车共享车辆的位置的实时数据，该实时数据由位于乘车共享车辆内部并且属于乘车共享车辆的驾驶员的智能电话提供给云服务器。然后，云服务器使用WiFi或蜂窝通信向乘车共享乘客的智能电话提供基本信息。相比之下，在本文中描述的实施例中不需要云服务器，因为从乘车共享车辆到乘车共享乘客的用户设备交换V2X通信。与现有解决方案相比，该方法更快且更容易实现。
此外，没有现有解决方案使用乘车共享车辆的车载传感器来帮助乘车共享乘客定位乘车共享车辆。在一些现有解决方案中，乘车共享车辆在地图中的位置是通过使用由乘车共享车辆的驾驶员操作的智能电话的全球定位系统(如果一般地引用，则为“GPS”，或者如果引用特定设备，则为“GPS单位”)来确定的。相比之下，在本文中描述的一些实施例中，乘车共享客户端使用乘车共享车辆自身的车载传感器来确定乘车共享车辆的位置。
本文中所述的乘车共享客户端和乘车共享助理的附加益处包括由于以下各项中的一个或多个而在位置准确性方面的优点：(1)与只能访问驾驶员的智能电话的位置的现有解决方案相比，使用乘车共享车辆的车载传感器来确定乘车共享车辆的位置；以及(2)与当信息通过多层云基础架构传播到用户设备时的较高延迟相比，经由V2X通信将乘车共享车辆的位置传送到用户设备的乘车共享助理的延迟较低。
例如，当前使用V2X通信的乘车共享车辆通常具有比由乘车共享驾驶员使用的智能电话更准确的GPS单元。对驾驶员的智能电话的位置准确性没有要求。相比之下，配备有V2X的车辆很可能符合1.5米的行业标准定位准确度要求。由于在现有解决方案中，乘车共享乘客仅能访问驾驶员的智能电话的位置(由乘车共享应用程序提供商的提供商中继)，因此由现有解决方案提供的乘车共享服务的定位准确度要低于由本文中所述的乘车共享客户端和乘车共享助理提供的定位准确度。
在另一示例中，本文中所述的乘车共享客户端和乘车共享助理减少了对乘车共享乘客的位置报告的延迟，这还提高了乘客的定位正接近的乘车共享车辆的能力。
一个或多个计算机的系统可以被配置为通过在系统上安装软件、固件、硬件或它们的组合来执行特定操作或动作，所述软件、固件、硬件或它们的组合在操作时使得系统执行动作。一个或多个计算机程序可以被配置为通过包括指令来执行特定操作或动作，所述指令在由数据处理装置执行时使该装置执行动作。
一个总体方面包括一种方法，该方法包括：由用户设备接收由乘车共享车辆发送的车辆对一切V2X无线消息，所述V2X无线消息包括描述所述乘车共享车辆的V2X数据；基于所述V2X数据生成增强图形数据，其中所述增强图形数据描述由所述用户设备捕获的图像的增强版本，所述图像描绘包括所述乘车共享车辆的现实生活环境，其中所述增强版本在所述现实生活环境内突出显示所述乘车共享车辆的位置；以及在所述用户设备上呈现所述增强图形数据，从而更容易在所述现实生活环境中定位所述乘车共享车辆。该方面的其他实施例包括相应的计算机系统、装置和记录在一个或多个计算机存储装置上的计算机程序，各自被配置为执行所述方法的动作。
实现方式可以包括以下特征中的一个或多个。在所述方法中，所述V2X数据包括所述乘车共享车辆的符合专用短距离通信DSRC的全球定位系统GPS数据。所述方法还包括：检索所述用户设备的GPS数据；检索对描绘所述现实生活环境的所述图像进行描述的相机数据；以及基于所述乘车共享车辆的符合DSRC的GPS数据、所述用户设备的GPS数据和所述相机数据，生成所述增强图形数据。在所述方法中，所述图像是由所述用户设备的相机传感器捕获的实时图像。在所述方法中，所述增强图形数据包括增强现实内容、虚拟现实内容和混合现实内容之一，并且通过计算机生成的感知信息来增强所述图像的增强版本上的所述乘车共享车辆。所述方法还包括：检索描述所述用户设备的显示器的取向的传感器数据；以及还基于所述传感器数据生成所述增强图形数据。在所述方法中，所述V2X数据还包括唯一地识别所述乘车共享车辆的第一车辆标识符ID，并且在生成所述增强图形数据之前，所述方法还包括：从所述V2X数据中检索第一车辆ID；从车辆ID数据库中检索第二车辆ID，第二车辆ID唯一地识别被指定为执行与所述用户设备相关联的乘车共享事件的车辆；以及如果第一车辆ID与第二车辆ID匹配，则辨别所述乘车共享车辆是被指定为执行与所述用户设备相关联的所述乘车共享事件的车辆。在所述方法中，第一车辆ID和第二车辆ID是临时唯一标识符。在所述方法中，如果所述乘车共享车辆不在视线中但是在所述用户设备的V2X通信范围内，则生成所述增强图形数据包括：基于所述乘车共享车辆的地理位置将所述乘车共享车辆的表示叠加在所述现实生活环境上，以形成所述图像的增强版本，从而将所述乘车共享车辆的表示与所述现实生活环境一起呈现在所述用户设备上。在所述方法中，所述V2X无线消息是从包括以下各项的组中选择的：DSRC消息；基本安全信息；长期演进LTE消息；LTE-V2X消息；5G-V2X消息；和毫米波消息。在所述方法中，所述乘车共享车辆向所述用户设备的用户提供乘车共享服务，以及所述增强图形数据辅助所述用户定位所述乘车共享车辆并且接收所述乘车共享服务。所描述的技术的实现方式可以包括硬件、方法或处理、或计算机可访问介质上的计算机软件。
一个总体方面包括一种系统，所述系统包括：处理器和存储计算机代码的非暂态存储器，所述计算机代码在由所述处理器执行时使所述处理器：接收由乘车共享车辆发送的车辆对一切V2X无线消息，所述V2X无线消息包括描述所述乘车共享车辆的V2X数据；基于所述V2X数据生成增强图形数据，其中所述增强图形数据描述由用户设备捕获的图像的增强版本，所述图像描绘包括所述乘车共享车辆的现实生活环境，其中所述增强版本在所述现实生活环境内突出显示所述乘车共享车辆的位置；以及在所述用户设备上呈现所述增强图形数据，从而更容易在所述现实生活环境中定位所述乘车共享车辆。该方面的其他实施例包括相应的计算机系统、装置和记录在一个或多个计算机存储装置上的计算机程序，各自被配置为执行所述方法的动作。
实现方式可以包括以下特征中的一个或多个。在所述系统中，所述V2X数据包括所述乘车共享车辆的符合DSRC的GPS数据。在所述系统中，所述计算机代码在由所述处理器执行时使所述处理器还：检索所述用户设备的GPS数据；检索对描绘所述现实生活环境的所述图像进行描述的相机数据；以及基于所述乘车共享车辆的符合DSRC的GPS数据、所述用户设备的GPS数据和所述相机数据，生成所述增强图形数据。在所述系统中，所述图像是由所述用户设备的相机传感器捕获的实时图像。在所述系统中，所述增强图形数据包括增强现实内容、虚拟现实内容和混合现实内容之一，并且通过计算机生成的感知信息来增强所述图像的增强版本上的所述乘车共享车辆。在所述系统中，所述计算机代码在由所述处理器执行时，使所述处理器还：检索描述所述用户设备的显示器的取向的传感器数据；以及还基于所述传感器数据生成所述增强图形数据。所描述的技术的实现方式可以包括硬件、方法或处理、或计算机可访问介质上的计算机软件。
一个总体方面包括一种计算机程序产品，包括存储计算机可执行代码的非暂态存储器，所述计算机可执行代码在由处理器执行时使所述处理器：接收由乘车共享车辆发送的车辆对一切V2X无线消息，所述V2X无线消息包括描述所述乘车共享车辆的V2X数据；基于所述V2X数据生成增强图形数据，其中所述增强图形数据描述由用户设备捕获的图像的增强版本，所述图像描绘包括所述乘车共享车辆的现实生活环境，其中所述增强版本在所述现实生活环境内突出显示所述乘车共享车辆的位置；以及在所述用户设备上呈现所述增强图形数据，从而更容易在所述现实生活环境中定位所述乘车共享车辆。该方面的其他实施例包括相应的计算机系统、装置和记录在一个或多个计算机存储装置上的计算机程序，各自被配置为执行所述方法的动作。
实现方式可以包括以下特征中的一个或多个。在所述计算机程序产品中，所述V2X数据包括所述乘车共享车辆的符合DSRC的GPS数据。在所述计算机程序产品中，所述计算机可执行代码在由所述处理器执行时使所述处理器还：检索所述用户设备的GPS数据；检索对描绘所述现实生活环境的所述图像进行描述的相机数据；以及基于所述乘车共享车辆的符合DSRC的GPS数据、所述用户设备的GPS数据和所述相机数据，生成所述增强图形数据。所描述的技术的实现方式可以包括硬件、方法或处理、或计算机可访问介质上的计算机软件。
附图说明
通过示例而不是通过限制的方式示出了本公开，在附图中，相同的附图标记用来指代相同的元件。
图1A是示出根据一些实施例的用于乘车共享客户端和乘车共享助理的操作环境的框图。
图1B是示出根据一些实施例的用于乘车共享客户端和乘车共享助理的操作环境的另一框图。
图1C是示出根据一些实施例的用于在用户设备上提供增强图形数据的流程处理的框图。
图2是示出根据一些实施例的包括乘车共享助理的示例计算机系统的框图。
图3A描绘根据一些实施例的用于在用户设备上提供增强图形数据的方法。
图3B描绘根据一些实施例的用于在用户设备上提供增强图形数据的另一方法。
图4描绘根据一些实施例的用于提供乘车共享车辆的GPS数据的方法。
图5A-图5B描绘根据一些实施例的用于在用户设备上提供增强图形数据的示例处理。
图6A-图6B描绘根据一些实施例的用于在用户设备上提供增强图形数据的另一示例处理。
图7A是示出根据一些实施例的在现实生活环境中突出显示乘车共享车辆的位置的图像的示例增强版本的图形表示。
图7B是示出根据一些实施例的在现实生活环境中突出显示乘车共享车辆的位置的图像的另一示例增强版本的图形表示。
具体实施方式
现在描述安装在用户设备中的乘车共享助理和安装在乘车共享车辆中的乘车共享客户端彼此协作以生成用于辅助乘车共享乘客定位乘车共享车辆的AR/VR/MR输出的实施例。乘车共享客户端和乘车共享助理经由V2X通信彼此进行通信。本文中描述的V2X通信的示例包括以下各项中的一个或多个：DSRC(包括基本安全消息(BSM)和个人安全消息(PSM)、以及其他类型的DSRC通信)；LTE；毫米波通信；3G；4G；5G-V2X；LTE-V2X；LTE-车辆对车辆(LTE-V2V)；LTE-设备对设备(LTE-D2D)；LTE语音(VoLTE)等。
在一些实施例中，包括乘车共享客户端的乘车共享车辆是配备有DSRC的车辆。配备有DSRC的车辆是以下车辆：(1)该车辆包括DSRC无线电装置；(2)该车辆包括符合DSRC的GPS单元；以及(3)该车辆可操作以在配备有DSRC的车辆所在的司法管辖区中合法地发送和接收DSRC消息。DSRC无线电装置是包括DSRC接收器和DSRC发送器的硬件。DSRC无线电装置可操作以无线地发送和接收DSRC消息。DSRC的范围大约为500米，并且被设计为兼容于在移动节点(诸如车辆和路侧单元(如果是单数，则为“RSU”，如果是复数，则为“RSUs”))之间无线地发送和接收消息。符合DSRC的GPS单元可操作以为车辆(或包括符合DSRC的GPS单元的一些其他配备有DSRC的设备)提供具有车道级别准确度的位置信息。
为了描述的简单和方便，本文中描述的无线消息可以被称为V2X无线消息。V2X无线消息的示例是包括无线车辆数据的DSRC消息。存在许多类型的DSRC消息。一种类型的DSRC消息被称为基本安全消息(“BSM”或“BSM消息”)。配备有DSRC的车辆以定期间隔广播BSM。该间隔可以是用户可调节的。在一些实施例中，间隔可以是每0.10秒一次。
BSM包括BSM数据。BSM数据描述初始发送BSM的车辆的属性。此外，BSM数据描述以下各项中的一个或多个：(1)发送BSM的车辆的路径历史；(2)发送BSM的车辆的速度；以及(3)描述发送BSM的车辆的位置的GPS数据。
如本文中所使用的，词语“地理位置”、“位置”、“地理定位”和“定位”是指诸如乘车共享车辆之类的对象的纬度和经度(或对象的纬度、经度和海拔高度)。本文中所述的示例实施例提供定位信息，该定位信息以如下各项中的一个或多个的准确度来描述车辆的地理位置：(1)在包括纬度和经度的2个维度上相对于车辆的实际地理位置至少为正负1.5米；以及(2)在海拔高度维度上相对于车辆的实际地理位置至少为正负3米。因此，本文中描述的示例实施例能够以车道级别准确度或更高准确度描述车辆的地理位置。
例如，正接近的乘车共享车辆可能在乘车共享乘客的海拔高度以上或以下，并且本文中描述的实施例可以使用从配备有DSRC的车辆接收到的海拔高度信息来准确地在乘车共享乘客的用户设备上定位正接近的乘车共享车辆的AR视图。相比之下，乘车共享应用程序提供商通常不将正接近的乘车共享车辆的海拔高度信息传送给乘车共享乘客。
在一些实施例中，由乘车共享车辆发送的V2X无线消息包括描述乘车共享车辆的V2X数据。例如，V2X数据包括上述无线车辆数据。另外，由乘车共享车辆生成的任何数据可以被包括在由乘车共享车辆发送的V2X无线消息中，因此，根据一些实施例，该数据也可以是V2X数据的示例。
示例概要
参考图1A，描绘了用于乘车共享助理199和乘车共享客户端184的操作环境100(这里，乘车共享客户端184A和乘车共享客户端184B可以被统称为或单独地称为“乘车共享客户端184”，因为例如乘车共享客户端184A和乘车共享客户端184B可以提供类似的功能)。
操作环境100可以包括以下元件中的一个或多个：乘车共享车辆123；RSU 185；以及用户设备110。操作环境100的这些元件可以通信地耦合到网络105。RSU 185可以是DSRC使能的，并且可以经由网络105在乘车共享车辆123和用户设备110之间中继无线消息。例如，DSRC传输的范围通常为大约500米，因此，如果用户设备110与乘车共享车辆123相距700米，则一个或多个中间的DSRC使能的RSU可以将DSRC消息从用户设备110中继到乘车共享车辆123或从乘车共享车辆123中继到用户设备110。
尽管在图1A中描绘了一个乘车共享车辆123、一个RSU 185、一个用户设备110和一个网络105，但是实际上，操作环境100可以包括一个或多个乘车共享车辆123、一个或多个RSU 185、一个或多个用户设备110和一个或多个网络105。
网络105可以是有线或无线的常规类型，并且可以具有许多不同的配置，包括星形配置、令牌环配置或其他配置。此外，网络105可以包括局域网(LAN)、广域网(WAN)(例如，因特网)或多个设备和/或实体可以在其上进行通信的其他互连数据路径。在一些实施例中，网络105可以包括对等网络。网络105还可以耦合到或可以包括用于以各种不同的通信协议发送数据的电信网络的部分。在一些实施例中，网络105包括用于经由以下各项发送和接收数据的
Figure BDA0002264985260000111
通信网络或蜂窝通信网络，所述各项包括短消息服务(SMS)、多媒体消息服务(MMS)、超文本传输协议(HTTP)、直接数据连接、无线应用协议(WAP)、电子邮件、DSRC、全双工无线通信、毫米波、WiFi(基础结构模式)、WiFi(自组织模式)、可见光通信、电视空白通信和卫星通信。网络105还可以包括可以包含3G、4G、LTE、LTE-V2V、LTE-V2I、LTE-V2X、LTE-D2D、VoLTE、5G-V2X的移动数据网络、或任何其他移动数据网络、或移动数据网络的组合。此外，网络105可以包括一个或多个IEEE 802.11无线网络。
在一些实施例中，乘车共享车辆123、RSU 185和用户设备110中的一个或多个可以是配备有DSRC的设备。网络105可以包括在乘车共享车辆123、用户设备110和RSU 185之间共享的一个或多个通信信道。通信信道可以包括DSRC、LTE-V2X、全双工无线通信或任何其他无线通信协议。例如，网络105可以用来发送包括本文中描述的任何数据的DSRC消息、DSRC探测器或BSM。
乘车共享车辆123可以是任何类型的车辆。例如，乘车共享车辆123可包括以下类型的车辆之一：汽车；卡车；运动多功能车辆；公交车；半卡车；无人机或任何其他基于道路的交通工具。
在一些实施例中，乘车共享车辆123可以包括自主车辆或半自主车辆。例如，乘车共享车辆123可以包括高级驾驶员辅助系统(ADAS)180。ADAS系统180可以提供用来提供自主功能的一些或全部功能。
乘车共享车辆123由驾驶员操作以向乘车共享乘客提供乘车共享服务。如图1A中所示，驾驶员可以携带用户设备(例如，智能电话)，并且与安装在用户设备中的乘车共享应用程序198交互。可选地，乘车共享助理199安装在由驾驶员携带的用户设备中。
乘坐共享车辆123可以包括以下元件中的一个或多个：处理器125；存储器127；通信单元145；符合DSRC的GPS单元170；ADAS系统180；车辆传感器集合182；ECU 186和乘车共享客户端184。乘车共享车辆123的这些元件可以经由总线彼此通信地耦合。
在一些实施例中，处理器125和存储器127可以是车载计算机系统的元件。车载计算机系统可操作以导致或控制乘车共享客户端184的操作。车载计算机系统可操作以访问和执行存储在存储器127上的数据，以为乘车共享客户端184提供本文中所述的功能。
处理器125包括算术逻辑单元、微处理器、通用控制器或一些其他处理器阵列，以执行计算并且将电子显示信号提供给显示设备。处理器125处理数据信号，并且可以包括各种计算架构，包括复杂指令集计算机(CISC)架构、精简指令集计算机(RISC)架构或实现指令集的组合的架构。乘车共享车辆123可以包括一个或多个处理器125。其他处理器、操作系统、传感器、显示器和物理配置也是可能的。
存储器127存储可以由处理器125执行的指令或数据。指令或数据可以包括用于执行本文中描述的技术的代码。存储器127可以是动态随机存取存储器(DRAM)设备、静态随机存取存储器(SRAM)设备、闪速存储器或某种其他存储器设备。在一些实施例中，存储器127还包括非易失性存储器或类似的永久性存储装置和介质，包括硬盘驱动器、软盘驱动器、CD-ROM设备、DVD-ROM设备、DVD-RAM设备、DVD-RW设备、闪速存储器设备或用于更永久地存储信息的某种其他大容量存储装置。乘车共享车辆123可以包括一个或多个存储器127。
乘车共享车辆123的存储器127可以存储描述乘车共享车辆123的地理位置的数字数据(例如，符合DSRC的GPS数据188)。
符合DSRC的GPS数据188描述乘车共享车辆123的地理位置。例如，符合DSRC的GPS数据188描述乘车共享车辆123的经度和纬度。
在一些实施例中，可由乘车共享车辆123的符合DSRC的GPS单元170来检索符合DSRC的GPS数据188，该符合DSRC的GPS单元170可操作以提供以车道级别准确度描述乘车共享车辆123的地理位置的GPS数据。例如，乘车共享车辆123在道路的车道中行驶。车道级别准确度意味着乘车共享车辆123的位置由GPS数据如此准确地描述，从而可以基于如由符合DSRC的GPS单元170提供的该乘车共享车辆123的GPS数据准确地确定乘车共享车辆123在道路内行驶的车道。在一些实施例中，符合DSRC的GPS数据188是BSM数据或PSM数据的元素。
通信单元145向网络105或另一通信信道发送数据并且从网络105或另一通信信道接收数据。在一些实施例中，通信单元145可以包括DSRC收发器、DSRC接收器以及使乘车共享车辆123成为DSRC使能的设备所需要的其他硬件或软件。例如，通信单元145包括被配置为经由网络广播DSRC消息的DSRC天线。DSRC天线还可以以用户可配置的固定间隔(例如，每0.1秒、以对应于从1.6Hz到10Hz的频率范围的时间间隔等)发送BSM消息。
在一些实施例中，通信单元145包括用于直接物理连接到网络105或另一通信信道的端口。例如，通信单元145包括用于与网络105进行有线通信的USB、SD、CAT-5或类似端口。在一些实施例中，通信单元145包括用于使用一种或多种无线通信方法与网络105或其他通信信道交换数据的无线收发器，所述一种或多种无线通信方法包括：IEEE 802.11；IEEE802.16；
Figure BDA0002264985260000141
EN ISO 14906：2004电子收费-应用程序接口；EN 11253：2004专用短距离通信-使用5.8GHz微波的物理层(综述)；EN 12795：2002专用短距离通信(DSRC)-DSRC数据链路层：媒体访问和逻辑链路控制(综述)；EN 12834：2002专用短距离通信-应用层(综述)；EN 13372：2004专用短距离通信(DSRC)-用于RTTT应用程序的DSRC配置文件(综述)；2014年8月28日提交的名为“全双工协调系统”的美国专利申请14/471387中描述的通信方法；或另一合适的无线通信方法。
在一些实施例中，通信单元145包括如2014年8月28日提交的名为“全双工协调系统”的美国专利申请14/471387中描述的全双工协调系统。
在一些实施例中，通信单元145包括用于经由以下各项在蜂窝通信网络上发送和接收数据的蜂窝通信收发器，所述各项包括短消息服务(SMS)、多媒体消息服务(MMS)、超文本传输协议(HTTP)、直接数据连接、WAP、电子邮件或另一合适类型的电子通信。在一些实施例中，通信单元145包括有线端口和无线收发器。通信单元145还提供与网络105的其他常规连接，以使用包括TCP/IP、HTTP、HTTPS和SMTP的标准网络协议、毫米波、DSRC等分发文件或媒体对象。
在一些实施例中，通信单元145包括支持以下V2X通信协议中的一个或多个所需要的任何类型的V2X通信天线：DSRC；毫米波；LTE-V2X；LTE-D2D；5G-V2X；ITS-G5；ITS-连接；LPWAN；可见光通信；电视空白空间；蓝牙；Wi-Fi等。通信单元145包括V2X无线电装置143。在一些实施例中，乘车共享客户端184包括可操作以控制V2X无线电装置143的操作并且使V2X无线电装置143发送V2X无线消息的代码和例程，该V2X无线消息包括乘车共享车辆123的符合DSRC的GPS数据188。
V2X无线电装置143是包括V2X发送器和V2X接收器并且可操作以经由任何V2X协议发送和接收无线消息的电子设备。例如，V2X无线电装置143可操作以经由DSRC发送和接收无线消息。V2X发送器可操作以在5.9GHz频带上发送和广播DSRC消息。V2X接收器可操作以在5.9GHz频带上接收DSRC消息。V2X无线电装置143包括多个信道，其中这些信道中的至少一个信道被指定用于发送和接收BSM，并且这些信道中的至少一个信道被指定用于发送和接收PSM。
在一些实施例中，符合DSRC的GPS单元170包括使乘车共享车辆123或符合DSRC的GPS单元170符合以下DSRC标准(包括其任何派生或分支)中的一个或多个所需要的任何硬件和软件，所述DSRC标准包括：EN 12253：2004专用短距离通信-使用5.8GHz微波的物理层(综述)；EN 12795：2002专用短距离通信(DSRC)-DSRC数据链路层：媒体访问和逻辑链路控制(综述)；EN 12834：2002专用短距离通信-应用层(综述)；以及EN 13372：2004专用短距离通信(DSRC)-用于RTTT应用程序的DSRC配置文件(综述)；EN ISO 14906：2004电子收费-应用程序界面。
在一些实施例中，符合DSRC的GPS单元170包括使乘车共享车辆123或符合DSRC的GPS单元170符合以下DSRC标准(包括其任何派生或分支)中的一个或多个所需要的任何硬件和软件，所述DSRC标准包括：IEEE 802.11；IEEE 1609.2；IEEE 1609.3；IEEE 1609.4；SAEJ2735；SAE J2945/0；SAE J2945/1等。
在一些实施例中，符合DSRC的GPS单元170可操作以提供以车道级别准确度描述乘车共享车辆123的位置的GPS数据。
在一些实施例中，符合DSRC的GPS单元170包括与GPS卫星进行无线通信以检索以符合DSRC标准的精度描述乘车共享车辆123的地理位置的GPS数据的硬件。DSRC标准要求GPS数据足够精确，以推断是否有两个车辆(其中一个车辆例如是乘车共享车123)位于相邻行驶车道中。在一些实施例中，符合DSRC的GPS单元170可操作以在开阔天空下在68％的时间识别、监视和跟踪在其实际位置的1.5米以内的二维位置。由于行驶车道通常不小于3米宽，所以每当GPS数据的二维误差小于1.5米时，本文中所述的乘车共享客户端184就可以分析由符合DSRC的GPS单元170提供的GPS数据并且基于同时在道路上行驶的两个或更多个不同车辆(其中一个车辆例如是乘车共享车辆123)的相对位置来确定乘车共享车辆123行驶在哪个车道中。
与符合DSRC的GPS单元170相比，不符合DSRC标准的常规GPS单元无法以车道级别准确度确定车辆的位置。例如，通常的道路车道大约为3米宽。然而，常规的GPS单元相对于车辆的实际位置仅具有正负10米的准确度。结果，这样的常规GPS单元不足以准确地仅基于GPS数据来识别车辆的行驶车道；相反，仅具有常规GPS单元的系统必须采用传感器(诸如相机)来识别车辆的行驶车道。识别车辆的行驶车道是有益的，例如，因为在一些实施例中，这可使得乘车共享客户端184能够更准确地识别在具有多个行驶车道的道路中行驶的乘车共享车辆123的位置。
例如，与配备有DSRC的车辆的GPS单元(符合SAE J2945/1，具有1.5米准确度要求)相比，不符合DSRC标准的非DSRC车辆的GPS单元无法以车道级别准确度确定车辆的位置。在另一示例中，与配备有DSRC的车辆的GPS单元相比，乘车共享驾驶员的智能电话的GPS单元也无法以车道级别准确度确定车辆的位置。
ADAS系统180可以包括一个或多个高级驾驶员辅助系统。ADAS系统180的示例可以包括乘车共享车辆123的以下元件中的一个或多个：ACC系统；自适应远光系统；自适应光控制系统；自动停车系统；汽车夜视系统；盲点监控器；防撞系统；侧风稳定系统；驾驶员睡意检测系统；驾驶员监控系统；紧急驾驶员辅助系统；前方碰撞预警系统；交叉路口辅助系统；智能速度适应系统；车道偏离警告系统；行人保护系统；交通标志识别系统；转弯辅助；以及错误道路驾驶警告系统。
在一些实施例中，ADAS系统180包括控制乘车共享车辆123的一个或多个操作以使得乘车共享车辆123是“自主”或“半自主”的任何硬件或软件。
车辆传感器集合182包括可操作以测量乘车共享车辆123外部的道路环境的一个或多个传感器。例如，车辆传感器集合182可包括记录乘车共享车辆123附近的道路环境的一个或多个物理特性的一个或多个传感器。存储器127可存储描述由车辆传感器集合182记录的一个或多个物理特性的传感器数据。
在一些实施例中，车辆传感器集合182可以包括以下车辆传感器中的一个或多个：相机；LIDAR传感器；雷达传感器；激光测高仪；红外检测器；运动检测器；恒温器；声音检测器；一氧化碳传感器；二氧化碳传感器；氧气传感器；空气质量流量传感器；发动机冷却液温度传感器；节气门位置传感器；曲轴位置传感器；汽车发动机传感器；阀门计时器；空气燃料比率计；盲点仪；路边探测器(curb feeler)；缺陷检测器；霍尔效应传感器；歧管绝对压力传感器；停车传感器；雷达枪；车速表；速度传感器；轮胎压力监测传感器；扭矩传感器；变速箱油温度传感器；涡轮速度传感器(TSS)；可变磁阻传感器；车辆速度传感器(VSS)；水传感器；车轮速度传感器；以及任何其他类型的汽车传感器。
ECU 186是汽车电子设备中的嵌入式系统，其控制乘车共享车辆123中的一个或多个电气系统或子系统。ECU 186的类型包括但不限于以下类型：发动机控制模块(ECM)；动力总成控制模块(PCM)；变速箱控制模块(TCM)；制动控制模块(BCM或EBCM)；中央控制模块(CCM)；中央计时模块(CTM)；通用电子模块(GEM)；车身控制模块(BCM)；和悬架控制模块(SCM)等。
在一些实施例中，乘车共享车辆123可以包括多个ECU 186。在一些实施例中，乘车共享客户端184可以是ECU 186的元件。
在一些实施例中，乘车共享客户端184包括软件，该软件在由处理器125执行时可操作以使处理器125执行以下参考图4-图6B描述的方法400以及示例处理500和600的一个或多个步骤。在一些实施例中，乘车共享客户端184确定乘车共享车辆123被指定为执行乘车共享事件并且从乘车共享车辆123的GPS单元获取乘车共享车辆123的GPS数据。例如，乘车共享客户端184从符合DSRC的GPS单元170获取乘车共享车辆123的符合DSRC的GPS数据。乘车共享客户端184生成包括描述乘车共享车辆123的V2X数据(例如，包括乘车共享车辆123的符合DSRC的GPS数据)的V2X无线消息，并且将V2X无线消息发送到用户设备110或发送到用于将V2X无线消息中继到用户设备110的RSU 185。在一些实施例中，V2X数据还可以包括将目的地描述为用户设备110的数据，以便将V2X无线消息单播到用户设备110。
在一些实施例中，乘车共享客户端184从乘车共享车辆123的GPS单元获取乘车共享车辆123的GPS数据(例如，乘车共享客户端184从符合DSRC的GPS单元170获取乘车共享车辆123的符合DSRC的GPS数据)。乘车共享客户端184构造包括V2X数据的V2X无线消息，其中，V2X数据包括符合DSRC的GPS数据和用于识别乘车共享车辆123的数字数据(例如，车辆标识符(ID))。乘车共享客户端184经由网络105发送V2X无线消息。例如，可以经由网络105广播V2X无线消息。
在一些实施例中，可以使用包括现场可编程门阵列(“FPGA”)或专用集成电路(“ASIC”)的硬件来实现乘车共享客户端184。在一些其他实施例中，可以使用硬件和软件的组合来实现乘车共享客户端184。乘车共享客户端184可以存储在设备(例如，服务器或其他设备)的组合中，或者可以存储在设备之一中。
在一些实施例中，RSU 185在乘车共享客户端184与乘车共享助理199之间中继V2X通信。RSU 185包括乘车共享客户端184的实例(例如，乘车共享客户端184B)，用于管理在操作环境100的端点(例如，用户设备110、乘车共享车辆123、其他车辆或其他端点)之间中继V2X无线消息。例如，RSU 185可以从乘车共享车辆123接收V2X无线消息，然后RSU 185的乘车共享客户端184使RSU 185的处理器将V2X无线消息(包括符合DSRC的GPS数据188)存储在RSU 185的存储器中。RSU 185的乘车共享客户端184可以将V2X无线消息中继到用户设备110。
用户设备110是包括一个或多个处理器和一个或多个存储器的计算设备。例如，用户设备110可以是以下元件之一：智能电话；膝上型计算机；平板计算机；音乐播放器；电子游戏机；个人数字助理(PDA)；便携式控制器；和任何其他便携式电子设备。其他类型的用户设备110是可能的。在一些实施例中，乘车共享乘客可以携带用户设备110。
用户设备110包括以下元件中的一个或多个：乘车共享应用程序198；乘车共享助理199；设备传感器集合112；显示器114；处理器115；和存储器116。
在一些实施例中，乘车共享应用程序198包括软件，该软件在由处理器115执行时可操作以使处理器115执行用于向乘车共享乘客提供乘车共享服务的操作。例如，乘车共享乘客可以经由乘车共享应用程序198预定乘车共享服务。乘车共享乘客可以经由乘车共享应用程序198管理(例如，修改、取消)所预定的乘车共享服务。在一些实施例中，乘车共享助理199是乘车共享应用程序198的元件。
在一些实施例中，乘车共享助理199包括软件，该软件在由处理器125执行时可操作以使处理器125执行以下参考图3A-图3B和图5A-图6B所述的方法300和350以及示例处理500和600的一个或多个步骤。例如，乘车共享助理199接收以下输入并且基于这些输入来输出增强图形数据，该增强图形数据在乘车共享车辆123的环境图像上突出显示乘车共享车辆的位置：(1)描述乘车共享车辆123的地理位置的数字数据(即，乘车共享车辆123的符合DSRC的GPS数据)；(2)描述用户设备110的地理位置的数字数据(即，用户设备110的GPS数据)；(3)描述乘车共享车辆123的环境图像的相机数据；以及(4)描述用户设备110的取向或取向变化的传感器数据。
在一些实施例中，可以使用包括现场可编程门阵列(“FPGA”)或专用集成电路(“ASIC”)的硬件来实现乘车共享助理199。在一些其他实施例中，可以使用硬件和软件的组合来实现乘车共享助理199。乘车共享助理199可以存储在设备(例如，服务器或其他设备)的组合中，或者可以存储在设备之一中。
下面参考图2-图3B和图5A-图6B更详细地描述乘车共享助理199。
在一些实施例中，设备传感器集合112包括一个或多个传感器。例如，设备传感器集合112包括用于捕获图像的一个或多个相机传感器。在另一示例中，设备传感器集合112包括检测用户设备110的取向或取向变化的传感器，诸如加速度计和陀螺仪。传感器生成描述这些取向变化的传感器数据。可以基于用户设备110的取向变化来修改在用户设备110的显示器114上显示的突出显示乘车共享车辆的位置的增强图形数据的布置。例如，当乘车共享乘客改变用户设备110的取向时，乘车共享助理199使用传感器数据来检测变化并且修改增强图形数据的布置。
在一些实施例中，显示器114是用户设备110的电子显示器。例如，显示器114是液晶显示器(LCD)或发光二极管(LED)显示器。其他类型的显示器也是可能的。
在一些实施例中，处理器115具有与处理器125的结构相似的结构，并且提供与处理器125的功能相似的功能。这里不再重复对处理器115的类似描述。
在一些实施例中，存储器116具有与存储器127的结构相似的结构，并且提供与存储器127的功能相似的功能。这里不再重复对存储器116的类似描述。
在一些实施例中，存储器116存储以下元素中的一个或多个：乘车共享车辆123的符合DSRC的GPS数据188；用户设备110的GPS数据118；增强图形数据120；传感器数据122；和相机数据124。
在一些实施例中，用户设备110接收包括符合DSRC的GPS数据188的V2X无线消息，并且乘车共享助理199使处理器115将符合DSRC的GPS数据188存储在存储器116上。
GPS数据118是描述用户设备110的地理位置的数字数据。例如，GPS数据118描述用户设备110的经度和纬度。在一些实施例中，可以通过用户设备110的常规GPS单元来检索GPS数据118。例如，用户设备110的GPS单元从一个或多个GPS卫星检索GPS数据118，并且用户设备110的乘车共享助理199使用户设备110的处理器115将GPS数据118存储在用户设备110的存储器116上。
在一些实施例中，GPS数据118可以通过用户设备110的符合DSRC的GPS单元来检索，所述用户设备110的符合DSRC的GPS单元可操作以提供以与车道级别准确度相类似或相同的准确度描述用户设备110的地理位置的GPS数据。
传感器数据122是由用户设备110上的一个或多个传感器生成的数字数据。例如，一个或多个传感器包括加速度计和陀螺仪，并且传感器数据122描述用户设备110的取向或取向变化。其他类型的传感器数据也是可能的。
相机数据124是描述由用户设备110的相机传感器捕获的一个或多个图像的数字数据。例如，一个或多个图像是由相机传感器实时地捕获的一个或多个现实生活图像，所述一个或多个现实生活图像描绘包括乘车共享车辆123的现实生活环境。
增强图形数据120是描述由用户设备110捕获的图像的增强版本的数字数据，其中捕获的图像描绘包括乘车共享车辆的现实生活环境。图像的增强版本在现实生活环境内突出显示乘车共享车辆123的位置。图像的增强版本将在下面更详细地描述。
现在参考图1B，描绘了示出根据一些实施例的操作环境100的另一框图。在一些实施例中，不要求乘车共享车辆123的驾驶员携带包括乘车共享助理199的实例的用户设备。图1B中描绘的元件提供与图1A中描绘的那些元件相似的功能，因此这里将不再重复那些描述。
如图1B中所示，乘车共享车辆123的存储器127还可以存储描述乘车共享车辆123的车辆ID 126的数字数据。车辆ID 126用来唯一地识别乘车共享车辆123。
在一些实施例中，乘车共享车辆123的乘车共享客户端184构造包括符合DSRC的GPS数据188和车辆ID 126的V2X无线消息，并且将该V2X无线消息发送到网络105。用户设备110经由网络105接收V2X无线消息。乘车共享助理199使处理器115将来自V2X无线消息的符合DSRC的GPS数据188和车辆ID 126存储在用户设备110的存储器116中。
在一些实施例中，RSU 185的乘车共享客户端184可以接收V2X无线消息，并且将来自V2X无线消息的符合DSRC的GPS数据188和车辆ID 126存储在RSU 185的存储器中。RSU185的乘车共享客户端184将V2X无线消息转发给用户设备110。
用户设备110的存储器116还包括车辆ID数据库128。车辆ID数据库128包括如下数字数据，该数字数据识别被指定为执行与用户设备110相关联的乘车共享事件的乘车共享车辆的身份。例如，车辆ID数据库128包括如下车辆1D，该车辆ID识别被指定为接送乘车共享乘客的乘车共享车辆123。
现在参考图1C，描绘了示出根据一些实施例的用于在用户设备110上提供增强图形数据的流程处理150的框图。在一些实施例中，乘车共享车辆123的乘车共享客户端184从符合DSRC的GPS单元170检索乘车共享车辆123的符合DSRC的GPS数据188，并且生成包括符合DSRC的GPS数据188的V2X无线消息。V2X无线消息被发送到用户设备110，使得V2X无线消息中的符合DSRC的GPS数据188可以用作用户设备110的乘车共享助理199的输入。
乘车共享助理199基于以下输入来输出增强图形数据120：(1)描述乘车共享车辆123的地理位置的数字数据(即，乘车共享车辆123的符合DSRC的GPS数据188)；(2)由乘车共享乘客操作的用户设备110的GPS数据118；(3)描述用户设备110的取向的传感器数据122(例如，描述用户设备110的显示器114的取向的实时传感器数据)；以及(4)描述由用户设备110的相机传感器捕获的图像的相机数据124，该图像描绘乘车共享乘客的现实生活环境。增强图形数据120描述由相机传感器捕获的图像的增强版本。图像的增强版本被呈现在显示器114上，并且在乘车共享乘客的现实生活环境中突出显示乘车共享车辆123的位置。
示例计算机系统
现在参考图2，描绘了示出根据一些实施例的包括乘车共享助理199的示例计算机系统200的框图。在一些实施例中，计算机系统200可以包括专用计算机系统，该专用计算机系统被编程为执行以下参考图3A和图3B描述的方法300和350、以下参考图5A-图6B描述的处理500和600或以上参考图1C描述的流程处理150的一个或多个步骤。
在一些实施例中，计算机系统200可以是用户设备110的元件。
根据一些示例，计算机系统200可以包括以下元件中的一个或多个：乘车共享助理199；处理器115；通信单元245；设备传感器集合112；GPS单元270；显示器114；乘车共享应用程序198；存储器116；和存储装置241。计算机系统200的组件通过总线220通信地耦合。
在所示的实施例中，处理器115经由信号线238通信地耦合到总线220。通信单元245经由信号线246通信地耦合到总线220。设备传感器集合112经由信号线248通信地耦合到总线220。GPS单元270经由信号线249通信地耦合到总线220。显示器114经由信号线239通信地耦合到总线220。乘车共享应用程序198经由信号线240通信地耦合到总线220。存储装置241经由信号线242通信地耦合到总线220。存储器116经由信号线244通信地耦合到总线220。
以上参考图1A描述了计算机系统200的以下元件，因此，这里将不重复那些描述：处理器115；设备传感器集合112；显示器114；乘车共享应用程序198；和存储器116。
存储器116可以存储以上参考图1A-图1C所述的任何数据。存储器116可以存储为计算机系统200提供其功能所需的任何数据。
通信单元245可以具有与通信单元145的结构相类似的结构，并且提供与通信单元145的功能相类似的功能。这里将不再重复类似的描述。
在一些实施例中，GPS单元270是常规GPS单元。例如，GPS单元270可以包括与GPS卫星无线地通信以检索描述计算机系统200的地理位置的数据的硬件。例如，GPS单元270从一个或多个GPS卫星检索GPS数据。在一些实施例中，GPS单元270是符合DSRC的GPS单元，符合DSRC的GPS单元可操作以提供以车道级别准确度描述计算机系统200的地理位置的GPS数据。
存储装置241可以是存储用于提供本文中描述的功能的数据的非暂态存储介质。存储装置241可以是动态随机存取存储器(DRAM)设备、静态随机存取存储器(SRAM)设备、闪速存储器或一些其他存储器设备。在一些实施例中，存储装置241还包括非易失性存储器或类似的永久性存储装置和介质，包括硬盘驱动器、软盘驱动器、CD-ROM设备、DVD-ROM设备、DVD-RAM设备、DVD-RW设备、闪速存储器设备或用于更永久地存储信息的某种其他大容量存储装置。
在图2中所示的示出的实施例中，乘车共享助理199包括：通信模块202；识别模块204；相机模块206；传感器模块208；增强模块210；和呈现模块212。乘车共享助理199的这些组件经由总线220彼此通信地耦合。在一些实施例中，乘车共享助理199的组件可以存储在单个服务器或设备中。在一些其他实施例中，乘车共享助理199的组件可以跨多个服务器或设备来分布和存储。例如，乘车共享助理199的一些组件可以跨用户设备110和乘车共享车辆123来分布。
通信模块202可以是包括用于处理乘车共享助理199与计算机系统200的其他组件之间的通信的例程的软件。在一些实施例中，通信模块202可以存储在计算机系统200的存储器116中并且可由处理器115访问和执行。通信模块202可以适于经由信号线222与计算机系统200的处理器115和其他组件进行协作和通信。
通信模块202经由通信单元245向操作环境100或流程处理150的一个或多个元件发送数据并且从操作环境100或流程处理150的一个或多个元件接收数据。例如，通信模块202经由通信单元245接收或发送以下元素中的一个或多个：符合DSRC的GPS数据188；和车辆ID 126。通信模块202可以经由通信单元245发送或接收以上参考图1A-图1C描述的任何数据或消息。
在一些实施例中，通信模块202从乘车共享助理199的组件接收数据，并且将该数据存储在存储装置241和存储器116中的一个或多个中。例如，通信模块202从通信单元245接收以上参考存储器116描述的任何数据(经由网络105、DSRC消息、BSM、DSRC探测器、全双工无线消息等)，并且将该数据存储在存储器116中(或临时地存储在可以用作计算机系统200的缓冲器的存储装置241中)。
在一些实施例中，通信模块202可以处理乘车共享助理199的组件之间的通信。例如，通信模块202可以处理识别模块204、相机模块206、传感器模块208、增强模块210和呈现模块212之间的通信。这些模块中的任何一个可以使通信模块202与计算机系统200或操作环境100的其他元件进行通信(经由通信单元245)。例如，传感器模块208可以使用通信模块202与设备传感器集合112进行通信，并且使设备传感器集合112记录传感器数据。在另一示例中，相机模块206可以使用通信模块202与相机传感器进行通信，并且使相机传感器实时或接近实时地捕获现实生活环境的图像。
在一些实施例中，通信模块202从网络105接收V2X无线消息，并且该V2X无线消息包括V2X数据，该V2X数据包括乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)和乘车共享车辆123的车辆ID中的一个或多个。例如，从包括以下各项的组中选择V2X无线消息：DSRC消息；BSM；LTE消息；LTE-V2X消息；5G-V2X消息；和毫米波消息等。通信模块202从接收到的V2X无线消息中检索出乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)和车辆ID，并且分别将乘车共享车辆123的GPS数据和车辆ID发送到增强模块210和识别模块204。
识别模块204可以是包括用于识别被指定为执行与用户设备110相关联的乘车共享事件的乘车共享车辆的例程的软件。在一些实施例中，识别模块204可以被存储在计算机系统200的存储器116中并且可由处理器115访问和执行。识别模块204可以适于经由信号线224与计算机系统200的处理器115和其他组件进行协作和通信。
在一些实施例中，识别模块204可操作以使用所接收到的V2X无线消息中所包括的唯一地识别乘车共享车辆123的数字数据(例如，识别乘车共享车辆123的第一车辆ID)并结合用于识别被指定为接送乘车共享乘客的车辆的身份的数字数据(例如，识别被指定为接送乘车共享乘客的车辆的第二车辆ID)，以辨别该特定V2X消息与乘车共享事件有关，该乘车共享事件在共享车辆123的驾驶员同意使用乘车共享车辆123接送乘车共享乘客时开始发生。
具体地，从接收到的V2X无线消息中检索到的V2X数据包括唯一地识别用于提供乘车共享服务的乘车共享车辆123的第一车辆ID。识别模块204从V2X数据中检索第一车辆ID，并且从车辆ID数据库128中检索唯一地识别被指定为执行与用户设备110相关联的乘车共享事件的车辆的第二车辆ID。如果第一车辆ID与第二车辆ID匹配(例如，第一车辆ID与第二车辆ID相同)，识别模块204辨别乘车共享车辆123是被指定为执行与用户设备110相关联的乘车共享事件的车辆，因此包括在接收到的V2X无线消息中的乘车共享车辆123的符合DSRC的GPS数据可以被增强模块210用来生成增强图形数据。
在一些实施例中，第一车辆ID和第二车辆ID是永久唯一标识符。在一些其他实施例中，第一车辆ID和第二车辆ID是临时唯一标识符(TempID)。例如，V2X无线消息是BSM，并且BSM中包括的数字数据被用作V2X数据。BSM中包括的数字数据包括TempID。以特定时间间隔(例如，每5分钟)在名义上改变TempID，以通过使得难以确定在不同时间发送的两个BSM是否是由同一车辆发送的来保护隐私。
在一些实施例中，使用V2X无线消息将TempID传送到乘车共享助理199。将该无线消息发送一次或以间隔发送该无线消息。例如，DSRC使能的车辆在每个BSM中(例如，以100毫秒的间隔)将其TempID发送到用户设备110的乘车共享助理199，并且可以每5分钟或以某个其他间隔来改变TempID。
在一些实施例中，其他信息(除了已经包括在BSM中的TempID或其他数据之外)可以被包括在要从乘车共享客户端184发送到乘车共享助理199的单独V2X单播消息中。为了隐私起见，可以对该单独V2X单播消息进行加密。在这种情况下，可以经由TempID或一些其他形式的标识符将车辆标识符传送到安装在乘车共享乘客的用户设备上的乘车共享助理199。
在一些实施例中，乘车共享客户端184的后端(例如，由乘车共享服务操作的服务器)可以被配置为知道其乘车共享车辆当前正在使用什么TempID，并且当后端提供诸如型号、车牌、驾驶员姓名等其他车辆信息时，后端可以将描述该信息的数字数据提供给用户设备110的乘车助理设备199。如果TempID由后端(例如，通过蜂窝连接)传送，则可以在不改变V2X协议的情况下(例如，使用BSM)实现本文中描述的乘车共享助理199。
对于相反方向(例如，从用户设备110到乘车共享车辆123的方向)，用户设备110可以被配置为发送个人安全消息(PSM)，该个人安全消息(PSM)是与BSM类似的消息。PSM也被标准化。PSM也包括TempID。
相机模块206可以是包括用于控制用户设备110的相机传感器以捕获与乘车共享乘客相关联的现实生活环境的一个或多个图像的例程的软件。在一些实施例中，相机模块206可以存储在计算机系统200的存储器116中，并且可以由处理器115访问和执行。相机模块206可以适于经由信号线281与计算机系统200的处理器115和其他组件进行协作和通信。
在一些实施例中，相机模块206提供实时地捕获与乘车共享乘客相关联的现实生活环境的图像的指令。该指令指示乘车共享乘客举起用户设备110以捕获乘车共享乘客的环境的图像。例如，相机模块206使显示器114描绘包括该指令的图形。
相机模块206控制用户设备110的相机传感器以实时地捕获现实生活环境的图像。例如，相机模块206使用户设备110的相机传感器捕获乘车共享乘客的环境的一个或多个实时图像(或视频)。这些图像(或视频)由相机数据描述。用户设备110的显示器114尚未显示由相机传感器捕获的图像(或视频)。用户设备110的显示器114显示如下所述的图像(或视频)的增强版本。图像(或视频)的增强版本的后续生成发生在几分之一秒之内，因此在用户设备110的相机传感器捕获图像(或视频)之后，图像(或视频)的增强版本的显示对于乘车共享乘客而言是实时的或接近实时的。
传感器模块208可以是包括用于使用设备传感器集合112中包括的一个或多个传感器来生成传感器数据的例程的软件。在一些实施例中，传感器模块208可以存储在计算机系统200的存储器116中，并且可以由处理器115访问和执行。传感器模块208可以适于经由信号线226与计算机系统200的处理器115和其他组件进行协作和通信。
在一些实施例中，传感器模块208可以操作设备传感器集合112中的一个或多个传感器以生成描述设备传感器集合112的测量的传感器数据。传感器模块208可以使传感器数据存储在存储器116中。在一些实施例中，传感器数据可以描述例如以下各项中的一个或多个：与计算机系统200有关的GPS数据；用于检测用户设备110的显示器114的取向或取向变化的传感器数据；以及任何其他传感器数据。
在一些实施例中，传感器模块208可以使GPS单元270检索计算机系统200的位置信息。例如，计算机系统200是用户设备110的元件，并且传感器模块208可以使GPS单元270检索用户设备110的GPS数据。传感器模块208可以使通信模块202将所检索到的位置信息存储在存储器116中。例如，传感器模块208可以使通信模块202将用户设备110的GPS数据存储在存储器116中。
在一些实施例中，传感器模块208使用户设备110的一个或多个传感器(例如，加速度计、陀螺仪)捕获描述用户设备110的显示器114的取向或取向变化的传感器数据。在一些实施例中，该传感器数据可以辅助由显示器114描绘的增强图形数据的布置(例如，参见图7A-图7B)。
增强模块210可以是包括当由处理器115执行时使处理器115生成增强图形数据的例程的软件。在一些实施例中，增强模块210可以存储在计算机系统200的存储器116中，并且可由处理器115访问和执行。增强模块210可以适于经由信号线228与计算机系统200的处理器115和其他组件进行协作和通信。
在一些实施例中，通信模块202接收由乘车共享车辆123发送的V2X无线消息，该V2X无线消息包括描述乘车共享车辆123的V2X数据。增强模块210基于V2X数据生成增强图形数据，其中，增强图形数据描述由用户设备110捕获的图像的增强版本，该图像描绘包括乘车共享车辆123的现实生活环境。图像的增强版本在现实生活环境内突出显示乘车共享车辆123的位置。例如，乘车共享车辆123向作为乘车共享乘客的用户设备110的用户提供乘车共享服务，并且增强图形数据辅助用户定位乘车共享车辆123并且接收乘车共享服务。
具体地，V2X数据包括乘车共享车辆123的GPS数据(例如，乘车共享车辆123的符合DSRC的GPS数据)。增强模块210检索用户设备110的GPS数据和对描绘现实生活环境的图像进行描述的相机数据。在一些实施例中，增强模块210基于以下各项中的一个或多个来生成增强图形数据：乘车共享车辆123的GPS数据(例如，乘车共享车辆123的符合DSRC的GPS数据)；用户设备110的GPS数据；和相机数据。在一些实施例中，增强模块210检索描述用户设备110的显示器114的取向的传感器数据，并且还基于传感器数据生成增强图形数据。
例如，乘车共享车辆123的符合DSRC的GPS数据以车道级别准确度描述乘车共享车辆123的地理位置。车道级别准确度指的是乘车共享车辆123的符合DSRC的GPS数据在所有方向(北、南、东、西)上以道路的车道宽度的正负一半的准确度来描述乘车共享车辆123的地理位置。在一些实施例中，增强模块可以访问用户设备110的GPS数据(其本身可以是具有车道级别准确度的符合DSRC的GPS数据)。因此，在一些实施例中，增强模块210能够基于如对乘车共享车辆123的符合DRSC的GPS数据和用户设备110的符合DSRC的GPS数据的分析所指示的乘车共享车辆123和用户设备110的相对位置，在由用户设备110记录的传感器数据中(例如，在由用户设备110的相机传感器记录的图像内)识别乘车共享车辆123的位置。该分析可以包括可以由用户设备110中包括的加速度计或某种其他传感器指示的诸如用户设备110的取向之类的其他因素。如果乘车共享车辆123在用户设备110的相机传感器的视场内，这意味着乘车共享车辆123被捕获在由相机传感器拍摄的图像中(例如，假设乘车共享车辆123与用户设备110之间存在视线)，则增强模块210可以使用一种或多种图像处理技术(例如，使用卷积神经网络的图像处理技术)从图像执行对象识别和辨认，以识别图像中的乘车共享车辆123。在一些实施例中，增强模块210可以采用乘车共享车辆123的车辆信息(例如，乘车共享车辆123的品牌、型号、颜色等)来识别图像中的乘车共享车辆123。
在另一示例中，基于(由乘车共享车辆123的符合DSRC的GPS数据描述的)乘车共享车辆123的地理位置和(由用户设备110的GPS数据描述的)用户设备110的地理位置，增强模块210确定乘车共享车辆123与用户设备110的相对位置。该相对位置包括乘车共享车辆123与用户设备110之间的距离以及乘车共享车辆123相对于用户设备110的方位(例如，角度)。基于乘车共享车辆123与用户设备110的相对位置，增强模块210确定乘车共享车辆123是否在用户设备110的相机传感器的视场内。如果乘车共享车辆123在用户设备110的相机传感器的视场内，这意味着乘车共享车辆123被捕获在由相机传感器拍摄的图像中(例如，假设在乘车共享车辆123与用户设备110之间存在视线)，则增强模块210可以使用一种或多种图像处理技术(例如，使用卷积神经网络的图像处理技术)从图像执行对象识别和辨认，以识别图像中的乘车共享车辆123。在一些实施例中，增强模块210可以采用乘车共享车辆123的车辆信息(例如，乘车共享车辆123的品牌、型号、颜色等)来识别图像中的乘车共享车辆123。增强模块210还可以使用其他方式来识别图像中的乘车共享车辆123。
在识别出由用户设备110的相机传感器捕获的图像中的乘坐共享车辆123之后，增强模块210修改图像以形成图像的增强版本，从而在现实生活环境内突出显示乘车共享车辆123的位置。例如，图像被修改为黑白，但是乘车共享车辆123是彩色的。用于突出显示乘车共享车辆123的位置的许多其他变型是可能的，包括例如放置突出显示乘车共享车辆123的位置的图形覆盖。图7A中提供了图像的增强版本的示例，这将在下面更详细地描述。
当现实生活环境中的对象移动或用户设备110的取向改变(例如，乘车共享乘客的手移动)时，图像以及图像的增强版本实时地更新。例如，假设传感器数据描述用户设备110的显示器114的取向顺时针旋转90度。然后，相应地改变图像的增强版本在显示器114上的布置。
在一些实施例中，描述图像的增强版本的增强图形数据包括增强现实(AR)内容、虚拟现实(VR)内容和混合现实(MR)内容之一，以及图像的增强版本上的乘车共享车辆123通过计算机生成的感知信息来增强。例如，计算机生成的感知信息包括视觉信息，诸如图像中的颜色变化(例如，图像是黑白的，而乘车共享车辆123是彩色的)、乘车共享车辆123上的图形覆盖、乘车共享车辆123的闪烁等。替选地或附加地，计算机生成的感知信息包括音频信息，诸如帮助乘车共享乘客导航到乘车共享车辆123的音频指令。例如，可以描绘扬声器符号。如果乘车共享乘客触摸扬声器符号，则可以播放音频指令以帮助乘车共享乘客导航到乘车共享车辆123。
在一些实施例中，乘车共享车辆123尚未在视线中，但是在用户设备110的V2X通信范围内或在将无线消息中继到用户设备110的RSU 185的V2X通信范围内。增强模块210至少通过以下方式生成增强图形数据：基于乘车共享车辆123的地理位置将乘车共享车辆123的表示(例如，乘车共享车辆123的图像)叠加在现实生活环境上以形成图像的增强版本，从而将乘车共享车辆123的表示与现实生活环境一起呈现在用户设备110的显示器114上。图7B中提供了图像的增强版本的示例，这将在下面更详细地描述。
在这种非视距(NLOS)的情况下，当车辆尚未在乘车共享乘客的视线中但是在用户设备110的通信范围内时，乘车共享助理199能够虚拟地定位乘车共享车辆123。被障碍物(诸如墙壁、建筑物、树、山等)阻挡的正接近的NLOS乘车共享车辆123可以虚拟地显示在墙壁、建筑物、树、山等的另一侧的真实位置处。例如，增强模块210可以将乘车共享车辆123的快照叠加在由乘车共享乘客看到的图像上。可选地，增强模块210可以从由乘车共享车辆123发送的V2X无线消息中检索描述乘车共享车辆123的道路环境的传感器数据，并且在道路环境内将乘车共享车辆123的快照叠加在由乘车共享乘客看到的图像上。
现在描述该NLOS用例的示例。在第一示例中，乘车共享乘客在机场的候机楼处等待，并且接近该候机楼的道路是弯曲的，使得正接近的汽车无法被看到，直到大约50米外绕过弯道为止。然而，通过经由与正接近的汽车的V2X通信来执行与上述操作类似的操作，即使在正接近的汽车也许多达300米外绕过弯道之前，也可以虚拟地识别正接近的汽车的位置。在与以上第一示例类似但是在城市环境中的第二示例中，当正接近的汽车在其接近时位于小巷上时，乘车共享乘客可能在人行道上或在相邻建筑物内部。即使在正接近的汽车在乘车共享乘客的视线内之前，也可以虚拟地识别正接近的汽车的位置。在与以上第一示例类似但是乘车共享乘客正在他/她的房屋内等待接送的第三示例中，当正接近的汽车经过附近时，可以虚拟地定位正接近的汽车。
在所有这些NLOS情况下，尽管存在NLOS条件，但是车辆位置的描绘提高了乘客参与乘车的效率，并且增加了在乘车正接近时的早期安心感。在直线条件下，通信范围通常为300-500米，而在阻挡的角落周围进行通信时，通信范围通常为100-150米。在所有这些NLOS情况下，与从由现有乘车共享应用程序提供的地图相比，可以更准确地确定车辆位置。例如，如果下雨了，或者乘客在离开前正与家人共度时光并且想要等待直到车辆实际到达时才离开建筑物，这可能特别有用。
呈现模块212可以是包括当由处理器115执行时使处理器115在用户设备110上呈现增强图形数据的例程的软件。在一些实施例中，呈现模块212可以存储在计算机系统200的存储器116中，并且可由处理器115访问和执行。呈现模块212可以适于经由信号线230与计算机系统200的处理器115和其他组件进行协作和通信。
在一些实施例中，呈现模块212在用户设备110的显示器114上呈现增强图形数据，从而更容易在现实生活环境中定位乘车共享车辆123。例如，呈现模块212通过在由图像描绘的现实生活环境内突出显示乘车共享车辆123，在显示器114上呈现图像的增强版本。
示例处理
现在参考图3A，描绘了根据一些实施例的用于在用户设备110上提供增强图形数据的示例方法300的流程图。方法300的步骤可以以任何顺序执行，并且不一定是图3A中所示的顺序。
在步骤301，通信模块202接收由乘车共享车辆123发送的V2X无线消息，该V2X无线消息包括描述乘车共享车辆123的V2X数据。
在步骤303，增强模块210基于V2X数据生成增强图形数据。增强图形数据描述由用户设备110捕获的图像的增强版本，其中该图像描绘包括乘车共享车辆123的现实生活环境。图像的增强版本在现实生活环境内突出显示乘车共享车辆123的位置。
在步骤305，呈现模块212在用户设备110上呈现增强图形数据，从而更容易在现实生活环境中定位乘车共享车辆123。例如，乘车共享车辆123向用户设备110的用户提供乘车共享服务，以及增强图形数据辅助用户定位乘车共享车辆123并且接收乘车共享服务。
现在参考图3B，描绘了根据一些实施例的用于在用户设备110上提供增强图形数据的另一示例方法350的流程图。方法350的步骤可以以任何顺序执行，并且不一定是图3B中所示的顺序。
在步骤351，通信模块202接收由乘车共享车辆123发送的V2X无线消息，该V2X无线消息包括乘车共享车辆123的符合DSRC的GPS数据。
在步骤353，通信模块202检索用户设备的GPS数据。
在步骤355，通信模块202检索描述实时图像的相机数据，该实时图像描绘用户设备110的现实生活环境(例如，乘车共享乘客所处的现实生活环境)。
在步骤357，通信模块202检索描述用户设备110的显示器114的取向的实时传感器数据。
在步骤359，增强模块210基于乘车共享车辆123的符合DSRC的GPS数据、用户设备110的GPS数据、相机数据和传感器数据中的一个或多个生成增强图形数据。增强图形数据描述实时图像的增强版本，以在现实生活环境内突出显示乘车共享车辆123的位置。
在步骤361，呈现模块212在用户设备110上呈现增强图形数据，从而更容易在现实生活环境中定位乘车共享车辆123。
图4描绘根据一些实施例的用于提供乘车共享车辆123的GPS数据的方法。方法400的步骤可以以任何顺序执行，并且不一定是图4中所示的顺序。
在步骤401，乘车共享客户端184接收包括数字数据的无线消息，该数字数据指示乘车共享车辆123被指定为执行乘车共享事件。
例如，可以利用乘车共享乘客与云服务器之间的通信来启动乘车共享服务。乘车共享客户端184从云服务器接收指示乘车共享车辆123被指定为执行乘车共享事件的无线消息(例如，类似于用户设备上的乘车共享应用程序当前通过蜂窝链路从云服务器接收初始车辆信息)。可以随时接收无线消息。在一些示例中，无线消息可以包括车辆标识符，该车辆标识符稍后可以在步骤405和407在V2X消息中使用。
在一些实施例中，无线消息是V2X无线消息。在一些其他实施例中，无线消息可以是任何其他类型的无线消息(例如，蜂窝消息、WiFi消息等)。
在一些实施例中，安装在乘车共享车辆123中的乘车共享客户端184确定乘车共享车辆123正被用来接送乘车共享乘客。例如，携带智能电话的驾驶员使用安装在他/她的智能电话上的乘车共享应用程序198接受接送乘车共享乘客的请求。智能电话还包括乘车共享助理199的实例，其可以是乘车共享应用程序198的模块。安装在驾驶员的智能电话中的乘车共享助理199将第一V2X无线消息发送到安装在乘车共享车辆123的ECU 186中的乘车共享客户端184。第一V2X无线消息包括数字数据，该数字数据指示乘车共享车辆123具有接送乘车共享乘客的预约。该数字数据还可包括乘车共享乘客的标识信息(例如，电话号码、电子邮件地址、媒体访问控制(MAC)地址)，乘车共享乘客的标识信息可用来将第二V2X无线消息单播到乘车共享乘客的用户设备110。
在步骤403，乘车共享客户端184从乘车共享车辆123的GPS单元(例如，符合DSRC的GPS单元170)检索乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)。
在步骤405，乘车共享客户端184生成包括乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)的V2X无线消息。
在步骤407，乘车共享客户端184将V2X消息发送到乘车共享乘客的用户设备110。例如，乘车共享客户端184使安装在乘车共享车辆123中的通信单元145的V2X无线电装置143开始发送(经由广播或单播)包括乘车共享车辆123的符合DSRC的GPS数据的V2X无线消息。
在一些实施例中，V2X无线消息是单播消息，该单播消息还包括作为目的地的由乘车共享乘客操作的用户设备110的标识符。单播消息还包括乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)。
在一些其他实施例中，V2X消息是广播消息，该广播消息还包括唯一地识别乘车共享车辆123的数字数据(例如，车辆ID)。例如，安装在乘车共享车辆123中的乘车共享客户端184构造BSM。除了其他方面以外，BSM还包括：(1)符合DSRC的GPS数据；和(2)唯一地识别乘车共享车辆123的数字数据。乘车共享客户端184使安装在乘车共享车辆123中的通信单元145的V2X无线电装置143开始经由任何形式的V2X通信来发送(经由广播)BSM。
图5A-图5B描绘根据一些实施例的用于在用户设备110上提供增强图形数据的示例处理500。处理500的步骤可以以任何顺序执行，并且不一定是图5A-图5B中所示的顺序。
在示例处理500中，乘车共享车辆123的驾驶员携带包括乘车共享助理199的实例的用户设备(例如，智能电话)，这是常见的，因为乘车共享应用程序要求其驾驶员携带包括其智能电话应用程序的智能电话。示例处理500的操作环境可以参考图1A。乘车共享客户端184和乘车共享助理199可操作以执行以下步骤中的一个或多个。
参照图5A，在步骤501，乘车共享车辆123的乘车共享客户端184确定提供乘车共享服务的乘车共享车辆123被指定为执行对于乘车共享乘客的乘车共享事件。
在一些实施例中，安装在乘车共享车辆123中的乘车共享客户端184确定乘车共享车辆123正被用来接送乘车共享乘客。例如，驾驶员使用安装在他/她的智能电话上的乘车共享应用程序198接受接送乘车共享乘客的请求。智能电话还包括乘车共享助理199的实例，其可以是乘车共享应用程序198的模块。安装在驾驶员的智能电话中的乘车共享助理199向安装在乘车共享车辆123的ECU 186中的乘车共享客户端184发送无线消息。无线消息包括数字数据，该数字数据指示共享乘车123具有接送乘车共享乘客的预约。该数字数据还可包括乘车共享乘客的标识信息(例如，电话号码、电子邮件地址、MAC地址)，乘车共享乘客的标识信息可用来将V2X消息单播到乘车共享乘客的用户设备110。
在步骤503，安装在乘车共享车辆123中的乘车共享客户端184从乘车共享车辆123的GPS单元(例如，符合DSRC的GPS单元170)获取乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)。
在步骤505，乘车共享车辆123的乘车共享客户端184发送包括乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)的V2X无线消息。例如，安装在乘车共享车辆123中的乘车共享客户端184使安装在乘车共享车辆123中的通信单元145的V2X无线电装置143开始发送(经由广播或单播)包括乘车共享车辆123的GPS数据(例如符合DSRC的GPS数据)的V2X无线消息。
在步骤507中，乘车共享乘客的用户设备110接收V2X无线消息，然后，用户设备110的乘车共享助理199从V2X无线消息中检索乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)。
在步骤509，用户设备110的乘车共享助理199从GPS单元270检索与乘车共享乘客相关联的用户设备110的GPS数据。
在步骤511，用户设备110的乘车共享助理199提供用来捕获与乘车共享乘客相关联的现实生活环境的实时图像的指令。例如，乘车共享助理199指示乘车共享乘客举起用户设备110以捕获乘车共享乘客的环境的图像。例如，乘车共享助理199使显示器114描绘包括该指示的图形。
在步骤513，用户设备110的乘车共享助理199控制用户设备110的相机以捕获现实生活环境的实时图像。例如，乘车共享助理199使由乘车共享乘客操作的用户设备110的相机捕获乘车共享乘客的环境的一个或多个实时图像(或视频)。一个或多个图像(或视频)由相机数据描述。用户设备110的显示器114尚未显示由相机捕获的一个或多个图像(或视频)。后续步骤514-519发生在几分之一秒内，从而当乘车共享乘客查看用户设备110的显示器114时，图像显示处理(或视频显示处理)对于乘车共享乘客而言似乎是恰当的。
在步骤514，用户设备110的乘车共享助理199从用户设备110的相机接收描述实时图像的相机数据。
参照图5B，在步骤515，用户设备110的乘车共享助理199控制一个或多个传感器以捕获描述用户设备110的显示器114的取向的传感器数据。例如，乘车共享助理199使用户设备110的机载传感器捕获描述用户设备110的显示器114的取向的传感器数据。
在步骤517，用户设备110的乘车共享助理199从一个或多个传感器接收传感器数据。
在步骤519，用户设备110的乘车共享助理199基于乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)、用户设备110的GPS数据、相机数据和传感器数据中的一个或多个生成增强图形数据。
例如，乘车共享助理199接收以下输入：描述乘车共享车辆的地理位置的数字数据(即，乘车共享车辆123的符合DSRC的GPS数据)；描述用户设备110的地理位置的数字数据(即，用户设备110的GPS数据)；描述乘车共享车辆123的环境图像的相机数据；和描述用户设备110的取向或取向变化的传感器数据。基于这些输入，乘车共享助理199输出增强图形数据，该增强图形数据在由相机数据描绘的环境中突出显示乘车共享车辆的位置。
在步骤521，用户设备110的乘车共享助理199控制用户设备110的显示器114呈现增强图形数据，从而显示实时图像的增强版本以突出显示乘车共享车辆123的位置。例如，乘车共享助理199使用户设备110的显示器114描绘由相机数据描述的实时现实生活图像，其中该图像被修改为包括增强现实内容、虚拟现实内容和混合现实内容之一，以及通过计算机生成的感知信息来增强图像中的乘车共享车辆。
可选地，在步骤523，用户设备110的乘车共享助理199向乘车共享客户端184发送指示在用户设备110的显示器114上突出显示乘车共享车辆123的V2X无线消息。
图6A-图6B描绘根据一些实施例的用于在用户设备110上提供增强图形数据的另一示例处理600。处理600的步骤可以以任何顺序执行，并且不一定是图6A-图6B中所示的顺序。
在示例处理600中，不要求乘车共享车辆123的驾驶员携带包括乘车共享助理199的实例的用户设备(例如，智能电话)。示例处理600的操作环境可以参考图1B。乘车共享客户端184和乘车共享助理199可操作以执行以下步骤中的一个或多个。
参照图6A，在步骤601，安装在乘车共享车辆123中的乘车共享客户端184从乘车共享车辆123的GPS单元(例如，符合DSRC的GPS单元170)获取乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)。
在步骤603，乘车共享车辆123的乘车共享客户端184构造包括乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)和唯一地识别乘车共享车辆123的数字数据(例如，第一车辆ID)的V2X无线消息。例如，V2X无线消息是BSM。安装在乘车共享车辆123中的乘车共享客户端198构造BSM，该BSM除了其他方面以外还包括：(1)符合DSRC的GPS数据；和(2)第一车辆ID。
在步骤605，乘车共享客户端184发送V2X无线消息。例如，乘车共享客户端184使安装在乘车共享车辆123中的通信单元145的V2X无线电装置143开始经由任何形式的V2X通信来发送(经由广播)V2X无线消息(例如，BSM)。
在步骤607，乘车共享乘客的用户设备110接收V2X无线消息，然后，用户设备110的乘车共享助理199从V2X无线消息中检索乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)和第一车辆ID。
在步骤608，用户设备110的乘车共享助理199通过将第一车辆ID与存储在车辆ID数据库128中的第二车辆ID进行比较来辨别V2X无线消息与同用户设备110相关联的乘车共享事件有关，并且乘车共享车辆123是被指定为执行该乘车共享事件的车辆。
例如，安装在用户设备110上的乘车共享助理199包括车辆ID数据库128。车辆ID数据库128包括识别被指定为接送乘车共享乘客的乘车共享车辆123的身份的数字数据(例如，第二车辆ID)。乘车共享助理199将第一车辆ID与第二车辆ID进行比较。如果第一车辆ID与第二车辆ID匹配(例如，第一车辆ID与第二车辆ID相同)，则乘车共享助理199辨别该特定V2X无线消息与乘车共享事件有关，该乘车共享事件在乘车共享车辆123的驾驶员同意使用乘车共享车辆123接送乘车共享乘客时开始发生。
在步骤609，用户设备110的乘车共享助理199从GPS单元270检索用户设备110的GPS数据。
在步骤611，用户设备110的乘车共享助理199提供用来捕获与乘车共享乘客相关联的现实生活环境的实时图像的指令。例如，乘车共享助理199指示乘车共享乘客激活用户设备110以捕获乘车共享乘客的环境的图像(例如，乘车共享助理199指示乘车共享乘客举起用户设备110以捕获乘车共享乘客的环境的图像；用户设备110是一副智能眼镜，并且乘车共享助理199指示乘共享乘客眨眨眼睛，从而激活这副智能眼镜以捕获乘车共享乘客的环境的图像；或者用户设备110是另一可穿戴设备，例如智能手表、手环、戒指或项链等，并且乘车共享助理199指示乘车共享乘客按下可穿戴设备的按钮或触摸可穿戴设备的屏幕，从而激活可穿戴设备中的相机以捕获乘车共享乘客的环境的图像等)。例如，乘车共享助理199使显示器114描绘包括该指示的图形。
参照图6B，在步骤613，用户设备110的乘车共享助理199控制用户设备110的相机以捕获现实生活环境的实时图像。例如，乘车共享助理199使由乘车共享乘客操作的用户设备110的相机捕获乘车共享乘客的环境的一个或多个实时图像。一个或多个图像由相机数据描述。用户设备110的显示器114尚未显示由相机捕获的一个或多个图像。后续步骤614-619发生在几分之一秒内，从而当乘车共享乘客查看用户设备110的显示器114时，图像显示处理对于乘车共享乘客而言似乎是恰当的。
在步骤614，用户设备110的乘车共享助理199从相机接收描述实时图像的相机数据。
在步骤615，用户设备110的乘车共享助理199控制一个或多个传感器以捕获描述用户设备110的显示器114的取向的传感器数据。
在步骤617，用户设备110的乘车共享助理199从一个或多个传感器接收传感器数据。
在步骤619，用户设备110的乘车共享助理199基于乘车共享车辆123的GPS数据(例如，符合DSRC的GPS数据)、用户设备110的GPS数据、相机数据和传感器数据中的一个或多个生成增强图形数据。
在步骤621，用户设备110的乘车共享助理199控制用户设备110的显示器114呈现增强图形数据，从而显示实时图像的增强版本以在现实生活环境中突出显示乘车共享车辆123的位置。
可选地，在步骤623，用户设备110的乘车共享助理199向乘车共享应用程序184发送指示在用户设备110的显示器114上突出显示乘车共享车辆123的V2X无线消息。
图7A是示出根据一些实施例的在现实生活环境中突出显示乘车共享车辆的位置的图像的示例增强版本的图形表示。在一些实施例中，乘车共享乘客举起用户设备110以使用用户设备110的相机传感器来捕获现实生活环境的图像。这里，所捕获的现实生活环境包括四个车辆，并且这四个车辆之一是乘车共享车辆。由相机传感器捕获的图像被修改以突出显示乘车共享车辆的位置。用户设备110的显示器114描绘AR/VR/MR内容，该AR/VR/MR内容描绘现实生活环境，其中强调乘车共享车辆的位置。例如，乘车共享车辆在所描绘的现实生活环境中有阴影，并且在突出显示的乘车共享车辆旁边也放置了文本覆盖“您的乘车！”。
图7B是示出根据一些实施例的在现实生活环境中突出显示乘车共享车辆的位置的图像的另一示例增强版本的图形表示。在一些实施例中，乘车共享乘客举起用户设备110以使用用户设备110的相机传感器来捕获现实生活环境的图像。这里，相机传感器的视场被墙壁阻挡，而乘车共享车辆正从墙壁的另一侧过来。即，在相机传感器与乘车共享车辆之间没有视线。
安装在用户设备110中的乘车共享助理199可以从乘车共享车辆接收由V2X数据描述的V2X无线消息，其中，V2X数据包括乘车共享车辆的GPS数据和描述乘车共享车辆的当前道路环境的传感器数据。乘车共享助理199可以基于乘车共享车辆的GPS数据和描述乘车共享车辆的当前道路环境的传感器数据来生成子图像，该子图像在乘车共享车辆的实际位置中(例如，在显示器114上显示的虚线部分)描绘乘车共享车辆。乘车共享助理199将子图像与描述现实生活环境的所捕获的图像(例如，在显示器114上显示的实线部分)进行组合，以形成所捕获的图像的增强版本。显示器114将所捕获的图像的增强版本呈现给乘车共享乘客，从而即使乘车共享车辆尚未在视线中，乘车共享乘客也可以容易地定位乘车共享车辆。
在以上描述中，出于解释的目的，阐述了许多具体细节以便提供对说明书的透彻理解。然而，对于本领域的技术人员将明显的是，可以在没有这些具体细节的情况下实践本公开。在一些实例中，以框图形式示出了结构和设备，以便避免使描述不清楚。例如，以上可以主要参考用户界面和特定硬件来描述本实施例。然而，本实施例可以应用于可以接收数据和命令的任何类型的计算机系统、以及提供服务的任何外围设备。
在说明书中对“一些实施例”或“一些实例”的引用是指结合实施例或实例描述的特定特征、结构或特性可以包括在说明书的至少一个实施例中。在说明书中各个地方出现的短语“在一些实施例中”不一定全都指相同的实施例。
下面的详细描述的一些部分是根据对计算机存储器内的数据比特的操作的算法和符号表示来呈现的。这些算法描述和表示是数据处理领域的技术人员用来最有效地向本领域的其他技术人员传达其工作内容的手段。这里，算法通常被认为是导致所期望的结果的步骤的自洽序列。这些步骤是需要对物理量进行物理操纵的步骤。通常，尽管不是必需的，这些量采取能够被存储、传输、组合、比较和以其他方式操纵的电信号或磁信号的形式。主要出于通用的原因，有时已经证明将这些信号称为比特、值、元素、符号、字符、项、数字等是方便的。
然而，应当牢记，所有这些和类似术语均应与适当的物理量相关联，并且仅仅是应用于这些量的方便标签。除非从下面的讨论中另外明确指出，否则应理解，在整个描述中，利用包括“处理”或“计算”或“运算”或“确定”或“显示”等的术语的讨论是指计算机系统或类似电子计算设备的动作和处理，其将被表示为计算机系统的寄存器和存储器内的物理(电子)量的数据转换为类似地被表示为计算机系统存储器或寄存器或其他这样的信息存储、传输或显示设备内的物理量的其他数据。
说明书的当前实施例还可以涉及用于执行本文中的操作的装置。该装置可以被专门构造用于所需要的目的，或者该装置可以包括由存储在计算机中的计算机程序选择性地激活或重新配置的通用计算机。这样的计算机程序可以存储在计算机可读存储介质中，包括但不限于任何类型的盘(包括软盘、光盘、CD-ROM和磁盘)、只读存储器(ROM)、随机存取存储器(RAM)、EPROM、EEPROM、磁卡或光卡、包括具有非易失性存储器的USB密钥的闪速存储器、或适合于存储电子指令的任何类型的介质，各自耦合到计算机系统总线。
本说明书可以采取一些完全硬件实施例、一些完全软件实施例或一些包含硬件元素和软件元素两者的实施例的形式。在一些优选实施例中，本说明书以软件实现，该软件包括但不限于固件、驻留软件、微代码等。
此外，本说明书可以采取可从计算机可用或计算机可读介质访问的计算机程序产品的形式，该计算机可用或计算机可读介质提供了供计算机或任何指令执行系统使用或与其结合使用的程序代码。为了本说明书的目的，计算机可用或计算机可读介质可以是可以包括、存储、传送、传播或传输程序以供指令执行系统、装置或设备使用或与其结合使用的任何装置。
适合于存储或执行程序代码的数据处理系统将包括通过系统总线直接或间接耦合到存储器元件的至少一个处理器。存储器元件可以包括在程序代码的实际执行期间使用的本地存储器、大容量存储装置和高速缓冲存储器，该高速缓冲存储器提供至少一些程序代码的临时存储以便减少在执行期间必须从大容量存储装置中检索代码的次数。
输入/输出或I/O设备(包括但不限于键盘、显示器、指点设备等)可以直接耦合到系统或通过中间的I/O控制器耦合到系统。
网络适配器也可以耦合到系统，以使得数据处理系统能够通过中间的专用网络或公共网络耦合到其他数据处理系统或远程打印机或存储装置。调制解调器、电缆调制解调器和以太网卡只是当前可用类型的网络适配器中的几种。
最后，本文中提出的算法和显示与任何特定计算机或其他装置不是固有地相关的。各种通用系统可以与根据本文中的教导的程序一起使用，或者可以证明构造更专用的装置以执行所需要的方法步骤是方便的。各种这些系统所需的结构将从下面的描述中出现。另外，未参考任何特定的编程语言来描述该说明书。应当理解，可以使用各种编程语言来实现如本文中所述的说明书的教导。
为了说明和描述的目的，已经给出了对本说明书的实施例的前述描述。不是旨在穷举或将说明书限制为所公开的精确形式。根据以上教导，许多修改和变型是可能的。意图是，本公开的范围不由该详细说明书限制，而是由本申请的权利要求书限制。如本领域技术人员将理解的，说明书可以在不偏离其精神或基本特征的情况下以其他特定形式体现。类似地，模块、例程、特征、属性、方法和其他方面的特定命名和划分也不是强制性的或重要的，并且实现说明书或其特征的机制可能具有不同的名称、划分或格式。此外，对于相关领域的普通技术人员将明显的是，本公开的模块、例程、特征、属性、方法和其他方面可以被实现为软件、硬件、固件或这三者的任意组合。此外，无论说明书的哪个组件(组件的示例是模块)被实现为软件，该组件都可以被实现为独立程序、较大程序的一部分、多个单独程序、静态或静态动态链接库、可内核加载的模块、设备驱动程序、或以计算机编程领域的普通技术人员现在或将来已知的每一种和其他任何方式。另外，本公开绝不限于任何特定编程语言或任何特定操作系统或环境的实施例。因此，本公开旨在说明而非限制本说明书的范围，本说明书的范围在以下权利要求中阐述。

Claims (10)

1.一种方法，包括：
由用户设备接收由乘车共享车辆发送的车辆对一切V2X无线消息，所述V2X无线消息包括描述所述乘车共享车辆的V2X数据；
基于所述V2X数据生成增强图形数据，其中所述增强图形数据描述由所述用户设备捕获的图像的增强版本，所述图像描绘包括所述乘车共享车辆的现实生活环境，其中所述增强版本在所述现实生活环境内突出显示所述乘车共享车辆的位置；以及
在所述用户设备上呈现所述增强图形数据，从而更容易在所述现实生活环境中定位所述乘车共享车辆。
2.根据权利要求1所述的方法，其中所述V2X数据包括所述乘车共享车辆的符合专用短距离通信DSRC的全球定位系统GPS数据。
3.根据权利要求2所述的方法，还包括：
检索所述用户设备的GPS数据；
检索对描绘所述现实生活环境的所述图像进行描述的相机数据；以及
基于所述乘车共享车辆的符合DSRC的GPS数据、所述用户设备的GPS数据和所述相机数据，生成所述增强图形数据。
4.根据权利要求1所述的方法，其中所述增强图形数据包括增强现实内容、虚拟现实内容和混合现实内容之一，并且通过计算机生成的感知信息来增强所述图像的增强版本上的所述乘车共享车辆。
5.根据权利要求1所述的方法，还包括：
检索描述所述用户设备的显示器的取向的传感器数据；以及
还基于所述传感器数据生成所述增强图形数据。
6.根据权利要求1所述的方法，其中所述V2X数据还包括唯一地识别所述乘车共享车辆的第一车辆标识符ID，并且在生成所述增强图形数据之前，所述方法还包括：
从所述V2X数据中检索第一车辆ID；
从车辆ID数据库中检索第二车辆ID，第二车辆ID唯一地识别被指定为执行与所述用户设备相关联的乘车共享事件的车辆；以及
如果第一车辆ID与第二车辆ID匹配，则辨别所述乘车共享车辆是被指定为执行与所述用户设备相关联的所述乘车共享事件的车辆，
其中第一车辆ID和第二车辆ID是临时唯一标识符。
7.根据权利要求1所述的方法，其中如果所述乘车共享车辆不在视线中但是在所述用户设备的V2X通信范围内，则生成所述增强图形数据包括：
基于所述乘车共享车辆的地理位置将所述乘车共享车辆的表示叠加在所述现实生活环境上，以形成所述图像的增强版本，从而将所述乘车共享车辆的表示与所述现实生活环境一起呈现在所述用户设备上。
8.根据权利要求1所述的方法，其中所述V2X无线消息是从包括以下各项的组中选择的：DSRC消息；基本安全信息；长期演进LTE消息；LTE-V2X消息；5G-V2X消息；和毫米波消息；以及
其中所述乘车共享车辆向所述用户设备的用户提供乘车共享服务，以及所述增强图形数据辅助所述用户定位所述乘车共享车辆并且接收所述乘车共享服务。
9.一种系统，包括：
处理器；以及
存储计算机代码的非暂态存储器，所述计算机代码在由所述处理器执行时使所述处理器：
接收由乘车共享车辆发送的车辆对一切V2X无线消息，所述V2X无线消息包括描述所述乘车共享车辆的V2X数据；
基于所述V2X数据生成增强图形数据，其中所述增强图形数据描述由用户设备捕获的图像的增强版本，所述图像描绘包括所述乘车共享车辆的现实生活环境，其中所述增强版本在所述现实生活环境内突出显示所述乘车共享车辆的位置；以及
在所述用户设备上呈现所述增强图形数据，从而更容易在所述现实生活环境中定位所述乘车共享车辆。
10.一种计算机程序产品，包括存储计算机可执行代码的非暂态存储器，所述计算机可执行代码在由处理器执行时使所述处理器：
接收由乘车共享车辆发送的车辆对一切V2X无线消息，所述V2X无线消息包括描述所述乘车共享车辆的V2X数据；
基于所述V2X数据生成增强图形数据，其中所述增强图形数据描述由用户设备捕获的图像的增强版本，所述图像描绘包括所述乘车共享车辆的现实生活环境，其中所述增强版本在所述现实生活环境内突出显示所述乘车共享车辆的位置；以及
在所述用户设备上呈现所述增强图形数据，从而更容易在所述现实生活环境中定位所述乘车共享车辆。
CN201911085730.5A 2018-11-08 2019-11-08 Ar/vr/mr乘车共享助理 Active CN111161008B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/184,285 US11100680B2 (en) 2018-11-08 2018-11-08 AR/VR/MR ride sharing assistant
US16/184,285 2018-11-08

Publications (2)

Publication Number Publication Date
CN111161008A true CN111161008A (zh) 2020-05-15
CN111161008B CN111161008B (zh) 2022-10-18

Family

ID=70551895

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911085730.5A Active CN111161008B (zh) 2018-11-08 2019-11-08 Ar/vr/mr乘车共享助理

Country Status (3)

Country Link
US (1) US11100680B2 (zh)
JP (1) JP7143833B2 (zh)
CN (1) CN111161008B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113873199A (zh) * 2021-09-23 2021-12-31 上汽大众汽车有限公司 基于直连通讯和蜂窝网络通讯的车载摄像头共享系统及方法

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10837788B1 (en) 2018-05-03 2020-11-17 Zoox, Inc. Techniques for identifying vehicles and persons
US10809081B1 (en) 2018-05-03 2020-10-20 Zoox, Inc. User interface and augmented reality for identifying vehicles and persons
US11846514B1 (en) * 2018-05-03 2023-12-19 Zoox, Inc. User interface and augmented reality for representing vehicles and persons
US11092456B2 (en) * 2019-03-08 2021-08-17 Aptiv Technologies Limited Object location indicator system and method
EP3781907A1 (en) * 2019-03-15 2021-02-24 Google LLC Pickup and drop-off location identification for ridesharing and delivery via augmented reality
CN110015233B (zh) 2019-03-20 2020-04-10 北京嘀嘀无限科技发展有限公司 司乘匹配的指示装置配置方法和系统
US11716616B2 (en) * 2019-05-06 2023-08-01 Pointr Limited Systems and methods for location enabled search and secure authentication
US11624626B2 (en) * 2019-07-26 2023-04-11 Here Global B.V. Method, apparatus and computer program product for using a location graph to enable natural guidance
US20210034869A1 (en) * 2019-07-30 2021-02-04 Didi Research America, Llc Method and device for using augmented reality in transportation
US11072277B2 (en) * 2019-09-20 2021-07-27 Adway International Inc. Method and apparatus to dynamically identify a vehicle
US11900815B2 (en) * 2019-09-30 2024-02-13 Gm Cruise Holdings Llc Augmented reality wayfinding in rideshare applications
SE2051033A1 (en) * 2020-09-01 2021-05-05 Scania Cv Ab Method, control arrangement and system for illumination
US20220135082A1 (en) * 2020-11-02 2022-05-05 Unikey Technologies Inc. System and method for wireless interaction between an autonomous vehicle and a mobile device
US20220383751A1 (en) * 2021-05-28 2022-12-01 Lyft, Inc. Systems and methods for personal mobile vehicle localization in a fleet management system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120218125A1 (en) * 2011-02-28 2012-08-30 Toyota Motor Engin. & Manufact. N.A.(TEMA) Two-way video and 3d transmission between vehicles and system placed on roadside
US20160063484A1 (en) * 2014-08-27 2016-03-03 Capital One Financial Corporation Augmented reality card activation
US20160109940A1 (en) * 2014-10-19 2016-04-21 Philip Lyren Electronic Device Displays an Image of an Obstructed Target
CN107369207A (zh) * 2016-05-11 2017-11-21 百度（美国）有限责任公司 在无人驾驶车辆中提供增强虚拟现实内容的系统和方法
CN107450531A (zh) * 2016-05-31 2017-12-08 通用汽车环球科技运作有限责任公司 动态地将用户引导至自主驾驶交通工具的搭载位置的系统

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002032897A (ja) 2000-07-18 2002-01-31 Futaba Keiki Kk タクシーの配車サービス方法及びそのシステム
JP2005182146A (ja) 2003-12-16 2005-07-07 Fujitsu Ltd 移動ルート案内システムおよびルート案内サーバ
JP2006099679A (ja) 2004-09-30 2006-04-13 Kanazawa Inst Of Technology タクシー予約方法および装置およびタクシー予約システム
US20190050758A1 (en) * 2014-01-30 2019-02-14 Modutram Mexico, S.A. De. C.V. System and method for grouping passengers together in an automated collective form of transport
EP3423022A4 (en) * 2016-03-01 2019-10-23 Brandbumps, LLC TACTILE ALARM SYSTEM AND SYSTEM WITH INTELLIGENT TECHNOLOGY
US10088846B2 (en) * 2016-03-03 2018-10-02 GM Global Technology Operations LLC System and method for intended passenger detection
US9934632B2 (en) * 2016-09-06 2018-04-03 Denso International America, Inc. Wireless passenger proximity detection system for autonomous vehicles
CN109690634A (zh) * 2016-09-23 2019-04-26 苹果公司 增强现实显示器
JP6895743B2 (ja) 2016-12-12 2021-06-30 三菱電機株式会社 車載認証装置および車載認証方法
US10347046B2 (en) * 2017-06-16 2019-07-09 Daqri, Llc Augmented reality transportation notification system
US20180374032A1 (en) * 2017-06-27 2018-12-27 Uber Technologies, Inc. Match-based route navigation system
US11118930B2 (en) * 2017-07-14 2021-09-14 Lyft, Inc. Providing information to users of a transportation system using augmented reality elements
US10591730B2 (en) * 2017-08-25 2020-03-17 II Jonathan M. Rodriguez Wristwatch based interface for augmented reality eyewear
US10423844B2 (en) * 2017-09-27 2019-09-24 Toyota Jidosha Kabushiki Kaisha Personalized augmented reality vehicular assistance for color blindness condition
US10558868B2 (en) * 2017-12-18 2020-02-11 GM Global Technology Operations LLC Method and apparatus for evaluating a vehicle travel surface
US20190206258A1 (en) * 2018-01-04 2019-07-04 nuTonomy Inc. Augmented reality vehicle interfacing
US11092456B2 (en) * 2019-03-08 2021-08-17 Aptiv Technologies Limited Object location indicator system and method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120218125A1 (en) * 2011-02-28 2012-08-30 Toyota Motor Engin. & Manufact. N.A.(TEMA) Two-way video and 3d transmission between vehicles and system placed on roadside
US20160063484A1 (en) * 2014-08-27 2016-03-03 Capital One Financial Corporation Augmented reality card activation
US20160109940A1 (en) * 2014-10-19 2016-04-21 Philip Lyren Electronic Device Displays an Image of an Obstructed Target
CN107369207A (zh) * 2016-05-11 2017-11-21 百度（美国）有限责任公司 在无人驾驶车辆中提供增强虚拟现实内容的系统和方法
CN107450531A (zh) * 2016-05-31 2017-12-08 通用汽车环球科技运作有限责任公司 动态地将用户引导至自主驾驶交通工具的搭载位置的系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113873199A (zh) * 2021-09-23 2021-12-31 上汽大众汽车有限公司 基于直连通讯和蜂窝网络通讯的车载摄像头共享系统及方法
CN113873199B (zh) * 2021-09-23 2023-11-21 上汽大众汽车有限公司 基于直连通讯和蜂窝网络通讯的车载摄像头共享系统及方法

Also Published As

Publication number Publication date
CN111161008B (zh) 2022-10-18
JP7143833B2 (ja) 2022-09-29
US20200151916A1 (en) 2020-05-14
JP2020095696A (ja) 2020-06-18
US11100680B2 (en) 2021-08-24

Similar Documents

Publication Publication Date Title
CN111161008B (zh) Ar/vr/mr乘车共享助理
EP3500944B1 (en) Adas horizon and vision supplemental v2x
US10895465B2 (en) Optimizing a route selection for a highly autonomous vehicle
US10248196B2 (en) System for occlusion adjustment for in-vehicle augmented reality systems
US11854387B2 (en) Reducing vehicular congestion at an intersection
US10423844B2 (en) Personalized augmented reality vehicular assistance for color blindness condition
JP2019192225A (ja) 協働知覚のためのマルチレベルハイブリッドｖ２ｘ通信
CN111436034B (zh) 固定交通工具微云的按需形成
US11113969B2 (en) Data-to-camera (D2C) based filters for improved object detection in images based on vehicle-to-everything communication
US11532097B2 (en) Method for estimating the quality of localization in the self-localization of a vehicle, device for carrying out the steps of the method, vehicle, and computer program
US10222229B1 (en) Autonomous feature optimization for a connected vehicle based on a navigation route
US20190025584A1 (en) Augmented Reality Vehicular Assistance for Color Blindness
CN113452927A (zh) 用于自主交通工具用户的增强的社交媒体体验
US9709414B2 (en) Personalized suggestion of automated driving features
CN111339445A (zh) 用于基于车辆的游览的系统及方法
CN111417065B (zh) 基于v2x消息变量匹配第一联网设备和第二联网设备
US20210245773A1 (en) Vehicular cooperative perception for identifying a connected vehicle to aid a pedestrian
US11257363B2 (en) XR-based slot reservation system for connected vehicles traveling through intersections
Chandupatla et al. Augmented reality projection for driver assistance in autonomous vehicles
US20230339492A1 (en) Generating and depicting a graphic of a phantom vehicle
US20230419200A1 (en) Decentralized parking fulfillment service
JP2018054350A (ja) 情報処理装置、情報処理方法及び情報処理プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant