JP2020095696A - Ar/vr/mrライドシェアリングアシスタント - Google Patents

Ar/vr/mrライドシェアリングアシスタント Download PDF

Info

Publication number
JP2020095696A
JP2020095696A JP2019202134A JP2019202134A JP2020095696A JP 2020095696 A JP2020095696 A JP 2020095696A JP 2019202134 A JP2019202134 A JP 2019202134A JP 2019202134 A JP2019202134 A JP 2019202134A JP 2020095696 A JP2020095696 A JP 2020095696A
Authority
JP
Japan
Prior art keywords
rideshare
vehicle
data
user device
dsrc
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019202134A
Other languages
English (en)
Other versions
JP7143833B2 (ja
JP2020095696A5 (ja
Inventor
ケニー,ジョン
Kenney John
バンサル,ガウラブ
Bansal Gaurav
ルウ,ホンシェン
Hongsheng Lu
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of JP2020095696A publication Critical patent/JP2020095696A/ja
Publication of JP2020095696A5 publication Critical patent/JP2020095696A5/ja
Application granted granted Critical
Publication of JP7143833B2 publication Critical patent/JP7143833B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0645Rental transactions; Leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3407Route searching; Route guidance specially adapted for specific applications
    • G01C21/3438Rendez-vous, i.e. searching a destination where several users can meet, and the routes to this destination for these users; Ride sharing, i.e. searching a route such that at least two users can share a vehicle for at least part of the route
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/03Cooperating elements; Interaction or communication between different cooperating elements or between cooperating elements and receivers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29Geographical information databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40Business processes related to the transportation industry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/021Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/023Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • H04W4/027Services making use of location information using location based information parameters using movement velocity, acceleration information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/70Services for machine-to-machine communication [M2M] or machine type communication [MTC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10Recognition assisted with metadata

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Remote Sensing (AREA)
  • Signal Processing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Databases & Information Systems (AREA)
  • Finance (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Multimedia (AREA)
  • Development Economics (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Tourism & Hospitality (AREA)
  • Traffic Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

【課題】本開示は、ユーザ装置上に拡張グラフィックデータを提供するための実施形態を含む。【解決手段】いくつかの実施形態において、方法は、ライドシェア車両によって送信され、かつライドシェア車両を表すV2Xデータを含む車両対モノ(V2X)無線メッセージをユーザ装置で受信することを含む。この方法は、V2Xデータに基づいて拡張グラフィックデータを生成することを含み、拡張グラフィックデータは、ユーザ装置によってキャプチャされ、かつライドシェア車両を含む現実の環境を表す画像の拡張バージョンを表し、拡張バージョンは、現実の環境内のライドシェア車両の場所を強調する。この方法は、現実の環境においてライドシェア車両がより簡単に見つかるように、ユーザ装置上に拡張グラフィックデータを提示することを含む。【選択図】図3A

Description

本明細書は、ライドシェアサービスの提供に関する。特に、本明細書は、ライドシェアサービスを提供するライドシェア車両をユーザが見つけることを支援するために、拡張現実(AR)/仮想現実(VR)/混合現実(MR)出力を生成することに関する。
ライドシェアアプリケーション(Uber、Lyftなど)の人気がますます高まっている。既存のライドシェアリングアプリケーションの問題の1つは、1台のライドシェア車両が他の車両の集団内にある場合に、ライドシェアの乗客にとってそのライドシェア車両を見つけることが困難になり得ることである。例えば、ライドシェアの乗客(例えば、既存のライドシェアリングアプリケーションのユーザ)にライドシェアサービスを提供するために、1台のライドシェア車両が使用されると仮定する。そのライドシェア車両は、空港またはライドシェア車両が使用される任意の他の場所でライドシェアの乗客をピックアップしようとする。ライドシェア車両はライドシェアの乗客の近くにあるが、他の車両の集団内にある(例えば、ライドシェア車両が他の車両に囲まれている)ため、ライドシェアの乗客はそのライドシェア車両を見つけるのに苦労する。
既存のライドシェアアプリケーションは、ライドシェア車両がライドシェアの乗客の位置の近くに移動するときに、ライドシェア車両に関する以下の情報をライドシェアの乗客に提供することができる:(1)ライドシェア車両の製造者、(2)ライドシェア車両の型式、(3)ライドシェア車両のナンバープレート番号、(4)ライドシェア車両の運転者の顔写真画像、および(5)ライドシェア車両の絵を描写するマップの画像。この情報を使用して、ライドシェアの乗客は公共の場所でライドシェア車両を探すように期待される。しかし、この情報は、ライドシェア車両が他の車両の集団内にあるときにライドシェアの乗客がライドシェア車両を見つけるために便利な方法でも顧客に優しい方法でもない。また、このアプローチは時間がかかり、混雑した歩道で待ちながら交通量の多い車道でライドシェア車両を見つけることができるかどうか心配したくないユーザに不安が生じる。さらに、状況によっては、ライドシェアの乗客が縁石にいて、ライドシェア車両は交通渋滞のために縁石に辿りつけず(例えば、これが発生するよくあるシナリオは空港であるが、他のシナリオも可能である)、それにより、ライドシェアの乗客はライドシェア車両を探すために車道に立ち入らなければならず、さもなければそのライドシェアサービスをキャンセルして別の車両を依頼しなければならないという危険な状況を作り出す。
ライドシェアの乗客のユーザ装置にインストールするライドシェアアシスタント、およびライドシェア車両の電子制御ユニット(ECU)にインストールするライドシェアクライアントの実施形態について説明する。ライドシェアアシスタントとライドシェアクライアントは互いに協力して、多くの他の車両間でライドシェア車両を識別しにくい状況や、ライドシェアの乗客がライドシェア車両を見つけるのに苦労する可能性がある任意の他の状況で、ライドシェアの乗客がライドシェア車両を見つけやすくする。
いくつかの実施形態において、ライドシェアクライアントとライドシェアアシスタントは、車両対モノ(V2X)通信を介して互いに通信する。ライドシェアクライアントは、ライドシェア車両のV2X無線機に、V2X無線メッセージをライドシェアの乗客のユーザ装置(スマートフォンなど)に送信させる。このV2X無線メッセージには、ライドシェア車両の地理的位置を示すデジタルデータが含まれている。ユーザ装置は、ユーザ装置の地理的位置を表すデジタルデータを生成する。ライドシェアアシスタントは、スタンド
アロンのライドシェアアプリケーション(UberやLyftに類似)、または既存のライドシェアアプリケーションのプラグインまたはモジュールである。
ライドシェアアシスタントは、ユーザ装置の電子ディスプレイを使用してAR/VR/MR出力を生成し、AR/VR/MR出力は、ユーザ装置の環境(またはライドシェアの乗客の環境)の画像を描写し、この環境内でライドシェア車両の位置を強調する。例えば、ライドシェアの乗客がライドシェア車両を探している。ライドシェアの乗客は、環境の画像を撮影しようとするようにスマートフォンを持ち上げる。これを行うと、スマートフォンのカメラは画像データをキャプチャし、スマートフォンのディスプレイは、ライドシェアの乗客の環境におけるリアルタイムの現実の画像を表す。ライドシェア車両がこの環境内にある。スマートフォンに表示された画像はライドシェアアシスタントによって変更されて、環境内にあるライドシェア車両の位置が強調される。例えば、画像は白黒であるが、ライドシェア車両はカラーである。ライドシェア車両の位置を強調するための他の多くのバリエーションが可能であり、例えば、ライドシェア車両の位置を強調するグラフィカルオーバーレイを含む。画像は、環境内のオブジェクトが移動したり、スマートフォンの向きが変わったりする(例えば、ライドシェアの乗客の手が動く)と、リアルタイムまたはほぼリアルタイムで更新される。
いくつかの実施形態では、ライドシェアアシスタントは(1)ライドシェア車両の地理的位置を表すデジタルデータ、(2)ユーザ装置の地理的位置を表すデジタルデータ、(3)ライドシェア車両の環境の画像を表すカメラデータ、(4)ユーザ装置のディスプレイの向きまたは向きの変化を表すセンサデータの入力を受信し、これらの入力に基づいて、ユーザ装置の電子ディスプレイに表示される画像を出力する。
いくつかの実施形態では、ライドシェアクライアントとライドシェアアシスタントとの間のV2X通信を路側機(RSU)が中継する。
AR/VR/MRコンテンツを使用してライドシェアの乗客がライドシェア車両を見つけるのを助ける既存のソリューションはない。代わりに、既存のソリューションの中には、ライドシェアの乗客に基本的な情報を提供し、ライドシェアの乗客がライドシェア車両を手動で見つけることを期待するものがある。例えば、既存のソリューションは、(1)環境におけるライドシェアの乗客の位置と、(2)時間が経つにつれてライドシェアの乗客の位置に車両が近づいていることを示す車両の絵とを描写する、現在の環境のマップ画像をライドシェアの乗客に提供する。ただし、このマップはAR/VR/MRコンテンツではなく、環境の実際の画像を表していない。代わりに、マップに描かれているものは全て絵であり、実際の世界の画像ではない。比較すると、本明細書で説明するいくつかの実施形態では、ライドシェアアシスタントは、ライドシェアの乗客のユーザ装置のカメラを使用して、実際の環境の画像をキャプチャする。ユーザ装置のディスプレイは、これらの画像をリアルタイムでキャプチャされているとおりに表す。ライドシェア車両が画像内に現れると、ライドシェア車両の外観が何らかの方法で変更され、ライドシェアの乗客は画像に描写された車両が自分のライドシェア車両であることを認識できるようになる。他の実施形態も可能である。このアプローチにより、ライドシェアの乗客は、既存のソリューションと比較してより迅速にストレスなく自分のライドシェア車両を見つけることができる。
V2X通信を使用してライドシェアの乗客がライドシェア車両を見つけるのを助ける既存のソリューションはない。代わりに、一部の既存のソリューションは、クラウドサーバを使用して、ライドシェア車両に関する基本的な情報やライドシェア車両の位置に関するリアルタイムデータを含むライドシェア車両のプロファイルを格納し、これらのプロファイルは、ライドシェア車両内にあり、かつライドシェア車両の運転者に属するスマートフ
ォンによってクラウドサーバに提供される。次に、クラウドサーバはWiFiまたはセルラ通信を使用して、基本的な情報をライドシェアの乗客のスマートフォンに提供する。比較すると、V2X通信はライドシェア車両からライドシェアの乗客のユーザ装置へとやり取りされるため、本明細書で説明する実施形態ではクラウドサーバは必要ない。このアプローチは、既存のソリューションよりも迅速かつ簡単に実装できる。
また、ライドシェア車両の車載センサを使用してライドシェアの乗客がライドシェア車両を見つけるのを助ける既存のソリューションはない。一部の既存のソリューションでは、ライドシェア車両の運転者が操作するスマートフォンの全地球測位システム(一般的に言及される場合には「GPS」、特定のデバイスに関しては「GPSユニット」)を使用してマップ内のライドシェア車両の位置を決定する。比較すると、本明細書で説明するいくつかの実施形態では、ライドシェアクライアントは、ライドシェア車両自体の車載センサを使用してライドシェア車両の位置を決定する。
本明細書で説明するライドシェアクライアントとライドシェアアシスタントの追加の利点には、以下の1つ以上による位置精度の利点が含まれる:(1)運転者のスマートフォンの場所にしかアクセスできない既存のソリューションに比べて、ライドシェア車両の車載センサを使用してライドシェア車両の位置を決定する、および(2)多層クラウドインフラストラクチャを介してユーザ装置に情報が伝播する場合のレイテンシが高いのに比べて、ライドシェア車両の位置がV2X通信を介してユーザ装置のライドシェアアシスタントに伝達される場合にはレイテンシが低い。
例えば、V2X通信を使用するライドシェア車両は現在、ライドシェアの運転者が使用するスマートフォンよりも正確なGPSユニットを一般的に備えている。運転者のスマートフォンの位置精度に関する要件はない。対照的に、V2X搭載車両は、業界標準の位置精度要件である1.5メートルに準拠している可能性がある。既存のソリューションでは、ライドシェアの乗客は、ライドシェアアプリケーションプロバイダのプロバイダによって中継されるように運転者のスマートフォンの位置にしかアクセスできないため、既存のソリューションで提供されるライドシェアサービスは、本明細書で説明するライドシェアクライアントおよびライドシェアアシスタントが提供するライドシェアサービスに比べて位置精度が低い。
別の例では、本明細書で説明するライドシェアクライアントおよびライドシェアアシスタントは、ライドシェアの乗客に対する位置レポートのレイテンシを短縮し、これは接近するライドシェア車両を見つける乗客の能力も向上させる。
1つ以上のコンピュータを含むシステムは、ソフトウェア、ファームウェア、ハードウェア、またはそれらの組み合わせがシステムにインストールされ、動作原因の中でまたはシステムにアクションを実行させることによって、特定の動作またはアクションを実行するように構成できる。1つ以上のコンピュータプログラムは、データ処理装置によって実行されると装置にアクションを実行させる指示を含めることにより、特定の動作またはアクションを実行するように構成できる。
一般的な一態様は、ライドシェア車両によって送信され、かつライドシェア車両を表すV2Xデータを含むV2X無線メッセージをユーザ装置によって受信することと、ユーザ装置によってキャプチャされ、かつライドシェア車両を含む現実の環境を表す画像の拡張バージョンであって、前記現実の環境内のライドシェア車両の場所を強調する拡張バージョンを表す拡張グラフィックデータを、前記V2Xデータに基づいて生成することと、現実の環境においてライドシェア車両がより簡単に見つかるように、ユーザ装置上に拡張グラフィックデータを提示することとを含む方法を含む。この態様の他の実施形態は、方法
のアクションを実行するように各々構成された、1つ以上のコンピュータ記憶装置に記録された対応するコンピュータシステム、装置、およびコンピュータプログラムを含む。
実装には、次の機能の1つ以上が含まれ得る。V2Xデータがライドシェア車両の専用狭域通信(DSRC)準拠全地球測位システム(GPS)データを含む方法。この方法は、ユーザ装置のGPSデータを取得することと、現実の環境を表す画像を表すカメラデータを取得することと、ライドシェア車両のDSRC準拠GPSデータ、ユーザ装置のGPSデータ、およびカメラデータに基づいて、拡張グラフィックデータを生成することとをさらに含む。画像がユーザ装置のカメラセンサによってキャプチャされたリアルタイム画像である方法。拡張グラフィックデータが拡張現実コンテンツ、仮想現実コンテンツおよび混合現実コンテンツのいずれかを含み、画像の拡張バージョンにおけるライドシェア車両は、コンピュータ生成された知覚情報によって拡張されている方法。この方法は、ユーザ装置のディスプレイの向きを表すセンサデータを取得することと、センサデータにさらに基づいて拡張グラフィックデータを生成することとをさらに含む。V2Xデータが、ライドシェア車両を一意に識別する第1の車両識別子(ID)をさらに含む方法であって、拡張グラフィックデータを生成する前に、方法は、V2Xデータから第1の車両IDを取得することと、ユーザ装置に関連付けられたライドシェアイベントを実行するように指定された車両を一意に識別する第2の車両IDを車両IDデータベースから取得することと、第1の車両IDが第2の車両IDと一致する場合には、ライドシェア車両がユーザ装置に関連付けられたライドシェアイベントを実行するように指定された車両であることを認識することと、をさらに含む、方法。第1の車両IDおよび第2の車両IDが一時的な一意の識別子である方法。ライドシェア車両が視線上にないが、ユーザ装置のV2X通信範囲内にある場合、拡張グラフィックデータを生成する方法は、ライドシェア車両の表示がユーザ装置上の現実の環境と共に提示されるように、画像の拡張バージョンを形成するためにライドシェア車両の地理的位置に基づいてライドシェア車両の表示を現実の環境に重ね合わせることを含む。V2X無線メッセージがDSRCメッセージ、基本安全メッセージ、ロングタームエボリューション(LTE)メッセージ、LTE−V2Xメッセージ、5G−V2Xメッセージ、ミリ波メッセージで構成されるグループから選択される方法。ライドシェア車両がユーザ装置のユーザにライドシェアサービスを提供し、拡張グラフィックデータは、ユーザがライドシェア車両を見つけライドシェアサービスを受けることを支援する方法。記載されている技術の実装は、ハードウェア、方法またはプロセス、あるいはコンピュータアクセス可能媒体上のコンピュータソフトウェアを含み得る。
一般的な一態様には、プロセッサと、コンピュータコードを格納する非一時的メモリとを含むシステムが含まれ、コンピュータコードは、プロセッサによって実行されるとプロセッサに、ライドシェア車両によって送信され、かつライドシェア車両を表すV2Xデータを含むV2X無線メッセージを受信させ;ユーザ装置によってキャプチャされ、かつライドシェア車両を含む現実の環境を表す画像の拡張バージョンであって、前記現実の環境内のライドシェア車両の場所を強調する拡張バージョンを表す拡張グラフィックデータを、前記V2Xデータに基づいて生成させ;現実の環境においてライドシェア車両がより簡単に見つかるように、ユーザ装置上に拡張グラフィックデータを提示させる。この態様の他の実施形態は、方法のアクションを実行するように各々構成された、1つ以上のコンピュータ記憶装置に記録された対応するコンピュータシステム、装置、およびコンピュータプログラムを含む。
実装には、次の機能の1つ以上が含まれ得る。V2Xデータがライドシェア車両のDSRC準拠GPSデータを含むシステム。コンピュータコードは、プロセッサによって実行されると、プロセッサにさらに、ユーザ装置のGPSデータを取得させ;現実の環境を表す画像を表すカメラデータを取得させ;ライドシェア車両のDSRC準拠GPSデータ、ユーザ装置のGPSデータ、およびカメラデータに基づいて、拡張グラフィックデータを
生成させるシステム。画像がユーザ装置のカメラセンサによってキャプチャされたリアルタイム画像であるシステム。拡張グラフィックデータが拡張現実コンテンツ、仮想現実コンテンツおよび混合現実コンテンツのいずれかを含み、画像の拡張バージョンにおけるライドシェア車両は、コンピュータ生成された知覚情報によって拡張されているシステム。コンピュータコードは、プロセッサによって実行されると、プロセッサにさらに、ユーザ装置のディスプレイの向きを表すセンサデータを取得させ;センサデータにさらに基づいて拡張グラフィックデータを生成させるシステム。記載されている技術の実装は、ハードウェア、方法またはプロセス、あるいはコンピュータアクセス可能媒体上のコンピュータソフトウェアを含み得る。
一般的な一態様には、コンピュータ実行可能コードを格納する非一時的メモリを含むコンピュータプログラム製品が含まれ、コンピュータ実行可能コードは、プロセッサによって実行されると、プロセッサに、ライドシェア車両によって送信され、かつライドシェア車両を表すV2Xデータを含むV2X無線メッセージを受信させ;ユーザ装置によってキャプチャされ、かつライドシェア車両を含む現実の環境を表す画像の拡張バージョンであって、前記現実の環境内のライドシェア車両の場所を強調する拡張バージョンを表す拡張グラフィックデータを、前記V2Xデータに基づいて生成させ;現実の環境においてライドシェア車両がより簡単に見つかるように、ユーザ装置上に拡張グラフィックデータを提示させる。この態様の他の実施形態は、方法のアクションを実行するように各々構成された、1つ以上のコンピュータ記憶装置に記録された対応するコンピュータシステム、装置、およびコンピュータプログラムを含む。
実装には、次の機能の1つ以上が含まれ得る。V2Xデータがライドシェア車両のDSRC準拠GPSデータを含む、コンピュータプログラム製品。コンピュータ実行可能コードがプロセッサによって実行されると、プロセッサにさらに、ユーザ装置のGPSデータを取得させ;現実の環境を表す画像を表すカメラデータを取得させ;ライドシェア車両のDSRC準拠GPSデータ、ユーザ装置のGPSデータ、およびカメラデータに基づいて拡張グラフィックデータを生成させる、コンピュータプログラム製品。記載されている技術の実装は、ハードウェア、方法またはプロセス、あるいはコンピュータアクセス可能媒体上のコンピュータソフトウェアを含み得る。
本開示は、添付図面の図において限定としてではなく例として示され、図では同様の要素を参照するために同様の参照番号が使用される。
いくつかの実施形態によるライドシェアクライアントおよびライドシェアアシスタントの動作環境を示すブロック図である。 いくつかの実施形態によるライドシェアクライアントおよびライドシェアアシスタントの動作環境を示す別のブロック図である。 いくつかの実施形態による、ユーザ装置上に拡張グラフィックデータを提供するためのフロープロセスを示すブロック図である。 いくつかの実施形態によるライドシェアアシスタントを含む例示的なコンピュータシステムを示すブロック図である。 いくつかの実施形態による、ユーザ装置上に拡張グラフィックデータを提供する方法を示す図である。 いくつかの実施形態による、ユーザ装置上に拡張グラフィックデータを提供する別の方法を示す図である。 いくつかの実施形態による、ライドシェア車両のGPSデータを提供する方法を示す図である。 いくつかの実施形態による、ユーザ装置上に拡張グラフィックデータを提供するための例示的なプロセスを示す図である。 いくつかの実施形態による、ユーザ装置上に拡張グラフィックデータを提供するための例示的なプロセスを示す図である。 いくつかの実施形態による、ユーザ装置上に拡張グラフィックデータを提供するための別の例示的なプロセスを示す図である。 いくつかの実施形態による、ユーザ装置上に拡張グラフィックデータを提供するための別の例示的なプロセスを示す図である。 いくつかの実施形態による、現実の環境におけるライドシェア車両の位置を強調する画像の例示的な拡張バージョンを示すグラフィック表示である。 いくつかの実施形態による、現実の環境におけるライドシェア車両の位置を強調する画像の別の例示的な拡張バージョンを示すグラフィック表示である。
ユーザ装置にインストールされたライドシェアアシスタントとライドシェア車両にインストールされたライドシェアクライアントが互いに協力してAR/VR/MR出力を生成し、ライドシェアの乗客がライドシェア車両を見つけるのを支援する実施形態をここで説明する。ライドシェアクライアントとライドシェアアシスタントは、V2X通信を介して互いに通信する。本明細書で説明するV2X通信の例には、DSRC(他の種類のDSRC通信の中でも基本安全メッセージ(BSM)および個人安全メッセージ(PSM)を含む)、LTE、ミリ波通信、3G、4G、5G−V2X、LTE−V2X、LTE車両ツー車両(LTE−V2V)、LTEデバイスツーデバイス(LTE−D2D)、ボイスオーバーLTE(VoLTE)などのうち1つ以上が含まれる。
いくつかの実施形態では、ライドシェアクライアントを含むライドシェア車両は、DSRC搭載車両である。DSRC搭載車両とは、(1)DSRC無線機を含み、(2)DSRC準拠GPSユニットを含み、かつ(3)DSRC搭載車両が位置する管轄区域でDSRCメッセージを合法的に送受信するように動作可能である車両である。DSRC無線機は、DSRC受信機とDSRC送信機を含むハードウェアである。DSRC無線機は、DSRCメッセージを無線で送受信するように動作可能である。DSRCの範囲は約500メートルであり、DSRCは、車両や路側機(単数形の場合は「RSU」、複数形の場合は「RSUs」)などのモバイルノード間でメッセージを無線で送受信できるように設計されている。DSRC準拠GPSユニットは、車線レベルの精度を有する車両(またはDSRC準拠GPSユニットを含む何らかの他のDSRC搭載デバイス)の位置情報を提供するように動作可能である。
説明を単純かつ便利にするために、本明細書で説明する無線メッセージをV2X無線メッセージと呼ぶことがある。V2X無線メッセージの例は、無線車両データを含むDSRCメッセージである。DSRCメッセージには多くの種類がある。DSRCメッセージの1つの種類は、基本安全メッセージ(「BSM」または「BSMメッセージ」)として知られている。DSRC搭載車両は、定期的にBSMをブロードキャストする。間隔はユーザが調整可能であり得る。いくつかの実施形態では、間隔は0.10秒毎に1回であってもよい。
BSMにはBSMデータが含まれる。BSMデータは、BSMを最初に送信した車両の属性を表す。BSMデータは特に、(1)BSMを送信する車両の経路履歴、(2)BSMを送信する車両の速度、および(3)BSMを送信する車両の位置を表すGPSデータのうち1つ以上を表す。
本明細書で使用する「地理的位置」、「位置」、「地理的場所」および「場所」という語は、ライドシェア車両などのオブジェクトの緯度および経度(またはオブジェクトの緯
度、経度および標高)を指す。本明細書に記載される例示的な実施形態は、車両の地理的場所を表す測位情報を提供し、(1)緯度および経度を含む二次元における車両の実際の地理的場所に対して少なくともプラスまたはマイナス1.5メートル、および(2)標高次元における車両の実際の地理的場所に対して少なくともプラスまたはマイナス3メートルのうち1つ以上の精度を有する。したがって、本明細書で説明する例示的な実施形態は、車線レベルの精度以上で車両の地理的場所を表すことができる。
例えば、接近中のライドシェア車両はライドシェアの乗客の標高よりも上または下にあり得、本明細書で説明する実施形態は、DSRC搭載車両から受信した標高情報を使用して、接近中のライドシェア車両のARビューをライドシェアの乗客のユーザ装置上で正確に位置決めすることができる。比較すると、ライドシェアアプリケーションのプロバイダは通常、接近するライドシェア車両の標高情報をライドシェアの乗客に伝達しない。
いくつかの実施形態では、ライドシェア車両が送信するV2X無線メッセージは、ライドシェア車両を表すV2Xデータを含む。例えば、V2Xデータは上記の無線車両データを含む。加えて、ライドシェア車両が生成するデータのいずれかは、ライドシェア車両が送信するV2X無線メッセージに含まれてもよく、したがって、このデータもいくつかの実施形態によるV2Xデータの例であり得る。
図1Aを参照すると、ライドシェアアシスタント199およびライドシェアクライアント184のための動作環境100が示されている(ここで、ライドシェアクライアント184Aおよびライドシェアクライアント184Bは集合的にまたは個々に「ライドシェアクライアント184」と呼ばれる場合があり、これは例えばライドシェアクライアント184Aとライドシェアクライアント184Bが同様の機能を提供することがあるためである)。
動作環境100は、ライドシェア車両123、RSU185、およびユーザ装置110の要素のうち1つ以上を含むことができる。動作環境100のこれらの要素は、ネットワーク105に通信可能に結合されてもよい。RSU185は、DSRC対応であってもよく、ネットワーク105を介してライドシェア車両123とユーザ装置110との間で無線メッセージを中継してもよい。例えば、DSRC送信の範囲は一般に約500メートルであるため、ユーザ装置110がライドシェア車両123から700メートル離れている場合、1つ以上の介在するDSRC対応RSUが、ユーザ装置110からライドシェア車両123へ、またはライドシェア車両123からユーザ装置110へDSRCメッセージを中継する可能性がある。
図1Aには1つのライドシェア車両123、1つのRSU185、1つのユーザ装置110および1つのネットワーク105が示されているが、実際には、動作環境100は1つ以上のライドシェア車両123、1つ以上のRSU185、1つ以上のユーザ装置110および1つ以上のネットワーク105を含み得る。
ネットワーク105は、有線または無線の従来型であってもよく、星状構成、トークンリング構成、または他の構成を含む多数の異なる構成を有し得る。さらに、ネットワーク105は、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)(例えば、インターネット)、もしくは複数のデバイスおよび/またはエンティティが通信できる他の相互接続されたデータ経路を含み得る。いくつかの実施形態では、ネットワーク105は、ピアツーピアネットワークを含み得る。また、ネットワーク105は、様々な異なる通信プロトコルでデータを送信するためのテレコミュニケーションネットワークに結合されてもよく、またはテレコミュニケーションネットワークの部分を含んでも
よい。いくつかの実施形態では、ネットワーク105はブルートゥース(登録商標)通信ネットワークまたはセルラ通信ネットワークを含み、ショートメッセージングサービス(SMS)、マルチメディアメッセージングサービス(MMS)、ハイパーテキスト転送プロトコル(HTTP)、直接データ接続、無線アプリケーションプロトコル(WAP)、電子メール、DSRC、全二重無線通信、mmWave、WiFi(インフラストラクチャモード)、WiFi(アドホックモード)、可視光通信、TVホワイトスペース通信、および衛星通信経由を含むデータを送受信する。また、ネットワーク105はモバイルデータネットワークを含んでもよく、これは3G、4G、LTE、LTE−V2V、LTE−V2I、LTE−V2X、LTE−D2D、VoLTE、5G−V2Xまたは任意の他のモバイルデータネットワークまたはモバイルデータネットワークの組み合わせを含み得る。さらに、ネットワーク105は1つ以上のIEEE802.11無線ネットワークを含んでもよい。
いくつかの実施形態では、ライドシェア車両123、RSU185、およびユーザ装置110のうち1つ以上は、DSRC搭載デバイスであり得る。ネットワーク105は、ライドシェア車両123、ユーザ装置110、およびRSU185の間で共有される1つ以上の通信チャネルを含んでもよい。この通信チャネルは、DSRC、LTE−V2X、全二重無線通信、または任意の他の無線通信プロトコルを含み得る。例えば、ネットワーク105は、本明細書に記載されるデータのいずれかを含むDSRCメッセージ、DSRCプローブまたはBSMを送信するために使用され得る。
ライドシェア車両123は、任意の種類の車両であり得る。例えば、ライドシェア車両123は以下の種類の車両:車、トラック、スポーツ用多目的車、バス、セミトラック、ドローン、または任意の他の道路ベースの輸送手段のうち1つを含んでもよい。
いくつかの実施形態では、ライドシェア車両123は、自律車両または半自律車両を含み得る。例えば、ライドシェア車両123は、先進運転者支援システム(ADAS)180を含んでもよい。ADASシステム180は、自律機能を提供する機能の一部または全てを提供してもよい。
ライドシェア車両123は、運転者によって操作されて、ライドシェアの乗客にライドシェアサービスを提供する。図1Aに示すように、運転者はユーザ装置(例えば、スマートフォン)を携帯し、ユーザ装置にインストールされたライドシェアアプリケーション198と対話してもよい。オプションとして、運転者が携帯するユーザ装置にライドシェアアシスタント199がインストールされる。
ライドシェア車両123は、プロセッサ125、メモリ127、通信ユニット145、DSRC準拠GPSユニット170、ADASシステム180、車両センサセット182、ECU186、およびライドシェアクライアント184の要素のうち1つ以上を含み得る。ライドシェア車両123のこれらの要素は、バスを介して互いに通信可能に結合されてもよい。
いくつかの実施形態では、プロセッサ125およびメモリ127は、車載車両コンピュータシステムの要素であってもよい。車載車両コンピュータシステムは、ライドシェアクライアント184の動作を引き起こすまたは制御するように動作可能であってもよい。車載車両コンピュータシステムは、メモリ127に格納されたデータにアクセスして実行し、ライドシェアクライアント184に対して本明細書で説明する機能を提供するように動作可能であってもよい。
プロセッサ125は、算術論理ユニット、マイクロプロセッサ、汎用コントローラ、ま
たは他の何らかのプロセッサアレイを含み、計算を実行し、ディスプレイデバイスに電子表示信号を提供する。プロセッサ125はデータ信号を処理し、複雑命令セットコンピュータ(CISC)アーキテクチャ、縮小命令セットコンピュータ(RISC)アーキテクチャ、または命令セットの組み合わせを実装するアーキテクチャを含む様々なコンピューティングアーキテクチャを含むことができる。ライドシェア車両123は、1つ以上のプロセッサ125を含み得る。他のプロセッサ、オペレーティングシステム、センサ、ディスプレイ、および物理的構成が可能であり得る。
メモリ127は、プロセッサ125によって実行され得る命令またはデータを格納する。命令またはデータは、本明細書で説明する技術を実行するためのコードを含み得る。メモリ127は、ダイナミックランダムアクセスメモリ(DRAM)デバイス、スタティックランダムアクセスメモリ(SRAM)デバイス、フラッシュメモリ、または他の何らかのメモリデバイスであり得る。いくつかの実施形態では、メモリ127は、不揮発性メモリまたは同様の永久記憶装置、およびハードディスクドライブ、フロッピーディスクドライブ、CD−ROMデバイス、DVD−ROMデバイス、DVD−RAMデバイス、DVD−RWデバイス、フラッシュメモリデバイス、またはより永続的に情報を格納するためのその他の大容量記憶装置を含む媒体も含む。ライドシェア車両123は、1つ以上のメモリ127を含み得る。
ライドシェア車両123のメモリ127は、ライドシェア車両123の地理的位置を表すデジタルデータ(例えば、DSRC準拠GPSデータ188)を格納し得る。
DSRC準拠GPSデータ188は、ライドシェア車両123の地理的位置を表す。例えば、DSRC準拠GPSデータ188は、ライドシェア車両123の経度および緯度を表す。
いくつかの実施形態では、DSRC準拠GPSデータ188は、ライドシェア車両123の地理的位置を表すGPSデータを車線レベルの精度で提供するように動作可能であるライドシェア車両123のDSRC準拠GPSユニット170によって取得され得る。例えば、ライドシェア車両123は、道路の車線を走行している。車線レベルの精度とは、ライドシェア車両123の位置がGPSデータによって非常に正確に記述されるために、DSRC準拠GPSユニット170によって提供されるこのライドシェア車両123のGPSデータに基づいて、道路内のライドシェア車両123が走行する車線を正確に決定できることを意味する。いくつかの実施形態では、DSRC準拠GPSデータ188は、BSMデータまたはPSMデータの要素である。
通信ユニット145は、ネットワーク105との間で、または別の通信チャネルに対してデータを送受信する。いくつかの実施形態では、通信ユニット145は、DSRCトランシーバ、DSRC受信機、およびライドシェア車両123をDSRC対応デバイスにするために必要な他のハードウェアまたはソフトウェアを含むことができる。例えば、通信ユニット145は、ネットワークを介してDSRCメッセージをブロードキャストするように構成されたDSRCアンテナを含む。DSRCアンテナはまた、ユーザ設定可能な固定間隔(例えば、0.1秒毎、1.6Hzから10Hzまでの周波数範囲に対応する時間間隔など)でBSMメッセージを送信してもよい。
いくつかの実施形態では、通信ユニット145は、ネットワーク105または別の通信チャネルへの直接的な物理的接続のためのポートを含む。例えば、通信ユニット145は、ネットワーク105との有線通信のために、USB、SD、CAT−5、または同様のポートを含む。いくつかの実施形態では、通信ユニット145は、IEEE 802.11、IEEE 802.16、BLUETOOTH(登録商標)、EN ISO 149
06、2004電子料金徴収−アプリケーションインターフェースEN 11253:2004専用狭域通信− 5.8GHzのマイクロ波を使用した物理層(レビュー)、EN
12795:2002専用狭域通信(DSRC)−DSRCデータリンク層:メディアアクセスおよび論理リンク制御(レビュー)、EN 12834:2002専用狭域通信−アプリケーション層(レビュー)、EN 13372:2004専用狭域通信(DSRC)−RTTTアプリケーション用DSRCプロファイル(レビュー)、米国特許出願第14/471,387(2014年8月28日出願、標題「Full−Duplex Coordination System」)に記載されている通信方法、または別の適切な無線通信方法を含む1つ以上の無線通信方法を使用してネットワーク105または他の通信チャネルとデータを交換するための無線トランシーバを含む。
いくつかの実施形態では、通信ユニット145は、米国特許出願第14/471,387号(2014年8月28日出願、標題「Full−Duplex Coordination System」)に記載されている全二重調整システムを含む。
いくつかの実施形態では、通信ユニット145は、ショートメッセージングサービス(SMS)、マルチメディアメッセージングサービス(MMS)、ハイパーテキスト転送プロトコル(HTTP)、直接データ接続、WAP、電子メール、または別の適切な種類の電子通信を含むセルラ通信ネットワークを介してデータを送受信するためのセルラ通信トランシーバを含む。いくつかの実施形態では、通信ユニット145は、有線ポートおよび無線トランシーバを含む。通信ユニット145はまた、TCP/IP、HTTP、HTTPS、およびSMTP、ミリ波、DSRCなどを含む標準ネットワークプロトコルを使用してファイルまたはメディアオブジェクトを配信するために、ネットワーク105への他の従来の接続を提供する。
いくつかの実施形態では、通信ユニット145は、DSRC、mmWave、LTE−V2X、LTE−D2D、5G−V2X、ITS−G5、ITS−Connect、LPWAN、可視光通信、テレビのホワイトスペース、ブルートゥース(登録商標)、Wi−FiなどのV2X通信プロトコルのうち1つ以上をサポートするのに必要な任意の種類のV2X通信アンテナを含む。通信ユニット145は、V2X無線機143を含む。いくつかの実施形態では、ライドシェアクライアント184は、V2X無線機143の動作を制御し、かつライドシェア車両123のDSRC準拠GPSデータ188を含むV2X無線メッセージをV2X無線機143に送信させるように動作可能なコードおよびルーチンを含む。
V2X無線機143は、V2X送信機およびV2X受信機を含む電子デバイスであり、任意のV2Xプロトコルを介して無線メッセージを送受信するように動作可能である。例えば、V2X無線機143は、DSRCを介して無線メッセージを送受信するように動作可能である。V2X送信機は、5.9GHz帯域でDSRCメッセージを送信およびブロードキャストするように動作可能である。V2X受信機は、5.9GHz帯域でDSRCメッセージを受信するように動作可能である。V2X無線機143は、複数のチャネルを含み、これらのチャネルの少なくとも1つがBSMの送受信用に指定され、これらのチャネルの少なくとも1つがPSMの送受信用に指定される。
いくつかの実施形態では、DSRC準拠GPSユニット170は、ライドシェア車両123またはDSRC準拠GPSユニット170を、その任意の派生物またはフォークを含む以下のDSRC規格、すなわち、EN 12253:2004専用狭域通信−5.8GHzのマイクロ波を使用した物理層(レビュー)、EN 12795:2002専用狭域通信(DSRC)−DSRCデータリンク層:メディアアクセスおよび論理リンク制御(レビュー)、EN 12834:2002専用狭域通信−アプリケーション層(レビュー
)、EN 13372:2004専用狭域通信(DSRC)−RTTTアプリケーション用DSRCプロファイル(レビュー)、およびEN ISO 14906:2004電子料金徴収−アプリケーションインターフェースのうち1つ以上に準拠させるために必要な任意のハードウェアおよびソフトウェアを含む。
いくつかの実施形態では、DSRC準拠GPSユニット170は、IEEE 802.11、IEEE 1609.2、IEEE 1609.3、IEEE 1609.4、SAE J2735、SAE J2945/0、SAE J2945/1などのDSRC規格(任意の派生物またはフォークを含む)の1つ以上にライドシェア車両123またはDSRC準拠GPSユニット170を準拠させるために必要なハードウェアおよびソフトウェアを含む。
いくつかの実施形態では、DSRC準拠GPSユニット170は、ライドシェア車両123の位置を車線レベルの精度で表すGPSデータを提供するように動作可能である。
いくつかの実施形態では、DSRC準拠GPSユニット170は、DSRC規格に準拠した精度でライドシェア車両123の地理的位置を表すGPSデータを取得するためにGPS衛星と無線通信するハードウェアを含む。DSRC規格では、GPSデータは、2台の車両(例えば1台がライドシェア車両123)が隣接する走行車線にあるかどうかを推測するのに十分に正確であることが要求される。いくつかの実施形態では、DSRC準拠GPSユニット170は、オープンスカイ下の時間の68%でその実際の位置の1.5メートル以内のその2次元位置を識別、監視および追跡するように動作可能である。運転車線の幅は通常3メートル以上であるため、GPSデータの2次元誤差が1.5メートル未満である場合、本明細書で説明するライドシェアクライアント184は、DSRC準拠GPSユニット170によって提供されるGPSデータを分析し、道路を同時に走行する2台以上の異なる車両(そのうちの1台が例えばライドシェア車両123)の相対位置に基づいて、ライドシェア車両123が走行している車線を決定することができる。
DSRC準拠GPSユニット170と比較すると、DSRC規格に準拠していない従来のGPSユニットは、車線レベルの精度で車両の位置を決定することができない。例えば、一般的な道路の車線の幅は約3メートルである。しかし、従来のGPSユニットの精度は、車両の実際の位置に対してせいぜいプラスまたはマイナス10メートルである。結果として、そのような従来のGPSユニットは、GPSデータのみに基づいて車両の走行車線を識別するほど十分に正確ではなく、代わりに、従来のGPSユニットのみを備えたシステムでは、カメラなどのセンサを使用して車両の走行車線を識別する必要がある。例えば、いくつかの実施形態では複数の走行車線がある道路を走行するライドシェア車両123の位置をライドシェアクライアント184がより正確に特定できるようになるために、車両の走行車線を識別することは有益である。
例えば、DSRC搭載車両のGPSユニット(精度要件が1.5メートルのSAE J2945/1に準拠)と比較すると、DSRC規格に準拠していない非DSRC車両のGPSユニットは、車線レベルの精度で車両の位置を決定することができない。別の例では、DSRC搭載車両のGPSユニットと比較すると、ライドシェア運転者のスマートフォンのGPSユニットも、車線レベルの精度で車両の位置を決定することができない。
ADASシステム180は、1つ以上の高度な運転者支援システムを含み得る。ADASシステム180の例は、ライドシェア車両123の以下の要素のうち1つ以上を含んでもよい:ACCシステム、適応型ハイビームシステム、適応型照明制御システム、自動駐車システム、自動車用暗視システム、死角モニタ、衝突回避システム、横風安定化システム、運転者の眠気検出システム、運転者監視システム、緊急運転者支援システム、前方衝
突警告システム、交差点支援システム、知的速度適応システム、車線逸脱警告システム、歩行者保護システム、交通標識認識システム、回動支援、および逆走警告システム。
いくつかの実施形態では、ADASシステム180は、ライドシェア車両123が「自律」または「半自律」になるように、ライドシェア車両123の1つ以上の動作を制御する任意のハードウェアまたはソフトウェアを含む。
車両センサセット182は、ライドシェア車両123の外側の道路環境を測定するように動作可能な1つ以上のセンサを含む。例えば、車両センサセット182は、ライドシェア車両123に近接する道路環境の1つ以上の物理的特性を記録する1つ以上のセンサを含み得る。メモリ127は、車両センサセット182によって記録された1つ以上の物理的特性を表すセンサデータを格納してもよい。
いくつかの実施形態では、車両センサセット182は、以下の車両センサのうち1つ以上を含んでもよい:カメラ、LIDARセンサ、レーダセンサ、レーザ高度計、赤外線検出器、動作検出器、サーモスタット、音検出器、一酸化炭素センサ、二酸化炭素センサ、酸素センサ、マスエアフローセンサ、エンジン冷却水温度センサ、スロットル位置センサ、クランクシャフト位置センサ、自動車エンジンセンサ、バルブタイマ、空燃比計、死角計、縁石フィーラ、欠陥検出器、ホール効果センサ、マニホールド絶対圧力センサ、駐車センサ、レーダガン、スピードメータ、速度センサ、タイヤ空気圧監視センサ、トルクセンサ、トランスミッション液温度センサ、タービン速度センサ(TSS)、可変リラクタンスセンサ、車速センサ(VSS)、水センサ、車輪速度センサ、および任意の他の種類の自動車用センサ。
ECU186は、ライドシェア車両123内の1つ以上の電気システムまたはサブシステムを制御する自動車電子部品に組み込まれたシステムである。ECU186の種類にはエンジン制御モジュール(ECM)、パワートレイン制御モジュール(PCM)、トランスミッション制御モジュール(TCM)、ブレーキ制御モジュール(BCMまたはEBCM)、中央制御モジュール(CCM)、中央タイミングモジュール(CTM)、一般的な電子モジュール(GEM)、ボディコントロールモジュール(BCM)、およびサスペンション制御モジュール(SCM)などが含まれるが、これらに限定されない。
いくつかの実施形態では、ライドシェア車両123は、複数のECU186を含むことができる。いくつかの実施形態では、ライドシェアクライアント184は、ECU186の要素であり得る。
いくつかの実施形態では、ライドシェアクライアント184は、プロセッサ125によって実行されると図4〜図6Bを参照して以下で説明する方法400ならびに例示的なプロセス500および600の1つ以上のステップをプロセッサ125に実行させるように動作可能であるソフトウェアを含む。いくつかの実施形態では、ライドシェアクライアント184は、ライドシェア車両123がライドシェアイベントを実行するように指定されていることを判定し、ライドシェア車両123のGPSユニットからライドシェア車両123のGPSデータを入手する。例えば、ライドシェアクライアント184は、DSRC準拠GPSユニット170からライドシェア車両123のDSRC準拠GPSデータを入手する。ライドシェアクライアント184は、ライドシェア車両123を表すV2Xデータを含むV2X無線メッセージ(例えば、ライドシェア車両123のDSRC準拠GPSデータを含む)を生成し、このV2X無線メッセージをユーザ装置110に送信するか、またはV2X無線メッセージをユーザ装置110に中継するためのRSU185に送信する。いくつかの実施形態では、V2Xデータは、V2X無線メッセージがユーザ装置110にユニキャストされるように、宛先をユーザ装置110として表すデータをさらに含む
ことができる。
いくつかの実施形態では、ライドシェアクライアント184は、ライドシェア車両123のGPSユニットからライドシェア車両123のGPSデータを入手する(例えば、ライドシェアクライアント184は、DSRC準拠GPSユニット170からライドシェア車両123のDSRC準拠GPSデータを入手する)。ライドシェアクライアント184は、V2Xデータを含むV2X無線メッセージを構築し、V2Xデータは、ライドシェア車両123を識別するために使用されるDSRC準拠GPSデータおよびデジタルデータ(例えば、車両識別子(ID))を含む。ライドシェアクライアント184は、ネットワーク105を介してV2X無線メッセージを送信する。例えば、V2X無線メッセージは、ネットワーク105を介してブロードキャストされてもよい。
いくつかの実施形態では、ライドシェアクライアント184は、フィールドプログラマブルゲートアレイ(「FPGA」)または特定用途向け集積回路(「ASIC」)を含むハードウェアを使用して実装されてもよい。いくつかの他の実施形態では、ライドシェアクライアント184は、ハードウェアとソフトウェアの組み合わせを使用して実装されてもよい。ライドシェアクライアント184は、デバイス(例えば、サーバまたは他のデバイス)の組み合わせ、またはデバイスの1つに格納され得る。
いくつかの実施形態では、RSU185は、ライドシェアクライアント184とライドシェアアシスタント199との間のV2X通信を中継する。RSU185は、動作環境100の終点(例えば、ユーザ装置110、ライドシェア車両123、他の車両または他の終点)間のV2X無線メッセージの中継を管理するためのライドシェアクライアント184(例えば、ライドシェアクライアント184B)のインスタンスを含む。例えば、RSU185は、ライドシェア車両123からV2X無線メッセージを受信し、次にRSU185のライドシェアクライアント184は、RSU185のプロセッサにV2X無線メッセージ(DSRC準拠GPSデータ188を含む)をRSU185のメモリ内に格納させる。RSU185のライドシェアクライアント184は、V2X無線メッセージをユーザ装置110に中継することができる。
ユーザ装置110は、1つ以上のプロセッサと1つ以上のメモリを含むコンピューティングデバイスである。例えば、ユーザ装置110は、スマートフォン、ラップトップコンピュータ、タブレットコンピュータ、音楽プレイヤ、ビデオゲームプレイヤ、携帯情報端末(PDA)、ポータブルコントローラ、および任意の他のポータブル電子デバイスの要素のうちの1つであってもよい。他のタイプのユーザ装置110も可能である。いくつかの実施形態では、ライドシェアの乗客は、ユーザ装置110を携帯することができる。
ユーザ装置110は、ライドシェアアプリケーション198、ライドシェアアシスタント199、デバイスセンサセット112、ディスプレイ114、プロセッサ115、およびメモリ116の要素のうち1つ以上を含む。
いくつかの実施形態では、ライドシェアアプリケーション198は、プロセッサ115により実行されるとライドシェアサービスをライドシェアの乗客に提供するための動作をプロセッサ115に実行させるように動作可能であるソフトウェアを含む。例えば、ライドシェアの乗客は、ライドシェアアプリケーション198を介してライドシェアサービスを依頼してもよい。ライドシェアの乗客は、ライドシェアアプリケーション198を介して、依頼したライドシェアサービスを管理(例えば、変更、キャンセル)してもよい。いくつかの実施形態では、ライドシェアアシスタント199は、ライドシェアアプリケーション198の要素である。
いくつかの実施形態では、ライドシェアアシスタント199は、プロセッサ125によって実行されると図3A〜図3Bおよび図5A〜図6Bを参照して以下で説明する方法300および350ならびに例示的なプロセス500および600の1つ以上のステップをプロセッサ125に実行させるように動作可能であるソフトウェアを含む。例えば、ライドシェアリングアシスタント199は、(1)ライドシェア車両123の地理的位置を表すデジタルデータ(すなわち、ライドシェア車両123のDSRC準拠GPSデータ)、(2)ユーザ装置110の地理的位置を表すデジタルデータ(すなわち、ユーザ装置110のGPSデータ)、(3)ライドシェア車両123の環境の画像を表すカメラデータ、ならびに(4)ユーザ装置110の向きまたは向きの変化を表すセンサデータの入力を受け取り、これらの入力に基づいて、ライドシェア車両123の環境を示す画像上でライドシェア車両の位置を強調する拡張グラフィックデータを出力する。
いくつかの実施形態では、ライドシェアアシスタント199は、フィールドプログラマブルゲートアレイ(「FPGA」)または特定用途向け集積回路(「ASIC」)を含むハードウェアを使用して実装されてもよい。いくつかの他の実施形態では、ライドシェアアシスタント199は、ハードウェアとソフトウェアの組み合わせを使用して実装されてもよい。ライドシェアアシスタント199は、デバイス(例えば、サーバまたは他のデバイス)の組み合わせ、またはデバイスの1つに格納され得る。
ライドシェアアシスタント199は、図2〜図3Bおよび図5A〜図6Bを参照し後でより詳しく説明する。
いくつかの実施形態では、デバイスセンサセット112は、1つ以上のセンサを含む。例えば、デバイスセンサセット112は、画像をキャプチャするための1つ以上のカメラセンサを含む。別の例では、デバイスセンサセット112は、ユーザ装置110の向きまたは向きの変化を検出する加速度計およびジャイロスコープなどのセンサを含む。センサは、これらの向きの変化を表すセンサデータを生成する。ユーザ装置110のディスプレイ114に表示されているライドシェア車両の位置を強調する拡張グラフィックデータの配置は、ユーザ装置110の向きの変化に基づいて変更され得る。例えば、ライドシェアの乗客がユーザ装置110の向きを変えると、ライドシェアアシスタント199はセンサデータを使用して変化を検出し、拡張グラフィックデータの配置を変更する。
いくつかの実施形態では、ディスプレイ114は、ユーザ装置110の電子ディスプレイである。例えば、ディスプレイ114は、液晶ディスプレイ(LCD)または発光ダイオード(LED)ディスプレイである。他の種類のディスプレイも可能である。
いくつかの実施形態では、プロセッサ115は、プロセッサ125の構造と同様の構造を有し、プロセッサ125の機能と同様の機能を提供する。プロセッサ115に関する同様の説明はここでは繰り返さない。
いくつかの実施形態において、メモリ116は、メモリ127の構造と同様の構造を有し、メモリ127の機能と同様の機能を提供する。メモリ116に関する同様の説明はここでは繰り返さない。
いくつかの実施形態では、メモリ116は、ライドシェア車両123のDSRC準拠GPSデータ188、ユーザ装置110のGPSデータ118、拡張グラフィックデータ120、センサデータ122、およびカメラデータ124の要素のうち1つ以上を格納する。
いくつかの実施形態では、ユーザ装置110は、DSRC準拠GPSデータ188を含
むV2X無線メッセージを受信し、ライドシェアアシスタント199は、プロセッサ115にDSRC準拠GPSデータ188をメモリ116に格納させる。
GPSデータ118は、ユーザ装置110の地理的位置を表すデジタルデータである。例えば、GPSデータ118は、ユーザ装置110の経度および緯度を表す。いくつかの実施形態では、GPSデータ118は、ユーザ装置110の従来のGPSユニットによって取得され得る。例えば、ユーザ装置110のGPSユニットは、1つ以上のGPS衛星からGPSデータ118を取得し、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のプロセッサ115に、GPSデータ118をユーザ装置110のメモリ116に格納させる。
いくつかの実施形態では、GPSデータ118はユーザ装置110のDSRC準拠GPSユニットによって取得されてもよく、ユーザ装置110は、車線レベルの精度と同様または同一の精度でユーザ装置110の地理的位置を表すGPSデータを提供するように動作可能である。
センサデータ122は、ユーザ装置110に内蔵された1つ以上のセンサにより生成されたデジタルデータである。例えば、1つ以上のセンサは、加速度計およびジャイロスコープを含み、センサデータ122は、ユーザ装置110の向きまたは向きの変化を表す。他の種類のセンサデータも可能である。
カメラデータ124は、ユーザ装置110のカメラセンサによってキャプチャされた1つ以上の画像を表すデジタルデータである。例えば、1つ以上の画像は、カメラセンサによってリアルタイムでキャプチャされた1つ以上の現実の画像であり、ライドシェア車両123を含む現実の環境を表す。
拡張グラフィックデータ120は、ユーザ装置110によってキャプチャされた画像の拡張バージョンを表すデジタルデータであり、キャプチャされた画像はライドシェア車両を含む現実の環境を表す。画像の拡張バージョンは、現実の環境内のライドシェア車両123の位置を強調する。画像の拡張バージョンについては後でより詳しく説明する。
次に図1Bを参照すると、いくつかの実施形態による動作環境100を示す別のブロック図が示されている。いくつかの実施形態では、ライドシェア車両123の運転者は、ライドシェアアシスタント199のインスタンスを含むユーザ装置を携帯する必要がない。図1Bに示す要素は、図1Aに示す要素と同様の機能を提供するため、ここではそれらの説明を繰り返さない。
図1Bに示すように、ライドシェア車両123のメモリ127は、ライドシェア車両123の車両ID126を表すデジタルデータをさらに格納してもよい。車両ID126は、ライドシェア車両123を一意に識別するために使用される。
いくつかの実施形態では、ライドシェア車両123のライドシェアクライアント184は、DSRC準拠GPSデータ188および車両ID126を含むV2X無線メッセージを構築し、V2X無線メッセージをネットワーク105に送信する。ユーザ装置110は、ネットワーク105を介してV2X無線メッセージを受信する。ライドシェアアシスタント199は、プロセッサ115にV2X無線メッセージからのDSRC準拠GPSデータ188と車両ID126をユーザ装置110のメモリ116に格納させる。
一部の実施形態では、RSU185のライドシェアクライアント184は、V2X無線メッセージを受信し、RSU185のメモリにV2X無線メッセージからDSRC準拠G
PSデータ188および車両ID126を格納することができる。RSU185のライドシェアクライアント184は、V2X無線メッセージをユーザ装置110に転送する。
ユーザ装置110のメモリ116は、車両IDデータベース128をさらに含む。車両IDデータベース128は、ユーザ装置110に関連付けられたライドシェアイベントを実行するように指定されたライドシェア車両のアイデンティティを識別するデジタルデータを含む。例えば、車両IDデータベース128は、ライドシェアの乗客をピックアップするように指定されたライドシェア車両123を識別する車両IDを含む。
ここで図1Cを参照すると、いくつかの実施形態による、ユーザ装置110上に拡張グラフィックデータを提供するためのフロープロセス150を示すブロック図が示されている。いくつかの実施形態では、ライドシェア車両123のライドシェアクライアント184は、DSRC準拠GPSユニット170からライドシェア車両123のDSRC準拠GPSデータ188を取得し、DSRC準拠GPSデータ188を含むV2X無線メッセージを生成する。V2X無線メッセージはユーザ装置110に送信され、その結果、V2X無線メッセージ内のDSRC準拠GPSデータ188を、ユーザ装置110のライドシェアアシスタント199への入力として使用することができる。
ライドシェアリングアシスタント199は、(1)ライドシェア車両123の地理的位置を表すデジタルデータ(すなわち、ライドシェア車両123のDSRC準拠GPSデータ188、(2)ライドシェアの乗客が操作するユーザ装置110のGPSデータ118、(3)ユーザ装置110の向きを表すセンサデータ122(例えば、ユーザ装置110のディスプレイ114の向きを表すリアルタイムセンサデータ)、ならびに(4)ユーザ装置110のカメラセンサによってキャプチャされ、ライドシェアの乗客の現実の環境を表す画像を表すカメラデータ124の入力に基づいて、拡張グラフィックデータ120を出力する。拡張グラフィックデータ120は、カメラセンサによってキャプチャされた画像の拡張バージョンを表す。画像の拡張バージョンはディスプレイ114上に提示され、ライドシェアの乗客の現実の環境におけるライドシェア車両123の位置を強調する。
コンピュータシステムの例
次に図2を参照すると、いくつかの実施形態によるライドシェアアシスタント199を含む例示的なコンピュータシステム200を示すブロック図が示されている。いくつかの実施形態では、コンピュータシステム200は、図3Aおよび図3Bを参照して以下で説明する方法300および350、図5A〜図6Bを参照して以下で説明するプロセス500および600、または図1Cを参照して上述したフロープロセス150の1つ以上のステップを実行するようにプログラムされている特殊用途コンピュータシステムを含み得る。
いくつかの実施形態では、コンピュータシステム200は、ユーザ装置110の要素であってもよい。
コンピュータシステム200は、いくつかの例によれば、ライドシェアアシスタント199、プロセッサ115、通信ユニット245、デバイスセンサセット112、GPSユニット270、ディスプレイ114、ライドシェアアプリケーション198、メモリ116、およびストレージ241の要素のうち1つ以上を含むことができる。コンピュータシステム200の構成要素は、バス220によって通信可能に結合されている。
図示の実施形態では、プロセッサ115は、信号線238を介してバス220に通信可能に結合されている。通信ユニット245は、信号線246を介してバス220に通信可能に結合されている。デバイスセンサセット112は、信号線248を介してバス220
に通信可能に結合されている。GPSユニット270は、信号線249を介してバス220に通信可能に結合されている。ディスプレイ114は、信号線239を介してバス220に通信可能に結合されている。ライドシェアアプリケーション198は、信号線240を介してバス220に通信可能に結合されている。ストレージ241は、信号線242を介してバス220に通信可能に結合されている。メモリ116は、信号線244を介してバス220に通信可能に結合されている。
コンピュータシステム200のプロセッサ115、デバイスセンサセット112、ディスプレイ114、ライドシェアアプリケーション198およびメモリ116の要素は、図1Aを参照して上記で説明されているため、それらの説明はここでは繰り返さない。
メモリ116は、図1A〜図1Cを参照して上記で説明したデータのいずれかを格納することができる。メモリ116は、コンピュータシステム200がその機能を提供するために必要な任意のデータを格納することができる。
通信ユニット245は、通信ユニット145の構造と同様の構造を有し、通信ユニット145の機能と同様の機能を提供してもよい。同様の説明はここでは繰り返さない。
いくつかの実施形態では、GPSユニット270は従来のGPSユニットである。例えば、GPSユニット270は、コンピュータシステム200の地理的位置を表すデータを取得するためにGPS衛星と無線で通信するハードウェアを含むことができる。例えば、GPSユニット270は、1つ以上のGPS衛星からGPSデータを取得する。いくつかの実施形態では、GPSユニット270は、コンピュータシステム200の地理的位置を表すGPSデータを車線レベルの精度で提供するように動作可能なDSRC準拠GPSユニットである。
ストレージ241は、本明細書で説明する機能を提供するためのデータを格納する非一時的記憶媒体であり得る。ストレージ241は、ダイナミックランダムアクセスメモリ(DRAM)デバイス、スタティックランダムアクセスメモリ(SRAM)デバイス、フラッシュメモリ、またはいくつかの他のメモリデバイスであり得る。いくつかの実施形態では、ストレージ241は、不揮発性メモリまたは同様の永久記憶装置、およびハードディスクドライブ、フロッピーディスクドライブ、CD−ROMデバイス、DVD−ROMデバイス、DVD−RAMデバイス、DVD−RWデバイス、フラッシュメモリデバイス、またはより永続的に情報を格納するためのその他の大容量記憶装置を含む媒体も含む。
図2に示す例示的な実施形態では、ライドシェアアシスタント199は、通信モジュール202、識別モジュール204、カメラモジュール206、センサモジュール208、拡張モジュール210、および提示モジュール212を含む。ライドシェアアシスタント199のこれらのコンポーネントは、バス220を介して互いに通信可能に結合されている。いくつかの実施形態では、ライドシェアアシスタント199のコンポーネントは、単一のサーバまたはデバイスに格納することができる。いくつかの他の実施形態では、ライドシェアアシスタント199のコンポーネントは、複数のサーバまたはデバイスに分散させ格納することができる。例えば、ライドシェアアシスタント199のコンポーネントのいくつかは、ユーザ装置110およびライドシェア車両123に分散され得る。
通信モジュール202は、ライドシェアアシスタント199とコンピュータシステム200の他のコンポーネントとの間の通信を処理するためのルーチンを含むソフトウェアであり得る。いくつかの実施形態では、通信モジュール202は、コンピュータシステム200のメモリ116に格納することができ、プロセッサ115によってアクセス可能および実行可能にすることができる。通信モジュール202は、信号線222を介して、プロ
セッサ115およびコンピュータシステム200の他のコンポーネントと協働および通信するように適合され得る。
通信モジュール202は、通信ユニット245を介して、動作環境100またはフロープロセス150の1つ以上の要素間でデータを送受信する。例えば、通信モジュール202は、通信ユニット245を介して、DSRC準拠GPSデータ188および車両ID126の要素のうち1つ以上を受信または送信する。通信モジュール202は、通信ユニット245を介して、図1A〜図1Cを参照して上述したデータまたはメッセージのいずれかを送信または受信することができる。
いくつかの実施形態では、通信モジュール202は、ライドシェアアシスタント199のコンポーネントからデータを受信し、ストレージ241およびメモリ116のうちの1つ以上にデータを格納する。例えば、通信モジュール202は、通信ユニット245からのメモリ116を参照して上述したデータのいずれかを(ネットワーク105、DSRCメッセージ、BSM、DSRCプローブ、全二重無線メッセージなどを介して)受信し、このデータをメモリ116に(またはコンピュータシステム200のバッファとして機能し得るストレージ241に一時的に)格納する。
いくつかの実施形態では、通信モジュール202は、ライドシェアアシスタント199のコンポーネント間の通信を処理してもよい。例えば、通信モジュール202は、識別モジュール204、カメラモジュール206、センサモジュール208、拡張モジュール210、および提示モジュール212の間の通信を処理してもよい。これらのモジュールのいずれかにより、通信モジュール202は、コンピュータシステム200または動作環境100の他の要素と(通信ユニット245を介して)通信してもよい。例えば、センサモジュール208は、通信モジュール202を使用して、デバイスセンサセット112と通信し、デバイスセンサセット112にセンサデータを記録させることができる。さらなる例では、カメラモジュール206は、通信モジュール202を使用してカメラセンサと通信し、カメラセンサに現実の環境の画像をリアルタイムまたはほぼリアルタイムでキャプチャさせてもよい。
いくつかの実施形態では、通信モジュール202はネットワーク105からV2X無線メッセージを受信し、V2X無線メッセージはライドシェア車両123のGPSデータ(DSRC準拠GPSデータなど)の1つ以上とライドシェア車両123の車両IDとを含むV2Xデータを含む。例えば、V2X無線メッセージは、DSRCメッセージ、BSM、LTEメッセージ、LTE−V2Xメッセージ、5G−V2Xメッセージ、およびミリ波メッセージなどで構成されるグループから選択される。通信モジュール202は、受信したV2X無線メッセージからGPSデータ(DSRC準拠GPSデータなど)およびライドシェア車両123の車両IDを取得し、GPSデータおよびライドシェア車両123の車両IDを拡張モジュール210および識別モジュール204にそれぞれ送信する。
識別モジュール204は、ユーザ装置110に関連付けられたライドシェアイベントを実行するように指定されたライドシェア車両を識別するためのルーチンを含むソフトウェアであり得る。いくつかの実施形態では、識別モジュール204は、コンピュータシステム200のメモリ116に格納することができ、プロセッサ115によってアクセス可能および実行可能にすることができる。識別モジュール204は、信号線224を介して、プロセッサ115およびコンピュータシステム200の他のコンポーネントと協働および通信するように適合され得る。
いくつかの実施形態では、識別モジュール204は、ライドシェア車両123を一意に識別する受信したV2X無線メッセージに含まれるデジタルデータ(例えば、ライドシェ
ア車両123を識別する第1の車両ID)を、ライドシェアの乗客をピックアップするように指定された車両のアイデンティティを識別するデジタルデータ(例えば、ライドシェアの乗客をピックアップするように指定された車両を識別する第2の車両ID)と組み合わせて使用して、ライドシェア車両123の運転者がライドシェア車両123を使用してライドシェアの乗客をピックアップすることに同意したときに開始されるライドシェアイベントに、この特定のV2Xメッセージが関連することを認識するように動作可能である。
具体的には、受信したV2X無線メッセージから取得されたV2Xデータは、ライドシェアサービスを提供するためのライドシェア車両123を一意に識別する第1の車両IDを含む。識別モジュール204は、V2Xデータから第1の車両IDを取得し、ユーザ装置110に関連付けられたライドシェアイベントを実行するように指定された車両を一意に識別する第2の車両IDを車両IDデータベース128から取得する。第1の車両IDが第2の車両IDと一致する(例えば、第1の車両IDは第2の車両IDと同一である)場合、識別モジュール204は、ライドシェア車両123が、ユーザ装置110に関連付けられたライドシェアイベントを実行するように指定された車両であることを認識し、受信したV2X無線メッセージに含まれるライドシェア車両123のDSRC準拠GPSデータが拡張モジュール210によって使用されて、拡張グラフィックデータを生成することができる。
いくつかの実施形態では、第1の車両IDおよび第2の車両IDは永続的な一意の識別子である。いくつかの他の実施形態では、第1の車両IDおよび第2の車両IDは一時的な一意の識別子(TempID)である。例えば、V2X無線メッセージはBSMであり、BSMに含まれるデジタルデータはV2Xデータとして使用される。BSMに含まれるデジタルデータは、TempIDを含む。TempIDは、特定の時間間隔(5分毎など)で名目上変わり、異なる時間に送信された2つのBSMが同じ車両によって送信されたかどうかを判別しにくくすることでプライバシーを保護する。
いくつかの実施形態では、TempIDは、V2X無線メッセージを使用してライドシェアアシスタント199に伝達される。この無線メッセージは1回または一定間隔で送信される。例えば、DSRC対応車両は、各BSMで(例えば、100ミリ秒の間隔で)そのTempIDをユーザ装置110のライドシェアアシスタント199に送信し、TempIDは5分毎に、または他の何らかの間隔で変わり得る。
いくつかの実施形態では、他の情報(TempIDまたはすでにBSMに含まれている他のデータを除く)を、ライドシェアクライアント184からライドシェアアシスタント199に送信される別個のV2Xユニキャストメッセージに含めることができる。この個別のV2Xユニキャストメッセージは、プライバシーのために暗号化され得る。この場合、車両識別子は、TempIDまたは他の何らかの形式の識別子を介して、ライドシェアの乗客のユーザ装置にインストールされたライドシェアアシスタント199に伝達され得る。
いくつかの実施形態では、ライドシェアクライアント184のバックエンド(例えば、ライドシェアサービスによって動作するサーバ)は、そのライドシェア車両が現在使用しているTempIDを知るように構成することができ、バックエンドはその情報を表すデジタルデータをユーザ装置110のライドシェアアシスタント199に、モデル、ナンバープレート、運転者名などの他の車両情報を提供するときに提供することができる。TempIDがバックエンドによって(例えば、セルラ接続を介して)伝達される場合、本明細書で説明するライドシェアアシスタント199は、(例えば、BSMを使用して)V2Xプロトコルへの変更なしで実現できる。
反対方向(例えば、ユーザ装置110からライドシェア車両123への方向)については、ユーザ装置110は、BSMに類似したメッセージである個人安全メッセージ(PSM)を送信するように構成することができる。PSMも標準化されている。PSMにはTempIDも含まれる。
カメラモジュール206は、ユーザ装置110のカメラセンサを制御してライドシェアの乗客に関連付けられた現実の環境の1つ以上の画像を取り込むためのルーチンを含むソフトウェアであり得る。いくつかの実施形態では、カメラモジュール206は、コンピュータシステム200のメモリ116に格納することができ、プロセッサ115によってアクセス可能および実行可能にすることができる。カメラモジュール206は、信号線281を介して、プロセッサ115およびコンピュータシステム200の他のコンポーネントと協働および通信するように適合され得る。
いくつかの実施形態では、カメラモジュール206は、ライドシェアの乗客に関連付けられた現実の環境の画像をリアルタイムでキャプチャする指示を提供する。この指示は、ライドシェアの乗客に、ユーザ装置110を持ち上げてライドシェアの乗客の環境の画像をキャプチャするように指示する。例えば、カメラモジュール206は、ディスプレイ114にこの指示を含むグラフィックを描写させる。
カメラモジュール206は、現実の環境の画像をリアルタイムでキャプチャするために、ユーザ装置110のカメラセンサを制御する。例えば、カメラモジュール206は、ユーザ装置110のカメラセンサに、ライドシェアの乗客の環境の1つ以上のリアルタイム画像(またはビデオ)をキャプチャさせる。これらの画像(またはビデオ)はカメラデータによって記述される。ユーザ装置110のディスプレイ114は、カメラセンサによってキャプチャされた画像(またはビデオ)をまだ表示していない。ユーザ装置110のディスプレイ114は、以下で説明するように、画像(またはビデオ)の拡張バージョンを表示する。ユーザ装置110のカメラセンサが画像(またはビデオ)をキャプチャした後、画像(またはビデオ)の拡張バージョンの表示がライドシェアの乗客にリアルタイムまたはほぼリアルタイムで表示されるように、画像(またはビデオ)の拡張バージョンの次の生成はほんの一瞬で行われる。
センサモジュール208は、デバイスセンサセット112に含まれる1つ以上のセンサを使用してセンサデータを生成するためのルーチンを含むソフトウェアであり得る。いくつかの実施形態では、センサモジュール208は、コンピュータシステム200のメモリ116に格納することができ、プロセッサ115によってアクセス可能および実行可能にすることができる。センサモジュール208は、信号線226を介して、プロセッサ115およびコンピュータシステム200の他のコンポーネントと協働および通信するように適合され得る。
いくつかの実施形態では、センサモジュール208は、デバイスセンサセット112の1つ以上のセンサを動作させて、デバイスセンサセット112の測定値を表すセンサデータを生成することができる。センサモジュール208は、センサデータをメモリ116に格納させることができる。いくつかの実施形態では、センサデータは、例えば、コンピュータシステム200に関連するGPSデータ、ユーザ装置110のディスプレイ114の向きまたは向きの変化を検出するために使用されるセンサデータ、および任意の他のセンサデータのうち1つ以上を表してもよい。
いくつかの実施形態では、センサモジュール208は、GPSユニット270にコンピュータシステム200の位置情報を取得させてもよい。例えば、コンピュータシステム2
00はユーザ装置110の要素であり、センサモジュール208は、GPSユニット270にユーザ装置110のGPSデータを取得させてもよい。センサモジュール208は、通信モジュール202に、取得した位置情報をメモリ116に格納させてもよい。例えば、センサモジュール208は、通信モジュール202に、ユーザ装置110のGPSデータをメモリ116に格納させてもよい。
いくつかの実施形態では、センサモジュール208は、ユーザ装置110の1つ以上のセンサ(例えば、加速度計、ジャイロスコープ)に、ユーザ装置110のディスプレイ114の向きまたは向きの変化を表すセンサデータをキャプチャさせる。いくつかの実施形態では、このセンサデータは、ディスプレイ114によって描写される拡張グラフィックデータの配置を支援してもよい(例えば、図7A〜図7Bを参照)。
拡張モジュール210は、プロセッサ115によって実行されるとプロセッサ115に拡張グラフィックデータを生成させるルーチンを含むソフトウェアであり得る。いくつかの実施形態では、拡張モジュール210は、コンピュータシステム200のメモリ116に格納することができ、プロセッサ115によってアクセス可能および実行可能にすることができる。拡張モジュール210は、信号線228を介して、プロセッサ115およびコンピュータシステム200の他のコンポーネントと協働および通信するように適合され得る。
いくつかの実施形態では、通信モジュール202は、ライドシェア車両123によって送信され、かつライドシェア車両123を表すV2Xデータを含むV2X無線メッセージを受信する。拡張モジュール210は、V2Xデータに基づいて拡張グラフィックデータを生成し、拡張グラフィックデータは、ユーザ装置110によってキャプチャされ、かつライドシェア車両123を含む現実の環境を表す画像の拡張バージョンを表す。画像の拡張バージョンは、現実の環境内のライドシェア車両123の位置を強調する。例えば、ライドシェア車両123は、ライドシェアの乗客であるユーザ装置110のユーザにライドシェアサービスを提供し、拡張グラフィックデータは、ユーザがライドシェア車両123を見つけてライドシェアサービスを受けることを支援する。
具体的には、V2Xデータは、ライドシェア車両123のGPSデータ(例えば、ライドシェア車両123のDSRC準拠GPSデータ)を含む。拡張モジュール210は、ユーザ装置110のGPSデータと、現実の環境を表す画像を表すカメラデータとを取得する。いくつかの実施形態では、拡張モジュール210は、ライドシェア車両123のGPSデータ(例えば、ライドシェア車両123のDSRC準拠GPSデータ)、ユーザ装置110のGPSデータ、およびカメラのデータのうち1つ以上に基づいて、拡張グラフィックデータを生成する。いくつかの実施形態では、拡張モジュール210は、ユーザ装置110のディスプレイ114の向きを表すセンサデータを取得し、センサデータにさらに基づいて拡張グラフィックデータを生成する。
例えば、ライドシェア車両123のDSRC準拠GPSデータは、車線レベルの精度でライドシェア車両123の地理的位置を表す。車線レベルの精度とは、ライドシェア車両123のDSRC準拠GPSデータが、全方位(北、南、東、西)において道路の車線幅のプラスまたはマイナス半分の精度でライドシェア車両123の地理的場所を表すことを意味する。いくつかの実施形態では、拡張モジュールは、ユーザ装置110のGPSデータ(それ自体が車線レベルの精度を有するDSRC準拠GPSデータであり得る)へのアクセス権を有する。したがって、いくつかの実施形態では、拡張モジュール210は、ライドシェア車両123のDRSC準拠GPSデータおよびユーザ装置110のDSRC準拠GPSデータを分析することによって示されるライドシェア車両123およびユーザ装置110の相対位置に基づいて、ユーザ装置110によって記録されたセンサデータ内(
例えば、ユーザ装置110のカメラセンサによって記録された画像内)のライドシェア車両123の位置を識別することができる。この分析は、ユーザ装置110に含まれる加速度計または他の何らかのセンサによって示され得るユーザ装置110の向きなど、他の要因を含んでもよい。ライドシェア車両123がユーザ装置110のカメラセンサの視野内にある場合、これはカメラセンサ(例えば、ライドシェア車両123とユーザ装置110の間に見通しがあると仮定する)によって撮影される画像内にライドシェア車両123がキャプチャされることを意味し、拡張モジュール210が1つ以上の画像処理技術(例えば、畳み込みニューラルネットワークを使用する画像処理技術)を使用して画像からオブジェクトの識別および認識を実行し、画像内のライドシェア車両123を識別してもよい。いくつかの実施形態では、拡張モジュール210は、ライドシェア車両123の車両情報(例えば、ライドシェア車両123の製造者、型式、色など)を利用して、画像内のライドシェア車両123を識別してもよい。
別の例では、ライドシェア車両123の地理的位置(ライドシェア車両123のDSRC準拠GPSデータによって記述される)およびユーザ装置110の地理的位置(ユーザ装置110のGPSデータによって記述される)に基づいて、拡張モジュール210は、ユーザ装置110に対するライドシェア車両123の相対位置を決定する。相対位置は、ライドシェア車両123とユーザ装置110との間の距離、およびユーザ装置110に対するライドシェア車両123の向き(例えば、角度)を含む。ユーザ装置110に対するライドシェア車両123の相対位置に基づいて、拡張モジュール210は、ライドシェア車両123がユーザ装置110のカメラセンサの視野内にあるかどうかを決定する。ライドシェア車両123がユーザ装置110のカメラセンサの視野内にある場合、これはカメラセンサ(例えば、ライドシェア車両123とユーザ装置110の間に見通しがあると仮定する)によって撮影される画像内にライドシェア車両123がキャプチャされることを意味し、拡張モジュール210が1つ以上の画像処理技術(例えば、畳み込みニューラルネットワークを使用する画像処理技術)を使用して画像からオブジェクトの識別および認識を実行し、画像内のライドシェア車両123を識別してもよい。いくつかの実施形態では、拡張モジュール210は、ライドシェア車両123の車両情報(例えば、ライドシェア車両123の製造者、型式、色など)を利用して、画像内のライドシェア車両123を識別してもよい。拡張モジュール210は、他の方法を使用して画像内のライドシェア車両123を識別することもできる。
ユーザ装置110のカメラセンサによってキャプチャされた画像内のライドシェア車両123を識別した後、拡張モジュール210は画像を変更して画像の拡張バージョンを形成し、ライドシェア車両123の位置が現実の環境内で強調されるようにする。例えば、画像は白黒に変更されるが、ライドシェア車両123はカラーである。ライドシェア車両123の位置を強調するための他の多くの変形形態が可能であり、例えば、ライドシェア車両123の位置を強調するグラフィカルオーバーレイを配置することが含まれる。画像の拡張バージョンの例を図7Aに示し、これについては後でより詳しく説明する。
画像および画像の拡張バージョンは、現実の環境内のオブジェクトが移動したり、ユーザ装置110の向きが変わったりする(例えば、ライドシェアの乗客の手が動く)と、リアルタイムで更新される。例えば、ユーザ装置110のディスプレイ114の向きが時計回りに90度回転することをセンサデータが表すと仮定する。すると、ディスプレイ114上の画像の拡張バージョンの配置がそれに応じて変わる。
いくつかの実施形態では、画像の拡張バージョンを表す拡張グラフィックデータは、拡張現実(AR)コンテンツ、仮想現実(VR)コンテンツおよび混合現実(MR)コンテンツのうち1つを含み、画像の拡張バージョンにおけるライドシェア車両123は、コンピュータ生成された知覚情報によって拡張される。例えば、コンピュータ生成された知覚
情報は、画像の色の変化(例えば、画像は白黒であるがライドシェア車両123はカラーである)、ライドシェア車両123上のグラフィックオーバーレイ、ライドシェア車両123の点滅などの視覚情報を含む。代替的または追加的に、コンピュータ生成された知覚情報は、ライドシェアの乗客をライドシェア車両123に誘導するのに役立つ音声指示などの聴覚情報を含む。例えば、スピーカの記号を描写することができる。ライドシェアの乗客がスピーカの記号に触ると音声指示が再生され、ライドシェアの乗客をライドシェア車両123に誘導するのに役立つことができる。
いくつかの実施形態では、ライドシェア車両123はまだ視線上にないが、ユーザ装置110のV2X通信範囲内にあるか、無線メッセージをユーザ装置110に中継するRSU185のV2X通信範囲内にある。拡張モジュール210は少なくとも、ライドシェア車両123の表示がユーザ装置110のディスプレイ114上に現実の環境と共に提示されるように、画像の拡張バージョンを形成するためにライドシェア車両123の地理的位置に基づいてライドシェア車両123の表示(例えば、ライドシェア車両123の画像)を現実の環境に重ね合わせることにより、拡張グラフィックデータを生成する。画像の拡張バージョンの例を図7Bに示し、これについては後でより詳しく説明する。
この見通し外(NLOS)の場合、ライドシェアアシスタント199は、車両がライドシェアの乗客によってまだ見えていないがユーザ装置110の通信範囲内にあるときに、ライドシェア車両123を仮想的に見つけることができる。壁、建物、木、丘などの障害物によって遮られている接近中のNLOSライドシェア車両123は、壁、建物、木、丘などの反対側のその真の位置で仮想的に表示され得る。例えば、拡張モジュール210は、ライドシェア車両123のスナップショットを、ライドシェアの乗客が見る画像に重ね合わせることができる。オプションとして、拡張モジュール210は、ライドシェア車両123によって送信されたV2X無線メッセージからライドシェア車両123の道路環境を表すセンサデータを取得し、ライドシェア車両123のスナップショットを、ライドシェアの乗客が見る画像上の道路環境内に重ね合わせることができる。
このNLOSを使用する場合の例をここで説明する。第1の例では、ライドシェアの乗客は空港のターミナルで待機しており、ターミナルに近づく道路がカーブしているため、接近する車は、カーブを約50メートル離れるまでは見えない。しかし、接近する車とのV2X通信を介して上記の動作と同様の動作を実行することにより、接近する車の位置は、車がカーブを曲がる前であっても、場合によっては300メートル離れた場所でも仮想的に識別できる。第2の例は、上記の第1の例に似ているが都会の環境であり、接近する車が接近しながら脇道にある場合、ライドシェアの乗客は歩道上または隣接する建物の中にいることがある。接近する車の位置は、接近する車がライドシェアの乗客の見通しに入る前であっても、仮想的に識別できる。第3の例は、上記の第1の例に似ているがライドシェアの乗客が自宅でピックアップを待っている場合であり、接近する車が近所を通過するときに車を仮想的に見つけることができる。
これら全てのNLOSの場合において、NLOSの状態にもかかわらず車両の位置を描写することにより、乗客の乗車の効率が向上し、乗車が近づいているという早めの安心感が得られる。通信範囲は通常、直線状態では300〜500メートルであり、遮られた角を曲がって通信する場合は100〜150メートルである。これら全てのNLOSの場合において、車両の位置は、既存のライドシェアアプリケーションによって提供されるマップから決定するよりも正確に決定できる。これは例えば雨が降っている場合、または乗客が出発前に家族と時間を過ごしており、車両が実際に到着するまで建物を出るのを待ちたい場合に特に便利である。
提示モジュール212は、プロセッサ115によって実行されると、プロセッサ115
にユーザ装置110上に拡張グラフィックデータを提示させるルーチンを含むソフトウェアであり得る。いくつかの実施形態では、提示モジュール212は、コンピュータシステム200のメモリ116に格納することができ、プロセッサ115によってアクセス可能および実行可能にすることができる。提示モジュール212は、信号線230を介して、プロセッサ115およびコンピュータシステム200の他のコンポーネントと協働および通信するように適合され得る。
いくつかの実施形態において、提示モジュール212は、現実の環境においてライドシェア車両123がより簡単に見つかるように、ユーザ装置110のディスプレイ114上に拡張グラフィックデータを提示する。例えば、提示モジュール212は、画像が表す現実の環境内でライドシェア車両123を強調することにより、ディスプレイ114上に画像の拡張バージョンを提示する。
例示的プロセス
ここで図3Aを参照すると、いくつかの実施形態による、ユーザ装置110上に拡張グラフィックデータを提供するための例示的な方法300のフローチャートが示されている。方法300のステップは任意の順序で実行可能であり、必ずしも図3Aに示す順序ではない。
ステップ301で、通信モジュール202は、ライドシェア車両123によって送信され、かつライドシェア車両123を表すV2Xデータを含むV2X無線メッセージを受信する。
ステップ303で、拡張モジュール210は、V2Xデータに基づいて拡張グラフィックデータを生成する。拡張グラフィックデータは、ユーザ装置110によってキャプチャされた画像の拡張バージョンを表し、画像は、ライドシェア車両123を含む現実の環境を表す。画像の拡張バージョンは、現実の環境内のライドシェア車両123の位置を強調する。
ステップ305で、提示モジュール212は、現実の環境においてライドシェア車両123がより簡単に見つかるように、ユーザ装置110上に拡張グラフィックデータを提示する。例えば、ライドシェア車両123はユーザ装置110のユーザにライドシェアサービスを提供し、拡張グラフィックデータはユーザがライドシェア車両123を見つけてライドシェアサービスを受けることを支援する。
ここで図3Bを参照すると、いくつかの実施形態による、ユーザ装置110上に拡張グラフィックデータを提供するための別の例示的な方法350のフローチャートが示されている。方法350のステップは任意の順序で実行可能であり、必ずしも図3Bに示す順序ではない。
ステップ351で、通信モジュール202は、ライドシェア車両123によって送信され、かつライドシェア車両123のDSRC準拠GPSデータを含むV2X無線メッセージを受信する。
ステップ353で、通信モジュール202は、ユーザ装置のGPSデータを取得する。
ステップ355で、通信モジュール202は、ユーザ装置110の現実の環境(例えば、ライドシェアの乗客が位置する現実の環境)を表すリアルタイム画像を表すカメラデータを取得する。
ステップ357で、通信モジュール202は、ユーザ装置110のディスプレイ114の向きを表すリアルタイムセンサデータを取得する。
ステップ359で、拡張モジュール210は、ライドシェア車両123のDSRC準拠GPSデータ、ユーザ装置110のGPSデータ、カメラデータおよびセンサデータのうち1つ以上に基づいて、拡張グラフィックデータを生成する。拡張グラフィックデータは、リアルタイム画像の拡張バージョンを表し、現実の環境内のライドシェア車両123の位置を強調する。
ステップ361で、提示モジュール212は、現実の環境においてライドシェア車両123がより簡単に見つかるように、拡張グラフィックデータをユーザ装置110に提示する。
図4は、いくつかの実施形態によるライドシェア車両123のGPSデータを提供する方法を示す。方法400のステップは任意の順序で実行可能であり、必ずしも図4に示す順序ではない。
ステップ401で、ライドシェアクライアント184は、ライドシェア車両123がライドシェアイベントを実行するように指定されていることを示すデジタルデータを含む無線メッセージを受信する。
例えば、ライドシェアサービスは、ライドシェアの乗客とクラウドサーバとの間の通信で開始され得る。ライドシェアクライアント184は、ライドシェア車両123がライドシェアイベントを実行するように指定されていることを示す無線メッセージをクラウドサーバから受信する(例えば、ユーザ装置上のライドシェアアプリケーションがクラウドサーバからセルラリンクを介して初期車両情報を現在受信していることと同様)。無線メッセージはいつでも受信できる。いくつかの例では、無線メッセージは、ステップ405および407において後でV2Xメッセージで使用されてもよい車両識別子を含むことができる。
いくつかの実施形態では、無線メッセージはV2X無線メッセージである。いくつかの他の実施形態では、無線メッセージは、任意の他の種類の無線メッセージ(例えば、セルラメッセージ、WiFiメッセージなど)によることができる。
いくつかの実施形態では、ライドシェア車両123にインストールされたライドシェアクライアント184は、ライドシェア車両123がライドシェアの乗客をピックアップするために使用されていることを判定する。例えば、スマートフォンを携帯する運転者は、自分のスマートフォンにインストールされているライドシェアアプリケーション198を使用して、ライドシェアの乗客をピックアップする依頼を受け入れる。スマートフォンは、ライドシェアアプリケーション198のモジュールであり得るライドシェアアシスタント199のインスタンスも含む。運転者のスマートフォンにインストールされたライドシェアアシスタント199は、ライドシェア車両123のECU186にインストールされたライドシェアクライアント184に第1のV2X無線メッセージを送信する。第1のV2X無線メッセージは、ライドシェア車両123がライドシェアの乗客をピックアップする予約を有することを示すデジタルデータを含む。また、デジタルデータは、第2のV2X無線メッセージをライドシェアの乗客のユーザ装置110にユニキャストするために使用可能であるライドシェアの乗客の識別情報(例えば、電話番号、電子メールアドレス、メディアアクセス制御(MAC)アドレス)を含んでもよい。
ステップ403で、ライドシェアクライアント184は、ライドシェア車両123のG
PSユニット(例えば、DSRC準拠GPSユニット170)からライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)を取得する。
ステップ405で、ライドシェアクライアント184は、ライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)を含むV2X無線メッセージを生成する。
ステップ407で、ライドシェアクライアント184は、ライドシェアの乗客のユーザ装置110にV2Xメッセージを送信する。例えば、ライドシェアクライアント184は、ライドシェア車両123に設置された通信ユニット145のV2X無線機143に、ライドシェア車両123のDSRC準拠GPSデータを含むV2X無線メッセージの送信(ブロードキャストまたはユニキャストによる)を開始させる。
いくつかの実施形態では、V2X無線メッセージは、ライドシェアの乗客によって操作されるユーザ装置110の識別子を目的地としてさらに含むユニキャストメッセージである。ユニキャストメッセージは、ライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)も含む。
いくつかの他の実施形態では、V2Xメッセージは、ライドシェア車両123を一意に識別するデジタルデータ(例えば、車両ID)をさらに含むブロードキャストメッセージである。例えば、ライドシェア車両123にインストールされたライドシェアクライアント184は、BSMを構築する。BSMは特に、(1)DSRC準拠GPSデータ、および(2)ライドシェア車両123を一意に識別するデジタルデータを含む。ライドシェアクライアント184は、ライドシェア車両123に設置された通信ユニット145のV2X無線機143に、任意の形態のV2X通信を介して(ブロードキャストを介して)BSMの送信を開始させる。
図5A〜図5Bは、いくつかの実施形態による、ユーザ装置110上に拡張グラフィックデータを提供するための例示的なプロセス500を示す。プロセス500のステップは任意の順序で実行可能であり、必ずしも図5A〜図5Bに示す順序ではない。
例示的なプロセス500では、ライドシェア車両123の運転者は、ライドシェアアシスタント199のインスタンスを含むユーザ装置(例えば、スマートフォン)を携帯し、ライドシェアアプリケーションでは運転者はスマートフォンアプリケーションを含むスマートフォンを携帯する必要があるためにこれは一般的である。例示的なプロセス500の動作環境は、図1Aで参照することができる。ライドシェアクライアント184およびライドシェアアシスタント199は、以下のステップのうち1つ以上を実行するように動作可能である。
図5Aを参照すると、ステップ501で、ライドシェア車両123のライドシェアクライアント184は、ライドシェアサービスを提供するライドシェア車両123がライドシェアの乗客のためにライドシェアイベントを実行するように指定されていることを判定する。
いくつかの実施形態では、ライドシェア車両123にインストールされたライドシェアクライアント184は、ライドシェア車両123がライドシェアの乗客をピックアップするために使用されていることを判定する。例えば、運転者は、自分のスマートフォンにインストールされたライドシェアアプリケーション198を使用して、ライドシェアの乗客をピックアップする依頼を受け入れる。スマートフォンは、ライドシェアアプリケーション198のモジュールであり得るライドシェアアシスタント199のインスタンスも含む
。運転者のスマートフォンにインストールされたライドシェアアシスタント199は、ライドシェア車両123のECU186にインストールされたライドシェアクライアント184に無線メッセージを送信する。無線メッセージは、ライドシェア車両123がライドシェアの乗客をピックアップする予約を有することを示すデジタルデータを含む。また、デジタルデータは、ライドシェアの乗客のユーザ装置110にV2Xメッセージをユニキャストするために使用可能であるライドシェアの乗客の識別情報(例えば、電話番号、電子メールアドレス、MACアドレス)を含んでもよい。
ステップ503で、ライドシェア車両123にインストールされたライドシェアクライアント184は、ライドシェア車両123のGPSユニット(例えば、DSRC準拠GPSユニット170)からライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)を入手する。
ステップ505で、ライドシェア車両123のライドシェアクライアント184は、ライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)を含むV2X無線メッセージを送信する。例えば、ライドシェア車両123にインストールされたライドシェアクライアント184は、ライドシェア車両123に設置された通信ユニット145のV2X無線機143に、ライドシェア車両123のGPSデータ(例えばDSRC準拠GPSデータ)を含むV2X無線メッセージの送信(ブロードキャストまたはユニキャストによる)を開始させる。
ステップ507で、ライドシェアの乗客のユーザ装置110は、V2X無線メッセージを受信し、次にユーザ装置110のライドシェアアシスタント199は、V2X無線メッセージからライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)を取得する。
ステップ509で、ユーザ装置110のライドシェアアシスタント199は、GPSユニット270からライドシェアの乗客に関連付けられたユーザ装置110のGPSデータを取得する。
ステップ511で、ユーザ装置110のライドシェアアシスタント199は、ライドシェアの乗客に関連付けられた現実の環境のリアルタイム画像をキャプチャするための指示を提供する。例えば、ライドシェアアシスタント199は、ライドシェアの乗客に、ユーザ装置110を持ち上げてライドシェアの乗客の環境の画像をキャプチャするように指示する。例えば、ライドシェアアシスタント199は、ディスプレイ114にこの指示を含むグラフィックを描写させる。
ステップ513で、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のカメラを制御して、現実の環境のリアルタイム画像をキャプチャする。例えば、ライドシェアアシスタント199は、ライドシェアの乗客によって操作されるユーザ装置110のカメラに、ライドシェアの乗客の環境の1つ以上のリアルタイム画像(またはビデオ)をキャプチャさせる。1つ以上の画像(またはビデオ)はカメラデータによって記述される。ユーザ装置110のディスプレイ114は、カメラによってキャプチャされた1つ以上の画像(またはビデオ)をまだ表示していない。ライドシェアの乗客がユーザ装置110のディスプレイ114を見るときに、画像表示プロセス(またはビデオ表示プロセス)はライドシェアの乗客にとって正しいように見えるように、以下のステップ514〜519はほんの一瞬で行われる。
ステップ514で、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のカメラから、リアルタイム画像を表すカメラデータを受信する。
図5Bを参照すると、ステップ515で、ユーザ装置110のライドシェアアシスタント199は1つ以上のセンサを制御して、ユーザ装置110のディスプレイ114の向きを表すセンサデータをキャプチャする。例えば、ライドシェアアシスタント199は、ユーザ装置110の内蔵センサに、ユーザ装置110のディスプレイ114の向きを表すセンサデータをキャプチャさせる。
ステップ517で、ユーザ装置110のライドシェアアシスタント199は、1つ以上のセンサからセンサデータを受信する。
ステップ519で、ユーザ装置110のライドシェアアシスタント199は、ライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)、ユーザ装置110のGPSデータ、カメラデータおよびセンサデータの1つ以上に基づいて拡張グラフィックデータを生成する。
例えば、ライドシェアアシスタント199は、ライドシェア車両の地理的位置を表すデジタルデータ(すなわち、ライドシェア車両123のDSRC準拠GPSデータ)、ユーザ装置110の地理的位置を表すデジタルデータ(すなわち、ユーザ装置110のGPSデータ)、ライドシェア車両123の環境の画像を表すカメラデータ、およびユーザ装置110の向きまたは向きの変化を表すセンサデータの入力を受信する。これらの入力に基づいて、ライドシェアアシスタント199は、カメラデータが表す環境内でライドシェア車両の位置を強調する拡張グラフィックデータを出力する。
ステップ521で、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のディスプレイ114を制御して、リアルタイム画像の拡張バージョンがライドシェア車両123の場所を強調して表示されるように拡張グラフィックデータを提示する。例えば、ライドシェアアシスタント199は、ユーザ装置110のディスプレイ114に、カメラデータが表すリアルタイムの現実の画像を表示させ、この画像は、拡張現実コンテンツ、仮想現実コンテンツおよび複合現実コンテンツのいずれかを含むように変更されており、画像内のライドシェア車両は、コンピュータ生成された知覚情報によって拡張されている。
任意選択的に、ステップ523で、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のディスプレイ114上でライドシェア車両123が強調されていることを示すV2X無線メッセージを、ライドシェアクライアント184に送信する。
図6A〜図6Bは、いくつかの実施形態による、ユーザ装置110上に拡張グラフィックデータを提供するための別の例示的なプロセス600を示す。プロセス600のステップは任意の順序で実行可能であり、必ずしも図6A〜図6Bに示す順序ではない。
例示的なプロセス600では、ライドシェア車両123の運転者は、ライドシェアアシスタント199のインスタンスを含むユーザ装置(例えば、スマートフォン)を携帯する必要がない。例示的なプロセス600の動作環境は、図1Bで参照することができる。ライドシェアクライアント184およびライドシェアアシスタント199は、以下のステップのうち1つ以上を実行するように動作可能である。
図6Aを参照すると、ステップ601で、ライドシェア車両123にインストールされたライドシェアクライアント184は、ライドシェア車両123のGPSユニット(例えば、DSRC準拠GPSユニット170)からライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)を入手する。
ステップ603で、ライドシェア車両123のライドシェアクライアント184は、ライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)と、ライドシェア車両123を一意に識別するデジタルデータ(例えば、最初の車両ID)とを含むV2X無線メッセージを構築する。例えば、V2X無線メッセージはBSMである。ライドシェア車両123にインストールされたライドシェアクライアント198は、(1)DSRC準拠GPSデータおよび(2)第1の車両IDを特に含むBSMを構築する。
ステップ605で、ライドシェアクライアント184はV2X無線メッセージを送信する。例えば、ライドシェアクライアント184は、ライドシェア車両123に設置された通信ユニット145のV2X無線機143に、任意の形態のV2X通信を介してV2X無線メッセージ(例えば、BSM)の送信を(ブロードキャストを介して)開始させる。
ステップ607で、ライドシェアの乗客のユーザ装置110はV2X無線メッセージを受信し、次にユーザ装置110のライドシェアアシスタント199は、ライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)および第1の車両IDをV2X無線メッセージから取得する。
ステップ608で、ユーザ装置110のライドシェアアシスタント199は、第1の車両IDを車両IDデータベース128に格納された第2の車両IDと比較することによって、ユーザ装置110に関連付けられたライドシェアイベントにV2X無線メッセージが関連していること、およびライドシェア車両123がライドシェアイベントを実行するように指定された車両であることを認識する。
例えば、ユーザ装置110にインストールされたライドシェアアシスタント199は、車両IDデータベース128を含む。車両IDデータベース128は、ライドシェアの乗客をピックアップするように指定されたライドシェア車両123のアイデンティティを識別するデジタルデータ(例えば、第2の車両ID)を含む。ライドシェアアシスタント199は、第1の車両IDを第2の車両IDと比較する。第1の車両IDが第2の車両IDと一致する(例えば、第1の車両IDが第2の車両IDと同一である)場合、ライドシェアアシスタント199は、ライドシェア車両123の運転者がライドシェア車両123を使用してライドシェアの乗客をピックアップすることに同意したときに開始されたライドシェアイベントに、この特定のV2X無線メッセージが関連していることを認識する。
ステップ609で、ユーザ装置110のライドシェアアシスタント199は、GPSユニット270からユーザ装置110のGPSデータを取得する。
ステップ611で、ユーザ装置110のライドシェアアシスタント199は、ライドシェアの乗客に関連付けられた現実の環境のリアルタイム画像をキャプチャするための指示を提供する。例えば、ライドシェアアシスタント199は、ライドシェアの乗客に、ユーザ装置110を起動してライドシェアの乗客の環境の画像をキャプチャするように指示する(例えば、ライドシェアアシスタント199は、ライドシェアの乗客の環境の画像をキャプチャするためにユーザ装置110を持ち上げるようにライドシェアの乗客に指示する;ユーザ装置110はスマート眼鏡であり、ライドシェアアシスタント199は、スマート眼鏡を起動してライドシェアの乗客の環境の画像をキャプチャするように、ライドシェアの乗客に瞬きをするように指示する;またはユーザ装置110はスマートウォッチ、ブレスレット、リングもしくはネックレスなどの別のウェアラブルデバイスであり、ライドシェアアシスタント199は、ウェアラブルデバイスのカメラを起動してライドシェアの乗客の環境の画像をキャプチャするように、ボタンを押すか、ウェアラブルデバイスの画面に触れるようにライドシェアの乗客に指示する、など)。例えば、ライドシェアアシス
タント199は、ディスプレイ114にこの指示を含むグラフィックを描写させる。
図6Bを参照すると、ステップ613で、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のカメラを制御して、現実の環境のリアルタイム画像をキャプチャする。例えば、ライドシェアアシスタント199は、ライドシェアの乗客によって操作されるユーザ装置110のカメラに、ライドシェアの乗客の環境の1つ以上のリアルタイム画像をキャプチャさせる。1つ以上の画像はカメラデータによって記述される。ユーザ装置110のディスプレイ114は、カメラによってキャプチャされた1つ以上の画像をまだ表示していない。ライドシェアの乗客がユーザ装置110のディスプレイ114を見るときに、画像表示プロセスはライドシェアの乗客にとって正しいように見えるように、以下のステップ614〜619はほんの一瞬で行われる。
ステップ614で、ユーザ装置110のライドシェアアシスタント199は、リアルタイム画像を表すカメラデータをカメラから受信する。
ステップ615で、ユーザ装置110のライドシェアアシスタント199は、1つ以上のセンサを制御して、ユーザ装置110のディスプレイ114の向きを表すセンサデータをキャプチャする。
ステップ617で、ユーザ装置110のライドシェアアシスタント199は、1つ以上のセンサからセンサデータを受信する。
ステップ619で、ユーザ装置110のライドシェアアシスタント199は、ライドシェア車両123のGPSデータ(例えば、DSRC準拠GPSデータ)、ユーザ装置110のGPSデータ、カメラデータおよびセンサデータの1つ以上に基づいて拡張グラフィックデータを生成する。
ステップ621で、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のディスプレイ114を制御して、リアルタイム画像の拡張バージョンが現実の環境におけるライドシェア車両123の場所を強調して表示されるように拡張グラフィックデータを提示する。
任意選択的に、ステップ623で、ユーザ装置110のライドシェアアシスタント199は、ユーザ装置110のディスプレイ114上でライドシェア車両123が強調されていることを示すV2X無線メッセージを、ライドシェアアプリケーション184に送信する。
図7Aは、いくつかの実施形態による、現実の環境におけるライドシェア車両の位置を強調する画像の例示的な拡張バージョンを示すグラフィック表示である。いくつかの実施形態では、ライドシェアの乗客は、ユーザ装置110のカメラセンサを使用して現実の環境の画像をキャプチャするためにユーザ装置110を持ち上げる。ここでは、キャプチャされた現実の環境には4台の車両が含まれており、4台の車両のうち1台がライドシェア車両である。カメラセンサによってキャプチャされた画像は、ライドシェア車両の位置を強調するように変更される。ユーザ装置110のディスプレイ114は、ライドシェア車両の位置に重点を置いて現実の環境を表すAR/VR/MRコンテンツを描写する。例えば、描写された現実の環境の中でライドシェア車両に陰影が付けられ、強調されたライドシェア車両の横に「Your ride!」というテキストオーバーレイも配置される。
図7Bは、いくつかの実施形態による、現実の環境におけるライドシェア車両の位置を強調する画像の別の例示的な拡張バージョンを示すグラフィック表示である。いくつかの
実施形態では、ライドシェアの乗客は、ユーザ装置110のカメラセンサを使用して現実の環境の画像をキャプチャするためにユーザ装置110を持ち上げる。ここでは、ライドシェア車両が壁の反対側から来ている間、カメラセンサの視野は壁によって遮られている。すなわち、カメラセンサとライドシェア車両との間には見通しがない。
ユーザ装置110にインストールされたライドシェアアシスタント199は、V2Xデータによって記述されたV2X無線メッセージをライドシェア車両から受信することができ、ここでV2Xデータは、ライドシェア車両のGPSデータと、ライドシェア車両の現在の道路環境を表すセンサデータとを含む。ライドシェアアシスタント199は、ライドシェア車両のGPSデータと、ライドシェア車両の現在の道路環境を表すセンサデータとに基づいて、実際の位置にあるライドシェア車両(例えば、ディスプレイ114に表示される破線部分)を描写するサブ画像を生成することができる。ライドシェアアシスタント199は、サブ画像と現実の環境を表すキャプチャされた画像(例えば、ディスプレイ114に表示される実線部分)とを組み合わせて、キャプチャされた画像の拡張バージョンを形成する。ディスプレイ114は、ライドシェア車両がまだ視線上になくてもライドシェアの乗客がライドシェア車両を簡単に見つけることができるように、キャプチャされた画像の拡張バージョンをライドシェアの乗客に提示する。
上記の記載では、説明目的で、本明細書の完全な理解をもたらすように、多数の具体的詳細を記載した。しかし、本開示が、これらの具体的詳細なしに実施可能であることは当業者には明らかとなるだろう。幾つかの例では、説明を分かりにくくすることを避けるために、構造及びデバイスをブロック図形式で示している。例えば、本実施形態は、主にユーザインタフェース及び特定のハードウェアに関連して、上記で説明することができる。しかし、本実施形態は、データ及びコマンドを受信することができる、どのような種類のコンピュータシステムにも、及びサービスを提供するどのような周辺デバイスにも適用することができる。
本明細書における「幾つかの実施形態」又は「幾つかの例」への言及は、実施形態又は例に関連して記載したある特定の特徴、構造、又は特性が、記載の少なくとも1つの実施形態に含まれ得ることを意味する。本明細書の様々な箇所における「幾つかの実施形態では」というフレーズの出現は、必ずしも全て同じ実施形態に言及しているわけではない。
以下の詳細な記載の幾つかの部分は、コンピュータメモリ内のデータビットに対する演算のアルゴリズム及び記号表現の観点から提示される。これらのアルゴリズム的記述及び表現は、データ処理分野の当業者によって、最も効果的に自身の研究の内容を他の当業者に伝えるために使用される手段である。アルゴリズムは、ここでは、及び一般的に、所望の結果をもたらす、セルフコンシステントな一連のステップであると考えられる。これらのステップは、物理量の物理的操作を必要とするものである。一般に、必ずではないが、これらの量は、保存、転送、結合、比較、及びその他の操作が行われることが可能な電気又は磁気信号の形をとる。時には、主に一般的な用法が理由で、ビット、値、要素、記号、文字、用語、又は数字などとして、これらの信号に言及することが便利であると分かっている。
しかし、これら及び類似の用語の全てが、適切な物理量と関連付けられるべきであること、及びこれらの量に適用される便利なラベルにすぎないことが留意されるべきである。具体的な別段の記載のない限り、以下の記述から明らかなように、記載全体を通して、「処理する」、「算出する」、「計算する」、「決定する」、又は「表示する」などを含む用語を利用した記述は、コンピュータシステムのレジスタ及びメモリ内で物理(電子)量として表されるデータを、コンピュータシステムのメモリ又はレジスタ、又は他のそのような情報ストレージ、送信、又はディスプレイデバイス内で同様に物理量として表される
他のデータへと操作及び変換する、コンピュータシステム又は類似の電子コンピューティングデバイスのアクション及びプロセスを指す。
本明細書の本実施形態はまた、本明細書における動作を行うための装置に関してもよい。この装置は、必要とされる目的のために特別に構築されてもよく、又はコンピュータに保存されたコンピュータプログラムによって選択的に作動又は再設定される汎用コンピュータを含んでいてもよい。このようなコンピュータプログラムは、限定されないが、フロッピーディスク、光ディスク、CD−ROM、及び磁気ディスクを含むあらゆる種類のディスク、読取り専用メモリ(ROM)、ランダムアクセスメモリ(RAM)、EPROM、EEPROM、磁気又は光カード、不揮発性メモリを備えたUSBキーを含むフラッシュメモリ、又はそれぞれコンピュータシステムバスに結合された電子命令を保存するのに適したあらゆる種類の媒体を含む、コンピュータ可読ストレージ媒体に保存されてもよい。
本明細書は、幾つかの完全なハードウェア実施形態、幾つかの完全なソフトウェア実施形態、又はハードウェア及びソフトウェア要素の両方を含有した幾つかの実施形態の形をとり得る。幾つかの好ましい実施形態では、本明細書は、限定されないが、ファームウェア、常駐ソフトウェア、マイクロコードなどを含むソフトウェアで実施される。
さらに、記載は、コンピュータ又は任意の命令実行システムによって、又は関連して使用されるプログラムコードを提供するコンピュータ使用可能又はコンピュータ可読媒体からアクセス可能なコンピュータプログラム製品の形をとり得る。この記載を目的として、コンピュータ使用可能又はコンピュータ可読媒体は、命令実行システム、装置、又はデバイスによって、又は関連して使用されるプログラムの含有、保存、伝達、伝搬、又は伝送を行うことができる、どのような装置でもよい。
プログラムコードの保存又は実行に適したデータ処理システムは、システムバスによってメモリ素子と直接的又は間接的に結合された少なくとも1つのプロセッサを含む。メモリ素子は、プログラムコードの実際の実行中に用いられるローカルメモリ、大容量ストレージ、及び実行中に大容量ストレージからコードが抽出されなければならない回数を減らすために少なくとも一部のプログラムコードの一時的ストレージを提供するキャッシュメモリを含み得る。
入出力又はI/Oデバイス(限定されないが、キーボード、ディスプレイ、ポインティングデバイスなどを含む)は、システムに直接的に、又は介在するI/Oコントローラを通して結合され得る。
ネットワークアダプタは、データ処理システムが、介在する私設又は公衆ネットワークを通して他のデータ処理システム、リモートプリンタ、又はストレージデバイスに結合されることを可能にするために、システムに結合されてもよい。モデム、ケーブルモデム、及びイーサネットカードは、現在利用可能なネットワークアダプタの種類のほんの数例である。
最後に、本明細書に提示するアルゴリズム及びディスプレイは、どの特定のコンピュータ又は他の装置とも本質的に関連していない。本明細書の教示に従って、様々な汎用システムをプログラムと共に使用することができ、又は必要な方法ステップを行うように、より専門化された装置を構築することが便利であると判明する場合がある。様々なこれらのシステムのために必要な構造は、以下の記載から分かるだろう。加えて、本明細書は、特定のプログラミング言語に関連して記載されていない。様々なプログラミング言語を使用して、ここに記載される本明細書の教示を実施することができることが認識されるだろう
本明細書の実施形態の上記の記載は、例示及び説明を目的として提示されたものである。包括的であること、又は開示した正確な形態に本明細書を限定することを意図したものではない。上記の教示に鑑みて、多くの変更形態及び変形形態が可能である。本開示の範囲が、この詳細な説明によってではなく、本出願の特許請求の範囲によって限定されることが意図される。当該分野に精通する者には理解されるように、本明細書は、その精神又は必須の特性から逸脱することなく、他の特定の形態で具現化されてもよい。同様に、モジュール、ルーチン、特徴、属性、手法、及び他の態様の特定の命名及び区分は、義務的又は重要なものではなく、本明細書又はその特徴を実施する機構は、異なる名称、区分、又は形式を有していてもよい。さらに、関連技術の当業者には明らかとなるように、本開示のモジュール、ルーチン、特徴、属性、手法、及び他の態様は、ソフトウェア、ハードウェア、ファームウェア、又はこれら3つの任意の組み合わせとして実施することができる。また、本明細書のコンポーネント(その一例は、モジュールである)がソフトウェアとして実施される場合はいつでも、そのコンポーネントは、スタンドアロンプログラムとして、より大きなプログラムの一部として、複数の別個のプログラムとして、静的又は動的にリンクしたライブラリとして、カーネルロード可能モジュールとして、デバイスドライバとして、又はコンピュータプログラミング分野の当業者に現在又は将来公知のあらゆる及びその他の方法で実施することができる。加えて、本開示は、どの特定のプログラミング言語の実施形態にも、又はどの特定のオペレーティングシステム又は動作環境の実施形態にも決して限定されない。従って、本開示は、以下の特許請求の範囲に記載される本明細書の範囲を説明するものであって、限定するものではないことが意図される。

Claims (20)

  1. ライドシェア車両によって送信され、前記ライドシェア車両を表す車両対モノ(V2X)データを含むV2X無線メッセージをユーザ装置によって受信することと、
    前記ユーザ装置によってキャプチャされ、かつ前記ライドシェア車両を含む現実の環境を表す画像の拡張バージョンであって、前記現実の環境内のライドシェア車両の場所を強調する拡張バージョンを表す拡張グラフィックデータを、前記V2Xデータに基づいて生成することと、
    前記現実の環境において前記ライドシェア車両がより簡単に見つかるように、前記ユーザ装置上に前記拡張グラフィックデータを提示することと
    を含む方法。
  2. 前記V2Xデータは、前記ライドシェア車両の専用狭域通信(DSRC)準拠全地球測位システム(GPS)データを含む、請求項1に記載の方法。
  3. 前記ユーザ装置のGPSデータを取得することと、
    前記現実の環境を表す画像を表すカメラデータを取得することと、
    前記ライドシェア車両の前記DSRC準拠GPSデータ、前記ユーザ装置の前記GPSデータおよび前記カメラデータに基づいて、前記拡張グラフィックデータを生成することと
    をさらに含む、請求項2に記載の方法。
  4. 前記画像は、前記ユーザ装置のカメラセンサによってキャプチャされたリアルタイム画像である、請求項1に記載の方法。
  5. 前記拡張グラフィックデータは、拡張現実コンテンツ、仮想現実コンテンツおよび混合現実コンテンツのうち1つを含み、前記画像の前記拡張バージョンのライドシェア車両は、コンピュータ生成された知覚情報によって拡張されている、請求項1に記載の方法。
  6. 前記ユーザ装置のディスプレイの向きを表すセンサデータを取得することと、
    前記センサデータにさらに基づいて前記拡張グラフィックデータを生成することと
    をさらに含む、請求項1に記載の方法。
  7. 前記V2Xデータが前記ライドシェア車両を一意に識別する第1の車両識別子(ID)をさらに含み、前記拡張グラフィックデータを生成する前に、前記方法が、
    前記V2Xデータから第1の車両IDを取得することと、
    前記ユーザ装置に関連付けられたライドシェアイベントを実行するように指定された車両を一意に識別する第2の車両IDを車両IDデータベースから取得することと、
    前記第1の車両IDが前記第2の車両IDと一致する場合には、前記ライドシェア車両が前記ユーザ装置に関連付けられたライドシェアイベントを実行するように指定された車両であることを認識することと
    をさらに含む、請求項1に記載の方法。
  8. 前記第1の車両IDおよび前記第2の車両IDは一時的な一意の識別子である、請求項7に記載の方法。
  9. 前記ライドシェア車両が視線上にないが前記ユーザ装置のV2X通信範囲内にある場合に、前記拡張グラフィックデータを生成することは、
    前記ライドシェア車両の表示が前記ユーザ装置上に前記現実の環境と共に提示されるように、前記画像の拡張バージョンを形成するために前記ライドシェア車両の地理的位置に
    基づいて前記ライドシェア車両の表示を前記現実の環境に重ね合わせること
    を含む、請求項1に記載の方法。
  10. 前記V2X無線メッセージがDSRCメッセージ、基本安全メッセージ、ロングタームエボリューション(LTE)メッセージ、LTE−V2Xメッセージ、5G−V2Xメッセージおよびミリ波メッセージで構成されるグループから選択される、請求項1に記載の方法。
  11. 前記ライドシェア車両は前記ユーザ装置のユーザにライドシェアサービスを提供し、前記拡張グラフィックデータは、前記ユーザが前記ライドシェア車両を見つけ前記ライドシェアサービスを受けることを支援する、請求項1に記載の方法。
  12. プロセッサと、コンピュータコードを格納する非一時的メモリとを含み、
    前記コンピュータコードは、前記プロセッサによって実行されると、前記プロセッサに、
    ライドシェア車両によって送信され、かつ前記ライドシェア車両を表す車両対モノ(V2X)データを含むV2X無線メッセージを受信させ、
    ユーザ装置によってキャプチャされ、かつ前記ライドシェア車両を含む現実の環境を表す画像の拡張バージョンであって、前記現実の環境内のライドシェア車両の場所を強調する拡張バージョンを表す拡張グラフィックデータを、前記V2Xデータに基づいて生成させ、
    前記現実の環境において前記ライドシェア車両がより簡単に見つかるように、前記ユーザ装置上に前記拡張グラフィックデータを提示させる、システム。
  13. 前記V2Xデータは、前記ライドシェア車両の専用狭域通信(DSRC)準拠全地球測位システム(GPS)データを含む、請求項12に記載のシステム。
  14. 前記コンピュータコードは、前記プロセッサにより実行されると、前記プロセッサにさらに、
    前記ユーザ装置のGPSデータを取得させ、
    前記現実の環境を表す画像を表すカメラデータを取得させ、
    前記ライドシェア車両の前記DSRC準拠GPSデータ、前記ユーザ装置の前記GPSデータ、および前記カメラデータに基づいて、拡張グラフィックデータを生成させる、請求項13に記載のシステム。
  15. 前記画像は、前記ユーザ装置のカメラセンサによってキャプチャされたリアルタイム画像である、請求項12に記載のシステム。
  16. 前記拡張グラフィックデータは、拡張現実コンテンツ、仮想現実コンテンツおよび混合現実コンテンツのうち1つを含み、前記画像の前記拡張バージョンにおける前記ライドシェア車両は、コンピュータ生成された知覚情報によって拡張されている、請求項12に記載のシステム。
  17. 前記コンピュータコードは、前記プロセッサによって実行されると、前記プロセッサにさらに、
    前記ユーザ装置のディスプレイの向きを表すセンサデータを取得させ、
    前記センサデータにさらに基づいて前記拡張グラフィックデータを生成させる、請求項12に記載のシステム。
  18. コンピュータ実行可能コードを格納する非一時的メモリを含むコンピュータプログラム
    製品であって、前記コンピュータ実行可能コードは、プロセッサによって実行されると、前記プロセッサに、
    ライドシェア車両によって送信され、かつ前記ライドシェア車両を表す車両対モノ(V2X)データを含むV2X無線メッセージを受信させ、
    ユーザ装置によってキャプチャされ、かつ前記ライドシェア車両を含む現実の環境を表す画像の拡張バージョンであって、前記現実の環境内のライドシェア車両の場所を強調する拡張バージョンを表す拡張グラフィックデータを、前記V2Xデータに基づいて生成させ、
    前記現実の環境において前記ライドシェア車両がより簡単に見つかるように、前記ユーザ装置に前記拡張グラフィックデータを提示させる、コンピュータプログラム製品。
  19. 前記V2Xデータは、前記ライドシェア車両の専用狭域通信(DSRC)準拠全地球測位システム(GPS)データを含む、請求項18に記載のコンピュータプログラム製品。
  20. 前記コンピュータ実行可能コードは、前記プロセッサによって実行されると、前記プロセッサにさらに、
    前記ユーザ装置のGPSデータを取得させ、
    前記現実の環境を表す画像を表すカメラデータを取得させ、
    前記ライドシェア車両の前記DSRC準拠GPSデータ、前記ユーザ装置の前記GPSデータ、および前記カメラデータに基づいて、前記拡張グラフィックデータを生成させる、請求項18に記載のコンピュータプログラム製品。
JP2019202134A 2018-11-08 2019-11-07 Ar/vr/mrライドシェアリングアシスタント Active JP7143833B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/184,285 US11100680B2 (en) 2018-11-08 2018-11-08 AR/VR/MR ride sharing assistant
US16/184,285 2018-11-08

Publications (3)

Publication Number Publication Date
JP2020095696A true JP2020095696A (ja) 2020-06-18
JP2020095696A5 JP2020095696A5 (ja) 2022-01-26
JP7143833B2 JP7143833B2 (ja) 2022-09-29

Family

ID=70551895

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019202134A Active JP7143833B2 (ja) 2018-11-08 2019-11-07 Ar/vr/mrライドシェアリングアシスタント

Country Status (3)

Country Link
US (1) US11100680B2 (ja)
JP (1) JP7143833B2 (ja)
CN (1) CN111161008B (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10809081B1 (en) 2018-05-03 2020-10-20 Zoox, Inc. User interface and augmented reality for identifying vehicles and persons
US10837788B1 (en) 2018-05-03 2020-11-17 Zoox, Inc. Techniques for identifying vehicles and persons
US11846514B1 (en) * 2018-05-03 2023-12-19 Zoox, Inc. User interface and augmented reality for representing vehicles and persons
US11092456B2 (en) * 2019-03-08 2021-08-17 Aptiv Technologies Limited Object location indicator system and method
CN112041638A (zh) * 2019-03-15 2020-12-04 谷歌有限责任公司 经由增强现实用于乘车共享和递送的接载和送达地点识别
CN110015233B (zh) 2019-03-20 2020-04-10 北京嘀嘀无限科技发展有限公司 司乘匹配的指示装置配置方法和系统
US11716616B2 (en) * 2019-05-06 2023-08-01 Pointr Limited Systems and methods for location enabled search and secure authentication
US11624626B2 (en) * 2019-07-26 2023-04-11 Here Global B.V. Method, apparatus and computer program product for using a location graph to enable natural guidance
US20210034869A1 (en) * 2019-07-30 2021-02-04 Didi Research America, Llc Method and device for using augmented reality in transportation
US11072277B2 (en) * 2019-09-20 2021-07-27 Adway International Inc. Method and apparatus to dynamically identify a vehicle
US11900815B2 (en) * 2019-09-30 2024-02-13 Gm Cruise Holdings Llc Augmented reality wayfinding in rideshare applications
SE2051033A1 (en) * 2020-09-01 2021-05-05 Scania Cv Ab Method, control arrangement and system for illumination
US20220135082A1 (en) * 2020-11-02 2022-05-05 Unikey Technologies Inc. System and method for wireless interaction between an autonomous vehicle and a mobile device
US20220383751A1 (en) * 2021-05-28 2022-12-01 Lyft, Inc. Systems and methods for personal mobile vehicle localization in a fleet management system
CN113873199B (zh) * 2021-09-23 2023-11-21 上汽大众汽车有限公司 基于直连通讯和蜂窝网络通讯的车载摄像头共享系统及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002032897A (ja) * 2000-07-18 2002-01-31 Futaba Keiki Kk タクシーの配車サービス方法及びそのシステム
JP2005182146A (ja) * 2003-12-16 2005-07-07 Fujitsu Ltd 移動ルート案内システムおよびルート案内サーバ
JP2006099679A (ja) * 2004-09-30 2006-04-13 Kanazawa Inst Of Technology タクシー予約方法および装置およびタクシー予約システム
JP2018097514A (ja) * 2016-12-12 2018-06-21 三菱電機株式会社 車載認証装置および車載認証方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8686873B2 (en) * 2011-02-28 2014-04-01 Toyota Motor Engineering & Manufacturing North America, Inc. Two-way video and 3D transmission between vehicles and system placed on roadside
WO2015115879A1 (es) * 2014-01-30 2015-08-06 Modutram México, S.A. De. C.V. Sistema y método de agrupación de pasajeros en un transporte colectivo automatizado
EP3186765A4 (en) * 2014-08-27 2018-01-10 Capital One Financial Corporation Augmented reality card activation
US9791919B2 (en) * 2014-10-19 2017-10-17 Philip Lyren Electronic device displays an image of an obstructed target
US9789025B2 (en) * 2016-03-01 2017-10-17 Brandbumps, Llc Tactile warning panel apparatus and system with smart technology
US10088846B2 (en) * 2016-03-03 2018-10-02 GM Global Technology Operations LLC System and method for intended passenger detection
US10366290B2 (en) * 2016-05-11 2019-07-30 Baidu Usa Llc System and method for providing augmented virtual reality content in autonomous vehicles
US20170343375A1 (en) * 2016-05-31 2017-11-30 GM Global Technology Operations LLC Systems to dynamically guide a user to an autonomous-driving vehicle pick-up location by augmented-reality walking directions
US9934632B2 (en) * 2016-09-06 2018-04-03 Denso International America, Inc. Wireless passenger proximity detection system for autonomous vehicles
CN117058345A (zh) * 2016-09-23 2023-11-14 苹果公司 增强现实显示器
US10347046B2 (en) * 2017-06-16 2019-07-09 Daqri, Llc Augmented reality transportation notification system
US20180374032A1 (en) * 2017-06-27 2018-12-27 Uber Technologies, Inc. Match-based route navigation system
US11118930B2 (en) * 2017-07-14 2021-09-14 Lyft, Inc. Providing information to users of a transportation system using augmented reality elements
US10591730B2 (en) * 2017-08-25 2020-03-17 II Jonathan M. Rodriguez Wristwatch based interface for augmented reality eyewear
US10423844B2 (en) * 2017-09-27 2019-09-24 Toyota Jidosha Kabushiki Kaisha Personalized augmented reality vehicular assistance for color blindness condition
US10558868B2 (en) * 2017-12-18 2020-02-11 GM Global Technology Operations LLC Method and apparatus for evaluating a vehicle travel surface
US20190206258A1 (en) * 2018-01-04 2019-07-04 nuTonomy Inc. Augmented reality vehicle interfacing
US11092456B2 (en) * 2019-03-08 2021-08-17 Aptiv Technologies Limited Object location indicator system and method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002032897A (ja) * 2000-07-18 2002-01-31 Futaba Keiki Kk タクシーの配車サービス方法及びそのシステム
JP2005182146A (ja) * 2003-12-16 2005-07-07 Fujitsu Ltd 移動ルート案内システムおよびルート案内サーバ
JP2006099679A (ja) * 2004-09-30 2006-04-13 Kanazawa Inst Of Technology タクシー予約方法および装置およびタクシー予約システム
JP2018097514A (ja) * 2016-12-12 2018-06-21 三菱電機株式会社 車載認証装置および車載認証方法

Also Published As

Publication number Publication date
JP7143833B2 (ja) 2022-09-29
CN111161008A (zh) 2020-05-15
CN111161008B (zh) 2022-10-18
US20200151916A1 (en) 2020-05-14
US11100680B2 (en) 2021-08-24

Similar Documents

Publication Publication Date Title
JP7143833B2 (ja) Ar/vr/mrライドシェアリングアシスタント
EP3500944B1 (en) Adas horizon and vision supplemental v2x
US11574262B2 (en) Location accuracy using local device communications
US10410427B2 (en) Three dimensional graphical overlays for a three dimensional heads-up display unit of a vehicle
CN111436034B (zh) 固定交通工具微云的按需形成
JP7413811B2 (ja) Vehicle-to-Everything通信に基づく車両構成要素の修正
US11776399B2 (en) Driver feedback for efficiently traversing intersections
US10248196B2 (en) System for occlusion adjustment for in-vehicle augmented reality systems
JP2019192225A (ja) 協働知覚のためのマルチレベルハイブリッドv2x通信
US11113969B2 (en) Data-to-camera (D2C) based filters for improved object detection in images based on vehicle-to-everything communication
KR20180034268A (ko) V2v 센서 공유 방법에 기초한 동적 교통 안내
JP2020140704A (ja) 車両マイクロクラウドによる異常マッピング
JP2020075695A (ja) 自動化車両の向けのVehicle−to−Everythingデータ転送
US11605298B2 (en) Pedestrian navigation based on vehicular collaborative computing
CN112102647B (zh) 用于车辆微云的方法和系统
JP2019021306A (ja) 色盲のための拡張現実車両支援
CN111339445A (zh) 用于基于车辆的游览的系统及方法
CN111226270A (zh) 对由车载相机拍摄的图像数据的传送
CN111417065B (zh) 基于v2x消息变量匹配第一联网设备和第二联网设备
US11485377B2 (en) Vehicular cooperative perception for identifying a connected vehicle to aid a pedestrian
US20230339492A1 (en) Generating and depicting a graphic of a phantom vehicle
US11257363B2 (en) XR-based slot reservation system for connected vehicles traveling through intersections
JP2021014257A (ja) 車両のエンドツーエンド走行のためのフィードバックシステム
JP2019008350A (ja) 地図データ構造、送信装置、及び、運転支援装置
JP2005276064A (ja) 通信機及び通信システム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200309

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220118

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220118

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20220118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220329

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220526

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220816

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220829

R151 Written notification of patent or utility model registration

Ref document number: 7143833

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151