JP2022529201A - 意味論的拡張人工現実体験 - Google Patents

Abstract

一実施形態では、方法は、現実世界領域のデジタルマップにアクセスすることであって、デジタルマップが、現実世界領域内の１つまたは複数の３次元オブジェクトに対応する１つまたは複数の３次元メッシュを含む、現実世界領域のデジタルマップにアクセスすることと、デジタルマップ中のアンカーのための識別子と、アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリを受信することと、アンカーのための識別子と、アンカーに対する位置情報とに基づいて、デジタルマップ内の位置を決定することと、デジタルマップ内の決定された位置からの方向ベクトルの投影と交差するデジタルマップ中の３次元メッシュを決定することと、３次元メッシュに関連するメタデータを識別することと、メタデータを第２のコンピューティングデバイスに送ることとを含む。【選択図】図１

Description

本開示は、一般に、人工現実システムに関し、詳細には、意味論的拡張人工現実体験を提供することに関する。

本発明の実施形態は、人工現実システムを含むか、または人工現実システムに関連して実装され得る。人工現実は、ユーザへの提示の前に何らかの様式で調整された形式の現実であり、これは、たとえば、仮想現実（ＶＲ）、拡張現実（ＡＲ）、複合現実（ＭＲ）、ハイブリッド現実、あるいはそれらの何らかの組合せおよび／または派生物を含み得る。人工現実コンテンツは、完全に生成されたコンテンツ、またはキャプチャされたコンテンツ（たとえば、現実世界の写真）と組み合わせられた生成されたコンテンツを含み得る。人工現実コンテンツは、ビデオ、オーディオ、ハプティックフィードバック、またはそれらの何らかの組合せを含み得、それらのいずれも、単一のチャネルまたは複数のチャネルにおいて提示され得る（観察者に３次元効果をもたらすステレオビデオなど）。さらに、いくつかの実施形態では、人工現実は、たとえば、人工現実におけるコンテンツを作成するために使用される、および／または人工現実において使用される（たとえば、人工現実におけるアクティビティを実施する）アプリケーション、製品、アクセサリ、サービス、またはそれらの何らかの組合せに関連し得る。人工現実コンテンツを提供する人工現実システムは、ホストコンピュータシステムに接続されたヘッドマウントディスプレイ（ＨＭＤ）、スタンドアロンＨＭＤ、モバイルデバイスまたはコンピューティングシステム、あるいは、１人または複数の観察者に人工現実コンテンツを提供することが可能な任意の他のハードウェアプラットフォームを含む、様々なプラットフォーム上に実装され得る。

特定の実施形態では、人工現実システムは、軽量クライアントデバイスを通してユーザに永続的意味論的拡張現実体験を提供し得る。人工現実システムは、クライアントデバイスが現在の環境のデジタルマップを記憶することを必要としないことがある。代わりに、サーバは、スパース（ｓｐａｒｓｅ）３Ｄ点特徴レイヤと、高密度三角形メッシュレイヤと、意味論的レイヤとを含む現実世界環境の３次元（３Ｄ）表現を維持し得る。クライアントデバイスは、サーバとメッセージを交換することによって、再位置特定およびその周囲の意味論的情報を取得し得る。

サーバは、収集されたビデオシーケンスに基づいて、および任意の好適な３Ｄ再構築技法を使用して、現実世界領域のデジタルマップを生成し得る。デジタルマップは、領域内の３Ｄオブジェクトについての３Ｄメッシュと、テクスチャ情報と、意味論的情報とを含み得る。サーバはまた、ユーザによって作成された人工現実オブジェクトをデジタルマップに追加し得る。人工現実オブジェクトは、人工現実オブジェクトのそれぞれのロケーションに関連し得る。サーバは、クライアントデバイスからのクエリに応答して、記憶された情報を提供し得る。クエリは、意味論的クエリと人工現実クエリとを含み得る。

人工現実サービスがクライアントデバイス上で始動されたとき、クライアントデバイスは、サーバに現在ロケーションからキャプチャされた画像を送り得る。サーバは、クライアントデバイスからの受信された画像に基づいて、クライアントデバイスの現在ロケーションを決定し得る。サーバは、クライアントデバイスのロケーション情報をクライアントデバイスに返送し得る。ロケーション情報は、１つまたは複数の利用可能なアンカーのうちの１つからの、３Ｄ座標での相対ロケーション情報を含み得る。１つまたは複数の利用可能なアンカーのうちの１つは、クライアントデバイスの現在ロケーションに最も近いアンカーであり得る。クライアントデバイスは、クライアントデバイス自体のセンサーに基づいてクライアントデバイスの移動を計算することによって、アンカーに対するクライアントデバイス自体のロケーションを追跡することが可能であり得る。センサーは、ジャイロスコープまたは加速度計を備え得る。クライアントデバイスは、一定の間隔で、クライアントデバイスの現在ロケーション情報をサーバに報告し得る。

クライアントデバイスは、３Ｄ光線によって、サーバに意味論的クエリを送り得る。３Ｄ光線は、アンカーのための識別子と、アンカーに対するクライアントデバイスの座標を表す３つの数と、クライアントデバイスの現在ロケーションから発生したベクトルを表す３つの数とによって表され得る。意味論的クエリを受信すると、サーバは、光線と交差するデジタルマップ中の３Ｄメッシュを決定し、メッシュが属するオブジェクトを識別し得る。サーバは、交差点と識別されたオブジェクトに関連するメタデータとを含む、識別されたオブジェクトに関する情報で応答し得る。メタデータは、識別されたオブジェクトに関連する意味論的情報を含み得る。

クライアントデバイスは、現実オブジェクトに人工現実オブジェクトをアタッチし、イベントをサーバに報告し得る。サーバは、作成された人工現実オブジェクトをデジタルマップに記録し得る。クライアントデバイスが３Ｄ光線でクエリを送ったとき、サーバは、人工現実オブジェクトに関する記憶された情報に基づいて応答し得る。したがって、任意のクライアントデバイスが、作成者が配置したロケーションにおける人工現実オブジェクトをレンダリングすることが可能であり得る。人工現実オブジェクトが物理的オブジェクトの後ろに配置されたとき、クライアントデバイスは、物理的オブジェクトによって見えなくなった人工現実オブジェクトの部分に応じて、人工現実オブジェクトを完全にまたは部分的に遮る必要がある。クライアントデバイスは、シーン中のいくつかのグリッドに光線を送ることによって、人工現実オブジェクトのどの部分が物理的オブジェクトの後ろにあるかを決定し得る。精度を改善するために、クライアントデバイスは、物理的オブジェクトが人工現実オブジェクトを見えなくするグリッド内のサブグリッドに光線を送り得る。

特定の実施形態では、サーバが、現実世界領域のデジタルマップにアクセスし得る。デジタルマップは、現実世界領域内の１つまたは複数の３次元オブジェクトに対応する１つまたは複数の３次元メッシュを含み得る。サーバは、クライアントデバイスから、デジタルマップ中のアンカーのための識別子と、アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリを受信し得る。サーバは、アンカーのための識別子と、アンカーに対する位置情報とに基づいて、デジタルマップ内の位置を決定し得る。サーバは、デジタルマップ内の決定された位置からの方向ベクトルの投影と交差するデジタルマップ中の３次元メッシュを決定し得る。サーバは、３次元メッシュに関連するメタデータを識別し得る。サーバは、メタデータをクライアントデバイスに送り得る。

特定の実施形態では、クライアントデバイスが、現実世界領域のデジタルマップ中のアンカーに対する第２のコンピューティングデバイスの現在位置を決定し得る。クライアントデバイスは、アンカーのための識別子と、アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリをサーバに送り得る。方向ベクトルの方向は、第２のコンピューティングデバイスに関連するカメラによって現在キャプチャされている画像中の点によって決定され得る。画像は、第２のコンピューティングデバイスに関連するディスプレイ上に表示され得る。クライアントデバイスは、サーバから、クライアントデバイスの現在位置からの方向ベクトルの投影と交差するデジタルマップ中の３次元メッシュに関連するメタデータを含む応答を受信し得る。クライアントデバイスは、画像中の交差点から所定の距離内で、３次元メッシュに関連する受信されたメタデータに基づいて人工現実オブジェクトをレンダリングし得る。方向ベクトルは、交差点において３次元メッシュと交差し得る。

本明細書で開示される実施形態は例にすぎず、本開示の範囲はそれらに限定されない。特定の実施形態は、本明細書で開示される実施形態の構成要素、要素、特徴、機能、動作、またはステップのすべてを含むか、いくつかを含むか、またはいずれをも含まないことがある。本発明による実施形態は、特に、方法、記憶媒体、システムおよびコンピュータプログラム製品を対象とする添付の特許請求の範囲で開示され、１つの請求項カテゴリー、たとえば、方法において述べられた任意の特徴は、別の請求項カテゴリー、たとえば、システムにおいても請求され得る。添付の特許請求の範囲における従属関係または参照は、形式上の理由で選定されるにすぎない。ただし、前の請求項への意図的な参照（特に複数の従属関係）から生じる主題も請求され得、その結果、請求項とその特徴との任意の組合せが、開示され、添付の特許請求の範囲で選定された従属関係にかかわらず請求され得る。請求され得る主題は、添付の特許請求の範囲に記載の特徴の組合せだけでなく、特許請求の範囲における特徴の任意の他の組合せをも含み、特許請求の範囲において述べられた各特徴は、特許請求の範囲における任意の他の特徴または他の特徴の組合せと組み合わせられ得る。さらに、本明細書で説明または示される実施形態および特徴のいずれも、別個の請求項において、ならびに／あるいは、本明細書で説明もしくは示される任意の実施形態もしくは特徴との、または添付の特許請求の範囲の特徴のいずれかとの任意の組合せで請求され得る。

意味論的拡張人工現実体験を提供する人工現実システムの例示的なアーキテクチャを示す図である。 再位置特定のための例示的なシナリオを示す図である。 複数のアンカーをもつ例示的な３次元空間を示す図である。 意味論的情報がユーザに提示される例示的な状況を示す図である。 人工現実オブジェクトが、サーバからのレンダリング命令に基づいてレンダリングされる、例示的な状況を示す図である。 オブジェクトクエリを受信すると、３次元メッシュに関連するメタデータを識別するための例示的な方法を示す図である。 受信されたメタデータに基づいて人工現実オブジェクトをレンダリングするための例示的な方法を示す図である。 例示的なコンピュータシステムを示す図である。

図１は、意味論的拡張人工現実体験を提供する人工現実システム１００の例示的なアーキテクチャを示す。サーバ１１０は、再位置特定器１１１と、クライアント軌道１１３と、意味論的プロバイダ１１５と、人工現実オブジェクトマネージャ１１７とを含む複数の機能エンティティを備え得る。クライアントデバイス１２０は、再位置特定クエリ１２１と、位置更新１２３と、オブジェクトクエリ１２５と、人工現実クエリ１２７とを含む複数の機能エンティティを備え得る。クライアントデバイス１２０の再位置特定クエリ１２１は、サーバ１１０の再位置特定器１１１と対話し得る。クライアントデバイス１２０の位置更新１２３は、サーバ１１０のクライアント軌道１１３と対話し得る。クライアントデバイス１２０のオブジェクトクエリ１２５は、サーバ１１０の意味論的プロバイダ１１５および人工現実オブジェクトマネージャ１１７と対話し得る。クライアントデバイス１２０の人工現実クエリ１２７は、サーバの人工現実オブジェクトマネージャ１１７と対話し得る。サーバ１１１は、現実世界領域のデジタルマップ１４０にアクセスし得る。デジタルマップ１４０は、１つまたは複数の３次元再構築技法を使用して、画像の収集に基づいて生成され得る。人工現実システム１００は、人工現実管理モジュール１３０を備え得る。人工現実管理モジュール１３０は、視覚化１３１と人工現実オブジェクト操作１３３とを含む複数の機能エンティティを備え得る。視覚化１３１は、人工現実オブジェクトと、オブジェクトの意味論的情報と、クライアントデバイスとを、デジタルマップ１４０中で視覚的に提示し得る。視覚化１３１は、サーバ１１０のクライアント軌道１１３、意味論的プロバイダ１１５、および人工現実オブジェクトマネージャ１１７と対話し得る。人工現実管理モジュール１３０の人工現実オブジェクト操作１３３は、ユーザがデジタルマップ１４０中で人工現実オブジェクトを追加、修正、または削除することを可能にし得る。人工現実管理モジュール１３０の人工現実オブジェクト操作１３３は、サーバ１１０の人工現実オブジェクトマネージャ１１７と対話し得る。本開示は、人工現実システム１００の特定のアーキテクチャについて説明するが、本開示は、人工現実システム１００の任意の好適なアーキテクチャを企図する。

特定の実施形態では、サーバ１１０は、現実世界領域のデジタルマップ１４０にアクセスし得る。デジタルマップ１４０は、現実世界領域内の１つまたは複数の３次元オブジェクトに対応する１つまたは複数の３次元メッシュを含み得る。デジタルマップ１４０は、３Ｄ点特徴レイヤ、または意味論的レイヤをさらに含み得る。特定の実施形態では、デジタルマップ１４０は、３次元再構築技法のうちの１つまたは複数を使用して、画像の収集に基づいて生成され得る。収集における各画像は、現実世界領域の一部分をキャプチャし得る。特定の実施形態では、サーバ１１０は、デジタルマップ１４０を生成し得る。特定の実施形態では、デジタルマップ１４０は、１つまたは複数の他のコンピューティングデバイスによって生成され得る。限定としてではなく一例として、屋内エリアについてのデジタルマップ１４０が、複数のビデオシーケンスに基づいて生成され得る。ビデオシーケンスは、屋内エリアの一部分をキャプチャする一連の画像を含み得る。１つまたは複数のコンピューティングデバイスは、３次元再構築技法のうちの１つまたは複数を使用して、デジタルマップ１４０を生成し得る。本開示は、特定の様式でデジタルマップを生成することについて説明するが、本開示は、任意の好適な様式でデジタルマップを生成することを企図する。

特定の実施形態では、クライアントデバイス１２０は、サーバ１１０とメッセージを交換することによって、現実世界領域中のクライアントデバイス１２０の再位置特定された位置を決定し得る。クライアントデバイス１２０は、再位置特定要求をサーバ１１０に送り得る。再位置特定要求は、クライアントデバイス１２０の現在位置からの画像を含み得る。図２は、再位置特定のための例示的なシナリオを示す。限定としてではなく一例として、図２に示されている、クライアントデバイス１２０に関連するユーザが、屋内エリアのデジタルマップ１４０が生成された、屋内エリアに入り得る。クライアントデバイス１２０は、モバイルフォン、ラップトップコンピュータ、タブレットｐｃ、ヘッドマウントディスプレイに接続されたコンピューティングデバイス、または任意の好適なコンピューティングデバイスであり得る。クライアントデバイス１２０は、カメラと、ディスプレイと、１つまたは複数のセンサーとを備え得る。人工現実システムのためのアプリケーションが、クライアントデバイス１２０上にインストールされ得る。クライアントデバイス１２０は、現在位置からのカメラを使用して画像２２５をキャプチャし得、再位置特定要求をサーバ１１０に送り得、再位置特定要求は、キャプチャされた画像２２５を含む。本開示は、特定の様式で再位置特定プロセスを始動することについて説明するが、本開示は、任意の好適な様式で再位置特定プロセスを始動することを企図する。

特定の実施形態では、サーバ１１０は、クライアントデバイス１２０から再位置特定要求を受信し得る。再位置特定要求は、領域内のクライアントデバイス１２０の現在位置からとられた画像２２５を含み得る。サーバ１１０は、受信された画像に基づいて、クライアントデバイス１２０の現在位置を計算し得る。サーバ１１０は、受信された画像２２５中のオブジェクトを識別し、デジタルマップ１４０中の識別されたオブジェクトの位置を決定し得る。デジタルマップ１４０中の識別されたオブジェクトの決定された位置に基づいて、サーバ１１０は、デジタルマップ１４０中のクライアントデバイス１２０の現在位置を決定し得る。より詳細には、サーバ１１０は、画像２２５をキャプチャしたカメラの現在位置を決定し得る。サーバ１１０は、クライアントデバイス１２０の計算された現在位置を含む応答をクライアントデバイス１２０に送り得る。クライアントデバイス１２０の現在位置は、デジタルマップ１４０中の１つまたは複数のアンカーのうちの第１のアンカーと、第１のアンカーに対するクライアントデバイス１２０の相対座標とによって表され得る。応答は、第１のアンカーのための識別子と、第１のアンカーに関連する座標とを含み得る。第１のアンカーは、領域中の１つまたは複数のアンカーのうちのクライアントデバイス１２０に最も近いアンカーであり得る。図３は、複数のアンカーをもつ例示的な３次元空間３００を示す。限定としてではなく一例として、図３に示されている、４つのアンカー３０５Ａ、３０５Ｂ、３０５Ｃ、および３０５Ｄが、３次元エリアに存在し得る。サーバ１１０は、再位置特定プロシージャに基づいて、クライアントデバイス１２０の現在位置が位置３１３にあると決定し得る。アンカー３０５Ｃは、そのエリアにおいて既存のアンカー３０５Ａ～３０５Ｄのうちの位置３１３に最も近いアンカーであるので、サーバ１２０は、アンカー３０５Ｃの識別子と、アンカー３０５Ｃに対する点３１３の相対座標とを含む応答を準備し得る。サーバ１２０は、準備された応答をクライアントデバイス１２０に送り得る。本開示は、特定の様式でアンカーに対するクライアントデバイスの現在位置を決定することについて説明するが、本開示は、任意の好適な様式でアンカーに対するクライアントデバイスの現在位置を決定することを企図する。

特定の実施形態では、クライアントデバイス１２０は、サーバ１１０から、クライアントデバイス１２０の再位置特定された位置を含む応答を受信し得る。再位置特定された位置は、デジタルマップ１４０中のアンカーと、アンカーに対するクライアントデバイス１２０の相対座標とによって表され得る。クライアントデバイス１２０は、クライアントデバイス１２０に関連する１つまたは複数のセンサーからのデータに基づいてクライアントデバイス１２０の移動を計算することによって、クライアントデバイス１２０の現在位置を算出し得る。１つまたは複数のセンサーは、ジャイロスコープまたは加速度計を備え得る。限定としてではなく一例として、前の例を続けると、クライアントデバイス１２０は、再位置特定プロセスに基づいて、位置３１３がクライアントデバイス１２０の現在位置であると決定する。クライアントデバイス１２０は、クライアントデバイス１２０に関連するジャイロスコープまたは加速度計からのデータに基づいて、クライアントデバイス１２０が移動をしたことを検出し得る。クライアントデバイスは、クライアントデバイス１２０に関連するジャイロスコープまたは加速度計から受信されたデータを処理することによって、新しい位置３１５を算出し得る。新しい位置３１５は、アンカー３０５Ｃと、アンカー３０５Ｃに対する位置３１５の相対座標とによって表され得る。クライアントデバイス１２０は、クライアントデバイス１２０の現在位置を報告するために、位置更新１２３をサーバ１１０に送り得る。本開示は、特定の様式で、再位置特定された位置とクライアントデバイスに関連する１つまたは複数のセンサーからのデータとに基づいてクライアントデバイスの現在ロケーションを算出することについて説明するが、本開示は、任意の好適な様式で、再位置特定された位置とクライアントデバイスに関連する１つまたは複数のセンサーからのデータとに基づいてクライアントデバイスの現在ロケーションを算出することを企図する。

特定の実施形態では、クライアントデバイス１２０は、アンカーのための識別子と、アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリをサーバ１１０に送り得る。アンカーに対する位置情報は、クライアントデバイス１２０の現在位置の相対座標を含み得る。方向ベクトルの方向は、クライアントデバイス１２０に関連するカメラによって現在キャプチャされている画像中の点によって決定され得る。特定の実施形態では、点は、画像の中心点であり得る。特定の実施形態では、点は、クライアントデバイス１２０に関連するユーザによって選択された点であり得る。特定の実施形態では、点は、特定の目的のために、クライアントデバイス１２０によって選択された点であり得る。画像は、クライアントデバイス１２０に関連するディスプレイ上に表示され得る。本開示は、特定の様式でオブジェクトクエリをサーバに送ることについて説明するが、本開示は、任意の好適な様式でオブジェクトクエリをサーバに送ることを企図する。

特定の実施形態では、サーバ１１０は、クライアントデバイス１２０から、デジタルマップ１４０中のアンカーのための識別子と、アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリを受信し得る。アンカーに対する位置情報は、アンカーに対するクライアントデバイス１２０の現在位置についての相対座標を含み得る。方向ベクトルに関連する情報は、決定された位置からのベクトルの方向を表す座標を含み得る。サーバ１１０は、アンカーのための識別子と、アンカーに対する位置情報とに基づいて、デジタルマップ１４０内のクライアントデバイス１２０の位置を決定し得る。サーバ１１０は、デジタルマップ１４０内の決定された位置からの方向ベクトルの投影と交差するデジタルマップ１４０中の３次元メッシュを決定し得る。サーバ１１０は、決定された３次元メッシュが属するデジタルマップ１４０中のオブジェクトを識別し得る。特定の実施形態では、オブジェクトは物理的オブジェクトであり得る。特定の実施形態では、オブジェクトは人工現実オブジェクトであり得る。サーバ１１０は、３次元メッシュに関連するメタデータを識別し得る。メタデータは、識別されたオブジェクトに関連し得る。サーバ１１０は、メタデータをクライアントデバイス１２０に送り得る。本開示は、特定の様式で、オブジェクトクエリを受信すると、３次元メッシュに関連するメタデータを識別することについて説明するが、本開示は、任意の好適な様式で、オブジェクトクエリを受信すると、３次元メッシュに関連するメタデータを識別することを企図する。

特定の実施形態では、クライアントデバイス１２０は、サーバ１１０から、クライアントデバイス１２０の現在位置からの方向ベクトルの投影と交差するデジタルマップ１４０中の３次元メッシュに関連するメタデータを含む応答を受信し得る。クライアントデバイス１２０は、画像中の交差点から所定の距離内で、３次元メッシュに関連する受信されたメタデータに基づいて人工現実オブジェクトをレンダリングし得る。方向ベクトルは、交差点において３次元メッシュと交差し得る。特定の実施形態では、応答は、交差点に関連する情報を含み得る。特定の実施形態では、デジタルマップ１４０中の３次元メッシュは、メタデータに関連しないことがある。そのような場合、サーバ１１０からの応答は、メタデータを含まないことがある。クライアントデバイス１２０は、人工現実オブジェクトをレンダリングしないことがある。本開示は、特定の様式で、オブジェクトクエリに対する応答を受信すると、人工現実オブジェクトをレンダリングすることについて説明するが、本開示は、任意の好適な様式で、オブジェクトクエリに対する応答を受信すると、人工現実オブジェクトをレンダリングすることを企図する。

特定の実施形態では、応答時に受信されたメタデータは、識別されたオブジェクトに関連する意味論的情報を含み得る。識別されたオブジェクトは物理的オブジェクトであり得る。そのような場合、クライアントデバイス１２０は、意味論的情報を含むテキストボックスをレンダリングし得る。図４は、意味論的情報がユーザに提示される例示的な状況を示す。限定としてではなく一例として、図４に示されている、クライアントデバイス１２０は、クライアントデバイス１２０によってキャプチャされた画像中のソファーに向かう方向ベクトルをもつオブジェクトクエリを送った。クライアントデバイス１２０は、サーバ１１０から、「グレーソファー」である、ソファーに関連する意味論的情報を含む応答を受信し得る。クライアントデバイス１２０は、「グレーソファー」というテキストで、画像中のテキストボックス４２５をレンダリングし得る。テキストボックス４２５の位置は、応答において受信された交差点からのしきい値距離内にある。本開示は、特定の様式で、サーバから意味論的情報を受信すると、オブジェクトに関連する意味論的情報をレンダリングすることについて説明するが、本開示は、任意の好適な様式で、サーバから意味論的情報を受信すると、オブジェクトに関連する意味論的情報をレンダリングすることを企図する。

特定の実施形態では、３次元メッシュは人工現実オブジェクトに属し得る。そのような場合、３次元メッシュに関連するメタデータは、人工現実オブジェクトについてのレンダリング命令を含み得る。クライアントデバイス１２０は、人工現実オブジェクトについてのレンダリング命令に基づいて、人工現実オブジェクトをレンダリングし得る。図５は、人工現実オブジェクトが、サーバからのレンダリング命令に基づいてレンダリングされる、例示的な状況を示す。限定としてではなく一例として、図５に示されている、クライアントデバイス１２０は、クライアントデバイス１２０によってキャプチャされた画像中のソファーの後ろのテーブルの上方の空間に向かう方向ベクトルをもつオブジェクトクエリを送った。クライアントデバイスは、スマイリーフェイスアイコン５２５についてのレンダリング命令をもつ応答を受信し得る。クライアントデバイスは、応答において受信されたレンダリング命令に基づいて、スマイリーフェイスアイコン５２５をレンダリングし得る。本開示は、特定の様式で、サーバからレンダリング命令を受信すると、人工現実オブジェクトをレンダリングすることについて説明するが、本開示は、任意の好適な様式で、サーバからレンダリング命令を受信すると、人工現実オブジェクトをレンダリングすることを企図する。

特定の実施形態では、クライアントデバイス１２０は、人工現実オブジェクトクエリを送り得る。人工現実オブジェクトクエリは、クライアントデバイス１２０の現在ロケーションに関連する情報を含み得る。クライアントデバイス１２０は、クライアントデバイスの周りの利用可能な人工現実オブジェクトに関連するメタデータを含む人工現実オブジェクト応答を受信し得る。クライアントデバイス１２０は、メタデータ中のレンダリング命令に基づいて、人工現実オブジェクトをレンダリングし得る。本開示は、特定の人工現実オブジェクトクエリと人工現実オブジェクト応答とについて説明するが、本開示は、任意の好適な人工現実オブジェクトクエリと人工現実オブジェクト応答とを企図する。

特定の実施形態では、クライアントデバイス１２０は、人工現実オブジェクトが１つまたは複数の物理的オブジェクトの後ろに配置されるかどうかを決定する必要があり得る。クライアントデバイス１２０は、クライアントデバイス１２０の現在ロケーションから人工現実オブジェクトの中心への方向ベクトルをもつオブジェクトクエリを送り得る。オブジェクト応答を受信すると、クライアントデバイス１２０は、オブジェクト応答が物理的オブジェクトに関連するメタデータを含む場合、人工現実オブジェクトが物理的オブジェクトの後ろに配置されると決定し得る。クライアントデバイス１２０は、物理的オブジェクトの後ろの人工現実オブジェクトを遮り得る。本開示は、特定の様式で、人工現実オブジェクトが物理的オブジェクトの後ろに配置されるかどうかを決定することについて説明するが、本開示は、任意の好適な様式で、人工現実オブジェクトが物理的オブジェクトの後ろに配置されるかどうかを決定することを企図する。

特定の実施形態では、クライアントデバイス１２０は、人工現実オブジェクトが１つまたは複数の物理的オブジェクトの後ろに配置されるかどうかを決定する必要があり得る。クライアントデバイス１２０は、人工現実オブジェクトがレンダリングされる画像のエリアを複数のグリッドに分割し得る。クライアントデバイス１２０は、各グリッドについてのオブジェクトクエリをサーバ１１０に送り得る。クライアントデバイス１２０は、サーバ１１０から、各グリッドについて、グリッドに関連する応答を受信し得る。クライアントデバイス１２０は、各グリッドについて、グリッドに関連する応答が、物理的オブジェクトに関連するメタデータを含む場合、人工現実オブジェクトがグリッド中の１つまたは複数の物理的オブジェクトの後ろに配置されると決定し得る。クライアントデバイス１２０は、１つまたは複数の物理的オブジェクトの後ろに位置する人工現実オブジェクトの部分に基づいて、人工現実オブジェクトを遮り得る。精度を改善するために、クライアントデバイス１２０は、人工現実オブジェクトがグリッド中の１つまたは複数の物理的オブジェクトの後ろに配置されると決定された場合、グリッドを複数のサブグリッドに分割し、各サブグリッドについてのオブジェクトクエリをサーバ１１０に送り得る。本開示は、特定の様式で、人工現実オブジェクトが１つまたは複数の物理的オブジェクトの後ろに配置されるかどうかを決定することについて説明するが、本開示は、任意の好適な様式で、人工現実オブジェクトが１つまたは複数の物理的オブジェクトの後ろに配置されるかどうかを決定することを企図する。

特定の実施形態では、サーバ１１０は、クライアントデバイス１２０から、領域中の位置において人工現実オブジェクトを作成する要求を受信し得る。要求は、人工現実オブジェクトのタイプ、人工現実オブジェクトのための識別子、人工現実オブジェクトについてのレンダリング命令、人工現実オブジェクトに関連する意味論的情報、または位置についての座標を含み得る。サーバ１１０は、クライアントデバイス１２０が人工現実オブジェクトをデジタルマップ１４０に追加するのに十分な特権を有するかどうかを確認し得る。サーバ１１０は、人工現実オブジェクトに関連する受信された情報をデジタルマップ１４０に追加し得る。限定としてではなく一例として、クライアントデバイス１２０に関連するユーザは、エリア中の特定のロケーションにおいてスマイリーアイコンを追加することを希望し得る。ユーザは、クライアントデバイス１２０上のユーザインターフェースにおける利用可能なアイコンのリストからアイコンを選択し得る。ユーザは、クライアントデバイス１２０に関連するディスプレイ上に表示された画像中のロケーションに、選択されたアイコンをドラッグアンドドロップし得る。クライアントデバイスは、ユーザがアイコンをドロップした位置において、選択されたスマイリーアイコンを作成する要求をサーバ１２０に送り得る。要求は、タイプと、識別子と、サイズと、レンダリング命令と、アイコンがレンダリングされるべきである位置情報とを含む選択されたアイコンに関連する情報を含み得る。要求は、アイコンの名前、またはユーザがアイコンに追加したテキストなど、スマイリーアイコンに関連する意味論的情報をさらに含み得る。本開示は、特定の様式で、人工現実オブジェクトをデジタルマップに追加することについて説明するが、本開示は、任意の好適な様式で、人工現実オブジェクトをデジタルマップに追加することを企図する。

特定の実施形態では、サーバ１１０は、クライアントデバイス１２０から、デジタルマップ１４０中で人工現実オブジェクトを修正する要求を受信し得る。要求は、デジタルマップ１４０中の人工現実オブジェクトの識別子と、人工現実オブジェクトを修正するようにとの命令とを含み得る。サーバ１１０は、クライアントデバイス１２０がデジタルマップ１４０中で人工現実オブジェクトを修正するのに十分な特権を有するかどうかを確認し得る。サーバ１１０は、受信された命令に基づいて、デジタルマップ１４０中で人工現実オブジェクトに関連する情報を修正し得る。本開示は、特定の様式で、デジタルマップ中で人工現実オブジェクトを修正することについて説明するが、本開示は、任意の好適な様式で、デジタルマップ中で人工現実オブジェクトを修正することを企図する。

特定の実施形態では、サーバ１１０は、クライアントデバイス１２０から、人工現実オブジェクトをデジタルマップ１４０から削除する要求を受信し得る。要求は、デジタルマップ１４０中の人工現実オブジェクトを一意に識別する人工現実オブジェクトの識別子を含み得る。サーバ１１０は、クライアントデバイス１２０が人工現実オブジェクトをデジタルマップ１４０から削除するのに十分な特権を有するかどうかを確認し得る。サーバ１１０は、人工現実オブジェクトに関連する情報をデジタルマップ１４０から削除し得る。本開示は、特定の様式で、人工現実オブジェクトをデジタルマップから削除することについて説明するが、本開示は、任意の好適な様式で、人工現実オブジェクトをデジタルマップから削除することを企図する。

特定の実施形態では、サーバ１１０は、人工現実管理モジュール１３０に関連し得る。デジタルマップ１４０中の１つまたは複数の人工現実オブジェクトは、人工現実管理モジュール１３０のディスプレイ上で閲覧され得る。人工現実管理モジュール１３０の視覚化機能エンティティ１３１は、人工現実オブジェクト、人工現実オブジェクトまたは物理的オブジェクトについての意味論的情報、あるいはアクティブクライアントデバイスをユーザに提示し得る。１つまたは複数の人工現実オブジェクトは、人工現実管理モジュール１３０によって追加、修正、または削除され得る。人工現実管理モジュール１３０の人工現実オブジェクト操作機能エンティティ１３３は、ユーザ入力に基づいて、デジタルマップ１４０中で人工現実オブジェクトを追加、修正、または削除し得る。本開示は、特定の様式の人工現実管理モジュールの機能性について説明するが、本開示は、任意の好適な様式の人工現実管理モジュールの機能性を企図する。

図６は、オブジェクトクエリを受信すると、３次元メッシュに関連するメタデータを識別するための例示的な方法６００を示す。方法はステップ６１０において開始し得、サーバが現実世界領域のデジタルマップにアクセスし得る。デジタルマップは、現実世界領域内の１つまたは複数の３次元オブジェクトに対応する１つまたは複数の３次元メッシュを含み得る。ステップ６２０において、サーバは、クライアントデバイスから、デジタルマップ中のアンカーのための識別子と、アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリを受信し得る。ステップ６３０において、サーバは、アンカーのための識別子と、アンカーに対する位置情報とに基づいて、デジタルマップ内の位置を決定し得る。ステップ６４０において、サーバは、デジタルマップ内の決定された位置からの方向ベクトルの投影と交差するデジタルマップ中の３次元メッシュを決定し得る。ステップ６５０において、サーバは、３次元メッシュに関連するメタデータを識別し得る。ステップ６６０において、サーバは、メタデータを第２のコンピューティングデバイスに送り得る。特定の実施形態は、適切な場合、図６の方法の１つまたは複数のステップを繰り返し得る。本開示は、図６の方法の特定のステップを、特定の順序で行われるものとして説明し、示すが、本開示は、図６の方法の任意の好適なステップが任意の好適な順序で行われることを企図する。その上、本開示は、図６の方法の特定のステップを含む、オブジェクトクエリを受信すると、３次元メッシュに関連するメタデータを識別するための例示的な方法を説明し、示すが、本開示は、適切な場合、図６の方法のステップのすべてを含むか、いくつかを含むか、またはいずれも含まないことがある、任意の好適なステップを含む、オブジェクトクエリを受信すると、３次元メッシュに関連するメタデータを識別するための任意の好適な方法を企図する。さらに、本開示は、図６の方法の特定のステップを行う特定の構成要素、デバイス、またはシステムを説明し、示すが、本開示は、図６の方法の任意の好適なステップを行う任意の好適な構成要素、デバイス、またはシステムの任意の好適な組合せを企図する。

図７は、受信されたメタデータに基づいて人工現実オブジェクトをレンダリングするための例示的な方法７００を示す。方法は、ステップ７１０において開始し得、クライアントデバイスが、現実世界領域のデジタルマップ中のアンカーに対する第２のコンピューティングデバイスの現在位置を決定し得る。ステップ７２０において、クライアントデバイスは、アンカーのための識別子と、アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリをサーバに送り得る。方向ベクトルの方向は、第２のコンピューティングデバイスに関連するカメラによって現在キャプチャされている画像中の点によって決定され得る。画像は、第２のコンピューティングデバイスに関連するディスプレイ上に表示され得る。ステップ７３０において、クライアントデバイスは、サーバから、クライアントデバイスの現在位置からの方向ベクトルの投影と交差するデジタルマップ中の３次元メッシュに関連するメタデータを含む応答を受信し得る。ステップ７４０において、クライアントデバイスは、画像中の交差点から所定の距離内で、３次元メッシュに関連する受信されたメタデータに基づいて人工現実オブジェクトをレンダリングし得る。方向ベクトルは、交差点において３次元メッシュと交差し得る。特定の実施形態は、適切な場合、図７の方法の１つまたは複数のステップを繰り返し得る。本開示は、図７の方法の特定のステップを、特定の順序で行われるものとして説明し、示すが、本開示は、図７の方法の任意の好適なステップが任意の好適な順序で行われることを企図する。その上、本開示は、図７の方法の特定のステップを含む、受信されたメタデータに基づいて、人工現実オブジェクトをレンダリングするための例示的な方法を説明し、示すが、本開示は、適切な場合、図７の方法のステップのすべてを含むか、いくつかを含むか、またはいずれも含まないことがある、任意の好適なステップを含む、受信されたメタデータに基づいて、人工現実オブジェクトをレンダリングするための任意の好適な方法を企図する。さらに、本開示は、図７の方法の特定のステップを行う特定の構成要素、デバイス、またはシステムを説明し、示すが、本開示は、図７の方法の任意の好適なステップを行う任意の好適な構成要素、デバイス、またはシステムの任意の好適な組合せを企図する。

システムおよび方法
図８は、例示的なコンピュータシステム８００を示す。特定の実施形態では、１つまたは複数のコンピュータシステム８００は、本明細書で説明または示される１つまたは複数の方法の１つまたは複数のステップを実施する。特定の実施形態では、１つまたは複数のコンピュータシステム８００は、本明細書で説明または示される機能性を提供する。特定の実施形態では、１つまたは複数のコンピュータシステム８００上で稼働しているソフトウェアは、本明細書で説明または示される１つまたは複数の方法の１つまたは複数のステップを実施するか、あるいは本明細書で説明または示される機能性を提供する。特定の実施形態は、１つまたは複数のコンピュータシステム８００の１つまたは複数の部分を含む。本明細書では、コンピュータシステムへの言及は、適切な場合、コンピューティングデバイスを包含し得、その逆も同様である。その上、コンピュータシステムへの言及は、適切な場合、１つまたは複数のコンピュータシステムを包含し得る。

本開示は、任意の好適な数のコンピュータシステム８００を企図する。本開示は、任意の好適な物理的形態をとるコンピュータシステム８００を企図する。限定としてではなく例として、コンピュータシステム８００は、組込み型コンピュータシステム、システムオンチップ（ＳＯＣ）、（たとえば、コンピュータオンモジュール（ＣＯＭ）またはシステムオンモジュール（ＳＯＭ）などの）シングルボードコンピュータシステム（ＳＢＣ）、デスクトップコンピュータシステム、ラップトップまたはノートブックコンピュータシステム、対話型キオスク、メインフレーム、コンピュータシステムのメッシュ、携帯電話、携帯情報端末（ＰＤＡ）、サーバ、タブレットコンピュータシステム、拡張／仮想現実デバイス、あるいはこれらのうちの２つまたはそれ以上の組合せであり得る。適切な場合、コンピュータシステム８００は、１つまたは複数のコンピュータシステム８００を含むか、単一または分散型であるか、複数のロケーションにわたるか、複数のマシンにわたるか、複数のデータセンターにわたるか、あるいは１つまたは複数のネットワーク中の１つまたは複数のクラウド構成要素を含み得るクラウド中に常駐し得る。適切な場合、１つまたは複数のコンピュータシステム８００は、実質的な空間的または時間的制限なしに、本明細書で説明または示される１つまたは複数の方法の１つまたは複数のステップを実施し得る。限定としてではなく一例として、１つまたは複数のコンピュータシステム８００は、リアルタイムでまたはバッチモードで、本明細書で説明または示される１つまたは複数の方法の１つまたは複数のステップを実施し得る。１つまたは複数のコンピュータシステム８００は、適切な場合、異なる時間においてまたは異なるロケーションにおいて、本明細書で説明または示される１つまたは複数の方法の１つまたは複数のステップを実施し得る。

特定の実施形態では、コンピュータシステム８００は、プロセッサ８０２と、メモリ８０４と、ストレージ８０６と、入出力（Ｉ／Ｏ）インターフェース８０８と、通信インターフェース８１０と、バス８１２とを含む。本開示は、特定の構成において特定の数の特定の構成要素を有する特定のコンピュータシステムを説明し、示すが、本開示は、任意の好適な構成において任意の好適な数の任意の好適な構成要素を有する任意の好適なコンピュータシステムを企図する。

特定の実施形態では、プロセッサ８０２は、コンピュータプログラムを作り上げる命令など、命令を実行するためのハードウェアを含む。限定としてではなく一例として、命令を実行するために、プロセッサ８０２は、内部レジスタ、内部キャッシュ、メモリ８０４、またはストレージ８０６から命令を取り出し（またはフェッチし）、それらの命令を復号および実行し、次いで、内部レジスタ、内部キャッシュ、メモリ８０４、またはストレージ８０６に１つまたは複数の結果を書き込み得る。特定の実施形態では、プロセッサ８０２は、データ、命令、またはアドレスのための１つまたは複数の内部キャッシュを含み得る。本開示は、適切な場合、任意の好適な数の任意の好適な内部キャッシュを含むプロセッサ８０２を企図する。限定としてではなく一例として、プロセッサ８０２は、１つまたは複数の命令キャッシュと、１つまたは複数のデータキャッシュと、１つまたは複数のトランスレーションルックアサイドバッファ（ＴＬＢ）とを含み得る。命令キャッシュ中の命令は、メモリ８０４またはストレージ８０６中の命令のコピーであり得、命令キャッシュは、プロセッサ８０２によるそれらの命令の取出しを高速化し得る。データキャッシュ中のデータは、プロセッサ８０２において実行する命令が動作する対象のメモリ８０４またはストレージ８０６中のデータのコピー、プロセッサ８０２において実行する後続の命令によるアクセスのための、またはメモリ８０４もしくはストレージ８０６に書き込むための、プロセッサ８０２において実行された前の命令の結果、あるいは他の好適なデータであり得る。データキャッシュは、プロセッサ８０２による読取りまたは書込み動作を高速化し得る。ＴＬＢは、プロセッサ８０２のための仮想アドレストランスレーション（ｖｉｒｔｕａｌ－ａｄｄｒｅｓｓ ｔｒａｎｓｌａｔｉｏｎ）を高速化し得る。特定の実施形態では、プロセッサ８０２は、データ、命令、またはアドレスのための１つまたは複数の内部レジスタを含み得る。本開示は、適切な場合、任意の好適な数の任意の好適な内部レジスタを含むプロセッサ８０２を企図する。適切な場合、プロセッサ８０２は、１つまたは複数の算術論理ユニット（ＡＬＵ）を含むか、マルチコアプロセッサであるか、または１つまたは複数のプロセッサ８０２を含み得る。本開示は、特定のプロセッサを説明し、示すが、本開示は任意の好適なプロセッサを企図する。

特定の実施形態では、メモリ８０４は、プロセッサ８０２が実行するための命令、またはプロセッサ８０２が動作する対象のデータを記憶するためのメインメモリを含む。限定としてではなく一例として、コンピュータシステム８００は、ストレージ８０６または（たとえば、別のコンピュータシステム８００などの）別のソースからメモリ８０４に命令をロードし得る。プロセッサ８０２は、次いで、メモリ８０４から内部レジスタまたは内部キャッシュに命令をロードし得る。命令を実行するために、プロセッサ８０２は、内部レジスタまたは内部キャッシュから命令を取り出し、それらの命令を復号し得る。命令の実行中またはその後に、プロセッサ８０２は、（中間結果または最終結果であり得る）１つまたは複数の結果を内部レジスタまたは内部キャッシュに書き込み得る。プロセッサ８０２は、次いで、メモリ８０４にそれらの結果のうちの１つまたは複数を書き込み得る。特定の実施形態では、プロセッサ８０２は、１つまたは複数の内部レジスタまたは内部キャッシュ中の、あるいは（ストレージ８０６または他の場所とは対照的な）メモリ８０４中の命令のみを実行し、１つまたは複数の内部レジスタまたは内部キャッシュ中の、あるいは（ストレージ８０６または他の場所とは対照的な）メモリ８０４中のデータのみに対して動作する。（アドレスバスおよびデータバスを各々含み得る）１つまたは複数のメモリバスが、プロセッサ８０２をメモリ８０４に結合し得る。バス８１２は、以下で説明されるように、１つまたは複数のメモリバスを含み得る。特定の実施形態では、１つまたは複数のメモリ管理ユニット（ＭＭＵ）が、プロセッサ８０２とメモリ８０４との間に常駐し、プロセッサ８０２によって要求されるメモリ８０４へのアクセスを容易にする。特定の実施形態では、メモリ８０４は、ランダムアクセスメモリ（ＲＡＭ）を含む。このＲＡＭは、適切な場合、揮発性メモリであり得る。適切な場合、このＲＡＭは、ダイナミックＲＡＭ（ＤＲＡＭ）またはスタティックＲＡＭ（ＳＲＡＭ）であり得る。その上、適切な場合、このＲＡＭは、シングルポートまたはマルチポートＲＡＭであり得る。本開示は、任意の好適なＲＡＭを企図する。メモリ８０４は、適切な場合、１つまたは複数のメモリ８０４を含み得る。本開示は、特定のメモリを説明し、示すが、本開示は任意の好適なメモリを企図する。

特定の実施形態では、ストレージ８０６は、データまたは命令のための大容量ストレージを含む。限定としてではなく一例として、ストレージ８０６は、ハードディスクドライブ（ＨＤＤ）、フロッピーディスクドライブ、フラッシュメモリ、光ディスク、光磁気ディスク、磁気テープ、またはユニバーサルシリアルバス（ＵＳＢ）ドライブ、あるいはこれらのうちの２つまたはそれ以上の組合せを含み得る。ストレージ８０６は、適切な場合、リムーバブルまたは非リムーバブル（または固定）媒体を含み得る。ストレージ８０６は、適切な場合、コンピュータシステム８００の内部または外部にあり得る。特定の実施形態では、ストレージ８０６は、不揮発性ソリッドステートメモリである。特定の実施形態では、ストレージ８０６は、読取り専用メモリ（ＲＯＭ）を含む。適切な場合、このＲＯＭは、マスクプログラムＲＯＭ、プログラマブルＲＯＭ（ＰＲＯＭ）、消去可能ＰＲＯＭ（ＥＰＲＯＭ）、電気的消去可能ＰＲＯＭ（ＥＥＰＲＯＭ）、電気的書き換え可能ＲＯＭ（ＥＡＲＯＭ）、またはフラッシュメモリ、あるいはこれらのうちの２つまたはそれ以上の組合せであり得る。本開示は、任意の好適な物理的形態をとる大容量ストレージ８０６を企図する。ストレージ８０６は、適切な場合、プロセッサ８０２とストレージ８０６との間の通信を容易にする１つまたは複数のストレージ制御ユニットを含み得る。適切な場合、ストレージ８０６は、１つまたは複数のストレージ８０６を含み得る。本開示は、特定のストレージを説明し、示すが、本開示は任意の好適なストレージを企図する。

特定の実施形態では、Ｉ／Ｏインターフェース８０８は、コンピュータシステム８００と１つまたは複数のＩ／Ｏデバイスとの間の通信のための１つまたは複数のインターフェースを提供する、ハードウェア、ソフトウェア、またはその両方を含む。コンピュータシステム８００は、適切な場合、これらのＩ／Ｏデバイスのうちの１つまたは複数を含み得る。これらのＩ／Ｏデバイスのうちの１つまたは複数は、人とコンピュータシステム８００との間の通信を可能にし得る。限定としてではなく一例として、Ｉ／Ｏデバイスは、キーボード、キーパッド、マイクロフォン、モニタ、マウス、プリンタ、スキャナ、スピーカー、スチールカメラ、スタイラス、タブレット、タッチスクリーン、トラックボール、ビデオカメラ、別の好適なＩ／Ｏデバイス、またはこれらのうちの２つまたはそれ以上の組合せを含み得る。Ｉ／Ｏデバイスは１つまたは複数のセンサーを含み得る。本開示は、任意の好適なＩ／Ｏデバイスと、それらのＩ／Ｏデバイスのための任意の好適なＩ／Ｏインターフェース８０８とを企図する。適切な場合、Ｉ／Ｏインターフェース８０８は、プロセッサ８０２がこれらのＩ／Ｏデバイスのうちの１つまたは複数を駆動することを可能にする１つまたは複数のデバイスまたはソフトウェアドライバを含み得る。Ｉ／Ｏインターフェース８０８は、適切な場合、１つまたは複数のＩ／Ｏインターフェース８０８を含み得る。本開示は、特定のＩ／Ｏインターフェースを説明し、示すが、本開示は任意の好適なＩ／Ｏインターフェースを企図する。

特定の実施形態では、通信インターフェース８１０は、コンピュータシステム８００と、１つまたは複数の他のコンピュータシステム８００または１つまたは複数のネットワークとの間の（たとえば、パケットベース通信などの）通信のための１つまたは複数のインターフェースを提供する、ハードウェア、ソフトウェア、またはその両方を含む。限定としてではなく一例として、通信インターフェース８１０は、イーサネットまたは他のワイヤベースネットワークと通信するためのネットワークインターフェースコントローラ（ＮＩＣ）またはネットワークアダプタ、あるいはＷＩ－ＦＩネットワークなどのワイヤレスネットワークと通信するためのワイヤレスＮＩＣ（ＷＮＩＣ）またはワイヤレスアダプタを含み得る。本開示は、任意の好適なネットワークと、そのネットワークのための任意の好適な通信インターフェース８１０とを企図する。限定としてではなく一例として、コンピュータシステム８００は、アドホックネットワーク、パーソナルエリアネットワーク（ＰＡＮ）、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、メトロポリタンエリアネットワーク（ＭＡＮ）、またはインターネットの１つまたは複数の部分、あるいはこれらのうちの２つまたはそれ以上の組合せと通信し得る。これらのネットワークのうちの１つまたは複数の１つまたは複数の部分は、ワイヤードまたはワイヤレスであり得る。一例として、コンピュータシステム８００は、（たとえば、ＢＬＵＥＴＯＯＴＨ ＷＰＡＮなどの）ワイヤレスＰＡＮ（ＷＰＡＮ）、ＷＩ－ＦＩネットワーク、ＷＩ－ＭＡＸネットワーク、（たとえば、モバイル通信用グローバルシステム（ＧＳＭ）ネットワークなどの）セルラー電話ネットワーク、または他の好適なワイヤレスネットワーク、あるいはこれらのうちの２つまたはそれ以上の組合せと通信し得る。コンピュータシステム８００は、適切な場合、これらのネットワークのいずれかのための任意の好適な通信インターフェース８１０を含み得る。通信インターフェース８１０は、適切な場合、１つまたは複数の通信インターフェース８１０を含み得る。本開示は、特定の通信インターフェースを説明し、示すが、本開示は任意の好適な通信インターフェースを企図する。

特定の実施形態では、バス８１２は、コンピュータシステム８００の構成要素を互いに結合する、ハードウェア、ソフトウェア、またはその両方を含む。限定としてではなく一例として、バス８１２は、アクセラレーテッドグラフィックスポート（ＡＧＰ）または他のグラフィックスバス、拡張業界標準アーキテクチャ（ＥＩＳＡ）バス、フロントサイドバス（ＦＳＢ）、ＨＹＰＥＲＴＲＡＮＳＰＯＲＴ（ＨＴ）相互接続、業界標準アーキテクチャ（ＩＳＡ）バス、ＩＮＦＩＮＩＢＡＮＤ相互接続、ローピンカウント（ＬＰＣ）バス、メモリバス、マイクロチャネルアーキテクチャ（ＭＣＡ）バス、周辺構成要素相互接続（ＰＣＩ）バス、ＰＣＩ－Ｅｘｐｒｅｓｓ（ＰＣＩｅ）バス、シリアルアドバンストテクノロジーアタッチメント（ＳＡＴＡ）バス、ビデオエレクトロニクス規格協会ローカル（ＶＬＢ）バス、または別の好適なバス、あるいはこれらのうちの２つまたはそれ以上の組合せを含み得る。バス８１２は、適切な場合、１つまたは複数のバス８１２を含み得る。本開示は、特定のバスを説明し、示すが、本開示は任意の好適なバスまたは相互接続を企図する。

本明細書では、１つまたは複数のコンピュータ可読非一時的記憶媒体は、適切な場合、（たとえば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）または特定用途向けＩＣ（ＡＳＩＣ）などの）１つまたは複数の半導体ベースまたは他の集積回路（ＩＣ）、ハードディスクドライブ（ＨＤＤ）、ハイブリッドハードドライブ（ＨＨＤ）、光ディスク、光ディスクドライブ（ＯＤＤ）、光磁気ディスク、光磁気ドライブ、フロッピーディスケット、フロッピーディスクドライブ（ＦＤＤ）、磁気テープ、ソリッドステートドライブ（ＳＳＤ）、ＲＡＭドライブ、セキュアデジタルカードまたはドライブ、任意の他の好適なコンピュータ可読非一時的記憶媒体、あるいはこれらのうちの２つまたはそれ以上の任意の好適な組合せを含み得る。コンピュータ可読非一時的記憶媒体は、適切な場合、揮発性、不揮発性、または揮発性と不揮発性との組合せであり得る。

本明細書では、「または」は、明確に別段に示されていない限り、またはコンテキストによって別段に示されていない限り、包括的であり、排他的ではない。したがって、本明細書では、「ＡまたはＢ」は、明確に別段に示されていない限り、またはコンテキストによって別段に示されていない限り、「Ａ、Ｂ、またはその両方」を意味する。その上、「および」は、明確に別段に示されていない限り、またはコンテキストによって別段に示されていない限り、共同と個別の両方である。したがって、本明細書では、「ＡおよびＢ」は、明確に別段に示されていない限り、またはコンテキストによって別段に示されていない限り、「共同でまたは個別に、ＡおよびＢ」を意味する。

本開示の範囲は、当業者が理解するであろう、本明細書で説明または示される例示的な実施形態に対するすべての変更、置換、変形、改変、および修正を包含する。本開示の範囲は、本明細書で説明または示される例示的な実施形態に限定されない。その上、本開示は、本明細書のそれぞれの実施形態を、特定の構成要素、要素、特徴、機能、動作、またはステップを含むものとして説明し、示すが、これらの実施形態のいずれも、当業者が理解するであろう、本明細書のどこかに説明または示される構成要素、要素、特徴、機能、動作、またはステップのうちのいずれかの任意の組合せまたは置換を含み得る。さらに、特定の機能を実施するように適応されるか、構成されるか、実施することが可能であるか、実施するように設定されるか、実施することが可能にされるか、実施するように動作可能であるか、または実施するように動作する、装置またはシステムあるいは装置またはシステムの構成要素に対する添付の特許請求の範囲における参照は、その装置、システム、または構成要素が、そのように適応されるか、構成されるか、可能であるか、設定されるか、可能にされるか、動作可能であるか、または動作する限り、その装置、システム、構成要素またはその特定の機能が、アクティブにされるか、オンにされるか、またはロック解除されるか否かにかかわらず、その装置、システム、構成要素を包含する。さらに、本開示は、特定の実施形態を、特定の利点を提供するものとして説明するかまたは示すが、特定の実施形態は、これらの利点のいずれをも提供しないか、いくつかを提供するか、またはすべてを提供し得る。

Claims (20)

1. 第１のコンピューティングデバイスによって、
   現実世界領域のデジタルマップにアクセスすることであって、前記デジタルマップが、前記現実世界領域内の１つまたは複数の３次元オブジェクトに対応する１つまたは複数の３次元メッシュを含む、現実世界領域のデジタルマップにアクセスすることと、
   第２のコンピューティングデバイスから、前記デジタルマップ中のアンカーのための識別子と、前記アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリを受信することと、
   前記アンカーのための前記識別子と、前記アンカーに対する前記位置情報とに基づいて、前記デジタルマップ内の位置を決定することと、
   前記デジタルマップ内の決定された前記位置からの前記第２のコンピューティングデバイスによって送られた方向ベクトルと交差する前記デジタルマップ中の３次元メッシュを決定することと、
   前記３次元メッシュに関連するメタデータを識別することと、
   前記メタデータを前記第２のコンピューティングデバイスに送ることと
   を含む、方法。
2. 前記デジタルマップが、３次元再構築技法のうちの１つまたは複数を使用して、画像の収集に基づいて生成されたものであり、前記収集における各画像が、前記現実世界領域の一部分をキャプチャする、請求項１に記載の方法。
3. 前記方向ベクトルに関連する前記情報が、前記決定された位置からの前記ベクトルの方向を表す座標を含む、請求項１に記載の方法。
4. 前記メタデータが、識別されたオブジェクトに関連する意味論的情報を含む、請求項１に記載の方法。
5. 前記３次元メッシュが人工現実オブジェクトに属する、請求項１に記載の方法。
6. 前記３次元メッシュに関連する前記メタデータが、前記人工現実オブジェクトについてのレンダリング命令を含む、請求項５に記載の方法。
7. 第２のコンピューティングデバイスから、前記領域中の位置において人工現実オブジェクトを作成する要求を受信することであって、前記要求が、前記人工現実オブジェクトのタイプ、前記人工現実オブジェクトのための識別子、前記人工現実オブジェクトについてのレンダリング命令、前記人工現実オブジェクトに関連する意味論的情報、または前記位置についての座標を含む、要求を受信することと、
   前記人工現実オブジェクトに関連する受信された情報を前記デジタルマップに追加することと
   をさらに含む、請求項１に記載の方法。
8. 第３のコンピューティングデバイスから、前記領域内の前記第３のコンピューティングデバイスの現在位置からとられた画像を含む再位置特定要求を受信することと、
   受信された前記画像に基づいて、前記第３のコンピューティングデバイスの前記現在位置を計算することと、
   前記第３のコンピューティングデバイスに、前記第３のコンピューティングデバイスの計算された前記現在位置を含む応答を送ることであって、前記第３のコンピューティングデバイスの前記現在位置が、前記デジタルマップ中の１つまたは複数のアンカーのうちの第１のアンカーと、前記第１のアンカーに対する前記第３のコンピューティングデバイスの相対座標とによって表される、応答を送ることと
   をさらに含む、請求項１に記載の方法。
9. 応答が、前記第１のアンカーのための識別子と、前記第１のアンカーに関連する座標とを含む、請求項８に記載の方法。
10. 前記第１のアンカーが、前記領域中の前記１つまたは複数のアンカーのうちの前記第３のコンピューティングデバイスに最も近いアンカーである、請求項８に記載の方法。
11. 前記第１のコンピューティングデバイスが人工現実管理モジュールに関連し、１つまたは複数の人工現実オブジェクトが、前記人工現実管理モジュールによって追加、修正、または削除される、請求項１に記載の方法。
12. 第２のコンピューティングデバイスによって、
    現実世界領域のデジタルマップ中のアンカーに対する前記第２のコンピューティングデバイスの現在位置を決定することと、
    第１のコンピューティングデバイスに、前記アンカーのための識別子と、前記アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリを送ることであって、前記方向ベクトルの方向が、前記第２のコンピューティングデバイスに関連するカメラによって現在キャプチャされている画像中の点によって決定され、前記画像が、前記第２のコンピューティングデバイスに関連するディスプレイ上に表示される、オブジェクトクエリを送ることと、
    前記第１のコンピューティングデバイスから、前記第２のコンピューティングデバイスの前記現在位置からの前記方向ベクトルの投影と交差する前記デジタルマップ中の３次元メッシュに関連するメタデータを含む応答を受信することと、
    前記画像中の交差点から所定の距離内で、前記３次元メッシュに関連する受信された前記メタデータに基づいて人工現実オブジェクトをレンダリングすることであって、前記方向ベクトルが、前記交差点において前記３次元メッシュと交差する、人工現実オブジェクトをレンダリングすることと
    を含む、方法。
13. 前記第２のコンピューティングデバイスの前記現在位置を決定することが、
    前記第１のコンピューティングデバイスとメッセージを交換することによって、前記領域中の前記第２のコンピューティングデバイスの再位置特定された位置を決定することであって、前記再位置特定された位置が、前記デジタルマップ中の前記アンカーと、前記アンカーに対する前記第２のコンピューティングデバイスの相対座標とによって表される、前記第２のコンピューティングデバイスの再位置特定された位置を決定することと、
    前記第２のコンピューティングデバイスによって、前記第２のコンピューティングデバイスに関連する１つまたは複数のセンサーからのデータに基づいて前記第２のコンピューティングデバイスの移動を計算することによって、前記第２のコンピューティングデバイスの前記現在位置を算出することと
    を含む、請求項１２に記載の方法。
14. 前記１つまたは複数のセンサーがジャイロスコープまたは加速度計を備える、請求項１３に記載の方法。
15. 前記３次元メッシュに関連する前記メタデータが、前記３次元メッシュが属するオブジェクトに関連する意味論的情報を含み、前記人工現実オブジェクトが、前記意味論的情報を含むテキストボックスである、請求項１２に記載の方法。
16. 前記３次元メッシュに関連する前記メタデータが、前記３次元メッシュが属する人工現実オブジェクトについてのレンダリング命令を含む、請求項１２に記載の方法。
17. 前記人工現実オブジェクトが１つまたは複数の物理的オブジェクトの後ろに配置されるかどうかを決定することと、
    前記１つまたは複数の物理的オブジェクトの後ろに位置する前記人工現実オブジェクトの部分に基づいて、前記人工現実オブジェクトを遮ることと
    をさらに含む、請求項１６に記載の方法。
18. 前記人工現実オブジェクトが前記１つまたは複数の物理的オブジェクトの後ろに配置されるかどうかを決定することは、
    前記人工現実オブジェクトがレンダリングされる前記画像のエリアを複数のグリッドに分割することと、
    前記第１のコンピューティングデバイスに、各グリッドについて、オブジェクトクエリを送ることと、
    前記第１のコンピューティングデバイスから、各グリッドについて、前記グリッドに関連する応答を受信することと、
    各グリッドについて、前記グリッドに関連する前記応答が、物理的オブジェクトに関連するメタデータを含む場合、前記人工現実オブジェクトが前記グリッド中の１つまたは複数の物理的オブジェクトの後ろに配置されると決定することと
    を含む、請求項１７に記載の方法。
19. 前記人工現実オブジェクトが前記グリッド中の１つまたは複数の物理的オブジェクトの後ろに配置されると決定された場合、グリッドが複数のサブグリッドに分割される、請求項１８に記載の方法。
20. １つまたは複数のプロセッサと、前記プロセッサによって実行可能な命令を含む、前記プロセッサに結合された非一時的メモリとを備えるシステムであって、前記プロセッサは、前記命令を実行したとき、
    現実世界領域のデジタルマップにアクセスすることであって、前記デジタルマップが、前記現実世界領域内の１つまたは複数の３次元オブジェクトに対応する１つまたは複数の３次元メッシュを含む、現実世界領域のデジタルマップにアクセスすることと、
    第２のコンピューティングデバイスから、前記デジタルマップ中のアンカーのための識別子と、前記アンカーに対する位置情報と、方向ベクトルに関連する情報とを含むオブジェクトクエリを受信することと、
    前記アンカーのための前記識別子と、前記アンカーに対する前記位置情報とに基づいて、前記デジタルマップ内の位置を決定することと、
    前記デジタルマップ内の決定された前記位置からの前記第２のコンピューティングデバイスによって送られた方向ベクトルと交差する前記デジタルマップ中の３次元メッシュを決定することと、
    前記３次元メッシュに関連するメタデータを識別することと、
    前記メタデータを前記第２のコンピューティングデバイスに送ることと
    を行うように動作可能である、システム。

Images