JP2024513635A - 仮想現実環境における複合現実オブジェクト - Google Patents

Abstract

一実施形態では、方法は、仮想ＶＲデバイスの１つまたは複数のディスプレイについて、現実世界環境のパススルービューを含む第１の出力画像を表示することを含む。本方法は、ＶＲ表示デバイスの１つまたは複数のカメラによって取り込まれた１つまたは複数の画像を使用して、現実世界環境内の現実世界のオブジェクトを識別することを含む。本方法は、現実世界のオブジェクトに対応する第１の寸法を示すユーザ入力を受信することを含む。本方法は、第１の寸法に基づいて、現実世界のオブジェクトに対応する第２の寸法および第３の寸法を自動的に決定することを含む。本方法は、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、ＶＲ環境の第２の出力画像をレンダリングすることを含む。ＶＲ環境は、現実世界のオブジェクトに対応するＭＲオブジェクトを含む。ＭＲオブジェクトは、決定された第１の寸法、第２の寸法、および第３の寸法によって定義される。
【選択図】図６

Description

本開示は、一般に、ネットワーク環境内のデータベースおよびファイル管理に関し、特に、仮想現実（ＶＲ）環境における複合現実（ＭＲ）オブジェクトとの対話に関する。

ＶＲ環境内でユーザを安全に保つための空間認識の従来の方法は、ユーザが移動するための安全な境界周囲の外側境界を表す境界壁を定義することをユーザに要求する。たとえば、ユーザは、部屋の床を境界として線を引くことができる。境界は、ユーザがＶＲ環境内で動き回るときに椅子や机などの現実世界のオブジェクトにぶつかるのを防ぐために引くことができる。ユーザが境界に近づくと、仮想壁が現れて、境界に近づいていることをユーザに警告することが可能であり、これは、ユーザの経路に椅子または机などの現実世界のオブジェクトがあることを示し得る。

特定の実施形態では、没入型仮想現実（ＶＲ）システム（たとえば、頭部装着型ＶＲゴーグル）のユーザは、現実世界環境のビューをＶＲシステムによって部分的にまたは完全に遮られ、したがってＶＲ環境に没入している間に現実世界のオブジェクトにぶつかったり現実世界のオブジェクトに当たったりする危険性がある。さらに、ＶＲ環境への没入は、現実世界環境におけるユーザの位置および／または向きに関してユーザを混乱させる可能性がある。すなわち、ユーザは、近傍の家具やその他のオブジェクトがある方向を忘れてしまうことがある。したがって、１つの技術的課題は、ユーザが没入型ＶＲ体験中に現実世界のオブジェクトと対話することを含み得る。ユーザを安全に保ち、ＶＲ環境内でユーザが自分自身を方向付けるのを支援する従来の方法は、ＶＲ体験中のユーザのための安全ゾーンを定義する仮想境界を引くことを含む。ユーザが仮想境界に近づくと、仮想境界壁が現れるかまたは起動し得る。これらの仮想境界壁は、格子状の外観を有し得る。これらの仮想境界壁は、ＶＲ環境の没入を破り、ＶＲ体験に没入している間に現実世界の空間の使用を妨げる可能性があり、ユーザのＶＲ体験を損なう可能性がある。ユーザが没入型ＶＲ体験をしている間に現実世界のオブジェクトと対話するという技術的課題に対処するために本明細書で開示される実施形態によって提示される１つの解決策は、ＶＲ環境内の現実世界環境のパススルービューを提供して、ＶＲ環境に組み込むことができる現実世界のオブジェクトを識別し、現実世界のオブジェクトに対応する複合現実（ＭＲ）オブジェクトをＶＲ環境でレンダリングすることであり得る。実施形態の技術的利点は、ＶＲ環境内にいる間にユーザが対話することが可能であるＭＲオブジェクトとして現実世界のオブジェクトを組み込むことを含み得る。限定ではなく、一例として、ユーザは、現実世界環境における現実世界の机を識別し、机の寸法を決定し、ＶＲ環境に没入している間にユーザが対話するための現実世界の机に対応するＭＲ机をレンダリングし得、ＭＲ机は、現実世界環境に対応し、現実世界の机の寸法によって定義され得る。これにより、ユーザは現実世界のオブジェクトをＶＲ環境に組み込んでもよく、したがって、ユーザがＶＲ環境に没入している間に安全に探索できる空間を拡大することが可能である。さらに、ユーザは、たとえば、使い慣れた現実世界の家具、壁、電子デバイス（たとえば、現実世界のタブレットコンピュータをＭＲタブレットコンピュータに変える）、文書（たとえば、現実世界のメモをＭＲメモに変える）、および他のオブジェクトをＶＲ環境に組み込むことによって、ＶＲ環境に没入している間に、現実世界環境における自分の姿勢（たとえば、位置および向き）を決定するのを助けるためにＭＲオブジェクトを使用することが可能である。本開示は、ＶＲ環境に没入している間にＭＲオブジェクトをレンダリングすることによって現実世界のオブジェクトと対話する方法を説明しているが、本開示は、任意の適切な方法で現実世界のオブジェクトをＶＲ環境に組み込むことを企図している。

特定の実施形態では、１つまたは複数のコンピューティングシステムは、仮想ＶＲデバイスの１つまたは複数のディスプレイについて、現実世界環境のパススルービューを含む第１の出力画像を表示し得る。１つまたは複数のコンピューティングシステムは、ＶＲ表示デバイスの１つまたは複数のカメラによって取り込まれた１つまたは複数の画像を使用して、現実世界環境内の現実世界のオブジェクトを識別し得る。１つまたは複数のコンピューティングシステムは、現実世界のオブジェクトに対応する第１の寸法を示すユーザ入力を受信し得る。１つまたは複数のコンピューティングシステムは、第１の寸法に基づいて、現実世界のオブジェクトに対応する第２の寸法および第３の寸法を自動的に決定し得る。次いで、１つまたは複数のコンピューティングシステムは、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、ＶＲ環境の第２の出力画像をレンダリングし得るＶＲ環境は、現実世界のオブジェクトに対応するＭＲオブジェクトを含み得るＭＲオブジェクトは、決定された第１の寸法、第２の寸法、および第３の寸法によって定義され得る。

ＶＲ環境においてＭＲオブジェクトと対話するために、特定の技術的課題が存在する。１つの技術的課題は、現実世界のオブジェクトをＶＲ環境に持ち込むことを含み得る。この課題に対処するために本明細書で開示される実施形態によって提示される解決策は、現実世界環境における現実世界のオブジェクトをＶＲ環境におけるＭＲオブジェクトとして適合させて統合することであり得る。別の技術的課題は、ユーザがＶＲ体験に没入している間に、現実世界環境および現実世界環境内の現実世界のオブジェクトに関する空間情報をユーザに伝達することを含み得る。この課題に対処するために本明細書で開示される実施形態によって提示される解決策は、ＶＲ環境の没入を大きく妨げることなく、ユーザが現実世界環境内のどこにあるかを確認できるように、現実世界環境内の現実世界のオブジェクトに対応するＶＲ環境内のＭＲオブジェクトをレンダリングすることであり得る。さらに、この課題に対処するために本明細書で開示される実施形態によって提示される解決策は、ＶＲ環境内の現実世界環境のパススルービューをレンダリングして、ユーザが現実世界のオブジェクトの存在を認識させられない場合にユーザに傷害を引き起こす可能性がある現実世界のオブジェクトをユーザが識別するのを助けることであり得る。

本明細書に開示される特定の実施形態は、１つまたは複数の技術的利点を提供し得る。実施形態の技術的利点は、ＶＲ環境に没入している間に、現実世界環境のパススルービューを介して現実世界環境の迅速な見通しを提供することを含み得る。実施形態の別の技術的利点は、ユーザがＶＲ環境と現実世界環境との間で迅速に切り替えることを可能にすることによって空間情報を提供することを含み得る。本明細書に開示された特定の実施形態は、上記の技術的利点のいずれも、一部または全部を提供しない可能性がある。本開示の図面、説明、および特許請求の範囲を考慮すると、１つまたは複数の他の技術的利点が当業者には容易に明らかになり得る。

第１の態様によれば、１つまたは複数のコンピューティングシステムによって、仮想現実（ＶＲ）表示デバイスの１つまたは複数のディスプレイについて、現実世界環境のパススルービューを含む第１の出力画像をレンダリングすることと、ＶＲ表示デバイスの１つまたは複数のディスプレイの１つまたは複数のカメラによって取り込まれた１つまたは複数の画像を使用して、現実世界環境内の現実世界のオブジェクトを識別することと、現実世界のオブジェクトに対応する第１の寸法を示す第１のユーザ入力を受信することと、第１の寸法に基づいて、現実世界のオブジェクトに対応する第２の寸法および第３の寸法を自動的に決定することと、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、ＶＲ環境の第２の出力画像をレンダリングすることであって、ＶＲ環境が、現実世界のオブジェクトに対応する複合現実（ＭＲ）オブジェクトを含み、ＭＲオブジェクトが、決定された第１の寸法、第２の寸法、および第３の寸法によって定義される、レンダリングすることと、を含む方法が提供される。

本方法は、ＶＲ表示デバイスの１つまたは複数のカメラによって取り込まれた現実世界環境の１つまたは複数の画像にアクセスすることと、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、アクセスされた画像に基づいて、ＶＲ環境の一部および現実世界環境のパススルービューの一部を含む第３の出力画像をレンダリングすることであって、パススルービューの一部が、ＶＲ環境内のＭＲオブジェクトの表面に位置する、レンダリングすることと、をさらに含み得る。

本方法は、ＭＲオブジェクトのパススルービューの一部を見るための選択を示す第２のユーザ入力を受信することであって、第３の出力画像が、ＭＲオブジェクトのパススルービューの一部を見るための選択を示す第２のユーザ入力の受信に応答してレンダリングされる、受信することをさらに含み得る。

本方法は、ＭＲオブジェクトが閾値期間にわたってＶＲ表示デバイスのユーザの視野の中心にあると判定することであって、第３の出力画像は、ＭＲオブジェクトが閾値期間にわたってユーザの視野の中心にあると判定したことに応答してレンダリングされる、判定することをさらに含み得る。

本方法は、ＶＲ表示デバイスのユーザが現実世界のオブジェクトの閾値距離内に近づいたか否かを判定することであって、第３の出力画像は、ユーザが現実世界のオブジェクトの閾値距離内に接近したとの判定に応答してレンダリングされる、判定することをさらに含み得る。

本方法は、ＭＲオブジェクトがＶＲ表示デバイスのユーザの視野内にあるか否かを判定することであって、第３の出力画像が、ＭＲオブジェクトがユーザの視野内にあると判定したことに応答してレンダリングされる、判定することをさらに含み得る。

本方法は、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、現実世界環境に対応する仮想境界をレンダリングすることをさらに含み得る。

本方法は、現実世界のオブジェクトに対応する第２の寸法および第３の寸法を自動的に決定することに応答して、識別された現実世界のオブジェクトを含むように仮想境界を拡張することをさらに含み得る。

本方法は、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、パーソナルユーザインターフェース（ＵＩ）をレンダリングすることであって、パーソナルＵＩはＶＲ表示デバイスのユーザに近接した仮想オブジェクトとしてレンダリングされ、パーソナルＵＩはユーザの動きに対応して移動し、パーソナルＵＩはＭＲオブジェクトに対して適合する１つまたは複数の属性を有する、レンダリングすることをさらに含み得る。

パーソナルＵＩの属性のうちの１つは、パーソナルＵＩのフォームファクタであって、パーソナルＵＩの第１のフォームファクタが、ＭＲオブジェクトに対するユーザの近接度に基づいてパーソナルＵＩの第２のフォームファクタに適合する、パーソナルＵＩのフォームファクタであってもよく、および／またはパーソナルＵＩのユーザ機能セットであって、パーソナルＵＩの第１のユーザ機能セットが、ＭＲオブジェクトに対するユーザの近接度に基づいてパーソナルＵＩの第２のユーザ機能セットに適合する、ユーザ機能セットであり得る。

現実世界のオブジェクトの第１の寸法を示すユーザ入力は、現実世界のオブジェクトのエッジを定義するＶＲ環境内のＶＲ表示デバイスのユーザによって作成された仮想線であり得る。

現実世界のオブジェクトの第１の寸法を示すユーザ入力は、現実世界のオブジェクトのエッジに対応する仮想線の端点を定義するＶＲ環境内のＶＲ表示デバイスのユーザによって作成された２つの仮想点であり得る。

現実世界のオブジェクトの第１の寸法を示すユーザ入力は、現実世界のオブジェクトの表面を定義するＶＲ環境内のＶＲ表示デバイスのユーザによって作成された単一の仮想点であり得る。

本開示の第２の態様によって、コンピュータによって実行されると、コンピュータに本開示の第１の態様の方法を実行させる命令を備えるコンピュータ可読媒体が提供される。

第３の態様によれば、第１の態様の方法を実行するように構成されたプロセッサを備えるシステムが提供される。

第４の態様によれば、プログラムがコンピュータによって実行されると、コンピュータに第１の態様の方法を実行させる命令を備えるコンピュータプログラム製品が提供される。

本明細書で開示される実施形態は例にすぎず、本開示の範囲はそれらに限定されない。特定の実施形態は、本明細書で開示される実施形態の構成要素、要素、特徴、機能、動作、またはステップのすべてを含むか、いくつかを含むか、またはいずれをも含まないことがある。本発明による実施形態は、特に、方法、記憶媒体、システムおよびコンピュータプログラム製品を対象とする添付の特許請求の範囲で開示され、１つの請求項カテゴリー、たとえば、方法において述べられた任意の特徴は、別の請求項カテゴリー、たとえば、システムにおいても請求され得る。添付の特許請求の範囲における従属関係または参照は、形式的理由で選定されるにすぎない。ただし、前の請求項への意図的な参照（特に複数の従属関係）から生じる主題も請求され得、その結果、請求項とその特徴との任意の組合せが、開示され、添付の特許請求の範囲で選定された従属関係にかかわらず請求され得る。請求され得る主題は、添付の特許請求の範囲に記載の特徴の組合せだけでなく、特許請求の範囲における特徴の任意の他の組合せをも含み、特許請求の範囲において述べられた各特徴は、特許請求の範囲における任意の他の特徴または他の特徴の組合せと組み合わせられ得る。さらに、本明細書で説明または示される実施形態および特徴のいずれも、別個の請求項において、ならびに／あるいは、本明細書で説明もしくは示される任意の実施形態もしくは特徴との、または添付の特許請求の範囲の特徴のいずれかとの任意の組合せで請求され得る。

特定の実施形態による、ユーザによって装着された例示的なＶＲシステムを示す。 特定の実施形態による、パススルー機能の例を示す。 ＶＲ環境におけるパーソナルＵＩの例示的なビューを示す。 ＶＲ表示デバイスを使用して現実世界のオブジェクトを識別する例示的なビューを示す。 現実世界のオブジェクトの第１の寸法を示す例示的なビューを示す。 現実世界のオブジェクトの第２の寸法および第３の寸法を決定する例示的なビューを示す。 コントローラを使用して現実世界環境における現実世界のオブジェクトの第１の寸法、第２の寸法、および第３の寸法を決定する例示的なビューを示す。 現実世界のオブジェクトに対応するＭＲオブジェクトを有するＶＲ環境の例示的なビューを示す。 現実世界のオブジェクトに対応するＭＲオブジェクトを有するＶＲ環境の例示的なビューを示す。 現実世界環境のパススルービューを有するＭＲオブジェクトの一部を有するＶＲ環境の例示的なビューを示す。 現実世界環境を示すように構成されたパーソナルＵＩのリアリティスライダの例示的なビューを示す。 ＶＲ環境を示すように構成されたパーソナルＵＩのリアリティスライダの例示的なビューを示す。 現実世界環境とＶＲ環境との間の遷移を示すように構成されたパーソナルＵＩのリアリティスライダの例示的なビューを示す。 ＭＲオブジェクトに近づくユーザの第三者ビューを示す。 ＭＲオブジェクトに近づくユーザのユーザ視点ビューを示す。 ＭＲオブジェクトにおけるユーザのユーザ視点ビューを示す。 ＶＲ環境においてＭＲオブジェクトと対話するための例示的な方法を示す。 ソーシャルネットワーキングシステムと関連付けられた例示的なネットワーク環境を示す。 例示的なコンピュータシステムを示す。

特定の実施形態では、没入型仮想現実（ＶＲ）システム（たとえば、頭部装着型ＶＲゴーグル）のユーザは、現実世界環境のビューをＶＲシステムによって部分的にまたは完全に遮られ、したがってＶＲ環境に没入している間に現実世界のオブジェクトにぶつかったり現実世界のオブジェクトに当たったりする危険性がある。さらに、ＶＲ環境への没入は、現実世界環境におけるユーザの位置および／または向きに関してユーザを混乱させる可能性がある。すなわち、ユーザは、近傍の家具やその他のオブジェクトがある方向を忘れてしまうことがある。したがって、１つの技術的課題は、ユーザが没入型ＶＲ体験中に現実世界のオブジェクトと対話することを含み得る。ユーザを安全に保ち、ＶＲ環境内でユーザが自分自身を方向付けるのを支援する従来の方法は、ＶＲ体験中のユーザのための安全ゾーンを定義する仮想境界を引くことを含む。ユーザが仮想境界に近づくと、仮想境界壁が現れるかまたは起動し得る。これらの仮想境界壁は、格子状の外観を有し得る。しかし、これらの仮想境界壁は、ＶＲ環境の没入を破り、ＶＲ体験に没入している間に現実世界の空間の使用を妨げる可能性があり、ユーザの体験を損なう可能性がある。ユーザが没入型ＶＲ体験をしている間に現実世界のオブジェクトと対話するという技術的課題に対処するために本明細書で開示される実施形態によって提示される１つの解決策は、ＶＲ環境内の現実世界環境のパススルービューを提供して、ＶＲ環境に組み込むことができる現実世界のオブジェクトを識別し、現実世界のオブジェクトに対応する複合現実（ＭＲ）オブジェクトをＶＲ環境でレンダリングすることであり得る。実施形態の技術的利点は、ＶＲ環境内にいる間にユーザが対話することが可能であるＭＲオブジェクトとして現実世界のオブジェクトを組み込むことを含み得る。限定ではなく、一例として、ユーザは、現実世界環境において現実世界の机を識別し、机の寸法を決定し、ＶＲ環境に没入している間にユーザが対話するための現実世界の机に対応するＭＲ机をレンダリングし得、ＭＲ机は、現実世界の机の寸法によって定義され得る。これにより、ユーザは現実世界のオブジェクトをＶＲ環境に組み込んでもよく、したがって、ユーザがＶＲ環境に没入している間に安全に探索できる空間を拡大することが可能である。さらに、ユーザは、たとえば、使い慣れた現実世界の家具、壁、電子デバイス（たとえば、現実世界のタブレットコンピュータをＭＲタブレットコンピュータに変える）、文書（たとえば、現実世界のメモをＭＲメモに変える）、および他のオブジェクトをＶＲ環境に組み込むことによって、ＶＲ環境に没入している間に、現実世界環境における自分の姿勢（たとえば、位置および向き）を決定するのを助けるためにＭＲオブジェクトを使用することが可能である。本開示は、ＶＲ環境に没入している間にＭＲオブジェクトをレンダリングすることによって現実世界のオブジェクトと対話する方法を説明しているが、本開示は、任意の適切な方法で現実世界のオブジェクトをＶＲ環境に組み込むことを企図している。

図１は、ユーザ１０２が装着する仮想現実システム１００の一例を示す。特定の実施形態では、仮想現実システム１００は、頭部装着型ＶＲ表示デバイス１３５、コントローラ１０６、および１つまたは複数のコンピューティングシステム１１０を備え得る。ＶＲ表示デバイス１３５は、ユーザの目に装着され、内部ディスプレイ（図示せず）を介して視覚コンテンツをユーザ１０２に提供し得る。ＶＲ表示デバイス１３５は、ユーザ１０２のそれぞれの目に１つずつ、２つの別個の内部ディスプレイを有してもよい（単一の表示デバイスも可能である）。図１に示すように、ＶＲ表示デバイス１３５は、ユーザの視野を完全にカバーすることが可能である。ＶＲ表示デバイス１３５は、ユーザ１０２への視覚情報を排他的に提供することにより、没入型人工現実体験を提供するという目的を達成する。しかしながら、この結果の１つは、ユーザの視界がＶＲ表示デバイス１３５によって遮られるため、ユーザ１０２が自分を取り囲む物理（現実世界）環境を見ることができない可能性があることである。したがって、本明細書に記載のパススルー機能は、ユーザの物理的な環境に関するリアルタイムの視覚情報をユーザに提供するために技術的に有利であり得る。

図２は、パススルー機能の一例を示す。ユーザ１０２は、ＶＲ表示デバイス１３５を装着しており、ＶＲ環境内に没入している可能性がある。現実世界のオブジェクト１４５は、ユーザ１０２を取り囲む物理環境内にあり得る。しかしながら、ＶＲ表示デバイス１３５がユーザ１０２の視界を遮るために、ユーザ１０２は現実世界のオブジェクト１４５を直接見ることができない場合がある。ＶＲ表示デバイス１３５を装着している間にユーザが物理的な環境を知覚するのを助けるために、パススルー機能は、たとえば、外向きカメラ１０５Ａ～Ｂなどの１つまたは複数のカメラ１０５を使用して、物理環境に関する情報を取り込む。その後、取り込まれた情報は、ユーザの視点に基づいてユーザ１０２に再投影されてもよい。ＶＲ表示デバイス１３５がユーザの右目用の右ディスプレイ１３６Ａおよびユーザの左目用の左ディスプレイ１３６Ｂを有する特定の実施形態では、仮想現実システム１００は、（１）ユーザの右目の視点に基づいて右ディスプレイ１３５Ａ用の物理環境の再投影ビュー１４５Ａ、および（２）ユーザの左目の視点に基づいて左ディスプレイ１３５Ｂ用の物理環境の再投影ビュー１４５Ｂを個別にレンダリングしてもよい。

再び図１を参照すると、ＶＲ表示デバイス１３５は、図１に示す２つの前向きカメラ１０５Ａおよび１０５Ｂなどの外向きカメラを有してもよい。２つの前向きカメラ１０５Ａ～Ｂのみが示されているが、ＶＲ表示デバイス１３５は、任意の方向に向いている任意の数のカメラ（たとえば、天井もしくは部屋の照明を取り込むための上向きカメラ、ユーザの顔および／もしくは体の一部を取り込むための下向きカメラ、ユーザの背後にあるものの一部を取り込むための後ろ向きカメラ、ならびに／または視線追跡の目的でユーザの視線を取り込むための内部カメラ）を有することが可能である。外向きカメラは、ユーザの周囲の物理環境を取り込むように構成されており、継続的にそうして（たとえば、ビデオとしての）一連のフレームを生成することが可能である。前に説明したように、前向きカメラ１０５Ａ～Ｂによって取り込まれた画像は、ＶＲ表示デバイス１３５を介してユーザ１０２に対して直接表示されることが可能であるが、そうしても、カメラ１０５Ａ～Ｂが物理的にユーザの目と全く同じロケーションに位置することができないため、物理環境の正確なビューをユーザに提供しない可能性がある。したがって、本明細書において記載されているパススルー機能は、物理環境の３Ｄ表示を生成して、次いでユーザの目の視点からその３Ｄ表示に基づいて画像をレンダリングする再投影技術を使用し得る。

３Ｄ表示は、カメラ１０５Ａ～Ｂによって観察された物理オブジェクトの奥行き測定に基づいて生成されることが可能である。深度は様々なやり方で測定され得る。特定の実施形態においては、奥行きは、ステレオ画像に基づいて計算されることが可能である。たとえば、２つの前向きカメラ１０５Ａ～Ｂは、重なり合う視野を共有すること、および画像を同時に取り込むように構成されることが可能である。結果として、同じ物理オブジェクトが、両方のカメラ１０５Ａ～Ｂによって同時に取り込まれることが可能である。たとえば、オブジェクトの特定の特徴が、カメラ１０５Ａによって取り込まれた画像における１つのピクセルｐ_Ａに現れる場合があり、同じ特徴が、カメラ１０５Ｂによって取り込まれた画像における別のピクセルｐ_Ｂに現れる場合がある。それらの２つのピクセルが同じ特徴に対応するということを奥行き測定システムが知っている限り、仮想現実システム１００は、三角測量技術を使用して、観察された特徴の奥行きを計算することが可能である。たとえば、３Ｄ空間内のカメラ１０５Ａの位置、およびカメラ１０５Ａの視野に対するｐ_Ａのピクセルロケーションに基づいて、カメラ１０５Ａからピクセルｐ_Ａを通して線が投影されることが可能である。他方のカメラ１０５Ｂからピクセルｐ_Ｂを通して同様の線が投影されることが可能である。両方のピクセルが同じ物理的な特徴に対応することになるので、それらの２本の線は交差するはずである。それらの２本の交差する線と、２つのカメラ１０５Ａおよび１０５Ｂの間に引かれた想像線とが三角形を形成し、これを使用して、カメラ１０５Ａまたは１０５Ｂのいずれかからの観察された特徴の距離、または観察された特徴が位置している空間におけるポイントを計算することが可能である。

特定の実施形態では、環境内のＶＲ表示デバイス１３５の姿勢（たとえば、位置および向き）が必要とされ得る。たとえば、ユーザ１０２が仮想環境において動き回っている間にユーザ１０２のために適切な表示をレンダリングするためには、仮想現実システム１００は、いずれの瞬間においてもユーザ１０２の位置および向きを決定する必要があり得る。ＶＲ表示デバイスの姿勢に基づいて、仮想現実システム１００はさらに、カメラ１０５Ａおよび１０５Ｂのいずれか、またはユーザの目のいずれかの視点を決定することが可能である。特定の実施形態においては、ＶＲ表示デバイス１３５は、慣性測定ユニット（「ＩＭＵ」）を備えていることが可能である。ＩＭＵによって生成されたデータは、外向きカメラ１０５Ａ～Ｂによって取り込まれたステレオ画像とともに、仮想現実システム１００が、たとえば、ＳＬＡＭ（ｓｉｍｕｌｔａｎｅｏｕｓ ｌｏｃａｌｉｚａｔｉｏｎ ａｎｄ ｍａｐｐｉｎｇ）またはその他の適切な技術を使用してＶＲ表示デバイス１３５の姿勢を計算することを可能にする。

特定の実施形態では、仮想現実システム１００は、ユーザ１０２が入力を提供することを可能にする１つまたは複数のコントローラ１０６をさらに有し得る。コントローラ１０６は、無線接続または有線接続を介してＶＲ表示デバイス１３５または別個の１つまたは複数のコンピューティングシステム１１０と通信し得る。コントローラ１０６は、任意の数のボタンまたはその他の機械式の入力メカニズムを有することが可能である。加えて、コントローラ１０６は、ＩＭＵを有することが可能であり、それによって、コントローラ１０６の姿勢が追跡されることが可能である。コントローラ１０６はさらに、コントローラ上の所定のパターンに基づいて追跡されることが可能である。たとえば、コントローラ１０６は、所定のパターンを集合的に形成するいくつかの赤外線ＬＥＤまたはその他の既知の観察可能な特徴を有することが可能である。センサまたはカメラを使用して、仮想現実システム１００は、コントローラ上の所定のパターンの画像を取り込むことが可能であり得る。これらのパターンの観察された向きに基づいて、システムは、センサまたはカメラに対するコントローラの位置および向きを計算することが可能である。

仮想現実システム１００は、１つまたは複数のコンピューティングシステム１１０をさらに含み得る。１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５から物理的に分離したスタンドアロンユニットであってもよく、またはコンピュータシステム１１０はＶＲ表示デバイス１３５と統合されてもよい。１つまたは複数のコンピューティングシステム１１０が別個のユニットである実施形態では、１つまたは複数のコンピューティングシステム１１０は、無線リンクまたは有線リンクを介してＶＲ表示デバイス１３５に通信可能に結合されてもよい。１つまたは複数のコンピューティングシステム１１０は、デスクトップもしくはラップトップなど、高性能のデバイス、または携帯電話など、リソースの限られているデバイスであることが可能である。高性能のデバイスは、専用のＧＰＵと、大容量または一定の電源とを有する場合がある。その一方で、リソースの限られているデバイスは、ＧＰＵを有していない場合があり、限られたバッテリー容量を有する場合がある。したがって、仮想現実システム１００によって実際に使用され得るアルゴリズムは、その１つまたは複数のコンピューティングシステム１１０の能力に依存する。

１つまたは複数のコンピューティングシステム１１０が高性能デバイスである実施形態では、パススルー機能の一実施形態は、以下のように設計されてもよい。ＶＲ表示デバイス１３５の外向きカメラ１０５Ａ～Ｂを介して、周囲の物理環境の一連の画像を取り込み得る。しかしながら、カメラ１０５Ａ～Ｂによって取り込まれた情報は、カメラがユーザの目と空間上で合致することが可能ではない（たとえば、カメラおよびユーザの目は、互いからいくらかの距離だけ離れて位置しているので、異なる視点を有する）ため、ユーザの目が取り込み得るものと位置合わせされていない可能性がある。したがって、カメラが取り込んだものをユーザに対して単に表示するだけでは、ユーザが知覚するはずであるものの正確な表示とはならない場合がある。

単に取り込まれたものを表示する代わりに、パススルー機能は、外向きカメラ１０５Ａ～Ｂによって取り込まれた情報をユーザに再投影し得る。同時に取り込まれたステレオ画像の各ペアを使用して、観察された特徴の奥行きを推定することが可能である。上述したように、三角測量を使用して奥行きを測定するために、１つまたは複数のコンピューティングシステム１１０は、ステレオ画像間の対応関係を見つけ得る。たとえば、１つまたは複数のコンピューティングシステム１１０は、ペアのステレオ画像内のどの２つのピクセルが同じ観察された特徴に対応するかを判定してもよい。高性能の１つまたは複数のコンピューティングシステム１１０は、そのようなタスクのために最適化されたＧＰＵおよびオプティカルフロー技術を使用して対応関係の問題を解決し得る。そして三角測量技術を使用して奥行きを計算するために、対応関係情報が使用されることが可能である。観察された特徴の計算された奥行きに基づいて、１つまたは複数のコンピューティングシステム１１０は、それらの特徴が３Ｄ空間内のどこに位置しているかを決定することが可能である（なぜなら、１つまたは複数のコンピューティングシステム１１０は、カメラがその３Ｄ空間のどこにあるかも知っているからである）。結果は、密な３Ｄポイントクラウドによって表されることが可能であり、それに伴って、それぞれのポイントは、観察された特徴に対応する。次いで、密なポイントクラウドを使用して、環境におけるオブジェクトの３Ｄモデルを生成することが可能である。システムが表示用のシーンをレンダリングする際に、システムは、ユーザの目の視点から可視性テストを実行することが可能である。たとえば、システムは、ユーザのそれぞれの目に対応する観点から３Ｄ空間へと光線を投射することが可能である。このようにして、ユーザに対して表示されるレンダリングされるシーンは、外向きカメラ１０５Ａ～Ｂの視点からではなく、ユーザの目の視点から計算され得る。

しかしながら、上述したプロセスは、リソースの限られているコンピューティングデバイスにとって実行可能ではない場合がある（たとえば、携帯電話が、ＶＲ表示デバイスの主要な計算ユニットである場合がある）。たとえば、強力な計算リソースおよび豊富なエネルギー源を有するシステムとは異なり、携帯電話は、奥行き測定を実行して環境の正確な３Ｄモデルを生成する上で、ＧＰＵおよび計算コストのかさむアルゴリズム（たとえば、オプティカルフロー）に依存することが可能ではない場合がある。それゆえに、リソースの限られているデバイス上でパススルーを提供するためには、最適化されたプロセスが必要とされる。

特定の実施形態では、コンピューティングデバイスは、以下でさらに詳細に説明するように、（１）ＧＰＵおよびオプティカルフロー、または（２）ビデオエンコーダおよびモーションベクトルを使用した最適化された技術を使用して奥行き測定値を生成することができるか、または生成することができるか否かを実行時に動的に判定するように構成され得る。たとえば、デバイスがＧＰＵおよび十分なパワーバジェットを有する場合（たとえば、デバイスが電源に接続されている、満杯のバッテリーを有している、などの場合）には、デバイスは、自身のＧＰＵおよびオプティカルフローを使用して奥行き測定を実行することが可能である。しかしながら、デバイスがＧＰＵを有していないか、または厳しいパワーバジェットを有する場合には、デバイスは、奥行きを計算するための最適化された方法を選ぶことが可能である。

図３は、ＶＲ環境１２５におけるパーソナルユーザインターフェース（ＵＩ）１１５の例示的なビューを示す。特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５の１つまたは複数のディスプレイについて、パーソナルＵＩ １１５をレンダリングすることが可能である。パーソナルＵＩ １１５は、図１および図２に示すように、ＶＲ表示デバイス１３５を装着しているユーザ１０２のためのインターフェースとして現れる場合がある。パーソナルＵＩ １１５は、１つまたは複数のアプリケーション１２０、メニュー１２１、ユーザ情報１２２、およびユーザが選択するための他の特徴または属性を表示してもよい。パーソナルＵＩ １１５は、ＶＲ環境１２５と現実世界環境１３０（図示せず）の両方においてユーザの前に現れるフローティング仮想オブジェクトとして現れる場合がある。パーソナルＵＩ １１５は、ユーザが（パススルービューを介して）ＶＲ環境１２５と現実世界環境１３０の両方で機能を実行することを可能にし得る。パーソナルＵＩ １１５は、ユーザが現実世界のオブジェクトおよびＭＲオブジェクトと対話することを可能にし得る。たとえば、ユーザは、パーソナルＵＩ １１５を使用して現実世界のオブジェクト１４５を（たとえば、パススルービューを介して）識別することが可能である。ＶＲ環境１２５内では、パーソナルＵＩ １１５は、ＶＲ表示デバイス１３５のユーザに近接した仮想オブジェクトとしてレンダリングすることが可能である。パーソナルＵＩ １１５は、ユーザの移動に対応して移動してもよい。すなわち、パーソナルＵＩ １１５は、ユーザが移動しても、ユーザに近接したままであり得る（たとえば、パーソナルＵＩ １１５は、ユーザの視野に入ったままでもよい）。たとえば、ユーザが前進すると、パーソナルＵＩ １１５も前進することが可能である。ユーザが回転する場合、パーソナルＵＩ １１５はまた、ユーザに近接したままであるように回転してもよい。パーソナルＵＩは、フォームファクタおよびユーザ機能セット（以下でより詳細に説明する）など、ＭＲオブジェクト１６５に関して適合する１つまたは複数の属性を有することが可能である。

図４は、ＶＲ表示デバイス１３５を使用して現実世界のオブジェクト１４５を識別する例示的なビューを示す。現実世界のオブジェクト１４５は、たとえば、現実世界環境１３０のパススルービューでレンダリングされるように、現実世界環境１３０に現れる可能性がある。パススルービューは、ＶＲ表示デバイス１３５の１つまたは複数のカメラ１０５を使用して提供され得る。パーソナルＵＩ １１５は、現実世界のオブジェクト１４５を識別するための１つまたは複数のオプションをユーザに提供することが可能である。たとえば、限定ではなく、パーソナルＵＩ １１５は、ユーザに部屋スケールの空間を定義させることによってＶＲ環境の空間を編集するため、座席を定義するため、または机を定義するためのオプションを示す可能性がある。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５の１つまたは複数のディスプレイについて、現実世界環境１３０のパススルービューを含む第１の出力画像をレンダリングすることが可能である。第１の出力画像は、現実世界環境１３０のパススルービューを提供するためにＶＲ表示デバイス１３５の１つまたは複数のカメラ１０５を使用することによって現実世界環境１３０の第１の出力画像をレンダリングすることが可能である。限定ではなく、一例として、１つまたは複数のコンピューティングシステム１１０は、パススルービューを介して、ＶＲ表示デバイスを装着しているユーザに、１つまたは複数の現実世界のオブジェクト１４５を含み得る現実世界環境１３０を示す可能性がある。現実世界環境１３０のパススルービューは、１つまたは複数のカメラ１０５を使用して取り込む可能性がある。本開示は、現実世界環境１３０のパススルービューを含む出力画像をレンダリングすることを説明しているが、本開示は、任意の適切な方法で出力画像をレンダリングすることを企図している。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５の１つまたは複数のディスプレイの１つまたは複数のカメラ１０５によって取り込まれた１つまたは複数の画像を使用して、現実世界環境１３０内の現実世界のオブジェクト１４５を識別することが可能である。１つまたは複数のカメラ１０５によって取り込まれた１つまたは複数の画像は、１つまたは複数の現実世界のオブジェクト１４５（たとえば、カウチや机などの家具、その他の物品）を有する現実世界環境１３０（たとえば、ユーザのリビングルーム）のビュー（たとえば、パススルービュー）をユーザに提供することが可能である。限定ではなく、一例として、コンピューティングシステム１１０は、現実世界のオブジェクト１４５（カウチなど）を含む現実世界環境１３０のパススルービューを示す可能性がある。ユーザは、パーソナルＵＩ １１５を使用して、識別される現実世界のオブジェクト１４５のタイプを選択することが可能である。たとえば、ユーザは、パーソナルＵＩ １１５を使用して、部屋スケールの空間（現実世界環境１３０の部屋など）、座席空間（カウチや椅子など）、および机の空間（机やテーブルなど）を識別することが可能である。本開示は、特定の方法で現実世界のオブジェクトを識別することについて説明しているが、本開示は、任意の適切な方法で現実世界のオブジェクトを識別することを企図している。

図５は、現実世界のオブジェクト１４５の第１の寸法１５０を示す例示的なビューを示す。ユーザは、カウチの長さを定義する線を引くことによって、現実世界のオブジェクト１４５（たとえば、カウチ）の第１の寸法１５０に対応する線を引く可能性がある。ユーザは、コントローラ１０６を使用して線を引く可能性がある。１つまたは複数のコンピューティングシステム１１０はまた、第１の寸法１５０（たとえば、カウチの長さ）を自動的に決定してもよく、ユーザは第１の寸法１５０を確認または編集することができる。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、現実世界のオブジェクト１４５に対応する第１の寸法１５０を示す第１のユーザ入力を受信することが可能である。たとえば、１つまたは複数のコンピューティングシステム１１０は、ユーザによって（たとえば、ユーザがコントローラ１０６を使用することによって）測定された現実世界のオブジェクト１４５の第１の寸法１５０の測定値を受信することが可能である。寸法（たとえば、第１の寸法１５０）は、現実世界のオブジェクト１４５の高さ、幅、長さ、半径、円周、または他の形態の寸法測定値に対応することが可能である。現実世界のオブジェクト１４５に対応する第１の寸法１５０はまた、ＶＲ表示デバイス（たとえば、測定センサ、カメラセンサなど）の１つまたは複数のセンサを使用して自動的に決定されてもよい。現実世界のオブジェクト１４５に対応する第１の寸法１５０はまた、たとえば、１つまたは複数のセンサを使用して第１の寸法１５０を自動的に測定し、ユーザに測定値を確認または編集させることによって半自動的に決定されてもよい。現実世界のオブジェクト１４５の第１の寸法１５０を示すユーザ入力は、現実世界のオブジェクト１４５のエッジを定義するＶＲ環境内のＶＲ表示デバイス１３５のユーザによって作成された仮想線であり得る。限定ではなく、一例として、ユーザは、コントローラ１０６を使用して、カウチのフロントエッジなどの現実世界のオブジェクト１４５の第１の寸法１５０を測定することが可能である。現実世界のオブジェクトの第１の寸法を示すユーザ入力は、現実世界のオブジェクト１４５のエッジに対応する仮想線の端点を定義するＶＲ環境１２５内のＶＲ表示デバイス１３５のユーザによって作成された２つの仮想点であり得る。限定ではなく、一例として、ユーザは、第１の寸法の第１の端点（たとえば、カウチの左コーナフロントエッジ）を定義し得、ユーザは、第１の寸法の第２の端点（たとえば、カウチの右コーナフロントエッジ）を定義し得、カウチの寸法（たとえば、第１の寸法１５０）を定義する仮想線を第１の端点と第２の端点との間に自動的に引く可能性がある。すなわち、ユーザは、ユーザが座ることができる表面の第１の寸法１５０を定義するために、カウチの一端からカウチの他端までを測定してもよい。別の例として、第１の寸法１５０は、机の高さ、幅、長さ、または他の寸法測定値に対応してもよい。本開示は、特定の方法に対応する第１の寸法を示す第１のユーザ入力を受信することについて説明しているが、本開示は、任意の適切な方法で現実世界のオブジェクトに対応する第１の寸法を示す入力を受信することを企図している。

図６は、現実世界のオブジェクト１４５の第２の寸法１５５および第３の寸法１６０を決定する例示的なビューを示す。現実世界のオブジェクト１４５の第１の寸法１５０（たとえば、カウチの長さ）を受信した後、コンピューティングシステムは、ＶＲ表示デバイスの１つまたは複数のセンサを使用して、またはユーザに第２の寸法および第３の寸法を定義させることによって（たとえば、コントローラ１０６を使用して第２の寸法および第３の寸法を定義することによって）、現実世界のオブジェクト１４５の第２の寸法１５５および第３の寸法１６０（たとえば、カウチの高さおよび幅）を自動的に決定することが可能である。第１の寸法、第２の寸法および第３の寸法が決定されると、パーソナルＵＩ １１５は、決定された寸法を確認するための入力をユーザに提供することができ、または、第１の寸法、第２の寸法および／または第３の寸法を再度引くか、または再定義するための入力をユーザに提供することができる。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、第１の寸法１５０に基づいて、現実世界のオブジェクト１４５に対応する第２の寸法１５５および第３の寸法１６０を自動的に決定してもよい。１つまたは複数のコンピューティングシステムは、第１の寸法１５０に基づいて、第２の寸法１５５および第３の寸法１６０が何であり得るかを自動的に外挿してもよい。第２の寸法１５５および第３の寸法１６０は、ＶＲ表示デバイス１３５の１つまたは複数のセンサ（たとえば、カメラセンサ、奥行き知覚センサなど）を使用して、またはエッジ検出フィルタを使用して自動的に決定されてもよい。第２の寸法１５５および第３の寸法１６０は半自動的に決定されてもよい（たとえば、１つまたは複数のセンサが第２の寸法１５５および第３の寸法１６０を決定し、寸法はユーザによって確認される）。第２の寸法および第３の寸法を半自動的に決定することはまた、所定の第２の寸法および第３の寸法を定義することを伴い得、ユーザはその後、所定の第２の寸法および第３の寸法を実際の寸法に一致するように調整する。特定の実施形態では、ユーザは各寸法を定義する（たとえば、ユーザは、コントローラ１０６を使用して、第１の寸法、第２の寸法、および第３の寸法の各々を定義する）。第１の寸法１５０が現実世界のオブジェクト１４５の長さに対応する場合、第２の寸法は現実世界のオブジェクト１４５の幅に対応してもよく、第３の寸法は現実世界のオブジェクト１４５の高さに対応してもよい。限定ではなく、一例として、１つまたは複数のコンピューティングシステム１１０が現実世界のオブジェクト１４５に対応する第１の寸法１５０（たとえば、カウチの長さ）の指示を受信した場合、１つまたは複数のコンピューティングシステム１１０は、カウチの第２の寸法および第３の寸法（たとえば、高さおよび幅）を自動的に決定することが可能である。本開示は、特定の方法で第２の寸法および第３の寸法を決定することを記載しているが、本開示は、任意の適切な方法で第２の寸法および第３の寸法を決定することを企図している。

図７は、コントローラを使用して現実世界環境における現実世界のオブジェクトの第１の寸法、第２の寸法、および第３の寸法を決定する例示的なビューを示す。図８は、現実世界のオブジェクトに対応するＭＲオブジェクトを有するＶＲ環境の例示的なビューを示す。特定の実施形態では、現実世界のオブジェクト１４５の寸法（たとえば、第１の寸法１５０）を示すユーザ入力は、現実世界のオブジェクト１４５の表面を定義するＶＲ環境１２５内のＶＲ表示デバイス１３５のユーザによって作成された単一の仮想点である。仮想点は、コントローラ１０６を使用して作成することが可能である。コントローラ１０６は、現実世界のオブジェクト１４５の第１の寸法１５０、第２の寸法１５５、および第３の寸法１６０を決定するために使用され得る。限定ではなく、一例として、ユーザは、現実世界のオブジェクト１４５の表面上にコントローラ１０６を配置することができ（たとえば、ユーザは、現実世界の机の平面上にコントローラを配置することができ）、１つまたは複数のコンピューティングシステム１１０は、コントローラ１０６の位置に基づいて、現実世界のオブジェクト１４５の第１の寸法、第２の寸法、および第３の寸法を決定することができる。１つまたは複数のコンピューティングシステムは、現実世界のオブジェクト１４５上のコントローラのロケーションに基づいて寸法のうちの１つまたは複数を決定し、現実世界のオブジェクト１４５の寸法を自動的に外挿して、現実世界のオブジェクト１４５に対応し、現実世界のオブジェクト１４５の第１の寸法１５０、第２の寸法１５５、および第３の寸法１６０によって定義されるＭＲオブジェクト１６５を有するＶＲ環境１２５の第２の出力画像をレンダリングすることができる。

特定の実施形態では、ＶＲシステム１００は、潜在的なＭＲオブジェクト１６５を自動的に検出することが可能である。たとえば、現実世界のオブジェクト１４５は、ＭＲオブジェクト１６５として自動的に検出されレンダリングされてもよい。ＶＲシステム１００は、レンダリングされる現実世界のオブジェクトをＭＲオブジェクト１６５として自動的に識別することができ、ユーザは、現実世界のオブジェクト１４５がＭＲオブジェクト１６５としてレンダリングされるか否かを確認することができる。たとえば、潜在的なＭＲオブジェクト１６５は、現実世界のオブジェクト１４５の明瞭な（たとえば、不透明な、着色された、またはぼんやりした）輪郭としてレンダリングすることができ、ユーザは、ユーザがＭＲオブジェクト１６５としてレンダリングしたいと思う現実世界のオブジェクト１４５を指す、（コントローラ１０６を介して）クリックする、タッチする、または他の方法で示すことによって、現実世界のオブジェクト１４５をＭＲオブジェクト１６５としてレンダリングすることができる。

図９は、現実世界のオブジェクト１４５に対応するＭＲオブジェクト１６５を有するＶＲ環境１２５の例示的なビューを示す。ＶＲ環境は、現実世界のオブジェクト１４５（たとえば、図４～図６に示すような現実世界のオブジェクト１４５）と同じ寸法を有することが可能であるＭＲオブジェクト１６５などの１つまたは複数のオブジェクトを含み得る。ＶＲ環境１２５におけるＭＲオブジェクト１６５の姿勢（たとえば、位置および向き）は、現実世界環境１３０における現実世界のオブジェクト１４５の姿勢に対応することが可能である。すなわち、ユーザがＶＲ環境１２５および現実世界環境１３０において同じ姿勢で立っている場合、ＭＲオブジェクト１６５の姿勢は現実世界のオブジェクト１４５の姿勢に対応する。

１つの技術的課題は、現実世界のオブジェクト１４５をＶＲ環境１２５に持ち込むことを含み得る。この課題に対処するための本明細書に開示される１つの解決策は、現実世界環境１３０内の現実世界のオブジェクト１４５をＶＲ環境１２５内のＭＲオブジェクト１６５として適合させて統合することであり得る。特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５の１つまたは複数のディスプレイについて、ＶＲ環境１３０の第２の出力画像をレンダリングすることが可能である。ＶＲ環境１２５は、現実世界のオブジェクト１４５に対応する１つまたは複数のＭＲオブジェクト１６５を含み得る。ＭＲオブジェクト１６５は、決定された第１の寸法１５０、決定された第２の寸法１５５、および決定された第３の寸法１６０によって定義され得る（たとえば、ＭＲオブジェクト１６５は、図４～図６に示す現実世界のオブジェクト１４５と同じ寸法を有することが可能である）。すなわち、現実世界のオブジェクト１４５の決定された第１の寸法１５０、決定された第２の寸法１５５、および決定された第３の寸法１６０を使用して、１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５の１つまたは複数のディスプレイについて、現実世界のオブジェクト１４５の寸法および／または姿勢を使用して、かつそれらに基づいて構築されたＭＲオブジェクト１６５のレンダリングをレンダリングすることが可能である。限定ではなく、一例として、現実世界のオブジェクト１４５（たとえば、現実世界のカウチ）の寸法を決定した後に、１つまたは複数のコンピューティングシステム１１０は、（たとえば、現実世界のオブジェクト１４５の実質的に同じ形状およびサイズを有する）現実世界のオブジェクト１４５の寸法に対応するＶＲ環境１２５内のＭＲオブジェクト１６５（たとえば、ＭＲカウチ）をレンダリングすることが可能である。したがって、ユーザがＶＲ環境１２５に没入してＭＲカウチに座りに行くと、ユーザは現実世界環境１３０の現実世界のカウチに座っていることを知る。本開示は、特定の方法でＭＲオブジェクトを含む第２の出力画像をレンダリングすることを説明しているが、本開示は、任意の適切な方法で第２の出力画像をレンダリングすることを企図している。

図１０は、現実世界環境１３０のパススルービューを有するＭＲオブジェクト１６５の一部を有するＶＲ環境１２５の例示的なビューを示す。特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＭＲオブジェクト１６５のパススルービューの一部を見るための選択を示す第２のユーザ入力を受信することが可能である。第３の出力画像は、ＭＲオブジェクト１６５のパススルービューの一部を見るための選択を示す第２のユーザ入力の受信に応答してレンダリングされる可能性がある。すなわち、ＶＲ表示デバイス１３５は、レンダリングされたＭＲオブジェクト１６５の一部（レンダリングされたＭＲオブジェクト１６５の表面１７０など）を、現実世界環境１３０における対応する現実世界のオブジェクト１４５のパススルービューとして示す可能性がある。図１０に示すように、表面１７０は、決定された寸法のうちの２つまたはそれ以上によって定義されてもよい（たとえば、図１０の表面１７０は、第１の寸法１５０と、カウチの座面を定義する第２の寸法１５５とによって定義される）。限定ではなく、一例として、ユーザがＭＲオブジェクト１６５（たとえば、現実世界環境１３０における現実世界のカウチに基づくＭＲカウチ）に近づくと、１つまたは複数のコンピューティングシステム１１０は、現実世界環境１３０を示すパススルービューをレンダリングすることが可能である。１つまたは複数のコンピューティングシステム１１０は、現実世界のオブジェクト１４５の明瞭な（たとえば、不透明または着色された輪郭としてレンダリングされる）ビューをレンダリングすることが可能である。したがって、ユーザは、ユーザが座ることを計画し得るカウチの表面に障害物またはオブジェクトがないことを確認することが可能である。技術的利点は、ユーザが依然としてＶＲ環境１２５に没入している間に、現実世界環境１３０のパススルービューを通して現実世界環境１３０の迅速な見通しを提供することを含み得る。したがって、たとえば、ユーザがＶＲ体験に没入している間にカウチにペットが飛び乗った場合、ユーザは座る前にカウチがペットから離れていることを確認することができる。限定ではなく、別の例として、ユーザは、現実世界環境１３０における現実世界の机のパススルービューとしてＭＲ机の一部を見てもよく、ＶＲ体験に没入している間にユーザの手が倒れる可能性があるオブジェクトが机から離れていることを保証する。本開示は、特定の方法で第３の出力画像をレンダリングすることについて説明しているが、本開示は、任意の適切な方法で第３の出力画像をレンダリングすることを企図している。

技術的課題は、ユーザがＶＲ体験に没入している間に、現実世界環境１３０および現実世界環境１３０内の現実世界のオブジェクト１４５に関する空間情報をユーザに伝達することを含み得る。この課題に対処するために本明細書で開示される解決策は、ＶＲ環境１２５の没入を大きく妨げることなく、ユーザが現実世界環境１３０内のどこにあるかを確認できるように、現実世界環境１３０内の現実世界のオブジェクト１４５に対応するＶＲ環境１２５内のＭＲオブジェクト１６５をレンダリングすることであり得る。さらに、この課題に対処するために本明細書で開示される実施形態によって提示される解決策は、ＶＲ環境内の現実世界環境のパススルービューをレンダリングして、ユーザが現実世界のオブジェクトの存在を認識させられない場合にユーザに傷害を引き起こす可能性がある現実世界のオブジェクトをユーザが識別するのを助けることであり得る。特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＭＲオブジェクト１６５のパススルービューの一部を見るための選択を示す第２のユーザ入力を受信し、ＭＲオブジェクト１６５のパススルービューの一部を見るための選択を示す第２のユーザ入力の受信に応答して第３の出力画像をレンダリングすることが可能である。たとえば、ユーザは、ＭＲオブジェクト１６５のパススルービューを見るために選択してもよい（たとえば、パーソナルＵＩ １１５上のボタンを選択してもよい）。ユーザは、他の場所ではＶＲ環境１２５のレンダリングを維持しながら、現実世界環境１３０のパススルービューとしてカウチの表面または座席を見るように（たとえば、パーソナルＵＩ １１５上のボタンを介して）指示する可能性がある。したがって、ユーザは、現実世界のオブジェクト１４５に対応するＭＲオブジェクト１６５が障害物または他のオブジェクトから離れていることを保証することができる。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＭＲオブジェクト１６５が閾値期間にわたってＶＲ表示デバイス１３５のユーザの視野の中心にあると判定し、ＭＲオブジェクト１６５が閾値期間にわたってユーザの視野の中心にあると判定したことに応答して第３の出力画像をレンダリングすることが可能である。すなわち、ＭＲオブジェクト１６５が所定の期間にわたってユーザの視野の中心にあるか、または所定の期間にわたってユーザの視野の中心にある場合、ＭＲオブジェクト１６５の一部は、現実世界環境１３０における対応する現実世界のオブジェクト１４５のパススルービューとしてレンダリングされる可能性がある。たとえば、ユーザがＭＲカウチを所定の期間（たとえば、５秒）見ている場合、１つまたは複数のコンピューティングシステムは、カウチの表面１７０のパススルービューを自動的に表示して、ユーザがカウチを使用することによって損傷する可能性のあるオブジェクトがないことをユーザが確認できるようにし、またはカウチがオブジェクトから離れていることを確認する前に、ユーザがカウチに座った場合にユーザに傷害を引き起こす可能性のあるオブジェクトがないことをユーザが確認できるようにすることが可能である。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５のユーザが現実世界のオブジェクト１４５の閾値距離内に近づいたか否かを判定し、ユーザが現実世界のオブジェクト１４５の閾値距離内に近づいたとの判定に応答して第３の出力画像をレンダリングすることが可能である。すなわち、ユーザがＭＲオブジェクト１６５に近づくと、ＭＲオブジェクト１６５の一部は、現実世界環境１３０における対応する現実世界のオブジェクト１４５のパススルービューとしてレンダリングされる可能性がある。たとえば、ユーザがＭＲオブジェクト１６５（たとえば、カウチ）に近づくと、１つまたは複数のコンピューティングシステム１１０は、ユーザが現実世界のオブジェクト１４５の閾値距離内、たとえば、現実世界のオブジェクト１４５の１メートル以内にあると判定することが可能である。ユーザが閾値距離内にあると判定した後、１つまたは複数のコンピューティングシステム１１０は、ユーザがカウチを使用することによって損傷し得るオブジェクトがないことをユーザが確認することを可能にするために、またはカウチがオブジェクトから離れていることを確実にする前にユーザがカウチに座った場合にユーザに傷害を引き起こす可能性があるオブジェクトがないことを確認するために、カウチの表面１７０のパススルービューを自動的に示す可能性がある。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＭＲオブジェクト１６５がＶＲ表示デバイス１３５のユーザの視野内にあるか否かを判定し、ＭＲオブジェクト１６５がユーザの視野内にあると判定したことに応答して第３の出力画像をレンダリングすることが可能である。すなわち、ユーザがＭＲオブジェクト１６５を凝視する場合、ＭＲオブジェクト１６５の一部は、現実世界環境１３０における対応する現実世界のオブジェクト１４５のパススルービューとしてレンダリングされる可能性がある。パススルービューの一部は、ユーザが対話することが可能であるＭＲオブジェクト１６５のプレビューをユーザに迅速に提供するようにレンダリングすることが可能である。したがって、ユーザは、ＶＲ環境１３０内のオブジェクトがユーザが対話することが可能であるＭＲオブジェクト１６５であるか否か、およびＭＲオブジェクト１６５が安全に対話することが可能である（たとえば、ＭＲオブジェクト１６５から除去されていない場合にユーザに害を及ぼし得る他のオブジェクトがない）か否かを迅速に判定することが可能である。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＭＲオブジェクト１６５に対応する現実世界のオブジェクト１４５上にオブジェクトが新たに現れたか否かを判定することが可能である。たとえば、ユーザが現実世界のオブジェクト１４５（たとえば、カウチ）に基づいてＭＲオブジェクト１６５をレンダリングし、ユーザのペットが続いてカウチに飛び乗った場合、オブジェクト検出フィルタを使用して、現実世界のカウチ上にある新しいオブジェクト（たとえば、ペット）を識別することが可能である。次いで、ユーザは、現実世界のカウチ上にオブジェクトを示すためにパススルービューを使用して、または新しいオブジェクトを明瞭なオブジェクトとしてレンダリングすることによって（たとえば、オブジェクトの不透明または着色された輪郭）、新しいオブジェクトの存在について警告されることができる。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、ＶＲ表示デバイス１３５の１つまたは複数のディスプレイについて、現実世界環境１３０に対応する仮想境界をレンダリングすることが可能である。ＶＲ環境１２５は、現実世界環境１３０に対応する仮想境界を有することが可能である。仮想境界は、ＶＲ環境１２５に没入している間にユーザが探索するための安全領域のエッジをマークすることが可能である。ユーザが仮想境界に近づくと、仮想境界壁が現れるかまたは起動し得る。これらの仮想境界壁は、ＶＲ環境１２５にいる間の没入を妨げ、ユーザの体験を損なう可能性がある格子状の外観を有することが可能である。たとえば、部屋スケールの（ＶＲ体験中にユーザが部屋を歩き回ることができる）ＶＲ環境では、仮想境界は、ＶＲ表示デバイス１３５を装着しているユーザが回避したい現実世界のオブジェクト１４５（たとえば、カウチ、椅子、テーブル、壁、障害物など）に対応することが可能である。仮想境界は、ユーザによって（たとえば、コントローラ１０６を使用してユーザに仮想境界を手動で引かせることによって）定義されてもよく、自動的に決定されてもよく（たとえば、画像プロセッサは、安全な境界を決定し、境界壁を自動的に決定してもよく）、半自動的に決定されてもよい（たとえば、画像プロセッサは、安全な境界および境界壁を決定または提案してもよく、ユーザは、決定された境界壁を手動で拡張または編集してもよい）。

特定の実施形態では、１つまたは複数のコンピューティングシステム１１０は、現実世界のオブジェクト１４５に対応する第２の寸法１５５および第３の寸法１６０を自動的に決定することに応答して、識別された現実世界のオブジェクト１４５を含むように仮想境界を拡張することが可能である。すなわち、現実世界のオブジェクト１４５がユーザによって定義された元の仮想境界の外側にある場合、現実世界のオブジェクトの寸法を決定した後、１つまたは複数のコンピューティングシステム１１０は、現実世界のオブジェクト１４５を含むように仮想境界を拡張することが可能である。たとえば、ユーザが最初に仮想境界を現実世界のオブジェクト（たとえば、カウチ）のエッジに移動させた場合、カウチの寸法を決定した後、仮想境界はカウチを含むように拡張され得る。したがって、ユーザは、カウチに近づくかまたはカウチと対話するときに仮想境界壁を見ることがなく、ＶＲ体験の没入に対する混乱を低減する。

パーソナルＵＩの特徴または属性のうちの１つは、ＶＲ環境１２５と現実世界環境１３０との間の遷移のためのスイッチ、トグル、ボタン、またはスライダであり得る。図１１Ａは、現実世界環境１３０を示すように構成されたパーソナルＵＩ １１５のリアリティスライダ１４０の例示的なビューを示す。図１１Ｂは、ＶＲ環境１２５を示すように構成されたパーソナルＵＩ １１５のリアリティスライダ１４０の例示的なビューを示す。図１２は、現実世界環境１３０とＶＲ環境１２５との間の遷移を示すように構成されたパーソナルＵＩ １１５のリアリティスライダ１４０の例示的なビューを示す。リアリティスライダ１４０を使用して、現実世界環境１３０とＶＲ環境１２５とを切り替えることができる。たとえば、リアリティスライダ１４０が（図１１Ａと同様に）ずっと右にある場合、ＶＲ表示デバイス１３５は現実世界環境１３０のビュー（たとえば、パススルービュー）をレンダリングする。リアリティスライダ１４０が左端まである場合（図１１Ｂと同様に）、ＶＲ表示デバイス１３５はＶＲ環境１２５のビューをレンダリングする。リアリティスライダは、ＶＲ環境１２５と現実世界環境１３０とのブレンドを表示するように切り替えることができる。たとえば、リアリティスライダがリアリティスライダバーの中間のどこかにある場合（図１２と同様に）、ＶＲ表示デバイス１３５は、ＶＲ環境１２５と現実世界環境１３０との間のぼかし、または他の形式の遷移をレンダリングすることが可能である。すなわち、ＶＲ環境１２５は、現実世界環境１３０における不透明レンダリングとして到来してもよく、または現実世界環境１３０は、ＶＲ環境１２５における不透明レンダリングとして到来してもよい。実施形態の技術的利点は、ユーザがＶＲ環境１２５と現実世界環境１３０との間で迅速に切り替えることを可能にすることによって空間情報を提供することを含み得る。

図１３は、ＶＲ環境１２５内のＭＲオブジェクト１６５に近づくユーザ１０２の第三者ビューを示す。ユーザ１０２は、１つまたは複数のＭＲオブジェクト１６５（たとえば、ＭＲ机およびＭＲ仮想スクリーン）に近づく可能性がある。ユーザ１０２に近接しているのは、パーソナルＵＩ １１５であり得る。図３の説明において上述したように、パーソナルＵＩ １１５は、１つまたは複数の属性を有することが可能である。属性は、ＭＲオブジェクト１６５に対して適合することが可能である。たとえば、パーソナルＵＩ １１５の属性のうちの１つは、パーソナルＵＩ １１５のフォームファクタ（たとえば、パーソナルＵＩ １１５の外観またはレイアウト）であり得る。パーソナルＵＩ １１５のフォームファクタは、ユーザの環境またはユーザの要望およびニーズの変化に基づいて異なる外観またはレイアウトをとる可能性がある。パーソナルＵＩ １１５の第１のフォームファクタは、ＭＲオブジェクト１６５に対するユーザ１０２の近接度に基づいてパーソナルＵＩ １１５の第２のフォームファクタに適合することが可能である。パーソナルＵＩ １１５の属性の別の１つは、パーソナルＵＩのユーザ機能セットであり得る。パーソナルＵＩのユーザ機能セットは、パーソナルＵＩ １１５またはＭＲオブジェクト１６５に近づくユーザを適合させるためのユーザ選択に応答して変化または適合することが可能である。すなわち、パーソナルＵＩ １１５の第１のユーザ機能セットは、ＭＲオブジェクトに対するユーザの近接度に基づいてパーソナルＵＩの第２のユーザ機能セットになってもよい。たとえば、パーソナルＵＩの第１のフォームファクタは、ユーザ１０２の前にあり、ユーザに近接しているフローティング仮想オブジェクトであり得る。第１のユーザ機能セットは、たとえば、ビデオゲームアプリケーション１２０およびビデオストリーミングアプリケーション１２０などのエンターテイメントに特化した機能を含み得る第１のアプリケーションセットを含み得る。ユーザがＭＲオブジェクト１６５に近づくと（たとえば、ユーザがＭＲ机に近づくと）、パーソナルＵＩ １１５の属性はＭＲオブジェクト１６５に適合することが可能である。ＭＲオブジェクト１６５に対するユーザ１０２の近接度は、ユーザがＭＲオブジェクト１６５の閾値距離内に近づいたと判定することによって測定することが可能である。たとえば、閾値距離は、ＭＲオブジェクト１６５から１メートルであり得る。ユーザが閾値距離内に近づくにつれて、パーソナルＵＩ １１５の１つまたは複数の属性は、ＭＲオブジェクト１６５に対して適合することが可能である。

図１４は、ＭＲオブジェクト１６５に近づくユーザ１０２のユーザ視点ビューを示す。図１５は、ＭＲオブジェクト１６５におけるユーザ１０２のユーザ視点ビューを示す。ユーザ１０２がＭＲオブジェクト１６５（たとえば、ＭＲ机）に近づくにつれて、パーソナルＵＩ １１５はＭＲ机に適合することが可能である。パーソナルＵＩ １１５は、第１のフォームファクタから第２のフォームファクタに変更することによって適合してもよい。たとえば、パーソナルＵＩ（たとえば、図１３に見られるようなフローティング仮想オブジェクト）の第１のフォームファクタは、ＭＲオブジェクト１６５（現実世界環境１３０における現実世界のスクリーンに対応するＭＲスクリーンなど）またはＶＲオブジェクト（ＭＲ机上の仮想スクリーンなど）に「スナップ」または貼り付ける可能性がある。したがって、パーソナルＵＩ １１５は、机の上の職場モニタ設定を模倣する第２のフォームファクタを有することが可能である。さらに、第１のユーザ機能セット（たとえば、図１３に見られるようなゲームおよびストリーミングアプリケーション１２０）は、第２の機能セット（たとえば、図１４および図１５に見られるようなワークチャット、ビジネスネットワーク、およびインターネットブラウザアプリケーション１２０）に適合することが可能である。すなわち、機能セットは、ユーザ１０２がＭＲ机にいるときにユーザが「仕事」モードに入ることを検出することによってＭＲオブジェクトに適合することが可能である。したがって、機能セットは、エンターテイメント（たとえば、ゲーム、ストリーミングなどのアプリケーション）から仕事関連アプリケーション（ワークチャット、ビジネスネットワークなどのアプリケーション）に適合することができる。限定ではなく、別の例として、ユーザ１０２がＭＲカウチに近づくと、パーソナルＵＩ １１５の第２のフォームファクタは、エンターテイメント関連アプリケーション（ゲームまたはストリーミングアプリケーションなど）を対象とした第２の機能セットを有する映画館のスクリーンまたはワイドスクリーンテレビとして現れる可能性がある。

特定の実施形態では、パーソナルＵＩ １１５は、異なるユーザ機能間を遷移するためのスイッチ、トグル、ボタン、またはスライダを含み得る。たとえば、選択されると、フォームファクタを第１のフォームファクタから第２のフォームファクタに切り替えるパーソナルＵＩ １１５上のアイコンがあり得る。選択されると、第１のユーザ機能セット（仕事関連アプリケーションセットなど）から第２のユーザ機能セット（エンターテイメント関連アプリケーションセットなど）に切り替わるパーソナルＵＩ上のアイコンがあり得る。

図１６は、ＶＲ環境においてＭＲオブジェクトと対話するための例示的な方法１６００を示す。本方法は、ステップ１６１０で開始し得、１つまたは複数のコンピューティングシステムが、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、現実世界環境のパススルービューを含む第１の出力画像をレンダリングすることが可能である。ステップ１６２０において、本方法は、ＶＲ表示デバイスの１つまたは複数のディスプレイの１つまたは複数のカメラによって取り込まれた１つまたは複数の画像を使用して、現実世界環境内の現実世界のオブジェクトを識別することを含み得る。ステップ１６３０において、本方法は、現実世界のオブジェクトに対応する第１の寸法を示す第１のユーザ入力を受信することを含み得る。ステップ１６４０において、本方法は、第１の寸法に基づいて、現実世界のオブジェクトに対応する第２の寸法および第３の寸法を自動的に決定することを含み得る。ステップ１６５０において、本方法は、ＶＲ表示デバイスの１つまたは複数のディスプレイについて、ＶＲ環境の第２の出力画像をレンダリングすることを含み得る。ＶＲ環境は、現実世界のオブジェクトに対応するＭＲオブジェクトを含み得る。ＭＲオブジェクトは、決定された第１の寸法、第２の寸法、および第３の寸法によって定義され得る。特定の実施形態は、適切な場合、図１６の方法の１つまたは複数のステップを繰り返してもよい。本開示は、図１６の方法の特定のステップを特定の順序で発生するものとして説明および図示しているが、本開示は、任意の適切な順序で発生する図１６の方法の任意の適切なステップを企図している。その上、本開示は、図１６の方法の特定のステップを含むＶＲ環境においてＭＲオブジェクトと対話するための例示的な方法１６００を説明および図示するが、本開示は、図１６の方法のステップのすべて、一部、またはいずれも適切な場合には含まない任意の適切なステップを含むＶＲ環境においてＭＲオブジェクトと対話するための例示的な方法１６００を図示するための任意の適切な方法を企図する。さらに、本開示は、図１６の方法の特定のステップを実行する特定の構成要素、装置、またはシステムを説明および図示しているが、本開示は、図１６の方法の任意の適切なステップを実行する任意の適切な構成要素、デバイス、またはシステムの任意の適切な組合せを企図している。

図１７は、ＶＲまたはソーシャルネットワーキングシステムに関連付けられた例示的なネットワーク環境１７００を示している。ネットワーク環境１７００は、ネットワーク１７１０によって互いに接続されたクライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、およびサードパーティーシステム１７７０を含む。図１７は、クライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、サードパーティーシステム１７７０、およびネットワーク１７１０の特定の配置を示しているが、本開示は、クライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、サードパーティーシステム１７７０、およびネットワーク１７１０の任意の適切な配置を企図している。限定ではなく、一例として、クライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、およびサードパーティーシステム１７７０のうちの２つまたはそれ以上が、ネットワーク１７１０をバイパスして互いに直接接続され得る。別の例として、クライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、およびサードパーティーシステム１７７０のうちの２つまたはそれ以上が、全体的または部分的に、物理的または論理的に互いに同一場所に配置され得る。その上、図１７は、特定の数のクライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、サードパーティーシステム１７７０、およびネットワーク１７１０を示しているが、本開示は、任意の適切な数のクライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、サードパーティーシステム１７７０、およびネットワーク１７１０を企図している。限定ではなく、一例として、ネットワーク環境１７００は、複数のクライアントシステム１７３０、ＶＲまたはソーシャルネットワーキングシステム１７６０、サードパーティーシステム１７７０、およびネットワーク１７１０を含み得る。

本開示は、任意の適切なネットワーク１７１０を企図している。限定ではなく、一例として、ネットワーク１７１０の１つまたは複数の部分は、アドホックネットワーク、イントラネット、エクストラネット、仮想プライベートネットワーク（ＶＰＮ）、ローカルエリアネットワーク（ＬＡＮ）、無線ＬＡＮ（ＷＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、無線ＷＡＮ（ＷＷＡＮ）、メトロポリタンエリアネットワーク（ＭＡＮ）、インターネットの一部、公衆交換電話網（ＰＳＴＮ）の一部、携帯電話網、またはこれらのうちの２つまたはそれ以上の組合せを含み得る。ネットワーク１７１０は、１つまたは複数のネットワーク１７１０を含み得る。

リンク１７５０は、クライアントシステム１７３０、ソーシャルネットワーキングシステム１７６０、およびサードパーティーシステム１７７０を通信ネットワーク１７１０に、または互いに接続することが可能である。本開示は、任意の適切なリンク１７５０を企図している。特定の実施形態では、１つまたは複数のリンク１７５０は、１つまたは複数の有線（たとえば、デジタル加入者回線（ＤＳＬ）またはデータオーバーケーブルサービスインターフェース仕様（ＤＯＣＳＩＳ）など）、無線（たとえば、Ｗｉ－ＦｉまたはＷｉＭＡＸ（Ｗｏｒｌｄｗｉｄｅ Ｉｎｔｅｒｏｐｅｒａｂｉｌｉｔｙ ｆｏｒ Ｍｉｃｒｏｗａｖｅ Ａｃｃｅｓｓ）など）、または光（たとえば、同期光ネットワーク（ＳＯＮＥＴ）または同期デジタル階層（ＳＤＨ）など）リンクを含む。特定の実施形態では、１つまたは複数のリンク１７５０は各々、アドホックネットワーク、イントラネット、エクストラネット、ＶＰＮ、ＬＡＮ、ＷＬＡＮ、ＷＡＮ、ＷＷＡＮ、ＭＡＮ、インターネットの一部、ＰＳＴＮの一部、セルラー技術ベースのネットワーク、衛星通信技術ベースのネットワーク、別のリンク１７５０、または２つまたはそれ以上のそのようなリンク１７５０の組合せを含む。リンク１７５０は、ネットワーク環境１７００全体にわたって必ずしも同じである必要はない。１つまたは複数の第１のリンク１７５０は、１つまたは複数の第２のリンク１７５０とは１つまたは複数の点で異なり得る。

特定の実施形態では、クライアントシステム１７３０は、ハードウェア、ソフトウェア、もしくは組み込み論理構成要素、または２つまたはそれ以上のそのような構成要素の組合せを含み、クライアントシステム１７３０によって実装またはサポートされる適切な機能を実行することが可能である電子デバイスであり得る。限定ではなく、一例として、クライアントシステム１７３０は、デスクトップコンピュータ、ノートブックコンピュータもしくはラップトップコンピュータ、ネットブック、タブレットコンピュータ、電子書籍リーダ、ＧＰＳデバイス、カメラ、携帯情報端末（ＰＤＡ）、ハンドヘルド電子デバイス、携帯電話、スマートフォン、拡張／仮想現実デバイス、他の適切な電子デバイスなど、またはそれらの任意の適切な組合せといったコンピュータシステムを含み得る。本開示は、任意の適切なクライアントシステム１７３０を企図している。クライアントシステム１７３０は、クライアントシステム１７３０におけるネットワークユーザがネットワーク１７１０にアクセスすることを可能にし得る。クライアントシステム１７３０は、そのユーザが他のクライアントシステム１７３０における他のユーザと通信することを可能にし得る。

特定の実施形態では、クライアントシステム１７３０（たとえば、ＨＭＤ）は、本明細書に記載のパススルー機能を提供するためのパススルーエンジン１７３２を含み得、１つまたは複数のアドオン、プラグイン、または他の拡張機能を有することが可能である。クライアントシステム１７３０のユーザは、特定のサーバ（サーバ１７６２、またはサードパーティーシステム１７７０に関連付けられたサーバなど）に接続することが可能である。サーバは、要求を受け入れ、クライアントシステム１７３０と通信することが可能である。

特定の実施形態においては、ＶＲまたはソーシャルネットワーキングシステム１７６０は、オンライン仮想現実環境またはソーシャルネットワークをホストすることができるネットワークアドレス指定可能なコンピューティングシステムとすることが可能である。ＶＲまたはソーシャルネットワーキングシステム１７６０は、たとえば、ユーザプロファイルデータ、コンセプトプロファイルデータ、ソーシャルグラフ情報、またはオンラインソーシャルネットワークに関連する他の適切なデータなどのソーシャルネットワーキングデータを生成し、記憶し、受信し、送信することが可能である。ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、ネットワーク環境１７００の他の構成要素によって、直接またはネットワーク１７１０を介してアクセスされ得る。限定ではなく、一例として、クライアントシステム１７３０は、ウェブブラウザ、またはソーシャルネットワーキングシステムもしくはＶＲシステム１７６０に関連付けられたネイティブアプリケーション（たとえば、モバイルソーシャルネットワーキングアプリケーション、メッセージングアプリケーション、別の適切なアプリケーション、またはそれらの任意の組合せ）を使用して、直接的に、またはネットワーク１７１０を介して、ソーシャルネットワーキングシステムもしくはＶＲシステム１７６０にアクセスすることが可能である。特定の実施形態においては、ソーシャルネットワーキングまたはＶＲシステム１７６０は、１つまたは複数のサーバ１７６２を含み得る。各サーバ１７６２は、単一サーバ、あるいは複数のコンピュータまたは複数のデータセンターにまたがる分散型サーバであり得る。サーバ１７６２は、たとえば、限定ではないが、ウェブサーバ、ニュースサーバ、メールサーバ、メッセージサーバ、広告サーバ、ファイルサーバ、アプリケーションサーバ、交換サーバ、データベースサーバ、プロキシサーバ、本明細書に記載の機能またはプロセスを実行するのに適した別のサーバ、またはそれらの任意の組合せなど、様々なタイプのものであり得る。特定の実施形態では、各サーバ１７６２は、サーバ１７６２によって実装またはサポートされる適切な機能を実行するためのハードウェア、ソフトウェア、もしくは組み込み論理構成要素、または２つまたはそれ以上のそのような構成要素の組合せを含み得る。特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、１つまたは複数のデータストア１７６４を含み得る。データストア１７６４は、様々なタイプの情報を記憶するために使用され得る。特定の実施形態では、データストア１７６４に記憶された情報は、固有のデータ構造に従って編成され得る。特定の実施形態では、各データストア１７６４は、リレーショナルデータベース、列指向データベース、相関データベース、または他の適切なデータベースであり得る。本開示は、特定のタイプのデータベースを説明するかまたは示すが、本開示は任意の好適なタイプのデータベースを企図する。特定の実施形態は、クライアントシステム１７３０、ソーシャルネットワーキングもしくはＶＲシステム１７６０、またはサードパーティーシステム１７７０が、データストア１７６４に記憶されている情報を管理すること、取り出すこと、修正すること、付加すること、または削除することを可能にするインターフェースを提供することが可能である。

特定の実施形態においては、ソーシャルネットワーキングまたはＶＲシステム１７６０は、１つまたは複数のソーシャルグラフを１つまたは複数のデータストア１７６４に記憶することが可能である。特定の実施形態では、ソーシャルグラフは、（各々特定のユーザに対応する）複数のユーザノードまたは（各々特定の概念に対応する）複数の概念ノードを含み得る、複数のノードと、ノードをつなげる複数のエッジとを含み得る。ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、オンラインソーシャルネットワークのユーザに、他のユーザと通信し対話する能力を提供することが可能である。特定の実施形態においては、ユーザは、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０を介してオンラインソーシャルネットワークに参加し、次いで、自分がつながりたいと望むソーシャルネットワーキングシステムまたはＶＲシステム１７６０のいくつかの他のユーザへのつながり（たとえば、関係）を付加することが可能である。本明細書では、「友達」という用語は、ユーザがソーシャルネットワーキングシステムまたはＶＲシステム１７６０を介してつながり、関連付け、または関係を形成した相手であるソーシャルネットワーキングシステムまたはＶＲシステム１７６０の任意の他のユーザを指す可能性がある。

特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０によってサポートされる様々なタイプのアイテムまたはオブジェクトについてアクションを取る能力をユーザに提供することが可能である。限定ではなく、一例として、アイテムおよびオブジェクトは、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０のユーザが属することが可能であるグループもしくはソーシャルネットワーク、ユーザが興味を持つ可能性があるイベントもしくはカレンダー項目、ユーザが使用することが可能であるコンピュータベースのアプリケーション、ユーザがサービスを介してアイテムを売買することを可能にするトランザクション、ユーザが実行することが可能である広告との対話、または他の適切なアイテムもしくはオブジェクトを含み得る。ユーザは、ソーシャルネットワーキングシステムもしくはＶＲシステム１７６０において、またはソーシャルネットワーキングシステムもしくはＶＲシステム１７６０とは別個のものであり、ネットワーク１７１０を介してソーシャルネットワーキングシステムもしくはＶＲシステム１７６０に結合されたサードパーティーシステム１７７０の外部システムによって表すことができる任意のものと対話することが可能である。

特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、様々なエンティティをリンクすることが可能であり得る。限定ではなく、一例として、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、ユーザが互いに対話すること、ならびにサードパーティーシステム１７７０もしくは他のエンティティからのコンテンツを受信することを可能にし得、またはユーザがアプリケーションプログラミングインターフェース（ＡＰＩ）もしくは他の通信チャネルを通じてこれらのエンティティと対話することを可能にし得る。

特定の実施形態においては、サードパーティーシステム１７７０は、これらに限られるわけではないがＡＰＩを含む、１つまたは複数のタイプのサーバ、１つまたは複数のデータストア、１つまたは複数のインターフェース、１つまたは複数のウェブサービス、１つまたは複数のコンテンツソース、１つまたは複数のネットワーク、あるいはたとえばサーバが通信することが可能である任意の他の適切な構成要素を含み得る。サードパーティーシステム１７７０は、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０を運営しているエンティティとは異なるエンティティによって運営され得る。しかしながら、特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０およびサードパーティーシステム１７７０は、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０またはサードパーティーシステム１７７０のユーザにソーシャルネットワーキングサービスを提供するために互いに連携して動作することが可能である。この意味で、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、サードパーティーシステム１７７０などの他のシステムがソーシャルネットワーキングサービスおよび機能をインターネットにわたってユーザに提供するために使用することが可能であるプラットフォームまたはバックボーンを提供することが可能である。

特定の実施形態においては、サードパーティーシステム１７７０は、サードパーティーコンテンツオブジェクトプロバイダを含み得る。サードパーティーのコンテンツオブジェクトプロバイダは、クライアントシステム１７３０に通信され得るコンテンツオブジェクトの１つまたは複数のソースを含み得る。限定としてではなく一例として、コンテンツオブジェクトは、たとえば、映画の上映時間、映画のレビュー、レストランのレビュー、レストランのメニュー、製品情報およびレビュー、または他の好適な情報など、ユーザにとって興味のある物またはアクティビティに関する情報を含み得る。限定としてではなく別の例として、コンテンツオブジェクトは、クーポン、ディスカウントチケット、ギフト券、または他の好適なインセンティブオブジェクトなど、インセンティブコンテンツオブジェクトを含み得る。

特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０はまた、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０とのユーザの対話を高めることが可能であるユーザ生成コンテンツオブジェクトを含む。ユーザ生成コンテンツは、ユーザがソーシャルネットワーキングシステムまたはＶＲシステム１７６０に付加、アップロード、送信、または「投稿」することが可能である任意のものを含み得る。限定ではなく、一例として、ユーザは、クライアントシステム１７３０からソーシャルネットワーキングシステムまたはＶＲシステム１７６０へ投稿を通信する。投稿は、ステータス更新または他のテキストデータ、ロケーション情報、写真、ビデオ、リンク、音楽あるいは他の同様のデータまたはメディアなど、データを含み得る。コンテンツは、ニュースフィードまたはストリームなどの「通信チャネル」を介してサードパーティーによってソーシャルネットワーキングシステムまたはＶＲシステム１７６０に付加されることも可能である。

特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、様々なサーバ、サブシステム、プログラム、モジュール、ログ、およびデータストアを含み得る。特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、ウェブサーバ、アクションロガー、ＡＰＩ要求サーバ、関連性およびランキングエンジン、コンテンツオブジェクト分類器、通知コントローラ、アクションログ、サードパーティーコンテンツオブジェクト公開ログ、推測モジュール、承認／プライバシーサーバ、検索モジュール、広告ターゲティングモジュール、ユーザインターフェースモジュール、ユーザプロファイルストア、つながりストア、サードパーティーコンテンツストア、またはロケーションストアのうちの１つまたは複数を含み得る。ソーシャルネットワーキングシステムまたはＶＲシステム１７６０はまた、ネットワークインターフェース、セキュリティメカニズム、ロードバランサ、フェイルオーバーサーバ、管理およびネットワークオペレーションコンソール、他の適切な構成要素、またはそれらの任意の適切な組合せなどの適切な構成要素を含み得る。特定の実施形態においては、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０は、ユーザプロファイルを記憶するための１つまたは複数のユーザプロファイルストアを含み得る。ユーザプロファイルは、たとえば、経歴情報、人口統計学的情報、行動情報、ソーシャル情報、あるいは、職歴、学歴、趣味もしくは選好、興味、親和性、またはロケーションなど、他のタイプの記述的情報を含み得る。興味情報は、１つまたは複数のカテゴリーに関係する興味を含み得る。カテゴリーは一般的であるかまたは固有のものであり得る。限定としてではなく一例として、ユーザが、靴のブランドに関する記事に対して「いいね！」を表明した場合、カテゴリーは、ブランド、あるいは「靴」または「衣類」の一般的なカテゴリーであり得る。つながりストアは、ユーザに関するつながり情報を記憶するために使用され得る。つながり情報は、同様のまたは共通の職歴、グループメンバーシップ、趣味、学歴を有するか、あるいはいかなる形でも関係するか、または共通属性を共有する、ユーザを指示し得る。つながり情報は、（内部と外部の両方の）異なるユーザとコンテンツとの間のユーザ定義されたつながりをも含み得る。ウェブサーバは、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０を、ネットワーク１７１０を介して１つもしくは複数のクライアントシステム１７３０または１つもしくは複数のサードパーティーシステム１７７０にリンクするために使用することが可能である。ウェブサーバは、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０と１つまたは複数のクライアントシステム１７３０との間でメッセージを受信およびルーティングするためのメールサーバまたは他のメッセージング機能を含み得る。ＡＰＩ要求サーバは、サードパーティーシステム１７７０が、１つまたは複数のＡＰＩを呼び出すことによってソーシャルネットワーキングシステムまたはＶＲシステム１７６０からの情報にアクセスすることを可能にし得る。ソーシャルネットワーキングシステムまたはＶＲシステム１７６０上または外でのユーザのアクションに関するウェブサーバからの通信を受信するために、アクションロガーを使用することが可能である。アクションログと連携して、サードパーティーのコンテンツオブジェクトへのユーザ公開のサードパーティーのコンテンツオブジェクトログを維持することが可能である。通知コントローラは、コンテンツオブジェクトに関する情報をクライアントシステム１７３０に提供することが可能である。情報は、通知としてクライアントシステム１７３０にプッシュされてもよく、または情報は、クライアントシステム１７３０から受信した要求に応答してクライアントシステム１７３０からプルされてもよい。承認サーバは、ソーシャルネットワーキングシステムまたはＶＲシステム１７６０のユーザの１つまたは複数のプライバシー設定を実施するために使用することが可能である。ユーザのプライバシー設定は、ユーザと関連付けられた特定の情報がどのように共有され得るかを決定する。承認サーバは、ユーザが、たとえば適切なプライバシー設定を設定することなどによって、自分のアクションをソーシャルネットワーキングシステムもしくはＶＲシステム１７６０によって記録させ、または他のシステム（たとえば、サードパーティーシステム１７７０）と共有させることをオプトインまたはオプトアウトすることを可能にし得る。サードパーティーコンテンツオブジェクトストアは、サードパーティーシステム１７７０などのサードパーティーから受信したコンテンツオブジェクトを記憶するために使用され得る。ロケーションストアは、ユーザに関連付けられたクライアントシステム１７３０から受信したロケーション情報を記憶するために使用され得る。広告価格設定モジュールは、ソーシャル情報、現在時間、ロケーション情報、または他の好適な情報を組み合わせて、関連する広告を通知の形態でユーザに提供し得る。

図１８は、例示的なコンピュータシステム１８００を示す。特定の実施形態では、１つまたは複数のコンピュータシステム１８００は、本明細書に記載または図示された１つまたは複数の方法の１つまたは複数のステップを実行する。特定の実施形態では、１つまたは複数のコンピュータシステム１８００は、本明細書で説明または図示される機能を提供する。特定の実施形態では、１つまたは複数のコンピュータシステム１８００上で実行されるソフトウェアは、本明細書に記載または図示される１つまたは複数の方法の１つまたは複数のステップを実行するか、または本明細書に記載または図示される機能を提供する。特定の実施形態は、１つまたは複数のコンピュータシステム１８００の１つまたは複数の部分を含む。本明細書では、コンピュータシステムへの言及は、適切な場合、コンピューティングデバイスを包含し得、その逆も同様である。その上、コンピュータシステムへの言及は、適切な場合、１つまたは複数のコンピュータシステムを包含し得る。

本開示は、任意の適切な数のコンピュータシステム１８００を企図している。本開示は、任意の適切な物理的形態をとるコンピュータシステム１８００を企図している。限定ではなく、一例として、コンピュータシステム１８００は、組み込みコンピュータシステム、システムオンチップ（ＳＯＣ）、シングルボードコンピュータシステム（ＳＢＣ）（たとえば、コンピュータオンモジュール（ＣＯＭ）またはシステムオンモジュール（ＳＯＭ）など）、デスクトップコンピュータシステム、ラップトップもしくはノートブックコンピュータシステム、対話型キオスク、メインフレーム、コンピュータシステムのメッシュ、携帯電話、携帯情報端末（ＰＤＡ）、サーバ、タブレットコンピュータシステム、拡張／仮想現実デバイス、またはこれらのうちの２つまたはそれ以上の組合せであり得る。適切な場合、コンピュータシステム１８００は、１つまたは複数のコンピュータシステム１８００を含むか、単一または分散型であるか、複数のロケーションにまたがるか、複数の機械にまたがるか、複数のデータセンターにまたがるか、あるいは１つまたは複数のネットワーク中の１つまたは複数のクラウド構成要素を含み得るクラウド中に常駐し得る。適切な場合、１つまたは複数のコンピュータシステム１８００は、本明細書に記載または図示された１つまたは複数の方法の１つまたは複数のステップを実質的な空間的または時間的制限なしに実行することが可能である。限定ではなく、一例として、１つまたは複数のコンピュータシステム１８００は、本明細書に記載または図示された１つまたは複数の方法の１つまたは複数のステップをリアルタイムまたはバッチモードで実行することが可能である。適切な場合、１つまたは複数のコンピュータシステム１８００は、本明細書に記載または図示された１つまたは複数の方法の１つまたは複数のステップを異なる時間または異なるロケーションで実行することが可能である。

特定の実施形態では、コンピュータシステム１８００は、プロセッサ１８０２、メモリ１８０４、ストレージ１８０６、入力／出力（Ｉ／Ｏ）インターフェース１８０８、通信インターフェース１８１０、およびバス１８１２を含む。本開示は、特定の配置において特定の数の特定の構成要素を有する特定のコンピュータシステムを説明し、示すが、本開示は、任意の好適な配置において任意の好適な数の任意の好適な構成要素を有する任意の好適なコンピュータシステムを企図する。

特定の実施形態では、プロセッサ１８０２は、コンピュータプログラムを構成するものなどの命令を実行するためのハードウェアを含む。限定としてではなく一例として、命令を実行するために、プロセッサ１８０２は、内部レジスタ、内部キャッシュ、メモリ１８０４、またはストレージ１８０６から命令を取り出し（またはフェッチし）、それらの命令を復号および実行し、次いで、内部レジスタ、内部キャッシュ、メモリ１８０４、またはストレージ１８０６に１つまたは複数の結果を書き込み得る。特定の実施形態においては、プロセッサ１８０２は、データ、命令、またはアドレスのための１つまたは複数の内部キャッシュを含み得る。本開示は、適切な場合、任意の適切な数の任意の適切な内部キャッシュを含むプロセッサ１８０２を企図している。限定ではなく、一例として、プロセッサ１８０２は、１つまたは複数の命令キャッシュ、１つまたは複数のデータキャッシュ、および１つまたは複数の変換ルックアサイドバッファー（ＴＬＢ）を含み得る。命令キャッシュ内の命令は、メモリ１８０４またはストレージ１８０６内の命令のコピーであってもよく、命令キャッシュは、プロセッサ１８０２によるそれらの命令の取り出しを高速化することが可能である。データキャッシュ内のデータは、プロセッサ１８０２において実行して動作する命令のためのメモリ１８０４またはストレージ１８０６内のデータのコピーであり得る。プロセッサ１８０２で実行される後続の命令によるアクセスのため、またはメモリ１８０４もしくはストレージ１８０６への書き込みのためにプロセッサ１８０２で実行される先行する命令の結果；または他の適切なデータ。データキャッシュは、プロセッサ１８０２による読み取りまたは書き込み動作を高速化し得る。ＴＬＢは、プロセッサ１８０２の仮想アドレス変換を高速化することが可能である。特定の実施形態においては、プロセッサ１８０２は、データ、命令、またはアドレスのための１つまたは複数の内部レジスタを含み得る。本開示は、適切な場合、任意の適切な数の任意の適切な内部レジスタを含むプロセッサ１８０２を企図している。適切な場合、プロセッサ１８０２は、１つまたは複数の算術論理ユニット（ＡＬＵ）を含むか、マルチコアプロセッサであるか、または１つまたは複数のプロセッサ１８０２を含み得る。本開示は、特定のプロセッサを説明し、示すが、本開示は任意の好適なプロセッサを企図する。

特定の実施形態では、メモリ１８０４は、プロセッサ１８０２が実行するための命令またはプロセッサ１８０２が動作するためのデータを記憶するためのメインメモリを含む。限定ではなく、一例として、コンピュータシステム１８００は、ストレージ１８０６または別のソース（たとえば、別のコンピュータシステム１８００など）からメモリ１８０４に命令をロードし得る。次いで、プロセッサ１８０２は、メモリ１８０４から内部レジスタまたは内部キャッシュに命令をロードすることが可能である。命令を実行するために、プロセッサ１８０２は、内部レジスタまたは内部キャッシュから命令を取り出し、それらを復号することが可能である。命令の実行中または実行後に、プロセッサ１８０２は、（中間結果または最終結果であり得る）１つまたは複数の結果を内部レジスタまたは内部キャッシュに書き込む可能性がある。次いで、プロセッサ１８０２は、それらの結果のうちの１つまたは複数をメモリ１８０４に書き込む可能性がある。特定の実施形態では、プロセッサ１８０２は、（ストレージ１８０６または他の場所とは対照的に）１つまたは複数の内部レジスタもしくは内部キャッシュまたはメモリ１８０４内の命令のみを実行し、（ストレージ１８０６または他の場所とは対照的に）１つまたは複数の内部レジスタもしくは内部キャッシュまたはメモリ１８０４内のデータのみに対して動作する。（各々がアドレスバスおよびデータバスを含み得る）１つまたは複数のメモリバスは、プロセッサ１８０２をメモリ１８０４に結合することが可能である。バス１８１２は、後述するように、１つまたは複数のメモリバスを含み得る。特定の実施形態では、１つまたは複数のメモリ管理ユニット（ＭＭＵ）が、プロセッサ１８０２とメモリ１８０４との間に常駐し、プロセッサ１８０２によって要求されるメモリ１８０４へのアクセスを容易にする。特定の実施形態においては、メモリ１８０４は、ランダムアクセスメモリ（ＲＡＭ）を含む。このＲＡＭは、適切な場合、揮発性メモリであり得る。適切な場合、このＲＡＭは、ダイナミックＲＡＭ（ＤＲＡＭ）またはスタティックＲＡＭ（ＳＲＡＭ）であり得る。その上、適切な場合、このＲＡＭは、シングルポートまたはマルチポートＲＡＭであり得る。本開示は、任意の好適なＲＡＭを企図する。メモリ１８０４は、適切な場合、１つまたは複数のメモリ１８０４を含み得る。本開示は、特定のメモリを説明し、示すが、本開示は任意の好適なメモリを企図する。

特定の実施形態においては、ストレージ１８０６は、データまたは命令のための大容量ストレージを含む。限定ではなく、一例として、ストレージ１８０６は、ハードディスクドライブ（ＨＤＤ）、フロッピーディスクドライブ、フラッシュメモリ、光ディスク、光磁気ディスク、磁気テープ、もしくはユニバーサルシリアルバス（ＵＳＢ）ドライブ、またはこれらのうちの２つまたはそれ以上の組合せを含み得る。ストレージ１８０６は、適切な場合、リムーバブルまたは非リムーバブル（または固定された）媒体を含み得る。ストレージ１８０６は、適切な場合、コンピュータシステム１８００の内部または外部にあり得る。特定の実施形態では、ストレージ１８０６は、不揮発性ソリッドステートメモリである。特定の実施形態においては、ストレージ１８０６は、読み出し専用メモリ（ＲＯＭ）を含む。適切な場合、このＲＯＭは、マスクプログラムＲＯＭ、プログラマブルＲＯＭ（ＰＲＯＭ）、消去可能ＰＲＯＭ（ＥＰＲＯＭ）、電気的消去可能ＰＲＯＭ（ＥＥＰＲＯＭ）、電気的書き換え可能ＲＯＭ（ＥＡＲＯＭ）、またはフラッシュメモリ、あるいはこれらのうちの２つまたはそれ以上の組合せであり得る。本開示は、任意の適切な物理的形態をとる大容量ストレージ１８０６を企図している。ストレージ１８０６は、適切な場合、プロセッサ１８０２とストレージ１８０６との間の通信を容易にする１つまたは複数のストレージ制御ユニットを含み得る。適切な場合、ストレージ１８０６は、１つまたは複数のストレージ１８０６を含み得る。本開示は、特定のストレージを説明し、示すが、本開示は任意の好適なストレージを企図する。

特定の実施形態では、Ｉ／Ｏインターフェース１８０８は、コンピュータシステム１８００と１つまたは複数のＩ／Ｏデバイスとの間の通信のための１つまたは複数のインターフェースを提供するハードウェア、ソフトウェア、またはその両方を含む。コンピュータシステム１８００は、適切な場合、これらのＩ／Ｏデバイスのうちの１つまたは複数を含み得る。これらのＩ／Ｏデバイスのうちの１つまたは複数は、人とコンピュータシステム１８００との間の通信を可能にし得る。限定としてではなく一例として、Ｉ／Ｏデバイスは、キーボード、キーパッド、マイクロフォン、モニタ、マウス、プリンタ、スキャナ、スピーカー、スチールカメラ、スタイラス、タブレット、タッチスクリーン、トラックボール、ビデオカメラ、別の好適なＩ／Ｏデバイス、またはこれらのうちの２つまたはそれ以上の組合せを含み得る。Ｉ／Ｏデバイスは１つまたは複数のセンサを含み得る。本開示は、任意の適切なＩ／Ｏデバイスおよびそれらのための任意の適切なＩ／Ｏインターフェース１８０８を企図している。適切な場合、Ｉ／Ｏインターフェース１８０８は、プロセッサ１８０２がこれらのＩ／Ｏデバイスのうちの１つまたは複数を駆動することを可能にする１つまたは複数のデバイスもしくはソフトウェアドライバを含み得る。Ｉ／Ｏインターフェース１８０８は、適切な場合、１つまたは複数のＩ／Ｏインターフェース１８０８を含み得る。本開示は、特定のＩ／Ｏインターフェースを説明し、示すが、本開示は任意の好適なＩ／Ｏインターフェースを企図する。

特定の実施形態では、通信インターフェース１８１０は、コンピュータシステム１８００と、１つもしくは複数の他のコンピュータシステム１８００または１つもしくは複数のネットワークとの間の通信（たとえば、パケットベースの通信など）のための１つもしくは複数のインターフェースを提供するハードウェア、ソフトウェア、またはその両方を含む。限定ではなく、一例として、通信インターフェース１８１０は、イーサネット（登録商標）もしくは他の有線ベースのネットワークと通信するためのネットワークインターフェースコントローラ（ＮＩＣ）もしくはネットワークアダプタ、またはＷＩ－ＦＩネットワークなどの無線ネットワークと通信するための無線ＮＩＣ（ＷＮＩＣ）もしくは無線アダプタを含み得る。本開示は、任意の適切なネットワークと、そのネットワークのための任意の適切な通信インターフェース１８１０とを企図している。限定としてではなく一例として、コンピュータシステム１８００は、アドホックネットワーク、パーソナルエリアネットワーク（ＰＡＮ）、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、メトロポリタンエリアネットワーク（ＭＡＮ）、またはインターネットの１つまたは複数の部分、あるいはこれらのうちの２つまたはそれ以上の組合せと通信し得る。これらのネットワークのうちの１つまたは複数の１つまたは複数の部分は、ワイヤードまたはワイヤレスであり得る。一例として、コンピュータシステム１８００は、無線ＰＡＮ（ＷＰＡＮ）（たとえばＢＬＵＥＴＯＯＴＨ ＷＰＡＮなど）、ＷＩ－ＦＩネットワーク、ＷＩ－ＭＡＸネットワーク、携帯電話網（たとえば、ＧＳＭ（Ｇｌｏｂａｌ Ｓｙｓｔｅｍ ｆｏｒ Ｍｏｂｉｌｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）ネットワークなど）、またはその他の適切な無線ネットワーク、またはこれらのうちの２つまたはそれ以上の組合せと通信し得る。コンピュータシステム１８００は、適切な場合、これらのネットワークのいずれかのための任意の適切な通信インターフェース１８１０を含み得る。通信インターフェース１８１０は、適切な場合、１つまたは複数の通信インターフェース１８１０を含み得る。本開示は、特定の通信インターフェースを説明し、示すが、本開示は任意の好適な通信インターフェースを企図する。

特定の実施形態では、バス１８１２は、コンピュータシステム１８００の構成要素を互いに結合するハードウェア、ソフトウェア、またはその両方を含む。限定としてではなく一例として、バス１８１２は、アクセラレーテッドグラフィックスポート（ＡＧＰ）または他のグラフィックスバス、拡張業界標準アーキテクチャ（ＥＩＳＡ）バス、フロントサイドバス（ＦＳＢ）、ＨＹＰＥＲＴＲＡＮＳＰＯＲＴ（ＨＴ）相互接続、業界標準アーキテクチャ（ＩＳＡ）バス、ＩＮＦＩＮＩＢＡＮＤ相互接続、ローピンカウント（ＬＰＣ）バス、メモリバス、マイクロチャネルアーキテクチャ（ＭＣＡ）バス、周辺構成要素相互接続（ＰＣＩ）バス、ＰＣＩ－Ｅｘｐｒｅｓｓ（ＰＣＩｅ）バス、シリアルアドバンストテクノロジーアタッチメント（ＳＡＴＡ）バス、ビデオエレクトロニクス規格協会ローカル（ＶＬＢ）バス、または別の適切なバス、あるいはこれらのうちの２つまたはそれ以上の組合せを含み得る。バス１８１２は、適切な場合、１つまたは複数のバス１８１２を含み得る。本開示は、特定のバスを説明し、示すが、本開示は任意の好適なバスまたは相互接続を企図する。

本明細書では、１つまたは複数のコンピュータ可読非一時的記憶媒体は、適切な場合、（たとえば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）または特定用途向けＩＣ（ＡＳＩＣ）などの）１つまたは複数の半導体ベースまたは他の集積回路（ＩＣ）、ハードディスクドライブ（ＨＤＤ）、ハイブリッドハードドライブ（ＨＨＤ）、光ディスク、光ディスクドライブ（ＯＤＤ）、光磁気ディスク、光磁気ドライブ、フロッピーディスケット、フロッピーディスクドライブ（ＦＤＤ）、磁気テープ、ソリッドステートドライブ（ＳＳＤ）、ＲＡＭドライブ、セキュアデジタルカードまたはドライブ、任意の他の好適なコンピュータ可読非一時的記憶媒体、あるいはこれらのうちの２つまたはそれ以上の任意の好適な組合せを含み得る。コンピュータ可読非一時的記憶媒体は、適切な場合、揮発性、不揮発性、または揮発性と不揮発性との組合せであり得る。

本明細書では、「または」は、明確に別段に指示されていない限り、またはコンテキストによって別段に指示されていない限り、包括的であり、排他的ではない。したがって、本明細書では、「ＡまたはＢ」は、明確に別段に指示されていない限り、またはコンテキストによって別段に指示されていない限り、「Ａ、Ｂ、またはその両方」を意味する。その上、「および」は、明確に別段に指示されていない限り、またはコンテキストによって別段に指示されていない限り、共同と個別の両方である。したがって、本明細書では、「ＡおよびＢ」は、明確に別段に指示されていない限り、またはコンテキストによって別段に指示されていない限り、「共同でまたは個別に、ＡおよびＢ」を意味する。

本開示の範囲は、当業者が理解するであろう、本明細書で説明または示される例示的な実施形態に対するすべての変更、置換、変形、改変、および修正を包含する。本開示の範囲は、本明細書で説明または示される例示的な実施形態に限定されない。その上、本開示は、本明細書のそれぞれの実施形態を、特定の構成要素、要素、特徴、機能、動作、またはステップを含むものとして説明し、示すが、これらの実施形態のいずれも、当業者が理解するであろう、本明細書のどこかに説明または示される構成要素、要素、特徴、機能、動作、またはステップのうちのいずれかの任意の組合せまたは置換を含み得る。さらに、特定の機能を実施するように適応されるか、配置されるか、実施することが可能であるか、実施するように構成されるか、実施することが可能にされるか、実施するように動作可能であるか、または実施するように動作する、装置またはシステムあるいは装置またはシステムの構成要素に対する添付の特許請求の範囲における参照は、その装置、システム、または構成要素が、そのように適応されるか、配置されるか、可能であるか、構成されるか、可能にされるか、動作可能であるか、または動作する限り、その装置、システム、構成要素またはその特定の機能が、アクティブにされるか、オンにされるか、またはロック解除されるか否かにかかわらず、その装置、システム、構成要素を包含する。さらに、本開示は、特定の実施形態を、特定の利点を提供するものとして説明するかまたは示すが、特定の実施形態は、これらの利点のいずれをも提供しないか、いくつかを提供するか、またはすべてを提供し得る。

Claims (15)

1. １つまたは複数のコンピューティングシステムによって、
   仮想現実（ＶＲ）表示デバイスの１つまたは複数のディスプレイについて、現実世界環境のパススルービューを含む第１の出力画像をレンダリングすることと、
   前記ＶＲ表示デバイスの前記１つまたは複数のディスプレイの１つまたは複数のカメラによって取り込まれた１つまたは複数の画像を使用して、前記現実世界環境内の現実世界のオブジェクトを識別することと、
   前記現実世界のオブジェクトに対応する第１の寸法を示す第１のユーザ入力を受信することと、
   前記第１の寸法に基づいて、前記現実世界のオブジェクトに対応する第２の寸法および第３の寸法を自動的に決定することと、
   前記ＶＲ表示デバイスの前記１つまたは複数のディスプレイについて、ＶＲ環境の第２の出力画像をレンダリングすることであって、前記ＶＲ環境が、前記現実世界のオブジェクトに対応する複合現実（ＭＲ）オブジェクトを含み、前記ＭＲオブジェクトが、決定された前記第１の寸法、前記第２の寸法、および前記第３の寸法によって定義される、第２の出力画像をレンダリングすることと、
   を含む、方法。
2. 前記ＶＲ表示デバイスの前記１つまたは複数のカメラによって取り込まれた前記現実世界環境の１つまたは複数の画像にアクセスすることと、
   前記ＶＲ表示デバイスの前記１つまたは複数のディスプレイについて、アクセスされた前記画像に基づいて、前記ＶＲ環境の一部および前記現実世界環境の前記パススルービューの一部を含む第３の出力画像をレンダリングすることであって、前記パススルービューの一部が、前記ＶＲ環境内の前記ＭＲオブジェクトの表面に位置する、第３の出力画像をレンダリングすることと、
   をさらに含む、請求項１に記載の方法。
3. 前記ＭＲオブジェクトの前記パススルービューの一部を見るための選択を示す第２のユーザ入力を受信することをさらに含み、前記第３の出力画像が、前記ＭＲオブジェクトの前記パススルービューの一部を見るための前記選択を示す前記第２のユーザ入力の受信に応答してレンダリングされる、請求項２に記載の方法。
4. 前記ＭＲオブジェクトが閾値期間にわたって前記ＶＲ表示デバイスのユーザの視野の中心にあると判定することをさらに含み、前記第３の出力画像が、前記ＭＲオブジェクトが前記閾値期間にわたって前記ユーザの視野の中心にあると判定したことに応答してレンダリングされる、請求項２または３に記載の方法。
5. 前記ＶＲ表示デバイスのユーザが前記現実世界のオブジェクトの閾値距離内に近づいたか否かを判定することをさらに含み、前記第３の出力画像が、前記ユーザが前記現実世界のオブジェクトの前記閾値距離内に近づいたとの判定に応答してレンダリングされる、請求項２から４のいずれか一項に記載の方法。
6. 前記ＭＲオブジェクトが前記ＶＲ表示デバイスのユーザの視野内にあるか否かを判定することをさらに含み、前記第３の出力画像が、前記ＭＲオブジェクトが前記ユーザの前記視野内にあると判定したことに応答してレンダリングされる、請求項２から５のいずれか一項に記載の方法。
7. 前記ＶＲ表示デバイスの前記１つまたは複数のディスプレイについて、前記現実世界環境に対応する仮想境界をレンダリングすること
   をさらに含み、
   好ましくは、前記方法が、
   前記現実世界のオブジェクトに対応する前記第２の寸法および前記第３の寸法を自動的に決定することに応答して、識別された前記現実世界のオブジェクトを含むように前記仮想境界を拡張すること
   をさらに含む、請求項１から６のいずれか一項に記載の方法。
8. 前記ＶＲ表示デバイスの前記１つまたは複数のディスプレイについて、パーソナルユーザインターフェース（ＵＩ）をレンダリングすることをさらに含み、前記パーソナルＵＩが、前記ＶＲ表示デバイスのユーザに近接した仮想オブジェクトとしてレンダリングされ、前記パーソナルＵＩが、前記ユーザの動きに対応して移動し、前記パーソナルＵＩが、前記ＭＲオブジェクトに対して適合する１つまたは複数の属性を有する、請求項１から７のいずれか一項に記載の方法。
9. 前記パーソナルＵＩの前記属性のうちの１つが、
   前記パーソナルＵＩのフォームファクタであって、前記パーソナルＵＩの第１のフォームファクタが、前記ＭＲオブジェクトに対する前記ユーザの近接度に基づいて前記パーソナルＵＩの第２のフォームファクタに適合する、前記パーソナルＵＩのフォームファクタ、および／または、
   前記パーソナルＵＩのユーザ機能セットであって、前記パーソナルＵＩの第１のユーザ機能セットが、前記ＭＲオブジェクトに対する前記ユーザの近接度に基づいて前記パーソナルＵＩの第２のユーザ機能セットに適合する、前記パーソナルＵＩのユーザ機能セット
   である、請求項８に記載の方法。
10. 前記現実世界のオブジェクトの前記第１の寸法を示す前記ユーザ入力が、前記現実世界のオブジェクトのエッジを定義する前記ＶＲ環境内の前記ＶＲ表示デバイスのユーザによって作成された仮想線である、請求項１から９のいずれか一項に記載の方法。
11. 前記現実世界のオブジェクトの前記第１の寸法を示す前記ユーザ入力が、前記現実世界のオブジェクトのエッジに対応する仮想線の端点を定義する前記ＶＲ環境内の前記ＶＲ表示デバイスのユーザによって作成された２つの仮想点である、請求項１から９のいずれか一項に記載の方法。
12. 前記現実世界のオブジェクトの前記第１の寸法を示す前記ユーザ入力が、前記現実世界のオブジェクトの表面を定義する前記ＶＲ環境内の前記ＶＲ表示デバイスのユーザによって作成された単一の仮想点である、請求項１から９のいずれか一項に記載の方法。
13. コンピュータによって実行されると請求項１から１２のいずれか一項に記載の方法を前記コンピュータに実行させる命令を含む、コンピュータ可読媒体。
14. 請求項１から１２のいずれか一項に記載の方法を実行するように構成されたプロセッサを備える、システム。
15. 命令を含むコンピュータプログラム製品であって、前記命令は、前記プログラムがコンピュータによって実行されると、請求項１から１２のいずれか一項に記載の方法を前記コンピュータに実行させ、コンピュータプログラム製品。

Images