TW202328910A

TW202328910A - 短暫的人工實境體驗

Info

Publication number: TW202328910A
Application number: TW111146106A
Authority: TW
Inventors: 亞歷山大麥可路易; 阿羅約喬西Ｅ蒂拉多; 伯恩哈德伯斯; 麥克赫拉威克
Original assignee: 美商元平台技術有限公司
Priority date: 2022-01-13
Filing date: 2022-12-01
Publication date: 2023-07-16
Also published as: US20230221797A1; WO2023136934A1

Abstract

在一個具體實例中，一種方法包括：指示一AR頭戴式裝置上之感測器捕捉一真實世界環境之資料；發現經組態以在一作業系統上原生地運行之一原生應用程式可下載的一3D位置；產生並顯示一虛擬物件以表示該3D位置處之該原生應用程式；偵測到與該虛擬物件互動的該AR系統之一使用者；下載該原生應用程式之一第一可執行部分；在一沙盒程序內執行該第一可執行部分，該沙盒程序具有一組預定存取權限；在該使用者與所執行之第一可執行部分互動時，漸進地下載該原生應用程式之一剩餘可執行部分；及回應於該原生應用程式經完全下載之一判定，將該原生應用程式安裝於該作業系統上。

Description

短暫的人工實境體驗

本發明大體上係關於管理人工實境（artificial reality；AR）環境中之應用程式。

人工實境為在呈現給使用者之前已以某一方式調整的實境形式，其可包括例如擴增實境、虛擬實境、混合實境、混雜實境或其某一組合及/或衍生物。人工實境內容可包括完全產生之內容或與所捕捉內容（例如，真實世界相片）組合的所產生內容。人工實境內容可包括視訊、音訊、觸覺反饋或其某一組合，且其中之任一者可在單一通道中或在多個通道中呈現（諸如，對觀看者產生三維效應之立體聲視訊）。人工實境可與例如用於在人工實境中創建內容及/或用於人工實境中（例如，在人工實境中執行活動）之應用程式、產品、配件、服務或其某一組合相關聯。提供人工實境內容之人工實境系統可實施於各種平台上，包括連接至主機電腦系統之頭戴式顯示器（head-mounted display；HMD）、獨立式HMD、行動裝置或計算系統或能夠將人工實境內容提供至一或多個檢視者之任何其他硬體平台。

管理使用者裝置（諸如虛擬實境或人工實境頭戴式裝置）上之應用程式的傳統方法為下載應用程式，將該應用程式安裝至硬碟機上，且在使用者希望使用該應用程式時執行該應用程式。舉例而言，使用者可存取應用程式商店以定位及識別他們將希望使用之應用程式，下載並安裝該應用程式。亦即，將需要使用者主動地尋求所要應用程式。此程序可能會增加摩擦，從而減損使用者之人工實境體驗。

在特定具體實例中，人工實境（artificial reality；AR）系統可能夠在AR作業系統上執行原生應用程式，使得使用者可經由AR介面體驗與應用程式之即時互動。與應用程式之互動可基於僅部分地下載及安裝之應用程式的「介紹性」版本，該版本允許使用者體驗應用程式，而無需在使用者之裝置上完全下載及安裝。隨著使用者繼續使用及體驗應用程式，AR作業系統可漸進地下載及安裝原生應用程式，以允許使用者「更深入地研究」由應用程式提供之體驗。亦即，使用者可開始體驗並參與應用程式，且在不必減損沉浸式AR體驗之情況下繼續體驗並參與應用程式。

在特定具體實例中，一或多個計算系統可指示AR頭戴式裝置上之感測器捕捉真實世界環境之感測器資料。一或多個計算系統可基於感測器資料發現經組態以原生地在作業系統上運行之原生應用程式可予以下載的3D位置。一或多個計算系統可產生並顯示虛擬物件以表示3D位置處之原生應用程式。一或多個計算系統可回應於偵測到與虛擬物件互動的AR系統之使用者而下載原生應用程式之第一可執行部分。一或多個計算系統可在執行於作業系統上之沙盒程序內執行第一可執行部分，其中第一沙盒程序可具有一組預定存取權限。一或多個計算系統可在使用者與原生應用程式之所執行之第一可執行部分互動時漸進地下載原生應用程式之剩餘可執行部分。一或多個計算系統可回應於原生應用程式經完全下載之判定而將原生應用程式安裝於作業系統上。

管理AR環境中之應用程式存在某些技術挑戰。一個技術挑戰可包括確保未經使用者同意下載、安裝及執行應用程式不會侵犯使用者隱私。藉由本文所揭示之具體實例呈現用以解決此挑戰之解決方案可漸進地下載及安裝應用程式，但僅在使用者已授予應用程式必要的權限後執行完整應用程式。另一技術挑戰可包括判定向使用者呈現應用程式體驗之適當方法。藉由本文所揭示之具體實例呈現用以解決此挑戰之解決方案可為基於使用者對真實世界環境中之物件及位置的接近度來判定與應用程式相對應之反射光區（glint）或虛擬物件顯現於何處。本文中所揭示之某些具體實例可提供一或多個技術優勢。具體實例之技術優點可包括允許使用者將自身沉浸於AR體驗內，且一旦使用者已決定提交應用程式，便僅破壞此沉浸以授予應用程式權限。具體實例之另一技術優點可包括允許使用者藉由基於使用者設定及偏好上之應用程式的外觀來調整呈現給其之應用程式。鑒於本發明之圖式、描述及申請專利範圍，一或多個其他技術優勢對於所屬技術領域中具有通常知識者可為易於顯而易見的。

本文中所揭示之具體實例僅為實例，且本發明之範圍不限於該等實例。特定具體實例可包括本文中所揭示之具體實例的組件、元件、特徵、功能、操作或步驟中之全部、一些或無一者。根據本發明之具體實例尤其在針對一種方法、儲存媒體、系統及電腦程式產品之所附申請專利範圍中揭示，其中在一個技術方案類別中提及之任何特徵（例如方法）亦可在另一技術方案類別（例如系統）中主張。僅出於形式原因來選擇所附申請專利範圍中之依賴性或反向參考。然而，亦可主張由對任何前述請求項之反向故意參考（尤其多個依賴性）產生的任何主題，使得請求項及其特徵之任何組合經揭示且可無關於在所附申請專利範圍中選擇之依賴性而主張。可主張之主題不僅包含如所附申請專利範圍中闡述之特徵的組合而且包含請求項中特徵之任何其他組合，其中請求項中所提及之各特徵可與任何其他特徵或請求項中之其他特徵之組合組合。此外，本文中描述或描繪之具體實例及特徵中之任一者可在獨立技術方案中及/或在與本文中描述或描繪之任何具體實例或特徵或與所附申請專利範圍之特徵中之任一者的任何組合中主張。

在特定具體實例中，人工實境（artificial reality；AR）系統（例如，作業系統）可能夠在AR作業系統上執行原生應用程式，使得使用者可經由AR介面體驗與應用程式之即時互動。與應用程式之互動可基於部分地下載及安裝之應用程式的「介紹性」或「輕量」版本，該版本允許使用者體驗應用程式，而無需在使用者之裝置上完全下載及安裝。隨著使用者繼續使用及體驗應用程式，AR作業系統可漸進地下載及安裝原生應用程式，以允許使用者「更深入地研究」由應用程式提供之體驗。亦即，使用者可開始體驗並參與應用程式，且在不必減損沉浸式AR體驗之情況下繼續體驗並參與應用程式。儘管本發明描述以特定方式管理AR環境中之應用程式，但本發明涵蓋以任何合適方式管理AR環境中之應用程式。

圖 1A繪示由使用者102佩戴之人工實境系統100的實例。在特定具體實例中，人工實境系統100可包含頭戴式之AR顯示裝置135、控制器106及一或多個計算系統110。AR顯示裝置135可佩戴在使用者之眼睛上方，並且經由內部顯示器（圖中未示）將視覺內容提供至使用者102。AR顯示裝置135可具有兩個獨立內部顯示器，使用者102之每隻眼睛一個（單個顯示裝置亦為可能的）。在特定具體實例中，AR顯示裝置135可包含一或多個外向攝影機，諸如兩個前向攝影機105A及105B，其可捕捉真實世界環境之影像及視訊。如圖1A中所繪示，AR顯示裝置135可完全覆蓋使用者之視野。藉由作為使用者102之視覺資訊之獨佔式提供者，AR顯示裝置135實現提供沉浸式人工實境體驗之目標。然而，此情形之一個後果為使用者102可能無法看到使用者102周圍之實體（真實世界）環境，此係因為其視域被AR顯示裝置135遮蔽。因而，本文中所描述之透通特徵可在技術上對於向使用者提供關於其實體周圍環境之即時視覺資訊係有利的。

在特定具體實例中，AR系統100可指示AR頭戴式裝置上之感測器捕捉真實世界環境150之感測器資料。圖 1B繪示實例人工實境系統101。人工實境系統101可包括頭戴式顯示器AR顯示裝置135（例如，AR眼鏡），其包含框架112、一或多個顯示器114及一或多個計算系統110。AR顯示裝置135可佩戴在使用者之眼睛上方（例如，如眼鏡），並且經由顯示器114將視覺內容提供至使用者102（圖中未示）。顯示器114可為透明或半透明的，從而允許佩戴AR顯示裝置135之使用者透過顯示器114看到真實世界環境，並且同時將視覺人工實境內容顯示給使用者。AR顯示裝置135可包括音訊裝置，其可將音訊人工實境內容提供至使用者。AR顯示裝置135可包括一或多個外向攝影機，諸如兩個前向攝影機105A及105B，其可捕捉真實世界環境之影像及視訊。AR顯示裝置135可包括眼動追蹤系統以追蹤佩戴AR顯示裝置135之使用者的輻輳移動。人工實境系統101可進一步包括控制器106（圖中未示），其包含軌跡墊及一或多個按鈕。控制器106可自使用者接收輸入，並且將輸入中繼至計算系統110。控制器106亦可將觸覺反饋提供至使用者。計算系統110可經由纜線或無線連接而連接至AR顯示裝置135及控制器。計算系統110可控制AR顯示裝置135及控制器以將人工實境內容提供至使用者及自使用者接收輸入。計算系統110可為獨立式主機電腦系統、與AR顯示裝置135整合之機載電腦系統、行動計算裝置，或能夠將人工實境內容提供至使用者且自使用者接收輸入之任何其他硬體平台。儘管本發明描述了指示AR頭戴式裝置上之感測器以特定方式捕捉真實世界環境之感測器資料，但本發明涵蓋以任何合適方式捕捉資料。

圖 2繪示人工實境系統100之透通特徵的實例。使用者102可佩戴AR顯示裝置135，沉浸於人工實境環境內。真實世界物件145在使用者102周圍之實體環境中。然而，歸因於AR顯示裝置135阻擋使用者102之視域，因此使用者102不能直接看到真實世界物件145。為了幫助使用者在佩戴AR顯示裝置135時感知其實體環境，透通特徵使用例如一或多個攝影機105（諸如外向攝影機105A-B）捕捉關於實體環境之資訊。所捕捉資訊可接著基於使用者102之視點而重新投影至該使用者。在其中AR顯示裝置135具有用於使用者之右眼之右側顯示器136A及用於使用者之左眼之左側顯示器136B的特定具體實例中，人工實境系統100可單獨地呈現：（1）基於使用者之右眼之視點的用於右側顯示器136A之實體環境的重新投影視圖145A，以及（2）基於使用者之左眼之視點的用於左側顯示器136B之實體環境的重新投影視圖145B。

再次參考圖1A，AR顯示裝置135可具有外向攝影機，諸如圖1A中所展示之兩個前向攝影機105A及105B。雖然僅展示兩個前向攝影機105A-B，但AR顯示裝置135可具有面向任何方向之任何數目個攝影機（例如，用以捕捉天花板或室內照明之上向攝影機、用以捕捉使用者之臉部及/或身體之部分的下向攝影機、用以捕捉使用者後方之部分的後向攝影機，及/或用於出於眼動追蹤目的捕捉使用者之視線的內部攝影機）。外向攝影機可經組態以捕捉使用者周圍之實體環境，且可連續地如此進行以產生圖框序列（例如，作為視訊）。如先前所解釋，雖然由前向攝影機105A-B捕捉之影像可經由AR顯示裝置135直接顯示給使用者102，但如此進行可能無法向使用者提供實體環境之準確視圖，此係由於攝影機105A-B無法實體上位於與使用者之眼睛精確相同的位置處。因而，本文中所描述之透通特徵可使用重新投影技術，其產生實體環境之3D表示且接著基於自使用者之眼睛的視點的3D表示而呈現影像。

3D表示可基於藉由攝影機105A-B觀測到的實體物件之深度量測而產生。可以多種方式量測深度。在特定具體實例中，可基於立體影像計算深度。舉例而言，兩個前向攝影機105A-B可共用重疊視野且經組態以同時捕捉影像。因此，同一實體物件可同時由兩個攝影機105A-B捕捉。舉例而言，物件之特定特徵可顯現於由攝影機105A捕捉之影像中的一個像素pA處，且相同特徵可顯現於由攝影機105B捕捉之影像中的另一像素pB處。只要深度量測系統知曉兩個像素對應於同一特徵，人工實境系統100便可使用三角量測技術來計算所觀測特徵之深度。舉例而言，基於3D空間內之攝影機105A的定位及pA相對於攝影機105A之視野的像素位置，線可自攝影機105A投影且穿過像素pA。類似線可自另一攝影機105B投影且穿過像素pB。由於推測兩個像素對應於同一實體特徵，因此兩條線應相交。在兩條相交線及兩個攝影機105A與105B之間繪製的虛線形成三角形，其可用於計算所觀測特徵相距攝影機105A或105B之距離或所觀測特徵所位於之空間中的點。

在特定具體實例中，可能需要環境內之AR顯示裝置135之位姿（例如，x-y-z位置及r-p-y位向）。舉例而言，為了在使用者102在擴增環境中四處移動時為該使用者呈現適當顯示，人工實境系統100可能需要判定其在任何時刻之位置及位向。基於AR顯示裝置之位姿，人工實境系統100可進一步判定攝影機105A及105B中之任一者或使用者之眼睛中之任一者的視點。在特定具體實例中，AR顯示裝置135可配備有慣性量測單元（「inertial-measurement unit；IMU」）。由IMU產生之資料以及由外向攝影機105A-B捕捉之立體影像允許人工實境系統100使用例如即時定位與地圖建構（SLAM）或其他合適技術來計算AR顯示裝置135之位姿。

在特定具體實例中，人工實境系統100可進一步具有一或多個控制器106，其使得使用者102能夠提供輸入。控制器106可經由無線或有線連接與AR顯示裝置135或獨立的一或多個計算系統110通信。控制器106可具有任何數目個按鈕或其他機械輸入機構。另外，控制器106可具有IMU，使得可追蹤控制器106之位姿。可基於控制器上之預定圖案而進一步追蹤控制器106。舉例而言，控制器106可具有共同形成預定圖案之若干紅外LED或其他已知可觀測特徵。使用感測器或攝影機，人工實境系統100可能夠捕捉控制器上之預定圖案之影像。基於彼等圖案之所觀測位向，系統可計算控制器相對於感測器或攝影機之位置及位向。

人工實境系統100可進一步包括一或多個計算系統110。一或多個計算系統110可為實體上與AR顯示裝置135分離的獨立單元，或電腦系統110可與AR顯示裝置135整合。在其中一或多個計算系統110為獨立單元的具體實例中，一或多個計算系統110可經由無線或有線鏈路以通信方式耦接至AR顯示裝置135。一或多個計算系統110可為高效能裝置，諸如桌上型電腦或膝上型電腦，或資源有限裝置，諸如行動電話。高效能裝置可具有專用GPU及高容量或恆定功率源。另一方面，資源有限裝置可能不具有GPU且可具有有限電池容量。因此，可實際上由人工實境系統100使用的演算法視其一或多個計算系統110之能力而定。

在其中一或多個計算系統110為高效能裝置之具體實例中，可如下設計透通特徵之具體實例。經由AR顯示裝置135之外向攝影機105A-B，可捕捉周圍實體環境之影像序列。然而，由攝影機105A-B捕捉之資訊可不與使用者之眼睛可捕捉之資訊對準，此係由於攝影機可不與使用者之眼睛在空間上一致（例如，攝影機可定位成與使用者之眼睛相距一定距離，且因此具有不同視點）。因此，僅向使用者顯示攝影機所捕捉的內容可能並非使用者應感知之準確表示。

替代僅顯示所捕捉內容，透通特徵可將由外向攝影機105A-B捕捉之資訊重新投影至使用者。各對同時捕捉之立體影像可用於估計所觀測特徵之深度。如上文所闡述，為使用三角量測來量測深度，一或多個計算系統110可在立體影像之間查找對應性。舉例而言，一或多個計算系統110可判定立體影像對中之哪兩個像素對應於同一所觀測特徵。高效能之一或多個計算系統110可使用其GPU及光學流技術來解決對應問題，該等技術對於此類任務為最佳的。對應性資訊可接著用於使用三角量測技術來計算深度。基於所觀測特徵之所計算深度，一或多個計算系統110可判定彼等特徵位於3D空間內何處（由於一或多個計算系統110亦知曉攝影機處於彼3D空間何處）。結果可由密集3D點雲表示，其中各點對應於所觀測特徵。密集點雲可接著用於產生環境中之物件之3D模型。在系統呈現用於顯示之場景時，系統可自使用者之眼睛之視角執行可見度測試。舉例而言，系統可自對應於使用者之每隻眼睛之視點將射線投向至3D空間中。以此方式，顯示給使用者之所呈現場景可自使用者之眼睛之視角計算，而非自外向攝影機105A-B之視角計算。

然而，上文所描述之程序對於資源限制計算單元而言可能並不可行（例如，手機可為AR顯示裝置135之主要計算單元）。舉例而言，不同於具有大功率計算資源及足夠能量源的系統，手機無法依賴於GPU及耗費計算之演算法（例如，光學流）來執行深度量測且產生環境之準確3D模型。因此，為提供資源有限裝置上之透通，需要最佳化程序。

在特定具體實例中，計算裝置可經組態以在運行時間處動態地判定其是否能夠或可使用（1）GPU及光學流或（2）使用視訊編碼器及運動向量之最佳化技術來產生深度量測，如在下文更詳細地描述。舉例而言，若裝置具有GPU及足夠功率預算（例如，其插入至電源中，具有全電池等），則其可使用其GPU及光學流來執行深度量測。然而，若裝置並不具有GPU或具有嚴格功率預算，則其可選擇用於計算深度之最佳化方法。

在特定具體實例中，AR系統100可產生並顯示虛擬物件165以表示3D位置處之原生應用程式（例如，藉由在AR環境155內之3D位置處產生並顯示虛擬物件165）。圖 3繪示使用者102在AR環境155中之實例。AR環境155可對應於真實世界環境150。真實世界環境150可含有多個物件，諸如桌、椅、台、壁等。AR環境155中之虛擬物件165可對應於真實世界環境150中之一或多個物件。舉例而言而非作為限制，AR環境155中之虛擬物件（諸如虛擬行事曆）可顯現於真實世界環境150中之真實世界壁上，或其他虛擬物件165可顯現於真實世界台上。

在特定具體實例中，AR系統100可基於感測器資料發現經組態以原生地在作業系統上運行之原生應用程式可予以下載的3D位置。3D位置可對應於AR環境155中之位置。一或多個虛擬物件165可基於使用者102之偏好或設定而提供於AR環境155內。在特定具體實例中，使用者102可判定或識別（例如，經由使用者設定）其設定及偏好。作為一實例而非作為限制，若使用者102指示其享受嘗試新食物，則當使用者在對應的真實世界環境150中之餐館附近時，呈現給使用者102之虛擬物件中之一或多者可對應於AR環境155中之餐館外部的虛擬選單。作為另一實例而非作為限制，若使用者102將其AR顯示裝置135連接至其社交媒體帳戶，且使用者102正看向其即將過生日的朋友，則一或多個虛擬物件（諸如朋友之線上願望清單）可能顯現於緊鄰該朋友之AR環境155中，以鼓勵使用者102為其朋友購買生日禮物。替代地，且作為一實例而非作為限制，若使用者102指示其並不享受購物，則AR系統100將不向使用者102呈現對應於購物體驗之虛擬物件。

技術挑戰可包括判定向使用者呈現應用程式體驗之適當方法。藉由本文所揭示之具體實例呈現用以解決此挑戰之解決方案可為基於使用者對真實世界環境150中之物件及位置的接近度來判定與應用程式相對應之反射光區（glint）160或虛擬物件165顯現於何處。圖 4繪示使用者102在AR環境155中之實例透視圖。當使用者102沿著具有建築物及觀光機會之街道行進時，使用者102可體驗到。當使用者走過健身房時，AR環境155中之虛擬物件165可顯現於健身房附近，且對應於會員資格、關於健身課程之資訊及定價。當使用者走過服裝商店時，AR環境155中之虛擬物件165可提供關於商店中可用的折扣或衣服之資訊。當使用者走過餐館時，AR環境155中之虛擬物件165可提供關於選單之資訊，或允許使用者點餐。當使用者走過雕像時，AR環境155中之虛擬物件165可提供關於該雕像所紀念之個人的資訊，提供關於個人之更多資訊的鏈路，或提供論述個人之視訊。儘管本發明描述了基於感測器資料發現經組態以原生地在作業系統上運行之原生應用程式可以特定方式進行下載的3D位置，但本發明涵蓋發現原生應用程式可以任何合適方式進行下載之位置。

對應於AR體驗之虛擬物件可基於使用者102之位置、狀態或其他因素而自訂。作為一實例而非作為限制，若使用者在購物中心中，則可顯現於AR環境155中之虛擬物件可對應於購物體驗，其可展示使用者銷售、廣告或產品之樣本。作為另一實例而非作為限制，若使用者102正慶祝其生日，則AR環境155中之虛擬物件可將使用者活動或使用者102可體驗的遊戲展示為其生日中的有趣事件。因此，具體實例之技術優點可包括允許使用者藉由基於使用者設定及偏好上之應用程式的外觀來調整呈現給其之應用程式。

在特定具體實例中，AR系統100可回應於偵測到與虛擬物件165互動的AR系統100之使用者102而下載原生應用程式之第一可執行部分。一或多個虛擬物件165可使用一或多個反射光區160在AR環境155中表示。一或多個反射光區160為使用者102可與之互動的虛擬物件。一或多個反射光區160可為顯現於AR環境155中之應用程式圖示。使用者102可指示其想要藉由參與對應於虛擬物件165之反射光區160來選擇由反射光區160提供之體驗。作為一實例而非作為限制，使用者可走向或接近反射光區160以指示其想要選擇由反射光區160提供之體驗（例如，藉由偵測使用者朝向反射光區160或虛擬物件165之運動）。作為一實例而非作為限制，使用者可指向反射光區160以指示其想要選擇由反射光區160提供之體驗，例如，藉由指向反射光區160達臨限時間量（例如，藉由偵測指向反射光區160或虛擬物件165達5秒之控制器106）。作為一實例而非作為限制，使用者可凝視反射光區160以指示其想要選擇由反射光區160提供之體驗，例如藉由凝視反射光區160達臨限時間量（例如，藉由在反射光區160或虛擬物件165處偵測到視線達5秒）。儘管本發明描述以特定方式產生並顯示虛擬物件以表示3D位置處之原生應用程式，但本發明涵蓋以任何合適方式產生並顯示虛擬物件。儘管本發明描述以特定方式下載原生應用程式之第一可執行部分，但本發明涵蓋以任何合適方式下載原生應用程式之一部分。

在特定具體實例中，AR系統100可在執行於AR作業系統100上之沙盒程序內執行第一可執行部分。第一沙盒程序可具有一組預定存取權限。作為一實例而非作為限制，使用者102可觸發與應用程式之小「介紹性的」部分相關之應用程式體驗。亦即，對應於應用程式之虛擬物件165或反射光區160可提供短暫體驗，其允許使用者102研究由應用程式提供之AR環境、設定或其他特徵。因此，使用者102可得到應用程式所提供之體驗的預覽、概覽或「測試運行」，而不必將完整應用程式安裝至硬碟機上並回應於使用者命令而啟動該應用程式。舉例而言，對應於全天然材料服裝商店之反射光區160可顯示介紹性的體驗，諸如詳述該服裝商店如何以有環境意識方式製造其服裝之宣傳視訊。儘管本發明描述以特定方式在執行於作業系統上之沙盒程序內執行第一可執行部分，但本發明涵蓋以任何合適方式執行第一可執行部分。

在特定具體實例中，AR系統100可在使用者102與原生應用程式之所執行之第一可執行部分互動時漸進地下載原生應用程式之剩餘可執行部分。亦即，使用者102可藉由「進入」AR平台內原生的AR體驗來經由AR介面體驗與應用程式之即時互動。在使用者可被「邀請」至經由AR介面可存取的應用程式之AR體驗中之後，且在使用者繼續參與原生應用程式時，作業系統可漸進地下載並安裝原生應用程式，以允許使用者102「更深入地研究」原生應用程式。雖然使用者102繼續與部分下載及安裝之應用程式互動，但作業系統可漸進地下載並安裝完整應用程式。作為一實例而非作為限制，隨著使用者觀看全天然材料服裝商店的詳述該服裝商店如何以有環境意識方式製造其服裝之宣傳視訊，使用者可繼續研讀全天然材料服裝商店之服裝選擇。因此，使用者可藉由以較少的減損AR體驗之「摩擦」（亦即，破壞使用者沉浸）來對應用程式進行深入研究來繼續體驗並參與原生應用程式。儘管本發明描述以特定方式漸進地下載原生應用程式之剩餘可執行部分，但本發明涵蓋以任何合適方式漸進地下載原生應用程式之剩餘可執行部分。

技術挑戰可包括確保未經使用者同意下載、安裝及執行應用程式不會侵犯使用者隱私。藉由本文所揭示之具體實例呈現用以解決此挑戰之解決方案可漸進地下載及安裝應用程式，但僅在使用者已授予應用程式必要的權限後執行完整應用程式。傳統地，安裝原生應用程式將提示作業系統詢問使用者102授予權限（例如，使用使用者裝置之攝影機、麥克風、GPS、運動感測器等特徵）。此類請求對於AR沉浸而言可為侵入性的且向使用者之AR體驗增加「摩擦」。為減少此「摩擦」，使用者102可接近虛擬物件165或反射光區160或與其互動，以初始地且緊接著存取應用程式之開始體驗。如較早所陳述，此可藉由下載及安裝應用程式之部分、不完全或以其他方式小部分以允許即時存取該應用程式來達成。然而，即使應用程式可原生地在作業系統上操作，使用者之安全性仍至關重要。因此，雖然原生應用程式可（甚至部分地）在AR平台/作業系統上執行，但使用者102可設定限制那些應用程式可運行之權限。亦即，使用者可設定允許應用程式在有限範圍內執行的隱式權限，使得應用程式不能夠存取使用者之攝影機、麥克風、GPS、運動感測器等。部分下載及安裝之應用程式可接著在僅需要最小權限之安全沙盒方法中啟動，該最小權限可由使用者102設定以確保使用者安全性。因此，使用者102可藉由請求使用者102授予應用程式特定權限而開始享受與應用程式相關聯之AR體驗，而無需侵入作業系統，其會破壞使用者之沉浸。接著，雖然使用者102繼續與部分下載及安裝之應用程式互動，但作業系統可漸進地下載並安裝完整應用程式。然而，為了成長為完整的使用者體驗，只有這樣，作業系統才可向使用者102詢問執行完整應用程式所需的所有權限。因此，應用程式將必須自使用者102接收顯式權限，以在作業系統上完全執行（例如，若使用者之權限不允許應用程式隱式存取，則該等應用程式將不具有對原生地運行之隱式存取）。具體實例之技術優點可包括允許使用者將自身沉浸於AR體驗內，且一旦使用者已決定提交應用程式，便僅破壞此沉浸以授予應用程式權限。

在特定具體實例中，AR系統100可回應於原生應用程式經完全下載之判定而將原生應用程式安裝於作業系統上。作為一實例而非作為限制，若使用者102決定自全天然材料服裝商店購買物品，則可能需要完整的應用程式權限來連接使用者之信用卡，以支付該等物品且填寫使用者之家庭位址以用於送貨資訊。儘管本發明描述以特定方式將原生應用程式安裝於作業系統上，但本發明涵蓋以任何合適方式將原生應用程式安裝於作業系統上。

圖 5繪示用於管理AR環境中之應用程式的實例方法500。該方法可在步驟510處開始，其中一或多個計算系統可指示AR頭戴式裝置上之感測器捕捉真實世界環境之感測器資料。在步驟520處，一或多個計算系統可基於感測器資料發現經組態以原生地在作業系統上運行之原生應用程式可予以下載的3D位置。在步驟530處，一或多個計算系統可產生並顯示虛擬物件以表示3D位置處之原生應用程式。在步驟540處，一或多個計算系統可回應於偵測到與虛擬物件互動的AR系統之使用者而下載原生應用程式之第一可執行部分。在步驟550處，一或多個計算系統可在執行於作業系統上之沙盒程序內執行第一可執行部分。第一沙盒程序可具有一組預定存取權限。在步驟560處，一或多個計算系統可在使用者與原生應用程式之所執行之第一可執行部分互動時漸進地下載原生應用程式之剩餘可執行部分。在步驟570處，一或多個計算系統可回應於原生應用程式經完全下載之判定而將原生應用程式安裝於作業系統上。在適當時，特定具體實例可重複圖5之方法的一或多個步驟。儘管本發明將圖5之特定方法步驟描述及說明為按特定次序發生，但本發明涵蓋圖5之任何合適方法步驟按任何合適次序發生。此外，儘管本發明描述及說明用於管理包括圖5之方法之特定步驟的AR環境中之應用程式的實例方法，但本發明涵蓋用於管理包括任何合適步驟的AR環境中之應用程式的任何合適之方法，該等任何合適步驟適當時可包括圖5之方法之步驟中之所有、一些或無一者。此外，儘管本發明描述及說明進行圖5之方法之特定步驟的特定組件、裝置或系統，但本發明涵蓋進行圖5之方法之任何合適步驟的任何合適組件、裝置或系統之任何合適組合。

圖 6繪示人工實境中之應用程式生命週期的實例視圖600。由於需要瞬時體驗，因此作業系統可漸進地下載並安裝整個應用程式。然而，在完全啟動應用程式之前（例如，當由上下文觸發、通知、按壓頭戴式顯示器（head mounted display；HMD）上之按鈕或其他形式之發現啟動時），使用者可預覽可用於體驗應用程式之快速動作。另外，作業系統可藉由在使用者啟動應用程式之前漸進地下載及安裝完整應用程式來開始佈建程序。應用程式接著可以多種方式啟動，包括經由裝置之啟動器、經由搜尋功能且經由助理（例如，話音處理音訊助理系統）。在啟動之後，應用程式可進入活動或非活動狀態。

圖 7繪示與社交網路連接系統相關聯之實例網路環境700。網路環境700包括藉由網路710彼此連接之用戶端系統730、社交網路連接系統760及第三方系統770。雖然圖7說明用戶端系統730、社交網路連接系統760、第三方系統770及網路710之特定配置，但本發明涵蓋用戶端系統730、社交網路連接系統760、第三方系統770及網路710之任何合適配置。作為一實例而非作為限制，用戶端系統730、社交網路連接系統760及第三方系統770中之兩者或更多者可繞過網路710彼此直接連接。作為另一實例，用戶端系統730、社交網路連接系統760及第三方系統770中之兩者或更多者可彼此整體或部分地在實體或邏輯上協同定位。此外，儘管圖7說明用戶端系統730、社交網路連接系統760、第三方系統770及網路710之特定數目，但本發明涵蓋用戶端系統730、社交網路連接系統760、第三方系統770及網路710之任何合適數目。作為一實例而非作為限制，網路環境700可包括多個用戶端系統730、社交網路連接系統760、第三方系統770及網路710。

本發明涵蓋任何合適之網路710。作為一實例而非作為限制，網路710之一或多個部分可包括特用網路、企業內部網路、企業間網路、虛擬專用網路（virtual private network；VPN）、區域網路（local area network；LAN）、無線LAN（wireless LAN；WLAN）、廣域網路（wide area network；WAN）、無線WAN（wireless WAN；WWAN）、都會區域網路（metropolitan area network；MAN）、網際網路之一部分、公眾交換電話網路（Public Switched Telephone Network；PSTN）之一部分、蜂巢式電話網路，或此等網路中之兩者或更多者之組合。網路710可包括一或多個網路710。

鏈路750可將用戶端系統730、社交網路連接系統760及第三方系統770連接至進行通信之網路710或使其彼此連接。本發明涵蓋任何合適之鏈路750。在特定具體實例中，一或多個鏈路750包括一或多個有線（諸如數位用戶線（Digital Subscriber Line；DSL）或有線資料服務介面規範（Data Over Cable Service Interface Specification；DOCSIS））、無線（諸如Wi-Fi或微波存取全球互通（Worldwide Interoperability for Microwave Access；WiMAX））或光學（諸如同步光網路（Synchronous Optical Network；SONET）或同步數位階層（Synchronous Digital Hierarchy；SDH））鏈路。在特定具體實例中，一或多個鏈路750各自包括特用網路、企業內部網路、企業間網路、VPN、LAN、WLAN、WAN、WWAN、MAN、網際網路之一部分、PSTN之一部分、基於蜂巢技術之網路、基於衛星通信技術之網路、另一鏈路750，或兩個或更多個此類鏈路750之組合。在整個網路環境700中，鏈路750不必為相同的。一或多個第一鏈路750可在一或多個方面不同於一或多個第二鏈路750。

在特定具體實例中，用戶端系統730可為電子裝置，其包括硬體、軟體或嵌入式邏輯組件或兩個或更多個此類組件之組合並且能夠實行由用戶端系統730實施或支援之適當功能。作為一實例而非作為限制，用戶端系統730可包括電腦系統，諸如桌上型電腦、筆記本或筆記本電腦、上網本、平板電腦、電子書閱讀器、GPS裝置、攝影機、個人數位助理（personal digital assistant；PDA）、手持電子裝置、蜂巢式電話、智慧型手機、擴增/虛擬實境裝置、其他合適之電子裝置，或其任何合適組合。本發明涵蓋任何合適之用戶端系統730。用戶端系統730可使得用戶端系統730處之網路使用者能夠存取網路710。用戶端系統730可使得其使用者能夠與其他用戶端系統730處之其他使用者通信。

在特定具體實例中，用戶端系統730可包括網頁瀏覽器732，且可具有一或多個附加程式、外掛程式或其他擴展。用戶端系統730處之使用者可輸入統一資源定位符（Uniform Resource Locator；URL）或將網頁瀏覽器732定向至特定伺服器（諸如伺服器762或與第三方系統770相關聯之伺服器）之其他位址，且網頁瀏覽器732可產生超文字傳送協定（Hyper Text Transfer Protocol；HTTP）請求並將HTTP請求傳達至伺服器。伺服器可接受HTTP請求並回應於HTTP請求而將一或多個超文字標示語言（Hyper Text Markup Language；HTML）檔案傳達至用戶端系統730。用戶端系統730可基於來自伺服器之HTML檔案呈現網頁以用於呈現給使用者。本發明涵蓋任何合適之網頁檔案。作為一實例而非作為限制，根據特定需求，網頁可自HTML檔案、可延伸超文字標示語言（Extensible Hyper Text Markup Language；XHTML）檔案或可延伸標示語言（Extensible Markup Language；XML）檔案呈現。此類頁亦可執行指令碼、標示語言與指令碼之組合，及其類似者。本文中，在適當時，對網頁之提及涵蓋一或多個對應的網頁檔案（瀏覽器可使用該等網頁檔案以呈現網頁），且反之亦然。

在特定具體實例中，社交網路連接系統760可為網路可定址計算系統，其可代管線上社交網路。社交網路連接系統760可產生、儲存、接收及發送社交網路連接資料，諸如使用者設定檔資料、概念設定檔資料、社交圖資訊，或與線上社交網路相關的其他合適之資料。社交網路連接系統760可由網路環境700之其他組件直接或經由網路710來存取。作為一實例而非作為限制，用戶端系統730可使用網頁瀏覽器732或與社交網路連接系統760相關聯之原生應用程式（例如，行動社交網路連接應用程式、傳訊應用程式、另一合適之應用程式或其任何組合）而直接或經由網路710來存取社交網路連接系統760。在特定具體實例中，社交網路連接系統760可包括一或多個伺服器762。各伺服器762可為跨越多個電腦或多個資料中心之單式伺服器或分佈式伺服器。伺服器762可具有各種類型，諸如但不限於網頁伺服器、新聞伺服器、郵件伺服器、訊息伺服器、廣告伺服器、檔案伺服器、應用程式伺服器、交換伺服器、資料庫伺服器、代理伺服器、適於執行本文中所描述的功能或程序之另一伺服器，或其任何組合。在特定具體實例中，各伺服器762可包括硬體、軟體或嵌入式邏輯組件或兩個或更多個此類組件之組合，以用於實行由伺服器762實施或支援之適當功能。在特定具體實例中，社交網路連接系統760可包括一或多個資料儲存區764。資料儲存區764可用於儲存各種類型之資訊。在特定具體實例中，儲存於資料儲存區764中之資訊可根據特定資料結構來組織。在特定具體實例中，各資料儲存區764可為關係、柱狀、相關性或其他合適之資料庫。儘管本發明描述或說明特定類型之資料庫，但本發明涵蓋任何合適類型之資料庫。特定具體實例可提供使得用戶端系統730、社交網路連接系統760或第三方系統770能夠管理、擷取、修改、添加或刪除儲存於資料儲存區764中之資訊的介面。

在特定具體實例中，社交網路連接系統760可將一或多個社交圖儲存在一或多個資料儲存區764中。在特定具體實例中，社交圖可包括多個節點-其可包括多個使用者節點（各使用者節點對應於特定使用者）或多個概念節點（各概念節點對應於特定概念）-及連接節點之多個邊緣。社交網路連接系統760可向線上社交網路之使用者提供與其他使用者通信及互動之能力。在特定具體實例中，使用者可經由社交網路連接系統760加入線上社交網路且接著添加連接（例如，關係）至其想要連接至的社交網路連接系統760之多個其他使用者。本文中，術語「朋友」可指使用者經由社交網路連接系統760與其形成連接、相關聯性或關係之社交網路連接系統760的任何其他使用者。

在特定具體實例中，社交網路連接系統760可向使用者提供對由社交網路連接系統760支援之各種類型的項目或物件採取動作之能力。作為一實例而非作為限制，項目及物件可包括社交網路連接系統760之使用者可能屬於的群組或社交網路、使用者可能感興趣的事件或日曆條目、使用者可使用之基於電腦之應用程式、允許使用者經由服務購買或出售項目之交易、使用者可執行之與廣告之互動，或其他合適之項目或物件。使用者可與能夠在社交網路連接系統760中表示或由第三方系統770之外部系統表示之任何內容互動，該第三方系統與社交網路連接系統760分離且經由網路710耦接至社交網路連接系統760。

在特定具體實例中，社交網路連接系統760可能夠鏈接多種實體。作為一實例而非作為限制，社交網路連接系統760可使得使用者能夠彼此互動以及自第三方系統770或其他實體接收內容，或允許使用者藉由應用程式設計介面（application programming interface；API）或其他通信通道與此等實體互動。

在特定具體實例中，第三方系統770可包括一或多種類型的伺服器、一或多個資料儲存區、包括但不限於API之一或多個介面、一或多個網路服務、一或多個內容源、一或多個網路，或例如伺服器可與其通信之任何其他合適組件。第三方系統770可由不同於操作社交網路連接系統760之實體的實體操作。然而，在特定具體實例中，社交網路連接系統760及第三方系統770可彼此協同操作以將社交網路連接服務提供至社交網路連接系統760或第三方系統770之使用者。在此意義上，社交網路連接系統760可提供平台或骨幹，諸如第三方系統770之其他系統可使用該平台或骨幹以將社交網路連接服務及功能提供至網際網路上之使用者。

在特定具體實例中，第三方系統770可包括第三方內容物件提供者。第三方內容物件提供者可包括內容物件之一或多個來源，該等內容物件可經傳達至用戶端系統730。作為一實例而非作為限制，內容物件可包括關於使用者感興趣的事物或活動之資訊，諸如電影放映時間、電影評論、餐廳評論、餐廳選單、產品資訊及評論，或其他合適之資訊。作為另一實例而非作為限制，內容物件可包括激勵內容物件，諸如優惠券、折扣票、禮券或其他合適激勵物件。

在特定具體實例中，社交網路連接系統760亦包括使用者產生之內容物件，其可增強使用者與社交網路連接系統760之互動。使用者產生之內容可包括使用者可添加、上傳、發送或「發佈」至社交網路連接系統760之任何內容。作為一實例而非作為限制，使用者將貼文自用戶端系統730傳達至社交網路連接系統760。貼文可包括諸如狀態更新或其他文字資料、位置資訊、相片、視訊、鏈接、音樂或者其他類似資料或媒體之資料。內容亦可由第三方藉由「通信通道」（諸如新聞推送或流）添加至社交網路連接系統760。

在特定具體實例中，社交網路連接系統760可包括多種伺服器、子系統、程式、模組、日誌及資料儲存區。在特定具體實例中，社交網路連接系統760可包括以下中之一或多者：網頁伺服器、動作記錄器、API請求伺服器、相關性及分級引擎、內容物件分類器、通知控制器、動作日誌、第三方內容物件曝光日誌、推斷模組、授權/隱私伺服器、搜尋模組、廣告定位模組、使用者介面模組、使用者設定檔儲存區、連接儲存區、第三方內容儲存區或位置儲存區。社交網路連接系統760亦可包括合適組件，諸如網路介面、安全性機構、加載平衡器、故障接管伺服器、管理及網路操作控制台、其他合適之組件，或其任何合適組合。在特定具體實例中，社交網路連接系統760可包括用於儲存使用者設定檔之一或多個使用者設定檔儲存區。使用者設定檔可包括例如個人資訊、個人背景資訊、行為資訊、社交資訊或其他類型之描述性資訊，諸如工作經歷、學歷、愛好或偏好、興趣、親和力或位置。興趣資訊可包括與一或多個類別相關之興趣。類別可為通用或特定的。作為一實例而非作為限制，若使用者「喜歡」關於鞋子品牌之文章，則類別可為品牌或「鞋子」或「衣服」之通用類別。連接儲存區可用於儲存關於使用者之連接資訊。連接資訊可指示具有類似或共同工作經驗、群組會員、業餘愛好、教育歷史或以任何方式相關或具有共同屬性之使用者。連接資訊亦可包括在不同使用者與內容（內部及外部兩者）之間的使用者界定之連接。網頁伺服器可用於經由網路710將社交網路連接系統760鏈接至一或多個用戶端系統730或一或多個第三方系統770。網頁伺服器可包括用於接收訊息及在社交網路連接系統760與一或多個用戶端系統730之間路由訊息之郵件伺服器或其他傳訊功能性。API請求伺服器可允許第三方系統770藉由調用一或多個API來存取來自社交網路連接系統760之資訊。動作記錄器可用於自網頁伺服器接收關於使用者自社交網路連接系統760上線或下線之通信。結合動作日誌，可維護第三方內容物件日誌，以防止使用者曝光於第三方內容物件。通知控制器可將關於內容物件之資訊提供至用戶端系統730。可將資訊作為通知推送至用戶端系統730，或可回應於自用戶端系統730接收到之請求自用戶端系統730提取資訊。授權伺服器可用於推行社交網路連接系統760之使用者的一或多個隱私設定。使用者之隱私設定判定可共用與使用者相關聯之特定資訊的方式。授權伺服器可允許使用者諸如藉由設定適當隱私設定來選擇加入或退出以下條件：使其動作由社交網路連接系統760記錄或與其他系統（例如，第三方系統770）共用。第三方內容物件儲存區可用於儲存自諸如第三方系統770之第三方接收到之內容物件。位置儲存區可用於儲存自用戶端系統730接收到之與使用者相關聯之位置資訊。廣告定價模組可組合社交資訊、當前時間、位置資訊或其他合適資訊以將呈通知之形式的相關廣告提供至使用者。

在特定具體實例中，廣告可為文字（其可經HTML鏈接）、一或多個影像（其可經HTML鏈接）、一或多個視訊、音訊、其他合適之數位物件檔案、此等之合適組合，或以任何合適數位格式呈現於一或多個網頁上、一或多個電子郵件中或與由使用者請求之搜尋結果結合的任何其他合適廣告。另外或作為替代方案，廣告可為一或多個贊助故事（例如，社交網路連接系統760上之新聞饋送或股票代號項）。贊助故事可為使用者之社交動作（諸如，「喜歡」頁面，「喜歡」或評論頁面上之帖文，對與頁面關聯之事件進行RSVP，對發佈在頁面上的問題投票，檢查位置，使用應用程式或玩遊戲，或「喜歡」或共用網站），廣告商例如由使社交動作呈現在使用者之設定檔頁面或其他頁面之預定區域內，呈現有與廣告商相關聯之額外資訊，增加或以其他方式突出顯示在其他使用者之新聞饋送或股票代號內，或以其他方式推廣來推廣該社交動作。廣告商可支付以使社交動作得到推廣。作為一實例而非作為限制，廣告可包括於搜尋結果頁之搜尋結果之中，其中經由非贊助內容促進贊助內容。

在特定具體實例中，可請求廣告以用於在社交網路連接系統網頁，第三方網頁或其他頁內顯示。廣告可顯示在頁之指定部分中，諸如頁之頂部處的橫幅區域中、頁之側面處的行中、頁之GUI中、彈出式窗口中、下拉式選單中、頁之輸入欄位中、頁之內容之頂部上或相對於頁的其他處。另外或作為替代方案，可在應用程式內顯示廣告。廣告可顯示在指定頁內，從而在使用者可存取頁或利用應用程式之前需要使用者與廣告互動或觀看廣告。使用者可例如經由網頁瀏覽器觀看廣告。

使用者可以任何合適方式與廣告互動。使用者可點選或以其他方式選擇廣告。藉由選擇廣告，使用者可被引導至（或瀏覽器或正由使用者使用之其他應用程式）與廣告相關聯之頁。在與廣告相關聯之頁處，使用者可採取額外動作，諸如購買與廣告相關聯之產品或服務、接收與廣告相關聯之資訊或訂用與廣告相關聯之簡報。具有音訊或視訊之廣告可藉由選擇廣告之組件（如「播放按鈕」）來播放。替代地，藉由選擇廣告，社交網路連接系統760可執行或修改使用者之特定動作。

廣告亦可包括使用者可與其互動之社交網路連接系統功能性。作為一實例而非作為限制，廣告可藉由選擇與背書相關聯之圖標或鏈接而使得使用者能夠「喜歡」廣告或以其他方式為廣告背書。作為另一實例而非作為限制，廣告可使得使用者能夠搜尋（例如，藉由執行查詢）與廣告商相關之內容。類似地，使用者可將廣告與另一使用者共用（例如，經由社交網路連接系統760）或對與廣告相關聯之事件進行RSVP（例如，經由社交網路連接系統760）。另外或作為替代方案，廣告可包括引導至使用者之社交網路連接系統內容。作為一實例而非作為限制，廣告可顯示關於採取與廣告之主題相關聯之動作的社交網路連接系統760內之使用者之朋友的資訊。

圖 8繪示實例電腦系統800。在特定具體實例中，一或多個電腦系統800執行本文中描述或說明的一或多種方法之一或多個步驟。在特定具體實例中，一或多個電腦系統800提供本文中描述或說明之功能性。在特定具體實例中，在一或多個電腦系統800上運行的軟體執行本文中描述或說明的一或多種方法之一或多個步驟或提供本文中描述或說明的功能性。特定具體實例包括一或多個電腦系統800之一或多個部分。本文中，適當時，對電腦系統之參考可涵蓋計算裝置，且反之亦然。此外，在適當時，對電腦系統之參考可涵蓋一或多個電腦系統。

本發明涵蓋任何合適數目個電腦系統800。本發明涵蓋採取任何合適實體形式之電腦系統800。作為實例而非作為限制，電腦系統800可為嵌入式電腦系統、系統單晶片（system-on-chip ；SOC）、單板電腦系統（single-board computer system；SBC）（諸如模組電腦（computer-on-module；COM）或模組系統（system-on-module；SOM））、桌上型電腦系統、膝上型電腦或筆記本電腦系統、互動式查詢一體機、大型電腦、電腦系統之網格、行動電話、個人數位助理（personal digital assistant；PDA）、伺服器、平板電腦系統、擴增/虛擬實境裝置，或此等中之兩者或更多者的組合。在適當時，電腦系統800可包括一或多個電腦系統800；為單式或分佈式；橫跨多個位置；橫跨多個機器；橫跨多個資料中心；或駐留於雲中，該雲可包括一或多個網路中之一或多個雲組件。在適當時，一或多個電腦系統800可在無實質空間或時間限制情況下執行本文中描述或說明的一或多種方法之一或多個步驟。作為一實例而非作為限制，一或多個電腦系統800可即時或以批量模式執行本文中描述或說明一或多種方法之一或多個步驟。在適當時，一或多個電腦系統800可在不同時間或在不同位置執行本文中描述或說明的一或多種方法之一或多個步驟。

在特定具體實例中，電腦系統800包括處理器802、記憶體804、儲存區806、輸入/輸出（input/output；I/O）介面808、通信介面810及匯流排812。儘管本發明描述及說明具有在特定配置中之特定數目個特定組件的特定電腦系統，但本發明涵蓋在任何合適配置中之任何合適數目個任何合適組件之任何合適電腦系統。

在特定具體實例中，處理器802包括用於執行指令（諸如組成電腦程式之指令）之硬體。作為一實例而非作為限制，為執行指令，處理器802可自內部暫存器、內部快取記憶體、記憶體804或儲存區806擷取（或提取）指令；對其進行解碼並執行該等指令；且接著將一或多個結果寫入至內部暫存器、內部快取記憶體、記憶體804或儲存區806。在特定具體實例中，處理器802可包括用於資料、指令或位址之一或多個內部快取記憶體。在適當時，本發明涵蓋包括任何合適數目個任何合適的內部快取記憶體之處理器802。作為一實例而非作為限制，處理器802可包括一或多個指令快取記憶體、一或多個資料快取記憶體及一或多個轉譯後備緩衝器（translation lookaside buffer；TLB）。指令快取記憶體中之指令可為記憶體804或儲存區806中之指令的複本，且指令快取記憶體可加速藉由處理器802進行的對於彼等指令的擷取。資料快取記憶體中之資料可為記憶體804或儲存區806中供在處理器802處執行的指令操作之資料的複本；供在處理器802處執行之後續指令存取或供寫入至記憶體804或儲存區806的在處理器802處執行的先前指令之結果；或其他合適資料。資料快取記憶體可加速藉由處理器802進行的讀取或寫入操作。TLB可加速用於處理器802之虛擬位址轉譯。在特定具體實例中，處理器802可包括用於資料、指令或位址之一或多個內部暫存器。在適當時，本發明涵蓋包括任何合適數目個任何合適內部暫存器之處理器802。在適當時，處理器802可包括一或多個算術邏輯單元（arithmetic logic unit；ALU）；為多核處理器；或包括一或多個處理器802。儘管本發明描述及說明特定處理器，但本發明涵蓋任何合適之處理器。

在特定具體實例中，記憶體804包括用於儲存供處理器802執行之指令或供處理器802操作之資料的主記憶體。作為一實例而非作為限制，電腦系統800可將指令自儲存區806或另一源（諸如另一電腦系統800）加載至記憶體804。處理器802接著可將指令自記憶體804加載至內部暫存器或內部快取記憶體。為執行指令，處理器802可自內部暫存器或內部快取記憶體擷取指令並對其進行解碼。在指令執行期間或之後，處理器802可將一或多個結果（其可為中間或最終結果）寫入至內部暫存器或內部快取記憶體。處理器802接著可將彼等結果中之一或多者寫入至記憶體804。在特定具體實例中，處理器802僅僅執行一或多個內部暫存器或內部快取記憶體中或記憶體804（與儲存區806相對或在別處）中的指令且僅僅對一或多個內部暫存器或內部快取記憶體中或記憶體804（與儲存區806相對或在別處）中之資料進行操作。一或多個記憶體匯流排（其可各自包括位址匯流排及資料匯流排）可將處理器802耦接至記憶體804。如下文所描述，匯流排812可包括一或多個記憶體匯流排。在特定具體實例中，一或多個記憶體管理單元（memory management unit；MMU）駐留在處理器802與記憶體804之間並促進對由處理器802所請求之記憶體804的存取。在特定具體實例中，記憶體804包括隨機存取記憶體（random access memory；RAM）。在適當時，此RAM可為揮發性記憶體。適當時，此RAM可為動態RAM（dynamic RAM；DRAM）或靜態RAM（static RAM；SRAM）。此外，在適當時，此RAM可為單埠或多埠RAM。本發明涵蓋任何合適之RAM。在適當時，記憶體804可包括一或多個記憶體804。儘管本發明描述及說明特定記憶體，但本發明涵蓋任何合適之記憶體。

在特定具體實例中，儲存區806包括用於資料或指令之大容量儲存區。作為一實例而非作為限制，儲存區806可包括硬碟機（hard disk drive；HDD）、軟碟機、快閃記憶體、光學光碟、磁性光學光碟、磁帶或通用串列匯流排（Universal Serial Bus；USB）驅動機或此等中之兩者或更多者的組合。在適當時，儲存區806可包括可抽換式或非可抽換式（或固定）媒體。在適當時，儲存區806可在電腦系統800內部或外部。在特定具體實例中，儲存區806為非揮發性固態記憶體。在特定具體實例中，儲存區806包括唯讀記憶體（read-only memory；ROM）。在適當時，此ROM可為遮罩程式化ROM、可程式化ROM（programmable ROM；PROM）、可抹除PROM（erasable PROM；EPROM）、電可抹除PROM（electrically erasable PROM；EEPROM）、電可改ROM（electrically alterable ROM；EAROM），或快閃記憶體或此等中之兩者或更多者的組合。本發明涵蓋採取任何合適實體形式之大容量儲存區806。在適當時，儲存區806可包括一或多個儲存控制單元，其促進在處理器802與儲存區806之間的通信。在適當時，儲存區806可包括一或多個儲存區806。儘管本發明描述及說明特定儲存區，但本發明涵蓋任何合適之儲存區。

在特定具體實例中，I/O介面808包括硬體、軟體或兩者，提供一或多個介面用於在電腦系統800與一或多個I/O裝置之間的通信。在適當時，電腦系統800可包括此等I/O裝置中之一或多者。此等I/O裝置中之一或多者可啟用在個人與電腦系統800之間的通信。作為一實例而非作為限制，I/O裝置可包括鍵盤、小鍵盤、麥克風、監視器、滑鼠、列印機、掃描器、揚聲器、靜態攝影機、手寫筆、平板電腦、觸控螢幕、軌跡球、視訊攝影機、另一合適之I/O裝置或此等中之兩者或更多者之組合。I/O裝置可包括一或多個感測器。本發明涵蓋任何合適之I/O裝置及用於其之任何合適之I/O介面808。在適當時，I/O介面808可包括一或多個裝置或軟體驅動器，使得處理器802能夠驅動此等I/O裝置中之一或多者。在適當時，I/O介面808可包括一或多個I/O介面808。儘管本發明描述及說明特定I/O介面，但本發明涵蓋任何合適之I/O介面。

在特定具體實例中，通信介面810包括硬體、軟體或兩者，提供一或多個介面用於在電腦系統800與一或多個其他電腦系統800或一或多個網路之間的通信（諸如基於封包之通信）。作為一實例而非作為限制，通信介面810可包括用於與乙太網路或其他基於有線之網路通信的網路介面控制器（network interface controller；NIC）或網路配接器或用於與無線網路（諸如WI-FI網路）通信的無線NIC（wireless NIC；WNIC）或無線配接器。本發明涵蓋任何合適的網路及用於其之任何合適的通信介面810。作為一實例而非作為限制，電腦系統800可與特用網路、個人區域網路（personal area network ；PAN）、區域網路（local area network；LAN）、廣域網路（wide area network；WAN）、都會區域網路（metropolitan area network；MAN）或網際網路之一或多個部分或此等中之兩者或更多者的組合通信。此等網路中之一或多者的一或多個部分可為有線或無線的。作為一實例，電腦系統800可與無線PAN（wireless PAN；WPAN）（諸如藍牙WPAN）、WI-FI網路、WI-MAX網路、蜂巢式電話網路（諸如全球行動通信系統（Global System for Mobile Communication；GSM）網路），或其他合適無線網路或此等中之兩者或更多者的組合通信。在適當時，電腦系統800可包括用於此等網路中之任一者的任何合適之通信介面810。在適當時，通信介面810可包括一或多個通信介面810。儘管本發明描述及說明特定通信介面，但本發明涵蓋任何合適之通信介面。

在特定具體實例中，匯流排812包括將電腦系統800之組件彼此耦接的硬體、軟體，或兩者。作為一實例而非作為限制，匯流排812可包括加速圖形埠（Accelerated Graphics Port；AGP）或另一圖形匯流排、增強行業標準架構（Enhanced Industry Standard Architecture；EISA）匯流排、前側匯流排（front-side bus；FSB）、超傳輸（HT）互連、行業標準架構（Industry Standard Architecture；ISA）匯流排、INFINIBAND互連、低針腳數（low-pin-count；LPC）匯流排、記憶體匯流排、微型通道架構（Micro Channel Architecture；MCA）匯流排、周邊組件互連（Peripheral Component Interconnect；PCI）匯流排、PCI高速（PCI-Express；PCIe）匯流排、串列進階附接技術（serial advanced technology attachment；SATA）匯流排、視訊電子標準協會局部（Video Electronics Standards Association local；VLB）匯流排，或另一合適匯流排或此等匯流排中之兩者或更多者的組合。在適當時，匯流排812可包括一或多個匯流排812。儘管本發明描述及說明特定匯流排，但本發明涵蓋任何合適之匯流排或互連。

本文中，電腦可讀取非暫時性儲存媒體或媒體可包括一或多個基於半導體或其他積體電路（integrated circuit；IC）（諸如場可程式化閘極陣列（field-programmable gate array；FPGA）或特殊應用IC（application-specific IC；ASIC））、硬碟機（hard disk drive；HDD）、混合式硬碟機（hybrid hard drive；HHD）、光學光碟、光學光碟機（optical disc drives；ODD）、磁性光學光碟、磁性光學驅動器、軟碟、軟碟機（floppy disk drive；FDD）、磁帶、固態硬碟（solid-state drive；SSD）、RAM驅動機、安全數位卡或驅動器、任何其他適合電腦可讀取非暫時性儲存媒體，或此等中之兩者或更多者的任何合適組合。在適當時，電腦可讀取非暫時性儲存媒體可為揮發性、非揮發性或揮發性與非揮發性的組合。

在本文中，除非另外明確指示或上下文另外指示，否則「或」係包括性且並非排他性的。因此，除非另外明確指示或上下文另外指示，否則本文中「A或B」意謂「A、B或其兩者」。此外，除非另外明確指示或上下文另外指示，否則「及」係聯合及各自兩者。因此，在本文中，除非另外明確指示或上下文另外指示，否則「A及B」意謂「A及B，聯合地或各自地」。

本發明之範圍涵蓋所屬技術領域中具有通常知識者將瞭解的本文中描述或說明之實例具體實例的全部改變、取代、變化、更改及修改。本發明之範圍不限於本文中所描述或說明的實例具體實例。此外，雖然本發明將本文中各別具體實例描述及說明為包括特定組件、元件、特徵、功能、操作或步驟，但此等具體實例中之任一者可包括所屬技術領域中具有通常知識者將瞭解的本文中任何位置描述或說明的組件、元件、特徵、功能、操作或步驟中之任一者的任何組合或排列。此外，所附申請專利範圍中對經調適以、經配置以、能夠、經組態以、經啟用以、可操作以或經操作以執行特定功能的設備或系統或設備或系統之組件的參考涵蓋只要彼設備、系統或組件如此經調適、經配置、能夠、經組態、經啟用、可操作或經操作，彼設備、系統、組件便經啟動、接通或解鎖，而不管其或彼特定功能。另外，儘管本揭露將特定具體實例描述或說明為提供特定優勢，但特定具體實例可提供此等優勢中之無一者、一些或全部。

100:人工實境系統 101:人工實境系統 102:使用者 105A:前向攝影機/外向攝影機/攝影機 105B:前向攝影機/外向攝影機/攝影機 106:控制器 110:計算系統/電腦系統 112:框架 114:顯示器 135:AR顯示裝置 136A:右側顯示器 136B:左側顯示器 145:真實世界物件 145A:重新投影視圖 145B:重新投影視圖 150:真實世界環境 155:AR環境 160:反射光區（glint） 165:虛擬物件 500:方法 510:步驟 520:步驟 530:步驟 540:步驟 550:步驟 560:步驟 570:步驟 600:實例視圖 700:網路環境 710:網路 730:用戶端系統 732:網頁瀏覽器 750:鏈路/第一鏈路/第二鏈路 760:社交網路連接系統 762:伺服器 764:資料儲存區 770:第三方系統 800:電腦系統 802:處理器 804:記憶體 806:儲存區 808:輸入/輸出（input/output；I/O）介面 810:通信介面 812:匯流排

[圖1A]繪示由使用者佩戴之實例人工實境系統。 [圖1B]繪示實例人工實境系統。 [圖2]繪示人工實境系統之透通特徵的實例。 [圖3]繪示使用者在人工實境環境中之實例。 [圖4]繪示使用者在人工實境環境中之實例透視圖。 [圖5]繪示用於管理人工實境環境中之應用程式的實例方法。 [圖6]繪示人工實境中之應用程式生命週期的實例視圖。 [圖7]繪示與社交網路連接系統相關聯之實例網路環境。 [圖8]繪示實例電腦系統。

102:使用者

150:真實世界環境

155:AR環境

160:閃爍

165:虛擬物件

Claims

一種藉由人工實境（AR）系統之作業系統進行之方法，其包含：指示AR頭戴式裝置上之感測器捕捉真實世界環境之感測器資料；基於該感測器資料發現經組態以在該作業系統上原生地運行之原生應用程式予以下載的3D位置；產生並顯示虛擬物件以表示該3D位置處之該原生應用程式；回應於偵測到與該虛擬物件互動的該AR系統之使用者，下載該原生應用程式之第一可執行部分；在執行於該作業系統上之沙盒程序內執行該第一可執行部分，該第一沙盒程序具有一組預定存取權限；在該使用者與該原生應用程式之所執行之該第一可執行部分互動時，漸進地下載該原生應用程式之剩餘可執行部分；及回應於該原生應用程式經完全下載之判定，將該原生應用程式安裝於該作業系統上。
如請求項1之方法，其中該組預定存取權限由該使用者判定。
如請求項2之方法，其中偵測到與該虛擬物件互動的該AR系統之該使用者進一步包含：偵測到對該虛擬物件之視線。
如請求項3之方法，其中在臨限時段內偵測該視線。
如請求項1之方法，其中偵測到與該虛擬物件互動的該AR系統之該使用者進一步包含：偵測到對該虛擬物件之使用者指向。
如請求項5之方法，其中在臨限時段內偵測該使用者指向。
如請求項1之方法，其中偵測到與該虛擬物件互動的該AR系統之該使用者進一步包含：偵測到接近該虛擬物件之該使用者。
如請求項1之方法，其中該虛擬物件基於使用者偏好而提供。
如請求項8之方法，其中該使用者偏好基於使用者定義之設定而判定。
如請求項1之方法，其中該虛擬物件為反射光區。
一種系統，其包含：一或多個處理器；及一或多個電腦可讀取非暫時性儲存媒體，其耦接至該一或多個處理器中之一或多者且包含指令，該指令在由該一或多個處理器中之該一或多者執行時操作上以使得該系統進行以下操作：指示人工實境（AR）頭戴式裝置上之感測器捕捉真實世界環境之感測器資料；基於該感測器資料發現經組態以在作業系統上原生地運行之原生應用程式予以下載的3D位置；產生並顯示虛擬物件以表示該3D位置處之該原生應用程式；回應於偵測到與該虛擬物件互動的AR系統之使用者，下載該原生應用程式之第一可執行部分；在執行於該作業系統上之沙盒程序內執行該第一可執行部分，該第一沙盒程序具有一組預定存取權限；在該使用者與該原生應用程式之所執行之該第一可執行部分互動時，漸進地下載該原生應用程式之剩餘可執行部分；及回應於該原生應用程式經完全下載之判定，將該原生應用程式安裝於該作業系統上。
如請求項11之系統，其中該組預定存取權限由該使用者判定。
如請求項12之系統，其中偵測到與該虛擬物件互動的該AR系統之該使用者進一步包含：偵測到對該虛擬物件之視線。
如請求項13之系統，其中在臨限時段內偵測該視線。
如請求項11之系統，其中偵測到與該虛擬物件互動的該AR系統之該使用者進一步包含：偵測到對該虛擬物件之使用者指向。
如請求項15之系統，其中在臨限時段內偵測該使用者指向。
如請求項11之系統，其中偵測到與該虛擬物件互動的該AR系統之該使用者進一步包含：偵測到接近該虛擬物件之該使用者。
如請求項11之系統，其中該虛擬物件基於使用者偏好而提供。
如請求項18之系統，其中該使用者偏好基於使用者定義之設定而判定。
一種體現軟體之一或多個電腦可讀取非暫時性儲存媒體，該軟體在被執行時操作上用以進行以下操作：指示人工實境（AR）頭戴式裝置上之感測器捕捉真實世界環境之感測器資料；基於該感測器資料發現經組態以在作業系統上原生地運行之原生應用程式予以下載的3D位置；產生並顯示虛擬物件以表示該3D位置處之該原生應用程式；回應於偵測到與該虛擬物件互動的AR系統之使用者，下載該原生應用程式之第一可執行部分；在執行於該作業系統上之沙盒程序內執行該第一可執行部分，該第一沙盒程序具有一組預定存取權限；在該使用者與該原生應用程式之所執行之該第一可執行部分互動時，漸進地下載該原生應用程式之剩餘可執行部分；及回應於該原生應用程式經完全下載之判定，將該原生應用程式安裝於該作業系統上。