TW202313162A - 用於人工實境環境的內容鏈接 - Google Patents

用於人工實境環境的內容鏈接 Download PDF

Info

Publication number
TW202313162A
TW202313162A TW111120275A TW111120275A TW202313162A TW 202313162 A TW202313162 A TW 202313162A TW 111120275 A TW111120275 A TW 111120275A TW 111120275 A TW111120275 A TW 111120275A TW 202313162 A TW202313162 A TW 202313162A
Authority
TW
Taiwan
Prior art keywords
user
artificial reality
virtual
virtual area
representation
Prior art date
Application number
TW111120275A
Other languages
English (en)
Inventor
米歇爾 普加爾斯
約翰 尼可拉斯 傑提寇夫
安納 賈西亞 普優爾
阿米爾 麥斯古義奇 哈維利歐
傑斯 約翰 穆倫
克利斯多巴爾 阿瓦羅 卡斯提拉 拉孔巴
Original Assignee
美商元平台技術有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商元平台技術有限公司 filed Critical 美商元平台技術有限公司
Publication of TW202313162A publication Critical patent/TW202313162A/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9558Details of hyperlinks; Management of linked annotations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • H04S7/304For headphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本主題技術之各種態樣係關於用於將人工實境內容鏈接至一共用人工實境環境的系統、方法及機器可讀取媒體。各種態樣可包括諸如自一使用者裝置接收對一使用者表示及一虛擬區的一選擇。態樣可包含提供該使用者表示以顯示在該虛擬區中。態樣亦可包括自複數個人工實境應用程式判定供該虛擬區中之該使用者表示所使用的一所選擇人工實境應用程式。態樣亦可包括將來自該所選擇人工實境應用程式之視覺內容嵌入至該虛擬區中,該視覺內容可與至該所選擇人工實境應用程式之一深鏈接相關聯。態樣可包括在虛擬區之間轉變該使用者表示,同時向該使用者裝置提供指示與另一虛擬區相關聯的其他使用者裝置的一音訊元素。

Description

用於人工實境環境的內容鏈接
本發明大體而言係關於鏈接用於電腦生成之共用人工實境環境的人工實境內容。
在電腦生成之共用人工實境環境中於不同人之間的互動涉及不同類型的互動,諸如在共用人工實境環境中共用個人體驗。當多人(例如,使用者)參與共用人工實境環境時,各種使用者可期望與其他使用者共用諸如人工實境內容、人工實境區及/或人工實境應用程式的內容。為使用者提供更多選項來控制如何共用內容的人工實境元素可增強關於在共用人工實境環境中之互動的使用者體驗。
本發明提供用於在人工實境環境(諸如共用虛擬實境環境)中鏈接內容的系統及方法。在一態樣中,提供諸如嵌入內容、指示符元素及/或深鏈接的人工實境元素以改良在人工實境環境之部分之間的連接性。舉例而言,該等元素可促進及/或更直接地實施在人工實境環境之不同虛擬區(例如,空間)之間的行進。該等元素亦可改良以下一或多者之間共用及/或載入內容的便利性:不同使用者表示、人工實境/虛擬實境相容的裝置、人工實境/虛擬實境應用程式或區,及/或其類似物。當使用者/使用者表示在整個人工實境環境中行進並與其他使用者或裝置共用內容時,本發明之人工元素可有利地改良與其他使用者/使用者表示的連接性及/或連續性。
根據本發明之一個具體實例,提供一種用於將人工實境內容鏈接至共用人工實境環境的電腦實施方法。該方法包括接收對使用者表示及虛擬區的選擇。接收請求可經由使用者裝置而發生。該方法亦包括提供使用者表示以顯示在虛擬區中。該方法亦包括自複數個人工實境應用程式判定供虛擬區中之使用者表示所使用的所選擇人工實境應用程式。該方法亦包括將來自所選擇人工實境應用程式之視覺內容嵌入至虛擬區中。視覺內容可與至所選擇人工實境應用程式之深鏈接相關聯。該方法亦包括經由使用者表示來啟動在使用者裝置與所選擇人工實境應用程式之另一虛擬區之間的深鏈接。該方法亦包括在虛擬區與另一虛擬區之間轉變使用者表示,同時向使用者裝置提供指示與另一虛擬區相關聯的其他使用者裝置的音訊元素。
根據本發明之一個具體實例,提供一種系統,其包括處理器及記憶體,該記憶體包含儲存在其上之指令,該等指令在由處理器執行時致使處理器執行用於將人工實境內容鏈接至共用人工實境環境的方法。該方法包括接收對使用者表示及虛擬區的選擇。接收請求可經由使用者裝置發生。該方法亦包括提供使用者表示以顯示在虛擬區中。該方法亦包括自複數個人工實境應用程式判定供虛擬區中之使用者表示所使用的所選擇人工實境應用程式。該方法亦包括將來自所選擇人工實境應用程式之視覺內容嵌入至第一使用者裝置之顯示器中。視覺內容可與至所選擇人工實境應用程式之深鏈接相關聯。該方法亦包括基於視覺內容為第二使用者裝置生成至所選擇人工實境應用程式之深鏈接。該方法亦包括啟動在第二使用者裝置與所選擇人工實境應用程式之另一虛擬區之間的深鏈接。該方法亦包括在虛擬區與另一虛擬區之間轉變使用者表示,同時向第二使用者裝置提供指示與另一虛擬區相關聯的其他使用者表示的音訊元素。
根據本發明之一個具體實例,提供一種非暫時性電腦可讀取儲存媒體,其包括指令(例如,所儲存指令序列),該等指令在由處理器執行時致使處理器執行用於提供至共用人工實境環境中之人工實境內容之鏈接的方法。該方法包括接收對使用者表示及虛擬區的選擇。接收請求可經由使用者裝置而發生。該方法亦包括提供使用者表示以顯示在虛擬區中。該方法亦包括自複數個人工實境應用程式判定供虛擬區中之使用者表示所使用的所選擇人工實境應用程式。該方法亦包括將來自所選擇人工實境應用程式之視覺內容嵌入至虛擬區中。視覺內容可與至所選擇人工實境應用程式之深鏈接相關聯。該方法亦包括經由使用者表示來啟動在使用者裝置與所選擇人工實境應用程式之另一虛擬區之間的深鏈接。該方法亦包括在虛擬區與另一虛擬區之間轉變使用者表示,同時向使用者裝置提供指示與另一虛擬區相關聯的其他使用者裝置的音訊元素。
根據本發明之一個具體實例,提供一種系統,該系統包括用於儲存指令的構件,及用於執行所儲存指令的構件,該等指令在由該用於執行的構件執行時致使該用於執行的構件執行用於將人工實境內容鏈接至共用人工實境環境的方法。該方法包括接收對使用者表示及虛擬區的選擇。接收請求可經由使用者裝置而發生。該方法亦包括提供使用者表示以顯示在虛擬區中。該方法亦包括自複數個人工實境應用程式判定供虛擬區中之使用者表示所使用的所選擇人工實境應用程式。該方法亦包括將來自所選擇人工實境應用程式之視覺內容嵌入至虛擬區中。視覺內容可與至所選擇人工實境應用程式之深鏈接相關聯。該方法亦包括經由使用者表示來啟動在使用者裝置與所選擇人工實境應用程式之另一虛擬區之間的深鏈接。該方法亦包括在虛擬區與另一虛擬區之間轉變使用者表示,同時向使用者裝置提供指示與另一虛擬區相關聯的其他使用者裝置的音訊元素。
在以下詳細描述中,闡述許多具體細節以提供對本發明之全面理解。然而,所屬技術領域中具有通常知識者將明瞭,可在不具有此等特定細節中之一些細節之情況下實踐本發明之具體實例。在其他情況下,未詳細示出眾所周知之結構及技術以免混淆本發明。
所揭示之系統解決與電腦技術相關的虛擬或人工實境中之問題,亦即,電腦生成之共用人工實境環境內之在人工實境使用者表示之間的通信及互動的技術問題。所揭示之系統藉由提供亦植根於電腦技術之解決方案(亦即藉由將人工實境內容鏈接至共用人工實境環境)來解決此技術問題。所揭示之系統亦改良電腦本身的功能,此係因為其使得電腦能夠改良電腦內部通信,以用於生成及主控共用人工實境環境的電腦系統的實際應用。特定而言,所揭示之系統提供經改良人工實境元素,其改良電腦生成之共用人工實境環境內之在使用者表示之間的通信。
本發明之態樣係針對創建及管理人工實境環境。舉例而言,人工實境環境可為共用人工實境(AR)環境、虛擬實境(VR)、超實境(XR)環境、擴增實境環境、混合實境環境、混合實境環境、非沉浸式環境、半沉浸式環境、完全沉浸式環境及/或其類似物。XR環境亦可包括AR協作工作環境,其包括在XR環境中各種人或使用者之間的互動模式。本發明之XR環境可提供使得使用者能夠感覺與其他使用者有聯繫的元素。舉例而言,可提供音訊及視覺元素,該等音訊及視覺元素維持在參與XR環境之各種使用者之間的聯繫。如本文中所使用,「真實世界」物件係非電腦生成的,而AR或VR物件係電腦生成的。舉例而言,真實世界空間係佔據電腦外部位置之物理空間,而真實世界物件係具有電腦外部物理性質的實體物件。舉例而言,AR或VR物件可經呈現且為電腦生成之XR環境之一部分。
所揭示之技術的具體實例可包括人工實境系統或結合人工實境系統來實施。人工實境、擴展實境或超實境(統稱「XR」)係在向使用者呈現之前已以某一方式調整的實境形式,其可包括例如虛擬實境(VR)、擴增實境、混合實境(MR)、複合實境,或其某一組合及/或衍生物。人工實境內容可包括完全生成的內容或與所捕獲內容(例如,真實世界照片)組合之生成的內容。人工實境內容可包括視訊、音訊、觸覺回饋或其某一組合,其中任何一者可在單一頻道或多個頻道中呈現(諸如向觀眾產生三維效應的立體視訊)。另外,在一些實施中,人工實境可與用於例如在人工實境中創建內容及/或用於人工實境中(例如,在其中執行活動)的應用程式、產品、附件、服務或其某一組合相關聯。提供人工實境內容之人工實境系統可在各種平台上實施,包括連接至主機電腦系統之頭戴式顯示器(HMD)、獨立HMD、行動裝置或計算系統,「虛擬實境洞穴系統(CAVE)」環境或其他投影系統,或能夠向一或多個觀眾提供人工實境內容之任何其他硬體平台。
如本文中所使用,「虛擬實境」或「VR」係指使用者之視覺輸入由計算系統控制的沉浸式體驗。「擴增實境」或「AR」係指使用者在真實世界之影像通過計算系統之後查看該等影像的系統。舉例而言,背面上帶有攝影機的平板電腦可捕獲真實世界之影像,然後將影像顯示在平板電腦與攝影機相對的一側上之螢幕上。平板電腦可在影像通過系統時處理及調整或「擴增」影像,諸如藉由添加虛擬物件。「混合實境」或「MR」係指進入使用者眼睛之光部分地由計算系統生成且部分地構成自真實世界中之物件反射之光的系統。舉例而言,MR頭戴式耳機可經塑形為一副帶有直通顯示器的眼鏡,其允許來自真實世界之光通過波導,同時自MR頭戴式耳機中之投影機發射光,從而使MR頭戴式耳機呈現與使用者可看見之真實物件混合的虛擬物件。如本文中所使用,「人工實境」、「超實境」或「XR」係指VR、AR、MR或其任何組合或混合中之任一者。
下文參考圖更詳細地論述幾種實施。圖1為可實施主題技術之態樣之裝置操作環境的方塊圖。該等裝置可包含計算系統100之硬體組件,該計算系統可為人工實境協作工作環境創建、管理及提供互動模式。在各種實施中,計算系統100可包括經由有線或無線頻道進行通信以分佈處理及共用輸入資料的單個計算裝置或多個計算裝置。在一些實施中,計算系統100可包括能夠為使用者提供電腦創建或擴增體驗而不需要外部處理或感測器的獨立頭戴式耳機。在其他實施中,計算系統100可包括多個計算裝置,諸如頭戴式耳機及核心處理組件(諸如控制台、行動裝置或伺服器系統),其中一些處理操作對頭戴式耳機執行,且將其他處理操作卸載至核心處理組件。下文結合圖2A至圖2B描述實例頭戴式耳機。在一些實施中,位置及環境資料可僅由併入在頭戴式耳機裝置中之感測器收集,而在其他實施中,非頭戴式耳機計算裝置中之一或多者可包括可追蹤環境或位置資料之感測器組件。
計算系統100可包括一或多個處理器110 (例如,中央處理單元(CPU)、圖形處理單元(GPU)、全像處理單元(HPU)等)。處理器110可為裝置中之單個處理單元或多個處理單元或橫跨多個裝置分佈(例如,橫跨計算裝置中之兩者或多於兩者分佈)。
計算系統100可包括一或多個輸入裝置104,該一或多個輸入裝置向處理器110提供輸入,通知其動作。動作可由硬體控制器調解,該硬體控制器解釋自輸入裝置接收之信號並使用通信協定將資訊傳遞至處理器110。每一輸入裝置104可包括例如滑鼠、鍵盤、觸控螢幕、觸控板、可穿戴輸入裝置(例如,觸覺手套、手鐲、戒指、耳環、項鍊、手錶等)、攝影機(或其他基於光之輸入裝置,例如紅外線感測器)、麥克風及/或其他使用者輸入裝置。
處理器110可耦接至其他硬體裝置,例如,使用內部或外部匯流排,諸如PCI匯流排、SCSI匯流排、無線連接及/或其類似物。處理器110可與裝置(諸如顯示器106)之硬體控制器進行通信。顯示器106可用於顯示文字及圖形。在一些實施中,顯示器106包括作為顯示器之一部分的輸入裝置,諸如當輸入裝置係觸控螢幕或配備有眼睛方向監測系統時。在一些實施中,顯示器與輸入裝置分開。顯示裝置之實例係:LCD顯示螢幕、LED顯示螢幕、投影、全像或擴增實境顯示器(諸如抬頭顯示裝置或頭戴式裝置)及/或其類似物。其他I/O裝置108亦可耦接至處理器,諸如網路晶片或卡、視訊晶片或卡、音訊晶片或卡、USB、火線或其他外部裝置、攝影機、印表機、揚聲器、CD-ROM光碟機、DVD光碟機、磁碟機等。
計算系統100可包括能夠與其他本地計算裝置或網路節點進行無線或有線通信的通信裝置。通信裝置可使用例如TCP/IP協定藉由網路與另一裝置或伺服器進行通信。計算系統100可利用通信裝置來橫跨多個網路裝置而分佈操作。
處理器110可存取記憶體112,其可包含在計算系統100之計算裝置中之一者上,或可橫跨計算系統100之多個計算裝置或其他外部裝置分佈。記憶體包括一或多個用於揮發性或非揮發性儲存器之硬體裝置,且可包括唯讀記憶體及可寫入記憶體兩者。舉例而言,記憶體可包括以下各項中之一或多者:隨機存取記憶體(RAM)、各種快取記憶體、CPU暫存器、唯讀記憶體(ROM)及可寫入非揮發性記憶體,諸如快閃記憶體、硬碟機、軟碟、CD、DVD、磁性儲存裝置、磁帶機等等。記憶體並非脫離基礎硬體的傳播信號;因此,記憶體係非暫時的。記憶體112可包括程式記憶體114,其儲存程式及軟體,諸如作業系統118、XR工作系統120及其他應用程式122。記憶體112亦可包括資料記憶體116,其可包括欲提供至程式記憶體114或計算系統100之任何元件的資訊。
一些實施可與眾多其他計算系統環境或組態一起操作。可能適用於該技術之計算系統、環境及/或組態之實例包括但不限於XR頭戴式耳機、個人電腦、伺服器電腦、手持或膝上型裝置、蜂巢式電話、可穿戴電子器件、遊戲控制台、平板裝置、多處理器系統、基於微處理器之系統、機上盒、可程式化消費電子器件、網路PC、小型電腦、大型電腦、包括任何上述系統或裝置的分佈式計算環境及/或類似物。
圖2A至圖2B為說明根據本發明之某些態樣之虛擬實境頭戴式耳機的圖。圖2A為虛擬實境頭戴式顯示器(HMD)200的圖。HMD 200包括前剛體205及帶210。前剛體205包括電子顯示器245、慣性運動單元(IMU)215、一或多個位置感測器220、定位器225及一或多個計算單元230之一或多個電子顯示元件。位置感測器220、IMU 215及計算單元230可在HMD 200內部且可對使用者為不可見。在各種實施中,IMU 215、位置感測器220及定位器225可以三自由度(3DoF)、六自由度(6DoF)等追蹤HMD 200在真實世界及虛擬環境中之移動及位置。舉例而言,定位器225可發射紅外線光束,該等紅外線光束在HMD 200周圍的真實物件上形成光點。作為另一實例,IMU 215可包括例如一或多個加速度計、陀螺儀、磁力計、其他非基於攝影機的位置、力或定向感測器,或其組合。與HMD 200整合之一或多個攝影機(未示出)可偵測光點。HMD 200中之計算單元230可使用所偵測到的光點來外推HMD 200之位置及移動,以及識別環繞HMD 200之真實物件之形狀及位置。
電子顯示器245可與前剛體205整合,且可如計算單元230所指示向使用者提供影像光。在各種具體實例中,電子顯示器245可為單個電子顯示器或多個電子顯示器(例如,用於每一使用者眼睛之顯示器)。電子顯示器245之實例包括:液晶顯示器(LCD)、有機發光二極體(OLED)顯示器、主動矩陣有機發光二極體顯示器(AMOLED)、包括一或多個量子點發光二極體(QOLED)子像素的顯示器、投影機單元(例如,microLED、LASER等)、一些其他顯示器或其一些組合。
在一些實施中,HMD 200可耦接至核心處理組件,諸如個人電腦(PC)(未示出)及/或一或多個外部感測器(未示出)。外部感測器可監測HMD 200(例如,經由自HMD 200發射之光),PC可使用該HMD結合來自IMU 215及位置感測器220之輸出來判定HMD 200之位置及移動。
圖2B為混合實境HMD系統250的圖,其包括混合實境HMD 252及核心處理組件254。混合實境HMD 252及核心處理組件254可經由如鏈接256所指示之無線連接(例如,60 GHz鏈接)進行通信。在其他實施中,混合實境系統250僅包括頭戴式耳機,無外部計算裝置,或包括在混合實境HMD 252與核心處理組件254之間的其他有線或無線連接。混合實境HMD 252包括直通顯示器258及框架260。框架260可容納各種電子組件(未示出),諸如光投影機(例如,LASER、LED等)、攝影機、眼動追蹤感測器、MEMS組件、網路組件等。
投影機可例如經由光學元件耦接至直通顯示器258,以向使用者顯示媒體。光學元件可包括一或多個波導總成、反射器、透鏡、反射鏡、準直器、光柵等,用於將來自投影機之光引導至使用者之眼睛。影像資料可經由鏈接256自核心處理組件254傳輸至HMD 252。HMD 252中之控制器可將影像資料轉換為來自投影機之光脈衝,該等光脈衝可經由光學元件作為輸出光傳輸至使用者之眼睛。輸出光可與穿過直通顯示器258之光混合,從而允許輸出光呈現似乎其存在於真實世界中的虛擬物件。
類似於HMD 200,HMD系統250亦可包括運動及位置追蹤單元、攝影機、光源等,其允許HMD系統250例如以3DoF或6DoF追蹤自身,追蹤使用者之部分(例如,手、腳、頭部或其他身體部位),映射虛擬物件以在HMD 252移動時顯現為靜止,並使虛擬物件對示意動作及其他真實世界物件作出反應。
圖2C說明控制器270a至270b,在一些實施中,使用者可用一隻手或雙手握住該等控制器以與HMD 200及/或HMD 250呈現之人工實境環境互動。控制器270a至270b可與HMD直接或經由外部裝置(例如,核心處理組件254)通信。控制器可具有其自己的IMU單元、位置感測器及/或可發射更多的光點。HMD 200或250、外部感測器或控制器中之感測器可追蹤此等控制器光點以判定控制器位置及/或定向(例如,以3DoF或6DoF追蹤控制器)。HMD 200中之計算單元230或核心處理組件254可使用此追蹤結合IMU及位置輸出來監測使用者之手部位置及運動。控制器270a至270b亦可包括各種按鈕(例如,按鈕272A至272F)及/或搖桿(例如,搖桿274A至274B),使用者可致動該等按鈕及/或搖桿以提供輸入並與物件互動。如下文所論述,控制器270a至270b亦可具有尖端276A及276B,當處於劃線控制器模式時,該等尖端可用作人工實境工作環境中之書寫用具之尖端。
在各種實施中,HMD 200或250亦可包括額外子系統,諸如眼動追蹤單元、音訊系統、各種網路組件等。監測使用者互動及意圖的指示。舉例而言,在一些實施中,代替控制器或除了控制器,包括在HMD 200或250中或來自外部攝影機之一或多個攝影機可監測使用者之手的位置及姿勢以判定示意動作及其他手及身體運動。
圖3係說明所揭示之技術之一些實施可在其中操作之環境300之概觀的方塊圖。環境300可包括一或多個用戶端計算裝置,諸如人工實境裝置302、行動裝置304、平板電腦312、個人電腦314、膝上型電腦316、桌上型電腦318及/或其類似物。人工實境裝置302可為HMD 200、HMD系統250、或者是與呈現人工實境或虛擬實境環境或與其互動相容的一些裝置。人工實境裝置302及行動裝置304可經由網路310進行無線通信。在一些實施中,一些用戶端計算裝置可為HMD 200或HMD系統250。用戶端計算裝置可使用藉由網路310至一或多個遠端電腦(例諸如伺服器計算裝置)的邏輯連接在網路環境中操作。
在一些實施中,環境300可包括諸如邊緣伺服器之伺服器,該伺服器接收用戶端請求並藉由其他伺服器協調彼等請求的實現。伺服器可包括伺服器計算裝置306a至306b,其可在邏輯上形成單個伺服器。替代地,伺服器計算裝置306a至306b中可各自為分佈式計算環境,其囊括位於相同或地理上不同的實體位置處之多個計算裝置。
用戶端計算裝置及伺服器計算裝置306a至306b可各自充當伺服器或其他伺服器/用戶端裝置的用戶端。伺服器計算裝置306a至306b可連接至資料庫308。每一伺服器計算裝置306a至306b可對應於一組伺服器,且此等伺服器中之每一者可共用資料庫或可具有其自己的資料庫。資料庫308可在邏輯上形成單個單元或可為分佈式計算環境之一部分,該分佈式計算環境囊括位於其對應伺服器內或位於相同或地理上不同的實體位置處之多個計算裝置。
網路310可為區域網路(LAN)、廣域網路(WAN)、網狀網路、混合網路或其他有線或無線網路。網路310可為網際網路或一些其他公用或專用網路。用戶端計算裝置可藉由網路介面(諸如藉由有線或無線通信)連接至網路310。連接可為任何種類的本地、廣域、有線或無線網路,包括網路310或單獨的公用或專用網路。
在一些實施中,伺服器計算裝置306a至306b可用作社群網路之一部分。社群網路可維護社群圖並基於社群圖執行各種動作。社群圖可包括藉由邊緣(表示互動、活動或相關性)互連的一組節點(表示社群網路系統物件,亦被稱為社群物件)。社群網路系統物件可為社群網路系統使用者、非個人實體、內容項目、群組、社群網路系統頁面、位置、應用程式、主題、概念表示或其他社群網路系統物件,例如電影、樂隊、書等。內容項目可為任何數位資料,諸如文字、影像、音訊、視訊、鏈接、網頁、細節(例如,自用戶端裝置提供的標記,諸如情緒指示符、狀態文字片段、位置指示符等),或其他多媒體。在各種實施中,內容項目可為社群網路項或社群網路項之一部分,諸如帖文、喜歡、提及、新聞項目、事件、分享、評論、訊息、其他通知等。在社群圖的上下文中,主題及概念包含表示任何人、地點、事物或想法的節點。
社群網路系統可使得使用者能夠輸入及顯示與使用者的興趣、年齡/出生日期、位置(例如,經度/緯度、國家、地區、城市等)、教育資訊、生活階段、關係狀態、名稱、典型地使用的裝置型號、識別為使用者容易使用的語言、職業、聯絡資訊或使用者設定檔中之其他人口統計或傳記資訊。在各種實施中,任何此類資訊可由社群圖中之節點或在節點之間的邊緣來表示。社群網路系統可使得使用者能夠上傳或創建圖片、視訊、文件、歌曲或其他內容項目,且可使得使用者能夠創建及排程事件。在各種實施中,內容項目可由社群圖中之節點或節點之間的邊緣來表示。
社群網路系統可使得使用者能夠執行上傳或創建內容項目、與內容項目或其他使用者互動、表達興趣或選項或執行其他動作。社群網路系統可提供與社群網路系統內之非使用者物件互動的各種手段。在各種實施中,動作可由社群圖中之節點或在節點之間的邊緣來表示。舉例而言,使用者可形成或加入群組,或成為社群網路系統內頁面或實體的粉絲。另外,使用者可創建、下載、查看、上傳、鏈接、標籤、編輯或播放社群網路系統物件。使用者可在社群網路系統的上下文之外與社群網路系統物件進行互動。舉例而言,新聞網站上之一篇文章可具有使用者可點擊的「喜歡」按鈕。在此等實例中之每一者中,在使用者與物件之間的互動可由社群圖中將使用者之節點連接至物件之節點的邊緣來表示。作為另一實例,使用者可使用位置偵測功能性(諸如行動裝置上之GPS接收器)「登記」至特定位置,且邊緣可將使用者之節點與社群圖中之位置節點連接在一起。
社群網路系統可為使用者提供多種通信頻道。舉例而言,社群網路系統可使得使用者能夠向一或多個其他使用者發送電子郵件、即時訊息或文字/SMS訊息。其可使得使用者能夠將訊息張貼至使用者之留言板或設定檔或另一使用者之留言板或設定檔。其可使得使用者能夠將訊息張貼至群組或粉絲專頁。其可使得使用者能夠評論由使用者或其他使用者創建或上傳之影像、留言板貼文或其他內容項目。且其可允許使用者在虛擬環境(例如,在人工實境工作環境中)等中與物件或其他虛擬化身進行互動(經由其虛擬化身或寫實表示)等。在一些具體實例中,使用者可向使用者之設定檔張貼狀態訊息,該狀態訊息指示當前事件、心理狀態、思想、感覺、活動或任何其他當前時間相關的通信。社群網路系統可使得使用者能夠在社群網路系統內部及外部進行通信。舉例而言,第一使用者可在社群網路系統內向第二使用者發送訊息、藉由社群網路系統之電子郵件、在社群網路系統外部但源自社群網路系統的電子郵件、社群網路系統內之即時訊息、在社群網路系統外部但源自社群網路系統之即時訊息,在使用者之間提供語音或視訊訊息,或提供虛擬環境,其中使用者可經由自己之虛擬化身或其他數位表示進行通信及互動。此外,第一使用者可評論第二使用者之設定檔頁面,或可評論與第二使用者相關聯的物件(例如,第二使用者上傳之內容項目)。
社群網路系統使得使用者能夠將自己相關聯並與社群網路系統之其他使用者建立聯繫。當兩個使用者(例如,社群圖節點)明確地在社群網路系統中建立社群聯繫時,該等使用者在社群網路系統的上下文內成為「朋友」(或「聯繫」)。舉例而言,由「珍·史密斯(Jane Smith)」接受的自「約翰·多伊(John Doe)」至「珍·史密斯」的好友請求係社群聯繫。社群聯繫可為社群圖中之邊緣。成為朋友或在社群圖上臨限值數目個朋友邊緣內可允許使用者存取更多關於彼此的資訊,而非原本可用於未聯繫使用者的資訊。舉例而言,成為朋友可允許使用者查看另一使用者之設定檔、查看另一使用者的朋友或查看另一使用者的圖片。同樣地,在社群網路系統內成為朋友可允許使用者更大的存取以與另一使用者通信,例如,藉由電子郵件(社群網路系統內部及外部)、即時訊息、文字訊息、電話或任何其他通信介面。作為朋友可允許使用者存取以查看、評論、下載、認可或以其他方式與另一使用者上傳的內容項目互動。在社群網路系統的上下文內建立聯繫、存取使用者資訊、通信及互動可由在表示兩個社群網路系統使用者的節點之間的邊緣來表示。
除了在社群網路系統中顯式建立聯繫,具有共同特性的使用者亦可被認為有聯繫(諸如軟聯繫或隱式聯繫),以便判定用於判定通信主題的社群上下文。在一些具體實例中,屬於共同網路的使用者被認為有聯繫。舉例而言,就讀普通學校、為普通公司工作或屬於普通社群網路系統群組的使用者可被視為有聯繫。在一些具體實例中,具有共同傳記特性的使用者被認為有聯繫。舉例而言,使用者出生或居住的地理區域、使用者的年齡、使用者的性別及使用者的關係狀態可用來判定使用者是否有聯繫。在一些具體實例中,具有共同興趣的使用者被認為有聯繫。舉例而言,使用者的電影偏好、音樂偏好、政治觀點、宗教觀點或任何其他興趣可用於判定使用者是否有聯繫。在一些具體實例中,在社群網路系統內採取共同行動的使用者被認為有聯繫。舉例而言,認可或推薦共同物件、評論共同內容項目或回復共同事件的使用者可被視為有聯繫。社群網路系統可利用社群圖來判定與特定使用者有聯繫或相似的使用者,以便判定或評估在使用者之間的社群上下文。社群網路系統可利用此類社群上下文及共同屬性來促進內容分發系統及內容快取系統以可預測方式選擇內容項目,以用於在與特定社群網路帳戶相關聯的快取設備中進行快取。
圖4A至圖4B說明根據本發明之某些態樣之人工實境環境401a至401b中之使用者介面的實例視圖。舉例而言,人工實境環境可為共用人工實境(AR)環境、虛擬實境(VR)、擴增實境環境、混合實境環境、混合實境環境、非沉浸式環境、半沉浸式環境、完全沉浸式環境及/或其類似物。XR環境401a至401b可經由HMD 200及/或HMD 250呈現。舉例而言,XR環境401a至401b可包括諸如鍵盤、書、電腦及/或其類似物的虛擬物件。虛擬物件可自諸如使用者之真實世界辦公室的真實世界物件所映射。作為實例,混合實境HMD 252中之控制器可將影像資料轉換為來自投影機之光脈衝,以便致使諸如咖啡杯的真實世界物件顯現為XR環境401b中經映射之虛擬實境(VR)咖啡杯物件416。以此方式,作為實例,若使用者移動真實世界咖啡杯,則HMD系統250之運動及位置追蹤單元可致使使用者引起的真實世界咖啡杯的運動被VR咖啡杯物件416的運動反映。
XR環境401a至401b可包括由使用者選擇的背景402。舉例而言,使用者可選擇諸如峽谷、沙漠、森林、海洋、冰川及/或其類似物的地理環境類型。任何類型的合適靜止或非靜止影像可用作使用者選擇背景402。XR環境401a至401b可用作使用者的VR辦公室。VR辦公室可包括用於選擇與共用XR環境相關聯的參數的使用者介面,諸如電腦虛擬物件或顯示螢幕虛擬物件的使用者介面。舉例而言,XR環境401a至401b可包括顯示螢幕虛擬物件403a至403c。顯示螢幕403a至403c可為映射至真實世界顯示螢幕的混合世界物件,諸如使用者真實世界辦公室中之電腦螢幕。顯示螢幕403a至403c可呈現為使用者組態的頁面或視覺介面以選擇XR環境參數。舉例而言,使用者可將XR環境401a至401b組態為適應使用者偏好及使用者所期望的沉浸程度的個人工作空間。作為實例,當使用者在XR環境401a、401b內部時,使用者可選擇維持使用者對諸如使用者之電腦螢幕、滑鼠、鍵盤的真實世界工作工具或對諸如咖啡杯虛擬物件416的其他追蹤物件的存取。以此方式,使用者與真實世界咖啡杯的互動可藉由對應於使用者之使用者表示與咖啡杯虛擬物件416的互動來反映。
此外,XR環境401a、401b包括諸如在瀏覽器視窗上顯示內容之電腦顯示螢幕403a至403c。使用者可使用瀏覽器視窗來選擇AR參數或元素,諸如使用者表示、虛擬區、沉浸式工具及/或其類似物。舉例而言,使用者可選擇其使用者表示應為虛擬化身、視訊表示(例如,示出使用者圖片的視訊螢幕虛擬物件、另一選擇圖片、經由使用者的真實世界攝影機的視訊饋送等),或一些其他合適的使用者表示。瀏覽器視窗可鏈接至使用者之真實世界裝置。作為實例,瀏覽器視窗可鏈接至在使用者之真實世界電腦、平板電腦、電話或其他合適裝置上呈現的真實世界瀏覽器視窗。如此,使用者在真實世界裝置上的動作可藉由對應的虛擬顯示螢幕403a至403c中之一或多者來反映。
混合實境HMD系統250可包括追蹤真實世界裝置螢幕、裝置輸入(例如,鍵盤)、使用者的手及/或類似物的位置的追蹤組件(例如,位置感測器、加速度計等)以判定真實世界中之使用者命令或指令輸入。混合實境HMD系統250可致使使用者輸入在XR環境401a至401b中得到反映及處理。此使得使用者能夠選擇在共用XR環境中使用的使用者表示。所選擇使用者表示可經組態用於顯示在共用XR環境之各種虛擬區中。設定檔選擇區408亦可包括用以選擇使用者在共用XR環境中的會議期間應如何顯現的選項。舉例而言,在多個使用者之間的沉浸式空間中的會議期間,使用者可選擇經由在桌子虛擬物件處的視訊表示加入。作為實例,鏈接至真實世界攝影機的使用者的視訊饋送可用於在會議桌虛擬物件的座位虛擬物件處顯示螢幕虛擬物件。使用者可能夠選擇諸如在會議桌處之各種座位之間切換、在會議發生的虛擬區周圍平移使用者的視圖及/或其類似物。作為實例,使用者可選擇具體虛擬化身,諸如作為人類虛擬物件顯現的虛擬化身。
以此方式,使用者選擇之虛擬化身可追蹤使用者的真實世界表情,諸如經由混合實境HMD系統250的追蹤組件。舉例而言,使用者的面部表情(例如,眨眼、環顧四周等)可由虛擬化身反映。使用者亦可指示與其他使用者的關係,以便在各種使用者表示之間建立聯繫。舉例而言,使用者可藉由使用者輸入指示哪些使用者表示被認為係使用者的朋友或家人。使用者輸入可涉及經由真實世界的滑鼠將朋友或家人的表示拖放至真實世界顯示螢幕上、點擊真實世界滑鼠、使用虛擬物件控制器270a至270b或一些其他合適的輸入機構。經由真實世界物件輸入的使用者輸入可反映在基於混合實境HMD系統250的共用XR環境中。使用者可經由使用者裝置(例如,真實世界電腦、平板電腦、電話、VR裝置等)運用使用者輸入來指示其對應的使用者表示在設定檔選擇區408中的顯現,以使得其他相關聯的使用者表示識別此使用者的使用者表示。與此使用者相關聯的使用者表示的線上或離線狀態可示出在顯示螢幕403a的虛擬化身線上區404中。舉例而言,虛擬化身線上區404可圖形地指示哪些虛擬化身(例如,與使用者之使用者表示相關聯的虛擬化身)係線上以及在什麼位置。
使用者亦可運用使用者輸入在顯示螢幕403b之設定檔選擇區408上選擇共用XR環境及/或XR環境401a至401b之設定檔。使用者之設定檔可包括使用者的工作空間偏好,諸如使用者的家庭辦公室虛擬區的大小、色彩、佈局及/或其類似物。設定檔亦可包括供使用者添加上下文工具的選項,諸如用於添加內容(例如,AR內容)、混合實境物件、與其他使用者共用內容(例如,投射)及/或其類似物的工具。舉例而言,設定檔可規定多個瀏覽器視窗並定義使用者可選擇與其他使用者共用的內容的類型或實例。舉例而言,設定檔可定義使用者選擇以作為虛擬物件永久存在於使用者的個人XR環境401a至401b中之內容的類型或實例。電腦顯示螢幕403c可顯示具有使用者可用來選擇AR應用程式的應用程式庫412的瀏覽器視窗。使用者的手的表示,諸如手虛擬物件410,可用於選擇AR應用程式。
此外,游標或指標414可用於選擇應用程式庫412中之AR應用程式的一或多個實例。舉例而言,使用者可移動真實世界電腦滑鼠,其鏈接至個人XR環境401b中由人手虛擬物件對電腦滑鼠虛擬物件進行的相同移動。如上文所描述,此類鏈接可藉由混合實境HMD系統250的追蹤組件來實現。作為實例,使用者可使用虛擬物件控制器270a至270b來控制游標或指標414。以此方式,使用者可選擇AR應用程式的實例,其可在應用程式庫412中表示為圖形圖符。舉例而言,圖形圖符可為六邊形、正方形、圓形或其他適當形狀的圖形圖符。顯現在應用程式庫412中之圖形圖符可來源於應用程式庫,諸如基於使用者的訂閱、購買、共用及/或其類似物。作為實例,使用者可將特定AR應用程式的指示發送至其他使用者(例如,朋友、家人等)以供共用,諸如以允許其他使用者存取特定AR應用程式(例如,在特定點處),提示其他使用者存取或購買應用程式,發送應用程式的示範版本及/或其類似物。游標或指標414可用於指示或選擇顯示螢幕403a至403c上所顯示的選項。
圖5A至圖5B說明根據本發明之某些態樣之在共用XR環境中嵌入內容的實例視圖。舉例而言,XR環境501a至501b說明模擬包括座位虛擬物件及桌子虛擬物件的會議室組態的虛擬區。桌子虛擬物件可包含內容顯示區502a,諸如用於顯示來自AR應用程式的嵌入內容。作為實例,可在內容顯示區502a中輸出、顯示或以其他方式示出來自所選擇AR應用程式的虛擬物件(例如,AR/VR元素)。各種使用者表示504a至504c可圍繞模擬會議室就座,諸如基於顯現在桌子虛擬物件周圍的對應座位虛擬物件處。舉例而言,使用者表示504a至504c可為朋友、同事或其他相關或不相關的。使用者表示504a至504c中之每一者可顯現為虛擬化身、視訊表示(例如,示出使用者圖片的視訊螢幕虛擬物件、另一選擇圖片、經由使用者的真實世界攝影機的視訊饋送等),或一些其他合適的使用者表示,如由每一對應使用者選擇。出於工作會議、展示或一些其他協作原因,使用者表示504a至504c可位於桌子虛擬物件周圍。
內容顯示區502a可用作展示台,以使得所有使用者表示可共用及查看內容。舉例而言,可啟動內容顯示區502a,使得在內容顯示區502b處顯示內容。在內容顯示區502b中,AR/VR內容可嵌入至內容顯示區502b之表面上,諸如馬虛擬物件402及其他虛擬物件,例如狗及圖框虛擬物件。嵌入的內容可來源於所選擇人工實境應用程式、共用資料儲存區、系統呈現的AR組件、使用者的個人內容儲存器、共用的使用者內容儲存器及/或其類似物。作為實例,在內容顯示區502b中顯示的嵌入內容可來自AR應用程式。使用者可選擇AR應用程式,以及為嵌入的內容之來源的所選擇AR應用程式之一部分。作為實例,AR應用程式可為居家設計應用程式,其中可組態及共用特定類型的設計元素,諸如圖框及動物結構。如此,諸如馬虛擬物件402的設計元素可輸出至內容顯示區502b上且與其他人(例如,與使用者相關聯的使用者/使用者表示)共用。
來自所選擇AR應用程式的嵌入內容可為靜態的或動態的。亦即,嵌入的內容可自AR應用程式的螢幕截圖獲得,或可在使用者表示參與AR應用程式時進行更新。舉例而言,居家設計應用程式可允許使用者/使用者互動與各種設計元素互動,且此動態使用者設計元素互動可反映且顯示在內容顯示區502b處。作為實例,嵌入在內容顯示區502b處的內容可為正在執行的一或多個AR應用程式的微型版本。AR應用程式可為私用的或公用的(例如,共用的)。嵌入的內容可源自一或多個私用AR應用程式、一或多個公用AR應用程式或其組合。以此方式,來自各種AR應用程式的內容可被共享至由內容顯示區502b表示的共用AR/VR空間中。此外,嵌入的內容可自特定AR應用程式以外的其他AR/VR源共用,諸如虛擬物件或元素的儲存庫、AR/VR資料儲存元件、外部AR/VR相容裝置及/或其類似物。
內容顯示區502b中所示的嵌入內容可形成、構成或包括鏈接。鏈接可為深鏈接、上下文鏈接、深上下文鏈接及/或其類似物。舉例而言,馬虛擬物件402可包含深鏈接,該深鏈接致使居家設計AR應用程式載入用於啟動深鏈接的使用者/使用者表示。作為實例,若未購買居家設計AR應用程式,則可提示啟動深鏈接的使用者/使用者表示下載居家設計AR應用程式、購買該應用程式、試用該應用程式的示範版本及/或其類似物。深鏈接可係指在鏈接的AR應用程式(或鏈接的AR/VR元素)中打開、呈現或載入對應的嵌入內容或鏈接。若鏈接係上下文的,則此可係指鏈接的啟動致使在特定層、部分或級別啟動對應鏈接的AR/VR元素。舉例而言,馬虛擬物件402可包含由使用者的朋友創建的深上下文鏈接,使得當使用者啟動深上下文鏈接時,使用者自動轉變至朋友的使用者表示當前所在的居家設計AR應用程式的一部分。
圖6A至圖6B說明根據本發明之某些態樣之用於選擇共用XR環境的目的地區域的XR環境601a至601b的實例視圖。目的地區的選擇可致使使用者自一個虛擬區行進或轉變至共用XR環境的另一虛擬區。可向使用者指示轉變或指示,諸如基於對使用者的指示602(例如,視覺指示、音訊指示等)。舉例而言,當行進經啟動或發生時,藍光視覺指示602或其他色彩視覺指示可顯現為接近於使用者之使用者表示。藍光視覺指示602可為暫時的,使得一旦目的地AR/VR空間完成載入,其即自呈現XR環境消失。在虛擬區之間的行進可涉及延時。呈現或主控共用XR環境的計算系統100或其他合適的AR伺服器/裝置可應用篩選器以在行進發生時變更使用者/使用者表示的延時感知。可應用篩選器以隱藏與載入目的地虛擬區、所選擇AR應用程式、相關聯音訊元素、相關聯視訊元素及/或其類似物相關聯的延時。
作為實例,計算系統100或其他合適的AR伺服器/裝置可致使使用者/使用者表示在載入目的地時感知目的地虛擬區或AR應用程式的預覽。作為實例,當在載入目的地虛擬區或所選擇AR/VR元素中存在延時的時後,可為使用者表示生成靜態螢幕截圖、音訊預覽、視覺預覽及/或其類似物。音訊預覽可包括使得使用者表示能夠以可聽見方式聽到或感知其他相關聯的使用者表示(例如,朋友或家人)的可聽或語言活動的音訊元素。視覺先前可包括使得使用者表示能夠看到其他相關聯的使用者表示的視覺可感知活動的視覺元素。使用者可使用AR主螢幕604來控制與XR環境相關聯的設定(例如,使用者設定、VR/AR設定等),並選擇共用XR環境中之目的地虛擬區或空間,諸如對應於XR環境601a之目標虛擬區。舉例而言,對應於XR環境601a之目標虛擬區可為共用的協作工作空間或標記為「Bluecrush項目」的虛擬會議空間。AR主螢幕604亦可包括或指示與Bluecrush項目或其他所選擇目的地虛擬區相關聯的資訊,諸如事件、社群媒體貼文、更新及/或其類似物。由使用者選擇或與使用者相關的其他資訊亦可包括在AR主螢幕604上。
使用者可運用使用者輸入機構(例如,游標或指標414、控制器270a至270b、手410等)來控制、導覽及/或選擇AR主螢幕604之部分。舉例而言,使用者可使用其手410來選擇或以其他方式指示目的地虛擬區。作為實例,使用者可使用其手410來指示使用者期望離開起始虛擬區(例如,使用者之辦公室等)至目的地虛擬區(例如,Bluecrush項目虛擬空間)。可在私用虛擬區與公用虛擬區之間執行行進。舉例而言,使用者之辦公室可為使用者創建的私用虛擬空間,且Bluecrush項目虛擬空間可為共用的公用虛擬空間。藉由共用人工環境的行進或轉變可藉由轉變指示606來追蹤。舉例而言,轉變指示可為音訊指示、視覺指示、三維物件檔案的移動、虛擬化身與另一虛擬區的互動、螢幕截圖、載入窗口及/或其類似物。作為實例,XR環境601b中所示之轉變指示606指示使用者正離開其辦公室。轉變指示606可在藍光視覺指示602之後或之前。兩個指示符之前皆可為使用者之VR/AR相容裝置載入目標虛擬區。
圖7A至圖7B說明根據本發明之某些態樣之用於選擇共用XR環境的目的地區域的XR環境701a至701b的實例視圖。如上文所論述,目的地區域的選擇可致使使用者自原始虛擬區行進或轉變至共用XR環境之目的地虛擬區。類似於轉變指示606,轉變指示702可指示使用者正在離開Bluecrush項目共用協作虛擬空間。轉變指示702可顯示在AR主螢幕604上面,如在XR環境701a中所示。轉變指示702可包含與對應於使用者之使用者表示相關聯的使用者表示的視覺指示符。相關聯的使用者表示可為同事、朋友、家人、使用者選擇使用者表示及/或其類似物。相關聯的使用者表示可在轉變指示702中顯示為其對應虛擬化身。
在顯示轉變指示702時及/或在對應於使用者之使用者表示正在行進時,使用者/使用者表示可接收指示在共用XR環境之一或多個其他虛擬區中之相關聯使用者表示的音訊元素。舉例而言,可將音訊元素提供至使用者之AR/VR相容裝置以指示相關聯的使用者表示在共用XR環境中之活動或參與。作為實例,音訊元素可指示對應AR應用程式或AR/VR空間中每一相關聯的使用者表示之活動的可聽指示。相關聯的使用者表示可皆位於共用XR環境之同一部分中,諸如皆在同一AR遊戲應用程式中玩。音訊元件可分割成不同的音訊頻道,以使得使用者可同時聽到所有相關聯的使用者表示。替代地,使用者可選擇或挑選一子組音訊頻道以控制經由所提供音訊元素來聽到相關聯的使用者表示中的哪些使用者表示。
預設設定可規定使用者聽到位於原始虛擬區中之所有相關聯的使用者表示。此外,使用者可選擇聽到位於原始虛擬區中之所有使用者表示,而不管使用者表示是否相關聯。類似地,可向使用者之AR/VR相容裝置提供視覺元素,以在視覺上指示相關聯的使用者表示在共用XR環境中之活動或參與。若其他使用者表示與共用XR環境中之使用者之使用者表示位於相同的目的地區域中,則可以可視方式顯示相關聯的使用者表示及其他非相關聯的使用者表示的活動或參與。舉例而言,位於相同虛擬區/目的地中之使用者表示可在由使用者之AR/VR相容裝置呈現的用於使用者表示的顯示螢幕上或在轉變指示702上顯示為虛擬化身。
此外,轉變指示702可包括沉浸式螢幕截圖(例如,目的地虛擬區之實時螢幕截圖、目的地的非動態螢幕截圖、與目的地相關聯的共用XR環境的態樣的圖片等),示出目的地之態樣的載入窗口,及/或所選擇使用者表示的一些其他指示。轉變指示702亦可涉及在使用者表示正行進至目的地時提供目的地虛擬區之三百六十度預覽。舉例而言,三百六十度預覽可為模糊預覽,直至載入完成。作為實例,轉變指示702的預覽可示出在目的地載入之前誰(例如,什麼使用者表示、非使用者AR元素等)將出現在目的地虛擬區中。
以此方式,甚至在使用者表示在整個共用XR環境中行進或轉變時,使用者表示亦可有利地保持與共用XR環境中之其他使用者表示的聯繫(例如,經由所提供的轉變指示702的音訊或視覺元素)。作為實例,可在載入視覺元素及/或目的地虛擬區之視覺組件之前將音訊元素提供至使用者表示。亦即,使用者/使用者表示可在載入視覺組件之前聽到目標虛擬區(例如,音訊元素以可聽見方式表示位於目的地虛擬區中之使用者表示的活動)。舉例而言,轉變指示702之音訊元素可實現使用者表示當前位於的虛擬區以外的虛擬區的可聽模擬,且可實現在虛擬區之間的更平滑的轉變(例如,藉由在視覺組件之前向使用者提供音訊分量)。如上文所論述,轉變指示702可伴隨、之前或之後為藍光視覺指示604。藍光視覺指示604可表示使用者表示處於自原始虛擬區至目的地虛擬區的轉變過程中。
圖8說明根據本發明之某些態樣在共用XR環境中與AR應用程式的互動。如資訊螢幕802所反映,XR環境801示出使用者連接至AR應用程式並參與其中。使用者可運用使用者輸入機構(例如,控制器270a至270b等)來與AR應用程式互動。使用者可使用諸如AR主螢幕604的導覽元素來選擇AR應用程式。作為實例,AR應用程式可為使用者表示可單獨參與或與其他使用者表示(例如,相關聯的使用者表示)結合參與的遊戲。如上文所論述,指示由使用者表示選擇或與使用者表示相關聯的使用者表示的進度的音訊元素及/或視覺元素可經提供至使用者表示。以此方式,使用者/使用者表示可在參與共用XR環境時保持連接至其他使用者表示。作為實例,即使不位於與友好使用者表示相同的虛擬區中,使用者表示亦可在視覺上看到或聽到友好使用者表示。舉例而言,計算系統100或其他合適的AR伺服器/裝置可經由使用者之AR/VR相容使用者裝置的視覺組件向使用者表示顯示友好的使用者表示(例如,虛擬化身)。
舉例而言,計算系統100或其他合適的AR伺服器/裝置可致使經由使用者之AR/VR相容使用者裝置的視覺組件向使用者表示輸出與友好使用者表示的活動相關聯的聲音。作為實例,使用者表示可位於共用XR環境之AR應用程式商店虛擬區中。在AR應用程式商店中,使用者/使用者表示可仍然能夠聽到友好使用者表示及參與所選擇AR應用程式的其他朋友。如此,在使用者表示加入朋友之前,使用者/使用者表示可聽到其朋友在玩所選擇AR應用程式或參與共用XR環境之其他態樣。此外,當使用者參與所選擇AR應用程式時,計算系統100或其他合適的AR伺服器/裝置可向所選擇使用者表示或與使用者表示相關聯的使用者表示來發送音訊元素(例如,與AR應用程式的執行相關聯的音訊)及/或視覺元素。在使用者參與所選擇AR應用程式之前或同時,資訊螢幕802可指示與AR應用程式相關聯的資訊。舉例而言,資訊螢幕802可指示AR應用程式的版本為1.76版本,兩個玩家當前正在玩AR應用程式,且使用者表示在容納18名玩家的遊戲室「work.rn29」中以地址5.188.110.10.5056進行遊戲。
圖9A至圖9B說明根據本發明之某些態樣在人工實境環境之區中應用音訊元素的實例視圖。音訊元素可為針對彼此相關聯的使用者表示、彼此接近的使用者表示、接近於音訊區域的使用者表示、被選為在群組中之使用者表示及/或其類似物而生成的音訊指示。XR環境901a至901b說明音訊區域902a至902c的存在,其中聲音或音訊經調整以模擬真實世界的音訊環境。舉例而言,音訊區域902a可模擬會議桌設定。各種使用者表示可經指派或選擇圍繞會議桌虛擬物件的座位虛擬物件。可在相同的音訊區域902a中考慮各種使用者表示,使得強調音訊區域902a內部之音訊源及/或不強調音訊區域902a外部之音訊源。類似地,XR環境901b描繪音訊區域902b至902c。作為實例,音訊區域902b至902c可模擬在共用工作空間(諸如辦公室工作空間、咖啡店工作空間及/或其類似物)處的毗鄰隔間。舉例而言,公用工作空間可包含在工作台虛擬物件上橫跨彼此或圍繞彼此就座的多個使用者表示。
對於多個使用者表示,可強調音訊區域902b至902c內部的音訊源及/或可不強調音訊區域902b至902c外部的音訊源。舉例而言,可基於諸如聲音放大、聲音消音、聲音隔音、聲音反射及/或其類似物聲音調整來添加或移除聲音強調。作為實例,聲音調整可包括由計算系統100或其他合適的AR伺服器/裝置為對應於音訊區域902b至902c中之使用者表示的每一AR/VR連接裝置來消音或隔音分散音訊源。音訊區域902b至902c外部之任何音訊源皆可被認為係分散且受到消音或隔音的影響。替代地,音訊區域902b至902c外部之一子組音訊源可基於諸如音訊源類型、音訊內容、音訊源與音訊區域的距離及/或其類似物的準則被認為係分散的。此外,分散音訊可向外反射(例如,遠離音訊區域902b至902c)。作為實例,虛擬聲波可由計算系統100或其他合適的AR伺服器/裝置建模,並在背離音訊區域902b至902c的方向上投射或以其他方式傳播。以此方式,音訊區域902b至902c可與一些非所要外部聲音隔離。
相反,來自音訊區域902b至902c內的音訊源的虛擬聲波可朝向音訊區域902b至902c(諸如朝向圍繞桌子虛擬物件就座的使用者表示)傳播。舉例而言,對應於多個使用者表示的對話的虛擬聲波可經放大及/或向內朝向音訊區域902a至902c之中心反射(例如,其可分別對應於會議桌模擬及隔間模擬)。指向一或多個音訊區域902a至902c的其他虛擬聲波可基於此特性在其聲音方面進行表徵及調整。舉例而言,對應於來自位於音訊區域902c外部且與第二使用者表示相關聯(例如,作為朋友)的第一使用者表示的語音的虛擬聲波可經放大及/或朝向音訊區域902c反射。可為每一使用者表示單獨執行此類型的虛擬聲音調整,以使得正確調整被判定為與每一使用者表示相關的聲音。以此方式,每一使用者表示將不會聽到來自不相關聯的使用者表示或其他非所要音訊源的放大聲音。對於每一使用者/使用者表示,可經由適當的使用者輸入來選擇聲音調整設定。作為實例,每一使用者可選擇期望在聲音中放大、隔音或以其他方式修改的音訊類型。
圖10說明根據本發明之某些態樣之AR協作工作環境的實例視圖。舉例而言,AR協作工作環境可為由公司主控的共用AR工作空間1001。共用AR工作空間1001可包含模擬真實世界項目空間的真實世界元素的虛擬物件或格式,諸如椅子虛擬物件、會議桌虛擬物件、簡報表面虛擬物件、簡報表面(例如,各種使用者表示可將內容投射至虛擬或真實世界裝置及/或自其投射的白板或螢幕)、筆記(例如,便利貼虛擬物件等)、桌面虛擬物件。以此方式,AR工作空間1001可經組態以適應各種虛擬工作空間場景,諸如環境桌面存在、小型會議、大型活動、第三人稱體驗及/或其類似物。
AR工作空間1001可包括具有圍繞會議桌虛擬物件之椅子虛擬物件的會議區1002a至1002b。各種使用者表示可藉由選擇椅子虛擬物件來加入會議區1002a至1002b。可需要授予特定使用者表示加入會議區1002a至1002b的私用許可,或會議區1002a至1002b可為公開可存取的。舉例而言,特定使用者表示可需要與其對應的VR/AR裝置相關聯的安全符記或憑證來加入會議區1002a至1002b。使用者可運用使用者輸入機構(例如,游標或指標414、控制器270a至270b、手410等)來指示其對應使用者表示在整個共用AR工作空間1001中的移動。舉例而言,使用者可握住並移動控制器270a至270b以控制其使用者表示。
共用AR工作空間1001可說明對應於使用者之使用者表示在整個具有多個使用者表示的共用XR環境中行進。其使用者表示的受控移動可由移動指示符1004指示。移動指示符1004可包含指示使用者表示經指示移動至哪裡的圓形目的地分量及指示使用者表示經指示移動的方向的虛線分量。移動指示符1004亦可為或包括通知使用者如何在共用AR工作空間1001中移動的其他合適指示符。當使用者在整個共用XR環境中行進時,使用者表示可接收目的地周圍存在其他使用者表示的指示。舉例而言,對應於使用者表示之使用者裝置可輸出螢幕截圖、視覺指示、螢幕截圖、載入窗口及/或其類似物,其指示當使用者表示在AR工作空間1001中行進時哪些使用者表示在其中。輸出存在指示可指示目的地中之所有使用者表示或僅指示與使用者之使用者表示相關聯的使用者表示。如上文所論述,音訊元素及視覺元素可由計算系統100或其他合適的AR伺服器/裝置提供,以使得每一使用者表示保持通信/連接至其他使用者表示(例如,相關聯的使用者表示)。作為實例,在目的地處由使用者表示與另一使用者表示共用的資訊的圖形表示可由與移動指示符1004一起移動的三維檔案可視地表示。
如上文所論述,使用者表示的格式可由共用AR協作工作環境中之每一使用者選擇。作為實例,使用者可選擇多個虛擬化身中之一者,例如女性虛擬化身1006a、男性虛擬化身1006b或一些其他合適的虛擬化身或使用者表示。使用者可定製其使用者表示的外觀,諸如藉由選擇衣服、表情、個人特徵及/或其類似物。作為實例,女性虛擬化身606a經選擇為具有棕色頭髮並穿著一件棕色衣服。作為實例,男性虛擬化身606b經選擇為留著鬍鬚並穿著西裝。以此方式,使用者可運用使用者輸入來選擇用於定義其使用者表示在共用XR環境中顯現的樣子的特性。
圖11說明根據本發明之某些態樣之用於在共用XR環境中將內容自第一源投射至第二源的XR環境1101的實例視圖。舉例而言,第一源可為使用者主顯示螢幕1106,且第二源可為共用簡報顯示螢幕1102。投射內容可係指螢幕投射、鏡像或共用,使得在一個顯示器(例如,第一源、使用者主顯示螢幕1106等)或AR/VR區上顯示或輸出的內容藉由致使在另一顯示器(例如,第二源、共用簡報顯示螢幕1102等)或另一AR/VR區上顯示或輸出相同內容來複製。亦即,使用者可選擇將內容自第一虛擬區投射至共用XR環境中之第二虛擬區。作為實例,使用者或使用者之使用者表示可將私用螢幕(例如,使用者主顯示螢幕1106)上之內容共享至公用或共用螢幕(例如,共用簡報顯示螢幕1102)。以此方式,其他使用者或使用者表示可查看共用螢幕並查看投射內容。
使用者投射的內容可為AR/VR內容、檔案(例如,影像檔案、物件檔案等)、資料、鏈接(例如,深鏈接、上下文鏈接等)、AR/VR應用程式、AR/VR空間及/或其類似物。作為實例,使用者可將鏈接投射至使用者之使用者表示當前正在參與的AR應用程式。更具體地說,使用者可將特定的上下文深鏈接投射至AR應用程式。使用者表示可將一部分、層、視圖及/或其類似物共用或投射至其他所選擇接收者使用者表示。作為實例,使用者表示可投射AR應用程式內之位置的第一人稱視圖。即使接收者當前不位於相同的AR應用程式中(例如,接收者位於共用XR環境之不同虛擬區中),接收者使用者表示亦可查看所投射的第一人稱視圖。當接收者使用者表示啟動所投射的上下文深鏈接時,該深鏈接可致使主體接收者使用者表示啟動或載入對應的AR應用程式。亦即,鏈接所引用的對應AR應用程式的部分(例如,層、視圖、級別等)可為主題接收者使用者表示而自動載入。若主題接收者使用者表示尚未下載或購買對應的AR應用程式,則主題接收者使用者表示可接收外部提示以下載對應的AR應用程式。
舉例而言,線上VR顯示螢幕可提示主題接收者使用者表示下載或購買對應AR應用程式及/或將主題接收者使用者表示轉變至共用XR環境之AR應用程式商店虛擬區。可橫跨AR應用程式執行投射。舉例而言,發送者使用者表示可投射特定AR應用程式之內層之內容或鏈接,使得當前位於特定AR應用程式之外層(例如,或應用程式外部)的接收者使用者表示可直接輸送或轉變至內部中。以此方式,接收者使用者表示可在不同的AR應用程式之間行進。可經由在特定使用者之VR/AR頭戴式耳機上進行選擇來執行投射。舉例而言,HMD 200及/或HMD 250可具有用於選擇投射功能的按鈕或其他使用者輸入。使用者/使用者表示亦可投射與內容相關聯的特定使用者偏好。舉例而言,使用者表示可自為使用者表示打開的音樂顯示螢幕1104共用喜歡的歌曲、最喜歡的歌曲、最喜歡的藝術家、所選擇播放列表、所選擇專輯及/或其類似物。作為實例,音樂顯示螢幕1104可為串流音樂AR應用程式之層或部分,其中使用者表示可載入藝術家克勞德·德布西的播放列表且將此播放列表作為投射至接收者使用者表示之內容來共用。
當投射的內容經發送至所選擇接收者使用者表示時,可為發送者使用者表示顯示投射過程的指示。舉例而言,可在共用XR環境中顯示3維物件檔案,其表示發送者使用者表示正在投射的音樂內容。作為實例,若發送者使用者表示在共用XR環境中自第一虛擬區行進至另一虛擬區,則三維物件檔案亦可行進(例如,物件檔案可為在與發送者使用者表示共用的XR環境中移動的圖形圖符等)。可進行投射以促進橫跨共用XR環境共用內容。舉例而言,使用者表示可將來自AR/VR相容裝置的內容投射至共用XR環境的虛擬區,諸如由使用者裝置主控的簡報(例如,在對應於使用者主顯示螢幕1106的膝上型電腦上存取的PowerPoint簡報)。使用者主顯示螢幕1106可自使用者之膝上型使用者裝置之螢幕投射。共用簡報顯示螢幕1102然後可為共用虛擬顯示區,其反映自使用者主顯示螢幕1106投射之螢幕內容。共用簡報顯示螢幕1102上之投射內容可為與使用者主顯示螢幕1106上所示相同的內容,但具有相同、較低(例如,縮小解析度)或較高解析度(例如,放大解析度)。
圖12A至圖12C說明根據本發明之某些態樣之將來自AR應用程式之視覺內容嵌入至共用XR環境之虛擬區中的實例視圖。虛擬區可為由XR環境1201a至1201c表示的模擬共用會議室設定。會議室設定可包含由多個椅子虛擬物件環繞的會議桌虛擬物件。各種使用者表示可圍繞椅子虛擬物件上之桌子就座。會議桌虛擬物件可為嵌入式視覺內容的來源。舉例而言,會議桌虛擬物件之中心可為嵌入內容顯示區。在XR環境1201a中,來自AR應用程式之諸如微型地圖1202a之視覺內容可嵌入在嵌入內容顯示區中。舉例而言,微型地圖1202a可為迷宮、使用者創建的虛擬空間、建築AR應用程式的起始位置及/或其類似物。
作為實例,微型地圖1202可表示AR應用程式的微型版本。如此,微型地圖1202可包括來自AR應用程式的執行的嵌入內容,使得嵌入AR應用程式內容可經由會議桌虛擬物件之嵌入內容顯示區與其他表示共用。舉例而言,對於建築AR應用程式,嵌入內容可為由使用者經由建築AR應用程式創建的建築平面圖。在此情況下,使用者之使用者表示可與其他使用者表示共用創建的建築平面圖。可表示及操縱創建的建築平面圖(例如,藉由關於共用XR環境的使用者輸入而可選擇及可移動),以使得使用者表示可控制如何顯示、改變、示出等嵌入內容。微型地圖1202a可包括當前位於AR應用程式之對應部分中之使用者表示的指示。舉例而言,對應於使用者A的使用者表示在使用架構AR應用程式設計的建築規劃中之位置可由AR應用程式狀態指示符1204a指示。
AR應用程式狀態指示符1204a可用作任何相關聯使用者表示之空間狀態(例如,應用程式內之位置)的表示。如在XR環境1201b中所示,其他使用者表示、位置標誌、註釋性訊息及/或其類似物的狀態可由微型地圖1202b表示。例如,AR應用程式狀態指示符1204b至1204c可表示某些使用者表示之當前位置。特定使用者表示中之每一者可與使用者表示相關聯,諸如基於係朋友、同事、家人及/或其類似物。AR應用程式狀態指示符1204b至1204c可經色彩編碼,使得AR應用程式狀態指示符1204b為粉紅色且表示使用者表示B,AR應用程式狀態指示符1204c為黃色且表示使用者表示C,且AR應用程式狀態指示符1204b為藍色且表示使用者表示D。應用程式狀態指示符1204b至1204d可在使用者表示A至C分別移動穿過AR應用程式時追蹤及指示其位置。
AR應用程式狀態指示符1204d可指示關於AR應用程式之態樣的訊息。該訊息可為系統生成的或使用者生成的。舉例而言,使用者E可已運用使用者輸入機構(例如,游標或指標414、控制器270a至270b、手410等)來規定指示應稍後檢查廚房水槽的訊息。為進一步詳述,廚房水槽可為經由建築AR應用程式生成的平面圖之一部分,且可對應於需要維修的真實世界水槽。應用程式狀態指示符1204a至1204e中之每一者亦可構成鏈接,諸如深上下文鏈接。作為實例,若使用者運用使用者輸入機構點擊或選擇應用程式狀態指示符1204a至1204e中之一者,則使用者之使用者表示可經自動輸送或轉變至與應用程式狀態指示符1204a至1204e相同的位置。以此方式,共用XR環境可提供內容鏈接,其促進或改良使用者表示可藉由共用XR環境而據以行進或通信的速度。亦即,微型地圖1202a至1202b之深上下文鏈接可有利地改良電腦生成之共用XR環境內的在使用表示之間的連接性。
如上文所論述,微型地圖1202a至1202b可包括或嵌入內容,該內容經嵌入以顯示在會議桌虛擬物件之嵌入內容顯示區處。在嵌入內容顯示區處輸出之微型地圖1202a至1202b的一些或全部內容亦可投射至不同的虛擬區,諸如用於與其他使用者/使用者表示共用。舉例而言,模擬共用會議室設定可包含共用會議顯示螢幕1204(例如,其可類似於共用簡報顯示螢幕1102),各種使用者表示可自該共用會議顯示螢幕投射內容。在啟用將內容投射至共用會議顯示螢幕1204之前,可需要諸如藉由驗證所提供的安全憑證的許可。如在XR環境1201a中所示,微型地圖1202a至1202b之一部分可經投射至共用會議顯示螢幕1204。作為實例,可基於來自使用者表示的指令來投射經由建築AR應用程式生成的平面圖的經標記、經註釋及/或以其他方式指示的部分。
來自使用者表示或來自對應於應用程式狀態指示符1204a至1204e中之一或多者的其他使用者表示的第一人稱視圖亦可經投射至共用會議顯示螢幕1204。此可藉由使得各種表示能夠自其在共用XR環境中之當前位置共用其當前有利位置來改良共用XR環境的通信及/或模擬真實工作態樣。因此,若使用者表示站在由微型地圖1202a至1202b表示的平面圖中,則使用者表示可與其他使用者/使用者表示共用建築AR應用程式(或其他AR/VR應用程式)的對應虛擬區中當前正在查看的內容。
圖13A至圖13B說明根據本發明之某些態樣在共用人工實境環境中經由使用者表示共用內容。XR環境1301a至1301b說明將資料或資訊自使用者/使用者表示共享至另一使用者/使用者表示。資料或資訊可為影像檔案、AR/VR應用程式、文件檔案、資料檔案、鏈接(例如,至應用程式、內容、資料儲存庫的鏈接)、參考文獻及/或其類似物。被共用的資料或資訊可由圖形圖符、縮略圖、三維物件檔案及/或一些其他合適的視覺元素來表示。舉例而言,為使用者呈現的資料共用主螢幕1304基於複數個影像檔案圖符而在視覺上指示可用於檔案傳送或共用的資料或資訊。使用者可運用使用者輸入機構(例如,游標或指標414、控制器270a至270b、手410等)來選擇、在各種影像檔案圖符之間切換、在各種影像檔案圖符之間操縱等以用於預覽、檔案共用、投射及/或其類似物。
作為實例,可在顯示螢幕1302上查看對應於影像檔案圖符中之一者的影像的預覽。此外,使用者可將對應於影像檔案圖符的影像中之一或多者投射至顯示螢幕1302。舉例而言,影像檔案圖符可為在由多個使用者表示參加的會議期間傳送至共用顯示螢幕1302的影像面板。傳送的影像檔案圖符亦可經組態為可由其他使用者表示選擇的鏈接。經組態鏈接可致使儲存在使用者之VR/AR相容頭戴式耳機(例如,HMD 200)之記憶體裝置上之參考影像檔案被傳送至對應於選擇經組態鏈接中之一者的另一使用者表示的VR/AR相容頭戴式耳機。替代地,經組態鏈接可致使經組態鏈接引用的資料儲存至預選目的地(例如,雲端儲存位置、共同網路儲存區等),由遠端儲存系統引用,或自遠端儲存系統下載。
複數個影像檔案圖符可包含在資料共用主螢幕1304上列出的可選二維鏈接。若選擇了多於一個影像,則顯示螢幕1302可經分割或組織,以使得以期望的佈局同時顯示多個影像。可自計算系統100或其他合適的AR伺服器/裝置所呈現的多個選項選擇所期望的佈局,或可由使用者手動規定。如在XR環境1301a中所示,使用者表示可使用控制器270a之尖端276a來控制使得能夠與資料共用主螢幕1304互動的游標。作為實例,使用者表示可使用控制器270a來選擇影像檔案圖符中之一者用於預覽、檔案共用、投射及/或其類似物。XR環境1301b示出使用者表示可如何使用控制器270a將複數個影像檔案圖符中之所選擇影像檔案圖符1306自二維格式轉換為三維格式。當由控制器270a控制的游標用於將所選擇影像檔案圖符1306拖離其在資料共用主螢幕1304中之二維表示時,此可致使所選擇影像檔案圖符1306擴展為三維格式。替代地,可提示使用者表示驗證是否應將所選擇影像檔案圖符1306轉換成三維格式。
XR環境1301b說明使用表示可控制所選擇影像檔案圖符1306用於與另一使用者表示504直接共用。另一使用者表示504可為作為使用者表示之朋友、家人或同事的相關聯使用者表示。作為實例,所選擇影像檔案圖符1306可為經由建築AR應用程式創建的家庭廚房的二維或三維呈現。顯示螢幕1308可包括所選擇影像檔案圖符1306及使用者表示可存取或公開共用給XR環境1301b中之多個使用者表示的其他影像或檔案。另一使用者表示504可接收所選擇影像檔案圖符1306作為至其對應AR/VR相容裝置的檔案傳送。作為實例,當使用者表示啟動與另一使用者表示504的資料傳送時,可直接下載、自第三方位置下載或作為鏈接/參考接收所選擇影像檔案圖符1306。作為實例,資料傳送可致使所選擇影像檔案圖符1306下載至對應於另一使用者表示的AR/VR頭戴式耳機的本地儲存區,或可致使下載所選擇影像檔案圖符1306的提示由一些其他指定的計算裝置或其他裝置接收。
本文中所描述之技術可實施為由實體計算裝置執行的方法;作為一或多種儲存指令的非暫時性電腦可讀取儲存媒體,該等指令當由計算裝置執行時致使方法的執行;或,作為專門經組態有致使方法的執行的硬體及軟體組合的實體計算裝置。
圖14說明根據本發明之某些態樣之用於啟動至共用人工實境環境中之人工實境內容之鏈接的實例流程圖(例如,過程1400)。出於解釋的目的,實例過程1400在本文中參考上文中之一或多者進行描述。進一步出於解釋的目的,實例過程1400之步驟在本文中經描述為串列地或線性地發生。然而,實例過程1400的多個實例可並列發生。出於解釋主題技術的目的,過程1400將參考上文的一或多個圖進行論述。
在步驟1402,可自使用者裝置(例如,第一使用者裝置)接收對用於人工實境應用程式的使用者表示及虛擬區的選擇。舉例而言,來自使用者裝置之使用者輸入可用於自複數個選項選擇使用者表示。可經由顯示螢幕(例如,顯示螢幕403a)進行選擇。舉例而言,使用者可選擇虛擬區(例如,XR環境401a至401b)作為辦公室。
在步驟1404,可提供使用者表示以顯示在虛擬區中。根據一態樣,提供使用者表示以進行顯示可包含提供用於在虛擬區中顯示的虛擬化身類型(例如,女性虛擬化身1006a、男性虛擬化身1006b),用於在虛擬區中顯示的使用者影像,或用於在虛擬區中顯示的使用者裝置的指示。在步驟1406,可判定所選擇供虛擬區中之使用者表示所使用的人工實境應用程式。舉例而言,所選擇人工實境應用程式可為建築人工實境應用程式。
在步驟1408,可將可視內容自所選擇人工實境應用程式嵌入至虛擬區中。視覺內容可與至所選擇人工實境應用程式之深鏈接相關聯。根據一態樣,過程1400可進一步包括將深鏈接發送至經組態以執行所選擇人工實境應用程式或呈現共用人工實境環境的裝置。根據一態樣,嵌入視覺內容可包含判定在虛擬區中向另一使用者裝置顯示三維視覺內容。舉例而言,可經由應用程式介面(API)來執行三維視覺內容。根據一態樣,過程1400可進一步包括經由另一使用者表示(例如,對應於使用者E的使用者表示)接收指示另一人工實境應用程式之一部分的資訊(例如,諸如AR應用程式狀態指示符1204d的訊息)。該資訊可指示與所選擇人工實境應用程式不同的人工實境應用程式的級別、層、部分等,以使得在相關聯的使用者表示參與不同的人工實境應用程式時可向使用者/使用者表示通知相關聯使用者/使用者表示的狀態(例如,位置、進度、應用程式中花費的時間及/或其類似物)。
在步驟1410,可啟動使用者裝置與所選擇人工實境應用程式之另一虛擬區之間的深鏈接。舉例而言,可經由使用者表示來執行啟動。根據一態樣,啟動深鏈接可包含提供與使用者表示相關聯的另一使用者表示的音訊指示或視覺指示(例如,轉變指示606)。另一使用者表示可參與所選擇人工實境應用程式。根據一態樣,過程1400可進一步包括提供與另一使用者裝置相關聯的虛擬化身的顯示(例如,經由AR應用程式狀態指示符1204a)。虛擬化身可參與所選擇人工實境應用程式。根據一態樣,過程1400可進一步包括向使用者裝置提供與所選擇人工實境應用程式的執行相關聯的音訊輸出。舉例而言,音訊輸出可使得使用者/使用者表示能夠感知其他相關聯的使用者表示關於所選擇應用程式的執行的聽覺或語言活動。
在步驟1412,在向使用者裝置提供指示與另一虛擬區相關聯的其他使用者裝置的音訊元素時,使用者表示可在虛擬區與另一虛擬區之間轉變。根據一態樣,使用者表示的轉變可包含變更在虛擬區與另一虛擬區之間的延時感知。舉例而言,可應用篩選器以隱藏在虛擬區與另一虛擬區之間轉變時感知到的延時。根據一態樣,使用者表示的轉變可包含顯示轉變指示(例如,轉變指示606)。轉變指示可包含以下中之至少一者:音訊指示、視覺指示、三維物件檔案的移動、虛擬化身與另一虛擬區的互動、螢幕截圖或載入窗口。
根據一態樣,過程1400可進一步包括經由使用者表示來發送所選擇人工實境應用程式之設定的第一人稱視圖。舉例而言,可將第一人稱視圖投射至顯示區(例如,共用的簡報顯示螢幕1102)的接收者使用者表示。根據一態樣,過程1400可進一步包括基於嵌入視覺內容為另一使用者裝置(例如,第二使用者裝置)生成至所選擇人工實境應用程式之深鏈接。根據一態樣,生成深鏈接可包含在第一使用者裝置之圖形顯示器上顯示快顯視窗。舉例而言,快顯視窗可提示第一使用者裝置下載所選擇人工實境應用程式。
圖15為說明可藉以實施主題技術之態樣之例示性電腦系統1500的方塊圖。在某些態樣,電腦系統1500可使用硬體或軟體及硬體的組合在專用伺服器中、整合至另一實體中或分佈在多個實體中來實施。
電腦系統1500(例如,伺服器及/或用戶端)包括匯流排1508或用於傳遞資訊的其他通信機制,以及與匯流排1508耦合用於處理資訊的處理器1502。舉例而言,電腦系統1500可用一或多個處理器1502來實施。處理器1502可為通用微處理器、微控制器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、可程式化邏輯裝置(PLD)、控制器、狀態機、閘控邏輯、離散硬體組件或任何其他合適可執行計算或其他資訊操縱的實體。
除了硬體,電腦系統1500亦可包括為所討論的電腦程式創建執行環境的程式碼,例如,儲存在耦接至匯流排1508之用於儲存欲由處理器1502執行的資訊及指令的所包括記憶體1504 (諸如隨機存取記憶體(RAM)、快閃記憶體、唯讀記憶體(ROM)、可程式化唯讀記憶體(PROM)、可抹除PROM(EPROM)、暫存器、硬碟、可移動磁碟、CD-ROM、DVD或任何其他合適的儲存裝置)中的構成處理器韌體、協定堆疊、資料庫管理系統、作業系統或其中之一或多者的組合。處理器1502及記憶體1504可由專用邏輯電路系統補充或併入在其中。
指令可儲存在記憶體1504中且在一或多個電腦程式產品中實施,亦即,一或多個電腦程式指令模組編碼在電腦可讀取媒體上以供電腦系統1500執行或控制電腦系統的操作,且根據所屬技術領域中具有通常知識者眾所周知的任何方法,包括但不限於電腦語言,諸如資料導向語言(例如,SQL、dBase)、系統語言(例如,C、Objective-C、C++、組合)、架構語言(例如,Java、.NET)及應用程式語言(例如,PHP、Ruby、Perl、Python)。指令亦可用電腦語言實施,諸如陣列語言、特性導向語言、組合語言、製作語言、命令行介面語言、編譯語言、併發語言、大括弧語言、資料流語言、資料結構化語言、宣告語言、深奧語言、延伸語言、第四代語言、函數式語言、互動模式語言、解釋語言、迭代語言、基於列表的語言、小語言、基於邏輯的語言、機器語言、巨集語言、元程式設計語言、多範式語言、數值分析,非基於英語語言,物件導向基於類別的語言,物件導向的基於原型的語言,反側規則語言,程序式語言,反射式語言、基於規則的語言、指令碼語言、基於堆疊的語言、同步式語言、語法處置語言、可視化語言、wirth語言及基於xml的語言。記憶體1504亦可用於在執行欲由處理器1502執行的指令期間儲存暫時變數或其他中間資訊。
如本文中所論述的電腦程式不一定對應於檔案系統中之檔案。程式可儲存於保持其他程式或資料(例如,儲存在標記語言文件中之一或多個指令檔)的檔案之一部分中、儲存於專用於所討論的程式的單個檔案中或儲存於多個經協調檔案(例如,儲存一或多個模組、子程式或程式碼之部分的檔案)中。電腦程式可經部署以在一個電腦上或位於一個位點處或跨越多個位點來分佈且藉由通信網路互連的多個電腦上執行。本說明書中所描述之過程及邏輯流程可由執行一或多個電腦程式的一或多個可程式化處理器執行以藉由對輸入資料進行操作並生成輸出來執行功能。
電腦系統1500進一步包括耦接至匯流排1508以用於儲存資訊及指令的資料儲存裝置1506,諸如磁碟或光碟。電腦系統1500可經由輸入/輸出模組1510耦接至各種裝置。輸入/輸出模組1510可為任何輸入/輸出模組。例示性輸入/輸出模組1510包括資料埠,諸如USB埠。輸入/輸出模組1510經組態以連接至通信模組1512。例示性通信模組1512包括網路介面卡,諸如乙太網路卡及數據機。在某些態樣中,輸入/輸出模組1510經組態以連接至複數個裝置,諸如輸入裝置1514及/或輸出裝置1516。例示性輸入裝置1514包括鍵盤及指向裝置,例如滑鼠或軌跡球,藉以該鍵盤及指向裝置,使用者可向電腦系統1500提供輸入。其他類型的輸入裝置亦可用於提供與使用者的互動,諸如觸覺輸入裝置、視覺輸入裝置、音訊輸入裝置或腦機介面裝置。舉例而言,提供給使用者的回饋可為任何形式的感官回饋,例如視覺回饋、聽覺回饋或觸覺回饋,且可以任何形式接收來自使用者的輸入,包括聲學、語音、觸覺或腦電波輸入。例示性輸出裝置1516包括用於向使用者顯示資訊的顯示裝置,諸如LCD(液晶顯示器)監測器。
根據本發明之一個態樣,上文所描述遊戲系統可回應於處理器1502執行包含在記憶體1504中之一或多個指令的一或多個序列而使用電腦系統1500來實施。此類指令可自另一機器可讀取媒體(諸如資料儲存裝置1506)讀取至記憶體1504中。包含在主記憶體1504中之指令序列的執行致使處理器1502執行本文中所描述之處理步驟。亦可採用多處理配置中之一或多個處理器來執行包含在記憶體1504中之指令序列。在替代態樣中,硬佈線電路系統可用來代替軟體指令或與軟體指令結合來實施本發明之各種態樣。因此,本發明之態樣不限於硬體電路系統及軟體的任何特定組合。
本說明書中所描述之標的物之各種態樣可在計算系統中實施,該計算系統包括後端組件(例如,諸如資料伺服器)或包括中間軟件組件(例如,應用程式伺服器)或包括前端組件(例如,具有使用者可藉以與本說明書中所描述之標的物的實施互動的圖形使用者介面或Web瀏覽器的用戶端電腦)或一或多個此類後端組件、中間軟件組件或前端組件的任一組合。系統之組件可藉由任何數位資料通信形式或媒體(例如通信網路)互連。通信網路可包括例如LAN、WAN、網際網路及其類似物中之任何一或多者。此外,通信網路可包括但不限於例如以下網路拓樸中之任何一或多者,包括匯流排網路、星形網路、環形網路、網狀網路、星形匯流排網路、樹或分層網路或其類似物。舉例而言,通信模組可為數據機或乙太網路卡。
電腦系統1500可包括用戶端及伺服器。用戶端及伺服器通常彼此遠離且典型地藉由通信網路互動。用戶端與伺服器的關係藉助於在各別電腦上運行且彼此具有用戶端-伺服器關係的電腦程式而出現。電腦系統1500可為例如但不限於桌上型電腦、膝上型電腦或平板電腦。電腦系統1500亦可嵌入在另一裝置中,例如但不限於行動電話、PDA、行動音訊播放器、全球定位系統(GPS)接收器、視訊遊戲控制台及/或電視機上盒。
如本文中所使用,術語「機器可讀取儲存媒體」或「電腦可讀取媒體」係指參與向處理器1502提供指令以供執行的任何一或多個媒體。此類媒體可採取多種形式,包括但不限於非揮發性媒體、揮發性媒體及傳輸媒體。舉例而言,非揮發性媒體包括光碟或磁碟,諸如資料儲存裝置1506。揮發性媒體包括動態記憶體,諸如記憶體1504。傳輸媒體包括同軸纜線、銅線及光纖,包括構成匯流排1508的導線。機器可讀取媒體的常見形式包括例如軟碟、軟性磁碟、硬碟、磁帶、任何其他磁性媒體、CD-ROM、DVD、任何其他光學媒體、打孔卡片、紙帶、任何其他具有孔型樣之實體媒體、RAM、PROM、EPROM、FLASH EPROM、任何其他記憶體晶片或記憶體匣,或電腦可讀取的任何其他媒體。機器可讀取儲存媒體可為機器可讀取儲存裝置、機器可讀取儲存基板、記憶體裝置、影響機器可讀取傳播信號的物質組合物,或其中之一或多個的組合。
當使用者計算系統1500讀取遊戲資料並提供遊戲時,可自遊戲資料讀取資訊並將資訊儲存在諸如記憶體1504的記憶體裝置中。另外,可讀取來自經由網路、匯流排1508或資料儲存器1506存取的記憶體1504伺服器的資料並將其載入至記憶體1504中。儘管資料經描述為在記憶體1504中找到,但應理解,資料不必儲存在記憶體1504中且可儲存在處理器1502可存取的或分佈在若干媒體中之其他記憶體(諸如資料儲存器1506)中。
如本文中所使用,在一系列項目(用術語「及」或「或」分離項目中之任一者)之後的片語「中之至少一者」作為整體修飾列表,而非列表中之每一成員(亦即,每一項目)。片語「中之至少一者」不需要選擇至少一個項目;相反,該片語允許包括項目中之任一者中之至少一者,及/或項目之任何組合中之至少一者,及/或項目中之每一者中之至少一者的含義。例如,短語「A、B及C中之至少一者」或「A、B或C中之至少一者」各自僅係指A、僅B或僅C;A、B及C之任何組合;及/或A、B及C中之每一者中之至少一者。
就說明或申請專利範圍中使用的術語「包括」、「具有」或其類似物而言,此類術語旨在以類似於術語「包含」的方式具有包括性,因為「包含」在採用時解釋為技術方案中之過渡詞。措詞「例示性」在本文中用於意指「用作實例、例子或說明」。本文中描述為「例示性」之任何具體實例未必視為較佳或優於其他具體實例。
以單數形式對一元件之提及並不意欲意指「一個且僅一個」(除非明確地如此陳述),而是「一或多個」。為所屬技術領域中具有通常知識者已知或稍後將知曉之整個本發明所描述之各種組態中之元件的所有結構及功能等效物以引用的方式確切地併入本文中且意欲由申請專利範圍囊括。此外,本文中所揭示之任何內容皆不意指奉獻於公眾而不論此揭示內容是否在上述描述中予以明確地敍述。
儘管本說明書含有許多具體細節,但不應將此等具體細節視為對可主張之內容之範圍的限制,而是應將其視為標的物之特定實施的描述。在單獨具體實例之上下文中於本說明書中描述之特定特徵亦可以組合方式實施於單個具體實例中。相反地,在單個具體實例之上下文中描述之各種特徵亦可單獨地或以任何適合子組合方式實施於多個具體實例中。此外,儘管上文可能將特徵描述為以某些組合之形式起作用,且甚至最初如此主張,但在某些狀況中,可自所主張組合去除來自該組合之一或多個特徵,且所主張組合可針對於一子組合或一子組合之變化形式。
本說明書之標的物已就特定態樣進行描述,但其他態樣可經實施且在以下申請專利範圍之範圍內。舉例而言,儘管在圖式中以特定次序描繪操作,但不應將此理解為需要以所示出之特定次序或以按順序次序執行此類操作,或執行所有所說明的操作以實現所要結果。申請專利範圍中所述之動作可以不同次序執行且仍實現所要結果。作為一個實例,附圖中所描繪之過程未必需要所示出的特定次序,或順序次序以實現所要結果。在某些情況中,多任務及並列處理可為有利的。此外,上文所描述之態樣中之各種系統組件之分離不應被理解為需要在所有態樣中進行此分離,而應理解為所闡述之程式組件及系統通常可一起整合於單個軟體產品中或封裝至多個軟體產品中。其他變化在以下申請專利範圍之範圍內。
100:計算系統 102:共用簡報顯示螢幕 104:輸入裝置 106:顯示器 108:I/O裝置 110:處理器 112:記憶體 114:程式記憶體 116:資料記憶體 118:作業系統 120:超實境(XR)工作系統 122:應用程式 200:虛擬實境頭戴式顯示器(HMD) 205:前剛體 210:帶 215:慣性運動單元(IMU) 220:位置感測器 225:定位器 230:計算單元 245:電子顯示器 270a:控制器 270b:控制器 272A:按鈕 272B:按鈕 272C:按鈕 272D:按鈕 272E:按鈕 272F:按鈕 274A:搖桿 274B:搖桿 276A:尖端 276B:尖端 300:環境 302:人工實境裝置 304:行動裝置 306a:伺服器計算裝置 306b:伺服器計算裝置 308:資料庫 310:網路 312:平板電腦 314:個人電腦 316:膝上型電腦 318:桌上型電腦 401a:人工實境環境/XR環境 401b:人工實境環境/XR環境 402:背景 403a:顯示螢幕/顯示螢幕虛擬物件/電腦顯示螢幕 403b:顯示螢幕/顯示螢幕虛擬物件/電腦顯示螢幕 403c:顯示螢幕/顯示螢幕虛擬物件/電腦顯示螢幕 404:虛擬化身線上區 408:設定檔選擇區 410:手/手虛擬物件 412:應用程式庫 414:游標/指標 416:經映射虛擬實境(VR)咖啡杯物件 501a:XR環境 501b:XR環境 502a:內容顯示區 502b:內容顯示區 504a:使用者表示 504b:使用者表示 504c:使用者表示 601a:XR環境 601b:XR環境 602:指示/藍光視覺指示 604:AR主螢幕 606:轉變指示 701a:XR環境 702:轉變指示 801:XR環境 802:資訊螢幕 901a:XR環境 901b:XR環境 902a:音訊區域 902b:音訊區域 902c:音訊區域 1001:共用AR工作空間 1002a:會議區 1002b:會議區 1004:移動指示符 1006a:女性虛擬化身 1006b:男性虛擬化身 1101:XR環境 1102:共用簡報顯示螢幕 1104:音樂顯示螢幕 1106:使用者主顯示螢幕 1201a:XR環境 1201b:XR環境 1201c:XR環境 1202a:微型地圖 1202b:微型地圖 1204:AR應用程式狀態指示符 1204a:AR應用程式狀態指示符 1204b:AR應用程式狀態指示符 1204c:AR應用程式狀態指示符 1204d:AR應用程式狀態指示符 1204e:應用程式狀態指示符 1301a:XR環境 1301b:XR環境 1302:共用顯示螢幕 1304:資料共用主螢幕 1306:影像檔案圖符 1308:顯示螢幕 1400:過程 1402:步驟 1404:步驟 1406:步驟 1408:步驟 1410:步驟 1412:步驟 1500:電腦系統 1502:處理器 1504:記憶體 1506:資料儲存裝置 1508:匯流排 1510:輸入/輸出模組 1512:通信模組 1514:輸入裝置 1516:輸出裝置
為了容易地識別對任何特定元素或動作的論述,元件符號中之最高有效數位係指彼元素首次引入的附圖編號。
[圖1]為可實施主題技術之態樣之裝置操作環境的方塊圖。
[圖2A]至[圖2B]為說明根據本發明之某些態樣之虛擬實境頭戴式耳機的圖。
[圖2C]說明用於與人工實境環境互動的控制器。
[圖3]係說明本技術之一些實施可在其中操作之環境之概觀的方塊圖。
[圖4A]至[圖4B]說明根據本發明之某些態樣之人工實境環境中之使用者介面的實例視圖。
[圖5A]至[圖5B]說明根據本發明之某些態樣之在人工實境環境中嵌入內容的實例視圖。
[圖6A]至[圖6B]說明根據本發明之某些態樣之選擇人工實境環境之目的地區的實例視圖。
[圖7A]至[圖7B]說明根據本發明之某些態樣之選擇人工實境環境之另一目的地區的實例視圖。
[圖8]說明根據本發明之某些態樣之與人工實境應用程式的互動。
[圖9A]至[圖9B]說明根據本發明之某些態樣在人工實境環境之區中應用音訊元素的實例視圖。
[圖10]說明根據本發明之某些態樣之人工實境協作工作環境的實例視圖。
[圖11]說明根據本發明之某些態樣之在人工實境環境中將內容自第一源投射至第二源的實例視圖。
[圖12A]至[圖12C]說明根據本發明之某些態樣之將來自人工實境應用程式之視覺內容嵌入至人工實境環境之虛擬區中的實例視圖。
[圖13A]至[圖13B]說明根據本發明之某些態樣在共用人工實境環境中經由使用者表示共用內容。
[圖14]為根據本發明之某些態樣之用於將人工實境內容鏈接至共用人工實境環境的實例流程圖。
[圖15]為說明可實施主題技術之態樣之實例電腦系統的方塊圖。
在一或多個實施中,並非每一圖中所描繪之所有組件可為必需的,且一或多個實施可包括圖中未示出之額外組件。在不脫離本發明之範圍的情況下,可進行組件之配置及類型變化。在本發明之範圍內可使用額外組件、不同組件或更少組件。
1400:過程
1402:步驟
1404:步驟
1406:步驟
1408:步驟
1410:步驟
1412:步驟

Claims (20)

  1. 一種用於將人工實境內容鏈接至共用人工實境環境的電腦實施方法,該電腦實施方法包含: 自使用者裝置接收對使用者表示及虛擬區的選擇; 提供該使用者表示以顯示在該虛擬區中; 自複數個人工實境應用程式判定供該虛擬區中之該使用者表示所使用的所選擇人工實境應用程式; 將來自該所選擇人工實境應用程式之視覺內容嵌入至該虛擬區中,其中該視覺內容與至該所選擇人工實境應用程式之深鏈接相關聯; 經由該使用者表示來啟動在該使用者裝置與該所選擇人工實境應用程式之另一虛擬區之間的該深鏈接;及 在該虛擬區與該另一虛擬區之間轉變該使用者表示,同時向該使用者裝置提供指示與該另一虛擬區相關聯的其他使用者裝置的一音訊元素。
  2. 如請求項1之電腦實施方法,其中提供該使用者表示以顯示在該虛擬區中包含提供用於顯示在該虛擬區中的虛擬化身類型、用於顯示在該虛擬區中的使用者影像,或用於顯示在該虛擬區中的該使用者裝置之一指示。
  3. 如請求項1之電腦實施方法,其中將來自該所選擇人工實境應用程式之該視覺內容嵌入至該虛擬區中包含經由應用程式設計介面(API)判定在該虛擬區中向另一使用者裝置顯示的三維視覺內容。
  4. 如請求項1之電腦實施方法,其中啟動在該使用者裝置與該所選擇人工實境應用程式的另一虛擬區之間的該深鏈接包含提供與該使用者表示相關聯的另一使用者表示的音訊指示或視覺指示,其中該另一使用者表示參與該所選擇人工實境應用程式。
  5. 如請求項1之電腦實施方法,其中在該虛擬區與該另一虛擬區之間轉變該使用者表示包含變更在該虛擬區與該另一虛擬區之間的延時感知。
  6. 如請求項1之電腦實施方法,其中在該虛擬區與該另一虛擬區之間轉變該使用者表示包含顯示轉變指示,其中該轉變指示包含以下中之至少一者:音訊指示、視覺指示、三維物件檔案的移動、虛擬化身與該另一虛擬區的互動、螢幕截圖或載入窗口。
  7. 如請求項1之電腦實施方法,其進一步包含將該深鏈接發送至經組態以執行該所選擇人工實境應用程式或呈現該共用人工實境環境的裝置。
  8. 如請求項1之電腦實施方法,其進一步包含: 提供與另一使用者裝置相關聯的虛擬化身的顯示,其中該虛擬化身參與該所選擇人工實境應用程式;及 向該另一使用者裝置提供與該所選擇人工實境應用程式的執行相關聯的音訊輸出。
  9. 如請求項1之電腦實施方法,其進一步包含經由另一使用者表示來接收指示另一人工實境應用程式之一部分的資訊。
  10. 如請求項1之電腦實施方法,其進一步包含經由該使用者表示來發送該所選擇人工實境應用程式之設定的第一人稱視圖。
  11. 一種用於將人工實境內容鏈接至共用人工實境環境的系統,其包含: 一或多個處理器;及 記憶體,其包含儲存在其上之指令,該指令在由該一或多個處理器執行時致使該一或多個處理器執行: 接收對使用者表示及虛擬區的選擇; 提供該使用者表示以顯示在該虛擬區中; 自複數個人工實境應用程式判定供該虛擬區中之該使用者表示所使用的所選擇人工實境應用程式; 將來自該所選擇人工實境應用程式之視覺內容嵌入至第一使用者裝置之顯示器中,其中該視覺內容與至該所選擇人工實境應用程式之深鏈接相關聯; 基於該視覺內容,為第二使用者裝置生成至該所選擇人工實境應用程式之該深鏈接; 啟動在該第二使用者裝置與該所選擇人工實境應用程式之另一虛擬區之間的該深鏈接;及 在該虛擬區與該另一虛擬區之間轉變該使用者表示,同時向該第二使用者裝置提供指示與該另一虛擬區相關聯的其他使用者表示的音訊元素。
  12. 如請求項11之系統,其中致使該一或多個處理器執行為該第二使用者裝置生成至該所選擇人工實境應用程式之該深鏈接的該指令致使該一或多個處理器執行在該第一使用者裝置之圖形顯示器上顯示快顯視窗。
  13. 如請求項11之系統,其中致使該一或多個處理器執行將來自該所選擇人工實境應用程式之該視覺內容嵌入至該虛擬區中之該指令致使該一或多個處理器執行經由應用程式設計介面(API)以判定向第三使用者裝置顯示的影像。
  14. 如請求項11之系統,其中致使該一或多個處理器執行啟動在該第二使用者裝置與該所選擇人工實境應用程式之另一虛擬區之間的該深鏈接的該指令致使該一或多個處理器執行在該另一虛擬區處提供參與該所選擇人工實境應用程式之其他使用者表示的音訊指示或虛擬指示。
  15. 如請求項11之系統,其中致使該一或多個處理器執行在該虛擬區與該另一虛擬區之間轉變該使用者表示的該指令致使該一或多個處理器執行在該虛擬區與該另一虛擬區之間變更延時感知。
  16. 如請求項11之系統,其中致使該一或多個處理器執行在該虛擬區與該另一虛擬區之間轉變該使用者表示的該指令致使該一或多個處理器執行顯示轉變指示,其中該轉變指示包含以下中之至少一者:音訊指示、視覺指示、三維物件檔案的移動、虛擬化身與該另一虛擬區的互動、螢幕截圖,或載入窗口。
  17. 如請求項11之系統,其進一步包含所儲存指令序列,該指令序列在由該一或多個處理器執行時致使該一或多個處理器執行: 提供參與該所選擇人工實境應用程式的其他虛擬化身的顯示;及 向該第二使用者裝置提供與該所選擇人工實境應用程式的執行相關聯的音訊輸出。
  18. 如請求項11之系統,其進一步包含所儲存指令序列,該指令序列在由該一或多個處理器執行時致使該一或多個處理器執行經由另一使用者表示來接收指示另一人工實境應用程式之一部分的資訊。
  19. 如請求項11之系統,其進一步包含所儲存指令序列,該等指令序列在由該一或多個處理器執行時致使該一或多個處理器執行經由該使用者表示來發送該所選擇人工實境應用程式之設定的第一人稱視圖。
  20. 一種包含儲存在其上的指令的非暫時性電腦可讀取儲存媒體,該指令在由一或多個處理器執行時致使該一或多個處理器執行用於將人工實境內容鏈接至共用人工實境環境的操作,該操作包含: 自使用者裝置接收對使用者表示及虛擬區的選擇; 提供該使用者表示以顯示在該虛擬區中; 自複數個人工實境應用程式判定供該虛擬區中之該使用者表示所使用的所選擇人工實境應用程式; 將來自該所選擇人工實境應用程式之視覺內容嵌入至該虛擬區中,其中該視覺內容與至該所選擇人工實境應用程式之深鏈接相關聯; 經由該使用者表示來啟動在該使用者裝置與該所選擇人工實境應用程式之另一虛擬區之間的該深鏈接;及 在音訊元素指示與該使用者裝置相關聯的其他使用者裝置時,在該虛擬區與該另一虛擬區之間轉變該使用者表示。
TW111120275A 2021-09-21 2022-05-31 用於人工實境環境的內容鏈接 TW202313162A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17/481,200 US20230092103A1 (en) 2021-09-21 2021-09-21 Content linking for artificial reality environments
US17/481,200 2021-09-21

Publications (1)

Publication Number Publication Date
TW202313162A true TW202313162A (zh) 2023-04-01

Family

ID=83691490

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111120275A TW202313162A (zh) 2021-09-21 2022-05-31 用於人工實境環境的內容鏈接

Country Status (3)

Country Link
US (1) US20230092103A1 (zh)
TW (1) TW202313162A (zh)
WO (1) WO2023049053A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20240096033A1 (en) * 2021-10-11 2024-03-21 Meta Platforms Technologies, Llc Technology for creating, replicating and/or controlling avatars in extended reality
KR102669261B1 (ko) * 2021-10-15 2024-05-28 (주)이머시브캐스트 클라우드 xr 기반의 프로그램 가상화 방법
WO2023091355A1 (en) * 2021-11-19 2023-05-25 Apple Inc. Scene information access for electronic device applications
US11836205B2 (en) 2022-04-20 2023-12-05 Meta Platforms Technologies, Llc Artificial reality browser configured to trigger an immersive experience
JP2023180343A (ja) * 2022-06-09 2023-12-21 キヤノン株式会社 仮想空間管理システムとその方法
US11755180B1 (en) 2022-06-22 2023-09-12 Meta Platforms Technologies, Llc Browser enabled switching between virtual worlds in artificial reality
US11943265B2 (en) * 2022-08-03 2024-03-26 Tmrw Foundation Ip S. À R.L. Videoconferencing meeting slots via specific secure deep links
US20240089327A1 (en) * 2022-09-12 2024-03-14 Bank Of America Corporation System and method for integrating real-world interactions within a metaverse

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8990707B2 (en) * 2008-01-09 2015-03-24 International Business Machines Corporation System and method for group control in a metaverse application
KR101527993B1 (ko) * 2008-04-05 2015-06-10 소우셜 커뮤니케이션즈 컴퍼니 가상 환경과의 인터페이스 방법
KR101576294B1 (ko) * 2008-08-14 2015-12-11 삼성전자주식회사 가상 현실 시스템에서 사운드 처리를 수행하기 위한 장치 및 방법
WO2012135231A2 (en) * 2011-04-01 2012-10-04 Social Communications Company Creating virtual areas for realtime communications
US10970934B2 (en) * 2012-10-23 2021-04-06 Roam Holdings, LLC Integrated operating environment
CA3135585C (en) * 2012-10-23 2023-10-03 Roam Holdings, LLC Three-dimensional virtual environment
CN109074208A (zh) * 2015-12-10 2018-12-21 阿佩拉公司 用于交互式动态推送通知和其他内容的浮动动画显示的推送界面
US10805253B2 (en) * 2016-12-30 2020-10-13 Facebook, Inc. Systems and methods to transition between media content items
EP3803688A4 (en) * 2018-06-05 2021-08-04 Magic Leap, Inc. MATCHING CONTENT WITH A 3D SPATIAL ENVIRONMENT
US12014455B2 (en) * 2020-05-06 2024-06-18 Magic Leap, Inc. Audiovisual presence transitions in a collaborative reality environment
US11838336B2 (en) * 2020-08-27 2023-12-05 Varty Inc. Virtual events-based social network
CN116438505A (zh) * 2020-09-25 2023-07-14 苹果公司 用于操纵环境中的对象的方法
US11589008B2 (en) * 2020-10-19 2023-02-21 Sophya Inc. Systems and methods for triggering livestream communications between users based on motions of avatars within virtual environments that correspond to users
US10979672B1 (en) * 2020-10-20 2021-04-13 Katmai Tech Holdings LLC Web-based videoconference virtual environment with navigable avatars, and applications thereof
US20230081271A1 (en) * 2021-09-13 2023-03-16 Fei Teng Method for displaying commericial advertisements in virtual reality scene

Also Published As

Publication number Publication date
US20230092103A1 (en) 2023-03-23
WO2023049053A9 (en) 2023-11-02
WO2023049053A1 (en) 2023-03-30

Similar Documents

Publication Publication Date Title
US11902288B2 (en) Artificial reality collaborative working environments
US11372655B2 (en) Computer-generated reality platform for generating computer-generated reality environments
TW202313162A (zh) 用於人工實境環境的內容鏈接
US11831814B2 (en) Parallel video call and artificial reality spaces
US20240087201A1 (en) Interactive Avatars in Artificial Reality
US20240126406A1 (en) Augment Orchestration in an Artificial Reality Environment
US20220291808A1 (en) Integrating Artificial Reality and Other Computing Devices
TW202314487A (zh) 用於人工實境環境的視覺導覽元素
US20230419618A1 (en) Virtual Personal Interface for Control and Travel Between Virtual Worlds
US11921970B1 (en) Coordinating virtual interactions with a mini-map
US20240192973A1 (en) Artificial Reality Simulation for Augment Manipulation Controls on a Two-Dimensional Interface
TW202331702A (zh) 虛擬實境中的音頻配置切換
WO2023249918A1 (en) Virtual personal interface for control and travel between virtual worlds
TW202347261A (zh) 虛擬實境中的立體特徵
TW202345102A (zh) 用於渲染遠距化身、環境和動態物件的可擴展視差系統
CN118229924A (zh) 基于位置的人工现实(xr)显示和交互