TW201631531A - 切換虛擬實境模式與擴增實境模式的管理方法以及系統 - Google Patents

切換虛擬實境模式與擴增實境模式的管理方法以及系統 Download PDF

Info

Publication number
TW201631531A
TW201631531A TW104106214A TW104106214A TW201631531A TW 201631531 A TW201631531 A TW 201631531A TW 104106214 A TW104106214 A TW 104106214A TW 104106214 A TW104106214 A TW 104106214A TW 201631531 A TW201631531 A TW 201631531A
Authority
TW
Taiwan
Prior art keywords
image
virtual reality
augmented reality
mode
reality mode
Prior art date
Application number
TW104106214A
Other languages
English (en)
Other versions
TWI567670B (zh
Inventor
李鐘彬
Original Assignee
宅妝股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宅妝股份有限公司 filed Critical 宅妝股份有限公司
Priority to TW104106214A priority Critical patent/TWI567670B/zh
Priority to CN201510168669.6A priority patent/CN106157077A/zh
Priority to US15/042,121 priority patent/US20160253843A1/en
Priority to EP16155399.5A priority patent/EP3062280A1/en
Publication of TW201631531A publication Critical patent/TW201631531A/zh
Application granted granted Critical
Publication of TWI567670B publication Critical patent/TWI567670B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts

Abstract

揭露書關於一種切換虛擬實境模式與擴增實境模式的管理方法以及系統，使用者操作一電子顯示裝置，自一伺服系統載入虛擬實境影像後，進入一虛擬實境模式，伺服系統將根據選擇某一物件產生的訊號提供物件資訊，此時電子顯示裝置切換進入一擴增實境模式，載入物件資訊相關的擴增實境影像，以電子顯示裝置顯示物件資訊的擴增實境影像，或是結合擴增實境影像與虛擬實境影像的影像，而顯示的方式包括子母畫面，或是分割畫面。

Description

切換虛擬實境模式與擴增實境模式的管理方法以及系統
本發明為一種虛擬實境與擴增實境的切換技術，特別是一種在特定顯示模式下切換虛擬實境模式與擴增實境模式的管理方法以及系統。
消費者的購物行為可以略分為實體店面的購物行為，以及購物網站的消費行為。實體店面擺設實際的商品，如果是如家具或傢飾的商品，店家可以透過店面空間的設計擺設商品，吸引消費者的眼光。
隨著電子商務的成熟，也慢慢影響到消費者的消費習慣，許多商品也都上架在線上購物網站販售，消費者只要點入特定購物網站，就可以搜尋到商品的內容，並可以線上交易支付的手段完成購物。
然而，一般電子商務的線購物網站都是提供平面的商品資訊，最多提供一個商品的多個角度影像，讓消費者可以在這個平面資訊中判斷是否購買。當商品送到手上時，這時消費者才能感受到此商品是否適用，特別是傢飾類的商品，這類商品往往需要配合擺設四周的樣貌，如果不適合，又要通過麻煩的退貨程序才能退貨。
為了提昇人們在瀏覽物品時的視覺效果，可採用習知的一種虛擬實境(Virtual Reality，VR)技術，虛擬實境技術是透過電腦軟體模擬特定空間的三度空間影像，透過特定顯示載具讓使用者可以如身歷其境一般地瀏覽物品，包括可以從各種角度觀看一個物品，或是如親身處於特定場合瀏覽。
另有一種擴增實境(Augmented Reality，AR)技術，擴增實境技術的主要目的是在顯示螢幕上把虛擬世界(商品)套在現實世界並進行互動。
揭露書關於一種切換虛擬實境模式與擴增實境模式的技術，其中提供有一伺服系統，透過網路提供一或多個電子顯示裝置切換進入一虛擬實境模式或一擴增實境模式的服務，其中載有一虛擬實境影像資料庫，提供電子顯示裝置切換進入虛擬實境模式時所需的虛擬實境影像，也載有一擴增實境影像資料庫，提供電子顯示裝置切換進入擴增實境模式時所需的擴增實境影像。伺服系統更包括一接收並執行終端的電子顯示裝置產生的指令的管理介面單元。
其中，當其中之一電子顯示裝置進入虛擬實境模式時，自伺服系統載入虛擬實境影像，以顯示虛擬實境影像；當電子顯示裝置切換進入擴增實境模式，自伺服系統載入物件資訊相關的擴增實境影像，以及以另一視窗於此電子顯示裝置顯示物件資訊，或是結合擴增實境影像與虛擬實境影像的影像。
根據方法實施例，在此方法中，經載入虛擬實境影像後，進入一虛擬實境模式，以一電子顯示裝置顯示虛擬實境影像，影像中有一或多個物件的影像。在使用者操作電子顯示裝置觀看虛擬實境影像時，可以選擇其中之一物件，產生選擇訊號，可以根據選擇訊號取得相關物件的物件資訊，並載入物件資訊相關的影像。
根據實施例之一，於切換進入擴增實境模式時，在一模式中，可以電子顯示裝置擷取一空間的實境影像，取得空間中的一指標物件的影像，之後根據指標物件的資訊取得物件與空間的關聯性，於是引入物件資訊的影像，以結合於空間的實境影像中，並顯示結合後的影像。
在一顯示模式下，顯示結合擴增實境影像與虛擬實境影像的影像時，可以一子母畫面呈現，或以一分割畫面呈現。
為了能更進一步瞭解本發明為達成既定目的所採取之技術、方法及功效，請參閱以下有關本發明之詳細說明、圖式，相信本發明之目的、特徵與特點，當可由此得以深入且具體之瞭解，然而所附圖式與附件僅提供參考與說明用，並非用來對本發明加以限制者。
10‧‧‧網路
104‧‧‧伺服系統
141‧‧‧個人資料
142‧‧‧校正參數
143‧‧‧資料庫
101、102、103‧‧‧終端電子顯示裝置
20‧‧‧網路
21‧‧‧伺服系統
211‧‧‧管理介面單元
212‧‧‧使用者資料庫
213‧‧‧虛擬實境影像資料庫
214‧‧‧擴增實境影像資料庫
22‧‧‧終端電子顯示裝置
221‧‧‧通訊單元
222‧‧‧數據處理單元
223‧‧‧指令處理單元
224‧‧‧顯示單元
225‧‧‧虛擬實境引擎
226‧‧‧擴增實境引擎
40‧‧‧空間
401‧‧‧指標物件
403‧‧‧物件影像
405‧‧‧指示符號
60‧‧‧虛擬實境空間
601、603、605、607‧‧‧物件
610‧‧‧物件資訊
611‧‧‧確認選項
612‧‧‧取消選項
620‧‧‧指示符號
801‧‧‧虛擬實境畫面
802‧‧‧擴增實境畫面
803‧‧‧物件
804‧‧‧物件資訊
步驟S301~S317‧‧‧虛擬與擴增實境切換管理流程
步驟S501~S515‧‧‧虛擬與擴增實境切換管理流程
步驟S701~S715‧‧‧虛擬與擴增實境切換管理流程
圖1顯示實現本發明切換虛擬實境模式與擴增實境模式的管理方法的系統架構圖；圖2顯示實現本發明切換虛擬實境模式與擴增實境模式的管理方法的系統功能方塊圖；圖3顯示描述本發明擴增實境模式的顯示方法之實施例流程圖之一；圖4顯示本發明系統在擴增實境模式下的實施例示意圖；圖5顯示描述本發明切換虛擬實境模式與擴增實境模式的管理方法之實施例流程圖之二；圖6顯示本發明切換虛擬實境模式與擴增實境模式的實施例情境示意圖；圖7顯示描述本發明切換虛擬實境模式與擴增實境模式的管理方法之實施例流程圖之三；圖8顯示本發明切換虛擬實境模式與擴增實境模式的實施例 情境示意圖。
本發明揭露書所揭露的技術關於切換虛擬實境模式與擴增實境模式的管理方法以及系統，實施例之一是提供使用者一個可以呈現虛擬實境與擴增實境的電子顯示裝置，由虛擬實境(Virtual Reality，VR)技術透過電腦軟體模擬特定空間的三度空間影像，透過電子顯示裝置顯示虛擬實境影像，例如本揭露書所載的電子顯示裝置就可以為一種可以顯示虛擬實境與擴增實境影像的顯示裝置，這比如是一種頭戴式顯示器，能提供使用者如同身歷其境一般地環顧特定空間。而此電子顯示裝置更可以運作於一擴增實境模式下，擴增實境(Augmented Reality，AR)技術可以在一真實環境影像中顯示虛擬物件，可以根據使用者操作產生的訊息而即時運算電子顯示裝置的位置及角度(方向)而即時改變虛擬物件的觀看角度，擴增實境技術的主要目的是在顯示螢幕上把虛擬世界(特定物品)套在現實世界並進行互動。系統另提供以一額外加上的畫面(如浮動視窗)加入相應多媒體內容，包括圖形、影片、聲音與/或文字。
在本發明揭露書中，電子顯示裝置的使用者設定在一虛擬實境模式時，可以環境瀏覽特定物品或是環境，並且可以切換到一擴增實境模式，根據實施例之一，擴增實境技術為在真實影像中顯示虛擬物件資訊的呈現技術，另可以額外視窗(如浮動視窗)顯示虛擬實境模式下的使用者介面的呈現技術，比如在電子顯示裝置上的虛擬實境影像中，可把圖形、影片和文字加到使用者所看到的虛擬實境畫面上。
圖1顯示實現本發明切換虛擬實境模式與擴增實境模式的管理方法的系統架構圖。
圖中顯示為一架構在網路10上的系統，一端設有提供虛擬實 境模式(VR mode)與擴增實境模式(AR mode)下數據資料的伺服系統104，伺服系統104可服務多個使用者端需求，其中可載有個人資料141以及每個使用者在每個顯示裝置的校正參數142，以及載有各種環境與物件的虛擬實境與擴增實境影像的資料庫143。
根據發明實施例，伺服系統104為透過網路10提供虛擬實境服務，包括提供利用虛擬實境與擴增實境瀏覽商品、房屋物件的服務，比如，可以藉此讓使用者操作特定虛擬實境顯示裝置瀏覽某物件處於一個虛擬環境中的樣貌、或是在自己環境中以擴增實境技術呈現某種商品、或是提供成屋、預售屋導覽等的服務。
一端有終端電子顯示裝置101、102、103，可以透過網路10自伺服系統104取得虛擬實境模式與擴增實境模式下的資訊。伺服端所儲存的個人資料141包括沒有欲取得服務的使用者的基本資料、登入服務的資料等，校正參數142比如是各使用者穿戴虛擬實境顯示裝置時依照身材臉型特徵及自己喜好調整的穿戴裝置設定參數。
終端電子顯示裝置101、102、103為支援顯示虛擬實境與擴增實境影像的電子裝置，比如一種頭戴式顯示器，使用者可以穿戴於頭部而由其中顯示器觀看虛擬實境、擴增實境影像，以及結合兩種實境的影像。另不排除可以智慧眼鏡、個人手持裝置實現此電子顯示裝置。
本發明系統所提供的功能可以硬體電路或電腦系統執行軟體程式實現，如圖2接著顯示的系統功能方塊圖。
根據圖中所示本發明揭露書描述的切換虛擬實境模式與擴增實境模式的管理系統的實施例，設有伺服系統21，透過一網路20連接設於使用者端的終端電子顯示裝置22，伺服系統21的主要功能為提供使用者端的終端電子顯示裝置22切換至虛擬實境模式(VR mode)與擴增實境模式(AR mode)下所需的數據服務。
伺服系統21包括有一虛擬實境影像資料庫213，可以提供使 用者端的一或多個電子顯示裝置切換進入虛擬實境模式時所需的虛擬實境影像，特別是根據使用者選定一個虛擬環境的場景提供相關的虛擬實境影像，相關數據透過網路20傳遞到終端電子顯示裝置22，由裝置22本身的數據處理電力執行影像處理並顯示。伺服系統21另設有一擴增實境影像資料庫214，可以提供一或多個電子顯示裝置切換進入擴增實境模式時所需的擴增實境影像。
伺服系統21可以處理由終端電子顯示裝置22產生的指令，比如使用者操作此裝置22產生的指令、選擇訊號、切換顯示模式等，其中設有一接收並執行一或多個電子顯示裝置產生的指令的管理介面單元211。伺服系統21可提供使用者登入使用，或是上傳設定值，其中可包括一使用者資料庫212，其中記載一或多個使用者設定電子顯示裝置的使用者設定值。
透過使用者資料庫212，使用者可以透過伺服系統21隨時取得所需的數據服務，並能儲存自己的喜好設定，伺服系統21於是可以提供個人化的服務，能根據使用者的需求提供服務。舉例來說，使用者穿戴某種電子顯示裝置進入某個網站進行虛擬實境瀏覽時，系統可以根據使用者喜好自動傳送電子顯示裝置的設定值，切換顯示模式等。
終端電子顯示裝置22如使用者穿戴的穿戴式顯示裝置或是其他支援虛擬實境顯示功能的電子裝置，可為一個可獨立運行的虛擬實境顯示裝置，或者可為透過其他電腦系統連線網路20而取得數據資料。
在此實施例中，終端電子顯示裝置22設有連接網路20的通訊單元221，通訊方式不限以有線或無線的方式，或是透過其他裝置而連線網路20。裝置20設有處理裝置內部數據的數據處理單元222，特別是能夠處理其中虛擬實境影像與擴增實境影像訊號，使之形成顯示於顯示單元224的影像。
終端電子顯示裝置22設有指令處理單元223，指令處理單元 223用以處理使用者操作終端電子顯示裝置22產生的指令，特別可以是用以執行一切換虛擬實境模式或擴增實境模式的指令。比如點選物品或商品的指令、瀏覽物品或商品資訊的指令、啟動虛擬實境或擴增實境模式的指令、手勢指令等，如果指令涉及需要由伺服系統21取得資料，則傳送到伺服系統21。
系統提供終端可以虛擬實境(VR)與擴增實境(AR)等技術瀏覽特定場合以及物品，終端電子顯示裝置22設有一虛擬實境引擎225，用以處理並產生虛擬實境影像，主要是事先已經記載特定場合、物件等相關的虛擬實境影像；另設有一擴增實境引擎226，用以處理並產生擴增實境影像，結合終端電子顯示裝置22所取得的真實環境影像，可以在真實影像中顯示出虛擬物件的資訊，主要也是有關物品資訊的相關影像資訊。於是，系統將根據終端電子顯示裝置22產生的操作指令輸出對應的數據，包括於終端電子顯示裝置22設定於一虛擬實境模式下，經伺服系統21提供影像訊號，經裝置22的虛擬實境引擎225處理產生顯示在裝置上顯示器的虛擬實境影像；再於裝置22設定於一擴增實境模式時，經伺服系統21提供影像訊號，經擴增實境引擎226處理產生可顯示的擴增實境影像。
在一實施例中，終端電子顯示裝置22產生選擇其中之一物件的選擇訊號，伺服系統21將透過管理介面單元211根據選擇訊號提供物件資訊，而此物件資訊特別可以一額外的畫面(如浮動視窗)疊加於虛擬實境影像或是擴增實境影像上，畫面中呈現的內容比如文字、圖片、影片，甚至是語音。
呈現擴增實境影像的實施例可參考圖3所示之流程。開始時，如步驟S301，由根據使用者選擇物件或是操作，電子顯示裝置進入擴增實境模式，在此模式下，電子顯示裝置將運用所載的攝影機先擷取一空間實境影像，如步驟S303。
在一實施例中，欲呈現擴增實境影像的空間中置放一或多個 作為空間指標(marker)的指標物件，拍攝此空間時，同時取得指標物件影像，如步驟S305，根據此指標物件的資料(如長、寬、高)進而取得指標物件與空間的關聯性，如步驟S307。
接著，如步驟S309，透過攝影機取得空間中之一物件影像，此時可以根據上述指標物件與空間的關聯性得到此物件應該在此空間內的尺度，於是，如步驟S311，結合物件影像於空間實境影像中，並透過電子顯示裝置顯示結合的影像，如步驟S313。
在一實施流程中，在此擴增實境模式下可引入物件資訊，如經由伺服系統取得(步驟S315)，再接著將物件資訊以一額外畫面、視窗等結合於擴增實境影像中(步驟S317)，可以文字、圖形或影片資訊呈現，最後顯示結合的影像(步驟S313)。
圖4接著顯示本發明系統在擴增實境模式下的實施例示意圖。此圖顯示有一空間40，當系統提供以擴增實境模式顯示這個空間40內的特定虛擬物品，先透過指標物件401的相關尺度資訊取得指標物件401與空間40的關聯性，於是，在此空間實境影像中，使用者可以透過電子顯示裝置操作一指示符號405，此例則藉此控制一物件影像403，使之擺放在特定位置上。
在此實施例中，系統提供擴增實境模式讓使用者可以體驗某物件在某個空間內的情境。而在其他實施例中，本發明提供擴增實境模式可以與虛擬實境模式同時存在，並搭配顯示。
在另一實施例中，在此擴增實境模式下引入物件影像403，更可透過另一疊加畫面在此擴增實境影像中顯示物件相關的文字、圖形或影片資訊，比如在物件影像403的一側以一浮動視窗顯示物件資訊。
實施例可參考圖5所示的方法流程圖。
一開始，如步驟S501，使用者操作電子顯示裝置進入一虛擬實境模式，同時自伺服系統下載虛擬實境影像，如步驟S503，但有實施例是可以在啟動虛擬實境模式之前已經載入相關影像。啟 動後，於電子顯示裝置上顯示虛擬實境影像，如步驟S505。虛擬實境影像中引入有一或多個物件的影像，如步驟S507，可依照使用者選擇引入特定物件影像，每一個物件都可設有軟體識別的資訊(ID)，每個識別資料關聯個別的物件資訊。
進入虛擬實境時，使用者可以透過相關軟體工具引入物件影像外，更提供點選其中特定物件，也就是有興趣要得到進一步資訊的物件，物件影像將結合於虛擬實境影像中，如步驟S509，並接著顯示結合後的影像，如步驟S511。伺服系統端於同一流程中接收此物件選擇的訊號，訊號載有所選擇物件的識別資訊，伺服系統依據此識別資訊提供對應的物件資訊，電子顯示裝置即接著接收選擇呈現的物件資訊，如步驟S513。
物件資訊，在一實施例中，隨著物件影像透過一額外疊加的畫面結合在虛擬實境影像上，包括結合了文字、圖片或影片等物件資訊，如步驟S515，並依照設定，結合於虛擬實境影像並以一顯示位置呈現物件資訊。
以上虛擬實境顯示之實施例如圖6所示之情境示意圖。
此例顯示有一呈現於電子顯示裝置上螢幕的虛擬實境空間60，空間60內示意包括有多個物件601、603、605、607，使用者於操作電子顯示裝置時，可以指示軟體實現的指示符號620移動到特定物品，如此例，使用者操作如手的形狀的指示符號620點到物件605，也就是需要知道物件605的相關資訊。根據發明實施例，此時系統切換到物件導覽模式，以額外畫面呈現出物件605相關的物件資訊610，比如以浮動視窗呈現，其中即可以文字、圖片、影片，甚至是語音的方式呈現物件資訊610。如此圖例，物件資訊610可以一個方框顯示在相關物件的附近，其中載有內容，並提供特定條件下的確認或取消訊息等的相關選項，如圖示的確認選項611、取消選項612。
根據其他實施態樣，選擇空間60內某商品的方式並不限於圖 示的指示符號620的方式，而可以如觸控、手勢、裝置的位置或方向感測器而執行選擇或是觀看虛擬實境影像的手段。
值得一提的是，當終端使用者操作電子顯示裝置上的軟體介面(可為虛擬實境介面)產生指定特定物件的選擇訊號時，系統端，如圖2所示之實施例，其中系統端的管理介面單元接收電子顯示裝置產生的指令，指令包括選擇虛擬實境影像中的其中之一物件的選擇訊號，以及切換虛擬實境模式與擴增實境模式的指令等，伺服系統即根據切換該虛擬實境模式或擴增實境模式的指令提供虛擬實境影像或擴增實境影像。
當系統從某一實境模式切換到另一實境模式時，本發明所載切換虛擬實境模式與擴增實境模式的管理方法先從電子顯示裝置顯示虛擬實境影像開始，以擴增實境影像取代原顯示的畫面。
根據以上實施例，以虛擬實境模式或是擴增實境模式顯示特定場景時，除了可以已經存在裝置內的影像資料呈現之外，更可立即自伺服系統載入物件資訊相關的擴增實境影像，之後能在已經顯示虛擬或擴增實境影像的顯示器上，可以額外的畫面顯示其中物件資訊，結合於虛擬實境影像或是擴增實境影像中。
在另一實施例，如圖4與圖6所示，於顯示結合擴增實境影像與/或虛擬實境影像的影像時，更可以選擇透過一子母畫面同時在畫面中呈現虛擬與擴增實境影像，電子顯示裝置以一母畫面顯示虛擬實境影像，以一子畫面顯示擴增實境影像。
另有實施例如圖7流程所述，可以選擇結合擴增實境影像與虛擬實境影像的影像可以一分割畫面呈現。
開始如步驟S701，先由虛擬實境模式開始，選擇場景，並在有需要時可登入伺服系統，以取得某場景相關的虛擬實境影像，如步驟S703，這時也可同時載入與此虛擬實境相關的擴增實境影像，如步驟S705。
這時，可以電子顯示裝置顯示一分割畫面(步驟S707)，其中 包括以不同顯示區域定義第一畫面以及第二畫面，若配合圖8顯示的情境示意圖，第一畫面如虛擬實境畫面801，其中顯示多個物件，包括指出經選擇的物件803，如圖7步驟S709。選擇時，電子顯示裝置產生相關物件的選擇訊號，伺服系統或是終端的裝置相關電路接收到此物件選擇訊號(步驟S711)，電子顯示裝置即據此載入擴增實境影像，如步驟S713。
在此分割畫面的顯示模式下，如圖7步驟S715，顯示裝置上顯示第二畫面，第二畫面如圖8的擴增實境畫面802，則是用來以擴增實境影像呈現有關物件803的內容，如物件資訊804。另有實施例可以額外視窗呈現物件資訊804，更可以結合於第一畫面或第二畫面中。
列舉一例，應用本揭露書所載切換虛擬實境模式與擴增實境模式的管理方法以及系統，伺服系統端可提供多個終端的電子顯示裝置取得其中資料庫所載的虛擬實境影像以及擴增實境影像訊號，比如特定商品或物件的影像資料。
設於終端的電子顯示裝置可以為一頭戴式顯示器、智慧眼鏡，或支援虛擬實境顯示的手持裝置，在顯示特定場合虛擬實境的時候，可以提供使用者選擇場景的選單，點選某場景(比如某賣場)後，同時載入此場景相關的各種物件或商品影像資料，系統於是進入虛擬實境模式，
當以虛擬實境模式進入某賣場後，可以虛擬實境技術瀏覽當中商品，其中瀏覽方式當配合各種控制指令，比如瀏覽方向、點選商品、指示購買與否，更可包括支付的流程。點選某商品時，電子顯示裝置產生選擇訊號，同時傳送此商品的識別資訊到伺服系統，伺服系統於是得到商品的識別資料，根據本發明實施方式，終端的顯示裝置切換為擴增實境模式，藉此呈現商品相關資訊，另可在以其他視窗提供的使用者介面確認購買、支付等動作的互動畫面。
商品介紹可以文字、圖形、影片或語音方式在虛擬實境或擴增實境模式下呈現給使用者，顯示模式至少包括上述以一實境影像取代另一實境影像、子母畫面以及分割畫面等。藉此可以達成本揭露書所揭示的切換虛擬實境模式與擴增實境模式的管理方法以及系統的目的，特別是系統提供使用者可以操作一電子顯示裝置進行虛擬實境瀏覽特定場合，並可切換至擴增實境模式而呈現其他內容。
惟以上所述僅為本發明之較佳可行實施例，非因此即侷限本發明之專利範圍，故舉凡運用本發明說明書及圖示內容所為之等效結構變化，均同理包含於本發明之範圍內，合予陳明。
20‧‧‧網路
21‧‧‧伺服系統
211‧‧‧管理介面單元
212‧‧‧使用者資料庫
213‧‧‧虛擬實境影像資料庫
214‧‧‧擴增實境影像資料庫
22‧‧‧終端電子顯示裝置
221‧‧‧通訊單元
222‧‧‧數據處理單元
223‧‧‧指令處理單元
224‧‧‧顯示單元
225‧‧‧虛擬實境引擎
226‧‧‧擴增實境引擎

Claims (10)

  1. 一種切換虛擬實境模式與擴增實境模式的管理方法，包括：經載入虛擬實境影像後，根據選擇進入一虛擬實境模式或一擴增實境模式；以一電子顯示裝置根據選擇顯示一虛擬實境影像或一擴增實境影像，其中包括一或多個物件的影像；接收其中之一物件的選擇訊號，並根據該選擇訊號取得該物件的物件資訊；載入該物件資訊相關的文字、圖形或影片；以及以該電子顯示裝置顯示該物件資訊的影像，或是該物件資訊結合於該擴增實境影像或該虛擬實境影像的影像。
  2. 如請求項1所述的切換虛擬實境模式與擴增實境模式的管理方法，其中於選擇進入該擴增實境模式時，更包括：以該電子顯示裝置擷取一空間的實境影像；取得該空間中的一指標物件的影像；根據該指標物件的資訊取得該物件與該空間的關聯性；以及引入該物件資訊的擴增實境影像，以結合於該空間的實境影像中，並顯示結合後的影像。
  3. 如請求項2所述的切換虛擬實境模式與擴增實境模式的管理方法，其中該電子顯示裝置顯示的畫面為切換進入該擴增實境模式下的該擴增實境影像，以取代原顯示的該虛擬實境影像。
  4. 如請求項1所述的切換虛擬實境模式與擴增實境模式的管理方法，其中更包括於顯示結合該擴增實境影像與該虛擬實境影像的影像時，係以一子母畫面呈現，該電子顯示裝置以一母畫面顯示該虛擬實境影像，以一子畫面顯示該擴增實境影像。
  5. 如請求項1所述的切換虛擬實境模式與擴增實境模式的管理方法，其中於選擇進入該擴增實境模式時，結合該擴增實境影像與該虛擬實境影像的影像係以一分割畫面呈現，其中包括：以該電子顯示裝置顯示一分割畫面，包括一第一畫面以及一第二畫面；以該第一畫面顯示該虛擬實境影像，其中包括該物件的影像；以及以該第二畫面顯示該物件相關的擴增實境影像。
  6. 如請求項1至5其中之一所述的切換虛擬實境模式與擴增實境模式的管理方法，其中，該物件資訊係以視窗中文字、圖片或影片呈現。
  7. 一種切換虛擬實境模式與擴增實境模式的管理系統，包括：一伺服系統，提供一或多個電子顯示裝置切換進入一虛擬實境模式或一擴增實境模式的數據服務，其中包括：一虛擬實境影像資料庫，提供該一或多個電子顯示裝置切換進入該虛擬實境模式時所需的虛擬實境影像；一擴增實境影像資料庫，提供該一或多個電子顯示裝置切換進入該擴增實境模式時所需的擴增實境影像；一接收並執行該一或多個電子顯示裝置產生的指令的管理介面單元；其中，當其中之一電子顯示裝置進入該虛擬實境模式時，自該伺服系統載入虛擬實境影像，以顯示虛擬實境影像，其中包括一或多個物件的影像；該電子顯示裝置產生選擇其中之一物件的選擇訊號，該伺服系統透過該管理介面單元根據該選擇訊號提供物件資訊；當其中之一電子顯示裝置切換進入該擴增實境模式， 並自該伺服系統載入擴增實境影像，其中包括一或多個物件的影像；以及以該電子顯示裝置顯示該物件資訊，或是結合該擴增實境影像與該虛擬實境影像的影像。
  8. 如請求項7所述的切換虛擬實境模式與擴增實境模式的管理系統，其中各電子顯示裝置包括一指令處理單元，用以執行一切換該虛擬實境模式或該擴增實境模式的指令。
  9. 如請求項8所述的切換虛擬實境模式與擴增實境模式的管理系統，其中該管理介面單元接收該一或多個電子顯示裝置產生的指令，其中包括選擇該虛擬實境影像中的其中之一物件的選擇訊號，以及切換該虛擬實境模式與該擴增實境模式的指令，該伺服系統即根據該切換該虛擬實境模式或該擴增實境模式的指令提供該虛擬實境影像或該擴增實境影像。
  10. 如請求項7至9其中之一所述的切換虛擬實境模式與擴增實境模式的管理系統，其中該伺服系統更包括一使用者資料庫，其中記載該一或多個電子顯示裝置的使用者設定值。
TW104106214A 2015-02-26 2015-02-26 切換虛擬實境模式與擴增實境模式的管理方法以及系統 TWI567670B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
TW104106214A TWI567670B (zh) 2015-02-26 2015-02-26 切換虛擬實境模式與擴增實境模式的管理方法以及系統
CN201510168669.6A CN106157077A (zh) 2015-02-26 2015-04-10 切换虚拟现实模式与扩增现实模式的管理方法以及系统
US15/042,121 US20160253843A1 (en) 2015-02-26 2016-02-11 Method and system of management for switching virtual-reality mode and augmented-reality mode
EP16155399.5A EP3062280A1 (en) 2015-02-26 2016-02-12 Method and system of management for switching virtual-reality mode and augmented-reality mode

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW104106214A TWI567670B (zh) 2015-02-26 2015-02-26 切換虛擬實境模式與擴增實境模式的管理方法以及系統

Publications (2)

Publication Number Publication Date
TW201631531A true TW201631531A (zh) 2016-09-01
TWI567670B TWI567670B (zh) 2017-01-21

Family

ID=55353098

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104106214A TWI567670B (zh) 2015-02-26 2015-02-26 切換虛擬實境模式與擴增實境模式的管理方法以及系統

Country Status (4)

Country Link
US (1) US20160253843A1 (zh)
EP (1) EP3062280A1 (zh)
CN (1) CN106157077A (zh)
TW (1) TWI567670B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI691926B (zh) * 2018-12-04 2020-04-21 阿特發互動科技有限公司 結合擴增實境與虛擬實境的導覽裝置及導覽方法

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160314624A1 (en) * 2015-04-24 2016-10-27 Eon Reality, Inc. Systems and methods for transition between augmented reality and virtual reality
US10175492B2 (en) * 2015-04-24 2019-01-08 Eon Reality, Inc. Systems and methods for transition between augmented reality and virtual reality
US9883110B2 (en) * 2015-05-09 2018-01-30 CNZ, Inc. Toggling between augmented reality view and rendered view modes to provide an enriched user experience
CN105554392A (zh) * 2016-01-20 2016-05-04 京东方科技集团股份有限公司 显示切换装置及其切换方法、穿戴显示装置及其显示方法
WO2017201569A1 (en) 2016-05-23 2017-11-30 tagSpace Pty Ltd Fine-grain placement and viewing of virtual objects in wide-area augmented reality environments
US10298587B2 (en) * 2016-06-20 2019-05-21 International Business Machines Corporation Peer-to-peer augmented reality handlers
US10692113B2 (en) * 2016-06-21 2020-06-23 Htc Corporation Method for providing customized information through advertising in simulation environment, and associated simulation system
US10403044B2 (en) 2016-07-26 2019-09-03 tagSpace Pty Ltd Telelocation: location sharing for users in augmented and virtual reality environments
US10678397B2 (en) * 2016-09-26 2020-06-09 Htc Corporation Method for providing demonstration information in simulation environment, and associated simulation system
WO2018067728A1 (en) * 2016-10-04 2018-04-12 Livelike Inc. Picture-in-picture base video streaming for mobile devices
CN108020919B (zh) * 2016-10-31 2023-09-29 京东方科技集团股份有限公司 显示装置、可穿戴设备及显示装置的显示切换方法
US20180137559A1 (en) * 2016-11-15 2018-05-17 Junichi Mimura Virtual reality shopping device
CN106779935A (zh) * 2016-12-07 2017-05-31 段赟 一种利用虚拟现实技术实现网购中了解商品的系统
WO2018136517A1 (en) * 2017-01-17 2018-07-26 Virtual Sandtable Llc Augmented/virtual mapping system
CN106980500B (zh) * 2017-02-17 2019-12-10 福建天泉教育科技有限公司 一种安卓虚拟现实模式和裸眼模式切换方法和系统
US20180255285A1 (en) * 2017-03-06 2018-09-06 Universal City Studios Llc Systems and methods for layered virtual features in an amusement park environment
CN106886340A (zh) * 2017-04-18 2017-06-23 恒泰艾普（北京）云技术有限公司 一种带有旋转移屏的展示平台
CN107391060B (zh) * 2017-04-21 2020-05-29 阿里巴巴集团控股有限公司 图像显示方法、装置、系统及设备、可读介质
JP6538107B2 (ja) * 2017-05-22 2019-07-03 株式会社コロプラ 情報処理方法、情報処理プログラム、情報処理システムおよび情報処理装置
CN107272896B (zh) * 2017-06-13 2020-06-02 北京小米移动软件有限公司 Vr模式与非vr模式之间切换的方法及装置
CN107368192B (zh) * 2017-07-18 2021-03-02 歌尔光学科技有限公司 Vr眼镜的实景观测方法及vr眼镜
US10521096B2 (en) * 2017-07-24 2019-12-31 Disney Enterprises, Inc. Virtual reality experience control system
US10748340B1 (en) * 2017-07-31 2020-08-18 Apple Inc. Electronic device with coordinated camera and display operation
US10616033B2 (en) * 2017-11-06 2020-04-07 Honda Motor Co., Ltd. Different perspectives from a common virtual environment
CN108364206A (zh) * 2017-12-22 2018-08-03 广东鸿威国际会展集团有限公司 一种用于3d虚拟显示的通信系统和方法
WO2019209265A1 (en) 2018-04-24 2019-10-31 Hewlett-Packard Development Company, L.P. Animated gazes on head mounted displays
TWI811292B (zh) * 2019-01-25 2023-08-11 信義房屋股份有限公司 可進行互動的攝影裝置與方法
CN113271488B (zh) * 2021-05-17 2023-07-21 口碑(上海)信息技术有限公司 播放控制方法、装置、电子设备、存储介质及程序产品
CN113823133B (zh) * 2021-07-29 2023-06-30 中国南方电网有限责任公司超高压输电公司 一种将虚拟现实技术与教育培训结合的数据交换系统
US20240050854A1 (en) * 2022-08-09 2024-02-15 Reuven Bakalash Integrated Reality Gaming

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6917370B2 (en) * 2002-05-13 2005-07-12 Charles Benton Interacting augmented reality and virtual reality
US20130215116A1 (en) * 2008-03-21 2013-08-22 Dressbot, Inc. System and Method for Collaborative Shopping, Business and Entertainment
TWI436270B (zh) * 2010-04-09 2014-05-01 Nat Applied Res Laboratories 虛擬望遠方法及其裝置
US20110316845A1 (en) * 2010-06-25 2011-12-29 Palo Alto Research Center Incorporated Spatial association between virtual and augmented reality
WO2013085639A1 (en) * 2011-10-28 2013-06-13 Magic Leap, Inc. System and method for augmented and virtual reality
KR102516124B1 (ko) * 2013-03-11 2023-03-29 매직 립, 인코포레이티드 증강 및 가상 현실을 위한 시스템 및 방법
WO2014182545A1 (en) * 2013-05-04 2014-11-13 Vupad Partners, Llc Virtual object scaling in augmented reality environment
US9201578B2 (en) * 2014-01-23 2015-12-01 Microsoft Technology Licensing, Llc Gaze swipe selection

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI691926B (zh) * 2018-12-04 2020-04-21 阿特發互動科技有限公司 結合擴增實境與虛擬實境的導覽裝置及導覽方法

Also Published As

Publication number Publication date
TWI567670B (zh) 2017-01-21
EP3062280A1 (en) 2016-08-31
CN106157077A (zh) 2016-11-23
US20160253843A1 (en) 2016-09-01

Similar Documents

Publication Publication Date Title
TWI567670B (zh) 切換虛擬實境模式與擴增實境模式的管理方法以及系統
TWI540522B (zh) 採用虛擬實境與擴增實境技術的虛擬購物系統與方法
US10586391B2 (en) Interactive virtual reality platforms
US9418378B2 (en) Method and system for trying out a product in relation to a real world environment
KR101894022B1 (ko) Vr 공간을 제공하는 디바이스를 이용한 결제 방법 및 그 디바이스
TWI540534B (zh) 虛擬導覽控制系統與方法
US20220301041A1 (en) Virtual fitting provision device and provision method therefor
US20180279004A1 (en) Information processing apparatus, information processing method, and program
CN111414225B (zh) 三维模型远程展示方法、第一终端、电子设备及存储介质
KR102442042B1 (ko) 실측기반의 메타버스 가상주거공간에서의 상품 서비스 제공 장치
US20210005022A1 (en) Guided consumer experience
CN111724231A (zh) 一种商品信息的展示方法和装置
JP2014228916A (ja) 体験型電子商取引サイトシステム
KR101731718B1 (ko) 쇼핑을 위해 가상 피팅 솔루션을 이용하는 모바일 단말기 및 그 제어방법
KR20130112613A (ko) 스마트 기기를 이용한 잡지 형태의 제품 광고 서비스 제공 방법
CN117010965A (zh) 基于信息流广告的互动方法、装置、设备及介质
US20210067760A1 (en) Stereoscopic display method and system for displaying online object
KR102632812B1 (ko) 라이브 방송 제공 방법 및 시스템
KR102638455B1 (ko) 라이브 방송 제공 방법 및 시스템
KR102659455B1 (ko) 라이브 방송 제공 방법 및 시스템
KR101981228B1 (ko) 이미지 스크롤에 적합한 시퀀스 이차원 이미지의 태그정보 처리 장치
KR102659456B1 (ko) 라이브 방송 제공 방법 및 시스템
TW201901401A (zh) 混合實境社區生活圈看屋方法及系統
US11809618B2 (en) Controlling a user selection queue
Zharikov E-COMMERCE-MODERN TRENDS