TWI613570B - 虛擬實境系統、行動裝置的操作方法、非揮發性電腦可讀取記錄媒體、及虛擬實境處理裝置 - Google Patents

虛擬實境系統、行動裝置的操作方法、非揮發性電腦可讀取記錄媒體、及虛擬實境處理裝置 Download PDF

Info

Publication number
TWI613570B
TWI613570B TW106116002A TW106116002A TWI613570B TW I613570 B TWI613570 B TW I613570B TW 106116002 A TW106116002 A TW 106116002A TW 106116002 A TW106116002 A TW 106116002A TW I613570 B TWI613570 B TW I613570B
Authority
TW
Taiwan
Prior art keywords
virtual reality
rotation angle
mobile device
controller
display
Prior art date
Application number
TW106116002A
Other languages
English (en)
Other versions
TW201835725A (zh
Inventor
黃桂昱
王康宇
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Application granted granted Critical
Publication of TWI613570B publication Critical patent/TWI613570B/zh
Publication of TW201835725A publication Critical patent/TW201835725A/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/02Networking aspects

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

一種虛擬實境系統包括:一虛擬實境顯示裝置、一第一虛擬實境控制器、一行動裝置、以及一虛擬實境處理裝置。該虛擬實境顯示裝置用以相應於該虛擬實境顯示裝置的位置及旋轉角度,顯示一虛擬實境環境。該行動裝置接附於該第一虛擬實境控制器。該虛擬實境處理裝置用以:取得該第一虛擬實境控制器的位置及旋轉角度;以及透過一網路,傳送該第一虛擬實境控制器的位置及旋轉角度至該行動裝置,以令該行動裝置相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地(operably)顯示該虛擬實境環境中的一虛擬實境物件。

Description

虛擬實境系統、行動裝置的操作方法、非揮發性電腦可讀取記錄媒體、及虛擬實境處理裝置
本案涉及一種電子系統、操作方法、非揮發性電腦可讀取記錄媒體、及電子裝置。具體而言,本案涉及一種虛擬實境系統、行動裝置的操作方法、非揮發性電腦可讀取記錄媒體、及虛擬實境處理裝置。
隨著電子技術的發展,虛擬實境系統已廣泛地應用在人們的生活當中。
虛擬實境系統包括至少一虛擬實境顯示器、至少一虛擬實境控制器、及虛擬實境處理裝置。虛擬實境處理裝置可透過虛擬實境顯示器及虛擬實境控制器,偵測使用者 的動作,並據以控制虛擬實境顯示器進行相應的顯示。然而,在缺少另一虛擬實境顯示器的情況下,不易使他人一同進入虛擬實境環境。
本案的一實施態樣涉及一種虛擬實境(virtual reality,VR)系統。根據本案一實施例,該虛擬實境系統包括:一虛擬實境顯示裝置、一第一虛擬實境控制器、一行動裝置、以及一虛擬實境處理裝置。該虛擬實境顯示裝置用以相應於該虛擬實境顯示裝置的位置及旋轉角度,顯示一虛擬實境環境。該行動裝置接附於該第一虛擬實境控制器。該虛擬實境處理裝置用以取得該第一虛擬實境控制器的位置及旋轉角度;以及透過一網路,傳送該第一虛擬實境控制器的位置及旋轉角度至該行動裝置,以令該行動裝置相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地(operably)顯示該虛擬實境環境中的一虛擬實境物件。
根據本案一實施例,該行動裝置更用以:透過該行動裝置的一攝影元件,拍攝複數真實世界影像;以及相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示該虛擬實境物件於該些真實世界影像上。
根據本案一實施例,該行動裝置更用以:相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示該虛擬實境物件於該虛擬實境環境中。
根據本案一實施例,該虛擬實境處理裝置更用 以:透過該網路,傳送該虛擬實境顯示裝置的位置及旋轉角度至該行動裝置,以令該行動裝置相應於該虛擬實境顯示裝置的位置及旋轉角度以及該第一虛擬實境控制器的位置及旋轉角度,操作性地(operably)顯示該虛擬實境環境中的該虛擬實境物件。
根據本案一實施例,該虛擬實境處理裝置更用以:控制該虛擬實境顯示裝置,以根據該虛擬實境顯示裝置的位置及旋轉角度以及該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示另一虛擬實境物件。
根據本案一實施例,該行動裝置更用以:相應於該第一虛擬實境控制器的位置,取得該行動裝置的位置;以及相應於該行動裝置的位置,操作性地顯示該虛擬實境物件。
根據本案一實施例,該虛擬實境處理裝置更用以:取得一第二虛擬實境控制器的位置及旋轉角度;以及透過該網路,傳送該第二虛擬實境控制器的位置及旋轉角度至該行動裝置,以令該行動裝置相應於該第二虛擬實境控制器的位置及旋轉角度,操作性地顯示該虛擬實境環境中的該虛擬實境物件。
根據本案一實施例,該虛擬實境處理裝置更用以:接收顯示於該行動裝置上的一即時影像;以及控制該虛擬實境顯示裝置,以操作性地顯示該行動裝置上的該即時影像。
本案的另一實施態樣涉及一種行動裝置的操作 方法。根據本案一實施例,該操作方法包括:透過一網路,從一虛擬實境處理裝置接收一感測器的位置及旋轉角度,其中該感測器接附於該行動裝置,該虛擬實境處理裝置與一虛擬實境顯示裝置進行溝通,該虛擬實境顯示裝置用以相應於該虛擬實境顯示裝置的位置及旋轉角度,顯示該虛擬實境環境;以及相應於該感測器的位置及旋轉角度,操作性地顯示該虛擬實境環境中的一虛擬實境物件。
本案的另一實施態樣涉及一種非揮發性電腦可讀取記錄媒體。根據本案一實施例,該非揮發性電腦可讀取記錄媒體用以儲存一電腦程式。在執行該電腦程式時,將致使一或多處理元件執行複數操作包括:透過一網路,從一虛擬實境處理裝置接收一感測器的位置及旋轉角度,其中該感測器接附於一行動裝置,該虛擬實境處理裝置與一虛擬實境顯示裝置進行溝通,該虛擬實境顯示裝置用以相應於該虛擬實境顯示裝置的位置及旋轉角度,顯示該虛擬實境環境;以及相應於該感測器的位置及旋轉角度,操作性地顯示該虛擬實境環境中的一虛擬實境物件。
本案的另一實施態樣涉及一種虛擬實境處理裝置。根據本案一實施例,該虛擬實境處理裝置包括一或多處理元件、一記憶體、以及一或多程式。該記憶體電性連接該一或多處理元件。該一或多程式儲存於該記憶體中,並用以被該一或多處理元件所執行,該一或多程式包括以下指令:取得相應於一第一虛擬實境控制器的位置及旋轉角度的一第一訊號;以及透過一網路,傳送該第一虛擬實境控制器的 位置及旋轉角度至接附於該第一虛擬實境控制器的一行動裝置,以令該行動裝置相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示該虛擬實境環境中的一虛擬實境物件。
透過應用上述一實施例,即可在不使用另一虛擬實境顯示裝置的狀態下,令他人得以看得虛擬實境物件。
10‧‧‧虛擬實境系統
20‧‧‧網路
30‧‧‧固定器(或黏著物)
100‧‧‧虛擬實境處理裝置
110‧‧‧處理元件
120‧‧‧記憶體
130‧‧‧虛擬實境顯示裝置
140‧‧‧虛擬實境控制器
150‧‧‧感測器
200‧‧‧行動裝置
210‧‧‧處理元件
220‧‧‧記憶體
230‧‧‧顯示元件
140‧‧‧虛擬實境控制器
VRN‧‧‧虛擬實境環境
VOB1-VOB4‧‧‧虛擬實境物件
RTI‧‧‧即時影像
300‧‧‧方法
S1-S2‧‧‧操作
第1圖為根據本案一實施例所繪示的虛擬實境系統的示意圖;第2圖為根據本發明一實施例的虛擬實境系統的操作示意圖;第3圖為根據本發明一實施例的虛擬實境系統的操作示意圖;第4圖為根據本發明一實施例的虛擬實境系統的操作示意圖;第5圖為根據本發明一實施例的虛擬實境系統的操作示意圖;以及第6圖為根據本發明一實施例的行動裝置的操作方法的流程圖。
以下將以圖式及詳細敘述清楚說明本揭示內容 之精神,任何所屬技術領域中具有通常知識者在瞭解本揭示內容之實施例後,當可由本揭示內容所教示之技術,加以改變及修飾,其並不脫離本揭示內容之精神與範圍。
關於本文中所使用之『電性連接』,可指二或多個元件相互直接作實體或電性接觸,或是相互間接作實體或電性接觸,而『電性連接』還可指二或多個元件相互操作或動作。
關於本文中所使用之『第一』、『第二』、...等,並非特別指稱次序或順位的意思,亦非用以限定本發明,其僅為了區別以相同技術用語描述的元件或操作。
關於本文中所使用之『包含』、『包括』、『具有』、『含有』等等,均為開放性的用語,即意指包含但不限於。
關於本文中所使用之『及/或』,係包括所述事物的任一或全部組合。
關於本文中所使用之方向用語,例如:上、下、左、右、前或後等,僅是參考附加圖式的方向。因此,使用的方向用語是用來說明並非用來限制本案。
關於本文中所使用之用詞(terms),除有特別註明外,通常具有每個用詞使用在此領域中、在此揭露之內容中與特殊內容中的平常意義。某些用以描述本揭露之用詞將於下或在此說明書的別處討論,以提供本領域技術人員在有關本揭露之描述上額外的引導。
第1圖為根據本案一實施例所繪示的虛擬實境 系統10的示意圖。在本實施例中,虛擬實境系統10包括虛擬實境處理裝置100、虛擬實境顯示裝置130、虛擬實境控制器140、感測器150、及行動裝置200。
在一實施例中,虛擬實境處理裝置100可透過有線連結(connection)或無線連結與虛擬實境顯示裝置130、虛擬實境控制器140、及感測器150進行溝通。在一實施例中,虛擬實境處理裝置100可透過網路20(如無線網路)與行動裝置200溝通。在一實施例中,感測器150接附於行動裝置200。在一實施例中,感測器150係用一固定器(或黏著物)30接附於行動裝置200。在一實施例中,感測器150與行動裝置200彼此整合。
在一實施例中,虛擬實境處理裝置100可整合至虛擬實境顯示裝置130及/或虛擬實境控制器140上,故本案不以此處所述實施例為限。在一實施例中,其它數量的虛擬實境顯示裝置130、虛擬實境控制器140、感測器150、固定器(或黏著物)30、及/或行動裝置200亦在本案範圍之中。在一實施例中,虛擬實境控制器140可基於實際需求而被省略,故本案不以上述實施例為限。
在一實施例中,虛擬實境系統10可更包括基地台(base station)(未繪示),基地台用以對虛擬實境顯示裝置130、虛擬實境控制器140、及/或感測器150進行定位,及/或對虛擬實境顯示裝置130、虛擬實境控制器140、及/或感測器150的傾斜角度(tilt angle)(如旋轉角度或方向(orientation))進行偵測。然而,其它定位及偵測傾斜角度 的方法亦在本案範圍之中。
在一實施例中,虛擬實境處理裝置100包括一或多處理元件110及記憶體120。在本實施例中,此一或多處理元件110電性連接記憶體120。在一實施例中,虛擬實境處理裝置100可更包括訊號傳收器,訊號傳收器用以傳送及接收虛擬實境處理裝置100與虛擬實境顯示裝置130間的訊號、虛擬實境處理裝置100與虛擬實境控制器140間的訊號、及/或虛擬實境處理裝置100與感測器150間的訊號。在一實施例中,虛擬實境處理裝置100更包括網路元件(如無線網路卡),用以透過網路20與行動裝置200溝通。
在一實施例中,行動裝置200包括一或多處理元件210、記憶體220、及顯示元件230。在本實施例中,此一或多處理元件210電性連接記憶體220及顯示元件230。在一實施例中,行動裝置200更包括網路元件(如無線網路卡),用以透過網路20與虛擬實境處理裝置100溝通。
在一實施例中,前述一或多處理元件110及/或前述一或多處理元件210皆例如可用中央處理器、及/或微處理器等處理器實現,但不以此為限。在一實施例中,記憶體120、220皆可包括一或多個記憶體裝置,其中每一記憶體裝置或多個記憶體裝置之集合包括電腦可讀取記錄媒體。記憶體120、220皆可包括唯讀記憶體、快閃記憶體、軟碟、硬碟、光碟、隨身碟、磁帶、可由網路存取之資料庫、或熟悉此技藝者可輕易思及具有相同功能之電腦可讀取紀錄媒體。在一實施例中,虛擬實境顯示裝置130及顯示元件230皆例如可用液 晶顯示器或主動矩陣有機發光二極體顯示器等顯示器實現,但不以此為限。在一實施例中,虛擬實境控制器140例如可用Vive控制器或Gear控制器等手持控制器實現,但不以此為限。
在一實施例中,感測器150例如可用光塔定位(lighthouse)感測器實現,但不以此為限。在一實施例中,感測器150可用一特定感測器所實現,此一特定感測器大致相同於虛擬實境控制器140中用以定位及偵測旋轉角度的感測器,但不以此為限。在一實施例中,感測器150可為另一虛擬實境控制器,此另一虛擬實境控制器和虛擬實境控制器140具有相同功能及結構,但不以此為限。
在一實施例中,前述一或多處理元件110可運行或執行儲存於記憶體120中的各種軟體程式及/或指令集,以執行虛擬實境處理裝置100的各種功能及處理資料。在一實施例中,前述一或多處理元件210可運行或執行儲存於記憶體220中的各種軟體程式及/或指令集,以執行行動裝置200的各種功能及處理資料。
應注意到,上述虛擬實境系統10中的裝置及元件的實現方式不以上述實施例所揭露的為限,且連接關係亦不以上述實施例為限,凡足以令虛擬實境系統10實現下述技術內容的連接方式與實現方式皆可運用於本案。
在一實施例中,一或多處理元件110控制虛擬實境顯示裝置130顯示虛擬實境環境。在一實施例中,一或多處理元件110取得相應於感測器150的位置及旋轉角度的第一訊號,並將感測器150的位置及旋轉角度傳送至行動裝 置200,以令行動裝置200得以根據感測器150的位置及旋轉角度,操作性地(operably)顯示虛擬實境環境中的虛擬實境物件(VR object)。例如,當感測器150的位置及/或旋轉角度改變,行動裝置200操作性地以不同距離及角度顯示虛擬實境物件。
在一實施例中,由於感測器150是接附於(attach)或固定於(fix)行動裝置200,故感測器150的位置及旋轉角度大致相同於行動裝置200的位置及旋轉角度。亦即,透過如此設置,行動裝置200可相應於行動裝置200的位置及旋轉角度顯示前述虛擬實境物件,以令他人可透過行動裝置200看見前述虛擬實境物件,而不需使用另一虛擬實境顯示裝置130。
應注意到,上述的用詞「操作性地」,意指當行動裝置200朝向虛擬實境物件時,顯示元件230可顯示虛擬實境物件,且當行動裝置200不朝向虛擬實境物件時,顯示元件230可不顯示虛擬實境物件。在以下段落中,用詞「操作性地」亦具有類似意義,將不再贅述。
以下將搭配第2-5圖以提供本案更具體細節,然本案不以下述操作例為限。
在此一操作例中,一或多處理元件110可控制虛擬實境顯示裝置130以顯示虛擬實境環境VRN(如第2、4圖所示)。在此一操作例中,虛擬實境環境VRN中存在虛擬實境物件VOB1-VOB4。在本例中,虛擬實境物件VOB1的位置及方向(orientation)對應於虛擬實境顯示裝置130的位 置及旋轉角度。虛擬實境物件VOB2的位置及方向對應於感測器150的位置及旋轉角度。虛擬實境物件VOB3的位置及方向對應於虛擬實境控制器140的位置及旋轉角度。
在一實施例中,感測器150可感測其自身的位置及旋轉角度。一或多處理元件110可透過與感測器150間的連結,從感測器150取得感測器150的位置及旋轉角度。在一實施例中,一或多處理元件110可透過網路20,將感測器150的位置及旋轉角度傳送至行動裝置200,以令行動裝置200得以根據感測器150的位置及旋轉角度,操作性地顯示虛擬實境環境VRN中的虛擬實境物件VOB1、VOB3、VOB4。
在一實施例中,虛擬實境顯示裝置130可感測其自身的位置及旋轉角度。一或多處理元件110可透過與虛擬實境顯示裝置130間的連結,從虛擬實境顯示裝置130取得虛擬實境顯示裝置130的位置及旋轉角度。在一實施例中,一或多處理元件110可透過網路20,將虛擬實境顯示裝置130的位置及旋轉角度傳送至行動裝置200。在一實施例中,一或多處理元件210可透過網路20接收虛擬實境顯示裝置130的位置及旋轉角度,並控制顯示元件230相應於虛擬實境顯示裝置130的位置及旋轉角度及感測器150的位置及旋轉角度,操作性地顯示虛擬實境物件VOB1。例如,當虛擬實境顯示裝置130的位置及/或旋轉角度改變,顯示元件230操作性地以不同距離及/或角度顯示虛擬實境物件VOB1。
在一實施例中,虛擬實境控制器140可感測其自身的位置及旋轉角度。一或多處理元件110可透過與虛擬實境控制器140間的連結,自虛擬實境控制器140取得虛擬實境控制器140的位置及旋轉角度,並透過網路20,將感測器150的位置及旋轉角度傳送至行動裝置200。在一實施例中,一或多處理元件210可透過網路20接收虛擬實境顯示裝置130的位置及旋轉角度,並控制顯示元件230相應於虛擬實境控制器140的位置及旋轉角度及感測器150的位置及旋轉角度,操作性地顯示虛擬實境物件VOB3(如第3圖所示)。
在一實施例中,一或多處理元件110可取得虛擬實境物件VOB4的位置及方向,並透過網路20,將虛擬實境物件VOB4的位置及方向傳送至行動裝置200。一或多處理元件210可透過網路20接收虛擬實境物件VOB4的位置及方向,並控制顯示元件230相應於虛擬實境物件VOB4的位置及方向及感測器150的位置及旋轉角度,操作性地顯示虛擬實境物件VOB4(如第3圖所示)。
透過上述操作,他人可透過行動裝置200看見虛擬實境物件VOB1、VOB3、VOB4,而不需使用另一虛擬實境顯示裝置130。
在本案一實施例中,一或多處理元件210可透過網路20,從虛擬實境處理裝置100取得虛擬實境物件VOB1、VOB3、VOB4的模型(model)。在另一實施例中,一或多處理元件210可從安裝在行動裝置200上的應用程式取得虛擬實境物件VOB1、VOB3、VOB4的模型。然而, 其它取得虛擬實境物件VOB1、VOB3、VOB4的模型的方法亦在本案範圍之中。
在本案一實施例中,在行動裝置200接收感測器150的位置及旋轉角度後,一或多處理元件210可根據感測器150的位置取得行動裝置200的位置,並根據行動裝置200的位置及/或旋轉角度,控制顯示元件230操作性地顯示虛擬實境物件VOB1、VOB3、VOB4。例如,感測器150與行動裝置200之間可存在偏移(如在xyz空間座標系中z軸上+10公分的偏移),當感測器150旋轉角度為(0,0,0)時,一或多處理元件210可根據感測器150的位置(如xyz空間座標(+5,+5,-5)),取得行動裝置200的位置(如xyz空間座標(+5,+5,+5))。
此外,在本案一實施例中,在行動裝置200接收感測器150的位置及旋轉角度後,一或多處理元件210可根據感測器150的旋轉角度取得行動裝置200的旋轉角度,並根據行動裝置200的位置及/或旋轉角度,控制顯示元件230操作性地顯示虛擬實境物件VOB1、VOB3、VOB4。
在本案一實施例中,一或多處理元件210可控制行動裝置200的攝影元件拍攝真實世界影像,並控制顯示元件230相應於感測器150的位置及旋轉角度,操作性地顯示虛擬實境物件VOB1、VOB3、VOB4於真實世界影像上。亦即,顯示元件230可操作性地同時顯示虛擬實境物件VOB1、VOB3、VOB4與拍攝到的真實世界影像。
在本案一實施例中,一或多處理元件210可控制 顯示元件230相應於感測器150的位置及旋轉角度,操作性地顯示虛擬實境物件VOB1、VOB3、VOB4於虛擬實境環境VRN中。亦即,顯示元件230可操作性地同時顯示虛擬實境物件VOB1、VOB3、VOB4與虛擬實境環境VRN。
在本案一實施例中,一或多處理元件210可透過網路20,從虛擬實境處理裝置100取得虛擬實境環境VRN的模型。在另一實施例中,一或多處理元件210可從安裝在行動裝置200上的應用程式取得虛擬實境環境VRN的模型。然而,其它取得虛擬實境環境VRN的模型的方法亦在本案範圍之中。
參照第4圖,在一實施例中,在一或多處理元件110取得虛擬實境顯示裝置130的位置及旋轉角度及感測器150的位置及旋轉角度後,一或多處理元件110可控制虛擬實境顯示裝置130,以相應於虛擬實境顯示裝置130的位置及旋轉角度及感測器150的位置及旋轉角度,操作性地顯示虛擬實境物件VOB2。
在變化的實施例中,行動裝置200可傳送行動裝置200的位置及/或旋轉角度至一或多處理元件110(如透過網路20傳送),以令一或多處理元件110得以控制虛擬實境顯示裝置130,以相應於行動裝置200的位置及/或旋轉角度,操作性地顯示虛擬實境物件VOB2。
在一實施例中,在一或多處理元件110取得虛擬實境顯示裝置130的位置及旋轉角度及虛擬實境控制器140的位置及旋轉角度後,一或多處理元件110可控制虛擬實境 顯示裝置130,以相應於虛擬實境顯示裝置130的位置及旋轉角度及虛擬實境控制器140的位置及旋轉角度,操作性地顯示虛擬實境物件VOB3。
在一實施例中,在一或多處理元件110取得虛擬實境顯示裝置130的位置及旋轉角度及虛擬實境物件VOB4的位置及方向後,一或多處理元件110可控制虛擬實境顯示裝置130,以相應於虛擬實境顯示裝置130的位置及旋轉角度及虛擬實境物件VOB4的位置及方向,操作性地顯示虛擬實境物件VOB4。
參照第5圖,在一實施例中,一或多處理元件210可透過網路20,傳送顯示於顯示元件230上的即時影像RTI至虛擬實境處理裝置100。一或多處理元件110可透過網路20,接收顯示於顯示元件230上的即時影像RTI,並控制虛擬實境顯示裝置130操作性地顯示接收到的顯示元件230上的即時影像RTI。在一實施例中,顯示於顯示元件230上的即時影像RTI可相應於虛擬實境顯示裝置130的位置及旋轉角度,操作性地顯示於虛擬實境顯示裝置130。例如,當虛擬實境顯示裝置130朝向虛擬實境環境VRN中放置即時影像RTI的特定位置時,顯示裝置130顯示此些即時影像RTI。
以下將搭配第6圖中的行動裝置的操作方法以提供本案更具體細節,然本案不以下述實施例為限。
應注意到,此一操作方法可應用於相同或相似於第1圖中所示結構之行動裝置。而為使敘述簡單,以下將根據本發明一實施例,以第1圖中的行動裝置200為例進行 對操作方法敘述,然本發明不以此應用為限。
此外,操作方法亦可實作為一電腦程式,並儲存於一非暫態電腦可讀取記錄媒體中,而使電腦、電子裝置、或前述一或多處理元件210讀取此記錄媒體後執行此一操作方法。非暫態電腦可讀取記錄媒體可為唯讀記憶體、快閃記憶體、軟碟、硬碟、光碟、隨身碟、磁帶、可由網路存取之資料庫或熟悉此技藝者可輕易思及具有相同功能之非暫態電腦可讀取記錄媒體。
另外,應瞭解到,在本實施方式中所提及的操作方法的操作,除特別敘明其順序者外,均可依實際需要調整其前後順序,甚至可同時或部分同時執行。
再者,在不同實施例中,此些操作亦可適應性地增加、置換、及/或省略。
參照第1、6圖,操作方法300包括以下操作。
在操作S1中,一或多處理元件210透過網路20,從虛擬實境處理裝置100接收感測器150的位置及旋轉角度。在一實施例中,感測器150接附於行動裝置200。虛擬實境處理裝置100與虛擬實境顯示裝置130進行溝通。虛擬實境顯示裝置130用以相應於虛擬實境顯示裝置130的位置及旋轉角度,顯示虛擬實境環境。
在操作S2中,一或多處理元件210控制顯示元件230,以相應於感測器150的位置及旋轉角度,操作性地顯示虛擬實境環境中的虛擬實境物件。
關於上述操作方法的具體細節可參照前述段 落,故在此不贅述。
透過上述操作,他人可透過行動裝置200看見虛擬實境物件,而不需使用另一虛擬實境顯示裝置130。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何熟習此技藝者,在不脫離本發明之精神和範圍內,當可作各種之更動與潤飾,因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。
300‧‧‧方法
S1-S2‧‧‧操作

Claims (11)

  1. 一種虛擬實境(virtual reality,VR)系統,包括:一虛擬實境顯示裝置,用以相應於該虛擬實境顯示裝置的位置及旋轉角度,顯示一虛擬實境環境;一第一虛擬實境控制器;一行動裝置,接附於該第一虛擬實境控制器;以及一虛擬實境處理裝置,用以:取得該第一虛擬實境控制器的位置及旋轉角度;以及透過一網路,傳送該第一虛擬實境控制器的位置及旋轉角度至該行動裝置,以令該行動裝置相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地(operably)顯示該虛擬實境環境中的一虛擬實境物件。
  2. 如請求項1所述之虛擬實境系統,其中該行動裝置更用以:透過該行動裝置的一攝影元件,拍攝複數真實世界影像;以及相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示該虛擬實境物件於該些真實世界影像上。
  3. 如請求項1所述之虛擬實境系統,其中該行 動裝置更用以:相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示該虛擬實境物件於該虛擬實境環境中。
  4. 如請求項1-3中任一者所述之虛擬實境系統,其中該虛擬實境處理裝置更用以:透過該網路,傳送該虛擬實境顯示裝置的位置及旋轉角度至該行動裝置,以令該行動裝置相應於該虛擬實境顯示裝置的位置及旋轉角度以及該第一虛擬實境控制器的位置及旋轉角度,操作性地(operably)顯示該虛擬實境環境中的該虛擬實境物件。
  5. 如請求項1-3中任一者所述之虛擬實境系統,其中該虛擬實境處理裝置更用以:控制該虛擬實境顯示裝置,以根據該虛擬實境顯示裝置的位置及旋轉角度以及該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示另一虛擬實境物件。
  6. 如請求項1-3中任一者所述之虛擬實境系統,其中該行動裝置更用以:相應於該第一虛擬實境控制器的位置,取得該行動裝置的位置;以及相應於該行動裝置的位置,操作性地顯示該虛擬實境物件。
  7. 如請求項1-3中任一者所述之虛擬實境系統,其中該虛擬實境處理裝置更用以:取得一第二虛擬實境控制器的位置及旋轉角度;以及透過該網路,傳送該第二虛擬實境控制器的位置及旋轉角度至該行動裝置,以令該行動裝置相應於該第二虛擬實境控制器的位置及旋轉角度,操作性地顯示該虛擬實境環境中的該虛擬實境物件。
  8. 如請求項1-3中任一者所述之虛擬實境系統,其中該虛擬實境處理裝置更用以:接收顯示於該行動裝置上的一即時影像;以及控制該虛擬實境顯示裝置,以操作性地顯示該行動裝置上的該即時影像。
  9. 一種行動裝置的操作方法,包括:透過一網路,從一虛擬實境處理裝置接收一感測器的位置及旋轉角度,其中該感測器接附於該行動裝置,該虛擬實境處理裝置與一虛擬實境顯示裝置進行溝通,該虛擬實境顯示裝置用以相應於該虛擬實境顯示裝置的位置及旋轉角度,顯示一虛擬實境環境;以及相應於該感測器的位置及旋轉角度,操作性地顯示該虛擬實境環境中的一虛擬實境物件。
  10. 一種非揮發性電腦可讀取記錄媒體,用以儲存一電腦程式,其中在執行該電腦程式時,將致使一或多處理元件執行複數操作包括:透過一網路,從一虛擬實境處理裝置接收一感測器的位置及旋轉角度,其中該感測器接附於一行動裝置,該虛擬實境處理裝置與一虛擬實境顯示裝置進行溝通,該虛擬實境顯示裝置用以相應於該虛擬實境顯示裝置的位置及旋轉角度,顯示一虛擬實境環境;以及相應於該感測器的位置及旋轉角度,操作性地顯示該虛擬實境環境中的一虛擬實境物件。
  11. 一種虛擬實境處理裝置,包括:一或多處理元件;一記憶體,電性連接該一或多處理元件;以及一或多程式,其中該一或多程式儲存於該記憶體中,並用以被該一或多處理元件所執行,該一或多程式包括以下指令:取得相應於一第一虛擬實境控制器的位置及旋轉角度的一第一訊號;以及透過一網路,傳送該第一虛擬實境控制器的位置及旋轉角度至接附於該第一虛擬實境控制器的一行動裝置,以令該行動裝置相應於該第一虛擬實境控制器的位置及旋轉角度,操作性地顯示一虛擬實境環境中的一虛擬實境物件。
TW106116002A 2017-03-23 2017-05-15 虛擬實境系統、行動裝置的操作方法、非揮發性電腦可讀取記錄媒體、及虛擬實境處理裝置 TWI613570B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/466,884 US10282909B2 (en) 2017-03-23 2017-03-23 Virtual reality system, operating method for mobile device, and non-transitory computer readable storage medium
US15/466,884 2017-03-23

Publications (2)

Publication Number Publication Date
TWI613570B true TWI613570B (zh) 2018-02-01
TW201835725A TW201835725A (zh) 2018-10-01

Family

ID=58992618

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106116002A TWI613570B (zh) 2017-03-23 2017-05-15 虛擬實境系統、行動裝置的操作方法、非揮發性電腦可讀取記錄媒體、及虛擬實境處理裝置

Country Status (4)

Country Link
US (1) US10282909B2 (zh)
EP (1) EP3379380B1 (zh)
CN (1) CN108628435B (zh)
TW (1) TWI613570B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110928417B (zh) * 2019-12-11 2022-07-26 漳州北极光数字科技有限公司 一种平面识别模式增强现实多人共享交互方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200901089A (en) * 2007-06-22 2009-01-01 Mo Fz Tang Co Ltd Virtual reality image superimposing system and method thereof
TW201512765A (zh) * 2013-09-27 2015-04-01 Bubboe Corp 資訊產生與分享方法,及其相關裝置與電腦程式產品

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8957858B2 (en) * 2011-05-27 2015-02-17 Microsoft Technology Licensing, Llc Multi-platform motion-based computer interactions
CA3164530C (en) * 2011-10-28 2023-09-19 Magic Leap, Inc. System and method for augmented and virtual reality
US9230368B2 (en) 2013-05-23 2016-01-05 Microsoft Technology Licensing, Llc Hologram anchoring and dynamic positioning
US9996975B2 (en) * 2014-03-18 2018-06-12 Dreamworks Animation L.L.C. Interactive multi-rider virtual reality ride system
US9818225B2 (en) * 2014-09-30 2017-11-14 Sony Interactive Entertainment Inc. Synchronizing multiple head-mounted displays to a unified space and correlating movement of objects in the unified space
US20160188585A1 (en) * 2014-12-27 2016-06-30 Lenitra Durham Technologies for shared augmented reality presentations
US20160232713A1 (en) * 2015-02-10 2016-08-11 Fangwei Lee Virtual reality and augmented reality control with mobile devices
US20170039986A1 (en) 2015-08-07 2017-02-09 Microsoft Technology Licensing, Llc Mixed Reality Social Interactions
US10976808B2 (en) * 2015-11-17 2021-04-13 Samsung Electronics Co., Ltd. Body position sensitive virtual reality
GB2545275A (en) * 2015-12-11 2017-06-14 Nokia Technologies Oy Causing provision of virtual reality content
US10126553B2 (en) * 2016-06-16 2018-11-13 Microsoft Technology Licensing, Llc Control device with holographic element
US10134192B2 (en) * 2016-10-17 2018-11-20 Microsoft Technology Licensing, Llc Generating and displaying a computer generated image on a future pose of a real world object

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200901089A (en) * 2007-06-22 2009-01-01 Mo Fz Tang Co Ltd Virtual reality image superimposing system and method thereof
TW201512765A (zh) * 2013-09-27 2015-04-01 Bubboe Corp 資訊產生與分享方法,及其相關裝置與電腦程式產品

Also Published As

Publication number Publication date
EP3379380B1 (en) 2022-09-14
CN108628435B (zh) 2020-07-03
TW201835725A (zh) 2018-10-01
US10282909B2 (en) 2019-05-07
US20180276893A1 (en) 2018-09-27
CN108628435A (zh) 2018-10-09
EP3379380A1 (en) 2018-09-26

Similar Documents

Publication Publication Date Title
US11532136B2 (en) Registration between actual mobile device position and environmental model
EP3466070B1 (en) Method and device for obtaining image, and recording medium thereof
KR101749017B1 (ko) 주변 정보를 이용하는 스피드-업 탬플릿 매칭
KR102447438B1 (ko) 알림 장치 및 알림 장치가 물건의 위치를 알려주는 방법
US20140247280A1 (en) Federated mobile device positioning
KR102504308B1 (ko) 디스플레이의 밝기를 제어하는 방법, 전자 장치 및 컴퓨터 판독가능 기록매체
WO2013119366A1 (en) Method for managing screen orientation of a portable electronic device
US20140339988A1 (en) Lighting Control System, Arrangement Registering Method, and Recording Medium Storing Arrangement Registering Program
US8884988B1 (en) Portable device displaying an augmented reality image and method of controlling therefor
US11637968B2 (en) Image photographing method of electronic device and electronic device
US10386987B2 (en) Remote controller apparatus and control method thereof
CN113728293A (zh) 用于基于位所的设备控制的系统和界面
US20140210858A1 (en) Electronic device and method for selecting augmented content using the same
KR20180098079A (ko) 비전 기반의 사물 인식 장치 및 그 제어 방법
CN111553196A (zh) 检测隐藏摄像头的方法、系统、装置、以及存储介质
CN113506551A (zh) 基于面部取向检测的图像取向
TWI613570B (zh) 虛擬實境系統、行動裝置的操作方法、非揮發性電腦可讀取記錄媒體、及虛擬實境處理裝置
US11269183B2 (en) Display information on a head-mountable apparatus corresponding to data of a computing device
US10469673B2 (en) Terminal device, and non-transitory computer readable medium storing program for terminal device
US20170195559A1 (en) Information processing device, imaging device, imaging system, method of controlling information processing device and program
US20170148218A1 (en) Electronic apparatus and operation method thereof
TW201616282A (zh) 介面旋轉系統及方法
KR20230103063A (ko) 로봇 및 그 제어 방법
JP2016092434A (ja) プログラム、表示方法、および電子機器