TWI468734B - 用於在共享穩定虛擬空間維持多個視面的方法、攜帶式裝置以及電腦程式 - Google Patents

用於在共享穩定虛擬空間維持多個視面的方法、攜帶式裝置以及電腦程式 Download PDF

Info

Publication number
TWI468734B
TWI468734B TW100103494A TW100103494A TWI468734B TW I468734 B TWI468734 B TW I468734B TW 100103494 A TW100103494 A TW 100103494A TW 100103494 A TW100103494 A TW 100103494A TW I468734 B TWI468734 B TW I468734B
Authority
TW
Taiwan
Prior art keywords
portable device
virtual
space
virtual scene
location
Prior art date
Application number
TW100103494A
Other languages
English (en)
Other versions
TW201205121A (en
Inventor
George Weising
Thomas Miller
Original Assignee
Sony Comp Entertainment Us
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US12/947,290 external-priority patent/US8730156B2/en
Application filed by Sony Comp Entertainment Us filed Critical Sony Comp Entertainment Us
Publication of TW201205121A publication Critical patent/TW201205121A/zh
Application granted granted Critical
Publication of TWI468734B publication Critical patent/TWI468734B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/92—Video game devices specially adapted to be hand-held while playing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046—Interoperability with other network applications or services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/18—Commands or executable codes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215—Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/216—Input arrangements for video game devices characterised by their sensors, purposes or types using geographical information, e.g. location of the game device or player using GPS
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/426—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving on-screen location information, e.g. screen coordinates of an area at which the player is aiming with a light gun
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/803—Driving vehicles or craft, e.g. cars, airplanes, ships, robots or tanks
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/812—Ball games, e.g. soccer or baseball
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1006—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals having additional degrees of freedom
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/204—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform the platform being a handheld device
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/205—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform for detecting the geographical location of the game platform
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Description

用於在共享穩定虛擬空間維持多個視面的方法、攜帶式裝置以及電腦程式
本發明關係於控制於攜帶式裝置與虛擬場景的視面的方法、裝置及電腦程式，更明確地說，用以促成在虛擬或擴增實境中之多玩家互動的方法、裝置及電腦程式。
虛擬實境(VR)係為電腦模擬環境，不論該環境是為真實世界的模擬或想像世界，其中使用者可以透過標準輸入裝置或者特殊多方向輸入裝置的使用，與虛擬環境或虛擬物體(VA)互動。該模擬環境可以類似於真實世界，例如，模擬飛行或戰鬥訓練，或者，其可以與真實有顯著不同，例如在VR遊戲中。虛擬實境經常被用來描述各種的應用，通常相關於其沒入式高視覺3D環境。電腦輔助設計(CAD)軟體、圖形硬體加速、頭戴式顯示器、資料庫手套、及微小化的發展已經協助使這些普及化。
擴增實境(AR)提供實體上真實世界環境的即時視面，其元件被混合(或擴增)虛擬電腦產生影像，以建立一混合實境。擴增在傳統上為即時並為具有環境元素的語境，例如在比賽時電視上之運動分數。藉由先進AR技術的協助(例如加上電腦視面及物體辨識)，有關使用者周遭真實世界的資訊可以變成互動並作數位使用。
用語「擴增實境(AV)」也用於虛擬實境世界並類似於AR。擴增實境也稱為真實世界物體合併入虛擬世界。在虛擬進行的中間，AV稱為主要虛擬空間，其中實體元件，例如實體物體或人物被動態地整合入並可以與虛擬世界作即時互動。用語VR係被用於此應用中，作為上位用語，除了特別指出之外，也包含AR及AV。
VR遊戲典型需要大量的電腦資源。在VR遊戲之手持裝置的實施法係很稀有及現存遊戲係相對地簡單，具有基本的VR作用。另外，多玩家AR遊戲允許在虛擬世界中之玩家的互動，但互動係限制於在虛擬世界中為玩家所操縱的物體(例如，車輛、火箭、球等等)。虛擬世界為電腦產生並無關於玩家與攜帶式裝置的位置。玩家彼此相對位置及有關其周遭的相對位置，當建立”實境”虛擬實際經驗時並未列入考量。
在本文中，討論本發明之實施例。
本發明之實施例提供用以控制攜帶式裝置與虛擬場景的視面的方法、設備及電腦程式。應了解的是，本發明可以以各種方式實施，例如程序、設備、系統、裝置或電腦可讀取媒體上之方法。幾個本發明之發明實施例係說明如下。
在一方法的實施例中，一信號被接收及該攜帶式裝置係被同步在3維(3D)空間的參考點，作出該攜帶式裝置的位置。包含虛擬實境元件的虛擬的虛擬場景係被產生在參考點旁的3D空間中。再者，該方法決定該攜帶式裝置相對於參考點在3D空間中之現行地點並建立虛擬場景的視面。該視面代表由攜帶式裝置的現行地點及跟據該攜帶式裝置的現行地點的視角看到之虛擬場景。另外，所建立視面係被顯示於攜帶式裝置中，及虛擬場景的視面係當攜帶式裝置在3D空間中為使用者所移動。在另一方法中，多玩家共享該虛擬實境並彼此互動觀看在虛擬實境中之物體。
在另一實施例中，呈現出一種在裝置間共享一虛擬場景的方法。該方法包含同步化第一裝置至三維(3D)空間中之參考點及用以計算相對於第一裝置的位置的第二裝置的位置。再者，該方法的操作包含在第一裝置與第二裝置間之資訊的交換，以使第二裝置同步於3D空間中之參考點。該資訊包含該參考點及該第一與第二裝置的位置。另外，使用一方法操作以在3D空間中在參考點附近產生虛擬場景。虛擬場景係為兩裝置所共用並當裝置與虛擬場景互動時在兩裝置中同時改變。由第一裝置的現行地點看出之虛擬場景所建立之視面具有根據該攜帶式裝置之現行地點的視角，及所建立視面係顯示在第一裝置上。當攜帶式裝置移動於3D空間中時，該方法藉由改變該虛擬場景的顯示視面而繼續。
在另一實施例中，一種方法被執行以控制以第一裝置的虛擬場景的視面。該方法包含一操作，用以將第一裝置同步化至在第一三維(3D)空間中之第一參考點。在另一操作中，在第一裝置與第二裝置間建立通訊鏈結。該第二裝置係在第二3D空間中，在第一3D空間外，並同步化至在第二3D空間中之第二參考點。再者，一方法操作係被執行，用以產生共同虛擬場景，其包含虛擬實境元件，其中該共同虛擬場景係可以為該第一及第二裝置所觀察到。第一裝置建立該共同虛擬場景於該第一參考點旁，及第二裝置建立共同虛擬場景於第二參考點旁。該兩裝置均能與虛擬實境元件互動。再者，該方法包含操作，用以決定第一裝置相對於該參考點的第一3D空間中之現行地點，用以建立該共同虛擬場景的視面。該視面表示由第一裝置的現行地點並具有根據該第一裝置的現行地點的一視角所見的共同虛擬場景。所建立之視面係被顯示於第一裝置中，及當該第一裝置移動於該第一3D空間內時，該共同虛擬場景的顯示視面改變。
在另一實施例中，該方法操作控制具有可攜帶式裝置的虛擬場景的視面。在一操作中，攜帶式裝置係被同步至三維(3D)空間中之參考點，其中定位有該攜帶式裝置。攜帶式裝置包含面向該攜帶式裝置前面的前攝影機及面向該攜帶式裝置的背面之背面攝影機。再者，一操作係被執行以3D空間在參考點旁產生虛擬場景。該虛擬場景包含虛擬實境元件。在攜帶式裝置之3D空間中之現行地點係被相對於參考點決定。在另一方法操作中，建立該虛擬場景的視面。該視面捕捉由在玩家的該3D空間中之現行眼睛位置所看到之虛擬場景的代表圖，該玩家持有該攜帶式裝置，其對應於玩家將透過視窗所見到之虛擬場景。在3D空間中之視窗位置係等於在攜帶式裝置中之顯示器的3D空間中之位置。該方法同時也包含用以顯示所建立的視面在該顯示器上，及用以改變虛擬場景的顯示視面為攜帶式裝置或在3D空間中玩家移動的操作。
在再一實施例中，攜帶式裝置係被用以與擴增實境相互動作。攜帶式裝置包含地點模組、虛擬實境產生器、視面產生器、及顯示器。地點模組係用以決定在攜帶式裝置所在之3D空間中之攜帶式裝置的位置，其中攜帶式裝置的位置係被設定為在攜帶式裝置接收一信號以同步化時的3D空間中之參考點。虛擬實境產生器在該3D空間中的參考點旁建立虛擬場景。虛擬場景包含虛擬實境元件。再者，該視面產生器建立該虛擬場景的視面，該視面代表由攜帶式裝置並根據該攜帶式裝置的位置之視角所看到之虛擬場景。另外，顯示器係被用以顯示虛擬場景的視面。當該攜帶式裝置移動於3D空間中，示於顯示器中之視面改變。
在另一實施例中，內藏於電腦可讀取儲存媒體中之電腦程式，當為一或更多處理器所執行時，電腦程式係被用以實施本發明之方法。
本發明之其他態樣將由以下之詳細說明配合上附圖而了解，附圖係例示本發明之原理。
以下實施例描述用以控制在虛擬或擴增實境中之虛擬場景的視面的方法、裝置及電腦程式。然而，為熟習於本技藝者所了解，本發明可以在沒有部份或所有這些特定細節下實施。在其他例子中，我們知道已知程序未被詳細描述以防止不必要地阻礙本發明。
圖1描繪依據一實施例之在使用者在將攜帶式裝置同步化至空間中之一參考點之前。攜帶式裝置104係放在桌上，準備將攜帶式裝置同步化至參考點的情形。使用者102已經將攜帶式裝置放置於作為參考點之一點或錨定住以在該點旁建立虛擬實境。如圖1所示，攜帶式裝置係放置於桌子的大約中心，及一旦攜帶式裝置被同步化，則在桌子的中心附近建立虛擬世界。攜帶式裝置可以以各種方式加以同步化，例如，壓下在攜帶式裝置104上之按鈕、觸碰在攜帶式裝置中之觸控螢幕、使得該裝置保持不動一時間段(例如，5秒)，進入語音命令等等。
一旦攜帶式裝置接收予以同步化的輸入時，在攜帶式裝置中之位置追蹤模組被重設。攜帶式裝置可以包含各種地點追蹤模組，如下參考圖21加以討論者，例如加速度計、磁力計、全球定位系統(GPS)裝置、攝影機、深度攝影機、羅盤、陀螺儀等等。
攜帶式裝置可以為很多類型之一，例如手持攜帶遊戲裝置、行動電話、平板電腦、筆記型電腦、小筆電、個人數位助理(PDA)等等。本發明之實施例將參考攜帶式遊戲裝置加以描述，但其原理可以應用至具有一顯示器的任一攜帶型電子裝置上。本發明之原理也可以應用至連接至具有顯示器的計算裝置的遊戲控制器或其他輸入裝置。
圖2顯示以攜帶式裝置觀察之虛擬實境場景。在相對於參考點106同步化裝置104後，攜帶式裝置將開始顯示虛擬實境108的視面。在顯示器中之視面係藉由模擬於攜帶式裝置的背面之攝影機在3D空間內移動於參考點106附近加以建立。圖2描繪包含棋盤的虛擬實境。攜帶式裝置104能檢測動作並決定當裝置移動時，其相對於參考點106的相對地點。位置及地點的決定可以以不同方法不同準確程度加以完成。例如，位置可以藉由分析以攝影機捕捉之影像、由慣性系統、GPS、超音波三角定位法、WiFi通訊、位置推算法、等等或其組合所取得之資料加以檢測。
在一實施例中，裝置追蹤攜帶式裝置相對於參考點106在空間中之位置及在攜帶式裝置之空間中之地點。地點係用以決定攝影機的視角，即，攜帶式裝置作為拍入虛擬場景的攝影機。如果攜帶式裝置指向右，則視面將轉向右等等。換句話說，視角係被決定為在顯示器的中心(或裝置的其他部份)的原點之向量，及具有垂直進出該顯示器之一方向。在另一實施例中，只有在空間中之地點被追蹤，在顯示器中之視面係被計算，如同攝影機針對空間中攜帶式裝置所在及朝向參考點的位置。
在部份現存實施法中，擴增實境(AR)標籤係被放置在桌上，並利用作為受託標示碼，以用以產生擴增實境。AR標籤可以為當出現在真實環境中之捕捉影像串流時被認出的物體或圖。AR標籤作為受託標示碼，其促成在真實環境內的位置之決定。本發明之實施例免除了AR標籤的必要，因為同步化至3D空間及攜帶式裝置位置的追蹤。另外，位置資訊允許在攜帶式裝置中之遊戲輸送真實性3D虛擬經驗。另外，一陣列之網路攜帶式裝置可以用以建立共享虛擬世界，如下之參考圖4所述。
圖3例示依據一實施例之具有虛擬棋盤與混合玩家的手部之擴增實境棋賽。3D空間的影像係被用以藉由相對於校正點組合真實與虛擬元件而建立擴增實境，並提供光學動作捕捉狀功能。以校正多攝影機技術，有可能決定手部或手臂的地點，以使得玩家”進入”擴增實境場景並與遊戲物體(棋子)互動。
在一實施例中，在單一裝置的背面使用兩攝影機，以決定物體進入3D空間的位置。也可以使用深度攝影機以取得三維資訊。在其他實施例中，如以下參考圖4所討論，來自多裝置的攝影機係被用以決定手部306的位置。於手持攜帶物302放在一手上的同時，玩家透過螢幕304看到並進行遊戲空間，該空間被產生以使玩家觸及3D遊戲物體及環境。比賽遊戲係為完全地觸覺。多個玩家可能同時進入一遊戲區域並以智慧方式與遊戲物體互動。例如，玩家的手部306可以藉由交界、握持、推動、拉動、抓持、移動、擊破、擠壓、敲打、擲敲、打鬥、開、合、導通或關斷、按鈕、點火、吃(棋子)等等與虛擬物體互動。
同步至遊戲空間之各個攜帶式裝置加入另一可能攝影機，相對運動的追蹤及音源資料，使得這可能由多數透視圖看到玩家的手部及手指，以建立有效3D攝影機為主之動作捕捉欄。手部與虛擬空間被混合在一起，而在虛擬空間中之虛擬元件出現在顯示視面中，如同為3D空間的一部份。當該攜帶式裝置移動於3D空間中時，虛擬元件之視面以與真實元件視面改變的方式，由幾何透視圖改變。
圖4描繪依據一實施例之多玩家虛擬實境遊戲。當校正地點與影像分析資料被組合以高速連接性，則地點及遊戲資訊可以在選擇參與共享空間遊戲經驗的各個裝置間交換。這允許各個玩家系統取用攝影機視面及來自所有其他玩家的地點資訊，以同步化其校正地點並共享一虛擬空間，一起也稱為共享空間。
在玩家402A-402C已經參考共同3D空間(例如桌上的一點)中之一點同步化或校正其攜帶式裝置後，建立共同虛場景404。各個玩家具有虛擬場景404的視面，如同在此例中之打軍事戰爭遊戲之虛擬場景係真的在玩家的前面的桌上。攜帶式裝置作為攝影機，如同玩家移動於裝置旁，視面改變。結果，在各個顯示器上之實際視面係無關於在其他顯示器中之視面，及該視面係只根據該攜帶式裝置相對於虛擬場景之相對位置，該虛擬場景係錨定至3D空間上之實際實體位置。
藉由利用多數攝影機、加速度計及其他機械裝置以決定地點，配合在攜帶式裝置間之高速通訊，有可能建立3D動作捕捉狀經驗，允許玩家以可相信的方式，觀看及可能碰觸虛擬遊戲角色及環境。
共享空間404遊戲利用裝置之高速連接性，以交換參與共享空間遊戲經驗之裝置之資訊。藉由將該裝置轉至為穩定“魔術窗”，以持續於各個裝置間之空間中，共享空間404遊戲空間係透過該裝置觀看。藉由使用動作追蹤、影像分析、及在各個裝置間之資訊的高持久性的組合，即使當該等裝置略微移動，顯示區域仍以穩定地點出現。
圖5例示多玩家環境之校正方法的一實施例。如前所述，由裝置感應器(加速度計、GPS、羅盤、深度攝影機等等)取得之地點資訊係被傳送至其他鏈結裝置，以加強在虛擬空間中之合作維持之資料。在建立同步於共同參考點502的共同共享空間的實施例中，第一玩家504A相對於參考點502同步化其裝置至3D空間。在共享空間中之其他玩家建立與第一玩家的通訊鏈結，以交換地點及遊戲資訊。相對位置可以以不同方式取得，例如使用WiFi三角定位及上網測試以決定相對位置。另外，視覺資訊可以用以決定其他位置，例如檢測其他玩家的臉，及由他們的臉得知遊戲裝置的可能位置。
在一實施例中，藉由超音波通訊及方向性麥克風，音訊三角定位係用以決定相對位置。多數頻率也可以用以執行音訊三角定位。一旦裝置已經交換地點資訊，則例如超音波、WiFi、或藍芽的無線通訊被用以同步化其他的裝置至參考點502。在所有裝置被校正後，該等裝置已經認可該參考點502及其相對於參考點502的相對位置。應了解的是，其他方法也可以用以校正多數裝置至共享參考點。例如，所有裝置可以藉由將裝置依序放在參考點上而校正至相同參考點。
虛擬場景可以藉由使用在室中之發光源所決定的陰影及光而更真實化。藉由使用攝影機回饋，遊戲環境及角色已經為真實世界所影響的場景光與陰影。當手伸入虛擬世界以與虛擬物體互動時，這表示玩家手將投影一陰影在虛擬角色或物體上。遊戲世界陰影及光係藉由真實世界的陰影與光所調整，以取得可能最佳效果。
圖6例示依據一實施例如何在網路連接上玩一互動遊戲。很多類型遊戲可以用在共享空間中。例如，該攜帶式裝置可以使用成為一球拍，以打桌球遊戲。該裝置略微移動，如同它像一球拍以擊中該球。玩家們看球浮動於螢幕與對手螢幕之間。在戰爭遊戲中，玩家透過攜帶式裝置加以觀看並將石彈投射在對手的城堡。玩家將該裝置向後拉載入石彈，然後，按下按鈕以將石彈投向敵人的城堡。
共享空間也可以當玩家在不同位置時建立，如圖6所示。玩家已經建立網路連接以玩該遊戲。各個玩家同步化其裝置至玩家空間中之參考點，及建立例如桌球桌的虛擬實境。對手係被顯示為在球桌的後側，其中對手裝置的移動係配合對手球拍的動作。該遊戲也可以加入一化身以握持球拍，以作為更真實遊戲經驗。在打球時，各個裝置追蹤裝置在空間中之動作與位置。此資訊係為其他裝置所分享，以促使其他裝置將虛擬球拍匹配於裝置的動作。也可以分享其他遊戲資訊，例如，球的位置與移動。
圖7顯示互動遊戲，其係無關於該攜帶式裝置的位置者。圖7所示之遊戲顯示玩遊戲的限制並未相對於參考點706同步。多玩家空氣曲棍球係被同時遊玩於兩分開裝置704C及704A上。遊戲包含曲棍球場708、圓碟714、及球棍710及712。各個玩家藉由移動在顯示器上之手指而控制球棍。顯示器顯示圓碟及球棍的位置。然而，當攜帶式裝置略微移動，因為沒有地域同步化一參考點，所以，在顯示器上之視面並未改變。例如，當玩家702A移動至位置702B時，視面係相同，無關於該裝置位於何處。
為了玩遊戲，攜帶式裝置只交換有關於圓碟的移動與球棍位置的資訊。沒有虛擬經驗綁在3D空間中。
圖8顯示依據一實施例之互動遊戲，其中在顯示器中之視面係取決於攜帶式裝置的位置。裝置802A及802B已經被校正至共同空間，曲棍球場已經被建立為虛擬元件。該裝置作用為進入該空間之攝影機，及該裝置並不必然需要顯示整個遊戲面。例如，當該裝置被拉離開參考點時，則發生縮小顯示及可取得較大球場。再者，如果裝置斜向上，則視面顯示球場的頂部，及如果裝置向下斜，則在裝置中之視面愈接近玩家的本身目標。如圖8所示，在顯示器中之視面係彼此無關並係根據由各個攜帶式裝置的遊戲面的現行視面。
圖9顯示依據一實施例，攜帶式裝置如何移動具有在將攝影機移動於虛擬空間時的類似作用。圖9顯示在虛擬空間中之車輛902。假想攜帶式裝置係由球體中的一點對準至車輛902，則當攜帶式裝置移動於球體內時，可取得車的視面多數。例如，來自“北極”的視面將顯示車輛的車頂，及來自“南極”的視面將顯示車輛的底部。同時，示於圖9為車輛的側、前及後視面。
在一實施例中，玩家可以輸入一命令，以改變或翻動虛擬世界的視面。例如，為車輛時，玩家由車子的前面看到車子的背面，如同場景己經旋轉180度左右及透過參考點垂直進行之軸。以此方式，玩家並不必在室內移動以取得不同的視角。其他輸入也可以產生不同作用，例如90度旋轉，視圖的縮放(以使得虛擬世界似乎更小或更大)，相對於x、y或z軸等旋轉。在另一實施例中，攜帶式裝置的翻轉，即在玩家的手上旋轉180度，將造成虛擬世界的視面上下顛倒翻轉。
圖10顯示依據一實施例當旋轉攜帶式裝置時，示於顯示器中之影像的變化的二維化表圖。攜帶式裝置152係對準向一壁面，具有視角α，造成在壁面上投影160。因此，在攜帶式裝置152上之視面將對應投影160。當裝置152旋轉β角時，攜帶式裝置結束於地點154。在維持攝影機視角α時，視面同時也旋轉角β。結果，在攜帶式裝置上之視面對應於投影162。應注意的是，在螢幕上之視面係無關於眼睛位置，例如地點158及156，及視面係無關於玩家在何處。另外，在顯示器上之影像係取決於作動為虛擬攝影機之攜帶式裝置的地點。以下所述之其他實施例包含在顯示器上之視面，其依據眼睛的位置改變。
圖11顯示依據一實施例之遊玩VR遊戲的攜帶式裝置。圖11至12F例示賽車遊戲，其中，攜帶式裝置可以被使用作為攝影機或控制車輛的駕駛。攜帶式裝置顯示賽車的視面，其中賽車道係被顯示在其他對中車輛的中央，及人們坐在車道的側邊上的台子上。
圖12A至12F例示依據一實施例，攜帶式裝置的地點如何影響在顯示器中之視面。在此順序中，攜帶式裝置係被使用作為攝影機，而不是用以開車。圖12A顯示玩家固持住該攜帶式裝置以玩賽車比賽。該裝置係被保持於玩家的前面，相隔大約手臂的長度。當玩家在如圖12所示之地點時，遊戲的視面係為圖12B所示者，其中顯示器的視面顯示如由車輛駕駛員所見的賽車。駕駛員可以看到前方車道及車輛內裝的一部份，包含方向盤。
圖12C顯示當玩家仍保持攜帶式裝置在其前方左轉45度時。結果，攜帶式裝置與玩家一起在空間中移動。玩家的移動結果係如圖12D所示，其中賽車道的視面也轉向約45度。可以看出，攜帶式裝置作動為攝影機及如果攝影機在3D世界中改變地點，則在顯示器上之視面改變。
圖12E顯示玩家再左轉45度。結果，攜帶式裝置的頭及視角已經相對於原始地點改變約90度。在顯示器上之結果係被描繪於圖12F中，其中遊戲的駕駛員已經具有一側視圖，其中，遊戲的駕駛員已有一側視面，其包含另一賽車與台子。
圖13A-13B例示依據一實施例之在遠端位置之使用者間玩擴增實境遊戲。圖13A顯示具有攝影機1302面向握持住該攜帶式裝置的玩家的攜帶式裝置。面向玩家攝影機有很多用途，例如通訊、視見平截頭體應用(見圖15-19B)、在遊戲中加入玩家的臉等等。
圖13B顯示產生近似真實效果的擴增實境遊戲的實施例。玩家1308係在遠端位置並透過網路連接交換遊戲及環境資訊。在遠端位置中之攝影機拍攝該玩家及其周圍，例如背景1310。該影像被送至對手的裝置，其中影像被混合以一虛擬棋盤1306。同樣地，攝影機1304拍攝握持該裝置的玩家的照片並將影像送給遠端玩家。此方式該等玩家可以共享一空間。
各個玩家把視面視為擴增實境，當視面經過另一玩家之場景時，擴增實境淡入為虛擬實境霧。各個玩家的所有動作仍相對於兩裝置的同步校正地點作追蹤。該遊戲將虛擬棋盤插入提供3D經驗的桌子的頂部。如前所述，攜帶式裝置可以略微移動以改變視角並由不同透視點看棋盤，例如由上方、側面、對手方向等看棋盤。
在一實施例中，藉由定期地更新對手的臉及背景，而不使用現場方式，可以降低所需之通訊與處理頻寬。另外，也可能只送遠端影像的一部份，例如玩家的影像，因為背景可以為靜態並且較沒有關係。例如，遠端玩家的臉可以每五秒更新一次、每次玩家改變姿勢時更新、當玩家交談時更新等。
在另一實施例中，聲音可以在玩家間交換，以使得3D經驗更真實。在另一實施例中，玩家具有改變視面的選項，例如，在混合3D影像與只顯示棋盤間作切換，以改良棋盤的視圖。在另一實施例中，影像穩定化可以用以穩定由於玩家手抖動所造成之小影像變動。在一實施例中，握持該裝置的玩家的臉可以加至顯示器中，以顯示該使用者給對手看到的樣子。
圖14A-14H描繪依據一實施例當攜帶式裝置改變地點時顯示器中之變化。在圖14A-14H的順序中，攜帶式裝置正使用視見平截頭體效應，以決定擴增實境世界係如何呈現給使用者。
在現行3D電腦圖形中，視見平截頭體係為可以出現在螢幕上之模型化世界中之空間的區域。視見平截頭體係為標準攝影機的視野。此區域的準確形狀取決於模擬何種攝影鏡頭而改變，但典型為平截頭體的矩形錐體(如同所命名)。垂直於視見方向切割截頭體平面被稱為近面及遠面。在一實施例中，近面對應於在攜帶式裝置中之顯示面。較近面更接近攝影機或較遠面更遠離攝影機的物體並未繪出。
在一實施例中，視見平截頭體係被錨定(錐體的頂部)於握持攜帶式裝置的玩家的(雙眼間)眼中。顯示器作動為進入虛擬實境的視窗。因此，“視窗”愈接近眼部，則虛擬實境的顯示面積愈大。相反地，“視窗”愈遠離眼部，則虛擬實境的視面愈小(更詳細)。該作用係類似於更接近矩形舊式窺孔，而沒有扭曲光學。眼睛愈接近窺孔，則可以看到愈多外部。
圖14A顯示在室內玩家握持擴增實境攜帶式裝置的情形。在裝置被同步於室內時，虛擬實境產生器已經將虛擬三角形“畫”在面向玩家的壁上，及正方形“畫”在壁面上在玩家的左方。在圖14A中，玩家正握持該裝置略低於眼位準，手臂幾乎完全伸展。示於顯示器中之視面係呈現在圖14B中，其中顯示三角形的一部份在玩家之前。
在圖14C中，玩家係在相同地點並彎曲手肘以使攜帶式裝置更接近臉。由於如上討論之視見平截頭體作用，玩家看到更大部份的壁面。圖14D顯示圖14C的裝置中所顯示的視面。因為視見平截頭體作用，相較於圖14B的前一視面可看到更大壁面之截面。完整三角形現顯示在顯示器中。
圖14E顯示玩家將裝置向下移，以看相對壁面的底部，如圖14F所示。三角形的底部被顯示在顯示器中。在圖14G中，玩家向左轉並使用“視窗”進入擴增世界，以看室內的角落，如圖14H所示。
圖15顯示使用前及後攝影機，在攜帶式裝置上實施視見平截頭體的實施例。圖15顯示視見平截頭體的2D投影，並且因為其為2D投影，所以看到之視見平截頭錐體為三角形。攜帶式裝置1506分別包含前及後面向攝影機1514及1512。攝影機1512被用以捕捉玩家所在之空間的影像。攝影機1514係用以捕捉握持裝置1506的玩家之影像。臉部辨識軟體允許該等裝置軟體決定玩家眼部的位置，以模擬視見平截頭體作用。
在一實施例中，視見平截頭體具有頂點，該矩形截頭錐體的邊緣由眼部延伸穿過在手持裝置中之顯示器的角落。當眼部在地點1502時，玩家“看到”面向該裝置的壁面的區域1510。由眼部開始的直線，並接觸顯示器的角落與壁面相交叉，以界定區域1510。當眼部移動至地點1504時，結果起源於眼部的直線改變。新直線定義區域1508。總結，如果攜帶式裝置1506被保持固定，則當眼部位置的改變將造成顯示器所顯示之內容改變。當然，如果攜帶式裝置移動，則視面將也因為當錐體的邊緣相交於顯示器的角落時，視見平截頭體改變，則視面也將改變。
應了解的是，示於圖15中之實施例為視見平截頭體的例示實施法。其他實施例也可以利用不同形狀於視見平截頭體上，並可以縮放視見平截頭體作用，或可以增加邊界於視見平截頭體。示於圖15的實施例因此將不被解釋為排除或限制性，而是例示或示範性。
圖16A-16B例示依據一實施例之當玩家移動時改變視見平截頭體的作用。圖16A包含在攜帶式裝置中之顯示器1606，其中顯示器的表面係平行於壁面的表面。當玩家以視見平截頭體作用透過顯示器觀看時，建立有矩形截頭錐體，其具有頂部在玩家(例如在雙眼之間)的臉中，具有基於壁面及由邊緣延伸至眼部並接觸顯示器1606的角落。
當玩家在地點1602，則視見平截頭體建立一矩形基部1610，其係為該玩家在顯示器1606上所見。當玩家移動至地點1604來移動顯示器時，視見平截頭體結果改變。用於截頭的新基部為矩形1608，其係在顯示器1606中所見。結果為玩家地點的改變造成在虛擬實境的視面中之改變。
圖16B例示當使用視見平截頭體作用時，於臉移開或移近該顯示器時所建立的變焦作用。當玩家於地點1632時，玩家看到矩形1638，如前所述。如果玩家遠離顯示器1636至地點1632而不移動顯示器，則看到對應於矩形1640的新顯示。因此，當玩家遠離，則虛擬世界的觀察面積將因為在顯示器中之觀看面積變小而收縮及在此觀看區域中之物體變大，而造成放大作用。當玩家移動更靠近顯示器1636的相反動作將造成相反之縮小作用。
圖17例示依據一實施例如何使用虛擬攝影機以隔開虛擬場景的視面。虛擬或擴增實境並不必要被侷限在玩家所在之室內限制內，如同在賽車遊戲之圖11之前所見。超出玩家的實體邊界的虛擬世界也可以被模擬。圖17例示一玩家觀看虛擬演唱會。實際舞台係於室內的壁外並可以模擬離開攜帶式裝置幾百呎，在此例中作為虛擬攝影機。視見平截頭體也可以以相同方式模擬。
如同在底下所看到，不同攝影機地點及視角將在顯示器上造成不同視面。例如，第一地點係對焦在伴唱者，第二位置在主唱，及第三位置在觀眾。虛擬攝影機也可以加入變焦輸入，以如同真實攝影機般地放大及縮小。
在一實施例中，縮放係被用以透過虛擬實境導引。例如，如果玩家移前一呎，則攜帶式裝置將如同玩家已向前10呎的虛擬視面。以此，玩家可以導引虛擬世界，其係較玩家所在之室內更大。
在另一實施例中，玩家可以輸入命令以使得攝影機移動於虛擬實境內，而不實際移動攜帶式裝置。因為攜帶式裝置係相對於一參考點同步，所以攝影機的此移動不必為玩家所移動，具有將參考點改變至新位置的作用。此新參考點可以被稱為虛擬參考點，並且，不必位於玩家所在之實際實體空間內。例如，在示於圖17之場景內，玩家可以使用“前移”命令，以移動攝影機後台。一旦玩家“在”後台，則玩家可以開始移動攜帶式裝置以探索視面後台，如先前所述。
圖18A-18H顯示依據一實施例以例示視見平截頭體作用的順序視面。圖18A顯示正握持攜帶式裝置的玩家。在顯示器上之視面係對應於示於圖18B所示之森林的影像。在圖18C中，玩家向右移動他的頭，同時，保持攜帶式裝置大約與圖18A相同的地點。圖18D對應於在圖18C中之玩家的視面，並顯示出由於視見平截頭體作用之森林的改變透視圖。
在圖18E中，玩家繼續使他的頭向右，同時移動攜帶式裝置向左，以強調視見平截頭體作用，因為玩家想要知道是否在樹後有東西。圖18F顯示對應於圖18E中之玩家之顯示器。森林的透視圖再次改變。在樹本之一後面藏有一精靈，如圖18B所藏，但精靈的一部份可以當玩家改變森林的視角時由圖18F看到。圖18G顯示玩家進一步低頭向右並移動攜帶式裝置進一步遠離左邊。如圖18H所看到，該作用係為玩家可以看到樹後有什麼，及可以看到整個精靈。
圖19A-19B例示將視見平截頭體作用與攝影機作用組合的實施例。組合視見平截頭體與攝影機作用可以被認為用於建立虛擬視面的行為為不同時不可能。然而，當有規則以定義何時使用一作用而何時使用另一作用時，該組合為可能。在一實施例中，攝影機作用係當玩家移動攜帶式裝置時被使用，及視見平截頭體係當玩家相對於攜帶式裝置移動頭時使用。當兩事件同時發生時，一作用被選擇，例如視見平截頭體。
此組合表示給定眼睛與攜帶式裝置的一地點，取決於眼睛及攝影機如何到達該地點，其中有可能有不同視面。例如，眼睛1902看穿裝置1906時，不同視面的虛擬實境係被顯示於圖19A及19B，如以下所討論。
參考圖19A，眼睛1902係原來看穿過裝置1904。使用視見平截頭體作用，該裝置“對準”直入該虛擬實境。這造成在視見平截頭體錐體的頂部開始的α角，並造成攝影機角β。使用參考圖10及15所前述之相同2D表示法，玩家在其第一地點，在該壁面上看見區段1908。玩家然後轉動該裝置γ角度，以使裝置在地點1906。因為玩家已經移動該裝置，所以，攜帶式裝置回應於有關攝影機作用的移動，使得虛擬攝影機也轉γ角。該結果為顯示器現顯示壁面的區域1910。
圖19B顯示一玩家，於看穿攜帶式裝置1906的啟始眼睛地點1912。視見平截頭體係被使用及結果為在顯示區域1918上之外表。玩家然後移動至眼睛地點1902，而不移動攜帶式裝置。因為該裝置未移動，所以發生視見平截頭體作用及玩家然後在顯示器上看到區域1916。應注意的是，雖然眼睛1902及顯示器1906在圖19A及19B為相同地點，但實際視面因為事件的順序使得眼睛及顯示器在該地點。
圖20顯示一演算法的流程圖2000，用以依據本發明一實施例以控制具有攜帶式裝置的虛擬場景的視面。在操作2002中，信號被接收，以同步化攜帶式裝置，例如，按鈕按壓或螢幕接觸。在操作2004中，方法同步化該攜帶式裝置，以使得攜帶式裝置所在之位置係位於三維(3D)空間中之參考點上。在一實施例中，3D空間係為玩家所在之室內。在另一實施例中，虛擬實境包含室內及延伸超出該室壁面之虛擬空間。
在操作2006中，一虛擬場景係產生於3D空間內參考點附近。虛擬場景包含虛擬實境元件，例如，圖2的棋盤。在操作2008中，攜帶式裝置決定該攜帶式裝置相對於參考點在該3D空間中之現行地點。虛擬場景的視面係在操作2010中建立。該視面代表由該攜帶式裝置的現行地點，及根據該攜帶式裝置的現行地點的視角看到之虛擬場景。再者，在操作2012期間，所建立之視面係被顯示在攜帶式裝置的顯示器上。在操作2014中，攜帶式裝置檢查是否該攜帶式裝置已經為使用者所移動，即現行地點已經改變。如果攜帶式裝置被移動，則該方法流程回到操作2008，以再循環現行地點。如果攜帶式裝置未被移動，則攜帶式裝置持續藉由流動至操作2012而顯示先前建立視面。
圖21例示可以用以實施本發明實施例之裝置的架構。攜帶式裝置係為一計算裝置並包含出現在計算裝置中之典型模組，例如處理器、記憶體(RAM、ROM等等)、電池或其他電源、及永久儲存器(例如硬碟)。通訊模組允許攜帶式裝置與其他攜帶式裝置、其他電腦、伺服器等等交換資訊。通訊模組包含通用串列匯流排(USB)連接器、通訊鏈結(例如乙太)、超音波通訊、藍芽、及WiFi。
輸入模組包含輸入按鈕及感應器、麥克風、觸控螢幕、攝影機(向前、向後、深度攝影機)、及讀卡機。其他輸入/輸出裝置，例如鍵盤或滑鼠也可以經由通訊鏈結，例如USB或藍芽被連接至攜帶式裝置。輸出模組包含一顯示器(具有觸控螢幕)、發光二極體(LED)、振動觸覺回授、及揚聲器。其他輸出裝置也可以經由通訊模組連接至攜帶式裝置。
來自不同裝置的資訊可以為地點模組所使用以計算出攜帶式裝置的地點。這些模組包含磁力計、加速度計、陀螺儀、GPS、及羅盤。另外，地點模組可以分析以攝影機及麥克風所捕捉之聲音或影像資料，以計算該地點。再者，地點模組可以執行測試，以決定該攜帶式裝置的地點或其附近之其他裝置的地點，例如WiFi網路測試或超音波測試。
虛擬實境產生器建立該虛擬或擴增實境，如同先前所述，使用為地點模組所計算的地點。一視面產生器根據該虛擬實境及該地點，產生顯示在顯示器上之視面。視面產生器也可以產生為虛擬實境產生器所啟始的聲音，使用應用至多喇叭系統的方向作用。
應了解的是，示於圖21中之實施例係為攜帶式裝置的例示實施例。其他實施例也可以利用不同模組、模組次組或指定相關工作至不同模組。顯示於圖21的實施例因此應不被解釋為排除或限制，而是例示及顯示用。
圖22為依據本發明之一實施例之透過網際網路連至伺服器的與遊戲客戶1102互動的場景A至場景E相關於使用者A至使用者E的例示顯示圖。遊戲客戶係為一裝置，其允許使用者經由網際網路連接至伺服器應用及處理。遊戲客戶允許使用者接取及播放線上娛樂內容，例如但並不限於遊戲、電影、音樂及圖片。另外，遊戲客戶也可以提供對線上通訊應用程式的接取，例如VOIP、文字交談協定及電子郵件。
使用者透過控制器與遊戲客戶互動。在一些實施例中，控制器為特定遊戲客戶控制器，而在其他實施例中，控制器可以為鍵盤及滑鼠的組合。在一實施例中，遊戲客戶為單獨裝置，其可以輸出音訊及視訊信號，以透過監視器/電視及相關音訊設備建立多媒體環境。例如，遊戲客戶可以但並不限於薄客戶、內部PCI-express卡、外部PCI-express卡、ExpressCard裝置、內部、外部、或無線USB裝置、Firewire裝置等等。在其他實施例中，遊戲客戶被整合以電視或其他多媒體裝置，例如DVR、藍光播放器、DVD播放器或多頻接收器。
在圖22的場景A中，使用者A使用與遊戲客戶1102A成對的控制器100與顯示在監視器106上的客戶應用程式互動。同樣地，在場景B內，使用者B使用與遊戲客戶1102B成對的控制器100與顯示在監視器106上的另一客戶應用程式互動。場景C例示由使用者C後面看到顯示一遊戲的監視器及遊戲客戶1102C之夥伴名單的視面。雖然圖22顯示單一伺服器處理模組，但在一實施例中，在整個世界上有多數伺服器處理模組。各個伺服器處理模組包含用以使用者交談控制、共享/通訊邏輯、使用者地面位置、及負載平衡處理服務的次模組。再者，伺服器處理模組包含網路處理及分散式儲存器。
當遊戲客戶1102連接伺服器處理模組時，使用者交談控制可以被用以鑑別該使用者。已鑑別使用者可以具有相關虛擬化分散式儲存器及虛擬化網路處理。可以儲存作為使用者虛擬分散式儲存器的一部份之例示項目包含購買媒體，例如但並不限於遊戲、影片及音樂等。另外，分散式儲存器可以用以儲存多數遊戲的遊戲狀態、個別遊戲的客製設定、及遊戲客戶的一般設定。在一實施例中，伺服器處理的使用者地面位置模組係被使用以決定使用者的地理位置及其個別遊戲客戶。使用者的地理位置可以為共享/通訊邏輯及負載平衡處理服務所使用，以根據多數伺服器處理模組的地理位置及處理需求，而最佳化效能。網路處理及網路儲存之一或兩者之虛擬化將允許來自遊戲客戶的處理工作被動態移動至欠利用伺服器處理模組。因此，負載平衡可以用以最小化有關於來自儲存器的呼叫及在伺服器處理模組與遊戲客戶間之資料傳輸的潛伏期。
伺服器處理模組具有伺服器應用程式A及伺服器應用程式B的例子。伺服器處理模組係能支援多數伺服器應用程式，如伺服器應用程式X1 及伺服器應用程式X2 所指示。在一實施例中，伺服器處理係根據群集計算架構，其允許在一群集內之多數處理器處理伺服器應用程式。在另一實施例中，不同類型之多電腦處理方案係應用以處理該伺服器應用程式。這允許伺服器處理被縮放，以容許大量的遊戲客戶執行多數客戶應用程式及對應伺服器應用程式。或者，伺服器處理可以縮放，以容許為更多需求圖形處理或遊戲、影像壓縮或應用程式複雜度所必要的增加之計算需求。在一實施例中，伺服器處理模組經由伺服器應用程式執行主要處理。這允許相對昂貴的元件，例如圖形處理器、RAM、及一般處理器被集中定位並降低遊戲客戶的成本。處理伺服器應用資料經由網際網路被送回至對應遊戲客戶，以被顯示在監視器上。
場景C例示可以為遊戲客戶及伺服器處理模組所執行之例示應用程式。例如，在一實施例中，遊戲客戶1102C允許使用者C建立及觀看夥伴名單1120，其包含使用者A、使用者B、使用者D、及使用者E。如所示，在場景C中，使用者C能到現場影像或個別使用者於監視器106C上的化身。伺服器處理執行遊戲客戶1102C的個別應用及具有個別遊戲客戶1102的使用者A、使用者B、使用者D及使用者E。因為伺服器處理得知應用程式正為遊戲客戶B所執行，及用於使用者A的夥伴名單可以表示哪一遊戲使用者B正在玩。再者，在一實施例中，使用者A可以直接由使用者B觀看遊戲電玩的實際影像。除了遊戲客戶B外，這是僅藉由送出處理伺服器應用資料給使用者B給遊戲客戶A。
除了能由夥伴看到影像，通訊應用程式也可以在夥伴間之即時通訊。如同應用至前一例子，這允許使用者A於觀看使用者B的即時影像的同時提供鼓勵或暗示。在一實施例中，雙向即時語音通訊係透過客戶/伺服器應用程式加以完成。在另一實施例中，客戶/伺服器應用完成文字交談。在另一實施例中，客戶/伺服器應用程式將語音轉換為文字顯示在夥伴螢幕上。
場景D及場景E例示個別使用者D與使用者E分別與遊戲平台1110D及1110E互動。各個遊戲平台1110D及1110E係連接至伺服器處理模組並顯示一網路，其中伺服器處理模組與遊戲平台與遊戲客戶協調遊戲。
圖23顯示資訊服務提供者架構的實施例。資訊服務提供者(ISP)250輸送一數量的資訊服務給地理上分散並透過網路266連接的使用者262。ISP可以只輸送一類型服務，例如股票價格更新、或各種服務，例如廣播媒體、新聞、運動、遊戲等等。另外，為各個ISP所提供之服務係動態的，即，服務可以在任意時間點被加入或取出。因此，提供特定類型給特定個人之服務的ISP可以隨時間改變。例如，使用者可以為一接近該使用者的ISP所服務，在該使用者係在家鄉附近時，及當使用者旅行至不同城市，則使用者可以為不同ISP所服務。家鄉ISP將傳送所需資訊及資料至新ISP，使得使用者資訊”跟隨”使用者至新城市，使得資料更接近使用者並容易存取。在另一實施例中，主從關係可以建立於一主ISP及從ISP之間，該主ISP管理使用者的資訊，及在來自主ISP的控制下，從ISP直接與使用者作成界面。在其他實施例中，當客戶在全世界移動，資料係由一ISP傳送至另一ISP，以使得在較佳地點的ISP為傳送這些服務以服務使用者。
ISP250包含應用程式服務提供者(ASP)252，其透過網路提供電腦為主服務給客戶。使用ASP模型提供的軟體有時也被稱為隨選軟體或服務軟體(SaaS)。對特定應用程式(例如客戶關係管理)提供存取的簡單形式係為藉由使用例如HTTP的標準協定。應用軟體內佇在販賣者的系統上並藉由販賣者所提供之特殊目的客戶軟體或其他例如薄客戶之其他遠端界面，為使用者透過使用HTML的網頁瀏覽器所接取。
服務輸送在廣大地理區域上經常使用雲端計算。雲端計算為一計算的格式，其中，動態可縮放及經常虛擬化資源係在網際網路上被提供作為服務。在支援它們的“雲端”中，使用者並不必要為技術基礎結構中之專家。雲端計算可以被細分為不同服務，例如基礎結構作為服務(IaaS)、平台作為服務(PaaS)、及軟體作為服務(SaaS)。雲端計算服務經常提供線上的共同商務應用，其係由網頁瀏覽器接取，而軟體與資料係被存在伺服器上。用語”雲端”係被使用為網際網路的比喻，根據網際網路如何被描繪於電腦網路圖並為其隱藏的複雜基礎結構的摘要。
再者，ISP250包含遊戲處理伺服器(GPS)254，其係為遊戲客戶以玩單人或多人電玩遊戲加以使用。多數在網際網路上玩的電玩遊戲經由對遊戲伺服器的連接而操作。典型地，遊戲使用一專用伺服器應用程式，其收集來自玩家的資料並將之分配至其他玩家。這是較有效並有效於對等配置，但需要分開的伺服器以主管伺服器應用。在另一實施例中，GPS建立於玩家與個別遊戲遊玩交換資訊間之通訊，而不依賴集中式的GPS。
專用GPS為伺服器，其獨立於客戶執行。此等伺服器通常執行於位在資料中心的專用硬體上，提供更多頻寬及專用處理電力。專用伺服器係為主管用於多數PC-為主多玩家遊戲的遊戲伺服器之較佳方法。大量多玩家線上遊戲執行於專用伺服器通常為擁有遊戲名稱的軟體公司所主管，允許它們控制及更新內容。
廣播處理伺服器(BPS)256分配音訊或視訊信號至聽眾。廣播至很窄範圍的聽眾有時稱為窄播。廣播分佈的最後一腳係信號係如何到達聽眾或觀眾，當為無線電台或電視台時，其可以散佈在空氣中至天線或接收器，或可以透過有線電視或有線電台(或無線纜線)經由電台或直接由網路。網際網路也可以為無線電或TV給接收器，特別是具有多播，以允許信號及頻寬被共享。歷史上，廣播係受限於地理區域，例如國界或區域廣播。然而，隨著網際網路的快速擴散，廣播並未為地理區域所界定，因為內容可以幾乎到達世上之任何一國家。
儲存服務提供者(SSP)258提供電腦儲存空間及相關管理服務。SSP同時也提供週期性備份及歸檔。藉由提供儲存器作為服務，使用者可以訂購如所需的更多的儲存。另一主要優點為SSP包含備份服務，如果其電腦硬碟故障，使用者將不會遺失其所有資料。再者，多數SSP可以具有全部或部份使用者資料的拷貝，允許使用者以有效方式存取資料，而無關於使用者位於何處或裝置正用以存取資料。例如，使用者可以在家用電腦中存取個人檔案，及使用者正在移動時，在行動電話中之個人檔案。
通訊提供者260提供連接性給該等使用者。一類型之通訊提供者為網際網路服務提供者(ISP)，其提供對網際網路的存取。該ISP使用適用以傳輸網際網路協定資料塊，例如撥接(dial-up)、DSL、有線數據機、無線或專用高速互連的資料傳輸技術，以連接其客戶。通訊提供者也可以提供發信服務，例如電子郵件、即時發信及SMS文字。另一類型之通訊提供者為網路服務提供者(NSP)，其藉由提供對網際網路的直接主幹接取，而販賣頻寬或網路存取。網路服務提供者可以由電信公司、資料載送商、無線通訊提供者、網際網路服務提供者、提供高速網際網路接取之有線電視操作者等等。
資料交換器268將在ISP250內的幾個模組互連並將這些模組經由網路266連接至使用者262。資料交換器268可以涵蓋小面積，其中所有ISP250的模組係相鄰近，或者當不同模組在地理位置上分散時，可以涵蓋大地理面積。例如，資料交換器268可以包含在資料中心的櫃內的快速十億位元乙太網路(或更快)，或洲際之虛擬區域網路(VLAN)。
使用者262以客戶裝置264接取遠端服務，該客戶裝置264包含至少CPU、顯示器及I/O。該客戶裝置可以為PC、行動電話、小筆電、PDA等等。在一實施例中，ISP250認出為客戶所用之裝置的類型並調整所用之通訊方法。在其他例子中，客戶裝置使用標準通訊方法，例如html接取ISP250。
資訊服務提供者(ISP)250輸送多數資訊服務至地理位置上分散並經由網路266連接的多數使用者262。ISP可以只輸送一類型服務，例如股票價格更新，或各種服務，例如廣播媒體、新聞、運動、遊戲等等。另外，為各個ISP所供給之服務為動態的，即服務可以在任何時間點被加入或取出。因此，提供特定類型服務給特定個人的ISP可以隨時間改變。例如，當使用者在自己居住城市時，使用者可以在使用者附近的ISP所服務，當使用者旅行至不同城市時，則使用者可以為不同ISP所服務。自己居住ISP將傳送所需資訊及資料給新ISP，使得使用者資訊”跟隨”使用者至新城市，使得資料更接近使用者及更容易接取。在另一實施例中，可以在主ISP與從ISP間建立主從關係，該主ISP管理使用者的資訊，及從ISP在主ISP的控制下，直接與使用者作成界面。在另一實施例中，當客戶全世界移動時，資料係由一ISP傳送至另一ISP，以使得ISP於較佳位置來服務使用者，該ISP為輸送這些服務者。
ISP250包含應用服務提供者(ASP)252，其提供電腦為主服務給在網路上之客戶。使用ASP模型提供的軟體有時也稱為隨選軟體或服務軟體(SaaS)。提供對特定應用程式(例如客戶關係管理)的簡單形式係藉由使用例如HTTP的標準協定。應用軟體內佇於販賣者的系統中，並為販賣者所提供之特殊目的客戶軟體或例如薄客戶的其他遠端界面所使用HTML透過網頁瀏覽器為使用者所接取。
在寬廣地理區域上傳送之服務經常使用雲端計算。雲端計算為一計算的格式，其中，動態可縮放及經常虛擬化資源係在網際網路上被提供作為服務。在支援它們的“雲端”中，使用者並不必要為技術基礎結構中之專家。雲端計算可以被細分為不同服務，例如基礎結構作為服務(IaaS)、平台作為服務(PaaS)、及軟體作為服務(SaaS)。雲端計算服務經常提供線上的共同商務應用，其係由網頁瀏覽器接取，而軟體與資料係被存在伺服器上。用語“雲端”係被使用為網際網路的比喻，根據網際網路如何被描繪於電腦網路圖並為其隱藏的複雜基礎結構的摘要。
再者，ISP250包含遊戲處理伺服器(GPS)254，其係為遊戲客戶以玩單人或多人電玩遊戲加以使用。多數在網際網路上玩的電玩遊戲經由對遊戲伺服器的連接而操作。典型地，遊戲使用一專用伺服器應用程式，其收集來自玩家的資料並將之分配至其他玩家。這是較有效並有效於對等配置，但需要分開的伺服器以主管伺服器應用。在另一實施例中，GPS建立於玩家與個別遊戲遊玩交換資訊間之通訊，而不依賴集中式的GPS。
專用GPS為伺服器，其獨立於客戶執行。此等伺服器通常執行於位在資料中心的專用硬體上，提供更多頻寬及專用處理電力。專用伺服器係為主管用於多數PC-為主多玩家遊戲的遊戲伺服器之較佳方法。大量多玩家線上遊戲執行於專用伺服器通常為擁有遊戲名稱的軟體公司所主管，允許它們控制及更新內容。
廣播處理伺服器(BPS)256分配音訊或視訊信號至聽眾。廣播至很窄範圍的聽眾有時稱為窄播。廣播分佈的最後一腳係信號係如何到達聽眾或觀眾，當為無線電台或電視台時，其可以散佈在空氣中至天線或接收器，或可以透過有線電視或有線電台(或無線纜線)經由電台或直接由網路。網際網路也可以為無線電或TV帶給接收器，特別是具有多播，以允許信號及頻寬被共享。歷史上，廣播係受限於地理區域，例如國界或區域廣播。然而，隨著網際網路的快速擴散，廣播並未為地理區域所界定，因為內容可以幾乎到達世上之任何一國家。
儲存服務提供者(SSP)258提供電腦儲存空間及相關管理服務。SSP同時也提供週期性備份及歸檔。藉由提供儲存器作為服務，使用者可以訂購如所需的更多的儲存。另一主要優點為SSP包含備份服務，如果其電腦硬碟故障，使用者將不會遺失其所有資料。再者，多數SSP可以具有全部或部份使用者資料的拷貝，允許使用者以有效方式存取資料，而無關於使用者位於何處或正用以存取資料的裝置。例如，使用者可以在家用電腦中存取個人檔案，及使用者正在移動時，在行動電話中之個人檔案。
通訊提供者260提供連接性給該等使用者。一類型之通訊提供者為網際網路服務提供者(ISP)，其提供對網際網路的存取。該ISP使用適用以傳輸網際網路協定資料塊，例如撥接、DSL、有線數據機、無線或專用高速互連的資料傳輸技術，以連接其客戶。通訊提供者也可以提供發信服務，例如電子郵件、即時發信及SMS文字。另一類型之通訊提供者為網路服務提供者(NSP)，其藉由提供對網際網路的直接主幹接取，而販賣頻寬或網路存取。網路服務提供者可以由電信公司、資料載送商、無線通訊提供者、網際網路服務提供者、提供高速網際網路接取之有線電視操作者等等。
資料交換器268將在ISP250內的幾個模組互連並將這些模組經由網路266連接至使用者262。資料交換器268可以涵蓋小面積，其中所有ISP250的模組係相鄰近，或者當不同模組在地理位置上分散時，可以涵蓋大地理面積。例如，資料交換器268可以包含在資料中心的櫃內的快速十億位元乙太網路(或更快)，或洲際之虛擬區域網路(VLAN)。
使用者262以客戶裝置264接取遠端服務，該客戶裝置264包含至少CPU、顯示器及I/O。該客戶裝置可以為PC、行動電話、小筆電、PDA等等。在一實施例中，ISP250認出為客戶所用之裝置的類型並調整所用之通訊方法。在其他例子中，客戶裝置使用標準通訊方法，例如html接取ISP250。
本發明之施例可以以各種電腦系統架構實施，包含手持裝置、微處理器系統、微處理器為主或可程式消費電子、迷你電腦、主機電腦及類似物。本發明也可以以分散計算環境實施，其中工作係為透過網路的鏈結在一起的遠端處理裝置所執行。
記住上述實施例，應了解的是，本發明可以使用各種電腦可實施的涉及儲存於電腦系統中之運算。這些運算為需要實體運算實體量者。於此所述之任何運算形成本發明部份並有用於機器操作。本發明有關於執行這些運算的裝置及設備。該設備可以特別建構用於所需目的，例如特殊目的電腦。當界定為特殊目的電腦時，於仍能用於特殊目的運算時，電腦可以執行其他處理，程式執行或不是特殊目的常式。或者，操作可以為一般目的電腦所處理，該電腦選擇地為儲存在電腦記憶體、快取中或透過網路取得之一或更多電腦程式所作動或組態。當資料透過網路取得時，資料可以為在網路上之其他電腦所處理，例如，雲端的計算資源所處理。
本發明之實施例可以定義為機器，其將資料由一狀態轉換為另一狀態。所轉換資料可以儲存至儲存器然後為處理器所運算。處理器因此將資料由一事物轉換為另一事物。再者，該等方法也可以為一或更多機器或處理器所處理，這些係透過網路加以連接。各個機器可以將資料由一狀態或事物轉換至另一狀態或事物，並也可以處理資料、儲存資料至儲存器、在網路上傳送資料、顯示結果、或傳送結果至另一機器。
本發明之一或更多實施例也可以被製造為電腦可讀取碼在電腦可讀取媒體上。電腦可讀取媒體可以為任一資料儲存裝置，其可以儲存資料，隨後為電腦系統所讀取。電腦可讀取媒體的例子包含硬碟機、網路附接儲存器(NAS)、唯讀記憶體、隨機存取記憶體、CD-ROM、CD-R、CD-RW、磁帶及其他光學及非光學資料儲存裝置。電腦可讀取媒體可以包含分散在網路耦接之電腦系統的電腦可讀取實體媒體，使得電腦可讀取碼係被以分散方式儲存及執行。
雖然方法運算係以特定順序加以描述，但應了解的是，其他管家操作也可以在運算之間執行，或者運算可以被調整，使得它們發生於略微不同的時間，或者可以分散於一系統中，其允許處理運算的發生在有關於該處理的不同時間期間，只要該重疊操作的處理係以想要方式執行即可。
雖然本發明已為了了解清楚的目的而加以詳細描述，但可以得知，某些改變及變化可以在隨附申請專利範圍的範圍內加以實現。因此，本實施係被認為是例示性非限制性，及本發明並不限於此所給定之細節，並可以在隨附之申請專利範圍的範圍與等效範圍內加以修改。
102．．．使用者
104．．．攜帶式裝置
106．．．參考點
108．．．虛擬實境
302．．．攜帶式裝置
304．．．螢幕
306．．．手部
402A-C．．．玩家
404．．．共同虛擬場景
502．．．共同參考點
504A-D．．．玩家
702A-C．．．玩家
704A-C．．．裝置
706．．．參考點
708．．．曲棍球場
710．．．圓碟
712．．．圓碟
802A-B．．．裝置
902．．．車輛
152．．．裝置
154．．．地點
156．．．地點
158．．．地點
160．．．投影
162．．．投影
1302．．．攝影機
1304．．．攝影機
1306．．．虛擬棋盤
1308．．．玩家
1310．．．背景
1502．．．地點
1504．．．地點
1506．．．攜帶式裝置
1508．．．區域
1510．．．區域
1512．．．攝影機
1514．．．攝影機
1602．．．地點
1604．．．地點
1606．．．顯示器
1608．．．矩形
1610．．．矩形基部
1632．．．地點
1636．．．顯示器
1638．．．矩形
1640．．．矩形
1902．．．眼睛
1904．．．裝置
1906．．．地點
1908．．．區段
1910．．．區域
1912．．．地點
1916．．．區域
1918．．．區域
100．．．控制器
1102A-C．．．遊戲客戶
1120．．．夥伴名單
1110D，E．．．平台
250．．．資訊服務提供者
266．．．網路
252．．．應用服務提供者
254．．．遊戲處理伺服器
256．．．廣播處理伺服器
258．．．儲存服務提供者
260．．．通訊提供者
268．．．資料交換
262．．．使用者
264．．．客戶裝置
本發明可以參考附圖及以下說明而了解。
圖1描繪一使用者將攜帶式裝置依據本發明同步化至空間中之一參考點之前。
圖2例示以攜帶式裝置觀察的虛擬實境場景。
圖3例示依據一實施例之具有虛擬棋盤及混合玩家之手部的擴增實境棋賽。
圖4描繪依據一實施例之多玩家虛擬實境遊戲。
圖5例示用於多玩家環境之校正方法的實施例。
圖6例示依據一實施例如何在網路連接上玩互動遊戲。
圖7顯示無關於攜帶式裝置的位置互動遊戲。
圖8顯示一互動遊戲，其中依據一實施例之相關於攜帶式裝置的位置之顯示器的視面。
圖9顯示依據一實施例，攜帶式裝置如何移動以具有如在顯示器上之類似作用，以如同在虛擬空間中移動攝影機。
圖10顯示依據一實施例之當旋轉攜帶式裝置時，示於顯示器中之影像的二維變化代表圖。
圖11顯示依據一實施例之玩VR遊戲之攜帶式裝置。
圖12A-12F例示依據一實施例，攜帶式裝置的位置係如何影響在顯示器中之視面。
圖13A-13B顥示依據一實施例之在遠端位置中之使用者間之所玩的擴增實境遊戲。
圖14A-14H描繪依據一實施例之當攜帶式裝置改變位置時之顯示器中之變化。
圖15顯示使用前及背面攝影機之攜帶式裝置的視見平截頭體實施例。
圖16A-16B例示當玩家依據一實施例移動時，視見平截頭體的變化作用。
圖17例示如何使用虛擬攝影機，以依據一實施例分開虛擬場景的視面。
圖18A-18H顯示依據一實施例之例示視見平截頭體作用之連續視面。
圖19A-19B例示組合視見平截頭體作用與攝影作用之實施例。
圖20顯示依據本發明一實施例之控制虛擬場景與攜帶式裝置的演算法流程圖。
圖21例示可以用以實施本發明實施例之裝置的架構。
圖22為依據本發明一實施例之場景A至場景E之具有個別使用者A至使用者E與遊戲客戶1102互動之例示示意圖，該等遊戲用戶係經由網際網路連接至伺服器處理。
圖23為資訊服務提供者架構的實施例。
302．．．攜帶式裝置
304．．．螢幕
306．．．手部

Claims (36)

  1. 一種用以控制虛擬場景與攜帶式裝置的視面的方法，該方法包含：同步化該攜帶式裝置至在實體三維(3D)空間中之參考點，當用以同步的信號由該攜帶式裝置所接收時，該參考點係由該攜帶式裝置所占據的空間中的點；以該攜帶式裝置之攝影機捕捉該實體3D空間之影像而回應該同步化；追蹤相對於該參考點，在該實體3D空間中該攜帶式裝置之現行地點，該追蹤利用捕捉的該影像之影像識別和由該攜帶式裝置中的慣性感應器所獲得的慣性資訊；產生由該參考點周圍所界定的虛擬場景，該虛擬場景包含虛擬實境元件；以及基於該現行地點，在該攜帶式裝置之顯示器中，顯示該虛擬場景之視面。
  2. 如申請專利範圍第1項所述之方法，其中更包含：混合在該實體3D空間中的真實元件與該等虛擬實境元件，其中該等虛擬元件出現所顯示的該視面，如同該等虛擬元件為該實體3D空間的部份，其中該等虛擬元件的視面由幾何透視以該攜帶式裝置於該實體3D空間內移動時該等真實元件的視面改變的相同方式改變該等虛擬元件的視面。
  3. 一種用以控制虛擬場景與攜帶式裝置的視面的方 法，該方法包含：同步化攜帶式裝置至在實體三維(3D)空間中之參考點，當用以同步的信號由該攜帶式裝置所接收時，該參考點係由該攜帶式裝置所占據的空間中的點；以該攜帶式裝置之攝影機捕捉該實體3D空間之影像而回應該同步化；產生由該參考點周圍所界定的虛擬場景，該虛擬場景包含虛擬實境元件；以及相對於該參考點，決定該攜帶式裝置之該實體3D空間中的現行地點；基於該現行地點，在該攜帶式裝置之顯示器中，顯示該虛擬場景之視面基於在捕捉的該影像中的手部之影像識別，追蹤在該實體3D空間中玩家的該手部之位置；檢測當該手部之該位置係第一虛擬元件所在之地點；及在檢測後，促成該手部與該第一虛擬元件的互動，以模擬該手部正接觸該第一虛擬元件，其中該手部能操縱該第一虛擬元件，以改變該第一虛擬元件的位置或特性，如同該第一虛擬元件為真實物體般。
  4. 如申請專利範圍第3項所述之方法，其中該手部的互動係由交界、固持、推動、拉動、握持、移動、擊破、擠壓、敲打、擲敲、打鬥、開、合、導通或關斷、按鈕、點火、吃所構成的群組中選出之作動於該第一虛擬元 件的動作。
  5. 如申請專利範圍第3項所述之方法，其中更包含；依據在該實體3D空間中之發光狀態及該虛擬場景，將該手部的陰影加至該等虛擬元件之上。
  6. 如申請專利範圍第2項所述之方法，其中該等真實元件包含桌子，其中混合更包含：放置虛擬元件在該桌子之上，如同被放置的該等虛擬元件係靜止在該桌子上。
  7. 如申請專利範圍第2項所述之方法，其中該真實元件包含在室內中之壁面，其中混合更包含：將一顯示加至該壁面，該顯示係為該等虛擬元件之一。
  8. 如申請專利範圍第1項所述之方法，其中該攜帶式裝置的該現行地點包含該攜帶式裝置的幾何座標及在該攜帶式裝置中之該顯示器的表面的幾何座標。
  9. 如申請專利範圍第8項所述之方法，其中該攜帶式裝置的該幾何座標等於在該攜帶式裝置之該攝影機的幾何座標。
  10. 如申請專利範圍第9項所述之方法，其中觀看方向係參考一向量加以界定，該向量具有該顯示器的觀看表面中心之起點及垂直於該顯示器的表面的方向。
  11. 如申請專利範圍第3項所述之方法，其中更包含： 當該攜帶式裝置移動更接近第二虛擬實境元件時，放大該第二虛擬實境元件；及當該攜帶式裝置移動離開該第二虛擬實境元件時，縮小該第二虛擬實境元件。
  12. 如申請專利範圍第1項所述之方法，其中更包含：當該攜帶式裝置移動時，將影像穩定化加入至該顯示視面。
  13. 如申請專利範圍第1項所述之方法，更包含：接收輸入以改變視面；及改變該虛擬場景的該視面之建立，使得該虛擬場景的該視面係從另一點計算，該另一點係不同於該攜帶式裝置之現行地點。
  14. 如申請專利範圍第13項所述之方法，其中該虛擬場景的視面係相對於與該參考點交叉的垂直線旋轉180度。
  15. 如申請專利範圍第1項所述之方法，其中該接收信號係藉由按壓在該攜帶式裝置上的按鈕或藉由碰觸該攜帶式裝置的觸控顯示器加以產生。
  16. 如申請專利範圍第1項所述之方法，其中該虛擬場景的邊界係為室內的壁面所定義，其中該攜帶式裝置係當該信號被接收時加以定位。
  17. 如申請專利範圍第1項所述之方法，其中同步化該攜帶式裝置更包含： 重置該攜帶式裝置中之地點追蹤模組，該地點追蹤模組係由加速度計、磁力計、GPS裝置、攝影機、深度攝影機、羅盤或陀螺儀所構成之群組所選出，其中該現行地點的該追蹤係由來自該地點追蹤模組的資訊來執行。
  18. 一種於裝置間共享虛擬場景的方法，該方法包含：由第一裝置計算該第一裝置之第一位置在實體三維(3D)空間中之相對的參考點；由該第一裝置計算相對於該第一裝置之第一位置的第二裝置之該實體3D空間中的第二位置，其中該第一裝置和該第二裝置為手持裝置；從該第一裝置傳送資訊至該第二裝置，該第二裝置識別在該實體3D空間中之該參考點，該資訊包括該參考點、該第一位置與該第二位置；擴增該實體3D空間，產生在該參考點周圍的虛擬場景，該虛擬場景為該兩裝置所共用且表示在該第一裝置和該第二裝置的各別顯示器上，該虛擬場景同時改變於該兩裝置中以回應來自該第一裝置或來自該第二裝置的互動；建立該虛擬場景的第一視面，其係由該第一裝置的現行地點所看到者；顯示該第一視面於該第一裝置中；及當該第一裝置移動於該實體3D空間內時，改變該虛擬場景顯示的該第一視面。
  19. 如申請專利範圍第18項所述之方法，其中計算該第二裝置的位置更包括：由該第一裝置收集在該第一裝置與該第二裝置間之第一相對位置資訊，該收集包括WiFi地點追蹤、音訊三角定位、或由該第一裝置之攝影機取得之影像分析之一或更多；根據該第一相對位置資訊，由該第一裝置決定該第二裝置相對於該第一位置的第二位置；及將該第二位置與該參考點的座標從該第一裝置傳送至該第二裝置。
  20. 如申請專利範圍第18項所述之方法，更包含：由該第一裝置收集在該第一裝置與該第二裝置間之第一相對位置資訊，該收集包括WiFi地點追蹤、音訊三角定位、或由第一裝置或第二裝置之攝影機所取得之影像分析之一或多者；由該第一裝置從該第二裝置接收第二相對位置資訊；根據該第一及第二相對資訊，由該第一裝置決定該第二裝置相對於該第一裝置的該第二位置；及將該第二位置與該參考點的座標從該第一裝置傳送至該第二裝置。
  21. 如申請專利範圍第18項所述之方法，其中該虛擬場景包括虛擬棋盤遊戲，其中玩家分別握持該第一裝置與第二裝置，玩虛擬棋盤遊戲。
  22. 如申請專利範圍第18項所述之方法，其中握持 住該第一裝置的第一玩家藉由同步於第一虛擬元件移動該第一裝置，而控制該第一虛擬元件在該虛擬場景中的移動。
  23. 一種控制虛擬場景與第一裝置的視面的方法，該方法包含：計算第一裝置相對於在第一實體三維(3D)空間中之第一參考點的第一位置；在該第一裝置與第二裝置間建立通訊鏈結，該第二裝置係在該第一實體3D空間外的第二實體3D空間中，該第二裝置具有相對於在該第二實體3D空間中之第二參考點的第二位置，其中該第一裝置和該第二裝置係手持裝置；從該第一裝置傳送與該第一裝置相關的第一玩家之第一影像，以及由該第一裝置接收與該第二裝置相關的第二玩家之第二影像，該第一玩家和該第二玩家係在不同的位置；產生包括虛擬實境元件的共同虛擬場景，該共同虛擬場景係可以被表示在該第一裝置之第一顯示器及該第二裝置之第二顯示器上，該第一裝置在該第一參考點旁建立該共同虛擬場景，該第二裝置在該第二參考點旁建立該共同虛擬場景，該兩裝置係與該等虛擬實境元件互動；決定該第一裝置相對於該參考點在該第一實體3D空間中之現行地點；建立該共同虛擬場景的視面，其中該視面代表由該第 一裝置的該現行地點所見的共同虛擬場景；將該第二使用者之該第二影像混合至該共同虛擬場景之該視面，以建立模擬該第二使用者係在該第一使用者附近的鄰近效應；顯示該共同虛擬場景的該視面於該第一裝置之該顯示器中；及當該第一裝置移動於該第一實體3D空間內時，改變該共同虛擬場景顯示的該視面。
  24. 如申請專利範圍第23項所述之方法，其中該通訊鏈結包括於該第一裝置與該第二裝置間之直接網路連接。
  25. 如申請專利範圍第23項所述之方法，更包含：指定在該第一實體3D空間中之虛擬位置給該第二裝置；自該第二裝置接收對應於該第二裝置與該共同虛擬場景間之互動的第二裝置互動資訊；及依據該接收之第二裝置互動資訊與該虛擬位置，改變該共同虛擬場景的該視面，其中該第二裝置出現在該第一實體3D空間中並與該第一裝置互動，如同該第二裝置係實際出現在該第一實體3D空間中。
  26. 如申請專利範圍第23項所述之方法，更包含：週期地更新該第二玩家的該第二影像。
  27. 如申請專利範圍第23項所述之方法，更包含：當該第二玩家移動時，更新該第二玩家的該第二影 像。
  28. 如申請專利範圍第23項所述之方法，其中該等虛擬元件包括西洋棋盤及西洋棋子，其中該第一裝置及該第二裝置係用以藉由操縱西洋棋子來玩西洋棋遊戲，其中該第二玩家在該虛擬場景之該視面中顯示為坐在該第一玩家的前面。
  29. 如申請專利範圍第23項所述之方法，其中該第一裝置與該第二裝置為該共同虛擬場景之該視面所分別代表成為第一物體及第二物體，其中該第一物體的移動匹配於在該第一實體3D空間中該第一裝置的移動，及該第二物體的移動匹配於在該第二實體3D空間中該第二裝置的移動。
  30. 一種控制虛擬場景與攜帶式裝置的視面的方法，該方法：同步化該攜帶式裝置至實體三維(3D)空間中之參考點，當用以同步的信號由該攜帶式裝置所接收時，該參考點係由該攜帶式裝置所占據的空間中的點，該攜帶式裝置包含面向該攜帶式裝置前面的前面攝影機及面向該攜帶式裝置背面的背面攝影機，該攜帶式裝置為手持裝置；以該攜帶式裝置之攝影機捕捉該實體3D空間之影像而回應該同步化；追蹤相對於該參考點在該實體3D空間中該攜帶式裝置之現行地點，該追蹤利用捕捉的該影像之影像識別和由該攜帶式裝置中的慣性感應器所獲得的慣性資訊； 產生由該參考點周圍所界定的虛擬場景，該虛擬場景包括虛擬實境元件；基於該攜帶裝置之現行地點，建立該虛擬場景的視面，該視面捕捉由握持該攜帶式裝置的玩家在該實體3D空間中之現行眼睛地點所見的該虛擬場景的代表視面，該捕捉對應於該玩家看穿窗口進入該虛擬場景所見，在該實體3D空間中之窗口地點等於在該攜帶式裝置中之顯示器的該實體3D空間中之地點；顯示所建立的該視面於該顯示器中；及當該攜帶式裝置或該玩家移動於該實體3D空間內時，改變該虛擬場景所顯示的該視面，其中當保持該攜帶式裝置固定時，握持該攜帶式裝置的該玩家之眼睛之地點的改變導致顯示的該視面之改變。
  31. 如申請專利範圍第30項所述之方法，其中來自前面攝影機的影像係用以決定現行眼睛地點及來自背面攝影機的影像係用以取得該實體3D空間的視面。
  32. 如申請專利範圍第30項所述之方法，其中將該顯示器自玩家的眼睛拉開時，使得該視面放大顯示該虛擬場景，以及將該顯示器拉向接近該玩家的眼睛時，使得該視面縮小顯示該虛擬場景。
  33. 一種控制場景與攜帶式裝置的方法，該方法包含：同步化該攜帶式裝置，以使該攜帶式裝置所在之位置為實體三維(3D)空間中之參考點，當用以同步的信號由 該攜帶式裝置所接收時，該參考點係由該攜帶式裝置所占據的空間中的點；當經由該攜帶式裝置觀看該實體3D空間時，產生虛擬場景在該攜帶式裝置之顯示器中，該虛擬場景由該參考點周圍所界定，該虛擬場景包括虛擬實境元件；當該攜帶式裝置移動離開該參考點時，建立該虛擬場景的視面，其中該視面代表由該攜帶式裝置的現行地點所見之該虛擬場景，其中建立的該視面係獨立於握持該攜帶式裝置之玩家的眼睛之地點；及顯示所建立的該視面於該攜帶式裝置中；及當該攜帶式裝置移動於該實體3D空間中時，改變該虛擬場景所顯示的該視面。
  34. 如申請專利範圍第33項所述之方法，更包含：決定產生聲音的虛擬元件；以及由該攜帶式裝置發射對應於為該虛擬元件所產生之聲音的聲音，其中當該攜帶式裝置移動靠近產生聲音的該虛擬元件的地點時，該被發射的聲音變得更大。
  35. 如申請專利範圍第34項所述之方法，其中該攜帶式裝置具有立體音喇叭，其中該發出之聲音係被調整以依據在該攜帶式裝置與產生聲音的該虛擬元件間之相對位置，提供立體音效果。
  36. 一種內嵌於非暫態電腦可讀取儲存媒體中的電腦程式，當電腦程式為一或更多處理器所執行，用以在裝置間分享虛擬場景，該電腦程式包含： 用以由第一裝置計算該第一裝置相對於在實體三維(3D)空間中之參考點的第一位置的程式指令，該第一裝置為手持裝置，用以由該第一裝置計算相對於該第一裝置之第一位置的第二裝置之該實體3D空間中的第二位置的程式指令；用以從該第一裝置傳送資訊至識別該實體3D空間中的該參考點的該第二裝置的程式指令，該資訊包含該參考點、該第一位置和該第二位置；用以在該參考點周圍產生擴增該實體3D空間的虛擬場景的程式指令，該虛擬場景係為該兩裝置所共用以及表示在該第一裝置和該第二裝置之各別的顯示器上，該虛擬場景在該兩裝置中同時改變以回應來自該第一裝置或來自該第二裝置的互動；用以建立該虛擬場景的第一視面的程式指令，該虛擬場景的視面係如同由該第一裝置的現行地點所看到的；用以在該第一裝置之該顯示器中顯示所建立的該第一視面的程式指令；及用以當該第一裝置移動於該實體3D空間內時，改變該虛擬場景所顯示的該第一視面的程式指令。
TW100103494A 2010-03-05 2011-01-28 用於在共享穩定虛擬空間維持多個視面的方法、攜帶式裝置以及電腦程式 TWI468734B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US31125110P 2010-03-05 2010-03-05
US12/947,290 US8730156B2 (en) 2010-03-05 2010-11-16 Maintaining multiple views on a shared stable virtual space

Publications (2)

Publication Number Publication Date
TW201205121A TW201205121A (en) 2012-02-01
TWI468734B true TWI468734B (zh) 2015-01-11

Family

ID=43923591

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100103494A TWI468734B (zh) 2010-03-05 2011-01-28 用於在共享穩定虛擬空間維持多個視面的方法、攜帶式裝置以及電腦程式

Country Status (4)

Country Link
CN (2) CN105843396B (zh)
MX (1) MX2012010238A (zh)
TW (1) TWI468734B (zh)
WO (1) WO2011109126A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10948978B2 (en) 2019-04-23 2021-03-16 XRSpace CO., LTD. Virtual object operating system and virtual object operating method

Families Citing this family (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3654146A1 (en) 2011-03-29 2020-05-20 QUALCOMM Incorporated Anchoring virtual images to real world surfaces in augmented reality systems
JP5718197B2 (ja) 2011-09-14 2015-05-13 株式会社バンダイナムコゲームス プログラム及びゲーム装置
CN102495959A (zh) * 2011-12-05 2012-06-13 无锡智感星际科技有限公司 一种基于位置映射的增强现实平台系统及应用方法
CN102542165B (zh) * 2011-12-23 2015-04-08 三星半导体(中国)研究开发有限公司 用于三维虚拟棋盘的操作方法和装置
US20130234925A1 (en) * 2012-03-09 2013-09-12 Nokia Corporation Method and apparatus for performing an operation at least partially based upon the relative positions of at least two devices
US8630458B2 (en) 2012-03-21 2014-01-14 Google Inc. Using camera input to determine axis of rotation and navigation
JP5966510B2 (ja) * 2012-03-29 2016-08-10 ソニー株式会社 情報処理システム
CN103105993B (zh) * 2013-01-25 2015-05-20 腾讯科技（深圳）有限公司 基于增强现实技术实现互动的方法和系统
TWI555390B (zh) * 2013-02-20 2016-10-21 仁寶電腦工業股份有限公司 控制電子設備的方法與電子裝置
CA2913218C (en) * 2013-05-24 2022-09-27 Awe Company Limited Systems and methods for a shared mixed reality experience
US20140368537A1 (en) * 2013-06-18 2014-12-18 Tom G. Salter Shared and private holographic objects
US10146299B2 (en) * 2013-11-08 2018-12-04 Qualcomm Technologies, Inc. Face tracking for additional modalities in spatial interaction
CN104657568B (zh) * 2013-11-21 2017-10-03 深圳先进技术研究院 基于智能眼镜的多人移动游戏系统及方法
EP2886172A1 (en) * 2013-12-18 2015-06-24 Microsoft Technology Licensing, LLC Mixed-reality arena
US9407865B1 (en) * 2015-01-21 2016-08-02 Microsoft Technology Licensing, Llc Shared scene mesh data synchronization
US9787846B2 (en) * 2015-01-21 2017-10-10 Microsoft Technology Licensing, Llc Spatial audio signal processing for objects with associated audio content
US10015370B2 (en) 2015-08-27 2018-07-03 Htc Corporation Method for synchronizing video and audio in virtual reality system
KR102610120B1 (ko) 2016-01-20 2023-12-06 삼성전자주식회사 Hmd 디바이스 및 그 제어 방법
US10115234B2 (en) * 2016-03-21 2018-10-30 Accenture Global Solutions Limited Multiplatform based experience generation
US10665019B2 (en) 2016-03-24 2020-05-26 Qualcomm Incorporated Spatial relationships for integration of visual images of physical environment into virtual reality
CN105938629B (zh) * 2016-03-31 2022-01-18 联想(北京)有限公司 一种信息处理方法及电子设备
CN109219789A (zh) * 2016-05-04 2019-01-15 深圳脑穿越科技有限公司 虚拟现实的显示方法、装置及终端
US10245507B2 (en) * 2016-06-13 2019-04-02 Sony Interactive Entertainment Inc. Spectator management at view locations in virtual reality environments
US10169918B2 (en) * 2016-06-24 2019-01-01 Microsoft Technology Licensing, Llc Relational rendering of holographic objects
CN106200956A (zh) * 2016-07-07 2016-12-07 北京时代拓灵科技有限公司 一种虚拟现实领域多媒体呈现和交互的方法
CN106447786A (zh) * 2016-09-14 2017-02-22 同济大学 一种基于虚拟现实技术的平行空间创建及共享系统
US10593116B2 (en) 2016-10-24 2020-03-17 Snap Inc. Augmented reality object manipulation
CN106528285A (zh) * 2016-11-11 2017-03-22 上海远鉴信息科技有限公司 虚拟现实中多个合作调度方法及系统
CN106621306A (zh) * 2016-12-23 2017-05-10 浙江海洋大学 一种双层立体式军旗棋盘
KR20230135158A (ko) * 2017-01-09 2023-09-22 스냅 인코포레이티드 증강 현실 객체 조작
US10242503B2 (en) 2017-01-09 2019-03-26 Snap Inc. Surface aware lens
US11474534B2 (en) * 2017-03-01 2022-10-18 Mitsubishi Electric Corporation Information processing system
CN107103645B (zh) * 2017-04-27 2018-07-20 腾讯科技（深圳）有限公司 虚拟现实媒体文件生成方法及装置
CN107087152B (zh) * 2017-05-09 2018-08-14 成都陌云科技有限公司 三维成像信息通信系统
CN108932051B (zh) * 2017-05-24 2022-12-16 腾讯科技（北京）有限公司 增强现实图像处理方法、装置及存储介质
CN107320955B (zh) * 2017-06-23 2021-01-29 武汉秀宝软件有限公司 一种基于多客户端的ar场馆界面交互方法及系统
CN109298776B (zh) * 2017-07-25 2021-02-19 阿里巴巴（中国）有限公司 增强现实互动系统、方法和装置
CN107390875B (zh) 2017-07-28 2020-01-31 腾讯科技（上海）有限公司 信息处理方法、装置、终端设备和计算机可读存储介质
CN107469343B (zh) * 2017-07-28 2021-01-26 深圳市瑞立视多媒体科技有限公司 虚拟现实交互方法、装置及系统
CN107492183A (zh) * 2017-07-31 2017-12-19 程昊 一种有纸即开型彩票ar展示方法及系统
CN107632700A (zh) * 2017-08-01 2018-01-26 中国农业大学 一种基于虚拟现实的农具展馆体验系统和方法
CN109426333B (zh) * 2017-08-23 2022-11-04 腾讯科技（深圳）有限公司 一种基于虚拟空间场景的信息交互方法及装置
WO2019080902A1 (en) * 2017-10-27 2019-05-02 Zyetric Inventions Limited INTELLIGENT INTERACTIVE VIRTUAL OBJECT
CN107861682A (zh) * 2017-11-03 2018-03-30 网易（杭州）网络有限公司 虚拟对象的移动控制方法和装置
CN107967054B (zh) * 2017-11-16 2020-11-27 中国人民解放军陆军装甲兵学院 一种虚拟现实与增强现实耦合的沉浸式三维电子沙盘
CN107657589B (zh) * 2017-11-16 2021-05-14 上海麦界信息技术有限公司 基于三基准点标定的手机ar定位坐标轴同步方法
CN107995481B (zh) * 2017-11-30 2019-11-15 贵州颐爱科技有限公司 一种混合现实的显示方法及装置
CN108269307B (zh) * 2018-01-15 2023-04-07 歌尔科技有限公司 一种增强现实交互方法及设备
WO2019141879A1 (en) * 2018-01-22 2019-07-25 The Goosebumps Factory Bvba Calibration to be used in an augmented reality method and system
EP3769242A4 (en) * 2018-03-22 2021-11-10 Hewlett-Packard Development Company, L.P. DIGITAL MARKUP IN A THREE-DIMENSIONAL ENVIRONMENT
CN108519817A (zh) * 2018-03-26 2018-09-11 广东欧珀移动通信有限公司 基于增强现实的交互方法、装置、存储介质及电子设备
CN108667798A (zh) * 2018-03-27 2018-10-16 上海临奇智能科技有限公司 一种虚拟观影的方法及系统
CN108479065B (zh) * 2018-03-29 2021-12-28 京东方科技集团股份有限公司 一种虚拟影像的交互方法及相关装置
US11173398B2 (en) * 2018-05-21 2021-11-16 Microsoft Technology Licensing, Llc Virtual camera placement system
CN108919945A (zh) * 2018-06-07 2018-11-30 佛山市长郡科技有限公司 一种虚拟现实设备工作的方法
CN109284000B (zh) * 2018-08-10 2022-04-01 西交利物浦大学 一种虚拟现实环境下三维几何物体可视化的方法及系统
US11030813B2 (en) 2018-08-30 2021-06-08 Snap Inc. Video clip object tracking
US11176737B2 (en) 2018-11-27 2021-11-16 Snap Inc. Textured mesh building
US10866658B2 (en) 2018-12-20 2020-12-15 Industrial Technology Research Institute Indicator device, mixed reality device and operation method thereof
CN113330484A (zh) 2018-12-20 2021-08-31 斯纳普公司 虚拟表面修改
CN113614678A (zh) 2019-04-18 2021-11-05 苹果公司 用于头戴式设备的共享数据和协作
WO2020226832A1 (en) 2019-05-06 2020-11-12 Apple Inc. Device, method, and computer-readable medium for presenting computer-generated reality files
US10499044B1 (en) 2019-05-13 2019-12-03 Athanos, Inc. Movable display for viewing and interacting with computer generated environments
CN110286768B (zh) * 2019-06-27 2022-05-17 Oppo广东移动通信有限公司 虚拟物体显示方法、终端设备及计算机可读存储介质
US11189098B2 (en) 2019-06-28 2021-11-30 Snap Inc. 3D object camera customization system
CN110349270B (zh) * 2019-07-02 2023-07-28 上海迪沪景观设计有限公司 基于现实空间定位的虚拟沙盘呈现方法
US11232646B2 (en) 2019-09-06 2022-01-25 Snap Inc. Context-based virtual object rendering
US20210157394A1 (en) 2019-11-24 2021-05-27 XRSpace CO., LTD. Motion tracking system and method
US11263817B1 (en) 2019-12-19 2022-03-01 Snap Inc. 3D captions with face tracking
US11227442B1 (en) 2019-12-19 2022-01-18 Snap Inc. 3D captions with semantic graphical elements
CN116261850A (zh) 2020-06-30 2023-06-13 斯纳普公司 用于实时虚拟效果的骨骼跟踪
CN111915736A (zh) * 2020-08-06 2020-11-10 黄得锋 一种ar交互控制系统、装置及应用
CN113941138A (zh) * 2020-08-06 2022-01-18 黄得锋 一种ar交互控制系统、装置及应用
US11832015B2 (en) 2020-08-13 2023-11-28 Snap Inc. User interface for pose driven virtual effects
CN115705116A (zh) * 2021-08-04 2023-02-17 北京字跳网络技术有限公司 交互方法、电子设备、存储介质和程序产品
US20230078578A1 (en) * 2021-09-14 2023-03-16 Meta Platforms Technologies, Llc Creating shared virtual spaces
TWI803134B (zh) * 2021-09-24 2023-05-21 宏達國際電子股份有限公司 虛擬影像顯示裝置及其輸入介面的設定方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5588139A (en) * 1990-06-07 1996-12-24 Vpl Research, Inc. Method and system for generating objects for a multi-person virtual world using data flow networks
US20030033150A1 (en) * 2001-07-27 2003-02-13 Balan Radu Victor Virtual environment systems
US6522312B2 (en) * 1997-09-01 2003-02-18 Canon Kabushiki Kaisha Apparatus for presenting mixed reality shared among operators
US20060105838A1 (en) * 2004-11-16 2006-05-18 Mullen Jeffrey D Location-based games and augmented reality systems
TW200630865A (en) * 2005-02-23 2006-09-01 Nat Applied Res Lab Nat Ct For High Performance Computing Augmented reality system and method with mobile and interactive function for multiple users
US20080261693A1 (en) * 2008-05-30 2008-10-23 Sony Computer Entertainment America Inc. Determination of controller three-dimensional location using image analysis and ultrasonic communication
US20090189974A1 (en) * 2008-01-23 2009-07-30 Deering Michael F Systems Using Eye Mounted Displays

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6972734B1 (en) * 1999-06-11 2005-12-06 Canon Kabushiki Kaisha Mixed reality apparatus and mixed reality presentation method
JP4054585B2 (ja) * 2002-02-18 2008-02-27 キヤノン株式会社 情報処理装置および方法
US20060257420A1 (en) * 2002-04-26 2006-11-16 Cel-Sci Corporation Methods of preparation and composition of peptide constructs useful for treatment of autoimmune and transplant related host versus graft conditions
US11033821B2 (en) * 2003-09-02 2021-06-15 Jeffrey D. Mullen Systems and methods for location based games and employment of the same on location enabled devices
JP4738870B2 (ja) * 2005-04-08 2011-08-03 キヤノン株式会社 情報処理方法、情報処理装置および遠隔複合現実感共有装置
JP5230114B2 (ja) * 2007-03-13 2013-07-10 キヤノン株式会社 情報処理装置、情報処理方法
CN101174332B (zh) * 2007-10-29 2010-11-03 张建中 一种将真实世界实时场景与虚拟现实场景结合交互的方法和装置以及系统
US8386918B2 (en) * 2007-12-06 2013-02-26 International Business Machines Corporation Rendering of real world objects and interactions into a virtual universe

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5588139A (en) * 1990-06-07 1996-12-24 Vpl Research, Inc. Method and system for generating objects for a multi-person virtual world using data flow networks
US6522312B2 (en) * 1997-09-01 2003-02-18 Canon Kabushiki Kaisha Apparatus for presenting mixed reality shared among operators
US20030033150A1 (en) * 2001-07-27 2003-02-13 Balan Radu Victor Virtual environment systems
US20060105838A1 (en) * 2004-11-16 2006-05-18 Mullen Jeffrey D Location-based games and augmented reality systems
TW200630865A (en) * 2005-02-23 2006-09-01 Nat Applied Res Lab Nat Ct For High Performance Computing Augmented reality system and method with mobile and interactive function for multiple users
US20090189974A1 (en) * 2008-01-23 2009-07-30 Deering Michael F Systems Using Eye Mounted Displays
US20080261693A1 (en) * 2008-05-30 2008-10-23 Sony Computer Entertainment America Inc. Determination of controller three-dimensional location using image analysis and ultrasonic communication

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10948978B2 (en) 2019-04-23 2021-03-16 XRSpace CO., LTD. Virtual object operating system and virtual object operating method

Also Published As

Publication number Publication date
CN102884490B (zh) 2016-05-04
CN105843396A (zh) 2016-08-10
CN105843396B (zh) 2019-01-01
TW201205121A (en) 2012-02-01
WO2011109126A1 (en) 2011-09-09
MX2012010238A (es) 2013-01-18
CN102884490A (zh) 2013-01-16

Similar Documents

Publication Publication Date Title
TWI468734B (zh) 用於在共享穩定虛擬空間維持多個視面的方法、攜帶式裝置以及電腦程式
US10424077B2 (en) Maintaining multiple views on a shared stable virtual space
TWI449953B (zh) 經由至少第一和第二裝置而可觀看之互動空間的產生方法、及用以共享可攜式裝置間之虛擬實境的可攜式裝置
US20180225880A1 (en) Method and Apparatus for Providing Hybrid Reality Environment
US9990029B2 (en) Interface object and motion controller for augmented reality
TWI594174B (zh) 頭戴顯示器之追蹤系統、方法及裝置
CN104010706B (zh) 视频游戏的方向输入
TWI594791B (zh) 遊戲控制器
JP2023036743A (ja) 位置に基づくゲームプレイコンパニオンアプリケーションへユーザの注目を向ける方法及びシステム