CN113614710A - 用于呈现数据的呈现的设备和相关联的方法 - Google Patents
用于呈现数据的呈现的设备和相关联的方法 Download PDFInfo
- Publication number
- CN113614710A CN113614710A CN202080023355.6A CN202080023355A CN113614710A CN 113614710 A CN113614710 A CN 113614710A CN 202080023355 A CN202080023355 A CN 202080023355A CN 113614710 A CN113614710 A CN 113614710A
- Authority
- CN
- China
- Prior art keywords
- presentation
- content
- user
- location
- space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 16
- 238000009877 rendering Methods 0.000 claims abstract description 48
- 230000003190 augmentative effect Effects 0.000 claims description 66
- 230000011664 signaling Effects 0.000 claims description 59
- 238000004590 computer program Methods 0.000 claims description 17
- 230000015654 memory Effects 0.000 description 25
- 230000033001 locomotion Effects 0.000 description 18
- 230000006870 function Effects 0.000 description 14
- 230000008859 change Effects 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 7
- 230000001143 conditioned effect Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 230000002688 persistence Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004091 panning Methods 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 230000002207 retinal effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 241000282326 Felis catus Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/43—Querying
- G06F16/438—Presentation of query results
- G06F16/4387—Presentation of query results by the use of playlists
- G06F16/4393—Multimedia presentations, e.g. slide shows, multimedia albums
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/55—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/024—Multi-user, collaborative environment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
一种装置,被配置为:接收呈现数据,呈现数据包括第一内容和第二内容以用于连续呈现,第一内容和第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联;确定呈现方用户的当前位置是否在第一空间区域或第二空间区域中的至少一个空间区域内;如果呈现方用户在第一空间区域内,由消费方用户的呈现装置以虚拟现实在第一呈现位置提供对第一内容的呈现;如果呈现方用户在第二空间区域内,由呈现装置在第二呈现位置提供对第二内容的呈现;并且其中第一内容和第二内容的呈现独立于消费方用户的位置。
Description
技术领域
本公开涉及虚拟现实、增强现实以及混合现实的呈现的领域。具体地,本公开涉及虚拟现实、增强现实以及混合现实中的呈现数据的呈现、相关联的装置、方法以及计算机程序。
背景技术
虚拟现实的空间或环境的呈现正在变得普及,其中内容创造方提供越来越多的内容以用于探索。还存在单独的期望去分享想法以及将那些想法以幻灯片放映类型呈现的方式呈现给他人。
在该说明书中先公布的文件或任何背景的列表或讨论,不应必然被视为承认这种文件或背景是这种现有技术或是公知常识。本公开的一个或多个方面/示例用于可以或不可以解决一个或多个背景问题。
发明内容
在第一示例方面中,提供了一种装置,包括部件,该部件被配置为:
接收呈现数据,呈现数据包括至少第一内容和第二内容以用于连续呈现,第一内容和第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,第一空间区域和第二空间区域包括空间的不同部分,第一呈现位置和第二呈现位置包括空间中的不同位置;
接收呈现方位置信息,呈现方位置信息指示呈现方用户在空间中的当前位置;
从呈现方位置信息确定呈现方用户的当前位置是否在第一空间区域或第二空间区域中的至少一个空间区域内;
如果确定当前位置在第一空间区域内,部件被配置为向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第一呈现位置对第一内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现第一内容,消费方用户不同于呈现方用户;
如果确定当前位置在第二空间区域内,部件被配置为向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第二呈现位置对第二内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向不同于呈现方用户的消费方用户呈现第二内容;并且
其中第一内容的呈现独立于消费方用户的位置,并且第二内容的呈现独立于消费方用户的位置。
因此,在一个或多个示例中,可以将呈现数据与幻灯片放映呈现进行比较,其中第一内容和第二内容包括幻灯片放映的幻灯片。然而,鉴于第一内容和第二内容旨在在虚拟现实或增强现实(或其任何变体)中呈现,第一内容和第二内容可以包括多于二维幻灯片,并且可以包括文本、(多个)图像、(多个)视频、音频、三维模型,其可以虚拟地在三维中被呈现,而不是作为三维模型的二维表示。应当理解,正如幻灯片放映可以包括任意数目的幻灯片一样,呈现数据可以包括多个内容实例,其中第一内容和第二内容包括可能多个内容实例的两个实例。
在一个或多个示例中,该空间包括用于以虚拟现实向呈现方用户和一个或多个消费方用户进行呈现的虚拟现实空间。
在一个或多个示例中,相应的空间区域包括虚拟现实空间的离散区域。在一个或多个示例中,呈现方位置信息指示虚拟现实空间中的当前虚拟位置,并且从配置为针对呈现方用户呈现虚拟现实空间的虚拟现实装置接收。在一个或多个示例中,虚拟现实装置是具有该装置的系统的一部分。
在一个或多个示例中,应当理解,由至少一个呈现装置对第一内容和第二内容的相应的呈现包括响应于指示相应的消费方用户正在以相应的第一呈现位置和第二个呈现位置的方向进行观看的观看方向信息而呈现第一内容和第二内容。在空间包括虚拟现实空间的示例中,由至少一个呈现装置呈现第一内容和第二内容可以包括将第一内容和第二内容包括在虚拟现实空间中,以供消费方用户在朝向相应的第一呈现位置和第二呈现位置的方向看时进行观看。
在一个或多个示例中,至少一个呈现装置是该装置的一部分。
在一个或多个示例中,部件被配置为,如果确定当前位置不在相应的空间区域中的任何空间区域内,执行以下至少一项:
不提供信令以呈现尚未被呈现装置呈现的至少第一内容和第二内容的任何另外的实例;或
向至少一个呈现装置提供信令,以用于从呈现中移除至少第一内容或第二内容中的任何内容。
在一个或多个示例中,用于呈现第二内容的所述信令还包括用于移除第一内容的呈现的信令。
在一个或多个示例中,该空间包括用于以虚拟现实向呈现方用户和一个或多个消费方用户进行呈现的虚拟现实空间,其中在用于第一内容的呈现的信令被提供时,虚拟现实空间具有第一体积限制,第一体积限制包括针对消费方用户的虚拟现实空间的空间范围,并且第一体积限制包括第一呈现位置而不是第二呈现位置,其中如果确定当前位置在第二空间区域内,部件被配置为提供信令,以用于将针对消费方用户的虚拟现实空间的空间范围从第一体积限制增加到较大的第二体积限制,第二体积限制包括第一呈现位置和第二呈现位置。
因此,在一个或多个示例中,装置被配置为向呈现装置提供信令,以基于呈现方用户的当前位置以有限的空间范围呈现虚拟空间,这表示他们选择的对呈现数据的呈现的控制。这有利地控制虚拟空间的范围,并且因此控制消费方用户在使用其呈现装置探索虚拟空间时可以获得的虚拟位置的范围。
在一个或多个示例中,针对呈现方用户的虚拟现实空间不受制于由第一体积限制提供的空间范围限制。
在一个或多个示例中,所述装置被配置为:
向消费方用户中的一个消费方用户的呈现装置提供信令,以基于消费方用户位置信息重新呈现第一内容,消费方用户位置信息指示消费方用户中的一个消费方用户在第一空间区域内,而由呈现方位置信息指定的当前位置指示呈现方用户在呈现数据的空间区域中除了第一空间区域之外的一个空间区域内,并且先前已经在第一空间区域中。
在一个或多个示例中,第一内容包括随时间进展的内容,并且第一内容的重新呈现包括第一内容从第一内容的开始时间点起的呈现。
在一个或多个示例中,部件还被配置针对呈现方用户提供虚拟现实空间的呈现。
在一个或多个示例中,呈现方用户的当前位置包括由呈现方用户使用用户输入设备控制的虚拟位置,或者呈现方用户的当前位置包括使用一个或多个位置传感器获得的呈现方用户的物理真实世界位置,并且其中,由装置将物理真实世界位置转换为所述虚拟现实空间中的虚拟位置。
在一个或多个示例中,用于第一内容的呈现的信令被配置为在第一呈现位置的阈值距离内定位至少一个消费方用户的虚拟位置;并且
用于第二内容的呈现的信令被配置为在第二呈现位置的阈值距离内定位至少一个消费方用户的虚拟位置。
在一个或多个示例中,部件被配置为:
从麦克风接收音频数据,麦克风由呈现方用户使用;
从呈现方位置信息确定第一空间区域和第二空间区域中要
与音频数据相关联的一个空间区域;
接收指示消费方用户中的每个消费方用户在空间中的位置的消费方用户位置信息;以及以下中的一项或两项:
(i)使用如下至少一个消费方用户的呈现装置来提供音频数据的现场呈现,至少一个消费方用户在音频数据被接收到的时候使用消费方用户位置信息被确定为处在与音频数据相关联的空间区域内;或
(ii)基于消费方用户位置信息指示至少一个消费方用户已经进入与音频数据关联的空间区域,提供音频数据的记录以及随后使用至少一个消费方用户的呈现装置提供所记录的音频数据的呈现。
.在一个或多个示例中,该部件被配置为在呈现方位置信息指示呈现方用户的当前位置已经离开第一空间区域和第二空间区域中的一个区域之后,提供信令以使第一内容和第二内容分别在空间中继续呈现,以使消费方用户能够重新访问第一或第二内容。
在一个或多个示例中,向呈现装置提供信令以提供第二内容的呈现是以如下为条件的:呈现方位置信息指示呈现方用户从第一空间区域移动到第二空间区域。
在一个或多个示例中,装置包括被配置为在由呈现方用户使用的虚拟现实装置以及由消费方用户使用的至少一个呈现装置之间提供会议的装置,会议包括以虚拟现实对呈现数据的共享呈现。
在一个或多个示例中,呈现数据包括第一内容和第二内容以及定义第一空间区域和第二空间区域以及第一表示位置和第二表示位置的元数据。
在一个和多个示例中,该装置包括配置为基于用户输入生成呈现数据的部件。
在一个或多个示例中,该空间包括在消费方用户和至少一个呈现方用户中的每个用户周围的现实世界空间,以针对呈现方用户以及一个或多个消费方用户以增强现实呈现第一内容和第二内容。在一个或多个示例中,相应的空间区域包括在每个相应的用户周围的现实世界空间的离散区域。在一个或多个示例中,呈现方位置信息从一个或多个位置传感器被接收,一个或多个位置传感器被配置为确定呈现方用户在其周围的现实世界中的当前位置。在一个或多个示例中,一个或多个位置传感器可以包括装置的一部分。
在第二示例方面中,提供了一种方法,该方法包括:
接收呈现数据,呈现数据包括至少第一内容和第二内容以用于连续呈现,第一内容和第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,第一空间区域和第二空间区域包括空间的不同部分,第一呈现位置
和第二呈现位置包括空间中的不同位置;
接收呈现方位置信息,呈现方位置信息指示呈现方用户在
空间中的当前位置;
从呈现方位置信息确定呈现方用户的当前位置是否在第一空间区域或第二空间区域中的至少一个空间区域内;
如果确定当前位置在第一空间区域内,向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第一呈现位置处对第一内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现第一内容,消费方用户不同于呈现方用户;
如果确定当前位置在第二空间区域内,向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第二呈现位置处对第二内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向不同于呈现方用户的消费方用户呈现第二内容;并且
其中第一内容的呈现独立于消费方用户的位置,并且第二内容的呈现独立于消费方用户的位置。
在第三示例方面中,提供了一种计算机可读介质,包括存储在其上的计算机程序代码,计算机可读介质和计算机程序代码被配置为当在至少一个处理器被运行时,执行以下方法:
接收呈现数据,呈现数据包括至少第一内容和第二内容以用于连续呈现,第一内容和第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,第一空间区域和第二空间区域包括空间的不同部分,第一呈现位置
和第二呈现位置包括空间中的不同位置;
接收呈现方位置信息,呈现方位置信息指示呈现方用户在
空间中的当前位置;
从呈现方位置信息确定呈现方用户的当前位置是否在第一空间区域或第二空间区域中的至少一个空间区域内;
如果确定当前位置在第一空间区域内,向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第一呈现位置处对第一内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现第一内容,消费方用户不同于呈现方用户;
如果确定当前位置在第二空间区域内,向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第二呈现位置对第二内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向不同于呈现方用户的消费方用户呈现第二内容;并且
其中第一内容的呈现独立于消费方用户的位置,并且第二内容的呈现独立于消费方用户的位置。
在第四示例方面中,提供了一种装置,包括:
至少一个处理器;和
至少一个存储器,包括计算机程序代码,
至少一个存储器和计算机程序代码被配置为与至少一个处理器一起使装置至少执行以下操作:
接收呈现数据,呈现数据包括至少第一内容和第二内容以用于连续呈现,第一内容和第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,第一空间区域和第二空间区域包括空间的不同部分,第一呈现位置
和第二呈现位置包括空间中的不同位置;
接收呈现方位置信息,呈现方位置信息指示呈现方用户在
空间中的当前位置;
从呈现方位置信息确定呈现方用户的当前位置是否在第一空间区域或第二空间区域中的至少一个空间区域内;
如果确定当前位置在第一空间区域内,部件被配置为向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第一呈现位置对第一内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现第一内容,消费方用户不同于呈
现方用户;
如果确定当前位置在第二空间区域内,部件被配置为向至少一个呈现装置提供信令,以用于由至少一个呈现装置在第二呈现位置对第二内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向不同于呈现方用户的消费方用户呈现第二内容;并且
其中第一内容的呈现独立于消费方用户的位置,并且第二内容的呈现独立于消费方用户的位置。
第一方面的可选特征同样适用于第四方面的装置。此外,由第一方面的可选特征提供的功能可以通过第二方面的方法和第三方面的计算机可读介质的代码来执行。
本发明单独地或以各种组合包括一个或多个对应方面、示例或特征,无论是否在该组合或单独中明确说明(包括要求保护)。用于执行所讨论的一个或多个功能的对应部件和对应功能单元(例如,功能启用器、AR/VR图形渲染器、显示设备)也在本发明中。
用于实现所公开的一个或多个方法的相应计算机程序也在本公开范围内,并由一个或多个所描述的示例所涵盖。
上述摘要仅为示例性和非限制性内容。
附图说明
现在将仅通过示例的方式,参考附图来给出说明书,在附图中:
图1描述了用于提供在虚拟现实或增强现实或其任何变体中的呈现数据的呈现的示例装置;
图2示意性的示出了空间(诸如虚拟现实空间),其中呈现数据第一、第二以及第三内容是可见的以及与第一、第二以及第三内容相关联的空间区域;
图3示出了以呈现模式呈现的图2的空间,其中第一空间区域的呈现方用户和多个消费方用户;
图4示出了已经从第一空间区域移动到第二空间区域的呈现方用户;
图5示出了在第二空间区域提供音频数据的呈现方用户;
图6示出了已经从第二空间区域移动到第三空间区域的呈现方用户以及多个消费方用户;
图7示出了基于呈现方用户移动到不同的空间区域,将空间的空间范围从第一体积限制扩展到第二体积限制;
图8示出了基于呈现方用户移动到不同的空间区域的空间的改变;
图9示出了图示示例方法的流程图;以及
图10示出了计算机可读介质。
具体实施方式
虚拟现实(VR)可以使用VR显示器,包括头戴式装置,诸如眼镜或护目镜或虚拟视网膜显示器,或围绕用户以向用户提供沉浸式虚拟体验的一个或多个显示器屏幕。可以或可以不包括VR显示器的虚拟现实装置可以提供用于向用户呈现代表虚拟现实空间的VR内容以模拟用户在虚拟现实空间内。相应地,在一个或多个示例中,虚拟现实装置可以向VR呈现提供信令用于向用户呈现VR内容,而在一个或多个其他示例中,虚拟现实装置可以作为VR显示器的一部分(例如,头戴式装置的一部分)。虚拟现实空间可以从VR内容中被生成。虚拟现实空间可以包括虚拟三维空间。VR内容因此可以在逻辑上定义虚拟现实空间以及虚拟现实空间中图像、对象、音频以及任何其他内容的布置。因此,用户沉浸在空间中,如同他们在那里,并且他们可以环视VR空间观看被显示/呈现在其周围的VR内容的元素。虚拟现实可以被用于复制真实世界场景以模拟物理出现于真实世界位置的用户或可以被用于呈现计算机创造的内容或计算机创造的和真实世界内容的组合的VR空间。真实世界装置可以因此生成虚拟三维空间,在其中呈现VR内容的图像、音频和/或其他内容。本文中的一个或多个示例可以涉及虚拟现实的提供。
VR空间的空间范围通常大于一部分用户可以在任一时间利用VR显示器看到的部分。因此,虚拟现实装置可以向用户提供,用于在VR显示器上显示的VR空间的虚拟现实视图,VR视图仅示出了任一时间可观看的VR空间的空间内容。虚拟现实装置可以基于用户头部的移动或其他用户的输入提供用于在VR空间中的VR视图周围的(例如,观看的方向)追拍。虚拟现实装置可以提供虚拟现实空间中视点位置的平移移动,并且基于感测到的用户头部的移动或其他用户输入在VR场景中提供对应的VR视图。
增强现实(AR)可以使用AR显示器,诸如眼镜或护目镜或虚拟视网膜显示器,以使用计算机生成内容增强现实时间的视图(例如通过眼镜或护目镜看)。增强现实装置可以或可以不包括AR显示器的增强现实装置可以提供被配置为将被覆盖在用户的真实世界的视图上的多媒体AR内容的呈现。因此,增强现实的用户可以观看环绕他们的真实世界环境,其是通过由增强现实装置提供的内容被增强的或被补偿的,其可能被覆盖在他们真实世界的视图上和/或听觉上被覆盖在他们可以听见的听觉真实世界场景。内容可以包括多媒体内容例如图片、照片、视频、图表、文本信息,听觉内容等。因此,虽然增强现实可能提供利用附加计算机生成的图形和/或音频内容的真实世界的直接观看,虚拟现实的用户可以仅仅能够看到虚拟现实装置的VR显示器上呈现的内容,基本上无法直接观看真实世界。本文中一个或多个的示例可以涉及增强现实的提供。
结合虚拟现实装置的VR内容可以被配置为使得用户能够自由的探索虚拟现实空间。因此,虚拟现实装置可以允许用户在沿着自由视图方向的虚拟现实空间中被提供自由的视点位置。对于本领域技术人员,这样的VR也被称为六个自由度的(6DoF)VR或体积的(volumetric)VR。因此,在6DoF VR中,用户可以自由地通过修改他们的观看方向在VR空间周围以不同方向观看,并且用户也可以自由的地过沿着一个或多个的正交x、y和z轴平移来改变他们的视点位置。视图方向的修改可以通过感测到的用户的头部的物理移动被提供。视图点位置的修改可以通过用户的被感测的物理移动被提供。在6DoF虚拟现实空间中可用的移动可以被划分成两个类别:旋转以及平移移动(每种具有三个自由度),旋转移动使用户可以转动他们的头部以改变其观看方向。三个旋转活动是围绕x-轴(侧倾),围绕y轴(俯仰),以及围绕z轴(偏航)。平移移动意指用户也改变他们在空间中的视点,以从不同的虚拟位置观看VR空间,即,根据他们的意愿沿着x,y和z轴移动。使用船体运动中得出的术语,平移移动可以被称为纵荡(x),横荡(y),以及垂荡(z)。
在另一示例中,虚拟现实可能包括预定义观看位置VR或三个自由度(3DoF),其中用户在虚拟现实空间中的视点位置可以是固定的或按照预定义的路径。因此,用户可以自由地相对于被提供以在虚拟现实空间内在他们周围显示的虚拟现实成像改变其视点位置,但其无法自由地在VR空间中任意改变其视点位置以探索VR空间。预定义观看方向VR内容可以在VR空间中向用户提供三个自由度,包括围绕在x、y和z轴中任何一个的观看方向的旋转,以及因此可以被称为三个自由度的VR(3DoF VR)。在其他示例中,结合虚拟现实装置的VR内容可以被配置为实现3DoF VR但在虚拟现实空间中具有被受限的平移移动量。例如,虚拟现实视图可以是从默认的视点位置以及从其阈值距离内视点位置可渲染的。这种虚拟现实可以被称为3DoF+。
本文中一个或多个的示例涉及提供一个或多个类型的虚拟现实,包括6DoF、3DoF和3DoF+。
混合现实类似于增强以及虚拟现实,并且包括使用真实世界环境的三维模型,以使能包括视觉和音频对象的虚拟对象,以看起来像根据一个或多个其移动、呈现(例如音频呈现)以及出现与真实世界对象交互。例如,虚拟球可以看起来沿着真实世界表面滚动,因为真实世界表面的几何可以被捕获或以其他方式在混合现实中被建模。在其他示例中,真实世界房间的声学特性可以被建模,并且音频可以利用模拟用户所在的真实世界的房间的声学特性的效果被呈现。在本公开中,混合现实被视为虚拟现实的子集以及增强现实的子集。相应地,本文中描述的将其应用指定到虚拟现实或增强现实的示例也涉及提供混合现实内容。
空间音频包括被以这样的方式向用户呈现的音频,每个音频源可以被感知为源自特定位置,如同如果音频的个体源位于那些特定位置处。空间音频内容包括用于呈现为空间音频的音频,并且这样通常包括具有方向性信息的音频(显示地被指定为例如元数据或固有地以音频被捕获的方式存在),使得空间音频可以被呈现,使得其分量音频根据方向信息被感知为源自一个或多个点或一个或多个方向。例如,根据其中音频呈现发生的虚拟或现实空间,音频渲染可以考虑建模的早期反射和混响。
因此,虚拟现实内容可以被提供有具有方向属性的空间音频,使得音频被感知为源自VR空间中的点,这可能被链接到VR内容的成像。增强或混合现实内容可以被提供有空间音频,这样空间音频被感知为源自对用户可见的真实世界对象和/或源自被覆盖在用户的视图上的增强现实图形。
空间音频可以独立于视觉虚拟现实或视觉增强现实内容被呈现。在一些示例中,空间音频可以被认为是增强现实内容,因为其增强了用户感知的听觉场景。作为空间音频的独立呈现的示例,用户可以戴耳机,并且随着其探索真实世界,其可以被呈现有空间音频,使得音频似乎源自与真实世界对象或位置相关联的特定位置,例如,城市旅行可以通过追踪用户在城市中的位置并且将描述兴趣点的音频呈现为空间音频的设备来提供,使得音频被感知为源自用户位置周围的兴趣点。本文中所述的一个或多个实施例可以呈现空间音频。
空间音频的空间定位可以通过3D音频效果被提供,诸如利用头部相关的转移函数来创建空间音频空间的那些3D音频效果(在增强现实的情况下对准到真实世界空间)其中音频可以被定位以用于呈现方用户。空间音频可以通过耳机通过使用头部相关转移函数(HRTF)滤波技术或者针对扬声器通过使用向量基振幅平移技术来定位感知到空间音频的听觉起源(origin)来呈现。空间音频可以使用向每一个用户的耳朵的可听呈现的音量差异、时间差异以及批差异,以创建音频的起源在特定的位置或在空间中特定的方向的感知。到音频的感知起源的感知距离可以通过控制回声的量和增益来渲染,以指示接近或远离感知到的空间音频源。应当理解,如本文所述的空间音频呈现可以涉及仅具有朝向其起源的感知方向的音频呈现,以及使得音频的起源具有感知到的位置的音频呈现,例如,包括对与用户的距离的感知。
可能需要提供虚拟现实、增强现实或混合现实的呈现。以下,为了简洁起见,将描述为以虚拟现实呈现,而不是单独列出VR、AR和MR。因此,除非上下文另有规定,否则可以假设对虚拟现实的提及可能涉及虚拟现实、增强现实或混合现实中的任何一种。表示可以在逻辑上被表示为呈现数据。
呈现数据可以包括用于连续显示的多个“幻灯片”,类似于通过传统幻灯片放映呈现软件显示的。然而,以虚拟现实呈现传统幻灯片可能会限制虚拟现实体验的益处,因为观看方或消费方将被限制在提供呈现的虚拟现实空间中的位置或虚拟位置处。此外,虚拟现实的使用使得呈现的不仅仅是文本和图像的二维幻灯片。虚拟或增强现实可使呈现的内容能够包括幻灯片(例如文本)、图像(例如照片或其他视觉内容)、视频、音频(例如单声道、立体声或空间音频)和静态或动画体积模型(例如三维虚拟对象)中的任何一种。此外,内容可以包括虚拟现实空间内用于对呈现数据的内容进行呈现的另一虚拟现实空间。因此,可以基于消费方虚拟地“步入”呈现的虚拟现实空间中的区域来呈现另一虚拟现实空间。因此,与传统的二维幻灯片相比,使用虚拟现实提供呈现可能是有利的,因为有机会呈现更多种类的内容。因此,配置为以虚拟现实呈现的呈现的“幻灯片”可以包括用于连续呈现的内容的多个实例,例如第一内容、第二内容、第三内容等。
呈现的提供可由从第一用户或“呈现方用户”接收的第一用户输入控制。该呈现可以提供给虚拟现实中被称为“消费方用户”的一个或多个其他用户消费。
在一个或多个示例中总结虚拟现实或增强现实(或其所述变体)的使用以提供包括用于连续呈现的内容的呈现数据的呈现可以允许使用更丰富多样的内容,但是所述现实中的呈现可能阻碍消费方与内容以及更广阔的虚拟空间交互的能力。因此,在增强现实中,呈现数据可以呈现在固定的真实世界位置,而以虚拟现实,呈现数据可以配置为出现在固定的虚拟位置。例如,虚拟现实空间可以包括虚拟博物馆,并且呈现可以关于展品的收集。消费方需要留在虚拟地点以观看呈现受限于其对收藏展品的探索。因此,虚拟现实中内容的呈现可能会阻碍消费方与虚拟或增强现实空间中的内容或其他内容的交互。
图1示出了用于提供呈现数据的呈现的示例装置100。呈现数据可以从内容创建方使用的呈现数据生成装置(未示出)接收,内容创建方可以包括呈现方用户。装置100被配置为接收例如来自呈现装置的呈现方位置信息,其可以包括虚拟现实装置101。虚拟现实装置101可供希望向消费方用户呈现呈现数据的呈现方用户使用。在一个或多个示例中,虚拟现实装置101可以包括用于确定呈现方用户在真实世界空间中的位置的一个或多个位置传感器,其可以由虚拟现实装置101转换为虚拟现实空间中的位置。一个或多个传感器可以是头戴式装置102的一部分,虚拟现实装置101可以利用其向呈现方用户显示呈现数据的内容。在其他示例中,头戴式装置102的音频/视觉呈现功能可以与一个或多个传感器分离。因此,呈现方位置信息可以由一个或多个传感器和/或虚拟现实装置101提供。应当理解,在其他示例中,呈现方用户可以通过诸如使用用户输入设备等感测到的真实世界移动以外的手段来控制其在虚拟空间中的位置。因此,呈现方位置信息可由虚拟现实装置101或呈现方用户可用于探索其中配置了呈现内容以供显示的虚拟现实空间的其他设备提供。
装置100可以被配置为使用至少一个呈现装置向消费方用户呈现呈现数据的内容。在该示例中,示出了两个呈现装置103、104,但是应当理解,可以有任意数目的呈现装置使得任意数目的消费方用户能够消费呈现数据。表示装置103、104中的每一个包括头戴式装置105、106,如果呈现数据用于在虚拟现实或增强现实中呈现,则其可以包括虚拟现实头戴式装置,如果呈现数据用于在增强现实或混合现实中呈现,则其可以包括眼镜等。头戴式装置105、106可以包括位置传感器或其他输入设备,以检测消费方用户的位置或使消费方用户能够改变其位置。因此,在虚拟现实或增强现实中,位置传感器可用于将真实世界的用户移动转换为虚拟空间或增强现实图形的呈现中的位置,以便它们出现在给定的真实世界位置。在其他示例中,用户输入可用于控制用户以虚拟现实的位置。
在一个或多个示例中,呈现装置103、104可以为多于一个消费方用户提供呈现。因此,可以将多于一个头戴式装置连接到单个呈现装置103、104以供对应数目的消费方用户使用。即使单个呈现装置可以服务于多个用户,也可以认为它正在执行多个呈现设备的功能。因此,对多个呈现设备的提及可以同等地是指服务于两个或多个用户的单个呈现装置。
头戴式装置102、105、106可以包括用于监测头部和/或眼睛定位的传感器,以便可以虚拟现实提供相应的观看方向,或用于在用户周围的真实世界空间中定位增强现实内容(例如,世界锁定增强现实)。
虽然公开头戴式装置105、106是为了消费呈现数据的内容,但是应当理解,本公开不限于供消费方用户使用的头戴式显示器。在一个或多个其他示例中,智能手机可用于消费增强现实中的内容。
装置100可被视为中间装置,以实现可使用虚拟现实装置101的呈现方用户与可使用呈现装置103、104的一个或多个消费方用户之间的虚拟会议。在一个或多个示例中,装置100可以包括可经由一个或多个网络(例如互联网)连接到呈现装置101、103、104的服务器。在其他示例中,装置100的功能可以分布或位于其他地方,例如在虚拟现实装置101和呈现装置103、104和服务器中的任何一个或多个以及服务器中或分布在虚拟现实装置101和呈现装置103、104中的任何一个或多个以及服务器上。会议可提供呈现数据的共享呈现,以及可选地,用户之间的语音或文本通信的至少一种。
还应理解,虽然使用不同的术语来区分虚拟现实装置101和呈现装置103、104,但它们可以具有相同的功能。因此,在一个或多个示例中,呈现装置103的用户可被指定为呈现方,因此其呈现装置103可被给予本文所述的针对虚拟现实装置101的控制。因此,在这方面,术语“虚拟现实装置”和“呈现装置”用于理解而不是暗示由这些装置执行的专用功能。
然而,装置100可以例如以服务器或一个或多个装置101、103、104的一部分的形式被实现,虚拟现实装置101可以包括或连接到处理器107和存储器108,并且可以被配置为执行计算机程序代码。装置100可以仅具有一个处理器107和一个存储器108,但是应当理解,其他实施例可以使用多于一个处理器和/或多于一个存储器(例如,相同或不同的处理器/存储器类型)。此外,装置100可以是专用集成电路(ASIC)。
处理器可以是专用于根据存储器中以计算机程序代码形式存储的指令执行/处理从其他组件(例如从虚拟现实或呈现装置101、103、104(和/或其传感器))接收的信息的通用处理器。由处理器的这种操作生成的输出信令被向前提供给其他组件,例如呈现装置101、103、104。
存储器108(不一定是单个存储器单元)是存储计算机程序代码的计算机可读介质(本示例中为固态存储器,但可以是诸如硬盘驱动器、ROM、RAM、闪存等的其他类型的存储器)。该计算机程序代码存储当程序代码在处理器上运行时由处理器可执行的指令。在一个或多个示例实施例中,存储器和处理器之间的内部连接可以理解为在处理器和存储器之间提供主动耦合,以允许处理器访问存储在存储器上的计算机程序代码。
在此示例中,相应处理器和存储器内部彼此电连接,以允许相应组件之间的电通信。在该示例中,所有组件都位于彼此邻近的位置,以便一起形成为ASIC,换言之,以便集成在一起作为可以安装到电子设备中的单个芯片/电路。在一些示例中,一个或多个或所有组件可以彼此分开放置。
在该示例中,装置100包括虚拟现实装置101以用于呈现具有布置在其中的呈现数据的内容的虚拟现实空间。然而,这种呈现可以在增强现实中执行。在该示例中,呈现装置103、104包括用于呈现虚拟现实空间的虚拟现实装置,该虚拟现实空间中为消费方用户布置了呈现数据的内容。然而,这样的呈现也可以在增强现实中执行。将理解,在考虑增强现实中的实现时,对虚拟现实空间的引用可以指用户周围的空间,使得增强现实内容似乎具有在每个相应用户周围的空间中的位置。
在来自装置100的信令的控制下,装置100或呈现装置103、104可以为(多个)消费方用户提供虚拟/增强现实中呈现数据的显示。在来自装置100的信令的控制下,装置100或虚拟现实装置101可以为呈现方用户提供虚拟/增强现实中的呈现数据的显示。
示例图2示出了包括虚拟现实空间的空间200,其可被视为虚拟三维体积,在该虚拟三维体积中可创建或观看呈现数据,例如由呈现方用户201创建或观看。呈现方用户201被示为化身(avatar),以说明呈现方用户201在空间200中的位置(和旋转)。呈现方用户201的化身可对消费方用户可见或不可见。虽然在该示例中,空间200是虚拟现实空间,但是在其他示例中,其可以包括真实世界空间,其中表示呈现内容的增强现实对象可以被定位,就好像它们存在于该空间中一样。装置100可以提供信令以使虚拟现实装置101为呈现方用户201呈现空间200。
本示例和其他示例中的呈现数据可以包括用于连续呈现的第一内容202、第二内容203和第三内容204。第一到第三内容表示内容的个体实例的逻辑有序集合,呈现方用户201可能希望以类似于幻灯片放映呈现的方式呈现这些内容。在该示例中,第一内容202包括表示一些统计信息的条形图,第二内容203包括猫的图像,第三内容204包括由三个球体表示的三维模型204。内容202、203、204可以三维地呈现,使得消费方用户可以在模型、图像或“幻灯片”周围移动,该模型、图像或“幻灯片”看起来在空间200中浮动。因此,诸如第三内容204的三维内容以及诸如第一202和第二内容203的常规二维内容可以被配置为以三维形式显示,使得(多个)消费方用户可以从不同的视角(例如倾斜角度)、正面以及背面体验内容。以这种方式呈现内容可能有助于以更自然、更吸引人的方式消费内容,并利用使用虚拟现实或增强现实的空间200中的呈现的优势。
第一内容202、第二内容203和第三内容204中的每一个与相应自的第一空间区域205、第二空间区域206和第三空间区域207相关联,其各自包括空间200的不同离散部分。空间区域205-207被示为区域,尽管在其他示例中它们可以包括空间200的离散体积。空间区域205-207可以彼此相邻地布置。就空间区域205-207所占据的空间200的面积或体积而言,空间区域205-207可以是不重叠的或部分重叠的。空间区域205-207可用于在呈现方用户201输入相关联的内容时触发相关联的内容的呈现,这将在下文更详细地描述。
第一内容202、第二内容203和第三内容204中的每一个都可以与相应的第一208、第二209和第三呈现位置210逻辑关联,每个呈现位置210都包括空间200中的不同位置。呈现位置208、209、210可以包括在空间200中逻辑定义的位置,第一内容202、第二内容203和第三内容204将在该位置呈现。因此,对于视觉内容,它可以包括消费方用户如果朝着该位置看则内容将对其可见的位置,前提是不存在会阻挡呈现位置208、209、210的视图的介入虚拟或现实世界对象。对于音频内容,呈现位置208、209、210可以包括用于空间音频呈现的位置,并且因此可以包括(多个)消费方用户将从其感知音频源于空间200的位置。在其他示例中,音频可以以立体声或单声道呈现。音频内容可以包括体积音频内容。音频内容可以包括围绕呈现位置208、209、210的音频源的布置,其中音频源可呈现为空间音频或环境音频。例如,音频内容可以包括围绕或集中在呈现内容202、203、204、呈现位置208、209、210上或空间区域205、206、207内的基于7.1+4频道的音频床。音频内容可以仅是在呈现位置208-210的预定距离内或相关联的空间区域205-207内的消费方用户的音频。
在一个或多个示例中,呈现数据包括定义空间区域和表示位置的元数据。
在本示例和一个或多个其他示例中,呈现位置208、209、210位于相应的第一空间区域205、第二空间区域206和第三空间区域207内。然而,这不需要是这种情况,并且在其他示例中,空间区域的位置可以独立于相关呈现位置的位置。在一个或多个示例中,将呈现位置定位在其相关空间区域之外可能是有利的,因为呈现方用户201可以出现在虚拟空间中,例如表示为化身,但可能不会阻止相关联的内容的观看或消费,将在下面的描述中更全面地理解。
第一内容202、第二内容203和第三内容204的呈现可以基于呈现方用户201在空间200中相对于相应的第一空间区域205、第二空间区域206和第三空间区域207的位置在不同时间提供给一个或多个消费方用户。
因此,装置100可以被配置为接收指示呈现方用户201在空间200中的当前位置的呈现方位置信息。如上所述,可以从呈现方用户201使用的虚拟现实装置101或与之相关联的传感器接收位置信息。
示例图3示出了相同的空间200和空间区域205-207的位置。示例图3还示出了空间200中不同位置的两个消费方用户301、302。第一消费方用户301可以使用第一呈现装置103,并且第二消费方用户302可以使用第二呈现装置104来体验空间200和用于在其中呈现的呈现数据。
虽然示例图2示出了空间200中所有呈现数据的布局,但示例图3可被视为示出了呈现模式,其中呈现数据的呈现由来自呈现方用户201的输入控制,该输入基于呈现方位置信息。
装置100被配置为根据呈现方位置信息确定呈现方用户的当前位置是否在相应的空间区域205-207中的任何一个内。如果呈现方位置信息指示呈现方用户201在相应的空间区域205-207中的任何一个中不具有位置,则装置100被配置为提供信令或不提供信令,使得呈现数据的第一内容202、第二内容203和第三内容204在呈现方用户201在相应的空间区域205-207中的任何一个中不具有位置的时段内不从未呈现转换为呈现。因此,在空间区域之外,不提供内容呈现的触发。
在图3的示例中,呈现方用户201被示出为在第一空间区域205内。因此,呈现方位置信息将指示在空间200中具有这样的位置的呈现方用户201。
装置100可以直接响应于呈现方用户201在第一空间区域内或已经进入第一空间区域的当前位置,而向呈现装置103、104提供信令,以由呈现装置103、104在第一呈现位置208呈现第一内容202以供消费方用户301、302消费。消费方用户301、302因此可以在虚拟现实或增强现实或其任何变体中体验第一内容的呈现。
呈现数据的内容的呈现独立于消费方用户301、302在空间200中的位置。因此,第二消费方用户302在接近第三空间区域207时将不会被呈现第三内容204,直到呈现方用户201已经进入第三空间区域207,如呈现方位置信息所示。
由装置100提供的信令可被视为激活空间200中的相关第一内容202、第二内容203或第三内容204,并且可以基于一个或多个消费方用户301、302朝向与其相关联的呈现位置208-210看而呈现给他们。在一个或多个示例中,装置100可以被配置为至少接收指示消费方用户301、302的观看方向的观看方向信息。如果观看方向信息指示相关联的消费方用户朝向第一呈现位置208看,则装置100可以使用呈现装置103、104为该消费方用户提供第一内容202的显示。在其他示例中,装置100可以发出第一内容可用于呈现的信号,并且呈现装置103、104可以被配置为基于观看方向信息确定何时显示内容。在一个或多个示例中,一旦装置100发信号通知第一内容可用于呈现,则呈现装置103、104可以被配置为基于消费方用户相对于阈值距离到呈现位置208的距离来确定何时显示第一内容。在其他示例中,为了提供及时呈现,第一内容208可以在被发信号通知为可用之后的预定时间内呈现,无论消费方用户是否到达呈现位置208的阈值距离内。对于包括音频内容的第一、第二和第三内容,一个或多个消费方用户301、302可能或可能不需要朝向要呈现音频内容的第一呈现位置208看。
示例图4示出了呈现方用户201已经将空间200中从第一空间区域205移动400到第二空间区域206。因此,装置100将接收指示呈现方用户201具有第二空间区域206内的当前位置的呈现方位置信息。
装置100可以直接响应于呈现方用户201的当前位置在第二空间区域内或已经进入第二空间区域,向第一和第二呈现方设备103、104提供信令,以用于由呈现装置103、104在第二呈现位置209处呈现第二内容203以供消费方用户301、302使用。消费方用户301、302因此可以在虚拟现实或增强现实或其任何变体中体验第二内容的呈现。
呈现数据的第二内容203的呈现独立于消费方用户301、302在空间200中的位置。因此,再次,第二消费方用户302在接近第三空间区域207时不会被呈现第三内容204,直到呈现方用户201已经进入第三空间区域207,如呈现方位置信息所指示。
由装置100提供的信令可被视为激活空间200中的第二内容203,并且可以基于一个或多个消费方用户301、302朝向呈现位置209看而呈现给他们。在一个或多个示例中,装置100或呈现装置103、104可以被配置为接收指示消费方用户301、302的观看方向的至少观看方向信息。如果观看方向信息指示相关联的消费方用户朝向第二呈现位置209看,则装置100、103、104的任何一个或组合可以为该消费方用户提供第二内容203的显示。对于包括音频内容的第一、第二和第三内容,一个或多个消费方用户301、302可以或不需要朝向要与音频内容一起呈现的相关呈现位置208看。
因此,在一个或多个示例中,呈现数据可被视为包括空间分布内容的幻灯片放映呈现。此外,可以认为呈现数据的内容的呈现由呈现方用户201相对于与呈现数据的内容202、203相关联的空间区域205、206的位置控制。这可以提供更好地使用虚拟或增强空间的空间自由度来提供呈现而不妨碍呈现方用户201对呈现数据的呈现的管理的体验。因此,呈现方用户201保持对内容的呈现的控制,同时给予消费方用户在空间200周围移动的自由。应当理解,正如幻灯片放映可以包括任意数目的幻灯片一样,呈现数据可以包括多个内容实例,其中第一、第二和第三内容包括可能多个内容实例的三个实例。在一个或多个示例中,内容实例中的一个实例可以包括音频,随后的内容实例可以包括提供从先前的内容实例的音频的延续的信息。在一个或多个示例中,内容包括指示音频被呈现的方式的信息。因此,在一个或多个示例中,内容实例中的一个实例可以包括具有第一扬声器配置的音频,并且内容的后续实例可以包括提供来自先前内容实例但具有不同的第二扬声器配置的音频的延续的信息。因此,在一个或多个示例中,例如,第二内容可以包括修改第一内容的呈现的指令,例如,无论第一内容是包括音频还是视觉内容。
装置100可以被配置为向呈现方用户201以及第一和第二消费方用户301、302提供相同的空间200,即在本示例中的相同的空间200,以便他们体验相同的虚拟环境。在一个或多个示例中,用户301、302、201可以由标记或化身表示,并且可以在空间200中彼此可见。在一个或多个示例中,呈现方用户201可以从视觉上对一个或多个消费方用户301、302隐藏。这可防止呈现方用户干扰或阻挡消费方用户301、302的视图,这可能是重要的,因为消费方用户可以自由地移动到空间200中的不同有利位置。
呈现方用户201在空间200中的位置基于其与空间区域相关的位置提供对要“揭示”的内容的控制。然而,如果确定当前位置不在相应的空间区域205、206、207中的任何一个内,则装置100可以被配置为执行不同的动作。在一个或多个示例中,装置可以被配置为不呈现呈现数据的内容的任何另外的实例。可以提供信令以防止呈现装置103、104进行这种呈现,或者没有信令可以导致这种效果。在一个或多个其他示例中,装置100可以向至少一个呈现装置103、104提供信令,以从空间200中的呈现中移除第一内容和第二内容中的一个或多个。这可能是有利的,因为空间200可能不会被内容202、203、204弄乱,这使得消费方用户301、302难以导航空间。
在图4的示例中,从第一空间区域移动到第二空间区域206的呈现方用户201将第一内容202留在空间200中呈现。因此,如果消费方用户301、302想要重温或刷新他们对第一内容202的理解,则他们能够在空间200中移动,该第一内容202在当前被“激活”或由呈现方用户201呈现的第二内容203之前呈现。然而,在一个或多个其他示例中,用于呈现第二内容203的所述信令还可以包括用于移除第一内容202的呈现的信令。因此,在空间200中仅呈现最近“触发”或呈现的内容。在一个或多个示例中,可以提供这些示例的组合。因此,呈现数据可以包括与其中的第一、第二和第三内容中的每一个相关联的内容持久性信息,以定义内容是否持久存在于空间200中,或者当后续内容被移动到后续空间区域的呈现方用户201激活时,内容是否从呈现中移除。在一个或多个示例中,装置可以被配置为从在呈现期间接收的呈现方(或消费方)用户输入生成内容持久性信息,其可以与呈现数据的持久性信息(如果可用)相结合或取代呈现数据的持久性信息。因此,该装置可以被配置为基于持久性信息,在呈现方用户已经移动到下一空间区域之后,提供一些内容以继续可见,并且提供要从呈现中移除的其他内容。如果呈现方用户通过移动到与前面的空间区域不直接连续的空间区域而跳过内容实例中的一个,则该装置可以被配置为允许消费方用户通过用户输入触发跳过内容的呈现,其可以包括确定消费方已经移动到与跳过的内容相关联的空间区域。
示例图5示出第二空间区域206内的呈现方用户201并提供关于第二内容203的语音评论,由语音气泡500所示。因此,对于内容202、203、204的任何实例,呈现方用户201和可选地消费方用户301、302可以能够提供语音或文本评论。
因此,在一个或多个示例中,装置100可以被配置为从供呈现方用户201使用的麦克风接收音频数据。麦克风可以是头戴式装置102的一部分。音频数据可以是呈现方用户语音的逻辑编码语音信息。装置100可以被配置为从呈现方位置信息确定呈现方用户201当前处于哪个空间区域中,以便音频数据可以与该空间区域或相关内容相关联。应当理解,尽管呈现数据可以包括作为内容一部分的音频,但是本示例中描述的音频数据包括在呈现模式期间而不是在创建或编辑呈现数据的呈现数据创建或编辑模式期间接收的音频。
示例图5示出了使用呈现装置103、104提供音频数据的实时呈现的装置100。因此,当音频数据在受制于任何网络数据传输延迟或处理开销的情况下被接收时,音频数据被提供给呈现装置103、104以进行呈现。
在一个或多个示例中,可以使用消费方用户位置信息来确定消费方用户的当前位置。与呈现方位置信息类似,头戴式装置105、106或位置传感器可用于确定消费方用户的当前位置,以向装置100提供消费方用户位置信息。在一个或多个示例中,音频数据的实时呈现可以是以在接收音频数据时相应的消费方用户被确定为当前在与音频数据相关联的空间区域内为条件的。这可能是有利的,因为在允许消费方用户301、302自由移动的空间200中,他们在相关空间区域中的当前存在有助于确保他们理解语音数据可能相关的内容(即,该空间区域中的内容)。因此,装置100可以不向不在与音频数据相关联的空间区域内的任何消费方用户提供音频数据的实时呈现。
.装置100可以被配置为提供从呈现方用户201接收的音频数据的记录。应当理解,虽然描述了从呈现方用户201接收的音频数据,但是音频数据可以同样地包括文本数据。无论数据是音频数据还是文本数据,它都可用于使呈现方用户能够描述/呈现/解释内容,类似于呈现方在呈现期间描述其幻灯片的传统呈现。因此,下面描述的音频数据的提及也可以被认为是文本数据的提及,例如通过文本数据的文本的渐进显示。
示例图6示出了已经从第二空间区域206移动600到第三空间区域207的呈现方用户201。然而,可能一直在跟随呈现方用户201的第一消费方用户301已经返回到第二空间区域206,可能是为了重新访问第二内容203。在其他示例中,第一消费方用户301可以跟随呈现方用户201,但是速度较慢,因此可能已经在呈现方用户201之后到达第二空间区域206。在任一示例中,至少在装置100开始从呈现方用户201接收音频数据之后,第一消费方用户301已经进入第二空间区域206。
在这种情况下,并且在一个或多个示例中,装置100可以被配置为使用进入与所记录音频数据相关联的第二空间区域206的第一消费方用户301的呈现装置103来提供所记录音频数据601的呈现。因此,消费方用户位置信息由设备接收,并且指示第一消费方用户301已经进入第二空间区域206,该第二空间区域206向第一消费方用户301提供所记录的音频数据的呈现。
如上所述,示例图6示出了已经移动600到第三空间区域207的呈现方用户201。因此,当消费方用户301、302具有在第三呈现位置210的方向上的观看方向时,在空间200中包括第三内容204被提供以用于使用呈现装置103、104呈现给消费方用户301、302。
应当理解,第一、第二和第三内容202、203、204的空间布局提供了方便和直观的体验,其允许消费方用户301、302重新访问在呈现方用户201最近可提供用于呈现的内容之前为呈现而提供的内容。因此,参考示例图6,呈现方用户201最近通过进入第三空间区域207触发了第三内容204的呈现。然而,第一消费方用户301可能已经返回到第二空间区域或在呈现数据的呈现期间呈现方用户201已经访问过的任何先前空间区域。
装置100可以被配置为向第一消费方用户301的呈现装置103提供信令,以基于消费方用户位置信息来重新呈现第二内容203,该消费方用户位置信息指示第一消费方用户301在第二空间区域内,而呈现方位置信息的当前位置指示呈现方用户201在呈现数据的空间区域中除第二空间区域206之外的一个空间区域(在该示例中为第三空间区域207)内并且先前已经在第二空间区域206中。因此,当第一次呈现时,至少第一内容和第二内容的呈现可以独立于(多个)消费方用户的位置,如前所述,其基于呈现方用户的当前位置,并且此后,确定消费方用户之一的位置在呈现方用户先前访问过的空间区域之一内的确定被配置为引起针对与重新访问所述空间区域的消费方用户重新呈现与重新访问的空间区域相关联的内容。
内容的任何实例的重新呈现可以包括提供自首次呈现以来可能已隐藏的内容的呈现。在一个或多个其他示例中,重新访问的第二内容203包括随时间进展的内容,诸如视频或动画模型,并且内容的重新呈现包括从第一内容的开始时间点呈现内容。对于视频,这可以包括从视频的初始时间点开始。对于动画模型,这可能包括动画的开始。
在上述示例中,可以基于呈现方用户201进入相关联的空间区域来呈现第一、第二和第三202、203、204内容。然而,在其他示例中,第一、第二和第三内容的呈现还可以是以呈现方用户201通过每个空间区域所采取的路径为条件的。因此,向呈现装置103、104提供信令以提供第二内容203的呈现可以是以表示呈现方用户201从第一空间区域205移动到第二空间区域206的呈现方位置信息为条件的。类似地,向呈现装置103、104提供信令以提供第三内容204的呈现可以是以呈现方位置信息指示呈现方用户从第一空间区域205移动到第二空间区域206和移动到第三空间区域207为条件的。这可能是有利的,因为它可以帮助以预期顺序呈现内容,特别是如果呈现方用户在空间200中生气勃勃地移动,这可能导致非预期地进入空间区域。
对于包括多个内容实例的呈现数据,空间200可以很大以容纳与这些多个内容实例相关联的空间区域。消费方用户301、302可以自由探索空间200,也即,他们可以自由获取空间200内的任何位置,并且他们可能不知道在空间200中呈现数据的呈现可以从何处开始。消费方用户可能不知道第一空间区域205/第一呈现位置208的位置。第一空间区域205/第一呈现位置208可能根本不容易理解或指示。因此,当呈现模式开始并且呈现方用户“触发”第一内容202的呈现时,(多个)消费方用户301、302可以远离第一内容202,并且他们可能难以定位第一内容202或及时到达第一内容202以跟随呈现。
在一个或多个示例中,装置100可在空间200上应用体积限制701、702,以限制消费方用户可在空间200中移动的位置。此外,在一个或多个示例中,当呈现方用户201移动到下一个空间区域时,可以放松体积限制,并且空间200中的更多空间可以用于探索。
示例图7显示了空间200的空间范围的扩展。因此,在左侧,在第一空间区域205中示出呈现方用户201。装置100已将第一体积限制701应用于空间200,因此消费方用户(未示出)可仅自由探索第一空间区域205附近的空间200。在右侧,呈现方用户201已经提供了用于触发空间范围从第一体积限制701扩展到更大的第二体积限制702的输入。该触发可由指示呈现方用户201已经移动到后续或第二空间区域206的呈现方位置信息提供。
因此,概括地说,当提供用于呈现第一内容(未示出)的信令时,空间200具有第一体积限制701。第一体积限制701包括用于消费方用户(未示出)的空间200的空间范围,并且其包括第一呈现位置208而不是第二呈现位置209。装置100可以被配置为,如果确定当前位置在第二空间区域206内,则向消费方用户(未示出)提供信令,以用于将虚拟现实空间的空间范围从第一体积限制701增加703到包括第一呈现位置和第二呈现位置的更大的第二体积限制702。
应当理解,在一个或多个示例中,呈现方用户201可以不受制于第一体积限制701提供的空间范围限制。因此,体积限制701、702可以仅适用于由呈现装置103、104呈现的空间200。
示例图8示出了在空间200上应用体积限制的备选方案。在图8的左侧,呈现方用户(未示出)位于第一空间区域205中。第一消费方用户301还被放置在第一空间区域205中,以便他们能够容易地欣赏第一内容(未示出)。在图8的右侧,呈现方用户(未示出)已经移动到第二空间区域206。第一消费方用户301随后被远程传送(例如,虚拟地移动以放置在第二空间区域206中),以便他们能够容易地欣赏第二内容(未示出)。因此,在该示例中,空间200可以是小的,并且当呈现方用户从空间区域移动到空间区域时,(多个)消费方用户周围的空间的内容改变。如果真实世界空间受到限制,则该示例可能是有利的,因为消费方用户不必移动(例如通过真实世界空间中的感测物理移动)来影响虚拟现实中的移动。取而代之的是,空间200在它们周围改变以将它们放置在下一个第一、第二或第三内容附近。
因此,在一个或多个示例中,用于呈现第一内容的所述信令被配置为将至少一个消费方用户的虚拟位置定位在第一呈现位置的阈值距离801内;并且用于呈现第二内容的所述信令被配置为将至少一个消费方用户的虚拟位置定位在第二呈现位置的阈值距离802内。
如前所述,装置100的功能在增强现实和虚拟现实中都有应用,因此,空间200将包括围绕呈现方用户201和消费方用户301、302中的每一个的真实世界空间。因此,虽然以虚拟现实,空间200可以是所有用户都存在的同一虚拟世界,但在增强现实中,空间包括由呈现装置103、104在增强现实中围绕消费方用户301、302中的每个消费方用户创建的增强环境。因此,呈现第一、第二和第三内容以在增强现实中针对呈现方用户和一个或多个消费方用户出现在用户周围的空间中。
在一个或多个示例中,相应的空间区域包括围绕每个相应的用户的真实世界空间的离散区域。在一个或多个示例中,从一个或多个位置传感器(在一些示例中为头戴式装置102的一部分)接收呈现方位置信息,该一个或多个位置传感器被配置为确定呈现方用户在其周围的真实世界空间中的当前位置。在一个或多个示例中,一个或多个位置传感器可以包括装置100的一部分。
图9示出了图示以下步骤的流程图:
接收呈现数据901,呈现数据包括至少第一内容和第二内容以用于连续呈现,第一内容和第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,第一空间区域和第二空间区域包括空间的不同部分,第一呈现位置和第二呈现位置包括空间中的不同位置;
接收呈现方位置信息902,呈现方位置信息指示呈现方用户在空间中的当前位置;
从呈现方位置信息确定903呈现方用户的当前位置是否在第一空间区域或第二空间区域中的至少一个空间区域内;
如果确定当前位置在第一空间区域内,向至少一个呈现装置提供信令904,以用于由至少一个呈现装置在第一呈现位置对第一内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现第一内容,消费方用户不同于呈现方用户;
如果确定当前位置在第二空间区域内,向至少一个呈现装置提供信令905,以用于由至少一个呈现装置在第二呈现位置对第二内容的呈现,呈现装置被配置为以虚拟现实或增强现实中的一项向不同于呈现方用户的消费方用户呈现第二内容;并且
其中第一内容的呈现独立于消费方用户的位置,并且第二内容的呈现独立于消费方用户的位置。
图10示意性地示出了根据示例提供程序的计算机/处理器可读介质1000。在此示例中,计算机/处理器可读介质是诸如数字多功能光盘(DVD)或光盘(CD)之类的光盘。在一些示例中,计算机可读介质可以是以实现发明功能的方式编程的任何介质。计算机程序代码可以分布在相同类型的多个存储器之间,或者分布在不同类型的多个存储器之间,例如ROM、RAM、闪存、硬盘、固态等。
用户输入可以是手势,包括轻触、滑动、按下、保持、旋转手势、靠近设备用户界面的静态悬停手势、靠近设备的移动悬停手势、弯曲设备的至少一部分、挤压设备的至少一部分、多指手势中的一个或多个,倾斜设备或翻转控制设备。此外,手势可以是使用用户身体的任何自由空间用户手势,例如他们的手臂或触笔或者适合执行自由空间用户手势的其他元件。
上述示例中所示的设备可以是便携式电子设备、笔记本电脑、移动电话、智能手机、平板电脑、个人数字助理、数码相机、智能手表、智能眼镜、笔式计算机、非便携式电子设备、台式机、显示器、智能电视、服务器、可穿戴设备、虚拟现实装置或用于其中一个或多个的模块/电路。
任何提及的装置和/或特定提及的装置的其他特征可由装置提供,该装置的布置使得其被配置为仅在启用时(例如,打开)执行期望的操作。在这种情况下,它们可能不一定在未启用(例如关闭状态)时将适当的软件加载到活动存储器中,而只在启用(例如打开状态)时加载适当的软件。该装置可以包括硬件电路和/或固件。该装置可以包括加载到存储器上的软件。这些软件/计算机程序可以记录在相同的存储器/处理器/功能单元和/或一个或多个存储器/处理器/功能单元上。
在一些示例中,可以使用适当的软件对特定提及的设备进行预编程以执行期望的操作,并且其中可以启用适当的软件以供下载“密钥”的用户使用,例如解锁/启用软件及其相关功能。与这些示例相关联的优点可以包括当设备需要进一步的功能时下载数据的需求减少,并且这在设备被认为具有足够的容量来存储用于用户可能无法启用的功能的这种预编程软件的示例中是有用的。
任何提及的装置/电路/元件/处理器可具有除提及的功能之外的其他功能,并且这些功能可由相同的装置/电路/元件/处理器执行。一个或多个公开的方面可以包括相关联的计算机程序和记录在适当载体(例如存储器、信号)上的计算机程序(可以是经源/传输编码的)的电子分发。
本文所述的任何“计算机”可以包括一个或多个单独处理器/处理元件的集合,这些处理器/处理元件可位于或不位于同一电路板、电路板或甚至同一设备的同一区域/位置。在一些示例中,所述处理器中的一个或多个可以分布在多个设备上。相同或不同的处理器/处理元件可执行本文所述的一个或多个功能。
术语“信令”可指作为一系列发射和/或接收的电/光信号发射的一个或多个信号。该系列信号可以包括一个、两个、三个、四个或更多单独的信号分量或不同的信号,以构成所述信令。这些单独的信号中的一些或全部可以通过无线或有线通信同时、按顺序和/或在时间上彼此重叠地发送/接收。
关于任何提及的计算机和/或处理器和存储器(例如,包括ROM、CD-ROM等)的任何讨论,这些可以包括计算机处理器、专用集成电路(ASIC)、现场可编程门阵列(FPGA),和/或以实现本发明功能的方式编程的其他硬件组件。
申请人特此根据本领域技术人员的公知常识,单独公开本文所述的每个单独特征以及两个或多个此类特征的任何组合,只要此类特征或组合能够基于本说明书作为一个整体来实施,无论这些特征或特征的组合是否解决了本文公开的任何问题,但不限于权利要求的范围。申请人指出,所公开的方面/示例可以包括任何这样的单个特征或特征的组合。鉴于上述描述,对于本领域技术人员来说,显而易见的是,可以在本发明的范围内进行各种修改。
虽然已经展示、描述并指出了应用于其实例的基本新颖特征,应当理解,在不脱离本公开的范围的情况下,本领域技术人员可以对所描述的装置和方法的形式和细节进行各种省略、替换和更改。例如,明确意图是,以基本相同的方式执行基本相同功能以实现相同结果的那些元件和/或方法步骤的所有组合都在本发明的范围内。此外,应认识到,作为设计选择的一般事项,结合任何公开形式或实例所示和/或描述的结构和/或元件和/或方法步骤可并入任何其他公开形式或实例中。此外,在权利要求书中,手段加功能条款旨在涵盖本文中描述为执行所述功能的结构,并且不仅包括结构等效物,还包括等效结构。因此,尽管钉子和螺钉可能不是结构等效物,因为钉子使用圆柱面将木制部件固定在一起,而螺钉使用螺旋面,但在紧固木制部件的环境中,钉子和螺钉可能是等效结构。
Claims (15)
1.一种装置,包括部件,所述部件被配置为:
接收呈现数据,所述呈现数据包括至少第一内容和第二内容以用于连续呈现,所述第一内容和所述第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,所述第一空间区域和所述第二空间区域包括空间的不同部分,所述第一呈现位置和所述第二呈现位置包括所述空间中的不同位置;
接收呈现方位置信息,所述呈现方位置信息指示呈现方用户在所述空间中的当前位置;
从所述呈现方位置信息确定所述呈现方用户的所述当前位置是否在所述第一空间区域或所述第二空间区域中的至少一个空间区域内;
如果确定所述当前位置在所述第一空间区域内,所述部件被配置为向至少一个呈现装置提供信令,以用于由所述至少一个呈现装置在所述第一呈现位置对所述第一内容的呈现,所述呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现所述第一内容,所述消费方用户不同于所述呈现方用户;
如果确定所述当前位置在所述第二空间区域内,所述部件被配置为向所述至少一个呈现装置提供信令,以用于由所述至少一个呈现装置在所述第二呈现位置对所述第二内容的呈现,所述呈现装置被配置为以虚拟现实或增强现实中的所述一项向不同于所述呈现方用户的所述消费方用户呈现所述第二内容;并且
其中所述第一内容的所述呈现独立于所述消费方用户的所述位置,并且所述第二内容的所述呈现独立于所述消费方用户的所述位置。
2.根据权利要求1所述的装置,其中所述空间包括用于以虚拟现实向所述呈现方用户和一个或多个所述消费方用户进行呈现的虚拟现实空间。
3.根据任一项前述权利要求所述的装置,其中所述部件被配置为:如果确定所述当前位置不在相应的所述空间区域中的任何空间区域内,执行以下至少一项:
不提供信令以呈现尚未被所述呈现装置呈现的所述至少第一内容和第二内容的任何另外的实例;或
向所述至少一个呈现装置提供信令,以用于从呈现中移除所述至少第一内容或第二内容中的任何内容。
4.根据任一项前述权利要求所述的装置,其中所述空间包括用于以虚拟现实向所述呈现方用户和一个或多个所述消费方用户进行呈现的虚拟现实空间,其中在用于所述第一内容的所述呈现的所述信令被提供时,所述虚拟现实空间具有第一体积限制,所述第一体积限制包括针对所述消费方用户的所述虚拟现实空间的空间范围,并且所述第一体积限制包括所述第一呈现位置而不是所述第二呈现位置,其中如果确定所述当前位置在所述第二空间区域内,所述部件被配置为提供信令,以用于将针对所述消费方用户的所述虚拟现实空间的所述空间范围从所述第一体积限制增加到较大的第二体积限制,所述第二体积限制包括所述第一呈现位置和所述第二呈现位置。
5.根据权利要求4所述的装置,其中针对所述呈现方用户的所述虚拟现实空间不受制于由所述第一体积限制提供的空间范围限制。
6.根据任一项前述权利要求所述的装置,其中所述部件被配置为:
向所述消费方用户中的一个消费方用户的所述呈现装置提供信令,以基于消费方用户位置信息重新呈现所述第一内容,所述消费方用户位置信息指示所述消费方用户中的所述一个消费方用户在所述第一空间区域内,而由所述呈现方位置信息指定的所述当前位置指示所述呈现方用户在所述呈现数据的所述空间区域中除了所述第一空间区域之外的一个空间区域内,并且先前已经在所述第一空间区域中。
7.根据权利要求6所述的装置,其中所述第一内容包括随时间进展的内容,并且所述第一内容的所述重新呈现包括所述第一内容从所述第一内容的开始时间点起的所述呈现。
8.根据权利要求2所述的装置,其中所述部件还被配置针对所述呈现方用户提供所述虚拟现实空间的呈现。
9.根据权利要求2所述的装置,其中用于所述第一内容的所述呈现的所述信令被配置为在所述第一呈现位置的阈值距离内定位至少一个所述消费方用户的虚拟位置;并且
用于所述第二内容的所述呈现的所述信令被配置为在所述第二呈现位置的阈值距离内定位至少一个所述消费方用户的所述虚拟位置。
10.根据任一项前述权利要求所述的装置,其中所述部件被配置为:
从麦克风接收音频数据,所述麦克风由所述呈现方用户使用;
从所述呈现方位置信息确定所述第一空间区域和所述第二空间区域中要与所述音频数据相关联的一个空间区域;
接收指示所述消费方用户中的每个消费方用户在所述空间中的所述位置的消费方用户位置信息;以及以下中的一项或两项:
(i)使用如下至少一个所述消费方用户的所述呈现装置来提供所述音频数据的现场呈现,至少一个所述消费方用户在所述音频数据被接收到的时候使用所述消费方用户位置信息被确定为处在与所述音频数据相关联的所述空间区域内;或
(ii)基于所述消费方用户位置信息指示所述至少一个消费方用户已经进入与所述音频数据关联的所述空间区域,提供所述音频数据的记录以及随后使用至少一个所述消费方用户的所述呈现装置提供所记录的所述音频数据的呈现。
11.根据任一项前述权利要求所述的装置,其中向所述呈现装置提供所述信令以提供所述第二内容的所述呈现是以如下为条件的:所述呈现方位置信息指示所述呈现方用户从所述第一空间区域移动到所述第二空间区域。
12.根据任一项前述权利要求所述的装置,其中所述装置包括被配置为在由所述呈现方用户使用的虚拟现实装置以及由所述消费方用户使用的所述至少一个呈现装置之间提供会议的装置,所述会议包括以虚拟现实对所述呈现数据的共享呈现。
13.根据任一项前述权利要求所述的装置,其中所述空间包括在所述消费方用户和至少一个所述呈现方用户中的每个用户周围的现实世界空间,以针对所述呈现方用户以及一个或多个消费方用户以增强现实呈现所述第一内容和所述第二内容。在一个或多个示例中,相应的所述空间区域包括在每个相应的用户周围的所述现实世界空间的离散区域。在一个或多个示例中,所述呈现方位置信息从一个或多个位置传感器被接收,所述一个或多个位置传感器被配置为确定所述呈现方用户在其周围的现实世界中的当前位置。在一个或多个示例中,所述一个或多个位置传感器可以包括所述装置的一部分。
14.一种方法,所述方法包括:
接收呈现数据,所述呈现数据包括至少第一内容和第二内容以用于连续呈现,所述第一内容和所述第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,所述第一空间区域和所述第二空间区域包括空间的不同部分,所述第一呈现位置和所述第二呈现位置包括所述空间中的不同位置;
接收呈现方位置信息,所述呈现方位置信息指示呈现方用户在所述空间中的当前位置;
从所述呈现方位置信息确定所述呈现方用户的所述当前位置是否在所述第一空间区域或所述第二空间区域中的至少一个空间区域内;
如果确定所述当前位置在所述第一空间区域内,向至少一个呈现装置提供信令,以用于由所述至少一个呈现装置在所述第一呈现位置处对所述第一内容的呈现,所述呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现所述第一内容,所述消费方用户不同于所述呈现方用户;
如果确定所述当前位置在所述第二空间区域内,向所述至少一个呈现装置提供信令,以用于由所述至少一个呈现装置在所述第二呈现位置处对所述第二内容的呈现,所述呈现装置被配置为以虚拟现实或增强现实中的所述一项向不同于所述呈现方用户的所述消费方用户呈现所述第二内容;并且
其中所述第一内容的所述呈现独立于所述消费方用户的所述位置,并且所述第二内容的所述呈现独立于所述消费方用户的所述位置。
15.一种计算机可读介质,包括存储在其上的计算机程序代码,所述计算机可读介质和所述计算机程序代码被配置为,当在至少一个处理器上被运行时,执行以下的方法:
接收呈现数据,所述呈现数据包括至少第一内容和第二内容以用于连续呈现,所述第一内容和所述第二内容与相应的第一空间区域和第二空间区域以及相应的第一呈现位置和第二呈现位置相关联,所述第一空间区域和所述第二空间区域包括空间的不同部分,所述第一呈现位置和所述第二呈现位置包括所述空间中的不同位置;
接收呈现方位置信息,所述呈现方位置信息指示呈现方用户在所述空间中的当前位置;
从所述呈现方位置信息确定所述呈现方用户的所述当前位置是否在所述第一空间区域或所述第二空间区域中的至少一个空间区域内;
如果确定所述当前位置在所述第一空间区域内,向至少一个呈现装置提供信令,以用于由所述至少一个呈现装置在所述第一呈现位置处对所述第一内容的呈现,所述呈现装置被配置为以虚拟现实或增强现实中的一项向消费方用户呈现所述第一内容,所述消费方用户不同于所述呈现方用户;
如果确定所述当前位置在所述第二空间区域内,向所述至少一个呈现装置提供信令,以用于由所述至少一个呈现装置在所述第二呈现位置对所述第二内容的呈现,所述呈现装置被配置为以虚拟现实或增强现实中的所述一项向不同于所述呈现方用户的所述消费方用户呈现所述第二内容;并且
其中所述第一内容的所述呈现独立于所述消费方用户的所述位置,并且所述第二内容的所述呈现独立于所述消费方用户的所述位置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP19164133.1A EP3712781A1 (en) | 2019-03-20 | 2019-03-20 | An apparatus and associated methods for presentation of presentation data |
EP19164133.1 | 2019-03-20 | ||
PCT/EP2020/054861 WO2020187531A1 (en) | 2019-03-20 | 2020-02-25 | An apparatus and associated methods for presentation of presentation data |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113614710A true CN113614710A (zh) | 2021-11-05 |
Family
ID=65995469
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080023355.6A Pending CN113614710A (zh) | 2019-03-20 | 2020-02-25 | 用于呈现数据的呈现的设备和相关联的方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11775051B2 (zh) |
EP (1) | EP3712781A1 (zh) |
CN (1) | CN113614710A (zh) |
WO (1) | WO2020187531A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230215102A1 (en) * | 2020-05-25 | 2023-07-06 | Sony Group Corporation | Media distribution device, media distribution method, and program |
CN113301506B (zh) * | 2021-05-27 | 2023-07-25 | 维沃移动通信有限公司 | 信息共享方法、装置、电子设备及介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000070489A2 (en) * | 1999-05-14 | 2000-11-23 | Graphic Gems | Method and apparatus for providing hotspots in a shared virtual world |
CN103155521A (zh) * | 2010-10-06 | 2013-06-12 | 摩托罗拉移动有限责任公司 | 用于在两个或多个设备之间转换媒体输出的方法和系统 |
CN104011788A (zh) * | 2011-10-28 | 2014-08-27 | 奇跃公司 | 用于增强和虚拟现实的系统和方法 |
US20170193704A1 (en) * | 2015-12-11 | 2017-07-06 | Nokia Technologies Oy | Causing provision of virtual reality content |
CN107111365A (zh) * | 2014-12-22 | 2017-08-29 | 国际商业机器公司 | 将虚拟空间中呈现的应用与物理显示器进行选择性配对 |
US20180107341A1 (en) * | 2016-10-16 | 2018-04-19 | Dell Products, L.P. | Volumetric Tracking for Orthogonal Displays in an Electronic Collaboration Setting |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110025818A1 (en) * | 2006-11-07 | 2011-02-03 | Jonathan Gallmeier | System and Method for Controlling Presentations and Videoconferences Using Hand Motions |
EP2866217A1 (en) * | 2013-10-25 | 2015-04-29 | GN Store Nord A/S | An audio information system based on zones and contexts |
US9779554B2 (en) * | 2015-04-10 | 2017-10-03 | Sony Interactive Entertainment Inc. | Filtering and parental control methods for restricting visual activity on a head mounted display |
US10121474B2 (en) * | 2016-02-17 | 2018-11-06 | Microsoft Technology Licensing, Llc | Contextual note taking |
US10249089B2 (en) * | 2016-08-01 | 2019-04-02 | Dell Products, Lp | System and method for representing remote participants to a meeting |
EP3422148B1 (en) * | 2017-06-29 | 2021-03-10 | Nokia Technologies Oy | An apparatus and associated methods for display of virtual reality content |
EP3495921A1 (en) * | 2017-12-11 | 2019-06-12 | Nokia Technologies Oy | An apparatus and associated methods for presentation of first and second virtual-or-augmented reality content |
US11532138B2 (en) * | 2018-11-15 | 2022-12-20 | Edx Technologies, Inc. | Augmented reality (AR) imprinting methods and systems |
EP4288950A1 (en) * | 2021-02-08 | 2023-12-13 | Sightful Computers Ltd | User interactions in extended reality |
-
2019
- 2019-03-20 EP EP19164133.1A patent/EP3712781A1/en not_active Ceased
-
2020
- 2020-02-25 CN CN202080023355.6A patent/CN113614710A/zh active Pending
- 2020-02-25 WO PCT/EP2020/054861 patent/WO2020187531A1/en active Application Filing
- 2020-02-25 US US17/435,562 patent/US11775051B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000070489A2 (en) * | 1999-05-14 | 2000-11-23 | Graphic Gems | Method and apparatus for providing hotspots in a shared virtual world |
CN103155521A (zh) * | 2010-10-06 | 2013-06-12 | 摩托罗拉移动有限责任公司 | 用于在两个或多个设备之间转换媒体输出的方法和系统 |
CN104011788A (zh) * | 2011-10-28 | 2014-08-27 | 奇跃公司 | 用于增强和虚拟现实的系统和方法 |
CN107111365A (zh) * | 2014-12-22 | 2017-08-29 | 国际商业机器公司 | 将虚拟空间中呈现的应用与物理显示器进行选择性配对 |
US20170193704A1 (en) * | 2015-12-11 | 2017-07-06 | Nokia Technologies Oy | Causing provision of virtual reality content |
US20180107341A1 (en) * | 2016-10-16 | 2018-04-19 | Dell Products, L.P. | Volumetric Tracking for Orthogonal Displays in an Electronic Collaboration Setting |
Also Published As
Publication number | Publication date |
---|---|
EP3712781A1 (en) | 2020-09-23 |
US11775051B2 (en) | 2023-10-03 |
US20220066542A1 (en) | 2022-03-03 |
WO2020187531A1 (en) | 2020-09-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20190180509A1 (en) | Apparatus and associated methods for presentation of first and second virtual-or-augmented reality content | |
US11416201B2 (en) | Apparatus and associated methods for communication between users experiencing virtual reality | |
CN111052770B (zh) | 空间音频下混频的方法及系统 | |
US10993066B2 (en) | Apparatus and associated methods for presentation of first and second virtual-or-augmented reality content | |
US11804019B2 (en) | Media compositor for computer-generated reality | |
CN108604175B (zh) | 装置和关联方法 | |
US8644467B2 (en) | Video conferencing system, method, and computer program storage device | |
CN110888567A (zh) | 三维内容中基于位置的虚拟元件模态 | |
EP3343348A1 (en) | An apparatus and associated methods | |
US20200209952A1 (en) | An Apparatus and Associated Methods for Presenting Sensory Scenes | |
JP7392105B2 (ja) | 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 | |
CN114514493A (zh) | 增强设备 | |
WO2019057530A1 (en) | APPARATUS AND ASSOCIATED METHODS FOR PRESENTING AUDIO IN THE FORM OF SPACE AUDIO | |
US11775051B2 (en) | Apparatus and associated methods for presentation of presentation data | |
US20220036075A1 (en) | A system for controlling audio-capable connected devices in mixed reality environments | |
EP3680753B1 (en) | An apparatus and associated methods for presentation of a virtual reality space | |
EP3470975B1 (en) | An apparatus and associated methods for presentation of a bird's eye view | |
CN115087957A (zh) | 虚拟场景 | |
EP3502863A1 (en) | An apparatus and associated methods for presentation of first and second augmented, virtual or mixed reality content | |
US20230065077A1 (en) | Displaying a Rendered Volumetric Representation According to Different Display Modes |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |