CN117435036A - 一种虚拟互动的方法、装置、设备和存储介质 - Google Patents
一种虚拟互动的方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN117435036A CN117435036A CN202210819483.2A CN202210819483A CN117435036A CN 117435036 A CN117435036 A CN 117435036A CN 202210819483 A CN202210819483 A CN 202210819483A CN 117435036 A CN117435036 A CN 117435036A
- Authority
- CN
- China
- Prior art keywords
- virtual
- virtual space
- seat
- target seat
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 73
- 238000000034 method Methods 0.000 title claims abstract description 59
- 230000002452 interceptive effect Effects 0.000 claims description 34
- 238000004590 computer program Methods 0.000 claims description 18
- 230000009471 action Effects 0.000 claims description 5
- 230000003190 augmentative effect Effects 0.000 claims description 3
- 239000003795 chemical substances by application Substances 0.000 abstract description 24
- 238000010586 diagram Methods 0.000 description 8
- 238000013507 mapping Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000004044 response Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- JJWKPURADFRFRB-UHFFFAOYSA-N carbonyl sulfide Chemical compound O=C=S JJWKPURADFRFRB-UHFFFAOYSA-N 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000009133 cooperative interaction Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供了一种虚拟互动的方法、装置、设备和存储介质。该方法包括:进入虚拟空间;根据所述虚拟空间内预配置的坐席信息,在所述虚拟空间内显示对应的虚拟坐席;响应于所述虚拟坐席中任一目标席位的选中操作,在所述虚拟空间内显示所述目标席位下的互动场景信息,所述目标席位为所述虚拟坐席中未被选中的席位。本申请实施例实现不同用户在虚拟空间内不同席位下的场景互动,避免不同用户在虚拟空间内的位置过近而导致相互遮挡的问题,在虚拟空间内多用户相互可见的场景下,满足虚拟空间内多用户互不遮挡的互动体验,提升虚拟空间内的多用户互动氛围。
Description
技术领域
本申请实施例涉及扩展现实(Extended Reality,XR)技术领域,尤其涉及一种虚拟互动的方法、装置、设备和存储介质。
背景技术
目前,XR技术的应用场景越来越广泛了,具体包含虚拟现实(Virtual Reality,VR)、增强现实(Augmented Reality,AR)和混合现实(Mixed Reality,MR)等,在虚拟直播场景下,通过XR技术可以使用户能够沉浸式体验各种虚拟直播场景,例如用户可以通过佩戴头戴式显示器(Head Mounted Display,HMD),来体验真实的直播互动场景。
通常情况下,在虚拟直播场景下支持用户从多个角度来观看相应的直播内容。例如在VR演唱会场景下,用户不仅可以从观众的角度观看,还可以从后台、甚至是直接以在舞台上的角度来观看演唱会表演。
然而,在虚拟直播场景下,不同用户之间相互可见,存在由于身处位置相同或相近而导致用户相互遮挡的问题。
发明内容
本申请提供一种虚拟互动的方法、装置、设备和存储介质,实现不同用户在虚拟空间内不同席位下的场景互动,在虚拟空间内多用户相互可见的场景下,满足虚拟空间内多用户互不遮挡的互动体验,提升虚拟空间内的多用户互动氛围。
第一方面,本申请实施例提供了一种虚拟互动的方法,该方法应用于XR设备,包括:
进入虚拟空间;
根据所述虚拟空间内预配置的坐席信息,在所述虚拟空间内显示对应的虚拟坐席;
响应于所述虚拟坐席中任一目标席位的选中操作,在所述虚拟空间内显示所述目标席位下的互动场景信息,所述目标席位为所述虚拟坐席中未被选中的席位。
第二方面,本申请实施例提供了一种虚拟互动的装置,该装置配置于XR设备,包括:
虚拟空间进入模块,用于进入虚拟空间;
虚拟坐席显示模块,用于根据所述虚拟空间内预配置的坐席信息,在所述虚拟空间内显示对应的虚拟坐席;
虚拟互动模块,用于响应于所述虚拟坐席中任一目标席位的选中操作,在所述虚拟空间内显示所述目标席位下的互动场景信息,所述目标席位为所述虚拟坐席中未被选中的席位。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括:
处理器和存储器,该存储器用于存储计算机程序,该处理器用于调用并运行该存储器中存储的计算机程序,以执行本申请第一方面中提供的虚拟互动的方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,用于存储计算机程序,该计算机程序使得计算机执行如本申请第一方面中提供的虚拟互动的方法。
第五方面,本申请实施例提供了一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令使得计算机执行如本申请第一方面中提供的虚拟互动的方法。
通过本申请技术方案,在进入任一虚拟场景下的虚拟空间后,会根据虚拟空间内预配置的坐席信息,在虚拟空间内显示对应的虚拟坐席,以支持用户对于虚拟空间内虚拟坐席的便捷选座。然后,响应于虚拟坐席中任一目标席位的选中操作,在虚拟空间内显示该目标席位下的互动场景信息,从而实现不同用户在虚拟空间内不同席位下的场景互动,避免不同用户在虚拟空间内的位置过近而导致相互遮挡的问题,在虚拟空间内多用户相互可见的场景下,满足虚拟空间内多用户互不遮挡的互动体验,提升虚拟空间内的多用户互动氛围。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种虚拟互动的方法的流程图;
图2为本申请实施例提供的在虚拟空间内多用户间虚拟互动效果的示意图;
图3为本申请实施例提供的另一种虚拟互动的方法的流程图;
图4为本申请实施例提供的用户安全区域的示例性示意图;
图5为本申请实施例提供的用户安全区域的示例性俯视图;
图6、图7、图8分别为本申请实施例提供的在不同情况下确定目标席位的临时安全区域的示意图;
图9为本申请实施例提供的一种虚拟互动的装置的示意图;
图10是本申请实施例提供的电子设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或服务器不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明,本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或方案不应被解释为比其它实施例或方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
为了避免多用户在虚拟空间内观看相应虚拟内容时存在相互遮挡的问题,本申请的发明构思是:在进入虚拟空间后,会按照虚拟空间内预配置的坐席信息,在虚拟空间内显示对应的虚拟坐席,以支持任一用户对于任一未被其他用户选中的目标席位执行选中操作,从而为虚拟空间内的不同用户显示不同席位下的互动场景信息,避免由于不同用户在虚拟空间内所处位置过近而出现相互遮挡的问题,满足虚拟空间内多用户互不遮挡的互动体验,提升虚拟空间内的多用户互动氛围。
在介绍本申请的具体技术方案之前,首先对用于为用户提供虚拟空间来显示互动场景信息的XR设备(其下可以包含VR、AR和MR等多种虚拟空间产品)进行阐述:XR设备主要用于模拟各类真实环境,并融合相应的虚拟场景信息,来为用户提供沉浸式的三维虚拟环境。
示例性的,本申请中的XR设备可以包括头戴显示器(Head Mounted Display,HMD)和手柄。其中,HMD和手柄之间可以进行通信。通过HMD来为用户提供用于实现各类互动场景的虚拟空间,通过手柄来实现虚拟空间内的选座操作。
此时,用户在佩戴好XR设备时,会根据用户手柄选择进入到针对不同虚拟场景所构建的虚拟空间内,例如某一VR演唱会等。
在本申请中,对于虚拟空间内不同时刻下显示的互动场景信息,会随着虚拟空间内的用户观看视角不同,而显示不同坐标系下的互动场景。
在介绍本申请的具体技术方案之前,首先对本申请可能涉及的各个坐标系进行说明:
1)世界坐标系
世界坐标系是一个特殊的坐标系,其建立了描述其他坐标系所需要的参考框架。从非技术意义上讲,世界坐标系所建立的是整个场景的“最大”坐标系,其他的坐标系都是参考它来建立的。
世界坐标系也被广泛地称为全局坐标系或者宇宙坐标系。对于整个场景中的每个物体,它的位置和方向一般是指它在世界坐标系中的值,是一个绝对坐标,不随观察者方向的变化而变化。
2)物体坐标系
物体坐标系是和某一场景中任一特定的物体相关联的坐标系,也被称为模型坐标系或局部坐标系。对于整个场景中的每个物体都可以有自己的物体坐标系,而且它和其他物体的物体坐标系是相互独立的。
物体坐标系在三维世界中处处存在,每个物体发生移动或改变方向时,和该物体相关联的物体坐标系也随着移动或改变方向,从而简化对整个场景内各个物体的控制。
例如,对于一个机器人模型的绘制,可以建立其他物体的局部坐标系,在坐标系原点处绘制其身躯,然后向上平衡绘制其头部和左右手,向下平移绘制其左右腿和脚。值得注意的是,机器人模型内的各部位坐标都是对于局部坐标系中相应位置即可,然后物体将随着其物体坐标系的移动而移动。使用物体坐标系可以大大简化对物体模型的建模和控制,而无需考虑它在世界坐标系的什么位置以及移动后物体模型的新坐标是多少等问题。
3)观察坐标系
观察坐标系是和观察者相关的坐标系,也被称为摄像坐标系。在该坐标系中,摄像机观察位于原点,X轴向右,Z轴向前(朝向屏幕内部或摄像机本身的上方),Y轴向上(它不一定是世界的上方而是摄像机本身的上方)。
观察坐标系在三维图形处理中非常重要,它是联系三维世界坐标系和二维设备坐标系的桥梁和纽带。在三维图形处理中要经过投影这一步操作,投影是将三维物体变换成二维图形的过程,而定义投影空间一般都是在观察坐标系中进行的,因此三维图形输出中一般都有一个世界坐标系到观察坐标系的变换步骤。
4)设备坐标系与规格化设备坐标系
设备坐标系是与图形的物理参数有关的坐标系;而规格化设备坐标系是独立于具体物理设备的一种坐标系,它具有显示空间在X和Y方向上都是从0到1。对于每台物理设备而言,规格化设备坐标系与设备坐标系仅仅是坐标值相差一个比例因子,规格化设备坐标系可以看成是一个抽象的图形设备。
5)屏幕坐标系
屏幕坐标系为显示器的平面坐标系,它的坐标原点位于屏幕的左上角,水平向右为X轴方向,垂直向下为Y轴方向,以像素为单位。整个场景中任何物体的基点坐标最终都要转化为屏幕坐标系中的坐标来进行显示。
接下来对本申请技术方案进行详细阐述:
图1为本申请实施例提供的一种虚拟互动的方法的流程图,该方法可以应用于XR设备中,但不限于此。该方法可以由本公开提供的虚拟互动的装置来执行,其中,虚拟互动的装置可以通过任意的软件和/或硬件的方式实现。示例性地,虚拟互动的装置可配置于AR/VR/MR等能够模拟虚拟场景的电子设备,本公开对电子设备的具体类型不作任何限制。
具体的,如图1所示,该方法可以包括如下步骤:
S110,进入虚拟空间。
其中,虚拟空间可以为XR设备针对任一设置有各种座位的真实场景,模拟出的相应虚拟环境,以便在虚拟空间内显示相应的互动场景。例如,支持任一用户在不同位置下观看VR演唱会的虚拟环境等。
在本申请中,用户佩戴好XR设备后,通过开启该XR设备,使得XR设备处于工作状态。然后,XR设备会面向用户展示出所支持用户观看的多种类型下的虚拟场景,例如某一VR演唱会、点播视频或者实时直播等。通过检测手柄的输入信号或者用户的操作手势,可以确定出用户本次选择观看的任一虚拟场景。进而,XR设备可以利用该虚拟场景下的各项虚拟信息和该虚拟场景指向的真实场景信息,为用户模拟出相应的虚拟环境,使得用户进入到相应的虚拟空间内。
S120,根据虚拟空间内预配置的坐席信息,在虚拟空间内显示对应的虚拟坐席。
考虑到由于不同用户在虚拟空间内的所处位置过近,而出现相互遮挡的问题,本申请可以采用不同用户在虚拟空间内具备某一固定坐席的方式,来使不同用户在虚拟空间处于不同的位置,在保证多用户在虚拟空间内互不遮挡的基础上,提升虚拟空间内多用户间的互动氛围。
因此,针对不同类型虚拟场景所构建的虚拟空间,可以提前在虚拟空间内配置有多种坐席,得到对应的坐席信息。
其中,任一虚拟空间内预配置的坐席信息可以包括但不限于虚拟空间内的坐席分布情况,以及每一席位可占用的空间大小等。
在一些可实现方式中,虚拟空间内的坐席信息可以按照该虚拟空间对应的真实场景内的实景坐席来配置,以便在虚拟空间内能够模拟出真实场景下的互动氛围。
根据本申请的一个或多个实施例,在进入虚拟空间后,首先会查找该虚拟空间内预配置的坐席信息。进而,对该坐席信息进行解析,即可得到该虚拟空间内的坐席分布情况。然后,基于该坐席分布情况,即可在虚拟空间内的不同位置下构建出对应的虚拟坐席,以便在虚拟空间内显示出对应的虚拟坐席。
应当理解的是,由于某些类型下的虚拟场景,例如VR直播、视频点播等,对于多用户在虚拟空间内联合互动并不作感兴趣,也就无需为其配置坐席信息。因此,本申请在进入虚拟空间后,所查找的坐席信息可能为空。
那么,无需在虚拟空间内显示对应的虚拟坐席,直接显示对应的互动场景信息即可。
需要说明的是,在虚拟空间内显示的虚拟坐席可以为坐席二维布局图,或者坐席三维布局架构,本申请对此不作限定,支持用户在虚拟空间内执行准确的选座操作即可。
另一方面,为了避免虚拟空间内多用户相互遮挡的问题,要求不同用户在虚拟空间内处于不同的席位下。而考虑到不同用户进入同一虚拟空间来选座的时间先后不同,本申请中设定已被某一用户选中的席位不支持其他用户再次选择。因此,对于在虚拟空间内显示的虚拟坐席的状态,可以分为可操作状态和不可操作状态两种。
在虚拟空间内显示对应的虚拟坐席时,首先会判断虚拟坐席中的每一席位是否已经被其他用户选中。然后,在虚拟空间内,将已被其他用户选中的席位显示为不可操作状态,而将未被其他用户选中的席位显示为可操作状态,以便当前用户在虚拟空间的便捷准确选座。
S130,响应于虚拟坐席中任一目标席位的选中操作,在虚拟空间内显示目标席位下的互动场景信息。
其中,目标席位为虚拟坐席中未被选中的席位。
在一些可实现方式中,在虚拟空间内可以通过检测手柄光标射线的指向方向,来分析在虚拟坐席中本次选择的任一目标席位。然后,在指向任一目标席位后,可以通过单击手柄上的不同触控键(例如trigger键(扳机键)等),或者使用手柄执行不同的操作手势,来执行作用于该目标席位上的选中操作,从而完成虚拟空间内的选座功能。
作为本申请中的一种可选实现方案,为了保证虚拟场景下的全方位互动,通常会在虚拟空间的不同位置模拟多个虚拟摄像头,以便按照虚拟场景的互动需求,在不同机位视角下可以配置出相应的虚拟场景信息。其中,不同机位视角下的虚拟场景信息是以该机位作为观察坐标系而设定的。
而且,如果在真实场景下存在直播内容,也会在真实场景的不同位置下分别设定一个全景摄像机,以采集该机位下的真实场景信息。其中,不同机位下的真实场景信息也是以该机位作为观察坐标系而设定的。
那么,在虚拟互动过程中,通过实时对同一机位下的真实场景信息和虚拟场景信息进行融合,即可得到该机位下的互动场景信息。然后,结合所有机位下的互动场景信息,可以将多个观察坐标系下的互动场景信息统一转换到世界坐标系下,从而得到该虚拟空间的全景互动信息。
进而,响应于虚拟坐席中任一目标席位的选中操作,首先会获取该虚拟空间内的全景互动信息。然后,为了保证虚拟空间内不同席位下的互动真实性,本申请会将按照所选中的目标席位,构建一个物体坐标系。进而,将该虚拟空间内的全景互动信息,从世界坐标系下转换到该物体坐标系下,从而得到该目标席位下的互动场景信息。最后,如图2所示,在虚拟空间内显示该目标席位下的互动场景信息,即可使不同用户按照所选席位不同,在虚拟空间内观看到不同席位下的互动场景信息。
示例性的,在虚拟空间内显示目标席位下的互动场景信息时,可以按照用户所佩戴XR设备的六个自由度(Six Degrees Of Freedom,简称为6DOF)数据,将该目标席位下的互动场景信息,从物体坐标系下装换到该XR设备的屏幕坐标系下,从而在XR设备提供的虚拟空间内显示对应的互动场景信息。
本申请实施例提供的技术方案,在进入任一虚拟场景下的虚拟空间后,会根据虚拟空间内预配置的坐席信息,在虚拟空间内显示对应的虚拟坐席,以支持用户对于虚拟空间内虚拟坐席的便捷选座。然后,响应于虚拟坐席中任一目标席位的选中操作,在虚拟空间内显示该目标席位下的互动场景信息,从而实现不同用户在虚拟空间内不同席位下的场景互动,避免不同用户在虚拟空间内的位置过近而导致相互遮挡的问题,在虚拟空间内多用户相互可见的场景下,满足虚拟空间内多用户互不遮挡的互动体验,提升虚拟空间内的多用户互动氛围。
作为本申请中的一种可选实现方案,为了保证虚拟空间内虚拟坐席的准确显示和选择,如图3所示,本申请对虚拟空间内显示虚拟坐席的具体过程和对虚拟坐席执行相应选座操作的具体过程进行说明。
如图3所示,该方法具体可以包括如下步骤:
S310,进入虚拟空间。
S320,根据虚拟空间对应的实景坐席,配置虚拟空间内的坐席信息。
为了保证虚拟空间对于真实场景的准确实景模拟,本申请可以首先确定出该虚拟空间所参考的真实场景。然后,利用真实场景内的实景坐席分布情况,来配置虚拟空间内的坐席信息,使得虚拟空间与真实场景能够具备相同分布的坐席,以便准确模拟真实场景下的互动。
S330,从坐席信息中,获取每一实景坐席在虚拟空间内的虚拟坐标。
通过解析虚拟空间内配置的坐席信息,即可获取到每一实景坐席在虚拟空间内的虚拟坐标,以表示虚拟空间内的坐席位置。
其中,每一实景坐席在虚拟空间内的虚拟坐标为世界坐标系下的位置坐标。
S340,根据虚拟坐标,在虚拟空间内显示对应的虚拟坐席。
根据每一实景坐席在虚拟空间内的虚拟坐标,可以在虚拟空间的不同坐标位置下,为每一实景坐席模拟出对应的虚拟坐席,从而在虚拟空间内显示对应的虚拟坐席,以便用户后续执行虚拟空间内的选座功能。
S350,响应于虚拟坐席中任一目标席位的光标悬停操作,在目标席位的关联位置下显示对应的互动场景信息。
为了确保目标席位的准确选择,本申请可以支持在选中前,用户对于任一目标席位下的互动场景信息进行预览,以判断是否符合用户在虚拟空间内的观看需求。
因此,在检测到用户手柄的光标悬停在虚拟坐席中的任一目标席位上时,可以响应于该目标席位上的光标悬停操作,生成对应的预览指令。然后,基于该预览指令,在目标席位的关联位置下可以显示该目标席位下的互动场景信息,以便用户预览。而检测到用户手柄的光标从该目标席位上移开时,取消显示该目标席位下的互动场景信息,在虚拟空间内继续正常显示对应的虚拟坐席。
在一些可实现方式中,响应于任一目标席位的光标悬停操作,可以在虚拟空间内采用透明图层来显示该目标席位下的互动场景信息,以避免对虚拟坐席的遮挡。
S360,响应于虚拟坐席中任一目标席位的选中操作,在虚拟空间内显示目标席位下的互动场景信息。
本申请实施例提供的技术方案,在进入任一虚拟场景下的虚拟空间后,会根据虚拟空间内预配置的坐席信息,在虚拟空间内显示对应的虚拟坐席,以支持用户对于虚拟空间内虚拟坐席的便捷选座。然后,响应于虚拟坐席中任一目标席位的选中操作,在虚拟空间内显示该目标席位下的互动场景信息,从而实现不同用户在虚拟空间内不同席位下的场景互动,避免不同用户在虚拟空间内的位置过近而导致相互遮挡的问题,在虚拟空间内多用户相互可见的场景下,满足虚拟空间内多用户互不遮挡的互动体验,提升虚拟空间内的多用户互动氛围。
根据本申请的一个或多个实施例,为了保证虚拟空间内不同席位下用户间的互不遮挡,本申请在虚拟空间内显示所选中的目标席位下的互动场景信息之后,还会进一步为该目标席位设定一个临时安全区域,以支持目标席位下的当前用户在该临时安全区域内自由活动,而不遮挡其他席位下用户在虚拟空间内的互动视角。
在一些可实现方式中,为了避免虚拟空间内不同席位间的互动影响,本申请会针对虚拟空间内虚拟坐席中的每一席位,分别设定一个可活动区域。其中,每一席位的可活动区域均是在以该席位作为原点所构建的设备坐标系下,分别设定多个区域边界点的坐标后,由多个区域边界点所围成的区域。
应当理解的是,本申请可以通过解析虚拟空间内预配置的坐席信息,来确定虚拟坐席中每一席位下支持用户正常活动的边界坐标数据,从而确定该席位下的可活动区域。
而且,考虑到用户佩戴好XR设备后,对于周边真实环境的感知下降,可能与周边物体发生碰撞。因此,用户佩戴好XR设备后,XR设备支持用户根据周边真实环境先为自身预划定一个用户安全区域,从而生成虚拟空间内的安全边界的坐标数据,使得用户安全区域内不存在任何障碍物,避免出现用户与周边真实物体发生碰撞的情况。
在本申请中,在进入虚拟空间后,首先会获取用户预配置的初始安全边界坐标,以此确定XR设备划定的用户安全区域。
其中,初始安全边界坐标是在以XR设备作为原点所构建的设备坐标系下所设定的边界坐标。那么,用户安全区域的中心点即为该设备坐标系下的坐标原点。
如图4所示,以XR设备划定的用户安全区域为规则圆柱形光墙为例,用于配置用户安全区域对应的初始安全边界坐标的配置内容可以为:
由上述内容可知,通过A0面、A1面、A2面和A3面中每一面的四个顶点即可描述一个立体的圆柱形。而对于其他立体区域所表示的用户安全区域,会按照圆柱形描述方式,自动分割出多个区域面进行多面描述。
基于上述用户安全区域的描述,用户安全区域的中心点坐标为以该XR设备所构建的设备坐标系的原点坐标(0,0,0)。而且,表示用户安全区域的圆柱形光墙俯视图效果如图5所示,其圆柱体高度可以为2.4300007米。以AO面为例,其坐标x和坐标y的范围为[-0.5,0.5]。
应当理解的是,用户安全区域也可以为通过XR设备自定义绘制的不规则安全边界组成的安全区域,也可以通过多个边界面来预先配置对应的初始安全边界坐标,本申请对于用户安全区域的初始安全边界坐标配置方式不作限定。
根据本申请的一个或多个实施例,由于任一席位下的可活动区域和XR设备已划定的用户安全区域均用于限定用户在虚拟空间内可正常运动的区域。所以,在用户进入到虚拟空间内,且在虚拟空间内显示任一目标席位下的互动场景信息后,可能会存在用户安全区域与该目标席位下的可活动区域存在冲突的问题。
因此,在虚拟空间内显示目标席位下的互动场景信息之后,本申请会根据已划定的用户安全区域和目标席位的可活动区域,进一步确定目标席位下的临时安全区域。也就是说,通过判断用户安全区域和该目标席位的可活动区域之间的重合情况,来分析在目标席位下支持用户正常活动的区域大小,从而设定出该目标席位下的临时安全区域,使得用户在该临时安全区域内正常活动,在避免用户与周边真实物体发生碰撞的基础上,也能够确保用户在该目标席位下活动时与其他席位下用户间的互不遮挡。
作为本申请中的一种可实现方案,对于目标席位的临时安全区域,本申请可以将用户安全区域与该目标席位下的可活动区域内的原点进行重合,从而确定两者的重合区域。然后,按照用户安全区域和该目标席位下的可活动区域的边界坐标,分别分析用户安全区域和该目标席位下的可活动区域的边界与该重合区域的边界之间的映射关系。进而,按照用户安全区域和该目标席位下的可活动区域中的任一区域与该重合区域存在的边界映射关系,对该区域的边界坐标进行调整,即可得到该目标席位下的临时安全边界坐标,从而生成该目标席位下的临时安全区域。
考虑到通常情况下,任一席位下的可活动区域会采用规则的圆形表示,而用户安全区域可采用自动生成规则圆形区域和用户自定义绘制不规则的区域形状来表示。所以,对于任一席位下的临时安全区域也可以采用规则的圆形表示。
以上述用户安全区域和目标席位下的可活动区域的形状考量为例,本申请中用户安全区域和目标席位下的可活动区域之间的映射可分为下述三种情况。接下来针对每一种情况,对目标席位下的临时安全区域的具体确定过程进行示例性说明:
情况一:目标席位下的可活动区域大于用户安全区域
如图6所示,目标席位下的可活动区域内包含有用户安全区域,那么无论目标席位下的可活动区域和用户安全区域是否为规则区域,均可以直接将用户安全区域对应的初始安全边界坐标作为该目标席位下的临时安全边界坐标,使得临时安全区域与用户安全区域相同,无需对XR设备已配置的安全边界进行改动。
情况二:目标席位下的可活动区域小于用户安全区域,且用户安全区域为规则圆形
如图7所示,如果用户安全区域和目标席位下的可活动区域均为规则圆形,那么可以直接将目标席位下的可活动区域作为该目标席位下的临时安全区域。此时,根据用户安全区域和目标席位下的可活动区域的圆形半径,可以计算出将用户安全区域转换到该目标席位下的可活动区域时的映射系数。然后,采用该映射系数对用户安全区域对应的初始安全边界坐标中的坐标x和坐标y的值进行调整,即可得到该目标席位下的临时安全边界坐标,从而生成对应的临时安全区域。
示例性的,如果用户安全区域的半径为1,而目标席位下的可活动区域的半径为0.5,那么用户安全区域到该目标席位下的可活动区域下的映射系数k为0.5。进而,将用户安全区域对应的初始安全边界坐标中的坐标x和坐标y的值均乘以0.5,即可得到该目标席位下的临时安全边界坐标。
情况三:目标席位下的可活动区域小于用户安全区域,且用户安全区域为不规则形状
如图8所示,将用户安全区域和目标席位下的可活动区域的原点重合后,可以计算出用户安全区域和目标席位下的可活动区域中的边界中距离原点最近的一个边界距离。然后,基于“最小最近”原则,以该最近边界距离作为半径,绘制一个新的圆形,作为该目标席位下的临时安全区域。
此时,由于目标席位下的可活动区域和新的圆形表示的临时安全区域均为规则圆形。因此,可以按照情况二中的说明,计算出将该目标席位下的可活动区域转换到该新的圆形表示的临时安全区域时的映射系数。然后,采用该映射系数对目标席位下的可活动区域对应的边界坐标中的坐标x和坐标y的值进行调整,即可得到该目标席位下的临时安全边界坐标,从而生成对应的临时安全区域。
此外,由于本次进入的虚拟空间与其他场景下的虚拟空间对于用户可正常运动的安全边界要求不同。因此,本申请在进入虚拟空间后,对于用户安全区域的初始安全边界坐标会进行备份。进而,在退出该虚拟空间时,响应于该虚拟空间的退出指令,可以重新加载所备份的初始安全边界坐标,以在进入其他虚拟空间时还原出XR设备所配置的用户安全区域,确保不同虚拟空间内安全边界的准确性。
本申请实施例提供的技术方案,在进入虚拟空间,并在虚拟空间内显示目标席位下的互动场景信息后,根据已划定的用户安全区域和目标席位的可活动区域,进一步确定目标席位下的临时安全区域,以指示用户在该临时安全区域内活动,在避免用户与周边真实物体发生碰撞的基础上,也能够确保用户在该目标席位下活动时与其他席位下用户间的互不遮挡,从而解决用户安全区域与目标席位下的可活动区域存在冲突的问题。
图9为本申请实施例提供的一种虚拟互动的装置的示意图,该虚拟互动的装置900可以配置于XR设备中,该虚拟互动的装置900包括:
虚拟空间进入模块910,用于进入虚拟空间;
虚拟坐席显示模块920,用于根据所述虚拟空间内预配置的坐席信息,在所述虚拟空间内显示对应的虚拟坐席;
虚拟互动模块930,用于响应于所述虚拟坐席中任一目标席位的选中操作,在所述虚拟空间内显示所述目标席位下的互动场景信息,所述目标席位为所述虚拟坐席中未被选中的席位。
在一些可实现方式中,虚拟坐席显示模块920,可以具体用于:
根据所述虚拟空间对应的实景坐席,配置所述虚拟空间内的坐席信息;
从所述坐席信息中,获取每一实景坐席在所述虚拟空间内的虚拟坐标;
根据所述虚拟坐标,在所述虚拟空间内显示对应的虚拟坐席。
在一些可实现方式中,虚拟互动的装置900,还可以包括:
目标席位预览模块,用于响应于所述虚拟坐席中任一目标席位的光标悬停操作,在所述目标席位的关联位置下显示对应的互动场景信息。
在一些可实现方式中,虚拟互动的装置900,还可以包括:
临时区域确定模块,用于根据已划定的用户安全区域和所述目标席位的可活动区域,确定所述目标席位下的临时安全区域。
在一些可实现方式中,临时区域确定模块,可以具体用于:
确定所述用户安全区域与所述可活动区域在原点重合时的重合区域;
根据所述重合区域,生成所述目标席位下的临时安全边界坐标,以得到所述临时安全区域。
在一些可实现方式中,虚拟互动的装置900,还可以包括:
安全边界初始化模块,用于获取用户预配置的初始安全边界坐标,以确定所述用户安全区域。
在一些可实现方式中,虚拟互动的装置900,还可以包括:
安全边界还原模块,用于响应于所述虚拟空间的退出指令,重新加载所述初始安全边界坐标,以在进入其他虚拟空间时还原所述用户安全区域。
本申请实施例中,在进入任一虚拟场景下的虚拟空间后,会根据虚拟空间内预配置的坐席信息,在虚拟空间内显示对应的虚拟坐席,以支持用户对于虚拟空间内虚拟坐席的便捷选座。然后,响应于虚拟坐席中任一目标席位的选中操作,在虚拟空间内显示该目标席位下的互动场景信息,从而实现不同用户在虚拟空间内不同席位下的场景互动,避免不同用户在虚拟空间内的位置过近而导致相互遮挡的问题,在虚拟空间内多用户相互可见的场景下,满足虚拟空间内多用户互不遮挡的互动体验,提升虚拟空间内的多用户互动氛围。
应理解的是,该装置实施例与本申请中的方法实施例可以相互对应,类似的描述可以参照本申请中的方法实施例。为避免重复,此处不再赘述。
具体地,图9所示的装置900可以执行本申请提供的任一方法实施例,并且图9所示的装置900中的各个模块的前述和其它操作和/或功能分别为了实现上述方法实施例的相应流程,为了简洁,在此不再赘述。
上文中结合附图从功能模块的角度描述了本申请实施例的上述方法实施例。应理解,该功能模块可以通过硬件形式实现,也可以通过软件形式的指令实现,还可以通过硬件和软件模块组合实现。具体地,本申请实施例中的方法实施例的各步骤可以通过处理器中的硬件的集成逻辑电路和/或软件形式的指令完成,结合本申请实施例公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。可选地,软件模块可以位于随机存储器,闪存、只读存储器、可编程只读存储器、电可擦写可编程存储器、寄存器等本领域的成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法实施例中的步骤。
图10是本申请实施例提供的电子设备的示意性框图。
如图10所示,该电子设备1000可包括:
存储器1010和处理器1020,该存储器1010用于存储计算机程序,并将该程序代码传输给该处理器1020。换言之,该处理器1020可以从存储器1010中调用并运行计算机程序,以实现本申请实施例中的方法。
例如,该处理器1020可用于根据该计算机程序中的指令执行上述方法实施例。
在本申请的一些实施例中,该处理器1020可以包括但不限于:
通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(FieldProgrammable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等等。
在本申请的一些实施例中,该存储器1010包括但不限于:
易失性存储器和/或非易失性存储器。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double DataRate SDRAM,DDR SDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DR RAM)。
在本申请的一些实施例中,该计算机程序可以被分割成一个或多个模块,该一个或者多个模块被存储在该存储器1010中,并由该处理器1020执行,以完成本申请提供的方法。该一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述该计算机程序在该电子设备1000的执行过程。
如图10所示,该电子设备还可包括:
收发器1030,该收发器1030可连接至该处理器1020或存储器1010。
其中,处理器1020可以控制该收发器1030与其他设备进行通信,具体地,可以向其他设备发送信息或数据,或接收其他设备发送的信息或数据。收发器1030可以包括发射机和接收机。收发器1030还可以进一步包括天线,天线的数量可以为一个或多个。
应当理解,该电子设备1000中的各个组件通过总线系统相连,其中,总线系统除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。
本申请还提供了一种计算机存储介质,其上存储有计算机程序,该计算机程序被计算机执行时使得该计算机能够执行上述方法实施例的方法。
本申请实施例还提供一种包含指令的计算机程序产品,该指令被计算机执行时使得计算机执行上述方法实施例的方法。
当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行该计算机程序指令时,全部或部分地产生按照本申请实施例该的流程或功能。该计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。该计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,该计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。该计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质(例如数字视频光盘(digital video disc,DVD))、或者半导体介质(例如固态硬盘(solid state disk,SSD))等。
以上仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以该权利要求的保护范围为准。
Claims (12)
1.一种虚拟互动的方法,其特征在于,所述方法应用于扩展现实XR设备,包括:
进入虚拟空间;
根据所述虚拟空间内预配置的坐席信息,在所述虚拟空间内显示对应的虚拟坐席;
响应于所述虚拟坐席中任一目标席位的选中操作,在所述虚拟空间内显示所述目标席位下的互动场景信息,所述目标席位为所述虚拟坐席中未被选中的席位。
2.根据权利要求1所述的方法,其特征在于,所述根据所述虚拟空间内预配置的坐席信息,在所述虚拟空间内显示对应的虚拟坐席,包括:
根据所述虚拟空间对应的实景坐席,配置所述虚拟空间内的坐席信息;
从所述坐席信息中,获取每一实景坐席在所述虚拟空间内的虚拟坐标;
根据所述虚拟坐标,在所述虚拟空间内显示对应的虚拟坐席。
3.根据权利要求1所述的方法,其特征在于,在所述虚拟空间内显示对应的虚拟坐席之后,还包括:
响应于所述虚拟坐席中任一目标席位的光标悬停操作,在所述目标席位的关联位置下显示对应的互动场景信息。
4.根据权利要求1所述的方法,其特征在于,在所述虚拟空间内显示所述目标席位下的互动场景信息之后,还包括:
为所述目标席位设定临时安全区域,以使当前用户在所述临时安全区域内活动时不遮挡其他席位下的用户。
5.根据权利要求4所述的方法,其特征在于,所述为所述目标席位设定临时安全区域,包括:
根据已划定的用户安全区域和所述目标席位的可活动区域,确定所述目标席位下的临时安全区域。
6.根据权利要求5所述的方法,其特征在于,所述根据已划定的用户安全区域和所述目标席位的可活动区域,确定所述目标席位下的临时安全区域,包括:
确定所述用户安全区域与所述可活动区域在原点重合时的重合区域;
根据所述重合区域,生成所述目标席位下的临时安全边界坐标,以得到所述临时安全区域。
7.根据权利要求5所述的方法,其特征在于,在进入虚拟空间之后,还包括:
获取用户预配置的初始安全边界坐标,以确定所述用户安全区域。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
响应于所述虚拟空间的退出指令,重新加载所述初始安全边界坐标,以在进入其他虚拟空间时还原所述用户安全区域。
9.一种虚拟互动的装置,其特征在于,所述装置配置于XR设备,包括:
虚拟空间进入模块,用于进入虚拟空间;
虚拟坐席显示模块,用于根据所述虚拟空间内预配置的坐席信息,在所述虚拟空间内显示对应的虚拟坐席;
虚拟互动模块,用于响应于所述虚拟坐席中任一目标席位的选中操作,在所述虚拟空间内显示所述目标席位下的互动场景信息,所述目标席位为所述虚拟坐席中未被选中的席位。
10.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1-8任一项所述的虚拟互动的方法。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-8任一项所述的虚拟互动的方法。
12.一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在电子设备上运行时,使得所述电子设备执行权利要求1-8任一项所述的虚拟互动的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210819483.2A CN117435036A (zh) | 2022-07-12 | 2022-07-12 | 一种虚拟互动的方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210819483.2A CN117435036A (zh) | 2022-07-12 | 2022-07-12 | 一种虚拟互动的方法、装置、设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117435036A true CN117435036A (zh) | 2024-01-23 |
Family
ID=89546691
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210819483.2A Pending CN117435036A (zh) | 2022-07-12 | 2022-07-12 | 一种虚拟互动的方法、装置、设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117435036A (zh) |
-
2022
- 2022-07-12 CN CN202210819483.2A patent/CN117435036A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11290651B2 (en) | Image display system, information processing apparatus, image display method, image display program, image processing apparatus, image processing method, and image processing program | |
US9805509B2 (en) | Method and system for constructing a virtual image anchored onto a real-world object | |
US10095458B2 (en) | Information processing apparatus, information processing method, non-transitory computer-readable storage medium, and system | |
US11282264B2 (en) | Virtual reality content display method and apparatus | |
CN109829981B (zh) | 三维场景呈现方法、装置、设备及存储介质 | |
US20170186219A1 (en) | Method for 360-degree panoramic display, display module and mobile terminal | |
CN111414225B (zh) | 三维模型远程展示方法、第一终端、电子设备及存储介质 | |
CN103157281B (zh) | 一种二维游戏场景显示的方法和设备 | |
US20160140761A1 (en) | Using depth information for drawing in augmented reality scenes | |
US11449196B2 (en) | Menu processing method, device and storage medium in virtual scene | |
US10789766B2 (en) | Three-dimensional visual effect simulation method and apparatus, storage medium, and display device | |
KR20220119180A (ko) | 혼합 현실에서 동적 가상 콘텐츠들을 생성하기 위한 디바이스 및 방법 | |
US11562545B2 (en) | Method and device for providing augmented reality, and computer program | |
CN110286906B (zh) | 用户界面显示方法、装置、存储介质与移动终端 | |
CN113470112A (zh) | 图像处理方法、装置、存储介质以及终端 | |
KR20200069009A (ko) | 가상현실 구현장치 및 이를 이용한 플랜트 전기배선 설계의 자동화 시스템 | |
CN117078888A (zh) | 虚拟角色的服装生成方法、装置、介质及电子设备 | |
CN117435036A (zh) | 一种虚拟互动的方法、装置、设备和存储介质 | |
US20200226833A1 (en) | A method and system for providing a user interface for a 3d environment | |
CN113421343B (zh) | 基于增强现实观测设备内部结构的方法 | |
CN117319625A (zh) | 一种多机位切换的方法、装置、设备和存储介质 | |
CN113742507A (zh) | 三维展示物品的方法及相关设备 | |
Košťák et al. | Mobile phone as an interactive device in augmented reality system | |
CN115861509A (zh) | 虚拟车展实现方法、计算机装置及存储介质 | |
CN118279971A (zh) | 一种手部动作识别方法及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |