CN112162638B - 一种虚拟现实vr观影中的信息处理方法及服务器 - Google Patents

一种虚拟现实vr观影中的信息处理方法及服务器 Download PDF

Info

Publication number
CN112162638B
CN112162638B CN202011071782.XA CN202011071782A CN112162638B CN 112162638 B CN112162638 B CN 112162638B CN 202011071782 A CN202011071782 A CN 202011071782A CN 112162638 B CN112162638 B CN 112162638B
Authority
CN
China
Prior art keywords
audience
distance
parameter
voice signal
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011071782.XA
Other languages
English (en)
Other versions
CN112162638A (zh
Inventor
彭雷
杜艳青
欧如锋
刘一民
陈望都
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
MIGU Video Technology Co Ltd
MIGU Culture Technology Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
MIGU Video Technology Co Ltd
MIGU Culture Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, MIGU Video Technology Co Ltd, MIGU Culture Technology Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202011071782.XA priority Critical patent/CN112162638B/zh
Publication of CN112162638A publication Critical patent/CN112162638A/zh
Application granted granted Critical
Publication of CN112162638B publication Critical patent/CN112162638B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种虚拟现实VR观影中的信息处理方法及服务器，涉及虚拟现实技术领域，以解决现有技术中无法做到类似真实观影场景下的观众之间的社交的问题。该方法包括在检测到第一观众的转头动作的情况下，获取目标观众的信息，所述目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；在所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；其中，所述第一观众和所述目标观众处于同一虚拟观影房间且佩戴有VR设备。本发明实施例能够使同一虚拟观影房间内正在观影的观众之间的语音交互类似真实观影场景下的互动效果，使用户获得真实的观影体验。

Description

一种虚拟现实VR观影中的信息处理方法及服务器
技术领域
本发明涉及虚拟现实技术领域，尤其涉及一种虚拟现实VR观影中的信息处理方法及服务器。
背景技术
虚拟现实(VR，Virtual Reality)技术通过将画面以3D的形式进行展现，能够帮助人们在屏幕上获得更加真实的视觉效果。目前VR技术的主要应用是虚拟观影，用户在VR设备中通过创建虚拟房间、加入虚拟房间、与其他用户一起虚拟观影、退出房间等操作，实现对现实观影场景的虚拟化，并获得真实的观影体验。
现有的VR观影，对于真实电影院场景的摸拟，仅仅是将影院的座次通过全景方式渲染出来，并通过三维动画模拟邻座的入座，离座动作，让观众可以感知邻座观众的变动，一定程序上提升了VR观影的真实感。但是目前方案无法做到类似真实观影场景下的观众之间的社交。
发明内容
本发明实施例提供一种虚拟现实VR观影中的信息处理方法及服务器，以解决现有技术中无法做到类似真实观影场景下的观众之间的社交的问题。
第一方面，本发明实施例提供了一种虚拟现实VR观影中的信息处理方法，包括：
在检测到第一观众的转头动作的情况下，获取目标观众的信息，所述目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；
在检测到所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；
其中，所述第一观众和所述目标观众处于同一虚拟观影房间且佩戴有VR设备。
可选的，所述获取目标观众的信息的步骤之后，还包括：
在所述第一观众的VR设备上显示所述目标观众的转头动画效果。
可选的，所述在所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理，包括：
在获取到所述第一观众的VR设备和/或所述第二观众的VR设备采集到的语音信号的情况下，判断所述语音信号是否为所述第一观众或者所述第二观众的语音；
在判断所述语音信号为所述第一观众或者所述第二观众的语音的情况下，对所述语音信号的强度进行处理；
在判断所述语音信号不是所述第一观众或者所述第二观众的语音的情况下，在采集所述语音信号的VR设备上提示所述语音信号。
可选的，所述对所述语音信号的强度进行处理，包括：
在所述第一观众与所述第二观众之间的距离小于第一阈值时，不衰减所述语音信号的强度；
在所述第一观众与所述第二观众之间的距离大于或者等于所述第一阈值且小于或者等于第二阈值时，确定衰减变量，并根据所述衰减变量，对所述语音信号的强度进行衰减处理；
在所述第一观众与所述第二观众之间的距离大于所述第二阈值时，将所述语音信号的强度减小至0分贝；
所述第一阈值小于所述第二阈值。
可选的，所述确定衰减变量，包括：
确定第一参数，所述第一参数用于表征电影的播放音量对语音信号的清晰度的影响；
确定第二参数，所述第二参数为所述第一观众和所述第二观众中的发言人的VR设备上的当前播放音量；
根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量。
可选的，所述根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量，包括：
将所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数求和，获得第一值；
对所述第一值取自然对数，获得所述衰减变量。
可选的，所述确定第一参数，包括：
获取目标连线与电影屏幕的法线之间的夹角；其中，所述目标连线是所述第一观众和所述第二观众中的发言人与所述电影屏幕中心点之间的连线；
获取所述第一观众和所述第二观众中的发言人与所述电影屏幕的中心点之间的第一距离；
获取第二距离，所述第二距离为所述虚拟观影房间的纵向长度；
根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数。
可选的，所述根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数，包括：
通过公式计算得到第一参数；
其中，Md为第一参数；La指所述第一距离；Ld指第二距离；θ指所述夹角。
可选的，所述获取目标观众信息的步骤之后，还包括以下至少一个步骤：
在接收到所述第一观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第二观众；
在接收到所述第二观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第一观众。
第二方面，本发明实施例还提供一种服务器，包括：收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序；其特征在于，所述处理器，用于读取存储器中的程序实现如上所述的虚拟现实VR观影中的信息处理方法中的步骤。
第三方面，本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上所述的虚拟现实VR观影中的信息处理方法中的步骤。
在本发明实施例中，在检测到第一观众的转头动作的情况下，获取目标观众的信息，其中目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；进一步在所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；其中第一观众和目标观众处于同一虚拟观影房间且佩戴有VR设备，通过对第一观众和第二观众交互的语音信号进行处理，以模拟真实观影场景下的互动效果。因此，利用本发明实施例的方案，能够使同一虚拟观影房间内正在观影的观众之间的语音交互类似真实观影场景下的互动效果，使用户获得真实的观影体验。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的虚拟现实VR观影中的信息处理方法的流程图；
图2是本发明实施例提供的虚拟现实VR观影中的信息处理装置结构图；
图3是本发明实施例提供的服务器的结构图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，图1是本发明实施例提供的虚拟现实VR观影中的信息处理方法的流程图，如图1所示，包括以下步骤：
步骤101，在检测到第一观众的转头动作的情况下，获取目标观众的信息，所述目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；
本步骤中，第一观众指虚拟观影房间中的任一转头观众，目标观众包括在第一观众的视野范围内的一个或多个观众，当然，第一观众转头朝向的视野范围内也可能没有观众。
其中，确定第一观众转头朝向的视野范围可以包括：
当第一观众转头时，服务器根据第一观众在虚拟观影房间中的坐标(X,Y)以及第一观众的VR设备转头面部朝向与电影屏幕法线之间的夹角θ，确定第一观众转头朝向的视野范围。
具体的，当用户佩戴VR设备，作为观众进入虚拟影院时，根据观众座位，将观众在虚拟影院(虚拟观影房间)中的位置以2D坐标(X,Y)的形式发送给服务器，服务器存储观众的坐标信息，并默认新进入观众的头部朝向为正面面向电影屏幕。同时，服务器对现场所有在线观众发送观众入场消息，其它在线观众的VR设备上更新该观众座位画面为有人就座。
具体的，确定目标观众的信息可以包括：
确定第一观众的视角半径；
作为一种方式，可以根据第一观众在虚拟观影房间中的坐标(X,Y)以及第一观众的VR设备转头时面部的朝向与电影屏幕法线之间的夹角θ，确定第一观众的视角半径；其中，该夹角θ在第一观众每次转头时进行更新存储。
例如，将电影屏幕的中心点作为坐标系原点(0,0)，第一观众在虚拟观影房间中的坐标(X,Y)中的X指第一观众垂直于电影屏幕的方向上与屏幕的距离，Y指第一观众平行于电影屏幕的方向上的横向坐标值。那么，视角半径
作为另一种方式，视角半径为一预设固定值。
进一步的，根据所述视角半径以及夹角θ，确定第一观众转头朝向的扇形区域的视野范围。
例如，第一观众的横向可看到的幅宽为90度，则以第一观众转头朝向为第一观众的视线中心线，以该中心线两侧各扩展45度作为第一观众当前的水平视角范围；进一步结合视角半径，即可确定第一观众转头朝向的扇形区域的视野范围。
其中，将第一观众转头朝向的扇形区域的视野范围内的所有观众作为目标观众。
进一步的，可以遍历与转头观众距离预设范围内(例如，与转头观众距离三排以内)的观众，来判断观众是否在第一观众的扇形区域的视野范围内，来确定该观众是否为目标观众。
例如，具体的判断过程可以包括：根据该观众的坐标，确定该观众与第一观众的直线距离是否小于视角半径，即其中，第一观众的坐标为(X,Y)，该观众的坐标为(Xn，Yn)，r为第一观众的视角半径；同时，判断第一观众与该观众之间的向量与第一观众面部朝向所对应向量之间的夹角是否小于第一观众的水平视角范围角度的一半。若该观众与第一观众的指直线距离是小于视角半径，且该观众与第一观众之间的向量与第一观众面部朝向的对应向量之间的夹角是小于第一观众的横向视角范围角度的一半，则确定该观众为目标观众。具体可以利用两个向量的点积公式，计算两个向量之间的夹角。
步骤102，在检测到所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；其中，所述第一观众和所述目标观众处于同一虚拟观影房间且佩戴有VR设备。
在步骤中，可根据第一观众与第二观众之间的距离，对语音信号的强度进行处理，使第一观众与第二观众之间的语音交互体验更贴近真实观影场景下的互动效果。
该实施例中，在检测到第一观众的转头动作的情况下，根据所述第一观众转头朝向的视野范围，确定并获取目标观众的信息；进一步在所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理，能够使第一观众与第二观众之间的语音交互体验更贴近真实观影场景下的互动效果，使得VR影院观影尽量接近真实，提升了用户的使用体验。
在一实施例中，所述获取目标观众的信息的步骤之后，还包括：
在所述第一观众的VR设备上显示所述目标观众的转头动画效果。
该实施例中，在检测到第一观众的转头动作时，通过控制第一观众的VR设备上显示目标观众的转头动画效果，使第一用户与目标观众的之间更具有互动感，有利于提升用户的使用体验。
在一实施例中，上述步骤102包括：
在获取到所述第一观众的VR设备和/或所述第二观众的VR设备采集到的语音信号的情况下，判断所述语音信号是否为所述第一观众或者所述第二观众的语音；
具体的，根据现有的语音识别技术，以Viterbi算法判断从麦克风中输入的人声是否是观众本人。例如，可以利用隐式马尔可夫模型进行语音识别，具体利用隐式马尔可夫模型进行语音识别的过程可参考现有技术。
在判断所述语音信号为所述第一观众或者所述第二观众的语音的情况下，对所述语音信号的强度进行处理；
在判断所述语音信号不是所述第一观众或者所述第二观众的语音的情况下，在采集所述语音信号的VR设备上提示所述语音信号。
例如，采集所述语音信号的VR设备为第一观众所佩戴的VR设备，则在第一观众的VR设备上提示素数语音信号。
需要说明，若语音信号不是所述第一观众或者所述第二观众的语音，则说明该语音信号为观众的身边所发出的语音信号。
其中，在对应采集所述语音信号的VR设备上提示所述语音信号可以包括：使用现有语音存储技术，将音频信号编码为AAC(Advanced Audio Coding，高级音频编码)并存储在VR设备的缓存数据库中(如Redis)；将该语音信号以语音信箱方式展现，并在VR屏幕的右上方渲染出来，以汽泡的形式显示未读信息数n。观众通过VR设备点击屏幕右上方未读信息来收听前文中存储的语音，读取1条，未读信息数n减1。
进一步的，对所述语音信号的强度进行处理，包括：
在所述第一观众与所述第二观众之间的距离小于第一阈值时，不衰减所述语音信号的强度；
在所述第一观众与所述第二观众之间的距离大于或者等于所述第一阈值且小于或者等于第二阈值时，确定衰减变量，并根据所述衰减变量，对所述语音信号的强度进行衰减处理；
在所述第一观众与所述第二观众之间的距离大于所述第二阈值时，将所述语音信号的强度减小至0分贝；其中，所述第一阈值小于所述第二阈值。
例如，以相隔四座的长度为声音能到达的第二阈值，以相邻座位的长度为第一阈值。在第一观众与第二观众之间的距离小于第一阈值时(如相邻座位)，交互声音不衰减，在第一观众与第二观众之间的距离大于第二阈值时(如相隔四座之外)，交互声音减小为0分贝；在第一观众与第二观众支之间的距离大于或者等于所述第一阈值且小于或者等于第二阈值时，根据衰减变量，对语音信号的强度进行衰减处理。这样，能够使第一观众与第二观众之间的语音交互体验更贴近真实观影场景下的互动效果。
具体的，所述确定衰减变量，包括：
确定第一参数，所述第一参数用于表征电影的播放音量对语音信号的清晰度的影响；
确定第二参数，所述第二参数为所述第一观众和所述第二观众中的发言人的VR设备上的当前播放音量；
根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量。
该实施例中，通过考虑第一观众与第二观众之间的距离、用于表征电影的播放音量对语音信号的清晰度的影响的第一参数，以及第一观众和第二观众中的发言人的VR设备上的当前播放音量这一第二参数，能够确定更真实准确的衰减变量，利用该衰减变量对语音信号的强度进行处理，能够使第一观众和第二观众听到的声音更接近真实观影场景下的互动效果。
在一实施例中，所述根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量，包括：
将所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数求和，获得第一值；
对所述第一值取自然对数，获得所述衰减变量。
该实施例中，衰减变量＝ln(S+Md+Pv)；其中，Md为第一参数；Pv为第二参数，S为所述第一观众与所述第二观众之间的距离。
在一实施例中，所述确定第一参数，包括：
获取目标连线与电影屏幕的法线之间的夹角；其中，所述目标连线是所述第一观众和所述第二观众中的发言人与所述电影屏幕中心点之间的连线；
获取所述第一观众和所述第二观众中的发言人与所述电影屏幕的中心点之间的第一距离；
获取第二距离，所述第二距离为所述虚拟观影房间的纵向长度；
根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数。
需要说明的是，所述第二距离可以是电影屏幕与目标位置之间的距离，其中目标位置可以为最后一排座椅，或者虚拟观影房间中与电影屏幕正对的墙壁。
该实施例中，默认电影声音是从电影屏幕所在一侧发出的，通过考虑虚拟观影房间的纵向长度、发言人与电影屏幕的中心点之间的第一距离以及发言人与所述电影屏幕中心点之间的连线与点评屏幕的法线之间的夹角，从而确定出能够反映电影的播放音量对语音信号的清晰度的影响第一参数。
进一步的，在一实施例中，所述根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数，包括：
通过公式计算得到第一参数；其中，Md为第一参数；La指所述第一距离；Ld指第二距离；θ指所述夹角。
该实施例中，由公式可知，La越大，发言人与屏幕的距离越远，第一参数越小，电影的播放音量对语音信号的清晰度影响程度越小。因此，通过该公式，能够更为准确的反映出电影的播放音量对语音信号的清晰度影响，使得第一观众与第二观众之间的语音交互体验更贴近真实观影场景下的互动效果。
在一实施例中，所述获取目标观众信息的步骤之后，还包括以下至少一个步骤：
在接收到所述第一观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第二观众；
在接收到所述第二观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第一观众。
该实施例中，如观众之间有私聊需求，可以互相发送添加好友请求，成功添加好友后，可以以服务器直接转发语音的形式，实现同场好友间语音私聊，在互相添加联系人后，联系人之间的交互声音不衰减，并且其他观众听不到。这样，能够满足用户更多的社交互动需求。
进一步的，还包括：当观众离场时，发送离场信息给服务器，服务器在接收到里程信息后，从在线用户列表中将该观众删除，并对现场所有在线观众发送该观众离场消息，其它在线观众的VR设备更新该观众座位画面为空座位。
上述方案中，既能模拟接近真实环境下观影人之间的语音交流体验，如离屏幕越近，对说话声音影响越大；人与人之间相隔越远，能听到的声音越小，同时还兼顾了好友(互为联系人)之间的私聊需求，且私聊时声音不衰减，该方案能够使VR影院观影体验尽量接近真实。
本发明实施例还提供了一种虚拟现实VR观影中的信息处理装置。参见图2，图2是本发明实施例提供的虚拟现实VR观影中的信息处理装置的结构图。由于虚拟现实VR观影中的信息处理装置解决问题的原理与本发明实施例中虚拟现实VR观影中的信息处理方法相似，因此该视频处理装置的实施可以参见方法的实施，重复之处不再赘述。
如图2所示，视频处理装置200包括：
获取模块201，用于在检测到第一观众的转头动作的情况下，获取目标观众的信息，所述目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；
处理模块202，用于在检索到所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；其中，所述第一观众和所述目标观众处于同一虚拟观影房间且佩戴有VR设备。
可选的，上述装置200还包括：
控制显示模块，用于在所述第一观众的VR设备上显示所述目标观众的转头动画效果。
可选的，处理模块202包括：
判断模块，用于在获取到所述第一观众的VR设备和/或所述第二观众的VR设备采集到的语音信号的情况下，判断所述语音信号是否为所述第一观众或者所述第二观众的语音；
第一处理子模块，用于在判断所述语音信号为所述第一观众或者所述第二观众的语音的情况下，对所述语音信号的强度进行处理；
第二处理子模块，用于在判断所述语音信号不是所述第一观众或者所述第二观众的语音的情况下，在采集所述语音信号的VR设备上提示所述语音信号。
可选的，处理模块202或者第一处理子模块还包括：
第一处理单元，用于在所述第一观众与所述第二观众之间的距离小于第一阈值时，不衰减所述语音信号的强度；
第二处理单元，用于在所述第一观众与所述第二观众之间的距离大于或者等于所述第一阈值且小于或者等于第二阈值时，确定衰减变量，并根据所述衰减变量，对所述语音信号的强度进行衰减处理；
第三处理单元，用于在所述第一观众与所述第二观众之间的距离大于所述第二阈值时，将所述语音信号的强度减小至0分贝；
所述第一阈值小于所述第二阈值。
可选的，第二处理子单元在确定衰减变量时，具体用于：
确定第一参数，所述第一参数用于表征电影的播放音量对语音信号的清晰度的影响；
确定第二参数，所述第二参数为所述第一观众和所述第二观众中的发言人的VR设备上的当前播放音量；
根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量。
可选的，第二处理子单元在根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量时，具体用于：
将所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数求和，获得第一值；
对所述第一值取自然对数，获得所述衰减变量。
可选的，第二处理子单元在确定第一参数时，具体用于：
获取目标连线与电影屏幕的法线之间的夹角；其中，所述目标连线是所述第一观众和所述第二观众中的发言人与所述电影屏幕中心点之间的连线；
获取所述第一观众和所述第二观众中的发言人与所述电影屏幕的中心点之间的第一距离；
获取第二距离，所述第二距离为所述虚拟观影房间的纵向长度；
根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数。
可选的，第二处理子单元在根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数时，具体用于：
通过公式计算得到第一参数；
其中，Md为第一参数；La指所述第一距离；Ld指第二距离；θ指所述夹角。
可选的，上述装置还包括：
第一发送模块，用于在接收到所述第一观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第二观众；
第二发送模块，用于在接收到所述第二观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第一观众。
本发明实施例提供的装置，可以执行上述方法实施例，其实现原理和技术效果类似，本实施例此处不再赘述。
如图3所示，本发明实施例提供了一种服务器，包括：处理器300、收发机310、存储器320和总线接口，其中：
在本发明实施例中，服务器，还包括：存储在存储器上320并可在处理器300上运行的计算机程序，计算机程序被处理器300执行时实现如下步骤：
在检测到第一观众的转头动作的情况下，获取目标观众的信息，所述目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；
在检索到所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；其中，所述第一观众和所述目标观众处于同一虚拟观影房间且佩戴有VR设备。
收发机310，用于在处理器300的控制下接收和发送数据。
其中，在图3中，总线架构可以包括任意数量的互联的总线和桥，具体由处理器300代表的一个或多个处理器和存储器320代表的存储器的各种电路链接在一起。总线架构还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起，这些都是本领域所公知的，因此，本文不再对其进行进一步描述。总线接口提供接口。收发机310可以是多个元件，即包括发送机和收发机，提供用于在传输介质上与各种其他装置通信的单元。处理器300负责管理总线架构和通常的处理，存储器320可以存储处理器300在执行操作时所使用的数据。
处理器300在获取目标观众的信息的步骤之后，还用于读取所述计算机程序，执行如下步骤:
在所述第一观众的VR设备上显示所述目标观众的转头动画效果。
处理器300还用于读取所述计算机程序，执行如下步骤：
在获取到所述第一观众的VR设备和/或所述第二观众的VR设备采集到的语音信号的情况下，判断所述语音信号是否为所述第一观众或者所述第二观众的语音；
在判断所述语音信号为所述第一观众或者所述第二观众的语音的情况下，对所述语音信号的强度进行处理；
在判断所述语音信号不是所述第一观众或者所述第二观众的语音的情况下，在采集所述语音信号的VR设备上提示所述语音信号。
处理器300在对所述语音信号的强度进行处理时，还用于读取所述计算机程序，执行如下步骤：
在所述第一观众与所述第二观众之间的距离小于第一阈值时，不衰减所述语音信号的强度；
在所述第一观众与所述第二观众之间的距离大于或者等于所述第一阈值且小于或者等于第二阈值时，确定衰减变量，并根据所述衰减变量，对所述语音信号的强度进行衰减处理；
在所述第一观众与所述第二观众之间的距离大于所述第二阈值时，将所述语音信号的强度减小至0分贝；
所述第一阈值小于所述第二阈值。
处理器300还用于读取所述计算机程序，执行如下步骤：
确定第一参数，所述第一参数用于表征电影的播放音量对语音信号的清晰度的影响；
确定第二参数，所述第二参数为所述第一观众和所述第二观众中的发言人的VR设备上的当前播放音量；
根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量。
处理器300还用于读取所述计算机程序，执行如下步骤：
将所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数求和，获得第一值；
对所述第一值取自然对数，获得所述衰减变量。
处理器300还用于读取所述计算机程序，执行如下步骤：
获取目标连线与电影屏幕的法线之间的夹角；其中，所述目标连线是所述第一观众和所述第二观众中的发言人与所述电影屏幕中心点之间的连线；
获取所述第一观众和所述第二观众中的发言人与所述电影屏幕的中心点之间的第一距离；
获取第二距离，所述第二距离为所述虚拟观影房间的纵向长度；
根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数。
处理器300还用于读取所述计算机程序，执行如下步骤：
通过公式计算得到第一参数；
其中，Md为第一参数；La指所述第一距离；Ld指第二距离；θ指所述夹角。
处理器300还用于读取所述计算机程序，执行如下步骤：
在接收到所述第一观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第二观众；
在接收到所述第二观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第一观众。
本发明实施例提供的设备，可以执行上述方法实施例，其实现原理和技术效果类似，本实施例此处不再赘述。
此外，本发明实施例的计算机可读存储介质，用于存储计算机程序，所述计算机程序可被处理器执行实现以下步骤：
在检测到第一观众的转头动作的情况下，获取目标观众的信息，所述目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；
在检测到所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；其中，所述第一观众和所述目标观众处于同一虚拟观影房间且佩戴有VR设备。
其中，所述获取目标观众的信息的步骤之后，还包括：
在所述第一观众的VR设备上显示所述目标观众的转头动画效果。
其中，所述在所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理，包括：
在获取到所述第一观众的VR设备和/或所述第二观众的VR设备采集到的语音信号的情况下，判断所述语音信号是否为所述第一观众或者所述第二观众的语音；
在判断所述语音信号为所述第一观众或者所述第二观众的语音的情况下，对所述语音信号的强度进行处理；
在判断所述语音信号不是所述第一观众或者所述第二观众的语音的情况下，在采集所述语音信号的VR设备上提示所述语音信号。
其中，所述对所述语音信号的强度进行处理，包括：
在所述第一观众与所述第二观众之间的距离小于第一阈值时，不衰减所述语音信号的强度；
在所述第一观众与所述第二观众之间的距离大于或者等于所述第一阈值且小于或者等于第二阈值时，确定衰减变量，并根据所述衰减变量，对所述语音信号的强度进行衰减处理；
在所述第一观众与所述第二观众之间的距离大于所述第二阈值时，将所述语音信号的强度减小至0分贝；
所述第一阈值小于所述第二阈值。
其中，所述确定衰减变量，包括：
确定第一参数，所述第一参数用于表征电影的播放音量对语音信号的清晰度的影响；
确定第二参数，所述第二参数为所述第一观众和所述第二观众中的发言人的VR设备上的当前播放音量；
根据所述距离、所述第一参数和所述第二参数，确定所述衰减变量。
其中，所述根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量，包括：
将所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数求和，获得第一值；
对所述第一值取自然对数，获得所述衰减变量。
其中，所述确定第一参数，包括：
获取目标连线与电影屏幕的法线之间的夹角；其中，所述目标连线是所述第一观众和所述第二观众中的发言人与所述电影屏幕中心点之间的连线；
获取所述第一观众和所述第二观众中的发言人与所述电影屏幕的中心点之间的第一距离；
获取第二距离，所述第二距离为所述虚拟观影房间的纵向长度；
根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数。
其中，所述根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数，包括：
通过公式计算得到第一参数；
其中，Md为第一参数；La指所述第一距离；Ld指第二距离；θ指所述夹角。
其中，所述获取目标观众信息的步骤之后，还包括以下至少一个步骤：
在接收到所述第一观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第二观众；
在接收到所述第二观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第一观众。
在本申请所提供的几个实施例中，应该理解到，所揭露方法和装置，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理包括，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述收发方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种虚拟现实VR观影中的信息处理方法，其特征在于，包括：
在检测到第一观众的转头动作的情况下，获取目标观众的信息，所述目标观众的信息是根据所述第一观众转头朝向的视野范围确定的；
在检测到所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理；
其中，所述第一观众和所述目标观众处于同一虚拟观影房间且佩戴有VR设备；
所述对所述语音信号的强度进行处理，包括：
在所述第一观众与所述第二观众之间的距离小于第一阈值时，不衰减所述语音信号的强度；
在所述第一观众与所述第二观众之间的距离大于或者等于所述第一阈值且小于或者等于第二阈值时，确定衰减变量，并根据所述衰减变量，对所述语音信号的强度进行衰减处理；
在所述第一观众与所述第二观众之间的距离大于所述第二阈值时，将所述语音信号的强度减小至0分贝；
所述第一阈值小于所述第二阈值。
2.根据权利要求1所述的虚拟现实VR观影中的信息处理方法，其特征在于，所述获取目标观众的信息的步骤之后，还包括：
在所述第一观众的VR设备上显示所述目标观众的转头动画效果。
3.根据权利要求1所述的虚拟现实VR观影中的信息处理方法，其特征在于，所述在所述第一观众与所述目标观众中的至少一个第二观众进行语音交流时，对语音信号的强度进行处理，包括：
在获取到所述第一观众的VR设备和/或所述第二观众的VR设备采集到的语音信号的情况下，判断所述语音信号是否为所述第一观众或者所述第二观众的语音；
在判断所述语音信号为所述第一观众或者所述第二观众的语音的情况下，对所述语音信号的强度进行处理；
在判断所述语音信号不是所述第一观众或者所述第二观众的语音的情况下，在采集所述语音信号的VR设备上提示所述语音信号。
4.根据权利要求1所述的虚拟现实VR观影中的信息处理方法，其特征在于，所述确定衰减变量，包括：
确定第一参数，所述第一参数用于表征电影的播放音量对语音信号的清晰度的影响；
确定第二参数，所述第二参数为所述第一观众和所述第二观众中的发言人的VR设备上的当前播放音量；
根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量。
5.根据权利要求4所述的虚拟现实VR观影中的信息处理方法，其特征在于，所述根据所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数，确定所述衰减变量，包括：
将所述第一观众与所述第二观众之间的距离、所述第一参数和所述第二参数求和，获得第一值；
对所述第一值取自然对数，获得所述衰减变量。
6.根据权利要求4所述的虚拟现实VR观影中的信息处理方法，其特征在于，所述确定第一参数，包括：
获取目标连线与电影屏幕的法线之间的夹角；其中，所述目标连线是所述第一观众和所述第二观众中的发言人与所述电影屏幕中心点之间的连线；
获取所述第一观众和所述第二观众中的发言人与所述电影屏幕的中心点之间的第一距离；
获取第二距离，所述第二距离为所述虚拟观影房间的纵向长度；
根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数。
7.根据权利要求6所述的虚拟现实VR观影中的信息处理方法，其特征在于，所述根据所述夹角、所述第一距离和所述第二距离，确定所述第一参数，包括：
通过公式计算得到第一参数；
其中，Md为第一参数；La指所述第一距离；Ld指第二距离；θ指所述夹角。
8.根据权利要求1所述的虚拟现实VR观影中的信息处理方法，其特征在于，所述获取目标观众信息的步骤之后，还包括以下至少一个步骤：
在接收到所述第一观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第二观众；
在接收到所述第二观众发送的添加联系人请求的情况下，将所述添加联系人请求发送至所述第一观众。
9.一种服务器，包括：收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序；其特征在于，所述处理器，用于读取存储器中的程序实现如权利要求1至8中任一项所述的虚拟现实VR观影中的信息处理方法中的步骤。
10.一种计算机可读存储介质，用于存储计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的虚拟现实VR观影中的信息处理方法中的步骤。
CN202011071782.XA 2020-10-09 2020-10-09 一种虚拟现实vr观影中的信息处理方法及服务器 Active CN112162638B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011071782.XA CN112162638B (zh) 2020-10-09 2020-10-09 一种虚拟现实vr观影中的信息处理方法及服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011071782.XA CN112162638B (zh) 2020-10-09 2020-10-09 一种虚拟现实vr观影中的信息处理方法及服务器

Publications (2)

Publication Number Publication Date
CN112162638A CN112162638A (zh) 2021-01-01
CN112162638B true CN112162638B (zh) 2023-09-19

Family

ID=73866359

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011071782.XA Active CN112162638B (zh) 2020-10-09 2020-10-09 一种虚拟现实vr观影中的信息处理方法及服务器

Country Status (1)

Country Link
CN (1) CN112162638B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106681502A (zh) * 2016-12-14 2017-05-17 深圳市豆娱科技有限公司 一种交互式虚拟现实影院系统及交互方法
CN106774830A (zh) * 2016-11-16 2017-05-31 网易（杭州）网络有限公司 虚拟现实系统、语音交互方法及装置
CN107071529A (zh) * 2017-03-29 2017-08-18 咪咕视讯科技有限公司 一种hls视频播放方法、终端及服务器
WO2018072617A1 (zh) * 2016-10-21 2018-04-26 阿里巴巴集团控股有限公司 一种虚拟现实/增强现实空间环境中的数据对象交互方法及装置
US10045086B1 (en) * 2017-02-09 2018-08-07 Nanning Fugui Precision Industrial Co., Ltd. Interactive system for virtual cinema and method
CN108650500A (zh) * 2018-04-02 2018-10-12 北京奇艺世纪科技有限公司 一种全景视频处理方法及装置
CN208283717U (zh) * 2018-06-15 2018-12-25 南京亚太嘉园智慧空间营造有限公司 一种沉浸式体感互动影院系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102831309A (zh) * 2012-08-17 2012-12-19 广州多益网络科技有限公司 一种虚拟影院交互系统及方法
US10511895B2 (en) * 2015-10-09 2019-12-17 Warner Bros. Entertainment Inc. Cinematic mastering for virtual reality and augmented reality
US10217261B2 (en) * 2016-02-18 2019-02-26 Pinscreen, Inc. Deep learning-based facial animation for head-mounted display
US10848899B2 (en) * 2016-10-13 2020-11-24 Philip Scott Lyren Binaural sound in visual entertainment media
CN109996060B (zh) * 2017-12-30 2021-09-03 深圳多哚新技术有限责任公司 一种虚拟现实影院系统及信息处理方法
US11508128B2 (en) * 2018-09-21 2022-11-22 New York University Shared room scale virtual and mixed reality storytelling for a multi-person audience that may be physically co-located

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018072617A1 (zh) * 2016-10-21 2018-04-26 阿里巴巴集团控股有限公司 一种虚拟现实/增强现实空间环境中的数据对象交互方法及装置
CN106774830A (zh) * 2016-11-16 2017-05-31 网易（杭州）网络有限公司 虚拟现实系统、语音交互方法及装置
CN106681502A (zh) * 2016-12-14 2017-05-17 深圳市豆娱科技有限公司 一种交互式虚拟现实影院系统及交互方法
US10045086B1 (en) * 2017-02-09 2018-08-07 Nanning Fugui Precision Industrial Co., Ltd. Interactive system for virtual cinema and method
CN107071529A (zh) * 2017-03-29 2017-08-18 咪咕视讯科技有限公司 一种hls视频播放方法、终端及服务器
CN108650500A (zh) * 2018-04-02 2018-10-12 北京奇艺世纪科技有限公司 一种全景视频处理方法及装置
CN208283717U (zh) * 2018-06-15 2018-12-25 南京亚太嘉园智慧空间营造有限公司 一种沉浸式体感互动影院系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
沉浸式体验下VR影像的构想;凌颖杰;;艺术品鉴(第02期);99-100 *
虚拟现实技术发展影响下的观众观影体验研究;宋珂;《工业设计》(第四期);140-141 *

Also Published As

Publication number Publication date
CN112162638A (zh) 2021-01-01

Similar Documents

Publication Publication Date Title
US10911882B2 (en) Methods and systems for generating spatialized audio
US11540072B2 (en) Reverberation fingerprint estimation
US11450071B2 (en) Adapting acoustic rendering to image-based object
Schissler et al. Efficient HRTF-based spatial audio for area and volumetric sources
US10979842B2 (en) Methods and systems for providing a composite audio stream for an extended reality world
CN112602053B (zh) 音频装置和音频处理的方法
US20130321566A1 (en) Audio source positioning using a camera
US11503422B2 (en) Mapping virtual sound sources to physical speakers in extended reality applications
US20220137916A1 (en) Audio apparatus, audio distribution system and method of operation therefor
CN112162638B (zh) 一种虚拟现实vr观影中的信息处理方法及服务器
US20220171593A1 (en) An apparatus, method, computer program or system for indicating audibility of audio content rendered in a virtual space
JP2023546839A (ja) 視聴覚レンダリング装置およびその動作方法
Chandak Efficient geometric sound propagation using visibility culling
US20220036075A1 (en) A system for controlling audio-capable connected devices in mixed reality environments
US11533578B2 (en) Virtual environment audio stream delivery
CN115103292A (zh) 虚拟场景中的音频处理方法、装置、电子设备及存储介质
CN117224954A (zh) 游戏处理方法、装置、电子设备及计算机可读存储介质
JP2022141401A (ja) 配信サーバ、配信方法、及びプログラム
BERRY Quality-controlled audio-visual depth in stereoscopic 3D media

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant