CN106528038B - 一种虚拟现实场景下调节音频效果的方法、系统及装置 - Google Patents

Abstract

本发明公开了一种VR场景下调节音频效果的方法、系统及装置，在计算机将VR场景下设置的初始音频同步给真实场景下的各个音箱后，实时监测VR场景下扮演角色的人在真实场景下相对于各个音箱的位置及距离后，根据所监测的人在真实场景下相对于各个音箱的位置距离调整音频效果，同步到各个音箱上。更进一步地，在调整音频效果时，将当前的VR场景下的角色相对于各个音箱的音频效果与VR场景下扮演角色的人在真实场景下相对于各个音箱的音频效果相结合确定音频效果，这样，在VR场景中，针对VR角色在VR场景下的移动位置及在真实场景下的移动位置对音频效果进行调整。

Description

一种虚拟现实场景下调节音频效果的方法、系统及装置

技术领域

本发明涉及计算机的虚拟现实(VR，vatualreality)技术，特别涉及一种VR场景下调节音频效果的方法、系统及装置。

背景技术

随着计算机技术的各种类型应用的增多，出现了VR技术。近年来，VR技术的发展可谓突飞猛进，各种VR场景下的体验游戏应用而生，令游戏爱好者们应接不暇，带给玩家们的视觉和听觉的冲击也是前所未有的。在采用VR技术的VR游戏中，相对于VR画面的迅猛发展，三维、四维甚至是五维的发展令玩家们叹为观止，而声音带给玩家们的感受就稍显逊色了，因此音频在VR游戏中地位也亟待提高，多维度的听觉感受的提升需求也呼之欲出。

当前的VR场景下的音频，一般是在计算机中预设的，音频与视频流是按照时间配比一一对应的，并且在预设的音频中增加各种声音的三维效果。在VR场景下，真实环境中的人与音箱，各个音箱的音频都是通过计算机控制的，音箱本身并不能对音频进行任何处理。除此之外，在VR场景中，真实环境中的人与音箱的位置分布不同，这时计算机在预设VR场景中的音频时会考虑人与音箱的位置分布来增加模拟参数，设置的音频模拟真实场景下声音的目的。

采用上述方式对VR场景下的音频进行设置后，玩家在VR场景下、真实场景中的人与音箱环境中，体验时会遇到如此的情况：第一，玩家在快速切换的VR场景中，能够受到视频画面的不断冲击，而音频却难以如视频那样给角色真实的感觉，听觉感受上总是维度较低，甚至只是简单的三维效果，很难体验如视频带来的震撼。第二，玩家在VR场景下、真实场景中的人与音箱环境中体验时，与连接的各个音箱的位置相对变化，并不能从听觉中体现出来，分布在区域内的各个音箱未能随着玩家在其中的位置距离变化而体现出不同的音频效果，即音箱的音频效果不能动态的去适应VR场景下的角色游戏位置的移动变化。

针对上述问题，玩家可以人为手动的调整音箱的音频参数来增加需要的听觉感受，或人为的移动在真实场景下的各个音箱位置，或在VR场景中移动玩家本身的位置以达到最佳的听觉效果，但是，这些繁琐的工作和步骤，反而会增加VR场景下的游戏本身负担，从而降低VR场景的价值和体验。

综上，在当前的VR场景中，音频大多都是提前预设的，与视频画面是分开的，在VR场景下和在真实场景下，接收的音频是一样的，没有任何区分，并不能随着真实场景中游戏角色的相对移动位置通过音频效果反应出来。

发明内容

有鉴于此，本发明实施例提供一种基于虚拟现实场景下调节音频效果的方法，该方法能够在VR场景中，针对VR角色在VR场景下的移动位置及在真实场景下的移动位置对音频效果进行调整。

本发明实施例还提供一种基于虚拟现实场景下调节音频效果的系统，该系统能够在VR场景中，针对VR角色在VR场景下的移动位置及在真实场景下的移动位置对音频效果进行调整。

本发明实施例还提供一种基于虚拟现实场景下调节音频效果的装置，该系统能够在VR场景中，针对VR角色在VR场景下的移动位置及在真实场景下的移动位置对音频效果进行调整。

根据上述目的，本发明是这样实现的：

一种虚拟现实VR场景下调节音频效果的方法，包括：

计算机将VR场景下设置的初始音频数据同步给真实场景下的各个音箱；

计算机实时监测VR场景下扮演角色的人在真实场景下相对于各个音箱的位置及距离；

计算机根据所监测的人在真实场景下相对于各个音箱的位置距离调整音频效果，同步到各个音箱上。

在所述将VR场景下设置的初始音频数据同步给真实场景下的各个音箱之前，该方法还包括：

计算机预设VR场景下各个音箱的参数，发送给各个音箱，以初始化各个音箱。

所述计算机将VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果。

所述根据所监测的人在真实场景下相对于各个音箱的位置距离调整音频效果，同步到各个音箱上之后，还包括：各个音箱中的每个音箱，根据接收到的音频效果，自适应的调整各自的音频参数。

所述监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果为：采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

一种虚拟现实VR场景下调节音频效果的系统，包括：包括：计算机及多个音箱，所述多个音箱设置在真实场景下的各个角落，其中，

计算机，用于将VR场景下设置的初始音频数据同步给真实场景下的多个音箱；根据所监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果，同步到多个音箱上；

多个音箱，分别用于根据接收到的音频效果，调整各自的音频参数，进行播放。

所述计算机，还用于所述VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果。

所述计算机，还用于所述监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果为：采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

一种虚拟现实VR场景下调节音频效果的装置，包括：包括：监测模块、调整模块及同步模块，其中，

监测模块，用于监测人在真实场景下分别相对于多个音箱的位置距离；

调整模块，用于根据所监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果；

同步模块，用于将VR场景下设置的初始音频数据同步给真实场景下的多个音箱；将调整的音频效果同步到音箱上。

所述同步模块，还用于VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果；

所述同步模块，还用于预设VR场景下多个音箱的参数，以初始化音箱。

在该装置中，所述调整模块，还用于采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

由上述方案可以看出，本发明实施例在计算机将VR场景下设置的初始音频同步给真实场景下的各个音箱后，实时监测VR场景下扮演角色的人在真实场景下相对于各个音箱的位置及距离后，根据所监测的人在真实场景下相对于各个音箱的位置距离调整音频效果，同步到各个音箱上。更进一步地，在调整音频效果时，也基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果，也就是将当前的VR场景下的角色相对于各个音箱的音频效果与VR场景下扮演角色的人在真实场景下相对于各个音箱的音频效果相结合确定音频效果，这样，在VR场景中，针对VR角色在VR场景下的移动位置及在真实场景下的移动位置对音频效果进行调整，以达到自适应的效果，动态实现VR场景下的玩家的听觉感受，从而使得VR场景更加真实。

附图说明

图1为本发明实施例提供的基于VR场景下调节音频效果的方法流程图；

图2为本发明实施例提供的基于VR场景下调节音频效果的系统结构示意图；

图3为本发明实施例提供的基于VR场景下调节音频效果的装置结构示意图；

图4为本发明实施例提供的监测人在真实场景下分别相对于多个音箱的位置距离调整音频效果的示意图；

图5为本发明实施例提供的各个音箱采用自适应方式调整各自的音频参数的结构示意图。

具体实施方式

为使本发明的目的、技术方案及优点更加清楚明白，以下参照附图并举实施例，对本发明作进一步详细说明。

本发明实施例为了解决在VR场景下，由于音频都是预设的，无法区分角色在VR场景下的移动位置及扮演角色的人在真实场景下的移动位置的音频效果，从而使得玩家的体验度不高的问题，采用了在计算机将VR场景下设置的初始音频同步到真实场景下的各个音箱后，实时监测VR场景下扮演角色的人在真实场景下相对于各个音箱的位置及距离后，根据所监测的人在真实场景下相对于各个音箱的位置及距离调整音频效果，同步到各个音箱上。

更进一步地，在调整音频效果时，也基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果，也就是将当前的VR场景下的角色相对于各个音箱的音频效果与VR场景下扮演角色的人在真实场景下相对于各个音箱的音频效果相结合确定音频效果。

这样，在VR场景中，针对VR角色在VR场景下的移动位置及在真实场景下的移动位置对音频效果进行调整，以达到自适应的效果，动态实现VR场景下的玩家的听觉感受，从而使得VR场景更加真实。

图1为本发明实施例提供的基于VR场景下调节音频效果的方法流程图，其具体步骤为：

步骤101、计算机将VR场景下设置的初始音频数据同步给真实场景下的各个音箱；

步骤102、计算机实时监测VR场景下扮演角色的人在真实场景下相对于各个音箱的位置及距离；

步骤103、计算机根据所监测的人在真实场景下相对于各个音箱的位置距离调整音频效果，同步到各个音箱上。

在步骤101之前，该方法还包括：计算机预设VR场景下各个音箱的参数，以初始化各个音箱。也就是说，本方法涉及的是VR场景下、真实场景下中的人与音乐环境中的应用，开始时需要首先预设场景下各音箱的参数，以初始化各个音箱。

在该方法中，计算机将VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果。

在步骤103之后，同步到各个音箱之后，还包括：各个音箱中的每个音箱，根据接收到的音频效果，调整各自的音频参数。在这里，采用各个音箱采用自适应方式调整各自的音频参数，这样，就可以达到VR场景下的多维度音频效果。

在该方法中，当玩家进入游戏时，需要根据不同的VR场景，获取不同的虚拟视频和音频，而原有的初始化音箱参数可以满足玩家的基本听觉需要，而实时的场景变化主要有两种，视频场景的变化和人相对于音箱的位置距离变化，因此需要采集的数据也有两种：1)原有场景下的音频数据：通过计算机将当前的VR场景下的音频数据发送给各个音箱；2)真实场景下的人相对于音箱实时的位置和距离变化：在当前的VR场景下和真实场景下，采集实时的人相对音箱的位置和距离变化是一项重要和前沿的技术。在本发明中，借鉴了足球比赛中计算球员跑动距离的技术实现，在包含人和音箱的区域中，安装多部具有热成像功能的设备，比如高级照相机，并采用这些设备记录得到人在真实场景下的体验的全过程，然后对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离，反馈给位于各个角落的音响。

图2为本发明实施例提供的基于VR场景下调节音频效果的系统结构示意图，包括：计算机及多个音箱，所述多个音箱设置在真实场景下的各个角落，其中，

计算机，用于将VR场景下设置的初始音频数据同步给真实场景下的多个音箱；根据所监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果，同步到多个音箱上；

多个音箱，分别用于根据接收到的音频效果，调整各自的音频参数，进行播放。

在该结构中，所述计算机，还用于所述VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果。

在该结构中，所述计算机还用于预设VR场景下多个音箱的参数，以初始化音箱。

在该结构中，所述计算机，还用于所述监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果为：采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

在该结构中，所述多个音箱中的每个音箱，还用于根据接收到的音频效果，调整各自的音频参数。在这里，采用各个音箱采用自适应方式调整各自的音频参数。

图3为本发明实施例提供的基于VR场景下调节音频效果的装置结构示意图，该装置就是计算机，包括：监测模块、调整模块及同步模块，其中，

监测模块，用于监测人在真实场景下分别相对于多个音箱的位置距离；

调整模块，用于根据所监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果；

同步模块，用于将VR场景下设置的初始音频数据同步给真实场景下的多个音箱；将调整的音频效果同步到音箱上。

在该装置中，所述同步模块，还用于VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果。

在该装置中，所述同步模块，还用于预设VR场景下多个音箱的参数，以初始化音箱。

在该装置中，所述调整模块，还用于采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

具体地说，如图4所示，图4为本发明实施例提供的监测人在真实场景下分别相对于多个音箱的位置距离调整音频效果的示意图：包括多个音箱，即音箱1、音箱2、音箱3、…、音箱n，为多个音箱设置的多部具有热成像功能的设备，即图示中的摄像头1、摄像头2、…、及摄像头n，分别记录人相对于各个音箱的在真实场景下的体验全过程的监测数据，然后将监测数据发送给计算机，由计算机对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

图5为本发明实施例提供的各个音箱采用自适应方式调整各自的音频参数的结构示意图，具体包括：计算机将计算得到的要调整的音频效果，发送给各个音箱，由各个音箱，图示中的音箱1、音箱2、音箱3、音箱4、….、音箱n分别接收到后，自适应调整音频效果，进行播放。

举一个具体实施例对本发明进行详细说明

假设人在VR场景下扮演角色，在真实场景下，安装具有热成像功能的高级照相机多部，VR场景下使用的音箱有5个，编号分别为A1、A2、A3、A4及A5，初始化的音频数据分别为DATA1、DATA2、DATA3、DATA4级DATA5。在VR场景下的游戏开始前，计算机将这些初始化的音频数据发送给各个音箱。

在游戏开始后，在VR场景下，计算机根据特定的统计软件，分别根据监测得到的人相对于各个音箱的位置及距离，得到当前VR场景下的各个音箱的音频效果PDATA1、PDATA2，PDATA3、PDATA4及PDATA5发送给各个音箱。

各个音箱分别接收到音频效果PDATA1、PDATA2，PDATA3、PDATA4及PDATA5后，根据各自的实际情况，自适应的调整各自的音频参数以达到多维度的音频效果。

从上述方案可以看出，本发明使用新的思路来改善玩家的听觉体验，即VR虚拟场景、真实场景中的人与音箱环境中，各个音箱各自采集人的声音和与其的相对位置，并根据这些采集到的数据，进行相应的数据处理，以达到自适应的音频效果，动态的实现了玩家的听觉感受。这种基于VR场景中、真实场景中的人与音箱环境中的音箱实时的采集音频数据并处理数据而自适应技术，能够使体验更加真实舒适，可以一定程度上实现听觉多维度的享受，与视频相结合更加吸引娱乐玩家，提高娱乐的本质，提升玩家的用户体验。

本发明实施例通过对VR场景中的玩家们的听觉冲击来实现提升体验品质，当然在实际的验证中有一些伴随主观的因素，但是在现实中根据VR及游戏产业的发展现状，只要通过合理的多次的科学方法验证，便可以令VR场景下的音频效果的品质提升。本发明实施例提供的方案非常易于实现及推广，适应于目前几乎所有角色体验类的游戏。

以上举较佳实施例，对本发明的目的、技术方案和优点进行了进一步详细说明，所应理解的是，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种虚拟现实VR场景下调节音频效果的方法，其特征在于，包括：

计算机将VR场景下设置的初始音频数据同步给真实场景下的各个音箱；

计算机实时监测VR场景下扮演角色的人在真实场景下相对于各个音箱的位置及距离；

计算机根据所监测的人在真实场景下相对于各个音箱的位置距离调整音频效果，同步到各个音箱上；

所述监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果为：采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

2.如权利要求1所述的方法，其特征在于，在所述将VR场景下设置的初始音频数据同步给真实场景下的各个音箱之前，该方法还包括：

计算机预设VR场景下各个音箱的参数，发送给各个音箱，以初始化各个音箱。

3.如权利要求1所述的方法，其特征在于，所述计算机将VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果。

4.如权利要求1所述的方法，其特征在于，所述根据所监测的人在真实场景下相对于各个音箱的位置距离调整音频效果，同步到各个音箱上之后，还包括：各个音箱中的每个音箱，根据接收到的音频效果，自适应的调整各自的音频参数。

5.一种虚拟现实VR场景下调节音频效果的系统，其特征在于，包括：包括：计算机及多个音箱，所述多个音箱设置在真实场景下的各个角落，其中，

计算机，用于将VR场景下设置的初始音频数据同步给真实场景下的多个音箱；根据所监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果，同步到多个音箱上；

多个音箱，分别用于根据接收到的音频效果，调整各自的音频参数，进行播放；

所述计算机，还用于所述监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果为：采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

6.如权利要求5所述的系统，其特征在于，所述计算机，还用于所述VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果。

7.一种虚拟现实VR场景下调节音频效果的装置，其特征在于，包括：包括：监测模块、调整模块及同步模块，其中，

监测模块，用于监测人在真实场景下分别相对于多个音箱的位置距离；

调整模块，用于根据所监测的人在真实场景下分别相对于多个音箱的位置距离调整音频效果；

同步模块，用于将VR场景下设置的初始音频数据同步给真实场景下的多个音箱；将调整的音频效果同步到音箱上；

所述调整模块，还用于采用安装多部具有热成像功能的设备记录人在真实场景下的体验的全过程，对所述全过程进行分析，得到人在真实场景下相对于各个音箱的位置距离。

8.如权利要求7所述的装置，其特征在于，所述同步模块，还用于VR场景下设置的初始音频数据还包括：基于当前的VR场景下的角色相对于各个音箱的位置及距离设置的音频效果；

所述同步模块，还用于预设VR场景下多个音箱的参数，以初始化音箱。