CN106154231A - 虚拟现实中声场定位的方法 - Google Patents

虚拟现实中声场定位的方法 Download PDF

Info

Publication number
CN106154231A
CN106154231A CN201610626694.9A CN201610626694A CN106154231A CN 106154231 A CN106154231 A CN 106154231A CN 201610626694 A CN201610626694 A CN 201610626694A CN 106154231 A CN106154231 A CN 106154231A
Authority
CN
China
Prior art keywords
virtual reality
sound source
information
source position
position information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610626694.9A
Other languages
English (en)
Inventor
徐小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen Fourier Electronics Co Ltd
Original Assignee
Xiamen Fourier Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen Fourier Electronics Co Ltd filed Critical Xiamen Fourier Electronics Co Ltd
Priority to CN201610626694.9A priority Critical patent/CN106154231A/zh
Publication of CN106154231A publication Critical patent/CN106154231A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
    • G01S5/22—Position of source determined by co-ordinating a plurality of position lines defined by path-difference measurements

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Stereophonic System (AREA)

Abstract

本发明涉及虚拟现实领域，本发明提出了一种虚拟现实中声场定位的方法，在原始的音频信息中加入音源位置信息，佩戴者改变位置后，利用虚拟现实设备的位置传感器获得佩戴者的位置改变信息，根据所述初始音源位置信息和位置改变信息推出新的音源位置信息，并反馈给佩戴者，从而使得佩戴者能体验到位置改变而带来的声场改变，使佩戴者浸入更好的虚拟现实中。

Description

虚拟现实中声场定位的方法
技术领域
本发明涉及虚拟现实领域，尤其涉及一种虚拟现实中声场定位的方法。
背景技术
虚拟现实设备指的是与虚拟现实技术领域相关的硬件产品，是虚拟现实解决方案中用到的硬件设备。现阶段虚拟现实中常用到的硬件设备，大致可以分为四类。它们分别是：1、建模设备(如3D扫描仪)；2、三维视觉显示设备(如3D展示系统、大型投影系统、头戴式立体显示器等)；3、声音设备(如三维的声音系统以及非传统意义的立体声)；4、交互设备(包括位置追踪仪、数据手套、3D输入设备(三维鼠标)、动作捕捉设备、眼动仪、力反馈设备以及其他交互设备)。
在虚拟现实中，虚拟现实设备所营造的大的环境场景是基本固定的，佩戴者戴上头盔后可以把自己代入所营造的环境中。要得到好的沉浸效果，佩戴者所能感受到的音频应该随着游戏者的位置改变而相应调整。比如，佩戴者如果向右转动90度，他之前感觉在正前方的声场(音源位置，比如正在播放的乐器)应该切换到他的正左侧位置。
然而，现有技术中，当佩戴者进行移动时，音源位置没法实时进行改变，无法为佩戴者提供一个较高沉浸度的虚拟现实。
发明内容
本发明的目的在于提供一种虚拟现实中声场定位的方法，能够自动根据使用者位置的改变，而改变大环境的声场位置。
为了实现上述目的，本发明的提出了一种虚拟现实中声场定位的方法，包括步骤：
将原始音源位置信息加载在音频信息中；
虚拟现实设备解析出原始音源位置信息，反馈给佩戴者；
利用虚拟现实设备的位置传感器，获得佩戴者的位置改变信息；
根据所述初始音源位置信息和位置改变信息推出新的音源位置信息，并反馈给佩戴者。
进一步的，在所述的虚拟现实中声场定位的方法中，所述原始音源位置信息包括直线位置信息和垂直位置信息。
进一步的，在所述的虚拟现实中声场定位的方法中，所述音频信息采用I2S格式。
进一步的，在所述的虚拟现实中声场定位的方法中，将所述原始音源位置信息加载在24比特音频信息中音频数码流的高8比特中。
进一步的，在所述的虚拟现实中声场定位的方法中，所述虚拟现实设备通过位置解析模块解析出原始音源位置信息。
进一步的，在所述的虚拟现实中声场定位的方法中，根据原始音源位置信息或新的音源位置信息计算出音源至左耳和右耳的时间差。
进一步的，在所述的虚拟现实中声场定位的方法中，所述新的音源位置信息根据初始音源位置信息和位置改变信息采用三角函数关系推出。
与现有技术相比，本发明的有益效果主要体现在：在原始的音频信息中加入音源位置信息，佩戴者改变位置后，利用虚拟现实设备的位置传感器获得佩戴者的位置改变信息，根据所述初始音源位置信息和位置改变信息推出新的音源位置信息，并反馈给佩戴者，从而使得佩戴者能体验到位置改变而带来的声场改变，使佩戴者浸入更好的虚拟现实中。
附图说明
图1为本发明一实施例中虚拟现实中声场定位的方法的流程图；
图2为本发明一实施例中音源位置变化导致音源位置信息变化的原理图；
图3为本发明一实施例中佩戴者通过耳朵进行声场定位的原理图；
图4为本发明一实施例中虚拟现实中声场定位的方法的结构框图。
具体实施方式
下面将结合示意图对本发明的虚拟现实中声场定位的方法进行更详细的描述，其中表示了本发明的优选实施例，应该理解本领域技术人员可以修改在此描述的本发明，而仍然实现本发明的有利效果。因此，下列描述应当被理解为对于本领域技术人员的广泛知道，而并不作为对本发明的限制。
为了清楚，不描述实际实施例的全部特征。在下列描述中，不详细描述公知的功能和结构，因为它们会使本发明由于不必要的细节而混乱。应当认为在任何实际实施例的开发中，必须做出大量实施细节以实现开发者的特定目标，例如按照有关系统或有关商业的限制，由一个实施例改变为另一个实施例。另外，应当认为这种开发工作可能是复杂和耗费时间的，但是对于本领域技术人员来说仅仅是常规工作。
在下列段落中参照附图以举例方式更具体地描述本发明。根据下面说明和权利要求书，本发明的优点和特征将更清楚。需说明的是，附图均采用非常简化的形式且均使用非精准的比例，仅用以方便、明晰地辅助说明本发明实施例的目的。
本申请是在原始音源的录音中加入音源位置信息，利用虚拟设备(头盔)中的位置传感器得到佩戴者的位置改变信息，将这些位置改变对左右通道的影响计算后再重新调整左右通道信号延迟，使得佩戴者能体验到位置改变而带来的声场改变。
具体的，请参考图1，在本实施例中，提出了一种虚拟现实中声场定位的方法，包括步骤：
S100：将原始音源位置信息加载在音频信息中；
S200：虚拟现实设备解析出原始音源位置信息，反馈给佩戴者；
S300：利用虚拟现实设备的位置传感器，获得佩戴者的位置改变信息；
S400：根据所述初始音源位置信息和位置改变信息推出新的音源位置信息，并反馈给佩戴者。
通常情况下，在进行声场定位时，首先需要进行音频信息的制作，然后将音频信息进行回放，从而虚拟出声场。
人耳要对声场(音源位置)进行定位则必须有至少两通道的声音信息才能够进行定位，即立体声让左右耳(左右通道)均接受信息。在立体声中，人耳主要通过对接收到的左右通道时间差异而分辨音源位置，如图2所示，左耳和右耳接受音源A到发出的声音信号S1、信号S2存在时间差t，从而根据时间差t来判断音源A的大概方位，具体判断原理请参考图3，具体流程请参考图4。
因此，为了确定音源A原始音源位置信息，可将音源A拆分为直线位置信息S00和垂直位置信息S11。其中，所述虚拟现实设备可以通过位置解析模块解析出原始音源位置信息。当佩戴者运动时，利用虚拟现实设备的位置传感器，获得佩戴者的位置改变信息。具体的，佩戴者的转动角度和移动位置由位置传感器给出，加上原始音源位置信息，利用三角函数关系可以推导出新的位置新的音源位置信息，即新的声音信号S1和新的声音信号S2信息。
通常人体左右耳间距离通常为17cm，由三角函数关系，相应的传输到左右耳的信号(S1和S2)可以确定。根据声音在空气中传播速度为340米/秒，可以得出两耳之间时间差t，由时间差t人耳可以感知到音源A的位置。
在虚拟设备中，音频信息在虚拟现实设备中一般式以数字信号形式存在，通常是以I2S格式。在I2S中，可以取其中某些位来记录信息，比如在本实施例中，取24位中的8位作为声场位置信号，例如将所述原始音源位置信息加载在24比特音频信息中音频数码流的高8比特中，记录声场距离佩戴者的位置(直线位置信息S00和垂直位置信息S11)。
由新的声音信号S1和新的声音信号S2，代入声速，可以得出新的时间差t。需要指出这里的时间差t可能为负数，意味左右耳位置调换，可能是佩戴者转向超过180度。通过新的时间差t，佩戴者将获得新位置下声场位置。
综上，在本发明实施例提供的虚拟现实中声场定位的方法中，在原始的音频信息中加入音源位置信息，佩戴者改变位置后，利用虚拟现实设备的位置传感器获得佩戴者的位置改变信息，根据所述初始音源位置信息和位置改变信息推出新的音源位置信息，并反馈给佩戴者，从而使得佩戴者能体验到位置改变而带来的声场改变，使佩戴者浸入更好的虚拟现实中。
上述仅为本发明的优选实施例而已，并不对本发明起到任何限制作用。任何所属技术领域的技术人员，在不脱离本发明的技术方案的范围内，对本发明揭露的技术方案和技术内容做任何形式的等同替换或修改等变动，均属未脱离本发明的技术方案的内容，仍属于本发明的保护范围之内。

Claims (7)

1.一种虚拟现实中声场定位的方法，其特征在于，包括步骤：
将原始音源位置信息加载在音频信息中；
虚拟现实设备解析出原始音源位置信息，反馈给佩戴者；
利用虚拟现实设备的位置传感器，获得佩戴者的位置改变信息；
根据所述初始音源位置信息和位置改变信息推出新的音源位置信息，并反馈给佩戴者。
2.如权利要求1所述的虚拟现实中声场定位的方法，其特征在于，所述原始音源位置信息包括直线位置信息和垂直位置信息。
3.如权利要求2所述的虚拟现实中声场定位的方法，其特征在于，所述音频信息采用I2S格式。
4.如权利要求3所述的虚拟现实中声场定位的方法，其特征在于，将所述原始音源位置信息加载在24比特音频信息中音频数码流的高8比特中。
5.如权利要求1所述的虚拟现实中声场定位的方法，其特征在于，所述虚拟现实设备通过位置解析模块解析出原始音源位置信息。
6.如权利要求1所述的虚拟现实中声场定位的方法，其特征在于，根据原始音源位置信息或新的音源位置信息计算出音源至左耳和右耳的时间差。
7.如权利要求1所述的虚拟现实中声场定位的方法，其特征在于，所述新的音源位置信息根据初始音源位置信息和位置改变信息采用三角函数关系推出。
CN201610626694.9A 2016-08-03 2016-08-03 虚拟现实中声场定位的方法 Pending CN106154231A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610626694.9A CN106154231A (zh) 2016-08-03 2016-08-03 虚拟现实中声场定位的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610626694.9A CN106154231A (zh) 2016-08-03 2016-08-03 虚拟现实中声场定位的方法

Publications (1)

Publication Number Publication Date
CN106154231A true CN106154231A (zh) 2016-11-23

Family

ID=57328693

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610626694.9A Pending CN106154231A (zh) 2016-08-03 2016-08-03 虚拟现实中声场定位的方法

Country Status (1)

Country Link
CN (1) CN106154231A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106708259A (zh) * 2016-12-01 2017-05-24 福建网龙计算机网络信息技术有限公司 一种vr视频的定位方法及系统
CN106993249A (zh) * 2017-04-26 2017-07-28 深圳创维－Rgb电子有限公司 一种声场的音频数据的处理方法及装置
CN107077318A (zh) * 2016-12-14 2017-08-18 深圳前海达闼云端智能科技有限公司 一种声音处理方法、装置、电子设备及计算机程序产品
CN107608519A (zh) * 2017-09-26 2018-01-19 深圳传音通讯有限公司 一种声音调整方法及虚拟现实设备
CN109271016A (zh) * 2017-07-18 2019-01-25 中兴通讯股份有限公司 一种虚拟现实数据处理方法、装置、系统及存储介质
GB2567244A (en) * 2017-10-09 2019-04-10 Nokia Technologies Oy Spatial audio signal processing
CN110085029A (zh) * 2019-05-31 2019-08-02 重庆交通大学 基于轨道式巡检机器人的高速公路巡检系统与方法
WO2019228038A1 (zh) * 2018-05-29 2019-12-05 腾讯科技（深圳）有限公司 定位信息提示方法和装置、存储介质及电子装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101784004A (zh) * 2008-12-16 2010-07-21 索尼株式会社 信息处理系统和信息处理方法
US20100328419A1 (en) * 2009-06-30 2010-12-30 Walter Etter Method and apparatus for improved matching of auditory space to visual space in video viewing applications
CN102436814A (zh) * 2011-09-09 2012-05-02 南京大学 一种低码率立体声音频传输方案
CN103869968A (zh) * 2012-12-07 2014-06-18 索尼公司 功能控制设备和程序
CN104869524A (zh) * 2014-02-26 2015-08-26 腾讯科技（深圳）有限公司 三维虚拟场景中的声音处理方法及装置
CN105509691A (zh) * 2015-11-03 2016-04-20 北京时代拓灵科技有限公司 多传感器组融合的检测方法及支持头部跟踪的环绕声方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101784004A (zh) * 2008-12-16 2010-07-21 索尼株式会社 信息处理系统和信息处理方法
US20100328419A1 (en) * 2009-06-30 2010-12-30 Walter Etter Method and apparatus for improved matching of auditory space to visual space in video viewing applications
CN102436814A (zh) * 2011-09-09 2012-05-02 南京大学 一种低码率立体声音频传输方案
CN103869968A (zh) * 2012-12-07 2014-06-18 索尼公司 功能控制设备和程序
CN104869524A (zh) * 2014-02-26 2015-08-26 腾讯科技（深圳）有限公司 三维虚拟场景中的声音处理方法及装置
CN105509691A (zh) * 2015-11-03 2016-04-20 北京时代拓灵科技有限公司 多传感器组融合的检测方法及支持头部跟踪的环绕声方法

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106708259A (zh) * 2016-12-01 2017-05-24 福建网龙计算机网络信息技术有限公司 一种vr视频的定位方法及系统
CN106708259B (zh) * 2016-12-01 2019-06-25 福建网龙计算机网络信息技术有限公司 一种vr视频的定位方法及系统
CN107077318A (zh) * 2016-12-14 2017-08-18 深圳前海达闼云端智能科技有限公司 一种声音处理方法、装置、电子设备及计算机程序产品
CN106993249B (zh) * 2017-04-26 2020-04-14 深圳创维－Rgb电子有限公司 一种声场的音频数据的处理方法及装置
CN106993249A (zh) * 2017-04-26 2017-07-28 深圳创维－Rgb电子有限公司 一种声场的音频数据的处理方法及装置
US10966026B2 (en) 2017-04-26 2021-03-30 Shenzhen Skyworth-Rgb Electronic Co., Ltd. Method and apparatus for processing audio data in sound field
EP3618462A4 (en) * 2017-04-26 2021-01-13 Shenzhen Skyworth-RGB Electronic Co., Ltd. METHOD AND APPARATUS FOR PROCESSING AUDIO DATA OF A SOUND FIELD
US20190268697A1 (en) * 2017-04-26 2019-08-29 Shenzhen Skyworth-Rgb Electronic Co., Ltd. Method and apparatus for processing audio data in sound field
CN109271016A (zh) * 2017-07-18 2019-01-25 中兴通讯股份有限公司 一种虚拟现实数据处理方法、装置、系统及存储介质
CN107608519A (zh) * 2017-09-26 2018-01-19 深圳传音通讯有限公司 一种声音调整方法及虚拟现实设备
GB2567244A (en) * 2017-10-09 2019-04-10 Nokia Technologies Oy Spatial audio signal processing
WO2019228038A1 (zh) * 2018-05-29 2019-12-05 腾讯科技（深圳）有限公司 定位信息提示方法和装置、存储介质及电子装置
US11241625B2 (en) 2018-05-29 2022-02-08 Tencent Technology (Shenzhen) Company Limited Positioning information prompting method and apparatus, storage medium, and electronic device
CN110085029A (zh) * 2019-05-31 2019-08-02 重庆交通大学 基于轨道式巡检机器人的高速公路巡检系统与方法

Similar Documents

Publication Publication Date Title
CN106154231A (zh) 虚拟现实中声场定位的方法
US11157070B2 (en) Massive simultaneous remote digital presence world
CN114885274B (zh) 空间化音频系统以及渲染空间化音频的方法
JP2020511718A (ja) 拡張現実データを記録するための手法
US9420392B2 (en) Method for operating a virtual reality system and virtual reality system
US20190273990A1 (en) System and method for producing audio data to head mount display device
US11069137B2 (en) Rendering captions for media content
WO2018158499A1 (en) Audio processing
CN114693890A (zh) 一种增强现实交互方法及电子设备
US20220279303A1 (en) Spatial audio for wearable devices
US10841568B2 (en) Method and device to visualize image during operation of ride in amusement park and method and device to manage corresponding device
EP3534241B1 (en) Method, apparatus, systems, computer programs for enabling mediated reality
KR102610825B1 (ko) 사운드 병행 출력을 통한 위치 추적이 가능한 텐저블 사운드 오브젝트 시스템
US20190325649A1 (en) Apparatus for providing virtual reality picture content
JP2023099490A (ja) 周辺デバイストラッキングシステムおよび方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161123

WD01 Invention patent application deemed withdrawn after publication