CN106774891A - 虚拟现实场景的音效产生方法、设备及虚拟现实设备 - Google Patents

虚拟现实场景的音效产生方法、设备及虚拟现实设备 Download PDF

Info

Publication number
CN106774891A
CN106774891A CN201611161849.2A CN201611161849A CN106774891A CN 106774891 A CN106774891 A CN 106774891A CN 201611161849 A CN201611161849 A CN 201611161849A CN 106774891 A CN106774891 A CN 106774891A
Authority
CN
China
Prior art keywords
audio
virtual reality
reality scenario
equipment
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611161849.2A
Other languages
English (en)
Inventor
郭建涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Pico Technology Co Ltd
Original Assignee
Beijing Pico Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Pico Technology Co Ltd filed Critical Beijing Pico Technology Co Ltd
Priority to CN201611161849.2A priority Critical patent/CN106774891A/zh
Publication of CN106774891A publication Critical patent/CN106774891A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/162Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Stereophonic System (AREA)

Abstract

本发明公开了一种虚拟现实场景的音效产生方法、设备及虚拟现实设备。该方法包括:响应于虚拟现实场景的音效输出请求,将音频信号同步输出至第一音频输出设备和第二音频输出设备;通过第一音频输出设备将音频信号输出至扬声器以转换为场景声音播放;通过第二音频输出设备将音频信号输出至振动设备以产生与场景声音同步对应的场景振动。根据本发明,使得用户除了听觉之外还能通过触觉体验虚拟现实场景的声音,获得更立体的声音体验。

Description

虚拟现实场景的音效产生方法、设备及虚拟现实设备
技术领域
本发明涉及虚拟现实技术领域,更具体地,涉及一种虚拟现实场景的音效产生方法、设备及虚拟现实设备。
背景技术
近年来,随着虚拟现实技术的逐步成熟,各种虚拟现实设备陆续出现,例如虚拟现实头盔、虚拟现实眼镜等等,可以提供用户在进行游戏、观看视频、场景互动等各种应用需求下获取虚拟现实的感官体验。
而虚拟现实设备为用户提供人机交互的虚拟现实体验,让用户有身临其境的感觉,除了高品质的画面,声音也是使用户获得良好体验的另一个关键因素。但发明人发现,目前的虚拟现实设备只能输出虚拟现实场景的声音,通过扬声器(例如耳机或者功放等)让用户获取听觉体验,不能为用户提供其它的声音体验,例如,令用户能“触摸”到声音,使得用户从虚拟现实场景得到的声音体验过于单调,不够立体。
因此,发明人认为,有必要针对上述现有技术中存在的问题,进行改进。
发明内容
本发明的一个目的是提供一种用于产生虚拟现实场景产生音效的新技术方案。
根据本发明的第一方面,提供了一种虚拟现实场景的音效产生方法,包括:
响应于虚拟现实场景的音效输出请求,将音频信号同步输出至第一音频输出设备和第二音频输出设备;
通过所述第一音频输出设备将所述音频信号输出至扬声器以转换为场景声音播放;
通过所述第二音频输出设备将所述音频信号输出至振动设备以产生与所述场景声音同步对应的场景振动。
可选地,所述虚拟现实场景的音效产生方法还包括:
响应于虚拟现实场景的音效关闭请求,将音频信号只输出至所述第一音频输出装置以播放场景声音。
可选地,所述虚拟现实场景的音效产生方法还包括:
根据所述音频信号对应的音频文件内容,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
可选地,所述虚拟现实场景的音效产生方法还包括:
响应于外部操作,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
可选地,所述第一音频输出设备为USB Aud i o设备并且所述第二音频输出设备为Speaker设备。
根据本发明的第二方面,提供一种虚拟现实场景的音效产生设备,包括:
输出处理单元,用于响应于虚拟现实场景的音效输出请求,将音频信号同时输出至虚拟现实设备所包含的第一音频输出设备和第二音频输出设备;
第一音频输出设备,用于将所述音频信号输出至扬声器以转换为场景声音播放;
第二声音输出设备,用于将所述音频信号输出至振动设备以产生与所述场景声音同步对应的场景振动。
可选地,所述虚拟现实场景的音效产生设备,还包括:
关闭处理单元,用于响应于虚拟现实场景的音效关闭请求,将音频信号只输出至所述第一音频输出装置以播放场景声音。
可选地,所述虚拟现实场景的音效产生设备,还包括:
请求产生单元,用于根据所述音频信号对应的音频文件内容,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
可选地,所述虚拟现实场景的音效产生设备,还包括:
请求产生单元,用于响应于外部操作,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
根据本发明的第三方面,提供虚拟现实设备,至少包括本发明的第二方面提供的任意一项虚拟现实场景的音效产生设备。
本发明的发明人发现,在现有技术中,尚未提出一种虚拟现实场景的音效产生方法、设备及虚拟现实设备,可以让用户除了通过听觉之外还能让用户通过触感体验虚拟现实场景的场景声音。因此,本发明所要实现的技术任务或者所要解决的技术问题是本领域技术人员从未想到的或者没有预期到的,故本发明是一种新的技术方案。
通过以下参照附图对本发明的示例性实施例的详细描述,本发明的其它特征及其优点将会变得清楚。
附图说明
被结合在说明书中并构成说明书的一部分的附图示出了本发明的实施例,并且连同其说明一起用于解释本发明的原理。
图1是显示可用于实现本发明的实施例的电子设备的硬件配置的例子的框图。
图2示出了本发明的实施例的虚拟现实场景的音效产生方法的流程图。
图3示出了本发明的实施例的虚拟现实场景的音效产生设备的框图。
具体实施方式
现在将参照附图来详细描述本发明的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它例子可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
<硬件配置>
图1是示出可以实现本发明的实施例的电子设备1000的硬件配置的框图。
电子设备1000可以包括处理器1010、存储器1020、接口装置1030、通信装置1040、显示装置1050、输入装置1060、扬声器1070、麦克风1080,等等。其中,处理器1010可以是中央处理器CPU、微处理器MCU等。存储器1020例如包括ROM(只读存储器)、RAM(随机存取存储器)、诸如硬盘的非易失性存储器等。接口装置1030例如包括USB接口、蓝牙接口、耳机接口等。通信装置1040例如能够进行有线或无线通信。显示装置1050例如是液晶显示屏、触摸显示屏等。输入装置1060例如可以包括触摸屏、键盘等。用户可以通过扬声器1070和麦克风1080输入/输出语音信息。
图1所示电子设备1000仅是解释性的,并且决不是为了要限制本发明、其应用或用途。应用于本发明的实施例中,电子设备1000的所述存储器1020用于存储指令,所述指令用于控制所述处理器1010进行操作以执行本发明实施例提供的任意一项虚拟现实场景的音效产生方法。本领域技术人员应当理解,尽管在图1中对电子设备1000都示出了多个装置,但是,本发明可以仅涉及其中的部分装置,例如,电子设备1000只涉及处理器1010和存储器1020等。技术人员可以根据本发明所公开方案设计指令。指令如何控制处理器进行操作,这是本领域公知,故在此不再详细描述。
<实施例>
本发明的总体构思,是提出一种虚拟现实场景的音效产生方案,使得用户在体验虚拟现实场景时,不仅可以通过听觉体验虚拟现实场景的场景声音,还可以通过与场景声音同步的场景振动效果以触感体验感知体验虚拟现实场景的场景声音,使得在虚拟现实场景中得到的声音体验更立体。
因此,本发明中提出一种虚拟现实场景的音效产生方法,如图2所示,包括以下步骤:
步骤S2100,响应于虚拟现实场景的音效输出请求,将音频信号同时输出至第一音频输出设备和第二音频输出设备;
步骤S2200,通过所述第一音频输出设备将所述音频信号输出至扬声器以转换为场景声音播放;
步骤S2300,通过所述第二音频输出设备将所述音频信号输出至振动设备以产生与所述场景声音同步对应的场景振动。
在本实施例中,虚拟现实场景是虚拟显示设备为用户在进行游戏、观看视频或影音内容等虚拟现实应用场景下,为用户提供虚拟现实体验而呈现的场景,通常包括画面、声音,还可能包括气味、温度、湿度等其他场景元素。
通过上述图2所示的方法,可以将构成虚拟现实场景的音频信号,例如利用虚拟现实设备呈现的游戏场景或者电影场景中,构成场景所包含的音频信号,同步输出至第一音频输出设备以及第二音频输出设备,通过第一音频输出设备将音频信号输出至扬声器,以转换为场景声音播放,通过第二音频输出设备将音频信号输出至振动设备,以产生与场景声音同步对应的场景振动,使得用户可以在从听觉体验场景声音时,还可以通过场景振动以触感体验场景声音。
下述将以一个示意性的例子进行说明。例如,呈现虚拟现实场景的虚拟现实设备可以是基于Android系统的虚拟现实头盔,所述扬声器可以是与虚拟现实头盔连接的耳机或者功放设备,振动设备可以是与虚拟现实头盔连接的控制手柄中的马达,实施如图2所示的虚拟现实场景的音效产生方法的设备可以内置在虚拟现实头盔中,而第一声音设备可以是USB Audio设备,第二声音设备可以是Speaker设备。通常Android系统中,USB Audio设备和Speaker设备是相互独立的音频输出设备,不能同时工作,可以通过修改了Android系统的声音系统(audiopolicy系统):当发现USB audio设备可用,将USB audio设备设置USBaudio为音频输出设备的同时,如果判断此时的Speaker设备可用,也将Speaker设备作为音频输出设备,从而同时启用两个音频输出设备。
在上述例子中,在确保同时启用USB Audio设备和Speaker设备后,当有虚拟现实场景的音效需求时,例如,在某个待呈现的虚拟现实场景是游戏里声波攻击场景时,将对应游戏场景中的音频文件中音频信号同步输出至USB Audio设备和Speaker设备,通过UBSAudio设备将音频信号输出至耳机,以便耳机将音频信号转换为场景声音播放,同时,通过Speaker设备将音频信号输出至手柄,以音频信号对应的方波电压信号触发手柄里马达振动,使得用户能通过振动感知场景的声音,配置听到的场景声音,可以得到更真实的声波攻击带来的虚拟现实体验。此外,还可以根据音频信号的幅度对应的设置或调整马达产生的振动,令用户的虚拟现实体验更好。
又例如,在某个待呈现的虚拟现实场景是地震场景时,上述的例子中的虚拟现实设备可以替换成虚拟现实体验仓,振动设备可以是设置在虚拟现实体验仓中的大型振动设备,以便能产生符合地震场景的振动。
上述已经结合例子说明了,本实施例中在响应虚拟现实场景的音效输出请求时,如何产生虚拟现实场景的音效,使得用户可以除了通过听觉,还能通过触感体验场景声音,从虚拟现实场景中得到的声音体验更立体。
而在某些应用场景下,待呈现的虚拟现实场景并不适合呈现上述本实施例中可以提供的虚拟现实场景的音效,例如,仅是呈现风景的虚拟现实场景,或者,用户出于个人需求,并不需要获取上述本实施例中可以提供的虚拟现实场景的音效,而只是需要在虚拟现实场景中听到播放的场景声音。因此,本实施例中所提供的虚拟现实场景的音效产生方法,还可以包括:响应于虚拟现实场景的音效关闭请求,将音频信号只输出至所述第一音频输出装置以播放场景声音。
此外,本实施例中,虚拟现实场景的音效输出请求和虚拟现实场景的音效输出请求,可以根据多种方式产生。在一个例子中,可以根据所述音频信号对应的音频文件内容,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
具体地,音频信号对应的音频文件内容通常构成对应的虚拟现实场景的部分内容,可以预先设置针对某些内容类型范围的虚拟现实场景实施本实施例的音效产生方法,例如,内容类型为游戏时,在需呈现对应类型的虚拟现实场景时,产生虚拟现实场景的音效输出请求,使得可以执行本实施例中的音效产生方法同步播放场景声音和产生与场景声音对应的振动,当切换到呈现其他类型的虚拟现实场景,产生虚拟现实场景的音效关闭请求,只播放虚拟现实场景的场景声音。
在本实施例中,还可以提供操作界面供用户选择是否需要实施本实施例的音效产生方法,例如,提供按钮界面或者勾选界面供用户选择操作。当接收到用户的外部操作是选择需要实施本实施例的音效产生方法时,产生虚拟现实场景的音效输出请求,使得在呈现虚拟现实场景时,可以执行本实施例中的音效产生方法同步播放场景声音和产生与场景声音对应的振动;否则,产生虚拟现实场景的音效关闭请求,使得在呈现虚拟现实场景时,只播放虚拟现实场景的场景声音。因此,本发明的实施例中提供的一种虚拟现实场景的音效产生方法,还可以包括:响应于外部操作,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
并且,在上述本实施例中所描述的虚拟现实场景的音效产生方法中,可选地,所述第一音频输出设备为USB Audio设备并且所述第二音频输出设备为Speaker设备。
以上已经结合例子和图2详细地说明了本实施例中的虚拟现实场景的音效产生方法,通过将音频信号同时输出至第一音频设备和第二音频设备,可以在将音频信号转换为场景声音播放,令用户通过听觉体验虚拟现实场景的同时,还同步产生与场景声音对应的场景振动,令用户可以同步通过触觉体验虚拟现实场景,得到的虚拟现实场景的声音体验更立体。
类似地,本实施例中所提供的虚拟现实场景的音效产生方法,还可以应用于增强现实技术中使得用户获得的增强现实体验中的声音体验更立体,在此不再赘述。
在本实施例中,还提供一种虚拟现实场景的音效产生设备3000,如图3所示,包括输出处理单元3100、第一音频输出设备3200、第二声音输出设备3300,可选地,还可以包括关闭处理单元3400、请求产生单元3500,用于实施本实施例中的虚拟现实场景的音效产生方法,在此不再赘述。
虚拟现实场景的音效产生设备3000,包括:
输出处理单元3100,用于响应于虚拟现实场景的音效输出请求,将音频信号同时输出至虚拟现实设备所包含的第一音频输出设备和第二音频输出设备;
第一音频输出设备3200,用于将所述音频信号输出至扬声器以转换为场景声音播放;
第二声音输出设备3300,用于将所述音频信号输出至振动设备以产生与所述场景声音同步对应的场景振动。
可选地,虚拟现实场景的音效产生设备3000,还包括:
关闭处理单元3400,用于响应于虚拟现实场景的音效关闭请求,将音频信号只输出至所述第一音频输出装置以播放场景声音。
可选地,虚拟现实场景的音效产生设备3000,还包括:
请求产生单元3500,用于根据所述音频信号对应的音频文件内容,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
可选地,虚拟现实场景的音效产生设备3000,还包括
请求产生单元3500,用于响应于外部操作,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
在本实施例中,还提供一种虚拟现实设备,其特征在于,至少包括本实施例中提供的任意一项虚拟现实场景的音效产生设备。具体地,虚拟现实设备可以是虚拟现实头盔。
以上已经结合附图以及例子描述了本发明的实施例,根据本实施例,通过将音频信号同步输出至第一音频输出设备和第二音频设备,通过第一音频设备将音频信号输出至播放设备转换为场景声音播放,使得用户可以通过听觉体验虚拟现实场景,同时通过第二音频输出设备将音频信号输出至振动设备以产生与所述场景声音同步对应的场景振动,使得用户可以同时通过触觉体验虚拟现实场景,从而得到更立体的虚拟现实场景的声音体验。
本领域技术人员应当明白,可以通过各种方式来实现虚拟现实场景的音效产生设备3000。例如,可以通过指令配置处理器来实现虚拟现实场景的音效产生设备3000。例如,可以将指令存储在ROM中,并且当启动设备时,将指令从ROM读取到可编程器件中来实现虚拟现实场景的音效产生设备3000。例如,可以将虚拟现实场景的音效产生设备3000固化到专用器件(例如ASIC)中。可以将虚拟现实场景的音效产生设备3000分成相互独立的单元,或者可以将它们合并在一起实现。虚拟现实场景的音效产生设备3000可以通过上述各种实现方式中的一种来实现,或者可以通过上述各种实现方式中的两种或更多种方式的组合来实现。
本领域技术人员公知的是,随着诸如大规模集成电路技术的电子信息技术的发展和软件硬件化的趋势,要明确划分计算机系统软、硬件界限已经显得比较困难了。因为,任何操作可以软件来实现,也可以由硬件来实现。任何指令的执行可以由硬件完成,同样也可以由软件来完成。对于某一机器功能采用硬件实现方案还是软件实现方案,取决于价格、速度、可靠性、存储容量、变更周期等非技术性因素。因此,对于电子信息技术领域的普通技术人员来说,更为直接和清楚地描述一个技术方案的方式是描述该方案中的各个操作。在知道所要执行的操作的情况下,本领域技术人员可以基于对所述非技术性因素的考虑直接设计出期望的产品。
本发明可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本发明的各个方面。
这里参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是,通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。本发明的范围由所附权利要求来限定。

Claims (10)

1.一种虚拟现实场景的音效产生方法,其特征在于,包括:
响应于虚拟现实场景的音效输出请求,将音频信号同步输出至第一音频输出设备和第二音频输出设备;
通过所述第一音频输出设备将所述音频信号输出至扬声器以转换为场景声音播放;
通过所述第二音频输出设备将所述音频信号输出至振动设备以产生与所述场景声音同步对应的场景振动。
2.根据权利要求1所述的虚拟现实场景的音效产生方法,其特征在于,还包括:
响应于虚拟现实场景的音效关闭请求,将音频信号只输出至所述第一音频输出装置以播放场景声音。
3.根据权利要求1所述的虚拟现实场景的音效产生方法,其特征在于,还包括:
根据所述音频信号对应的音频文件内容,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
4.根据权利要求1所述的虚拟现实场景的音效产生方法,其特征在于,还包括:
响应于外部操作,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
5.根据权利要求1-4任意一项所述的虚拟现实场景的音效产生方法,其特征在于,
所述第一音频输出设备为USB Audio设备并且所述第二音频输出设备为Speaker设备。
6.一种虚拟现实场景的音效产生设备,其特征在于,包括:
输出处理单元,用于响应于虚拟现实场景的音效输出请求,将音频信号同时输出至虚拟现实设备所包含的第一音频输出设备和第二音频输出设备;
第一音频输出设备,用于将所述音频信号输出至扬声器以转换为场景声音播放;
第二声音输出设备,用于将所述音频信号输出至振动设备以产生与所述场景声音同步对应的场景振动。
7.根据权利要求6所述的虚拟现实场景的音效产生设备,其特征在于,还包括:
关闭处理单元,用于响应于虚拟现实场景的音效关闭请求,将音频信号只输出至所述第一音频输出装置以播放场景声音。
8.根据权利要求6所述的虚拟现实场景的音效产生设备,其特征在于,包括:
请求产生单元,用于根据所述音频信号对应的音频文件内容,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
9.根据权利要求6所述的虚拟现实场景的音效产生设备,其特征在于,包括:
请求产生单元,用于响应于外部操作,产生虚拟现实场景的音效输出请求或虚拟现实场景的音效关闭请求。
10.一种虚拟现实设备,其特征在于,至少包括权利要求6-9所述的任意一项虚拟现实场景的音效产生设备。
CN201611161849.2A 2016-12-15 2016-12-15 虚拟现实场景的音效产生方法、设备及虚拟现实设备 Pending CN106774891A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611161849.2A CN106774891A (zh) 2016-12-15 2016-12-15 虚拟现实场景的音效产生方法、设备及虚拟现实设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611161849.2A CN106774891A (zh) 2016-12-15 2016-12-15 虚拟现实场景的音效产生方法、设备及虚拟现实设备

Publications (1)

Publication Number Publication Date
CN106774891A true CN106774891A (zh) 2017-05-31

Family

ID=58891450

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611161849.2A Pending CN106774891A (zh) 2016-12-15 2016-12-15 虚拟现实场景的音效产生方法、设备及虚拟现实设备

Country Status (1)

Country Link
CN (1) CN106774891A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109686161A (zh) * 2017-10-18 2019-04-26 深圳市掌网科技股份有限公司 基于虚拟现实的地震训练方法及系统
CN109999488A (zh) * 2018-12-29 2019-07-12 瑞声科技(新加坡)有限公司 一种振动方法、终端及存储介质
CN110892734A (zh) * 2017-07-10 2020-03-17 索尼公司 信息处理装置、信息处理方法和程序
CN111464913A (zh) * 2020-05-11 2020-07-28 广州橙行智动汽车科技有限公司 车辆的音频播放控制方法及装置、车辆和可读存储介质
CN111466122A (zh) * 2017-10-12 2020-07-28 弗劳恩霍夫应用研究促进协会 用于虚拟现实应用的音频传递优化
CN113010140A (zh) * 2021-03-15 2021-06-22 深圳市慧鲤科技有限公司 一种声音播放方法及装置、电子设备和存储介质
WO2021119993A1 (zh) * 2019-12-17 2021-06-24 瑞声声学科技(深圳)有限公司 控制输出振动信号的方法、装置、计算机设备及存储介质
CN113436489A (zh) * 2021-06-09 2021-09-24 深圳大学 一种基于虚拟现实的留学体验系统及留学体验方法
US11190874B2 (en) 2017-07-10 2021-11-30 Sony Corporation Information processing device and information processing method
CN114870395A (zh) * 2021-02-05 2022-08-09 腾讯科技(深圳)有限公司 游戏场景的终端震动检测方法、装置、介质及设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6448977B1 (en) * 1997-11-14 2002-09-10 Immersion Corporation Textures and other spatial sensations for a relative haptic interface device
CN1599925A (zh) * 2001-10-09 2005-03-23 伊默逊股份有限公司 基于计算机设备的音频输出的触觉反馈感觉
CN204883591U (zh) * 2015-08-19 2015-12-16 天津先驱领域科技有限公司 一种模拟逃生场景的虚拟现实装置
CN105183145A (zh) * 2014-06-09 2015-12-23 伊默森公司 用于通过音频轨道提供触觉效果的触觉设备和方法
CN105472527A (zh) * 2016-01-05 2016-04-06 北京小鸟看看科技有限公司 一种马达矩阵控制方法及一种可穿戴设备
CN105892679A (zh) * 2016-04-28 2016-08-24 乐视控股(北京)有限公司 虚拟现实图像的播放方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6448977B1 (en) * 1997-11-14 2002-09-10 Immersion Corporation Textures and other spatial sensations for a relative haptic interface device
CN1599925A (zh) * 2001-10-09 2005-03-23 伊默逊股份有限公司 基于计算机设备的音频输出的触觉反馈感觉
CN105183145A (zh) * 2014-06-09 2015-12-23 伊默森公司 用于通过音频轨道提供触觉效果的触觉设备和方法
CN204883591U (zh) * 2015-08-19 2015-12-16 天津先驱领域科技有限公司 一种模拟逃生场景的虚拟现实装置
CN105472527A (zh) * 2016-01-05 2016-04-06 北京小鸟看看科技有限公司 一种马达矩阵控制方法及一种可穿戴设备
CN105892679A (zh) * 2016-04-28 2016-08-24 乐视控股(北京)有限公司 虚拟现实图像的播放方法及装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110892734A (zh) * 2017-07-10 2020-03-17 索尼公司 信息处理装置、信息处理方法和程序
US11190874B2 (en) 2017-07-10 2021-11-30 Sony Corporation Information processing device and information processing method
US11228855B2 (en) 2017-07-10 2022-01-18 Sony Corporation Information processing device and information processing method
CN111466122A (zh) * 2017-10-12 2020-07-28 弗劳恩霍夫应用研究促进协会 用于虚拟现实应用的音频传递优化
CN109686161A (zh) * 2017-10-18 2019-04-26 深圳市掌网科技股份有限公司 基于虚拟现实的地震训练方法及系统
CN109999488A (zh) * 2018-12-29 2019-07-12 瑞声科技(新加坡)有限公司 一种振动方法、终端及存储介质
WO2021119993A1 (zh) * 2019-12-17 2021-06-24 瑞声声学科技(深圳)有限公司 控制输出振动信号的方法、装置、计算机设备及存储介质
CN111464913A (zh) * 2020-05-11 2020-07-28 广州橙行智动汽车科技有限公司 车辆的音频播放控制方法及装置、车辆和可读存储介质
CN114870395A (zh) * 2021-02-05 2022-08-09 腾讯科技(深圳)有限公司 游戏场景的终端震动检测方法、装置、介质及设备
CN114870395B (zh) * 2021-02-05 2023-09-15 腾讯科技(深圳)有限公司 游戏场景的终端振动检测方法、装置、介质及设备
CN113010140A (zh) * 2021-03-15 2021-06-22 深圳市慧鲤科技有限公司 一种声音播放方法及装置、电子设备和存储介质
CN113436489A (zh) * 2021-06-09 2021-09-24 深圳大学 一种基于虚拟现实的留学体验系统及留学体验方法

Similar Documents

Publication Publication Date Title
CN106774891A (zh) 虚拟现实场景的音效产生方法、设备及虚拟现实设备
US11514923B2 (en) Method and device for processing music file, terminal and storage medium
US10649729B2 (en) Audio device with auditory system display and methods for use therewith
JP2016123075A (ja) 高帯域幅の触覚効果の音声増幅シミュレーション
CN107168518A (zh) 一种用于头戴显示器的同步方法、装置及头戴显示器
CN105430570B (zh) 播放方法及播放装置
CN107170047A (zh) 虚拟现实场景的更新方法、设备及虚拟现实设备
CN106982249A (zh) 多线程分段下载方法、设备、客户端设备及电子设备
CN105681974A (zh) 多音源切换方法、装置及音频设备
CN107168780A (zh) 虚拟现实场景的加载方法、设备及虚拟现实设备
CN106293221B (zh) 触摸压力控制方法及设备
US20200273249A1 (en) Virtual Scene
CN107230179A (zh) 全景图像的存储方法、展示方法及设备
KR20180012166A (ko) 3d 아바타 기반 화자 변경형 스토리텔링 시스템
CN107959845A (zh) 图像数据传输的方法、装置、客户端装置及头戴显示设备
CN106598245A (zh) 基于虚拟现实的多用户交互控制方法及装置
CN106527700A (zh) 一种声音振动反馈方法和系统及一种虚拟现实头盔
US20230401789A1 (en) Methods and systems for unified rendering of light and sound content for a simulated 3d environment
CN104303132B (zh) 多感官情感表达
CN108305605A (zh) 基于计算机音视频的人机交互数字乐器系统
CN107479692A (zh) 虚拟现实场景的控制方法、设备及虚拟现实设备
JP7064155B2 (ja) コンピュータプログラム、およびコンピュータ装置
CN106385577A (zh) 一种在恢复模式下的分屏显示方法、装置及虚拟现实设备
CN107093209A (zh) 图像处理方法、设备及虚拟现实设备
CN107463808A (zh) 集成在操作系统内的功能模块的调用方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170531

RJ01 Rejection of invention patent application after publication