CN109791770B - 共享三维音频床 - Google Patents

共享三维音频床 Download PDF

Info

Publication number
CN109791770B
CN109791770B CN201780061519.2A CN201780061519A CN109791770B CN 109791770 B CN109791770 B CN 109791770B CN 201780061519 A CN201780061519 A CN 201780061519A CN 109791770 B CN109791770 B CN 109791770B
Authority
CN
China
Prior art keywords
bed
individual
dimensional
audio
new
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780061519.2A
Other languages
English (en)
Other versions
CN109791770A (zh
Inventor
R·N·海特坎普
P·A·埃德里
Z·伊布拉欣
P·J·拉德克
S·维尔森斯
B·C·麦克道尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN109791770A publication Critical patent/CN109791770A/zh
Application granted granted Critical
Publication of CN109791770B publication Critical patent/CN109791770B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/308—Electronic adaptation dependent on speaker or headphone connection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

提供了一种用于支持可用于多个软件应用的共享三维(“3D”)音频床的系统。该系统管理定义3D音频床的多个扬声器对象的床元数据。床元数据还将每个扬声器对象与位置相关联，该位置在一些配置中由三维坐标系定义。床元数据被传送到多个应用。然后，应用可以生成定制3D音频数据，该定制3D音频数据将个体音频流与3D音频床的个体扬声器对象相关联。然后，应用可以将定制3D音频数据传送到3D音频床引擎，这使得利用所选择的空间化技术处理定制3D音频数据并将3D音频数据绘制到输出设备。当空间化技术或输出设备改变时，可以改变3D床的各个方面。

Description

共享三维音频床
背景技术
一些传统软件应用被配置为提供丰富的环绕声体验。例如，视频游戏或媒体播放器可以利用Dolby 5.1环绕声系统产生输出。随着多年来的进步，一些系统现在可以利用涉及越来越多的扬声器布置的不同技术。多年来介绍的各种扬声器布置涉及五个以上的扬声器，并且一些布置可以提供独特的特殊效果。
尽管多年来已经发生了进步，但是当涉及其特征库的多样性时，许多现有系统仍然非常有限。大多数现有系统专注于限于个体平面的扬声器布置。例如，虽然Dolby技术已从5.1升级到7.1及更高，但扬声器布置仍然固定在个体平面上。这种系统在为用户传递完整的环绕声体验方面非常有限。
关于这些和其他考虑，提出了本文所公开的内容。
发明内容
本文公开的技术使得系统能够提供一种共享的三维(“3D”)音频床，其永久可用于从在应用层执行的多个资源接收和绘制定制音频数据。在一些配置中，系统管理定义3D音频床的多个扬声器对象的床元数据。3D音频床的扬声器对象可包括虚拟扬声器或实际扬声器。床元数据还将每个扬声器对象与位置相关联，该位置在一些配置中由三维坐标系定义。床元数据可以被传送到在应用层处执行的多个应用。然后，应用可以生成定制3D音频数据，该定制3D音频数据将个体音频流与3D音频床的个体扬声器对象相关联。然后，应用可以将定制3D音频数据传送到3D音频床引擎，这使得利用诸如Dolby Atmos、HRTF等的所选择的空间化技术处理定制3D音频数据和并将定制3D音频数据绘制到输出设备。
本文公开的技术提供了许多增强用户体验的特征。在一个方面，本文公开的技术允许多个应用共享定制3D音频床。每个应用通过可以将床元数据动态地传达给一个或多个应用的3D床引擎的使用来了解音频床配置，并且3D音频床引擎被配置为从每个应用接收和绘制定制3D音频数据。在一个示意性示例中，3D音频床可包括预定数量的扬声器对象，例如，在固定位置处的16个扬声器。在系统上运行的任意应用都可以在任意时间点向任意扬声器对象发送媒体流，并且扬声器对象始终可用于任意应用，即使在其他应用正在向扬声器对象发送音频数据时。
本文公开的技术还使得应用能够利用多于一个3D音频床配置。在一个示意性示例中，当系统在诸如Dolby Atmos的第一空间化技术下绘制音频数据时，计算系统可以选择具有第一扬声器位置布置的第一3D音频床；当系统在诸如HRTF的第二空间化技术下绘制音频时，系统可以选择具有第二扬声器位置布置的第二3D音频床。因此，当系统在空间化技术之间转换或输出设备之间转换时，系统还可以选择针对所选择的空间化技术或所选输出设备而优化的个体3D床配置。通过允许系统利用具有不同扬声器位置的不同3D音频床，并且将这些变化与应用协调，提供了更丰富，动态的体验，其扩展到限于个体平面的扬声器位置之外。
应当理解，上述主题还可以实现为计算机控制的装置、计算机过程、计算系统、或者诸如计算机可读介质的制品。通过阅读以下具体实施方式和对相关联附图的回顾，这些和各种其他特征将是显而易见的。提供本发明内容是为了以简化的形式介绍概念的选择，这些概念将在下面的具体实施方式中进一步描述。
本发明内容不旨在标识所要求保护的主题的关键特征或必要特征，也不旨在将本发明内容用于限制所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本公开的任意部分中提到的任意或所有缺点的实现。
附图说明
参考附图描述了具体实施方式。在附图中，附图标记的最左边的数字标识首次出现附图标记的图。不同图中的相同附图标记表示相似或完全相同的项目。
图1示出了用于支持共享3D音频床的示例系统。
图2A图示了示出用于支持共享3D音频床的数据的通信的示例场景的第一状态。
图2B图示了示出用于支持共享3D音频床的数据的通信的示例场景的第二状态。
图2C图示了示出用于支持共享3D音频床的数据的通信的示例场景的第三状态。
图2D图示了示出用于支持共享3D音频床的数据的通信的示例场景的第四状态。
图3A图示了共享3D音频床的第一表示。
图3B图示了共享3D音频床的第二表示。
图3C图示了共享3D音频床的第三表示。
图4图示了用于支持共享3D音频床的例程的流程图。
图5是图示了用于能够实现本文给出的技术和技艺的各方面的计算系统的说明性计算机硬件和软件架构的计算机架构图。
具体实施方式
以下具体实施方式公开了使系统能够提供3D音频床(本文也称为“3D床”)的技术和技艺，该3D音频床永久可用于从在应用层处执行的多个资源接收和渲染定制音频数据。在一些配置中，系统管理定义3D音频床的多个扬声器对象的床元数据。3D音频床的扬声器对象包括虚拟扬声器或实际扬声器。床元数据还将每个扬声器对象与位置相关联，该位置在一些配置中由三维坐标系定义。床元数据可以被传送到在应用层执行的多个应用。然后，应用可以生成定制3D音频数据，该定制3D音频数据将个体音频流与3D音频床的个体扬声器对象相关联。然后，应用可以将定制3D音频数据传送到3D音频床引擎，这使得利用诸如Dolby Atmos、HRTF等的所选择的空间化技术处理定制3D音频数据和将定制3D音频数据绘制到输出设备。
本文公开的技术提供了许多用于增强用户体验的特征。在一个方面，本文公开的技术允许多个应用共享定制3D音频床。每个应用通过将床元数据传送到每个应用来了解音频床配置，并且3D音频床引擎被配置为从每个应用接收和绘制定制3D音频数据。在一个示意性示例中，3D音频床可包括预定数量的扬声器对象，例如，在固定位置处的16个扬声器。在系统上运行的任意应用都可以在任意时间点向任意扬声器对象发送媒体流，并且扬声器对象始终可用于任意应用，即使在其他应用正在向扬声器对象发送音频数据时。
本文公开的技术还使应用能够使用多于一个3D床配置。在一个示意性示例中，当系统在诸如Dolby Atmos的第一空间化技术下绘制音频数据时，计算系统可以选择具有第一扬声器位置布置的第一3D音频床；当系统在诸如HRTF的第二空间化技术下绘制音频时，系统可以选择具有第二扬声器位置布置的第二3D音频床。因此，当系统在空间化技术之间转换或输出设备之间转换时，系统还可以选择针对所选择的空间化技术或所选输出设备而优化的各个3D床配置。通过允许系统利用具有不同扬声器位置的不同三维音频床，并且将这些变化与应用协调，提供了更丰富的动态体验，其扩展到限于单个平面的扬声器位置之外。出于示意性目的，空间化技术在本文中也称为用于编码一个或多个音频信号的功能类别。在本公开中，例如，第一类功能可以是HRTF，第二类功能可以是Dolby Atmos，第三类功能可以是基于MICROSOFT的技术等。定义空间化技术的计算机实现的指令使编码器从编码器生成绘制的输出信号到一个或多个端点设备，以产生由一个或多个应用提供的个体音频流的音频输出。
应当理解，上述主题可以实现为计算机控制的装置、计算机过程、计算系统、或者诸如计算机可读存储介质的制品。在许多其他益处中，本文的技术提高了关于各种计算资源的效率。例如，可以改进与设备的人工交互，因为本文公开的技术的使用使得用户能够如它们被预期的听到音频生成的音频信号。此外，改进的人员交互改善了其他计算资源，诸如处理器和网络资源。除了本文提到的那些之外的其他技术效果也可以从本文公开的技术的实现中实现。
虽然在结合计算机系统上的操作系统和应用程序的执行而执行的程序模块的一般上下文中呈现了本文描述的主题，但是本领域技术人员将认识到其他实现可以与其他类型的程序模块结合执行。通常，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、组件、数据结构和其他类型的结构。此外，本领域技术人员将理解，本文描述的主题可以用其他计算机系统配置来实践，包括手持设备、多处理器系统、基于微处理器或可编程的消费电子产品、小型计算机、大型计算机等。
在以下详细描述中，参考形成其一部分的附图，并且其中通过图示的具体配置或示例示出。现在参考附图，其中相同的附图标记在若干附图、用于支持共享的三维音频床的计算系统、计算机可读存储介质和计算机实现的方法的各方面中表示相同的元件。如下面将参考图5更详细地描述的，存在可以体现本文描述的功能和技术的许多应用和模块。
图1是被配置为提供共享的三维音频床的系统100的示意性示例。系统100包括在宿层(sink layer)152处执行的控制器101，用于存储、传送和处理本文描述的音频数据和元数据。控制器101包括3D床引擎111，其被配置为提供3D音频床，3D音频床永久可用于从应用级别的多个资源接收和绘制可定制的音频数据。3D床引擎111被配置为将床元数据175传送到一个或多个应用102。如下面更详细描述的，床元数据175使应用102能够生成根据由床元数据175定义的3D床定制的3D音频数据。3D床引擎111还被配置为从一个或多个应用102接收输入信号，例如，为特定3D床形成的定制3D音频数据。3D床引擎111还可以被配置为处理定制3D音频数据和将定制3D音频数据传送到一个或多个编码器106，其中定制3D音频数据根据所选择的空间化技术(例如，Dolby Atmos、HRTF等)处理，并被绘制给输出设备105。
床元数据175定义3D床的配置。通常，3D床可包括多个扬声器，这些扬声器在本文中也称为扬声器对象。3D床可以为扬声器的布置建模，并且模型可以涉及实际扬声器和/或虚拟扬声器。在一个示例中，床元数据175可以为3D床定义多个扬声器对象，并为每个扬声器对象提供特定的三维坐标。例如，床元数据175可以指示前中心扬声器具有特定位置，例如三维区域的(X，Y，Z)坐标。3D床的其他扬声器对象可以以相同的方式与位置相关联。任意合适的坐标系或用于在三维区域中定义对象的位置的任意其他合适的数据格式可以与本文公开的技术一起使用。在另一示例中，特定扬声器对象的位置可以基于矢量数据。
床元数据175还可以定义关于每个扬声器对象的属性。例如，床元数据175可以指示扬声器对象被配置为根据特定形状或模式运行、例如、全向、双向、心形、抛物线、霰弹枪等。床元数据175还可以指示，除了其他属性之外，扬声器对象的方向。
3D床引擎111可以配置有接口112，用于与在应用层151处执行的任意数量(N个)的应用102传送床元数据175和其他数据。如图2A所示，床元数据175可以被推送到个体应用102，或者床元数据175可以响应于接收来自应用102的查询174而被传送到应用102。为了说明的目的，一些示例应用102在本文中个体称为第一应用102A、第二应用102B和第三应用102C。个体应用102还可以包括用于执行被配置为执行本文公开的技术的代码的一个或多个预处理器。
应用102可以包括被配置为处理基于对象的音频(本文也称为“3D床音频”和“3D对象音频”)和/或基于声道的音频(在本文中也称为“2D床音频”)的任意可执行代码。应用102的示例可以包括但不限于媒体播放器、网络浏览器、视频游戏、虚拟现实应用和通信应用。应用102还可以包括生成系统声音的操作系统的组件。
除了提供用于与用户交互的功能之外，应用102还可以将一个或多个操作应用于基于对象的音频，包括但不限于一个或多个折叠操作和共同定位操作，其可以涉及将多个对象组合成一个对象。在另一示例中，应用102可以利用一个或多个剔除操作，其可以涉及一个或多个所选择的音频对象的消除。
应用102可以生成根据床元数据175定制的3D音频数据。在一个示意性示例中，如果第一应用102A是生成具有300个音频对象的基于原始对象的音频数据的视频游戏，并且床元数据175定义了在三维区域的特定位置处具有10个扬声器的3D床，则应用102A可以处理300个音频对象，例如折叠、共同定位和/或过滤对象，以适当地将原始音频数据的个体或组合音频流与具10个扬声器及其相应的位置相关联。应用102可以生成包含音频数据的定制3D音频数据176以及将音频流与一个或多个扬声器对象相关联的其他定义。如图2B所示，定制3D音频数据176可以经由接口112从每个应用102传送到3D床引擎111。
如图2C所示，除了从个体应用102接收音频数据之外，个体应用102内的组件(例如，源A 133A和源B 133B)还可以单独地生成根据床元数据配置的音频数据。例如，如果第三应用102C是视频游戏，并且视频游戏具有一个用于背景音乐的音频源133A和用于声音效果的另一个音频源133B，则每个源可以生成定制3D音频数据175并将定制3D音频数据175传送到3D床引擎111。
上述功能可以由应用102的模块执行，或者应用可以与用于执行所述功能的预处理器相关联，或者可以包括用于执行所述功能的预处理器。在一些配置中，系统100可以包括在应用层151和宿层152之间的预处理器层，其包括被配置为与应用和3D床引擎111通信的一个或多个预处理器。包括用作应用102和3D床引擎111之间的接口的预处理器的配置可用于从应用102和3D床引擎111卸载计算任务的部分。
控制器101可包括合适数量(N)的编码器106。为了说明的目的，一些示例编码器106在本文中单独地被称为第一编码器106A、第二编码器106B和第三编码器106C。编码器106可以与合适数量(N)的输出设备105相关联。为了说明的目的，一些示例输出设备105在本文中单独地称为第一输出设备105A、第二输出设备105B、第三输出设备105C。提供该示例系统100是出于示意性目的，而不应被解释为限制。可以理解，系统100可以包括比图1中所示的组件更少或更多的组件。
编码器106被配置为根据一个或多个选择的空间化技术处理基于声道的音频和基于对象的音频。由编码器106生成的绘制流可以被传送到一个或多个输出设备105。在本文也称为“端点设备”的输出设备105的示例包括但不限于扬声器系统和耳机。编码器106和/或输出设备105可以被配置为利用诸如Dolby Atmos、HRTF等的一种或多种空间化技术。
编码器106还可以实现其他功能，诸如一种或多种回声消除技术。这些技术有利于在应用环境之外进行选择和利用，因为个体应用不具有其他应用的任意上下文，因此不能确定何时应该使用回声消除和其他类似技术。
如上所述，本文公开的技术还使应用102能够使用多于一个3D床配置。在一个示意性示例中，当系统在诸如Dolby Atmos的第一空间化技术下绘制音频时，系统100可以选择具有第一扬声器位置布置的第一3D音频床；并且当系统在诸如HRTF的第二空间化技术下绘制音频时，系统100可以选择具有第二扬声器位置布置的第二3D音频床。因此，当系统在空间化技术之间转换或不同输出设备之间转换时，系统100还可以选择针对所选择的空间化技术和/或输出设备而优化的个体3D床配置。
在一些配置中，系统100可以基于一个或多个动作在第一空间化技术和第二空间化技术之间转换。例如，如果用户如果系统100在HRTF下绘制音频，并且用户插入DolbyAtmos扬声器系统或Dolby Atmos耳机，则系统可以从HRTF空间化技术转换到Dolby Atmos空间化技术。当系统100检测到不同空间化技术之间的转换时，系统可以选择最适合于所选空间化技术的3D音频床配置。为了促进这样的配置，系统100可以将不同的3D音频床配置与个体的空间化技术和/或诸如专用耳机或扬声器系统的特定的端点设备相关联。当发生这种转换时，如图2C所示，3D床引擎111可以将来自3D床引擎111的新床元数据175传送到一个或多个应用102。新床位元数据175的接收使得每个应用生成新的定制3D音频数据，新的定制3D音频数据将个体音频流与新床元数据175中定义的扬声器位置相关联。如图2D所示，每个应用102然后可以经由接口112将新的定制3D音频数据传送到3D床引擎111。
现在参考图3A-3C，下面示出并描述了示出示例3D音频床的各种配置的图示。图3A示出了具有多个扬声器对象301-303的第一3D音频床300A。每个扬声器对象与三维区域内的特定位置相关联。例如，特定扬声器对象可以具有由X、Y和Z值指定的位置。在该示例中，第一3D音频床300A包括围绕平面的周边定位的多个扬声器对象302A-302H。在该示例中，第一扬声器对象302A是右前扬声器对象，第二扬声器对象302B是前中央扬声器，第三扬声器对象302C是左前扬声器。其他扬声器对象302D-302H包括平面内的周围扬声器位置。第一3D音频床300A还包括位于平面下方的多个扬声器301A-301D，以及位于该平面上方的多个扬声器303A-303D。
3D床引擎111被配置为接收与个体扬声器位置相关联的音频流“信号”。3D床引擎111可以立即从多个应用102接收用于个体扬声器对象的音频流。例如，参考图3A，3D床引擎111可以为扬声器对象301-303中的每一个从多个应用102接收音频信号。该特征使得每个应用能够利用3D音频床300A的所有方面而无需隔离某些应用102使用这些资源。
床元数据175可用于定义与每个扬声器对象301-303相关联的属性，其包括每个扬声器对象的位置、每个扬声器对象的形状、每个扬声器对象的方向等。床元数据175可以被传送到一个或多个应用102，以使应用102能够将音频流与每个扬声器对象相关联。例如，应用和/或预处理器可以将一个或多个基于对象的音频轨道与第一3D音频床300A的一个或多个扬声器对象相关联。可以使用许多不同的技术来建立关联。
如上所述，系统100可以针对不同场景使用不同的3D音频床配置。例如，3D床引擎111可以利用具有特定空间化技术的第一3D音频床300A(图3A)。当系统100利用另一种空间化技术时，系统100可以转换到另一种3D音频床配置，诸如第二3D音频床300B(图3B)。这种类型的转换使系统100能够利用对于特定空间化技术而言最佳的3D音频床配置。当系统转换到新的输出设备时，可能会发生相同的转换。例如，当系统100从扬声器系统转换到耳机时，3D床引擎111可以从第一3D床配置转换到第二3D床配置。提供本文公开的示例是为了说明的目的，而不应解释为限制。可以理解，不同3D音频床配置之间的转换可以包括转换到具有完全不同布局的不同数量的扬声器的3D音频床配置。例如，系统100可以从图3A中所示的第一3D音频床300A转换到图3C中所示的第三3D音频床300C。
在上述示意性示例中，与第一配置(图3A)的扬声器对象相比，第二配置(图3B)的一些扬声器对象处于不同的位置。除了提供不同的位置之外，每个配置还可以关联每个扬声器对象的不同属性，例如，不同的形状属性、不同的方向等。如图3C所示，诸如第三3D音频床300C的其他3D音频床配置可以包括不同数量的扬声器对象。因此，当系统转换到不同的空间化技术或转换到不同的输出设备时，系统可以转换到具有任意合适数量的扬声器对象和任意合适数量的相关属性的新3D音频床。
现在转向图4，示出并描述了用于支持共享三维音频床的例程400的各方面。应该理解的是，本文公开的方法的操作不一定以任意特定的顺序呈现，并且以可替换的顺序执行一些或所有操作是可能的并且是可预期的。为了便于描述和说明，已经以示出的顺序呈现了操作。在不脱离所附权利要求的范围的情况下，可以添加、省略和/或同时执行操作。
还应该理解，所示方法可以在任意时间结束，并且不需要完整地执行。可以通过包括在计算机存储介质上的计算机可读指令的执行来执行方法的一些或所有操作和/或基本等同的操作，如下面所定义的。如在说明书和权利要求中使用的术语“计算机可读指令”及其变体在本文中被广泛使用，以包括例程、应用、应用模块、程序模块、程序、组件、数据结构、算法等。计算机可读指令可以在各种系统配置上实现，包括单处理器或多处理器系统、小型计算机、大型计算机、个人计算机、手持计算设备、基于微处理器、可编程消费电子产品、其组合等。
因此，应当理解，本文描述的逻辑操作被实现为(1)作为在计算系统上运行的计算机实现的动作或程序模块的序列和/或(2)作为计算系统内的互连机器逻辑电路或电路模块。实现是一个选择问题，取决于计算系统的性能和其他要求。因此，本文描述的逻辑操作被不同地称为状态、操作、结构设备、动作或模块。这些操作、结构设备、动作和模块可以用软件、固件、专用数字逻辑及其任意组合来实现。
例如，例程400的操作在本文中被描述为至少部分地由应用、组件和/或电路实现，诸如3D床引擎111。在一些配置中，资源管理器190可以是动态链接库(DLL)、静态链接库、由应用编程接口(API)产生的功能、编译程序、解释程序、脚本或任意其他可执行指令集。数据和/或模块、3D床引擎111可以存储在一个或多个存储器组件中的数据结构中。可以通过寻址对数据结构的链接或引用来从数据结构中取回数据。
尽管以下说明涉及图1和图5的组件，但是可以理解，例程400的操作也可以以许多其他方式实现。例如，例程400可以至少部分地由另一个远程计算机的处理器或本地电路实现。另外，例程400的一个或多个操作可以替代地或附加地至少部分地由个体工作或与其他软件模块一起工作的芯片组实现。适合于提供本文公开的技术的任意服务、电路或应用可以用于本文描述的操作中。
参考图4，例程400开始于操作401，其中3D床引擎111将3D床元数据175传送到多个应用102。如上所述，3D床元数据175定义用于三维音频床中的多个扬声器对象的个体扬声器对象的位置。床元数据175还可以定义关于每个扬声器对象的属性。例如，床元数据175可以指示扬声器对象被配置为根据特定形状或模式运行，例如，全向、双向、心形、抛物线、霰弹枪等。床元数据175还可以指示，除了其他属性(也称为“特性”)，扬声器对象的方向。
在操作403，3D床引擎111选择空间化技术。在一些配置中，可以基于编码器或输出设备的能力来选择空间化技术。例如，如果编码器配置为适应Dolby Atmos空间化技术，则资源管理器可以选择Dolby Atmos空间化技术。在一些配置中，可以基于一个或多个偏好来选择空间化技术。例如，当耳机可用时，用户可以指示在扬声器系统上使用耳机的偏好。如果耳机被配置为适应特定的空间化技术，诸如HRTF，并且耳机被插入系统100，则可以选择特定的空间化技术。提供这些实施例是为了说明的目的，不应解释为限制。
接下来，在操作405，3D床引擎111接收符合床元数据175的定制3D音频数据176。在一些配置中，当应用102接收3D床元数据175时，它们将具有多个音频流(诸如媒体文件或视频游戏的基于对象的音频)的原始形式的基于对象的音频数据处理成定制3D音频数据176，该定制3D音频数据176将音频流与3D床元数据175中定义的扬声器对象相关联。应用可以使用多种不同技术(例如，折叠和共同定位音频对象)处理原始形式的基于对象的音频数据，以生成将个体音频流与3D床元数据175中定义的扬声器对象相关联的定制3D音频数据176。在一个示意性示例中，第一应用102A、第二应用102B以及第三应用102C的第一源133A和第二源133B均可以各自将音频流与图3A中所示的第一3D音频床300A的个体扬声器对象相关联。定义关联的定制3D音频数据176可以用音频流与从应用102被传送到3D床引擎111。
在操作405中，3D床引擎111将从应用102接收的音频流混合以用于个体扬声器对象。例如，第一应用102A、第二应用102B以及第三应用102C的第一源133A和第二源133B可以各自发送用于3D音频床的个体扬声器对象的音频流，并且3D床引擎111混合每个扬声器对象的音频流以生成混合音频数据178。在将音频数据发送到编码器106以进行渲染之前，为每个扬声器对象混合音频流有助于将一些处理资源从编码器106移开。
在操作407，3D床引擎111使得编码器106使用所选择的空间化技术从混合音频数据178生成绘制音频。在操作407中可以使用任意合适的空间化技术。此外，操作407还可以包括用于下载被配置为实现所选择的空间化技术的软件的过程。在一些配置中，一个或多个编码器106可以利用所选择的空间化技术来生成空间编码流，例如，绘制音频。
接下来，在操作409，3D床引擎111使得绘制音频到端点设备的传送。例如，绘制音频可以传送到扬声器系统或耳机。在操作409中，3D床引擎111还可以将2D音频与绘制音频组合。从编码器到一个或多个端点设备的绘制输出信号的传送产生了产生个体音频流的音频输出。端点设备产生个体音频流的音频输出(可听波形)，其中个体音频流的音频输出(例如，实际声音内容)从与个体音频流相关联的个体扬声器对象的位置发出。在端点设备包括物理扬声器作为扬声器对象的输出的配置中，与该扬声器对象相关联的音频流的音频输出从物理扬声器发出。在扬声器对象与具有相关位置的虚拟扬声器相关联的配置中，与该扬声器对象相关联的音频流的音频输出听起来好像它是从虚拟扬声器的位置发出。出于示意性目的，从个体扬声器对象的位置发出的个体音频流的音频输出意味着从物理扬声器发出的音频输出或被配置为模拟从虚拟扬声器发出的输出的音频输出。
接下来，在操作411，3D床引擎111可以接收指示系统100中的变化的上下文数据。例如，上下文数据可以包括一个或多个改变的偏好、指示空间化技术的更新能力的数据、指示编码器的更新能力的数据、或指示一个或多个端点设备的更新能力的数据。例如，当用户插入被配置为适应特定空间化技术的新耳机时或者当用户或系统100提供改变空间化技术的命令时，可以发生操作411。在这样的示例中，3D床引擎111可以选择新的3D床并因此选择定义新3D床的各方面的新床元数据175。在其他示例中，对计算机的更新可以包括空间化技术的一个或多个更新的组件，例如，功能的类别。功能的类别可以与一个或多个特征相关联，诸如对象数量的限制、处理音频数据的方式等。对空间化技术的更新可以包括对一个或多个参数的更新，诸如空间化技术可以同时处理的对象的数量，或者将个体音频流编码成音频输出的方法中的改变。
当在操作411中选择新的3D床时，例程400返回到操作405，其中编码器使用新的3D床生成绘制音频。进而，例程400继续到其他操作，其中为新3D床生成的绘制音频被传送到一个或多个端点设备。可以理解，例程400可以继续通过操作405和411，以在系统100的偏好和/或能力改变时动态地改变所选择的3D床。
图5示出了能够执行本文描述的程序组件的诸如例如计算设备101(图1)的计算机的示例计算机架构500的附加细节。因此，图5中所示的计算机架构500示出了用于服务器计算机、移动电话、PDA、智能电话、台式计算机、上网本计算机、平板计算机和/或膝上型计算机的架构。计算机架构500可用于执行本文呈现的软件组件的任意方面。
图5中所示的计算机架构500包括中央处理单元502(“CPU”)、系统存储器504、包括随机存取存储器506(“RAM”)和只读存储器(“ROM”)508、以及将存储器504耦合到CPU 502的系统总线510。包含有助于诸如在启动期间在计算机架500内的元件之间传送信息的基本例程的基本输入/输出系统存储在ROM中。计算机架构500还包括用于存储操作系统507、一个或多个应用102、资源管理器190、3D床引擎111以及其他数据和/或模块的大容量存储设备512。
大容量存储设备512通过连接到总线510的大容量存储控制器(未示出)连接到CPU502。大容量存储设备512及其相关的计算机可读介质为计算机架构500提供非易失性存储装置。虽然本文包含的计算机可读介质的描述是指大容量存储设备，诸如固态驱动器、硬盘或CD-ROM驱动器，但是本领域技术人员应该理解计算机可读介质可以是计算机架构500可以访问的任意可用的计算机存储介质或通信介质。
通信介质包括诸如载波或其他传输机制的调制数据信号中的计算机可读指令、数据结构、程序模块或其他数据，并且包括任意传送介质。术语“调制数据信号”表示以对信号中的信息进行编码的方式改变或设置其一个或多个特性的信号。作为示例而非限制，通信介质包括诸如有线网络或直接有线连接的有线介质，以及诸如声学、RF、红外和其他无线介质的无线介质。上述任意组合也应包括在计算机可读介质的范围内。
作为示例而非限制，计算机存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据的信息的任意方法或技术实现的易失性和非易失性、可移动和不可移动介质。例如、计算机介质包括但不限于RAM、ROM、EPROM、EEPROM、闪存或其他固态存储器技术、CD-ROM、数字通用盘(“DVD”)、HD-DVD、BLU-RAY。或其他光学存储器、磁带盒、磁带、磁盘存储器或其他磁存储设备、或可用于存储所需信息并且可由计算机架构500访问的任意其他介质。出于权利要求的目的，短语“计算机存储介质”、“计算机可读存储介质”及其变体不包括波、信号和/或其他暂时和/或无形通信介质本身。
根据各种配置，计算机架构500可以使用通过网络556和/或另一网络(未示出)到远程计算机的逻辑连接在联网环境中操作。计算机架构500可以通过连接到总线510的网络接口单元514连接到网络556。应当理解，网络接口单元514也可以用于连接到其他类型的网络和远程计算机系统。计算机架构500还可以包括输入/输出控制器516，用于接收和处理来自多个其他设备的输入，包括键盘、鼠标或电子笔(图5中未示出)。类似地，输入/输出控制器516可以向显示屏、打印机或其他类型的输出设备(也未在图5中示出)提供输出。
应当理解，本文描述的软件组件在被加载到CPU 502中并且被执行时，可以将CPU502和整个计算机架构500从通用计算系统变换为定制为促进本文呈现的功能的专用计算系统。CPU 502可以由任意数量的晶体管或其他分立电路元件构成，其可以个体地或共同地呈现任意数量的状态。更具体地，响应于包含在本文公开的软件模块内的可执行指令，CPU502可以作为有限状态机操作。这些计算机可执行指令可以通过指定CPU 502如何在状态之间转换来变换CPU 502，从而变换晶体管或构成CPU 502的其他分立硬件元件。
对本文呈现的软件模块进行编码还可以变换本文呈现的计算机可读介质的物理结构。在本说明书的不同实施方式中，物理结构的特定变换可取决于各种因素。这些因素的示例可以包括但不限于用于实现计算机可读介质的技术，计算机可读介质是否被表征为主存储器或辅助存储器等。例如，如果计算机可读介质被实现为基于半导体的存储器，则可以通过变换半导体存储器的物理状态将本文公开的软件编码在计算机可读介质上。例如，软件可以变换构成半导体存储器的晶体管、电容器或其他分立电路元件的状态。该软件还可以转换这些组件的物理状态，以便在其上存储数据。
作为另一示例，本文公开的计算机可读介质可以使用磁或光技术来实现。在这样的实现中，当在其中编码软件时，本文呈现的软件可以变换磁性或光学介质的物理状态。这些变换可以包括改变给定磁介质内的特定位置的磁特性。这些变换还可以包括改变给定光学介质内的特定位置的物理特征或特性，以改变那些位置的光学特性。在不脱离本说明书的范围和精神的情况下，物理介质的其他变换是可能的，其中提供的前述示例仅用于促进该讨论。
鉴于以上所述，应当理解，在计算机架构500中发生了许多类型的物理变换，以便存储和执行本文给出的软件组件。还应当理解，计算机架构500可以包括其他类型的计算设备，包括手持式计算机、嵌入式计算机系统、个人数字助理以及本领域技术人员已知的其他类型的计算设备。还想到计算机架构500可以不包括图5中所示的所有组件，可以包括未在图5中明确示出的其他组件，或者可以利用与图5中所示的完全不同的架构。
最后，尽管已经用结构特征和/或方法动作专用的语言描述了各种配置，但是应该理解，所附表示中定义的主题不必限于所描述的特定特征或动作。相反，公开了特定特征和动作作为实现所要求保护的主题的示例形式。

Claims (20)

1.一种计算设备，包括：
处理器；
计算机可读存储介质，与所述处理器通信，所述计算机可读存储介质具有存储在其上的计算机可执行指令，所述计算机可执行指令在由所述处理器执行时，使得所述处理器：
将三维床元数据传送到多个应用，所述三维床元数据定义三维音频床中的多个扬声器对象中的个体扬声器对象的位置；
从所述多个应用的个体应用接收定制三维音频数据，所述定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述定制三维音频数据将个体音频流与所述个体扬声器对象相关联；
选择用于绘制所述定制三维音频数据的空间化技术；
使得编码器生成所述定制三维音频数据的绘制输出信号，其中所述绘制输出是根据所述空间化技术而被生成的；以及
使得所述绘制输出信号从所述编码器传送到一个或多个端点设备，以用于产生所述个体音频流的音频输出，其中所述个体音频流的所述音频输出从与所述个体音频流相关联的所述个体扬声器对象的所述位置发出。
2.根据权利要求1所述的计算设备，其中所述计算机可执行指令还使得所述处理器：
接收指示对新空间化技术的选择的上下文数据；
响应于接收到指示对所述新空间化技术的选择的所述数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的所述个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据所述新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
3.根据权利要求1所述的计算设备，其中所述计算机可执行指令还使得所述处理器：
接收指示对新端点设备的选择的上下文数据；
响应于接收到指示对所述新端点设备的选择的所述数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据所述空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述新端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
4.根据权利要求1所述的计算设备，其中所述床元数据还定义与所述多个扬声器对象中的所述个体扬声器对象相关联的形状，其中所述绘制输出信号至少部分地基于所述形状而被修改。
5.根据权利要求1所述的计算设备，其中所述床元数据还定义与所述多个扬声器对象中的所述个体扬声器对象相关联的方向，其中所述绘制输出信号至少部分地基于所述方向而被修改。
6.根据权利要求1所述的计算设备，其中所述计算机可执行指令还使得所述处理器：
接收指示与所述编码器或所述一个或多个端点设备中的至少一项相关联的用户偏好的上下文数据；
响应于接收到所述上下文数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
7.根据权利要求1所述的计算设备，其中所述计算机可执行指令还使得所述处理器：
接收指示对所述空间化技术的更新的上下文数据，所述更新包括能够被处理的音频对象的数量或者所述个体音频流被编码成音频输出的方法中的改变；
响应于接收到所述上下文数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
8.一种非暂态计算机可读存储介质，具有存储在其上的计算机可执行指令，所述计算机可执行指令在被计算设备的一个或多个处理器执行时使得所述计算设备的所述一个或多个处理器：
将三维床元数据传送到多个应用，所述三维床元数据定义三维音频床中的多个扬声器对象中的个体扬声器对象的位置；
从所述多个应用的个体应用接收定制三维音频数据，所述定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述定制三维音频数据将个体音频流与所述个体扬声器对象相关联；
选择用于绘制所述定制三维音频数据的空间化技术；
使得编码器生成所述定制三维音频数据的绘制输出信号，其中所述绘制输出是根据所述空间化技术而被生成的；以及
使得所述绘制输出信号从所述编码器传送到一个或多个端点设备，以用于产生所述个体音频流的音频输出，其中所述个体音频流的所述音频输出从与所述个体音频流相关联的所述个体扬声器对象的所述位置发出。
9.根据权利要求8所述的非暂态计算机可读存储介质，其中所述指令还使得所述一个或多个处理器：
接收指示对新空间化技术的选择的上下文数据；
响应于接收到指示对所述新空间化技术的选择的所述数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据所述新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
10.根据权利要求8所述的非暂态计算机可读存储介质，其中所述指令还使得所述一个或多个处理器：
接收指示对新端点设备的选择的上下文数据；
响应于接收到指示对所述新端点设备的选择的所述数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据所述空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述新端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
11.根据权利要求8所述的非暂态计算机可读存储介质，其中所述床元数据还定义与所述多个扬声器对象中的个体扬声器对象相关联的形状，其中所述绘制输出信号至少部分地基于所述形状而被修改。
12.根据权利要求8所述的非暂态计算机可读存储介质，其中所述床元数据还定义与所述多个扬声器对象中的个体扬声器对象相关联的方向，其中所述绘制输出信号至少部分地基于所述方向而被修改。
13.根据权利要求8所述的非暂态计算机可读存储介质，其中所述指令还使得所述一个或多个处理器：
接收指示与所述编码器或所述一个或多个端点设备中的至少一项相关联的用户偏好的上下文数据；
响应于接收到所述上下文数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
14.根据权利要求8所述的非暂态计算机可读存储介质，其中所述指令还使得所述一个或多个处理器：
接收指示对所述空间化技术的更新的上下文数据，所述更新包括能够被处理的音频对象的数量或者所述个体音频流被编码成音频输出的方法中的改变；
响应于接收到所述上下文数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
15.一种用于共享三维音频床的方法，包括：
向多个应用传送三维床元数据，所述三维床元数据定义三维音频床中的多个扬声器对象中的个体扬声器对象的位置；
从所述多个应用的个体应用接收定制三维音频数据，所述定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述定制三维音频数据将个体音频流与所述个体扬声器对象相关联；
选择用于绘制所述定制三维音频数据的空间化技术；
向编码器发送所述个体音频流，以使得所述编码器生成所述定制三维音频数据的绘制输出信号，其中所述绘制输出是根据所述空间化技术而被生成的；以及
使得所述绘制输出信号从所述编码器传送到一个或多个端点设备，以用于产生所述个体音频流的音频输出，其中所述个体音频流的所述音频输出从与所述个体音频流相关联的所述个体扬声器对象的所述位置发出。
16.根据权利要求15所述的方法，还包括：
接收指示对新空间化技术的选择的上下文数据；
响应于接收到指示对所述新空间化技术的选择的所述数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据所述新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
17.根据权利要求15所述的方法，还包括：
接收指示对新端点设备的选择的上下文数据；
响应于接收到指示对所述新端点设备的选择的所述数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据所述空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述新端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
18.根据权利要求15所述的方法，其中所述床元数据还定义与所述多个扬声器对象中的个体扬声器对象相关联的形状，其中所述绘制输出信号至少部分地基于所述形状而被修改。
19.根据权利要求15所述的方法，其中所述床元数据还定义与所述多个扬声器对象中的个体扬声器对象相关联的方向，其中所述绘制输出信号至少部分地基于所述方向而被修改。
20.根据权利要求15所述的方法，还包括：
接收指示与所述编码器或所述一个或多个端点设备中的至少一项相关联的用户偏好的上下文数据；
响应于接收到所述上下文数据，向所述多个应用传输新三维床元数据，其中所述新三维床元数据定义针对第二三维音频床中的多个扬声器对象中的个体扬声器对象的一个或多个位置；
从所述多个应用的个体应用接收新定制三维音频数据，所述新定制三维音频数据使得所述多个应用同时共享所述三维音频床中的所述扬声器对象，其中所述新定制三维音频数据将所述个体音频流与所述第二三维音频床的所述个体扬声器对象相关联；
使得所述编码器生成所述新定制三维音频数据的第二绘制输出信号，其中所述第二绘制输出是根据新空间化技术而被生成的；以及
使得所述第二绘制输出信号从所述编码器传送到所述一个或多个端点设备，以用于产生所述个体音频流的所述音频输出，其中所述个体音频流从所述第二三维音频床的所述个体扬声器对象的所述位置发出。
CN201780061519.2A 2016-10-07 2017-10-03 共享三维音频床 Active CN109791770B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662405665P 2016-10-07 2016-10-07
US62/405,665 2016-10-07
US15/621,941 2017-06-13
US15/621,941 US10419866B2 (en) 2016-10-07 2017-06-13 Shared three-dimensional audio bed
PCT/US2017/054808 WO2018067480A1 (en) 2016-10-07 2017-10-03 Shared three-dimensional audio bed

Publications (2)

Publication Number Publication Date
CN109791770A CN109791770A (zh) 2019-05-21
CN109791770B true CN109791770B (zh) 2023-10-03

Family

ID=61830275

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780061519.2A Active CN109791770B (zh) 2016-10-07 2017-10-03 共享三维音频床

Country Status (4)

Country Link
US (1) US10419866B2 (zh)
EP (1) EP3523800B1 (zh)
CN (1) CN109791770B (zh)
WO (1) WO2018067480A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117941378A (zh) * 2021-08-24 2024-04-26 北京字跳网络技术有限公司 音频信号的处理方法和装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012051535A2 (en) * 2010-10-14 2012-04-19 Texas Instruments Incorporated Generation of 3d sound with adjustable source positioning
CN103493513A (zh) * 2011-04-18 2014-01-01 杜比实验室特许公司 用于将音频上混以便产生3d音频的方法和系统
CN104054126A (zh) * 2012-01-19 2014-09-17 皇家飞利浦有限公司 空间音频渲染和编码
CN104303522A (zh) * 2012-05-07 2015-01-21 杜比国际公司 用于布局与格式独立的三维音频再现的方法和装置
CN104520924A (zh) * 2012-08-07 2015-04-15 杜比实验室特许公司 指示游戏音频内容的基于对象的音频的编码和呈现
CN105431900A (zh) * 2013-07-31 2016-03-23 杜比实验室特许公司 空间上的弥漫性或大音频对象的处理
CN105578380A (zh) * 2011-07-01 2016-05-11 杜比实验室特许公司 用于自适应音频信号产生、编码和呈现的系统和方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8768494B1 (en) 2003-12-22 2014-07-01 Nvidia Corporation System and method for generating policy-based audio
US20050222844A1 (en) 2004-04-01 2005-10-06 Hideya Kawahara Method and apparatus for generating spatialized audio from non-three-dimensionally aware applications
US20060247918A1 (en) 2005-04-29 2006-11-02 Microsoft Corporation Systems and methods for 3D audio programming and processing
EP2009892B1 (fr) 2007-06-29 2019-03-06 Orange Positionnement de locuteurs en conférence audio 3D
US8064616B2 (en) 2008-12-09 2011-11-22 Panasonic Automotive Systems Company Of America Infotainment system with surround sound media navigation
US9107021B2 (en) 2010-04-30 2015-08-11 Microsoft Technology Licensing, Llc Audio spatialization using reflective room model
US20120105603A1 (en) 2010-11-02 2012-05-03 Hsuan-Ching Liu Display system with dynamic 3d sound reproduction and related method
WO2012140525A1 (en) 2011-04-12 2012-10-18 International Business Machines Corporation Translating user interface sounds into 3d audio space
AU2012279349B2 (en) 2011-07-01 2016-02-18 Dolby Laboratories Licensing Corporation System and tools for enhanced 3D audio authoring and rendering
HUE054452T2 (hu) 2011-07-01 2021-09-28 Dolby Laboratories Licensing Corp Rendszer és eljárás adaptív hangjel elõállítására, kódolására és renderelésére
US9654644B2 (en) 2012-03-23 2017-05-16 Dolby Laboratories Licensing Corporation Placement of sound signals in a 2D or 3D audio conference
WO2013192111A1 (en) * 2012-06-19 2013-12-27 Dolby Laboratories Licensing Corporation Rendering and playback of spatial audio using channel-based audio systems
US9301069B2 (en) 2012-12-27 2016-03-29 Avaya Inc. Immersive 3D sound space for searching audio
TWI530941B (zh) * 2013-04-03 2016-04-21 杜比實驗室特許公司 用於基於物件音頻之互動成像的方法與系統
EP2892250A1 (en) 2014-01-07 2015-07-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for generating a plurality of audio channels
US10158946B2 (en) 2014-09-04 2018-12-18 PWV Inc Speaker discovery and assignment

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012051535A2 (en) * 2010-10-14 2012-04-19 Texas Instruments Incorporated Generation of 3d sound with adjustable source positioning
CN103493513A (zh) * 2011-04-18 2014-01-01 杜比实验室特许公司 用于将音频上混以便产生3d音频的方法和系统
CN105578380A (zh) * 2011-07-01 2016-05-11 杜比实验室特许公司 用于自适应音频信号产生、编码和呈现的系统和方法
CN104054126A (zh) * 2012-01-19 2014-09-17 皇家飞利浦有限公司 空间音频渲染和编码
CN104303522A (zh) * 2012-05-07 2015-01-21 杜比国际公司 用于布局与格式独立的三维音频再现的方法和装置
CN104520924A (zh) * 2012-08-07 2015-04-15 杜比实验室特许公司 指示游戏音频内容的基于对象的音频的编码和呈现
CN105431900A (zh) * 2013-07-31 2016-03-23 杜比实验室特许公司 空间上的弥漫性或大音频对象的处理

Also Published As

Publication number Publication date
US10419866B2 (en) 2019-09-17
EP3523800B1 (en) 2021-08-18
WO2018067480A1 (en) 2018-04-12
CN109791770A (zh) 2019-05-21
EP3523800A1 (en) 2019-08-14
US20180103334A1 (en) 2018-04-12

Similar Documents

Publication Publication Date Title
US10714111B2 (en) Enhanced adaptive audio rendering techniques
US10149089B1 (en) Remote personalization of audio
US8380333B2 (en) Methods, apparatuses and computer program products for facilitating efficient browsing and selection of media content and lowering computational load for processing audio data
US11595774B2 (en) Spatializing audio data based on analysis of incoming audio data
JP2011521511A (ja) 拡張現実を強化した音声
CN109996167B (zh) 一种多终端协同播放音频文件的方法及终端
US10416954B2 (en) Streaming of augmented/virtual reality spatial audio/video
JP2008172826A (ja) 空間性が拡張された音源を有する３次元音響シーンの生成及び消費方法
US20140270186A1 (en) Method And Apparatus For Using Spatial Audio Rendering For A Parallel Playback Of Call Audio And Multimedia Content
JP2016539403A (ja) コンテキスト上の関係に基づくメディア・ファイルを識別するための方法と装置
CN109791770B (zh) 共享三维音频床
US10469975B2 (en) Personalization of spatial audio for streaming platforms
WO2018200176A1 (en) Progressive streaming of spatial audio
KR101923011B1 (ko) 장면 이미지 생성기
KR20150076626A (ko) 사용자가 개발한 api를 이용하여 어플리케이션을 제작하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
KR20200112901A (ko) 음원 재생 공유 방법 및 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant