CN107852539A - 耳机装置及控制耳机装置的方法 - Google Patents

耳机装置及控制耳机装置的方法 Download PDF

Info

Publication number
CN107852539A
CN107852539A CN201580081737.3A CN201580081737A CN107852539A CN 107852539 A CN107852539 A CN 107852539A CN 201580081737 A CN201580081737 A CN 201580081737A CN 107852539 A CN107852539 A CN 107852539A
Authority
CN
China
Prior art keywords
transmitter array
headphone device
array
sound
orientation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580081737.3A
Other languages
English (en)
Other versions
CN107852539B (zh
Inventor
约瑟芬·马利奥·詹努齐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Razer Asia Pacific Pte Ltd
Original Assignee
Razer Asia Pacific Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Razer Asia Pacific Pte Ltd filed Critical Razer Asia Pacific Pte Ltd
Publication of CN107852539A publication Critical patent/CN107852539A/zh
Application granted granted Critical
Publication of CN107852539B publication Critical patent/CN107852539B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • H04S7/304—For headphones
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2205/00—Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
    • H04R2205/022—Plurality of transducers corresponding to a plurality of sound channels in each earpiece of headphones or in a single enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/15—Transducers incorporated in visual displaying devices, e.g. televisions, computer displays, laptops
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Otolaryngology (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Headphones And Earphones (AREA)
  • Control Of Electric Motors In General (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

根据各种实施例，可提供一种耳机装置。该耳机装置可包括：方位确定电路，被配置为确定该耳机装置的方位；左发射器阵列，包括多个第一声音发射器；右发射器阵列，包括多个第二声音发射器；以及控制器，被配置为基于所确定的方位针对多个第一声音发射器及多个第二声音发射器中的每一个声音发射器来控制由相应声音发射器发射的声音。

Description

耳机装置及控制耳机装置的方法
技术领域
各种实施例总体上涉及耳机装置及控制耳机装置的方法。
背景技术
头戴式显示器(HMD；head mounted display)及虚拟视网膜显示器(VRD；virtualretinal display)可提供虚拟现实环境及3D(three-dimensional；三维)游戏的极高分辨率的身临其境3D立体视图。然而，常用HMD不提供等同地身临其境的多位置3D音频体验，这些体验在虚拟现实环境或3D游戏中与HMD的位置性质相关联或受该位置性质的影响。因此，可能需要提供具有改良音频体验的HMD及VRD。
发明内容
根据各种实施例，可提供一种耳机装置。该耳机装置可包括：方位确定电路，被配置为确定耳机装置的方位；左发射器阵列，其包括多个第一声音发射器；右发射器阵列，其包括多个第二声音发射器；以及控制器，被配置为基于所确定的方位针对多个第一声音发射器及多个第二声音发射器中的每一个声音发射器来控制由相应声音发射器发射的声音。
根据各种实施例，可提供一种控制耳机装置的方法。该方法可包括：确定耳机装置的方位；以及基于所确定的方位针对包括多个第一声音发射器的左发射器阵列及包括多个第二声音发射器的右发射器阵列中的每一个声音发射器来控制由相应声音发射器发射的声音。
附图说明
在图式中，在全部不同视图中，相同附图标记一般指代相同部件。图式未必按比例绘制，相反，重点通常为关注对本发明原理的例示。各种特征或组件的尺寸可出于清晰度任意地扩展或缩减。在以下描述中，本发明的各种实施例系参考以下图式来描述。
图1A显示根据各种实施例的耳机装置。
图1B显示根据各种实施例的耳机装置。
图1C显示流程图，其例示根据各种实施例的控制耳机装置的方法。
图2显示具有HRTF(head-related transfer function；头部关联的传递函数)影响的露天双耳听觉模型的图解。
图3显示露天听觉平面及仰角元素(elevation element)的图解。
图4显示根据各种实施例的超声波发射器(ultrasonic emitter)或心理声学阵列(psycho-acoustic array)的图解。
图5显示根据各种实施例的超声波发射器或心理声学阵列的实例的图解。
具体实施方式
以下详细描述指代通过图解来显示可实现本发明的特定细节及实施例的附图。足够详细地描述这些实施例以允许本领域技术人员实现本发明。可利用其他实施例，并且可进行结构及逻辑改变而不脱离本发明的范畴。各种实施例未必互相排斥，如一些实施例可与一个或多个其他实施例组合以形成新的实施例。
在此情形中，如在本说明书中描述的耳机装置可包括存储器，该存储器例如用于在耳机装置中实施的处理中。用于实施例中的存储器可为易失性存储器，例如DRAM(Dynamic Random Access Memory；动态随机存取存储器)或非易失性存储器，例如PROM(Programmable Read Only Memory；可程序化只读存储器)、EPROM(Erasable PROM；可擦除PROM)、EEPROM(Electrically Erasable PROM；电子可擦除PROM)，或闪存，例如浮闸存储器、电荷捕集存储器、MRAM(Magnetoresistive Random Access Memory；磁电阻随机存取存储器)或PCRAM(Phase Change Random Access Memory；相变随机存取存储器)。
在实施例中，“电路”可理解为任何种类的逻辑实行实体，该逻辑实行实体可为执行储存于存储器中的软件、固件或其任何组合的专用电路或处理器。因此，在实施例中，“电路”可为硬布线逻辑电路和/或可程序化逻辑电路，诸如可程序化处理器，例如微处理器(例如，复杂指令集计算机(Complex Instruction Set Computer；CISC)处理器或精简指令集计算机(Reduced Instruction Set Computer；RISC)处理器)。“电路”亦可为执行软件的处理器，该软件例如任何种类的计算机程序，例如使用虚拟机代码(诸如例如Java)的计算机程序。将在以下更详细地描述的相应功能的任何其他种类的实行方案亦可理解为根据替代实施例的“电路”。
在说明书中，用语“包含”应理解为具有类似于用语“包括”的宽泛含义，并将理解为意指包括一指定整体或步骤或整体或步骤的群组，但不排除任何其他整体或步骤或任何整体或步骤的群组。此定义亦应用于用语“包含(comprising)”的变化形式。
对本说明书中的任何先前技术的引用不应视为承认或以任何形式地暗示所引用的先前技术构成澳大利亚(或任何其他国家)公知常识的部分。
为使本发明可易于理解且获得实际效果，将以举例且非限制的方式并参考各图来描述特定实施例。
提供装置的各种实施例，且提供方法的各种实施例。将理解，装置的基本性质亦适用于方法，且反之亦然。因此，为简洁起见，可省略这些性质的重复描述。
将理解，本文对特定装置描述的任何性质亦可适用于本文所述的任何装置。将理解，本文对特定方法描述的任何性质亦可适用于本文所述的任何方法。此外，将理解，对于本文所述的任何装置或方法而言，所描述的所有部件或步骤未必必须纳入装置或方法中，而可仅仅纳入一些(但非所有)部件或步骤。
本文中的用语“耦接”(或“连接”)可理解为电耦接或理解为机械耦接，例如附接，或固定或附接，或仅处于接触状态而无任何固定，且将理解，可提供直接耦接或间接耦接(换言之，耦接而不直接接触)两者。
HMD(头戴式显示器)可提供视觉上极为身临其境的体验并使用与各种透镜构造及其他特征组合的HD(high definition；高清晰度)屏幕以接近实际工作环境。一些HMD系基于开放架构，意谓着，使用者具有现实世界参考点(亦即地面或天花板或两者)，从而在现实世界中让使用者在某种程度上接触地面，而其他设计系基于“闭合”架构，该“闭合”架构不提供现实世界参考框。在任一实例中，在常用HMD中，音频体验可能不与视觉虚拟体验相关联，该视觉虚拟体验形成位置透视或处于将给予接近现实世界音频体验的水平，该现实世界音频体验具有3D多位置音频体验可基于来源于位置传感器的近似值所带来的细微差别的全部，这些细微差别包括仰角的影响。可应用音频的“虚拟环绕”适应性，然而，此方法可能具有局限性，因为该方法仅基于头戴耳机构造中的两个硬件驱动器。使用立体声音频源，即使是5.1或7.1音频源，亦可在设法复制或接近一个或多个现实世界音频源的方位角(azimuth)或仰角(elevation)部分的方面极其受限，因为该音频源与所给环境/房间相互作用或可如何将此在3D游戏中的元数据内进行编码。
常用3D音频解决方案不从根本上地整合到HMD中来补足视觉体验，且因此，总体虚拟现实或3D游戏体验可能较不身临其境且不接近现实世界。
此外，常用HMD的设计可挡住使用者的周围的视野。使用者可能相对于现实世界或该使用者使用HMD所在的参考或特定环境而不具有参考框。尽管使用者可仍听得见，但使用者聆听他们使用HMD所在的环境中的声音。这可导致和/或进一步复杂化乱向或负OKCR(Opto-Kinetic Cervical Reflex And Frame Of Reference；视动颈部反射与参考框)反应的问题。OKCR反应可通常描述为在人造环境中时及在佩戴闭合的头戴显示器时视觉与运动感觉之间的相互关系。这在一些情况下可非常严重且致使使用者因此而跌倒。为使HMD变得真正可用且广泛采纳于CE(Consumer Electronics；消费者电子)市场，可能需要解决该特定问题。
头戴式显示器(HMD)及虚拟视网膜显示器(VRD)可提供虚拟现实环境及3D游戏的极高分辨率的身临其境3D立体视图。然而，常用HMD不提供等同地身临其境的多位置3D音频体验，这些体验在虚拟现实环境或3D游戏中与HMD的位置性质相关联或受该位置性质的影响。根据各种实施例，可提供具有改良音频体验的HMD及VRD。
根据各种实施例，可提供基于“闭合”架构设计点的HMD。
根据各种实施例，可提供用于HMD的多位置3D(三维)音频解决方案。
图1A显示根据各种实施例的耳机装置100。耳机装置100可包括方位确定电路102，方位确定电路102被配置为确定耳机装置100的方位。耳机装置100可进一步包括左发射器阵列104，左发射器阵列104包括多个第一声音发射器。耳机装置100可进一步包括右发射器阵列106，右发射器阵列106包括多个第二声音发射器。耳机装置100可进一步包括控制器108，控制器108被配置为基于所确定的方位针对多个第一声音发射器及多个第二声音发射器中的每一个声音发射器来控制由相应声音发射器发射的声音。如线110所表示的，方位确定电路102、左发射器阵列104、右发射器阵列106及控制器108可与彼此耦接，该耦接例如诸如使用线或电缆的电耦接和/或机械耦接。
换言之，耳机装置可在其左侧(例如用于使用者的左耳)及右侧(例如用于使用者的右耳)中的每一侧上具有多个声音发射器，并可基于耳机装置(且因此，用户的头部)的方位(例如空间方位)来控制由声音发射器中的每一个发射的声音。
根据各种实施例，方位确定电路102可包括加速计。
根据各种实施例，方位确定电路102可包括陀螺仪。
根据各种实施例，方位可包括或可为处于前平面、中央面及水平面中的至少一个中的方位。
根据各种实施例，方位可包括或可为方位角和仰角中的至少一个。
根据各种实施例，左发射器阵列104及右发射器阵列106中的每一个声音发射器可包括超声波发射器(ultrasonic sound emitter)。
根据各种实施例，左发射器阵列104及右发射器阵列106中的每一个可包括心理声学阵列。
根据各种实施例，左发射器阵列104及右发射器阵列106中的每一个可提供在自前向后的方位上。
根据各种实施例，左发射器阵列104及右发射器阵列106中的每一个可被配置为提供声幕(sound curtain)。
根据各种实施例，控制器108可被配置为控制(例如声音发射器中的每一个的)平衡、方向、仰角、深度、声压级和音量中的至少一个。
根据各种实施例，控制器108可被配置为控制头部关联的传递函数。
图1B显示根据各种实施例的耳机装置112。耳机装置112可类似于图1A所示耳机装置100地包括被配置为确定耳机装置100的方位的方位确定电路102。耳机装置112可类似于图1A所示耳机装置100地进一步包括其中包括多个第一声音发射器的左发射器阵列104。耳机装置112可类似于图1A所示耳机装置100地进一步包括其中包括多个第二声音发射器的右发射器阵列106。耳机装置112可类似于图1A所示耳机装置100地进一步包括被配置为基于所确定的方位针对多个第一声音发射器及多个第二声音发射器中的每一个声音发射器来控制由相应声音发射器发射的声音的控制器108。耳机装置112可进一步包括壳体114。耳机装置112可进一步包括显示器116。如线118所表示的，方位确定电路102、左发射器阵列104、右发射器阵列106、控制器108、壳体114及显示器116可与彼此耦接，该耦接例如诸如使用线或电缆的电耦接和/或机械耦接。
根据各种实施例，左发射器阵列104、右发射器阵列106及显示器116可为同步的。
根据各种实施例，控制器108可被配置为个别地控制由左发射器阵列104及右发射器阵列106中的每一个声音发射器发射的声音。
图1C显示流程图120，其例示根据各种实施例的控制耳机装置的方法。在步骤122中，可确定耳机装置的方位。在步骤124中，对于包括多个第一声音发射器的左发射器阵列及包括多个第二声音发射器的右发射器阵列中的每一个声音发射器而言，可基于所确定的方位来控制由相应声音发射器发射的声音。
根据各种实施例，可使用加速计或由若干传感器类型组成的传感器融合封装件来确定方位。
根据各种实施例，可使用陀螺仪来确定方位。
根据各种实施例，方位可包括或可为处于前平面、中央面及水平面中的至少一个中的方位。
根据各种实施例，方位可包括或可为近似方位角和仰角中的至少一个。
根据各种实施例，左发射器阵列及右发射器阵列中的每一个声音发射器可发射超声波。
根据各种实施例，左发射器阵列及右发射器阵列中的每一个可包括或可为心理声学阵列。
根据各种实施例，左发射器阵列及右发射器阵列中的每一个可提供在自前向后的方位上且可能部分地处于自上向下的方位中。
根据各种实施例，左发射器阵列及右发射器阵列中的每一个可提供声幕。
根据各种实施例，该方法可进一步包括：控制平衡、方向、仰角、深度、声压级和音量中的至少一个或多个。
根据各种实施例，该方法可进一步包括：控制头部关联的传递函数。
根据各种实施例，耳机装置可包括HMD/耳机壳体所独有的定制壳体。
根据各种实施例，耳机装置可包括显示器(且因此可为HMD)。
根据各种实施例，左发射器阵列、右发射器阵列及显示器可为同步的。
根据各种实施例，该方法可进一步包括：个别地控制由左发射器阵列及右发射器阵列中的每一个声音发射器发射的声音。
根据各种实施例，可提供用于头戴显示器(“HMD”)应用的多位置3D音频解决方案。根据各种实施例，可产生身临其境的多位置3维音频体验，这些体验在特定虚拟现实环境或3维游戏中与HMD的位置性质相关联。
根据各种实施例，可将一组超声波发射器以其环绕每一只耳产生多位置3维“声幕”的方式布置于HMD中的每一侧上。这可允许装置用户在游戏环境中达成最真实的及身临其境的体验。
人类“双耳”听声是指露天中的来自多个方向(如图2所示)或来自各种“听觉平面”的音频脉冲或影响强烈影响着聆听体验。
图2显示具有HRTF(头部关联的传递函数)影响的露天双耳听觉模型的图解200。例示使用者的头部202。使用者也许能听到来源于左扬声器204及右扬声器206的声音。将理解，HRTF的指数可将源(例如左扬声器204(“L(left)”)或右扬声器206(“R(right)”))表示为第一指数并将接收方(例如使用者的左耳(“L”)或使用者的右耳(“R”))表示为第二指数。例如，使用者的左耳可自左扬声器204(与HRTF HLL 210相关)及自右扬声器206(与HRTF HRL212相关)接收声音。例如，使用者的右耳可自左扬声器204(与HRTF HLR 208相关)及自右扬声器206(与HRTF HRR 214相关)接收声音。
图3显示露天听觉平面及仰角元素的图解300。图3详细描述三个基本听觉平面(前平面304、中央面306及水平面308)及另外的仰角元素310。通过独特的HRTF函数的方式可实现近似值，该函数具有第三组合声源影响的元素。此第三组合声源基于水平面308以上及以下的角度与相对于中央面306及前平面304的旋转及角度组合而含有360度方向性影响。旋转和/或角度的度数可在使用者移动自己的头部的同时根据HMD中的头部追踪定位传感器以及随着数据改变而取得。此举可进一步增强聆听体验。面304、面306、面308中的每一个及仰角元素310可为相对于用户的头部位置302。使用这些参数的独特组合及调整，更真实世界的聆听体验可提供在受超声波发射器或psyko声学阵列(换言之，心理声学阵列)所刺激的“混合”露天环境中，其中这些参数例如部分地受控于软件，该软件使用默认或用户定义配置文件，该默认或该用户定义配置文件在通过HMD报告时亦与用户的头部位置302本质地相关联。将理解，人类听得见施加或载于超声波阵列上的音频脉冲。超声波阵列可发射整个范围音频，但不及psyko声学阵列可达的平坦度水平。可根据各种实施例使用任一阵列类型。
在人工3D(三维)聆听环境中，在不同听觉面304、306、308及仰角元素310上控制音频脉冲中的每一个并改变音频脉冲中的每一个的能力对于更接近现实世界音频体验而言可为至关重要的，以产生包括平衡、位置或方向性、深度及仰角在内的更加身临其境的体验。
考虑到超声波音频装置的固有性质为高度方向性的，可以以若干不同方式使用该固有性质以将声音向散射窄角内的特定位置投射。可通过将这些方向性脉冲投射在挡板和/或阵列壳体内的独特成角表面上来改变这些方向性脉冲的方向。
根据各种实施例，定制设计的超声波发射器或psyko声学阵列(例如每耳一个此种阵列)可被布置于将声音脉冲直接引导至使用者耳部的定制壳体内，且可整合至HMD中。可将立体声超声波发射器或psyko声学阵列在“自前向后的”方位上布置于HMD上，例如诸如图4及图5所示。阵列可置于耳朵前面，以成为“自前向后的”，且亦可使阵列中的一部分位于耳朵上方，以允许并提供仰角元素，其中该仰角元素将基于与定制HRTF算法组合的某种水平的近似值。
图4显示根据各种实施例的附接至头戴显示器402(HMD)的每一侧上的超声波发射器或psyko声学阵列的图解400。如图解404所示，可基于头部位置(例如旋转和/或仰角)及基于VR(虚拟现实)环境来改变平衡、深度及强度。根据各种实施例，阵列影响的范围可为高度局部化的(如用于左耳的图解408所示，以及如用于右耳的图解406所示)。
图5显示根据各种实施例的超声波发射器或心理声学阵列502(提供在发射器阵列壳体中)的实例的图解500。显示心理声学阵列502的用户的耳504。心理声学阵列502可包括多个扬声器，例如第一扬声器506、第二扬声器508及第三扬声器510。第一扬声器506可发射第一频率脉冲518，第一频率脉冲518可在挡板阵列的第一挡板524上反射，以使得频率脉冲在离开第一挡板524之后具有声音发射的第一主方向512。第二扬声器508可发射第二频率脉冲520，第二频率脉冲520可在挡板阵列的第二挡板526上反射，以使得频率脉冲在离开第二挡板526之后具有声音发射的第二主方向514。第三扬声器510可发射第三频率脉冲522，第三频率脉冲522可在挡板阵列的第三挡板528上反射，以使得频率脉冲在离开第三挡板528之后具有声音发射的第三主方向516。心理声学阵列502的多个声音发射器可共同地覆盖使用者的整个耳504。挡板和/或扬声器的实际实体尺寸及参数可为独特的，且可应用于HMD和/或耳机的仅一种特定设计。
根据各种实施例，控制器(例如使用软件的控制器)可察觉到头部位置并可环绕每一只耳产生多位置3D声幕。将理解，“声幕”可为一或多只耳上的覆盖，在psyko声学阵列中，这可通过以下方式完成：将成角表面及嵌套成角表面设计及并入阵列内，在某种情况下延迟一些频率去往耳部并将声音引导至耳部及耳部上方。如上所述，阵列可以不仅在耳部前面亦在某种程度上于耳朵上方提供用于覆盖的方式构造。后者(在耳部上方的该构造)可帮助产生仰角的感觉以用于声音的进一步方向性，从而产生更深层次的3D效果。
此声幕可包括提供多位置3D音频体验的平衡、方向、仰角、深度及SPL(SoundPressure Level；声压级)或音量的元素。先前提及的元素及其他定制元素中的每一个可通过程序设计方式改变并经调整以最大化3D效果以及达成最身临其境的虚拟现实或3D游戏体验。各种先前提及的元素在某种程度上为互连的，例如SPL在提高时可使声音让人感到更近，而在降低时将使聆听者感到声音很远。与SPL组合地自右向左应用预定量的平衡可给予更多的方向性之感。这可与仰角近似值相关联，其中头部追踪提供仰角的角度，该角度可随后外推为声音来源处的实体高度，该实体高度可与可位于每一只耳之上的阵列中的部分相关联，以给予声音额外水平的3D及位置方面。这可归结为这些元素的独特的混合。这可实时达成(几乎)且可能需要在DSP(digital signal processor；数字信号处理器)/算法级下的对SW(software；软件)/代码的调整。
阵列，且例如其壳体，可经定制设计来满足HMD的特定机械及实体需求。例如，阵列可经设计来将声音以一方式投射至耳中，以使得可允许丰富的3D音频体验。根据各种实施例的此硬体方面可与用来进一步丰富3D音频体验的定制HRTF函数进行组合。一个或多个定制HRTF函数可受影响于：如上所述的听觉平面，例如，音频影响的方向性及仰角元素；以及所有这些影响因素如何互连于虚拟环境或3D游戏环境的通过元数据传达的实体方面。
根据各种实施例，可提供定制设计的立体声超声波阵列；与定制设计壳体一起的每一耳适合于特定HMD的实体设计参数。阵列且尤其阵列的壳体可以以此种方式经构造以便通过折迭、挡板和或其他独特表面细节的方式来引导音频脉冲，这些其他独特表面细节经设计来达成施加于每一只耳上的尽可能最好的音频效果。将理解，“壳体”可能指代实体外壳，其中音频阵列组件可整合至该实体外壳中。阵列壳体的外部在某种程度上可能为非描述性的，然而该阵列壳体的内部可由独特成角表面及嵌套成角表面组成，该表面可将为提供位置及3D效果而涉及的频率及谐波的各种方面分开。阵列的内部结构对于所附接的装置而言可为独特及特别的。该内部结构在附接至另一装置的情况下可能完全不必起作用或在很大程度上不必起作用。立体声超声波或psyko声学阵列可与控制软件组合工作，该控制软件可允许直接使用者控制或通过储存于基于云的模型中的特定默认“配置文件(profiles)”来进行选择及用于特定VR环境或3D游戏。
根据各种实施例，可提供装置及方法，该装置及该方法向HMD平台提供身临其境的软件可控制的多位置3D音频体验。
根据各种实施例，该装置及该方法可被提供为用于HMD的超声波多位置3D音频。
根据各种实施例，装置及方法可基于用于HMD应用的HMD的头部追踪定位传感器数据使用定制HRTF及仰角近似值而被提供用于多位置3D音频解决方案。
根据各种实施例，可提供装置及方法，该装置及该方法使用装入在针对HMD应用特别设计的定制壳体中的超声波发射器或心理声学阵列。根据各种实施例，发射器可受与头部位置的如通过HMD所报告的位置方面(亦即，旋转和/或仰角)相关联的软件的影响，以产生多位置3D音频体验。
以下实例系关于其他实施例。
实例1为耳机装置，该耳机装置包含：方位确定电路，被配置为确定耳机装置的方位；左发射器阵列，其包含多个第一声音发射器；右发射器阵列，其包含多个第二声音发射器；以及控制器，被配置为基于所确定的方位针对多个第一声音发射器及多个第二声音发射器中的每一个声音发射器来控制由相应声音发射器发射的声音。
在实例2中，实例1的主题可视需要包括：方位确定电路包含加速计。
在实例3中，实例1至2中的任一个的主题可视需要包括：方位确定电路包含陀螺仪。
在实例4中，实例1至3中的任一个的主题可视需要包括：方位包含在前平面、中央面及水平面中的至少一个中的方位。
在实例5中，实例1至4中的任一个的主题可视需要包括：方位包含方位角和仰角中的至少一个。
在实例6中，实例1至5中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个声音发射器包含超声波发射器。
在实例7中，实例1至6中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个包含心理声学阵列。
在实例8中，实例1至7中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个提供在自前向后的方位上。
在实例9中，实例1至8中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个被配置为提供声幕。
在实例10中，实例1至9中的任一个的主题可视需要包括：控制器被配置为控制平衡、方向、仰角、深度、声压级和音量中的至少一个。
在实例11中，实例1至10中的任一个的主题可视需要包括：控制器被配置为控制头部关联的传递函数。
在实例12中，实例1至11中的任一个的主题可视需要包括：壳体。
在实例13中，实例1至12中的任一个的主题可视需要包括：显示器。
在实例14中，实例1至13中的任一个的主题可视需要包括：左发射器阵列、右发射器阵列及显示器为同步的。
在实例15中，实例1至14中的任一个的主题可视需要包括：控制器被配置为个别地控制由左发射器阵列及右发射器阵列中的每一个声音发射器发射的声音。
实例16为一种控制耳机装置的方法，该方法包含：确定耳机装置的方位；以及基于所确定的方位针对包含多个第一声音发射器的左发射器阵列及包含多个第二声音发射器的右发射器阵列中的每一个声音发射器来控制由相应声音发射器发射的声音。
在实例17中，实例16的主题可视需要包括：方位使用加速计来确定。
在实例18中，实例16至17中的任一个的主题可视需要包括：方位使用陀螺仪来确定。
在实例19中，实例16至18中的任一个的主题可视需要包括：方位包含在前平面、中央面及水平面中的至少一个中的方位。
在实例20中，实例16至19中的任一个的主题可视需要包括：方位包含方位角和仰角中的至少一个。
在实例21中，实例16至20中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个声音发射器发射超声波。
在实例22中，实例16至21中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个包含心理声学阵列。
在实例23中，实例16至22中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个提供在自前向后的方位上。
在实例24中，实例16至23中的任一个的主题可视需要包括：左发射器阵列及右发射器阵列中的每一个提供声幕。
在实例25中，实例16至24中的任一个的主题可视需要包括：控制平衡、方向、仰角、深度、声压级和音量中的至少一个。
在实例26中，实例16至25中的任一个的主题可视需要包括：控制头部关联的传递函数。
在实例27中，实例16至26中的任一个的主题可视需要包括：耳机装置包含壳体。
在实例28中，实例16至27中的任一个的主题可视需要包括：耳机装置包含显示器。
在实例29中，实例16至28中的任一个的主题可视需要包括：左发射器阵列、右发射器阵列及显示器为同步的。
在实例30中，实例16至29中的任一个的主题可视需要包括：个别地控制由左发射器阵列及右发射器阵列中的每一个声音发射器发射的声音。
虽然本发明已参考特定实施例特别地示出及描述，但是本领域技术人员应理解，在不脱离通过随附权利要求限定的本发明的精神及范畴的情况下，可对这些特定实施例中的形式及细节做出各种改变。因此，本发明的范畴通过随附权利要求指定，且落入权利要求的等效者的含义及范围内的所有改变因此欲得以涵盖。

Claims (30)

1.一种耳机装置，包含：
方位确定电路，被配置为确定所述耳机装置的方位；
左发射器阵列，包含多个第一声音发射器；
右发射器阵列，包含多个第二声音发射器；以及
控制器，被配置为基于所确定的方位针对所述多个第一声音发射器和所述多个第二声音发射器中的每一个声音发射器来控制由相应声音发射器发射的声音。
2.如权利要求1所述的耳机装置，其中所述方位确定电路包含加速计。
3.如权利要求1所述的耳机装置，其中所述方位确定电路包含陀螺仪。
4.如权利要求1所述的耳机装置，其中所述方位包含在前平面、中央面和水平面中的至少一个中的方位。
5.如权利要求1所述的耳机装置，其中所述方位包含方位角和仰角中的至少一个。
6.如权利要求1所述的耳机装置，其中所述左发射器阵列和所述右发射器阵列中的每一个声音发射器包含超声波发射器。
7.如权利要求1所述的耳机装置，其中所述左发射器阵列和所述右发射器阵列中的每一个包含心理声学阵列。
8.如权利要求1所述的耳机装置，其中所述左发射器阵列和所述右发射器阵列中的每一个提供在自前向后的方位上。
9.如权利要求1所述的耳机装置，其中所述左发射器阵列和所述右发射器阵列中的每一个被配置为提供声幕。
10.如权利要求1所述的耳机装置，其中所述控制器被配置为控制平衡、方向、仰角、深度、声压级和音量中的至少一个。
11.如权利要求1所述的耳机装置，其中所述控制器被配置为控制头部关联的传递函数。
12.如权利要求1所述的耳机装置，进一步包含壳体。
13.如权利要求1所述的耳机装置，进一步包含显示器。
14.如权利要求1所述的耳机装置，其中所述左发射器阵列、所述右发射器阵列及所述显示器为同步的。
15.如权利要求1所述的耳机装置，其中所述控制器被配置为个别地控制由所述左发射器阵列和所述右发射器阵列中的每一个声音发射器发射的声音。
16.一种控制耳机装置的方法，所述方法包含：确定所述耳机装置的方位；以及
基于所确定的方位针对包含多个第一声音发射器的左发射器阵列和包含多个第二声音发射器的右发射器阵列中的每一个声音发射器来控制由相应声音发射器发射的声音。
17.如权利要求16所述的方法，其中所述方位使用加速计来确定。
18.如权利要求16所述的方法，其中所述方位使用陀螺仪来确定。
19.如权利要求16所述的方法，其中所述方位包含在前平面、中央面和水平面中的至少一个中的方位。
20.如权利要求16所述的方法，其中所述方位包含方位角和仰角中的至少一个。
21.如权利要求16所述的方法，其中所述左发射器阵列和所述右发射器阵列中的每一个声音发射器发射超声波。
22.如权利要求16所述的方法，其中所述左发射器阵列和所述右发射器阵列中的每一个包含心理声学阵列。
23.如权利要求16所述的方法，其中所述左发射器阵列和所述右发射器阵列中的每一个提供在自前向后的方位上。
24.如权利要求16所述的方法，其中所述左发射器阵列和所述右发射器阵列中的每一个提供声幕。
25.如权利要求16所述的方法，进一步包含：控制平衡、方向、仰角、深度、声压级和音量中的至少一个。
26.如权利要求16所述的方法，进一步包含：控制头部关联的传递函数。
27.如权利要求16所述的方法，其中所述耳机装置包含壳体。
28.如权利要求16所述的方法，其中所述耳机装置包含显示器。
29.如权利要求16所述的方法，其中所述左发射器阵列、所述右发射器阵列及所述显示器为同步的。
30.如权利要求16所述的方法，进一步包含：个别地控制由所述左发射器阵列和所述右发射器阵列中的每一个声音发射器发射的声音。
CN201580081737.3A 2015-06-03 2015-06-03 耳机装置及控制耳机装置的方法 Active CN107852539B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/SG2015/050140 WO2016195589A1 (en) 2015-06-03 2015-06-03 Headset devices and methods for controlling a headset device

Publications (2)

Publication Number Publication Date
CN107852539A true CN107852539A (zh) 2018-03-27
CN107852539B CN107852539B (zh) 2019-01-11

Family

ID=57440869

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580081737.3A Active CN107852539B (zh) 2015-06-03 2015-06-03 耳机装置及控制耳机装置的方法

Country Status (6)

Country Link
US (1) US10237678B2 (zh)
EP (1) EP3304927A4 (zh)
CN (1) CN107852539B (zh)
AU (1) AU2015397085B2 (zh)
TW (1) TWI790192B (zh)
WO (1) WO2016195589A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10609475B2 (en) 2014-12-05 2020-03-31 Stages Llc Active noise control and customized audio system
US9800990B1 (en) * 2016-06-10 2017-10-24 C Matter Limited Selecting a location to localize binaural sound
US10945080B2 (en) 2016-11-18 2021-03-09 Stages Llc Audio analysis and processing system
US20190200154A1 (en) * 2017-12-21 2019-06-27 Facebook, Inc. Systems and methods for audio-based augmented reality

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101185368A (zh) * 2005-05-27 2008-05-21 马丁坎托拉咨询有限公司 用于声换能器的组件、系统以及方法
CN102395098A (zh) * 2005-09-13 2012-03-28 皇家飞利浦电子股份有限公司 生成3d声音的方法和设备
WO2013090100A1 (en) * 2011-12-12 2013-06-20 John Clavin Connecting head mounted displays to external displays and other communication networks
CN103535051A (zh) * 2012-08-02 2014-01-22 庞博文 带互动显示屏的耳机

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05336599A (ja) 1992-06-03 1993-12-17 Fujitsu Ltd 音像定位ヘッドホン装置および、それを用いた仮想現実視聴覚装置
US5633993A (en) 1993-02-10 1997-05-27 The Walt Disney Company Method and apparatus for providing a virtual world sound system
EP0674467B1 (en) 1993-10-04 2006-11-29 Sony Corporation Audio reproducing device
US6577738B2 (en) 1996-07-17 2003-06-10 American Technology Corporation Parametric virtual speaker and surround-sound system
US6038330A (en) * 1998-02-20 2000-03-14 Meucci, Jr.; Robert James Virtual sound headset and method for simulating spatial sound
FR2854537A1 (fr) 2003-04-29 2004-11-05 Hong Cong Tuyen Pham Casque acoustique pour la restitution spatiale d'un son.
JP4921470B2 (ja) 2005-09-13 2012-04-25 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 頭部伝達関数を表すパラメータを生成及び処理する方法及び装置
US7697709B2 (en) * 2005-09-26 2010-04-13 Cyber Group Usa, Inc. Sound direction/stereo 3D adjustable earphone
JP5265517B2 (ja) 2006-04-03 2013-08-14 ディーティーエス・エルエルシー オーディオ信号処理
US20080211768A1 (en) * 2006-12-07 2008-09-04 Randy Breen Inertial Sensor Input Device
US8509454B2 (en) * 2007-11-01 2013-08-13 Nokia Corporation Focusing on a portion of an audio scene for an audio signal
TW200939853A (en) * 2008-03-14 2009-09-16 Cotron Corp Speaker structure capable of adjusting ventilation of a chamber therein
US8320578B2 (en) * 2008-04-30 2012-11-27 Dp Technologies, Inc. Headset
KR101576294B1 (ko) 2008-08-14 2015-12-11 삼성전자주식회사 가상 현실 시스템에서 사운드 처리를 수행하기 위한 장치 및 방법
JP4735993B2 (ja) 2008-08-26 2011-07-27 ソニー株式会社 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法
US8724834B2 (en) 2010-01-06 2014-05-13 Honeywell International Inc. Acoustic user interface system and method for providing spatial location data
US20130116811A1 (en) * 2010-07-06 2013-05-09 Bang & Olufsen A/S Method and an apparatus for a user to select one of a multiple of audio tracks
JP5696427B2 (ja) * 2010-10-22 2015-04-08 ソニー株式会社 ヘッドフォン装置
US8576276B2 (en) * 2010-11-18 2013-11-05 Microsoft Corporation Head-mounted display device which provides surround video
US8825187B1 (en) 2011-03-15 2014-09-02 Motion Reality, Inc. Surround sound in a sensory immersive motion capture simulation environment
EP2503800B1 (en) 2011-03-24 2018-09-19 Harman Becker Automotive Systems GmbH Spatially constant surround sound
US8223024B1 (en) * 2011-09-21 2012-07-17 Google Inc. Locking mechanism based on unnatural movement of head-mounted display
GB2501767A (en) 2012-05-04 2013-11-06 Sony Comp Entertainment Europe Noise cancelling headset
KR101343550B1 (ko) 2012-07-04 2013-12-20 인텔렉추얼디스커버리 주식회사 시각 장애인을 위한 3차원 오디오 렌더링 기반 네비게이션 장치
GB2519487B (en) * 2012-08-02 2020-06-10 Pong Ronald Headphones with interactive display
KR101974652B1 (ko) 2012-08-09 2019-05-02 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 오디오 출력과 비디오 출력을 연계하여 조정하는 헤드 마운트 디스플레이 및 그 제어 방법
US8903104B2 (en) 2013-04-16 2014-12-02 Turtle Beach Corporation Video gaming system with ultrasonic speakers
GB201310360D0 (en) 2013-06-11 2013-07-24 Sony Comp Entertainment Europe Head-Mountable apparatus and systems
US20170153866A1 (en) * 2014-07-03 2017-06-01 Imagine Mobile Augmented Reality Ltd. Audiovisual Surround Augmented Reality (ASAR)
US10089063B2 (en) * 2016-08-10 2018-10-02 Qualcomm Incorporated Multimedia device for processing spatialized audio based on movement
US10613336B2 (en) * 2017-01-27 2020-04-07 Otoy, Inc. Headphone based modular VR/AR platform

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101185368A (zh) * 2005-05-27 2008-05-21 马丁坎托拉咨询有限公司 用于声换能器的组件、系统以及方法
CN102395098A (zh) * 2005-09-13 2012-03-28 皇家飞利浦电子股份有限公司 生成3d声音的方法和设备
WO2013090100A1 (en) * 2011-12-12 2013-06-20 John Clavin Connecting head mounted displays to external displays and other communication networks
CN103535051A (zh) * 2012-08-02 2014-01-22 庞博文 带互动显示屏的耳机

Also Published As

Publication number Publication date
CN107852539B (zh) 2019-01-11
TW201644288A (zh) 2016-12-16
US10237678B2 (en) 2019-03-19
AU2015397085A1 (en) 2017-12-21
EP3304927A4 (en) 2018-07-18
TWI790192B (zh) 2023-01-21
US20180184226A1 (en) 2018-06-28
EP3304927A1 (en) 2018-04-11
AU2015397085B2 (en) 2018-08-09
WO2016195589A1 (en) 2016-12-08

Similar Documents

Publication Publication Date Title
KR102551780B1 (ko) 비차단 이중 드라이버 이어폰들
CN108141696B (zh) 用于空间音频调节的系统和方法
US20220159380A1 (en) Microphone for recording multi-dimensional acoustic effects
EP2863654B1 (en) A method for reproducing an acoustical sound field
ES2934801T3 (es) Procesador de audio, sistema, procedimiento y programa informático para renderización de audio
JP5611463B2 (ja) 携帯用通信装置および有向音声出力を使用する通信の円滑化
CN106416304B (zh) 针对家庭音频的增强的空间印象
CN107996028A (zh) 校准听音装置
CN106797524B (zh) 用于渲染声学信号的方法和装置及计算机可读记录介质
US11122384B2 (en) Devices and methods for binaural spatial processing and projection of audio signals
US8442244B1 (en) Surround sound system
US9769585B1 (en) Positioning surround sound for virtual acoustic presence
CN106664499A (zh) 音频信号处理装置
US11902772B1 (en) Own voice reinforcement using extra-aural speakers
BR112021011170A2 (pt) Aparelho e método para reproduzir uma fonte sonora espacialmente estendida ou aparelho e método para gerar um fluxo de bits a partir de uma fonte sonora espacialmente estendida
CN107852539B (zh) 耳机装置及控制耳机装置的方法
KR20190059642A (ko) 귀 개방형 헤드폰을 이용한 다채널 사운드 구현 장치 및 그 방법
CN109587601A (zh) 使用虚拟声学系统将声音移入和移出听者头部的系统
US20130243201A1 (en) Efficient control of sound field rotation in binaural spatial sound
CN110536199A (zh) 近耳式音响装置和音效再现方法
US10735885B1 (en) Managing image audio sources in a virtual acoustic environment
JP2019515533A (ja) 個々の要件を考慮して音声を再生するための方法
JP2018152834A (ja) 仮想聴覚環境において音声信号出力を制御する方法及び装置
WO2019174442A1 (zh) 拾音设备、声音输出方法、装置、存储介质及电子装置
CN108271098A (zh) 音响机构以及音响系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant