CN107710784A - 用于音频创建和传递的系统和方法 - Google Patents

用于音频创建和传递的系统和方法 Download PDF

Info

Publication number
CN107710784A
CN107710784A CN201680029679.4A CN201680029679A CN107710784A CN 107710784 A CN107710784 A CN 107710784A CN 201680029679 A CN201680029679 A CN 201680029679A CN 107710784 A CN107710784 A CN 107710784A
Authority
CN
China
Prior art keywords
user
transducer
ear
audio signal
hrtf
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680029679.4A
Other languages
English (en)
Other versions
CN107710784B (zh
Inventor
H·甘珀
M·R·P·托马斯
I·J·塔舍夫
D·E·约翰斯通
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN107710784A publication Critical patent/CN107710784A/zh
Application granted granted Critical
Publication of CN107710784B publication Critical patent/CN107710784B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/307—Frequency adjustment, e.g. tone control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H04R5/0335—Earpiece support, e.g. headbands or neckrests
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1058—Manufacture or assembly
    • H04R1/1075—Mountings of transducers in earphones or headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • H04S7/304—For headphones
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/001—Monitoring arrangements; Testing arrangements for loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Manufacturing & Machinery (AREA)
  • Stereophonic System (AREA)
  • Headphones And Earphones (AREA)

Abstract

本文公开了用于提供音频信号的系统和方法。在一个实施例中，产生音频信号的方法包括将例如头部相关传输函数(HRTF)和换能器位置补偿滤波器应用于输入音频信号以生成经增强的音频信号，该经增强的音频信号被配置为从由头戴耳机承载并且与用户的耳朵入口间隔开的换能器朝向用户的耳朵入口传送。

Description

用于音频创建和传递的系统和方法
技术领域
所描述的技术通常涉及传送音频信号，更具体地涉及从与用户的耳朵间隔开的一个或多个换能器向用户的耳朵传递音频的系统和方法。
背景
人类听觉系统能够通过分析到达双耳入口的声音信号中的听觉线索来确定声源的位置。听觉线索(例如，耳间时间差(ITD)和/或耳间强度差(ILD))可由于收听者的头部、躯干和耳廓滤波声音信号而导致。这种滤波行为可以根据用户的头部相关传输函数(HRTF)来描述。将HRTF应用于3D音频信号为用户提供了在穿戴在用户的耳朵内的、穿戴在用户的耳朵上的和/或穿戴在用户的耳朵附近的头戴耳机上再现空间音频所需要的空间线索。
概述
提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并不旨在标识出所要求保护的主题的关键因素或必要特征，也不旨在用于限定所要求保护的主题的范围。在一些实施例中，例如，被配置为穿戴在用户的头部上的音频设备(例如，耳机)包括由音频设备承载的换能器，该换能器被配置成当音频设备被穿戴在用户的头部上时，被部署在接近用户的头部并与用户的耳朵间隔开的位置处。音频设备可进一步包括电子设备，该电子设备被通信地耦合到换能器并被配置为将头部相关传输函数(HRTF)和换能器位置补偿滤波器两者应用于音频信号，以当声音从换能器向用户的耳朵传送时，在用户的耳朵入口处提供具有经增强的频率响应的声音。
附图简述
图1A是根据所公开的技术的一个实施例配置的被显示为穿戴在用户的头部上的设备的后侧立体图。
图1B是图1A的用户的头部的坐标系的示意性侧视图。
图1C-1E是图1A的设备的前底面、后底面和后底面的透视图。
图1F是图1A的设备的一部分的放大视图。
图2是根据所公开的技术的一实施例配置的系统的示意性视图。
图3是示出了根据所公开的技术的一实施例配置的用于产生音频信号的过程的流程图。
图4是示出根据所公开的技术的一实施例配置的用于滤波音频信号的过程的流程图。
图5是示出根据所公开的技术的一实施例配置的音频信号频率响应和滤波器频率响应的图。
图6是示出根据所公开的技术的一实施例配置的滤波器的频率响应的图。
图7是示出了根据所公开的技术的一实施例配置的用于确定用户的头部相关传输函数(HRTF)的过程的流程图。
图8是示出了根据所公开的技术的一实施例配置的用于选择用户的HRTF的过程的流程图。
详细描述
本公开描述了向用户的耳朵传送和/或传递音频信息的各种设备、系统和方法。将用户的头部相关传输函数(以下称为HRTF)应用到其的音频信号可在通过位于用户的耳道入口上和/或直接邻近用户的耳道入口的头戴耳机和/或耳机进行回放时提供逼真的空间收听体验。经由不直接邻近用户的耳道入口的换能器(例如定位在距用户的耳道入口约4cm至10cm之间处的换能器)来回放音频信号可导致音频质量和真实性的显著降低。由用户的耳朵的物理结构导致的反射可能会在音频信号中产生失真。发明人已经认识到，向将用户的HRTF应用到其的音频信号应用换能器位置补偿滤波器可减轻由相对于用户的耳道入口而言偏离中心位置的换能器所引入的频谱着色。
在一些实施例中，将音频信息传递到用户的耳朵的方法包括接收音频信号(例如，空间音频信号、单声道音频信号、多声道音频信号)。该方法进一步包括通过将滤波器应用于音频信号并且从被配置为穿戴在用户的头部上的头戴耳机所承载的换能器向用户的耳朵传送经滤波的音频信号来生成经滤波的音频信号。换能器被配置为当头戴耳机被穿戴在用户的头部上时被定位在与用户的耳朵的耳道入口纵向间隔开一定距离(例如，在约2cm至约12cm之间、约4cm至约10cm之间、约6cm至8cm之间和/或大约是用户的头部的相同侧上的用户的耳朵和用户的眼睛之间的距离的二分之一)的位置处。应用滤波器包括在一频率范围内(例如，约1千赫兹(kHz)至约10kHz之间)改变音频信号的一部分。经滤波的音频信号被配置为提供具有基本上与从位于耳道入口处的换能器发射的声音的频谱相似的频谱的声音。在一些方面，该方法包括检测换能器和用户的耳道入口之间的取向和/或距离(例如在约4cm至约10cm之间)。在一些方面，换能器由头戴耳机的头带承载，并且被配置成沿着头带的底面上的凹槽移动，使得换能器在相对于用户的耳道入口而言的至少第一位置和第二位置之间是可移动的。在这些方面，该方法还包含进一步包括当换能器沿着凹槽从第一位置向第二位置移动时修改滤波器。在一些方面，该方法包括通过将用户的HRTF应用于音频信号来生成经修改的音频信号。在一些方面，该方法还包括：检测用户的一个或多个人体测量(例如，头部宽度或头部深度)，将用户的一个或多个人体测量特征与HRTF数据库中的一个或多个HRTF相匹配，以及基于与用户的一个或多个人体测量相匹配的一个或多个HRTF来调整滤波器。在一些方面，该方法进一步包括使用人体测量数据来构造和/或调整应用于经修改的音频信号的滤波器。
在一些实施例中，设备(例如，空间音频回放设备、头戴耳机、增强现实或虚拟现实设备)包括被配置为被穿戴在用户的头部上的头戴耳机和由该头戴耳机承载的换能器。换能器被配置成当头戴耳机被穿戴在用户的头部上时与用户的耳朵间隔开一距离。存储器被配置成存储可执行指令；以及处理器被配置成执行存储在该存储器上的指令。该指令包括用于提供具有基本上与从位于用户的耳朵入口处的换能器发射的声音的频谱相似的频谱的音频信号的指令。在一些方面，该距离等于用户的头部的相同侧上的用户的耳朵和眼睛之间的距离的大约二分之一。在一些方面，该距离在1kHz处的声音波长的约二分之一至四分之一之间。在一些方面，该距离在约4cm至约10cm之间。在一些方面，换能器被配置为沿着头戴耳机的圆周相对于用户的耳朵从第一位置向第二位置移动。在一些方面，传感器被配置为提供指示换能器沿着头戴耳机向处理器移动的信号。在一些方面，头戴耳机包括与第二头带部分相对的第一头带部分。在一些方面，第一头带部分和第二头带部分可在第一配置和至少第二配置之间调节。在这些方面，用于提供音频信号的指令包括用于将头部相关传输函数(HRTF)应用于音频信号的指令，并且指令进一步包括用于当第一头带部分和第二头带部分从第一配置被调整至第二配置时修改HRTF的指令。
在一些实施例中，系统(例如，增强现实系统)包括被配置为被穿戴在用户的头部上的增强现实设备(例如，头戴耳机)和由该增强现实设备承载的换能器。换能器被配置为当增强现实设备被穿戴在用户的头部上时被部署在邻近用户的头部并与用户的耳朵间隔开的位置处。该系统可进一步包括电子设备(例如，包括存储器和处理器的系统电子设备)，该电子设备被通信地耦合到换能器并被配置为将头部相关传输函数(HRTF)和换能器位置补偿滤波器两者应用于音频信号以提供从换能器向用户的耳朵传送的声音，该声音在用户的耳朵入口处具有基本上与位于用户的耳朵入口处的换能器传送的声音的频率响应相似的频率响应。在一些方面，换能器被定位在增强现实设备上并与用户的耳朵入口之间的距离在约4cm至约10cm之间。在一些方面，该系统进一步包括被配置为产生指示用户的人体测量特征的第一电信号的第一传感器，以及被配置为产生指示换能器与用户的耳朵入口之间的距离的第二电信号的第二传感器。在这些方面，电子设备被进一步配置为基于第一电信号来调整HRTF，并且基于第二电信号来调整换能器位置补偿滤波器。
下面更详细地描述所公开技术的这些和其他方面。在下面的描述和图1A-8中给出了某些细节，以提供对所公开技术的各种实施例的全面理解。描述通常与空间音频创建、传递和相关方法和系统相关联的公知结构和系统的其它细节未在下面的公开中被阐述以避免不必要地模糊对各种实施例的描述。
在各附图中，相同附图标记标识相同，或至少大致相似的元素。为了便于讨论任何特定元素，任何附图标记的最高有效位或数字指的是首先引入该元素的图。例如，首先参考图1A引入并讨论元素110。图中所示的许多细节、尺寸、角度和其它特征仅仅是本公开的特定实施例的解说。因此，在不背离本发明的精神或范围的情况下，其他实施例可具有其他细节、尺寸、角度和特征。此外，本领域的那些普通技术人员将理解，可在没有下面描述的几个细节的情况下实践本发明的其他实施例。
合适的设备
图1A是根据所公开的技术的一个实施例配置的被视为穿戴在用户的头部102上的设备110的后侧立体图。设备110(例如，头戴耳机、个人收听设备、增强现实设备和/或虚拟现实设备)包括被配置为穿戴在用户头部上的头带112和由该头带112承载并定位在与耳朵105(即，用户的左耳)的入口间隔开的位置处的第一换能器120a。不同于传统的头戴耳机和耳机，换能器120a被配置为由头带112承载在不直接邻近耳朵105的入口的位置处。在一些实施例中，换能器120a与耳朵105的入口间隔开超过2cm。在一些实施例中，换能器120a和耳朵105的入口之间的距离在约2cm至12cm之间(例如，约4cm至约10cm之间、约5cm至9cm或约7cm之间)。在一些实施例中，换能器120a和耳朵105的入口之间的距离在约20至80毫米之间。
如下面进一步详细讨论的，设备110和换能器120a可被配置为接收音频信号、将HRTF应用于信号、并且进一步对信号应用换能器位置补偿滤波器以将空间音频传递到耳朵105的入口，该空间音频与未经滤波的空间声音(例如，没有将换能器位置补偿滤波器应用于其的空间声音)相比具有经增强的感知质量(例如，相对未修改的频率响应)，从而提供更逼真的空间音频体验。
图1B是图1A的用户的头部102的坐标系的示意性侧视图，示出了相对于XYZ坐标系而言用户的耳朵105、眼睛102a(即，用户的左眼)和鼻子102b具有方位角和仰角θ。图1B的x轴对应于范围尺寸，而z轴对应于仰角尺寸。由x和y轴定义的平面对应于与耳朵105的入口共面的方位角平面。
图1C-1E是设备110的前底面、后底面和后底面的透视图。将图1A和图1C-1E一起参考，头带112包括第一头带部分113a和第二头带部分113b。可调整的内部头带部分115允许调节头带112的大小以容纳各种大小和/或形状的头部。显示器116被配置为向用户输出视觉信息(例如，文本、图像和/或视频)。鼻梁117被配置为搁置在用户的鼻子102b上，并且护目镜118被配置成保护设备110的各部分，并且还可被配置为用于减少穿过其的光的量。换能器120b被定位在设备110的相对侧上来作为换能器120。换能器120a和120b被配置成沿头带112的圆周经由形成在设备110的下底面中的相应凹槽124进行移动。在一些实施例中，凹槽124中的一个或多个传感器(未示出)被配置为产生指示换能器120a和120b沿凹槽124的移动的信号。然而，在其它实施例中，换能器120a和120b相对于设备110而言具有固定的位置。在一些实施例中，例如，凹槽124被配置成为设备110中的电子设备和/或其他产热组件提供通风。
图1F是图1A中示出的设备110和耳朵105的一部分的放大视图。在图1F中示出了常见于人耳耳廓的解剖结构和特征以供读者参考。耳朵105包括三角窝105a、耳甲艇105b、螺旋核105c、耳屏105d、耳道105e、耳垂105f、对耳屏105g、对螺旋105i、螺旋105j、舟状窝105k、对螺旋的下肢105l和耳甲腔105m(即，耳道内腔和/或通向耳朵105的听觉道105的前庭或开口)。为清楚起见，未示出额外的解剖学结构。如图1F所示，换能器120a被定位在距耳甲腔105m的距离D处的头带112上，在x方向上间隔开范围R(图1B)，而在z方向上处于相对于耳甲腔105m而言成角度B(例如，35-45度)的高度H上(图1B)。在一些实施例中，距离D可在约2cm至约12cm之间或约4cm至10cm的范围之间。此外，换能器120a在图1F中被示为位于耳甲腔105m上方的z方向上的高度H处。然而，在其他实施例中，换能器120a可被定位在相对于耳朵105而言的任何合适的位置处。在一些实施例中，例如，换能器120a可由位于耳甲腔105m下方的头戴耳机承载。
合适的系统
图2以及下面的讨论提供了其中可以实现该技术的合适的计算环境的简要的一般描述。虽然未作要求，但各技术方面将在诸如例程等由通用计算机执行的计算机可执行指令的一般上下文中描述。该技术的各方面可被嵌入在专门编程、配置、或构建的以执行在此详细解释的一个或多个计算机可执行指令的专门目的计算机或数据处理器中。该技术的各方面也可在分布式计算环境中实现，其中任务或模块由通过通信网络(例如，无线通信网络、有线通信网络、蜂窝通信网络、因特网、短距离无线电网络(例如，经由蓝牙))连接的远程处理设备执行。在分布式计算环境中，程序模块可位于本地和远程的存储器存储设备两者中。
该技术的各方面下的计算机实现的指令、数据结构、屏幕显示、和其它数据可被存储或分布在计算机可读存储介质上，包括磁性或光可读计算机盘片、如半导体存储器、纳米技术存储器、有机或光存储器、或其它便携和/或非瞬态数据存储介质上的微代码。在一些实施例中，在一段时间内技术的各方面可被分布在因特网或其他网络(例如，蓝牙网络)的传播介质(例如，电磁波(s)、声波)中的传播信号上，或可被提供在任何模拟或数字网络(分组切换、线路切换或其他方案)。
图2是根据所公开的技术的一实施例配置的系统201的示意图。在所例示的实施例中，系统201包括耦合到音频设备210的系统电子设备203(例如，图1A和1C-1E的设备110、音频头戴耳机、虚拟现实耳机、或增强现实耳机)。在一些实施例中，系统电子设备203可包括部分地或全部地结合到设备210中的一个或多个组件。然而，在其他实施例中，系统电子设备203可包括远离设备210的组件。系统电子设备203可驻留在例如移动设备(例如，移动电话、平板、个人数字助理)和/或计算机(例如，台式计算机、膝上型计算机)上以通信地耦合到设备210。
系统电子设备203包括若干组件，包括：存储器203a(例如，一个或多个计算机可读存储模块、组件、设备)，一个或多个处理器203b、通信组件203c(例如，有线通信链路和/或无线通信链路(例如，蓝牙、Wi-Fi、红外线和/或另一无线电传输网络))和被配置为存储用于生成空间音频的数据(例如，等式、滤波器、HRTF数据库)的数据库203d。在一些实施例中，系统电子设备203可包括图2中未示出的附加组件。存储器203a可被配置为存储信息(例如，用户信息或简档、环境数据、从一个或多个传感器收集的数据、媒体文件)和/或可由一个或多个处理器203b执行的可执行指令。如下面参考图3-5进一步详细解释的，存储器203a可包括例如用于增强将从音频输出220(例如，图1A的换能器120a)输出的音频信号的指令。通信组件203c还可被配置为从一个或多个音频源107、移动设备108、一个或多个计算机109、和/或另一外置设备接收数据(例如，包含用于回放的空间音频信息的数据)。
设备210被耦合到系统电子设备203并包括视觉输出(例如，图1D和1E的显示器116)，音频输出220(例如，图1A和1C-1E的换能器120a和120b、和/或一个或多个音频换能器(例如，电声扬声器、压电换能器、静电换能器))，一个或多个音频输入221(例如，一个或多个麦克风)，一个或多个传感器222(例如，一个或多个加速度计、温度计、湿度计、血压传感器、高度计、陀螺仪、磁力计、接近传感器、气压计、霍尔效应传感器)，和通信组件223(例如，有线通信链路和/或无线通信链路(例如，蓝牙、WiFi、红外线和/或另一无线电传输网络))。电源225(例如，一个或多个电池和/或电容器)可向系统201的各组件和/或系统电子设备203提供电力。电源225可以是可重复充电的，例如经由电力电缆、感应充电和/或其他合适的重复充电方法。
图3是示出了根据所公开的技术的一实施例配置的用于产生音频信号的过程300的流程图。在一些实施例中，过程300可包括例如被存储在系统201(图2)的存储器203a上的可由一个或多个处理器203b(图2)执行的指令。在一些实施例中，过程300的各部分由一个或多个硬件组件(例如，被容纳在设备110中和/或由设备110承载的数字信号处理器)执行。在一些实施例中，过程300的各部分由外置于系统201的设备执行。
该过程300起始于框310。在框320处，过程300经由有线或无线通信链路(例如，图2的通信组件203c和/或223)从外置音频源(例如，媒体播放器、移动设备、计算机、一个或多个远程服务器)接收一个或多个音频信号(例如，空间音频信号)。在一些实施例中，过程300在框325解码音频信号(例如，使用存储在存储器203a和/或硬件解码器上的解码指令)。例如，过程300可将音频信号从压缩格式(例如，mp3、mp4、FLAC)转换为未压缩格式。在一些实施例中，音频信号包括多声道音频信号和/或包括记录声场的球面分解的格式(例如，B格式和/或立体混响)。在这些实施例中，过程300可经由一个或多个换能器(例如，图1C-1E的换能器120a和120b)来调节或以其它方式准备用于回放的音频信号。然而，在其他实施例中，过程300跳过框325并前进到框330。
在框330，过程300将第一滤波器应用于所接收的音频信号以生成结合用户的身体的物理结构的滤波效果的经修改的音频信号。第一滤波器可包括例如HRTF、对应的HRIR(头部相关脉冲响应)、和/或另一适当的解剖学传输函数。在一些实施例中，第一滤波器包括用户的HRTF，其可例如被存储在存储器203a和/或数据库203d(图2)中。在一些实施例中，第一滤波器包括被存储在HRTF数据库(例如，图2的数据库203d)中并基于用户的人体测量(例如，头部形状、头部宽度、头部长度)而选择的复合HRTF。在一些实施例中，如下面参考图7和8所描述的，通过用户的人体测量的度量来计算、建模或以其他方式确定第一滤波器。例如，第一滤波器可包括基于从位于头戴耳机(例如，图1A的设备110和/或图2的设备210)上的传感器(例如，图2的一个或多个传感器222)接收的用户的头部大小的度量来计算的HRTF。也可例如使用用户的头部和/或耳廓的光学度量(例如，图像、激光度量)来确定第一滤波器。在一些实施例中，第一滤波器包括使用
在共同转让的美国专利申请12/903，610号(现为美国专利8,767,968号)中公开的技术和/或方法中的一种或多种获得的HRTF。
在框340，过程300将诸如换能器位置补偿滤波器的第二滤波器应用于在框330生成的经修改的音频信号。如下面参考图4和5更详细地描述的，第二滤波器可包括被配置为被应用于来自框330的经修改的音频信号的滤波器，使得从被定位在用户的耳朵的附近并与其入口间隔开的换能器(例如，图1A的换能器120a)输出时所产生的经滤波的音频信号在用户的耳朵(例如，图1A或图1F中的耳朵105)的入口处具有未失真的频谱。在一些实施例中，如下面参考图4所描述的，换能器位置补偿滤波器可基于例如换能器特征和/或用户的人体测量来生成或计算。在一些实施例中，换能器位置补偿滤波器可以是预先确定的(例如，被存储在图2的存储器203a和/或数据库203d中)。
在框350，经滤波的音频信号被输出到一个或多个换能器(例如，图1C-1E的换能器120a和/或120b和/或图2的音频输出220)。在一些实施例中，换能器与用户的耳道入口间隔开。然而，在其他实施例中，换能器被定位成直接邻近用户的耳朵入口(例如，在一对头戴耳机或耳机之中和/或之上)。在框360，过程300结束。
图4是示出了根据所公开的技术的一实施例配置的用于生成换能器位置补偿的过程400的流程图。过程400被配置为生成或以其他方式输出换能器位置补偿滤波器，该换能器位置补偿滤波器被配置为增强从与用户的耳朵入口间隔开的换能器(例如，图1的换能器120a)传送的音频信号(例如，图3的框330处生成的空间音频信号)。在一些实施例中，过程400包括过程300的部分和/或子例程(例如，图3的框340)。在一些实施例中，过程400可包括例如被存储在可由一个或多个处理器203b(图2)执行的系统201(图2)的存储器203a上的指令。在一些实施例中，过程400的各部分可由一个或多个硬件组件(例如，被容纳在设备110中和/或由设备110承载的数字信号处理器)执行。在一些实施例中，过程400的部分可由外置于系统201的设备执行。
该过程400起始于框410。在框420，过程400可选地确定由头戴耳机(例如，图1A的设备110)承载的换能器(例如，图1A的换能器120a)和用户的对应耳朵入口之间的距离、取向和/或方向(例如，图1F的距离D)。在一些实施例中，使用一个或多个传感器(例如，图2的传感器222)来确定距离和/或方向。在一些实施例中，过程400被配置为在换能器相对于用户的耳朵而言在头戴耳机上移动(例如，沿着图1C和1E的凹槽124)的情况下，确定经更新的距离和/或方向度量。在一些实施例中，过程400可接收对应于来自由用户执行的度量的距离和/或方向的用户输入。然而，在其他实施例中，距离和/或方向可以是预先确定的，并且过程400可跳过框410并前进到框430。
在框430，过程400可以可选地接收来自头戴耳机(例如，图2的传感器222)上的传感器和/或邻近于用户的其它传感器的人体测量数据(例如，诸如头部形状、头部大小、耳朵位置、耳朵形状和/或耳朵大小之类的一个或多个用户人体测量的度量)和/或其他度量数据。在一些实施例中，度量数据可包括由位于和/或邻近用户的耳朵的话筒(例如，图2的音频输入221)获取的音频度量。过程400可被配置为例如基于所获取的音频度量来计算逆滤波器，其可被应用于音频信号以减轻从靠近用户的耳朵的换能器(例如，图1A和1F的换能器120a)传送的音频信号中的频率失真。然而，在其他实施例中，过程400可跳过框420和430并直接前进到框440。
在框440，过程400生成将被应用到音频信号的换能器位置补偿滤波器，使得音频信号产生与经滤波的音频信号从位于用户的耳朵附近(例如距用户的耳朵约4cm至约100cm之间)的换能器发送到用户的耳朵时的框330的音频信号相比在用户的耳朵处具有经增强的频率响应的声音。在一些实施例中，如下面参考图5和6所讨论的，换能器位置补偿滤波器可包括被配置为修改从换能器发射的音频信号的特定频率范围的滤波器。如本领域的那些普通技术人员将理解的，与用户的耳朵间隔开但接近于用户的耳朵的换能器可产生被用户的身体的物理结构扭曲、滤波或以其他方式影响的信号。例如，从被定位在偏离用户的耳朵入口中心的换能器发射的声音可能因耳廓反射而失真。过程400可应用换能器位置补偿滤波器，该滤波器至少部分地减轻由耳廓反射引起的失真，以在由换能器发射的声音进入用户的耳朵时提供经增强的或更平滑的频率响应。在一些实施例中，在框440生成的换能器位置补偿滤波器包括基于在框420和430处执行的度量和/或计算而计算的逆滤波器。在一些实施例中，换能器位置补偿包括增强了将HRTF应用在其上的并且从与用户耳朵间隔开的换能器向用户的耳朵发射的声音的质量和/或真实性的任何合适的滤波器。在框450，过程400结束。
示例
图5是示出在用户的耳朵入口处接收或度量的未校正的音频路径540的频率响应的图表500(例如，将HRTF应用到其而没有上文参考图3的框330讨论的换能器位置补偿滤波器的空间音频信号)，换能器位置补偿滤波器550和音频路径560所产生的频率响应。图表500包括第一频率范围551(例如，在约20Hz至约5kHz之间)、第二频率范围552(例如，在约4kHz至约8kHz之间或在约5kHz至约7kHz之间)、以及第三频率范围553(例如，在约7kHz至约20kHz之间)。第二频率范围以大约f1频率(例如，在约5kHz或7kHz之间的频率)为中心。音频信号路径540具有由例如来自用户的耳朵的耳廓的一个或多个声音反射引起的在频率f1处的槽口544。滤波器550具有以大约频率f1为中心的峰值554。将滤波器550应用于音频信号路径540，导致经滤波的音频路径560在用户的耳朵入口处与初始频率响应540相比具有经增强的(例如，更平滑和/或更低失真的)频率响应。
FIG.图6是根据本公开的实施例配置的换能器位置补偿滤波器650的另一示例的频率响应的图表600。滤波器650可被应用于从第一频率f1(例如，在约800Hz至约2kHz或约1kHz之间)延伸到第二频率f2(大约8kHz至约12kHz或约10kHz之间)的频率范围652处的音频信号。将滤波器650应用于将从被定位在与用户的耳朵入口间隔开的位置处的换能器(例如图1A的换能器120a)传送的音频信号，可导致从换能器向用户的耳朵传送的声音与传送自相同换能器的未经滤波的音频信号相比具有经增强的频率响应。
HRTF确定
如上文参考图3所讨论的，在一些实施例中，基于用户的人体测量或物理特征从HRTF库中确定用于该用户的HRTF。这些物理特征可基于来自传感器的输入来确定。图7是确定用于特定用户的HRTF的过程700的流程图。在一些实施例中，过程700至少部分地存储在存储器203a上并由图2的一个或多个处理器203b执行。例如，所产生的HRTF可被用于图3的过程300的步骤330。注意到，HRTF可在任何时刻被确定。作为一个示例，仅针对一用户确定一次HRTF，并将其存储以供重复使用。当然，修改HRTF(例如，选择新的HRTF)是可能的。
在框702，过程700指示用户采取某一位置或姿态。例如，过程700指示用户向左看。在框704，过程700收集在该位置处的用户的数据。在框706，过程700确定数据是否是有效的。例如，如果过程200期望用于右耳的数据，则过程200确定数据是否与右耳预期的数据相匹配。如果不是，则可重复框702的步骤，使得再次指示用户采取正确的姿态。如果数据是有效的(框706为是)，则过程700确定是否存在可被用户采取的更多的位置/姿态。在下一次迭代中，用户可能会被要求向前看、向右看等。可为各种各样的位置收集数据。
当合适的数据被收集时，过程700前进到框710以为用户确定HRTF。在一些实施例中，存在可从其中选择HRTF的HRTF库。这些HRTF可与用户的各种物理特征相关联。示例包括但不限于头部大小和宽度、耳廓特征、身体大小。例如，具体的HRTF可与关于头部大小和耳廓的特定度量相关联。度量可能是范围或单个值。例如，一度量可能是可以用单个值或范围来表示的头部宽度。过程700可然后通过将用户的物理特征与库中的HRTF相关联的物理特征相匹配来为用户选择HRTF。任何技术都可被用于确定最佳匹配。在一些实施例中，过程700内插以确定用户的HRTF。例如，用户的度量可位于两个HRTF的度量之间，在此情况下，可通过对两个HRTF的参数进行内插来确定用户的HRTF。
接下来，过程700可执行附加步骤来验证此HRTF确定是良好的，但也可能为该用户选择更好的HRTF。在框712，系统为用户播放音频信号。这可通过由用户穿戴的头戴耳机(例如，图1A的设备110)来播放。在框714，过程700可要求用户指向音频信号的表现源。在框716，过程700使用相机和/或一个或多个其他传感器确定用户正指向的位置。在一些实施例中，过程700可使用其他声音来重复框712-716，直到过程700(在框717)确定已收集到足够的数据。
在框718，过程700确定HRTF的有效性。例如，过程700确定用户能够多精确地定位虚拟声音。系统然后确定是否应该为该用户确定不同的HRTF。如果是，则通过返回到框710来确定新的HRTF。过程700可重复框712-718直到确定令人满意的HRTF。
在框722，过程700存储该用户的HRTF。注意到，这不一定是过程700中测试的最后一个HRTF。即，过程700可确定在过程700中较早测试的HRTF之一可能是更优的。还注意到，可为给定用户存储多于一个的HRTF。例如，可针对用户穿戴眼镜和未穿戴眼镜的两种情况重复过程700，并针对每种情况存储一个HRTF。
如上所述，确定用户的详细特征以使得可为用户存储HRTF的过程可能不被频繁地进行——也许只进行一次。图8描绘了基于先前收集的详细特征为用户选择HRTF的过程800的一个实施例的流程图。例如，过程700可在过程800之前被执行一次。然而，过程800可被执行多次。在框802，过程800使用生物测定信息来标识用户。请注意，此信息与过程700期间收集的信息不同。但是，可能会存在一些信息的重叠是有可能的。在一个实施例中，系统能够基于例如面部识别来识别收听者。
在框804，过程800为在框802被标识的用户选择合适的HRTF。在一个实施例中，选择由过程700为用户存储的HRTF。在另一实施例中，过程800可基于由过程700收集的用户特征来选择HRTF。如果需要的话，这些经存储的详细用户特征可通过当前收集的信息来增强。例如，过程800可基于用户是否正穿戴例如帽子和/或眼镜来选择不同的HRTF。
从上文将会认识到，在此已出于说明目的描述了本发明的各具体实施例，但是可以作出各种修改而不背离本发明的范围。因此，本发明只受所附权利要求限制。

Claims (14)

1.一种从由被配置为穿戴在用户的头部上的头戴耳机所承载的换能器向用户的耳朵传递音频信号的方法，所述方法包括：
接收音频信号；
通过将滤波器应用于所述音频信号来生成经滤波的音频信号，其中应用所述滤波器包括在一频率范围内改变所述音频信号的一部分，其中所述换能器被配置成当所述头戴耳机被穿戴在所述用户的头部上时被定位在与所述用户的耳朵的耳道的入口纵向间隔开一定距离的位置处，以及其中所述经滤波的音频信号被配置为当所述经滤波的音频信号从所述换能器朝向所述用户的耳朵传送时在所述用户的耳朵处提供与所述音频信号相比具有经增强的频率响应的声音；以及
从所述换能器向所述用户的耳朵传送所述经滤波的音频信号。
2.如权利要求1所述的方法，其特征在于，进一步包括检测所述换能器相对于所述用户的耳道的所述入口而言的取向。
3.如权利要求1所述的方法，其特征在于，所述换能器与所述用户的耳道的所述入口之间的距离在约2cm至约10cm之间。
4.如权利要求1所述的方法，其特征在于，所述换能器由所述头戴耳机的头带承载，并且其中所述换能器被配置成沿着所述头带的圆周移动，使得所述换能器相对于所述用户的耳道的所述入口在至少第一位置和第二位置之间是可移动的，进一步包括当所述换能器沿所述头带从所述第一位置向所述第二位置移动时调整所述滤波器。
5.如权利要求1所述的方法，其特征在于，所述频率范围在约1kHz至10kHz之间。
6.如权利要求1所述的方法，其特征在于，进一步包括：
确定所述用户的耳朵的物理特征；以及
基于所确定的所述用户的耳朵的物理特征来调整所述频率范围。
7.如权利要求1所述的方法，其特征在于，所述换能器被配置为当所述头戴耳机被穿戴在所述用户的头部上时被定位在与所述用户的眼睛和与所述用户的耳朵的耳道的所述入口基本上等距离的位置处。
8.如权利要求1所述的方法，其特征在于，进一步包括通过将头部相关传输函数(HRTF)应用于所述音频信号来生成经修改的音频信号。
9.如权利要求8所述的方法，其特征在于，进一步包括：
检测所述用户的一个或多个人体测量；
将所述用户的一个或多个人体测量与HRTF数据库中的一个或多个HRTF相匹配；以及
使用与所述用户的所述一个或多个人体测量相匹配的所述一个或多个HRTF来调整被应用于所述音频信号的所述滤波器。
10.一种系统，包括：
被配置为被穿戴在用户的头部上的增强现实设备；
由所述增强现实设备承载的换能器，其中所述换能器被配置为当所述增强现实设备被穿戴在所述用户的头部上时被部署在邻近所述用户的头部并与用户的耳朵间隔开的位置处；以及
被通信地耦合到所述换能器的电子设备，其中所述电子设备被配置为将头部相关传输函数(HRTF)和换能器位置补偿滤波器两者应用于音频信号以提供从所述换能器向所述用户的耳朵传送的声音，所述声音在所述用户的耳朵入口处具有基本上与位于所述用户的耳朵的所述入口处的换能器传送的声音的频率响应相似的频率响应。
11.如权利要求10所述的系统，其特征在于，所述换能器与所述用户的耳朵的所述入口之间的距离在约4cm至约10cm之间。
12.如权利要求10所述的系统，其特征在于，所述换能器与所述用户的耳朵的所述入口之间的距离约为所述用户的头部的相同侧上的所述用户的所述耳朵和眼睛之间的距离的二分之一。
13.如权利要求10所述的系统，其特征在于，所述增强现实设备包括被配置为产生指示所述用户的人体测量特征的第一电信号的第一传感器，以及被配置为产生指示所述换能器与所述用户的耳朵的所述入口之间的距离的第二电信号的第二传感器。
14.如权利要求13所述的系统，其特征在于，所述电子设备被配置为基于所述第一电信号来调整所述HRTF，并且基于所述第二电信号来调整所述换能器位置补偿滤波器。
CN201680029679.4A 2015-05-22 2016-04-26 用于音频创建和传递的系统和方法 Active CN107710784B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/720,688 US9609436B2 (en) 2015-05-22 2015-05-22 Systems and methods for audio creation and delivery
US14/720,688 2015-05-22
PCT/US2016/029275 WO2016191005A1 (en) 2015-05-22 2016-04-26 Systems and methods for audio creation and delivery

Publications (2)

Publication Number Publication Date
CN107710784A true CN107710784A (zh) 2018-02-16
CN107710784B CN107710784B (zh) 2021-04-16

Family

ID=56027156

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680029679.4A Active CN107710784B (zh) 2015-05-22 2016-04-26 用于音频创建和传递的系统和方法

Country Status (4)

Country Link
US (2) US9609436B2 (zh)
EP (1) EP3298801A1 (zh)
CN (1) CN107710784B (zh)
WO (1) WO2016191005A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111818441A (zh) * 2020-07-07 2020-10-23 Oppo（重庆）智能科技有限公司 音效实现方法、装置、存储介质及电子设备
CN113302837A (zh) * 2019-01-15 2021-08-24 脸谱科技有限责任公司 骨传导换能器组件的校准
CN113711626A (zh) * 2019-04-22 2021-11-26 脸谱科技有限责任公司 用于确定头戴式装置的用户的头部相关传递函数的声音频率的远程推断

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2542609A (en) * 2015-09-25 2017-03-29 Nokia Technologies Oy Differential headtracking apparatus
US10142755B2 (en) * 2016-02-18 2018-11-27 Google Llc Signal processing methods and systems for rendering audio on virtual loudspeaker arrays
US10104459B2 (en) * 2016-10-14 2018-10-16 Htc Corporation Audio system with conceal detection or calibration
US20180115854A1 (en) * 2016-10-26 2018-04-26 Htc Corporation Sound-reproducing method and sound-reproducing system
US10306396B2 (en) 2017-04-19 2019-05-28 United States Of America As Represented By The Secretary Of The Air Force Collaborative personalization of head-related transfer function
US11150694B2 (en) * 2017-05-23 2021-10-19 Microsoft Technology Licensing, Llc Fit system using collapsible beams for wearable articles
US20190204606A1 (en) * 2018-01-03 2019-07-04 Ariadne's Thread (Usa), Inc. Virtual reality headset that enables use with a rear head support
US12010494B1 (en) * 2018-09-27 2024-06-11 Apple Inc. Audio system to determine spatial audio filter based on user-specific acoustic transfer function
US10871939B2 (en) * 2018-11-07 2020-12-22 Nvidia Corporation Method and system for immersive virtual reality (VR) streaming with reduced audio latency
US10932083B2 (en) * 2019-04-18 2021-02-23 Facebook Technologies, Llc Individualization of head related transfer function templates for presentation of audio content
US10812929B1 (en) * 2019-08-28 2020-10-20 Facebook Technologies, Llc Inferring pinnae information via beam forming to produce individualized spatial audio
DE102022107266A1 (de) 2021-03-31 2022-10-06 Apple Inc. Audiosystem und Verfahren zum Bestimmen von Audiofilter basierend auf der Vorrichtungsposition
USD967792S1 (en) * 2022-05-18 2022-10-25 Shenzhen Asike Trade Co., Ltd Bluetooth visor
USD967793S1 (en) * 2022-06-28 2022-10-25 Dongguan Pengsheng Electronic Technology Co., LTD Headband with headphones

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5742689A (en) * 1996-01-04 1998-04-21 Virtual Listening Systems, Inc. Method and device for processing a multichannel signal for use with a headphone
US6144747A (en) * 1997-04-02 2000-11-07 Sonics Associates, Inc. Head mounted surround sound system
CN1311622A (zh) * 2000-02-02 2001-09-05 松下电器产业株式会社 头戴耳机系统
US20060056639A1 (en) * 2001-09-26 2006-03-16 Government Of The United States, As Represented By The Secretary Of The Navy Method and apparatus for producing spatialized audio signals
US20070195963A1 (en) * 2006-02-21 2007-08-23 Nokia Corporation Measuring ear biometrics for sound optimization
CN103033952A (zh) * 2005-02-11 2013-04-10 奥克利有限公司 具有可拆卸的可调电子模块的眼镜
US20130177166A1 (en) * 2011-05-27 2013-07-11 Sony Ericsson Mobile Communications Ab Head-related transfer function (hrtf) selection or adaptation based on head size
US20140252236A1 (en) * 2011-03-07 2014-09-11 Kenneth Cottrell Enhancing depth perception
CN104581610A (zh) * 2013-10-24 2015-04-29 华为技术有限公司 一种虚拟立体声合成方法及装置

Family Cites Families (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4731848A (en) 1984-10-22 1988-03-15 Northwestern University Spatial reverberator
US4864619A (en) * 1987-04-15 1989-09-05 Spates G Michael Stereo headset-headband assemblies for headphones
WO1992009921A1 (en) 1990-11-30 1992-06-11 Vpl Research, Inc. Improved method and apparatus for creating sounds in a virtual world
US5887070A (en) * 1992-05-08 1999-03-23 Etymotic Research, Inc. High fidelity insert earphones and methods of making same
US5438698A (en) * 1992-12-14 1995-08-01 Sweat Accessories, Inc. Wearable audio reception device
ES2165656T3 (es) 1994-02-25 2002-03-16 Henrik Moller Sintesis binaural, funcion de transferencia respecto a una cabeza, y su utilizacion.
US5617477A (en) * 1995-03-08 1997-04-01 Interval Research Corporation Personal wearable communication system with enhanced low frequency response
US5881390A (en) * 1996-10-03 1999-03-16 Outdoor Dynamics, Incorporated Headband for use with personal stereo headphones
US5715323A (en) * 1996-10-07 1998-02-03 Walker; John D. Radio attachable to spectacles
US6243476B1 (en) 1997-06-18 2001-06-05 Massachusetts Institute Of Technology Method and apparatus for producing binaural audio for a moving listener
US6427018B1 (en) * 1997-07-18 2002-07-30 Cotron Corporation Adjustable earphones for personal audio and communication systems
US6990205B1 (en) 1998-05-20 2006-01-24 Agere Systems, Inc. Apparatus and method for producing virtual acoustic sound
US6996244B1 (en) * 1998-08-06 2006-02-07 Vulcan Patents Llc Estimation of head-related transfer functions for spatial sound representative
AUPQ514000A0 (en) 2000-01-17 2000-02-10 University Of Sydney, The The generation of customised three dimensional sound effects for individuals
US6631196B1 (en) * 2000-04-07 2003-10-07 Gn Resound North America Corporation Method and device for using an ultrasonic carrier to provide wide audio bandwidth transduction
US6631197B1 (en) * 2000-07-24 2003-10-07 Gn Resound North America Corporation Wide audio bandwidth transduction method and device
IL141822A (en) * 2001-03-05 2007-02-11 Haim Levy A method and system for imitating a 3D audio environment
US20030007648A1 (en) 2001-04-27 2003-01-09 Christopher Currell Virtual audio system and techniques
US20030059078A1 (en) * 2001-06-21 2003-03-27 Downs Edward F. Directional sensors for head-mounted contact microphones
US20030044002A1 (en) * 2001-08-28 2003-03-06 Yeager David M. Three dimensional audio telephony
CN1685762A (zh) * 2002-09-23 2005-10-19 皇家飞利浦电子股份有限公司 声音重现系统、程序和数据载体
US7720229B2 (en) * 2002-11-08 2010-05-18 University Of Maryland Method for measurement of head related transfer functions
TWI272032B (en) * 2003-12-04 2007-01-21 Temco Japan Communication system using bone conduction speaker
US20080044052A1 (en) * 2003-12-05 2008-02-21 Whipple Kingsley A Audio headband device
WO2005117797A2 (en) * 2004-05-26 2005-12-15 The Metrohealth System Method and apparatus for relief of headache
JP2008544625A (ja) * 2005-06-15 2008-12-04 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ インイヤホン
US7889881B2 (en) * 2006-04-25 2011-02-15 Chris Ostrowski Ear canal speaker system method and apparatus
US7590258B2 (en) * 2006-07-05 2009-09-15 Mark Andrew Krywko In-ear earphone
US20080031475A1 (en) * 2006-07-08 2008-02-07 Personics Holdings Inc. Personal audio assistant device and method
US8027481B2 (en) * 2006-11-06 2011-09-27 Terry Beard Personal hearing control system and method
US8270616B2 (en) 2007-02-02 2012-09-18 Logitech Europe S.A. Virtual surround for headphones and earbuds headphone externalization system
CN101960866B (zh) 2007-03-01 2013-09-25 杰里·马哈布比 音频空间化及环境模拟
AU2008344972B2 (en) * 2007-12-31 2013-03-28 Koss Corporation Adjustable shape earphone
US20090238371A1 (en) 2008-03-20 2009-09-24 Francis Rumsey System, devices and methods for predicting the perceived spatial quality of sound processing and reproducing equipment
CN102077607B (zh) * 2008-05-02 2014-12-10 Gn奈康有限公司 组合至少两个音频信号的方法和包括至少两个麦克风的麦克风系统
US8111853B2 (en) * 2008-07-10 2012-02-07 Plantronics, Inc Dual mode earphone with acoustic equalization
US8189846B2 (en) * 2008-09-05 2012-05-29 Apple Inc. Vented in-the-ear headphone
US8428269B1 (en) 2009-05-20 2013-04-23 The United States Of America As Represented By The Secretary Of The Air Force Head related transfer function (HRTF) enhancement for improved vertical-polar localization in spatial audio systems
EP2457232A1 (en) 2009-07-24 2012-05-30 Johannes Kepler Universität Linz A method and an apparatus for deriving information from an audio track and determining similarity between audio tracks
US8538049B2 (en) * 2010-02-12 2013-09-17 Audiotoniq, Inc. Hearing aid, computing device, and method for selecting a hearing aid profile
WO2011115837A2 (en) * 2010-03-15 2011-09-22 National Acquisition Sub, Inc. Adaptive active noise cancellation system
US20110251489A1 (en) * 2010-04-07 2011-10-13 Physiosonics, Inc. Ultrasound monitoring systems, methods and components
FR2958825B1 (fr) * 2010-04-12 2016-04-01 Arkamys Procede de selection de filtres hrtf perceptivement optimale dans une base de donnees a partir de parametres morphologiques
US8545013B2 (en) * 2010-04-27 2013-10-01 Kopin Corporation Wearable electronic display
US8613714B2 (en) * 2010-10-05 2013-12-24 Cerevast Therapeutics, Inc. Non-invasive transcranial ultrasound apparatus
US20130208900A1 (en) 2010-10-13 2013-08-15 Microsoft Corporation Depth camera with integrated three-dimensional audio
US8767968B2 (en) 2010-10-13 2014-07-01 Microsoft Corporation System and method for high-precision 3-dimensional audio for augmented reality
CA2819394C (en) 2010-12-03 2016-07-05 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Sound acquisition via the extraction of geometrical information from direction of arrival estimates
US8787584B2 (en) 2011-06-24 2014-07-22 Sony Corporation Audio metrics for head-related transfer function (HRTF) selection or adaptation
US9042571B2 (en) * 2011-07-19 2015-05-26 Dolby Laboratories Licensing Corporation Method and system for touch gesture detection in response to microphone output
US20130089225A1 (en) * 2011-10-05 2013-04-11 Cheng-Ho Tsai Binaural-recording earphone set
CN103188503A (zh) * 2011-12-29 2013-07-03 三星电子株式会社 显示设备及其控制方法
KR101309783B1 (ko) * 2011-12-30 2013-09-23 삼성전자주식회사 디스플레이 장치 및 방법
EP2611216B1 (en) 2011-12-30 2015-12-16 GN Resound A/S Systems and methods for determining head related transfer functions
KR102160248B1 (ko) * 2012-01-05 2020-09-25 삼성전자주식회사 다채널 음향 신호의 정위 방법 및 장치
US20130178967A1 (en) * 2012-01-06 2013-07-11 Bit Cauldron Corporation Method and apparatus for virtualizing an audio file
US20140133658A1 (en) 2012-10-30 2014-05-15 Bit Cauldron Corporation Method and apparatus for providing 3d audio
WO2013111038A1 (en) 2012-01-24 2013-08-01 Koninklijke Philips N.V. Generation of a binaural signal
JP2013157747A (ja) 2012-01-27 2013-08-15 Denso Corp 音場制御装置及びプログラム
RU2626037C2 (ru) * 2012-02-24 2017-07-21 Фраунхофер-Гезелльшафт Цур Фердерунг Дер Ангевандтен Форшунг Е.Ф. Устройство для обеспечения аудиосигнала для воспроизведения преобразователем звука, система, способ (варианты) и компьютерная программа
US20130272546A1 (en) * 2012-03-10 2013-10-17 Christopher Michael Besgen, SR. Methods and apparatus for head-wearable personal sound speaker systems
JP5973218B2 (ja) * 2012-04-26 2016-08-23 京セラ株式会社 電子機器
US9363591B2 (en) * 2012-05-21 2016-06-07 Kyocera Corporation Electronic device
JP2014064093A (ja) * 2012-09-20 2014-04-10 Sony Corp 信号処理装置およびプログラム
US8750541B1 (en) 2012-10-31 2014-06-10 Google Inc. Parametric array for a head-mountable device
CN105027580B (zh) * 2012-11-22 2017-05-17 雷蛇(亚太)私人有限公司 用于输出修改的音频信号的方法
US9081210B2 (en) 2012-12-12 2015-07-14 Microsoft Technology Licensing, Llc Head worn device having temple arms to provide long axis compression
US10052452B2 (en) * 2013-02-06 2018-08-21 Daniel Carleton Schoonover Dream enhancement apparatus and method
US9807495B2 (en) 2013-02-25 2017-10-31 Microsoft Technology Licensing, Llc Wearable audio accessories for computing devices
US9143854B2 (en) * 2013-04-25 2015-09-22 Emmanuel Adedolapo Alao Wireless headband audio player
US9609423B2 (en) * 2013-09-27 2017-03-28 Volt Analytics, Llc Noise abatement system for dental procedures
US9993386B2 (en) * 2013-11-29 2018-06-12 Louis G. RACETTE Instrumentation absolute value differential amplifier circuit and applications
US9380370B2 (en) * 2013-12-03 2016-06-28 Auria Llc Earphone and adapter for an earphone
US9900722B2 (en) * 2014-04-29 2018-02-20 Microsoft Technology Licensing, Llc HRTF personalization based on anthropometric features
US20150326987A1 (en) * 2014-05-08 2015-11-12 Matthew Marrin Portable binaural recording and playback accessory for a multimedia device
CN107996028A (zh) * 2015-03-10 2018-05-04 Ossic公司 校准听音装置
US9636066B2 (en) * 2015-05-21 2017-05-02 Umm Al-Qura University Headband monitoring system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5742689A (en) * 1996-01-04 1998-04-21 Virtual Listening Systems, Inc. Method and device for processing a multichannel signal for use with a headphone
US6144747A (en) * 1997-04-02 2000-11-07 Sonics Associates, Inc. Head mounted surround sound system
CN1311622A (zh) * 2000-02-02 2001-09-05 松下电器产业株式会社 头戴耳机系统
US20060056639A1 (en) * 2001-09-26 2006-03-16 Government Of The United States, As Represented By The Secretary Of The Navy Method and apparatus for producing spatialized audio signals
CN103033952A (zh) * 2005-02-11 2013-04-10 奥克利有限公司 具有可拆卸的可调电子模块的眼镜
US20070195963A1 (en) * 2006-02-21 2007-08-23 Nokia Corporation Measuring ear biometrics for sound optimization
US20140252236A1 (en) * 2011-03-07 2014-09-11 Kenneth Cottrell Enhancing depth perception
US20130177166A1 (en) * 2011-05-27 2013-07-11 Sony Ericsson Mobile Communications Ab Head-related transfer function (hrtf) selection or adaptation based on head size
CN104581610A (zh) * 2013-10-24 2015-04-29 华为技术有限公司 一种虚拟立体声合成方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113302837A (zh) * 2019-01-15 2021-08-24 脸谱科技有限责任公司 骨传导换能器组件的校准
CN113711626A (zh) * 2019-04-22 2021-11-26 脸谱科技有限责任公司 用于确定头戴式装置的用户的头部相关传递函数的声音频率的远程推断
CN111818441A (zh) * 2020-07-07 2020-10-23 Oppo（重庆）智能科技有限公司 音效实现方法、装置、存储介质及电子设备
CN111818441B (zh) * 2020-07-07 2022-01-11 Oppo（重庆）智能科技有限公司 音效实现方法、装置、存储介质及电子设备

Also Published As

Publication number Publication date
US20170156017A1 (en) 2017-06-01
US9609436B2 (en) 2017-03-28
CN107710784B (zh) 2021-04-16
WO2016191005A1 (en) 2016-12-01
US20160345095A1 (en) 2016-11-24
US10129684B2 (en) 2018-11-13
EP3298801A1 (en) 2018-03-28

Similar Documents

Publication Publication Date Title
CN107710784A (zh) 用于音频创建和传递的系统和方法
US8787584B2 (en) Audio metrics for head-related transfer function (HRTF) selection or adaptation
US11832082B2 (en) Self-calibrating microphone and loudspeaker arrays for wearable audio devices
US20130177166A1 (en) Head-related transfer function (hrtf) selection or adaptation based on head size
CN110612727B (zh) 头外定位滤波器决定系统、头外定位滤波器决定装置、头外定位决定方法以及记录介质
CN107367839A (zh) 穿戴式电子装置、虚拟实境系统以及控制方法
US10971130B1 (en) Sound level reduction and amplification
CN102164336A (zh) 自动环境声学识别
US11622223B2 (en) Dynamic customization of head related transfer functions for presentation of audio content
CN114270879A (zh) 使用用户耳朵的3d重建对音频输出进行个性化均衡
CN114727212B (zh) 音频的处理方法及电子设备
WO2018000764A1 (zh) 一种声道自动匹配的方法、装置以及耳机
US20240292175A1 (en) Audio System and Method of Determining Audio Filter Based on Device Position
WO2020139485A1 (en) Transparent sound device
US11496826B2 (en) Host detection and acoustic module detection
US20230351261A1 (en) Learning data generating device, learning data generating method, learning device, learning method, data structure, information processor, and acoustic treatment device
KR20150142925A (ko) 스테레오 음향 입력 장치
CN115942173A (zh) 用于确定hrtf的方法和听力设备
CN113965859B (zh) 头外定位滤波器确定系统、方法以及程序
US20220182772A1 (en) Audio system for artificial reality applications
CN114175672A (zh) 头戴式耳机、头外定位滤波器决定装置、头外定位滤波器决定系统、头外定位滤波器决定方法和程序
CN205179342U (zh) 一种立体声麦克风
CN106714043A (zh) 一种立体声麦克风及其录音方法
CN114630223A (zh) 一种优化听戴式设备功能的方法及听戴式设备
Lezzoum et al. Assessment of sound source localization of an intra-aural audio wearable device for audio augmented reality applications

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant