CN110177313B - 使用无绳无线头戴式耳机进行双耳音频捕获 - Google Patents

使用无绳无线头戴式耳机进行双耳音频捕获 Download PDF

Info

Publication number
CN110177313B
CN110177313B CN201810925466.0A CN201810925466A CN110177313B CN 110177313 B CN110177313 B CN 110177313B CN 201810925466 A CN201810925466 A CN 201810925466A CN 110177313 B CN110177313 B CN 110177313B
Authority
CN
China
Prior art keywords
audio
clock
wireless
low resolution
wireless headset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810925466.0A
Other languages
English (en)
Other versions
CN110177313A (zh
Inventor
S·哈里哈兰
B·P·帕奎尔
E·A·阿兰曼奇
A·佩彻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN110177313A publication Critical patent/CN110177313A/zh
Application granted granted Critical
Publication of CN110177313B publication Critical patent/CN110177313B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B5/00—Near-field transmission systems, e.g. inductive loop type
    • H04B5/72—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041—Portable telephones adapted for handsfree use
    • H04M1/6058—Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone
    • H04M1/6066—Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone including a wireless connection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1008—Earpieces of the supra-aural or circum-aural type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/007—Two-channel systems in which the audio signals are in digital form
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W56/00—Synchronisation arrangements
    • H04W56/001—Synchronization between nodes
    • H04W56/0015—Synchronization between nodes one node acting as a reference for the others
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1016—Earpieces of the intra-aural type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07—Applications of wireless loudspeakers or wireless microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction

Abstract

本发明题为“使用无绳无线头戴式耳机进行双耳音频捕获”。本发明公开了一种无线头戴式耳机，其包括第一无线耳机设备和第二无线耳机设备，每个无线耳机设备包括麦克风。第一耳机设备聚集第一组音频包，第一组音频包中的每个音频包包括第一低分辨率时钟值、第一高分辨率时钟值和第一麦克风样本的序列，并且第一耳机设备充当第一无线网络的从设备，将第一多个音频包传输至第二无线耳机设备。第二耳机设备接收来自第一无线耳机设备的第一组音频包，聚集第二组音频包，该第二组音频包中的每个音频包包括第二低分辨率时钟值、第二高分辨率时钟值和第二麦克风样本的序列，并且将第一组音频包和第二组音频包传输至外部设备。还描述了其他方面并要求对其进行保护。

Description

使用无绳无线头戴式耳机进行双耳音频捕获
技术领域
本公开的各方面涉及双耳音频录制的领域；更具体地讲，涉及用于从一对无绳无线耳机进行双耳音频录制的耳挂式无线麦克风对。
背景技术
通过两个耳朵(双耳)录制360度音频或捕获音频正如所见允许重现用户听到的声音。双耳录音旨在使用耳机进行重放，不会通过立体声扬声器正确转换。此类型的音频录制在与视频录制一起回放时可增强观看体验。
声音场景的双耳录音使用两个麦克风，布置目的是随后为听众打造3D立体声音效，好像听众实际上处于声音场景中那样。通过放置一对麦克风，使之在听众两耳之间间隔平均距离，并且由提供听众头部声音效果的设备隔开，可打造这种效果。虽然这通常使用每个耳朵上配戴麦克风的人体模型头部来完成，但也可以将麦克风放置在人的耳朵中或附近来完成双耳录音。
诸如智能电话的个人数字设备通常包括录制视频的功能。此类设备也可与包括扬声器和麦克风(例如耳塞)的无线入耳式音频设备一起使用，允许用户执行诸如收听音乐和打电话的功能。
发明内容
希望提供一种使用无线入耳式音频设备诸如无线耳塞进行双耳录音的方法。本公开的一个方面是包括第一无线耳机设备和第二无线耳机设备的无线头戴式耳机，每个无线耳机设备都包括麦克风。每个无线耳机设备是“无绳”的，因为它们经由无线或空中通信链路传输其麦克风信号(至与其分开的另一设备，以及至其耳机外壳外部)。第一耳机设备聚集第一组音频包，第一组音频包中的每个音频包包括第一低分辨率时钟值、第一高分辨率时钟值和第一麦克风样本的序列，并且将第一组音频包传输至第二无线耳机设备；后者被配置作为第一无线网络的主设备，而前者被配置作为第一无线网络的从设备，用于传输第一组音频包。第二耳机设备接收来自第一无线耳机设备的第一组音频包，聚集第二组音频包，第二组音频包中的每个音频包包括第二低分辨率时钟值、第二高分辨率时钟值和第二麦克风样本的序列，并且将第一组音频包和第二组音频包传输至外部设备，而后者被配置作为第二无线网络的主设备。
根据附图并且根据以下具体实施方式，本公开中的各个方面的其他特征和优点将显而易见。
附图说明
通过参考下面的描述和附图，本公开可被最好地理解，该附图用于以举例的方式而非限制的方式例示本公开的各个方面。应当指出的是，在本公开中提到“一”或“一个”方面未必是同一方面，并且其意指至少一个。另外，为了简洁以及减少附图的总数，可使用给定附图示出本公开的不止一个方面的特征部，并且对于给定方面，可能并非需要该附图中的所有元件。在图中，其中类似的附图标号指示类似的元件：
图1是佩戴无线头戴式耳机并保持外部设备的例示性用户的示图。
图2是示例性蓝牙协议栈的简化示意图。
图3是可包括在两个无线耳机设备中的每一个线耳机设备中的电路的简化和示例性框图。
图4是通过第一微微网和第二微微网传送的数据包的示例性时序。
图5是示例性音频数据包结构。
图6示出了一对左侧和右侧无线耳机如何被配置作为设备A和设备B传送其相应的音频包的示例。
具体实施方式
以下描述示出了许多具体细节。然而，应当理解，可在没有这些具体细节的情况下实践本公开中各方面的实施方案。在其他情况下，未详细示出已熟知的电路、结构和技术，以免模糊对此描述的理解。
在下面的描述中，参考示出若干方面的附图。应当理解，其他方面也可被利用，并且在不脱离本公开的实质和范围的情况下可进行机械组成改变、结构改变、电气改变，以及操作改变。下面的详细描述不应该被理解为限制性的意义，并且本发明的范围仅由颁予的专利的权利要求书所限定。
本文中所使用的术语仅仅是为了描述特定方面，并非旨在对这些方面进行限制。空间相关术语，诸如“在……之下”、“在……下方”、“下”、“在……上方”、“上”等可在本文中用于描述的方便，以描述一个元件或特征部与另外一个或多个元件或一个或多个特征部的关系，如在附图中示出的。应当理解，空间相对术语旨在涵盖除了在附图所示取向之外的设备使用或操作过程中的不同取向。例如，如果图中的设备被翻转，则被描述为在其他元件或特征部“下方”或“之下”的元件然后可被取向成在其他元件或特征部“上方”。因此，示例性术语“在……下方”可涵盖在……上方和在……下方这两个取向。设备可以另外的方式被取向(例如，旋转90度或在其他的取向)，并且在本文中使用的空间相对描述词被相应地解释。
如本文所用，单数形式的“一个”和“该”旨在同样包括复数形式，除非上下文另外指出。应当进一步理解，术语“包括”和/或“包含”限定了所陈述的特征部、操作、元件、和/或部件的存在，但不排除一个或多个其他特征部、操作、元件、部件、和/或其分组的存在或添加。
本文所用的术语“或”以及“和/或”应被解释为包含在内或意指任何一个或任何组合。因此，“A、B或C”或“A、B和/或C”指“以下中的任意一种：A；B；C；A和B；A和C；B和C；A、B和C。”仅当元件、功能或操作(动作)的组合以某种方式固有地互相排斥时，才会出现这个定义的例外。
图1为例示用户100佩戴无线头戴式耳机的示图，该无线头戴式耳机包括两个无线耳机设备110、120，并且持有外部设备130。两个无线耳机设备110、120中的每一个无线耳机设备可分别佩戴在用户耳朵102、104中的一个耳朵。两个无线耳机设备110、120中的每一个无线耳机设备包括一个或多个麦克风。当两个无线耳机设备110、120被佩戴在用户耳朵102、104上时，麦克风被适当地布置用于双耳音频录制。
无线头戴式耳机可经由无线连接与外部设备130通信。此外，两个无线耳机设备110、120中的每一个无线耳机设备可经由第二无线连接彼此通信。无线连接通过空气发生(无需物理连接)。例如，无线协议可基于语音和/或数据的近程传输。无线协议可进一步用于在头戴式耳机和附近外部设备(诸如蜂窝电话或平板电脑)之间创建个人局域网。可使用的无线协议的一些示例包括蓝牙、家庭射频、iEEE 802.11、IrDA、无线USB等。通信电子设备可体现为片上系统(SOC)。
尽管可使用其他无线协议，但根据本公开的一个方面，无线头戴式耳机的两个无线耳机设备110、120中的每一个无线耳机设备可包括基于蓝牙协议的无线通信电子设备。例如，通信电子设备可包括或对应于蓝牙片上系统(SoC)。SoC可包括用于执行除无线通信之外的功能的电路。例如，在一些实施方案中，用于使用有线通用串行总线(USB)接口和常规串行接口进行通信的电路也可集成到SoC中。虽然应当理解可以使用其他无线协议来实践本公开，但本公开将基于蓝牙无线协议的使用来描述。
下面简要论述蓝牙协议的基本基础知识。蓝牙协议允许智能设备通过无线、低功率、近程通信来彼此通信。此技术允许电子设备自行连接，而无需线缆或来自用户的任何直接操作。
蓝牙协议可称为在2.4GHz未授权频带中操作的跳频(FHSS)无线电系统。蓝牙协议无线传输基于发射器和接收器两者都已知的序列来改变频率。根据一种已知的技术，蓝牙无线传输使用从2.404GHz到2.480GHz范围的79个不同频率。传输可为低功率传输，其仅允许大约10米或大约30到40英尺的典型范围。但根据设备用于蓝牙无线传输所使用的功率量，可能的范围可以从大约1米至100米不等。
蓝牙设备彼此连接，形成称为微微网的网络。微微网包括两个或更多个设备，这些设备的内部时钟与通用时钟信号同步并且使用通用跳频序列。因此，对于任何连接到给定微微网的设备，该设备可能需要具有相同的时钟信号和相同的跳频序列。每个设备中的时钟和跳频序列可使用微微网上其中一个设备的时钟信号来派生。
术语“主设备”将用于启动蓝牙连接和/或与一个或多个蓝牙设备保持微微网(无线网络)的设备。术语“从设备”将用于响应于启动主设备和/或在微微网建立后成为其从属单元的设备。每个微微网可包括一个主设备和多个从设备。此外，蓝牙设备可以属于一个以上的微微网。术语“散射网”用于定义由多个重叠的微微网组成的蓝牙网络。在一个蓝牙设备位于两个微微网上的情况下，两个微微网上的所有设备都位于单个散射网上。来自其中一个微微网的设备可通过使用共享设备中转信号来与另一个微微网的设备通信。
当两个蓝牙设备最初连接时，从设备将其本地时钟与主设备的时钟同步。这些时钟的计时单元为312.5μs的间隔。两个时钟计时单元构成625μs的时隙，两个时隙构成1250μs的时隙对。在单时隙数据包的简单情况下，主设备在偶数时隙中传输，并在奇数时隙中接收。相反，从设备在偶数时隙中接收，并在奇数时隙中传输。数据包可以是1、3或5个时隙长度，但在所有情况下，主设备的传输都在偶数时隙中开始，从设备的传输则在奇数时隙中开始。蓝牙时钟是28位计数器，增量为312.5μs的间隔，并且具有±20ppm的强制性最大偏移。出于此描述的目的，在主设备与从设备之间同步以控制传输时隙的时钟将被称为低分辨率时钟。
蓝牙设备可以大约2.1Mb/s(兆比特/秒)的数据吞吐量操作，但应当理解，其他数据速率通过或可通过技术进步实现，并且本公开的各方面可以其他速率操作。微微网上的所有设备共享此数据吞吐量，这意味着微微网中所有设备的所有通信量的总和小于针对微微网的最大数据吞吐量。
蓝牙规范包括已发布的软件框架。该框架被称为蓝牙协议栈，并包括用于实现蓝牙通信的不同软件应用。图2为示例性蓝牙协议栈200的简化示意图。低级别软件包括在低级栈202中。这部分包括用于生成/接收无线电信号、修正传输错误以及加密/解密传输等的代码。主机控制器接口(HCI)204是低级别蓝牙功能与应用之间的接口。HCI层表示可由专用蓝牙处理器处理的低级栈202功能与可由特定于应用的处理器处理的其余功能之间的划分。
扩展同步连接导向(eSCO)206层用于实现低级栈202和高级应用之间常用于语音数据的专用通信信道。逻辑链路控制和适配协议(L2CAP)208层组合并重新封装多个高级应用传输和接收的数据。L2CAP 208层将所有这些不同通信组合成可与低级栈202进行交互的一个数据流。RFCOMM 210层模拟串行连接所使用的协议。这允许软件设计人员轻松地将蓝牙功能集成到以前使用串行连接的现有应用中。服务发现协议(SDP)212层被设备用于提供关于每种设备所提供服务(或功能)的信息，以及其他设备可如何通过蓝牙协议访问这些服务的信息。
配置文件层(配置文件214)允许设备将自身标识为具有一组预定义的功能的通用设备组的成员。例如，符合头戴式耳机配置文件的设备可支持与音频通信相关的预定义的方法。应用层216包含实施由所有其他层创建的有用工具的程序。通过为应用层216编写不同的程序，软件开发人员可侧重于蓝牙功能的新用途，而无需重写控制底层通信任务的代码。
图3是可包括在两个无线耳机设备110、120中的每一个无线耳机设备中的电路的简化和示例性框图，参见图1。图3所示的元件可集成到每个无线耳机外壳中。微控制器316可以可通信地耦接到音频模数转换器(ADC)302和无线收发器304(例如，蓝牙控制器)。微控制器316和收发器304可各自包括一个可为蓝牙片上系统(SoC)一部分的处理器(统称为“处理器”)。音频模数转换器(ADC)302可以是音频编解码器的一部分，该音频编解码器还包括音频数模转换器(DAC)，用于提供从模拟格式到数字格式的音频的编码，反之亦然。
音频模数转换器302耦接到音频时钟308，该音频时钟可具有由晶体振荡器310或通过提供高精度频率参考的其他方式控制的频率。音频时钟308确定音频信号被采样以提供表示音频信号的一系列数字值的速率。晶体振荡器310可以高频率操作，高频率可被除以各种值以提供音频采样速率的选择。例如，振荡器可在3.072MHz下操作，并且音频时钟308将振荡器310频率除以64以获得48kHz的音频采样速率，提供了每20.833μs的音频信号的数字值。出于此描述的目的，控制音频采样速率的时钟将被称为高分辨率时钟(音频时钟308)。高分辨率时钟比低分辨率时钟更频繁地更新它们的计数(如上所述用于控制传输时隙)。
第一无线耳机设备110和第二无线耳机设备120的高分辨率时钟可被配置为以相同的标称频率操作；另外，第一无线耳机设备和第二无线耳机设备的低分辨率时钟可被配置为以相同的标称频率操作。当无线耳机设备正在捕获双耳音频信号时，会发生这种情况。相同的标称频率用于表示频率为注明的标称值，其变型针对用于控制时钟频率的振荡器类型以及使用时钟的目的而言是典型的。例如，当使用蓝牙无线协议时，低分辨率时钟以3200Hz±20ppm的标称频率操作。用于音频采样的高分辨率时钟可以例如48kHz±50ppm的标称频率操作。应当理解，低分辨率时钟和高分辨率时钟两者可相对于彼此偏移，以及相对于其他无线耳机设备中的低分辨率时钟和高分辨率时钟偏移。需要补偿时钟偏移，以提供具有可接受质量的双耳音频信号。
仍然参考图3，麦克风300可耦接到音频编码器，诸如音频模数转换器302。音频模数转换器302以高分辨率音频时钟308控制的速率产生数字值流，该数字值流表示冲击麦克风300上的音频压力波的麦克风样本。
麦克风样本可被传送至微控制器316以将该麦克风样本聚集成音频包。微控制器316可将音频包传送至无线收发器304(诸如蓝牙控制器)，该无线收发器通过无线耳机设备中的天线306提供无线传输，以无线地传送至另一设备(诸如其他无线耳机设备或外部设备)。低分辨率时钟(传输时钟312)控制音频包的无线传输，例如传输时隙。
简单地再次参考图1，第一无线耳机设备110包括第一麦克风、第一无线收发器和第一处理器，并且被配置为佩戴在用户100的第一耳朵102上。第二无线耳机设备120包括第二麦克风、第二无线收发器和第二处理器，并且被配置为佩戴在用户100的第二耳朵104上。无线耳机设备中包括麦克风、无线收发器和处理器的每个电路可如上所描述，并且如图3所示。
第一无线耳机设备110和第二无线耳机设备120分别基于到达佩戴它们的耳朵102和耳朵104的声音，分别产生第一音频信号和第二音频信号。应当理解，第一无线耳机设备110和第二无线耳机设备120可仅在其外部形状上不同，它们被配置为佩戴在用户100的特定耳朵102和104上。第一无线耳机设备110和第二无线耳机设备120可在使用时交换角色，例如第一无线耳机设备110成为第二无线耳机设备120，反之亦然。
当用于记录双耳音频时，图1所示的两个无线耳机设备中的一个承担设备A的角色，另一个承担设备B的角色，耳机设备的A角色和B角色可基于无线通信的相应质量来选择。例如，如果位于左耳的无线耳机设备与外部设备130之间的通信链路比位于右耳的无线耳机设备更好(例如，更可靠、更快、或更低的功率消耗)，则左侧设备可承担设备B的角色，(并且右侧设备承担设备A的角色)。可使用其他方法确定耳机设备的A角色和B角色。
现在参考图6，承担设备B的角色的无线耳机设备充当用于第一微微网的主设备，该第一微微网包括其他无线耳机设备(该其他无线耳机设备承担设备A的角色)作为从设备。出于此描述的目的，将假定佩戴在用户100右耳102上的无线耳机设备110已承担设备A的角色，佩戴在该用户左耳104上的无线耳机设备120已承担设备B的角色。应当理解，这些角色可以交换。
如图6所示，除了作为第一微微网中的主设备之外，第二无线耳机设备120还充当包括外部设备130作为主设备的第二微微网中的从设备。第一微微网和第二微微网形成散射网，其中第二无线耳机设备120充当能够在第一无线耳机设备110和外部设备130之间转发通信的桥接器设备。应当理解，第二微微网中的通信时序由其主设备控制，该主设备是外部设备130。同样，第一微微网中的通信时序由其主设备控制，该主设备是第二无线耳机设备120。
图4示出了用于从第一无线耳机设备110传送至第一微微网402上的第二无线耳机设备120的数据包Pkt1、Pkt3的示例性时序。该图还示出了用于从第二无线耳机设备120传送至第二微微网404上的外部设备130的数据包Pkt1、Pkt2的示例时序。第二无线耳机设备120将在其作为第一微微网上的主设备的角色和其作为第二微微网上的从设备的角色之间转换。为了减少通信延迟，第二无线耳机设备120可将其低分辨率时钟(传输时钟312-参见图3)与外部设备130的低分辨率时钟同步，然后使用所得到的同步低分辨率时钟作为用于在第一微微网中传输的主时钟。
出于此描述的目的，使用“同步”来指出同步时钟的速率被控制，使得同步时钟之间的相位关系保持在小范围内。可由第二无线耳机设备120在第二微微网的主时钟(由外部设备建立)和第一微微网的主时钟(由第二无线耳机设备建立)之间有意保持相位差，使得第二无线耳机设备可在远远小于无线通信的一个时钟周期内在第一微微网和第二微微网上的通信之间切换。
图5示出了示例性音频数据包结构500，该音频数据包结构可用于无线地传送包括基于麦克风样本的音频数据的音频包。第一无线耳机设备110被配置为聚集第一组音频包，第一组音频包中的每个音频包包括第一低分辨率时钟值(BT时钟(4字节)，来自图3中的传输时钟312)、第一高分辨率时钟值(音频时钟(4字节)，来自音频时钟308)和用于包括在第一无线耳机设备中的麦克风的第一麦克风样本的序列(音频数据(256/340字节))。第一无线耳机设备110被进一步配置为将第一组音频包传输至第二无线耳机设备120，其中第一无线耳机设备110作为诸如第一微微网402(参见图4)的第一无线网络的从设备执行此类操作。
作为第一无线网络的主设备，第二无线耳机设备120被配置为从第一无线耳机设备110接收第一组音频包。第二无线耳机设备120被进一步配置为聚集第二多个音频包，该第二多个音频包中的每个音频包包括第二低分辨率时钟值(BT时钟(4字节))、第二高分辨率时钟值(音频时钟(4字节))和用于包括在第二无线耳机设备中的麦克风的一组第二麦克风样本。第二低分辨率时钟值(BT时钟)可基于控制通过第二无线收发器(第二无线耳机设备120中的无线收发器304)的数据包传输的第二低分辨率时钟(第二无线耳机设备中的传输时钟312)，并且第一低分辨率时钟值基于周期性地与第二低分辨率时钟同步并且控制通过第一无线收发器(第一无线耳机设备110中的无线收发器304)的数据包传输的第一低分辨率时钟(第二无线耳机设备中的传输时钟312)。第二低分辨率时钟可周期性地与外部低分辨率时钟同步，该外部低分辨率时钟控制通过包括在外部设备130中的外部无线收发器的数据包传输。
第二无线耳机设备120可使用低分辨率时钟值将来自第一组音频包(从第一无线耳机设备110接收)的音频包与来自第二无线耳机设备聚集的第二组音频包的音频包进行适当配对。第二无线耳机设备120被进一步配置为将第一音频包和第二音频包的配对传输至作为第二无线网络(诸如第二微微网404)从设备的外部设备130。换句话讲，第一音频包和第二音频包与标识相应配对的信息一起传输，其中每个配对是指第一音频包的所选择的一个(数据包)和可被认为彼此同步的第二音频包的所选择的一个(数据包)。
第一音频包和第二音频包的配对中的低分辨率时钟值可通过无线通信协议进行同步。第一高分辨率音频时钟可周期性地与第一低分辨率时钟同步，并且第二高分辨率音频时钟可周期性地与第二低分辨率时钟同步。
控制无线耳机设备110、120中的每一者的采样速率的高分辨率音频时钟308可相对于彼此偏移，偏移程度为第一无线耳机设备110与第二无线耳机设备120相比可获取或丢失音频样本。第二无线耳机设备120可使用高分辨率时钟值适当地调节第一音频包和/或第二音频包中的数据，以在从第一无线耳机设备110和第二无线设备耳机120获取的音频数据之间保持同步(在将第一音频包和第二音频包传输至外部设备之前)。例如，第二无线耳机设备120可从第二音频包中添加或去除音频样本，并且调节其第二高分辨率音频时钟308，以将来自第二无线耳机设备中的麦克风的音频样本与来自第一无线耳机设备110中的麦克风的音频样本重新同步。
虽然上文详细描述了特定方面，并且在附图中示出，但应当理解，此描述仅仅是为了例示。本文所述方面的可另选方面也在本发明的范围内。例如，虽然一个方面可包括蓝牙头戴式耳机，但本公开的一个或多个特征部也可并入采用其他无线通信协议的头戴式耳机中。另外，虽然一些方面可包括被配置用于与蜂窝电话和/或个人媒体设备进行通信的头戴式耳机，但本公开的一个或多个特征部也可并入被配置用于与任何电子设备进行通信的头戴式耳机中。应当理解，此类特征部仅用于例示广义的发明而非对其进行限制，并且本发明并不限于所示和所述的特定构造和布置，因为对于本领域的普通技术人员而言可想到各种其他修改。因此，要将描述视为例示性的而非限制性的。

Claims (20)

1.一种无线头戴式耳机，包括：
第一无线耳机设备，所述第一无线耳机设备包括第一麦克风；和
第二无线耳机设备，所述第二无线耳机设备包括第二麦克风；
其中所述第一无线耳机设备被配置为
聚集第一多个音频包，所述第一多个音频包中的每个音频包包括第一低分辨率时钟值、第一高分辨率时钟值和多个第一麦克风样本，以及
作为第一无线网络的从设备将所述第一多个音频包传输至所述第二无线耳机设备；
其中所述第二无线耳机设备被配置为
作为所述第一无线网络的主设备接收来自所述第一无线耳机设备的所述第一多个音频包，
聚集第二多个音频包，所述第二多个音频包中的每个音频包包括第二低分辨率时钟值、第二高分辨率时钟值和多个第二麦克风样本，以及
作为第二无线网络的从设备将所述第一多个音频包和所述第二多个音频包传输至外部设备，
其中，高分辨率时钟指的是用于控制音频采样速率的时钟，而低分辨率时钟指的是用于控制音频包的无线传输的时钟。
2.根据权利要求1所述的无线头戴式耳机，其中所述第二低分辨率时钟值基于控制通过第二无线收发器的数据包传输的第二低分辨率时钟，并且所述第一低分辨率时钟值基于第一低分辨率时钟，所述第一低分辨率时钟：i)周期性地与所述第二低分辨率时钟同步，以及ii)控制通过第一无线收发器的数据包传输。
3.根据权利要求2所述的无线头戴式耳机，其中所述第二低分辨率时钟周期性地与外部低分辨率时钟同步，所述外部低分辨率时钟控制通过包括在所述外部设备中的外部无线收发器的数据包传输。
4.根据权利要求2所述的无线头戴式耳机，其中：
所述第一无线耳机设备还包括第一音频编码器，所述第一音频编码器接收来自所述第一麦克风的信号，并以通过第一音频时钟控制的速率产生所述多个第一麦克风样本；并且
所述第二无线耳机设备还包括第二音频编码器，所述第二音频编码器接收来自所述第二麦克风的信号，并以通过第二音频时钟控制的速率产生所述多个第二麦克风样本；
其中所述第一高分辨率时钟值基于所述第一音频时钟，并且所述第二高分辨率时钟值基于所述第二音频时钟。
5.根据权利要求4所述的无线头戴式耳机，其中所述第一音频时钟周期性地与所述第一低分辨率时钟同步，并且所述第二音频时钟周期性地与所述第二低分辨率时钟同步。
6.根据权利要求2所述的无线头戴式耳机，其中：
所述第一无线耳机设备还包括第一无线收发器，所述第一无线收发器被配置作为所述第一无线网络的所述从设备以将所述第一多个音频包传输至所述第二无线耳机设备；
所述第二无线耳机设备还包括第二无线收发器，所述第二无线收发器被配置作为所述第一无线网络的所述主设备以接收来自所述第一无线耳机设备的所述第一多个音频包，并且所述第二无线收发器被配置作为所述第二无线网络的所述从设备以将所述第一多个音频包和所述第二多个音频包传输至所述外部设备。
7.根据权利要求1所述的无线头戴式耳机，其中所述第一无线耳机设备被配置为佩戴在用户的第一耳朵上，并且所述第二无线耳机设备被配置为佩戴在所述用户的第二耳朵上，使得所述第一麦克风基于到达所述第一耳朵的声音产生第一音频信号，并且所述第二麦克风基于到达所述第二耳朵的声音产生第二音频信号。
8.一种在无线头戴式耳机中传输来自麦克风的音频的方法，所述方法包括：
聚集第一多个音频包，所述第一多个音频包中的每个音频包包括第一低分辨率时钟值、第一高分辨率时钟值和来自第一无线耳机设备中的第一麦克风的多个第一麦克风样本；
作为第一无线网络的从设备将所述第一多个音频包传输至第二无线耳机设备；
由充当所述第一无线网络的主设备的第二无线耳机设备接收来自所述第一无线耳机设备的所述第一多个音频包；
聚集第二多个音频包，所述第二多个音频包中的每个音频包包括第二低分辨率时钟值、第二高分辨率时钟值和来自所述第二无线耳机设备中的第二麦克风的多个第二麦克风样本；以及
由充当第二无线网络的从设备的所述第二无线耳机设备将所述第一多个音频包和所述第二多个音频包传输至外部设备，
其中，高分辨率时钟指的是用于控制音频采样速率的时钟，而低分辨率时钟指的是用于控制音频包的无线传输的时钟。
9.根据权利要求8所述的方法，其中所述第二低分辨率时钟值基于控制通过包括在所述第二无线耳机设备中的第二无线收发器的数据包传输的第二低分辨率时钟，并且所述第一低分辨率时钟值基于包括在所述第一无线耳机设备中的第一低分辨率时钟，所述第一低分辨率时钟周期性地与所述第二低分辨率时钟同步，并且所述第一低分辨率时钟值控制通过包括在所述第一无线耳机设备中的第一无线收发器的数据包传输。
10.根据权利要求9所述的方法，其中第二低分辨率时钟周期性地与外部低分辨率时钟同步，所述外部低分辨率时钟控制通过包括在所述外部设备中的外部无线收发器的数据包传输。
11.根据权利要求9所述的方法，还包括：
对来自所述第一麦克风的信号进行编码来以通过第一音频时钟控制的速率产生所述多个第一麦克风样本；以及
对来自所述第二麦克风的信号进行编码来以通过第二音频时钟控制的速率产生所述多个第二麦克风样本；
其中所述第一高分辨率时钟值基于所述第一音频时钟，并且所述第二高分辨率时钟值基于所述第二音频时钟。
12.根据权利要求11所述的方法，还包括：
周期性地将所述第一音频时钟与所述第一低分辨率时钟同步；以及
周期性地将所述第二音频时钟与所述第二低分辨率时钟同步。
13.一种无线头戴式耳机，包括：
第一处理器，所述第一处理器用于聚集第一多个音频包，所述第一多个音频包中的每个音频包包括第一低分辨率时钟值、第一高分辨率时钟值和来自第一无线耳机设备中的第一麦克风的多个第一麦克风样本；
第一无线收发器，所述第一无线收发器用于作为第一无线网络的从设备将所述第一多个音频包传输至第二无线耳机设备；
第二无线收发器，所述第二无线收发器用于在第二无线耳机设备中并在充当所述第一无线网络的主设备时接收来自所述第一无线耳机设备的所述第一多个音频包；和
第二处理器，所述第二处理器用于聚集第二多个音频包，所述第二多个音频包中的每个音频包包括第二低分辨率时钟值、第二高分辨率时钟值和来自所述第二无线耳机设备中的第二麦克风的多个第二麦克风样本，
其中所述第二无线收发器在充当第二无线网络的从设备时将所述第一多个音频包和所述第二多个音频包传输至外部设备，
其中，高分辨率时钟指的是用于控制音频采样速率的时钟，而低分辨率时钟指的是用于控制音频包的无线传输的时钟。
14.根据权利要求13所述的无线头戴式耳机，其中所述第二低分辨率时钟值基于控制通过包括在所述第二无线耳机设备中的所述第二无线收发器的数据包传输的第二低分辨率时钟，并且所述第一低分辨率时钟值基于包括在所述第一无线耳机设备中的第一低分辨率时钟，所述第一低分辨率时钟周期性地与所述第二低分辨率时钟同步，并且所述第一低分辨率时钟值控制通过所述第一无线收发器的数据包传输。
15.根据权利要求14所述的无线头戴式耳机，其中所述第二低分辨率时钟周期性地与外部低分辨率时钟同步，所述外部低分辨率时钟控制通过包括在所述外部设备中的外部无线收发器的数据包传输。
16.根据权利要求14所述的无线头戴式耳机，还包括：
第一音频编解码器，所述第一音频编解码器用于以通过第一音频时钟控制的速率从来自所述第一麦克风的信号产生所述多个第一麦克风样本；和
第二音频编解码器，所述第二音频编解码器用于以通过第二音频时钟控制的速率从来自所述第二麦克风的信号产生所述多个第二麦克风样本；
其中所述第一高分辨率时钟值基于所述第一音频时钟，并且所述第二高分辨率时钟值基于所述第二音频时钟。
17.根据权利要求16所述的无线头戴式耳机，其中所述第一处理器将所述第一音频时钟与所述第一低分辨率时钟同步，并且其中所述第二处理器将所述第二音频时钟与所述第二低分辨率时钟同步。
18.一种包括无线耳机外壳的无线耳机设备，所述无线耳机外壳中具有：
麦克风；
无线收发器，所述无线收发器用于通过第一无线网络从另一无线耳机设备接收第一多个音频包，其中所述第一多个音频包中的每个音频包包括第一低分辨率时钟值、第一高分辨率时钟值和多个第一麦克风样本；和
处理器，所述处理器用于聚集第二多个音频包，所述第二多个音频包中的每个音频包包括第二低分辨率时钟值、第二高分辨率时钟值和来自所述麦克风的多个第二麦克风样本，
其中所述无线收发器通过第二无线网络将所述第一多个音频包和所述第二多个音频包传输至外部设备，
其中，高分辨率时钟指的是用于控制音频采样速率的时钟，而低分辨率时钟指的是用于控制音频包的无线传输的时钟。
19.根据权利要求18所述的无线耳机设备，其中所述无线收发器在充当所述第一无线网络的主设备时将接收所述第一多个音频包，并且在充当所述第二无线网络的从设备时将传输所述第一多个音频包和所述第二多个音频包。
20.根据权利要求18所述的无线耳机设备，其中所述第二低分辨率时钟值基于控制通过所述无线收发器的数据包传输的第二低分辨率时钟，并且所述第一低分辨率时钟值基于包括在所述另一无线耳机设备中的第一低分辨率时钟，所述第一低分辨率时钟周期性地与所述第二低分辨率时钟同步，并且所述第一低分辨率时钟值控制通过所述另一无线耳机设备中的无线收发器的数据包传输。
CN201810925466.0A 2018-02-21 2018-08-15 使用无绳无线头戴式耳机进行双耳音频捕获 Active CN110177313B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/901,624 US10419853B2 (en) 2018-02-21 2018-02-21 Binaural audio capture using untethered wireless headset
US15/901,624 2018-02-21

Publications (2)

Publication Number Publication Date
CN110177313A CN110177313A (zh) 2019-08-27
CN110177313B true CN110177313B (zh) 2020-08-18

Family

ID=63273021

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810925466.0A Active CN110177313B (zh) 2018-02-21 2018-08-15 使用无绳无线头戴式耳机进行双耳音频捕获

Country Status (4)

Country Link
US (1) US10419853B2 (zh)
CN (1) CN110177313B (zh)
DE (1) DE102018213610B4 (zh)
GB (1) GB2571377B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10602257B1 (en) * 2018-08-30 2020-03-24 Semiconductor Components Industries, Llc Methods and systems for wireless audio
WO2020131963A1 (en) * 2018-12-21 2020-06-25 Nura Holdings Pty Ltd Modular ear-cup and ear-bud and power management of the modular ear-cup and ear-bud
CN110650409B (zh) * 2019-10-30 2021-08-06 歌尔股份有限公司 通讯方法、装置、头带设备、无线耳机及头戴式耳机系统
TWI727899B (zh) * 2019-11-05 2021-05-11 瑞昱半導體股份有限公司 可使不同藍牙電路的音訊播放保持同步的多成員藍牙裝置中的主藍牙電路與副藍牙電路
CN111131959A (zh) * 2019-12-29 2020-05-08 歌尔科技有限公司 头戴耳机的信息传输方法、装置及头戴耳机和存储介质
CN111817811B (zh) * 2020-06-22 2022-10-11 芯原微电子(上海)股份有限公司 Tws耳机音频同步播放方法及系统、tws耳机
KR20220017332A (ko) * 2020-08-04 2022-02-11 삼성전자주식회사 오디오 데이터를 처리하는 전자 장치와 이의 동작 방법
CN112020136B (zh) * 2020-10-13 2021-02-09 恒玄科技(上海)股份有限公司 音频系统及无线耳机对
CN112291683B (zh) * 2020-10-15 2022-03-18 广州安凯微电子股份有限公司 Tws耳机的控制方法及装置
WO2022141552A1 (zh) * 2020-12-31 2022-07-07 华为技术有限公司 无线耳机和音频设备
US11503416B2 (en) * 2021-01-07 2022-11-15 Semiconductor Components Industries, Llc Low-latency communication protocol for binaural applications
KR20220149250A (ko) * 2021-04-30 2022-11-08 삼성전자주식회사 복수의 장치에서 획득한 오디오 데이터 녹음 방법 및 전자 장치
CN217388984U (zh) * 2022-03-29 2022-09-06 王丰硕 一种无线耳机

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106658250A (zh) * 2017-02-06 2017-05-10 张德明 一种双耳录音装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7333622B2 (en) 2002-10-18 2008-02-19 The Regents Of The University Of California Dynamic binaural sound capture and reproduction
KR101680408B1 (ko) * 2009-09-10 2016-12-12 코스 코퍼레이션 무선 이어폰 세트 및 그 동기화 방법
US20120033620A1 (en) * 2010-08-03 2012-02-09 Nxp B.V. Synchronization for data transfers between physical layers
KR101209126B1 (ko) 2011-06-27 2012-12-06 경북대학교 산학협력단 액티브 지연방법 및 이를 이용한 개선된 무선 양이 보청기
US8831255B2 (en) 2012-03-08 2014-09-09 Disney Enterprises, Inc. Augmented reality (AR) audio with position and action triggered virtual sound effects
US9894454B2 (en) 2013-10-23 2018-02-13 Nokia Technologies Oy Multi-channel audio capture in an apparatus with changeable microphone configurations
US9532131B2 (en) 2014-02-21 2016-12-27 Apple Inc. System and method of improving voice quality in a wireless headset with untethered earbuds of a mobile device
US9451361B2 (en) 2014-07-08 2016-09-20 Intel IP Corporation Apparatus, method and system of communicating acoustic information of a distributed microphone array between mobile devices
US10602397B2 (en) 2016-09-21 2020-03-24 Apple Inc. Real-time relay of wireless communications
US10825480B2 (en) 2017-05-31 2020-11-03 Apple Inc. Automatic processing of double-system recording

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106658250A (zh) * 2017-02-06 2017-05-10 张德明 一种双耳录音装置

Also Published As

Publication number Publication date
GB2571377B (en) 2022-01-26
DE102018213610A1 (de) 2019-08-22
US20190261089A1 (en) 2019-08-22
US10419853B2 (en) 2019-09-17
DE102018213610B4 (de) 2023-04-20
CN110177313A (zh) 2019-08-27
GB201811414D0 (en) 2018-08-29
GB2571377A (en) 2019-08-28

Similar Documents

Publication Publication Date Title
CN110177313B (zh) 使用无绳无线头戴式耳机进行双耳音频捕获
CN111052817B (zh) 蓝牙媒体设备时间同步
US11375312B2 (en) Method, device, loudspeaker equipment and wireless headset for playing audio synchronously
RU2551816C2 (ru) Синхронизация беспроводных наушников
WO2019196101A1 (zh) 耳机工作模式切换方法及装置、音频电路、耳机及耳机系统
KR101178252B1 (ko) 다수의 데이터 싱크들을 위한 신호들의 동기화
TW201731324A (zh) 使用更新時槽同步到藍芽le等時通道和通訊狀態改變
CN110636487B (zh) 无线耳机及无线耳机的通信方法
US20140029701A1 (en) Frame sync across multiple channels
US20080076489A1 (en) Physically and electrically-separated, data-synchronized data sinks for wireless systems
US20090081953A1 (en) Method for Supporting Simultaneously Multiple-Path Bluetooth Audio Applications
JP2010523018A (ja) 無線でリンクした複数のイヤピースを有するヘッドセット
CN101637012A (zh) 具有无线链接耳机的头戴送受话器
JP2015144430A (ja) 位置データを用いる聴覚装置、音声システム、および関連する方法
KR101552830B1 (ko) 스마트 기기를 이용한 블루투스 헤드셋 구현 방법
WO2023146565A1 (en) Wireless microphone synchronization for btoip tws earbuds
KR20210055009A (ko) 상이한 블루투스 회로들의 오디오 재생 동기화를 유지할 수 있는 다중 멤버 블루투스 장치
US10455312B1 (en) Acoustic transducer as a near-field magnetic induction coil
CN115175159A (zh) 一种蓝牙耳机播放方法及设备
CN113115281B (zh) 蓝牙音讯装置、蓝牙音讯系统及其运作方法
KR102433753B1 (ko) 상이한 블루투스 회로들의 오디오 재생 동기화를 유지할 수 있는 다중 멤버 블루투스 장치의 메인 블루투스 회로 및 보조 블루투스 회로
TWI798890B (zh) 用於產生立體聲語音效果的藍牙語音通信系統及相關的電腦程式產品
WO2022134734A1 (zh) 无线通讯方法及系统
EP4106373A1 (en) Method, device and computer program for cloud-authenticated pairing in wireless communication system, and recording medium therefor
CN116192316A (zh) 数据传输方法、装置和耳机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant