CN101998222A - 处理音频数据的设备和方法 - Google Patents

处理音频数据的设备和方法 Download PDF

Info

Publication number
CN101998222A
CN101998222A CN2010102545211A CN201010254521A CN101998222A CN 101998222 A CN101998222 A CN 101998222A CN 2010102545211 A CN2010102545211 A CN 2010102545211A CN 201010254521 A CN201010254521 A CN 201010254521A CN 101998222 A CN101998222 A CN 101998222A
Authority
CN
China
Prior art keywords
unit
reproduction unit
audio
audio reproduction
detecting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010102545211A
Other languages
English (en)
Inventor
克里斯托夫·马克·麦考斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN101998222A publication Critical patent/CN101998222A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • H04S7/304—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/109—Arrangements to adapt hands free headphones for use on both ears
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/01—Input selection or mixing for amplifiers or loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/03—Connection circuits to selectively connect loudspeakers or headphones to amplifiers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/01—Hearing devices using active noise cancellation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/43—Electronic input selection or mixing based on input signal analysis, e.g. mixing or selection between microphone and telecoil or between microphones with different directivity characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
    • H04R25/552—Binaural
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S1/005—For headphones

Abstract

一种用于处理音频数据的设备(100)，其中，设备(100)包括：第一音频再现单元(102)，适于再现音频数据的第一部分以及适于附到用户(110)的左耳(106)；第二音频再现单元(104)，适于再现音频数据的第二部分以及适于附到用户(110)的右耳(108)；检测单元(112)，适于检测第一音频再现单元(102)和第二音频再现单元(104)的的左/右颠倒；以及控制单元(114)，适于当检测到左/右颠倒时控制第一音频再现单元(102)再现音频数据的第二部分以及控制第二音频再现单元(104)再现音频数据的第一部分。

Description

处理音频数据的设备和方法
技术领域
本发明涉及用于处理音频数据的设备。除此之外，本发明还涉及处理音频数据的方法。此外，本发明涉及程序单元。此外，本发明涉及计算机可读介质。
背景技术
由于便携式音频播放器的推广，头戴式受话器收听变得越来越普遍。当今甚至移动电话也允许在头戴式受话器上回放音乐。头戴式受话器还越来越多地用在后座娱乐(RSE)系统中：这使得坐在汽车后座的人可以收听音乐或观看DVD而不受主汽车音频设备上播放的音乐的干扰并且不干扰前面乘客。
另一重要趋势是越来越多地使用主动降噪(ANR)头戴式受话器，ANR头戴式受话器利用通过头戴式受话器扬声器播放的反声(anti-sound)将用户与环境声音(例如，汽车/飞机引擎噪声、风扇噪声、火车/地铁)隔离。反声是从置于头戴式受话器上的麦克风计算出来的。
使用头戴式受话器时遭遇的一般缺点是需要遵守左/右顺序，即，确保左(右)头戴式受话器在左(右)耳上。在收听音乐时左/右颠倒可能并无大碍，但是例如在电影回放和增强现实系统(如，听觉显示器)中，左右颠倒在整个体验上有不良的影响。在上述两种情况下，在头戴式受话器上播放的声源确实与物理位置(在电影回放的情况下是屏幕，在听觉显示器的情况下是物理位置)有关。
尽管头戴式受话器可以在左听筒上标记“L”在右听筒上标记“R”，但是用户不方便在每当需要戴上头戴式受话器时寻找这些指示。尽管存在一些方便之处，例如对于全尺寸头戴式受话器线缆插在左侧，或者对于耳内头戴式受话器左侧线缆较短，但是这些并没有被普及并且不能防止用户不适当地交换声通道。
发明内容
本发明的目的是提供一种方便收听者使用的音频系统。
为了实现上述目的，提供了根据独立权利要求的一种用于处理音频数据的设备、一种处理音频数据的方法、一种程序单元以及一种计算机可读介质。
根据本发明的示例实施例，提供了一种用于处理音频数据(可以包括音频数据的第一部分和音频数据的第二部分，或者由音频数据的第一部分和音频数据的第二部分构成)的设备，其中，所述设备包括：第一音频再现单元(还可以表示为左耳音频再现单元)，适于以默认模式再现音频数据的第一部分(还可以表示为左耳音频数据)以及适于(具体地，用于)附到用户的左耳；第二音频再现单元(也可以表示为右耳音频再现单元)，适于以默认模式再现音频数据的第二部分(也可以表示为右耳音频数据，右耳音频数据可以与音频数据的第一部分不同，在立体声配置下可以与音频数据的第一部分互补)并且适于(具体地，用于)附到用户的右耳；检测单元，适于检测第一音频再现单元和第二音频再现单元的可能左/右颠倒；以及控制单元，适于当检测到左/右颠倒时控制第一音频再现单元再现音频数据的第二部分以及控制第二音频再现单元再现音频数据的第一部分(在实施例中，控制单元还可以适于当检测到不存在左/右颠倒时控制第一音频再现单元继续再现音频数据的第一部分以及控制第二音频再现单元继续再现音频数据的第二部分；换言之，在与默认模式不同的左/右颠倒模式下，当检测到第一音频再现单元已被错误地附到用户右耳而第二音频再现单元已被错误地附到用户左耳时，可以选择性地控制第一音频再现单元和第二音频再现单元互换音频数据第一部分和第二部分的再现)。
根据本发明另一示例实施例，提供了一种处理音频数据的方法，其中所述方法包括：利用要附到用户左耳的第一音频再现单元来再现音频数据的第一部分；利用要附到用户右耳的第二音频再现单元来再现音频数据的第二部分；检测第一音频再现单元和第二音频再现单元的左/右颠倒；当检测到左/右颠倒时，控制第一音频再现单元再现音频数据的第二部分以及控制第二音频再现单元再现音频数据的第一部分。
根据本发明的另一示例实施例，提供了一种处理音频数据的程序单元(例如，软件代码或可执行代码形式的软件例程)，所述程序单元在由处理器来执行时适于控制或执行具有上述特征的音频数据处理方法。
根据本发明的另一示例实施例，提供了一种计算机可读介质(例如，CD、DVD、USB棒、软盘或硬盘)，在所述计算机可读介质中存储处理音频数据的计算机程序，所述计算机程序在由处理器来执行时适于控制或执行具有上述特征的音频数据处理方法。
可以根据本发明实施例来执行的出于音频再现校正目的的数据处理可以由计算机程序来实现(即，由软件来实现)，或者通过使用一个或多个特殊电子最优化电路来实现(即，以硬件来实现)，或以混合形式来实现(即，利用软件组件和硬件组件来实现)。
术语“音频数据”可以具体是指要由音频再现设备具体地由设备的扬声器来再现的任何音频片段。这种音频内容可以包括存储在诸如CD、DVD或硬盘之类的存储设备上或者可以由电视或广播站或经由诸如公共互联网或通讯网之类的通信网络广播的音频信息。这种音频内容可以是电影声音、音乐歌曲、录音书籍、计算机游戏的声音等等。
术语“音频再现单元”可以具体是指能够将电子音频数据转换成可以被附有音频再现单元的人类收听者耳朵感知的对应声波的任何实体。因此，音频再现单元可以是例如可以集成在听筒中的扬声器，用于执行有选择的且空间上受限制的音频数据回放。
术语两个音频再现单元的“左/右颠倒”可以具体是指用户错误地将两个音频再现单元互换或颠倒，即，将右耳音频再现单元附到左耳而将左耳音频再现单元附到右耳。因此，在存在两个音频回放单元的这种不适当交换的情况下，本来要提供给左耳的音频数据可能被提供给右耳，并且反之亦然。向“左”耳或“右”耳的音频再现单元分配可能是纯粹逻辑上的，即，可以由音频再现系统来定义，和/或可以向音频再现系统的用户指示这种分配，例如通过分别以诸如“左”或“L”和“右”或“R”之类的指示符来标记两个音频再现单元来向音频再现系统的用户指示这种分配。
根据本发明的示例实施例，可以提供一种系统，该系统自动检测用户以错误方式佩戴头戴式受话器或其他音频再现单元，即，用户将第一音频再现单元(本要正确地附到左耳)附到右耳并且将第二音频再现单元(本要正确地附到右耳)附到左耳。在再现方向相关或空间相关的音频数据的情况下，这种左/右颠倒可能对音频数据的感知造成不良影响。因此，示例实施例可以提供一种自动检测系统，该自动检测系统可以识别出头戴式受话器的错误佩戴并且可以在检测到这种错误佩戴模式时交换要由两个音频再现单元再现的音频数据。换言之，第一音频再现单元被操作为再现右耳音频数据，第二音频再现单元被操作为再现左耳音频数据。因此，在不需要用户执行校正动作的情况下，从而以方便用户的方式，可以确保甚至不熟练的用户可以以简单可靠的方式安全地收听方向或位置相关的音频数据。
在下文中，将说明设备的另外的示例实施例。然而，这些实施例也可以应用于方法、计算机可读介质以及程序单元。
检测单元可以包括位于第一音频再现单元的位置处(例如，与第一音频再现单元直接相邻，例如都集成在相同的听筒中)并且适于检测第一音频信号的第一信号检测单元，以及包括位于第二音频再现单元的位置处(例如，与第二音频再现单元直接相邻，例如都集成在相同的听筒中)并且适于检测第二检测信号的第二信号检测单元。检测单元可以适于基于第一检测信号和第二检测信号的评估，具体地基于这两个信号之间的时间相关性，来检测左/右颠倒。因此，每个音频再现单元(可以是扬声器)可以逻辑上或空间上被分配给能够检测音频数据或其他数据(如，不可听的超声波)的相应信号检测单元。也可以实现其他检测信号，如，基于电磁辐射的检测信号。因此，可以针对每个音频再现单元评估信号的时间特性。因此，可以估计与音频再现单元有关的位置信息，并且可以检测可能的左/右颠倒。
仍参考前述实施例，检测单元还可以适于通过确定第一信号检测单元检测到的信号与第二信号检测单元检测到的信号之间的时间差来检测左/右颠倒。还可以分析分派给音频再现单元的信号之间的相对时间偏移。具体地，可以确定信号源(如，声源、超声波源或电磁辐射源)的发射信号与信号到达相应信号检测单元的位置之间的运行时间差。
仍参考前述实施例，第一信号检测单元可以包括第一麦克风，第二信号检测单元可以包括第二麦克风。这些麦克风可以用于检测相应的检测信号。
还可以使用已为每个扬声器分配相应麦克风的主动降噪(ANR)系统以具体地简单且有效的方式来实现这样的实施例。尽管这种麦克风在主动降噪系统中主要用于其他用途(即，用于检测环境噪声以允许相应地操纵回放的音频信号从而补偿环境中的可听干扰)，然而这些麦克风可以协作用于检测使得可以确定两个再现单元的位置并从而确定可能的左/右颠倒的信号。
在根据示例实施例实现的ANR系统中，噪声消除扬声器可以向原始声音发送具有相同幅度但是具有反相的声波。在处理所谓的干扰中，声波组合起来形成新的声波，并通过相位消除而彼此有效地抵消。合成的声波可以非常微弱以至于人耳听不到。发射消除信号的换能器可以位于想要消音的位置(例如用户的耳朵)。在实施例中，第一音频再现单元和第二音频再现单元可以适于主动降噪。主动降噪(ANR)头戴式送受话器可以通过经由头戴式送受话器扬声器播放所谓的“反噪声”来减小对环境噪声的外露。基本原理是，利用麦克风拾取环境噪声，利用ANR滤波器对其进行滤波和相位反转，并将其发送回扬声器。在前馈ANR的情况下，麦克风可以被布置在耳杯外部。在反馈ANR的情况下，麦克风可以被布置在耳杯内部。用于主动降噪的附加麦克风还可以同时且协作地用于检测可能的左/右颠倒。
然而，本发明的其他实施例也可以实现在除了主动降噪系统以外的其他系统中。因此，甚至在不提供ANR功能的情况下，附加的分立麦克风在空间上位于音频再现单元的位置处也是可能的。
设备还可以包括：信号发射单元，适于发射参考信号以由第一信号检测单元检测作为第一检测信号以及由第二信号检测单元来检测作为第二检测信号。这种信号发射单元或信号源可以被置于预先已知的参考位置处，使得在信号检测单元的不同位置处检测到的检测信号对可以允许得到两个音频再现单元之间的相对空间关系。
例如，信号发射单元可以发射可听参考信号。这样的可听参考信号可以是无论如何要被再现以被人耳感知的音频声音(如，音频内容)。备选地，可听参考信号可以是具体用于校准和左/右颠倒的专用音频测试信号。
在另一实施例中，参考信号可以是不可听参考信号，如，超声波，或者也可以是电磁辐射束。这样的信号不能被用户感知因此不会干扰用户的可听感知。
在实施例中，信号发射单元可以包括：至少一个另外的音频再现单元，适于与第一音频再现单元和第二音频再现单元无关地再现另外的音频数据，再现的另外的音频数据构成参考信号。因此，可以在第一和第二音频再现单元(可以由头戴式受话器来表示)的环境中布置作为另外的音频再现单元的一个或多个另外的扬声器，使得这种另外的一个或多个音频再现单元可以用于产生参考信号，即，可以起到用于发射参考信号的信号发射单元的作用。因此，当无论如何将一个或多个另外的扬声器置于构成第一和第二音频再现单元的头戴式受话器的环境中时，可以以非常简单的方式执行左/右颠倒，而不没有附加的硬件需求。
例如，在汽车的后座娱乐系统中情况也是如此。这样的实施例可以是尤为合适的，因为信号发射单元已经存在于音频再现单元的声环境中，例如，在汽车后座娱乐系统中，在所述汽车后座娱乐系统中，存在用于发射声音的扬声器(可以同时用作一个或多个信号发射单元)，并且坐在汽车后座上的人可以使用头戴式受话器来收听音频内容。
有利地，信号发射单元被固定地安装在预先已知的参考位置。在这种情况下，位置信息(例如，汽车客舱内的特定位置)可以用作参考信息，基于该参考信息，可以在分析参考信号到达第一和第二音频再现单元的相应位置的到达时间之间的时间差时，确定第一和第二音频再现单元的位置。
本发明的示例实施例的示例应用是汽车的后座娱乐系统、包括用于翻译或解释的头戴式受话器在内的会议系统、飞机娱乐系统等。音频再现单元可以构成头戴式送受话器、头戴式受话器或耳机的一部分。其他应用也是可能的。实施例可以具体应用于佩戴头戴式受话器的收听者被固定扬声器装置所环绕的所有环境，所述固定扬声器装置例如是后座娱乐(RSE)、会议系统(用于翻译的头戴式受话器)、飞机娱乐(IFE)头戴式受话器等等。
例如，根据本发明的设备可以被实现为移动电话、电视设备、录像机、监视器、游戏机、膝上型计算机、音频播放器、DVD播放器、CD播放器、基于硬盘的媒体播放器、收音机、互联网收音机、公共娱乐设备、MP3播放器、汽车娱乐设备、医疗通信系统、身体佩戴设备、语音通信设备、家庭影院系统、家庭剧场系统、平面电视设备、气氛创建设备、演播室录制系统、或音乐厅设备。然而，这些应用仅仅是示例性的，许多技术领域中的其他应用也是可能的。
从以下描述的实施例的示例中，本发明的上述方面和其他方面将是显而易见的，将参考这些实施例的示例来说明本发明的上述方面和其他方面。
附图说明
以下将参考实施例的示例来详细描述本发明，但是本发明不限于这些实施例的示例。
图1示出了根据本发明示例实施例的处理音频数据的系统。
图2示出了根据本发明示例实施例的处理音频数据的另一系统。
图3示出了从基准扬声器到人类收听者左耳和右耳的左脉冲响应和右脉冲响应。
图4示出了根据图3的脉冲响应的互相关，其中箭头指示两耳时差。
具体实施方式
图中所示是示意性的。在不同的图中，相似或相同的单元具有相同的参考标记。
根据本发明的示例实施例，可以提供例如用于后座娱乐头戴式受话器的自动左/右头戴式受话器颠倒检测。实施例提供了一种用于例如为用于车内后座娱乐的主动降噪头戴式受话器自动检测左/右颠倒的系统。这种系统可以利用以下事实：(在收听者头部的每一侧)头戴式送受话器上的麦克风被来自播放已知信号的汽车音频设备的扬声器环绕。这使得可以监控这些扬声器中的一个(或更多个)与两个头戴式送受话器麦克风之间的声通路。对于每个扬声器，延迟最小的麦克风应当与扬声器在同一侧。否则，指示麦克风被交换并且可以执行自动通道交换。
在下文中，参考图1，将说明根据本发明示例实施例的音频再现系统100。
图1示出了具有左耳106和右耳108并且戴着头戴式受话器130的用户110。头戴式受话器130包括第一耳杯132和第二耳杯134。第一耳杯132包括用于发射声波的第一扬声器102以及用于捕获声波的第一麦克风116。第二耳杯134包括用于发射声波的第二扬声器104以及用于捕获声波的第二麦克风118。戴着头戴式受话器130的用户110坐在汽车后座，汽车配备有汽车娱乐系统，所述汽车娱乐系统还包括第三扬声器120和第四扬声器122，所述第三扬声器120和第四扬声器122在空间上被布置为固定在汽车客舱内的预先已知位置处。所有扬声器120、122、102、104都连接至汽车的音频再现系统140，如，HiFi系统。提供音频数据存储单元142(例如，硬盘、CD等)，音频数据存储单元142存储要播放的音频内容，如，歌曲、电影等。因此，再现数据包括音频数据，并且可选地还可以包括视频数据。在所示的实施例中，用户110再现音频数据存储设备142上存储的多媒体内容。
此外，提供处理器(例如，微处理器或中央处理单元CPU)，以参考数字112、114示出和表示。如以下将说明的，该处理器能够检测并消除头戴式受话器130的可能左/右颠倒。
在用户110正确佩戴第一耳杯132和第二耳杯134的情况下，第一耳杯132将附到用户110的左耳106，第二耳杯134将附到用户110的右耳108。如果情况确实如此，则扬声器102回放要为左耳106提供的音频内容，扬声器104回放要为右耳108提供的不同音频内容。如果要再现的音频内容包括空间信息(例如，与可以同时再现的电影的视频内容有关，例如包括与演员当前位于显示器上的哪个位置有关的空间信息在内的演讲)，则左耳106上的第一耳杯132和右耳108上的第二耳杯134的相关位置可能很重要。在所述期望的佩戴配置中的回放模式可以表示为“默认模式”。
然而，图1示出了另一情况，其中在第一耳杯132处，扬声器102错误附到右耳108而在第二耳杯134处，扬声器104错误地附到左耳106，使得与期望的佩戴情况相比，扬声器102、104所回放的音频内容会被交换。正确操作头戴式受话器130需要将第一扬声器102附到左耳106，将第二扬声器104附到右耳108。由于错误佩戴第一扬声器102和第二扬声器104，使得第二扬声器104错误地再现右耳音频数据，第一扬声器102错误地再现左耳音频数据。然而，用户110不方便识别这种左/右颠倒并通过正确地将第一扬声器102附到左耳106以及将第二扬声器104附到右耳108来手动消除这种左/右颠倒。
为了克服这种缺陷，如以下将描述的，根据本发明示例实施例的系统100提供了对第一耳杯132和第二耳杯134的错误佩戴的自动校正。图1所示的佩戴配置中的相应调整回放模式可以表示为“左/右颠倒模式”。
为了校正回放模式，构成上述处理器的一部分的检测处理单元112适于检测第一和第二扬声器102、104的左/右颠倒。鉴于检测到的左/右转化，构成处理器的一部分的控制单元114也适于控制第一扬声器102(错误地附到右耳108并正常再现左耳音频数据)当前再现右耳音频数据。相应地，控制单元114适于控制第二扬声器104(错误地附到左耳106并正常地再现右耳音频数据)当前再现左耳音频数据。换言之，简单地转换了要由扬声器102、104回放的专用音频数据。为了补偿扬声器102、104的颠倒佩戴状态，也将再现的音频数据颠倒以便补偿颠倒的佩戴状态，从而校正提供至左耳106和右耳108的音频数据。因此，在左/右颠倒模式下，与默认模式相比，将扬声器102、104所再现的音频内容颠倒。
为了执行检测任务，可以使用第一麦克风116来检测第一检测信号，所述第一麦克风116在位置上与第一扬声器102相邻并且构成听筒132的一部分。此外，在位置上与第二扬声器104相邻的第二麦克风118可以检测第二检测信号。基于第一检测信号和第二检测信号，检测处理单元112判定是否存在左/右颠倒，在必要时向控制单元114提供相应的控制信号。
在这种检测的情况下，如图1所示，第四扬声器122同时被用作参考信号发射单元并且发射参考信号150以供两个麦克风116、118检测。由于信号发射单元122的位置固定并且由于信号发射单元122相对于麦克风116、118非对称布置，所以在参考信号150到达第一麦克风116位置的第一时间点(或第一时间间隔)与参考信号150到达第二麦克风118位置的第二时间点(第二时间间隔)之间存在时间差。该时间差可以用于检测是否存在左/右颠倒。在图1所示的示例中，由于左/右颠倒，与参考信号150到达第二麦克风118位置的到达时间相比，参考信号150较早到达第一麦克风116的位置。因此，检测单元112可以检测到存在左/右颠倒。因此，可以将第一和第二麦克风102、104所再现的音频数据颠倒以便补偿左/右颠倒。在不存在左/右颠倒的情况下，与参考信号150到达第一麦克风116位置的到达时间相比，参考信号150较早到达第二麦克风118的位置。
由于存在附加的麦克风116、118，所以图1的系统也可以起到主动降噪系统的作用。
在实施例中，可以当接通音频数据再现系统100时检测左/右颠倒的存在或不存在。还可以例如以规则的时间间隔或在发生预定义的事件(例如，新的音频片段的回放)时，动态地重复左/右颠倒的存在或不存在。
在下文中，参考图2，将说明根据另一示例实施例的音频数据再现系统200。图1和图2的实施例非常相似，因此图1和图2的相应特征也可以在相应的另一实施例中实现。
在图2的实施例中，存在另外的扬声器202、204、206、208和210。佩戴立体声头戴式受话器102、104的收听者110具有位于左侧和/或右侧的扬声器202、204、206、208和210中的一个或多个。头戴式受话器102、104每侧配备有麦克风116、118，例如对于主动降噪(ANR)头戴式受话器情况也是如此。
令Li是由置于收听者110左侧的扬声器122播放的参考信号150。Li可以是通过主汽车音频设备播放的音乐或者当用户110戴上头戴式受话器102、104时自动播放的测试信号(可选地，不可听的)。在图2中，earL和earR是分别由头戴式受话器102、104上的左麦克风和右麦克风116、118记录的信号。
图3示出了具有横坐标302的图300，沿着横坐标302绘制时间(44.1kHz下的采样)沿着纵坐标304绘制幅度。图3示出了第一曲线306，第一曲线306表示从参考扬声器122到左耳106的左脉冲响应。第二曲线308示出了从参考扬声器122到右耳108的右脉冲响应。
图4示出了具有横坐标402的图400，沿着横坐标402绘制时间(44.1kHz下的采样)。沿着纵坐标404绘制幅度。图4示出了曲线406，曲线406指示图3所示曲线306和308的互相关，其中耳间时差(ITD)如箭头408所示。因此，图4示出了tfL与tfR的互相关。
可以计算earL与earR之间的时间差(称作耳间时差ITD)，以便检测可能的左/右交换。这可以(但不必须)利用传统的系统识别技术(如，公知的NLMS算法、归一化最小均方滤波器)来实现，所述传统的系统识别技术计算参考扬声器122与麦克风116、118之间的声传递函数。然后对得到的左传递函数和右传递函数(分别是TFL和TFR)进行互相关，互相关最大的时间位置是earL与earR信号之间的ITD。
在本发明示例实施例中可以实现的另一ITD计算技术(图中未示出，但是在“Binaural positioning system for wearable augmented reality audio”，Tikander，M.；Harma，A.；Karjalainen，M.，Applications of Signal Processing to Audio and Acoustics，2003IEEE Workshop on.，19-22Oct.2003pages 153-156，Digital Object Identifier中描述了该技术)在于利用Li对earL和earR进行互相关。ITD等于左互相关最大值与右互相关的最大值之间的时间差。
在另一实施例中，还可以通过直接对earL和earR进行互相关并确定互相关的最大值来得到ITD。然而，前述方法可以在启用多个扬声器时表现得更为鲁棒。
正(负)ITD意味着earR(earL)和相对于earL(earR)有时延。如在当前情况下，参考扬声器122在左侧，左/右交换仅发生在计算出的ITD为负的情况下。对于置于右侧的参考扬声器122，ITD必须为正以操作左/右交换。
如果多个扬声器122、202、204、206、208、210同时播放，则可以对扬声器122、202、204、206、208、210中的一些或每一个应用相同的处理。这可以提高系统的可靠性，尤其是在有噪环境中。
应注意，术语“包括”不排除其他元素或特征。此外，可以组合关于不同实施例而描述的元素。
还应注意，权利要求中的参考标记不应构成对权利要求范围的限制。

Claims (15)

1.一种用于处理音频数据的设备(100)，其中，设备(100)包括：
第一音频再现单元(102)，适于再现音频数据的第一部分以及适于附到用户(110)的左耳(106)；
第二音频再现单元(104)，适于再现音频数据的第二部分以及适于附到用户(110)的右耳(108)；
检测单元(112)，适于检测第一音频再现单元(102)和第二音频再现单元(104)的左/右颠倒；
控制单元(114)，适于当检测到左/右颠倒时控制第一音频再现单元(102)再现音频数据的第二部分以及控制第二音频再现单元(104)再现音频数据的第一部分。
2.根据权利要求1所述的设备(100)，其中，
检测单元(112)包括位于第一音频再现单元(102)的位置处并且适于检测第一音频信号的第一信号检测单元(116)，以及包括位于第二音频再现单元(104)的位置处并且适于检测第二检测信号的第二信号检测单元(118)；
检测单元(112)适于基于第一检测信号和第二检测信号来检测左/右颠倒。
3.根据权利要求2所述的设备(100)，其中，检测单元(112)适于通过确定第一信号检测单元(116)检测到的第一检测信号与第二信号检测单元(118)检测到的第二检测信号之间的时间差来检测左/右颠倒。
4.根据权利要求2所述的设备(100)，其中，第一信号检测单元(116)包括第一麦克风，第二信号检测单元(118)包括第二麦克风。
5.根据权利要求2所述的设备(100)，包括：信号发射单元(122)，适于发射参考信号，由第一信号检测单元(116)检测以作为第一检测信号以及由第二信号检测单元(118)检测以作为第二检测信号。
6.根据权利要求5所述的设备(100)，其中，信号发射单元(122)适于发射可听参考信号或不可听参考信号。
7.根据权利要求5所述的设备(100)，其中，信号发射单元(122)包括：至少一个另外的音频再现单元，适于与第一音频再现单元(102)和第二音频再现单元(104)无关地再现另外的音频数据，再现的另外的音频数据构成参考信号。
8.根据权利要求5所述的设备(100)，其中，信号发射单元(122)被固定地安装在预定的参考位置。
9.根据权利要求1所述的设备(100)，其中，第一音频再现单元(102)和第二音频再现单元(104)适于主动降噪。
10.根据权利要求1所述的设备(100)，所述设备被适配为在以下系统之一：车辆的后座娱乐系统、包括用于翻译的头戴式受话器的会议系统、以及飞机娱乐系统。
11.根据权利要求1所述的设备(100)，其中，第一音频再现单元(102)和第二音频再现单元(104)构成头戴送受话器、头戴式受话器或耳机的一部分。
12.根据权利要求1所述的设备(100)，被实现为以下项目中的至少一项：移动电话、助听器、电视设备、录像机、监视器、游戏机、膝上型计算机、音频播放器、DVD播放器、CD播放器、基于硬盘的媒体播放器、收音机、互联网收音机、公共娱乐设备、MP3播放器、汽车娱乐设备、医疗通信系统、身体佩戴设备、语音通信设备、家庭影院系统、家庭剧场系统、平面电视设备、气氛创建设备、演播室录制系统、以及音乐厅设备。
13.一种处理音频数据的方法，其中，所述方法包括：
利用要附到用户(110)左耳(106)的第一音频再现单元(102)来再现音频数据的第一部分；
利用要附到用户(110)右耳(108)的第二音频再现单元(104)来再现音频数据的第二部分；
检测第一音频再现单元(102)和第二音频再现单元(104)的左/右颠倒；
当检测到左/右颠倒时，控制第一音频再现单元(102)再现音频数据的第二部分以及控制第二音频再现单元(104)再现音频数据的第一部分。
14.一种计算机可读介质，在所述计算机可读介质中存储处理音频数据的计算机程序，所述计算机程序在由处理器(112，114)来执行时适于执行或控制根据权利要求13所述的方法。
15.一种处理音频数据的程序单元，所述程序单元在由处理器(112，114)来执行时适于执行或控制根据权利要求13所述的方法。
CN2010102545211A 2009-08-17 2010-08-13 处理音频数据的设备和方法 Pending CN101998222A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP09168012.4 2009-08-17
EP09168012A EP2288178B1 (en) 2009-08-17 2009-08-17 A device for and a method of processing audio data

Publications (1)

Publication Number Publication Date
CN101998222A true CN101998222A (zh) 2011-03-30

Family

ID=41695863

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010102545211A Pending CN101998222A (zh) 2009-08-17 2010-08-13 处理音频数据的设备和方法

Country Status (3)

Country Link
US (1) US8787602B2 (zh)
EP (1) EP2288178B1 (zh)
CN (1) CN101998222A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104080028A (zh) * 2013-03-25 2014-10-01 联想(北京)有限公司 一种识别方法、电子设备及耳机
CN104509129A (zh) * 2012-04-19 2015-04-08 索尼电脑娱乐公司 耳机方位的自动检测
CN105992117A (zh) * 2015-03-19 2016-10-05 陈光超 耳膜助听器
CN108519097A (zh) * 2018-03-14 2018-09-11 联想(北京)有限公司 导航方法以及语音播放设备
CN108886653A (zh) * 2016-04-20 2018-11-23 华为技术有限公司 一种耳机声道控制方法、相关设备及系统

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202009009804U1 (de) * 2009-07-17 2009-10-29 Sennheiser Electronic Gmbh & Co. Kg Headset und Hörer
US9357282B2 (en) * 2011-03-31 2016-05-31 Nanyang Technological University Listening device and accompanying signal processing method
US9084058B2 (en) 2011-12-29 2015-07-14 Sonos, Inc. Sound field calibration using listener localization
US9219460B2 (en) 2014-03-17 2015-12-22 Sonos, Inc. Audio settings based on environment
US9106192B2 (en) 2012-06-28 2015-08-11 Sonos, Inc. System and method for device playback calibration
US9113246B2 (en) 2012-09-20 2015-08-18 International Business Machines Corporation Automated left-right headphone earpiece identifier
US9326058B2 (en) 2012-09-26 2016-04-26 Sony Corporation Control method of mobile terminal apparatus
US9681219B2 (en) * 2013-03-07 2017-06-13 Nokia Technologies Oy Orientation free handsfree device
US20150029112A1 (en) * 2013-07-26 2015-01-29 Nxp B.V. Touch sensor
US10063982B2 (en) * 2013-10-09 2018-08-28 Voyetra Turtle Beach, Inc. Method and system for a game headset with audio alerts based on audio track analysis
US9264839B2 (en) 2014-03-17 2016-02-16 Sonos, Inc. Playback device configuration based on proximity detection
CN104125522A (zh) * 2014-07-18 2014-10-29 北京智谷睿拓技术服务有限公司 声道配置方法、装置及用户设备
US9910634B2 (en) * 2014-09-09 2018-03-06 Sonos, Inc. Microphone calibration
US9952825B2 (en) 2014-09-09 2018-04-24 Sonos, Inc. Audio processing algorithms
US9782672B2 (en) * 2014-09-12 2017-10-10 Voyetra Turtle Beach, Inc. Gaming headset with enhanced off-screen awareness
US9640169B2 (en) * 2015-06-25 2017-05-02 Bose Corporation Arraying speakers for a uniform driver field
US9693165B2 (en) 2015-09-17 2017-06-27 Sonos, Inc. Validation of audio calibration using multi-dimensional motion check
EP3531714B1 (en) 2015-09-17 2022-02-23 Sonos Inc. Facilitating calibration of an audio playback device
US9743207B1 (en) 2016-01-18 2017-08-22 Sonos, Inc. Calibration using multiple recording devices
US10003899B2 (en) 2016-01-25 2018-06-19 Sonos, Inc. Calibration with particular locations
US11106423B2 (en) 2016-01-25 2021-08-31 Sonos, Inc. Evaluating calibration of a playback device
US9706304B1 (en) * 2016-03-29 2017-07-11 Lenovo (Singapore) Pte. Ltd. Systems and methods to control audio output for a particular ear of a user
US9864574B2 (en) 2016-04-01 2018-01-09 Sonos, Inc. Playback device calibration based on representation spectral characteristics
US9860662B2 (en) 2016-04-01 2018-01-02 Sonos, Inc. Updating playback device configuration information based on calibration data
US9763018B1 (en) 2016-04-12 2017-09-12 Sonos, Inc. Calibration of audio playback devices
US9794710B1 (en) 2016-07-15 2017-10-17 Sonos, Inc. Spatial audio correction
US10372406B2 (en) 2016-07-22 2019-08-06 Sonos, Inc. Calibration interface
US10205906B2 (en) 2016-07-26 2019-02-12 The Directv Group, Inc. Method and apparatus to present multiple audio content
US10459684B2 (en) 2016-08-05 2019-10-29 Sonos, Inc. Calibration of a playback device based on an estimated frequency response
GB201615538D0 (en) * 2016-09-13 2016-10-26 Nokia Technologies Oy A method , apparatus and computer program for processing audio signals
KR102535726B1 (ko) * 2016-11-30 2023-05-24 삼성전자주식회사 이어폰 오장착 검출 방법, 이를 위한 전자 장치 및 저장 매체
US11206484B2 (en) 2018-08-28 2021-12-21 Sonos, Inc. Passive speaker authentication
US10299061B1 (en) 2018-08-28 2019-05-21 Sonos, Inc. Playback device calibration
US11188721B2 (en) * 2018-10-22 2021-11-30 Andi D'oleo Headphones for a real time natural language machine interpretation
DE102019202987A1 (de) * 2019-03-05 2020-09-10 Ford Global Technologies, Llc Fahrzeug und Anordnung mikroelektromechanischer Systeme zur Signalwandlung in einem Fahrzeuginnenraum
US11221820B2 (en) * 2019-03-20 2022-01-11 Creative Technology Ltd System and method for processing audio between multiple audio spaces
US10734965B1 (en) 2019-08-12 2020-08-04 Sonos, Inc. Audio calibration of a portable playback device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0464217A1 (en) * 1990-01-19 1992-01-08 Sony Corporation Apparatus for reproducing acoustic signals
JP2002135887A (ja) * 2000-10-27 2002-05-10 Nec Corp ヘッドホン装置
WO2005029911A1 (en) * 2003-09-22 2005-03-31 Koninklijke Philips Electronics N.V. Electric device, system and method

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5434921A (en) * 1994-02-25 1995-07-18 Sony Electronics Inc. Stereo image control circuit
JP3796776B2 (ja) * 1995-09-28 2006-07-12 ソニー株式会社 映像音声再生装置
EP1221276B1 (de) * 1999-10-14 2003-07-23 Phonak Ag Verfahren zur anpassung eines hörgerätes und hörgerät
US8208654B2 (en) * 2001-10-30 2012-06-26 Unwired Technology Llc Noise cancellation for wireless audio distribution system
US7120256B2 (en) * 2002-06-21 2006-10-10 Dolby Laboratories Licensing Corporation Audio testing system and method
DE10331757B4 (de) * 2003-07-14 2005-12-08 Micronas Gmbh Audiowiedergabesystem mit einem Datenrückkanal
JP2005333211A (ja) * 2004-05-18 2005-12-02 Sony Corp 音響収録方法、音響収録再生方法、音響収録装置および音響再生装置
GB0419346D0 (en) * 2004-09-01 2004-09-29 Smyth Stephen M F Method and apparatus for improved headphone virtualisation
CN101467446A (zh) * 2006-06-13 2009-06-24 株式会社尼康 头戴显示器
WO2008028136A2 (en) * 2006-09-01 2008-03-06 Etymotic Research, Inc. Improved antenna for miniature wireless devices and improved wireless earphones supported entirely by the ear canal
JP2008103827A (ja) * 2006-10-17 2008-05-01 Sharp Corp ワイヤレスヘッドホン
US8050444B2 (en) * 2007-01-19 2011-11-01 Dale Trenton Smith Adjustable mechanism for improving headset comfort
US7995770B1 (en) * 2007-02-02 2011-08-09 Jeffrey Franklin Simon Apparatus and method for aligning and controlling reception of sound transmissions at locations distant from the sound source

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0464217A1 (en) * 1990-01-19 1992-01-08 Sony Corporation Apparatus for reproducing acoustic signals
JP2002135887A (ja) * 2000-10-27 2002-05-10 Nec Corp ヘッドホン装置
WO2005029911A1 (en) * 2003-09-22 2005-03-31 Koninklijke Philips Electronics N.V. Electric device, system and method

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104509129A (zh) * 2012-04-19 2015-04-08 索尼电脑娱乐公司 耳机方位的自动检测
CN104080028A (zh) * 2013-03-25 2014-10-01 联想(北京)有限公司 一种识别方法、电子设备及耳机
CN104080028B (zh) * 2013-03-25 2016-08-17 联想(北京)有限公司 一种识别方法、电子设备及耳机
CN105992117A (zh) * 2015-03-19 2016-10-05 陈光超 耳膜助听器
CN108886653A (zh) * 2016-04-20 2018-11-23 华为技术有限公司 一种耳机声道控制方法、相关设备及系统
CN108886653B (zh) * 2016-04-20 2020-07-28 华为技术有限公司 一种耳机声道控制方法、相关设备及系统
US10805708B2 (en) 2016-04-20 2020-10-13 Huawei Technologies Co., Ltd. Headset sound channel control method and system, and related device
CN108519097A (zh) * 2018-03-14 2018-09-11 联想(北京)有限公司 导航方法以及语音播放设备

Also Published As

Publication number Publication date
US8787602B2 (en) 2014-07-22
US20110038484A1 (en) 2011-02-17
EP2288178B1 (en) 2012-06-06
EP2288178A1 (en) 2011-02-23

Similar Documents

Publication Publication Date Title
CN101998222A (zh) 处理音频数据的设备和方法
US11676568B2 (en) Apparatus, method and computer program for adjustable noise cancellation
CN101794574B (zh) 用于处理音频数据的装置和方法
EP1540988B1 (en) Smart speakers
US5619582A (en) Enhanced concert audio process utilizing a synchronized headgear system
US8121319B2 (en) Tracking system using audio signals below threshold
US7123731B2 (en) System and method for optimization of three-dimensional audio
JP3435141B2 (ja) 音像定位装置、並びに音像定位装置を用いた会議装置、携帯電話機、音声再生装置、音声記録装置、情報端末装置、ゲーム機、通信および放送システム
KR20110069112A (ko) 보청기 시스템에서 바이노럴 스테레오를 렌더링하는 방법 및 보청기 시스템
AU2016293318B2 (en) Personal audio mixer
JP4735920B2 (ja) 音響処理装置
CN106792365B (zh) 一种音频播放方法及装置
US20240107232A1 (en) Directional sound recording and playback
WO2022009722A1 (ja) 音響出力装置および音響出力装置の制御方法
US20190182557A1 (en) Method of presenting media
JP2006352728A (ja) オーディオ装置
Hammershøi et al. Control of earphone produced binaural signals

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110330