CN108781321A - 用于传输路径噪声控制的方法和系统 - Google Patents

用于传输路径噪声控制的方法和系统 Download PDF

Info

Publication number
CN108781321A
CN108781321A CN201780005472.8A CN201780005472A CN108781321A CN 108781321 A CN108781321 A CN 108781321A CN 201780005472 A CN201780005472 A CN 201780005472A CN 108781321 A CN108781321 A CN 108781321A
Authority
CN
China
Prior art keywords
signal
earphone
microphone
sending device
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780005472.8A
Other languages
English (en)
Inventor
霍斯特·盖瑟尔
马丁·朔克迈尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ams Osram AG
BAE Systems Integrated System Technologies Ltd
Original Assignee
AMS Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AMS Ltd filed Critical AMS Ltd
Publication of CN108781321A publication Critical patent/CN108781321A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083Reduction of ambient noise
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/027Spatial or constructional arrangements of microphones, e.g. in dummy heads
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/033Headphones for stereophonic communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/04Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166Microphone arrays; Beamforming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/107Monophonic and stereophonic headphones with microphone for two-way hands free communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones
    • H04R2410/05Noise reduction with a separate noise microphone

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)
  • Telephone Function (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

一种使用音频耳机(HS)以及发送装置(SD)进行传输路径噪声控制的方法,包括:基于检测到的包括期望音频信息和噪声的声音,由耳机的第一和第二麦克风(M1、M2、M2F)生成麦克风信号。借助于耳机(HS)通过对基于麦克风信号的输出信号进行编码,在数据线缆(C)的第一线(XL)上生成编码信号。方法包括:经由第一线(XL)将编码信号从耳机(HS)传输到发送装置(SD),由发送装置(SD)通过对编码信号进行解码来重构输入信号,由发送装置(SD)通过将第一噪声控制算法应用于重构的第一和第二输入信号来生成净信号,并且将基于净信号的信号发送到通信网络。

Description

用于传输路径噪声控制的方法和系统
移动电子装置(例如移动电话)可以使用位于例如移动电话中的至少两个麦克风,以在进行电话呼叫时监测环境噪声。这些麦克风的数据可以与算法一起使用,以便减少在嘈杂的环境中进行电话呼叫时的背景噪声。这种技术例如称为传输噪声控制。例如,电话制造商已经开发了用于传输噪声控制的特定算法。
耳机可以例如借助于数据线缆连接到电子装置,例如利用四条线和标准四极音频插头或USB连接器。数据线缆的两条线例如承载左音频信号和右音频信号,并且一条线是接地线。因此,只有一条线可用于交换麦克风或另外的数据。因此,对于使用耳机作为语音输入装置来说可能不能够实现传输路径噪声控制。
因此,本发明的目的是提供一种使用经由数据线缆连接的音频通信装置和发送装置进行传输路径噪声控制的改进的构思。
该目的由独立权利要求的主题实现。另外的实施方式和实施例是从属权利要求的主题。
传输或Tx噪声控制旨在减少从发送装置传输到通信网络的信号中的噪声,其中,环境噪声与期望音频信息一起由输入装置(例如耳机)记录。相反,接收或Rx噪声控制旨在减少用户接收到的噪声,其中,环境噪声干扰由扬声器生成的音频信号。
根据针对传输路径噪声控制的改进的构思,音频通信装置(例如音频耳机)中的至少两个麦克风用于基于期望音频信息和声学噪声来生成至少两个相应的输入信号。两个输入信号由耳机进行编码,并且编码后的信号经由数据线缆的一条线传输到发送装置。发送装置用于对编码信号进行解码,从而重构至少两个输入信号。发送装置将传输路径噪声控制算法应用于至少两个重构的输入信号,以生成表示没有声学噪声或具有减少的声学噪声的期望音频信息的净信号。然后,将基于净信号的信号从发送装置发送到通信网络。
根据改进的构思,提供了一种使用音频通信装置(特别是音频耳机)以及经由数据线缆连接到音频通信装置的发送装置进行传输路径噪声控制的方法。方法包括基于由第一麦克风和第二麦克风检测到的声音,借助于音频通信装置的第一麦克风和第二麦克风分别生成第一麦克风信号和第二麦克风信号。检测到的声音包括期望音频信息和声学噪声。方法还包括借助于音频通信装置,通过至少对基于第一麦克风信号的第一输入信号和基于第二麦克风信号的第二输入信号进行编码,在数据线缆的第一线(例如交换线)上生成编码信号。方法还包括经由第一线将编码信号从音频通信装置发送到发送装置。
方法还包括借助于发送装置,通过对编码信号进行解码来重构第一输入信号和第二输入信号。方法还包括借助于发送装置,通过将第一噪声控制算法(特别是传输路径噪声控制算法)至少应用于重构的第一输入信号和第二输入信号,生成表示期望音频信息的净信号。方法还包括将净信号或基于净信号的信号从发送装置发送到通信网络。
表述“音频通信装置”通常是指用于音频输入和输出的装置,其包括至少一个麦克风和至少一个扩音器。特别地,音频通信装置可以是音频耳机或另一通信装置,例如用于执行电话会议呼叫的电话架。
表述“音频耳机”通常是指用于音频输入和输出的装置,其包括至少一个麦克风和头戴式耳机、耳塞式耳机、耳用扬声器、耳塞或至少一个扩音器。根据改进的构思,音频耳机具有至少两个麦克风,特别是第一麦克风和第二麦克风。
在下文中,表述“音频耳机”或“耳机”与表述“音频通信装置”可互换使用。特别地,无论何时使用表述“音频耳机”或“耳机”,其都可以由表述“音频通信装置”来代替。
根据一些实施例,第一麦克风被布置为比第二麦克风更靠近期望音频信息源。音频信息源可以例如是对第一麦克风讲话的耳机的用户,对麦克风讲话的另一个人,或相对于第一麦克风位于使得来自所述源的声音可以由第一麦克风检测到的位置处的任何其他声音源。
期望音频信息例如可以是音频输入,特别是来自耳机的用户的语音输入,其旨在从发送装置被发送到通信网络。因此,第一麦克风可以主要检测期望音频信息或主要量的期望音频信息,并且第二麦克风可以检测不同的或减少量的期望音频信息。例如,第一麦克风可以指语音采集或主要采集语音的麦克风,并且第二麦克风可以指噪声采集或主要采集噪声的麦克风。
因此,第一麦克风信号表示例如主要包括期望音频信息和第一量的噪声的第一声音信号,并且第二麦克风信号表示包括例如减少量的期望音频信息和第二量的噪声的第二声音信号。
例如,通过使用例如电流或电压调制方案调制至少第一输入信号和第二输入信号和/或将其复用到数据线缆的第一线来生成编码信号。例如,通过使用例如电流或电压解调方案对编码信号进行解调和/或对其进行解复用来执行对编码信号的解码。
根据一些实施例,编码信号是数字信号。在一些实施例中,第一麦克风和第二麦克风可以是被配置为生成第一麦克风信号和第二麦克风信号作为模拟信号的模拟麦克风。然后,第一输入信号和第二输入信号可以分别对应于基于第一麦克风信号和第二麦克风信号的数字信号。在可替选的实施例中,第一麦克风和第二麦克风可以是被配置为生成第一麦克风信号和麦克风信号作为数字信号的数字麦克风。然后,第一输入信号和第二输入信号可以分别与第一麦克风信号和第二麦克风信号相同,或者可以分别对应于基于第一麦克风信号和第二麦克风信号的模拟信号。
根据一些实施例,重构的第一输入信号和第二输入信号是数字信号,并且借助于发送装置的数字信号处理器来执行对第一噪声控制算法的应用。
由于针对传输路径噪声控制,定时或延时要求例如与对于接收路径必须控制相比可能不那么严格,数字信号处理可能特别适用于传输路径噪声控制。
净信号表示例如没有声学噪声或具有减少量的声学噪声的期望音频信息。
根据一些实施例,数据线缆包括四极音频插头或USB连接器,特别是USB-C连接器,以及包括第一线的四条线。发送装置包括例如用于经由音频插头或USB连接器连接数据线缆的四极音频插口。在USB连接器的情况下,USB连接器可以例如用于模拟音频模式中。
根据一些实施例,发送装置由移动电话、平板电脑、手提式电脑或便携式音频播放器实施或由其包括。
根据一些实施例,通信网络是以下之一:电信网络、无线通信网络、GSM网络、基于GSM的网络、蓝牙网络、WLAN网络、WiFi网络、LAN网络、基于有线的通信网络。
借助于根据改进构思的方法,可以使用音频耳机作为期望音频信息的输入装置来执行传输路径噪声控制,其中,耳机经由数据线缆连接到发送装置。重要的是,仅数据线缆的一条线(即第一线)用于以编码信号的形式传输发送装置应用第一噪声控制算法所需的所有信息。
根据一些实施例,方法还包括基于检测到的包括期望音频信息和声学噪声的声音,借助于耳机的至少一个另一第二麦克风来生成至少一个另一第二麦克风信号。通过至少对第一输入信号和第二输入信号以及基于至少一个另一麦克风信号的至少一个另一输入信号进行编码来生成编码信号。方法还包括借助于发送装置,通过对编码信号进行解码来重构第一输入信号和第二输入信号以及至少一个另一第二输入信号。借助于发送装置,通过将第一噪声控制算法至少应用于重构的第一输入信号和第二输入信号以及重构的至少一个另一第二输入信号来生成表示期望的音频信号的净信号。
至少一个另一第二麦克风具有模拟功能,并且被模拟地连接为第二麦克风,但是可以被布置在耳机的不同位置处。以这种方式,特别是通过使用重构的第一输入信号、第二输入信号和至少一个另一第二输入信号来生成净信号,可以借助于应用第一噪声控制算法来实现进一步改进的噪声控制。
根据一些实施例,一种使用音频耳机和经由数据线缆连接到耳机的发送装置进行传输路径噪声控制的方法,包括:基于经由数据线缆的第一线在耳机和发送装置之间传输的至少一个识别信号,确定耳机和发送装置两者是否都与传输路径噪声控制兼容。
所述确定过程可以包括启动序列。特别是如果耳机和发送装置两者都与传输路径噪声控制兼容,则启动序列可以包括:经由第一线将第一识别信号从发送装置发送到耳机,由耳机检测第一识别信号,响应于检测到第一识别信号将第二识别信号从耳机发送到发送装置,并且由发送装置检测第二识别信号。第一识别信号例如由耳机识别,以向耳机指示发送装置与传输路径噪声控制兼容。类似地,第二识别信号例如由发送装置识别,以向发送装置指示耳机与传输路径噪声控制兼容。
在耳机与传输路径噪声控制不兼容的情况下,不传输第二识别信号。因此,不向发送装置指示耳机与传输路径噪声控制兼容。类似地,在发送装置与传输路径噪声控制不兼容的情况下,不传输第一识别信号。因此,不向耳机指示发送装置与传输路径噪声控制兼容。
如果确定耳机和发送装置两者都与传输路径噪声控制兼容,则如上所述可以执行以下的步骤:生成第一麦克风信号和第二麦克风信号,生成编码信号,经由第一线传输编码信号,重构第一输入信号和第二输入信号,生成净信号,并且发送基于净信号的信号。
另一方面,如果确定耳机或发送装置与传输路径噪声控制不兼容,则方法包括:借助第一麦克风生成第一麦克风信号,经由数据线缆的第一线将第一麦克风信号从耳机传输到发送装置,并将基于第一麦克风信号的信号发送到通信网络。
以所描述的方式,可以实现耳机和/或发送装置的完全遗留(legacy)或向下的兼容性。
根据该方法的一些实施例,特别是如果耳机与传输路径噪声控制兼容并且发送装置与传输路径噪声控制兼容或不兼容,则方法还包括:经由数据线缆的第二条线(例如音频线)将音频信号从发送装置传输到耳机。方法还包括:借助于耳机,通过将第二噪声控制算法至少应用于音频信号或基于音频信号的信号以及第二麦克风信号或基于第二音频信号的信号,来生成补偿音频信号。方法还包括:借助于耳机的扬声器,基于补偿音频信号生成声学扬声器信号。
第二噪声控制算法特别是接收路径噪声控制算法,例如有源噪声控制算法,例如模拟有源噪声控制算法或数字有源噪声控制算法。
使用第二麦克风信号来生成补偿音频信号对应于例如用于接收路径噪声控制的前馈技术。有利地,第二麦克风和第二麦克风信号可以同时用于生成用于传输路径噪声控制的编码信号,并且用于借助于接收路径噪声控制生成补偿音频信号。在可替选的实施例中,单独的麦克风可以代替第二麦克风模拟地用于接收路径噪声控制。
根据一些实施例,借助于耳机的有源噪声控制电路,将第二噪声控制算法至少应用于音频信号和第二麦克风信号,耳机的有源噪声控制电路被配置为将滤波操作至少应用于音频信号和第二麦克风信号。可选地,在应用滤波操作之前,可以放大至少音频信号和/或第二麦克风信号。
根据一些实施例,方法还包括:借助于耳机的第三麦克风,检测基于扬声器信号的受干扰的扬声器信号(特别是声学受干扰的扬声器信号),并且借助于第三麦克风,基于受干扰的扬声器信号生成第三麦克风信号。通过将第二噪声控制算法至少应用于音频信号或基于音频信号的信号、第二麦克风信号或基于第二麦克风信号的信号和第三麦克风信号或基于第三麦克风信号的信号,来生成补偿音频信号。受干扰的麦克风信号可以例如对应于受环境噪声干扰的扬声器信号。
使用第三麦克风信号来生成补偿音频信号对应于例如用于接收路径噪声控制的反馈技术。通过这样的实施例,基于第二麦克风信号的前馈技术和基于第三麦克风信号的反馈技术可以相结合以进一步改进接收路径噪声控制。
根据方法的一些实施例,特别是如果耳机和发送装置两者都与传输路径噪声控制兼容,则通过至少对第一输入信号和第二输入信号以及基于第三麦克风信号的误差信号进行编码来生成编码信号,并且方法还包括通过对编码信号进行解码来重构误差信号。
根据一些实施例,方法还包括:借助于发送装置,根据重构的误差信号来调整音频信号。
以这种方式,例如可以基于误差信号例如与噪声控制同时地实现自适应均衡功能。
根据一些实施例,第三麦克风是被配置为生成第三麦克风信号作为模拟信号的模拟麦克风。然后,误差信号可以对应于基于第三麦克风信号的数字信号。在可替选的实施例中,第三麦克风是被配置为生成第三麦克风信号作为数字信号的数字麦克风。然后,误差输入信号可以与第三麦克风信号相同或者对应于基于第三麦克风信号的模拟信号。
根据一些实施例,方法还包括:借助于发送装置,根据误差信号生成调整信号。方法还包括:经由第一线将基于调整信号的信号从发送装置传输到耳机,并且借助于耳机,基于取决于调整信号的信号来调整第二噪声控制算法。
以这种方式,基于误差信号,可以检查第二噪声控制算法的性能,并且例如通过在第二噪声控制算法的过程中改变应用于音频信号、第二麦克风信号和/或第三麦克风信号或基于此的相应信号的滤波器参数来适应性优化第二噪声控制算法的性能。
根据一些实施例,特别是如果耳机和发送装置两者都与传输路径噪声控制兼容,则方法还包括;借助于耳机的至少一个控制元件生成控制信号。通过至少对第一麦克风信号和第二麦克风信号以及控制信号进行编码来生成编码信号。方法还包括:借助于编码信号来重构控制信号。发送装置可以例如根据重构的控制信号来调整或改变发送装置和/或耳机的设置或功能。
数据的至少一个控制元件例如可以是例如用于控制耳机和/或发送装置的功能或设置的一个或更多个按钮,例如音量设置、麦克风静音设置等或者由发送装置执行的应用。
根据一些实施例,方法还包括:经由第一线将数据信号(特别是由发送装置编码的数据信号)从发送装置传输到耳机,并且借助于由耳机包括的电子装置处理数据信号或重构的数据信号。例如通过借助于耳机对由发送装置编码的数据信号进行解码来生成重构的数据信号。
根据一些实施例,方法还包括:经由第一线将数据信号(特别是由发送装置编码的数据信号)从发送装置传输到耳机,并且根据数据信号(特别根据重构的数据信号)在耳机的显示器上显示信息。例如通过借助于耳机对由发送装置编码的数据信号进行解码来生成重构的数据信号。
根据一些实施例,方法还包括基于存储在耳机的存储装置中的另一信息来生成另一数据信号,并且经由第一线将另一数据信号或基于另一数据信号的另一编码信号从耳机传输到发送装置。
另一信息可以例如包括耳机的用户特定数据和/或装置特定数据,例如耳机的序列号。
根据一些实施例,方法还包括经由第一线将电功率从发送装置传输到耳机,并且基于传输的电功率偏置第一麦克风和/或第二麦克风。
根据一些实施例,可以基于传输的电功率对显示器和/或有源噪声控制电路供电。
根据一些实施例,方法还包括:借助于耳机的传感器生成传感器信号。通过至少对第一输入信号和第二输入信号以及基于传感器信号的信号进行编码来生成编码信号,并且方法还包括通过对编码信号进行解码来重构传感器信号。
传感器例如可以是被配置为确定环境参数的传感器。传感器例如可以是温度传感器、心率传感器、压力传感器或另外的传感器。
根据一些实施例,特别是如果耳机和发送装置两者都与传输路径噪声控制兼容,则方法还包括:在将净信号或基于净信号的信号发送到通信网络之前,对净信号或基于净信号的信号进行中间存储。
在可替选的实施例中,在生成净信号之后立即发送净信号或基于净信号的信号。其中,就关于数据处理(例如生成基于净信号的信号)而言,表述“立即”可以包括延迟。
根据改进的构思,还提供了一种用于传输路径噪声控制的系统,其包括音频耳机和经由数据线缆(特别是耳机的数据线缆)连接到或可连接到耳机的发送装置。耳机包括第一麦克风和第二麦克风,第一麦克风和第二麦克风被配置为基于由第一麦克风和第二麦克风检测到的声音分别生成第一麦克风信号和第二麦克风信号,其中,声音包括期望音频信息和声学噪声。耳机还包括编码器(例如第一编码器-解码器),该编码器被配置为通过至少对基于第一麦克风信号的第一输入信号和基于第二麦克风信号的第二输入信号进行编码,在数据线缆的第一线上生成编码信号。
发送装置包括解码器和信号处理单元,解码器(例如第二编码器-解码器)被配置为通过对编码信号进行解码来重构第一输入信号和第二输入信号,信号处理单元(特别是数字信号处理单元)被配置为通过将第一噪声控制算法至少应用于重构的第一输入信号和第二输入信号来生成表示期望音频信息的净信号。发送装置还包括网络单元,该网络单元被配置为将净信号或基于净信号的信号发送到通信网络。
用于传输路径噪声控制的系统的另外的实施例容易从用于传输路径噪声控制的方法的各种实施例中推导出,反之亦然。
根据改进的构思,还提供了一种用于传输路径噪声控制的耳机,其可经由数据线缆连接到发送装置。耳机包括第一麦克风和第二麦克风,第一麦克风和第二麦克风被配置为基于由第一麦克风和第二麦克风检测到的声音分别生成第一麦克风信号和第二麦克风信号,其中,声音包括期望音频信息和声学噪声。耳机还包括编码器,该编码器被配置为通过至少对基于第一麦克风信号的第一输入信号和基于第二麦克风信号的第二输入信号进行编码,在数据线缆的第一线上生成编码信号。
根据改进的构思,还提供了一种用于传输路径噪声控制的发送装置,其可经由数据线缆连接到耳机。发送装置包括解码器和信号处理单元,解码器被配置为通过对经由数据线缆的第一线从耳机接收的编码信号进行解码来重构第一输入信号和第二输入信号,信号处理单元(特别是数字信号处理单元)被配置为通过将第一噪声控制算法至少应用于重构的第一输入信号和第二输入信号来生成表示期望音频信息的净信号。发送装置还包括网络单元,该网络单元被配置为将净信号或基于净信号的信号发送到通信网络。
耳机和发送装置的另外的实施例容易从用于传输路径噪声控制的方法和系统的各种实施中推导出,反之亦然。
在下文中,借助于参照附图的示例性实施例来详细解释改进的构思。在功能上相同或具有相同效果的部件可以由相同的附图标记来表示。对于相同的部件和/或具有相同效果的部件,可以仅针对它们在那儿首次出现的图来描述。在随后的附图中不一定重复对相同的部件和/或具有相同效果的部件的描述。
在附图中,
图1示出了根据改进构思的用于传输路径噪声控制的系统的示例性实施例;
图2示出了根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例;
图3示出了根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例;
图4示出了根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例;
图5示出了根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例;
图6示出了在根据改进构思的用于传输路径噪声控制的系统中使用的耳机的示例性实施例。
图7示出了根据改进构思的用于传输路径噪声控制的方法或系统的启动序列的流程图。
图1示出了根据改进构思的用于传输路径噪声控制的系统的示例性实施例。该系统包括例如实施为耳塞式耳机或头戴式耳机的音频耳机HS,以及发送装置SD,例如移动电话或平板电脑。耳机HS和发送装置SD经由数据线缆C连接。例如,数据线缆C是例如具有用于与发送装置SD的四极音频插口相连接的四极音频插头AJ的四极数据线缆。作为四极音频插头AJ的替代方案,可以使用USB连接器,特别是USB-C连接器,以及发送装置SD的相应的USB插口。
耳机HS包括例如分别连接到数据线缆C的第一音频线AL1和第二音频线AL2的第一扬声器SP1和第二扬声器SP2。发送装置SD包括例如与发送装置SD的音频接口IA(例如I2S接口)相连接的应用处理器AP。音频接口IA可以经由串联耦接的第一数模转换器DAC DA1和第一音频放大器A5耦接到第一音频线AL1。音频接口IA可以经由串联耦接的第二DAC DA2和第二音频放大器A6耦接到第二音频线AL2。
应用处理器AP例如被配置为将音频数据(特别是数字音频数据)例如经由总线发送到音频接口IA。音频接口IA可以例如基于音频数据生成第一数字音频信号和第二数字音频信号,并分别将它们发送到第一DAC DA1和第二DAC DA2。第一DAC DA1和第二DAC DA2的模拟输出信号例如分别由第一音频放大器A5和第二音频放大器A6放大,以分别在第一音频线AL1上生成第一音频信号以及在第二音频线AL2上生成第二音频信号。第一扬声器SP1和第二扬声器SP2然后可以基于第一音频信号和第二音频信号分别生成声学的第一扬声器信号和第二扬声器信号。
在耳机HS中包括第一麦克风M1和第二麦克风M2以及例如可选的另一第二麦克风M2F。耳机HS还包括具有第一编码器-解码器ED1的从电路SL,特别是从集成电路。第一编码器-解码器ED1连接到数据线缆C的交换线XL。交换线XL例如可以对应于数据线缆C的麦克风线。在一些实施例中,第一麦克风M1和第二麦克风M2、M2F可以是模拟麦克风。在这样的实施例中,经由包括第一AC耦接器AC1、第一放大器A1(例如可调谐放大器)和第一模拟-数字转换器ADC AD1的第一串联电路,将第一麦克风M1耦接到第一编码器-解码器ED1。类似地,通过包括第二AC耦接器AC2和第三AC耦接器AC3、第二放大器A2和第三放大器A3(例如可调谐放大器)以及第二ADC AD2和第三ADC AD3的相应的第二串联电路和第三串联电路,分别将第二麦克风M2、M2F耦接到第一编码器-解码器ED1。其中,AC耦接器AC1、AC2、AC3可以例如被配置为拒绝相应的麦克风输出的DC分量,并且仅将相应的AC分量转发到放大器A1、A2、A3和ADC AD1、AD2、AD3。AC耦接器AC1、AC2、AC3例如可以实施为RC元件。在可替选实施例中,第一麦克风M1和第二麦克风M2、M2F可以是数字麦克风。在这样的实施例中,麦克风M1、M2、M2F例如直接连接到第一编码器-解码器ED1,并且从电路SL可以不包括AC耦接器AC1、AC2、AC2、放大器A1、A2、A3和ADC AD1、AD2、AD3。
发送装置SD包括主电路MS,特别是主集成电路,其包括连接到交换线XL的第二编码器-解码器ED2。发送装置SD还包括连接到应用处理器AP并且例如经由另一总线连接到主电路MS的数字信号处理器DSP。
第一麦克风M1被布置为检测期望音频信息,例如耳机用户的语音或其他待记录或待检测的声音输入。例如,第一麦克风M1是语音麦克风。除了期望音频信息之外,第一麦克风M1可以检测声学噪声,例如环境噪声。第二麦克风M2、M2F可以是可以与第一麦克风M1间隔开并且例如彼此间隔开布置的噪声麦克风。因此,第二麦克风M2、M2F可以检测包括声学噪声的声音以及例如一部分或减少量的期望音频信息。
基于检测到的期望音频信息和声学噪声,第一麦克风M1生成第一麦克风信号。基于第一麦克风信号,第一AC耦接器AC1、第一放大器A1和第一ADC AD1生成第一输入信号并将其提供到第一编码器-解码器ED1。类似地,第二麦克风M2、M2F基于检测到的期望音频信息和声学噪声分别生成第二麦克风信号和另一第二麦克风信号。基于第二麦克风信号,第二AC耦接器AC2和第三AC耦接器AC3、第二放大器A2和第三放大器A3以及第二ADC AD2和第三ADC AD3分别生成第二输入信号和另一第二输入信号,并将它们提供到第一编码器-解码器ED1。在具有数字麦克风M1、M2、M2F的实施例中,第一麦克风信号、第二麦克风信号和另一第二麦克风信号例如被直接供应到第一编码器-解码器ED1作为第一输入信号、第二输入信号和另一第二输入信号。
第一编码器-解码器ED1通过例如对第一输入信号、第二输入信号和另一第二输入信号进行编码(例如通过调制)来向交换线XL生成编码信号。编码信号经由交换线XL传输到第二编码器-解码器ED2,第二编码器-解码器ED2可以通过解码(特别是解调)编码信号来重构第一输入信号、第二输入信号和另一第二输入信号。重构的第一输入信号RS1、第二输入信号RS2和另一第二输入信号RS2F被供应到数字信号处理器DSP。其中,主电路的输出格式可以例如是I2S、脉码调制、PCM或脉冲密度调制PDM。此外,主电路MS可以例如将时钟信号CLK提供到数字信号处理器DSP。
可替选地,时钟信号CLK可以由数字信号处理器DSP或应用处理器AP生成并且例如被提供到主电路MS。以这种方式,可以例如确保时钟信号CLK与音频系统的其余部分同步。
数字信号处理器DSP例如将第一噪声控制算法,特别是传输路径噪声控制算法应用于重构的第一输入信号RS1、第二输入信号RS2和另一第二输入信号RS2F。由于第一噪声控制算法,数字信号处理器DSP可以生成净信号作为其输出并将该净信号提供到应用处理器AP。净信号表示特别是没有声学噪声或具有减少的噪声的期望音频信息。应用处理器AP可以例如经由发送装置SD的网络单元(未示出),例如无线单元,例如将净信号或基于净信号的信号发送到通信网络,例如电信网络。
以所描述的方式,传输路径噪声控制可以借助于根据改进构思的系统来执行。该系统使用耳机HS作为期望音频信息的输入装置,并经由数据线缆C的单个线(即交换线XL)传输由数字信号处理器SD应用的传输路径噪声控制算法所需的所有数据。经由交换线XL的通信允许双向全双工通信。需要强调的是,第一扬声器信号和第二扬声器信号的生成独立于从电路SL以及编码信号到发送装置SD的传输。
可选地,耳机HS可以包括控制元件BTN,控制元件BTN包括例如一个或更多个按钮,例如三个或更多个按钮。控制元件BTN例如借助于并联耦接的一个或更多个开关来实施。开关中的每个例如与相应的电阻器串联耦接。电阻器具有例如不同的电阻。控制元件BTN的输出例如经由另一ADC AD耦接到第一编码器-解码器ED1。主电路MS可以包括连接到第二编码器-解码器ED2(连接线未示出)和应用处理器AP的第一数据接口I1。第一数据接口I1例如可以是I2C接口或串行外围接口SPI。
如果闭合控制元件BTN的开关之一,例如相当于用户按压相应的按钮,则在控制元件BTN的输出端生成信号,该信号例如由于电阻器的不同电阻值而取决于开关中的哪个开关已经闭合。然后另一ADC AD可以基于控制元件BTN的输出生成控制信号并将其提供到第一编码器-解码器ED1。因此,例如可以通过如上所述对第一输入信号和第二输入信号以及交换线XL上的控制信号进行编码(特别是调制)来生成编码信号。
第二编码器-解码器ED2可以通过对编码信号进行解码(特别是解调)来重构控制信号。第二编码器-解码器ED2然后可以例如经由第一数据接口I1将重构的控制信号传输到应用处理器AP。应用处理器AP可以例如改变设置,例如发送装置SD或耳机HS的设置、例如音量设置或者麦克风设置,或者根据重构的控制信号来调整发送到音频接口IA的音频数据。可替选地或附加地,应用处理器AP可以根据重构的控制信号来控制在发送装置SD上执行的应用。
可选地,耳机例如可以包括连接到第一编码器-解码器ED1的存储装置MEM。存储装置MEM可以包括存储的信息,例如耳机的用户特定数据和/或装置特定数据。取决于所存储的信息,存储装置MEM可以向第一编码器-解码器ED1提供数据信号。例如可以通过如上所述对第一输入信号和第二输入信号以及来自交换线XL上的存储装置MEM的数据信号进行编码(特别是调制)来生成编码信号。可替选地,第一编码器-解码器ED1可以通过对数据信号进行编码在交换线XL处生成另一编码信号。例如,在基于第一输入信号、第二输入信号和另一第二输入信号生成编码信号之前,可以在前导(preamble)操作阶段期间生成另一编码信号。
第二编码器-解码器ED2可以通过对编码信号或另一编码信号进行解码(特别是解调)来重构数据信号。第二编码器-解码器ED2然后可以例如经由第一数据接口I1将重构的数据信号传输到应用处理器AP。
可选地,耳机HS还包括连接到交换线XL(连接线未示出)的功率提取单元PE和连接到功率提取单元PE的偏置单元MB。功率提取单元PE可以例如经由电容器C1连接到耳机HS的接地端子。偏置单元MB例如还连接到第一麦克风M1和第二麦克风M2、M2F。
发送装置SD,特别是主电路MS可以被配置为经由交换线路HL将电功率传输到耳机HS。功率提取单元PE被配置为提取传输的电功率并将电压和/或电流供应到偏置单元MB。基于所供应的电压和/或电流,偏置单元MB可以例如将相应的偏置电压供应到第一麦克风M1,第二麦克风M2和另一第二麦克风M2F。
可选地,第一麦克风M1经由从电路SL的第一旁路开关S1连接到交换线XL,并且如果合适的话,控制元件BTN经由从电路SL的第二旁路开关S2连接到交换线XL。例如,在未示出的替选发送装置(而不是如图1中所示的发送装置SD)经由数据线缆C连接到耳机HS的情况下,从电路SL例如被配置为闭合第一旁路开关S1和/或第二旁路开关S2。如上所述,替选发送装置与传输路径噪声控制不兼容。特别地,替选发送装置可以不包括如上所述的主电路MS和数字信号处理器DSP。在这种情况下,可以经由交换线XL将第一麦克风信号直接发送到替选发送装置。
可选地,如果闭合了第一旁路开关S1和第二旁路开关S2,则控制元件BTN的输出可以用于调制第一麦克风信号,以向替选发送装置传输关于闭合了控制元件BTN的哪个开关的信息。以这种方式,图1中所示的耳机HS在连接了与传输路径噪声控制不兼容的替选发送装置的情况下,可以提供基本功能,即第一麦克风M1和控制元件BTN的功能。关于确定发送装置是否与传输路径噪声控制兼容的进一步的细节,参考关于图7的解释。
发送装置SD例如可以包括具有例如与应用处理器AP相连接的输出端的第四ADCAD4(连接线未示出)。发送装置SD还可以包括第四放大器A4,特别是可调谐放大器,可调谐放大器具有与第四ADC AD4的输入端相连接的输出端。电容器C2例如连接在第四放大器A4的输入端和电路节点N之间。电阻器R可以连接在电路节点N和发送装置SD的电源电压之间。此外,发送装置SD可以包括第五ADC AD5,第五ADC AD5具有例如连接到应用处理器AP(连接线未示出)的输出端以及连接到电路节点N的输入端。电路节点N例如经由主电路MS的第三旁路开关S3连接到交换线XL。
例如,在未示出的替选耳机(而不是如图1中所示的耳机HS)经由数据线缆C连接到发送装置SD的情况下,主电路MS例如被配置为闭合第三旁路开关S3。如上所述,替选耳机与传输路径噪声控制不兼容。特别地,替选耳机可以不包括如上所述的从电路SL。在这种情况下,发送装置SD可以例如经由交换线XL接收模拟麦克风信号,该模拟麦克风信号可以可选地利用例如替选耳机的按钮的控制数据来调制。电阻器R和电容器C2的布置充当第四放大器A4的AC耦接器。因此,第四放大器A4可以接收并放大模拟麦克风信号的AC部分。然后,第四ADC AD4可以基于麦克风信号的AC部分生成例如语音数据。可以不被AC耦接的第五ADCAD5可以例如测量模拟麦克风信号的DC部分。因此,第五ADC AD5的输出可以例如相当于调制模拟麦克风信号的控制数据。
以这种方式,如图1中所示的发送装置SD在连接了与传输路径噪声控制不兼容的替选耳机的情况下,可以提供基本功能。关于确定耳机是否与传输路径噪声控制兼容的进一步细节,参考关于图7的解释。
数据线缆C包括例如接地线GL,接地线GL连接例如耳机HS的接地端子和发送装置SD的接地端子。
可选地,主电路MS可以经由交换线XL将时钟信号CLK传输到从电路SL。从电路SL可以提取所传输的时钟信号CLK,例如用于将数据从耳机HS传输到发送装置SD。
发送装置SD可以包括音频编解码器电路。音频编解码器电路可以例如包括音频接口IA、第一DAC DA1和第二DAC DA2以及第一音频放大器A5和第二音频放大器A6。音频编解码器电路例如还可以包括数字信号处理器DSP。在可替选的实施例中,音频编解码器电路不包括数字信号处理器DSP。音频编解码器电路还可以包括第四ADC AD4和第五ADC AD5、第四放大器A4、电阻器R和电容器C2。
图2示出了基于图1的系统的根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例。
图2的耳机HS的从电路SL还包括连接到第一编码器-解码器ED1(连接线未示出)的第二数据接口I2,例如I2C接口或SPI。图2的耳机HS还包括显示器D,其具有连接到第二数据接口I2的第三数据接口I3,例如I2C接口或SPI。显示器还包括连接到功率提取单元PE的功率管理单元PMU。
主/从方案的全双工能力允许例如I2C隧穿功能。
应用处理器AP可以例如经由第一数据接口I1将显示数据发送到第二编码器-解码器ED2。第二编码器-解码器ED2可以对显示数据进行编码并且经由交换线XL将编码后的显示数据发送到第一编码器-解码器ED1。第一编码器-解码器ED1可以通过对编码后的显示数据进行解码来重构显示数据,并且经由第二数据接口I2和第三数据接口I3将重构的显示数据提供给显示器。显示器D可以根据接收到的重构的显示数据在显示器D的屏幕上显示信息。类似于显示数据,也可以将时钟信号CLK从主电路MS传输到显示器D,以实现数据交换的定时。
例如基于从发送装置SD到耳机HS所考虑的电功率,经由功率管理单元PMU和功率提取单元PE对显示器D供电。
图3示出了基于图1的系统的根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例。
图3的耳机HS还包括有源噪声控制电路ANC。第一音频线AL1和第二音频线AL2分别例如经由放大器A7、A8耦接到有源噪声控制电路ANC的第一输入端和第二输入端。第二麦克风M2和另一第二麦克风M2F例如分别经由放大器A9、A10耦接到有源噪声控制电路ANC的第三输入端和第四输入端。第一扬声器SP1和第二扬声器SP2例如分别经由放大器A11、放大器A12连接到有源噪声控制电路ANC的第一输出端和第二输出端。耳机HS包括连接在第一音频线AL1和第一扬声器SP1之间的第一电阻器R1和耦接在第二音频线AL2和第二扬声器SP2之间的第二电阻器R2。耳机HS还包括连接在放大器A11和第一扬声器SP1之间的第三电阻器R3和连接在放大器A12和第二扬声器SP2之间的第四电阻器R4。
借助于根据图3的实施例,接收路径噪声控制可以与关于图1描述的传输路径噪声控制相结合。
对于接收路径噪声控制,如关于图1描述的,借助于应用处理器AP、音频接口IA、DAC DA1、DA2和音频放大器A5、A6生成的第一音频信号和第二音频信号从发送装置SD经由第一音频线AL1和第二音频线AL2被传输到耳机HS,并且例如经由放大器A7、A8分别在有源噪声控制电路ANC的第一输入端和第二输入端处被接收。第二麦克风信号和另一第二麦克风信号例如经由放大器A9、A10分别在有源噪声控制电路ANC的第三输入端和第四输入端处被接收。
有源噪声控制电路ANC被配置为将第二噪声控制算法,特别是有源噪声控制算法,应用于第一音频信号和第二音频信号以及应用于第二麦克风信号和另一第二麦克风信号或应用于放大器A7、A8、A9、A10的输出。例如通过对所述信号应用滤波操作来应用第二噪声控制算法。由于第二有源噪声控制算法,在有源噪声控制电路ANC的第一输出端和第二输出端处或者放大器A11、A12的输出端处分别生成第一补偿信号和第二补偿信号,特别是有源噪声控制补偿信号。
借助于图3的有源噪声控制电路ANC的接收路径噪声控制例如基于无源求和技术。第一音频信号和第二音频信号经由电阻器R1、R2、R3、R4与第一补偿信号和第二补偿信号混合在一起,分别生成第一补偿音频信号和第二补偿音频信号。第一补偿音频信号和第二补偿音频信号分别被提供给第一扬声器SP1和第二扬声器SP2,第一扬声器SP1和第二扬声器SP2基于补偿音频信号生成第一扬声器信号和第二扬声器信号。
图3的方案的优点是耳机HS中的低功耗,因为发送装置SD驱动扬声器SP1、SP2生成扬声器信号。
借助于根据图3的实施例,传输路径噪声控制和接收路径噪声控制都可以利用相同的噪声麦克风(即第二麦克风M2和另一第二麦克风M2F)来实现。可替选地,单独的麦克风可以用于接收路径噪声控制。
图4示出了基于图1的系统的根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例。
图4的耳机HS还包括有源噪声控制电路ANC。第一音频线AL1和第二音频线AL2分别例如经由放大器A7、A8耦接到有源噪声控制电路ANC的第一输入端和第二输入端。第二麦克风M2和另一第二麦克风M2F例如分别经由放大器A9、A10耦接到有源噪声控制电路ANC的第三输入端和第四输入端。第一扬声器SP1和第二扬声器SP2例如分别经由放大器A11、A12连接到有源噪声控制电路ANC的第一输出端和第二输出端。
借助于根据图4的实施例,接收路径噪声控制可以与关于图1描述的传输路径噪声控制相结合。
对于接收路径噪声控制,如关于图1所描述的,借助于应用处理器AP、音频接口IA、DAC DA1、DA2和音频放大器A5、A6生成的第一音频信号和第二音频信号从发送装置SD经由第一音频线AL1和第二音频线AL2被传输到耳机HS,并且例如经由放大器A7、A8分别在有源噪声控制电路ANC的第一输入端和第二输入端处被接收。第二麦克风信号和另一第二麦克风信号例如经由放大器A9、A10分别在有源噪声控制电路ANC的第三输入端和第四输入端处被接收。
有源噪声控制电路ANC被配置为将第二噪声控制算法,特别是有源噪声控制算法,应用于第一音频信号和第二音频信号以及应用于第二麦克风信号和另一第二麦克风信号或应用于放大器A7、A8、A9、A10的输出。例如通过对所述信号应用滤波操作来应用第二噪声控制算法。由于第二有源噪声控制算法,在有源噪声控制电路ANC的第一输出端和第二输出端处或者放大器A11、A12的输出端处分别生成第一补偿音频信号和第二补偿音频信号。第一补偿音频信号和第二补偿音频信号分别被提供给第一扬声器SP1和第二扬声器SP2,第一扬声器SP1和第二扬声器SP2基于补偿音频信号生成第一扬声器信号和第二扬声器信号。
例如,与图3的实施例相反,第一扬声器SP1和第二扬声器SP2没有另外地连接到第一音频线AL1和第二音频线AL2。图4的接收路径噪声控制因此不基于如图3中的无源求和。相反,有源噪声控制电路ANC直接向扬声器SP1、SP2生成补偿音频信号。因此,第一扬声器SP1和第二扬声器SP2由有源噪声控制电路ANC驱动。
借助于根据图4的实施例,传输路径噪声控制和接收路径噪声控制都可以利用相同的噪声麦克风(即第二麦克风M2和另一第二麦克风M2F)来实现。可替选地,单独的麦克风可以用于接收路径噪声控制。
图5示出了基于图4的系统的根据改进构思的用于传输路径噪声控制的系统的另一示例性实施例。
另外,耳机HS包括例如分别布置在紧邻第一扬声器SP1和第二扬声器SP2处(例如分别布置在扬声器SP1、SP2的声音输出侧)的第一误差麦克风M3和第二误差麦克风M4。第一误差麦克风M1例如经由第四串联电路耦接到第一编码器-解码器ED1,第四串联电路包括第四AC耦接器AC4、放大器A15(例如可调谐放大器)和第六ADC AD6。类似地,第二误差麦克风M3例如通过第五串联电路耦接到第一编码器-解码器ED1,第五串联电路包括第五AC耦接器AC5、放大器A16(例如可调谐放大器)和第七ADC AD7。AC耦接器AC4、AC5可以例如被配置为拒绝相应麦克风输出的DC分量,并且仅将相应的AC分量转发到放大器A15、A16和ADC AD6、ADC AD7。
此外,第一误差麦克风M3例如经由放大器A13耦接到有源噪声控制电路ANC的第四输入端,并且第二误差麦克风M4例如经由放大器A14耦接到有源噪声控制电路ANC的第五输入端。从电路SL还包括连接在第一编码器-解码器ED1和有源噪声控制电路ANC的控制输入端之间的第四数据接口I4,例如I2C接口或SPI。
第一误差麦克风M3和第二误差麦克风M4分别检测受干扰的第一扬声器信号和第二扬声器信号。第一受干扰的扬声器信号和第二受干扰的扬声器信号分别对应于第一扬声器SP1和第二扬声器SP2生成的受到声学噪声(特别是环境噪声)干扰的第一扬声器信号和第二扬声器信号。第一误差麦克风M3和第二误差麦克风M4基于检测到的受干扰的扬声器信号分别生成第三麦克风信号和第四麦克风信号。通过将第二噪声控制算法应用于第一音频信号和第二音频信号、第二麦克风信号和另一第二麦克风信号以及第三麦克风信号和第四麦克风信号,由有源噪声控制电路ANC生成补偿音频信号。
因此,在根据图3和图4的接收噪声控制基于前馈技术时,根据图5的接收噪声控制还具有反馈布置,该反馈布置具有第一误差麦克风M3和第二误差麦克风M4以及到有源噪声控制电路ANC的相应的连接。以这种方式,可以进一步改进接收噪声控制。
此外,基于第三麦克风信号,第四AC耦接器AC4、放大器A15和第六ADC AD6可以生成第一误差信号并将其提供给第一编码器-解码器ED1。基于第四麦克风信号,第五AC耦接器AC5、放大器A16和第七ADC AD7可以生成第二误差信号并将其提供给第一编码器-解码器ED1。
第一编码器-解码器ED1可以通过例如对第一输入信号、第二输入信号和另一第二输入信号以及第一误差信号和第二误差信号进行编码(例如通过调制)来向交换线XL生成编码信号。第二编码器-解码器ED2可以通过对编码信号进行解码(特别是解调)来重构第一误差信号和第二误差信号。重构的第一误差信号RE1和第二误差信号RE2可以被供应到数字信号处理器DSP。数字信号处理器DSP可以基于第一误差信号和第二误差信号生成误差信息并将其提供到应用处理器AP。
在一些实施例中,应用处理器AP例如可以根据误差信息来调整第一音频信号和第二音频信号,特别是通过调整发送到音频接口IA的音频数据。以这种方式,可以借助于发送装置SD来执行对第一音频信号和第二音频信号的自适应均衡。
在一些实施例中,发送装置SD可以基于误差信息生成调整信号并且经由交换线XL将调整信号发送到耳机HD。为此,由应用处理器AP根据误差信息生成的信号例如被发送到第二编码器-解码器ED2的第一数据接口I1并由第二编码器-解码器ED2编码。编码后的调整信号经由交换线XL传输到第一编码器-解码器ED1,第一编码器-解码器ED1可以通过对从第二编码器-解码器ED2接收到的编码后的调整信号进行解码来重构调整信号。然后将重构的调整信号例如提供到有源噪声控制电路ANC。有源噪声控制电路ANC可以例如基于重构的调整信号来调整第二噪声控制算法,特别是有源噪声控制电路ANC的滤波参数。以这种方式,可以利用第一误差麦克风M3和第二误差麦克风M4来优化第二噪声控制算法。
在一些实施例中,可以调谐麦克风M1、M2、M2F下游的放大器A1、A2、A3中的一个或更多个,特别是从发送装置SD来调谐。例如,至少基于重构的第一输入信号和第二输入信号在发送装置SD中生成增益控制信号,并经由交换线XL将增益控制信号传输到耳机HS。耳机HS可以基于传输的增益控制信号来调整或调谐放大器A1、A2、A3中的至少一个的放大器增益。类似地,还能够基于从发送装置SD传输的相应控制信号来实现对放大器A15和A16的调谐。能够在发送装置SD和耳机HS的生产操作期间或者在生产期间(例如在初始校准中)执行对放大器增益的调整。
这允许具有校准的麦克风增益,如果期望波束成形TX噪声消除,这是有用的。相似的,对于RX噪声消除,良好校准的麦克风增益也能够改进性能。
需要指出的是,可以基于图3中使用的接收噪声控制而不是图4中使用的接收噪声控制来容易地推导出与图5的实施例类似的实施例。
图6示出了根据改进构思的用于在传输路径噪声控制的系统中(例如图2中所示的系统中)使用的耳机的示例性实施例。
耳机HS包括含有第一扬声器S1的第一听筒和含有第二扬声器S2的第二听筒。显示器D在数据线缆C上的适配器(dongle)中实施。第一麦克风M1和控制元件BTN也在适配器中实施。四极音频插头AJ例如根据尖端-环-环-套布置来实施。
第二麦克风M2例如被布置在第一听筒的与第一扬声器S1的声音输出侧相对的一侧,并且另一第二麦克风M2例如被布置在第二听筒的与第二扬声器S2的声音输出侧相对的一侧。
在可替选的实施例中,麦克风可以设置在不同的位置处。第二麦克风M2、M2F例如也可以位于适配器中或直接在听筒内部。
例如,可以在图1和图3至图5的系统的实施例中使用类似于图6的实施例的耳机的实施例,特别是没有显示器D的实施例。
图7示出了根据改进构思的用于传输路径噪声控制的系统或方法的启动序列的流程图。
如关于图1所解释的,如果与传输路径噪声控制不兼容的替选发送装置连接到耳机HS,则图1至图5的耳机HS可以在基本功能下(即在闭合第一旁路开关S1和第二旁路开关S2的情况下)来操作。类似地,如果与传输路径噪声控制不兼容的替选耳机连接到发送装置SD,则图1至图5的发送装置SD可以在基本功能下(即在闭合第三旁路开关S3的情况下)来操作。
因此,当耳机HS连接到发送装置SD时,可以由根据改进构思的系统来执行启动序列。图7的块110至180表示这样的启动序列。可以由关于图1至5之一所解释的根据改进构思的系统使用启动序列。
在块110中,发送装置SD检测到耳机HS经由数据线缆C连接到发送装置SD。在块120中,闭合第三旁路开关S3并且例如将主电路MS通电。在块130中,主电路MS经由交换线XL将第一识别信号发送到从电路SL。在块140中,从电路SL检测到第一识别信号。
在块150中,从电路SL例如被激活并且经由交换线XL将第二识别信号发送到主电路MS。在块160中,主电路MS检测到第二识别信号并建立双向通信信道来经由交换线XL通信。在可选块170中,从电路开始前导以传输用户或装置特定数据,所述用户或装置特定数据如关于图1所描述的被存储在存储装置MEM中。在块180中,如例如关于图1所描述的,从电路SL开始基于第一输入信号和第二输入信号并且如果合适的话基于控制信号来传输编码信号。
在与传输路径噪声控制不兼容的替选发送装置连接到耳机的情况下,第一识别信号不被耳机HS检测到。因此,从电路SL可以闭合第一旁路开关S1,并且如果合适的话,闭合第二旁路开关S2。在与传输路径噪声控制不兼容的替选耳机连接到发送装置SD的情况下,第二识别信号不被发送装置SD检测到。因此,主电路SL可以闭合第三旁路开关S2。
需要注意的是,第一识别信号和第二识别信号的频率可以位于例如10Hz到22kHz的音频带内。由于第一识别信号和第二识别信号的传输经由交换线XL并且特别地不经由第一音频线AL1或第二音频线AL2来执行,因此无论何种使用频率,第一识别信号和第二识别信号都不被耳机HS的用户意识到。可替选地,第一识别信号和第二识别信号的频率可以位于所述音频带外,例如22kHz以上。
通过结合关于图1至图7描述的实施例中的两个或更多个或者通过结合关于图1至图7描述的各种实施例的适当的部分,本领域技术人员可以容易地推导出根据改进构思的耳机HS、发送装置SD和/或系统的其他实施例。特别地,如果不存在技术冲突的原因,任何实施例的所有部件或成组的部件可以与任何其他实施例结合。
借助于根据改进构思的系统和方法的所描述的实施例,可以使用连接到发送装置SD的输入装置耳机HS来实现传输噪声路径控制。
改进的构思为连接到发送装置SD的耳机HS提供改进的语音可理解度,发送装置SD具有将多个麦克风数据信道传输到主电路MS的能力。此外,可以认证连接到发送装置的耳机,并且当耳机HS处于连接时可以改变或定制例如均衡器设置。这些功能利用完全遗留或向下的支持来实现。因此,传输路径噪声控制耳机能够连接到不能够进行传输路径噪声控制的发送装置,并且用户仍然能够使用控制元件BTN以及第一麦克风M1。
利用从从电路SL到主电路MS的下行链路通信,显示器D可以用于在听音乐时示出呼叫者识别信息或艺术家信息。此外,可以更新耳机HS内的用户特定数据。用户可以给耳机HS命名并将其个人偏好均衡器设置直接存储到存储装置MEM。
利用从主电路MS到从电路SL和功率提取单元PE的上行链路通信,也可以将适应性有源噪声控制电路ANC直接布置在耳机HS中。可以通过使用误差信息从发送装置SD对有源噪声控制电路ANC进行调整。

Claims (19)

1.一种使用音频耳机(HS)以及经由数据线缆(C)连接到所述耳机(HS)的发送装置(SD)进行传输路径噪声控制的方法,所述方法包括:
-基于检测到的包括期望音频信息和声学噪声的声音,借助于所述耳机的第一麦克风和第二麦克风(M1、M2、M2F)分别生成第一麦克风信号和第二麦克风信号;
-通过至少对基于所述第一麦克风信号的第一输入信号和基于所述第二麦克风信号的第二输入信号进行编码来生成编码信号;
-经由所述数据线缆(C)的第一线(XL)将所述编码信号从所述耳机(HS)传输到所述发送装置(SD);
-借助于所述发送装置(SD),通过对所述编码信号进行解码来重构所述第一输入信号和所述第二输入信号;
-借助于所述发送装置(SD),通过将第一噪声控制算法至少应用于重构的第一输入信号和第二输入信号来生成表示所述期望音频信息的净信号;
-将基于所述净信号的信号从所述发送装置(SD)发送到通信网络;
-经由所述数据线缆(C)的第二线(AL1、AL2)将音频信号从所述发送装置(SD)传输到所述耳机(HS);
-通过在所述耳机(HS)内将第二噪声控制算法至少应用于所述音频信号和所述第二麦克风信号来生成补偿音频信号;以及
-借助于所述耳机(HS)的扬声器(SP1、SP2),基于所述补偿音频信号生成声学扬声器信号。
2.根据权利要求1所述的方法,还包括:
-借助于所述耳机的第三麦克风(M3、M4)检测基于所述扬声器信号的受干扰的扬声器信号;
-借助于所述第三麦克风(M3、M4),基于所述受干扰的扬声器信号生成第三麦克风信号,其中,通过将所述第二噪声控制算法至少应用于所述音频信号、所述第二麦克风信号和所述第三麦克风信号来生成所述补偿音频信号。
3.根据权利要求2所述的方法,其中,通过至少对所述第一输入信号和所述第二输入信号以及基于所述第三麦克风信号的误差信号进行编码来生成所述编码信号,并且所述方法还包括:通过对所述编码信号进行解码来重构所述误差信号。
4.根据权利要求3所述的方法,还包括:借助于所述发送装置(SD),根据重构的误差信号来调整所述音频信号。
5.根据权利要求3或4之一所述的方法,还包括:
-借助于所述发送装置(SD),根据所述误差信号生成调整信号;
-经由所述第一线(XL),将基于所述调整信号的信号从所述发送装置(SD)传输到所述耳机(HS);以及
-借助于所述耳机(HS),根据基于所述调整信号的信号来调整所述第二噪声控制算法。
6.根据权利要求1至5之一所述的方法,还包括:
-借助于所述耳机(HS)的至少一个控制元件(BTN)来生成控制信号,其中,通过至少对所述第一输入信号和所述第二输入信号以及所述控制信号进行编码来生成所述编码信号;以及
-通过对所述编码信号进行解码来重构所述控制信号。
7.根据权利要求1至6之一所述的方法,还包括:
-经由所述第一线(XL),将数据信号从所述发送装置(SD)传输到所述耳机(HS);以及
-根据所述数据信号,在所述耳机(HS)的显示器(D)上显示信息。
8.根据权利要求1至7所述的方法,在将基于所述净信号的信号发送到所述通信网络之前,所述方法还包括:对所述净信号或基于所述净信号的信号进行中间存储。
9.根据权利要求1至8所述的方法,还包括:
-在所述发送装置(SD)中,至少基于重构的第一输入信号和第二输入信号生成增益控制信号;
-经由所述第一线(XL)将所述增益控制信号从所述发送装置(SD)传输到所述耳机(HS);以及
-基于所传输的增益控制信号,调整所述耳机(HS)中的与所述第一麦克风信号和/或所述第二麦克风信号的生成相关联的至少一个放大器的放大器增益。
10.根据权利要求9所述的方法,其中,在所述发送装置(SD)和所述耳机(HS)的生产操作期间执行对所述放大器增益的调整。
11.一种使用音频耳机(HS)以及经由数据线缆(C)连接到所述耳机(HS)的发送装置(SD)进行传输路径噪声控制的方法,所述方法包括:
-基于在所述耳机(HS)和所述发送装置(SD)之间经由所述数据线缆(C)的第一线(XL)传输的至少一个识别信号来确定所述耳机(HS)和所述发送装置(SD)两者是否都与传输路径噪声控制兼容;
-如果所述耳机(HS)和所述发送装置(SD)两者都与传输路径噪声控制兼容,则:
-基于检测到的包括期望音频信息和声学噪声的声音,借助于所述耳机(HS)的第一麦克风和第二麦克风(M1、M2、M2F)分别生成第一麦克风信号和第二麦克风信号;
-通过至少对基于所述第一麦克风信号的第一输入信号和基于所述第二麦克风信号的第二输入信号进行编码来生成编码信号;
-经由所述数据线缆(C)的第一线(XL)将所述编码信号从所述耳机(HS)传输到所述发送装置(SD);
-借助于所述发送装置(SD),通过对所述编码信号进行解码来重构所述第一输入信号和所述第二输入信号;
-借助于所述发送装置(SD),通过将第一噪声控制算法至少应用于重构的第一输入信号和第二输入信号来生成表示所述期望音频信息的净信号;
-将基于所述净信号的信号从所述发送装置(SD)发送到通信网络;
-经由所述数据线缆(C)的第二线(AL1、AL2)将音频信号从所述发送装置(SD)传输到所述耳机(HS);
-通过在所述耳机(HS)内将第二噪声控制算法至少应用于所述音频信号和所述第二麦克风信号来生成补偿音频信号;以及
-借助于所述耳机(HS)的扬声器(SP1、SP2),基于所述补偿音频信号生成声学扬声器信号;
-如果所述耳机(HS)或所述发送装置(SD)不与传输路径噪声控制兼容,则:
-借助于所述第一麦克风(M1)生成所述第一麦克风信号;
-经由所述数据线缆(C)的第一线(XL)将所述第一麦克风信号从所述耳机(HS)传输到所述发送装置(SD);以及
-将基于所述第一麦克风信号的信号从所述发送装置(SD)发送到通信网络。
12.一种用于传输路径噪声控制的系统,包括音频耳机(HS)以及能够经由数据线缆(C)连接到所述耳机(HS)的发送装置(SD),
其中,所述耳机(HS)包括:
-第一麦克风和第二麦克风(M1、M2、M2F),被配置为基于检测到的包括期望音频信息和声学噪声的声音分别生成第一麦克风信号和第二麦克风信号;
-编码器(ED1),被配置为通过至少对基于所述第一麦克风信号的第一输入信号和基于所述第二麦克风信号的第二输入信号进行编码,在所述数据线缆(C)的第一线(XL)上生成编码信号;
-有源噪声控制电路(ANC),被配置为通过将第二噪声控制算法至少应用于所述第二麦克风信号以及在所述数据线缆(C)的第二线(AL1、AL2)上提供的音频信号来生成补偿音频信号;以及
-扬声器(SP1、SP2),被配置为基于所述补偿音频信号来生成声学扬声器信号;并且
其中,所述发送装置(SD)包括:
-解码器(ED2),被配置为通过对所述编码信号进行解码来重构所述第一输入信号和所述第二输入信号;
-信号处理单元(DSP),被配置为通过将第一噪声控制算法至少应用于重构的第一输入信号和第二输入信号来生成表示所述期望音频信息的净信号;
-网络单元,被配置为将基于所述净信号的信号发送到通信网络;以及
-音频编解码器电路,被配置为在所述数据线缆(C)的第二线(AL1、AL2)上生成所述音频信号。
13.根据权利要求12所述的系统,其中,
-所述耳机(HS)还包括第三麦克风(M3、M4),所述第三麦克风(M3、M4)被配置为检测基于所述扬声器信号的受干扰的扬声器信号,并且基于所述受干扰的扬声器信号生成第三麦克风信号;并且
-所述有源噪声控制电路(ANC)被配置为通过将所述第二噪声控制算法至少应用于所述音频信号、所述第二麦克风信号和所述第三麦克风信号来生成所述补偿音频信号。
14.根据权利要求13所述的系统,其中,
-所述编码器(ED1)被配置为通过至少对所述第一输入信号和所述第二输入信号以及基于所述第三麦克风信号的误差信号进行编码来生成所述编码信号;并且
-所述解码器(ED2)被配置为通过对所述编码信号进行解码来重构所述误差信号。
15.根据权利要求14所述的系统,其中,
-所述发送装置还包括被配置为生成数字音频信号的应用处理器(AP);
-所述音频编解码器电路被配置为基于所述数字音频信号来生成所述音频信号;并且
-所述应用处理器(AP)被配置为根据重构的误差信号来调整所述数字音频信号。
16.根据权利要求14或15之一所述的系统,其中,
-所述发送装置(SD)被配置为根据所述误差信号生成调整信号,并且经由所述第一线(XL)将基于所述调整信号的信号传输到所述耳机(HS);并且
-所述耳机(HS)被配置为根据基于所述调整信号的信号来调整所述第二噪声控制算法。
17.根据权利要求12至16之一所述的系统,其中,所述耳机(HS)被配置为根据经由所述第一线(XL)从所述发送装置(SD)接收到的数据信号,在所述耳机(HS)的显示器(D)上显示信息。
18.根据权利要求12至17之一所述的系统,其中,
-所述发送装置(SD)被配置为至少基于重构的第一输入信号和第二输入信号来生成增益控制信号,并且经由所述第一线(XL)将所述增益控制信号传输到所述耳机(HS);并且
-所述耳机(HS)包括连接到所述第一麦克风和/或第二麦克风的至少一个可调谐放大器(A1、A2、A3),并且被配置为基于所传输的增益控制信号来调整至少一个放大器的放大器增益。
19.根据权利要求18所述的系统,其中,所述系统被配置为在所述发送装置(SD)和所述耳机(HS)的生产操作期间执行对所述放大器增益的调整。
CN201780005472.8A 2016-01-27 2017-01-25 用于传输路径噪声控制的方法和系统 Pending CN108781321A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP16152988.8 2016-01-27
EP16152988.8A EP3200475A1 (en) 2016-01-27 2016-01-27 Method and system for transmission path noise control
PCT/EP2017/051522 WO2017129608A1 (en) 2016-01-27 2017-01-25 Method and system for transmission path noise control

Publications (1)

Publication Number Publication Date
CN108781321A true CN108781321A (zh) 2018-11-09

Family

ID=55237582

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780005472.8A Pending CN108781321A (zh) 2016-01-27 2017-01-25 用于传输路径噪声控制的方法和系统

Country Status (4)

Country Link
US (1) US10734011B2 (zh)
EP (1) EP3200475A1 (zh)
CN (1) CN108781321A (zh)
WO (1) WO2017129608A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113539286A (zh) * 2020-06-09 2021-10-22 深圳声临奇境人工智能有限公司 音频装置、音频系统和音频处理方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11395065B2 (en) * 2019-01-07 2022-07-19 Kikago Limited Audio device, audio system, and audio processing method
KR102651293B1 (ko) * 2019-04-17 2024-03-26 삼성전자주식회사 전자 장치, 오디오용 외부 전자 장치 및 오디오용 외부 전자 장치가 연결된 전자 장치의 안테나 신호 수신 방법
CN111131959A (zh) * 2019-12-29 2020-05-08 歌尔科技有限公司 头戴耳机的信息传输方法、装置及头戴耳机和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140034237A1 (en) * 2008-07-31 2014-02-06 Lintec Corporation Adhesive sheet
WO2014196399A1 (ja) * 2013-06-07 2014-12-11 ソニー株式会社 入力デバイス及び送信方法、ホストデバイス及び受信方法、並びに、信号処理システム及び送受信方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8396196B2 (en) * 2009-05-08 2013-03-12 Apple Inc. Transfer of multiple microphone signals to an audio host device
US8573861B2 (en) * 2009-11-19 2013-11-05 Apple Inc. Audio jacks with optical and electrical paths
US8223986B2 (en) * 2009-11-19 2012-07-17 Apple Inc. Electronic device and external equipment with digital noise cancellation and digital audio path
EP2395500B1 (en) 2010-06-11 2014-04-02 Nxp B.V. Audio device
DE102011104268A1 (de) * 2011-06-15 2012-12-20 Austriamicrosystems Ag Kopfhörer, Audiogerät, Audiosystem und Verfahren zur Signalübertragung
US20130034237A1 (en) * 2011-08-04 2013-02-07 Sverrir Olafsson Multiple microphone support for earbud headsets
US9384726B2 (en) * 2012-01-06 2016-07-05 Texas Instruments Incorporated Feedback microphones encoder modulators, signal generators, mixers, amplifiers, summing nodes
US9516407B2 (en) * 2012-08-13 2016-12-06 Apple Inc. Active noise control with compensation for error sensing at the eardrum
US9344792B2 (en) * 2012-11-29 2016-05-17 Apple Inc. Ear presence detection in noise cancelling earphones
EP2793424B1 (en) 2013-04-19 2021-01-27 ams AG Host communication circuit, communication system and communication method
CN103260105B (zh) * 2013-05-08 2015-10-28 安百特半导体有限公司 一种利用电子设备的电源向anc耳机供电的方法及设备
EP2961196B1 (en) * 2014-06-26 2016-09-21 ams AG Host interface, accessory interface and method for managing a connection between a host interface and an accessory device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140034237A1 (en) * 2008-07-31 2014-02-06 Lintec Corporation Adhesive sheet
WO2014196399A1 (ja) * 2013-06-07 2014-12-11 ソニー株式会社 入力デバイス及び送信方法、ホストデバイス及び受信方法、並びに、信号処理システム及び送受信方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113539286A (zh) * 2020-06-09 2021-10-22 深圳声临奇境人工智能有限公司 音频装置、音频系统和音频处理方法
CN113539286B (zh) * 2020-06-09 2024-06-04 深圳声临奇境人工智能有限公司 音频装置、音频系统和音频处理方法

Also Published As

Publication number Publication date
US20190088268A1 (en) 2019-03-21
US10734011B2 (en) 2020-08-04
EP3200475A1 (en) 2017-08-02
WO2017129608A1 (en) 2017-08-03

Similar Documents

Publication Publication Date Title
CN101277331B (zh) 声音再现设备和声音再现方法
CN102273232B (zh) 用于播放双声道和单声道信号的耳机和方法
JP5155296B2 (ja) ヘッドセットオーディオアクセサリ
US8396196B2 (en) Transfer of multiple microphone signals to an audio host device
CN101370323B (zh) 执行声学回音消除的装置及其方法
CN101681617B (zh) 具有环境降噪的通信装置
US20070287380A1 (en) Wireless Hybrid Headset
CN105049993B (zh) 包括依赖于音量控制的均衡的扬声器系统
WO2006057695A1 (en) Conferencing system
CN202602769U (zh) 具有回音抑制功能的通话类电子产品
CN108781321A (zh) 用于传输路径噪声控制的方法和系统
US9332339B2 (en) Multi-pin audio plug with retractable nub
CN109076273A (zh) 蓝牙麦克风
CN111491228A (zh) 降噪耳机及其控制方法
US8036343B2 (en) Audio and data communications system
JP5417821B2 (ja) 音声信号再生装置、携帯電話端末
KR20110080306A (ko) 보청기 기능이 구비된 휴대용 단말기
CN206313980U (zh) 一种全息声场录音设备
CN202475559U (zh) 内置卡拉ok功能的智能手机
CN103181199B (zh) 具有电话和听力装置的通信系统以及传输方法
WO2011060813A1 (en) Hearing assistance system and method
CN213545127U (zh) 笔记本计算机
US11600285B2 (en) Loudspeaker system provided with dynamic speech equalization
TWM420763U (en) Touch pen with wireless voice capability
CN102821189B (zh) 一种无线收听方法、移动终端和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20181109