CN108540661A - 信号处理方法、装置、终端、耳机及可读存储介质 - Google Patents

信号处理方法、装置、终端、耳机及可读存储介质 Download PDF

Info

Publication number
CN108540661A
CN108540661A CN201810277815.2A CN201810277815A CN108540661A CN 108540661 A CN108540661 A CN 108540661A CN 201810277815 A CN201810277815 A CN 201810277815A CN 108540661 A CN108540661 A CN 108540661A
Authority
CN
China
Prior art keywords
earphone
voice signal
electroacoustic transducer
microphone
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810277815.2A
Other languages
English (en)
Inventor
严笔祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810277815.2A priority Critical patent/CN108540661A/zh
Publication of CN108540661A publication Critical patent/CN108540661A/zh
Priority to US16/246,768 priority patent/US10923129B2/en
Priority to PCT/CN2019/074447 priority patent/WO2019184601A1/en
Priority to EP19155443.5A priority patent/EP3547712B1/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1016—Earpieces of the intra-aural type
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/02—Preprocessing operations, e.g. segment selection; Pattern representation or modelling, e.g. based on linear discriminant analysis [LDA] or principal components; Feature selection or extraction
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/06—Decision making techniques; Pattern matching strategies
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78—Detection of presence or absence of voice signals
    • G10L25/84—Detection of presence or absence of voice signals for discriminating voice from noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083—Reduction of ambient noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/107—Monophonic and stereophonic headphones with microphone for two-way hands free communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00—Microphones
    • H04R2410/05—Noise reduction with a separate noise microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones

Abstract

本申请涉及一种信号处理方法、装置、终端、耳机及可读存储介质。该方法包括：当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号；识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配；若是，则根据所述特征音频对应的预设提醒方式执行提醒用户的操作。通过上述方法，仅利用耳机上固有的器件就可以实现对外部环境声音的采集与识别，使用户在耳机通话过程中也能关注到周围动态，并提升用户使用耳机过程中的安全性和便捷性，让用户有更好的使用体验。

Description

信号处理方法、装置、终端、耳机及可读存储介质
技术领域
本申请涉及通信技术领域，特别是涉及一种信号处理方法、装置、终端、耳机及可读存储介质。
背景技术
随着通信设备的智能化发展，人们在日常生活中对智能终端的使用越来越频繁，通过智能终端可以进行视频、通话、语音、以及听音乐和影视播放等多种多样的活动。同时，耳机作为传递声音的工具给人们带来了不一样的听觉感受，耳机在人们日常生活中的使用频率非常高，用户可以通过耳机进行听音乐、通话、语音、视频、影视播放等多种活动，人们在越来越多的场合都喜欢佩戴着耳机，耳机的隔音、降噪效果也越来越好。
当人们一般戴着耳机听音乐或者通话时，往往会与外界环境的声音隔离，这使得用户可能会听不到一些提示音或呼叫音，例如汽车喇叭声、熟人呼叫声等，就算有了提示也不能判断声音发出的位置，因此用户在戴耳机时也需要分心留意周围动态，给用户带来不便。
发明内容
本申请实施例提供一种信号处理方法、装置、终端、耳机及可读存储介质，能够提升用户在佩戴耳机时的安全性和便捷性。
一种信号处理方法，基于包括电声换能器的耳机，该方法包括：
当通过该耳机进行通话时，基于该耳机上的电声换能器采集外部环境的声音信号；
识别声音信号中的特征音频，并判断该特征音频是否与预设声音模型匹配；
若是，则根据该特征音频对应的预设提醒方式执行提醒用户的操作。
一种信号处理装置，包括：
信号采集模块，用于当通过该耳机进行通话时，基于该耳机上的电声换能器采集外部环境的声音信号；
特征识别模块，用于识别该声音信号中的特征音频，并判断该特征音频是否与预设声音模型匹配；
操作执行模块，用于根据该特征音频对应的预设提醒方式执行提醒用户的操作。
一种终端，包括存储器及处理器，该存储器中储存有计算机可读指令，该指令被所述处理器执行时，使得所述处理器执行上述方法的步骤。
一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述方法的步骤。
一种耳机，包括电声换能器、存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器与所述电声换能器及所述存储器电连接，所述处理器执行所述计算机程序时实现上述方法的步骤。
上述信号处理方法、装置、终端、耳机及计算机可读存储介质，当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号，识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配，若该特征音频与预设声音模型匹配，则根据所述特征音频对应的预设提醒方式执行提醒用户的操作。通过上述方法，仅利用耳机上固有的器件就可以实现对外部环境声音的采集与识别，使用户在耳机通话过程中也能关注到周围动态，并提升用户使用耳机过程中的安全性和便捷性，让用户有更好的使用体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为一个实施例中信号处理方法的应用环境示意图；
图2为一个实施例中终端的内部结构示意图；
图3为一个实施例中信号处理方法的流程示意图；
图4为另一个实施例中信号处理方法的流程示意图；
图5为另一个实施例中信号处理方法的流程示意图；
图6为另一个实施例中信号处理方法的流程示意图；
图7为另一个实施例中信号处理方法的流程示意图；
图8为一个实施例中信号处理装置的结构框图；
图9为与本申请实施例提供的终端相关的手机的部分结构的框图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中在本申请的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在限制本申请。可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一应用程序称为第二应用程序，且类似地，可将第二进应用程序为第一应用程序。第一应用程序和第二应用程序两者都是应用程序，但其不是同一应用程序。
图1为一个实施例中数据处理方法的应用环境示意图。如图1所示，该应用环境包括终端110和与该终端110进行通信的耳机120。
其中，终端110与耳机120进行通信连接。耳机120的类型包括但不限于入耳式耳机、耳塞式耳机。终端110与耳机120可以通过有线或无线的方式进行通信，实现数据的传输。
终端110上播放有音频信号，该音频信号可以是音乐、视频音、通话音等，终端110播放的音频信号通过耳机120传递至用户耳朵，使用户听到声音。同理，耳机120也可以采集音频信号，该音频信号可以是用户语音和周围环境音等，耳机120采集的音频信号传递至终端110处理，可以用于通话语音、声音指令、音频降噪等。
耳机120包括麦克风、左喇叭和右喇叭，其中左喇叭和右喇叭可以用电声换能器121替代，电声换能器121位于耳机的尖端部分，将耳机的尖端部分定位在用户的耳道内时，电声换能器121将终端110播放的音频信号输出至用户耳道中。电声换能器121包括扬声器和麦克风，扬声器用于播放终端110发送的音频信号，麦克风用于录制耳机120周围的音频信号。可选地，所述扬声器和所述麦克风为一体式结构。
图2为一个实施例中终端的内部结构示意图。该终端110包括通过系统总线连接的处理器、存储器和显示屏。其中，该处理器用于提供计算和控制能力，支撑整个终端110的运行。存储器用于存储数据、程序、和/或指令代码等，存储器上存储至少一个计算机程序，该计算机程序可被处理器执行，以实现本申请实施例中提供的适用于终端110的信号处理方法。存储器可包括磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等非易失性存储介质，或随机存储记忆体(Random-Access-Memory，RAM)等。例如，在一个实施例中，存储器包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统、数据库和计算机程序。该数据库中存储有用于实现以上各个实施例所提供的一种信号处理方法相关的数据。该计算机程序可被处理器所执行，以用于实现本申请各个实施例所提供的一种信号处理方法。内存储器为非易失性存储介质中的操作系统、数据库和计算机程序提供高速缓存的运行环境。显示屏可以是触摸屏，比如为电容屏或电子屏，用于显示终端110的界面信息，显示屏包括亮屏状态和灭屏状态。该终端110可以是手机、平板电脑或者个人数字助理或穿戴式设备等。
本领域技术人员可以理解，图2中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的终端110的限定，具体的终端110可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
如图3所示，为一个实施例中信号处理方法的流程图，本实施例中的信号处理方法，以运行于图1中的终端或耳机上为例进行描述。该方法基于与终端进行通信连接的耳机，所述耳机包括麦克风和电声换能器，所述电声换能器用于播放和采集音频信号。该信号处理方法，包括以下步骤302～步骤306：
步骤302：当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号。
耳机可以通过有线或无线的方式与终端进行通信，用户通过耳机进行通话的过程中，终端将通话方的音频信号通过耳机传至用户耳朵，并通过耳机上的麦克风采集用户的说话语音，发送至通话方。当用户通过耳机进行通话时，基于耳机上的麦克风采集用户的语音信号，基于耳机上播放音频信号的至少一个电声换能器采集外部环境的声音信号。
具体地，耳机上的麦克风通常设置于靠近用户嘴唇的位置，便于采集用户说话时发出的语音信号。在通过耳机进行通话时，耳机上的麦克风会被占用，从而无法获取周围的环境音，此时基于耳机上的电声换能器采集外部环境的声音信号。
耳机上的电声换能器包括第一电声换能器和第二电声换能器，第一电声换能器、第二电声换能器分别可作为原有耳机的左喇叭(扬声器)、右喇叭(扬声器)，将音频信号对应的电信号转换成用户可以听到的声波信号。同时，电声换能器对声波非常敏感，能够引起扬声器纸盆的振动，带动与纸盆相连的线圈在永久磁体的磁场中作切割磁力线的运动，从而产生随着声波的变化而变化的电流(产生电流的现象在物理学上称为电磁感应现象)，同时，在线圈两端将输出音频的电动势，因此，电声转换器还可以采集和录制外界环境音。也即，可以将耳机原有的第一电声换能器(左喇叭)、第二电声换能器(右喇叭)当做麦克风使用。
电声换能器，尽管其类型、功能或工作状态不同，它们都包括两个基本组成部分，即电系统和机械振动系统，在电声换能器内部，电系统和机械振动系统之间通过某种物理效应相互联系，以完成能量的转换。
基于耳机上播放音频信号的至少一个电声换能器采集外部环境的声音信号。也即，耳机的第一电声换能器(左喇叭)和/或第二电声换能器(右喇叭)会周期性的采集外部环境的声音信号。需要说明的是，该声音信号可以是喇叭、某个音响设备或者发生器产生的，也可以是人说话的声音，本申请中，不对声音信号做任何限定。
步骤304：识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配。
其中，特征音频包括但不限于噪声声波、声纹信息、敏感信息等，通过识别声音中的特征音频，获取外部环境中声音信号的有效信息。预设声音模型指的是具有特定频率的音频信号，预设声音模型包括但不限于噪声特征模型、人物特征模型、时间特征模型、位置特征模型以及事件特征模型。预设声音模型存储于数据库中，以供需要使用时进行调用和匹配。可选地，可以根据用户习惯对预设声音模型进行增加、删除、修改等操作，以适应不同用户的特征性需求。
具体地，噪声特征模型可以是需要引起用户注意的声音，例如喇叭声、报警声、敲击声、呼救声等；人物特征模型可以为用户所关注的人群、公司的名称、昵称等；时间特征模型可以为包括数字、年、月、日的音频信号；位置特征模型可以为用户所在的国家、城市、公司、家庭住址等。
当声音信号中的特征音频与预设声音模型匹配时，执行步骤306。
步骤306：根据所述特征音频对应的预设提醒方式执行提醒用户的操作。
当声音信号中的特征音频与预设声音模型匹配时，根据该特征音频对应的预设提醒方式执行提醒用户的操作。
具体地，可以通过调用特征音频与预设提醒方式的映射关系，确定与当前所述特征音频相对应的预设提醒方式，根据确定的所述预设提醒方式执行提醒用户的操作。所述预设提醒方式包括但不限于播放预设提醒内容、振动提醒、显示提醒和仿真提醒。
上述信号处理方法，当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号，识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配，若该特征音频与预设声音模型匹配，则根据所述特征音频对应的预设提醒方式执行提醒用户的操作。通过上述方法，仅利用耳机上固有的器件就可以实现对外部环境声音的采集与识别，使用户在耳机通话过程中也能关注到周围动态，并提升用户使用耳机过程中的安全性和便捷性，让用户有更好的使用体验。
在一个实施例中，在基于所述耳机上的电声换能器采集外部环境的声音信号之后，还包括：
步骤3021：检测所述声音信号中是否存在有效的声音信号。
环境噪声的存在，导致了采集的声音信号中包括噪声成分，需要从声音信号中区分出有效的声音信号，避免噪声对时间延迟的估计造成的影响。
短时过零率是指在某一帧声音信号中波形采集值出现异值的次数，在声音信号段中，短时过零率比较低，而在噪声或者无声的信号段中，有这较高的过零率。通过短时过零率的检测方法可以确定声音信号中是否存在有效的声音信号。
可选的，还可以采用短时能量的检测的方法来判断采集的声音信号是否有效。
步骤3022：当存在有效的声音信号时，对所述源声信号进行平滑、滤波处理。
当采集的声音信号中存在有效的声音信号时，可以通过加窗分帧的方式对声音信号进行平滑处理，其中，分帧是将声音信号帧按照相同时间段分成多帧信号，使每一帧变得更平稳，加窗分帧就是用窗口函数对每帧语音信号进行加权。本实施例中，使用海明窗函数，具有更小的旁瓣。
噪声信号的频率可能分布于整个频率空间，滤波是指对声音信号中特定频段的信号进行过滤处理，将特定频段的信号保留下拉，以衰减其他频段信号的过程。通过滤波可以使平滑处理后的声音信号更为清晰。
在一个实施例中，在耳机上设置第二麦克风，所述第二麦克风靠近所述耳机上的电声换能器，如图4所示，该方法还包括以下步骤402～步骤404：
步骤402：根据所述第二麦克风采集外部环境的声音信号。
耳机上的麦克风通常设置于靠近用户嘴唇的位置，便于采集用户说话时发出的语音信号。当通过耳机进行通话时，耳机上的麦克风会被占用，从而无法获取周围的环境音，此时通过设置在耳机上的第二麦克风来采集外部环境的声音信号。根据第二麦克风采集的声音信号来提醒用户。
步骤404：根据所述外部环境的声音信号对所述电声换能器播放的音频信号进行降噪处理。
可选地，还可以根据第二麦克风采集的声音信号对耳机上的电声换能器播放的音频信号进行降噪处理。具体地，第二麦克风采集外部环境的声音信号，基于该声音信号产生一个与之相反的反噪声波形，并通过耳机上的电声换能器播放该反噪声波形，从而实现抵消环境噪声的效果。
可选地，还可以根据第二麦克风采集的声音信号对耳机上原有的麦克风采集的声音信号进行降噪处理，以消除耳机上原有的麦克风所采集到的环境噪声，这样可以使得耳机上原有的麦克风在采集用户说话的语音时可以将声音更清晰地传递至通话方，提升了通话过程中的语音质量。
在一个实施例中，所述识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配，包括：提取所述声音信号中的噪声信息，判断所述噪声信息是否与预设噪声模型匹配；和/或，提取所述语音信号中的声纹信息，判断所述声纹信号是否与样本声纹信息匹配；和/或，提取所述语音信号中的敏感信息，判断所述敏感信息是否与预设关键字匹配。
例如，当识别到声音信号中有喇叭鸣笛声时，则认为该声音信号中的特征音频与预设声音模型匹配。或者，若用户李四把“李四”、“小李”作为特征音频进行存储，当有人呼叫“李四”或“小李”时，相似度达到设定的程度时，则认为外部环境的声音信号中包括了特征音频，当声音信号中包括特征音频时，则认为该声音信号中的特征音频与预设声音模型匹配。
在一个实施例中，如图5所示，所述根据所述特征音频对应的预设提醒方式执行提醒用户的操作，包括以下步骤502～步骤504：
步骤502：调用所述特征音频与预设提醒方式的映射关系，确定与当前所述特征音频相对应的预设提醒方式。
其中，特征音频包括但不限于人物特征音频、时间特征音频、位置特征音频以及事件特征音频，可以根据特征音频的预设的优先级来设定对应的预设提醒方式。其中，优先级从高到低依次为：事件特征音频--人物特征音频中用户本人的名称或昵称--人物特征音频中的用户所关注的人群、公司的名称、昵称--时间特征音频--位置特征音频。根据特征音频与预设提醒方式的映射关系，确定与当前所述特征音频相对应的预设提醒方式。
步骤504：根据确定的所述预设提醒方式执行提醒用户的操作。
具体的，预设提醒方式包括第一提醒方式和第二提醒方式，其中，第一提醒方式为耳机提醒，也即，通过耳机播放某些特定的录音传送到用户耳朵来提醒用户。第二提醒方式为与耳机进行通讯的终端提醒，其中，终端提醒可以为界面显示提醒，界面显示与铃声组合提醒或界面显示与振动组合提醒等。本领域技术人员能够想到的各种提醒方式都应包括在本发明实施例中。
在一个实施例中，如图6所示，所述电声换能器包括第一电声换能器和第二电声换能器，该信号处理方法还包括以下步骤602～步骤606：
步骤602：获取基于所述耳机上的麦克风、第一电声换能器和第二电声换能器采集的声音信号。
具体地，但耳机上的麦克风没有采集用户说话的语音时，可以基于耳机上的麦克风、第一电声换能器和第二电声换能器采集外部环境的声音信号。可选地，当耳机上设置有第二麦克风时，还可以基于耳机上的第二麦克风、第一电声换能器和第二电声换能器采集外部环境的声音信号。
步骤604：根据所述麦克风、第一电声换能器和第二电声换能器接收所述声音信号的时间延迟，获取所述声音信号相对于所述耳机的位置信息。
具体地，可以通过耳机的麦克风、第一电声换能器和第二电声换能器接收的声音信号，分别以麦克风、第一电声换能器和第二电声换能器作为参考麦克风获取接收该声音信号的时间延迟，基于达时延差的时延估计技术对声音信号进行估计定位，进而获取声音信号相对于耳机的位置信息。其中，位置信息可以理解为声音信号距离耳机的距离信息以及相对于耳机的方位信息。
需要说明的是，声音信号相对于耳机的位置信息可以理解为声音信号相对于耳机中心位置(麦克风、第一电声换能器和第二电声换能器的三者的中心位置)的位置信息，也可以理解为声音信号相对于麦克风、第一电声换能器或第二电声换能器的位置信息；还可以理解为声音信号相对于耳机上任一参考点的位置信息。
可选的，根据所述麦克风、第一电声换能器和第二电声换能器接收所述声音信号，还可以基于高分辨率谱估计的定向技术对该声音信号进行定位，也可以基于可控波束形成技术对该声音信号进行定位；还可以基于声压幅度比的定位技术对该声音信号进行定位。
步骤606：根据所述位置信息执行提醒用户的操作。
当声音信号符合预设提醒条件时，可以根据位置信息对应的预设提醒内容提醒用户。其中，预设提醒条件可以为声音信号的分贝数大于预设值，声音信号中包括某些预设的特征音频，例如“鸣笛、报警、呼喊、特定人名、地名、时间”等。根据获取的声音信号相对于耳机的位置信息，可以获取声音信号距离当前耳机的距离以及方位信号。根据位置信息可以设定不同策略的提醒方式，当所述声音信号符合预设提醒条件时，根据所述位置信息对应的提醒方式来执行提醒用户的操作。
具体地，根据特征音频的优先级可以设定与当前级别相对应的预设提醒方式，进一步的，可以将优先级高的对应于第一提醒方式，优先级低的对应于第二提醒方式。例如，当有人呼叫“李四”或“小李”时，可以结合特征音频和位置信息对用户进行耳机提醒，其提醒内容为“左后方1米有人呼唤”，可以及时提示用户回头与人交谈；当有鸣笛声时，可以结合特征音频和位置信息对用户进行耳机提醒，其提醒内容为“右后方3米有车”，可以及时提示用户在视角盲区注意安全，提高用户的安全警惕；当有人探讨“OPPO手机”时，可以结合特征音频和位置信息对用户进行终端设备的界面显示提醒，其提醒内容为“前方1米，OPPO、OPPO、OPPO”，以提示用户前方1米有人在探讨“OPPO”，若用户对其感兴趣，可以驻留半刻以获取相关的信息等。
本实施例提供的信号处理方法，当声音信号符合预设提醒条件时，可以根据特征音频和声音信号的位置信息根据预设提醒方式自动提醒用户，使用户对声音信号及时作出正确的处理，避免错过重要或紧急的事情。
在一个实施例中，如图7所示，所述根据所述麦克风、第一电声换能器和第二电声换能器接收所述声音信号的时间延迟，获取所述声音信号相对于所述耳机的位置信息，包括以下步骤702～步骤704：
步骤702：分别获取以麦克风、第一电声换能器和第二电声换能器作为参考麦克风的三组时间延迟。
声音信号也可以称之为声波信号，声波在传播过程中，由于距离麦克风、第一电声换能器、第二电声换能器的距离不同，声波到达麦克风、第一电声换能器、第二电声换能器的时间也就不同，声波到达麦克风、第一电声换能器、第二电声换能器的间隔时间就叫做时延。
由于麦克风、第一电声换能器(左喇叭)、第二电声换能器(右喇叭)固定在耳机上，可以基于耳机构建坐标系，则麦克风、第一电声换能器、第二电声换能器在坐标系中的位置为已知量，同时，麦克风、第一电声换能器(左喇叭)、第二电声换能器(右喇叭)各个两两之间的距离也为已知量。结合声波在空气中的传播速度，可以计算出声音信号到达麦克风、第一电声换能器、第二电声换能器中任意两个的时间间隔。
具体的，为了描述方便，将麦克风、第一电声换能器、第二电声换能器均称之为麦克风，并分别用M1、M2、M3来表示。分别以麦克风M1、M2、M3作为参考麦克风，得到每两个麦克风(麦克风对)之间的时间延迟(时间间隔或)，进而获取三组不同的时间延迟。其中，可以通过获取各个麦克风M1、M2、M3接收到的信号幅值的互相关函数的峰值偏移量，在根据对信号的采样频率，继而估算出时间延迟。
步骤704：根据所述三组时间延迟获取平均时间延迟。
根据获取的三组时间延迟数据中对应的时间延迟进行加权平均得到平均值，作为平均时间延迟。
步骤706：根据所述平均时间延迟对所述声音信号的位置信息进行定位估计，并获取所述声音信号相对于所述耳机的位置信息。
根据平均时间延迟以及麦克风M1、M2、M3已知的位置信息，进而可以对声音信号的位置信息进行定位估计，并获取声音信号相对于耳机的位置信息，也即，该声源信息与耳机之间的距离信息和方位信息。
本实施例中的方法，分别以麦克风M1、M2、M3作为参考麦克风分别计算得到与其他麦克风的之间的成对时间延迟，最后对得到的三组数据中相对应的时间延迟对进行加权平均得到平均值，根据获取的平均值对声音信号进行定位，可以提高定位的精确度。
应该理解的是，虽然上述图3-7中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图3-7中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
如图8所示，在一个实施例中，提供一种信号处理装置，该装置包括：信号采集模块810、特征识别模块820、操作执行模块830。
信号采集模块810，用于当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号。
特征识别模块820，用于识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配。
操作执行模块830，用于根据所述特征音频对应的预设提醒方式执行提醒用户的操作。
在一个实施例中，信号采集模块810还用于当通过所述耳机进行通话时，基于所述耳机上的麦克风采集用户的语音信号，基于所述耳机上播放音频信号的至少一个电声换能器采集外部环境的声音信号。
在一个实施例中，在所述耳机上设置第二麦克风，所述第二麦克风靠近所述耳机上的电声换能器，信号采集模块810还用于根据所述第二麦克风采集外部环境的声音信号；
根据所述外部环境的声音信号对所述电声换能器播放的音频信号进行降噪处理。
在一个实施例中，特征识别模块820还用于提取所述声音信号中的噪声信息，判断所述噪声信息是否与预设噪声模型匹配；和/或提取所述语音信号中的声纹信息，判断所述声纹信号是否与样本声纹信息匹配；和/或提取所述语音信号中的敏感信息，判断所述敏感信息是否与预设关键字匹配。
在一个实施例中，操作执行模块830还用于调用所述特征音频与预设提醒方式的映射关系，确定与当前所述特征音频相对应的预设提醒方式；所述预设提醒方式至少包括播放预设提醒内容、振动提醒、显示提醒、仿真提醒中的一种或一种以上；根据确定的所述预设提醒方式执行提醒用户的操作。
在一个实施例中，操作执行模块830还用于获取基于所述耳机上的麦克风、第一电声换能器和第二电声换能器采集的声音信号；根据所述麦克风、第一电声换能器和第二电声换能器接收所述声音信号的时间延迟，获取所述声音信号相对于所述耳机的位置信息；根据所述位置信息执行提醒用户的操作。
在一个实施例中，该信号处理装置还包括位置获取模块，用于分别获取以麦克风、第一电声换能器和第二电声换能器作为参考麦克风的三组时间延迟；根据所述三组时间延迟获取平均时间延迟；根据所述平均时间延迟对所述声音信号的位置信息进行定位估计，并获取所述声音信号相对于所述耳机的位置信息。
上述信号处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将信号处理装置按照需要划分为不同的模块，以完成上述信号处理装置的全部或部分功能。
关于信号处理装置的具体限定可以参见上文中对于信号处理方法的限定，在此不再赘述。上述信号处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
本申请实施例中提供的信号处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述的信号处理方法的步骤。
本申请实施例还提供了一种耳机，该耳机包括电声换能器、存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器与所述电声换能器及所述存储器电连接，所述处理器执行所述计算机程序时实现如上述各实施例中所描述的信号处理方法。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行如上述各实施例中所描述的信号处理方法。
本申请实施例还提供了一种计算机程序产品。一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述各实施例中所描述的信号处理方法。
本申请实施例还提供了一种终端设备。如图9所示，为了便于说明，仅示出了与本申请实施例相关的部分，具体技术细节未揭示的，请参照本申请实施例方法部分。该终端设备可以为包括手机、平板电脑、PDA(Personal Digital Assistant，个人数字助理)、POS(Point of Sales，销售电子设备)、车载电脑、穿戴式设备等任意终端设备设备，以终端设备为手机为例：
图9为与本申请实施例提供的终端设备相关的手机的部分结构的框图。参考图9，手机包括：射频(Radio Frequency，RF)电路910、存储器920、输入单元930、显示单元940、传感器950、音频电路960、无线保真(wireless fidelity，WiFi)模块970、处理器980、以及电源990等部件。本领域技术人员可以理解，图9所示的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
其中，RF电路910可用于收发信息或通话过程中，信号的接收和发送，可将基站的下行信息接收后，给处理器980处理；也可以将上行的数据发送给基站。通常，RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier，LNA)、双工器等。此外，RF电路910还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(Global System ofMobile communication，GSM)、通用分组无线服务(General Packet Radio Service，GPRS)、码分多址(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband CodeDivision Multiple Access，WCDMA)、长期演进(Long Term Evolution，LTE))、电子邮件、短消息服务(Short Messaging Service，SMS)等。
存储器920可用于存储软件程序以及模块，处理器980通过运行存储在存储器920的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。存储器920可主要包括程序存储区和数据存储区，其中，程序存储区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能的应用程序、图像播放功能的应用程序等)等；数据存储区可存储根据手机的使用所创建的数据(比如音频数据、通讯录等)等。此外，存储器920可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元930可用于接收输入的数字或字符信息，以及产生与手机900的用户设置以及功能控制有关的键信号输入。具体地，输入单元930可包括操作面板931以及其他输入设备932。操作面板931，也可称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在操作面板931上或在操作面板931附近的操作)，并根据预先设定的程式驱动相应的连接装置。在一个实施例中，操作面板931可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器980，并能接收处理器980发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现操作面板931。除了操作面板931，输入单元930还可以包括其他输入设备932。具体地，其他输入设备932可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)等中的一种或多种。
显示单元940可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元940可包括显示面板941。在一个实施例中，可以采用液晶显示器(LiquidCrystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板941。在一个实施例中，操作面板931可覆盖显示面板941，当操作面板931检测到在其上或附近的触摸操作后，传送给处理器980以确定触摸事件的类型，随后处理器980根据触摸事件的类型在显示面板941上提供相应的视觉输出。虽然在图9中，操作面板931与显示面板941是作为两个独立的部件来实现手机的输入和输入功能，但是在某些实施例中，可以将操作面板931与显示面板941集成而实现手机的输入和输出功能。
手机900还可包括至少一种传感器950，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及距离传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板941的亮度，距离传感器可在手机移动到耳边时，关闭显示面板941和/或背光。运动传感器可包括加速度传感器，通过加速度传感器可检测各个方向上加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换)、振动识别相关功能(比如计步器、敲击)等；此外，手机还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器等。
音频电路960、扬声器961和传声器962可提供用户与手机之间的音频接口。音频电路960可将接收到的音频数据转换后的电信号，传输到扬声器961，由扬声器961转换为声音信号输出；另一方面，传声器962将收集的声音信号转换为电信号，由音频电路960接收后转换为音频数据，再将音频数据输出处理器980处理后，经RF电路910可以发送给另一手机，或者将音频数据输出至存储器920以便后续处理。
WiFi属于短距离无线传输技术，手机通过WiFi模块970可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图9示出了WiFi模块970，但是可以理解的是，其并不属于手机900的必须构成，可以根据需要而省略。
处理器980是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器920内的软件程序和/或模块，以及调用存储在存储器920内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监听。在一个实施例中，处理器980可包括一个或多个处理单元。在一个实施例中，处理器980可集成应用处理器和调制解调器，其中，应用处理器主要处理操作系统、用户界面和应用程序等；调制解调器主要处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器980中。比如，该处理器980可集成应用处理器和基带处理器，基带处理器与和其它外围芯片等可组成调制解调器。手机900还包括给各个部件供电的电源990(比如电池)，优选的，电源可以通过电源管理系统与处理器980逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
在一个实施例中，手机900还可以包括摄像头、蓝牙模块等。
在本申请实施例中，该移动终端所包括的处理器880执行存储在存储器上的计算机程序时实现上述各实施例中所描述的信号处理方法。
在处理器上运行的计算机程序的执行时，使用户在耳机通话过程中也能关注到周围动态，并提升用户使用耳机过程中的安全性和便捷性，让用户有更好的使用体验。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (14)

1.一种信号处理方法，基于包括电声换能器的耳机，所述方法包括：
当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号；
识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配；
若是，则根据所述特征音频对应的预设提醒方式执行提醒用户的操作。
2.根据权利要求1所述的方法，其特征在于，所述当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号，包括：
当通过所述耳机进行通话时，基于所述耳机上的麦克风采集用户的语音信号，基于所述耳机上播放音频信号的至少一个电声换能器采集外部环境的声音信号。
3.根据权利要求2所述的方法，其特征在于，在所述耳机上设置第二麦克风，所述第二麦克风靠近所述耳机上的电声换能器，所述方法还包括：
根据所述第二麦克风采集外部环境的声音信号；
根据所述外部环境的声音信号对所述电声换能器播放的音频信号进行降噪处理。
4.根据权利要求1所述的方法，其特征在于，所述识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配，包括：
提取所述声音信号中的噪声信息，判断所述噪声信息是否与预设噪声模型匹配；和/或
提取所述语音信号中的声纹信息，判断所述声纹信号是否与样本声纹信息匹配；和/或
提取所述语音信号中的敏感信息，判断所述敏感信息是否与预设关键字匹配。
5.根据权利要求1所述的方法，其特征在于，所述根据所述特征音频对应的预设提醒方式执行提醒用户的操作，包括：
调用所述特征音频与预设提醒方式的映射关系，确定与当前所述特征音频相对应的预设提醒方式；所述预设提醒方式至少包括播放预设提醒内容、振动提醒、显示提醒、仿真提醒中的一种或一种以上；
根据确定的所述预设提醒方式执行提醒用户的操作。
6.根据权利要求5所述的方法，其特征在于，所述电声换能器包括第一电声换能器和第二电声换能器，所述方法还包括：
获取基于所述耳机上的麦克风、第一电声换能器和第二电声换能器采集的声音信号；
根据所述麦克风、第一电声换能器和第二电声换能器接收所述声音信号的时间延迟，获取所述声音信号相对于所述耳机的位置信息；
根据所述位置信息执行提醒用户的操作。
7.根据权利要求6所述的方法，其特征在于，所述根据所述麦克风、第一电声换能器和第二电声换能器接收所述声音信号的时间延迟，获取所述声音信号相对于所述耳机的位置信息，包括：
分别获取以麦克风、第一电声换能器和第二电声换能器作为参考麦克风的三组时间延迟；
根据所述三组时间延迟获取平均时间延迟；
根据所述平均时间延迟对所述声音信号的位置信息进行定位估计，并获取所述声音信号相对于所述耳机的位置信息。
8.一种信号处理装置，其特征在于，包括：
信号采集模块，用于当通过所述耳机进行通话时，基于所述耳机上的电声换能器采集外部环境的声音信号；
特征识别模块，用于识别所述声音信号中的特征音频，并判断所述特征音频是否与预设声音模型匹配；
操作执行模块，用于根据所述特征音频对应的预设提醒方式执行提醒用户的操作。
9.一种终端，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
11.一种耳机，其特征在于，包括电声换能器、存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器与所述电声换能器及所述存储器电连接，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
12.根据权利要求11所述的耳机，其特征在于，所述电声换能器用于播放音频信号，并用于采集音频信号。
13.根据权利要求12所述的耳机，其特征在于，所述电声换能器包括扬声器和麦克风，所述扬声器用于播放音频信号，所述麦克风用于采集音频信号。
14.根据权利要求13所述的耳机，其特征在于，所述扬声器和所述麦克风为一体式结构。
CN201810277815.2A 2018-03-30 2018-03-30 信号处理方法、装置、终端、耳机及可读存储介质 Pending CN108540661A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810277815.2A CN108540661A (zh) 2018-03-30 2018-03-30 信号处理方法、装置、终端、耳机及可读存储介质
US16/246,768 US10923129B2 (en) 2018-03-30 2019-01-14 Method for processing signals, terminal device, and non-transitory readable storage medium
PCT/CN2019/074447 WO2019184601A1 (en) 2018-03-30 2019-02-01 Method for processing signals, terminal device, and non-transitory readable storage medium
EP19155443.5A EP3547712B1 (en) 2018-03-30 2019-02-05 Method for processing signals, terminal device, and non-transitory readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810277815.2A CN108540661A (zh) 2018-03-30 2018-03-30 信号处理方法、装置、终端、耳机及可读存储介质

Publications (1)

Publication Number Publication Date
CN108540661A true CN108540661A (zh) 2018-09-14

Family

ID=63481858

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810277815.2A Pending CN108540661A (zh) 2018-03-30 2018-03-30 信号处理方法、装置、终端、耳机及可读存储介质

Country Status (4)

Country Link
US (1) US10923129B2 (zh)
EP (1) EP3547712B1 (zh)
CN (1) CN108540661A (zh)
WO (1) WO2019184601A1 (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109243442A (zh) * 2018-09-28 2019-01-18 歌尔科技有限公司 声音监测方法、装置及头戴显示设备
CN109257498A (zh) * 2018-09-29 2019-01-22 维沃移动通信有限公司 一种声音处理方法及移动终端
CN109493884A (zh) * 2018-12-06 2019-03-19 江苏满运软件科技有限公司 一种外部声源安全提醒方法、系统、设备以及介质
US10349176B1 (en) 2018-03-30 2019-07-09 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for processing signals, terminal device, and non-transitory computer-readable storage medium
WO2019184601A1 (en) * 2018-03-30 2019-10-03 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for processing signals, terminal device, and non-transitory readable storage medium
CN110381198A (zh) * 2019-07-02 2019-10-25 维沃移动通信有限公司 一种提醒方法及终端设备
CN110493678A (zh) * 2019-08-14 2019-11-22 Oppo（重庆）智能科技有限公司 耳机的控制方法和装置
CN111243224A (zh) * 2018-11-09 2020-06-05 北京搜狗科技发展有限公司 一种实现报警的方法及装置
CN111326159A (zh) * 2020-03-10 2020-06-23 苏宁云计算有限公司 一种语音识别方法、装置、系统
CN111432305A (zh) * 2020-03-27 2020-07-17 歌尔科技有限公司 一种耳机告警方法、装置及无线耳机
CN111683317A (zh) * 2020-05-28 2020-09-18 江苏紫米电子技术有限公司 一种应用于耳机的提示方法、装置、终端及存储介质
CN111696577A (zh) * 2020-06-05 2020-09-22 北京搜狗科技发展有限公司 一种提醒方法、装置和耳机
CN112019960A (zh) * 2019-05-28 2020-12-01 深圳市冠旭电子股份有限公司 利用耳机进行情景监测方法、耳机、装置及可读存储介质
CN112532787A (zh) * 2020-11-30 2021-03-19 努比亚技术有限公司 耳机音频数据处理方法、移动终端及计算机可读存储介质
CN112837703A (zh) * 2020-12-30 2021-05-25 深圳市联影高端医疗装备创新研究院 医疗成像设备中语音信号获取方法、装置、设备和介质
WO2021103262A1 (zh) * 2019-11-28 2021-06-03 歌尔股份有限公司 耳机的控制方法、耳机及可读存储介质
CN113179467A (zh) * 2021-03-16 2021-07-27 广州朗国电子科技有限公司 一种车辆环境音频处理方法、装置、设备及存储介质
CN113613155A (zh) * 2021-07-24 2021-11-05 武汉左点科技有限公司 一种自适应环境的助听方法及装置
TWI745815B (zh) * 2019-12-26 2021-11-11 陳筱涵 工安防噪耳機
CN113905302A (zh) * 2021-10-11 2022-01-07 Oppo广东移动通信有限公司 触发提示信息的方法、装置以及耳机
CN114173258A (zh) * 2022-02-07 2022-03-11 深圳市朗琴音响技术有限公司 智能音箱控制方法及智能音箱
CN113613155B (zh) * 2021-07-24 2024-04-26 武汉左点科技有限公司 一种自适应环境的助听方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113192514A (zh) * 2021-04-28 2021-07-30 云知声智能科技股份有限公司 智能提醒方法、装置及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008095167A2 (en) * 2007-02-01 2008-08-07 Personics Holdings Inc. Method and device for audio recording
CN102411936A (zh) * 2010-11-25 2012-04-11 歌尔声学股份有限公司 语音增强方法、装置及头戴式降噪通信耳机
CN104158970A (zh) * 2010-02-20 2014-11-19 华为终端有限公司 一种环境声音提醒方法和移动终端
CN106162413A (zh) * 2016-09-07 2016-11-23 合肥中感微电子有限公司 具体环境声音提醒模式的耳机装置
CN107799117A (zh) * 2017-10-18 2018-03-13 倬韵科技（深圳）有限公司 识别关键信息以控制音频输出的方法、装置及音频设备

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101193460B (zh) 2006-11-20 2011-09-28 松下电器产业株式会社 检测声音的装置及方法
CN101790000B (zh) 2010-02-20 2014-08-13 华为终端有限公司 一种环境声音提醒方法和移动终端
US8923524B2 (en) * 2012-01-01 2014-12-30 Qualcomm Incorporated Ultra-compact headset
WO2013156818A1 (en) * 2012-04-19 2013-10-24 Nokia Corporation An audio scene apparatus
CN103414982B (zh) 2013-07-31 2018-02-13 小米科技有限责任公司 一种提供声音的方法和装置
CN204231608U (zh) 2014-09-28 2015-03-25 苏州佑克骨传导科技有限公司 一种降噪耳机
CN106210219B (zh) 2015-05-06 2019-03-22 小米科技有限责任公司 降噪方法及装置
KR101693483B1 (ko) 2015-05-22 2017-01-06 중소기업은행 헤드셋의 하울링 및 에코 제거 방법 및 컴퓨터 프로그램
US9961435B1 (en) * 2015-12-10 2018-05-01 Amazon Technologies, Inc. Smart earphones
KR20170111450A (ko) 2016-03-28 2017-10-12 삼성전자주식회사 보청장치, 휴대장치 및 그 제어방법
CN105741856A (zh) 2016-04-08 2016-07-06 王美金 一种在听音乐状态下提示环境危机声音的耳机
CN106210960B (zh) 2016-09-07 2019-11-19 合肥中感微电子有限公司 具有本地通话情况确认模式的耳机装置
CN107105367B (zh) 2017-05-24 2020-07-10 维沃移动通信有限公司 一种音频信号处理方法及终端
CN108540661A (zh) * 2018-03-30 2018-09-14 广东欧珀移动通信有限公司 信号处理方法、装置、终端、耳机及可读存储介质
CN108600885B (zh) 2018-03-30 2020-05-22 Oppo广东移动通信有限公司 声音信号处理方法及相关产品

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008095167A2 (en) * 2007-02-01 2008-08-07 Personics Holdings Inc. Method and device for audio recording
CN104158970A (zh) * 2010-02-20 2014-11-19 华为终端有限公司 一种环境声音提醒方法和移动终端
CN102411936A (zh) * 2010-11-25 2012-04-11 歌尔声学股份有限公司 语音增强方法、装置及头戴式降噪通信耳机
CN106162413A (zh) * 2016-09-07 2016-11-23 合肥中感微电子有限公司 具体环境声音提醒模式的耳机装置
CN107799117A (zh) * 2017-10-18 2018-03-13 倬韵科技（深圳）有限公司 识别关键信息以控制音频输出的方法、装置及音频设备

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
高晓虹，王甫: "《中国3D电视论文集》", 30 November 2014, 北京：中国广播电视出版社 *
高梦熊: "《地下轮胎式采矿车辆人机安全工程》", 31 October 2012, 北京：冶金工业出版社 *

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10349176B1 (en) 2018-03-30 2019-07-09 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for processing signals, terminal device, and non-transitory computer-readable storage medium
WO2019184601A1 (en) * 2018-03-30 2019-10-03 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for processing signals, terminal device, and non-transitory readable storage medium
WO2019184398A1 (en) * 2018-03-30 2019-10-03 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for processing signals, terminal device, and non-transitory computer-readable storage medium
CN109243442A (zh) * 2018-09-28 2019-01-18 歌尔科技有限公司 声音监测方法、装置及头戴显示设备
CN109257498A (zh) * 2018-09-29 2019-01-22 维沃移动通信有限公司 一种声音处理方法及移动终端
CN111243224A (zh) * 2018-11-09 2020-06-05 北京搜狗科技发展有限公司 一种实现报警的方法及装置
CN109493884A (zh) * 2018-12-06 2019-03-19 江苏满运软件科技有限公司 一种外部声源安全提醒方法、系统、设备以及介质
CN112019960A (zh) * 2019-05-28 2020-12-01 深圳市冠旭电子股份有限公司 利用耳机进行情景监测方法、耳机、装置及可读存储介质
CN110381198A (zh) * 2019-07-02 2019-10-25 维沃移动通信有限公司 一种提醒方法及终端设备
CN110493678A (zh) * 2019-08-14 2019-11-22 Oppo（重庆）智能科技有限公司 耳机的控制方法和装置
WO2021103262A1 (zh) * 2019-11-28 2021-06-03 歌尔股份有限公司 耳机的控制方法、耳机及可读存储介质
TWI745815B (zh) * 2019-12-26 2021-11-11 陳筱涵 工安防噪耳機
CN111326159A (zh) * 2020-03-10 2020-06-23 苏宁云计算有限公司 一种语音识别方法、装置、系统
CN111432305A (zh) * 2020-03-27 2020-07-17 歌尔科技有限公司 一种耳机告警方法、装置及无线耳机
CN111683317A (zh) * 2020-05-28 2020-09-18 江苏紫米电子技术有限公司 一种应用于耳机的提示方法、装置、终端及存储介质
CN111683317B (zh) * 2020-05-28 2022-04-08 江苏紫米电子技术有限公司 一种应用于耳机的提示方法、装置、终端及存储介质
CN111696577A (zh) * 2020-06-05 2020-09-22 北京搜狗科技发展有限公司 一种提醒方法、装置和耳机
CN112532787A (zh) * 2020-11-30 2021-03-19 努比亚技术有限公司 耳机音频数据处理方法、移动终端及计算机可读存储介质
CN112837703A (zh) * 2020-12-30 2021-05-25 深圳市联影高端医疗装备创新研究院 医疗成像设备中语音信号获取方法、装置、设备和介质
CN113179467A (zh) * 2021-03-16 2021-07-27 广州朗国电子科技有限公司 一种车辆环境音频处理方法、装置、设备及存储介质
CN113613155A (zh) * 2021-07-24 2021-11-05 武汉左点科技有限公司 一种自适应环境的助听方法及装置
CN113613155B (zh) * 2021-07-24 2024-04-26 武汉左点科技有限公司 一种自适应环境的助听方法及装置
CN113905302A (zh) * 2021-10-11 2022-01-07 Oppo广东移动通信有限公司 触发提示信息的方法、装置以及耳机
CN114173258A (zh) * 2022-02-07 2022-03-11 深圳市朗琴音响技术有限公司 智能音箱控制方法及智能音箱
CN114173258B (zh) * 2022-02-07 2022-05-10 深圳市朗琴音响技术有限公司 智能音箱控制方法及智能音箱

Also Published As

Publication number Publication date
US10923129B2 (en) 2021-02-16
EP3547712A1 (en) 2019-10-02
WO2019184601A1 (en) 2019-10-03
US20190304467A1 (en) 2019-10-03
EP3547712B1 (en) 2022-07-20

Similar Documents

Publication Publication Date Title
CN108540661A (zh) 信号处理方法、装置、终端、耳机及可读存储介质
CN108391206A (zh) 信号处理方法、装置、终端、耳机及可读存储介质
CN108521621A (zh) 信号处理方法、装置、终端、耳机及可读存储介质
CN108538320B (zh) 录音控制方法和装置、可读存储介质、终端
CN108803859A (zh) 信息处理方法、装置、终端、耳机及可读存储介质
CN108600885A (zh) 声音信号处理方法及相关产品
CN108922537B (zh) 音频识别方法、装置、终端、耳机及可读存储介质
CN108429969B (zh) 音频播放方法、装置、终端、耳机及可读存储介质
CN108430003A (zh) 音效补偿方法和装置、可读存储介质、终端
CN108519871A (zh) 音频信号处理方法及相关产品
CN108668009A (zh) 输入操作控制方法、装置、终端、耳机及可读存储介质
CN108763901B (zh) 耳纹信息获取方法和装置、终端、耳机及可读存储介质
CN108391207A (zh) 数据处理方法、装置、终端、耳机及可读存储介质
CN108540900A (zh) 音量调节方法及相关产品
CN108540660A (zh) 语音信号处理方法和装置、可读存储介质、终端
CN101569093A (zh) 响应于不同的噪声环境经由用户优选的音频设置来动态地获悉用户的响应
CN108391205A (zh) 左右声道切换方法和装置、可读存储介质、终端
CN108710486A (zh) 音频播放方法、装置、耳机及计算机可读存储介质
CN108763978A (zh) 信息提示方法、装置、终端、耳机及可读存储介质
US20200293270A1 (en) Smart speaker
CN106384597A (zh) 一种音频数据处理方法、及设备
CN108763913A (zh) 数据处理方法、装置、终端、耳机及可读存储介质
CN208402071U (zh) 音频播放装置、耳机及音频播放系统
CN108810787B (zh) 基于音频设备的异物检测方法和装置、终端
CN108391208A (zh) 信号切换方法、装置、终端、耳机及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1258619

Country of ref document: HK

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180914