CN112333608B - 语音数据处理方法及相关产品 - Google Patents

语音数据处理方法及相关产品 Download PDF

Info

Publication number
CN112333608B
CN112333608B CN202011251371.9A CN202011251371A CN112333608B CN 112333608 B CN112333608 B CN 112333608B CN 202011251371 A CN202011251371 A CN 202011251371A CN 112333608 B CN112333608 B CN 112333608B
Authority
CN
China
Prior art keywords
data
voice data
microphone
wireless headset
volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011251371.9A
Other languages
English (en)
Other versions
CN112333608A (zh
Inventor
颜聪炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202011251371.9A priority Critical patent/CN112333608B/zh
Publication of CN112333608A publication Critical patent/CN112333608A/zh
Application granted granted Critical
Publication of CN112333608B publication Critical patent/CN112333608B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/20Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/21Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1016Earpieces of the intra-aural type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041Mechanical or electronic switches, or control elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091Details not provided for in groups H04R1/1008 - H04R1/1083
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • H04R29/004Monitoring arrangements; Testing arrangements for microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • H04R29/004Monitoring arrangements; Testing arrangements for microphones
    • H04R29/005Microphone arrays
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L2015/088Word spotting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725Cordless telephones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/01Input selection or mixing for amplifiers or loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/033Headphones for stereophonic communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Otolaryngology (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephone Function (AREA)
  • Headphones And Earphones (AREA)

Abstract

本申请实施例公开了一种语音数据处理方法及相关产品,包括:当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据;根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态;将所述第一语音数据和所述第二语音数据生成所述目标语音数据。本申请实施例有利于在无线耳机堵孔时,提升语音数据获取的完整性。

Description

语音数据处理方法及相关产品
技术领域
本申请涉及无线耳机技术领域,具体涉及一种语音数据处理方法及相关产品。
背景技术
随着移动终端(例如,智能手机)的大量普及与快速发展,各式各样的耳机已成为人们常用于收听媒体的装置,而且,由于有线耳机的耳机线经常出现损坏,导致耳机寿命减短,花销较高,无线耳机应运而生。
目前,人们经常会发现麦克风出现堵孔的现象,例如灰尘堵孔、水滴堵孔等,这便导致无线耳机通过麦克风获取的语音数据出现声音断续、音量较小的情况,影响用户的正常使用。
发明内容
本申请实施例提供了一种语音数据处理方法及相关产品,可以在无线耳机堵孔时,提升语音数据获取的完整性。
第一方面,本申请实施例提供了一种语音数据处理方法,应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,所述第一无线耳机包括第一麦克风,所述第二无线耳机包括第二麦克风,所述方法包括:
当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据;
根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态;
将所述第一语音数据和所述第二语音数据生成所述目标语音数据。
第二方面,本申请实施例提供了一种语音数据处理装置,应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,所述第一无线耳机包括第一麦克风,所述第二无线耳机包括第二麦克风,所述语音数据处理装置包括操作单元、检测单元和处理单元,其中:
所述操作单元,用于所述当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据;
所述检测单元,用于根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态;
所述处理单元,用于将所述第一语音数据和所述第二语音数据生成所述目标语音数据。
第三方面,本申请实施例提供了一种无线耳机,包括:处理器,存储器,以及一个或多个程序;所述一个或多个程序被存储在上述存储器中,并且被配置成由所述处理器执行,所述程序包括用于执行本申请实施例第一方面任一方法中所描述的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,所述计算机可读存储介质存储有用于电子数据交换的计算机程序,该计算机程序具体包括指令,所述指令用于执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
第五方面,本申请实施例提供了一种计算机程序产品,其中,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,本申请实施例中,无线耳机首先当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据,其次,根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,最后,将所述第一语音数据和所述第二语音数据生成所述目标语音数据。可见,无线耳机在接收到目标语音数据的获取指令,并检测到第一无线耳机的第一麦克风和第二无线耳机的第二麦克风均处于堵孔状态时,将所述第一无线耳机在堵孔状态下获取的第一语音数据和第二无线耳机在堵孔状态下获取的第二语音数据组合为目标语音数据,有利于提升语音数据获取的完整性,而且,并行执行第一操作和第二操作,提升了数据处理的速度。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例公开的一种无线耳机系统的系统架构示意图;
图2是本申请实施例公开的一种语音数据处理方法的流程示意图;
图3是本申请实施例公开的另一种语音数据处理方法的流程示意图;
图4是本申请实施例公开的另一种语音数据处理方法的流程示意图;
图5是本申请实施例公开的一种无线耳机的结构示意图;
图6是本申请实施例公开的一种语音数据处理装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
如图1所示,本申请实施例提供了一种无线耳机系统100,该系统包括移动终端101、第一无线耳机102、第二无线耳机103,其中,该系统使用以下任意一种通信机制,其一,所述移动终端101与第一无线耳机102建立有第一通信链路,所述第一无线耳机102与第二无线耳机103建立有第二通信链路,即第一无线耳机102和第二无线耳机103与移动终端101之间的通信机制采用主从通信机制(具体可以采用蓝牙协议),其二,所述移动终端101与第一无线耳机102建立有第一通信链路,所述移动终端101与第二无线耳机103建立有第二通信链路,即第一无线耳机102和第二无线耳机103均为与移动终端101直接进行通信的主耳机,主耳机即直接与移动终端101建立通信链路进行预设类型数据交互的耳机,从耳机即通过主耳机中转后再与移动终端101进行预设类型数据交互的耳机,其中,预设类型数据包括媒体数据和/或通话数据,其中,媒体数据为移动终端101的除通话语音数据之外的音频数据和/或视频数据,通话数据为移动终端101的通话语音数据,第一无线耳机102和第二无线耳机103可以是蓝牙无线耳机等。移动终端101可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备(例如智能手表、智能手环、计步器等)、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(User Equipment,UE),移动台(Mobile Station,MS),终端设备(terminal device)等等。为方便描述,上面提到的设备统称为移动终端。下面对本申请实施例进行详细介绍。
请参阅图2,图2是本申请实施例提供了一种语音数据处理方法的流程示意图,应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,如图所示,本语音数据处理方法包括:
S201,无线耳机当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过第一无线耳机的第一麦克风获取第一语音数据,所述第二操作为通过第二无线耳机的第二麦克风获取第二语音数据;
其中,所述目标语音数据为无线耳机待录取的语音数据,所述目标语音数据可以是用户在使用语音或者视频聊天应用时,需要通过麦克风录取并发送给对端的语音数据,也可以是用户在使用游戏应用的过程中与队友交流时需要录取的语音数据,在此不做限定。
其中,所述获取指令可以是用户需要麦克风录取语音数据时操作移动终端的指令,该指令可以是双击或者长按触控屏的指定区域等,然后由移动终端将获取指令发送给无线耳机,或者也可以是用户需要麦克风录取语音数据时操作无线耳机的指令,该指令可以是敲击无线耳机或者双击无线耳机等,在此不做限定。
其中,所述第一语音数据和所述第二语音数据为所述目标语音数据的部分或者全部数据,在此不做限定。
S202,所述无线耳机根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态;
其中,所述无线耳机根据所述第一语音数据检测所述第一麦克风的堵孔状态和所述第二语音数据检测所述第二麦克风的堵孔状态可以是同时在两个不同的线程执行的,提升检测速度,也可以是顺序执行的,减小无线耳机需要的处理带宽,在此不做限定。
其中,所述无线耳机根据所述第一语音数据检测所述第一麦克风的堵孔状态的具体实现方式可以是多种多样的,例如可以是,通过第一语音数据的音量大小检测第一麦克风是否处于堵孔状态,也可以是通过第一语音数据的音频大小检测第一麦克风是否处于堵孔状态,也可以是通过检测第一语音数据是否存在断续来检测第一麦克风是否处于堵孔状态,在此不做限定,所述无线耳机根据所述第二语音数据检测所述第二麦克风的堵孔状态的具体实现方式可以选择与检测所述第一麦克风的堵孔状态的具体实现方式相同,也可是选择与检测所述第一麦克风的堵孔状态的具体实现方式不同,在此不做限定。
S203,所述无线耳机将所述第一语音数据和所述第二语音数据生成所述目标语音数据。
其中,所述无线耳机将所述第一语音数据和所述第二语音数据生成所述目标语音数据的具体实现方式可以是多种多样的,例如可以是将第一语音数据中音频较小的部分用第二语音数据中的对应的音频数据代替,或者可以是将第二语音数据中幅值为零的部分用第一语音数据中对应的音频数据代替,或者是将第一语音数据和第二语音数据输入人工智能模型中,合成目标语音数据,在此不做限定。
可以看出,本申请实施例中,无线耳机首先当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据,其次,根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,最后,将所述第一语音数据和所述第二语音数据生成所述目标语音数据。可见,无线耳机在接收到目标语音数据的获取指令,并检测到第一无线耳机的第一麦克风和第二无线耳机的第二麦克风均处于堵孔状态时,将所述第一无线耳机在堵孔状态下获取的第一语音数据和第二无线耳机在堵孔状态下获取的第二语音数据组合为目标语音数据,有利于提升语音数据获取的完整性,而且,并行执行第一操作和第二操作,提升了数据处理的速度。
在一个可能的示例中,所述将所述第一语音数据和所述第二语音数据生成所述目标语音数据,包括:
将所述第一语音数据按照第一时间间隔分为第一数据片段组;
将所述第二语音数据按照第二时间间隔分为第二数据片段组;
根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据。
其中,所述第一时间间隔和所述第二时间间隔可以相同也可以不同,在此不做限定,所述第一时间间隔可以是0.1ms、0.5ms等,所述第二时间间隔可以是0.2ms、0.6ms等,在此不做限定。
其中,所述第一数据片段组中包括多个第一数据片段,第二数据片段组中包括多个第二数据片段,根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据的具体实现方式可以是在第一时间间隔和第二时间间隔相同时,对比每个相同时间段对应的第一数据片段和第二数据片段,在第一数据片段和第二数据片段中选取音频高的数据片段,将选取完成的所有数据片段拼接为目标语音数据,或者可以是确定出第一数据片段中音频较低的数据片段,并在第二数据片段组中找到对应的片段,并将找到的片段替换第一数据片段组中音频较低的数据片段合成所述目标语音数据,在此不做限定。
可见,本示例中,无线耳机分别将第一语音数据和第二语音数据分为第一数据片段和第二数据片段组,并根据第一数据片段组和第二数据片段组合成目标语音数据,算法简单,有利于提升目标语音数据的完整性和便捷性。
在这个可能的示例中,所述根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据,包括:
确定所述第一数据片段组中频率小于预设频率阈值的至少一个第一数据片段;
获取所述第二数据片段组中与所述至少一个第一数据片段的时间参数对应的至少一个第二数据片段;
将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据。
其中,所述至少一个第一数据片段与所述至少一个第二数据片段的数量相同,所述预设频率阈值可以为经验值,可以是由技术开发人员在无线耳机出厂前预设置在所述无线耳机中的阈值,也可以是根据历史数据确定的用户语音频率的最高值或者平均值,在此不做限定。
可见,本示例中,无线耳机在第一数据片段组中选取频率小于预设频率阈值的至少一个第一数据片段,然后在第二数据片段组中寻找替代的片段,而不是一一对比第一数据片段和第二数据,有利于提升数据处理的速度。
在这个可能的示例中,所述将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据,包括:
将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段按照获取时的时间标识组合为参考语音数据;
当检测到所述参考语音数据中存在数据缺失片段时,根据数据缺失片段的数据量确定预设关键词集合中的关键词;
将所述关键词对应的语音数据添加至所述数据缺失片段中,合成所述目标语音数据。
其中,所述数据缺失片段可以是数据频率小于预设频率阈值的片段,或者是数据幅值小于预设幅值阈值的片段,或者是无语音数据的片段,在此不做限定。
其中,不同的数据量可以对应不同的关键词,例如第一数据量对应关键词为“的”,第二数量对应关键词为“是的”等,在此不做限定,所述预设关键词集合中可以包括根据历史数据中获取的用户语音数据中出现频率最高的词,以及技术开发人员根据大数据分析人类最喜欢使用的词汇等,该关键词可以是一些不会改变目标语音数据实际意义的词,例如“的”、“哈哈”等,在此不做限定。
其中,加入的关键词可以根据历史记录中用户的语音数据来设置音量、音色等参数,使更加符合用户的语气。
可见,本示例中,无线耳机在结合了第一数据片段组和第二数据片段组中的数据片段之后仍然存在数据缺失片段时,在数据片段中加入关键词,在保证了目标语音数据的连贯性的同时,也不会改变目标语音数据的含义,有利于提升数据处理的智能性。
在一个可能的示例中,所述根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,包括:
确定所述第一语音数据中音量小于音量阈值的第一数据量,以及所述第二语音数据中音量小于所述音量阈值的第二数据量;
当检测到所述第一数据量在所述第一语音数据中的数据量占比大于预设占比阈值时,确定所述第一麦克风处于所述堵孔状态;
当检测到所述第二数据量在所述第二语音数据中的数据量占比大于所述预设占比阈值时,确定所述第二麦克风处于所述堵孔状态。
其中,所述预设占比阈值为经验值,是无线耳机的技术开发人员在无线耳机出厂前设置在其中的,例如可以是50%、60%等,在此不做限定。
可见,本示例中,无线耳机根据第一语音数据和第二语音数据中出现语音断续的比例来确定第一无线耳机和第二无线耳机的堵孔状态,而不是通过语音的属性参数与预设参数进行比较,降低了环境干扰,有利于提升堵孔状态的准确性。
在一个可能的示例中,所述无线耳机通信连接移动终端,所述方法还包括:
通过移动终端获取所述目标语音数据;
所述根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,包括:
当检测到所述第一语音数据的第一能量和所述第二语音数据的第二能量之间的第一差值小于第一预设差值时,比较所述第一能量与所述移动终端获取的所述目标语音数据的第三能量;
当检测到所述第一能量与所述第三能量之间的第二差值大于第二预设差值时,确定所述第一麦克风和所述第二麦克风处于所述堵孔状态。
其中,语音数据为音频,音频是一种声波,而声波为一种机械波,因此,声波本身存在能量,能量可以通过传播的介质密度、频率、振幅和波速计算得到,即单位时间流经单位面积介质的能量的平均值的多少来表示该单位面积的声音的能量。
可见,本示例中,无线耳机在检测到第一语音数据的第一能量和第二语音数据的第二能量之间的差值较小时,表明第一麦克风和第二麦克风的状态相同,当检测到第一能量与第三能量之间的差值较大时,表明第一麦克风处于堵孔状态,同时也表明第二麦克风也处于堵孔状态,通过多个差值比较来确定第一麦克风和第二麦克风的堵孔状态,有利于提升堵孔检测的准确性。
与所述图2所示的实施例一致的,请参阅图3,图3是本申请实施例提供的另一种语音数据处理方法的流程示意图,应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,如图所示,本语音数据处理方法包括:
S301,无线耳机当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过第一无线耳机的第一麦克风获取第一语音数据,所述第二操作为通过第二无线耳机的第二麦克风获取第二语音数据。
S302,所述无线耳机确定所述第一语音数据中音量小于音量阈值的第一数据量,以及所述第二语音数据中音量小于所述音量阈值的第二数据量。
S303,所述无线耳机当检测到所述第一数据量在所述第一语音数据中的数据量占比大于预设占比阈值时,确定所述第一麦克风处于堵孔状态。
S304,所述无线耳机当检测到所述第二数据量在所述第二语音数据中的数据量占比大于所述预设占比阈值时,确定所述第二麦克风处于所述堵孔状态。
S305,所述无线耳机将所述第一语音数据按照第一时间间隔分为第一数据片段组。
S306,所述无线耳机将所述第二语音数据按照第二时间间隔分为第二数据片段组。
S307,所述无线耳机确定所述第一数据片段组中频率小于预设频率阈值的至少一个第一数据片段。
S308,所述无线耳机获取所述第二数据片段组中与所述至少一个第一数据片段的时间参数对应的至少一个第二数据片段。
S309,所述无线耳机将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据。
可以看出,本申请实施例中,无线耳机首先当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据,其次,根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,最后,将所述第一语音数据和所述第二语音数据生成所述目标语音数据。可见,无线耳机在接收到目标语音数据的获取指令,并检测到第一无线耳机的第一麦克风和第二无线耳机的第二麦克风均处于堵孔状态时,将所述第一无线耳机在堵孔状态下获取的第一语音数据和第二无线耳机在堵孔状态下获取的第二语音数据组合为目标语音数据,有利于提升语音数据获取的完整性,而且,并行执行第一操作和第二操作,提升了数据处理的速度。
此外,无线耳机根据第一语音数据和第二语音数据中出现语音断续的比例来确定第一无线耳机和第二无线耳机的堵孔状态,而不是通过语音的属性参数与预设参数进行比较,降低了环境干扰,有利于提升堵孔状态的准确性。
此外,无线耳机分别将第一语音数据和第二语音数据分为第一数据片段和第二数据片段组,并根据第一数据片段组和第二数据片段组合成目标语音数据,算法简单,有利于提升目标语音数据的完整性和便捷性,而且,无线耳机在第一数据片段组中选取频率小于预设频率阈值的至少一个第一数据片段,然后在第二数据片段组中寻找替代的片段,而不是一一对比第一数据片段和第二数据,有利于提升数据处理的速度。
与所述图2所示的实施例一致的,请参阅图4,图4是本申请实施例提供的另一种语音数据处理方法的流程示意图,应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,如图所示,本语音数据处理方法包括:
S401,无线耳机当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过第一无线耳机的第一麦克风获取第一语音数据,所述第二操作为通过第二无线耳机的第二麦克风获取第二语音数据。
S402,所述无线耳机通过移动终端获取所述目标语音数据。
S403,所述无线耳机当检测到所述第一语音数据的第一能量和所述第二语音数据的第二能量之间的第一差值小于第一预设差值时,比较所述第一能量与所述移动终端获取的所述目标语音数据的第三能量。
S404,所述无线耳机当检测到所述第一能量与所述第三能量之间的第二差值大于第二预设差值时,确定所述第一麦克风和所述第二麦克风处于堵孔状态。
S405,所述无线耳机将所述第一语音数据按照第一时间间隔分为第一数据片段组;
S406,所述无线耳机将所述第二语音数据按照第二时间间隔分为第二数据片段组;
S407,所述无线耳机根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据。
可以看出,本申请实施例中,无线耳机首先当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据,其次,根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,最后,将所述第一语音数据和所述第二语音数据生成所述目标语音数据。可见,无线耳机在接收到目标语音数据的获取指令,并检测到第一无线耳机的第一麦克风和第二无线耳机的第二麦克风均处于堵孔状态时,将所述第一无线耳机在堵孔状态下获取的第一语音数据和第二无线耳机在堵孔状态下获取的第二语音数据组合为目标语音数据,有利于提升语音数据获取的完整性,而且,并行执行第一操作和第二操作,提升了数据处理的速度。
此外,无线耳机在检测到第一语音数据的第一能量和第二语音数据的第二能量之间的差值较小时,表明第一麦克风和第二麦克风的状态相同,当检测到第一能量与第三能量之间的差值较大时,表明第一麦克风处于堵孔状态,同时也表明第二麦克风也处于堵孔状态,通过多个差值比较来确定第一麦克风和第二麦克风的堵孔状态,有利于提升堵孔检测的准确性。
此外,无线耳机分别将第一语音数据和第二语音数据分为第一数据片段和第二数据片段组,并根据第一数据片段组和第二数据片段组合成目标语音数据,算法简单,有利于提升目标语音数据的完整性和便捷性。
与上述图2、图3、图4所示的实施例一致的,请参阅图5,图5是本申请实施例提供的一种无线耳机500的结构示意图,如图所示,该无线耳机包括第一无线耳机和第二无线耳机,所述第一无线耳机包括第一麦克风,所述第二无线耳机包括第二麦克风,该无线耳机包括处理器501、存储器502、通信接口503以及一个或多个程序504,其中,上述一个或多个程序504被存储在上述存储器502中,并且被配置由上述处理器501执行,上述程序包括用于执行以下步骤的指令;
当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据;
根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态;
将所述第一语音数据和所述第二语音数据生成所述目标语音数据。
可以看出,本申请实施例中,无线耳机首先当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据,其次,根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,最后,将所述第一语音数据和所述第二语音数据生成所述目标语音数据。可见,无线耳机在接收到目标语音数据的获取指令,并检测到第一无线耳机的第一麦克风和第二无线耳机的第二麦克风均处于堵孔状态时,将所述第一无线耳机在堵孔状态下获取的第一语音数据和第二无线耳机在堵孔状态下获取的第二语音数据组合为目标语音数据,有利于提升语音数据获取的完整性,而且,并行执行第一操作和第二操作,提升了数据处理的速度。
在一个可能的示例中,在所述将所述第一语音数据和所述第二语音数据生成所述目标语音数据方面,所述程序504中的指令具体用于执行以下操作:将所述第一语音数据按照第一时间间隔分为第一数据片段组;以及用于将所述第二语音数据按照第二时间间隔分为第二数据片段组;以及用于根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据。
在这个可能的示例中,在所述根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据方面,所述程序504中的指令具体用于执行以下操作:确定所述第一数据片段组中频率小于预设频率阈值的至少一个第一数据片段;以及用于获取所述第二数据片段组中与所述至少一个第一数据片段的时间参数对应的至少一个第二数据片段;以及用于将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据。
在这个可能的示例中,在所述将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据方面,所述程序504中的指令具体用于执行以下操作:将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段按照获取时的时间标识组合为参考语音数据;以及用于当检测到所述参考语音数据中存在数据缺失片段时,根据数据缺失片段的数据量确定预设关键词集合中的关键词;以及用于将所述关键词对应的语音数据添加至所述数据缺失片段中,合成所述目标语音数据。
在一个可能的示例中,在所述根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态方面,所述程序504中的指令具体用于执行以下操作:确定所述第一语音数据中音量小于音量阈值的第一数据量,以及所述第二语音数据中音量小于所述音量阈值的第二数据量;以及用于当检测到所述第一数据量在所述第一语音数据中的数据量占比大于预设占比阈值时,确定所述第一麦克风处于所述堵孔状态;以及用于当检测到所述第二数据量在所述第二语音数据中的数据量占比大于所述预设占比阈值时,确定所述第二麦克风处于所述堵孔状态。
在一个可能的示例中,所述无线耳机通信连接移动终端,上述程序还包括用于执行以下步骤的指令:通过移动终端获取所述目标语音数据;
在所述根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态方面,所述程序504中的指令具体用于执行以下操作:当检测到所述第一语音数据的第一能量和所述第二语音数据的第二能量之间的第一差值小于第一预设差值时,比较所述第一能量与所述移动终端获取的所述目标语音数据的第三能量;以及用于当检测到所述第一能量与所述第三能量之间的第二差值大于第二预设差值时,确定所述第一麦克风和所述第二麦克风处于所述堵孔状态。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,无线耳机为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对无线耳机进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
图6是本申请实施例中所涉及的语音数据处理装置600的功能单元组成框图。该语音数据处理装置600应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,所述第一无线耳机包括第一麦克风,所述第二无线耳机包括第二麦克风,该语音数据处理装置600包括操作单元601、检测单元602和处理单元603,其中,
所述操作单元601,用于所述当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据;
所述检测单元602,用于根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态;
所述处理单元603,用于将所述第一语音数据和所述第二语音数据生成所述目标语音数据。
可以看出,本申请实施例中,无线耳机首先当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据,其次,根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,最后,将所述第一语音数据和所述第二语音数据生成所述目标语音数据。可见,无线耳机在接收到目标语音数据的获取指令,并检测到第一无线耳机的第一麦克风和第二无线耳机的第二麦克风均处于堵孔状态时,将所述第一无线耳机在堵孔状态下获取的第一语音数据和第二无线耳机在堵孔状态下获取的第二语音数据组合为目标语音数据,有利于提升语音数据获取的完整性,而且,并行执行第一操作和第二操作,提升了数据处理的速度。
在一个可能的示例中,在所述将所述第一语音数据和所述第二语音数据生成所述目标语音数据方面,所述处理单元603具体用于:将所述第一语音数据按照第一时间间隔分为第一数据片段组;以及用于将所述第二语音数据按照第二时间间隔分为第二数据片段组;以及用于根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据。
在这个可能的示例中,在所述根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据方面,所述处理单元603具体用于:确定所述第一数据片段组中频率小于预设频率阈值的至少一个第一数据片段;以及用于获取所述第二数据片段组中与所述至少一个第一数据片段的时间参数对应的至少一个第二数据片段;以及用于将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据。
在这个可能的示例中,在所述将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据方面,所述处理单元603具体用于:将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段按照获取时的时间标识组合为参考语音数据;以及用于当检测到所述参考语音数据中存在数据缺失片段时,根据数据缺失片段的数据量确定预设关键词集合中的关键词;以及用于将所述关键词对应的语音数据添加至所述数据缺失片段中,合成所述目标语音数据。
在一个可能的示例中,在所述根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态方面,所述检测单元602具体用于:确定所述第一语音数据中音量小于音量阈值的第一数据量,以及所述第二语音数据中音量小于所述音量阈值的第二数据量;以及用于当检测到所述第一数据量在所述第一语音数据中的数据量占比大于预设占比阈值时,确定所述第一麦克风处于所述堵孔状态;以及用于当检测到所述第二数据量在所述第二语音数据中的数据量占比大于所述预设占比阈值时,确定所述第二麦克风处于所述堵孔状态。
在一个可能的示例中,所述无线耳机通信连接移动终端,所述操作单元601还用于:通过移动终端获取所述目标语音数据;
在所述根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态方面,所述检测单元602具体用于:当检测到所述第一语音数据的第一能量和所述第二语音数据的第二能量之间的第一差值小于第一预设差值时,比较所述第一能量与所述移动终端获取的所述目标语音数据的第三能量;以及用于当检测到所述第一能量与所述第三能量之间的第二差值大于第二预设差值时,确定所述第一麦克风和所述第二麦克风处于所述堵孔状态。
其中,操作单元601可以是麦克风或者收发器,检测单元602和处理单元603可以是处理器。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任何一种语音数据处理方法的部分或全部步骤,上述计算机包括移动终端。
本申请实施例还提供一种计算机程序产品,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序可操作来使计算机执行如上述方法实施例中记载的任何一种语音数据处理方法的部分或全部步骤,上述计算机包括移动终端。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (8)

1.一种语音数据处理方法,其特征在于,应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,所述第一无线耳机包括第一麦克风,所述第二无线耳机包括第二麦克风,所述方法包括:
当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据;
根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,其中,具体包括:确定所述第一语音数据中音量小于音量阈值的第一数据量,以及所述第二语音数据中音量小于所述音量阈值的第二数据量;当检测到所述第一数据量在所述第一语音数据中的数据量占比大于预设占比阈值时,确定所述第一麦克风处于所述堵孔状态;当检测到所述第二数据量在所述第二语音数据中的数据量占比大于所述预设占比阈值时,确定所述第二麦克风处于所述堵孔状态;
将所述第一语音数据和所述第二语音数据生成所述目标语音数据;
所述无线耳机通信连接移动终端,所述方法还包括:
通过移动终端获取所述目标语音数据;
所述根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,包括:
当检测到所述第一语音数据的第一能量和所述第二语音数据的第二能量之间的第一差值小于第一预设差值时,比较所述第一能量与所述移动终端获取的所述目标语音数据的第三能量;
当检测到所述第一能量与所述第三能量之间的第二差值大于第二预设差值时,确定所述第一麦克风和所述第二麦克风处于所述堵孔状态。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一语音数据和所述第二语音数据生成所述目标语音数据,包括:
将所述第一语音数据按照第一时间间隔分为第一数据片段组;
将所述第二语音数据按照第二时间间隔分为第二数据片段组;
根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据,包括:
确定所述第一数据片段组中频率小于预设频率阈值的至少一个第一数据片段;
获取所述第二数据片段组中与所述至少一个第一数据片段的时间参数对应的至少一个第二数据片段;
将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据。
4.根据权利要求3所述的方法,其特征在于,所述将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段合成所述目标语音数据,包括:
将所述第一数据片段组中除所述至少一个第一数据片段之外的数据片段与所述至少一个第二数据片段按照获取时的时间标识组合为参考语音数据;
当检测到所述参考语音数据中存在数据缺失片段时,根据数据缺失片段的数据量确定预设关键词集合中的关键词;
将所述关键词对应的语音数据添加至所述数据缺失片段中,合成所述目标语音数据。
5.一种语音数据处理装置,其特征在于,应用于无线耳机,所述无线耳机包括第一无线耳机和第二无线耳机,所述第一无线耳机包括第一麦克风,所述第二无线耳机包括第二麦克风,所述语音数据处理装置包括操作单元、检测单元和处理单元,其中:
所述操作单元,用于当接收到目标语音数据的获取指令时,并行执行第一操作和第二操作,所述第一操作为通过所述第一麦克风获取第一语音数据,所述第二操作为通过所述第二麦克风获取第二语音数据;
所述检测单元,用于根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态;其中,所述检测单元具体用于:确定所述第一语音数据中音量小于音量阈值的第一数据量,以及所述第二语音数据中音量小于所述音量阈值的第二数据量;当检测到所述第一数据量在所述第一语音数据中的数据量占比大于预设占比阈值时,确定所述第一麦克风处于所述堵孔状态;当检测到所述第二数据量在所述第二语音数据中的数据量占比大于所述预设占比阈值时,确定所述第二麦克风处于所述堵孔状态;
所述处理单元,用于将所述第一语音数据和所述第二语音数据生成所述目标语音数据;
所述无线耳机通信连接移动终端,所述操作单元还用于:
通过移动终端获取所述目标语音数据;
所述检测单元根据所述第一语音数据和所述第二语音数据分别检测到所述第一麦克风和所述第二麦克风处于堵孔状态,包括:
当检测到所述第一语音数据的第一能量和所述第二语音数据的第二能量之间的第一差值小于第一预设差值时,比较所述第一能量与所述移动终端获取的所述目标语音数据的第三能量;
当检测到所述第一能量与所述第三能量之间的第二差值大于第二预设差值时,确定所述第一麦克风和所述第二麦克风处于所述堵孔状态。
6.根据权利要求5所述的装置,其特征在于,在所述将所述第一语音数据和所述第二语音数据生成所述目标语音数据方面,所述处理单元具体用于将所述第一语音数据按照第一时间间隔分为多个第一数据片段组;以及用于将所述第二语音数据按照第二时间间隔分为多个第二数据片段组;以及用于根据所述第一数据片段组和所述第二数据片段组合成所述目标语音数据。
7.一种无线耳机,其特征在于,包括:处理器,存储器,以及一个或多个程序;所述一个或多个程序被存储在所述存储器中,并且被配置成由所述处理器执行,所述程序包括用于执行如权利要求1-4任一项所描述的方法中的步骤的指令。
8.一种计算机可读存储介质,其特征在于,存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-4任一项所述的方法。
CN202011251371.9A 2018-07-26 2018-07-26 语音数据处理方法及相关产品 Active CN112333608B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011251371.9A CN112333608B (zh) 2018-07-26 2018-07-26 语音数据处理方法及相关产品

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201810841700.1A CN109121042B (zh) 2018-07-26 2018-07-26 语音数据处理方法及相关产品
CN202011251371.9A CN112333608B (zh) 2018-07-26 2018-07-26 语音数据处理方法及相关产品

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201810841700.1A Division CN109121042B (zh) 2018-07-26 2018-07-26 语音数据处理方法及相关产品

Publications (2)

Publication Number Publication Date
CN112333608A CN112333608A (zh) 2021-02-05
CN112333608B true CN112333608B (zh) 2022-03-22

Family

ID=64863419

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202011251371.9A Active CN112333608B (zh) 2018-07-26 2018-07-26 语音数据处理方法及相关产品
CN201810841700.1A Active CN109121042B (zh) 2018-07-26 2018-07-26 语音数据处理方法及相关产品

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201810841700.1A Active CN109121042B (zh) 2018-07-26 2018-07-26 语音数据处理方法及相关产品

Country Status (4)

Country Link
US (1) US20210142795A1 (zh)
EP (1) EP3820162A4 (zh)
CN (2) CN112333608B (zh)
WO (1) WO2020019844A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112333608B (zh) * 2018-07-26 2022-03-22 Oppo广东移动通信有限公司 语音数据处理方法及相关产品
CN111294689A (zh) * 2020-03-03 2020-06-16 珠海格力电器股份有限公司 语音信息的采集方法及装置、无线耳机装置
CN113746976B (zh) * 2021-07-23 2023-03-28 荣耀终端有限公司 音频模块检测方法、电子设备及计算机存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106228994A (zh) * 2016-07-26 2016-12-14 广州酷狗计算机科技有限公司 一种检测音质的方法和装置
CN106385489A (zh) * 2016-08-31 2017-02-08 维沃移动通信有限公司 一种确定上行语音数据的方法及移动终端
CN106453970A (zh) * 2016-09-05 2017-02-22 广东欧珀移动通信有限公司 语音接收质量检测方法、装置和终端设备
CN106911996A (zh) * 2017-03-03 2017-06-30 广东欧珀移动通信有限公司 麦克风状态的检测方法、装置及终端设备
WO2017185342A1 (zh) * 2016-04-29 2017-11-02 华为技术有限公司 一种语音输入异常的确定方法、装置、终端以及存储介质
CN107659708A (zh) * 2017-08-03 2018-02-02 深圳市金立通信设备有限公司 信息提示方法及终端
CN108076226A (zh) * 2017-12-22 2018-05-25 广东欧珀移动通信有限公司 一种通话质量调整的方法、移动终端及存储介质

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101410900A (zh) * 2006-03-24 2009-04-15 皇家飞利浦电子股份有限公司 用于可佩戴装置的数据处理
US8374362B2 (en) * 2008-01-31 2013-02-12 Qualcomm Incorporated Signaling microphone covering to the user
CN102324229B (zh) * 2011-09-08 2012-11-28 中国科学院自动化研究所 语音输入设备使用异常的检测方法及系统
US20140044286A1 (en) * 2012-08-10 2014-02-13 Motorola Mobility Llc Dynamic speaker selection for mobile computing devices
WO2014037766A1 (en) * 2012-09-10 2014-03-13 Nokia Corporation Detection of a microphone impairment
US9351068B2 (en) * 2013-06-14 2016-05-24 Blackberry Limited Obstructed port audio signal alteration
KR102160473B1 (ko) * 2014-05-07 2020-09-28 삼성전자주식회사 볼륨을 제어하는 방법 및 전자 장치
EP3007170A1 (en) * 2014-10-08 2016-04-13 GN Netcom A/S Robust noise cancellation using uncalibrated microphones
US9769563B2 (en) * 2015-07-22 2017-09-19 Harman International Industries, Incorporated Audio enhancement via opportunistic use of microphones
CN105554202A (zh) * 2015-09-28 2016-05-04 宇龙计算机通信科技(深圳)有限公司 一种麦克风的控制方法和装置
EP3151582B1 (en) * 2015-09-30 2020-08-12 Apple Inc. Earbud case with charging system
CN105845138A (zh) * 2016-03-25 2016-08-10 乐视控股(北京)有限公司 语音信号处理方法及装置
US20180124534A1 (en) * 2016-11-03 2018-05-03 Robert Bosch Gmbh Method for testing signal-to-noise ratio using a film frame
US10229565B2 (en) * 2016-11-30 2019-03-12 Samsung Electronics Co., Ltd. Method for producing haptic signal and electronic device supporting the same
CN206713020U (zh) * 2017-02-21 2017-12-05 佳禾智能科技股份有限公司 一种分离式无线波束形成耳机
CN106953961A (zh) * 2017-04-28 2017-07-14 苏州科技大学 一种双麦克风的手机语音应用装置及其应用方法
CN108322845B (zh) * 2018-04-27 2020-05-15 歌尔股份有限公司 一种降噪耳机
CN112333608B (zh) * 2018-07-26 2022-03-22 Oppo广东移动通信有限公司 语音数据处理方法及相关产品
CN111343558B (zh) * 2018-07-26 2022-02-15 Oppo广东移动通信有限公司 麦克风堵孔检测方法及相关产品

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017185342A1 (zh) * 2016-04-29 2017-11-02 华为技术有限公司 一种语音输入异常的确定方法、装置、终端以及存储介质
CN106228994A (zh) * 2016-07-26 2016-12-14 广州酷狗计算机科技有限公司 一种检测音质的方法和装置
CN106385489A (zh) * 2016-08-31 2017-02-08 维沃移动通信有限公司 一种确定上行语音数据的方法及移动终端
CN106453970A (zh) * 2016-09-05 2017-02-22 广东欧珀移动通信有限公司 语音接收质量检测方法、装置和终端设备
CN106911996A (zh) * 2017-03-03 2017-06-30 广东欧珀移动通信有限公司 麦克风状态的检测方法、装置及终端设备
CN107659708A (zh) * 2017-08-03 2018-02-02 深圳市金立通信设备有限公司 信息提示方法及终端
CN108076226A (zh) * 2017-12-22 2018-05-25 广东欧珀移动通信有限公司 一种通话质量调整的方法、移动终端及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
球形麦克风阵列时频故障信号定位算法研究;邓昌建;《电子测量与仪器学报》;20170228;第31卷(第2期);第309-314页 *

Also Published As

Publication number Publication date
EP3820162A1 (en) 2021-05-12
CN112333608A (zh) 2021-02-05
CN109121042A (zh) 2019-01-01
CN109121042B (zh) 2020-12-08
US20210142795A1 (en) 2021-05-13
EP3820162A4 (en) 2021-08-11
WO2020019844A1 (zh) 2020-01-30

Similar Documents

Publication Publication Date Title
CN112333608B (zh) 语音数据处理方法及相关产品
CN112584293B (zh) 麦克风堵孔检测方法及相关产品
CN111343558B (zh) 麦克风堵孔检测方法及相关产品
CN112203206B (zh) 麦克风堵孔检测方法及相关产品
CN108370290A (zh) 同步块的指示及确定方法、装置、基站、用户设备
EP3820168B1 (en) Microphone hole blockage detection method and related product
CN108777827B (zh) 无线耳机、音量调整方法及相关产品
CN108810860B (zh) 一种音频传输方法、终端设备及主耳机
CN106254993A (zh) 一种耳机左右声道自适应控制方法及装置
CN109273017A (zh) 编码控制方法、装置以及电子设备
CN108766453A (zh) 语音降噪方法、装置、可读存储介质及移动终端
CN110505547B (zh) 一种耳机佩戴状态检测方法及耳机
CN111447540A (zh) 麦克风堵孔检测方法及相关产品
CN109121046A (zh) 堵孔处理方法及相关产品
CN109121059A (zh) 扬声器堵孔检测方法及相关产品
CN109065017B (zh) 语音数据生成方法及相关装置
CN111161759B (zh) 音频质量评价方法、装置、电子设备及计算机存储介质
CN109040937B (zh) 麦克风堵塞提醒方法及相关装置
CN108650595B (zh) 堵孔处理方法、装置、电子设备及计算机可读存储介质
CN108965562B (zh) 语音数据生成方法及相关装置
CN107957899B (zh) 录屏方法、装置、计算机可读存储介质和一种移动终端
CN109151699B (zh) 麦克风堵孔检测方法及相关产品
CN114501286A (zh) 蓝牙连接测试方法及装置
CN109121060B (zh) 麦克风堵孔检测方法及相关产品
CN113517000A (zh) 回声消除的测试方法、终端以及存储装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant