CN110400569B - 蓝牙音频修复方法及终端设备 - Google Patents
蓝牙音频修复方法及终端设备 Download PDFInfo
- Publication number
- CN110400569B CN110400569B CN201810371856.8A CN201810371856A CN110400569B CN 110400569 B CN110400569 B CN 110400569B CN 201810371856 A CN201810371856 A CN 201810371856A CN 110400569 B CN110400569 B CN 110400569B
- Authority
- CN
- China
- Prior art keywords
- bluetooth audio
- voice signal
- packet loss
- voice
- caching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 16
- 238000005516 engineering process Methods 0.000 claims abstract description 15
- 238000004590 computer program Methods 0.000 claims description 19
- 230000008439 repair process Effects 0.000 claims description 17
- 238000001514 detection method Methods 0.000 claims description 8
- 238000005067 remediation Methods 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims description 3
- 230000005540 biological transmission Effects 0.000 abstract description 16
- 230000001502 supplementing effect Effects 0.000 abstract description 8
- 230000006870 function Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 3
- 230000003139 buffering effect Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 238000003786 synthesis reaction Methods 0.000 description 3
- 230000002238 attenuated effect Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000002360 explosive Substances 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/0017—Lossless audio signal coding; Perfect reconstruction of coded audio signal by transmission of coding error
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明适用于音频修复技术领域,提供了一种蓝牙音频修复方法及终端设备。所述方法包括:检测接收到的蓝牙音频是否发生丢包;若蓝牙音频发生丢包,则检测蓝牙音频的丢包数量;若丢包数量大于一个,则获取蓝牙音频中丢包前后的解码参数信息和预存的蓝牙音频的第一语音信号;根据重构技术对解码参数信息和第一语音信号进行合成形成目标语音信号;将目标语音信号插入到蓝牙音频的丢包处。采用上述方案后,较充分的利用两种方式的优点,达到很好的补包效果,使得接收方准确的了解发送端的原信息,提高语音信息的传输准确性。
Description
技术领域
本发明属于音频修复技术领域,尤其涉及一种蓝牙音频修复方法及终端设备。
背景技术
蓝牙的重要应用是传输语音信息,随着蓝牙技术的普及,现在很多人都习惯了用蓝牙来听音乐,蓝牙耳机、蓝牙音箱在市面上的销售也比较火爆。
语音信息在蓝牙系统中是以数据包为单位传输的,每个数据包中又有数据信息、地址信息、流控信息等,语音主要以无线传输为主,这就是说,数据都不是以线性连续传输的,中间总是有间隔,因此数据包的传输,不可能百分之百的完成,因为一些不可控的因素,总会有一定的损失,损失达到一定程度,就会影响到接收方的接收,使得接收方无法准确的了解发送端的原信息,影响语音信息的传输准确性。
发明内容
有鉴于此,本发明实施例提供了一种蓝牙音频修复方法及终端设备,以解决现有技术中接收方无法准确的了解发送端的原信息,影响语音信息的传输准确性的问题。
本发明实施例的第一方面提供了一种蓝牙音频修复方法,包括:
检测接收到的蓝牙音频是否发生丢包;
若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量;
若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号;
根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号;
将所述目标语音信号插入到所述蓝牙音频的丢包处。
作为进一步的技术方案,所述根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号包括:
根据所述解码参数信息确定语音峰值和语音谷值;
根据重构技术对所述语音峰值、所述语音谷值和所述第一语音信号进行合成形成目标语音信号。
作为进一步的技术方案,所述方法还包括:
若所述丢包数量为一个,则获得所述蓝牙音频的基音周期;
根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号;
将所述第二语音信号插入到所述蓝牙音频的丢包处。
作为进一步的技术方案,所述获得所述蓝牙音频的基音周期包括:
获取预存的所述蓝牙音频中丢包前预设数量的语音信号;
对获取的语音信号进行第一次缓存;
根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存;
根据预设的峰值阈值和/或谷值阈值判断第二次缓存后的查找结果是否合格;
若第二次缓存后的查找结果合格,则将第二次缓存后的查找结果存储为所述基音周期。
作为进一步的技术方案,所述方法还包括:
若第二次缓存后的查找结果不合格,则将第二次缓存后的查找结果作为新的第一次缓存后的语音信号,重复执行所述根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存的步骤。
作为进一步的技术方案,所述根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号包括:
获取预存的所述蓝牙音频的写地址;
根据所述基音周期和所述写地址确定提取语音信号的起始地址;
根据所述起始地址从预存的所述蓝牙音频中提取所述第二语音信号。
本发明实施例的第二方面提供了一种蓝牙音频修复装置,包括:
丢包检测模块,用于检测接收到的蓝牙音频是否发生丢包;
丢包数量检测模块,用于若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量;
第一语音信号获取模块,用于若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号;
目标语音信号重构模块,用于根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号;
目标语音信号插入模块,用于将所述目标语音信号插入到所述蓝牙音频的丢包处。
作为进一步的技术方案,所述装置还包括:
基音周期获得模块,用于若所述丢包数量为一个,则获得所述蓝牙音频的基音周期;
第二语音信号提取模块,用于根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号;
第二语音信号插入模块,用于将所述第二语音信号插入到所述蓝牙音频的丢包处。
本发明实施例的第三方面提供了一种蓝牙音频修复终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面所述的方法。
本发明实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如上述第一方面所述的方法。
本发明实施例与现有技术相比存在的有益效果是:采用上述方案后,当出现连续多个丢包情况时,巧妙地综合运用基于插值和基于重构的方法估算出丢失的语音包,并将丢失的语音包插入到蓝牙音频的丢包处,可以有效地降低插值的实现难度和重构的计算量,较充分的利用两种方式的优点,达到很好的补包效果,使得接收方准确的了解发送端的原信息,提高语音信息的传输准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种蓝牙音频修复方法的步骤流程图;
图2是本发明实施例提供的一种蓝牙音频修复装置的结构示意图;
图3是本发明另一实施例提供的一种蓝牙音频修复装置的结构示意图;
图4是本发明实施例提供的蓝牙音频修复终端设备的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
如图1所示,为本发明实施例提供的一种蓝牙音频修复方法的步骤流程图,包括:
步骤S101,检测接收到的蓝牙音频是否发生丢包。
具体的,没有语音数据接收的时候就是丢包,丢包检测一直在进行,从开始接收蓝牙音频时就在检测,蓝牙音频发生丢包时,预存的丢包标志位会被拉高,丢包标志位跟传输的蓝牙音频包同步进行传输,优选的,平常的丢包标志位设置成0,当出现丢包时,丢包标志位变成1,当蓝牙音频没有丢包时,直接输出接收到的蓝牙音频到接收端。
步骤S102,若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量。
具体的,当检测到丢包标志位被拉高后,证明蓝牙音频发生了丢包,如果当前已完成一个语音包的补偿,而丢包标志位没有被拉低,说明当前丢失的语音包不止一个。
步骤S103,若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号。
具体的,补包数据来源于合成的语音信号,合成方式采用基于重构的技术进行语音信号合成,蓝牙音频中丢包前后的解码参数信息为脉冲编码调制(Pulse CodeModulation,PCM)的数据,该解码参数信息用来预测丢失语音包的解码参数信息,所以依据PCM的解码参数信息以及蓝牙音频的第一语音信号,优选的,蓝牙音频的第一语音信号存储在基音缓冲器中,蓝牙语音编码采用PCM型的数据,或者连续可变斜率增量调制(Continuous Variable Slope Delta Modulation,CVSD),语音链路采用面向连接的同步链路(Synchronous Connection Oriented link,SCO)传输载运,本方案的基音周期缓冲器中存储的是CVSD数据。另外,还可以获取当前的基音周期,根据获取的当前的基音周期从预存的蓝牙音频中提取第一语音信号,再根据重构技术对解码参数信息和第一语音信号进行合成形成目标语音信号,蓝牙音频存储在基音缓冲器中,采用根据当前的基音周期获取第一语音信号,该种方法得到的第一语言信号为实时变化的,使得合成的目标语音信号更加准确。
步骤S104,根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号。
步骤S105,将所述目标语音信号插入到所述蓝牙音频的丢包处。
具体的,合成形成目标语音信号后作为述蓝牙音频补包的输入值,插入到蓝牙音频的丢包处,并且在丢包补偿的过程中,基音缓冲器依然会不断被当前用于补包的合成语音信号更新,更新基音缓冲器,能够保证基音缓冲器中始终是一段平滑且连续的语音信号,当丢包和接收正确包交替频繁发生时,这个连续性对语音质量是很重要的,提高了合成目标语音信号的准确性。
采用上述方案后,当出现连续多个丢包情况时,巧妙地综合运用基于插值和基于重构的方法估算出丢失的语音包,并将丢失的语音包插入到蓝牙音频的丢包处,可以有效地降低插值的实现难度和重构的计算量,较充分的利用两种方式的优点,达到很好的补包效果,使得接收方准确的了解发送端的原信息,提高语音信息的传输准确性。
此外,在一个具体事例中,所述根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号包括:
根据所述解码参数信息确定语音峰值和语音谷值;
根据重构技术对所述语音峰值、所述语音谷值和所述第一语音信号进行合成形成目标语音信号。
具体的,若丢包数量大于一个,根据当前解码参数信息估计出语音峰值和谷值,再根据当前取出的语音信号,将其与估计出的峰值与谷值叠加,再将语音信号以线性的方式执行衰减,如果一直丢包则语音信号会衰减成静音状态,如果这个过程中出现好的语音包,则进行合成形成目标语音信号。
此外,在一个具体事例中,所述方法还包括:
若所述丢包数量为一个,则获得所述蓝牙音频的基音周期。
根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号。
将所述第二语音信号插入到所述蓝牙音频的丢包处。
具体的,前向差错纠正在蓝牙系统中用于检测传输数据包中的错误或者错误传输,交织编码是在实际移动通信环境下改善移动信号衰落的一种通信技术,将造成数字信号传输的突发性差错,利用交织编码技术可离散并纠正这种突发性差错,改善移动通信的传输特性,这两种方式均可用于避免或减少丢包造成的损失,不支持丢包补偿。蓝牙传输的发送端可以支持自动重传技术,但是面向连接的同步链路传输不支持自动重传,所以蓝牙语音在采用面向连接的同步链路传输为载体时,发送端是不支持丢包补偿的,主要特征是它产生一个与丢失的传输相似的替代语音,这种方式是基于语音的短时语音相似性。语音信号具有短时平稳的特性,一般在较短的时间内是相对平稳的,优选的,时间选择为10-30ms,该时间为工作人员经过多次长时间的验证得出的,能保证单个语音信号丢失时补包的准确性。优选的,根据语音信号的短时相关性,如果发生单个语音包丢失的情况,最好的补偿就是使用没有衰减的上一个基音周期的信号,即节省了处理时间,提高了处理效率,还保障了补包的准确性。
此外,在一个具体事例中,所述获得所述蓝牙音频的基音周期包括:
获取预存的所述蓝牙音频中丢包前预设数量的语音信号。
对获取的语音信号进行第一次缓存。
根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存。
根据预设的峰值阈值和/或谷值阈值判断第二次缓存后的查找结果是否合格。
若第二次缓存后的查找结果合格,则将第二次缓存后的查找结果存储为所述基音周期。
具体的,对获取的语音信号进行第一次缓存,将语音信号放置到第一缓冲器中,根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存,将查找结果放置到第二缓冲器中,根据预设的峰值阈值和/或谷值阈值判断第二次缓存后的查找结果是否合格,峰值阈值和峰谷阈值可以根据实际情况自行设定,优选的,峰值阈值设置为语音信号中最大值的7/8,峰谷阈值设置为语音信号中最小值的7/8,语音信号为以0为中心对称的语音信号,所以可以根据峰值阈值判断第二次缓存后的查找结果是否合格,可以根据谷值阈值判断第二次缓存后的查找结果是否合格,还可以根据峰值阈值和谷值阈值共同判断第二次缓存后的查找结果是否合格,三种判断方式均可以选择,不必限定为一种判断方式,判断灵活。若第二次缓存后的查找结果合格,则将第二次缓存后的查找结果存储为基音周期,再根据得出的基音周期从基音缓冲器中取语音数据,即把这个基音周期当作起始地址,依次取出基音缓存器中的语音数据进行补包。
此外,在一个具体事例中,所述方法还包括:
若第二次缓存后的查找结果不合格,则将第二次缓存后的查找结果作为新的第一次缓存后的语音信号,重复执行所述根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存的步骤,直至查找结果合格为止。
另外,在进行二分法检索时,第一缓冲器中还会输入新的语音信号,当新的语音信号的峰值大于上次更新的第二缓冲器中的峰值时,继续重复执行所述根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存的步骤,直至查找结果合格为止。
另外,还可以进行四分法检索或八分法检索查询,这样得到的估计值会更加准确。
此外,在一个具体事例中,所述根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号包括:
获取预存的所述蓝牙音频的写地址。
根据所述基音周期和所述写地址确定提取语音信号的起始地址。
根据所述起始地址从预存的所述蓝牙音频中提取所述第二语音信号。
具体的,当单个语音信号发生丢失时,可以从基音缓冲器中根据当前基音周期直接提取第二语音信号来补偿丢失的语音信号,而基音缓冲器不会对输出第二语音信号产生任何时延,从基音缓冲器中提取数据的方式为假设当前估计得基音周期T,当前基音缓冲器中的写地址为Wr,那么当前补包提取的第二语音信号的起始地址为Wr-T或者FIFO_Size+Wr-T,如果当前写地址大于当前的基音周期,直接从Wr-T处开始提取数据,如果当前写地址小于当前的基音周期,则需要从FIFO_Size+Wr-T处提取数据。
此外,如果发生连续多个语音包丢失,单纯的重复前一个基音周期的语音数据会引起不自然的谐波声音(如蜂鸣声),这时需要使用更多的基音周期的信号(经过编解码滤波的信号)来合成丢包的信号可以大大减少这种谐波声音。
采用上述方案后,当丢包和接收正常包交替频繁发生时,这个连续性对语音质量是很重要的,其中语音的合成依赖于基于重构的错误隐藏算法,而是降低了其计算量,有达到较好的补包效果,本发明巧妙地综合运用基于插值和基于重构的错误隐藏方法,可以有效地降低插值的实现难度和重构的计算量,充分的利用两种方式的优点,降低其缺点,达到很好的补包效果。
如图2所示,为本发明实施例提供的一种蓝牙音频修复装置的结构示意图,包括:
丢包检测模块201,用于检测接收到的蓝牙音频是否发生丢包。
丢包数量检测模块202,用于若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量。
第一语音信号获取模块203,用于若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号;
目标语音信号重构模块204,用于根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号。
目标语音信号插入模块205,用于将所述目标语音信号插入到所述蓝牙音频的丢包处。
采用上述方案后,当出现连续多个丢包情况时,巧妙地综合运用基于插值和基于重构的方法估算出丢失的语音包,并将丢失的语音包插入到蓝牙音频的丢包处,可以有效地降低插值的实现难度和重构的计算量,较充分的利用两种方式的优点,达到很好的补包效果,使得接收方准确的了解发送端的原信息,提高语音信息的传输准确性。
如图3所示,为本发明实施例提供的一种蓝牙音频修复装置的结构示意图,包括:
丢包检测模块301,用于检测接收到的蓝牙音频是否发生丢包。
丢包数量检测模块302,用于若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量。
第一语音信号获取模块303,用于若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号;
目标语音信号重构模块304,用于根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号。
目标语音信号插入模块305,用于将所述目标语音信号插入到所述蓝牙音频的丢包处。
此外,在一个具体事例中,所述目标语音信号重构模块304还用于:
根据所述解码参数信息确定语音峰值和语音谷值;
根据重构技术对所述语音峰值、所述语音谷值和所述第一语音信号进行合成形成目标语音信号。
此外,在一个具体事例中,所述装置还包括:
基音周期获得模块306,用于若所述丢包数量为一个,则获得所述蓝牙音频的基音周期。
第二语音信号提取模块307,用于根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号。
第二语音信号插入模块308,用于将所述第二语音信号插入到所述蓝牙音频的丢包处。
此外,在一个具体事例中,所述基音周期获得模块306还用于:
获取预存的所述蓝牙音频中丢包前预设数量的语音信号;
对获取的语音信号进行第一次缓存。
根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存。
根据预设的峰值阈值和/或谷值阈值判断第二次缓存后的查找结果是否合格。
若第二次缓存后的查找结果合格,则将第二次缓存后的查找结果存储为所述基音周期。
此外,在一个具体事例中,所述装置还包括:
新第一缓存信号获得模块309,用于若第二次缓存后的查找结果不合格,则将第二次缓存后的查找结果作为新的第一次缓存后的语音信号,重复执行所述根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存的步骤。
此外,在一个具体事例中,所述第二语音信号提取模块307还用于:
获取预存的所述蓝牙音频的写地址。
根据所述基音周期和所述写地址确定提取语音信号的起始地址。
根据所述起始地址从预存的所述蓝牙音频中提取所述第二语音信号。
采用上述方案后,当丢包和接收正常包交替频繁发生时,这个连续性对语音质量是很重要的,其中语音的合成依赖于基于重构的错误隐藏算法,而是降低了其计算量,有达到较好的补包效果,本发明巧妙地综合运用基于插值和基于重构的错误隐藏方法,可以有效地降低插值的实现难度和重构的计算量,充分的利用两种方式的优点,降低其缺点,达到很好的补包效果。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
图4是本发明实施例提供的一种蓝牙音频修复终端设备的示意图,该实施例的蓝牙音频修复终端设备4包括:处理器40、存储器41以及存储在所述存储器41中并可在所述处理器40上运行的计算机程序42,例如蓝牙音频修复程序。所述处理器40执行所述计算机程序42时实现上述各个蓝牙音频修复方法实施例中的步骤,例如图1所示的步骤101至105。或者,所述处理器40执行所述计算机程序42时实现上述各装置实施例中各模块/单元的功能,例如图2所示模块201至205的功能。
示例性的,所述计算机程序42可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器41中,并由所述处理器40执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序42在所述蓝牙音频修复终端设备4中的执行过程。例如,所述计算机程序42可以被分割成同步模块、汇总模块、获取模块、返回模块(虚拟装置中的模块),各模块具体功能如下:
检测接收到的蓝牙音频是否发生丢包。
若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量。
若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号。
根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号。
将所述目标语音信号插入到所述蓝牙音频的丢包处。
根据所述解码参数信息确定语音峰值和语音谷值。
根据重构技术对所述语音峰值、所述语音谷值和所述第一语音信号进行合成形成目标语音信号。
若所述丢包数量为一个,则获得所述蓝牙音频的基音周期;
根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号。
将所述第二语音信号插入到所述蓝牙音频的丢包处。
获取预存的所述蓝牙音频中丢包前预设数量的语音信号。
对获取的语音信号进行第一次缓存。
根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存。
根据预设的峰值阈值和/或谷值阈值判断第二次缓存后的查找结果是否合格。
若第二次缓存后的查找结果合格,则将第二次缓存后的查找结果存储为所述基音周期。
若第二次缓存后的查找结果不合格,则将第二次缓存后的查找结果作为新的第一次缓存后的语音信号,重复执行所述根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存的步骤。
获取预存的所述蓝牙音频的写地址。
根据所述基音周期和所述写地址确定提取语音信号的起始地址。
根据所述起始地址从预存的所述蓝牙音频中提取所述第二语音信号。
所述蓝牙音频修复终端设备4可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述蓝牙音频修复终端设备可包括,但不仅限于,处理器40、存储器41。本领域技术人员可以理解,图4仅仅是蓝牙音频修复终端设备4的示例,并不构成对蓝牙音频修复终端设备4的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述蓝牙音频修复终端设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器40可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器41可以是所述蓝牙音频修复终端设备4的内部存储单元,例如蓝牙音频修复终端设备4的硬盘或内存。所述存储器41也可以是所述蓝牙音频修复终端设备4的外部存储设备,例如所述蓝牙音频修复终端设备4上配备的插接式硬盘,智能存储卡(SmartMedia Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器41还可以既包括所述蓝牙音频修复终端设备4的内部存储单元也包括外部存储设备。所述存储器41用于存储所述计算机程序以及所述蓝牙音频修复终端设备所需的其他程序和数据。所述存储器41还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置/终端设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (7)
1.一种蓝牙音频修复方法,其特征在于,包括:
检测接收到的蓝牙音频是否发生丢包;
若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量;
若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号;
根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号;
将所述目标语音信号插入到所述蓝牙音频的丢包处;
若所述丢包数量为一个,则获得所述蓝牙音频的基音周期,包括:
获取预存的所述蓝牙音频中丢包前预设数量的语音信号;
对获取的语音信号进行第一次缓存;
根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存;
根据预设的峰值阈值和/或谷值阈值判断第二次缓存后的查找结果是否合格;
若第二次缓存后的查找结果合格,则将第二次缓存后的查找结果存储为所述基音周期;
根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号;
将所述第二语音信号插入到所述蓝牙音频的丢包处。
2.如权利要求1所述的蓝牙音频修复方法,其特征在于,所述根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号包括:
根据所述解码参数信息确定语音峰值和语音谷值;
根据重构技术对所述语音峰值、所述语音谷值和所述第一语音信号进行合成形成目标语音信号。
3.如权利要求1所述的蓝牙音频修复方法,其特征在于,还包括:
若第二次缓存后的查找结果不合格,则将第二次缓存后的查找结果作为新的第一次缓存后的语音信号,重复执行所述根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存的步骤。
4.如权利要求1所述的蓝牙音频修复方法,其特征在于,所述根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号包括:
获取预存的所述蓝牙音频的写地址;
根据所述基音周期和所述写地址确定提取语音信号的起始地址;
根据所述起始地址从预存的所述蓝牙音频中提取所述第二语音信号。
5.一种蓝牙音频修复装置,其特征在于,包括:
丢包检测模块,用于检测接收到的蓝牙音频是否发生丢包;
丢包数量检测模块,用于若所述蓝牙音频发生丢包,则检测所述蓝牙音频的丢包数量;
第一语音信号获取模块,用于若所述丢包数量大于一个,则获取所述蓝牙音频中丢包前后的解码参数信息和预存的所述蓝牙音频的第一语音信号;
目标语音信号重构模块,用于根据重构技术对所述解码参数信息和所述第一语音信号进行合成形成目标语音信号;
目标语音信号插入模块,用于将所述目标语音信号插入到所述蓝牙音频的丢包处;
基音周期获得模块,用于若所述丢包数量为一个,则获得所述蓝牙音频的基音周期,包括:
获取预存的所述蓝牙音频中丢包前预设数量的语音信号;
对获取的语音信号进行第一次缓存;
根据二分法检索查找第一次缓存后的语音信号的峰值和谷值,对查找结果进行第二次缓存;
根据预设的峰值阈值和/或谷值阈值判断第二次缓存后的查找结果是否合格;
若第二次缓存后的查找结果合格,则将第二次缓存后的查找结果存储为所述基音周期;
第二语音信号提取模块,用于根据所述基音周期从预存的所述蓝牙音频中提取第二语音信号;
第二语音信号插入模块,用于将所述第二语音信号插入到所述蓝牙音频的丢包处。
6.一种蓝牙音频修复终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述方法的步骤。
7.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810371856.8A CN110400569B (zh) | 2018-04-24 | 2018-04-24 | 蓝牙音频修复方法及终端设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810371856.8A CN110400569B (zh) | 2018-04-24 | 2018-04-24 | 蓝牙音频修复方法及终端设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110400569A CN110400569A (zh) | 2019-11-01 |
CN110400569B true CN110400569B (zh) | 2022-01-11 |
Family
ID=68320237
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810371856.8A Active CN110400569B (zh) | 2018-04-24 | 2018-04-24 | 蓝牙音频修复方法及终端设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110400569B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111883170B (zh) * | 2020-04-08 | 2023-09-08 | 珠海市杰理科技股份有限公司 | 语音信号的处理方法及系统、音频处理芯片、电子设备 |
CN111883171B (zh) * | 2020-04-08 | 2023-09-22 | 珠海市杰理科技股份有限公司 | 音频信号的处理方法及系统、音频处理芯片、蓝牙设备 |
CN117498892B (zh) * | 2024-01-02 | 2024-05-03 | 深圳旷世科技有限公司 | 基于uwb的音频传输方法、装置、终端及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101437009A (zh) * | 2007-11-15 | 2009-05-20 | 华为技术有限公司 | 丢包隐藏的方法及其系统 |
CN102598119A (zh) * | 2009-04-21 | 2012-07-18 | 剑桥硅无线电有限公司 | 基音估计 |
CN106898356A (zh) * | 2017-03-14 | 2017-06-27 | 建荣半导体(深圳)有限公司 | 一种适用于蓝牙语音通话的丢包隐藏方法、装置及蓝牙语音处理芯片 |
CN110728990A (zh) * | 2019-09-24 | 2020-01-24 | 维沃移动通信有限公司 | 基音检测方法、装置、终端设备和介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110196673A1 (en) * | 2010-02-11 | 2011-08-11 | Qualcomm Incorporated | Concealing lost packets in a sub-band coding decoder |
-
2018
- 2018-04-24 CN CN201810371856.8A patent/CN110400569B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101437009A (zh) * | 2007-11-15 | 2009-05-20 | 华为技术有限公司 | 丢包隐藏的方法及其系统 |
CN102598119A (zh) * | 2009-04-21 | 2012-07-18 | 剑桥硅无线电有限公司 | 基音估计 |
CN106898356A (zh) * | 2017-03-14 | 2017-06-27 | 建荣半导体(深圳)有限公司 | 一种适用于蓝牙语音通话的丢包隐藏方法、装置及蓝牙语音处理芯片 |
CN110728990A (zh) * | 2019-09-24 | 2020-01-24 | 维沃移动通信有限公司 | 基音检测方法、装置、终端设备和介质 |
Non-Patent Citations (1)
Title |
---|
WebRTC语音引擎中NetEQ技术的研究;吴江锐;《中国优秀硕士学位论文全文数据库信息科技辑》;20140115;I136-315 * |
Also Published As
Publication number | Publication date |
---|---|
CN110400569A (zh) | 2019-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110400569B (zh) | 蓝牙音频修复方法及终端设备 | |
CN104868956B (zh) | 基于声波信道的数据通信方法 | |
US10686903B2 (en) | Information push method and electronic device | |
CN108510982B (zh) | 音频事件检测方法、装置及计算机可读存储介质 | |
CN111309962B (zh) | 提取音频片段的方法、装置以及电子设备 | |
CN102025444A (zh) | 资源发布方法、资源下载方法及数据校验系统 | |
CN113421578B (zh) | 音频处理方法、装置、电子设备及存储介质 | |
WO2013138122A2 (en) | Automatic realtime speech impairment correction | |
CN109803059A (zh) | 音频处理方法和装置 | |
US10325605B2 (en) | Audio decoder state update for packet loss concealment | |
US20210327439A1 (en) | Audio data recovery method, device and Bluetooth device | |
CN109074814B (zh) | 一种噪声检测方法及终端设备 | |
CN111404853A (zh) | 一种载波频偏估计方法、装置及计算机存储介质 | |
CN114067800B (zh) | 语音识别方法、装置和电子设备 | |
CN107437967A (zh) | 基于声波的数据传输方法、发送设备和接收设备 | |
CN108964786B (zh) | 一种声波信号编码、解码的方法及装置 | |
US20230245668A1 (en) | Neural network-based audio packet loss restoration method and apparatus, and system | |
CN109741756B (zh) | 基于usb外接设备传输操作信号的方法及系统 | |
CN109599098A (zh) | 音频处理方法和装置 | |
CN110808054B (zh) | 多路音频的压缩与解压缩方法及系统 | |
CN109246214A (zh) | 一种提示音获取方法、装置、终端及服务器 | |
KR20140139922A (ko) | 음성 인식 장치 및 이의 음성 인식 방법 | |
CN107291676B (zh) | 截断语音文件的方法、终端设备及计算机存储介质 | |
JP2016184110A (ja) | 多地点会議装置及び多地点会議制御プログラム、並びに、多地点会議制御方法 | |
CN114461146B (zh) | 云存储的数据处理方法、装置、系统、设备、介质及产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 510555 No. 107 Bowen Road, Huangpu District, Guangzhou, Guangdong Applicant after: Guangzhou Ankai Microelectronics Co.,Ltd. Address before: 3 / F, C1 area, innovation building, 182 science Avenue, Science City, Guangzhou, Guangdong 510663 Applicant before: ANYKA (GUANGZHOU) MICROELECTRONICS TECHNOLOGY Co.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |