CN108111702B - 一种对voip系统语音包丢失自动补偿的方法 - Google Patents
一种对voip系统语音包丢失自动补偿的方法 Download PDFInfo
- Publication number
- CN108111702B CN108111702B CN201711282837.XA CN201711282837A CN108111702B CN 108111702 B CN108111702 B CN 108111702B CN 201711282837 A CN201711282837 A CN 201711282837A CN 108111702 B CN108111702 B CN 108111702B
- Authority
- CN
- China
- Prior art keywords
- voice
- packet
- packets
- packet loss
- lost
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000004364 calculation method Methods 0.000 claims abstract description 4
- 238000000354 decomposition reaction Methods 0.000 claims description 3
- 238000001914 filtration Methods 0.000 claims description 3
- 230000009191 jumping Effects 0.000 claims description 3
- 238000009795 derivation Methods 0.000 claims description 2
- 206010002953 Aphonia Diseases 0.000 claims 1
- 230000007774 longterm Effects 0.000 claims 1
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000004891 communication Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000000873 masking effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M7/00—Arrangements for interconnection between switching centres
- H04M7/006—Networks other than PSTN/ISDN providing telephone service, e.g. Voice over Internet Protocol (VoIP), including next generation networks with a packet-switched transport layer
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Mathematical Physics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明公开了一种对VOIP系统语音包丢失自动补偿的方法。它具体包括如下步骤:(1)把原始语音数据分成一个个比IP包还小的单元,通过一定规则重新排列这些单元的顺序,使得每个IP包中的数据来自于不同的语音帧;(2)丢包判断;(3)在丢包处引用其相似的波形进行填充,先将周围的包转化成函数表示形式,通过一系列计算,对丢失的包进行估计,然后通过估计结果用最相似的波形对丢失波形进行替代;(4)在接收端,将这些单元通过步骤(1)中的规则逆过程恢复到原来的顺序,最终恢复得到语音信号。本发明的有益效果是:提高接收语音的质量;没有明显在幅度和相位上的误差,用户基本感觉不到其中的微小差别;没有增加额外影响VOIP性能的因素。
Description
技术领域
本发明涉及通讯相关技术领域,尤其是指一种对VOIP系统语音包丢失自动补偿的方法。
背景技术
VoIP(Voice over Internet Protocol)是将模拟信号(Voice)数字化,以数据封包(Data Packet)的形式在IP网络(IP Network)上做实时传递。VoIP因为网络的广泛使用,以及采用分组交换和低速率语音编码技术,降低了对带宽的要求,压缩了语音通话的成本,对传统电话的语音通信霸主地位形成了强有力的冲击。
数据传输通常使用传输控制协议,它能达到很好的效果,但是语音传输不同于数据传输,用户对于时延非常敏感,时延过长会影响双方的用户感受,使谈话无法继续,所以为满足语音传输的实时性要求,在VoIP中采用的是用户数据报协议(UDP),该协议可以快速地、一次性地传输语音数据。但是,用户数据报协议也存在其缺点,即不保证所有数据包都能有序并且全部到达接收端,可能会出现因为网络问题而造成数据包丢失的状况,当丢包达到一定程度时,同样会影响通话双方的正常交流。
据统计,当丢包率超过10%时,语音通信质量就让人不能忍受,这就是日前VoIP还不能完全取代传统电话的主要原因。为此,如何抵抗丢包和当丢包现象发生时如何进行处理成为当前VoIP网络语音通信中研究的核心问题。
目前,针对VoIP网络问题产生的丢包现象,主要采用以下两种方法:一种方法是在传输原始数据的同时,还要根据其相关联性,传输一些冗余数据,以便使接收端根据数据之间的相关性重构丢失的数据包;另一种方法是对丢失的语音包进行隐藏,这种方法利用了声音信号特别是语音信号中存在大量的短期自相似性的特点,主要做法是插入一段简单的替代物来填充由于丢包引起的缺口,常用替代物有静音、噪声或者前一个语音包。这两种方法都存在缺点,前一种方法会增加时延还需要额外的带宽;后一种方法对于丢包率相对较小(小于15%)和长度较小(4-40ms)的包效果很好,当丢包率较大或丢包长度达到一个音素的长度时,该技术就不适用了,因为整个音素都被听者错过了,导致用户感受极差。
发明内容
本发明是为了克服现有技术中存在上述的不足,提供了一种能够提升语音质量的对VOIP系统语音包丢失自动补偿的方法。
为了实现上述目的,本发明采用以下技术方案:
一种对VOIP系统语音包丢失自动补偿的方法,具体包括如下步骤:
(1)语音包处理:把原始语音数据分成一个个比IP包还小的单元,然后通过一定规则重新排列这些单元的顺序,使得每个IP包中的数据来自于不同的语音帧;
(2)丢包判断:判断是否发生丢包,没有丢包,则跳出该步骤,等待下一次调用;如有丢包,则计算丢包个数;
(3)重构丢失的包:在丢包处引用其相似的波形进行填充,需要用到丢包周围的包,前后都需要,先将周围的包转化成函数表示形式,通过一系列计算,对丢失的包进行估计,然后通过估计结果用最相似的波形对丢失波形进行替代;
(4)丢包补偿,语音包还原:在接收端,将这些单元通过步骤(1)中的规则逆过程恢复到原来的顺序,最终恢复得到语音信号。
在步骤(1)中,本来丢失的一个完整IP包的数据,就被分散在了不同的IP包中,虽然丢失的数据在总量上保持不变,但是人耳的掩蔽特性能够自动修复丢失的少量数据。因此当每帧只丢失少量的数据时,对听者产生的影响很小,从而提高语音的质量和用户感受。本发明描述的语音丢包自动补偿方法可以很好的恢复所丢失的语音信号,提高接收语音的质量。经过恢复后的语音信号与源信号相比,没有明显在幅度和相位上的误差,用户基本感觉不到其中的微小差别。并且该方法没有增加额外带宽等影响VOIP性能的因素,是非常适合在对时延敏感的VOIP系统中使用的。
作为优选,在步骤(1)中,具体规则如下:原始语音数据按照顺序依次排列,将原始语音数据分成若干个小的单元,若干个单元构成一个原IP包,将每个原IP包中相同位置处的单元提取出来,并按照原始语音数据的顺序组成一个新IP包,如此一来,每个新IP包中的数据来自于不同的语音帧,当发生丢包现象时,虽然丢失的还是完整的新IP包,但仅仅只是不同原IP包中的一些数据。
作为优选,在步骤(2)中,计算丢包个数N,通过下式计算:
其中,T代表发送端发送相邻两个语音包的间隔时问,t代表接收端实际收到相邻两个语音包的时间间隔。
作为优选,在步骤(3)中,对语音信号采用函数表示,带限时变周期信号可用傅里叶系数表述:
其中Cn(t)是时间t为变量的傅里叶系数,p(t)是时间t为变量的周期,为研究方便,现将上式表示成下面形式:
本发明的有益效果是:可以很好的恢复所丢失的语音信号,提高接收语音的质量;经过恢复后的语音信号与源信号相比,没有明显在幅度和相位上的误差,用户基本感觉不到其中的微小差别;该方法没有增加额外带宽等影响VOIP性能的因素,是非常适合在对时延敏感的VOIP系统中使用的。
具体实施方式
下面结合具体实施方式对本发明做进一步的描述。
一种对VOIP系统语音包丢失自动补偿的方法,具体包括如下步骤:
(1)语音包处理:把原始语音数据分成一个个比IP包还小的单元,然后通过一定规则重新排列这些单元的顺序,使得每个IP包中的数据来自于不同的语音帧;
具体规则如下:原始语音数据按照顺序依次排列,将原始语音数据分成若干个小的单元,若干个单元构成一个原IP包,将每个原IP包中相同位置处的单元提取出来,并按照原始语音数据的顺序组成一个新IP包,如此一来,每个新IP包中的数据来自于不同的语音帧,当发生丢包现象时,虽然丢失的还是完整的新IP包,但仅仅只是不同原IP包中的一些数据;
比如将原始语音数据分成若干个小的单元,每3个单元构成一个IP包,原来是123456 789,经重新排列后变成147 258 369,如此一来,每个IP包中的数据不再是来自于同一个包中,而是来自于不同的语音帧,当发生丢包现象时,虽然丢失的还是完整的IP包,但并没有丢失原始语音中这个IP包的全部数据,而仅仅只是不同IP包中的一些比特,最后在接收端再将这些单元通过设置规则的逆过程恢复到原来的顺序。这样,本来丢失的一个完整语音包的数据,就被分散在了不同的包中,虽然丢失的数据在总量上保持不变,但是人耳的掩蔽特性能够自动修复丢失的少量数据。因此当每帧只丢失少量的数据时,对听者产生的影响很小,从而提高语音的质量和用户感受。
(2)丢包判断:判断是否发生丢包,没有丢包,则跳出该步骤,等待下一次调用;如有丢包,则计算丢包个数;
计算丢包个数N,通过下式计算:
其中,T代表发送端发送相邻两个语音包的间隔时问,t代表接收端实际收到相邻两个语音包的时间间隔;
(3)重构丢失的包:在丢包处引用其相似的波形进行填充,需要用到丢包周围的包,前后都需要,先将周围的包转化成函数表示形式,通过一系列计算,对丢失的包进行估计,然后通过估计结果用最相似的波形对丢失波形进行替代,最终带来语音质量的提升;
对语音信号采用函数表示,带限时变周期信号可用傅里叶系数表述:
其中Cn(t)是时间t为变量的傅里叶系数,p(t)是时间t为变量的周期,为研究方便,现将上式表示成下面形式:
(4)丢包补偿,语音包还原:在接收端,基频、功率、快变部分、慢变部分线性内插,再将这些单元通过步骤(1)中的规则逆过程恢复到原来的顺序,最终恢复得到语音信号。
本发明描述的语音丢包自动补偿方法可以很好的恢复所丢失的语音信号,提高接收语音的质量。经过恢复后的语音信号与源信号相比,没有明显在幅度和相位上的误差,用户基本感觉不到其中的微小差别。并且该方法没有增加额外带宽等影响VOIP性能的因素,是非常适合在对时延敏感的VOIP系统中使用的。
Claims (5)
1.一种对VOIP系统语音包丢失自动补偿的方法,其特征是,具体包括如下步骤:
(1)语音包处理:把原始语音数据分成一个个比IP包还小的单元,然后通过一定规则重新排列这些单元的顺序,使得每个IP包中的数据来自于不同的语音帧;
(2)丢包判断:判断是否发生丢包,没有丢包,则跳出该步骤,等待下一次调用;如有丢包,则计算丢包个数;
(3)重构丢失的包:在丢包处引用其相似的波形进行填充,需要用到丢包周围的包,前后都需要,先将周围的包转化成函数表示形式,通过一系列计算,对丢失的包进行估计,然后通过估计结果用最相似的波形对丢失波形进行替代;对语音信号采用函数表示,带限时变周期信号可用傅里叶系数表述:
其中Cn(t)是时间t为变量的傅里叶系数,n为n次谐波,n的取值范围是从1到无穷大,p(t)是时间t为变量的周期,为研究方便,现将上式表示成下面形式:
(4)丢包补偿,语音包还原:在接收端,将这些单元通过步骤(1)中的规则逆过程恢复到原来的顺序,最终恢复得到语音信号。
2.根据权利要求1所述的一种对VOIP系统语音包丢失自动补偿的方法,其特征是,在步骤(1)中,具体规则如下:原始语音数据按照顺序依次排列,将原始语音数据分成若干个小的单元,若干个单元构成一个原IP包,将每个原IP包中相同位置处的单元提取出来,并按照原始语音数据的顺序组成一个新IP包,如此一来,每个新IP包中的数据来自于不同的语音帧,当发生丢包现象时,虽然丢失的还是完整的新IP包,但仅仅只是不同原IP包中的一些数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711282837.XA CN108111702B (zh) | 2017-12-07 | 2017-12-07 | 一种对voip系统语音包丢失自动补偿的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711282837.XA CN108111702B (zh) | 2017-12-07 | 2017-12-07 | 一种对voip系统语音包丢失自动补偿的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108111702A CN108111702A (zh) | 2018-06-01 |
CN108111702B true CN108111702B (zh) | 2020-07-07 |
Family
ID=62208224
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711282837.XA Active CN108111702B (zh) | 2017-12-07 | 2017-12-07 | 一种对voip系统语音包丢失自动补偿的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108111702B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110636543B (zh) * | 2018-06-22 | 2020-11-06 | 大唐移动通信设备有限公司 | 一种语音数据处理方法及装置 |
CN112669858A (zh) * | 2019-10-14 | 2021-04-16 | 上海华为技术有限公司 | 一种数据处理方法及相关装置 |
CN111883173B (zh) * | 2020-03-20 | 2023-09-12 | 珠海市杰理科技股份有限公司 | 基于神经网络的音频丢包修复方法、设备和系统 |
CN115567470A (zh) * | 2022-09-21 | 2023-01-03 | 润芯微科技(江苏)有限公司 | 一种音频丢包补偿处理方法及系统 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002030098A3 (en) * | 2000-10-06 | 2002-07-04 | Motorola Inc | Method and system for rate adaptation in a packet voice system |
CN1920950A (zh) * | 2006-09-25 | 2007-02-28 | 北京理工大学 | 一种基于Haar小波提升的特征波形分解与重构方法 |
CN101022369A (zh) * | 2007-03-23 | 2007-08-22 | 中山大学 | 一种端到端排队时延测量方法 |
CN101364854A (zh) * | 2007-08-10 | 2009-02-11 | 北京理工大学 | 一种基于边信息的语音包丢失恢复技术 |
CN101399636A (zh) * | 2008-09-04 | 2009-04-01 | 华为技术有限公司 | 一种丢包补偿的方法和实现丢包补偿的装置及系统 |
CN102376306A (zh) * | 2010-08-04 | 2012-03-14 | 华为技术有限公司 | 语音帧等级的获取方法及装置 |
CN103065636A (zh) * | 2011-10-24 | 2013-04-24 | 中兴通讯股份有限公司 | 语音频信号的丢帧补偿方法和装置 |
CN103648120A (zh) * | 2013-12-25 | 2014-03-19 | 北京炎强通信技术有限公司 | 一种移动通信网无线网络语音优化方法 |
CN103840917A (zh) * | 2014-03-28 | 2014-06-04 | 北京邮电大学 | 一种基于网络编码的多路并行传输方案 |
CN103854649A (zh) * | 2012-11-29 | 2014-06-11 | 中兴通讯股份有限公司 | 一种变换域的丢帧补偿方法及装置 |
CN104219220A (zh) * | 2014-02-14 | 2014-12-17 | 爱沟通网络科技有限公司 | 一种改善VoIP通信质量的系统和方法 |
-
2017
- 2017-12-07 CN CN201711282837.XA patent/CN108111702B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002030098A3 (en) * | 2000-10-06 | 2002-07-04 | Motorola Inc | Method and system for rate adaptation in a packet voice system |
CN1920950A (zh) * | 2006-09-25 | 2007-02-28 | 北京理工大学 | 一种基于Haar小波提升的特征波形分解与重构方法 |
CN101022369A (zh) * | 2007-03-23 | 2007-08-22 | 中山大学 | 一种端到端排队时延测量方法 |
CN101364854A (zh) * | 2007-08-10 | 2009-02-11 | 北京理工大学 | 一种基于边信息的语音包丢失恢复技术 |
CN101399636A (zh) * | 2008-09-04 | 2009-04-01 | 华为技术有限公司 | 一种丢包补偿的方法和实现丢包补偿的装置及系统 |
CN102376306A (zh) * | 2010-08-04 | 2012-03-14 | 华为技术有限公司 | 语音帧等级的获取方法及装置 |
CN103065636A (zh) * | 2011-10-24 | 2013-04-24 | 中兴通讯股份有限公司 | 语音频信号的丢帧补偿方法和装置 |
CN103854649A (zh) * | 2012-11-29 | 2014-06-11 | 中兴通讯股份有限公司 | 一种变换域的丢帧补偿方法及装置 |
CN103648120A (zh) * | 2013-12-25 | 2014-03-19 | 北京炎强通信技术有限公司 | 一种移动通信网无线网络语音优化方法 |
CN104219220A (zh) * | 2014-02-14 | 2014-12-17 | 爱沟通网络科技有限公司 | 一种改善VoIP通信质量的系统和方法 |
CN103840917A (zh) * | 2014-03-28 | 2014-06-04 | 北京邮电大学 | 一种基于网络编码的多路并行传输方案 |
Also Published As
Publication number | Publication date |
---|---|
CN108111702A (zh) | 2018-06-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108111702B (zh) | 一种对voip系统语音包丢失自动补偿的方法 | |
US7002913B2 (en) | Packet loss compensation method using injection of spectrally shaped noise | |
US8428959B2 (en) | Audio packet loss concealment by transform interpolation | |
Gunduzhan et al. | Linear prediction based packet loss concealment algorithm for PCM coded speech | |
CN104485111B (zh) | 音频/语音编码装置、音频/语音解码装置及其方法 | |
WO2021147237A1 (zh) | 语音信号处理方法、装置、电子设备及存储介质 | |
US20220180881A1 (en) | Speech signal encoding and decoding methods and apparatuses, electronic device, and storage medium | |
JPH10513030A (ja) | 通信システムにおいて雑音を抑圧する方法および装置 | |
JP2012522255A (ja) | オーディオ信号分類の方法および装置 | |
US11646042B2 (en) | Digital voice packet loss concealment using deep learning | |
CN109817235B (zh) | 一种VoIP设备的回声消除方法 | |
Ren et al. | Enhancement to E-model on standard deviation of packet delay | |
US10652120B2 (en) | Voice quality monitoring system | |
US11070666B2 (en) | Methods and devices for improvements relating to voice quality estimation | |
Bhagat et al. | Adaptive multi-rate wideband speech codec based on CELP algorithm: architectural study, implementation & performance analysis | |
Turunen et al. | Assessment of objective voice quality over best-effort networks | |
JP4693185B2 (ja) | 符号化装置、プログラム、および記録媒体 | |
Rodbro et al. | Time-scaling of sinusoids for intelligent jitter buffer in packet based telephony | |
JP6718670B2 (ja) | Adpcmコーデックでのパケット損失隠蔽方法及びplc回路を備えるadpcm復号器 | |
Paglierani et al. | Uncertainty evaluation of objective speech quality measurement in VoIP systems | |
Aoki | A VoIP packet loss concealment technique taking account of pitch variation in pitch waveform replication | |
Shetty et al. | Improving the robustness of the G. 722 wideband speech codec to packet losses for voice over WLANs | |
Chaouch et al. | Multiple Description Coding and Forward Error Correction Concealment Methods for ACELP Coders in Packet Networks | |
JP5014493B2 (ja) | 符号化方法、符号化装置、およびプログラム | |
Huang et al. | Effects of vocoder distortion on network echo cancellation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 310012 room 135, building 5, No. 606, Qiuyi Road, Changhe street, Binjiang District, Hangzhou City, Zhejiang Province Applicant after: Hangzhou Shenmu Technology Co.,Ltd. Address before: 310052 135, room 5, No. 606, Autumn Road, Changhe street, Binjiang District, Hangzhou, Zhejiang. Applicant before: SEDA ZHIJIA TECHNOLOGY (HANGZHOU) Co.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |