CN106067847A - 一种语音数据传输方法及装置 - Google Patents

一种语音数据传输方法及装置 Download PDF

Info

Publication number
CN106067847A
CN106067847A CN201610356121.9A CN201610356121A CN106067847A CN 106067847 A CN106067847 A CN 106067847A CN 201610356121 A CN201610356121 A CN 201610356121A CN 106067847 A CN106067847 A CN 106067847A
Authority
CN
China
Prior art keywords
frame
speech data
voice
data frame
key frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610356121.9A
Other languages
English (en)
Other versions
CN106067847B (zh
Inventor
梁俊斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610356121.9A priority Critical patent/CN106067847B/zh
Publication of CN106067847A publication Critical patent/CN106067847A/zh
Priority to PCT/CN2017/085457 priority patent/WO2017202290A1/zh
Priority to EP17802136.6A priority patent/EP3468132A4/en
Priority to US15/984,569 priority patent/US10594449B2/en
Application granted granted Critical
Publication of CN106067847B publication Critical patent/CN106067847B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1867Arrangements specially adapted for the transmitter end
    • H04L1/188Time-out mechanisms
    • H04L1/1883Time-out mechanisms using multiple timers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M7/00Arrangements for interconnection between switching centres
    • H04M7/006Networks other than PSTN/ISDN providing telephone service, e.g. Voice over Internet Protocol (VoIP), including next generation networks with a packet-switched transport layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1867Arrangements specially adapted for the transmitter end
    • H04L1/189Transmission or retransmission of more than one copy of a message
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1867Arrangements specially adapted for the transmitter end
    • H04L1/1887Scheduling and prioritising arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1867Arrangements specially adapted for the transmitter end
    • H04L1/1874Buffer management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/164Adaptation or special uses of UDP protocol

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Computer Security & Cryptography (AREA)

Abstract

本发明实施例公开了语音数据传输方法,包括:将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;对所述目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。本发明还公开了语音数据传输装置,采用本发明实现了无需对每个语音数据帧都做接收状态确认看是否需要进行重传,有效解决了现有技术在网络能力较弱情况下因数据重传导致网络带宽压力增大,不利于解决网络丢包的技术问题,可以节省通话过程中较大一部分的帧重传,从而更加有效地利用了网络带宽资源。

Description

一种语音数据传输方法及装置
技术领域
本发明涉及计算机通信领域,尤其一种语音数据传输方法以及语音数据传输装置。
背景技术
IP承载语音(Voice over Internet Protocol,Voip)是基于以太网的实时语音通话系统,网络质量、网络传输能力对Voip双方通话质量有着决定性的影响,Voip为了确保实时通话数据传输,通常采用的是UDP不可靠传输协议,在网络状况不佳情况下丢包是经常发生的,解决该问题的主要方法有前向纠错技术和丢包重传技术。
其中,丢包重传是当数据接收方检测到目标数据包超时仍未接收到或者发现目标接收包出错,则向数据发送方发出请求包,以请求数据发送方重传出错的数据报文的一种技术手段。现有技术中,丢包重传主要包括以下几种方式:
a、停等式丢包重传方式:数据报文发送完成后,数据发送方等待数据接收方的状态报告,如果状态报告报文表示发送成功才发送后续的数据报文,如果状态报告报文表示发送失败则重传该报文。
b、回退N帧丢包重传方式:当数据发送方接收到数据接收方的状态报文指示报文出错后,发送方将重传过去N个报文。
c、选择性重传方式:当数据发送方接收到数据接收方的状态报文指示报文出错后,数据发送方只需发送发生错误的报文。
现有的丢包重传机制需要每个数据报文都需要做接收状态确认,即需要发送和接收确认报文,这种操作需要占用相当一部分网络带宽资源,如果第一次重传后,数据接收方仍然没有成功接收到正确的数据报文,则数据发送方需要继续进行重传直到成功为止,在网络能力较弱情况下,每个数据报文都可能经历这样的过程,无疑是对网络带宽施加更大的压力,不利于进行数据传输。
发明内容
本发明实施例所要解决的技术问题在于,提供一种语音数据传输方法和语音数据传输装置以及移动电子设备,有效解决了现有技术在网络能力较弱情况下因数据重传导致网络带宽压力增大,不利于进行数据传输的技术问题。
为了解决上述技术问题,本发明实施例第一方面公开了一种语音数据传输方法,包括:
将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
对所述目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;
针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
结合第一方面,在第一种可能的实现方式中,所述对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理,包括:
针对处于所述丢包重传处理队列的重传发送窗口的当前语音关键帧,启动第一定时器进行计时;所述第一定时器的计时起算时间为所述当前语音关键帧在所述第一发送队列中的发送时间点;
检测是否在所述第一定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧;
当检测结果为是时,则在所述丢包重传处理队列中将所述当前语音关键帧删除;
当检测结果为否时,则将所述丢包重传处理队列中的所述当前语音关键帧重传给所述数据接收方。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,所述启动第一定时器进行计时的同时,还包括:
启动第二定时器进行计时,所述第二定时器的计时时长大于所述第一定时器的计时时长;
若在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
结合第一方面的第一种可能的实现方式,在第三种可能的实现方式中,所述将所述丢包重传处理队列中的语音关键帧重传给所述数据接收方之后,还包括:
启动第二定时器进行计时;
在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧时,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
结合第一方面,在第四种可能的实现方式中,所述对所述第一发送队列中的多个语音数据帧进行识别,包括:
计算语音数据帧的帧能量;
判断所述帧能量是否小于第一预设阈值;
当判断结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第一方面,在第五种可能的实现方式中,所述对所述第一发送队列中的多个语音数据帧进行识别,包括:
分析语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第一方面,在第六种可能的实现方式中,所述对所述第一发送队列中的多个语音数据帧进行识别,包括:
计算语音数据帧与所述语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值;
检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第一方面的第四种可能的实现方式,在第七种可能的实现方式中,当判断出所述帧能量不小于第一预设阈值时,还包括:
分析所述语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第一方面的第四种可能的实现方式,在第八种可能的实现方式中,当判断出所述帧能量不小于第一预设阈值时,还包括:
计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第一方面的第五种可能的实现方式,或者第一方面的第七种可能的实现方式,在第九种可能的实现方式中,当分析出所述语音数据帧含有语音内容信息时,还包括:
计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第一方面的第五种可能的实现方式,或者第一方面的第七种可能的实现方式,在第十种可能的实现方式中,所述分析所述语音数据帧是否不含有语音内容信息,包括:
对所述语音数据帧进行2N点fft变换,得到所述语音数据帧的功率谱;并估算各频点噪声能量;所述N为正整数;
根据所述功率谱和所述噪声能量计算各频点信噪比;
根据所述各频点信噪比计算各频点信噪比平方之和;
比较所述各频点信噪比平方之和是否小于第三预设阈值;
当比较结果为是时,则识别出所述当前语音数据帧为语音非关键帧。
本发明实施例第二方面公开了一种语音数据传输装置,包括:
放入发送模块,用于将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
识别放入模块,用于对所述目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;
重传模块,用于针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
结合第二方面,在第一种可能的实现方式中,所述重传模块包括:
第一启动单元,用于针对处于所述丢包重传处理队列的重传发送窗口的当前语音关键帧,启动第一定时器进行计时;所述第一定时器的计时起算时间为所述当前语音关键帧在所述第一发送队列中的发送时间点;
第一检测单元,用于检测是否在所述第一定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧;
第一删除单元,用于当检测结果为是时,在所述丢包重传处理队列中将所述当前语音关键帧删除;
重传子单元,用于当检测结果为否时,则将所述丢包重传处理队列中的所述当前语音关键帧重传给所述数据接收方。
结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,所述重传模块还包括:
第二启动单元,用于在所述第一启动单元启动第一定时器进行计时的同时,启动第二定时器进行计时,所述第二定时器的计时时长大于所述第一定时器的计时时长;
第二删除单元,用于若在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
结合第二方面的第一种可能的实现方式,在第三种可能的实现方式中,所述重传模块还包括:
第三启动单元,用于在所述重传子单元将所述丢包重传处理队列中的语音关键帧重传给所述数据接收方之后,启动第二定时器进行计时;
第三删除单元,用于在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧时,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
结合第二方面,在第四种可能的实现方式中,所述识别放入模块包括:
第一计算单元,用于计算语音数据帧的帧能量;
能量判断单元,用于判断所述帧能量是否小于第一预设阈值;
当判断结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第二方面,在第五种可能的实现方式中,所述识别放入模块包括:
分析单元,用于分析语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第二方面,在第六种可能的实现方式中,所述识别放入模块包括:
第二计算单元,用于计算语音数据帧与所述语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值;
第二检测单元,用于检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第二方面的第四种可能实现方式,在第七种可能的实现方式中,所述识别放入模块还包括:
分析单元,用于在所述能量判断单元判断出所述帧能量不小于第一预设阈值时,分析语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第二方面的第四种可能实现方式,在第八种可能的实现方式中,所述识别放入模块还包括:
第二计算单元,用于在所述能量判断单元判断出所述帧能量不小于第一预设阈值时,计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
第二检测单元,用于检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第二方面的第五种可能的实现方式,或者第二方面的第七种可能的实现方式,在第九种可能的实现方式中,所述识别放入模块还包括:
第二计算单元,用于在所述分析模块分析出所述语音数据帧含有语音内容信息确定时,计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
第二检测单元,用于检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
结合第二方面的第五种可能的实现方式,或者第二方面的第七种可能的实现方式,在第十种可能的实现方式中,所述分析单元包括:
变换估算单元,用于对所述语音数据帧进行2N点fft变换,得到所述语音数据帧的功率谱;并估算各频点噪声能量;所述N为正整数;
信噪比计算单元,用于根据所述功率谱和所述噪声能量计算各频点信噪比;
平方和计算单元,用于根据所述各频点信噪比计算各频点信噪比平方之和;
比较单元,用于比较所述各频点信噪比平方之和是否小于第三预设阈值;
当比较结果为是时,则识别出所述语音数据帧为语音非关键帧。
本发明实施例第三方面公开了一种移动电子设备,包括处理器、存储器以及输入装置和输出装置;其中,所述处理器通过执行所述存储器中存储的同步服务管理程序,执行上述第一方面,或者第一方面的第一种可能的实现方式,或者第一方面的第二种可能的实现方式,或者第一方面的第三种可能的实现方式,或者第一方面的第四种可能的实现方式,或者第一方面的第五种可能的实现方式,或者第一方面的第六种可能的实现方式,或者第一方面的第七种可能的实现方式中,或者第一方面的第八种可能的实现方式中,或者第一方面的第九种可能的实现方式中,或者第一方面的第十种可能的实现方式中的语音数据传输方法的全部步骤。
本发明实施例第四方面公开了一种计算机存储介质,所述计算机存储介质存储有程序,所述程序执行时包括本发明实施例第一方面、或者第一方面的第一种可能的实现方式,或者第一方面的第二种可能的实现方式,或者第一方面的第三种可能的实现方式,或者第一方面的第四种可能的实现方式,或者第一方面的第五种可能的实现方式,或者第一方面的第六种可能的实现方式,或者第一方面的第七种可能的实现方式中,或者第一方面的第八种可能的实现方式中,或者第一方面的第九种可能的实现方式中,或者第一方面的第十种可能的实现方式中的语音数据传输方法的全部步骤。
实施本发明实施例,将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;对目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;针对多个语音数据帧,仅对在丢包重传处理队列中的语音关键帧执行丢包重传处理,而不对语音非关键帧执行丢包重传处理,实现了无需对每个语音数据帧都做接收状态确认看是否需要进行重传,有效解决了现有技术在网络能力较弱情况下因数据重传导致网络带宽压力增大,不利于进行数据传输的技术问题,本发明实施例通过定义语音非关键帧,并判断发送的语音数据帧是否为语音非关键帧来执行重传策略,对非语音帧或能量技校的噪声帧或通过丢包补偿手段能很好恢复的帧,不执行重传,可以节省通话过程中较大一部分的帧重传,从而更加有效地利用了网络带宽资源。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的语音数据传输方法的场景架构图;
图2是本发明实施例提供的语音数据传输方法的流程示意图;
图3是本发明提供的语音数据传输方法的另一实施例的流程示意图;
图4是本发明提供的语音数据传输方法的另一实施例的流程示意图;
图5是本发明提供的语音数据传输方法的另一实施例的流程示意图;
图6是本发明提供的语音数据传输方法的另一实施例的流程示意图;
图7是本发明提供的语音数据传输方法的另一实施例的流程示意图;
图8是本发明实施例提供的语音数据传输装置的结构示意图;
图9是本发明实施例提供的重传模块的结构示意图;
图10是本发明实施例提供的识别放入模块的结构示意图;
图11是本发明提供的识别放入模块的另一实施例的结构示意图;
图12是本发明提供的识别放入模块的另一实施例的结构示意图;
图13是本发明实施例提供的分析单元的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1示出的本发明实施例提供的语音数据传输方法的场景架构图,电子设备之间可以通过网络服务器建立语音连接,进行语音通信,那么数据发送方可以实时地将采集到的语音数据帧发送给数据接收方,数据接收方接收到语音数据帧并确认没有出错时,可以向数据发送方返回指示发送成功的确认消息,否则可以向数据发送方返回指示发送失败的确认消息,那么数据发送方将可以通过数据重传机制,对丢失的语音数据帧重传给数据接收方,以保证双方通话质量。
下面结合图2示出的本发明实施例提供的语音数据传输方法的流程示意图,详细说明本发明实施例提供的语音数据传输方法的技术方案,包括如下步骤:
步骤S200:将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
具体地,数据发送方与数据接收方建立了语音通信连接,该数据发送方可以将采集到的语音信息进行编码,生成多个语音数据帧,然后将该多个语音数据帧放入目标发送队列,并依次将语音数据帧发送给数据接收方。
步骤S202:对所述目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;
具体地,本发明实施例中对语音数据帧分为语音关键帧和语音非关键帧,可以通过设定条件,例如符合预设条件的为语音关键帧或语音非关键帧,从而根据该预设条件来对该多个语音数据帧进行识别,例如可以设定不含语音内容信息的数据帧,或者容易通过丢包补偿手段能很好恢复的帧为语音非关键帧(语音非关键帧以外的即为语音关键帧),该不含语音内容信息的数据帧可以包括非语音帧或能量极小的噪声帧,等等。当从该多个语音数据帧中识别出语音数据帧后,将该语音关键帧放入预设的丢包重传处理队列。
需要说明的是,本发明实施例中的目标发送队列与丢包重传处理队列可以为不同的两个队列,该目标发送队列用于正常发送待发送的语音数据帧,该丢包重传处理队列用于对语音关键帧执行丢包时的重传处理。本发明实施例中的目标发送队列与丢包重传处理队列也可以为同一个队列,也就是说,可以将语音关键帧放入目标发送队列中,具体可以估算再次发送(即重传)该语音关键帧的时间来插入到目标发送队列中,以便于确定该语音关键帧发生丢包后,进行重传。
步骤S204:针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
具体地,本发明实施例对发送的多个语音数据帧,仅仅对处于该丢包重传处理队列中的语音关键帧执行丢包重传处理,不对该多个语音数据帧的语音关键帧以外的语音非关键帧执行丢包重传处理,也就是说,无论该语音非关键帧是否被该数据接收方成功接收到,该数据发送方都不对该语音非关键帧进行重传。
通过实施本发明实施例,实现了无需对每个语音数据帧都做接收状态确认看是否需要进行重传,有效解决了现有技术在网络能力较弱情况下因数据重传导致网络带宽压力增大,不利于解决网络丢包的技术问题,本发明实施例通过定义语音非关键帧,并判断发送的语音数据帧是否为语音非关键帧来执行重传策略,对非语音帧或能量技校的噪声帧或通过丢包补偿手段能很好恢复的帧,不执行重传,可以节省通话过程中较大一部分的帧重传,从而更加有效地利用了网络带宽资源。
具体地,如图3示出的本发明提供的语音数据传输方法的另一实施例的流程示意图,具体说明如何对丢包重传处理队列中的语音关键帧执行丢包重传处理,包括如下步骤:
步骤S300:针对处于所述丢包重传处理队列的重传发送窗口的当前语音关键帧,启动第一定时器进行计时;
具体地,该第一定时器的计时起算时间为该当前语音关键帧在该第一发送队列中的发送时间点;本发明实施例不限于该第一定时器的计时时长,技术人员可以根据自身需求或经验来设置该第一定时器的计时时长。
步骤S302:检测是否在所述第一定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧;
具体地,本发明实施例中的状态确认帧表明该当前语音关键帧被数据接收方成功接收到;当检测结果为是时,则执行步骤S304,否则执行步骤S306。
步骤S304:在所述丢包重传处理队列中将所述当前语音关键帧删除;
步骤S306:将所述丢包重传处理队列中的所述当前语音关键帧重传给所述数据接收方。
具体地,步骤S306之后,可以重新执行步骤S300,再次判断该当前语音关键帧是否需要重传;进一步地,本发明实施例为了避免对语音关键帧进行无限次的重传,给网络带宽造成更大压力,可以执行如下步骤:
在启动第一定时器进行计时的同时,启动第二定时器进行计时,该第二定时器的计时时长大于该第一定时器的计时时长;那么,若在该第二定时器计时结束前接收到数据接收方返回的针对所述当前语音关键帧的状态确认帧,或者在该第二定时器计时结束时,在该丢包重传处理队列中将该当前语音关键帧删除,从而避免了对语音关键帧进行无限次的重传,给网络带宽造成更大压力。
或者,
在将该丢包重传处理队列中的语音关键帧重传给该数据接收方之后,启动第二定时器进行计时;此时第二定时器的计时时长,技术人员可以根据自身需求或经验来设置。在该第二定时器计时结束前接收到该数据接收方返回的针对所述当前语音关键帧的状态确认帧时,或者在该第二定时器计时结束时,在该丢包重传处理队列中将所述当前语音关键帧删除,从而避免了对语音关键帧进行无限次的重传,给网络带宽造成更大压力。
具体地,下面结合图4至图7详细举例说明如何判断当前语音数据帧是否为语音非关键帧,可理解的是,该多个语音数据帧中判断出的语音非关键帧以外的语音数据帧,即为识别出的语音关键帧:
如图4示出的本发明提供的语音数据传输方法的另一实施例的流程示意图,可以包括如下步骤:
步骤S400:将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
步骤S402:计算语音数据帧的帧能量;
具体地,可以通过以下公式,计算出该语音数据帧的帧能量Engr:
其中,l为帧长
步骤S404:判断该帧能量是否小于第一预设阈值;
具体地,本发明实施例的第一预设阈值与l的取值有关,l越大,该第一预设阈值的取值可以越大,例如l等于80时,该第一预设阈值可以设为5*105;当判断结果为是时,则判断出该语音数据帧为语音非关键帧,执行步骤S406,否则,可以认为该语音数据帧不为语音非关键帧,执行步骤S408。
需要说明的是,本发明实施例不限于该第一预设阈值的大小,技术人员可以根据自身需求或经验来设置该第一预设阈值。
步骤S406:不对所述语音数据帧进行重传;
步骤S408:将识别出的语音关键帧放入丢包重传处理队列;
步骤S410:针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
具体地,步骤S40:8和步骤S418可以参考上述图2实施例中步骤S202和步骤S204的描述,这里不再赘述。
如图5示出的本发明提供的语音数据传输方法的另一实施例的流程示意图,可以包括如下步骤:
步骤S500:将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
步骤S502:分析语音数据帧是否不含有语音内容信息;
具体地,本发明各个实施例中的不含有语音内容信息可以理解为语音数据帧完全不含有语音内容信息或者含有的语音内容信息量低于某阈值;本发明实施例不限于分析当前数据帧是否不含有语音内容信息的方式。当分析结果为是时,则判断出该语音数据帧为语音非关键帧,执行步骤S504,否则,可以认为该语音数据帧不为语音非关键帧,执行步骤S506。
步骤S504:不对所述语音数据帧进行重传;
步骤S506:将识别出的语音关键帧放入丢包重传处理队列;
步骤S508:针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
具体地,步骤S506和步骤S508可以参考上述图2实施例中步骤S202和步骤S204的描述,这里不再赘述。
如图6示出的本发明提供的语音数据传输方法的另一实施例的流程示意图,可以包括如下步骤:
步骤S600:将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
步骤S602:计算语音数据帧与该语音数据帧相对的上一个语音数据帧的前M个线谱对(Linear Spectrum Pair,lsp)系数差的绝对值;
具体地,在计算该语音数据帧与该语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值之前,还需要计算出语音数据帧的lsp系数,例如可以通过对该语音数据帧加汉明窗,使用dubin递推求解Yule-Walker方程,得到lpc线性预测编码(linearpredictive coding,lpc)系数,然后根据得到的p阶lpc系数,求解下列求解p+1阶对称多项式P(z)和反对称多项式Q(z)的共轭复根,即可得到lsp系数A:
P(z)=A(z)+z-(p+1)×A(z-1)
Q(z)=A(z)+z-(p+1)×A(z-1)
得到lsp系数后,考虑到前三组线谱对对语音影响最重要,常规语音编解码中可以计算得到10个lsp系数,本发明实施例的M可以为5、6、7等正整数,优选地,M为6,也就是说,本发明实施例可以比较前6个lsp系数差的绝对值,具体公式可以如下:
lspdif(i)=abs(lspcur(i)-lsopre(i));i=0~5
语音数据帧与该语音数据帧相对的上一个语音数据帧的前6个lsp系数的相邻帧平稳度,可以用以判断是否为语音非关键帧。
步骤S604:检测计算得到的M个绝对值是否都小于第二预设阈值;
具体地,本发明实施例的第二预设阈值可以为0.005;当检测结果为是时,则检测出该语音语音数据帧为语音非关键帧,执行步骤S606,否则,可以认为该语音语音数据帧不为语音非关键帧,执行步骤S608。
需要说明的是,本发明实施例不限于该第二预设阈值的大小,技术人员可以根据自身需求或经验来设置该第二预设阈值。
步骤S606:不对该语音数据帧进行重传;
步骤S608:将识别出的语音关键帧放入丢包重传处理队列;
步骤S610:针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
具体地,步骤S608和步骤S610可以参考上述图2实施例中步骤S202和步骤S204的描述,这里不再赘述。
需要说明的是,图4、图5和图6实施例可以任意组合来实现数据重传,例如:
1、可以图4和图5结合:将语音数据帧发送给数据接收方后,首先可以先计算该语音数据帧的帧能量,若判断能量小于第一预设阈值,则判断出该语音数据帧为语音非关键帧,若判断能量不小于第一预设阈值,再进一步分析所述数据帧是否不含有语音内容信息,当分析该语音数据帧不含有语音内容信息时,则判断出该语音数据帧为语音非关键帧,否则判断出该语音数据帧不为语音非关键帧。
2、或者图4和图6结合:将语音数据帧发送给数据接收方后,首先可以先计算该语音数据帧的帧能量,若判断能量小于第一预设阈值,则判断出该语音数据帧为语音非关键帧,若判断能量不小于第一预设阈值,再进一步计算该语音数据帧与该语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值,检测计算得到的M个绝对值是否都小于第二预设阈值,当检测都小于第二预设阈值,则判断出该语音数据帧为语音非关键帧,否则判断出该语音数据帧不为语音非关键帧。
3、又或者图5和图6结合:将语音数据帧发送给数据接收方后,首先可以先分析该语音数据帧是否不含有语音内容信息,当分析语音数据帧不含有语音内容信息时,则判断出该语音数据帧为语音非关键帧,当分析该语音数据帧含有语音内容信息时,再进一步计算语音数据帧与该语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值,检测计算得到的M个绝对值是否都小于第二预设阈值,当检测都小于第二预设阈值,则判断出该语音数据帧为语音非关键帧,否则判断出该语音数据帧不为语音非关键帧。
4、又或者如图4、图5和图6的结合,如图7示出的本发明提供的语音数据传输方法的另一实施例的流程示意图,可以包括如下步骤:
步骤S700:将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
步骤S702:计算语音数据帧的帧能量;
具体地,参考上述图4实施例中的步骤S402,这里不再赘述。
步骤S704:判断该帧能量是否小于第一预设阈值;
具体地,参考上述图4实施例中的步骤S404,当判断结果为是时,则执行步骤S718;否则执行步骤S706。
步骤S706:对该语音数据帧进行2N点fft变换,得到该语音数据帧的功率谱;并估算各频点噪声能量;所述N为正整数;
具体地,步骤S706至步骤S712为分析该语音数据帧是否不含有语音内容信息的其中一个具体实施方式;对该语音数据帧进行2N点fft变换,得到该语音数据帧的功率谱level(j),j=1~N;然后可以基于最小统计量控制递归平均算法(Minima ControlledRecursive Averaging,MCRA)算法估计各频点噪声能量noise(j),j=1~N。
步骤S708:根据所述功率谱和所述噪声能量计算各频点信噪比;
具体地,各频点信噪比snr(j)=level(j)/noise(j),j=1~N。
步骤S710:根据所述各频点信噪比计算各频点信噪比平方之和;
具体地,各频点信噪比平方之和
步骤S712:比较所述各频点信噪比平方之和是否小于第三预设阈值;
具体地,本发明实施例的的第三预设阈值与N的取值有关,例如N等于64时,该第一预设阈值可以设为2;当比较结果为是时,则执行步骤S718,否则执行步骤S714;
需要说明的是,本发明实施例不限于该第三预设阈值的大小,技术人员可以根据自身需求或经验来设置该第三预设阈值。
步骤S714:计算该语音数据帧与该语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值;
具体地,参考上述图6实施例中的步骤S602,这里不再赘述。
步骤S716:检测计算得到的M个绝对值是否都小于第二预设阈值;
具体地,参考上述图6实施例中的步骤S604,当检测结果为是时,则执行步骤S718,否则执行步骤S720。
步骤S718:不对该语音数据帧进行重传;
步骤S720:将识别出的语音关键帧放入丢包重传处理队列;
步骤S722:针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
具体地,步骤S720和步骤S722可以参考上述图2实施例中步骤S202和步骤S204的描述,这里不再赘述。
需要说明的是,本发明实施例中图4、图5和图6实施例可以任意组合不限于以上4种,还有其它判断组合的方式,例如组合中执行的先后顺序发生变化等,这里不全部罗列,本领域技术人员根据本发明实施例的描述即可实现的组合方式都属于本发明的保护范围之内。
还需要说明的是,数据发送方向数据接收方发送的语音非关键帧发生丢包时,数据接收方可以根据实际情况忽略该语音非关键帧或通过丢包补偿手段来恢复,例如通过在该语音数据帧相关性较大的前一帧,或者基音周期与前一帧相差很小的帧来进行恢复。
实施本发明实施例,将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;对目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;针对多个语音数据帧,仅对在丢包重传处理队列中的语音关键帧执行丢包重传处理,而不对语音非关键帧执行丢包重传处理,实现了无需对每个语音数据帧都做接收状态确认看是否需要进行重传,有效解决了现有技术在网络能力较弱情况下因数据重传导致网络带宽压力增大,不利于进行数据传输的技术问题,本发明实施例通过定义语音非关键帧,并判断发送的语音数据帧是否为语音非关键帧来执行重传策略,对非语音帧或能量技校的噪声帧或通过丢包补偿手段能很好恢复的帧,不执行重传,可以节省通话过程中较大一部分的帧重传,从而更加有效地利用了网络带宽资源。
为了便于更好地实施本发明实施例的上述方案,本发明还对应提供了一种语音数据传输装置,如图8示出的本发明实施例提供的语音数据传输装置的结构示意图,语音数据传输装置80可以包括:放入发送模块800、识别放入模块802和重传模块804,其中,
放入发送模块800用于将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
识别放入模块802用于对所述目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;
重传模块804用于针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
具体地,如图9示出的本发明实施例提供的重传模块的结构示意图,重传模块804可以包括:第一启动单元8040、第一检测单元8042、第一删除单元8044和重传子单元8046,其中,
第一启动单元8040用于针对处于所述丢包重传处理队列的重传发送窗口的当前语音关键帧,启动第一定时器进行计时;所述第一定时器的计时起算时间为所述当前语音关键帧在所述第一发送队列中的发送时间点;
第一检测单元8042用于检测是否在所述第一定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧;
第一删除单元8044用于当检测结果为是时,在所述丢包重传处理队列中将所述当前语音关键帧删除;
重传子单元8046用于当检测结果为否时,则将所述丢包重传处理队列中的所述当前语音关键帧重传给所述数据接收方。
进一步地,重传模块804还可以包括第二启动单元和第二删除单元,具体地,该第二启动单元,用于在第一启动单元8040启动第一定时器进行计时的同时,启动第二定时器进行计时,所述第二定时器的计时时长大于所述第一定时器的计时时长;该第二删除单元,用于若在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
或者,
重传模块804还可以包括第三启动单元和第三删除单元,具体地,第三启动单元,用于在重传子单元8046将所述丢包重传处理队列中的语音关键帧重传给所述数据接收方之后,启动第二定时器进行计时;第三删除单元,用于在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧时,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
需要说明的是,重传模块804可以同时包括第二启动单元、第二删除单元以及第三启动单元和第三删除单元。
再进一步地,如图10示出的本发明实施例提供的识别放入模块的结构示意图,识别放入模块802可以包括:第一计算单元8020和能量判断单元8022,其中,
第一计算单元8020用于计算语音数据帧的帧能量;
能量判断单元8022用于判断所述帧能量是否小于第一预设阈值;
当判断结果为是时,则识别出所述语音数据帧为语音非关键帧。
再进一步地,识别放入模块802还可以包括分析单元8024,用于分析语音数据帧是否不含有语音内容信息;当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
再进一步地,如图11示出的本发明提供的识别放入模块的另一实施例的结构示意图,识别放入模块802可以包括:第二计算单元8026和第二检测单元8028,其中,
第二计算单元8026用于计算语音数据帧与所述语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值;
第二检测单元8028用于检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
再进一步地,如图12示出的本发明提供的识别放入模块的另一实施例的结构示意图,识别放入模块802包括第一计算单元8020、能量判断单元8022和分析模块8024外,还可以包括第二计算单元8026和第二检测单元8028,其中,
能量判断单元8024判断出所述帧能量不小于第一预设阈值时,触发分析模块8024分析语音数据帧是否不含有语音内容信息,当分析出所述语音数据帧含有语音内容信息确定时,触发第二计算单元8026计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值。
需要说明的是,识别放入模块802中,第一计算单元8020和能量判断单元8022,与分析模块8024,以及第二计算单元8026和第二检测单元8028的组合不限于以上所述,还可以按照方法实施例的描述进行任意组的组合。
再进一步地,如图13示出的本发明实施例提供的分析单元的结构示意图,分析单元8024可以包括:变换估算单元80240、信噪比计算单元80242、平方和计算单元80244和比较单元80246,其中,
变换估算单元80240用于对所述语音数据帧进行2N点fft变换,得到所述语音数据帧的功率谱;并估算各频点噪声能量;所述N为正整数;
信噪比计算单元80242用于根据所述功率谱和所述噪声能量计算各频点信噪比;
平方和计算单元80244用于根据所述各频点信噪比计算各频点信噪比平方之和;
比较单元80246用于比较所述各频点信噪比平方之和是否小于第三预设阈值;
当比较结果为是时,则识别出所述语音数据帧为语音非关键帧。
综上所述,实施本发明实施例,将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;对目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;针对多个语音数据帧,仅对在丢包重传处理队列中的语音关键帧执行丢包重传处理,而不对语音非关键帧执行丢包重传处理,实现了无需对每个语音数据帧都做接收状态确认看是否需要进行重传,有效解决了现有技术在网络能力较弱情况下因数据重传导致网络带宽压力增大,不利于进行数据传输的技术问题,本发明实施例通过定义语音非关键帧,并判断发送的语音数据帧是否为语音非关键帧来执行重传策略,对非语音帧或能量技校的噪声帧或通过丢包补偿手段能很好恢复的帧,不执行重传,可以节省通话过程中较大一部分的帧重传,从而更加有效地利用了网络带宽资源。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (22)

1.一种语音数据传输方法,其特征在于,包括:
将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
对所述目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;
针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
2.如权利要求1所述的方法,其特征在于,所述对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理,包括:
针对处于所述丢包重传处理队列的重传发送窗口的当前语音关键帧,启动第一定时器进行计时;所述第一定时器的计时起算时间为所述当前语音关键帧在所述第一发送队列中的发送时间点;
检测是否在所述第一定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧;
当检测结果为是时,则在所述丢包重传处理队列中将所述当前语音关键帧删除;
当检测结果为否时,则将所述丢包重传处理队列中的所述当前语音关键帧重传给所述数据接收方。
3.如权利要求2所述的方法,其特征在于,所述启动第一定时器进行计时的同时,还包括:
启动第二定时器进行计时,所述第二定时器的计时时长大于所述第一定时器的计时时长;
若在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
4.如权利要求2所述的方法,其特征在于,所述将所述丢包重传处理队列中的语音关键帧重传给所述数据接收方之后,还包括:
启动第二定时器进行计时;
在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧时,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
5.如权利要求1所述的方法,其特征在于,所述对所述第一发送队列中的多个语音数据帧进行识别,包括:
计算语音数据帧的帧能量;
判断所述帧能量是否小于第一预设阈值;
当判断结果为是时,则识别出所述语音数据帧为语音非关键帧。
6.如权利要求1所述的方法,其特征在于,所述对所述第一发送队列中的多个语音数据帧进行识别,包括:
分析语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
7.如权利要求1所述的方法,其特征在于,所述对所述第一发送队列中的多个语音数据帧进行识别,包括:
计算语音数据帧与所述语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值;
检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
8.如权利要求5所述的方法,其特征在于,当判断出所述帧能量不小于第一预设阈值时,还包括:
分析所述语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
9.如权利要求5所述的方法,其特征在于,当判断出所述帧能量不小于第一预设阈值时,还包括:
计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
10.如权利要求6或8所述的方法,其特征在于,当分析出所述语音数据帧含有语音内容信息时,还包括:
计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
11.如权利要求6或8所述的方法,其特征在于,所述分析所述语音数据帧是否不含有语音内容信息,包括:
对所述语音数据帧进行2N点fft变换,得到所述语音数据帧的功率谱;并估算各频点噪声能量;所述N为正整数;
根据所述功率谱和所述噪声能量计算各频点信噪比;
根据所述各频点信噪比计算各频点信噪比平方之和;
比较所述各频点信噪比平方之和是否小于第三预设阈值;
当比较结果为是时,则识别出所述当前语音数据帧为语音非关键帧。
12.一种语音数据传输装置,其特征在于,包括:
放入发送模块,用于将多个语音数据帧放入目标发送队列,并将其依次发送给数据接收方;
识别放入模块,用于对所述目标发送队列中的多个语音数据帧进行识别,并将识别出的语音关键帧放入丢包重传处理队列;
重传模块,用于针对所述多个语音数据帧,仅对在所述丢包重传处理队列中的语音关键帧执行丢包重传处理。
13.如权利要求12所述的装置,其特征在于,所述重传模块包括:
第一启动单元,用于针对处于所述丢包重传处理队列的重传发送窗口的当前语音关键帧,启动第一定时器进行计时;所述第一定时器的计时起算时间为所述当前语音关键帧在所述第一发送队列中的发送时间点;
第一检测单元,用于检测是否在所述第一定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧;
第一删除单元,用于当检测结果为是时,在所述丢包重传处理队列中将所述当前语音关键帧删除;
重传子单元,用于当检测结果为否时,则将所述丢包重传处理队列中的所述当前语音关键帧重传给所述数据接收方。
14.如权利要求13所述的装置,其特征在于,所述重传模块还包括:
第二启动单元,用于在所述第一启动单元启动第一定时器进行计时的同时,启动第二定时器进行计时,所述第二定时器的计时时长大于所述第一定时器的计时时长;
第二删除单元,用于若在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
15.如权利要求13所述的装置,其特征在于,所述重传模块还包括:
第三启动单元,用于在所述重传子单元将所述丢包重传处理队列中的语音关键帧重传给所述数据接收方之后,启动第二定时器进行计时;
第三删除单元,用于在所述第二定时器计时结束前接收到所述数据接收方返回的针对所述当前语音关键帧的状态确认帧时,或者在所述第二定时器计时结束时,在所述丢包重传处理队列中将所述当前语音关键帧删除。
16.如权利要求12所述的装置,其特征在于,所述识别放入模块包括:
第一计算单元,用于计算语音数据帧的帧能量;
能量判断单元,用于判断所述帧能量是否小于第一预设阈值;
当判断结果为是时,则识别出所述语音数据帧为语音非关键帧。
17.如权利要求12所述的装置,其特征在于,所述识别放入模块包括:
分析单元,用于分析语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
18.如权利要求12所述的装置,其特征在于,所述识别放入模块包括:
第二计算单元,用于计算语音数据帧与所述语音数据帧相对的上一个语音数据帧的前M个lsp系数差的绝对值;
第二检测单元,用于检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
19.如权利要求16所述的装置,其特征在于,所述识别放入模块还包括:
分析单元,用于在所述能量判断单元判断出所述帧能量不小于第一预设阈值时,分析语音数据帧是否不含有语音内容信息;
当分析结果为是时,则识别出所述语音数据帧为语音非关键帧。
20.如权利要求16所述的装置,其特征在于,所述识别放入模块还包括:
第二计算单元,用于在所述能量判断单元判断出所述帧能量不小于第一预设阈值时,计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
第二检测单元,用于检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
21.如权利要求17或19所述的装置,其特征在于,所述识别放入模块还包括:
第二计算单元,用于在所述分析模块分析出所述语音数据帧含有语音内容信息确定时,计算所述语音数据帧与所述语音数据帧相对的上一语音数据帧的前M个lsp系数差的绝对值;
第二检测单元,用于检测计算得到的M个绝对值是否都小于第二预设阈值;
当检测结果为是时,则识别出所述语音数据帧为语音非关键帧。
22.如权利要求17或19所述的装置,其特征在于,所述分析单元包括:
变换估算单元,用于对所述语音数据帧进行2N点fft变换,得到所述语音数据帧的功率谱;并估算各频点噪声能量;所述N为正整数;
信噪比计算单元,用于根据所述功率谱和所述噪声能量计算各频点信噪比;
平方和计算单元,用于根据所述各频点信噪比计算各频点信噪比平方之和;
比较单元,用于比较所述各频点信噪比平方之和是否小于第三预设阈值;
当比较结果为是时,则识别出所述语音数据帧为语音非关键帧。
CN201610356121.9A 2016-05-25 2016-05-25 一种语音数据传输方法及装置 Active CN106067847B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201610356121.9A CN106067847B (zh) 2016-05-25 2016-05-25 一种语音数据传输方法及装置
PCT/CN2017/085457 WO2017202290A1 (zh) 2016-05-25 2017-05-23 语音数据传输方法及装置
EP17802136.6A EP3468132A4 (en) 2016-05-25 2017-05-23 METHOD AND DEVICE FOR TRANSMITTING LANGUAGE DATA
US15/984,569 US10594449B2 (en) 2016-05-25 2018-05-21 Voice data transmission method and device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610356121.9A CN106067847B (zh) 2016-05-25 2016-05-25 一种语音数据传输方法及装置

Publications (2)

Publication Number Publication Date
CN106067847A true CN106067847A (zh) 2016-11-02
CN106067847B CN106067847B (zh) 2019-10-22

Family

ID=57420304

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610356121.9A Active CN106067847B (zh) 2016-05-25 2016-05-25 一种语音数据传输方法及装置

Country Status (4)

Country Link
US (1) US10594449B2 (zh)
EP (1) EP3468132A4 (zh)
CN (1) CN106067847B (zh)
WO (1) WO2017202290A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107277423A (zh) * 2017-07-28 2017-10-20 北京小米移动软件有限公司 丢包重传的方法及装置
WO2017202290A1 (zh) * 2016-05-25 2017-11-30 腾讯科技(深圳)有限公司 语音数据传输方法及装置
CN108234420A (zh) * 2016-12-21 2018-06-29 北京酷我科技有限公司 一种解决流媒体丢失视频头的系统及方法
CN108616925A (zh) * 2016-12-13 2018-10-02 中兴通讯股份有限公司 一种数据流的处理方法及装置
CN111371534A (zh) * 2020-06-01 2020-07-03 腾讯科技(深圳)有限公司 一种数据重传方法、装置、电子设备和存储介质
CN113037440A (zh) * 2021-05-25 2021-06-25 腾讯科技(深圳)有限公司 数据重传处理方法、装置、计算机设备和存储介质
WO2022001494A1 (zh) * 2020-06-28 2022-01-06 腾讯科技(深圳)有限公司 丢包重发方法、系统、装置、计算机可读存储介质及设备
CN113936669A (zh) * 2020-06-28 2022-01-14 腾讯科技(深圳)有限公司 数据传输方法、系统、装置、计算机可读存储介质及设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112350816B (zh) * 2020-11-12 2023-01-17 海能达通信股份有限公司 一种数据传输方法、存储介质和通信设备
US11922026B2 (en) 2022-02-16 2024-03-05 T-Mobile Usa, Inc. Preventing data loss in a filesystem by creating duplicates of data in parallel, such as charging data in a wireless telecommunications network
CN116112126B (zh) * 2023-04-12 2023-06-09 深圳市云天智能通讯有限公司 基于通话场景自适应降噪方法、装置及通信终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1622193A (zh) * 2004-12-24 2005-06-01 北京中星微电子有限公司 一种语音信号检测方法
US20100091748A1 (en) * 2006-09-28 2010-04-15 Kyocera Corporation Voice Transmission Apparatus
CN102137438A (zh) * 2010-01-25 2011-07-27 华为技术有限公司 一种ip网络资源的分配方法及装置
CN104506287A (zh) * 2014-12-29 2015-04-08 重庆邮电大学 一种td-lte应急通信下的实时语音通信方法
CN104956437A (zh) * 2013-02-08 2015-09-30 高通股份有限公司 执行增益控制的系统及方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2765715B1 (fr) * 1997-07-04 1999-09-17 Sextant Avionique Procede de recherche d'un modele de bruit dans des signaux sonores bruites
DE60020672T2 (de) * 2000-03-02 2005-11-10 Matsushita Electric Industrial Co., Ltd., Kadoma Verfahren und Vorrichtung zur Wiederholung der Videodatenrahmen mit Prioritätsstufen
CA2396213A1 (en) * 2002-07-31 2004-01-31 Anthony Gerkis Automatic retransmit request protocol for channels with time-varying capacity
CN101098173A (zh) * 2006-06-30 2008-01-02 华为技术有限公司 动态调整无线网络中传输的业务服务质量的方法
US8260609B2 (en) * 2006-07-31 2012-09-04 Qualcomm Incorporated Systems, methods, and apparatus for wideband encoding and decoding of inactive frames
EP2529502A1 (en) * 2010-01-28 2012-12-05 Thomson Licensing A method and apparatus for retransmission decision making
US9143279B2 (en) * 2013-01-18 2015-09-22 Qualcomm Incorporated Methods and devices for facilitating data retransmissions in wireless communication systems
CN103259803B (zh) * 2013-06-04 2016-01-27 腾讯科技(深圳)有限公司 一种音频回放方法、装置和系统
CN103490972B (zh) * 2013-09-27 2016-06-22 迈普通信技术股份有限公司 多链路隧道报文传输方法及系统
GB2520536B (en) * 2013-11-25 2017-05-03 Canon Kk Method and device for data communication in a communication network
CN103632677B (zh) * 2013-11-27 2016-09-28 腾讯科技(成都)有限公司 带噪语音信号处理方法、装置及服务器
US10516545B2 (en) * 2013-12-31 2019-12-24 Telecom Italia S.P.A. Congestion management in a multicast communication network
JPWO2016068316A1 (ja) * 2014-10-31 2017-08-10 日本電気株式会社 無線基地局、パケット送信装置、無線端末、制御方法、及びプログラム
EP3292712B1 (en) * 2015-05-06 2019-11-06 Telefonaktiebolaget LM Ericsson (publ) Methods and devices for handling data packet transmissions in a multi-path multi-hop adapted wireless communication network
GB2539277A (en) * 2015-06-12 2016-12-14 Canon Kk Backoff based selection method of channels for data transmission
CN106067847B (zh) * 2016-05-25 2019-10-22 腾讯科技(深圳)有限公司 一种语音数据传输方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1622193A (zh) * 2004-12-24 2005-06-01 北京中星微电子有限公司 一种语音信号检测方法
US20100091748A1 (en) * 2006-09-28 2010-04-15 Kyocera Corporation Voice Transmission Apparatus
CN102137438A (zh) * 2010-01-25 2011-07-27 华为技术有限公司 一种ip网络资源的分配方法及装置
CN104956437A (zh) * 2013-02-08 2015-09-30 高通股份有限公司 执行增益控制的系统及方法
CN104506287A (zh) * 2014-12-29 2015-04-08 重庆邮电大学 一种td-lte应急通信下的实时语音通信方法

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017202290A1 (zh) * 2016-05-25 2017-11-30 腾讯科技(深圳)有限公司 语音数据传输方法及装置
US10594449B2 (en) 2016-05-25 2020-03-17 Tencent Technology (Shenzhen) Company Limited Voice data transmission method and device
CN108616925B (zh) * 2016-12-13 2023-03-21 中兴通讯股份有限公司 一种数据流的处理方法及装置
CN108616925A (zh) * 2016-12-13 2018-10-02 中兴通讯股份有限公司 一种数据流的处理方法及装置
CN108234420A (zh) * 2016-12-21 2018-06-29 北京酷我科技有限公司 一种解决流媒体丢失视频头的系统及方法
CN107277423B (zh) * 2017-07-28 2020-10-09 北京小米移动软件有限公司 丢包重传的方法及装置
CN107277423A (zh) * 2017-07-28 2017-10-20 北京小米移动软件有限公司 丢包重传的方法及装置
CN111371534A (zh) * 2020-06-01 2020-07-03 腾讯科技(深圳)有限公司 一种数据重传方法、装置、电子设备和存储介质
WO2022001494A1 (zh) * 2020-06-28 2022-01-06 腾讯科技(深圳)有限公司 丢包重发方法、系统、装置、计算机可读存储介质及设备
CN113936669A (zh) * 2020-06-28 2022-01-14 腾讯科技(深圳)有限公司 数据传输方法、系统、装置、计算机可读存储介质及设备
US11908482B2 (en) 2020-06-28 2024-02-20 Tencent Technology (Shenzhen) Company Limited Packet loss retransmission method, system, and apparatus, computer-readable storage medium, and device
CN113037440A (zh) * 2021-05-25 2021-06-25 腾讯科技(深圳)有限公司 数据重传处理方法、装置、计算机设备和存储介质
CN113037440B (zh) * 2021-05-25 2021-08-06 腾讯科技(深圳)有限公司 数据重传处理方法、装置、计算机设备和存储介质
WO2022247550A1 (zh) * 2021-05-25 2022-12-01 腾讯科技(深圳)有限公司 数据重传处理方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
WO2017202290A1 (zh) 2017-11-30
CN106067847B (zh) 2019-10-22
EP3468132A4 (en) 2019-10-16
US20180278372A1 (en) 2018-09-27
US10594449B2 (en) 2020-03-17
EP3468132A1 (en) 2019-04-10

Similar Documents

Publication Publication Date Title
CN106067847B (zh) 一种语音数据传输方法及装置
CN101155311B (zh) 一种视频通信中的视频码流错误检测和处理方法
US11223669B2 (en) In-service quality monitoring system with intelligent retransmission and interpolation
JP2003078565A (ja) 無線通信装置
US9490850B1 (en) Method and apparatus for decoding packetized data
CN102859921A (zh) 用于实现加速的吞吐量的系统和方法
CN103763073B (zh) 一种丢包重传的方法及终端
CN113037440A (zh) 数据重传处理方法、装置、计算机设备和存储介质
JPWO2007061087A1 (ja) 通信装置、通信システム、通信方法、および、通信プログラム
CN110557677A (zh) 一种视频传输的方法及装置
TWI658715B (zh) 通信裝置、可用頻寬計算系統、可用頻寬計算方法及程式
CN113473185B (zh) 基于视频流关键帧突发特性的可用带宽探测方法及装置
CN112994851B (zh) 一种支持差异化可协商的并行数据通信方法及装置
CN109688425A (zh) 直播数据推流方法
CN103237314B (zh) 业务质量评测方法和装置
CN114337942B (zh) 一种报文重传方法、装置及电子设备
CN110855510A (zh) 数据传输优化方法、装置、设备及介质
Liu et al. CMT-SR: A selective retransmission based concurrent multipath transmission mechanism for conversational video
RU2450466C1 (ru) Способ передачи информации по каналам связи и система для его осуществления
CN104506383A (zh) 衡量服务器在tcp传输中对数据处理效率的方法及系统
Vadori et al. Markov analysis of video transmission based on differential encoded HARQ
CN109660320B (zh) 网络端到端差错控制传输方法、装置及电子设备
JP2011211616A (ja) 動画像伝送装置、動画像伝送システム、動画像伝送方法およびプログラム
CN112751730B (zh) 抗丢包引入时延的统计方法、评估方法、装置、设备及介质
CN1592244A (zh) 一种用于无线局域网的混合自动重发请求方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant