CN107481709B - 音频数据传输方法及装置 - Google Patents

音频数据传输方法及装置 Download PDF

Info

Publication number
CN107481709B
CN107481709B CN201710684303.3A CN201710684303A CN107481709B CN 107481709 B CN107481709 B CN 107481709B CN 201710684303 A CN201710684303 A CN 201710684303A CN 107481709 B CN107481709 B CN 107481709B
Authority
CN
China
Prior art keywords
audio
intelligent terminal
data
audio data
accompaniment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710684303.3A
Other languages
English (en)
Other versions
CN107481709A (zh
Inventor
刘翔
张晓光
肖典欢
陈雪琪
王伟
孙观楠
周戈
韩延杰
黄志威
张曙光
殷祚纯
李贤茂
吴炎斌
李伟
曾兴云
邱文杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Music Entertainment Technology Shenzhen Co Ltd
Original Assignee
Tencent Music Entertainment Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Music Entertainment Technology Shenzhen Co Ltd filed Critical Tencent Music Entertainment Technology Shenzhen Co Ltd
Priority to CN201710684303.3A priority Critical patent/CN107481709B/zh
Publication of CN107481709A publication Critical patent/CN107481709A/zh
Application granted granted Critical
Publication of CN107481709B publication Critical patent/CN107481709B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/36Accompaniment arrangements
    • G10H1/361Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis

Abstract

本发明公开了一种音频数据传输方法及装置,属于数据传输领域。该音频数据传输方法包括:接收播放设备发送的第一策略调整请求,获取所述第一策略调整请求中包含的音频采样频率参数和音频编码格式参数;根据所述音频采样频率参数调节麦克风的采样参数,通过所述麦克风采集录音数据;将所述录音数据与伴奏数据进行混音,得到音频数据;按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码,得到音频数据流;将所述音频数据流发送至所述播放设备。本发明解决了相关技术中K歌需要一套专业的硬件设备支持,导致用户不能随心所欲,随时随地的K歌,达到了降低K歌所需要的硬件要求,使得用户能随时随地的K歌的效果。

Description

音频数据传输方法及装置
技术领域
本发明实施例涉及数据传输领域,特别涉及一种音频数据传输方法及装置。
背景技术
K歌有非常广大的群众基础,很多人喜欢通过唱歌来抒发情感。
目前,K歌的方式比较单一。用户主要是在KTV包房或者在家,和一群好友进行K歌。
但无论是在KTV包房还是在家进行K歌,均需要一套专业的硬件设备对用户的人声和歌曲伴奏进行混音后输出。如果KTV包房爆满或者用户无力购买硬件设备,该用户则不能随心所欲,随时随地的K歌。
发明内容
为了解决现有技术中存在的问题,本发明实施例提供了一种音频数据传输方法及装置。技术方案如下:
根据本发明实施例的第一方面,提供了一种音频数据传输方法,应用于智能终端中,所述方法包括:
接收播放设备发送的第一策略调整请求,获取所述第一策略调整请求中包含的音频采样频率参数和音频编码格式参数;
根据所述音频采样频率参数调节麦克风的采样参数,通过所述麦克风采集录音数据;
将所述录音数据与伴奏数据进行混音,得到音频数据;
按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码,得到音频数据流;
将所述音频数据流发送至所述播放设备。
根据本发明实施例的第二方面,提供了一种音频数据传输方法,应用于播放设备中,所述方法包括:
向智能终端发送第一策略调整请求,所述第一策略调整请求包含音频采样频率参数和音频编码格式参数;
接收所述智能终端发送的音频数据流,按照所述音频编码格式参数对应的解码方式对所述音频数据流进行解码,得到音频数据;
当接收到音频编码格式参数调整指令时,调整所述音频编码格式参数,将调整后的音频编码格式参数发送至所述智能终端;
输出所述音频数据。
根据本发明实施例的第三方面,提供了一种音频数据传输装置,应用于智能终端中,所述装置包括:
接收模块,用于接收播放设备发送的第一策略调整请求,获取所述第一策略调整请求中包含的音频采样频率参数和音频编码格式参数;
采集模块,用于根据所述音频采样频率参数调节麦克风的采样参数,通过所述麦克风采集录音数据;
混音模块,用于将所述录音数据与伴奏数据进行混音,得到音频数据;
编码模块,用于按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码,得到音频数据流;
第一发送模块,用于将所述音频数据流发送至所述播放设备。
根据本发明实施例的第四方面,提供了一种音频数据传输装置,应用于播放设备中,所述装置包括:
第一发送模块,用于向智能终端发送第一策略调整请求,所述第一策略调整请求包含音频采样频率参数和音频编码格式参数;
解码模块,用于接收所述智能终端发送的音频数据流,按照所述音频编码格式参数对应的解码方式对所述音频数据流进行解码,得到音频数据;
调整模块,用于当接收到音频编码格式参数调整指令时,调整所述音频编码格式参数,将调整后的音频编码格式参数发送至所述智能终端;
输出模块,用于输出所述音频数据。
根据本发明实施例的第五方面,提供了一种智能终端,所述智能终端包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由所述处理器加载并执行以实现如第一方面所述的音频数据传输方法。
根据本发明实施例的第六方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如第一方面所述的音频数据传输方法。
根据本发明实施例的第七方面,提供了一种播放设备,所述播放设备包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由所述处理器加载并执行以实现如第二方面所述的音频数据传输方法。
根据本发明实施例的第八方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如第二方面所述的音频数据传输方法。
本发明实施例提供的技术方案带来的有益效果是:
智能终端接收播放设备发送的音频控制参数,根据音频控制参数调整麦克风的采样参数和音频数据的编码方式,将编码后的音频数据发送至播放设备,由播放设备解码后输出该音频数据,由于通过音频控制参数可将音频数据调整至符合播放设备播放要求的音频;解决了相关技术中K歌需要一套专业的硬件设备支持,导致用户不能随心所欲,随时随地的K歌,达到了降低K歌所需要的硬件要求,使得用户能随时随地的K歌的效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例提供的实施环境的示意图;
图2A是本发明一个实施例中提供的音频数据传输方法的流程图;
图2B是本发明一个实施例中提供的录音数据与伴奏数据混音得到音频数据的示意图;
图3是本发明另一个实施例中提供的音频数据传输方法的流程图;
图4是本发明再一个实施例中提供的音频数据传输方法的流程图;
图5是本发明一个实施例提供的音频数据传输装置的结构方框图;
图6是本发明一个实施例提供的音频数据传输装置的结构方框图;
图7是本发明一个实施例提供的智能终端的结构示意图;
图8是本发明一个实施例提供的播放设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
请参考图1,其示出了本发明一个实施例提供的实施环境的示意图,该实施环境中包括智能终端110和播放设备120。
智能终端110和播放设备120可以通过无线网络方式或有线网络方式连接,这里所讲的无线网络方式可以为移动数据网络或无线保真(英文:Wireless-Fidelity,Wi-Fi),或蓝牙等无线网络方式等。
智能终端110可以向播放设备120发送信息,也可以从播放设备120中获取信息。
这里所讲的智能终端110可以包括智能手机、平板电脑、台式电脑等。
这里所讲的播放设备120可以是音箱、智能电视等。
图2A是本发明一个实施例中提供的音频数据传输方法的流程图,如图2A所示,该音频数据传输方法包括以下步骤。
步骤201,播放设备向智能终端发送第一策略调整请求,该第一策略调整请求包含音频采样频率参数和音频编码格式参数。
由于不同的播放设备支持播放的音频所对应的采样频率参数和音频编码格式参数通常不同,为了保证后续播放设备能正常播放智能终端向播放设备发送的音频数据,播放设备会提前向智能终端发送该播放设备支持的采样频率参数和音频编码格式参数。智能终端接收到音频采样频率参数和音频编码格式参数后,将根据接收到的参数调整音频数据。
需要说明的是,音频采样频率参数可以为22050Hz、44100Hz等,本实施例不对音频编码格式参数的具体频率做任何限定。
需要说明的是,音频编码格式参数可以为脉冲编码调制(Pulse CodeModulation,PCM)、自适应差分脉冲编码调制(Adaptive Differential Pulse CodeModulation,ADPCM)等格式参数,本实施例不对音频编码格式参数的具体编码格式做任何限定。
需要说明的是,该第一策略调整请求可在播放设备与智能终端成功建立连接后发送,可以在播放设备接收到智能终端发送的麦克风开启提示后发送,也可以在播设备判定接收到的音频数据流出现丢包或乱序时发送,本实施例并不限定播放设备向智能终端发送第一策略调整请求的时机。
对应的,智能终端接收播放设备发送的第一策略调整请求,获取该第一策略调整请求中包含的音频采样频率参数和音频编码格式参数。
步骤202,智能终端根据音频采样频率参数调节麦克风的采样参数,通过麦克风采集录音数据。
智能终端根据音频采样频率参数调节麦克风的采样参数后,通过麦克风采集到的录音数据所对应的采样频率,与播放设备发送的音频采样频率参数相同。
步骤203,智能终端将录音数据与伴奏数据进行混音,得到音频数据。
其中,伴奏数据可由智能终端从本地获取,也可由智能终端从服务器获取,本实施例并不限定伴奏数据的来源。
具体的,智能终端获取录音数据的各个音频帧和每个音频帧所对应的时间戳以及伴奏数据的各个音频帧和每个音频帧所对应的时间戳,将录音数据和伴奏数据中具有相同时间戳的音频帧叠加得到合成音频帧,该合成音频帧具有原始时间戳,将合成音频帧、伴奏数据具有但录音数据不具有的音频帧以及录音数据具有但伴奏数据不具有的音频帧,按照时间戳由前至后的顺序生成音频数据。
图2B是本发明一个实施例中提供的录音数据与伴奏数据混音得到音频数据的示意图,如图2B所示,录音数据20和伴奏数据30均包括多个音频帧,每个音频帧具有各自的时间戳。如果录音数据20和伴奏数据30中存在相同时间戳的音频帧,智能终端则将录音数据20和伴奏数据30中存在相同时间戳的音频帧叠加,比如将具有相同时间戳的音频帧a1和音频帧b1叠加得到合成音频帧c1,将具有相同时间戳的音频帧a3和音频帧b3叠加得到合成音频帧c2,将具有相同时间戳的音频帧a4和音频帧b6叠加得到合成音频帧c3。最后,将录音数据20和伴奏数据30中未进行叠加的其它音频帧与得到的合成音频帧按照时间戳由前至后的顺序生成音频数据40。
需要说明的是,在智能终端通过麦克风采集录音数据的过程中,步骤203被循环不断地执行。
步骤204,智能终端按照音频编码格式参数对应的编码方式对音频数据进行编码,得到音频数据流。
以PCM编码为例,智能终端通过抽样、量化、编码三个步骤将音频数据从连续变化的模拟信号转换为数字编码,从而得到音频数据流。
步骤205,智能终端将音频数据流发送至播放设备。
对应的,播放设备接收所述智能终端发送的音频数据流。
步骤206,播放设备按照音频编码格式参数对应的解码方式对音频数据流进行解码,得到音频数据。
编码是将音频数据从连续变化的模拟信号转换为数字信号,对应的,解码则是将音频数据从数字信号转换成模拟信号。当智能终端利用PCM对应的编码方式对音频数据进行编码时,播放设备则采用PCM对应的解码方式对音频数据进行编码。
步骤207,当接收到音频编码格式参数调整指令时,播放设备调整音频编码格式参数,将调整后的音频编码格式参数发送至智能终端。
需要说明的是,智能终端利用调整后的音频编码格式参数对应的编码方式对音频数据进行编码得到音频数据流的数据大小,比利用调整前的音频编码格式参数对应的编码方式对音频数据进行编码得到音频数据流的数据大小要小。
当网络流量敏感(比如智能终端和播放设备利用移动数据进行连接、智能终端与播放设备在其他终端所提供移动热点下连接)时,播放设备可调整音频编码格式参数,并将调整后的音频编码格式参数发送至智能终端,由智能终端按照调整后的音频编码格式参数通过麦克风采集录音数据,从而节约数据流量。比如播放设备将音频采样频率参数由PCM调整为ADPCM数据、将采样频率从44100Hz调整为22050Hz。
步骤208,播放设备输出音频数据。
综上所述,本实施例提供的音频数据传输方法,通过智能终端接收播放设备发送的音频控制参数,根据音频控制参数调整麦克风的采样参数和音频数据的编码方式,将编码后的音频数据发送至播放设备,由于通过音频控制参数可将音频数据调整至符合播放设备播放要求的音频;解决了相关技术中K歌需要一套专业的硬件设备支持,导致用户不能随心所欲,随时随地的K歌,达到了降低K歌所需要的硬件要求,使得用户能随时随地的K歌的效果。
图3是本发明另一个实施例中提供的音频数据传输方法的流程图,如图3所示,该音频数据传输方法包括以下步骤。
步骤301,播放设备向智能终端发送第一策略调整请求,该第一策略调整请求包含音频采样频率参数和音频编码格式参数。
对应的,智能终端接收播放设备发送的第一策略调整请求,获取该第一策略调整请求中包含的音频采样频率参数和音频编码格式参数。
步骤302,智能终端根据音频采样频率参数调节麦克风的采样参数,通过麦克风采集录音数据。
步骤303,智能终端获取伴奏数据的伴奏频率参数,判断伴奏频率参数与音频采样频率参数是否相同。
由于录音数据的采样频率与智能终端接收到的音频采样频率参数相同,若伴奏数据的伴奏频率与录音数据的采样频率不同,智能终端则无法对伴奏数据和录音数据进行混音,因此,智能终端需要判断伴奏频率参数与录音数据的采样频率是否相同,即判断伴奏频率参数与音频采样频率参数是否相同。如果相同,智能终端则可直接将伴奏数据和录音数据进行混音。
步骤304,如果伴奏频率参数与音频采样频率参数不相同,智能终端则按照音频采样频率参数对伴奏数据重采样。
重采样后的伴奏数据对应的伴奏频率参数与音频采样频率参数相同,即与录音数据的采样频率相同。
步骤305,智能终端将录音数据与重采样得到的伴奏数据进行混音,得到音频数据。
步骤306,智能终端按照音频编码格式参数对应的编码方式对音频数据进行编码,为音频数据流中的数据包依序添加发送序号,得到音频数据流,其中,相邻数据包的发送序号是连续的。
步骤307,智能终端通过私有协议将音频数据流发送至播放设备,该私有协议至少包含音频数据流中每个数据包的发送序号和flag字段。
该flag字段用于标记音频数据流对应的音频编码格式参数。
其中,私有协议除了包含flag字段,还可能sign字段、seqnumber字段、ver字段以及预留字段等字段。私有协议的数据格式如表一所示:
Figure BDA0001376285960000081
表一
如表一所示,私有协议的数据格式中:sign字段的数据类型为Uint32,占用4个字节,用于标记协议起始位置;seqnumber字段的数据类型为Uint32,占用4个字节,用于标记音频数据流中各个数据包的顺序,以便播放设备统计数据包的接收情况。当所接收的语音数据包序号不连续,即可视为有丢包或乱序的情况发生;ver字段的数据类型为Uint8,占用1个字节,用于标记私有协议的版本号,以及私有协议的后续迭代的扩展;flag字段的数据类型为Uint32,占用4个字节,用于标记音频编码格式参数;预留字段的数据类型为Uint8*3,占用3个字节,用于私有协议的后续迭代的扩展。
需要说明的是,私有协议升级版本号后,可支持更多音频编码格式。
对应的,播放设备通过私有协议接收智能终端发送的音频数据流。
步骤308,播放设备按照音频编码格式参数对应的解码方式对音频数据流进行解码,得到音频数据。
步骤309,播放设备获取音频数据流中各个数据包携带的发送序号。
步骤310,当各个数据包携带的发送序号不连续时,播放设备判定音频数据流出现丢包或乱序。
由于智能终端为音频数据流中的数据包依序添加发送序号,因此音频数据流中相邻数据包的发送序号是连续的。当播放设备获取到的音频数据流中各个数据包携带的发送序号不连续时,说明音频数据流出现丢包或乱序。
步骤311,当接收到音频编码格式参数调整指令时,播放设备调整音频编码格式参数,将调整后的音频编码格式参数发送至智能终端。
步骤312,播放设备输出音频数据。
需要说明的是,由于本实施例中步骤301至步骤302与步骤201至步骤202类似,步骤308与步骤206类似,步骤311至步骤312与步骤207至步骤208类似,因此本实施例不对步骤301至步骤302、步骤308以及步骤311至步骤312赘述说明。
综上所述,本实施例提供的音频数据传输方法,通过智能终端接收播放设备发送的音频控制参数,根据音频控制参数调整麦克风的采样参数和音频数据的编码方式,将编码后的音频数据发送至播放设备,由于通过音频控制参数可将音频数据调整至符合播放设备播放要求的音频;解决了相关技术中K歌需要一套专业的硬件设备支持,导致用户不能随心所欲,随时随地的K歌,达到了降低K歌所需要的硬件要求,使得用户能随时随地的K歌的效果。
本实施例中,由于音频数据流中相邻数据包的发送序号是连续的,因此当播放设备获取到的音频数据流中各个数据包携带的发送序号不连续时,说明音频数据流出现丢包或乱序。
图4是本发明再一个实施例中提供的音频数据传输方法的流程图,如图4所示,该音频数据传输方法包括以下步骤。
步骤401,播放设备向智能终端发送第一策略调整请求,该第一策略调整请求包含音频采样频率参数和音频编码格式参数。
对应的,智能终端接收播放设备发送的第一策略调整请求,获取该第一策略调整请求中包含的音频采样频率参数和音频编码格式参数。
步骤402,智能终端根据音频采样频率参数调节麦克风的采样参数,通过麦克风采集录音数据。
步骤403,智能终端将录音数据与伴奏数据进行混音,得到音频数据。
步骤404,智能终端按照音频编码格式参数对应的编码方式对音频数据进行编码,将音频数据流中预定数量的数据包划分为一组数据段。
由于校验包需要根据至少两个数据生成,因此,当音频数据流中的未被划分入数据段的数据包的数量未达到预定数量时,智能终端判定数据包的数量是否小于2,如果数据包的数量不小于2,智能终端则将音频数据流中的未被划分入数据段的数据包划分为一组数据段,如果数据包的数量小于2,智能终端则不对未被划分入数据段的数据包进行数据组的划分。
步骤405,对于每组数据段,智能终端根据数据段中的数据包生成数据段对应的校验包。
比如数据段1中包括数据包a,数据包b,数据包c,智能终端可对数据包a,数据包b,数据包c进行异或校验,生成数据段1对应的校验包d。
需要说明的是,校验包的生成方式可为奇偶校验、异或校验、前向纠错编码等,本实施例不限定校验包的具体生成方式。
步骤406,智能终端将校验包添加入数据段中,得到音频数据流。
比如,当智能终端可对数据段1中的数据包a,数据包b,数据包c进行异或校验,生成数据段1对应的校验包d后,将校验包d添加入数据段1中,被添加校验包d后的数据段1包括数据包a,数据包b,数据包c以及校验包d。
步骤407,智能终端将音频数据流发送至播放设备。
对应的,播放设备接收智能终端发送的音频数据流。
步骤408,播放设备按照音频编码格式参数对应的解码方式对音频数据流进行解码,得到音频数据。
步骤409,当接收到音频编码格式参数调整指令时,播放设备调整音频编码格式参数,将调整后的音频编码格式参数发送至智能终端。
步骤410,播放设备确定出音频数据流中出现丢包或乱序的目标数据段,检测目标数据段中是否包括校验包。
步骤411,当目标数据段包括校验包时,播放设备根据检验包对目标数据段中丢包或乱序的数据包进行恢复。
当目标数据段包括校验包时,播放设备可利用检验包以及目标数据段中未出现丢包或乱序的数据包,对该目标数据段中丢包或乱序的数据包进行恢复。
步骤412,播放设备输出数据包恢复后得到的音频数据。
需要说明的是,由于本实施例中步骤401至步骤403与步骤201至步骤203类似,步骤407至步骤409与步骤205至步骤207类似,因此本实施例不对步骤401至步骤403、步骤407至步骤409赘述说明。
综上所述,本实施例提供的音频数据传输方法,通过智能终端接收播放设备发送的音频控制参数,根据音频控制参数调整麦克风的采样参数和音频数据的编码方式,将编码后的音频数据发送至播放设备,由于通过音频控制参数可将音频数据调整至符合播放设备播放要求的音频;解决了相关技术中K歌需要一套专业的硬件设备支持,导致用户不能随心所欲,随时随地的K歌,达到了降低K歌所需要的硬件要求,使得用户能随时随地的K歌的效果。
本实施例中,当目标数据段包括校验包时,播放设备可利用检验包以及目标数据段中未出现丢包或乱序的数据包,对该目标数据段中丢包或乱序的数据包进行恢复。
在一种可能实现的方式中,智能终端与播放设备成功建立连接之后,智能终端周期向播放设备发送心跳包,来确定与播放设备是否处于信息交互的状态。具体步骤参见步骤S1至步骤S3。
步骤S1,智能终端与播放设备建立连接。
智能终端与播放设备建立连接后,智能终端会向播放设备发送握手包,该握手包中携带有该智能终端的设备信息,该设备信息包括但不限于智能终端的硬件型号、操作系统版本、二进制数据缓冲区大小。当播放设备接收到该握手包后,会向智能终端反馈握手包反馈信息,该握手包反馈信息中携带有该播放设备的设备信息,该设备信息包括但不限于播放设备的硬件型号、操作系统版本、二进制数据缓冲区大小。当智能终端接收到播放设备反馈的握手包反馈信息信息后,则默认该智能终端与播放设备成功建立连接。
需要说明的是,智能终端与播放设备之间的连接方式可以为无线保真(英文:WIreless-FIdelity,简称:WI-FI)连接、蓝牙连接、数据线连接等,本实施例不对连接方式作具体限定。
对应的,播放设备与智能终端建立连接。
步骤S2,如果与播放设备成功建立连接,智能终端则按照预设周期向播放设备发送心跳包。
步骤S3,在与智能终端成功建立连接后的预设时长内,如果播放设备未接收到智能终端按照预设周期发送的心跳包,则断开与智能终端的连接。
智能终端与播放设备成功建立连接后,播放设备启动第一定时器,若在第一定时器超时前,播放设备接收到智能终端发送的心跳包,则关闭第一定时器,并启动第二定时器,若在第二定时器超时前,播放设备接收到智能终端发送的心跳包,则重启第二定时器。其中,第一定时器的第一定时时长和第二定时器的第二定时时长均不小于预设周期,第一定时器的第一定时时长和第二定时器的第二定时时长可以相同也可以不同。若在第一定时器超时前或者在第二定时器超时前,播放设备未接收到智能终端按照预设周期发送的心跳包,说明智能终端与播放设备未处于信息交互的状态,播放设备则断开与智能终端的连接。
需要说明的是,播放设备与智能终端的连接还可以人为断开。
可选的,步骤S2至步骤S3还可被替换为下述步骤:
步骤S4,如果与智能终端成功建立连接,播放设备则按照预设周期向智能终端发送心跳包。
步骤S5,在与播放设备成功建立连接后的预设时长内,如果智能终端未接收到播放设备按照预设周期发送的心跳包,则断开与播放设备的连接。
需要说明的是,步骤S1至步骤S2在步骤201、步骤301以及步骤401之前实施,步骤S3在步骤202至步骤208、步骤302至步骤312、步骤402至步骤412任一位置实施。
在一种可能实现的方式中,播放设备会向智能终端发送第二策略调整请求,来指示智能终端执行相应操作。具体步骤参见步骤Q1至步骤Q2。
步骤Q1,播放设备向智能终端发送第二策略调整请求。
可选的,第二策略调整请求为伴奏切换请求,该伴奏切换请求中携带有伴奏标识,该伴奏切换请求用于指示智能终端向服务器获取该伴奏切换请求中携带的伴奏标识对应的伴奏数据,并播放该伴奏数据。
需要说明的是,该第二策略调整请求为播放设备接收到策略调整指令后向智能终端发送的请求,该策略调整指令可以为预定终端向该播放设备发送的指令,可以为用户在播放设备上进行操控时该播放设备生成的指令,也可以为该播放设备在播放伴奏数据的过程中自动触发的指令。
步骤Q2,当接收到播放设备发送的第二策略调整请求时,智能终端根据第二策略调整请求执行相应操作。
当第二策略调整请求为伴奏切换请求时,播放设备会向智能终端发送伴奏切换请求,来指示智能终端切换伴奏数据,至少存在下述三种可能的实现场景:
1、播放设备与多个智能终端建立连接,当播放设备接收到智能终端A发送的携带有伴奏标识的伴奏切换指令后,将该伴奏标识添加入伴奏切换请求中,并将该伴奏切换请求发送至与该播放设备连接的其他智能终端,当除智能终端A以外的其他智能终端接收到该伴奏切换请求时,播放该伴奏切换请求中携带的伴奏标识所对应的伴奏数据,或者,当智能终端接收到该伴奏切换请求时,获取伴奏切换请求中携带的伴奏标识,向服务器获取该伴奏标识对应的伴奏数据。
2、播放设备在用户对该播放设备进行操控(比如用户在播放设备上进行伴奏选择)时生成伴奏切换指令后,将用户所选择的伴奏数据对应的伴奏标识添加入伴奏切换请求中,并将该伴奏切换请求发送至智能终端,当智能终端接收到该伴奏切换请求时,播放该伴奏切换请求中携带的伴奏标识所对应的伴奏数据,或者,当智能终端接收到该伴奏切换请求时,获取伴奏切换请求中携带的伴奏标识,向服务器获取该伴奏标识对应的伴奏数据。
3、当播放设备播放完伴奏数据B后,根据预先存储的播放列表,获取位于播放列表中位于伴奏数据B对应的伴奏标识B下一位的伴奏标识C,生成伴奏切换指令,将伴奏标识C添加入伴奏切换请求中,并将该伴奏切换请求发送至智能终端,当智能终端接收到该伴奏切换请求时,播放该伴奏切换请求中携带的伴奏标识C所对应的伴奏数据,或者,当智能终端接收到该伴奏切换请求时,获取伴奏切换请求中携带的伴奏标识C,并向服务器获取该伴奏标识C对应的伴奏数据。
需要说明的是,步骤Q1至步骤Q2可在步骤201至步骤208、步骤301至步骤312以及步骤401至步骤412中任一位置实施。
下述为本发明装置实施例,对于装置实施例中未详尽描述的细节,可以参考上述一一对应的方法实施例。
请参考图5,其示出了本发明一个实施例提供的音频数据传输装置的结构方框图。该音频数据传输装置通过硬件或者软硬件的结合实现成为图1中智能终端110的全部或者一部分。该装置包括:接收模块501、采集模块502、混音模块503、编码模块504、和第一发送模块505。
接收模块501,用于接收播放设备发送的第一策略调整请求,获取该第一策略调整请求中包含的音频采样频率参数和音频编码格式参数;
采集模块502,用于根据音频采样频率参数调节麦克风的采样参数,通过麦克风采集录音数据;
混音模块503,用于将录音数据与伴奏数据进行混音,得到音频数据;
编码模块504,用于按照音频编码格式参数对应的编码方式对音频数据进行编码,得到音频数据流;
第一发送模块505,用于将音频数据流发送至播放设备。
综上所述,本实施例提供的音频数据传输装置,通过智能终端接收播放设备发送的音频控制参数,根据音频控制参数调整麦克风的采样参数和音频数据的编码方式,将编码后的音频数据发送至播放设备,由于通过音频控制参数可将音频数据调整至符合播放设备播放要求的音频;解决了相关技术中K歌需要一套专业的硬件设备支持,导致用户不能随心所欲,随时随地的K歌,达到了降低K歌所需要的硬件要求,使得用户能随时随地的K歌的效果。
基于上述实施例提供的音频数据传输装置,可选的,该装置还包括:第一添加模块。
第一添加模块,用于在按照音频编码格式参数对应的编码方式对音频数据进行编码之后,为音频数据流中的数据包依序添加发送序号,其中,相邻数据包的发送序号是连续的。
可选的,该装置还包括:划分模块、生成模块和第二添加模块。
划分模块,用于在按照音频编码格式参数对应的编码方式对音频数据进行编码之后,将音频数据流中预定数量的数据包划分为一组数据段;
生成模块,用于对于每组数据段,根据数据段中的数据包生成数据段对应的校验包;
第二添加模块,用于将校验包添加入数据段中。
可选的,该装置还包括:连接模块和第二发送模块。
连接模块,用于在接收播放设备发送的第一策略调整请求之前,与播放设备建立连接;
第二发送模块,用于如果与播放设备成功建立连接,则按照预设周期向播放设备发送心跳包。
可选的,该第一发送模块505,还用于:
通过私有协议将音频数据流发送至播放设备,私有协议至少包含音频数据流中每个数据包的发送序号和flag字段,该flag字段用于标记音频数据流对应的音频编码格式参数。
可选的,该混音模块503,包括:判断单元、重采样单元和混音单元。
判断单元,用于获取伴奏数据的伴奏频率参数,判断伴奏频率参数与音频采样频率参数是否相同;
重采样单元,用于如果伴奏频率参数与音频采样频率参数不相同,则按照音频采样频率参数对伴奏数据重采样;
混音单元,用于将录音数据与重采样得到的伴奏数据进行混音。
可选的,该装置还包括:执行模块。
执行模块,用于当接收到播放设备发送的第二策略调整请求时,根据第二策略调整请求执行相应操作。
请参考图6,其示出了本发明一个实施例提供的音频数据传输装置的结构方框图。该音频数据传输装置通过硬件或者软硬件的结合实现成为图1中播放设备120的全部或者一部分。该装置包括:第一发送模块601、解码模块602、调整模块603和输出模块604。
第一发送模块601,用于向智能终端发送第一策略调整请求,该第一策略调整请求包含音频采样频率参数和音频编码格式参数;
解码模块602,用于接收智能终端发送的音频数据流,按照音频编码格式参数对应的解码方式对音频数据流进行解码,得到音频数据;
调整模块603,用于当接收到音频编码格式参数调整指令时,调整音频编码格式参数,将调整后的音频编码格式参数发送至智能终端;
输出模块604,用于输出音频数据。
综上所述,本实施例提供的音频数据传输装置,通过智能终端接收播放设备发送的音频控制参数,根据音频控制参数调整麦克风的采样参数和音频数据的编码方式,将编码后的音频数据发送至播放设备,由于通过音频控制参数可将音频数据调整至符合播放设备播放要求的音频;解决了相关技术中K歌需要一套专业的硬件设备支持,导致用户不能随心所欲,随时随地的K歌,达到了降低K歌所需要的硬件要求,使得用户能随时随地的K歌的效果。
基于上述实施例提供的音频数据传输装置,可选的,该装置还包括:获取模块和判定模块。
获取模块,用于在得到音频数据之后,获取音频数据流中各个数据包携带的发送序号;
判定模块,用于当各个数据包携带的发送序号不连续时,判定音频数据流出现丢包或乱序。
可选的,音频数据流包括至少一组数据段,输出模块604,包括:检测单元、恢复单元和输出单元。
检测单元,用于确定出音频数据流中出现丢包或乱序的目标数据段,检测目标数据段中是否包括校验包,检验包是根据目标数据段中的数据包生成的;
恢复单元,用于当目标数据段包括校验包时,根据检验包对目标数据段中丢包或乱序的数据包进行恢复;
输出单元,用于输出数据包恢复后得到的音频数据。
可选的,该装置还包括:连接模块和断开模块。
连接模块,用于在向智能终端发送第一策略调整请求之前,与智能终端建立连接;
断开模块,用于在与智能终端成功建立连接后的预设时长内,如果未接收到智能终端按照预设周期发送的心跳包,则断开与智能终端的连接。
可选的,该解码模块,还用于:
通过私有协议接收智能终端发送的音频数据流,私有协议至少包含音频数据流中每个数据包的发送序号和flag字段,该flag字段用于标记音频数据流对应的音频编码格式参数。
可选的,该装置还包括:第二发送模块。
第二发送模块,用于向智能终端发送第二策略调整请求,第二策略调整请求用于指示智能终端根据第二策略调整请求执行相应操作。
需要说明的是:上述实施例提供的音频数据传输装置,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将服务器的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的音频数据传输装置和音频数据传输方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
本发明实施例还提供了一种计算机可读存储介质,该计算机可读存储介质可以是存储器中所包含的计算机可读存储介质;也可以是单独存在,未装配入智能终端中的计算机可读存储介质。该计算机可读存储介质存储有至少一条指令,该至少一条指令被一个或者一个以上的处理器用来执行上述音频数据传输方法。
请参考图7,其示出了本发明一个实施例提供的智能终端的结构示意图。该智能终端700为图1中的智能终端110。具体来讲:
智能终端700可以包括RF(Radio Frequency,射频)电路710、包括有一个或一个以上计算机可读存储介质的存储器720、输入单元730、显示单元740、传感器750、音频电路760、近场通信模块770、包括有一个或者一个以上处理核心的处理器780、以及电源790等部件。本领域技术人员可以理解,图7中示出的智能终端结构并不构成对智能终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
RF电路710可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器780处理;另外,将涉及上行的数据发送给基站。通常,RF电路710包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(LowNoiseAmplifier,低噪声放大器)、双工器等。此外,RF电路710还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System ofMobile communication,全球移动通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA(CodeDivision Multiple Access,码分多址)、WCDMA(Wideband Code DivisionMultipleAccess,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(ShortMessaging Service,短消息服务)等。
存储器720可用于存储软件程序以及模块,处理器780通过运行存储在存储器720的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器720可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据智能终端700的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器720可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器720还可以包括存储器控制器,以提供处理器780和输入单元730对存储器720的访问。
输入单元730可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,输入单元730可包括图像输入设备731以及其他输入设备732。图像输入设备731可以是摄像头,也可以是光电扫描设备。除了图像输入设备731,输入单元730还可以包括其他输入设备732。具体地,其他输入设备732可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元740可用于显示由用户输入的信息或提供给用户的信息以及智能终端700的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元740可包括显示面板741,可选的,可以采用LCD(Liquid Crystal Display,液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板741。
智能终端700还可包括至少一种传感器750,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板741的亮度,接近传感器可在智能终端700移动到耳边时,关闭显示面板741和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于智能终端700还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路760、扬声器761,传声器762可提供用户与智能终端700之间的音频接口。音频电路760可将接收到的音频数据转换后的电信号,传输到扬声器761,由扬声器761转换为声音信号输出;另一方面,传声器762将收集的声音信号转换为电信号,由音频电路760接收后转换为音频数据,再将音频数据输出处理器780处理后,经RF电路710以发送给比如另一电子设备,或者将音频数据输出至存储器720以便进一步处理。音频电路760还可能包括耳塞插孔,以提供外设耳机与智能终端700的通信。
智能终端700通过近场通信模块770与外部设备建立近场通信连接,并通过该近场通信连接进行数据交互。本实施例中,该近场通信模块770具体包括蓝牙模块和/或WiFi模块。
处理器780是智能终端700的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器720内的软件程序和/或模块,以及调用存储在存储器720内的数据,执行智能终端700的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器780可包括一个或多个处理核心;优选的,处理器780可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器780中。
智能终端700还包括给各个部件供电的电源790(比如电池),优选的,电源可以通过电源管理系统与处理器780逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源790还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出,智能终端700还可以包括蓝牙模块等,在此不再赘述。
具体在本实施例中,智能终端700还包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行以实现上述音频数据传输方法。
本领域普通技术人员可以理解上述实施例的音频数据传输方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于计算机可读存储介质中,存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,RandomAccess Memory)、磁盘或光盘等。
请参考图8,其示出了本发明一个实施例提供的播放设备的结构示意图。该播放设备800为图1中的播放设备120。具体来讲:
播放设备800可以包括RF(Radio Frequency,射频)电路810、包括有一个或一个以上计算机可读存储介质的存储器820、输入单元830、音频电路840、近场通信模块850、包括有一个或者一个以上处理核心的处理器860、以及电源870等部件。本领域技术人员可以理解,图8中示出的播放设备结构并不构成对播放设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
RF电路810可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器860处理;另外,将涉及上行的数据发送给基站。通常,RF电路810包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(LowNoiseAmplifier,低噪声放大器)、双工器等。此外,RF电路810还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System ofMobile communication,全球移动通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA(CodeDivision Multiple Access,码分多址)、WCDMA(Wideband Code DivisionMultipleAccess,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(ShortMessaging Service,短消息服务)等。
存储器820可用于存储软件程序以及模块,处理器860通过运行存储在存储器820的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器820可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能)等;存储数据区可存储根据播放设备800的使用所创建的数据(比如音频数据)等。此外,存储器820可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器820还可以包括存储器控制器,以提供处理器860和输入单元830对存储器820的访问。
输入单元830可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,输入单元830包括其他输入设备831。具体地,其他输入设备831可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
音频电路840、扬声器841,传声器842可提供用户与播放设备800之间的音频接口。音频电路840可将接收到的音频数据转换后的电信号,传输到扬声器841,由扬声器841转换为声音信号输出;另一方面,传声器842将收集的声音信号转换为电信号,由音频电路840接收后转换为音频数据,再将音频数据输出处理器860处理后,经RF电路810以发送给比如另一电子设备,或者将音频数据输出至存储器820以便进一步处理。音频电路840还可能包括耳塞插孔,以提供外设耳机与播放设备800的通信。
播放设备800通过近场通信模块850与外部设备建立近场通信连接,并通过该近场通信连接进行数据交互。本实施例中,该近场通信模块850具体包括蓝牙模块和/或WiFi模块。
处理器860是播放设备800的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器820内的软件程序和/或模块,以及调用存储在存储器820内的数据,执行播放设备800的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器860可包括一个或多个处理核心;优选的,处理器860可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器860中。
播放设备800还包括给各个部件供电的电源870(比如电池),优选的,电源可以通过电源管理系统与处理器860逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源870还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出,播放设备800还可以包括蓝牙模块等,在此不再赘述。
具体在本实施例中,播放设备800还包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行以实现上述音频数据传输方法。
本领域普通技术人员可以理解上述实施例的音频数据传输方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于计算机可读存储介质中,存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,RandomAccess Memory)、磁盘或光盘等。
应当理解的是,在本文中使用的,除非上下文清楚地支持例外情况,单数形式“一个”(“a”、“an”、“the”)旨在也包括复数形式。还应当理解的是,在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (26)

1.一种音频数据传输方法,其特征在于,应用于智能终端中,所述方法包括:
接收播放设备发送的第一策略调整请求,获取所述第一策略调整请求中包含的音频采样频率参数和音频编码格式参数,其中,所述第一策略调整请求在所述播放设备与所述智能终端成功建立连接后发送,或在所述播放设备接收到所述智能终端发送的麦克风开启提示后发送,或在所述播放设备判定接收到的音频数据流出现丢包或乱序时发送;
根据所述音频采样频率参数调节麦克风的采样参数,通过所述智能终端的麦克风采集录音数据;
将所述录音数据与伴奏数据进行混音,得到音频数据;
按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码,得到音频数据流;
将所述音频数据流发送至所述播放设备,以使所述播放设备接收所述智能终端发送的音频数据流,按照所述音频编码格式参数对应的解码方式对所述音频数据流进行解码,得到由所述录音数据与所述伴奏数据混音而成的所述音频数据,并输出所述音频数据;
所述方法还包括:
当接收到所述播放设备发送的第二策略调整请求时,根据所述第二策略调整请求执行相应操作,其中,所述第二策略调整请求由所述播放设备在接收到策略调整指令后发送,所述策略调整指令为预定终端向所述播放设备发送的指令,或者基于用户对所述播放设备的操控生成的指令,或者在所述播放设备播放所述伴奏数据的过程中自动触发的指令;所述第二策略调整请求包括伴奏切换请求,所述伴奏切换请求中携带有伴奏标识,用于指示目标智能终端获取并播放所述伴奏标识对应的伴奏数据,所述目标智能终端为与所述播放设备建立连接并接收到所述伴奏切换请求的智能终端,所述目标智能终端包括当前智能终端在内的至少一个智能终端。
2.根据权利要求1所述的方法,其特征在于,在所述按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码之后,所述方法还包括:
为所述音频数据流中的数据包依序添加发送序号,其中,相邻数据包的发送序号是连续的。
3.根据权利要求1所述的方法,其特征在于,在所述按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码之后,所述方法还包括:
将所述音频数据流中预定数量的数据包划分为一组数据段;
对于每组数据段,根据所述数据段中的数据包生成所述数据段对应的校验包;
将所述校验包添加入所述数据段中。
4.根据权利要求1至3中任一所述的方法,其特征在于,在所述接收播放设备发送的第一策略调整请求之前,所述方法还包括:
与所述播放设备建立连接;
如果与所述播放设备成功建立连接,则按照预设周期向所述播放设备发送心跳包。
5.根据权利要求2所述的方法,其特征在于,所述将所述音频数据流发送至所述播放设备,包括:
通过私有协议将所述音频数据流发送至所述播放设备,所述私有协议至少包含所述音频数据流中每个数据包的发送序号和flag字段,所述flag字段用于标记所述音频数据流对应的音频编码格式参数。
6.根据权利要求1所述的方法,其特征在于,所述将所述录音数据与伴奏数据进行混音,包括:
获取所述伴奏数据的伴奏频率参数,判断所述伴奏频率参数与所述音频采样频率参数是否相同;
如果所述伴奏频率参数与所述音频采样频率参数不相同,则按照所述音频采样频率参数对所述伴奏数据重采样;
将所述录音数据与重采样得到的伴奏数据进行混音。
7.一种音频数据传输方法,其特征在于,应用于播放设备中,所述方法包括:
向智能终端发送第一策略调整请求,所述第一策略调整请求包含音频采样频率参数和音频编码格式参数;
接收所述智能终端发送的音频数据流,按照所述音频编码格式参数对应的解码方式对所述音频数据流进行解码,得到由录音数据与伴奏数据混音而成的所述音频数据,所述音频数据流是所述智能终端按照所述音频编码格式参数对应的编码方式对音频数据进行编码得到的,所述音频数据是将录音数据和伴奏数据进行混音得到的,所述录音数据是通过所述智能终端的麦克风采集的,所述麦克风的采样参数是根据所述音频采样频率参数调节的,所述第一策略调整请求在所述播放设备与所述智能终端成功建立连接后发送,或在所述播放设备接收到所述智能终端发送的麦克风开启提示后发送,或在所述播放设备判定接收到的音频数据流出现丢包或乱序时发送;
当接收到音频编码格式参数调整指令时,调整所述音频编码格式参数,将调整后的音频编码格式参数发送至所述智能终端;
输出所述音频数据;
所述方法还包括:
在接收到策略调整指令之后,向目标智能终端发送第二策略调整请求,以使所述目标智能终端根据所述第二策略调整请求执行相应操作,其中,所述策略调整指令为预定终端向所述播放设备发送的指令,或者基于用户对所述播放设备的操控生成的指令,或者在所述播放设备播放所述伴奏数据的过程中自动触发的指令;所述目标智能终端为与所述播放设备建立连接并接收到伴奏切换请求的智能终端,包括当前智能终端在内的至少一个智能终端;所述第二策略调整请求包括伴奏切换请求,所述伴奏切换请求中携带有伴奏标识,用于指示所述目标智能终端获取并播放所述伴奏标识对应的伴奏数据。
8.根据权利要求7所述的方法,其特征在于,在得到所述音频数据之后,所述方法还包括:
获取所述音频数据流中各个数据包携带的发送序号;
当所述各个数据包携带的发送序号不连续时,判定所述音频数据流出现丢包或乱序。
9.根据权利要求7所述的方法,其特征在于,所述音频数据流包括至少一组数据段,所述输出所述音频数据,包括:
确定出所述音频数据流中出现丢包或乱序的目标数据段,检测所述目标数据段中是否包括校验包,所述校验包是根据所述目标数据段中的数据包生成的;
当所述目标数据段包括校验包时,根据所述校验包对所述目标数据段中丢包或乱序的数据包进行恢复;
输出数据包恢复后得到的音频数据。
10.根据权利要求7至9中任一所述的方法,其特征在于,在所述向智能终端发送第一策略调整请求之前,所述方法还包括:
与所述智能终端建立连接;
在与所述智能终端成功建立连接后的预设时长内,如果未接收到所述智能终端按照预设周期发送的心跳包,则断开与所述智能终端的连接。
11.根据权利要求7所述的方法,其特征在于,所述接收所述智能终端发送的音频数据流,包括:
通过私有协议接收所述智能终端发送的音频数据流,所述私有协议至少包含所述音频数据流中每个数据包的发送序号和flag字段,所述flag字段用于标记所述音频数据流对应的音频编码格式参数。
12.一种音频数据传输装置,其特征在于,应用于智能终端中,所述装置包括:
接收模块,用于接收播放设备发送的第一策略调整请求,获取所述第一策略调整请求中包含的音频采样频率参数和音频编码格式参数,其中,所述第一策略调整请求在所述播放设备与所述智能终端成功建立连接后发送,或在所述播放设备接收到所述智能终端发送的麦克风开启提示后发送,或在所述播放设备判定接收到的音频数据流出现丢包或乱序时发送;
采集模块,用于根据所述音频采样频率参数调节麦克风的采样参数,通过所述智能终端的麦克风采集录音数据;
混音模块,用于将所述录音数据与伴奏数据进行混音,得到音频数据;
编码模块,用于按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码,得到音频数据流;
第一发送模块,用于将所述音频数据流发送至所述播放设备,以使所述播放设备接收所述智能终端发送的音频数据流,按照所述音频编码格式参数对应的解码方式对所述音频数据流进行解码,得到由所述录音数据与所述伴奏数据混音而成的所述音频数据,并输出所述音频数据;
执行模块,用于当接收到所述播放设备发送的第二策略调整请求时,根据所述第二策略调整请求执行相应操作,其中,所述第二策略调整请求由所述播放设备在接收到策略调整指令后发送,所述策略调整指令为预定终端向所述播放设备发送的指令,或者基于用户对所述播放设备的操控生成的指令,或者在所述播放设备播放所述伴奏数据的过程中自动触发的指令;所述第二策略调整请求包括伴奏切换请求,所述伴奏切换请求中携带有伴奏标识,用于指示目标智能终端获取并播放所述伴奏标识对应的伴奏数据,所述目标智能终端为与所述播放设备建立连接并接收到所述伴奏切换请求的智能终端,所述目标智能终端包括当前智能终端在内的至少一个智能终端。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
第一添加模块,用于在所述按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码之后,为所述音频数据流中的数据包依序添加发送序号,其中,相邻数据包的发送序号是连续的。
14.根据权利要求12所述的装置,其特征在于,所述装置还包括:
划分模块,用于在所述按照所述音频编码格式参数对应的编码方式对所述音频数据进行编码之后,将所述音频数据流中预定数量的数据包划分为一组数据段;
生成模块,用于对于每组数据段,根据所述数据段中的数据包生成所述数据段对应的校验包;
第二添加模块,用于将所述校验包添加入所述数据段中。
15.根据权利要求12至14中任一所述的装置,其特征在于,所述装置还包括:
连接模块,用于在所述接收播放设备发送的第一策略调整请求之前,与所述播放设备建立连接;
第二发送模块,用于如果与所述播放设备成功建立连接,则按照预设周期向所述播放设备发送心跳包。
16.根据权利要求12所述的装置,其特征在于,所述第一发送模块,还用于:
通过私有协议将所述音频数据流发送至所述播放设备,所述私有协议至少包含所述音频数据流中每个数据包的发送序号和flag字段,所述flag字段用于标记所述音频数据流对应的音频编码格式参数。
17.根据权利要求12所述的装置,其特征在于,所述混音模块,包括:
判断单元,用于获取所述伴奏数据的伴奏频率参数,判断所述伴奏频率参数与所述音频采样频率参数是否相同;
重采样单元,用于如果所述伴奏频率参数与所述音频采样频率参数不相同,则按照所述音频采样频率参数对所述伴奏数据重采样;
混音单元,用于将所述录音数据与重采样得到的伴奏数据进行混音。
18.一种音频数据传输装置,其特征在于,应用于播放设备中,所述装置包括:
第一发送模块,用于向智能终端发送第一策略调整请求,所述第一策略调整请求包含音频采样频率参数和音频编码格式参数,所述音频数据流是所述智能终端按照所述音频编码格式参数对应的编码方式对音频数据进行编码得到的,所述音频数据是将录音数据和伴奏数据进行混音得到的,所述录音数据是通过所述智能终端的麦克风采集的,所述麦克风的采样参数是根据所述音频采样频率参数调节的,所述第一策略调整请求在所述播放设备与所述智能终端成功建立连接后发送,或在所述播放设备接收到所述智能终端发送的麦克风开启提示后发送,或在所述播放设备判定接收到的音频数据流出现丢包或乱序时发送;
解码模块,用于接收所述智能终端发送的音频数据流,按照所述音频编码格式参数对应的解码方式对所述音频数据流进行解码,得到由所述录音数据与所述伴奏数据混音而成的所述音频数据;
调整模块,用于当接收到音频编码格式参数调整指令时,调整所述音频编码格式参数,将调整后的音频编码格式参数发送至所述智能终端;
输出模块,用于输出所述音频数据;
第二发送模块,用于在接收到策略调整指令之后,向目标智能终端发送第二策略调整请求,以使所述目标智能终端根据所述第二策略调整请求执行相应操作,其中,所述策略调整指令为预定终端向所述播放设备发送的指令,或者基于用户对所述播放设备的操控生成的指令,或者在所述播放设备播放所述伴奏数据的过程中自动触发的指令;所述目标智能终端为与所述播放设备建立连接并接收到伴奏切换请求的智能终端,包括当前智能终端在内的至少一个智能终端;所述第二策略调整请求包括伴奏切换请求,所述伴奏切换请求中携带有伴奏标识,用于指示所述目标智能终端获取并播放所述伴奏标识对应的伴奏数据。
19.根据权利要求18所述的装置,其特征在于,所述装置还包括:
获取模块,用于在得到所述音频数据之后,获取所述音频数据流中各个数据包携带的发送序号;
判定模块,用于当所述各个数据包携带的发送序号不连续时,判定所述音频数据流出现丢包或乱序。
20.根据权利要求18所述的装置,其特征在于,所述音频数据流包括至少一组数据段,所述输出模块,包括:
检测单元,用于确定出所述音频数据流中出现丢包或乱序的目标数据段,检测所述目标数据段中是否包括校验包,所述校验包是根据所述目标数据段中的数据包生成的;
恢复单元,用于当所述目标数据段包括校验包时,根据所述校验包对所述目标数据段中丢包或乱序的数据包进行恢复;
输出单元,用于输出数据包恢复后得到的音频数据。
21.根据权利要求18至20中任一所述的装置,其特征在于,所述装置还包括:
连接模块,用于在所述向智能终端发送第一策略调整请求之前,与所述智能终端建立连接;
断开模块,用于在与所述智能终端成功建立连接后的预设时长内,如果未接收到所述智能终端按照预设周期发送的心跳包,则断开与所述智能终端的连接。
22.根据权利要求18所述的装置,其特征在于,所述解码模块,还用于:
通过私有协议接收所述智能终端发送的音频数据流,所述私有协议至少包含所述音频数据流中每个数据包的发送序号和flag字段,所述flag字段用于标记所述音频数据流对应的音频编码格式参数。
23.一种智能终端,其特征在于,所述智能终端包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由所述处理器加载并执行以实现如权利要求1至6任一所述的音频数据传输方法。
24.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如权利要求1至6任一所述的音频数据传输方法。
25.一种播放设备,其特征在于,所述播放设备包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由所述处理器加载并执行以实现如权利要求7至11任一所述的音频数据传输方法。
26.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如权利要求7至11任一所述的音频数据传输方法。
CN201710684303.3A 2017-08-11 2017-08-11 音频数据传输方法及装置 Active CN107481709B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710684303.3A CN107481709B (zh) 2017-08-11 2017-08-11 音频数据传输方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710684303.3A CN107481709B (zh) 2017-08-11 2017-08-11 音频数据传输方法及装置

Publications (2)

Publication Number Publication Date
CN107481709A CN107481709A (zh) 2017-12-15
CN107481709B true CN107481709B (zh) 2022-04-12

Family

ID=60600195

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710684303.3A Active CN107481709B (zh) 2017-08-11 2017-08-11 音频数据传输方法及装置

Country Status (1)

Country Link
CN (1) CN107481709B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108134875A (zh) * 2017-12-20 2018-06-08 腾讯音乐娱乐科技(深圳)有限公司 音频播放的控制方法、装置、存储介质以及设备
CN108347529B (zh) * 2018-01-31 2021-02-23 维沃移动通信有限公司 一种音频播放方法及移动终端
CN110580722A (zh) * 2018-06-08 2019-12-17 上海欧菲智能车联科技有限公司 环视系统的标定测试方法及标定测试装置、车辆
CN108988909B (zh) * 2018-07-25 2021-08-17 Oppo(重庆)智能科技有限公司 音频处理方法和装置、电子设备、计算机可读存储介质
CN109410970A (zh) * 2018-10-12 2019-03-01 北京微播视界科技有限公司 用于生成音频数据的方法和装置
CN109448676B (zh) * 2018-11-09 2024-01-19 广州酷狗计算机科技有限公司 音频处理方法、装置及存储介质
CN109410904A (zh) * 2018-11-20 2019-03-01 新视家科技(北京)有限公司 一种耳机、播放系统、播放方法及k歌系统
CN111756665B (zh) * 2019-03-29 2022-03-18 比亚迪股份有限公司 自动对频k歌的方法、装置和车辆
CN110175013A (zh) * 2019-05-20 2019-08-27 北京声智科技有限公司 语音录入方法、装置、电子设备及存储介质
CN112689109B (zh) * 2019-10-17 2023-05-09 成都鼎桥通信技术有限公司 一种记录仪的音频处理方法和装置
CN112291762B (zh) * 2020-06-11 2024-01-30 珠海市杰理科技股份有限公司 蓝牙通信中的数据收发方法、装置、设备及系统
CN113890932A (zh) * 2020-07-02 2022-01-04 华为技术有限公司 一种音频控制方法、系统及电子设备
CN111863041B (zh) * 2020-07-17 2021-08-31 东软集团股份有限公司 一种声音信号处理方法、装置及设备
CN112687248B (zh) * 2020-12-22 2023-10-31 广州番禺巨大汽车音响设备有限公司 一种基于智能dj音响系统的音频播放控制方法及装置
CN116017035A (zh) * 2022-12-19 2023-04-25 四川长虹电器股份有限公司 智能电视的k歌方法及装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000113652A (ja) * 1998-10-09 2000-04-21 Pioneer Electronic Corp 情報再生方法
CN101938648A (zh) * 2009-10-15 2011-01-05 北京暴风网际科技有限公司 一种媒体文件格式转换方法及系统
CN102262880A (zh) * 2010-05-31 2011-11-30 苏州闻道网络科技有限公司 一种音频提取装置和方法
CN102982832A (zh) * 2012-11-24 2013-03-20 安徽科大讯飞信息科技股份有限公司 一种在线卡拉ok伴奏、人声与字幕的同步方法
CN104184894A (zh) * 2014-08-21 2014-12-03 深圳市比巴科技有限公司 一种卡拉ok的实现方法及系统
CN104392712A (zh) * 2014-08-27 2015-03-04 贵阳朗玛信息技术股份有限公司 一种实现卡拉ok功能的方法及装置
CN105808710A (zh) * 2016-03-05 2016-07-27 上海斐讯数据通信技术有限公司 一种远程 k 歌终端、远程k 歌系统及远程k 歌方法
CN106792265A (zh) * 2017-01-11 2017-05-31 广州偕作信息科技有限公司 一种网络实时流媒体传输方法和系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000113652A (ja) * 1998-10-09 2000-04-21 Pioneer Electronic Corp 情報再生方法
CN101938648A (zh) * 2009-10-15 2011-01-05 北京暴风网际科技有限公司 一种媒体文件格式转换方法及系统
CN102262880A (zh) * 2010-05-31 2011-11-30 苏州闻道网络科技有限公司 一种音频提取装置和方法
CN102982832A (zh) * 2012-11-24 2013-03-20 安徽科大讯飞信息科技股份有限公司 一种在线卡拉ok伴奏、人声与字幕的同步方法
CN104184894A (zh) * 2014-08-21 2014-12-03 深圳市比巴科技有限公司 一种卡拉ok的实现方法及系统
CN104392712A (zh) * 2014-08-27 2015-03-04 贵阳朗玛信息技术股份有限公司 一种实现卡拉ok功能的方法及装置
CN105808710A (zh) * 2016-03-05 2016-07-27 上海斐讯数据通信技术有限公司 一种远程 k 歌终端、远程k 歌系统及远程k 歌方法
CN106792265A (zh) * 2017-01-11 2017-05-31 广州偕作信息科技有限公司 一种网络实时流媒体传输方法和系统

Also Published As

Publication number Publication date
CN107481709A (zh) 2017-12-15

Similar Documents

Publication Publication Date Title
CN107481709B (zh) 音频数据传输方法及装置
US20230094272A1 (en) Notification Processing System, Method, and Electronic Device
CN110381345B (zh) 一种投屏显示方法及电子设备
CN110138937B (zh) 一种通话方法、设备及系统
CN106531177B (zh) 一种音频处理的方法、移动终端以及系统
CN110166820B (zh) 音视频的播放方法、终端及装置
US20150363165A1 (en) Method For Quickly Starting Application Service, and Terminal
CN109819303B (zh) 数据输出方法及相关设备
CN108243481B (zh) 文件传输方法及装置
CN103391473B (zh) 一种提供及获取音视频的方法和装置
CN111565410B (zh) 一种无线信号质量评估方法、电子设备及系统
CN112423076B (zh) 一种音频投屏同步控制方法、设备及计算机可读存储介质
CN106506437B (zh) 一种音频数据处理方法,及设备
EP4152816A1 (en) Information transmission method and apparatus, and electronic device
CN102077476B (zh) 分布式移动电话系统
CN111010693A (zh) 一种提供无线保真WiFi网络接入服务的方法及电子设备
CN109495769B (zh) 视频通信方法、终端、智能电视、服务器及存储介质
CN101931816A (zh) 将3g手机视频转移至电视上的方法及系统
CN104219372B (zh) 调整移动终端背光亮度的方法及装置
US11871478B2 (en) Bluetooth low energy-based communication method and related apparatus
CN101729875A (zh) 多媒体文件播放方法和媒体播放装置
CN112888024B (zh) 数据处理方法、装置、存储介质及电子设备
US9392098B2 (en) Dummy terminal and main body
WO2020155013A1 (zh) 一种紧急呼叫方法及用户终端
WO2016153707A1 (en) Conveying data between devices in wireless personal area network

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant