CN110262769A - 一种数据传输方法以及电子设备 - Google Patents
一种数据传输方法以及电子设备 Download PDFInfo
- Publication number
- CN110262769A CN110262769A CN201910568436.3A CN201910568436A CN110262769A CN 110262769 A CN110262769 A CN 110262769A CN 201910568436 A CN201910568436 A CN 201910568436A CN 110262769 A CN110262769 A CN 110262769A
- Authority
- CN
- China
- Prior art keywords
- sound
- application
- processing unit
- specific audio
- transmission module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 157
- 238000000034 method Methods 0.000 title claims abstract description 56
- 238000012545 processing Methods 0.000 claims abstract description 152
- 238000012544 monitoring process Methods 0.000 claims abstract description 6
- 230000006870 function Effects 0.000 description 32
- 230000008569 process Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 6
- 238000003672 processing method Methods 0.000 description 5
- 238000003860 storage Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000004927 fusion Effects 0.000 description 3
- 238000011946 reduction process Methods 0.000 description 3
- 230000003111 delayed effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- QHGVXILFMXYDRS-UHFFFAOYSA-N pyraclofos Chemical compound C1=C(OP(=O)(OCC)SCCC)C=NN1C1=CC=C(Cl)C=C1 QHGVXILFMXYDRS-UHFFFAOYSA-N 0.000 description 2
- 230000000630 rising effect Effects 0.000 description 2
- 239000011435 rock Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 241001342895 Chorus Species 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- HAORKNGNJCEJBX-UHFFFAOYSA-N cyprodinil Chemical compound N=1C(C)=CC(C2CC2)=NC=1NC1=CC=CC=C1 HAORKNGNJCEJBX-UHFFFAOYSA-N 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000005304 joining Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
- G10H1/366—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems with means for modifying or correcting the external signal, e.g. pitch correction, reverberation, changing a singer's voice
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0324—Details of processing therefor
- G10L21/034—Automatic adjustment
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Telephonic Communication Services (AREA)
Abstract
本申请提供了一种数据传输方法以及电子设备,在第一应用运行的情况下,若监测到声音输入,例如第一声音输入,那么可以通过特定音频传输模块将第一声音传输至处理装置,以使得处理装置对第一声音进行处理,并得到处理后的第二声音;所述第一应用运行时对所述特定音频传输模块具有优先控制权,即特定音频传输模块接收到第一声音后,会立即将第一声音传输至处理装置,从而减少了延时时间,达到人耳难以察觉的程度,用户体验很好。
Description
技术领域
本申请涉及数据处理技术领域,更具体的说,是涉及一种数据传输方法以及电子设备。
背景技术
电子设备包含具有录音和播放功能的应用,具有录音和播放功能的应用可以边录制语音边播放该语音,例如,K歌类型的应用,电子设备可以边录制用户歌声边播放用户的歌声。
目前,具有录音和播放功能的应用,在录制语音后,需要延迟很长时间,才能输出该语音,例如,K歌类型的应用,在录制用户歌声后,会延迟一段时间,才会输出用户的歌声,延时严重。
发明内容
有鉴于此,本申请提供了一种数据传输方法以及电子设备。
为实现上述目的,本申请提供如下技术方案:
一种数据传输方法,包括:
在第一应用运行的情况下,监测声音输入;
若检测到第一声音输入,通过特定音频传输模块将所述第一声音传输至处理装置;
获取所述处理装置得到的第二声音,并通过所述特定音频传输模块传输至声音输出装置,以输出所述第二声音;
其中,所述第二声音是对所述第一声音处理后的声音,所述第一应用运行时对所述特定音频传输模块具有优先控制权。
在一可选实施例中,所述第一应用运行时对所述特定音频传输模块具有优先控制权包括以下任一种:
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的独占模式,在所述独占模式下,所述特定音频传输模块仅传输所述第一应用对应的声音;
或,
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的最高级优先级模式,在所述最高级优先级模式下,所述特定音频传输模块优先传输所述第一应用对应的声音。
在一可选实施例中,还包括:
控制所述处理装置将所述第一声音输入至所述第一应用;以使得所述第一应用对所述第一声音与第三声音进行处理,得到第四声音;
其中,所述第一应用用于获得与所述第一声音相配合的所述第三声音。
在一可选实施例中,还包括:
控制所述处理装置对所述第四声音进行处理,以得到所述第二声音。
在一可选实施例中,还包括:
控制所述第一应用至少将与所述第一声音相配合的第三声音传输至所述处理装置;
控制所述处理装置对所述第一声音及所述第三声音进行处理,以得到所述第二声音。
一种电子设备,包括:
声音输入模块,用于在第一应用运行的情况下,监测声音输入;若检测到第一声音输入,传输至特定音频传输模块;
与所述声音输入模块相连的所述特定音频传输模块,用于将所述第一声音传输至处理装置;
所述处理装置,用于对所述第一声音进行处理得到处理后的第二声音,并将所述第二声音传输至所述特定音频传输模块;
所述特定音频传输模块,还用于将所述第二声音传输至声音输出模块;
所述声音输出模块,用于输出所述第二声音,所述第一应用运行时对所述特定音频传输模块具有优先控制权。
在一可选实施例中,所述第一应用运行时对所述特定音频传输模块具有优先控制权包括以下任一种:
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的独占模式,在所述独占模式下,所述特定音频传输模块仅传输所述第一应用对应的声音;
或,
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的最高级优先级模式,在所述最高级优先级模式下,所述特定音频传输模块优先传输所述第一应用对应的声音。
在一可选实施例中,
所述处理装置还用于,将所述第一声音输入至所述第一应用;以使得所述第一应用对所述第一声音与第三声音进行处理,得到第四声音;
其中,所述第一应用用于获得与所述第一声音相配合的所述第三声音。
在一可选实施例中,所述处理装置还用于:
对所述第四声音进行处理,以得到所述第二声音。
在一可选实施例中,
所述处理装置还用于,接收来自所述第一应用的与所述第一声音相配合的第三声音;对所述第一声音及所述第三声音进行处理,以得到所述第二声音。
经由上述的技术方案可知,本申请提供的数据传输方法中,在第一应用运行的情况下,若监测到声音输入,例如第一声音输入,那么可以通过特定音频传输模块将第一声音传输至处理装置,以使得处理装置对第一声音进行处理,并得到处理后的第二声音;所述第一应用运行时对所述特定音频传输模块具有优先控制权,即特定音频传输模块接收到第一声音后,会立即将第一声音传输至处理装置,从而减少了延时时间,达到人耳难以察觉的程度,用户体验很好。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1a-1c示例了用户声音与背景音乐的匹配关系示意图;
图2为本申请实施例提供的数据传输方法流程图;
图3a至图3b为本申请实施例提供的数据传输方法应用的电子设备的两种实现方式的示意图;
图4为本申请实施例提供的数据传输方法传输数据的过程示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
目前,电子设备中的第一应用处于运行状态下,电子设备采集到与第一应用对应的第一声音后,至少需要将第一声音传输至处理装置(可选的,处理装置用于对第一声音进行降噪等处理,例如,处理装置可以为混音器)进行处理;若此时处理装置正在处理其他应用对应的声音,那么需要等待其他应用对应的声音处理完毕后,处理装置才能对第一应用对应的第一声音进行处理,至少等待处理装置处理其他应用对应的声音这段时间,会使得电子设备采集到第一声音的时刻与电子设备播放对第一声音处理后得到的第二声音的时刻相差较多,即延时严重。
延时严重会影响用户体验,下面列举几个应用场景对此进行说明。
第一种应用场景,以第一应用为即时通讯类型或录音类应用为例进行说明,例如录音类应用为例,假设利用电子设备中的录音类应用对用户A录制图像和第一声音;并将录制的图像和第一声音实时传输至对端设备,以使得对端设备的用户B能够看到用户A的图像和听到用户A的第一声音(例如,直播授课,用户A为导师,用户B为学生)。
可以理解的是,电子设备所在的环境可能比较嘈杂,需要对采集到的用户A的第一声音进行处理,例如需要传输至处理装置进行处理,由于延时严重;用户A对应的图像可能已经传输至对端设备,但是用户A对应的第一声音延迟一段时间后,才传输至对端设备,使得对端设备的用户B看到用户A的嘴型和用户A的第一声音不匹配。导致用户B的体验较差。
第二种应用场景,以第一应用为KTV类型的应用,例如以全民K歌应用为例。
假设用户A基于电子设备想要演唱歌曲,例如以“小星星”为例。在第一应用(以全民K歌应用为例)运行的情况下,可以播放歌曲“小星星”的背景音乐;然后用户可以发出声音,例如可以根据背景音乐演唱歌词(第一声音),电子设备在采集到第一声音后,需要将第一声音传输至处理装置,由于需要等待处理装置处理其他应用对应的声音,所以处理装置对第一声音的处理具有一定的时延,即处理装置对第一声音处理后,将得到的处理后的声音传输至第一应用具有一定的时延。第一应用将处理后的声音与背景音乐相融合,得到融合声音;但是由于处理装置处理第一声音具有一定的时延,所以第一应用接收到的处理后的声音与背景音乐不匹配。导致电子设备输出融合声音后,让用户感觉自己演唱的节拍错误。
参见图1a所示,假设用户从t0位置开始演唱第一声音“一闪一闪亮晶晶”,那么参见图1b所示,可能第一声音刚好与背景音乐匹配,若第一声音经处理装置处理后可能传输至第一应用时背景音乐已经到达t1位置,那么通过第一应用将处理后的声音与背景音乐融合后的融合声音可能如图1c所示,那么用户听到的融合声音中第一声音与背景音乐不匹配,延时严重。
上述应用场景仅为示例,并不造成限定。
为解决上述问题,本申请实施例提供了一种数据传输方法以及电子设备。
下面结合上述描述,对本申请实施例提供的数据传输方法进行说明。
参见图2所示,为本申请实施例提供的数据传输方法的一种实现方式的流程图,该方法可以包括:
步骤S100、在第一应用运行的情况下,监测声音输入。
在一可选实施例中,确定第一应用的方法可以有多种实现方式,本申请提供但不限于以下几种。
第一种,若当前运行的应用属于设定类型,确定该应用为第一应用。
在一可选实施例中,第一应用可以是属于设定类型的应用,该设定类型包括以下至少一种:KTV类型、即时通讯类型、录音类型。
在一可选实施例中,KTV类型的应用包括但不限于:K歌类型应用(例如全民K歌应用、酷我K歌应用等)、卡拉OK类型的应用、伴奏盒类型的应用等。
在一可选实施例中,即时通讯类型的应用可以是包含语音和/或视频通讯功能的应用,例如微信应用、QQ应用等。
在一可选实施例中,录音类型的应用可以是包含语音实时传输功能的应用,或,语音和图像实时传输功能的应用,例如视频会议类型的应用等。
第二种,若当前运行的应用属于设定类型,且该应用包含的设定功能处于运行状态,确定该应用属于第一应用。
可以理解的是,一个应用处于运行状态并不是该应用包含的所有功能都处于运行状态,以微信应用为例,该微信应用包含的功能至少可以包括:视频通讯功能、语音通讯功能、文字通讯功能以及查看朋友圈功能。
微信应用处于运行状态后,可能仅部分基础功能处于运行状态,例如文字通讯功能以及查看朋友圈功能处于运行状态,视频通讯功能、语音通讯功能等功能未处于运行状态。可以理解的是,由于视频通讯功能、语音通讯功能等功能未处于运行状态,所以微信应用不涉及声音的采集,也不会产生本申请提出的延时严重的问题。所以即使一个应用是属于设定类型的应用,若该应用不启动设定功能,那么可能该应用也不是第一应用。
在一可选实施例中,设定功能包括以下至少一种:语音通讯功能、视频(视频包括图像和声音)通讯功能、视频实时传输功能以及语音实时传输功能等。
步骤S110、若检测到第一声音输入,通过特定音频传输模块将所述第一声音传输至处理装置。
在一可选实施例中,上述第一声音是与第一应用对应的声音。
在一可选实施例中,在第一应用运行过程中,若第一应用需要获得与其对应的声音,第一应用会占用电子设备的音频资源;在第一应用占用电子设备的音频资源的过程中,通过音频资源采集得到的声音,即为与第一应用对应的声音。
在一可选实施例中,音频资源可以包括声音采集装置,例如,麦克风。
在一可选实施例中,若确定一个声音为第一应用对应的声音,那么可以将该声音作为第一声音,那么若检测到该第一声音输入,可以通过特定音频传输模块将第一声音传输至处理装置。
在一可选实施例中,考虑到用户发出的声音为模拟信号,而处理装置可以处理数字信号,那么若第一声音为模拟信号,那么可以在第一声音传输至特定音频传输模块之前,先通过编解码模块中的模数转换模块将第一声音转换为数字信号。
步骤S120、获取所述处理装置得到的第二声音,并通过所述特定音频传输模块传输至声音输出装置,以输出所述第二声音。
其中,所述第二声音是对所述第一声音处理后的声音,所述第一应用运行时对所述特定音频传输模块具有优先控制权。
在一可选实施例中,特定音频传输模块可以用于将各应用分别对应的声音数据传输至处理装置,以使得处理装置可以处理该声音数据。可以理解的是,若各应用分别对应的声音数据的数据量较大,那么处理装置处理各应用分别对应的声音数据将耗费大量时间。若第一声音需要通过特定音频传输模块传输至处理装置时,特定音频传输模块需要首先传输其他声音数据,再传输第一声音,那么可能导致延时。因此,可以设定第一应用运行时对所述特定音频传输模块具有优先控制权,从而使得特定音频传输模块可以及时传输第一声音,使得处理装置及时对第一声音进行处理。
在另一可选实施例中,特定音频传输模块不能将除第一应用之外的其他应用对应的声音数据传输至处理装置,即第一应用对特定音频传输模块具有独占功能。
在一可选实施例中,处理装置可以为混音器。
在一可选实施例中,若基于处理装置得到的第二声音是数字信号,那么可以在第二声音传输至声音输出模块之前,可以通过编解码模块中的数模转换模块将第二声音转换为模拟信号,以使得声音输出装置可以输出第二声音。
在一可选实施例中,声音输出装置可以为扬声器或耳机。
本申请提供的数据传输方法中,在第一应用运行的情况下,若监测到声音输入,例如第一声音输入,那么可以通过特定音频传输模块将第一声音传输至处理装置,以使得处理装置对第一声音进行处理,并得到处理后的第二声音;所述第一应用运行时对所述特定音频传输模块具有优先控制权,即特定音频传输模块接收到第一声音后,会立即将第一声音传输至处理装置,使得处理装置可以立即针对第一声音进行处理,从而减少了延时时间,达到人耳难以察觉的程度,用户体验很好。
为了本领域技术人员进一步理解本申请实施例中提及的特定音频传输模块、处理装置、声音输出装置之间的关系,下面进行说明。
参见图3a至图3b所示,为本申请提供的数据传输方法所应用的电子设备的两种实现方式的结构图。
在一可选实施例中,数据传输方法可以应用于电子设备,电子设备可以包括:声音输入模块31、特定音频传输模块33、处理装置34以及声音输出模块35。在一可选实施例中,电子设备还可以包括编解码模块32。下面对上述模块之间的关系进行说明。
若用户想要录制声音数据,那么可以打开电子设备包含的第一应用。声音输入模块21可以在第一应用运行的情况下,监测用户的声音输入。
若检测到与第一应用对应的第一声音输入,在一可选实施例中,若第一声音为模拟信号,可以将第一声音传输至编解码模块32中的模数转换模块321,模数转换模块321可以将模拟信号的第一声音转换为数字信号的第一声音,并传输至特定音频传输模块33。
特定音频传输模块33可以在接收到第一声音时,立即将该第一声音传输至处理装置34。使得处理装置34立即处理第一声音。
在一可选实施例中,特定音频传输模块33可以仅接收并传输与第一应用对应的第一声音,即第一应用对特定音频传输模块33具有独占功能。由于第一应用对特定音频传输模块33具有独占功能,所以处理装置34可以立即处理第一声音,不会让第一声音处于等待状态。
在一可选实施例中,特定音频传输模块33可以接收并传输多个应用分别对应的声音数据,各应用为不同的应用,但是第一应用的优先级别最高;即若特定音频传输模块33接收并传输其他应用分别对应的声音数据的过程中,若接收到与第一应用对应的第一声音时,立即将与第一应用对应的第一声音传输至处理装置34,不会让第一应用对应的第一声音处于等待状态,使得处理装置34能够立即处理第一声音。
处理装置34可以对接收到的第一声音进行处理,以得到处理后的第二声音。
在一可选实施例中,处理装置34针对声音处理的方法可以包括以下至少一种:
第一种,对声音进行降噪处理。
第二种,对声音进行回声消除处理。
第三种,对声音进行DRC处理。其中,DRC(Dynamic Range Control,动态范围控制)可以提供压缩和放大能力,从而使声音听起来更柔和或者更大声,即DRC为一种信号幅度调节方式。
第四种,对声音进行音效处理。
在一可选实施例中,上述音效可以包括数字音效、环境音效、MP3音效。
数字音效简称EQ模式,不同的EQ模式带给收听者或使用者不同的声音播放效果,同时EQ模式也是最能突出个人个性的地方,给使用者带来更多的音乐享受。其中,EQ(Equaliser,均衡器)可以通过对声音的某一个或多个频段进行增益或衰减,从而达到调整音色的目的。EQ通常包括三个参数:频率(Frequency)、增益(Gain)以及频宽比(Quantize),其中频率用于设定要进行调整的声音的频率点的参数,增益用于调整在设定好的频率值上进行增益或衰减的参数,频宽比用于设定要进行增益或衰减的频段“宽度”的参数,频宽比值越小,那么处理的频段就越宽。
在一可选实施例中,MP3的数字音效模式一般分为六种,即CLASSIC(古典音乐模式)、POP(流行音乐模式)、JAZZ(爵士乐模式)、ROCK(摇滚乐模式)、NOMAL(普通模式)和AUTO(自动改变模式)。
环境音效主要是指通过数字音效处理器对声音进行处理,使声音听起来带有不同的空间特性,例如大厅、歌剧院、影院、溶洞、体育场等。
MP3音效主要包括普通音效和专业音效。
当然,除此之外还可以有其他处理方法,本申请对此不作具体限定。
在一可选实施例中,处理装置34可以将第二声音通过特定音频传输模块33传输至声音输出模块35,以使得声音输出模块35输出第二声音,如图3a所示。
在一可选实施例中,若处理装置34输出的第二声音为数字信号,那么可以通过编解码模块32中的数模转换模块322将数字信号的第二声音,转换成模拟信号的第二声音,并通过声音输出模块35输出模拟信号的第二声音,如图3a所示。
在一可选实施例中,若声音输出模块35具有输出数字信号的第二声音的功能,那么处理装置34可以通过特定音频传输模块33直接传输至声音输出模块35。
在一可选实施例中,处理装置34在处理第一声音之前,还可以将第一声音传输至第一应用。第一应用可以将第一声音与自身存储的与背景音乐对应的第三声音进行融合,以得到融合后的第四声音。
在一可选实施例中,处理装置34可以为混音器。
在一可选实施例中,电子设备还可以包括虚拟声卡,可以在处理装置34和第一应用之间设置虚拟声卡,处理装置34与第一应用之间可以通过虚拟声卡进行声音数据的交互。即虚拟声卡相当于建立了处理装置34与第一应用之间用于进行声音数据传输的通道。
在一可选实施例中,第一应用可以将第四声音传输至处理装置34,处理装置34可以对第四声音进行处理,以得到第二声音,如图3b所示,特定音频传输模块33可以将第二声音传输至声音输出模块35。
在一可选实施例中,第一应用可以将第四声音直接通过特定音频传输模块33传输至声音输出模块35。
处理装置34对第四声音处理的方法,可以参见上述处理装置34针对声音处理的方法,这里不再赘述。
在一可选实施例中,处理装置34可以先对第一声音进行处理,以得到处理后的第五声音,然后,将第五声音传输至第一应用。第一应用可以将第五声音与自身存储的与背景音乐对应的第三声音进行融合,以得到融合后的第四声音。处理装置34可以对第四声音进行处理,以得到第二声音。
处理装置34对第五声音的处理过程可以参见上述处理装置34针对声音处理的方法,这里不再赘述。
在一可选实施例中,声音输出模块35可以是扬声器,或,耳机。
综上,本申请实施例提供的数据传输方法在数据传输时至少可以具有以下四个优点:第一,由于采用特定音频传输模块将第一声音传输至处理装置,实现了在第一应用与处理装置之间进行声音传输时延时时间最短的目的,即由于特定音频传输模块33在接收到与第一应用对应的第一声音后,立即传输该第一声音,使得处理装置可以立即处理第一声音,减少了第一声音排队等待的时间,从而减少了延时时间;第二,本申请实施例提供的数据传输方法将对声音处理的方法集中在处理装置中,与,将对声音处理的方法分散到多个处理模块而言,减少了各处理模块之间的声音传输的时间(例如,处理模块1处理完毕声音后,需要传输至下一处理模块2再次对声音进行处理),从而进一步减少了延时时间;第三,目前电子设备不包含虚拟声卡,用户需要额外购买虚拟声卡,而本申请提供的电子设备还可以包括虚拟声卡,从而用户无需额外购买虚拟声卡,降低了用户的成本;第四,本申请中处理装置存储有针对声音的各种处理方法,即使第一应用不包括针对声音的各种处理方法,也可以利用处理装置对声音进行处理,进一步的,用户还可以选择处理方式,进一步提高了用户体验。
在一可选实施例中,上述步骤S120中所述第一应用运行时对所述特定音频传输模块具有优先控制权可以包括多种场景,本申请可以提供但不限于以下任一种:
第一种,所述特定音频传输模块仅传输所述第一应用对应的声音。
即仅当前运行的第一应用可以占用特定音频传输模块33,其他应用例如第二应用不能占用该特定音频传输模块33,即在第一应用运行的情况下,特定音频传输模块33的模式为针对第一应用的独占模式,那么在该独占模式下,特定音频传输模块33可以仅接收并传输与第一应用对应的声音。
在一可选实施例中,第一应用对应的声音为第一声音。
例如,若录音应用是第一应用,而浏览器是其他应用,若录音应用处于运行状态,那么,特定音频传输模块33在录音应用的独占模式下,若电子设备采集到录音应用对应的第一声音,那么该第一声音可以通过特定音频传输模块33传输至处理装置34;若用户点击浏览器对应的语音按键并发出声音,那么该声音无法通过特定音频传输模块33传输至处理装置34。
第二种,在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的最高级优先级模式,在所述最高级优先级模式下,所述特定音频传输模块优先传输所述第一应用对应的声音。
假设电子设备当前至少运行第一应用以及第二应用,且第一应用和第二应用可以占用特定音频传输模块33,在能够占用特定音频传输模块33的各应用中,第一应用具有最高级优先级,例如第一应用的优先级高于第二应用的优先级。
例如,若录音应用是第一应用,即时通讯类应用是第二应用,那么若同时得到录音应用对应的第一声音,即时通讯类应用对应的声音;或者,先得到即时通讯类应用对应的声音,再得到录音应用对应的第一声音;或者,先得到录音应用对应的第一声音,再得到即时通讯类应用对应的声音;无论哪种情况,都是先将录音应用对应的第一声音通过特定音频传输模块33传输至处理装置34。
在一可选实施例中,第一应用中可能存在与第一声音进行融合的第三声音,如第二种应用场景中的背景音乐,下面对第一声音和第三声音进行处理的过程进行详细说明。本申请实施例提供但不限于以下几种方式。
第一种实现方式,由第一应用对上述第二种应用场景中的第一声音与第三声音进行处理,该过程具体可以包括:
控制所述处理装置将所述第一声音输入至所述第一应用;以使得所述第一应用对所述第一声音与第三声音进行处理,得到第四声音;其中,所述第一应用用于获得与所述第一声音相配合的所述第三声音。
在一可选实施例中,若第一应用包括各种处理方法,那么处理装置34可以将第一声音输入至第一应用,以使得第一应用可以对第一声音进行处理,具体可以参见图4。
在第一可选实施例中,电子设备还可以包括虚拟声卡41;可以在处理装置34和第一应用之间设置虚拟声卡41,处理装置34与第一应用之间可以通过虚拟声卡41进行声音数据的交互。即虚拟声卡41相当于建立了处理装置34与第一应用之间用于进行声音数据传输的通道。
在一可选实施例中,若处理装置34可以直接与第一应用进行声音数据交互,即处理装置34具有虚拟声卡的功能,则无需在处理装置34与第一应用之间设置虚拟声卡。
在一可选实施例中,第一应用针对第一声音的处理方式至少可以包括以下任一种:
第一种,对第一声音进行降噪处理,或,回声消除处理,或,DRC处理,或,音效处理等。
第二种,获取与第一声音相配合的第三声音;对第一声音与第三声音进行处理,以得到第四声音。
在一可选实施例中,与第一声音相配合的第三声音可以包括第一声音对应的背景音乐、特殊音效例如掌声、欢呼声等。
例如,若第一应用是全民K歌应用,第一声音是用户声音,第三声音是背景音乐,那么全民K歌应用可以将用户声音与背景音乐融合在一起,以得到至少包含用户声音与背景音乐的第四声音。
在一可选实施例中,第一应用可以存储第四声音,使得用户可以将存储的第四声音通过第一应用分享出去,例如通过全民K歌将用户所唱的歌曲分享至朋友圈等。
在一可选实施例中,第一应用还可以将第四声音传输至处理装置34,以使得处理装置34可以对第四声音进行处理,以得到第二声音。这里处理装置34针对第四声音的处理方法与上述实施例中“处理装置34针对声音处理的方法”相同,详细可参照前述实施例中介绍,这里不再详细赘述。也即本申请可以控制处理装置34对第四声音进行处理,以得到第二声音。
例如,若第四声音包含噪声,那么可以通过处理装置34对第四声音进行噪声消除处理;若第四声音包含回声,那么可以通过处理装置34对第四声音进行回声消除处理。
考虑到上述实施例中,由第一应用对上述第二种应用场景中的第一声音与第三声音进行处理,得到第四声音,并由处理装置34对第四声音进行处理,得到第二声音。由于第一应用已经将第一声音与第三声音合并为一个声音数据,即第四声音,那么若第一声音与第三声音不匹配,那么可能得到的第二声音效果不好,例如得到的第二声音可能如图1c所示。
第二种实现方式,由第一应用将第三声音发送至处理装置34,然后由处理装置34处理第一声音与第三声音,该过程具体可以包括:
S1、控制所述第一应用至少将与所述第一声音相配合的第三声音传输至所述处理装置。
在一可选实施例中,第一应用可以通过虚拟声卡将第三声音传输至所述处理装置。
在一可选实施例中,第一应用获取第一声音以及第三声音后,可以不对第一声音与第三声音进行处理,而是直接将第一声音与第三声音传输至处理装置34,由处理装置34处理第一声音与第三声音。
在一可选实施例中,本申请所谓的“第一应用不对第一声音与第三声音进行处理”是指,第一应用不会处理第一声音与第三声音得到第四声音,但是第一应用可以分别对第一声音、第三声音进行处理,例如若第一声音包含噪声,那么可以通过第一应用对第一声音进行噪声消除处理。
S2、控制所述处理装置对所述第一声音及所述第三声音进行处理,以得到所述第二声音。
在一可选实施例中,上述处理装置34针对声音处理的方法至少还可以包括第五种:将第一声音与第三声音对齐,以使得第一声音与第三声音相匹配。
在一可选实施例中,将第一声音与第三声音对齐的过程可以包括:可以理解的是,第一声音通常是不连续的,那么基于第一声音获得第一声音对应的各声音片段以及各声音片段分别对应的开始时间戳,该开始时间戳是指开始各声音片段的时间戳;获得第三声音包含的各声音片段以及各声音片段分别对应的开始时间戳;基于第一声音中各声音片段分别对应的开始时间戳,以及,第三声音中各声音片段分别对应的开始时间戳,将第一声音对应的各声音片段与第三声音对应的各声音片段分别对齐,以实现将第一声音与第三声音对齐。
在一可选实施例中,若将第一声音与第三声音对齐得到的声音数据作为对齐声音,那么可以基于处理装置34对该对齐声音进行处理,例如降噪处理、回声消除处理等,得到第二声音。
综上,本实施例中由于可以通过处理装置34对第一声音与第三声音对齐,从而得到的第二声音效果更好。例如,若第一声音是用户演唱的歌词,第二声音是与该第一声音相配合的背景音乐,那么得到的第二声音可能如图1b所示,即减少了延时时间,达到人耳难以察觉的程度,用户体验很好。
针对本申请最初举的第一种应用场景,采用本申请实施例,可以在录音类型的应用运行的情况下,若检测到用户A对应的第一声音,由于特定音频传输模块33在接收到第一声音后,会立即将第一声音传输至处理装置34,从而减小了延时时间,使得用户B看到的用户A对应的图像与第一声音相匹配,即用户B看到的用户A的嘴型与当前听到的用户A对应的第一声音匹配,即达到了人耳和人眼难以察觉的程度,提高了用户体验。
针对本申请最初举的第二种应用场景,采用本申请实施例,可以在全民K歌运行的情况下,若检测到第一声音,由于特定音频传输模块33在接收到第一声音后,会立即将该声音传输至处理装置34,从而减少了延时时间,使得人耳听到的第一声音与背景音乐相匹配,即达到了人耳难以察觉的程度,提高了用户体验。
上述本申请提供的实施例中详细描述了方法,对于本申请的方法可采用多种形式的装置实现,因此本申请还提供了一种装置,下面给出具体的实施例进行详细说明。
参见附图3a至3b所示,电子设备可以包括:
声音输入模块31,用于在第一应用运行的情况下,监测声音输入;若检测到第一声音输入,传输至特定音频传输模块33;
与所述声音输入模块31相连的所述特定音频传输模块33,用于将所述第一声音传输至处理装置34;
所述处理装置34,用于对所述第一声音进行处理得到处理后的第二声音,并将所述第二声音传输至所述特定音频传输模块33;
所述特定音频传输模块33,还用于将所述第二声音传输至声音输出模块35;
所述声音输出模块35,用于输出所述第二声音,所述第一应用运行时对所述特定音频传输模块33具有优先控制权。
在一可选实施例中,上述声音输出模块所述第一应用运行时对所述特定音频传输模块具有优先控制权可以包括以下任一种:
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的独占模式,在所述独占模式下,所述特定音频传输模块仅传输所述第一应用对应的声音;
或,
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的最高级优先级模式,在所述最高级优先级模式下,所述特定音频传输模块优先传输所述第一应用对应的声音。
在一可选实施例中,所述处理装置还用于,将所述第一声音输入至所述第一应用;以使得所述第一应用对所述第一声音与第三声音进行处理,得到第四声音;
其中,所述第一应用用于获得与所述第一声音相配合的所述第三声音。
在一可选实施例中,本申请提供的电子设备还可以包括:
虚拟声卡;
所述处理装置,在执行将所述第一声音输入至所述第一应用时,具体用于:通过所述虚拟声卡,将所述第一声音输入至所述第一应用。
在一可选实施例中,所述处理装置还用于:对所述第四声音进行处理,以得到所述第二声音。
在一可选实施例中,所述处理装置还用于,接收来自所述第一应用的与所述第一声音相配合的第三声音;对所述第一声音及所述第三声音进行处理,以得到所述第二声音。
在一可选实施例中,所述处理装置在执行接收来自所述第一应用的与所述第一声音相配合的第三声音时,具体用于:
通过所述虚拟声卡接收来自所述第一应用的与所述第一声音相配合的第三声音。
本申请实施例还提供一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现如上述数据传输方法。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置或系统类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种数据传输方法,包括:
在第一应用运行的情况下,监测声音输入;
若检测到第一声音输入,通过特定音频传输模块将所述第一声音传输至处理装置;
获取所述处理装置得到的第二声音,并通过所述特定音频传输模块传输至声音输出装置,以输出所述第二声音;
其中,所述第二声音是对所述第一声音处理后的声音,所述第一应用运行时对所述特定音频传输模块具有优先控制权。
2.根据权利要求1所述数据传输方法,所述第一应用运行时对所述特定音频传输模块具有优先控制权包括以下任一种:
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的独占模式,在所述独占模式下,所述特定音频传输模块仅传输所述第一应用对应的声音;
或,
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的最高级优先级模式,在所述最高级优先级模式下,所述特定音频传输模块优先传输所述第一应用对应的声音。
3.根据权利要求1或2所述数据传输方法,还包括:
控制所述处理装置将所述第一声音输入至所述第一应用;以使得所述第一应用对所述第一声音与第三声音进行处理,得到第四声音;
其中,所述第一应用用于获得与所述第一声音相配合的所述第三声音。
4.根据权利要求3所述数据传输方法,还包括:
控制所述处理装置对所述第四声音进行处理,以得到所述第二声音。
5.根据权利要求1或2所述数据传输方法,还包括:
控制所述第一应用至少将与所述第一声音相配合的第三声音传输至所述处理装置;
控制所述处理装置对所述第一声音及所述第三声音进行处理,以得到所述第二声音。
6.一种电子设备,包括:
声音输入模块,用于在第一应用运行的情况下,监测声音输入;若检测到第一声音输入,传输至特定音频传输模块;
与所述声音输入模块相连的所述特定音频传输模块,用于将所述第一声音传输至处理装置;
所述处理装置,用于对所述第一声音进行处理得到处理后的第二声音,并将所述第二声音传输至所述特定音频传输模块;
所述特定音频传输模块,还用于将所述第二声音传输至声音输出模块;
所述声音输出模块,用于输出所述第二声音,所述第一应用运行时对所述特定音频传输模块具有优先控制权。
7.根据权利要求6所述电子设备,所述第一应用运行时对所述特定音频传输模块具有优先控制权包括以下任一种:
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的独占模式,在所述独占模式下,所述特定音频传输模块仅传输所述第一应用对应的声音;
或,
在所述第一应用运行的情况下,所述特定音频传输模块的模式为针对所述第一应用的最高级优先级模式,在所述最高级优先级模式下,所述特定音频传输模块优先传输所述第一应用对应的声音。
8.根据权利要求6或7所述电子设备,
所述处理装置还用于,将所述第一声音输入至所述第一应用;以使得所述第一应用对所述第一声音与第三声音进行处理,得到第四声音;
其中,所述第一应用用于获得与所述第一声音相配合的所述第三声音。
9.根据权利要求8所述电子设备,所述处理装置还用于:
对所述第四声音进行处理,以得到所述第二声音。
10.根据权利要求6或7所述电子设备,
所述处理装置还用于,接收来自所述第一应用的与所述第一声音相配合的第三声音;对所述第一声音及所述第三声音进行处理,以得到所述第二声音。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910568436.3A CN110262769A (zh) | 2019-06-27 | 2019-06-27 | 一种数据传输方法以及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910568436.3A CN110262769A (zh) | 2019-06-27 | 2019-06-27 | 一种数据传输方法以及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110262769A true CN110262769A (zh) | 2019-09-20 |
Family
ID=67922382
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910568436.3A Pending CN110262769A (zh) | 2019-06-27 | 2019-06-27 | 一种数据传输方法以及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110262769A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101364188A (zh) * | 2008-09-12 | 2009-02-11 | 青岛海信移动通信技术股份有限公司 | 一种移动终端及其多媒体播放控制方法 |
CN103617803A (zh) * | 2013-11-08 | 2014-03-05 | 中标软件有限公司 | 一种车载系统上多音源自动切换方法及系统 |
CN104157292A (zh) * | 2014-08-20 | 2014-11-19 | 杭州华为数字技术有限公司 | 抗啸叫音频信号处理方法和装置 |
CN104219403A (zh) * | 2013-06-03 | 2014-12-17 | 腾讯科技(深圳)有限公司 | 一种消除回声的方法及装置 |
CN105208189A (zh) * | 2014-12-10 | 2015-12-30 | 维沃移动通信有限公司 | 音频处理方法及移动终端 |
US20170249121A1 (en) * | 2014-06-04 | 2017-08-31 | Sonos, Inc. | Prioritizing Media Content Requests |
CN108182930A (zh) * | 2017-12-18 | 2018-06-19 | 福建星网视易信息系统有限公司 | 音效处理方法、设备及音视频点播系统 |
-
2019
- 2019-06-27 CN CN201910568436.3A patent/CN110262769A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101364188A (zh) * | 2008-09-12 | 2009-02-11 | 青岛海信移动通信技术股份有限公司 | 一种移动终端及其多媒体播放控制方法 |
CN104219403A (zh) * | 2013-06-03 | 2014-12-17 | 腾讯科技(深圳)有限公司 | 一种消除回声的方法及装置 |
CN103617803A (zh) * | 2013-11-08 | 2014-03-05 | 中标软件有限公司 | 一种车载系统上多音源自动切换方法及系统 |
US20170249121A1 (en) * | 2014-06-04 | 2017-08-31 | Sonos, Inc. | Prioritizing Media Content Requests |
CN104157292A (zh) * | 2014-08-20 | 2014-11-19 | 杭州华为数字技术有限公司 | 抗啸叫音频信号处理方法和装置 |
CN105208189A (zh) * | 2014-12-10 | 2015-12-30 | 维沃移动通信有限公司 | 音频处理方法及移动终端 |
CN108182930A (zh) * | 2017-12-18 | 2018-06-19 | 福建星网视易信息系统有限公司 | 音效处理方法、设备及音视频点播系统 |
Non-Patent Citations (3)
Title |
---|
MICROSOFT: "《Exclusive-Mode Streams》", 《MICROSOFT》 * |
蔡京哲: "《Windows Core Audio API及其应用方法研究》", 《科技信息》 * |
马健: "《基于Android车载平台连接Android设备的CarLife软件的开发》", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101609667B (zh) | Pmp播放器中实现卡拉ok功能的方法 | |
CA2434777A1 (en) | Music data providing apparatus, music data reception apparatus and program | |
CN104936098B (zh) | 一种音效设置装置及其方法、播放系统及其方法 | |
CN108922528B (zh) | 用于处理语音的方法和装置 | |
CN103915086A (zh) | 信息处理的方法、装置和系统 | |
CN106911560A (zh) | 一种实现音乐同步共享的方法及设备 | |
CN107135301A (zh) | 一种音频数据处理方法及装置 | |
CN101924317B (zh) | 双声道处理装置及其方法与声音播放系统 | |
CN1929698B (zh) | 声音再现设备和增强低频分量的方法 | |
CN108600526A (zh) | 闹钟控制方法及相关产品 | |
CN108510997A (zh) | 电子设备及应用于电子设备的回声消除方法 | |
CN111863011A (zh) | 音频处理方法及电子设备 | |
CN108320761A (zh) | 音频录制方法、智能录音设备及计算机可读存储介质 | |
CN101521006A (zh) | 一种数字电视接收终端进行卡拉ok的方法、系统及终端 | |
WO2001097123A1 (en) | Method and system for group-composition in internet, and business method therefor | |
CN100444695C (zh) | 一种实现串音消除的方法及滤波器生成装置和播放装置 | |
CN110262769A (zh) | 一种数据传输方法以及电子设备 | |
WO2015131591A1 (zh) | 音频信号输出方法、装置、终端及系统 | |
CN212752587U (zh) | 一种耳机声音外扩播放场景系统 | |
KR102071900B1 (ko) | 스마트폰용 유에스비 타입 이어폰 젠더 | |
CN112927666A (zh) | 音频处理方法、装置、电子设备及存储介质 | |
JP2004072354A (ja) | 音声会議システム | |
CN113611272B (zh) | 基于多移动终端的扬声方法、装置及存储介质 | |
Ratnaningsih et al. | The Analyze of Android's microphone audio streaming BeatME | |
CN211181633U (zh) | 一种多音效混响的卡拉ok系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190920 |
|
RJ01 | Rejection of invention patent application after publication |