CN109144463B - 传输控制方法、装置以及电子设备 - Google Patents
传输控制方法、装置以及电子设备 Download PDFInfo
- Publication number
- CN109144463B CN109144463B CN201810928162.XA CN201810928162A CN109144463B CN 109144463 B CN109144463 B CN 109144463B CN 201810928162 A CN201810928162 A CN 201810928162A CN 109144463 B CN109144463 B CN 109144463B
- Authority
- CN
- China
- Prior art keywords
- audio
- buffering
- audio data
- playing
- threshold value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Communication Control (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请实施例公开了一种传输控制方法、装置以及电子设备。所述方法包括:进入设定的播放场景,在内容播放场景中所播放的内容包括音频数据和图像数据;检测电子设备是否处于音频播放设备连接状态;若检测到电子设备处于音频播放设备连接状态,减小将音频数据传输给音频播放设备的过程中所经过的缓冲节点的缓冲阈值,其中,当检测到缓冲节点中已经缓冲的音频数据的大小符合缓冲阈值后,开始对缓存节点已经缓存的音频数据进行处理。本方法使得在需要将音频数据传输给音频播放设备的情况下,对于在缓冲节点的数据可以被更快的处理,以提升缓冲节点中数据被处理的频率,从而使得将音频数据能够更快的被音频设备播放出来,减小音频播放延迟。
Description
技术领域
本申请涉及电子设备技术领域,更具体地,涉及一种传输控制方法、装置以及电子设备。
背景技术
随着蓝牙技术的发展与普及,更多的音频播放设备可以支持与电子设备之间通过蓝牙协议来传输数据。例如,车载设备可以和电子设备之间通过蓝牙协议来传输音乐,而耳机可以通过蓝牙协议接收电子设备所传输的通信语音。
但是,在电子设备通过蓝牙的方式向其他音频播放设备传输音频数据时,有时候音频播放设备所播放的音频数据会存在播放延时。
发明内容
鉴于上述问题,本申请提出了一种传输控制方法、装置以及电子设备,以实现改善上述问题。
第一方面,本申请提供了一种传输控制方法,应用于电子设备,所述方法包括:进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应;检测所述电子设备是否处于音频播放设备连接状态;若检测到所述电子设备处于音频播放设备连接状态,减小将所述音频数据传输给音频播放设备的过程中所经过的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
第二方面,本申请提供了一种传输控制装置,运行于电子设备,所述装置包括:播放场景触发单元,用于触发所述电子设备进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应;连接状态检测单元,用于检测所述电子设备是否处于音频播放设备连接状态;传输控制单元,用于若所述连接状态检测单元检测到所述电子设备处于音频播放设备连接状态,减小将所述音频数据传输给音频播放设备的过程中所经过的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
第三方面,本申请提供了一种电子设备,包括一个或多个处理器以及存储器;一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述的方法。
第四方面,本申请提供的一种计算机可读存储介质,所述计算机可读存储介质中存储有程序代码,其中,在所述程序代码运行时执行上述的方法。
本申请提供的一种传输控制方法、装置以及电子设备,进入设定的播放场景后,检测所述电子设备是否处于音频播放设备连接状态,若检测到所述电子设备处于音频播放设备连接状态,则减小将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值,从而使得电子设备在播放图像数据以及与该图像数据对应的音频数据时,可以在需要将音频数据传输给音频播放设备的情况下,减小表征触发开始对缓冲节点已经缓冲的音频数据进行处理的值,从而使得对于在缓冲节点的数据可以被更快的处理,以便提升缓冲节点中数据被处理的频率,从而使得将音频数据能够更快的被音频设备播放出来,减小音频播放延迟。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请提出的一种传输控制方法的流程图;
图2示出了本申请提出的另一种传输控制方法的流程图;
图3示出了本申请提出的再一种传输控制方法的流程图;
图4示出了本申请提出的一种编码控制装置的结构框图;
图5示出了本申请提出的另一种编码控制装置的结构框图;
图6示出了本申请提出的另一种编码控制装置的结构框图;
图7示出了本申请的用于执行根据本申请实施例的传输控制方法的电子设备的结构框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
随着电子设备的用户对于音乐体验的需求,电子设备开始支持播放音频文件。而电子设备的音频架构和计算机的构架类似,主要就是由处理器、内置音频CODEC(编解码器)来完成。其中,处理器接收音频文件的输入后,转化成I2S信号,并传输至CODEC转换成模拟信号,然后进行播放。
其中,该电子设备可以为移动或便携式并执行无线通信的各种类型的计算机系统设备中的任何一种。具体的,电子设备100可以为移动电话或智能电话(例如,基于iPhoneTM,基于AndroidTM的电话),便携式游戏设备(例如NintendoDSTM,PlayStationPortableTM,GameboyAdvanceTM,iPhoneTM)、膝上型电脑、PDA、便携式互联网设备、音乐播放器以及数据存储设备。
而随着用户对于音乐播放的进一步需求,出现了更多的电子设备以外的音频播放设备,该音频播放设备可以接收电子设备传输过来的音频数据,并将音频数据进行播放。常见的音频播放设备包括耳机、音箱以及车载音频播放设备等。其中,作为一种的传输方式,电子设备可以通过蓝牙传输的方式,将音频数据传输给外部的音频播放设备进行播放。此外,电子设备还可以通过基于IEEE802.11协议的方式将音频数据传递给音频播放设备。
其中,电子设备在基于蓝牙的方式将音频数据传递给外部的音频播放设备过程中,会先将待传输的音频数据进行编码。其中,蓝牙中的三种音频编码:Apt-X、SBC以及AAC。其中,Apt-X与sbc相比具有延时低的优势。SBC是常用的音频格式,在音频播放设备在不支持AAC以及Apt-X的时候都用SBC传输,音质一般。AAC,当音频播放设备支持AAC格式的文件,电子设备也支持AAC传输时,音质比SBC好很多。Apt-X,是蓝牙传输的一种无损格式,由csr推广,在设计初期,要支持Apt-X,就必须要购买这个软件费用,并且aptx并不是大多数手机都支持,一般支持的手机在背后都有Apt-X的logo,所以虽然效果好,但是真正可以支持的设备端其实不多。
而发明人在研究中发现,在一些内容播放场景中电子设备传输给音频播放设备所播放的音频数据与电子设备的显示屏所播放的画面之间存在延迟,造成音频播放设备所播放的音频数据和电子设备的显示屏所播放的图像数据之间不同步。例如,在一些游戏场景中,一些人物或者物体的移动都会有对应的声音,那么在这个场景下,可以理解的是,人物或者物体的移动和其对应的声音就可以是对应的图像数据和音频数据。而如果电子设备是将游戏场景的声音传输到外部的音频播放设备进行播放,那么就可能会造成用户已经看到人物或者物体移动了,但是还没有听到对应的声音,从而造成用户体验不好。
发明人经过进一步的长期研究发现,造成上述情况显示一个原因是音频数据的缓冲处理问题。具体的,电子设备在将音频数据传输给音频播放设备进行播放的过程中,音频数据会经过电子设备的音频解码模块、音频处理模块以及蓝牙的codec编码模块,然后传输到音频播放设备后,又会经历蓝牙codec解码模块(在音频播放设备上),而在上述处理流程中,为了协调相邻模块之间的数据处理速度,可以在相邻模块之间都配置一个缓冲节点,该缓冲节点可以将音频数据处理的流程中前一模块所处理后的音频数据进行缓冲,然后后一个模块再从缓冲节点中读取数据进行处理。而电子设备通常配置的缓冲节点的最大缓冲数据是固定的,且当缓冲节点虫缓冲了多少数据才开始进行处理的阈值也是固定的,从而会造成上述问题。
因此,发明人提出了本申请中可以提升缓冲节点中数据被处理的频率,从而使得将音频数据能够更快的被音频设备播放出来,减小音频播放延迟的传输控制方法、装置以及电子设备。
下面将结合附图具体描述本申请的各实施例。
请参阅图1,本申请提供的一种传输控制方法,应用于电子设备,所述方法包括:
步骤S110:进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应。
作为一种方式,设定的播放场景可以为游戏场景或者可以为视频播放场景。在游戏场景中游戏画面为图像数据,而与游戏画面对应的声音为音频数据。例如,若图像数据表征游戏画面中游戏人物从一个地方走动到另一个地方,那么对应人物从一个地方走到另一个地方的过程中的脚步的声音为与该图像数据对应的音频数据。类似的,在视频播放场景中,若图像数据表征的内容为人物在说话,人物在说话的过程中所发出的声音为与该图像数据对应的音频数据。
可以理解的是,上面提到的游戏场景和视频播放场景以及其中的具体内容都是示例性的,任何涉及对应的图像数据和音频数据的播放场景均在本申请所要求保护的范围内。
步骤S120:检测所述电子设备是否处于音频播放设备连接状态。
需要说明的是,电子设备可以通过自身配置的音频播放模块(例如扬声器或者听筒)来播放音频,也可以将音频数据传递给外部的音频播放设备,以便外部的音频播放设备对音频数据进行播放。那么在这种情况下,音频播放设备连接状态用于表征电子设备当前是将音频数据传输给外部的音频播放设备进行播放。
其中,外部音频设备与电子设备处于有线或者无线的连接状态,均可以触发电子设备进入到音频播放设备连接状态。其中,无线的方式包括基于IEEE802.11协议连接,或者基于蓝牙通信协议连接。
那么对于基于蓝牙通信协议连接的情况下,作为一种方式,检测电子设备是否通过蓝牙连接有蓝牙设备,若检测到电子设备连接有蓝牙设备,检测所述蓝牙设备的类型是否为音频设备类型,若是,则判断电子设备处于音频播放设备连接状态。例如,在基于android操作系统的电子设备中,可以通过基于实例化BluetoothClass.Device类所得到的返回值来确定当前通过蓝牙连接的设备类型。若返回的值为AUDIO_VIDEO_CAMCORDER,则表征为图像采集设备。若返回的值为AUDIO_VIDEO_CAR_AUDIO,则表征为车载设备。若返回的值为AUDIO_VIDEO_HIFI_AUDIO,则表征为音频播放设备或者视频播放设备。若返回的值为AUDIO_VIDEO_MICROPHONE,则表征为麦克风。
步骤S130:若检测到所述电子设备处于音频播放设备连接状态,减小将所述音频数据传输给音频播放设备的过程中所经过的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
其中,需要说明的是,电子设备所播放的音频数据可以是从本地存储器中读取,也可以是从网络中获取。而当电子设备在从本地读取或者是从网络中获取到音频数据后,会先后对音频数据进行音频解码、音频处理以及蓝牙codec编码处理。而在这种过程中涉及到的缓冲节点可以有多个。例如,音频解码模块和音频处理模块之间可以有缓冲节点,而音频处理模块以及蓝牙codec编码模块之间也可以设置缓冲节点,而蓝牙codec编码模块和执行将音频数据发送给音频播放设备的模块之前也可以设置有缓冲节点。
那么在检测到所述电子设备处于音频播放设备连接状态后,可以将上述所提及的缓冲节点的缓冲阈值均减小,或者也可以只减小其中部分缓冲节点的缓冲阈值。
下面再通过一个实例来对减小的缓冲阈值进行说明。
若在减小缓冲阈值之前缓冲节点A的缓冲阈值为10kb,那么电子设备在检测到缓冲节点A中已经缓冲的数据的大小为10kb时,即开始对该已经缓冲的10kb数据进行处理。那么在这种情况下,若减小缓冲节点A的缓冲阈值到5kb,那么电子设备在检测到缓冲节点A中已经缓冲的数据的大小为5kb时,就会开始对该已经缓冲的5kb数据进行处理。其中,需要说明的是,缓冲阈值可以为缓冲节点的最大可存储数据的值,也可以小于最大可存储数据的值。
需要说明的是,上述所提及的缓冲节点是否实际设置,可以根据实际环境所确定,而所减小缓冲阈值的缓冲节点也可以进一步的根据实际设置了的缓冲节点的数量来确定,本申请均不作限定。
本申请提供的一种传输控制方法,进入设定的播放场景后,检测所述电子设备是否处于音频播放设备连接状态,若检测到所述电子设备处于音频播放设备连接状态,则减小将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值,从而使得电子设备在播放图像数据以及与该图像数据对应的音频数据时,可以在需要将音频数据传输给音频播放设备的情况下,减小表征触发开始对缓冲节点已经缓冲的音频数据进行处理的值,从而使得对于在缓冲节点的数据可以被更快的处理,以便提升缓冲节点中数据被处理的频率,从而使得将音频数据能够更快的被音频设备播放出来,减小音频播放延迟。
请参阅图2,本申请提供的一种传输控制方法,应用于电子设备,所述方法包括:
步骤S210:进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应。
步骤S220:检测所述电子设备是否处于音频播放设备连接状态。
步骤S230:若检测到所述电子设备处于音频播放设备连接状态,获取所述图像数据所表征的画面内容的变化频率。
其中,可以理解的是图像数据包括多帧的图像。那么画面内容的变化频率表征的是连续几帧图像的内容的变化频率。而对于不同的图像数据其各自对应的内容的变化频率会有不同。例如,图像数据是游戏场景或者某些视频场景(电视剧或者电影),因为游戏场景或者电视剧场景或者电影场景中画面的变化频率比较高,那么在这种情况下对前述提到的音频数据延迟就要求较高,也就期望能够有较小的延迟甚至是用户无法识别的延迟。而对于另外一些视频场景,例如,知识讲解类的或者是某种课程类的视频场景中,因为画面会长期保持在相同的状态,而只是对应的音频数据会有不同的变化。例如,有些课程类的视频场景中,画面会长时间定格在一张PPT页面上,而对应的表征对PPT页面的内容进行讲解的音频会不断的变化。那么在这种情况,对于音频数据和图像数据的同步就要求相对而言不高,而对于音频数据的延迟也就可以不用太高。
那么基于上述情况,作为一种方式,获取所述图像数据所包括的连续多帧图像,获取所述连续多帧图像各自的内容特征,基于所述内容特征,获取所述图像数据所表征的画面内容的变化频率。
作为一种方式,可以通过获取灰度平均值来确定图像的内容特征。在这种方式下,电子设备可以获取所述连续多帧图像各自的灰度平均值,基于所述灰度平均值获取所述连续多帧图像各自的内容特征。
下面再对上述提到的基于所述灰度平均值获取所述连续多帧图像各自的内容特征进行说明。
可以先将图像缩小到8x8的尺寸,总共64个像素。这一步的作用是去除各种图片尺寸和图片比例的差异,只保留结构、明暗等基本信息。再将缩小后的图片,转为64级灰度图片。计算图片中所有像素的灰度平均值。将每个像素的灰度与平均值进行比较,如果大于或等于平均值记为1,小于平均值记为0。将上一步的比较结果,组合在一起,就构成了一个64位的二进制整数,这就是这张图像的指纹。得到图像的指纹后,就可以对比不同的图像的指纹,计算出64位中有多少位是不一样的.如果不相同的数据位数不超过5,就说明两张图像很相似,如果大于10,说明它们是两张不同的图像。
那么如果连续检测采集n张图像后,在检测到相邻两张图像不相似后,非相似度加1,那么将比对完成该n张图像后得到的非相似度除以前述的n,所得到的值即为变化频率。
步骤S231:根据所述变化频率,减小将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
作为一种方式,若所述变化频率低于预设值,将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值减小到第一缓冲阈值。若所述内容变化频率不低于预设值,将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值减小到第二缓冲阈值,其中,所述第一缓冲阈值大于所述第二缓冲阈值。
此外,作为另外一件方式,还可以设定多个表示变化频率的不同变化范围的区间段,而多个区间段可以各自对应一个减小的缓存阈值。例如,可以设定区间段A1表示变化频率为a1到a2,区间段A2表示变化频率为a2到a3,区间段A3表示变化频率为a3到a4。而其中区间段A1对应的所要减小的缓冲阈值为b1,而区间段A2对应的所要减小的缓冲阈值为b2,区间段A3对应的所要减小的缓冲阈值为b3。那么如果电子设备获取到变化频率X后,会先判X属于哪一个区间段。例如,若判断变化频率X属于区间段A1,那么电子设备确定缓冲节点所要减小的缓冲阈值为b1。
需要说明的是,在减小缓冲节点的缓冲阈值后,会在某种程度上提升处理器来对缓冲节点的数据进行处理的频率。例如,还是以前面的内容为例,若缓冲阈值为10kb,那么对于10kb的数据处理器只要处理1次即可,而若将缓冲阈值减小到5kb,那么对于10kb的数据,处理器需要处理2次,因此,也会在某种程度上增加了处理器的负担,而为了避免影响处理器处理其他数据的能力,造成电子设备整体的数据处理能力下降。
那么基于图像数据对应的变化频率,来确定所减小的缓冲阈值的大小的情况下,可以在当前的图像数据需要对应的音频不延迟或者延迟较小时,更多减小缓冲节点的缓冲阈值,而在当前的图像数据对应的音频延迟要求不高时,依然保持原有的缓冲阈值或者是相对而言较小的减小缓冲阈值,进而可以使得对于缓冲阈值的控制更加灵活,能够起到即可以能够灵活的减小音频数据延迟的同时,避免影响处理器处理其他数据的能力,从而保证电子设备的整体的数据处理能力不会受到影响。
若检测到所述电子设备未处于音频播放设备连接状态,结束流程。
本申请提供的一种传输控制方法,进入设定的播放场景后,检测所述电子设备是否处于音频播放设备连接状态,若检测到所述电子设备处于音频播放设备连接状态,则获取所述图像数据所表征的画面内容的变化频率,根据所述变化频率减小将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值,从而使得对于在缓冲节点的数据可以被更快的处理,以便提升缓冲节点中数据被处理的频率,从而使得将音频数据能够更快的被音频设备播放出来,减小音频播放延迟。
请参阅图3,本申请提供的一种传输控制方法,应用于电子设备,所述方法包括:
步骤S310:进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应。
步骤S320:检测所述电子设备是否处于音频播放设备连接状态。
步骤S330:若检测到所述电子设备处于音频播放设备连接状态,减小将所述音频数据传输给音频播放设备的过程中所经过的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
步骤S340:若检测到所述电子设备处于音频播放设备连接状态,提升所述电子设备的处理器的工作频率。
作为一种方式,获取所述缓冲节点减小后的缓冲阈值与减小前的缓冲阈值的比值,基于所述比值提升所述电子设备的处理器的工作频率。电子设备可以基于下述数据表来确定处理器的工作频率的提升幅度。
ID | ratio | Promotion |
1 | a | bGHZ |
2 | c | dGHZ |
其中,字段ratio表征所述缓冲节点减小后的缓冲阈值与减小前的缓冲阈值的比值,而字段Promotion表征所提升的工作频率。那么在检测到比值为a时,提升bGHZ的工作频率,而在检测到比值为b时,提升DGHZ的工作频率。此外,还可以以阶段值对应同一个提升工作频率,例如,若检测到比值为a到a1,均可以对应值为b的工作频率的提升。
本申请提供的一种传输控制方法,进入设定的播放场景后,检测所述电子设备是否处于音频播放设备连接状态,若检测到所述电子设备处于音频播放设备连接状态,则获取所述图像数据所表征的画面内容的变化频率,根据所述变化频率减小将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值,并同时提升处理器的处理频率,从而使得对于在缓冲节点的数据可以被更快的处理,以便提升缓冲节点中数据被处理的频率,从而使得将音频数据能够更快的被音频设备播放出来,减小音频播放延迟。
请参阅图4,本申请提供的一种传输控制装置400,运行于电子设备,所述装置400包括:
播放场景触发单元410,用于触发所述电子设备进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应。
连接状态检测单元420,用于检测所述电子设备是否处于音频播放设备连接状态。
作为一种方式,连接状态检测单元420,具体用于检测电子设备是否通过蓝牙连接有蓝牙设备;若检测到电子设备连接有蓝牙设备,检测所述蓝牙设备的类型是否为音频设备类型;若是,则判断电子设备处于音频播放设备连接状态。
传输控制单元430,用于若所述连接状态检测单元检测到所述电子设备处于音频播放设备连接状态,减小将所述音频数据传输给音频播放设备的过程中所经过的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
请参阅图5,本申请提供的一种传输控制装置500,运行于电子设备,所述装置500包括:
播放场景触发单元510,用于触发所述电子设备进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应。
连接状态检测单元520,用于检测所述电子设备是否处于音频播放设备连接状态。
内容检测单元530,用于若连接状态检测单元520检测到所述电子设备处于音频播放设备连接状态,获取所述图像数据所表征的画面内容的变化频率。
作为一种方式,内容检测单元530包括:
帧图像获取子单元531,用于获取所述图像数据所包括的连续多帧图像。
内容特征获取子单元532,用于获取所述连续多帧图像各自的内容特征。
作为一种方式,内容特征获取子单元532,具体用于获取所述连续多帧图像各自的灰度平均值,基于所述灰度平均值获取所述连续多帧图像各自的内容特征。
变化频率获取子单元533,用于基于所述内容特征,获取所述图像数据所表征的画面内容的变化频率。
传输控制单元540,用于根据所述变化频率,减小将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
请参阅图6,本申请提供的一种传输控制装置600,运行于电子设备,所述装置600包括:
播放场景触发单元610,用于进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应。
连接状态检测单元620,用于检测所述电子设备是否处于音频播放设备连接状态。
传输控制单元630,用于若连接状态检测单元620检测到所述电子设备处于音频播放设备连接状态,减小将所述音频数据传输给音频播放设备的过程中所经过的缓冲节点的缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
处理器控制单元640,用于若连接状态检测单元620检测到所述电子设备处于音频播放设备连接状态,提升所述电子设备的处理器的工作频率。
需要说明的是,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
需要说明的是,本申请中具体如何根据音频编码类型对音频数据进行编码是可以采用现有的技术,本申请就不再细述。
综上所述,本申请提供的一种传输控制方法、装置以及电子设备,进入设定的播放场景后,检测所述电子设备是否处于音频播放设备连接状态,若检测到所述电子设备处于音频播放设备连接状态,则减小将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值,从而使得电子设备在播放图像数据以及与该图像数据对应的音频数据时,可以在需要将音频数据传输给音频播放设备的情况下,减小表征触发开始对缓冲节点已经缓冲的音频数据进行处理的值,从而使得对于在缓冲节点的数据可以被更快的处理,以便提升缓冲节点中数据被处理的频率,从而使得将音频数据能够更快的被音频设备播放出来,减小音频播放延迟。
下面将结合图7对本申请提供的一种电子设备进行说明。
请参阅图7,基于上述的传输控制方法、装置,本申请实施例还提供的另一种可以执行前述终端控制方法的电子设备100。电子设备100包括相互耦合的一个或多个(图中仅示出一个)处理器102、存储器104、无线模块106以及音频电路110。其中,该存储器104中存储有可以执行前述实施例中内容的程序,而处理器102可以执行该存储器104中存储的程序。
具体的,所述存储器104可用于存储软件程序以及模块,所述处理器102通过运行存储在所述存储器104内的软件程序以及模块,从而执行各种功能应用以及数据处理。所述存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,所述存储器104可进一步包括相对于所述处理器102远程设置的存储器。
所述无线模块106用于接收以及发送电磁波,实现电磁波与电信号的相互转换,从而与通讯网络或者其他设备进行通讯。所述无线模块106可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。上述的无线网络可包括蜂窝式电话网、无线局域网或者城域网。上述的无线网络可以使用各种通信标准、协议及技术,包括但并不限于全球移动通信系统(Global System for Mobile Communication,GSM)、IEEE 802协议以及蓝牙协议。
其中,音频数据可以从所述存储器104处或者通过所述无线模块106获取。此外,音频数据也可以存储至所述存储器104中或者通过所述无线模块106进行发送。该无线模块106可以为蓝牙通信模块、WIFI通信模块或者支持其他无线通信协议的模块。
再者,该音频电路110还可以用于对于要通过蓝牙(当无线模块106基于蓝牙通信协议传输数据时)传输的音频数据进行编码,其中,编码时所采用的音频编码类型可以根据前述实施例提供的方式得到。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (8)
1.一种传输控制方法,其特征在于,应用于电子设备,所述方法包括:
进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应;
检测所述电子设备是否处于音频播放设备连接状态;
若检测到所述电子设备处于音频播放设备连接状态,获取所述图像数据所表征的画面内容的变化频率;
若所述变化频率低于预设值,将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值减小到第一缓冲阈值;
若所述内容变化频率不低于预设值,将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值减小到第二缓冲阈值,其中,所述第一缓冲阈值大于所述第二缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
2.根据权利要求1所述的方法,其特征在于,所述获取所述图像数据所表征的画面的内容变化频率的步骤包括:
获取所述图像数据所包括的连续多帧图像;
获取所述连续多帧图像各自的内容特征;
基于所述内容特征,获取所述图像数据所表征的画面内容的变化频率。
3.根据权利要求2所述的方法,其特征在于,所述获取所述连续多帧图像各自的内容特征的步骤包括:
获取所述连续多帧图像各自的灰度平均值;
基于所述灰度平均值获取所述连续多帧图像各自的内容特征。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述缓冲节点减小后的缓冲阈值与减小前的缓冲阈值的比值;
基于所述比值提升所述电子设备的处理器的工作频率。
5.根据权利要求1所述的方法,其特征在于,所述检测所述电子设备是否处于音频播放设备连接状态包括:
检测电子设备是否通过蓝牙连接有蓝牙设备;
若检测到电子设备连接有蓝牙设备,检测所述蓝牙设备的类型是否为音频设备类型;
若是,则判断电子设备处于音频播放设备连接状态。
6.一种传输控制装置,其特征在于,运行于电子设备,所述装置包括:
播放场景触发单元,用于触发所述电子设备进入设定的播放场景,在所述播放场景中所播放的内容包括音频数据和图像数据,其中所述音频数据和所述图像数据相对应;
连接状态检测单元,用于检测所述电子设备是否处于音频播放设备连接状态;
传输控制单元,用于若所述连接状态检测单元检测到所述电子设备处于音频播放设备连接状态,获取所述图像数据所表征的画面内容的变化频率;若所述变化频率低于预设值,将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值减小到第一缓冲阈值;若所述内容变化频率不低于预设值,将所述音频数据传输给音频播放设备的过程中所途径的缓冲节点的缓冲阈值减小到第二缓冲阈值,其中,所述第一缓冲阈值大于所述第二缓冲阈值,其中,当检测到所述缓冲节点中已经缓冲的音频数据的大小符合所述缓冲阈值后,开始对所述缓冲节点已经缓存的音频数据进行处理。
7.一种电子设备,其特征在于,包括一个或多个处理器以及存储器;
一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行权利要求1-5任一所述的方法。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有程序代码,其中,在所述程序代码被处理器运行时执行权利要求1-5任一所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810928162.XA CN109144463B (zh) | 2018-08-14 | 2018-08-14 | 传输控制方法、装置以及电子设备 |
PCT/CN2019/093959 WO2020034780A1 (zh) | 2018-08-14 | 2019-06-29 | 传输控制方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810928162.XA CN109144463B (zh) | 2018-08-14 | 2018-08-14 | 传输控制方法、装置以及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109144463A CN109144463A (zh) | 2019-01-04 |
CN109144463B true CN109144463B (zh) | 2020-08-25 |
Family
ID=64789494
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810928162.XA Active CN109144463B (zh) | 2018-08-14 | 2018-08-14 | 传输控制方法、装置以及电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN109144463B (zh) |
WO (1) | WO2020034780A1 (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109144463B (zh) * | 2018-08-14 | 2020-08-25 | Oppo广东移动通信有限公司 | 传输控制方法、装置以及电子设备 |
CN110505613B (zh) * | 2019-08-19 | 2022-11-04 | 惠州Tcl移动通信有限公司 | 音频数据处理方法、计算机可读存储介质以及计算机设备 |
CN112669859B (zh) * | 2019-10-16 | 2024-04-02 | Oppo广东移动通信有限公司 | 一种通信模式控制方法及装置 |
CN114501158B (zh) * | 2020-10-27 | 2023-03-24 | 海信视像科技股份有限公司 | 显示设备、外接音响设备及外接音响设备音频输出的方法 |
CN114979783B (zh) * | 2021-02-26 | 2024-04-09 | 华为技术有限公司 | 一种音视频播放方法、装置和电子设备 |
CN115426561A (zh) * | 2022-07-29 | 2022-12-02 | 歌尔科技有限公司 | 耳机的控制方法、装置、耳机及介质 |
CN115629733B (zh) * | 2022-12-20 | 2023-03-28 | 翱捷科技(深圳)有限公司 | 音频播放方法、芯片、系统及存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106649586A (zh) * | 2016-11-18 | 2017-05-10 | 腾讯音乐娱乐(深圳)有限公司 | 一种音频文件的播放方法及装置 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
IL123906A0 (en) * | 1998-03-31 | 1998-10-30 | Optibase Ltd | Method for synchronizing audio and video streams |
CN1567971A (zh) * | 2003-07-07 | 2005-01-19 | 英业达集团(南京)电子技术有限公司 | 利用无线终端机自无线网络即时接收并播放语音数据的方法 |
JP2007058541A (ja) * | 2005-08-24 | 2007-03-08 | Matsushita Electric Ind Co Ltd | プロセッサ、処理方法及び処理プログラム |
US7886073B2 (en) * | 2008-08-08 | 2011-02-08 | Cisco Technology, Inc. | Systems and methods of reducing media stream delay |
KR20120108564A (ko) * | 2011-03-24 | 2012-10-05 | 삼성전자주식회사 | 데이터 처리 시스템 및 그 동작 방법 |
CN103078810A (zh) * | 2012-12-31 | 2013-05-01 | 中国科学院自动化研究所 | 一种高效率富媒体展现系统和方法 |
US9826015B2 (en) * | 2013-09-04 | 2017-11-21 | Qualcomm Incorporated | Dynamic and automatic control of latency buffering for audio/video streaming |
CN103795950B (zh) * | 2014-02-21 | 2017-07-28 | 深圳创维-Rgb电子有限公司 | 电视音频信号处理装置 |
CN105376628B (zh) * | 2014-08-27 | 2018-09-21 | 深圳Tcl新技术有限公司 | 音视频信号同步方法和装置 |
WO2017190346A1 (zh) * | 2016-05-06 | 2017-11-09 | 华为技术有限公司 | 音视频数据同步方法和装置 |
CN108366299A (zh) * | 2018-03-29 | 2018-08-03 | 上海七牛信息技术有限公司 | 一种媒体播放方法以及装置 |
CN109144463B (zh) * | 2018-08-14 | 2020-08-25 | Oppo广东移动通信有限公司 | 传输控制方法、装置以及电子设备 |
-
2018
- 2018-08-14 CN CN201810928162.XA patent/CN109144463B/zh active Active
-
2019
- 2019-06-29 WO PCT/CN2019/093959 patent/WO2020034780A1/zh active Application Filing
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106649586A (zh) * | 2016-11-18 | 2017-05-10 | 腾讯音乐娱乐(深圳)有限公司 | 一种音频文件的播放方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN109144463A (zh) | 2019-01-04 |
WO2020034780A1 (zh) | 2020-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109144463B (zh) | 传输控制方法、装置以及电子设备 | |
CN109151194B (zh) | 数据传输方法、装置、电子设备以及存储介质 | |
CN112087633B (zh) | 视频解码方法、装置及存储介质 | |
CN109273017B (zh) | 编码控制方法、装置以及电子设备 | |
US8260349B2 (en) | Image/audio playback device of mobile communication terminal | |
CN109275129B (zh) | 通信处理方法、装置、电子设备及存储介质 | |
US11202066B2 (en) | Video data encoding and decoding method, device, and system, and storage medium | |
JP5026167B2 (ja) | ストリーム伝送サーバおよびストリーム伝送システム | |
EP3846020A1 (en) | Sound effect adjusting method and apparatus, electronic device, and storage medium | |
CN109274407B (zh) | 数据传输方法、装置、电子设备以及存储介质 | |
CN108184163A (zh) | 一种视频播放方法、存储介质及播放器 | |
CN109102816B (zh) | 编码控制方法、装置以及电子设备 | |
CN112423074B (zh) | 音视频同步处理方法、装置、电子设备及存储介质 | |
CN107493478B (zh) | 编码帧率设置方法及设备 | |
JP2005101766A (ja) | 電子装置及びその制御方法 | |
CN116155874A (zh) | 音频传输方法、电子设备及存储介质 | |
US9456180B2 (en) | Image processing apparatus, communication system, and computer program | |
US20220095009A1 (en) | Method and apparatus for controlling audio sound quality in terminal using network | |
CN111510531A (zh) | 终端伸缩镜头的降噪方法、装置、终端及存储介质 | |
CN113658070A (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
JP2004354677A (ja) | 情報処理装置、その方法、そのプログラム、そのプログラムを記録した記録媒体、および、再生装置 | |
CN113660599A (zh) | 扬声器的控制方法、装置、移动终端及存储介质 | |
JP2016126037A (ja) | 信号処理装置、および信号処理方法、並びにプログラム | |
KR20050062116A (ko) | 이동통신 단말기의 영상 출력 방법 | |
US9813654B2 (en) | Method and system for transmitting data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |