CN110248204A - 一种直播缓存的处理方法、装置、设备和存储介质 - Google Patents

一种直播缓存的处理方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN110248204A
CN110248204A CN201910641736.XA CN201910641736A CN110248204A CN 110248204 A CN110248204 A CN 110248204A CN 201910641736 A CN201910641736 A CN 201910641736A CN 110248204 A CN110248204 A CN 110248204A
Authority
CN
China
Prior art keywords
caching
audio buffer
duration
frame
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910641736.XA
Other languages
English (en)
Other versions
CN110248204B (zh
Inventor
黄海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huya Technology Co Ltd
Original Assignee
Guangzhou Huya Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huya Technology Co Ltd filed Critical Guangzhou Huya Technology Co Ltd
Priority to CN201910641736.XA priority Critical patent/CN110248204B/zh
Publication of CN110248204A publication Critical patent/CN110248204A/zh
Application granted granted Critical
Publication of CN110248204B publication Critical patent/CN110248204B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Abstract

本发明实施例公开了一种直播缓存的处理方法、装置、设备和存储介质。该方法通过在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；若是，则获取当前时刻下所述音频缓存数据的缓存时长；采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计，以实现减少播放直播内容的缓存累计时出现的多次内容跳跃、多次倍速启停的情况，使得直播内容可以顺畅播放。

Description

一种直播缓存的处理方法、装置、设备和存储介质
技术领域
本发明实施例涉及直播技术，尤其涉及一种直播缓存的处理方法、装置、设备和存储介质。
背景技术
直播是一种实时性、互动性显著的以互联网传播内容的形式。一般的，会在用于播放直播内容的播放器中设置用于缓存直播内容的缓冲区，来避免因网络抖动所带来的播放卡顿的问题。但是缓冲区中所缓存的直播内容，同时也带来了直播延时的问题。
其中，直播延时指的是主播端录制视频帧的时间与观众端观看到该视频帧的时间之间的时间间隔。通常，可以通过快速消耗播放器所缓存的直播内容的方式，来降低直播延时。具体的，可以通过监测直播内容的缓存时长，并设定一个阈值，当直播内容的缓存时长超过该阈值后，则对该缓存的直播内容做倍速播放或者丢帧处理。
但是，这种以判定阈值来决定是否开启处理的方法，有以下几种问题：
1、播放器首次接入直播流时，大量的直播内容会被陆续缓存。在这个过程中，“缓存时长超过阈值→触发丢帧或倍速播放→缓存时长低于阈值→停止丢帧或倍速播放”将被多次触发，播放器的播放效果为短时间连续出现多次倍速启停或者音视频跳跃。
2、在网络抖动比较大时，在缓存的直播内容超过阀值后，即开始缩减缓存区中的直播内容，当直播内容的缓存速度小于播放速度时，会造成明显的卡顿。
发明内容
本发明提供一种直播缓存的处理方法、装置、设备和存储介质，以实现减少播放直播内容的缓存累计时出现的多次内容跳跃、多次倍速启停的情况，使得直播内容可以顺畅播放。
第一方面，本发明实施例提供了一种直播缓存的处理方法，该方法包括：
在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；
若是，则获取当前时刻下所述音频缓存数据的缓存时长；
采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计。
进一步的，所述根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态，包括：
获取预设周期内的、关于所述音频缓存数据的缓存时长的采样数据；
计算所述采样数据的变异系数，所述变异系数用于反映所述音频缓存数据的缓存时长的变化状态；
当所述变异系数小于预设阈值时，则确定所述音频缓存数据处于稳定状态。
进一步的，所述采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计，包括：
确定当前时刻所述音频缓存数据的缓存时长所归属的、预置的延时范围；
使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计。
进一步的，所述直播内容还包括：视频缓存区中的视频缓存数据；预置的所述延时范围包括第一延时范围；
所述使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计，包括：
响应所述第一延时范围关联的处理方式，同步增加所述视频缓存数据和所述音频缓存数据的播放速率。
进一步的，所述确定当前时刻所述音频缓存数据的缓存时长所归属的、预置的延时范围，包括：
将维持所述直播内容顺畅播放的、所述直播内容的缓存时长，作为第一时长；
将预置的维持所述直播内容在倍速播放时顺畅播放的、所述直播内容的缓存时长，作为第二时长；
当所述音频缓存数据的缓存时长大于所述第一时长，且小于所述第二时长时，则确定所述音频缓存数据的缓存时长归属于所述第一延时范围。
进一步的，所述直播内容还包括：视频缓存区中的视频缓存数据；预置的所述延时范围包括第二延时范围；
所述使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计，包括：
响应所述第二延时范围关联的处理方式，同步删除所述视频缓存数据的视频帧、所述音频缓存数据的音频帧。
进一步的，所述同步删除所述视频缓存数据的视频帧、所述音频缓存数据的音频帧，包括：
获取所述音频缓存数据的音频缓存队列、所述视频缓存数据的视频缓存队列；其中，所述音频缓存队列存储有所述音频缓存数据的音频帧，所述视频缓存队列存储有所述视频缓存数据的视频帧；
从所述视频缓存队列的视频帧中确定一视频关键帧，作为目标视频帧；
删除所述视频缓存队列中排在所述目标视频帧之前的视频帧；
在所述音频缓存队列中确定与所述目标视频帧具有相同时间戳的音频关键帧，作为目标音频帧；
删除所述音频缓存队列中排在所述目标音频帧之前的音频帧。
进一步的，所述从所述视频缓存队列的视频帧中确定一视频关键帧，作为目标视频帧，包括：
从所述视频缓存队列的队尾往队首遍历查找一视频帧，作为参考视频帧，其中，所述参考视频帧到队尾的时间间隔大于预设的时间阈值；
将从所述参考视频帧开始的、往所述视频缓存队列的队首方向的第一个视频关键帧，作为目标视频帧。
进一步的，所述确定所述音频缓存数据的缓存时长所归属的、预置的延时范围，包括：
将预置的维持所述直播内容在倍速播放时顺畅播放的、所述直播内容的缓存时长，作为第二时长；
当所述音频缓存数据的缓存时长大于等于所述第二时长时，则确定所述音频缓存数据的缓存时长归属于所述第二延时范围。
第二方面，本发明实施例还提供了一种直播缓存的处理装置，该装置包括：
状态确定模块，用于在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；
时长获取模块，用于若是，则获取当前时刻下所述音频缓存数据的缓存时长；
缓存减少模块，用于采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计。
第三方面，本发明实施例还提供了一种直播缓存的处理设备，该设备包括：存储器以及一个或多个处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面中任一所述的直播缓存的处理方法。
第四方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面中任一所述的直播缓存的处理方法。
本发明通过在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；若是，则获取当前时刻下所述音频缓存数据的缓存时长；采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计，解决了因频繁减少直播内容的缓存累计所带来的多次倍速启停和多次内容跳跃的问题，以实现减少播放直播内容时多次内容跳跃、多次倍速启停的情况，平衡直播延时和播放卡顿的问题，使得直播内容可以顺畅播放。
附图说明
图1为本发明实施例一提供的一种直播缓存的处理方法的流程图；
图2为本发明实施例二提供的一种直播缓存的处理方法的流程图；
图3为本发明实施例三提供的一种直播缓存的处理装置的结构示意图；
图4为本发明实施例四提供的一种直播缓存的处理设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种直播缓存的处理方法的流程图，本实施例可适用于减少直播内容的直播延时情况。该方法可以由直播缓存的处理设备来执行，该直播缓存的处理设备可以是服务器、电脑、移动终端等。该移动终端可以是手机、平板等。在一实施例中，在该直播缓存的处理设备还设置有用于播放直播内容的播放器，本实施例中的直播缓存方法，可以集成与该播放器中。
参照图1，该方法具体包括如下步骤：
S110、在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态。
直播是一种实时性、互动性显著的以互联网传播内容的形式。直播根据直播内容的不同可以分为音频直播和视频直播等。其中，音频直播是以主播用户录制的音频数据作为直播内容传播给听众用户；视频直播是以主播用户录制的视频数据和音频数据作为直播内容传播给观众用户。听众或观众可以通过播放器播放该直播内容。
一般的，会在播放器设置用于缓存直播内容的缓存区，来避免因网络抖动所带来的播放卡顿的问题。以音频直播为例，直播内容可以包括音频缓存数据；以视频直播为例，直播内容可以包括音频缓存数据和视频缓存数据。进一步的，可以使用不同的缓存区分别缓存音频缓存数据和视频缓存数据。如，该音频缓存数据缓存在音频缓存区中，视频缓存数据缓存在视频缓存区中。
本实施例中，音频缓存数据的缓存时长指的是音频缓存区中已缓存的音频缓存数据可以持续播放的时间。一般的，音频缓存数据或视频缓存数据均可以是携带有显示时间戳(Presentation Time Stamp，PTS)，该PTS可以用来告诉播放器该在什么时候播放这一帧的音频缓存数据或视频缓存数据。进一步的，可以使用该PTS计算音频缓存区中已缓存的音频缓存数据的时间间隔，来确定该音频缓存数据的缓存时长。进一步的，在直播内容的播放过程中，可以通过从缓存区中读取直播内容的缓存数据按照PTS的时间顺序进行播放。
需要注意的是，虽然通过设置直播内容的缓存区可以解决因网络抖动所带来的播放卡顿的问题，但同时却因此增加了直播延时。具体的，如果一帧直播内容在主播侧被采集时刻为t0，某听众或观众播放该帧直播内容的时刻为t1，那么该听众或观众能感知的直播延时为t1-t0。
一般的，可以通过监测直播内容的缓存时长，并设定一个阈值，当直播内容的缓存时长超过该阈值后，则减少对直播内容的缓存累计。但是当缓存区中直播内容的缓存数据的缓存时长的变化状态不稳定时，则有可能出现多次触发减少对直播内容的缓存累计的过程，导致直播内容频繁出现卡顿、多次内容跳跃的问题。
因此，播放卡顿问题和直播延时问题是两个互相矛盾的问题，需要在两种之间做权衡，使得在保证减少播放卡顿现象出现频次的同时，尽量减少直播延时。为了解决上述播放卡顿和直播延时的权衡问题，本实施例中，可以通过在确定直播内容处于稳定状态时，减少直播内容的缓存累计。
进一步的，本实施例中，可以通过检测音频缓存区中音频缓存数据的缓存时长的变化状态，来确定缓存的直播内容的稳定性；也可以通过检测视频缓存区中视频缓存数据的缓存时长的变化状态，来确定缓存的直播内容的稳定性。
具体的，在视频直播的实施例中，在播放直播内容时，还需考虑音视频同步的问题。本实施例中，音频缓存数据和视频缓存数据均是以帧的形式存在，如音频缓存数据中包括音频帧，视频缓存数据中包括视频帧。要实现音视频同步，通常需要选择一个参考时钟，参考时钟上的时间是线性递增的，编码音视频流时依据参考时钟上的时间给每帧数据打上时间戳。在播放时，读取数据帧上的时间戳，同时参考当前参考时钟上的时间来安排播放。这里所说的时间戳就是我们前面说的PTS。本实施例中可以选择：同步视频到音频、同步音频到视频、同步音频和视频到外部时钟。
本实施例中，以同步视频到音频为例进行说明，即以直播内容中的音频缓存数据作为主时钟。视频缓存数据的消耗速度会受到音频缓存数据的消耗速度的影响。而音频缓存数据作为主时钟，音频缓存数据的消耗速度是固定的，只由音频缓存数据的采样率决定。
优选的，在同步视频到音频的实施例中，通过根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断音频缓存数据是否处于稳定状态，不会受其他因素影响。
示例性的，在同步音频到视频的实施例中，通过根据视频缓存区中视频缓存数据的缓存时长的变化状态，判断视频缓存数据是否处于稳定状态，不会受其他因素影响。
进一步的，本实施例可以通过获取预设周期内的、关于音频缓存数据的缓存时长的采样数据；计算采样数据的变异系数，变异系数用于反映音频缓存数据的缓存时长的变化状态；当变异系数小于预设阈值时，则确定音频缓存数据处于稳定状态。示例性的，可以是以4秒为预设周期，在该预设周期内每隔100毫秒，检测音频缓存区中的音频缓存数据的缓存时长，从而获取由多个音频缓存数据的缓存时长所组成的采样数据。则采样数据的变异系数可以表示为采样数据的标准差和平均值的比值。
示例性的，定义采样数据中，第i次采样的音频缓存数据的缓存时长为Xi，在该预设周期4秒内采样的总次数为n。
1、采样数据的平均值μ可以表示为：
2、采样数据的标准差可以表示为：
3、该采样数据的变异系数cv可以表示为
进一步的，可以设置该预设阈值为0.1。当预设周期内音频缓存数据的变异系数cv<0.1时，确定音频缓存数据处于稳定状态，则确定缓存的直播内容处于稳定状态。在缓存的直播内容处于稳定状态时，适合减少直播内容的缓存累计，也不会存在频繁触发的情况。当预设周期内音频缓存数据的变异系数cv>0.1时，确定音频缓存数据处于不稳定状态。在缓存的直播内容处于不稳定状态时，若减少直播内容的缓存累计，容易造成频繁触发的情况。
也就是说，本实施例中，判断音频缓存数据是否处于稳定状态，若是，则执行步骤S120；若否，则继续执行步骤S110。
S120、获取当前时刻下所述音频缓存数据的缓存时长。
本实施例中，可以使用PTS计算音频缓存区中已缓存的音频缓存数据的时间间隔，来确定当前时刻下该音频缓存数据的缓存时长。示例性的，音频缓存数据中的音频帧可以是以音频缓存队列的形式进行存储。进一步的，可以使用该音频缓存队列处于队首的音频帧和处于队尾的音频帧，计算队首的音频帧和队尾的音频帧之间显示时间戳(PTS)的差值，作为当前时刻下该音频缓存数据的缓存时长。
S130、采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计。
本实施例中，减少对直播内容的缓存累计可以采用追帧的操作。一般的，追帧包括如下两种处理策略：倍速播放和丢帧处理。
假设现在有A、B、C三帧需要播放，且正常来说每帧需要播放2秒才能播放下一帧。
倍速播放指的是A、B、C还是按顺序播放，但是每帧现在只需展示1秒，效果上就类似于快进。
丢帧处理指的是播完A，跳过B不播，直接播放C，效果上就是画面出现跳变。
两种处理策略均存在各自的缺陷：
1、倍速播放的缺陷
若想快速消耗缓存在缓存区的直播内容，则需要设置较高的播放倍速，但可能导致音频缓存数据在播放时有尖锐的声音。播放倍速较低时，不会有尖锐的声音出现，但是持续时间较长，直播延时较长。
2、丢帧处理的缺陷
一般的，音视频数据具有各自的特性。其中，音频缓存数据中的音频帧可视情况随意丢弃，而视频缓存数据中视频帧就必须考虑帧与帧之间的参考关系，不能随意丢弃。与此同时还需考虑音视频同步的情况，以免造成新的问题。
具体的，通常会对直播内容中的一部分视频帧进行压缩(编码)处理。由于压缩处理的方式不同，视频缓存数据中的视频帧就分为了不同的类别，其中包括：I帧、P帧、B帧。
I帧、P帧、B帧的区别在于：
I帧(Intra coded frames)：I帧图像采用帧内编码方式，即只利用了单帧图像内的空间相关性，而没有利用时间相关性。I帧使用帧内压缩，不使用运动补偿，由于I帧不依赖其它帧，所以是随机存取的入点，同时是解码的基准帧。I帧主要用于接收机的初始化和信道的获取，以及节目的切换和插入，I帧图像的压缩倍数相对较低。I帧图像是周期性出现在图像序列中的，出现频率可由编码器选择。
P帧(Predicted frames)：P帧和B帧图像采用帧间编码方式，即同时利用了空间和时间上的相关性。P帧图像只采用前向时间预测，可以提高压缩效率和图像质量。P帧图像中可以包含帧内编码的部分，即P帧中的每一个宏块可以是前向预测，也可以是帧内编码。
B帧(Bi-directional predicted frames)：B帧图像采用双向时间预测，可以大大提高压缩倍数。值得注意的是，由于B帧图像采用了未来帧作为参考，因此MPEG-2编码码流中图像帧的传输顺序和显示顺序是不同的。
也就是说，一个I帧可以不依赖其他帧就解码出一幅完整的图像，而P帧、B帧不行。P帧需要依赖视频流中排在它前面的帧才能解码出图像。B帧则需要依赖视频流中排在它前面或后面的帧才能解码出图像。
所以，视频缓存数据中视频帧就必须考虑帧与帧之间的参考关系，不能随意丢弃。而音频缓存数据没有类似视频缓存数据中B帧，不需要双向预测，从而可以视情况随意丢弃。
为此，本实施例中，可以通过确定当前时刻音频缓存数据的缓存时长所归属的、预置的延时范围；使用该延时范围预先关联的处理策略，减少对直播内容的缓存累计。
例如，在缓存时长较长时，可以采用丢帧处理的处理策略。由于缓存时长较长，视频缓存数据中的视频帧较多，可以将具有参考关系的视频帧同时丢弃，一方面，可以减少因P帧和B帧由于缺少I帧而带来的视频帧无法正常解码、画面变花的问题出现，另一方面，也可以通过丢帧，快速减少对直播内容的缓存累计，从而大幅减少直播内容的缓存时长。
又例如，在缓存时长较短时，可以采用倍速播放的处理策略。由于缓存时长较短，在进行倍速播放时，不至于会出现有尖锐的声音的情况。
本实施例的技术方案，通过在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；若是，则获取当前时刻下所述音频缓存数据的缓存时长；采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计，解决了因频繁减少直播内容的缓存累计所带来的多次倍速启停和多次内容跳跃的问题，以实现减少播放直播内容时多次内容跳跃、多次倍速启停的情况，平衡直播延时和播放卡顿的问题，使得直播内容可以顺畅播放。
实施例二
图2为本发明实施例二提供的一种直播缓存的处理方法的流程图。
本实施例在上述实施例的基础上，进一步增加对延时范围预先关联的处理策略的描述。
参照图2，该方法具体包括如下步骤：
S210、在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态。
本实施例中，直播内容包括缓存在音频缓存区的音频缓存数据和缓存在视频缓存区的视频缓存数据。
具体的，判断音频缓存数据是否处于稳定状态，若是，则执行步骤S220；若否，则继续执行步骤S210。
S220、获取当前时刻下所述音频缓存数据的缓存时长。
S230、确定当前时刻所述音频缓存数据的缓存时长所归属的、预置的延时范围。
本实施例中，可以预先设置有多个延时范围，且每个延时范围关联有处理策略。进一步的，该延时范围可以包括第一延时范围、第二延时范围和第三延时范围等。
1、第一延时范围
在一实施例中，延时范围包括第一延时范围，该延时范围可以对应缓存时长较短的情况。具体的，可以通过将维持直播内容顺畅播放的、直播内容的缓存时长，作为第一时长；将预置的维持直播内容在倍速播放时顺畅播放的、直播内容的缓存时长，作为第二时长；当音频缓存数据的缓存时长大于第一时长，且小于第二时长时，则确定音频缓存数据的缓存时长归属于第一延时范围。其中，当音频缓存数据的缓存时长大于等于第一时长时，可以维持直播内容顺畅播放，不至于出现由于直播内容的缓存速率小于直播内容的播放速率而出现的播放卡顿的情况。当音频缓存数据的缓存时长小于等于第二时长时，可以保证在对直播内容进行倍速播放时，不至于会出现有尖锐的声音的情况。因此在第一延时范围内采用倍速播放的处理策略来减少直播内容的缓存累计，可以既保证不会因为网络抖动而造成的播放卡顿，也保证了追帧处理过程不会出现如尖锐声音的问题。
2、第二延时范围
在一实施例中，延时范围包括第二延时范围，该延时范围可以对应缓存时长较长的情况。可以通过将预置的维持直播内容在倍速播放时顺畅播放的、直播内容的缓存时长，作为第二时长；当音频缓存数据的缓存时长大于等于第二时长时，则确定音频缓存数据的缓存时长归属于第二延时范围。当音频缓存数据的缓存时长大于等于第二时长时，可以认为缓存时长较长。视频缓存数据中的视频帧较多，可以将具有参考关系的视频帧同时丢弃，一方面，可以减少因P帧和B帧由于缺少I帧而带来的视频帧无法正常解码、画面变花的问题出现，另一方面，也可以通过丢帧，快速减少对直播内容的缓存累计，从而大幅减少直播内容的缓存时长。示例性的，该第一时长可以设置为2秒，第二时长可以设置为4秒。
3、第三延时范围
在一实施例中，所述延时范围包括第三延时范围。进一步的，可以将音频缓存数据的缓存时长小于第一时长的范围确定为第三延时范围。在音频缓存数据的缓存时长归属于第三延时范围时，确定无需进行追帧处理。
S240、使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计。
1、针对第一延时范围预先关联的处理策略：倍速播放
本实施例中，可以通过响应第一延时范围关联的处理方式，同步增加视频缓存数据和音频缓存数据的播放速率。进一步的，当音频缓存数据的缓存时长超出该第一延时范围时，则恢复预置的正常播放速率。
2、针对第二延时范围预先关联的处理策略：丢帧处理
本实施例中，可以通过响应所述第二延时范围关联的处理方式，同步删除所述视频缓存数据的视频帧、所述音频缓存数据的音频帧。
具体的，步骤S240可以进一步细化为步骤S241-S245：
S241、获取所述音频缓存数据的音频缓存队列、所述视频缓存数据的视频缓存队列。
本实施例中，音频缓存队列存储有音频缓存数据的音频帧，视频缓存队列存储有视频缓存数据的视频帧。
S242、从所述视频缓存队列的视频帧中确定一视频关键帧，作为目标视频帧。
本实施例中，可以通过从视频缓存队列的队尾往队首遍历查找一视频帧，作为参考视频帧，其中，参考视频帧到队尾的时间间隔大于预设的时间阈值；将从参考视频帧开始的、往视频缓存队列的队首方向的第一个视频关键帧，作为目标视频帧。具体的，该预设的时间阈值可以设置为第一时长。保证丢帧处理之后的直播内容的缓存时长大于第一时长，从而保证不会因为网络抖动而造成直播内容的播放卡顿问题。
S243、删除所述视频缓存队列中排在所述目标视频帧之前的视频帧。
S244、在所述音频缓存队列中确定与所述目标视频帧具有相同时间戳的音频关键帧，作为目标音频帧。
S245、删除所述音频缓存队列中排在所述目标音频帧之前的音频帧。
示例性的，假设预设的时间阈值为2秒，视频缓存区的视频缓存数据中总共具有n帧视频帧可以使用视频缓存队列进行保存，其中，第i帧视频帧可以表示为Pi。
1、从视频缓存队列的队尾开始往队首遍历查找，找到第一个视频帧m使得(Pn-Pm>2s)，Pm为参考视频帧。
2、从参考视频帧Pm往P1查找视频关键帧(I帧)，记第一个找到的视频关键帧(I帧)为目标视频帧Pb，记目标视频帧Pb的前一个视频帧为Pb-1，若Pb-1存在，则丢弃P1到Pb-1的视频帧。
3、若视频帧Pb-1存在，则在音频缓存队列中丢弃从队首开始至与视频帧Pb-1具有相同PTS的音频帧。
本实施例中，通过预先设置有多个延时范围，且每个延时范围关联有处理策略。当音频缓存数据的缓存时长大于等于第一时长时，可以维持直播内容顺畅播放，不至于出现由于直播内容的缓存速率小于直播内容的播放速率而出现的播放卡顿的情况。当音频缓存数据的缓存时长小于等于第二时长时，可以保证在对直播内容进行倍速播放时，不至于会出现有尖锐的声音的情况。因此在第一延时范围内采用倍速播放的处理策略来减少直播内容的缓存累计，可以既保证不会因为网络抖动而造成的播放卡顿，也保证了追帧处理过程不会出现如尖锐声音的问题。当音频缓存数据的缓存时长大于等于第二时长时，可以认为缓存时长较长。视频缓存数据中的视频帧较多，可以将具有参考关系的视频帧同时丢弃，一方面，可以减少因P帧和B帧由于缺少I帧而带来的视频帧无法正常解码、画面变花的问题出现，另一方面，也可以通过丢帧，快速减少对直播内容的缓存累计，从而大幅减少直播内容的缓存时长。
实施例三
图3为本发明实施例三提供的一种直播缓存的处理装置的结构示意图。
本实施例可适用于减少直播内容的直播延时情况。该装置可以集成在直播缓存的处理设备中，该直播缓存的处理设备可以是服务器、电脑、移动终端等。该移动终端可以是手机、平板等。在一实施例中，在该直播缓存的处理设备还设置有用于播放直播内容的播放器，本实施例中的直播缓存装置，可以集成与该播放器中。
参照图3，该装置具体包括如下结构：状态确定模块310、时长获取模块320和缓存减少模块330。
状态确定模块310，用于在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据。
时长获取模块320，用于若是，则获取当前时刻下所述音频缓存数据的缓存时长。
缓存减少模块330，用于采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计。
在上述技术方案的基础上，状态确定模块310，包括：
采样数据获取单元，用于获取预设周期内的、关于所述音频缓存数据的缓存时长的采样数据。
变异系数计算单元，用于计算所述采样数据的变异系数，所述变异系数用于反映所述音频缓存数据的缓存时长的变化状态。
稳定状态确定单元，用于当所述变异系数小于预设阈值时，则确定所述音频缓存数据处于稳定状态。
在上述技术方案的基础上，缓存减少模块330，包括：
延时范围确定单元，用于确定当前时刻所述音频缓存数据的缓存时长所归属的、预置的延时范围。
缓存减少单元，用于使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计。
在一实施例中，所述直播内容还包括：视频缓存区中的视频缓存数据；预置的所述延时范围包括第一延时范围；所述缓存减少单元，包括：
倍速播放子单元，用于响应所述第一延时范围关联的处理方式，同步增加所述视频缓存数据和所述音频缓存数据的播放速率。
在上述技术方案的基础上，延时范围确定单元，用于将维持所述直播内容顺畅播放的、所述直播内容的缓存时长，作为第一时长；将预置的维持所述直播内容在倍速播放时顺畅播放的、所述直播内容的缓存时长，作为第二时长；当所述音频缓存数据的缓存时长大于所述第一时长，且小于所述第二时长时，则确定所述音频缓存数据的缓存时长归属于所述第一延时范围。
在又一实施例中，所述直播内容还包括：视频缓存区中的视频缓存数据；预置的所述延时范围包括第二延时范围；所述缓存减少单元，包括：
丢帧处理子单元，用于响应所述第二延时范围关联的处理方式，同步删除所述视频缓存数据的视频帧、所述音频缓存数据的音频帧。
在上述技术方案的基础上，所述丢帧处理子单元，还用于获取所述音频缓存数据的音频缓存队列、所述视频缓存数据的视频缓存队列；其中，所述音频缓存队列存储有所述音频缓存数据的音频帧，所述视频缓存队列存储有所述视频缓存数据的视频帧；从所述视频缓存队列的视频帧中确定一视频关键帧，作为目标视频帧；删除所述视频缓存队列中排在所述目标视频帧之前的视频帧；在所述音频缓存队列中确定与所述目标视频帧具有相同时间戳的音频关键帧，作为目标音频帧；删除所述音频缓存队列中排在所述目标音频帧之前的音频帧。
在上述技术方案的基础上，所述丢帧处理子单元，还用于从所述视频缓存队列的队尾往队首遍历查找一视频帧，作为参考视频帧，其中，所述参考视频帧到队尾的时间间隔大于预设的时间阈值；将从所述参考视频帧开始的、往所述视频缓存队列的队首方向的第一个视频关键帧，作为目标视频帧。
在上述技术方案的基础上，延时范围确定单元，还用于将预置的维持所述直播内容在倍速播放时顺畅播放的、所述直播内容的缓存时长，作为第二时长；当所述音频缓存数据的缓存时长大于等于所述第二时长时，则确定所述音频缓存数据的缓存时长归属于所述第二延时范围。
上述产品可执行本发明任意实施例所提供的方法，具备执行方法相应的功能模块和有益效果。
实施例四
图4为本发明实施例四提供的一种直播缓存的处理设备的结构示意图。如图4所示，该直播缓存的处理设备包括：处理器40、存储器41、输入装置42以及输出装置43。该直播缓存的处理设备中处理器40的数量可以是一个或者多个，图4中以一个处理器40为例。该直播缓存的处理设备中存储器41的数量可以是一个或者多个，图4中以一个存储器41为例。该直播缓存的处理设备的处理器40、存储器41、输入装置42以及输出装置43可以通过总线或者其他方式连接，图4中以通过总线连接为例。该直播缓存的处理设备可以是电脑和服务器等。本实施例以直播缓存的处理设备为服务器进行详细说明，该服务器可以是独立服务器或集群服务器。
存储器41作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明任意实施例所述的直播缓存的处理方法对应的程序指令/模块(例如，直播缓存的处理装置中的状态确定模块310、时长获取模块320和缓存减少模块330)。存储器41可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据设备的使用所创建的数据等。此外，存储器41可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器41可进一步包括相对于处理器40远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置42可用于接收输入的数字或者字符信息，以及产生与直播缓存的处理设备的观众用户设置以及功能控制有关的键信号输入，还可以是用于获取图像的摄像头以及获取音频数据的拾音设备。输出装置43可以包括扬声器等音频设备。需要说明的是，输入装置42和输出装置43的具体组成可以根据实际情况设定。
处理器40通过运行存储在存储器41中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的直播缓存的处理方法。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种直播缓存的处理方法，包括：
在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；
若是，则获取当前时刻下所述音频缓存数据的缓存时长；
采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的直播缓存的处理方法操作,还可以执行本发明任意实施例所提供的直播缓存的处理方法中的相关操作，且具备相应的功能和有益效果。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是机器人，个人计算机，服务器，或者网络设备等)执行本发明任意实施例所述的直播缓存的处理方法。
值得注意的是，上述直播缓存的处理装置中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (12)

1.一种直播缓存的处理方法，其特征在于，包括：
在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；
若是，则获取当前时刻下所述音频缓存数据的缓存时长；
采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计。
2.根据权利要求1所述的方法，其特征在于，所述根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态，包括：
获取预设周期内的、关于所述音频缓存数据的缓存时长的采样数据；
计算所述采样数据的变异系数，所述变异系数用于反映所述音频缓存数据的缓存时长的变化状态；
当所述变异系数小于预设阈值时，则确定所述音频缓存数据处于稳定状态。
3.根据权利要求1所述的方法，其特征在于，所述采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计，包括：
确定当前时刻所述音频缓存数据的缓存时长所归属的、预置的延时范围；
使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计。
4.根据权利要求3所述的方法，其特征在于，所述直播内容还包括：视频缓存区中的视频缓存数据；预置的所述延时范围包括第一延时范围；
所述使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计，包括：
响应所述第一延时范围关联的处理方式，同步增加所述视频缓存数据和所述音频缓存数据的播放速率。
5.根据权利要求4所述的方法，其特征在于，所述确定当前时刻所述音频缓存数据的缓存时长所归属的、预置的延时范围，包括：
将维持所述直播内容顺畅播放的、所述直播内容的缓存时长，作为第一时长；
将预置的维持所述直播内容在倍速播放时顺畅播放的、所述直播内容的缓存时长，作为第二时长；
当所述音频缓存数据的缓存时长大于所述第一时长，且小于所述第二时长时，则确定所述音频缓存数据的缓存时长归属于所述第一延时范围。
6.根据权利要求3所述的方法，其特征在于，所述直播内容还包括：视频缓存区中的视频缓存数据；预置的所述延时范围包括第二延时范围；
所述使用该延时范围预先关联的处理策略，减少对所述直播内容的缓存累计，包括：
响应所述第二延时范围关联的处理方式，同步删除所述视频缓存数据的视频帧、所述音频缓存数据的音频帧。
7.根据权利要求6所述的方法，其特征在于，所述同步删除所述视频缓存数据的视频帧、所述音频缓存数据的音频帧，包括：
获取所述音频缓存数据的音频缓存队列、所述视频缓存数据的视频缓存队列；其中，所述音频缓存队列存储有所述音频缓存数据的音频帧，所述视频缓存队列存储有所述视频缓存数据的视频帧；
从所述视频缓存队列的视频帧中确定一视频关键帧，作为目标视频帧；
删除所述视频缓存队列中排在所述目标视频帧之前的视频帧；
在所述音频缓存队列中确定与所述目标视频帧具有相同时间戳的音频关键帧，作为目标音频帧；
删除所述音频缓存队列中排在所述目标音频帧之前的音频帧。
8.根据权利要求7所述的方法，其特征在于，所述从所述视频缓存队列的视频帧中确定一视频关键帧，作为目标视频帧，包括：
从所述视频缓存队列的队尾往队首遍历查找一视频帧，作为参考视频帧，其中，所述参考视频帧到队尾的时间间隔大于预设的时间阈值；
将从所述参考视频帧开始的、往所述视频缓存队列的队首方向的第一个视频关键帧，作为目标视频帧。
9.根据权利要求6-8任一所述的方法，其特征在于，所述确定所述音频缓存数据的缓存时长所归属的、预置的延时范围，包括：
将预置的维持所述直播内容在倍速播放时顺畅播放的、所述直播内容的缓存时长，作为第二时长；
当所述音频缓存数据的缓存时长大于等于所述第二时长时，则确定所述音频缓存数据的缓存时长归属于所述第二延时范围。
10.一种直播缓存的处理装置，其特征在于，包括：
状态确定模块，用于在直播内容的播放过程中，根据音频缓存区中音频缓存数据的缓存时长的变化状态，判断所述音频缓存数据是否处于稳定状态；其中，所述直播内容包括所述音频缓存数据；
时长获取模块，用于若是，则获取当前时刻下所述音频缓存数据的缓存时长；
缓存减少模块，用于采用与所述缓存时长匹配的处理策略，减少对所述直播内容的缓存累计。
11.一种直播缓存的处理设备，其特征在于，包括：存储器以及一个或多个处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-9中任一所述的直播缓存的处理方法。
12.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-9中任一所述的直播缓存的处理方法。
CN201910641736.XA 2019-07-16 2019-07-16 一种直播缓存的处理方法、装置、设备和存储介质 Active CN110248204B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910641736.XA CN110248204B (zh) 2019-07-16 2019-07-16 一种直播缓存的处理方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910641736.XA CN110248204B (zh) 2019-07-16 2019-07-16 一种直播缓存的处理方法、装置、设备和存储介质

Publications (2)

Publication Number Publication Date
CN110248204A true CN110248204A (zh) 2019-09-17
CN110248204B CN110248204B (zh) 2021-12-24

Family

ID=67892496

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910641736.XA Active CN110248204B (zh) 2019-07-16 2019-07-16 一种直播缓存的处理方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN110248204B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110634511A (zh) * 2019-09-27 2019-12-31 北京西山居互动娱乐科技有限公司 一种音频数据处理方法及装置
CN111050208A (zh) * 2019-12-23 2020-04-21 深圳市豪恩汽车电子装备股份有限公司 机动车实时监控视频播放装置及方法
CN111093107A (zh) * 2019-12-18 2020-05-01 深圳市麦谷科技有限公司 播放实时直播流的方法和装置
CN111355975A (zh) * 2020-03-26 2020-06-30 郑州信大捷安信息技术股份有限公司 一种直播客户端音视频延时调节播放系统及方法
CN111491207A (zh) * 2020-04-17 2020-08-04 北京三体云联科技有限公司 直播中视频数据处理方法、装置和电子设备
CN111586529A (zh) * 2020-05-08 2020-08-25 北京三体云联科技有限公司 音频数据处理方法、装置、终端和计算机可读存储介质
CN111885334A (zh) * 2020-08-26 2020-11-03 杭州速递科技有限公司 一种音视频实时追帧缩小延迟的方法
CN112788360A (zh) * 2020-12-30 2021-05-11 北京达佳互联信息技术有限公司 直播方法、直播装置与计算机程序产品
CN112954376A (zh) * 2021-02-04 2021-06-11 海信电子科技(武汉)有限公司 一种视频播放方法及显示设备
CN113301051A (zh) * 2021-05-27 2021-08-24 西安万像电子科技有限公司 数据的传输方法、装置、计算机存储介质和处理器
CN113852857A (zh) * 2021-10-20 2021-12-28 成都华栖云科技有限公司 一种基于html5视频帧步进时的声音播放方法及系统
CN114095769A (zh) * 2020-08-24 2022-02-25 海信视像科技股份有限公司 一种应用级播放器的直播低延迟处理方法及显示设备
CN114501158A (zh) * 2020-10-27 2022-05-13 海信视像科技股份有限公司 显示设备、外接音响设备及外接音响设备音频输出的方法
CN114630170A (zh) * 2022-03-24 2022-06-14 北京字节跳动网络技术有限公司 一种音视频同步方法、装置、电子设备及存储介质
CN114885209A (zh) * 2022-04-08 2022-08-09 车智互联（北京）科技有限公司 一种直播数据处理方法、计算设备及可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140137176A1 (en) * 2011-05-04 2014-05-15 Cisco Technology Inc. Fast Channel Change for Hybrid Device
CN104363411A (zh) * 2014-10-20 2015-02-18 福建星网锐捷安防科技有限公司 一种视频监控系统中的视频播放方法及装置
CN105187272A (zh) * 2015-08-24 2015-12-23 阔地教育科技有限公司 一种网络状态检测方法及装置
CN108271031A (zh) * 2016-12-30 2018-07-10 北京酷我科技有限公司 一种直播视频的播放方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140137176A1 (en) * 2011-05-04 2014-05-15 Cisco Technology Inc. Fast Channel Change for Hybrid Device
CN104363411A (zh) * 2014-10-20 2015-02-18 福建星网锐捷安防科技有限公司 一种视频监控系统中的视频播放方法及装置
CN105187272A (zh) * 2015-08-24 2015-12-23 阔地教育科技有限公司 一种网络状态检测方法及装置
CN108271031A (zh) * 2016-12-30 2018-07-10 北京酷我科技有限公司 一种直播视频的播放方法及装置

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110634511A (zh) * 2019-09-27 2019-12-31 北京西山居互动娱乐科技有限公司 一种音频数据处理方法及装置
CN110634511B (zh) * 2019-09-27 2021-09-14 北京西山居互动娱乐科技有限公司 一种音频数据处理方法及装置
CN111093107A (zh) * 2019-12-18 2020-05-01 深圳市麦谷科技有限公司 播放实时直播流的方法和装置
CN111050208A (zh) * 2019-12-23 2020-04-21 深圳市豪恩汽车电子装备股份有限公司 机动车实时监控视频播放装置及方法
CN111355975A (zh) * 2020-03-26 2020-06-30 郑州信大捷安信息技术股份有限公司 一种直播客户端音视频延时调节播放系统及方法
CN111355975B (zh) * 2020-03-26 2021-09-07 郑州信大捷安信息技术股份有限公司 一种直播客户端音视频延时调节播放系统及方法
CN111491207A (zh) * 2020-04-17 2020-08-04 北京三体云联科技有限公司 直播中视频数据处理方法、装置和电子设备
CN111586529A (zh) * 2020-05-08 2020-08-25 北京三体云联科技有限公司 音频数据处理方法、装置、终端和计算机可读存储介质
CN114095769A (zh) * 2020-08-24 2022-02-25 海信视像科技股份有限公司 一种应用级播放器的直播低延迟处理方法及显示设备
CN111885334A (zh) * 2020-08-26 2020-11-03 杭州速递科技有限公司 一种音视频实时追帧缩小延迟的方法
CN114501158A (zh) * 2020-10-27 2022-05-13 海信视像科技股份有限公司 显示设备、外接音响设备及外接音响设备音频输出的方法
CN112788360A (zh) * 2020-12-30 2021-05-11 北京达佳互联信息技术有限公司 直播方法、直播装置与计算机程序产品
CN112954376A (zh) * 2021-02-04 2021-06-11 海信电子科技(武汉)有限公司 一种视频播放方法及显示设备
CN113301051A (zh) * 2021-05-27 2021-08-24 西安万像电子科技有限公司 数据的传输方法、装置、计算机存储介质和处理器
CN113852857A (zh) * 2021-10-20 2021-12-28 成都华栖云科技有限公司 一种基于html5视频帧步进时的声音播放方法及系统
CN114630170A (zh) * 2022-03-24 2022-06-14 北京字节跳动网络技术有限公司 一种音视频同步方法、装置、电子设备及存储介质
CN114630170B (zh) * 2022-03-24 2023-10-31 抖音视界有限公司 一种音视频同步方法、装置、电子设备及存储介质
CN114885209A (zh) * 2022-04-08 2022-08-09 车智互联（北京）科技有限公司 一种直播数据处理方法、计算设备及可读存储介质

Also Published As

Publication number Publication date
CN110248204B (zh) 2021-12-24

Similar Documents

Publication Publication Date Title
CN110248204A (zh) 一种直播缓存的处理方法、装置、设备和存储介质
CN107566918B (zh) 一种视频分发场景下的低延时取流秒开方法
CN104113777B (zh) 一种音频流解码方法及装置
CN101588494B (zh) 一种媒体流处理方法及通讯系统以及相关设备
CN104735470B (zh) 一种流媒体数据传输方法及装置
CN107147919B (zh) 直播快速启播方法及系统
Chen et al. Video browsing-a study of user behavior in online vod services
CN101917613B (zh) 一种流媒体采集编码服务系统
CN109714634A (zh) 一种直播数据流的解码同步方法、装置及设备
WO2018076998A1 (zh) 一种回放视频文件的生成方法和装置
CN104969560A (zh) 确定对于网络流式传输可用的媒体数据
US20180192090A1 (en) Method of implementing audio and video live broadcast and server
EP1949681A1 (en) Multi-view video delivery
JP2013515401A (ja) コーデック適用フレーム・サイズでの音声スプリッティング
CN102665131A (zh) 一种网络视频服务系统接收端的视频缓冲方法
CN106604064A (zh) 一种快速开播方法及装置
CN111372138A (zh) 一种播放器端的直播低延迟技术方案
US10129592B2 (en) Audience measurement and feedback system
CN103731727A (zh) 一种播放视频的方法和视频播放器
CN102510533A (zh) 一种消除视频抓图延时的方法、装置及机顶盒
CN109218745A (zh) 一种直播方法、服务器、客户端及可读存储介质
CN112019905A (zh) 直播回放方法、计算机设备及可读存储介质
CN109168083A (zh) 一种流媒体实时播放方法及装置
CN109348279A (zh) 一种推流方法、装置、设备及存储介质
CN110225362A (zh) 一种直播方法、直播服务器及存储装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant