CN106331847A - 音视频播放方法及设备 - Google Patents

音视频播放方法及设备 Download PDF

Info

Publication number
CN106331847A
CN106331847A CN201510392420.3A CN201510392420A CN106331847A CN 106331847 A CN106331847 A CN 106331847A CN 201510392420 A CN201510392420 A CN 201510392420A CN 106331847 A CN106331847 A CN 106331847A
Authority
CN
China
Prior art keywords
video
audio
frame
value
buffer value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510392420.3A
Other languages
English (en)
Other versions
CN106331847B (zh
Inventor
李敬来
刘晓光
赵超
陆鑫炎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TD Tech Ltd
TD Tech Chengdu Co Ltd
Original Assignee
TD Tech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TD Tech Ltd filed Critical TD Tech Ltd
Priority to CN201510392420.3A priority Critical patent/CN106331847B/zh
Publication of CN106331847A publication Critical patent/CN106331847A/zh
Application granted granted Critical
Publication of CN106331847B publication Critical patent/CN106331847B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种音视频播放方法及设备。该方法包括：获取音频帧的抖动值和视频帧的抖动值；根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值；根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值。本实施例提供的音视频播放方法及设备，能够自适应的调整音视频的缓冲值。

Description

音视频播放方法及设备
技术领域
本发明实施例涉及通信技术，尤其涉及一种音视频播放方法及设备。
背景技术
随着第四代移动通信技术(the 4 Generation mobile communicationtechnology，简称4G)的普及，视频播放的应用越来越广泛，用户在终端设备上安装流媒体播放器后，就可以实现在线浏览视频。
现有技术中的流媒体播放器在播放音视频数据时，先对音视频数据进行缓冲处理，再进行播放。一般情况下，音视频数据的缓冲值为固定值，流媒体播放器只有缓冲固定播放长度的音视频数据后，才进行播放。
然而，若该音视频数据的缓冲值过大，则使用户看到第一帧的时间增加，若该音视频数据的缓冲值过小，则解码的速度大于缓冲的速度，造成视频卡顿，最终影响用户体验。
发明内容
本发明实施例提供一种音视频播放方法及设备，能够自适应的调整音视频的缓冲值。
第一方面，本发明实施例提供一种音视频播放方法，包括：
获取音频帧的抖动值和视频帧的抖动值；
根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值；
根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值。
第二方面，本发明实施例提供一种音视频播放设备，包括：
获取模块，用于获取音频帧的抖动值和视频帧的抖动值；
第一缓冲值确定模块，用于根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值；
第二缓冲值确定模块，用于根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值。
本发明实施例提供的音视频播放方法，通过获取音频帧的抖动值和视频帧的抖动值，根据音频帧的抖动值、视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，通过音频帧的抖动值以及视频帧的抖动值来评估当前网络状况，得到与音频抖动值对应的音频缓冲值，与视频抖动值对应的视频缓冲值，再根据音频缓冲值以及视频缓冲值，得到音视频缓冲值，在网络状况好的情况下，得到的音视频缓冲值较小，可以使用户快速的看到第一帧图像，在网络状况差的情况下，得到的音视频缓冲值较大，考虑了流畅性，对无线网络传输抖动具有很好的自适应性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明音视频播放方法实施例一的流程图；
图2为本发明音视频播放方法实施例二的流程图；
图3为本发明音视频播放设备实施例一的结构图；
图4为本发明音视频播放设备实施例二的结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明音视频播放方法实施例一的流程图，本实施例的执行主体为可以使用流媒体播放器播放音视频的终端设备。该终端设备可以通过软件和/或硬件实现。该终端设备在本实施例中所起的功能为接收功能，因此，在如下的实施例中，将该终端设备称为接收端。如图1所示，本实施例的方法可以包括：
步骤101、获取音频帧的抖动值和视频帧的抖动值；
步骤102、根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值；
步骤103、根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值。
在具体实现过程中，接收端接收发送端发送的音视频数据之前，接收端获取初始化识别帧，根据该初始化识别帧，获取音视频的分辨率，根据该音视频的分辨率，对音视频解码器进行初始化。
具体地，在发送端准备发送音视频数据时，在初始阶段，发送端每隔预设时间发送初始化识别帧，接收端接收发送端发送的初始化识别帧，该初始化识别帧中携带音视频的分辨率信息，接收端根据该初始化识别帧获取视频的分别率信息，然后根据该视频的分辨率信息进行初始化。
初始化识别帧可以为H.264序列参数集(Sequence Parameter Set，简称SPS)SPS，图像参数集(Picture Parameter Sets，简称PPS)帧。由于PPS和SPS帧很小，均小于100个字节，因此，连续多次发送不会对网络造成带宽的浪费。例如，接收端接收发送端发送的H264 SPS PPS数据为：64 00 1f ac 172a 01 40 16 e8 40 00 01 c2 00 00，接收端根据该H264 SPS PPS，计算出视频的分辨率为W*H＝1280*720。
通过接收发送端发送的初始化识别帧，获取视频分辨率，进而进行初始化，避免了现有技术中的接收端的解码器在初始化时，解码器设置的视频分辨率为W*H，而发送端发送的音视频数据中的图像的分辨率是W1*H1，解码器需要根据发送端的图像的分辨率进行重新初始化，增加了预览第一帧图像的时间的问题。
在解码器初始化完成之后，在步骤101中，接收端接收发送端发送的音频数据包和视频数据包，将属于同一音频帧的多个音频数据包组成音频帧，并记录各音频数据包组成音频帧的时间，即记录每一个音频数据包组成音频帧的时间。将属于同一视频帧的多个视频数据包组成视频帧，并记录各视频数据包组成视频帧的时间，即记录每一个视频数据包组成视频帧的时间。
然后，根据音频数据包中的时间戳和各音频数据包组成音频帧的时间获取音频帧的抖动值，根据视频数据包中的时间戳和各视频数据包组成视频帧的时间获取视频帧的抖动值。
在步骤102中，接收端根据音频帧的抖动值、视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值。其中，预设音视频缓冲最大值以及预设音视频缓冲最小值可以根据网络状况进行取值。
具体地，对于音频帧，可将音频帧的抖动值与预设音视频缓冲最大值以及预设音视频缓冲最小值的进行大小比较，根据比较结果，获取音频缓冲值；例如，音频的抖动值大于预设音视频缓冲最小值，小于预设音视频缓冲最大值，则将音频的抖动值乘以经验系数，即可得到音频缓冲值；在音频帧的抖动值小于预设音视频缓冲最小值时，则将该预设音视频最小值作为音频缓冲值；在音频帧的抖动值大于预设音频缓冲最大值时，则将该预设音频最大值作为音频缓冲值。
对于视频帧，可将视频的抖动值与预设音视频缓冲最大值以及预设音视频缓冲最小值的进行大小比较，根据比较结果，获取视频缓冲值。获取视频缓冲值的方法与获取音频帧缓冲值的方法类似，视频缓冲值的获取方法具体可参见音频帧缓冲值的获取方法，本实施例此处不再赘述。
在步骤103中，接收端根据音频缓冲值和视频缓冲值，确定音视频缓冲值。具体地，接收端可根据实际需要，确定音视频的缓冲值。例如，在为了降低用户面延时的情况下，可选择音频缓冲值和视频缓冲值中比较小的作为音视频缓冲值，在为了保证音频和视频更加同步的情况下，选择音频缓冲值和视频缓冲值中较大的值作为音视频缓冲值。
在确定音视频缓冲值之后，接收端对音视频开始缓冲，再缓冲完毕后，进行解码播放。本实施例通过音频帧的抖动值以及视频帧的抖动值来评估当前网络状况，在网络状况好的情况下，得到的音视频缓冲值会很小，音视频将缓冲很小的数据进行播放，用户可以很快看到第一帧图像，在网络状况不好的情况下，得到的音视频缓冲值会相对比较大，此时，用户不会很快看到第一帧图像，但是播放不会卡。
本发明实施例提供的音视频播放方法，通过获取音频帧的抖动值和视频帧的抖动值，根据音频帧的抖动值、视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，通过音频帧的抖动值以及视频帧的抖动值来评估当前网络状况，得到与音频抖动值对应的音频缓冲值，与视频抖动值对应的视频缓冲值，再根据音频缓冲值以及视频缓冲值，得到音视频缓冲值，在网络状况好的情况下，得到的音视频缓冲值较小，可以使用户快速的看到第一帧图像，在网络状况差的情况下，得到的音视频缓冲值较大，考虑了流畅性，对无线网络传输抖动具有很好的自适应性。
下面采用具体的实施例，说明获取获取音频帧的抖动值和视频帧的抖动值以及音视频缓冲值的实现方式。
通过如下公式四获取音频帧的抖动值：
D(i-1，i)＝(Ri-Ri-1)-(Si-Si-1)＝(Ri-Si)-(Ri-1-Si-1)
J(i)＝J(i-1)+(|D(i-1，i)|-J(i-1))/16
其中，Si代表第i个音频数据包的时间戳，Si-1代表第i-1个音频数据包的时间戳，Ri代表第i个音频数据包组成音频帧的时间，Ri-1代表第i-1个音频数据包组成音频帧的时间，J(i)代表音频帧的抖动值，J(0)＝0。
通过如下公式五获取视频帧的抖动值：
M(i-1，i)＝(Qi-Qi-1)-(Ti-Ti-1)＝(Qi-Ti)-(Qi-1-Ti-1)
N(i)＝N(i-1)+(|M(i-1，i)|-N(i-1))/16
其中，Ti代表第i个音频数据包的时间戳，Ti-1代表第i-1个音频数据包的时间戳，Qi代表第i个音频数据包组成音频帧的时间，Qi-1代表第i-1个音频数据包组成音频帧的时间，N(i)代表音频帧的抖动值，N(0)＝0。
图2为本发明音视频播放方法实施例二的流程图。本实施例在图1实施例的基础上实现，如图2所示，本发明实施例提供的音视频播放方法包括：
步骤201、获取音频帧的抖动值；
步骤202、获取视频帧的抖动值；
步骤201与步骤202没有严格的时序关系，具体的过程可参见上述实施例，本实施例此处不再赘述。
步骤203、设置与网络状况匹配的预设音视频缓冲最大值以及预设音视频缓冲最小值；
步骤203与步骤201与步骤202没有严格的时序关系。
步骤204、根据音频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值；
步骤205、根据视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定视频缓冲值；
步骤204与步骤205没有严格的时序关系。
步骤206、根据音频缓冲值和视频缓冲值，确定音视频缓冲值。
在步骤204中，通过公式一确定音频缓冲值：
ABuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JA)) 公式一
其中，ABuffMs代表音频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JA代表音频帧的抖动值，C代表与网络条件成反比的参数；
在步骤205中，通过公式二确定视频缓冲值：
VBuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JV)) 公式二
其中，VBuffMs代表视频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JV代表视频帧的抖动值，C为代表与网络条件成反比的参数。
在步骤206中，通过公式三确定音视频缓冲值：
AVBuffMs＝MIN(VBuffMs，ABuffMs) 公式三
其中，AVBuffMs代表音视频缓冲值，VBuffMs代表视频缓冲值，ABuffMs代表音频缓冲值。
在步骤204与步骤205中，与网络条件成反比的参数C可以进行调整，如果网络速度比较慢，与网络条件成反比的参数C可以调的大一些，如果网络速度比较快，与网络条件成反比的参数C为2足够，通过调整与网络条件成反比的参数C，可以防止解码的速度大于缓冲的速度，避免造成播放卡顿。
下面采用具体的实施例，对本发明实施例进行详细说明。
在网络状况好的情况下
JV＝11ms，JA＝15ms，C＝5，kMinMs＝50，kMaxMs＝100
VBuffMs＝MAX(kMinMs,MIN(kMaxMs,2*JV))＝MAX(50,MIN(1000,2*11))＝50ms
ABuffMs＝MAX(kMinMs,MIN(kMaxMs,2*JA))＝MAX(50,MIN(1000,2*15))＝50ms
AVBuffMs＝MIN(VBuffMs,ABuffMs)＝MIN(50,50)＝50ms
在上述网络条件好的情况下，只需要缓冲50ms的音视频数据就可以进行解码播放。
在网络状况差的情况下
JV＝100ms，JA＝120ms，C＝5，kMinMs＝50，kMaxMs＝100
VBuffMs＝MAX(kMinMs,MIN(kMaxMs,2*JV))＝MAX(50,MIN(1000,2*100))＝200ms
ABuffMs＝MAX(kMinMs,MIN(kMaxMs,2*JA))＝MAX(50,MIN(1000,2*120))＝240ms
AVBuffMs＝MIN(VBuffMs,ABuffMs)＝MIN(200,240)＝200ms
在上述网络条件相对不好的情况下，只需要缓冲200ms音视频的数据就可以进行解码播放。
根据在长期演进技术(Long Term Evolution，简称LTE)网络环境下的实验数据，采用本实施例的方法，在网络状况好的情况下播放1080P视频数据，用户面时延在700ms-900ms之间，采用现有技术，1080P用户面时延在1500ms-2000ms之间，用户面时延提升了一倍。
本实施例通过音频帧的抖动值以及视频帧的抖动值来评估当前网络状况，在网络状况好的情况下，得到的音视频缓冲值会很小，音视频将缓冲很小的数据进行播放，用户可以很快看到第一帧图像，在网络状况不好的情况下，得到的音视频缓冲值会相对比较大，此时，用户不会很快看到第一帧图像，但是播放不会卡。
图3为本发明音视频播放设备实施例一的结构图。如图3所示，本发明实施例提供的音视频播放设备包括：
获取模块301，用于获取音频帧的抖动值和视频帧的抖动值；
第一缓冲值确定模块302，用于根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值；
第二缓冲值确定模块303，用于根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值。
本发明实施例提供的音视频播放设备，可执行上述方法实施例，其具体实现原理和技术效果，可参见上述方法实施例，本实施例此处不再赘述。
图4为本发明音视频播放设备实施例二的结构图。如图4所示，本发明实施例提供的音视频播放设备在图3实施例的基础上实现，具体如下：
所述获取模块301具体用于：
将接收的音频数据包和视频数据包分别组成音频帧和视频帧，并记录各所述音频数据包组成所述音频帧的时间以及各所述视频数据包组成所述视频帧的时间；
根据所述音频数据包中的时间戳和各所述音频数据包组成所述音频帧的时间获取所述音频帧的抖动值，根据所述视频数据包中的时间戳和各所述视频数据包组成所述视频帧的时间获取所述视频帧的抖动值。
所述第一缓冲值确定模块302具体用于：
通过公式一确定音频缓冲值：
ABuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JA)) 公式一
其中，ABuffMs代表音频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JA代表音频帧的抖动值，C为与网络条件成反比的参数；
通过公式二确定视频缓冲值：
VBuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JV)) 公式二
其中，VBuffMs代表视频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JV代表视频帧的抖动值，C为与网络条件成反比的参数。
所述第二缓冲值确定模块303具体用于：
通过公式三确定音视频缓冲值：
AVBuffMs＝MIN(VBuffMs，ABuffMs) 公式三
其中，AVBuffMs代表音视频缓冲值，VBuffMs代表视频缓冲值，ABuffMs代表音频缓冲值。
还包括：初始化模块304，用于在所述获取音频帧的抖动值和视频帧的抖动值之前，
获取初始化识别帧，根据所述初始化识别帧，获取视频的分辨率；
根据所述视频的分辨率，对音视频解码器进行初始化。
本发明实施例提供的音视频播放设备，可执行上述方法实施例，其具体实现原理和技术效果，可参见上述方法实施例，本实施例此处不再赘述。
本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种音视频播放方法，其特征在于，包括：
获取音频帧的抖动值和视频帧的抖动值；
根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值；
根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值。
2.根据权利要求1所述的方法，其特征在于，所述获取音频帧的抖动值和视频帧的抖动值，包括：
将接收的音频数据包和视频数据包分别组成音频帧和视频帧，并记录各所述音频数据包组成所述音频帧的时间以及各所述视频数据包组成所述视频帧的时间；
根据所述音频数据包中的时间戳和各所述音频数据包组成所述音频帧的时间获取所述音频帧的抖动值，根据所述视频数据包中的时间戳和各所述视频数据包组成所述视频帧的时间获取所述视频帧的抖动值。
3.根据权利要求1所述的方法，其特征在于，所述根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值，包括：
通过公式一确定音频缓冲值：
ABuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JA))公式一
其中，ABuffMs代表音频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JA代表音频帧的抖动值，C为与网络条件成反比的参数；
通过公式二确定视频缓冲值：
VBuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JV)) 公式二
其中，VBuffMs代表视频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JV代表视频帧的抖动值，C为与网络条件成反比的参数。
4.根据权利要求3所述的方法，其特征在于，所述根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值，包括：
通过公式三确定音视频缓冲值：
AVBuffMs＝MIN(VBuffMs，ABuffMs) 公式三
其中，AVBuffMs代表音视频缓冲值，VBuffMs代表视频缓冲值，ABuffMs代表音频缓冲值。
5.根据权利要求1至4任一项所述的方法，其特征在于，在所述获取音频帧的抖动值和视频帧的抖动值之前，还包括：
获取初始化识别帧，根据所述初始化识别帧，获取视频的分辨率；
根据所述视频的分辨率，对音视频解码器进行初始化。
6.一种音视频播放设备，其特征在于，包括：
获取模块，用于获取音频帧的抖动值和视频帧的抖动值；
第一缓冲值确定模块，用于根据所述音频帧的抖动值、所述视频帧的抖动值、预设音视频缓冲最大值以及预设音视频缓冲最小值，确定音频缓冲值和视频缓冲值；
第二缓冲值确定模块，用于根据所述音频缓冲值和所述视频缓冲值，确定音视频缓冲值。
7.根据权利要求6所述的设备，其特征在于，所述获取模块具体用于：
将接收的音频数据包和视频数据包分别组成音频帧和视频帧，并记录各所述音频数据包组成所述音频帧的时间以及各所述视频数据包组成所述视频帧的时间；
根据所述音频数据包中的时间戳和各所述音频数据包组成所述音频帧的时间获取所述音频帧的抖动值，根据所述视频数据包中的时间戳和各所述视频数据包组成所述视频帧的时间获取所述视频帧的抖动值。
8.根据权利要求6所述的设备，其特征在于，所述第一缓冲值确定模块具体用于：
通过公式一确定音频缓冲值：
ABuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JA)) 公式一
其中，ABuffMs代表音频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JA代表音频帧的抖动值，C为与网络条件成反比的参数；
通过公式二确定视频缓冲值：
VBuffMs＝MAX(kMinMs，MIN(kMaxMs，C*JV)) 公式二
其中，VBuffMs代表视频缓冲值，kMinMs代表预设音视频缓冲最小值，kMaxMs代表预设音视频缓冲最大值，JV代表视频帧的抖动值，C为与网络条件成反比的参数。
9.根据权利要求8所述的设备，其特征在于，所述第二缓冲值确定模块具体用于：
通过公式三确定音视频缓冲值：
AVBuffMs＝MIN(VBuffMs，ABuffMs) 公式三
其中，AVBuffMs代表音视频缓冲值，VBuffMs代表视频缓冲值，ABuffMs代表音频缓冲值。
10.根据权利要求6至9任一项所述的设备，其特征在于，还包括初始化模块，用于在所述获取音频帧的抖动值和视频帧的抖动值之前，
获取初始化识别帧，根据所述初始化识别帧，获取视频的分辨率；
根据所述视频的分辨率，对音视频解码器进行初始化。
CN201510392420.3A 2015-07-06 2015-07-06 音视频播放方法及设备 Active CN106331847B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510392420.3A CN106331847B (zh) 2015-07-06 2015-07-06 音视频播放方法及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510392420.3A CN106331847B (zh) 2015-07-06 2015-07-06 音视频播放方法及设备

Publications (2)

Publication Number Publication Date
CN106331847A true CN106331847A (zh) 2017-01-11
CN106331847B CN106331847B (zh) 2019-12-03

Family

ID=57727311

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510392420.3A Active CN106331847B (zh) 2015-07-06 2015-07-06 音视频播放方法及设备

Country Status (1)

Country Link
CN (1) CN106331847B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107484009A (zh) * 2017-09-12 2017-12-15 上海脉淼信息科技有限公司 一种适用于网络直播的流媒体播放方法和装置
CN111669645A (zh) * 2020-06-12 2020-09-15 腾讯科技（深圳）有限公司 视频的播放方法、装置、电子设备及存储介质
CN112152975A (zh) * 2019-06-28 2020-12-29 成都鼎桥通信技术有限公司 音频数据的处理方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1949879A (zh) * 2005-10-11 2007-04-18 华为技术有限公司 分组网络中多媒体实时传输的唇同步方法及其装置
CN101889451A (zh) * 2007-12-05 2010-11-17 思科技术公司 通过独立解码器时钟来减少媒体流延迟的系统和方法
CN102143377A (zh) * 2010-11-30 2011-08-03 华为技术有限公司 视频流延迟因素监测方法及装置
CN103347004A (zh) * 2013-06-19 2013-10-09 深圳市共进电子股份有限公司 一种提高vbd数据传输质量的方法
CN104754366A (zh) * 2015-03-03 2015-07-01 腾讯科技（深圳）有限公司 音视频文件直播方法、装置和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1949879A (zh) * 2005-10-11 2007-04-18 华为技术有限公司 分组网络中多媒体实时传输的唇同步方法及其装置
CN101889451A (zh) * 2007-12-05 2010-11-17 思科技术公司 通过独立解码器时钟来减少媒体流延迟的系统和方法
CN102143377A (zh) * 2010-11-30 2011-08-03 华为技术有限公司 视频流延迟因素监测方法及装置
CN103347004A (zh) * 2013-06-19 2013-10-09 深圳市共进电子股份有限公司 一种提高vbd数据传输质量的方法
CN104754366A (zh) * 2015-03-03 2015-07-01 腾讯科技（深圳）有限公司 音视频文件直播方法、装置和系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107484009A (zh) * 2017-09-12 2017-12-15 上海脉淼信息科技有限公司 一种适用于网络直播的流媒体播放方法和装置
CN112152975A (zh) * 2019-06-28 2020-12-29 成都鼎桥通信技术有限公司 音频数据的处理方法和装置
CN111669645A (zh) * 2020-06-12 2020-09-15 腾讯科技（深圳）有限公司 视频的播放方法、装置、电子设备及存储介质
CN111669645B (zh) * 2020-06-12 2021-09-07 腾讯科技（深圳）有限公司 视频的播放方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN106331847B (zh) 2019-12-03

Similar Documents

Publication Publication Date Title
US10567465B2 (en) Streaming video over a network
US9872021B2 (en) Video conversion method and apparatus
US9088773B2 (en) Wireless channel aware adaptive video bit rate encoding
CN104125429B (zh) 视频数据传输的调节方法及装置
KR101693564B1 (ko) 미디어 품질 평가 방법 및 장치
EP3457704A1 (en) Quality of user experience testing for video transmissions
CN108063973A (zh) 一种视频流解码方法及设备
CN105991364B (zh) 一种用户感知评估方法及装置
JP2015536594A (ja) 積極的なビデオフレームドロップ
CN104618195A (zh) 带宽估测方法和装置
CN110351606B (zh) 媒体信息处理方法、相关设备及计算机存储介质
CN105553939A (zh) 一种流媒体卡顿的确定方法及装置
CN104394484A (zh) 一种无线实时流媒体传输方法
US7493644B1 (en) Method, apparatus, and system for video fast forward functionality in a mobile phone
US20160295265A1 (en) Differential and distributive queuing of video frames
CN103002354A (zh) 一种消除视频数据传输网络抖动的方法及系统
WO2013064112A1 (zh) 一种视频图像滤波处理方法和装置
CN113242436B (zh) 直播数据的处理方法、装置及电子设备
CN105142002A (zh) 音/视频直播方法、装置及控制方法、装置
EP1879353A1 (en) Contents distribution system, contents distribution server, contents reproduction terminal, and contents distribution method
CN107734300A (zh) 图像传输方法及设备
CN106331847A (zh) 音视频播放方法及设备
CN103338392A (zh) 一种视频轮巡无缝切换画面的方法
CN111617466A (zh) 编码格式的确定方法、装置及云游戏的实现方法
CN106331820A (zh) 音视频的同步处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant