CN104333795A - 一种不依赖时间戳的实时视频码流播放速度控制方法 - Google Patents
一种不依赖时间戳的实时视频码流播放速度控制方法 Download PDFInfo
- Publication number
- CN104333795A CN104333795A CN201410612934.0A CN201410612934A CN104333795A CN 104333795 A CN104333795 A CN 104333795A CN 201410612934 A CN201410612934 A CN 201410612934A CN 104333795 A CN104333795 A CN 104333795A
- Authority
- CN
- China
- Prior art keywords
- video
- frame
- time
- buffer
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明属于多媒体通信领域,尤其涉及一种不依赖时间戳的实时视频码流播放速度控制方法,主要步骤包括:首先视频接收方设置视频缓冲时间;然后收到视频帧后解码送入缓冲队列,视频缓冲帧数加1,计算获得当前的缓冲时间,当缓冲时间大于等于指定的缓冲时间,开始播放,视频缓冲帧数减1,同时记录该帧的显示时间;然后根据设置视频缓冲时间合理范围;每播放一帧,计算获得当前的缓冲时间;如果当前的缓冲时间大于视频最大缓冲时间,帧间隔减1;如果当前的缓冲时间小于视频最小缓冲时间,帧间隔加1。本发明为在多媒体通信或安防监控系统中,使视频监看软件或设备可以平滑播放网络抖动环境中无法保证时间戳正确性的视频码流。
Description
技术领域
本发明属于多媒体通信领域,尤其涉及一种不依赖时间戳的实时视频码流播放速度控制方法。
背景技术
在多媒体通信领域,实时视频指的是视频采集方对所拍摄的视频进行采集、编码、打包、网络传输,同时视频接收方进行网络接收、解包、解码、显示场景中的在网络上传输的视频码流。为了使视频回放软件或设备能够为每一帧视频安排合适的播放时间,在视频采集阶段向视频码流或视频文件中为每一帧视频附加的能体现其播放时间的数值,这就是时间戳。由于网络带宽、信号强度等原因,导致所传输的数据不能按发送时的频率到达接收方的现象被称为网络抖动。两帧视频在播放时间上的差值被称为帧间隔。
现有的实时码流回放主要有两种方法:一种是接收方每收到一个完整的视频帧,立即安排该帧的解码与显示;另一种是接收方收到并解码一个视频帧后,根据其携带的时间戳信息,安排合适的时间进行显示。
上述方法一在存在网络抖动的环境中,会随着网络的抖动情况导致播放效果产生卡顿现象;上述方法二对于视频采集方未正确附加时间戳的情况下,接收方不能正确播放视频。
发明内容
为了在网络抖动、且视频采集方不保证视频码流时间戳正确的情况下,能够使视频接收方平滑的播放收到的视频,本发明提出一种不依赖时间戳的实时视频码流播放速度控制方法,主要步骤包括:
步骤1、参数设置,视频采集方设置默认的帧间隔为40毫秒;视频接收方设置视频缓冲时间,单位为毫秒,默认为500毫秒;
步骤2、视频帧的接收,视频接收方每收到网络传输的视频帧后,立刻进行解码,将解码后可用于显示的视频帧送入视频帧缓冲队列,视频缓冲帧数加1;通过当前视频缓冲队列中的视频缓冲帧数乘以帧间隔,计算获得当前的缓冲时间,当缓冲时间大于等于指定的缓冲时间,开始进行视频帧的播放过程;
步骤3、视频帧的播放控制,从缓冲队列中取出的第一个视频帧立刻进行显示,同时记录该帧的显示时间;此后当当前时间距离上一帧的显示时间的差值大于等于帧间隔时,从缓冲队列中取出一帧进行显示,视频缓冲帧数减1,同时记录该帧的显示时间,并对帧间隔进行调整;
步骤4、帧间隔的调整,首先根据设置视频缓冲时间,上下各浮动1/2的范围,作为视频缓冲合理范围;每播放一帧,查询当前视频缓冲队列中的缓冲帧数,缓冲帧数乘以帧间隔,计算获得当前的缓冲时间;如果当前的缓冲时间处于视频缓冲合理范围,则不调整帧间隔;如果当前的缓冲时间大于视频最大缓冲时间,说明当前的播放速度偏慢,应加快播放速度,帧间隔减1;如果当前的缓冲时间小于视频最小缓冲时间,说明当前的播放速度偏快,应减慢播放速度,帧间隔加1;这样就达到了根据实际编码帧率和网络状况,动态调整帧间隔,平滑播放实时视频码流的效果。
本发明的有益效果为在多媒体通信或安防监控系统中,使视频监看软件或设备可以平滑播放网络抖动环境中无法保证时间戳正确性的视频码流。
附图说明
图1为视频播放控制流程图;
图2为视频缓冲时间合理范围示意图。
具体实施方式
下面结合附图和实施例对本发明所提出的方法做进一步的说明。
本发明提出一种不依赖时间戳的实时视频码流播放速度控制方法,主要步骤包括:
首先进行参数设置。视频采集方设置默认的帧间隔为40毫秒;视频接收方根据网络状况,预估网络抖动程度,设置视频缓冲时间,单位为毫秒,默认为500毫秒。
其次进行视频帧的接收。视频接收方每收到网络传输的视频帧后,立刻进行解码,将解码后可用于显示的视频帧送入视频帧缓冲队列,视频缓冲帧数加1;通过当前视频缓冲队列中的视频缓冲帧数乘以帧间隔,计算获得当前的缓冲时间,当缓冲时间大于等于指定的缓冲时间,开始进行视频帧的播放过程。
然后进行视频帧的播放控制。从缓冲队列中取出的第一个视频帧立刻进行显示,同时记录该帧的显示时间;此后当当前时间距离上一帧的显示时间的差值大于等于帧间隔时,从缓冲队列中取出一帧进行显示,视频缓冲帧数减1,同时记录该帧的显示时间,并对帧间隔进行调整,其流程图如图1所示。
最后再进行帧间隔的调整。首先根据设置视频缓冲时间,上下各浮动1/2的范围,作为视频缓冲合理范围。以默认值500ms为例,如图2所示,将250ms~500ms作为视频缓冲合理范围:每播放一帧,查询当前视频缓冲队列中的缓冲帧数,缓冲帧数乘以帧间隔,计算获得当前的缓冲时间;如果当前的缓冲时间处于视频缓冲合理范围,则不调整帧间隔;如果当前的缓冲时间大于视频最大缓冲时间,说明当前的播放速度偏慢,应加快播放速度,帧间隔减1;如果当前的缓冲时间小于视频最小缓冲时间,说明当前的播放速度偏快,应减慢播放速度,帧间隔加1;这样就达到了根据实际编码帧率和网络状况,动态调整帧间隔,平滑播放实时视频码流的效果。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。
Claims (1)
1.一种不依赖时间戳的实时视频码流播放速度控制方法,其特征在于,包括如下步骤:
步骤1、参数设置,视频采集方设置默认的帧间隔为40毫秒;视频接收方设置视频缓冲时间,单位为毫秒,默认为500毫秒;
步骤2、视频帧的接收,视频接收方每收到网络传输的视频帧后,立刻进行解码,将解码后可用于显示的视频帧送入视频帧缓冲队列,视频缓冲帧数加1;通过当前视频缓冲队列中的视频缓冲帧数乘以帧间隔,计算获得当前的缓冲时间,当缓冲时间大于等于指定的缓冲时间,开始进行视频帧的播放过程;
步骤3、视频帧的播放控制,从缓冲队列中取出的第一个视频帧立刻进行显示,同时记录该帧的显示时间;此后当当前时间距离上一帧的显示时间的差值大于等于帧间隔时,从缓冲队列中取出一帧进行显示,视频缓冲帧数减1,同时记录该帧的显示时间,并对帧间隔进行调整;
步骤4、帧间隔的调整,首先根据设置视频缓冲时间,上下各浮动1/2的范围,作为视频缓冲合理范围;每播放一帧,查询当前视频缓冲队列中的缓冲帧数,缓冲帧数乘以帧间隔,计算获得当前的缓冲时间;如果当前的缓冲时间处于视频缓冲合理范围,则不调整帧间隔;如果当前的缓冲时间大于视频最大缓冲时间,说明当前的播放速度偏慢,应加快播放速度,帧间隔减1;如果当前的缓冲时间小于视频最小缓冲时间,说明当前的播放速度偏快,应减慢播放速度,帧间隔加1;这样就达到了根据实际编码帧率和网络状况,动态调整帧间隔,平滑播放实时视频码流的效果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410612934.0A CN104333795A (zh) | 2014-11-04 | 2014-11-04 | 一种不依赖时间戳的实时视频码流播放速度控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410612934.0A CN104333795A (zh) | 2014-11-04 | 2014-11-04 | 一种不依赖时间戳的实时视频码流播放速度控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104333795A true CN104333795A (zh) | 2015-02-04 |
Family
ID=52408432
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410612934.0A Pending CN104333795A (zh) | 2014-11-04 | 2014-11-04 | 一种不依赖时间戳的实时视频码流播放速度控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104333795A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106713855A (zh) * | 2016-12-13 | 2017-05-24 | 深圳英飞拓科技股份有限公司 | 一种视频播放方法及装置 |
CN107888938A (zh) * | 2016-09-29 | 2018-04-06 | 北京视联动力国际信息技术有限公司 | 一种网络视频播放方法及其装置 |
CN108347645A (zh) * | 2018-01-19 | 2018-07-31 | 浙江大华技术股份有限公司 | 一种视频帧解码显示的方法及装置 |
CN108965807A (zh) * | 2018-07-17 | 2018-12-07 | 深圳市共进电子股份有限公司 | 实时视频的播放控制方法、装置、终端及存储介质 |
CN110536153A (zh) * | 2018-05-23 | 2019-12-03 | 视联动力信息技术股份有限公司 | 一种视频数据的播放方法和服务器 |
CN110677715A (zh) * | 2019-10-11 | 2020-01-10 | 北京达佳互联信息技术有限公司 | 一种解码方法、解码器、电子设备及存储介质 |
CN111031338A (zh) * | 2019-12-17 | 2020-04-17 | 杭州当虹科技股份有限公司 | 一种改善在线信源速率异常的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080148327A1 (en) * | 2006-12-18 | 2008-06-19 | General Instrument Corporation | Method and Apparatus for Providing Adaptive Trick Play Control of Streaming Digital Video |
CN101500117A (zh) * | 2009-02-18 | 2009-08-05 | 腾讯科技(深圳)有限公司 | 一种视音频数据播放的控制方法及装置 |
CN102665131A (zh) * | 2012-04-27 | 2012-09-12 | 山东省计算中心 | 一种网络视频服务系统接收端的视频缓冲方法 |
CN103442307A (zh) * | 2013-08-20 | 2013-12-11 | 深圳市融创天下科技股份有限公司 | 播放视频流媒体的方法和装置 |
-
2014
- 2014-11-04 CN CN201410612934.0A patent/CN104333795A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080148327A1 (en) * | 2006-12-18 | 2008-06-19 | General Instrument Corporation | Method and Apparatus for Providing Adaptive Trick Play Control of Streaming Digital Video |
CN101500117A (zh) * | 2009-02-18 | 2009-08-05 | 腾讯科技(深圳)有限公司 | 一种视音频数据播放的控制方法及装置 |
CN102665131A (zh) * | 2012-04-27 | 2012-09-12 | 山东省计算中心 | 一种网络视频服务系统接收端的视频缓冲方法 |
CN103442307A (zh) * | 2013-08-20 | 2013-12-11 | 深圳市融创天下科技股份有限公司 | 播放视频流媒体的方法和装置 |
Non-Patent Citations (1)
Title |
---|
吴炜等: "《一种MPEG1/MPEG2视频流的自适应播放算法》", 《计算机工程》 * |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107888938A (zh) * | 2016-09-29 | 2018-04-06 | 北京视联动力国际信息技术有限公司 | 一种网络视频播放方法及其装置 |
CN107888938B (zh) * | 2016-09-29 | 2019-02-05 | 视联动力信息技术股份有限公司 | 一种网络视频播放方法及其装置 |
CN106713855A (zh) * | 2016-12-13 | 2017-05-24 | 深圳英飞拓科技股份有限公司 | 一种视频播放方法及装置 |
CN106713855B (zh) * | 2016-12-13 | 2020-01-07 | 深圳英飞拓科技股份有限公司 | 一种视频播放方法及装置 |
CN108347645A (zh) * | 2018-01-19 | 2018-07-31 | 浙江大华技术股份有限公司 | 一种视频帧解码显示的方法及装置 |
CN110536153A (zh) * | 2018-05-23 | 2019-12-03 | 视联动力信息技术股份有限公司 | 一种视频数据的播放方法和服务器 |
CN108965807A (zh) * | 2018-07-17 | 2018-12-07 | 深圳市共进电子股份有限公司 | 实时视频的播放控制方法、装置、终端及存储介质 |
CN110677715A (zh) * | 2019-10-11 | 2020-01-10 | 北京达佳互联信息技术有限公司 | 一种解码方法、解码器、电子设备及存储介质 |
CN111031338A (zh) * | 2019-12-17 | 2020-04-17 | 杭州当虹科技股份有限公司 | 一种改善在线信源速率异常的方法 |
CN111031338B (zh) * | 2019-12-17 | 2021-09-28 | 杭州当虹科技股份有限公司 | 一种改善在线信源速率异常的方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104333795A (zh) | 一种不依赖时间戳的实时视频码流播放速度控制方法 | |
CN104618786B (zh) | 音视频同步方法和装置 | |
US8238376B2 (en) | Synchronized audio/video decoding for network devices | |
US10263875B2 (en) | Real-time processing capability based quality adaptation | |
US8982219B2 (en) | Receiving device and camera system | |
CN101710997A (zh) | 基于mpeg-2系统实现视、音频同步的方法及系统 | |
TWI735476B (zh) | 視聽接收裝置及其快速變換頻道之方法 | |
US10397633B2 (en) | Receiver apparatus and synchronization processing method thereof | |
CN108810656B (zh) | 一种实时直播ts流的去抖处理方法及处理系统 | |
CN108259964B (zh) | 一种视频播放速率调整方法及系统 | |
WO2011151647A3 (en) | Data transmission apparatus, system and method | |
WO2011037406A3 (en) | Method and system for wireless communication of audio in wireless networks | |
CN103546662A (zh) | 一种网络监控系统中音视频同步方法 | |
CN111372138A (zh) | 一种播放器端的直播低延迟技术方案 | |
CN105791735A (zh) | 用于视频通话码流动态调整的方法和系统 | |
CN105142002A (zh) | 音/视频直播方法、装置及控制方法、装置 | |
US20150030088A1 (en) | Clock recovery for media stream in bursty network channel | |
WO2016008131A1 (en) | Techniques for separately playing audio and video data in local networks | |
CN104079958B (zh) | 一种视频与多声道音频同步播出的方法 | |
WO2019023919A1 (en) | METHODS AND APPARATUS FOR VIDEO CONTINUOUS DIFFUSION WITH ENHANCED SYNCHRONIZATION | |
CN103826084A (zh) | 一种音频编码方法 | |
CN103596033A (zh) | 在多媒体系统终端回放中解决音视频不同步问题的方法 | |
JP5383520B2 (ja) | 映像フレーム及び音声フレームとの間の同期外れを補正する中継装置、プログラム、システム及び方法 | |
JP5274179B2 (ja) | 字幕放送システム及び字幕放送方法 | |
CN103269448A (zh) | 基于rtp/rtcp反馈预警算法实现音视频同步方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150204 |
|
RJ01 | Rejection of invention patent application after publication |