CN102724489A - 一种减少视频编码时延的方法 - Google Patents
一种减少视频编码时延的方法 Download PDFInfo
- Publication number
- CN102724489A CN102724489A CN 201210116317 CN201210116317A CN102724489A CN 102724489 A CN102724489 A CN 102724489A CN 201210116317 CN201210116317 CN 201210116317 CN 201210116317 A CN201210116317 A CN 201210116317A CN 102724489 A CN102724489 A CN 102724489A
- Authority
- CN
- China
- Prior art keywords
- video
- frame
- coding
- video coding
- time delay
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种减少视频编码时延的方法,在图像视频编码时有效地减少编码时延。方法包括:在处理视频编码时放置两个视频帧缓存器存,每个视频帧缓存器轮流采集一帧图像数据,一个视频帧缓存器采集一帧图像数据,另个一视频帧缓存器采集下一个图像数据;CPU完成一个视频帧缓存器中的一帧图像的视频编码后,继续处理另一个视频帧缓存器中的下一帧图像的视频编码,依次循环。
Description
技术领域
本发明涉及一种视频编码的处理方法,具体涉及减少视频编码时延的方法,
属于数字视频处理技术领域。
背景技术
在视频通讯中,视频编码通常由几个部分组成:1)视频采集:按照每一帧的视频采集成数字信号以数据方式存入视频缓存器。2)视频编码:通过CPU对原始未压缩的视频数据进行压缩处理,编码需要参考帧,因此参考帧进行缓存。3)视频输出。在嵌入式系统中,CPU的处理能力有限,对于一些先进格式,如H.264,AVS的视频编码很难即时处理,需要一定的运算处理时间。另外,由于需要参考帧,使CPU的处理时间增长造成视频时延加大。按照现有技术实施的编码通常是先进行视频采集,然后再进行视频编码,并以多帧视频作为参考,总的编码时延将是:Tt=Ts+(n+1)Tc,其中Tt代表总的视频编码时延,Ts是采集视频的时延,Tc是视频编码时延。n指编码时的参考帧数。在嵌入式处理中,视频采集需要30ms,压缩一帧视频需要的时间是70ms,取3个参考帧,则总的视频时延将达到240ms。
另外,传输网络的带宽限制以及各类网络带宽条件的不同,在视频传输时还需要对带宽进行控制。
通常视频采集与压缩广泛应用于嵌入式系统家庭终端视频通讯设备中,解决视频编码时延问题对于视频通讯有益。
发明内容
本发明提出一种减少视频编码时延的方法,通过使用两个视频帧缓存器,在一帧视频数据被压缩处理期间,同时将另一帧视频采集到另一个视频帧缓存器中。在视频压 缩时,仅采用一帧视频作为参考,在解码时,采用即到即解码的措施,减少视频编码的时延。另外,通过控制CPU的处理时间,调整被丢弃的视频帧数,调整编码后的视频带宽,在CPU资源有限的条件下,减小视频图像编码时延,在视频通讯过程中,解决普遍存在的延时问题。
本发明公开了一种减少视频编码时延的方法,在图像视频编码时有效地减少编码时延。方法包括:在处理视频编码时放置两个视频帧缓存器存,每个视频帧缓存器轮流采集一帧图像数据,一个视频帧缓存器采集一帧图像数据,另个一视频帧缓存器采集下一个图像数据;CPU完成一个视频帧缓存器中的一帧图像的视频编码后,继续处理另一个视频帧缓存器中的下一帧图像的视频编码,依次循环。
本发明减少视频编码延时的方法是:当CPU对一个视频帧缓存器进行一帧图像的数据编码时,另一个视频帧缓存器同时进行下一帧图像的采集,以此保证CPU处理完一帧图像的视频编码后,总能继续处理下一帧图像的视频编码。如果一个视频帧缓存器已经采集完成下一帧图像数据,但是CPU未能完成另一个视频帧缓存器中的上一帧图像的视频编码,则丢弃上一帧图像数据,直接对下一帧图像数据进行编码,以此减少各种原因造成的视频编码延时。同时,CPU在进行视频编码时,仅以上一帧视频数据为参考,减少多帧参考图像所造成的等待时延。在解码端,编码后的视频数据是随到随解码,基本上没有时延。
通过本发明提出的方法,视频编解码延时不超过CPU压缩一帧图像的编码处理时间Tc加上采集一帧图像的时间Ta。本发明的另外一个功能是直接通过控制CPU对一帧图像的处理时间长短自动控制采集帧多少,从而控制编码后的视频码率,以适应不同网络带宽下良好的传输和视频通讯体验。
附图说明
图1是根据本发明的减少视频编码时延的实现框图。
图2是根据本发明的编码和解码系统图
图3是根据本发明的视频通讯码率控制原理图
图4是根据本发明的CPU处理时间控制原理
具体实施方式
本发明的目的是提供一种减少视频编码时延的方法。如附图1所示,具体实现方 法是:
(1)视频摄取器通过摄像头3摄取的原始视频数据的每一帧轮流被两个视频帧缓存器采集,视频帧缓存器1采集完一帧视频,CPU 4处理视频帧缓存器1中的一帧视频数据,同时,从摄像头3摄取的下一帧原始视频数据存入视频帧缓存器2中。
(2)如果视频帧缓存器2完成下一帧视频数据采集后,CPU 4未能处理完成上一帧视频数据,则丢弃上一帧视频数据,CPU 4处理下一帧视频数据,视频帧缓存器1继续采集后面的一帧视频数据,依次循环。
(3)如果CPU 4处理完视频帧缓存器1的视频数据,则转入处理视频帧缓存器2中的视频帧数据。这样保证在CPU处理完一帧视频后,总是继续处理另外的一个视频帧缓存器中的最新一帧视频。依次循环。
由于CPU 4处理速度比视频帧数据采集速度慢而丢掉的视频帧缓存器中的帧,是进行连续视频处理时被丢掉的视频帧。另外,CPU 4进行视频编码时,总是以上一帧视频为参考,比采用多帧参考视频造成的处理等待时延的时间明显减少。
本发明的编解码系统如图2所示。视频编码器5将编码后的视频数据送入传输网络6,解码器7在视频解码时,采用即到即解的帧解码控制。符合理论上总的视频编解码时延不超过CPU压缩两帧视频的处理时间Tc加上采集一帧视频的时间Ta。
本发明的视频通讯码率控制原理如图3所示。码率控制单元8接收到传输网络带宽对码率的要求,并根据该带宽要求计算出该码率要求下可输出的视频帧数,得出CUP需要控制的处理时间。
本发明的CPU处理时间控制原理如图4所示。例如,在满帧30帧时视频码率为512kbps的视频编码输出带宽Dv,传输网络带宽Bc为300kbps,通过比较9,如果DV大于Bc,增加CPU处理时间,根据丢弃的帧数重新计算出视频编码输出带宽Dv等于512/30x帧数,继续进入比较,直至实现Dv小于Bc。例如,编码后的视频带宽小于300Kbps,则传输帧数等于17帧(300/17.07),CPU处理每帧的时间控制在58.8ms,则CPU编码后的输出码率将小于300kbps,满足传输带宽的需求,可以实现优质的视频传输。
本领域的熟练技术人员会明白,尽管这里为了说明的目的而描述了相似性系统的特定实施例,但是在不脱离本发明精神和范围的情况下可以作各种修改。因此,除了附加的权利要求之外,对本发明不作限制。
Claims (4)
1.一种减少视频编码时延的方法,其特征在于,放置两个视频帧缓存器存,每个视频帧缓存器轮流采集一帧图像数据,一个视频帧缓存器采集一帧图像数据,另个一视频帧缓存器采集下一个图像数据;CPU完成一个视频帧缓存器中的一帧图像的视频编码后,继续处理另一个视频帧缓存器中的下一帧图像的视频编码,依次循环。
2.根据权利要求1所述的减少视频编码时延的方法,其特征在于,一个视频帧缓存器完成下一帧图像数据采集后,CPU未完成另一个视频帧缓存器中的上一帧图像的视频编码,则丢弃上一帧图像数据,直接对下一帧图像数据进行编码。
3.根据权利要求1所述的减少视频编码时延的方法,其特征在于,CPU进行视频编码以上一帧视频数据为参考。
4.根据权利要求1所述的减少视频编码时延的方法,其特征在于,视频编解码延时不超过CPU压缩一帧图像的编码处理时间与采集一帧图像的时间的总和。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201210116317 CN102724489A (zh) | 2012-04-20 | 2012-04-20 | 一种减少视频编码时延的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201210116317 CN102724489A (zh) | 2012-04-20 | 2012-04-20 | 一种减少视频编码时延的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102724489A true CN102724489A (zh) | 2012-10-10 |
Family
ID=46950138
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 201210116317 Pending CN102724489A (zh) | 2012-04-20 | 2012-04-20 | 一种减少视频编码时延的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102724489A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103945229A (zh) * | 2013-01-18 | 2014-07-23 | 鸿富锦精密工业(深圳)有限公司 | 影片传输系统及方法 |
CN104768021A (zh) * | 2015-04-22 | 2015-07-08 | 四川正冠科技有限公司 | 一种超低时延的h.264编码方法及编码器 |
CN104780376A (zh) * | 2015-04-09 | 2015-07-15 | 深圳市三朋电子有限公司 | 一种具有超低端到端时延的视频编解码系统、方法及装置 |
CN108632624A (zh) * | 2017-12-18 | 2018-10-09 | 百富计算机技术(深圳)有限公司 | 图像数据处理方法、装置、终端设备及可读存储介质 |
CN112087635A (zh) * | 2020-08-04 | 2020-12-15 | 西安万像电子科技有限公司 | 图像编码控制方法、装置、设备及计算机可读存储介质 |
-
2012
- 2012-04-20 CN CN 201210116317 patent/CN102724489A/zh active Pending
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103945229A (zh) * | 2013-01-18 | 2014-07-23 | 鸿富锦精密工业(深圳)有限公司 | 影片传输系统及方法 |
CN104780376A (zh) * | 2015-04-09 | 2015-07-15 | 深圳市三朋电子有限公司 | 一种具有超低端到端时延的视频编解码系统、方法及装置 |
CN104780376B (zh) * | 2015-04-09 | 2018-03-23 | 深圳市三朋电子有限公司 | 一种具有超低端到端时延的视频编解码系统、方法及装置 |
CN104768021A (zh) * | 2015-04-22 | 2015-07-08 | 四川正冠科技有限公司 | 一种超低时延的h.264编码方法及编码器 |
CN108632624A (zh) * | 2017-12-18 | 2018-10-09 | 百富计算机技术(深圳)有限公司 | 图像数据处理方法、装置、终端设备及可读存储介质 |
CN112087635A (zh) * | 2020-08-04 | 2020-12-15 | 西安万像电子科技有限公司 | 图像编码控制方法、装置、设备及计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107231328B (zh) | 实时视频传输方法、装置、设备及系统 | |
CN102724489A (zh) | 一种减少视频编码时延的方法 | |
CN1206863C (zh) | 图像传输方法 | |
CN100423539C (zh) | 图像压缩方法、图像压缩装置、图像传输系统、数据压缩预处理装置及数据压缩预处理方法 | |
CN105635636B (zh) | 一种视频会议系统及其实现视频图像传输控制的方法 | |
CN101873482B (zh) | 实时流媒体集群转码系统 | |
CN100420299C (zh) | 一种屏幕广播方法 | |
CN104168439B (zh) | 一种视频编码方法和装置 | |
CN108347580B (zh) | 一种处理视频帧数据的方法及电子设备 | |
CN102547375A (zh) | 一种快速实现预览h.264编码帧的传输方法 | |
CN102045557A (zh) | 视频编解码方法及使用其的视频编码、解码装置 | |
CN103686349B (zh) | 一种多屏互动的方法、装置及机顶盒 | |
CN103607665A (zh) | 一种多链路的无线实时视频传输方法及系统 | |
CN106791899A (zh) | 直播中减少观众端画面卡顿的方法及装置以及客户端 | |
CN102905128A (zh) | 编解码处理器在无线视频传输过程中码率控制的方法 | |
CN101931799A (zh) | 一种视频码流的平滑方法及装置 | |
CN105025347B (zh) | 一种gop图像组的发送和接收方法 | |
CN103686047A (zh) | 一种多路视频数据传输方法 | |
US20020054635A1 (en) | Image transmitting method and apparatus and image receiving method and apparatus | |
US20160149667A1 (en) | Information processing apparatus, information processing method, and program | |
CN104768062B (zh) | 实时视频流的无缝切换方法 | |
CN103780908B (zh) | 一种高效的h264解码方法 | |
US8320449B2 (en) | Method for controlling video frame stream | |
CN109889847A (zh) | 低延时无线传输编解码系统 | |
CN104333763A (zh) | 一种视频控制方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20121010 |