CN107592567A - 消除视频卡顿的方法及装置 - Google Patents

消除视频卡顿的方法及装置 Download PDF

Info

Publication number
CN107592567A
CN107592567A CN201710739849.4A CN201710739849A CN107592567A CN 107592567 A CN107592567 A CN 107592567A CN 201710739849 A CN201710739849 A CN 201710739849A CN 107592567 A CN107592567 A CN 107592567A
Authority
CN
China
Prior art keywords
video
delay
eliminating
cardton
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710739849.4A
Other languages
English (en)
Inventor
翟芳
肖洪波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Touch Vision Technology (beijing) Co Ltd
Original Assignee
Touch Vision Technology (beijing) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Touch Vision Technology (beijing) Co Ltd filed Critical Touch Vision Technology (beijing) Co Ltd
Priority to CN201710739849.4A priority Critical patent/CN107592567A/zh
Publication of CN107592567A publication Critical patent/CN107592567A/zh
Pending legal-status Critical Current

Links

Abstract

本发明涉及一种消除视频卡顿的方法,该方法读取视频地址,消除输入视频的延迟积累,对输入视频进行解析,对解析后的视频执行硬解码加速,执行视频转换以及消除待输出视频的直接延迟。本发明还提供一种消除视频卡顿的装置。本发明通过对输入视频以及输出视频分别进行消除视频卡顿的处理,从而达到了视频无延迟播放。

Description

消除视频卡顿的方法及装置
技术领域
本发明涉及视频解码技术领域,尤其涉及一种消除视频卡顿的方法以及一种消除视频卡顿的装置。
背景技术
传统的视频传输过程是由CAREMA+FFMEPG软解码方式实现的。对于 1080P实时解码来说软解码会造成解码速度缓慢视频卡顿的现象。而现有的硬解码方案(基于JETSONTK1平台)虽然优于软解码方案,但又有着各种问题,具体表现在:硬解码也会出现直接延迟播放情况(一边延迟在3秒钟左右);硬解码也会出现播放积累延时情况(随着播放时间增加出现播放累计延迟的情况)。
因而,亟需一种硬解码时能够消除视频卡顿的方法及装置。
发明内容
基于此,有必要针对传统硬解码存在的系列的问题,提供一种消除视频卡顿的方法及装置。
根据本发明目的提供的一种消除视频卡顿的方法,该方法包括如下步骤:
读取视频地址;
消除输入视频的延迟积累;
对输入视频进行解析;
对解析后的视频执行硬解码加速;
执行视频转换;
消除待输出视频的直接延迟。
在其中一个实施例中,所述消除输入视频的延迟积累的步骤为对输入视频进行SRC缓冲处理,消除输入视频的延迟积累。
在其中一个实施例中,所述对输入视频进行解析的步骤包括:
对输入视频进行解码处理;
对解码后的视频进行解析。
在其中一个实施例中,所述对解析后的视频执行硬解码加速的步骤为使用 OMX插件执行硬解码加速。
在其中一个实施例中,所述消除待输出视频的直接延迟的步骤为对待输出视频执行SINK处理消除直接播放延迟。
根据本发明的另一个目的,还提供一种消除视频卡顿的装置,该装置包括:
视频读取模块,用于读取视频地址;
视频源处理模块,用于消除输入视频的延迟积累;
视频解析模块,用于对输入视频进行解码和解析;
视频硬解码模块,用于对解析后的视频执行硬解码加速;
视频转换模块,用于执行视频转换;
视频潭处理模块,用于消除待输出视频的直接延迟。
在其中一个实施例中,所述视频源处理模块为SRC缓冲处理模块。
在其中一个实施例中,所述视频解析模块包括:
视频解码单元,用于视频解码;
视频解析单元,用于对解码后的视频进行解析。
在其中一个实施例中,所述硬解码模块为OMX插件模块。
在其中一个实施例中,所述视频潭处理模块为SINK处理模块。
本发明的有益效果包括:本发明提供的一种消除视频卡顿的方法及装置,读取视频地址,消除输入视频的延迟积累,对输入视频进行解析,对解析后的视频执行硬解码加速,执行视频转换以及消除待输出视频的直接延迟。本发明通过对输入视频以及输出视频分别进行消除视频卡顿的处理,从而达到了视频无延迟播放。
附图说明
图1为本发明一实施例的消除视频卡顿的方法的流程图;
图2为本发明一实施例的消除视频卡顿的装置的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图对本发明实施例的人脸检测的方法及装置的具体实施方式进行说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如上所述,传统的视频传输过程是由CAREMA+FFMEPG软解码方式实现的。对于1080P实时解码来说软解码会造成解码速度缓慢视频卡顿的现象。而现有的硬解码方案(基于JETSON TK1平台)虽然优于软解码方案,但又有着各种问题,具体表现在:硬解码也会出现直接延迟播放情况(一边延迟在3秒钟左右);硬解码也会出现播放积累延时情况(随着播放时间增加出现播放累计延迟的情况)。而使用本发明的消除视频卡顿的方法及装置,读取视频地址,消除输入视频的延迟积累,对输入视频进行解析,对解析后的视频执行硬解码加速,执行视频转换以及消除待输出视频的直接延迟。本发明通过对输入视频以及输出视频分别进行消除视频卡顿的处理,从而达到了视频无延迟播放。
以下结合附图1-2对本发明进行进一步详细地阐述。
参考图1,为本发明一种消除视频卡顿的方法100,方法100包括如下步骤:
步骤S110:读取视频地址。
首先,通过读取视频地址获取视频。其中,所述视频可以为H264格式视频文件。
步骤S120:消除输入视频的延迟积累。
随着时间的播放,会产生积累性的延迟。通过对输入视频进行消除延迟积累的处理,从而消除视频播放延迟积累。其中,所述消除输入视频的延迟积累的步骤可以为对输入视频进行SRC缓冲处理,从而消除输入视频的延迟积累。
步骤S130:对输入视频进行解析。
其中,对输入视频进行解析具体还可以包括对输入视频进行视频解码和视频解析。例如,通过RTP协议对输入视频进行解码,通过PARSRE解析器进行解析。
步骤S140:对解析后的视频执行硬解码加速。
对解析后的视频执行硬解码加速的步骤可以为使用OMX插件执行硬解码加速。例如,可以通过OMX插件进行硬解码加速。在其他实施例中,可以通过其他的硬件插件执行硬解码加速。
步骤S150:执行视频转换。
通过视频转换,将视频转换为需要播放的格式。
步骤S160:消除待输出视频的直接延迟。
直接播放时,会有实时播放延迟,例如会有3秒所有的卡顿。通过消除输出视频的直接延迟从而消除实时播放卡顿。其中,可以对待输出视频执行SINK 处理,从而消除直接播放造成的延迟。
本发明消除视频卡顿的方法,通过对输入视频以及输出视频分别进行消除视频卡顿的处理,从而达到了视频无延迟播放。
图2所示,为本发明一实施例的消除视频卡顿的装置的示意图。
参考图2,一种消除视频卡顿的装置200,该装置200包括:视频读取模块 210,视频源处理模块220,视频解析模块230,视频硬解码模块240,视频转换模块250以及视频潭处理模块260。视频读取模块210读取视频地址,视频源处理模块220消除输入视频的延迟积累,视频解析模块230对输入视频进行解码和解析,视频硬解码模块240对解析后的视频执行硬解码加速,视频转换模块 250执行视频转换,视频潭处理模块260消除待输出视频的直接延迟。
其中,所述视频源处理模块220可以为SRC缓冲处理模块。随着时间的播放,会产生积累性的延迟。通过对输入视频进行消除延迟积累的处理,从而消除视频播放延迟积累。例如,可以对输入视频进行SRC缓冲处理,从而消除输入视频的延迟积累。
在其他实施例中,上述视频解析模块230包括:视频解码单元和视频解析单元。视频解码单元用于视频解码,视频解析单元用于对解码后的视频进行解析。对输入视频进行解析具体还可以包括对输入视频进行视频解码和视频解析,例如,通过RTP协议对输入视频进行解码,通过PARSRE解析器进行解析。
其中,上述硬解码模块可以为OMX插件模块。对解析后的视频执行硬解码加速可以为使用OMX插件执行硬解码加速。例如,可以通过OMX插件进行硬解码加速。在其他实施例中,可以通过其他的硬件插件执行硬解码加速。
其中,所述视频潭处理模块为SINK处理模块。直接播放时,会有实时播放延迟,例如会有3秒所有的卡顿。通过消除输出视频的直接延迟从而消除实时播放卡顿。其中,可以对待输出视频执行SINK处理,从而消除直接播放造成的延迟。
本发明消除视频卡顿的装置,通过对输入视频以及输出视频分别进行消除视频卡顿的处理,例如对硬解码源(SRC)和潭(SINK)的处理,从而达到了视频无延迟播放。
下面例举一组整体管道流,对本发明做具体的阐述:基于JETSON TK1平台,采用了硬解码插件。整体管道流如下所示:
rtspsrc location=URI!@1!rtph264depay!h264parse!omxh264dec!videoconvert!xvimagesink@2
如上整体管道流所示,omxh264dec为硬解码插件,在此基础上做了如上@1、 @2两点视频处理:
(1)在@1部分增加了视频SRC缓冲处理。因为随着播放时间会出现积累性延迟,因此通过SRC处理主要消除积累延迟卡顿。
(2)在@2部分增加了视频SINK处理。直接播放时,会有实时播放延迟,例如会有3秒所有的卡顿。对待输出视频执行SINK处理,从而消除直接播放造成的延迟。
上述管道流依次为:读取视频地址,视频SRC缓冲处理,视频解码以及解析,视频硬加速,视频转换以及视频SINK处理。可见,本发明通过对硬解码源 (SRC)和潭(SINK)的处理,一方面直接减少了硬解码RTSP流直接延迟,另一方面减少了视频随着时间积累延迟,从而达到了视频流无延迟播放要求。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory, ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种消除视频卡顿的方法,其特征在于,包括如下步骤:
读取视频地址;
消除输入视频的延迟积累;
对输入视频进行解析;
对解析后的视频执行硬解码加速;
执行视频转换;
消除待输出视频的直接延迟。
2.根据权利要求1所述的消除视频卡顿的方法,其特征在于,所述消除输入视频的延迟积累的步骤为对输入视频进行SRC缓冲处理,消除输入视频的延迟积累。
3.根据权利要求1所述的消除视频卡顿的方法,其特征在于,所述对输入视频进行解析的步骤包括:
对输入视频进行解码处理;
对解码后的视频进行解析。
4.根据权利要求1所述的消除视频卡顿的方法,其特征在于,所述对解析后的视频执行硬解码加速的步骤为使用OMX插件执行硬解码加速。
5.根据权利要求1所述的消除视频卡顿的方法,其特征在于,所述消除待输出视频的直接延迟的步骤为对待输出视频执行SINK处理消除直接播放延迟。
6.一种消除视频卡顿的装置,其特征在于,包括:
视频读取模块,用于读取视频地址;
视频源处理模块,用于消除输入视频的延迟积累;
视频解析模块,用于对输入视频进行解码和解析;
视频硬解码模块,用于对解析后的视频执行硬解码加速;
视频转换模块,用于执行视频转换;
视频潭处理模块,用于消除待输出视频的直接延迟。
7.根据权利要求6所述的消除视频卡顿的装置,其特征在于,所述视频源处理模块为SRC缓冲处理模块。
8.根据权利要求6所述的消除视频卡顿的装置,其特征在于,所述视频解析模块包括:
视频解码单元,用于视频解码;
视频解析单元,用于对解码后的视频进行解析。
9.根据权利要求6所述的,其特征在于,所述硬解码模块为OMX插件模块。
10.根据权利要求6所述的,其特征在于,所述视频潭处理模块为SINK处理模块。
CN201710739849.4A 2017-08-25 2017-08-25 消除视频卡顿的方法及装置 Pending CN107592567A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710739849.4A CN107592567A (zh) 2017-08-25 2017-08-25 消除视频卡顿的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710739849.4A CN107592567A (zh) 2017-08-25 2017-08-25 消除视频卡顿的方法及装置

Publications (1)

Publication Number Publication Date
CN107592567A true CN107592567A (zh) 2018-01-16

Family

ID=61041618

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710739849.4A Pending CN107592567A (zh) 2017-08-25 2017-08-25 消除视频卡顿的方法及装置

Country Status (1)

Country Link
CN (1) CN107592567A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100054341A1 (en) * 2008-09-04 2010-03-04 Sony Corporation Audio visual system and decoder therefor
CN104219551A (zh) * 2014-09-29 2014-12-17 武汉诚迈科技有限公司 一种智能设备屏幕共享与远程控制的方法
CN104796768A (zh) * 2015-04-17 2015-07-22 苏州健雄职业技术学院 一种基于omap硬解码加速的嵌入式高清媒体播放器及其操作方法
CN106302375A (zh) * 2015-06-29 2017-01-04 成都鼎桥通信技术有限公司 去除流媒体播放器时延累积的方法及装置
CN106331766A (zh) * 2016-08-31 2017-01-11 网宿科技股份有限公司 视频文件的播放方法和装置
CN106385594A (zh) * 2016-09-18 2017-02-08 深圳市青柠互动科技开发有限公司 一种优化视频直播服务的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100054341A1 (en) * 2008-09-04 2010-03-04 Sony Corporation Audio visual system and decoder therefor
CN104219551A (zh) * 2014-09-29 2014-12-17 武汉诚迈科技有限公司 一种智能设备屏幕共享与远程控制的方法
CN104796768A (zh) * 2015-04-17 2015-07-22 苏州健雄职业技术学院 一种基于omap硬解码加速的嵌入式高清媒体播放器及其操作方法
CN106302375A (zh) * 2015-06-29 2017-01-04 成都鼎桥通信技术有限公司 去除流媒体播放器时延累积的方法及装置
CN106331766A (zh) * 2016-08-31 2017-01-11 网宿科技股份有限公司 视频文件的播放方法和装置
CN106385594A (zh) * 2016-09-18 2017-02-08 深圳市青柠互动科技开发有限公司 一种优化视频直播服务的方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
孟凡飞: "基于Gstreamer的嵌入式流媒体系统的研究与设计", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
宫健: "基于Gstreamer的嵌入式流媒体传输系统的研究与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
常克楠: "基于嵌入式Linux的视频监控系统设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
洪承煜: "基于GStreamer嵌入式多媒体系统的设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Similar Documents

Publication Publication Date Title
US9961398B2 (en) Method and device for switching video streams
US8947596B2 (en) Alignment of closed captions
IL271502A (en) Adaptive processing with multiple media processor nodes
US7707485B2 (en) System and method for dynamic transrating based on content
US8670072B1 (en) Method and apparatus for streaming media data processing, and streaming media playback equipment
US9619559B2 (en) Alignment and re-association of metadata for media streams within a computing device
MX2009002191A (es) Metodo y aparato para recibir, almacenar y presentar programacion multimedia sin indexar antes de almacenar.
US20240127854A1 (en) Methods and apparatus to perform speed-enhanced playback of recorded media
CN107566889B (zh) 音频流流速误差处理方法、装置、计算机装置及计算机可读存储介质
CN106658226B (zh) 一种播放方法及装置
CN112261377B (zh) web版监控视频播放方法、电子设备及存储介质
CN106254867A (zh) 基于画面组对视频文件进行转码的方法及系统
CN104902145B (zh) 一种直播流视频的播放方法及装置
CN104113778A (zh) 一种视频流解码方法及装置
US20020169599A1 (en) Digital audio compression and expansion circuit
CN106385525A (zh) 一种视频播放方法及装置
CN102811383A (zh) 一种基于机顶盒的视频文件播放方法及装置
CN107592567A (zh) 消除视频卡顿的方法及装置
WO2016090916A1 (zh) 码流传输方法和装置
CN101540882A (zh) 基于内存流传输的p2p点播方法
CN104185028A (zh) 一种视频播放方法及终端
CN103501457B (zh) 一种节目播放的方法及设备
CN101771872A (zh) 基于mpeg2的视频流播放方法和装置
CN103702137A (zh) 在转码任务处理过程中生成统计数据的方法和系统
CN109788357A (zh) 一种播放媒体文件的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180116

RJ01 Rejection of invention patent application after publication