CN105306964B - 一种视频流转码故障快速恢复系统及恢复方法 - Google Patents

一种视频流转码故障快速恢复系统及恢复方法 Download PDF

Info

Publication number
CN105306964B
CN105306964B CN201510697410.0A CN201510697410A CN105306964B CN 105306964 B CN105306964 B CN 105306964B CN 201510697410 A CN201510697410 A CN 201510697410A CN 105306964 B CN105306964 B CN 105306964B
Authority
CN
China
Prior art keywords
transcoding
monitoring
parameter
monitoring process
video stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510697410.0A
Other languages
English (en)
Other versions
CN105306964A (zh
Inventor
费泽松
吴志坤
陈建强
王飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Technology BIT
Original Assignee
Beijing Institute of Technology BIT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Technology BIT filed Critical Beijing Institute of Technology BIT
Priority to CN201510697410.0A priority Critical patent/CN105306964B/zh
Publication of CN105306964A publication Critical patent/CN105306964A/zh
Application granted granted Critical
Publication of CN105306964B publication Critical patent/CN105306964B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4425Monitoring of client processing errors or hardware failure

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及一种视频流转码故障快速恢复系统及方法,属于多媒体传输技术领域;包括以下内容:1、控制模块以转码参数作为输入启动转码进程,并获得其进程PID值;再以监控参数作为输入启动监控进程;2、转码任务执行过程中,转码进程定时地与监控进程进行通信;3、如果转码进程停止工作,监控进程会关闭转码进程,并尝试重启转码任务若干次;4、如果转码进程多次重启失败,监听进程将关闭转码进程并结束。本发明使得视频流处理系统对波动的网络环境以及非标准的输入音视频流具有更好的适应能力;与现有视频流处理系统相比,采用本发明方法后,视频流处理系统的可靠性可以得到明显提高,用户体验也可以得到明显的改善。

Description

一种视频流转码故障快速恢复系统及恢复方法
技术领域
本发明涉及一种视频流转码故障快速恢复系统及恢复方法,属于多媒体传输技术领域。
背景技术
随着多媒体传输技术的迅猛的发展,视频电话、视频点播、视频监控、视频直播等多媒体应用已经渗透到了我们日常生活的方方面面。为了实现众多音视频设备的互联互通,人们进行了一系列的标准化工作。在已制定的音视频标准中,由国际标准化组织/国际电工技术委员会第一联合技术组(ISO/IEC JTC1)运动图像专家组织(Moving PictureExperts Group,MPEG)制定的MPEG-1/2/4系列标准以及由国际电信联盟(InternationalTelecommunication Union Telecommunication Standardization Sector,ITU-T)制定的H.261/2/3/4系列标准影响最为广泛。随着终端设备多样化、网络环境异构化、视频业务多元化,不同系统和网络之间的交互变得越来越重要。视频转码是提供通用多媒体存取服务的有效手段。把某种编码格式的压缩码流转换为另一种编码格式的压缩码流,如图1所示,这种操作称为视频转换编码(video transcoding)(下简称为转码),完成转码的软件或者设备称为视频转换编码器(video transcoder)(简称为转码器)。从20世纪90年代开始,视频转码技术逐渐成为视频编码、传输领域的一个研究热点。
对于视频电话、视频直播能实时性视频业务,转码器的输入、输出往往是实时流式传输的视频。一旦因为传输过程中的大量丢包、视频编码不规范等导致转码器停止工作甚至崩溃,视频将中断传输。如果不能及时发现并处理转码器不正常工作的问题,必然将带来十分糟糕的用户体验,然而传统的视频转码工具并不具有这种纠错机制。本发明设计了一种视频流转码故障快速恢复方法,该方案可以实现对转码器工作状态的实时监控,并在转码器工作终止的情况下快速进行恢复。
发明内容
本发明的目的是提高包含有视频流转码器在内的视频流处理系统的可靠性,提出了一种视频流转码故障快速恢复系统及恢复方法,该系统可以实现对转码器工作状态的实时监控,并在转码器工作终止的情况下快速进行恢复,改善现有视频流处理系统的可靠性。
本发明的思想是通过建立监控进程以监控转码进程的工作状态,转码进程周期性地向外发送信息以表明该转码进程处于正常转码的状态:工作状态,一旦转码进程因未知原因停止工作,将由监控进程执行转码进程重启。
本发明的目的是通过以下技术方案解决的:
包括控制模块、转码进程和监控进程;控制模块用于启动转码进程和与其相关的监控进程;转码进程用于根据输入的转码参数进行转码以及向指定的通信端口发送预设的消息;监控进程用于根据输入参数以及从其对应的转码进程发送消息的通信端口接收的消息确定是否需要重启或关闭转码进程。
一种视频流转码故障快速恢复方法,基于视频流转码故障快速恢复系统,包括以下步骤:
步骤一:控制模块启动转码进程,传递转码参数;启动监控进程,传递监控参数;
步骤二:转码任务执行过程中,转码进程定时地与监控进程进行通信;
步骤三:如果转码进程停止工作,监控进程会关闭转码进程,并尝试重启转码任务若干次;
步骤四:如果转码进程多次重启失败,监听进程将关闭转码进程并结束。
有益效果
本发明方法使得视频流处理系统对波动的网络环境以及非标准的输入音视频流具有更好的适应能力。与现有视频流处理系统相比,采用本发明方法后,视频流处理系统的可靠性可以得到明显提高,用户体验也可以得到明显的改善。
附图说明
图1是转码器工作原理示意图;
图2是一种视频流转码故障快速恢复系统结构组成示意图;
图3是本发明实施例一种视频流转码故障快速恢复方法流程示意图。
具体实施方式
下面将结合附图和实施例对本发明加以详细说明,同时也叙述了本发明技术方案解决的技术问题及有益效果,需要指出的是,所描述的实施例仅旨在便于对本发明的理解,而对其不起任何限定作用。
下面对本发明进行举例说明。
实施例1:
一种视频流转码故障快速恢复系统,如图2所示,包括控制模块、转码进程和监控进程;控制模块用于启动转码进程和与其相关的监控进程;转码进程用于根据输入的转码参数进行转码以及向指定的通信端口汇报其工作情况;监控进程用于根据输入参数以及其对应的转码进程汇报的工作情况确定是否需要重启或关闭转码进程。
所述转码进程可采用现有任意一种转码器,并在其上添加通信功能实现。
所述通信,作为优选的实施方式,采用异步通信方式,这样可有效降低资源开销。
如图2所示系统,当应用于现有转码器,可在转码器内添加通信、监控进程和控制模块的功能;当应用于现有视频流处理系统,可不更改任何现有转码器内容,只在系统层面添加控制模块、监控进程以及转码进程中的通信部分功能。
实施例2:
一种视频流转码故障快速恢复方法,如图3所示,包括以下步骤:
步骤一、控制模块启动转码进程,传递转码参数;启动监控进程,传递监控参数。
如实施例1所示,控制模块是上层模块,负责管理转码进程和监控进程的运行。
该模块可以启动转码进程,并传递转码参数。转码参数至少应包括有一般转码参数和通信端口号。一般转码参数指的是与视频处理相关连的参数,包括码率、分辨率、视频编码标准等。通信端口号是经系统约定的,与转码进程一一对应的通信端口。启动转码进程后,控制模块可以得到该进程的PID值。
在得到转码进程的PID后,控制模块启动监控进程,并传递监控参数。监控参数主要包括转码进程的PID以及转码参数。
示例说明:假定待转码任务ID为80,通信端口号N与转码任务ID的映射关系为N=ID+1000。假定原始视频分辨率为1920x1080,码率为5Mbps,帧率为30fps。欲将其转码成分辨率为1080x720,码率为3Mbps,帧率为30fps的视频。
转码参数可以按照{通信端口号,分辨率,码率,帧率}的顺序设置为{1080,1080x720,3Mbps,30fps}。然后启动转码进程。启动成功后,获得该转码进程的PID值,假定为1187。
监控参数可以按照{转码进程PID值,{通信端口号,分辨率,码率,帧率}}的顺序设置为{1187,{1080,1080x720,3Mbps,30fps}}。然后启动监控进程。
步骤二、转码任务执行过程中,转码进程定时地与监控进程进行通信。
作为优选,所述通信采用异步通信方式,如UDP。
转码进程在转码任务执行的过程中可周期性地向通信端口发送约定信息,记发送周期为Δt。该功能可以通过向传统的转码进程中添加端口通信代码加以实现,具体如:转码进程每处理k帧,即向指定端口进行一次消息发送。
监控进程在启动后处于监听状态,并启动定时器,监听最大持续时间为ΔT。在时间设置上,必须保证ΔT>Δt。监控进程在ΔT时间内收到转码进程发送的消息后,将重置定时器,并重新回到监听状态。
如步骤一示例所述,转码进程正常启动后,将以一定的频率向1080端口发送消息。假定约定的消息内容为“1”,协议为UDP,发送的时间点为每次转码器成功进行一帧的转码之后。那么发送消息的时间间隔约为1/帧率。根据假定的帧率为30fps,可知发送的时间间隔Δt约为33ms。监控程序正常启动后,将监听1080端口。监听动作的最长保持时间为ΔT。由于ΔT>Δt,且允许一定的转码时间抖动,可将其设置为100ms。
步骤三、如果转码进程停止工作,监控进程会关闭转码进程,并尝试重启转码任务若干次;
根据步骤二的设定,转码进程每处理k帧即向端口发送一次消息。当转码进程停止工作时,它将停止视频转换的过程。此时转码进程不再向端口进行消息发送。
对于监控进程,如果其在ΔT时间内接收到了约定的消息,则重置定时器,返回步骤二,继续监控;否则,如果其在ΔT时间内没有接收到转码进程发送的消息,便调用进程关闭函数,根据监控进程启动时控制模块输入的转码进程PID值,关闭该转码进程,随后,根据监控进程启动时控制模块输入的一般转码参数,重新启动转码进程,并于重启成功后更新转码进程PID值,返回步骤二,继续监控;
步骤四、如果转码进程多次重启均失败,监听进程将关闭转码进程并结束;否则,转步骤2。
如果连续N次重启失败,监控进程将调用进程关闭函数,关闭转码进程。然后,监控进程也将退出,在退出前,如果有其它约定,则先从其约定,如向控制模块做出必要的反馈如果此期间重启成功,转码器恢复正常,将重复步骤二、三、四。本实施例中,N=5。
以上所述的具体描述,对发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.一种视频流转码故障快速恢复方法,其特征在于:包括以下步骤:
步骤一、控制模块以转码参数作为输入启动转码进程,并获得其进程PID值;再以监控参数作为输入启动监控进程;
步骤二、转码任务执行过程中,监控进程定时监控其工作状态;
步骤三、如果转码进程停止工作,监控进程多次尝试重启转码器;重启过程如下:根据监控参数中的转码进程PID值,将该转码进程关闭;
步骤四、如果转码进程多次重启失败,监控进程将关闭转码进程并结束;
其中,转码进程在转码任务执行的过程中周期性地向通信端口发送约定信息,记发送周期为Δt;监控进程在启动后处于监听状态,并启动定时器,监听最大持续时间为ΔT;在时间设置上,必须保证ΔT>Δt;监控进程在ΔT时间内收到转码进程发送的消息后,将重置定时器,并重新回到监听状态;对于监控进程,如果其在ΔT时间内接收到了约定的消息,则重置定时器,继续监控;否则,如果其在ΔT时间内没有接收到转码进程发送的消息,便调用进程关闭函数,根据监控进程启动时控制模块输入的转码进程PID值,关闭该转码进程,随后,根据监控进程启动时控制模块输入的一般转码参数,重新启动转码进程,并于重启成功后更新转码进程PID值,继续监控。
2.根据权利要求1所述的一种视频流转码故障快速恢复方法,其特征在于:所述转码参数至少包括一般转码参数和通信端口号,所述监控参数至少包括转码参数和所述转码进程PID值。
3.根据权利要求1所述的一种视频流转码故障快速恢复方法,其特征在于:所述转码任务执行过程中,监控进程定时监控其工作状态通过以下过程完成:
转码进程在转码任务执行过程中定期向通信端口发送预设消息;
监控进程定期从所述通信端口接收所述预设消息,并判断:
如果接收到所述预设消息,则判定转码进程工作正常,其继续监听;
如果没有接收到所述预设消息,则判定转码进程停止工作。
4.根据权利要求3所述的一种视频流转码故障快速恢复方法,其特征在于:所述转码进程与所述监控进程之间发送以及接收消息采用异步通信方式完成。
5.根据权利要求2所述的一种视频流转码故障快速恢复方法,其特征在于:所述一般转码参数至少包括码率、分辨率和视频编码标准。
6.根据权利要求1-5任一所述的一种视频流转码故障快速恢复方法,其特征在于:步骤四所述监控进程将关闭转码进程后,在结束自身的运行前,还包括向控制模块进行必要的反馈内容。
CN201510697410.0A 2015-10-23 2015-10-23 一种视频流转码故障快速恢复系统及恢复方法 Active CN105306964B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510697410.0A CN105306964B (zh) 2015-10-23 2015-10-23 一种视频流转码故障快速恢复系统及恢复方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510697410.0A CN105306964B (zh) 2015-10-23 2015-10-23 一种视频流转码故障快速恢复系统及恢复方法

Publications (2)

Publication Number Publication Date
CN105306964A CN105306964A (zh) 2016-02-03
CN105306964B true CN105306964B (zh) 2018-05-08

Family

ID=55203639

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510697410.0A Active CN105306964B (zh) 2015-10-23 2015-10-23 一种视频流转码故障快速恢复系统及恢复方法

Country Status (1)

Country Link
CN (1) CN105306964B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105868009A (zh) * 2016-03-23 2016-08-17 乐视控股(北京)有限公司 一种直播流软件转码任务管理方法和装置
CN112749042B (zh) * 2019-10-31 2024-03-01 北京沃东天骏信息技术有限公司 一种应用运行方法和装置
CN112416568A (zh) * 2020-09-01 2021-02-26 上海哔哩哔哩科技有限公司 音视频转码任务的时长预估方法和时长预估装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101710974A (zh) * 2009-11-27 2010-05-19 广东亿迅科技有限公司 一种实现融合视频监控的方法
CN102325255A (zh) * 2011-09-09 2012-01-18 深圳市融创天下科技股份有限公司 一种多核心cpu视频转码调度方法及系统
CN103733629A (zh) * 2011-06-21 2014-04-16 尼尔森(美国)有限公司 测量流媒体曝光率的方法和设备
CN103945281A (zh) * 2014-04-29 2014-07-23 中国联合网络通信集团有限公司 视频传输处理方法、装置和系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030236892A1 (en) * 2002-05-31 2003-12-25 Stephane Coulombe System for adaptation of SIP messages based on recipient's terminal capabilities and preferences
US7676590B2 (en) * 2004-05-03 2010-03-09 Microsoft Corporation Background transcoding
US20060133775A1 (en) * 2004-12-22 2006-06-22 Ju Chi-Cheng Method of storage medium management and video recording system and storage system thereof
JP2007318455A (ja) * 2006-05-25 2007-12-06 Matsushita Electric Ind Co Ltd トランスコーデック装置
CN101094222B (zh) * 2006-06-20 2014-03-19 达通科技股份有限公司 一种改善远距实时串流视讯传输及储存的反射器及方法
CN101188756B (zh) * 2007-12-04 2010-06-09 武汉大学 一种mpeg-4 sp到avs视频转码方法
CN101729378B (zh) * 2008-10-10 2012-07-04 华为技术有限公司 一种媒体流监控的路由调度方法、设备及系统
US9184884B2 (en) * 2012-05-18 2015-11-10 Futurewei Technologies, Inc. System and method for cloud-based live media ingestion and transcoding

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101710974A (zh) * 2009-11-27 2010-05-19 广东亿迅科技有限公司 一种实现融合视频监控的方法
CN103733629A (zh) * 2011-06-21 2014-04-16 尼尔森(美国)有限公司 测量流媒体曝光率的方法和设备
CN102325255A (zh) * 2011-09-09 2012-01-18 深圳市融创天下科技股份有限公司 一种多核心cpu视频转码调度方法及系统
CN103945281A (zh) * 2014-04-29 2014-07-23 中国联合网络通信集团有限公司 视频传输处理方法、装置和系统

Also Published As

Publication number Publication date
CN105306964A (zh) 2016-02-03

Similar Documents

Publication Publication Date Title
CN104918133B (zh) 一种视联网中视频流的播放方法和装置
CN102547243B (zh) 基于3g网络的音视频远程监控方法及系统
CN104602044A (zh) 一种rtmp流媒体公网直播系统及其设计方法
CN105635636B (zh) 一种视频会议系统及其实现视频图像传输控制的方法
EP2364017B1 (en) Method, system and user device for obtaining key frame in streaming media service
CN105704580B (zh) 一种视频传输方法
CN109327493A (zh) 一种基于云的远程医疗监控系统及监控方法
CN105306964B (zh) 一种视频流转码故障快速恢复系统及恢复方法
CN105072506B (zh) 教学直播视频的传输方法及系统
CN104661112B (zh) 基于可伸缩选择窗口的视频流文件传输方法及装置
CN106792996A (zh) 一种wifi快速配网及设备与用户绑定的方法
KR20070095428A (ko) 수신기 버퍼 아키텍처를 나타내는 버퍼 파라미터의시그널링
CN104902289A (zh) 一种rtmp流媒体直播系统热备份的设计方法及其系统
RU2531571C2 (ru) Система видеоконтроля и ее способ прямого исправления ошибок (fec)
CN106303661B (zh) 一种直播客户端实现自适应屏幕旋转的方法及系统
CN102202210A (zh) 手机播放实时监控视频的方法及播放实时监控视频的手机
CN102905128A (zh) 编解码处理器在无线视频传输过程中码率控制的方法
KR20070055432A (ko) 예측 및 비예측 데이터 프레임을 전송하는 방법 및디바이스
CN107360424B (zh) 一种基于视频编码器的码率控制方法、装置及视频服务器
CN108632679B (zh) 一种多媒体数据传输的方法和一种视联网终端
CN107079132B (zh) 在视频电话中的端口重配置之后馈送经帧内译码的视频帧
WO2011044781A1 (zh) 一种多媒体码流发送的方法和系统
EP4199526A1 (en) Communication method and apparatus
CN105376614A (zh) 视频质量优化方法和装置
CN103581695A (zh) 一种实现移动终端接入全球眼的系统和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant