CN118317147B - 一种分布式音视频文件处理系统及处理方法 - Google Patents

一种分布式音视频文件处理系统及处理方法 Download PDF

Info

Publication number
CN118317147B
CN118317147B CN202410725577.2A CN202410725577A CN118317147B CN 118317147 B CN118317147 B CN 118317147B CN 202410725577 A CN202410725577 A CN 202410725577A CN 118317147 B CN118317147 B CN 118317147B
Authority
CN
China
Prior art keywords
audio
information
transcoding
video
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202410725577.2A
Other languages
English (en)
Other versions
CN118317147A (zh
Inventor
辛光
李福刚
桑栋
宗广丰
张永
姜世伟
崔明磊
王子寒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zibo Tongguang Electronics Co ltd
Original Assignee
Zibo Tongguang Electronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zibo Tongguang Electronics Co ltd filed Critical Zibo Tongguang Electronics Co ltd
Priority to CN202410725577.2A priority Critical patent/CN118317147B/zh
Publication of CN118317147A publication Critical patent/CN118317147A/zh
Application granted granted Critical
Publication of CN118317147B publication Critical patent/CN118317147B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management e.g. creating a master electronic programme guide from data received from the Internet and a Head-end or controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4627—Rights management associated to the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种分布式音视频文件处理系统及处理方法,设置用户指令采集模块采集用户端请求指令信号,根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;设置信息预处理模块识别音视频文件信息并判断音视频属性信息和时间戳是否合格:若是,则执行用户端请求指令进行音视频数据下一步处理;若否,则拒绝用户端请求指令;设置信息处理模块对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;信息处理模块包括:权限控制单元、信息分配单元、转码监控单元;设置信息预警模块根据监控故障信息结果发出预警信号;本发明通过预先对用户访问音视频的权限进行控制实现预先分配和文件安全上传和下载过程。

Description

一种分布式音视频文件处理系统及处理方法
技术领域
本发明涉及计算机数据处理技术领域,具体涉及一种分布式音视频文件处理系统及处理方法。
背景技术
随着各大平台的音视频频繁分享和共享模式,高质量的音视频成为了各个类型用户的重要需求,由于音视频给的传播路径广,并且需求量大,为了适应不同适配的平台和用户端网络需要进行编码处理,除了视频的分享还包括用户视频的上传等需求,现有的传统转码设备及服务器无法满足现在的客户需求。
现有的分布式音视频文件的处理过程中通常需要用到计算机处理技术,通过将音视频文件进行转码处理并获取文件的转码信息,实现当前用户选择的文件的下载或者上传过程,在现有的公众平台中通常会设置辅助系统进行音视频文件的上传和下载过程,而且在这一过程中仅进行单程的音视频转码和音视频片段进行分发转码的形式需要消耗较长的等待及处理时间。
介于上述问题本发明考虑通过设计处理系统对公众平台的用户需求端的指令数据进行预先获取音视频的转码特征,通过信息预先分配的过程设置提高转码成功效率,同时对于用户访问的权限进行控制保证用户端音视频安全上传和下载过程。
发明内容
本发明的目的在于提供一种分布式音视频文件处理系统及处理方法,解决以下技术问题:
怎样提高转码成功率和实现用户端音视频安全上传和下载过程。
本发明的目的可以通过以下技术方案实现:
一种分布式音视频文件处理系统,包括:
用户指令采集模块,用于采集用户端请求指令信号,根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;
信息预处理模块,用于识别音视频文件信息并判断音视频属性信息和时间戳是否合格:
若是,则执行用户端请求指令进行音视频数据下一步处理;
若否,则拒绝用户端请求指令;
信息处理模块,用于对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;
所述信息处理模块包括:权限控制单元、信息分配单元、转码监控单元;
所述权限控制单元用于认证用户端身份信息及获取用户端转码记录信息,确定用户访问权限;
所述权限控制单元确定用户访问权限的方法包括:
获取当前用户端历史转码操作次数Otr及历史通过响应转码次节点数Rtr;
通过公式计算确定当前用户访问系数Ac;其中,γ1、γ2为预设权重系数,γ1、γ2均大于0;O0为用户端转码操作标准次数;R0为历史通过响应转码次节点标准数;ΔR为历史通过响应转码次节点允许偏差值;
将访问系数Ac与预设访问系数阈值区间进行比对:
若Ac属于访问系数阈值区间,则判断当前用户访问权限正常;
若Ac大于访问系数阈值区间,则判断当前用户访问权限频繁;
若Ac小于访问系数阈值区间,则判断当前用户访问权限受限,判断当前用户访问安全性;
所述信息分配单元用于获取当前正常用户访问权限下的次节点顺序信息并分配音视频文件数据转码任务,确定分批调度信息;
所述转码监控单元用于根据分批调度结果进行转码监控获取监控策略,判断监控结果;
信息预警模块,用于根据监控故障信息结果发出预警信号。
优选地,所述用户指令采集模块:
通过采集用户端界面发出的文件处理请求信号;
根据请求信号采集用户端数据接口处的音视频文件信息及音视频数据;
构建用户端数据接口主节点和多个次节点,通过主节点获取音视频文件信息;通过多个次节点响应并存放音视频数据。
优选地,所述音视频文件信息包括:音视频文件源地址、音视频属性、音视频时间戳、音视频大小。
优选地,所述信息预处理模块:
获取该用户端主节点接收当前次节点响应时间段内获取的音视频文件对应的时间戳分布及信号响应时间值大小,组成时间戳响应时间值集合{Spt1,…,Sptn};
判断集合{Spt1,…,Sptn}的元素Spti落在预设标准时间戳响应时间值阈值范围内的元素数量X;
若元素数量X≥Xith,则判断时间戳分布合理,否则,判断时间戳分布不合理。
优选地,所述信息预处理模块还包括:
对音视频信息属性进行分析判断是否兼容:
若兼容,则进行分布式转码;
若不兼容,则更换当前转码方式。
优选地,所述信息分配单元:
获取当前正常用户访问权限访问时间段内的第k个次节点响应时间值Tk;
通过公式计算获得第k个次节点的分批调度信号值Bak;其中m为次节点总数;δ为预设权重系数;Qbh为转化函数;Tk(t)为时间段[t1,t2]内第k个次节点响应时间值;aveTk(t)为时间段[t1,t2]内Tk(t)的平均值;Tkith(t)为在时间段[t1,t2]第k个次节点响应时间值标准曲线平均值。
优选地,所述转码监控单元:
将分批调度信号值Bak与预设标准分批调度信号阈值区间[B1,B2]进行比对大小:
若Bak∈[B1,B2],则判断当前次节点符合调度信息;
若则判断当前次节点不符合调度信息,进行转码监控,并进一步执行监控策略:
若Bak<B1,则判断当前次节点调度性弱,执行转码预警信号,降低转码任务分配;
若Bak>B2,则判断当前次节点调度性强,执行转码预警信号,调高转码任务分配。
一种分布式音视频文件处理方法,应用于一种分布式音视频文件处理系统,具体方法包括:
步骤一、采集用户端请求指令信号并根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;
步骤二、识别音视频文件信息并判断音视频属性信息和时间戳是否合格:
若是,则执行用户端请求指令进行音视频数据下一步处理;
若否,则拒绝用户端请求指令;
步骤三、对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;
步骤四、根据监控故障信息结果发出预警信号。
本发明的有益效果:本发明通过设置信息处理模块预先获取音视频的转码特征,通过信息预先分配的过程设置提高转码成功效率,对于用户访问的权限进行控制保证用户端音视频安全上传和下载过程;具体分为:通过权限控制单元保证对用户端身份信息认证及确认获取用户端转码记录信息,进而确定用户访问权限;由于需要保证用户端使用的安全性和隐私性,通过对用户端信息进行用户权限管理,通过获取用户行为日志信息来记录用户每次的操作信息并进行统计,保证获取用户端转码记录信息的获取;通过信息分配单元获取当前正常用户访问权限下的次节点顺序信息并分配音视频文件数据转码任务,确定分批调度信息;通过分批调度信息的获取保证进一步的调度监控过程,提高音视频转码效率;通过设置信息分配单元保证对于符合用户权限管理标准的用户访问及用户端转码记录信息进行分析判断各个节点的音视频文件数据转码情况,进而保证实时转码人物信息的提前预测分批和调度处理;另外还通过转码监控单元根据分批调度结果进行转码监控获取监控策略,判断监控结果,实现音视频转码的安全预警的过程。
当然,实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一种分布式音视频文件处理系统模块图;
图2为本发明信息处理模块结构单元图;
图3为本发明一种分布式音视频文件处理方法步骤图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
现有的分布式音视频文件的处理过程中通常需要用到计算机处理技术,通过将音视频文件进行转码处理并获取文件的转码信息,实现当前用户选择的文件的下载或者上传过程,在现有的公众平台中通常会设置辅助系统进行音视频文件的上传和下载过程,而在且在这一过程中仅进行单程的音视频转码和音视频片段进行分发转码的形式需要消耗较长的等待及处理时间。
介于上述问题本发明通过设计处理系统对公众平台的用户需求端的指令数据进行预先获取音视频的转码特征,通过信息预先分配的过程设置提高转码成功效率,同时对于用户访问的权限进行控制保证用户端音视频安全上传和下载过程。
具体的,请参阅图1-2所示,本发明为一种分布式音视频文件处理系统,包括:
用户指令采集模块,用于采集用户端请求指令信号,根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;
信息预处理模块,用于识别音视频文件信息并判断音视频属性信息和时间戳是否合格:
若是,则执行用户端请求指令进行音视频数据下一步处理;
若否,则拒绝用户端请求指令;
信息处理模块,用于对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;
信息处理模块包括:权限控制单元、信息分配单元、转码监控单元;
权限控制单元用于认证用户端身份信息及获取用户端转码记录信息,确定用户访问权限;
信息分配单元用于获取当前正常用户访问权限下的次节点顺序信息并分配音视频文件数据转码任务,确定分批调度信息;
转码监控单元用于根据分批调度结果进行转码监控获取监控策略,判断监控结果;
信息预警模块,用于根据监控故障信息结果发出预警信号。
通过上述技术方案,本实施例中设计的一种分布式音视频文件处理系统包括一下四个模块:用户指令采集模块、信息预处理模块、信息处理模块、信息预警模块;通过这四个模块实现用户端采集的音视频信号转码前信号的处理过程,减少音视频转码过程中单次转码中的等待时间过程及步骤过程过多的问题;具体的通过首先设置用户指令采集模块来采集用户端请求指令信号,并根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;由于用户在各大平台分享的音视频越来越多,用户需要等待视频转码时间也越来越长,通过分布式转码来提高视频转码效率,缩短视频转码等待时间,提高用户体验,为了达到这样的效果这里就需要提前对用户使用当前平台进行视频分享的习惯次数和点击指令次数进行充分的信息获取,通过用户指令采集模块保证了获取并确定用户端的访问和需求信息,并且确定用户端请求指令。
其次,通过设置信息预处理模块识别音视频文件信息并判断音视频属性信息和时间戳是否合格:若合格,则执行用户端请求指令进行音视频数据下一步处理;若不合格,则拒绝用户端请求指令;通过设置信息预处理模块保证避免无法转码的视屏进入转码流程,通过获取转码的原视频信息进行进一步分析,对于分布时间戳不正确的视频进行大会处理,避免用户端视频播放过程中的不兼容情况,当然还需要对当前音视频数据属性信息进行确认,降低和减少视频在转码过程中节点数据分析过程对CPU资源的占用。
进一步的,通过设置信息处理模块对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;本实施例中通过设置信息处理模块进一步对预处理后的音视频数据进行进一步的转码前调配和提前监控预测的过程,降低音视频在转码过程的合理分配和提高转码成功效率。
其中,本实施例中设置的信息处理模块具体包括:权限控制单元、信息分配单元、转码监控单元;通过权限控制单元保证对用户端身份信息认证及确认获取用户端转码记录信息,进而确定用户访问权限;由于需要保证用户端使用的安全性和隐私性,通过对用户端信息进行用户权限管理,通过获取用户行为日志信息来记录用户每次的操作信息并进行统计,保证获取用户端转码记录信息的获取。
通过信息分配单元获取当前正常用户访问权限下的次节点顺序信息并分配音视频文件数据转码任务,确定分批调度信息;通过信息分配单元的设置保证对于符合用户权限管理标准的用户访问及用户端转码记录信息进行分析,进一步判断设置各个节点的音视频文件数据转码情况,进而保证实时转码人物信息的提前预测分批和调度处理;这里的分批调度信息是通过获取各个次节点的响应时间进行判断获取的,具体的设置包括设置调度器提前预设好标准的响应时间,根据不同的响应时间获取各个节点的调度信号,根据获取的调度信号参数进行自动调度工作的过程,通过分批调度信息的获取保证进一步的调度监控过程,提高音视频转码效率;另外还通过转码监控单元根据分批调度结果进行转码监控获取监控策略,判断监控结果;实现音视频转码的安全预警的过程。
最后,通过设置信息预警模块根据监控故障信息结果发出预警信号;保证获取监控故障信号并进行预警处理,降低音视频转码过程中出现的问题的几率。
作为本发明的一种实施方式,用户指令采集模块:
通过采集用户端界面发出的文件处理请求信号;
根据请求信号采集用户端数据接口处的音视频文件信息及音视频数据;
构建用户端数据接口主节点和多个次节点,通过主节点获取音视频文件信息;通过多个次节点响应并存放音视频数据。
通过上述技术方案,本实施例中设置的用户指令采集模块保证获取用户端界面发出的文件处理请求信号,并且根据请求信号采集用户端数据接口处的音视频文件信息及音视频数据;为了提高分布式音视频的传输效率和合理调度过程,通过增加各个节点处理音视频数据以减少用户平均等待的时间,进而实现音视频的高效率分享,这一分布式节点设定处理是基于分布式节点机器设置进行实现的。
在具体实施的过程中,本实施例通过设置的一个主节点和若干个次节点,实现本实施例中用户端的数据的准确采集过程;通过构建用户端数据接口主节点和多个次节点,其中,通过主节点获取音视频文件信息,通过多个次节点响应并存放音视频数据。
作为本发明的一种实施方式,音视频文件信息包括:音视频文件源地址、音视频属性、音视频时间戳、音视频大小。
通过上述技术方案,本实施例中的音视频文件信息为音视频文件源地址、音视频属性、音视频时间戳、音视频大小,这类音视频文件信息保证其源地址信息、名称及大小以及分区等还有音视频对应的大小进行确定。
作为本发明的一种实施方式,信息预处理模块:
获取该用户端主节点接收当前次节点响应时间段内获取的音视频文件对应的时间戳分布及信号响应时间值大小,组成时间戳响应时间值集合{Spt1,...,Sptn};
判断集合{Spt1,...,Sptn}的元素Spti落在预设标准时间戳响应时间值阈值范围内的元素数量X;
若元素数量X≥Xith,则判断时间戳分布合理,否则,判断时间戳分布不合理。
通过上述技术方案,根据现有的时间戳用来验证这段数据在产生后是否经过篡改,所以时间戳服务的提供者必须证明服务中使用的时间源是可信的,并且提供的时间戳标记服务是安全的;因此本实施例中通过获取时间戳标记的响应时间来进行反馈,具体可以通过对时间戳分布的合理性进行预测,本实施例中通过信息预处理模块来获取用户端主节点接收当前次节点响应时间段内获取的音视频文件对应的时间戳分布及信号响应时间值大小,组成时间戳响应时间值集合{Spt1,…,Sptn};并判断集合{Spt1,…,Sptn}的元素Spti落在预设标准时间戳响应时间值阈值范围内的元素数量X;若元素数量X≥Xith,则判断时间戳分布合理,否则,判断时间戳分布不合理。
作为本发明的一种实施方式,信息预处理模块还包括:
对音视频信息属性进行分析判断是否兼容:
若兼容,则进行分布式转码;
若不兼容,则更换当前转码方式。
通过上述技术方案,本实施例中设置的信息预处理模块中还反映了音视频信息属性是否正常进而保证进行下一步的转码过程的选择和分布式转码的正常运行。
作为本发明的一种实施方式,权限控制单元:
获取当前用户端历史转码操作次数Otr及历史通过响应转码次节点数Rtr;
通过公式计算确定当前用户访问系数Ac;其中,γ1、γ2为预设权重系数,γ1、γ2均大于0;00为用户端转码操作标准次数;R0为历史通过响应转码次节点标准数;ΔR为历史通过响应转码次节点允许偏差值;
将访问系数Ac与预设访问系数阈值区间进行比对:
若Ac属于访问系数阈值区间,则判断当前用户访问权限正常;
若Ac大于访问系数阈值区间,则判断当前用户访问权限频繁;
若Ac小于访问系数阈值区间,则判断当前用户访问权限受限,判断当前用户访问安全性。
通过上述技术方案,本实施例中设置权限控制单元实现当前用户访问权限的状态分析,通过设置权限控制单元保证限制用户对平台的合法访问,同时能够有效保障平台的安全;一般权限管理包括构建权限、分配权限及权限使用三个部分,通过权限系统可以实现对用户角色的添加、修改、查询及删除的操作,通过权限控制保证用户拥有一对一的账号,并且保证只能进行权限内的操作;由于不同用户对于音视频操作的频率及完成操作次数是不同的,并且通过对当前用户历史转码操作次数及历史通过响应转码次节点数进行统计,获取当前用户权限操作的合理性;具体的:通过公式计算确定当前用户访问系数Ac;将访问系数Ac与预设访问系数阈值区间进行比对大小:判断若Ac属于访问系数阈值区间,则判断当前用户访问权限正常;若Ac大于访问系数阈值区间,则判断当前用户访问权限频繁;若Ac小于访问系数阈值区间,则判断当前用户访问权限受限,判断当前用户访问安全性。
需要说明的是,用户端转码操作标准次数O0、历史通过响应转码次节点标准数R0均是根据均为根据历史经验获取的标准数据值,在此不作详述;历史通过响应转码次节点允许偏差值ΔR为根据经验测试数据训练分析并进行拟合获得,在此不作详述。
作为本发明的一种实施方式,信息分配单元:
获取当前正常用户访问权限访问时间段内的第k个次节点响应时间值Tk;
通过公式计算获得第k个次节点的分批调度信号值Bak;其中m为次节点总数;δ为预设权重系数;Qbh为转化函数;Tk(t)为时间段[t1,t2]内第k个次节点响应时间值;aveTk(t)为时间段[t1,t2]内Tk(t)的平均值;Tkith(t)为在时间段[t1,t2]第k个次节点响应时间值标准曲线平均值。
通过上述技术方案,本实施例中设置信息分配单元保证获取音视频的分批调度信号值,具体通过获取当前正常用户访问权限访问时间段内的第k个次节点响应时间值Tk;通过对次节点响应时间的分析判断当前次节点的调度信号大小,通过公式 计算获得第k个次节点的分批调度信号值Bak。
需要说明的是,预设权重系数δ是根据历史经验数据获得的,在此不作详述;转化函数Qbh是根据正常状态下的测试数据拟合获得,通过分析响应时间状态判断当前函数对次节点的分批调度的安全风险进行预测;其中,aveTk(t)、Tkith(t)则均是根据历史数据模拟状态下对应次节点的标准响应时间值获得,在此不作赘述。
作为本发明的一种实施方式,转码监控单元:
将分批调度信号值Bak与预设标准分批调度信号阈值区间[B1,B2]进行比对大小:
若Bak∈[B1,B2],则判断当前次节点符合调度信息;
若则判断当前次节点不符合调度信息,进行转码监控,并进一步执行监控策略:
若Bak<B1,则判断当前次节点调度性弱,执行转码预警信号,降低转码任务分配;
若Bak>B2,则判断当前次节点调度性强,执行转码预警信号,调高转码任务分配。
通过上述技术方案,为了提前预测次节点调度安全性及合理性,本实施例中设置转码监控单元完成对分批调度信号值Bak大小进行分析,具体地,将分批调度信号值Bak与预设标准分批调度信号阈值区间[B1,B2]进行比对大小:若Bak∈[B1,B2],则判断当前次节点符合调度信息;若则判断当前次节点不符合调度信息,进行转码监控,并进一步执行监控策略实现监控和提前预警:判断若Bak<B1,则判断当前次节点调度性弱,执行转码预警信号,降低转码任务分配;若Bak>B2,则判断当前次节点调度性强,执行转码预警信号,调高转码任务分配。
请参阅图3所示,在一个实施例中,提供了一种分布式音视频文件处理方法,应用于分布式音视频文件处理系统,具体方法包括:
步骤一、采集用户端请求指令信号并根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;
步骤二、识别音视频文件信息并判断音视频属性信息和时间戳是否合格:
若是,则执行用户端请求指令进行音视频数据下一步处理;
若否,则拒绝用户端请求指令;
步骤三、对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;
步骤四、根据监控故障信息结果发出预警信号。
本系统中涉及到的相关模块均为硬件系统模块或者为现有技术中计算机软件程序或协议与硬件相结合的功能模块,该功能模块所涉及到的计算机软件程序或协议的本身均为本领域技术人员公知的技术,其不是本系统的改进之处;本系统的改进为各模块之间的相互作用关系或连接关系,即为对系统的整体的构造进行改进,以解决本系统所要解决的相应技术问题。
以上内容仅仅是对本发明的构思所作的举例和说明,所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,只要不偏离发明的构思或者超越本申请所定义的范围,均应属于本发明的保护范围。

Claims (6)

1.一种分布式音视频文件处理系统,其特征在于,包括:
用户指令采集模块,用于采集用户端请求指令信号,根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;
信息预处理模块,用于识别音视频文件信息并判断音视频属性信息和时间戳是否合格:
若是,则执行用户端请求指令进行音视频数据下一步处理;
若否,则拒绝用户端请求指令;
信息处理模块,用于对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;
所述信息处理模块包括:权限控制单元、信息分配单元、转码监控单元;
所述权限控制单元用于认证用户端身份信息及获取用户端转码记录信息,确定用户访问权限;
所述权限控制单元确定用户访问权限的方法包括:
获取当前用户端历史转码操作次数Otr及历史通过响应转码次节点数Rtr;
通过公式计算确定当前用户访问系数Ac;其中,γ1、γ2为预设权重系数,γ1、γ2均大于0;O0为用户端转码操作标准次数;R0为历史通过响应转码次节点标准数;ΔR为历史通过响应转码次节点允许偏差值;
将访问系数Ac与预设访问系数阈值区间进行比对:
若Ac属于访问系数阈值区间,则判断当前用户访问权限正常;
若Ac大于访问系数阈值区间,则判断当前用户访问权限频繁;
若Ac小于访问系数阈值区间,则判断当前用户访问权限受限,判断当前用户访问安全性;
所述信息分配单元用于获取当前正常用户访问权限下的次节点顺序信息并分配音视频文件数据转码任务,确定分批调度信息;
所述信息分配单元:
获取当前正常用户访问权限访问时间段内的第k个次节点响应时间值Tk;
通过公式计算获得第k个次节点的分批调度信号值Bak;其中m为次节点总数;δ为预设权重系数;Qbh为转化函数;Tk(t)为时间段[t1,t2]内第k个次节点响应时间值;aveTk(t)为时间段[t1,t2]内Tk(t)的平均值;Tkith(t)为在时间段[t1,t2]第k个次节点响应时间值标准曲线平均值;
所述转码监控单元用于根据分批调度结果进行转码监控获取监控策略,判断监控结果;
所述转码监控单元:
将分批调度信号值Bak与预设标准分批调度信号阈值区间[B1,B2]进行比对大小:
若Bak∈[B1,B2],则判断当前次节点符合调度信息;
若则判断当前次节点不符合调度信息,进行转码监控,并进一步执行监控策略:
若Bak<B1,则判断当前次节点调度性弱,执行转码预警信号,降低转码任务分配;
若Bak>B2,则判断当前次节点调度性强,执行转码预警信号,调高转码任务分配;
信息预警模块,用于根据监控故障信息结果发出预警信号。
2.根据权利要求1所述的一种分布式音视频文件处理系统,其特征在于,所述用户指令采集模块:
通过采集用户端界面发出的文件处理请求信号;
根据请求信号采集用户端数据接口处的音视频文件信息及音视频数据;
构建用户端数据接口主节点和多个次节点,通过主节点获取音视频文件信息;通过多个次节点响应并存放音视频数据。
3.根据权利要求2所述的一种分布式音视频文件处理系统,其特征在于,所述音视频文件信息包括:音视频文件源地址、音视频属性、音视频时间戳、音视频大小。
4.根据权利要求1所述的一种分布式音视频文件处理系统,其特征在于,所述信息预处理模块:
获取该用户端主节点接收当前次节点响应时间段内获取的音视频文件对应的时间戳分布及信号响应时间值大小,组成时间戳响应时间值集合{Spt1,...,Sptn};
判断集合{Spt1,...,Sptn}的元素Spti落在预设标准时间戳响应时间值阈值范围内的元素数量X;
若元素数量X≥Xith,则判断时间戳分布合理,否则,判断时间戳分布不合理。
5.根据权利要求4所述的一种分布式音视频文件处理系统,其特征在于,所述信息预处理模块还包括:
对音视频信息属性进行分析判断是否兼容:
若兼容,则进行分布式转码;
若不兼容,则更换当前转码方式。
6.一种分布式音视频文件处理方法,其特征在于,应用于如权利要求1-5中任意项所述的一种分布式音视频文件处理系统,具体方法包括:
步骤一、采集用户端请求指令信号并根据请求指令信号反馈数据接口端获取音视频文件信息及音视频数据;
步骤二、识别音视频文件信息并判断音视频属性信息和时间戳是否合格:
若是,则执行用户端请求指令进行音视频数据下一步处理;
若否,则拒绝用户端请求指令;
步骤三、对音视频数据进行分布转码处理获取分批调度信息并监控故障信息;
步骤四、根据监控故障信息结果发出预警信号。
CN202410725577.2A 2024-06-06 2024-06-06 一种分布式音视频文件处理系统及处理方法 Active CN118317147B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202410725577.2A CN118317147B (zh) 2024-06-06 2024-06-06 一种分布式音视频文件处理系统及处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202410725577.2A CN118317147B (zh) 2024-06-06 2024-06-06 一种分布式音视频文件处理系统及处理方法

Publications (2)

Publication Number Publication Date
CN118317147A CN118317147A (zh) 2024-07-09
CN118317147B true CN118317147B (zh) 2024-09-03

Family

ID=91730401

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202410725577.2A Active CN118317147B (zh) 2024-06-06 2024-06-06 一种分布式音视频文件处理系统及处理方法

Country Status (1)

Country Link
CN (1) CN118317147B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104394366A (zh) * 2014-11-26 2015-03-04 东南大学 分布式视频流媒体转码访问控制的方法和系统
CN115051877A (zh) * 2022-08-12 2022-09-13 国网浙江省电力有限公司杭州供电公司 基于零信任模型的电网云业务安全访问方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5459777B2 (ja) * 2010-01-08 2014-04-02 Necシステムテクノロジー株式会社 アクセス権管理システム、ファイル管理サーバ、クライアントマシン、アクセス権管理方法およびプログラム
CN106528280B (zh) * 2015-09-15 2019-10-29 阿里巴巴集团控股有限公司 一种任务分配方法和系统
CN116962526A (zh) * 2022-04-14 2023-10-27 中国移动通信集团辽宁有限公司 安全防护方法、装置、设备、介质及产品
CN117170836A (zh) * 2023-07-25 2023-12-05 深圳大学 基于改进hho算法的视频云转码任务调度方法及装置
CN117156206A (zh) * 2023-09-08 2023-12-01 河南明新文化传媒有限公司 一种云平台视频处理系统及其应用方法
CN117499429A (zh) * 2023-10-31 2024-02-02 北京般若之光智联科技有限公司 一种物联网系统内部的视频数据智能调度方法及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104394366A (zh) * 2014-11-26 2015-03-04 东南大学 分布式视频流媒体转码访问控制的方法和系统
CN115051877A (zh) * 2022-08-12 2022-09-13 国网浙江省电力有限公司杭州供电公司 基于零信任模型的电网云业务安全访问方法

Also Published As

Publication number Publication date
CN118317147A (zh) 2024-07-09

Similar Documents

Publication Publication Date Title
CN114780214B (zh) 任务处理方法、装置、系统及设备
KR101416280B1 (ko) 이벤트 처리 시스템 및 방법
CN110909013B (zh) 业务清单生成方法、装置、设备及计算机可读存储介质
CN114567519A (zh) 一种多线程并行管理多个智能设备指令消息的方法及装置
CN110930254A (zh) 基于区块链的数据处理方法、装置、终端及介质
CN104394366A (zh) 分布式视频流媒体转码访问控制的方法和系统
CN120216146A (zh) 一种基于智能体的api调用交互方法、系统及存储介质
CN120378470A (zh) 多设备协同控制方法、装置、计算机设备及存储介质
CN119759577A (zh) 基于智能决策模型的任务动态调整系统及方法
US9621438B2 (en) Network traffic management
CN116911310A (zh) 意图处理方法及通信设备
CN121012943A (zh) 视频操作的执行方法、装置、存储介质和电子设备
CN118317147A (zh) 一种分布式音视频文件处理系统及处理方法
CN101478571A (zh) 网络视频监控系统及其系统用户认证方法
CN119135624A (zh) Pcdn业务处理方法、装置、电子设备及可读存储介质
CN115460659A (zh) 用于带宽调节的无线通信数据分析系统
CN115495783B (zh) 一种配置式的数据服务暴露解决方法及系统
CN112015796A (zh) 基于区块链的工程巡查方法、装置、系统、介质及设备
CN118822749B (zh) 一种基于神经网络模型的保险信息管理系统
CN120315883B (zh) 一种智能计算中心的算力资源访问方法
CN121814784A (zh) 电力大数据共享平台的松耦合数据传输方法及设备
CN111010377B (zh) 集中管控宽带用户会话属性的系统
CN118350960A (zh) 一种基于人工智能的管理控制方法
CN121967267A (zh) 一种智能实验室设备物联网统一监控运维系统
CN119051968A (zh) 数据传输方法、装置、设备、存储介质及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant