CN104618740A - 一种基于云计算环境的多媒体点播系统 - Google Patents
一种基于云计算环境的多媒体点播系统 Download PDFInfo
- Publication number
- CN104618740A CN104618740A CN201510041171.3A CN201510041171A CN104618740A CN 104618740 A CN104618740 A CN 104618740A CN 201510041171 A CN201510041171 A CN 201510041171A CN 104618740 A CN104618740 A CN 104618740A
- Authority
- CN
- China
- Prior art keywords
- multimedia
- module
- client
- file
- multimedia file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 claims abstract description 38
- 238000003860 storage Methods 0.000 claims abstract description 24
- 230000003068 static effect Effects 0.000 claims abstract description 13
- 238000012544 monitoring process Methods 0.000 claims description 65
- 238000007405 data analysis Methods 0.000 claims description 17
- 230000008859 change Effects 0.000 claims description 7
- 230000006870 function Effects 0.000 claims description 7
- 238000010200 validation analysis Methods 0.000 claims description 6
- 238000004458 analytical method Methods 0.000 claims description 5
- 230000011218 segmentation Effects 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 claims description 4
- 238000013500 data storage Methods 0.000 abstract 1
- 238000013461 design Methods 0.000 description 16
- 238000000034 method Methods 0.000 description 9
- 230000006399 behavior Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 238000007418 data mining Methods 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000008521 reorganization Effects 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25891—Management of end-user data being end-user preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2181—Source of audio or video content, e.g. local disk arrays comprising remotely distributed storage units, e.g. when movies are replicated over a plurality of video servers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2405—Monitoring of the internal components or processes of the server, e.g. server load
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/254—Management at additional data server, e.g. shopping server, rights management server
- H04N21/2541—Rights Management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25875—Management of end-user data involving end-user authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26208—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
- H04N21/4756—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Computer Graphics (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明涉及一种基于云计算环境的多媒体点播系统,包括客户端通信模块、系统信息存储模块、多媒体服务器模块、分布式多媒体数据存储模块和多媒体数据编码编辑模块;客户端通信模块接收用户经客户端发出的多媒体文件点播请求,针对系统信息存储模块进行查询获得被点播多媒体文件的存储地址;然后,客户端通信模块向多媒体服务器模块发出请求指令,由多媒体服务器模块从分布式多媒体数据存储模块中提取获得被点播的多媒体静态文件,并经多媒体数据编码编辑模块获得具有指定播放要求的流媒体文件,再通过客户端通信模块反馈给客户端;本发明以云计算为基础,能够动态适应网络流量变化,大大提高了多媒体点播系统的性能和安全性。
Description
技术领域
本发明涉及一种基于云计算环境的多媒体点播系统。
背景技术
在移动互联网视频服务用户越来越多的情况下,用户对于视频服务的质量也在不断提高,设备的复杂性,网络的异构性,视频的清晰度,平台里视频的丰富程度等等,这些标准都在不断提高。传统的多媒体点播网站,只能单纯的提供多媒体服务,其基于传统方案的基础设施和系统架构对于日益提高的视频服务质量要求,已经显得非常吃力。多媒体服务商们迫切需要一种全新的可以利用现有设备,低成本的提升自己的服务质量。
发明内容
针对上述技术问题,本发明所要解决的技术问题是提供一种以云计算为基础,采用全新架构设计,能够动态适应网络流量变化,避免大量硬件资源被浪费,有效提高工作效率的基于云计算环境的多媒体点播系统。
本发明为了解决上述技术问题采用以下技术方案:本发明设计了一种基于云计算环境的多媒体点播系统,包括客户端通信模块、系统信息存储模块、多媒体服务器模块、分布式多媒体数据存储模块和多媒体数据编码编辑模块;其中,系统信息存储模块中保存有多媒体点播系统中所有多媒体文件信息,多媒体文件信息包括多媒体文件的存储地址;首先,客户端通信模块接收用户经客户端发出的多媒体文件点播请求,多媒体文件点播请求包括被点播多媒体文件请求和多媒体文件播放要求;客户端通信模块根据接收到的被点播多媒体文件请求,针对系统信息存储模块进行查询获得被点播多媒体文件的存储地址;然后,客户端通信模块将多媒体文件播放要求和被点播多媒体文件的存储地址发送至多媒体服务器模块,多媒体服务器模块先根据被点播多媒体文件的存储地址,从分布式多媒体数据存储模块中提取获得被点播的多媒体静态文件,接着,多媒体服务器模块根据多媒体文件播放要求,控制多媒体数据编码编辑模块针对获得的被点播的多媒体静态文件进行转码和设定,获得具有指定播放要求的流媒体文件,再通过客户端通信模块反馈给客户端。
作为本发明的一种优选技术方案:所述系统信息存储模块还保存有与客户端相对应的客户端信息,客户端信息包括客户端搜索记录、客户端多媒体点播记录和客户端播放进度记录;
系统信息存储模块中的所述多媒体文件信息还包括多媒体文件基本信息,其中,多媒体文件基本信息包括多媒体文件名、多媒体文件时长、多媒体文件简介和多媒体文件点播次数;
所述客户端通信模块包括多媒体文件搜索查询模块和客户端信息传输模块;
多媒体文件查询搜索模块用于根据客户端的多媒体文件点播请求,针对系统信息存储模块进行查询获得被点播多媒体文件的存储地址;或者接收并根据客户端的多媒体文件要求,针对系统信息存储模块进行搜索获得符合该多媒体文件要求的多媒体文件基本信息,并反馈给客户端;
客户端信息传输模块用于将客户端信息传输保存至系统信息存储模块中。
作为本发明的一种优选技术方案:所述多媒体文件播放要求包括文件播放宽高比、文件播放分辨率和文件播放清晰度。
作为本发明的一种优选技术方案:所述多媒体数据编码编辑模块针对所述获得的被点播的多媒体静态文件,先进行分段获得各个多媒体文件段,然后分别针对各个多媒体文件段进行转码,再将转码后的各个结果进行合并获得流媒体文件,最后,多媒体数据编码编辑模块根据所述多媒体文件播放要求,针对获得的流媒体文件进行设定,获得具有指定播放要求的流媒体文件。
作为本发明的一种优选技术方案:所述客户端通信模块还包括客户端验证设置模块,客户端验证设置模块用于客户端注册、客户端登录、客户端密码修改、客户端密码找回、客户端头像更新、客户端个人资料更新、客户端消息管理、客户端社交网络绑定;所述系统信息存储模块中的客户端信息还包括客户端登陆记录。
作为本发明的一种优选技术方案:所述客户端通信模块还包括客户端评论模块,供用户针对多媒体文件进行评论、评分,所述系统信息存储模块中的客户端信息还包括客户端针对多媒体文件的评论和评分。
作为本发明的一种优选技术方案:还包括系统数据分析模块,所述客户端通信模块还包括推送模块,系统数据分析模块用于根据系统信息存储模块分析获得分别对应各个用户的兴趣多媒体文件,推送模块用于将分别对应各个用户的兴趣多媒体文件推送至对应客户端上。
作为本发明的一种优选技术方案:所述多媒体服务器模块还包括缓存存储模块,缓存存储模块用于存储经所述系统数据分析模块获得的分别对应各个用户的兴趣多媒体文件,并更新系统信息存储模块中对应多媒体文件的存储地址。
作为本发明的一种优选技术方案:还包括多媒体服务监控模块,用于监控多媒体系统中各个模块的运行状态。
作为本发明的一种优选技术方案:所述多媒体服务监控模块包括主机性能监控子模块、网络设备性能监控子模块、数据库性能监控子模块、业务类型监控子模块、报警子模块和报表图表绘制子模块,其中:
主机性能监控子模块用于监控多媒体系统中所有物理设备的运行状态,包括CPU、内存、当前磁盘使用情况、设备温度,以及用于监控所有物理设备和虚拟设备的网络状况,包括网速、端口状况;
网络设备性能监控子模块用于监控多媒体系统中所有网络设备的运行状态;
数据库性能监控子模块用于监控系统信息存储模块和分布式多媒体数据存储模块中存储的数据;
业务类型监控子模块用于监控多媒体系统中各个应用业务的运行状态;
报警子模块用于针对多媒体系统中的各类故障实现报警功能,通知相关负责人;
报表图表绘制子模块用于分别针对主机性能监控子模块、网络设备性能监控子模块、数据库性能监控子模块、业务类型监控子模块的监控结果,进行图表绘制。
本发明所述一种基于云计算环境的多媒体点播系统采用以上技术方案与现有技术相比,具有以下技术效果:本发明设计的基于云计算环境的多媒体点播系统针对服务提供商们原有的设备(或者小幅升级),采用全新架构设计,以云计算为基础,能够动态适应网络流量变化,提升视频服务质量,避免大量硬件资源被浪费;同时本发明设计中,还结合了数据挖掘的思想,帮助服务提供商们分析用户行为,有效提高了实际工作中的工作效率,并且大大提高了多媒体点播系统的性能和安全性。
附图说明
图1为本发明设计基于云计算环境的多媒体点播系统的模块架构图;
图2为本发明设计中客户端通信模块的架构示意图;
图3为本发明设计中分布式多媒体数据存储模块的架构示意图;
图4为本发明设计中系统数据分析模块的架构示意图;
图5为本发明设计中多媒体数据编码编辑模块的架构示意图。
具体实施方式
下面结合说明书附图针对本发明的具体实施方式作进一步详细的说明。
如图1所示,本发明设计的一种基于云计算环境的多媒体点播系统在实际应用过程当中,包括客户端通信模块、系统信息存储模块、多媒体服务器模块、分布式多媒体数据存储模块、多媒体数据编码编辑模块、系统数据分析模块和多媒体服务监控模块。
应用中,首先,客户端通信模块接收用户经客户端发出的多媒体文件点播请求,多媒体文件点播请求包括被点播多媒体文件请求和多媒体文件播放要求,多媒体文件播放要求包括文件播放宽高比、文件播放分辨率和文件播放清晰度;客户端通信模块根据接收到的被点播多媒体文件请求,针对系统信息存储模块进行查询获得被点播多媒体文件的存储地址;然后,客户端通信模块将多媒体文件播放要求和被点播多媒体文件的存储地址发送至多媒体服务器模块,多媒体服务器模块先根据被点播多媒体文件的存储地址,从分布式多媒体数据存储模块中提取获得被点播的多媒体静态文件,接着,多媒体服务器模块根据多媒体文件播放要求,控制多媒体数据编码编辑模块针对获得的被点播的多媒体静态文件进行转码和设定,获得具有指定播放要求的流媒体文件,再通过客户端通信模块反馈给客户端;在上述过程中,系统数据分析模块根据系统信息存储模块分析获得分别对应各个用户的兴趣多媒体文件,客户端通信模块用于将分别对应各个用户的兴趣多媒体文件推送至对应客户端上;上述过程执行的同时,多媒体服务监控模块,用于针对多媒体系统中各个模块的运行状态实现实时监控。
本发明选择了容器技术,相比较传统的虚拟化技术,容器技术采用了操作系统级别的虚拟,具有启动快、占用资源小以及资源个理性好的特点,在面对突发高并发请求时能做到瞬时横向扩展和销毁,从而满足客户端通信模块发来的大量点播请求,其中,多媒体服务器模块中为了提高系统的相应时间以及缩小时延,多媒体服务器模块还包括缓存存储模块,多媒体服务器模块会根据系统数据分析模块统计分析出的数据,提前将热门视频读取到缓存存储模块中,减少了频繁查询分布式多媒体数据存储模块的次数,降低服务时延,提升用户体验。
针对本发明设计基于云计算环境的多媒体点播系统,具体设计如下:
客户端通信模块用于客户端与多媒体系统之间的数据通信,如图2所示,具体包括多媒体文件搜索查询模块、客户端信息传输模块、客户端验证设置模块、客户端评论模块、推送模块和增值服务管理模块。
多媒体文件查询搜索模块用于根据客户端的多媒体文件点播请求,针对系统信息存储模块进行查询获得被点播多媒体文件的存储地址;或者接收并根据客户端的多媒体文件要求,针对系统信息存储模块进行搜索获得符合该多媒体文件要求的多媒体文件基本信息,并反馈给客户端,即所谓的感兴趣视频搜索。
客户端信息传输模块用于将客户端信息传输保存至系统信息存储模块中。
客户端验证设置模块用于客户端注册、客户端登录、客户端密码修改、客户端密码找回、客户端头像更新、客户端个人资料更新、客户端消息管理、客户端社交网络绑定。
客户端评论模块供用户针对多媒体文件进行评论、评分。
推送模块用于将分别对应各个用户的兴趣多媒体文件推送至对应客户端上,即提供整个多媒体系统的广告推送服务、用户可能感兴趣视频推送功能;通过系统数据分析模块计算出来的结果,向客户端定向投送广告信息以及他们可能会感兴趣的视频,提高多媒体文件推送的有效率以及用户黏度。
增值服务管理子模块允许用户通过网银充值、支付宝等第三方支付工具充值等方式为自己的账号增加增值服务消费点,用户通过增值服务消费点可以观看付费版权点播内容。
分布式多媒体数据存储模块用于解决多媒体系统中视频文件的存储问题;分布式多媒体数据存储模块是一个针对音视频多媒体数据存储优化的基于FastDFS分布式存储框架的存储集群,集群采用了分组存储的方式,整个集群由多组存储节点组成,每组内又包含了多台独立存储服务器;分布式多媒体数据存储模块提供比现有DAS(直接附加存储)、NAS(网络附加存储)、SAN(存储区域网)等存储系统更好的数据存取性能;分布式多媒体数据存储模块还可以根据系统的状态进行横向或者纵向的拓展,某个分组处于高压状态时,可以随时增加改组的存储服务器数量,缓解当前分组的流量压力,或者当整个多媒体系统出现容量不足时,可以采取不停机线上增加存储分组来扩充整个系统的容量;相对传统Master-Slave(主从模式)存储模块:分布式多媒体数据存储模块充分采用了对等的架构,将数据分散存储在多个存储分组中,而每个分组中又包含了多个存储服务器,这样的两层结构既可以达到冗余备份,也可以起到负载均衡的目标,任意一个存储服务器发生故障失效不会丢失用户数据,并可以通过更换故障存储节点方式快速修复功能模块;由于视频文件一般较大,相对于其它存储系统相比,本发明设计多媒体系统中的分布式多媒体数据存储模块用文件存储的技术代替了其它存储系统中常见的分块存储,这样极大地降低系统的复杂性,从而减少了系统的响应时延;分布式多媒体数据存储模块可以低成本、低功耗、可扩展、高效率地以绿色环保可持续的方式解决整个多媒体系统中视频数据的存储问题。
所述的系统信息存储模块用以解决多媒体系统内部的信息存储问题,系统信息存储模块中保存有多媒体点播系统中所有多媒体文件信息,以及与客户端相对应的客户端信息,其中,多媒体文件信息包括多媒体文件的存储地址和多媒体文件基本信息,多媒体文件基本信息包括多媒体文件名、多媒体文件时长、多媒体文件简介和多媒体文件点播次数;客户端信息包括客户端登陆记录、客户端搜索记录、客户端多媒体点播记录、客户端播放进度记录,以及客户端针对多媒体文件的评论和评分。系统信息存储模块是一个针对流媒体系统海量信息优化的基于Cassandra的分布式NoSQL数据库集群。传统的关系型数据库在面对新型网络应用,例如流媒体视频网站时由于它的种种特性,显得力不从心,很难继续保证新型业务的稳定性,流媒体服务内存在海量的并发信息,为了能将这些信息记录下来作为后续数据挖掘的原始数据,我们采用了NoSQL的数据模型,去掉关系这个特性后,数据之间的关联被弱化了,因此扩展就变的非常容易,同时,去掉了关系型特性以及没有了表的概念后,我们可以随时存储任何自定义的数据,因此写入和读取速度得以很大程度的提高,而数据的处理则交给多媒体系统内的系统数据分析模块来进行分析处理;系统信息存储模块的架构是基于一致性哈希的完全P2P架构,每行数据通过哈希来决定应该存在哪个或者哪些节点中,整个存储集群中不存在master,所有存储节点都是对等的,这样可以完全解决整个系统由于单点问题导致的不稳定性;集群间的状态同步通过Gossip算法的实现来进行传输。每个存储节点都把数据存储于节点本身,每个节点都能够接受来自客户端通信模块的请求,每次客户端通信模块随机选择集群中的一个存储节点来请求数据,对应接受请求的节点将对应的key在一致性哈希的环上定位是哪些节点应该存储这个数据,将请求转发到对应的节点上,并将对应若干节点的查询反馈返回给客户端通信模块,从而最终将信息返回给用户。
所述的多媒体数据编码编辑模块用以解决视频服务提供商进行视频编辑转码问题。利用多媒体数据编码编辑模块,服务提供商可以向笔记本、平板电脑、智能手机、游戏机和数字机顶盒发布视频内容。针对移动用户,多媒体数据编码编辑模块充分考虑了移动平台设备的多样性,预设了针对移动设备优化的视频转码编辑参数。服务提供商利用多媒体数据编码编辑模块,只需要提交要发布的视频原文件,填写视频文件的描述信息,选择要进行转码编辑的参数,多媒体数据编码编辑模块在接收到视频文件后,开始自动完成视频的转码、上传和发布工作,这样就可供用户通过客户端针对多媒体系统中的多媒体文件实现点播。多媒体数据编码编辑模块为每台转码编辑节点分配任务,自动侦测服务器状态,自动进行运算资源的负载均衡,高速故障响应,自动分流,最后再将多个转码编辑节点所产生的编码后数据,合成为最终的视频数据,其中,多媒体数据编码编辑模块针对所述获得的被点播的多媒体静态文件,先进行分段获得各个多媒体文件段,然后分别针对各个多媒体文件段进行转码,再将转码后的各个结果进行合并获得流媒体文件,最后,多媒体数据编码编辑模块根据所述多媒体文件播放要求,针对获得的流媒体文件进行设定,获得具有指定播放要求的流媒体文件;多媒体数据编码编辑模块采用了MapReduce框架,模块内集群的分布式并行转码能够让软件与数据同时运行在连成一个网络的许多台计算机上,这里的每一台计算机均可以是一台普通的 PC 机,这样的分布式并行编码环境的最大优点是可以很容易的通过增加计算机来扩充新的计算结点,并由此获得不可思议的海量计算能力,同时又具有相当强的容错能力,一批计算结点失效也不会影响计算的正常进行以及结果的正确性。多媒体数据编码编辑模块在完成视频的转码编码后,会将处理完成的视频文件传输到分布式多媒体数据存储模块,视频的相应信息传输到系统信息存储模块。
所述的多媒体服务监控模块用于监控多媒体系统中各个模块的运行状态。当服务提供商不断扩展他们多媒体系统中机器数量时,如何管理这些众多的机器必然会成为一个困难的问题。多媒体服务监控模块可以监控整个多媒体系统,无论是具体的哪台机器还是那个服务出了问题,都能在第一时间发现。通过多媒体服务监控模块我们可以了解到故障发生的具体位置和故障状况,这样我们在处理这些故障时就能更有针对性。同时通过多媒体服务监控模块,多媒体系统可以自动的针对不同的流量状况开启和关闭相应的节点,这样就能动态适应流量变化,从而既能满足高峰期的服务请求,又能在低谷期节约能源,降低成本。针对多媒体系统中的点播服务,多媒体服务监控模块预制了多种监控模板,可以直接使用。多媒体服务监控模块能够自动发现主机和网络设备,并将这些信息进行全系统广播,免去了人工修改的麻烦。多媒体服务监控模块包含了友好的Web监控界面,通过Web界面,管理人员可以看到实时和历史的监控分析数据。 多媒体服务监控模块还提供了报警功能,按照故障级别、服务器类型、业务类型发送EMAIL邮件、短信和电话到相关负责人。多媒体服务监控模块包括主机性能监控子模块、网络设备性能监控子模块、数据库性能监控子模块、业务类型监控子模块、报警子模块和报表图表绘制子模块,其中:
主机性能监控子模块用于监控多媒体系统中所有物理设备的运行状态,包括CPU、内存、当前磁盘使用情况、设备温度,以及用于监控所有物理设备和虚拟设备的网络状况,包括网速、端口状况。
网络设备性能监控子模块用于监控多媒体系统中所有网络设备的运行状态,通过SNMP协议,网络设备性能监控子模块可以监控平台中网络设备的使用情况。
数据库性能监控子模块用于监控系统信息存储模块和分布式多媒体数据存储模块中存储的数据。
业务类型监控子模块用于监控多媒体系统中各个应用业务的运行状态,其中,业务类型监控子模块根据不同的业务类型,需要关注不同的信息,因此,业务类型监控子模块针对多媒体系统内的业务类型进行有针对的监控,能更好的掌控平台的运行状况。
报警子模块用于针对多媒体系统中的各类故障实现报警功能,通知相关负责人,由于运维保障部门的人员不可能在每个时刻都关注到多媒体系统内所有的监控信息,因此当多媒体系统内出现故障时,报警子模块首先通过Web界面通知管理部门,然后会通过Email、短信和电话的方式通知到运维保障部门的人员,使得他们可以及时获知多媒体系统故障情况从而及时进行修复。
报表图表绘制子模块用于分别针对主机性能监控子模块、网络设备性能监控子模块、数据库性能监控子模块、业务类型监控子模块的监控结果,进行图表绘制。这其中,为了让多媒体系统实时信息更直观,报表图表绘制子模块提供了根据实时监控信息进行图标绘制的功能。这样例如网络流量或者磁盘读写突然变化时可以更容易看出来,同时为了分析多媒体系统的发展状况,报表图表绘制子模块还可以根据历史数据绘制过去一段时间多媒体系统的运行状态,这样服务提供商们可以更好的优化他们的平台架构和部署细节。
所述的系统数据分析模块,主要提供分析全系统中数据的作用,挖掘更多有用信息;随着互联网特快速发展,我们处在了一个信息过载的时代,用户面对过量的信息很难找到自己真正感兴趣的内容,而服务提供商也很难把优质的内容准确推送给感兴趣的用户,系统数据分析模块就是解决这些问题的有效方法,它对用户的历史行为进行挖掘,对用户兴趣进行建模,并对用户未来的行为进行预测,从而建立了用户和内容的关系,即用户和多媒体文件的关系。系统数据分析模块与客户端通信模块的推送模块可以看成一个完整的推荐系统。系统数据分析模块负责离线计算,它将收集到的用户行为通过协同过滤、内容过滤和社会化过滤三重过滤后得到分析结果并存储,供在线系统也就是客户端通信模块的推送子模块进行实时查询和调用。
本发明设计的基于云计算环境的多媒体点播系统针对服务提供商们原有的设备(或者小幅升级),采用全新架构设计,以云计算为基础,能够动态适应网络流量变化,提升视频服务质量,避免大量硬件资源被浪费;同时本发明设计中,还结合了数据挖掘的思想,帮助服务提供商们分析用户行为,有效提高了实际工作中的工作效率,并且大大提高了多媒体点播系统的性能和安全性。
如图3所示,分布式多媒体数据存储模块中的中心服务器首先判断其余模块发来的任务请求类型。当多媒体服务器模块发来点播请求,则判定为读取,中心服务器会根据自己维护的存储节点信息表来查询被请求的多媒体静态文件所在的存储分组,然后将具体存放被请求的多媒体静态文件的存储分组的接口和地址返回给多媒体服务器模块,多媒体服务器模块在得到分组的地址和接口后直接访问该存储分组,读取所需的多媒体静态文件,经多媒体数据编码编辑模块转化为流媒体,经客户端提供给用户。当多媒体数据编码编辑模块发来上传请求,则判定为存储,中心服务器会根据自己维护的存储节点信息表来返回一组当前最优的存储,多媒体数据编码编辑模块得到这组存储节点的地址和接口后就将编辑转码完成的视频存储在分布式多媒体数据存储模块中的中心服务器分配的存储节点中,存储完成后分布式多媒体数据存储模块中的中心服务器会将刚刚存储的这条记录加入到自己的存储节点信息表中,当以后多媒体服务器模块请求这个文件的时候就能及时返回相关信息。
如图4所示,系统数据分析模块主要由两个部分组成,离线计算模块与实时计算模块组成;其中,离线计算模块从系统信息存储模块读取其中存储的各种信息,按照预先制定好的策略和算法,对系统记录的信息进行分析,建立用户行为模型与多媒体文件间的关联模型,对不断自行通过机器学习对这些已经建立好的模型进行更新;实时计算模块得到客户端通信模块反馈的单个用户的行为,进行实时在线计算,并结合离线计算模块建立好的各种模型,从而对用户进行实时推荐。
如图5所示,多媒体数据转码编辑模块中的中心服务模块负责处理接收系统管理员提交的要进行转码编辑的视频的文件信息以及对应的视频,文件信息包括视频名称,视频长度,是否分段,要转换的分辨率以及格式等,中心服务模块在接收到这些信息后提取一部分提交到系统信息存储模块;多媒体数据转码编辑模块中的任务队列模块负责接收中心服务模块传送来的具体视频以及要进行转码编辑的参数,并将视频放入调度队列;多媒体数据转码编辑模块中的任务调度模块在感知到任务队列中有还没有处理的视频后,读取该视频的参数,开始进行视频编辑转码;多媒体数据转码编辑模块中的视频切割模块将队列中的视频先按照预定的参数进行切割,以便后续的分布式转码模块进行视频编辑转码;多媒体数据转码编辑模块中的分布式转码模块在接收到视频切割模块处理完的视频段后进行分布式转码编辑,在完成视频转码编辑后,会将这些分段再重新合并,通过视频传输模块传送到分布式多媒体数据存储模块中。
上面结合附图对本发明的实施方式作了详细说明,但是本发明并不限于上述实施方式,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下做出各种变化。
Claims (10)
1.一种基于云计算环境的多媒体点播系统,其特征在于:包括客户端通信模块、系统信息存储模块、多媒体服务器模块、分布式多媒体数据存储模块和多媒体数据编码编辑模块;其中,系统信息存储模块中保存有多媒体点播系统中所有多媒体文件信息,多媒体文件信息包括多媒体文件的存储地址;首先,客户端通信模块接收用户经客户端发出的多媒体文件点播请求,多媒体文件点播请求包括被点播多媒体文件请求和多媒体文件播放要求;客户端通信模块根据接收到的被点播多媒体文件请求,针对系统信息存储模块进行查询获得被点播多媒体文件的存储地址;然后,客户端通信模块将多媒体文件播放要求和被点播多媒体文件的存储地址发送至多媒体服务器模块,多媒体服务器模块先根据被点播多媒体文件的存储地址,从分布式多媒体数据存储模块中提取获得被点播的多媒体静态文件,接着,多媒体服务器模块根据多媒体文件播放要求,控制多媒体数据编码编辑模块针对获得的被点播的多媒体静态文件进行转码和设定,获得具有指定播放要求的流媒体文件,再通过客户端通信模块反馈给客户端。
2.根据权利要求1所述一种基于云计算环境的多媒体点播系统,其特征在于:所述系统信息存储模块还保存有与客户端相对应的客户端信息,客户端信息包括客户端搜索记录、客户端多媒体点播记录和客户端播放进度记录;
系统信息存储模块中的所述多媒体文件信息还包括多媒体文件基本信息,其中,多媒体文件基本信息包括多媒体文件名、多媒体文件时长、多媒体文件简介和多媒体文件点播次数;
所述客户端通信模块包括多媒体文件搜索查询模块和客户端信息传输模块;
多媒体文件查询搜索模块用于根据客户端的多媒体文件点播请求,针对系统信息存储模块进行查询获得被点播多媒体文件的存储地址;或者接收并根据客户端的多媒体文件要求,针对系统信息存储模块进行搜索获得符合该多媒体文件要求的多媒体文件基本信息,并反馈给客户端;
客户端信息传输模块用于将客户端信息传输保存至系统信息存储模块中。
3.根据权利要求1所述一种基于云计算环境的多媒体点播系统,其特征在于:所述多媒体文件播放要求包括文件播放宽高比、文件播放分辨率和文件播放清晰度。
4.根据权利要求1所述一种基于云计算环境的多媒体点播系统,其特征在于:所述多媒体数据编码编辑模块针对所述获得的被点播的多媒体静态文件,先进行分段获得各个多媒体文件段,然后分别针对各个多媒体文件段进行转码,再将转码后的各个结果进行合并获得流媒体文件,最后,多媒体数据编码编辑模块根据所述多媒体文件播放要求,针对获得的流媒体文件进行设定,获得具有指定播放要求的流媒体文件。
5.根据权利要求1所述一种基于云计算环境的多媒体点播系统,其特征在于:所述客户端通信模块还包括客户端验证设置模块,客户端验证设置模块用于客户端注册、客户端登录、客户端密码修改、客户端密码找回、客户端头像更新、客户端个人资料更新、客户端消息管理、客户端社交网络绑定;所述系统信息存储模块中的客户端信息还包括客户端登陆记录。
6.根据权利要求1所述一种基于云计算环境的多媒体点播系统,其特征在于:所述客户端通信模块还包括客户端评论模块,供用户针对多媒体文件进行评论、评分,所述系统信息存储模块中的客户端信息还包括客户端针对多媒体文件的评论和评分。
7.根据权利要求1所述一种基于云计算环境的多媒体点播系统,其特征在于:还包括系统数据分析模块,所述客户端通信模块还包括推送模块,系统数据分析模块用于根据系统信息存储模块分析获得分别对应各个用户的兴趣多媒体文件,推送模块用于将分别对应各个用户的兴趣多媒体文件推送至对应客户端上。
8.根据权利要求7所述一种基于云计算环境的多媒体点播系统,其特征在于:所述多媒体服务器模块还包括缓存存储模块,缓存存储模块用于存储经所述系统数据分析模块获得的分别对应各个用户的兴趣多媒体文件,并更新系统信息存储模块中对应多媒体文件的存储地址。
9.根据权利要求1所述一种基于云计算环境的多媒体点播系统,其特征在于:还包括多媒体服务监控模块,用于监控多媒体系统中各个模块的运行状态。
10.根据权利要求9所述一种基于云计算环境的多媒体点播系统,其特征在于:所述多媒体服务监控模块包括主机性能监控子模块、网络设备性能监控子模块、数据库性能监控子模块、业务类型监控子模块、报警子模块和报表图表绘制子模块,其中:
主机性能监控子模块用于监控多媒体系统中所有物理设备的运行状态,包括CPU、内存、当前磁盘使用情况、设备温度,以及用于监控所有物理设备和虚拟设备的网络状况,包括网速、端口状况;
网络设备性能监控子模块用于监控多媒体系统中所有网络设备的运行状态;
数据库性能监控子模块用于监控系统信息存储模块和分布式多媒体数据存储模块中存储的数据;
业务类型监控子模块用于监控多媒体系统中各个应用业务的运行状态;
报警子模块用于针对多媒体系统中的各类故障实现报警功能,通知相关负责人;
报表图表绘制子模块用于分别针对主机性能监控子模块、网络设备性能监控子模块、数据库性能监控子模块、业务类型监控子模块的监控结果,进行图表绘制。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510041171.3A CN104618740A (zh) | 2015-01-28 | 2015-01-28 | 一种基于云计算环境的多媒体点播系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510041171.3A CN104618740A (zh) | 2015-01-28 | 2015-01-28 | 一种基于云计算环境的多媒体点播系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104618740A true CN104618740A (zh) | 2015-05-13 |
Family
ID=53152986
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510041171.3A Pending CN104618740A (zh) | 2015-01-28 | 2015-01-28 | 一种基于云计算环境的多媒体点播系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104618740A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105119892A (zh) * | 2015-07-15 | 2015-12-02 | 张阳 | Ktv点歌系统数据传输方法及装置 |
CN105554530A (zh) * | 2015-12-14 | 2016-05-04 | 深圳市九洲电器有限公司 | 机顶盒广告管理方法及系统 |
CN106210774A (zh) * | 2016-08-30 | 2016-12-07 | 成都奥科睿科技有限公司 | 分布式可扩展的视音频点播系统及其使用方法 |
CN106603958A (zh) * | 2015-10-14 | 2017-04-26 | 山东鲁能智能技术有限公司 | 分布式存储的变电站巡检机器人远程集中监控系统及方法 |
CN106998484A (zh) * | 2017-05-25 | 2017-08-01 | 游密科技(深圳)有限公司 | 一种实现服务端数据缓冲式延迟转发装置及方法 |
CN108270633A (zh) * | 2016-12-30 | 2018-07-10 | 亿度慧达教育科技(北京)有限公司 | 远程教学端的自检测方法、装置及在线直播课程系统 |
CN111836105A (zh) * | 2019-04-16 | 2020-10-27 | 尼尔森网联媒介数据服务有限公司 | 电视用户身份识别方法和电视终端 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050025064A1 (en) * | 2003-07-28 | 2005-02-03 | International Business Machines Corporation | Adaptive QoS system and method |
CN102404610A (zh) * | 2011-12-30 | 2012-04-04 | 百视通网络电视技术发展有限责任公司 | 视频点播服务的实现方法及系统 |
CN102695078A (zh) * | 2012-05-31 | 2012-09-26 | 四川长虹电器股份有限公司 | 电视节目互动系统 |
CN103002274A (zh) * | 2011-09-16 | 2013-03-27 | 腾讯科技(深圳)有限公司 | 一种基于离线下载的移动多媒体实时转码播放系统及方法 |
CN103379362A (zh) * | 2012-04-24 | 2013-10-30 | 腾讯科技(深圳)有限公司 | 视频点播方法和系统 |
CN103780925A (zh) * | 2012-10-26 | 2014-05-07 | 深圳市快播科技有限公司 | 一种基于移动平台的在线视频点播方法和系统 |
CN103813213A (zh) * | 2014-02-25 | 2014-05-21 | 南京工业大学 | 基于移动云计算的实时视频分享平台和方法 |
-
2015
- 2015-01-28 CN CN201510041171.3A patent/CN104618740A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050025064A1 (en) * | 2003-07-28 | 2005-02-03 | International Business Machines Corporation | Adaptive QoS system and method |
CN103002274A (zh) * | 2011-09-16 | 2013-03-27 | 腾讯科技(深圳)有限公司 | 一种基于离线下载的移动多媒体实时转码播放系统及方法 |
CN102404610A (zh) * | 2011-12-30 | 2012-04-04 | 百视通网络电视技术发展有限责任公司 | 视频点播服务的实现方法及系统 |
CN103379362A (zh) * | 2012-04-24 | 2013-10-30 | 腾讯科技(深圳)有限公司 | 视频点播方法和系统 |
CN102695078A (zh) * | 2012-05-31 | 2012-09-26 | 四川长虹电器股份有限公司 | 电视节目互动系统 |
CN103780925A (zh) * | 2012-10-26 | 2014-05-07 | 深圳市快播科技有限公司 | 一种基于移动平台的在线视频点播方法和系统 |
CN103813213A (zh) * | 2014-02-25 | 2014-05-21 | 南京工业大学 | 基于移动云计算的实时视频分享平台和方法 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105119892A (zh) * | 2015-07-15 | 2015-12-02 | 张阳 | Ktv点歌系统数据传输方法及装置 |
CN106603958A (zh) * | 2015-10-14 | 2017-04-26 | 山东鲁能智能技术有限公司 | 分布式存储的变电站巡检机器人远程集中监控系统及方法 |
CN106603958B (zh) * | 2015-10-14 | 2019-12-10 | 国网智能科技股份有限公司 | 分布式存储的变电站巡检机器人远程集中监控系统及方法 |
CN105554530A (zh) * | 2015-12-14 | 2016-05-04 | 深圳市九洲电器有限公司 | 机顶盒广告管理方法及系统 |
CN106210774A (zh) * | 2016-08-30 | 2016-12-07 | 成都奥科睿科技有限公司 | 分布式可扩展的视音频点播系统及其使用方法 |
CN108270633A (zh) * | 2016-12-30 | 2018-07-10 | 亿度慧达教育科技(北京)有限公司 | 远程教学端的自检测方法、装置及在线直播课程系统 |
CN108270633B (zh) * | 2016-12-30 | 2020-10-09 | 亿度慧达教育科技(北京)有限公司 | 远程教学端的自检测方法、装置及在线直播课程系统 |
CN106998484A (zh) * | 2017-05-25 | 2017-08-01 | 游密科技(深圳)有限公司 | 一种实现服务端数据缓冲式延迟转发装置及方法 |
CN106998484B (zh) * | 2017-05-25 | 2023-05-05 | 游密科技(深圳)有限公司 | 一种实现服务端数据缓冲式延迟转发装置及方法 |
CN111836105A (zh) * | 2019-04-16 | 2020-10-27 | 尼尔森网联媒介数据服务有限公司 | 电视用户身份识别方法和电视终端 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104618740A (zh) | 一种基于云计算环境的多媒体点播系统 | |
JP6030144B2 (ja) | 分散データストリーム処理の方法及びシステム | |
CN101068155B (zh) | 一种对等连接流媒体直播系统及其采集服务器 | |
CN105828105A (zh) | 一种基于分布式环境的视频转码系统及视频转码方法 | |
CN103440244A (zh) | 一种大数据存储优化方法 | |
CN103761309A (zh) | 一种运营数据处理方法及系统 | |
CN102932608A (zh) | 基于云编辑技术的数字视频加工、编目系统及方法 | |
BR112014000597B1 (pt) | Método e sistema para download de arquivo multimídia | |
CN110213203B (zh) | 网络调度方法、装置及计算机存储介质 | |
CN101626389B (zh) | 一种网络节点的管理方法 | |
CN102143237A (zh) | 一种基于网格的互联网内容分发方法和系统 | |
CN105979273A (zh) | 基于大数据及云计算的智能商用电视的云监控与云运维 | |
CN102164317A (zh) | 一种面向ip机顶盒的多服务器分段下载系统 | |
CN103843297A (zh) | 用于为实时流服务提供和选择候选节点的方法、装置和系统 | |
CN103955510A (zh) | 基于etl云平台上传的海量电力营销数据整合方法 | |
CN103260050A (zh) | 基于Google App Engine云平台的视频点播系统 | |
CN104539982A (zh) | 一种视频点对点资源共享调度方法、系统及节点终端 | |
CN103581332A (zh) | HDFS架构及HDFS架构中NameNode节点的压力分解方法 | |
CN102625140A (zh) | 流媒体服务器以帧为粒度实时下载播放的方法 | |
CN102255942A (zh) | 一种多媒体量子流及云处理技术与实现方法 | |
CN103885887A (zh) | 用户数据存储方法、读取方法及系统 | |
CN102231761A (zh) | 一种p2p数据交互方法 | |
CN101551781B (zh) | 一种p2p视频点播系统中的硬盘缓存替换方法 | |
CN102082830A (zh) | 面向不稳定网络的基于品质感知的分布式文件存储方法 | |
CN114222086B (zh) | 音视频码流的调度方法、系统、介质及电子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150513 |
|
RJ01 | Rejection of invention patent application after publication |