CN102055799B - 内容刷新系统 - Google Patents

内容刷新系统 Download PDF

Info

Publication number
CN102055799B
CN102055799B CN201010581471.8A CN201010581471A CN102055799B CN 102055799 B CN102055799 B CN 102055799B CN 201010581471 A CN201010581471 A CN 201010581471A CN 102055799 B CN102055799 B CN 102055799B
Authority
CN
China
Prior art keywords
task
refreshing
module
server
behalf
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201010581471.8A
Other languages
English (en)
Other versions
CN102055799A (zh
Inventor
杨凡
杨利军
刘宾
周福
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Century Broadband Internet Data Center Co., Ltd.
Original Assignee
BEIJING CENTURY BROADBAND INTERNET DATA CENTER Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING CENTURY BROADBAND INTERNET DATA CENTER Co Ltd filed Critical BEIJING CENTURY BROADBAND INTERNET DATA CENTER Co Ltd
Priority to CN201010581471.8A priority Critical patent/CN102055799B/zh
Publication of CN102055799A publication Critical patent/CN102055799A/zh
Application granted granted Critical
Publication of CN102055799B publication Critical patent/CN102055799B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)

Abstract

本申请公开了一种内容刷新系统，包括：中心任务服务器和若干代理刷新服务器；所述中心任务服务器用于接收用户提交的任务，并将所述任务依据系统配置进行处理后以多线程方式发送至所述代理刷新服务器；所述代理刷新服务器用于对所述中心任务服务器发送的任务进行刷新操作，并将操作结果反馈至所述中心任务服务器。本申请实施例提供的内容刷新系统，采用代理刷新服务器作为任务刷新的主体，解决了本地服务器由于负载压力过大等诸多情况不能及时对cache内容进行刷新的问题，有效的实现了对cache内容的实时刷新。

Description

内容刷新系统
技术领域
本申请涉及网络应用领域，特别是涉及一种内容刷新系统。
背景技术
内容刷新系统是CDN(content delivery network，内容分发网络)服务提供商的业务与运营支撑系统必备的支持系统之一；CDN服务中大部分加速服务都是通过cache(高速缓冲存储器)的形式形成，所以内容刷新系统对cache内容的更新十分重要。
传统的内容刷新，一般采用以下三种方式：
一、使用登录服务器运行服务器本地命令的方式进行内容刷新；此种方式当服务器众多，并且刷新内容较多，或者需要刷新内容目录的情况下，会产生中心任务服务器压力增大的情况，因为通过SSH(secure shell，建立在应用层和传输层基础上的安全协议)远程登录服务器，其消耗的时间要比一个简单的TCP(传输控制协议)请求要多的多，并且所消耗的资源也更多。
二、在刷新设备上设置定时服务，定时清理机器上的所有cache，这样做最大的问题是无法及时清理cache，并且有可能会清理到不需要清理的cache。
三、设置cache超时时间，等待cache自动过期来清理cache，这样做同第二种方式相似的问题是，不能及时清理cache，并且同样可能会清理到不需要清理的cache。
发明人经过对以上三种刷新方式的研究发现，传统的内容刷新方法不能及时对需要刷新的内容进行刷新，影响了刷新效率。
发明内容
为解决上述技术问题，本申请实施例提供一种内容刷新系统，采用代理刷新服务器作为内容刷新的主体，可以及时对需要刷新的内容执行刷新操作，提高了刷新效率。
技术方案如下：
一种内容刷新系统，包括：中心任务服务器和若干代理刷新服务器；
所述中心任务服务器用于接收用户提交的任务，并将所述任务依据系统配置进行处理后以多线程方式发送至所述代理刷新服务器；
所述代理刷新服务器用于对所述中心任务服务器发送的任务进行刷新操作，并将操作结果反馈至所述中心任务服务器。
上述的系统，优选的，所述中心任务服务器包括：任务接收模块、任务处理模块、任务发送模块和任务执行状态处理模块；
其中：所述任务接收模块用于接收需要进行刷新操作的总任务；
所述任务处理模块用于读取所述任务接收模块接收的总任务，并根据系统配置生成所述总任务的子任务；
所述任务发送模块用于启动多线程将所述任务处理模块生成的子任务发送至代理刷新服务器；
所述任务执行状态处理模块用于接收所述代理刷新服务器发送的对所述子任务进行刷新操作的执行状态信息，并根据所述状态信息对所述任务接收模块接收的总任务进行更新。
上述的系统，优选的，所述任务接收模块接收的总任务包括：外部用户提交的任务和系统内部提交的任务。
上述的系统，优选的，所述任务接收模块包括验证单元；
所述验证单元用于在外部用于提交任务时对外部用户进行验证，包括对用户的用户名、密码及有效性的验证。
上述的系统，优选的，所述任务处理模块根据系统配置中的预设策略生成所述总任务的子任务。
上述的系统，优选的，所述任务发送模块以TCP协议将所述子任务发送至代理刷新服务器，每次发送的任务数量不超过预设阀值。
上述的系统，优选的，所述任务执行状态处理模块包括判断单元；
所述判断单元用于对所述任务发送模块对所述代理刷新服务器发送子任务的过程中子任务是否分发成功进行判断。
上述的系统，优选的，所述代理刷新服务器包括：任务刷新模块和任务执行状态反馈模块；
其中：所述任务刷新模块用于对所述中心任务服务器发送的任务进行刷新操作；
所述任务执行状态反馈模块用于将所述任务刷新模块执行刷新操作的执行状态信息反馈至所述中心任务服务器。
由以上本申请实施例提供的技术方案可见，本发明提供的内容刷新系统，设置有中心任务服务器和若干代理刷新服务器，中心任务服务器接收需要进行刷新操作的任务，对所述任务进行处理后发送至代理刷新服务器，代理刷新服务器执行对任务的刷新操作；本申请实施例提供的内容刷新系统，采用代理刷新服务器作为任务刷新的主体，解决了本地服务器由于负载压力过大等诸多情况不能及时对cache内容进行刷新的问题，有效的实现了对cache内容的实时刷新。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的内容刷新系统的结构示意图；
图2为本申请实施例提供的内容刷新系统的工作原理图；
图3为本申请实施例提供的内容刷新系统中中心任务服务器的详细组成结构示意图；
图4为本申请实施例提供的内容刷新系统中中心任务服务器的另一详细组成结构示意图；
图5为本申请实施例提供的包含了验证单元的中心任务服务器的一详细组成结构示意图；
图6为本申请实施例提供的包含了判断单元的中心任务服务器的一详细组成结构示意图；
图7为本申请实施例提供的内容刷新系统中代理刷新服务器的详细组成结构示意图。
具体实施方式
本申请实施例提供了一种内容刷新系统，针对传统的内容刷新过程，本地服务器不能及时对需要进行刷新的内容及时进行刷新的现状，采用代理刷新服务器执行刷新操作的过程，有效解决传统刷新过程中刷新不及时的问题。
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
本申请实施例提供的内容刷新系统的结构示意图如图1所示，包括：中心任务服务器101和若干代理刷新服务器102；
中心任务服务器101用于接收用户提交的任务，并将用户提交的任务依据系统配置进行处理后以多线程方式发送至代理刷新服务器102；
代理刷新服务器102对中心任务服务器101发送的任务进行刷新操作；并将操作结果反馈至中心任务服务器。
中心任务服务器101接收用户需要进行刷新的内容，将需要刷新的内容转发至代理刷新服务器102，代理刷新服务器102对需要执行刷新操作的内容进行刷新，由于代理刷新服务器102是代理设备，其自身设置有cache设备，能够调用自身的cache设备进行刷新操作，保证了刷新的及时性。
针对图1所示的内容刷新系统，图2展示了其工作的基本原理，客户程序通过HTTP接口与中心任务服务器连接，将客户端需要刷新的cache内容，例如URL网络地址或内容目录发送至中心任务服务器，中心任务服务器将将上述需要刷新的任务进行处理，为上述任务分配代理刷新服务器，将上述任务在代理刷新服务器中进行刷新操作，代理刷新服务器执行刷新操作结束后，将操作结果返回至中心任务服务器，中心任务服务器将经过刷新操作的内容发送至客户端，使得客户端的cache设备中的内容及时得到更新。
本申请实施例提供的内容刷新系统，中心任务服务器是刷新操作的中心控制部分，中心任务服务器主要负责管理内容刷新系统的任务，其中包括接收任务、处理任务、发送任务和接收任务执行状态。为了更清楚对中心任务服务器进行介绍，本申请实施例提供了内容刷新系统中中心任务服务器的详细组成结构示意图如图3所示，包括：任务接收模块201、任务处理模块202、任务发送模块203和任务执行状态处理模块204；
其中：
任务接收模块201用于接收需要进行刷新操作的总任务；
总任务是指一个需要刷新的URL的具体描述信息，以及需要刷新的URL的客户信息；
任务接收模块201通过系统提供的标准http协议接口接收总任务；
任务处理模块202用于读取任务接收模块201接收的总任务，并根据系统配置生成所述总任务的子任务；
子任务是指一个URL所需要刷新到的代理刷新服务器的信息；
子任务生成过程中需要应用预设策略进行生成，所述预设策略包括：
判断当前客户状态是否可用，如不可用则不生成子任务；
判断客户的优先级状态，优先级高的客户先生成子任务；
判断所有需要刷新的设备状态是否正常，如果设备不可用，则不生成子任务。
任务发送模块203用于启动多线程将任务处理模块202生成的子任务发送至代理刷新服务器；
任务发送模块203负责将已经生成成功的子任务以TCP协议的形式发送到每台代理刷新服务器上，发送子任务的方式以多线程的方式进行发送，每个线程负责多台代理刷新服务器，每个代理刷新服务器所需要刷新的内容一次发送完毕，每次发送的任务量不超过预设阀值，该阀值用户可以自己设定，如每次100个，发送任务的过程会不停重试，直至任务发送成功。
任务执行状态处理模块204用于接收代理刷新服务器发送的对子任务进行刷新操作的执行状态信息，并根据所述状态信息对任务接收模块201接收的总任务进行更新；
任务执行状态处理模块204主要负责接收代理刷新服务器的任务执行状态反馈。
由以上介绍可知，内容刷新系统中的任务分两种，总任务和子任务；所述两种任务分别有各自的状态，当所有的子任务处理成功后，则总任务成功，反之依然。
针对以上的中心任务服务器的组成示意图，本申请实施例还提供了另一关于中心任务服务器的组成结构示意图，如图4所示，整个系统的任务以及配置可以存储在单独的数据库内，任务接收模块201将接收到的总任务存储到数据库中，任务处理模块202从所述数据库中读取待生成子任务的总任务。
系统存储在数据库中的任务是总任务，总任务处于等待状态，任务处理模块读取总任务对其进行子任务处理操作。
任务处理模块202接收的总任务包括外部用户提交的任务和系统内部提交的任务；针对外部用户提交任务的过程，中心处理服务器中，任务处理模块202中设置了验证单元205；当客户提交任务时，验证模块205会对客户的身份进行验证，包括用户名、密码和有效性等，系统内部提交的总任务不进行验证，系统内部提交的任务只要符合系统规定的格式，即可进行子任务处理操作。
在图3、图4或图5的基础上，任务执行状态处理模块204中设置有判断单元206，如图6所示；
任务执行状态处理模块204在收到代理刷新服务器返回的任务处理状态后，判断单元206会判断诸多情况，最终通过更新任务接收模块201或数据库中的总任务来实现最终需要的刷新效果。其中判断的内容包括：
判断是否所有的需要刷新的代理刷新服务器都分发任务成功；
判断当前代理刷新服务器任务分发成功后，是否可以继续往其下面的设备进行任务分发。
代理刷新服务器主要负责URL和目录刷新操作，其内部的组成结构示意图如图7所示，包括任务执行状态反馈模块302和任务刷新模块301；
其中：
任务刷新模块301用于对中心任务服务器发送的任务进行刷新操作；
任务执行状态反馈模块302用于将任务刷新模块301执行刷新操作的执行状态信息反馈至中心任务服务器。
代理刷新服务器接收中心任务服务器发送的任务，并将所述任务序列化到本地进行保存；
任务刷新模块301通过http请求方式请求自身的cache设备，进行刷新操作；
任务执行状态反馈模块302使用TCP协议，将操作成功或失败的任务状态反馈至中心任务服务器，完成刷新过程。
本申请实施例提供的内容刷新系统，采用多线程分发子任务的形式对需要进行刷新操作的内容进行刷新，实现了多用户多频道同时进行刷新的过程；
通过采用代理刷新服务器代替本地服务器进行刷新操作的方式避免了内容刷新不及时的问题；
同时本申请实施例提供的内容刷新系统对刷新内容实时进行判断处理，保证了内容刷新的高效性和准确性。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。以上所述仅是本申请的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (7)

1.一种内容刷新系统，其特征在于，包括：中心任务服务器和若干代理刷新服务器；
所述中心任务服务器用于接收用户提交的需要进行刷新的任务，并将所述任务依据系统配置进行处理后以多线程方式发送至所述代理刷新服务器；
所述代理刷新服务器用于对所述中心任务服务器发送的任务进行刷新操作，并将操作结果反馈至所述中心任务服务器；
其中，所述中心任务服务器包括：任务接收模块、任务处理模块、任务发送模块和任务执行状态处理模块；
其中：所述任务接收模块用于接收需要进行刷新操作的总任务；
所述任务处理模块用于读取所述任务接收模块接收的总任务，并根据系统配置生成所述总任务的子任务；
所述任务发送模块用于启动多线程将所述任务处理模块生成的子任务发送至代理刷新服务器；
所述任务执行状态处理模块用于接收所述代理刷新服务器发送的对所述子任务进行刷新操作的执行状态信息，并根据所述状态信息对所述任务接收模块接收的总任务进行更新。
2.根据权利要求1所述的系统，其特征在于，所述任务接收模块接收的总任务包括：外部用户提交的任务和系统内部提交的任务。
3.根据权利要求2所述的系统，其特征在于，所述任务接收模块包括验证单元；
所述验证单元用于在外部用于提交任务时对外部用户进行验证，包括对用户的用户名、密码及有效性的验证。
4.根据权利要求1所述的系统，其特征在于，所述任务处理模块根据系统配置中的预设策略生成所述总任务的子任务。
5.根据权利要求1所述的系统，其特征在于，所述任务发送模块以TCP协议将所述子任务发送至代理刷新服务器，每次发送的任务数量不超过预设阀值。
6.根据权利要求1所述的系统，其特征在于，所述任务执行状态处理模块包括判断单元；
所述判断单元用于对所述任务发送模块对所述代理刷新服务器发送子任务的过程中子任务是否分发成功进行判断。
7.根据权利要求1所述的系统，其特征在于，所述代理刷新服务器包括：任务刷新模块和任务执行状态反馈模块；
其中：所述任务刷新模块用于对所述中心任务服务器发送的任务进行刷新操作；
所述任务执行状态反馈模块用于将所述任务刷新模块执行刷新操作的执行状态信息反馈至所述中心任务服务器。
CN201010581471.8A 2010-12-09 2010-12-09 内容刷新系统 Active CN102055799B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201010581471.8A CN102055799B (zh) 2010-12-09 2010-12-09 内容刷新系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201010581471.8A CN102055799B (zh) 2010-12-09 2010-12-09 内容刷新系统

Publications (2)

Publication Number Publication Date
CN102055799A CN102055799A (zh) 2011-05-11
CN102055799B true CN102055799B (zh) 2014-02-12

Family

ID=43959718

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010581471.8A Active CN102055799B (zh) 2010-12-09 2010-12-09 内容刷新系统

Country Status (1)

Country Link
CN (1) CN102055799B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103997517B (zh) * 2014-05-06 2017-10-24 广州金山网络科技有限公司 一种cdn节点文件同步方法和装置
CN105573824B (zh) * 2014-10-10 2020-04-03 腾讯科技（深圳）有限公司 分布式计算系统的监控方法及系统
CN105933131B (zh) * 2016-06-30 2019-03-15 北京奇艺世纪科技有限公司 多媒体任务处理方法及装置
CN107066292A (zh) * 2017-03-06 2017-08-18 北京百度网讯科技有限公司 服务器环境部署方法和装置
CN111131498B (zh) * 2018-03-23 2023-04-21 贵州白山云科技股份有限公司 Url信息更新方法、缓存服务器、设备及存储介质
CN109246224A (zh) * 2018-09-25 2019-01-18 麒麟合盛网络技术股份有限公司 Cdn系统的容器化部署方法及装置
CN109446449B (zh) * 2018-10-09 2022-05-10 南京尚网网络科技有限公司 一种预先刷新资讯页面内容的方法及设备
CN109274762B (zh) * 2018-10-22 2021-10-29 杭州领智云画科技有限公司 Cdn刷新方法和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1484155A (zh) * 2002-08-13 2004-03-24 �Ҵ���˾ 刷新网络代理高速缓存服务器对象的系统和方法
CN1758604A (zh) * 2004-10-10 2006-04-12 中兴通讯股份有限公司 分布式系统中保持多个数据副本一致性的方法
CN101610399A (zh) * 2009-07-22 2009-12-23 杭州华三通信技术有限公司 计划类业务调度系统和实现计划类业务调度的方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030115346A1 (en) * 2001-12-13 2003-06-19 Mchenry Stephen T. Multi-proxy network edge cache system and methods
CN101741643B (zh) * 2009-12-24 2011-09-28 北京云快线软件服务有限公司 内容分发网络节点检测方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1484155A (zh) * 2002-08-13 2004-03-24 �Ҵ���˾ 刷新网络代理高速缓存服务器对象的系统和方法
CN1758604A (zh) * 2004-10-10 2006-04-12 中兴通讯股份有限公司 分布式系统中保持多个数据副本一致性的方法
CN101610399A (zh) * 2009-07-22 2009-12-23 杭州华三通信技术有限公司 计划类业务调度系统和实现计划类业务调度的方法

Also Published As

Publication number Publication date
CN102055799A (zh) 2011-05-11

Similar Documents

Publication Publication Date Title
CN102055799B (zh) 内容刷新系统
CN108833521B (zh) 消息推送方法、装置、系统、计算机设备和存储介质
CN105159781B (zh) 调节智能终端应用网速的方法、装置和智能终端
Al-Ali et al. Analysis and provision of QoS for distributed grid applications
CN105373420B (zh) 数据传输方法及装置
CN109254845A (zh) 一种应用于分布式通信计算服务端的线性扩展实现方法
US7401114B1 (en) Method and apparatus for making a computational service highly available
EP3028437B1 (en) Messaging api over http protocol to establish context for data exchange
CN105335231B (zh) 一种服务端线程的动态分配方法和设备
CN108933829A (zh) 一种负载均衡方法及装置
CN107579924B (zh) 一种流量调拨方法和装置
US20110283202A1 (en) User interface proxy method and system
CN106131138A (zh) 一种基于非阻塞队列的展示数据实时推送系统和方法
US11902429B2 (en) Distributed secure multi party computation
US7984158B2 (en) Web service for coordinating actions of clients
CN109088918B (zh) 一种交互方法、客户端设备及服务端设备
CN109831474A (zh) http长连接的保活系统、方法、服务器及可读存储介质
CN101980206A (zh) 文件任务管理工具
JP3964719B2 (ja) プレゼンス情報バックアップサービス提供方法及びそのシステム並びに情報要求プログラム及び該プログラムを記録した媒体
US8683045B2 (en) Intermediate network device for host-client communication
CN113691427B (zh) 配网方法、第一设备、第二设备、配网系统与处理器
CN105188087A (zh) 一种基于短信网关的业务通信方法和系统
CN103248668B (zh) 虚拟桌面服务参数的协商方法、装置及系统
CN109995838A (zh) 虚拟内容调度方法、装置、设备及计算机可读存储介质
CN110166506B (zh) 超文本传输协议Http的连接方法及节点设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Free format text: FORMER OWNER: BEIJING BANYANO DATA CENTER SOLUTIONS LTD.

Effective date: 20120924

Owner name: BEIJING CENTURY BROADBAND INTERNET DATA CENTER CO.

Free format text: FORMER OWNER: BEIJING CLOUDEX SOFTWARE SERVICES CO., LTD.

Effective date: 20120924

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20120924

Address after: 100015, No. 5, building 1, 3 East Road, Jiuxianqiao Road, Beijing, Chaoyang District

Applicant after: Beijing Century Broadband Internet Data Center Co., Ltd.

Address before: 100015 No. 5, building 5, building 1, Jiuxianqiao East Road, Chaoyang District, Beijing

Applicant before: Beijing CloudEx Software Service Co., Ltd.

Applicant before: Beijing BANYANO Data Center Solutions Ltd.

C14 Grant of patent or utility model
GR01 Patent grant