CN106101225A - 一种站点资源分发方法及系统 - Google Patents

一种站点资源分发方法及系统 Download PDF

Info

Publication number
CN106101225A
CN106101225A CN201610412061.8A CN201610412061A CN106101225A CN 106101225 A CN106101225 A CN 106101225A CN 201610412061 A CN201610412061 A CN 201610412061A CN 106101225 A CN106101225 A CN 106101225A
Authority
CN
China
Prior art keywords
resource
serving node
services device
server
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610412061.8A
Other languages
English (en)
Inventor
孙华江
殷海峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Hi Tech Network Technology Co Ltd
Original Assignee
Suzhou Hi Tech Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Hi Tech Network Technology Co Ltd filed Critical Suzhou Hi Tech Network Technology Co Ltd
Priority to CN201610412061.8A priority Critical patent/CN106101225A/zh
Publication of CN106101225A publication Critical patent/CN106101225A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H04L67/5682—Policies or rules for updating, deleting or replacing the stored data

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及一种站点资源分发方法，先定制化站点资源：用户在客户端通过拖拉的方式向多个源站点发出获取多样性的资源以生成站点资源的需求，由服务节点服务器接收站点资源分发指令；再进行资源分发：核心服务器根据站点资源分发指令获取所需资源，将分发数据放入缓存服务器中，由服务节点服务器来同步数据，并将资源下发到服务节点服务器上。本发明能够为用户解决因区域、语种、多服务器和网络结构的不同带来的站点资源的多样性需求，可以根据用户属性的不同，定制化不一样的资源，提高了用户体验；资源分发的服务器节点结构，适用于内网分发，确保了用户数据的安全性。

Description

一种站点资源分发方法及系统
技术领域
本发明属于互联网技术领域，尤其涉及一种站点资源分发方法及系统。
背景技术
内容分发网络(Content Delivery Network，CDN)技术是一种将内容从中心服务器分发到靠近用户的边缘服务器，从而实现内容的分布式就近访问的方法。CDN技术有效地提高了内容访问的服务质量，并支持大规模的并发访问能力，能将源站点内容分发至全国所有的节点，缩短用户请求资源的延迟，给用户带来良好的体验。
随着以内容为中心的服务，例如Web服务，流媒体服务，文件下载服务，IPTV服务等越来越成为互联网应用的主流，基于互联网原有的IP网络，构建相对独立的、业务无关的内容承载网络成为互联网发展的趋势。
目前，现有的CND在进行内容分发时，CDN节点在接收到所述分发指令后，统一向CDN数据源服务器下载需要分发的数据。而不同用户的属性不同，所需要的站点资源存在多样性。然而，现有的CND网络只能分发相同的资源，限制了用户的体验；且现有CDN运行商大多都是费用高，并无法运用于企业内网网络结构。
有鉴于上述的缺陷，本设计人，积极加以研究创新，以期创设一种能够分发不一样资源、适用于企业内网的站点资源分发方法及系统，使其更具有产业上的利用价值。
发明内容
为解决上述技术问题，本发明的目的是提供一种能够根据不同的站点需求，定制化资源，并将不一样的资源分发到对应的服务节点上站点资源分发方法及系统。
本发明的站点资源分发方法，包括步骤：
(1)定制化站点资源
用户在客户端通过拖拉的方式向多个源站点发出获取多样性的资源以生成站点资源的需求，由服务节点服务器接收站点资源分发指令；
(2)资源分发
核心服务器根据站点资源分发指令获取所需资源，将分发数据放入缓存服务器中，由服务节点服务器来同步数据，并将资源下发到服务节点服务器上。
进一步的，所述步骤(2)中核心服务器将分发数据形成json的数据格式，通过tcp的方式将分发数据发送到缓存服务器，并定义过期时间；缓存服务器接收到分发数据后，将分发数据保存在内存中，并定时检查分发数据是否过期，过期的分发数据从内存中删除。
进一步的，核心服务器将获取的包括html、css、js、images格式的资源合成zip文件包，将zip文件包保存在接口服务器中，等待服务节点服务器来同步。
进一步的，服务节点服务器每隔5分钟请求一次接口服务器，接口服务器从缓存服务器中查询是否存在分发的数据，如果存在，则返回分发的数据，告诉服务节点服务器有同步数据，并将同步的数据回传给服务节点服务器，服务节点服务器接收到接口服务器返回的数据后，判断有资源需同步，则启动rsync进行资源同步。
进一步的，服务节点服务器每隔5分钟请求一次接口服务器，以获取所需同步的数据。
进一步的，将格式为css、js、images的资源从zip文件包中拆开，并上传至数据库；同时将接口服务器中格式为html的资源进行压缩。
进一步的，服务节点服务器同步完成后，将资源大小回发给核心服务器，核心服务器检查是否与原始资源大小一致，并将结果返回给服务节点服务器，如果一致，服务节点服务器则将此资源对外公开；如果不一致，则再次同步，如果再次同步结果仍不一致，则不对外公开。
本发明的站点资源分发系统，包括
-核心服务器：对用户提供资源管理、分发资源；
-接口服务器：对所要分发的数据进行交互；
-缓存服务器：用于缓存核心服务器在资源管理时的资源、并通过接口服务器分发数据；
-服务节点服务器：接收用户定制的站点资源分发指令，将核心服务器下发的资源同步分发到服务节点服务器上；
-数据库：为用户提供包括html、css、js、images格式的资源，供核心服务器获取。
借由上述方案，本发明至少具有以下优点：
1、能够为用户解决因区域、语种、多服务器和网络结构的不同带来的站点资源的多样性需求，可以根据用户属性的不同，定制化不一样的资源，提高了用户体验；
2、资源分发的服务器节点结构，适用于内网分发，确保了用户数据的安全性。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，并可依照说明书的内容予以实施，以下以本发明的较佳实施例并配合附图详细说明如后。
附图说明
图1是本发明的站点资源分发系统的架构图；
图2是本发明的站点资源分发方法的流程图。
其中：shopperconnect-核心服务器；SC Server(VM)-接口服务器；Radis Server(VM)-缓存服务器；Portal Server、ibeacon Server-服务节点服务器；DataBase-数据库。
具体实施方式
下面结合附图和实施例，对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。
参见图1，本发明的站点资源分发系统，包括核心服务器：对用户提供资源管理、分发资源；接口服务器：对所要分发的数据进行交互；缓存服务器：用于缓存核心服务器在资源管理时的资源、并通过接口服务器分发数据；服务节点服务器：接收用户定制的站点资源分发指令，将核心服务器下发的资源同步分发到服务节点服务器上；数据库：为用户提供包括html、css、js、images格式的资源，供核心服务器获取。
可见本发明的资源分发的服务器节点结构，是在内网分发，保证了用户数据的安全性。
在利用上述的站点资源分发系统进行内容分发时，如图2所示：
定制化站点资源：用户在客户端通过拖拉的方式向多个源站点发出获取多样性的资源以生成站点资源的需求，由服务节点服务器接收站点资源分发指令；
资源分发：用户定制化资源后，核心服务器根据站点资源分发指令获取所需资源，系统自动将分发数据放入缓存服务器中，由服务节点服务器来同步数据，并将资源下发到服务节点服务器上。
核心服务器将分发数据形成json的数据格式，将此数据用tcp的方式发送到缓存服务器，并定义过期时间，一旦过期后不再作为分发的基础数据；缓存服务器接收到数据后，将数据保存在内存中，并定时检查数据是否过期(如果定义的数据过期时间超过当前时间则认为过期)，过期的数据将被从内存中删除。
核心服务器将获取的包括html、css、js、images格式的资源合成一个zip文件包，此文件包保存在接口服务器，等待服务节点服务器来同步。
服务节点服务器每隔5分钟请求一次接口服务器，接口服务器从缓存服务器中查询是否存在分发的数据，如果存在，则返回分发的数据，告诉服务节点服务器有同步数据，并将同步的数据回传给服务节点服务器，服务节点服务器接收到接口服务器返回的数据后，判断有资源需同步，则启动rsync进行资源同步。
Rsync同步会对所有文件进行对比，然后再进行差量传输，如果文件很大，扫面文件就非常耗时，并且不能实时监测。为了解决rsync的文件，采用如下两个方案：
1、将格式为css、js、images的资源从zip文件包中拆开，并将其上传至数据库，减少接口服务器zip文件包的大小，同时将接口服务器中格式为html的文件进行压缩，以减小扫面的大小，节省rsync扫描的时间。
2、服务节点服务器每隔5分钟请求一次接口服务器，以获取是否有同步数据，不使用rsync实时监控数据差异，减轻了服务节点服务器的压力。
Rsync同步数据丢失处理，本质上rsync不会做数据丢失的容错，在网络传输过程中可能会因为网络状态、服务器配置、不可抗力因素导致同步的资源的不完整性。因此，本发明采用了资源完整性检查机制：服务节点服务器同步完成后，将资源大小回发给核心服务器，核心服务器检查是否与原始资源大小一致，并将结果返回给服务节点服务器，如果一致，服务节点服务器则将此资源正式公开对外，如果不一致，则再次同步，如果再次同步结果还是不一致，则不对外公开。
可见，本发明的站点资源分发方法能够为用户解决因区域、语种、多服务器和网络结构的不同带来的站点资源的多样性需求；可以根据用户属性的不同，定制化不一样的资源，提高了用户体验。
例如，对于铁路上设置的若干站点，对各站点需要分发资源，利用上述的资源分发方法，根据各站点的不同需求，定制化资源，并分发到对应的站点节点上。
再例如，文博馆，多场馆需要分发不同的资源，对于不同展览馆，利用上述的资源分发方法，定制所需资源，分发不一样的资源到相应的展览馆节点上。
以上所述仅是本发明的优选实施方式，并不用于限制本发明，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明技术原理的前提下，还可以做出若干改进和变型，这些改进和变型也应视为本发明的保护范围。

Claims (8)

1.一种站点资源分发方法，其特征在于包括步骤：
(1)定制化站点资源
用户在客户端通过拖拉的方式向多个源站点发出获取多样性的资源以生成站点资源的需求，由服务节点服务器接收站点资源分发指令；
(2)资源分发
核心服务器根据站点资源分发指令获取所需资源，将分发数据放入缓存服务器中，由服务节点服务器来同步数据，并将资源下发到服务节点服务器上。
2.根据权利要求1所述的站点资源分发方法，其特征在于：所述步骤(2)中核心服务器将分发数据形成json的数据格式，通过tcp的方式将分发数据发送到缓存服务器，并定义过期时间；缓存服务器接收到分发数据后，将分发数据保存在内存中，并定时检查分发数据是否过期，过期的分发数据从内存中删除。
3.根据权利要求2所述的站点资源分发方法，其特征在于：核心服务器将获取的包括html、css、js、images格式的资源合成zip文件包，将zip文件包保存在接口服务器中，等待服务节点服务器来同步。
4.根据权利要求3所述的站点资源分发方法，其特征在于：服务节点服务器每隔5分钟请求一次接口服务器，接口服务器从缓存服务器中查询是否存在分发的数据，如果存在，则返回分发的数据，告诉服务节点服务器有同步数据，并将同步的数据回传给服务节点服务器，服务节点服务器接收到接口服务器返回的数据后，判断有资源需同步，则启动rsync进行资源同步。
5.根据权利要求3所述的站点资源分发方法，其特征在于：服务节点服务器每隔5分钟请求一次接口服务器，以获取所需同步的数据。
6.根据权利要求4所述的站点资源分发方法，其特征在于：将格式为css、js、images的资源从zip文件包中拆开，并上传至数据库；同时将接口服务器中格式为html的资源进行压缩。
7.根据权利要求1-6任一项所述的站点资源分发方法，其特征在于：服务节点服务器同步完成后，将资源大小回发给核心服务器，核心服务器检查是否与原始资源大小一致，并将结果返回给服务节点服务器，如果一致，服务节点服务器则将此资源对外公开；如果不一致，则再次同步，如果再次同步结果仍不一致，则不对外公开。
8.一种站点资源分发系统，其特征在于：包括
-核心服务器：对用户提供资源管理、分发资源；
-接口服务器：对所要分发的数据进行交互；
-缓存服务器：用于缓存核心服务器在资源管理时的资源、并通过接口服务器分发数据；
-服务节点服务器：接收用户定制的站点资源分发指令，将核心服务器下发的资源同步分发到服务节点服务器上；
-数据库：为用户提供包括html、css、js、images格式的资源，供核心服务器获取。
CN201610412061.8A 2016-06-14 2016-06-14 一种站点资源分发方法及系统 Pending CN106101225A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610412061.8A CN106101225A (zh) 2016-06-14 2016-06-14 一种站点资源分发方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610412061.8A CN106101225A (zh) 2016-06-14 2016-06-14 一种站点资源分发方法及系统

Publications (1)

Publication Number Publication Date
CN106101225A true CN106101225A (zh) 2016-11-09

Family

ID=57846460

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610412061.8A Pending CN106101225A (zh) 2016-06-14 2016-06-14 一种站点资源分发方法及系统

Country Status (1)

Country Link
CN (1) CN106101225A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109324766A (zh) * 2018-11-02 2019-02-12 成都中科大旗软件有限公司 一种多站点管理的方法及系统
CN112511409A (zh) * 2020-11-19 2021-03-16 湖南红网新媒体集团有限公司 一种消息推荐系统、方法、装置及存储介质
CN113760843A (zh) * 2021-08-18 2021-12-07 福建天泉教育科技有限公司 一种站点部署方法及终端

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102891869A (zh) * 2011-07-20 2013-01-23 郑州威科姆科技股份有限公司 一种内容分发网络及内容发布、调度方法
CN102916930A (zh) * 2011-08-02 2013-02-06 中兴通讯股份有限公司 融合业务网络及其节点、资源请求的路由信息的获取方法
CN102938776A (zh) * 2012-09-28 2013-02-20 方正国际软件有限公司 基于ajax技术的动态页面处理系统
CN103473636A (zh) * 2013-09-03 2013-12-25 沈效国 一种收集、分析和分发网络商业信息的系统数据组件
CN103716326A (zh) * 2013-12-31 2014-04-09 华为技术有限公司 一种资源访问方法及用户资源网关
CN104618506A (zh) * 2015-02-24 2015-05-13 庄奇东 一种众包的内容分发网络系统、方法与装置
CN104683881A (zh) * 2013-11-29 2015-06-03 中兴通讯股份有限公司 Vcdn资源控制方法、装置及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102891869A (zh) * 2011-07-20 2013-01-23 郑州威科姆科技股份有限公司 一种内容分发网络及内容发布、调度方法
CN102916930A (zh) * 2011-08-02 2013-02-06 中兴通讯股份有限公司 融合业务网络及其节点、资源请求的路由信息的获取方法
CN102938776A (zh) * 2012-09-28 2013-02-20 方正国际软件有限公司 基于ajax技术的动态页面处理系统
CN103473636A (zh) * 2013-09-03 2013-12-25 沈效国 一种收集、分析和分发网络商业信息的系统数据组件
CN104683881A (zh) * 2013-11-29 2015-06-03 中兴通讯股份有限公司 Vcdn资源控制方法、装置及系统
CN103716326A (zh) * 2013-12-31 2014-04-09 华为技术有限公司 一种资源访问方法及用户资源网关
CN104618506A (zh) * 2015-02-24 2015-05-13 庄奇东 一种众包的内容分发网络系统、方法与装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109324766A (zh) * 2018-11-02 2019-02-12 成都中科大旗软件有限公司 一种多站点管理的方法及系统
CN112511409A (zh) * 2020-11-19 2021-03-16 湖南红网新媒体集团有限公司 一种消息推荐系统、方法、装置及存储介质
CN113760843A (zh) * 2021-08-18 2021-12-07 福建天泉教育科技有限公司 一种站点部署方法及终端

Similar Documents

Publication Publication Date Title
CN104834722B (zh) 基于cdn的内容管理系统
CN103218434B (zh) 一种加载静态资源的方法和装置
US9069870B2 (en) Client-side aggregation of context-sensitive request results where results for aggregation are asynchronously produced by multiple servers
US20180329972A1 (en) Method and system of providing for cross-device operations between user devices
WO2003050744A1 (en) Delivering content and advertisement
CN108600300B (zh) 日志数据处理方法及装置
CN106101225A (zh) 一种站点资源分发方法及系统
CN102629938B (zh) 对网络视频加载进行视频加速的方法和系统
CN105897850A (zh) 用于cdn平台的响应处理方法、调度代理服务器及系统
CN110460652A (zh) 一种资源获取方法及边缘计算调度服务器
CN101459571B (zh) 一种网站镜像的方法、系统及装置
CN106909427B (zh) 一种软件更新方法、装置和软件更新数据发布方法、系统
US11503098B2 (en) Embedding MQTT messages in media streams
CN106791889A (zh) 一种视频处理方法及系统、分布式对象存储系统
CN105554046A (zh) 内容分发系统对终端请求的调度方法、装置及设备
CN106230978A (zh) 分布式缓存同步方法、装置及系统
US11856075B2 (en) Restful method and apparatus to import content by geo-aware content caching service
CN105100172A (zh) 一种http协议的缓存状态更新方法和设备、处理机
CN104935653A (zh) 一种访问热点资源的旁路缓存方法和装置
CN104125303B (zh) 数据读写请求方法、客户端及系统
CN104519088A (zh) 一种缓存系统的实现方法及缓存系统
CN113114503B (zh) 基于应用交付网络需求的部署方法及装置
CN113542418B (zh) 文件管理方法、装置、电子设备及存储介质
CN104348893B (zh) 一种数据同步的方法及装置
CN103795642A (zh) 一种负载均衡的方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 310, 288 Dongping Street, Suzhou Industrial Park, Jiangsu Province

Applicant after: Suzhou Xiaolu robot Co Ltd

Address before: Room 304, 288 Dongping Street, Suzhou Industrial Park, Jiangsu Province

Applicant before: Suzhou hi tech Network Technology Co., Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20161109