CN102025750A - 网络缓存代理服务系统 - Google Patents

网络缓存代理服务系统 Download PDF

Info

Publication number
CN102025750A
CN102025750A CN2009100704314A CN200910070431A CN102025750A CN 102025750 A CN102025750 A CN 102025750A CN 2009100704314 A CN2009100704314 A CN 2009100704314A CN 200910070431 A CN200910070431 A CN 200910070431A CN 102025750 A CN102025750 A CN 102025750A
Authority
CN
China
Prior art keywords
server
caching
web
user
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009100704314A
Other languages
English (en)
Inventor
张袭妹
刘健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TIANJIN 707 INFORMATION TECH Co Ltd
Original Assignee
TIANJIN 707 INFORMATION TECH Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TIANJIN 707 INFORMATION TECH Co Ltd filed Critical TIANJIN 707 INFORMATION TECH Co Ltd
Priority to CN2009100704314A priority Critical patent/CN102025750A/zh
Publication of CN102025750A publication Critical patent/CN102025750A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Computer And Data Communications (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一套网络缓存代理服务系统。本套系统基于Linux系统环境下开发出来,有效的针对目前中小型企业接入互联网络的带宽较窄,网络访问速度慢等问题。通过缓存技术的应用,成功的缓解了Web应用对带宽的需求,尤其是在带宽使用高峰期避免了大量的Http请求涌入,成功的加快了因网络带宽不足而造成的Web应用访问速度的问题。在宽带网络昂贵,带宽问题不可能很快解决的情况下,采用互联网访问缓冲技术是一个能充分利用带宽的很好的解决方案。

Description

网络缓存代理服务系统 
技术领域
本发明涉及是提供两个支持千兆的网口进行对流量转发,通过内嵌式的网络缓存代理服务系统,经策略条件判断,代理符合条件下联用户的Http服务请求。以增加用户方对于Web服务的访问速度。 
背景技术
WWW是互联网上最受欢迎的应用之一,其快速增长造成网络拥塞和服务器超载,导致客户访问延迟增大,WWW服务质量问题日益显现出来。缓存技术被认为是减轻服务器负载、降低网络拥塞、增强WWW可扩展性的有效途径之一,其基本思想是利用客户访问的时间局部性(Temporal Locality)原理,将客户访问过的内容在Cache中存放一个副本,当该内容下次被访问时,不必连接到驻留网站,而是由Cache中保留的副本提供。 
Web内容可以缓存在客户端、代理服务器以及服务器端。研究表明,缓存技术可以显著地提高WWW性能,它可以带来以下好处: 
(1)减少网络流量,从而减轻网络拥塞; 
(2)降低客户访问延迟,其主要原因有:①缓存在代理服务器中的内容,客户可以直接从代理获取而不是从远程服务器获取,从而减小了传输延迟;②没有被缓存的内容由于网络拥塞及服务器负载的减轻而可以较快地被客户获取; 
(3)由于客户的部分请求内容可以从代理处获取,从而减轻了远程服务器负载; 
(4)如果由于远程服务器故障或网络故障造成远程服务器无法响应客户请求,客户可以从代理中获取缓存的内容副本,使得WWW服务的鲁棒性(Robustness)得到了加强。 
Web缓存服务通过几种方式来改善用户的响应时间,如代理缓存服务、透明代理缓存服务、使用重定向服务的透明代理缓存服务等。通过Web缓存服务,用户访问网页时可以将广域网的流量降至最低。对于公司内联网用户来说,这意味着将内容在本地缓存,而无须通过专用的广域网来检索网页。对于网站建设公司Internet用户来说,这意味着将内容存储在他们的ISP的缓存器中,而无须通过Internet来检索网页。这样无疑会提高用户的访问速度。CDN的核心作用正是提高网络的访问速度,所以,缓存技术将是CDN所采用的又一个主要技术。 
大家都知道,网站建设公司网站访问响应速度取决于许多因素,如网络的带宽是否有瓶颈、传输途中的路由是否有阻塞和延迟、网站服务器的处理能力及访问距离等。多数情况下,网站响应速度和访问者与网站服务器之间的距离有密切的关系。如果访问者和网站之间的距离过远的话,它们之间的通信一样需要经过重重的路由转发和处理,网络延误不可避免。一个有效的方法就是利用内容分发与复制技术,将占网站主体的大部分静态网页、图像和流媒体数据分发复制到各地的加速节点上。所以动态内容分发与复制技术也是CDN所需的一个主要技术。 
发明内容
本发明的目的是提供一种网络缓存代理服务系统,本发明具有Internet代理和缓冲服务两种功能,它通过在本地保存最近访问过的Web文档的副本和镜像Web站点来提高网络访问响应效率。空闲时,它还可以按照预设流程将指定的网站和网页内容自动下载到本地,供随后的快速访问。使用网络缓存代理服务系统可以大大消除用户在带宽和时间上的浪费。网络缓存代理服务系统除能加快内部网对互联网络的访问速度外,还能增强互联网用户对单位向外发布的网站的访问速度。系统特色:网络缓存代理服务系统具有Internet代理和缓冲服务两种功能,它通过在本地保存最近访问过的Web文档的副本和镜像Web站点来提高网络访问响应效率。空闲时,它还可以按照预设流程将指定的网站和网页内容自动下载到本地,供随后进行快速访问。使用网络缓存代理服务系统可以大大消除用户在带宽和时间上的浪费。具有如下特点:(1)支持HTTP反向加速。(2)支持多种Internet接入方式。(3)支持透明代理模式。(4)支持ICP集群。(5)具有访问控制。(6)提供站点镜像。(7)支持断点续传功能。(8)完备的系统统计数据。 
为了实现上述目的,本发明采用的技术方案是提供的一种支持千兆网络的网络缓存代理设备,基于Linux系统开发,用户访问Web服务器时首先访问缓存服务器,如果用户请求的数据在缓存服务器的缓存池中检索到,则有缓冲服务器将数据提供给用户,不必由Web服务器提供。如果在缓存服务器上未能检索到所需数据,则由缓冲服务器向Web服务器请求数据并提交给用户,同时在缓冲池中记录该数据以备其他用户使用。 
附图说明:
图l是本发明的正面示意图; 
图2是本发明的背面示意图; 
图3是本发明的透视内部结构示意图 
图中:1.硬盘2.双USB接口3.RS232接口4.系统运行指示灯5.重启键6.电源开关7.服务器电源8.鼠标接口9.键盘接口10.USB接口11.RS232串口12.VGA接口13.双千兆网络接口14.风扇散热系统15.服务器主板16.中央处理器17.Raid卡18.内存 
具体实施方式
下面结合附图及实施例对本发明的应用层协议流量控制系统作进一步描述。本套系统基于Linux操作系统,具有安全、自主、稳定、高效等优良特性。Web缓存代理服务系统可以放置在Web服务器的前端,用户访问Web服务器时首先访问缓存服务器,如果用户请求的数据在缓存服务器的缓存池中检索到,则有缓冲服务器将数据提供给用户,不必由Web服务器提供。如果在缓存服务器上未能检索到所需数据,则由缓冲服务器向Web服务器请求数据并提交给用户,同时在缓冲池中记录该数据以备其他用户使用。这样,可以利用缓冲服务器高速的内存处理速度来替代Web服务器的文件系统的I/O,缩短用户访问Web服务器时的响应时间,减轻了Web服务器的负载。支持多种Internet接入方式Web缓存代理服务系统支持拨号、ISDN以及专线等多种Internet接入方式。支持透明代理模式在透明方式下,路由器、负载均衡器和负载均衡交换机可以把通信数据传递给Web缓存代理服务系统,需要对路由器和交换机进行配置。系统支持ICP集群。Web缓存代理服务系统支持ICP(Internet CacheProtocal)协议,可在内部网内部设置基于ICP协议的缓存系统。通过ICP协议实现同一站点服务器间或不同站点设备间的集群。集群技术提高了Web缓存代理服务系统的效率,同时提高了系统整体的可靠性(避免了单点失误造成的网络瘫痪)。控制网络缓存代理服务系统能够基于静态IP进行访问控制,限制受控对象所访问的目的站点以及使用缓存服务器的时段。并提供三种基本控制策略: 
1.允许所有的用户和IP地址使用Cache 
2.只禁止指定的用户和IP地址使用Cache 
3.只允许指定的用户和IP地址使用Cache 。

Claims (4)

1.一种网络缓存代理服务系统,其特征是:硬盘(1)双USB接口(2)RS232接口(3)系统运行指示灯(4)重启键(5)电源开关(6)服务器电源(7)鼠标接口(8)键盘接口(9)USB接口(10)RS232串口(11)VGA接口(12)双千兆网络接口(13)风扇散热系统(14)服务器主板(15)中央处理器(16)Raid卡(17)内存(18)
用户访问Web服务器时首先访问缓存服务器,如果用户请求的数据在缓存服务器的缓存池中检索到,则有缓冲服务器将数据提供给用户,不必由Web服务器提供。如果在缓存服务器上未能检索到所需数据,则由缓冲服务器向Web服务器请求数据并提交给用户,同时在缓冲池中记录该数据以备其他用户使用。
2.根据权利要求1所述系统基于Linux环境下开发,同时支持正向代理与反向服务器代理功能。
3.根据权利要求1所述系统支持ICP集群。Web缓存代理服务系统支持ICP(Internet CacheProtocal)协议,可在内部网内部设置基于ICP协议的缓存系统。通过ICP协议实现同一站点服务器间或不同站点设备间的集群。集群技术提高了Web缓存代理服务系统的效率,同时提高了系统整体的可靠性(避免了单点失误造成的网络瘫痪)。
4.根据权利要求1所述访问控制Web缓存代理服务系统能够基于静态IP进行访问控制,限制受控对象所访问的目的站点以及使用缓存服务器的时段。并提供三种基本控制策略:
1.允许所有的用户和IP地址使用Cache
2.只禁止指定的用户和IP地址使用Cache
3.只允许指定的用户和IP地址使用Cache。 
CN2009100704314A 2009-09-15 2009-09-15 网络缓存代理服务系统 Pending CN102025750A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009100704314A CN102025750A (zh) 2009-09-15 2009-09-15 网络缓存代理服务系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009100704314A CN102025750A (zh) 2009-09-15 2009-09-15 网络缓存代理服务系统

Publications (1)

Publication Number Publication Date
CN102025750A true CN102025750A (zh) 2011-04-20

Family

ID=43866604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009100704314A Pending CN102025750A (zh) 2009-09-15 2009-09-15 网络缓存代理服务系统

Country Status (1)

Country Link
CN (1) CN102025750A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103188323A (zh) * 2011-12-31 2013-07-03 中国移动通信集团公司 基于用户主机缓存设备提供Web服务的系统和方法
CN103973788A (zh) * 2014-05-08 2014-08-06 浪潮电子信息产业股份有限公司 一种基于传输遍布式网络架构的负载均衡方法
CN104168300A (zh) * 2013-05-17 2014-11-26 中国电信股份有限公司 内容加速方法与系统
CN107135266A (zh) * 2017-05-19 2017-09-05 成都极玩网络技术有限公司 Http代理框架安全数据传输方法
CN112104754A (zh) * 2020-11-18 2020-12-18 腾讯科技(深圳)有限公司 网络代理方法、系统、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1403929A (zh) * 2001-08-27 2003-03-19 日本电气株式会社 xDSL适配装置,多点传送发布系统和数据发布方法
WO2004006101A1 (ja) * 2002-07-04 2004-01-15 Sony Corporation キャッシュ装置、およびキャッシュデータ管理方法、並びにコンピュータ・プログラム
CN101127783A (zh) * 2007-09-28 2008-02-20 北京金山软件有限公司 一种网站缓存方法和一种网站缓存的装置
CN101257485A (zh) * 2007-03-02 2008-09-03 华为技术有限公司 web应用系统及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1403929A (zh) * 2001-08-27 2003-03-19 日本电气株式会社 xDSL适配装置,多点传送发布系统和数据发布方法
WO2004006101A1 (ja) * 2002-07-04 2004-01-15 Sony Corporation キャッシュ装置、およびキャッシュデータ管理方法、並びにコンピュータ・プログラム
CN101257485A (zh) * 2007-03-02 2008-09-03 华为技术有限公司 web应用系统及方法
CN101127783A (zh) * 2007-09-28 2008-02-20 北京金山软件有限公司 一种网站缓存方法和一种网站缓存的装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103188323A (zh) * 2011-12-31 2013-07-03 中国移动通信集团公司 基于用户主机缓存设备提供Web服务的系统和方法
CN103188323B (zh) * 2011-12-31 2016-09-07 中国移动通信集团公司 基于用户主机缓存设备提供Web服务的系统和方法
CN104168300A (zh) * 2013-05-17 2014-11-26 中国电信股份有限公司 内容加速方法与系统
CN104168300B (zh) * 2013-05-17 2017-06-27 中国电信股份有限公司 内容加速方法与系统
CN103973788A (zh) * 2014-05-08 2014-08-06 浪潮电子信息产业股份有限公司 一种基于传输遍布式网络架构的负载均衡方法
CN107135266A (zh) * 2017-05-19 2017-09-05 成都极玩网络技术有限公司 Http代理框架安全数据传输方法
CN107135266B (zh) * 2017-05-19 2020-11-13 北京网高科技股份有限公司 Http代理框架安全数据传输方法
CN112104754A (zh) * 2020-11-18 2020-12-18 腾讯科技(深圳)有限公司 网络代理方法、系统、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
US11805184B2 (en) Content delivery systems and methods
US8631091B2 (en) Content distribution network using a web browser and locally stored content to directly exchange content between users
US6253234B1 (en) Shared web page caching at browsers for an intranet
US9588854B2 (en) Systems and methods for a secondary website with mirrored content for automatic failover
US9871879B2 (en) Methods and apparatuses for providing a desired portion of a data object document
JP3424907B2 (ja) ネットワークコンテンツキャッシュ装置
US20120198045A1 (en) Global load balancing on a content delivery network
CN102025750A (zh) 网络缓存代理服务系统
CN102045403A (zh) 分布式网络数据处理方法和装置及系统
EP3066577A2 (en) Content node selection using network performance profiles
US20150012835A1 (en) Computer system
KR20160077114A (ko) 네트워크 내에서 콘텐트의 전달 및 저장
Wang et al. The content delivery network system based on cloud storage
JP2001306433A (ja) 費用効率の高いコンテンツ配信サービスのためのシステムおよび方法
KR101218574B1 (ko) 네트워크의 스토리지를 이용한 컨텐츠 전달
US11240172B2 (en) Methods and apparatuses for responding to requests for network resources implemented in a cloud computing infrastructure
Cisco Chapter 1, Planning a Web Caching System
Cisco Cisco Content Engine 7320
JP2006127262A (ja) コンテンツ配信システムにおける負荷分散方法及び負荷分散システム
Kim et al. Performance impact of large file transfer on web proxy caching: A case study in a high bandwidth campus network environment
Nanda et al. A Review of Web Caching Techniques and Caching Algorithms for Effective and Improved Caching
Sofi et al. A proxy load reduction technique to improve web performance
US7487224B2 (en) Methods and systems for routing requests using edge network elements
Xiao et al. On scalable and locality-aware web document sharing
Choi et al. Cluster Application System Based on DMA through cutting down Callback latency

Legal Events

Date Code Title Description
C57 Notification of unclear or unknown address
DD01 Delivery of document by public notice

Addressee: Guo Lixin

Document name: Notification that Application Deemed to be Withdrawn

DD01 Delivery of document by public notice

Addressee: Guo Lixin

Document name: Notification of Decision on Request for Restoration of Right

DD01 Delivery of document by public notice

Addressee: Guo Lixin

Document name: Notification of Passing Preliminary Examination of the Application for Invention

DD01 Delivery of document by public notice

Addressee: Guo Lixin

Document name: Notification of Passing Examination on Formalities

C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110420