CN105100294B - 获取网页的方法、系统、网络服务器、浏览器和gslb - Google Patents

获取网页的方法、系统、网络服务器、浏览器和gslb Download PDF

Info

Publication number
CN105100294B
CN105100294B CN201410213336.6A CN201410213336A CN105100294B CN 105100294 B CN105100294 B CN 105100294B CN 201410213336 A CN201410213336 A CN 201410213336A CN 105100294 B CN105100294 B CN 105100294B
Authority
CN
China
Prior art keywords
webpage
domain name
address
gslb
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410213336.6A
Other languages
English (en)
Other versions
CN105100294A (zh
Inventor
高山渊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201410213336.6A priority Critical patent/CN105100294B/zh
Priority to TW103134239A priority patent/TWI656772B/zh
Priority to US14/712,527 priority patent/US10225315B2/en
Priority to PCT/US2015/031153 priority patent/WO2015179244A1/en
Priority to EP15728677.4A priority patent/EP3146698B1/en
Publication of CN105100294A publication Critical patent/CN105100294A/zh
Priority to HK16101378.2A priority patent/HK1213704A1/zh
Application granted granted Critical
Publication of CN105100294B publication Critical patent/CN105100294B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/12Avoiding congestion; Recovering from congestion
    • H04L47/125Avoiding congestion; Recovering from congestion by balancing the load, e.g. traffic engineering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/45Network directories; Name-to-address mapping
    • H04L61/4505Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/50Address allocation
    • H04L61/5007Internet protocol [IP] addresses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/34Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/561Adding application-functional data or data for application control, e.g. adding metadata

Abstract

本申请公开了一种获取网页的方法、系统、网络服务器、浏览器和GSLB,属于通信网络技术领域。所述方法包括:获取第一网络协议IP地址;查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名;向GSLB发送所有网页引用内容的域名;从所述GSLB获取每个网页引用内容的第二IP地址;将所述网页基础框架和所述每个网页引用内容的第二IP地址发送至浏览器,使得所述浏览器获取网页进行显示。本发明不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。

Description

获取网页的方法、系统、网络服务器、浏览器和GSLB
技术领域
本申请涉及通信网络技术领域,具体涉及一种获取网页的方法、系统、网络服务器、浏览器和GSLB。
背景技术
随着通信网络技术的发展,可以通过浏览各种网站提供的各种网页获取各种信息。为了加快网页打开速度,在现有的Internet(国际互联网)中增加一层新的网络架构CDN(Content Delivery Network,内容分发网络),通过CDN将网页的内容发布到最接近用户的网络"边缘",使用户可以就近取得网页的内容,提高用户访问网页的响应速度。现有网页一般由网页基础框架和网页引用内容(如样式表文件CSS、JavaScript脚本、图片、视频等)组成,为了方便CDN加速,网页引用内容采用与网页基础框架的域名不同的域名,同时为了避免浏览器单域名并发访问的限制,不同的网页引用内容会采取不同的域名,例如:网页引用内容的域名包括static.excdn.cn、img01.excdn.cn、img02.excdn.cn、js.excdn.cn、vedio.excdn.cn等。因此现有获取网页时,需要根据组成网页的网页基础框架的域名获取组成网页的网页基础框架,根据组成网页的每个网页引用内容的域名,获取组成网页的每个网页引用内容,将网页基础框架和每个网页引用内容结合得到网页。
参见图1,现有获取网页的具体过程如下:浏览器获取预访问网页的网页域名(例如www.example.cn),查询本地(浏览器本身和操作系统(OS))没有缓存与该网页域名对应的IP(Internet Protocol、网络协议)地址后,向本地DNS(Local Domain Name Server,本地域名服务器)发送携带网页域名的域名解析请求(1a)。本地DNS接收域名解析请求,查询本地DNS本身没有缓存与该网页域名对应的IP地址后,通过根DNS(Root DNS,根域名服务器)和GSLB(Global Server Load Balance,全局负载均衡服务器)获取与该网页域名对应的IP地址,将与该网页域名对应的IP地址返回给浏览器(1b)。浏览器根据与该网页域名对应的IP地址,与预访问网页的网络服务器(Web Server)建立连接,并向网络服务器发送携带IP地址的HTTP(Hyper Text Transfer Protocol,超文本传输协议)请求(2a)。网络服务器接收HTTP请求,生成并向浏览器返回与IP地址对应的网页基础框架(2b)。浏览器接收网络服务器返回的网页基础框架,解析网页基础框架,得到多个网页引用内容的域名,发起携带网页引用内容的域名的域名解析请求(每次域名解析请求携带一个网页引用内容的域名),得到网页引用内容的IP地址(与1a、1b类似)。浏览器根据网页引用内容的IP地址,向相应的网页引用内容服务器(如图片引用内容服务器)请求网页引用内容(3a)。网页引用内容服务器向浏览器返回网页引用内容(3b)。多次重复上述步骤1a、1b、3a、3b(有多少个网页引用内容的域名就重复多少次),浏览器获取预访问网页中包含的所有网页引用内容,将所有网页引用内容和网页基础框架进行结合得到网页。
现有获取网页的方法,当网页中包含多个网页引用内容时,需要多次发起域名解析请求,多次重复上述步骤(1a、1b、3a、3b),需要时间长,获取网页的效率低、导致网页加载缓慢。
发明内容
本申请所要解决的技术问题在于提供一种获取网页的方法、系统、网络服务器、浏览器和GSLB,当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。
为了解决上述问题,本申请公开了一种获取网页的方法,所述方法包括:
获取携带第一网络协议IP地址的超文本传输协议HTTP请求;
查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名;
向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
从所述GSLB获取每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
将所述网页基础框架和所述每个网页引用内容的第二IP地址发送至浏览器,使得所述浏览器获取网页进行显示。
进一步地,获取携带第一IP地址的HTTP请求,包括:
获取携带所述第一IP地址和GSLB地址的HTTP请求;
相应地,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向所述GSLB地址对应的GSLB发送域名解析请求。
进一步地,向全局负载均衡服务器GSLB发送域名解析请求,包括:
查询本地的GSLB配置信息,得到本地对应的GSLB地址;其中,所述GSLB配置信息中包括本地对应的GSLB地址;
向所述GSLB地址对应的GSLB发送域名解析请求。
进一步地,向全局负载均衡服务器GSLB发送域名解析请求,包括:
通过使用扩展域名服务器EDNS方式或HTTP方式,向所述GSLB发送域名解析请求。
进一步地,所述HTTP请求由浏览器获取与预访问网页的网页域名对应的第一IP地址后发起。
进一步地,向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名,包括:
向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名,以及发起所述HTTP请求的浏览器的用户端IP地址,使得所述GSLB接收到所述域名解析请求后,解析所述所有网页引用内容的域名,并结合所述用户端IP地址和所述GSLB自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
为了解决上述问题,本申请还公开了一种获取网页的方法,所述方法包括:
获取与预访问网页的网页域名对应的第一IP地址;
向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
接收所述网络服务器发送的网页基础框架,以及所述网络服务器转发的所述GSLB得到的每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
从与所述每个网页引用内容的第二IP地址对应的每个网页引用内容服务器中,获取所述每个网页引用内容,将所述网页基础框架与所述每个网页引用内容进行结合,得到网页。
进一步地,获取与预访问网页的网页域名对应的第一IP地址,包括:
获取所述预访问网页的网页域名;
查询本地是否缓存与所述网页域名对应的第一IP地址,以及GSLB地址;
如果没有缓存,则向本地域名服务器DNS发送携带所述网页域名的域名解析请求,使得所述本地DNS接收到域名解析请求后,获取与所述网页域名对应的第一IP地址,以及GSLB地址;
接收所述本地DNS返回的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
进一步地,查询本地是否缓存与所述网页域名对应的第一IP地址,以及GSLB地址之后,还包括:
如果缓存,则判断本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址是否有效;
如果有效,则获取本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
进一步地,判断本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址是否有效之后,还包括:
如果没有效,则执行所述向本地DNS发送携带所述网页域名的域名解析请求的步骤。
为了解决上述问题,本申请还公开了一种域名解析的方法,所述方法包括:
接收域名解析请求,其中,所述域名解析请求中携带预访问网页中所有网页引用内容的域名,以及所述预访问网页对应的浏览器的用户端IP地址;
解析所述所有网页引用内容的域名,并结合所述用户端IP地址和本地自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
进一步地,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址之后,还包括:
将所述每个网页引用内容的域名对应的每个网页引用内容的第二IP地址发送给网络服务器,使得所述网络服务器将所述每个网页引用内容的第二IP地址,以及与第一IP地址对应的网页基础框架,发送至浏览器,其中,所述第一IP地址与所述预访问网页的网页域名对应;使得所述浏览器获取网页进行显示。
为了解决上述问题,本申请还公开了一种网络服务器,所述网络服务器包括:
第一获取模块,用于获取携带第一网络协议IP地址的超文本传输协议HTTP请求;
查询模块,用于查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名;
第一发送模块,用于向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
处理模块,用于从所述GSLB获取每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
第二发送模块,用于将所述网页基础框架和所述每个网页引用内容的第二IP地址发送至浏览器,使得所述浏览器获取网页进行显示。
进一步地,所述第一获取模块包括:
第一获取单元,用于获取携带所述第一IP地址和GSLB地址的HTTP请求;
相应地,所述第一发送模块包括:
第一发送单元,用于向所述GSLB地址对应的GSLB发送域名解析请求。
进一步地,所述第一发送模块包括:
第一查询单元,用于查询本地的GSLB配置信息,得到本地对应的GSLB地址;其中,所述GSLB配置信息中包括本地对应的GSLB地址;
第二发送单元,用于向所述GSLB地址对应的GSLB发送域名解析请求。
进一步地,所述第一发送模块包括:
第三发送单元,用于通过使用扩展域名服务器EDNS方式或HTTP方式,向所述GSLB发送域名解析请求。
进一步地,所述HTTP请求由浏览器获取与预访问网页的网页域名对应的第一IP地址后发起。
进一步地,所述第一发送模块还包括:
处理单元,用于向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名,以及发起所述HTTP请求的浏览器的用户端IP地址,使得所述GSLB接收到所述域名解析请求后,解析所述所有网页引用内容的域名,并结合所述用户端IP地址和所述GSLB自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
为了解决上述问题,本申请还公开了一种浏览器,所述浏览器包括:
第二获取模块,用于获取与预访问网页的网页域名对应的第一IP地址;
第三发送模块,用于向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
第一接收模块,用于接收所述网络服务器发送的网页基础框架,以及所述网络服务器转发的所述GSLB得到的每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
结合模块,用于从与所述每个网页引用内容的第二IP地址对应的每个网页引用内容服务器中,获取所述每个网页引用内容,将所述网页基础框架与所述每个网页引用内容进行结合,得到网页。
进一步地,所述第二获取模块包括:
第二获取单元,用于获取所述预访问网页的网页域名;
第二查询单元,用于查询本地是否缓存与所述网页域名对应的第一IP地址,以及GSLB地址;
第四发送单元,用于如果所述第二查询单元的查询结果是没有缓存,则向本地域名服务器DNS发送携带所述网页域名的域名解析请求,使得所述本地DNS接收到域名解析请求后,获取与所述网页域名对应的第一IP地址,以及GSLB地址;
接收单元,用于接收所述本地DNS返回的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,所述第三发送模块包括:
第五发送单元,用于向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
进一步地,所述第二获取模块还包括:
判断单元,用于如果所述第二查询单元的查询结果是缓存,则判断本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址是否有效;
第三获取单元,用于如果所述判断单元的判断结果是有效,则获取本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,所述第三发送模块包括:
第六发送单元,用于向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
进一步地,所述第二获取模块还包括:
通知单元,用于如果所述判断单元的判断结果是没有效,则通知所述第四发送单元执行所述向本地DNS发送携带所述网页域名的域名解析请求的步骤。
为了解决上述问题,本申请还公开了一种全局负载均衡服务器GSLB,所述GSLB包括:
第二接收模块,用于接收域名解析请求,其中,所述域名解析请求中携带预访问网页中所有网页引用内容的域名,以及所述预访问网页对应的浏览器的用户端IP地址;
解析模块,用于解析所述所有网页引用内容的域名,并结合所述用户端IP地址和本地自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
进一步地,所述GSLB还包括:
第四发送模块,用于将所述每个网页引用内容的域名对应的每个网页引用内容的第二IP地址发送给网络服务器,使得所述网络服务器将所述每个网页引用内容的第二IP地址,以及与第一IP地址对应的网页基础框架,发送至浏览器,其中,所述第一IP地址与所述预访问网页的网页域名对应;使得所述浏览器获取网页进行显示。
为了解决上述问题,本申请还公开了一种获取网页的系统,所述系统包括:任一上述的网络服务器,和/或任一上述的浏览器,和/或任一上述的GSLB。
与现有技术相比,本申请可以获得包括以下技术效果:
当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。使用用户的真实IP地址作为调度依据,大幅度提高调度准确性。通过网络服务器来实现DNS解析而不是传统的客户端模式,通常情况网络服务器与GSLB之间的解析时间要优于客户端发起解析的时间,可以提高网页加载速度。
当然,实施本申请的任一产品必不一定需要同时达到以上所述的所有技术效果。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是现有的一种获取网页的方法流程图;
图2是本申请实施例的第一种获取网页的方法流程图;
图3是本申请实施例的第二种获取网页的方法流程图;
图4是本申请实施例的一种获取与预访问网页的网页域名对应的第一IP地址的方法流程图;
图5是本申请实施例的一种本地DNS接收到域名解析请求后,获取与网页域名对应的第一IP地址,以及GSLB地址的方法流程图;
图6是本申请实施例的一种获取网页的原理框图;
图7是本申请实施例的一种域名解析的方法流程图;
图8是本申请实施例的一种网络服务器的结构示意图;
图9是本申请实施例的一种浏览器的结构示意图;
图10是本申请实施例的一种GSLB的结构示意图;
图11是本申请实施例的另一种GSLB的结构示意图。
具体实施方式
以下将配合附图及实施例来详细说明本申请的实施方式,藉此对本申请如何应用技术手段来解决技术问题并达成技术功效的实现过程能充分理解并据以实施。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
实施例描述
下面以一实施例对本申请方法的实现作进一步说明。如图2所示,为本申请实施例的一种获取网页的方法流程图,该方法包括:
S101:获取携带第一IP地址的HTTP请求。
其中,HTTP请求由浏览器获取与预访问网页的网页域名对应的第一IP地址后发起。
具体地,为了便于后续请求GSLB解析所有网页引用内容的域名,在HTTP请求中还可以携带GSLB地址,即获取携带第一IP地址的HTTP请求,包括:获取携带第一IP地址和GSLB地址的HTTP请求。其中,GSLB地址可以是浏览器在获取与预访问网页的网页域名对应的第一IP地址过程中使用的GSLB的地址,浏览器在获取与预访问网页的网页域名对应的第一IP地址过程中,将使用的GSLB的地址记录下来,然后携带在HTTP请求发送给本地。
S102:查询与第一IP地址对应的网页基础框架。
具体地,可以预先设置IP地址与网页基础框架的对应关系,当获取到第一IP地址后,通过查询预先设置IP地址与网页基础框架的对应关系,得到与第一IP地址对应的网页基础框架。
S103:解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名。
具体地,网页基础框架与所有网页引用内容结合才可以得到网页,通过对网页基础框架进行解析,可以得到网页基础框架中需要使用到的所有网页引用内容的域名。
S104:向全局负载均衡服务器GSLB发送域名解析请求,其中,域名解析请求中携带所有网页引用内容的域名。
具体地,GSLB接收到域名解析请求后,解析所有网页引用内容的域名,并结合本地CDN的IP地址和GSLB自身的调度算法,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
其中,域名解析请求中还可以携带发起HTTP请求的浏览器的用户端IP地址,相应地,GSLB接收到域名解析请求后,解析所有网页引用内容的域名,并结合用户端IP地址和GSLB自身的调度算法,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
具体地,因为与本地链接的是发起HTTP请求的浏览器的用户端IP地址即用户的真实IP地址(如果用户是通过其他代理服务器与本地链接,则可以通过HTTP头X-Forward-For取得用户的真实IP地址),所以本地可以将用户的真实IP地址传递给GSLB。
具体地,GSLB在解析所有网页引用内容的域名,可以结合用户端IP地址进行解析,由于用户端IP地址是预访问网页的用户的真实IP地址,使得可以得到最优的每个网页引用内容的第二IP地址(即最接近用户的网络"边缘"的IP地址)。因为每个网页引用内容的第二IP地址这个解析结果是GSLB参照用户的真实IP地址解析得到的,所以可以规避现有技术将本地DNS的IP地址发送给GSLB进行参照解析的不确定性。
具体地,当S101中HTTP请求还携带GSLB地址时,HTTP请求的向全局负载均衡服务器GSLB发送域名解析请求,包括:
向GSLB地址对应的GSLB发送域名解析请求。
具体地,当S101中HTTP请求没有携带GSLB地址时,向全局负载均衡服务器GSLB发送域名解析请求,包括:
查询本地的GSLB配置信息,得到本地对应的GSLB地址;其中,GSLB配置信息中包括本地对应的GSLB地址;
向GSLB地址对应的GSLB发送域名解析请求。
即可以在本地预先设置GSLB配置信息,通过查询本地的GSLB配置信息,得到本地对应的GSLB地址。
具体地,向全局负载均衡服务器GSLB发送域名解析请求,包括:
通过使用EDNS(Extension DNS,扩展域名服务器)方式或HTTP方式,向全局负载均衡服务器GSLB发送域名解析请求。
S105:从GSLB获取每个网页引用内容的第二IP地址,将网页基础框架和每个网页引用内容的第二IP地址发送至浏览器,使得浏览器获取网页进行展示。具体地,从GSLB获取每个网页引用内容的第二IP地址后,可以将网页基础框架和每个网页引用内容的第二IP地址包装到返回给浏览器的HTTP应答中。
具体地,可以包装在自定义HTTP头中,例如:X-GSLB-INFO:img01.excdn.cn,60,A,223.5.6.7;img02.excdn.cn,60,A,223.5.6.8|223.5.6.9。也可以包装在网页HTML中,例如<meta name="X-GSLB-INFO"content="img01.excdn.cn,60,A,223.5.6.7;img02.excdn.cn,60,A,223.5.6.8|223.5.6.9"/>。
并且,可以采用分号(;)分割多个解析结果;采用逗号(,)分割同一解析结果中多个字段,上例中字段顺序为:域名、TTL、记录类型、解析结果;以竖划线(|)分割多个解析结果。也可以采取其他任何可行的方式,对此不做限定。
具体地,将网页基础框架和每个网页引用内容的第二IP地址包装到返回给浏览器的HTTP应答中,浏览器接收到HTTP应答后,可以通过浏览器插件、ActiveX插件、客户端代理等从HTTP应答中提取网页基础框架和每个网页引用内容的第二IP地址。并且,可以通过浏览器插件、ActiveX插件、客户端代理等将提取到的网页基础框架和每个网页引用内容的第二IP地址保存到浏览器DNS缓存、操作系统DNS缓存或者hosts文件等中,以便后续用户访问同一网页时,浏览器插件、ActiveX插件、客户端代理等可以从浏览器DNS缓存、操作系统DNS缓存或者hosts文件等中获取每个网页引用内容的第二IP地址,直接向相关第二IP地址发起请求,跳过DNS解析的过程。
具体地,浏览器从与每个网页引用内容的第二IP地址对应的每个网页引用内容服务器中,获取每个网页引用内容,将网页基础框架与每个网页引用内容进行结合,得到网页。
本实施例所述的获取网页的方法,获取携带第一IP地址的HTTP请求后,得到与第一IP地址对应的所有网页引用内容的域名,直接向全局负载均衡服务器GSLB发送域名解析请求,当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。使用用户的真实IP地址作为调度依据,大幅度提高调度准确性。通过网络服务器来实现DNS解析而不是传统的客户端模式,通常情况网络服务器与GSLB之间的解析时间要优于客户端发起解析的时间,可以提高网页加载速度。
如图3所示,为本申请实施例的一种获取网页的方法流程图,该方法包括:
S201:获取与预访问网页的网页域名对应的第一IP地址。
S202:向网络服务器发送携带第一IP地址的HTTP请求。
具体地,网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,其中,域名解析请求中携带所有网页引用内容的域名。
具体地,GSLB接收到域名解析请求后,解析所有网页引用内容的域名,并结合本地CDN的IP地址和GSLB自身的调度算法,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的IP地址。
具体地,域名解析请求中还携带本地的用户端IP地址,相应地,GSLB接收到域名解析请求后,解析所有网页引用内容的域名,并结合用户端IP地址和GSLB自身的调度算法,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的IP地址
S203:接收网络服务器发送的网页基础框架,以及网络服务器转发的GSLB得到的每个网页引用内容的第二IP地址。
S204:从与每个网页引用内容的第二IP地址对应的每个网页引用内容服务器中,获取每个网页引用内容,将网页基础框架与每个网页引用内容进行结合,得到网页。
其中,参见图4,获取与预访问网页的网页域名对应的第一IP地址,包括:
S201a:获取预访问网页的网页域名。
S201b:查询本地是否缓存与网页域名对应的第一IP地址,以及GSLB地址,如果没有缓存,则执行S201c;否则,执行S201e。
S201c:向本地DNS发送携带网页域名的域名解析请求,使得本地DNS接收到域名解析请求后,获取与网页域名对应的第一IP地址,以及GSLB地址。
其中,本地DNS一般由用户使用的网络的运营商配置。
具体地,参见图5,本地DNS接收到域名解析请求后,获取与网页域名对应的第一IP地址,以及GSLB地址,包括:
S201c1:本地DNS查询本地DNS是否缓存与网页域名对应的第一IP地址,以及GSLB地址,如果缓存,则执行S201c2;否则,执行S201c4。
S201c2:本地DNS判断缓存的与网页域名对应的第一IP地址,以及GSLB地址是否有效,如果有效,则执行S201c3;否则,执行S201c4。
其中,当缓存的与网页域名对应的第一IP地址,以及GSLB地址的缓存时间没有超过预设的有效时间阈值时,缓存的与网页域名对应的第一IP地址,以及GSLB地址有效,否则,无效。
S201c3:本地DNS将缓存的与网页域名对应的第一IP地址,以及GSLB地址返回给本地(具体为浏览器),然后结束。
S201c4:本地DNS向根域名服务器(Root DNS)发送携带网页域名的域名解析请求,通过根域名服务器获取授权域名服务器。
具体地,根域名服务器一般不提供对指定域名的A(Address)记录解析服务,而是返回相关域名(例如:example.cn)的NS(Name Server)记录(NS记录是域名服务器记录,用来指定该域名由哪个DNS服务器来进行解析),指示本地DNS向相关NS记录的服务器请求解析,根据不同的情况,这个过程可以能会重复几次,最终本地DNS得到最终服务(例如:example.cn)的授权域名服务器。
S201c5:本地DNS通过授权域名服务器得到GSLB的IP地址,通过GSLB解析域名解析请求中携带的网页域名得到与网页域名对应的第一IP地址。
具体地,授权域名服务器可以指定其自身作为GSLB,也可以指定其他的服务器作为GSLB。
GSLB根据请求源IP地址(本地DNS的IP地址)或根据用户端IP地址,来定位使用哪一个CDN节点访问网页最优,将定位的CDN节点的IP地址作为与网页域名对应的第一IP地址。
S201c6:本地DNS将通过授权域名服务器得到的GSLB的IP地址,通过GSLB得到的与网页域名对应的第一IP地址返回给本地,并将GSLB的IP地址和与网页域名对应的第一IP地址缓存在本地DNS,然后结束。
将GSLB的IP地址和与网页域名对应的第一IP地址缓存在本地DNS以备下次同样的查询请求使用。
S201d:接收本地DNS返回的与网页域名对应的第一IP地址,以及GSLB地址,然后执行S202。
相应地,S202向网络服务器发送携带第一IP地址的HTTP请求;使得网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向网络服务器发送携带第一IP地址和GSLB地址的HTTP请求;使得网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
S201e:判断本地缓存的与网页域名对应的第一IP地址,以及GSLB地址是否有效,如果有效,则执行S201f;否则,执行S201c。
具体地,浏览器首先判断在本地的浏览器DNS缓存中是否缓存与网页域名对应的第一IP地址的记录,如果缓存,则判断缓存的与网页域名对应的第一IP地址是否有效,如果有效,则执行S201f;如果在本地的浏览器DNS缓存中没有缓存与网页域名对应的第一IP地址的记录,或缓存的与网页域名对应的第一IP地址无效,则浏览器通过操作系统判断本地操作系统的hosts文件(Linux操作系统中/etc/hosts,Windows操作系统中%SystemRoot%\system32\drivers\etc\hosts)中是否缓存与网页域名对应的第一IP地址的记录,如果缓存,则判断缓存的与网页域名对应的第一IP地址是否有效,如果有效,则执行S201f;如果在本地操作系统的hosts文件中没有缓存与网页域名对应的第一IP地址的记录,或缓存的与网页域名对应的第一IP地址无效,则执行S201c。
其中,当缓存的与网页域名对应的第一IP地址的缓存时间没有超过预设的有效时间阈值时,缓存的与网页域名对应的第一IP地址有效,否则,无效。
S201f:获取本地缓存的与网页域名对应的第一IP地址,以及GSLB地址,然后执行S202。。
相应地,S202向网络服务器发送携带第一IP地址的HTTP请求;使得网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向网络服务器发送携带第一IP地址和GSLB地址的HTTP请求;使得网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
本实施例所述的获取网页的方法,当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。使用用户的真实IP地址作为调度依据,大幅度提高调度准确性。通过网络服务器来实现DNS解析而不是传统的客户端模式,通常情况网络服务器与GSLB之间的解析时间要优于客户端发起解析的时间,可以提高网页加载速度。
如图6所示,为本申请实施例的一种获取网页的原理框图,浏览器发起正常的针对网页(如www.example.cn)的域名解析请求,完成DNS解析过程(1a,1b)。浏览器根据DNS返回的域名解析结果,向网络服务器发起HTTP请求(2)。网络服务器根据自己的配置文件、需要服务的网页内容等信息查询到网页基础框架,取得所有网页应用内容的域名(如img01.excdn.cn、img02.excdn.cn、static.excdn.cn等),使用EDNS方式、HTTP方式等向GSLB发起携带所有网页引用内容的域名的域名解析请求,且因为与网络服务器链接的是用户的真实IP地址,网络服务器可以将用户的真实IP地址也携带在域名解析请求中发送至GSLB(3a)。GSLB根据网络服务器传递的用户真实IP地址,结合自身的调度算法,将解析结果返回给网络服务器(3b)。网络服务器将解析结果返回给浏览器(4)。浏览器根据网页中的相关解析结果,直接发起对网络应用内容服务器(如的image web server)的请求(5a)并接收应答(5b),不再需要进行相关域名的多次DNS解析。
如图7所示,为本申请实施例的一种域名解析的方法流程图,该方法包括:
S301:接收域名解析请求,其中,域名解析请求中携带预访问网页中所有网页引用内容的域名,以及预访问网页对应的浏览器的用户端IP地址。
S302:解析所有网页引用内容的域名,并结合用户端IP地址和本地自身的调度算法,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
其中,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址之后,还包括:
将每个网页引用内容的域名对应的每个网页引用内容的第二IP地址发送给网络服务器,使得网络服务器将每个网页引用内容的第二IP地址,以及与第一IP地址对应的网页基础框架,发送至浏览器,其中,第一IP地址与预访问网页的网页域名对应;使得浏览器获取网页进行显示。
本实施例所述的域名解析的方法,当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。使用用户的真实IP地址作为调度依据,大幅度提高调度准确性。通过网络服务器来实现DNS解析而不是传统的客户端模式,通常情况网络服务器与GSLB之间的解析时间要优于客户端发起解析的时间,可以提高网页加载速度。
如图8所示,是本申请实施例的一种网络服务器,该网络服务器包括:
第一获取模块401,用于获取携带第一网络协议IP地址的超文本传输协议HTTP请求;
查询模块402,用于查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名;
第一发送模块403,用于向全局负载均衡服务器GSLB发送域名解析请求,其中,域名解析请求中携带所述所有网页引用内容的域名;
处理模块404,用于从GSLB获取每个网页引用内容的第二IP地址,其中,每个网页引用内容的第二IP地址与所有网页引用内容的域名中每个网页引用内容的域名相对应;
第二发送模块405,用于将网页基础框架和每个网页引用内容的第二IP地址发送至浏览器,使得浏览器获取网页进行显示。
进一步地,第一获取模块401包括:
第一获取单元,用于获取携带第一IP地址和GSLB地址的HTTP请求;
相应地,第一发送模块403包括:
第一发送单元,用于向GSLB地址对应的GSLB发送域名解析请求。
进一步地,第一发送模块403包括:
第一查询单元,用于查询本地的GSLB配置信息,得到本地对应的GSLB地址;其中,GSLB配置信息中包括本地对应的GSLB地址;
第二发送单元,用于向GSLB地址对应的GSLB发送域名解析请求。
进一步地,第一发送模块403包括:
第三发送单元,用于通过使用扩展域名服务器EDNS方式或HTTP方式,向GSLB发送域名解析请求。
进一步地,HTTP请求由浏览器获取与预访问网页的网页域名对应的第一IP地址后发起。
进一步地,第一发送模块还包括:
处理单元,用于向全局负载均衡服务器GSLB发送域名解析请求,其中,域名解析请求中携带所有网页引用内容的域名,以及发起HTTP请求的浏览器的用户端IP地址,使得GSLB接收到域名解析请求后,解析所有网页引用内容的域名,并结合用户端IP地址和GSLB自身的调度算法,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
需要说明的是,网络服务器(web Server),也称为WWW(WORLD WIDE WEB)服务器,主要功能是提供网上信息浏览服务。可以在网络服务器中设置原始内容处理器(OriginalContent Parser)、内容处理器(Content Parser)、GSLB客户端、最终内容处理器(FinalContent Parser),将第一获取模块、查询模块的查询与第一IP地址对应的网页基础框架的功能通过原始内容处理器实现,查询模块的解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名的功能通过内容处理器实现,第一发送模块的功能、处理模块的功能通过GSLB客户端实现,第二发送模块的功能通过最终内容处理器实现。
本实施例所述的网络服务器,当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。使用用户的真实IP地址作为调度依据,大幅度提高调度准确性。通过网络服务器来实现DNS解析而不是传统的客户端模式,通常情况网络服务器与GSLB之间的解析时间要优于客户端发起解析的时间,可以提高网页加载速度。
如图9所示,是本申请实施例的一种浏览器,该浏览器包括:
第二获取模块501,用于获取与预访问网页的网页域名对应的第一IP地址;
第三发送模块502,用于向网络服务器发送携带第一IP地址的HTTP请求;使得网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,其中,域名解析请求中携带所有网页引用内容的域名;
第一接收模块503,用于接收网络服务器发送的网页基础框架,以及网络服务器转发的GSLB得到的每个网页引用内容的第二IP地址,其中,每个网页引用内容的第二IP地址与所有网页引用内容的域名中每个网页引用内容的域名相对应;
结合模块504,用于从与每个网页引用内容的第二IP地址对应的每个网页引用内容服务器中,获取每个网页引用内容,将网页基础框架与每个网页引用内容进行结合,得到网页。
进一步地,第二获取模块501包括:
第二获取单元,用于获取所述预访问网页的网页域名;
第二查询单元,用于查询本地是否缓存与网页域名对应的第一IP地址,以及GSLB地址;
第四发送单元,用于如果第二查询单元的查询结果是没有缓存,则向本地域名服务器DNS发送携带网页域名的域名解析请求,使得所述本地DNS接收到域名解析请求后,获取与网页域名对应的第一IP地址,以及GSLB地址;
接收单元,用于接收所述本地DNS返回的与网页域名对应的第一IP地址,以及GSLB地址;
相应地,第三发送模块502包括:
第五发送单元,用于向网络服务器发送携带第一IP地址和GSLB地址的HTTP请求;使得网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
进一步地,第二获取模块501还包括:
判断单元,用于如果第二查询单元的查询结果是缓存,则判断本地缓存的与网页域名对应的第一IP地址,以及GSLB地址是否有效;
第三获取单元,用于如果判断单元的判断结果是有效,则获取本地缓存的与网页域名对应的第一IP地址,以及GSLB地址;
相应地,第三发送模块502包括:
第六发送单元,用于向网络服务器发送携带第一IP地址和GSLB地址的HTTP请求;使得网络服务器接收到HTTP请求后,查询与第一IP地址对应的网页基础框架,解析网页基础框架,得到与第一IP地址对应的所有网页引用内容的域名,向GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
进一步地,第二获取模块501还包括:
通知单元,用于如果判断单元的判断结果是没有效,则通知第四发送单元执行向本地DNS发送携带网页域名的域名解析请求的步骤。
需要说明的是,浏览器(Browser)包括Internet Explorer、FireFox,Chrome等浏览器;curl、wget等命令行工具;手机、电脑专用APP软件以及squid等代理服务器。可以在浏览器中设置GSLB处理器(GSLB Parse)和域名缓存器(DNS Cache),将第一接收模块和结合模块的功能通过GSLB处理器实现,将第二获取模块得到的与预访问网页的网页域名对应的第一IP地址缓存在域名缓存器,其中,第二获取模块、第三发送模块的功能通过客户端计算机(Client Computer)中的传统域名客户端(Traditional DNS Client)(包括客户端操作系统中的DNS解析和缓存模块)实现。客户端计算机可以采用Windows、Linux、MacOS、iOS、Android等操作系统。浏览器运行于客户端计算机中。
本实施例所述的浏览器,当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。使用用户的真实IP地址作为调度依据,大幅度提高调度准确性。通过网络服务器来实现DNS解析而不是传统的客户端模式,通常情况网络服务器与GSLB之间的解析时间要优于客户端发起解析的时间,可以提高网页加载速度。
如图10所示,是本申请实施例的一种全局负载均衡服务器GSLB,该GSLB包括:
第二接收模块601,用于接收域名解析请求,其中,域名解析请求中携带预访问网页中所有网页引用内容的域名,以及预访问网页对应的浏览器的用户端IP地址;
解析模块602,用于解析所有网页引用内容的域名,并结合用户端IP地址和本地自身的调度算法,得到与所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
进一步地,参见图11,GSLB还包括:
第四发送模块603,用于将每个网页引用内容的域名对应的每个网页引用内容的第二IP地址发送给网络服务器,使得网络服务器将每个网页引用内容的第二IP地址,以及与第一IP地址对应的网页基础框架,发送至浏览器,其中,第一IP地址与预访问网页的网页域名对应;使得浏览器获取网页进行显示。
需要说明的是,GSLB实现在广域网(包括互联网)上不同地域的服务器间的流量调配,保证使用最佳的服务器服务离自己最近的客户端,从而确保访问质量。GSLB中设置有调度策略数据库(Policy DB)(调度策略数据库中有调度算法),以及HTTPDNS处理器或EDNS处理器,第二接收模块、解析模块、第四发送模块的功能可以通过HTTPDNS处理器或EDNS处理器实现。
本实施例所述的GSLB,当网页中包含多个网页引用内容时,不需要多次发起域名解析请求,获取网页引用内容需要的时间短,提高了获取网页的效率、可以加快网页加载速度。使用用户的真实IP地址作为调度依据,大幅度提高调度准确性。通过网络服务器来实现DNS解析而不是传统的客户端模式,通常情况网络服务器与GSLB之间的解析时间要优于客户端发起解析的时间,可以提高网页加载速度。
所述网络服务器、浏览器、GSLB与前述的方法流程描述对应,不足之处参考上述方法流程的叙述,不再一一赘述。
上述说明示出并描述了本申请的若干优选实施例,但如前所述,应当理解本申请并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文所述发明构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本申请的精神和范围,则都应在本申请所附权利要求的保护范围内。

Claims (25)

1.一种获取网页的方法,其特征在于,所述方法包括:
获取携带第一网络协议IP地址的超文本传输协议HTTP请求;
查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名;
向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
从所述GSLB获取每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
将所述网页基础框架和所述每个网页引用内容的第二IP地址发送至浏览器,使得所述浏览器获取网页进行显示。
2.如权利要求1所述的方法,其特征在于,获取携带第一IP地址的HTTP请求,包括:
获取携带所述第一IP地址和GSLB地址的HTTP请求;
相应地,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向所述GSLB地址对应的GSLB发送域名解析请求。
3.如权利要求1所述的方法,其特征在于,向全局负载均衡服务器GSLB发送域名解析请求,包括:
查询本地的GSLB配置信息,得到本地对应的GSLB地址;其中,所述GSLB配置信息中包括本地对应的GSLB地址;
向所述GSLB地址对应的GSLB发送域名解析请求。
4.如权利要求1所述的方法,其特征在于,向全局负载均衡服务器GSLB发送域名解析请求,包括:
通过使用扩展域名服务器EDNS方式或HTTP方式,向所述GSLB发送域名解析请求。
5.如权利要求1所述的方法,其特征在于,所述HTTP请求由浏览器获取与预访问网页的网页域名对应的第一IP地址后发起。
6.如权利要求1-5任一权利要求所述的方法,其特征在于,向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名,包括:
向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名,以及发起所述HTTP请求的浏览器的用户端IP地址,使得所述GSLB接收到所述域名解析请求后,解析所述所有网页引用内容的域名,并结合所述用户端IP地址和所述GSLB自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
7.一种获取网页的方法,其特征在于,所述方法包括:
获取与预访问网页的网页域名对应的第一IP地址;
向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
接收所述网络服务器发送的网页基础框架,以及所述网络服务器转发的所述GSLB得到的每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
从与所述每个网页引用内容的第二IP地址对应的每个网页引用内容服务器中,获取所述每个网页引用内容,将所述网页基础框架与所述每个网页引用内容进行结合,得到网页。
8.如权利要求7所述的方法,其特征在于,获取与预访问网页的网页域名对应的第一IP地址,包括:
获取所述预访问网页的网页域名;
查询本地是否缓存与所述网页域名对应的第一IP地址,以及GSLB地址;
如果没有缓存,则向本地域名服务器DNS发送携带所述网页域名的域名解析请求,使得所述本地DNS接收到域名解析请求后,获取与所述网页域名对应的第一IP地址,以及GSLB地址;
接收所述本地DNS返回的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
9.如权利要求8所述的方法,其特征在于,查询本地是否缓存与所述网页域名对应的第一IP地址,以及GSLB地址之后,还包括:
如果缓存,则判断本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址是否有效;
如果有效,则获取本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,包括:
向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
10.如权利要求9所述的方法,其特征在于,判断本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址是否有效之后,还包括:
如果没有效,则执行所述向本地DNS发送携带所述网页域名的域名解析请求的步骤。
11.一种域名解析的方法,其特征在于,所述方法包括:
接收域名解析请求,其中,所述域名解析请求中携带预访问网页中所有网页引用内容的域名,以及所述预访问网页对应的浏览器的用户端IP地址;
解析所述所有网页引用内容的域名,并结合所述用户端IP地址和本地自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
12.如权利要求11所述的方法,其特征在于,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址之后,还包括:
将所述每个网页引用内容的域名对应的每个网页引用内容的第二IP地址发送给网络服务器,使得所述网络服务器将所述每个网页引用内容的第二IP地址,以及与第一IP地址对应的网页基础框架,发送至浏览器,其中,所述第一IP地址与所述预访问网页的网页域名对应;使得所述浏览器获取网页进行显示。
13.一种网络服务器,其特征在于,所述网络服务器包括:
第一获取模块,用于获取携带第一网络协议IP地址的超文本传输协议HTTP请求;
查询模块,用于查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名;
第一发送模块,用于向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
处理模块,用于从所述GSLB获取每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
第二发送模块,用于将所述网页基础框架和所述每个网页引用内容的第二IP地址发送至浏览器,使得所述浏览器获取网页进行显示。
14.如权利要求13所述的网络服务器,其特征在于,所述第一获取模块包括:
第一获取单元,用于获取携带所述第一IP地址和GSLB地址的HTTP请求;
相应地,所述第一发送模块包括:
第一发送单元,用于向所述GSLB地址对应的GSLB发送域名解析请求。
15.如权利要求13所述的网络服务器,其特征在于,所述第一发送模块包括:
第一查询单元,用于查询本地的GSLB配置信息,得到本地对应的GSLB地址;其中,所述GSLB配置信息中包括本地对应的GSLB地址;
第二发送单元,用于向所述GSLB地址对应的GSLB发送域名解析请求。
16.如权利要求13所述的网络服务器,其特征在于,所述第一发送模块包括:
第三发送单元,用于通过使用扩展域名服务器EDNS方式或HTTP方式,向所述GSLB发送域名解析请求。
17.如权利要求13所述的网络服务器,其特征在于,所述HTTP请求由浏览器获取与预访问网页的网页域名对应的第一IP地址后发起。
18.如权利要求13-17任一权利要求所述的网络服务器,其特征在于,所述第一发送模块还包括:
处理单元,用于向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名,以及发起所述HTTP请求的浏览器的用户端IP地址,使得所述GSLB接收到所述域名解析请求后,解析所述所有网页引用内容的域名,并结合所述用户端IP地址和所述GSLB自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
19.一种浏览器,其特征在于,所述浏览器包括:
第二获取模块,用于获取与预访问网页的网页域名对应的第一IP地址;
第三发送模块,用于向网络服务器发送携带所述第一IP地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向全局负载均衡服务器GSLB发送域名解析请求,其中,所述域名解析请求中携带所述所有网页引用内容的域名;
第一接收模块,用于接收所述网络服务器发送的网页基础框架,以及所述网络服务器转发的所述GSLB得到的每个网页引用内容的第二IP地址,其中,所述每个网页引用内容的第二IP地址与所述所有网页引用内容的域名中每个网页引用内容的域名相对应;
结合模块,用于从与所述每个网页引用内容的第二IP地址对应的每个网页引用内容服务器中,获取所述每个网页引用内容,将所述网页基础框架与所述每个网页引用内容进行结合,得到网页。
20.如权利要求19所述的浏览器,其特征在于,所述第二获取模块包括:
第二获取单元,用于获取所述预访问网页的网页域名;
第二查询单元,用于查询本地是否缓存与所述网页域名对应的第一IP地址,以及GSLB地址;
第四发送单元,用于如果所述第二查询单元的查询结果是没有缓存,则向本地域名服务器DNS发送携带所述网页域名的域名解析请求,使得所述本地DNS接收到域名解析请求后,获取与所述网页域名对应的第一IP地址,以及GSLB地址;
接收单元,用于接收所述本地DNS返回的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,所述第三发送模块包括:
第五发送单元,用于向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
21.如权利要求20所述的浏览器,其特征在于,所述第二获取模块还包括:
判断单元,用于如果所述第二查询单元的查询结果是缓存,则判断本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址是否有效;
第三获取单元,用于如果所述判断单元的判断结果是有效,则获取本地缓存的与所述网页域名对应的第一IP地址,以及GSLB地址;
相应地,所述第三发送模块包括:
第六发送单元,用于向网络服务器发送携带所述第一IP地址和所述GSLB地址的HTTP请求,使得所述网络服务器接收到所述HTTP请求后,查询与所述第一IP地址对应的网页基础框架,解析所述网页基础框架,得到与所述第一IP地址对应的所有网页引用内容的域名,向所述GSLB地址对应的全局负载均衡服务器GSLB发送域名解析请求。
22.如权利要求21所述的浏览器,其特征在于,所述第二获取模块还包括:
通知单元,用于如果所述判断单元的判断结果是没有效,则通知所述第四发送单元执行所述向本地DNS发送携带所述网页域名的域名解析请求的步骤。
23.一种全局负载均衡服务器GSLB,其特征在于,所述GSLB包括:
第二接收模块,用于接收域名解析请求,其中,所述域名解析请求中携带预访问网页中所有网页引用内容的域名,以及所述预访问网页对应的浏览器的用户端IP地址;
解析模块,用于解析所述所有网页引用内容的域名,并结合所述用户端IP地址和本地自身的调度算法,得到与所述所有网页引用内容的域名中每个网页引用内容的域名对应的每个网页引用内容的第二IP地址。
24.如权利要求23所述的GSLB,其特征在于,所述GSLB还包括:
第四发送模块,用于将所述每个网页引用内容的域名对应的每个网页引用内容的第二IP地址发送给网络服务器,使得所述网络服务器将所述每个网页引用内容的第二IP地址,以及与第一IP地址对应的网页基础框架,发送至浏览器,其中,所述第一IP地址与所述预访问网页的网页域名对应;使得所述浏览器获取网页进行显示。
25.一种获取网页的系统,其特征在于,所述系统包括以下至少一个:权利要求13-18任一所述的网络服务器、权利要求19-22任一所述的浏览器和权利要求23-24任一所述的全局负载均衡服务器GSLB。
CN201410213336.6A 2014-05-20 2014-05-20 获取网页的方法、系统、网络服务器、浏览器和gslb Active CN105100294B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201410213336.6A CN105100294B (zh) 2014-05-20 2014-05-20 获取网页的方法、系统、网络服务器、浏览器和gslb
TW103134239A TWI656772B (zh) 2014-05-20 2014-10-01 獲取網頁的方法、系統、網路伺服器、瀏覽器和gslb
US14/712,527 US10225315B2 (en) 2014-05-20 2015-05-14 Method and system for acquiring web pages
PCT/US2015/031153 WO2015179244A1 (en) 2014-05-20 2015-05-15 Method and system for acquiring web pages
EP15728677.4A EP3146698B1 (en) 2014-05-20 2015-05-15 Method and system for acquiring web pages
HK16101378.2A HK1213704A1 (zh) 2014-05-20 2016-02-05 獲取網頁的方法、系統、網絡服務器、瀏覽器和

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410213336.6A CN105100294B (zh) 2014-05-20 2014-05-20 获取网页的方法、系统、网络服务器、浏览器和gslb

Publications (2)

Publication Number Publication Date
CN105100294A CN105100294A (zh) 2015-11-25
CN105100294B true CN105100294B (zh) 2018-05-08

Family

ID=54556923

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410213336.6A Active CN105100294B (zh) 2014-05-20 2014-05-20 获取网页的方法、系统、网络服务器、浏览器和gslb

Country Status (5)

Country Link
US (1) US10225315B2 (zh)
EP (1) EP3146698B1 (zh)
CN (1) CN105100294B (zh)
HK (1) HK1213704A1 (zh)
TW (1) TWI656772B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9912631B2 (en) * 2013-12-26 2018-03-06 Fastly, Inc. Content node selection based on classless prefix
CN106993009A (zh) * 2016-01-20 2017-07-28 青岛海信移动通信技术股份有限公司 一种在浏览器中加载网页的方法和装置
CN106210000B (zh) * 2016-06-30 2019-11-01 武汉斗鱼网络科技有限公司 一种对网页前端资源进行负载均衡的方法及系统
CN107623751B (zh) * 2016-07-14 2021-02-12 网宿科技股份有限公司 Dns网络系统、域名解析方法及系统
CN108040085A (zh) * 2017-11-20 2018-05-15 广州华多网络科技有限公司 网络接入方法、装置及服务器
CN109831511B (zh) * 2019-02-18 2020-10-23 华为技术有限公司 调度内容分发网络cdn边缘节点的方法及设备
CN110113440B (zh) * 2019-04-15 2022-06-03 北京奇艺世纪科技有限公司 一种请求响应方法、装置及终端
CN113316926B (zh) * 2019-05-16 2023-12-05 深圳市欢太科技有限公司 域名处理方法、装置、电子设备以及存储介质
CN110134403B (zh) * 2019-06-04 2022-08-12 厦门大学嘉庚学院 基于异步http请求的可配置域名解析爬虫框架及方法
CN112866424A (zh) * 2019-11-28 2021-05-28 华为技术有限公司 域名查询方法以及相关设备
CN111835778B (zh) * 2020-07-20 2022-09-30 上海万物新生环保科技集团有限公司 一种用于实现一级域名跨域访问的方法与设备
CN112039888B (zh) * 2020-08-31 2023-06-02 成都安恒信息技术有限公司 一种域名访问控制的接入方法、装置、设备及介质
CN113239301B (zh) * 2021-04-22 2023-02-07 维沃移动通信(杭州)有限公司 页面加载请求方法、装置和电子设备
CN114430408B (zh) * 2021-12-22 2024-01-02 天翼云科技有限公司 一种域名解析调度方法、装置、服务器及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101431532A (zh) * 2008-12-15 2009-05-13 中国电信股份有限公司 一种内容路由方法、负载均衡设备和资源管理设备
CN102215247A (zh) * 2010-05-06 2011-10-12 华为技术有限公司 网络就近性负载均衡方法及设备
CN103297472A (zh) * 2012-03-01 2013-09-11 上海盛霄云计算技术有限公司 一种应用于内容分发网络的重定向方法及内容分发节点

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6108703A (en) * 1998-07-14 2000-08-22 Massachusetts Institute Of Technology Global hosting system
US7454500B1 (en) * 2000-09-26 2008-11-18 Foundry Networks, Inc. Global server load balancing
US7970876B2 (en) * 2002-07-23 2011-06-28 Avaya Communication Israel Ltd. Global server load balancer
US8326956B2 (en) * 2006-03-31 2012-12-04 Cisco Technology, Inc. System and method for handling persistence information in a network
US20100042743A1 (en) * 2008-08-13 2010-02-18 Sk Telecom. Co., Ltd Contents delivery system and method using page redirection, and gslb switch thereof
US8260926B2 (en) * 2008-11-25 2012-09-04 Citrix Systems, Inc. Systems and methods for GSLB site persistence
US8171124B2 (en) * 2008-11-25 2012-05-01 Citrix Systems, Inc. Systems and methods for GSLB remote service monitoring
CN101431535B (zh) * 2008-12-01 2011-12-28 中兴通讯股份有限公司 一种中继频道的实现方法
US8635367B2 (en) * 2009-12-23 2014-01-21 Citrix Systems, Inc. Systems and methods for managing static proximity in multi-core GSLB appliance
US9137302B1 (en) * 2009-12-29 2015-09-15 The Directv Group, Inc. Content distribution network selector
US8326947B2 (en) * 2010-02-12 2012-12-04 Research In Motion Limited Method, system and apparatus for delivering web content
US8745128B2 (en) * 2010-09-01 2014-06-03 Edgecast Networks, Inc. Optimized content distribution based on metrics derived from the end user
US9900252B2 (en) 2013-03-08 2018-02-20 A10 Networks, Inc. Application delivery controller and global server load balancer
US9998530B2 (en) * 2013-10-15 2018-06-12 Nicira, Inc. Distributed global load-balancing system for software-defined data centers

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101431532A (zh) * 2008-12-15 2009-05-13 中国电信股份有限公司 一种内容路由方法、负载均衡设备和资源管理设备
CN102215247A (zh) * 2010-05-06 2011-10-12 华为技术有限公司 网络就近性负载均衡方法及设备
CN103297472A (zh) * 2012-03-01 2013-09-11 上海盛霄云计算技术有限公司 一种应用于内容分发网络的重定向方法及内容分发节点

Also Published As

Publication number Publication date
US10225315B2 (en) 2019-03-05
EP3146698B1 (en) 2020-01-08
TWI656772B (zh) 2019-04-11
US20150341414A1 (en) 2015-11-26
CN105100294A (zh) 2015-11-25
EP3146698A1 (en) 2017-03-29
HK1213704A1 (zh) 2016-07-08
TW201545520A (zh) 2015-12-01

Similar Documents

Publication Publication Date Title
CN105100294B (zh) 获取网页的方法、系统、网络服务器、浏览器和gslb
US10110695B1 (en) Key resource prefetching using front-end optimization (FEO) configuration
US9342620B2 (en) Loading of web resources
WO2016101763A1 (zh) 通过cdn下载资源的实现方法和装置、服务器、客户端
US9871850B1 (en) Enhanced browsing using CDN routing capabilities
EP3175366B1 (en) Web redirection for content scanning
US9088462B2 (en) Common web accessible data store for client side page processing
GB2494105A (en) Verifying the transfer of a data file by checking the files characteristics in a proxy server
CN107710171B (zh) 加速的子资源加载
CN103152367A (zh) 一种缓存的动态维护更新方法及系统
US9654575B1 (en) Pass-through web traffic systems and methods
CN103716319B (zh) 一种Web访问优化的装置和方法
US10764402B2 (en) Leveraging time-windows generated by web browser pre-connections
WO2017020597A1 (zh) 一种资源缓存方法及装置
CN106919595B (zh) 一种用于Cookie映射的方法、装置及电子设备
AU2021301454B2 (en) Method and system for propagating data between different domains in a privacy focused way
US9729650B2 (en) Providing data to a network terminal
CN207234829U (zh) 低流量网页访问系统
CN109977332A (zh) 移动端的图片访问方法、装置及存储介质
CN110474809A (zh) 用于输出信息的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1213704

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant