CN111200643A - 探测网站地址的方法、装置及系统 - Google Patents

探测网站地址的方法、装置及系统 Download PDF

Info

Publication number
CN111200643A
CN111200643A CN201911370973.3A CN201911370973A CN111200643A CN 111200643 A CN111200643 A CN 111200643A CN 201911370973 A CN201911370973 A CN 201911370973A CN 111200643 A CN111200643 A CN 111200643A
Authority
CN
China
Prior art keywords
website
url
ipv4
link
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911370973.3A
Other languages
English (en)
Inventor
李苗
王铭铖
邢亚迪
李矩希
林�章
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hillstone Networks Corp
Original Assignee
Hillstone Networks Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hillstone Networks Corp filed Critical Hillstone Networks Corp
Priority to CN201911370973.3A priority Critical patent/CN111200643A/zh
Publication of CN111200643A publication Critical patent/CN111200643A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/563Data redirection of data network streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/09Mapping addresses
    • H04L61/25Mapping addresses of the same type
    • H04L61/2503Translation of Internet protocol [IP] addresses
    • H04L61/251Translation of Internet protocol [IP] addresses between different IP versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/45Network directories; Name-to-address mapping
    • H04L61/4505Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请实施例公开了一种探测网站地址的方法、装置及系统。其中,该方法包括:在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;将上述目标外链网站的第二URL发送至上述IPv6客户端。本申请实施例解决了现有技术中采用手工操作方式通过抓取报文来查找IPv4外链网站的URL,不仅工作量巨大且容易遗漏的技术问题。

Description

探测网站地址的方法、装置及系统
技术领域
本申请实施例涉及通信技术领域,具体而言,涉及一种探测网站地址的方法、装置及系统。
背景技术
IPv4向IPv6过渡的过程中,当IPv6客户端浏览器通过支持双协议栈的Web应用代理,则可能遇到一个IPv6天窗问题,现有的解决IPV6的天窗问题的方案,存在以下缺陷:(1)在应用流量中,获取IPV4外链网站的URL,现在大多数工程师都是借助Wireshark等网络分析工具,采用手工操作方式,通过抓取报文来查找IPV4外链网站的URL,不仅工作量巨大且容易遗漏;(2)在应用流量中,重定向现象也很普遍,现有技术在重新请求目标IPV4外链网站的URL的过程中,如果该目标IPV4外链网站的URL携带重定向信息,重定向的URL仍然是IPV4的外链的话,该URL对于IPV6客户端来说是不可达的,则仍然会存在IPV6天窗问题;(3)在应用流量中,普遍存在多级IPV4外链,即IPV4外链网站的返回给IPV6客户端的网页中仍然存在IPV4外链,IPV6客户端请求目标IPV4外链网站的URL,仍然会存在天窗问题。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种探测网站地址的方法、装置及系统,以至少解决现有技术中采用手工操作方式通过抓取报文来查找IPv4外链网站的URL,不仅工作量巨大且容易遗漏的技术问题。
根据本申请实施例的一个方面,提供了一种探测网站地址的方法,包括:在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;将上述目标外链网站的第二URL发送至上述IPv6客户端。
可选地,在依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL之后,上述方法还包括:依据上述网页内容获取上述初始外链网站的第一URL的DNS域名;检测是否已存储有上述DNS域名;若检测结果为否,则存储上述DNS域名,若检测结果为是,则不存储上述DNS域名。
可选地,在依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL之后,上述方法还包括:依据上述网页内容获取上述初始外链网站的第一URL的DNS域名;检测上述DNS域名是否与上述导流标识符相同;若检测结果为不同,则存储上述DNS域名,若检测结果为相同,则不存储上述DNS域名。
可选地,上述IPv4网站的服务器在多个IPv4外链网站的DNS域名相同的情况下,返回一次上述DNS域名;在上述IPv4外链网站的上述DNS域名与上述导流标识符相同的情况下,无需返回上述DNS域名;在检测到上述目标外链网站的第二URL已添加上述导流标识符的情况下,无需返回上述目标外链网站的DNS域名。
可选地,在存储上述DNS域名之后,上述方法还包括:通过对与存储的DNS域名相同的初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL;将上述目标外链网站的第二URL发送至IPv6客户端。
可选地,在接收到IPv6客户端发送的IPv4网站请求之前,上述方法还包括:建立与上述IPv6客户端的第一连接,以及建立与上述IPv4网站之间的第二连接。
可选地,在将上述目标外链网站的第二URL发送至上述IPv6客户端之后,上述方法还包括:在检测到IPv6客户端对上述目标外链网站的第二URL发起请求的情况下,删除上述目标外链网站的第二URL中的上述导流标识符,并向IPv4外链网站请求初始外链网站的第一URL;接收上述初始外链网站返回的响应报文,其中,上述响应报文包括返回的网页信息和HTTP首部;检测上述响应报文的HTTP首部是否包含位置字段;若检测结果为是,则对上述位置字段的初始URL添加导流标识符,得到目标位置字段的目标URL,并将上述目标URL发送至上述IPv6客户端,其中,上述目标URL包括上述初始URL和上述导流标识符。
可选地,在将上述目标URL发送至上述IPv6客户端之后,上述方法还包括:接收上述IPv6客户端对上述目标位置字段的目标URL发起的第二请求;删除上述目标位置字段中的上述导流标识符,并向上述IPv4外链网站请求原始重定向的URL;接收上述IPv4外链网站返回的网页信息。
可选地,在接收上述IPv4外链网站反馈的网页信息之后,上述方法还包括:依据上述网页信息检测上述IPv4外链网站是否包含IPv4多级外链;若检测结果为是,则对多级IPv4外链添加导流标识符,得到目标外链网站的第二URL,并将上述目标外链网站的第二URL发送至上述IPv6客户端;若检测结果为否,则直接将上述网页信息发送至上述IPv6客户端。
根据本申请实施例的另一方面,还提供了一种探测网站地址的系统,包括:IPv6客户端,用于发送IPv4网站请求;网关设备,与上述IPv6客户端连接,用于在接收到上述IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站;上述IPv4网站,与上述网关设备连接,用于返回与上述IPv4网站请求对应的网页内容至上述网关设备;上述网关设备还用于依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至上述网关设备;并将上述目标外链网站的第二URL发送至上述IPv6客户端。
根据本申请实施例的另一方面,还提供了一种探测网站地址的装置,包括:第一通讯模块,用于在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;获取模块,用于依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;第二通讯模块,用于将上述目标外链网站的第二URL发送至上述IPv6客户端。
根据本申请实施例的另一方面,还提供了一种存储介质,上述存储介质包括存储的程序,其中,在上述程序运行时控制上述存储介质所在设备执行任意一项上述的探测网站地址的方法。
根据本申请实施例的另一方面,还提供了一种处理器,上述处理器用于运行存储在存储器中的程序,其中,上述程序运行时执行任意一项上述的探测网站地址的方法。
在本申请实施例中,通过在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;将上述目标外链网站的第二URL发送至上述IPv6客户端。
由此,本申请实施例达到了通过自动探测的方式来解决流量中获取IPv4外链网站的URL问题的目的,从而实现了通过在多级IPv4的外链中添加NAT64网关导流标识符,从而将多级IPv4外链网站的URL导流至NAT64网关,解决多级IPv4外链引起的天窗问题的技术效果,进而解决了现有技术中采用手工操作方式通过抓取报文来查找IPv4外链网站的URL,不仅工作量巨大且容易遗漏的技术问题。
附图说明
此处所说明的附图用来提供对本申请实施例的进一步理解,构成本申请的一部分,本申请实施例的示意性实施例及其说明用于解释本申请实施例,并不构成对本申请实施例的不当限定。在附图中:
图1是根据本申请实施例的一种探测网站地址的方法的流程图;
图2是根据本申请实施例的一种可选的探测网站地址的方法的流程图;
图3是根据本申请实施例的一种可选的探测网站地址的方法的流程图;
图4是根据本申请实施例的一种可选的探测网站地址的方法的流程图;
图5是根据本申请实施例的一种可选的探测网站地址的方法的流程图;
图6是根据本申请实施例的一种可选的探测网站地址的方法的交互示意图;
图7是根据本申请实施例的一种探测网站地址的系统的结构示意图;
图8是根据本申请实施例的一种探测网站地址的装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请实施例方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请实施例一部分的实施例,而不是全部的实施例。基于本申请实施例中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请实施例保护的范围。
需要说明的是,本申请实施例的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请实施例的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先,为方便理解本申请实施例,下面将对本申请实施例中所涉及的部分术语或名词进行解释说明:
NAT64网关:是一种通过网络地址转换(NAT)形式促成IPv6与IPv4主机间通信的IPv6转换机制,需要至少一个IPv4地址和一个包含32位地址空间的IPv6网段来完成IPv4与IPv6协议间的翻译。
天窗问题:当IPv6客户端访问位于NAT64网关之后的IPv4主网站时,如果IPv4主网站的网页中携带有IPv4外链URL(即采用IPv4协议才能正常访问的不属于主网站的网页资源),当该网页到达IPv6客户端进行渲染时,IPv6客户端会直接采用IPv6协议访问该IPv4外链URL,由于正常情况下IPv6客户端对该IPv4外链URL对应的网页资源访问不会经过NAT64网关,因此,该IPv4外链URL对IPv6客户端来说是IPv6不可达,因此,该IPv4外链网站的URL所对应的网页内容无法在IPv6客户端浏览器上正常显示,即出现了所谓的IPv6天窗。
实施例1
根据本申请实施例,提供了一种探测网站地址的方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本申请实施例的一种探测网站地址的方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;
步骤S104,依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;
步骤S106,将上述目标外链网站的第二URL发送至上述IPv6客户端。
在本申请实施例中,通过在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;将上述目标外链网站的第二URL发送至上述IPv6客户端。
由此,本申请实施例达到了通过自动探测的方式来解决流量中获取IPv4外链网站的URL问题的目的,从而实现了通过在多级IPv4的外链中添加NAT64网关导流标识符,从而将多级IPv4外链网站的URL导流至NAT64网关,解决多级IPv4外链引起的天窗问题的技术效果,进而解决了现有技术中采用手工操作方式通过抓取报文来查找IPv4外链网站的URL,不仅工作量巨大且容易遗漏的技术问题。
本申请实施例主要通过自动探测的方式来解决流量中获取IPv4外链网站的URL的技术问题;其次,当目标外链网站的第二URL携带重定向信息时,仍然会存在IPv6天窗问题,所以本申请实施例主要通过将IPv4外链URL携带的重定向URL加入NAT64网关导流标识,从而将重定向URL导流至NAT64网关,解决由于重定向信息引起的IPv6天窗问题;最后,当返回给IPv6客户端的网页中存在多级IPV4外链时,仍然会存在天窗问题,所以本申请实施例通过在多级IPv4的外链中添加NAT64网关导流标识符,从而将多级IPv4外链网站的URL导流至NAT64网关,解决多级IPv4外链引起的天窗问题。
在一种可选的实施例中,在接收到IPv6客户端发送的IPv4网站请求之前,上述方法还包括:建立与上述IPv6客户端的第一连接,以及建立与上述IPv4网站之间的第二连接。
作为一种可选的实施例,在获取IPv4网站中的IPv4外链网站的过程中,首先需要建立IPv6客户端与NAT64网关之间的连接,以及NAT64网关与IPv4网站之间的连接,并使IPv6客户端请求一次IPv4网站;IPv4网站将网页内容和数据信息返回给NAT64网关,NAT64网关依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;并将上述目标外链网站的第二URL发送至上述IPv6客户端。
可选的,在IPv4网站将网页内容和数据信息返回给NAT64网关之后,NAT64网关对javascript、text、application、json、xml类型的页面的文本按照PCRE语法写成的REGEX正则表达式,进行匹配,当匹配到符合正则表达式的文本时,会将匹配到的IPv4外链网站的DNS域名保存在NAT64网关,例如:在页面中匹配到<a href=http://www.sohu.com/a.html>,NAT64网关会将www.sohu.com保存下来,目的是进一步为该初始IPv4外链网站的URL添加NAT64网关导流标识符,组成目标外链网站的第二URL并返回给IPv6客户端。
在一种可选的实施例中,上述IPv4网站的服务器在多个IPv4外链网站的DNS域名相同的情况下,返回一次上述DNS域名;在上述IPv4外链网站的上述DNS域名与上述导流标识符相同的情况下,无需返回上述DNS域名;在检测到上述目标外链网站的第二URL已添加上述导流标识符的情况下,无需返回上述目标外链网站的DNS域名。
作为一种可选的实施例,在获取IPv4外链网站的过程中,本申请实施例中还以进行以下处理:
1)对于DNS域名相同的IPv4外链网站,仅会返回一次该DNS域名。例如:在页面中探测到<a href=http://www.sohu.com/a.html>和<a href=http://www.sohu.com/news/b.html>,则只会将www.sohu.com返回一次到NAT64网关。
2)对于探测到IPv4外链网站的DNS域名与导流标识符相同的情况,不会将该DNS域名返回给NAT64网关;需要说明的是,出现上述情况的原因有以下两个:一、或许该URL不属于IPv4外链;二、或许该URL是添加过NAT64网关导流标识符的目标IPv4外链网站的URL。
3)当再次进行探测时,对于已经添加过NAT64网关导流标识符的目标外链网站的第二URL,不会将该IPv4外链网站的DNS域名返回给NAT64网关。例如:探测到<a href=http://www.sohu.com/index.html>,该外链添加NAT64网关导流标识符后是<a href=http://www.abc.com/proxy.http.www.sohu.com/index.html>,再次对IPv4网站进行探测时,则www.abc.com以及www.sohu.com不会返回给NAT64,极大的减少了工作量,同时也避免了重复改写IPv4外链网站的URL。
在一种可选的实施例中,如图2所示,在依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL之后,上述方法还包括:
步骤S202,依据上述网页内容获取上述初始外链网站的第一URL的DNS域名;
步骤S204,检测是否已存储有上述DNS域名;
步骤S206,若检测结果为否,则存储上述DNS域名;
步骤S208,若检测结果为是,则不存储上述DNS域名。
在上述可选的实施例中,NAT64网关在依据上述网页内容获取上述IPv4网站的初始外链网站的第一之后,还依据上述网页内容获取上述初始外链网站的第一URL的DNS域名;检测NAT64网关是否已存储有上述DNS域名;若检测结果为否,则存储上述DNS域名至NAT64网关,若检测结果为是,则不存储上述DNS域名至NAT64网关。
作为一种可选的实施例,在存储上述DNS域名之后,上述方法还包括:通过对与存储的DNS域名相同的初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL;将上述目标外链网站的第二URL发送至IPv6客户端。
在一种可选的实施例中,在依据上述网页内容获取上述IPv4网站的初始外链网站的第一URL之后,上述方法还包括:
步骤S302,依据上述网页内容获取上述初始外链网站的第一URL的DNS域名;
步骤S304,检测上述DNS域名是否与上述导流标识符相同;
步骤S306,若检测结果为不同,则存储上述DNS域名,若检测结果为相同,则不存储上述DNS域名。
在上述可选的实施例中,在依据上述网页内容获取上述IPv4网站的初始外链网站的第一URL之后,NAT64网关还依据上述网页内容获取上述初始外链网站的第一URL的DNS域名,并检测上述DNS域名是否与上述导流标识符相同;其中,若检测结果为不同,则存储上述DNS域名至该NAT64网关,若检测结果为相同,则不存储上述DNS域名至该NAT64网关。
在一种可选的实施例中,如图3所示,在将上述目标外链网站的第二URL发送至上述IPv6客户端之后,上述方法还包括:
步骤S402,在检测到IPv6客户端对所述目标外链网站的第二URL发起请求的情况下,删除所述目标外链网站的第二URL中的所述导流标识符,并向IPv4外链网站请求初始外链网站的第一URL;
步骤S404,接收所述初始外链网站返回的响应报文,其中,所述响应报文包括返回的网页信息和HTTP首部;
步骤S406,检测上述响应报文的HTTP首部是否包含位置字段;
步骤S408,若检测结果为是,则对上述位置字段的初始URL添加导流标识符,得到目标位置字段的目标URL,并将上述目标URL发送至上述IPv6客户端,其中,上述目标URL包括上述初始URL和上述导流标识符。
在上述可选的实施例中,在IPv4网站的服务端将将上述目标外链网站的第二URL返回给NAT64网关之后,NAT64网关对目标外链网站的第二URL发起请求;删除上述目标外链网站的第二URL中的上述导流标识符,并向IPv4外链网站请求初始外链网站的第一URL;接收上述IPV4初始外链网站返回的响应报文,其中,响应报文包括返回的网页信息和HTTP首部;并检测响应报文的HTTP首部是否含有位置字段(location字段),若没有location字段,NAT64网关直接将结果返回给IPV6客户端;若含有location字段,NAT64网关对location字段的初始URL加入NAT64网关导流标识符,组成location的目标URL,并将结果返回给IPv6客户端。
需要说明的是,上述location字段可以但不限于存在以下两种情况:
1)例如:location字段是“Location:https://www.sohu.com/index.html”,则NAT64网关对location字段添加NAT64网关导流标识符后的location字段的目标URL是“Location:https://www.abc.com/proxy.https.sohu.com/index.html”;
2)例如:location字段是“Location:/www.sohu.com/index.html”,NAT64网关对location字段添加NAT64网关导流标识符后的location字段的目标URL是“Location:/ www.abc.com/proxy.https.sohu.com/index.html”。
在一种可选的实施例中,如图4所示,在将上述目标URL发送至上述IPv6客户端之后,上述方法还包括:
步骤S502,接收上述IPv6客户端对上述目标位置字段的目标URL发起的第二请求;
步骤S504,删除上述目标位置字段中的上述导流标识符,并向上述IPv4外链网站请求原始重定向的URL;
步骤S506,接收上述IPv4外链网站返回的网页信息。
作为一种可选的实施例,在IPv6客户端重新发送的请求location字段中的目标URL的第二请求至NAT64网关后,NAT64网关删除目标位置字段中添加的NAT64网关导流标识符,对location字段中的初始URL进行请求,IPv4外链网站将原始IPv4外链网站的网页内容返回给NAT64网关。
在一种可选的实施例中,如图5所示,在接收上述IPv4外链网站反馈的网页信息之后,上述方法还包括:
步骤S602,依据上述网页信息检测上述IPv4外链网站是否包含IPv4多级外链;
步骤S604,若检测结果为是,则对多级IPv4外链添加导流标识符,得到目标外链网站的第二URL,并将上述目标外链网站的第二URL发送至上述IPv6客户端;
步骤S606,若检测结果为否,则直接将上述网页信息发送至上述IPv6客户端。
在本申请可选的实施例中,在接收上述IPv4外链网站反馈的网页信息之后,NAT64网关依据上述网页信息检测上述IPv4外链网站是否包含IPv4多级外链;若检测结果为是,则对多级IPv4外链添加导流标识符,得到目标外链网站的第二URL,并将上述目标外链网站的第二URL发送至上述IPv6客户端;若检测结果为否,则直接将上述网页信息发送至上述IPv6客户端。
作为一种可选的实施例,本申请实施例所提供的可选的实施例,可以通过以下访问A市政务服务官网为场景进行举例说明:
其中,客户端IP:2000::100;NAT64网关虚拟服务器IP:2000::102;服务端IP:218.60.145.133;
在IPV4外链含有重定向信息的场景中,客户端对NAT64网关的虚拟服务器发起请求,经过NAT64网关到达服务端,服务端将将网页内容和数据信息返回给NAT64网关,NAT64网关对javascript、text、application、json、xml类型的页面的文本按照PCRE语法写成的REGEX正则表达式,进行匹配,当匹配到符合正则表达式的文本时,会将IPv4外链网站的域名保存在NAT64网关中,对NAT64网关探测到的服务端的IPv4外链选择性的添加NAT64导流标识符,组成IPv4外链网站的目标URL;
当IPv6客户端对IPv4外链网站的目标URL发起请求后(IPv4外链网站的目标URL:http://[2010::102]/proxy.http.www.lnzwfw.gov.cn/8890),NAT64网关删除添加的NAT64网关导流标识符,对初始IPv4外链网站的URL发起请求(http://www.lnzwfw.gov.cn/ 8090);
IPv4外链网站的服务端返回的网页内容和数据信息经过NAT64网关时,NAT64网关检测到服务端的响应报文头部含有location信息,NAT64网关对location字段的URL添加NAT64网关导流标识符,组成location字段的目标URL,并将响应报文返回给IPv6客户端,使得IPv6客户端重新对location字段中的目标URL发起请求。
其中,IPv6客户端请求含有多级外链目标IPv4外链(http://[2010::102]/ proxy.http.www.ln.gov.cn),IPv4外链网站的服务端返回的网页内容和数据信息经过NAT64网关时,NAT64网关继续对IPv4外链网站中含有的IPv4外链添加NAT64网关导流标识符,并返回给IPv6客户端。
本申请方案可以自动探测IPv4外链网站中的URL,可以极大提高解决IPv6天窗问题的准确性,高效性;本申请方案将IPv4外链网站中的URL携带的重定向URL加入NAT64网关导流标识符,从而将重定向URL导流至NAT64网关,解决由重定向信息引起的IPv6天窗问题;本申请方案还支持多级IPv4外链网站的处理,进而可以解决多级IPv4外链引起的天窗问题。
图6是根据本申请实施例的一种探测网站地址的方法的交互示意图,如图6所示,该探测网站地址的方法可以通过以下方法步骤实现:
步骤S700,IPv6客户端发送IPv4网站请求至NAT64网关;
其中,在IPv6客户端发送IPv4网站请求至NAT64网关之前,预先建立与上述IPv6客户端的第一连接,以及建立与上述IPv4网站之间的第二连接。
步骤S702,NAT64网关将上述IPv4网站请求转发至IPv4网站;
步骤S704,IPv4网站返回的与上述IPv4网站请求对应的网页内容至NAT64网关。
步骤S706,NAT64网关依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到IPv4外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;
步骤S708,NAT64网关将上述IPv4外链网站的第二URL发送至上述IPv6客户端;
步骤S710,IPv6客户端向NAT64网关请求IPv4外链网站;
步骤S712,NAT64网关删除IPv4外链网站的导流标识符,并向IPv4外链网站请求原始IPv4外链网站。
步骤S714,IPv4外链网站返回响应报文至NAT64网关;
其中,NAT64网关检测IPv4外链网站返回的响应报文的HTTP首部是否包含位置字段。
步骤S716,若检测结果为是,则NAT64网关对上述位置字段的初始URL添加导流标识符,得到目标位置字段的目标URL,并将上述目标URL发送至上述IPv6客户端,其中,上述目标URL包括上述初始URL和上述导流标识符。
步骤S718,IPv6客户端发起对上述目标位置字段的目标URL的第二请求至NAT64网关;
步骤S720,NAT64网关删除上述目标位置字段中的上述导流标识符,并向IPv4外链重定向网站请求原始重定向的URL;
步骤S722,IPv4外链重定向网站返回的网页信息至NAT64网关。
步骤S724,NAT64网关依据上述网页信息检测上述IPv4外链重定向网站是否包含IPv4多级外链;若检测结果为是,则NAT64网关对多级IPv4外链添加导流标识符,得到IPv4外链重定向网站的第二URL,并将上述IPv4外链重定向网站的第二URL发送至上述IPv6客户端。
实施例2
根据本申请实施例,还提供了一种用于实施上述探测网站地址的方法的系统实施例,图7是根据本申请实施例的一种探测网站地址的系统的结构示意图,如图7所示,上述探测网站地址的系统,包括:IPv6客户端50、网关设备52和IPv4网站54,其中:
IPv6客户端50,用于发送IPv4网站请求;网关设备52,与上述IPv6客户端40连接,用于在接收到上述IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站;上述IPv4网站54,与上述网关设备52连接,用于返回与上述IPv4网站请求对应的网页内容至上述网关设备;上述网关设备52还用于依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至上述网关设备;并将上述目标外链网站的第二URL发送至上述IPv6客户端。
需要说明的是,本申请中的图7中所示探测网站地址的系统的具体结构仅是示意,在具体应用时,本申请中的探测网站地址的系统可以比图7所示的探测网站地址的系统具有多或少的结构。
需要说明的是,上述实施例1中的任意一种可选的或优选的探测网站地址的方法,均可以在本实施例所提供的探测网站地址的系统中执行或实现。
此外,仍需要说明的是,本实施例的可选或优选实施方式可以参见实施例1中的相关描述,此处不再赘述。
实施例3
根据本申请实施例,还提供了一种用于实施上述探测网站地址的方法的装置实施例,图8是根据本申请实施例的一种探测网站地址的装置的结构示意图,如图8所示,上述探测网站地址的装置,包括:第一通讯模块60、获取模块62和第二通讯模块64,其中:
第一通讯模块60,用于在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;获取模块62,用于依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;第二通讯模块64,用于将上述目标外链网站的第二URL发送至上述IPv6客户端。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,例如,对于后者,可以通过以下方式实现:上述各个模块可以位于同一处理器中;或者,上述各个模块以任意组合的方式位于不同的处理器中。
此处需要说明的是,上述第一通讯模块60、获取模块62和第二通讯模块64对应于实施例1中的步骤S102至步骤S106,上述模块与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在计算机终端中。
需要说明的是,本实施例的可选或优选实施方式可以参见实施例1中的相关描述,此处不再赘述。
上述的探测网站地址的装置还可以包括处理器和存储器,上述第一通讯模块60、获取模块62和第二通讯模块64等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核,由内核去存储器中调取相应的程序单元,上述内核可以设置一个或以上。存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
根据本申请实施例,还提供了一种存储介质实施例。可选地,在本实施例中,上述存储介质包括存储的程序,其中,在上述程序运行时控制上述存储介质所在设备执行上述任意一种探测网站地址的方法。
可选地,在本实施例中,上述存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中,或者位于移动终端群中的任意一个移动终端中,上述存储介质包括存储的程序。
可选地,在程序运行时控制存储介质所在设备执行以下功能:在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;将上述目标外链网站的第二URL发送至上述IPv6客户端。
根据本申请实施例,还提供了一种处理器实施例。可选地,在本实施例中,上述处理器用于运行程序,其中,上述程序运行时执行上述任意一种探测网站地址的方法。
本申请实施例提供了一种设备,设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序,处理器执行程序时实现以下步骤:在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;将上述目标外链网站的第二URL发送至上述IPv6客户端。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:在接收到IPv6客户端发送的IPv4网站请求的情况下,将上述IPv4网站请求转发至IPv4网站,并接收上述IPv4网站返回的与上述IPv4网站请求对应的网页内容;依据上述网页内容获取上述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为上述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,上述导流标识符用于将上述第一URL导流至网关设备;将上述目标外链网站的第二URL发送至上述IPv6客户端。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
在本申请实施例的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请实施例各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本申请实施例的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请实施例原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请实施例的保护范围。

Claims (13)

1.一种探测网站地址的方法,其特征在于,包括:
在接收到IPv6客户端发送的IPv4网站请求的情况下,将所述IPv4网站请求转发至IPv4网站,并接收所述IPv4网站返回的与所述IPv4网站请求对应的网页内容;
依据所述网页内容获取所述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为所述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,所述导流标识符用于将所述第一URL导流至网关设备;
将所述目标外链网站的第二URL发送至所述IPv6客户端。
2.根据权利要求1所述的方法,其特征在于,在依据所述网页内容获取所述IPv4网站的初始外链网站的第一统一资源定位符URL之后,所述方法还包括:
依据所述网页内容获取所述初始外链网站的第一URL的DNS域名;
检测是否已存储有所述DNS域名;
若检测结果为否,则存储所述DNS域名,若检测结果为是,则不存储所述DNS域名。
3.根据权利要求1所述的方法,其特征在于,在依据所述网页内容获取所述IPv4网站的初始外链网站的第一统一资源定位符URL之后,所述方法还包括:
依据所述网页内容获取所述初始外链网站的第一URL的DNS域名;
检测所述DNS域名是否与所述导流标识符相同;
若检测结果为不同,则存储所述DNS域名,若检测结果为相同,则不存储所述DNS域名。
4.根据权利要求3所述的方法,其特征在于,在存储所述DNS域名之后,所述方法还包括:
通过对与存储的DNS域名相同的初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL;
将所述目标外链网站的第二URL发送至IPv6客户端。
5.根据权利要求4所述的方法,其特征在于,在将所述目标外链网站的第二URL发送至所述IPv6客户端之后,所述方法还包括:
在检测到IPv6客户端对所述目标外链网站的第二URL发起请求的情况下,删除所述目标外链网站的第二URL中的所述导流标识符,并向IPv4外链网站请求初始外链网站的第一URL;
接收所述初始外链网站返回的响应报文,其中,所述响应报文包括返回的网页信息和HTTP首部;
检测所述响应报文的HTTP首部是否包含位置字段;
若检测结果为是,则对所述位置字段的初始URL添加导流标识符,得到目标位置字段的目标URL,并将所述目标URL发送至所述IPv6客户端,其中,所述目标URL包括所述初始URL和所述导流标识符。
6.根据权利要求5所述的方法,其特征在于,在将所述目标URL发送至所述IPv6客户端之后,所述方法还包括:
接收所述IPv6客户端对所述目标位置字段的目标URL发起的第二请求;
删除所述目标位置字段中的所述导流标识符,并向所述IPv4外链网站请求原始重定向的URL;
接收所述IPv4外链网站返回的网页信息。
7.根据权利要求6所述的方法,其特征在于,在接收所述IPv4外链网站反馈的网页信息之后,所述方法还包括:
依据所述网页信息检测所述IPv4外链网站是否包含IPv4多级外链;
若检测结果为是,则对多级IPv4外链添加导流标识符,得到目标外链网站的第二URL,并将所述目标外链网站的第二URL发送至所述IPv6客户端;
若检测结果为否,则直接将所述网页信息发送至所述IPv6客户端。
8.根据权利要求1所述的方法,其特征在于,所述IPv4网站的服务器在多个IPv4外链网站的DNS域名相同的情况下,返回一次所述DNS域名;在所述IPv4外链网站的所述DNS域名与所述导流标识符相同的情况下,无需返回所述DNS域名;在检测到所述目标外链网站的第二URL已添加所述导流标识符的情况下,无需返回所述目标外链网站的DNS域名。
9.根据权利要求1所述的方法,其特征在于,在接收到IPv6客户端发送的IPv4网站请求之前,所述方法还包括:建立与所述IPv6客户端的第一连接,以及建立与所述IPv4网站之间的第二连接。
10.一种探测网站地址的系统,其特征在于,包括:
IPv6客户端,用于发送IPv4网站请求;
网关设备,与所述IPv6客户端连接,用于在接收到所述IPv4网站请求的情况下,将所述IPv4网站请求转发至IPv4网站;
所述IPv4网站,与所述网关设备连接,用于返回与所述IPv4网站请求对应的网页内容至所述网关设备;
所述网关设备还用于依据所述网页内容获取所述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为所述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,所述导流标识符用于将所述第一URL导流至所述网关设备;并将所述目标外链网站的第二URL发送至所述IPv6客户端。
11.一种探测网站地址的装置,其特征在于,包括:
第一通讯模块,用于在接收到IPv6客户端发送的IPv4网站请求的情况下,将所述IPv4网站请求转发至IPv4网站,并接收所述IPv4网站返回的与所述IPv4网站请求对应的网页内容;
获取模块,用于依据所述网页内容获取所述IPv4网站的初始外链网站的第一统一资源定位符URL,并通过为所述初始外链网站的第一URL添加导流标识符,得到目标外链网站的第二URL,其中,所述导流标识符用于将所述第一URL导流至网关设备;
第二通讯模块,用于将所述目标外链网站的第二URL发送至所述IPv6客户端。
12.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至9中任意一项所述的探测网站地址的方法。
13.一种处理器,其特征在于,所述处理器用于运行存储在存储器中的程序,其中,所述程序运行时执行权利要求1至9中任意一项所述的探测网站地址的方法。
CN201911370973.3A 2019-12-26 2019-12-26 探测网站地址的方法、装置及系统 Pending CN111200643A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911370973.3A CN111200643A (zh) 2019-12-26 2019-12-26 探测网站地址的方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911370973.3A CN111200643A (zh) 2019-12-26 2019-12-26 探测网站地址的方法、装置及系统

Publications (1)

Publication Number Publication Date
CN111200643A true CN111200643A (zh) 2020-05-26

Family

ID=70746918

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911370973.3A Pending CN111200643A (zh) 2019-12-26 2019-12-26 探测网站地址的方法、装置及系统

Country Status (1)

Country Link
CN (1) CN111200643A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153753A (zh) * 2020-09-24 2020-12-29 维沃移动通信有限公司 网络连接方法及装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109862130A (zh) * 2019-02-18 2019-06-07 深信服科技股份有限公司 一种访问IPv4外链方法、装置、设备及计算机介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109862130A (zh) * 2019-02-18 2019-06-07 深信服科技股份有限公司 一种访问IPv4外链方法、装置、设备及计算机介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153753A (zh) * 2020-09-24 2020-12-29 维沃移动通信有限公司 网络连接方法及装置

Similar Documents

Publication Publication Date Title
CN102783119B (zh) 访问控制方法、系统及接入终端
CN102843391B (zh) 一种信息发送方法及网关
CN102884764B (zh) 一种报文接收方法、深度包检测设备及系统
CN102143243B (zh) 动态路由处理方法和装置及其家庭网关
CN109862130B (zh) 一种访问IPv4外链方法、装置、设备及计算机介质
CN102970384B (zh) 代理服务器和通信系统
CN112702425B (zh) 基于域名泛解析的web应用访问代理方法、装置和存储介质
CN105516385A (zh) 域名解析方法、服务器和系统
CN103404182A (zh) 一种防止业务非法访问的方法和装置
CN105635073B (zh) 访问控制方法、装置和网络接入设备
CN103220371A (zh) 内容适配方法及系统
CN102932473B (zh) 跨运营商网络访问网络内容的方法
CN103561036A (zh) 白名单上网环境下的请求拦截方法及装置
CN103685584B (zh) 一种基于隧道技术的反域名劫持方法和系统
CN106911735B (zh) 数据获取方法及装置
CN102547553B (zh) 一种基于wap进行业务访问的方法、系统及装置
KR101127246B1 (ko) Ip 주소를 공유하는 단말을 검출하는 방법 및 그 장치
CN102801814A (zh) 互联网访问方法、装置及系统
CN105141712A (zh) 一种离线域名解析方法及装置
CN102098328B (zh) 超文本传输协议http流关联方法和设备
CN111200643A (zh) 探测网站地址的方法、装置及系统
CN102469069A (zh) 防止入口认证攻击的方法及装置
CN104702707A (zh) 一种数据处理方法及装置
WO2014166078A1 (zh) 数据发送处理方法及路由器
CN111225038B (zh) 服务器访问方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200526

RJ01 Rejection of invention patent application after publication