CN114254218A - 一种外链访问加速方法、装置及计算机存储介质 - Google Patents
一种外链访问加速方法、装置及计算机存储介质 Download PDFInfo
- Publication number
- CN114254218A CN114254218A CN202111529721.8A CN202111529721A CN114254218A CN 114254218 A CN114254218 A CN 114254218A CN 202111529721 A CN202111529721 A CN 202111529721A CN 114254218 A CN114254218 A CN 114254218A
- Authority
- CN
- China
- Prior art keywords
- information
- url information
- access request
- link
- html page
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请实施例涉及一种外链访问加速方法、装置及计算机存储介质,通过根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接;将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,并将第二HTML页面发送至浏览器。使得内容分发网络后续在后续接收到浏览器发送的第二访问请求时,当确定第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理,从而解决了对源网站CDN加速中因外链不可控而导致网站整体访问体验变差的问题。
Description
技术领域
本申请涉及互联网技术领域,具体涉及一种外链访问加速方法、装置及计算机存储介质。
背景技术
内容分发网络(英文全称“Content Delivery Network”,简写“CDN”)的诞生大大地改善了互联网的服务质量,其通过在网络各处放置节点服务器所构成的在现有的互联网基础之上的一层智能虚拟网络,能够实时地根据网络流量和各节点的连接、负载状况以及到用户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上,从而解决Internet网络拥挤的状况,提高用户访问网站的响应速度。
对于接入内容分发网络的源网站而言,网页中很可能会包括外链(即非同域名资源链接),但是现有技术中,内容分发网络一般按照网站域名通过DNS引流到内容分发网络的边缘节点来进行加速,对于未包括源网站域名的外链会因为其DNS不可控导致无法引流的问题,影响用户对源网站访问的整体体验效果。
发明内容
有鉴于此,本发明实施例所解决的技术问题之一在于提供一种外链访问加速方法、装置及计算机存储介质,用以克服现有技术中未包括源网站域名的外链访问速度不可控,影响用户对源网站访问的整体体验效果的问题。
本申请实施例第一方面公开一种外链访问加速方法,包括:根据浏览器发送的第一访问请求,确定所述第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接;
将所述第一HTML页面中所述目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中所述第二URL信息至少用于标识所述标识内容分发网络的预设节点地址;
将所述第二HTML页面发送至所述浏览器;
接收所述浏览器发送的第二访问请求,并获得所述第二访问请求对应的第三URL信息;
当所述第三URL信息与所述第二URL信息满足预设匹配条件时,将所述第三URL信息修改为第一URL信息,并根据所述第一URL信息对所述目标加速链接进行加速处理。
本申请实施例第二方面公开一种外链访问加速装置,包括:页面分析模块,用于根据浏览器发送的第一访问请求,确定所述第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接;
第一页面改写模块,用于将所述第一HTML页面中所述目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中所述第二URL信息至少用于标识所述标识内容分发网络的预设节点地址;
发送模块,用于将所述第二HTML页面发送至所述浏览器;
请求接收模块,用于接收所述浏览器发送的第二访问请求,并获得所述第二访问请求对应的第三URL信息;
第二页面改写模块,用于当所述第三URL信息与所述第二URL信息满足预设匹配条件时,将所述第三URL信息修改为第一URL信息,并根据所述第一URL信息对所述目标加速链接进行加速处理。
本申请实施例第三方面公开一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序包括用于执行前述外链访问加速方法的部分或全部步骤。
与现有技术相比,本申请实施例通过根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接;将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,并将第二HTML页面发送至浏览器。使得内容分发网络后续在后续接收到浏览器发送的第二访问请求时,当确定第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理,从而解决了对源网站CDN加速中因外链不可控而导致网站整体访问体验变差的问题。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例一公开的一种外链访问加速方法的流程示意图;
图2是本申请实施例二公开的一种外链访问加速方法的流程示意图;
图3是本申请实施例三公开的一种外链访问加速方法的流程示意图;
图4是本申请实施例四公开的一种外链访问加速装置的结构示意框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同的对象,而不是用于描述特定顺序。本申请实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、装置、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例一
如图1所示,图1为本申请实施例一公开的一种外链访问加速方法的示意性流程图,该外链访问加速方法应用于内容分发网络,包括:
步骤S101,根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接。
本实施例中,发送请求的浏览器及安装浏览器的终端种类不限,例如可以是手机端或者PC端的谷歌浏览器、腾讯浏览器等。第一访问请求至少用于请求访问使用了内容分发网络服务的源网站的页面,即第一HTML页面,第一访问请求可以是HTTP请求。其中,HTML的英文全称为“HyperTextMarkupLanguage”,即超文本标记语言,是标准通用标记语言下的一种标准,通过标记符号来标记要显示的网页中的各个部分。
本实施例中,第一HTML页面中可以包括一个或者多个未包括源网站域名的外链,目标加速链接可以是第一HTML页面中的全部或者部分外链,本实施例在此不做限定。
步骤S102,将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中第二URL信息至少用于标识内容分发网络的预设节点地址。
本实施例中,URL(英文全称“Uniform Resource Locator”,中文名称“统一资源定位系统”)是因特网的万维网服务程序上用于指定信息位置的表示方法。第一URL信息可以是目标加速链接对应的完整URL信息,也可以是完整URL信息中的一部分,但是第一URL信息需要至少用于标识出目标加速链接对应的网页的真实访问地址,对该地址的具体标识方法本实施例在此不做限定。
可选地,为了减少数据处理量,第一URL信息可以仅用于标识目标加速链接对应的主机地址,及仅包括URL信息中的主机信息部分。
本实施例中,第二URL信息至少用于标识内容分发网络的预设节点地址,例如该预设节点至少可以是内容分发网络中执行后续步骤S104的边缘节点的地址。对该地址的具体标识方法本实施例在此不做限定。
本实施例中,第二HTML页面可以是仅通过将第一HTML页面中,目标加速链接对应的第一URL信息修改为第二URL信息后获得;也可以是除了将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息外,还做了其他格式或者信息的修改后共同获得,本实施例在此不做限定。
可选地,为了减少数据处理量,提升用户体验,可优选仅将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息后,生成第二HTML页面。
步骤S103,将第二HTML页面发送至浏览器。
本实施例中,由于在第二HTML页面中,目标加速链接对应的第一URL信息被修改为第二URL信息,使得用户如果在第二HTML页面中点击目标加速链接的话,对应的访问地址会从目标加速链接的真实访问地址调整为内容分发网络的预设节点地址,即会将相应的访问请求发送至内容分发网络的预设节点地址。
步骤S104,接收浏览器发送的第二访问请求,并获得第二访问请求对应的第三URL信息。
本实施例中,由于用户在网站访问过程中有可能点击任意链接,内容分发网络收到的第二访问请求可以是用于请求访问使用了内容分发网络服务的源网站的页面,也可以是用于请求访问目标加速链接,内容分发网络对不同种类链接的后续处理方案有可能存在一定区别,因此可根据第二访问请求对应的第三URL信息,区分出第二访问请求对应的请求访问页面种类。
步骤S105,当第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理。
本实施例中,可通过对第三URL信息和第二URL信息进行比对分析,确定第二访问请求对应的请求访问页面种类,即当第三URL信息与第二URL信息满足预设匹配条件时,可以确定第二访问请求是用于请求访问目标加速链接,因此可以将第三URL信息修改为第一URL信息,得到目标加速链接对应的网页的真实访问地址,从而目标分发网络可进一步根据该地址进行缓存、合并回源等一系列的加速操作。
本实施例中,对第三URL信息与第二URL信息进行比对分析的方法不限,并且匹配条件也不限,可根据实际应用所需进行灵活设置。
可选地,为了简化分析方法,提升运算速度,预设匹配条件可以是第三URL信息与第二URL信息相同,即步骤S105中对URL的修改相当于是步骤S102的修改相反,步骤S105实际上是将第二URL信息修改回第一URL信息。
由以上本发明实施例可见,本发明实施例通过根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接;将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,并将第二HTML页面发送至浏览器。使得内容分发网络后续在后续接收到浏览器发送的第二访问请求时,当确定第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理,从而解决了对源网站CDN加速中因外链不可控而导致网站整体访问体验变差的问题。
实施例二
如图2所示,图2为本申请实施例二公开的一种外链访问加速方法的示意性流程图,该外链访问加速方法应用于内容分发网络,包括:
步骤S201,根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接。
步骤S202,将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面;第二URL信息包括第二加密子信息和第二主机子信息,其中,第二子主机信息用于标识内容分发网络的预设节点地址,第二加密子信息通过对第一URL信息加密获得。
本实施例中,为了提高安全性,可以对第一URL信息加密后获得第二加密子信息,并在第二HTML页面的第二URL信息中将第二加密子信息也添加至其中,从而用户在第二HTML页面中点击外链或者浏览器自动解析并发送对应的访问请求后,可通过第二子主机信息将访问请求发送至内容分发网络的预设节点,内容分发网络通过解析该访问请求,可获得第二加密子信息,即加密后的第一URL信息。
可选地,为了进一步提高安全性,可选取用于防伪造的非对称签名加密算法,即步骤S202还可包括子步骤202a:对第一URL信息进行非对称签名加密处理,将加密后的第一URL信息和对应的校验和作为第二加密子信息。
步骤S203,将第二HTML页面发送至浏览器。
本实施例中,步骤S203与实施例一中的步骤S103基本相同,在此不再赘述。
步骤S204,接收浏览器发送的第二访问请求,并获得第二访问请求对应的第三URL信息。
本实施例中,步骤S204与实施例一中的步骤S104基本相同,在此不再赘述。
步骤S205,当第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理。
本实施例中,当第三URL信息与第二URL信息满足预设匹配条件时,可通过对第二加密子信息进行解密处理,获得第一URL信息,从而可将第三URL信息修改为第一URL信息。
可选地,当步骤S202包括子步骤202a时,可利用校验和进行合法性验证,即步骤S205可进一步包括下述子步骤:
子步骤205a,当第三URL信息中包括与第二主机子信息相同的信息时,将第三URL信息进行拆解,获得第一加密子信息。
子步骤205b,根据第一加密子信息和第二加密子信息,对第三URL信息进行合法性验证。
子步骤205c,当第三URL信息合法时,将第三URL信息修改为第一URL信息。
由以上本发明实施例可见,本发明实施例通过对第一URL信息进行加密,可提高外链访问加速方法的安全性;在收到第二访问请求后,通过对第二加密子信息进行解密处理,便可获得第一URL信息,提高了数据处理效率;通过采用非对称签名加密处理,进一步提高了安全级别。
实施例三
如图3所示,图3为本申请实施例三公开的一种外链访问加速方法的示意性流程图,该外链访问加速方法应用于内容分发网络,包括:
步骤S301,获取第一HTML页面中包括的至少一外链的速度指标参数信息,以及第一访问请求对应的源网站的加速规则信息。
本实施例中,由于使用内容分发网络服务需要付出一定的成本,对于源网站而言为了节约成本可能仅希望针对部分外链使用内容分发网络服务,例如当某一外链的网络传输速度不佳时,才对其进行内容分发网络的加速处理,故内容分发网络可以使用速度指标参数信息标识外链的网络传输速度,仅对网络传输速度不佳的外链进行加速处理。
本实施例中,外链的网络传输速度可以是实时检测获得,也可以是按照预设时间周期检测获得的最新速度,或者是不定期检测获得的最新速度,还可以是预设时间周期内多次检测的获得的平均速度,本实施例在此不做限定。
可选地,为了提高对用户通过浏览器发送的访问请求的响应速度,可预先确定出源网站的全部HTML页面中的全部外链,即步骤S301之前还可包括:对第一访问请求对应的源网站的全部HTML页面进行语法解析,确定源网站的全部外链。
可选地,可通过爬虫系统抓取源网站上全部HTML页面,然后再对每个HTML页面进行语法解析,从而确定出源网站的全部外链。即步骤S301之前还可包括:按照预设的爬取规则,利用爬虫系统对源网站的全部HTML页面进行爬取;其中,预设的爬取规则至少用于确定爬虫系统的爬取触发条件和爬取过程中的爬取参数。
例如,内容分发网络可通过API(应用程序接口,英文全称“ApplicationProgramming Interface”)对设定的爬虫系统下发爬取任务,爬取任务参数可包含域名、入口URL、爬取的最大层数、爬取速度控制阈值等,以及对HTML页面的分析方法(如静态和/或动态)和相关容错与重试配置。从而爬虫系统在收到任务后,可根据自身资源占用情况进行任务安排与调度,当条件达到时开始爬取。此外,爬虫系统在爬取过程中可配置严格的黑白名单以及爬取速度的控制阈值,从而保障源网站的性能和可用性不受爬虫系统的影响。
可选地,在步骤S301之前,还可包括:获取并存储源网站的全部外链的速度指标参数信息。由于预先检测并存储了源网站的全部外链的速度指标参数信息,从而在步骤S301执行时可快速获得第一HTML页面中包括的至少一外链的速度指标参数信息。
可选地,由于还有其他因素可能影响外链的网络传输速度,为了提高对外链的网络传输速度评估全面性,速度指标参数信息除了包括网络传输速度子信息之外,还可包括网络建连速度子信息、服务器所属的线路子信息、资源的数据大小子信息、资源的类型子信息中的至少其一。
其中,网络传输速度子信息用于标识外链的网络传输速度;网络建连速度子信息用于标识外链建立网络连接的速度;服务器所属的线路子信息用于标识外链所述的服务器所属的线路,如联通线路、电信线路或者移动线路等;资源的数据大小子信息用于标识外链对应的资源文件大小;资源的类型子信息用于标识外链对应的资源类型,例如视频、音频、网页等。
本实施例中,加速规则的制定方式及加速规则信息的标识方式不限,在实际应用中可根据需求进行灵活设定。例如,可以是网络建连速度大于15秒或网络传输速度小于100KB/s;也可以是资源类型为媒体文件且资源大小大于30M;还可以是服务器所属线路为联通线路等。
步骤S302,根据加速规则信息和至少一外链的速度指标参数信息,从至少一外链中筛选出目标加速链接。
本实施例中,可预先设定并存储用于从全部或者部分外链中确定目标加速链接的加速规则,从而在收到第一访问请求后,可快速获得加速规则信息和至少一外链的速度指标参数信息,从至少一外链中筛选出目标加速链接,即仅针对满足条件的外链进行加速处理。
步骤S303,根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接。
本实施例中,步骤S303与实施例一中的步骤S101或实施例二中的步骤S201基本相同,在此不再赘述。
步骤S304,将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中第二URL信息至少用于标识内容分发网络的预设节点地址。
本实施例中,步骤S304与实施例一中的步骤S102或实施例二中的步骤S202基本相同,在此不再赘述。
步骤S305,将第二HTML页面发送至浏览器。
本实施例中,步骤S305与实施例一中的步骤S103或实施例二中的步骤S203基本相同,在此不再赘述。
步骤S306,接收浏览器发送的第二访问请求,并获得第二访问请求对应的第三URL信息。
本实施例中,步骤S306与实施例一中的步骤S104或实施例二中的步骤S204基本相同,在此不再赘述。
步骤S307,当第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理。
本实施例中,步骤S307与实施例一中的步骤S105或实施例二中的步骤S205基本相同,在此不再赘述。
由以上本发明实施例可见,本发明实施例根据第一HTML页面中包括的至少一外链的速度指标参数信息,以及第一访问请求对应的源网站的加速规则信息,可以对第一HTML页面中的外链进行筛选,获得目标加速链接,以降低系统资源消耗和/或用户使用成本;通过预先检测并存储源网站的全部外链的速度指标参数信息,可以提高数据处理效率;通过预先确定出源网站的全部HTML页面中的全部外链,可以提高对用户通过浏览器发送的访问请求的响应速度。
实施例四
本申请实施例四提供一种外链访问加速装置,图4为本申请实施例四公开的一种外链访问加速装置的结构示意图,该装置包括:
页面分析模块401,用于根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接。
第一页面改写模块402,用于将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中第二URL信息至少用于标识标识内容分发网络的预设节点地址。
本实施例中,第二URL信息包括第二加密子信息和第二主机子信息,其中,第二子主机信息用于标识标识内容分发网络的预设节点地址,第二加密子信息通过对第一URL信息加密获得。
发送模块403,用于将第二HTML页面发送至浏览器。
请求接收模块404,用于接收浏览器发送的第二访问请求,并获得第二访问请求对应的第三URL信息。
第二页面改写模块405,用于当第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理。
本实施例中,外链访问加速装置还包括加密模块,用于对第一URL信息进行非对称签名加密处理,将加密后的第一URL信息和对应的校验和作为第二加密子信息。对应的,第二页面改写模块405还包括加密子单元、合法性验证子单元和信息修改子单元,其中
加密子单元,用于当第三URL信息中包括与第二主机子信息相同的信息时,将第三URL信息进行拆解,获得第一加密子信息;
合法性验证子单元,用于根据第一加密子信息和第二加密子信息,对第三URL信息进行合法性验证;
信息修改子单元,用于当第三URL信息合法时,将第三URL信息修改为第一URL信息。
本实施例中,页面分析模块401包括参数规则信息获取子单元和筛选子单元,其中:
参数规则信息获取子单元,用于获取第一HTML页面中包括的至少一外链的速度指标参数信息,以及第一访问请求对应的源网站的加速规则信息。
本实施例中,速度指标参数信息包括网络传输速度子信息,以及网络建连速度子信息、服务器所属的线路子信息、资源的数据大小子信息、资源的类型子信息中的至少其一。
筛选子单元,用于根据加速规则信息和至少一外链的速度指标参数信息,从至少一外链中筛选出目标加速链接。
本实施例中,外链访问加速装置还包括外链确定模块,用于对第一访问请求对应的源网站的全部HTML页面进行语法解析,确定源网站的全部外链。
本实施例中,外链访问加速装置还包括爬取模块,用于按照预设的爬取规则,利用爬虫系统对源网站的全部HTML页面进行爬取。
本实施例中,外链访问加速装置还包括存储模块,用于获取并存储源网站的全部外链的速度指标参数信息。
通过本实施例的外链访问加速装置,可以实现前述多个方法实施例中相应的外链访问加速方法,并具有相应方法实施例的有益效果,在此不再赘述。
实施例五
本发明实施例还提供了一种计算机存储介质,计算机存储介质中存储有用于执行前述多个方法实施例中相应的方法的计算机程序。具体的,计算机程序包括:
用于执行根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接的指令。
用于执行将第一HTML页面中目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中第二URL信息至少用于标识标识内容分发网络的预设节点地址的指令。
本实施例中,根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接包括:
获取第一HTML页面中包括的至少一外链的速度指标参数信息,以及第一访问请求对应的源网站的加速规则信息;
根据加速规则信息和至少一外链的速度指标参数信息,从至少一外链中筛选出目标加速链接。
可选地,速度指标参数信息包括网络传输速度子信息,以及网络建连速度子信息、服务器所属的线路子信息、资源的数据大小子信息、资源的类型子信息中的至少其一。
本实施例中,第二URL信息包括第二加密子信息和第二主机子信息,其中,第二子主机信息用于标识标识内容分发网络的预设节点地址,第二加密子信息通过对第一URL信息加密获得。
用于执行将第二HTML页面发送至浏览器的指令。
用于执行接收浏览器发送的第二访问请求,并获得第二访问请求对应的第三URL信息的指令。
用于执行当第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息,并根据第一URL信息对目标加速链接进行加速处理的指令。
本实施例中,还包括用于执行对第一访问请求对应的源网站的全部HTML页面进行语法解析,确定源网站的全部外链的指令。
本实施例中,还包括用于执行按照预设的爬取规则,利用爬虫系统对源网站的全部HTML页面进行爬取的指令。
本实施例中,还包括用于执行获取并存储源网站的全部外链的速度指标参数信息的指令。
本实施例中,还包括用于执行对第一URL信息进行非对称签名加密处理,将加密后的第一URL信息和对应的校验和作为第二加密子信息的指令。对应的,当第三URL信息与第二URL信息满足预设匹配条件时,将第三URL信息修改为第一URL信息包括:
当第三URL信息中包括与第二主机子信息相同的信息时,将第三URL信息进行拆解,获得第一加密子信息;
根据第一加密子信息和第二加密子信息,对第三URL信息进行合法性验证;
当第三URL信息合法时,将第三URL信息修改为第一URL信息。
通过本实施例的计算机存储介质,可以实现前述多个方法实施例中相应的外链访问加速方法,并具有相应方法实施例的有益效果,在此不再赘述。
至此,已经对本申请的特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作可以按照不同的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序,以实现期望的结果。在某些实施方式中,多任务处理和并行处理可以是有利的。
本申请是参照根据本申请实施例的方法的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、装置或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (10)
1.一种外链访问加速方法,其特征在于,所述方法应用于内容分发网络,所述方法包括:
根据浏览器发送的第一访问请求,确定所述第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接;
将所述第一HTML页面中所述目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中所述第二URL信息至少用于标识所述标识内容分发网络的预设节点地址;
将所述第二HTML页面发送至所述浏览器;
接收所述浏览器发送的第二访问请求,并获得所述第二访问请求对应的第三URL信息;
当所述第三URL信息与所述第二URL信息满足预设匹配条件时,将所述第三URL信息修改为第一URL信息,并根据所述第一URL信息对所述目标加速链接进行加速处理。
2.根据权利要求1所述的方法,其特征在于,所述根据浏览器发送的第一访问请求,确定第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接包括:
获取所述第一HTML页面中包括的至少一外链的速度指标参数信息,以及所述第一访问请求对应的源网站的加速规则信息;
根据所述加速规则信息和所述至少一外链的所述速度指标参数信息,从所述至少一外链中筛选出所述目标加速链接。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
对所述第一访问请求对应的源网站的全部HTML页面进行语法解析,确定所述源网站的全部外链。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
按照预设的爬取规则,利用爬虫系统对所述源网站的全部HTML页面进行爬取;其中,所述预设的爬取规则至少用于确定所述爬虫系统的爬取触发条件和爬取过程中的爬取参数。
5.根据权利要求3所述的方法,其特征在于,在所述获取所述第一HTML页面中包括的至少一外链的速度指标参数信息,以及所述第一访问请求对应的源网站的加速规则信息步骤之前,还包括:
获取并存储所述源网站的全部外链的所述速度指标参数信息。
6.根据权利要求2所述的方法,其特征在于,所述速度指标参数信息包括网络传输速度子信息,以及网络建连速度子信息、服务器所属的线路子信息、资源的数据大小子信息、资源的类型子信息中的至少其一。
7.根据权利要求1所述的方法,其特征在于,所述第二URL信息包括第二加密子信息和第二主机子信息,其中,所述第二子主机信息用于标识所述标识内容分发网络的预设节点地址,所述第二加密子信息通过对所述第一URL信息加密获得。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:对所述第一URL信息进行非对称签名加密处理,将加密后的第一URL信息和对应的校验和作为所述第二加密子信息;
对应的,所述当所述第三URL信息与所述第二URL信息满足预设匹配条件时,将所述第三URL信息修改为第一URL信息包括:
当所述第三URL信息中包括与所述第二主机子信息相同的信息时,将所述第三URL信息进行拆解,获得第一加密子信息;
根据所述第一加密子信息和所述第二加密子信息,对所述第三URL信息进行合法性验证;
当所述第三URL信息合法时,将所述第三URL信息修改为第一URL信息。
9.一种外链访问加速装置,其特征在于,包括:
页面分析模块,用于根据浏览器发送的第一访问请求,确定所述第一访问请求对应的第一HTML页面中需进行加速处理的目标加速链接;
第一页面改写模块,用于将所述第一HTML页面中所述目标加速链接对应的第一URL信息修改为第二URL信息,获得第二HTML页面,其中所述第二URL信息至少用于标识所述标识内容分发网络的预设节点地址;
发送模块,用于将所述第二HTML页面发送至所述浏览器;
请求接收模块,用于接收所述浏览器发送的第二访问请求,并获得所述第二访问请求对应的第三URL信息;
第二页面改写模块,用于当所述第三URL信息与所述第二URL信息满足预设匹配条件时,将所述第三URL信息修改为第一URL信息,并根据所述第一URL信息对所述目标加速链接进行加速处理。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序用于执行权利要求1-8中任一项所述方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111529721.8A CN114254218A (zh) | 2021-12-14 | 2021-12-14 | 一种外链访问加速方法、装置及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111529721.8A CN114254218A (zh) | 2021-12-14 | 2021-12-14 | 一种外链访问加速方法、装置及计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114254218A true CN114254218A (zh) | 2022-03-29 |
Family
ID=80795145
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111529721.8A Pending CN114254218A (zh) | 2021-12-14 | 2021-12-14 | 一种外链访问加速方法、装置及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114254218A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024021472A1 (zh) * | 2022-07-29 | 2024-02-01 | 天翼云科技有限公司 | 一种界面信息处理方法及装置 |
-
2021
- 2021-12-14 CN CN202111529721.8A patent/CN114254218A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024021472A1 (zh) * | 2022-07-29 | 2024-02-01 | 天翼云科技有限公司 | 一种界面信息处理方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10257199B2 (en) | Online privacy management system with enhanced automatic information detection | |
US9680850B2 (en) | Identifying bots | |
US10567407B2 (en) | Method and system for detecting malicious web addresses | |
US9992259B2 (en) | Systems and methods to circumvent advertisement blocking on the internet | |
US8261362B2 (en) | Online privacy management | |
CA2734774C (en) | A user-transparent system for uniquely identifying network-distributed devices without explicitly provided device or user identifying information | |
CN107046544B (zh) | 一种识别对网站的非法访问请求的方法和装置 | |
US20150271202A1 (en) | Method, device, and system for detecting link layer hijacking, user equipment, and analyzing server | |
CN109039987A (zh) | 一种用户账户登录方法、装置、电子设备和存储介质 | |
CN109862021B (zh) | 威胁情报的获取方法及装置 | |
CN111404937B (zh) | 一种服务器漏洞的检测方法和装置 | |
CN113518077A (zh) | 一种恶意网络爬虫检测方法、装置、设备及存储介质 | |
CN111083093B (zh) | 调用端能力的方法、装置、电子设备及存储介质 | |
EP2973192B1 (en) | Online privacy management | |
CN114157568B (zh) | 一种浏览器安全访问方法、装置、设备及存储介质 | |
CN114254218A (zh) | 一种外链访问加速方法、装置及计算机存储介质 | |
CN111131236A (zh) | 一种web指纹检测装置、方法、设备及介质 | |
CN108259416B (zh) | 检测恶意网页的方法及相关设备 | |
EP2760183A1 (en) | System for detecting hyperlink faults | |
CN110334301B (zh) | 一种页面还原方法及装置 | |
CN113742631B (zh) | 一种基于cdn的网站图片防盗链方法 | |
CN112351009A (zh) | 一种网络安全防护方法、装置、电子设备及可读存储介质 | |
KR102001814B1 (ko) | 모바일 장치 기반의 악성 스크립트 탐지 방법 및 그 장치 | |
Bernardo et al. | Web-based fingerprinting techniques | |
CN114285618B (zh) | 一种网络威胁检测方法、装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |