CN114422502A - 一种资源下载方法、计算设备和存储介质 - Google Patents
一种资源下载方法、计算设备和存储介质 Download PDFInfo
- Publication number
- CN114422502A CN114422502A CN202210043404.3A CN202210043404A CN114422502A CN 114422502 A CN114422502 A CN 114422502A CN 202210043404 A CN202210043404 A CN 202210043404A CN 114422502 A CN114422502 A CN 114422502A
- Authority
- CN
- China
- Prior art keywords
- information
- resource
- resources
- downloading
- computing device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 238000001914 filtration Methods 0.000 claims description 19
- 230000009467 reduction Effects 0.000 abstract description 3
- 238000004891 communication Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 6
- 230000002159 abnormal effect Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 2
- 230000007723 transport mechanism Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 238000011068 loading method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/146—Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种资源下载方法、计算设备和存储介质,该方法包括:获取与第一URL列表对应的资源的信息,作为第一信息;在下载时间段内,获取目标页面中包括的所有资源的信息,作为第二信息;判断各第二信息与第一信息是否相同,若不相同,则下载当前进行判断的第二信息所对应的资源。由上述内容可知,本发明中,可以根据用户预先设置的URL列表,自动下载目标页面中更新的所有资源,对于用户而言可以更加方便地下载更新的资源,提高用户体验,并且下载的资源不会重复,减少了内存资源的占用,提高资源利用率,由于内存占用减少,也可提高计算设备的性能。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种资源下载方法、计算设备和存储介质。
背景技术
资源,包括静态资源和动态资源。静态资源一般包括图片、视频、附件等URL的后缀为.mp4、.html、.htm、.shtml等的形式,动态资源的URL的后缀为.asp、.aspx、.php、.do、.cgi等的形式。目前,针对资源的下载多通过下载管理器实现。
已有的下载管理器,例如IDM下载管理器,下载管理器提供用户配置界面,用户可在用户配置界面对需要下载资源的URL、下载日期、开始下载时间、结束下载时间等进行配置,配置完成后,下载管理器可根据用户的配置信息,在指定日期的指定时间段内,下载与已配置URL对应的资源。但是已有的资源下载方法,只能下载指定的URL对应的资源,应用不够灵活。
发明内容
为此,本发明提供一种资源下载方法,以力图解决或者至少缓解上面存在的问题。
根据本发明的一个方面,提供了一种资源下载方法,在计算设备中执行,计算设备中存储有参数配置表,参数配置表中包括字段,目标页面中已下载资源的第一URL列表、下载时间段,所述方法包括:获取与第一URL列表对应的资源的信息,作为第一信息;在下载时间段内,获取目标页面中包括的所有资源的信息,作为第二信息;判断各第二信息与第一信息是否相同,若不相同,则下载当前进行判断的第二信息所对应的资源。
可选地,获取目标页面中包括的所有资源的信息,作为第二信息的步骤包括:按照预设频率获取目标页面中包括的所有资源的URL;获取所有URL对应资源的信息,作为第二信息。
可选地,第一信息、第二信息分别包括资源的名称、格式、大小,判断各第二信息与所述第一信息是否相同的步骤包括:判断任一第二信息中资源的名称与第一信息中各资源的名称是否相同,若不相同,则下载当前进行判断的第二信息所对应的资源;若相同,则继续判断任一第二信息中资源的格式与第一信息中各资源的格式是否相同。
可选地,在任一第二信息中资源的名称与第一信息中各资源的名称不相同时,本发明的资源下载方法还包括步骤:判断任一第二信息中资源的大小与第一信息中各资源的大小的差值是否在预设差值范围内,若在预设差值范围内,则下载当前进行判断的第二信息所对应的资源,若不在预设范围内,则不下载当前进行判断的第二信息所对应的资源。
可选地,本发明的资源下载方法还包括步骤:若判断出存在资源的格式与第一信息中各资源的格式不相同的第二信息,则下载当前进行判断的第二信息所对应的资源,否则,不下载当前进行判断的第二信息所对应的资源。
可选地,计算设备中还存储有配置关系表,配置关系表中包括字段:网站类型、创建下载任务的模板,下载当前进行判断的第二信息所对应的资源的步骤包括:根据目标页面确定其所属的网站类型;从配置关系表中匹配目标模板,其中,所述目标模板与已确定的网站类型相对应;通过目标模板创建下载任务;执行已创建的下载任务来下载当前进行判断的第二信息所对应的资源。
可选地,计算设备中还存储有过滤信息,过滤信息用于对第二信息进行过滤,本发明的资源下载方法还包括步骤:基于所述过滤信息对第二信息进行过滤,以将不需要的资源进行过滤。
可选地,本发明的资源下载方法还包括步骤:获取新下载的所有资源的URL;将参数配置表中的第一URL列表的内容更新为新下载的所有资源的URL。
根据本发明的又一个方面,提供了一种计算设备,包括:至少一个处理器;以及存储器,存储有程序指令,其中,所述程序指令被配置为适于由所述至少一个处理器执行,所述程序指令包括用于执行如上所述方法的指令。
根据本发明的另一个方面,提供了一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如上所述的方法。
根据本发明的技术方案,提供了一种资源下载方法,该方法首先获取与标页面中已下载资源的第一URL列表对应的资源的信息,作为第一信息,在下载时间段内,获取目标页面中包括的所有资源的信息,作为第二信息,判断各第二信息与第一信息是否相同,若不相同,则下载当前进行判断的第二信息所对应的资源。
由上述内容可知,本发明中,可以根据用户预先设置的URL列表,自动下载目标页面中更新的所有资源。对于用户而言可以更加方便地下载更新的资源,提高用户体验。并且下载的资源不会重复,减少了内存资源的占用,提高资源利用率,由于内存占用减少,也可提高计算设备的性能。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
为了实现上述以及相关目的,本文结合下面的描述和附图来描述某些说明性方面,这些方面指示了可以实践本文所公开的原理的各种方式,并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述,本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开,相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一个实施例的用户配置界面的示意图;
图2示出了根据本发明一个实施例的计算设备200的结构图;
图3示出了根据本发明一个实施例的资源下载方法300的流程图;
图4示出了根据本发明一个实施例的用户配置界面的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
目前,针对资源的下载多通过下载管理器实现。已有的下载管理器,例如IDM下载管理器,下载管理器提供用户配置界面,如图1所示,用户可在如图1所示的用户配置界面对需要下载资源的URL、下载日期、开始下载时间、结束下载时间等进行配置,配置完成后,下载管理器可根据用户的配置信息,在指定日期的指定时间段内,下载与已配置URL对应的资源。
但是已有的资源下载方法,只能下载指定的URL对应的资源,无法下载与URL资源相关的、更新的资源,使得已有的资源下载方法应用不够灵活,用户体验不佳。
为了解决上述问题,本发明提供了一种资源下载方法,该方法在计算设备中执行。图2示出了根据本发明一个实施例的计算设备200的结构图。如图2所示,在基本配置202中,计算设备200典型地包括系统存储器206和一个或者多个处理器204。存储器总线208可以用于在处理器204和系统存储器206之间的通信。
取决于期望的配置,处理器204可以是任何类型的处理,包括但不限于:微处理器(μP)、微控制器(μC)、数字信息处理器(DSP)或者它们的任何组合。处理器204可以包括诸如一级高速缓存210和二级高速缓存212之类的一个或者多个级别的高速缓存、处理器核心214和寄存器216。示例的处理器核心214可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器218可以与处理器204一起使用,或者在一些实现中,存储器控制器218可以是处理器204的一个内部部分。
取决于期望的配置,系统存储器206可以是任意类型的存储器,包括但不限于:易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。系统存储器206可以包括操作系统220、一个或者多个应用222以及程序数据224。在一些实施方式中,应用222可以布置为在操作系统上利用程序数据224进行操作。程序数据224包括指令,在根据本发明的计算设备200中,程序数据224包含用于执行方法300的指令。
计算设备200还包括储存设备232,储存设备232包括可移除储存器236和不可移除储存器238,可移除储存器236和不可移除储存器238均与储存接口总线234连接。本发明中,程序执行过程中发生的各事件的相关数据和指示各事件发生的时间信息,可存储于储存设备232中,操作系统220适于管理储存设备232。其中,储存设备232可为磁盘。
计算设备200还可以包括有助于从各种接口设备(例如,输出设备242、外设接口244和通信设备246)到基本配置202经由总线/接口控制器230的通信的接口总线240。示例的输出设备242包括图像处理单元248和音频处理单元250。它们可以被配置为有助于经由一个或者多个A/V端口252与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口244可以包括串行接口控制器254和并行接口控制器256,它们可以被配置为有助于经由一个或者多个I/O端口258和诸如输入设备(例如,键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备246可以包括网络控制器260,其可以被布置为便于经由一个或者多个通信端口264与一个或者多个其他计算设备262通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块,并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号,它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例,通信介质可以包括诸如有线网络或者专线网络之类的有线介质,以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。
计算设备200可以实现为服务器,例如文件服务器、数据库服务器、应用程序服务器和WEB服务器等,也可以实现为小尺寸便携(或者移动)电子设备的一部分,这些电子设备可以是诸如蜂窝电话、个人数字助理(PDA)、个人媒体播放器设备、无线网络浏览设备、个人头戴设备、应用专用设备、或者可以包括上面任何功能的混合设备。计算设备200还可以实现为包括桌面计算机和笔记本计算机配置的个人计算机。在一些实施例中,计算设备200被配置为执行根据本发明的一种资源下载方法300。
图3示出了根据本发明一个实施例的资源下载方法300的流程图,资源加载方法300包括步骤S310至步骤S390。方法300适于在计算设备200(如图2所示的计算设备)中执行,进一步地,方法300适于在计算设备200的操作系统中执行,例如,方法300集成在计算设备200的操作系统中,进一步地,方法300可以插件的形式集成在计算设备200的、操作系统的下载管理器中,以实现对资源的下载。
方法300首先响应用户触发下载管理器的图形用户界面(GUI界面)的配置接口,弹出如图4所示的配置界面,用户可在该界面的输入地址条目对应的输入框内输入目标页面的URL,在过滤规则条目对应的输入框内输入过滤信息,在启动时间条目对应的输入框内输入开始下载时间、结束下载时间。
此时,计算设备200访问目标页面的URL可进入目标页面,获取目标页面中当前包括的所有资源的URL,生成URL列表,作为目标页面中已下载资源的URL列表。
过滤信息可包括资源的名称、格式、大小、广告名称等,资源的名称为资源文件的名称(例如第三季第一期),资源的格式为资源文件的格式(例如.MPG)、资源的大小为资源文件所占内存的大小,广告的主题为用户想要过滤掉的广告对应的主题。
值得注意的是,资源的名称、格式、大小、广告主题可根据实际应用场景进行设置,本发明对此不进行限制。例如名称为第一季、格式为.mp4、大小的阈值设置为超过上一次下载资源的15%、广告主题为彩妆护肤,即,过滤掉包括名称为第一季、格式为.mp4、大小超过上一次下载资源大小的15%、广告名称为彩妆护肤的其中任一项或多项的资源。
响应用户触发配置界面中的保存接口,将目标页面中已下载资源的第一URL列表、开始下载时间、结束下载时间存储至计算设备的参数配置表中,并将参数配置表、过滤信息进行存储,本发明并不限制存储方式,例如,将参数配置表、过滤信息存储至与计算设备200通信连接的存储装置中。
此处值得注意的是,若当前为初次进行资源的下载,那么此处的第一URL列表即为根据用户输入的目标页面的URL获取的目标页面中已下载资源的URL列表,若当前并不是初次进行资源的下载,那么此处的第一URL列表即为当前下载的所有新资源对应的URL列表。
存储装置可以是数据库,进一步地,数据库可以是关系型数据库,例如MYSQL、SqlServer、ACCESS等,存储装置的数据库可以是驻留于计算设备200中的本地数据库,也可以作为分布式数据库例如Hbase等设置于多个地理位置处;存储装置也可以是缓存,例如redis缓存等,总之存储装置用于存储参数配置表、过滤信息。本发明对存储装置的具体部署、配置情况不做限制。
在配置好参数配置表后,执行步骤S310,获取与第一URL列表对应的资源的信息,作为第一信息。具体地,从参数配置表中查找第一URL列表、开始下载时间、结束下载时间,并通过访问第一URL列表中的URL,确定与第一URL列表对应的所有资源的信息,作为第一信息。也就是说,第一信息中包括多条信息,每一条信息对应第一URL列表中一个URL对应资源的信息。
在获取到与第一URL列表对应的所有资源的名称、格式、大小等信息后,在开始下载时间至结束下载时间所对应的下载时间段内,接着执行步骤S320,获取目标页面中包括的所有资源的信息,作为第二信息,其中,第一信息、第二信息可根据实际应用场景进行设置,本发明对此不进行限制。例如,第一信息、第二信息分别包括资源的名称、格式、大小等信息,资源的名称、格式、大小如上所述,此处不再赘述。在一个实施方式中,步骤S320具体包括:
按照预设频率获取目标页面中包括的所有资源的URL,获取所有URL对应资源的名称、格式、大小等信息,作为第二信息
其中,预设频率可根据实际应用场景进行设置,本发明对此不进行限制。例如,本发明中,将预设频率设置为1分钟,即,在开始下载时间至结束下载时间所对应的下载时间段内,每间隔一分钟就会获取上一次下载资源的URL的上一级网页中包括的所有资源的信息。
在获取到目标页面中包括的所有资源的信息后,由于网站(例如视频网站)中包括各类广告等并不是用户想要获取的资源,因此为了过滤掉用户不想要的资源,执行步骤S330,基于过滤信息对第二信息进行过滤,以实现将用户不需要的资源进行过滤,从而减少无效资源的下载,避免无效资源占用大量内存,提高资源利用率,由于内存占用减少,因此也可提高计算设备的性能。并且,过滤信息为用户预先设置的,即用户可对需要过滤掉的广告等用户不想要的资源进行设置,实现个性化地下载资源,应用更加灵活。其中,过滤信息如上所述,此处不再赘述。
在对获取到目标页面中包括的所有资源的信息进行过滤后,执行步骤S340,判断任一过滤后的第二信息与各第一信息是否相同,若不相同,执行步骤S350,下载当前进行判断的第二信息所对应的资源,若相同,执行步骤S360,不下载当前进行判断的第二信息所对应的资源。
在一个实施方式中,步骤S340至步骤S360具体包括:
首先,判断任一过滤后的第二信息中资源的名称与第一信息中各资源的名称是否相同,若不相同,则下载当前进行判断的第二信息所对应的资源。
若在任一过滤后的第二信息中资源的名称与第一信息中各资源的名称相同的情况下,则继续判断任一第二信息中资源的格式与第一信息中各资源的格式是否相同,若不同,说明当前进行判断的资源与目标页面中所有已下载资源的名称相同但格式不相同,即可认为当前判断资源是更新的资源,则下载当前进行判断的第二信息所对应的资源。若相同,说明当前进行判断的资源与目标页面中所有已下载资源的名称、格式均相同,即可认为当前判断资源并不是更新的资源,那么无需下载当前进行判断的第二信息所对应的资源。
在另一个实施方式中,步骤S340至步骤S360具体包括:
首先,判断任一过滤后的第二信息中资源的名称与第一信息中各资源的名称是否相同,若不相同,为了验证当前资源的大小是否异常,则继续判断任一第二信息中资源的大小与第一信息中各资源的大小的差值是否在预设差值范围内,若任一第二信息中资源的大小与第一信息中各资源的大小的差值在预设差值范围内,说明当前资源的大小不存在异常,则下载当前进行判断的第二信息所对应的资源,若超过预设差值范围,则说明资源所占内存大小存在异常,那么此时不会下载当前进行判断的第二信息所对应的资源。
若在任一过滤后的第二信息中资源的名称与第一信息中各资源的名称相同的情况下,则继续判断任一第二信息中资源的格式与第一信息中各资源的格式是否相同,若不同,说明当前进行判断的资源与目标页面中所有已下载资源的名称相同但格式不相同,即可认为当前判断资源是更新的资源,则下载当前进行判断的第二信息所对应的资源。若相同,说明当前进行判断的资源与目标页面中所有已下载资源的名称、格式均相同,即可认为当前判断资源并不是更新的资源,那么无需下载当前进行判断的第二信息所对应的资源。
在一个实施方式中,下载当前进行判断的第二信息所对应的资源的过程具体包括:由于每一网站中URL的形式是不同的,因此可根据目标页面的URL确定其所属的网站类型确定其所属的网站类型,例如网站类型为优酷、爱奇艺、腾讯等。接着从配置关系表中匹配目标模板,目标模板与已确定的网站类型相对应。由于不同的网站其对应的下载方式、URL的形式是不同的,那么不同的网站下载资源的过程会有所差别,因此匹配与网站类型对应的下载任务模板,可以保证后续下载资源的顺序进行。之后,通过目标模板创建下载任务,并执行已创建的下载任务来下载当前进行判断的第二信息所对应的资源。
接着执行步骤S370,判断是否对每一过滤后的第二信息均执行步骤S340至步骤S360,若是,则执行步骤S380,若否,执行步骤S340。
需要说明的是,针对每一过滤后的第二信息均执行一次步骤S340至步骤S370,直至对所有的过滤后的第二信息均执行一次步骤S340至步骤S370,以对目标页面中包括的所有资源是否为更新的资源进行判断,并下载更新的资源。
其中,配置关系表中为预先配置的,配置关系表中包括字段网站类型、创建下载任务的模板,表1示出了配置关系表的部分内容:
表1
网站类型 | 下载任务的模板 |
优酷 | 模板1 |
爱奇艺 | 模板2 |
腾讯 | 模板3 |
针对每一过滤后的第二信息均执行判断是否为更新的资源以及下载更新的资源的操作后,继续执行步骤S380,获取新下载的所有资源的URL,并继续执行S390,将第一URL列表的内容更新为新下载的所有资源的URL,以将新下载的所有资源作为下一次资源下载中,判断是否为更新资源的判断依据。
下面以网站为视频网站-腾讯、目标页面的URL为电视剧《斛珠夫人》的页面URL、目标页面中已下载资源的第一URL列表为包括电视剧《斛珠夫人》的第1集至第10集的URL的列表、目标页面更新到第13集(说明相比于上一次下载的资源更新了11集至13集这三集资源)、下载时间段为9:00至17:00、预设频率为1分钟、大小差值阈值为占总大小的15%为例,利用资源下载方法300进行资源下载的完整过程进行说明:
首先从参数配置表中读取第1集至第10集的URL的列表、下载时间段,并获取与第1集至第10集的URL的列表中各URL对应的资源的名称(分别为第1集、第2集、第3集、……、第10集)、格式(分别为.qlv)、大小(988.2M)等,作为第一信息。当在9:00至17:00时间段内,每间隔一分钟获取电视剧《斛珠夫人》的页面中包括的第1集至第13集、广告等资源的URL,生成第二URL列表,获取第二URL列表中所有URL对应资源的名称、格式、大小等,作为第二信息,并将第二信息中、广告等资源的信息进行过滤,即,得到仅包括第11集至第13集的名称、格式、大小等的第二信息。
之后,判断第1集视频资源的名称与第1集视频资源的名称是否相同,此时是相同的情况,即可认为第1集视频资源并不是更新的资源,那么无需下载第1集的视频资源。通过与上述相同的方式继续判断2集至10集的视频资源是否为更新资源,由于已知均不是更新的资源,因此不下载第2集至第10集的视频资源。
继续判断第11集至第13集的视频资源是否为更新资源,判断第11集视频资源的名称与第一信息中第1集至第10集的名称是否相同,若不相同,为了验证当前资源的大小是否异常,则继续判断第11集视频资源的大小与第1集至第10集视频资源的大小的差值是否在预设差值范围内,若是,说明第11集视频资源的大小不存在异常,则下载第11集的视频资源,若超过预设差值范围,则说明第11集视频资源所占内存大小存在异常,那么此时不会下载第11集的视频资源。
若在第11集视频资源的名称与第一信息中第1集至第10集的名称相同的情况下,则继续判断第11集视频资源的格式与第一信息中第1集至第10集的格式是否相同,若不同,说明第11集视频资源与第1集至第10集的名称相同但格式不相同,即可认为第11集视频资源是更新的资源,则下载第11集视频资源。若相同,说明第11集视频资源与第1集至第10集的名称、格式均相同,即可认为第11集视频资源并不是更新的资源,那么无需下载第11集视频资源。针对第12集、第13集视频资源同样执行上述过程,即可将更新的第12集和第13集的视频资源下载完成。
之后,获取最新下载的所有资源的URL,即获取第11集至第13集的视频资源的URL,并将参数配置表中的第一URL列表的内容更新为第11集至第13集的视频资源的URL,以将新下载的所有资源作为下一次资源下载中,判断是否为更新资源的判断依据。
需说明的是,每当需要下载资源时,均执行步骤S310至步骤S390,其中,需要重复执行步骤S340至步骤S370,直至对每一过滤后的第二信息均执行判断是否为更新的资源后将更新的资源进行下载的操作。
由上述内容可知,本发明中,可以根据用户预先设置的URL列表,自动下载目标页面中更新的所有资源,对于用户而言可以更加方便地下载更新的资源,提高用户体验。并且下载的资源不会重复,减少了内存资源的占用,提高资源利用率,由于内存占用减少,也可提高计算设备的性能。
另外,本发明提供的资源下载方法,用户可对需要过滤掉的广告等用户不想要的资源进行设置,实现个性化地下载资源,应用更加灵活。并且,还可将广告等用户不需要的资源进行过滤,避免无效资源的下载,进一步提高资源利用率和计算设备的性能。
这里描述的各种技术可结合硬件或软件,或者它们的组合一起实现。从而,本发明的方法和设备,或者本发明的方法和设备的某些方面或部分可采取嵌入有形媒介,例如可移动硬盘、U盘、软盘、CD-ROM或者其它任意机器可读的存储介质中的程序代码(即指令)的形式,其中当程序被载入诸如计算机之类的机器,并被所述机器执行时,所述机器变成实践本发明的设备。
在程序代码在可编程计算机上执行的情况下,计算设备一般包括处理器、处理器可读的存储介质(包括易失性和非易失性存储器和/或存储元件),至少一个输入装置,和至少一个输出装置。其中,存储器被配置用于存储程序代码;处理器被配置用于根据该存储器中存储的所述程序代码中的指令,执行本发明的资源下载方法。
以示例而非限制的方式,可读介质包括可读存储介质和通信介质。可读存储介质存储诸如计算机可读指令、数据结构、程序模块或其它数据等信息。通信介质一般以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据,并且包括任何信息传递介质。以上的任一种的组合也包括在可读介质的范围之内。
在此处所提供的说明书中,算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与本发明的示例一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说,如权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
此外,所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的,而非限制性的,本发明的范围由所附权利要求书限定。
Claims (10)
1.一种资源下载方法,在计算设备中执行,所述计算设备中存储有参数配置表,所述参数配置表中包括字段,目标页面中已下载资源的第一URL列表、下载时间段,所述方法包括:
获取与所述第一URL列表对应的资源的信息,作为第一信息;
在所述下载时间段内,获取目标页面中包括的所有资源的信息,作为第二信息;
判断各第二信息与所述第一信息是否相同,若不相同,则下载当前进行判断的第二信息所对应的资源。
2.如权利要求1所述的方法,其中,获取目标页面中包括的所有资源的信息,作为第二信息的步骤包括:
按照预设频率获取目标页面中包括的所有资源的URL;
获取所有URL对应资源的信息,作为所述第二信息。
3.如权利要求1所述的方法,其中,所述第一信息、所述第二信息分别包括资源的名称、格式、大小,判断各第二信息与所述第一信息是否相同的步骤包括:
判断任一第二信息中资源的名称与所述第一信息中各资源的名称是否相同;
若不相同,则下载当前进行判断的第二信息所对应的资源;
若相同,则继续判断任一第二信息中资源的格式与所述第一信息中各资源的格式是否相同。
4.如权利要求3所述的方法,在任一第二信息中资源的名称与第一信息中各资源的名称不相同时,所述方法还包括步骤:
判断任一第二信息中资源的大小与所述第一信息中各资源的大小的差值是否在预设差值范围内;
若在预设差值范围内,则下载当前进行判断的第二信息所对应的资源;
若不在预设范围内,则不下载当前进行判断的第二信息所对应的资源。
5.如权利要求3或4所述的方法,还包括步骤:
若判断出存在资源的格式与所述第一信息中各资源的格式不相同的第二信息,则下载当前进行判断的第二信息所对应的资源;
否则,不下载当前进行判断的第二信息所对应的资源。
6.如权利要求4或5中任一项所述的方法,其中,所述计算设备中还存储有配置关系表,所述配置关系表中包括字段:网站类型、创建下载任务的模板,所述下载当前进行判断的第二信息所对应的资源的步骤包括:
根据所述目标页面确定其所属的网站类型;
从所述配置关系表中匹配目标模板,其中,所述目标模板与已确定的网站类型相对应;
通过所述目标模板创建下载任务;
执行已创建的下载任务来下载当前进行判断的第二信息所对应的资源。
7.如权利要求1至6中任一项所述的方法,其中,所述计算设备中还存储有过滤信息,所述过滤信息用于对所述第二信息进行过滤,所述方法还包括步骤:
基于所述过滤信息对所述第二信息进行过滤,以将不需要的资源进行过滤。
8.如权利要求4至6中任一项所述的方法,还包括步骤:
获取新下载的所有资源的URL;
将所述参数配置表中的第一URL列表的内容更新为所述新下载的所有资源的URL。
9.一种计算设备,包括:
至少一个处理器;以及
存储器,存储有程序指令,其中,所述程序指令被配置为适于由所述至少一个处理器执行,所述程序指令包括用于执行如权利要求1至8中任一项所述的方法的指令。
10.一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如权利要求1至8中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210043404.3A CN114422502B (zh) | 2022-01-14 | 2022-01-14 | 一种资源下载方法、计算设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210043404.3A CN114422502B (zh) | 2022-01-14 | 2022-01-14 | 一种资源下载方法、计算设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114422502A true CN114422502A (zh) | 2022-04-29 |
CN114422502B CN114422502B (zh) | 2024-05-14 |
Family
ID=81273692
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210043404.3A Active CN114422502B (zh) | 2022-01-14 | 2022-01-14 | 一种资源下载方法、计算设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114422502B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115001765A (zh) * | 2022-05-24 | 2022-09-02 | 北京得间科技有限公司 | 页面资源的加载、验证方法及计算设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107968807A (zh) * | 2016-10-20 | 2018-04-27 | 法乐第(北京)网络科技有限公司 | 自动更新本地缓存资源的方法及装置 |
CN107968812A (zh) * | 2016-10-20 | 2018-04-27 | 法乐第(北京)网络科技有限公司 | 同步本地资源与网络资源的方法及装置 |
CN108520059A (zh) * | 2018-04-09 | 2018-09-11 | 世纪龙信息网络有限责任公司 | 客户端h5页面的加载方法、系统、计算机设备和存储介质 |
-
2022
- 2022-01-14 CN CN202210043404.3A patent/CN114422502B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107968807A (zh) * | 2016-10-20 | 2018-04-27 | 法乐第(北京)网络科技有限公司 | 自动更新本地缓存资源的方法及装置 |
CN107968812A (zh) * | 2016-10-20 | 2018-04-27 | 法乐第(北京)网络科技有限公司 | 同步本地资源与网络资源的方法及装置 |
CN108520059A (zh) * | 2018-04-09 | 2018-09-11 | 世纪龙信息网络有限责任公司 | 客户端h5页面的加载方法、系统、计算机设备和存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115001765A (zh) * | 2022-05-24 | 2022-09-02 | 北京得间科技有限公司 | 页面资源的加载、验证方法及计算设备 |
Also Published As
Publication number | Publication date |
---|---|
CN114422502B (zh) | 2024-05-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109144647B (zh) | 一种表单设计方法与装置、终端设备以及存储介质 | |
CN111651464B (zh) | 数据处理方法、系统及计算设备 | |
CN110187880B (zh) | 一种同类元素识别方法、装置和计算设备 | |
CN111177664B (zh) | 水印信息添加方法、服务器及系统 | |
CN113377289A (zh) | 一种缓存管理方法、系统、计算设备及可读存储介质 | |
CN112800305A (zh) | 一种基于网络爬虫的知识图谱数据抽取方法及装置 | |
CN107678741B (zh) | 列表视图的实现方法、装置、可读存储介质及设备 | |
CN114422502A (zh) | 一种资源下载方法、计算设备和存储介质 | |
CN111414383B (zh) | 数据请求方法、数据处理系统及计算设备 | |
CN107977410B (zh) | 基于电子书应用的书架管理方法及电子设备 | |
CN111444448B (zh) | 一种数据处理方法、服务器及系统 | |
CN113535650A (zh) | 一种文件命名方法及计算设备 | |
CN116339694B (zh) | 低代码平台组件的扩展方法、装置、电子设备及存储介质 | |
CN107508705B (zh) | 一种http元素的资源树构建方法及计算设备 | |
CN111814029A (zh) | 一种数据查询方法、系统及计算设备 | |
CN113344768B (zh) | 一种图像矩阵卷积的实现方法、计算设备及储存介质 | |
CN110516169B (zh) | 数据显示方法、装置、系统及计算设备 | |
CN106874036B (zh) | 应用程序的更新方法、装置及移动终端 | |
CN109274758B (zh) | 一种请求消息的处理方法及计算设备 | |
CN112181516A (zh) | 应用软件的执行方法及计算设备 | |
CN110992131A (zh) | 一种表单处理方法、装置及存储介质 | |
CN114884974B (zh) | 一种数据复用方法、系统及计算设备 | |
CN113254888B (zh) | 获取硬件信息的方法、授权控制系统及计算设备 | |
CN115827503A (zh) | 一种缓存数据更新方法、系统及计算设备 | |
CN114546204B (zh) | 一种窗口管理方法、计算设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |