CN112667898A - 一种资源下载方法、装置、终端设备及存储介质 - Google Patents
一种资源下载方法、装置、终端设备及存储介质 Download PDFInfo
- Publication number
- CN112667898A CN112667898A CN202011609706.XA CN202011609706A CN112667898A CN 112667898 A CN112667898 A CN 112667898A CN 202011609706 A CN202011609706 A CN 202011609706A CN 112667898 A CN112667898 A CN 112667898A
- Authority
- CN
- China
- Prior art keywords
- downloading
- data table
- target resource
- downloaded
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000004590 computer program Methods 0.000 claims description 20
- BUGBHKTXTAQXES-UHFFFAOYSA-N Selenium Chemical compound [Se] BUGBHKTXTAQXES-UHFFFAOYSA-N 0.000 claims description 15
- 229910052711 selenium Inorganic materials 0.000 claims description 15
- 239000011669 selenium Substances 0.000 claims description 15
- 230000008569 process Effects 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
Abstract
本申请适用于计算机技术领域,提供一种资源下载方法、装置、终端设备及存储介质。其中,方法包括:在第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中目标资源是否为已下载状态;在第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;在目标资源下载成功时,将第一数据表与所述第二数据表中目标资源的下载状态更新为下载完成状态。本申请实施例通过第一数据表和第二数据表记录下载状态,并更新第一数据表和第二数据表的下载状态,可保证在下载中断后重新下载或者下载资源过多时,根据两个数据表中的下载状态自动进行下载,可无缝衔接,不会出现遗漏或者重复下载的情况,从而提高了下载效率。
Description
技术领域
本申请属于计算机技术领域,尤其涉及一种资源下载方法、装置、终端设备及存储介质。
背景技术
随着计算机技术的发展,可进行自动化下载网络资源,目前自动化下载网络资源通常是通过网络爬虫的技术实现,网络爬虫是一种自动抓取网页并提取网页内容的程序,在提取网页内容时通常是对抓取的网页进行解析得到网页结构,再解析出网页上的下载按钮来实现下载数据,从而获取资源。
然而,当页面下载中断或下载资源较多时,容易出现遗漏或重复下载的情况,使得下载效率低。
发明内容
本申请实施例提供了一种资源下载方法、装置、终端设备及存储介质,旨在解决现有资源自动下载时,在下载中断或下载资源较多时,容易出现遗漏或重复下载的情况,使得下载效率低的问题。
第一方面,本申请实施例提供了一种资源下载方法,包括:
查询第一数据表中的所有资源的下载状态;所述第一数据表包括至少一条资源的下载状态;
在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态;所述第二数据表包括所述目标资源的下载状态及对应下载地址;
在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;
在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。
在一个实施例中,所述在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态,包括:
在所述第一数据表中查询到未下载的目标资源时,将所述第一数据表中目标数据的下载状态更新为正在下载状态,并查找第二数据表中所述目标资源是否为已下载状态。
在一个实施例中,在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源之后,包括:
在所述目标资源未下载成功的时间段内,将所述第二数据表中所述目标数据的下载状态更新为正在下载状态。
在一个实施例中,所述下载地址包括统一资源定位符;
所述在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源,包括:
根据所述目标资源对应的统一资源定位符,进入所述目标数据所在的网页;
对所述网页进行图像识别;
在识别出预设图标时,确定鼠标点击的位置信息;其中,所述预设图标为预存储鼠标点击位置对应图标的截图图像;
根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载。
在一个实施例中,所述根据所述目标数据的统一资源定位符,进入所述目标数据所在的网页,包括:
根据所述目标资源对应的统一资源定位符,通过selenium工具控制预设浏览器进入所述目标数据所在的网页。
在一个实施例中,所述根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载,包括:
根据所述鼠标点击的位置信息,通过selenium工具模拟鼠标点击对应位置,以进行所述目标资源下载。
在一个实施例中,对所述网页进行图像识别,包括:
通过sikuli工具,对所述网页进行图像识别,以识别所述网页中是否存在所述预设图标。
第二方面,本申请实施例提供了一种资源下载装置,包括:
第一查询模块,用于查询第一数据表中的所有资源的下载状态;所述第一数据表包括至少一条资源的下载状态;
第二查询模块,用于在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态;所述第二数据表包括所述目标资源的下载状态及对应下载地址;
下载模块,用于在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;
第一更新模块,用于在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。
在一个实施例中,所述第二查询模块具体用于:
在所述第一数据表中查询到未下载的目标资源时,将所述第一数据表中目标数据的下载状态更新为正在下载状态,并查找第二数据表中所述目标资源是否为已下载状态。
在一个实施例中,所述资源下载装置还包括:
第二更新模块,用于在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源之后,且在所述目标资源未下载成功的时间段内,将所述第二数据表中所述目标数据的下载状态更新为正在下载状态。
在一个实施例中,所述下载地址包括统一资源定位符;所述下载模块包括:
进入单元,用于根据所述目标资源对应的统一资源定位符,进入所述目标数据所在的网页;
识别单元,用于对所述网页进行图像识别;
确定单元,用于在识别出预设图标时,确定鼠标点击的位置信息;其中,所述预设图标为预存储鼠标点击位置对应图标的截图图像;
点击单元,用于根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载。
在一个实施例中,所述进入单元具体用于:
根据所述目标资源对应的统一资源定位符,通过selenium工具控制预设浏览器进入所述目标数据所在的网页。
在一个实施例中,所述点击单元具体用于:
根据所述鼠标点击的位置信息,通过selenium工具模拟鼠标点击对应位置,以进行所述目标资源下载。
在一个实施例中,所述识别单元具体用于:
通过sikuli工具,对所述网页进行图像识别,以识别所述网页中是否存在所述预设图标。
第三方面,本申请实施例提供了一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述资源下载方法的步骤。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,上述计算机程序被处理器执行时实现上述资源下载方法的步骤。
第五方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行上述资源下载方法的步骤。
本申请实施例与现有技术相比存在的有益效果是:本申请实施例通过第一数据表和第二数据表存储资源下载状态,先在第一数据表中查询所述资源的下载状态,在查询到正在下载或未下载的目标资源时,再向第二数据表查询目标资源是否是已下载状态,在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。本申请实施例可通过第一数据表和第二数据表记录下载状态,并更新第一数据表和第二数据表的下载状态,可保证在下载中断后重新下载或者下载资源过多时,根据两个数据表中的下载状态自动进行下载,可以无缝衔接,不会出现遗漏或者重复下载的情况,从而提高了下载效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一实施例提供的资源下载方法的流程示意图;
图2是本申请另一实施例提供的资源下载方法的流程示意图;
图3是本申请一实施例提供的资源下载装置的结构示意图;
图4是本申请一实施例提供的终端设备的结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
本申请实施例提供的资源下载方法,可以应用于手机、台式电脑、笔记本电脑、超级移动个人计算机(Ultra-Mobile Personal Computer,UMPC)、上网本、个人数字助理(Personal Digital Assistant,PDA)、可穿戴设备、增强现实(Augmented Reality,AR)/虚拟现实(Virtual Reality,VR)设备、电视机、机器人等终端设备,本申请实施例对终端设备的具体类型不做任何限制。
为了说明本申请所述的技术方案,下面通过具体实施例进行说明。
请参阅图1,示出了本申请实施例提供的资源下载方法的示意性流程图,所述方法包括:
步骤S101,查询第一数据表中的所有资源的下载状态;所述第一数据表包括至少一条资源的下载状态。
具体地,可预先创建关系型数据库MySQL,在数据库中创建第一数据表和第二数据表,第一数据表中存储待下载资源的标识和每个资源对应的下载状态。资源的标识可以是资源的名称或关键信息等标识信息,下载状态可通过存储对应的下载状态值进行表示,例如下载状态值为0表示未下载状态,下载状态值为1表示下载完成状态,下载状态值2表示正在下载状态。在第二数据表中,存储待下载资源的标识、每个资源对应的下载状态、以及每个资源对应的下载地址,例如下载地址可以是统一资源定位符URL。对资源进行自动下载的过程中,先根据第一数据表中的待下载资源的存储顺序依次查询所有资源的下载状态。
步骤S102,在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态;所述第二数据表包括所述目标资源的下载状态及对应下载地址。
具体地,在第一数据表中查询到正在下载或未下载的目标资源时,所述目标资源为当前执行自动下载的资源,再通过查找第二数据表中该目标资源是否为已下载状态,由于根据第二数据表中的下载地址进行资源自动下载,对于已下载完成,但是在第一数据表中并没有及时更新的资源,通过在第一数据表中查询到正在下载或未下载的目标资源时,再通过第二数据表中查找该目标资源是否是已经下载完成,可以降低重复下载的概率。
在一个实施例中,所述在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态,包括:在所述第一数据表中查询到未下载的目标资源时,将所述第一数据表中目标数据的下载状态更新为正在下载状态,并查找第二数据表中所述目标资源是否为已下载状态。
具体地,第一数据表中查询到目标资源是处于未下载状态时,此时开始通过第二数据表进行下载操作,因此,先将第一数据表中的目标资源的下载状态从未下载状态更新为正在下载的状态,查找第二数据表中目标资源是否为已下载状态。
步骤S103,在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源。
具体地,在第二数据表中目标资源不为已下载状态,则表示目标资源没有下载成功,目标资源有可能是正在下载,或者是未下载的状态,此时根据下载地址下载目标资源。当处于正在下载的状态时,则等待下载,直到下载成功或者下载失败,下载成功可以是检测到下载到了对应的资源文件,下载失败可以是下载超过了预设时间又或者是下载的资源文件不符合预设格式要求,则判定资源下载失败,在下载失败时,重新自动执行下载操作。
在一个实施例中,如图2所示,所述下载地址包括统一资源定位符;所述在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源,包括步骤S1031至步骤S1034:
步骤S1031,根据所述目标资源对应的统一资源定位符,进入所述目标数据所在的网页。
具体地,在进行自动下载操作的过程先根据目标资源对应的统一资源定位符进入目标数据所在的网页。
在一个实施例中,所述根据所述目标数据的统一资源定位符,进入所述目标数据所在的网页,包括:根据所述目标资源对应的统一资源定位符,通过selenium工具控制预设浏览器进入所述目标数据所在的网页。
具体地,selenium是一个用于Web应用程序测试的工具。selenium支持直接运行在浏览器中模拟用户操作,就像真正的用户在操作一样,因此可基于selenium工具实现控制预设浏览器进入所述目标数据所在的网页。
步骤S1032,对所述网页进行图像识别。
具体地,在进入目标资源所对应的网页后,应执行自动下载操作,目前是通过爬虫技术解析网页的结构,根据网页脚本中下载按钮的位置,解析出下载按钮的位置,达到自动下载的目的。由于现在很多web浏览器的菜单栏对一般的爬虫工具是禁用的,且资源对应的页面没有下载脚本的时候,就无法进行自动下载。因此,预先将自动执行下载过程所需要点击的按钮对应的截图,按下载过程中点击的顺序依次进行存储,所述截图即为上述预设图像。对进入的网页进行图片识别,当识别到预存储的按钮对应的截图时,则模拟鼠标自动点击该按钮所在的位置,按预存储的顺序,一步一步模拟鼠标点击就可以实现自动下载资源。
例如在一种应用场景中,在没有下载按钮的场景中,利用谷歌浏览器打印功能对目标资源进行下载,预先将点击打印功能对应的图标依次保存至本地,再根据识别出图标的位置,依次模拟鼠标进行点击操作,还可以通过模拟键盘输入文件保存的位置,最后再模拟鼠标点击保存即可,就可实现对目标资源进行自动下载的过程。
在一个实施例中,对所述网页进行图像识别,包括:通过sikuli工具,对所述网页进行图像识别,以识别所述网页中是否存在所述预设图标。
具体地,sikuli是一种新型图形化编程技术,它以图像检索技术为基础,通过sikuli工具,对所述网页进行检索。因此通过sikuli工具,对所述网页进行图像识别,在识别过程中检索匹配到预设图标时,就判定是识别出预设图标,并确定预设图标在网页的位置信息。
步骤S1033,在识别出预设图标时,确定鼠标点击的位置信息;其中,所述预设图标为预存储鼠标点击位置对应图标的截图图像。
具体地,在当前页面识别出预设图标时,表示该页面存在鼠标需要的点击位置,确定该预测图标在当前页面的位置信息,将该位置信息确定为鼠标点击的位置信息。
步骤S1034,根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载。
具体地,根据鼠标点击的位置信息,模拟鼠标点击对应的位置,可以进行目标资源的自动下载。
在一个实施例中,所述根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载,包括:根据所述鼠标点击的位置信息,通过selenium工具模拟鼠标点击对应位置,以进行所述目标资源下载。
具体地,在确定鼠标点击的位置信息,基于selenium工具可模拟鼠标点击对应位置,以进行目标资源下载。
步骤S104,在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。
具体地,在目标资源下载成功时,将第二数据表中目标资源的下载状态更新为下载完成状态,并将第一数据表中目标资源的下载状态更新为下载完成状态。
在一个实施例中,在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源之后,包括:在所述目标资源未下载成功的时间段内,将所述第二数据表中所述目标数据的下载状态更新为正在下载状态。
具体地,在所述目标资源未下载成功的时间段内,表示此时处于正在下载的状态,将第二数据表中所述目标数据的下载状态更新为正在下载状态。
在一个实施例中,将第一数据表和第二数据表中目标资源的下载状态值都更新为1后,此时可继续按顺序查找第一数据表中是否存在处于未下载状态或正在下载的其他资源,在所述第一数据表中查询到正在下载或未下载的资源时,返回执行上述步骤S102及后续步骤。在所述第一数据表中未查询到正在下载或未下载的资源时,表示第一数据表中所有的资源下载完成,此时结束下载。
在一个实施例中,当对某一条资源的下载失败次数达到预设阈值时,则放弃该资源的下载,继续执行下一条资源的下载,并生成该下载失败的资源的提示信息,保存至预设下载失败的问题数据表中。
下面以一个具体应用场景进行举例说明,例如,以自动下载车辆维修资料为例,先根据MYSQL技术创建第一数据表A和第二数据表B,在表A中存储一条或多条待下载车辆维修资料的标识、资料的下载状态,在表B中同样对应存储该一条或多条待下载车辆维修资料的标识、资料的下载状态和资料所在的网页地址。如车辆维修资料的标识包括但不限于是车辆品牌、车型、年款和车辆识别码中的一项或多项信息;下载状态通过数值表示,当存储的数值为0表示未下载状态、存储的数值为1表示下载完成状态,存储的数值为2表示正在下载状态;网页地址通过统一资源定位符URL表示。
自动下载车辆维修资料的过程可以是:先按A表的存储顺序查找A表中是否存在状态值为2或为0的记录,若在A表中存在状态值为2或为0的记录,则查找B表中该记录对应资料标识的下载状态是否为0,若B表中该记录对应资料标识的下载状态为0,表示对应的资料之前并没有下载,此时根据上述步骤S1031至步骤S1034的方法开始自动下载,并将B表中目标资料的下载状态更新为2(表示正在下载),在资料下载成功时,将B表中该资料对应的下载状态更新为1,并将A表中该资料对应的下载状态更新为1,表示该资料下载完成;或者在资料下载失败时,重新根据上述步骤S1031至步骤S1034的方法开始自动下载;若在A表中存在状态值为2或为0的记录,且查找B表中该记录对应资料标识的下载状态为2,表示对应的资料处于正在下载状态,则等待下载,直到该目标资料下载成功或者下载失败,在下载成功时,将B表中该资料对应的下载状态更新为1,并将A表中该资料对应的下载状态更新为1,表示该资料下载完,或者在资料下载失败时,重新根据上述步骤S1031至步骤S1034的方法开始自动下载。直到A表的中不存在状态值为2或为0的待下载的资料,结束下载。上述若在A表中存在状态值为0的目标记录,开始查找B表中该目标记录对应资料标识的下载状态时,先将A表中存在状态值更新为2,表示对该资料开始了下载的步骤。上述下载成功可以是检测到下载到了对应的资源文件,下载失败可以是下载超过了预设时间、或者下载对应的资源文件不符合预设格式要求,则判定资源下载失败。如此循环往复,直到A表中不存在状态值为2或为0的待下载的资料,则说明A表的所有待下载的资料已经下载完成,下载结束。当下载中断后,下一次重启自动下载程序,也会根据状态值自动查找到正在进行下载的资料,不会出现遗漏或者重复下载的情况。
本申请实施例通过第一数据表和第二数据表存储资源下载状态,先在第一数据表中查询所述资源的下载状态,在查询到正在下载或未下载的目标资源时,再向第二数据表查询目标资源是否是已下载状态,在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。本申请实施例可通过第一数据表和第二数据表记录下载状态,并更新第一数据表和第二数据表的下载状态,可保证在下载中断后重新下载或者下载资源过多时,根据两个数据表中的下载状态自动进行下载,可以无缝衔接,不会出现遗漏或者重复下载的情况,从而提高了下载效率。
对应于上文实施例所述的资源下载方法,图3示出了本申请实施例提供的资源下载装置的结构框图,为了便于说明,仅示出了与本申请实施例相关的部分。
参照图3,资源下载装置300包括:
第一查询模块301,用于查询第一数据表中的所有资源的下载状态;所述第一数据表包括至少一条资源的下载状态;
第二查询模块302,用于在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态;所述第二数据表包括所述目标资源的下载状态及对应下载地址;
下载模块303,用于在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;
第一更新模块304,用于在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。
在一个实施例中,所述第二查询模块具体用于:
在所述第一数据表中查询到未下载的目标资源时,将所述第一数据表中目标数据的下载状态更新为正在下载状态,并查找第二数据表中所述目标资源是否为已下载状态。
在一个实施例中,所述资源下载装置还包括:
第二更新模块,用于在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源之后,且在所述目标资源未下载成功的时间段内,将所述第二数据表中所述目标数据的下载状态更新为正在下载状态。
在一个实施例中,所述下载地址包括统一资源定位符;所述下载模块包括:
进入单元,用于根据所述目标资源对应的统一资源定位符,进入所述目标数据所在的网页;
识别单元,用于对所述网页进行图像识别;
确定单元,用于在识别出预设图标时,确定鼠标点击的位置信息;其中,所述预设图标为预存储鼠标点击位置对应图标的截图图像;
点击单元,用于根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载。
在一个实施例中,所述进入单元具体用于:
根据所述目标资源对应的统一资源定位符,通过selenium工具控制预设浏览器进入所述目标数据所在的网页。
在一个实施例中,所述点击单元具体用于:
根据所述鼠标点击的位置信息,通过selenium工具模拟鼠标点击对应位置,以进行所述目标资源下载。
在一个实施例中,所述识别单元具体用于:
通过sikuli工具,对所述网页进行图像识别,以识别所述网页中是否存在所述预设图标。
本申请实施例可通过第一数据表和第二数据表记录下载状态,并更新第一数据表和第二数据表的下载状态,可保证在下载中断后重新下载或者下载资源过多时,根据两个数据表中的下载状态自动进行下载,可以无缝衔接,不会出现遗漏或者重复下载的情况,从而提高了下载效率。
如图4所示,是本申请实施例提供的终端设备的结构示意图。所述终端设备400包括:处理器401、存储器402以及存储在上述存储器402中并可在上述处理器401上运行的计算机程序403。上述处理器401执行上述计算机程序403时实现上述资源下载方法实施例中的步骤。
示例性的,上述计算机程序403可以被分割成一个或多个单元/模块,上述一个或者多个单元/模块被存储在上述存储器402中,并由上述处理器401执行,以完成本申请。上述一个或多个单元/模块可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述上述计算机程序403在上述终端设备400中的执行过程。例如,上述计算机程序403可以被分割成第一查询模块,第二查询模块,下载模块和第一更新模块等,各模块具体功能在上述实施例中已有描述,此处不再赘述。
上述终端设备400可以是应用于手机、台式电脑、笔记本电脑、超级移动个人计算机(Ultra-Mobile Personal Computer,UMPC)、上网本、个人数字助理(Personal DigitalAssistant,PDA)、可穿戴设备、增强现实(Augmented Reality,AR)/虚拟现实(VirtualReality,VR)设备、电视机、机器人等计算设备。上述终端设备400可包括,但不仅限于,处理器401、存储器402。本领域技术人员可以理解,图4仅仅是终端设备400的示例,并不构成对终端设备400的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如上述终端设备400还可以包括输入输出设备、网络接入设备、总线等。
所称处理器401可以是中央处理单元(Central Processing Unit,CPU),还可以是其它通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
上述存储器402可以是终端设备400的内部存储单元,例如终端设备400的硬盘或内存。上述存储器402还可以既包括上述终端设备400的内部存储单元也包括外部存储设备。上述存储器402用于存储上述计算机程序以及上述终端设备400所需的其它程序和数据。上述存储器402还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将上述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述车辆诊断设备中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,上述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本申请实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,上述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,上述计算机程序包括计算机程序代码,上述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。上述计算机可读介质可以包括:能够携带上述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,RandomAccess Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,上述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种资源下载方法,其特征在于,包括:
查询第一数据表中的所有资源的下载状态;所述第一数据表包括至少一条资源的下载状态;
在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态;所述第二数据表包括所述目标资源的下载状态及对应下载地址;
在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;
在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。
2.根据权利要求1所述的方法,其特征在于,所述在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态,包括:
在所述第一数据表中查询到未下载的目标资源时,将所述第一数据表中目标数据的下载状态更新为正在下载状态,并查找第二数据表中所述目标资源是否为已下载状态。
3.根据权利要求1所述的方法,其特征在于,在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源之后,包括:
在所述目标资源未下载成功的时间段内,将所述第二数据表中所述目标数据的下载状态更新为正在下载状态。
4.根据权利要求1所述的方法,其特征在于,所述下载地址包括统一资源定位符;
所述在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源,包括:
根据所述目标资源对应的统一资源定位符,进入所述目标数据所在的网页;
对所述网页进行图像识别;
在识别出预设图标时,确定鼠标点击的位置信息;其中,所述预设图标为预存储鼠标点击位置对应图标的截图图像;
根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载。
5.根据权利要求4所述的方法,其特征在于,所述根据所述目标数据的统一资源定位符,进入所述目标数据所在的网页,包括:
根据所述目标资源对应的统一资源定位符,通过selenium工具控制预设浏览器进入所述目标数据所在的网页。
6.根据权利要求4所述的方法,其特征在于,所述根据所述鼠标点击的位置信息,点击对应位置,以进行所述目标资源下载,包括:
根据所述鼠标点击的位置信息,通过selenium工具模拟鼠标点击对应位置,以进行所述目标资源下载。
7.根据权利要求4所述的方法,其特征在于,对所述网页进行图像识别,包括:
通过sikuli工具,对所述网页进行图像识别,以识别所述网页中是否存在所述预设图标。
8.一种资源下载装置,其特征在于,包括:
第一查询模块,用于查询第一数据表中的所有资源的下载状态;所述第一数据表包括至少一条资源的下载状态;
第二查询模块,用于在所述第一数据表中查询到正在下载或未下载的目标资源时,查找第二数据表中所述目标资源是否为已下载状态;所述第二数据表包括所述目标资源的下载状态及对应下载地址;
下载模块,用于在所述第二数据表中所述目标资源不为已下载状态时,根据对应下载地址下载所述目标资源;
第一更新模块,用于在所述目标资源下载成功时,将所述第一数据表与所述第二数据表中所述目标资源的下载状态更新为下载完成状态。
9.一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011609706.XA CN112667898A (zh) | 2020-12-30 | 2020-12-30 | 一种资源下载方法、装置、终端设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011609706.XA CN112667898A (zh) | 2020-12-30 | 2020-12-30 | 一种资源下载方法、装置、终端设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112667898A true CN112667898A (zh) | 2021-04-16 |
Family
ID=75411118
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011609706.XA Pending CN112667898A (zh) | 2020-12-30 | 2020-12-30 | 一种资源下载方法、装置、终端设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112667898A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103051689A (zh) * | 2012-12-11 | 2013-04-17 | 北京奇虎科技有限公司 | 一种程序升级下载方法和装置 |
CN103475687A (zh) * | 2013-05-24 | 2013-12-25 | 北京网秦天下科技有限公司 | 用于下载网站数据的分布式方法和系统 |
US20140258835A1 (en) * | 2013-03-11 | 2014-09-11 | Corel Corporation | System and method to download images from a website |
CN104301342A (zh) * | 2013-07-17 | 2015-01-21 | 北京齐尔布莱特科技有限公司 | 一种断点下载文件的方法 |
CN107734049A (zh) * | 2017-10-31 | 2018-02-23 | 维沃移动通信有限公司 | 网络资源的下载方法、装置和移动终端 |
CN108920683A (zh) * | 2018-07-12 | 2018-11-30 | 郑州云海信息技术有限公司 | 一种云计算平台下载外部资源的方法、装置和存储介质 |
CN111984174A (zh) * | 2020-07-29 | 2020-11-24 | 维沃移动通信有限公司 | 内容下载方法、装置及电子设备 |
CN112035733A (zh) * | 2019-06-04 | 2020-12-04 | 北京奇虎科技有限公司 | 一种网页数据获取方法、装置、电子设备和存储介质 |
-
2020
- 2020-12-30 CN CN202011609706.XA patent/CN112667898A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103051689A (zh) * | 2012-12-11 | 2013-04-17 | 北京奇虎科技有限公司 | 一种程序升级下载方法和装置 |
US20140258835A1 (en) * | 2013-03-11 | 2014-09-11 | Corel Corporation | System and method to download images from a website |
CN103475687A (zh) * | 2013-05-24 | 2013-12-25 | 北京网秦天下科技有限公司 | 用于下载网站数据的分布式方法和系统 |
CN104301342A (zh) * | 2013-07-17 | 2015-01-21 | 北京齐尔布莱特科技有限公司 | 一种断点下载文件的方法 |
CN107734049A (zh) * | 2017-10-31 | 2018-02-23 | 维沃移动通信有限公司 | 网络资源的下载方法、装置和移动终端 |
CN108920683A (zh) * | 2018-07-12 | 2018-11-30 | 郑州云海信息技术有限公司 | 一种云计算平台下载外部资源的方法、装置和存储介质 |
CN112035733A (zh) * | 2019-06-04 | 2020-12-04 | 北京奇虎科技有限公司 | 一种网页数据获取方法、装置、电子设备和存储介质 |
CN111984174A (zh) * | 2020-07-29 | 2020-11-24 | 维沃移动通信有限公司 | 内容下载方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109829096B (zh) | 一种数据采集方法、装置、电子设备及存储介质 | |
US10175954B2 (en) | Method of processing big data, including arranging icons in a workflow GUI by a user, checking process availability and syntax, converting the workflow into execution code, monitoring the workflow, and displaying associated information | |
CN109828906B (zh) | Ui自动化测试方法、装置、电子设备及存储介质 | |
CN102664925B (zh) | 一种展现搜索结果的方法及装置 | |
EP3848824A1 (en) | Landing page processing method, apparatus, device and medium | |
CN103678704A (zh) | 一种基于图片信息的识图方法、系统、设备及装置 | |
CN110688305B (zh) | 测试环境同步方法、装置、介质、电子设备 | |
CN106528409A (zh) | 一种程序崩溃问题查找方法和装置 | |
CN103488508A (zh) | 一种浏览器的工作方法、浏览器及终端设备 | |
CN117033249A (zh) | 一种测试用例生成方法、装置、计算机设备及存储介质 | |
CN112667898A (zh) | 一种资源下载方法、装置、终端设备及存储介质 | |
CN111949510A (zh) | 测试处理方法、装置、电子设备及可读存储介质 | |
CN114579136A (zh) | 代码处理方法、装置、计算机设备和存储介质 | |
CN113569132A (zh) | 一种信息检索展示方法及系统 | |
CN109376289B (zh) | 一种应用搜索结果中确定目标应用排位的确定方法及装置 | |
CN113962316A (zh) | 模型训练方法、装置及电子设备 | |
CN109446462B (zh) | 基于页面的数据监控处理方法、装置、设备和存储介质 | |
CN112711435A (zh) | 版本更新方法、版本更新装置、电子设备和存储介质 | |
CN112417324A (zh) | 基于Chrome的URL拦截方法、装置及计算机设备 | |
CN104572743A (zh) | 快速链接的信息更新方法及装置 | |
CN112835938B (zh) | 数据处理方法、装置、电子设备和计算机可读存储介质 | |
US11899737B1 (en) | System and method for managing information sourced by a primary server that is sent to other servers when a user interacts with a web page without distorting the other servers | |
CN113778038B (zh) | 一种分散控制系统离线组态对比方法和系统 | |
CN114943516A (zh) | 企业人才电子简历数据库建立方法、系统、装置以及存储介质 | |
CN115526731A (zh) | 任务批处理方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |