CN105488078B - 一种网页数据缓存方法及设备 - Google Patents

一种网页数据缓存方法及设备 Download PDF

Info

Publication number
CN105488078B
CN105488078B CN201410532328.8A CN201410532328A CN105488078B CN 105488078 B CN105488078 B CN 105488078B CN 201410532328 A CN201410532328 A CN 201410532328A CN 105488078 B CN105488078 B CN 105488078B
Authority
CN
China
Prior art keywords
page
user
file
request
static
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410532328.8A
Other languages
English (en)
Other versions
CN105488078A (zh
Inventor
李琪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Advanced New Technologies Co Ltd
Advantageous New Technologies Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201410532328.8A priority Critical patent/CN105488078B/zh
Publication of CN105488078A publication Critical patent/CN105488078A/zh
Priority to HK16110287.3A priority patent/HK1222237A1/zh
Application granted granted Critical
Publication of CN105488078B publication Critical patent/CN105488078B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种网页数据缓存方法,根据用户的离线缓存请求向网络侧请求与各待缓存页面对应的页面信息,在缓存网络侧根据所述离线缓存请求返回的文件数据包后根据所述文件数据包生成用于在离线状态下访问的静态文件,由于页面信息中仅包含所述待缓存页面中所述用户指定需要获取的内容的完整数据,因此保证了网页数据完整性的前提下,使用户能够随时地缓存网页数据,并且所占用的资源空间也较小。

Description

一种网页数据缓存方法及设备
技术领域
本发明涉及通信技术领域,特别涉及一种网页数据缓存方法。本发明同时还涉及一种网络设备。
背景技术
随着人们生活水平的不断提高,网络在线购物目前已成为了大众消费的主流方式之一。无论何时何地,用户只要有网络就可以轻松的进行购物操作,例如浏览不同商家通过不同网页提供的内容,以及对自己所需要的商品进行相应的购买或收藏操作等。
然而,由于条件的限制,有时候难免会遇到暂时没有网络资源的情况,在这种情况下如何保证用户还能够继续浏览商品,现有技术中通常采取以下两种方案:
(1)将网页及其包含的资源全部下载到本地,该方案所需要的存储空间较大,且对于离线操作本身会有许多冗余文件被下载。同时,一些通过异步请求来加载的资源无法被完全存储(例如需要滚动页面才能完全展示的内容),从而导致用户浏览的数据缺失。此外,用户的操作例如收藏商品、加入购物车等等也无法被下载的资源记录,需要在上线之后重新在在线网页中选择。
(2)利用HTML5 AppCache将网页进行缓存。该方法需要用户预先设置默认的manifest清单,一旦用户接入网络后,所有设置了manifest的网页均会被存储。用户在在线状态下无法临时且直接的指定需要缓存的内容。此外,设置了manifest的网站也无法对动态获取的数据进行完整保存,同样会导致用户浏览的数据缺失。
由此可见,如何将在线网页的内容根据用户的需求随时转变为占用容量小、便于查看的完整可离线访问的资源,成为本领域技术人员亟待解决的技术问题。
发明内容
本发明提供了一种网页数据缓存方法,用以解决现有技术中网页缓存不全、不便以及冗余多的问题,该方法包括:
接收来自于用户的离线缓存请求,所述离线缓存请求所指示的待缓存页面包括所述用户所需要缓存的网页页面和/或当前所有与所述网页页面相关联的其他网页页面;
根据所述离线缓存请求向网络侧请求与各所述待缓存页面对应的页面信息,所述页面信息包含所述待缓存页面中所述用户指定需要获取的内容的完整数据;
缓存所述网络侧根据所述离线缓存请求返回的文件数据包,所述文件数据包含与各所述待缓存页面对应的静态展示页面模板以及用于生成简介页面的完整图文内容;
根据所述文件数据包生成用于在离线状态下访问的静态文件,所述静态文件包含已缓存网页页面的列表以及与各所述已缓存网页页面对应的简介页面。
相应地,本发明还提出了一种网页数据缓存设备,包括,
接口模块,用于接收来自于用户的离线缓存请求,所述离线缓存请求所指示的待缓存页面包括所述用户所需要缓存的网页页面和/或当前所有与所述网页页面相关联的其他网页页面;
获取模块,用于根据所述离线缓存请求向网络侧请求与各所述待缓存页面对应的页面信息,所述页面信息包含所述待缓存页面中所述用户指定需要获取的内容的完整数据;
缓存模块,用于缓存所述网络侧根据所述离线缓存请求返回的文件数据包,所述文件数据包含与各所述待缓存页面对应的静态展示页面模板以及用于生成简介页面的完整图文内容;
生成模块,用于根据所述文件数据包生成用于在离线状态下访问的静态文件,所述静态文件包含已缓存网页页面的列表以及与各所述已缓存网页页面对应的简介页面。
由此可见,通过应用本发明的技术方案,根据用户的离线缓存请求向网络侧请求与各待缓存页面对应的页面信息,在缓存网络侧根据所述离线缓存请求返回的文件数据包后根据所述文件数据包生成用于在离线状态下访问的静态文件,由于页面信息中仅包含所述待缓存页面中所述用户指定需要获取的内容的完整数据,因此保证了网页数据完整性的前提下,使用户能够随时地缓存网页数据,并且所占用的资源空间也较小。
附图说明
图1为本发明提出的一种网页数据缓存方法的流程示意图;
图2为本申请具体实施例所提出的一种网页数据缓存方法的示意图;
图3为本申请提出的一种网页数据缓存设备的结构示意图。
具体实施方式
如背景技术所述,现有技术中用户无法随时将指定在线网页所需的内容完整进行保存,对此本申请提出了一种网页数据缓存方法,用户在有网络的环境中缓存需要的商品列表,在离线状况下浏览挑选,再次上线时,将本地数据同步到线上,解决用户在无网络环境下,也可以进行商品查看、挑选的需求。
如图1所示,为本发明提出的一种网页数据缓存方法的流程示意图,包括如下步骤:
S101,接收来自于用户的离线缓存请求,所述离线缓存请求所指示的待缓存页面包括所述用户所需要缓存的网页页面和/或当前所有与所述网页页面相关联的其他网页页面。
S102,根据所述离线缓存请求向网络侧请求与各所述待缓存页面对应的页面信息,所述页面信息包含所述待缓存页面中所述用户指定需要获取的内容的完整数据。
S103,缓存所述网络侧根据所述离线缓存请求返回的文件数据包,所述文件数据包含与各所述待缓存页面对应的静态展示页面模板以及用于生成简介页面的完整图文内容。
S104,根据所述文件数据包生成用于在离线状态下访问的静态文件,所述静态文件包含已缓存网页页面的列表以及与各所述已缓存网页页面对应的简介页面。
在该步骤之后,用户在离线状态下浏览已缓存网页数据时的步骤如下:
接收来自于所述用户的离线缓存访问请求;根据所述离线缓存访问请求读取所述静态文件;根据所述静态文件向所述用户展示所述列表,并根据所述用户的选择向所述用户展示所述列表中所述用户选择的已缓存页面的简介页面。
假如用户在浏览的过程中希望进行一些操作或是处理,则会记录所述用户在离线状态下根据所述简介页面发出的操作指令,所述操作指令与在线状态下所述用户能够针对各所述网页页面执行的操作指令一致;然后将所述操作指令存储至本地数据文件中。
同时,为了控制整体缓存数据的大小,本发明在当已生成的静态文件的内容大小超过预设的阈值之后,将所述静态文件进行清理,或者根据所述用户的清理指示清理所述静态文件。
为了进一步阐述本发明的技术思想,现结合具体的应用场景,对本发明的技术方案进行说明。如图2所示,为本发明具体实施例中网页数据缓存方法示意图,其中的各项内容说明如下:
静态网页:可在设备中脱机查看的网页文件
b.数据接口:以一定的关系表现出数据内容及数据之间的关系的接口。
c.自定义模板:HTML片段,结合数据接口可生成网页。
基于上述设置,本具体实施例的实现流程如下:
S201,用户浏览购物网站,在商品列表处,提供“离线缓存”按钮,用户可选择离线当前页面宝贝或者当前店铺宝贝。点击按钮,向后台请求数据,后台返回静态展示页面模板以及商品列表相关信息的json文件(商品id、描述、图片名称等),同时所需要的图片被保存到设备本地文件夹中。
S202,设备本地通过静态模板及数据文件,生成脱机访问的静态文件(包括商品列表及简要的商品简介页面)
S203,设备在离线状况下,用户可从“已缓存的商品列表”入口进入离线选购页面,点击“加入离线购物车”按钮后,对应商品的信息被写入本地的数据文件中。
S204,设备再次联网时,用户进入购物车,网站将判断本地的数据文件是否为空,若不为空则询问用户是否同步离线购物车内容,用户可选择将离线内容同步,进而进行购买操作。
S205,存储内容超过上限后自动清理,用户也可手动清除以缓存的数据。
为达到以上技术目的,本发明还提出了一种网页数据缓存设备,如图3所示,包括,
接口模块310,用于接收来自于用户的离线缓存请求,所述离线缓存请求所指示的待缓存页面包括所述用户所需要缓存的网页页面和/或当前所有与所述网页页面相关联的其他网页页面;
获取模块320,用于根据所述离线缓存请求向网络侧请求与各所述待缓存页面对应的页面信息,所述页面信息包含所述待缓存页面中所述用户指定需要获取的内容的完整数据;
缓存模块330,用于缓存所述网络侧根据所述离线缓存请求返回的文件数据包,所述文件数据包含与各所述待缓存页面对应的静态展示页面模板以及用于生成简介页面的完整图文内容;
生成模块340,用于根据所述文件数据包生成用于在离线状态下访问的静态文件,所述静态文件包含已缓存网页页面的列表以及与各所述已缓存网页页面对应的简介页面。
在具体的实施场景中,还包括:
离线访问模块,用于接收来自于所述用户的离线缓存访问请求,根据所述离线缓存访问请求读取所述静态文件;
根据所述静态文件向所述用户展示所述列表,并根据所述用户的选择向所述用户展示所述列表中所述用户选择的已缓存页面的简介页面。
在具体的实施场景中,还包括:
记录模块,用于记录所述用户在离线状态下根据所述简介页面发出的操作指令,并将所述操作指令存储至本地数据文件中,所述操作指令与在线状态下所述用户能够针对各所述网页页面执行的操作指令一致。
在具体的实施场景中,还包括:
上次模块,用于当所述设备从离线状态转为在线状态后,将所述本地数据文件上传至所述网络侧,以使所述网络侧在判断所述本地数据文件不为空时询问所述用户是否同步所述本地数据文件中的内容。
在具体的实施场景中,还包括:
清理模块,用于在当已生成的静态文件的内容大小超过预设的阈值之后将所述静态文件进行清理;或根据所述用户的清理指示清理所述静态文件。
通过应用本发明的技术方案,根据用户的离线缓存请求向网络侧请求与各待缓存页面对应的页面信息,在缓存网络侧根据所述离线缓存请求返回的文件数据包后根据所述文件数据包生成用于在离线状态下访问的静态文件,由于页面信息中仅包含所述待缓存页面中所述用户指定需要获取的内容的完整数据,因此保证了网页数据完整性的前提下,使用户能够随时地缓存网页数据,并且所占用的资源空间也较小。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可以通过硬件实现,也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施场景所述的方法。
本领域技术人员可以理解附图只是一个优选实施场景的示意图,附图中的模块或流程并不一定是实施本发明所必须的。
本领域技术人员可以理解实施场景中的装置中的模块可以按照实施场景描述进行分布于实施场景的装置中,也可以进行相应变化位于不同于本实施场景的一个或多个装置中。上述实施场景的模块可以合并为一个模块,也可以进一步拆分成多个子模块。
上述本发明序号仅仅为了描述,不代表实施场景的优劣。
以上公开的仅为本发明的几个具体实施场景,但是,本发明并非局限于此,任何本领域的技术人员能思之的变化都应落入本发明的保护范围。

Claims (8)

1.一种网页数据缓存方法,其特征在于,包括:
接收来自于用户的离线缓存请求,所述离线缓存请求所指示的待缓存页面包括所述用户所需要缓存的网页页面和/或当前所有与所述网页页面相关联的其他网页页面;
根据所述离线缓存请求向网络侧请求与各所述待缓存页面对应的页面信息,所述页面信息包含所述待缓存页面中所述用户指定需要获取的内容的完整数据;
缓存所述网络侧根据所述离线缓存请求返回的文件数据包,所述文件数据包含与各所述待缓存页面对应的静态展示页面模板以及用于生成简介页面的完整图文内容;
根据所述文件数据包生成用于在离线状态下访问的静态文件,所述静态文件包含已缓存网页页面的列表以及与各所述已缓存网页页面对应的简介页面;
当已生成的所述静态文件的内容大小超过预设的阈值之后,将所述静态文件进行清理;或,根据所述用户的清理指示清理所述静态文件。
2.如权利要求1所述的方法,其特征在于,在根据所述页面信息生成用于脱机访问的静态文件之后,还包括:
接收来自于所述用户的离线缓存访问请求;
根据所述离线缓存访问请求读取所述静态文件;
根据所述静态文件向所述用户展示所述列表,并根据所述用户的选择向所述用户展示所述列表中所述用户选择的已缓存页面的简介页面。
3.如权利要求2所述的方法,其特征在于,在根据所述用户的选择向所述用户展示所述列表中所述用户选择的已缓存页面的简介页面之后,还包括:
记录所述用户在离线状态下根据所述简介页面发出的操作指令,所述操作指令与在线状态下所述用户能够针对各所述网页页面执行的操作指令一致;
将所述操作指令存储至本地数据文件中。
4.如权利要求3所述的方法,其特征在于,在将所述操作指令存储至本地数据文件之后,还包括:
当从离线状态转为在线状态后,将所述本地数据文件上传至所述网络侧,以使所述网络侧在判断所述本地数据文件不为空时询问所述用户是否同步所述本地数据文件中的内容。
5.一种网页数据缓存设备,其特征在于,包括,
接口模块,用于接收来自于用户的离线缓存请求,所述离线缓存请求所指示的待缓存页面包括所述用户所需要缓存的网页页面和/或当前所有与所述网页页面相关联的其他网页页面;
获取模块,用于根据所述离线缓存请求向网络侧请求与各所述待缓存页面对应的页面信息,所述页面信息包含所述待缓存页面中所述用户指定需要获取的内容的完整数据;
缓存模块,用于缓存所述网络侧根据所述离线缓存请求返回的文件数据包,所述文件数据包含与各所述待缓存页面对应的静态展示页面模板以及用于生成简介页面的完整图文内容;
生成模块,用于根据所述文件数据包生成用于在离线状态下访问的静态文件,所述静态文件包含已缓存网页页面的列表以及与各所述已缓存网页页面对应的简介页面;
清理模块,用于在当已生成的静态文件的内容大小超过预设的阈值之后将所述静态文件进行清理;或根据所述用户的清理指示清理所述静态文件。
6.如权利要求5所述的设备,其特征在于,还包括:
离线访问模块,用于接收来自于所述用户的离线缓存访问请求,根据所述离线缓存访问请求读取所述静态文件;
根据所述静态文件向所述用户展示所述列表,并根据所述用户的选择向所述用户展示所述列表中所述用户选择的已缓存页面的简介页面。
7.如权利要求6所述的设备,其特征在于,还包括:
记录模块,用于记录所述用户在离线状态下根据所述简介页面发出的操作指令,并将所述操作指令存储至本地数据文件中,所述操作指令与在线状态下所述用户能够针对各所述网页页面执行的操作指令一致。
8.如权利要求7所述的设备,其特征在于,还包括:
上次模块,用于当所述设备从离线状态转为在线状态后,将所述本地数据文件上传至所述网络侧,以使所述网络侧在判断所述本地数据文件不为空时询问所述用户是否同步所述本地数据文件中的内容。
CN201410532328.8A 2014-10-10 2014-10-10 一种网页数据缓存方法及设备 Active CN105488078B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201410532328.8A CN105488078B (zh) 2014-10-10 2014-10-10 一种网页数据缓存方法及设备
HK16110287.3A HK1222237A1 (zh) 2014-10-10 2016-08-30 種網頁數據緩存方法及設備

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410532328.8A CN105488078B (zh) 2014-10-10 2014-10-10 一种网页数据缓存方法及设备

Publications (2)

Publication Number Publication Date
CN105488078A CN105488078A (zh) 2016-04-13
CN105488078B true CN105488078B (zh) 2019-07-26

Family

ID=55675056

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410532328.8A Active CN105488078B (zh) 2014-10-10 2014-10-10 一种网页数据缓存方法及设备

Country Status (2)

Country Link
CN (1) CN105488078B (zh)
HK (1) HK1222237A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106055588A (zh) * 2016-05-20 2016-10-26 青岛海信电器股份有限公司 离线资源处理方法及装置
CN108123970A (zh) * 2016-11-28 2018-06-05 北京神州泰岳软件股份有限公司 数据展示方法及相关装置
CN108665335B (zh) * 2017-04-01 2021-09-14 北京京东尚科信息技术有限公司 处理购物网站的购物车数据的方法
CN107105336B (zh) * 2017-04-19 2021-01-08 腾讯科技(深圳)有限公司 数据处理方法及数据处理装置
CN109784648A (zh) * 2018-12-14 2019-05-21 北京三快在线科技有限公司 调度资源分配方法、装置、电子设备及可读存储介质
CN111859211B (zh) * 2019-12-31 2024-08-06 北京嘀嘀无限科技发展有限公司 网页离线访问方法、装置、终端及存储介质
CN111782998B (zh) * 2020-06-19 2022-07-12 厦门市美亚柏科信息股份有限公司 一种基于chrome的网页镜像、回放及本地映射地图生成方法
CN115174546B (zh) * 2022-09-06 2023-01-06 广州市千钧网络科技有限公司 一种数据列表的缓存方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7024452B1 (en) * 2001-07-13 2006-04-04 Vignette Corporation Method and system for file-system based caching
CN102109989A (zh) * 2009-12-29 2011-06-29 阿里巴巴集团控股有限公司 一种控制浏览器缓存的方法、装置和系统
CN103595744A (zh) * 2012-08-16 2014-02-19 腾讯科技(深圳)有限公司 信息管理的方法及客户端

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7076500B2 (en) * 2003-06-30 2006-07-11 David Gallant Selective file caching method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7024452B1 (en) * 2001-07-13 2006-04-04 Vignette Corporation Method and system for file-system based caching
CN102109989A (zh) * 2009-12-29 2011-06-29 阿里巴巴集团控股有限公司 一种控制浏览器缓存的方法、装置和系统
CN103595744A (zh) * 2012-08-16 2014-02-19 腾讯科技(深圳)有限公司 信息管理的方法及客户端

Also Published As

Publication number Publication date
HK1222237A1 (zh) 2017-06-23
CN105488078A (zh) 2016-04-13

Similar Documents

Publication Publication Date Title
CN105488078B (zh) 一种网页数据缓存方法及设备
CN109684575A (zh) 网页数据的处理方法及装置、存储介质、计算机设备
CN104412249A (zh) 基于云的文件系统内的文件处置
CN104765715B (zh) 云端字体服务系统
CN108255890B (zh) 页面的处理方法和装置
CN108363815A (zh) 一种网页页面的预读取方法、装置及智能终端设备
CN105117474A (zh) 在网页的阅读模式中进行推荐信息加载的方法和装置
CN104424199A (zh) 搜索方法和装置
CN106598972A (zh) 一种信息显示方法、装置及智能终端
JP5468076B2 (ja) インターネット上で商品のオブジェクト情報を提供するための方法およびシステム
JP2013519932A (ja) 共有可能なユーザインタフェースで情報を構造化するための方法およびシステム
CN102662666B (zh) 一种界面菜单的创建方法及装置
CN102065114A (zh) 一种移动终端访问网页的方法及装置
CN107957999A (zh) 一种网络爬虫获取网站数据的方法及装置
CN105745644A (zh) 表示在网页浏览器中的网页的状态表示的建立
CN102880679B (zh) 一种网页信息存储方法和装置
CN104423991A (zh) 在移动终端加载网页、提供网页数据的方法及装置
CN105930537A (zh) 一种页面保存的方法及电子设备
CN110147184B (zh) 导航回退的方法和控件
CN104808889A (zh) 页面切换方法及电子设备
CN102663081A (zh) 在线应用平台内浏览网页的方法及在线浏览器、在线应用平台
CN103870191A (zh) 网页保存的方法及电子设备
US9679297B2 (en) Method and apparatus for isolating analytics logic from content creation in a rich internet application
CN104808891B (zh) 一种页面信息的处理方法及装置
CN106202513A (zh) 浏览器的浏览主站推荐方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1222237

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20201010

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Patentee after: Innovative advanced technology Co.,Ltd.

Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Patentee before: Advanced innovation technology Co.,Ltd.

Effective date of registration: 20201010

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Patentee after: Advanced innovation technology Co.,Ltd.

Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands

Patentee before: Alibaba Group Holding Ltd.

TR01 Transfer of patent right