CN105183764A - 一种数据分页方法及装置 - Google Patents
一种数据分页方法及装置 Download PDFInfo
- Publication number
- CN105183764A CN105183764A CN201510456415.4A CN201510456415A CN105183764A CN 105183764 A CN105183764 A CN 105183764A CN 201510456415 A CN201510456415 A CN 201510456415A CN 105183764 A CN105183764 A CN 105183764A
- Authority
- CN
- China
- Prior art keywords
- page
- data
- target data
- webpage
- page number
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/957—Browsing optimisation, e.g. caching or content distillation
- G06F16/9574—Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开的数据分页方法,包括获取待显示网页的页码X;计算所述待显示网页的资源数据页的总页数Y;按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码;将所述目标数据页对应的目标数据发送到客户端。相应的,本发明还公开了一种数据分页装置。与现有技术相比,本发明的技术方案,能够避免缓存雪崩现象的发生,从而能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
Description
技术领域
本发明涉及互联网技术领域,更具体而言,涉及一种数据分页方法及装置。
背景技术
随着信息多元化及大数据技术的发展,网站需要展示的数据越来越多,然而,受到终端屏幕尺寸的限制,在网站的一个网页中无法将数据全部展示,因此,通常先将数据分页形成多个数据页,通过将每个数据页中的数据在对应的网页进行展示将数据全部展示。
具体的,预先设定数据页和网页的映射关系,当服务器接收到客户端发送的网页展示请求时,首先根据网页的页码查询缓存中是否存储有与网页对应的目标数据页,若缓存中存储有该数据页,读取数据页的数据并发送到客户端;若缓存中未存储该数据页,那么服务器从数据库中读取网站对应的数据,对所读取的数据进行分页并写入缓存中。对所读取的数据进行分页具体包括,获取数据总条数,并根据终端的屏幕信息计算每页网页所能够展示的数据条数,将数据以每页所显示的数据条数为单位进行分页,并将分页后的每个数据页存储在缓存中。
其中,现有技术中通常将网页与数据页的映射关系设置为,按照页码从小到大的顺序一一对应,即第一页网页对应展示第一页数据页的数据,第二页网页对应展示第二页数据页的数据,依此类推。而由于网站在展示数据时,通常按照更新时间由新到旧的顺序顺次展示,因此,服务器在进行数据分页时,按照更新时间由新到旧的顺序顺次向下排列,即按照数据页从小到大,数据的更新时间逐渐由新到旧。所以,当数据分页完成之后,如果有新数据产生,为了将新数据分页到数据页第一页的第一条,需要将所有数据按照更新时间重新排序,从而会导致所有数据页全部失效,造成缓存雪崩,进一步的,会降低每页数据的缓存命中率,从而会导致缓存性能和数据加载效率的降低。
发明内容
有鉴于此,本发明实施例提供了一种数据分页方法及装置,能够避免缓存雪崩现象的发生,从而能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
第一方面,本发明实施例提供了一种数据分页方法,包括获取待显示网页的页码X;计算所述待显示网页的资源数据页的总页数Y;按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码;将所述目标数据页对应的目标数据发送到客户端。
在第一方面的第一种可能的实现方式中,所述按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码,具体包括:判断第Y页数据页是否满页;如果所述第Y页数据页满页,则所述待显示网页的页码X对应的目标数据页的页码为Z,Z=Y-X+1;如果所述第Y页数据页不满页,则所述待显示网页的页码X对应的目标数据页的页码为Z和Z’,其中,Z=Y-X+1,Z’=Y-X;整合第Z页和第Z’页的数据得到目标数据;将所述目标数据发送到所述客户端。
结合上述第一方面,在第二种可能的实现方式中,当所述待显示网页的页码X对应的目标数据页的页码为Z时,在所述将所述目标数据页对应的目标数据发送到客户端之前,还包括:判断缓存中是否存储有所述目标数据页的页码Z;如果所述缓存中存储有所述目标数据页的页码Z,根据所述页码Z在所述缓存中查找所述目标数据页;读取所述目标数据页对应的目标数据;如果所述缓存中未存储所述目标数据页的页码Z,从数据库中读取所述目标数据页对应的目标数据。
结合上述第一方面,在第三种可能的实现方式中,所述从数据库中读取所述目标数据页对应的目标数据包括:根据所述页码Z和数据页满页时的数据条数N确定所述目标数据页的第一条数据;在所述数据库中查找所述第一条数据;以所述第一条数据为起始数据按照预设顺序读取N条数据;将所读取的N条数据确定为所述目标数据。
结合上述第一方面,在第四种可能的实现方式中,所述整合第Z页和第Z’页的数据得到目标数据包括:读取所述第Z页的M条数据作为所述目标数据的第一部分数据;利用数据页满页时的数据条数N减去M得到所述目标数据的差量A;其中,M小于N;以所述第Z’页的第一条数据为起始数据,顺次读取A条数据作为所述目标数据的第二部分数据;将所述第二部分数据顺次写到所述第一部分数据之后形成所述目标数据。
结合上述第一方面,在第五种可能的实现方式中,读取所述第Z页的M条数据作为所述目标数据的第一部分数据包括:当Z等于Y时,顺次读取所述M条数据作为所述目标数据的第一部分数据;当Z不等于Y时,以第(A+1)条数据为起始数据,顺次读取所述第Z页的剩余数据作为所述目标数据的第一部分数据。
第二方面,本发明实施例还提供了一种数据分页装置,包括:获取模块,用于获取待显示网页的页码X;计算模块,用于计算所述待显示网页的资源数据页的总页数Y;确定模块,用于按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码;发送模块,用于将所述目标数据页对应的目标数据发送到客户端。
在第二方面的第一种可能的实现方式中,所述确定模块具体包括:判断单元、确定单元和整合单元,其中,所述判断单元,用于判断第Y页数据页是否满页;当第Y页数据页满页时,所述确定单元,用于按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码为Z,其中,Z=Y-X+1;当第Y页数据页不满页时,所述确定单元,还用于确定与所述待显示网页的页码X对应的目标数据页的页码为Z和Z’,其中,Z=Y-X+1,Z’=Y-X;所述整合单元,用于整合第Z页和第Z’页的数据得到目标数据;所述发送模块,还用于将所述整合单元整合得到的目标数据发送到所述客户端。
结合上述第二方面,在第二种可能的实现方式中,所述确定模块还包括查找单元和读取单元,其中,所述判断单元,还用于判断缓存中是否存储有所述目标数据页的页码Z;所述查找单元,用于在所述缓存中存储有所述目标数据页的页码Z时,根据所述页码Z在所述缓存中查找所述目标数据页;所述读取单元,用于读取所述查找单元查找到的目标数据页对应的目标数据;所述读取单元,还用于在所述缓存中未存储所述目标数据页的页码Z时,从数据库中读取所述目标数据页对应的目标数据。
结合上述第二方面,在第三种可能的实现方式中,所述读取单元包括第一读取子单元,其中,所述确定单元,还用于根据所述页码Z和数据页满页时的数据条数N确定所述目标数据页的第一条数据;所述查找单元,还用于在所述数据库中查找所述第一条数据;所述第一读取子单元,用于以所述第一条数据为起始数据按照预设顺序读取N条数据;所述确定单元,还用于将所述第一读取子单元所读取的N条数据确定为所述目标数据。
结合上述第二方面,在第四种可能的实现方式中,所述整合单元包括第二读取子单元、差量计算子单元和数据拼接子单元,其中,所述第二读取子单元,用于读取所述第Z页的M条数据作为所述目标数据的第一部分数据;所述差量计算子单元,用于利用数据页满页时的数据条数N减去M得到所述目标数据的差量A;其中,M小于N;所述第二读取子单元,还用于以所述第Z’页的第一条数据为起始数据,顺次读取A条数据作为所述目标数据的第二部分数据;所述数据拼接子单元,用于将所述第二读取子单元所读取的第二部分数据顺次写到所述第一部分数据之后形成所述目标数据。
结合上述第二方面,在第五种可能的实现方式中,所述第二读取子单元,具体用于当Z等于Y时,顺次读取所述M条数据作为所述目标数据的第一部分数据;当Z不等于Y时,以第(A+1)条数据为起始数据,顺次读取所述第Z页的剩余数据作为所述目标数据的第一部分数据。
由以上技术方案可知,本发明实施例所提供的数据分页方法及装置,在获取待显示网页的页码X后,首先计算所述待显示网页的资源数据页的总页数Y,并按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码,然后,将所述目标数据页对应的目标数据发送到客户端。由此可见,按照本发明的技术方案,待显示网页的页码和数据页页码的映射关系预设为,网页的第一页对应数据页的尾页,网页的第二页对应数据页的倒数第二页,依此类推。所以,在进行数据分页时,应当将更新时间距当前时间最长的数据分页到数据页的第一页,并依次向后,从而将更新时间距当前时间最短的数据分页到最后一页。所以,当分页完成后,即使有新数据产生,仅更新数据页的最后一页即可,从而不会导致其他数据页失效,与现有技术相比,能够避免缓存雪崩现象的发生,从而能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。通过附图所示,本发明的上述及其它目的、特征和优势将更加清晰。在全部附图中相同的附图标记指示相同的部分。并未刻意按实际尺寸等比例缩放绘制附图,重点在于示出本发明的主旨。
图1为本发明实施例提供的数据分页方法的方法流程图;
图2为本发明实施例提供的数据分页方法的第二种实施方式的方法流程图;
图3为本发明实施例提供的数据分页方法的第三种实施例方式的方法流程图;
图4为本发明实施例提供的数据分页装置的结构示意图;
图5为本发明实施例提供的另一种数据分页装置的结构示意图。
具体实施方式
通常,对数据如何分页取决于网页与数据页的映射关系,由于传统映射关系为按照页码由小到大的顺序一一对应,所以,传统的数据分页方法存在上述技术问题。本发明实施例为了解决上述技术问题,通过改变网页与数据页的映射关系,改变数据分页方法,从而解决上述技术问题。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参见图1,图1为本发明实施例提供的数据分页方法的方法流程图。本实施例从整体上介绍本发明的实现方法,所述方法包括以下步骤:
步骤S101:获取待显示网页的页码X。
其中,当用户浏览网页时,客户端根据用户的点击操作生成数据展示请求,该请求中包括待显示网页的页码等信息。由于网页所展示的为存储在服务器端的数据,因此,每页网页均与服务器端的数据页存在映射关系,而网页与数据页的映射关系通过页码建立,因此,服务器在接收到客户端发送的数据展示请求之后,可以从该请求中获取待显示网页的页码,以查找与该待显示网页相互映射的数据页。
例如,用户访问网易首页时,客户端根据用户的访问信息生成数据展示请求,并将该请求发送到服务器端。该请求中包括网页的页码1,当服务器接收到该请求之后,获取待显示网页的页码1,并根据预设的映射关系,确定网易首页对应的目标数据页。
步骤S102:计算所述待显示网页的资源数据页的总页数Y。
其中,在本发明实施例的技术方案中,待显示网页的页码和数据页页码遵循预设的逆向映射规则,所述逆向映射规则是指待显示网页的页码与数据页页码的对应关系为首尾对应,即网页的首页对应数据页的尾页,网页的第二页对应数据页的倒数第二页,并以此类推。因此,在确定网页对应的目标数据页之前,首先要确定待显示网页的资源数据页的总页数Y。然而,由于网页对应的资源数据不断更新,因此,数据总量在不断变化,导致资源数据页的总页数Y也不断变化。而且,即使资源数据更新较慢,但是不同的显示终端屏幕尺寸不同,每页网页所能够显示数据量也不相同,从而也会导致资源数据页的总页数Y不同。因此,服务器在根据待显示网页的页码X确定对应的目标数据页之前,首先需要根据当前资源数据总量计算得到资源数据页的总页数Y。
例如,当待显示网页的页码X是2时,其对应的目标数据页页码Z应当包括倒数第二页的页码,假设数据总量为50条,每页共包括10条数据,那么数据尾页页码为5,与网页对应的目标数据页为第4页;假如上次访问时数据总量为50条,本次访问数据总量增长为80条,资源数据页的总页数Y等于8,此时网页对应的目标数据页的页码等于7。
当然,计算待显示网页的资源数据页的总页数Y的方法,为本领域技术人员所熟知的技术手段,本发明实施例此处不再赘述。
本实施例在获取到待显示网页的页码X后,首先计算资源数据页的总页数Y,能够为确定待显示网页的页码X对应的目标数据页的页码提供精确的数据依据,从而为后面的操作做准备。
步骤S103:按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码。
其中,由上述描述可知,待显示网页的页码和数据页页码遵循预设的逆向映射规则,因此,在获取待显示网页的页码X后,应当以数据页第Y页为起始页,降序查找与待显示网页的页码X对应的目标数据页的页码,但由于资源数据总量是随机自然数,导致数据页的第Y页经常存在不满页的情况,因此本步骤的按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码,具体包括判断第Y页数据页是否满页,具体的,读取第Y页数据页的数据条数M,并对比M是否等于满页数据条数N。需要说明的是,本实施例中,M和N均为自然数,且1≤M≤N。
如果M等于N,说明第Y页数据页满页,则将第Z页数据页确定为待显示网页的目标数据页,Z=Y-X+1;例如,待显示网页的页码X为5,数据页总页数Y为25,则应当以数据页的第25页为起始页码降序查找目标数据页,可知,目标数据页包括第21页数据页。
如果M小于N,说明第Y页数据页不满页,将第Z页和第Z’页数据页确定为待显示网页的目标数据页,其中,Z=Y-X+1,Z’=Y-X。因此,当待显示网页的页码X为1时,为了保证待显示网页所展示的数据满页,本发明实施例的技术方案,读取第Y页和第(Y-1)页数据页的数据,并将两数据页的数据整合形成一页满页数据,将整合后的满页数据确定为目标数据。由于第一页网页的目标数据中包含部分第(Y-1)页数据页的数据,导致第(Y-1)数据页的数据不满页,因此,第二页网页对应的目标数据包括第(Y-1)页和第(Y-2)页数据页的数据,依此类推,其他待显示网页的目标数据内容均包括两页数据页的内容。例如,假设资源数据总量为36条,如果满页显示时的数据为9条,那么,资源数据页的总页数为4页,每页中均有9条数据,此时,第一页网页对应读取第四页数据页的数据即可,因此,将第四页数据页确定为第一页网页的目标数据页。如果满页显示时的数据为10条,数据分页为3页,其中,第一页、第二页和第三页有10条数据,第四页仅有6条数据,当确定第一页网页对应的目标数据时,应当读取第四页和第三页数据页的数据,因此,将第四页和第三页数据页确定为第一页网页对应的目标数据页。
步骤S104:将所述目标数据页对应的目标数据发送到客户端。
其中,当服务器根据待显示网页的页码X确定与该待显示网页相对应的目标数据页之后,可以在缓存中查找目标数据页的页码,如果在缓存中能够查找到目标数据页的页码,可以从缓存中读取相应数据;如果在缓存中无法查找到目标数据页的页码,需要从数据库中读取相应数据。
综合上述,本发明实施例所提供的数据分页方法,由于本发明技术方案将待显示网页的页码和数据页页码的映射关系预设为逆向映射,即,网页的第一页对应数据页的尾页,网页的第二页对应数据页的倒数第二页,依此类推,所以,在进行数据分页时,应当将更新时间距当前时间最长的数据分页到数据页的第一页,并依次向后,从而将更新时间距当前时间最短的数据分页到最后一页。所以,当分页完成后,即使有新数据产生,仅更新数据页的最后一页即可,从而不会导致其他数据页失效,与现有技术相比,能够避免缓存雪崩现象的发生,从而能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
上述实施例对本发明技术方案进行了概括性描述,为了使本领域技术人员更加清楚的了解本发明实施例的技术方案,下面分别对第Y页数据页满页和不满页情况下,数据的分页操作进行详细描述。
请参见图2,图2为本发明实施例提供的数据分页方法的第二种实施方式的方法流程图,本实施例是对第Y页数据页满页的情况下,数据分页操作的详细描述。由于本实施例是在上述实施例基础上的展开,因此,本实施例中与上述实施例相同的步骤,详见上述实施例的描述,本实施例不再赘述。
本实施例所述的方法包括下述步骤:
步骤S201:获取待显示网页的页码X。
步骤S202:计算所述待显示网页的资源数据页的总页数Y。
其中,假设本实施例中所有数据页均为满页,即所有数据页均包含有N条数据。
步骤S203:按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码。
根据上述实施例的描述可知,当第Y页数据页满页时,待显示网页对应的目标数据页的页码为Z,其中,Z=Y-X+1。
步骤S204:判断缓存中是否存储有所述目标数据页的页码Z。如果缓存中存储有页码Z,执行步骤S205;如果缓存中未存储页码Z,执行步骤S207。
众所周知,为了提高读取数据的速度,服务器通常将数据先写入缓存,当需要读取时可以从缓存中读取,从而避免访问数据库,提高数据读取的效率。但是为了降低缓存的负荷,缓存中的数据在存储一定时间后会被删除,因此,在读取数据前需要判断缓存中是否存储有目标数据。
需要说明的是,在数据页的数据写入缓存的同时,还将该数据页的页码及数据条数对应存储到缓存,因此,在确定目标数据页的页码Z之后,服务器首先可以判断缓存中是否存储有页码Z,如果缓存中存储有页码Z,说明目标数据已经写入缓存,服务器可以从缓存中读取目标数据;如果缓存中未存储页码Z,说明目标数据未写入缓存或者已经被删除,服务器需要从数据库中读取目标数据。
步骤S205:根据所述页码Z在所述缓存中查找所述目标数据页。
其中,服务器在将目标数据写入缓存之前,首先将所有资源数据进行分页,并为属于同一数据页的数据设置相应的页码,然后,将资源数据以数据页为单位写入缓存,因此,当服务器从缓存中读取目标数据时,可以先通过页码在缓存中查找目标数据页。
步骤S206:读取所述目标数据页对应的目标数据。
根据上述描述,将目标数据页的全部数据作为目标数据进行读取。
步骤S207:从数据库中读取所述目标数据页对应的目标数据。
其中,数据库中存储有多个网站的资源数据,服务器可以从客户端发送的数据展示请求中获取待显示网页的网页标识,然后,根据网页标识确定资源数据。
由于资源数据在数据库中可以按照更新时间进行存储,而资源数据总数和满页数据条数N已知,且本发明实施例中,随着数据页页码的增大,数据页中数据的更新时间距离当前时间的时间差逐渐减小,因此,在确定目标数据页的页码Z之后,可以计算得到页码Z对应的目标数据中第一条数据的更新时间,根据第一条数据的更新时间在数据库中查找第一条数据,然后,按照更新时间顺次读取N条数据作为页码Z对应的目标数据。
需要说明的是,待显示网页在展示数据时,按照数据更新时间距当前时间由短到长的次序进行,因此,服务器可以从更新时间距当前时间最长的数据开始读取,每读取N条数据,首先,按照更新时间距当前时间由短到长将数据重新排序,然后作为相应数据页的数据写入缓存或者发送到客户端。因此,本实施例中,页码Z的第一条数据可以为该页中更新时间最新的数据,当确定第一条数据后,可以按照更新时间距当前时间由短到长顺次读取N条数据。
步骤S208:将所述目标数据页对应的目标数据发送到客户端。
由上述实施例的描述可知,本实施例的技术方案,在数据分页完成后若有新数据产生,将新数据分页到数据页的最后一页,对其他数据页不产生影响,从而能够避免缓存雪崩现象的发生,能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
上述实施例对第Y页数据页为满页时的分页操作进行了详述,而本发明实施例的技术方案还包括第Y页数据页不满页的情况,下述实施例将对第Y页数据页不满页时的分页操作进行详述。
需要指出的是,本实施例是对上述实施例的补充,因此,本实施例中与上述实施例相同的步骤,详见上述实施例的描述,本实施例不再赘述。
请参见图3,图3为本发明实施例提供的数据分页方法的第三种实施例方式的方法流程图,所述方法包括下述步骤:
步骤S301:获取待显示网页的页码X。
步骤S302:计算所述待显示网页的资源数据页的总页数Y。
步骤S303:确定与所述待显示网页的页码X对应的目标数据页的页码Z和Z’。
其中,在本实施例中,第Y页数据页的数据条数M小于满页数据条数N,假设N为10,M为6。当X等于1时,只读取第Y页的6条数据,网页无法满页显示,因此,服务器需要将第(Y-1)页数据页的数据与该6条数据整合,形成10条数据,依此类推,在本实施例中,当第Y页数据页不满页时,待显示网页对应的目标数据页页码为Z和Z’,其中,Z=Y-X+1,Z’=Y-X。
步骤S304:读取所述第Z页的M条数据作为所述目标数据的第一部分数据。
其中,由上述实施例可知,数据页的页码越大,该数据页对应的数据越新,因此,当待显示网页对应的目标数据页页码为Z和Z’时,先读取第Z页的M条数据作为目标数据页的第一部分数据,再从第Z’页中读取目标数据的第二部分数据。
需要说明的是,读取第Z页数据的方法详见上述实施例的描述,本实施例不赘述。
步骤S305:利用数据页满页时的数据条数N减去M得到所述目标数据的差量A。
其中,虽然待显示网页对应的目标数据页为两页,但是待显示网页满页显示的数据条数为N条,因此,仅需要将第Z’页的部分数据和第Z页的M条数据拼接形成N条目标数据即可,所以,当读取了第Z页数据页的M条数据后,计算目标数据的差量A,以便于确定应当从第Z’页中读取的数据条数。
步骤S306:以所述第Z’页的第一条数据为起始数据,顺次读取A条数据作为所述目标数据的第二部分数据。
其中,根据上述实施例的描述可知,数据页中的数据按照更新时间距当前时间由短到长逐次排列,在展示时,按照数据更新程度进行,因此,在按照差量A从第Z’页中读取的数据时,以第Z’页的第一条数据为起始数据,顺次读取A条数据作为目标数据的第二部分数据。
需要说明的是,在读取第二部分数据时,首先判断缓存中是否存储有页码Z’,当缓存中存储有页码Z’时,从缓存中的读取第二部分数据;当缓存中未存储页码Z’时,从数据库中读取第二部分数据。其中,从数据库中读取第二部分数据的方法和步骤与上述方法类似,本发明实施例此处不再赘述。
步骤S307:将所述第二部分数据顺次写到所述第一部分数据之后形成所述目标数据。
其中,服务器在读取第一部分数据和第二部分数据时,均按照更新时间顺次读取,为了保证目标数据按照更新时间由新到旧顺次排序,当读取完成后,将第二部分数据拼接到第一部分数据之后形成目标数据。
例如,假设N为10,M为6,当X为1时,首先读取第Y页的全部6条数据作为目标数据的第一部分数据,根据(N-M)计算得到差量A为4,服务器再从第(Y-1)页数据页的第一条数据开始顺次读取4条数据,然后,将该4条数据作为第二部分数据拼接到第一部分6条数据的后面,形成第一页网页的目标数据;当X不为1时,由于第Z页中的前4条数据被拼接到第(Z+1)页中,因此,第Z页中只有6条剩余数据,服务器读取该6条剩余数据作为第一部分数据,然后,再从第Z’页中读取4条数据作为第二部分数据拼接到6条剩余数据后面,形成第X页网页的目标数据。此外,当X等于Y时,Z等于1,Z’等于0,即,不存在第Z’页,服务器将第一页数据页剩余的6条数据发送到客户端即可。
此外,由于资源数据一直处于更新状态,导致第Y页的数据条数不稳定,存在在服务器确定网页对应的目标数据页时,增加数据条数的情况,而第Y页数据条数的变动会造成目标数据差量A的计算错误,例如,服务器接收数据展示请求时第Y页的数据为6,读取数据时第Y页的数据条数为7,此时,目标数据的差量由4变为3。因此,为了能够准确的确定目标数据的差量A,在服务器接收到第一页网页的数据展示请求后,首先获取第Y页的数据,然后再获取第(Y-1)页的数据。
步骤S308:将所述目标数据页对应的目标数据发送到客户端。
根据上述描述,将拼接后得到的目标数据发送到客户端。
由此可见,本发明实施例所提供的数据分页方法,在获取待显示网页的页码X后,首先计算所述待显示网页的资源数据页的总页数Y,并按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码Z,其中,Z=Y-X+1,然后,将所述目标数据页对应的目标数据发送到客户端。由此可见,按照本发明的技术方案,待显示网页的页码和数据页页码的映射关系预设为,网页的第一页对应数据页的尾页,网页的第二页对应数据页的倒数第二页,依此类推。所以,在进行数据分页时,应当将更新时间距当前时间最长的数据分页到数据页的第一页,并依次向后,从而将更新时间距当前时间最短的数据分页到最后一页。所以,当分页完成后,即使有新数据产生,仅更新数据页的最后一页即可,从而不会导致其他数据页失效,与现有技术相比,能够避免缓存雪崩现象的发生,从而能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
与上述实现方法相对应的,本发明实施例还提供了一种数据分页装置,请参见图4,图4为本发明实施例提供的数据分页装置的结构示意图,所述装置包括:获取模块11、计算模块12、确定模块13和发送模块14,其中,获取模块11,用于获取待显示网页的页码X;计算模块12,用于计算所述待显示网页的资源数据页的总页数Y;确定模块13,用于按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码;发送模块14,用于将所述目标数据页对应的目标数据发送到客户端。
所述装置中各个模块的功能和作用的实现过程详见上述方法中对应的实现过程,在此不再赘述。
本实施例所述的装置,与现有技术相比,能够避免缓存雪崩现象的发生,从而能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
此外,在上述实施例的基础上,本发明还提供了另一种数据分页装置,如图5所示,图5为本发明实施例提供的另一种数据分页装置的结构示意图,所述装置包括:获取模块21、计算模块22、判断单元23、确定单元24、查找单元25、读取单元26、整合单元27和发送模块28,其中,所述获取模块21、所述计算模块22和所述发送模块28的功能和作用与上述实施例相似,本发明实施例此处不再赘述。
在本实施例中,判断单元23,用于判断第Y页数据页是否满页;当第Y页数据页满页时,所述确定单元24,用于按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码为Z,其中,Z=Y-X+1;当第Y页数据页不满页时,所述确定单元24,还用于确定与所述待显示网页的页码X对应的目标数据页的页码为Z和Z’,其中,Z=Y-X+1,Z’=Y-X;所述整合单元27,用于整合第Z页和第Z’页的数据得到目标数据;所述发送模块28,在本实施例中还用于将所述整合单元27整合得到的目标数据发送到所述客户端。
在上述实施例的基础上,在另外一个实施例中,所述判断单元23,还用于判断缓存中是否存储有所述目标数据页的页码Z;所述查找单元25,用于在所述缓存中存储有所述目标数据页的页码Z时,根据所述页码Z在所述缓存中查找所述目标数据页;所述读取单元26,用于读取所述查找单元25查找到的目标数据页对应的目标数据;在另外一个实施例中,所述读取单元26,还用于在所述缓存中未存储所述目标数据页的页码Z时,从数据库中读取所述目标数据页对应的目标数据。
基于上述实施例的描述,所述读取单元26具体包括第一读取子单元,其中,在本实施例中,所述确定单元,还用于根据所述页码Z和数据页满页时的数据条数N确定所述目标数据页的第一条数据;所述查找单元,还用于在所述数据库中查找所述第一条数据;所述第一读取子单元,用于以所述第一条数据为起始数据按照预设顺序读取N条数据;所述确定单元,还用于将所述第一读取子单元所读取的N条数据确定为所述目标数据。
所述整合单元27包括第二读取子单元、差量计算子单元和数据拼接子单元,其中,所述第二读取子单元,用于读取所述第Z页的M条数据作为所述目标数据的第一部分数据;所述差量计算子单元,用于利用数据页满页时的数据条数N减去M得到所述目标数据的差量A;其中,M小于N;所述第二读取子单元,还用于以所述第Z’页的第一条数据为起始数据,顺次读取A条数据作为所述目标数据的第二部分数据;所述数据拼接子单元,用于将所述第二读取子单元所读取的第二部分数据顺次写到所述第一部分数据之后形成所述目标数据。其中,所述第二读取子单元,具体用于当Z等于Y时,顺次读取所述M条数据作为所述目标数据的第一部分数据;当Z不等于Y时,以第(A+1)条数据为起始数据,顺次读取所述第Z页的剩余数据作为所述目标数据的第一部分数据。
所述装置中各个模块和单元的功能和作用的实现过程详见上述方法中对应的实现过程,在此不再赘述。
综合上述,本发明实施例所提供的数据分页方法及装置,在获取待显示网页的页码X后,首先计算所述待显示网页的资源数据页的总页数Y,并按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码Z,其中,Z=Y-X+1,然后,将所述目标数据页对应的目标数据发送到客户端。由此可见,按照本发明的技术方案,待显示网页的页码和数据页页码的映射关系预设为,网页的第一页对应数据页的尾页,网页的第二页对应数据页的倒数第二页,依此类推。所以,在进行数据分页时,应当将更新时间距当前时间最长的数据分页到数据页的第一页,并依次向后,从而将更新时间距当前时间最短的数据分页到最后一页。所以,当分页完成后,即使有新数据产生,仅更新数据页的最后一页即可,从而不会导致其他数据页失效,与现有技术相比,能够避免缓存雪崩现象的发生,从而能够提高每页数据的缓存命中率,进而提高缓存的性能和数据加载效率。
以上所述仅是本发明的具体实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (12)
1.一种数据分页方法,其特征在于,包括:
获取待显示网页的页码X;
计算所述待显示网页的资源数据页的总页数Y;
按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码;
将所述目标数据页对应的目标数据发送到客户端。
2.如权利要求1所述的方法,其特征在于,所述按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码,具体包括:
判断第Y页数据页是否满页;
如果所述第Y页数据页满页,则所述待显示网页的页码X对应的目标数据页的页码为Z,Z=Y-X+1;
如果所述第Y页数据页不满页,则所述待显示网页的页码X对应的目标数据页的页码为Z和Z’,其中,Z=Y-X+1,Z’=Y-X;整合第Z页和第Z’页的数据得到目标数据;将所述目标数据发送到所述客户端。
3.如权利要求2所述的方法,其特征在于,当所述待显示网页的页码X对应的目标数据页的页码为Z时,在所述将所述目标数据页对应的目标数据发送到客户端之前,还包括:
判断缓存中是否存储有所述目标数据页的页码Z;
如果所述缓存中存储有所述目标数据页的页码Z,根据所述页码Z在所述缓存中查找所述目标数据页;读取所述目标数据页对应的目标数据;
如果所述缓存中未存储所述目标数据页的页码Z,从数据库中读取所述目标数据页对应的目标数据。
4.如权利要求3所述的方法,其特征在于,所述从数据库中读取所述目标数据页对应的目标数据包括:
根据所述页码Z和数据页满页时的数据条数N确定所述目标数据页的第一条数据;
在所述数据库中查找所述第一条数据;
以所述第一条数据为起始数据按照预设顺序读取N条数据;
将所读取的N条数据确定为所述目标数据。
5.如权利要求2所述的方法,其特征在于,所述整合第Z页和第Z’页的数据得到目标数据包括:
读取所述第Z页的M条数据作为所述目标数据的第一部分数据;
利用数据页满页时的数据条数N减去M得到所述目标数据的差量A;其中,M小于N;
以所述第Z’页的第一条数据为起始数据,顺次读取A条数据作为所述目标数据的第二部分数据;
将所述第二部分数据顺次写到所述第一部分数据之后形成所述目标数据。
6.如权利要求5所述的方法,其特征在于,读取所述第Z页的M条数据作为所述目标数据的第一部分数据包括:
当Z等于Y时,顺次读取所述M条数据作为所述目标数据的第一部分数据;
当Z不等于Y时,以第(A+1)条数据为起始数据,顺次读取所述第Z页的剩余数据作为所述目标数据的第一部分数据。
7.一种数据分页装置,其特征在于,包括:
获取模块,用于获取待显示网页的页码X;
计算模块,用于计算所述待显示网页的资源数据页的总页数Y;
确定模块,用于按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码;
发送模块,用于将所述目标数据页对应的目标数据发送到客户端。
8.如权利要求7所述的装置,其特征在于,所述确定模块具体包括:判断单元、确定单元和整合单元,其中,
所述判断单元,用于判断第Y页数据页是否满页;
当第Y页数据页满页时,所述确定单元,用于按照预设对应关系确定与所述待显示网页的页码X对应的目标数据页的页码为Z,其中,Z=Y-X+1;
当第Y页数据页不满页时,所述确定单元,还用于确定与所述待显示网页的页码X对应的目标数据页的页码为Z和Z’,其中,Z=Y-X+1,Z’=Y-X;
所述整合单元,用于整合第Z页和第Z’页的数据得到目标数据;
所述发送模块,还用于将所述整合单元整合得到的目标数据发送到所述客户端。
9.如权利要求7或8所述的装置,其特征在于,所述确定模块还包括查找单元和读取单元,其中,
所述判断单元,还用于判断缓存中是否存储有所述目标数据页的页码Z;
所述查找单元,用于在所述缓存中存储有所述目标数据页的页码Z时,根据所述页码Z在所述缓存中查找所述目标数据页;
所述读取单元,用于读取所述查找单元查找到的目标数据页对应的目标数据;
所述读取单元,还用于在所述缓存中未存储所述目标数据页的页码Z时,从数据库中读取所述目标数据页对应的目标数据。
10.如权利要求9所述的装置,其特征在于,所述读取单元包括第一读取子单元,其中,
所述确定单元,还用于根据所述页码Z和数据页满页时的数据条数N确定所述目标数据页的第一条数据;
所述查找单元,还用于在所述数据库中查找所述第一条数据;
所述第一读取子单元,用于以所述第一条数据为起始数据按照预设顺序读取N条数据;
所述确定单元,还用于将所述第一读取子单元所读取的N条数据确定为所述目标数据。
11.如权利要求8所述的装置,其特征在于,所述整合单元包括第二读取子单元、差量计算子单元和数据拼接子单元,其中,
所述第二读取子单元,用于读取所述第Z页的M条数据作为所述目标数据的第一部分数据;
所述差量计算子单元,用于利用数据页满页时的数据条数N减去M得到所述目标数据的差量A;其中,M小于N;
所述第二读取子单元,还用于以所述第Z’页的第一条数据为起始数据,顺次读取A条数据作为所述目标数据的第二部分数据;
所述数据拼接子单元,用于将所述第二读取子单元所读取的第二部分数据顺次写到所述第一部分数据之后形成所述目标数据。
12.如权利要求11所述的装置,其特征在于,
所述第二读取子单元,具体用于当Z等于Y时,顺次读取所述M条数据作为所述目标数据的第一部分数据;当Z不等于Y时,以第(A+1)条数据为起始数据,顺次读取所述第Z页的剩余数据作为所述目标数据的第一部分数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510456415.4A CN105183764B (zh) | 2015-07-29 | 2015-07-29 | 一种数据分页方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510456415.4A CN105183764B (zh) | 2015-07-29 | 2015-07-29 | 一种数据分页方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105183764A true CN105183764A (zh) | 2015-12-23 |
CN105183764B CN105183764B (zh) | 2017-03-15 |
Family
ID=54905848
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510456415.4A Active CN105183764B (zh) | 2015-07-29 | 2015-07-29 | 一种数据分页方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105183764B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105740330A (zh) * | 2016-01-22 | 2016-07-06 | 腾讯科技(深圳)有限公司 | 分页展示数据的方法及装置 |
CN106250416A (zh) * | 2016-07-22 | 2016-12-21 | 努比亚技术有限公司 | 一种处理分页数据的方法、装置和服务器 |
CN106446167A (zh) * | 2016-09-24 | 2017-02-22 | 乐视控股(北京)有限公司 | 数据处理方法及装置 |
CN106570060A (zh) * | 2016-09-30 | 2017-04-19 | 微梦创科网络科技(中国)有限公司 | 一种信息流中数据的随机抽取方法及装置 |
CN106897433A (zh) * | 2017-02-27 | 2017-06-27 | 福建中金在线信息科技有限公司 | 一种数据获取方法及装置 |
CN108052521A (zh) * | 2017-11-01 | 2018-05-18 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
CN108509616A (zh) * | 2018-03-30 | 2018-09-07 | 北京怡生乐居信息服务有限公司 | 数据处理方法及系统 |
CN109492147A (zh) * | 2018-11-20 | 2019-03-19 | 数贸科技(北京)有限公司 | 数据记录总数量获取方法及装置 |
CN110401728A (zh) * | 2018-04-25 | 2019-11-01 | 北京握奇智能科技有限公司 | 一种sim卡上电话本姓名排序的方法、系统及sim卡 |
CN112347396A (zh) * | 2020-10-22 | 2021-02-09 | 杭州安恒信息技术股份有限公司 | 基于IndexedDB数据库的网页表格显示方法、系统和装置 |
CN113268297A (zh) * | 2021-05-19 | 2021-08-17 | 北京达佳互联信息技术有限公司 | 页面展示方法、装置、电子设备和存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1866251A (zh) * | 2005-12-08 | 2006-11-22 | 华为技术有限公司 | 一种减少分页数据检索时间的方法及装置 |
CN102411585A (zh) * | 2010-09-21 | 2012-04-11 | 厦门市美亚柏科信息股份有限公司 | 一种网页分页数据预加载方法和系统 |
CN103678408A (zh) * | 2012-09-21 | 2014-03-26 | 阿里巴巴集团控股有限公司 | 一种查询数据的方法及装置 |
US20150067038A1 (en) * | 2008-09-04 | 2015-03-05 | Alibaba Group Holding Limited | Method, device, and system for acquiring a web page |
-
2015
- 2015-07-29 CN CN201510456415.4A patent/CN105183764B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1866251A (zh) * | 2005-12-08 | 2006-11-22 | 华为技术有限公司 | 一种减少分页数据检索时间的方法及装置 |
US20150067038A1 (en) * | 2008-09-04 | 2015-03-05 | Alibaba Group Holding Limited | Method, device, and system for acquiring a web page |
CN102411585A (zh) * | 2010-09-21 | 2012-04-11 | 厦门市美亚柏科信息股份有限公司 | 一种网页分页数据预加载方法和系统 |
CN103678408A (zh) * | 2012-09-21 | 2014-03-26 | 阿里巴巴集团控股有限公司 | 一种查询数据的方法及装置 |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105740330A (zh) * | 2016-01-22 | 2016-07-06 | 腾讯科技(深圳)有限公司 | 分页展示数据的方法及装置 |
CN105740330B (zh) * | 2016-01-22 | 2020-08-28 | 腾讯科技(深圳)有限公司 | 分页展示数据的方法及装置 |
CN106250416A (zh) * | 2016-07-22 | 2016-12-21 | 努比亚技术有限公司 | 一种处理分页数据的方法、装置和服务器 |
CN106446167A (zh) * | 2016-09-24 | 2017-02-22 | 乐视控股(北京)有限公司 | 数据处理方法及装置 |
CN106570060A (zh) * | 2016-09-30 | 2017-04-19 | 微梦创科网络科技(中国)有限公司 | 一种信息流中数据的随机抽取方法及装置 |
CN106570060B (zh) * | 2016-09-30 | 2020-03-10 | 微梦创科网络科技(中国)有限公司 | 一种信息流中数据的随机抽取方法及装置 |
CN106897433A (zh) * | 2017-02-27 | 2017-06-27 | 福建中金在线信息科技有限公司 | 一种数据获取方法及装置 |
WO2019085117A1 (zh) * | 2017-11-01 | 2019-05-09 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
CN108052521A (zh) * | 2017-11-01 | 2018-05-18 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
CN108052521B (zh) * | 2017-11-01 | 2022-04-22 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
CN108509616A (zh) * | 2018-03-30 | 2018-09-07 | 北京怡生乐居信息服务有限公司 | 数据处理方法及系统 |
CN110401728A (zh) * | 2018-04-25 | 2019-11-01 | 北京握奇智能科技有限公司 | 一种sim卡上电话本姓名排序的方法、系统及sim卡 |
CN109492147A (zh) * | 2018-11-20 | 2019-03-19 | 数贸科技(北京)有限公司 | 数据记录总数量获取方法及装置 |
CN109492147B (zh) * | 2018-11-20 | 2022-02-08 | 数贸科技(北京)有限公司 | 数据记录总数量获取方法及装置 |
CN112347396A (zh) * | 2020-10-22 | 2021-02-09 | 杭州安恒信息技术股份有限公司 | 基于IndexedDB数据库的网页表格显示方法、系统和装置 |
CN113268297A (zh) * | 2021-05-19 | 2021-08-17 | 北京达佳互联信息技术有限公司 | 页面展示方法、装置、电子设备和存储介质 |
CN113268297B (zh) * | 2021-05-19 | 2024-05-07 | 北京达佳互联信息技术有限公司 | 页面展示方法、装置、电子设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN105183764B (zh) | 2017-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105183764A (zh) | 一种数据分页方法及装置 | |
CN108009008B (zh) | 数据处理方法和系统、电子设备 | |
CN109426619B (zh) | 访问快闪存储器模块的方法及相关闪存控制器与电子装置 | |
CN101901248B (zh) | 一种布隆过滤器的生成、更新以及查询元素方法和装置 | |
CN102111448B (zh) | 分布式哈希表dht存储系统的数据预取方法、节点和系统 | |
CN101668004B (zh) | 一种网页获取方法、装置及系统 | |
US7315259B2 (en) | Techniques for displaying and caching tiled map data on constrained-resource services | |
CN103164408B (zh) | 基于垂直搜索引擎的信息存储、查询方法及其装置 | |
CN105095226A (zh) | 网页资源加载方法及装置 | |
CN104794177A (zh) | 一种数据存储方法及装置 | |
JP2021089704A (ja) | データ照会方法、装置、電子機器、可読記憶媒体、及びコンピュータープログラム | |
CN103677674A (zh) | 一种数据处理方法及装置 | |
CN103345498A (zh) | 基于中转服务器的网页加载方法、装置及系统 | |
CN105426443A (zh) | 一种地图数据的处理方法、装置及系统 | |
WO2024087875A1 (zh) | 内存管理方法、装置、介质及电子设备 | |
CN108958612B (zh) | 控制页面滑动的方法、控制页面方法、系统、终端设备及介质 | |
CN101247405A (zh) | 计算下载时间及资源下载的方法、系统及装置 | |
CN104166649A (zh) | 一种用于搜索引擎的缓存方法和设备 | |
CN105404672A (zh) | 网页数据存储和操作的系统及方法 | |
CN108470043A (zh) | 一种业务结果的获取方法及装置 | |
CN111858612A (zh) | 基于图数据库的数据加速访问方法、装置及存储介质 | |
CN101419618B (zh) | 一种内文信息的显示方法、系统及装置 | |
CN116521816A (zh) | 一种数据处理方法、检索方法、装置、设备以及存储介质 | |
CN115964002A (zh) | 一种电能表终端档案管理方法、装置、设备及介质 | |
CN103530345A (zh) | 短文本特征扩展及拟合特征库构建方法、装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20200420 Address after: 310052 room 508, floor 5, building 4, No. 699, Wangshang Road, Changhe street, Binjiang District, Hangzhou City, Zhejiang Province Patentee after: Alibaba (China) Co.,Ltd. Address before: 510627 Guangdong city of Guangzhou province Whampoa Tianhe District Road No. 163 Xiping Yun Lu Yun Ping square B radio tower 12 layer self unit 01 Patentee before: GUANGZHOU SHENMA MOBILE INFORMATION TECHNOLOGY Co.,Ltd. |
|
TR01 | Transfer of patent right |