CN101226542A

CN101226542A - 一种报表缓存的方法

Info

Publication number: CN101226542A
Application number: CNA2008100060596A
Authority: CN
Inventors: 陈铭新; 陈皓; 朱志; 郑志远; 孙浩; 欧万翔; 金林涛; 黄新新; 赵文; 李政
Original assignee: China Construction Bank Corp
Current assignee: China Construction Bank Corp
Priority date: 2008-02-01
Filing date: 2008-02-01
Publication date: 2008-07-23
Anticipated expiration: 2028-02-01
Also published as: CN101226542B

Abstract

本发明公开了一种报表缓存的方法，包括：接收报表访问数据的步骤；判断对应的报表是否存在于报表缓存服务器中，如果存在则直接读取所需报表，如果不存在则生成报表并依据设定策略决定是否存储报表副本到报表缓存服务器中；对于已经存储在报表缓存服务器中的报表也可依据既定策略判断是否将其删除。该方法采取的缓存策略与业务规则有关，使报表的缓存稀疏化，使报表缓存数量与报表生成速度容易得到均衡。

Description

一种报表缓存的方法

技术领域

本发明涉及一种计算机数据处理方法，更具体地说，本发明涉及一种报表缓存的方法。

背景技术

随着计算机应用领域的不断扩大和深入，商务智能(BusinessIntelligence，简称BI)技术迅速得到应用。企业级的BI工具可以用来进行大批量报表的开发、生成以及管理。在企业级环境下，由于具有高并发性、高可用性、可维护性及可管理性的企业级的BI工具的应用，使得企业海量数据、海量报表、地域分散、用户群体庞大(一般以数十万计)、系统用户的角色复杂的问题不再成为大问题。企业管理人员可以通过企业级的BI工具来进行数据处理，利用企业的各种信息数据制作各种报表，并通过报表的方式获取和了解企业的各种信息，及时了解企业的各种状况。

由于企业的数据都相对集中地存储在相应的服务器中，在海量数据、海量报表、地域分散、用户群体庞大、系统用户的角色复杂的情况下，利用BI工具生成报表的方法也遇到了难题，即，现有的BI工具对于报表的生成过程并没有非常有效的手段能够用来提高报表的生成效率。因此，现有的BI工具通常倾向于采用缓存的方式来提高系统的访问性能。如有一种常用的BI工具即采用了session级别的缓存功能，其办法是，当用户登录后运行过某一报表时，如果该用户再次以相同的查询条件运行该报表，那么系统将直接读取缓存的报表并将此报表返回给用户，而不再重新生成该报表。由于直接读取缓存中的报表比重新生成该报表要快速得多，因此，该办法大大提高了报表的访问速度，从而提高了报表的访问效率。但是，该办法仅仅适用于同一用户，而且只适合于session的有效期内。因此，该办法的效果有其局限性。

显然，要加快报表的生成效率必须采用缓存的方式来实现。但如果把所有的报表都事先生成并缓存，也不现实，因为利用已有数据生成报表后，所得的报表数据会比原来数据的体积膨胀若干数量级。此外，现有的缓存办法，无论基础工具采用何种策略，其缓存都是与业务规则无关的，而是从纯技术的领域来提供相对单一的算法来进行缓存，因而效果都不理想。

发明内容

本发明要解决的技术问题是提供一种报表缓存的方法，该方法采取的缓存策略与业务规则有关，使报表的缓存稀疏化，使报表缓存数量与报表生成速度容易得到均衡。为此，本发明报表缓存的方法，包括：

A)接收访问数据的步骤，用于接收用户主机传来的对一个基本报表发起报表访问的访问参数组合数据；

B)判断的步骤，依据获取的访问参数组合数据判断所对应的报表是否存在于报表缓存服务器中，如果存在，则执行步骤C)；如果不存在，则执行步骤D)；

C)读取所需报表的步骤，从报表缓存服务器中读取访问参数组合数据所对应的报表，且不再执行步骤D)；

D)生成并存储报表的步骤，依据获取的用户访问参数组合生成所需报表，并将报表副本存储到报表缓存服务器中；

E)第二判断并删除报表的步骤，该步骤定期判断报表缓存服务器中存储的报表是否满足设定的删除条件，将满足设定的删除条件的报表删除。

本发明另一种报表缓存的方法，包括：

A2)接收访问数据的步骤，用于接收用户主机传来的对一个基本报表发起报表访问的访问参数组合数据；

B2)判断的步骤，依据获取的访问参数组合数据判断所对应的报表是否存在于报表缓存服务器中，如果存在，则执行步骤C2)；如果不存在，则执行步骤D2)；

C2)读取所需报表的步骤，从报表缓存服务器中读取访问参数组合数据所对应的报表，且不再执行步骤D2)和步骤E2)；

D2)生成报表的步骤，依据获取的用户访问参数组合生成所需报表；

E2)第二判断并存储报表副本的步骤，依据所述参数组合的访问记录数判断该参数组合所对应的报表是否达到存储报表副本的条件，将达到存储报表副本条件的报表的副本存储到报表缓存服务器中。

本发明通过对访问过的报表才给以缓存且对缓存的报表利用与业务规则有关的策略进行删除，或通过对访问过的报表利用与业务规则有关的策略进行策略缓存，使报表的缓存稀疏化，从而使报表缓存数量与报表生成速度得到均衡。

附图说明

图1所示是本发明一种报表缓存的方法的流程图；

图2所示是本发明提供的一个基本报表的具体例子；

图3所示是本发明另一种报表缓存的方法的流程图。

具体实施方式

为使本领域的普通技术人员能够充分了解本发明的目的、特征及功效，现通过下述具体实施例，并配合附图，对本发明作一详细说明。

图1是本发明一种报表缓存的方法的流程图。从图中可以看见，该报表缓存的方法主要包括以下几个步骤。具体如下：

S110：接收访问数据的步骤，通过该步骤接收用户主机传来的对一个基本报表发起报表访问的访问参数组合数据。

用户通过用户主机对一个基本报表发起报表访问后，用户主机将向相关服务器发送该基本报表所提供的相关访问数据，该服务器将接收这些访问数据。

所谓基本报表，是指包含若干选项，而每个选项往往又包含若干参数项的报表。图2即是一个基本报表的具体例。在该基本报表中，机构层次这个选项包含有若干参数项，币种又包含有若干参数项，日期包含有若干参数项，选择机构包含有若干参数项，单位包含有若干参数项，等等。从该基本报表可见，该基本报表虽然仅仅包含了几个选项，但由于每个选项可能包含有若干参数项，因而致使最终可以得到的选择方案很多，即得到的参数项组合方案很多。其中，每一个参数项组合方案对应一个参数组合。而每一个参数组合对应一个报表方案。

在具体实施中，如果所述用户访问参数组合的参数项是日期参数项，则该日期参数项要采用日期表达式。

用户选定了选项后，用户主机将向相关服务器发送该选项组合方案所对应的参数组合数据，该服务器将接收这些用户主机发来的访问参数组合数据。

在具体实施中，可以对基本报表或报表的访问设置授权机制。如果所述基本报表或报表的访问是需要授权的，则首先判断该用户是否具有对所述基本报表或报表访问的权限，如果有，则允许该用户访问，如果无，则不允许该用户访问。这样大大增加了安全性。

S120：判断的步骤，依据获取的访问参数组合数据判断所对应的报表是否存在于报表缓存服务器中，如果存在，则执行步骤S130；如果不存在，则执行步骤S140。

由于每一个参数组合对应了一个报表方案，如果某个报表方案生成过报表并且其报表副本被存储在报表缓存服务器中，则该步骤可以依据获取的访问参数组合数据判断所对应的报表是否存在于报表缓存服务器中，并依据判断结果选择执行相应的后续步骤。

S130：读取所需报表的步骤，从报表缓存服务器中读取访问参数组合数据所对应的报表，且不再执行步骤S140。

根据步骤S120的判断，访问参数组合数据所对应的报表已经被先前保存在缓存服务器中，因此，在此种情况下，服务器即可直接从缓存服务器中读取该报表，并将该报表传送给用户主机，由用户主机展现给用户。由此，即达到了直接从缓存服务器中读取报表而不用再由服务器重新生成这个报表的目的，因此提高了报表获取的速度。

在具体实施中，为了反映该参数组合的访问记录数的增加，可以通过将参数组合的访问记录数加1的办法来达此目的，除此而外，还有多种办法可以达此目的。

从缓存服务器中读取该报表后，将该报表所对应的参数组合的访问记录数加1，除了加1外，也可以加其它数字，只要能反映出访问量有变化即可。

从缓存服务器中读取报表与将该报表所对应的参数组合的访问记录数加1二者之间的先后顺序不必特别限定。

这里所指的缓存服务器和服务器，可以是同一个服务器，也可以是不同的服务器，取决于具体的设置。

S140：生成并存储报表的步骤，依据获取的用户访问参数组合生成所需报表，并将报表副本存储到报表缓存服务器中。

根据步骤S120的判断，访问参数组合数据所对应的报表并没有存在于缓存服务器中，因此，需要由服务器根据访问参数组合数据生成相应的报表，并将所得报表传送给用户主机，由用户主机展现给用户，以满足用户的需要。报表生成后，其副本被存储到报表缓存服务器中。报表副本被存储到报表缓存服务器中时，可以相应地记录其起存时间。存储到报表缓存服务器中的报表副本的作用是，当服务器下次收到同样的报表访问时，即可直接从报表缓存服务器中读取该报表副本，而不用重新生成该报表。该步骤所存储的报表副本，即成为步骤S120所指的存在于报表缓存服务器中的报表。此外，在报表生成后，该报表所对应的参数组合的访问记录被赋予初始值，例如“0”或者“空”。然而，给访问记录赋予初始值的过程不应被看作是必需，因为如果不给访问记录赋予初始值，则其初始值自然是“空”。

S150：第二判断并删除报表的步骤，该步骤定期判断报表缓存服务器中存储的报表是否满足设定的删除条件，将满足设定的删除条件的报表删除。

该步骤所指的报表即是步骤S140中被存储到报表缓存服务器中的报表副本。

在具体实施中，设定的删除条件可以包括：报表的访问频率未达到缓存临界值；报表的访问记录数未达到设定值；报表的存在时间超过规定值。当报表缓存服务器中存储的报表满足这些设定的删除条件时，即将这些满足了设定的删除条件的报表删除。

在具体实施中，可以以报表缓存服务器中的报表所对应的参数组合的访问记录为依据来对报表缓存服务器中的报表的情况进行判断。

在具体实施中，这些设定的删除条件可以单独使用，也可以组合使用。

在具体实施中，所述缓存临界值、访问记录数的设定值、存在时间的规定值可以是可调节的。

该步骤所进行的判断是定期进行的。在具体实施中，所谓的定期本身也可以是可调节的。

将满足设定的删除条件的报表删除，其目的是减少报表缓存服务器中存储的报表的数量，实际效果是减少那些访问量比较少或存在时间比较长的报表。由此而达到稀疏缓存的目的。

在具体实施中，如果步骤S130、步骤S140所读取或生成的报表中含有需要数据到位的参数项，则应从数据到位数据库或资料库中读取相应的数据作为该参数项的数据。所谓数据到位，指的是企业经营中随时形成的新的数据的取得。由于企业经营中随时形成的新的数据具有强烈的时间性，因而数据到位也与时间因素密切相关。需要数据到位的数据可以存储在数据到位数据库或资料库中。

由于企业经营中所随时形成的新的数据具有强烈的时间性，因而在具体实施中，从数据到位数据库或资料库中读取数据时，可以将数据的到位时间一并读出。通常，从数据到位数据库或资料库中读取数据时，应将最新到位的数据读出。

在具体实施中，从数据到位数据库或资料库中读取数据时，可以设置鉴权程序，以确保安全性。

该实施例所描述的技术方案，通过对访问过的报表才给以缓存且对缓存的报表利用与业务规则有关的策略进行删除，使报表的缓存稀疏化，从而使报表缓存数量与报表生成速度得到均衡。该实施例所描述的技术方案还提供了多种更具体实用的实施办法以供选择，使具体的实施方案可以更灵活、更方便、更安全。

图3是本发明的另一种报表缓存的方法的流程图。从图中可以看见，该报表缓存的方法主要包括以下几个步骤。具体如下：

S210：接收访问数据的步骤，通过该步骤接收用户主机传来的对一个基本报表发起报表访问的访问参数组合数据。

该步骤的具体含义及具体实施情况与上述的步骤S110相同，在此不再赘述。

S220：判断的步骤，依据获取的访问参数组合数据判断所对应的报表是否存在于报表缓存服务器中，如果存在，则执行步骤S230；如果不存在，则执行步骤S240。

该步骤的具体含义及具体实施情况与上述的步骤S120相同，在此不再赘述。

S230：读取所需报表的步骤，从报表缓存服务器中读取访问参数组合数据所对应的报表，且不再执行步骤S240和步骤S250。

根据步骤S220的判断，访问参数组合数据所对应的报表已经被先前保存在缓存服务器中，因此，在此种情况下，服务器即可直接从缓存服务器中读取该报表，并将该报表传送给用户主机，由用户主机展现给用户。由此，即达到了直接从缓存服务器中读取报表而不用再由服务器重新生成这个报表的目的，因此提高了报表获取的速度。

S240：生成报表的步骤，依据获取的用户访问参数组合生成所需报表。

在具体实施中，访问记录数除了加1外，也可以加其它数字，只要能反映出访问量有变化即可。

根据步骤S220的判断，访问参数组合数据所对应的报表并没有存在于缓存服务器中，因此，需要由服务器根据访问参数组合数据生成相应的报表，并将所得报表传送给用户主机，由用户主机展现给用户，以满足用户的需要。

报表生成后，并不一定将其副本保存到报表缓存服务器中，是否将报表副本保存到报表缓存服务器中，将由步骤S250决定。

S250：第二判断并存储报表副本的步骤，该步骤依据所述参数组合的访问记录数判断该参数组合所对应的报表是否达到存储报表副本的条件，将达到存储报表副本条件的报表的副本存储到报表缓存服务器中。

报表副本被存储到报表缓存服务器中时，相应地记录其起存时间。存储到报表缓存服务器中的报表副本的作用是，当服务器下次收到同样的报表访问时，即可直接从报表缓存服务器中读取该报表副本，而不用重新生成该报表。该步骤所存储的报表副本，即成为步骤S220所指的存在于报表缓存服务器中的报表。

在具体实施中，设定的存储报表副本的条件可以包括：报表所对应的参数组合的访问频率是否达到设定值，或在一定时间内的访问数量是否达到设定值，达到设定值则视为满足条件。

在具体实施中，这些设定的存储报表副本的条件可以单独使用，也可以组合使用。

在具体实施中，所述访问频率的设定值、一定时间内的访问数量设定值可以是可调节的。

在具体实施中，该步骤所进行的判断可以是定期进行的，也可以是不定期进行的。

由于只有满足了存储报表副本条件的报表才将副本存储到报表缓存服务器中，因而减少了报表缓存服务器中存储的报表的数量，实际效果是减少了缓存服务器中访问量比较少的报表的存储量。由此而达到稀疏缓存的目的。

在具体实施中，还可以定期判断报表缓存服务器中各报表副本所存在的时间，将存在时间超过规定时间的报表副本删除。这样也达到了稀疏缓存的目的。

在具体实施中，如果所读取或生成的报表中含有需要数据到位的参数项，则应从数据到位数据库或资料库中读取相应的数据。从数据到位数据库或资料库中读取数据时，可以将数据的到位时间一并读出。通常，从数据到位数据库或资料库中读取数据时，应将最新到位的数据读出。在具体实施中，从数据到位数据库或资料库中读取数据时，可以设置鉴权程序，以确保安全性。

此外，在具体实施中，针对已经存储在报表缓存服务器中的各报表，虽然其中一些报表所对应的参数组合的访问频率或访问量在原先是达到存储条件的，但由于情况已经发生了变化，其目前的访问频率或访问量已经减少，因而应该予以删除，在这种情况下，可以仿照上述图1所述的第一种报表缓存方法的办法，将这部分报表予以删除。具体做法可以是这样，当报表缓存服务器中的报表被访问后，其所对应的参数组合的访问记录数加1，以便计算其访问频率或访问量；按照上述步骤S150的做法，定期判断报表缓存服务器中存储的报表是否满足设定的删除条件，将满足设定的删除条件的报表删除。具体删除办法和条件参见上述步骤S150，在此不再赘述。这样也进一步达到了稀疏缓存的目的。该步骤所设定的报表删除条件可以与步骤S250所设定的报表副本存储条件完全不同。也就是说，该技术方案的具体实施办法可以在不同的阶段采取不同的策略，因而更灵活。

该实施例所描述的技术方案，通过对访问过的报表利用与业务规则有关的策略进行策略缓存，使报表的缓存稀疏化，从而使报表缓存数量与报表生成速度得到均衡。该实施例所描述的技术方案还可以对已经缓存的报表进行再次的策略性删除，使报表的缓存进一步稀疏化，从而使报表缓存数量与报表生成速度得到进一步的均衡。该实施例所描述的技术方案还提供了多种更具体实用的实施办法以供选择，使具体的实施方案可以更灵活、更方便、更安全。

上述图1、图3所述的二种报表缓存方法的具体实施方案还可以针对不同的用户采取不同的缓存策略，不同的缓存策略主要表现在设定不同的存储报表副本的条件、设定不同的删除报表副本的条件、设定不同的判断周期上。例如，针对一些特定的客户，就可以采取特别的缓存策略，例如，针对一些重要的客户，就可以采取不受访问量或访问频率或副本存在时间长短影响的缓存策略，这些客户所获得的报表的副本一律存储到缓存服务器中，尽管这些报表的访问量或访问频率比较低，但这些副本也不轻易删除，以便确保这些重要客户对报表的访问速度。

上述二种报表缓存方法的具体实施方案也可以针对不同的情况采取不同的缓存策略。即，缓存策略既可因人不同而不同，也可因事不同而不同。因此，本发明的技术方案使用时十分灵活。

以上所述的本发明实施方式，不应构成对本发明保护范围的限定。任何在本发明的精神和原则之内所作的修改、等同替换和改变等，均应包含在本发明的权利要求保护范围之内。

Claims

1.一种报表缓存的方法，其特征在于，包括以下步骤：

2.按照权利要求1所述报表缓存的方法，其特征在于，步骤E)所述设定的删除条件包括：报表的访问频率未达到缓存临界值；报表的访问记录数未达到设定值；报表的存在时间超过规定值。

3.按照权利要求2所述报表缓存的方法，其特征在于，所述的缓存临界值、访问记录数的设定值、存在时间的规定值均为可调节的。

4.按照权利要求1所述报表缓存的方法，其特征在于，如果所述访问参数组合的参数项是日期参数项，则该日期参数项要采用日期表达式。

5.按照权利要求1所述报表缓存的方法，其特征在于，步骤A)中所述的报表访问是需要授权的，如果所述用户具有所述报表访问的权限，则允许该用户访问，如果无，则不允许该用户访问。

6.按照权利要求1所述报表缓存的方法，其特征在于，如果步骤C)、步骤D)中所读取或生成的报表中含有需要数据到位的参数项，则从数据到位资料库中读取相应的数据作为该参数项的数据。

7.按照权利要求6所述报表缓存的方法，其特征在于，从数据到位资料库中读取数据时，将数据的到位时间一并读出。

8.按照权利要求6所述报表缓存的方法，其特征在于，从数据到位资料库中读取数据时，需要用户具有特别授权。

9.一种报表缓存的方法，其特征在于，包括：

10.按照权利要求9所述报表缓存的方法，其特征在于，所述存储报表副本的条件包括：报表所对应的参数组合的访问频率是否达到设定值，或在一定时间内的访问数量是否达到设定值。

11.按照权利要求10所述报表缓存的方法，其特征在于，所述设定值为可调节的。

12.按照权利要求9所述报表缓存的方法，其特征在于，如果所述访问参数组合的参数项是日期参数项，则该日期参数项要采用日期表达式。

13.按照权利要求9所述报表缓存的方法，其特征在于，步骤A2)所述的报表访问是需要授权的，如果该用户具有所述报表访问的权限，则允许该用户访问，如果无，则不允许该用户访问。

14.按照权利要求9所述报表缓存的方法，其特征在于，如果步骤C2)、步骤D2)中所读取或生成的报表中含有需要数据到位的参数项，则从数据到位资料库中读取相应的数据作为该参数项的数据。

15.按照权利要求14所述报表缓存的方法，其特征在于，从数据到位资料库中读取数据时，将数据的到位时间一并读出。

16.按照权利要求14所述报表缓存的方法，其特征在于，从数据到位资料库中读取数据时，需要用户具有特别授权。

17.按照权利要求9所述报表缓存的方法，其特征在于，定期判断报表缓存服务器中各报表副本所存在的时间，将存在时间超过规定时间的报表副本删除，或定期判断报表缓存服务器中各报表副本的访问频率或访问量，将未达到规定访问频率或访问量的报表副本删除。