CN101446964A - 一种数据钻取的方法及计算机设备 - Google Patents
一种数据钻取的方法及计算机设备 Download PDFInfo
- Publication number
- CN101446964A CN101446964A CNA2008101929217A CN200810192921A CN101446964A CN 101446964 A CN101446964 A CN 101446964A CN A2008101929217 A CNA2008101929217 A CN A2008101929217A CN 200810192921 A CN200810192921 A CN 200810192921A CN 101446964 A CN101446964 A CN 101446964A
- Authority
- CN
- China
- Prior art keywords
- data
- under
- boring
- result
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据钻取的方法,包括:接收用户的数据查询条件;根据用户的数据查询条件进行数据下钻,并将所述进行数据下钻获得的数据下钻结果数据表按序存储于临时数据库中;根据用户的数据查询条件进行数据上钻,从所述临时数据库中逆序获得所述下钻结果数据表。本发明还公开了一种计算机设备,通过实施本发明实施例,可大大减少系统资源消耗,提高数据钻取效率。
Description
技术领域
本发明涉及计算机应用领域,尤其涉及一种数据钻取的方法及计算机设备。
背景技术
钻取是改变维的层次,变换分析的粒度。它包括向上钻取(roll up)和向下钻取(drill down)。roll up是在某一维上将低层次的细节数据概括到高层次的汇总数据,或者减少维数;是指自动生成汇总行的分析方法。通过向导的方式,用户可以定义分析因素的汇总行,例如对于各地区各年度的销售情况,可以生成地区与年度的合计行,也可以生成地区或者年度的合计行。
而drill down则相反,它从汇总数据深入到细节数据进行观察或增加新维。例如,用户分析“各地区、城市的销售情况”时,可以对某一个城市的销售额细分为各个年度的销售额,对某一年度的销售额,可以继续细分为各个季度的销售额。通过钻取的功能,使用户对数据能更深入了解,更容易发现问题,做出正确的决策。
现有中主要是以关系型数据库为基础为用户提供数据的钻取过程,通过获得所有分析维度的外键,并依此建立主表,按照所有分析维度的外键重新组织相应的数据库表。当进行向下钻取即进行数据下钻时,以主表为起点,根据选取的外键执行生成数据库结构化查询语句,当进行向上钻取即进行数据上钻时,以上次下钻的结果表(查询结果表)为起点,根据选取的外键重新执行生成数据库结构化查询语句;通过上述数据上钻和数据下钻查询的结果返回给用户。
但是采用关系型联机分析方法实现数据钻取过程,其关联关系复杂,其外键个数和外键值较多时,会产生很大的主表,其需要较长时间。因此当数据钻取只是钻取部分表时,生成主表将造成系统资源的浪费,降低数据钻取效率。数据上钻和数据下钻缺乏关联性,其钻取过程都是分别基于数据库来执行数据库查询,数据上钻需重新执行数据库查询,加重了系统负担,降低了系统钻取效率。
发明内容
鉴于上述现有技术所存在的问题,本发明实施例提供了一种数据钻取的方法及计算机设备,通过将数据下钻结果数据表保存下来为数据上钻提供提供数据源,避免了上钻时对数据库的重新检索。
为了解决上述问题,本发明实施例提供了一种数据钻取的方法,包括:
接收用户的数据查询条件;
根据用户的数据查询条件进行数据下钻,并将所述进行数据下钻获得的数据下钻结果数据表按序存储于临时数据库中;
根据用户的数据查询条件进行数据上钻,从所述临时数据库中逆序获得所述下钻结果数据表。
相应的,本发明还提供了一种计算机设备,包括:
接收模块,用于接收用户的数据查询条件;
数据下钻模块,用于根据所述接收模块接收的数据查询条件进行数据下钻;
数据存储模块,用于将所述数据下钻模块进行数据下钻获得的数据下钻结果数据表按序存储;
数据上钻模块,用于根据所述接收模块接收的数据查询条件进行数据上钻,从所述数据存储模块中逆序获得所述下钻结果数据表。
实施本发明,可以通过将数据下钻获得的结果数据表按序存储起来,在用户进行数据上钻时将此存储的结果按逆序获得作为数据上钻的结果,这样就避免了数据上钻时对数据库的重新检索,可大大减少系统资源消耗,提高数据钻取效率。
附图说明
图1为本发明实施例中的数据钻取方法的流程图;
图2为本发明实施例中的计算机设备结构示意图。
具体实施方式
下面结合附图来详细说明本发明实施例的具体实现过程。
在一应用场景下,数据下钻的结果与数据上钻的结果具有一一对应关系(如已获得各储蓄产品余额(余额视图),可通过下作获得各储蓄产品余额大于50万的客户清单,这余额大50万的客户清单上钻结果就是储蓄产品余额视图)。因此可通过将数据下钻的结果保存起来(在一次会话中),数据上钻时将此结果作为数据上钻的结果。这样避免了上钻时对数据库的重新检索,可大大减少系统资源消耗,提高数据钻取效率
本发明实施例通过建立数据下钻与数据上钻之间的关联性,减少数据上钻时对数据库的重新检索,可大大减少系统资源消耗,提高数据钻取效率,图1示出了本发明实施例中的数据钻取方法的流程图,具体步骤如下:
步骤S101:接收用户的数据查询条件;
步骤S102:根据用户的数据查询条件进行数据下钻,并将进行数据下钻获得的数据下钻结果数据表按序存储于临时数据库中;
数据下钻的起点是执行查询功能的查询结果,查询结果表现形式为一张数据库表或视图,但数据下钻过程是由用户发起,在执行数据下钻之前系统是无法判定是执行横向数据下钻还是执行纵向数据下钻,因此需首先生成出数据下钻条件。根据用户从查询结果选择变量或用户从查询结果选定的视图区域,确定主表变量,从预定义规则表中匹配该变量,用户从匹配结果中选择或输入一个匹配项后,形成主、从表(被关联表)的关联查询条件(用户选定的视图区域也是变量及变量的值,其形成的关联查询条件只针对主表),然后通过查询条件进行数据下钻。
数据上钻和数据下钻运行并无时序上的关系,具有非线性的特性。为了使数据上钻使用数据上钻之前的数据库表作为数据上钻结果,以避免重复提交,提高系统效率,需生成与根据当前数据表名一一对应、唯一的数据表名,考虑到多用户环境,可采用如下方式生成唯一数据库表名:
每次初始执行数据查询功能时,根据当前会话号生成有效的数据库表名,如:”TMP”+当前会话号;
每次执行数据下钻时,先获取当前数据库表名,并从该名称中匹配“_数值”,并将“数值”加1后,作为数据下钻结果的数据库表名。
将查询条件、唯一数据库表名提交钻取模块,产生临时数据库表。需要说明的是,在此过程中还需要对数据下钻获得的数据下钻结果数据表进行字段过滤,并将最终的数据下钻结果数据表存储。
在此同时,将数据下钻结果数据表名称、表中各字段属性表述和内容以可扩展置标语言(EXtensible Markup Language,XML)方式返回用户,供用户浏览。
步骤S103:根据用户的数据查询条件进行数据上钻,从所述临时数据库中逆序获得下钻结果数据表。
每次执行数据上钻时,执行与数据下钻生成数据库表名的过程相反。先获取当前数据表名,并从该名称中匹配“_数值”,并将“数值”减1后,作为数据上钻结果的数据库表名;如果数值”减1后小于等于0,表明数据上钻已到了数据查询结果,则将当前数据库表中“_1“的前缀作为上钻结果的数据库表名。
在此同时,将数据上钻结果数据表名称、数据库表结构和数据库表内容以XML方式返回用户。
通过将数据下钻获得的结果数据表按序存储起来,在用户进行数据上钻时将此存储的结果按逆序获得作为数据上钻的结果,这样就避免了数据上钻时对数据库的重新检索,可大大减少系统资源消耗,提高数据钻取效率。
相应的,本发明实施例还提供了一种计算机设备,图2示出了本发明实施例中的计算机设备的结构示意图,包括:
接收模块201,用于接收用户的数据查询条件.
数据下钻模块202,用于根据所述接收模块201接收的数据查询条件进行数据下钻;该数据下钻模块202用于根据用户从查询结果选择变量或用户从查询结果选定的视图区域确定主表变量和从表变量,根据所述确定的主表变量和从表变量进行数据下钻。
数据存储模块203,用于将所述数据下钻模块202进行数据下钻获得的数据下钻结果数据表按序存储;该数据存储模块在数据下钻模块进行数据下钻时,为所述数据下钻建立临时数据库,并将所述数据下钻模块获得的数据下钻结果数据表存储所述临时数据库中,所述数据下钻结果与存储于临时数据库中的数据下钻结果数据表一一对应,并且所述数据下钻结果数据表唯一。
数据上钻模块204,用于根据所述接收模块201接收的数据查询条件进行数据上钻,从所述数据存储模块203中逆序获得所述下钻结果数据表用于接收用户的数据查询条件。
该计算机设备还包括安全控制模块205,用于对数据下钻模块203获得的数据下钻结果数据表进行文字过滤。
综上所述,可以通过将数据下钻获得的结果数据表按序存储起来,在用户进行数据上钻时将此存储的结果按逆序获得作为数据上钻的结果,这样就避免了数据上钻时对数据库的重新检索,可大大减少系统资源消耗,提高数据钻取效率。
以上所揭露的仅为本发明一种较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
Claims (8)
1.一种数据钻取的方法,其特征在于,包括:
接收用户的数据查询条件;
根据用户的数据查询条件进行数据下钻,并将所述进行数据下钻获得的数据下钻结果数据表按序存储于临时数据库中;
根据用户的数据查询条件进行数据上钻,从所述临时数据库中逆序获得所述下钻结果数据表。
2.如权利要求1所述的方法,其特征在于,所述根据用户的数据查询条件进行数据下钻步骤为:
根据用户从查询结果选择变量或用户从查询结果选定的视图区域确定主表变量和从表变量,根据所述确定的主表变量和从表变量进行数据下钻。
3.如权利要求2所述的方法,其特征在于,所述将所述进行数据下钻获得的数据下钻结果数据表按序存储于临时数据库中步骤具体为:
在用户进行数据下钻时,为所述数据下钻建立临时数据库,并将所述获得的数据下钻结果数据表按序存储于临时数据库中,所述数据下钻结果与存储于临时数据库中的数据下钻结果数据表一一对应,并且所述数据下钻结果数据表唯一。
4.如权利要求3所述的方法,其特征在于,所述方法还包括:
对所述获得的数据下钻结果数据表进行文字过滤。
5.一种计算机设备,其特征在于,包括:
接收模块,用于接收用户的数据查询条件;
数据下钻模块,用于根据所述接收模块接收的数据查询条件进行数据下钻;
数据存储模块,用于将所述数据下钻模块进行数据下钻获得的数据下钻结果数据表按序存储;
数据上钻模块,用于根据所述接收模块接收的数据查询条件进行数据上钻,从所述数据存储模块中逆序获得所述下钻结果数据表。
6.如权利要求5所述的计算机设备,其特征在于,所述数据下钻模块用于根据用户从查询结果选择变量或用户从查询结果选定的视图区域确定主表变量和从表变量,根据所述确定的主表变量和从表变量进行数据下钻。
7.如权利要求6所述的计算机设备,其特征在于,所述数据存储模块在数据下钻模块进行数据下钻时,为所述数据下钻建立临时数据库,并将所述数据下钻模块获得的数据下钻结果数据表存储所述临时数据库中,所述数据下钻结果与存储于临时数据库中的数据下钻结果数据表一一对应,并且所述数据下钻结果数据表唯一。
8.如权利要求7所述的计算机设备,其特征在于,所述计算机设备还包括:
安全控制模块,用于对所述数据下钻模块获得的数据下钻结果数据表进行文字过滤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA2008101929217A CN101446964A (zh) | 2008-12-31 | 2008-12-31 | 一种数据钻取的方法及计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA2008101929217A CN101446964A (zh) | 2008-12-31 | 2008-12-31 | 一种数据钻取的方法及计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101446964A true CN101446964A (zh) | 2009-06-03 |
Family
ID=40742642
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2008101929217A Pending CN101446964A (zh) | 2008-12-31 | 2008-12-31 | 一种数据钻取的方法及计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101446964A (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102479198A (zh) * | 2010-11-26 | 2012-05-30 | 金蝶软件(中国)有限公司 | 一种数据分页方法、装置及系统 |
CN102521414A (zh) * | 2011-12-28 | 2012-06-27 | 畅捷通信息技术股份有限公司 | 数据钻取装置和数据钻取方法 |
CN102591791A (zh) * | 2011-12-31 | 2012-07-18 | 深圳市中兴昆腾有限公司 | 一种定义策略减少数据存储量的系统及方法 |
CN103853820A (zh) * | 2014-02-20 | 2014-06-11 | 北京用友政务软件有限公司 | 一种数据处理方法及系统 |
CN103853818B (zh) * | 2014-02-12 | 2017-04-12 | 博易智软(北京)技术股份有限公司 | 多维数据的处理方法和装置 |
CN109063031A (zh) * | 2018-07-16 | 2018-12-21 | 北京百度网讯科技有限公司 | 数据钻取方法、装置和服务器 |
CN109697248A (zh) * | 2017-10-24 | 2019-04-30 | 天津数观科技有限公司 | 一种数据钻取方法 |
CN113779044A (zh) * | 2021-11-08 | 2021-12-10 | 南京网眼信息技术有限公司 | 一种数据钻取方法和系统 |
-
2008
- 2008-12-31 CN CNA2008101929217A patent/CN101446964A/zh active Pending
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102479198A (zh) * | 2010-11-26 | 2012-05-30 | 金蝶软件(中国)有限公司 | 一种数据分页方法、装置及系统 |
CN102479198B (zh) * | 2010-11-26 | 2014-04-02 | 金蝶软件(中国)有限公司 | 一种数据分页方法、装置及系统 |
CN102521414B (zh) * | 2011-12-28 | 2016-05-18 | 畅捷通信息技术股份有限公司 | 数据钻取装置和数据钻取方法 |
CN102521414A (zh) * | 2011-12-28 | 2012-06-27 | 畅捷通信息技术股份有限公司 | 数据钻取装置和数据钻取方法 |
CN102591791B (zh) * | 2011-12-31 | 2016-08-03 | 深圳市中兴昆腾有限公司 | 一种定义策略减少数据存储量的系统及方法 |
CN102591791A (zh) * | 2011-12-31 | 2012-07-18 | 深圳市中兴昆腾有限公司 | 一种定义策略减少数据存储量的系统及方法 |
CN103853818B (zh) * | 2014-02-12 | 2017-04-12 | 博易智软(北京)技术股份有限公司 | 多维数据的处理方法和装置 |
CN103853820A (zh) * | 2014-02-20 | 2014-06-11 | 北京用友政务软件有限公司 | 一种数据处理方法及系统 |
CN103853820B (zh) * | 2014-02-20 | 2017-05-03 | 北京用友政务软件有限公司 | 一种数据处理方法及系统 |
CN109697248A (zh) * | 2017-10-24 | 2019-04-30 | 天津数观科技有限公司 | 一种数据钻取方法 |
CN109063031A (zh) * | 2018-07-16 | 2018-12-21 | 北京百度网讯科技有限公司 | 数据钻取方法、装置和服务器 |
CN109063031B (zh) * | 2018-07-16 | 2020-11-20 | 北京百度网讯科技有限公司 | 数据钻取方法、装置和服务器 |
CN113779044A (zh) * | 2021-11-08 | 2021-12-10 | 南京网眼信息技术有限公司 | 一种数据钻取方法和系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101446964A (zh) | 一种数据钻取的方法及计算机设备 | |
CN101266610B (zh) | 一种Web活跃用户网站访问模式的在线挖掘方法 | |
CN102456018B (zh) | 一种交互搜索方法及装置 | |
CN110472068A (zh) | 基于异构分布式知识图谱的大数据处理方法、设备及介质 | |
CN104008203A (zh) | 一种融入本体情境的用户兴趣挖掘方法 | |
CN106681891A (zh) | 一种Java应用系统中调整日志级别的方法及装置 | |
CN104199900A (zh) | 基于文件轨迹追踪树的审计分析方法 | |
CN102737022B (zh) | 获取和搜索相关知识信息的方法及装置 | |
WO2015085622A1 (zh) | 一种物联网终端设备的语义化方法 | |
CN103744896A (zh) | 一种数据处理方法和装置 | |
CN104317845A (zh) | 一种深度网络数据自动抽取方法及系统 | |
CN111078955B (zh) | 基于单向链表的搜索方法、装置、计算机设备及存储介质 | |
CN104765882A (zh) | 一种基于网页特征字符串的互联网网站统计方法 | |
CN103853771A (zh) | 一种搜索结果的推送方法及系统 | |
CN103309954A (zh) | 一种基于html网页的数据抽取系统 | |
KR100899616B1 (ko) | 관계형 데이터베이스를 이용한 메타데이터 관리 방법 및시스템 | |
CN104216977A (zh) | 一种时间序列数据检索方法及装置 | |
CN103345536B (zh) | 一种语义关联索引方法 | |
CN104361121B (zh) | 一种web报表系统公式的批量解析方法 | |
KR20130131657A (ko) | 브랜드 네이밍 방법 및 네이밍 시스템, 그 기록매체 | |
Zhu et al. | WS-SCAN: A effective approach for Web services clustering | |
CN110457635A (zh) | 一种网页生成方法及系统 | |
CN105608122B (zh) | 一种存储电子表单数据的方法和装置 | |
CN104281693A (zh) | 一种语义搜索方法及系统 | |
CN106055572B (zh) | 页面转化参数的处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Open date: 20090603 |