CN109033322A - 一种多维数据的测试方法和装置 - Google Patents
一种多维数据的测试方法和装置 Download PDFInfo
- Publication number
- CN109033322A CN109033322A CN201810792068.6A CN201810792068A CN109033322A CN 109033322 A CN109033322 A CN 109033322A CN 201810792068 A CN201810792068 A CN 201810792068A CN 109033322 A CN109033322 A CN 109033322A
- Authority
- CN
- China
- Prior art keywords
- data
- test
- tested
- hash codes
- multidimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种多维数据的测试方法和装置,基于商业智能系统,商业智能系统包括前台展现层和数据仓库层。该方法从前台展现层中导出待测试多维数据表,根据待测试多维数据表的表格样式从数据仓库层中导出与待测试多维数据表对应的测试数据;对测试数据进行维度汇总处理并生成与测试数据对应的汇总表;对测试数据和汇总表进行降维处理并生成第一简表;对待测试多维数据表进行降维处理并生成第二简表;根据第一简表和第二简表生成待测试多维数据表的测试结果。本发明一方面能够提升前台展现层的数据测试效率,另一方面还能够提升数据测试结果的精准度。
Description
技术领域
本发明涉及商业智能数据分析技术领域,特别涉及一种多维数据的测试方法和装置。
背景技术
商业智能(Business Intelligence,简称BI)为将数据转化为知识的过程,其具体包括:数据捕获、数据分析、数据交流及利用数据指导企业经营决策。商业智能系统是指收集、转换、分析和发布数据的系统。近年来,商业智能系统在企业运用方面得到了长足发展,很多企业开发有自己的商业智能系统,并借助商业智能系统进行数据分析以帮助企业进行决策。
典型的企业商业智能系统包括三个层次,分别为:数据接口层,其通过接口从不同的数据源系统中抽取企业的操作性数据,将数据经过接口级的数据验证(如:数据清洗)后存储在企业级的数据仓库层中;数据仓库层,其根据业务主体进行数据仓库建模,并按照定义好的数据仓库模块对数据接口层获取的数据进行转换(如:统一数据名称和字段),再将数据装载到数据仓库中,以供前台展示层使用。前台展现层,其利用已有的数据展现工具或编写可视化展现程序的方式,将数据仓库中的数据以各种数据应用的形式(如:报表、图表、计算分析结果)展现到用户面前。
为保证企业商业智能系统中每一层数据的准确性、完整性、一致性和即时性,需对每一层数据进行测试。其中,前台展现层中的数据分布零散,且同一数据有多个维度的数值,使用人工抽检方式对前台展现层中的数据进行测试时,需对每个维度的数值进行逐一比对并进行维度汇总运算,这会导致测试效率过低或测试结果不精准。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一,提供了一种多维数据的测试方法和装置,一方面能够提升前台展现层的数据测试效率,另一方面还能够提升数据测试结果的精准度。
为实现上述目的,本发明提供了一种多维数据的测试方法,基于商业智能系统,所述商业智能系统包括前台展现层和数据仓库层,所述多维数据测试方法包括:
根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据;
对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表;
对所述测试数据和汇总表进行降维处理并生成第一简表,所述第一简表包括多个第一哈希码及与第一哈希码对应的数据值;
对所述待测试多维数据表进行降维处理并生成第二简表,所述第二简表包括多个第二哈希码及与第二哈希码对应的数据值;
根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果。
可选地,在所述根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据之前还包括:
从前台展现层中导出待测试多维数据表,所述待测试多维数据表为一个或多个;
生成所述待测试多维数据表的表格样式,所述待测试多维数据表的表格样式中至少包括指标名称、与所述指标对应的多个维度、多个维度中每个维度的取值、及数据值。
可选地,所述对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表具体包括:
对所述测试数据进行维度汇总处理并生成与每个维度对应的多个汇总子表;
对所有维度的每个汇总子表均进行维度汇总处理并生成汇总表,所述汇总表为与所述测试数据对应的汇总表。
可选地,所述对所述测试数据和汇总表进行降维处理并生成第一简表包括:
对所述测试数据和汇总表中的每一行进行排列拼接并生成字符串;
对所述字符串进行哈希处理并生成多个第一哈希码;
根据所述多个第一哈希码及与第一哈希码对应的数据值生成第一简表;
对所述待测试多维数据表进行降维处理并生成第二简表包括:
对所述待测试多维数据表中的每一行进行排列拼接并生成字符串;
对所述字符串进行哈希处理并生成多个第二哈希码;
根据所述多个第二哈希码及与第二哈希码的数据值生成第二简表。
可选地,所述根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果具体包括:
判断与第一哈希码相同的第二哈希码所对应的数据值是否与所述第一哈希码对应的数据值相同,若判断出至少一个与第一哈希码相同的第二哈希码所对应的数据值与所述第一哈希码对应的数据值不同,生成所述待测试多维数据表的测试结果为测试未通过。
为实现上述目的,本发明还提供了一种多维数据的测试装置,包括:
导出模块,用于根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据;
第一生成模块,用于对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表,对所述测试数据和汇总表进行降维处理并生成第一简表,所述第一简表包括多个第一哈希码及与第一哈希码对应的数据值,对所述待测试多维数据表进行降维处理并生成第二简表,所述第二简表包括多个第二哈希码及与第二哈希码对应的数据值;
第二生成模块,用于根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果。
可选地,所述导出模块还用于从前台展现层中导出待测试多维数据表,所述待测试多维数据表为一个或多个;
所述第一生成模块还用于生成所述待测试多维数据表的表格样式,所述待测试多维数据表的表格样式中至少包括指标名称、与所述指标对应的多个维度、多个维度中每个维度的取值、及数据值。
可选地,所述第一生成模块具体用于对所述测试数据进行维度汇总处理并生成与每个维度对应的多个汇总子表,对所有维度的每个汇总子表均进行维度汇总处理并生成汇总表,所述汇总表为与所述测试数据对应的汇总表。
可选地,所述第一生成模块还具体用于对所述测试数据和汇总表中的每一行进行排列拼接并生成字符串,对所述字符串进行哈希处理并生成多个第一哈希码,根据所述多个第一哈希码及与第一哈希码对应的数据值生成第一简表;对所述待测试多维数据表中的每一行进行排列拼接并生成字符串,对所述字符串进行哈希处理并生成多个第二哈希码,根据所述多个第二哈希码及与第二哈希码的数据值生成第二简表。
可选地,所述第二生成模块包括判断子模块和第二生成子模块;
所述判断子模块,用于判断与第一哈希码相同的第二哈希码所对应的数据值是否与所述第一哈希码对应的数据值相同;
所述第二生成子模块,用于当判断子模块判断出至少一个与第一哈希码相同的第二哈希码所对应的数据值与所述第一哈希码对应的数据值不同,生成所述待测试多维数据表的测试结果为测试未通过。
本发明具有以下有益效果:
本发明提供的多维数据的测试方法,对测试数据进行维度汇总处理并生成与测试数据对应的汇总表,对测试数据和汇总表进行降维处理并生成第一简表,对待测试多维数据表进行降维处理并生成第二简表,根据第一简表和第二简表生成待测试多维数据表的测试结果。该方法一方面能够提升前台展现层的数据测试效率,另一方面还能够提升数据测试结果的精准度。
附图说明
图1为本发明实施例一提供的一种多维数据的测试方法的流程示意图;
图2为本发明实施例二提供的一种多维数据的测试方法的流程示意图;
图3为本发明实施例三提供的一种多维数据的测试装置的结构示意图。
具体实施方式
为使本领域的技术人员更好地理解本发明的技术方案,下面结合附图对本发明中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明实施例一提供的一种多维数据的测试方法的流程示意图,该方法基于商业智能系统,商业智能系统包括前台展现层和数据仓库层,如图1所示,该方法包括以下步骤:
步骤101、根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据。
步骤102、对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表。
步骤103、对所述测试数据和汇总表进行降维处理并生成第一简表,所述第一简表包括多个第一哈希码及与第一哈希码对应的数据值。
步骤104、对所述待测试多维数据表进行降维处理并生成第二简表,所述第二简表包括多个第二哈希码及与第二哈希码对应的数据值。
步骤105、根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果。
本实施例提供的多维数据的测试方法,对测试数据进行维度汇总处理并生成与测试数据对应的汇总表,对测试数据和汇总表进行降维处理并生成第一简表,对待测试多维数据表进行降维处理并生成第二简表,根据第一简表和第二简表生成待测试多维数据表的测试结果。该方法一方面能够提升前台展现层的数据测试效率,另一方面还能够提升数据测试结果的精准度。
图2为本发明实施例二提供的一种多维数据的测试方法的流程示意图,该方法基于商业智能系统,商业智能系统包括前台展现层和数据仓库层,如图2所示,该方法包括以下步骤:
步骤201、从前台展现层中导出待测试多维数据表,所述待测试多维数据表为一个或多个。
优选地,本实施例中的各步骤由多维数据的测试装置执行。
通过可视化工具从前台展现层中导出待测试多维数据表。待测试多维数据表包括待测试多维数据,待测试多维数据可以为前台展现层中某个页面或某几个页面显示的数据,具体地,从前台展现层中以数据表的形式导出待测试多维数据并形成待测试多维数据表。待测试多维数据表可以为一个或多个。
如:从某个页面中导出的待测试多维数据表如下表一、表二和表三所示:
表一
序号 | 业务类型 | 地域 | 账期 | 数据值 |
1 | 2G业务收入 | 北京 | 1季度 | 123 |
2 | 2G业务收入 | 北京 | 2季度 | 23 |
3 | 2G业务收入 | 北京 | 3季度 | 343 |
4 | 2G业务收入 | 北京 | 4季度 | 34 |
2G业务收入 | 北京 | 全年 | 523 |
表二
序号 | 业务类型 | 地域 | 账期 | 数据值 |
1 | 3G业务收入 | 上海 | 1季度 | 423 |
2 | 3G业务收入 | 上海 | 2季度 | 32 |
3 | 3G业务收入 | 上海 | 3季度 | 42 |
4 | 3G业务收入 | 上海 | 4季度 | 31 |
3G业务收入 | 上海 | 全年 | 528 |
表三
序号 | 业务类型 | 地域 | 账期 | 数据值 |
1 | 2G业务收入 | 天津 | 1季度 | 23 |
2 | 3G业务收入 | 天津 | 1季度 | 54 |
移动业务收入 | 天津 | 1季度 | 77 |
可选地,如上表一、表二和表三所示,待测试多维数据表中还可包括数据值的汇总值。
步骤202、生成所述待测试多维数据表的表格样式,所述待测试多维数据表的表格样式中至少包括指标名称、与所述指标对应的多个维度、多个维度中每个维度的取值、及数据值。
具体地,通过分析待测试多维数据表的内容以生成待测试多维数据表的表格样式。待测试多维数据表的表格样式可以为如表四所示的表格样式:
表四
指标名称 | 维度1 | 维度2 | 维度3 | 数据值 |
可选地,待测试多维数据表的表格样式还包括序号。可以理解的是,序号用于标识表格中每行的位置,以方便后续的数据查找和处理。
值得说明的是,鉴于前台展现层用于宏观展示数据,从前台展现层中导出的待测试多维数据还可能包括汇总值。本实施例中步骤202中生成的表格样式暂不包括汇总值。
对于上表一、表二和表三所示的待测试多维数据表,其表格样式中的指标名称为移动业务收入,移动业务收入为多维数据,其包括3个维度,具体地,与移动业务收入对应的多个维度包括业务类型、地域和账期,业务类型的取值为2G业务收入或3G业务收入,地域的取值为北京或上海或天津,账期的取值为1季度或2季度或3季度或4季度,数据值为与每种维度组合对应的统计数据。
步骤203、根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据。
导出的测试数据为表格形式,测试数据的表格形式可以与待测试多维数据表的表格样式相同或不同,测试数据中至少需包括与表格样式中的指标名称对应的多个维度、多个维度中每个维度的取值、及数据值。
具体地,根据待测试多维数据表的表格样式编写SQL脚本(Structured QueryLanguage,结构化查询语言),从数据仓库层中导出与指标名称对应的所有维度下的明细数据。假设与某个指标名称对应的维度为3个,每个维度分别对应有N个、M个和L个取值,则从数据仓库层中导出测试数据共包括N*M*L条明细数据。测试数据的形式可为数据表格形式或数据库文件形式。
如:与表一、表二和表三所示的待测试多维数据表对应的测试数据共包括24条明细数据,测试数据如下表五所示:
表五
序号 | 业务类型 | 地域 | 账期 | 数据值 |
1 | 2G业务收入 | 北京 | 1季度 | 123 |
2 | 2G业务收入 | 北京 | 2季度 | 23 |
3 | 2G业务收入 | 北京 | 3季度 | 343 |
4 | 2G业务收入 | 北京 | 4季度 | 34 |
5 | 2G业务收入 | 上海 | 1季度 | 23 |
6 | 2G业务收入 | 上海 | 2季度 | 342 |
7 | 2G业务收入 | 上海 | 3季度 | 23 |
8 | 2G业务收入 | 上海 | 4季度 | 56 |
9 | 2G业务收入 | 天津 | 1季度 | 23 |
10 | 2G业务收入 | 天津 | 2季度 | 423 |
11 | 2G业务收入 | 天津 | 3季度 | 234 |
12 | 2G业务收入 | 天津 | 4季度 | 86 |
13 | 3G业务收入 | 北京 | 1季度 | 344 |
14 | 3G业务收入 | 北京 | 2季度 | 23 |
15 | 3G业务收入 | 北京 | 3季度 | 432 |
16 | 3G业务收入 | 北京 | 4季度 | 78 |
17 | 3G业务收入 | 上海 | 1季度 | 423 |
18 | 3G业务收入 | 上海 | 2季度 | 32 |
19 | 3G业务收入 | 上海 | 3季度 | 42 |
20 | 3G业务收入 | 上海 | 4季度 | 31 |
21 | 3G业务收入 | 天津 | 1季度 | 54 |
22 | 3G业务收入 | 天津 | 2季度 | 42 |
23 | 3G业务收入 | 天津 | 3季度 | 25 |
24 | 3G业务收入 | 天津 | 4季度 | 3 |
步骤204、对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表,所述汇总表包括分别与每个维度对应的汇总子表。
步骤204具体包括以下步骤:
步骤204a、对所述测试数据进行维度汇总处理并生成与每个维度对应的多个汇总子表。
具体地,对于维度数量为3个且每个维度分别对应有N个、M个和L个取值的测试数据,首先固定第1个维度的取值,组合变换剩余第2个维度和第3个维度的取值,抽取每种变换下的所有数据值,形成包括M*L个第1维度汇总子表。同理,固定第2个维度的取值形成包括N*L个第2维度汇总子表,固定第3个维度的取值形成包括N*M个第3维度汇总子表。
如:对于表五所示的测试数据,可固定账期维度的取值并生成账期维度汇总子表,可固定地域维度的取值并生成8个地域维度汇总子表,可固定业务类型维度的取值并生成12个业务类型维度汇总子表,其中,账期维度汇总子表的数量为6个,其如表六至表十一所示。
表六
序号 | 业务类型 | 地域 | 账期 | 数据值 |
1 | 2G业务收入 | 北京 | 1季度 | 123 |
2 | 2G业务收入 | 北京 | 2季度 | 23 |
3 | 2G业务收入 | 北京 | 3季度 | 343 |
4 | 2G业务收入 | 北京 | 4季度 | 34 |
表七
序号 | 业务类型 | 地域 | 账期 | 数据值 |
5 | 2G业务收入 | 上海 | 1季度 | 23 |
6 | 2G业务收入 | 上海 | 2季度 | 342 |
7 | 2G业务收入 | 上海 | 3季度 | 23 |
8 | 2G业务收入 | 上海 | 4季度 | 56 |
表八
序号 | 业务类型 | 地域 | 账期 | 数据值 |
9 | 2G业务收入 | 天津 | 1季度 | 23 |
10 | 2G业务收入 | 天津 | 2季度 | 423 |
11 | 2G业务收入 | 天津 | 3季度 | 234 |
12 | 2G业务收入 | 天津 | 4季度 | 86 |
表九
序号 | 业务类型 | 地域 | 账期 | 数据值 |
13 | 3G业务收入 | 北京 | 1季度 | 344 |
14 | 3G业务收入 | 北京 | 2季度 | 23 |
15 | 3G业务收入 | 北京 | 3季度 | 432 |
16 | 3G业务收入 | 北京 | 4季度 | 78 |
表十
序号 | 业务类型 | 地域 | 账期 | 数据值 |
17 | 3G业务收入 | 上海 | 1季度 | 423 |
18 | 3G业务收入 | 上海 | 2季度 | 32 |
19 | 3G业务收入 | 上海 | 3季度 | 42 |
20 | 3G业务收入 | 上海 | 4季度 | 31 |
表十一
序号 | 业务类型 | 地域 | 账期 | 数据值 |
21 | 3G业务收入 | 天津 | 1季度 | 54 |
22 | 3G业务收入 | 天津 | 2季度 | 42 |
23 | 3G业务收入 | 天津 | 3季度 | 25 |
24 | 3G业务收入 | 天津 | 4季度 | 3 |
步骤204b、对所有维度的每个汇总子表均进行维度汇总处理并生成汇总表,所述汇总表为与所述测试数据对应的汇总表。
对于步骤204a中生成的M*L个第1维度汇总子表、N*L个第2维度汇总子表和N*M个第3维度汇总子表均进行维度汇总处理并生成汇总表。具体地,对M*L个第1维度汇总子表、N*L个第2维度汇总子表和N*M个第3维度汇总子表分别进行维度汇总处理生成M*L+N*L+N*M个汇总结果,根据所述M*L+N*L+N*M个汇总结果生成汇总表。汇总表的格式可以如表十二所示:
表十二
如:对上述表六至表十一分别进行维度汇总处理生成以下6个账期维度汇总结果:
表六:北京全年的2G业务收入为523。
表七:上海全年的2G业务收入为444。
表八:天津全年的2G业务收入为766。
表九:北京全年的3G业务收入为877。
表十:上海全年的3G业务收入为528。
表十一:天津全年的3G业务收入为124。
以上6个汇总结果可如下表十三所示:
表十三
后续地,8个地域维度汇总结果和12个业务类型维度汇总结果也可以上述表十三的形式进行表示。最终生成的与表五对应的汇总表可如下表十四所示:
表十四
步骤205、对所述测试数据和汇总表进行降维处理并生成第一简表,所述第一简表包括多个第一哈希码及与第一哈希码对应的数据值。
具体地,步骤205包括以下步骤:
对所述测试数据和汇总表中的每一行进行排列拼接并生成字符串。测试数据和汇总表为表格的形式,扫描测试数据和汇总表中每一行的内容,测试数据中的每一行的内容按照(指标名称、维度1、维度2、维度3…维度N)的顺序排列拼接为一个字符串,汇总表中每一行的内容按照(指标名称(或汇总指标名称)、维度1(或维度1汇总名称)、…维度N(或维度N汇总名称))的顺序排列拼接为一个字符串。值得说明的是,字符串中不包括每一行中的数据值。
对所述字符串进行哈希处理并生成多个第一哈希码。
哈希处理将长度不同的字符串映射为长度相同的数字序列:哈希码。本实施例中,针对测试数据和汇总表生成的哈希码为第一哈希码。
如:对表十四所示的汇总表进行哈希处理后生成的部分第一简表可以如下表十五所示:
表十五
根据所述多个第一哈希码及与第一哈希码对应的数据值生成第一简表。
第一哈希码对应的数据值为生成该第一哈希码的行包括的数据值。
第一简表的格式可如下表十六所示:
表十六
哈希码 | 对应的数据值 |
步骤206、对所述待测试多维数据表进行降维处理并生成第二简表,所述第二简表包括多个第二哈希码及与第二哈希码对应的数据值。
具体地,步骤206包括以下步骤:
对所述待测试多维数据表中的每一行进行排列拼接并生成字符串。
对所述字符串进行哈希处理并生成多个第二哈希码。
根据所述多个第二哈希码及与第二哈希码的数据值生成第二简表。
根据与步骤205相同的方式生成第二简表,具体第二简表的生成方式可参照上述步骤205中的描述,此处不再赘述。
优选地,第一简表和第二简表按照哈希码升序或降序的方式进行排列。
步骤207、判断与第一哈希码相同的第二哈希码所对应的数据值是否与所述第一哈希码对应的数据值相同,若判断出至少一个与第一哈希码相同的第二哈希码所对应的数据值与所述第一哈希码对应的数据值不同,执行步骤208;否则,执行步骤209。
判断第一简表和第二简表中哈希码相同的第一哈希码和第二哈希码所对应的数据值是否相同,若至少有一个第二哈希码不满足上述条件,则判断出第二简表中的数据与第一简表中的数据不完全一致,表示前台展现层的待测试多维数据表中的数据与数据仓库层中的测试数据不一致,执行步骤208;若所有第二哈希码均满足上述条件,则判断出第二简表中的数据与第一简表中的数据完全一致,表示前台展现层的待测试多维数据表中的数据与数据仓库层中的测试数据一致,执行步骤209。
步骤208、生成所述待测试多维数据表的测试结果为测试未通过,流程结束。
测试未通过的可能原因为:前台展现层的数据配置出现错误。
步骤209、生成所述待测试多维数据表的测试结果为测试通过,流程结束。
本实施例提供的多维数据的测试方法,对测试数据进行维度汇总处理并生成与测试数据对应的汇总表,对测试数据和汇总表进行降维处理并生成第一简表,对待测试多维数据表进行降维处理并生成第二简表,根据第一简表和第二简表生成待测试多维数据表的测试结果。该方法对待测试多维数据进行自动化降维处理,并对降维处理后的数据进行简单比对即可得出测试结果,能够实现大批量多维数据的全覆盖自动化测试,有效降低数据测试的复杂度,提升前台展现层的数据测试效率和数据测试结果的精准度。
图3为本发明实施例三提供的一种多维数据的测试装置的结构示意图,如图3所示,该多维数据的测试装置包括:导出模块11、第一生成模块12和第二生成模块13。
导出模块11用于根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据。
第一生成模块12用于对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表,对所述测试数据和汇总表进行降维处理并生成第一简表,所述第一简表包括多个第一哈希码及与第一哈希码对应的数据值,对所述待测试多维数据表进行降维处理并生成第二简表,所述第二简表包括多个第二哈希码及与第二哈希码对应的数据值。
第二生成模块13用于根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果。
进一步地,所述导出模块11还用于从前台展现层中导出待测试多维数据表,所述待测试多维数据表为一个或多个。所述第一生成模块12还用于生成所述待测试多维数据表的表格样式,所述待测试多维数据表的表格样式中至少包括指标名称、与所述指标对应的多个维度、多个维度中每个维度的取值、及数据值。
进一步地,所述第一生成模块12具体用于对所述测试数据进行维度汇总处理并生成与每个维度对应的多个汇总子表,对所有维度的每个汇总子表均进行维度汇总处理并生成汇总表,所述汇总表为与所述测试数据对应的汇总表。
进一步地,所述第一生成模块12还具体用于对所述测试数据和汇总表中的每一行进行排列拼接并生成字符串,对所述字符串进行哈希处理并生成多个第一哈希码,根据所述多个第一哈希码及与第一哈希码对应的数据值生成第一简表;对所述待测试多维数据表中的每一行进行排列拼接并生成字符串,对所述字符串进行哈希处理并生成多个第二哈希码,根据所述多个第二哈希码及与第二哈希码的数据值生成第二简表。
进一步地,所述第二生成模块13包括判断子模块131和第二生成子模块132。所述判断子模块131用于判断与第一哈希码相同的第二哈希码所对应的数据值是否与所述第一哈希码对应的数据值相同。所述第二生成子模块132用于当判断子模块131判断出至少一个与第一哈希码相同的第二哈希码所对应的数据值与所述第一哈希码对应的数据值不同,生成所述待测试多维数据表的测试结果为测试未通过。
本实施例三提供的多维数据的测试装置用于实现实施例一或实施例二提供的多维数据的测试方法。
本实施例提供的多维数据的测试装置,第一生成模块对测试数据进行维度汇总处理并生成与测试数据对应的汇总表,对测试数据和汇总表进行降维处理并生成第一简表,对待测试多维数据表进行降维处理并生成第二简表,第二生成模块根据第一简表和第二简表生成待测试多维数据表的测试结果。该装置一方面能够提升前台展现层的数据测试效率,另一方面还能够提升数据测试结果的精准度。
可以理解的是,以上实施方式仅仅是为了说明本发明的原理而采用的示例性实施方式,然而本发明并不局限于此。对于本领域内的普通技术人员而言,在不脱离本发明的精神和实质的情况下,可以做出各种变型和改进,这些变型和改进也视为本发明的保护范围。
Claims (10)
1.一种多维数据的测试方法,其特征在于,基于商业智能系统,所述商业智能系统包括前台展现层和数据仓库层,所述多维数据测试方法包括:
根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据;
对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表;
对所述测试数据和汇总表进行降维处理并生成第一简表,所述第一简表包括多个第一哈希码及与第一哈希码对应的数据值;
对所述待测试多维数据表进行降维处理并生成第二简表,所述第二简表包括多个第二哈希码及与第二哈希码对应的数据值;
根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果。
2.根据权利要求1所述的多维数据的测试方法,其特征在于,在所述根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据之前还包括:
从前台展现层中导出待测试多维数据表,所述待测试多维数据表为一个或多个;
生成所述待测试多维数据表的表格样式,所述待测试多维数据表的表格样式中至少包括指标名称、与所述指标对应的多个维度、多个维度中每个维度的取值、及数据值。
3.根据权利要求1所述的多维数据的测试方法,其特征在于,所述对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表具体包括:
对所述测试数据进行维度汇总处理并生成与每个维度对应的多个汇总子表;
对所有维度的每个汇总子表均进行维度汇总处理并生成汇总表,所述汇总表为与所述测试数据对应的汇总表。
4.根据权利要求1所述的多维数据的测试方法,其特征在于,所述对所述测试数据和汇总表进行降维处理并生成第一简表包括:
对所述测试数据和汇总表中的每一行进行排列拼接并生成字符串;
对所述字符串进行哈希处理并生成多个第一哈希码;
根据所述多个第一哈希码及与第一哈希码对应的数据值生成第一简表;
对所述待测试多维数据表进行降维处理并生成第二简表包括:
对所述待测试多维数据表中的每一行进行排列拼接并生成字符串;
对所述字符串进行哈希处理并生成多个第二哈希码;
根据所述多个第二哈希码及与第二哈希码的数据值生成第二简表。
5.根据权利要求1所述的多维数据的测试方法,其特征在于,所述根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果具体包括:
判断与第一哈希码相同的第二哈希码所对应的数据值是否与所述第一哈希码对应的数据值相同,若判断出至少一个与第一哈希码相同的第二哈希码所对应的数据值与所述第一哈希码对应的数据值不同,生成所述待测试多维数据表的测试结果为测试未通过。
6.一种多维数据的测试装置,其特征在于,包括:
导出模块,用于根据预先生成的待测试多维数据表的表格样式从数据仓库层中导出与所述待测试多维数据表对应的测试数据;
第一生成模块,用于对所述测试数据进行维度汇总处理并生成与所述测试数据对应的汇总表,对所述测试数据和汇总表进行降维处理并生成第一简表,所述第一简表包括多个第一哈希码及与第一哈希码对应的数据值,对所述待测试多维数据表进行降维处理并生成第二简表,所述第二简表包括多个第二哈希码及与第二哈希码对应的数据值;
第二生成模块,用于根据所述第一简表和第二简表生成所述待测试多维数据表的测试结果。
7.根据权利要求6所述的多维数据的测试装置,其特征在于,所述导出模块还用于从前台展现层中导出待测试多维数据表,所述待测试多维数据表为一个或多个;
所述第一生成模块还用于生成所述待测试多维数据表的表格样式,所述待测试多维数据表的表格样式中至少包括指标名称、与所述指标对应的多个维度、多个维度中每个维度的取值、及数据值。
8.根据权利要求6所述的多维数据的测试装置,其特征在于,所述第一生成模块具体用于对所述测试数据进行维度汇总处理并生成与每个维度对应的多个汇总子表,对所有维度的每个汇总子表均进行维度汇总处理并生成汇总表,所述汇总表为与所述测试数据对应的汇总表。
9.根据权利要求6所述的多维数据的测试装置,其特征在于,所述第一生成模块还具体用于对所述测试数据和汇总表中的每一行进行排列拼接并生成字符串,对所述字符串进行哈希处理并生成多个第一哈希码,根据所述多个第一哈希码及与第一哈希码对应的数据值生成第一简表;对所述待测试多维数据表中的每一行进行排列拼接并生成字符串,对所述字符串进行哈希处理并生成多个第二哈希码,根据所述多个第二哈希码及与第二哈希码的数据值生成第二简表。
10.根据权利要求6所述的多维数据的测试装置,其特征在于,所述第二生成模块包括判断子模块和第二生成子模块;
所述判断子模块,用于判断与第一哈希码相同的第二哈希码所对应的数据值是否与所述第一哈希码对应的数据值相同;
所述第二生成子模块,用于当判断子模块判断出至少一个与第一哈希码相同的第二哈希码所对应的数据值与所述第一哈希码对应的数据值不同,生成所述待测试多维数据表的测试结果为测试未通过。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810792068.6A CN109033322A (zh) | 2018-07-18 | 2018-07-18 | 一种多维数据的测试方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810792068.6A CN109033322A (zh) | 2018-07-18 | 2018-07-18 | 一种多维数据的测试方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109033322A true CN109033322A (zh) | 2018-12-18 |
Family
ID=64643390
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810792068.6A Pending CN109033322A (zh) | 2018-07-18 | 2018-07-18 | 一种多维数据的测试方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109033322A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109783381A (zh) * | 2019-01-07 | 2019-05-21 | 中国银行股份有限公司 | 一种测试数据生成方法、装置及系统 |
CN110188035A (zh) * | 2019-05-10 | 2019-08-30 | 中国银行股份有限公司 | 一种接口测试数据生成方法、装置及存储介质 |
CN110347974A (zh) * | 2019-05-30 | 2019-10-18 | 重庆金融资产交易所有限责任公司 | 数据处理方法、装置、计算机设备和存储介质 |
CN111191086A (zh) * | 2019-12-13 | 2020-05-22 | 江苏艾佳家居用品有限公司 | 一种测试数据识别方法 |
CN115576850A (zh) * | 2022-11-21 | 2023-01-06 | 舟谱数据技术南京有限公司 | 数据指标测试方法、装置、电子设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1735717A2 (en) * | 2004-03-17 | 2006-12-27 | Theoris Software, LLC. | System and method for transforming and using content in other systems |
CN105243519A (zh) * | 2015-11-13 | 2016-01-13 | 广州市社会保险基金管理中心 | 一种社保财会管控系统 |
CN105279219A (zh) * | 2015-07-07 | 2016-01-27 | 北京挺软科技有限公司 | 一种多级维度动态切换分级及汇总的实现方法 |
CN107038182A (zh) * | 2016-09-27 | 2017-08-11 | 阿里巴巴集团控股有限公司 | 分表数据的完备性检查方法及装置 |
CN107609172A (zh) * | 2017-09-28 | 2018-01-19 | 链家网(北京)科技有限公司 | 一种跨系统多维度数据检索处理方法及装置 |
-
2018
- 2018-07-18 CN CN201810792068.6A patent/CN109033322A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1735717A2 (en) * | 2004-03-17 | 2006-12-27 | Theoris Software, LLC. | System and method for transforming and using content in other systems |
CN105279219A (zh) * | 2015-07-07 | 2016-01-27 | 北京挺软科技有限公司 | 一种多级维度动态切换分级及汇总的实现方法 |
CN105243519A (zh) * | 2015-11-13 | 2016-01-13 | 广州市社会保险基金管理中心 | 一种社保财会管控系统 |
CN107038182A (zh) * | 2016-09-27 | 2017-08-11 | 阿里巴巴集团控股有限公司 | 分表数据的完备性检查方法及装置 |
CN107609172A (zh) * | 2017-09-28 | 2018-01-19 | 链家网(北京)科技有限公司 | 一种跨系统多维度数据检索处理方法及装置 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109783381A (zh) * | 2019-01-07 | 2019-05-21 | 中国银行股份有限公司 | 一种测试数据生成方法、装置及系统 |
CN109783381B (zh) * | 2019-01-07 | 2021-11-09 | 中国银行股份有限公司 | 一种测试数据生成方法、装置及系统 |
CN110188035A (zh) * | 2019-05-10 | 2019-08-30 | 中国银行股份有限公司 | 一种接口测试数据生成方法、装置及存储介质 |
CN110188035B (zh) * | 2019-05-10 | 2023-10-24 | 中国银行股份有限公司 | 一种接口测试数据生成方法、装置及存储介质 |
CN110347974A (zh) * | 2019-05-30 | 2019-10-18 | 重庆金融资产交易所有限责任公司 | 数据处理方法、装置、计算机设备和存储介质 |
CN110347974B (zh) * | 2019-05-30 | 2023-06-23 | 深圳市鼎为通信有限公司 | 数据处理方法、装置、计算机设备和存储介质 |
CN111191086A (zh) * | 2019-12-13 | 2020-05-22 | 江苏艾佳家居用品有限公司 | 一种测试数据识别方法 |
CN111191086B (zh) * | 2019-12-13 | 2022-07-08 | 江苏艾佳家居用品有限公司 | 一种测试数据识别方法 |
CN115576850A (zh) * | 2022-11-21 | 2023-01-06 | 舟谱数据技术南京有限公司 | 数据指标测试方法、装置、电子设备及存储介质 |
CN115576850B (zh) * | 2022-11-21 | 2023-03-14 | 舟谱数据技术南京有限公司 | 数据指标测试方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109033322A (zh) | 一种多维数据的测试方法和装置 | |
WO2021017679A1 (zh) | 地址信息解析方法、装置、系统及数据获取方法 | |
CN106709024A (zh) | 基于血缘分析进行数据表溯源的方法及装置 | |
CN112926405A (zh) | 一种安全帽佩戴检测方法、系统、设备及存储介质 | |
CN113836038B (zh) | 测试数据构造方法、装置、设备及存储介质 | |
CN104732322B (zh) | 电力通信网机房移动运维方法 | |
CN109711424B (zh) | 一种基于决策树的行为规则获取方法、装置及设备 | |
CN104008143A (zh) | 基于数据挖掘的职业能力指标体系构建方法 | |
CN110765639A (zh) | 一种电气仿真建模方法、装置及可读存储介质 | |
CN107273295A (zh) | 一种基于文本混乱度的软件问题报告分类方法 | |
CN106934000A (zh) | 一种呼叫系统的语音自动质检方法及系统 | |
CN110309131A (zh) | 海量结构化数据的质量评估方法及装置 | |
CN108830554A (zh) | 基于任务模型的数据成果信息质量智能检测方法和系统 | |
CN105893482A (zh) | 发动机试验数据全自动化提取与Word报告生成方法 | |
CN108241925A (zh) | 一种基于离群点检测的离散制造机械产品质量溯源方法 | |
CN111680506A (zh) | 数据库表的外键映射方法、装置、电子设备和存储介质 | |
CN111400505A (zh) | 一种用电信息采集系统匹配故障消缺方案的方法及系统 | |
CN110377659A (zh) | 一种智能图表推荐系统及方法 | |
CN115879915B (zh) | 一种用于发电厂的跨平台标准化检修方法 | |
CN105574265B (zh) | 面向模型检索的装配体模型定量描述方法 | |
CN107451429A (zh) | 一种一键化分析rna数据的系统 | |
CN104794240B (zh) | 面向地理空间数据库属性值约束检查的表达式解析方法 | |
CN103902798B (zh) | 数据预处理方法 | |
CN114491081A (zh) | 基于数据血缘关系图谱的电力数据溯源方法及系统 | |
CN111309791A (zh) | 一种检测仪器数据自动采集方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181218 |