CN103164510A - 一种动态数据报表生成方法和系统 - Google Patents

一种动态数据报表生成方法和系统 Download PDF

Info

Publication number
CN103164510A
CN103164510A CN2013100447881A CN201310044788A CN103164510A CN 103164510 A CN103164510 A CN 103164510A CN 2013100447881 A CN2013100447881 A CN 2013100447881A CN 201310044788 A CN201310044788 A CN 201310044788A CN 103164510 A CN103164510 A CN 103164510A
Authority
CN
China
Prior art keywords
data
dynamic
configuration
sheet
data sheet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013100447881A
Other languages
English (en)
Inventor
陈炽昌
胡磊
高祖辉
邱友雄
肖少龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GUANGDONG QTONE EDUCATION CO Ltd
Original Assignee
GUANGDONG QTONE EDUCATION CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GUANGDONG QTONE EDUCATION CO Ltd filed Critical GUANGDONG QTONE EDUCATION CO Ltd
Priority to CN2013100447881A priority Critical patent/CN103164510A/zh
Publication of CN103164510A publication Critical patent/CN103164510A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种动态数据报表生成方法和系统,其利用动态配置SQL的方法来适应灵活多变的统计需求,采用自定义模板的方法来应对个性化要求比较高的中国式企业统计报表;使用中间缓存表技术并允许自定义生成缓存表时间,可以高效统计海量数据。

Description

一种动态数据报表生成方法和系统
技术领域
本发明涉及报表生成技术领域,尤其涉及一种动态数据报表生成方法和系统。
背景技术
目前,业务报表、运营报表、运维报表需求多变,且不同时期会有相当数量的特殊统计需求。传统报表统计每次都需要研发工程师根据需求变化修改统计程序并重新发布,响应周期长且浪费人力;而使用BI(Business Intelligence 商业智能)工具则费用昂贵,学习成本高、学习周期较长,针对统计报表使用BI大材小用;特别是中国式的企业统计报表,个性化要求比较高,BI并不能完全满足。
有鉴于此,现有技术有待改进和提高。
发明内容
鉴于现有技术的不足,本发明目的在于提供一种动态数据报表生成方法和系统。旨在解决现有技术中报表生成采用BI工具所带来的费用昂贵,学习成本高、学习周期较长等问题。
本发明的技术方案如下:
一种动态数据报表生成方法,用于生成若干份数据报表,其中,包括以下步骤:
S1、根据用户需求,利用动态配置SQL的方法对数据源进行处理,生成第一数据报表;
S2、根据配置的时间点和生成规则,在指定的时间点生成与第一数据报表对应的中间缓存数据表;
S3、根据用户需求,利用中间缓存数据表的数据,生成其他的数据报表;
S4、根据指定的自定义展现模板,将数据报表显示出来。
所述的动态数据报表生成方法,其中,所述步骤S1中动态配置SQL具体采用如下方法:
从数据源中找出关联信息,并根据筛选条件对数据源进行筛选,再根据关联信息进行分组处理,得到用于生成第一数据报表的数据。
所述的动态数据报表生成方法,其中,所述步骤S1中动态配置采用图像化的配置方式。
一种动态数据报表生成系统,用于生成若干份数据报表,其中,包括:
配置单元,用于根据用户需求,利用动态配置SQL的方法对数据源进行处理,生成第一数据报表;
缓存生成单元,用于根据配置的时间点和生成规则,在指定的时间点生成与第一数据报表对应的中间缓存数据表;
缓存利用单元,用于根据用户需求,利用中间缓存数据表的数据,生成其他的数据报表;
显示单元,用于根据指定的自定义展现模板,将数据报表显示出来。
有益效果:
本申请的动态数据报表生成方法和系统,利用动态配置SQL的方法来适应灵活多变的统计需求,采用自定义模板的方法来应对个性化要求比较高的中国式企业统计报表;使用中间缓存表技术并允许自定义生成缓存表时间,可以高效统计海量数据。
附图说明
图1为本发明的动态数据报表生成方法的流程图。
图2为本发明的动态数据报表生成方法的实施例中生成口语作业统计表的示意图。
图3为本发明的动态数据报表生成系统的结构框图。
具体实施方式
本发明提供一种动态数据报表生成方法和系统,为使本发明的目的、技术方案及效果更加清楚、明确,以下对本发明进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
请参阅图1,其为本发明的动态数据报表生成方法的流程图。如图所示,所述动态数据报表生成方法,用于生成若干份数据报表,包括以下步骤:
S1、根据用户需求,利用动态配置SQL的方法对数据源进行处理,生成第一数据报表;
S2、根据配置的时间点和生成规则,在指定的时间点生成与第一数据报表对应的中间缓存数据表;
S3、根据用户需求,利用中间缓存数据表的数据,生成其他的数据报表;
S4、根据指定的自定义展现模板,将数据报表显示出来。
下面分别针对上述步骤进行详细描述:
所述步骤S1为根据用户需求,利用动态配置SQL的方法对数据源进行处理,生成第一数据报表。其中,所述SQL为结构化查询语言(Structured Query Language) L,结构化查询语言是一种数据库查询和程序设计语言,用于存取数据以及查询、更新和管理关系数据库系统;同时也是数据库脚本文件的扩展名。结构化查询语言是高级的非过程化编程语言,允许用户在高层数据结构上工作。它不要求用户指定对数据的存放方法,也不需要用户了解具体的数据存放方式,所以具有完全不同底层结构的不同数据库系统可以使用相同的结构化查询语言语言作为数据输入与管理的接口。结构化查询语言语句可以嵌套,这使他具有极大的灵活性和强大的功能。
具体来说,在本实施例中,所述步骤S1中动态配置SQL具体采用如下方法:从数据源中找出关联信息,并根据筛选条件对数据源进行筛选,再根据关联信息进行分组处理,得到用于生成第一数据报表的数据。(下面会通过一个具体的例子来说明是如何进行动态配置SQL的)
所述步骤S2为根据配置的时间点和生成规则,在指定的时间点生成与第一数据报表对应的中间缓存数据表。这一步骤是在后台监控进程中完成的。
所述步骤S3为根据用户需求,利用中间缓存数据表的数据,生成其他的数据报表。这一步骤即利用上述步骤S2中生成的中间缓存数据表,而无需再次针对数据源进行统计,从而实现了高效统计海量数据。经过研究发现,使用中间缓存表技术并允许自定义生成缓存表时间,实现了对海量数据的高效统计。统计报表平均生成时间从2.3秒降低到1.2秒。
所述步骤S4为根据指定的自定义展现模板,将数据报表显示出来。因为每个用户需要的数据报表展示形式都有可能不同,采用自定义模板的方法能够应对个性化要求比较高的中国式企业统计报表,同时,学习成本低,初级研发人员即能胜任。统计报表需求平均响应时间从2.5天降低到0.85天。
下面通过一个具体的例子来描述上述动态数据报表生成方法。
请参阅图2,、假设需要“每天口语作业成绩统计表”,分别生成全国、全省、地市、学校、班级口语作业成绩统计表。
首先,确定数据源:“昨天所有学生的口语作业成绩”。然后,进行系统配置:根据“昨天所有学生的口语作业成绩”在【1:00】(即1点,其仅仅是举例方便理解)生成“班级成绩”,其中,生成“班级成绩”配置SQL如下:
即从“学生口语作业成绩”中的“学生ID”关联“学生信息”、“班级信息”、“学校信息”;根据“作业提交时间”筛选昨天的所有口语作业成绩,如:假设今天是2012-12-13,则筛选大于等于2012-12-12 00:00:00且小于2012-12-13 00:00:00的口语作业成绩;根据“班级ID”、“学校ID”、“作业提交时间”进行分组处理,计算各个班级昨天的口语作业平均成绩。
接着,根据“班级成绩”在【1:15】生成“学校成绩”;根据“学校成绩”在【1:25】生成“地市成绩”;根据“地市成绩”在【1:30】生成“全省成绩”;
最后,根据业务规则分别为全国、全省、地市、学校、班级口语作业成绩统计表指定数据源,自定义展现模板。
从过程可知,研发人员只需简单配置数据生成规则,指定数据源、自定义展现模板就可以快速得到业务需求要求的报表。
进一步地,假设处理完“每天口语作业成绩统计表”后,又提出了新的业务需求“A学校口语作业成绩趋势表”,分别为每个学校生成30天内口语作业成绩趋势表,并与本地市、本省平均成绩形成对比。
首先,确定数据源:“学校成绩”、“地市成绩”、“全省成绩”。然后,系统配置:复用“每天口语作业成绩统计表”形成的数据。最后,根据业务规则为“A学校口语作业成绩趋势表”指定数据源,自定义展现模板。
从过程可知,当有可复用的数据时,研发人员只需指定数据源、自定义展现模板就可以快速得到业务需求要求的报表。
更进一步地,经过研究发现,所述步骤S1中动态配置采用图像化的配置方式,更加方便进行系统配置。
本发明还提供了一种动态数据报表生成系统,用于生成若干份数据报表,如图3所示,其包括:
配置单元100,用于根据用户需求,利用动态配置SQL的方法对数据源进行处理,生成第一数据报表;
缓存生成单元200,用于根据配置的时间点和生成规则,在指定的时间点生成与第一数据报表对应的中间缓存数据表;
缓存利用单元300,用于根据用户需求,利用中间缓存数据表的数据,生成其他的数据报表;
显示单元400,用于根据指定的自定义展现模板,将数据报表显示出来。
上述系统中各个部分的功能都已经在上述方法中进行了详细介绍,这里就不再冗述了。
综上所述,本发明的动态数据报表生成方法和系统,利用动态配置SQL的方法来适应灵活多变的统计需求,采用自定义模板的方法来应对个性化要求比较高的中国式企业统计报表;使用中间缓存表技术并允许自定义生成缓存表时间,可以高效统计海量数据。
应当理解的是,本发明的应用不限于上述的举例,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (4)

1.一种动态数据报表生成方法,用于生成若干份数据报表,其特征在于,包括以下步骤:
S1、根据用户需求,利用动态配置SQL的方法对数据源进行处理,生成第一数据报表;
S2、根据配置的时间点和生成规则,在指定的时间点生成与第一数据报表对应的中间缓存数据表;
S3、根据用户需求,利用中间缓存数据表的数据,生成其他的数据报表;
S4、根据指定的自定义展现模板,将数据报表显示出来。
2.根据权利要求1所述的动态数据报表生成方法,其特征在于,所述步骤S1中动态配置SQL具体采用如下方法:
从数据源中找出关联信息,并根据筛选条件对数据源进行筛选,再根据关联信息进行分组处理,得到用于生成第一数据报表的数据。
3.根据权利要求1所述的动态数据报表生成方法,其特征在于,所述步骤S1中动态配置采用图像化的配置方式。
4.一种动态数据报表生成系统,用于生成若干份数据报表,其特征在于,包括:
配置单元,用于根据用户需求,利用动态配置SQL的方法对数据源进行处理,生成第一数据报表;
缓存生成单元,用于根据配置的时间点和生成规则,在指定的时间点生成与第一数据报表对应的中间缓存数据表;
缓存利用单元,用于根据用户需求,利用中间缓存数据表的数据,生成其他的数据报表;
显示单元,用于根据指定的自定义展现模板,将数据报表显示出来。
CN2013100447881A 2013-02-05 2013-02-05 一种动态数据报表生成方法和系统 Pending CN103164510A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2013100447881A CN103164510A (zh) 2013-02-05 2013-02-05 一种动态数据报表生成方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2013100447881A CN103164510A (zh) 2013-02-05 2013-02-05 一种动态数据报表生成方法和系统

Publications (1)

Publication Number Publication Date
CN103164510A true CN103164510A (zh) 2013-06-19

Family

ID=48587598

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2013100447881A Pending CN103164510A (zh) 2013-02-05 2013-02-05 一种动态数据报表生成方法和系统

Country Status (1)

Country Link
CN (1) CN103164510A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103400219A (zh) * 2013-07-16 2013-11-20 沈阳中科博微自动化技术有限公司 一种应用于封装生产线的统计报表智能管理方法
CN104809130A (zh) * 2014-01-27 2015-07-29 腾讯科技(深圳)有限公司 数据查询的方法、设备及系统
CN105447068A (zh) * 2014-11-18 2016-03-30 国网山东省电力公司 基于sap系统的动态报表的生成方法及系统
CN103678716B (zh) * 2013-12-31 2017-01-04 中国科学院深圳先进技术研究院 一种基于格式数据集的分布式数据存储与计算方法
CN106469175A (zh) * 2015-08-20 2017-03-01 互联网域名系统北京市工程研究中心有限公司 数据处理方法及装置
CN107247777A (zh) * 2017-06-09 2017-10-13 上海斐讯数据通信技术有限公司 一种基于数据库逆向统计的报表展示方法及系统
CN108647260A (zh) * 2018-04-27 2018-10-12 厦门南讯软件科技有限公司 一种个性化大数据分析系统和方法
CN110555063A (zh) * 2019-07-15 2019-12-10 凯盛融英信息科技(上海)股份有限公司 一种局部数据的动态生成方法
CN110837511A (zh) * 2019-11-15 2020-02-25 金蝶软件(中国)有限公司 一种数据处理方法、系统及相关设备
CN111400367A (zh) * 2020-02-28 2020-07-10 金蝶蝶金云计算有限公司 业务报告生成方法、装置、计算机设备和存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101431760A (zh) * 2007-11-07 2009-05-13 中兴通讯股份有限公司 业务报表实现方法及系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101431760A (zh) * 2007-11-07 2009-05-13 中兴通讯股份有限公司 业务报表实现方法及系统

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103400219A (zh) * 2013-07-16 2013-11-20 沈阳中科博微自动化技术有限公司 一种应用于封装生产线的统计报表智能管理方法
CN103678716B (zh) * 2013-12-31 2017-01-04 中国科学院深圳先进技术研究院 一种基于格式数据集的分布式数据存储与计算方法
CN104809130A (zh) * 2014-01-27 2015-07-29 腾讯科技(深圳)有限公司 数据查询的方法、设备及系统
CN105447068A (zh) * 2014-11-18 2016-03-30 国网山东省电力公司 基于sap系统的动态报表的生成方法及系统
CN106469175A (zh) * 2015-08-20 2017-03-01 互联网域名系统北京市工程研究中心有限公司 数据处理方法及装置
CN107247777A (zh) * 2017-06-09 2017-10-13 上海斐讯数据通信技术有限公司 一种基于数据库逆向统计的报表展示方法及系统
CN108647260A (zh) * 2018-04-27 2018-10-12 厦门南讯软件科技有限公司 一种个性化大数据分析系统和方法
CN110555063A (zh) * 2019-07-15 2019-12-10 凯盛融英信息科技(上海)股份有限公司 一种局部数据的动态生成方法
CN110837511A (zh) * 2019-11-15 2020-02-25 金蝶软件(中国)有限公司 一种数据处理方法、系统及相关设备
CN110837511B (zh) * 2019-11-15 2022-08-23 金蝶软件(中国)有限公司 一种数据处理方法、系统及相关设备
CN111400367A (zh) * 2020-02-28 2020-07-10 金蝶蝶金云计算有限公司 业务报告生成方法、装置、计算机设备和存储介质
CN111400367B (zh) * 2020-02-28 2023-12-29 金蝶蝶金云计算有限公司 业务报告生成方法、装置、计算机设备和存储介质

Similar Documents

Publication Publication Date Title
CN103164510A (zh) 一种动态数据报表生成方法和系统
CN101996067B (zh) 一种数据导出的方法和装置
CN103412868B (zh) 文书生成方法及装置
CN101984427B (zh) 一种高校自习室查询系统及方法
CN110168529A (zh) 数据存储方法、装置和存储介质
CN102254024A (zh) 海量数据处理系统及方法
CN103729453A (zh) 一种HBase表联合查询优化的方法
CN101739452A (zh) 一种数据交换接口及其实现方法
CN104731588B (zh) 页面布局文件生成方法和页面布局文件生成装置
CN109902117A (zh) 业务系统分析方法和装置
CN106156047A (zh) 一种快照信息处理方法及装置
CN108153919A (zh) Dbf数据导出平台及其导出方法
CN103678425B (zh) 多系统的集成分析
CN101710322A (zh) 一种信息关联的方法和系统
CN103824167A (zh) 一种培训与开发管理系统
CN105930354A (zh) 存储模型转换方法和装置
Yu et al. The analysis and design of system of experimental consumables based on django and QR code
CN104866508B (zh) 在云环境下管理文件的方法与装置
CN111401023B (zh) 一种报表生成方法、装置、服务器及存储介质
CN109165914A (zh) 用于移动审批的免编程参数配置的流程发布方法
CN110895739A (zh) 一种自动生成评价报告的系统及其工作流程
Javed et al. Data load distribution by semi real time data warehouse
CN104317600A (zh) 一种可配置的曲线图生成方法及系统
CN108897748A (zh) 一种HBase系统监控方法及HBase系统
CN101876896B (zh) 一种提升信息化技术的电子政务开发系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20130619