CN102004790A - 一种高吞吐量数据报表导出的方法 - Google Patents

一种高吞吐量数据报表导出的方法 Download PDF

Info

Publication number
CN102004790A
CN102004790A CN 201010581057 CN201010581057A CN102004790A CN 102004790 A CN102004790 A CN 102004790A CN 201010581057 CN201010581057 CN 201010581057 CN 201010581057 A CN201010581057 A CN 201010581057A CN 102004790 A CN102004790 A CN 102004790A
Authority
CN
China
Prior art keywords
user
data
file
xml
template
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN 201010581057
Other languages
English (en)
Inventor
郑永生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CENTFOR INFORMATION TECHNOLOGY Co Ltd
Original Assignee
CENTFOR INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CENTFOR INFORMATION TECHNOLOGY Co Ltd filed Critical CENTFOR INFORMATION TECHNOLOGY Co Ltd
Priority to CN 201010581057 priority Critical patent/CN102004790A/zh
Publication of CN102004790A publication Critical patent/CN102004790A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种高吞吐量数据报表导出的方法，步骤一，用户请求,并指定生成方式和报表规则；步骤二，报表引擎初始化，保存用户指定的规则，设置数据的方式；步骤三，生成OOXML文件夹；步骤四，根据用户提供的数据生成方式,装载数据,生成多个ExcelSHEET,根据模板引擎定义好的Freemarker模板,生成标准的Excel数据文件，生成图表描述的XML文件,生成Exce公式描述的XML,根据配置或者模板,生成合并单元格等复杂格式描述的XML文件；步骤五，根据数据量的大小,生成一个或者多个Excle文件,返回用户处理.并删除系统产生的临时文件。本发明具有高性能，兼容性，编程无关性，有效提升报表系统的响应速度；大大的降低了软件开发成本。

Description

一种高吞吐量数据报表导出的方法
技术领域
本发明涉及一种数据导出的方法，具体涉及一种高吞吐量数据报表导出的方法。
背景技术
随着计算机的普及和网络的发展，计算机在人们工作、生活中的作用也越来越大，随着公司信息化的发展,产生的IT数据日渐庞大,现有的数据处理软件也已不能满足人们的需要，主要问题如下，
1、基于二进制格式生成报表文件,造成资源占用高,性能低下, 在处理大数据量时,很容易造成内存溢出等问题。
2、没有编程知识很难进行自定义报表和二次开发，现有报表系统的设计器都是对用户不友好,没有编程知识的用户很难进行自定义报表。
3、图表很难和Office集成，现有报表的图表都是单独生成的图片,很难和Office办公软件集成。
4、办公软件兼容性不好，现有报表技术只支持 MS Office,使用 WPS,Open Office会出现问题。
5、第三方系统报表集成，现有报表均不支持从第三方系统抓取已经存在的报表。
现有数据处理软件已远远不能满足人们对大量数据处理日益增加的要求。
发明内容
有鉴于此，本发明的目的在于提供一种高吞吐量数据报表导出的方法，设置加密芯片，对系统进行加密管理，内网在加密方式下启动，保证了工作环境下信息数据和网络通信安全。
本发明采用以下技术方案：  
一种高吞吐量数据报表导出的方法，包括如下步骤：
步骤一，用户请求,并指定生成方式和报表规则；
步骤二，报表引擎初始化,保存用户指定的规则,设置数据的方式；
步骤三，生成OOXML文件夹,首先复制一个空的OOXML格式的文件夹结构,生成一些必须的XML描述文件；
步骤四，根据用户提供的数据生成方式,装载数据,自动判别数据量以及是否分批处理,生成多个Excel SHEET,根据模板引擎定义好的Freemarker模板,生成标准的Excel数据文件.同时解析用户指定的图表类型,生成图表描述的XML文件,根据用户的配置,生成Exce公式描述的XML,例如 筛选,求和等,根据配置或者模板,生成合并单元格等复杂格式描述的XML文件；
步骤五，根据数据量的大小,生成一个或者多个Excle文件,如果是一个文件直接返回用户,如果是多个 打包压缩成ZIP格式,返回用户处理.并删除系统产生的临时文件。
本发明的有益效果是：
本发明具有高性能，从根本上解决了内存占用问题,轻松处理海量数据；兼容性，报表引擎产生的报表完全兼容 Office,WPS,OpenOffice等主流办公软件；编程无关性，用户无需编程知识,即可设计报表；提升系统速度，高效灵活，能够有效提升报表系统的响应速度；降低开发成本，由于开发过程完全基于配置，这样就大大的降低了开发难度，缩短了开发周期，并且对开发人员的要求较低，从而大大的降低了软件开发成本。
本发明的其他优点、目标和特征在某种程度上将在随后的说明书中进行阐述，并且在某种程度上，基于对下文的考察研究对本领域技术人员而言将是显而易见的，或者可以从本发明的实践中得到教导。本发明的目标和其他优点可以通过下面的说明书或者附图中所特别指出的结构来实现和获得。
附图说明
图1是本发明的工作流程图。
具体实施方式
下面结合附图和实施例对本发明作进一步描述：
如图1所示，本发明包括如下步骤：
步骤一，用户请求,并指定生成方式和报表规则；
步骤二，报表引擎初始化,保存用户指定的规则,设置数据的方式；
步骤三，生成OOXML文件夹,首先复制一个空的OOXML格式的文件夹结构,生成一些必须的XML描述文件；
步骤四，根据用户提供的数据生成方式,装载数据,自动判别数据量以及是否分批处理,生成多个Excel SHEET,根据模板引擎定义好的Freemarker模板,生成标准的Excel数据文件.同时解析用户指定的图表类型,生成图表描述的XML文件,根据用户的配置,生成Exce公式描述的XML,例如 筛选,求和等,根据配置或者模板,生成合并单元格等复杂格式描述的XML文件；
步骤五，根据数据量的大小,生成一个或者多个Excle文件,如果是一个文件直接返回用户,如果是多个 打包压缩成ZIP格式,返回用户处理.并删除系统产生的临时文件。

Claims (1)

1.一种高吞吐量数据报表导出的方法，其特征在于：包括如下步骤：
步骤一，用户请求,并指定生成方式和报表规则；
步骤二，报表引擎初始化,保存用户指定的规则,设置数据的方式；
步骤三，生成OOXML文件夹,首先复制一个空的OOXML格式的文件夹结构,生成一些必须的XML描述文件；
步骤四，根据用户提供的数据生成方式,装载数据,自动判别数据量以及是否分批处理,生成多个Excel SHEET,根据模板引擎定义好的Freemarker模板,生成标准的Excel数据文件.同时解析用户指定的图表类型,生成图表描述的XML文件,根据用户的配置,生成Exce公式描述的XML,例如 筛选,求和等,根据配置或者模板,生成合并单元格等复杂格式描述的XML文件；
步骤五，根据数据量的大小,生成一个或者多个Excle文件,如果是一个文件直接返回用户,如果是多个 打包压缩成ZIP格式,返回用户处理.并删除系统产生的临时文件。
CN 201010581057 2010-12-09 2010-12-09 一种高吞吐量数据报表导出的方法 Pending CN102004790A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010581057 CN102004790A (zh) 2010-12-09 2010-12-09 一种高吞吐量数据报表导出的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010581057 CN102004790A (zh) 2010-12-09 2010-12-09 一种高吞吐量数据报表导出的方法

Publications (1)

Publication Number Publication Date
CN102004790A true CN102004790A (zh) 2011-04-06

Family

ID=43812152

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010581057 Pending CN102004790A (zh) 2010-12-09 2010-12-09 一种高吞吐量数据报表导出的方法

Country Status (1)

Country Link
CN (1) CN102004790A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156741A (zh) * 2011-04-16 2011-08-17 武钢集团昆明钢铁股份有限公司 自定义动态报表系统及其实现方法
CN102722512A (zh) * 2011-12-30 2012-10-10 新奥特（北京）视频技术有限公司 一种数据库客户端远程维护展示数据库的方法
CN102760118A (zh) * 2011-04-25 2012-10-31 中兴通讯股份有限公司 一种将数据导出为Excel文件的方法及装置
CN103412961A (zh) * 2013-09-04 2013-11-27 广东全通教育股份有限公司 一种实时导出海量数据报表的处理方法和系统
CN103500196A (zh) * 2013-09-22 2014-01-08 成都交大光芒科技股份有限公司 多并发大数据量环境下excel数据导出方法及其导出装置
CN103577573A (zh) * 2013-11-05 2014-02-12 中科信息安全共性技术国家工程研究中心有限公司 基于Word2007/Open XML生成动态复杂表格的智能文档引擎技术
CN104391832A (zh) * 2014-11-18 2015-03-04 浪潮电子信息产业股份有限公司 一种利用vba实现多个excel数据表合并数据的方法
CN106911765A (zh) * 2017-01-23 2017-06-30 北京思特奇信息技术股份有限公司 一种报表文件下载方法及装置
CN107395701A (zh) * 2017-07-11 2017-11-24 携程旅游网络技术（上海）有限公司 基于ftp服务器与数据压缩的数据处理方法
CN107562705A (zh) * 2017-07-25 2018-01-09 努比亚技术有限公司 一种数据导出方法、服务端及计算机可读存储介质
CN110019437A (zh) * 2017-07-18 2019-07-16 北京京东尚科信息技术有限公司 一种导出数据的方法和系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046825A (zh) * 2007-04-18 2007-10-03 北京润乾信息系统技术有限公司 一种报表填写后数据入库的方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046825A (zh) * 2007-04-18 2007-10-03 北京润乾信息系统技术有限公司 一种报表填写后数据入库的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《现代电子技术》 20080930 王勇超等 利用XML和EXCEL设计动态通用报表系统的新方法 论文93页右栏倒数第9行-96页左栏倒数第4行，图1-2，5-6 1 , 第18期 2 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156741A (zh) * 2011-04-16 2011-08-17 武钢集团昆明钢铁股份有限公司 自定义动态报表系统及其实现方法
CN102760118B (zh) * 2011-04-25 2015-06-03 中兴通讯股份有限公司 一种将数据导出为Excel文件的方法及装置
CN102760118A (zh) * 2011-04-25 2012-10-31 中兴通讯股份有限公司 一种将数据导出为Excel文件的方法及装置
CN102722512A (zh) * 2011-12-30 2012-10-10 新奥特（北京）视频技术有限公司 一种数据库客户端远程维护展示数据库的方法
CN102722512B (zh) * 2011-12-30 2018-03-16 新奥特（北京）视频技术有限公司 一种数据库客户端远程维护展示数据库的方法
CN103412961A (zh) * 2013-09-04 2013-11-27 广东全通教育股份有限公司 一种实时导出海量数据报表的处理方法和系统
CN103412961B (zh) * 2013-09-04 2017-03-29 广东全通教育股份有限公司 一种实时导出海量数据报表的处理方法和系统
CN103500196B (zh) * 2013-09-22 2016-09-14 成都交大光芒科技股份有限公司 多并发大数据量环境下excel数据导出方法及其导出装置
CN103500196A (zh) * 2013-09-22 2014-01-08 成都交大光芒科技股份有限公司 多并发大数据量环境下excel数据导出方法及其导出装置
CN103577573A (zh) * 2013-11-05 2014-02-12 中科信息安全共性技术国家工程研究中心有限公司 基于Word2007/Open XML生成动态复杂表格的智能文档引擎技术
CN104391832A (zh) * 2014-11-18 2015-03-04 浪潮电子信息产业股份有限公司 一种利用vba实现多个excel数据表合并数据的方法
CN106911765A (zh) * 2017-01-23 2017-06-30 北京思特奇信息技术股份有限公司 一种报表文件下载方法及装置
CN107395701A (zh) * 2017-07-11 2017-11-24 携程旅游网络技术（上海）有限公司 基于ftp服务器与数据压缩的数据处理方法
CN107395701B (zh) * 2017-07-11 2021-01-29 携程旅游网络技术（上海）有限公司 基于ftp服务器与数据压缩的数据处理方法
CN110019437A (zh) * 2017-07-18 2019-07-16 北京京东尚科信息技术有限公司 一种导出数据的方法和系统
CN107562705A (zh) * 2017-07-25 2018-01-09 努比亚技术有限公司 一种数据导出方法、服务端及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN102004790A (zh) 一种高吞吐量数据报表导出的方法
CN103984734B (zh) 一种面向高性能计算的云服务消息传递方法
EP3992796A1 (en) Inter-process communication method, apparatus and device
US10325015B2 (en) Conversion of data ranges to table objects
US20200065313A1 (en) Extensible content object metadata
WO2016010831A1 (en) Interoperable machine learning platform
KR101212778B1 (ko) 클라우드 컴퓨팅 기반 스마트 오피스 시스템 및 이의 운용을 위한 서버 및 운용 방법
CN107168695A (zh) 一种excel数据解析方法及系统
CN102508908A (zh) 一种下级财政业务数据的采集方法和系统
CN103294485A (zh) 用于ABINIT并行计算系统的Web服务封装方法以及系统
CN102915229B (zh) 一种分布式计算方法及系统
EP3910877B1 (en) Evm-based transaction processing method and apparatus, device, program and medium
CN113641700A (zh) 一种基于Spring boot框架的数据处理方法及装置
US10324772B2 (en) Method and system for data instance-based automatic message map construction
CN102479355A (zh) 一种实现业务单据加载的方法、装置及终端
CN103064916A (zh) EminDI 数据整合引擎及报表生成方法
CN116185403A (zh) 一种代码生成方法、装置及存储介质
CN111061763B (zh) 用于生成规则引擎的规则执行计划的方法及装置
CA3178644A1 (en) Techniques to facilitate a migration process to cloud storage
CN107292136A (zh) 一种基于微服务的pdf文件防伪水印嵌入方法及系统
CN106896956B (zh) 一种“道”系统下多点触控的实现方法
CN102184166A (zh) 基于办公软件Excel表单转换为InfoPath表单的方法
CN103699732A (zh) 一种图片格式批量转换的方法
CN111177234A (zh) 一种文档型数据文件快速处理装置及方法
CN202143098U (zh) 一种基于云计算的智能手机开放性跨平台系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110406