CN113642298A - 综合化运维管理报表处理方法及系统 - Google Patents
综合化运维管理报表处理方法及系统 Download PDFInfo
- Publication number
- CN113642298A CN113642298A CN202110931014.5A CN202110931014A CN113642298A CN 113642298 A CN113642298 A CN 113642298A CN 202110931014 A CN202110931014 A CN 202110931014A CN 113642298 A CN113642298 A CN 113642298A
- Authority
- CN
- China
- Prior art keywords
- excel workbook
- keywords
- row
- worksheet
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012423 maintenance Methods 0.000 title claims abstract description 23
- 238000003672 processing method Methods 0.000 title claims description 10
- 238000012545 processing Methods 0.000 claims abstract description 29
- 238000000034 method Methods 0.000 claims abstract description 13
- 208000025174 PANDAS Diseases 0.000 claims description 7
- 208000021155 Paediatric autoimmune neuropsychiatric disorders associated with streptococcal infection Diseases 0.000 claims description 7
- 238000003860 storage Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 2
- 238000000605 extraction Methods 0.000 abstract description 4
- 238000007726 management method Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 240000004718 Panda Species 0.000 description 3
- 235000016496 Panda oleosa Nutrition 0.000 description 3
- 230000008676 import Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000005215 recombination Methods 0.000 description 2
- 230000006798 recombination Effects 0.000 description 2
- 230000008521 reorganization Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012358 sourcing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/177—Editing, e.g. inserting or deleting of tables; using ruled lines
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种综合化运维管理报表处理方法及系统，方法包括：读取指定EXCEL工作簿内的所有工作表数据；根据预设的关键字，找到包含关键字的关键行并整行提取出来；将提取出来的关键行整行复写到新建EXCEL工作簿的工作表中，以关键字对新建EXCEL工作簿进行命名。通过数据读取单元、关建行提取单元、关建行复写单元以及关键字命名单元实现对报表数据的快速分拣和重组，将所有报表一次性导入，并且在输入关键字后，将关键字所在行全部提取出来，再复写到新建EXCEL工作簿的工作表的行中。可以根据不同需求，将大量报表数据有针对地进行分拣重组，得到满足需求的报表内容，方便查看和统计。
Description
技术领域
本发明涉及报表数据处理技术领域，尤其涉及一种综合化运维管理报表处理方法及系统。
背景技术
随着信息技术的不断发展，信息系统在企业生产经营中的重要性越来越高，反映企业经营的各类报表也越来越多，报表的逻辑与页面展示也越来越复杂，而业务人员对报表查询的效率要求也在不断提高。原来的报表多以单数据源为主，而今，特别是对于集团企业、跨国公司等大型企业单位，一张报表的数据域往往基于多个数据源(即将多个具有不同数据字段的数据文件作为数据源，按照各数据源的不同结构动态在一个报表内展现对应的不同表格样式)。由于每个数据源的数据量巨大，目前报表处理系统在进行多个数据源的报表处理中已经越来越不能满足效率要求，如何提高该类报表处理的效率成为各企业在不断深入研究的问题。
发明内容
针对上述现有技术中存着的不足之处，本发明提出了一种综合化运维管理报表处理方法及系统，用以提高报表分拣重组的效率。
为此，本发明采用的技术方案是：
第一方面，一种综合化运维管理报表处理方法，其包括步骤：
读取指定EXCEL工作簿内的所有工作表数据；
根据预设的关键字，找到包含所述关键字的关键行并整行提取出来；
将提取出来的关键行整行复写到新建EXCEL工作簿的工作表中，以所述关键字对所述新建EXCEL工作簿进行命名。
一个实施例中，报表处理处理方法中，采用PYTHON的PANDAS模块根据所述关键字提取所述关键行，并复写到新建EXCEL工作簿。
一个实施例中，报表处理处理方法中，新建EXCEL工作簿的表头套用原EXCEL工作簿的表头。
一个实施例中，报表处理处理方法中，在提取关建行时同步提取原EXCEL工作簿的表头，复写到新建EXCEL工作簿的工作表表头位置。
第二方面，一种综合化运维管理报表处理系统，其包括：
数据读取单元，用于读取指定EXCEL工作簿内的所有工作表数据；
关建行提取单元，用于根据预设的关键字，找到包含所述关键字的关键行并整行提取出来；
关建行复写单元，用于将提取出来的关键行整行复写到新建EXCEL工作簿的工作表中；
关键字命名单元，用于以所述关键字对所述新建EXCEL工作簿进行命名。
本发明报表处理系统进一步的改进在于，还包括：关键字输入模块，用于预设关键字。
一个实施例中，报表处理系统还包括数据源模块，用于识别对EXCEL工作簿的指定，将指定的EXCEL工作簿内所有工作表数据作为数据源。
一个实施例中，报表处理系统还包括表头单元，用于提取原EXCEL工作簿的表头，并复写至新建EXCEL工作簿内工作表的表头位置。
第三方面，一种计算机可读的存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述综合化运维管理报表处理方法的步骤。
由于采用上述技术方案，使得本发明取得的技术效果是：
本发明实施例中，通过数据读取单元、关建行提取单元、关建行复写单元以及关键字命名单元实现对报表数据的快速分拣和重组，引入PYTHON的“pandas”、“xlsxwriter”等函数模块将所有报表一次性导入，并且在输入关键字后，可以将关键字所在行全部提取出来，再复写到新建EXCEL工作簿的工作表的行中；同时新建EXCEL工作簿可以同样的方法整行提取原EXCEL工作簿的表头所在行，再复写到新建EXCEL工作簿的表头所在行，如此就可以得到所有包含该关键字的EXCEL工作表，可以根据不同需求，将大量报表数据有针对地进行分拣重组，得到满足需求的报表内容，方便查看和统计。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例综合化运维管理报表处理方法的流程图。
图2为本发明实施例原EXCEL工作表内容的示意图。
图3为本发明实施例分拣重组后新EXCEL工作表内容的示意图。
图4为本发明实施例报表处理前的EXCEL文件的示意图。
图5为本发明实施例报表处理后的EXCEL文件的示意图。
图6为本发明实施例综合化运维管理报表处理系统的功能模块示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，本发明实施例提供了一种综合化运维管理报表处理方法，该报表处理方法主要包括以下步骤：
步骤一、读取指定EXCEL工作簿内的所有工作表数据；
步骤二、根据预设的关键字，找到包含所述关键字的关键行并整行提取出来；
步骤三、将提取出来的关键行整行复写到新建EXCEL工作簿的工作表中，以预设的关键字对新建EXCEL工作簿进行命名。
上述流程可以在PYTHON的PANDAS模块(或“xlsxwriter”函数模块)中得以实现。在Python中，pandas是基于NumPy数组构建的，使数据预处理、清洗、分析工作变得更快更简单，pandas是专门为处理表格和混杂数据设计的。
参见图2，以作业计划表为例：
第一行是表头，由左至右包括：工单编号、区局、班组、工作要求、单位、专业、工种……，包含多个数据源。
首先在表头中确定需要分拣重组的关键列名字，如选择“区局”作为关键列，当前“区局”列下有多个不同区局的信息，而且排列杂乱无章，不能清楚体现各个区局的情况，也不便于针对不同区局进行统计。因此，需要把“区局”这一列中属于同一区局的数据分拣出来再合并到一起，生成新的工作表。
因此，在输入关键列名字后，再输入关键字，如“宝山”，系统会自动将区局关键列下所有包含“宝山”二字的数据统统识别出来，再把“宝山”所在行作为关键行，整行提取出来，复写到新建EXCEL工作簿的新建工作表中，如图3所示。
这样，在新建EXCEL工作表中只会有“宝山”区局的有关数据，同理，可以将原EXCEL工作表中的其余区局的数据逐个提取出来，生成多个以区局关键字命名的新建EXCEL工作簿，如图4和图5所示，完成对原EXCEL工作簿的分拣重组。
另外，新建EXCEL工作簿的表头可以自动套用原EXCEL工作簿的表头，只要在提取关建行时同步提取原EXCEL工作簿的表头，复写到新建EXCEL工作簿的工作表表头位置，易于操作。
参见图6，本发明实施例还提供了一种综合化运维管理报表处理系统，其主要包括以下模功能模块：
数据读取单元11，用于读取指定EXCEL工作簿内的所有工作表数据；
关建行提取单元12，用于根据预设的关键字，找到包含关键字的关键行并整行提取出来；
关建行复写单元13，用于将提取出来的关键行整行复写到新建EXCEL工作簿的工作表中；
关键字命名单元14，用于以关键字对新建EXCEL工作簿进行命名。
该些功能模块可以基于PYTHON的PANDAS模块(或“xlsxwriter”函数模块)得以实现。
进一步地，本发明实施例的综合化运维管理报表处理系统还可以包括一关键字输入模块15以及一个数据源模块16，该关键字输入模块15用于供操作人员输入关键字；该数据源模块16用于供操作人员输入待分拣的EXCEL文件所在路径，指定数据源，确定需要拆分的内容和需要拆分的表格。
在关键字输入模块15输入关键字，在数据源模块16输入待数据分拣的所有EXCEL文件所在路径后，系统会利用数据读取单元11自动读取所有指定的指定的EXCEL工作簿内的工作表；接着系统会利用关建行提取单元12，根据预设好的关键字自动对所有数据进行分拣重组；最后，系统会利用关建行复写单元13自动将所有相同区局的报表并入一个新建EXCEL工作簿内，并利用关键字命名单元14以关键字作为新建EXCEL工作簿的名称，便于统计和查看。
在一些实施例中，该综合化运维管理报表处理系统还包括表头单元，用于提取原EXCEL工作簿的表头，并复写至新建EXCEL工作簿内工作表的表头位置。操作过程及原理与关建行的提取和复用相同。
本发明实施例还提供了一种计算机可读的存储介质，该计算机包括处理器、存储器、输入装置和输出装置；计算机中处理器的数量可以是一个或多个；计算机中的处理器、存储器、输入装置和输出装置可以通过总线或其他方式连接。
存储器作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的综合化运维管理报表处理方法对应的程序指令和/或模块(例如，综合化运维管理报表处理系统中的数据读取单元11、关建行提取单元12、关建行复写单元13和关键字命名单元14)。处理器通过运行存储在存储器中的软件程序、指令以及模块，从而执行计算机设备的各种功能应用以及数据处理，即实现上述的综合化运维管理报表处理方法。
存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器可进一步包括相对于处理器远程设置的存储器，这些远程存储器可以通过网络连接至计算机设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置可用于接收输入的数字或字符信息，以及产生与计算机设备的用户设置以及功能控制有关的键信号输入(如关键字输入模块15和数据源模块16上的输入操作)。输出装置可包括显示屏等显示设备，显示EXCEL工作表内容等。
本发明实施例中，通过数据读取单元、关建行提取单元、关建行复写单元以及关键字命名单元实现对报表数据的快速分拣和重组，引入PYTHON的“pandas”、“xlsxwriter”等函数模块将所有报表一次性导入，并且在输入关键字后，可以将关键字所在行全部提取出来，再复写到新建EXCEL工作簿的工作表的行中；同时新建EXCEL工作簿可以同样的方法整行提取原EXCEL工作簿的表头所在行，再复写到新建EXCEL工作簿的表头所在行，如此就可以得到所有包含该关键字的EXCEL工作表，可以根据不同需求，将大量报表数据有针对地进行分拣重组，得到满足需求的报表内容，方便查看和统计。
本发明中未涉及部分均与现有技术相同或可采用现有技术加以实现。尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。
Claims (9)
1.一种综合化运维管理报表处理方法，其特征在于，包括步骤：
读取指定EXCEL工作簿内的所有工作表数据；
根据预设的关键字，找到包含所述关键字的关键行并整行提取出来；
将提取出来的关键行整行复写到新建EXCEL工作簿的工作表中，以所述关键字对所述新建EXCEL工作簿进行命名。
2.如权利要求1所述的综合化运维管理报表处理方法，其特征在于，采用PYTHON的PANDAS模块根据所述关键字提取所述关键行，并复写到新建EXCEL工作簿。
3.如权利要求1所述的综合化运维管理报表处理方法，其特征在于，新建EXCEL工作簿的表头套用原EXCEL工作簿的表头。
4.如权利要求3所述的综合化运维管理报表处理方法，其特征在于，在提取关建行时同步提取原EXCEL工作簿的表头，复写到新建EXCEL工作簿的工作表表头位置。
5.一种综合化运维管理报表处理系统，其特征在于，包括：
数据读取单元，用于读取指定EXCEL工作簿内的所有工作表数据；
关建行提取单元，用于根据预设的关键字，找到包含所述关键字的关键行并整行提取出来；
关建行复写单元，用于将提取出来的关键行整行复写到新建EXCEL工作簿的工作表中；
关键字命名单元，用于以所述关键字对所述新建EXCEL工作簿进行命名。
6.如权利要求5所述的综合化运维管理报表处理系统，其特征在于，还包括：关键字输入模块，用于预设关键字。
7.如权利要求5所述的综合化运维管理报表处理系统，其特征在于，还包括数据源模块，用于识别对EXCEL工作簿的指定，将指定的EXCEL工作簿内所有工作表数据作为数据源。
8.如权利要求5所述的综合化运维管理报表处理系统，其特征在于，还包括表头单元，用于提取原EXCEL工作簿的表头，并复写至新建EXCEL工作簿内工作表的表头位置。
9.一种计算机可读的存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1～4任一项所述的综合化运维管理报表处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110931014.5A CN113642298A (zh) | 2021-08-13 | 2021-08-13 | 综合化运维管理报表处理方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110931014.5A CN113642298A (zh) | 2021-08-13 | 2021-08-13 | 综合化运维管理报表处理方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113642298A true CN113642298A (zh) | 2021-11-12 |
Family
ID=78421553
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110931014.5A Pending CN113642298A (zh) | 2021-08-13 | 2021-08-13 | 综合化运维管理报表处理方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113642298A (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20080168135A1 (en) * | 2007-01-05 | 2008-07-10 | Redlich Ron M | Information Infrastructure Management Tools with Extractor, Secure Storage, Content Analysis and Classification and Method Therefor |
| CN103631969A (zh) * | 2013-12-20 | 2014-03-12 | 北京中电普华信息技术有限公司 | 一种报表数据的生成方法及装置 |
| CN105868310A (zh) * | 2016-03-25 | 2016-08-17 | 联想(北京)有限公司 | 一种数据处理方法、装置及电子设备 |
| CN109816231A (zh) * | 2019-01-16 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 工作流处理方法、电子装置及可读存储介质 |
-
2021
- 2021-08-13 CN CN202110931014.5A patent/CN113642298A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20080168135A1 (en) * | 2007-01-05 | 2008-07-10 | Redlich Ron M | Information Infrastructure Management Tools with Extractor, Secure Storage, Content Analysis and Classification and Method Therefor |
| CN103631969A (zh) * | 2013-12-20 | 2014-03-12 | 北京中电普华信息技术有限公司 | 一种报表数据的生成方法及装置 |
| CN105868310A (zh) * | 2016-03-25 | 2016-08-17 | 联想(北京)有限公司 | 一种数据处理方法、装置及电子设备 |
| CN109816231A (zh) * | 2019-01-16 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 工作流处理方法、电子装置及可读存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 妖白: "利用python3筛选excel中特定的行", 脚本之家, pages 1 - 3 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11816100B2 (en) | Dynamically materialized views for sheets based data | |
| CN108027818B (zh) | 基于图的查询 | |
| US20220342875A1 (en) | Data preparation context navigation | |
| US11755606B2 (en) | Dynamically updated data sheets using row links | |
| Wand et al. | Anchoring data quality dimensions in ontological foundations | |
| US10180992B2 (en) | Atomic updating of graph database index structures | |
| US8468171B2 (en) | Attributed key-value-store database system | |
| US8924373B2 (en) | Query plans with parameter markers in place of object identifiers | |
| CN110472068A (zh) | 基于异构分布式知识图谱的大数据处理方法、设备及介质 | |
| CN102917009B (zh) | 一种基于云计算技术的股票数据采集和存储方法和系统 | |
| US20170255708A1 (en) | Index structures for graph databases | |
| CN110795524B (zh) | 主数据映射处理方法、装置、计算机设备及存储介质 | |
| US11567995B2 (en) | Branch threading in graph databases | |
| US20180357278A1 (en) | Processing aggregate queries in a graph database | |
| CN109002470A (zh) | 知识图谱构建方法及装置、客户端 | |
| CN114297173A (zh) | 一种面向大规模海量数据的知识图谱构建方法和系统 | |
| CN109636303B (zh) | 一种半自动提取和结构化文档信息的存储方法及系统 | |
| CN110737432A (zh) | 一种基于词根表的脚本辅助设计方法及装置 | |
| CN111881126A (zh) | 一种大数据管理系统 | |
| CN113642298A (zh) | 综合化运维管理报表处理方法及系统 | |
| CN109902258A (zh) | 基于区块链的数据处理方法及设备 | |
| US20190220531A1 (en) | Consistency check for foreign key definition | |
| CN113934729A (zh) | 一种基于知识图谱的数据管理方法、相关设备及介质 | |
| Rani et al. | Social data provenance framework based on zero-information loss graph database | |
| CN113868138A (zh) | 测试数据的获取方法、系统、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |