CN117350643A - 一种科研数据修改整合系统 - Google Patents

Abstract

本发明公开了一种科研数据修改整合系统，所述系统包括数据导出模块、发票验证模块、科研平台数据操作模块、科研辅助帐生成模块、全局异常处理模块和邮件发送模块。本发明通过上述各模块的协同工作，解决现有科研数据手动处理耗时易出错的技术问题，提高了科研数据处理的效率和准确性，提供精确、可追溯的数据处理结果，减轻业务人员的工作负担，为电力领域的业务运作提供重要支持。

Description

一种科研数据修改整合系统

技术领域

本发明属于数据处理技术领域，具体涉及一种科研数据修改整合系统。

背景技术

在电力领域，科研数据的管理和整合对于实现高效的业务运作至关重要。然而，传统的手动处理方法耗时且容易出错，无法满足快速增长的数据处理需求。因此，需要开发一种科研数据修改整合系统，以提高数据处理的效率和准确性。

发明内容

本发明要解决的技术问题是：提供一种科研数据修改整合系统，解决现有科研数据手动处理耗时易出错的技术问题。

为实现上述目的，本发明采用的技术方案如下：

一种科研数据修改整合系统，包括：

数据导出模块，用于导出发票信息表、预算执行表、年度费用明细表和资本化明细表，传入PDF文件；

发票验证模块，用于将PDF文件和发票信息表内的数据合并为验证数据；

科研平台数据操作模块，用于管理科研数据，并且记录科研数据的管理变化数据；

科研辅助帐生成模块，用于基于预算执行表、年度费用明细表和资本化明细表生成科研数据总表；

全局异常处理模块，用于对异常管理变化数据的处理和分析；

邮件发送模块，用于分别将验证数据、管理变化数据、科研数据总表邮件发送给相关人员。

进一步地，所述数据导出模块包括数据自动导出单元、数据人工传入单元和数据转换单元；

所述数据自动导出单元，用于接入SAP系统和ERP系统，由SAP系统自动导出科研平台发票信息表和预算执行表，由ERP系统自动导出科研平台的年度费用明细表、资本化明细表；

所述数据人工导出单元，用于手动导出PDF文件和人工传入的发票信息表；

所述数据转换单元，用于将自动导出的发票信息表转化为第一Excel表、将人工导出的发票信息表转化为第二Excel表。

进一步地，所述数据导出模块还包括大文件处理单元；

所述大文件处理单元，用于将自动导出或人工导出的大文件分割成多个小文件、以及将自动导出或人工导出的多个小文件合并为完整文件。

进一步地，所述发票验证模块包括发票数据读取单元、OCR文字识别单元和发票数据合并单元；

所述发票数据读取单元，用于读取第一Excel表、第二Excel表和PDF文件；

所述OCR文字识别单元，用于OCR文字识别PDF文件中的数据，并将识别出的数据保存为第三Excel表；

所述发票数据合并模块，用于将第一Excel表、第二Excel表和第三Excel表合并，并且去除信息不全的数据、去掉发票号码识别错误的数据，生成验证数据。

进一步地，所述科研平台数据操作模块包括科研数据读取单元、科研数据管理单元和科研数据运行记录单元；

所述科研数据读取单元，用于读取科研数据，所述科研数据包括但不限于机组数据、人员数据、科值数据、机组功率变化数据；

所述科研数据管理单元，用于接入实时数据管理系统，在实时数据管理系统中对科研数据进行上传、修改、新增、删除的管理操作；

所述科研数据运行记录单元，用于记录科研数据的运行和管理变化，生成管理变化数据，将管理变化数据记录到数据库和日志文件中。

进一步地，所述全局异常处理模块包括异常读取单元和异常解析单元；

所述数据库连接单元，用于连接数据库；

所述异常提取与解析单元，用于捕获异常日志，将异常日志的信息解析为标准的数据结构并记录到数据库和日志文件中。

进一步地，所述辅助帐生成模块包括科研辅助数据读取单元和数据合并单元；

所述科研辅助数据读取单元，用于读取已导出的年度费用化明细表、资本化明细表和预算执行表，以及读取项目编号对应表；

所述数据合并单元，用于合并年度费用化明细表、资本化明细表和预算执行表，将合并数据匹配到项目编号对应表生成合并文件，将合并文件所有条目通过增加标签页的方式填入科研数据模板表中，得到科研数据总表。

进一步地，所述辅助帐生成模块还包括判断单元；

所述判断单元，用于判断本年度是否已生成科研数据总表，已生成则弹窗提示。

进一步地，所述邮件发送模块包括配置登录单元和邮件单元；

所述配置登录单元，用于读取邮件发送参数和登录邮箱系统；

所述邮件单元，用于写信和发送。

与现有技术相比，本发明具有以下有益效果：

本发明所述系统包括数据导出模块、发票验证模块、科研平台数据操作模块、科研辅助帐生成模块、全局异常处理模块和邮件发送模块，通过上述各模块的协同工作，提高了科研数据处理的效率和准确性，提供精确、可追溯的数据处理结果，减轻业务人员的工作负担，为电力领域的业务运作提供重要支持。

附图说明

图1为本发明的系统结构图。

具体实施方式

术语解释：

SAP系统：是一套企业资源管理软件系统。

ERP系统：是企业资源计划的简称，新一代集成化管理信息系统。

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图，对本发明进一步详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，本发明提供的一种科研数据修改整合系统，包括数据导出模块、发票验证模块、科研平台数据操作模块、科研辅助帐生成模块、全局异常处理模块和邮件发送模块：

数据导出模块，用于导出发票信息表、预算执行表、年度费用明细表和资本化明细表，传入PDF文件；

发票验证模块，用于将PDF文件和发票信息表内的数据合并为验证数据；

科研平台数据操作模块，用于管理科研数据，并且记录科研数据的管理变化数据；

科研辅助帐生成模块，用于基于预算执行表、年度费用明细表和资本化明细表生成科研数据总表；

全局异常处理模块，用于对异常管理变化数据的处理和分析；

邮件发送模块，用于分别将验证数据、管理变化数据、科研数据总表邮件发送给相关人员。

在部分实施例中，所述数据导出模块包括数据自动导出单元、数据人工传入单元和数据转换单元；

所述数据自动导出单元，用于接入SAP系统和ERP系统，由SAP系统自动导出科研平台发票信息表和预算执行表，由ERP系统自动导出科研平台的年度费用明细表、资本化明细表；

所述数据人工导出单元，用于手动导出PDF文件和人工传入的发票信息表；

所述数据转换单元，用于将自动导出的发票信息表转化为第一Excel表、将人工导出的发票信息表转化为第二Excel表。

数据自动导出单元需要读取预先设定的配置文件，解析其中的参数，包括系统登录信息、导出数据的条件和路径等；然后根据配置参数，接入到相应的系统，如SAP系统和ERP系统；再根据配置参数，进入业务跳转页面，执行相应的操作并导出指定数据，例如，根据设定的日期范围、公司信息等筛选条件，系统自动导出相应的发票信息、年度费用明细表、资本化明细表和预算执行表等。

数据人工导出单元需要读取预先设定的PDF文件和人工传入发票信息表的存储路径，再进入业务跳转页面，执行相应的操作并导出指定数据。

在部分实施例中，所述数据导出模块还包括大文件处理单元；

所述大文件处理单元，用于将自动导出或人工导出的大文件分割成多个小文件、以及将自动导出或人工导出的多个小文件合并为完整文件。例如，年度费用明细表和资本化明细表由于系统限制不能一次性全部导出，通过所述大文件处理单元实现分次导出。

在部分实施例中，所述发票验证模块包括发票数据读取单元、OCR文字识别单元和发票数据合并单元；

所述发票数据读取单元，用于读取第一Excel表、第二Excel表和PDF文件；发票数据读取单元读取为需要验证的发票信息表的Excel表；

所述OCR文字识别单元，用于OCR文字识别PDF文件中的数据，并将识别出的数据保存为第三Excel表；

所述发票数据合并模块，用于将第一Excel表、第二Excel表和第三Excel表合并，并且去除信息不全的数据、去掉发票号码识别错误的数据，生成验证数据。

在部分实施例中，所述科研平台数据操作模块包括科研数据读取单元、科研数据管理单元和科研数据运行记录单元；

所述科研数据读取单元，用于读取科研数据，所述科研数据包括但不限于机组数据、人员数据、科值数据、机组功率变化数据；所述科研数据管理单元，用于接入实时数据管理系统，在实时数据管理系统中对科研数据进行上传、修改、新增、删除的管理操作；

所述科研数据运行记录单元，用于记录科研数据的运行和管理变化，生成管理变化数据，将管理变化数据记录到数据库和日志文件中。

作为优选，人工将不同格式文件的科研数据放入共享盘，然后接入实时数据管理系统，进入科研平台数据操作界面，读取共享盘内的科研数据。点击机组数据，读取共享盘机组数据，点击上传机组数据；点击人员管理，通过对比页面和共享盘人员数据一致性，根据共享盘为准，在实时数据管理系统中进行修改、新增、删除人员信息；点击科值数据，通过对比页面和共享盘科值数据一致性，根据共享盘为准，在实时数据管理系统中进行修改、新增、删除科值数据；点击机组功率变化数据，上传组功率变化数据。最后记录当次实时数据管理系统运行修改了哪些内容，生成管理变化数据，并记录这些数据到数据库和日志文件中，以实现可追溯性。

在部分实施例中，所述全局异常处理模块包括异常读取单元和异常解析单元；

所述数据库连接单元，用于连接数据库；

所述异常提取与解析单元，用于捕获异常日志，读取并定义日志存放路径，将异常日志的信息解析为标准的数据结构并记录到数据库和日志文件中。

数据库连接单元读取配置文件中的数据库信息，并建立与数据库的连接。

异常提取与解析单元读取配置文件中的日志文件存放路径，并将异常日志保存到指定的路径；在实时数据管理系统运行过程中捕获异常日志，并将异常日志信息解析为标准的数据结构，包括异常类型、发生时间、具体错误等；最后将异常日志信息记录到本地日志文件和数据库中，以便后续的异常处理和分析。

在部分实施例中，所述辅助帐生成模块包括科研辅助数据读取单元和数据合并单元；

所述科研辅助数据读取单元，用于读取已导出的年度费用化明细表、资本化明细表和预算执行表，以及读取项目编号对应表，项目编号对应表用于匹配和填列数据；

所述数据合并单元，用于合并年度费用化明细表、资本化明细表和预算执行表，将合并数据匹配到项目编号对应表生成合并文件，将合并文件所有条目通过增加标签页的方式填入科研数据模板表中，得到科研数据总表。

所述项目编号对应表和科研数据模板表均为固定表，首次传入系统后即可重复利用，或根据不同需求进行修改或重新传入。

数据合并单元，对年度费用明细表、资本化明细表和预算执行表进行筛选、整合和填列，筛选、整合和填列可根据设定的规则进行；根据项目编号对应表的项目编号将不同类型(年度费用明细表、资本化明细表和预算执行表)的费用数据放入科研数据模板表(Excel不同的Sheet页)中，得到科研数据总表。

作为优选，所述辅助帐生成模块还包括判断单元，所述判断单元，用于判断本年度是否已生成科研数据总表，已生成则弹窗提示。

在部分实施例中，所述邮件发送模块包括配置登录单元和邮件单元；

所述配置登录单元，用于读取邮件发送参数和登录邮箱系统；

所述邮件单元，用于写信和发送。

配置登录单元需要读取预先设定的配置文件，包括邮件发送的账号、密码、收件人、抄送等信息；再自动登录配置的邮箱系统，准备发送邮件的操作。

邮件单元通过点击写信，输入邮件相关信息，自动点击写信按钮，并输入邮件的标题、收件人、抄送、正文等内容；根据配置的附件路径，自动将生成的数据文件(验证数据、管理变化数据或科研数据总表)作为附件添加到邮件中；最后自动点击发送按钮，将邮件发送给指定的收件人。邮件发送模块能够将各模块生成的数据发送至指定的业务人员。

作为优选，本发明提供的一种科研数据修改整合系统，还包括系统登录模块，用于登录各模块外接的系统，还能在登录非账户问题失败重试时，将账户问题失败邮件通知账户人员。所述系统登录模块包括ERP系统登录单元、SAP系统登录单元、YU系统登录单元、邮箱登录单元、非账户问题失败重试登录单元；ERP系统登录单元，用于识别登录图片验证码，进入ERP系统；SAP系统登录单元，用于解决多点登录提示，进入SAP系统；YU系统登录单元，用于接收短信验证码，进入YU系统。

最后应说明的是：以上各实施例仅仅为本发明的较优实施例用以说明本发明的技术方案，而非对其限制，当然更不是限制本发明的专利范围；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围；也就是说，但凡在本发明的主体设计思想和精神上作出的毫无实质意义的改动或润色，其所解决的技术问题仍然与本发明一致的，均应当包含在本发明的保护范围之内；另外，将本发明的技术方案直接或间接的运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (9)

1.一种科研数据修改整合系统，其特征在于，包括：

数据导出模块，用于导出发票信息表、预算执行表、年度费用明细表和资本化明细表，传入PDF文件；

发票验证模块，用于将PDF文件和发票信息表内的数据合并为验证数据；

科研平台数据操作模块，用于管理科研数据，并且记录科研数据的管理变化数据；

科研辅助帐生成模块，用于基于预算执行表、年度费用明细表和资本化明细表生成科研数据总表；

全局异常处理模块，用于对异常管理变化数据的处理和分析；

邮件发送模块，用于分别将验证数据、管理变化数据、科研数据总表邮件发送给相关人员。

2.根据权利要求1所述的一种科研数据修改整合系统，其特征在于，所述数据导出模块包括数据自动导出单元、数据人工传入单元和数据转换单元；

所述数据自动导出单元，用于接入SAP系统和ERP系统，由SAP系统自动导出科研平台发票信息表和预算执行表，由ERP系统自动导出科研平台的年度费用明细表、资本化明细表；

所述数据人工导出单元，用于手动导出PDF文件和人工传入的发票信息表；

所述数据转换单元，用于将自动导出的发票信息表转化为第一Excel表、将人工导出的发票信息表转化为第二Excel表。

3.根据权利要求2所述的一种科研数据修改整合系统，其特征在于，所述数据导出模块还包括大文件处理单元；

所述大文件处理单元，用于将自动导出或人工导出的大文件分割成多个小文件、以及将自动导出或人工导出的多个小文件合并为完整文件。

4.根据权利要求2所述的一种科研数据修改整合系统，其特征在于，所述发票验证模块包括发票数据读取单元、OCR文字识别单元和发票数据合并单元；

所述发票数据读取单元，用于读取第一Excel表、第二Excel表和PDF文件；

所述OCR文字识别单元，用于OCR文字识别PDF文件中的数据，并将识别出的数据保存为第三Excel表；

所述发票数据合并模块，用于将第一Excel表、第二Excel表和第三Excel表合并，并且去除信息不全的数据、去掉发票号码识别错误的数据，生成验证数据。

5.根据权利要求1所述的一种科研数据修改整合系统，其特征在于，所述科研平台数据操作模块包括科研数据读取单元、科研数据管理单元和科研数据运行记录单元；

所述科研数据读取单元，用于读取科研数据，所述科研数据包括但不限于机组数据、人员数据、科值数据、机组功率变化数据；

所述科研数据管理单元，用于接入实时数据管理系统，在实时数据管理系统中对科研数据进行上传、修改、新增、删除的管理操作；

所述科研数据运行记录单元，用于记录科研数据的运行和管理变化，生成管理变化数据，将管理变化数据记录到数据库和日志文件中。

6.根据权利要求5所述的一种科研数据修改整合系统，其特征在于，所述全局异常处理模块包括异常读取单元和异常解析单元；

所述数据库连接单元，用于连接数据库；

所述异常提取与解析单元，用于捕获异常日志，将异常日志的信息解析为标准的数据结构并记录到数据库和日志文件中。

7.根据权利要求2所述的一种科研数据修改整合系统，其特征在于，所述辅助帐生成模块包括科研辅助数据读取单元和数据合并单元；

所述科研辅助数据读取单元，用于读取已导出的年度费用化明细表、资本化明细表和预算执行表，以及读取项目编号对应表；

所述数据合并单元，用于合并年度费用化明细表、资本化明细表和预算执行表，将合并数据匹配到项目编号对应表生成合并文件，将合并文件所有条目通过增加标签页的方式填入科研数据模板表中，得到科研数据总表。

8.根据权利要求7所述的一种科研数据修改整合系统，其特征在于，所述辅助帐生成模块还包括判断单元；

所述判断单元，用于判断本年度是否已生成科研数据总表，已生成则弹窗提示。

9.根据权利要求1所述的一种科研数据修改整合系统，其特征在于，所述邮件发送模块包括配置登录单元和邮件单元；

所述配置登录单元，用于读取邮件发送参数和登录邮箱系统；

所述邮件单元，用于写信和发送。