CN113674115B - 一种基于数据治理技术的高校数据管理辅助系统及方法 - Google Patents

Abstract

本申请提供一种基于数据治理技术的高校数据管理辅助系统及方法。其通过业务系统接口接入高校现有各系统中的高校数据信息，通过业务前端接收操作者导入的数据信息，再分别通过结构化业务数据采集模块和非结构化数据采集模块分别提取各数据信息所对应的元数据，从而根据元数据，在规范化处理模块中对相应数据信息进行处理以更新辅助系统数据库，并相应通过数据回写模块更新现有各系统。本申请能够自动获取高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统，对各系统中数据进行调取、使用，也能够自动将辅助系统对上述各现有系统中数据的更新进行相应同步，以简化对高校数据的维护、管理。

Description

一种基于数据治理技术的高校数据管理辅助系统及方法

技术领域

本申请涉及数据治理技术领域，具体而言涉及一种基于数据治理技术的高校数据管理辅助系统及方法。

背景技术

高校数据包含有学校行政、教学、科研、关联企业等众多类目，体量巨大，且由于历史维护等原因往往数据质量不佳，孤岛化、碎片化问题突出。虽然目前高校纷纷采购了丰富的数据管理系统，但是，这些现有系统往往只针对学校单一业务层面需求进行数据管理，校园各部门往往需要分别通过各自的数字平台进行数据维护和管理。现有高效各部门之间数据不互通、标准不统一，导致其数据中心保存了大量重复杂乱的数据，不能充分发挥数据的价值。

为解决这一问题，数据治理概念被引入。目前，采用数据治理技术来实现高校数据的数据互通，具体需要：先确定好问题，获得管理层的支持；进而评估成熟度、规划路线、建立蓝图；然后建立数据字典、理解数据、建立元数据库，定义衡量指标，再任命数据责任人、管理数据、评分数据质量；最后衡量结果。

但是，现有的用于高校的数据治理系统往往存在以下缺点：人为参与数据治理较多，自动化程度不高，影响实际工作效率；除了数据本身，较少提供方便业务层面操作的数据接口，无法根据系统内数据向管理者直接输出整合结果，数据实用效率不高。

发明内容

本申请针对现有技术的不足，提供一种基于数据治理技术的高校数据管理辅助系统及方法，本申请能够自动获取高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统，对各系统中数据进行调取、使用，也能够自动将辅助系统对上述各现有系统中数据的更新进行相应同步，以简化对高校数据的维护、管理。本申请具体采用如下技术方案。

首先，为实现上述目的，提出一种基于数据治理技术的高校数据管理辅助系统，其包括：业务系统接口，其通过有线或无线方式接入高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统；结构化业务数据采集模块，其连接业务系统接口，利用ETL工具 、网络爬虫工具、批量导入工具中的任意一种或其组合通过业务系统接口获取高校数据信息，并根据高校数据信息的来源系统、数据结构及数据类型在相应高校数据信息上标记来源分类号，然后根据来源分类号调取相应元数据模型对该高校数据信息进行逻辑映射，提取该高校数据信息的相应元数据 ；非结构化业务数据采集模块，其具有数据导入接口，用于通过数据导入接口接收业务前端所导入的文本文件、表格文件、扫描文件和/或业务前端所输入的数据信息，通过语义识别工具和/或OCR工具 将业务前端所导入的文件转化为业务数据信息，并根据语义识别工具和/或OCR工具所识别出的数据类别标识调取相应元数据模型对该业务数据信息进行逻辑映射，提取该业务数据信息的相应元数据；规范化处理模块，其连接结构化业务数据采集模块、非结构化业务数据采集模块以及辅助系统数据库，用于按照元数据对相应的高校数据信息和业务数据信息进行整合、比对以及更新，并按照统一数据规范标准将整合、比对、更新后的数据存入辅助系统数据库；数据回写模块，其在规范化处理模块触发对辅助系统数据库中数据进行更新时，同步提取该更新数据所对应的元数据信息 ，通过业务系统接口按照元数据信息将更新数据相应回写至对应的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统中；业务前端，其响应于操作者的操作步骤或响应于操作者所触发的表单而相应调取辅助系统数据库中数据，向操作者提供所述数据或直接将相应数据代入表单，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件或相应触发非结构化业务数据采集模块提取相应业务数据信息的元数据。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助系统，其中，各所述业务前端均分别配置有操作账号和维护账号，每一个操作账号均对应有与之匹配的维护账号；操作账号用于触发的表单或相应调取辅助系统数据库中数据，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件，并将文件发送至与其匹配的维护账号；维护账号用于接收相应操作账号的文件，触发表单或相应调取辅助系统数据库中数据，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应更新所述文件或相应触发非结构化业务数据采集模块提取相应业务数据信息的元数据。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助系统，其中，各所述业务前端还分别设置有：操作日志单元，其通过API接口获取操作者的操作步骤、操作者所触发的表单以及操作者对其所导入的文本文件、表格文件、扫描文件中数据信息的操作，并按照时间顺序将其编写并记录为操作步骤记录项；特征抽取单元，其按照预设操作步长将操作日志模块所记录的各操作步骤记录项划分为若干操作组，分别提取并记录每一个操作组的特征信息；分类单元，其按照各操作组特征信息之间余弦相似度的匹配状况，将特征信息相互接近的操作组归为一类，并记录其操作频率或操作次数；操作工具生成单元，其在分类单元中一类操作组的操作频率或操作次数达到预设标准时 ，提取该操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据 ，并记录该操作组中前N个操作步骤记录项所对应的调取特征信息，按照操作顺序将所述操作流程数据转化为辅助工具包，并将所述辅助工具包及与之匹配的调取特征信息存储至系统云端；辅助工具包调用单元，其实时提取操作日志单元中当前操作步骤记录项，计算相邻的顺序执行的N个操作步骤记录项的操作特征信息，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助系统，其中，提取操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据的步骤具体包括：按照操作组中各操作步骤记录项的顺序，生成调取相应操作步骤记录项所对应操作对象的指令，以及对该操作对象所执行的操作方式的调取指令，将调取指令的目标对象调整为所述操作对象；按照操作组中各操作步骤记录项的顺序，将上述各指令顺序存储为操作流程数据。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助系统，其中，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作的步骤包括：触发弹框，显示辅助工具包所执行的操作信息；在操作者选择自动执行相应操作后，在原先显示界面上增加辅助图层；在辅助图层中标识出辅助工具包当前操作步骤所对应的操作对象和操作方式，供操作者选择是否自动执行相应操作；在操作者选择自动执行相应操作后，执行相应操作指令，然后继续在操作后的显示界面上重复上一步，直至完成辅助工具包所对应的全部操作步骤。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助系统，其中，若操作者在辅助图层上选择不自动执行相应操作，则触发操作工具生成单元根据操作者实时的操作步骤记录项更新 当前辅助图层所对应的辅助工具包。

同时，为实现上述目的，本申请还提供一种基于数据治理技术的高校数据管理辅助方法，其步骤包括：第一步，通过业务系统接口接入高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统，利用ETL工具、网络爬虫工具、批量导入工具中的任意一种或其组合通过业务系统接口获取高校数据信息，并根据高校数据信息的来源系统、数据结构及数据类型在相应高校数据信息上标记来源分类号，然后根据来源分类号调取相应元数据模型对该高校数据信息进行逻辑映射，提取该高校数据信息的相应元数据；通过数据导入接口接收业务前端所导入的文本文件、表格文件、扫描文件和/或业务前端所输入的数据信息，通过语义识别工具和/或OCR工具将业务前端所导入的文件转化为业务数据信息，并根据语义识别工具和/或OCR工具所识别出的数据类别标识调取相应元数据模型对该业务数据信息进行逻辑映射，提取该业务数据信息的相应元数据；第二步，按照元数据对相应的高校数据信息和业务数据信息进行整合、比对以及更新，并按照统一数据规范标准将整合、比对、更新后的数据存入辅助系统数据库；第三步，在触发对辅助系统数据库中数据进行更新时，同步提取该更新数据所对应的元数据信息 ，通过业务系统接口按照元数据信息将更新数据相应回写至对应的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统中；第四步，通过业务前端响应操作者的操作步骤或响应操作者所触发的表单而相应调取辅助系统数据库中数据，向操作者提供所述数据或直接将相应数据代入表单，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件或相应触发以第一步方式提取相应业务数据信息的元数据从而更新第二步和第三步。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助方法，其中，所述业务前端还用于执行以下步骤：步骤s1，通过API接口获取操作者的操作步骤、操作者所触发的表单以及操作者对其所导入的文本文件、表格文件、扫描文件中数据信息的操作，并按照时间顺序将其编写并记录为操作步骤记录项；步骤s2，按照预设操作步长将所记录的各操作步骤记录项划分为若干操作组，分别提取并记录每一个操作组的特征信息；步骤s3，按照各操作组特征信息之间余弦相似度的匹配状况，将特征信息相互接近的操作组归为一类，并记录其操作频率或操作次数；步骤s4，在一类操作组的操作频率或操作次数达到预设标准时，提取该操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据 ，并记录该操作组中前N个操作步骤记录项所对应的调取特征信息，按照操作顺序将所述操作流程数据转化为辅助工具包，并将所述辅助工具包及与之匹配的调取特征信息存储至系统云端；步骤s5，实时提取当前操作步骤记录项，计算与之相邻的顺序执行的N个操作步骤记录项的操作特征信息，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助方法，其中，步骤s4中提取操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据的步骤具体包括：步骤s4-1，按照操作组中各操作步骤记录项的顺序，生成调取相应操作步骤记录项所对应操作对象的指令，以及对该操作对象所执行的操作方式的调取指令，将调取指令的目标对象调整为所述操作对象；步骤s4-2，按照操作组中各操作步骤记录项的顺序，将上述各指令顺序存储为操作流程数据。

可选的，如上任一所述的基于数据治理技术的高校数据管理辅助方法，其中，步骤s5中，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作的步骤还包括：步骤s5-1，触发弹框，显示辅助工具包所执行的操作信息，在操作者选择自动执行相应操作后跳转至步骤s5-2；步骤s5-2，在原先显示界面上增加辅助图层，在辅助图层中标识出辅助工具包当前操作步骤所对应的操作对象和操作方式，供操作者选择是否自动执行相应操作，在操作者选择自动执行相应操作后跳转至步骤s5-3；步骤s5-3，执行相应操作指令，然后继续在操作后的显示界面上重复步骤s5-2，直至完成辅助工具包所对应的全部操作步骤；上述步骤中，若操作者在辅助图层上选择不自动执行相应操作，则触发对实时的操作步骤记录项重新执行步骤s4以根据操作者实时的操作步骤记录项更新 当前辅助图层所对应的辅助工具包。

有益效果

本申请通过业务系统接口接入高校现有各系统中的高校数据信息，通过业务前端接收操作者导入的数据信息，再分别通过结构化业务数据采集模块和非结构化数据采集模块分别提取各数据信息所对应的元数据，从而根据元数据，在规范化处理模块中对相应数据信息进行处理以更新辅助系统数据库，并相应通过数据回写模块更新现有各系统。本申请能够自动获取高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统，对各系统中数据进行调取、使用，也能够自动将辅助系统对上述各现有系统中数据的更新进行相应同步，以简化对高校数据的维护、管理。

此外，本申请还利用业务前端所设置的操作日志单元记录操作步骤记录项，然后通过特征抽取单元和分类单元对相应操作日志记录项进行归类，获得能够执行数据处理功能的操作过程，将其记录为操作组。由此，本申请能够进一步筛选操作组，将日常工作中满足预设标准、需要定期固定执行机械操作步骤的操作组通过操作工具生成单元的转化而产生能够反复被调取的辅助工具包。由此，在业务前端检测到操作人员执行上述操作组中步骤时，可直接通过调用辅助工具包，引导操作人员通过辅助工具包直接抓取并对相应数据进行操作，以节省操作人员的重复劳动，提高对高校数据进行维护、管理的效率。

此外，执行辅助工具包时，本申请还可通过辅助图层确认原本所记录的操作步骤是否准确，在获得操作人员确认后执行相应操作而在操作人员更换其他操作方式时直接触发对辅助工具包中相应数据操作步骤的更新。由此，本申请能够通过日常使用直接对辅助工具包进行维护、更新，确保辅助工具包能够准确记录对特定对象的操作步骤，以进一步提升对高校数据进行维护、管理的效率。

此外，由于本申请对操作人员所进行的操作情况的抓取，本申请还可进一步通过对操作情况的识别而实现对操作人员工作效率的考核和改进建议，以进一步提高操作人员对本申请的辅助系统的使用效率。

本申请的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本申请而了解。

附图说明

附图用来提供对本申请的进一步理解，并且构成说明书的一部分，并与本申请的实施例一起，用于解释本申请，并不构成对本申请的限制。在附图中：

图1是本申请的基于数据治理技术的高校数据管理辅助系统示意图。

具体实施方式

为使本申请实施例的目的和技术方案更加清楚，下面将结合本申请实施例的附图，对本申请实施例的技术方案进行清楚、完整地描述。显然，所描述的实施例是本申请的一部分实施例，而不是全部的实施例。基于所描述的本申请的实施例，本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语（包括技术术语和科学术语）具有与本申请所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样定义，不会用理想化或过于正式的含义来解释。

本申请中所述的“连接”的含义可以是部件之间的直接连接也可以是部件间通过其它部件的间接连接。

图1为根据本申请的一种基于数据治理技术的高校数据管理辅助系统，其包括：

业务系统接口，其通过有线或无线方式接入高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统，提供查询、获取现有各系统中数据或更新现有各系统中数据的端口；

结构化业务数据采集模块，其连接业务系统接口，利用ETL工具（Extract-Transform-Load工具，将数据从来源段抽取、转换、加载至目的端的工具）、网络爬虫工具、批量导入工具中的任意一种或其组合通过业务系统接口获取各现有系统中已存储的高校数据信息，并根据高校数据信息的来源系统、数据结构及数据类型在相应高校数据信息上标记来源分类号，然后根据来源分类号调取相应元数据模型对该高校数据信息进行逻辑映射，提取该高校数据信息的相应元数据，以获得该数据所指示的存储位置、历史数据、资源查找、文件记录等信息，标识出数据所对应的物理含义或现实含义与那些数据元因素相关，作为管理辅助系统对该数据进行存储归档整合的依据；

非结构化业务数据采集模块，其具有由业务前端所提供的数据导入接口，用于通过业务前端的数据导入接口接收操作人员通过业务前端所导入的文本文件、表格文件、扫描文件和/或业务前端所输入的数据信息，通过OCR（optical character recognition，光学字符识别）工具将业务前端所导入的扫描文件转化为机器可读的文本或表格数据，再通过语义识别工具对各文本、表格或由操作者直接输入的业务数据信息进行识别，获得各数据所对应的识别特征以确定其数据类别标识，再根据语义识别工具和/或OCR工具所识别出的数据类别标识调取相应元数据模型对该业务数据信息进行逻辑映射，提取该业务数据信息的相应元数据；以扫描表格文件为例，OCR工具对扫描所得电子文件进行OpticalCharacter Recognition，光学字符识别，获得其上所记载的字符，然后通过语义识别工具获得表格中字符含义，从而根据表格文字内容项目获得其所对应的数据类别标识，调取匹配于该类表格的逻辑映射算法，获得表格中相应项目下业务数据信息所对应的元数据，以获得该数据所指示的存储位置、历史数据、资源查找、文件记录等信息，标识出数据所对应的物理含义或现实含义与那些数据元因素相关，作为管理辅助系统对该数据进行存储归档整合的依据；

规范化处理模块，其连接结构化业务数据采集模块、非结构化业务数据采集模块以及辅助系统数据库，用于按照元数据对具有相应元数据的高校数据信息和业务数据信息进行整合、比对，将后修改数据覆盖在先数据以对相同含义的数据记录进行更新，并按照统一数据规范标准将整合、比对、更新后的数据存入辅助系统数据库；

数据回写模块，其在规范化处理模块触发对辅助系统数据库中数据进行更新时，同步提取该更新数据所对应的元数据信息，逆向通过元数据获得其所对应的来源分类号，从而识别其来源系统，以通过相应系统的业务系统接口按照元数据信息所指数据属性将更新的数据相应回写至对应的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统中。

至此本申请能够自动识别获取学校现有系统中更新的各数据项，并通过对数据项的识别而根据其更新日期通过数据回写模块自动同步到高效的其他数据系统中，实现对整体辅助系统数据库的维护更新。

使用本申请辅助系统时，操作人员通过业务前端，发出相应操作指令或触发相应调取动作，操作前端响应于操作者的操作步骤或响应于操作者所触发的表单而相应调取辅助系统数据库中数据，向操作者提供所述数据或直接将相应数据代入表单，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件或相应触发非结构化业务数据采集模块提取相应业务数据信息的元数据，从而更新辅助系统数据库并相应地通过业务系统接口按照元数据信息将更新数据相应回写至对应的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统中。

为提高操作者使用本申请辅助系统业务前端进行数据调取、处理的效率，本申请还在计算机终端、平板、查询终端等运行业务前端软件的设备上进一步提供以下方案。

为业务前端分别配置操作账号和维护账号，每一个操作账号作为下属项均对应有与之匹配的维护账号；

其中的操作账号用于触发的表单或相应调取辅助系统数据库中数据，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件，并将文件发送至与其匹配的维护账号；

而该操作账号所对应的维护账号则用于接收相应操作账号的文件供操作人员校验，或直接由操作人员触发表单或相应调取辅助系统数据库中数据，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，通过与操作账号相类似的步骤和界面，根据操作者指令而相应更新所述文件或相应触发非结构化业务数据采集模块提取相应业务数据信息的元数据。

对于每一个业务前端，不论其账号登录为操作账号还是维护账号，均可设置通过以下方式对经常出现的系列操作进行自动提示，以在获得操作者授权后自动执行相应操作，避免数据维护管理中的重复劳动：

首先通过操作日志单元，在后台调取执行psr.exe等步骤记录程序或实时获取鼠标、点选操作对象和操作内容，利用API接口获取上述各后台程序所获得的操作者的操作步骤、操作者所触发的表单以及操作者对其所导入的文本文件、表格文件、扫描文件中数据信息的操作，并按照时间顺序将其编写并记录为操作步骤记录项；

然后由特征抽取单元，按照预设操作步长，先将操作日志模块所记录的各操作步骤记录项按照每5个操作或每10个操作或每20个操作或按照任意操作步骤数量将其划分为若干操作组，分别提取并记录每一个操作组的特征信息；以操作日志单元记录有20个操作步骤为例，特征抽取单元先将第1至第5个操作划分为第1操作组，然后将第2至第6个操作划分为第2操作组，然后将第3至第7个操作划分为第3操作组，直至将第16至第20个操作划分为第16操作组，再返回到头一个操作步骤按照每6个操作步骤一组对其进行第二轮划分，再按照每7个一组、8个一组、9个一组等方式进行操作组划分，然后分别提取并记录每一个操作组的特征信息，以对反复进行的操作步骤进行识别；

由此，调用分类单元，按照各操作组特征信息之间余弦相似度的匹配状况，将特征信息相互接近的操作组归为一类，并记录其操作频率或操作次数；

最后通过操作工具生成单元，在分类单元中一类操作组的操作频率或操作次数达到预设标准，比如，每周执行、每天执行或者反复执行过5次或者10次以上时，提取该操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，按照以下步骤s4-1至步骤s4-2生成操作流程数据，以记录操作者在完成特定任务时，每次所需执行的操作步骤，记录其每次操作所分别对应需调取的应用、所涉及的数据对象、对数据对象的处理方式、处理顺序，将处于同一操作顺序下不同操作组所分别对应的操作步骤记录项中的共性部分，将每次所执行的相同操作步骤提取出来按照步骤s4-1至s4-2方式记录为可以共调取以执行同等操作的操作流程数据；然后记录该操作组中前N个（N大于2，可选择根据完成特定任务时所需执行的操作步骤总数的前20%或前30%步骤数量进行设定）操作步骤记录项所对应的调取特征信息，按照操作顺序将所述操作流程数据转化为辅助工具包，以通过辅助工具包完成对相应操作对象的调取和执行相应操作，并将所述辅助工具包及与之匹配的调取特征信息一并以一一对应的方式存储至系统云端。

提取操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据的步骤具体包括：

步骤s4-1，按照操作组中各操作步骤记录项的顺序，生成调取相应操作步骤记录项所对应操作对象的指令，以及对该操作对象所执行的操作方式的调取指令，将调取指令的目标对象调整为所述操作对象；

步骤s4-2，按照操作组中各操作步骤记录项的顺序，将上述各指令顺序存储为操作流程数据。

为进一步增加操作流程数据记录的准确性，还进一步在生成调取相应操作对象的指令后，在步骤s4-2之前，进一步判断该操作对象是否为上一操作步骤记录项所操作的对象，进一步判断对该操作对象所进行的操作是否对应为上一操作步骤记录项所对应操作的反操作（比如，上一步中增加了操作对象A中的某一项数据，这一步中删除同样操作对象A中相同内容的数据），若均判断为是，则删除操作组中该操作步骤记录项以及其上一步所对应的操作步骤记录项后，继续对后续操作步骤记录项进行步骤s4-1的操作，直至完成对整个操作组中全部操作步骤记录项的遍历操作。此时，按照删除重复步骤后的操作组中各操作步骤记录项的顺序，将上述各指令顺序存储为操作流程数据，可排除操作人员操作失误所导致的错误操作步骤记录项对自动执行操作流程的干扰。

由此，操作者通过业务前端进行数据维护或者使用数据时，业务前端可通过其自身非辅助工具包调用单元，其实时提取操作日志单元中操作者当前的操作步骤记录项，以最新操作为起点向前查询N个相邻的操作步骤，按照与操作工具生成单元对操作步骤记录项计算调取特征信息一致的方式，计算操作日志中相邻的顺序执行的N个操作步骤记录项所对应的操作特征信息，在操作特征信息与云端所记录的调取特征相匹配时，认为用户正在执行特定任务，此时可相应调取与之对应的辅助工具包供操作者按照以下方式选择是否自动执行相应操作：

步骤s5-1，触发弹框，显示辅助工具包所执行的操作信息，在操作者选择自动执行相应操作后跳转至步骤s5-2，在操作者选择不自动执行时结束辅助工具包调用，返回原先的操作界面；

步骤s5-2，在原先显示界面上增加半透明的辅助图层，在辅助图层中以框选方式标识出辅助工具包当前操作步骤所对应的操作对象，并在方框边标注对该操作对象的操作方式，供操作者选择是否自动执行相应操作，在操作者选择自动执行相应操作后跳转至步骤s5-3；

步骤s5-3，执行相应操作指令，然后更新显示界面以继续在操作后的显示界面上重复步骤s5-2，直至完成辅助工具包所对应的全部操作步骤；

上述步骤s5-2中，若操作者在执行特定任务过程中的任意一步所对应的辅助图层上选择不自动执行相应操作，则触发操作工具生成单元根据操作者当前实时的操作步骤记录项重新执行“”的步骤以根据操作者实时的操作步骤记录项更新当前辅助图层所对应的辅助工具包中的相应步骤。由此在下一次执行该特定任务时，按照更新后的步骤对自动执行的步骤内容和调取对象、操作方式进行替换，以满足操作者实际操作需求，排除制作辅助工具包时对操作者无关操作步骤错误提取所带来的问题。

当操作者已经熟悉并认可上述自动执行的辅助工具操作步骤后，可在执行若干次上述步骤s5-2至s5-3之后省去辅助图层，而直接由步骤s5-1确认选择自动执行相应操作后直接执行相应操作指令，直至自动完成辅助工具包所对应的全部操作步骤。

考虑到本申请的API接口可在使用全过程实时获得操作人员对各类窗口程序的操作情况，因此，本申请还可进一步通过对操作日志单元中对操作者的操作步骤、操作者所触发的表单以及操作者对其所导入的文本文件、表格文件、扫描文件中数据信息的操作的记录而相应通过与筛选库比对，根据筛选库中所记录的明显与工作无关的操作对象和执行步骤，而查找出明显与工作无关的操作步骤的操作步骤记录项。将其打包按照固定周期推送至账号所对应邮箱或推送至操作账号上级所对应维护账号，即可将操作人员日常操作情况纳入考核范围，定量评估操作人员执行非业务操作所占比例并进行提示。

进一步，筛选库中除记录非业务相关的操作对象外，还可进一步增加常规跳转项目，在该项目下记录办公用通讯软件、文件传输、下载软件、常规使用的网站地址等不应当被筛选为非业务操作的操作对象。由此通过以下步骤记录并评估操作人员的工作状况以相应进行提示或推送:

步骤d1，提取目标操作账户在相应业务前端操作日志单元中所记录的操作步骤记录项，逐一对各操作步骤记录项按照以下步骤进行筛查；

步骤d2，比对操作步骤记录项中所对应的操作对象和/或操作内容是否属于筛选库所记录的范围，比如，在操作对象为游戏软件时，标记该操作步骤记录项并单独将该操作步骤记录项所对应的操作时间提取出来记录在非工作日志中；

步骤d3，比对非工作日志中所记录的各操作步骤记录项的操作对象和/或操作内容是否属于筛选库中常规跳转项目下所记载的范围，撤销对属于该范围的操作步骤的标记；

步骤d4，计算非工作日志中标记出的各操作步骤记录项的操作时间占目标操作账户在相应业务前端操作日志单元中所记录的全部操作步骤记录项的时间比例，记录该比例为提醒项；计算非工作日志中为标记的各操作步骤记录项的操作时间占目标操作账户在相应业务前端操作日志单元中所记录的全部操作步骤记录项的时间比例，记录该比例为效率项；

步骤d5，每周或每月向维护账号推送其下级所对应的各操作账号的提醒项和效率项；每周向各操作账号推送其所对应的提醒项，并同步推送非工作日志中标记出的各操作步骤记录项，接收操作账号的校验请求，将操作账号的校验请求所标记的操作步骤记录项增加至下一次推送维护账号的提醒项后；

步骤d6，在接收到维护账户确认操作账号的校验请求所标记的操作步骤记录项后，将该操作步骤记录项所对应的操作对象和/或操作内容记录在筛选库中常规跳转项目下并更新筛选库，在后续推送过程中按照更新后的筛选库进行筛选、标记和推送。

由此，本申请通过业务系统接口接入高校现有各系统中的高校数据信息，通过业务前端接收操作者导入的数据信息，再分别通过结构化业务数据采集模块和非结构化数据采集模块分别提取各数据信息所对应的元数据，从而根据元数据，在规范化处理模块中对相应数据信息进行处理以更新辅助系统数据库，并相应通过数据回写模块更新现有各系统。本申请能够自动获取高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统，对各系统中数据进行调取、使用，也能够自动将辅助系统对上述各现有系统中数据的更新进行相应同步，以简化对高校数据的维护、管理。

以上仅为本申请的实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些均属于本申请的保护范围。

Claims (9)

1.一种基于数据治理技术的高校数据管理辅助系统，其特征在于，包括：

业务系统接口，其通过有线或无线方式接入高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统；

结构化业务数据采集模块，其连接业务系统接口，利用ETL工具、网络爬虫工具、批量导入工具中的任意一种或其组合通过业务系统接口获取高校数据信息，并根据高校数据信息的来源系统、数据结构及数据类型在相应高校数据信息上标记来源分类号，然后根据来源分类号调取相应元数据模型对该高校数据信息进行逻辑映射，提取该高校数据信息的相应元数据；

非结构化业务数据采集模块，其具有数据导入接口，用于通过数据导入接口接收业务前端所导入的文本文件、表格文件、扫描文件和/或业务前端所输入的数据信息，通过语义识别工具和/或OCR工具将业务前端所导入的文件转化为业务数据信息，并根据语义识别工具和/或OCR工具所识别出的数据类别标识调取相应元数据模型对该业务数据信息进行逻辑映射，提取该业务数据信息的相应元数据；

规范化处理模块，其连接结构化业务数据采集模块、非结构化业务数据采集模块以及辅助系统数据库，用于按照元数据对相应的高校数据信息和业务数据信息进行整合、比对以及更新，并按照统一数据规范标准将整合、比对、更新后的数据存入辅助系统数据库；

数据回写模块，其在规范化处理模块触发对辅助系统数据库中数据进行更新时，同步提取该更新数据所对应的元数据信息，通过业务系统接口按照元数据信息将更新数据相应回写至对应的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统中；

业务前端，其响应于操作者的操作步骤或响应于操作者所触发的表单而相应调取辅助系统数据库中数据，向操作者提供所述数据或直接将相应数据代入表单，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件或相应触发非结构化业务数据采集模块提取相应业务数据信息的元数据；

其中，各所述业务前端还分别执行以下步骤：

步骤4-1，通过API接口获取操作者的操作步骤、操作者所触发的表单以及操作者对其所导入的文本文件、表格文件、扫描文件中数据信息的操作，并按照时间顺序将其编写并记录为操作步骤记录项；

步骤4-2，按照预设操作步长将操作日志模块所记录的各操作步骤记录项划分为若干操作组，分别提取并记录每一个操作组的特征信息；

步骤4-3，按照操作组中各操作步骤记录项的顺序，生成调取相应操作步骤记录项所对应操作对象的指令，以及对该操作对象所执行的操作方式的调取指令，将调取指令的目标对象调整为所述操作对象；

步骤4-4，进一步判断该操作对象是否为上一操作步骤记录项所操作的对象，进一步判断对该操作对象所进行的操作是否对应为上一操作步骤记录项所对应操作的反操作，若均判断为是，则在删除操作组中该操作步骤记录项以及其上一步所对应的操作步骤记录项后，继续对后续操作步骤记录项进行步骤4-3的操作，直至完成对整个操作组中全部操作步骤记录项的遍历操作后跳转至步骤4-5；

步骤4-5，按照操作组中各操作步骤记录项的顺序，将上述各指令顺序存储为操作流程数据；

步骤4-6，按照各操作组特征信息之间余弦相似度的匹配状况，将特征信息相互接近的操作组归为一类，并记录其操作频率或操作次数；

步骤4-7，在任一类操作组的操作频率或操作次数达到预设标准时，提取该操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据，并记录该操作组中前N个操作步骤记录项所对应的调取特征信息，按照操作顺序将所述操作流程数据转化为辅助工具包，并将所述辅助工具包及与之匹配的调取特征信息存储至系统云端；

步骤4-8，实时提取当前操作步骤记录项，计算相邻的顺序执行的N个操作步骤记录项的操作特征信息，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作；

所述系统还包括：

筛选库，其记录非业务相关的操作对象以及常规跳转项目，常规跳转项目下记录如下非业务操作的操作对象：办公用通讯软件、文件传输、下载软件、常规使用的网站地址；

所述筛选库用于按照如下步骤比对并评估操作日志单元中操作人员的操作记录以相应进行提示或推送:步骤d1，提取目标操作账户在相应业务前端操作日志单元中所记录的操作步骤记录项，逐一对各操作步骤记录项按照以下步骤进行筛查；步骤d2，比对操作步骤记录项中所对应的操作对象和/或操作内容是否属于筛选库所记录的范围，在操作对象属于筛选库所记录的范围时，标记该操作步骤记录项并单独将该操作步骤记录项所对应的操作时间提取出来记录在非工作日志中；步骤d3，比对非工作日志中所记录的各操作步骤记录项的操作对象和/或操作内容是否属于筛选库中常规跳转项目下所记载的范围，撤销对属于该范围的操作步骤的标记；步骤d4，计算非工作日志中标记出的各操作步骤记录项的操作时间占目标操作账户在相应业务前端操作日志单元中所记录的全部操作步骤记录项的时间比例，记录该比例为提醒项；计算非工作日志中为标记的各操作步骤记录项的操作时间占目标操作账户在相应业务前端操作日志单元中所记录的全部操作步骤记录项的时间比例，记录该比例为效率项；步骤d5，每周或每月向维护账号推送其下级所对应的各操作账号的提醒项和效率项；每周向各操作账号推送其所对应的提醒项，并同步推送非工作日志中标记出的各操作步骤记录项，接收操作账号的校验请求，将操作账号的校验请求所标记的操作步骤记录项增加至下一次推送维护账号的提醒项后；步骤d6，在接收到维护账户确认操作账号的校验请求所标记的操作步骤记录项后，将该操作步骤记录项所对应的操作对象和/或操作内容记录在筛选库中常规跳转项目下并更新筛选库，在后续推送过程中按照更新后的筛选库进行筛选、标记和推送。

2.如权利要求1所述的基于数据治理技术的高校数据管理辅助系统，其特征在于，各所述业务前端均分别配置有操作账号和维护账号，每一个操作账号均对应有与之匹配的维护账号；

操作账号用于触发的表单或相应调取辅助系统数据库中数据，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件，并将文件发送至与其匹配的维护账号；

维护账号用于接收相应操作账号的文件，触发表单或相应调取辅助系统数据库中数据，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应更新所述文件或相应触发非结构化业务数据采集模块提取相应业务数据信息的元数据。

3.如权利要求2所述的基于数据治理技术的高校数据管理辅助系统，其特征在于，提取操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据的步骤具体包括：

按照操作组中各操作步骤记录项的顺序，生成调取相应操作步骤记录项所对应操作对象的指令，以及对该操作对象所执行的操作方式的调取指令，将调取指令的目标对象调整为所述操作对象；

按照操作组中各操作步骤记录项的顺序，将上述各指令顺序存储为操作流程数据。

4.如权利要求3所述的基于数据治理技术的高校数据管理辅助系统，其特征在于，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作的步骤包括：

触发弹框，显示辅助工具包所执行的操作信息；

在操作者选择自动执行相应操作后，在原先显示界面上增加辅助图层；

在辅助图层中标识出辅助工具包当前操作步骤所对应的操作对象和操作方式，供操作者选择是否自动执行相应操作；

在操作者选择自动执行相应操作后，执行相应操作指令，然后继续在操作后的显示界面上重复上一步，直至完成辅助工具包所对应的全部操作步骤。

5.如权利要求4所述的基于数据治理技术的高校数据管理辅助系统，其特征在于，若操作者在辅助图层上选择不自动执行相应操作，则触发操作工具生成单元根据操作者实时的操作步骤记录项更新当前辅助图层所对应的辅助工具包。

6.一种基于数据治理技术的高校数据管理辅助方法，其特征在于，用于权利要求1-5任一所述的系统，步骤包括：

第一步，通过业务系统接口接入高校目前所使用的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统，利用ETL工具、网络爬虫工具、批量导入工具中的任意一种或其组合通过业务系统接口获取高校数据信息，并根据高校数据信息的来源系统、数据结构及数据类型在相应高校数据信息上标记来源分类号，然后根据来源分类号调取相应元数据模型对该高校数据信息进行逻辑映射，提取该高校数据信息的相应元数据；通过数据导入接口接收业务前端所导入的文本文件、表格文件、扫描文件和/或业务前端所输入的数据信息，通过语义识别工具和/或OCR工具将业务前端所导入的文件转化为业务数据信息，并根据语义识别工具和/或OCR工具所识别出的数据类别标识调取相应元数据模型对该业务数据信息进行逻辑映射，提取该业务数据信息的相应元数据；

第二步，按照元数据对相应的高校数据信息和业务数据信息进行整合、比对以及更新，并按照统一数据规范标准将整合、比对、更新后的数据存入辅助系统数据库；

第三步，在触发对辅助系统数据库中数据进行更新时，同步提取该更新数据所对应的元数据信息，通过业务系统接口按照元数据信息将更新数据相应回写至对应的业务系统、教务系统、科研项目管理系统、设备系统、人事管理系统、财务系统和/或一卡通系统中；

第四步，通过业务前端响应操作者的操作步骤或响应操作者所触发的表单而相应调取辅助系统数据库中数据，向操作者提供所述数据或直接将相应数据代入表单，接收操作者所导入的文本文件、表格文件、扫描文件和/或其所输入的数据信息，接收操作者对表单所进行的操作，根据操作者指令而相应生成输出文件或相应触发以第一步方式提取相应业务数据信息的元数据从而更新第二步和第三步。

7.如权利要求6所述的基于数据治理技术的高校数据管理辅助方法，其特征在于，所述业务前端还用于执行以下步骤：

步骤s1，通过API接口获取操作者的操作步骤、操作者所触发的表单以及操作者对其所导入的文本文件、表格文件、扫描文件中数据信息的操作，并按照时间顺序将其编写并记录为操作步骤记录项；

步骤s2，按照预设操作步长将所记录的各操作步骤记录项划分为若干操作组，分别提取并记录每一个操作组的特征信息；

步骤s3，按照各操作组特征信息之间余弦相似度的匹配状况，将特征信息相互接近的操作组归为一类，并记录其操作频率或操作次数；

步骤s4，在一类操作组的操作频率或操作次数达到预设标准时，提取该操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据，并记录该操作组中前N个操作步骤记录项所对应的调取特征信息，按照操作顺序将所述操作流程数据转化为辅助工具包，并将所述辅助工具包及与之匹配的调取特征信息存储至系统云端；

步骤s5，实时提取当前操作步骤记录项，计算与之相邻的顺序执行的N个操作步骤记录项的操作特征信息，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作。

8.如权利要求7所述的基于数据治理技术的高校数据管理辅助方法，其特征在于，步骤s4中提取操作组中相同顺序下各操作步骤记录项的操作对象、操作方式、操作顺序，生成操作流程数据的步骤具体包括：

步骤s4-1，按照操作组中各操作步骤记录项的顺序，生成调取相应操作步骤记录项所对应操作对象的指令，以及对该操作对象所执行的操作方式的调取指令，将调取指令的目标对象调整为所述操作对象；

步骤s4-2，按照操作组中各操作步骤记录项的顺序，将上述各指令顺序存储为操作流程数据。

9.如权利要求8所述的基于数据治理技术的高校数据管理辅助方法，其特征在于，步骤s5中，在操作特征信息与云端所记录的调取特征相匹配时，调取与之对应的辅助工具包供操作者选择是否自动执行相应操作的步骤还包括：步骤s5-1，触发弹框，显示辅助工具包所执行的操作信息，在操作者选择自动执行相应操作后跳转至步骤s5-2；

步骤s5-2，在原先显示界面上增加辅助图层，在辅助图层中标识出辅助工具包当前操作步骤所对应的操作对象和操作方式，供操作者选择是否自动执行相应操作，在操作者选择自动执行相应操作后跳转至步骤s5-3；

步骤s5-3，执行相应操作指令，然后继续在操作后的显示界面上重复步骤s5-2，直至完成辅助工具包所对应的全部操作步骤；

上述步骤中，若操作者在辅助图层上选择不自动执行相应操作，则触发对实时的操作步骤记录项重新执行步骤s4以根据操作者实时的操作步骤记录项更新当前辅助图层所对应的辅助工具包。

Images