CN116991807A - 数据管理方法、装置、设备及介质 - Google Patents
数据管理方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN116991807A CN116991807A CN202311225939.3A CN202311225939A CN116991807A CN 116991807 A CN116991807 A CN 116991807A CN 202311225939 A CN202311225939 A CN 202311225939A CN 116991807 A CN116991807 A CN 116991807A
- Authority
- CN
- China
- Prior art keywords
- data
- information
- files
- log
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013523 data management Methods 0.000 title claims abstract description 44
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000003860 storage Methods 0.000 claims abstract description 49
- 230000008520 organization Effects 0.000 claims description 19
- 238000004806 packaging method and process Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 5
- 230000010354 integration Effects 0.000 claims description 5
- 238000013507 mapping Methods 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 10
- 230000014509 gene expression Effects 0.000 description 8
- 238000007726 management method Methods 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 108091026890 Coding region Proteins 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
- G06F16/1815—Journaling file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/103—Workflow collaboration or project management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Data Mining & Analysis (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及文本匹配领域,公开了数据管理方法、装置、设备及介质。该方法通过获取并解析用户信息,得到数据,接收文件集,将数据和文件集中的文件分别进行异步拆分并导出第一临时存储空间和第二临时存储空间,分别输出第一日志和第二日志,以便后续追溯,确定了文件与数据之间的绑定关系,根据第二指令,将所选中的文件进行打包整合并导出以及输出第三日志,提高多个文件导出的时效性,并且每个步骤后输出日志记录,以便有效追溯。
Description
技术领域
本发明涉及数据管理领域,尤其涉及数据管理方法、装置、设备及介质。
背景技术
信息系统已经实现了基本覆盖,较好支撑了PPP项目财承监测,可及时提醒预警统计,有力的保障了社会资本资金安全与项目进度推进情况,有效的提升了各地方规范管理PPP项目的水平。
目前原有技术导出的数据都是地方通过账号直接导出,数据信息导出需要大量运算无预先处理、单项目导出超时需全局重导,时效性较低,工作人员工作量较大,导出项目需一一核对无法通过自动化流程监控,无有效可追溯性。
发明内容
本发明的主要目的在于提供一种解决上述技术问题的数据管理方法、装置、设备及介质。
本发明第一方面提供了一种数据管理方法,包括:
获取用户信息,并解析出所述用户信息下的数据清单;
接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置第一临时存储空间,输出第一日志;
接收文件集,其中,所述文件集包括至少一个文件;
将所述文件进行分类并导出至预置第二临时存储空间,输出第二日志;
确定所述文件与所述业务数据的绑定关系,并以图形界面形式进行展示;
接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包。
可选的,在本发明第一方面的第二种实现方式中,所述获取用户信息,并解析出所述用户信息下的数据清单包括:
获取用户信息;
基于预置权限模型,过滤出所述用户信息中的区块信息、地方权限信息以及地方组织机构信息,得到数据。
可选的,在本发明第一方面的第三种实现方式中,所述接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置临时存储空间,输出第一日志包括:
接收到用户对所述数据清单进行确认的第一指令;
对所述数据清单进行异步拆分,得到用户类型信息、地方区块编码以及所属组织机构信息;
基于预置权限赋值算法,将用户类型信息、地方区块编码以及所属组织机构信息进行计算,得到用户权限信息。
可选的,在本发明第一方面的第四种实现方式中,在所述基于预置权限算法,将用户类型信息、地方区块编码以及所属组织机构信息进行计算,得到用户权限信息之后,还包括:
解析所述用户权限信息,得到业务数据、数据表结构以及内容描述;
将所述业务数据、所述数据表结构以及所述内容描述分别导出至预置第一临时存储空间,输出用于记录导出至所述临时存储空间内数据数量的第一日志。
可选的,在本发明第一方面的第五种实现方式中,所述业务数据包括数据库、名录信息、分析数据以及表结构。
可选的,在本发明第一方面的第六种实现方式中,所述确定所述文件与所述数据的绑定关系包括:
判断是否接收到用于更改所述文件与所述数据之间绑定关系的第三指令;
若有接收到所述第三指令,则通过所述数据库中数据主键转换所述数据的映射关系。
可选的,在所述接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包之后,还包括:
基于预置加密算法,对所述整合包进行加密处理,得到加密整合包,输出第三日志,其中,所述第三日志用于记录导出的所述加密整合包。
本发明第二方面提供了一种数据管理装置,其包括:
解析模块,用于获取用户信息,并解析出所述用户信息下的数据清单;
数据拆分模块,用于接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置第一临时存储空间,输出第一日志;
接收模块,用于接收文件集,其中,所述文件集包括至少一个文件;
文件拆分模块,用于将所述文件进行分类并导出至预置第二临时存储空间,输出第二日志;
绑定模块,用于确定所述文件与所述业务数据的绑定关系,并以图形界面形式进行展示;
整合模块,用于接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包。
本发明第三方面提供了一种数据管理设备,包括:存储器和至少一个处理器,所述存储器中存储有指令,所述存储器和所述至少一个处理器通过线路互连;所述至少一个处理器调用所述存储器中的所述指令,以使得所述数据管理设备执行上述的数据管理方法。
本发明的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述的数据管理方法。
在本发明的实施例中,通过获取并解析用户信息,得到数据,接收文件集,将数据和文件集中的文件分别进行异步拆分并导出第一临时存储空间和第二临时存储空间,分别输出第一日志和第二日志,以便后续追溯,确定了文件与数据之间的绑定关系,根据第二指令,将所选中的文件进行打包整合并导出以及输出第三日志,提高多个文件导出的时效性,并且每个步骤后输出日志记录,以便有效追溯。
附图说明
图1为本发明实施例中数据管理方法的第一个实施例示意图;
图2为本发明实施例中数据管理方法步骤101的具体实施例示意图;
图3为本发明实施例中数据管理方法中步骤102的具体实施例示意图一;
图4为本发明实施例中数据管理方法中步骤102的具体实施例示意图二;
图5为本发明实施例中数据管理方法中步骤105的具体实施例示意图;
图6为本发明实施例中数据管理方法中第七个实施例示意图;
图7为本发明实施例中数据管理装置的一个实施例示意图;
图8为本发明实施例中数据管理设备的一个实施例示意图。
具体实施方式
本发明实施例提供了一种数据管理方法、装置、设备及介质。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等如果存在是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”或“具有”及其任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为便于理解,下面对本发明实施例的具体流程进行描述,请参阅图1-附图6,本发明实施例中数据管理方法的一个实施例包括:
101、获取用户信息,并解析出所述用户信息下的数据清单;
在本实施例中,该方法应用于服务器端中,并且采用通讯终端等设备中的客户端实现人机交互,其中,获取用户信息便是通过用户接入客户端,服务器端对用户信息进行获取识别,具体的,用户可以通过动态输入登录信息,如身份权限信息、组织配置以及登录密钥等,服务器端接收后,并对这些信息进行解析以及连接测试,并返回测试日志,以便后续运维查阅。
1011、获取用户信息;
1012、基于预置权限模型,过滤出所述用户信息中的区块信息、地方权限信息以及地方组织机构信息,得到数据。
在步骤1011-1012中,权限模型用于收集地方财政层级权限生成的信息,其包括但不限于组织机构组、用户类型、用户个信息、地方区块编码等内容的定义,因此需要过滤掉一些其他信息,如区块信息、地方权限信息以及地方组织机构信息,获取到上述信息后需要进行归类并且通过图形界面的形式展示于客户端中,待用户查阅并确定。
102、接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置第一临时存储空间,输出第一日志;
在本实施例中,第一指令为用户查阅所展示的信息的后,通过客户端输入确认信息的指令,服务器端接收到该第一指令后,便会对这些业务数据进行异步拆分并导出至第一临时存储空间中以作为数据来源。
1021、接收到用户对所述数据清单进行确认的第一指令;
1022、对所述数据清单进行异步拆分,得到用户类型信息、地方区块编码以及所属组织机构信息;
1023、基于预置权限赋值算法,将用户类型信息、地方区块编码以及所属组织机构信息进行计算,得到用户权限信息。
在步骤1021-1023中,在本实施例中所采用的是构建逻辑条件表达式来自动对数据进行异步拆分,具体是先建立用户表用户类型“USER_TYPE”、地方区块编码“MOF_DIV_CODE”、所属组织机构“ORG_CODE”等数据元素,并利用表达式为R=T&MDC&OC,其中,R等于用户权限信息,T代表用户权限地方类型,MDC代表用户区块编码地区信息,OC代表所属组织机构信息,通过固定SQL语句进行SQL 定义,通过该表达式,可以实时计算出用户信息中权限赋值情况,即用户权限信息。
1024、解析所述用户权限信息,得到业务数据、数据表结构以及内容描述;
1025、将所述业务数据、所述数据表结构以及所述内容描述分别导出至预置第一临时存储空间,输出用于记录导出至所述临时存储空间内数据数量的第一日志。
在步骤1024-1025中,在本实施例中,解析所述用户权限信息是采用在编译的Shell脚本进行处理,其处理表达式为:
1>if [ $# ] thenexit;注解:if[ $# ]判断输入内容是否规范参数正确性,若不规范直接跳过;
2>sql_table="input data"注解:input data为动态接收数据集内容参数;
3>other_table=“table.sql”注解:table.sql内容为上传动态接收条件过滤参数如运用运算符(EQ(等于)、NE(不等于)、IN(范围内容)、NOT IN(范围内容外)、SECTION(区间));
4>for file_a in ${sql_table}/*注解:规范服务器内是否重复导出文件
5>if [[ $file_a == *$other_table* ]]注解:满足上述条件及后台生成至指定目录
6>else "output data"
而所述业务数据包括数据库、名录信息、分析数据以及表结构。
103、接收文件集,其中,所述文件集包括至少一个文件;
在本实施例中,文件集可以是事先存储在服务器端中,也可以是通过用户自己上传的多个文件。
104、将所述文件进行分类并导出至预置第二临时存储空间,输出第二日志;
在本实施例中,该步骤中的文件所执行的方式与步骤1024-1025中所采用的表达式相同,其区别在于,拆分后的文件需要进行分类汇总,而所输出的第二日志便是用于记录这些拆分后的文件类型。
105、确定所述文件与所述业务数据的绑定关系,并以图形界面形式进行展示;
在本实施例中,确定绑定关系的逻辑表达式为如果 M (权限生效条件) ,则K=Y;
其中,表达式中M表示包含用户权限R业务数据,K表示文件绑定的业务文件id信息,Y表示转换后多个文件存储的集合,利用这个表达式,可以实现当用户权限满足表达式1中R权限的M业务数据符合条件时,则K文件的id绑定的所有文件内容Y成立。
1051、判断是否接收到用于更改所述文件与所述业务数据之间绑定关系的第三指令;
1052、若有接收到所述第三指令,则通过所述数据库中数据主键转换所述数据的映射关系。
在步骤1051-1052中,文件与数据之间是存在有固定的绑定关系,但是,若所上传的文件出现其内容要修改等情况,那么可以通过执行第三指令,使用数据库中的数据主键进行映射关系的转换,当然数据主键的执行按钮是直接以图形界面的形式展现于客户端上,用户可以直接调用该按钮进行操作,操作便利。
106、接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包。
在本实施例中,用户可以查阅对应的文件,并选择单件文件进行导出,当然也可以选择多个文件进行导出,而选择过多的文件一起导出时,整理起来比较麻烦,因此可以对这多个文件进行打包整合操作,最后导出的时一个整合包。
107、基于预置加密算法,对所述整合包进行加密处理,得到加密整合包,输出第三日志,其中,所述第三日志用于记录导出的所述加密整合包。
在本实施例中,为了加强导出的文件或者整合包的安全性,在对所选择的文件或者整合包进行导出时,会采用加密算法对其进行加密操作,当然,加密算法的选择可以根据用户的需求,在本实施例中,预置有AES算法、RSA算法、Hash算法等,在进行加密的过程中,用户可以自定义加密密码,以确保文件或者整合包只有且仅有用户知道,有效提高文件或整合包的安全系数。
在本实施例中,通过获取并解析用户信息,得到数据,接收文件集,将数据和文件集中的文件分别进行异步拆分并导出第一临时存储空间和第二临时存储空间,分别输出第一日志和第二日志,以便后续追溯,确定了文件与数据之间的绑定关系,根据第二指令,将所选中的文件进行打包整合并导出以及输出第三日志,提高多个文件导出的时效性,并且每个步骤后输出日志记录,以便有效追溯。
上面对本发明实施例中数据管理方法进行了描述,下面对本发明实施例中数据管理装置进行描述,请参阅图7,本发明实施例中数据管理装置一个实施例包括:
解析模块201,用于获取用户信息,并解析出所述用户信息下的数据清单;
数据拆分模块202,用于接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置第一临时存储空间,输出第一日志;
接收模块203,用于接收文件集,其中,所述文件集包括至少一个文件;
文件拆分模块204,用于将所述文件进行分类并导出至预置第二临时存储空间,输出第二日志;
绑定模块205,用于确定所述文件与所述业务数据的绑定关系,并以图形界面形式进行展示;
整合模块206,用于接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包。
本发明实施例中数据管理装置的另一个实施例包括:
解析模块201,用于获取用户信息,并解析出所述用户信息下的数据清单;
数据拆分模块202,用于接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置第一临时存储空间,输出第一日志;
接收模块203,用于接收文件集,其中,所述文件集包括至少一个文件;
文件拆分模块204,用于将所述文件进行分类并导出至预置第二临时存储空间,输出第二日志;
绑定模块205,用于确定所述文件与所述业务数据的绑定关系,并以图形界面形式进行展示;
整合模块206,用于接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包。
进一步的,解析模块201具体还包括:
获取用户信息;
基于预置权限模型,过滤出所述用户信息中的区块信息、地方权限信息以及地方组织机构信息,得到数据。
进一步的,数据拆分模块202还可以具体执行:
接收到用户对所述数据进行确认的第一指令;
对所述数据清单进行异步拆分,得到用户类型信息、地方区块编码以及所属组织机构信息;
基于预置权限赋值算法,将用户类型信息、地方区块编码以及所属组织机构信息进行计算,得到用户权限信息;
解析所述用户权限信息,得到业务数据、数据表结构以及内容描述;
将所述业务数据、所述数据表结构以及所述内容描述分别导出至预置第一临时存储空间,输出用于记录导出至所述临时存储空间内数据数量的第一日志;
其中,所述业务数据包括数据库、名录信息、分析数据以及表结构。
进一步的,绑定模块205还可以具体执行:
判断是否接收到用于更改所述文件与所述业务数据之间绑定关系的第三指令;
若有接收到所述第三指令,则通过所述数据库中数据主键转换所述数据的映射关系。
进一步的,在整合模块206之后,还可以具体执行:
基于预置加密算法,对所述整合包进行加密处理,得到加密整合包,输出第三日志,其中,所述第三日志用于记录导出的所述加密整合包。
在本实施例中,通过获取并解析用户信息,得到数据,接收文件集,将数据和文件集中的文件分别进行异步拆分并导出第一临时存储空间和第二临时存储空间,分别输出第一日志和第二日志,以便后续追溯,确定了文件与数据之间的绑定关系,根据第二指令,将所选中的文件进行打包整合并导出以及输出第三日志,提高多个文件导出的时效性,并且每个步骤后输出日志记录,以便有效追溯。
上面图7从模块化功能实体的角度对本发明实施例中的数据管理装置进行详细描述,下面从硬件处理的角度对本发明实施例中数据管理设备进行详细描述。
图8是本发明实施例提供的一种数据管理设备的结构示意图,该数据管理设备300可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器centralprocessing units,CPU310例如,一个或一个以上处理器和存储器320,一个或一个以上存储应用程序333或数据332的存储介质330例如一个或一个以上海量存储设备。其中,存储器320和存储介质330可以是短暂存储或持久存储。存储在存储介质330的程序可以包括一个或一个以上模块图示没标出,每个模块可以包括对数据管理设备300中的一系列指令操作。更进一步地,处理器310可以设置为与存储介质330通信,在数据管理设备300上执行存储介质330中的一系列指令操作。
基于数据管理设备300还可以包括一个或一个以上电源340,一个或一个以上有线或无线网络接口350,一个或一个以上输入输出接口330,和/或,一个或一个以上操作系统331,例如Windows Serve,Mac OS X,Unix,Linux,FreeBSD等等。本领域技术人员可以理解,图8示出的数据管理设备结构并不构成对基于数据管理设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
本发明还提供一种计算机可读存储介质,该计算机可读存储介质可以为非易失性计算机可读存储介质,该计算机可读存储介质也可以为易失性计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在计算机上运行时,使得计算机执行所述基于数据管理方法的步骤。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统或装置、单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备可以是个人计算机,服务器,或者网络设备等执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器read-only memory, ROM、随机存取存储器random access memory,RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种数据管理方法,其特征在于,包括:
获取用户信息,并解析出所述用户信息下的数据清单;
接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置第一临时存储空间,输出第一日志;
接收文件集,其中,所述文件集包括至少一个文件;
将所述文件进行分类并导出至预置第二临时存储空间,输出第二日志;
确定所述文件与所述业务数据的绑定关系,并以图形界面形式进行展示;
接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包。
2.根据权利要求1所述的数据管理方法,其特征在于,所述获取用户信息,并解析出所述用户信息下的数据清单包括:
获取用户信息;
基于预置权限模型,过滤出所述用户信息中的区块信息、地方权限信息以及地方组织机构信息,得到数据清单。
3.根据权利要求2所述的数据管理方法,其特征在于,所述接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置临时存储空间,输出第一日志包括:
接收到用户对所述数据清单进行确认的第一指令;
对所述数据清单进行异步拆分,得到用户类型信息、地方区块编码以及所属组织机构信息;
基于预置权限赋值算法,将用户类型信息、地方区块编码以及所属组织机构信息进行计算,得到用户权限信息。
4.根据权利要求3所述的数据管理方法,其特征在于,在所述基于预置权限算法,将用户类型信息、地方区块编码以及所属组织机构信息进行计算,得到用户权限信息之后,还包括:
解析所述用户权限信息,得到业务数据、数据表结构以及内容描述;
将所述业务数据、所述数据表结构以及所述内容描述分别导出至预置第一临时存储空间,输出用于记录导出至所述临时存储空间内数据数量的第一日志。
5.根据权利要求4所述的数据管理方法,其特征在于,所述业务数据包括数据库、名录信息、分析数据以及表结构。
6.根据权利要求5所述的数据管理方法,其特征在于,所述确定所述文件与所述业务数据的绑定关系包括:
判断是否接收到用于更改所述文件与所述业务数据之间绑定关系的第三指令;
若有接收到所述第三指令,则通过所述数据库中数据主键转换所述业务数据的映射关系。
7.根据权利要求6所述的数据管理方法,其特征在于,在所述接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包之后,还包括:
基于预置加密算法,对所述整合包进行加密处理,得到加密整合包,输出第三日志,其中,所述第三日志用于记录导出的所述加密整合包。
8.一种数据管理装置,其特征在于,所述数据管理装置包括:
解析模块,用于获取用户信息,并解析出所述用户信息下的数据清单;
数据拆分模块,用于接收第一指令,将所述数据清单异步拆分,得到多个业务数据,将多个所述业务数据导出至预置第一临时存储空间,输出第一日志;
接收模块,用于接收文件集,其中,所述文件集包括至少一个文件;
文件拆分模块,用于将所述文件进行分类并导出至预置第二临时存储空间,输出第二日志;
绑定模块,用于确定所述文件与所述业务数据的绑定关系,并以图形界面形式进行展示;
整合模块,用于接收第二指令,将所选定的多个所述文件进行打包整合,得到整合包。
9.一种数据管理设备,其特征在于,所述数据管理设备包括:存储器和至少一个处理器,所述存储器中存储有指令,所述存储器和所述至少一个处理器通过线路互连;
所述至少一个处理器调用所述存储器中的所述指令,以使得所述设备执行如权利要求1-7中任一项所述的数据管理方法。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述的数据管理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311225939.3A CN116991807A (zh) | 2023-09-22 | 2023-09-22 | 数据管理方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311225939.3A CN116991807A (zh) | 2023-09-22 | 2023-09-22 | 数据管理方法、装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116991807A true CN116991807A (zh) | 2023-11-03 |
Family
ID=88521595
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311225939.3A Pending CN116991807A (zh) | 2023-09-22 | 2023-09-22 | 数据管理方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116991807A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117972250A (zh) * | 2024-03-28 | 2024-05-03 | 深圳市金政软件技术有限公司 | 数据的保存方法、系统和可读存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106547918A (zh) * | 2016-11-30 | 2017-03-29 | 长城计算机软件与系统有限公司 | 一种统计数据的整合方法及系统 |
CN115203306A (zh) * | 2022-07-19 | 2022-10-18 | 平安付科技服务有限公司 | 数据导出方法、装置、计算机设备及可读存储介质 |
-
2023
- 2023-09-22 CN CN202311225939.3A patent/CN116991807A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106547918A (zh) * | 2016-11-30 | 2017-03-29 | 长城计算机软件与系统有限公司 | 一种统计数据的整合方法及系统 |
CN115203306A (zh) * | 2022-07-19 | 2022-10-18 | 平安付科技服务有限公司 | 数据导出方法、装置、计算机设备及可读存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117972250A (zh) * | 2024-03-28 | 2024-05-03 | 深圳市金政软件技术有限公司 | 数据的保存方法、系统和可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111563016B (zh) | 日志采集分析方法、装置、计算机系统及可读存储介质 | |
CN104537015A (zh) | 一种日志分析的计算机实现的方法、计算机和系统 | |
CN116991807A (zh) | 数据管理方法、装置、设备及介质 | |
US8738767B2 (en) | Mainframe management console monitoring | |
CN107798037A (zh) | 用户特征数据的获取方法及服务器 | |
US20120254416A1 (en) | Mainframe Event Correlation | |
US20120254313A1 (en) | Multiple Destinations for Mainframe Event Monitoring | |
US20200201867A1 (en) | Inserting annotations for application tracing | |
CN113656183B (zh) | 任务处理方法、装置、设备及存储介质 | |
CN114298565A (zh) | 一种基于被下载文件的大数据软件推荐方法 | |
CN117271478A (zh) | 数据迁移方法、装置、存储介质以及电子设备 | |
CN112699162A (zh) | 一种用于源网荷多元数据处理的系统 | |
CN112732693A (zh) | 智能化物联网数据采集方法、装置、设备及存储介质 | |
CN112667469A (zh) | 一种多元化大数据统计报告自动生成方法、系统及可读介质 | |
CN111752838A (zh) | 问题排查方法、装置、服务器及存储介质 | |
CN107294766B (zh) | 一种集中管控的方法及系统 | |
CN115757318A (zh) | 日志查询方法、装置、存储介质以及电子设备 | |
CN115237399A (zh) | 用于采集数据的方法、存储介质、处理器及工程车辆 | |
KR100665132B1 (ko) | 이질의 로그를 정형화하는 방법 | |
CN107066538B (zh) | 一种数据统计的方法及装置 | |
CN112100661B (zh) | 一种数据处理方法及装置 | |
CN117494702B (zh) | 一种结合rpa和ai的数据推送方法及系统 | |
CN113609162B (zh) | 操作记录的查询方法、装置、服务器及存储介质 | |
CN118378263A (zh) | 基于系统日志的安全防护方法、防护装置和安全防护系统 | |
CN118277409A (zh) | 运行日志的处理方法、装置、存储介质以及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20231103 |