CN114817208A - 一种多源异构政务数据组织表示与融合管理模型构建方法 - Google Patents
一种多源异构政务数据组织表示与融合管理模型构建方法 Download PDFInfo
- Publication number
- CN114817208A CN114817208A CN202210428426.1A CN202210428426A CN114817208A CN 114817208 A CN114817208 A CN 114817208A CN 202210428426 A CN202210428426 A CN 202210428426A CN 114817208 A CN114817208 A CN 114817208A
- Authority
- CN
- China
- Prior art keywords
- data
- metadata
- government affair
- model
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004927 fusion Effects 0.000 title claims abstract description 22
- 230000008520 organization Effects 0.000 title claims abstract description 10
- 238000010276 construction Methods 0.000 title claims description 6
- 238000000034 method Methods 0.000 claims abstract description 15
- 238000007726 management method Methods 0.000 claims description 24
- 238000004458 analytical method Methods 0.000 claims description 18
- 238000013499 data model Methods 0.000 claims description 8
- 238000012795 verification Methods 0.000 claims description 8
- 238000004140 cleaning Methods 0.000 claims description 7
- 238000013500 data storage Methods 0.000 claims description 6
- 238000012098 association analyses Methods 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 4
- 206010033799 Paralysis Diseases 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/211—Schema design and management
- G06F16/212—Schema design and management with details for data modelling support
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
- H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Business, Economics & Management (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Tourism & Hospitality (AREA)
- Human Resources & Organizations (AREA)
- General Health & Medical Sciences (AREA)
- Educational Administration (AREA)
- Strategic Management (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Storage Device Security (AREA)
Abstract
本发明提供一种多源异构政务数据组织表示与融合管理模型构建方法,属于数据处理领域,该多源异构政务数据组织表示与融合管理模型构建方法具体步骤为建立模型数据库,获取访问任务,对数据模型的初步构建、对数据进行分类、解析元数据的查询使用关系、取出元数据、对不合格的数据进行清洗,对数据模型进行完善、对数据进行标识、对标识后的数据加密、对机密的数据关联性分析、对关联性分析信息构建模型,将完善的数据进行储存。本发明在网络瘫痪时能够对重要数据进行随时储存,且效率高。
Description
技术领域
本发明数据处理技术领域,尤其涉及一种多源异构政务数据组织表示与融合管理模型构建方法。
背景技术
政务指与政府相关的事务性工作,当某项政务商议完成,需要对该政务进行发布,使人民群众和政府办事人员获知。随着互联网技术的发展,政务的发布已由最初的纸质文件发布扩展到了网络发布。政府部门经过长期发展,记录了大量相关部门的政务数据,这些都是政府部门进行管理的重要依据。政务数据涉及的数据量大、数据类型多、来源广泛、数据格式复杂,随着大数据和互联网的发展,政府、社会对挖掘各部门领域的政务数据价值的需求越来越大。由于政务数据也分散于各相关部门的不同数据库系统中,政务数据整体呈现海量、无序、多源异构等特点。
但是,现有的技术存在着效率低和瘫痪时不方便对数据储存的问题。
因此,发明一种多源异构政务数据组织表示与融合管理模型构建方法显得非常必要。
发明内容
为了解决上述技术问题,本发明提供一种多源异构政务数据组织表示与融合管理模型构建方法,以解决现有的技术存在着效率低和瘫痪时不方便对数据储存的问题,一种多源异构政务数据组织表示与融合管理模型构建方法具体包括以下步骤:
步骤一:建立模型数据库,获取政务大数据,在云端建立用于储存多源异构的数据库;
步骤二:获取访问任务,获取每个访问任务的开始时间;
步骤三:对数据模型的初步构建;
第一步:对数据进行分类,对元数据中质量校验合格的元数据配置以及校验不合格的元数据进行分类;
第二步:解析元数据的查询使用关系,对元数据进行解析查询使用关系,并生成sql语句;
第三步:取出元数据,取出可信权重高的元数据及元数据查询使用关系构建融合管理模型;
第四步:对不合格的数据进行清洗,对不合格元数据进行清洗处理;
步骤四:对数据模型进行完善;
第一步:对数据进行标识,对每个数据进行标识处理;
第二步:对标识后的数据加密,对每个标识处理的数据进行加密工作;
第三步:对机密的数据关联性分析,将加密后的数据进行关联性分析;
第四步:对关联性分析信息构建模型,将没用的数据过滤掉后形成完善的融合管理模型;
步骤五:将完善的数据进行储存,将完善后融合管理模型在云端进行储存,同时还可以将重要数据随时储存至数据储存器内。
优选的,在步骤三中,所述的第一步中的对数据进行分类,通过预存在云端服务器的算法模型对指标关联信息进行整合,生成比对图像,从而完成政务信息的比对,以便实现对合格以及不合格的元数据分类。
优选的,在步骤四中,所述的第二步中的对标识后的数据进行加密,使用密钥解密加密的属性集,得到数据明文,通过加密函数校验数据明文的完整性。
优选的,在步骤四中,所述的第三步中的对机密的数据关联性分析,用于对标识后的信息进行梳理同时进行数据加密,接着政务信息与政务事项进行关联性分析。
优选的,在步骤四中,所述的第四步中对关联性分析信息构建模型,根据关联性分析后的目录及信息目录中每一个元数据构建呈信息构建模型。
与现有技术相比,本发明具有如下有益效果:由于本发明的一种多源异构政务数据组织表示与融合管理模型构建方法广泛应用于数据处理领域。本发明在网络瘫痪时能够对重要数据进行随时储存,且效率高。
附图说明
图1是多源异构政务数据组织表示与融合管理模型构建方法流程图。
图2是对数据模型的初步构建流程图。
图3是对数据模型进行完善流程图。
具体实施方式
以下结合附图对本发明做进一步描述:
图中:
如附图1至图3所示
一种多源异构政务数据组织表示与融合管理模型构建方法具体包括以下步骤:
S101:建立模型数据库,获取政务大数据,在云端建立用于储存多源异构的数据库;
S102:获取访问任务,获取每个访问任务的开始时间;
S103:对数据模型的初步构建;
S301:对数据进行分类,对元数据中质量校验合格的元数据配置以及校验不合格的元数据进行分类;
S302:解析元数据的查询使用关系,对元数据进行解析查询使用关系,并生成sql语句;
S303:取出元数据,取出可信权重高的元数据及元数据查询使用关系构建融合管理模型;
S304:对不合格的数据进行清洗,对不合格元数据进行清洗处理;
S104:对数据模型进行完善;
S401:对数据进行标识,对每个数据进行标识处理;
S402:对标识后的数据加密,对每个标识处理的数据进行加密工作;
S403:对机密的数据关联性分析,将加密后的数据进行关联性分析;
S404:对关联性分析信息构建模型,将没用的数据过滤掉后形成完善的融合管理模型;
S105:将完善的数据进行储存,将完善后融合管理模型在云端进行储存,同时还可以将重要数据随时储存至数据储存器内。
优选的,在S103中,所述的S301中的对数据进行分类,通过预存在云端服务器的算法模型对指标关联信息进行整合,生成比对图像,从而完成政务信息的比对,以便实现对合格以及不合格的元数据分类。
优选的,在S104中,所述的S402中的对标识后的数据进行加密,使用密钥解密加密的属性集,得到数据明文,通过加密函数校验数据明文的完整性。
优选的,在S104中,所述的S403中的对机密的数据关联性分析,用于对标识后的信息进行梳理同时进行数据加密,接着政务信息与政务事项进行关联性分析。
优选的,在S104中,所述的S404中对关联性分析信息构建模型,根据关联性分析后的目录及信息目录中每一个元数据构建呈信息构建模型。
具体实施实例
获取政务大数据,在云端建立用于储存多源异构的数据库,获取每个访问任务的开始时间,对元数据中质量校验合格的元数据配置以及校验不合格的元数据进行分类,对元数据进行解析查询使用关系,并生成sql语句,取出可信权重高的元数据及元数据查询使用关系构建融合管理模型,对不合格元数据进行清洗处理,对每个数据进行标识处理,对每个标识处理的数据进行加密工作,将加密后的数据进行关联性分析,将没用的数据过滤掉后形成完善的融合管理模型,将完善后融合管理模型在云端进行储存,同时还可以将重要数据随时储存至数据储存器内。
利用本发明所述的技术方案,或本领域的技术人员在本发明技术方案的启发下,设计出类似的技术方案,而达到上述技术效果的,均是落入本发明的保护范围。
Claims (5)
1.一种多源异构政务数据组织表示与融合管理模型构建方法,其特征在于,该种多源异构政务数据组织表示与融合管理模型构建方法具体包括以下步骤:
步骤一:建立模型数据库,获取政务大数据,在云端建立用于储存多源异构的数据库;
步骤二:获取访问任务,获取每个访问任务的开始时间;
步骤三:对数据模型的初步构建;
第一步:对数据进行分类,对元数据中质量校验合格的元数据配置以及校验不合格的元数据进行分类;
第二步:解析元数据的查询使用关系,对元数据进行解析查询使用关系,并生成sql语句;
第三步:取出元数据,取出可信权重高的元数据及元数据查询使用关系构建融合管理模型;
第四步:对不合格的数据进行清洗,对不合格元数据进行清洗处理;
步骤四:对数据模型进行完善;
第一步:对数据进行标识,对每个数据进行标识处理;
第二步:对标识后的数据加密,对每个标识处理的数据进行加密工作;
第三步:对机密的数据关联性分析,将加密后的数据进行关联性分析;
第四步:对关联性分析信息构建模型,将没用的数据过滤掉后形成完善的融合管理模型;
步骤五:将完善的数据进行储存,将完善后融合管理模型在云端进行储存,同时还可以将重要数据随时储存至数据储存器内。
2.如权利要求1所述的多源异构政务数据组织表示与融合管理模型构建方法,其特征在于,在步骤三中,所述的第一步中的对数据进行分类,通过预存在云端服务器的算法模型对指标关联信息进行整合,生成比对图像,从而完成政务信息的比对,以便实现对合格以及不合格的元数据分类。
3.如权利要求1所述的多源异构政务数据组织表示与融合管理模型构建方法,其特征在于,在步骤四中,所述的第二步中的对标识后的数据进行加密,使用密钥解密加密的属性集,得到数据明文,通过加密函数校验数据明文的完整性。
4.如权利要求1所述的多源异构政务数据组织表示与融合管理模型构建方法,其特征在于,在步骤四中,所述的第三步中的对机密的数据关联性分析,用于对标识后的信息进行梳理同时进行数据加密,接着政务信息与政务事项进行关联性分析。
5.如权利要求1所述的多源异构政务数据组织表示与融合管理模型构建方法,其特征在于,在步骤四中,所述的第四步中对关联性分析信息构建模型,根据关联性分析后的目录及信息目录中每一个元数据构建呈信息构建模型。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210428426.1A CN114817208A (zh) | 2022-04-22 | 2022-04-22 | 一种多源异构政务数据组织表示与融合管理模型构建方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210428426.1A CN114817208A (zh) | 2022-04-22 | 2022-04-22 | 一种多源异构政务数据组织表示与融合管理模型构建方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114817208A true CN114817208A (zh) | 2022-07-29 |
Family
ID=82506155
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210428426.1A Pending CN114817208A (zh) | 2022-04-22 | 2022-04-22 | 一种多源异构政务数据组织表示与融合管理模型构建方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114817208A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115269277A (zh) * | 2022-09-27 | 2022-11-01 | 山东恒辉软件有限公司 | 一种智慧实验室数据协同综合管理系统 |
-
2022
- 2022-04-22 CN CN202210428426.1A patent/CN114817208A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115269277A (zh) * | 2022-09-27 | 2022-11-01 | 山东恒辉软件有限公司 | 一种智慧实验室数据协同综合管理系统 |
CN115269277B (zh) * | 2022-09-27 | 2022-12-27 | 山东恒辉软件有限公司 | 一种智慧实验室数据协同综合管理系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106503574B (zh) | 区块链安全存储方法 | |
US11036771B2 (en) | Data processing systems for generating and populating a data inventory | |
US10791150B2 (en) | Data processing and scanning systems for generating and populating a data inventory | |
CN112732811A (zh) | 一种数据开放平台 | |
US9461890B1 (en) | Delegation of data management policy in an information management system | |
US20190050435A1 (en) | Object data association index system and methods for the construction and applications thereof | |
CN112231283B (zh) | 基于多源异构数据统一实体标识码的生成管理方法及系统 | |
CN110852725A (zh) | 一种基于大数据的项目申报系统 | |
CN111198969A (zh) | 一种基于网络大数据的经济信息咨询系统和方法 | |
CN115617776A (zh) | 一种数据管理系统及方法 | |
CN111598542A (zh) | 一种按进度存储的电力生产项目档案管理系统 | |
CN114817208A (zh) | 一种多源异构政务数据组织表示与融合管理模型构建方法 | |
CN116415203A (zh) | 一种基于大数据的政务信息智能融合系统及方法 | |
CN111538720A (zh) | 电力行业基础数据清理的方法及系统 | |
Werbrouck et al. | ConSolid: A federated ecosystem for heterogeneous multi-stakeholder projects | |
CN111221967A (zh) | 一种基于区块链架构的语言数据分类存储系统 | |
CN115391432A (zh) | 司法大数据处理方法、系统、服务器及存储介质 | |
CN115660615A (zh) | 项目自动辅助系统及可视化方法 | |
CN115239060A (zh) | 基于大数据分析的适航审定风险评定系统及其方法 | |
CN114140086A (zh) | 一种基于云平台的建设工程项目文件管理系统 | |
CN113268451A (zh) | 数字档案管理系统及方法 | |
CN109491800B (zh) | 一种基于产品结构的档案推送系统及档案推送方法 | |
CN115328988B (zh) | 一种基于大数据和互联网的信息管理方法 | |
Liu | Research on Human Resource Management Information System Based on Big Data Blockchain Architecture | |
CN116707834B (zh) | 一种基于云存储的分布式大数据取证与分析平台 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |