CN114756567A - 基于大数据技术的智慧政务服务分析平台 - Google Patents
基于大数据技术的智慧政务服务分析平台 Download PDFInfo
- Publication number
- CN114756567A CN114756567A CN202210245809.5A CN202210245809A CN114756567A CN 114756567 A CN114756567 A CN 114756567A CN 202210245809 A CN202210245809 A CN 202210245809A CN 114756567 A CN114756567 A CN 114756567A
- Authority
- CN
- China
- Prior art keywords
- data
- analysis
- unit
- big data
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 65
- 238000005516 engineering process Methods 0.000 title claims abstract description 31
- 238000007405 data analysis Methods 0.000 claims abstract description 23
- 230000000007 visual effect Effects 0.000 claims abstract description 18
- 238000011161 development Methods 0.000 claims abstract description 17
- 238000013500 data storage Methods 0.000 claims abstract description 16
- 238000004364 calculation method Methods 0.000 claims abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 13
- 238000007418 data mining Methods 0.000 claims abstract description 12
- 101100462143 Nicotiana tabacum OLPA gene Proteins 0.000 claims abstract description 6
- 238000013523 data management Methods 0.000 claims abstract description 5
- 238000013499 data model Methods 0.000 claims abstract description 4
- 238000007726 management method Methods 0.000 claims description 13
- 238000000034 method Methods 0.000 claims description 13
- 230000010354 integration Effects 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000013075 data extraction Methods 0.000 claims description 3
- 230000004927 fusion Effects 0.000 claims description 3
- 230000003993 interaction Effects 0.000 claims description 3
- 238000005457 optimization Methods 0.000 claims description 3
- 238000013468 resource allocation Methods 0.000 claims description 3
- 238000005065 mining Methods 0.000 claims description 2
- 238000004220 aggregation Methods 0.000 claims 1
- 230000002776 aggregation Effects 0.000 claims 1
- 230000008569 process Effects 0.000 description 6
- 238000013461 design Methods 0.000 description 3
- 230000008520 organization Effects 0.000 description 3
- 238000011084 recovery Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000004886 process control Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000013439 planning Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000000547 structure data Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- 239000011800 void material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1464—Management of the backup or restore process for networked environments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2264—Multidimensional index structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2465—Query processing support for facilitating data mining operations in structured databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2468—Fuzzy queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/248—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/283—Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
- G06F16/9024—Graphs; Linked lists
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/90335—Query processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6227—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database where protection concerns the structure of data, e.g. records, types, queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/80—Database-specific techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2216/00—Indexing scheme relating to additional aspects of information retrieval not explicitly covered by G06F16/00 and subgroups
- G06F2216/03—Data mining
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2221/00—Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/21—Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/2141—Access rights, e.g. capability lists, access control lists, access tables, access matrices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Business, Economics & Management (AREA)
- Mathematical Physics (AREA)
- Fuzzy Systems (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Probability & Statistics with Applications (AREA)
- Health & Medical Sciences (AREA)
- Development Economics (AREA)
- Primary Health Care (AREA)
- Computing Systems (AREA)
- Economics (AREA)
- Automation & Control Theory (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Educational Administration (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Bioethics (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了基于大数据技术的智慧政务服务分析平台，基于大数据技术的智慧政务服务分析平台是一款汇集政务大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性政务大数据分析平台。它提供了基于Hadoop存储、数据立方体与计算的OLPA可视化分析功能，使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析，并以多种可视化方式展示分析结果。该平台主要包括的数据采集和共享单元、海量数据存储管理单元、数据计算分析单元、数据关联集中单元、大数据分析挖掘单元、企业/个人图谱单元和应用需求的开发单元；本基于大数据技术的智慧政务服务分析平台具安全性高、方便快捷、工作效率高的优点。
Description
技术领域
本发明涉及政务服务技术领域，具体为基于大数据技术的智慧政务服务分析平台。
背景技术
基于大数据技术的智慧政务服务分析平台是一款汇集政务大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性政务大数据分析平台。它提供了基于hadoop存储、数据立方体与计算的OLPA可视化分析功能，使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析，并以多种可视化方式展示分析结果。
国内提供大数据平台架构的组织机构及产品总体上来说不是很多，主要也是由于大数据开发偏底层，技术难度大、对政务服务应用场景和业务流程研究不深等原因限制了它的普及程度和应用面。目前国内众多基于大数据技术的政务服务分析平台也主要面临和存在以下问题：技术与业务相分离，导致展示分析内容空洞、被统计分析的数据缺乏统一规划，后续分析利用价值不高、被分析的数据缺乏实际应用场景支撑、数据展示的效果不足以凸显能力、现有数据可视化方式缺少故事性、缺少面向实际操作人员高效、便捷的可视化平台工具、安全问题，基于以上问题特推出此项发明。
发明内容
本发明的目的在于提供基于大数据技术的智慧政务服务分析平台，具有安全性高、方便快捷、工作效率高的优点，解决了现有技术中的问题。
为实现上述目的，本发明提供如下技术方案：基于大数据技术的智慧政务服务分析平台是一款汇集政务大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性政务大数据分析平台。它提供了基于Hadoop存储、数据立方体与计算的OLPA可视化分析功能，使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析，并以多种可视化方式展示分析结果。该平台主要包括的数据采集和共享单元、海量数据存储管理单元、数据计算分析单元、数据关联集中单元、大数据分析挖掘单元、企业/个人图谱单元和应用需求的开发单元。
优选的，数据采集和共享单元：通过对各个委办局的指定业务数据进行汇聚，将分散的数据进行物理集中和整合管理，并存储到大数据存储单元，其包括Sqoop数据抽取工具、Storm实时数据获取工具、HDFS文件传输工具、API接口Restful服务工具等，为实现对数据的分析提供数据支撑。将为跨机构的各类业务系统之间的业务协同，提供统一和集中的数据交互共享服务。包括数据交换、共享和ETL等功能。
优选的，海量数据存储管理单元：大数据平台从各个委办局的业务系统里抽取的数据量巨大，数据类型繁杂，数据需要持久化的存储和访问。不论是结构化数据、半结构化数据，还是非结构化数据，经过数据存储引擎进行建模后，持久化保存在存储系统上。存储系统要具备高可靠性、快速查询能力。
优选的，数据计算分析单元：包括海量数据的离线计算能力、高效即席数据查询需求和低时延的实时计算能力。随着数据量的不断增加，需要数据平台具备线性扩展能力和强大的分析能力，支撑不断增长的数据量，满足未来政务各类业务工作的发展需要，确保业务系统的不间断且有效地工作。
优选的，数据关联集中单元：对集中存储在数据管理平台的数据，通过正确的技术手段将这些离散的数据进行数据关联，即：通过分析数据间的业务关系，建立关键数据之间的关联关系，将离散的数据串联起来形成能表达更多含义信息集合，以形成基础库、业务库、知识库等数据集。
优选的，大数据分析挖掘单元：通过对海量的政务业务大数据进行分析与挖掘，辅助政务决策，提供资源配置分析优化等辅助决策功能，促进民生的发展。采用新型MPP数据库+Hadoop的融合架构，使用MPP处理PB级别的、高质量的结构化数据，同时为应用提供丰富的SQL支持能力;使用Hadoop处理海量半结构化、非结构化数据，从而满足用户多种数据的处理需求。
优选的，企业/个人图谱单元：包括HDFS文件系统、图数据库引擎及应用层，所述HDFS文件系统上存储有HBASE数据库和Solrcloud索引，所述图数据库引擎包括数据及索引存储层、数据库层及Client API层，所述数据及索引存储层与所述HBASE数据库和Solrcloud索引相连，所述Client API层与所述应用层相连，所述应用层用于提供海量关系运算、海量检索、关系关联、手工绘制、GIS整合、实时关系运算、关系扩展、特征查询、属性收集及图分析。
优选的，应用开发单元：依靠集中数据集，结合政务服务实际业务需要，快速开发创新应用，支撑实际分析业务需要。
与现有技术相比，本发明的有益效果如下：
1.本基于大数据技术的智慧政务服务分析平台采用基于人工智能的搜索引擎，方便了更加高效的搜索，并且支持模糊检索，语义检索，并提供高安全性的查询权限管理，可根据不同的机构、级别设置不同查询权限，采用政务数据综合管理能力，数据互联互通，实现了各机构数据统一汇总，方便了第一时间掌握全面动态信息，采用政务数据资源的管理能力，可以有效的对各种异构数据有效的管理，政府可以逐步整合和管控各种社会数据资源，为大数据产业的发展打好数据资源基础。
2.本基于大数据技术的智慧政务服务分析平台采用完善的大数据分析基础运行环境，集成了完整的Hadoop系统，可以为各种大数据应用分析系统，提供统一完善的运行环境，并有效保障信息安全和在基础软件层面保证系统的互联互通，采用安全系统，保障了用户查询信息时用户信息的绝对安全，采用全程管控功能，减少了网络犯罪率，采用强大的容灾备份功能，对原有政务系统的数据，可以做到无缝的全自动灾备还原，减少了更换系统时导入冗杂服务信息的繁琐过程。
附图说明
图1为本发明基于大数据技术的智慧政务服务分析平台的整体结构示意图；
图2为本发明基于大数据技术的智慧政务服务分析平台的总体框架；
图3为本发明基于大数据技术的智慧政务服务分析平台的区块划分示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例，基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，需要理解的是，术语“上”、“下”、“前”、“后”、“左”、“右”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
实施例1：
请参阅图1、2、3，基于大数据技术的智慧政务服务分析平台,基于大数据技术的智慧政务服务分析平台是一款汇集政务大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性政务大数据分析平台。它提供了基于Hadoop存储、数据立方体与计算的OLPA可视化分析功能，使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析，并以多种可视化方式展示分析结果。该平台主要包括的数据采集和共享单元、海量数据存储管理单元、数据计算分析单元、数据关联集中单元、大数据分析挖掘单元、企业/个人图谱单元和应用需求的开发单元，其中数据采集和共享单元：通过对各个委办局的指定业务数据进行汇聚，将分散的数据进行物理集中和整合管理，并存储到大数据存储单元，其包括Sqoop数据抽取工具、Storm实时数据获取工具、HDFS文件传输工具、API接口Restful服务工具等，为实现对数据的分析提供数据支撑。将为跨机构的各类业务系统之间的业务协同，提供统一和集中的数据交互共享服务。包括数据交换、共享和ETL等功能，海量数据存储管理单元：大数据平台从各个委办局的业务系统里抽取的数据量巨大，数据类型繁杂，数据需要持久化的存储和访问。不论是结构化数据、半结构化数据，还是非结构化数据，经过数据存储引擎进行建模后，持久化保存在存储系统上。存储系统要具备高可靠性、快速查询能力，数据计算分析单元：包括海量数据的离线计算能力、高效即席数据查询需求和低时延的实时计算能力。随着数据量的不断增加，需要数据平台具备线性扩展能力和强大的分析能力，支撑不断增长的数据量，满足未来政务各类业务工作的发展需要，确保业务系统的不间断且有效地工作，数据关联集中单元：对集中存储在数据管理平台的数据，通过正确的技术手段将这些离散的数据进行数据关联，即：通过分析数据间的业务关系，建立关键数据之间的关联关系，将离散的数据串联起来形成能表达更多含义信息集合，以形成基础库、业务库、知识库等数据集。
具体的，采用基于人工智能的搜索引擎，方便了更加高效的搜索，并且支持模糊检索，语义检索，并提供高安全性的查询权限管理，可根据不同的机构、级别设置不同查询权限，采用政务数据综合管理能力，数据互联互通，实现了各机构数据统一汇总，方便了第一时间掌握全面动态信息，采用政务数据资源的管理能力，可以有效的对各种异构数据有效的管理，政府可以逐步整合和管控各种社会数据资源，为大数据产业的发展打好数据资源基础。
实施例2：
请参阅图1、2、3，基于大数据技术的智慧政务服务分析平台，基于大数据技术的智慧政务服务分析平台是一款汇集政务大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性政务大数据分析平台。它提供了基于Hadoop存储、数据立方体与计算的OLPA可视化分析功能，使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析，并以多种可视化方式展示分析结果。该平台主要包括的数据采集和共享单元、海量数据存储管理单元、数据计算分析单元、数据关联集中单元、大数据分析挖掘单元、企业/个人图谱单元和应用需求的开发单元，大数据分析挖掘单元：通过对海量的政务业务大数据进行分析与挖掘，辅助政务决策，提供资源配置分析优化等辅助决策功能，促进民生的发展。采用新型MPP数据库+Hadoop的融合架构，使用MPP处理PB级别的、高质量的结构化数据，同时为应用提供丰富的SQL支持能力;使用Hadoop处理海量半结构化、非结构化数据，从而满足用户多种数据的处理需求，企业/个人图谱单元：包括HDFS文件系统、图数据库引擎及应用层，所述HDFS文件系统上存储有HBASE数据库和Solrcloud索引，所述图数据库引擎包括数据及索引存储层、数据库层及Client API层，所述数据及索引存储层与所述HBASE数据库和Solrcloud索引相连，所述Client API层与所述应用层相连，所述应用层用于提供海量关系运算、海量检索、关系关联、手工绘制、GIS整合、实时关系运算、关系扩展、特征查询、属性收集及图分析，应用开发单元：依靠集中数据集，结合政务服务实际业务需要，快速开发创新应用，支撑实际分析业务需要。
具体的，采用完善的大数据分析基础运行环境，集成了完整的Hadoop系统，可以为各种大数据应用分析系统，提供统一完善的运行环境，并有效保障信息安全和在基础软件层面保证系统的互联互通，采用安全系统，保障了用户查询信息时用户信息的绝对安全，采用全程管控功能，减少了网络犯罪率，采用强大的容灾备份功能，对原有政务系统的数据，可以做到无缝的全自动灾备还原，减少了更换系统时导入冗杂服务信息的繁琐过程。
工作原理：本发明基于大数据技术的智慧政务服务分析平台，通过大数据技术对公众参与政务服务的各种信息进行数据实时分析, 由数据的“收集者”转变为“分析者”,挖掘出公众的潜在需求, 主动为公众推送与其关联度高、时效性强的个性化信息或服务,从而提升政务服务的能力和质量,获得最大化的用户满意度。同时，采用大数据技术对海量政务数据进行信息研判,从中识别抽取出有价值的隐含信息，并利用这些信息为政府各部门重大政策、法规的制定提供决策依据。“让数据说话”使得政府的决策更有据可依、更智能、更科学, 决策实施过程中出现的问题可实时监测, 从而对决策进行调控和完善。利用大数据技术采集公众浏览政务网站的停留时间、浏览内容、点击行为等要素进行分析,可挖掘公众的使用习惯和信息获取需求,有针对性地发布信息。对网站的总体布局、页面设计、栏目分类以及网站的服务功能进行优化改良,不仅可以提升政务网站的形象,还可以吸引更多的公众访问政务网站, 提高政务信息的利用率。例如“大数据+政务服务”中某项网上办理业务审核通过率低,通过大数据技术分析得出主要是因为办理流程不合理、系统设计不科学、审批人员培训不到位等因素导致的,就可针对发现的问题有针对性地改进与完善网上办理业务。利用大数据技术采集公众浏览政务网站的停留时间、浏览内容、点击行为等要素进行分析,可挖掘公众的使用习惯和信息获取需求,有针对性地发布信息。对网站的总体布局、页面设计、栏目分类以及网站的服务功能进行优化改良,不仅可以提升政务网站的形象,还可以吸引更多的公众访问政务网站,提高政务信息的利用率。例如某政务服务网站,由于网页数量繁多,其中某些网页出现故障,导致公众无法访问,网页信息利用率实际为零,通过大数据技术挖掘出此类“僵尸”页面并进行处理,确保政府网站正常提供服务。
以上显示和描述了本发明的基本原理和主要特征和本发明的优点，对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明；因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内，不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
此外，应当理解，虽然本说明书按照实施方式加以描述，但并非每个实施方式仅包含一个独立的技术方案，说明书的这种叙述方式仅仅是为清楚起见，本领域技术人员应当将说明书作为一个整体，各实施例中的技术方案也可以经适当组合，形成本领域技术人员可以理解的其他实施方式。
Claims (8)
1.基于大数据技术的智慧政务服务分析平台，其特征在于：基于大数据技术的智慧政务服务分析平台是一款汇集政务大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性政务大数据分析平台，它提供了基于Hadoop存储、数据立方体与计算的OLPA可视化分析功能，使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析，并以多种可视化方式展示分析结果；该平台主要包括的数据采集和共享单元、海量数据存储管理单元、数据计算分析单元、数据关联集中单元、大数据分析挖掘单元、企业/个人图谱单元和应用需求的开发单元。
2.根据权利要求1所述的基于大数据技术的智慧政务服务分析平台，其特征在于：数据采集和共享单元：通过对各个委办局的指定业务数据进行汇聚，将分散的数据进行物理集中和整合管理，并存储到大数据存储单元，其包括Sqoop数据抽取工具、Storm实时数据获取工具、HDFS文件传输工具、API接口Restful服务工具等，为实现对数据的分析提供数据支撑；将为跨机构的各类业务系统之间的业务协同，提供统一和集中的数据交互共享服务，包括数据交换、共享和ETL等功能。
3.根据权利要求1所述的基于大数据技术的智慧政务服务分析平台，其特征在于：海量数据存储管理单元：大数据平台从各个委办局的业务系统里抽取的数据量巨大，数据类型繁杂，数据需要持久化的存储和访问，不论是结构化数据、半结构化数据，还是非结构化数据，经过数据存储引擎进行建模后，持久化保存在存储系统上，存储系统要具备高可靠性、快速查询能力。
4.根据权利要求1所述的基于大数据技术的智慧政务服务分析平台，其特征在于：数据计算分析单元：包括海量数据的离线计算能力、高效即席数据查询需求和低时延的实时计算能力，随着数据量的不断增加，需要数据平台具备线性扩展能力和强大的分析能力，支撑不断增长的数据量，满足未来政务各类业务工作的发展需要，确保业务系统的不间断且有效地工作。
5.根据权利要求1所述的基于大数据技术的智慧政务服务分析平台，其特征在于：数据关联集中单元：对集中存储在数据管理平台的数据，通过正确的技术手段将这些离散的数据进行数据关联，即：通过分析数据间的业务关系，建立关键数据之间的关联关系，将离散的数据串联起来形成能表达更多含义信息集合，以形成基础库、业务库、知识库等数据集。
6.根据权利要求1所述的基于大数据技术的智慧政务服务分析平台，其特征在于：大数据分析挖掘单元：通过对海量的政务业务大数据进行分析与挖掘，辅助政务决策，提供资源配置分析优化等辅助决策功能，促进民生的发展；采用新型MPP数据库+Hadoop的融合架构，使用MPP处理PB级别的、高质量的结构化数据，同时为应用提供丰富的SQL支持能力;使用Hadoop处理海量半结构化、非结构化数据，从而满足用户多种数据的处理需求。
7.根据权利要求1所述的基于大数据技术的智慧政务服务分析平台，其特征在于：企业/个人图谱单元：包括HDFS文件系统、图数据库引擎及应用层，所述HDFS文件系统上存储有HBASE数据库和Solrcloud索引，所述图数据库引擎包括数据及索引存储层、数据库层及Client API层，所述数据及索引存储层与所述HBASE数据库和Solrcloud索引相连，所述Client API层与所述应用层相连，所述应用层用于提供海量关系运算、海量检索、关系关联、手工绘制、GIS整合、实时关系运算、关系扩展、特征查询、属性收集及图分析。
8.根据权利要求1所述的基于大数据技术的智慧政务服务分析平台，其特征在于：应用开发单元：依靠集中数据集，结合政务服务实际业务需要，快速开发创新应用，支撑实际分析业务需要。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210245809.5A CN114756567A (zh) | 2022-03-14 | 2022-03-14 | 基于大数据技术的智慧政务服务分析平台 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210245809.5A CN114756567A (zh) | 2022-03-14 | 2022-03-14 | 基于大数据技术的智慧政务服务分析平台 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114756567A true CN114756567A (zh) | 2022-07-15 |
Family
ID=82326530
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210245809.5A Pending CN114756567A (zh) | 2022-03-14 | 2022-03-14 | 基于大数据技术的智慧政务服务分析平台 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114756567A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115409297A (zh) * | 2022-11-02 | 2022-11-29 | 联通(广东)产业互联网有限公司 | 一种政务服务流程优化方法、系统及电子设备 |
| CN116821553A (zh) * | 2023-08-30 | 2023-09-29 | 山东尚可网络科技有限公司 | 一种基于数据共享的智慧政务公开管理平台 |
-
2022
- 2022-03-14 CN CN202210245809.5A patent/CN114756567A/zh active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115409297A (zh) * | 2022-11-02 | 2022-11-29 | 联通(广东)产业互联网有限公司 | 一种政务服务流程优化方法、系统及电子设备 |
| CN116821553A (zh) * | 2023-08-30 | 2023-09-29 | 山东尚可网络科技有限公司 | 一种基于数据共享的智慧政务公开管理平台 |
| CN116821553B (zh) * | 2023-08-30 | 2024-05-17 | 山东尚可网络科技有限公司 | 一种基于数据共享的智慧政务公开管理平台 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104820670B (zh) | 一种电力信息大数据的采集和存储方法 | |
| CN106934014B (zh) | 一种基于Hadoop的网络数据挖掘与分析平台及其方法 | |
| Tuomaala et al. | Evolution of library and information science, 1965–2005: Content analysis of journal articles | |
| CN114756567A (zh) | 基于大数据技术的智慧政务服务分析平台 | |
| CN104915456A (zh) | 一种基于数据分析系统下的海量用电数据挖掘方法 | |
| CN103678665A (zh) | 一种基于数据仓库的异构大数据整合方法和系统 | |
| CN102033910A (zh) | 一种基于多数据源的企业搜索引擎技术 | |
| CN111881204A (zh) | 一种大数据可视化平台 | |
| Zhang | Application of data mining technology in digital library. | |
| CN112732680A (zh) | 一种数据仓库设计方法 | |
| CN105007314A (zh) | 面向海量读者阅读数据的大数据处理系统 | |
| Chen et al. | Metadata-based information resource integration for research management | |
| CN108959356A (zh) | 一种智能配用电大数据应用系统数据集市建立方法 | |
| CN115858829A (zh) | 一种基于算力网络的多源异构环境数据资产构建方法 | |
| Tong et al. | Multimedia network public opinion supervision prediction algorithm based on big data | |
| CN117076463B (zh) | 一种智慧城市多源数据汇聚存储系统 | |
| CN111353085A (zh) | 一种基于特征模型的云挖掘分析网络舆情方法 | |
| CN112269913A (zh) | 一种企业级全量数据智能搜索实现方法及系统 | |
| Yu et al. | A police big data analytics platform: framework and implications | |
| Ma | The function of the establishment of digital archives in colleges and universities to the optimization of resources | |
| Zhang et al. | A Big Data based Decision Framework for Public Management and Service in Tourism | |
| KR20210045172A (ko) | 축산 질병 발생 분석을 위한 빅 데이터 관리 및 시스템 | |
| Wu et al. | The design of distributed power big data analysis framework and its application in residential electricity analysis | |
| Zhang et al. | Intelligent big data service for meteorological cloud platform | |
| Liu | Research on knowledge management technology of aerospace engineering based on big data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication |