CN114066170A - 一种面向政府数据开放共享的问题反馈处理系统及方法 - Google Patents

一种面向政府数据开放共享的问题反馈处理系统及方法 Download PDF

Info

Publication number
CN114066170A
CN114066170A CN202111237242.9A CN202111237242A CN114066170A CN 114066170 A CN114066170 A CN 114066170A CN 202111237242 A CN202111237242 A CN 202111237242A CN 114066170 A CN114066170 A CN 114066170A
Authority
CN
China
Prior art keywords
data
work order
government
quality
source unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111237242.9A
Other languages
English (en)
Inventor
林东
刘志徽
檀祖明
韦家醒
岑洁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangxi Zhongke Shuguang Cloud Computing Co ltd
Guangxi Guigang Zhongke Shuguang Cloud Computing Co ltd
Original Assignee
Guangxi Zhongke Shuguang Cloud Computing Co ltd
Guangxi Guigang Zhongke Shuguang Cloud Computing Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangxi Zhongke Shuguang Cloud Computing Co ltd, Guangxi Guigang Zhongke Shuguang Cloud Computing Co ltd filed Critical Guangxi Zhongke Shuguang Cloud Computing Co ltd
Priority to CN202111237242.9A priority Critical patent/CN114066170A/zh
Publication of CN114066170A publication Critical patent/CN114066170A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06313—Resource planning in a project environment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/176—Support for shared access to files; File sharing support
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/258—Data format conversion from or to a database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/26—Government or public services

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Human Resources & Organizations (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Educational Administration (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Game Theory and Decision Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种面向政府数据开放共享的问题反馈处理系统及方法。应用该系统，通过问题数据获取模块，对政府数据进行质量检测，将未通过质量检测的政府数据作为问题数据存储于问题工单库，通过问题数据处理模块，根据问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对问题工单进行审核，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单，通过问题数据归档模块，跟进数据源单位对目标问题工单的处理情况，将确认完结的目标问题工单归档，从而能够对采集的政府数据出现的问题进行快速有效的处理，保证整个政府数据开放共享流程的安全性和稳定性，提高政府数据开放共享的效率。

Description

一种面向政府数据开放共享的问题反馈处理系统及方法
技术领域
本发明涉及大数据处理技术领域，尤其涉及一种面向政府数据开放共享的问题反馈处理系统及方法。
背景技术
近年来，各省市政府逐步加强政府信息资源的开发利用，加强政府数据的开放共享，规范政府信息资源社会化增值开发利用工作。
在政府数据开放共享的过程中，需要合理规划政府数据的采集工作，要保障采集到的政府数据的规范性和正确性。采集到的政府数据往往会存在一些不正确、不规范的问题，但由于缺少完善、高效的问题反馈处理机制，目前只能依靠人工对采集的政府数据出现的问题进行反馈处理，不仅效率低下，而且很多问题也不能及时发现，发现问题后的排查过程也非常繁琐，难以保证整个政府数据开放共享流程的安全性和稳定性，严重影响政府数据开放共享的效率。因此，亟需一种问题反馈处理系统来对采集的政府数据出现的问题进行快速有效的处理。
发明内容
为了克服现有技术的缺陷，本发明提供一种面向政府数据开放共享的问题反馈处理系统及方法，能够对采集的政府数据出现的问题进行快速有效的处理，保证整个政府数据开放共享流程的安全性和稳定性，提高政府数据开放共享的效率。
为了解决上述技术问题，第一方面，本发明一实施例提供一种面向政府数据开放共享的问题反馈处理系统，包括问题数据获取模块、问题数据处理模块、问题数据归档模块；
所述问题数据获取模块，用于对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库；
所述问题数据处理模块，用于根据所述问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标问题工单；
所述问题数据归档模块，用于跟进所述数据源单位对所述目标问题工单的处理情况，将确认完结的所述目标问题工单归档。
进一步地，所述对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库，具体为：
在数据采集过程中，根据预设的数据监测模型，对采集的所述政府数据进行质量监测，将未通过质量监测的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据交换过程中，根据预设的数据管理模型，对交换的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据加工过程中，根据所述预设的数据管理模型，对加工的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库。
进一步地，所述对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，具体为：
对所述问题工单中所有问题数据对应的数据质量问题，以及所述问题工单对应的所述数据源单位进行审核，在核定所有所述数据质量问题均为待解决问题，且核定所述数据源单位为所述问题工单中所有问题数据的来源单位时，将所述问题工单作为目标问题工单派发到所述数据源单位。
进一步地，所述问题数据获取模块，还用于接收用户和/或外部系统输入的外部问题数据，将所述外部问题数据存储于所述问题工单库。
进一步地，所述问题数据处理模块，还用于接收用户和/或外部系统输入的外部问题工单，并对所述外部问题工单进行审核，将通过审核的所述外部问题工单作为目标外部问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标外部问题工单。
第二方面，本发明一实施例提供一种面向政府数据开放共享的问题反馈处理方法，包括：
对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库；
根据所述问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标问题工单；
跟进所述数据源单位对所述目标问题工单的处理情况，将确认完结的所述目标问题工单归档。
进一步地，所述对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库，具体为：
在数据采集过程中，根据预设的数据监测模型，对采集的所述政府数据进行质量监测，将未通过质量监测的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据交换过程中，根据预设的数据管理模型，对交换的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据加工过程中，根据所述预设的数据管理模型，对加工的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库。
进一步地，所述对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，具体为：
对所述问题工单中所有问题数据对应的数据质量问题，以及所述问题工单对应的所述数据源单位进行审核，在核定所有所述数据质量问题均为待解决问题，且核定所述数据源单位为所述问题工单中所有问题数据的来源单位时，将所述问题工单作为目标问题工单派发到所述数据源单位。
进一步地，所述面向政府数据开放共享的问题反馈处理方法，还包括：
接收用户和/或外部系统输入的外部问题数据，将所述外部问题数据存储于所述问题工单库。
进一步地，所述面向政府数据开放共享的问题反馈处理方法，还包括：
接收用户和/或外部系统输入的外部问题工单，并对所述外部问题工单进行审核，将通过审核的所述外部问题工单作为目标外部问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标外部问题工单。
本发明的实施例，具有如下有益效果：
通过设计面向政府数据开放共享的问题反馈处理系统，即问题数据获取模块、问题数据处理模块、问题数据归档模块，利用问题数据获取模块对政府数据进行质量检测，将未通过质量检测的政府数据作为问题数据存储于问题工单库，利用问题数据处理模块根据问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对问题工单进行审核，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单，利用问题数据归档模块跟进数据源单位对目标问题工单的处理情况，将确认完结的目标问题工单归档，实现对问题数据进行反馈处理。相比于现有技术，本发明的实施例适用于需要进行政府数据开放共享的政府单位，通过问题数据获取模块，在该政府单位进行政府数据开放共享的全过程中对政府数据进行质量检测，整理出所有未通过质量检测的政府数据，即不标准、不规范的问题数据存储于问题工单库，通过问题数据处理模块，从问题工单库中获取源于该政府单位的所有问题数据，以及每一问题数据对应的数据质量问题，统一格式生成问题工单，将问题工单中的所有问题数据统一派发到对应的数据源单位，即该政府单位进行处理，从而能够对采集的政府数据出现的问题进行快速有效的处理，保证整个政府数据开放共享流程的安全性和稳定性，提高政府数据开放共享的效率。
附图说明
图1为本发明第一实施例中的一种面向政府数据开放共享的问题反馈处理系统的结构示意图；
图2为本发明第一实施例中示例的一种面向政府数据开放共享的问题反馈处理系统的系统架构图；
图3为本发明第一实施例中示例的应用面向政府数据开放共享的问题反馈处理系统的流程示意图；
图4为本发明第二实施例中的一种面向政府数据开放共享的问题反馈处理方法的流程示意图。
具体实施方式
下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1所示，第一实施例提供一种面向政府数据开放共享的问题反馈处理系统，包括问题数据获取模块11、问题数据处理模块12、问题数据归档模块13；问题数据获取模块11，用于对政府数据进行质量检测，将未通过质量检测的政府数据作为问题数据存储于问题工单库；问题数据处理模块12，用于根据问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对问题工单进行审核，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单；问题数据归档模块13，用于跟进数据源单位对目标问题工单的处理情况，将确认完结的目标问题工单归档。
作为示例性地，面向政府数据开放共享的问题反馈处理系统的系统架构图如图2所示。
问题数据获取模块11与政府单位的大数据处理系统各单元对接，负责收集政府数据，对政府数据进行质量检测，当有政府数据未通过质量检测，得到该政府数据对应的数据质量问题时，认为该政府数据可能存在质量问题，将该政府数据作为问题数据存储于问题工单库。
问题数据处理模块12与问题数据获取模块11对接，问题数据处理模块12可定时或在问题数据获取模块11的触发信号作用下从问题工单库中提取所有问题数据，以及每一问题数据对应的数据质量问题，统一格式生成问题工单，并对问题工单进行审核，审核内容包括问题类型、数据源单位等，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单。
当数据源单位接收到目标问题工单时，受理目标问题工单，若该数据源单位确认目标问题工单无问题后可以驳回目标问题工单，若该数据源单位确认目标问题工单确实存在问题后可以挂起目标问题工单，待对目标问题工单中的相应问题数据进行更正后再驳回目标问题工单。各数据源单位相关用户处理好各自的目标问题工单后，数据统筹办会确认各个目标问题工单是否完结处理。
问题数据归档模块13与问题数据处理模块12对接，以跟进数据源单位对目标问题工单的处理情况，将确认完结的目标问题工单归档，归档内容包括工单问题种类、问题单位、处理完成工单、未处理工单等，对所有问题工单进行统计分析、完整归档处理，形成工单归档库，方便后续查询。
本实施例适用于需要进行政府数据开放共享的政府单位，通过问题数据获取模块11，在该政府单位进行政府数据开放共享的全过程中对政府数据进行质量检测，整理出所有未通过质量检测的政府数据，即不标准、不规范的问题数据存储于问题工单库，通过问题数据处理模块12，从问题工单库中获取源于该政府单位的所有问题数据，以及每一问题数据对应的数据质量问题，统一格式生成问题工单，将问题工单中的所有问题数据统一派发到对应的数据源单位，即该政府单位进行处理，从而能够对采集的政府数据出现的问题进行快速有效的处理，保证整个政府数据开放共享流程的安全性和稳定性，提高政府数据开放共享的效率。
在优选的实施例当中，所述对政府数据进行质量检测，将未通过质量检测的政府数据作为问题数据存储于问题工单库，具体为：在数据采集过程中，根据预设的数据监测模型，对采集的政府数据进行质量监测，将未通过质量监测的政府数据作为问题数据存储于问题工单库；在数据交换过程中，根据预设的数据管理模型，对交换的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库；在数据加工过程中，根据预设的数据管理模型，对加工的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库。
作为示例性地，问题数据获取模块11在从政府单位的大数据处理系统各单元收集政府数据的过程中，根据预设的数据监测模型，对采集的政府数据进行质量监测，将未通过质量监测的政府数据作为问题数据存储于问题工单库。
在该政府单位与其他政府单位进行数据交换的过程中，根据预设的数据管理模型，对交换的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库。
在该政府单位对政府数据进行数据清洗、比对、分类整理的过程中，根据预设的数据管理模型，对加工的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库。
例如，委办局的政府数据经过其大数据处理系统进入数据共享库，以进行政府数据开放共享。问题数据获取模块11在从政府单位的大数据处理系统各单元收集政府数据的过程中，对政府数据进行质量监测，若发现有政府数据为问题数据，则不允许该政府数据进入数据共享库，通过接口将该政府数据作为问题数据存储于问题工单库；在交换的政府数据加载到数据仓库的过程中，对政府数据进行质量管理，若发现有政府数据为问题数据，则不允许该政府数据进入数据仓库，通过接口将该政府数据存储于问题工单库；在对政府数据进行数据清洗、比对、分类整理过程中，对政府数据进行质量管理，若发现有政府数据为问题数据，则直接通过接口将该政府数据存储于问题工单库。
本实施例能够实现对政府数据从采集到共享的全过程质量检测，在数据采集环节、数据交换环节、数据加工环节，对整个数据加工、转换、整合、比对、维护等过程进行全程监控。
数据质量管理是对支持业务需求的数据进行全面的管理。依据数据在数据生命周期的各个阶段的特性，建立数据质量控制机制，及时发现数据质量问题，不断改善数据的使用质量，从而提升数据的可用性，实现数据更大的价值。数据质量管理的范畴包括：制定全局数据质量的衡量指标、分析工具及报告机制；发现、评估和报告数据在使用中的质量问题；在数据梳理、数据对接、数据存储、管理、使用等数据生命周期每一环节上定位数据质量问题产生的根源，促进建立或实施有关的工作流程来解决数据质量问题，保证全局数据质量的不断改进和数据可用性的不断提升。
数据质量管理流程主要包括：定义需要发现的质量问题(质量定义)、通过工具发现是否存在质量问题(问题发现)、对系统整体发现的问题进行暴露(发布报告)，协助改进解决质量问题(质量改进)。
对于质量定义，数据质量主要包括数据的完整性、及时性、准确性、一致性。完整性主要包括实体缺失、属性缺失、记录缺失和字段值缺失四个方面；及时性指数据刷新、修改和提取等的及时和快速性；准确性指计量误差、度量单位等方面的精确度；一致性指统一数据来源、冗余存储和统一口径的一致性。其中，质量指标主要如表1所示：
表1
Figure BDA0003316820950000091
对于问题发现，在定义了数据质量的指标体系之后，需要根据数据资源目录的元数据信息，细化每个数据资源的实际检核公式，并配置相应的检核工具或者日常的ETL作业来完成数据质量的问题发现，形成如表2所示的问题发现清单。检核清单需要根据系统负载以及实际的数据更新日期，设定配合的作业流来进行检核作业。
表2
检核表名 检核字段名 检核指标类型 检核方法 参照标准 检核结果
表A 完整性 Count(*) 就绪文件记录数 符合/不符
表A 字段A 正确性 distinct 数据元目录值域范围 符合/不符
对于发布报告，质量报告是对系统内所有产生的质量问题，按多维度进行汇总分析的结果。维度包括业务日期、检核系统、检核指标、检核指标归类、问题产生与解决等多角度，并提供导出xls文件作为离线查看和汇报使用。
系统对内部提供报告下载，若有需要可以定期发送至各委办局的数据开放接口人，具体发送形式可单独约定。
检核问题列表提供了对数据质量问题的记录、分析、跟踪、整治的依据，检核问题按照检核的“业务日期”生成，但在问题未解决的情况下同一个指标不生成重复的检核问题。
当问题解决后，需要责任人填写问题的现象描述、处理步骤、解决方案，以备后续查验或其他用户参考。数据质量管理员对典型的、突出的或普遍性的问题纳入“常见问题”中，并以知识库的形式在内部传播，帮助提高技术人员、业务人员的数据质量意识和问题解决手段。所以数据质量报告模板尤为重要。模板如表3所示：
表3
部门名称 数据集 质量评估
国税局 申报纳税期限安排 良好
数据质量评判标准如下：
优秀：
Figure BDA0003316820950000101
良好：
Figure BDA0003316820950000111
合格：
Figure BDA0003316820950000112
对于质量改进，数据质量的改进主要依据对已发现问题的跟踪解决，即问题管理。问题管理是对数据质量相关问题进行有效处理的功能，在发现问题、处理问题的过程中，可以通过问题报告的形式登记问题、指派处理人员，并提交问题处理情况，体现流程化的管理。
问题处理环节主要涉及到两个用户角色：数据质量管理人员、问题数据处理人员。数据稽核产生的问题数据将由系统发送给规则定义时指定的数据质量管理人员。接收到问题数据的管理人员可以将问题数据即层层往下派送至问题数据的具体处理人员处理。具体问题处理流程如图3所示。
在优选的实施例当中，所述对问题工单进行审核，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，具体为：对问题工单中所有问题数据对应的数据质量问题，以及问题工单对应的数据源单位进行审核，在核定所有数据质量问题均为待解决问题，且核定数据源单位为问题工单中所有问题数据的来源单位时，将问题工单作为目标问题工单派发到数据源单位。
作为示例性地，问题数据处理模块12在生成问题工单后，需要对问题工单进行审核，审核内容包括问题类型、数据源单位等，根据问题工单中每一问题数据对应的数据质量问题的问题类型，判断该问题数据的数据质量问题是否确实，若是，且问题工单中所有问题数据的来源单位均一致时，将问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单。
问题数据处理模块12还可以查询问题数据、问题工单，包括数据源单位、问题类型、问题描述、问题处理状态、问题审核状态、问题处理措施描述、问题提交时间等，删除问题数据记录，在将问题工单作为目标问题工单派发到数据源单位后，确认该问题工单是否需要通知数据源单位进行处理。
在优选的实施例当中，问题数据获取模块11，还用于接收用户和/或外部系统输入的外部问题数据，将外部问题数据存储于问题工单库。
作为示例性地，问题工单库的数据来源包括两部分，一部分是通过自动对政府数据进行质量检测确定的问题数据，另一部分是外部问题数据，包括用户通过页面录入的外部问题数据，外部系统通过接口输入的外部问题数据。
在优选的实施例当中，问题数据处理模块12，还用于接收用户和/或外部系统输入的外部问题工单，并对外部问题工单进行审核，将通过审核的外部问题工单作为目标外部问题工单派发到对应的数据源单位，使数据源单位处理目标外部问题工单。
作为示例性地，问题工单的数据来源包括两部分，一部分是通过自动根据问题工单库中的问题数据及其对应的数据质量问题生成的问题工单，另一部分是外部问题工单，包括用户通过页面录入的外部问题工单，外部系统通过接口输入的外部问题工单。
如图4所示，第二实施例提供一种面向政府数据开放共享的问题反馈处理方法，包括步骤S1～S3：
S1、对政府数据进行质量检测，将未通过质量检测的政府数据作为问题数据存储于问题工单库；
S2、根据问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对问题工单进行审核，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单；
S3、跟进数据源单位对目标问题工单的处理情况，将确认完结的目标问题工单归档。
作为示例性地，在步骤S1中，通过对接政府单位的大数据处理系统各单元，收集政府数据，对政府数据进行质量检测，当有政府数据未通过质量检测，得到该政府数据对应的数据质量问题时，认为该政府数据可能存在质量问题，将该政府数据作为问题数据存储于问题工单库。
在步骤S2中，通过定时或在触发信号作用下从问题工单库中提取所有问题数据，以及每一问题数据对应的数据质量问题，统一格式生成问题工单，并对问题工单进行审核，审核内容包括问题类型、数据源单位等，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单。
当数据源单位接收到目标问题工单时，受理目标问题工单，若该数据源单位确认目标问题工单无问题后可以驳回目标问题工单，若该数据源单位确认目标问题工单确实存在问题后可以挂起目标问题工单，待对目标问题工单中的相应问题数据进行更正后再驳回目标问题工单。各数据源单位相关用户处理好各自的目标问题工单后，数据统筹办会确认各个目标问题工单是否完结处理。
在步骤S3中，通过跟进数据源单位对目标问题工单的处理情况，将确认完结的目标问题工单归档，归档内容包括工单问题种类、问题单位、处理完成工单、未处理工单等，对所有问题工单进行完整归档处理，方便后续查询。
本实施例适用于需要进行政府数据开放共享的政府单位，通过在该政府单位进行政府数据开放共享的全过程中对政府数据进行质量检测，整理出所有未通过质量检测的政府数据，即不标准、不规范的问题数据存储于问题工单库，通过从问题工单库中获取源于该政府单位的所有问题数据，以及每一问题数据对应的数据质量问题，统一格式生成问题工单，将问题工单中的所有问题数据统一派发到对应的数据源单位，即该政府单位进行处理，从而能够对采集的政府数据出现的问题进行快速有效的处理，保证整个政府数据开放共享流程的安全性和稳定性，提高政府数据开放共享的效率。
在优选的实施例当中，所述对政府数据进行质量检测，将未通过质量检测的政府数据作为问题数据存储于问题工单库，具体为：在数据采集过程中，根据预设的数据监测模型，对采集的政府数据进行质量监测，将未通过质量监测的政府数据作为问题数据存储于问题工单库；在数据交换过程中，根据预设的数据管理模型，对交换的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库；在数据加工过程中，根据预设的数据管理模型，对加工的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库。
作为示例性地，在从政府单位的大数据处理系统各单元收集政府数据的过程中，根据预设的数据监测模型，对采集的政府数据进行质量监测，将未通过质量监测的政府数据作为问题数据存储于问题工单库。
在该政府单位与其他政府单位进行数据交换的过程中，根据预设的数据管理模型，对交换的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库。
在该政府单位对政府数据进行数据清洗、比对、分类整理的过程中，根据预设的数据管理模型，对加工的政府数据进行质量管理，将未通过质量管理的政府数据作为问题数据存储于问题工单库。
例如，委办局的政府数据经过其大数据处理系统进入数据共享库，以进行政府数据开放共享。在从政府单位的大数据处理系统各单元收集政府数据的过程中，对政府数据进行质量监测，若发现有政府数据为问题数据，则不允许该政府数据进入数据共享库，通过接口将该政府数据作为问题数据存储于问题工单库；在交换的政府数据加载到数据仓库的过程中，对政府数据进行质量管理，若发现有政府数据为问题数据，则不允许该政府数据进入数据仓库，通过接口将该政府数据存储于问题工单库；在对政府数据进行数据清洗、比对、分类整理过程中，对政府数据进行质量管理，若发现有政府数据为问题数据，则直接通过接口将该政府数据存储于问题工单库。
本实施例能够实现对政府数据从采集到共享的全过程质量检测，在数据采集环节、数据交换环节、数据加工环节，对整个数据加工、转换、整合、比对、维护等过程进行全程监控。
在优选的实施例当中，所述对问题工单进行审核，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，具体为：对问题工单中所有问题数据对应的数据质量问题，以及问题工单对应的数据源单位进行审核，在核定所有数据质量问题均为待解决问题，且核定数据源单位为问题工单中所有问题数据的来源单位时，将问题工单作为目标问题工单派发到数据源单位。
作为示例性地，在生成问题工单后，需要对问题工单进行审核，审核内容包括问题类型、数据源单位等，根据问题工单中每一问题数据对应的数据质量问题的问题类型，判断该问题数据的数据质量问题是否确实，若是，且问题工单中所有问题数据的来源单位均一致时，将问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单。
在生成问题工单后，还可以查询问题数据、问题工单，包括数据源单位、问题类型、问题描述、问题处理状态、问题审核状态、问题处理措施描述、问题提交时间等，删除问题数据记录，在将问题工单作为目标问题工单派发到数据源单位后，确认该问题工单是否需要通知数据源单位进行处理。
在优选的实施例当中，所述面向政府数据开放共享的问题反馈处理方法，还包括：接收用户和/或外部系统输入的外部问题数据，将外部问题数据存储于问题工单库。
作为示例性地，问题工单库的数据来源包括两部分，一部分是通过自动对政府数据进行质量检测确定的问题数据，另一部分是外部问题数据，包括用户通过页面录入的外部问题数据，外部系统通过接口输入的外部问题数据。
在优选的实施例当中，所述面向政府数据开放共享的问题反馈处理方法，还包括：接收用户和/或外部系统输入的外部问题工单，并对外部问题工单进行审核，将通过审核的外部问题工单作为目标外部问题工单派发到对应的数据源单位，使数据源单位处理目标外部问题工单。
作为示例性地，问题工单的数据来源包括两部分，一部分是通过自动根据问题工单库中的问题数据及其对应的数据质量问题生成的问题工单，另一部分是外部问题工单，包括用户通过页面录入的外部问题工单，外部系统通过接口输入的外部问题工单。
综上所述，实施本发明的实施例，具有如下有益效果：
通过设计面向政府数据开放共享的问题反馈处理系统，即问题数据获取模块11、问题数据处理模块12、问题数据归档模块13，利用问题数据获取模块11对政府数据进行质量检测，将未通过质量检测的政府数据作为问题数据存储于问题工单库，利用问题数据处理模块12根据问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对问题工单进行审核，将通过审核的问题工单作为目标问题工单派发到对应的数据源单位，使数据源单位处理目标问题工单，利用问题数据归档模块13跟进数据源单位对目标问题工单的处理情况，将确认完结的目标问题工单归档，实现对问题数据进行反馈处理。本发明的实施例适用于需要进行政府数据开放共享的政府单位，通过问题数据获取模块11，在该政府单位进行政府数据开放共享的全过程中对政府数据进行质量检测，整理出所有未通过质量检测的政府数据，即不标准、不规范的问题数据存储于问题工单库，通过问题数据处理模块12，从问题工单库中获取源于该政府单位的所有问题数据，以及每一问题数据对应的数据质量问题，统一格式生成问题工单，将问题工单中的所有问题数据统一派发到对应的数据源单位，即该政府单位进行处理，从而能够对采集的政府数据出现的问题进行快速有效的处理，保证整个政府数据开放共享流程的安全性和稳定性，提高政府数据开放共享的效率。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。
本领域普通技术人员可以理解实现上述实施例中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random Access Memory，RAM)等。

Claims (10)

1.一种面向政府数据开放共享的问题反馈处理系统，其特征在于，包括问题数据获取模块、问题数据处理模块、问题数据归档模块；
所述问题数据获取模块，用于对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库；
所述问题数据处理模块，用于根据所述问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标问题工单；
所述问题数据归档模块，用于跟进所述数据源单位对所述目标问题工单的处理情况，将确认完结的所述目标问题工单归档。
2.如权利要求1所述的面向政府数据开放共享的问题反馈处理系统，其特征在于，所述对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库，具体为：
在数据采集过程中，根据预设的数据监测模型，对采集的所述政府数据进行质量监测，将未通过质量监测的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据交换过程中，根据预设的数据管理模型，对交换的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据加工过程中，根据所述预设的数据管理模型，对加工的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库。
3.如权利要求1所述的面向政府数据开放共享的问题反馈处理系统，其特征在于，所述对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，具体为：
对所述问题工单中所有问题数据对应的数据质量问题，以及所述问题工单对应的所述数据源单位进行审核，在核定所有所述数据质量问题均为待解决问题，且核定所述数据源单位为所述问题工单中所有问题数据的来源单位时，将所述问题工单作为目标问题工单派发到所述数据源单位。
4.如权利要求1所述的面向政府数据开放共享的问题反馈处理系统，其特征在于，所述问题数据获取模块，还用于接收用户和/或外部系统输入的外部问题数据，将所述外部问题数据存储于所述问题工单库。
5.如权利要求1所述的面向政府数据开放共享的问题反馈处理系统，其特征在于，所述问题数据处理模块，还用于接收用户和/或外部系统输入的外部问题工单，并对所述外部问题工单进行审核，将通过审核的所述外部问题工单作为目标外部问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标外部问题工单。
6.一种面向政府数据开放共享的问题反馈处理方法，其特征在于，包括：
对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库；
根据所述问题工单库中的问题数据及其对应的数据质量问题生成问题工单，并对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标问题工单；
跟进所述数据源单位对所述目标问题工单的处理情况，将确认完结的所述目标问题工单归档。
7.如权利要求6所述的面向政府数据开放共享的问题反馈处理方法，其特征在于，所述对政府数据进行质量检测，将未通过质量检测的所述政府数据作为问题数据存储于问题工单库，具体为：
在数据采集过程中，根据预设的数据监测模型，对采集的所述政府数据进行质量监测，将未通过质量监测的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据交换过程中，根据预设的数据管理模型，对交换的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库；
在数据加工过程中，根据所述预设的数据管理模型，对加工的所述政府数据进行质量管理，将未通过质量管理的所述政府数据作为所述问题数据存储于所述问题工单库。
8.如权利要求6所述的面向政府数据开放共享的问题反馈处理方法，其特征在于，所述对所述问题工单进行审核，将通过审核的所述问题工单作为目标问题工单派发到对应的数据源单位，具体为：
对所述问题工单中所有问题数据对应的数据质量问题，以及所述问题工单对应的所述数据源单位进行审核，在核定所有所述数据质量问题均为待解决问题，且核定所述数据源单位为所述问题工单中所有问题数据的来源单位时，将所述问题工单作为目标问题工单派发到所述数据源单位。
9.如权利要求6所述的面向政府数据开放共享的问题反馈处理方法，其特征在于，还包括：
接收用户和/或外部系统输入的外部问题数据，将所述外部问题数据存储于所述问题工单库。
10.如权利要求6所述的面向政府数据开放共享的问题反馈处理方法，其特征在于，还包括：
接收用户和/或外部系统输入的外部问题工单，并对所述外部问题工单进行审核，将通过审核的所述外部问题工单作为目标外部问题工单派发到对应的数据源单位，使所述数据源单位处理所述目标外部问题工单。
CN202111237242.9A 2021-10-22 2021-10-22 一种面向政府数据开放共享的问题反馈处理系统及方法 Pending CN114066170A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111237242.9A CN114066170A (zh) 2021-10-22 2021-10-22 一种面向政府数据开放共享的问题反馈处理系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111237242.9A CN114066170A (zh) 2021-10-22 2021-10-22 一种面向政府数据开放共享的问题反馈处理系统及方法

Publications (1)

Publication Number Publication Date
CN114066170A true CN114066170A (zh) 2022-02-18

Family

ID=80235311

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111237242.9A Pending CN114066170A (zh) 2021-10-22 2021-10-22 一种面向政府数据开放共享的问题反馈处理系统及方法

Country Status (1)

Country Link
CN (1) CN114066170A (zh)

Similar Documents

Publication Publication Date Title
CN111611458B (zh) 大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法
CN111177134B (zh) 适用于海量数据的数据质量分析方法、装置、终端及介质
CN114925045A (zh) 大数据集成和管理的PaaS平台
CN112800044B (zh) 数据质量判定及监测方法、管理系统、存储介质、终端
CN112162960A (zh) 一种卫生健康政务信息共享方法、装置及系统
CN114880405A (zh) 一种基于数据湖的数据处理方法及系统
CN113468160A (zh) 数据治理方法及装置、电子设备
CN105868956A (zh) 一种数据处理方法及装置
CN112579578A (zh) 基于元数据的数据质量管理方法、装置、系统及服务器
CN111221698A (zh) 任务数据采集方法与装置
JP6375029B2 (ja) レポートの重要度を分析するメタデータ基盤のオンライン分析処理システム
CN113742227B (zh) 一种软件测试过程的控制方法、装置、设备和介质
CN115982429B (zh) 一种基于流程控制的知识管理方法及系统
CN112416904A (zh) 电力数据规范化处理方法及装置
Wibowo XBRL Open Information Model for Risk Based Tax Audit using Machine Learning
Hinrichs et al. An ISO 9001: 2000 Compliant Quality Management System for Data Integration in Data Warehouse Systems.
CN114066170A (zh) 一种面向政府数据开放共享的问题反馈处理系统及方法
CN110597899B (zh) 项目经费管理方法及系统
CN113297146A (zh) 地方监管报送数据的处理模型及方法
CN112396343A (zh) 一种数据质量核查方法及装置
CN112380264A (zh) 一种基于个人全生命周期的政策解析和匹配的方法及装置
CN113435701B (zh) 一种消费品质量信息的处理方法和装置
Gill et al. An open source ETL tool-medium and small scale enterprise ETL (MaSSEETL)
Lu et al. A study on the business data evaluation method of the power grid value-added service
CN114461622A (zh) 一种数据质量检验的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination