CN113590686B - 生态环境数据指标的处理方法、装置及设备 - Google Patents

生态环境数据指标的处理方法、装置及设备 Download PDF

Info

Publication number
CN113590686B
CN113590686B CN202110863855.7A CN202110863855A CN113590686B CN 113590686 B CN113590686 B CN 113590686B CN 202110863855 A CN202110863855 A CN 202110863855A CN 113590686 B CN113590686 B CN 113590686B
Authority
CN
China
Prior art keywords
ecological environment
environment data
data index
index
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110863855.7A
Other languages
English (en)
Other versions
CN113590686A (zh
Inventor
李宏超
周国龙
刘术军
韦龙友
阳辉群
曾智勇
彭道发
王瑶
肖齐
黄冠豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Bowo Wisdom Technology Co ltd
Original Assignee
Shenzhen Bowo Wisdom Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Bowo Wisdom Technology Co ltd filed Critical Shenzhen Bowo Wisdom Technology Co ltd
Priority to CN202110863855.7A priority Critical patent/CN113590686B/zh
Publication of CN113590686A publication Critical patent/CN113590686A/zh
Application granted granted Critical
Publication of CN113590686B publication Critical patent/CN113590686B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/252Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2462Approximate or statistical queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/26Government or public services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06393Score-carding, benchmarking or key performance indicator [KPI] analysis

Abstract

一种生态环境数据指标的处理方法、装置及设备,通过确定用于表示各个生态环境数据指标的指标信息;获取每个生态环境数据指标的属性集合;根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法;将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口,使得使用者无需关注具体的实现过程,就可以获取到需要的各个生态环境数据指标,解决了由于标准不一、统计口径不同而导致的数据指标结果不准确的问题,实现了各个生态环境数据指标的统一管理维护,从而提高了生态环境数据指标的管理效率。

Description

生态环境数据指标的处理方法、装置及设备
技术领域
本发明涉及生态环境技术领域,具体涉及一种生态环境数据指标的处理方法、装置及设备。
背景技术
随着生态环境管理工作的日益完善以及大数据技术的飞速发展,环保信息化建设的要求也随之被不断提高,因此,需要进行越来越多、越来越复杂的数据分析才能满足用户的需求。而数据指标作为数据分析的核心,其重要性日益凸显。但是,在目前的生态环境领域中,还没有一种方法对数据指标进行统一的管理,这就导致了以下问题:
(1)各数据分析应用的数据指标都是在本系统所拥有的数据的基础上进行计算的,这样就导致同一个数据指标在不同的系统上会因为数据的差异及所使用算法的差异而导致数据不一致,从而导致结果缺乏可信度;
(2)数据指标的计算成本高,例如,如果一个简单的应用需要使用某些数据指标,也需要把分析、定义、开发和维护这样完整的计算过程实现一遍,其成本非常高,并且大量核心的业务知识未沉淀积累;
(3)如果业务发生改变,由于数据指标未统一出口,将导致应用全部需要修改。
由于上述问题的存在,导致目前的生态环境数据指标的管理效率较低。
发明内容
本发明实施例提供一种生态环境数据指标的处理方法、装置及设备,用以提高生态环境数据指标的管理效率。
根据第一方面,一种实施例中提供一种生态环境数据指标的处理方法,所述方法包括:
确定用于表示各个生态环境数据指标的指标信息,所述生态环境数据指标用于表征生态环境的业务分析结果,所述指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段;
获取每个生态环境数据指标的属性集合;
根据所述属性集合,配置数据库操作指令,并设置经过所述数据库操作指令筛选出的数据的预设处理算法;
将所述指标信息、所述数据库操作指令和所述预设处理算法进行封装,并将各预设接口路径作为封装后的各所述生态环境数据指标的调用接口。
可选的,所述生态环境数据指标的调用接口包括第一标识信息,所述方法还包括:
接收调用接口请求指令,所述调用接口请求指令包括指定生态环境数据指标的第二标识信息和条件参数,所述条件参数用于限定所述指定生态环境数据指标的属性的取值;
若所述第二标识信息与所述第一标识信息一致,则调用对应的所述生态环境数据指标的调用接口,并得到符合所述条件参数要求的生态环境数据指标。
可选的,在调用对应的所述生态环境数据指标的调用接口之前,所述方法还包括:
检验所述条件参数的数据格式是否符合所述预设请求参数的数据格式要求;
若符合,则调用对应的所述生态环境数据指标的调用接口;
若不符合,则输出提示信息,以提示所述条件参数存在格式错误。
可选的,所述方法还包括:
监控各生态环境数据指标的使用情况,并根据所述使用情况,调整所述生态环境数据指标的封装过程,所述使用情况至少包括以下一项:生态环境数据指标的被调用次数、成功率、慢响应次数、平均响应时间、平均并发量和最大并发量。
可选的,所述方法还包括:
对符合所述条件参数要求的生态环境数据指标进行可视化展示。
可选的,所述方法还包括:
创建并记录各所述调用接口的版本号,所述版本号用于判断所述生态环境数据指标是否发生改变。
可选的,所述方法还包括:
对各所述调用接口进行在线测试,以校验所述生态环境数据指标的准确性。
根据第二方面,一种实施例中提供一种生态环境数据指标的处理装置,所述装置包括:
确定模块,用于确定用于表示各个生态环境数据指标的指标信息,所述生态环境数据指标用于表征生态环境的业务分析结果,所述指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段;
第一获取模块,用于获取每个生态环境数据指标的属性集合;
配置模块,用于根据所述属性集合,配置数据库操作指令,并设置经过所述数据库操作指令筛选出的数据的预设处理算法;
封装模块,用于将所述指标信息、所述数据库操作指令和所述预设处理算法进行封装,并将各预设接口路径作为封装后的各所述生态环境数据指标的调用接口。
可选的,所述生态环境数据指标的调用接口包括第一标识信息,所述装置还包括:
接收模块,用于接收调用接口请求指令,所述调用接口请求指令包括指定生态环境数据指标的第二标识信息和条件参数,所述条件参数用于限定所述指定生态环境数据指标的属性的取值;
第二获取模块,用于若所述第二标识信息与所述第一标识信息一致,则调用对应的所述生态环境数据指标的调用接口,并得到符合所述条件参数要求的生态环境数据指标。
可选的,所述装置还包括:
检验模块,用于检验所述条件参数的数据格式是否符合所述预设请求参数的数据格式要求;若符合,则通过所述第二获取模块调用对应的所述生态环境数据指标的调用接口;若不符合,则输出提示信息,以提示所述条件参数存在格式错误。
可选的,所述装置还包括:
监控模块,用于监控各生态环境数据指标的使用情况,并根据所述使用情况,调整所述生态环境数据指标的封装过程,所述使用情况至少包括以下一项:生态环境数据指标的被调用次数、成功率、慢响应次数、平均响应时间、平均并发量和最大并发量。
可选的,所述装置还包括:
展示模块,用于对符合所述条件参数要求的生态环境数据指标进行可视化展示。
可选的,所述装置还包括:
记录模块,用于创建并记录各所述调用接口的版本号,所述版本号用于判断所述生态环境数据指标是否发生改变。
可选的,所述装置还包括:
测试模块,用于对各所述调用接口进行在线测试,以校验所述生态环境数据指标的准确性。
根据第三方面,一种实施例中提供一种电子设备,包括:存储器,用于存储程序;处理器,用于通过执行所述存储器存储的程序以实现上述第一方面中任一项所述的生态环境数据指标的处理方法。
根据第四方面,一种实施例中提供一种计算机可读存储介质,所述介质上存储有程序,所述程序能够被处理器执行以实现上述第一方面中任一项所述的生态环境数据指标的处理方法。
本发明实施例提供一种生态环境数据指标的处理方法、装置及设备,通过确定用于表示各个生态环境数据指标的指标信息,生态环境数据指标用于表征生态环境的业务分析结果,指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段;获取每个生态环境数据指标的属性集合;根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法;将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口。通过将复杂的计算过程封装起来,并通过简单调用接口的方式将计算结果暴露出来,使得使用者无需关注具体的实现过程,就可以获取到需要的各个生态环境数据指标,解决了由于标准不一、统计口径不同而导致的数据指标结果不准确的问题,实现了各个生态环境数据指标的统一管理维护,从而提高了生态环境数据指标的管理效率。
附图说明
图1为本发明实施例提供的一种生态环境数据指标的处理方法的实施例一的流程示意图;
图2为本发明实施例提供的一种生态环境数据指标的处理方法的实施例二的流程示意图;
图3为本发明实施例提供的一种生态环境数据指标的处理方法的实施例三的流程示意图;
图4为本发明实施例提供的一种数据指标服务的管理平台的结构示意图;
图5为本发明实施例提供的一种生态环境数据指标的处理方法的实施例四的流程示意图;
图6为本发明实施例提供的一种调用生态环境数据指标的流程示意图:
图7为本发明实施例提供的一种生态环境数据指标的处理装置的结构示意图。
具体实施方式
下面通过具体实施方式结合附图对本发明作进一步详细说明。其中不同实施方式中类似元件采用了相关联的类似的元件标号。在以下的实施方式中,很多细节描述是为了使得本申请能被更好的理解。然而,本领域技术人员可以毫不费力的认识到,其中部分特征在不同情况下是可以省略的,或者可以由其他元件、材料、方法所替代。在某些情况下,本申请相关的一些操作并没有在说明书中显示或者描述,这是为了避免本申请的核心部分被过多的描述所淹没,而对于本领域技术人员而言,详细描述这些相关操作并不是必要的,他们根据说明书中的描述以及本领域的一般技术知识即可完整了解相关操作。
另外,说明书中所描述的特点、操作或者特征可以以任意适当的方式结合形成各种实施方式。同时,方法描述中的各步骤或者动作也可以按照本领域技术人员所能显而易见的方式进行顺序调换或调整。因此,说明书和附图中的各种顺序只是为了清楚描述某一个实施例,并不意味着是必须的顺序,除非另有说明其中某个顺序是必须遵循的。
本文中为部件所编序号本身,例如“第一”、“第二”等,仅用于区分所描述的对象,不具有任何顺序或技术含义。而本申请所说“连接”、“联接”,如无特别说明,均包括直接和间接连接(联接)。
由于在目前的生态环境领域中,还没有一种方法对数据指标进行统一的管理,这就导致了以下问题:(1)各数据分析应用的数据指标都是在本系统所拥有的数据的基础上进行计算的,这样就导致同一个数据指标在不同的系统上会因为数据的差异及所使用算法的差异而导致数据不一致,从而导致结果缺乏可信度;(2)数据指标的计算成本高,例如,如果一个简单的应用需要使用某些数据指标,也需要把分析、定义、开发和维护这样完整的计算过程实现一遍,其成本非常高,并且大量核心的业务知识未沉淀积累;(3)如果业务发生改变,由于数据指标未统一出口,将导致应用全部需要修改。由于上述问题的存在,导致目前的生态环境数据指标的管理效率较低。为了提高生态环境数据指标的管理效率,本发明实施例提供了一种生态环境数据指标的处理方法、装置及设备,以下分别进行详细说明。
图1为本发明实施例提供的一种生态环境数据指标的处理方法的实施例一的流程示意图,本发明实施例的执行主体为任意具有处理能力的设备。如图1所示,本实施例提供的生态环境数据指标的处理方法可以包括:
S101,确定用于表示各个生态环境数据指标的指标信息。
其中,生态环境数据指标可以用于表征生态环境的业务分析结果,指标信息可以包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段。例如,生态环境数据指标可以为空气优良天数、空气优良率、轻度污染天数、轻度污染比例、中度污染天数、中度污染比例、重度污染天数、重度污染比例、严重污染天数、严重污染比、污染源类别、污染源数量、污染要素、企业名称等。
S102,获取每个生态环境数据指标的属性集合。
举例说明,当数据指标为指定年份各企业排放量时,那么该数据指标的属性集合可以为指定年份、企业名称,以及各企业的排放量。
S103,根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法。
根据属性集合,可以通过数据库操作指令从数据库中筛选出计算该数据指标所需的数据,并且通过预设处理算法对筛选出的数据做进一步的处理。例如,可以对筛选出的数据进行排序、求和等计算。
可选的,若该数据指标只是需要从数据库中筛选出符合要求的数据,并不对筛选出的数据作进一步的处理时,可以无需设置预设处理算法。
S104,将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口。
本发明实施例提供的生态环境数据指标的处理方法,通过确定用于表示各个生态环境数据指标的指标信息,生态环境数据指标用于表征生态环境的业务分析结果,指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段;获取每个生态环境数据指标的属性集合;根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法;将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口。通过将复杂的计算过程封装起来,并通过简单调用接口的方式将计算结果暴露出来,使得使用者无需关注具体的实现过程,就可以获取到需要的各个生态环境数据指标,解决了由于标准不一、统计口径不同而导致的数据指标结果不准确的问题,实现了各个生态环境数据指标的统一管理维护,从而提高了生态环境数据指标的管理效率。
作为一种可以实现的方式,在上述实施例一的基础上,上述生态环境数据指标的处理方法还可以包括:创建并记录各调用接口的版本号,版本号可以用于判断生态环境数据指标是否发生改变。例如,若对该生态环境数据指标进行修改后,依然调用之前生成的调用接口,则会得到错误的数据。因此,需要在得到生态环境数据指标的调用接口之后,为该调用接口创建一个对应的版本号,待对该生态环境数据指标进行修改后,为该调用接口创建一个新的版本号,以此避免错误调用接口的情况发生。
作为一种可以实现的方式,在上述实施例一的基础上,上述生态环境数据指标的处理方法还可以包括:对各调用接口进行在线测试,以校验生态环境数据指标的准确性。
当生态环境数据指标的调用接口包括第一标识信息时,图2为本发明实施例提供的一种生态环境数据指标的处理方法的实施例二的流程示意图,如图2所示,本实施例提供的生态环境数据指标的处理方法可以包括:
S201,确定用于表示各个生态环境数据指标的指标信息。
其中,生态环境数据指标可以用于表征生态环境的业务分析结果,指标信息可以包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段。
S202,获取每个生态环境数据指标的属性集合。
S203,根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法。
S204,将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口。
S201-S204的具体实现方式可以参考上述实施例一中对于S101-S104的相关说明。
S205,接收调用接口请求指令,调用接口请求指令包括指定生态环境数据指标的第二标识信息和条件参数。
其中,条件参数可以用于限定指定生态环境数据指标的属性的取值。例如,当数据指标为指定年份各企业排放量时,那么条件参数可以为“2021”,以此来筛选2021年的各企业排放量。
S206,若第二标识信息与第一标识信息一致,则调用对应的生态环境数据指标的调用接口,得到符合条件参数要求的生态环境数据指标。
本发明实施例提供的生态环境数据指标的处理方法,当生态环境数据指标的调用接口包括第一标识信息时,通过接收调用接口请求指令,调用接口请求指令包括指定生态环境数据指标的第二标识信息和条件参数,条件参数用于限定指定生态环境数据指标的属性的取值;若第二标识信息与第一标识信息一致,则调用对应的生态环境数据指标的调用接口,可以得到符合条件参数要求的对应的生态环境数据指标。
作为一种可以实现的方式,在上述实施例二的基础上,上述生态环境数据指标的处理方法还可以包括:监控各生态环境数据指标的使用情况,并根据使用情况,调整生态环境数据指标的封装过程,使用情况至少包括以下一项:生态环境数据指标的被调用次数、成功率、慢响应次数、平均响应时间、平均并发量和最大并发量。通过监控各生态环境数据指标的使用情况,便于生态环境数据指标出现异常情况时能够快速的定位,从而调整该生态环境数据指标的封装过程,为生态环境数据指标的算法优化提供数据支撑。
作为一种可以实现的方式,在上述实施例二的基础上,上述生态环境数据指标的处理方法还可以包括:对符合条件参数要求的生态环境数据指标进行可视化展示。例如,若生态环境数据指标为浙江省各市2021年1月1日-2021年6月23日的优良天数占比,则可以通过柱状图的形式对该生态环境数据指标进行可视化展示,可以通过不同颜色的柱状图展示不同年份的浙江省各市的优良天数占比,也可以通过折线图的形式展示浙江省各市2021年1月1日-2021年6月23日的优良天数的目标占比,以使用户可以直观地看到浙江省各市的空气情况。或者,也可以根据浙江省各市的位置信息,在展示界面上显示各市在2021年6月23日11时的PM2.5的浓度。通过提供可视化的界面将生态环境数据指标所需要的参数及输出信息直接展示,使得前端应用开发可以轻松阅读和掌握生态环境数据指标的使用方法,减少了前后端人员在沟通上产生的成本。
图3为本发明实施例提供的一种生态环境数据指标的处理方法的实施例三的流程示意图,如图3所示,本实施例提供的生态环境数据指标的处理方法可以包括:
S301,确定用于表示各个生态环境数据指标的指标信息。
其中,生态环境数据指标用于表征生态环境的业务分析结果,指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段。
S302,获取每个生态环境数据指标的属性集合。
S303,根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法。
S304,将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口。
S305,接收调用接口请求指令,调用接口请求指令包括指定生态环境数据指标的第二标识信息和条件参数。
其中,生态环境数据指标的调用接口包括第一标识信息,条件参数用于限定指定生态环境数据指标的属性的取值。
S306,若第二标识信息与第一标识信息一致,则检验条件参数的数据格式是否符合预设请求参数的数据格式要求。
若是,则执行S307;若否,则执行S308。
例如,当生态环境数据指标为指定年份各企业排放量时,预设请求参数的的数据格式要求是年份对应的数字,例如“2014”,但是输入的条件参数是“2014年”,则不符合要求。
S307,调用对应的生态环境数据指标的调用接口,并得到符合条件参数要求的生态环境数据指标。
S308,输出提示信息,以提示条件参数存在格式错误。
本发明实施例提供的生态环境数据指标的处理方法,通过检验条件参数的数据格式是否符合预设请求参数的数据格式要求,可以约束条件参数的数据格式,达到统一管理的目的。
下面以一个具体的实现方式为例对本发明实施例提供的生态环境数据指标的处理方法进行说明。例如,可以通过一个数据指标服务的管理平台实现本实施例提供的生态环境数据指标的处理方法,该管理平台将业务常用的数据分析的指标及对应算法在平台中进行定义封装,并以服务接口的方式进行提供,上层应用只需调用封装好的指标服务接口进行数据展示。该管理平台可以对生态环境数据指标的定义、开发、应用到消亡的全生命周期进行管理,让生态环境数据指标做到一次建设、随处使用,彻底解决了生态环境数据指标的标准不一的问题。该管理平台可以内置一些常用的、标准的生态环境数据指标服务,用于满足常规的业务需求。如果基础的生态环境数据指标服务不满足需求,可以基于基础指标进行二次的开发。
图4为本发明实施例提供的一种数据指标服务的管理平台的结构示意图,如图4所示,该管理平台可以包括数据源层、项目管理层、服务结构定义层、数据集封装层、数据处理层、服务调用层和服务监控层。其中,指标服务的数据来源于数据源层的数据库或者静态JS对象简谱(JavaScript Object Notation,JSON)格式数据,数据库的数据通过数据库结构化查询语言(Structured Query Language,SQL)以数据集的方式提供,并且可以通过groovy(用于Java虚拟机的一种敏捷的动态语言)编码的方式对数据集数据进行扩展处理。项目管理层通过使用项目的概念把数据指标进行分类,该层可以包括:基本信息、指标分类和指标迁移。服务结构定义层可以用于确定接口路径、请求参数和输出字段,并且可以提供版本管理服务,从而能够在不影响旧服务使用的情况下提供新的数据指标服务。数据集封装层可以包括:业务路径、技术口径以及数据开发。数据处理层例如可以包括传参处理、结果封装以及一些预设算法。服务调用层例如可以包括参数传递、数据查询和返回指标值。服务监控层可以对数据指标服务的全生命周期进行监控,记录关键事件的日志,具体的,可以对单个指标服务的成功率、响应时长、并发量等使用情况进行记录,便于指标服务出现异常情况时,能够快速的定位。
图5为本发明实施例提供的一种生态环境数据指标的处理方法的实施例四的流程示意图,如图5所示,通过上述图4所提供的管理平台可以实现下述生态环境数据指标的处理方法:
S501,项目管理。
具体实现时,可以将生态环境数据指标划分到对应的项目中进行维护,在项目内可对指标服务进行扩展及二次开发以满足个性化的需求,项目内的生态环境数据指标支持导出导入的方式进行迁移重用,使得管理者可以在一个地方就可以管理所有生态环境数据指标,减少了指标开发维护的成本,并提供便捷的迁移及扩展的通道,减少了同一个数据指标在多处应用迁移所带来的成本。
S502,指标服务管理。
指标服务管理可以包括指标服务结构定义、数据集封装、数据处理、服务测试。具体实现过程如下:
(1)服务结构定义:对服务结构进行管理,服务结构可以包括服务名称、接口路径、请求参数、输出字段。其中,接口路径可以以固定的格式组成,例如可以包括上下文名称+项目代码+应用程序接口(Application Programming Interface,API)+分类代码+版本号+接口代码;请求参数可以包括参数编码、参数描述、类型、运行符和是否必传等属性,并支持定义分页参数;输出字段可以以JSON格式输出,定义内容包括JSON的各节点的名称,节点支持对象、数组。
(2)数据集封装:数据封装可以通过SQL方式动态封装,SQL的开发支持占位符、动态传参、变量空值判断,并支持多个数据集SQL组织成一个服务。
(3)数据处理:支持以groovy脚本语言通过算法对数据进行处理,并提供常用的处理函数,处理内容例如可以包括参数处理、数据集结果组装计算、结果循环遍历、分页和排序等。
(4)服务测试:对封装好的指标服务接口进行在线测试,以此校验指标服务的准确性。
(5)版本管理:对数据指标服务接口提供版本的管理,每次修改都需要生成新的版本。
S503,指标服务调用。
具体实现时,前端应用可以通过请求该管理平台的接口,获取对应的神态环境数据指标的值。图6为本发明实施例提供的一种调用生态环境数据指标的流程示意图,如图6所示:
S5031,接收前端应用发送的请求。
前端应用通过HTTP GET向管理平台的对应指标服务发出请求。
S5032,判断参数是否合规。
若是,则执行S5033;若否,则执行S5038。
管理平台接受到请求后,首先判断指标服务是否有参数定义,如果有定义则获取对应参数的值,并根据定义参数规则进行校验。其中,参数规则包括非空、类型和格式,若参数值不符合上述规则,则直接返回错误代码;若参数正确,则将参数传递给结果处理及数据集SQL。
S5033,数据集SQL组装。
SQL接收参数后,可以进行参数占位符的替换、标签转换等一系列的组装,最终生成可执行的数据库SQL语句。
S5034,数据集SQL执行。
具体实现时,将SQL语句发送到数据集动态配置的数据源中运行,并返回SQL执行的结果。
S5035,数据集结果处理。
数据集SQL执行的结果经过groovy脚本处理。
S5036,指标结果返回。
管理平台最终将经过groovy脚本处理后的结果返回给前端请求。
S5037,日志记录。
管理平台根据返回的结果,记录请求的时长、请求结果到日志中。
S5038,返回错误代码。
S504,服务监控。
分析各数据指标服务的使用情况,作为服务优化的支撑依据来源。例如,服务监控可以分析各指标服务被调用总次数、成功率、慢响应次数、平均响应时间、平均并发量和最大并发量等使用情况。
图7为本发明实施例提供的一种生态环境数据指标的处理装置的结构示意图,如图7所示,该生态环境数据指标的处理装置70可以包括:
确定模块710,可以用于确定用于表示各个生态环境数据指标的指标信息,生态环境数据指标用于表征生态环境的业务分析结果,指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段。
第一获取模块720,可以用于获取每个生态环境数据指标的属性集合。
配置模块730,可以用于根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法。
封装模块740,可以用于将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口。
本发明实施例提供的生态环境数据指标的处理装置,通过确定模块,确定用于表示各个生态环境数据指标的指标信息,生态环境数据指标用于表征生态环境的业务分析结果,指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段;通过第一获取模块,获取每个生态环境数据指标的属性集合;通过配置模块,根据属性集合,配置数据库操作指令,并设置经过数据库操作指令筛选出的数据的预设处理算法;通过封装模块,将指标信息、数据库操作指令和预设处理算法进行封装,并将各预设接口路径作为封装后的各生态环境数据指标的调用接口。通过将复杂的计算过程封装起来,并通过简单调用接口的方式将计算结果暴露出来,使得使用者无需关注具体的实现过程,就可以获取到需要的各个生态环境数据指标,解决了由于标准不一、统计口径不同而导致的数据指标结果不准确的问题,实现了各个生态环境数据指标的统一管理维护,从而提高了生态环境数据指标的管理效率。
可选的,当生态环境数据指标的调用接口包括第一标识信息时,上述装置70还可以包括:接收模块(图中未示出),可以用于接收调用接口请求指令,调用接口请求指令包括指定生态环境数据指标的第二标识信息和条件参数,条件参数用于限定指定生态环境数据指标的属性的取值;第二获取模块(图中未示出),用于若第二标识信息与第一标识信息一致,则调用对应的生态环境数据指标的调用接口,并得到符合条件参数要求的生态环境数据指标。
可选的,上述装置70还可以包括:检验模块(图中未示出),可以用于检验条件参数的数据格式是否符合预设请求参数的数据格式要求;若符合,则通过第二获取模块调用对应的生态环境数据指标的调用接口;若不符合,则输出提示信息,以提示条件参数存在格式错误。
可选的,述装置70还可以包括:监控模块(图中未示出),可以用于监控各生态环境数据指标的使用情况,并根据所述使用情况,调整所述生态环境数据指标的封装过程,所述使用情况至少包括以下一项:生态环境数据指标的被调用次数、成功率、慢响应次数、平均响应时间、平均并发量和最大并发量。
可选的,上述装置70还可以包括:展示模块(图中未示出),可以用于对符合条件参数要求的生态环境数据指标进行可视化展示。
可选的,上述装置70还可以包括:记录模块(图中未示出),可以用于创建并记录各调用接口的版本号,版本号用于判断生态环境数据指标是否发生改变。
可选的,上述装置70还可以包括:测试模块(图中未示出),可以用于对各调用接口进行在线测试,以校验生态环境数据指标的准确性。
另外,相应于上述实施例所提供的生态环境数据指标的处理方法,本发明实施例还提供了一种电子设备,该电子设备可以包括:存储器,用于存储程序;处理器,用于通过执行存储器存储的程序以实现本发明实施例提供的生态环境数据指标的处理方法的所有步骤。
另外,相应于上述实施例所提供的生态环境数据指标的处理方法,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时实现本发明实施例的生态环境数据指标的处理方法的所有步骤。
本领域技术人员可以理解,上述实施方式中各种方法的全部或部分功能可以通过硬件的方式实现,也可以通过计算机程序的方式实现。当上述实施方式中全部或部分功能通过计算机程序的方式实现时,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器、随机存储器、磁盘、光盘、硬盘等,通过计算机执行该程序以实现上述功能。例如,将程序存储在设备的存储器中,当通过处理器执行存储器中程序,即可实现上述全部或部分功能。另外,当上述实施方式中全部或部分功能通过计算机程序的方式实现时,该程序也可以存储在服务器、另一计算机、磁盘、光盘、闪存盘或移动硬盘等存储介质中,通过下载或复制保存到本地设备的存储器中,或对本地设备的系统进行版本更新,当通过处理器执行存储器中的程序时,即可实现上述实施方式中全部或部分功能。
以上应用了具体个例对本发明进行阐述,只是用于帮助理解本发明,并不用以限制本发明。对于本发明所属技术领域的技术人员,依据本发明的思想,还可以做出若干简单推演、变形或替换。

Claims (10)

1.一种生态环境数据指标的处理方法,其特征在于,所述方法包括:
确定用于表示各个生态环境数据指标的指标信息,所述生态环境数据指标用于表征生态环境的业务分析结果,所述指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段;
获取每个生态环境数据指标的属性集合;
根据所述属性集合,配置数据库操作指令,并设置经过所述数据库操作指令筛选出的数据的预设处理算法;
将所述指标信息、所述数据库操作指令和所述预设处理算法进行封装,并将各预设接口路径作为封装后的各所述生态环境数据指标的调用接口。
2.如权利要求1所述的方法,其特征在于,所述生态环境数据指标的调用接口包括第一标识信息,所述方法还包括:
接收调用接口请求指令,所述调用接口请求指令包括指定生态环境数据指标的第二标识信息和条件参数,所述条件参数用于限定所述指定生态环境数据指标的属性的取值;
若所述第二标识信息与所述第一标识信息一致,则调用对应的所述生态环境数据指标的调用接口,并得到符合所述条件参数要求的生态环境数据指标。
3.如权利要求2所述的方法,其特征在于,在调用对应的所述生态环境数据指标的调用接口之前,所述方法还包括:
检验所述条件参数的数据格式是否符合所述预设请求参数的数据格式要求;
若符合,则调用对应的所述生态环境数据指标的调用接口;
若不符合,则输出提示信息,以提示所述条件参数存在格式错误。
4.如权利要求2所述的方法,其特征在于,所述方法还包括:
监控各生态环境数据指标的使用情况,并根据所述使用情况,调整所述生态环境数据指标的封装过程,所述使用情况至少包括以下一项:生态环境数据指标的被调用次数、成功率、慢响应次数、平均响应时间、平均并发量和最大并发量。
5.如权利要求2所述的方法,其特征在于,所述方法还包括:
对符合所述条件参数要求的生态环境数据指标进行可视化展示。
6.如权利要求1所述的方法,其特征在于,所述方法还包括:
创建并记录各所述调用接口的版本号,所述版本号用于判断所述生态环境数据指标是否发生改变。
7.如权利要求1所述的方法,其特征在于,所述方法还包括:
对各所述调用接口进行在线测试,以校验所述生态环境数据指标的准确性。
8.一种生态环境数据指标的处理装置,其特征在于,所述装置包括:
确定模块,用于确定用于表示各个生态环境数据指标的指标信息,所述生态环境数据指标用于表征生态环境的业务分析结果,所述指标信息包括生态环境数据指标的名称、预设接口路径、预设请求参数和预设输出字段;
第一获取模块,用于获取每个生态环境数据指标的属性集合;
配置模块,用于根据所述属性集合,配置数据库操作指令,并设置经过所述数据库操作指令筛选出的数据的预设处理算法;
封装模块,用于将所述指标信息、所述数据库操作指令和所述预设处理算法进行封装,并将各预设接口路径作为封装后的各所述生态环境数据指标的调用接口。
9.一种电子设备,其特征在于,包括:
存储器,用于存储程序;
处理器,用于通过执行所述存储器存储的程序以实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述介质上存储有程序,所述程序能够被处理器执行以实现如权利要求1-7中任一项所述的方法。
CN202110863855.7A 2021-07-29 2021-07-29 生态环境数据指标的处理方法、装置及设备 Active CN113590686B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110863855.7A CN113590686B (zh) 2021-07-29 2021-07-29 生态环境数据指标的处理方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110863855.7A CN113590686B (zh) 2021-07-29 2021-07-29 生态环境数据指标的处理方法、装置及设备

Publications (2)

Publication Number Publication Date
CN113590686A CN113590686A (zh) 2021-11-02
CN113590686B true CN113590686B (zh) 2023-11-10

Family

ID=78251792

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110863855.7A Active CN113590686B (zh) 2021-07-29 2021-07-29 生态环境数据指标的处理方法、装置及设备

Country Status (1)

Country Link
CN (1) CN113590686B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120052144A (ko) * 2010-11-15 2012-05-23 (주)광개토연구소 n차원 프레임을 활용하여 니치 기술 영역 탐색 서비스를 제공해 주는 특허 정보 시스템의 정보 처리 방법 및 그 시스템
CN102708452A (zh) * 2012-05-09 2012-10-03 浙江大学 一种支持动态编译的水质分析计算服务系统
CN103886203A (zh) * 2014-03-24 2014-06-25 美商天睿信息系统(北京)有限公司 一种基于指标预测的自动建模系统及其方法
CN104899258A (zh) * 2015-05-19 2015-09-09 重庆大学 面向海量文献信息可交互可视化分析系统架构
WO2018107610A1 (zh) * 2016-12-15 2018-06-21 平安科技(深圳)有限公司 业务数据处理方法、系统、设备及计算机可读存储介质
CN110175027A (zh) * 2019-05-14 2019-08-27 广州衡昊数据科技有限公司 一种开发业务功能的方法和装置
CN110647549A (zh) * 2019-09-29 2020-01-03 北京卓信智恒数据科技股份有限公司 基于业务动态建模的数据指标解析与执行方法和装置
CN110909066A (zh) * 2019-12-06 2020-03-24 中科院计算技术研究所大数据研究院 一种基于SparkSQL和RestAPI的流数据处理方法
CN111553556A (zh) * 2020-03-27 2020-08-18 深圳壹账通智能科技有限公司 业务数据分析方法、装置、计算机设备及存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2076874A4 (en) * 2006-05-13 2011-03-09 Sap Ag DERIVED CONSISTENT SET OF INTERFACES DERIVED FROM A BUSINESS OBJECT MODEL
AU2015343261A1 (en) * 2014-11-03 2017-05-18 Automated Clinical Guidelines, Llc Method and platform/system for creating a web-based form that incorporates an embedded knowledge base, wherein the form provides automatic feedback to a user during and following completion of the form

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120052144A (ko) * 2010-11-15 2012-05-23 (주)광개토연구소 n차원 프레임을 활용하여 니치 기술 영역 탐색 서비스를 제공해 주는 특허 정보 시스템의 정보 처리 방법 및 그 시스템
CN102708452A (zh) * 2012-05-09 2012-10-03 浙江大学 一种支持动态编译的水质分析计算服务系统
CN103886203A (zh) * 2014-03-24 2014-06-25 美商天睿信息系统(北京)有限公司 一种基于指标预测的自动建模系统及其方法
CN104899258A (zh) * 2015-05-19 2015-09-09 重庆大学 面向海量文献信息可交互可视化分析系统架构
WO2018107610A1 (zh) * 2016-12-15 2018-06-21 平安科技(深圳)有限公司 业务数据处理方法、系统、设备及计算机可读存储介质
CN110175027A (zh) * 2019-05-14 2019-08-27 广州衡昊数据科技有限公司 一种开发业务功能的方法和装置
CN110647549A (zh) * 2019-09-29 2020-01-03 北京卓信智恒数据科技股份有限公司 基于业务动态建模的数据指标解析与执行方法和装置
CN110909066A (zh) * 2019-12-06 2020-03-24 中科院计算技术研究所大数据研究院 一种基于SparkSQL和RestAPI的流数据处理方法
CN111553556A (zh) * 2020-03-27 2020-08-18 深圳壹账通智能科技有限公司 业务数据分析方法、装置、计算机设备及存储介质

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
Refactoring Java Code for Automatic API Generation;Genggeng Liu 等;2018 International Conference on Cloud Computing, Big Data and Blockchain (ICCBB);1-6 *
全国水能资源区划可拓评价模型及决策支持系统;张仁贡 等;小水电(第06期);10-17 *
电信运营商网络数据采集与共享方案探讨;李涛 等;邮电设计技术(第12期);12-17 *
面向高性能计算环境的微服务运维平台设计与实现;张鼎超 等;计算机应用研究;190-192 *

Also Published As

Publication number Publication date
CN113590686A (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
US11163542B2 (en) Dynamically generating and rendering user interfaces based on data models
US10419546B2 (en) Migration assessment for cloud computing platforms
US8065315B2 (en) Solution search for software support
US10013439B2 (en) Automatic generation of instantiation rules to determine quality of data migration
US10845962B2 (en) Specifying user interface elements
KR101644418B1 (ko) 데이터 요소 간의 관계의 시각화 및 데이터 요소 속성의 그래픽 표현
US20140229456A1 (en) Data quality assessment
US20130166515A1 (en) Generating validation rules for a data report based on profiling the data report in a data processing tool
US20210342738A1 (en) Machine learning-facilitated data entry
CN109976729B (zh) 一种存算显全局可配置的数据分析软件架构设计方法
US11580455B2 (en) Facilitating machine learning configuration
US8606762B2 (en) Data quality administration framework
CN112860556A (zh) 覆盖率统计方法、装置、计算机系统和可读存储介质
CN111414410A (zh) 数据处理方法、装置、设备和存储介质
US10248733B2 (en) Integration of a catalog application with a monitoring application
US11605012B2 (en) Framework for processing machine learning model metrics
CN113590686B (zh) 生态环境数据指标的处理方法、装置及设备
CN117009397A (zh) 数据查询方法、数据查询装置、电子设备和存储介质
CN113535228B (zh) 监控数据链路的方法、装置及计算机可读存储介质
CN114116765A (zh) Mybatis框架SQL语句异常检测方法、服务器及系统
CN115687090A (zh) 测试案例生成方法、装置、设备及介质
WO2022197322A1 (en) Constructing a data flow graph for a computing system of an organization
CN117390023A (zh) 数据合计方法、数据合计装置、设备及存储介质
CN114860597A (zh) 代码覆盖率的确定方法、装置、设备和存储介质
CN115295166A (zh) 一种指标数据处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant