CN114358596A - 指标计算方法及装置 - Google Patents
指标计算方法及装置 Download PDFInfo
- Publication number
- CN114358596A CN114358596A CN202210004809.6A CN202210004809A CN114358596A CN 114358596 A CN114358596 A CN 114358596A CN 202210004809 A CN202210004809 A CN 202210004809A CN 114358596 A CN114358596 A CN 114358596A
- Authority
- CN
- China
- Prior art keywords
- target index
- service
- indexes
- respective values
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004364 calculation method Methods 0.000 title claims abstract description 93
- 238000000034 method Methods 0.000 claims abstract description 59
- 230000008569 process Effects 0.000 claims abstract description 27
- 238000013515 script Methods 0.000 claims description 13
- 238000013507 mapping Methods 0.000 claims description 12
- 230000000007 visual effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 11
- 238000012545 processing Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 4
- 239000000126 substance Substances 0.000 description 4
- 230000006378 damage Effects 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06393—Score-carding, benchmarking or key performance indicator [KPI] analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/40—Business processes related to the transportation industry
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Tourism & Hospitality (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Educational Administration (AREA)
- General Business, Economics & Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Mathematical Physics (AREA)
- Game Theory and Decision Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及数据计算技术领域,提供了一种指标计算方法及装置,方法包括:存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则;确定指标计算请求;其中,指标计算请求携带目标指标组或目标指标组的标识;确定目标指标组匹配的多个原始指标各自的值;调用数据库引擎基于目标指标组匹配的可配置文件指示的计算规则对匹配的多个原始指标各自的值进行计算,确定目标指标组中各业务指标各自的值。通过电子表格软件对目标指标组的可配置文件进行维护,降低了维度难度;将业务指标的计算过程转化为数据库引擎的执行过程,便于扩展。
Description
技术领域
本发明涉及数据计算技术领域,尤其涉及指标计算方法及装置。
背景技术
在通信行业的数据采集领域伴随着许多资源、性能、负荷等指标的采集工作,这些指标通常不是单独出现的,而是一组紧相关的指标一起出现或被采集,这一组指标组成的二维表结构就称之为指标组,为支撑上层业务分析工作,通常需要多个指标组进行关联计算得到更有意义的目标指标组,典型的有资源回填、多表关联。
目前,对于每一种目标指标组,针对目标指标组的特点进行定制开发得到定制代码,通过运行该代码得到目标指标组中各业务指标各自的值。
但是,定制代码的后期维护难度较大。
发明内容
本发明提供了一种指标计算方法、装置、计算机可读存储介质及电子设备,通过电子表格软件对目标指标组的可配置文件进行维护,降低了维度难度;另外,将业务指标的计算过程转化为数据库引擎的执行过程,逻辑清晰,有非常强的适用性,便于扩展。
第一方面,本发明提供了一种指标计算方法,包括:
存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,所述可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则;
确定指标计算请求;其中,所述指标计算请求携带目标指标组或目标指标组的标识;
确定所述目标指标组匹配的多个原始指标各自的值;
调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述目标指标组中各业务指标各自的值。
第二方面,本发明提供了一种指标计算装置,包括:
文件存储模块,用于存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,所述可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则;
请求确定模块,用于确定指标计算请求;其中,所述指标计算请求携带目标指标组或目标指标组的标识;
字段确定模块,用于确定所述目标指标组匹配的多个原始指标各自的值;
执行模块,用于调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述目标指标组中各业务指标各自的值。
第三方面,本发明提供了一种计算机可读存储介质,包括执行指令,当电子设备的处理器执行所述执行指令时,所述处理器执行如第一方面中任一所述的方法。
第四方面,本发明提供了一种电子设备,包括处理器以及存储有执行指令的存储器,当所述处理器执行所述存储器存储的所述执行指令时,所述处理器执行如第一方面中任一所述的方法。
本发明提供了一种指标计算方法、装置、计算机可读存储介质及电子设备,该方法通过存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则;然后,确定指标计算请求;其中,指标计算请求携带目标指标组或目标指标组的标识;然后,确定目标指标组匹配的多个原始指标各自的值;之后,调用数据库引擎基于目标指标组匹配的可配置文件指示的计算规则对多个原始指标各自的值进行计算,确定目标指标组中各业务指标各自的值。综上所述,本发明的技术方案,通过电子表格软件对目标指标组的可配置文件进行维护,降低了维度难度,节约了人力资源;另外,将业务指标的计算过程转化为数据库引擎的执行过程,逻辑清晰,有非常强的适用性,便于扩展。
上述的非惯用的优选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
为了更清楚地说明本发明实施例或现有的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种指标计算方法的流程示意图;
图2a为本发明实施例提供的一种计算规则的结构示意图;
图2b为本发明实施例提供的另一种计算规则的结构示意图;
图3为本发明实施例提供的存储系统的结构示意图;
图4为本发明实施例提供的另一种指标计算方法的流程示意图;
图5为本发明实施例提供的一种计算规则配置模板的示意图;
图6a为本发明实施例提供的资源文件1的示意图;
图6b为本发明实施例提供的资源文件2的示意图;
图6c为本发明实施例提供的本地词典的示意图;
图7为本发明实施例提供的目标指标组的示意图;
图8为本发明实施例提供的一种指标计算装置的结构示意图;
图9为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合具体实施例及相应的附图对本发明的技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,为本发明实施例提供的一种指标计算方法。本发明实施例所提供的方法可应用在电子设备上,具体可以应用于服务器或一般计算机上。需要说明的是,电子设备可以理解为服务提供方,本实施例中,方法具体包括以下步骤:
步骤101、存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则。
本步骤中,采用基于电子表格的形式定义目标指标组的计算规则,方便理解与维护。
作为一种可行的实现方式,电子设备具体可通过如下实现方式确定多个原始指标:
电子设备确定多个原始指标组,基于多个原始指标组确定用于计算目标指标组的若干个原始指标组,将若干个原始指标组中的指标分别作为原始指标。
应当理解,电子设备在采集数据的过程中,指标不是单一出现的,而是一组紧相关的指标一起被采集,这些紧相关的多个指标可以称为原始指标组。示例地,获取设备信息,每5分钟生成一份表,该表中的多个指标作为一个原始指标组。另外,多个原始指标可能存在和目标指标组中的业务指标无关的指标,但是在采集过程中是不可分割的指标。
在实际应用,原始指标的值通常为多个,如采用表格的方式存储原始指标的值,则原始指标的值可以理解为原始指标的字段中字段名之外的内容。
作为一种可行的实现方式,计算规则指示了从多个原始指标各自的值计算得到目标指标组中各业务指标各自的值的计算方式。
如图5所示,在一个例子中,计算规则可以包括以下部分:
第一部分:目标指标组配置。其中,目标指标组配置可以理解为定义目标指标组的第一基本信息。示例地,第一基本信息可以包括存储类型,数据粒度,数据类别,显示名称等,具体需要结合实际需求确定,本实施例对此不做具体限定。
第二部分:中间表配置和中间字段配置。其中,中间表配置可以理解为定义中间表的第二基本信息。示例地,第二基本信息可以包括表名称、存储类型、所属的目标指标组。中间字段配置可以理解为定义中间表中的字段的第三基本信息。示例地,第三基本信息可以包括:字段名称、字段类型、所属的中间表等,具体需要结合实际需求确定,本实施例对此不做具体限定。
第三部分:业务指标配置及映射规则配置。其中,业务指标配置主要用于配置业务字段名称、字段类型、最大值、最小值、来源表(包括多个原始指标各自的值)、来源字段等,具体需要结合实际需求确定,本实施例对此不做具体限定。
进一步的,如图2a所示,计算规则可以为简单运算、多个原始指标组关联、中间表视图、视图归并等处理。其中,中间表视图可以理解为包含中间表配置的字段名称和字段名称对应的值的表;视图归并可以理解为将不同的中间表视图归并成一个视图。需要说明的是,考虑到一个原始指标组无法计算目标指标组中的各业务指标,因此需要对多个原始指标组进行关联,即合并多个原始指标组中的指标。
在一个例子中,如图2b所示,简单运算可以理解为过滤、衍生、重命名、重排序、投影等。其中,过滤可以理解为选取需要的指标的值,衍生可以理解为复制需要的指标的值,投影可以理解为依据原始指标生成的目标指标组中的业务指标,重命名可以理解为改变指标的名称,重排序可以理解为改变指标的顺序。
需要说明的是,若计算规则仅仅包括简单运算,则无需配置中间表和中间表中的字段。
因此,本实施例主要实现2类的计算规则。第1类是多个原始指标通过简单运算可得到目标指标组;对应的,目标指标组中的业务指标和原始指标含义相同,但是,名称不同;第2类是多个原始指标经过一系列中间运算最终归并得到目标指标组;对应的,目标指标组中的各业务指标可以为多个原始指标之外的其他指标;或者,目标指标组中的部分业务指标可以与原始指标的含义相同,部分业务指标为原始指标之外的其他指标。
作为一种可行的实现方式,一个工作表表示一个目标指标组的计算规则。
示例地,采用Excel形式配置计算规则,将每个Sheet表示一个目标指标组的计算过程。
作为一种可行的实现方式,电子表格软件为Excel软件。
作为一种可行的实现方式,多个目标指标组各自对应的可配置文件保存在硬盘等存储介质中,可反复调用。
作为一种可行的实现方式,多个原始指标可以为网络设备的相关指标。比如,网络设备可以为路由器,对应的,路由器的指标可以为域名、在线用户数、访问限制用户数、不同业务各自的用户数、计费成功率、地址池的利用率等,具体需要结合实际需求确定,本实施例对此不做具体限定。
值得注意的是,考虑到网络设备的一些指标是厂家私有的,真实意义只有设备厂家知道;因此,在实际采集的任务中,基于设备厂家提供的指标采集数据即可,指标的具体含义可以咨询设备厂家。
需要说明的是,上述网络设备仅仅作为示例,并不构成具体限定,任何能够进行物联的设备,且需要基于采集到的物联的设备的相关数据进行指标计算,均可使用本实施例提供的指标计算方法。
步骤102、确定指标计算请求;其中,指标计算请求携带目标指标组或目标指标组的标识。
在业务方需要进行目标指标组的计算时,向服务提供方(电子设备)发起指标计算请求,例如可以采取http请求等方式。其中,指标计算请求中携带有用于需要计算的目标指标组或目标指标组的标识,从而服务提供方(电子设备)在接收到请求以后可以计算目标指标组内的各业务指标各自的值。
在实际应用中,不同目标业务组的可配置文件的命名不同,因此,目标指标组的标识可以为可配置文件的命名;对应的,基于目标指标组的标识即可匹配到可配置文件。
步骤103、确定目标指标组匹配的多个原始指标各自的值。
作为一种可行的实现方式,具体可通过如下实现方式确定目标指标组匹配的多个原始指标各自的值:
确定业务文件;其中,业务文件包括目标指标组匹配的多个原始指标各自的值;将业务文件映射成数据库引擎中的定义表;调用数据库引擎基于定义表读取业务文件并解析,确定多个原始指标各自的值。
该实现方式中,通过映射关联处理,避免数据先集中入库后定时计算造成集中数据库读写压力以及数据处理时延问题。
其中,数据库引擎可以理解为用于存储、处理和保护数据的核心服务。利用数据库引擎可控制访问权限并快速处理事务,从而满足需要处理大量数据的要求。示例地,数据库引擎为SQL引擎,考虑到多个原始指标各自的值通常可能存储在远程系统内,因此,SQL引擎优选分布式SQL查询引擎,比如,PrestoDB/PrestoSQL;基于PrestoDB/PrestoSQL中Connector的扩展机制,实现支持本地文件系统和远程文件系统的只读Connector,以支持对于存储在文件系统中的数据文件的读取能力。
需要说明的是,在实际应用中,数据库引擎会创建一个对象,该对象用于存储定义表。
业务文件映射为数据库引擎中的定义表可以理解为按照数据库引擎的组织和结构将业务文件映射成数据库引擎中的定义表,从而使得数据库引擎可以基于该定义表获取业务文件并解析该业务文件。
在一个例子中,定义表包括业务文件的位置和业务文件的内容。
示例地,业务文件的位置可以为统一资源定位符。对应地,电子设备调用数据库引擎解析统一资源定位符以读取业务文件并解析,确定目标指标组中各业务指标各自的值。
示例地,业务文件的内容至少用于说明业务文件中的多个原始指标的值的位置。如业务文件为电子表格文件,则业务文件的内容至少用于说明业务文件中的多个原始指标各自的字段的位置。
值得注意的是,业务文件可以存在本地的数据库内,也可以存在远程的数据库内。本地的数据库可以理解为电子设备内的数据库,远程的数据库可以理解为其他电子设备内的数据库。
进一步的,定义表还可以包括分隔符。需要说明的是,分隔符用于对业务文件进行解析,以提取多个原始指标各自的值。在一些可能的情况下,若业务文件中存在特殊的分隔符,为了确保可以较为准确的对业务文件进行解析,因此需要定义分隔符。
在一个例子中,业务文件为标准文件。换言之,业务文件中的内容为标准化后的内容。
示例地,具体可通过如下实现方式确定业务文件:
存储多个目标指标组各自对应的数据标准化脚本;确定原始业务文件;其中,原始业务文件至少包括与目标指标组匹配的多个原始指标;执行目标指标组匹配的数据标准化脚本,对原始业务文件的内容进行标准化处理,确定业务文件。
需要说明的是,考虑到目标指标组的多个原始指标各自的值的来源不同,(如:不同的设备厂家),数据组织格式、数值单位、数据类型等都可能有不同的规格说明,因此需要进行标准化处理。而不同目标指标组的多个原始指标各自的值的来源不同,因此,需要存储不同目标指标组各自对应的数据标准化脚本。
其中,数据标准化脚本用于针对不同的原始业务文件的内容进行标准化,通常需要对不同的原始业务文件中的多个原始指标各自的值进行标准化。示例地,标准化可以为统一单位,统一小数点,统一时间表达的方式,补充缺失值等。
值得注意的是,数据标准化脚本通常以文件的形式保存在硬盘等存储介质中,因此,数据标准化脚本不是临时文件,在需要是可以反复调用。
数据标准化脚本中通过脚本语言编写的代码实现了数据标准化,这里所称的脚本语言可以是JavaScript、Shell、Python、Perl等脚本语言中的任意一种,具体可结合实际需求确定,本实施例对此不做具体限定。
进一步的,若已经存储有匹配的目标指标组的业务文件,则无需按照上述方式确定业务文件,在后续过程中,直接调用业务文件即可。
步骤104、调用数据库引擎基于目标指标组匹配的可配置文件指示的计算规则对匹配的多个原始指标各自的值进行计算,确定目标指标组中各业务指标各自的值。
本步骤中,将指标中各种复杂转换处理问题,统一转换为数据库引擎的执行过程,逻辑清晰,有非常强的适用性,便于扩展。
作为一种可行的实现方式,基于目标指标组匹配的可配置文件,生成数据库引擎对应的可执行语句;调用数据库引擎执行可执行语句,对匹配的多个原始指标各自的值进行计算,确定目标指标组中各业务指标各自的值。
其中,可执行语句通常由多条,这些语句用于实现读取多个原始指标各自的值并按照目标指标组匹配的计算规则进行计算。
在一个例子中,数据库引擎为SQL引擎,可执行语句为SQL语句。
在一个例子中,可配置文件指示的计算规则包括多个中间指标;对应的,调用数据库引擎执行可执行语句,对匹配的多个原始指标各自的值进行计算,确定多个中间指标各自的值;基于多个中间指标各自的值,确定目标指标组中各业务指标各自的值。
需要说明的是,可执行语句存储在内存中,数据库引擎通过调用内存存储的可执行语句并执行从而得到执行结果,并将执行结果存储在内存中。
进一步的,存储目标指标组中各业务指标各自的值,删除数据库引擎执行可执行语句的过程中产生的内容。
应当理解的是,在指标计算完成后,删除计算过程中产生的内容,实现环境销毁。示例地,该内容可以包括多个原始指标、目标指标组、目标指标组对应的视图、中间表视图、定义表。
如图3所示,可以将目标指标组中各业务指标各自的值存储到其他的电子设备,从而便于在后续需要时调用。这里,其他电子设备可以为服务器,也可以为服务器集群,还可以为文件存储系统等,本实施例对此不做具体限定,具体需要结合实际需求确定。
通过以上技术方案可知,本实施例存在的有益效果是:
通过电子表格软件对目标指标组的可配置文件进行维护,降低了维度难度。另外,将业务指标的计算过程转化为数据库引擎的执行过程,逻辑清晰,有非常强的适用性,便于扩展。
图1所示仅为本发明方法的基础实施例,在其基础上进行一定的优化和拓展,还能够得到方法的其他优选实施例。本实施例在前述实施例的基础上,结合应用场景进行了更加具体的描述。
本实施例所结合的具体场景为:电子表格软件为Excel、数据库引擎为PrestoDb/PrestoSQL,多个原始指标图6a、图6b和图6c示出的IP城域网华为ME60 BRAS设备的相关指标,域名(Domain name)、状态(State)、CAR(域名类型)、访问限制的用户数(Access-limit)、在线的用户数(Online)、BOD业务的用户数(BODNum)、RptVSM业务的用户数(RptVSMNum)、互联网通信协议第四版的用户数(IPv4)、(互联网通信协议第六版的用户数(IPv6)和同时使用互联网通信协议第四版和第六版的用户数(Dual)、用户类型(Type)、网络模型(Model),采集IP城域网华为ME60 BRAS设备的相关指标的数据以资源文件和本地字典表的形式存储,目标指标组中的3个业务指标为图7示出的用户类型(use Type)、总用户数(Total user)、Ipv4的用户数(Ipv4)、Ipv6的用户数(Ipv6),以图5示出的计算规则配置模板生成目标指标组的计算过程规则Sheet表。
另外,BOD(Bandwidth on Demand)业务是一种针对用户实现动态分配带宽的增值业务,在用户有带宽调整需求时,可以通过Portal Server自助选择BOD业务,业务动态激活和注销,不需要运营商通过更改配置完成带宽更改,同时也给运营商提供了更为灵活的基于业务的计费方式。RptVSM业务可以具体咨询设备厂家确定其具体含义。
如图4所示,具体的实施步骤如所示:
1)依托于分布式SQL查询引擎PrestoDB/PrestoSQL,创建一个空的Schema。
2)获取设备信息,每5分钟生成一份资源文件1表6a,每5分钟生成一份资源文件2如表6b,本地字典表文件如表6c所示,并将资源文件、本地字典表文件映射为定义表,即PrestoDB/PrestoSQL表。
3)确定以图5示出的计算规则配置模板生成的目标指标组的计算过程规则Sheet表。
4)调用定义好的计算过程规则Sheet表指示的计算规则生成如图7所示的目标指标组表。
5)保存生成的如图7所示的目标指标组表。
6)删除所有表、图、数据以及Schema,即环境销毁。
需要说明的是,由于配置计算过程规则Sheet表的人员是知道映射定义表的规则,因此,计算过程规则Sheet表中的内容和定义表的内容是适配的。
本实施例的有益效果如下:
第一方面,采用基于Excel形式定义目标指标组的计算规则,方便理解与维护。
第二方面,将指标中各种复杂转换处理问题,统一转换为数据库引擎的执行过程,逻辑清晰,有非常强的适用性,便于扩展。
第三方面,在数据进入数据库前进行映射关联处理,避免数据先集中入库后定时计算造成集中数据库读写压力以及数据处理时延问题。
基于与本发明方法实施例相同的构思,请参考图8,本发明实施例还提供了一种指标计算装置,包括:
文件存储模块801,用于存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,所述可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则;
请求确定模块802,用于确定指标计算请求;其中,所述指标计算请求携带目标指标组或目标指标组的标识;
数据确定模块803,用于确定所述目标指标组匹配的多个原始指标各自的值;
执行模块804,用于调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述目标指标组中各业务指标各自的值。
作为一种可行的实现方式,所述数据确定模块803,包括:文件确定单元、映射单元及读取解析单元;其中,
所述文件确定单元,用于确定业务文件;其中,所述业务文件包括所述目标指标组匹配的多个原始指标各自的值;
所述映射单元,用于将所述业务文件映射成所述数据库引擎中的定义表;
所述读取解析单元,用于调用所述数据库引擎基于所述定义表读取所述业务文件并解析,确定所述多个原始指标各自的值。
作为一种可行的实现方式,所述装置还包括:定义表删除模块;其中,
所述定义表删除模块,用于确定所述目标指标组中各业务指标各自的值之后,删除所述定义表。
作为一种可行的实现方式,所述定义表包括所述业务文件的统一资源定位符;
所述读取解析单元,用于调用所述数据库引擎解析所述定义表中所述业务文件的统一资源定位符,读取所述业务文件。
作为一种可行的实现方式,所述定义表还包括所述业务文件的分隔符;
所述读取解析单元,还用于调用所述数据库引擎基于所述定义表中所述业务文件的分隔符,解析读取的所述业务文件。
作为一种可行的实现方式,所述装置还包括脚本存储模块:
所述脚本存储模块,用于存储多个目标指标组各自对应的数据标准化脚本;
所述文件确定单元,包括:文件确定子单元和标准化子单元;其中,
所述文件确定子单元,用于确定原始业务文件;其中,所述原始业务文件至少包括与所述目标指标组匹配的多个原始指标各自的值;
所述标准化子单元,用于基于所述目标指标组匹配的数据标准化脚本,对所述原始业务文件的内容进行标准化处理,确定业务文件。
作为一种可行的实现方式,所述文件确定单元,用于存储所述多个目标指标组中部分指标组各自对应的业务文件;确定所述目标指标组匹配的业务文件。
作为一种可行的实现方式,所述计算规则包括多个原始指标和对应的目标指标组之间的多个中间指标;
所述执行模块804,用于调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述多个中间指标各自的字段;基于所述多个中间指标各自的字段确定所述目标指标组中各业务指标各自的值。
作为一种可行的实现方式,所述可视配置文件通过所述电子表格软件打开后进行修改和重配置。
作为一种可行的实现方式,所述数据库引擎为SQL引擎。
作为一种可行的实现方式,所述电子表格软件为Excel软件。
作为一种可行的实现方式,所述装置还包括:保存模块和环境销毁模块;其中,
所述保存模块,用于保存所述目标指标组中各业务指标各自的值;
所述环境销毁模块,用于删除所述数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算的过程中产生的内容。
图9是本发明实施例提供的一种电子设备的结构示意图。在硬件层面,该电子设备包括处理器901以及存储有执行指令的存储器902,可选地还包括内部总线903及网络接口904。其中,存储器902可能包含内存9021,例如高速随机存取存储器(Random-AccessMemory,RAM),也可能还包括非易失性存储器9022(non-volatile memory),例如至少1个磁盘存储器等;处理器901、网络接口904和存储器902可以通过内部总线903相互连接,该内部总线903可以是ISA(Industry Standard Architecture,工业标准体系结构)总线、PCI(Peripheral Component Interconnect,外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture,扩展工业标准结构)总线等;内部总线903可以分为地址总线、数据总线、控制总线等,为便于表示,图9中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。当然,该电子设备还可能包括其他业务所需要的硬件。当处理器901执行存储器902存储的执行指令时,处理器901执行本发明任意一个实施例中的方法,并至少用于执行如图1或图4所示的方法。
在一种可能实现的方式中,处理器从非易失性存储器中读取对应的执行指令到内存中然后运行,也可从其它设备上获取相应的执行指令,以在逻辑层面上形成一种指标计算装置。处理器执行存储器所存放的执行指令,以通过执行的执行指令实现本发明任实施例中提供的一种指标计算方法。
处理器可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本发明实施例还提供了一种计算机可读存储介质,包括执行指令,当电子设备的处理器执行执行指令时,所述处理器执行本发明任意一个实施例中提供的方法。该电子设备具体可以是如图9所示的电子设备;执行指令是一种指标计算装置所对应计算机程序。
本领域内的技术人员应明白,本发明的实施例可提供为方法或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例,或软件和硬件相结合的形式。
本发明中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上所述仅为本发明的实施例而已,并不用于限制本发明。对于本领域技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本发明的权利要求范围之内。
Claims (10)
1.一种指标计算方法,其特征在于,包括:
存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,所述可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则;
确定指标计算请求;其中,所述指标计算请求携带目标指标组或目标指标组的标识;
确定所述目标指标组匹配的多个原始指标各自的值;
调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述目标指标组中各业务指标各自的值。
2.根据权利要求1所述的方法,其特征在于,所述确定所述目标指标组匹配的多个原始指标各自的值,包括:
确定业务文件;其中,所述业务文件包括所述目标指标组匹配的多个原始指标各自的值;
将所述业务文件映射成所述数据库引擎中的定义表;
调用所述数据库引擎基于所述定义表读取所述业务文件并解析,确定所述多个原始指标各自的值。
3.根据权利要求2所述的方法,所述方法还包括:
确定所述目标指标组中各业务指标各自的值之后,删除所述定义表。
4.根据权利要求2所述的方法,所述定义表包括所述业务文件的统一资源定位符;
所述调用所述数据库引擎基于所述定义表读取所述业务文件,包括:
调用所述数据库引擎解析所述定义表中所述业务文件的统一资源定位符,读取所述业务文件。
5.根据权利要求2所述的方法,所述方法还包括:存储多个目标指标组各自对应的数据标准化脚本;
所述确定业务文件,包括:
确定原始业务文件;其中,所述原始业务文件至少包括与所述目标指标组匹配的多个原始指标各自的值;
基于所述目标指标组匹配的数据标准化脚本,对所述原始业务文件的内容进行标准化处理,确定业务文件。
6.根据权利要求2所述的方法,其特征在于,所述确定所述目标指标组匹配的业务文件,包括:
存储所述多个目标指标组中部分指标组各自对应的业务文件;
确定所述目标指标组匹配的业务文件。
7.根据权利要求1所述的方法,其特征在于,所述计算规则包括多个原始指标和对应的目标指标组之间的多个中间指标;
所述调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述目标指标组中各业务指标各自的值,包括:
调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述多个中间指标各自的字段;基于所述多个中间指标各自的字段确定所述目标指标组中各业务指标各自的值。
8.根据权利要求1所述的方法,其特征在于,所述可视配置文件通过所述电子表格软件打开后进行修改和重配置。
所述数据库引擎为SQL引擎;
所述电子表格软件为Excel软件。
9.根据权利要求1所述的方法,其特征在于,所述方法还包括:
保存所述目标指标组中各业务指标各自的值,删除所述数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算的过程中产生的内容。
10.一种指标计算装置,其特征在于,包括:
文件存储模块,用于存储电子表格软件生成的多个目标指标组各自对应的可配置文件;其中,所述可配置文件表示多个原始指标各自的值确定对应的目标指标组中各业务指标各自的值的计算规则;
请求确定模块,用于确定指标计算请求;其中,所述指标计算请求携带目标指标组或目标指标组的标识;
数据确定模块,用于确定所述目标指标组匹配的多个原始指标各自的值;
执行模块,用于调用数据库引擎基于所述目标指标组匹配的可配置文件指示的计算规则对所述匹配的多个原始指标各自的值进行计算,确定所述目标指标组中各业务指标各自的值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210004809.6A CN114358596A (zh) | 2022-01-04 | 2022-01-04 | 指标计算方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210004809.6A CN114358596A (zh) | 2022-01-04 | 2022-01-04 | 指标计算方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114358596A true CN114358596A (zh) | 2022-04-15 |
Family
ID=81107196
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210004809.6A Pending CN114358596A (zh) | 2022-01-04 | 2022-01-04 | 指标计算方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114358596A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024021581A1 (zh) * | 2022-07-28 | 2024-02-01 | 中兴通讯股份有限公司 | 指标查询方法、系统、电子设备和存储介质 |
-
2022
- 2022-01-04 CN CN202210004809.6A patent/CN114358596A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024021581A1 (zh) * | 2022-07-28 | 2024-02-01 | 中兴通讯股份有限公司 | 指标查询方法、系统、电子设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107704265B (zh) | 一种面向业务流可配置的规则生成方法 | |
CN109062952B (zh) | 一种数据查询方法、装置及电子设备 | |
CN109617647B (zh) | 报文转换方法、装置、计算机设备及计算机可读存储介质 | |
CN110351325B (zh) | 一种数据处理方法及相关设备 | |
CN110427188B (zh) | 单测断言程序的配置方法、装置、设备及存储介质 | |
CN111198898B (zh) | 大数据查询方法及大数据查询装置 | |
CN111626028A (zh) | 基于函数解析的报表生成方法、装置、设备及计算机介质 | |
CN111427784B (zh) | 一种数据获取方法、装置、设备及存储介质 | |
CN113901083A (zh) | 基于多解析器的异构数据源操作资源解析定位方法和设备 | |
CN103678396B (zh) | 一种基于数据模型的数据备份方法和装置 | |
CN114358596A (zh) | 指标计算方法及装置 | |
CN111752916B (zh) | 数据采集方法及装置、计算机可读存储介质、电子设备 | |
CN109814916B (zh) | 一种ivr流程的配置方法、装置、存储介质和服务器 | |
CN115114321A (zh) | 一种动态查询方法及系统 | |
CN115048359A (zh) | 一种多类型接入数据源的通用数据处理架构设计方法 | |
CN114186958A (zh) | 将列表数据导出为电子表格的方法、计算设备及存储介质 | |
CN113742359A (zh) | 一种即席查询方法、装置、电子设备及存储介质 | |
CN113448985A (zh) | 一种api接口生成方法、调用方法、装置及电子设备 | |
CN113535843B (zh) | 数据查询方法、装置、电子设备及可读存储介质 | |
CN111221846B (zh) | 一种sql语句的自动翻译方法及装置 | |
CN116303581B (zh) | 异构数据库间分流查询负载适配方法、系统、设备及介质 | |
CN111125147B (zh) | 基于扩展预计算模型和sql函数的超大集合分析方法及装置 | |
CN114818612A (zh) | 一种基于结构化数据的报表代码的处理方法及相关设备 | |
CN117742779A (zh) | 资源配置信息的核查方法、装置、设备和存储介质 | |
CN117290375A (zh) | 一种HiveSQL脚本检验方法、装置、设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |