CN110647549A - 基于业务动态建模的数据指标解析与执行方法和装置 - Google Patents
基于业务动态建模的数据指标解析与执行方法和装置 Download PDFInfo
- Publication number
- CN110647549A CN110647549A CN201910930777.0A CN201910930777A CN110647549A CN 110647549 A CN110647549 A CN 110647549A CN 201910930777 A CN201910930777 A CN 201910930777A CN 110647549 A CN110647549 A CN 110647549A
- Authority
- CN
- China
- Prior art keywords
- index
- origin
- information
- data
- comprehensive
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24564—Applying rules; Deductive queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于业务动态建模的数据指标解析与执行方法，包括：接收用户输入的原点指标信息，接收用户根据业务需求输入的综合指标信息、原点指标的数据统计规则和综合指标的算法规则；对原点指标的数据统计规则和综合指标的算法规则进行解析，再根据数据源类型的适配机制将解析结果生成用于企业数据库直接执行的SQL语句；通过数据源适配接口与企业数据库进行数据源的连接并执行SQL语句，再返回企业数据库的执行结果。本发明还公开了一种基于业务动态建模的数据指标解析与执行装置。本发明通过指标界面可视化业务配置方式实现指标的定义和调整，完全解决了因需求变化而导致对专业开发人员的技术依赖。
Description
技术领域
本发明涉及数据处理技术领域。更具体地说，本发明涉及一种基于业务动态建模的数据指标解析与执行方法和装置。
背景技术
近年来，随着大数据、移动互联网、物联网等技术的兴起与发展，越来越多的企业逐渐引入大数据平台、互联网技术，积累了大量的内部运营和外部消费数据，企业数据资产的核心地位与价值被提升到了一个前所未有的高度，通过挖掘海量数据中蕴藏的业务价值并提供智能决策支撑，是持续提高生产经营管理能力和市场竞争力,促进经济效益和综合实力的全面提升的重要手段。
数据指标体系是企业数据标准体系和数据资产应用体系的重要组成部分，它从业务、技术两个方面，以企业信息系统数据资源为基础，以指标体系建设为纲，以指标管理为抓手实现数据资源标准化统一管理，通过指标的业务规则定义，建立基于战略为导向的企业指标体系，提升企业对自身数据资源管理的能力，规范企业数据统计方式，为相关数据统计岗位和数据消费信息系统提供可靠、可信、有价值和高质量的数据服务。
传统的数据指标的配置与计算，一般可分为指标定义、指标固定逻辑、指标计算和指标应用四个主要模块：一、指标定义：指标的基本描述信息，一般包括指标名称、指标释义、指标用途等信息。二、指标固定逻辑：针对每一个指标的内部计算逻辑，逐个设计并开发一套计算程序(一般是SQL逻辑或存储过程)，包括数据源、计算逻辑、输入输出等代码。三、指标计算：选定某一个指标进行数据度量时，调用本指标对应的固定计算逻辑并计算得出指标运算结果。四、指标应用：通过指标计算结果输出给指标调用方进行数据展现或数据分析。
但是，基于这种指标计算及应用模式，每一个指标都依赖于一个固定的、自定义开发的业务逻辑程序，当业务需求发生变化导致指标逻辑需要新增或变更时，指标对应的业务逻辑程序需要同步进行开发调整，这个开发任务必须由原开发商或专业的技术人员进行承接，造成了极大的应用不便和成本浪费。
发明内容
本发明的一个目的是解决至少上述问题，并提供至少后面将说明的优点。
本发明还有一个目的是提供一种基于业务动态建模的数据指标解析与执行方法和装置，通过业务动态建模的方式，实现数据指标计算引擎对业务模型进行自动解析、自动生成计算逻辑、自动进行指标计算，并通过指标中台化服务的模式进行指标结果的服务输出，实现了指标的快速定义、自动计算、灵活服务的应用要求。通过指标界面可视化业务配置方式实现指标的定义和调整，完全解决了因需求变化而导致对专业开发人员的技术依赖。
为了实现根据本发明的这些目的和其它优点，提供了一种基于业务动态建模的数据指标解析与执行方法，包括：
接收用户输入的原点指标信息，接收用户根据业务需求输入的综合指标信息、原点指标的数据统计规则和综合指标的算法规则；
对原点指标的数据统计规则和综合指标的算法规则进行解析，再根据数据源类型的适配机制将解析结果生成用于企业数据库直接执行的SQL语句；
通过数据源适配接口与企业数据库进行数据源的连接并执行SQL语句，再返回企业数据库的执行结果。
优选的是，还包括：企业数据库的执行结果通过中台服务方式返回。
优选的是，原点指标信息包括原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户输入的原点指标信息包括对原点指标定义信息、原点指标维度信息和原点指标基础数据信息分别配置字段，且将原点指标定义信息、原点指标维度信息和原点指标基础数据信息的配置字段与存储于企业数据库中原点指标定义信息、原点指标维度信息和原点指标基础数据信息的元数据分别对应映射。
优选的是，综合指标信息包括与业务需求相关的综合指标定义信息、原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户根据业务需求输入的综合指标信息包括对与业务需求相关的综合指标定义信息配置字段，及配置与业务需求相关的原点指标定义信息、原点指标维度信息和原点指标基础数据信息。
优选的是，接受用户根据业务需求输入的原点指标的数据统计规则包括添加综合指标信息中与业务需求相关的原点指标维度方面的约束条件。
优选的是，接收用户根据业务需求输入的综合指标的算法规则包括编辑综合指标与不同约束条件下同一原点指标之间的计算公式或编辑综合指标与多个不同原点指标之间的计算公式。
优选的是，原点指标的数据统计规则和综合指标的算法规则均用形式化文法语言描述，对原点指标数据的统计规则和综合指标的算法规则进行解析包括采用解析器对描述原点指标的数据统计规则和综合指标的算法规则的形式化文法语言分别进行解析，提取出其中的原点指标信息。
优选的是，原点指标信息还包括原点指标基础数据常量系数信息，接收用户输入的原点指标信息还包括对原点指标基础数据常量系数信息配置字段，且将原点指标基础数据常量系数信息与存储于企业数据库中原点指标基础数据常量系数的元数据对应映射。
本发明还提供一种基于业务动态建模的数据指标解析与执行装置，包括：
综合指标模型配置模块，其用于接收用户输入的原点指标信息，接收用户根据业务需求输入的综合指标信息、原点指标的数据统计规则和综合指标的算法规则；
综合指标模型解析模块，其用于对原点指标的数据统计规则和综合指标的算法规则进行解析，再根据数据源类型的适配机制将解析结果生成用于企业数据库直接执行的SQL语句；
综合指标计算模块，其通过数据源适配接口与企业数据库进行数据源的连接并执行SQL语句，再向前端指标调用模块返回企业数据库的执行结果。
优选的是，所述综合指标计算模块将企业数据库的执行结果通过中台服务方式返回。
优选的是，综合指标模型配置模块中的原点指标信息包括原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户输入的原点指标信息包括对原点指标定义信息、原点指标维度信息和原点指标基础数据信息分别配置字段，且将原点指标定义信息、原点指标维度信息和原点指标基础数据信息的配置字段与存储于企业数据库中原点指标定义信息、原点指标维度信息和原点指标基础数据信息的元数据分别对应映射。
优选的是，综合指标模型配置模块中的综合指标信息包括与业务需求相关的综合指标定义信息、原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户根据业务需求输入的综合指标信息包括对与业务需求相关的综合指标定义信息配置字段，及配置与业务需求相关的原点指标定义信息、原点指标维度信息和原点指标基础数据信息。
优选的是，综合指标模型配置模块中接受用户根据业务需求输入的原点指标的数据统计规则包括添加综合指标信息中与业务需求相关的原点指标维度方面的约束条件。
优选的是，综合指标模型配置模块中接收用户根据业务需求输入的综合指标的算法规则包括编辑综合指标与不同约束条件下同一原点指标之间的计算公式或编辑综合指标与多个不同原点指标之间的计算公式。
优选的是，综合指标模型解析模块中的原点指标的数据统计规则和综合指标的算法规则均用形式化文法语言描述，对原点指标的数据统计规则和综合指标的算法规则进行解析包括采用解析器对描述原点指标的数据统计规则和综合指标的算法规则的形式化文法语言分别进行解析，提取出其中的原点指标信息。
优选的是，综合指标模型配置模块中的原点指标信息还包括原点指标基础数据常量系数信息，接收用户输入的原点指标信息还包括对原点指标基础数据常量系数信息配置字段，且将原点指标基础数据常量系数信息与存储于企业数据库中原点指标基础数据常量系数的元数据对应映射。
本发明至少包括以下有益效果：本发明通过前端业务用户可识别、可操作的业务建模作为指标逻辑的输入，直接面对的是业务用户而不是技术开发人员，打通了指标体系建设与终端用户的“最后一公里”，通过广大业务用户对数据指标配置的全员亲自参与，极大地提高了企业指标体系建设的实施效率与成果转化能力，同时，对于企业业务需求变化带来的指标业务逻辑变更，通过本发明可视化动态业务建模能力支撑，有效避免了专业技术开发人员的实施界入，对企业指标体系的后期运维成本也大大降低。
本发明的其它优点、目标和特征将部分通过下面的说明体现，部分还将通过对本发明的研究和实践而为本领域的技术人员所理解。
附图说明
图1为本发明所述数据指标解析与执行方法的流程示意图；
图2为本发明所述数据指标解析与执行装置的结构示意图；
图3为本发明其中一实施例所述数据指标解析与执行装置的原点指标基础代码配置的可视化操作界面；
图4为本发明其中一实施例所述数据指标解析与执行装置的常量系数信息输入的可视化操作界面；
图5为本发明其中一实施例所述数据指标解析与执行装置的原点指标定义的可视化操作界面；
图6为本发明其中一实施例所述数据指标解析与执行装置的原点指标维度信息列表的可视化界面；
图7为本发明其中一实施例所述数据指标解析与执行装置的原点指标信息的可视化操作界面；
图8为本发明其中一实施例所述数据指标解析与执行装置的综合指标信息的可视化操作界面；
图9为本发明其中一实施例所述数据指标解析与执行装置的综合指标数据项选择的可视化操作界面；
图10为本发明其中一实施例所述数据指标解析与执行装置的综合指标数据项信息的可视化界面；
图11为本发明其中一实施例所述数据指标解析与执行装置的综合指标信息中原点指标维度约束项选择的可视化操作界面；
图12为本发明其中一实施例所述数据指标解析与执行装置的综合指标计算公式编辑的可视化操作界面；
图13为本发明其中一实施例所述数据指标解析与执行装置的综合指标信息中原点指标维度约束范围的可视化操作界面；
图14为本发明其中一实施例所述数据指标解析与执行装置的综合指标计算结果列表；
图15为本发明其中一实施例所述数据指标解析与执行装置的综合指标计算结果列表返回的可视化界面；
图16为本发明其中一实施例所述数据指标解析与执行装置的综合指标计算结果经中台服务方式返回的可视化界面。
具体实施方式
下面结合附图对本发明做进一步的详细说明，以令本领域技术人员参照说明书文字能够据以实施。
需要说明的是，下述实施方案中所述实验方法，如无特殊说明，均为常规方法，所述试剂和材料，如无特殊说明，均可从商业途径获得；在本发明的描述中，术语“横向”、“纵向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，并不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
如图1所示，本发明提供一种基于业务动态建模的数据指标解析与执行方法，包括：
S101、接收用户输入的原点指标信息，接收用户根据业务需求输入的综合指标信息、原点指标的数据统计规则和综合指标的算法规则；
原点指标的基本概念是指基于指标业务数据模型，满足管理需求，需要重点关注的业务数据项。原点指标是综合指标构成基础元素，一个综合指标由一个或者多个原点指标，以数学公式组合而成。
原点指标信息包括原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户输入的原点指标信息包括对原点指标定义信息、原点指标维度信息和原点指标基础数据信息分别配置字段，且将原点指标定义信息、原点指标维度信息和原点指标基础数据信息的配置字段与存储于企业数据库中原点指标定义信息、原点指标维度信息和原点指标基础数据信息的元数据分别对应映射。这里原点指标维度主要是指组成原点指标数据模型的基础维度数据，如“辅料订单数据模型”中的“生产点、供应商、辅料存货分类”等都属数据的基础维度，配置字段主要包括数据类型、代码类编码、代码类名称、数据来源、代码类备注、排序号等相关信息。
综合指标信息是从各职能域的业务活动和用户视图中，对整理出来的信息进行归类分析，识别出各业务需求主题，按照业务需求主题进行综合指标数据建模，形成的概念数据库或逻辑数据库，最终输出为业务需求主题的数据库表，是综合指标计算所需原点指标数据的容器。
故综合指标信息包括与业务需求相关的综合指标定义信息、原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户根据业务需求输入的综合指标信息包括对与业务需求相关的综合指标定义信息配置字段，以形成统一的命名和编码标准，使得同一个综合指标在整个系统中唯一识别，这里配置字段主要包括“数据结构分类、模型类型、数据结构名称、结构编码、数据周期、数据维度、数据值”等字段内容，及再配置与业务需求相关的原点指标定义信息、原点指标维度信息和原点指标基础数据信息。综合指标的数据结构包括原点指标的数据模型，按“模型类型”重点区分为“物理”、“逻辑”两种，将根据数据存储量及数据加工粒度等情况进行区分设置，具体说明如下：
物理模型：设置为该模型的数据结构，将在数据库中，按“字段列表”等信息创建对应的物理表内容，相应的原点指标数据，将物理存储在该数据结构表中；
逻辑模型：设置为逻辑模型的数据结构，不会在数据库中建立物理数据结构表，而是对应建立数据视图，通过视图的方式，调用对应的原点指标数据。
接受用户根据业务需求输入的原点指标的数据统计规则包括添加综合指标信息中与业务需求相关的原点指标维度方面的约束条件。接收用户根据业务需求输入的综合指标的算法规则包括编辑综合指标与不同约束条件下同一原点指标之间的计算公式或编辑综合指标与多个不同原点指标之间的计算公式。
这里原点指标信息还包括原点指标基础数据常量系数信息，原点指标基础数据常量系数信息是指综合指标公式组装配置过程中涉及到的单位常量系数或转换常量系数信息，如“万支转箱、小时转分钟、千克转克、元转万元”等。
接收用户输入的原点指标信息还包括对原点指标基础数据常量系数信息配置字段，主要包括“系数分类、系数名称、系数值、排序号、备注”等相关信息，再将原点指标基础数据常量系数信息与存储于企业数据库中原点指标基础数据常量系数的元数据对应映射。
S102、对原点指标的数据统计规则和综合指标的算法规则进行解析，再根据数据源类型的适配机制将解析结果生成用于企业数据库直接执行的SQL语句；
原点指标的数据统计规则和综合指标的算法规则均用形式化文法语言描述，对原点指标数据的统计规则和综合指标的算法规则进行解析包括采用解析器对描述原点指标的数据统计规则和综合指标的算法规则的形式化文法语言分别进行解析，提取出其中的原点指标信息。
具体而言是指，从综合指标模型中获取原点指标的相关信息和综合指标的计算公式，并调用原点指标的参数装载转换工具，进行常量系数转换，再循环读取各原点指标，并组合生成原点指标查询语句。根据用户选择的原点指标维度查询范围和原点指标数据集，主体拼装成原点指标查询语句的一部分。
S103、根据指标调用请求通过数据源适配接口与企业数据库进行数据源的连接并执行SQL语句，再返回企业数据库的执行结果。
上述步骤具体而言是指，根据原点指标SQL/XMLA查询各原点指标配置字段的唯一标识，通过访问企业数据库的数据集市或多维数据集获取原点指标数据。将各原点指标数据重新装入综合指标计算公式，完成综合指标正则运算，如对原点指标数据的加减乘除等运算方式在内的复杂的数值计算，除此之外，还需要进行普通运算所无法表达的同期、即期、平均值、累加值等特殊指标的计算，计算完成后输出综合指标计算值。
上述步骤中理想的是：企业数据库的执行结果通过中台服务方式返回。
如图2所示，本发明还提供一种使用上述方法的基于业务动态建模的数据指标解析与执行装置，包括：
综合指标模型配置模块，其用于接收用户输入的原点指标信息，接收用户根据业务需求输入的综合指标信息、原点指标的数据统计规则和综合指标的算法规则；
这里综合指标模型配置模块中的原点指标信息包括原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户输入的原点指标信息包括对原点指标定义信息、原点指标维度信息和原点指标基础数据信息分别配置字段，且将原点指标定义信息、原点指标维度信息和原点指标基础数据信息的配置字段与存储于企业数据库中原点指标定义信息、原点指标维度信息和原点指标基础数据信息的元数据分别对应映射。
这里综合指标模型配置模块中的综合指标信息包括与业务需求相关的综合指标定义信息、原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户根据业务需求输入的综合指标信息包括对与业务需求相关的综合指标定义信息配置字段，及配置与业务需求相关的原点指标定义信息、原点指标维度信息和原点指标基础数据信息。
这里综合指标模型配置模块中接受用户根据业务需求输入的原点指标的数据统计规则包括添加综合指标信息中与业务需求相关的原点指标维度方面的约束条件。
这里综合指标模型配置模块中接收用户根据业务需求输入的综合指标的算法规则包括编辑综合指标与不同约束条件下同一原点指标之间的计算公式或编辑综合指标与多个不同原点指标之间的计算公式。
这里综合指标模型配置模块中的原点指标信息还包括原点指标基础数据常量系数信息，接收用户输入的原点指标信息还包括对原点指标基础数据常量系数信息配置字段，且将原点指标基础数据常量系数信息与存储于企业数据库中原点指标基础数据常量系数的元数据对应映射。
综合指标模型解析模块，其用于对原点指标的数据统计规则和综合指标的算法规则进行解析，再根据数据源类型的适配机制将解析结果生成用于企业数据库直接执行的SQL语句。
这里综合指标计算模块中的原点指标的数据统计规则和综合指标的算法规则均用形式化文法语言描述，对原点指标的数据统计规则和综合指标的算法规则进行解析包括采用解析器对描述原点指标的数据统计规则和综合指标的算法规则的形式化文法语言分别进行解析，提取出其中的原点指标信息。
综合指标计算模块，其根据指标调用请求通过数据源适配接口与企业数据库进行数据源的连接并执行SQL语句，再返回企业数据库的执行结果。理想的是所述综合指标计算模块将企业数据库的执行结果通过中台服务方式返回。
关于综合指标计算模块性能，综合指标的计算有两种场景，一种是定时计算，一种是即时查询的计算。特别是即时查询的计算，对综合指标计算的并发与响应要求非常高。而由于综合指标计算模块的数据源来源于各业务系统，其数据源格式多样，数据量大，而且，随着管理创新和业务拓展，必然会增加新的数据源和新的评价指标，这样对综合指标计算模块的灵活性和扩展性，运行效率提出很高的要求。
因此，本发明中采用以下的策略来提高综合指标计算模块的性能：
内存缓存：在计算过程中，对于综合指标模型的定义、规格等元数据，尽可能在内存中缓存，从而避免高代价的读取。对于指标计算过程的部分原点指标数据可以做缓存以避免多次的数据访问；
并行计算：尽可能的利用现代CPU的多核特性，将一个操作分解成一组粒度更细的工作单元,并且这些工作单元可以在不同的处理器内核上运行。在开发中，合理使用JVM的新并行计算的特性，如函数式编程、闭包、流式计算等模式。
集群计算：为了提高访问的并发用户支持，综合指标计算模块的部署于多台应用服务器组成的集群中，计算负载可分配到多台主机，多而可水平扩展，达到更高的并发量。
下面针对本发明装置，以“卷烟销量”指标为例，进行指标动态配置、计算执行以及结果展现的全过程演示：
【指标名称】卷烟销量；
【指标周期】最小周期为天，可按月、季、半年、年为周期统计；
【指标维度】销售分公司、卷烟品牌、规格、价类等；
【指标单位】箱(一箱为50000支)；
【指标公式】卷烟销量＝∑(大连区域各品牌卷烟销量)；
【指标说明】大连市局(含区县分公司)全域卷烟销售数量；
(1)针对“卷烟销量”原点指标的业务维度(分公司、卷烟品牌、规格、价类等)进行基础信息的配置，如图3所示，针对大连市区的分公司，分别进行维度编码、名称、排序号、范围以及说明等基础信息的配置。
(2)原点指标配置过程中，需要应用一些单位转化的常量系统，因此需要统一过行定义，如图4所示，在实际业务系统中，卷烟销量数据的存储单位是“支”，但在业务统计(指标计算)中，关于“卷烟销量”指标的单位是“箱”，根据经验转换1箱＝50000支，所以需要定义一个转化常量：50000。
(3)针对原点指标的数据来源，进行可视化的配置，明确数据结构分类：营销，定义数据结构名称：营销平台卷烟销售模型，数据结构编码：DG_GM_SALES_DL，以及其它相关属性。
同时，针对数据结构模型的内容配置，需根据营销平台实际数据结构以及原点指标需要的数据结构进行识别，并进行以下信息的动态配置(如图5所示)：
原点指标数据模型的结构主要包括两大核心部分(如图6所示)：
一、数据模型维度信息：基于指标数据模型可定义的数据分类维度：如省份、市区、分公司、品牌、规格、价类等，每一个维度对接已定义的指标维度基础信息，后续指标维度可自动根据维度基础信息进行查询和展现。
二、数据模型数据项信息：每一个数据模型除了有基本的数据维度信息以外，还有相应的数据信息如：工商调拨价、批发价、卷烟销量、毛利、卷烟销售金额等，这些数据项可用于原点指标的定义和统计。
(4)如图7所示，根据已定义的“营销平台卷烟销售模型”，进行原点指标数据的定义，从该数据模型中自动识别原点指标的数据维度和字段(字段为数据模型中的数据项)，明确原点指标的最小周期为日(周期可≥日)，明确原点指标单位为“支”，定义完成后管理平台自动生成卷烟销量的原点。
(5)如图8所示，对于已经定义完成的数据原点，进行“卷烟销量”综合指标的定义，定义内容包括综合指标基础信息：分类、所属、名称、周期、单位、维度、描述、附件、属性等信息。
同时，针对综合指标的业务逻辑，需进行综合指标的公式配置，首先需要选择组成指标的因子(子指标、原点或常量)
如图9所示，关于“卷烟销量”指标，需选择的数据项有两个，一个是“卷烟销量”原点，一个是“50000”的常量。
如图10所示，用于配置综合指标的两个数据项：原点：卷烟销量和常量：50000选择后，针对原点数据，可进行一定的条件约束，比如，现在统计的是在大连区域的卷烟销量，所以卷烟销量的销售市区维度应该限定于大连，可进行相应的条件约束配置。
如图11：指标数据项选择完成并且数据项相应的约束条件设定完成后，可根据“卷烟销量”指标的计算公式进行相应的可视化配置。
根据综合指标的数据项(原点和常量)按照综合指标计算公式进行数据指标的公式配置，公式配置面板如上：卷烟销量＝∑(卷烟销量)/50000。
“卷烟销量”指标配置完成后，即可形成本指标的基本配置信息如图12。
至此，“卷烟销量”指标的相关可视化配置工作已经完成。
(6)对于已定义完成的综合指标，可对综合指标按一定的条件和分组规则进行数据统计，如图13所示，针对“卷烟销量”指标，因指标周期为天，在数据统计时，可按天、月、季、年进行选择，指标维度根据“卷烟销量”定义的维度项进行自动显示，每一个维度对接维度的基础代码类进行初始化。
假设，我们对“卷烟销量”指标进行如下条件的统计：
统计指标：卷烟销量；
统计周期：年(2017年)；
统计维度：按分公司统计；
如上图所示，选择“卷烟销量”指标，监控周期为年，监控时间为：2017年，分公司维度选择“全选”，点击“度量”按钮。
此时，系统内置的指标引擎，就会针对“卷烟销量”指标所配置的基础代码类信息、常量信息、数据模型信息、指标原点信息、指标配置信息、指标规则定义信息，以及在界面上所选的指标统计条件信息，进行统一规则解析和逻辑组装，自动形成以下数据查询逻辑：
针对上生成的指标计算逻辑，指标引擎基于底层数据适配，进行指标数据查询执行，返回如图14所示的数据结构。
基于以上指标引擎的规则解析、转化、逻辑组装以及计算执行返回结果，在指标统计结果画面最终展现如图15所示信息。
通过“卷烟销售”指标的度量统计，根据指标度量要求，最终计算出在大连区域各商业分公司2017年的销量数据(箱)，如图16所示。
针对“卷烟销量”指标，从基础的维度信息、常量信息，再到数据模型、指标原点信息，最终到指标的定义、度量、计算以及结果返回，所有的操作动作都基于系统的可视化界面进行配置，不需要额外的技术代码开发，因此企业内部的业务人员可自行管理和运维，不需要专业的技术人员进行相应的投入支持，从而大大降低了指标体系建设实施和运维成本。
尽管本发明的实施方案已公开如上，但其并不仅仅限于说明书和实施方式中所列运用，它完全可以被适用于各种适合本发明的领域，对于熟悉本领域的人员而言，可容易地实现另外的修改，因此在不背离权利要求及等同范围所限定的一般概念下，本发明并不限于特定的细节和这里示出与描述的图例。
Claims (16)
1.基于业务动态建模的数据指标解析与执行方法，其特征在于，包括：
接收用户输入的原点指标信息，接收用户根据业务需求输入的综合指标信息、原点指标的数据统计规则和综合指标的算法规则；
对原点指标的数据统计规则和综合指标的算法规则进行解析，再根据数据源类型的适配机制将解析结果生成用于企业数据库直接执行的SQL语句；
通过数据源适配接口与企业数据库进行数据源的连接并执行SQL语句，再返回企业数据库的执行结果。
2.如权利要求1所述的基于业务动态建模的数据指标解析与执行方法，其特征在于，还包括：企业数据库的执行结果通过中台服务方式返回。
3.如权利要求1所述的基于业务动态建模的数据指标解析与执行方法，其特征在于，原点指标信息包括原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户输入的原点指标信息包括对原点指标定义信息、原点指标维度信息和原点指标基础数据信息分别配置字段，且将原点指标定义信息、原点指标维度信息和原点指标基础数据信息的配置字段与存储于企业数据库中原点指标定义信息、原点指标维度信息和原点指标基础数据信息的元数据分别对应映射。
4.如权利要求3所述的基于业务动态建模的数据指标解析与执行方法，其特征在于，综合指标信息包括与业务需求相关的综合指标定义信息、原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户根据业务需求输入的综合指标信息包括对与业务需求相关的综合指标定义信息配置字段，及配置与业务需求相关的原点指标定义信息、原点指标维度信息和原点指标基础数据信息。
5.如权利要求4所述的基于业务动态建模的数据指标解析与执行方法，其特征在于，接受用户根据业务需求输入的原点指标的数据统计规则包括添加综合指标信息中与业务需求相关的原点指标维度方面的约束条件。
6.如权利要求5所述的基于业务动态建模的数据指标解析与执行方法，其特征在于，接收用户根据业务需求输入的综合指标的算法规则包括编辑综合指标与不同约束条件下同一原点指标之间的计算公式或编辑综合指标与多个不同原点指标之间的计算公式。
7.如权利要求6所述的基于业务动态建模的数据指标解析与执行方法，其特征在于，原点指标的数据统计规则和综合指标的算法规则均用形式化文法语言描述，对原点指标数据的统计规则和综合指标的算法规则进行解析包括采用解析器对描述原点指标的数据统计规则和综合指标的算法规则的形式化文法语言分别进行解析，提取出其中的原点指标信息。
8.如权利要求3所述的基于业务动态建模的数据指标解析与执行方法，其特征在于，原点指标信息还包括原点指标基础数据常量系数信息，接收用户输入的原点指标信息还包括对原点指标基础数据常量系数信息配置字段，且将原点指标基础数据常量系数信息与存储于企业数据库中原点指标基础数据常量系数的元数据对应映射。
9.基于业务动态建模的数据指标解析与执行装置，其特征在于，包括：
综合指标模型配置模块，其用于接收用户输入的原点指标信息，接收用户根据业务需求输入的综合指标信息、原点指标的数据统计规则和综合指标的算法规则；
综合指标模型解析模块，其用于对原点指标的数据统计规则和综合指标的算法规则进行解析，再根据数据源类型的适配机制将解析结果生成用于企业数据库直接执行的SQL语句；
综合指标计算模块，其通过数据源适配接口与企业数据库进行数据源的连接并执行SQL语句，再返回企业数据库的执行结果。
10.如权利要求9所述的基于业务动态建模的数据指标解析与执行装置，其特征在于，所述综合指标计算模块将企业数据库的执行结果通过中台服务方式返回。
11.如权利要求9所述的基于业务动态建模的数据指标解析与执行装置，其特征在于，综合指标模型配置模块中的原点指标信息包括原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户输入的原点指标信息包括对原点指标定义信息、原点指标维度信息和原点指标基础数据信息分别配置字段，且将原点指标定义信息、原点指标维度信息和原点指标基础数据信息的配置字段与存储于企业数据库中原点指标定义信息、原点指标维度信息和原点指标基础数据信息的元数据分别对应映射。
12.如权利要求11所述的基于业务动态建模的数据指标解析与执行装置，其特征在于，综合指标模型配置模块中的综合指标信息包括与业务需求相关的综合指标定义信息、原点指标定义信息、原点指标维度信息和原点指标基础数据信息，接收用户根据业务需求输入的综合指标信息包括对与业务需求相关的综合指标定义信息配置字段，及配置与业务需求相关的原点指标定义信息、原点指标维度信息和原点指标基础数据信息。
13.如权利要求12所述的基于业务动态建模的数据指标解析与执行装置，其特征在于，综合指标模型配置模块中接受用户根据业务需求输入的原点指标的数据统计规则包括添加综合指标信息中与业务需求相关的原点指标维度方面的约束条件。
14.如权利要求13所述的基于业务动态建模的数据指标解析与执行装置，其特征在于，综合指标模型配置模块中接收用户根据业务需求输入的综合指标的算法规则包括编辑综合指标与不同约束条件下同一原点指标之间的计算公式或编辑综合指标与多个不同原点指标之间的计算公式。
15.如权利要求14所述的基于业务动态建模的数据指标解析与执行装置，其特征在于，综合指标模型解析模块中的原点指标的数据统计规则和综合指标的算法规则均用形式化文法语言描述，对原点指标的数据统计规则和综合指标的算法规则进行解析包括采用解析器对描述原点指标的数据统计规则和综合指标的算法规则的形式化文法语言分别进行解析，提取出其中的原点指标信息。
16.如权利要求11所述的基于业务动态建模的数据指标解析与执行装置，其特征在于，综合指标模型配置模块中的原点指标信息还包括原点指标基础数据常量系数信息，接收用户输入的原点指标信息还包括对原点指标基础数据常量系数信息配置字段，且将原点指标基础数据常量系数信息与存储于企业数据库中原点指标基础数据常量系数的元数据对应映射。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910930777.0A CN110647549A (zh) | 2019-09-29 | 2019-09-29 | 基于业务动态建模的数据指标解析与执行方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910930777.0A CN110647549A (zh) | 2019-09-29 | 2019-09-29 | 基于业务动态建模的数据指标解析与执行方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110647549A true CN110647549A (zh) | 2020-01-03 |
Family
ID=68993081
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910930777.0A Pending CN110647549A (zh) | 2019-09-29 | 2019-09-29 | 基于业务动态建模的数据指标解析与执行方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110647549A (zh) |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111475694A (zh) * | 2020-03-18 | 2020-07-31 | 平安国际智慧城市科技股份有限公司 | 一种数据处理方法、装置、终端及存储介质 |
| CN111581399A (zh) * | 2020-06-10 | 2020-08-25 | 北京海致星图科技有限公司 | 一种知识图谱指标规则动态计算方法、系统、介质及设备 |
| CN112085366A (zh) * | 2020-09-01 | 2020-12-15 | 远光软件股份有限公司 | 一种对企业组织指标数据进行中台化处理的装置及方法 |
| CN112115189A (zh) * | 2020-08-10 | 2020-12-22 | 天阳宏业科技股份有限公司 | 多表数据的处理方法、装置和电子设备 |
| CN112463146A (zh) * | 2020-12-11 | 2021-03-09 | 中国人寿保险股份有限公司 | 一种健康险财务准备金输出方法、装置和电子设备 |
| CN112488552A (zh) * | 2020-12-11 | 2021-03-12 | 北京明略软件系统有限公司 | 业务指标的构建方法、系统、电子设备和存储介质 |
| CN112651594A (zh) * | 2020-11-30 | 2021-04-13 | 望海康信(北京)科技股份公司 | 指标管理系统、方法及相应设备和存储介质 |
| CN113190283A (zh) * | 2021-04-15 | 2021-07-30 | 北京致远互联软件股份有限公司 | 一种基于Groovy语言可视化计算公式实现的方法 |
| CN113255309A (zh) * | 2021-05-31 | 2021-08-13 | 武汉众邦银行股份有限公司 | 一种基于多维模型的指标计算引擎实现方法 |
| CN113590686A (zh) * | 2021-07-29 | 2021-11-02 | 深圳博沃智慧科技有限公司 | 生态环境数据指标的处理方法、装置及设备 |
| CN113656454A (zh) * | 2021-08-02 | 2021-11-16 | 深圳市联影医疗数据服务有限公司 | 一种综合监管建模统计方法、装置、终端及存储介质 |
| CN113672361A (zh) * | 2021-07-13 | 2021-11-19 | 上海携宁计算机科技股份有限公司 | 分布式数据处理系统、方法、服务器和可读存储介质 |
| CN113742311A (zh) * | 2020-05-29 | 2021-12-03 | 北京滴普科技有限公司 | 基于数据仓库的指标模型管理方法、存储介质和装置 |
| CN114139883A (zh) * | 2021-11-10 | 2022-03-04 | 云南电网有限责任公司信息中心 | 一种电力企业物资域评价指标的计算方法 |
| CN116542558A (zh) * | 2023-04-27 | 2023-08-04 | 上海数禾信息科技有限公司 | 业务指标计算方法、装置、计算机设备和存储介质 |
| CN116777297A (zh) * | 2023-07-10 | 2023-09-19 | 三峡科技有限责任公司 | 基于idc设备监测数据的机房评价指标配置方法和系统 |
| WO2024077937A1 (zh) * | 2022-10-13 | 2024-04-18 | 中兴通讯股份有限公司 | 数据生成方法、装置、电子设备及存储介质 |
| CN111475694B (zh) * | 2020-03-18 | 2024-05-14 | 平安国际智慧城市科技股份有限公司 | 一种数据处理方法、装置、终端及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102194164A (zh) * | 2011-04-18 | 2011-09-21 | 上海实时数据软件有限公司 | 基于指标体系模型的敏捷商业智能数据构建方法 |
| CN104361140A (zh) * | 2014-12-10 | 2015-02-18 | 用友软件股份有限公司 | 动态生成数据模型配置装置和方法 |
| US20160140175A1 (en) * | 2014-11-13 | 2016-05-19 | Christoph Weyerhaeuser | Integration of calculation models into sql layer |
| CN108664638A (zh) * | 2018-05-15 | 2018-10-16 | 口碑(上海)信息技术有限公司 | 基于指标体系的报表生成方法及装置 |
| CN108681589A (zh) * | 2018-05-15 | 2018-10-19 | 口碑(上海)信息技术有限公司 | 基于指标体系的结构化查询语言指令生成方法及装置 |
-
2019
- 2019-09-29 CN CN201910930777.0A patent/CN110647549A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102194164A (zh) * | 2011-04-18 | 2011-09-21 | 上海实时数据软件有限公司 | 基于指标体系模型的敏捷商业智能数据构建方法 |
| US20160140175A1 (en) * | 2014-11-13 | 2016-05-19 | Christoph Weyerhaeuser | Integration of calculation models into sql layer |
| CN104361140A (zh) * | 2014-12-10 | 2015-02-18 | 用友软件股份有限公司 | 动态生成数据模型配置装置和方法 |
| CN108664638A (zh) * | 2018-05-15 | 2018-10-16 | 口碑(上海)信息技术有限公司 | 基于指标体系的报表生成方法及装置 |
| CN108681589A (zh) * | 2018-05-15 | 2018-10-19 | 口碑(上海)信息技术有限公司 | 基于指标体系的结构化查询语言指令生成方法及装置 |
Cited By (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111475694B (zh) * | 2020-03-18 | 2024-05-14 | 平安国际智慧城市科技股份有限公司 | 一种数据处理方法、装置、终端及存储介质 |
| CN111475694A (zh) * | 2020-03-18 | 2020-07-31 | 平安国际智慧城市科技股份有限公司 | 一种数据处理方法、装置、终端及存储介质 |
| CN113742311A (zh) * | 2020-05-29 | 2021-12-03 | 北京滴普科技有限公司 | 基于数据仓库的指标模型管理方法、存储介质和装置 |
| CN111581399A (zh) * | 2020-06-10 | 2020-08-25 | 北京海致星图科技有限公司 | 一种知识图谱指标规则动态计算方法、系统、介质及设备 |
| CN112115189A (zh) * | 2020-08-10 | 2020-12-22 | 天阳宏业科技股份有限公司 | 多表数据的处理方法、装置和电子设备 |
| CN112085366A (zh) * | 2020-09-01 | 2020-12-15 | 远光软件股份有限公司 | 一种对企业组织指标数据进行中台化处理的装置及方法 |
| CN112651594A (zh) * | 2020-11-30 | 2021-04-13 | 望海康信(北京)科技股份公司 | 指标管理系统、方法及相应设备和存储介质 |
| CN112488552A (zh) * | 2020-12-11 | 2021-03-12 | 北京明略软件系统有限公司 | 业务指标的构建方法、系统、电子设备和存储介质 |
| CN112463146A (zh) * | 2020-12-11 | 2021-03-09 | 中国人寿保险股份有限公司 | 一种健康险财务准备金输出方法、装置和电子设备 |
| CN113190283A (zh) * | 2021-04-15 | 2021-07-30 | 北京致远互联软件股份有限公司 | 一种基于Groovy语言可视化计算公式实现的方法 |
| CN113255309A (zh) * | 2021-05-31 | 2021-08-13 | 武汉众邦银行股份有限公司 | 一种基于多维模型的指标计算引擎实现方法 |
| CN113255309B (zh) * | 2021-05-31 | 2021-09-21 | 武汉众邦银行股份有限公司 | 一种基于多维模型的指标计算引擎实现方法 |
| CN113672361A (zh) * | 2021-07-13 | 2021-11-19 | 上海携宁计算机科技股份有限公司 | 分布式数据处理系统、方法、服务器和可读存储介质 |
| CN113590686A (zh) * | 2021-07-29 | 2021-11-02 | 深圳博沃智慧科技有限公司 | 生态环境数据指标的处理方法、装置及设备 |
| CN113590686B (zh) * | 2021-07-29 | 2023-11-10 | 深圳博沃智慧科技有限公司 | 生态环境数据指标的处理方法、装置及设备 |
| CN113656454B (zh) * | 2021-08-02 | 2023-09-29 | 深圳市联影医疗数据服务有限公司 | 一种综合监管建模统计方法、装置、终端及存储介质 |
| CN113656454A (zh) * | 2021-08-02 | 2021-11-16 | 深圳市联影医疗数据服务有限公司 | 一种综合监管建模统计方法、装置、终端及存储介质 |
| CN114139883A (zh) * | 2021-11-10 | 2022-03-04 | 云南电网有限责任公司信息中心 | 一种电力企业物资域评价指标的计算方法 |
| CN114139883B (zh) * | 2021-11-10 | 2024-03-29 | 云南电网有限责任公司信息中心 | 一种电力企业物资域评价指标的计算方法 |
| WO2024077937A1 (zh) * | 2022-10-13 | 2024-04-18 | 中兴通讯股份有限公司 | 数据生成方法、装置、电子设备及存储介质 |
| CN116542558A (zh) * | 2023-04-27 | 2023-08-04 | 上海数禾信息科技有限公司 | 业务指标计算方法、装置、计算机设备和存储介质 |
| CN116777297A (zh) * | 2023-07-10 | 2023-09-19 | 三峡科技有限责任公司 | 基于idc设备监测数据的机房评价指标配置方法和系统 |
| CN116777297B (zh) * | 2023-07-10 | 2024-03-05 | 三峡科技有限责任公司 | 基于idc设备监测数据的机房评价指标配置方法和系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110647549A (zh) | 基于业务动态建模的数据指标解析与执行方法和装置 | |
| CN101506804B (zh) | 用于在大数据集分析期间维持一致性的方法和装置 | |
| US8375041B2 (en) | Processing queries against combinations of data sources | |
| US7475080B2 (en) | Adaptive data warehouse meta model method | |
| JP5122115B2 (ja) | 電子ビジネス通信におけるデータ要素の使用の追跡 | |
| Corr et al. | Agile data warehouse design: Collaborative dimensional modeling, from whiteboard to star schema | |
| CN102426582B (zh) | 数据操作管理装置和数据操作管理方法 | |
| CN105183735A (zh) | 数据的查询方法及查询装置 | |
| EP3061047A1 (en) | Systems and methods for flexible sourcing systems | |
| WO2012050579A1 (en) | Providing operational business intelligence | |
| US20010037228A1 (en) | System and method for using metadata to flexibly analyze data | |
| CN104102670A (zh) | 绩效指标分析框架 | |
| CN111026801A (zh) | 一种辅助保险类电商运营快速决策工作的方法及系统 | |
| CN114021215A (zh) | 一种基于bim技术的工程造价算量管理方法及系统 | |
| Sampaio et al. | DQ2S–a framework for data quality-aware information management | |
| CN110928903A (zh) | 数据提取方法及装置、设备和存储介质 | |
| CN111414410A (zh) | 数据处理方法、装置、设备和存储介质 | |
| CN105653830A (zh) | 一种基于模型驱动的数据分析方法 | |
| US9032362B2 (en) | System and method for generating high performance calculators for calculation graphs | |
| CN101901277A (zh) | 一种基于用户情景的动态本体建模方法及系统 | |
| CN113407587B (zh) | 用于联机分析处理引擎的数据处理方法、装置、设备 | |
| CN111159991B (zh) | 一种报表建模设计装置及方法 | |
| CN114490571A (zh) | 一种建模方法、服务器及存储介质 | |
| Pastorello Jr et al. | Multimedia semantic annotation propagation | |
| Moukhi et al. | Towards a new method for designing multidimensional models |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200103 |