CN108959458B - 数据生成和使用方法、系统、介质及计算机设备 - Google Patents
数据生成和使用方法、系统、介质及计算机设备 Download PDFInfo
- Publication number
- CN108959458B CN108959458B CN201810623201.5A CN201810623201A CN108959458B CN 108959458 B CN108959458 B CN 108959458B CN 201810623201 A CN201810623201 A CN 201810623201A CN 108959458 B CN108959458 B CN 108959458B
- Authority
- CN
- China
- Prior art keywords
- data
- instance
- form instance
- style object
- statistical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种数据生成和使用方法、系统、介质及计算机设备。该方法包括:通过表单引擎图形化配置表单样式对象;向已创建的表单样式对象中录入表单数据生成表单实例。本发明通过表单引擎图形化配置表单样式对象,整个配置过程通过可视化界面进行,配置完成后即可立即进行使用,无需进行代码设计过程;一旦业务需求发生变化,仅需修改表单样式对象即可。
Description
技术领域
本发明涉及数据处理技术领域,尤其设计一种数据生成和使用方法、系统、介质及计算机设备。
背景技术
在传统项目、平台设计初期,首先需要对整个平台涉及到的数据对象进行设计,划分对象职责、确定对象属性。根据对象属性与对象之间的关系建立相关数据库表以及表与表之间的主外关系。
当对象设计结束后开始进行业务逻辑的开发工作后,任何对已有对象的修改均会对已有业务逻辑产生影响,且该影响会随着开发工作的进行不断加深。也即问题发现的越晚,其解决成本越大。因此,系统开发中需要花费大量的时间去确定、调整业务中的对象信息。
传统的数据产生方式主要是根据已设计好的对象模板将数据传入系统,系统根据相关业务、逻辑对数据进行处理后持久化至各个对象对应的数据库表中。此时,业务对象已经确定,理论上不存在重新修改对象内容与关系的操作。一旦对使用过程中的对象进行修改,需同时修改对象参与的相关业务逻辑,成本极大。
发明内容
本发明所要解决的技术问题是针对现有技术存在的问题,提供一种数据生成方法和使用方法、系统、介质及计算机设备。
本发明解决上述技术问题的技术方案如下:一种数据生成和使用方法,包括如下步骤:
S1,通过表单引擎图形化配置表单样式对象;
S2,向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例。
本发明解决上述技术问题的另一技术方案如下:一种数据生成和使用系统,包括表单样式对象配置模块、数据录入模块和数据关系建立模块;
所述表单样式对象配置模块,用于通过表单引擎图形化配置表单样式对象;
所述数据录入模块,用于向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例。
本发明解决上述技术问题的另一技术方案如下:一种计算机可读存储介质,包括指令,当所述指令在计算机上运行时,使所述计算机执行上述方案所述的方法。
本发明解决上述技术问题的另一技术方案如下:一种计算机设备,包括存储器、处理器及存储在所述存储器上的并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现上述方案所述的方法。
本发明的有益效果是:本发明通过表单引擎图形化配置表单样式对象,将数据对象的设计和开发过程进行图形化,用户进行表单样式对象配置的过程即是对数据模型与数据关系的配置过程,整个配置过程通过可视化界面进行,配置完成后即可立即进行使用,无需进行代码设计过程,真正实现了将页面数据化,所见即所得的设计理念。因此,一旦业务需求发生变化,仅需修改表单样式对象即可。
附图说明
图1为本发明一实施例提供的数据生成方法的示意性流程图;
图2为本发明另一实施例提供的数据生成方法的示意性流程图;
图3为本发明一实施例提供的数据生成系统框图;
图4为本发明另一实施例提供的数据生成系统框图。
具体实施方式
以下结合附图对本发明的原理和特征进行描述,所举实例只用于解释本发明,并非用于限定本发明的范围。
作为系统、平台的重要组成部分,相关业务、操作数据在企业、行业发展过程中的作用越发中要。对系统、平台运转过程中产生的数据进行相关统计、分析,能够推断用户集体行为变化过程,推断行业整体发展趋势,为企业策略的制定、调整提供最客观的参考依据。想要对数据进行统计、分析等相关操作,首先需要获取到这些数据。数据获取的先决条件则是首先确定数据的类型与结构,只有确定数据结构才能够准确生成符合需求的数据。
图1给出了本发明实施例提供的一种数据生成方法的示意性流程图。该方法包括:
S1,通过表单引擎图形化配置表单样式对象;
S2,向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例。
上述实施例中,通过表单引擎图形化配置表单样式对象,将数据对象的设计和开发过程进行图形化,用户进行表单样式对象配置的过程即是对数据模型与数据关系的配置过程,整个配置过程通过可视化界面进行,配置完成后即可立即进行使用,无需进行代码设计过程,真正实现了将页面数据化,所见即所得的设计理念。一旦业务需求(指录入数据需求)发生变化,仅需修改表单样式对象即可。
图2给出了本发明另一实施例提供的一种数据生成方法的示意性流程图。该方法包括:
S1,通过表单引擎图形化配置表单样式对象;
S2,向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例。
S3,配置数据流转模型,所述数据流转模型包含流转节点以及流转节点之间的跳转条件,在所述流转节点绑定相应业务数据对应的表单样式对象,用于数据录入,根据所述跳转条件控制数据的流转方向。
传统系统开发过程中,需对业务以及业务中所涉及的对象进行一次抽象。经过数据化处理后生成数据库表,所有的业务与逻辑的开发均依赖于已产生的数据库表。但用户并非都了解数据库、编程语言的相关原理。因此,用户无法真正参与到系统设计的整个流程中。
本发明上述实施例中,通过表单引擎图形化配置表单样式对象,将数据对象的设计和开发过程进行图形化,用户进行表单样式对象配置的过程即是对数据模型与数据关系的配置过程,整个配置过程通过可视化界面进行,配置完成后即可立即进行使用,无需进行代码设计过程,真正实现了将页面数据化,所见即所得的设计理念;另外,表单实例之间存在着各种关联关系,本发明通过配置数据流转模型,在流转节点绑定相应业务数据对应的表单实例,用于数据录入,根据跳转条件控制数据的流转方向,即本发明将数据间关系的处理提升至逻辑处理层,而非传统系统中在数据库层面进行数据关系的处理。因此,一旦业务需求(指录入数据需求)发生变化,仅需修改表单样式对象即可;若业务(流程节点或流程跳转条件)发生变更,仅需修改流程节点及节点跳转条件即可。
可选地,所述S1中通过表单引擎图形化配置表单样式对象包括:
根据需求从控件配置页面选取不同控件添加至样式预览页面,组合生成表单样式对象,将所述表单样式对象存储至非关系型数据库;
在所述表单样式对象保存过程中,通过表单引擎解析所述表单样式对象,生成用于记录表单数据之间关系的数据关系对象以及用于记录数据存储路径的表单控件解析对象。
具体地,控件存在于表单模型,表单模型是经过对业务数据的一次抽象与二次抽象生成的一种数据结构,这种数据结构能够涵盖现存80%以上的数据类型。其中,一次抽象指将某类型应用进行抽象生成该业务下可能用到的数据结构;二次抽象指将各个类型应用中出现的数据结构进行抽象,生成能够适应多业务场景的数据结构。
表单模型用于规定业务对象中所包含的属性、每个属性所分属的类别以及规定特殊对象其引用数据的数据源,建立数据之间的关系。其中数据关系等相关信息保存在数据模型内容中。
表单模型中涵盖了不同的控件,不同的控件具有不同的展现形式,不同控件映射为对象属性后具有不同的数据类型。部分控件中包含经过约定的数据关系,只需在控件中绑定所需数据源即可实现类似数据库中表与表之间关系的建立。
本发明上述实施例中,根据需求从控件配置页面选取不同控件添加至样式预览页面,组合生成表单样式对象,整个配置过程通过可视化界面进行,配置完成后即可立即进行使用,无需进行代码设计过程。不同控件存在无数种组合形式,不可能每产生一个表单样式对象便生成一个对应的数据库表。本发明实施例利用非关系型数据库无需预先设计数据模型这一特性保存表单产生的数据。但是表单数据之间确实存在着各种关联关系,因此将数据间关系的处理提升至逻辑处理层,而非传统系统中在数据库层面进行数据关系的处理。且表单样式对象中包含大量的信息,包括数据统计所需信息和数据关系信息等,如果在使用时实时解析这些数据会降低使用效率,本发明该实施例中,在表单样式对象生成时即通过表单引擎解析进行解析,生成可用的数据,为其他业务提供服务,提高使用效率。
可选地,所述控件包含数据类型、数据关系以及数据操作方式,当控件中包含经约定的数据关系,则在控件中绑定所需数据源。
在表单样式对象设计过程中,用户根据需要选择所需控件,每个控件包含了数据类型、数据关系和数据操作方式等信息。
其中,数据类型包括:文本类型、数字类型、布尔类型、时间类型、对象类型、数组对象类型;
数据关系类型包括:一、表单样式对象中的某一属性与另一表单样式对象中的某一属性建立关系;二、表单样式对象中的某一属性与另一表单样式对象整体建立关系。
上述两种关系的实现方式有两种:一种是数据实例化,另一种是数据引用。
数据操作方式包括:手动填写,选择预置数据,选择绑定其他表单样式对象中对应数据以及实时调用接口获取数据。
可选地,所述S2中存储所述表单实例包括:
如果表单实例指定外部mongo数据源,则将所述表单实例保存至表单实例指定的外部mongo数据源中;
如果表单实例指定外部mySql数据源,则将所述表单实例保存至表单实例指定的外部mySql数据源中;
其他情况下,将表单实例存储至通用数据集合。默认情况下所有产生的表单实例均保存至该集合中。即在未配置任何保存形式的情况下,表单所产生的数据会保存至系统默认的一个数据库集合中,集合为系统平台自动建立。
本发明实施例中,数据源和数据集合均采用数据库表形式。每个表单样式所产生的数据均会保存至数据库中,根据表单样式对象配置的不同可能保存至系统默认的数据库表中,即通用数据集合中,若经过配置外部数据源则将生成的表单实例数据保存至指定的数据库表中,即外部mongo数据源或指定的外部mySql数据源。
本发明上述实施例中,表单实例的保存方式取决于数据的结构与需求,若数据结构中不包含对象或数组对象。则该表单数据能够保存至外部mySql数据源,且该类数据能够利用关系型数据库中存储过程等功能实现某些业务需求。表单样式对象的灵活性直接决定了表单实例结构也具有很高的灵活性,其灵活性决定了表单实例的存储方式。本发明实施例表单实例采用非关系型数据存储为主、关系型数据为辅的存储方式。利用了关系型数据库能够在数据库层面进行数据处理的功能;同时利用了非关系型数据库能够保存整个对象的功能。
可选地,所述S2中存储所述表单实例的过程中,根据所述表单样式对象对所述表单实例进行格式化,生成标准化的表单实例。
具体地,不同控件保存不同类型的数据。比如:文本、数字、日期等,但是由于前台的弱数据规范性,因此在数据传入后,根据数据对应控件类型,将数据转换为数据库中可操作的类型。比如:文本框组件传入数据转为String格式、数字框控件传入数据转换为Number格式、日期控件转换为Date格式。
本发明上述实施例中,通过对所述表单实例进行格式化,生成标准化的表单实例,能够将前台页面中弱类型的数据,变更为数据库中对应的标准格式数据(String、Number、Date等)。
根据创建好的表单样式对象即可实现表单数据的填写,数据填写方式由控件类型决定。完成填写的表单实例可能是一个非常大的数据,其数据结构由表单样式对象决定。可以通过表单中嵌套子表单的形式录入、添加数据。子表单中的数据为子数据,表单中的数据为主数据。其中子表单是一个可以独立使用的表单,其中保存的数据可供用户选择录入当前表单中。
表单控件中保存的子数据与主数据之间的关系由表单样式中关系相关数据决定。关系相关数据包括两种类型:一是实例化数据,该类数据不随被引用数据的变化而变化,只需将数据原样输出即可;二是引用数据,该类数据会随着被引用数据的变化而变化,需根据表单样式产生的关系对象获取被引用数据后替换原有数据。
由于表单数据保存在不同类型的数据库中,无法使用数据库的特性实现表单数据的二次组织。因此,数据的引用在业务逻辑层面实现。
在数据保存过程中需要根据表单样式对象对数据进行格式化,生成标准化的数据。同时对子数据进行解析,判断其存在性,若是新添加的数据,则将该数据添加至子数据对应表单集合中,根据表单样式对象配置的不同可以保存至系统默认的数据库表中,若经过配置外部数据源则将生成的表单数据实例保存至指定的数据库表中;若是已存在数据,则不进行该操作;主数据中包含了所有子表单数据。
所有的数据在产生后需要对这些数据进行展示、统计和分析操作。传统方法是对数据库中数据进行的操作。
数据的展示需要根据业务需求编写数据查询逻辑、展示逻辑以及与之对应的展示页面,根据需求去在指定界面展示指定的数据。针对频繁查询且数据关系较为复杂数据的查询操作,传统系统中根据业务需求、实时组织数据供用户使用。由于数据关系复杂度较高,在组织数据的过程中需要消耗较多的资源(如时间资源、设备资源等)。
数据的统计分析需要根据业务需求编写统计分析业务逻辑,定时去执行该统计逻辑,生成结果数据用于展示。传统方法所产生的结果具有周期性,且随着数据量不断增大,统计执行消耗的资源(包括时间资源、设备资源等)也不断加大。定时统计的方式无法实时获取最新的统计运算结果;而实时运算可能由于数据量过大导致结果返回事件过长,影响用户的体验。
可选地,上述方法还包括设定数据框规则,确定数据框的主体对象以及主体对象的关联数据对象;根据所述数据框规则将所述主体对象和关联数据对象组织为数据框数据,将所述数据框数据存储至数据框对应的存储服务;当所述主体对象和/或关联数据对象发生变化时,将变更的数据同时同步到数据框对应的存储服务;当以主体检索条件从数据框获取信息时,从所述存储服务直接获取已组织好的数据框数据;如果无法获取指定数据,则重新获取主体对象和关联数据对象,并根据数据框规则组织为数据框数据更新至所述存储服务。
数据框指的是数据的一种组织和使用方式。其规则是根据实际情况设定。比如:以人为核心聚合其关联数据或是以企业为核心聚合其业务数据。使用数据框的一般为数据变更少、数据来源零散、主要用于相关信息的展示,而且该类数据能够根据不同的维度进行聚类,常常会出现批量获取相同维度数据的情况。而频繁获取该类数据的过程中会大量消耗资源与时间。
本发明上述实施例中,根据逻辑从数据库中查询主体对象数据和关联数据对象,根据数据框规则将主体对象和关联数据对象组织生成数据框数据,并存储于存储服务,例如可以为一种查询高效的存储容器中。当需要获取该类数据时无须根据逻辑实时从数据库中进行查询和逻辑运算,直接从查询容器中获取所需数据即可,大大减少资源与时间的消耗。
可选地,数据统计分析采用传统统计结合流式统计的方式实现。具体地,图形化配置统计规则,根据所述统计规则在预设时间点(如可以设定为每日零点)采用传统统计方式生成统计结果,传统统计结束后开启流式统计,根据已生成的统计结果与流式统计的消息队列中数据实时运算,并更新统计结果。
其中,图形化配置统计规则包括:根据统计需求从规则配置界面选择所需的表单控件解析对象实现数据筛选路径、聚合路径以及运算路径的选择;从所述规则配置界面配置数据筛选条件、聚合方法以及运算规则。数据筛选条件、聚合方法以及运算规则等数据逻辑是预先抽象定义的,比如today这个数据逻辑其抽象定义为大于今天0时小于今天24时的数据。
传统统计用于全量的计算,用于获取准确的结果数据,并为流式统计提供初始量;流式统计用于增量的计算,用于实时、快速的获取结果数据。
其中,传统系统中对数据的统计和分析有两种。方式一:根据需求直接查询对应数据库同时进行统计运算,实时将结果返回前台;方式二:对数据进行清洗、分析与运算,将结果数据进行保存供用户查询。
方式二的操作步骤如下:
1、将所有数据进行备份、清洗,生成“干净”的数据用于统计计算,该步骤的实施是为了避免统计过程中对数据库造成的压力会影响业务逻辑的执行;
2、执行统计逻辑,生成统计结果数据;
3、保存统计结果数据,供用户查询使用。
方式一中,根据需求直接查询对应数据库同时进行统计运算,实时将结果返回前台,数据量大的时候无法实时的运算出所需结果,其结果获取时长可能达到分钟甚至是小时级别。
方式二中,预先计算统计结果供用户直接查询的方式能够降低对业务的影响,但是结果运算过程随着业务数据量的不断增加,其消耗成本也随之递增、运算周期不断加大,无法实时获取统计结果。
流式统计为在数据流中按时间顺序获取待统计数据,确定所述待统计数据所述领域,根据所述领域确定匹配的统计规则,根据预先配置的所述统计规则进行逻辑运算,获取统计分析结果;其中所述逻辑运算包括根据实时获取的业务数据和历史产生的结果数据,采用递归算法实现结果数据的实时更新。
流式统计并非每次运算将所有数据拿出来从头开始计算,而是根据上次运算结果与本次新传入的数据进行累加、迭代计算。运算时间必然短,能够达到毫秒级别。而且,一旦有新的数据传入便立即进行运算,真正实现统计结果的实时运算、实时获取。
本发明实施例的流式统计基于消息队列与流式运算引擎实现。
消息队列指的是一种数据存储容器,该容器实现了消息栈的功能,即数据的先进先出。消息队列的使用能够保证数据产生时间与数据获取时间相一致,同时能够消除数据产生的峰值。
当某时间范围内大量产生数据时,数据发送至消息队列生产端即完成了自己的任务。此时消费端根据自己的处理速度从消息队列中获取数据,进行统计或消费。
消息队列同时保证了同一条数据能够为不同的消费端提供支持,不会存在同一条数据仅能供一个消费端使用(通过groupIds来标识不同消费者,同一消费者对同一数据仅能消费一次)。
传统统计引擎从数据库中拉取数据,进行全面的统计、运算操作。本分发明实施例采样能够与消息队列无缝衔接的统计运算引擎。可以使用Hadoop+SparkStreaming的架构方式实现流式统计运算功能。
流程统计依赖于消息队列的稳定性,一旦消息队列中的数据出现问题,则自该条数据之后的所有结果均为错误数据。
本发明上述实施例中,通过传统统计与流式计算相结合的方式有效解决了传统统计方式时间消化长,无法实时获取统计结果的问题,并降低了对流式统计中消息队列的依赖,提高了数据统计分析的准确性和实时性。
上文结合图1和图2,详细描述了根据本发明实施例提供的数据生成方法。下面结合图3和图4,详细描述本发明实施例提供的数据生成系统。如图3所示,该系统包括:表单样式对象配置模块和数据录入模块。表单样式对象配置模块通过表单引擎图形化配置表单样式对象;所述数据录入模块向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例。
本发明提供另一实施例,如图4所示,该系统包括表单样式对象配置模块、数据录入模块和数据关系建立模块。
表单样式对象配置模块通过表单引擎图形化配置表单样式对象;所述数据录入模块向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例;数据关系建立模块配置数据流转模型,所述数据流转模型包含流转节点以及流转节点之间的跳转条件,在所述流转节点绑定相应业务数据对应的表单样式对象,用于数据录入,根据所述跳转条件控制数据的流转方向。
本发明实施例还提供一种计算机可读存储介质,包括指令,当所述指令在计算机上运行时,使所述计算机执行上述方案所述的方法。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在所述存储器上的并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现上述方案所述的方法。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (11)
1.一种数据生成和使用方法,其特征在于,包括如下步骤:
S1,通过表单引擎图形化配置表单样式对象;
S2,向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例;
所述S2中存储所述表单实例包括:
如果表单实例指定外部mongo数据源,则将所述表单实例保存至表单实例指定的外部mongo数据源中;
如果表单实例指定外部mySql数据源,则将所述表单实例保存至表单实例指定的外部mySql数据源中;
其他情况下,将表单实例存储至通用数据集合。
2.根据权利要求1所述的方法,其特征在于,还包括S3,配置数据流转模型,所述数据流转模型包含流转节点以及流转节点之间的跳转条件,在所述流转节点绑定相应业务数据对应的表单样式对象,用于数据录入,根据所述跳转条件控制数据的流转方向。
3.根据权利要求1所述的方法,其特征在于,所述S1中通过表单引擎图形化配置表单样式对象包括:
根据需求从控件配置页面选取不同控件添加至样式预览页面,组合生成表单样式对象,将所述表单样式对象存储至非关系型数据库;
在所述表单样式对象保存过程中,通过表单引擎解析所述表单样式对象,生成用于记录表单数据之间关系的数据关系对象以及用于记录数据存储路径的表单控件解析对象。
4.根据权利要求3所述的方法,其特征在于,所述控件包含数据类型、数据关系以及数据操作方式,当控件中包含经约定的数据关系,则在控件中绑定所需数据源。
5.根据权利要求1所述的方法,其特征在于,所述S2中存储所述表单实例的过程中,根据所述表单样式对象对所述表单实例进行格式化,生成标准化的表单实例。
6.根据权利要求1至5任一项所述的方法,其特征在于,还包括设定数据框规则,确定数据框的主体对象以及主体对象的关联数据对象;
根据所述数据框规则将所述主体对象和关联数据对象组织为数据框数据,将所述数据框数据存储至数据框对应的存储服务;
当所述主体对象和/或关联数据对象发生变化时,将变更的数据同时同步到数据框对应的存储服务;
当以主体检索条件从数据框获取信息时,从所述存储服务直接获取已组织好的数据框数据;如果无法获取指定数据,则重新获取主体对象和关联数据对象,并根据数据框规则组织为数据框数据更新至所述存储服务。
7.根据权利要求1至5任一项所述的方法,其特征在于,还包括数据统计与分析,具体包括:图形化配置统计规则,根据所述统计规则在预设时间点采用传统统计方式生成统计结果,传统统计结束后开启流式统计,已生成的统计结果与流式统计的消息队列中的数据实时运算,并更新统计结果。
8.根据权利要求7所述的方法,其特征在于,所述图形化配置统计规则包括:根据统计需求从规则配置界面选择所需的表单控件解析对象实现数据筛选路径、聚合路径以及运算路径的选择;从所述规则配置界面配置数据筛选条件、聚合方法以及运算规则。
9.一种数据生成和使用系统,其特征在于,包括表单样式对象配置模块和数据录入模块;
所述表单样式对象配置模块,用于通过表单引擎图形化配置表单样式对象;
所述数据录入模块,用于向已创建的所述表单样式对象中录入表单数据生成表单实例,并存储所述表单实例;
如果表单实例指定外部mongo数据源,则将所述表单实例保存至表单实例指定的外部mongo数据源中;
如果表单实例指定外部mySql数据源,则将所述表单实例保存至表单实例指定的外部mySql数据源中;
其他情况下,将表单实例存储至通用数据集合。
10.一种计算机可读存储介质,包括指令,其特征在于,当所述指令在计算机上运行时,使所述计算机执行根据权利要求1至8任一项所述的方法。
11.一种计算机设备,包括存储器、处理器及存储在所述存储器上的并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810623201.5A CN108959458B (zh) | 2018-06-15 | 2018-06-15 | 数据生成和使用方法、系统、介质及计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810623201.5A CN108959458B (zh) | 2018-06-15 | 2018-06-15 | 数据生成和使用方法、系统、介质及计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108959458A CN108959458A (zh) | 2018-12-07 |
CN108959458B true CN108959458B (zh) | 2022-02-18 |
Family
ID=64489141
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810623201.5A Active CN108959458B (zh) | 2018-06-15 | 2018-06-15 | 数据生成和使用方法、系统、介质及计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108959458B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111625219A (zh) * | 2020-05-22 | 2020-09-04 | 杭州指令集智能科技有限公司 | 一种bo组件处理方法、装置及设备 |
CN112016283A (zh) * | 2020-08-18 | 2020-12-01 | 杭州指令集智能科技有限公司 | 表单生成方法及装置 |
CN115983232B (zh) * | 2023-03-21 | 2023-07-04 | 青岛诺亚信息技术有限公司 | 一种基于视图、数据一体化设计的表单系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101706716A (zh) * | 2009-09-08 | 2010-05-12 | 南京师范大学 | 基于vo的表单定制配置与解析运行方法 |
CN106202016A (zh) * | 2016-07-06 | 2016-12-07 | 浪潮软件集团有限公司 | 基于Bootstrap的自定义表单系统 |
CN106371825A (zh) * | 2016-08-23 | 2017-02-01 | 武大吉奥信息技术有限公司 | 一种移动端应用界面表单动态生成方法及装置 |
WO2017020073A1 (en) * | 2015-07-31 | 2017-02-09 | Wisetech Global Limited | Methods and systems for creating configurable forms, configuring forms and for form flow and form correlation |
CN107085576A (zh) * | 2016-02-15 | 2017-08-22 | 阿里巴巴集团控股有限公司 | 一种流式数据统计算法及装置 |
CN108132778A (zh) * | 2016-11-30 | 2018-06-08 | 中标软件有限公司 | 一种可视化完成表单代码编写以及接口调试的方法 |
CN108132982A (zh) * | 2017-12-13 | 2018-06-08 | 湖南中车时代通信信号有限公司 | 基于大数据的列车运行监控装置数据的分析系统和方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016179574A1 (en) * | 2015-05-07 | 2016-11-10 | Cloudera, Inc. | Mutations in a column store |
-
2018
- 2018-06-15 CN CN201810623201.5A patent/CN108959458B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101706716A (zh) * | 2009-09-08 | 2010-05-12 | 南京师范大学 | 基于vo的表单定制配置与解析运行方法 |
WO2017020073A1 (en) * | 2015-07-31 | 2017-02-09 | Wisetech Global Limited | Methods and systems for creating configurable forms, configuring forms and for form flow and form correlation |
CN107085576A (zh) * | 2016-02-15 | 2017-08-22 | 阿里巴巴集团控股有限公司 | 一种流式数据统计算法及装置 |
CN106202016A (zh) * | 2016-07-06 | 2016-12-07 | 浪潮软件集团有限公司 | 基于Bootstrap的自定义表单系统 |
CN106371825A (zh) * | 2016-08-23 | 2017-02-01 | 武大吉奥信息技术有限公司 | 一种移动端应用界面表单动态生成方法及装置 |
CN108132778A (zh) * | 2016-11-30 | 2018-06-08 | 中标软件有限公司 | 一种可视化完成表单代码编写以及接口调试的方法 |
CN108132982A (zh) * | 2017-12-13 | 2018-06-08 | 湖南中车时代通信信号有限公司 | 基于大数据的列车运行监控装置数据的分析系统和方法 |
Non-Patent Citations (1)
Title |
---|
Activiti工作流结合外置表单技术研究;张瑞圆;《电子设计工程》;20160930;第24卷(第18期);第24-26段 * |
Also Published As
Publication number | Publication date |
---|---|
CN108959458A (zh) | 2018-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2929467B1 (en) | Integrating event processing with map-reduce | |
CN108959458B (zh) | 数据生成和使用方法、系统、介质及计算机设备 | |
CN106874247B (zh) | 一种报表生成方法及装置 | |
CN112650766B (zh) | 数据库数据操作的方法、系统及服务器 | |
CN111837121B (zh) | 利用可执行逻辑来处理结构化数据项的基于键的日志记录 | |
CN108446305A (zh) | 多维度统计业务数据的系统和方法 | |
CN112396462B (zh) | 基于Clickhouse的人群圈选方法及装置 | |
US20150074043A1 (en) | Distributed and open schema interactions management system and method | |
CN108268529A (zh) | 一种基于业务抽象和多引擎调度的数据汇总方法和系统 | |
CN106708965A (zh) | 一种数据的处理方法和装置 | |
CN110727690A (zh) | 一种数据更新方法 | |
CN115408381A (zh) | 数据处理方法及相关设备 | |
CN108182204A (zh) | 基于房产交易多维度数据的数据查询的处理方法及装置 | |
CN109033157B (zh) | 一种基于自定义搜索条件树的复杂数据检索方法和系统 | |
Rajbhoj et al. | Early experience with model-driven development of mapreduce based big data application | |
CN110704472A (zh) | 数据查询统计方法及装置 | |
CN110909017B (zh) | 数据分析方法和系统 | |
CN110032615B (zh) | 一种基于规则库实现gis空间数据在线统计的方法 | |
US11561993B2 (en) | Generating real-time aggregates at scale for inclusion in one or more modified fields in a produced subset of data | |
US20140237001A1 (en) | System And Method For Fast Identification Of Variable Roles During Initial Data Exploration | |
CN110930056A (zh) | 一种基于思维导图的任务管理方法、终端设备及存储介质 | |
CN110083624B (zh) | 流数据处理方法、设备、数据处理设备、计算机介质 | |
US20200301922A1 (en) | Multiform persistence abstraction | |
CN109063201B (zh) | 一种基于混合存储方案的impala在线交互式查询方法 | |
CN109522340B (zh) | 一种数据统计方法、装置及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |