CN107357587A - 一种基于完全自定义sql场景的自助取数系统及方法 - Google Patents

一种基于完全自定义sql场景的自助取数系统及方法 Download PDF

Info

Publication number
CN107357587A
CN107357587A CN201710591739.8A CN201710591739A CN107357587A CN 107357587 A CN107357587 A CN 107357587A CN 201710591739 A CN201710591739 A CN 201710591739A CN 107357587 A CN107357587 A CN 107357587A
Authority
CN
China
Prior art keywords
script
self
access
configuration
sql
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710591739.8A
Other languages
English (en)
Inventor
胡东
牛桂东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Tandao Information Technology Corp Ltd
Original Assignee
Nanjing Tandao Information Technology Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Tandao Information Technology Corp Ltd filed Critical Nanjing Tandao Information Technology Corp Ltd
Publication of CN107357587A publication Critical patent/CN107357587A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/70Software maintenance or management
    • G06F8/71Version control; Configuration management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2358Change logging, detection, and notification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/242Query formulation
    • G06F16/2433Query languages
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/103Workflow collaboration or project management

Abstract

本发明公开了一种基于完全自定义SQL场景的自助取数系统及方法,该系统包括营销场景新增及脚本配置模块、脚本解析及规则校验模块、必选条件/可选条件配置模块、输出字段配置模块、周期性任务配置模块和取数清单管理模块;自助取数方法包括以下步骤:IT人员新建自助取数场景,根据自助取数需求配置脚本信息;系统进行脚本信息解析及语法规则校验;IT人员进行必选、可选条件配置,提供业务人员配置条件;取数任务运行完成后生成自助取数清单,业务人员可在清单管理页面进行清单下载;本发明实现IT人员灵活配置SQL业务场景,业务人员可直接通过图形化界面操作取数,增加便利性的同时实现系统化、流程化管控,同时保证了时效性和复用性。

Description

一种基于完全自定义SQL场景的自助取数系统及方法
技术领域
本发明属于运营商数据集市取数技术领域,尤其是涉及一种基于完全自定义SQL场景的自助取数系统及方法。
背景技术
目前运营商的用户数据,包括有用户的基础profile数据、网络信息数据、业务订购数据、业务消费数据。运营商在IT支撑业务部门取数过程中,经常会遇到取数需求越来越多却又大同小异的问题,更有按日、按月的周期性取数需求,常规是靠IT人员手工取数,但是手动取数这种手段在时效性和复用性上都不太符合集约化要求,造成不必要的资源浪费,也存在不能及时响应客户需求的风险。
由于计算机应用和大数据的发展,出现IT平台取数方式完成取数功能,但由于IT平台取数功能限制,在自助取数过程中主要存在如下缺陷:
一、取数平台往往通过开发页面查询方式提供自助取数功能,开发周期长;
二、取数页面做好后修改难度较大,增加、删除配置条件都需要开发人员二次开发;
三、同一页面往往只能实现一个自助取数需求,对于一次性取数浪费较大;
四、周期性取数往往由于开发人员在开发时指定,而无法按照业务需求及时修改;
总之,现有的取数功能较为单一,业务人员很难参与到规则配置过程中,复用性不高。
发明内容
发明目的:为了克服现有技术中存在的不足,如手工取数时效性和复用性差、造成资源浪费,IT平台取数功能限制、功能较为单一、复用性不高等问题,本发明提供一种基于完全自定义SQL场景的自助取数系统,该系统能够支持完全自定义SQL配置,由IT人员灵活配置SQL业务场景,系统进行图形化解析展示,由取数人员灵活配置筛选条件及取数周期,这样业务人员直接通过图形化界面操作取数,增加便利性的同时实现系统化、流程化管控,同时保证了时效性和复用性。
技术方案:为实现上述目的,本发明的一种基于完全自定义SQL场景的自助取数系统,该自助取数系统包括营销场景新增及脚本配置模块、脚本解析及规则校验模块、必选条件/可选条件配置模块、输出字段配置模块、周期性任务配置模块和取数清单管理模块;
所述营销场景新增及脚本配置模块,用于对营销场景信息进行配置以及自定义脚本配置;
所述脚本解析及规则校验模块,用于对自定义脚本自动解析、脚本语法规则校验及将脚本展现成可视化规则选项;
所述必选条件/可选条件配置模块,用于将解析后的规则选项划分为必选条件/可选条件选项,供用户配置筛选条件信息;
所述输出字段配置模块用于对取数内容对应的输出字段进行配置;
所述周期性任务配置模块用于设置周期性取数任务;
所述取数清单管理模块用于后台数据生成后提供清单下载功能。
进一步地,所述营销场景新增及脚本配置模块提供营销场景模版示例预先设置功能,通过预置营销场景模版示例供用户直接使用。
进一步地,所述营销场景新增及脚本配置模块提供自定义脚本配置,自定义脚本配置中脚本输入格式通过自定义设置,且自定义脚本支持动态表使用,动态表使用具体是在自定义脚本配置中通过配置脚本实现,通过动态表的使用对取数日期进行设置。
一种基于完全自定义SQL场景的自助取数方法,提供上述基于完全自定义SQL场
景的自助取数系统,该方法包括以下步骤:
A:技术人员通过营销场景新增及脚本配置模块设置营销场景基本信息和自定义配置SQL脚本信息,实现新增SQL场景;
B:系统的脚本解析及规则校验模块对SQL脚本信息进行自动解析、脚本语法规则校验及将脚本展现成可视化规则选项;
C:技术人员通过必选条件/可选条件配置模块对SQL场景取数进行必选条件/可选条件设置,供取数人员选择;取数人员通过必选条件/可选条件配置模块进行取数内容条件筛选;
D:技术人员通过输出字段配置模块对取数内容所需的输出字段进行配置;取数人员通过输出字段配置模块对取数内容所需的输出字段进行配置;
E:技术人员或取数人员通过周期性任务配置模块设置周期性取数任务;
F:取数人员通过取数清单管理模块下载取数清单。
进一步地,所述步骤A中,自定义配置SQL脚本信息,SQL脚本格式需要满足以下规则:SQL脚本的字段输入格式为“字段/*字段中文名称字段类型*/”。
进一步地,所述步骤A中,通过动态表的使用对取数日期进行设置,动态表使用:日表后缀使用#YYYYMMDD#,月表后缀使用#YYYYMM#,用于标识当前日、当前月;如果要是取上月数据将月表后缀修改为#YYYYMM-1#,上上月数据将月表后缀修改为#YYYYMM-2#,之前月数以此类推,日表同样处理,如果要是取上一日数据将日表后缀修改为#YYYYMMDD-1#,上上日数据将日表后缀修改为#YYYYMMDD-2#,之前日数以此类推。
进一步地,所述步骤C中,IT人员进行必选/可选条件配置,IT人员根据管控需求进行必选条件配置,根据业务需求进行可选条件配置,提供业务人员配置筛选条件信息,必选条件用于强制要求取数人员配置的选项,适用于权限类、规范要求类等配置选项,可选条件适用于一般性配置条件,对于配置条件没有强制要求的选项可配置成可选条件。
进一步地,所述步骤E中,SQL场景配置完成后提交形成任务,后台执行任务生成对应的取数清单,系统提供立即生成及线下周期性自动生成两种方式,周期性任务可按日、周、月周期性自动生成取数清单。
有益效果:本发明与现有技术比较,具有的优点是:
1、本发明系统能够支持完全自定义SQL配置,从而实现IT人员灵活配置SQL业务场景,系统进行图形化解析展示,由取数人员灵活配置筛选条件及取数周期,这样业务人员可直接通过图形化界面操作取数,增加便利性的同时实现系统化、流程化管控,同时保证了时效性和复用性;
2、本发明系统采用技术与业务分开的管理模式,由IT人员配置取数脚本,系统通过对脚本进行解析,以图形化方式展现,提供给业务人员使用,提高了时效性;
3、本发明方法提供自定义SQL脚本配置功能,IT人员可自行或根据自助取数需求配置SQL脚本信息,亦可结合当前多个取数需求进行整合,实现单个场景支撑多个取数需求;且自定义SQL脚本配置,使得IT人员可事先预置多个营销场景模版示例,供业务人员直接使用,无需每次业务人员有业务需求先找技术人员,再等待技术人员取数并反馈,这样缩短了业务流程,提高了时效性。
附图说明
图1是本发明场景基本信息配置界面。
图2是本发明SQL配置界面。
图3是本发明取数场景条件配置界面。
图4是本发明IT人员登陆的输出字段配置界面。
图5是本发明业务人员登陆的输出字段配置界面。
图6是本发明周期性任务取数界面。
图7是本发明取数清单管理页面示意图。
图8是本发明系统结构示意图。
图9是自助取数场景管理流程图。
具体实施方式
下面结合附图对本发明作更进一步的说明。
实施例一:
本实施例提供的一种基于完全自定义SQL场景的自助取数系统,参照图8,该自助取数系统包括营销场景新增及脚本配置模块、脚本解析及规则校验模块、必选条件/可选条件配置模块、输出字段配置模块、周期性任务配置模块和取数清单管理模块;
所述营销场景新增及脚本配置模块,用于对营销场景信息进行配置以及自定义脚本配置;
所述脚本解析及规则校验模块,用于对自定义脚本自动解析、脚本语法规则校验及将脚本展现成可视化规则选项;
所述必选条件/可选条件配置模块,用于将解析后的规则选项划分为必选条件/可选条件选项,供用户配置筛选条件信息;
所述输出字段配置模块用于对取数内容对应的输出字段进行配置;
所述周期性任务配置模块用于设置周期性取数任务;
所述取数清单管理模块用于后台数据生成后提供清单下载功能。
所述营销场景新增及脚本配置模块提供营销场景模版示例预先设置功能,通过预置营销场景模版示例供用户直接使用。所述营销场景新增及脚本配置模块提供自定义脚本配置,自定义脚本配置中脚本输入格式通过自定义设置,且自定义脚本支持动态表使用,动态表使用具体是在自定义脚本配置中通过配置脚本实现,通过动态表的使用对取数日期进行设置;
一种基于完全自定义SQL场景的自助取数方法,参照图9,通过上述基于完全自定义SQL场景的自助取数系统完成自助取数,主要包括以下步骤:
技术人员通过营销场景新增及脚本配置模块设置营销场景基本信息和自定义配置SQL脚本信息,实现新增SQL场景;
系统的脚本解析及规则校验模块对SQL脚本信息进行自动解析、脚本语法规则校验及将脚本展现成可视化规则选项;
技术人员通过必选条件/可选条件配置模块对SQL场景取数进行必选条件/可选条件设置,供取数人员选择;取数人员通过必选条件/可选条件配置模块进行取数内容条件筛选;
技术人员通过输出字段配置模块对取数内容所需的输出字段进行配置;取数人员通过输出字段配置模块对取数内容所需的输出字段进行配置;
技术人员或取数人员通过周期性任务配置模块设置周期性取数任务;
取数人员通过取数清单管理模块下载取数清单。
实施例二:
本实施例提供的一种基于完全自定义SQL场景的自助取数系统,该自助取数平台通过链接数据库完成取数功能;
用户通过登陆界面登陆该自助取数平台,登陆用户包括IT人员和业务人员,IT人员和业务人员分别有对应的自助取数平台登陆界面。
该自助取数系统包括营销场景新增及脚本配置模块、脚本解析及规则校验模块、必选条件/可选条件配置模块、输出字段配置模块、周期性任务配置模块和取数清单管理模块以及数据库;
数据库中包括有用户基本属性数据、网络信息数据、业务订购数据、业务消费数据等,订单数据、营业数据和用户行为数据等都存储在其中;
营销场景新增及脚本配置模块:
营销场景新增及脚本配置模块,营销场景也称为自助取数场景或SQL场景;营销场景新增及脚本配置模块用于对营销场景信息及脚本信息进行配置,通过自定义脚本配置提供营销场景的增删改查功能以及提供营销场景模版示例;IT人员通过对应的登陆界面登陆自助取数平台,IT人员登陆自助取数平台以后,可以通过该自助取数平台配置SQL脚本信息、新增SQL场景,IT人员可以通过自定义SQL脚本配置提供营销场景模版示例,IT人员可以事先预制很多营销场景模版示例,供业务人员直接使用,而无需每次业务人员有业务需求先找IT人员,再等待IT人员取数进行反馈,进一步反映了本发明的方法缩短了业务流程;
IT人员新建营销场景,IT人员可自行或根据自助取数需求配置SQL脚本信息,亦可结合当前多个取数需求进行整合配置SQL脚本信息,从而建立一个营销场景,实现单个营销场景支撑多个取数需求,即当业务人员有多个需求时,IT人员将该多个需求进行整合得到自定义为一个SQL脚本配置,得到的单个SQL场景支撑多个取数需求;
IT人员通过对应的登陆界面登陆自助取数平台,通过场景基本信息功能界面对场景基本信息进行设置,如图1所示,图1中为场景名称为电渠视频偏好场景设置,场景基本信息功能界面包括对场景名称、归属区域、场景类型、场景级别、活动、场景描述等信息的配置;通过对场景基本信息的配置,可以自定义场景基本信息;
IT人员通过对应的登陆界面登陆自助取数平台,通过SQL配置界面自定义配置SQL脚本,SQL配置界面如图2所示,IT人员根据,在SQL配置中,IT人员可自行或根据自助取数需求在SQL配置中输入SQL脚本,SQL脚本格式需要满足以下规则:
SQL脚本的字段输入格式为“字段/*字段中文名称字段类型*/”,如:“CUST_ID/*客户编码NUMBER(18)*/”,该SQL脚本的字段输入格式提供了下述取数场景条件配置可视化界面中规则选项的显示,如若在下述取数场景条件配置中添加了字段T.CITY_ID/*本地网CHAR(1)*/,则在可视化界面中规则选项前显示:本地网(CITY_ID);
自定义SQL脚本支持日期参数动态传递,取数人员如业务人员可按日、月动态获取日期参数,支持周期性自动取数,可通过动态表的使用对取数日期进行设置:
动态表使用:日表后缀使用#YYYYMMDD#,月表后缀使用#YYYYMM#,用于标识当前日、当前月;如果要是取上月数据将月表后缀修改为#YYYYMM-1#,上上月数据将月表后缀修改为#YYYYMM-2#,以此类推,日表同样处理,如果要是取上一日数据将日表后缀修改为#YYYYMMDD-1#,上上日数据将日表后缀修改为#YYYYMMDD-2#;
在图2的SQL配置界面中,SQL脚本配置如下:
脚本复制(天翼自助取数):
select
T.PD_INST_ID/*产品ID NUMBER(20)*/,
T.CITY_ID/*本地网CHAR(1)*/,
T.ACCESS_NMBR/*接入号VARCHAR2(100)*/,
T.CL_TP_ID/*战略分群NUMBER(2)*/,
T.MBL_LOST_TP/*流失倾向NUMBER(2)*/,
T.LOAD_MONS/*在网时长(月)NUMBER(10)*/,
CASE WHEN T.GENDER='0'THEN'男'
WHEN T.GENDER='1'THEN'女'
ELSE'未知'END AS GENDER/*性别VARCHAR2(10)*/,
T.CUST_AGE/*年龄NUMBER(6)*/,
T.CHRG/*ARPU NUMBER(20,2)*/,
T.CUST_TP/*客户类型NUMBER(2)*/
T.TRMNL_PRICE/*终端价格NUMBER(5)*/,
T.TRMNL_BRAND/*终端品牌VARCHAR2(100)*/,
T.G3_TRMNL_F/*终端类型VARCHAR2(2)*/,
T.DRTN/*通话时长(分钟)NUMBER(10)*/,
T.CALLING_LOCAL_DRTN/*本地通话时长(分钟)NUMBER(10)*/,
T.LONG_DRTN/*长途通话时长(分钟)NUMBER(10)*/,
T.ROAM_DRTN/*漫游时长(分钟)NUMBER(10)*/,
T.COUNT/*通话次数NUMBER(10)*/
from TMK.CBA_MBL_ANALYSE_MON_#YYYYMM-1#t
上述SQL脚本配置对应一个天翼自助取数营销场景模版,该SQL脚本配置中各字段可通过数据表和可关联的源单表设置自动添加字段类型,在Oracle数据库中存储有大量的字段类型供用户使用,在上述SQL脚本配置中,通过配置#YYYYMM-1#,表示取上月数据。
系统中的脚本解析及规则校验模块:
用于配置脚本自动解析及脚本语法校验并将SQL脚本配置展现成可视化规则选项,对IT人员在SQL配置中输入的SQL脚本进行自动解析及对脚本语法进行校验;该模块首先对SQL脚本进行自动解析,然后对脚本语法进行规则校验后若出现语法规则错误的SQL脚本,则提供必要的语法错误提醒;
SQL脚本配置完成后系统进行脚本自动解析,系统中的脚本解析及规则校验模块进行SQL脚本解析,生成取数字段描述、数据类型等信息,识别基本SQL脚本、规则描述信息、动态参数、规则数据类型等信息;解析后的脚本需要进行语法规则校验,对SQL脚本语法规则进行校验,若语法正确,则系统进行规则解析后展现成通俗易懂的可视化规则选项,对于语法错误的脚本配置进行错误提示,提醒IT人员及时进行修改,IT人员修改后提交,提交成功后系统重新进行规则解析直至脚本语法全部正确后展现成可视化规则选项。
系统中的必选条件/可选条件配置模块:
自定义SQL脚本被脚本解析及规则校验模块解析成通俗易懂的可视化规则选项后,IT人员需要进行必选/可选条件配置,系统中的必选条件/可选条件配置模块提供SQL场景取数必选条件/可选条件配置功能;由IT人员根据管控需求进行必选条件配置,根据业务需求进行可选条件配置,提供业务人员配置筛选条件信息,必选条件用于强制要求取数人员配置的选项,适用于权限类、规范要求类等配置选项,可选条件适用于一般性配置条件,对于配置条件没有强制要求的选项可配置成可选条件;取数场景条件配置界面如图2所示,图2中取数场景条件配置包括必选条件配置和可选条件配置,IT人员通过对应的取数平台登陆界面登陆该界面,对必选条件配置和可选条件进行配置;
其中必选条件配置中设有添加条件功能,IT人员可根据管控需求进行必选条件配置,在上一步骤IT人员对SQL脚本自定义配置中,对营销场景进行了若干种字段设置,该SQL脚本的字段输入格式提供了取数场景条件配置可视化界面中规则选项的显示,如若在取数场景条件配置中添加了字段T.CITY_ID/*本地网CHAR(1)*/,IT人员可以在取数场景条件配置中添加该字段,将本地网(CITY_ID)配置为必选条件,则在取数场景条件配置可视化界面中规则选项前显示:本地网(CITY_ID),该条件参数包括各市级名称(如南京、苏州、无锡、常州、南通、扬州、泰州、镇江、徐州、盐城、连云港、淮安、宿迁),业务人员通过对应的取数平台登陆界面登陆该条件筛选界面,在各条件参数配置选项前可根据需要自行勾选其中一个或多个或全选;其中可选条件配置中设有添加条件功能,IT人员可自行或根据一个或多个业务需求进行可选条件配置,如可选条件配置包括套餐规格分类(PO_SPEC_CATE_ID),该条件包含各类条件参数(如E9套餐、E8套餐、E6套餐、商旅套餐、商务领航、乐享套餐、学子E行套餐)、可选条件配置还包括是否智能机(TRMNL_INTLL_F)、1X流量(MBL_DATA_1X_FLOW_AMNT)、是否中高端(HIGH_CUST_F)、是否VPN(VPN_F)、是否3G终端(G3_TRMNL_F)、上网流量(MBL_DATA_FLOW_AMNT)等,业务人员在各条件参数配置选项前可根据需要自行勾选其中一个或多个或全选;上述必选条件配置和可选条件配置界面中均提供了删除操作,IT人员可根据需要或自行删除条件,例如业务人员在必选条件配置时可选本地网(CITY_ID)包含南京、苏州,在可选条件配置时可选套餐规格分类为E9套餐、是智能机、1X流量大于等于一定值、是中高端、不是VPN、是3G终端、上网流量小于1G,必选条件/可选条件配置完成后,通过下述输出字段配置模块将对应的取数内容输出。
系统中的输出字段配置模块:
上述步骤IT人员对必选条件/可选条件配置中通过取数场景条件配置界面的添加功能对必选条件和可选条件进行配置,上述配置完必选条件/可选条件后,对取数内容进行配置,配置导出清单内容,添加输出字段选项进行配置,最终取数内容对应的输出字段配置,通过输出字段配置功能界面可以完成;
IT人员通过对应的取数平台登陆界面登陆输出字段配置界面,参照图4,在该输出字段配置界面中,IT人员通过关联字段配置功能添加输出字段类型,输出字段包括大量字段类型供IT人员选择;
取数人员(业务人员)通过对应的取数平台登陆界面登陆到输出字段配置界面,参照图5,在该输出字段配置界面中,业务人员在输出字段选项框中输入字段如“本地网”,页面将快速定位到“本地网”,业务人员可以对“本地网”对应的条件参数进行选择,进一步实现取数内容的获取;
输出字段配置模块同时支持编码解释配置,将输出内容编码配置成相应的中文解释的功能,使业务人员取出的数据更加容易理解。
周期性任务配置模块:
SQL场景配置完成后需要提交,这样就形成一个任务,后台会执行任务生成对应的取数清单,系统提供立即生成及线下周期性自动生成两种方式,周期性任务可按日、周、月周期性自动生成取数清单;
提供自助取数清单立即生成及线下周期性自动生成两种方式,立即生成的任务在取数实例配置完成后立即运行生成取数清单信息,周期性任务则在取数实例配置提交后保存到任务队列,到指定周期时间后后台自动运行生成自助取数清单;
业务人员基于自助取数场景创建取数实例配置,选择取数筛选的必选条件/可选条件、本次需求所需的输出字段,并根据取数频度配置一次性生成清单或者每日、每周、每月周期性自动生成自助取数清单;
周期性任务配置界面参照图6,IT人员通过登陆对应的取数平台登陆界面登陆该界面,在界面功能选项中可以设置自助取数清单执行方式为立即执行还是后台周期执行,若选择后台周期执行,则在周期类型中设置每一天或每一周或每一月,并对任务开始时间和任务结束时间进行设置,最终执行发起派单,后台会执行任务生成对应的取数清单。
取数清单管理模块:
用于数据生成后提供清单下载功能,按取数配置生成相应取数实例,并提供清单下载按钮,对于周期性任务在同一取数实例中按生成时间下载;
任务运行完成后,取数人员进入取数清单管理页面下载自助取数清单,自助取数内容提供SCV格式进行导出,参照图7,图7为取数清单管理页面,在该页面中包括取数场景名称设置、取数实例名称设置、区域设置和场景创建时间设置,其中,取数实例名称包括校园新增用户提取场景清单等,其中校园新增用户提取场景清单的数据按日周期性生成,按日周期性生成的校园新增用户提取场景清单总记录数均在界面上有记载,对应各个时间的校园新增用户提取场景清单后均设有下载按钮,取数人员通过该下载按钮可完成清单下载,下载清单输出类型包括清单导出和活动派单类型;
业务人员收到取数清单完成的短信提醒后,登陆系统查看取数清单记录条数等信息,并进行清单导出。
本发明的基本思想参照图9,IT人员新建自助取数场景,根据自助取数需求配置SQL脚本信息,可结合当前多个取数需求进行整合,实现单个场景支撑多个取数需求;SQL脚本信息配置完成后,系统进行语法规则校验,对于语法错误的配置进行错误提示,IT人员修改后提交;提交成功后系统进行规则解析并展现成可视化图形选项,由IT人员根据管控要求进行必选条件配置,根据业务需求进行可选条件配置,提供业务人员配置筛选条件信息;必选/可选条件配置完成后,进行输出字段信息配置,结合具体取数需求,配置输出字段信息,完成场景信息配置;业务人员基于自助取数场景创建取数实例,配置必选/可选条件,勾选本次取数所需输出字段,配置取数任务信息,支持一次性立即取数及后台周期性取数配置;取数任务运行完成后生成自助取数清单,业务人员可在清单管理页面进行清单下载。
实施例三:
本实施例提供的一种基于完全自定义SQL场景的自助取数系统,基于实施例二,该自助取数平台通过链接数据库完成取数功能;
数据库采用Oracle数据库,自助取数平台通过链接Oracle数据库完成取数功能。
该自助取数平台基于Oracle数据库建立,后台开发人员通过java语言和.jsp语言编程,并导入WAS(WebSphere Application Server)实现自助取数平台的建立,WAS是一种功能完善、开放的Web应用程序服务器。
用户通过登陆界面登陆该自助取数平台,登陆用户包括IT人员和业务人员,IT人员和业务人员分别有对应的自助取数平台登陆界面。
以上所述仅是本发明的优选实施方式,应当指出:对于本技术领域的技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (8)

1.一种基于完全自定义SQL场景的自助取数系统,其特征在于:该自助取数系统包括营销场景新增及脚本配置模块、脚本解析及规则校验模块、必选条件/可选条件配置模块、输出字段配置模块、周期性任务配置模块和取数清单管理模块;
所述营销场景新增及脚本配置模块,用于对营销场景信息进行配置以及自定义脚本配置;
所述脚本解析及规则校验模块,用于对自定义脚本自动解析、脚本语法规则校验及将脚本展现成可视化规则选项;
所述必选条件/可选条件配置模块,用于将解析后的规则选项划分为必选条件/可选条件选项,供用户配置筛选条件信息;
所述输出字段配置模块用于对取数内容对应的输出字段进行配置;
所述周期性任务配置模块用于设置周期性取数任务;
所述取数清单管理模块用于后台数据生成后提供清单下载功能。
2.根据权利要求1所述的基于完全自定义SQL场景的自助取数系统,其特征在于:
所述营销场景新增及脚本配置模块提供营销场景模版示例预先设置功能,通过预置营销场景模版示例供用户直接使用。
3.根据权利要求1或2所述的基于完全自定义SQL场景的自助取数系统,其特征在于:所述营销场景新增及脚本配置模块提供自定义脚本配置,自定义脚本配置中脚本输入格式通过自定义设置,且自定义脚本支持动态表使用,动态表使用具体是在自定义脚本配置中通过配置脚本实现,通过动态表的使用对取数日期进行设置。
4.一种基于完全自定义SQL场景的自助取数方法,其特征在于:
提供如权利要求1~3中任一项权利要求所述的自助取数系统,该方法包括以下步骤:
A:技术人员通过营销场景新增及脚本配置模块设置营销场景基本信息和自定义配置SQL脚本信息,实现新增SQL场景;
B:系统的脚本解析及规则校验模块对SQL脚本信息进行自动解析、脚本语法规则校验及将脚本展现成可视化规则选项;
C:技术人员通过必选条件/可选条件配置模块对SQL场景取数进行必选条件/可选条件设置,供取数人员选择;取数人员通过必选条件/可选条件配置模块进行取数内容条件筛选;
D:技术人员通过输出字段配置模块对取数内容所需的输出字段进行配置;取数人员通过输出字段配置模块对取数内容所需的输出字段进行配置;
E:技术人员或取数人员通过周期性任务配置模块设置周期性取数任务;
F:取数人员通过取数清单管理模块下载取数清单。
5.根据权利要求4所述的基于完全自定义SQL场景的自助取数方法,其特征在于:所述步骤A中,自定义配置SQL脚本信息,SQL脚本格式需要满足以下规则:SQL脚本的字段输入格式为“字段/*字段中文名称字段类型*/”。
6.根据权利要求4所述的基于完全自定义SQL场景的自助取数方法,其特征在于:所述步骤A中,通过动态表的使用对取数日期进行设置,动态表使用:日表后缀使用#YYYYMMDD#,月表后缀使用#YYYYMM#,用于标识当前日、当前月;如果要是取上月数据将月表后缀修改为#YYYYMM-1#,上上月数据将月表后缀修改为#YYYYMM-2#,之前月数以此类推,日表同样处理,如果要是取上一日数据将日表后缀修改为#YYYYMMDD-1#,上上日数据将日表后缀修改为#YYYYMMDD-2#,之前日数以此类推。
7.根据权利要求4所述的基于完全自定义SQL场景的自助取数方法,其特征在于:所述步骤C中,IT人员进行必选/可选条件配置,IT人员根据管控需求进行必选条件配置,根据业务需求进行可选条件配置,提供业务人员配置筛选条件信息,必选条件用于强制要求取数人员配置的选项,适用于权限类、规范要求类等配置选项,可选条件适用于一般性配置条件,对于配置条件没有强制要求的选项可配置成可选条件。
8.根据权利要求4所述的基于完全自定义SQL场景的自助取数方法,其特征在于:所述步骤E中,SQL场景配置完成后提交形成任务,后台执行任务生成对应的取数清单,系统提供立即生成及线下周期性自动生成两种方式,周期性任务可按日、周、月周期性自动生成取数清单。
CN201710591739.8A 2016-07-19 2017-07-19 一种基于完全自定义sql场景的自助取数系统及方法 Pending CN107357587A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2016105676772 2016-07-19
CN201610567677.2A CN106227784A (zh) 2016-07-19 2016-07-19 一种基于完全自定义sql场景的自助取数系统

Publications (1)

Publication Number Publication Date
CN107357587A true CN107357587A (zh) 2017-11-17

Family

ID=57531732

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201610567677.2A Pending CN106227784A (zh) 2016-07-19 2016-07-19 一种基于完全自定义sql场景的自助取数系统
CN201710591739.8A Pending CN107357587A (zh) 2016-07-19 2017-07-19 一种基于完全自定义sql场景的自助取数系统及方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201610567677.2A Pending CN106227784A (zh) 2016-07-19 2016-07-19 一种基于完全自定义sql场景的自助取数系统

Country Status (1)

Country Link
CN (2) CN106227784A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112905158A (zh) * 2021-01-28 2021-06-04 广州衣科明夷信息技术有限公司 一种基于层级串联技术的营销中台系统

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106227784A (zh) * 2016-07-19 2016-12-14 南京坦道信息科技有限公司 一种基于完全自定义sql场景的自助取数系统
CN109376161B (zh) * 2018-08-22 2023-07-18 中国平安人寿保险股份有限公司 基于大数据的标签数据更新方法、装置、介质及电子设备
CN110502508A (zh) * 2019-08-23 2019-11-26 行吟信息科技(上海)有限公司 一种基于参数动态的校验方法及系统
CN111552702A (zh) * 2020-05-08 2020-08-18 北京思特奇信息技术股份有限公司 业务规则自动配置方法、装置、电子设备及存储介质
CN114025027B (zh) * 2021-11-02 2023-10-03 三维通信股份有限公司 数据传输脚本的运行方法、装置、存储介质和电子装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104216888A (zh) * 2013-05-30 2014-12-17 中国电信股份有限公司 数据处理任务关系设置方法及系统
CN105511891A (zh) * 2016-02-26 2016-04-20 广州品唯软件有限公司 一种自助取数平台的前端框架建立方法及装置
CN106227784A (zh) * 2016-07-19 2016-12-14 南京坦道信息科技有限公司 一种基于完全自定义sql场景的自助取数系统
US20170147333A1 (en) * 2015-11-23 2017-05-25 Sap Se User-configurable database artifacts
CN106776834A (zh) * 2016-11-28 2017-05-31 中通服公众信息产业股份有限公司 一种基于指标的数据分析自取数方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104216888A (zh) * 2013-05-30 2014-12-17 中国电信股份有限公司 数据处理任务关系设置方法及系统
US20170147333A1 (en) * 2015-11-23 2017-05-25 Sap Se User-configurable database artifacts
CN105511891A (zh) * 2016-02-26 2016-04-20 广州品唯软件有限公司 一种自助取数平台的前端框架建立方法及装置
CN106227784A (zh) * 2016-07-19 2016-12-14 南京坦道信息科技有限公司 一种基于完全自定义sql场景的自助取数系统
CN106776834A (zh) * 2016-11-28 2017-05-31 中通服公众信息产业股份有限公司 一种基于指标的数据分析自取数方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
徐喆: ""自助取数分析平台实现精细快捷经营分析"", 《通信企业管理》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112905158A (zh) * 2021-01-28 2021-06-04 广州衣科明夷信息技术有限公司 一种基于层级串联技术的营销中台系统
CN112905158B (zh) * 2021-01-28 2023-10-31 杭州衣科信息技术股份有限公司 一种基于层级串联技术的营销中台系统

Also Published As

Publication number Publication date
CN106227784A (zh) 2016-12-14

Similar Documents

Publication Publication Date Title
CN107357587A (zh) 一种基于完全自定义sql场景的自助取数系统及方法
CN107193545B (zh) 一种面向构件的多语言协同开发装置、方法与系统
US11017053B2 (en) Intelligence centers
Walravens et al. Platform business models for smart cities: From control and value to governance and public value
US7249041B2 (en) System and method for posting available time slots to a network hub
CN103927174A (zh) 业务处理方法和装置
CN107705151A (zh) 广告投放调控的展现方法及装置
CN108932120A (zh) 一种借贷产品开发系统
CN108021629A (zh) 一种广告素材数据生成方法、装置及系统
Wang et al. The study of value network reconstruction and business model innovation driven by entrepreneurial orientation
CN110288229A (zh) 流程处理方法、系统及计算机可读存储介质
CN108363775A (zh) 基于规则引擎的高扩展性线上预览环境方法
CN109359245A (zh) 信息推送方法、装置、服务器及存储介质
Long et al. Agile supports improved culture and quality for healthwise
Sørensen et al. Comparing solution approaches for a complete model of high school timetabling
CN116991383B (zh) 一种erp系统可视化流程设计器及设计方法
CN117291774B (zh) 一种飞行员ebt课程开发和合规性验证的方法及系统
Rahman et al. Fit Online: A Mobile Application for Fitness and Recreation Services
CN108804468A (zh) 思维导图信息的分享系统
Yesmin Market operations of Robi Axiata Limited
Pham Developing mobile application with Vue. js framework: Case: Osmi application and SuperApp Oy
Palazzo et al. An integrated assessment of agricultural hotspots and irrigation as a climate adaptation option
Brem Pull vs. Push—strategic technology and innovation management for a successful integration of market pull and technology push activities
Cockburn Agile Software Development The Cooperative Game: An Overview
Spillner et al. Experience report on real-world manual service modeling in usdl

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20171117