CN104753721A - 一种通用可配置的表格数据的自动核查的方法 - Google Patents
一种通用可配置的表格数据的自动核查的方法 Download PDFInfo
- Publication number
- CN104753721A CN104753721A CN201510143005.4A CN201510143005A CN104753721A CN 104753721 A CN104753721 A CN 104753721A CN 201510143005 A CN201510143005 A CN 201510143005A CN 104753721 A CN104753721 A CN 104753721A
- Authority
- CN
- China
- Prior art keywords
- data
- inspection
- rule
- business
- scheduling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000007689 inspection Methods 0.000 claims description 54
- 238000001514 detection method Methods 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 10
- 238000012360 testing method Methods 0.000 claims description 8
- 125000004122 cyclic group Chemical group 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 3
- 230000007774 longterm Effects 0.000 claims description 3
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000009434 installation Methods 0.000 claims description 2
- 238000010295 mobile communication Methods 0.000 abstract description 2
- 230000005856 abnormality Effects 0.000 abstract 1
- 238000007726 management method Methods 0.000 description 9
- 238000012423 maintenance Methods 0.000 description 3
- 230000000737 periodic effect Effects 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 230000032683 aging Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000003556 assay Methods 0.000 description 1
- 238000012550 audit Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000000275 quality assurance Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Abstract
本发明涉及移动通信网中网管系统的数据核查技术领域，特别涉及一种通用可配置的表格数据的自动核查的方法。其可以由业务人员根据他的业务理解，设置指标检查规则，在指标数据生成后及时对报表及指标进行检查，保证数据的异常及时发现，确保网管数据的可用性，并可以快速根据业务需求生成不同的检查报告。采用本发明所述方法，可以分层解决问题，业务人员做业务人员的工作，it人员做it人员的工作。可以自动有效的根据要求检查网管数据，及时发现数据问题，确保网管数据的正常应用。
Description
技术领域
本发明涉及移动通信网中网管系统的数据核查技术领域，特别涉及一种通用可配置的表格数据的自动核查的方法。
背景技术
在移动通信中，数据是网管应用以及用户运营分析的基础，数据不全、不准将导致应用无效，严重时可能导致决策的失误。为此，数据的质量保障是网管建设中的关键问题，贯穿了网管建设的整个过程，并影响了网管系统的推广和使用。其中关键指标检查，有利于在数据流的最末端发现数据质量问题。网管系统关键指标种类很多（如话务量类指标和网络质量指标等），需要根据指标的业务规则检查。
传统的网管系统，IT系统作为工具给IT人员使用，业务人员不能够自己设置规则，设置需求，必须要把需求告诉IT人员，然后由IT业务人员提供数据。在这个过程中，由于IT人员对业务的理解有偏差，提供的数据和业务人员需要的数据有所差别。
另外网管系统指标繁多，有周期性的特点，业务人员检查太过繁琐，时效性不强。
发明内容
为了解决现有技术的问题，本发明提供了一种通用可配置的表格数据的自动核查的方法，其可以由业务人员根据他的业务理解，设置指标检查规则，在指标数据生成后及时对报表及指标进行检查，保证数据的异常及时发现，确保网管数据的可用性，并可以快速根据业务需求生成不同的检查报告。
本发明所采用的技术方案如下：
一种通用可配置的表格数据的自动核查的方法，是将数据检查的应用按照规则设置、调度设置、检查这几个层次分离，其中：
规则设置完全为业务模型，依托于业务元数据、常用规则类型；
调度设置依据数据本身特性，以及业务经验来设置；
检查层，根据规则设置、调度设置的数据，自动生成的检查sql及调度信息，自动检测。
检查层的具体检查流程方案如下：
A、检验规则根据实际情况可选择分层次输入，但会形成统一的检测入口；
B、根据数据周期及实际配置形成调度规则，根据各级别配置的检验规则，及调度周期等信息，自动形成调度检验规则；
C、统一检测，检测时会根据具体的检测范围限制，时间限制取出对应的规则sql，执行检测，并将检测结果存放于相对应配置的结果信息表中；
D、根据常用需求，提炼出简单的业务输入流程，根据对应流程自动生成检验规则；
E、调度任务设置。
检验时可以根据实际需求选择实时调用和周期调用，实时调用为满足单次检验的需求，周期调用满足网管数据均为周期数据，长期监测需要周期检查的需求。
本发明的一种通用可配置的表格数据的自动核查的方法，具有以下特点：
1、方法的检验规则根据实际情况提供分层次输入，并会形成统一的检测入口；将应用分层的理念，将业务模型提取出来，由业务人员操作。
2、根据数据周期及实际配置形成调度规则；中根据网管数据的特征，及具体的业务需求，形成依赖与业务模型的快速易操作的入口，完全可由业务人员自行操作。
3、统一检测的流程；自动的根据已有规则、调度规则形成检验流程，并将结果记入配置好的结果表，异常等其他信息记入日志表。
4、优化查询效率、降低系统占用率的方法。根据业务特性、检验特性，自动合并可合并的检测，提升检测效率，降低系统资源消耗。
本发明技术方案从应用角度可以提供以下功能：
1、提供业务层指标查询及检验规则设置界面；
2、提供业务层指标维护界面；
3、提供it级指标维护工具；
4、提供业务及任务设置界面；
5、提供业务级常用检验模板；
6、提供扩展检验模板；
7、提供it级检验结果配置；
8、提供it及检验结果查询配置。
本发明提供的技术方案带来的有益效果是：
本发明依照应用角度分层，由it人员将it级信息维护到系统中，由业务人员从业务角度录入检验规则及检验调度方案，由系统自动生成检验sql，以及检验任务，由此满足人尽其用的规则。为了满足扩展及复杂需求的需要，本发明预留了it级检验的接口，即完全自主输入检验sql的接口，保留了各种可扩展性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明的一种通用可配置的表格数据的自动核查的方法的检验信息组成示意图。
图2为本发明的一种通用可配置的表格数据的自动核查的方法的检验信息实施示意图。
图3为本发明的一种通用可配置的表格数据的自动核查的方法的检测流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
本发明把数据检查的应用按照规则设置、调度设置（控制）、检查这几个层次分离，这样每个层次可以单独完成其层次的功能。
1、规则设置完全为业务模型，依托于业务元数据、常用规则类型，所以业务人员可以无障碍操作。
2、调度设置（控制）依据数据本身特性（业务元数据），以及业务经验来设置，完全适用于业务人员操作。
3、检查层，根据规则设置、调度设置的数据，自动生成的检查sql及调度信息，自动检测，不需业务人员或其他人员干涉。
具体检查流程方案如下：
3.1、检验规则根据实际情况可选择分层次输入，但会形成统一的检测入口。
为了满足业务人员、维护人员、it人员各层次人员对数据的可操作性，本发明提供了多个录入层次，即业务人员级的录入、维护it人员的录入，录入数据分别存储在不同层级的数据库表中。但为了程序的复用性、可读性，所以检测入口为相同的入口。
3.2、根据数据周期及实际配置形成调度规则。
本发明会根据各级别配置的检验规则，及调度周期等信息，自动形成调度检验规则。调度检验规则包括此检测的调度时间及相对应的检验sql。对于多个可合并的检测，会自动生成单个的检验sql，来实现1次检测出结果的目标。
3.3、统一检测
检测时会根据具体的检测范围限制，时间限制取出对应的规则sql，执行检测，并将检测结果存放于相对应配置的结果信息表中。
4、根据常用需求，提炼出简单的业务输入流程，根据对应流程自动生成检验规则。
如附图1、2所示，根据常用业务，生成主动检查所需的各个信息。常用业务有平衡检验、数值检验、关联检验、波动检验、完整性检验。根据这些平常的业务需求，本发明提供了相对应的业务人员熟悉的、可操作的录入界面，分类或模糊匹配选择报表及指标信息，根据需求录入相关检验要求。这样业务人员可以简单方便的自行设置检验规则，完全自主的应用系统。
5、调度任务设置
检验时可以根据实际需求选择实时调用和周期调用。实时调用为满足单次检验的需求。周期调用满足网管数据均为周期数据，长期监测需要周期检查的需求。周期调用根据检测对象的时间粒度和检测对象的时延来自动生成周期调度任务，简单方便实用。
由于很多业务（完整性，及时性等）需要检测各个单个指标，对应业务来说是分离的，但it角度来说，是可以同时检测多个指标的。分离的单个检测效率必定较低，占用系统资源也会很大，设置也相对繁琐。所以本发明的分层设置的理念，正好可以解决此问题。本发明分别提供单个任务设置和多任务设置。多任务设置会自动将同类、同表可合并的检查合并，生成单个检验规则，进行检验。
如附图3所示，本发明根据业务人员已配置好的规则，及调度要求，进行检测。本发明定时扫面规则表，首先需要取出检验规则，判断其检验范围，是否应该检验，根据具体的节假日等时间规则区别取出正确的检验方法。提取次检验结果对应需要写入的结果表信息。运行规则检验，写入结果表。将此次检验记入到调度日志表。
下面给出两个具体操作事例，其反应了本发明以业务模型为依据，分层配置的理念。也体现了可合并检验合并检测的理念。
1、“单任务”操作如下：
A、根据要建立任务的规则，首先选择“检验数据周期”“检验规则名称”。
B、根据实际需求选择“调度方式”-周期、非周期；周期调度，需要同时选择“调度周期”，调度周期为检验周期的倍数。
C、根据需求选择“调度发起时间”，此时间应大于当前时间。
D、选择“检测数据开始时间”、“检测数据结束时间”，即此调度时间调度时需要检测的数据的时间段。
E、根据检验类型，填写相关检验信息。
F、点击“插入”按钮，调度信息添加到界面下方；可添加多条调度信息。如有不需要的调度信息，可点击“删除”按钮。
G、点击“确定”按钮，保存相应调度信息。
2、如多个同类规则，需建立一样调度，建议使用多任务设置；“多任务”操作如下：
A、根据要建立任务的规则，依次选择“检验规则类型”、“报表名称”、“应用范围”、“检验规则名称”。
B、根据实际需求选择“调度方式”-周期、非周期；周期调度，需要同时选择“调度周期”，调度周期为检验周期的倍数。
C、根据需求选择“调度发起时间”，此时间应大于当前时间。
D、选择“检测数据开始时间”、“检测数据结束时间”，即此调度时间调度时需要检测的数据的时间段。
E、根据检验类型，填写相关检验信息。
F、点击“插入”按钮，调度信息添加到界面下方；可添加多条调度信息。如有不需要的调度信息，可点击“删除”按钮。
G、点击“确定”按钮，保存相应调度信息。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (3)
1.一种通用可配置的表格数据的自动核查的方法，是将数据检查的应用按照规则设置、调度设置、检查这几个层次分离，其中：
规则设置完全为业务模型，依托于业务元数据、常用规则类型；
调度设置依据数据本身特性，以及业务经验来设置；
检查层，根据规则设置、调度设置的数据，自动生成的检查sql及调度信息，自动检测。
2.根据权利要求1所述的一种通用可配置的表格数据的自动核查的方法，其特征在于，所述的检查层的具体检查流程方案如下：
A、检验规则根据实际情况可选择分层次输入，但会形成统一的检测入口；
B、根据数据周期及实际配置形成调度规则，根据各级别配置的检验规则，及调度周期等信息，自动形成调度检验规则；
C、统一检测，检测时会根据具体的检测范围限制，时间限制取出对应的规则sql，执行检测，并将检测结果存放于相对应配置的结果信息表中；
D、根据常用需求，提炼出简单的业务输入流程，根据对应流程自动生成检验规则；
E、调度任务设置。
3.根据权利要求2所述的一种通用可配置的表格数据的自动核查的方法，其特征在于，所述步骤E中，检验时可以根据实际需求选择实时调用和周期调用，实时调用为满足单次检验的需求，周期调用满足网管数据均为周期数据，长期监测需要周期检查的需求。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510143005.4A CN104753721A (zh) | 2015-03-30 | 2015-03-30 | 一种通用可配置的表格数据的自动核查的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510143005.4A CN104753721A (zh) | 2015-03-30 | 2015-03-30 | 一种通用可配置的表格数据的自动核查的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104753721A true CN104753721A (zh) | 2015-07-01 |
Family
ID=53592869
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510143005.4A Pending CN104753721A (zh) | 2015-03-30 | 2015-03-30 | 一种通用可配置的表格数据的自动核查的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104753721A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105975616A (zh) * | 2016-05-19 | 2016-09-28 | 上海市疾病预防控制中心 | 基于公共卫生精细化管理的数据质量控制系统 |
| CN112734281A (zh) * | 2021-01-21 | 2021-04-30 | 山东健康医疗大数据有限公司 | 一种医疗数据治理中质控和任务调度的解耦处理方法 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030195761A1 (en) * | 2002-04-12 | 2003-10-16 | International Business Machines Corporation | Collection and analysis of measurement data associated with service elements |
| CN101719237A (zh) * | 2009-12-09 | 2010-06-02 | 南京联创科技集团股份有限公司 | 基于全业务指标规则配置的数据质量监控方法 |
-
2015
- 2015-03-30 CN CN201510143005.4A patent/CN104753721A/zh active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030195761A1 (en) * | 2002-04-12 | 2003-10-16 | International Business Machines Corporation | Collection and analysis of measurement data associated with service elements |
| CN101719237A (zh) * | 2009-12-09 | 2010-06-02 | 南京联创科技集团股份有限公司 | 基于全业务指标规则配置的数据质量监控方法 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105975616A (zh) * | 2016-05-19 | 2016-09-28 | 上海市疾病预防控制中心 | 基于公共卫生精细化管理的数据质量控制系统 |
| CN112734281A (zh) * | 2021-01-21 | 2021-04-30 | 山东健康医疗大数据有限公司 | 一种医疗数据治理中质控和任务调度的解耦处理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106815709B (zh) | 一种服务快速响应中心支撑系统及方法 | |
| US10116165B2 (en) | Powergrid operation and supervision system | |
| CN101719237A (zh) | 基于全业务指标规则配置的数据质量监控方法 | |
| CN101998425A (zh) | 一种无线网络优化测试方法和系统 | |
| CN110430081A (zh) | 基于指令自动编排的智能化巡检方法以及装置 | |
| CN103714434A (zh) | 一种基于物联网技术的化工生产现场巡检系统 | |
| WO2022252860A1 (zh) | 一种事件处理方法、装置、计算机设备及存储介质 | |
| CN103377101A (zh) | 一种测试系统和测试方法 | |
| CN110647567A (zh) | 基于末端数据融合的停电计划辅助决策系统 | |
| US20230230018A1 (en) | Methods and internet of things systems for gas repair-reporting management based on call centers of smart gas | |
| CN101877857A (zh) | 移动通信网络优化智能决策支持系统 | |
| Chen et al. | Survey on data quality | |
| CN111950895A (zh) | 基于bim的装配式建筑全阶段设计和评价系统 | |
| CN101582138A (zh) | 动态业务处理系统和方法 | |
| CN104753721A (zh) | 一种通用可配置的表格数据的自动核查的方法 | |
| CN104899725A (zh) | 一种决策支持与事件反馈的智能工作流系统及其流转方法 | |
| CN105589804A (zh) | 一种基于流程驱动的测试自动化方法以及测试自动化系统 | |
| KR20090102142A (ko) | 비즈니스 프로세스 관리 시스템 및 방법 | |
| CN102821403A (zh) | 一种基于普通用户智能手机的无线网络优化测试系统 | |
| KR101913343B1 (ko) | Kpi 지표를 이용한 스마트 공장의 모바일 어플리케이션 관리 시스템 | |
| Doloi et al. | Drivers and impediments of building information modelling from a social network perspective | |
| CN112396349A (zh) | 一种基于业务实体的数据质量监控方法 | |
| KR102595075B1 (ko) | 설비에 대한 진단정보를 관리하는 방법 및 시스템 | |
| CN104751256A (zh) | 讯息结构化的方法与系统 | |
| CN108764607A (zh) | 用户月数据复检方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150701 |