CN101241491A - 一种检查数据的方法和系统 - Google Patents
一种检查数据的方法和系统 Download PDFInfo
- Publication number
- CN101241491A CN101241491A CNA200710063589XA CN200710063589A CN101241491A CN 101241491 A CN101241491 A CN 101241491A CN A200710063589X A CNA200710063589X A CN A200710063589XA CN 200710063589 A CN200710063589 A CN 200710063589A CN 101241491 A CN101241491 A CN 101241491A
- Authority
- CN
- China
- Prior art keywords
- data
- rule
- file
- module
- script
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种检查数据的方法,包括:步骤A、导入待检查数据以及包含检查规则的规则文件;步骤B、执行所述规则文件中的检查规则,以对所述待检查数据进行检查。相应地,本发明还提供一种检查数据的系统。本发明在需要进行数据检查时,通过导入待检查数据以及包含检查规则的规则文件,并执行检查规则即可实现数据检查,从而提高了数据检查的效率;而且操作过程简单,一般的现场维护人员就能够实施;并且数据检查过程中不需要中断业务;另外,由于实现了检查规则与信息系统程序分离,极大方便了信息系统的维护与升级。
Description
技术领域
本发明涉及数据处理领域,尤其涉及一种检查数据的方法和系统。
背景技术
正确完整的数据是设备正常运行的关键。以通信领域为例,随着通信设备日趋复杂,通信设备数据的配置和检查显得越来越重要。尤其在移动通信系统中,通信设备配置数据的错误导致系统故障在整个故障总数中占到了较大的比例。因此,如何规避这类故障,以及出现故障以后采取什么样的工具或方法能够快速定位故障点是需要解决的问题。
目前,常用的故障解决方法是尽最大可能复现故障,通过代码页调试打印等手段定位故障点。但是,首先这种方法定位故障效率较低,无法满足紧急排障需求;再者对排障人员素质要求较高,需要有经验的研发人员才能进行;并且故障现场调试时需要中断信息系统业务,这一点是难以接受的;另外需要研发人员到现场排查,导致维护成本的增加。
综上可知,现在还没有一套可行的数据配置类故障排查手段,排查效率低,并需要中断如移动通信系统等信息系统的业务,在实际使用上显然存在不便与缺陷,所以有必要加以改进。
发明内容
针对上述的缺陷,本发明的目的在于提供一种检查数据的方法和系统,该方案不仅数据检查效率高,而且操作简单。
为了实现上述目的,本发明提供一种检查数据的方法,包括如下步骤:
A、导入待检查数据以及包含检查规则的规则文件;
B、执行所述规则文件中的检查规则,以对所述待检查数据进行检查。
根据本发明检查数据的方法,所述步骤A之前还包括将对数据的检查内容翻译成结构化查询语言脚本形式的检查规则,并将该检查规则写成规则文件。
根据本发明检查数据的方法,所述对数据的检查内容包括:数据取值范围、数据表之间的约束、数据完整性和/或数据的一致性。
根据本发明检查数据的方法,所述步骤A中导入待检查数据进一步包括:
A11、将待检查数据读入内存后转换成脚本,并生成临时数据脚本文件;
A12、建立与数据库的连接,将所述临时数据脚本文件中的脚本保存到数据库。
根据本发明检查数据的方法,所述步骤B还包括将规则文件读入内存,利用ActiveX数据对象/数据访问对象连接并执行规则文件中的结构化查询语言脚本,以对所述待检查数据进行检查并生成检查结果。
根据本发明检查数据的方法,所述步骤B之后还包括显示所述数据检查结果,并生成检查报告。
本发明还提供一种检查数据的系统,包括:
导入模块,用于导入待检查数据以及包含检查规则的规则文件;
检查模块,用于执行所述规则文件中的检查规则,以对所述待检查数据进行检查。
根据本发明检查数据的系统,所述规则文件包含的检查规则为结构化查询语言脚本,并且该检查规则由对数据的检查内容翻译而成。
根据本发明检查数据的系统,所述导入模块进一步包括:
规则导入和解析模块,用于将所述规则文件读入内存,并解析出检查规则;
数据导入模块,用于将所述待检查数据读入内存和转换成脚本,并生成临时数据脚本文件;
数据库连接模块,用于建立与数据库的连接,将所述临时数据脚本文件中的脚本保存到数据库。
根据本发明检查数据的系统,所述检查模块还包括:
规则检查模块,用于执行所述规则文件的检查规则,以对所述待检查数据进行检查并生成检查结果;
检查结果显示和报告生成模块,用于显示所述检查结果,以及生成检查报告。
根据本发明检查数据的系统,还包括有控制模块,该控制模块用于负责调度系统中各个模块按照既定流程运行。
本发明在需要进行数据检查时,通过导入待检查数据以及包含检查规则的规则文件,并执行检查规则即可实现数据检查,从而提高了数据检查的效率;而且操作过程简单,一般的现场维护人员就能够实施;并且数据检查过程中不需要中断信息系统业务;另外,由于实现了检查规则与信息系统程序分离,极大方便了信息系统的维护与升级。
附图说明
图1是实现本发明检查数据的方法流程图;
图2是实现本发明检查数据的系统结构示意图;
图3是本发明的一实施例的实现方法流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明的基本思想是:将数据检查的内容翻译成检查规则,并保存为规则文件,当需要进行数据检查时,并执行规则文件中的检查规则即可实现对待检查数据的检查,从而可快速查找出数据错误。
图1示出了实现本发明数据检查的方法流程,描述如下:
步骤S101中,导入待检查数据以及包含检查规则的规则文件。
优选的是,本步骤中将待检查数据导入商用数据库中以备检查。为了便于安装使用,在本发明的一个实施例中采用轻量级的数据库,如可以采用MS-ACCESS(微软公司开发的办公数据库软件)数据库;也可以采用自行开发占用存储空间较小的数据库。这样对执行检查的处理设备的配置和性能要求较低,在普通的笔记本或个人电脑上都能够使用,便于技术人员的操作。
本发明实现规则文件与信息系统程序分离,从而极大方便了信息系统的维护与升级。在编辑规则文件时,将数据的检查内容翻译成检查规则,该检查规则为标准的结构化查询语言(Structured Query Language,SQL)脚本形式,并将它写成规则文件。规则文件的格式可以是可扩展标记语言(ExtensibleMarkup Language,XML)格式,或者其他自定义的格式。所述数据的检查内容包括:数据取值范围、数据表之间的约束、数据完整性和/或数据的一致性,以及一些数据经验配置的检查等。
步骤S102中,执行规则文件中的检查规则,以对待检查数据进行检查。
在本发明的一个实施例中,利用开发的应用程序,将规则文件读入到内存中,利用ActiveX数据对象/数据访问对象(ActiveX Data Obiect/Data AccessObjects,ADO/DAO)连接执行规则文件中的SQL脚本,生成并显示检查结果(执行结果),进一步可自动生成检查报告。通过该检查报告,可以快速定位错误数据。
为了实现上述方法,本发明相应的提供了一种检查数据的系统,以在时分-同步码分多址(Time-Division Synchronization Code Division-Multiple-Access,TD-SCDMA)信息系统中的应用为例。图2示出了实现本发明的系统组成结构,描述如下;
本发明检查数据的系统包括:导入模块1,用于导入待检查数据文件5以及包含检查规则的规则文件4;控制模块2,用于控制整个系统的各个模块按照既定的流程运行;检查模块3,用于执行规则文件4中的检查规则,以对待检查数据进行检查。
在本发明的一个实施里中,本系统中的导入模块1包括:规则导入和解析模块11、数据导入模块12以及数据库连接模块13,其中:
规则导入和解析模块11用于将对数据的检查内容翻译成的SQL脚本形式的检查规则,并将该检查规则写成规则文件4导入到内存中,并解析规则文件4,生成并维护规则链表;
数据导入模块12用于将该系统外的待检查数据文件5中的数据读入内存后转换成脚本,生成临时数据脚本文件;并通过数据库连接模块13完成数据入库工作。
数据库连接模块13主要用于完成与数据库6建立ADO/DAO(ActiveXData Object/Data Access Objects,ActiveX数据对象/数据访问对象)连接和释放连接及数据任务的执行。
本系统中的控制模块2完成整个系统总的控制调度作用,负责调度各模块按既定流程运行。
本系统中的检查模块3进一步包括规则检查模块32和检查结果显示和报告生成模块31,其中:
规则检查模块32用于执行包含在规则文件4的检查规则,以对所述待检查数据进行检查,并生成检查结果发送给检查结果显示和报告生成模块31进行显示;
检查结果显示和报告生成模块31用于接收规则检查模块32发送的检查结果,完成故障数据的显示以及检查报告的生成。
图3示出了本发明的一个实施例的方法流程,本实施例用于对通信设备的配置数据进行检查,并结合图2具体描述如下:
步骤S301中,控制模块2读取通信设备的配置数据文件路径和规则文件路径。配置数据文件路径和规则文件路径首先由用户通过配置界面进行配置,生成一个路径配置文件;每次信息系统启动时读取此路径配置文件。
步骤S302中,数据导入模块12根据步骤S301读入通信设备的配置数据文件路径,打开对应通信设备的配置数据文件,将文件中通信设备的配置数据读入到内存中。
步骤S303中,数据导入模块12将内存中的通信设备的配置数据转换成数据库脚本,并生成临时数据脚本文件。
步骤S304中,数据库连接模块13建立与数据库6的ADO/DAO连接。
步骤S305中,数据导入模块13执行步骤S303中生成的临时数据脚本文件的脚本完成数据入库工作。
步骤S306中,规则导入和解析模块11根据步骤S301读入的规则文件路径将所有规则文件读入到内存中,并解析出规则文件中的检查规则。
步骤S307中,规则检查模块32循环执行检查规则中的SQL语句,并将检查结果发送给检查结果显示和报告生成模块31显示。
步骤S308中,检查结果显示和报告生成模块31输出检查结果报告。
综上所述,本发明数据检查方案具备以下优点:数据检查的效率高,其通过导入并执行规则文件即可快速定位数据错误;数据检查的操作简单,一般的现场维护人员就能够使用;可自动生成检查结果报告,以清楚准确的定位数据错误;数据检查不需要中断信息系统业务;检查数据时可采用轻量级数据库,对检查设备的性能要求较低,可以在普通的笔记本或个人电脑上使用;实现了检查规则与信息系统程序分离,可以方便地进行扩展,增加或修改检查内容只需要修改规则文件即可,不需要修改信息系统程序,且信息系统维护升级方便,只需要维护规则文件版本。还需指出的是,本发明不仅可应用于通信领域,还可应用于具有数据检查需求的其他领域。
当然,本发明还可有其它多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (11)
1. 一种检查数据的方法,其特征在于,包括如下步骤:
A、导入待检查数据以及包含检查规则的规则文件;
B、执行所述规则文件中的检查规则,以对所述待检查数据进行检查。
2. 根据权利要求1所述的方法,其特征在于,所述步骤A之前还包括将对数据的检查内容翻译成结构化查询语言脚本形式的检查规则,并将该检查规则写成规则文件。
3. 根据权利要求2所述的方法,其特征在于,所述对数据的检查内容包括:数据取值范围、数据表之间的约束、数据完整性和/或数据的一致性。
4. 根据权利要求2所述的方法,其特征在于,所述步骤A中导入待检查数据进一步包括:
A11、将待检查数据读入内存后转换成脚本,并生成临时数据脚本文件;
A12、建立与数据库的连接,将所述临时数据脚本文件中的脚本保存到数据库。
5. 根据权利要求2所述的方法,其特征在于,所述步骤B还包括将规则文件读入内存,利用ActiveX数据对象/数据访问对象连接并执行规则文件中的结构化查询语言脚本,以对所述待检查数据进行检查并生成检查结果。
6. 根据权利要求5所述的方法,其特征在于,所述步骤B之后还包括显示所述数据检查结果,并生成检查报告。
7. 一种检查数据的系统,其特征在于,包括:
导入模块,用于导入待检查数据以及包含检查规则的规则文件;
检查模块,用于执行所述规则文件中的检查规则,以对所述待检查数据进行检查。
8. 根据权利要求7所述的系统,其特征在于,所述规则文件包含的检查规则为结构化查询语言脚本,并且该检查规则由对数据的检查内容翻译而成。
9. 根据权利要求8所述的系统,其特征在于,所述导入模块进一步包括:
规则导入和解析模块,用于将所述规则文件读入内存,并解析出检查规则;
数据导入模块,用于将所述待检查数据读入内存和转换成脚本,并生成临时数据脚本文件;
数据库连接模块,用于建立与数据库的连接,将所述临时数据脚本文件中的脚本保存到数据库。
10. 根据权利要求8所述的系统,其特征在于,所述检查模块还包括:
规则检查模块,用于执行所述规则文件的检查规则,以对所述待检查数据进行检查并生成检查结果;
检查结果显示和报告生成模块,用于显示所述检查结果,以及生成检查报告。
11. 根据权利要求7所述的系统,其特征在于,还包括有控制模块,该控制模块用于负责调度系统中各个模块按照既定流程运行。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA200710063589XA CN101241491A (zh) | 2007-02-05 | 2007-02-05 | 一种检查数据的方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA200710063589XA CN101241491A (zh) | 2007-02-05 | 2007-02-05 | 一种检查数据的方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101241491A true CN101241491A (zh) | 2008-08-13 |
Family
ID=39933028
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA200710063589XA Pending CN101241491A (zh) | 2007-02-05 | 2007-02-05 | 一种检查数据的方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101241491A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101729675A (zh) * | 2009-12-24 | 2010-06-09 | 中兴通讯股份有限公司 | 基于彩信业务的适配方法及适配器装置 |
CN102081762A (zh) * | 2009-11-26 | 2011-06-01 | 株式会社日立制作所 | 检查规则设计支持方法,检查规则设计支持系统,和检查规则设计支持程序 |
CN102262631A (zh) * | 2010-05-31 | 2011-11-30 | 国际商业机器公司 | 数据评估方法及其系统 |
CN102323945A (zh) * | 2011-09-02 | 2012-01-18 | 南京中兴力维软件有限公司 | 一种基于sql的数据库管理方法和装置 |
CN102437920A (zh) * | 2011-09-05 | 2012-05-02 | 中兴通讯股份有限公司 | 配置数据的处理方法、装置及无线通讯设备 |
CN102998999A (zh) * | 2011-09-09 | 2013-03-27 | 中国石油化工股份有限公司 | 石油化工产品生产设备性能参数校核装置 |
CN104572999A (zh) * | 2015-01-07 | 2015-04-29 | 北京数码大方科技股份有限公司 | 基于异构数据的错误数据的检测方法和装置 |
CN104764455A (zh) * | 2014-01-08 | 2015-07-08 | 北京四维图新科技股份有限公司 | 一种导航电子地图数据处理方法及装置 |
CN105045606A (zh) * | 2015-08-31 | 2015-11-11 | 盐城工学院 | 一种基于pdm系统的三维设计质量的检测方法 |
CN105094843A (zh) * | 2015-08-20 | 2015-11-25 | 网易(杭州)网络有限公司 | 一种数据表的检查方法及装置 |
CN106022666A (zh) * | 2016-07-28 | 2016-10-12 | 国网上海市电力公司 | 一种计量资产全寿命周期管理数据质量核查方法 |
CN109543160A (zh) * | 2018-11-23 | 2019-03-29 | 网易(杭州)网络有限公司 | 数值表的检查方法、检查装置、存储介质与处理器 |
-
2007
- 2007-02-05 CN CNA200710063589XA patent/CN101241491A/zh active Pending
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102081762A (zh) * | 2009-11-26 | 2011-06-01 | 株式会社日立制作所 | 检查规则设计支持方法,检查规则设计支持系统,和检查规则设计支持程序 |
CN101729675B (zh) * | 2009-12-24 | 2014-01-01 | 中兴通讯股份有限公司 | 基于彩信业务的适配方法及适配器装置 |
CN101729675A (zh) * | 2009-12-24 | 2010-06-09 | 中兴通讯股份有限公司 | 基于彩信业务的适配方法及适配器装置 |
CN102262631A (zh) * | 2010-05-31 | 2011-11-30 | 国际商业机器公司 | 数据评估方法及其系统 |
CN102262631B (zh) * | 2010-05-31 | 2014-03-26 | 国际商业机器公司 | 数据评估方法及其系统 |
CN102323945A (zh) * | 2011-09-02 | 2012-01-18 | 南京中兴力维软件有限公司 | 一种基于sql的数据库管理方法和装置 |
CN102323945B (zh) * | 2011-09-02 | 2013-05-01 | 南京中兴力维软件有限公司 | 一种基于sql的数据库管理方法和装置 |
CN102437920A (zh) * | 2011-09-05 | 2012-05-02 | 中兴通讯股份有限公司 | 配置数据的处理方法、装置及无线通讯设备 |
CN102998999A (zh) * | 2011-09-09 | 2013-03-27 | 中国石油化工股份有限公司 | 石油化工产品生产设备性能参数校核装置 |
CN102998999B (zh) * | 2011-09-09 | 2014-08-06 | 中国石油化工股份有限公司 | 石油化工产品生产设备性能参数校核装置 |
CN104764455A (zh) * | 2014-01-08 | 2015-07-08 | 北京四维图新科技股份有限公司 | 一种导航电子地图数据处理方法及装置 |
CN104764455B (zh) * | 2014-01-08 | 2017-10-20 | 北京四维图新科技股份有限公司 | 一种导航电子地图数据处理方法及装置 |
CN104572999A (zh) * | 2015-01-07 | 2015-04-29 | 北京数码大方科技股份有限公司 | 基于异构数据的错误数据的检测方法和装置 |
CN105094843A (zh) * | 2015-08-20 | 2015-11-25 | 网易(杭州)网络有限公司 | 一种数据表的检查方法及装置 |
CN105094843B (zh) * | 2015-08-20 | 2018-10-09 | 网易(杭州)网络有限公司 | 一种数据表的检查方法及装置 |
CN105045606A (zh) * | 2015-08-31 | 2015-11-11 | 盐城工学院 | 一种基于pdm系统的三维设计质量的检测方法 |
CN106022666A (zh) * | 2016-07-28 | 2016-10-12 | 国网上海市电力公司 | 一种计量资产全寿命周期管理数据质量核查方法 |
CN109543160A (zh) * | 2018-11-23 | 2019-03-29 | 网易(杭州)网络有限公司 | 数值表的检查方法、检查装置、存储介质与处理器 |
CN109543160B (zh) * | 2018-11-23 | 2023-08-25 | 网易(杭州)网络有限公司 | 数值表的检查方法、检查装置、存储介质与处理器 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101241491A (zh) | 一种检查数据的方法和系统 | |
CN112988153B (zh) | 基于微前端的数据处理方法及框架 | |
CN101676920B (zh) | 用于合并覆盖数据的eda覆盖日志的方法和装置 | |
CN110825431B (zh) | 接口文档处理方法及装置、系统、存储介质和电子设备 | |
CN106021093A (zh) | 一种测试用例复用的方法及系统 | |
CA2773981C (en) | System and method of substituting parameter sets in self-contained mini-applications | |
CN101882107A (zh) | 一种web应用自动化测试的方法及装置 | |
US20020059561A1 (en) | Software package verification | |
US20100005455A1 (en) | Managing software dependencies during software testing and debugging | |
CN101751281A (zh) | 编译器生成系统和方法 | |
CN107273250B (zh) | 电子化保单自动承保系统的测试方法及装置 | |
CN1996375A (zh) | 一种在主机环境中进行交易测试的方法及装置 | |
CN101008962A (zh) | 可配置可替换的网络芯片使用参考模型的验证方法 | |
CN103326930A (zh) | 开放平台接口自动巡检方法和系统 | |
US20200387439A1 (en) | Intercepting and recording calls to a module in real-time | |
CN114816993A (zh) | 一种全链路接口测试方法、系统、介质及电子设备 | |
CN113032256B (zh) | 自动化测试方法、装置、计算机系统和可读存储介质 | |
Kurita et al. | The Application of VDM to the Industrial Development of Firmware for a Smart Card IC Chip. | |
CN107229567A (zh) | 一种ipmi固件自动化测试系统 | |
US20200387370A1 (en) | Intercepting and replaying interactions with transactional and database environments | |
CN116089275A (zh) | 数据库测试方法、数据库系统、电子设备和存储介质 | |
CN101980212A (zh) | 一种航空电子检查单及其实现方法 | |
CN118051426A (zh) | 测试方法、装置及相关设备 | |
US11074069B2 (en) | Replaying interactions with transactional and database environments with re-arrangement | |
CN1932760B (zh) | 用于运行应用程序的系统和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Open date: 20080813 |