CN112015728A - 一种自动对采集的数据进行检验的方法 - Google Patents

一种自动对采集的数据进行检验的方法 Download PDF

Info

Publication number
CN112015728A
CN112015728A CN202010934688.6A CN202010934688A CN112015728A CN 112015728 A CN112015728 A CN 112015728A CN 202010934688 A CN202010934688 A CN 202010934688A CN 112015728 A CN112015728 A CN 112015728A
Authority
CN
China
Prior art keywords
data
automatically
field
rules
data item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010934688.6A
Other languages
English (en)
Inventor
段海平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Huifu Network Technology Co ltd
Original Assignee
Zhejiang Huifu Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Huifu Network Technology Co ltd filed Critical Zhejiang Huifu Network Technology Co ltd
Priority to CN202010934688.6A priority Critical patent/CN112015728A/zh
Publication of CN112015728A publication Critical patent/CN112015728A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种自动对采集的数据进行检验的方法，涉及数据采集技术领域，针对现有信息采集麻烦，信息迭代快，无法及时根据需要进行调整的问题，现提出如下方案，包括如下步骤：S1，进行数据采集，对录入系统中的每项数据项自动检查校验；S2，对输入数据项配置的规则自动检查输出相应的结果；S3，根据前置数据项的条件，控制关联的数据项的显示，以及自动添加。本发明提供决策引擎系统，通过灵活的配置和数据字段规则计算引擎，实现不同场景下对采集数据校验结果输出，从而保证采集的数据的完整性和准确性，可以通过数据字段规则，灵活配置字段，同时检验数据格式正确性，实现采集的数据的完整性和准确性目的，并且减少重复开发的成本。

Description

一种自动对采集的数据进行检验的方法
技术领域
本发明涉及数据采集技术领域，尤其涉及一种自动对采集的数据进行检验的方法。
背景技术
在当下信息技术高速发展环境下，以往线下采集信息的工作正在逐渐搬到移动互联网上，而且已经形成一种趋势。由于移动互联网信息技术带来的变革，使得采集信息的工作变的更加简便，效率大幅提升，数据的质量大大提高，经济成本同时大大降低。随着银行业务信息化不断提高，互联网金融在银行业务中的应用越来越多。特别是在信息采集方面提出了更高的要求，如何保证数据的完整性、统一性和准确性，已经成为工作中最大挑战。
信息采集时遇到的问题：1)数据格式不正确，如email字段，填写值不是电子邮箱地址；2)数据是前几项的合计值，需要人工手动填写；3)特殊数据在填写前需要提醒用户；4)数据项必填；5)数据项的关联数据；6)选择数据项，选择的值不同，填写的数据字段也不同；等等问题，使得信息采集工具不断的迭代，不断根据需求调整，为此我们提出了一种自动对采集的数据进行检验的方法。
发明内容
本发明提出的一种自动对采集的数据进行检验的方法，解决了现有信息采集麻烦，信息迭代快，无法及时根据需要进行调整的问题。
为了实现上述目的，本发明采用了如下技术方案：
一种自动对采集的数据进行检验的方法，包括如下步骤：
S1，进行数据采集，对录入系统中的每项数据项自动检查校验；
S2，对输入数据项配置的规则自动检查输出相应的结果；
S3，根据前置数据项的条件，控制关联的数据项的显示，以及自动添加；
S4，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
必填项，如果不填写触发提示，并中止流程继续执行；
字段赋值，根据设置规则，字段填写输入项；
字段校验，根据设置的正则表达式，对输入的字符类型数据进行校验，并输出相应的提示；
字段提示，根据配置的提示内容，再输入数据前提示；
字段编辑，控制输入项是否可以编辑；
字段从属，是一种复杂的装置，根据前置数据项决定，后续一个或多个数据项的显示或隐藏，自动赋值，以及连动操作；
S5，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
规则支持运算符：加、减、乘、除；
规则支持的逻辑运算符：
Figure BDA0002671511940000021
Figure BDA0002671511940000031
Figure BDA0002671511940000041
S6，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
规则支持自定义的函数，自定义函数可以注册到表达式引擎中生效。
优选的，所述规则支持函数运算，可以定义函数，如max、min函数。
优选的，所述表达式引擎使用的第三方组件Aviator。
与现有的技术相比，本发明的有益效果是：提供决策引擎系统，通过灵活的配置和数据字段规则计算引擎，实现不同场景下对采集数据校验结果输出，从而保证采集的数据的完整性和准确性，可以通过数据字段规则，灵活配置字段，同时检验数据格式正确性，实现采集的数据的完整性和准确性目的，并且减少重复开发的成本。
附图说明
图1为本发明提出的一种自动对采集的数据进行检验的方法的应用的场景；
图2为本发明提出的一种自动对采集的数据进行检验的方法的规则组件的配置；
图3为本发明提出的一种自动对采集的数据进行检验的方法的中流程介绍。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。
参照图1-3，一种自动对采集的数据进行检验的方法，包括如下步骤：
S1，进行数据采集，对录入系统中的每项数据项自动检查校验；
S2，对输入数据项配置的规则自动检查输出相应的结果；
S3，根据前置数据项的条件，控制关联的数据项的显示，以及自动添加；
S4，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
必填项，如果不填写触发提示，并中止流程继续执行；
字段赋值，根据设置规则，字段填写输入项；
字段校验，根据设置的正则表达式，对输入的字符类型数据进行校验，并输出相应的提示；
字段提示，根据配置的提示内容，再输入数据前提示；
字段编辑，控制输入项是否可以编辑；
字段从属，是一种复杂的装置，根据前置数据项决定，后续一个或多个数据项的显示或隐藏，自动赋值，以及连动操作；
S5，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
规则支持运算符：加、减、乘、除；
规则支持的逻辑运算符：
Figure BDA0002671511940000061
Figure BDA0002671511940000071
Figure BDA0002671511940000081
S6，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
规则支持自定义的函数，自定义函数可以注册到表达式引擎中生效。
本实施例中，所述规则支持函数运算，可以定义函数，如max、min函数。
本实施例中，所述表达式引擎使用的第三方组件Aviator。
工作原理：首先对采集数据表单上的字段定义规则；然后采集数据表单页面通过API接口方式加载已定义的字段规则；自动绑定输入数据项；当输入数据时触发绑定的字段规则。
附图1：
1)数据采集端，移动端APP、web和客户端；
2)采集数据页面，上面部署采集数据的表单；
3)页面加载配置的字段规则，对填写表单进行初始化；
4)输入数据，即填写数据。当输入时触发触发规则判断；
5)如果命中规则，则运行规则，输出校验结果；
6)一直到校验通过，输入完毕；
7)接着下一个输入数据项，依次步骤4，5，6；
8)所有数据项输入完毕，提交数据。
附图2：
1)新增字段规则，基本信息定义；
2)配置规则，添加判断条件，简单运算，逻辑运算，函数计算，混合运算；
3)配置结果输出，设置运算结果的提示信息；
4)输出结果关联规则，配置前置条件的关联数据项的规则；
5)存储规则，保存在数据表中；
6)发布规则，对外提供的接口中新添加的规则生效。
附图3：
打开信息录入页面。
2)填写信息字段，触发字段规则。
3)进入字段规则引擎，运行规则，规则检验算法如下：
如果字段必填，那么选择的字段设置为必填；在没入输入或空的情况下提示用户；
如果字段从属，那么显示相关的输入字段；
如果字段赋值，那么根据配置的计算公式或取值字段，自动填写输入字段；
如果字段校验，那么根据配置的计算公式、格式规则和校验逻辑来判断；如果触发条件，提示用户；
如果字段提示，那么把配置的信息提示用户；
如果字段编辑，那么选择的字段变为可编辑；
4)如果输入字段有关联字段规则，那么进入步骤4；
5)输入字段有从属字段，那么显示这些从属字段，或者隐藏这些从属字段；
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (3)

1.一种自动对采集的数据进行检验的方法，包括如下步骤：
S1，进行数据采集，对录入系统中的每项数据项自动检查校验；
S2，对输入数据项配置的规则自动检查输出相应的结果；
S3，根据前置数据项的条件，控制关联的数据项的显示，以及自动添加；
S4，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
必填项，如果不填写触发提示，并中止流程继续执行；
字段赋值，根据设置规则，字段填写输入项；
字段校验，根据设置的正则表达式，对输入的字符类型数据进行校验，并输出相应的提示；
字段提示，根据配置的提示内容，再输入数据前提示；
字段编辑，控制输入项是否可以编辑；
字段从属，是一种复杂的装置，根据前置数据项决定，后续一个或多个数据项的显示或隐藏，自动赋值，以及连动操作；
S5，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
规则支持运算符：加、减、乘、除；
规则支持的逻辑运算符：
Figure FDA0002671511930000011
Figure FDA0002671511930000021
Figure FDA0002671511930000031
S6，对输入数据项配置的规则自动检查输出相应的结果，进行的判定规则包括：
规则支持自定义的函数，自定义函数可以注册到表达式引擎中生效。
2.根据权利要求1所述的一种自动对采集的数据进行检验的方法，其特征在于，所述规则支持函数运算，可以定义函数，如max、min函数。
3.根据权利要求1所述的一种自动对采集的数据进行检验的方法，其特征在于，所述表达式引擎使用的第三方组件Aviator。
CN202010934688.6A 2020-09-08 2020-09-08 一种自动对采集的数据进行检验的方法 Pending CN112015728A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010934688.6A CN112015728A (zh) 2020-09-08 2020-09-08 一种自动对采集的数据进行检验的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010934688.6A CN112015728A (zh) 2020-09-08 2020-09-08 一种自动对采集的数据进行检验的方法

Publications (1)

Publication Number Publication Date
CN112015728A true CN112015728A (zh) 2020-12-01

Family

ID=73516327

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010934688.6A Pending CN112015728A (zh) 2020-09-08 2020-09-08 一种自动对采集的数据进行检验的方法

Country Status (1)

Country Link
CN (1) CN112015728A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112597194A (zh) * 2020-12-04 2021-04-02 中广核工程有限公司 核电仪表数据信息的校对方法及系统
CN112711775A (zh) * 2020-12-28 2021-04-27 航天信息股份有限公司 一种污染物数据完整性验证方法、装置、设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101788950A (zh) * 2010-01-27 2010-07-28 浪潮(山东)电子信息有限公司 一种基于jsp页面的数据项校验方法
CN102799690A (zh) * 2012-08-13 2012-11-28 南京莱斯信息技术股份有限公司 一种利用数据库技术校验网页输入的方法
CN104766151A (zh) * 2014-12-29 2015-07-08 国家电网公司 一种用于电力交易数据仓库的质量管控方法及其管控系统
CN110263311A (zh) * 2019-05-22 2019-09-20 中国平安财产保险股份有限公司 一种网络页面的生成方法及设备
CN110287383A (zh) * 2019-06-28 2019-09-27 深圳前海微众银行股份有限公司 一种字段信息检验方法及装置
CN110515937A (zh) * 2019-09-02 2019-11-29 中国农业银行股份有限公司 一种数据校验方法及装置
CN110569036A (zh) * 2019-08-20 2019-12-13 广州华资软件技术有限公司 一种前后端分离架构下的数据校验系统及其方法
CN111259303A (zh) * 2020-01-20 2020-06-09 西安百想科技有限公司 一种web信息系统前端页面自动生成的系统及其方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101788950A (zh) * 2010-01-27 2010-07-28 浪潮(山东)电子信息有限公司 一种基于jsp页面的数据项校验方法
CN102799690A (zh) * 2012-08-13 2012-11-28 南京莱斯信息技术股份有限公司 一种利用数据库技术校验网页输入的方法
CN104766151A (zh) * 2014-12-29 2015-07-08 国家电网公司 一种用于电力交易数据仓库的质量管控方法及其管控系统
CN110263311A (zh) * 2019-05-22 2019-09-20 中国平安财产保险股份有限公司 一种网络页面的生成方法及设备
CN110287383A (zh) * 2019-06-28 2019-09-27 深圳前海微众银行股份有限公司 一种字段信息检验方法及装置
CN110569036A (zh) * 2019-08-20 2019-12-13 广州华资软件技术有限公司 一种前后端分离架构下的数据校验系统及其方法
CN110515937A (zh) * 2019-09-02 2019-11-29 中国农业银行股份有限公司 一种数据校验方法及装置
CN111259303A (zh) * 2020-01-20 2020-06-09 西安百想科技有限公司 一种web信息系统前端页面自动生成的系统及其方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112597194A (zh) * 2020-12-04 2021-04-02 中广核工程有限公司 核电仪表数据信息的校对方法及系统
CN112711775A (zh) * 2020-12-28 2021-04-27 航天信息股份有限公司 一种污染物数据完整性验证方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN112015728A (zh) 一种自动对采集的数据进行检验的方法
CN104317589B (zh) 一种用于加载动态链接库的代码自动生成方法及装置
CN102541740B (zh) 一种基于Android的手机便签自动化测试方法
US20100218168A1 (en) System and Method for Generating a Test Environment Script File
US20050234976A1 (en) System and method for deriving an object oriented design from the business rules of a legacy application
US11074162B2 (en) System and a method for automated script generation for application testing
US10942841B2 (en) User assisted automated test case generation
US20140298297A1 (en) Automatic feature-driven testing and quality checking of applications
CN112732571B (zh) 一种测试数据生成方法及装置
US20080046861A1 (en) Method and interface for creating a workbook to implement a business process
CN105677306A (zh) 自动化脚本的编写方法和装置
US8473933B2 (en) Refactoring call sites
CN106022912A (zh) 评价模型的更新方法及系统
CN110362313A (zh) 一种表单验证方法、客户端及服务器
CN110489347A (zh) 基于git的版本管理方法、装置、设备及可读存储介质
CN107315947A (zh) 支付类应用程序管理方法、装置及移动终端
CN110276443A (zh) 模型转换一致性验证及分析方法、装置及存储介质
CN101976196B (zh) 一种面向“服务质量”的代码自动生成方法
CN103778210B (zh) 一种待分析文件的文件具体类型的判断方法及装置
CN108287788A (zh) 一种基于测试用例的用例步骤搭配方法、系统
CN107402911A (zh) 用于终端的文本编辑方法和装置
CN105160247A (zh) 一种识别浏览器被劫持的方法
CN113032269A (zh) 智能设计数据的测试方法、装置、存储介质和电子设备
KR100958189B1 (ko) 프로그램 테스트 자동화 장치 및 방법, 그리고 그를 이용한금융자동화기기
CN109815129A (zh) 证券融资应用软件的测试方法、装置、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination