CN113505159B - 数据检测方法、装置及设备 - Google Patents

数据检测方法、装置及设备 Download PDF

Info

Publication number
CN113505159B
CN113505159B CN202110805142.5A CN202110805142A CN113505159B CN 113505159 B CN113505159 B CN 113505159B CN 202110805142 A CN202110805142 A CN 202110805142A CN 113505159 B CN113505159 B CN 113505159B
Authority
CN
China
Prior art keywords
data
detection
detected
field
fields
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110805142.5A
Other languages
English (en)
Other versions
CN113505159A (zh
Inventor
陈陆军
赵国庆
孙磊
曾琳铖曦
魏新
刘德华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mashang Xiaofei Finance Co Ltd
Original Assignee
Mashang Xiaofei Finance Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mashang Xiaofei Finance Co Ltd filed Critical Mashang Xiaofei Finance Co Ltd
Priority to CN202110805142.5A priority Critical patent/CN113505159B/zh
Publication of CN113505159A publication Critical patent/CN113505159A/zh
Application granted granted Critical
Publication of CN113505159B publication Critical patent/CN113505159B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/242Query formulation
    • G06F16/2433Query languages
    • G06F16/2448Query languages for particular applications; for extensibility, e.g. user defined types

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Fuzzy Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请实施例提供一种数据检测方法、装置及设备,该方法包括:获取待检测数据,所述待检测数据包括N个字段和所述N个字段一一对应的N个字段数据,所述N为大于或等于1的整数;获取所述待检测数据对应的检测信息,所述检测信息包括M个字段和所述M个字段一一对应的检测代码,所述M为大于或等于1的整数,所述N个字段包括所述M个字段;在所述待检测数据中确定与所述M个检测代码一一对应的字段数据,得到M个字段数据;根据所述M个检测代码分别对M个字段数据进行检测处理,得到所述待检测数据的检测结果。采用本申请实施例可提高数据检测的可靠性。

Description

数据检测方法、装置及设备
技术领域
本申请涉及数据处理技术领域,尤其涉及一种数据检测方法、装置及设备。
背景技术
在很多场景下,在发送数据(如数据表)之前,需要对数据的格式进行验证,以保证发送的数据的格式是正确的。
数据表中通常包括多个字段和每个字段对应的字段数据,不同的字段数据有不同的格式要求。在相关技术中,在发送数据表之前,通常由人工对数据表中各个字段数据进行检查,以确定字段数据的格式是否正确。然而,当数据表中包括较多的字段时,人工无法对每个字段数据的格式进行准确的检测,导致数据检测的可靠性较低。
发明内容
本申请实施例提供一种数据检测方法、装置及设备,用于提高数据检测的可靠性。
第一方面,本申请实施例提供一种数据检测方法,该方法包括:
获取待检测数据,所述待检测数据包括N个字段和所述N个字段一一对应的N个字段数据,所述N为大于或等于1的整数;
获取所述待检测数据对应的检测信息,所述检测信息包括M个字段和所述M个字段一一对应的检测代码,所述M为大于或等于1的整数,所述N个字段包括所述M个字段;
在所述待检测数据中,确定与所述M个检测代码一一对应的字段数据,得到M个字段数据;
根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述待检测数据的检测结果。
第二方面,本申请实施例提供一种数据检测装置,包括第一获取模块、第二获取模块和第一确定模块,其中:
所述第一获取模块用于,获取待检测数据,所述待检测数据包括N个字段和所述N个字段一一对应的N个字段数据,所述N为大于或等于1的整数;
所述第二获取模块用于,获取所述待检测数据对应的检测信息,所述检测信息包括M个字段和所述M个字段一一对应的检测代码,所述M为大于或等于1的整数,所述N个字段包括所述M个字段;
所述第一确定模块用于,在所述待检测数据中,确定与所述M个检测代码一一对应的字段数据,得到M个字段数据;
根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述待检测数据的检测结果。
第三方面,本申请实施例提供一种数据检测设备,包括处理器和存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如第一方面所述的数据检测方法。
第四方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当所述计算机执行指令被处理器执行时用于实现第一方面所述的数据检测方法。
第五方面,本申请实施例提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现第一方面所述的数据检测方法。
可以看出,在本申请实施例中,预先设置多种待检测数据对应的检测信息,在确定待检测数据对应的检测信息之后,确定待检测信息中字段的字段数据对应的检测代码,并根据检测代码对对应的字段数据进行检测处理,可以准确的得到待检测数据的检测结果,提高数据检测的准确性,并且自动化数据检测的过程,可以降低数据检测的人工成本,降低数据检测过程中的误判,进而提高数据检测的可靠性。
附图说明
图1为本申请实施例提供的一种应用场景示意图;
图2为本申请实施例提供的一种数据检测方法的流程示意图;
图3为本申请实施例提供的一种检测信息的示意图;
图4为本申请实施例提供的确定检测代码对应的字段数据的过程示意图;
图5为本申请实施例提供的一种显示检测结果的方法流程示意图;
图6为本申请实施例提供的一种数据检测方法的过程示意图;
图7为本申请实施例提供的一种数据检测装置的结构示意图;
图8为本申请实施例提供的另一种数据检测装置的结构示意图;
图9为本申请提供的数据检测设备的硬件结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
下面,结合图1,对本申请实施例所适用的应用场景进行介绍。
图1为本申请实施例提供的一种应用场景示意图。请参见图1,包括终端设备和金融部门的服务器。可选的,终端设备为金融公司的终端设备,终端设备可以获取金融公司的金融数据。终端设备定期(每年、每个季度、每月或每天)的向金融部门的服务器上报金融公司的金融数据,使得金融部门可以准确的得知金融公司的经营情况,对金融公司的经营风险进行控制。
在相关技术中,由于金融部门需要获取多个金融公司的金融数据,因此,金融公司在向金融部门上报数据时,需要保证金融数据的数据质量(数据格式),若金融公司的金融数据质量出现问题,则金融公司需要重新上报金融数据,浪费人力和时间。目前,金融公司的工作人员通过金融数据对应的检测脚本对数据质量进行检测,但是在待检测的数据的类型较多时,工作人员需要通过多个检测脚本对不同类型的数据进行检测,使得数据检测过程中存在检测周期较长,检测准确度较低的问题,进而导致数据检测的可靠性较低。
为了解决相关技术中数据检测的可靠性较低的技术问题,本申请实施例提供一种数据检测方法,获取待检测数据,并确定待检测数据的数据类型,根据待检测数据的数据类型,获取待检测数据对应的检测信息,其中,待检测数据包括N个字段和N个字段一一对应的N个字段数据,N为大于或等于1的整数,检测信息包括M个字段和M个字段一一对应的检测代码,M为大于或等于1的整数,N个字段包括M个字段,根据N个字段和M个字段,分别确定检测信息中M个检测代码对应的待检测数据中的M个字段数据,通过M个检测代码分别对M个字段数据进行检测,进而得到待检测数据的检测结果。这样,在检测规则发生变化时,可以直接更新检测信息中的检测代码,避免重新编写待检测数据对应的检测脚本,进而及时的对待检测数据进行检测,提高检测效率,并且,通过N个字段和M个字段,可以准确的确定检测信息中每个检测代码对应的待检测数据的字段数据,提高数据检测的准确率,进而可以提高数据检测的可靠性。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
图2为本申请实施例提供的一种数据检测方法的流程示意图。请参见图2,该方法可以包括:
S201、获取待检测数据。
本申请实施例的执行主体可以为终端设备,也可以为设置在终端设备中的数据检测装置,数据检测装置可以通过软件实现,也可以通过软件和硬件的结合实现。可选的,终端设备为任意具有数据处理功能和数据显示功能的设备。例如,终端设备可以为手机、笔记本电脑、台式电脑等设备。
待检测数据包括N个字段和N个字段一一对应的N个字段数据,N为大于或等于1的整数。其中,字段为待检测数据中的数据项。例如,待检测数据可以为通过物理模型得到的物理表,表的“列”为字段。例如,若通讯录的数据库中的列包括“姓名”列和“联系电话”列,则通讯录的数据库中包括的字段为“姓名”字段和“联系电话”字段。
待检测数据的字段数据为字段对应的数据。例如,若待检测数据的字段为利率水平字段,且利率水平字段的数据为0.005,则利率水平字段对应的字段数据为0.005。
可选的,在实际应用过程中,待检测数据中的每个字段都有对应的字段数据,待检测数据中的字段数量为大于或等于1的整数。例如,待检测数据中可以包括1个字段和该字段对应的字段数据,待检测数据中也可以包括10个字段和每个字段对应的字段数据。例如,个人贷款对应的待检测数据可以如表1所示:
表1
字段 字段数据
贷款金额字段 100万元
贷款年限字段 20年
利率水平字段 0.0003
…… ……
需要说明的是,表1只是以个人贷款为例对待检测数据进行说明,并非对待检测数据的限定。例如,获取的个人贷款对应的待检测数据包括贷款金额字段、贷款年限字段和利率水平字段等,其中,贷款金额字段对应的字段数据为100万元,贷款年限字段对应的字段数据为20年,利率水平字段对应的字段数据为0.0003。可选的,待检测数据也可以为其它类型的数据(个人收入、金融机构的月报等),本申请实施例对此不作限制。
可选的,待检测数据可以存储于数据库中,终端设备可以在数据库中获取待检测数据。例如,在实际应用的过程中,金融机构在得到金融数据后,可以将金融数据存储于数据库中,并将金融数据标记为未检测,终端设备可以定时的获取数据库中标记为未检测的金融数据,并对金融数据进行检测,或者,在终端设备接收到数据检测请求时,终端设备获取数据库中标记为未检测的金融数据,并对金融数据进行检测,在终端设备对金融数据检测之后,在数据库中将金融数据的标记更新为已检测。
S202、获取待检测数据对应的检测信息。
检测信息包括M个字段和M个字段一一对应的检测代码。例如,检测信息可以为通过逻辑模型得到的逻辑表,检测信息中包括3个字段和每个字段对应的检测代码。例如,检测信息中可以包括贷款金额、贷款年限、利率水平,以及贷款金额对应的检测代码、贷款年限对应的检测代码和利率水平对应的检测代码。其中,M为大于或等于1的整数,N个字段包括M个字段。例如,若待检测数据对应的检测信息包括姓名字段、年龄字段和职业字段,则待检测数据至少包括姓名字段、年龄字段和职业字段。可选的,待检测数据的字段数量可以大于待检测数据对应的检测信息的字段数量。例如,若待检测数据对应的检测信息包括姓名字段和年龄字段,则待检测数据可以包括姓名字段、年龄字段、性别字段和职业字段。检测代码用于对字段对应的字段数据进行检测。例如,检测代码可以对字段对应的字段数据的格式进行检测。例如,检测代码可以对字段数据中的不允许出现的字符进行检测。
可选的,检测代码可以为通过结构化查询语言(Structured Query Language,SQL)编写的代码。可选的,在实际应用的过程中,金融部门(对金融机构进行管理的部门)会对各个金融机构上报的金融数据的格式进行规定(例如,个人贷款数据中的利率水平字段的字段数据不允许出现“%”),可以根据金融部门对金融数据上报的要求,预先设置检测信息。例如,以个人贷款数据上报为例,金融部门规定金融机构上报个人贷款的数据时,数据中需要包括姓名字段、年龄字段、职业字段、贷款年限字段、贷款金额字段和利率水平字段,以及每个字段对应的字段数据的格式(利率水平字段的字段数据不允许出现“%”等),因此,个人贷款数据对应的检测信息为姓名字段和姓名字段、年龄字段、职业字段、贷款年限字段、贷款金额字段和利率水平字段,以及每个字段的字段数据的格式对应的SQL检测代码(将字段数据要求的格式编写为SQL检测代码)。通过金融部门对金融数据上报的要求,可以预先设置多种检测信息。
可以根据如下可行的实现方式,获取待检测数据对应的检测信息:获取待检测数据的数据类型。例如,待检测数据的数据类型可以为个人贷款类数据、金融机构月报数据或者金融机构年报数据等类型。
可选的,可以根据待检测数据的标识,确定待检测数据的数据类型。例如,在获取待检测数据时,可以在待检测数据中输入数据类型对应的标识(例如,数据表的名称),进而通过数据类型的标识,确定待检测数据的类型。例如,若待检测数据的数据表的名称为个人贷款,则待检测数据的数据类型为个人贷款类型。可选的,可以根据金融部门要求上报的金融数据的类型,确定待检测数据的类型。例如,若金融部门要求上报的金融数据包括10种类型,则待检测数据的数据类型为10种类型,进而在10种类型中确定待检测数据的类型。
根据待检测数据的数据类型,获取待检测数据对应的检测信息。可选的,可以根据如下可行的实现方式,获取待检测数据对应的检测信息:获取数据类型与检测信息之间的第一对应关系。其中,第一对应关系中包括多个数据类型和每个数据类型一一对应的检测信息。例如,第一对应关系可以如表2所示:
表2
Figure BDA0003166049360000061
Figure BDA0003166049360000071
需要说明的是,表2只是以示例的形式示意第一对应关系,并不是对第一对应关系的限定。
根据待检测数据的数据类型和第一对应关系,在预设数据库中获取待检测数据对应的检测信息。其中,预设数据库用于存储检测信息。例如,若待检测数据的数据类型为数据类型1,则终端设备在预设数据库中获取检测信息1;若待检测数据的数据类型为数据类型2,则终端设备在预设数据库中获取检测信息2;若待检测数据的数据类型为数据类型3,则终端设备在预设数据库中获取检测信息3。
下面,结合图3,对待检测数据对应的检测信息进行说明。
图3为本申请实施例提供的一种检测信息的示意图。请参见图3,包括待检测数据和检测信息。其中,待检测数据中包括字段A、字段A对应的字段数据A、字段B、字段B对应的字段数据B、字段C和字段C对应的字段数据C。检测信息中包括字段A、字段A对应的检测代码A、字段B、字段B对应的检测代码B、字段C和字段C对应的检测代码C。
请参见图3,检测信息为待检测数据对应的检测信息,检测代码A用于对待检测数据中的字段数据A的格式进行检测,检测代码B用于对待检测数据中的字段数据B的格式进行检测,检测代码C用于对待检测数据中的字段数据C的格式进行检测。
S203、在待检测数据中,确定与M个检测代码一一对应的字段数据,得到M个字段数据。
可以根据如下可行的实现方式,在待检测数据中确定与M个检测代码一一对应的字段数据,得到M个字段数据:针对任意一个检测代码,确定任意一个检测代码对应的第一字段。例如,在图3所示的实施例中,检测代码A对应的第一字段为字段A,检测代码B对应的第一字段为字段B,检测代码C对应的第一字段为字段C。
在待检测数据中确定第一字段对应的字段数据。例如,在图3所示的实施例中,若根据检测代码确定的第一字段为字段A,则在待检测数据中确定的第一字段对应的字段数据为字段数据A;若根据检测代码确定的第一字段为字段B,则在待检测数据中确定的第一字段对应的字段数据为字段数据B;若根据检测代码确定的第一字段为字段C,则在待检测数据中确定的第一字段对应的字段数据为字段数据C。将第一字段对应的字段数据确定为检测代码对应的字段数据。例如,若检测代码对应的第一字段的字段数据为字段数据A,则检测代码对应的字段数据为字段数据A。这样,可以获取M个检测代码对应的待检测数据中的M个字段数据,由于,待检测数据中的字段包括待检测数据对应的检测信息中的字段,因此,待检测数据对应的检测信息中的每个检测代码一定可以在待检测数据中确定对应的字段数据。
可选的,若M个检测代码中的任意一个检测代码未在待检测数据中确定对应的字段数据(例如,待检测数据中的字段名与对应的检测信息中的字段名不同),则终端设备生成匹配报错的信息,并显示未成功匹配的检测代码。这样,工作人员可以对未成功匹配的检测代码手动匹配,进而提高数据检测的准确度。
可选的,在获取待检测数据并确定待检测数据对应的检测信息后,可以预先设置待检测数据和检测信息之间的字段的映射关系,进而确定检测代码对应的待检测数据中的字段数据。其中,映射关系可以为待检测数据中的字段和检测信息中的字段之间的映射关系。例如,待检测数据中的字段A和待检测数据对应的检测信息中的字段B之间具有映射关系,则字段B对应的检测代码可以检测字段A对应的字段数据,这样可以避免用户设置的待检测数据的字段的名和检测信息中字段的名不同时,而导致无法确定检测代码对应的字段数据的情况,提高数据检测的准确度。
下面,结合图4,对在待检测数据中确定M个检测代码一一对应的字段数据的过程进行说明。
图4为本申请实施例提供的确定检测代码对应的字段数据的过程示意图。请参见图4,包括检测信息和待检测数据。其中,检测信息为待检测数据对应的检测信息,检测信息中包括字段A和字段A对应的检测代码A,待检测数据中包括字段A、字段A对应的字段数据A、字段B和字段B对应的字段数据B。
请参见图4,在获取检测代码A对应的字段数据的过程中,在检测信息中确定检测代码A对应的第一字段为字段A,并在待检测数据中确定字段A。在待检测数据中的多个字段中确定字段A之后,确定待检测数据中字段A对应的字段数据为字段数据A,并确定字段数据A为检测代码在待检测数据中对应的字段数据。
S204、根据M个检测代码分别对M个字段数据进行检测处理,得到待检测数据的检测结果。
可以根据如下可行的实现方式,得到待检测数据的检测结果:根据M个检测代码分别对M个字段数据进行检测处理,得到M个字段数据一一对应的M个子检测结果。其中,子检测结果用于指示字段数据的格式正确或错误。例如,在通过检测代码A对字段数据A进行检测时,若字段数据A对应的子检测结果为检测失败,则字段数据A的数据格式不符合要求;若字段数据A对应的子检测结果为检测成功,则字段数据A的数据格式符合要求。
可选的,待检测代码中包括替换信息。其中,待替换信息可以为检测代码中的通用字符。例如,通用字符可以为检测代码中的${this}字符。针对于检测信息中的任意一个检测代码,可以根据如下可行的实现方式得到M个子检测结果:将每个检测代码包括的待替换信息替换为目标信息,得到M个更新后的检测代码,其中,目标信息包括检测代码对应的字段数据对应的字段。例如,若通用字符为检测代码中的${this},则将检测代码中的${this}替换为字段数据对应的字段,进而得到更新后的检测代码。例如,在对利率水平字段对应的字段数据进行检测时,可以将利率水平字段对应的检测代码中的通用字符替换为利率水平字段,得到更新后的检测代码。这样,通过字段替换检测代码中的通用字符,可以避免预先设置好检测代码中的字段时,若待检测数据的字段和检测代码中预先设置的字段不同,则会导致检测代码无法检测的情况,进而提高数据检测的准确度和可靠性。
根据M个更新后的检测代码对M个字段数据进行检测处理,得到M个子检测结果。可选的,将字段对应的字段数据作为更新后的检测代码的输入,并执行更新后的检测代码,得到字段数据对应的子检测结果。例如,将利率水平字段对应的检测代码中的通用字符替换为利率水平字段,得到更新后的检测代码,并向更新后的检测代码中输入利率水平字段对应的字段数据,进而得到利率水平字段对应的字段数据的子检测结果。
可选的,通过检测代码对对应的字段数据进行检测处理时,可以通过大数据集群进行处理,这样可以通过大数据集群高效的并行处理能力,快速的对待检测数据进行检测,提高待检测数据的检测效率。例如,待检测数据中包括30万条数据,可以通过大数据集群的部分资源处理前15万条数据,剩余的资源处理后15万条数据,这样通过并行处理的方式,提高待检测数据的检测效率。
根据M子检测结果,确定待检测数据的检测结果。可选的,若M个子检测结果均指示对应的字段数据的格式正确,则确定待检测数据的检测结果为待检测数据的格式正确;若M个子检测结果中存在至少一个子检测结果指示对应的字段数据的格式错误,则确定待检测数据的检测结果为待检测数据的格式错误。例如,待检测数据包括字段A、字段A对应的字段数据A、字段B和字段B对应的字段数据B,若字段数据A对应的子检测结果为检测成功,字段数据B对应的子检测结果为检测成功,则该待检测数据的检测结果为检测成功;若字段数据A对应的子检测结果为检测成功,字段数据B对应的子检测结果为检测失败,则该待检测数据的检测结果为检测失败。
本申请实施例提供一种数据检测方法,获取待检测数据,并确定待检测数据的数据类型,根据待检测数据的数据类型,获取待检测数据对应的检测信息,其中,待检测数据包括N个字段和N个字段一一对应的N个字段数据,N为大于或等于1的整数,检测信息包括M个字段和M个字段一一对应的检测代码,M为大于或等于1的整数,N个字段包括M个字段,在待检测数据中确定与M个检测代码一一对应的字段数据,得到M个字段数据,根据M个检测代码分别对M个字段数据进行检测处理,得到每个字段数据的子检测结果,若待检测数据中的每个字段数据对应的子检测结果都为检测成功,则待检测数据的检测结果为检测成功,若待检测数据中任意一个字段数据对应的检测结果为检测失败,则待检测数据对应的检测结果为检测失败。在上述方法中,数据库预先设置多种类型的检测信息,在获取待检测数据时,根据待检测数据的类型可以准确的确定对应的检测信息,并且在字段对应的检测规则发生改变时,重新配置检测信息中的检测代码,就可以按照新的检测规则对待检测数据进行检测,降低数据检测的时长,提高检测规则变化时数据检测的效率,并且,通过待检测数据的字段和检测信息的字段,可以准确的确定待检测信息中字段的字段数据对应的检测代码,因此,根据检测代码对对应的字段数据进行检测处理,可以准确的得到待检测数据的检测结果,提高数据检测的准确性,并且自动化数据检测的过程,可以降低数据检测的人工成本,降低数据检测过程中的误判,进而提高数据检测的可靠性。
在图2所示的实施例的基础上,若待检测数据的格式错误,根据每个字段数据对应的子检测结果,确定所述待检测数据对应的检测结果之后,数据检测方法还包括终端设备显示检测结果的过程。下面,结合图5,对终端设备显示检测结果的过程进行说明。
图5为本申请实施例提供的一种显示检测结果的方法流程示意图。请参见图5,该方法包括:
S501、在M个字段中确定K个目标字段。
其中,K个目标字段的字段数据对应的子检测结果均指示字段数据的格式错误,K为大于或等于0的整数。例如,在得到待检测数据中的每个字段数据对应的子检测结果之后,将子检测结果为检测失败的字段数据对应的字段,确定为目标字段。例如,若待检测数据中字段A的字段数据对应的子检测结果为检测成功,字段B的字段数据对应的子检测结果为检测失败,则待检测数据中的目标字段为字段B。
S502、输出K个目标字段和K个目标字段分别对应的字段数据。
可选的,终端设备确定K个目标字段之后,可以在显示屏幕中显示K个目标字段和每个目标字段对应的字段数据。可选的,在显示K个目标字段和目标字段对应的字段数据时,终端设备还可以显示检测任务执行完成后检测的字段的总数,检测通过的字段的数量、检测不通过的字段的数量。
可选的,在终端设备显示K个目标字段和目标字段对应的字段数据之后,工作人员可以对K个目标字段对应的字段数据进行修正,在对目标字段对应的字段数据修正之后,可以重新对修正后的字段数据进行检测,以保证数据的质量。可选的,在通过大数据集群分批检测时,每个检测批次的目标字段和目标字段对应的字段数据放入对应的批次分区中。
可选的,在对待检测数据检测之后,若待检测数据中存在目标字段,则在数据库中将该数据标记为检测失败,这样工作人员可以通过检测失败的标记,在数据库的多个数据中准确的获取检测失败的数据,进而对检测失败的数据进行修改,提高确定检测失败的数据的准确度。
可选的,若待检测数据的格式正确,则向预设设备发送待检测数据。例如,若金融机构的待检测数据的格式正确,则向金融部门发送待检测数据。
本申请实施例提供一种数据检测方法,在多个字段中确定K个第二字段,其中,第二字段的字段数据对应的子检测结果为检测失败,K为大于或等于0的整数,输出K个第二字段和第二字段对应的字段数据。这样,在对待检测数据检测完成后,若待检测数据的格式正确时,则向预设设备发送待检测数据,节省人力成本,若待检测数据的检测结果为检测失败,则可以通过终端设备显示的第二字段和第二字段对应的数据,准确的确定出现问题的字段数据,工作人员可以根据终端设备显示的结果,对第二字段数据进行修改,以使待检测数据中的字段数据符合检测规则,进而提高数据检测的可靠性。
在上述任意一个实施例的基础上,下面,结合图6,通过举例对上述数据检测方法的过程进行说明。
图6为本申请实施例提供的一种数据检测方法的过程示意图。以上报个人贷款发生额信息为例,请参见图6,包括:金融部门的服务器和终端设备。其中,终端设备可以获取金融部门下发的个人贷款表的数据上报要求。例如,个人贷款表中要包括利率水平字段,且贷款利率不含%、保留5位小数、大于0且小于或等于30的数字。
请参见图6,根据个人贷款表的数据上报要求,配置检测信息,并向终端设备上传检测信息。其中,检测信息中至少包括利率水平字段和利率水平检测代码,利率水平检测代码为SQL代码,利率水平检测代码用于检测数据是否包括%、数据是否保留5位小数和数据是否为大于0且小于或等于30的数字。
请参见图6,终端设备获取待检测数据,其中,待检测数据中至少包括利率水平字段和利率水平字段对应的字段数据,在图6所示的实施例中,利率水平字段对应的字段数据为0.0005,待检测数据中包括检测信息中的所有字段。建立待检测数据和检测信息之间字段的映射,以利率水平字段为例,待检测数据中的利率水平字段与检测信息之间的利率水平字段建立映射关系。
请参见图6,根据待检测数据中的利率水平字段与检测信息中的利率水平字段之间的映射关系,确定利率水平检测代码对应的待检测数据为0.0005,将0.0005作为利率水平代码的输入值,对利率水平字段对应的字段数据进行检测,并生成检测报告。
请参见图6,根据检测报告可以确定利率水平字段对应的字段数据符合“不含%”的检测规则,符合“大于0且小于或等于30的数字”的检测规则,不符合“保留5位小数”的检测规则,由于利率水平字段对应的字段数据未保留5位小数,因此,待检测数据检测失败。在待检测数据检测失败之后,工作人员可以对利率水平字段对应的字段数据进行修改,并重新进行检测。这样,在金融部门设置的检测规则发生改变时,通过修改检测信息中的利率水平代码,修改对字段的检测规则,避免在复杂的第三方检测脚本架构中重新编写检测脚本的过程,并且无需经过向第三方提需求、测试脚本和上线脚本等过程,在检测规则改变时,第一时间使用更新后的规则对数据进行检测,降低数据检测的时长,并提高数据检测的效率,并且,检测过程为自动化检测,降低数据误判的可能性,通过待检测数据的字段和检测信息中的字段,可以准确的确定检测信息中的检测代码在待检测数据中对应的检测数据,提高数据检测的准确度,进而提高数据检测的可靠性。
图7为本申请实施例提供的一种数据检测装置的结构示意图。请参见图7,该数据检测装置10可设置于终端设备中,该数据检测装置10包括第一获取模块11、第二获取模块12和第一确定模块13,其中:
所述第一获取模块11用于,获取待检测数据,所述待检测数据包括N个字段和所述N个字段一一对应的N个字段数据,所述N为大于或等于1的整数;
所述第二获取模块12用于,获取所述待检测数据对应的检测信息,所述检测信息包括M个字段和所述M个字段一一对应的检测代码,所述M为大于或等于1的整数,所述N个字段包括所述M个字段;
所述第一确定模块13用于,在所述待检测数据中确定与所述M个检测代码一一对应的字段数据,得到M个字段数据;
根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述待检测数据对应的检测结果。
在一种可能的实施方式中,所述第二获取模块12具体用于:
获取所述待检测数据的数据类型;
根据所述待检测数据的数据类型,获取所述待检测数据对应的检测信息。
在一种可能的实施方式中,所述第二获取模块12具体用于:
获取数据类型与检测信息之间的第一对应关系,所述第一对应关系中包括多个数据类型和每个数据类型一一对应的检测信息;
根据所述待检测数据的数据类型和所述第一对应关系,在预设数据库中获取所述待检测数据对应的检测信息。
在一种可能的实施方式中,所述第一确定模块13具体用于:
针对任意一个检测代码,确定所述检测代码对应的第一字段;
在所述待检测数据中确定所述第一字段对应的字段数据;
所述第一字段对应的字段数据确定为所述检测代码对应的字段数据。
在一种可能的实施方式中,所述第一确定模块13具体用于:
根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述M个字段数据一一对应的M个子检测结果,所述子检测结果用于指示字段数据的格式正确或错误;
根据所述M个子检测结果,确定所述待检测数据的检测结果。
在一种可能的实施方式中,所述第一确定模块13具体用于:
将每个所述检测代码包括的所述待替换信息替换为目标信息,得到M个更新后的检测代码,所述目标信息包括所述检测代码对应的所述字段数据对应的字段;
根据所述M个更新后的检测代码对所述M个字段数据进行检测处理,得到所述M个子检测结果。
在一种可能的实施方式中,所述第一确定模块13具体用于:
在所述检测代码中确定待替换信息;
将所述检测代码中的所述待替换信息替换为所述字段数据对应的字段。
在一种可能的实施方式中,所述第一确定模块13具体用于:
将所述字段对应的字段数据作为所述更新后的检测代码的输入,并执行所述更新后的检测代码,得到所述字段数据对应的子检测结果。
在一种可能的实施方式中,所述第一确定模块13具体用于:
若所述M个子检测结果均指示对应的所述字段数据的格式正确,则确定所述待检测数据对应的检测结果为所述待检测数据的格式正确;
若所述M个子检测结果中存在至少一个子检测结果指示对应的字段数据的格式错误,则确定所述待检测数据的检测结果为所述待检测数据的格式错误。
本申请实施例提供的数据检测装置可以执行上述方法实施例所示的技术方案,其实现原理以及有益效果类似,此处不再进行赘述。
本申请实施例所示的数据检测装置可以为芯片、硬件模组、处理器等。当然,数据检测装置可以为其它形态,本申请实施例对此不作具体限定。
图8为本申请实施例提供的另一种数据检测装置的结构示意图。在图7所示的实施例的基础上,请参见图8,该数据检测装置10还包括第二确定模块14,所述第二确定模块14用于:
在所述M个字段中确定K个目标字段,所述目标字段对应的字段数据对应的子检测结果均指示所述字段数据的格式错误,所述K为大于或等于0的整数;
输出所述K个目标字段和所述K个目标字段分别对应的字段数据。
在一种可能的实施方式中,所述第二确定模块14具体用于:
向预设设备发送待检测数据。
本申请实施例提供的数据检测装置可以执行上述方法实施例所示的技术方案,其实现原理以及有益效果类似,此处不再进行赘述。
本申请实施例所示的数据检测装置可以为芯片、硬件模组、处理器等。当然,数据检测装置可以为其它形态,本申请实施例对此不作具体限定。
图9为本申请提供的数据检测设备的硬件结构示意图。请参见图9,该数据检测设备20可以包括:处理器21和存储器22,其中,处理器21和存储器22可以通信;示例性的,处理器21和存储器22通过通信总线23通信,所述存储器22用于存储程序指令,所述处理器21用于调用存储器中的程序指令执行上述任意方法实施例所示的数据检测方法。
可选的,数据检测设备20还可以包括通信接口,通信接口可以包括发送器和/或接收器。
可选的,上述处理器可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
本申请提供一种可读存储介质,所述可读存储介质上存储有计算机程序;所述计算机程序用于实现如上述任意实施例所述的数据检测方法。
本申请实施例提供一种计算机程序产品,所述计算机程序产品包括指令,当所述指令被执行时,使得计算机执行上述数据检测方法。
实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一可读取存储器中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储器(存储介质)包括:只读存储器(英文:read-only memory,缩写:ROM)、RAM、快闪存储器、硬盘、固态硬盘、磁带(英文:magnetic tape)、软盘(英文:floppydisk)、光盘(英文:optical disc)及其任意组合。
本申请实施例是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程终端设备的处理单元以产生一个机器,使得通过计算机或其他可编程终端设备的处理单元执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程终端设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请实施例进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请实施例的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
在本申请中,术语“包括”及其变形可以指非限制性的包括;术语“或”及其变形可以指“和/或”。本申请中术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。本申请中,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

Claims (8)

1.一种数据检测方法,其特征在于,包括:
获取待检测数据,所述待检测数据包括N个字段和所述N个字段一一对应的N个字段数据,所述N为大于或等于1的整数;
获取所述待检测数据对应的检测信息,所述检测信息包括M个字段和所述M个字段一一对应的检测代码,所述M为大于或等于1的整数,所述N个字段包括所述M个字段;
在所述待检测数据中,确定与所述M个检测代码一一对应的字段数据,得到M个字段数据;
根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述待检测数据的检测结果;
所述在所述待检测数据中,确定与所述M个检测代码一一对应的字段数据,得到M个字段数据,包括:针对任意一个检测代码,确定任意一个检测代码对应的第一字段;在待检测数据中确定第一字段对应的字段数据;所述第一字段对应的字段数据确定为所述检测代码对应的字段数据;
所述根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述待检测数据的检测结果,包括:根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述M个字段数据一一对应的M个子检测结果,所述子检测结果用于指示所述字段数据的格式正确或错误;根据所述M个子检测结果确定所述待检测数据的检测结果;
所述检测代码包括待替换信息,待替换信息为检测代码中的通用字符;所述根据所述M个检测代码对所述M个字段数据进行检测处理,得到所述M个子检测结果,包括:将每个所述检测代码包括的所述待替换信息替换为目标信息,得到M个更新后的检测代码,所述目标信息包括所述检测代码对应的所述字段数据对应的字段;根据所述M个更新后的检测代码对所述M个字段数据进行检测处理,得到所述M个子检测结果。
2.根据权利要求1所述的方法,其特征在于,所述获取所述待检测数据对应的检测信息,包括:
获取所述待检测数据的数据类型;
根据所述待检测数据的数据类型,获取所述待检测数据对应的检测信息。
3.根据权利要求1所述的方法,其特征在于,所述根据所述M个更新后的检测代码对所述M个字段数据进行检测处理,得到所述M个子检测结果,包括:
将所述字段对应的字段数据作为所述更新后的检测代码的输入,并执行所述更新后的检测代码,得到所述字段数据对应的子检测结果。
4.根据权利要求1或3所述的方法,其特征在于,所述根据所述M个子检测结果确定所述待检测数据的检测结果,包括:
若所述M个子检测结果均指示对应的所述字段数据的格式正确,则确定所述待检测数据的检测结果为所述待检测数据的格式正确;
若所述M个子检测结果中存在至少一个子检测结果指示对应的字段数据的格式错误,则确定所述待检测数据的检测结果为所述待检测数据的格式错误。
5.根据权利要求4所述的方法,其特征在于,若所述待检测数据的检测结果为所述待检测数据的格式错误;在确定所述待检测数据的检测结果之后,还包括:
在M个字段中确定K个目标字段,所述K个目标字段对应的字段数据对应的子检测结果均指示所述字段数据的格式错误,所述K为大于或等于0的整数;
输出所述K个目标字段和所述K个目标字段分别对应的字段数据。
6.一种数据检测装置,其特征在于,包括第一获取模块、第二获取模块和第一确定模块,其中:
所述第一获取模块用于,获取待检测数据,所述待检测数据中包括N个字段和所述N个字段一一对应的N个字段数据,所述N为大于或等于1的整数;
所述第二获取模块用于,获取所述待检测数据对应的检测信息,所述检测信息中包括M个字段和所述M个字段一一对应的检测代码,所述M为大于或等于1的整数,所述N个字段包括所述M个字段;
所述第一确定模块用于,根据所述N个字段和所述M个字段,在所述待检测数据中确定与所述M个检测代码一一对应的字段数据,并根据所述检测代码对对应的字段数据进行检测处理,得到所述待检测数据对应的检测结果;
所述第一确定模块具体用于:针对任意一个检测代码,确定所述检测代码对应的第一字段;在所述待检测数据中确定所述第一字段对应的字段数据;所述第一字段对应的字段数据确定为所述检测代码对应的字段数据;
所述第一确定模块具体用于:根据所述M个检测代码分别对所述M个字段数据进行检测处理,得到所述M个字段数据一一对应的M个子检测结果,所述子检测结果用于指示字段数据的格式正确或错误;根据所述M个子检测结果,确定所述待检测数据的检测结果;
所述检测代码包括待替换信息,待替换信息为检测代码中的通用字符;所述第一确定模块具体用于:将每个所述检测代码包括的所述待替换信息替换为目标信息,得到M个更新后的检测代码,所述目标信息包括所述检测代码对应的所述字段数据对应的字段;根据所述M个更新后的检测代码对所述M个字段数据进行检测处理,得到所述M个子检测结果。
7.一种数据检测设备,其特征在于,包括处理器和存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如权利要求1至5任一项所述的数据检测方法。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当所述计算机执行指令被处理器执行时用于实现如权利要求1至5任一项所述的数据检测方法。
CN202110805142.5A 2021-07-16 2021-07-16 数据检测方法、装置及设备 Active CN113505159B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110805142.5A CN113505159B (zh) 2021-07-16 2021-07-16 数据检测方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110805142.5A CN113505159B (zh) 2021-07-16 2021-07-16 数据检测方法、装置及设备

Publications (2)

Publication Number Publication Date
CN113505159A CN113505159A (zh) 2021-10-15
CN113505159B true CN113505159B (zh) 2023-04-25

Family

ID=78013522

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110805142.5A Active CN113505159B (zh) 2021-07-16 2021-07-16 数据检测方法、装置及设备

Country Status (1)

Country Link
CN (1) CN113505159B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3905022A (en) * 1973-06-26 1975-09-09 Addressograph Multigraph Data entry terminal having data correction means
EP0401994A3 (en) * 1989-06-05 1991-10-23 Hewlett-Packard Company Method of implementing error corrected memory
EP0427066A3 (en) * 1989-11-08 1992-04-15 National Semiconductor Corporation Pattern injector
CA2748676A1 (en) * 2008-07-02 2010-01-07 Lexisnexis Risk Solutions Fl Inc. Entity representation identification using entity representation level information
CN106959975A (zh) * 2016-01-11 2017-07-18 广州市动景计算机科技有限公司 一种转码资源缓存处理方法、装置及设备
CN108446115A (zh) * 2018-03-12 2018-08-24 中国银行股份有限公司 一种代码复用的方法及装置
CN108647279A (zh) * 2018-05-03 2018-10-12 山东浪潮通软信息科技有限公司 基于字段复用的表单处理方法、装置、介质及存储控制器
CN108776587A (zh) * 2018-05-25 2018-11-09 平安科技(深圳)有限公司 数据获取方法、装置、计算机设备以及存储介质
CN109657214A (zh) * 2018-09-27 2019-04-19 深圳壹账通智能科技有限公司 报表生成方法、装置、终端及存储介质
JPWO2020246175A1 (zh) * 2019-06-04 2020-12-10
CN112202633A (zh) * 2020-09-24 2021-01-08 成都质数斯达克科技有限公司 区块链网络的测试方法、装置、电子设备及可读存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0402176D0 (en) * 2004-01-31 2004-03-03 Srodzinski David N Method and apparatus for data communication within a packet based communication system
US7761786B2 (en) * 2005-12-06 2010-07-20 International Business Machines Corporation Reusable XPath validation expressions
US8745094B2 (en) * 2010-03-01 2014-06-03 Protegrity Corporation Distributed tokenization using several substitution steps
CN105335407A (zh) * 2014-07-29 2016-02-17 阿里巴巴集团控股有限公司 一种数据自动化测试方法及装置
CN106708909B (zh) * 2015-11-18 2020-12-08 阿里巴巴集团控股有限公司 数据质量的检测方法和装置
US11048874B2 (en) * 2016-01-05 2021-06-29 International Business Machines Corporation Medical record error detection system and method
CN109491990A (zh) * 2018-09-17 2019-03-19 武汉达梦数据库有限公司 一种检测数据质量的方法以及检测数据质量的装置
CN110362563A (zh) * 2019-07-19 2019-10-22 北京明略软件系统有限公司 数据表的处理方法及装置、存储介质、电子装置
CN110413596A (zh) * 2019-07-30 2019-11-05 北京明略软件系统有限公司 字段处理方法及装置、存储介质、电子装置

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3905022A (en) * 1973-06-26 1975-09-09 Addressograph Multigraph Data entry terminal having data correction means
EP0401994A3 (en) * 1989-06-05 1991-10-23 Hewlett-Packard Company Method of implementing error corrected memory
EP0427066A3 (en) * 1989-11-08 1992-04-15 National Semiconductor Corporation Pattern injector
CA2748676A1 (en) * 2008-07-02 2010-01-07 Lexisnexis Risk Solutions Fl Inc. Entity representation identification using entity representation level information
CN106959975A (zh) * 2016-01-11 2017-07-18 广州市动景计算机科技有限公司 一种转码资源缓存处理方法、装置及设备
CN108446115A (zh) * 2018-03-12 2018-08-24 中国银行股份有限公司 一种代码复用的方法及装置
CN108647279A (zh) * 2018-05-03 2018-10-12 山东浪潮通软信息科技有限公司 基于字段复用的表单处理方法、装置、介质及存储控制器
CN108776587A (zh) * 2018-05-25 2018-11-09 平安科技(深圳)有限公司 数据获取方法、装置、计算机设备以及存储介质
CN109657214A (zh) * 2018-09-27 2019-04-19 深圳壹账通智能科技有限公司 报表生成方法、装置、终端及存储介质
JPWO2020246175A1 (zh) * 2019-06-04 2020-12-10
CN112202633A (zh) * 2020-09-24 2021-01-08 成都质数斯达克科技有限公司 区块链网络的测试方法、装置、电子设备及可读存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
安帝玟 ; 唐艳宾 ; .基于字符串的代码克隆检测方法的分析.电脑知识与技术.2009,(第31期),第160-161页. *
苗彦超,杨晓君,赵毅,孙凝晖.基于CATV网络的视频服务器设计.微电子学与计算机.2003,(第06期),第66-70页. *

Also Published As

Publication number Publication date
CN113505159A (zh) 2021-10-15

Similar Documents

Publication Publication Date Title
CA2940444C (en) Specifying and applying logical validation rules to data
CN109245935B (zh) 一种消息队列异常的处理方法及终端
CN109635300B (zh) 数据校验方法及装置
CN110046086B (zh) 用于测试的期望数据生成方法及装置和电子设备
CN109214362B (zh) 单据处理方法及相关设备
CN113505159B (zh) 数据检测方法、装置及设备
CN112035605A (zh) 题目推荐方法、装置、设备及存储介质
CN111277465A (zh) 一种异常数据报文检测方法、装置及电子设备
CN116302079A (zh) 一种业务数据处理方法、装置、电子设备及存储介质
WO2020215542A1 (zh) 信息通知方法、装置、计算机设备及存储介质
CN111400245B (zh) 美术资源迁移方法及装置
CN107704484B (zh) 网页错误信息处理方法、装置、计算机设备和存储介质
CN113515510A (zh) 数据处理方法、数据处理系统、电子设备及可读存储介质
CN110309211B (zh) 一种定位etl过程问题的方法及相关设备
CN112860722A (zh) 数据核对方法、装置、电子设备和可读存储介质
CN114844956B (zh) 报文校验的方法、装置、存储介质和电子设备
CN110716927B (zh) 数据修正方法、装置、设备及计算机可读存储介质
US20220382777A1 (en) Method and system for handling input data
CN113360491B (zh) 数据质量检验方法、装置、电子设备及存储介质
US20230215747A1 (en) Process data detection method, computer readable medium, and electronic device
CN116502094A (zh) 一种数据处理方法、装置、计算机设备以及存储介质
CN117194274A (zh) 测试结果的处理方法、装置及设备
CN118196810A (zh) 表单处理方法、装置、存储介质及处理器
CN118174823A (zh) 报文处理方法、装置、设备、介质和程序产品
CN117193978A (zh) 任务调度方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant