CN110716927B - 数据修正方法、装置、设备及计算机可读存储介质 - Google Patents

数据修正方法、装置、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN110716927B
CN110716927B CN201910845756.9A CN201910845756A CN110716927B CN 110716927 B CN110716927 B CN 110716927B CN 201910845756 A CN201910845756 A CN 201910845756A CN 110716927 B CN110716927 B CN 110716927B
Authority
CN
China
Prior art keywords
data
correction
corrected
positive
negative
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910845756.9A
Other languages
English (en)
Other versions
CN110716927A (zh
Inventor
陈浩光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Property and Casualty Insurance Company of China Ltd
Original Assignee
Ping An Property and Casualty Insurance Company of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Property and Casualty Insurance Company of China Ltd filed Critical Ping An Property and Casualty Insurance Company of China Ltd
Priority to CN201910845756.9A priority Critical patent/CN110716927B/zh
Publication of CN110716927A publication Critical patent/CN110716927A/zh
Application granted granted Critical
Publication of CN110716927B publication Critical patent/CN110716927B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开一种数据修正方法、装置、设备及计算机可读存储介质,所述方法包括:当接收到修正请求时,读取与修正请求对应的筛选条件,并根据筛选条件对预设数据库中的数据进行筛选,确定待修正数据;读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正。本方案基于大数据处理技术形成多个修正数据组,进而由各修正数据组中的正修正数据和负修正数据对待修正数据进行修正,确保了数据库中各错误数据修正的准确性。

Description

数据修正方法、装置、设备及计算机可读存储介质
技术领域
本发明主要涉及数据处理技术领域,具体地说,涉及一种数据修正方法、装置、设备及计算机可读存储介质。
背景技术
数据库技术的发展在很大程度上方便了数据的存储,数据库中所存储的数据数量众多,且类型多种多样,各类型数据之间具有关联关系;如身份证数据和年龄数据、成本数据和利润数据、推荐数据和被推荐数据等。
不可避免地,数据库中所存储的各类数据中可能存在错误的数据,如因人为操作失误而导致的错误或者因计算逻辑问题而导致的错误等。目前,针对各类错误数据通过人为操作的方式进行修正,修正过程中,容易存在因需要修正的错误数据多,而导致错误数据之间修正不准确的问题。
发明内容
本发明的主要目的是提供一种数据修正方法、装置、设备及计算机可读存储介质,旨在解决现有技术中对数据库中错误数据的修正不全面,效率低的问题。
为实现上述目的,本发明提供一种数据修正方法,所述数据修正方法包括以下步骤:
当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正。
优选地,所述根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正的步骤包括:
根据所述负修正数据将所述待修正数据的数值修正为标准数值,得到新的待修正数据;
根据所述正修正数据对所述新的待修正数据进行修正。
优选地,所述将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组的步骤包括:
读取各所述待修正数据的数据标识,以及读取各所述正修正数据和各所述负修正数据所携带的正标识和负标识;
根据各所述正标识、各所述负标识和各所述数据标识之间的对应关系,将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
优选地,所述根据各所述正标识、各所述负标识和各所述数据标识之间的对应关系,将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组的步骤包括:
逐一抓取各所述正标识和各所述负标识对比,确定与抓取的所述正标识对应的目标负标识,并在抓取的所述正标识和所述目标负标识之间形成对应关系;
对各所述数据标识进行筛选,确定各所述数据标识中与所述对应关系中标识一致的目标数据标识,并将所述目标数据标识添加到所述对应关系中;
将与所述对应关系中各标识对应的正修正数据、负修正数据和待修正数据确定为具有相同预设标识的正修正数据、负修正数据和待修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
优选地,所述当接收到修正请求时,读取与所述修正请求对应的筛选条件的步骤之前包括:
当接收到待存储数据时,读取与所述待存储数据对应的账户标识,系统标识以及流水号;
将所述账户标识、所述系统标识和所述流水号生成为存储编码,并根据所述存储编码将所述待存储数据存储到所述预设数据库中。
优选地,所述根据所述存储编码将所述待存储数据存储到所述预设数据库中的步骤包括:
判断所述预设数据库中是否存在与所述存储编码对应的历史编码,若存在与所述存储编码对应的历史编码,则将所述待存储数据剔除;
若不存在与所述存储编码对应的历史编码,则将所述待存储数据存储到所述预设数据库中。
优选地,所述将所述待存储数据存储到所述预设数据库中的步骤之后包括:
将与所述待存储数据对应的数值下发到与所述账户标识对应的用户账户中。
此外,为实现上述目的,本发明还提出一种数据修正装置,所述数据修正装置包括:
筛选模块,用于当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
读取模块,用于读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
修正模块,用于根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正。
此外,为实现上述目的,本发明还提出一种数据修正设备,所述数据修正设备包括:存储器、处理器、通信总线以及存储在所述存储器上的数据修正程序;
所述通信总线用于实现处理器和存储器之间的连接通信;
所述处理器用于执行所述数据修正程序,以实现以下步骤:
当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者一个以上程序,所述一个或者一个以上程序可被一个或者一个以上的处理器执行以用于:
当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正。
本实施例的数据修正方法,在接收到修正请求,具有对错误数据进行修正的需求时,先由修正请求中的筛选条件整体筛选出需要修正的待修正数据;再将用于对各待修正数据进行修正的正修正数据和负修正数据,与各待修正数据一并形成为修正数据组,进而用各修正数据组中的正修正数据和负修正数据,对待修正数据进行修正。因各修正数据组中的正修正数据和负修正数据专用于对其中的待修正数据进行修正,通过将各待修正数据分别形成为修正数据组进行修正的方式,避免了各待修正数据之间的混淆,确保了数据库中各错误数据修正的准确性。
附图说明
图1是本发明的数据修正方法第一实施例的流程示意图;
图2是本发明的数据修正装置第一实施例的功能模块示意图;
图3是本发明实施例方法涉及的硬件运行环境的设备结构示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供一种数据修正方法。
请参照图1,图1为本发明数据修正方法第一实施例的流程示意图。在本实施例中,所述数据修正方法包括:
步骤S10,当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
本发明的数据修正方法应用于服务器,适用于通过服务器对预设数据库中的错误数据进行修正;其中预设数据库为预先设定可对接多个系统的数据库,各系统生成的数据可直接存储到预设数据库中,或者由人为操作进行存储。当已存储到预设数据库的数据中存在错误数据而具有修正需求时,由修正人员发起修正请求,将需要修正的错误数据所具有的共同属性形成为筛选条件并发起修正请求。服务器接收到该修正请求时,读取其中携带的筛选条件,并依据筛选条件,对预设数据库中存储的数据进行筛选,确定需要修正的待修正数据,其中待修正数据为数据库中满足筛选条件的错误数据。
如需要对预设数据库中存储的某机构内所有员工最近一笔的交易数据进行修正,则以该机构编码和最近交易日期设定筛选条件;在筛选时,对预设数据库中的各数据依据机构编码和最近交易日期进行筛选,确定其中满足机构编码和最近交易日期要求的数据,该满足要求的数据即为需要进行修正处理的待修正数据。
步骤S20,读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
进一步地,修正请求中除了携带有筛选条件之外,还携带有正修正数据和负修正数据,且不同的待修正数据所对应的正修正数据和负修正数据不相同;如待修正数据包括A、B和C,各自对应的正修正数据和负修正数据分别为a1和a2、b1和b2、c1和c2。需要说明的是,在待修正数据的数量较多的情况下,正修正数据和负修正数据以数据表的形式存在,将正修正数据和负修正数据编制到数据表中后发起修正请求;在待修正数据的数据量较少的情况下,则直接设定正修正数据和负修正数据,并在设定后发起修正请求。各正修正数据和各负修正数据之间通过预先设定的预设标识进行区分,表征各正修正数据和负修正数据所针对的待修正数据。将该各项正修正数据和负修正数据和修正请求一并存储到服务器,服务器在确定待修正数据之后,进一步读取修正请求中所携带的正修正数据和负修正数据;并依据各正修正数据、负修正数据和待修正数据之间所携带的预设标识,确定具有相同预设标识的正修正数据、负修正数据和待修正数据,进而将具有相同预设标识的正修正数据、负修正数据和待修正数据形成为同一个修正数据组。其中,各修正数据组中的待修正数据为具有错误的需要修正的数据,负修正数据为用于对待修正数据进行归零处理,将待修正数据修正为标准数值0的数据,正修正数据为用于对待修正数据进行修正的数据。通过修正数据组中的负修正数据先将待修正数据修正为标准数值,得到新的待修正数据;再以该新的待修正数据为基础,用正修正数据对待修正数据进行继续修正,完成待修正数据的修正。以此避免了修正过程中的数据混乱,提高了对待修正数据修正的准确性。
进一步地,所述将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组的步骤包括:
步骤S21,读取各所述待修正数据的数据标识,以及读取各所述正修正数据和各所述负修正数据所携带的正标识和负标识;
更进一步地,将预先设定用于在各待修正数据进行区分的预设标识读取为数据标识,并将预先设定用于在各正修正数据进行区分的预设标识读取为正标识,而将预先设定用于在各负修正数据进行区分的预设标识读取为负标识;通过各正标识和各负标识来表征各项正修正数据和负修正数据所针对修正的待修正数据。
步骤S22,根据各所述正标识、各所述负标识和各所述数据标识之间的对应关系,将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
可理解地,因各正标识所对应的正修正数据和各负标识所对应的负修正数据分别表征对某一待修正数据进行修正,而各待修正数据之间通过数据标识区分;各正标识、各负标识和各数据标识之间具有对应关系,在正标识、负标识和数据标识对应相同的预设标识时表征对待修正数据进行修正。从而在各正标识、各负标识和各数据标识之间进行对比,确定三者之间具有相同预设标识的对应关系,并依据该对应关系将具有相同预设标识的正修正数据、负修正数据和待修正数据形成为同一修正数据组。具体地,步骤S22包括:
步骤S221,逐一抓取各所述正标识和各所述负标识对比,确定与抓取的所述正标识对应的目标负标识,并在抓取的所述正标识和所述目标负标识之间形成对应关系;
进一步地,因正标识数量众多,在对各正标识、负标识和数据标识之间对比,确定三者之间的对应关系时;设定逐一抓取各正标识进行对比,以逐一确定各个修正数据组的机制。每次从各正标识中抓取一个正标识,并将当前抓取的正标识和各负标识对比,确定各负标识中与当前抓取的正标识对应一致的目标负标识;此后,将当前抓取的正标识和与其一致的目标负标识形成对应关系,具有该对应关系中正标识和目标负标识的正修正数据和负修正数据针对同一待修正数据组进行修正。
步骤S222,对各所述数据标识进行筛选,确定各所述数据标识中与所述对应关系中标识一致的目标数据标识,并将所述目标数据标识添加到所述对应关系中;
更进一步地,在将当前抓取的正标识和目标负标识形成对应关系后,依据该对应关系对各数据标识进行筛选,从各数据标识中筛选出和对应关系中标识一致的目标数据标识。因对应关系中包含正标识和目标负标识,而该正标识和目标负标识为相同的标识,从而对应关系的标识其实质为该正标识或目标负标识。目标数据标识即为与正标识或目标负标识一致的标识,将目标数据标识添加到对应关系中,对对应关系进行更新,表征具有对应关系中正标识和目标负标识的正修正数据和负修正数据,用于对具有对应关系中目标数据标识的待修正数据进行修正。
步骤S223,将与所述对应关系中各标识对应的正修正数据、负修正数据和待修正数据确定为具有相同预设标识的正修正数据、负修正数据和待修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
可理解地,更新的对应关系中所涉及到的正标识、目标负标识和目标数据标识,表征了对同一待修正数据进行修正的正修正数据,负修正数据和需要修正的待修正数据本身,三项标识均对应相同的预设标识;与对应关系中各标识对应的正修正数据、负修正数据和待修正数据即为具有相同预设标识的正修正数据、负修正数据和待修正数据。从而将与对应关系中正标识对应的正修正数据,与其中目标负标识对应的负修正数据,和与其中目标数据标识对应的待修正数据确定为具有相同预设标识的正修正数据、负修正数据和待修正数据;此后将该具有相同预设标识的正修正数据、负修正数据和待修正数据形成同一修正数据组,以由其中的正修正数据和负修正数据对待修正数据进行修正。
步骤S30,根据各所述修正数据组中的正修正数据和负修正数据,对各所述待修正数据组中的待修正数据进行修正。
进一步地,在将预设数据库中所需要修正的待修正数据,以及用于对各待修正数据进行修正的正修正数据和负修正数据形成为各个修正数据组之后,对各个修正数据组进行逐一修正处理。每次针对一个修正数据组,依据其中的正修正数据和负修正数据对待修正数据进行修正,将错误的待修正数据修正为正确。在当前处理的修正数据组修正完成后,再读取下一个修正数据组进行修正处理,直到各个修正数据组均进行修正,则完成对数据库中所需要修正数据的修正。
其中,所述根据各所述修正数据组中的正修正数据和负修正数据,对各所述待修正数据组中的待修正数据进行修正的步骤包括:
步骤S31,根据所述负修正数据将所述待修正数据的数值修正为标准数值,得到新的待修正数据;
可理解地,负修正数据为用于对待修正数据进行归零处理的数据,正修正数据为用于对待修正数据进行增加的数据。从而在依据正修正数据和负修正数据对待修正数据进行修正时,先在待修正数据和负修正数据之间做差运算,生成差运算结果;通过负修正数据对待修正数据进行归零处理,将其修正为标准数值,得到新的待修正数据,该新的待修正数据的数值为0。
需要说明的是,因差运算的目的是对待修正数据进行归零的标准化处理,为了简化修正人员对负修正数据的设定,可针对负修正数据设置检测确定机制。具体地,修正人员先将各项负修正数据均设定为数值0,在对各修正数据组中的负修正数据进行读取,以对待修正数据进行修正时,先检测该待修正数据的数值,并将该数值作为负修正数据的数值;此后在负修正数据和待修正数据之间做差运算,因两者之间的数值相同,使得差运算所得到的新的待修正数据的数值为0,而实现对待修正数据归零的标准化处理。
步骤S32,根据所述正修正数据对所述新的待修正数据进行修正。
进一步地,在得到新的待修正数据之后,根据正修正数据对其进行修正,将该新的待修正数据和正修正数据做和运算。其中进行和运算的正修正数据所来源的修正数据组为生成差运算结果的修正数据组相同,即和运算的新的待修正数据和正修正数据之间对应相同的修正数据组。因差运算的结果为对待修正组数据进行归零处理,使得所生成的新的待修正数据的数值为0;从而和运算其实质为用数值0和正修正数据相加,所得到的和运算结果为正修正数据本身。如需要将数据D1的数值由500修正为300,将数据D2的数值由200修正为400,则针对数据D1所形成的修正数据组中的正修正数据为300,负修正数据为500,待修正数据为500;针对数据D2所形成的修正数据组中的正修正数据为400,负修正数据为200,待修正数据为200。在对数据D1进行修正时先在待修正数据500和负修正数据500之间做差运算,得到新的待修正数据0,再在新的待修正数据0和正修正数据300之间做和运算,得到修正后的数据300;同样的在对数据D2进行修正时先在待修正数据200和负修正数据200之间做差运算,得到新的待修正数据0,再在新的待修正数据0和正修正数据400之间做和运算,得到修正后的数据400。即和运算所得到的和运算结果即为对待修正数据进行修正的结果,将和运算结果作为所生成的修正结果,完成对待修正数据的修正。
本实施例的数据修正方法,在接收到修正请求,具有对错误数据进行修正的需求时,先由修正请求中的筛选条件整体筛选出需要修正的待修正数据;再将用于对各待修正数据进行修正的正修正数据和负修正数据,与各待修正数据一并形成为修正数据组,进而用各修正数据组中的正修正数据和负修正数据,对待修正数据进行修正。因各修正数据组中的正修正数据和负修正数据专用于对其中的待修正数据进行修正,通过将各待修正数据分别形成为修正数据组进行修正的方式,避免了各待修正数据之间的混淆,确保了数据库中各错误数据修正的准确性。
进一步地,在本发明数据修正方法另一实施例中,所述当接收到修正请求时,读取与所述修正请求对应的筛选条件的步骤之前包括:
步骤S40,当接收到待存储数据时,读取与所述待存储数据对应的账户标识,系统标识以及流水号;
本实例在对预设数据库中的错误数据进行修正前,将各系统所新生成的数据存储到预设数据库中。具体地,预设数据库所对接的系统通过服务器进行连接,当系统需要将新生成的数据存储到预设数据库时,向服务器发起存储请求,并在发起存储请求的同时将所需要存储的待存储数据传输到服务器。如对于交易充值系统,用户通过交易充值系统对其用户账户进行充值,或者检测到登录用户账户时,由交易充值系统向用户账户发放奖励积分,该充值数据和奖励积分数据即为需要存储到预设数据库中存储的数据。各项需要存储的数据均对应由不同的用户账户生成,各系统在将待存储数据发送到服务器之前,还读取该待存储数据所来源用户账户的账户标识,并为待存储数据分配对应的流水号;此后系统将其自身的系统标识、该账户标识、流水号和待存储数据一并发送到服务器。服务器对待存储数据进行接收,并读取其中对应的账户标识、系统标识和流水号,以表征服务器接收到的待存储数据所来源的系统、用户账户和流水编号。
步骤S50,将所述账户标识、所述系统标识和所述流水号生成为存储编码,并根据所述存储编码将所述待存储数据存储到所述预设数据库中。
进一步地,服务器中预先设置有表征账户标识、系统标识以及流水号排列顺序的预设格式,将所读取的账户标识、系统标识和流水号按照该预设格式进行排列,生成为存储编码。该存储编码是表征对该待存储数据进行存储的编码,每当有需要待存储数据进行存储时,服务器即生成对应的存储编码并存储到预设数据库中,以对该存储的待存储数据进行记录。为了避免重复存储,设置有依据存储编码检测重复性的机制,当根据存储编码确定待存储数据为尚未进行存储的数据,则将待存储数据存储到预设数据库中,否则不对待存储数据进行存储操作。
具体地,所述根据所述存储编码将所述待存储数据存储到所述预设数据库中的步骤包括:
步骤S51,判断所述预设数据库中是否存在与所述存储编码对应的历史编码,若存在与所述存储编码对应的历史编码,则将所述待存储数据剔除;
进一步地,将预设数据库中存储的用于记录待存储数据的存储编码作为历史编码,服务器将当前生成的存储编码发送到预设数据库中,和其中存储的历史编码对比,判断其中是否存在和存储编码对应一致的历史编码。若存在与存储编码对应一致的历史编码,则说明生成的待存储数据已经进行过存储,为了避免重复存储,将待存储数据进行剔除操作。
步骤S52,若不存在与所述存储编码对应的历史编码,则将所述待存储数据存储到所述预设数据库中。
更进一步地,当判断出预设数据库中不存在与存储编码对应的历史编码时,则说明所生成的待存储数据尚未进行过存储操作,从而将待存储数据存储到预设数据库中。其中存储可依据不同的系统设置分区机制,针对不同的系统在预设数据库中设定不同的存储分区,各存储分区由系统标识进行区别。在对待存储数据进行存储时,根据待存储数据对应的系统标识确定目标存储分区,进而将该待存储数据存储到该目标存储分区中,实现将不同系统的数据存储在不同存储分区中,便于各系统数据的管理。
进一步地,各待存储数据由用户账户生成,表征了用户各项操作所生成的数据;为了向用户反馈对待存储数据的处理情况,在对待存储数据进行存储后,将与待存储数据对应的数值下发到与账户标识对应的用户账户中。如对于充值数据,若用户账户Q的充值额度为P,则将充值额度生成为待存储数据进行存储后,将P的充值额度下发到用户账户Q中,表征用户账户Q的该次充值成功。
此外,请参照图2,本发明提供一种数据修正装置,在本发明数据修正装置第一实施例中,所述数据修正装置包括:
筛选模块10,用于当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
读取模块20,用于读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
修正模块30,用于根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正。
本实施例的数据修正装置,在接收到修正请求,具有对错误数据进行修正的需求时,筛选模块10先由修正请求中的筛选条件整体筛选出需要修正的待修正数据;读取模块20再将用于对各待修正数据进行修正的正修正数据和负修正数据,与各待修正数据一并形成为修正数据组,进而修正模块30用各修正数据组中的正修正数据和负修正数据,对待修正数据进行修正。因各修正数据组中的正修正数据和负修正数据专用于对其中的待修正数据进行修正,通过将各待修正数据分别形成为修正数据组进行修正的方式,避免了各待修正数据之间的混淆,确保了数据库中各错误数据修正的准确性。
进一步地,在本发明数据修正装置另一实施例中,所述修正模块还包括:
生成单元,用于根据所述负修正数据将所述待修正数据的数值修正为标准数值,得到新的待修正数据;
修正单元,用于根据所述正修正数据对所述新的待修正数据进行修正。
进一步地,在本发明数据修正装置另一实施例中,所述读取模块还包括:
读取单元,用于读取各所述待修正数据的数据标识,以及读取各所述正修正数据和各所述负修正数据所携带的正标识和负标识;
形成单元,用于根据各所述正标识、各所述负标识和各所述数据标识之间的对应关系,将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
进一步地,在本发明数据修正装置另一实施例中,所述形成单元还用于:
逐一抓取各所述正标识和各所述负标识对比,确定与抓取的所述正标识对应的目标负标识,并在抓取的所述正标识和所述目标负标识之间形成对应关系;
对各所述数据标识进行筛选,确定各所述数据标识中与所述对应关系中标识一致的目标数据标识,并将所述目标数据标识添加到所述对应关系中;
将与所述对应关系中各标识对应的正修正数据、负修正数据和待修正数据确定为具有相同预设标识的正修正数据、负修正数据和待修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
进一步地,在本发明数据修正装置另一实施例中,所述读取模块还用于:
当接收到待存储数据时,读取与所述待存储数据对应的账户标识,系统标识以及流水号;
所述数据修正装置还包括存储模块,所述存储模块用于:
将所述账户标识、所述系统标识和所述流水号生成为存储编码,并根据所述存储编码将所述待存储数据存储到所述预设数据库中。
进一步地,在本发明数据修正装置另一实施例中,所述存储模块还包括:
判断单元,用于判断所述预设数据库中是否存在与所述存储编码对应的历史编码,若存在与所述存储编码对应的历史编码,则将所述待存储数据剔除;
存储单元,用于若不存在与所述存储编码对应的历史编码,则将所述待存储数据存储到所述预设数据库中。
进一步地,在本发明数据修正装置另一实施例中,所述存储模块还包括:
下发单元,用于将与所述待存储数据对应的数值下发到与所述账户标识对应的用户账户中。
其中,上述数据修正装置的各虚拟功能模块存储于图3所示数据修正设备的存储器1005中,处理器1001执行数据修正程序时,实现图2所示实施例中各个模块的功能。
参照图3,图3是本发明实施例方法涉及的硬件运行环境的设备结构示意图。
本发明实施例数据修正设备可以是PC(personal computer,个人计算机),也可以是智能手机、平板电脑、电子书阅读器、便携计算机等终端设备。
如图3所示,该数据修正设备可以包括:处理器1001,例如CPU(CentralProcessing Unit,中央处理器),存储器1005,通信总线1002。其中,通信总线1002用于实现处理器1001和存储器1005之间的连接通信。存储器1005可以是高速RAM(random accessmemory,随机存取存储器),也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,该数据修正设备还可以包括用户接口、网络接口、摄像头、RF(RadioFrequency,射频)电路,传感器、音频电路、WiFi(Wireless Fidelity,无线宽带)模块等等。用户接口可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口还可以包括标准的有线接口、无线接口。网络接口可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
本领域技术人员可以理解,图3中示出的数据修正设备结构并不构成对数据修正设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图3所示,作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块以及数据修正程序。操作系统是管理和控制数据修正设备硬件和软件资源的程序,支持数据修正程序以及其它软件和/或程序的运行。网络通信模块用于实现存储器1005内部各组件之间的通信,以及与数据修正设备中其它硬件和软件之间通信。
在图3所示的数据修正设备中,处理器1001用于执行存储器1005中存储的数据修正程序,实现上述数据修正方法各实施例中的步骤。
本发明提供了一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者一个以上程序,所述一个或者一个以上程序还可被一个或者一个以上的处理器执行以用于实现上述数据修正方法各实施例中的步骤。
还需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个计算机可读存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是在本发明的构思下,利用本发明说明书及附图内容所作的等效结构变换,或直接/间接运用在其他相关的技术领域均包括在本发明的专利保护范围内。

Claims (7)

1.一种数据修正方法,其特征在于,所述数据修正方法包括以下步骤:
当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正;
所述根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正的步骤包括:
根据所述负修正数据将所述待修正数据的数值修正为标准数值,得到新的待修正数据;
根据所述正修正数据对所述新的待修正数据进行修正;
所述将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组的步骤包括:
读取各所述待修正数据的数据标识,以及读取各所述正修正数据和各所述负修正数据所携带的正标识和负标识;
根据各所述正标识、各所述负标识和各所述数据标识之间的对应关系,将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
所述根据各所述正标识、各所述负标识和各所述数据标识之间的对应关系,将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组的步骤包括:
逐一抓取各所述正标识和各所述负标识对比,确定与抓取的所述正标识对应的目标负标识,并在抓取的所述正标识和所述目标负标识之间形成对应关系;
对各所述数据标识进行筛选,确定各所述数据标识中与所述对应关系中标识一致的目标数据标识,并将所述目标数据标识添加到所述对应关系中;
将与所述对应关系中各标识对应的正修正数据、负修正数据和待修正数据确定为具有相同预设标识的正修正数据、负修正数据和待修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
2.如权利要求1所述的数据修正方法,其特征在于,所述当接收到修正请求时,读取与所述修正请求对应的筛选条件的步骤之前包括:
当接收到待存储数据时,读取与所述待存储数据对应的账户标识,系统标识以及流水号;
将所述账户标识、所述系统标识和所述流水号生成为存储编码,并根据所述存储编码将所述待存储数据存储到所述预设数据库中。
3.如权利要求2所述的数据修正方法,其特征在于,所述根据所述存储编码将所述待存储数据存储到所述预设数据库中的步骤包括:
判断所述预设数据库中是否存在与所述存储编码对应的历史编码,若存在与所述存储编码对应的历史编码,则将所述待存储数据剔除;
若不存在与所述存储编码对应的历史编码,则将所述待存储数据存储到所述预设数据库中。
4.如权利要求3所述的数据修正方法,其特征在于,所述将所述待存储数据存储到所述预设数据库中的步骤之后包括:
将与所述待存储数据对应的数值下发到与所述账户标识对应的用户账户中。
5.一种数据修正装置,其特征在于,所述数据修正装置包括:
筛选模块,用于当接收到修正请求时,读取与所述修正请求对应的筛选条件,并根据所述筛选条件对预设数据库中的数据进行筛选,确定待修正数据;
读取模块,用于读取与所述修正请求对应的正修正数据和负修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
修正模块,用于根据各所述修正数据组中的正修正数据和负修正数据,对各所述修正数据组中的待修正数据进行修正;
所述修正模块,还用于根据所述负修正数据将所述待修正数据的数值修正为标准数值,得到新的待修正数据;根据所述正修正数据对所述新的待修正数据进行修正;
所述读取模块,还用于读取各所述待修正数据的数据标识,以及读取各所述正修正数据和各所述负修正数据所携带的正标识和负标识;根据各所述正标识、各所述负标识和各所述数据标识之间的对应关系,将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组;
所述读取模块,还用于逐一抓取各所述正标识和各所述负标识对比,确定与抓取的所述正标识对应的目标负标识,并在抓取的所述正标识和所述目标负标识之间形成对应关系;对各所述数据标识进行筛选,确定各所述数据标识中与所述对应关系中标识一致的目标数据标识,并将所述目标数据标识添加到所述对应关系中;将与所述对应关系中各标识对应的正修正数据、负修正数据和待修正数据确定为具有相同预设标识的正修正数据、负修正数据和待修正数据,并将具有相同预设标识的正修正数据、负修正数据和待修正数据识别为同一修正数据组。
6.一种数据修正设备,其特征在于,所述数据修正设备包括:存储器、处理器、通信总线以及存储在所述存储器上的数据修正程序;
所述通信总线用于实现处理器和存储器之间的连接通信;
所述处理器用于执行所述数据修正程序,以实现如权利要求1-4中任一项所述的数据修正方法的步骤。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有数据修正程序,所述数据修正程序被处理器执行时实现如权利要求1-4中任一项所述的数据修正方法的步骤。
CN201910845756.9A 2019-09-06 2019-09-06 数据修正方法、装置、设备及计算机可读存储介质 Active CN110716927B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910845756.9A CN110716927B (zh) 2019-09-06 2019-09-06 数据修正方法、装置、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910845756.9A CN110716927B (zh) 2019-09-06 2019-09-06 数据修正方法、装置、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN110716927A CN110716927A (zh) 2020-01-21
CN110716927B true CN110716927B (zh) 2023-10-24

Family

ID=69209734

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910845756.9A Active CN110716927B (zh) 2019-09-06 2019-09-06 数据修正方法、装置、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110716927B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006313179A (ja) * 2005-05-06 2006-11-16 Mitsubishi Electric Corp 軌道地図データ修正装置及び軌道地図データ修正方法及び軌道地図データ修正プログラム
JP2010211341A (ja) * 2009-03-09 2010-09-24 Mitsubishi Electric Corp データ間リビジョン管理装置、データ間リビジョン管理方法及びデータ間リビジョン管理プログラム
CN103514259A (zh) * 2013-08-13 2014-01-15 江苏华大天益电力科技有限公司 一种基于数值关联性模型的异常数据探测及修正方法
CN106909811A (zh) * 2015-12-23 2017-06-30 腾讯科技(深圳)有限公司 用户标识处理的方法和装置
CN107341202A (zh) * 2017-06-21 2017-11-10 平安科技(深圳)有限公司 业务数据表修正危险度的评估方法、装置及存储介质
CN109506661A (zh) * 2019-01-11 2019-03-22 轻客小觅智能科技(北京)有限公司 一种机器人的定位方法、装置、机器人及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006313179A (ja) * 2005-05-06 2006-11-16 Mitsubishi Electric Corp 軌道地図データ修正装置及び軌道地図データ修正方法及び軌道地図データ修正プログラム
JP2010211341A (ja) * 2009-03-09 2010-09-24 Mitsubishi Electric Corp データ間リビジョン管理装置、データ間リビジョン管理方法及びデータ間リビジョン管理プログラム
CN103514259A (zh) * 2013-08-13 2014-01-15 江苏华大天益电力科技有限公司 一种基于数值关联性模型的异常数据探测及修正方法
CN106909811A (zh) * 2015-12-23 2017-06-30 腾讯科技(深圳)有限公司 用户标识处理的方法和装置
CN107341202A (zh) * 2017-06-21 2017-11-10 平安科技(深圳)有限公司 业务数据表修正危险度的评估方法、装置及存储介质
CN109506661A (zh) * 2019-01-11 2019-03-22 轻客小觅智能科技(北京)有限公司 一种机器人的定位方法、装置、机器人及存储介质

Also Published As

Publication number Publication date
CN110716927A (zh) 2020-01-21

Similar Documents

Publication Publication Date Title
CN107908485B (zh) 接口参数传递方法、装置、设备及计算机可读存储介质
CN109634837B (zh) 自动化测试方法、装置、设备及存储介质
US20140358605A1 (en) Methods and systems for crowdsourcing a task
CN107835520B (zh) wifi热点连接方法、装置及存储介质
CN110264156B (zh) 一种项目管理方法、装置、电子设备及存储介质
CN110264171B (zh) 分布式账单处理方法、装置、设备与计算机可读存储介质
CN110377356B (zh) 任务处理方法、装置、系统及计算机可读存储介质
CN109753555B (zh) 词语匹配方法、装置、设备及计算机可读存储介质
CN109933534B (zh) 一种确定金融测试对象的方法及装置
US20170032448A1 (en) Ordering program, ordering device, and ordering method
CN113032834A (zh) 一种数据库表格处理方法、装置、设备及存储介质
CN111913880A (zh) 一种应用软件测试方法及装置
CN107861765B (zh) 产品配置方法、设备和计算机可读存储介质
CN112529575A (zh) 风险预警方法、设备、存储介质及装置
CN111625580A (zh) 数据处理方法、装置及设备
CN109710510B (zh) 代码提交方法、装置、设备及可读存储介质
CN110569794A (zh) 物品的信息存储方法、装置和计算机可读存储介质
CN108346095B (zh) 联合系统的管控方法、装置、设备及计算机可读存储介质
CN112395182A (zh) 自动化测试方法、装置、设备及计算机可读存储介质
KR102466396B1 (ko) 상품 정보 관리 방법 및 장치
CN110716927B (zh) 数据修正方法、装置、设备及计算机可读存储介质
CN111506455B (zh) 服务发布结果的查验方法及装置
CN109857450B (zh) 一种校验服务编排方法及装置
CN107423140B (zh) 一种返回码识别方法和装置
CN114721943A (zh) 测试范围的确定方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant