CN110134576B - 一种批处理日志查询方法、终端及计算机可读存储介质 - Google Patents
一种批处理日志查询方法、终端及计算机可读存储介质 Download PDFInfo
- Publication number
- CN110134576B CN110134576B CN201910359308.8A CN201910359308A CN110134576B CN 110134576 B CN110134576 B CN 110134576B CN 201910359308 A CN201910359308 A CN 201910359308A CN 110134576 B CN110134576 B CN 110134576B
- Authority
- CN
- China
- Prior art keywords
- processing
- query
- log
- data
- processed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Computational Linguistics (AREA)
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及互联网大数据技术领域,尤其涉及大数据批量更新技术,具体涉及一种批处理日志查询方法、终端及计算机可读存储介质。其中,批处理日志查询方法可以包括批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目;批处理日志查询终端按照预设的数据清洗规则对所述若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号等步骤。本发明能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
Description
技术领域
本发明涉及互联网大数据技术领域,尤其涉及大数据批量更新技术,具体涉及一种批处理日志查询方法、终端及计算机可读存储介质。
背景技术
随着互联网技术发展,电子化的交易方式越来越普通,在这一过程中,技术人员通常采用批处理程序处理该交易方式所产生的海量数据条目。然而,由于,数据条目很多,技术人员难以在众多的数据条目中找到某一条数据条目的处理结果,也难以实时获知这些众多数据条目的整体处理情况,例如,无法实时获知众多数据条目有多少个数据条目处理成功、有多少个数据条目处理失败。
发明内容
本发明实施例所要解决的技术问题在于,提供批处理日志查询方法、终端及计算机可读存储介质,用于解决技术人员难以在众多的数据条目中找到某一条数据条目的处理结果,也难以实时获知这些众多数据条目的整体处理情况这个问题。
为了解决上述技术问题,本发明第一方面公开批处理日志查询方法,其中,该方法包括:
批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目;
批处理日志查询终端按照预设的数据清洗规则对所述若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号;
当批处理日志查询终端接收到针对所述清洗后的待处理数据条目的处理指令、且批处理日志查询终端按照所述处理指令对所述清洗后的待处理数据条目处理完毕后,设置所述清洗后的待处理数据条目的处理属性并以所述清洗后的待处理数据条目对应的唯一识别号为索引,将所述处理属性存储在日志数据库中;
所述批处理日志查询终端接收目标数据条目对应的处理结果查询指令,其中,所述处理结果查询指令包括至少一个查询条件;
所述批处理日志查询终端按照预设的显示模板显示所述处理结果查询指令对应的查询结果。
在本发明第一方面中,作为一种可选的实施方式,在所述批处理日志查询终端接收目标数据条目对应的处理结果查询指令之后,所述批处理日志查询终端按照预设的显示模板显示所述处理结果查询指令对应的查询结果之前,所述方法还包括:
所述批处理日志查询终端根据所述至少一个查询条件在预选存储在日志数据库中的日志数据查询所述目标处理数据条目的处理属性;
所述批处理日志查询终端根据将所述目标处理数据条目的处理属性标记为所述至少一个查询条件杜对应的所述查询结果。
在本发明第一方面中,作为一种可选的实施方式,所述处理属性包括所述待处理数据条目的处理时间、所述待处理数据条目的处理人标识、所述待处理数据条目的处理状态的至少一种。
在本发明第一方面中,作为一种可选的实施方式,在所述批处理日志查询终端根据将所述目标处理数据条目的处理属性标记为所述至少一个查询条件杜对应的所述查询结果之后,所述方法还包括:
所述批处理日志查询终端判断所述查询结果中是否存在两个以上目标数据条目对应的处理属性,若是,则按照每个目标数据条目对应的处理状态统计每种所述处理状态的数量,其中,所述处理状态包括处理中状态、处理成功状态、处理失败状态中的一种。
在本发明第一方面中,作为一种可选的实施方式,在所述批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目之前,所述方法还包括:
所述批处理日志查询终端接收所针对所述显示模板的设置参数,其中,所述设置参数包括所述显示模板对应的背景样式参数;
所述批处理日志查询终端根据所述设置参数构建所述显示模板。
在本发明第一方面中,作为一种可选的实施方式,在所述批处理日志查询终端按照预设的显示模板显示所述处理结果查询指令对应的查询结果之后,所述方法还包括:
所述批处理日志查询终端接收针对所述目标数据条目的修改指令,其中,所述修改指令包括针对所述处理属性的修改参数;
所述批处理日志查询终端根据所述修改参数修改所述处理属性;
所述批处理日志查询终端为所述处理属性增加修改人和修改时间;
所述批处理日志查询终端在所述日志数据库中更新所述目标数据对应的所述处理属性,其中,更新后的处理属性包括所述修改人和修改时间。
在本发明第一方面中,作为一种可选的实施方式,在所述批处理日志查询终端按照预设的显示模板显示所述处理结果查询指令对应的查询结果之后,所述批处理日志查询终端接收针对所述目标数据条目的修改指令之前,所述方法还包括:
所述批处理日志查询终端接所述修改人的登录认证信息,其中,所述登录认证信息包括修改人名称、所述修改人名称对应的修改权限,
所述批处理日志查询终端根据预先存储的用户数据库信息校验所述修改权限,若校验通过,则所述批处理日志查询终端执行接收针对所述目标数据条目的修改指令操作。
本发明第二方面公开了一种批处理日志查询终端,其中,所述终端包括获取模块、数据清洗模块、接收模块、设置模块、存储模块、显示模块,其中:
所述获取模块,用于从若干个数据中心中获取若干条待处理数据条目;
所述数据清洗模块,用于在所述获取模块从所述若干个数据中心中获取所述若干条待处理数据条目之后,按照预设的数据清洗规则对所述若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号;
所述接收模块,用于在所述数据清洗模块按照所述预设的数据清洗规则对所述若干条待处理数据条目进行清洗之后,接收针对所述清洗后的待处理数据条目的处理指令;
所述设置模块,用于在所述接收模块接收到针对所述清洗后的待处理数据条目的所述处理指令,且所述数据清洗模块按照所述处理指令对所述清洗后的待处理数据条目处理完毕后,设置所述清洗后的待处理数据条目的处理属性并以所述清洗后的待处理数据条目对应的唯一识别号为索引;
所述存储模块,用于在所述设置模块设置所述清洗后的待处理数据条目的处理属性并以所述清洗后的待处理数据条目对应的所述唯一识别号为索引之后,将所述处理属性存储在日志数据库中;
所述接收模块,还用于在所述存储模块将所述处理属性存储在日志数据库中之后,接收目标数据条目对应的处理结果查询指令,其中,所述处理结果查询指令包括至少一个查询条件;
所述显示模块,用于在所述接收模块接收到所述目标数据条目对应的所述处理结果查询指令之后,按照预设的显示模板显示所述处理结果查询指令对应的查询结果。
在本发明第二方面中,作为一种可选的实施方式,该终端还包括查询模块、标记模块,其中:
所述查询模块,用于在所述接收模块接收目标数据条目对应的处理结果查询指令之后,在所述显示模块按照预设的显示模板显示所述处理结果查询指令对应的查询结果之前,根据所述至少一个查询条件在预选存储在日志数据库中的日志数据查询所述目标处理数据条目的处理属性;
所述标记模块,用于在所述查询模块根据所述至少一个查询条件在预选存储在日志数据库中的日志数据查询所述目标处理数据条目的处理属性之后,根据将所述目标处理数据条目的处理属性标记为所述至少一个查询条件杜对应的所述查询结果。
在本发明第二方面中,作为一种可选的实施方式,所述处理属性包括所述待处理数据条目的处理时间、所述待处理数据条目的处理人标识、所述待处理数据条目的处理状态的至少一种。
在本发明第二方面中,作为一种可选的实施方式,该终端还包括判断模块、统计模块,其中:
所述判断模块,用于所述标记模块根据将所述目标处理数据条目的处理属性标记为所述至少一个查询条件杜对应的所述查询结果之后,判断所述查询结果中是否存在两个以上目标数据条目对应的处理属性;
所述统计模块,用于在所述判断模块判断出所述查询结果中存在两个以上目标数据条目对应的处理属性时,按照每个所述目标数据条目对应的处理状态统计每种所述处理状态的数量,其中,所述处理状态包括处理中状态、处理成功状态、处理失败状态中的一种。
在本发明第二方面中,作为一种可选的实施方式,该终端还包括构建模块,其中:
所述接收模块,还用于在所述获取模块从若干个数据中心中获取若干条待处理数据条目之前,接收所针对所述显示模板的设置参数,其中,所述设置参数包括所述显示模板对应的背景样式参数;
所述构建模块,用于在所述接收模块接收所针对所述显示模板的设置参数之后,根据所述设置参数构建所述显示模板。
在本发明第二方面中,作为一种可选的实施方式,该终端还包括修改模块、增加模块、更新模块,其中:
所述接收模块,还用于在所述显示模块按照预设的显示模板显示所述处理结果查询指令对应的查询结果之后,接收针对所述目标数据条目的修改指令,其中,所述修改指令包括针对所述处理属性的修改参数;
所述修改模块,用于在接收模块接收针对所述目标数据条目的修改指令之后,根据所述修改参数修改所述处理属性;
所述增加模块,用于在所述修改模块根据所述修改参数修改所述处理属性之后,为所述处理属性增加修改人和修改时间;
所述更新模块,用于在所述增加模块为所述处理属性增加修改人和修改时间之后,在所述日志数据库中更新所述目标数据对应的所述处理属性,其中,更新后的处理属性包括所述修改人和修改时间。
在本发明第二方面中,作为一种可选的实施方式,该终端还包括校验模块,其中:
所述接收模块,还用于在所述显示模块按照预设的显示模板显示所述处理结果查询指令对应的查询结果之后,在接收针对所述目标数据条目的修改指令之前,接所述修改人的登录认证信息,其中,所述登录认证信息包括修改人名称、所述修改人名称对应的修改权限;
所述校验模块,用于在接收模块接所述修改人的登录认证信息之后,根据预先存储的用户数据库信息校验所述修改权限,若校验通过,则触发所述接收模块执行接收针对所述目标数据条目的修改指令操作。
本发明第三方面公开了另一种批处理日志查询终端,其中,该终端包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行如本发明第一方面所述的批处理日志查询方法。
本发明第四方面提供了一种计算机可读存储介质,该计算机可读存储介质中存储有批处理日志查询程序,所述批处理日志查询程序被处理器执行时,执行如本发明第一方面所述的批处理日志查询方法。
与现有技术相比,本发明具有如下技术效果:
本发明能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一公开的一种批处理日志查询方法的流程示意图;
图2是本发明实施例二公开的一种批处理日志查询方法的流程示意图;
图3是本发明实施例三公开的一种批处理日志查询终端的结构示意图;
图4是本发明实施例四公开的一种批处理日志查询终端的结构示意图。
具体实施方式
为了更好地理解和实施,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
请参阅图1,图1是本发明实施例所示的一种批处理日志查询方法,如图1所示,该批处理日志查询方法可以包括步骤:
101、批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目;
102、批处理日志查询终端按照预设的数据清洗规则对若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号;
103、当批处理日志查询终端接收到针对清洗后的待处理数据条目的处理指令、且批处理日志查询终端按照处理指令对清洗后的待处理数据条目处理完毕后,设置清洗后的待处理数据条目的处理属性并以清洗后的待处理数据条目对应的唯一识别号为索引,将处理属性存储在日志数据库中;
104、批处理日志查询终端接收目标数据条目对应的处理结果查询指令,其中,处理结果查询指令包括至少一个查询条件;
105、批处理日志查询终端按照预设的显示模板显示处理结果查询指令对应的查询结果。
可见,本发明能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
实施例二
请参阅图2,图2是本发明实施例所示的一种批处理日志查询方法,如图2所示,该批处理日志查询方法可以包括步骤:
201、批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目;
202、批处理日志查询终端按照预设的数据清洗规则对若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号;
203、当批处理日志查询终端接收到针对清洗后的待处理数据条目的处理指令、且批处理日志查询终端按照处理指令对清洗后的待处理数据条目处理完毕后,设置清洗后的待处理数据条目的处理属性并以清洗后的待处理数据条目对应的唯一识别号为索引,将处理属性存储在日志数据库中;
204、批处理日志查询终端接收目标数据条目对应的处理结果查询指令,其中,处理结果查询指令包括至少一个查询条件;
205、批处理日志查询终端根据至少一个查询条件在预选存储在日志数据库中的日志数据查询目标处理数据条目的处理属性;
206、批处理日志查询终端根据将目标处理数据条目的处理属性标记为至少一个查询条件杜对应的查询结果;
207、批处理日志查询终端按照预设的显示模板显示处理结果查询指令对应的查询结果。
在本发明实施例中,作为一种可选的实施方式,在处理日志查询终端接收目标数据条目对应的处理结果查询指令之后,处理日志查询终端按照预设的显示模板显示处理结果查询指令对应的查询结果之前,方法还包括:
处理日志查询终端根据至少一个查询条件在预选存储在日志数据库中的日志数据查询目标处理数据条目的处理属性;
处理日志查询终端根据将目标处理数据条目的处理属性标记为至少一个查询条件杜对应的查询结果。
在本发明实施例中,作为一种可选的实施方式,处理属性包括待处理数据条目的处理时间、待处理数据条目的处理人标识、待处理数据条目的处理状态的至少一种。
在本发明实施例中,作为一种可选的实施方式,在处理日志查询终端根据将目标处理数据条目的处理属性标记为至少一个查询条件杜对应的查询结果之后,方法还包括:
批处理日志查询终端判断查询结果中是否存在两个以上目标数据条目对应的处理属性,若是,则按照每个目标数据条目对应的处理状态统计每种处理状态的数量,其中,处理状态包括处理中状态、处理成功状态、处理失败状态中的一种。
在本发明实施例中,作为一种可选的实施方式,在批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目之前,方法还包括:
批处理日志查询终端接收所针对显示模板的设置参数,其中,设置参数包括显示模板对应的背景样式参数;
批处理日志查询终端根据设置参数构建显示模板。
在本发明实施例中,作为一种可选的实施方式,在处理日志查询终端按照预设的显示模板显示处理结果查询指令对应的查询结果之后,方法还包括:
批处理日志查询终端接收针对目标数据条目的修改指令,其中,修改指令包括针对处理属性的修改参数;
批处理日志查询终端根据修改参数修改处理属性;
批处理日志查询终端为处理属性增加修改人和修改时间;
批处理日志查询终端在日志数据库中更新目标数据对应的处理属性,其中,更新后的处理属性包括修改人和修改时间。
在本发明实施例中,作为一种可选的实施方式,在处理日志查询终端按照预设的显示模板显示处理结果查询指令对应的查询结果之后,批处理日志查询终端接收针对目标数据条目的修改指令之前,方法还包括:
批处理日志查询终端接修改人的登录认证信息,其中,登录认证信息包括修改人名称、修改人名称对应的修改权限,
批处理日志查询终端根据预先存储的用户数据库信息校验修改权限,若校验通过,则批处理日志查询终端执行接收针对目标数据条目的修改指令操作。
可见,本发明能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
实施例三
请参阅图3,图3是本发明实施例所示的一种批处理日志查询终端的结构示意图,如图3所示,该批处理日志查询终端可以包括获取模块301、数据清洗模块302、接收模块303、设置模块304、存储模块305、显示模块306,其中:
获取模块301,用于从若干个数据中心中获取若干条待处理数据条目;
数据清洗模块302,用于在获取模块301从若干个数据中心中获取若干条待处理数据条目之后,按照预设的数据清洗规则对若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号;
接收模块303,用于在数据清洗模块302按照预设的数据清洗规则对若干条待处理数据条目进行清洗之后,接收针对清洗后的待处理数据条目的处理指令;
设置模块304,用于在接收模块303接收到针对清洗后的待处理数据条目的处理指令,且数据清洗模块302按照处理指令对清洗后的待处理数据条目处理完毕后,设置清洗后的待处理数据条目的处理属性并以清洗后的待处理数据条目对应的唯一识别号为索引;
存储模块305,用于在设置模块304设置清洗后的待处理数据条目的处理属性并以清洗后的待处理数据条目对应的唯一识别号为索引之后,将处理属性存储在日志数据库中;
接收模块303,还用于在存储模块305将处理属性存储在日志数据库中之后,接收目标数据条目对应的处理结果查询指令,其中,处理结果查询指令包括至少一个查询条件;
显示模块306,用于在接收模块303接收到目标数据条目对应的处理结果查询指令之后,按照预设的显示模板显示处理结果查询指令对应的查询结果。
在本发明实施例中,作为一种可选的实施方式,该终端还包括查询模块、标记模块,其中:
查询模块,用于在接收模块303接收目标数据条目对应的处理结果查询指令之后,在显示模块306按照预设的显示模板显示处理结果查询指令对应的查询结果之前,根据至少一个查询条件在预选存储在日志数据库中的日志数据查询目标处理数据条目的处理属性;
标记模块,用于在查询模块根据至少一个查询条件在预选存储在日志数据库中的日志数据查询目标处理数据条目的处理属性之后,根据将目标处理数据条目的处理属性标记为至少一个查询条件杜对应的查询结果。
在本发明实施例中,作为一种可选的实施方式,处理属性包括待处理数据条目的处理时间、待处理数据条目的处理人标识、待处理数据条目的处理状态的至少一种。
在本发明实施例中,作为一种可选的实施方式,该终端还包括判断模块、统计模块,其中:
判断模块,用于标记模块根据将目标处理数据条目的处理属性标记为至少一个查询条件杜对应的查询结果之后,判断查询结果中是否存在两个以上目标数据条目对应的处理属性;
统计模块,用于在判断模块判断出查询结果中存在两个以上目标数据条目对应的处理属性时,按照每个目标数据条目对应的处理状态统计每种处理状态的数量,其中,处理状态包括处理中状态、处理成功状态、处理失败状态中的一种。
在本发明实施例中,作为一种可选的实施方式,该终端还包括构建模块,其中:
接收模块303,还用于在获取模块301从若干个数据中心中获取若干条待处理数据条目之前,接收所针对显示模板的设置参数,其中,设置参数包括显示模板对应的背景样式参数;
构建模块,用于在接收模块303接收所针对显示模板的设置参数之后,根据设置参数构建显示模板。
在本发明实施例中,作为一种可选的实施方式,该终端还包括修改模块、增加模块、更新模块,其中:
接收模块303,还用于在显示模块306按照预设的显示模板显示处理结果查询指令对应的查询结果之后,接收针对目标数据条目的修改指令,其中,修改指令包括针对处理属性的修改参数;
修改模块,用于在接收模块303接收针对目标数据条目的修改指令之后,根据修改参数修改处理属性;
增加模块,用于在修改模块根据修改参数修改处理属性之后,为处理属性增加修改人和修改时间;
更新模块,用于在增加模块为处理属性增加修改人和修改时间之后,在日志数据库中更新目标数据对应的处理属性,其中,更新后的处理属性包括修改人和修改时间。
在本发明实施例中,作为一种可选的实施方式,该终端还包括校验模块,其中:
接收模块303,还用于在显示模块306按照预设的显示模板显示处理结果查询指令对应的查询结果之后,在接收针对目标数据条目的修改指令之前,接修改人的登录认证信息,其中,登录认证信息包括修改人名称、修改人名称对应的修改权限;
校验模块,用于在接收模块303接修改人的登录认证信息之后,根据预先存储的用户数据库信息校验修改权限,若校验通过,则触发接收模块303执行接收针对目标数据条目的修改指令操作。
可见,本发明能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
实施例四
请参阅图4,图4是本发明实施例公开的又一种批处理日志查询终端的结构示意图。如图4所示,该批处理日志查询终端可以包括:
存储有可执行程序代码的存储器401;
与存储器401耦合的处理器402;
处理器402调用存储器401中存储的可执行程序代码,执行实施例一~实施例二中任意一个实施例所描述的批处理日志查询方法中的步骤。
可见,本发明的批处理日志查询终端通过执行批处理日志查询方法,能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
实施例五
本发明实施例公开了一种计算机可读存储介质,其存储有批处理日志查询程序,其中,该批处理日志查询程序使得计算机执行实施例一~实施例二中任意一个实施例所描述的批处理日志查询方法中的步骤。
可见,本发明的计算机可读存储介质通过执行批处理日志查询方法,能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
实施例六
本发明实施例公开了一种计算机程序产品,该计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,且该计算机程序可操作来使计算机执行实施例一~实施例二中任意一个实施例所描述的批处理日志查询方法中的步骤。
可见,本发明的计算机程序产品通过执行批处理日志查询方法,能够在数据条目被处理后,将数据条目的处理记录保存在数据库中,进而当用户需要查看数据条目的处理状态时,可以以用户输入的查询条件从数据库中找到用户需要的处理状态信息,以便于用户实时了解到数据条目的处理状态。
以上所描述的装置实施例仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施例的具体描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(ErasableProgrammable Read Only Memory,EPROM)、一次可编程只读存储器(One-timeProgrammable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
最后应说明的是:本发明实施例公开的一种批处理日志查询方法及终端所揭露的仅为本发明较佳实施例而已,仅用于说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解;其依然可以对前述各项实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或替换,并不使相应的技术方案的本质脱离奔放各项实施例技术方案的精神和范围。
Claims (8)
1.一种批处理日志查询方法,其特征在于,所述方法包括:
批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目;
批处理日志查询终端按照预设的数据清洗规则对所述若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号;
当批处理日志查询终端接收到针对所述清洗后的待处理数据条目的处理指令、且批处理日志查询终端按照所述处理指令对所述清洗后的待处理数据条目处理完毕后,设置所述清洗后的待处理数据条目的处理属性并以所述清洗后的待处理数据条目对应的唯一识别号为索引,将所述处理属性存储在日志数据库中;其中,所述处理属性包括所述待处理数据条目的处理时间、所述待处理数据条目的处理人标识、所述待处理数据条目的处理状态的至少一种;
所述批处理日志查询终端接收目标数据条目对应的处理结果查询指令,其中,所述处理结果查询指令包括至少一个查询条件;
所述批处理日志查询终端根据所述至少一个查询条件在预选存储在日志数据库中的日志数据查询所述目标处理数据条目的处理属性;
所述批处理日志查询终端将所述目标处理数据条目的处理属性标记为所述至少一个查询条件对应的所述查询结果;
所述批处理日志查询终端按照预设的显示模板显示所述处理结果查询指令对应的查询结果。
2.如权利要求1所述的方法,其特征在于,在所述批处理日志查询终端根据将所述目标处理数据条目的处理属性标记为所述至少一个查询条件杜对应的所述查询结果之后,所述方法还包括:
所述批处理日志查询终端判断所述查询结果中是否存在两个以上目标数据条目对应的处理属性,若是,则按照每个所述目标数据条目对应的处理状态统计每种所述处理状态的数量,其中,所述处理状态包括处理中状态、处理成功状态、处理失败状态中的一种。
3.如权利要求1所述的方法,其特征在于,在所述批处理日志查询终端从若干个数据中心中获取若干条待处理数据条目之前,所述方法还包括:
所述批处理日志查询终端接收所针对所述显示模板的设置参数,其中,所述设置参数包括所述显示模板对应的背景样式参数;
所述批处理日志查询终端根据所述设置参数构建所述显示模板。
4.如权利要求1所述的方法,其特征在于,在所述批处理日志查询终端按照预设的显示模板显示所述处理结果查询指令对应的查询结果之后,所述方法还包括:
所述批处理日志查询终端接收针对所述目标数据条目的修改指令,其中,所述修改指令包括针对所述处理属性的修改参数;
所述批处理日志查询终端根据所述修改参数修改所述处理属性;
所述批处理日志查询终端为所述处理属性增加修改人和修改时间;
所述批处理日志查询终端在所述日志数据库中更新所述目标数据对应的所述处理属性,其中,更新后的处理属性包括所述修改人和修改时间。
5.如权利要求4所述的方法,其特征在于,在所述批处理日志查询终端按照预设的显示模板显示所述处理结果查询指令对应的查询结果之后,所述批处理日志查询终端接收针对所述目标数据条目的修改指令之前,所述方法还包括:
所述批处理日志查询终端接所述修改人的登录认证信息,其中,所述登录认证信息包括修改人名称、所述修改人名称对应的修改权限;
所述批处理日志查询终端根据预先存储的用户数据库信息校验所述修改权限,若校验通过,则所述批处理日志查询终端执行接收针对所述目标数据条目的修改指令操作。
6.一种批处理日志查询终端,其特征在于,所述终端包括获取模块、数据清洗模块、接收模块、设置模块、存储模块、查询模块、标记模块、显示模块,其中:
所述获取模块,用于从若干个数据中心中获取若干条待处理数据条目;
所述数据清洗模块,用于在所述获取模块从所述若干个数据中心中获取所述若干条待处理数据条目之后,按照预设的数据清洗规则对所述若干条待处理数据条目进行清洗,其中,每个清洗后的待处理数据条目对应的一个唯一识别号;
所述接收模块,用于在所述数据清洗模块按照所述预设的数据清洗规则对所述若干条待处理数据条目进行清洗之后,接收针对所述清洗后的待处理数据条目的处理指令;
所述设置模块,用于在所述接收模块接收到针对所述清洗后的待处理数据条目的所述处理指令,且所述数据清洗模块按照所述处理指令对所述清洗后的待处理数据条目处理完毕后,设置所述清洗后的待处理数据条目的处理属性并以所述清洗后的待处理数据条目对应的唯一识别号为索引;其中,所述处理属性包括所述待处理数据条目的处理时间、所述待处理数据条目的处理人标识、所述待处理数据条目的处理状态的至少一种;
所述存储模块,用于在所述设置模块设置所述清洗后的待处理数据条目的处理属性并以所述清洗后的待处理数据条目对应的所述唯一识别号为索引之后,将所述处理属性存储在日志数据库中;
所述接收模块,还用于在所述存储模块将所述处理属性存储在日志数据库中之后,接收目标数据条目对应的处理结果查询指令,其中,所述处理结果查询指令包括至少一个查询条件;
所述查询模块,用于在所述接收模块接收目标数据条目对应的处理结果查询指令之后,根据至少一个查询条件在预选存储在日志数据库中的日志数据查询目标处理数据条目的处理属性;
所述标记模块,用于在所述查询模块根据至少一个查询条件在预选存储在日志数据库中的日志数据查询目标处理数据条目的处理属性之后,将目标处理数据条目的处理属性标记为至少一个查询条件杜对应的查询结果;
所述显示模块,用于在所述接收模块接收到所述目标数据条目对应的所述处理结果查询指令之后,按照预设的显示模板显示所述处理结果查询指令对应的查询结果。
7.一种批处理日志查询终端,其特征在于,所述终端包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行如权利要求1-5任一项所述的批处理日志查询方法。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有批处理日志查询程序,所述批处理日志查询程序被处理器执行时,执行如权利要求1-5任一项所述的批处理日志查询方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910359308.8A CN110134576B (zh) | 2019-04-30 | 2019-04-30 | 一种批处理日志查询方法、终端及计算机可读存储介质 |
PCT/CN2019/117977 WO2020220640A1 (zh) | 2019-04-30 | 2019-11-13 | 一种批处理日志查询方法、终端及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910359308.8A CN110134576B (zh) | 2019-04-30 | 2019-04-30 | 一种批处理日志查询方法、终端及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110134576A CN110134576A (zh) | 2019-08-16 |
CN110134576B true CN110134576B (zh) | 2023-01-17 |
Family
ID=67575839
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910359308.8A Active CN110134576B (zh) | 2019-04-30 | 2019-04-30 | 一种批处理日志查询方法、终端及计算机可读存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN110134576B (zh) |
WO (1) | WO2020220640A1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110134576B (zh) * | 2019-04-30 | 2023-01-17 | 平安科技(深圳)有限公司 | 一种批处理日志查询方法、终端及计算机可读存储介质 |
CN113609162B (zh) * | 2021-07-14 | 2023-09-26 | 远景智能国际私人投资有限公司 | 操作记录的查询方法、装置、服务器及存储介质 |
CN114281049A (zh) * | 2021-12-29 | 2022-04-05 | 苏州赛美特科技有限公司 | 半导体清洗设备的控制系统、方法、电子设备及存储介质 |
CN116894032B (zh) * | 2023-09-05 | 2023-11-21 | 江苏数兑科技有限公司 | 一种基于数据探查分析结果自动生成数据清洗规则的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103631699A (zh) * | 2012-08-28 | 2014-03-12 | 纽海信息技术(上海)有限公司 | 日志管理系统及日志监控、获取和查询方法 |
CN107622084A (zh) * | 2017-08-10 | 2018-01-23 | 深圳前海微众银行股份有限公司 | 日志管理方法、系统以及计算机可读存储介质 |
CN108038253A (zh) * | 2018-01-23 | 2018-05-15 | 北京奇安信科技有限公司 | 一种日志查询的处理方法及装置 |
CN109388628A (zh) * | 2018-08-28 | 2019-02-26 | 平安科技(深圳)有限公司 | 系统日志查询方法、装置、计算机设备及存储介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101604437A (zh) * | 2009-07-22 | 2009-12-16 | 阿里巴巴集团控股有限公司 | 账户批量实时处理系统及账户批量实时处理方法 |
CN103942330B (zh) * | 2014-04-30 | 2018-05-01 | 深圳先进技术研究院 | 一种大数据的处理方法、系统 |
US20160078085A1 (en) * | 2014-09-17 | 2016-03-17 | Futurewei Technologies, Inc. | Method and system for adaptively building and updating a column store database from a row store database based on query demands |
CN107943802A (zh) * | 2016-10-12 | 2018-04-20 | 北京京东尚科信息技术有限公司 | 一种日志分析方法和系统 |
CN108415768B (zh) * | 2017-02-09 | 2022-03-25 | 财付通支付科技有限公司 | 一种数据批处理方法与系统 |
CN106980565B (zh) * | 2017-03-17 | 2020-08-21 | 北京潘达互娱科技有限公司 | 升级过程监控方法及装置 |
CN110134576B (zh) * | 2019-04-30 | 2023-01-17 | 平安科技(深圳)有限公司 | 一种批处理日志查询方法、终端及计算机可读存储介质 |
-
2019
- 2019-04-30 CN CN201910359308.8A patent/CN110134576B/zh active Active
- 2019-11-13 WO PCT/CN2019/117977 patent/WO2020220640A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103631699A (zh) * | 2012-08-28 | 2014-03-12 | 纽海信息技术(上海)有限公司 | 日志管理系统及日志监控、获取和查询方法 |
CN107622084A (zh) * | 2017-08-10 | 2018-01-23 | 深圳前海微众银行股份有限公司 | 日志管理方法、系统以及计算机可读存储介质 |
CN108038253A (zh) * | 2018-01-23 | 2018-05-15 | 北京奇安信科技有限公司 | 一种日志查询的处理方法及装置 |
CN109388628A (zh) * | 2018-08-28 | 2019-02-26 | 平安科技(深圳)有限公司 | 系统日志查询方法、装置、计算机设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2020220640A1 (zh) | 2020-11-05 |
CN110134576A (zh) | 2019-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110134576B (zh) | 一种批处理日志查询方法、终端及计算机可读存储介质 | |
CN111026797A (zh) | 业务数据处理方法、服务器及存储介质 | |
EP2936366B1 (en) | Method and system for network validation of information | |
EP3822790A1 (en) | Data processing method and device | |
CN109040970B (zh) | 基于云计算的业务规划办理方法及终端设备 | |
CN108415998B (zh) | 应用依赖关系更新方法、终端、设备及存储介质 | |
EP3706012A1 (en) | Data selection system and data selection method | |
CN111111210A (zh) | 一种网络游戏的物品整理方法和装置 | |
US20210081541A1 (en) | Vulnerability state report | |
CN114547351A (zh) | 名片管理装置、名片管理方法以及计算机可读介质 | |
CN113076112A (zh) | 数据库部署的方法、装置及电子设备 | |
CN112433935A (zh) | 测试方法、装置、电子设备及存储介质 | |
CN109189809B (zh) | 一种股东名称关联匹配的方法和装置 | |
CN111752958A (zh) | 智能关联标签方法、装置、计算机设备及存储介质 | |
CN110891097B (zh) | 一种跨设备用户识别方法及装置 | |
CN110502350B (zh) | 节点的调用方法、装置、终端及计算机可读存储介质 | |
CN109739876B (zh) | 基于Sqltoy-orm框架的数据库的数据查询方法和装置 | |
CN112241412A (zh) | 树形结构表的生成方法、装置和电子设备 | |
CN110609790A (zh) | 解析程序测试方法、装置、介质和计算机设备 | |
CN111160738A (zh) | 事件处理方法、装置、存储介质及电子装置 | |
CN116861101B (zh) | 用于社交匹配的数据处理方法和装置 | |
CN114048144A (zh) | 一种构建程序的方法、装置、计算机设备和介质 | |
CN116107561B (zh) | 一种基于低代码的动作节点快速构建方法、系统和存储介质 | |
CN116561769B (zh) | 厂商推荐方法、装置、设备及存储介质 | |
CN117407280A (zh) | 测试结果的确定方法及装置、存储介质及电子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |